JPH0449471A

JPH0449471A - 画像編集装置

Info

Publication number: JPH0449471A
Application number: JP2160933A
Authority: JP
Inventors: Toshiyuki Yoshitake; 敏幸吉武; Morihito Shiobara; 守人塩原; Koyo Nakagawa; 幸洋中川; Yoshiharu Arai; 荒井　美晴
Original assignee: Fujitsu Ltd
Current assignee: Fujitsu Ltd
Priority date: 1990-06-19
Filing date: 1990-06-19
Publication date: 1992-02-18
Anticipated expiration: 2013-12-16
Also published as: JP2837514B2

Abstract

(57)【要約】本公報は電子出願前の出願データであるた
め要約のデータは記録されません。

Description

【発明の詳細な説明】

［ｆｉ要］画像情報を入力して編集し、新たな画像を作成する画像
編集装置に関し、効率的な画像の編集を行うことを目的とし、画像情報を
読込んで色、明るさの濃淡、模様等が一様な部分を１つ
の領域と考えて画像を複数の領域に分割する領域分割部
と、該領域分割部で生成された領域の奥行き関係を決定
する階層構造生成部と、該階層構造生成部の出力を受け
て奥行きを幾つかの階層に分けて階層毎に画像情報を格
納する階層メモリと、ある階層の画像を移動した時に、
その移動前の領域を周囲の画像情報で補間する領域補間
部と、コマンド等の編集情報を人力して画像編集を行う
編集操作部と、前記階層メモリの出力を画像として表示
する画像表示部とて構成される。［産業上の利用分野］本発明は画像情報を入力して編集し、新たな画像を作成
する画像編集装置に関する。近年、コンピュータのマルチメディア化が行われるよう
になってきた。マルチメディアにおいては、音声情報等
と並んで画像情報か大きなウェイトを占める。このよう
な状況で、コンピュータに人力した画像をそのままの形
で利用するたけてなく、画像に対して何らかの加工を行
って、加工後の画像を表示したいという要求がある。例
えば、ある風景画像に対して、家の位置を移動させたり
、人物を書き加えたり、樹木の種類を変更したりするも
のである。そこでは、物体の色の変更１画像上での移動
、消去、他の画像の一部分の複写等を容易にかつ効率的
に行う画像編集装置が要求されている。［従来の技術］従来の画像編集においては、編集を行う領域を指定する
には、第８図（ａ）に示すように、領域を囲む境界をオ
ペレータがポインティングデバイス等で逐次指定してや
る必要があり、大きな労力を必要とした。そして、選択
した領域を移動させる時には、移動領域の指定、移動先
の指定を行って、画像上での移動を行っている。その場
合には、第８図（ｂ）に示すようにその時点て移動先１
に対して領域が上書きされる。この結果、元の位置２に
あった領域の情報は失われる。この結果、移動後の領域
２（斜線部）は空白になる。こう

【７て牛じた空白部分
への画像の補間は、オペレータの指示又は空白部分の周
囲の画像の情報からの推測によって行われる。編集作業
は、このような領域の移動の繰返しによって行われる。［発明が解決しようとする課題］従来の画像編集方法では、編集のために選択した領域を
移動させると、移動した領域を上書きしてｌ、まい、上
書きされた部分の画１象情報か失われてしまうという問
題かあった。また、第９図に示すように、ある領域の手
前で別の領域の後の空間に領域を移動させ、挿入すると
いうことは不ｉ’ｉＪ能であった。即ち、第９図におい
て、領域３が３′に移動し、領域４の手前て領域５の後
に挿入するということはできなかった。また、領域の移動により空白になった領域（図の斜線部
）をその周囲の領域から補間する場合も、周囲の情報を
用いるので、第１０図のように領域６から６−に移動す
る場合に、その周囲に複数の領域が４．５か存在する場
合にはどのような補間を行うか、判断が困難であるとい
う問題もあった。そして、補間を行った場合、その部分の画質は劣化する
場合が多いが、編集作業を繰返すと、移動。消去の度に空白になった部分の補間を行うので、画質の
劣化が大きくなるという問題もあった。本発明はこのような課題に鑑みてなされたものであって
、効率的な画像の編集を行うことができる画像編集装置
を提供することをＬｉ的としている。［課題を解決するためのｆ段］第１図は本発明の原理ブロック図である。図において、
１０は画像情報を読込んで色、明るさの濃淡、模様等が
一様な部分を１つの領域と考えて画像を複数の領域に分
割する領域分割部、１１は該領域分割部］０て生成され
た領域の奥行き関係を決定する階層構造生成部、１２は
該階層構造生成部１１の出力を受けて奥行きを幾つかの
階層に分けて階層毎に画像情報を格納する階層メモリ、
１３はある階層に画像を移動した時に、その移動前の領
域を周囲の画像情報て補間する領域補間部１３と、１４
はコマンド等の編集情報を入力１７て画像編集を行う編
集操作部、１５は前記階層メモリ１２の１１１力を画像
として表示する画像表示部である。［作用］領域分割部１０で領域を分割すると共に、階層構造生成
部１］て領域の階層化をｊｊい、階層化された領域毎の
画像データを階層メモリ１２に格納するようにする。こ
れにより、階層構造を保持したまま、領域の移動、削除
等か行える。その際、領域の指定は分割された領域単位
で容易に行うことができる。また、領域の移動、削除は
１つの階層メモリ単位内で行うので、他の階層の情報を
削除する不具合はなくなる。また、階層メモリ］２に対
して、階層化によって空白になった部分を補間する場合
、その周囲には階層化により１つの領域しか存在しなく
なるので、その領域で空白部を埋めれば補間が容易にな
る。このように（７て、本発明によれば効率的な画像の
編集を行うことができる。［実施例］以下、図面を参照して本発明の実施例を詳細に説明する
。先ず、第１図の原理図について更に詳細に説明する。領
域分割部１０は、前述したように画像情報を読込んで色
、明るさの濃淡、模様等が一様な部分を１つの領域と考
えて画像を複数の領域に分割するものである。第２図に
領域分割の例を示す。例えば、（ａ）に示すような原画像がある場合に、これ
を色、明るさの濃淡、模様等が一様と見なぜるような部
分（例えば月、家の屋根、壁、木）を１つの領域と考え
て画像を複数の領域に分割すると、（ｂ）に示すように
２１から２６の６個の領域に分割される。このようにして、分割された個々の領域が画像編集の対
象領域になる。編集における編集操作部１４からの領域
の指示は、ここで分割された領域の内部の点を指示する
た１ノで容易にｆｊうことかできる。また、領域分割部
１０では、自動的に行われた領域分割の結果を４ベレー
タが検証し、修止することができるようになっている。階層構造生成部１１は、前述したように領域分割部１０
で生成された領域の奥行き関係を決定するものである。第３図は階層構造生成部１１で生成された領域の階層構
造を示す図である。第２図と同一のものは、同一の７〕
号をイ・Ｉして示す。この奥行き関係は相対的なもので
よく、絶対的な距離の差は必要とｌ−ない。奥行き関係
は、画像の構造化技術を用いて求める。ここで、階層構
造生成部１］−では、自動的に生成された領域の階層化
の結果をオペレータが検証し、修正する機能を持つもの
とする。このように（７て、階層化された領域は、例えは３個の
階層化メモリ］２に書込まれる。階層化メモリ１２は、
第４図に示すように複数の画像メモリ（画像メモリ１〜
画像メモリ３）が階層構造をなして構成されており、以
降この画像メモリを階層メモリという。通常の画像では、領域の数が極めて多いので、全ての領
域を別々の階層として階層メモリに書込むことは不可能
である。そこで、階層生成部１１ては、編集操作部１４
からオペレータが指定してやることにより、幾つかの領
域を１つにまとめてグループ化し、１個の階層メモリに
格納するようにする。例えば、第２図において、領域２
５と２６は共に１つの木の一部分なので、１つの階層と
する。このように１７で、第４図においては、月か画像
メモリ１に、家が画像メモリ２に、木が画像メモリ３に
それぞれ格納されている。領域補間部１３は、各階層メモリ１２内の領域に対して
、階層化の結果、領域か他の階層となって領域が存在し
、なくなった空白部分の補間を行う。この補間方法は、空白部分の周囲を調べて、画像を生成
し、空白を埋めるものである。又は、周囲部分を＝１ビ
ーして行う。この場合、第５図に示すように階層化によ
って周囲には１つの領域しか存在しなくなるので、補間
は容易である。ここで、補間する領域の形状等をオペレ
ータが検証し、修正できる機能を持つものとする。画像の編集操作部］４は、各階層メモリ１２に対して、
階層メモリ】２を単位として画像編集操作を行う。画像
表示部］５では、階層メモリ１２の内容を奥行きが深い
ものから順に重ね合わせてオーバラップさせなから画１
象を表示する。これによって、編集結果の画像を逐次表
示することがＩＩＪ能となる。その際に、画像の情報を
失うことはない。また、画像表示部１５ては、画像を表
示する際に階層の順番を変更したり、特定の階層のみを
表示するようにして、編集作業の効率を上げることがで
きる。第６図は本発明の一実施例を示す構成ブロック図である
。第１図と同一のものは、同一の符号を付して示す。画
像入力部３０は編集対象となる画像を編集装置内に取入
れる。入力された画像は、領域分割部１０で色、明るさ
の濃淡、模様等が一様な領域に分割される。領域分割部
１０ては、先ずブロック分割部］、　Ｏａで画像を複数
の小さな矩形領域（ブロック）に分割する。次に、特徴
抽出部１．　Ｏｂで各ブロックの色、明るさといった特
徴を求め、ブロック併合部１０　ｃで特徴の似たブロッ
クを併合して領域を生成する。ブロック併合部１．　Ｏｃから出力された領域分割結果
は、対話部３１によって表示され、オペレータはその結
果を見ながら、不都合な部分に修正を加える。加えられ
た修正は、修正部１０　ｄによって領域分割結果に反映
される。修正を受けた領域分割結果は、階層構造生成部
１１に送られる。階層構造生成部１１では、先ず輪郭抽出部１］ａで領域
の輪郭線が抽出される。次に、輪郭解析部１　ｌ　ｂで
輪郭の構造が解析される。第７図に示すように、輪郭線
がＴ字型に交わる場合、木の構造からして領域■は領域
■、■より手前にあると考えることができる。ここでは
、画像中の全ての輪郭のＴ字の交わり関係を調べ、領域
の前後関係を調べる。構造解析部１１．　ｃは、輪郭解析部１１ｂで求められ
た局所的な輪郭構造から画像全体の階層構造を求める。ここで、求められた階層構造は、対話部３１によって表
示され、オペレータはその結果を見ながら不都合な部分
に修正を加える。同時に、幾つかの領域をまとめて１つ
の階層とするための複数の領域のグループ化を行う。そ
の結果は、修正・グループ化部１１　ｄによって階層化
結果に反映される。階層化された領域（グループ）は、
階層メモリ１２に階層を単位として書込まれる。書込まれた領域には、階層化による空白部が生じるが、
領域補間部１３によって必要に応して補間される。ここ
では、編集操作人力部３２から人力されるオペレータの
指示（補間する位置、補間する形、方法）に従い補間を
行う。補間は、同じ領域の他の部分をコピーする場合は
、補間領域生成部１．３　ｂにおいて、補間部分のコピ
ーを行う。一方、他の部分の模様を解析して同じ模様を作成する場
合は、画像解析部１３ａで他の部分の濃度平均１分散、
模様を近似するためのモデルパラメータを計算し、それ
から補間部分の画像を生成し、空白を埋めるという方法
を用いる。編集操作部１４は、編集操作入力部３２から入力される
操作を階層メモリを単位として行う。編集操作部１４て
は、必要に応じて画像データベス３３から、予め蓄積さ
れていた別の画像（領域）を読出してきてコピーするこ
ともできる。画像表示部１５は、階層メモリ］２の内容
を奥行きが深いものから順に重ね合わせてオーバーラツ
プさせながら画像を表示する。これによって、編集結果
の画像を逐次表示することが可能となる。また、画像表
示部１５では、表示する際に階層の順番を変更したり、
特定の階層のみを表示することも可能である。上述の説明では、領域分割をブロック分割による領域分
割としているが、他の手法による領域分割であってもよ
い。また、階層構造生成部を領域の輪郭線のＴ字交差を
用いた構造化としているが、だの手法による構造化であ
ってもよい。また、階層メモリは１個の画像メモリをソ
フトウェア的に階層化して、操作・表示を行ってもよい
。［発明の効果］以」−１詳細に説明したように、本発明によれば画像を
領域分割し、幾つかの領域をまとめて１−）のグループ
とし、これらグループ毎に階層メモリを設は一〇、階層
毎に補間等の画像編集を行うと共に、階層メモリをオー
バーラツプさせながら表示を行うことにより、効率的な
画像の編集を行うことができる画像編集装置を提（ｊ％
することができ、実用上の効果か大きい。

【図面の簡単な説明】

第１図は本発明の原理ブロック図、第２図は画像の領域分割例を示す図、第３図は領域の階層構造を示す図、第４図は階層メモリの構成例を示す図、第５図は階層化
後の補間の説明図、第６図は本発明の一実施例を示す構成ブロック図、第７図は領域の前後関係を示す図、第８図は従来の画像編集の説明図、第９図は他の領域の間への挿入を示す図、第１０図は補
間が困難な場合の例を示す図である。第１図において、］０は領域分割部、１］は階層構造生成部、１２は階層メモリ、１３は領域補間部、１４は編集操作部、１５は画像表示部である。

Claims

【特許請求の範囲】

（１）画像情報を読込んで色、明るさの濃淡、模様等が
一様な部分を１つの領域と考えて画像を複数の領域に分
割する領域分割部（１０）と、該領域分割部（１０）で生成された領域の奥行き関係を
決定する階層構造生成部（１１）と、該階層構造生成部（１１）の出力を受けて奥行きを幾つ
かの階層に分けて階層毎に画像情報を格納する階層メモ
リ　（１２）と、ある階層の画像を移動した時に、その移動前の領域を周
囲の画像情報で補間する領域補間部（１３）と、コマンド等の編集情報を入力して画像編集を行う編集操
作部（１４）と、前記階層メモリ（１２）の出力を画像として表示する画
像表示部（１５）とにより構成された画像編集装置。
（２）前記階層メモリ（１２）の各メモリを単位として
領域の補間及び領域の移動、消去等の編集作業を行うよ
うにしたことを特徴とする請求項１記載の画像編集装置
。
（３）前記階層メモリ（１２）の内容を奥行きが深いも
のから順に重ね合わせて、手前の領域が上になるように
オーバーラップさせながら画像表示部（１５）に表示さ
せるようにしたことを特徴とする請求項１記載の画像編
集装置。
（４）前記階層メモリ（１２）の奥行きの順序を変更す
る機能と、特定の階層メモリのみを表示する機能を具備
したことを特徴とする請求項１記載の画像編集装置。