JPH02226486A - 画像符号化合成装置 - Google Patents
画像符号化合成装置Info
- Publication number
- JPH02226486A JPH02226486A JP4709689A JP4709689A JPH02226486A JP H02226486 A JPH02226486 A JP H02226486A JP 4709689 A JP4709689 A JP 4709689A JP 4709689 A JP4709689 A JP 4709689A JP H02226486 A JPH02226486 A JP H02226486A
- Authority
- JP
- Japan
- Prior art keywords
- image
- information
- component
- color
- background
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Landscapes
- Processing Or Creating Images (AREA)
- Image Processing (AREA)
Abstract
(57)【要約】本公報は電子出願前の出願データであるた
め要約のデータは記録されません。
め要約のデータは記録されません。
Description
【発明の詳細な説明】
〈産業上のｆｌｌ用分野〉
本発明は部品画像と全体背景画像を符号化して保存し、
合成する画像符号化合成方式に関する。
合成する画像符号化合成方式に関する。
〈従来の技術〉
従来より、画像合成は次のようにして行なわれている。
すなわち、第１１図（ａ）に示す全体背景画像Ｂに第１
１図（ｂ）に示す矩形の部品画像ＰＩ。
１図（ｂ）に示す矩形の部品画像ＰＩ。
Ｐ、、Ｐ、ｌを第１１図（ｃ）に示すように重ね合わせ
て、合成画像Ａを得ている。
て、合成画像Ａを得ている。
そして、この合成画像Ａを符号化して保存し、復元する
方法としては次のものがある。
方法としては次のものがある。
■ 第１２図（ａ）に示すように、合成画像Ａ全体を一
つの画像とみなして圧縮処理を施して、符号化データを
記録保存し、この符号化データを復元して表示する方式
。
つの画像とみなして圧縮処理を施して、符号化データを
記録保存し、この符号化データを復元して表示する方式
。
■ 第１２図（ｂ）に示すように、全体背景画像Ｂの他
に、部品画像Ｐ２．Ｐｔ、Ｐｓ毎に圧縮処理を施して、
符号化データを記録し、画像を合成する際に、その符号
化データを復元して、各部品画像Ｐ＝、Ｐ２．Ｐ３のデ
ータで全体背景画像Ｂの所定位置のデータを置換して表
示する方式。
に、部品画像Ｐ２．Ｐｔ、Ｐｓ毎に圧縮処理を施して、
符号化データを記録し、画像を合成する際に、その符号
化データを復元して、各部品画像Ｐ＝、Ｐ２．Ｐ３のデ
ータで全体背景画像Ｂの所定位置のデータを置換して表
示する方式。
〈発明が解決しようとする課題〉
しかしながら、上記従来の画像符号化合成方式では、次
のような問題がある。
のような問題がある。
すなわち、■の方式では、合成画像全体Ａを保存するた
め、全体背景画像Ｂのデータ共有化、および部品画像Ｐ
１．Ｐ！、Ｐ３のデータを共有化することができず、全
体合成画像Ａ毎に保存しなければならず、保存すべきデ
ータ量が膨大になるという欠点がある。また、部品画像
Ｐ、、Ｐ、、Ｐ３を個別に扱って自由に移動することが
できないという問題がある。
め、全体背景画像Ｂのデータ共有化、および部品画像Ｐ
１．Ｐ！、Ｐ３のデータを共有化することができず、全
体合成画像Ａ毎に保存しなければならず、保存すべきデ
ータ量が膨大になるという欠点がある。また、部品画像
Ｐ、、Ｐ、、Ｐ３を個別に扱って自由に移動することが
できないという問題がある。
また、■、■の方式とも第１３図に示すように部品画像
Ｐ、Ａ部品画像Ｐｔを重ね合わせて表示したときに、部
品画像Ｐ＋、Ｐｚ中の植木およびいすからなる対象画像
０．．０．と部品画像Ｐ、、Ｐｒ中の背景画像ｂ＝、ｂ
ｔとの区別がつかないため、背景画像ｂｔの下になった
対象画ａＯ１が隠されて、見えない部分が生じるという
問題が生じる。あるいは第１４図に示すように、対象画
像Ｏ２の内部に穴Ｈ＋、Ｈｔがおいている場合、合成し
た際に本来、全体背景画像Ｂが見えるべき所）ｒ 、
、 Ｈ、が、部品画像Ｐ、の背景画像す、によって隠さ
れて、全体背景画像Ｂが見えなくなる場合があった。さ
らに第１２図（ｂ）において、■の方式で画像データを
圧縮符号化して保存しても、部品画像Ｐ １．Ｐ ｔ、
Ｐ ３には植木、額、いすからなる対象画像０．．０．
．０゜以外に背景画像す、、ｂ、、ｂ９を含むため、圧
縮しても無駄な情報が多く、計算時間ら長いという問題
がある。
Ｐ、Ａ部品画像Ｐｔを重ね合わせて表示したときに、部
品画像Ｐ＋、Ｐｚ中の植木およびいすからなる対象画像
０．．０．と部品画像Ｐ、、Ｐｒ中の背景画像ｂ＝、ｂ
ｔとの区別がつかないため、背景画像ｂｔの下になった
対象画ａＯ１が隠されて、見えない部分が生じるという
問題が生じる。あるいは第１４図に示すように、対象画
像Ｏ２の内部に穴Ｈ＋、Ｈｔがおいている場合、合成し
た際に本来、全体背景画像Ｂが見えるべき所）ｒ 、
、 Ｈ、が、部品画像Ｐ、の背景画像す、によって隠さ
れて、全体背景画像Ｂが見えなくなる場合があった。さ
らに第１２図（ｂ）において、■の方式で画像データを
圧縮符号化して保存しても、部品画像Ｐ １．Ｐ ｔ、
Ｐ ３には植木、額、いすからなる対象画像０．．０．
．０゜以外に背景画像す、、ｂ、、ｂ９を含むため、圧
縮しても無駄な情報が多く、計算時間ら長いという問題
がある。
そこで、この発明の目的は全体背景画像と部品画像とを
、あるいは部品画像と部品画像とを、部品画像中の対象
画像が背景画像に隠されないように、かつ部品画像中の
穴の部分に全体背景画像が表わされるように、画像合成
を行なうことができ、かつ、部品画像毎の取り扱いがで
き、位置ずれ、画質の劣化がなく、しかも圧縮符号化す
べきデータ量および計算量を少なくすることができる画
像符号化合成方式を提供することにある。
、あるいは部品画像と部品画像とを、部品画像中の対象
画像が背景画像に隠されないように、かつ部品画像中の
穴の部分に全体背景画像が表わされるように、画像合成
を行なうことができ、かつ、部品画像毎の取り扱いがで
き、位置ずれ、画質の劣化がなく、しかも圧縮符号化す
べきデータ量および計算量を少なくすることができる画
像符号化合成方式を提供することにある。
〈課題を解決するための手段〉
上記目的を達成するため、この発明の画像符号化合成方
式は、部品画像中から対象画像を切り出して、上記部品
画像における各画素が対象画像に 。
式は、部品画像中から対象画像を切り出して、上記部品
画像における各画素が対象画像に 。
含まれるか部品画像中の背景画像に含まれるかを判別す
るための領域情報を作成し、上記全体背景画像の各画素
の色情報および上記部品画像中の対象画像の各画素の色
情報を非可逆圧縮して保存する一方、上記部品画像の各
画素の領域情報を可逆圧縮して保存し、上記非可逆圧縮
された色情報を復号すると共に、上記可逆圧縮された領
域情報を復号して、上記部品画像中の対象画像の各画素
の色情報および上記領域情報と全体背景画像の各画素の
色情報とに基づいて上記部品画像中の対象画像と全体背
景画像とを合成することを特徴としている。
るための領域情報を作成し、上記全体背景画像の各画素
の色情報および上記部品画像中の対象画像の各画素の色
情報を非可逆圧縮して保存する一方、上記部品画像の各
画素の領域情報を可逆圧縮して保存し、上記非可逆圧縮
された色情報を復号すると共に、上記可逆圧縮された領
域情報を復号して、上記部品画像中の対象画像の各画素
の色情報および上記領域情報と全体背景画像の各画素の
色情報とに基づいて上記部品画像中の対象画像と全体背
景画像とを合成することを特徴としている。
また、上記領域情報には、部品画像中における対象画像
と背景画像との境界部を示すエツジ情報を含ませ、上記
エツジ情報に基づいて、上記境界部の色情報を作成する
ようにするのが望ましい。
と背景画像との境界部を示すエツジ情報を含ませ、上記
エツジ情報に基づいて、上記境界部の色情報を作成する
ようにするのが望ましい。
また、上記境界部の画素の色情報を、その境界部近くの
対象画像の画素の色情報と上記境界部近くの全体背景画
像の画素の色情報とから、エツジ情報に基づいて補間に
より作成するようにするのが望ましい。
対象画像の画素の色情報と上記境界部近くの全体背景画
像の画素の色情報とから、エツジ情報に基づいて補間に
より作成するようにするのが望ましい。
く作用〉
この発明によれば、部品画像は背景を対象と区別するた
めの領域情報として各画素毎にｍビットの符号をわりあ
て、領域情報が対象であると示している部分のみを圧縮
することによって情？！量や計算時間を少なくすること
ができる。また、領域情報によって部品画像中の対象画
像の部分とそうでない背景画像の部分か区別できるため
、ある部品画像の対象画像の上に別の部品画像の背景画
像が重ねられても対象画像のデータが消えるのを防止で
きる。また、対象画像中の穴の部分に全体背景画像を表
示できる。領域情報の圧縮は、人間の視覚特性が高い空
間分解能をもっており、位置のずれに対してはたいへん
敏感であることから、可逆な圧縮方式が用いられる。一
方、色情報は、それに対して視覚がそれ程鋭敏でないこ
とから、非可逆の圧縮が行われる。さらに、２枚以上の
画像を合成することによって部分画像中の対象画像と全
体背景画像との間の色の不整合が第１５図に示すように
生じるのを防ぐために、領域情報に対象画像のエツジの
情報を追加して、エツジの部分には全体背景画像の色情
報と部品画像の対象画像の色情報をまぜあわせた色をね
りあてることによって、境界の不整合が目立たないよう
にされる。
めの領域情報として各画素毎にｍビットの符号をわりあ
て、領域情報が対象であると示している部分のみを圧縮
することによって情？！量や計算時間を少なくすること
ができる。また、領域情報によって部品画像中の対象画
像の部分とそうでない背景画像の部分か区別できるため
、ある部品画像の対象画像の上に別の部品画像の背景画
像が重ねられても対象画像のデータが消えるのを防止で
きる。また、対象画像中の穴の部分に全体背景画像を表
示できる。領域情報の圧縮は、人間の視覚特性が高い空
間分解能をもっており、位置のずれに対してはたいへん
敏感であることから、可逆な圧縮方式が用いられる。一
方、色情報は、それに対して視覚がそれ程鋭敏でないこ
とから、非可逆の圧縮が行われる。さらに、２枚以上の
画像を合成することによって部分画像中の対象画像と全
体背景画像との間の色の不整合が第１５図に示すように
生じるのを防ぐために、領域情報に対象画像のエツジの
情報を追加して、エツジの部分には全体背景画像の色情
報と部品画像の対象画像の色情報をまぜあわせた色をね
りあてることによって、境界の不整合が目立たないよう
にされる。
このように、上記画像符号化合成方式によって作られた
合成画像は保存する時の情報量、符号化・復号化の計算
時間が少なく、また、部品画像毎の重ね合わせが的確か
つ自由にできる。また部品画像の対象画像と全体背景画
像との境界部の不整合がないため見ばえのよい合成画像
が得られる。
合成画像は保存する時の情報量、符号化・復号化の計算
時間が少なく、また、部品画像毎の重ね合わせが的確か
つ自由にできる。また部品画像の対象画像と全体背景画
像との境界部の不整合がないため見ばえのよい合成画像
が得られる。
〈実施例〉
第１図に本発明を実現するためのシステム構成の概略図
を示す。１．２はこれから処理を行う原稿、絵画、写真
等の画像データである。３は画像データ１．２を取り込
むカラースキャナ等の画像入力装置である。４は部品画
像を入力した場合に背景画像と対象画像を区別する処理
を行なって領域情報を作成する切り出し処理部である。
を示す。１．２はこれから処理を行う原稿、絵画、写真
等の画像データである。３は画像データ１．２を取り込
むカラースキャナ等の画像入力装置である。４は部品画
像を入力した場合に背景画像と対象画像を区別する処理
を行なって領域情報を作成する切り出し処理部である。
５はカラー全体背景画像及び部品画像中の対象画像の色
情報の圧縮処理を行う非可逆圧縮部、６は部品画像の領
域情報の圧縮処理を行う可逆圧縮部である。
情報の圧縮処理を行う非可逆圧縮部、６は部品画像の領
域情報の圧縮処理を行う可逆圧縮部である。
７は圧縮処理を終えたデータを記録・保存するハードデ
ィスク（ＨＤ）、フロッピーディスク（ＦＤ）。
ィスク（ＨＤ）、フロッピーディスク（ＦＤ）。
マグネティックテープ（ＭＴ）等の画像の記録再生装置
である。以上が符号化処理部である。以下に復号化処理
部について述べる。８は記録再生装置７から読み出した
データのうちカラー全体背景画像及び部品画像中の対象
画像の色情報を復元する非可逆復号化処理部、９は部品
画像の領域情報を復元する可逆復号化処理部、１０はカ
ラー全体背景画像と部品画像の合成を行う合成処理部、
１１は合成処理部ｌＯで合成された画像を表示する画像
表示装置である。
である。以上が符号化処理部である。以下に復号化処理
部について述べる。８は記録再生装置７から読み出した
データのうちカラー全体背景画像及び部品画像中の対象
画像の色情報を復元する非可逆復号化処理部、９は部品
画像の領域情報を復元する可逆復号化処理部、１０はカ
ラー全体背景画像と部品画像の合成を行う合成処理部、
１１は合成処理部ｌＯで合成された画像を表示する画像
表示装置である。
次に各部の処理について詳しく述べることにする。
人力画像が部品画像であると指定されているときは、切
り出し処理部４で対象画像と背景画像の領域を区別を行
なう。第２図に示すように点線で囲まれた３つの部品画
像Ｐ １． Ｐ ｔ 、 Ｐ ３について各々斜線部が
対象画像０．．０！、０３、それ以外が背景画像ｂ＋、
ｂｔ、ｂ３である。以後植木の処理過程について述べる
ことにする。このとき第３図に示されるように領域情報
としては背景画像の部分には０、対象画像の部分には１
を割り当てる。この処理はユーザが対話的に０と１を決
めることによって行われ、第４図に示すように、領域情
報は画像データの下位ｍビットに蓄えられる。従って画
像データがＱビット／画素であれば残りの（σ−ｍ）ビ
ットが色情報を蓄えるのに使用される。そのため画像デ
ータの下位ｍビットの情報は画像人力装置３から読みこ
んだものを失うことになる。しかし−船釣に人間の視覚
はＲ，Ｇ、Ｂ各８ビット／画素の下位２〜３ビツトの情
報の消失であれば劣化をほとんど感じないため、ｍの値
が小さければ視覚に及ぼす影響はほとんどない。切り出
し処理部４で作られた領域情報は可逆圧縮部６に送られ
る。人間の視覚特性は空間分解能が高いため、線９面の
位置（つまりエツジ）ずれ等には非常に敏感であること
から、領域情報は高い精度で復元されねばならない。
り出し処理部４で対象画像と背景画像の領域を区別を行
なう。第２図に示すように点線で囲まれた３つの部品画
像Ｐ １． Ｐ ｔ 、 Ｐ ３について各々斜線部が
対象画像０．．０！、０３、それ以外が背景画像ｂ＋、
ｂｔ、ｂ３である。以後植木の処理過程について述べる
ことにする。このとき第３図に示されるように領域情報
としては背景画像の部分には０、対象画像の部分には１
を割り当てる。この処理はユーザが対話的に０と１を決
めることによって行われ、第４図に示すように、領域情
報は画像データの下位ｍビットに蓄えられる。従って画
像データがＱビット／画素であれば残りの（σ−ｍ）ビ
ットが色情報を蓄えるのに使用される。そのため画像デ
ータの下位ｍビットの情報は画像人力装置３から読みこ
んだものを失うことになる。しかし−船釣に人間の視覚
はＲ，Ｇ、Ｂ各８ビット／画素の下位２〜３ビツトの情
報の消失であれば劣化をほとんど感じないため、ｍの値
が小さければ視覚に及ぼす影響はほとんどない。切り出
し処理部４で作られた領域情報は可逆圧縮部６に送られ
る。人間の視覚特性は空間分解能が高いため、線９面の
位置（つまりエツジ）ずれ等には非常に敏感であること
から、領域情報は高い精度で復元されねばならない。
そのため領域情報の圧縮は例えばランレノゲス符号化の
ような可逆方式が用いられる。部品画像中の対象画像や
カラー全体背景画像などの色情報は非可逆圧縮部５に送
られる。人間の視覚特性は色情報に対してはさほど敏感
ではないので、色情報については例えばＧ Ｂ Ｔ Ｃ
（Ｇｅｎｅｒａｌｉｚｅｄ ＢｌｏｃｋＴｒｕｎｃａｔ
ｉｏｎ Ｃｏｄｉｎｇ）、Ａ Ｄ ＣＴ （Ａｄａｐｔ
ｉｖｅ Ｄｉｓｃｒｅｔｅ Ｃｏ５１ｎｅ Ｔｒａｎｓ
ｆｏｒｍ）、Ｐ ＣＳ （ＰｒｏｇｒｅｓｓｉｖｅＣｏ
ｄｉｎｇ Ｓｃｈｅｍｅ）などの非可逆方式が用いられ
る。
ような可逆方式が用いられる。部品画像中の対象画像や
カラー全体背景画像などの色情報は非可逆圧縮部５に送
られる。人間の視覚特性は色情報に対してはさほど敏感
ではないので、色情報については例えばＧ Ｂ Ｔ Ｃ
（Ｇｅｎｅｒａｌｉｚｅｄ ＢｌｏｃｋＴｒｕｎｃａｔ
ｉｏｎ Ｃｏｄｉｎｇ）、Ａ Ｄ ＣＴ （Ａｄａｐｔ
ｉｖｅ Ｄｉｓｃｒｅｔｅ Ｃｏ５１ｎｅ Ｔｒａｎｓ
ｆｏｒｍ）、Ｐ ＣＳ （ＰｒｏｇｒｅｓｓｉｖｅＣｏ
ｄｉｎｇ Ｓｃｈｅｍｅ）などの非可逆方式が用いられ
る。
非可逆圧縮部５および可逆圧縮部６で圧縮されたデータ
は記録再生装置７に書き込まれ、保存される。
は記録再生装置７に書き込まれ、保存される。
次に復号化について述べる。記録再生装置７から読み出
された画像データは非可逆復号化部８で色情報が復号化
され、可逆復号化部９で部品画像の領域情報が復号化さ
れる。復号化されたカラー全体背景画像と部品画像は合
成処理部１０で合成される。ここでは部品画像の領域情
報を参照して、０（背景）のところはカラー全体背景画
像の色情報を合成処理部ＩＯの画像メモリに蓄える。一
方、領域情報が１（対象画像）のところは部品画像の色
情報を画像メモリに蓄える。この画像メモリに蓄えられ
た色情報を第５図に示すように画像表示装置１１に表示
することで画像合成が完了する。領域情報がＯの場合に
はカラー全体背景画像をそのまま表示するので、部品画
像が重なった場合や、部品画像の中に穴がある場合に対
しても見た目に自然な画像を出力することが可能である
。
された画像データは非可逆復号化部８で色情報が復号化
され、可逆復号化部９で部品画像の領域情報が復号化さ
れる。復号化されたカラー全体背景画像と部品画像は合
成処理部１０で合成される。ここでは部品画像の領域情
報を参照して、０（背景）のところはカラー全体背景画
像の色情報を合成処理部ＩＯの画像メモリに蓄える。一
方、領域情報が１（対象画像）のところは部品画像の色
情報を画像メモリに蓄える。この画像メモリに蓄えられ
た色情報を第５図に示すように画像表示装置１１に表示
することで画像合成が完了する。領域情報がＯの場合に
はカラー全体背景画像をそのまま表示するので、部品画
像が重なった場合や、部品画像の中に穴がある場合に対
しても見た目に自然な画像を出力することが可能である
。
しかしながら、領域情報に背景（０）と対象（１）の２
つの区別しかないために、この２つの領域の境界部では
第１５図に示すように色の不整合が生しることが多い。
つの区別しかないために、この２つの領域の境界部では
第１５図に示すように色の不整合が生しることが多い。
そこで領域情報にエツジ部をさらに設けて、この境界部
では背景と対象の中間色を補間によって得ることによっ
てエツジの不整合を抑える。例えば領域情報を背景（０
）、エツジ（１２）、対象（３）の４つに分ける。エツ
ジ（１，２）の違いは背景に近い中間色（１）と対象に
近い中間色（２）である。
では背景と対象の中間色を補間によって得ることによっ
てエツジの不整合を抑える。例えば領域情報を背景（０
）、エツジ（１２）、対象（３）の４つに分ける。エツ
ジ（１，２）の違いは背景に近い中間色（１）と対象に
近い中間色（２）である。
これを以下にもう少し具体的な例で説明する。
カラー全体背景画像データ（第１１図（ａ））、部品画
像データ（第１Ｉ図（ｂ））としては色の３成分Ｒ，Ｇ
、Ｂの値Ｃｒ、Ｃｇ、Ｃｂを画像人力装置から取り込む
。Ｃ１（ｉ＝ｒ、ｇ、ｂ）は８ビツトで０〜２’−１の
値をとるものとする。部品画像は切り出し処理部では以
下の処理を受ける。ユーザが対話的に切り出し処理を行
って、第６図に示すように、背景画像とみなしたところ
は領域情報は０、対象画像とみなしたところは領域情報
は３、エツジとみなしたところは場所によって領域情報
！または２と区別され、領域情報Ａ １（ｉ＝ Ｏ〜３
、Ａｉは２ビツト）が作られる。次に画像データＣ１（
ｉ＝ ｒ、ｇ、ｂ）の下位２ビツトを領域情報Ａｉでお
きかえ、色情報Ｃｉ°は上位６ビツトとする。つまり部
品画像データＸ ｉ（Ｘ ｉ： ８ビツト）は次式で表
わされる。
像データ（第１Ｉ図（ｂ））としては色の３成分Ｒ，Ｇ
、Ｂの値Ｃｒ、Ｃｇ、Ｃｂを画像人力装置から取り込む
。Ｃ１（ｉ＝ｒ、ｇ、ｂ）は８ビツトで０〜２’−１の
値をとるものとする。部品画像は切り出し処理部では以
下の処理を受ける。ユーザが対話的に切り出し処理を行
って、第６図に示すように、背景画像とみなしたところ
は領域情報は０、対象画像とみなしたところは領域情報
は３、エツジとみなしたところは場所によって領域情報
！または２と区別され、領域情報Ａ １（ｉ＝ Ｏ〜３
、Ａｉは２ビツト）が作られる。次に画像データＣ１（
ｉ＝ ｒ、ｇ、ｂ）の下位２ビツトを領域情報Ａｉでお
きかえ、色情報Ｃｉ°は上位６ビツトとする。つまり部
品画像データＸ ｉ（Ｘ ｉ： ８ビツト）は次式で表
わされる。
Ｃｉ’ −〇 ｉ＆ Ｆ Ｃ（ＩＩＸｃ ｉ’は部品画
像の色情報、（Ｈ）は１６進数を表す。） Ｘｉ＝Ｃ４’＋Ａｉ （Ａｉは領域情報）カラー全
体背景画像データは通常の非可逆符号化（例えばＧＢＴ
Ｃ，ＡＤＣＴ、ＶＱ、ＰＯ２等）の圧縮処理を行い、記
録再生装置７゛に書き込む。但し、このとき、この画像
がカラー全体背景画像であるか、部品画像であるかを示
す判別フラグを立てておく必要がある。部品画像Ｘｉは
上位６ヒツ１−Ｃｉ’と下位２ビツトＡＩに分離し、色
情報Ｃｉは非可逆圧縮部５に送り、領域情報が３（対象
画像）の画素のみ符号化処理を行う。つまり背景及びエ
ツジに対しては符号化処理を全く行わない。
像の色情報、（Ｈ）は１６進数を表す。） Ｘｉ＝Ｃ４’＋Ａｉ （Ａｉは領域情報）カラー全
体背景画像データは通常の非可逆符号化（例えばＧＢＴ
Ｃ，ＡＤＣＴ、ＶＱ、ＰＯ２等）の圧縮処理を行い、記
録再生装置７゛に書き込む。但し、このとき、この画像
がカラー全体背景画像であるか、部品画像であるかを示
す判別フラグを立てておく必要がある。部品画像Ｘｉは
上位６ヒツ１−Ｃｉ’と下位２ビツトＡＩに分離し、色
情報Ｃｉは非可逆圧縮部５に送り、領域情報が３（対象
画像）の画素のみ符号化処理を行う。つまり背景及びエ
ツジに対しては符号化処理を全く行わない。
領域情報が３の画素の色情報ＣＩ’は６ビノトであるか
ら２ピツト左シフトして８ヒツトＣｉ”にし、カラー全
体背景画像データと同様の非可逆圧縮の符号化処理を行
う。
ら２ピツト左シフトして８ヒツトＣｉ”にし、カラー全
体背景画像データと同様の非可逆圧縮の符号化処理を行
う。
Ｃｉ”＝Ｃｉ°×２２
部品画像の領域情報Ａｉは可逆圧縮部６で可逆符号化を
行う。以下に一例を示す。第６図（ａ）のデータの符号
化は０及び３の部分はＯ及び３という２ビツトの符号の
後に同じ符号が続く長さが付加される。符号の長さｎは
部品画像の横がＮ画素であれば ｎ＝ ［ｌｏｇｔＮ ＋ １ ］−［１ｏｇ２９ ＋
１ ］＝ ４で与えられる固定長符号である。なお、［
］はガウス記号である。またエツジ（１，２）は（１，
２）の符号を２ビツトで１または２が続く限り送る。第
７図は第６図の領域情報を符号化した結果である。
行う。以下に一例を示す。第６図（ａ）のデータの符号
化は０及び３の部分はＯ及び３という２ビツトの符号の
後に同じ符号が続く長さが付加される。符号の長さｎは
部品画像の横がＮ画素であれば ｎ＝ ［ｌｏｇｔＮ ＋ １ ］−［１ｏｇ２９ ＋
１ ］＝ ４で与えられる固定長符号である。なお、［
］はガウス記号である。またエツジ（１，２）は（１，
２）の符号を２ビツトで１または２が続く限り送る。第
７図は第６図の領域情報を符号化した結果である。
以上の符号化データを記録再生装置７に書込む。
以後このカラー全体背景画像と部品画像はこの２枚の組
合わせに限らず、今までに記録再生装置７に蓄えられた
別のデータと乙組み合わせて表示することが可能になる
。カラー全体背景画像の復号化処理は記録再生装置７か
らカラー背景画像のフラグの立っているデータを読み出
し、非可逆復号化処理部８に送る。ここで符号化データ
からカラー全体背景画像データが再生される。この画像
データは一時合成部１０の画像メモリに蓄えられる。
合わせに限らず、今までに記録再生装置７に蓄えられた
別のデータと乙組み合わせて表示することが可能になる
。カラー全体背景画像の復号化処理は記録再生装置７か
らカラー背景画像のフラグの立っているデータを読み出
し、非可逆復号化処理部８に送る。ここで符号化データ
からカラー全体背景画像データが再生される。この画像
データは一時合成部１０の画像メモリに蓄えられる。
部品画像の復号化処理は記録再生装置７から部品画像の
フラグの立ったデータを続出し、可逆復号化処理部９で
第６図（ａ）の領域情報を復号化する。
フラグの立ったデータを続出し、可逆復号化処理部９で
第６図（ａ）の領域情報を復号化する。
この領域情報を参照しながら非可逆復号化部８で部品画
像の対象画像の色情報を復号化する。このように、部品
画像の色情報の復号化は領域情報が３（対象画像）の画
素のみについて行われ、その結果は第８図（ａ）のよう
になる。これをカラー全体背景画像を蓄える画像メモリ
とは別の画像メモリに記憶する。この２枚の画像の合成
をする際、ユーザが部品画像の始点（ＸＯ、ｙｏ） （
第８図（ａ））をカラー全体背景画像の任意の位置（Ｘ
Ｓ、ｙｓ）（第８図（ｂ））に指定したとする。合成処
理部１０では部品画像の領域情報３（対象画像）に対応
するカラー全体背景画像の画素Ｃｉを部品画像の色情報
Ｓｉでおきかえるという処理を行う。領域情報がθ〜２
のときは処理を行わない。以上の処理を行ったときの第
８図（ｂ）の拡大図を第９図（ａ）に示す。次にエツジ
の処理を行う。部品画像の領域情報がｌ及び２の画素（
第６図（ａ）参照）に対応するカラー全体背景画像の画
素（第９図（ｂ））を見つけ、その画素に最も近い領域
情報が０である全体背景画像の画素および部品画像の対
象画像中の画素を見つけ、それらの色情報の値を背景及
び対象の代表値Ｈｉ、Ｔｉとする。注目画素に最ら近い
画素が複数個ある場合は各々平均値を代表値とする。こ
の代表値Ｈｉ。
像の対象画像の色情報を復号化する。このように、部品
画像の色情報の復号化は領域情報が３（対象画像）の画
素のみについて行われ、その結果は第８図（ａ）のよう
になる。これをカラー全体背景画像を蓄える画像メモリ
とは別の画像メモリに記憶する。この２枚の画像の合成
をする際、ユーザが部品画像の始点（ＸＯ、ｙｏ） （
第８図（ａ））をカラー全体背景画像の任意の位置（Ｘ
Ｓ、ｙｓ）（第８図（ｂ））に指定したとする。合成処
理部１０では部品画像の領域情報３（対象画像）に対応
するカラー全体背景画像の画素Ｃｉを部品画像の色情報
Ｓｉでおきかえるという処理を行う。領域情報がθ〜２
のときは処理を行わない。以上の処理を行ったときの第
８図（ｂ）の拡大図を第９図（ａ）に示す。次にエツジ
の処理を行う。部品画像の領域情報がｌ及び２の画素（
第６図（ａ）参照）に対応するカラー全体背景画像の画
素（第９図（ｂ））を見つけ、その画素に最も近い領域
情報が０である全体背景画像の画素および部品画像の対
象画像中の画素を見つけ、それらの色情報の値を背景及
び対象の代表値Ｈｉ、Ｔｉとする。注目画素に最ら近い
画素が複数個ある場合は各々平均値を代表値とする。こ
の代表値Ｈｉ。
Ｔｉから以下の式でエツジの画素値Ｅｉを求める。
ここでＺはエツジの領域情報（ｌまたは２）である。
ｍ−１
例として第９図（ｂ）のエツジＡの値は次のようにして
求める。Ａに最も近い背景の画素はＣだから、Ｈ八−２
０，Ａに最も近い対象の画素はＤだから、ＴＡ＝ Ｉ
ＯＯ１従って となる。こうして求めた結果を第１Ｏ図に示す。
求める。Ａに最も近い背景の画素はＣだから、Ｈ八−２
０，Ａに最も近い対象の画素はＤだから、ＴＡ＝ Ｉ
ＯＯ１従って となる。こうして求めた結果を第１Ｏ図に示す。
この処理によりエツジの部分で対象と背景の間の色の不
整合の発生を抑えることが可能になり、見ばえのする画
像を画像表示装置１１に表示することができる。
整合の発生を抑えることが可能になり、見ばえのする画
像を画像表示装置１１に表示することができる。
〈発明の効果〉
以上より明らかなように、本発明によれば、部品画像中
から対象画像を切り出して、部品画像中において対象画
像と背景画像とを区別するので、画像を合成した際に対
象画像が背景画像に隠されたりすることがなく、また、
対象画像中の穴の部分に全体背景画像を表示することが
できる。
から対象画像を切り出して、部品画像中において対象画
像と背景画像とを区別するので、画像を合成した際に対
象画像が背景画像に隠されたりすることがなく、また、
対象画像中の穴の部分に全体背景画像を表示することが
できる。
また、本発明によれば、全体背景画像の各画素の色情報
および部品画像中の対象画像の各画素の色情報を非可逆
圧縮して保存する一方、上記部品画像の各画素の領域情
報を可逆圧縮して保存するので、圧縮符号化および復号
化すべきデータｍおよび計算量を少なくでき、かつ位置
ずれおよび画質の劣化の殆んどない高品質の画像合成を
行なうことができる。
および部品画像中の対象画像の各画素の色情報を非可逆
圧縮して保存する一方、上記部品画像の各画素の領域情
報を可逆圧縮して保存するので、圧縮符号化および復号
化すべきデータｍおよび計算量を少なくでき、かつ位置
ずれおよび画質の劣化の殆んどない高品質の画像合成を
行なうことができる。
また、本発明によれば、上記領域情報に部品画像中にお
ける対象画像と背景画像との境界部を示すエツジ情報を
含ませ、上記境界部の画素の色情報を、その境界部近く
の対象画像の画素の色情報と上記境界部近くの全体背景
画像の画素の色情報とから、エツジ情報に基づいて補間
により作成するので、境界部に色の不整合が生じること
がない。
ける対象画像と背景画像との境界部を示すエツジ情報を
含ませ、上記境界部の画素の色情報を、その境界部近く
の対象画像の画素の色情報と上記境界部近くの全体背景
画像の画素の色情報とから、エツジ情報に基づいて補間
により作成するので、境界部に色の不整合が生じること
がない。
第１図は本発明のシステム構成の概略図、第２図は部品
画像の一例を示す図、第３図（ａ） 、 （ｂ）は原画
と領域情報を示す図、第４図は画像データの構成を示す
図、第５図は画像合成の一例を示す図、第６図（ａ）
、 （ｂ）は部品画像の領域情報を説明する図、第７図
は部品画像の符号化データを説明する図、第８図（ａ）
、 （ｂ）は画像の符号化データを説明する図、第９
図（ａ） 、 （ｂ）はエツジ処理を説明するための図
、第１θ図は復元画像のデータを説明する図、第１１図
（ａ） 、 （ｂ） 、 （ｃ）は従来の画像合成を説
明する図、第１２図（ａ） 、 （ｂ）は従来の部品画
像の圧縮方法を説明する図、第１３図、第１４図は従来
の画像合成の問題点を説明する図、第１５図は画像合成
した際の境界部の不整合を説明する図である。 ！・・カラー全体背景画像データ、 ２・・・部品画像データ、３・・画像入力装置、４・・
・切り出し処理部、５・非可逆圧縮部、６・・・可逆圧
縮部、７・・・記録再生装置、８・・非可逆復号化部、
９・・・可逆復号化部、１０・・・合成処理部、１１・
・・画像表示装置。 （（＋＋源画 第３図 （ｂｌ傾絨端轢 第４図 特 許 出 願 人 シャープ株式会社代 理 人
弁理士 前出 葆 ほか１名（Ｇ） ６図 （ｂ） 第８図 ち３ 品 画イ象中の文才裾球−シイ１に９図 （ａ ）＠乃（々ユ １里 （エ ツ 己ソ処玉里 Ｍ
）（ｂ）合成ヌル１里（二・・ル°り几王里）第１４図 第１３ 画像の 重加 第１５図
画像の一例を示す図、第３図（ａ） 、 （ｂ）は原画
と領域情報を示す図、第４図は画像データの構成を示す
図、第５図は画像合成の一例を示す図、第６図（ａ）
、 （ｂ）は部品画像の領域情報を説明する図、第７図
は部品画像の符号化データを説明する図、第８図（ａ）
、 （ｂ）は画像の符号化データを説明する図、第９
図（ａ） 、 （ｂ）はエツジ処理を説明するための図
、第１θ図は復元画像のデータを説明する図、第１１図
（ａ） 、 （ｂ） 、 （ｃ）は従来の画像合成を説
明する図、第１２図（ａ） 、 （ｂ）は従来の部品画
像の圧縮方法を説明する図、第１３図、第１４図は従来
の画像合成の問題点を説明する図、第１５図は画像合成
した際の境界部の不整合を説明する図である。 ！・・カラー全体背景画像データ、 ２・・・部品画像データ、３・・画像入力装置、４・・
・切り出し処理部、５・非可逆圧縮部、６・・・可逆圧
縮部、７・・・記録再生装置、８・・非可逆復号化部、
９・・・可逆復号化部、１０・・・合成処理部、１１・
・・画像表示装置。 （（＋＋源画 第３図 （ｂｌ傾絨端轢 第４図 特 許 出 願 人 シャープ株式会社代 理 人
弁理士 前出 葆 ほか１名（Ｇ） ６図 （ｂ） 第８図 ち３ 品 画イ象中の文才裾球−シイ１に９図 （ａ ）＠乃（々ユ １里 （エ ツ 己ソ処玉里 Ｍ
）（ｂ）合成ヌル１里（二・・ル°り几王里）第１４図 第１３ 画像の 重加 第１５図
Claims (3)
- （１）部品画像と全体背景画像を符号化して保存し、合
成する画像符号化合成方式において、上記部品画像中か
ら対象画像を切り出して、上記部品画像における各画素
が対象画像に含まれるか部品画像中の背景画像に含まれ
るかを判別するための領域情報を作成し、 上記全体背景画像の各画素の色情報および上記部品画像
中の対象画像の各画素の色情報を非可逆圧縮して保存す
る一方、上記部品画像の各画素の領域情報を可逆圧縮し
て保存し、上記非可逆圧縮された色情報を復号すると共
に、上記可逆圧縮された領域情報を復号して、上記部品
画像中の対象画像の各画素の色情報および上記領域情報
と全体背景画像の各画素の色情報とに基づいて上記部品
画像中の対象画像と全体背景画像とを合成することを特
徴とする画像符号化合成方式。 - （２）請求項１に記載の画像符号化合成方式において、 上記領域情報には、部品画像中における対象画像と背景
画像との境界部を示すエッジ情報を含んでおり、上記エ
ッジ情報に基づいて、上記境界部の色情報を作成するこ
とを特徴とする画像符号化合成方式。 - （３）請求項２に記載の画像符号化合成方式において、 上記境界部の画素の色情報を、その境界部近くの対象画
像の画素の色情報と上記境界部近くの全体背景画像の画
素の色情報とから、エッジ情報に基づいて補間により作
成することを特徴とする画像符号化合成方式。
Priority Applications (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP1047096A JPH07104919B2 (ja) | 1989-02-28 | 1989-02-28 | 画像符号化合成装置 |
| US07/994,601 US5267333A (en) | 1989-02-28 | 1992-12-21 | Image compressing apparatus and image coding synthesizing method |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP1047096A JPH07104919B2 (ja) | 1989-02-28 | 1989-02-28 | 画像符号化合成装置 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JPH02226486A true JPH02226486A (ja) | 1990-09-10 |
| JPH07104919B2 JPH07104919B2 (ja) | 1995-11-13 |
Family
ID=12765657
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP1047096A Expired - Fee Related JPH07104919B2 (ja) | 1989-02-28 | 1989-02-28 | 画像符号化合成装置 |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JPH07104919B2 (ja) |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH0546161A (ja) * | 1991-08-12 | 1993-02-26 | Casio Comput Co Ltd | 仮想現実表示装置 |
| JP2000350236A (ja) * | 2000-01-01 | 2000-12-15 | Casio Comput Co Ltd | 画像表示装置 |
Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPS6148073A (ja) * | 1984-08-10 | 1986-03-08 | エヌ・ベー・フイリツプス・フルーイランペンフアブリケン | 合成画像の生成及び変更方法 |
| JPS61175863A (ja) * | 1985-01-31 | 1986-08-07 | Fujitsu Ltd | 画像合成方式 |
| JPS62126473A (ja) * | 1985-11-28 | 1987-06-08 | Canon Inc | 画像合成装置 |
| JPS62197874A (ja) * | 1986-02-25 | 1987-09-01 | Photo Composing Mach Mfg Co Ltd | 画像処理装置 |
| JPS62222373A (ja) * | 1986-03-24 | 1987-09-30 | Sharp Corp | 画像処理装置 |
| JPS6385984A (ja) * | 1986-09-30 | 1988-04-16 | Canon Inc | 画像処理装置 |
-
1989
- 1989-02-28 JP JP1047096A patent/JPH07104919B2/ja not_active Expired - Fee Related
Patent Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPS6148073A (ja) * | 1984-08-10 | 1986-03-08 | エヌ・ベー・フイリツプス・フルーイランペンフアブリケン | 合成画像の生成及び変更方法 |
| JPS61175863A (ja) * | 1985-01-31 | 1986-08-07 | Fujitsu Ltd | 画像合成方式 |
| JPS62126473A (ja) * | 1985-11-28 | 1987-06-08 | Canon Inc | 画像合成装置 |
| JPS62197874A (ja) * | 1986-02-25 | 1987-09-01 | Photo Composing Mach Mfg Co Ltd | 画像処理装置 |
| JPS62222373A (ja) * | 1986-03-24 | 1987-09-30 | Sharp Corp | 画像処理装置 |
| JPS6385984A (ja) * | 1986-09-30 | 1988-04-16 | Canon Inc | 画像処理装置 |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH0546161A (ja) * | 1991-08-12 | 1993-02-26 | Casio Comput Co Ltd | 仮想現実表示装置 |
| JP2000350236A (ja) * | 2000-01-01 | 2000-12-15 | Casio Comput Co Ltd | 画像表示装置 |
Also Published As
| Publication number | Publication date |
|---|---|
| JPH07104919B2 (ja) | 1995-11-13 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US5267333A (en) | Image compressing apparatus and image coding synthesizing method | |
| US6356297B1 (en) | Method and apparatus for displaying panoramas with streaming video | |
| US8520009B1 (en) | Method and apparatus for filtering video data using a programmable graphics processor | |
| EP1794714B1 (en) | Magnification and pinching of two-dimensional images | |
| EP0358498B1 (en) | Method and apparatus for generating animated images | |
| US6803968B1 (en) | System and method for synthesizing images | |
| CA2559131A1 (en) | Stereoscopic parameter embedding apparatus and stereoscopic image reproducer | |
| EP0377725B1 (en) | A method and apparatus for manipulating video image signals | |
| JPH0765197A (ja) | 画像処理方法と装置 | |
| CA1254996A (en) | Interpolator for television special effects system | |
| US6525741B1 (en) | Chroma key of antialiased images | |
| US20030067560A1 (en) | Method for coding data of special effect | |
| JP3645922B2 (ja) | 画像処理方法及び装置 | |
| CN114549270A (zh) | 结合深度鲁棒水印和模板同步的抗拍摄监控视频水印方法 | |
| WO1999065224A3 (en) | Creating animation from a video | |
| CN110267079B (zh) | 待播放视频中人脸的替换方法和装置 | |
| JPH02226486A (ja) | 画像符号化合成装置 | |
| US6181350B1 (en) | Apparatus for, and method of, interpolating between graphics and video pixels in an expanded image | |
| CN1939052A (zh) | 显示装置 | |
| JP3533754B2 (ja) | 画像合成装置 | |
| US20260011037A1 (en) | Streaming method and system for providing reality content and computer-readable storage medium | |
| JPH07134769A (ja) | 画像合成におけるアンチエリアシング処理方法 | |
| TW201138473A (en) | Method for processing image files | |
| EP1163800A1 (en) | Image compression and decompression | |
| JP3062507B2 (ja) | 画像符号化装置及び画像復号装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| LAPS | Cancellation because of no payment of annual fees |