JPH11306364A - 画像処理装置と画像データの処理方法 - Google Patents

画像処理装置と画像データの処理方法

Info

Publication number
JPH11306364A
JPH11306364A JP12168098A JP12168098A JPH11306364A JP H11306364 A JPH11306364 A JP H11306364A JP 12168098 A JP12168098 A JP 12168098A JP 12168098 A JP12168098 A JP 12168098A JP H11306364 A JPH11306364 A JP H11306364A
Authority
JP
Japan
Prior art keywords
correlation
objects
image data
information
configuration information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP12168098A
Other languages
English (en)
Inventor
Shuichi Okamura
秀一 岡村
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Canon Inc
Original Assignee
Canon Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Canon Inc filed Critical Canon Inc
Priority to JP12168098A priority Critical patent/JPH11306364A/ja
Priority to US09/289,740 priority patent/US6462749B1/en
Publication of JPH11306364A publication Critical patent/JPH11306364A/ja
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T17/00Three-dimensional [3D] modelling for computer graphics
    • G06T17/005Tree description, e.g. octree, quadtree

Landscapes

  • Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Geometry (AREA)
  • Software Systems (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Graphics (AREA)
  • Image Processing (AREA)
  • Processing Or Creating Images (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Image Analysis (AREA)
  • Studio Circuits (AREA)

Abstract

(57)【要約】 【課題】 構成情報を必要に応じて再構成することによ
り自然な表示画面を実現することができるようにした。 【解決手段】 時刻tを「0」に初期化し(S1)、ス
テップS2を経た後、通信網から送られてきた構成情報
から各ノード(オブジェクト)の属性情報(位置情報、
大きさ情報、表示時間情報)を抽出し(S3)、時刻t
と同一表示時間のオブジェクトを検出する(S4)。次
いで、検出されたノード(オブジェクト)の位置情報と
大きさ情報から各ノード(オブジェクト)間の包含関係
(相関関係)を取得し(S5)、該包含関係に基づいて
構成情報を再構成し(S6)、次いで、時刻tを所定フ
レーム速度だけ進ませ(S7)、その後ステップS2に
戻り上述の処理を繰り返す。

Description

【発明の詳細な説明】
【0001】
【発明の属する技術分野】本発明は画像処理装置と画像
データの処理方法に関し、より詳しくは複数のオブジェ
クト(物体)を有する画像データの構成情報を再構成す
る画像処理装置と該画像データの処理方法に関する。
【0002】
【従来の技術】近年における画像データの符号化技術の
高度化やコンピュータ技術の進展に伴い、画像データ中
に含まれる各オブジェクト毎に区分して符号化復号化処
理を施す画像処理システムが提案されている。該画像処
理システムにおいては、画像データをオブジェクト単位
で符号化することにより、各オブジェクトに対する最適
な符号化が可能となり符号化効率の向上を図ることがで
きる。
【0003】ところで、この種の画像処理システムにお
いては、画像データがオブジェクト毎に独自に符号化さ
れるので、復号化時にはこれら各オブジェクトを合成し
て符号化前の画像データに対応したシーン(画面)を作
成する必要があり、そのために構成情報というものが存
在する。そして、従来の画像処理装置においては、該構
成情報に基づいて画像データを表示画面上に表示してい
た。
【0004】図11は符号化復号化処理を経て画像処理
装置の表示画面に表示されたシーンの一例を示す図であ
って、該シーンは、道路と山とからなる背景51の中を
バス52が走行しており、バス52の中には運転手53
と乗客54が居る様子を映し出している。
【0005】そして、このシーンの構成情報は、図12
に示すように、「背景」ノード、「バス」ノード、「運
転手」ノード、「乗客」ノードからなるツリー状のノー
ド情報で記述される。これら各ノードは、一般的には映
像オブジェクトの他、音声オブジェクトも有しており、
さらに映像の表示位置を指示する位置情報や映像の大き
さを指示する大きさ情報等の空間座標情報、更には映像
の表示時刻を指示する時間情報等の映像属性情報を有し
ている。具体的には、「バス」、「運転手」、「乗
客」、「背景」の各ノードが画面全体に対する相対空間
座標情報や時間軸上の相対時刻情報等の属性情報を有し
ており、これら属性情報により、いつ、どこで、いかな
る映像オブジェクトを表示するかが決定される。
【0006】
【発明が解決しようとする課題】しかしながら、上記従
来の画像処理装置では、各オブジェクト間の相関関係を
もとに作られたシーンの構成情報でない場合、図13に
示すように、図12の構成情報から「バス」ノードを削
除すると、表示画面上には、図14に示すように、バス
52に関連するオブジェクトである運転手53と乗客5
4とが削除されずに残ってしまい不自然なシーンが表示
されるという問題点があった。
【0007】本発明はこのような問題点に鑑みなされた
ものであって、構成情報を必要に応じて再構成すること
により自然な表示画面を実現することができる画像処理
装置と画像データの処理方法を提供することを目的とす
る。
【0008】
【課題を解決するための手段】上記目的を達成するため
に本発明に係る画像処理装置は、オブジェクト単位に分
割された画像データの構成情報が入力される入力手段
と、該入力手段により入力された各オブジェクトを合成
して表示画面に画像データを表示する表示手段とを備え
た画像処理装置において、前記構成情報に基づいて各オ
ブジェクトの属性情報を抽出する属性情報抽出手段と、
該抽出手段の抽出結果に基づいて各オブジェクト間の相
関関係を取得する相関関係取得手段と、該相関関係取得
手段の取得結果に基づいて前記構成情報を変更する構成
情報変更手段とを備えていることを特徴としている。
【0009】また、本発明に係る画像データの処理方法
は、オブジェクト単位に分割された画像データの構成情
報を入力し、該入力された各オブジェクトを合成して表
示画面に画像データを表示する画像データの処理方法に
おいて、前記構成情報に基づいて各オブジェクトの属性
情報を抽出する属性情報抽出ステップと、該抽出ステッ
プの抽出結果に基づいて各オブジェクト間の相関関係を
取得する相関関係取得ステップと、該相関関係取得ステ
ップの取得結果に基づいて前記構成情報を変更する構成
情報変更ステップとを含んでいることを特徴としてい
る。
【0010】尚、本発明の他の特徴は、下記の発明の実
施の形態の記載から明かとなろう。
【0011】
【発明の実施の形態】以下、本発明の実施の形態を図面
に基づき詳説する。
【0012】図1は本発明に係る画像処理装置の一実施
の形態を示すブロック構成図であって、該画像処理装置
は、キーボードやペン入力可能なタブレット等からなる
入力部1と、オブジェクト単位で符号化された画像デー
タが復号化後に合成されて表示されるLCD等の表示部
2と、所定通信網3に接続されて該所定通信網3から送
られてくる符号化データを受けとるモデム4と、入力部
1やモデム4に入力される入力データ等を格納したり、
所定の符号化データが予め格納されている場合にそれを
取り出すハードディスクやフレキシブルディスク等のデ
ィスク装置5と、音声信号を出力するスピーカ6と、後
述する画像処理プログラムや各種データを格納したRO
M7と、演算結果を一時的に記憶したりワークエリアと
して使用するRAM8と、装置全体の制御を行うCPU
9とを備えている。
【0013】図2は本画像処理装置の表示部2の表示画
面に表示されるシーンの一例を示す図であって、道路と
山とからなる背景11の中をバス12が走行しており、
また、バス12には運転手13と乗客14が乗ってい
る。すなわち、本実施の形態では、「背景」、「バ
ス」、「運転手」及び「乗客」からなる4個の映像オブ
ジェクトを有しており、さらに、このシーンは、これら
各映像オブジェクトに対応して、夫々「ヒューヒュー」
という風の音、「Zzz....」という乗客の寝息、「ブ
ォーン」というバスのエンジン音、「発車します」とい
う運転手の声からなる4個の音声オブジェクトを有して
いる。すなわち、このシーンは8個のオブジェクトから
なる。
【0014】図3はツリー状に形成された構成情報であ
り、図2のシーンは該構成情報に基づいて合成される。
【0015】すなわち、本構成情報は、「背景」ノード
と、「バス」ノードと、「運転手」ノードと、「乗客」
ノードとからなり、各ノードは位置情報、大きさ情報、
表示時間情報からなる属性情報15a〜15dを有して
いる。この実施の形態では、位置情報は、背景11の映
像オブジェクトの左上点を原点A(0,0)として各オ
ブジェクトの左上点の座標位置を示している。具体的に
は、原点Aから右方向(x方向)、及び下方向(y方
向)を正の座標値とし、上記各ノードは、(x,y)=
(0,0)、(150,220)、(380,24
0)、(230,240)の如く位置情報を有してい
る。また、大きさ情報はオブジェクトの幅w及び高さh
からなり、上記各ノードは、(w,h)=(640,4
80)、(250,220)、(80,100)、(8
0,80)の大きさ情報を有している。さらに、表示時
間情報は、背景ノードに対する時間軸上の相対時刻情報
として有しており、各オブジェクトを同時に表示する場
合は、いずれも同一表示時間t(本実施の形態では0:
10:0)に設定される。
【0016】そして、これら各ノードは映像オブジェク
トの他、音声オブジェクトを有しており、これら映像オ
ブジェクトと音声オブジェクトとが対をなしてツリー状
の構成情報を形成している。
【0017】図4は本発明に係る画像データの処理方法
の処理手順を示すフローチャートであって、本プログラ
ムは図2のシーンから背景11のみを残存させたシーン
が得られるように再構成処理が施されている。尚、本プ
ログラムはCPU9で実行される。
【0018】まず、ステップS1では時刻tを「0」に
初期化し、次いでステップS2ではシーンが終了したか
否かを判断する。最初のループではステップS2の答は
否定(No)となるためステップS3に進み、図3の構
成情報から各ノード(オブジェクト)の属性情報(位置
情報、大きさ情報、表示時間情報)を抽出する。そし
て、続くステップS4では時刻tと同一表示時間のオブ
ジェクトを検出する。すなわち、時刻t(例えば、0時
10分00秒)と同一の表示時間のときにシーンに存在
しているオブジェクトを検出する。本実施の形態では各
ノードの表示時間情報は全て背景11の映像オブジェク
トの時刻tと同一であるので、「バス」ノード、「運転
手」ノード、「乗客」ノードが検出されることとなる。
【0019】次に、ステップS5では検出されたノード
(オブジェクト)の位置情報と大きさ情報から各ノード
(オブジェクト)間の包含関係を求め、相関関係を取得
する。
【0020】例えば、バス12の映像オブジェクトと乗
客14の映像オブジェクトとの間の包含関係について
は、数式(1)〜数式(4)の全てが成立したときに、
乗客14の映像オブジェクトはバス12の映像オブジェ
クトに包含され、両者は包含関係にあると判断する。
【0021】x0<x1 …(1) x0+w0>x1+w1 …(2) y0<y1 …(3) y0+h0>y1+h1 …(4) ここで、x0、y0はバス12の映像オブジェクトのx
方向、y方向の位置情報、x1、y1は乗客14の映像
オブジェクトのx方向、y方向の位置情報であり、w
0、h0はバス12の映像オブジェクトの幅、高さ、w
1、h1は乗客14の映像オブジェクトの幅、高さを示
す。尚、本実施の形態では、乗客14が映し出される最
大範囲、すなわち窓枠の幅w1、高さh1を乗客14に
関する映像オブジェクトの幅及び高さとしている。
【0022】そして、本実施の形態では、図3の構成情
報から、x0=150、x1=230であるので、数式
(1)が成立し、w0=250、w1=80であるの
で、400(=x0+w0)>310(=x1+w1)
となり数式(2)が成立する。また、y0=220、y
1=240であるので、数式(3)が成立し、h0=2
20、h1=80であるので、440(=y0+h0)
>320(=y1+h1)となって数式(4)が成立す
る。すなわち、数式(1)〜数式(4)が全て成立し、
乗客14の映像オブジェクトはバス12の映像オブジェ
クトに包含されることとなり、バス12と乗客14との
間には包含関係(親子関係)が成立する。同様に、バス
12と運転手13についても数式(1)〜数式(4)の
全てが成立し、運転手13の映像オブジェクトはバス1
2の映像オブジェクトに包含され、バス12と運転手1
3との間には包含関係(親子関係)が成立する。
【0023】このようにしてバス12の映像オブジェク
トと乗客14及び運転手13の映像オブジェクトとの間
に包含関係(親子関係)が成立し、したがってこれら三
者間にはバス12を親オブジェクト、乗客14及び運転
手13を該バス12の子オブジェクトとした相関関係が
取得され、プログラムはステップS6に進んでシーンの
再構成を行う。すなわち、構成情報は、「バス」ノード
が親ノードとなり、「運転手」ノード及び「乗客」ノー
ドが「バス」ノードの子ノードとなり、図6に示すよう
に、構成情報の再構成を行う。
【0024】次に、ステップS7に進み、時刻tを所定
フレーム速度だけ進ませる。例えば、シーンの再生速度
が30フレーム/sec (30シーン/sec )の場合は時
刻tに1/30を加算してステップS2に戻り、上述の
処理を繰り返す。そして、再現したい全てのシーンが終
了したときはステップS2の答が肯定(Yes)となっ
て処理を終了する。
【0025】このように本実施の形態では各オブジェク
ト間における包含関係を算出して各オブジェクト間の相
関関係を取得し、該相関関係に基づいて構成情報を再構
成しているので、例えば、図2のシーンからバス12を
削除する場合は、構成情報は図7に示すように「バス」
ノードのみならず、「バス」ノードの子ノードである
「運転手」ノード及び「乗客」ノードも削除され、「背
景」ノードのみが残ることとなる。したがって、シーン
には背景のみが映し出されることとなり、従来のように
(図14参照)、バス12をシーンから削除した場合に
運転手13や乗客14がシーンに残ってしまうという不
都合を解消することができる。
【0026】尚、上記第1の実施の形態では背景11の
映像オブジェクトのように画面全体の映像オブジェクト
を包含関係の作成対象から除外しているが、背景11の
オブジェクトの中に他の全てのオブジェクトが含まれる
として背景11を1番上の親オブジェクトとして構成情
報を再構成してもよい。
【0027】図8は本発明の第2の実施の形態に係る画
像データの処理方法の表示画面上のシーンを示す図であ
り、図9は再構成前の構成情報を示すツリー図である。
【0028】すなわち、本第2の実施の形態は山と道路
とからなる背景11、牽引車16、該牽引車16に牽引
される被牽引車17の3個のオブジェクトからなるシー
ンが表示部2の表示画面に映し出されている。
【0029】そして、本実施の形態では、位置情報と表
示時間情報とに基づき特定時刻における位置情報と所定
時間後における位置情報との偏位を算出して所定時間内
の移動量及び移動方向を求め、特定時刻と所定時間後の
時刻との間で被牽引車17と牽引車16との移動量及び
移動方向とが一致している場合にこれらオブジェクト相
互間には相関関係があると判断する。すなわち、この場
合は、牽引者16は被牽引者17を位置的には包含しな
いが、移動量と移動方向とが一致するため両者には相関
関係が存在すると判断し、図10に示すように、構成情
報を再構成する。これにより牽引車16が削除されると
被牽引者17も同時に削除され、表示部2の表示画面に
自然なシーンを映し出すことができる。
【0030】尚、本発明は上記実施の形態に限定される
ものではない、上記第1の実施の形態では位置情報と大
きさ情報とから包含関係を得ているが、上記第1の実施
の形態と第2の実施の形態とを組み合わせるのも好まし
い。すなわち、位置情報と表示時間情報とに基づき特定
時刻の位置情報と所定時間後の位置情報との偏位を算出
して所定時間内の移動量と移動方向を求め、特定時刻と
所定時間後の時刻との間の移動量と移動方向とが一致し
ている場合に互いに包含関係にある「バス」ノードと
「運転手」ノード及び「乗客」ノードとの間に相関関係
が存在すると判断して構成情報を再構成するようにして
もよい。
【0031】このような第1及び第2の実施の形態の組
み合わせは、例えば、看板がバス12の前に設置されて
いる場合やバス12とは異なる方向に該バス12の前を
鳥が飛んでいる場合の画像データの処理に好適する。す
なわち、これらの場合は乗客や運転手以外にも看板や鳥
についても位置的には包含関係を有するが、バス12に
乗っている運転手13と乗客14はいずれも移動量と移
動方向が同一であり相関関係を有するのに対し、看板が
バス12の前に設置されている場合やバス12とは異な
る方向に該バス12の前を鳥が飛んでいる場合はこれら
看板や鳥は所定表示時間毎の移動量と移動方向がバス1
2とは異なるため、バス12と看板や鳥との間には相関
関係を有さない。したがって前記移動量と前記移動方向
とが一致しているオブジェクト間のみについて相関関係
を取得することにより、バス12をシーンから削除する
場合に看板や鳥はシーンに残して乗客14と運転手13
のみをバス12と共にシーンから削除することが可能と
なり、自然なシーンを表示画面に映し出すことができ
る。
【0032】また、上記第2の実施の形態のように、移
動量と移動方向との相関関係のみで各ノード間に親子関
係を形成した場合は、偶然にバス12と並行して電車が
走行している場合にバス12と電車との間に相関関係が
存在すると判断される虞がある。そこで、例えば、各オ
ブジェクト間の位置情報と大きさ情報のみに基づいた包
含関係により相関関係を取得して構成情報を再構成すべ
きか、各オブジェクト間の移動量及び移動方向のみに基
づいて相関関係を取得して構成情報を再構成すべきか、
或いは前記包含関係及び移動量、移動方向の全てを考慮
して相関関係を取得して構成情報を再構成すべきかを所
定表示時間毎に判断し、状況に応じた相関関係が取得可
能となるように選択できるようにするのも好ましい。
【0033】尚、本発明は上記実施の形態に限定される
ものではない。上記実施の形態では所定通信網3から送
られてくる符号化データをモデム4で受け取っている
が、モデム4に代えて、或いはモデム4に加えて、ネッ
トワークカード装着部を設け、該ネットワークカード装
着部に装着されたネットワークカードを介して符号化デ
ータを受け取るように構成してもよい。
【0034】
【発明の効果】以上詳述したように本発明によれば、各
オブジェクト間の相関関係に基づいて構成情報を再構成
しているので、復号化時に特定オブジェクトを削除する
場合であっても該特定オブジェクトに関連するオブジェ
クトも同時に削除することができ、自然なシーンを容易
に作成することができる。
【図面の簡単な説明】
【図1】本発明に係る画像処理装置の一実施の形態を示
すブロック構成図である。
【図2】本画像処理装置を使用してオブジェクト単位の
画像データを合成したシーンの一例を示す図である。
【図3】図2の画像データの構成情報を示すツリー図で
ある。
【図4】本発明に係る画像データの処理方法(第1の実
施の形態)の処理手順を示すフローチャートである。
【図5】包含関係の作成方法を説明するための説明図で
ある。
【図6】第1の実施の形態により再構成された構成情報
のツリー図である。
【図7】図6のツリー図から「バス」ノード及び該「バ
ス」ノードと関連するノードを削除した構成情報のツリ
ー図である。
【図8】第2の実施の形態に係るシーンの状態を示す表
示画面である。
【図9】第2の実施の形態における構成情報の再構成前
におけるツリー図である。
【図10】第2の実施の形態における構成情報の再構成
後におけるツリー図である。
【図11】従来において、復号化されて合成されたシー
ンの一例を示す表示画面である。
【図12】図11の構成情報のツリー図である。
【図13】従来の画像データの処理方法で特定オブジェ
クトを削除した場合の構成情報のツリー図である。
【図14】従来の画像データの処理方法で特定オブジェ
クトを削除した場合のシーンを湿す表示画面である。
【符号の説明】
2 表示部(表示手段) 4 モデム(入力手段) 5 ディスク装置(入力手段) 9 CPU(属性情報抽出手段、相関関係取得手段、構
成情報変更手段、関連オブジェクト削除手段、移動量・
移動方向算出手段、判断手段)
───────────────────────────────────────────────────── フロントページの続き (51)Int.Cl.6 識別記号 FI H04N 5/262 G06F 15/70 460A 7/24 H04N 7/13 Z

Claims (14)

    【特許請求の範囲】
  1. 【請求項1】 オブジェクト単位に分割された画像デー
    タの構成情報が入力される入力手段と、該入力手段によ
    り入力された各オブジェクトを合成して表示画面に画像
    データを表示する表示手段とを備えた画像処理装置にお
    いて、 前記構成情報に基づいて各オブジェクトの属性情報を抽
    出する属性情報抽出手段と、該抽出手段の抽出結果に基
    づいて各オブジェクト間の相関関係を取得する相関関係
    取得手段と、該相関関係取得手段の取得結果に基づいて
    前記構成情報を変更する構成情報変更手段とを備えてい
    ることを特徴とする画像処理装置。
  2. 【請求項2】 前記抽出手段の抽出結果に基づいて包含
    関係を算出する包含関係算出手段を有し、 前記相関関係取得手段は、前記包含関係を有するオブジ
    ェクト間で相関関係を取得することを特徴とする請求項
    1記載の画像処理装置。
  3. 【請求項3】 前記属性情報に基づき所定表示時間毎に
    おける各オブジェクトの移動量及び移動方向を算出する
    移動量・移動方向算出手段を有し、 前記相関関係取得手段は、前記移動量及び前記移動方向
    が一致するオブジェクト間で相関関係を取得することを
    特徴とする請求項1又は請求項2記載の画像処理装置。
  4. 【請求項4】 オブジェクト単位に分割された画像デー
    タの構成情報が入力される入力手段と、該入力手段によ
    り入力された各オブジェクトを合成して表示画面に画像
    データを表示する表示手段とを備えた画像処理装置にお
    いて、 前記構成情報に基づいて各オブジェクトの属性情報を抽
    出する属性情報抽出手段と、少なくとも前記抽出手段の
    抽出結果に基づいて各オブジェクト間の相関関係を取得
    する相関関係取得手段と、前記属性情報に基づいて所定
    表示時間毎における各オブジェクトの移動量及び移動方
    向を算出する移動量・移動方向算出手段と、該移動量・
    移動方向算出手段の算出結果を考慮して前記構成情報を
    変更すべきか否かを判断する判断手段とを有し、 前記相関関係取得手段は、前記判断手段の判断結果が肯
    定的な場合は前記移動量及び前記移動方向が一致するオ
    ブジェクト間で相関関係を取得し、前記判断手段の判断
    結果が否定的な場合は前記抽出手段の抽出結果のみに基
    づいてオブジェクト間の相関関係を取得することを特徴
    とする画像処理装置。
  5. 【請求項5】 前記各オブジェクトから特定オブジェク
    トを削除する場合は、前記相関関係取得手段により取得
    された前記特定オブジェクトに関連する関連オブジェク
    トを前記特定オブジェクトと共に削除する関連オブジェ
    クト削除手段を有していることを特徴とする請求項1乃
    至請求項4のいずれかに記載の画像処理装置。
  6. 【請求項6】 前記属性情報は、少なくとも各オブジェ
    クトの位置情報、各オブジェクトの大きさを画定する大
    きさ情報、及び各オブジェクトの表示時間情報を含むこ
    とを特徴とする請求項1乃至請求項5のいずれかに記載
    の画像処理装置。
  7. 【請求項7】 所定通信網に接続され、各オブジェクト
    毎に分割された画像データが前記所定通信網を介して入
    力されることを特徴とする請求項1乃至請求項6のいず
    れかに記載の画像処理装置。
  8. 【請求項8】 オブジェクト単位に分割された画像デー
    タの構成情報を入力し、該入力された各オブジェクトを
    合成して表示画面に画像データを表示する画像データの
    処理方法において、 前記構成情報に基づいて各オブジェクトの属性情報を抽
    出する属性情報抽出ステップと、該抽出ステップの抽出
    結果に基づいて各オブジェクト間の相関関係を取得する
    相関関係取得ステップと、該相関関係取得ステップの取
    得結果に基づいて前記構成情報を変更する構成情報変更
    ステップとを含んでいることを特徴とする画像データの
    処理方法。
  9. 【請求項9】 前記抽出ステップの抽出結果に基づいて
    包含関係を算出し、前記相関関係取得ステップは、前記
    包含関係を有するオブジェクト間で相関関係を取得する
    ことを特徴とする請求項8記載の画像データの処理方
    法。
  10. 【請求項10】 前記属性情報に基づいて所定表示時間
    毎における各オブジェクトの移動量及び移動方向を算出
    する移動量・移動方向算出ステップを含み、 さらに、前記相関関係取得ステップは、前記移動量及び
    前記移動方向が一致するオブジェクト間で相関関係を取
    得することを特徴とする請求項8又は請求項9記載の画
    像データの処理方法。
  11. 【請求項11】 オブジェクト単位に分割された画像デ
    ータの構成情報を入力し、該入力された各オブジェクト
    を合成して表示画面に画像データを表示する画像データ
    の処理方法において、 前記構成情報に基づいて各オブジェクトの属性情報を抽
    出する属性情報抽出ステップと、該抽出ステップの抽出
    結果に基づいて各オブジェクト間の相関関係を取得する
    相関関係取得ステップと、前記属性情報に基づいて所定
    表示時間毎における各オブジェクトの移動量及び移動方
    向を算出する移動量・移動方向算出ステップと、該移動
    量・移動方向算出ステップの算出結果を考慮して前記構
    成情報を変更すべきか否かを判断する判断ステップとを
    含み、 さらに、前記相関関係取得ステップは、前記判断ステッ
    プの判断結果が肯定的な場合は前記移動量及び前記移動
    方向が一致するオブジェクト間で相関関係を取得し、前
    記判断ステップの判断結果が否定的な場合は前記抽出ス
    テップの抽出結果のみに基づいてオブジェクト間の相関
    関係を取得することを特徴とする画像データの処理方
    法。
  12. 【請求項12】 前記各オブジェクトから特定オブジェ
    クトを削除する場合は、前記相関関係取得ステップによ
    り取得された前記特定オブジェクトに関連する関連オブ
    ジェクトを前記特定オブジェクトと共に削除することを
    特徴とする請求項8乃至請求項11のいずれかに記載の
    画像データの処理方法。
  13. 【請求項13】 前記属性情報は、少なくとも各オブジ
    ェクトの位置情報、各オブジェクトの大きさを画定する
    大きさ情報、及び各オブジェクトの表示時間情報を含む
    ことを特徴とする請求項8乃至請求項12のいずれかに
    記載の画像データの処理方法。
  14. 【請求項14】 前記各オブジェクト毎に分割された画
    像データを所定通信網から入力することを特徴とする請
    求項8乃至請求項13のいずれかに記載の画像データの
    処理方法。
JP12168098A 1998-04-16 1998-04-16 画像処理装置と画像データの処理方法 Pending JPH11306364A (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP12168098A JPH11306364A (ja) 1998-04-16 1998-04-16 画像処理装置と画像データの処理方法
US09/289,740 US6462749B1 (en) 1998-04-16 1999-04-12 Image processing unit, image processing method, storage medium synthesizing a scenario including an object's position, size and display time

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP12168098A JPH11306364A (ja) 1998-04-16 1998-04-16 画像処理装置と画像データの処理方法

Publications (1)

Publication Number Publication Date
JPH11306364A true JPH11306364A (ja) 1999-11-05

Family

ID=14817226

Family Applications (1)

Application Number Title Priority Date Filing Date
JP12168098A Pending JPH11306364A (ja) 1998-04-16 1998-04-16 画像処理装置と画像データの処理方法

Country Status (2)

Country Link
US (1) US6462749B1 (ja)
JP (1) JPH11306364A (ja)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2016013147A1 (ja) * 2014-07-22 2016-01-28 パナソニックIpマネジメント株式会社 符号化方法、復号方法、符号化装置および復号装置
JP2022162793A (ja) * 2021-04-13 2022-10-25 株式会社モノリシックデザイン 画像処理プログラム、画像処理装置及び画像処理方法

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10360458B2 (en) * 2016-04-13 2019-07-23 GM Global Technology Operations LLC Method of calculating dimensions of a towed vehicle

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4835532A (en) * 1982-07-30 1989-05-30 Honeywell Inc. Nonaliasing real-time spatial transform image processing system
JPH07325934A (ja) * 1992-07-10 1995-12-12 Walt Disney Co:The 仮想世界に向上したグラフィックスを提供する方法および装置
US5712964A (en) * 1993-09-29 1998-01-27 Fujitsu Limited Computer graphics data display device and method based on a high-speed generation of a changed image
DE69523135T2 (de) * 1994-12-28 2002-05-02 Canon K.K., Tokio/Tokyo Bildverarbeitungsvorrichtung und Verfahren
CA2180975C (en) * 1995-07-11 2000-01-18 Tomoko Matsuzawa Scenario editor for multimedia data and scenario reproducing apparatus
JPH09152954A (ja) * 1995-11-30 1997-06-10 Toshiba Corp 情報提示方法及び情報提示装置
JP3219027B2 (ja) * 1996-08-28 2001-10-15 日本電気株式会社 シナリオ編集装置
US6084590A (en) * 1997-04-07 2000-07-04 Synapix, Inc. Media production with correlation of image stream and abstract objects in a three-dimensional virtual stage
US5990901A (en) * 1997-06-27 1999-11-23 Microsoft Corporation Model based image editing and correction

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2016013147A1 (ja) * 2014-07-22 2016-01-28 パナソニックIpマネジメント株式会社 符号化方法、復号方法、符号化装置および復号装置
JPWO2016013147A1 (ja) * 2014-07-22 2017-04-27 パナソニックIpマネジメント株式会社 符号化方法、復号方法、符号化装置および復号装置
US10225560B2 (en) 2014-07-22 2019-03-05 Sovereign Peak Ventures, Llc Coding method for coding moving image
JP2022162793A (ja) * 2021-04-13 2022-10-25 株式会社モノリシックデザイン 画像処理プログラム、画像処理装置及び画像処理方法

Also Published As

Publication number Publication date
US20020109703A1 (en) 2002-08-15
US6462749B1 (en) 2002-10-08

Similar Documents

Publication Publication Date Title
US6804398B2 (en) Method of describing object region data, apparatus for generating object region data, video processing apparatus and video processing method
US6798424B2 (en) Image processing method and apparatus and storage medium
JP2000030040A (ja) 画像処理装置及びコンピュータ読み取り可能な記憶媒体
CN108712644A (zh) 一种tw_ar智能导览系统及导览方法
JPH0997347A (ja) 映像生成装置
CN111918024A (zh) 一种城市路网数字化监控系统和方法
JP3538263B2 (ja) 画像生成方法
US7009606B2 (en) Method and apparatus for generating pseudo-three-dimensional images
JPH11306364A (ja) 画像処理装置と画像データの処理方法
KR102358854B1 (ko) 얼굴 이미지 색상 합성 장치 및 방법
CN110929078A (zh) 一种汽车语音形象换装方法、装置、设备及存储介质
JP2795084B2 (ja) 口形状画像合成方法及び装置
CN118627262A (zh) 一种自动驾驶仿真测试方法、系统及设备
KR20210066825A (ko) 전방향성 영상의 코딩 및 디코딩
JP3079669B2 (ja) 画像処理装置
KR102440916B1 (ko) 데이터 결합을 통한 3차원 문화재의 데이터베이스 구축방법 및 시스템
JP2003512802A (ja) 三次元モデリングのためのシステム及び方法
JP4886349B2 (ja) 模擬視界生成装置
JPH08101924A (ja) 画像合成方法
JP4226232B2 (ja) 画像処理装置、記憶媒体及びコンピュータプログラム
CN118890450B (zh) 一种视频播放方法、装置、设备、存储介质及程序产品
KR20250060993A (ko) 실시간 증강현실 객체 표시 시스템 및 방법
JP3093221B2 (ja) 画像処理装置
CN115146439A (zh) 一种无人车场景重建方法、装置、存储介质及终端
JPH11266449A (ja) 映像構造化装置及び映像化のためのプログラムを記録した記録媒体