JP2001197366A - 画像合成方法及び画像合成プログラムを記録した記録媒体 - Google Patents
画像合成方法及び画像合成プログラムを記録した記録媒体Info
- Publication number
- JP2001197366A JP2001197366A JP2000003186A JP2000003186A JP2001197366A JP 2001197366 A JP2001197366 A JP 2001197366A JP 2000003186 A JP2000003186 A JP 2000003186A JP 2000003186 A JP2000003186 A JP 2000003186A JP 2001197366 A JP2001197366 A JP 2001197366A
- Authority
- JP
- Japan
- Prior art keywords
- image
- moving image
- area
- moving
- boundary
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Classifications
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
- G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
- G11B27/34—Indicating arrangements
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T13/00—Animation
- G06T13/80—Two-dimensional [2D] animation, e.g. using sprites
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
- G11B27/02—Editing, e.g. varying the order of information signals recorded on, or reproduced from, record carriers
- G11B27/031—Electronic editing of digitised analogue information signals, e.g. audio or video signals
- G11B27/034—Electronic editing of digitised analogue information signals, e.g. audio or video signals on discs
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Processing Or Creating Images (AREA)
- Image Processing (AREA)
- Studio Circuits (AREA)
- Controls And Circuits For Display Device (AREA)
Abstract
(57)【要約】
【課題】 動画上に合成する画像の位置を簡単に指定で
き、かつ、動画上に自然な動きの任意の画像を合成する
方法を提供する。 【解決手段】 画像を合成する対象の動画を選択し（３
０１）、表示再生する（３０２）。画像を合成する位置
で動画の再生を一時停止し、動画に重ね合わせて画像を
描画する（３０３）。画像が決定したら、スローモード
等で動画の再生を再開し、該動画の再生に合わせて、ポ
インティングデバイスなどで画像が動画上を移動する軌
跡を指定する（３０４）。画像の合成は、指定した軌跡
データをもとに、順次、再生中の動画の該当位置に画像
を重ね合わせることで行なわれる（３０５）。
き、かつ、動画上に自然な動きの任意の画像を合成する
方法を提供する。 【解決手段】 画像を合成する対象の動画を選択し（３
０１）、表示再生する（３０２）。画像を合成する位置
で動画の再生を一時停止し、動画に重ね合わせて画像を
描画する（３０３）。画像が決定したら、スローモード
等で動画の再生を再開し、該動画の再生に合わせて、ポ
インティングデバイスなどで画像が動画上を移動する軌
跡を指定する（３０４）。画像の合成は、指定した軌跡
データをもとに、順次、再生中の動画の該当位置に画像
を重ね合わせることで行なわれる（３０５）。
Description
【０００１】
【発明の属する技術分野】本発明は、コンピュータを用
いて動画に画像を合成する方法に係り、特に動画上を移
動する任意の画像の合成に好適な画像合成方法及び画像
合成プログラムを記録した記録媒体に関する。
いて動画に画像を合成する方法に係り、特に動画上を移
動する任意の画像の合成に好適な画像合成方法及び画像
合成プログラムを記録した記録媒体に関する。
【０００２】
【従来の技術】一般的に動画に画像を合成する場合、合
成する位置を一枚または複数枚のフレームに指定する方
法が一般的である。また、画像を合成する領域は境界を
設定して行う方式が一般的である。自動的に境界を設定
して画像を合成する領域を抽出する方法としては、例え
ば特開平７−２６２４１０号公報に記載の方法がある。
この方法では、実写映像中の境界線を抽出し、抽出した
い領域付近をポインティングデバイスなどで指定し、領
域を決定する。決定された領域に対して、ある画像を合
成する。一度領域を決定したら、その領域に対して画像
を合成するため、１フレームごとに合成する位置を指定
しなくても画像の合成が可能である。
成する位置を一枚または複数枚のフレームに指定する方
法が一般的である。また、画像を合成する領域は境界を
設定して行う方式が一般的である。自動的に境界を設定
して画像を合成する領域を抽出する方法としては、例え
ば特開平７−２６２４１０号公報に記載の方法がある。
この方法では、実写映像中の境界線を抽出し、抽出した
い領域付近をポインティングデバイスなどで指定し、領
域を決定する。決定された領域に対して、ある画像を合
成する。一度領域を決定したら、その領域に対して画像
を合成するため、１フレームごとに合成する位置を指定
しなくても画像の合成が可能である。
【０００３】
【発明が解決しようとする課題】上記従来技術におい
て、合成する位置を一枚または複数枚のフレームに指定
する方法では、合成する画像が自然な流れで軌跡を描く
物体（たとえば、大空を舞う鳥や金魚鉢内の金魚など）
などの場合、物体の移動が自然に見えないという欠点が
ある。または、自然な動きに見せるためには、綿密な計
算をしてフレームを補間する必要があった。
て、合成する位置を一枚または複数枚のフレームに指定
する方法では、合成する画像が自然な流れで軌跡を描く
物体（たとえば、大空を舞う鳥や金魚鉢内の金魚など）
などの場合、物体の移動が自然に見えないという欠点が
ある。または、自然な動きに見せるためには、綿密な計
算をしてフレームを補間する必要があった。
【０００４】一方、自動的に境界を設定して画像を合成
する領域（範囲）を抽出する方法では指定したい境界で
はない場所が境界として認識されることも多く、境界の
抽出に精度が要求され処理能力の低い装置では時間がか
かる場合が多いという問題があった。
する領域（範囲）を抽出する方法では指定したい境界で
はない場所が境界として認識されることも多く、境界の
抽出に精度が要求され処理能力の低い装置では時間がか
かる場合が多いという問題があった。
【０００５】本発明は、複雑な計算処理を行うことな
く、動画上を自然な流れで移動する画像の合成を容易に
実現することにある。
く、動画上を自然な流れで移動する画像の合成を容易に
実現することにある。
【０００６】
【課題を解決するための手段】本発明では、画像が移動
する軌跡を動画の再生にあわせて指定することにより、
動画上を前記軌跡に対応して移動する画像を合成するこ
とを特徴とする。これにより、動画上の物体等の移動が
自然に見える画像合成が容易に可能となる。
する軌跡を動画の再生にあわせて指定することにより、
動画上を前記軌跡に対応して移動する画像を合成するこ
とを特徴とする。これにより、動画上の物体等の移動が
自然に見える画像合成が容易に可能となる。
【０００７】また、本発明は、動画中に境界領域を指定
し、画像が移動する軌跡を、前記指定された境界領域の
条件に合致するように修正することを特徴とする。さら
には、境界領域とともに境界領域を識別する情報（領域
識別情報）を指定し、該領域識別情報をもとに再生動画
の実際の境界領域を求めて、画像の合成位置を修正する
ことを特徴とする。これにより、自動的に境界を生成し
て物体の移動範囲等を決定するよりも、ユーザの思った
場所を移動するようなアニメーション等の作成が容易と
なる。
し、画像が移動する軌跡を、前記指定された境界領域の
条件に合致するように修正することを特徴とする。さら
には、境界領域とともに境界領域を識別する情報（領域
識別情報）を指定し、該領域識別情報をもとに再生動画
の実際の境界領域を求めて、画像の合成位置を修正する
ことを特徴とする。これにより、自動的に境界を生成し
て物体の移動範囲等を決定するよりも、ユーザの思った
場所を移動するようなアニメーション等の作成が容易と
なる。
【０００８】
【発明の実施の形態】以下、本発明の実施の形態として
の具体的実施例を図面を用いて詳述する。図１は、本発
明の画像合成方法で用いるコンピュータシステムの構成
例を示したものである。本システムはプロセッサ（ＣＰ
Ｕ）１００、主記憶１１０、フレームメモリ１２０、デ
ィスプレィ１３０、キーボード１４０、ポインティング
デバイス（マウス）１５０、二次記憶装置１６０及びこ
れらを接続するバス１７０などで構成される。主記憶１
１０には、あらかじめ画像合成プログラム１１１がロー
ドされるとともに、後述する画像１１２、画像軌跡デー
タ１１３、境界線データ１１４及び境界識別情報１１５
などが格納される。二次記憶装置１６０には、あらかじ
め合成対象の実写映像などの動画１６１が格納されると
ともに、画像の合成された動画１６２が格納される。
の具体的実施例を図面を用いて詳述する。図１は、本発
明の画像合成方法で用いるコンピュータシステムの構成
例を示したものである。本システムはプロセッサ（ＣＰ
Ｕ）１００、主記憶１１０、フレームメモリ１２０、デ
ィスプレィ１３０、キーボード１４０、ポインティング
デバイス（マウス）１５０、二次記憶装置１６０及びこ
れらを接続するバス１７０などで構成される。主記憶１
１０には、あらかじめ画像合成プログラム１１１がロー
ドされるとともに、後述する画像１１２、画像軌跡デー
タ１１３、境界線データ１１４及び境界識別情報１１５
などが格納される。二次記憶装置１６０には、あらかじ
め合成対象の実写映像などの動画１６１が格納されると
ともに、画像の合成された動画１６２が格納される。
【０００９】プロセッサ１００により、主記憶１１０に
ある画像合成プログラム１１１が動作し、ディスプレィ
１３０上に画像合成プログラム画面が表示される。以
下、ユーザと対話形式に、画像合成プログラム１１１が
動作する。まず、二次記憶装置１６０に格納されている
動画１６１が読み込まれ、フレームメモリ１２０を介し
てディスプレィ１３０の画像合成プログラム画面上のプ
レビューエリアに表示される。ユーザは、表示された動
画を見ながら、キーボード１４０やポインティングデバ
イス１５０を用いて合成すべき画像を入力し、また、画
像が動画上を移動する軌跡を動画の再生にあわせて指定
し、さらには、必要なら画像の移動を規制するための動
画中の境界線や境界識別情報を指定する。この結果、主
記憶１１０には、ユーザが入力した画像１１２が格納さ
れ、また、ユーザの指定にもとづき画像軌跡データ１１
３、境界識別情報１１５が格納される。画像合成プログ
ラム１１１は、画像軌跡データ１１３をもとに、さらに
は必要なら境界線データ１１４や境界識別情報１１５を
もとに、動画１６１の再生にあわせて画像１１２を合成
して、ディスプレィ１３０の画像合成プログラム画面上
のプレビューエリアに表示する。また、画像の合成され
た動画１６２は二次記憶装置１６０に記憶され、以後、
該画像合成動画１６２を読み込むことで、何度でも利用
することができる。
ある画像合成プログラム１１１が動作し、ディスプレィ
１３０上に画像合成プログラム画面が表示される。以
下、ユーザと対話形式に、画像合成プログラム１１１が
動作する。まず、二次記憶装置１６０に格納されている
動画１６１が読み込まれ、フレームメモリ１２０を介し
てディスプレィ１３０の画像合成プログラム画面上のプ
レビューエリアに表示される。ユーザは、表示された動
画を見ながら、キーボード１４０やポインティングデバ
イス１５０を用いて合成すべき画像を入力し、また、画
像が動画上を移動する軌跡を動画の再生にあわせて指定
し、さらには、必要なら画像の移動を規制するための動
画中の境界線や境界識別情報を指定する。この結果、主
記憶１１０には、ユーザが入力した画像１１２が格納さ
れ、また、ユーザの指定にもとづき画像軌跡データ１１
３、境界識別情報１１５が格納される。画像合成プログ
ラム１１１は、画像軌跡データ１１３をもとに、さらに
は必要なら境界線データ１１４や境界識別情報１１５を
もとに、動画１６１の再生にあわせて画像１１２を合成
して、ディスプレィ１３０の画像合成プログラム画面上
のプレビューエリアに表示する。また、画像の合成され
た動画１６２は二次記憶装置１６０に記憶され、以後、
該画像合成動画１６２を読み込むことで、何度でも利用
することができる。
【００１０】図２は、ディスプレィ１３０に表示される
画像合成プログラム画面の構成例を示したものである。
図２において、エリア２１０は画像合成を行う動画を再
生するプレビューエリアである。また、このプレビュー
エリア２１０は、動画に合成する画像や該画像の移動軌
跡を表示する場所でもある。エリア２２０はプレビュー
エリア２１０に表示された動画の再生時間を示すエリア
である。その下のカーソル２２１はエリア２２０中のど
の位置が表示されているかを示す。エリア２２２は再生
速度を指定するエリアである。例えば、１の場合は通常
速度での再生であり、１／２の場合は通常の半分の速度
の再生（スロー再生）、２の場合は倍速再生となる。こ
の値は、キーボード１４０またはポインティングデバイ
ス１５０で変更できる。エリア２３０はエリア２１０上
に描画する画像の線種や色などを選択するためのエリア
である。エリア２４０は画像の描画、軌跡の作成・変
更、領域の指定を選択するためのエリア（ボタン）であ
り、ポインティングデバイス１５０などで選択する。エ
リア２５０はプレビューエリア２１０で再生される動画
を制御するためのエリアであり、ポインティングデバイ
ス１５０などで選択する。それぞれのアイコンを選択す
ることで、先頭位置まで戻す、一時停止、停止、再生、
終了位置まで戻すなどが指定可能である。エリア２６０
はプレビューエリア２１０で再生する動画を指定するた
めのエリアであり、キーボード１４０でファイル名など
を直接入力するか、またはポインティングデバイス１５
０で選択する。エリア２７０は合成実行を指定するエリ
ア（ボタン）であり、ポインティングデバイス１５０な
どで選択する。
画像合成プログラム画面の構成例を示したものである。
図２において、エリア２１０は画像合成を行う動画を再
生するプレビューエリアである。また、このプレビュー
エリア２１０は、動画に合成する画像や該画像の移動軌
跡を表示する場所でもある。エリア２２０はプレビュー
エリア２１０に表示された動画の再生時間を示すエリア
である。その下のカーソル２２１はエリア２２０中のど
の位置が表示されているかを示す。エリア２２２は再生
速度を指定するエリアである。例えば、１の場合は通常
速度での再生であり、１／２の場合は通常の半分の速度
の再生（スロー再生）、２の場合は倍速再生となる。こ
の値は、キーボード１４０またはポインティングデバイ
ス１５０で変更できる。エリア２３０はエリア２１０上
に描画する画像の線種や色などを選択するためのエリア
である。エリア２４０は画像の描画、軌跡の作成・変
更、領域の指定を選択するためのエリア（ボタン）であ
り、ポインティングデバイス１５０などで選択する。エ
リア２５０はプレビューエリア２１０で再生される動画
を制御するためのエリアであり、ポインティングデバイ
ス１５０などで選択する。それぞれのアイコンを選択す
ることで、先頭位置まで戻す、一時停止、停止、再生、
終了位置まで戻すなどが指定可能である。エリア２６０
はプレビューエリア２１０で再生する動画を指定するた
めのエリアであり、キーボード１４０でファイル名など
を直接入力するか、またはポインティングデバイス１５
０で選択する。エリア２７０は合成実行を指定するエリ
ア（ボタン）であり、ポインティングデバイス１５０な
どで選択する。
【００１１】まず、本発明の第１の実施例として、画像
を手書きで描画し、該画像が動画上を移動する軌跡を動
画の再生に合わせてポインティングデバイスを用いて指
定することにより、動画に画像を合成する処理について
説明する。
を手書きで描画し、該画像が動画上を移動する軌跡を動
画の再生に合わせてポインティングデバイスを用いて指
定することにより、動画に画像を合成する処理について
説明する。
【００１２】図３は本実施例の全体的処理の流れを示す
フローチャートである。ここでは、画像合成プログラム
１１１がすでに起動し、ディスプレィ１３０には図２に
示した画像合成プログラム画面２００が表示されている
とする。ユーザは、ポインティングデバイス１５０また
はキーボード１４０を用い、エリア２６０上で画像合成
する動画ファイル名を選択する（ステップ３０１）。次
に、ユーザがエリア２５０の再生開始ボタンを選択する
と、二次記憶装置１６０内の該当動画１６１が読み込ま
れ、プレビューエリア２１０上に表示される（ステップ
３０２）。ユーザは、この動画の適当な再生位置でエリ
ア２５０の停止ボタンを押して動画の再生を一時停止し
た後、エリア２４０の描画を選択し、エリア２３０で線
種や色などを選択して、ポインティングデバイス１５０
などにより、動画に重ね合わせる画像をプレビューエリ
ア２１０上に描画する（ステップ３０３）。画像が決定
したら、ユーザはエリア２４０の軌跡を選択し、低速等
で動画の再生を再開し、該動画の再生に合わせてポイン
ティングデバイス１５０によりプレビューエリア２１０
上に画像の移動軌跡を描き決定する（ステップ３０
４）。プレビューエリア２１０上に描かれた画像や画像
の移動軌跡は、主記憶１１０に画像１１２、及び、一定
時間ごとの位置データを表わす画像軌跡データ１１３と
して格納される。最後に、ユーザがエリア２７０の合成
実行ボタンを押すと、画像軌跡データ１１３をもとに、
画像１１２と動画１６１の合成が実行される（ステップ
３０５）。合成は、一時停止以降の動画の再生に合わ
せ、画像軌跡データ１１３の時間データと位置データな
どをもとに、順次、動画フレームの該当位置に画像１１
２をはりつけることで行われる。
フローチャートである。ここでは、画像合成プログラム
１１１がすでに起動し、ディスプレィ１３０には図２に
示した画像合成プログラム画面２００が表示されている
とする。ユーザは、ポインティングデバイス１５０また
はキーボード１４０を用い、エリア２６０上で画像合成
する動画ファイル名を選択する（ステップ３０１）。次
に、ユーザがエリア２５０の再生開始ボタンを選択する
と、二次記憶装置１６０内の該当動画１６１が読み込ま
れ、プレビューエリア２１０上に表示される（ステップ
３０２）。ユーザは、この動画の適当な再生位置でエリ
ア２５０の停止ボタンを押して動画の再生を一時停止し
た後、エリア２４０の描画を選択し、エリア２３０で線
種や色などを選択して、ポインティングデバイス１５０
などにより、動画に重ね合わせる画像をプレビューエリ
ア２１０上に描画する（ステップ３０３）。画像が決定
したら、ユーザはエリア２４０の軌跡を選択し、低速等
で動画の再生を再開し、該動画の再生に合わせてポイン
ティングデバイス１５０によりプレビューエリア２１０
上に画像の移動軌跡を描き決定する（ステップ３０
４）。プレビューエリア２１０上に描かれた画像や画像
の移動軌跡は、主記憶１１０に画像１１２、及び、一定
時間ごとの位置データを表わす画像軌跡データ１１３と
して格納される。最後に、ユーザがエリア２７０の合成
実行ボタンを押すと、画像軌跡データ１１３をもとに、
画像１１２と動画１６１の合成が実行される（ステップ
３０５）。合成は、一時停止以降の動画の再生に合わ
せ、画像軌跡データ１１３の時間データと位置データな
どをもとに、順次、動画フレームの該当位置に画像１１
２をはりつけることで行われる。
【００１３】図４は図３中のステップ３０４の詳細を示
すフローチャートである。これを図５及び図６の具体例
を用いて説明する。
すフローチャートである。これを図５及び図６の具体例
を用いて説明する。
【００１４】図５は、図３中のステップ３０３により画
像を描画した状態の画像合成プログラム画面２００を示
したものである。プレビューエリア２１０内には、描画
した画像（金魚）５００が動画（金魚鉢の映像）に重畳
して存在する。エリア２４０は描画が選択されているこ
とを示している。エリア２２０の下のカーソル２２１
は、その時点で動画が停止していることを示している。
エリア２２２はそれまで通常速度で再生されていたこと
を示している。
像を描画した状態の画像合成プログラム画面２００を示
したものである。プレビューエリア２１０内には、描画
した画像（金魚）５００が動画（金魚鉢の映像）に重畳
して存在する。エリア２４０は描画が選択されているこ
とを示している。エリア２２０の下のカーソル２２１
は、その時点で動画が停止していることを示している。
エリア２２２はそれまで通常速度で再生されていたこと
を示している。
【００１５】ユーザは、エリア２４０の軌跡を選択し、
動画を再生させる速度を決定する（ステップ４０１）。
この場合、動画の再生に合わせて画像の移動する軌跡が
容易に描画できるように、例えば通常の再生速度の半分
の速度（スロー再生）に設定する。次に、ユーザは、キ
ーボード１４０の特定キー操作などで動画の再生を再開
し（ステップ４０２）、同時にプレビューエリア２１０
内にある画像５００の位置を示すカーソルをポインティ
ングデバイス１５０により移動させて、画像の移動する
軌跡を描画する（ステップ４０３）。この時、動画の再
生速度に合わせて、画像の位置カーソルの速度をポイン
ティングデバイス１５０を使って調整する。画像の所望
の移動軌跡の描画が終了したら、キーボード１４０の特
定キー操作などで動画の再生を終了させる（ステップ４
０４）。
動画を再生させる速度を決定する（ステップ４０１）。
この場合、動画の再生に合わせて画像の移動する軌跡が
容易に描画できるように、例えば通常の再生速度の半分
の速度（スロー再生）に設定する。次に、ユーザは、キ
ーボード１４０の特定キー操作などで動画の再生を再開
し（ステップ４０２）、同時にプレビューエリア２１０
内にある画像５００の位置を示すカーソルをポインティ
ングデバイス１５０により移動させて、画像の移動する
軌跡を描画する（ステップ４０３）。この時、動画の再
生速度に合わせて、画像の位置カーソルの速度をポイン
ティングデバイス１５０を使って調整する。画像の所望
の移動軌跡の描画が終了したら、キーボード１４０の特
定キー操作などで動画の再生を終了させる（ステップ４
０４）。
【００１６】図６は、この時の画像合成プログラム画面
２００を示したものである。図６において、６００が画
像の位置を示すカーソル、６１０がステップ４０３で描
かれた軌跡である。なお、図６では、簡単化のため図５
の画像５００は省略してある。エリア２４０は軌跡が選
択されていることを示している。エリア２２０の下のカ
ーソル２２１は２２１′の位置に移動している。エリア
２２２の再生速度は１／２（スロー再生）である。軌跡
６１０は、一定時間単位やフレーム単位に読み込まれ、
その軌跡点列の位置データなどが画像軌跡データ１１３
として主記憶１１０に格納される。また、ステップ４０
２の再生開始のフレーム番号、ステップ４０４の再生終
了のフレーム番号なども記憶される。
２００を示したものである。図６において、６００が画
像の位置を示すカーソル、６１０がステップ４０３で描
かれた軌跡である。なお、図６では、簡単化のため図５
の画像５００は省略してある。エリア２４０は軌跡が選
択されていることを示している。エリア２２０の下のカ
ーソル２２１は２２１′の位置に移動している。エリア
２２２の再生速度は１／２（スロー再生）である。軌跡
６１０は、一定時間単位やフレーム単位に読み込まれ、
その軌跡点列の位置データなどが画像軌跡データ１１３
として主記憶１１０に格納される。また、ステップ４０
２の再生開始のフレーム番号、ステップ４０４の再生終
了のフレーム番号なども記憶される。
【００１７】画像が移動する軌跡の描画後、ユーザはエ
リア２５０の再生ボタンを選択し、プレビューを行って
軌跡６１０を確認し（ステップ４０５）、該軌跡６１０
を修正すべきかどうか決める（ステップ４０６）。ここ
で、軌跡６１０すなわち画像の動きを修正したい場合は
ステップ４０７に進み、修正しない場合は終了とする。
ステップ４０７では、ユーザが最初から軌跡の描画をや
り直す場合は、書き直しを行う開始位置を決め（ステッ
プ４０８）、ステップ４０１に戻る。一方、微調整の場
合には、描画した軌跡６１０を直接修正する（ステップ
４０９）。なお、書き直しや直接修正などの指示は、例
えばエリア２４０の軌跡ボタンの再クリック、右クリッ
クなどで行うことができる。
リア２５０の再生ボタンを選択し、プレビューを行って
軌跡６１０を確認し（ステップ４０５）、該軌跡６１０
を修正すべきかどうか決める（ステップ４０６）。ここ
で、軌跡６１０すなわち画像の動きを修正したい場合は
ステップ４０７に進み、修正しない場合は終了とする。
ステップ４０７では、ユーザが最初から軌跡の描画をや
り直す場合は、書き直しを行う開始位置を決め（ステッ
プ４０８）、ステップ４０１に戻る。一方、微調整の場
合には、描画した軌跡６１０を直接修正する（ステップ
４０９）。なお、書き直しや直接修正などの指示は、例
えばエリア２４０の軌跡ボタンの再クリック、右クリッ
クなどで行うことができる。
【００１８】次に、画像の移動軌跡を直接修正（微調
整）する方法を、図７、図８を用いて説明する。図７
は、プレビューされた軌跡６００を拡大したものであ
る。また、図８は該軌跡６００に対応する画像軌跡デー
タ１１３のデータ構造を示したものである。
整）する方法を、図７、図８を用いて説明する。図７
は、プレビューされた軌跡６００を拡大したものであ
る。また、図８は該軌跡６００に対応する画像軌跡デー
タ１１３のデータ構造を示したものである。
【００１９】画像の移動軌跡を微調整したい場合は、図
７に示す点列ｄ１〜ｄ９の一部を修正（追加、削除等）
すればよい。図７において、７００には修正前の点列
が、７１０には点列を一部追加したもの、７２０は一部
削除したものを示す。ここで、点列は１秒単位（通常再
生を基準）での位置を示すものである。もちろん、この
点列は１フレーム単位、０．５秒単位などに変更するこ
とが可能である。図８（Ａ）のテーブル８００は、図７
の修正前の点列７００のｄ１〜ｄ９に対応したものであ
る。ここでは、軌跡を指定するだけでなく、合成する対
象となる画像の大きさ（倍率）や方向、透過率なども指
定・変更できるとしている。画像の動きを遅くしたい場
合は、図７の７１０に示すように、例えば遅くしたい個
所に点ａ１，ａ２を追加する。これにより、図８（Ｂ）
のテーブル８１０に示すように、点ａ１，ａ２のデータ
が追加され、ｄ６からｄ７の間が遅く動くような軌跡に
変更される。反対に画像の動きを早くしたい場合は、図
７の７２０に示すように、早くしたい箇所の例えば点ｄ
８を削除する（図では削除するｄ８を破線で示したが、
実際は表示されない）。これにより、図８（Ｃ）のテー
ブル８２０に示すように、点８の該当データが削除さ
れ、ｄ７とｄ９の移動時間が短くなる。軌跡の修正は、
ポインティングデバイス１５０を用いてプレビューされ
ている点列に対して簡単に行うこともできるが、主記憶
１１０から画像軌跡データ１１３を読み出して、直接該
当フィールドを修正して変更することも可能である。
７に示す点列ｄ１〜ｄ９の一部を修正（追加、削除等）
すればよい。図７において、７００には修正前の点列
が、７１０には点列を一部追加したもの、７２０は一部
削除したものを示す。ここで、点列は１秒単位（通常再
生を基準）での位置を示すものである。もちろん、この
点列は１フレーム単位、０．５秒単位などに変更するこ
とが可能である。図８（Ａ）のテーブル８００は、図７
の修正前の点列７００のｄ１〜ｄ９に対応したものであ
る。ここでは、軌跡を指定するだけでなく、合成する対
象となる画像の大きさ（倍率）や方向、透過率なども指
定・変更できるとしている。画像の動きを遅くしたい場
合は、図７の７１０に示すように、例えば遅くしたい個
所に点ａ１，ａ２を追加する。これにより、図８（Ｂ）
のテーブル８１０に示すように、点ａ１，ａ２のデータ
が追加され、ｄ６からｄ７の間が遅く動くような軌跡に
変更される。反対に画像の動きを早くしたい場合は、図
７の７２０に示すように、早くしたい箇所の例えば点ｄ
８を削除する（図では削除するｄ８を破線で示したが、
実際は表示されない）。これにより、図８（Ｃ）のテー
ブル８２０に示すように、点８の該当データが削除さ
れ、ｄ７とｄ９の移動時間が短くなる。軌跡の修正は、
ポインティングデバイス１５０を用いてプレビューされ
ている点列に対して簡単に行うこともできるが、主記憶
１１０から画像軌跡データ１１３を読み出して、直接該
当フィールドを修正して変更することも可能である。
【００２０】以上に示したように、ポインティングデバ
イス１５０を画像合成プログラム画面のプレビューエリ
アで移動させることにより、簡単に画像の軌跡を作成、
修正することが可能となる。
イス１５０を画像合成プログラム画面のプレビューエリ
アで移動させることにより、簡単に画像の軌跡を作成、
修正することが可能となる。
【００２１】本実施例では、軌跡入力時の再生速度が一
定の例を示したが、動画の再生速度をキーボードなどの
入力装置で早くしたり遅くしたりする制御をしながら、
ポインティングデバイスなどにより軌跡を描くことも可
能である。また、図３の本実施例のフローチャートで
は、軌跡の描画処理と動画と画像の合成処理を分けた
が、勿論、両者を同時に行うことも可能である。
定の例を示したが、動画の再生速度をキーボードなどの
入力装置で早くしたり遅くしたりする制御をしながら、
ポインティングデバイスなどにより軌跡を描くことも可
能である。また、図３の本実施例のフローチャートで
は、軌跡の描画処理と動画と画像の合成処理を分けた
が、勿論、両者を同時に行うことも可能である。
【００２２】次に、本発明の第２の実施例として、動画
の境界線や領域識別情報を指定することで、画像の移動
軌跡を自動的に修正したり、動画と画像の合成時に画像
の合成位置を自動的に修正する処理について説明する。
の境界線や領域識別情報を指定することで、画像の移動
軌跡を自動的に修正したり、動画と画像の合成時に画像
の合成位置を自動的に修正する処理について説明する。
【００２３】図９は本実施例の全体的処理の流れを示す
フローチャートである。画像合成プログラム１１１はす
でに起動し、ディスプレイ１３０には図２に示した画像
合成プログラム画面２００が表示されているとする。図
９において、ステップ９０１からステップ９０３は図３
のステップ３０１からステップ３０３と同様である。ス
テップ９０３で動画に合成する画像が決定したら、ユー
ザはエリア２４０で領域の選択を行い、ポインティング
デバイス１５０を用いて画像が移動する領域の境界線や
領域識別情報をプレビューエリア２１０の動画上に指定
する（ステップ９０４）。次に、ユーザはエリア２４０
の軌跡を選択し、低速等で動画の再生を再開し、該動画
の再生に合わせて画像が移動する軌跡を描画し決定する
（ステップ９０５）。これは図３のステップ３０４と基
本的に同様であるが、画像の移動領域は、ステップ９０
４で指定した領域内になるように自動的に修正される。
最後に、ユーザがエリア２７０の合成実行ボタンを押す
と、画像と動画の合成が実行される（ステップ９０
６）。これも図３のステップ３０５と基本的に同様であ
るが、再生される動画の境界線の変動に対応して自動的
に画像の位置も修正される。
フローチャートである。画像合成プログラム１１１はす
でに起動し、ディスプレイ１３０には図２に示した画像
合成プログラム画面２００が表示されているとする。図
９において、ステップ９０１からステップ９０３は図３
のステップ３０１からステップ３０３と同様である。ス
テップ９０３で動画に合成する画像が決定したら、ユー
ザはエリア２４０で領域の選択を行い、ポインティング
デバイス１５０を用いて画像が移動する領域の境界線や
領域識別情報をプレビューエリア２１０の動画上に指定
する（ステップ９０４）。次に、ユーザはエリア２４０
の軌跡を選択し、低速等で動画の再生を再開し、該動画
の再生に合わせて画像が移動する軌跡を描画し決定する
（ステップ９０５）。これは図３のステップ３０４と基
本的に同様であるが、画像の移動領域は、ステップ９０
４で指定した領域内になるように自動的に修正される。
最後に、ユーザがエリア２７０の合成実行ボタンを押す
と、画像と動画の合成が実行される（ステップ９０
６）。これも図３のステップ３０５と基本的に同様であ
るが、再生される動画の境界線の変動に対応して自動的
に画像の位置も修正される。
【００２４】図１０は、図９中のステップ９０４の詳細
を示すフローチャートである。いま、画像合成プログラ
ム画面２００のプレビューエリア２１０の表示状態は、
図１１の通りとする。図１１において、１１００はステ
ップ９０３により描画した画像（ボール）である。１１
２０は領域Ａ（空）、１１２１は領域Ｂ（地面）を示
す。画像１１００が移動できる範囲は領域Ａ内に限定さ
れるべきである。ユーザは、領域の境界線１１３０をポ
インティングデバイス１５０で指定する（ステップ１０
０１）。次に、ユーザは、この境界線１１３０で２つに
分割された領域Ａ，Ｂの代表的な色などをキーボード１
４０やポインティングデバイス１５０で指定し、領域
Ａ，Ｂを識別する情報とする（ステップ１００２）。ス
テップ１００１，１００２で指定された境界線や領域識
別情報は、主記憶１１０に格納される。図１中の主記憶
１１０内の境界線データ１１４、境界識別情報１１５は
これを示したものである。
を示すフローチャートである。いま、画像合成プログラ
ム画面２００のプレビューエリア２１０の表示状態は、
図１１の通りとする。図１１において、１１００はステ
ップ９０３により描画した画像（ボール）である。１１
２０は領域Ａ（空）、１１２１は領域Ｂ（地面）を示
す。画像１１００が移動できる範囲は領域Ａ内に限定さ
れるべきである。ユーザは、領域の境界線１１３０をポ
インティングデバイス１５０で指定する（ステップ１０
０１）。次に、ユーザは、この境界線１１３０で２つに
分割された領域Ａ，Ｂの代表的な色などをキーボード１
４０やポインティングデバイス１５０で指定し、領域
Ａ，Ｂを識別する情報とする（ステップ１００２）。ス
テップ１００１，１００２で指定された境界線や領域識
別情報は、主記憶１１０に格納される。図１中の主記憶
１１０内の境界線データ１１４、境界識別情報１１５は
これを示したものである。
【００２５】図１２は、図９中のステップ９０５におい
て、特に画像の移動する軌跡が図９のステップ９０４で
指定した境界や領域内になるように自動修正する処理フ
ローチャートを示したものである。図１２の処理は、画
像の移動軌跡の描画に同期して同時実行することでも、
あるいは任意に描画して得られた画像軌跡データを対象
に実行することでも、いずれでも可能である。
て、特に画像の移動する軌跡が図９のステップ９０４で
指定した境界や領域内になるように自動修正する処理フ
ローチャートを示したものである。図１２の処理は、画
像の移動軌跡の描画に同期して同時実行することでも、
あるいは任意に描画して得られた画像軌跡データを対象
に実行することでも、いずれでも可能である。
【００２６】まず、図９中のステップ９０４で指定され
た画像が移動する境界条件を設定する（ステップ１２０
１）、その後、軌跡点列の各位置（軌跡点）について、
ステップ１２０３以降の処理を実行する。はじめＹ座標
に対して境界条件が設定されているか判定し（ステップ
１２０３）、設定されていなければステップ１２０７に
行き、設定されていれば、軌跡点列の当該位置のＹ座標
と境界条件のＹ座標を比較する（ステップ１２０４）。
そして、境界条件に合致するか判定して（ステップ１２
０５）、合致していればステップ１２０７に行き、合致
しなければ、当該位置のＹ座標を境界条件に合うように
修正して（ステップ１２０６）、ステップ１２０７に行
く。ステップ１２０７では、Ｘ座標に対して境界条件が
設定されているか判定し、設定されていなければ、ステ
ップ１２０２に行戻る。設定されていれば、軌跡点列の
当該位置のＸ座標と境界条件のＸ座標を比較する（ステ
ップ１２０８）。そして、境界条件に合致するか判定し
て（ステップ１２０９）、合致していればステップ１２
０２に戻り、合致しなければ、当該位置のＸ座標を境界
条件に合うように修正して（ステップ１２１０）、ステ
ップ１２０２に戻る。ステップ１２０２では、軌跡点列
が終了したか判定し、終了しなければ、次の軌跡点につ
いてステップ１２０３以降の処理を繰り返し、終了すれ
ば、修正処理を終了とする。なお、図１２では、軌跡点
列の各位置をＹ座標、Ｘ座標の順に処理するとしたが、
勿論、この逆の順で処理してもよく、また、軌跡点列の
Ｙ座標群およびＸ座標群ずつまとめて処理することでも
よい。
た画像が移動する境界条件を設定する（ステップ１２０
１）、その後、軌跡点列の各位置（軌跡点）について、
ステップ１２０３以降の処理を実行する。はじめＹ座標
に対して境界条件が設定されているか判定し（ステップ
１２０３）、設定されていなければステップ１２０７に
行き、設定されていれば、軌跡点列の当該位置のＹ座標
と境界条件のＹ座標を比較する（ステップ１２０４）。
そして、境界条件に合致するか判定して（ステップ１２
０５）、合致していればステップ１２０７に行き、合致
しなければ、当該位置のＹ座標を境界条件に合うように
修正して（ステップ１２０６）、ステップ１２０７に行
く。ステップ１２０７では、Ｘ座標に対して境界条件が
設定されているか判定し、設定されていなければ、ステ
ップ１２０２に行戻る。設定されていれば、軌跡点列の
当該位置のＸ座標と境界条件のＸ座標を比較する（ステ
ップ１２０８）。そして、境界条件に合致するか判定し
て（ステップ１２０９）、合致していればステップ１２
０２に戻り、合致しなければ、当該位置のＸ座標を境界
条件に合うように修正して（ステップ１２１０）、ステ
ップ１２０２に戻る。ステップ１２０２では、軌跡点列
が終了したか判定し、終了しなければ、次の軌跡点につ
いてステップ１２０３以降の処理を繰り返し、終了すれ
ば、修正処理を終了とする。なお、図１２では、軌跡点
列の各位置をＹ座標、Ｘ座標の順に処理するとしたが、
勿論、この逆の順で処理してもよく、また、軌跡点列の
Ｙ座標群およびＸ座標群ずつまとめて処理することでも
よい。
【００２７】次に、図１３、図１４及び図１５を用い
て、図１２のステップ１２０４〜１２０６の処理の具体
例を説明する。図１２のステップ１２０８〜１２１０の
処理例も容易に類推可能である。
て、図１２のステップ１２０４〜１２０６の処理の具体
例を説明する。図１２のステップ１２０８〜１２１０の
処理例も容易に類推可能である。
【００２８】図１３は、境界線１１３０を考慮しない
で、図１１の画像１１００に移動軌跡１３１０を描画し
た状態を示したものである。図１４は境界線１１３０の
位置座標データ、図１５は軌跡１３１０の１秒毎の点列
の位置データである。図１４も図１５も実際にはもっと
詳細なデータとして主記憶１１０に記録されているが、
ここでは説明の簡単化のため代表的な位置だけを示す。
で、図１１の画像１１００に移動軌跡１３１０を描画し
た状態を示したものである。図１４は境界線１１３０の
位置座標データ、図１５は軌跡１３１０の１秒毎の点列
の位置データである。図１４も図１５も実際にはもっと
詳細なデータとして主記憶１１０に記録されているが、
ここでは説明の簡単化のため代表的な位置だけを示す。
【００２９】移動軌跡１３１０の点列について、そのＹ
座標に画像（ボール）１１００の半径を足したものが、
境界線１１３０よりも上（小さい）にならなければなら
ない。図１４、図１５に示すように、点ｄ３のＹ座標が
境界線１１３０のＹ座標よりも下（大きい）になってい
る。このままでは、画像（ボール）１１００が境界線１
１３０を越えないように移動する（即ち、境界線の上に
あるように移動する）という条件に当てはまらないた
め、画像１１００の下部が境界線１１３０の上になるよ
うに、点ｄ４のＹ座標を修正する。これにより、点ｄ３
の近辺において、画像１１００が境界線１１３０上を移
動するように画像合成が行える。
座標に画像（ボール）１１００の半径を足したものが、
境界線１１３０よりも上（小さい）にならなければなら
ない。図１４、図１５に示すように、点ｄ３のＹ座標が
境界線１１３０のＹ座標よりも下（大きい）になってい
る。このままでは、画像（ボール）１１００が境界線１
１３０を越えないように移動する（即ち、境界線の上に
あるように移動する）という条件に当てはまらないた
め、画像１１００の下部が境界線１１３０の上になるよ
うに、点ｄ４のＹ座標を修正する。これにより、点ｄ３
の近辺において、画像１１００が境界線１１３０上を移
動するように画像合成が行える。
【００３０】図１６は、図９中のステップ９０６の動画
と画像の合成実行において、再生の動画の中で境界領域
が変動した場合、それに対応して画像の軌跡点の位置デ
ータを自動修正して合成する処理フローチャートを示し
たものである。
と画像の合成実行において、再生の動画の中で境界領域
が変動した場合、それに対応して画像の軌跡点の位置デ
ータを自動修正して合成する処理フローチャートを示し
たものである。
【００３１】まず、図９中のステップ９０４で指定され
た領域の境界線座標データや各領域の代表的な色等の領
域識別情報を設定する（ステップ１６０１）。その後、
動画の再生に合わせて画像の軌跡点列の位置データ（画
像軌跡データ）を取り込み、各軌跡点について、ステッ
プ１６０３以降の処理を実行する。まず、領域識別情報
をもとに、その時点の再生同化フレーム中の実際の領域
境界線座標を求め（ステップ１６０３）、この実際の領
域境界線座標とステップ１６０１で設定された境界線座
標との差分を計算する（ステップ１６０４）。差分値
は、あらかじめ境界線の基準位置を定めて、該基準位置
同士について計算するか、あるいは、境界線の各位置に
ついて差分を求め、その平均値を計算するなどの方法が
用いられる。この差分値を当該軌跡点の位置データの座
標値に加えて、画像の位置座標を修正し、動画と画像を
合成し（ステップ１６０５）、ステップ１６０２に戻
る。ステップ１６０２では、軌跡点列が終了したか判定
し、終了しなければ、再生動画フレーム単位に、各軌跡
点についてステップ１６０３〜１６０５を実行し、終了
すれば、画像合成処理を終了とする。
た領域の境界線座標データや各領域の代表的な色等の領
域識別情報を設定する（ステップ１６０１）。その後、
動画の再生に合わせて画像の軌跡点列の位置データ（画
像軌跡データ）を取り込み、各軌跡点について、ステッ
プ１６０３以降の処理を実行する。まず、領域識別情報
をもとに、その時点の再生同化フレーム中の実際の領域
境界線座標を求め（ステップ１６０３）、この実際の領
域境界線座標とステップ１６０１で設定された境界線座
標との差分を計算する（ステップ１６０４）。差分値
は、あらかじめ境界線の基準位置を定めて、該基準位置
同士について計算するか、あるいは、境界線の各位置に
ついて差分を求め、その平均値を計算するなどの方法が
用いられる。この差分値を当該軌跡点の位置データの座
標値に加えて、画像の位置座標を修正し、動画と画像を
合成し（ステップ１６０５）、ステップ１６０２に戻
る。ステップ１６０２では、軌跡点列が終了したか判定
し、終了しなければ、再生動画フレーム単位に、各軌跡
点についてステップ１６０３〜１６０５を実行し、終了
すれば、画像合成処理を終了とする。
【００３２】次に、図１７を用いて、図１６のステップ
１６０５の処理の具体例を説明する。図１７（Ａ）は修
正前の状態、図１７（Ｂ）は修正後の状態であり、１１
３０は先の図９のステップ９０４で指定された領域境界
線、１７１０は図１６のステップ１６０２で求めた現再
生動画の実際の領域境界線を示す。値ｄは両境界線の差
分である。図１７（Ａ）に示すように、このままでは画
像１１００の座標位置は不自然である。そこで、図１６
のステップ１６０５において、軌跡点列の位置座標を差
分値ｄだけ上方へ修正することにより、図１７（Ｂ）に
示すように、自然な合成画像を得ることができる。
１６０５の処理の具体例を説明する。図１７（Ａ）は修
正前の状態、図１７（Ｂ）は修正後の状態であり、１１
３０は先の図９のステップ９０４で指定された領域境界
線、１７１０は図１６のステップ１６０２で求めた現再
生動画の実際の領域境界線を示す。値ｄは両境界線の差
分である。図１７（Ａ）に示すように、このままでは画
像１１００の座標位置は不自然である。そこで、図１６
のステップ１６０５において、軌跡点列の位置座標を差
分値ｄだけ上方へ修正することにより、図１７（Ｂ）に
示すように、自然な合成画像を得ることができる。
【００３３】以上実施例では、手書きの画像を動画上で
移動させる場合について説明したが、合成する画像は手
書きの静止画だけでなく、あらかじめ用意されたアニメ
ーションや動画でもよいことは言うまでもない。また、
軌跡を指定する場合に、位置を指定、変更するだけでな
く、合成する対象となる画像の大きさや方向、透過率な
ども容易に指定、変更できる。
移動させる場合について説明したが、合成する画像は手
書きの静止画だけでなく、あらかじめ用意されたアニメ
ーションや動画でもよいことは言うまでもない。また、
軌跡を指定する場合に、位置を指定、変更するだけでな
く、合成する対象となる画像の大きさや方向、透過率な
ども容易に指定、変更できる。
【００３４】また、実施例では、ユーザが画像の移動す
る軌跡を描画するとしたが、例えば物体を等速や等加速
度などで動画上を移動させる場合には、物体が移動する
初期位置、方向、速度（単位移動量）などを指定するこ
とにより、動画の再生にあわせて物体の移動軌跡を自動
的に指定することが可能であり、この場合にはユーザが
軌跡を描画する必要はない。勿論、この場合にも、物体
が移動する境界領域や境界識別情報を指定することによ
り、先の実施例で説明したと同様の修正が可能であるこ
とは云うまでもない。
る軌跡を描画するとしたが、例えば物体を等速や等加速
度などで動画上を移動させる場合には、物体が移動する
初期位置、方向、速度（単位移動量）などを指定するこ
とにより、動画の再生にあわせて物体の移動軌跡を自動
的に指定することが可能であり、この場合にはユーザが
軌跡を描画する必要はない。勿論、この場合にも、物体
が移動する境界領域や境界識別情報を指定することによ
り、先の実施例で説明したと同様の修正が可能であるこ
とは云うまでもない。
【００３５】なお、本発明の画像合成方法の処理を行う
ための画像合成プログラムは、コンピュータで実行可能
な言語で記述し、コンピュータが読み取り可能な記録媒
体、例えばフロッピー（登録商標）ディスク、ＣＤ−Ｒ
ＯＭ、メモリカードなどに記録して提供することが可能
である。
ための画像合成プログラムは、コンピュータで実行可能
な言語で記述し、コンピュータが読み取り可能な記録媒
体、例えばフロッピー（登録商標）ディスク、ＣＤ−Ｒ
ＯＭ、メモリカードなどに記録して提供することが可能
である。
【００３６】
【発明の効果】以上説明したように、本発明によれば、
複雑な計算処理を行うことなく、動画に自然な動きの任
意の画像を合成することが可能になり、ポインティング
デバイスなどを利用してユーザの思った場所を移動する
ようなアニメーションなどの作成が容易になる。
複雑な計算処理を行うことなく、動画に自然な動きの任
意の画像を合成することが可能になり、ポインティング
デバイスなどを利用してユーザの思った場所を移動する
ようなアニメーションなどの作成が容易になる。
【図１】本発明で用いるコンピュータシステムの構成例
を示すブロック図である。
を示すブロック図である。
【図２】本発明で用いる画像合成プログラム画面の構成
例を示す図である。
例を示す図である。
【図３】本発明の第一の実施の形態にかかる全体処理を
示すフローチャートである。
示すフローチャートである。
【図４】本発明の第一の実施の形態にかかる画像の移動
軌跡を指定・決定する処理を示すフローチャートであ
る。
軌跡を指定・決定する処理を示すフローチャートであ
る。
【図５】本発明の第一の実施の形態にかかる画像描画の
具体例を示す図である。
具体例を示す図である。
【図６】本発明の第一の実施の形態にかかる画像の移動
軌跡の描画の具体例を示す図である。
軌跡の描画の具体例を示す図である。
【図７】本発明の第一の実施の形態にかかる画像の移動
軌跡を修正する方法の一例を示す図である。
軌跡を修正する方法の一例を示す図である。
【図８】本発明の第一の実施の形態にかかる画像の移動
軌跡のデータ構造を示す図である。
軌跡のデータ構造を示す図である。
【図９】本発明の第二の実施の形態にかかる全体処理を
示すフローチャートである。
示すフローチャートである。
【図１０】本発明の第二の実施の形態にかかる領域指定
処理を示すフローチャートである。
処理を示すフローチャートである。
【図１１】本発明の第二の実施の形態にかかる領域指定
の具体例を示す図である。
の具体例を示す図である。
【図１２】本発明の第二の実施の形態にかかる画像の移
動軌跡が領域内に制限される処理を示すフローチャート
である。
動軌跡が領域内に制限される処理を示すフローチャート
である。
【図１３】本発明の第二の実施の形態にかかる画像の移
動軌跡の具体例を示す図である。
動軌跡の具体例を示す図である。
【図１４】本発明の第二の実施の形態にかかる境界線デ
ータを表す図である。
ータを表す図である。
【図１５】本発明の第二の実施の形態にかかる画像の移
動軌跡の位置データを表す図である。
動軌跡の位置データを表す図である。
【図１６】本発明の第二の実施の形態にかかる画像の移
動軌跡が再生動画の実際の領域境界線で修正される処理
を示すフローチャートである。
動軌跡が再生動画の実際の領域境界線で修正される処理
を示すフローチャートである。
【図１７】本発明の第二の実施の形態にかかる画像の移
動軌跡が再生動画の実際の領域境界線で修正される具体
例を示す図である。
動軌跡が再生動画の実際の領域境界線で修正される具体
例を示す図である。
１００ プロセッサ（ＣＰＵ） １１０ 主記憶 １１１ 画像合成プログラム １１２ 画像 １１３ 画像軌跡データ １１４ 境界線データ １１５ 境界識別情報 １２０ フレームメモリ １３０ ディスプレイ １４０ キーボード １５０ ポインティングデバイス（マウス） １６０ 二次記憶装置 １６１ 動画 １６２ 画像合成済動画 ２００ 画像合成プログラム画面 ５００、１１００ 画像 ６１０、１３１０ 移動軌跡 １１２０、１１２１ 領域 １１３０ 領域境界線
フロントページの続き Ｆターム(参考） 5B050 DA09 EA12 EA19 EA24 FA02 FA05 FA09 FA17 5B057 BA23 CD02 CE08 5C023 AA04 AA11 BA11 CA03 DA04 5C082 AA01 AA24 AA37 BA12 BA27 BA41 CA02 CA52 CA54 CA55 CB06 DA87 MM02 MM05
Claims (4)
- 【請求項１】 動画に画像を合成する画像合成方法にお
いて、画像が移動する軌跡を動画の再生にあわせて指定
することにより、動画上を前記軌跡に対応して移動する
画像を合成することを特徴とする画像合成方法。 - 【請求項２】 請求項１記載の画像合成方法において、
動画中に境界領域を指定し、画像が移動する軌跡を、前
記指定された境界領域の条件に合致するように修正する
ことを特徴とする画像合成方法。 - 【請求項３】 請求項２記載の画像合成方法において、
境界領域とともに境界領域を識別する情報（以下、領域
識別情報という）を指定し、該領域識別情報をもとに再
生動画の実際の境界領域を求め、画像の合成位置を修正
することを特徴とする画像合成方法。 - 【請求項４】 請求項1、２、３記載の画像合成方法を
コンピュータで実行するための画像合成プログラムを記
録したコンピュータ読み取り可能な記録媒体。
Priority Applications (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2000003186A JP2001197366A (ja) | 2000-01-12 | 2000-01-12 | 画像合成方法及び画像合成プログラムを記録した記録媒体 |
| US09/651,098 US6967666B1 (en) | 2000-01-12 | 2000-08-30 | Composite picture generating method |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2000003186A JP2001197366A (ja) | 2000-01-12 | 2000-01-12 | 画像合成方法及び画像合成プログラムを記録した記録媒体 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JP2001197366A true JP2001197366A (ja) | 2001-07-19 |
Family
ID=18532171
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2000003186A Pending JP2001197366A (ja) | 2000-01-12 | 2000-01-12 | 画像合成方法及び画像合成プログラムを記録した記録媒体 |
Country Status (2)
| Country | Link |
|---|---|
| US (1) | US6967666B1 (ja) |
| JP (1) | JP2001197366A (ja) |
Cited By (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2009001921A1 (ja) * | 2007-06-27 | 2008-12-31 | Sprasia Inc. | 動画像配信システム及び動画像配信方法 |
| US7505042B2 (en) | 2004-10-01 | 2009-03-17 | Sony Corporation | Editing apparatus, editing method, and program |
| JP2010020290A (ja) * | 2008-06-09 | 2010-01-28 | Sony Corp | 映像信号処理装置、映像信号処理方法及び映像信号処理システム、プログラム、並びに記録媒体 |
| JP2010220095A (ja) * | 2009-03-18 | 2010-09-30 | Canon Inc | 画像処理装置 |
| JP2016058940A (ja) * | 2014-09-11 | 2016-04-21 | 富士通株式会社 | 画像編集方法、装置、及びプログラム |
Families Citing this family (24)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP3802322B2 (ja) * | 2000-07-26 | 2006-07-26 | 株式会社東芝 | 動画像内オブジェクト抽出方法及び装置 |
| JP4068485B2 (ja) * | 2002-09-30 | 2008-03-26 | 株式会社東芝 | 画像合成方法、画像合成装置、画像合成プログラム |
| US7457670B2 (en) * | 2003-08-07 | 2008-11-25 | Production Resource Group, Llc | Gobo virtual machine |
| USD552621S1 (en) * | 2005-07-14 | 2007-10-09 | Brother Industries, Ltd. | Graphic user interface for handheld terminal |
| USD552618S1 (en) * | 2005-07-14 | 2007-10-09 | Brother Industries, Ltd. | Graphic user interface for handheld terminal |
| USD552619S1 (en) * | 2005-07-14 | 2007-10-09 | Brother Industries, Ltd. | Graphic user interface for handheld terminal |
| US8020100B2 (en) | 2006-12-22 | 2011-09-13 | Apple Inc. | Fast creation of video segments |
| US8943410B2 (en) * | 2006-12-22 | 2015-01-27 | Apple Inc. | Modified media presentation during scrubbing |
| US7992097B2 (en) | 2006-12-22 | 2011-08-02 | Apple Inc. | Select drag and drop operations on video thumbnails across clip boundaries |
| KR101017808B1 (ko) * | 2007-04-04 | 2011-02-28 | 엔에이치엔(주) | 편집 파일 자동 생성 방법 및 그 장치 |
| US9319640B2 (en) * | 2009-12-29 | 2016-04-19 | Kodak Alaris Inc. | Camera and display system interactivity |
| US8854417B2 (en) | 2010-04-27 | 2014-10-07 | Lifesize Communications, Inc. | Initiating recording of a videoconference via a single user interaction |
| JP2012003689A (ja) * | 2010-06-21 | 2012-01-05 | Sony Corp | 情報処理装置、情報処理方法およびプログラム |
| JP5598196B2 (ja) * | 2010-09-15 | 2014-10-01 | 株式会社リコー | 情報表示装置、情報表示システム、情報表示方法およびプログラム |
| US8786667B2 (en) | 2011-04-26 | 2014-07-22 | Lifesize Communications, Inc. | Distributed recording of a videoconference in multiple formats |
| US8780166B2 (en) | 2011-04-26 | 2014-07-15 | Lifesize Communications, Inc. | Collaborative recording of a videoconference using a recording server |
| JP5869796B2 (ja) * | 2011-08-03 | 2016-02-24 | キヤノン株式会社 | 再生装置およびその制御方法、プログラム、並びに記憶媒体 |
| US9030482B2 (en) * | 2012-11-09 | 2015-05-12 | Intel Corporation | Hybrid display frame buffer for display subsystem |
| US10528249B2 (en) * | 2014-05-23 | 2020-01-07 | Samsung Electronics Co., Ltd. | Method and device for reproducing partial handwritten content |
| USD1009882S1 (en) | 2017-12-01 | 2024-01-02 | Delos Living Llc | Display screen or portion thereof with graphical user interface |
| USD886137S1 (en) * | 2017-12-01 | 2020-06-02 | Delos Living Llc | Display screen or portion thereof with animated graphical user interface |
| USD918231S1 (en) | 2017-12-01 | 2021-05-04 | Delos Living Llc | Display screen or portion thereof with graphical user interface |
| CN112433529B (zh) * | 2020-11-30 | 2024-02-27 | 东软睿驰汽车技术（沈阳）有限公司 | 运动物体确定方法、装置及设备 |
| CN117956246B (zh) * | 2024-01-30 | 2025-03-14 | 北京有竹居网络技术有限公司 | 用于生成视频的方法、装置、设备和计算机程序产品 |
Family Cites Families (14)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH06231275A (ja) * | 1993-01-29 | 1994-08-19 | Hitachi Ltd | 画像シミュレーション方法 |
| JP3030485B2 (ja) * | 1994-03-17 | 2000-04-10 | 富士通株式会社 | ３次元形状抽出方法及び装置 |
| US5715416A (en) * | 1994-09-30 | 1998-02-03 | Baker; Michelle | User definable pictorial interface for a accessing information in an electronic file system |
| CN1312609C (zh) * | 1995-04-08 | 2007-04-25 | 索尼公司 | 编辑系统 |
| JPH0981361A (ja) * | 1995-09-12 | 1997-03-28 | Toshiba Corp | 画像表示方法、データ収集方法及び対象物特定方法 |
| US5970504A (en) * | 1996-01-31 | 1999-10-19 | Mitsubishi Denki Kabushiki Kaisha | Moving image anchoring apparatus and hypermedia apparatus which estimate the movement of an anchor based on the movement of the object with which the anchor is associated |
| US6144972A (en) * | 1996-01-31 | 2000-11-07 | Mitsubishi Denki Kabushiki Kaisha | Moving image anchoring apparatus which estimates the movement of an anchor based on the movement of the object with which the anchor is associated utilizing a pattern matching technique |
| JP2001510642A (ja) * | 1996-04-19 | 2001-07-31 | スポットズーム アクチーセルスカペット | テレビジョン画像内の物体の処理の方法と装置 |
| US6400374B2 (en) * | 1996-09-18 | 2002-06-04 | Eyematic Interfaces, Inc. | Video superposition system and method |
| JPH10320590A (ja) * | 1997-05-19 | 1998-12-04 | Honda Motor Co Ltd | 合成映像作成装置及び合成映像作成方法 |
| US6215505B1 (en) * | 1997-06-20 | 2001-04-10 | Nippon Telegraph And Telephone Corporation | Scheme for interactive video manipulation and display of moving object on background image |
| US6571054B1 (en) * | 1997-11-10 | 2003-05-27 | Nippon Telegraph And Telephone Corporation | Method for creating and utilizing electronic image book and recording medium having recorded therein a program for implementing the method |
| US6166744A (en) * | 1997-11-26 | 2000-12-26 | Pathfinder Systems, Inc. | System for combining virtual images with real-world scenes |
| US6570581B1 (en) * | 1999-10-25 | 2003-05-27 | Microsoft Corporation | On-location video assistance system with computer generated imagery overlay |
-
2000
- 2000-01-12 JP JP2000003186A patent/JP2001197366A/ja active Pending
- 2000-08-30 US US09/651,098 patent/US6967666B1/en not_active Expired - Fee Related
Cited By (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US7505042B2 (en) | 2004-10-01 | 2009-03-17 | Sony Corporation | Editing apparatus, editing method, and program |
| WO2009001921A1 (ja) * | 2007-06-27 | 2008-12-31 | Sprasia Inc. | 動画像配信システム及び動画像配信方法 |
| JP2009010654A (ja) * | 2007-06-27 | 2009-01-15 | Sprasia Inc | 動画像配信システム及び動画像配信方法 |
| JP2010020290A (ja) * | 2008-06-09 | 2010-01-28 | Sony Corp | 映像信号処理装置、映像信号処理方法及び映像信号処理システム、プログラム、並びに記録媒体 |
| US8284834B2 (en) | 2008-06-09 | 2012-10-09 | Sony Corporation | Video-signal processing apparatus, video-signal processing method, and video-signal processing system |
| JP2010220095A (ja) * | 2009-03-18 | 2010-09-30 | Canon Inc | 画像処理装置 |
| JP2016058940A (ja) * | 2014-09-11 | 2016-04-21 | 富士通株式会社 | 画像編集方法、装置、及びプログラム |
Also Published As
| Publication number | Publication date |
|---|---|
| US6967666B1 (en) | 2005-11-22 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US6967666B1 (en) | Composite picture generating method | |
| US8810708B2 (en) | Image processing apparatus, dynamic picture reproduction apparatus, and processing method and program for the same | |
| US8225208B2 (en) | Interactive frames for images and videos displayed in a presentation application | |
| CN111935505B (zh) | 视频封面生成方法、装置、设备及存储介质 | |
| US10380773B2 (en) | Information processing apparatus, information processing method, and computer readable medium | |
| EP0564247B1 (en) | Method and apparatus for video editing | |
| US7979790B2 (en) | Combining and displaying multimedia content | |
| JP4370792B2 (ja) | ビデオシーケンスの階層形成方法及びプログラム | |
| JP2014149634A (ja) | 入出力装置 | |
| JP2002199347A (ja) | 画像処理装置、画像処理システム、画像処理方法、及び記憶媒体 | |
| JPH10200814A (ja) | 画像編集方法及び画像編集装置並びにコンピュータに画像編集処理動作を実行させるためのプログラムを記録した媒体 | |
| CN111951353A (zh) | 电子相册的合成方法、装置、设备及存储介质 | |
| US6232988B1 (en) | Systems and methods for converting a component in an animation to an interactive object | |
| JPH1027082A (ja) | 画像表示装置 | |
| JP2005292886A (ja) | 画像表示装置、方法およびプログラム | |
| CN115767141A (zh) | 视频播放方法、装置和电子设备 | |
| JP2001045428A (ja) | 動画像処理装置、動画像処理方法および記憶媒体 | |
| JP2001109901A (ja) | アニメーション作成装置および方法、ならびにアニメーション作成プログラムを記録したコンピュータで読取可能な記録媒体 | |
| JPH08115335A (ja) | マルチメディア処理装置 | |
| CN111800663A (zh) | 一种视频合成方法及装置 | |
| JPH09237486A (ja) | 映像と文字との統合管理システム | |
| JP4200960B2 (ja) | 編集装置及び編集方法並びにプログラム | |
| JP5671644B2 (ja) | 動画出力装置、動画出力方法、及びプログラム | |
| CN122023615A (zh) | 动画数据处理方法、装置、电子设备及可读存储介质 | |
| CN117097945A (zh) | 视频处理方法及终端 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20051216 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20051227 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20060227 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20060426 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20060626 |
|
| A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20070619 |