JPH0746606A - 映像信号再生装置 - Google Patents

Abstract

(57)【要約】 【目的】カラオケ映像とカメラ入力信号を自然な映像で
合成すること。 【構成】カラオケソフト上にカメラ、照明等の自動制御
情報を記録し、映像を合成する。 【効果】本発明によれば、カラオケソフト上または、メ
モリカ−ド上に記録された合成位置指定信号等の制御信
号を再生し、ビデオカメラ、照明装置、映像信号処理回
路を最適に制御し、自然な合成映像を作成することが可
能になる。また、画像認識信号をカラオケコントロ−ラ
上に送り、被写体の服の色などをフィ−ドバックするこ
とにより例えばクロマキ−を使用した画像合成におい
て、背景画の色をかえることが可能になるためにより鮮
明に被写体の映像を抽出することが可能になる。

Description

【発明の詳細な説明】

【０００１】

【産業上の利用分野】本発明は、映像の合成方法に係
り、特にカラオケ装置及びビデオゲ−ム機器等のビデオ
信号記録再生装置に関する。

【０００２】

【従来の技術】画像合成を用いたカラオケ装置として
は、ある特定（例えば、静止画像）のカラオケ映像とビ
デオカメラで撮影した歌い手の映像とを単純に同じ位置
で合成するものであった。

【０００３】

【発明が解決しようとする課題】しかし、上記従来技術
では、特定の静止画像にしか対応できない。すなわち、
任意の動画の中でカラオケ映像と歌い手の映像を画像合
成すると、カラオケ映像と歌い手の映像との位置関係、
大きさの関係などに不釣合を生じ不自然な合成画像にな
ってしまう。

【０００４】

【課題を解決するための手段】上記不具合を解決するた
めに、本発明は、あらかじめカラオケ映像中の画像合成
に適した部分を指定する信号をカラオケソフト中に映像
シ−ンと同期して記録し、その信号を再生するものであ
る。また、ビデオカメラで歌い手の映像を撮影する際に
画像合成さきのカラオケソフト映像の絵柄にあわせて歌
い手を撮影するためのカメラアングルをかえるカメラ制
御情報をカラオケソフト中に記録してある信号を再生す
るものである。さらに、ビデオカメラで撮影した歌い手
の映像をカラオケソフト映像の絵柄にあわせて大きさを
かえる映像比率情報を記録したものを再生するものであ
る。さらに同時に、照明装置の色及び位置を制御する照
明制御情報を記録したものを再生するものである。この
場合、例えば、クロマキ−処理し歌い手の映像を抽出す
る場合は、歌い手がみにつけている服の色にあわせて背
景色を制御するものである。さらに、歌い手の映像を任
意の絵柄風に抽象化、もしくは、キャラクタ化してカラ
オケソフトの映像に合成する構成としている。この手段
は、ビデオゲ−ム機器等においては、ゲ−ムソフト上
に、取り込んだ映像信号をそうにゅうすることで実現可
能である。

【０００５】以上の手段は、カラオケソフト上にあらか
じめ上記の制御情報を記録してあったものを再生するも
のであるが、これは、カラオケ装置もしくは、ビデオゲ
−ム機器に装着可能なメモリカ−ドを使用しても実現可
能であり、この場合は、既存のソフトにたいしても対応
可能となる。

【０００６】

【作用】上記の如く構成したことで、カラオケソフト中
の絵柄にあわせて歌い手の映像を合成に適した映像とし
て自由に自動的に撮影可能になるために、合成された画
像が、不自然さをともなうことなく作成可能となる。ま
た、メモリカ−ドを用いることにより、既存のソフトに
たいしても自然な合成画を作成することが可能になる。
さらに、ビデオゲ−ム機器においても操作者の映像もし
くは、写真等より読み込んだ情報をキャラクタ化可能で
あるために、ビデオゲ−ムソフト中の映像に操作者の映
像を自然に合成することが可能になる。

【０００７】

【実施例】以下、本発明の実施例を説明する。図１は、
画像合成装置を含んだカラオケシステムを示したブロッ
ク図であり、１はカラオケコントロ−ラ、２はメモリカ
−ド、３は映像信号処理回路、４はスイッチャ−、５は
拡大縮小回路、６は画像合成回路、７はビデオテ−プレ
コ−ダ（以下，ＶＴＲと略記する。)、８はビデオプリ
ンタ、９はモニタ、１０はカラオケプレイヤ−、１１は
ビデオカメラＡ、１２はビデオカメラＢ、１３は照明装
置Ａ、１４は照明装置Ｂ、１５は照明スクリ−ン、１６
は被写体、１７は再生制御情報信号、１８は合成位置指
定信号、１９は映像比率情報信号、２０はカメラ入力選
択信号、２１、２２はカメラ位置制御情報信号、２３は
照明制御情報信号、２４は背景色制御情報信号、２５は
ビデオ再生信号を示す。

【０００８】ユ−ザからの指令により、カラオケコント
ロ−ラ１は、再生制御信号１７をカラオケプレイヤ−１
０に送る。カラオケプレイヤ−１０は、指定された例え
ば、レ−ザ−ディスクを再生し、ビデオ信号２５を出力
し、画像合成回路６に入力する。または、直接モニタ９
に出力される。一方、照明スクリ−ン１５を背にしてい
る被写体１６をビデオカメラＡ１１、及び、ビデオカメ
ラＢ１２を使用し、撮影する。撮影された映像は、映像
信号処理回路３に入力され，カメラ入力選択信号２０を
受けたスイッチャ−４により、入力信号を選択される。
選択された信号は、映像比率情報信号１９を受けた拡大
縮小回路５により、映像の画面上における比率を変換
し、画像合成回路６に入力されビデオ信号と合成され
る。画像合成された信号は、ＶＴＲ７に入力され、記録
される。また、モニタ９上に出力される。さらに、ビデ
オプリンタ８より、プリントアウトされる。ここで、照
明装置Ａおよび照明装置Ｂの働きについては、図６及び
図７を用いて、後で詳しく説明する。次に、上記各制御
信号の記録する手段の一例について図２及び図３を用い
て説明する。カラオケプレ−ヤ及びカラオケソフトで現
在幅広く使用されている一例にレ−ザディスク装置があ
る。図２は、レ−ザディスク装置の信号記録系を示した
ブロック図である。３０は制御信号記録回路、３１は切
り替えスイッチ、３２は周波数変調回路、３３は映像信
号記録回路、３４はレ−ザディスク、３５はスピンドル
モ−タ−、３６はレ−ザ−ビ−ム、３７は制御信号入力
端子、３８は映像信号入力端子、３９は同期信号検出回
路、４０は切り換え信号入力端子を示す。映像信号入力
端子３８より入力された映像信号は、同期検出回路３９
で同期検出され、映像信号記録回路３３で前記同期信号
に同期し、切り換えスイッチ３１にいたる。一方、制御
信号入力端子３７に入力された制御信号は、制御信号記
録回路３０により、同期信号に同期した信号に処理され
切り換えスイッチ３１にいたる。スイッチ３１に入力さ
れた信号は、切り換え信号入力端子４０に入力されたス
イッチ切り換え制御信号により、後述する図３に示すフ
ォ−マットに従って、スイッチが作動し、周波数変調回
路３２に入力される。周波数変調回路３２に入力された
信号は、周波数変調されて、レ−ザ−ビ−ム送射回路３
６に送られレ−ザ−ビ−ムに変えられて同期信号に同期
したスピンドルモ−タ３５により回転しているレ−ザデ
ィスク上に記録される。図３を用いて、記録フォ−マッ
トについて説明する。図３は、レ−ザ−ディスクの記録
フォ−マットの１フィ−ルド区間の例を示したものであ
り、４１は、ひとまとまりの映像区間（カラオケでいえ
ば、一曲分に相当）、４２はリ−ドインエリア、４３は
リ−ドアウトエリア、４４は１フィ−ルドの信号エリ
ア、４５映像エリア、４６は垂直同期信号エリア、４７
は制御信号入力エリア、４８はビットコ−ドエリアを示
す。リ−ドインエリア４２で一曲の始まりが、定義さ
れ、リ−ドアウトエリア４３で終わりが、定義される。
上記区間は、ビデオ信号の水平走査線よりなる１フィ−
ルド信号エリア４４の整数倍で構成されている。前記１
フィ−ルド信号エリアは、例えばＮＴＳＣ方式で説明す
れば、１から９まで（２６４から２７２）の水平走査期
間内は、垂直同期信号が、記録されている垂直同期信号
エリア、１０から１５まで（２７３から２７８）は、記
録内容の制約がなく本システムに利用可能な、制御信号
入力エリア、１６から１８まで（２７９から２８１）の
水平走査期間内は、フレ−ム番号等のあらかじめ記録す
る内容が指定されたビットコ−ドエリア、その他は、映
像信号が記録されている映像区間４５より構成されてい
る。従って、本発明では、上記制御信号エリア上に記録
された制御信号を再生することによって、図１で示した
システムが、実現される。上記説明したものは、新たに
レ−ザ−ディスク上に制御信号を記録する手段である
が、既存のレ−ザ−ディスクにたいしては、メモリカ−
ド２に映像信号とあわせた前記制御信号を入力し、それ
を再生するることによって、上記システムが実現でき
る。次に、本発明により記録される制御信号の役割及び
制御方法について説明する。図４は、上記２種類の信号
を合成したあとのモニタ上の位置を示したブロック図で
あり、５１はカメラ入力映像合成部分、５２はカラオケ
プレイヤ−再生映像部分を示す。上記配置の合成映像
は、以下に示す方法で作成される。すなわち、図２、図
３で説明したカラオケソフト中に記録されている制御信
号をカラオケプレイヤ−で再生し、その情報をカラオケ
コントロ−ラは受け取り各ブロックに出力する。以上の
ように出力された信号の中の合成位置指定信号を用いる
ことによって、上記合成映像の枠組みは決定され、実際
のカラオケソフトの映像にあった合成画面が、作成され
る。次は、この枠組みにあわせて、カメラ入力映像信号
を変換する手段について図５、図６、図７を用いて説明
する。図５は、ビデオカメラ制御手段を示した図であ
り、５５、６３はカメラ撮像部、５６、５７、５８、６
４はモ−タ、６０、６１、６２、６６はモ−タ制御、５
９、６５は映像信号処理回路、６７、６８は映像信号出
力端子、６９は左右方向制御信号、７０は前後方向制御
信号、７１は上下方向制御信号、７２はカメラ向き制御
信号を示す。カメラ撮像部５５、モ−タ５６、５７、５
８、映像信号処理回路５９、モ−タ制御６０、６１、６
２で構成されたビデオカメラＡ１１は、カラオケコント
ロ−ラ１より出力される左右方向制御信号６９をモ−タ
制御回路６０が受け取り、モ−タ５６に指令を与えビデ
オカメラＡ１１本体を左右に移動する。その際に、移動
用のレ−ルを設けてそのレ−ル上を移動する手段を利用
してもよい。同様に、ビデオカメラＡ１１は、カラオケ
コントロ−ラ１より出力される前後方向制御信号７０を
モ−タ制御回路６１が受け取り、モ−タ５７に指令を与
えビデオカメラＡ１１本体を前後に移動する。また、ビ
デオカメラＡ１１は、カラオケコントロ−ラ１より出力
される上下方向制御信号７１をモ−タ制御回路６２が受
け取り、モ−タ５８に指令を与えビデオカメラＡ１１本
体を上下に移動する。この場合も、移動用のレ−ル等を
設け移動させることも可能である。このように構成した
ことにより、レ−ザディスク上にあらかじめ記録された
映像信号に同期した制御信号を設けることにより、映像
の絵柄にあった被写体（この場合歌い手）の映像を任意
のカメラアングルで撮影することが、可能となる。ま
た、カメラ撮像部６３、モ−タ６４、映像信号処理回路
６５、モ−タ制御６６で構成されたビデオカメラ１２
は、カラオケコントロ−ラ１より出力されるカメラ向き
制御信号７２をモ−タ制御回路６３が受け取り、モ−タ
６４に指令を与えビデオカメラＢ１２の撮像部を上下左
右に移動する。この場合は、ビデオカメラ位置は、固定
であり、同一位置で撮像部の向きが、移動する。上記の
構成は、複数台のビデオカメラを使用することにより、
あらかじめ、映像よりもはやめに制御信号を受けとるこ
とも可能となり、移動による映像のみだれがなくなる。
次に図６を用いて照明装置の制御手段について説明す
る。図６は、照明装置の制御手段を示した図であり、７
５は色制御回路、７６は輝度制御回路、７８はモ−タ制
御、７７はモ−タ、７９は色制御信号、８０は輝度制御
信号、８１はモ−タ制御信号を示す。色制御回路７５、
輝度制御回路７６、モ−タ制御回路７８、モ−タ７７を
含んだ照明装置１４は、カラオケコントロ−ラ１より出
力される色制御信号７９により、照明の色が、変更され
る。また、輝度制御信号８０によって、照明の明るさが
制御される。さらに、モ−タ制御信号を照明装置Ｂ１４
のモ−タ制御回路７８が、受け取り、モ−タ７７を駆動
し、その結果、照明装置Ｂ１４の位置が移動する。この
場合においても移動の際は、レ−ル等を用いても良い。
図７は、画像合成手段をあらわした図であり、８４はキ
−処理回路、８５は画像認識回路、８６は画像入力端
子、８７は合成映像出力端子、８８は画像認識信号、８
９は背景色制御回路を示す。画像入力端子８６より入力
されたビデオカメラにより撮影された信号は、画像認識
回路８５に入力されて、カラオケコントロ−ラ１に画像
認識信号８８を出力する。画像認識信号８８には、例え
ば、被写体の服の色情報などが、ふくまれている。この
服の色は、照明装置Ａ１３中の背景色制御回路８９にお
くられ、背景色を被写体の服の色にあわせて変更でき
る。このように構成すれば、例えば、クロマキ−をもち
いて被写体の映像を背景から抽出するときに誤抽出する
部分が少なく抽出可能になる。

【０００９】一方、画像入力端子８６より入力されたビ
デオカメラにより撮影された信号は、画像認識回路８８
に入力されて、キ−処理回路８４に至る。同時に、ユ−
ザからのリクエストにより、カラオケコントロ−ラ１よ
り出力した再生制御情報信号１７によりカラオケプレ−
ヤ１０が、例えば、レ−ザ−ディスク等を再生しその再
生信号をキ−処理回路８４におくる。キ−処理回路に入
力された信号は、図４を用いて説明した如く合成位置指
定信号を用いて、その信号により指定された位置に合成
され、画像入力端子８７より出力される。上記の如く構
成することにより、合成信号が、誤抽出することなく容
易に生成可能になる。

【００１０】図８を用いて第２の実施例を説明する。図
８は、ビデオ機器に画像をとりこむ手段を説明した図で
あり、９０はビデオカメラ、９１は映像信号処理回路、
９２は画像抽出回路、９３は画像符号化回路、９４は画
像処理回路、９５はビデオ機器、９７は画像取り込み装
置、９６はソフトウエア、９８はモニタを示す。ビデオ
カメラ９０より撮影された信号は、映像信号処理回路９
６でビデオ信号に処理され、画像抽出回路９２にいた
る。画像抽出回路９２では、例えば、クロマキ−処理、
または、輪郭抽出処理を施されて、被写体の画像抽出を
行う。画像抽出された信号は、画像符号化回路９３で、
デ−タとして扱いやすいデジタルデ−タに変換され、画
像処理回路９４により、例えば、抽象化もしくは、キャ
ラクタ化され、ビデオ機器９５内にある画像取り込み装
置９７により、ビデオ機器９５のソフトウエア（例え
ば、ゲ−ムソフト）上に取り込まれモニタ上に出力され
る。すなわち、画像取り込み装置９５は、キャラクタ化
された映像信号を取り込み、それをあらかじめソフトウ
エア中に指定された場所に指定されたかたちに変換し、
ソフトウエア上に合成する働きをもつ。上記の如く構成
されたことで、被写体の映像をビデオ機器内に取り込む
ことが可能になる。また、何度も書替えが可能な構成の
ために何度も違う被写体の映像を取り込むことが、可能
になる。上記システムにおいて図８では、被写体の映像
を取り込むさいにビデオカメラを使用したが、これは、
スキャナ−により写真等からコンピュ−タをかいして、
または、ビデオ機器に直接にとりこむことでもよい。さ
らに、画像抽出回路９２により、取り込まれた信号は、
画像符号化回路９３でデジタルデ−タに変換しなくても
よい。以上のシステムを構成することにより例えば、ビ
デオゲ−ム機器内に映像信号をとりこむことが可能にな
るためにユ−ザが任意の映像（例えば、ユ−ザ地震の
顔）をとりこんでゲ−ム機器上を動作しているソフトウ
エア上に合成することが、可能になる。

【００１１】

【発明の効果】本発明によれば、カラオケソフト上また
は、メモリカ−ド上に記録された合成位置指定信号等の
制御信号を再生し、ビデオカメラ、照明装置、映像信号
処理回路を最適に制御し、自然な合成映像を作成するこ
とが可能になる。また、画像認識信号をカラオケコント
ロ−ラ上に送り、被写体の服の色などをフィ−ドバック
することにより例えばクロマキ−を使用した画像合成に
おいて、背景画の色をかえることが可能になるためによ
り鮮明に被写体の映像を抽出することが可能になる。さ
らに、画像抽出した信号をビデオ機器ないに取り込める
構成としたために例えば、ゲ−ム機器等に任意の映像を
そのゲ−ム機器上のソフトウエアの中に合成しゲ−ム機
器の映像のなかに例えば、ユ−ザの送りこんだキャラク
タ映像を新たに実現することができる。

【図面の簡単な説明】

【図１】画像合成装置を含んだカラオケシステムのブロ
ック図である。

【図２】レ−ザディスク装置の信号記録系のブロック図
である。

【図３】レ−ザディスクの記録フォ−マットを示す図で
ある。

【図４】合成画面位置を示す図である。

【図５】ビデオカメラ制御手段を示す図ある。

【図６】照明装置の制御手段を示す図である。

【図７】画像合成手段を示す図である。

【図８】画像とりこみ手段を示す図である。

【符号の説明】

１…カラオケコントロ−ラ、５…拡大縮小回路、６…画
像合成回路、１８…合成位置指定信号、１９…映像比率
情報信号、２１、２２…カメラ位置制御情報信号、２４
…背景色制御情報信号、２３…照明制御情報信号。

フロントページの続き (72)発明者 菅 厚夫 神奈川県横浜市戸塚区吉田町292番地株式 会社日立製作所映像メディア研究所内

Claims (4)

【特許請求の範囲】
1. 【請求項１】映像信号（以下、再生映像信号と略記す
   る。）を再生する手段とビデオカメラより送出された信
   号（以下、カメラ入力信号と略記する。）と該再生映像
   信号とを画像合成する手段を有する映像信号再生装置に
   おいて、該映像信号再生装置は、移動する手段を有する
   ビデオカメラと方向可変手段を有するビデオカメラと照
   明色可変手段を有する照明装置と照明輝度可変手段を有
   する照明装置と移動手段を有する照明装置と該ビデオカ
   メラで撮影する際の被写体を抽出するための背景色を被
   写体の映像にあわせて可変する手段を有する照明装置と
   該カメラ入力信号の画面上における大きさを可変する手
   段を有する映像信号処理回路と該再生映像信号とカメラ
   入力信号を画像合成する手段を有し、しかも合成位置を
   指定可能な手段を有する映像信号処理回路の構成要素の
   うち少なくとも１つ以上の該被制御機器を備えかつ、該
   再生映像が記録されている記録媒体上に記録されている
   該被制御機器を制御する制御情報信号または、該映像信
   号再生装置に装着可能な記憶装置に記憶されている該制
   御情報信号を再生する手段を有することを特徴とする映
   像信号再生装置。
2. 【請求項２】上記制御信号を記録する手段を持つことを
   特徴とする請求項１記載の映像信号再生装置。
3. 【請求項３】映像信号（以下、再生映像信号と略記す
   る。）を再生する手段とビデオカメラより送出された信
   号（以下、カメラ入力信号と略記する。）と前記再生映
   像信号とを画像合成する手段を有する映像信号再生装置
   において、ビデオカメラで取り込んだ被写体の映像情報
   をデジタルデ−タに変換し、デジタルデ−タ変換回路に
   て合成映像に適した画像に変換し再生映像信号合成する
   手段を備え、かつ該映像信号を再生する手段を有するこ
   とを特徴とする映像信号再生装置。
4. 【請求項４】映像信号（以下、再生映像信号と略記す
   る。）を再生する手段とビデオカメラより送出された信
   号（以下、カメラ入力信号と略記する。）と前記再生映
   像信号とを画像合成する手段を有する映像信号再生装置
   において、該再生映像信号を再生する手段内で動作する
   ソフトウエア内のプログラム中にカメラ入力信号を合成
   する手段を備え、かつ該合成したプログラムを再生する
   手段を有することを特徴とする映像信号再生装置。