JPH10164521A

JPH10164521A - 画像処理装置

Info

Publication number: JPH10164521A
Application number: JP8320589A
Authority: JP
Inventors: Kunio Imai; 邦雄今井
Original assignee: Canon Inc
Current assignee: Canon Inc
Priority date: 1996-11-29
Filing date: 1996-11-29
Publication date: 1998-06-19

Abstract

(57)【要約】【課題】文字放送における映像部分とこれと関連する
文字とを自動的に抽出してレイアウトし、一枚の紙にプ
リントする。【解決手段】チューナ２で選局された文字放送信号は
静止画像取り込み部４に入力され、その映像信号の動き
が検出される。動きが閾値以下の状態が一定時間続く
と、１フレームの静止画像信号が画像メモリ４３に取り
込まれる。このとき文字データ抽出部３は関連する文字
データを垂直ブランキング期間から抽出しテキスト情報
としてテキストメモリ３４に格納する。これらの静止画
像とテキスト情報とは所定の出力フォーマットに流し込
まれてレイアウトされ、出力レイアウトメモリ５に一枚
の画像として蓄えられる。蓄えられた画像はプリンタ制
御部６を介してプリンタ７に出力されることにより一枚
の紙に印刷される。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は、文字放送のように
垂直ブランキング期間にデータが重畳されたテレビジョ
ン信号を受信して処理する場合等に用いて好適な画像処
理装置に関するものである。

【０００２】

【従来の技術】従来の文字放送は、テレビジョン放送の
映像信号のうち、ディスプレイ画面上に映像として表示
されない垂直ブランキング期間にデータを重畳して伝送
するデータ放送の一種であり、受信側で上記データを文
字や図面等の静止画として組み立てて表示するものであ
る。

【０００３】我が国にける従来の文字放送は図６に示す
ように、垂直ブランキング期間における第１４、１５、
１６、２１Ｈ（第２フィールドでは第２７７、２７８、
２７９、２８４Ｈ）の４つの水平走査期間にデータを重
畳して伝送するようにしている。これに対して最近新し
いデータ放送として図６に示すように、第１０、１１、
１２、１３Ｈ（同第２７３、２７４、２７５、２７６
Ｈ）の水平走査期間にデータを重畳するデータ放送が開
始されている。

【０００４】これらの従来の文字放送や新しいデータ放
送で重畳されるデータ量は、同期信号や誤り訂正のため
の信号を除いて１水平走査期間あたり１７６ビット（２
２バイト）であるから、１秒間（６０フィールド）では
１３２０バイトである。このようなデータは、映像とし
てではなく５．７２ＭＨｚのクロックで刻まれる
「１」、「０」の２値の波高値として伝送されるもので
あり、受信側ではこのようなデータから所定のテキスト
情報を抽出し、これを文字や図形として見ることができ
るようにフレーム画像を構成し、静止画像として表示す
るものである。

【０００５】文字放送の番組形態としては、映像画面中
の会話等と同期して送られる字幕番組や、同期はしてい
ないが映像と関連がある番組あるいは映像とは関連がな
く独立した番組等がある。そのうち上記映像と関連があ
る番組の場合、映像と重畳されたデータとを結びつけて
一枚の画面で表示すると分かり易く、利用価値が高くな
る。これをテレビ画面で表示してもよいが、本来静止し
て表示される文字や図形等のテキスト情報はこれを紙に
プリントした方が読み易い。これはプリンタが安価に入
手できるようになった今日では比較的容易に実現するこ
とが可能である。

【０００６】即ち、図７に示すように、文字放送のテキ
スト情報とこれと関連する映像信号から抽出された静止
画像とをレイアウトして一枚の紙の上にプリントするこ
とが考えられる。例えば料理番組があり、これと関連す
るレシピが文字放送で同時に送られているような場合、
レシピ情報と出来上った料理とを一枚の紙の上にレイア
ウトしてプリントするという使い方が考えられる。

【０００７】上記の使い方を実行する場合、従来では次
の操作が必要となる。（１）放送番組の映像から最適な静止画像を取り込む。（２）これと対応する文字放送のテキスト情報を画面を
見ながら書き取るか、又はコンピュータ用の文字放送ア
ダプタを介してテキスト情報をコンピュータ上に得る。（３）上記静止画像とテキスト情報とをコンピュータや
ワープロを用いて編集し、一枚の紙の上に出力する。

【０００８】

【発明が解決しようとする課題】上記（１）の操作にお
いて、文字放送の内容に最もふさわしい静止画を取り込
む方法として、放送画面を見ながら最適と思われる場面
が表示されたときトリガキーを押す方法が考えられる。
しかしながらこのような操作を実際に行うにはタイミン
グのとり方などが難しく、また、上記（１）（２）
（３）の各操作は非常に煩雑であり、実際的でないとい
う問題があった。

【０００９】本発明は上記の操作を自動的に実行し、静
止画像とテキスト情報とを自動的に最適なフォーマット
でレイアウトしてプリンタ等に出力できるようにした画
像処理装置を提供することを目的としている。

【００１０】

【課題を解決するための手段】本発明においては、映像
信号と垂直ブランキング期間に重畳されたデータとを含
むテレビジョン信号を受信する受信手段と、上記受信し
た映像信号の動き量が所定値以下でかつこの所定値以下
の状態が所定時間以上連続したことに応じて上記映像信
号から静止画像信号を取り込む取り込み手段と、上記静
止画像信号が取り込まれたときの垂直ブランキング期間
から所定のデータを抽出するデータ抽出手段と、上記取
り込まれた静止画像信号と上記抽出されたデータとを所
定の出力フォーマット上にレイアウトするレイアウト手
段とを設けている。

【００１１】

【作用】本発明によれば、受信した映像信号の動きが小
さくそれが一定時間以上続いたことに応じて、静止画像
信号が自動的に取り込まれると共に、そのときの文字デ
ータ等のデータが抽出され、このデータと上記静止画像
信号とが所定のフォーマットで自動的に所定にレイアウ
トされる。従って、このレイアウトされた信号をプリン
タ等に出力すればレイアウトされた１枚の画像を得るこ
とができる。

【００１２】

【発明の実施の形態】図１は本発明による画像処理装置
の実施の形態を示す。図１において、１はアンテナ、２
はアンテナ１から得られるテレビジョン放送波信号から
希望のチャンネルを選択するチューナで、ベースバンド
のテレビジョン信号を取り出す。３は上記テレビジョン
信号の垂直ブランキング期間から文字放送のデータを抽
出する文字データ抽出部、４は上記テレビジョン信号の
映像信号の動きを検出して静止画像信号を自動的に取り
出す静止画像取り出し部、５は上記取り出された静止画
像信号と抽出されたテキスト情報とをプリンタに適した
フォーマットでメモリ上にレイアウトして出力する出力
レイアウトメモリ、６はレイアウトされた信号を読み出
してプリンタ７に出力するためのプリンタ制御部、７は
出力された画像信号を紙にプリントするプリンタであ
る。

【００１３】８はコマンド信号の入力や表示信号の出力
及び表示を行う入出力インターフェース部、９は時計
部、１０は全体を制御するＣＰＵである。

【００１４】次に文字データ抽出部３において、３１は
チューナ２で選局されたチャンネルの信号から文字放送
のデータを抽出する文字抽出部で、５．７２ＭＨｚ
（０．１７５μｓ）のクロックにより、アイパターンが
最も開いた位置で伝送波形の波高値をサンプリングし、
所定の閾値と比較することにより「１」、「０」を判別
する。３２は抽出されたデータを一時蓄積するバッファ
メモリ、３３はバッファメモリ３２に蓄えられたデータ
を解析して必要なテキスト情報を取り込むためのデータ
解析抽出制御部、３４は上記テキスト情報を記憶するテ
キストメモリ、３５は処理プログラムや文字データを解
析判別するためのデータが格納されたＲＯＭである。

【００１５】また、静止画像取り出し部４において、４
１はチューナ２で選局されたチャンネルのベースバンド
信号を復調し、輝度信号と色差信号又は３原色（ＲＧ
Ｂ）信号とを分離して抽出するデコーダ、４２は上記輝
度信号（映像信号）の動きを監視し、動き量が所定の閾
値以下でかつ閾値以下の状態が所定時間連続したことを
検出してトリガ信号を発生する動き検出トリガ発生回
路、４３は上記トリガ信号に応じてデコーダ４１で抽出
した映像信号から１フレームの静止画像信号を取り込む
画像メモリである。この画像メモリ４３は、情報を失わ
ない範囲でメモリを節約する観点からは、輝度信号とこ
の輝度信号の半分のサンプリング周波数で標本化された
色差信号とに分離して記憶するのが好ましい。また後の
処理の簡単さの観点からは、３原色信号に分解して記憶
するようにしてもよい。

【００１６】次に入出力インターフェース部８におい
て、８１は本体の操作釦の操作によるコマンド信号を入
力する本体インターフェース、８２はリモコンの操作釦
の操作によるコマンド信号を入力するリモコンインター
フェースである。

【００１７】次に上記構成による動作について図２、図
３のフローチャートと共に説明する。まず、ステップＳ
１で文字放送を予約する処理が行われ、希望番組の番
号、それと関連するテレビジョン放送のチャンネル、そ
の番組の開始、終了時刻を指定する。これらは本体ある
いはリモコンの操作釦の操作より指定される。指定後は
本体及びプリンタ７は電力を消費しない状態で保持され
る。次に指定時刻になるとステップＳ２でタイマによる
起動処理が行われ、本体とプリンタ７に電源が投入され
る。続いてステップＳ３により映像信号と文字放送のデ
ータとの抽出を開始する。ここからは図３のステップＳ
４以降の静止画像取り込み処理と図２のステップＳ１３
以降の文字データ抽出処理とに分岐する。

【００１８】まず静止画像取り込み処理について図３と
共に説明する。動く映像の中からその映像を実際に見る
ことなく適当なシーンを自動的に抽出しようとする方法
は、重要な主題となる映像の画面は、しばらくの間静止
した状態で保持されるという一般的な事実に基づいて行
われる。そこで、まずステップＳ４において、動き量の
閾値Ｍ₀と、この閾値Ｍ₀以下の状態が連続する時間の
閾値Ｔ₀とを設定する。これらのＭ₀、Ｔ₀の値は最初
はＲＯＭ３５に処理プログラムのデータとして用意す
る。次にステップＳ５で動き量Ｍを測定する。この測定
は番組が終了するまで連続して行われる。動き量検出
は、隣り合うフレーム画像の対応する画素のレベル差を
とることにより行われるが、詳細な回路構成については
後述する。この動き量の検出は、１フレーム期間ずつリ
セットしながら次々と変化するのを読み取りながら行わ
れる。

【００１９】次にステップＳ６では、検出された動き量
ＭとＭ₀とを比較し、Ｍ≦Ｍ₀となったときからステッ
プＳ７で時間の計測を開始する。そしてステップＳ８で
計測した時間ＴとＴ₀とを比較し、Ｔ≧Ｔ₀となったと
き、ステップＳ９で前記トリガ信号を発生して次の垂直
同期信号と一致した時点から１フレーム分の静止画像信
号を画像メモリ４３に取り込む。

【００２０】次にステップＳ１０でＭ＞Ｍ₀になったと
き、ステップＳ１１でその時点まで計測した時間Ｔを記
憶して計測を終了すると共に、Ｔ₀をＴに置き換える。
上記ステップＳ５〜Ｓ１１はステップＳ１２で番組が終
了するまで行われる。

【００２１】次に文字データ抽出処理について図２と共
に説明する。文字放送におけるデータのうち番組管理デ
ータ又はページデータは、図４に示すように１バイトの
ヘッダ開始符号（ＳＯＨ）から始まる１９バイトの番組
データヘッダ又はページデータヘッダに構成されてい
る。そこでこの１９バイトのデータを解析して、ステッ
プＳ１３で、第８バイト目のデータヘッダ識別符号を調
べ、それが「０２／０」であれば番組管理データであ
り、この場合は第１１、１２バイト目の番組番号データ
を指定した番組番号と比較し、一致したときステップＳ
１４で第１３バイト目のページ総数をカウンタにセット
する。

【００２２】続いて送られて来るＳＯＨから始まる１９
バイトのデータについて第８バイト目の識別符号が「０
２／１」であればそれはページデータヘッダであるの
で、その場合は、第１１、１２バイト目の番組番号が指
定した番組番号と一致したとき、第１３バイト目のデー
タがページ番号を示しているので、それをステップＳ１
５でそのページ番号データをテキストメモリ３４に書き
込む。以下、ステップＳ１６において次々に送られて来
るデータヘッダを調べ、取り込んだページデータがペー
ジ総数と一致したら、ステップＳ１７で指定した番組番
号に対応するテキスト情報が全て蓄積されたことにな
る。

【００２３】次に上述のようにして得られた画像メモリ
４３の静止画像データとテキストメモリ３４のテキスト
情報とをステップＳ１８で予め用意された出力フォーマ
ットの中に流し込んでその結果を出力レイアウトメモリ
５に蓄える。そしてステップＳ１９で、上記蓄えられた
データをプリンタ７に出力させる。これによりプリンタ
７は、例えば図７のようにレイアウトされた画像を１枚
の紙の上にプリントすることができる。その後、ステッ
プＳ２０で本体及びプリンタの電源を遮断して終了とす
る。以上の処理手順はＲＯＭ３５等に格納されている。

【００２４】図５は図１の動き検出トリガ発生回路４２
の構成例を示す。図５において、図１のデコーダ４１で
復調された輝度信号が入力されると、同期信号検出回路
４２１が同期信号を検出してタイミング発生回路４２２
で発生されるクロックの基準とする。また、デコーダ４
１の出力がアナログ映像信号の場合はＡ／Ｄ変換器４２
３でディジタル化した後、フレームバッファ４２４で１
フレーム遅延させる。次に減算器４２５で上記１フレー
ム遅延した信号と遅延しない現在の信号との差を画素毎
にとり、この差分値を積算回路４２６に加えて１フレー
ム期間の積算値を得る。この積分値は動き量Ｍとして次
のフレームまでラッチされる。

【００２５】次にこの動き量Ｍを比較器４２７で閾値Ｍ
₀と比較する。この比較結果はＭ≦Ｍ₀又はＭ＞Ｍ₀で
ある限り、高（又は低）レベル又は低（又は高）レベル
となる。この比較結果を時間計測回路４２８とタイマ４
２９に基準値として与える。時間計測回路４２８はＭ≦
Ｍ₀である限り、タイミング発生回路４２２からのクロ
ックにより時間を計測する。従って、この時間計測回路
４２８は、常にＭ≦Ｍ ₀の持続時間の最大値を出力し、
これをタイマ４２９に設定時間Ｔ₀として与える。タイ
マ４２９は上記クロックで時間を計測し、Ｔ₀に達する
とトリガパルスを発生する。このトリガパルスと垂直同
期信号とが一致した時点からフレーム期間の静止画像信
号を画像メモリ４３に取り込む。

【００２６】上記の構成例は、静止時間が最も長いシー
ンを一枚だけ取り込む場合であるが、メモリ容量を増や
して複数枚取り込むようにしてもよい。その場合は、前
述したステップＳ１１のＭ≦Ｍ₀の接続時間を過去の最
大値に置き換える処理を省略すると共に、容量を増やし
た画像メモリ４３に、トリガパルスが発生する毎に順次
フレーム（又はフィールド）画像を取り込む処理を行え
ばよい。また取り込まれた画像を全て表示し、その中か
ら最適な画像を手動で選ぶことができる。

【００２７】尚、上述した実施の形態においては、リア
ルタイムに放送されているテレビジョン放送とそれに関
連する文字放送の場合について説明したが、垂直ブラン
キング期間の波形も記録できるＶＴＲ等の記録再生装置
を用い、受信した文字放送を含むテレビジョン信号を記
録した後、これを再生し、その再生信号から静止画像信
号とテキスト情報とを抽出し、これらをレイアウトする
ようにしてもよい。これにより、放送時間に関係なくい
つでもプリントを行うことができる。

【００２８】これを具体的に行うには、上記記録再生装
置を設けてチューナ２の出力を垂直ブランキング期間の
波形も含めて記録して置き、その再生出力を文字データ
抽出部３と静止画像取り出し部４とに与えるように構成
すればよい。またその際、図２の処理において、ステッ
プＳ１の放送開始、終了時刻として「０：０：０」を入
力する等の多少の変更を行えばよい。

【００２９】また、本実施の形態は、出力レイアウトメ
モリ５上でプリンタ７に適した出力フォーマットによる
レイアウトが行われたが、コンピュータのディスプレイ
で表示するのに適した出力フォーマットを用いてもよ
く、さらにはＶＴＲ等で記録再生するのに適した出力フ
ォーマットを用いてもよく、各出力フォーマットに応じ
た出力手段を設けるようにしてもよい。

【００３０】また、本発明による画像処理装置は、これ
をプリンタに内蔵してもよく、あるいはビデオカメラ、
ビデオスチルカメラ等の撮像装置やテレビジョン受像
機、ＶＴＲ等に内蔵してもよい。

【００３１】また、ここでは日本国内における放送シス
テムを用いて説明したが、他の文字放送方式において
も、同様の考え方が適用可能である。

【００３２】

【発明の効果】以上説明したように、本発明によれば、
映像信号の動きが小さい状態が一定時間持続したことに
応じて自動的に静止画像信号と文字放送のデータとを
得、これらを所定のフォーマットに従って自動的にレイ
アウトすることができる。従って、このレイアウトされ
た画像を例えばプリンタ等の外部の装置に送って印刷
し、表示することができる効果が得られる。

【００３３】また、請求項２の発明によれば、所望のテ
レビジョン放送番組を自動的に選択し、そのテレビジョ
ン信号について上記の効果を得ることができる。

【００３４】また、請求項３の発明によれば、映像信号
と文字放送のデータとが関連している番組について互い
に関連している静止画像とデータとを１枚の画像内にレ
イアウトすることができる。

【００３５】請求項４の発明によれば、種々の出力フォ
ーマットを記憶手段に用意することにより、外部装置の
種類に適したレイアウトを行うことができる。

【００３６】そして請求項５の発明によれば、上記自動
的にレイアウトされた画像をプリンタを用いて１枚の紙
の上に印刷することができる。

【００３７】また、請求項６の発明によれば、上記自動
的にレイアウトされた画像をコンピュータの画面上に容
易に表示させることができる。さらに請求項７の発明に
よれば、上記自動的にレイアウトされた画像を容易に記
録再生することができる。

【００３８】またさらに請求項８、９、１０の発明によ
れば、本発明の前述した効果を有する画像処理装置を内
蔵する撮像装置、プリンタ、テレビジョン受像機を得る
ことができる。

【００３９】また請求項１１の発明によれば、記録した
テレビジョン信号を任意のときに再生して上記の効果を
得ることができる。

【図面の簡単な説明】

【図１】本発明の実施の形態を示すブロック図である。

【図２】本発明の実施の形態の動作を示すフローチャー
トである。

【図３】本発明の実施の形態の動作を示すフローチャー
トである。

【図４】文字放送の番組管理データ又はページデータヘ
ッダのデータ構成を示す構成図である。

【図５】図１の動き検出トリガ発生回路の構成例を示す
ブロック図である。

【図６】本発明を適用し得る文字放送やデータ放送の信
号構成を示すタイミングチャートである。

【図７】プリンタが印刷した画像の一例を示す構成図で
ある。

【符号の説明】

１アンテナ２チューナ３文字データ抽出部４静止画像取り込み部５出力レイアウトメモリ６プリンタ制御部７プリンタ８入出力インターフェース部９時計１０ＣＰＵ

Claims

【特許請求の範囲】

【請求項１】映像信号と垂直ブランキング期間に重畳
されたデータとを含むテレビジョン信号を受信する受信
手段と、上記受信した映像信号の動き量が所定値以下でかつこの
所定値以下の状態が所定時間以上連続したことに応じて
上記映像信号から静止画像信号を取り込む取り込み手段
と、上記静止画像信号が取り込まれたときの垂直ブランキン
グ期間から所定のデータを抽出するデータ抽出手段と、上記取り込まれた静止画像信号と上記抽出されたデータ
とを所定の出力フォーマット上にレイアウトするレイア
ウト手段とを備えた画像処理装置。
【請求項２】上記テレビジョン信号の放送番組を指定
する指定手段を設けたことを特徴とする請求項１記載の
画像処理装置。
【請求項３】上記映像信号と上記垂直ブランキング期
間に重畳されたデータとは内容が関連していることを特
徴とする請求項１記載の画像処理装置。
【請求項４】上記レイアウト手段は、上記出力フォー
マットを記憶する記憶手段を有することを特徴とする請
求項１記載の画像処理装置。
【請求項５】上記出力フォーマットはプリンタにより
印刷可能なフォーマットであり、上記レイアウトされた
静止画像信号とデータとを上記プリンタに出力する出力
手段を設けたことを特徴とする請求項１記載の画像処理
装置。
【請求項６】上記出力フォーマットはコンピュータの
表示画面に表示可能なフォーマットであり、上記レイア
ウトされた静止画像信号とデータとをコンピュータに出
力する出力手段を設けたことを特徴とする請求項１記載
の画像処理装置。
【請求項７】上記出力フォーマットは記録媒体に対し
て記録再生可能なフォーマットであり、上記レイアウト
された静止画像信号とデータとを上記記録媒体に対して
記録再生する記録再生装置に出力する出力手段を設けた
ことを特徴とする請求項１記載の画像処理装置。
【請求項８】上記各手段が撮像装置内に設けられてい
ることを特徴とする請求項１記載の画像処理装置。
【請求項９】上記各手段がプリンタ内に設けられてい
ることを特徴とする請求項１記載の画像処理装置。
【請求項１０】上記各手段がテレビジョン受像機内に
設けられていることを特徴とする請求項１記載の画像処
理装置。
【請求項１１】上記受信手段が受信したテレビジョン
信号をその垂直ブランキング期間の波形を含めて記録媒
体に記録し、その再生信号を上記取り込み手段と上記デ
ータ抽出手段とに入力させる記録再生手段を設けたこと
を特徴とする請求項１記載の画像処理装置。