JPS61502158A - 視覚システム - Google Patents

Abstract

(57)【要約】本公報は電子出願前の出願データであるため要約のデータは記録されません。

Description

【発明の詳細な説明】 視覚システム 本発明の分野 本発明は視覚システム、専らと云う訳ではないが特に、目標区域内での画像の変 化により目標区域内に生ずる応答を与える電子工学的な視覚システムに関するも のである。

本発明はロボット技術の分野で特に有用であるが、他の分野でも多くの用途を有 する。

一つの形態では本発明はシンセサイザを演奏する技術の分野で特に有用である。

この用途ではビデオシステムが人間を視、その人の動きを変数に翻訳し、シンセ サイザの出力信号を制御する。このようにして目標区域内で動く人によりシンセ サイザを演奏できる。人体の手足の動きにより音及び色の系列をシンセサイザに 与えることができる。人体全体の動きがシンセサイザの出力に対する粗い変化を 与え、腕及び指又はそのいずれか一方のような個々の部位の動きがシンセサイザ の出力を微調整する。

従来技術の分野 シンセサイザのような楽器を演奏する技術分野では、画像の単なる存否により音 楽の内容を制御することができなかった。代表的な場合は、オペレータが鍵盤を 押してシンセサイザを演奏し、特定の音を発生させ、それを記憶させ、後にメモ リ回路を活性化して選択され、予じめ記録されている音楽を再生すると云うもの である。シンセサイザは技術的には必要な音を全て発生できるが、既知の鍵盤と スイッチを具備するユーザ　インタフェースが任意の一時刻において発生できる 音の制御を制限する。換言すれば、シンセサイザはユーザとの間のインタフェー スの質により厳しく制約されている。本発明をシンセサイザに適用すると、目標 区域内での人間の単なる動きにより所望の応答、即ち、シンセサイザからの音楽 の再生を与えることができる。こ全に制御できる。

本発明の要旨 それ故、本発明の広い相によれば、目標区域を視、その目標区域での画像の変化 に対する応答を与えるために、目標区域を視且つその目標区域のビデオ画像フレ ーム信号を作り出す手段と、各画像フレーム内の一個又は複数個の個別の区域に 関する情報を解析し、以前のフレームから上記の一個又は複数個の個別の区域内 に画像の変化が存在する時前記応答に変化を与えるために制御信号を応答提供手 段に与える供給手段を具備する解析手段とを具える装置が与えられる。

解析手段がダイナミックに変わり、種々の個別の区域を視るようにすると好適で ある。

解析手段かダイナミックに変わり、目標区域内で画像変化が生ずる時、これらの 複数個の個別の区域の少なくともいくつかが上記画像変化が生じつつある区域の 方に収束し、面積が小さくなり、これにより画像変化が生じつつある区域を一層 詳しく検査する結果に基づいて前記応答を与えるようにすると好適である。付加 的に又は代りとして個別の区域は数が変わったり、予じめ編成した態様で互に重 なったりすることができる。

装置を音楽のシンセサイザとし、その出力を画像を視ることにより制御すると最 も好適である。

図面の簡単な説明 本発明を一層明瞭にするために、添付図面につき確認されている好適な構造を説 明する。

第１図は目標区域内の画像変化により定まる目標区域内での応答、即ち、シンセ サイザからの音を与えるためにシンセサイザと接続されている好適な装置の簡単 化されたブロック図、 第２図は第１図の装置に類似するが、目標区域の３次元解析に基づいてシンセサ イザからの出力を与える装置を示す第１図と類似の図、 第３図はテレビジョン画像のフレーム画像の略図、第４図は画像フレーム時に視 られる区域をグラフ的に表わす図、 第５図は第１図に示した装置の実施例の簡単化されたブロック図、 第６図は第５図の装置に類似するが、ロボットの腕として応答提供手段を示す略 式ブロック図、第７図は本発明の一インプリメンテーションでのプログラム゛機 能の流れ図である。

好適な実施例の詳細な説明 第１図につき説明すると、ここには中で装置のプレーヤのような個人が動く目標 区域１が示されている。この目標区域１を監察できるようにビデオカメラ３を位 置決めする。

ラウド　スピーカ５の形態をした応答提供手段を、音声が目標区域１内に導びか れるように、設ける。カメラ３からの出力をアナログ−ディジタル変換器７に送 る。今度はアナログ−ディジタル変換器７の出力を、直接メモリ　アクセスによ りフレームメモリ９に通す。今度は、フレームメモリ９からの出力をプロセッサ １１に送り、プロセッサ１１の出力を、今度は、リプロセッサメモリ１３及びリ プロセッサ１５並びにインタフェース１７を介してシンセサイザ１９に送る。

今度は、カメラ３により発生した信号を装置で処理し、シンセサイザ１９を動作 させ、ラウド　スピーカ５を介して目標区域１内に可聴信号を与える。

シンセサイザ１９はそこで生ずる目標画像を表わす信号により制御される。

処理段の制御はマスクプロセッサ２１により与えられる。

今度は、このマスクプロセッサ２１が指令コードを指令メモリ２３及び１４に与 え、今度はこれらの指令メモリ２３及び１４が夫々プロセッサ１１及びリプロセ ッサ１５を制御する。今度は、マスクプロセッサ２１がシステムを初期化し、フ レームメモリ９に画像信号を記録することと、目標区域１の近傍の手頃な位置に 設置された音声入力装置２７から構成される装置指令制御信号を受け取ることと 、コントローラ３１によりビデオ表示ユニット２９に与える画像を制御すること とを順番に制御するようにする。

コントローラ３１はビデオ画像をビデオ表示ユニット２９に与える。このビデオ 画像はシステム全体としての特定の輪郭を表わすグラフと重畳させることができ る。コントローラはまたビデオ画像信号をアナログ−ディジタル変換器７の入力 側に戻す。コントローラの出力はレコーダユニットに送り、フレーム画像毎にフ レームを記録するようにすることもできる。このレコーダの代表的なものはビデ オ　レコー・ダ３３である。

第２図は他の点では第１図に示したのと同一の３次元システムを示したものであ る。差は第２図では２個のビデオカメラ３、フレームメモリ９、指令メモリ２３ 及びプロセッサＩＪの並列な組が存在することである。カメラ３、フレーｌ、メ モリ９、指令メモリ２３及びプロセッサ１１の並列な組を付加して視聴覚シソセ 号イジングを強調することができる。

第１図及び第２図に示した実施例ではカメラ３は標準の６２５ラインカメラであ る。所望とあらば、これらのカメラをＣ，Ｃ，Ｄ装置又はビデオレコ・−ダ／再 生ユニットのような信号源により置き換えることができる。アナログ−ディジタ ル変換器７はカメラ３及びコノトローラ３１又はそのいずれか一方から画像信号 を受け取る。目標区域１内の一つの映像を蓄わえるためのマトリックスは代表的 な場合２５６　ｘ２５６　ｘ　８ビツトであり、ビデオフレームの矩形部を占め る。指令メモリ２３は代表的な場合デュアルポートメモリ装置であり、これはプ ロセッサ１１が次に実行する特定のタスクコード　（これはマスクプロセッサ２ １により発生させられる）を保持する。フレームメモリ９は代表的な場合デュア ルポート高速メモリ装置である。これらのメモリは直接メモリアクセスによりア ナログ−ディジタル変換器により高速度（２０ｍ５）でリフレッシュされる。各 フレームメモリ９は代表的な場合任意の一瞬時における単一のビデオフレームの 完全なディジタル表示を保持する。代表的な場合フレームは一フレーム期間だけ 保持され、以后の各フレーム期間では更新される。しかし、所望とあらば、多く のフレーム期間に亘って一フレーム又はその−個の個別の区域を保持し、詳細に 調べるようにすることができる。プロセッサ１１は代表的な場合スレーブプロセ ッサであり、当該フレームメモリに保持されているビデオデータを処理する。

プロセッサ１１による処理は代表的な場合目標区域１内の選択された且つ個別の 区域又はそのいずれか一方の区域である。リプロセッサメモリ１３は代表的な場 合フレームメモリデュアルポートメモリ装置であり、これは特定の目標区域に関 する値を保持する。これはまたプロセッサ１１により生じた他のデータも保持す る。リプロセッサ１５はリプロセッサ指令メモリ１４に保持されている指令を用 いてリプロセッサメモリ１３に保持されているデータをマニピュレートし、バイ アスし、重み付けをし、組合わせる。インタフェース１７はビデオ処理回路とシ ンセサイザの間の通信を提供する。

シンセサイザ１９は多重音声ディジタルシンセサイザであり、装置内で発生した 信号で処理される。マスクプロセッサ２１は代表的な場合システムを制御し、タ スクを種々のプロセッサ１１及び１５に分配するプロセッサである。メモリ２５ は代表的な場合システムの主メモリであり、情報のオフライン蓄積を与える。こ れはマスクプロセッサ２１により制御されるディスク記憶手段とすることができ る。レコーダ２３は装置が選択したフレームを蓄えるために用いる。

注意すべきことは、ビデオ画像がディジタル信号に変換され、区域が任意の変化 に対し考察され且つ解析されている装置区域の予じめ定められたパッチング（ｐ ａｔｃｈｉｎｇ）により確定されるモードに装置がセットされることである。今 度は、これがシンセサイザの出力を変えることを必要とする変化が目標区域に存 在することを表わす。考察されている区域を以后ギヤング（ｇａｎｇ）と称する 。

ギヤングとは各フレーム期間において考察されている区域のことである。その区 域が具備する画素を均一化して各フレーム毎に各ギヤングに対する値を得ること ができる。

各フレーム期間時に多数のこのようなギヤングを目標区域内に与えることもでき れば、代りに目標区域内にギヤングを１個しか設けないこともできる。ギヤング どうしは分離してもよいし、重ね合わせることもできる。これについては後述す る。

第３図は代表的なフレーム画像及びその画像の分割を示す。長方形１により確定 される区域はカメラ３が見る通りの現実の視覚目標区域を表わす。マトリックス １は全フレームを充たす訳ではない。残りの区域は２個の目的に役立つ。これら を順番に説明する。番号２により表わされる区域はマ）　ＩＪソックスの周りの 境界を示す。番号３により表わされる区域はタスクの帰りを表わし、区域４はフ レーム間隙を表わす。境界２の目的は次の２個である。即ち、１、−フレーム期 間の、データ収集期間により使われる部分を減らし、目標区域の個別の区域を更 に処理できるようにする。

２、　各フレームのデータ流と制御流とを混合させ、フレームを読出せるように し、境界２内にある情報を取り出し、次にマトリックス１をデータとして読出せ るようにすることによりシステム制御をインプリメントする方法を境界が可能に する。

換言すれば、当該ディジタル信号が画像信号であるか、指令信号であるかを同定 する必要がある。この技術により一フレーム期間内に必要な画像と画像処理指令 を伝達できる。

しかし、所望とあらば、画像、即ち、データ信号を複数個のフレーム期間に分け ることができる。而して本発明はこれを含むように解釈すべきである。

このようにしてシステム内で創出される音をフレーム毎の個々の規定を含むビデ オフレームの形で蓄えることができる。今度は第４図につき述べるが、ここには ギヤングの代表的な配置が示されている。この配置は決して唯一つの可能なギヤ ングの組合せを表わすものではない。蓋し、ギヤングはマ）　ＩＪソックスの一 個の一個の画素のような離散している区域を具備することがあるからである。第 ４図でギヤングＥは他の重なり合うギヤング全ての境界内に囲まれている。ギヤ ングＥ内で生ずる任意の画像変化は残りの重なり合うギヤングの各−仰向で生ず る変化を表わす。ギヤング内の変化はそれらのサイズの比率に比例する量だけ変 わる。例えば、 ギヤング　画素　比率 Ａ　３６００　Ｃ７２ Ｂ　１６６４　］、：３３３ Ｃ１２２５Ｃ２４，５ Ｄ　３００　１：６ 従って、ギヤングＥ内の画像変化は上に揚げた比率で夫々のサイズに比例する量 だけ他のギヤングの各々に影響する。各ギヤングは、マトリックス１内の選択さ れた区域、即ち、カメラ３により視られる画像の特定の区域を調べるために使用 される。こうして視られるギヤングの区域内に何等かの画像変化がある場合は、 装置内にプログラムを組まれた変化が存在する可能性があり、今度は、これがそ のギヤング又は他のギヤングの形状若しくは位置を変え、当該画像変化を更に調 べるようにする。

代表的な場合は、ギヤングは数が多く、システムはそれらのギヤングのいくつか を特定のギヤング内で動く一つの目標の方に収束させるようにプログラムを組む ことができる。ギヤングはまた各フレーム期間で状態を変え、面積を小さくする こともあり得る。蓋し、ギヤングは調べられている画像変化の方に収束し、−個 の変化に対し段々に小さくなる区域を調べる、即ち、−人の人の指の動き又は一 方の眼のまばたきを観察するからである。

これらのギヤングは装置内でいくつかのタイプの処理を受ける。これらは夫々処 理のタイプＡ、Ｂ、Ｃ，Ｄとして同定される。

タイプＡ この構成ではギヤングが区域内で予じめ定められており、マスク　プロセッサ２ １に対する指令ではギヤングが処理時にダイナミックに変化しないようにするも のである。この構成ではギヤング内に画像変化が存在する直接の結果としてシン セサ（ザの出力が変化する。

タイプＢ このタイプではギヤングが最初その区域及び−画像フレーム上の目標区域内での 位置に関して予じめ定められる。

そして、予じめ定められた変化（即ち、予じめ定められたしきい値レベルを越え る変化）が−個又は複数個のギヤング内で生じた時、これらのギヤングがマスク 　プロセッサ２１により与えられた予じめプログラムされた指令に従ってダイナ ミックに変わる。この指令はメモリ２５内に蓄えることができる。

タイプに のタイプでは、フレーム画像の目標区域を越えて与えられる予じめ定められた性 質の初期ギヤング構成が存在し、−個又は複数個のギヤング内で（予じめ定めら れたしきい値レベルを越える）画像変化が存在する場合で且つこのような変化が 認識できないか又はマスク　プロセッサ２１内で予じめプログラムされた条件と 整合しない場合に、装置がサーチモードに入れられ、これによりメモリ２５が過 去において類似のギヤングの変化が起きているかどうか見るようにコンサルトさ れる。メモリ内に直接比較すべきものが見出されない時は１次の最も近密で比較 可能な変化についての手順を選び、その手順の場合の次のギヤング構成に適合さ せられた手順をシステムに与え、その記録されていた過去の事象に従って次のフ レームに対するギヤング　サイズとしレイアウトとをダイナミックに変える。

タイプＤ このタンプの処理では、（予じめ定められたしきい値を越える）変化がギヤング 内にあり、この変化が数フレーム期間だけ生ずる場合に、装置が自然に上述した タイプＣに置かれる。しかし、所望のギヤング　パターン即ち構成が再び与えら れ且つ結論に続く前に、目標区域内に生ずる変化を終了させることもできる。こ れは目標区域を横切る鳥又は類似の高速で動く目標物を表わす時もある。このタ イプの処理では類似の過去の事象に対する全てのサーチングを中断し、正規の処 理に戻るように装置をプログラムしておく。

それ故、ギヤングの主たる機能は以下の二つである。即ち、 （ａ）　目標区域内の一区域に注目し、予じめプログラムされた指令に基づいて 応答発生手段から応答を生ぜしめる。

（ｂ）　次のフレーム期間のギヤングのパターンに変化を生ぜしめ、同時に応答 発生手段にも変化を生ぜしめる。

上述した機能ａ及びｂはいずれも一個又は複数個のフレーム期間時に同時に生ず るようにすることができる。

いくつかのギヤング内に初期変化が存在し且つ次の変化が存在する時に小さな音 又は色の変化等しか存在しない場合でも大きなシンセサイザの変化が与えられる ように装置をプログラムすることができる。この代りに種々のギヤング内に予じ め定められた変化が存在し且つ他のギヤング内に予じめ定められた変化が存在す る時に小さな音又は色の変化しか与えられない時でも大きなシンセサイザの変化 が与えられるように装置をプログラムすることもできる。各フレーム期間が先行 するフレームの各ギヤング内に動きが存在する時にギヤングの構成の変化を生ず るようにすることができる。各ギヤングは任意の一時点でゼロ　バイアスに対し 評価することができる。これは代表的な場合カメラ３の視野内にある定常的な状 態を消去することにより与えられる。

こうして静的なギヤング値がめられ、以后これをゼロレベルとして用い得るから 、このレベルより高いか又は低い任意の変化が当該ギヤング内に生ずる変化を表 わすようにされる。

リプロセッサ１５はいくつかの機能を有する。リプロセッサ１５はギヤング値を 直接シンセサイザに渡したり、ギヤング値にオフセットで重み付けし、算術的演 算を施して信号を所望のレンジに入れたり、ギヤング値を予じめプログラムした ように一層複雑な関係で修正して所望の品質の全てを信号に与えたりする。所望 とあらば、これを指数関数の形で行なうことができる。リプロセッサ１５は同じ か又は別個のビデオ信号源からの２個以上のギヤング値を組合せてギヤング構成 の別のレベルを創出したり、予じめ定められた値と一致する場合に選択されたギ ヤング値を観察したりできる。これは装置の使用時にギヤングを再構成して予じ め定められたフォーマットに入れることがでる。

装置は集合して質問ギヤングとして知られている一群のギヤング内の変化を観察 した時シンセサイザが出力を出すように動作する。代表的な場合は、第４図に示 す全てのギヤングＡ、Ｂ、Ｃ，Ｄ、Ｅが一個の質問ギヤングを形成する。装置は 成る時間に亘っ“Ｃ質問ギヤングの集合しているギヤング値を視、装置の状態を 変える事象信号の基礎を形成する。

この質問系列は下記の通りである。カメラ３の視野内に一個の事象が生ずる。こ の時生ずる全変化が装置により検出される。次にカメラ３の視野内で変化が生ず る区域に質問ギヤングを課する。ギヤング値の変化と、次の処理の結果データを インデックスするのに使用される変化の量を表わす事象信号が生じ、今度はこの 事象信号が装置を変更させて、以后のフレームに対する重なり合うギヤング内に 変化を与え、次のデー・夕信号を適当に再処理する、１更に集って質問ギヤング となる情報が形成され、別異の配置を作る。

今度はこれが質問ギヤング内に特定の変化が生ずる迄次のシステム応答の範囲を 狭めるようにプログラムされる。この処理は時間的に限定され、順序正しく制御 される。

システムの応答はいくつかの形態をとり得る。例えば、変化が生じても何の作用 もとられない受動的な応答がある。

確定され且つプログラムされている変化が生ずる事象の記録を更新する能動的な 応答が生ずることもある。カメラ３の監視の下にある区域についての情報を収集 する活動を初期化することを含む能動的な応答も生じ得る。この場合はこれがシ ンセサイザ１９内に予じめ定められた信号を発生させる。システム外のアイテム （ｉｔｅｍ）を動作せしめるように送られる制御系列を初期化する能動的な応答 も生じ得る。

これらはステージを照明したり、自動的に細工したりすること等を含む。

装置は４通りの動作モードを有する。これらは次のように呼べる。

ｊ　動作 ２、パッチ 動作モードでは装置が視野からのデータを受け取り、制御信号を発生させ、それ をシンセサイザ１９に送る。次いでシンセサイザ１９が出力信号を出し、この出 力信号がラウドスピーカのような応答提供手段に送られる。バッチモードでは種 々のギヤングの現実の構成が主メモリ２１にプログラムされる。これは種々の数 学的変化がギヤング値信号及びギヤング値が何等かの所定の区域に収束する態様 で与えられるようにする。このパッチモードでは２通りの形態の演算インタフェ ースを与え得る。これらの演算インタフェースの一方はライトペンと呼ばれるＶ ＤＩＩスクリーン、カーソル又はタイプされた指令とすることができ、他方は音 声１１０２７とすることができる。ここで云う指令はメモリに入力され、予じめ 定められたシステム応答を初期化する指令に対応する、解析され且つ予じめ定め られた指令とすることができる。パッチモードでは装置がＶＤＩＩ２９又はレコ ーダ３３からのデータを受け取り、スクリーングラフをインプリメントし、監視 中の必要とされるパッチ並びにパッチ及び状況情報のフォーマツティング及びフ ァイリングを制御できる。手動でパッチングするには相当な熟練したオペレータ と時間とを必要とするから、任意のパッチを記述する詳細は２通りの方法で記録 される。

１、　名称を付されたファイルとして。

２、　名称を付されたファイルを翻訳してビデオ信号とし、第３図に示したフレ ーム画像の境界２内に蓄えられるものとして。

シンセサイザは種々のシンセサイザ機構が順序正しく制御されるようにインタフ ェース１７を介して適当にパッチされる。パッチングは装置を使用する前にオペ レータにより行なわれるが、これはＶ［］１Ｊ２９により任意の所望の方法で制 御される。

装置はモトローラ社のマイクロシステム購入カタログ、第Ａ版（モ）　ｏ　−ラ 社、１９８０年）　ニＭ６８ＫＯＲＭＳ実時間多重タスキング　ソフトウェアと してのっているモトローラ社のソフトウェアによるプログラム指令に従ってプロ グラムされる。この場合側々のタスクはユーザにより与えられる。

シンセサイザを接続しない場合の装置はカメラ３の視野内のビデオ画像から情報 を集めるデバイスである。この時個々のギヤングは視野内に生ずる特定の変化に 由来する特定のギヤング値を生ずるように適応させられる。以后の任意の変化は 適当な応答を応答提供手段に与える信号を発生せしめる。従って、装置を適当に 制御すれば、挙動心理学（ｂｅｈａｖｉｏｒａｌ　ｐｓｙｃｈｏｌｏｇｙ）の分 野ですばらしい利益が与えられる。例えば、特定の事象に対しプログラムした装 置パッチを用いて挙動論理を樹立できる。従って、情報の表化のような応答、感 光メモリ手段等の動作をインプリメントできる。　第５図には第１図のブロック 図の簡約版のブロック図を示しである。この第５図は説明するまでもなく明白で ある。

第６図は第５図と類似するブロック図であるが、ロボットの腕として応答提供手 段を示している。第６図のブロック図も明白である。これは自動機械コントロー ラの分野で特別な用途を有する。このインプリメンテーションの場合ステムの流 れ図が示されている。この状態では、正しい意味での応答提供手段を設けずに、 ビデオカメラを一ラインに対し個々の画素値を与える乱数発生器で置き換えてい る。

この実施例では、この乱数発生器は可聴出力を出す。第７図で各項は以下のよう な意味である。

１．３０ＩＳシステム制御プログラム ２、　ＦＲＡＭＥ　ＧＲＡＢ　ＸＹユニットのフレーム分解能とグレーレベルを 規定する。

即ち、ｘ＝１６、Ｙ＝１０及びグレー＝１０３．ＧＲＡＢ　フレームパラメータ をグラピング機構に送る。

Ｌ　ＧＥＴＦＲＡＭＥ　フレームをゼロに初期化する。即ち、前のフレームを抜 き去り、画像フレーム生成プロセスを呼出す。

５、　ＶＩＤＩＮ　フレームをライン毎にロードする。

６、　ＬＩＮＥ　フレームのラインを充たす。

７、　ＰＩＸＥＬＩＮ　乱数発生器を用いてラインに個々の画素値を与える。

８、　ＳＢＢＦＲＡＭＥ　獲得されたフレームの次の表示のためにスクリーンを 払い、フォーマットする。

９゜ＰＲＡＭＥＤ　ｌ５ＰＬＡＹ　フレームをライン毎にスクリーン上に表示す る。

１０、　ＧＡＮＧ　Ｃ０ＬＬＡＴＥ！　プロセスをギャンギングするための制御 プログラム。ギヤングパラメータを介してループし、ギヤングパラメータを次の 手順に渡す。ギヤングパラメータは可変パラメータとしてシステム内に保持する 。ギヤングはｘＹ座標の左上並びに画素内のＸ軸及びＹ軸の範囲を参照すること によりシステムに対し規定される。

１１、　ＧＡＮＧ　カウンタを初期化し、照合プロセスの全てをランし、制御を ギヤング抽出プログラムに渡す。

１２、　ＩＥＸＧＡＮＧ　フレームから規定されたギヤングを抽出する。

１３、　ＥＸＰＩＸ　ＥＸＧＡＮＧを用いてギヤング内の個々の画素にアクセス し、画素を処理する時ギヤングのコピーを作る。

１４、　ＰＩＸＶＡＬ　当該ギャンギングプロセスに対する画素値に戻る。

１５、　ＧＶＡＬ　規定されたギヤングに含まれる画素の平均値を計算する。

１６、　ＧＳＥＥ　スクリーンをフォーマットし、能動ギヤング名、パラメータ 及び結果のギヤング値を表示する。

１．７．　ＲＥＰＲＯＣＥＳＳＯＲ結果のギヤング値に試験を課する。

１８、　ＢＥＥＰ　規定されたギヤング値がテストされるＲＥＰＲＯＣＥＳＳＯ Ｒを通過したならば可聴キューを与える。−次シンセサイザ。

１９、　ＮＢＷＰＡＲＡＭ　ギヤング再配置に対する制御プログラム。

規定されたギヤング値がＲＥＰＲＯＣＥＳＳＯＲで合格すればＮｔ！ＷＰＡＲＡ Ｍを与え、当該フレーム内のギヤングを再配置する。

２０、ＧＢＮＰＡＲＡＭ　乱数発生器を用いて新しいギヤングパラメータを作り 出す。

２１、６ＡＬＴＥＲ選択されていたギヤングのギヤングパラメータを変更し、旧 い変数を新たに生成された変数で置き換える。パラメータ変数を操作する。

システムで呼び出されない２個の手順が含まれていた。

一方はＰＡＲＡＭＳ変数から規定されたパラメータを抽出するＧＥＸＴＲであり 、他方は規定されたパラメータをＰＡＲＡＭＳに挿入するＧＩＮＣＬである。こ れらはオペレータにより使用され、云うなれば手動で、パラメータをＰＡＲＡＭ Ｓに出し入れする。

注意すべきことは、このモデル内の全てのランダムな系列は他の適当に導びかれ た系列で置き換え得ることである。

ＬＣＳＩロゴ板１．５に記載されているプログラム表を以下に述べる。この実施 例の場合の最小の条件は一つのディスク駆動を具備するＡｐｐｌｅ　２ｅコンピ ユータである。このプログラムはディスク駆動機構を介して挿入され、システム がブーストされる。ロゴがユーザディスクが挿入さるべきことを要求する時、戻 りボタンを操作すると、以后プログラムが自動的に連続する。第７図に示した実 施例は本発明の−インプリメンテーションの簡約版である。

ＲＥＰＲＯＣＥＳＳＯＲへ ：ギャング＃１であれば５　［：ＢＥＥＰＩＮＥＷＰＡＲＡＭ３］へ：ギャング ＃２であれば５　［ＮＩｌ！ＷＰＡＲＡＭ２］へ：ギャング＃３であれば８　［ ：ＮＢＷＰＡＲＡＭ２］へ：ギャング＃４であれば３　［ＢＢＥＰ４ＮＢＷＰＡ ＲＡＭ４）へεＮ口 ＧＥＴＦＲＡＭＥへ “ＰＲＡＭＥ　［）”を作る ＶＩＤＩＮ ＮＤ ＰＩＸＶＡＬへ 項目　：ｘｘ項目：買：フレームを開くＮＤ ＧＶＡＬへ ：　ＧＳＵＭ／　：　ＧＣＯＵＮＴを開くＮＤ ギヤング：ＸＸ　：買：Ｘレンジ：Ｙレンジへ“ＧＳＵＭ　Ｏ”を作る ”ＧＣＯＩＩＮＴ　：　Ｘ　レンジ＊　：ＹＬ／７ジをイ乍る“ＧＣＯＰＹ　（ 表：ｘｘ　：ＹＹ　：Ｘ　Ｌ／７ジ：ＹＬ／７ジ）を作るＥＸＧＡＮＧ　：ＸＸ 　：ＹＹ　：　Ｘ　ｌ／　７ジ　：ＹＬ／７ジＳＥＥ “ＧＮＩＪＭ　：　ＧＮＩＩＭ＋　１″を作るＥ！Ｎ口 ＥＸＧＡＮＧ　：ＸＸ　：ＹＹ　：　Ｘ　し７ジ　：Ｙレンジへ：Ｙレンジ＝０ であれば［５ＴＯＰ］ ＥＸＰＩＸ　：ＸＸ　：ＹＹ　：ＸＩ／：／ジＥＸＧＡＮＧ　：ＸＸ　：ＹＹ＋ 　１　：Ｘ　し７ジ　：ＹＬ／７ジー１εＮ口 ＦＲＡＭＥ口ｔｓＰＬＡＹへフレームへＥＭＰＴＹＰであればルーム［ＰＲ″５ ＴＯＰ”）第１に示すフレーム ＦＲＡＭＥＤＩＳＰＬＡＹ　ＢＰ　：へＮＤ ＰＩＸＥＬＩＮ　：ＤＢＥＰへ 乱数　：口ＥＥＰを開く ＮＤ ＬＩＮＥへ “ＬＩＮＥ　［１”を作る ：Ｘ　［”ＬＩＮＥ　ＬＰＵＴ　（ＰＩＸＥＬＩＮ　：ＤＥＥＰ）”を作ル：　 ＬＩＮＥＩを繰り返す ＬＩＮＥを開く ＥＮｔ） ＥＸＩ’ＩＸ　：ｘｘ　：ＹＹ　：　Ｘ　し／ジ・へ＝×レンジー〇であれば′ ＬＳＴＯＰ’ｊ”ＰＶＡＬ　Ｉ〕ＩＸＶＡじを作ル ”ＧＣＯＰＹ　ＬＰＩＩＴ　’：ＰＶＡＬ　：ＧＣＯＰＹ’を作る”ＧＳｔｌＭ 　：ＧＳＩＩＭ＋　ＰＩＸＶＡＩ、”を作るＥＸＰＩＸ　：ＸＸ＋　ｔ　；ＹＹ 　：Ｘ　レンジ−ｊ３ＮＯ ＧＲＡＢ　：Ｘ　：Ｙ　：Ｄ［：ＥＰへＧＥＴＦＲＡＭＥ ＳＨＥＦＲＡＭＥ ＥＮｔ） ＳＩＥＥＦＲＡＭＥへ テキストを払う カーソルを〔０４〕にセットする ＰＲＡＭＨＤＩＳＰＬＡＹ　＋フレームＥＮＩ） ＶＩＤＩＮへ ：Ｙし“フレームＬＰＵＴ　Ｉ、ＩＮＥ、：ルーム２を作る〕を繰り返す ＥＮｔ） フレーム、　ＧＲＡＢへ ＧＲＡＢ　］、６　１０　１．０ ＮＤ ＧＡＮＧ、ＣＤＬＬ八ＴＥへＡへ “ＢＴ［ｔｌＮＧ：Ａ”を作る ”ＧＮＩＩＭ　］”を作る “ＧＣＬＯＯＰＩ″をランプルする ＥＭＰＴＹＰ　：１３であれば［ＳＴＯＰ）ＥＭＰＴＹＰ　ＦＩＲＳＴ　：Ｂで あれば〔“ＧＮＵＭ　：ＧＮＵＭ＋　Ｉ　Ｇｏ　”ＧＣＬＯＯＰ　２を作る〕 ＳＥ″ＧＡＮＧ　ＦＩＲＳＴ　、１３″をランするラベル“ＧＣＬＯＯＰ　２” “ＢＢＦ：Ｂ”を作る “ＧＣＬＯＯＰＩ”へ行く ＮＤ ＧＥｘＴＲ：八へ “ＴＥＭＰＩ　：ＰＡＲＡＭＳ”を作る“Ｔ［ＥＭＰ２　Ｄ”を作る “ＧＥＸＴＲ項目：Ａ　：ＰＡＲＡＭＳ”を作る：Ａ−１．［“ＴＥＭＰ２　Ｌ ＰＵＴ　ＦＩＲＳＴ　：ＴＥＭＰｌ　：ＴＥＭＰ２”を作り、“ＴＥＭＰＩ　Ｂ Ｐ　；ＴＥＭＰＩ”を作る〕を繰り返す：ＴＥＩＡＰＩ　ＢＦ　：ＴＥＭＰ１’ を作るＰＡＲＡＭＳ　ＳＥ　：ＴＥＭＰ２　：ＴＥＭＰｌ、’を作るＮＤ ＧＩＮＣＬ　：Ａ　：Ｂへ “ＴＥＩ、ＩＰｌ：ＰＡＲＡＭＳ”を作る′″ＴＥＭＰ２　［：］”を作る ：Ａ−］、［”ＴＥＭＰ２　ＬＰＵＴ　ＦＩＲＳＴ　：ＴＥＭＰｌ　：ＴεＭＰ ２を作り、“’ＴＥＭＰＩ　ＢＦ　：ＴＥＭＰ１″を作る〕、を繰り返す”ＴＥ ＭＰＩ　ＰＰＵＴ　：［３：ＴＥＭＰｌ”を作る”ＰＡＲＡＭＳ　ＳＲ：ＴＥＭ Ｐ２　：ＴＥＭＰｌ”を作るＮＤ ＧＡＬＴＥＲ：Ａ　：１３へ “ＴＥＭＰＩ　：ＰＡＲＡＭＳ″を作る“ＴＥＭＰ２　Ｄ”を作る ’ＧＥＸＴＲ項目　：Ａ　：ＰＡＲＡＭＳ”をイ乍る：Ａ−ＩＣ“ＴＥＭＰ２　 ＬＰＩＩＴ　ＦＩＲＳＴ　：ＴＥＭＰｌ　：ＴＥＭＰ２を作り、“ＴＥＭＰＩ　 ＢＰ　：ＴＥＭＰｌ”を作る〕を繰り返す“ＴＥＭＰＩ　ＢＰ　：ＴＥＭＰｌを 作る〕を繰り返す”ＴＥＭＰＩ　ＦＰＵＴ　：１３　：ＴＥＭＰｌ”を作る”Ｐ ＡＲＡＭＳ　ＳＥ：ＴＥＭＰ２　：ＴＥＭＰｌ”をイ乍るＮＤ ＴＯＧＳＥＥ “ＧＮＡＭ　ＷＯＲＤ　”ギヤング番号：ＧＮＵＭ”を作る：ＧＮＡＭ　ＧＶＡ Ｌ”を作る タイプ：ＧＮＡＭ タイプ” タイプ〔 タイプＦＴＲｓＴ　：Ｂ タイプ°〕 カーソル表２５を最后のカーソルにセットするＰＲＴ）ＩＩＮＧ　：ＧＮＡＭ ＩＥＮ［ｌ ＮＥＷＰＡＲＡＭ　：ギャング番号へ “ＮＰＡＲＡＭ　ＧＥＮＰＡＲＡＭ”を作るＧＡＬＴＥＲ：ギャング番号：ＮＰ ＡＲＡＭＮＤ ＧＥＮＰＡＲＡＭへ ”ＮＸ（乱数１６）＋１”を作る “ＮＹ（乱数１０）＋１”を作る “ＮＸＲ（乱数（１６−：ＮＸ））　＋　１”を作る“ＮＹＲ（乱数（１０−： ＮＹ））　＋　１”を作る（表：ＮＸ　：ＮＹ　：ＮＸＲ：ＮＹＲ）を開くＮＤ ＢＥＢＰ　：Ｂへ ：Ｂ＃〔タイプＣ）ｌＡＲ７”ｌを繰り返す待つ３０ ＮＤ ３ＤＩＳへ ルーム、　ＧＲＡＢ ＧＡＮＧ、Ｃ０ＬＬＡＴＥ　″ＰＡＲＡＭＳＲＥＰＲＯＣＥＳＳＯＲ ３ＤＩＳ ＮＤ ＰＡＲＡＭＳは〔［：１１１．１１　［１６３］３　］　［１６１１１）［１５ ８１１）［：５５５５）［８２４３］］である。

３ＤＩＳは０である 電子工学的な信号処理技術に明かるい当業者ならば、本発明に対し種々の修正を 加え得る。本発明の境界を逸脱せずに、これら及び他の修正をなし得る。本発明 の性質は上記説明から決まるものである。

浄書（内容に変更なし） Ｃ９斎ｋＩコばに哀史なし） 特許り胚１−５０２１５８　（９） ゛浄書（内；に２疋なし） 補正書の翻訳文提出書（特許法第１８４条の７第１項）昭和６０年１０月２８日

Claims (6)

【特許請求の範囲】
1. １．目標区域を視、その目標区域内での画像の変化に対する応答を与えるために 、目標区域を視且つその目標区域のビデオ画像フレーム信号を作り出す手段と、 各画像フレーム内の一個又は複数個の個別の区域に関する情報を解析し、以前の フレームから上記の一個又は複数個の個別の区域内に画像の変化が存在する時前 記応答に変化を与えるために制御信号を応答提供手段に与える供給手段を具備す る解析手段とを具える装置。
2. ２．各フレーム内に２個以上の個別の区域が存在し、前記応答提供手段が単一の フレーム時に発生させられた集合している制御信号に応答することを特徴とする 請求の範囲第１項記載の装置。
3. ３．前記解析手段がダイナミックに変わり、前記個別の区域が順次の画像フレー ム時に目標区域内に生ずる何等かの変化に依存して変わるようにした請求の範囲 第１項記載の装置。
4. ４．前記解析手段が、各画像フレームにおいて前の画像フレームから由来する変 化が存在する区域に前記個別の区域を集中せしめ、これにより次の画像フレーム において画像が変化する区域を一層詳細に検査することに基づいて前記応答を与 えるようにプログラムできる構造としたことを特徴とする請求の範囲第３項記載 の装置。
5. ５．一画像フレーム内のいずれか一つの個別の区域に変化が存在する時、個別区 域の数が変化するように解析手段をプログラムできることを特徴とする請求の範 囲第３項記載の装置。
6. ６．応答提供手段をシンセサイザとし、目標区域内に画像の変化があると音楽を 演奏するように構成したことを特徴とする請求の範囲第１項ないし第５項のいず れか一項に記載の装置。