JPH07244726A - 個人化されたビデオエンターテイメント用の顔画像の標準化方法及び装置 - Google Patents

個人化されたビデオエンターテイメント用の顔画像の標準化方法及び装置

Info

Publication number
JPH07244726A
JPH07244726A JP6323049A JP32304994A JPH07244726A JP H07244726 A JPH07244726 A JP H07244726A JP 6323049 A JP6323049 A JP 6323049A JP 32304994 A JP32304994 A JP 32304994A JP H07244726 A JPH07244726 A JP H07244726A
Authority
JP
Japan
Prior art keywords
image
personalized
feature points
images
template
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP6323049A
Other languages
English (en)
Inventor
Richard N Ellson
エヌ エルソン リチャード
Kenneth A Parulski
エイ パルルスキー ケネス
Hans P Baumeister
ピーター バオメイスター ハンス
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Eastman Kodak Co
Original Assignee
Eastman Kodak Co
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Eastman Kodak Co filed Critical Eastman Kodak Co
Publication of JPH07244726A publication Critical patent/JPH07244726A/ja
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T13/00Animation
    • G06T13/20Three-dimensional [3D] animation
    • G06T13/40Three-dimensional [3D] animation of characters, e.g. humans, animals or virtual beings
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/60Methods for processing data by generating or executing the game program
    • A63F2300/69Involving elements of the real world in the game world, e.g. measurement in live races, real video
    • A63F2300/695Imported photos, e.g. of the player

Landscapes

  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Processing Or Creating Images (AREA)
  • Image Processing (AREA)
  • Studio Circuits (AREA)

Abstract

(57)【要約】 (修正有) 【目的】 記憶媒体上の肖像型の画像の撮影、下見、特
徴識別、標準化、記憶をなすシステムを用いて、顧客が
画像を選択し対話的ビデオエンターテイメントソフトウ
エアによりアクセスされうる記憶媒体上に書き込み可能
にする。 【構成】 1.標準ビデオキャラクターのテンプレート
を形成し、2.個人化された画像を形成し、3.テンプ
レート特徴点に対応する個人化された画像内の対応する
特徴点を配置し、4.対応する特徴点及び関連する個人
化された画像の位置を記憶し;それぞれの標準ビデオキ
ャラクター及び個人化された画像に対して段階1.〜
4.を繰り返す各段階からなる。

Description

【発明の詳細な説明】
【0001】
【産業上の利用分野】本発明はデジタル画像処理に関
し、より詳細には対話的ビデオエンターテイメントシス
テム内の顔の画像の動画入力手段として適切に用いられ
る記憶媒体上の肖像型の画像の撮影、下見、特徴識別、
標準化、記憶に関する。
【0002】
【従来の技術】関連する出願の相互参照 本出願は同日に出願したK.Parulski等による
アメリカ特許出願第175806号「CDディスクを用
いた個人化されたビデオゲームを製造する方法及び装
置」と関連する。
【0003】多くの消費者品目(アイテム)を個人化す
る要求がある。例えばモノグラムは陶器、シャツ、鞄を
個人化する手段として長い間人気があった。個人の画像
の使用は対象に更に魅力を付加することができ、画像は
今やコーヒーマグカップ、Tシャツ、クレジットカード
のような多くの日常の品目を個人化している。画像を介
して個人化を成熟させる平凡な製品の他の例は対話的ビ
デオエンターテイメント市場である。これはアメリカ合
衆国の家庭の60%以上がゲーム機械を有する大きな産
業になった。今日、ビデオエンターテイメントの使用者
はかれらの対話的ビデオエンターテイメントを個人化す
るのにシステム内でのかれらの登場人物の名前及び、多
分短い所定のリストからそれらの外見の選択に制限され
ている。
【0004】多くの対話的ビデオシステムのグラフィッ
ク及び動画の性能は着実に改善されてきた。これらのシ
ステムは画像データベースの操作及びグラフィカルな対
象の描写の性能は徐々に向上している。最新の対話的ビ
デオエンターテイメント「ゲーム」はカートリッジに記
憶され、1992年だけで102百万ドルの売上があっ
た。より良いグラフィックへの需要により産業は各ゲー
ム単位をより大きなデータ量にしており、あるゲームの
配付手段は数百メガバイトの容量を有するコンパクトデ
ィスクROM(CDーROM)になりはじめている。対
話的ビデオエンターテイメント市場で年間売上が20億
ドルを超える大手のセガは1993年には百万のCDー
ROMベースのゲームを売ると予想される。
【0005】ゲーム配付手段の記憶容量の増加にともな
い、ゲームに関する個人化画像データを配付する潜在能
力は高くなっている。肖像のような画像データはロチェ
スターのイーストマンコダック社製デジタルカメラシス
テムプロフェッショナルDSC200のような電子的静
止画像カメラのようなデジタル画像化装置により撮影さ
れうる。そしてこれらの画像はPaulski,Bau
meister,Ellson等による相互参照出願
「CDディスクを用いた個人化されたビデオゲームを製
造する方法及び装置」により記載された処理を用いるコ
ダックフォトCD2X書き込み器のようなCDーROM
書き込み器によりCDーROMに書き込まれうる。
【0006】いったん肖像画情報が対話的ビデオエンタ
ーテイメントで用いられうると、個人化したキャラクタ
ー又は個人化された肖像及び「著作された」肖像として
システムにより供給されるそれらの混合である混合キャ
ラクターの動画が作れるようになる。これは画像歪み及
び変形技術、より一般には「モルフィング(morph
ing)」として知られる技術の応用を介して達成され
る。モルフィングは中間的な画像の滑らかな補完を計算
するために開始画像内の特徴点と終了画像内の特徴点と
の対応の知識を要求する。これらの技術はマイケルジャ
クソンの音楽ビデオ「ブラックオアホワイト」の中の特
殊効果を生成するためにカリフォルニア州サニイベール
のパシフィックデータイメージにより用いられた(T.
Beier,S,Neely著の「Feature−B
ased Image Metamorphosis」
Computer Graphics,Vol.26,
No.2、1992年7月35ー42頁参照)。デジタ
ル画像の変形用のソフトウエアツールはブダペストのK
OZUMOからのA−Morph及びカリフォルニア州
サンディエゴのGryphon Software社か
らのMORPH1.0を含め多くの会社から入手可能で
ある。モルフィング技術は2つの端の点のデジタル画像
間で止めることで、ある人の顔と他の人の顔とを混合す
ることにより架空の顔を作りだす。例えば子供の画像は
かれらの最良の友人の顔又はCDーROM上で供給され
る顔の1つと混合されうる。
【0007】人が駆動するコンピュータで生成されたキ
ャラクター動画は人間の役者が漫画のキャラクターの一
連の動画になるようにできる。この技術はスーパーマリ
オブラザースの漫画のプログラム上で使用されている。
それはベルモント、バーリントンのAscension
Technology社からのThe Birdのよ
うな送信/受信システムである三次元位置センサーによ
り人間の役者上の特徴点の追跡により動作する。三次元
空間内での特徴点の実時間の動きは例えば人間の役者の
笑い又はあくびのような所定の振る舞いの間の時間にわ
たって記録される。特徴点の動きはマンガのキャラクタ
ーのモデルの特徴を基本とした変形を駆動するのに用い
られる。
【0008】
【発明が解決しようとする課題】本発明の目的は対話的
ビデオエンターテイメントシステムの入力手段として適
切に用いられる記憶媒体上の肖像型の画像の撮影、下
見、特徴識別、標準化、記憶をなすシステムを記述する
ことにより、より対話的なビデオエンターテイメントの
要求に答えることである。本発明は顧客が画像を選択し
対話的ビデオエンターテイメントソフトウエアによりア
クセスされうる記憶媒体上に書き込むことを可能にする
という利点を提供する。更にこのフォーマットは画像内
に描かれた又は個人の顔の画像に他の顔の画像を混合し
た人の顔のキャラクター動画に適切な対話的ビデオソフ
トウエアに対する情報を提供する。
【0009】対話的ビデオエンターテイメントをより個
人化するニーズが存在する。個人化の1つの方法は対話
的ビデオ装置の使用により提供される画像を組み込む事
である。本発明は対話的ビデオエンターテイメントシス
テムの入力手段として適切に用いられる記憶媒体上の肖
像型の画像の撮影、下見、特徴識別、標準化、記憶をな
すシステムを記述することによりこのニーズに答えるこ
とを目的とする。
【0010】
【課題を解決するための手段】本発明の好ましい方法の
実施例は、 a) 標準ビデオキャラクターのテンプレートを形成
し; b) 個人化された画像を形成し; c) テンプレート特徴点に対応する個人化された画像
内の対応する特徴点の位置をとり; d) 対応する特徴点及び関連する個人化された画像の
位置を記憶し; e) それぞれの標準ビデオキャラクター及び個人化さ
れた画像に対して段階a乃至dを繰り返す 各段階からなるビデオゲームの画像を標準化する方法で
ある。
【0011】本発明の好ましい装置の実施例は、標準ビ
デオキャラクターのテンプレートを形成する手段と;個
人化された画像を形成する手段と;テンプレート特徴点
に対応する個人化された画像内の対応する特徴点の位置
をとる手段と;対応する特徴点及び関連する個人化され
た画像の位置を記憶する手段とからなるビデオゲームの
画像を標準化する装置である。
【0012】上記のことから本発明の第一の目的は肖像
の円滑な動画を可能にすることである。本発明の他の目
的はビデオゲームキャラクターの円滑な動画の技術を提
供することにある。本発明の更に他の目的は個人化され
た(肖像)と著作された画像との結合からビデオゲーム
キャラクターを作成する技術を提供することにある。
【0013】
【実施例】以下に本発明の一部をなし、同様の部分は同
じ符号で示される図を参照して本発明を更に詳細に説明
する。図1に画像撮影手段20と、プロセッサ12と、
CD書き込み器18と、表示器14と、プリンター16
とからなる装置の実施例10を示す。プロセッサはCD
読み取り器13とキーボード15と、音源26と、ロー
ケイター28とからなる型のPCである。ローケイター
28は、最も普通に用いられているのはマウスである
が、デジタル化タブレット、ライトペン、又はタッチス
クリーンでもありうる。顧客22は個人化が可能である
1以上のディスクからなるビデオゲームを選択し、ディ
スクを図1に示される個人化装置に運ぶ。ディスクは書
き込み器18に挿入され、顧客22は操作者により背景
24の前に位置される。それから顧客22の画像(異な
る姿勢)が画像撮影装置20(電子的カメラのような)
により青いマットスクリーンのような背景の前で撮影さ
れる。背景は撮影された画像の画像区域が顔と背景領域
とに分けられるように選択されねばならない。これらの
画像は処理され、モニター表示器スクリーン上に表示さ
れ、及び/又は適切なハードコピー媒体(コダック45
0GL熱転写プリンターのような熱媒体等)上にプリン
トされうる。加えて画像はCDーROMディスク上に書
き込まれうる。本発明は撮影された個人化された画像を
歪み、変形、混合することを介して動画での画像の使用
を可能にするために画像に関する付加的な情報を提供す
ることにより個人化の機能を拡張する。
【0014】個人化画像を収集した後に操作者は個人化
された画像に関する付加的な情報の収集を図1に示され
る装置に媒介する。操作者は収集された画像の種々の鍵
となる特徴の位置を決定する。例えば個人化画像が顔で
ある場合に顔の鍵となる特徴は目の中央、顎の先、耳の
中央の位置を含む。これらの特徴は当業者に良く知られ
た種々の手段を介して配置される。これらの手段は特徴
位置がプロセッサアルゴリズムにより決定される完全自
動システムから操作者がライトペン、タッチスクリー
ン、又はマウスのような位置決め装置で特徴位置を選択
する完全手動システムまでを含む。
【0015】付加的な個人化情報は短いオーディオ区域
(特定のゲームの台本からの)、テキスト(競技者の名
前、誕生日、等々のような)、又は背景画像(好みの場
所の画像又は店が位置する町の画像のような)としてま
た記録されうる。付加的な個人化電子的は標準化された
顔の画像に付加され、ゲーム媒体の個人化された領域内
に自動的に統合され、CDディスク、EPROMメモリ
ーゲームカートリッジのような記憶媒体又はコンピュー
タのハードディスク上に記録される。
【0016】その代わりに個人化情報は同じ個人化デー
タを用いるよう設計された異なるビデオゲームと共に標
準の形態で作成される。この場合には個人化データはゲ
ームソフトウエアと別に記憶媒体上に記憶され、ビデオ
ゲーム競技者は個人化されたビデオゲームをするために
個人化データとゲームソフトウエアデータの両方にアク
セスできる。
【0017】個人化画像ファイルは多解像度フォーマッ
ト内のような対話的ビデオエンターテイメントプロセッ
サにより効果的にアクセスされるような方法でまた記憶
される。多解像度フォーマットの例はコダック写真CD
システム1991年4月の「A Plannig Gi
de For Developers」に記載されるよ
うな写真CD画像PAC階層的フォーマットである。顔
画像の画像ファイルは上記のように及び図2に示される
ように画像特徴の「鍵となる点」をまた含む。
【0018】多くの異なる個人化画像に対する標準テン
プレートの使用は本発明の1つの新たな特徴である。テ
ンプレートは図2の符号Aで示された表示器スクリーン
14の左半分により示される。特徴点の位置決めのコン
ピュータ支援方法の1つはテンプレートA内でプロセッ
サのマーカーを点滅させ、更に符号Bの撮影された個人
化された画像内の対応する位置とプロセッサが推定した
位置でマーカーを点滅させる。それから操作者は位置は
正確かどうか確認でき、又は操作者はそれが正しくなる
まで種々の入力手段を介して位置を調整しうる。この手
続きは全ての鍵となる点のマーカーに対して続けられ、
それからデータは個人化されたゲーム媒体に書き込まれ
るよう記録される。異なるディスク又は異なる人のタイ
プにさえ対する多くの異なる初期テンプレートがありう
るものである。例えばピノキオゲーム用のテンプレート
は鼻の周囲の特徴の位置に対してより多くのデータを要
求する。他のテンプレートはある髪の毛のスタイル又は
眼鏡の表現に対して特殊化されうる。
【0019】図3の(A)に本発明の技術により変更さ
れていない個人化されていない(標準の)画像を示す。
図3の(B)に例えばゲームの競技者の肖像頭部を有す
る個人化されたキャラクターを示し、図3の(C)に個
人化された頭部と結合された標準の頭部を有するキャラ
クターを示す。肖像画像及びそれに関連した鍵となる特
徴点はそれに対して個人化された又は混合されたキャラ
クターを動画化するために対話的ビデオエンターテイメ
ントシステムにより要求される生データからなる。本発
明の意図することは対話的ビデオエンターテイメントシ
ステム内で個人化された動画を可能にする画像及び特徴
データベースを提供することにある。これらの所与の画
像データベースに対する動画技術は画像歪み及び変形技
術、より一般的には上記の「モルフィング」として知ら
れた技術に基づく。「人間の役者」から測定された鍵と
なる点の一連の動きの記録は動画の特徴点が本発明によ
り応用される手段である。この記録技術は本発明により
記載されたテンプレートデータ及び画像に対する要求を
作る。「本発明の実施例」では顧客に彼ら自身が動画の
キャラクターになるのに必要なデータを供給する手段を
提供するそれの有用さを説明した。
【0020】本発明の好ましい実施例と考えられるもの
を示した一方で変更や修正は本発明の本質的な精神を離
れることなく可能である。故に本発明の真の視野内のそ
の様な変更及び修正の全ては請求項に含まれる。
【図面の簡単な説明】
【図1】ビデオゲームディスク上で使用する個人化され
た画像を撮影及び書き込むシステムの構成を示す概略ブ
ロック図である。
【図2】基準肖像内の特徴点に対応する個人化された肖
像内の特徴点を配置する装置の構成を示す概略ブロック
図である。
【図3】標準ゲーム画像と、個人化された画像と、標準
画像及び個人化された画像から構成された混合画像とを
表すビデオゲームからの3つのスクリーン表示画像の見
本である。
【符号の説明】
10 システム 12 プロセッサ 13 CDディスク読み取り器 14 表示器スクリーン 16 プリンター 18 CDディスク書き込み器 20 画像撮影手段 22 顧客 24 青いスクリーンマット 26 音源 28 ローケイター
───────────────────────────────────────────────────── フロントページの続き (72)発明者 ハンス ピーター バオメイスター アメリカ合衆国 ニューヨーク 14428 チャーチヴィル ポール・ロード 1091

Claims (2)

    【特許請求の範囲】
  1. 【請求項1】a) 標準ビデオキャラクターのテンプレ
    ートを形成し; b) 個人化された画像を形成し; c) テンプレート特徴点に対応する個人化された画像
    内の対応する特徴点の位置をとり; d) 対応する特徴点及び関連する個人化された画像の
    位置を記憶し; e) それぞれの標準ビデオキャラクター及び個人化さ
    れた画像に対して上記段階a乃至dを繰り返す 各段階からなるビデオゲームの画像を標準化する方法。
  2. 【請求項2】標準ビデオキャラクターのテンプレートを
    形成する手段と;個人化された画像を形成する手段と;
    テンプレート特徴点に対応する個人化された画像内の対
    応する特徴点の位置をとる手段と;対応する特徴点及び
    関連する個人化された画像の位置を記憶する手段とから
    なるビデオゲームの画像を標準化する装置。
JP6323049A 1993-12-30 1994-12-26 個人化されたビデオエンターテイメント用の顔画像の標準化方法及び装置 Pending JPH07244726A (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US17581393A 1993-12-30 1993-12-30
US175813 1993-12-30

Publications (1)

Publication Number Publication Date
JPH07244726A true JPH07244726A (ja) 1995-09-19

Family

ID=22641733

Family Applications (1)

Application Number Title Priority Date Filing Date
JP6323049A Pending JPH07244726A (ja) 1993-12-30 1994-12-26 個人化されたビデオエンターテイメント用の顔画像の標準化方法及び装置

Country Status (2)

Country Link
EP (1) EP0664527A1 (ja)
JP (1) JPH07244726A (ja)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH09225142A (ja) * 1996-02-27 1997-09-02 Namco Ltd 画像合成方法及びゲーム装置
JPH10126687A (ja) * 1996-10-16 1998-05-15 Matsushita Electric Ind Co Ltd すり替え編集システム
KR100473593B1 (ko) * 2002-05-03 2005-03-08 삼성전자주식회사 3차원 캐리커쳐 생성 장치 및 방법
US7660482B2 (en) 2004-06-23 2010-02-09 Seiko Epson Corporation Method and apparatus for converting a photo to a caricature image

Families Citing this family (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5973734A (en) 1997-07-09 1999-10-26 Flashpoint Technology, Inc. Method and apparatus for correcting aspect ratio in a camera graphical user interface
NL1007397C2 (nl) * 1997-10-30 1999-05-12 V O F Headscanning Werkwijze en inrichting voor het met een gewijzigd uiterlijk weergeven van tenminste een deel van het menselijk lichaam.
US6222538B1 (en) * 1998-02-27 2001-04-24 Flashpoint Technology, Inc. Directing image capture sequences in a digital imaging device using scripts
EP1062589A4 (en) * 1998-03-13 2002-06-19 Digital Imagination Inc METHOD AND APPARATUS FOR PRODUCING PRINTED DOCUMENTS WITH CUSTOM GRAPHICS AND CUSTOM TEXT
GB9811695D0 (en) * 1998-06-01 1998-07-29 Tricorder Technology Plc Facial image processing method and apparatus
GB2342026B (en) * 1998-09-22 2003-06-11 Luvvy Ltd Graphics and image processing system
US6317141B1 (en) 1998-12-31 2001-11-13 Flashpoint Technology, Inc. Method and apparatus for editing heterogeneous media objects in a digital imaging device
US20030234871A1 (en) * 2002-06-25 2003-12-25 Squilla John R. Apparatus and method of modifying a portrait image
US9224145B1 (en) 2006-08-30 2015-12-29 Qurio Holdings, Inc. Venue based digital rights using capture device with digital watermarking capability
GB2541020A (en) * 2015-08-06 2017-02-08 Cheeseballer Games Ltd Personalised video game
CN111311712B (zh) * 2020-02-24 2023-06-16 北京百度网讯科技有限公司 视频帧处理方法和装置

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4872056A (en) * 1987-02-05 1989-10-03 Video Graphic Styling, Inc. Method for displaying selected hairstyles in video form
GB2246933A (en) * 1990-06-13 1992-02-12 Rank Cintel Ltd Production of multi-layered video composite
JPH06214557A (ja) * 1992-04-29 1994-08-05 Canon Inf Syst Res Australia Pty Ltd ビデオプロセッサシステム

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH09225142A (ja) * 1996-02-27 1997-09-02 Namco Ltd 画像合成方法及びゲーム装置
JPH10126687A (ja) * 1996-10-16 1998-05-15 Matsushita Electric Ind Co Ltd すり替え編集システム
KR100473593B1 (ko) * 2002-05-03 2005-03-08 삼성전자주식회사 3차원 캐리커쳐 생성 장치 및 방법
US7660482B2 (en) 2004-06-23 2010-02-09 Seiko Epson Corporation Method and apparatus for converting a photo to a caricature image

Also Published As

Publication number Publication date
EP0664527A1 (en) 1995-07-26

Similar Documents

Publication Publication Date Title
US5595389A (en) Method and apparatus for producing "personalized" video games using CD discs
US9319640B2 (en) Camera and display system interactivity
US8390648B2 (en) Display system for personalized consumer goods
US7859551B2 (en) Object customization and presentation system
US8212834B2 (en) Artistic digital template for image display
US8422794B2 (en) System for matching artistic attributes of secondary image and template to a primary image
US8274523B2 (en) Processing digital templates for image display
US8917943B2 (en) Determining image-based product from digital image collection
US8538986B2 (en) System for coordinating user images in an artistic design
US8854395B2 (en) Method for producing artistic image template designs
US8849853B2 (en) Method for matching artistic attributes of a template and secondary images to a primary image
US8237819B2 (en) Image capture method with artistic template design
US8289340B2 (en) Method of making an artistic digital template for image display
Jones Dancing, skating and sex: Action and text in the digital age
US20110029635A1 (en) Image capture device with artistic template design
US8345057B2 (en) Context coordination for an artistic digital template for image display
US20110029860A1 (en) Artistic digital template for image display
US20100060662A1 (en) Visual identifiers for virtual world avatars
US20110029562A1 (en) Coordinating user images in an artistic design
US20110157218A1 (en) Method for interactive display
US8332427B2 (en) Method of generating artistic template designs
EP0664527A1 (en) Method and apparatus for standardizing facial images for personalized video entertainment
AU2006292461A1 (en) Personalizing a video
WO2011014235A1 (en) Apparatus for generating artistic image template designs
JPH07284129A (ja) 3次元モデル及び深さ測定装置を用いた3次元個人化ビデオ用の方法及び装置