JP2000341568A - 撮像装置、撮像システム及び撮像方法 - Google Patents
撮像装置、撮像システム及び撮像方法Info
- Publication number
- JP2000341568A JP2000341568A JP11150609A JP15060999A JP2000341568A JP 2000341568 A JP2000341568 A JP 2000341568A JP 11150609 A JP11150609 A JP 11150609A JP 15060999 A JP15060999 A JP 15060999A JP 2000341568 A JP2000341568 A JP 2000341568A
- Authority
- JP
- Japan
- Prior art keywords
- moving image
- convex mirror
- imaging
- sensor unit
- axis
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Landscapes
- Studio Devices (AREA)
- Cameras In General (AREA)
- Lenses (AREA)
- Structure And Mechanism Of Cameras (AREA)
- Closed-Circuit Television Systems (AREA)
Abstract
画像を得ることを可能とする廉価な撮像装置、撮像シス
テム及び撮像方法を提供することを目的とし、更にはか
かる動画像の周辺部位の歪み除去と動画像のパノラマ化
を行なう。 【解決手段】 中心窩ミラー2は、その表面が中心窩様
形状とされており、中央部位が低曲率面で周辺部位が高
曲率面に形成されている。具体例としては、中心窩ミラ
ー2の表面は、その中心軸をY軸として、 Y=aX4 (a:定数) で表される曲線をY軸の廻りに回転させてなる曲面とす
る。
Description
得る撮像装置及び撮像方法に関し、特にデジタル処理さ
れた動画像信号を遠隔で利用する通信処理システムに適
用して好適である。
する外界の動画像を得る好適な自動制御装置として、い
わゆるマシンビジョンが期待されている。そして、この
マシンビジョンの応用の一環として、広角の映像を得る
ための中心窩視覚システムが研究されてきた。
しては、電子技術総合研究所の国吉らによる「Active S
tereo Vision System with Foveated Wide Lenses 」が
あり、ここで中心窩広角レンズが開示されている。しか
しながら、このレンズは視野が120°と比較的狭く、
10群11枚構成の比較的複雑なものであって高価であ
るという欠点がある。
よる「A foveated retina-like sensor using CCD tech
nology」があり、ここで、同心円状となるように中心部
位では高密度に、周辺部位では低密度になるように受光
体を配した網膜様センサ( retina-like sensor )が開
示されている。しかしながら、このセンサは上記のよう
に多数の受光体を特殊な配列に設けてなるために高価と
なって大量生産に不適であり、最新の種々のセンサ製造
技術を使用できないという欠点がある。
による米国特許4566763号があり、ここで視野の
広い映像を得ることができる画像形成体(image formin
g block )が開示されている。しかしながら、この画像
形成体は解像度に関する考慮がなされておらず、画像の
中心部位を高精細に撮影することはできない。このこと
は、反射動画像を得るためのミラーとして、その表面形
状が円錐状のものや、球面状、双曲面状、放物面状のも
のを用いても同様であり、高精細な中心画像を得ること
は困難である。
従来の技術では、 (1)光学系の視野が狭い。 (2)中央部位が高密度な動画像を撮影することができ
ない。 (3)光学系の形状・構造が複雑となって高価である。 という深刻な欠点があった。
度となる超広角の動画像を得ることを可能とする廉価な
撮像装置、撮像システム及び撮像方法を提供することを
目的とし、更には従来行われてこなかった、かかる動画
像の周辺部位の歪み除去と動画像のパノラマ化を行なう
ことを目的とする。
面鏡と、前記凸面鏡からの反射動画像を撮像するセンサ
部とを備えた撮像装置であって、前記凸面鏡は、その表
面が中心窩様形状とされており、中央部位が低曲率面で
周辺部位が高曲率面である。
凸面鏡の表面は、その中心軸をY軸として、 Y=aX4 (a:定数) で表される曲線をY軸の廻りに回転させてなる曲面であ
る。
凸面鏡は、その中心軸が前記センサ部の設置位置で規定
される光の中心軸からずれる位置に設置される。
部により処理された前記凸面鏡からの反射動画像の動画
像信号を修正し、動画像の周辺部位の歪みを除去してパ
ノラマ動画像を形成する画像処理手段を備える。
画像をセンサ部により撮像する手法であって、表面が中
心窩様形状とされており、中央部位が低曲率面で周辺部
位が高曲率面でとされた前記凸面鏡により、中央部位が
高解像度で周辺部位が低解像度となる反射画像を得た
後、前記センサ部で前記反射動画像を信号処理して動画
像信号を生成し、前記凸面鏡と前記センサ部との相対的
位置関係から予め決定されたパラメータに従って前記動
画像信号を修正し、動画像の周辺部位の歪みを除去して
パノラマ動画像を形成する。
凸面鏡の表面は、その中心軸をY軸として、 Y=aX4 (a:定数) で表される曲線をY軸の廻りに回転させてなる曲面であ
る。
凸面鏡は、その中心軸が前記センサ部の設置位置で規定
される光の中心軸からずれる位置に設置される。
形状とされており、中央部位が低曲率面で周辺部位が高
曲率面である凸面鏡と、前記凸面鏡からの反射動画像を
撮像するセンサ部とを有する第1の装置と、前記第1の
装置とネットワーク接続され、前記第1のカメラ部の撮
影状態を遠隔制御可能な第2の装置とを備え、前記第1
の装置により撮影された動画像を前記第2の装置に伝送
し、前記第2の装置に前記動画像を表示するように構成
される。
前記凸面鏡の表面は、その中心軸をY軸として、 Y=aX4 (a:定数) で表される曲線をY軸の廻りに回転させてなる曲面であ
る。
前記凸面鏡は、その中心軸が前記センサ部の設置位置で
規定される光の中心軸からずれる位置に設置される。
ンサ部により処理された前記凸面鏡からの反射動画像の
動画像信号を修正し、動画像の周辺部位の歪みを除去し
てパノラマ動画像を形成する画像処理手段を備える。
状とされており、中央部位が低曲率面で周辺部位が高曲
率面とされているため、この凸面鏡の形状に対応して、
中央部位が解像度が高く、周辺部位が解像度が低い動画
像が得られることになる。そして、この動画像の周辺部
位を修正することで、人間の視覚にとって違和感のない
超広角のパノラマ映像を得ることが可能となる。
施形態について図面を参照しながら詳細に説明する。
装置を含む撮像システムを示す模式図である。本図にお
いて、2は金属蒸着されてなる中心窩曲面を有する凸面
鏡(以下、中心窩ミラーと称する。)であり、1はガラ
スまたは透明な樹脂からなり中心窩ミラー2が設けられ
たブロック(以下、中心窩ミラーブロックと称す
る。)、3は光の透過面、4は結像のための凸レンズ等
の光学部材、5は光学部材4を介した中心窩ミラー2か
らの反射動画像を撮像するセンサ部である。これら中心
窩ミラー2、中心窩ミラーブロック1、光学部材4及び
センサ部5を少なくとも備えて中心窩視覚撮像装置の光
学系が構成される。
ログラムを保持しておくためのROM等からなる歪み除
去画像処理部、7は画像処理部6とネットワークを介し
て接続され、遠隔に置かれた第2の装置(に表示された
画像)である。この第2の装置7に対して、前記1〜6
を有して構成されるのが中心窩視覚撮像装置(第1の装
置)である。そして、8は第2の装置7の画像内で中央
部位に相当する高解像度部分を示している。第1の装置
及び第2の装置を備えて、本システムが構成される。
ットワークに接続し、ハイパーテキストデータを表示す
るなどの機能を持つ既存のパーソナルコンピュータ(P
C)やネットワークPC、ワークステーションなどで構
成されている。
状とされており、中央部位が低曲率面で周辺部位が高曲
率面に形成されている。具体例としては、中心窩ミラー
2の表面は、その中心軸をY軸として、 Y=aX4 (a:定数) で表される曲線をY軸の廻りに回転させてなる曲面とす
ることが好ましい。
5の設置位置で規定される光の中心軸からずれる位置に
設置される。
説明する。先ず、図2にしたがって中心窩ミラー2に入
射し反射する光路について説明する。本図は中心窩視覚
撮像装置の光学系の水平方向に沿った断面図であり、便
宜上、中心窩ミラー2の中心軸とセンサ部5の設置位置
で規定される光の中心軸とが一致するように描かれてい
る。
°離れた周辺部位からの入射光を示しており、12は中
心軸Lから20°離れた中央部位からの入射光、13は
入射光11が中心窩ミラー2で反射された反射光、14
は入射光12が中心窩ミラー2で反射された反射光をそ
れぞれ示している。
反射光13となる。反射光13は光学部材4を通り、セ
ンサ部5に入射する。また、入射光12は中心窩ミラー
2で反射されて反射光14となる。反射光14は光学部
材4を通り、センサ部5に入射する。
成要素である中心窩ミラー2と光学部材4の特性を示し
た図である。図3において、41はセンサ部5の有効な
領域を、42は画像中央部位の解像度の高い部分を示し
ており、例えばH0,H10,H−10は中心軸からの
水平方向の角度が各々0°,10°,−10°の方向の
入射光について、センサ部5上の軌跡を、例えばV0,
V10,V−10は中心軸からの垂直方向の角度が各々
0°,10°,−10°の方向の入射光について、セン
サ部5上の軌跡をそれぞれ示している。従って、光学部
材4を通過した反射光13は、図3の軌跡H120上に
入射し、反射光14は軌跡H20上に入射することにな
る。
動画像(原画像)の例を図4(a)に示す。中心窩ミラ
ー2の表面形状に対応して、センサ部5の中央部位には
歪みの少ない画像が結像し、周辺部位には歪みの多い画
像が結像する。図示の如く、4人の人物がテーブルに着
いている画像であり、中央部位に位置する人物は高解像
度で歪まずに撮影されている一方、他の3人は歪んで撮
影されており、歪みは周辺に行くほど大きい。
ような動画像の画像信号に以下に示すパノラマ画像化処
理により修正が加えられ、図4(b)の如く全体的に歪
みのない動画像が得られる。
説明する。パノラマ化された復元画像(図4(b))を
得るには、パノラマ画像上の画素が原画像(図4
(a))ではどの画素に相当するのかを計算し、2画像
の対応画素位置変換処理をする。具体的には、図3に示
すように、変換テーブルが10°毎に規定されている場
合、10°毎にメッシュが描かれた球面の中心に当該光
学系を設置して球面を撮像することによって測定する。
部5の中心から上に119画素、左に165画素の点で
あるとすると、その画素アドレス値を変換テーブルに保
存する。10°毎の場合には、26×13=325個の
画素アドレス・ペアを当該変換テーブルに保存すること
になる。
すると、 (w,v)=T(x/10,y/10) x:水平方向の角度;−120≦x≦120 y:垂直方向の角度;−60≦y≦60 で規定される。本実施形態では、パノラマ化された復元
画像(図4(b))の全画素について、原画像(図4
(a))で対応する画素を計算し、復元画像の画素値を
以下のように計算する。
+1) (w4,v4)=T(x/10,(y/10)+1) m=modulo(x,10),n=modulo(y,10)とし
て、 w=〔{w1*(10−m)+w2*m}*(10−
n)+{w4*(10−m)+w3*m}*n〕/10
0 v=〔{v1*(10−n)+v4*n}*(10−
m)+{v2*(10−n)+v3*n}*m〕/10
0
レスが求められ、画像全体について歪みのない超広角の
パノラマ動画像が得られる。なお、画素値については補
間をせず最近傍画素値を取れば、画素値をD(x,y)
として、 D(x,y)=D(w,v) として求められる。また、10°毎の変換テーブルを用
いずに更に細かい角度毎に規定した場合には、上記式群
中の10,100を当該角度に応じて変更すれば良い。
視覚撮像装置によれば、中心窩ミラー2の表面が、中央
部位が低曲率面で周辺部位が高曲率面とされているた
め、この中心窩ミラー2の形状に対応して、中央部位が
解像度が高く、周辺部位が解像度が低い動画像が得られ
ることになる。そして、この動画像の周辺部位を修正す
ることで、人間の視覚にとって違和感のない超広角のパ
ノラマ映像を得ることが可能となる。
く、周辺部位の曲率が高い凸の曲面ミラーに反射させた
映像を撮影するという手法により、従来より広角で且つ
安価な、中央部位の解像度が高く、周辺部位の解像度が
低い中心窩視覚の特性を持つ撮像装置(撮像方法)を構
成することが可能となる。
式図である。
た断面図である。
ある。
(b)を示す模式図である。
Claims (11)
- 【請求項1】 凸面鏡と、 前記凸面鏡からの反射動画像を撮像するセンサ部とを備
えた撮像装置であって、 前記凸面鏡は、その表面が中心窩様形状とされており、
中央部位が低曲率面で周辺部位が高曲率面であることを
特徴とする撮像装置。 - 【請求項2】 前記凸面鏡の表面は、その中心軸をY軸
として、 Y=aX4 (a:定数) で表される曲線をY軸の廻りに回転させてなる曲面であ
ることを特徴とする請求項1に記載の撮像装置。 - 【請求項3】 前記凸面鏡は、その中心軸が前記センサ
部の設置位置で規定される光の中心軸からずれる位置に
設置されることを特徴とする請求項1又は2に記載の撮
像装置。 - 【請求項4】 前記センサ部により処理された前記凸面
鏡からの反射動画像の動画像信号を修正し、動画像の周
辺部位の歪みを除去して超広角のパノラマ動画像を形成
する画像処理手段を備えることを特徴とする請求項1〜
3のいずれか1項に記載の撮像装置。 - 【請求項5】 凸面鏡からの反射動画像をセンサ部によ
り撮像する撮像方法であって、 表面が中心窩様形状とされており、中央部位が低曲率面
で周辺部位が高曲率面でとされた前記凸面鏡により、中
央部位が高解像度で周辺部位が低解像度となる反射画像
を得た後、 前記センサ部で前記反射動画像を信号処理して動画像信
号を生成し、 前記凸面鏡と前記センサ部との相対的位置関係から予め
決定されたパラメータに従って前記動画像信号を修正
し、動画像の周辺部位の歪みを除去して超広角のパノラ
マ動画像を形成することを特徴とする撮像方法。 - 【請求項6】 前記凸面鏡の表面は、その中心軸をY軸
として、 Y=aX4 (a:定数) で表される曲線をY軸の廻りに回転させてなる曲面であ
ることを特徴とする請求項5に記載の撮像方法。 - 【請求項7】 前記凸面鏡は、その中心軸が前記センサ
部の設置位置で規定される光の中心軸からずれる位置に
設置されることを特徴とする請求項5又は6に記載の撮
像方法。 - 【請求項8】 表面が中心窩様形状とされており、中央
部位が低曲率面で周辺部位が高曲率面である凸面鏡と、
前記凸面鏡からの反射動画像を撮像するセンサ部とを有
する第1の装置と、前記第1の装置とネットワーク接続
され、前記第1のカメラ部の撮影状態を遠隔制御可能な
第2の装置とを備え、前記第1の装置により撮影された
動画像を前記第2の装置に伝送し、前記第2の装置に前
記動画像を表示するようにしたことを特徴とする撮像シ
ステム。 - 【請求項9】 前記凸面鏡の表面は、その中心軸をY軸
として、 Y=aX4 (a:定数) で表される曲線をY軸の廻りに回転させてなる曲面であ
ることを特徴とする請求項8に記載の撮像システム。 - 【請求項10】 前記凸面鏡は、その中心軸が前記セン
サ部の設置位置で規定される光の中心軸からずれる位置
に設置されることを特徴とする請求項8又は9に記載の
撮像システム。 - 【請求項11】 前記センサ部により処理された前記凸
面鏡からの反射動画像の動画像信号を修正し、動画像の
周辺部位の歪みを除去してパノラマ動画像を形成する画
像処理手段を備えることを特徴とする請求項8〜10の
いずれか1項に記載の撮像システム。
Priority Applications (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP15060999A JP4227249B2 (ja) | 1999-05-28 | 1999-05-28 | 撮像装置、撮像システム及び撮像方法 |
| US09/346,256 US6977676B1 (en) | 1998-07-08 | 1999-07-01 | Camera control system |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP15060999A JP4227249B2 (ja) | 1999-05-28 | 1999-05-28 | 撮像装置、撮像システム及び撮像方法 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2000341568A true JP2000341568A (ja) | 2000-12-08 |
| JP4227249B2 JP4227249B2 (ja) | 2009-02-18 |
Family
ID=15500632
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP15060999A Expired - Fee Related JP4227249B2 (ja) | 1998-07-08 | 1999-05-28 | 撮像装置、撮像システム及び撮像方法 |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP4227249B2 (ja) |
Cited By (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US6847497B2 (en) | 2000-10-20 | 2005-01-25 | Matsushita Electric Industrial Co., Ltd. | Wide-angle imaging device |
| US6867933B2 (en) * | 2003-06-19 | 2005-03-15 | Minolta Co., Ltd. | Image-taking apparatus, and camera and camera system incorporating it |
| EP1564574A1 (en) * | 2001-02-09 | 2005-08-17 | Sharp Kabushiki Kaisha | Imaging device and method for producing the same |
| EP1802102A1 (de) * | 2005-12-23 | 2007-06-27 | DLR Deutsches Zentrum für Luft- und Raumfahrt e.V. | Optisches System sowie ein Verfahren zur Bildaufnahme mit unterschiedlichen Abbildungsmassstäben |
| JP2013055541A (ja) * | 2011-09-05 | 2013-03-21 | Ricoh Co Ltd | 撮像装置 |
| JP2019032540A (ja) * | 2016-08-12 | 2019-02-28 | パナソニックIpマネジメント株式会社 | 撮像装置 |
-
1999
- 1999-05-28 JP JP15060999A patent/JP4227249B2/ja not_active Expired - Fee Related
Cited By (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US6847497B2 (en) | 2000-10-20 | 2005-01-25 | Matsushita Electric Industrial Co., Ltd. | Wide-angle imaging device |
| EP1564574A1 (en) * | 2001-02-09 | 2005-08-17 | Sharp Kabushiki Kaisha | Imaging device and method for producing the same |
| US6867933B2 (en) * | 2003-06-19 | 2005-03-15 | Minolta Co., Ltd. | Image-taking apparatus, and camera and camera system incorporating it |
| EP1802102A1 (de) * | 2005-12-23 | 2007-06-27 | DLR Deutsches Zentrum für Luft- und Raumfahrt e.V. | Optisches System sowie ein Verfahren zur Bildaufnahme mit unterschiedlichen Abbildungsmassstäben |
| JP2013055541A (ja) * | 2011-09-05 | 2013-03-21 | Ricoh Co Ltd | 撮像装置 |
| JP2019032540A (ja) * | 2016-08-12 | 2019-02-28 | パナソニックIpマネジメント株式会社 | 撮像装置 |
Also Published As
| Publication number | Publication date |
|---|---|
| JP4227249B2 (ja) | 2009-02-18 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| KR100599423B1 (ko) | 전방향성 이미징 장치 | |
| US5739852A (en) | Electronic imaging system and sensor for use therefor with a nonlinear distribution of imaging elements | |
| US7450165B2 (en) | Multiple-view processing in wide-angle video camera | |
| US6002430A (en) | Method and apparatus for simultaneous capture of a spherical image | |
| US6977676B1 (en) | Camera control system | |
| JP4434653B2 (ja) | デジタルズーム機能を備えた携帯電子撮像デバイスおよびデジタルズーム機能を提供するための方法 | |
| CN111324001B (zh) | 用于全景成像的系统 | |
| WO2003027766A3 (en) | System and method for panoramic imaging | |
| US7893985B1 (en) | Wide angle electronic camera with improved peripheral vision | |
| US6345129B1 (en) | Wide-field scanning tv | |
| JP3453960B2 (ja) | 車両周囲モニタ装置 | |
| JP4227249B2 (ja) | 撮像装置、撮像システム及び撮像方法 | |
| JP3054146B1 (ja) | パノラマ像装置 | |
| JP3262775B2 (ja) | デジタルズームアウト処理装置 | |
| JP2000322564A (ja) | 全方位視覚センサ | |
| JPH06292052A (ja) | 静止画像撮像装置 | |
| JPH1118007A (ja) | 全方向性画像表示システム | |
| JP2005063141A5 (ja) | ||
| JPH08305841A (ja) | 歪曲収差画像補正表示装置 | |
| CN113852754B (zh) | 控制设备、控制方法和存储介质 | |
| WO1996008105A1 (en) | Method for creating image data | |
| KR100343836B1 (ko) | 파노라마 영상 감시 시스템 및 그 제어방법 | |
| JP3888847B2 (ja) | 広視野映像撮像装置 | |
| JP5847570B2 (ja) | 画像処理装置及びその制御方法 | |
| JP3805631B2 (ja) | 多重焦点全方位撮像装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20050418 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20050426 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20050627 |
|
| A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20060207 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20060404 |
|
| A911 | Transfer to examiner for re-examination before appeal (zenchi) |
Free format text: JAPANESE INTERMEDIATE CODE: A911 Effective date: 20060501 |
|
| A912 | Re-examination (zenchi) completed and case transferred to appeal board |
Free format text: JAPANESE INTERMEDIATE CODE: A912 Effective date: 20061208 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20081016 |
|
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20081128 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20111205 Year of fee payment: 3 |
|
| R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20121205 Year of fee payment: 4 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20131205 Year of fee payment: 5 |
|
| LAPS | Cancellation because of no payment of annual fees |