JP2004159014A

JP2004159014A - デジタルカメラ付き携帯通信端末

Info

Publication number: JP2004159014A
Application number: JP2002321721A
Authority: JP
Inventors: Junichi Kadokura; 淳一門倉
Original assignee: NEC Corp
Current assignee: NEC Corp
Priority date: 2002-11-05
Filing date: 2002-11-05
Publication date: 2004-06-03

Abstract

【課題】比較的簡単な構成で人間の視野に近い広角な撮影エリアの撮影が可能なデジタルカメラ付携帯通信端末を提供する。
【解決手段】それぞれ所定の撮影エリア（画角）を撮影可能な３つのセンサ２〜４が、携帯電話端末８の背面部と両側面部に搭載される。側面部に搭載されるセンサ３，４は、通常空スペースとなっているヒンジ９の両サイドに配置される。センサ２は携帯電話端末８の背面方向の所定撮影エリアをカバーし、センサ３，４は、センサ２の撮影エリアの両サイドにおいて一部重なるようにして所定撮影エリアをカバーする。センサ２〜４で撮影された画像データはデータ処理回路においてつなぎ合わされ、センサ２〜４で撮影されたユーザの正面の風景がパノラマサイズに画像処理されて表示部７に表示される。
【選択図】図２

Description

【０００１】
【発明の属する技術分野】
本発明は、デジタルカメラを内蔵したカメラ付き携帯通信端末に関し、特に、人間の視野に近い広角な画像表現を行うことが可能なカメラ付き携帯通信端末に関する。
【０００２】
【従来の技術】
携帯電話機等の携帯通信端末にデジタルカメラを内蔵させ、音声通話あるいは文字情報のみならず、内蔵デジタルカメラで撮影した顔写真や風景などの画像を表示し、また、その情報をテレビ電話機能あるいは電子メール機能を利用して送信可能とした携帯通信端末が普及している。
【０００３】
例えば特許文献１では、携帯通信端末本体部とモニター画面を備えるフリップ部とを軸部により回転自在に連結し、軸部内の長手方向に第１撮影用レンズを収納して設け、フリップ部の所定箇所に第２撮影用レンズを設けることにより、例えばテレビ電話として使用する場合、自分の顔と自分が見ている風景とを、２台の撮影用レンズで撮影するとともに切り替えスイッチで切り替え可能とすることにより、自分の顔と自分が見ている風景とを同時に表示させ、相手側に伝えることを可能にしている。
【０００４】
また、特許文献２では、携帯型情報通信端末本体部にカメラユニット装着部を設け、該カメラユニット装着部に、広角ビデオカメラ、望遠ビデオカメラ等の異なる仕様を有するビデオカメラユニットを選択的に着脱可能にすることにより、状況に応じて異なる仕様のカメラユニットを装着して使用可能とする技術が記載されている。
【０００５】
【特許文献１】
特開２００１−１６９１６６号公報
【特許文献２】
特開２００１−２４５２６６号公報
【０００６】
【発明が解決しようとする課題】
特許文献１に記載されたビデオカメラ付携帯通信端末では、２つの撮影用レンズで撮影した自分の顔と自分が見ている風景とを、同時に表示させかつ送信することができる等その機能の多様化を図ることができるが、各撮影用レンズで撮影されたデータはそれぞれ独立のデータであり、また個々の撮影用レンズで撮影可能な画角（撮影エリア）は比較的狭く、撮影の際撮影用レンズの向きに注意を払わなければならない。ズーム機能により撮影エリアを拡げることは可能であるが、それも限度があり、また、そのための調整機構も必要となり構成が複雑化するという問題がある。
【０００７】
特許文献２に記載された携帯型情報通信端末では、状況に応じて異なる仕様のカメラユニットを選択的に切り替えることができるので、様々な状況に対応した撮影を行うことができるが、複数の異なる仕様のカメラユニットを別途携帯する必要があり、また、状況に応じて異なる仕様のカメラユニットを装着し直さなければならず、操作も煩雑である。
【０００８】
本発明の目的は、比較的簡単な構成で人間の視野に近い広角な撮影エリアの撮影を可能にするとともに、撮影エリアの切り替えが容易なデジタルカメラ付携帯通信端末を提供することにある。
【０００９】
【課題を解決するための手段】
本発明によるデジタルカメラ付き携帯通信端末は、携帯通信端末本体の背面部に配置され該携帯通信端末本体背面方向の所定の撮影エリアを撮影可能な第１のセンサと、前記携帯通信端末本体の両側面部に配置され、前記第１のセンサによる撮影エリアの両側において一部重なるように隣接する所定の撮影エリアを撮影可能な第２及び第３のセンサを備えていることを特徴とする。
【００１０】
これら第１〜第３のセンサにより撮影された画像データは、ＤＳＰ（ｄｉｇｉｔａｌｓｉｇｎａｌｐｒｏｃｅｓｓｏｒ）及びＣＰＵ（ｃｅｎｔｒａｌｐｒｏｃｅｓｓｉｎｇｕｎｉｔ）によって補正、処理され、第１〜第３のセンサからの３つの画像がつなぎ合わされることにより人間の視野に近い広角なパノラマサイズの画像データとして表示部に出力される。従って、表示部には、ユーザの正面の風景をパノラマサイズの画像として一度に表示することが可能となる。
【００１１】
【発明の実施の形態】
図１は、本発明のデジタルカメラ付き携帯電話端末におけるカメラ画像撮影装置の第１の実施形態を示す概略ブロック図であり、カメラモジュール１と、ＣＰＵ６と、表示部７を含む。なお、ＣＰＵ６及び表示部７は、携帯電話端末本体が備えているＣＰＵ及び表示部と兼用されており、カメラモジュール１からの信号処理および表示以外の携帯電話機としての制御および表示も行う。
【００１２】
カメラモジュール１は、それぞれ所定の撮影エリアを撮影可能な３つのセンサ２〜４と、該センサ２〜４から入力された画像データの処理を行うＤＳＰ５を備えている。ＤＳＰ５は省スペースを考慮して、１つのＤＳＰで３つのセンサ２〜４の制御及びこれらのセンサからの画像データの処理を行う。
【００１３】
ＤＳＰ５で処理された画像データはＣＰＵ６に出力される。ＣＰＵ６は、ＤＳＰ５と表示部７と接続しており、ＤＳＰ５からの入力画像を処理するとともに表示方法を決定し、表示部７へ出力する。表示部７はＣＰＵ６と接続しており、ＣＰＵ６からの入力画像を表示する。
【００１４】
図２は、本実施形態のデジタルカメラ付き携帯電話端末の背面及び両側面図を模式的に示す外観図である。
【００１５】
図２に示すように、３つのセンサ２〜４は、それぞれ携帯電話端末８の背面部と両側面部に搭載される。この時、画角、スペースを有効的に使うために、側面部に搭載されるセンサ３，４は、通常空スペースとなっているヒンジ９の両サイドに配置される。また、各センサの撮影スペック（焦点距離や画角等）は搭載の位置、方法などによって詳細な設定を行う。
【００１６】
図３は、３つのセンサ２〜４によって撮影される各撮影エリアの一例を示しており、携帯電話端末８の背面部に搭載されたセンサ２によって撮影エリア１０をカバーし、携帯電話端末８の両側面部に搭載されたセンサ３，４により撮影エリア１０に隣接する撮影エリア１１，１２をカバーする。撮影エリア１０の両サイドは、撮影エリア１１，１２と一部重なるように設定されている。
【００１７】
図４は、３つのセンサ２〜４によって撮影された画像データをＤＳＰ５及びＣＰＵ６でつなぎ合わせ処理を行って、ユーザの正面の風景をパノラマサイズの画像として表示部７に一度に表示させた場合の例を示している。
【００１８】
次に、本実施形態の動作について、図１〜図４を参照して詳細に説明する。
【００１９】
ユーザがこの携帯通信端末のキー操作部からカメラによる撮影機能を設定して風景等を撮影し、表示モードとしてパノラマモードを指定すると、３つのセンサ２〜４によって撮影された画像データがＤＳＰ５に入力される。ＤＳＰ５では、３つのセンサ２〜４から入力された画像データ１０〜１２の各重なり部分を補正、処理することによりつなぎ合わせ、パノラマサイズの画像データ１４としてＣＰＵ６へ出力する。
【００２０】
ＣＰＵ６は、ＤＳＰ５から入力したパノラマサイズの画像データ１４に対して、表示部７の横方向にこのつなぎ合わされたパノラマサイズの画像が最適に表示されるように例えばその縦方向のサイズを調整して出力する。従って、表示部７には、図４に示すような、ユーザの正面の風景が広角なパノラマサイズの画像１４として一度に表示される。
【００２１】
センサ２〜４での撮影は同時または、数フレームごとに行われ、撮影した画像データ１０〜１２は一旦メモリに記憶される。ＤＳＰ５はＣＰＵ６からの指示に従って、メモリに記憶された各センサからの画像データを読み出して所定の画像補正、処理を行う。
【００２２】
表示モードとして、ユーザが携帯通信端末のキー操作部から分割表示モードを指定した場合には、ＣＰＵ６は、ＤＳＰ５に対してパノラマサイズの画像処理の停止と分割表示データの出力を指示し、ＤＳＰ５は３つのセンサ２〜４で得られた各方向の画像データをつなぎ合わせず、そのままＣＰＵ６へ出力する。ＣＰＵ６は、ユーザの指示に従って、それら３つの画像を分割したままの状態で表示部７へ出力して表示させ、あるいはその中の指定された一つの画像（例えば、センサ２で撮影された画像１３）のみを表示部７へ出力して表示させる。
【００２３】
本実施形態で用いられる個々のカメラ（センサ）としては、特に広角とするために特殊な構成のものを用いる必要はなく、通常用いられているカメラを使用し、それらのカメラで撮影された画像を複数つなぎ合わせる事で、一つのカメラによる画像では得ることが困難な広角な画像を容易に得ることができる。また、被写体の幅を気にする事なく撮影ができ、人間の視野に近い画像も比較的簡単に得られる。
【００２４】
また、ＤＳＰ５において、センサ２〜４から入力された画像データを処理して得られたパノラマサイズの画像データ１４から、移動に伴う画像変化を読み取るための画像中の対象物が撮影されている前回のパノラマサイズの画像データ１４と今回のパノラマサイズの画像データ１４とを比較し、該撮影された対象物の画像認識を行って画面上における位置のずれ、及び対象物の大きさの変化を検出することにより、ユーザの移動角度、移動距離などを検出するシステムを構築する場合、本実施形態のデジタルカメラ付き携帯通信端末を用いると、広角な画像が得られるために移動に伴う画像変化を読み取るための画像中の対象点が画面から消える事が極端に少なく、また、対象物を広範囲に多く設定する事が可能となり、信頼性が向上する。
【００２５】
これによってＧＰＳなどで電波が届かない場所などでの移動を検出する補助機能として使用出来る。また、その場所周辺の地図をダウンロードなどする事で、通信しない状態でのナビ機能を搭載する事も可能となる。
【００２６】
また３つのセンサ２〜４からの画像をＤＳＰ５により組み合わせる機能の応用として、過去に撮った画像や時間差で撮影した画像などをつなぎ合わせ、画面の端から端に移動する被写体などの場合は、同じ背景画面上を移動する被写体を表示する等の新たな画像表示方法も可能である。
【００２７】
図５は、本発明のデジタルカメラ付き携帯通信端末におけるカメラ画像撮影装置の第２の実施形態を示すブロック図であり、図６は、本実施形態のデジタルカメラ付き携帯通信端末の背面及び両側面図を模式的に示す外観図である。
【００２８】
本実施形態では、第１の実施形態における３つのセンサ２〜４に加えて、携帯電話端末８の表面部（表示部側）に所定の撮影エリアを撮影する第４のセンサ１５を搭載したことを特徴としており、その他の構成は第１の実施形態と同様である。以下、この特徴部分の動作について説明する。
【００２９】
この第４のセンサ１５は主にユーザ自身を撮影するために設けられている。図６ではセンサ１５を、表示部７を有する筐体側に配置しているが、操作キーを有する筐体側あるいはヒンジ部９の中央部に設けても良い。ＤＳＰ５は、センサ２〜４からの画像データとセンサ１５からの画像データを入力して、センサ１５で撮影されたユーザを、センサ２〜４で撮影された背景画面とを同時に表示させる機能を有している。
【００３０】
例えば、ユーザの正面にある風景の前にユーザ自身を重ねて配置した画像として表示する場合には、ＤＳＰ５は撮影されたユーザの輪郭を識別し、該輪郭と重なる背景画面を除去することにより、ユーザの正面にある風景の前にユーザ自身を配置した画像として表示するように画像データの合成処理を行う機能を有している。
【００３１】
また、搭載カメラをさらに増やす事で、一層広角な画像を得る事も可能であり、これらのカメラを使ったアプリケーションの幅も広がる。
【００３２】
なお、上記の実施形態では、ヒンジ部９によりキー操作部を有する筐体と表示部を有する筐体とが折り畳み可能に構成された携帯通信端末に適用した場合について説明したが、本発明はそれに限定されるものではなく、一つの筐体にキー操作部と表示部を備え、ヒンジ部による折り畳み機能を有していない携帯通信端末にも適用可能である。
【００３３】
【発明の効果】
本発明によれば、個々のカメラとして特に広角とするために殊な構成のものを用いる必要はなく、複数のカメラによる画像をつなぎ合わせる事で、通常の一つのカメラによる画像では得ることが困難な広角な画像を容易に得ることができ、被写体の幅を気にする事なく撮影が出来る。また、人間の視野に近い画像も比較的簡単に得られる。
【００３４】
また、ヒンジ部を有する折り畳み構造の携帯端末を用いた場合には、ヒンジ９を有効活用する事で、実装面での大きな障害を与える事無く複数のセンサを追加することが出来る。
【００３５】
このシステムの撮影エリアは広角であるため撮影が行いやすく、また、パノラマサイズの撮影が出来、撮影方法の選択の幅も広がって携帯端末のカメラの使用用途も増加する。
【００３６】
また、撮影エリアが人間の視野に近い広角なエリアをカバーし、かつ各センサによる携帯端末本体上で画角が予め設定されているので、画像の認知しやすさなどが向上し、画像認識による移動角度、移動速度検出等のアプリケーションの信頼性を向上すると共に、ゲーム等への応用による新たなアプリケーションへの幅も広がる。
【図面の簡単な説明】
【図１】
本発明のデジタルカメラ付き携帯通信端末におけるカメラ画像撮影装置の第１の実施形態を示すブロック図である。
【図２】
本実施形態のデジタルカメラ付き携帯通信端末の背面及び両側面図を模式的に示す外観図である。
【図３】
本実施形態における３つのセンサによって撮影される各撮影エリアの一例を示す図である。
【図４】
本実施形態における３つのセンサによって撮影された画像を表示部にパノラマサイズの画像として一度に表示させた場合の例を示す図である。
【図５】
本発明のデジタルカメラ付き携帯通信端末におけるカメラ画像撮影装置の第２の実施形態を示すブロック図である。
【図６】
本実施形態のデジタルカメラ付き携帯通信端末の正面、背面及び両側面図を模式的に示す外観図である。
【符号の説明】
１カメラモジュール
２〜４，１５センサ
５ＤＳＰ（ｄｉｇｉｔａｌｓｉｇｎａｌｐｒｏｃｅｓｓｏｒ）
６ＣＰＵ（ｃｅｎｔｒａｌｐｒｏｃｅｓｓｉｎｇｕｎｉｔ）
７表示部
８携帯型通信端末本体
９ヒンジ部

Claims

携帯通信端末本体の背面部に配置され該携帯通信端末本体背面方向の所定の撮影エリアを撮影可能な第１のセンサと、前記携帯通信端末本体の両側面部に配置され、前記第１のセンサによる撮影エリアの両側において一部重なるように隣接する所定の撮影エリアを撮影可能な第２及び第３のセンサを備えていることを特徴とするデジタルカメラ付き携帯通信端末。
前記携帯通信端末は、キー操作部を有する第１の筐体と表示部を有する第２の筐体とがヒンジ部により折り畳み可能に構成されており、前記第１のセンサは前記第１の筐体の背面部に配置され、前記第２及び第３のセンサは前記ヒンジ部の両サイドに配置されていることを特徴とする請求項１に記載のデジタルカメラ付き携帯通信端末。
前記第１乃至第３のセンサにより撮影された画像データをつなぎ合わせる処理を行って広角画像に変換する画像データ処理手段と、該画像データ処理手段より出力された広角画像を表示する表示手段を備えていることを特徴とする請求項１または２に記載のデジタルカメラ付き携帯通信端末。
前記画像データ処理手段によりつなぎ合わされた前回の画像データと今回の画像データとを比較することにより、当該携帯通信端末の移動角度および移動距離を検出する手段を備えていることを特徴とする請求項３に記載のデジタルカメラ付き携帯通信端末。
携帯通信端末本体表面に、該携帯通信端末を使用中のユーザ自身を撮影可能な第４のセンサを備えていることを特徴とする請求項１〜４のいずれかに記載のデジタルカメラ付き携帯通信端末。
前記画像データ処理手段は、前記第４のセンサにより撮影された画像データと前記第１〜第３のセンサにより撮影された画像データとを合成した画像を作成する機能を有していることを特徴とする請求項５に記載のデジタルカメラ付き携帯通信端末。