JPH07240931A - カラー・シーケンシャル電子カメラ - Google Patents
カラー・シーケンシャル電子カメラInfo
- Publication number
- JPH07240931A JPH07240931A JP6317968A JP31796894A JPH07240931A JP H07240931 A JPH07240931 A JP H07240931A JP 6317968 A JP6317968 A JP 6317968A JP 31796894 A JP31796894 A JP 31796894A JP H07240931 A JPH07240931 A JP H07240931A
- Authority
- JP
- Japan
- Prior art keywords
- luminance
- chrominance
- image
- light
- image elements
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 description 18
- 238000005286 illumination Methods 0.000 description 17
- 238000010586 diagram Methods 0.000 description 14
- 230000002123 temporal effect Effects 0.000 description 12
- 238000005070 sampling Methods 0.000 description 8
- 238000009792 diffusion process Methods 0.000 description 7
- 230000010354 integration Effects 0.000 description 6
- 238000012545 processing Methods 0.000 description 6
- 238000012546 transfer Methods 0.000 description 6
- 238000012935 Averaging Methods 0.000 description 4
- 230000008569 process Effects 0.000 description 4
- 239000000523 sample Substances 0.000 description 4
- 238000007796 conventional method Methods 0.000 description 3
- 230000002596 correlated effect Effects 0.000 description 3
- 238000009825 accumulation Methods 0.000 description 2
- 230000008901 benefit Effects 0.000 description 2
- 239000003086 colorant Substances 0.000 description 2
- 238000012937 correction Methods 0.000 description 2
- 230000007246 mechanism Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 235000003197 Byrsonima crassifolia Nutrition 0.000 description 1
- 240000001546 Byrsonima crassifolia Species 0.000 description 1
- 241001600451 Chromis Species 0.000 description 1
- 239000008186 active pharmaceutical agent Substances 0.000 description 1
- 230000003466 anti-cipated effect Effects 0.000 description 1
- 230000015556 catabolic process Effects 0.000 description 1
- 239000013065 commercial product Substances 0.000 description 1
- 239000002131 composite material Substances 0.000 description 1
- 230000001276 controlling effect Effects 0.000 description 1
- 230000007423 decrease Effects 0.000 description 1
- 230000003247 decreasing effect Effects 0.000 description 1
- 238000006731 degradation reaction Methods 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 230000009977 dual effect Effects 0.000 description 1
- 239000000835 fiber Substances 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 238000003780 insertion Methods 0.000 description 1
- 230000037431 insertion Effects 0.000 description 1
- 210000000056 organ Anatomy 0.000 description 1
- 230000000750 progressive effect Effects 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 238000009877 rendering Methods 0.000 description 1
- 238000011160 research Methods 0.000 description 1
- 238000012552 review Methods 0.000 description 1
- 230000000630 rising effect Effects 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/80—Camera processing pipelines; Components thereof
- H04N23/84—Camera processing pipelines; Components thereof for processing colour signals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/56—Cameras or camera modules comprising electronic image sensors; Control thereof provided with illuminating means
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/70—Circuitry for compensating brightness variation in the scene
- H04N23/73—Circuitry for compensating brightness variation in the scene by influencing the exposure time
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/10—Circuitry of solid-state image sensors [SSIS]; Control thereof for transforming different wavelengths into image signals
- H04N25/11—Arrangement of colour filter arrays [CFA]; Filter mosaics
- H04N25/13—Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements
- H04N25/133—Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements including elements passing panchromatic light, e.g. filters passing white light
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/10—Circuitry of solid-state image sensors [SSIS]; Control thereof for transforming different wavelengths into image signals
- H04N25/11—Arrangement of colour filter arrays [CFA]; Filter mosaics
- H04N25/13—Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements
- H04N25/135—Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements based on four or more different wavelength filter elements
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/40—Extracting pixel data from image sensors by controlling scanning circuits, e.g. by modifying the number of pixels sampled or to be sampled
- H04N25/46—Extracting pixel data from image sensors by controlling scanning circuits, e.g. by modifying the number of pixels sampled or to be sampled by combining or binning pixels
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/50—Control of the SSIS exposure
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/50—Control of the SSIS exposure
- H04N25/53—Control of the integration time
- H04N25/533—Control of the integration time by using differing integration times for different sensor regions
- H04N25/534—Control of the integration time by using differing integration times for different sensor regions depending on the spectral component
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/50—Constructional details
- H04N23/555—Constructional details for picking-up images in sites, inaccessible due to their dimensions or hazardous conditions, e.g. endoscopes or borescopes
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Physics & Mathematics (AREA)
- Spectroscopy & Molecular Physics (AREA)
- Color Television Image Signal Generators (AREA)
- Endoscopes (AREA)
- Electrophotography Using Other Than Carlson'S Method (AREA)
- Instruments For Viewing The Inside Of Hollow Bodies (AREA)
Abstract
(57)【要約】
【目的】 ディジタル・カラー・カメラのビット速度お
よび電力消費を低減し、鮮明な動画像を作成する。 【構成】 RGBの光源26a,26b,26cを用い
るカラー・シーケンシャル電子カメラにおいて、RとG
を同時に発光させてルミナンス光ビームを、また、Rと
Bをそれぞれ独立に発光させてクロミナンス光ビームを
供給する。被写体30から反射する画像の光をイメージ
センサ34で捕捉し、一連のルミナンスおよびクロミナ
ンス画像要素を形成するカラー・シーケンシャル信号を
作成する。ルミナンス光ビームの間にクロミナンス光ビ
ームが交互に現われるように光源26a,26b,26
cを駆動し、クロミナンス画像要素を、ルミナンス画像
要素より低い時間レートで捕捉する。さらに、クロミナ
ンス画像について複数のセンサ・フォトサイトの画像要
素を統合し、クロミナンス要素の空間解像度を、ルミナ
ンス要素より低くする。
よび電力消費を低減し、鮮明な動画像を作成する。 【構成】 RGBの光源26a,26b,26cを用い
るカラー・シーケンシャル電子カメラにおいて、RとG
を同時に発光させてルミナンス光ビームを、また、Rと
Bをそれぞれ独立に発光させてクロミナンス光ビームを
供給する。被写体30から反射する画像の光をイメージ
センサ34で捕捉し、一連のルミナンスおよびクロミナ
ンス画像要素を形成するカラー・シーケンシャル信号を
作成する。ルミナンス光ビームの間にクロミナンス光ビ
ームが交互に現われるように光源26a,26b,26
cを駆動し、クロミナンス画像要素を、ルミナンス画像
要素より低い時間レートで捕捉する。さらに、クロミナ
ンス画像について複数のセンサ・フォトサイトの画像要
素を統合し、クロミナンス要素の空間解像度を、ルミナ
ンス要素より低くする。
Description
【0001】
【産業上の利用分野】本発明は、固体イメージセンサを
使用した電子カメラに関し、特にカラー・シーケンシャ
ル電子カメラに関する。
使用した電子カメラに関し、特にカラー・シーケンシャ
ル電子カメラに関する。
【0002】
【従来の技術】カラー・シーケンシャル電子カメラを医
療に応用する場合、モノクローム・センサを用いた低出
力のカラー・シーケンシャル・カメラのヘッドから得ら
れるディジタルの出力信号を、低ビットレートのディジ
タルリンクを通じて遠隔の基本装置に供給する方法が用
いられる。その典型的な応用例は、身体内の腔の検査に
用いる内視鏡である。カメラヘッドをプローブの先端に
取りつけ、基本装置(ベース・ユニット、base unit )
に、カメラヘッドにより捕捉される画像を観察するため
のモニタなどを備える。カメラヘッドによって順次、
赤、緑、青(R、G、B)の光を対象場面に照射し、モ
ノクロームセンサからのR、G、Bのカラー画像を順次
ディジタル化して出力する。さらに、良好な画像解像度
および動画像を維持しながら消費電力の最小化を図るた
め、ディジタル出力信号の画素レートは可能な限り小さ
くする。通常、すべてのRGB画像においてセンサの解
像度をフルに利用する。モノクロームセンサは、1秒あ
たり60フィールドをインタレース・モードにより読み
出す。即ち、1秒あたりそれぞれ20個の赤、緑、青の
フィールドが読み出される。
療に応用する場合、モノクローム・センサを用いた低出
力のカラー・シーケンシャル・カメラのヘッドから得ら
れるディジタルの出力信号を、低ビットレートのディジ
タルリンクを通じて遠隔の基本装置に供給する方法が用
いられる。その典型的な応用例は、身体内の腔の検査に
用いる内視鏡である。カメラヘッドをプローブの先端に
取りつけ、基本装置(ベース・ユニット、base unit )
に、カメラヘッドにより捕捉される画像を観察するため
のモニタなどを備える。カメラヘッドによって順次、
赤、緑、青(R、G、B)の光を対象場面に照射し、モ
ノクロームセンサからのR、G、Bのカラー画像を順次
ディジタル化して出力する。さらに、良好な画像解像度
および動画像を維持しながら消費電力の最小化を図るた
め、ディジタル出力信号の画素レートは可能な限り小さ
くする。通常、すべてのRGB画像においてセンサの解
像度をフルに利用する。モノクロームセンサは、1秒あ
たり60フィールドをインタレース・モードにより読み
出す。即ち、1秒あたりそれぞれ20個の赤、緑、青の
フィールドが読み出される。
【0003】公知の形式の内視鏡に用いる、連続するフ
ィールドによるカラーテレビジョンシステムとして、米
国特許第4,845,553号に記載された形式が知ら
れている。三原色(R、G、B)の光を器官などの対象
物に当て、各色に対する反射光を電荷結合素子(CC
D)により受け、電気信号に変換する。得られた画像信
号は記憶装置に連続的に蓄積した後、処理装置によって
カラーテレビジョン信号に変換し、カラーモニタに表示
する。ここで、特に、上記特許第4,845,553号
に示されているように、緑色光に対しては全解像度の出
力(フル・レゾリューション・アウトプット、full res
olution output)を用いるが、赤および青色光に対する
CCDの全解像度出力はサブ・サンプリング(sub-samp
ling)を施し、これによって記憶装置の容量を削減す
る。
ィールドによるカラーテレビジョンシステムとして、米
国特許第4,845,553号に記載された形式が知ら
れている。三原色(R、G、B)の光を器官などの対象
物に当て、各色に対する反射光を電荷結合素子(CC
D)により受け、電気信号に変換する。得られた画像信
号は記憶装置に連続的に蓄積した後、処理装置によって
カラーテレビジョン信号に変換し、カラーモニタに表示
する。ここで、特に、上記特許第4,845,553号
に示されているように、緑色光に対しては全解像度の出
力(フル・レゾリューション・アウトプット、full res
olution output)を用いるが、赤および青色光に対する
CCDの全解像度出力はサブ・サンプリング(sub-samp
ling)を施し、これによって記憶装置の容量を削減す
る。
【0004】米国特許第4,685,451号では、上
記と同様、赤および青色光についてサブ・サンプリング
を行なうが、同一のタイミング内で実施する点が異な
る。これには、シアンおよび黄色のフィルタを用いた単
一のセンサを使用する。奇数番のフィールドで、緑色光
で照明されたセンサによって緑の全解像度画像を作成し
(シアンおよび黄色のフォトサイト(photosite )はと
もに緑色光に感応する)、偶数番のフィールドで、白色
(またはマゼンダ)光で照明されたセンサによって、よ
り解像度の低い青および赤の画像を作成する。(シアン
および黄色のフォトサイトはそれぞれ個別に、青色光お
よび赤色光に感応する。)光の入力方法としては、ファ
イバを用いて内視鏡のシース(sheath、さや)へ入力す
るか、あるいは、米国特許第4,074,306号に記
されているように、内視鏡のシース内に搭載可能な複数
の固体発光チップ(light emitting chips)を封止した
パッケージを用いて入力する。
記と同様、赤および青色光についてサブ・サンプリング
を行なうが、同一のタイミング内で実施する点が異な
る。これには、シアンおよび黄色のフィルタを用いた単
一のセンサを使用する。奇数番のフィールドで、緑色光
で照明されたセンサによって緑の全解像度画像を作成し
(シアンおよび黄色のフォトサイト(photosite )はと
もに緑色光に感応する)、偶数番のフィールドで、白色
(またはマゼンダ)光で照明されたセンサによって、よ
り解像度の低い青および赤の画像を作成する。(シアン
および黄色のフォトサイトはそれぞれ個別に、青色光お
よび赤色光に感応する。)光の入力方法としては、ファ
イバを用いて内視鏡のシース(sheath、さや)へ入力す
るか、あるいは、米国特許第4,074,306号に記
されているように、内視鏡のシース内に搭載可能な複数
の固体発光チップ(light emitting chips)を封止した
パッケージを用いて入力する。
【0005】
【発明が解決しようとする課題】しかしながら、サブ・
サンプリングによって解像度と記憶容量を削減した上述
のシステムをはじめ、従来システムでは、12MHz程
度のかなり高速のデータレートを必要とし、さらに、サ
ブ・サンプリングにより生ずる色のアーティファクト
(artifacts )のため画像品質が劣化するという欠点が
あった。従って、それらを改良したカメラの提供には、
画素レート(pixel rate)をより低減して消費電力を少
なくし、一方、フィールドレート(field rate)を増
し、アーティファクトのない動画像を作成することが必
要がある。
サンプリングによって解像度と記憶容量を削減した上述
のシステムをはじめ、従来システムでは、12MHz程
度のかなり高速のデータレートを必要とし、さらに、サ
ブ・サンプリングにより生ずる色のアーティファクト
(artifacts )のため画像品質が劣化するという欠点が
あった。従って、それらを改良したカメラの提供には、
画素レート(pixel rate)をより低減して消費電力を少
なくし、一方、フィールドレート(field rate)を増
し、アーティファクトのない動画像を作成することが必
要がある。
【0006】人間の目の機構はクロミナンス(chromina
nce 、色度)よりもルミナンス(luminance 、輝度)の
波長により敏感である。本発明の目的は、時間解像度
上、クロミナンスよりもルミナンスに対してより感度の
よい電子カメラを構成し、それによって動画像の描画を
改善することにある。
nce 、色度)よりもルミナンス(luminance 、輝度)の
波長により敏感である。本発明の目的は、時間解像度
上、クロミナンスよりもルミナンスに対してより感度の
よい電子カメラを構成し、それによって動画像の描画を
改善することにある。
【0007】また、本発明の目的は、クロミナンス解像
度を低下させることにより画素レートを低減した電子カ
メラを提供することにある。
度を低下させることにより画素レートを低減した電子カ
メラを提供することにある。
【0008】さらに、本発明の目的は、時間的な更新レ
ートを低下させることにより露出時間を増し、また、ビ
ニング・ファクタ(binning factor)を増加してより多
くの画素を統合し(sum together)、これらによって暗
い照明下の対象物における信号レベルを上げることにあ
る。
ートを低下させることにより露出時間を増し、また、ビ
ニング・ファクタ(binning factor)を増加してより多
くの画素を統合し(sum together)、これらによって暗
い照明下の対象物における信号レベルを上げることにあ
る。
【0009】
【課題を解決するための手段および作用】以上により、
本発明は、被写体に対し順次照明を行なう複数の光源
と、a)ルミナンス光ビームを発生するための2つ以上
の前記光源と、b)第1および第2の少なくとも2つの
クロミナンス光ビームを発生するための選択された前記
光源とを駆動し、あらかじめ定められたシーケンスによ
り、ルミナンス光ビームおよびクロミナンス光ビームを
発生する手段と、被写体から反射するルミナンスおよび
クロミナンス光ビームを受光し、一連のルミナンスおよ
びクロミナンス画像要素からなるカラー・シーケンシャ
ル信号を発生するよう配設したイメージセンサを有する
電子カラー・シーケンシャル・カメラを提供する。それ
によってカメラは、クロミナンスの時間解像度よりもル
ミナンスの時間解像度に対し、よりよく感応する。
本発明は、被写体に対し順次照明を行なう複数の光源
と、a)ルミナンス光ビームを発生するための2つ以上
の前記光源と、b)第1および第2の少なくとも2つの
クロミナンス光ビームを発生するための選択された前記
光源とを駆動し、あらかじめ定められたシーケンスによ
り、ルミナンス光ビームおよびクロミナンス光ビームを
発生する手段と、被写体から反射するルミナンスおよび
クロミナンス光ビームを受光し、一連のルミナンスおよ
びクロミナンス画像要素からなるカラー・シーケンシャ
ル信号を発生するよう配設したイメージセンサを有する
電子カラー・シーケンシャル・カメラを提供する。それ
によってカメラは、クロミナンスの時間解像度よりもル
ミナンスの時間解像度に対し、よりよく感応する。
【0010】さらに詳細には、本発明は、第1あるいは
第2のクロミナンス光ビームの交互のシーケンスと独立
した、ルミナンス光ビームのシーケンスの照明を含む。
イメージセンサは次に、クロミナンス画像要素(chromi
nance image components)の交互のシーケンスと独立し
たルミナンス画像要素(luminance image components)
からなるカラー・シーケンシャル信号を生成する。これ
によって、クロミナンス画像要素は、ルミナンス画像要
素より低い時間レートで捕捉され、結果として画素レー
トが低減される。
第2のクロミナンス光ビームの交互のシーケンスと独立
した、ルミナンス光ビームのシーケンスの照明を含む。
イメージセンサは次に、クロミナンス画像要素(chromi
nance image components)の交互のシーケンスと独立し
たルミナンス画像要素(luminance image components)
からなるカラー・シーケンシャル信号を生成する。これ
によって、クロミナンス画像要素は、ルミナンス画像要
素より低い時間レートで捕捉され、結果として画素レー
トが低減される。
【0011】さらに、イメージセンサは行と列に配列し
たフォトサイトによって構成する。そしてルミナンス画
像要素は全フォトサイトから作成し、一方、クロミナン
ス画像要素は、フォトサイトの選択された行および(ま
たは)列に対しビニング(binning )を行なって作成
し、画素値の数を減らす。これによって、クロミナンス
画像要素は、ルミナンス画像要素より低い空間解像度で
捕捉され、画素レートはさらに低減される。さらに、ビ
ニング処理を施すことにより、クロミナンス要素の信号
レベルが増し、このため低出力の光源の使用が可能とな
り、消費電力を減少させることができる。
たフォトサイトによって構成する。そしてルミナンス画
像要素は全フォトサイトから作成し、一方、クロミナン
ス画像要素は、フォトサイトの選択された行および(ま
たは)列に対しビニング(binning )を行なって作成
し、画素値の数を減らす。これによって、クロミナンス
画像要素は、ルミナンス画像要素より低い空間解像度で
捕捉され、画素レートはさらに低減される。さらに、ビ
ニング処理を施すことにより、クロミナンス要素の信号
レベルが増し、このため低出力の光源の使用が可能とな
り、消費電力を減少させることができる。
【0012】
【実施例】本発明は、その一部分を、センサの照明期間
中、1色以上の発光器(エミッタ、emitter )を点灯し
うることに依っている。これにより、カメラが、通常、
赤、緑、青色光の加重総和(weighted sum)により定義
されるルミナンス・フレームを捕捉することが可能とな
る。一般の情景を撮影するテレビジョンカメラの場合、
ルミナンスはおおよそ、緑色光60%、赤色光30%、
青色光10%により構成される。しかし、医用として身
体の腔内部へ適用する場合、対象物からの反射は、一般
の情景に比し赤色が強く青色が弱いため、上と異なる
赤、緑、青の加重とする方がより良好な画像が得られ
る。そこで本発明の実施においては、赤と緑を組み合わ
せた(combined)光によってルミナンスを供給する。他
の2つのカラー・シーケンシャル・フレームは、フレー
ム集積時間(インテグレーション・タイム、integratio
n time)あたり、1色のみ(例えば赤または青)を発光
する照明により、クロミナンスの解像度の提供に使用さ
れる。空間解像度に関しルミナンスの方がクロミナンス
より視覚的に重要であるだけでなく、時間解像度の点で
もルミナンスの方がクロミナンスより重要であるとの精
神物理学上の研究結果がある。従って、緑フレームの代
りにルミナンス・フレームを用いることにより、与えら
れた画素データレートに対し知覚される時間解像度が増
し、画像品質が向上する。さらに、ルミナンス・フレー
ムに対する赤および青のフレーム数を減らし、空間解像
度を下げることによって、画像品質を向上させながらカ
メラヘッドの出力データレートを低減させることができ
る。
中、1色以上の発光器(エミッタ、emitter )を点灯し
うることに依っている。これにより、カメラが、通常、
赤、緑、青色光の加重総和(weighted sum)により定義
されるルミナンス・フレームを捕捉することが可能とな
る。一般の情景を撮影するテレビジョンカメラの場合、
ルミナンスはおおよそ、緑色光60%、赤色光30%、
青色光10%により構成される。しかし、医用として身
体の腔内部へ適用する場合、対象物からの反射は、一般
の情景に比し赤色が強く青色が弱いため、上と異なる
赤、緑、青の加重とする方がより良好な画像が得られ
る。そこで本発明の実施においては、赤と緑を組み合わ
せた(combined)光によってルミナンスを供給する。他
の2つのカラー・シーケンシャル・フレームは、フレー
ム集積時間(インテグレーション・タイム、integratio
n time)あたり、1色のみ(例えば赤または青)を発光
する照明により、クロミナンスの解像度の提供に使用さ
れる。空間解像度に関しルミナンスの方がクロミナンス
より視覚的に重要であるだけでなく、時間解像度の点で
もルミナンスの方がクロミナンスより重要であるとの精
神物理学上の研究結果がある。従って、緑フレームの代
りにルミナンス・フレームを用いることにより、与えら
れた画素データレートに対し知覚される時間解像度が増
し、画像品質が向上する。さらに、ルミナンス・フレー
ムに対する赤および青のフレーム数を減らし、空間解像
度を下げることによって、画像品質を向上させながらカ
メラヘッドの出力データレートを低減させることができ
る。
【0013】図1および図2は、本発明の方法と従来の
方法との相違を簡略化して描いた図である。従来の方法
は、図1に示すように、赤、緑、青(それぞれR、G、
Bとも記す)のフレーム数(あるいは、インタレース形
式のビデオ・フォーマットにおけるR、G、Bのフィー
ルド数)および解像度が等しい。一方、本発明の時間解
像度の読み出しシーケンスは、図2のように、赤および
青のフレーム(以下、赤・青フレームと略記する)の2
倍のルミナンス・フレームがあることを示している。さ
らに、ルミナンス・フレームは、赤・青フレームに比
し、より高い空間解像度(2倍の行数、および行あたり
2倍の画素数)を有している。
方法との相違を簡略化して描いた図である。従来の方法
は、図1に示すように、赤、緑、青(それぞれR、G、
Bとも記す)のフレーム数(あるいは、インタレース形
式のビデオ・フォーマットにおけるR、G、Bのフィー
ルド数)および解像度が等しい。一方、本発明の時間解
像度の読み出しシーケンスは、図2のように、赤および
青のフレーム(以下、赤・青フレームと略記する)の2
倍のルミナンス・フレームがあることを示している。さ
らに、ルミナンス・フレームは、赤・青フレームに比
し、より高い空間解像度(2倍の行数、および行あたり
2倍の画素数)を有している。
【0014】図3は、本発明による電子的カラー・シー
ケンス・カメラのブロック図であり、基本装置22とデ
ィジタル・データリンク24によって接続したカメラヘ
ッド20を示す。本発明は特定の応用のみに限定される
ものではないが、ここでは、医療への応用である内視鏡
の長い挿入部分に用いるカラー・シーケンシャル・カメ
ラヘッド20を示している。挿入部分(図示しないディ
ジタル・データリンク24を含む)が身体腔内に挿入さ
れ、カメラヘッド20が画像を作成する。画像は基本装
置22に送出され、それをモニタ(図示しない)により
担当医が観察する。
ケンス・カメラのブロック図であり、基本装置22とデ
ィジタル・データリンク24によって接続したカメラヘ
ッド20を示す。本発明は特定の応用のみに限定される
ものではないが、ここでは、医療への応用である内視鏡
の長い挿入部分に用いるカラー・シーケンシャル・カメ
ラヘッド20を示している。挿入部分(図示しないディ
ジタル・データリンク24を含む)が身体腔内に挿入さ
れ、カメラヘッド20が画像を作成する。画像は基本装
置22に送出され、それをモニタ(図示しない)により
担当医が観察する。
【0015】カメラヘッド20には、R、G、Bの発光
素子(LED)26a,26b,26cがLED制御素
子28によって駆動され、カメラヘッド20から被写体
30に対しR、G、Bの光ビームを放射する。閉鎖空間
にある被写体30はR、G、Bの光ビームのみにより照
明される。被写体30から反射するR、G、Bの光は、
レンズ32により集光され、イメージセンサ34の方向
に進む。本発明に有用なセンサの商品例として、図4に
示す、コダックKAI−310CCDイメージセンサが
ある。このセンサは、垂直方向の読み出しレジスタ37
に接続されたフォトダイオード35をもつ、インタライ
ン・トランスファCCD(interline transfer CCD)素
子である。(図4にその部分を示す。)CCDは非イン
タレース方式のプログレッシブ・スキャン(progressiv
e scan)アーキテクチャを有し、各画素は各フレーム読
み出し時間中に、垂直レジスタ37に移送される。この
センサは、484のアクティブな行と、各行あたり64
8のアクティブなフォトサイト、および1組の読み出し
レジスタ36a,36bを有する。CCDはデュアル
(dual)信号出力が可能であるが、この実施例では、読
み出しレジスタ36aのみを用いて単一レジスタのビデ
オ信号を出力している。CCDは他に、ブラック(光を
遮蔽された)フォトサイトを垂直および水平方向に有
し、垂直サイクルあたり694の水平クロックをもつ合
計496の垂直サイクルが各画像フレームの転送に用い
られる。
素子(LED)26a,26b,26cがLED制御素
子28によって駆動され、カメラヘッド20から被写体
30に対しR、G、Bの光ビームを放射する。閉鎖空間
にある被写体30はR、G、Bの光ビームのみにより照
明される。被写体30から反射するR、G、Bの光は、
レンズ32により集光され、イメージセンサ34の方向
に進む。本発明に有用なセンサの商品例として、図4に
示す、コダックKAI−310CCDイメージセンサが
ある。このセンサは、垂直方向の読み出しレジスタ37
に接続されたフォトダイオード35をもつ、インタライ
ン・トランスファCCD(interline transfer CCD)素
子である。(図4にその部分を示す。)CCDは非イン
タレース方式のプログレッシブ・スキャン(progressiv
e scan)アーキテクチャを有し、各画素は各フレーム読
み出し時間中に、垂直レジスタ37に移送される。この
センサは、484のアクティブな行と、各行あたり64
8のアクティブなフォトサイト、および1組の読み出し
レジスタ36a,36bを有する。CCDはデュアル
(dual)信号出力が可能であるが、この実施例では、読
み出しレジスタ36aのみを用いて単一レジスタのビデ
オ信号を出力している。CCDは他に、ブラック(光を
遮蔽された)フォトサイトを垂直および水平方向に有
し、垂直サイクルあたり694の水平クロックをもつ合
計496の垂直サイクルが各画像フレームの転送に用い
られる。
【0016】本発明によれば、ルミナンス画像要素に対
するセンサの集積時間中、赤および緑の発光素子26a
および26bを駆動することによって、ルミナンス光ビ
ームを作成する。次に、赤および青の発光素子26a,
26cを順次駆動し、クロミナンス画像要素に対するセ
ンサの集積時間中、赤および青のクロミナンス光ビーム
を作成する。赤および緑のLEDを点灯することによ
り、ルミナンス画像要素の信号レベルは相当に向上し、
SN比が改善されることに注目されたい。現在入手でき
る青のLEDは効率が低いため、青のLEDはルミナン
ス画像要素の場合には点灯させず、電力消費を節約す
る。
するセンサの集積時間中、赤および緑の発光素子26a
および26bを駆動することによって、ルミナンス光ビ
ームを作成する。次に、赤および青の発光素子26a,
26cを順次駆動し、クロミナンス画像要素に対するセ
ンサの集積時間中、赤および青のクロミナンス光ビーム
を作成する。赤および緑のLEDを点灯することによ
り、ルミナンス画像要素の信号レベルは相当に向上し、
SN比が改善されることに注目されたい。現在入手でき
る青のLEDは効率が低いため、青のLEDはルミナン
ス画像要素の場合には点灯させず、電力消費を節約す
る。
【0017】センサ34のクロックおよびバイアス回路
38は、タイミング回路40によりクロックされ、セン
サのすべての画素をクロックし、あるいは全画素を例え
ば242行、324画素/行の低解像度画像にビニング
する(統合する)ことができる。図5および図6はそれ
ぞれ、通常動作および2×2のビニング動作に対するタ
イムチャートである。ビニング動作の場合、フォトサイ
トの電荷はまず垂直方向に、ついで水平方向に統合さ
れ、隣接する4つのフォトサイトからの信号電荷を含む
画素値を生成する。通常のタイミングにおいては、信号
電荷は、フレーム・タイミング100の転送パルス期間
102の間に、フォトサイト35から垂直読み出しレジ
スタ37に移送される。図5に示す行タイミング波形1
10により、行が1行単位で水平レジスタ36に移さ
れ、図5の画素タイミング波形120により、画素がレ
ジスタ36から取り出される。
38は、タイミング回路40によりクロックされ、セン
サのすべての画素をクロックし、あるいは全画素を例え
ば242行、324画素/行の低解像度画像にビニング
する(統合する)ことができる。図5および図6はそれ
ぞれ、通常動作および2×2のビニング動作に対するタ
イムチャートである。ビニング動作の場合、フォトサイ
トの電荷はまず垂直方向に、ついで水平方向に統合さ
れ、隣接する4つのフォトサイトからの信号電荷を含む
画素値を生成する。通常のタイミングにおいては、信号
電荷は、フレーム・タイミング100の転送パルス期間
102の間に、フォトサイト35から垂直読み出しレジ
スタ37に移送される。図5に示す行タイミング波形1
10により、行が1行単位で水平レジスタ36に移さ
れ、図5の画素タイミング波形120により、画素がレ
ジスタ36から取り出される。
【0018】電荷の垂直方向の統合即ち「ビン(bin
)」を行なうために、図6の「行タイミング」部分2
10の波形部分212に示すように、2つの行が、1行
あたりV1およびV2の高低2回、水平読み出しレジス
タ36aに移送される。これは、図5の「行タイミン
グ」部分110の波形部分112に示す、行あたり1回
とは異なっている。電荷を水平方向に統合即ち「ビン」
を行なうために、第2の画素が読み出される度に、フロ
ーティング・ディフュージョン(floating diffusion)
の出力がリセットされ、それによって2つの水平画素が
イメージセンサ34の出力増幅器50の出力ディフュー
ジョン上に累積される(図4参照)。これら2つの水平
画素は、隣接する垂直2行からの電荷を含んでおり、出
力信号レベルは、図5に示すタイミング波形を用いる
「通常動作」(即ちビンを行なわない動作)の信号レベ
ルに対し、公称値で4倍となる。
)」を行なうために、図6の「行タイミング」部分2
10の波形部分212に示すように、2つの行が、1行
あたりV1およびV2の高低2回、水平読み出しレジス
タ36aに移送される。これは、図5の「行タイミン
グ」部分110の波形部分112に示す、行あたり1回
とは異なっている。電荷を水平方向に統合即ち「ビン」
を行なうために、第2の画素が読み出される度に、フロ
ーティング・ディフュージョン(floating diffusion)
の出力がリセットされ、それによって2つの水平画素が
イメージセンサ34の出力増幅器50の出力ディフュー
ジョン上に累積される(図4参照)。これら2つの水平
画素は、隣接する垂直2行からの電荷を含んでおり、出
力信号レベルは、図5に示すタイミング波形を用いる
「通常動作」(即ちビンを行なわない動作)の信号レベ
ルに対し、公称値で4倍となる。
【0019】「ビニング」のための画素タイミングにつ
いては、図6の「画素タイミング」部分220に示すよ
うに、出力シーケンスはまず、時刻222において、φ
Rサイクルの高低によってフローティング・ディフュー
ジョン出力をリセットし、それにより出力増幅器50の
出力ディフュージョンを、リセット・ドレイン電圧(dr
ain voltage )VRDにより制御される公称電圧にセッ
トする。次に、時刻224において、相関二重サンプリ
ング回路(correlated double sampling circuit)52
(図10参照)の高低を制御する「クランプ信号」のサ
イクルによって、上記のリセットレベルにクランプす
る。隣接する2個の水平画素からの電荷は、時刻226
および228において、それぞれφH1の立ち上がりに
より、フローティング・ディフュージョン出力に移送さ
れる。第2の水平画素の電荷が出力ディフュージョンに
転送された後、時刻230の「サンプル信号」によっ
て、出力ディフュージョンの電圧がサンプルされる。こ
のサンプル値232が、垂直2個×水平2個の画素の
「ビン」統合値である。
いては、図6の「画素タイミング」部分220に示すよ
うに、出力シーケンスはまず、時刻222において、φ
Rサイクルの高低によってフローティング・ディフュー
ジョン出力をリセットし、それにより出力増幅器50の
出力ディフュージョンを、リセット・ドレイン電圧(dr
ain voltage )VRDにより制御される公称電圧にセッ
トする。次に、時刻224において、相関二重サンプリ
ング回路(correlated double sampling circuit)52
(図10参照)の高低を制御する「クランプ信号」のサ
イクルによって、上記のリセットレベルにクランプす
る。隣接する2個の水平画素からの電荷は、時刻226
および228において、それぞれφH1の立ち上がりに
より、フローティング・ディフュージョン出力に移送さ
れる。第2の水平画素の電荷が出力ディフュージョンに
転送された後、時刻230の「サンプル信号」によっ
て、出力ディフュージョンの電圧がサンプルされる。こ
のサンプル値232が、垂直2個×水平2個の画素の
「ビン」統合値である。
【0020】タイミング回路40はまた、LED制御素
子28を通じて発光素子26a,26b,26cを制御
し、ディジタル・データリンク24に対する同期信号を
供給する。イメージセンサ34上の出力増幅器50の出
力は、図10にも示してある相関二重サンプリング回路
(CDS)52、およびA−D変換器(A/D)54に
より処理される。A/Dの出力は露出レベル決定回路4
2に供給され、また、ディジタル・データリンク24を
通じて基本装置22に送出される。基本装置22では、
カラー・シーケンシャル・ディジタル画像フレームは、
ルミナンス(Y)、赤(R)および青(B)フレームの
蓄積部56、58、60に独立に蓄積される。Rおよび
Bフレームは、Yフレームの1/2の行数と1/2の画
素数をもつのみであり、より小さいディジタルメモリを
用いることができる。カメラヘッド20から受信する最
終のY、RおよびBフレームは、通常のNTSC走査形
式(合計525行、60フィールド/秒)のカラー画像
の作成に用いられる。これは、ルミナンス(Y)およ
び、減算器62および64により、R画像およびB画像
から、平均回路66で生成された蓄積画像Yの2×2の
画素の平均値を減算して得られる色差信号(R−Yおよ
びB−Y)を作成して求められる。これらの信号を結合
し(図示しない後続の回路による)、複合NTSC信号
またはS−ビデオ信号を作成するか、あるいはマトリッ
クス化してNTSC画像のRGB要素を作成する。この
処理は従来からよく知られる技術による。
子28を通じて発光素子26a,26b,26cを制御
し、ディジタル・データリンク24に対する同期信号を
供給する。イメージセンサ34上の出力増幅器50の出
力は、図10にも示してある相関二重サンプリング回路
(CDS)52、およびA−D変換器(A/D)54に
より処理される。A/Dの出力は露出レベル決定回路4
2に供給され、また、ディジタル・データリンク24を
通じて基本装置22に送出される。基本装置22では、
カラー・シーケンシャル・ディジタル画像フレームは、
ルミナンス(Y)、赤(R)および青(B)フレームの
蓄積部56、58、60に独立に蓄積される。Rおよび
Bフレームは、Yフレームの1/2の行数と1/2の画
素数をもつのみであり、より小さいディジタルメモリを
用いることができる。カメラヘッド20から受信する最
終のY、RおよびBフレームは、通常のNTSC走査形
式(合計525行、60フィールド/秒)のカラー画像
の作成に用いられる。これは、ルミナンス(Y)およ
び、減算器62および64により、R画像およびB画像
から、平均回路66で生成された蓄積画像Yの2×2の
画素の平均値を減算して得られる色差信号(R−Yおよ
びB−Y)を作成して求められる。これらの信号を結合
し(図示しない後続の回路による)、複合NTSC信号
またはS−ビデオ信号を作成するか、あるいはマトリッ
クス化してNTSC画像のRGB要素を作成する。この
処理は従来からよく知られる技術による。
【0021】図3の露出決定回路42は、タイミング回
路40およびLED制御素子28との協調動作によっ
て、適切な露出を供給する。内視鏡への応用の場合、対
象物から反射する光のレベルは、対象物とカメラヘッド
20内の光源26a,26b,26cとの間の距離に依
存する。光源と対象物間の距離が増すと、照明レベルは
著しく減少する。従って、センサの露出を制御し、撮影
したい距離範囲にわたり適切な画像を得られるようにす
る必要がある。露出レベル決定回路42は、特定のフレ
ームの露出を、例えばそのフレームの画素の平均ディジ
タルコード値を計算することによって決定する。あるい
は、コードレベルのピーク値を測定することにより行な
ってもよい。次にこの回路は、レベルを基準レベルと比
較し、上記の平均あるいはピーク信号レベル値が許容し
うる範囲にあるか否かを判定する。もしレベルが所望範
囲外であれば、同一形式(ルミナンス、赤または青)の
次のフレームの間に露出レベルを調整する。
路40およびLED制御素子28との協調動作によっ
て、適切な露出を供給する。内視鏡への応用の場合、対
象物から反射する光のレベルは、対象物とカメラヘッド
20内の光源26a,26b,26cとの間の距離に依
存する。光源と対象物間の距離が増すと、照明レベルは
著しく減少する。従って、センサの露出を制御し、撮影
したい距離範囲にわたり適切な画像を得られるようにす
る必要がある。露出レベル決定回路42は、特定のフレ
ームの露出を、例えばそのフレームの画素の平均ディジ
タルコード値を計算することによって決定する。あるい
は、コードレベルのピーク値を測定することにより行な
ってもよい。次にこの回路は、レベルを基準レベルと比
較し、上記の平均あるいはピーク信号レベル値が許容し
うる範囲にあるか否かを判定する。もしレベルが所望範
囲外であれば、同一形式(ルミナンス、赤または青)の
次のフレームの間に露出レベルを調整する。
【0022】図11は、イメージセンサ34の読み出し
シーケンスと、通常の距離にある対象物に対しR、G、
Bの各LED26a,26b,26cを制御するための
信号を示している。信号R LED、G LED、B
LEDは、各LEDが点灯(オン)状態のとき高位、滅
火(オフ)状態のとき低位である。ここで、読み出しの
カラー・シーケンスは照明のカラー・シーケンスより1
フレーム周期分の遅れがあることに留意されたい。例え
ば、赤のLED26aをオンとすることによって赤フレ
ームの露出を完了する間に、センサからルミナンス・フ
レームを読み出す。次に、赤のLED26aと緑のLE
D26bをオンとしてルミナンス・フレームの露出を行
なう間に、赤フレームを読み出す。次に、青のLED2
6cをオンとして青フレームの露出を行なう間に、ルミ
ナンス・フレームを読み出す。また、ルミナンス・フレ
ームの読み出し時間は、赤フレームあるいは青フレーム
の読み出し時間の約2倍であることにも留意されたい。
これは、赤,青の信号を読み出すのに2×2の「ビニン
グ」が行なわれるためである。図6の時間長212に示
すように、水平読み出しレジスタ36aで2行を集積す
るため、2×2のビニングを用いた水平行の読み出し周
期は、フレーム・タイミング波形200に示すように、
248回しかない。これに対し、ルミナンス・フレーム
の読み出しに用いられる通常の読み出しモードでは、フ
レーム・タイミング波形100に示したように、496
回の読み出し周期が存在する。
シーケンスと、通常の距離にある対象物に対しR、G、
Bの各LED26a,26b,26cを制御するための
信号を示している。信号R LED、G LED、B
LEDは、各LEDが点灯(オン)状態のとき高位、滅
火(オフ)状態のとき低位である。ここで、読み出しの
カラー・シーケンスは照明のカラー・シーケンスより1
フレーム周期分の遅れがあることに留意されたい。例え
ば、赤のLED26aをオンとすることによって赤フレ
ームの露出を完了する間に、センサからルミナンス・フ
レームを読み出す。次に、赤のLED26aと緑のLE
D26bをオンとしてルミナンス・フレームの露出を行
なう間に、赤フレームを読み出す。次に、青のLED2
6cをオンとして青フレームの露出を行なう間に、ルミ
ナンス・フレームを読み出す。また、ルミナンス・フレ
ームの読み出し時間は、赤フレームあるいは青フレーム
の読み出し時間の約2倍であることにも留意されたい。
これは、赤,青の信号を読み出すのに2×2の「ビニン
グ」が行なわれるためである。図6の時間長212に示
すように、水平読み出しレジスタ36aで2行を集積す
るため、2×2のビニングを用いた水平行の読み出し周
期は、フレーム・タイミング波形200に示すように、
248回しかない。これに対し、ルミナンス・フレーム
の読み出しに用いられる通常の読み出しモードでは、フ
レーム・タイミング波形100に示したように、496
回の読み出し周期が存在する。
【0023】図11では、照明時間と読み出し時間は等
しい。これは、通常の距離にある対象物に対して、適切
な露出となる。しかし、近距離の対象物に対し照明時間
を読み出し時間と同じにすると、対象物からの反射光の
量が大となる。従って、この場合には図12に示すよう
に照明時間を短縮する。図12において、LEDはセン
サの読み出し時間の一部分しか照明されていない。これ
によって、カメラヘッドの電力消費が減少するという利
点も生ずる。
しい。これは、通常の距離にある対象物に対して、適切
な露出となる。しかし、近距離の対象物に対し照明時間
を読み出し時間と同じにすると、対象物からの反射光の
量が大となる。従って、この場合には図12に示すよう
に照明時間を短縮する。図12において、LEDはセン
サの読み出し時間の一部分しか照明されていない。これ
によって、カメラヘッドの電力消費が減少するという利
点も生ずる。
【0024】照明レベルは、光源と対象物との距離の2
乗に反比例するので、遠方の距離にある対象物からの反
射光は非常に弱くなる。このような場合、従来システム
では、信号を電気的に増幅して利得を得る方法を採るも
のもある。しかし、これによってセンサのノイズも増幅
されてしまうため、得られる画像はノイズが多くなる。
他の従来システムでは、照明光源の電流を増加させるこ
とによって照明レベルを向上させているが、この方法で
は遺憾ながら、カメラヘッドの電力消費が増し、温度上
昇も生ずる。本発明では、遠方の対象物に対してフレー
ム・レートを低下させ、それによってセンサの露出を増
加させる。この方法は、図13に示すように、各フレー
ムに対する露出時間が長くなる。それぞれの照明時間
は、図11の場合の2倍となっていることに注目された
い。従ってセンサからの信号レベルが2倍となる。これ
は、適切なLEDが照明されている間に、フレームの各
読み出しの間に「休眠(ドーマント、dormant )」時間
を設けることによって達成される。「休眠」時間によっ
てフレーム・レートは減少するが、遠方の対象物は近く
の対象より動きが相対的に小さいため、画像の劣化は少
ない。露出レベルの増大によって画像のSN比が増し、
品質が著しく向上する。
乗に反比例するので、遠方の距離にある対象物からの反
射光は非常に弱くなる。このような場合、従来システム
では、信号を電気的に増幅して利得を得る方法を採るも
のもある。しかし、これによってセンサのノイズも増幅
されてしまうため、得られる画像はノイズが多くなる。
他の従来システムでは、照明光源の電流を増加させるこ
とによって照明レベルを向上させているが、この方法で
は遺憾ながら、カメラヘッドの電力消費が増し、温度上
昇も生ずる。本発明では、遠方の対象物に対してフレー
ム・レートを低下させ、それによってセンサの露出を増
加させる。この方法は、図13に示すように、各フレー
ムに対する露出時間が長くなる。それぞれの照明時間
は、図11の場合の2倍となっていることに注目された
い。従ってセンサからの信号レベルが2倍となる。これ
は、適切なLEDが照明されている間に、フレームの各
読み出しの間に「休眠(ドーマント、dormant )」時間
を設けることによって達成される。「休眠」時間によっ
てフレーム・レートは減少するが、遠方の対象物は近く
の対象より動きが相対的に小さいため、画像の劣化は少
ない。露出レベルの増大によって画像のSN比が増し、
品質が著しく向上する。
【0025】極めて微小な光レベルとなる遠方の対象物
に対し、ルミナンス・フレームに2×2のビニングを施
し、またRとBのフレームに4×4のビニングを施すこ
とによって、信号レベルをさらに上げることができる。
これによって画像細部の量は減少するが、信号レベルは
さらに4倍となる。ノイズの減少は画像の鮮明さの低下
よりもはるかに知覚されやすいので、画像全体の品質は
改善される。LEDの照明時間、フレーム・レート、ビ
ニングの量を調整するほかに、従来行なわれているよう
に、露出レベル決定回路42によってCDS回路52内
の増幅器の電気的利得を調整することができる。
に対し、ルミナンス・フレームに2×2のビニングを施
し、またRとBのフレームに4×4のビニングを施すこ
とによって、信号レベルをさらに上げることができる。
これによって画像細部の量は減少するが、信号レベルは
さらに4倍となる。ノイズの減少は画像の鮮明さの低下
よりもはるかに知覚されやすいので、画像全体の品質は
改善される。LEDの照明時間、フレーム・レート、ビ
ニングの量を調整するほかに、従来行なわれているよう
に、露出レベル決定回路42によってCDS回路52内
の増幅器の電気的利得を調整することができる。
【0026】図7は基本装置22の第2の実施例を示し
ている。基本装置22は、1つのフレームから次に移る
ルミナンスの運動量を検出するY運動検出器68を有す
る。Y運動検出器68はルミナンス・フレーム全体の平
均的な運動(例えばカメラぶれによる)あるいはルミナ
ンス・フレーム内の小さいブロック(例えば16×16
画素ブロック)の運動を検出し、ルミナンスの運動ベク
トルを発生することができる。ルミナンス運動ベクトル
は、赤および青の蓄積データを読み出すのに用いるアド
レス発生器70のタイミングの調整に使用し、これによ
って、これらの画像平面をルミナンスの運動と同一の方
向に適切に遷移させる。
ている。基本装置22は、1つのフレームから次に移る
ルミナンスの運動量を検出するY運動検出器68を有す
る。Y運動検出器68はルミナンス・フレーム全体の平
均的な運動(例えばカメラぶれによる)あるいはルミナ
ンス・フレーム内の小さいブロック(例えば16×16
画素ブロック)の運動を検出し、ルミナンスの運動ベク
トルを発生することができる。ルミナンス運動ベクトル
は、赤および青の蓄積データを読み出すのに用いるアド
レス発生器70のタイミングの調整に使用し、これによ
って、これらの画像平面をルミナンスの運動と同一の方
向に適切に遷移させる。
【0027】運動ベクトル(motion vector )を決定す
るに適した方法は、ヒンツ(Hintz)らにより1993
年9月9日発行され、イーストマン・コダック社に譲渡
された米国特許出願第08/118,897号「メソッ
ド・フォア・プロセッシング・カラー・イメージ・レコ
ーズ・サブジェクト・ツー・ミスレジストレーション
(Method for processing color image records subjec
t to misregistration)」に記述されている。ヒンツ
は、1つの部分(サブセクション、subsection)は赤の
画像レコードから、第2の部分は緑の画像レコードから
なる画像の2つの部分を相関させる方法を示している。
2つの部分に対する相関処理の結果、2つの画像平面の
間の水平および垂直のミスレジストレーション(misreg
istration )を表わす整数の画素シフト値(pixel shif
t value )が得られる。同じ方法を、2つの異なる時間
における2つのルミナンス画像の間の運動ベクトルの計
算にも使用することができる。この場合には、2つのル
ミナンス・フレームに対する相関処理の結果、2つのル
ミナンス画像の間の水平および垂直の運動を表わす画素
シフト値が得られる。この画素シフト値が「運動ベクト
ル」であって、2つのルミナンス・フレーム間に生ずる
画像の運動の大きさと方向を表わす。赤、青の平面を運
動ベクトルの方向にシフトすることによって、シーケン
シャルなカラーの赤・青フレームおよびルミナンス・フ
レームの間に生ずる運動に起因するミスレジストレーシ
ョンを減少させることができる。
るに適した方法は、ヒンツ(Hintz)らにより1993
年9月9日発行され、イーストマン・コダック社に譲渡
された米国特許出願第08/118,897号「メソッ
ド・フォア・プロセッシング・カラー・イメージ・レコ
ーズ・サブジェクト・ツー・ミスレジストレーション
(Method for processing color image records subjec
t to misregistration)」に記述されている。ヒンツ
は、1つの部分(サブセクション、subsection)は赤の
画像レコードから、第2の部分は緑の画像レコードから
なる画像の2つの部分を相関させる方法を示している。
2つの部分に対する相関処理の結果、2つの画像平面の
間の水平および垂直のミスレジストレーション(misreg
istration )を表わす整数の画素シフト値(pixel shif
t value )が得られる。同じ方法を、2つの異なる時間
における2つのルミナンス画像の間の運動ベクトルの計
算にも使用することができる。この場合には、2つのル
ミナンス・フレームに対する相関処理の結果、2つのル
ミナンス画像の間の水平および垂直の運動を表わす画素
シフト値が得られる。この画素シフト値が「運動ベクト
ル」であって、2つのルミナンス・フレーム間に生ずる
画像の運動の大きさと方向を表わす。赤、青の平面を運
動ベクトルの方向にシフトすることによって、シーケン
シャルなカラーの赤・青フレームおよびルミナンス・フ
レームの間に生ずる運動に起因するミスレジストレーシ
ョンを減少させることができる。
【0028】シフトの量は、赤・青フレームとルミナン
ス・フレームが捕捉される相対的な時間によって異な
る。例えば、毎秒あたり20個のルミナンス・フレーム
と、それぞれ10個の赤フレームおよび青フレームを設
け、ルミナンス・フレームを赤フレームの直後におく場
合、赤のレコードではルミナンス運動ベクトルの大きさ
の1/2倍をシフトし、青のレコードではルミナンス運
動ベクトルの大きさの3/2倍をシフトすべきである。
例えばカメラの移動により生ずる運動のように、画像
全体について一様な運動である場合には、単一の運動ベ
クトルによって画像全体を修正することができよう。こ
れは通常、内視鏡に応用する場合に当てはまる。しか
し、画像の部分によって運動が異なる場合には、異なる
画像部分についてそれぞれ運動ベクトルを計算すること
ができる。カラーのミスレジストレーション誤差を減ら
すため、蓄積した赤・青フレームに対して「ワープ(wa
rp)」を行なう。パーカーらによって1991年7月1
0日に発行され、イーストマン・コダック・カンパニー
に譲渡された、米国特許出願第07/712,865号
「クロス・コリレーション・イメージセンサ・アライン
メント・システム(Cross correration image sensor a
lignment system )」には、画像の各部分毎にシフト量
を変化させることのできるミスレジストレーション修正
回路の記述がある。その場合、修正信号入力として、運
動ベクトル位置(location motion vectors )を用い
る。
ス・フレームが捕捉される相対的な時間によって異な
る。例えば、毎秒あたり20個のルミナンス・フレーム
と、それぞれ10個の赤フレームおよび青フレームを設
け、ルミナンス・フレームを赤フレームの直後におく場
合、赤のレコードではルミナンス運動ベクトルの大きさ
の1/2倍をシフトし、青のレコードではルミナンス運
動ベクトルの大きさの3/2倍をシフトすべきである。
例えばカメラの移動により生ずる運動のように、画像
全体について一様な運動である場合には、単一の運動ベ
クトルによって画像全体を修正することができよう。こ
れは通常、内視鏡に応用する場合に当てはまる。しか
し、画像の部分によって運動が異なる場合には、異なる
画像部分についてそれぞれ運動ベクトルを計算すること
ができる。カラーのミスレジストレーション誤差を減ら
すため、蓄積した赤・青フレームに対して「ワープ(wa
rp)」を行なう。パーカーらによって1991年7月1
0日に発行され、イーストマン・コダック・カンパニー
に譲渡された、米国特許出願第07/712,865号
「クロス・コリレーション・イメージセンサ・アライン
メント・システム(Cross correration image sensor a
lignment system )」には、画像の各部分毎にシフト量
を変化させることのできるミスレジストレーション修正
回路の記述がある。その場合、修正信号入力として、運
動ベクトル位置(location motion vectors )を用い
る。
【0029】運動を予測する方法としては他にも多くの
方法がある。下記の論文に記されているJ.K.アガー
ワル(Aggarwal)およびN.ナンダクマール(Nandhaku
mar)による方法を用いることができる。即ち、「ザ・
プロシーディングス・オブ・ザ・IEEE(The Procee
dings of the IEEE )」誌の第76卷、1988年8月
号の917頁〜935頁に掲載された「オン・ザ・コン
ピューテーション・オブ・モーション・フロム・シーケ
ンシズ・オブ・イメージズ(On the computation of mo
tion from sequences of images )」、および同誌第1
36巻、1989年12月号のパート1、397頁〜4
04頁に掲載の「レビュー・オブ・モーション・アナリ
シス・テクニークス(Review of motion analysis tech
niques)」である。
方法がある。下記の論文に記されているJ.K.アガー
ワル(Aggarwal)およびN.ナンダクマール(Nandhaku
mar)による方法を用いることができる。即ち、「ザ・
プロシーディングス・オブ・ザ・IEEE(The Procee
dings of the IEEE )」誌の第76卷、1988年8月
号の917頁〜935頁に掲載された「オン・ザ・コン
ピューテーション・オブ・モーション・フロム・シーケ
ンシズ・オブ・イメージズ(On the computation of mo
tion from sequences of images )」、および同誌第1
36巻、1989年12月号のパート1、397頁〜4
04頁に掲載の「レビュー・オブ・モーション・アナリ
シス・テクニークス(Review of motion analysis tech
niques)」である。
【0030】図8に、RGB出力信号を供給する簡易な
処理を行なう、基本装置22の第3の実施例を示してい
る。ルミナンス蓄積部(Yフレーム蓄積部)56の出力
(R+G、赤および緑の両LEDの点灯により得られ
る)は、平均化回路66内で2×2画素の群で平均化
し、Y_低(lows)信号を作成する。Rの蓄積部58の
出力は、減算器72においてY_低信号から減算し、G
_低信号を作成する。Y_高(highs )信号(ルミナン
ス詳細信号)は、減算器74において、蓄積されたY信
号からY_低信号を減算することにより作成する。この
「ルミナンス詳細」Y_高信号は、加算器76,78,
80においてRGB低信号に加算し、高精細RGB信号
を作成する。図7に示した運動検出方法は、このRGB
処理においても同様に用いられる。
処理を行なう、基本装置22の第3の実施例を示してい
る。ルミナンス蓄積部(Yフレーム蓄積部)56の出力
(R+G、赤および緑の両LEDの点灯により得られ
る)は、平均化回路66内で2×2画素の群で平均化
し、Y_低(lows)信号を作成する。Rの蓄積部58の
出力は、減算器72においてY_低信号から減算し、G
_低信号を作成する。Y_高(highs )信号(ルミナン
ス詳細信号)は、減算器74において、蓄積されたY信
号からY_低信号を減算することにより作成する。この
「ルミナンス詳細」Y_高信号は、加算器76,78,
80においてRGB低信号に加算し、高精細RGB信号
を作成する。図7に示した運動検出方法は、このRGB
処理においても同様に用いられる。
【0031】図9に、クロミナンスの4対1の時間・空
間サブサンプリングを用いた、本発明の第4の実施例を
示す。R信号およびB信号について、各方向に4対1の
ビン(平均化)を行ない、121×162画素の画像を
作成する。各RおよびB画像に対し4つの全解像度のY
画像があり、R画像およびB画像は時間的に隣接してい
る。
間サブサンプリングを用いた、本発明の第4の実施例を
示す。R信号およびB信号について、各方向に4対1の
ビン(平均化)を行ない、121×162画素の画像を
作成する。各RおよびB画像に対し4つの全解像度のY
画像があり、R画像およびB画像は時間的に隣接してい
る。
【0032】以上の説明から明らかなように、本発明の
様相は、例示された特定の詳細に限定されるものではな
く、従って、本分野に通じた技術者による他の修正ない
し応用が予想される。よって、本請求項は、本発明の精
神および範囲から逸脱することなく、かかる修正および
応用を網羅することを企図している。
様相は、例示された特定の詳細に限定されるものではな
く、従って、本分野に通じた技術者による他の修正ない
し応用が予想される。よって、本請求項は、本発明の精
神および範囲から逸脱することなく、かかる修正および
応用を網羅することを企図している。
【0033】
【発明の効果】本発明の利点は、人間の目はクロミナン
スの波長よりもルミナンスの波長により敏感であり、ク
ロミナンスの解像度を減少させても適切に見えることか
ら、目の機構に合わせたルミナンスの放射を行なうこと
にある。その結果、より良好な時間解像度をもち、即ち
より良好な動画像を作成することができ、かつ、カラー
のエッジのアーティファクトが少なく、カメラヘッドの
データレートが小さい電子シーケンシャル・カメラの提
供が可能となる。
スの波長よりもルミナンスの波長により敏感であり、ク
ロミナンスの解像度を減少させても適切に見えることか
ら、目の機構に合わせたルミナンスの放射を行なうこと
にある。その結果、より良好な時間解像度をもち、即ち
より良好な動画像を作成することができ、かつ、カラー
のエッジのアーティファクトが少なく、カメラヘッドの
データレートが小さい電子シーケンシャル・カメラの提
供が可能となる。
【図1】 従来の方法による、フレームの時間的読み出
し順序および空間解像度を示す図である。
し順序および空間解像度を示す図である。
【図2】 本発明の方法による、フレームの時間的読み
出し順序および空間解像度を示す図である。
出し順序および空間解像度を示す図である。
【図3】 本発明のカメラヘッドおよび基本装置のブロ
ック図である。
ック図である。
【図4】 図3に示したカメラヘッドに使用するイメー
ジセンサの図である。
ジセンサの図である。
【図5】 図4に示したセンサの、「通常」動作に対す
るタイミング波形を示す図である。
るタイミング波形を示す図である。
【図6】 図4に示したセンサの、2×2のビニング動
作に対するタイミング波形を示す図である。
作に対するタイミング波形を示す図である。
【図7】 ルミナンスの運動ベクトルを用いて、蓄積さ
れたクロミナンスの要素をシフトする機能を含む基本装
置を有する、本発明の第2の実施例を示す図である。
れたクロミナンスの要素をシフトする機能を含む基本装
置を有する、本発明の第2の実施例を示す図である。
【図8】 RGB信号の提供のための簡単な処理を行な
う基本装置を有する、本発明の第3の実施例を示す図で
ある。
う基本装置を有する、本発明の第3の実施例を示す図で
ある。
【図9】 クロミナンスの時間および空間のサブサンプ
ルを4:1により行なう、本発明の第4の実施例を示す
図である。
ルを4:1により行なう、本発明の第4の実施例を示す
図である。
【図10】 図3のカメラヘッドに用いる相関二重サン
プリング回路を示す図である。
プリング回路を示す図である。
【図11】 各露出レベルに対する、読み出しおよび照
明波形を示す図である。
明波形を示す図である。
【図12】 各露出レベルに対する、読み出しおよび照
明波形を示す図である。
明波形を示す図である。
【図13】 各露出レベルに対する、読み出しおよび照
明波形を示す図である。
明波形を示す図である。
20 カメラヘッド、22 基本装置、24 ディジタ
ル・データリンク、26a 赤色発光素子、26b 緑
色発光素子、26c 青色発光素子、28 LED制御
素子、30 被写体、32 レンズ、34 イメージセ
ンサ、35 フォトダイオード、36a,36b 読み
出しレジスタ、37 垂直読み出しレジスタ、38 ク
ロックおよびバイアス回路、40 タイミング回路、4
2 露出レベル決定回路、50 出力増幅器、52 C
DS回路、54 A−D変換器、56 ルミナンス蓄積
部、58 赤フレーム蓄積部、60 青フレーム蓄積
部、62,64,72,74 減算器、66 平均化回
路、68 Y運動検出器、70アドレス発生器、76,
78,80 加算器、100 フレーム・タイミング、
102 転送パルス期間、110 行タイミング部、1
12 波形部、120画素タイミング波形、200 フ
レーム・タイミング波形、222,224,226,2
28,230 時刻、232 サンプル値。
ル・データリンク、26a 赤色発光素子、26b 緑
色発光素子、26c 青色発光素子、28 LED制御
素子、30 被写体、32 レンズ、34 イメージセ
ンサ、35 フォトダイオード、36a,36b 読み
出しレジスタ、37 垂直読み出しレジスタ、38 ク
ロックおよびバイアス回路、40 タイミング回路、4
2 露出レベル決定回路、50 出力増幅器、52 C
DS回路、54 A−D変換器、56 ルミナンス蓄積
部、58 赤フレーム蓄積部、60 青フレーム蓄積
部、62,64,72,74 減算器、66 平均化回
路、68 Y運動検出器、70アドレス発生器、76,
78,80 加算器、100 フレーム・タイミング、
102 転送パルス期間、110 行タイミング部、1
12 波形部、120画素タイミング波形、200 フ
レーム・タイミング波形、222,224,226,2
28,230 時刻、232 サンプル値。
Claims (4)
- 【請求項1】 被写体に対し順次照明を行なうよう配設
した複数の光源と、 a)ルミナンス光ビームを発生するための2つ以上の前
記光源と、b)第1および第2の少なくとも2つのクロ
ミナンス光ビームを発生するための選択された前記光源
とを駆動し、あらかじめ定められたシーケンスにより、
ルミナンス光ビームおよびクロミナンス光ビームを発生
する手段と、 被写体から反射するルミナンスおよびクロミナンス光ビ
ームを受光し、一連のルミナンスおよびクロミナンス画
像要素からなるカラー・シーケンシャル信号を発生する
よう配設されたイメージセンサを有することを特徴とす
る、カラー・シーケンシャル電子カメラ。 - 【請求項2】 請求項1に記載されたカメラであって、
さらに、 前記イメージセンサと接続され、ルミナンスおよびクロ
ミナンス画像要素を独立に蓄積するための複数の記憶ユ
ニットを有することを特徴とする、カラー・シーケンシ
ャル電子カメラ。 - 【請求項3】 請求項2に記載されたカメラであって、 前記光ビームのあらかじめ定めたシーケンスは、第1ま
たは第2のクロミナンス光ビームの交互のシーケンスと
独立した、一連のルミナンス光ビームを含み、前記イメ
ージセンサは、クロミナンスの画像要素の交互のシーケ
ンスと独立した一連のルミナンス画像要素からなるカラ
ー・シーケンシャル信号を発生し、それによってクロミ
ナンス画像要素をルミナンス画像要素より小さい時間レ
ートにより捕捉することを特徴とする、カラー・シーケ
ンシャル電子カメラ。 - 【請求項4】 請求項2に記載されたカメラであって、 前記イメージセンサは、フォトサイトの行および列によ
る配列を有し、前記ルミナンス画像要素は、実質上すべ
てのフォトサイトから作成し、また、クロミナンス画像
要素は、フォトサイトの選択された行および列の少なく
とも1つを統合して求め、それによって画素値の数をよ
り少なくし、クロミナンス画像要素をルミナンス画像要
素より小さい空間レートにより捕捉することを特徴とす
る、カラー・シーケンシャル電子カメラ。
Applications Claiming Priority (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| US171731 | 1988-04-05 | ||
| US08/171,731 US5523786A (en) | 1993-12-22 | 1993-12-22 | Color sequential camera in which chrominance components are captured at a lower temporal rate than luminance components |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JPH07240931A true JPH07240931A (ja) | 1995-09-12 |
Family
ID=22624916
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP6317968A Pending JPH07240931A (ja) | 1993-12-22 | 1994-12-21 | カラー・シーケンシャル電子カメラ |
Country Status (4)
| Country | Link |
|---|---|
| US (1) | US5523786A (ja) |
| EP (2) | EP0660616B1 (ja) |
| JP (1) | JPH07240931A (ja) |
| DE (1) | DE69423591T2 (ja) |
Cited By (12)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2009071863A (ja) * | 2002-07-26 | 2009-04-02 | Olympus Corp | 撮影装置、画像処理システム |
| WO2010089817A1 (ja) * | 2009-02-05 | 2010-08-12 | パナソニック株式会社 | 固体撮像素子、カメラシステムおよび固体撮像素子の駆動方法 |
| WO2010090025A1 (ja) * | 2009-02-05 | 2010-08-12 | パナソニック株式会社 | 撮像処理装置 |
| JP2012090725A (ja) * | 2010-10-26 | 2012-05-17 | Fujifilm Corp | 電子内視鏡システム、電子内視鏡システムのプロセッサ装置、及び画像処理方法 |
| JP2012125331A (ja) * | 2010-12-14 | 2012-07-05 | Fujifilm Corp | 内視鏡システム |
| JP2013211837A (ja) * | 2012-03-01 | 2013-10-10 | Nissan Motor Co Ltd | カメラ装置及び画像処理方法 |
| KR20150037960A (ko) * | 2012-07-26 | 2015-04-08 | 올리브 메디컬 코포레이션 | 광 부족 환경에서 ycbcr 펄싱된 조명 수법 |
| JP2016519591A (ja) * | 2013-03-15 | 2016-07-07 | オリーブ・メディカル・コーポレイションOlive Medical Corporation | パルスカラー撮像システムにおける超解像度及び色運動アーチファクト補正 |
| US10911649B2 (en) | 2014-03-21 | 2021-02-02 | DePuy Synthes Products, Inc. | Card edge connector for an imaging sensor |
| US11083367B2 (en) | 2012-07-26 | 2021-08-10 | DePuy Synthes Products, Inc. | Continuous video in a light deficient environment |
| US11185213B2 (en) | 2013-03-15 | 2021-11-30 | DePuy Synthes Products, Inc. | Scope sensing in a light controlled environment |
| JP2024543957A (ja) * | 2022-01-11 | 2024-11-26 | コーニンクレッカ フィリップス エヌ ヴェ | 対象の皮膚のスペクトル分析を行うための方法及び装置 |
Families Citing this family (65)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR950006769B1 (ko) * | 1992-12-31 | 1995-06-22 | 현대전자산업주식회사 | 고선명 텔레비젼의 색차신호 동벡터 추출방법 및 움직임 보상장치 |
| GB2286939B (en) * | 1994-02-17 | 1998-03-25 | Sony Uk Ltd | Video camera with synchronised flash light |
| US5982953A (en) * | 1994-09-02 | 1999-11-09 | Konica Corporation | Image displaying apparatus of a processed image from temporally sequential images |
| US6380973B1 (en) * | 1995-06-02 | 2002-04-30 | Canon Kabushiki Kaisha | Image sensing apparatus and method for image processing a moving image or a still image |
| GB2301972B (en) * | 1995-06-06 | 1999-10-20 | Sony Uk Ltd | Video compression |
| US5710604A (en) * | 1996-02-09 | 1998-01-20 | Texas Instruments Incorporated | Video memory device for color-sequential-type displays |
| US6432046B1 (en) * | 1996-07-15 | 2002-08-13 | Universal Technologies International, Inc. | Hand-held, portable camera for producing video images of an object |
| US5879289A (en) | 1996-07-15 | 1999-03-09 | Universal Technologies International, Inc. | Hand-held portable endoscopic camera |
| US6554765B1 (en) | 1996-07-15 | 2003-04-29 | East Giant Limited | Hand held, portable camera with adaptable lens system |
| US6002743A (en) * | 1996-07-17 | 1999-12-14 | Telymonde; Timothy D. | Method and apparatus for image acquisition from a plurality of cameras |
| JPH10164443A (ja) * | 1996-11-29 | 1998-06-19 | Nikon Corp | 固体撮像素子カメラ |
| TW364265B (en) * | 1997-01-31 | 1999-07-11 | Sanyo Electric Co | Solid image sensor device |
| GB2323195B (en) * | 1997-03-14 | 1999-04-28 | Samsung Electronics Co Ltd | System status display device |
| US5973734A (en) | 1997-07-09 | 1999-10-26 | Flashpoint Technology, Inc. | Method and apparatus for correcting aspect ratio in a camera graphical user interface |
| US6498623B1 (en) * | 1997-11-04 | 2002-12-24 | Flashpoint Technology, Inc. | System and method for generating variable-length timing signals in an electronic imaging device |
| US6042013A (en) * | 1997-11-17 | 2000-03-28 | Xerox Corporation | Multi-colored illuminator apparatus for a scanner device |
| US6317141B1 (en) | 1998-12-31 | 2001-11-13 | Flashpoint Technology, Inc. | Method and apparatus for editing heterogeneous media objects in a digital imaging device |
| US6697109B1 (en) * | 1999-05-06 | 2004-02-24 | Sharp Laboratories Of America, Inc. | Method and system for field sequential color image capture |
| IL136080A0 (en) | 2000-05-11 | 2001-05-20 | Yeda Res & Dev | Sequence-to-sequence alignment |
| US6345765B1 (en) * | 2000-06-30 | 2002-02-12 | Intermec Ip Corp. | Spectral scanner employing light paths of multiple wavelengths for scanning objects, such as bar code symbols, and associated method |
| US6766376B2 (en) | 2000-09-12 | 2004-07-20 | Sn Acquisition, L.L.C | Streaming media buffering system |
| US7262799B2 (en) * | 2000-10-25 | 2007-08-28 | Canon Kabushiki Kaisha | Image sensing apparatus and its control method, control program, and storage medium |
| US6765699B1 (en) | 2000-10-31 | 2004-07-20 | Hewlett-Packard Development Company, L.P. | Photosensor array with decreased scan time for decreased optical sampling rates |
| WO2002047031A2 (en) * | 2000-12-05 | 2002-06-13 | Yeda Research And Development Co. Ltd. | Apparatus and method for alignment of spatial or temporal non-overlapping image sequences |
| US20020191102A1 (en) * | 2001-05-31 | 2002-12-19 | Casio Computer Co., Ltd. | Light emitting device, camera with light emitting device, and image pickup method |
| US20050187433A1 (en) * | 2001-07-26 | 2005-08-25 | Given Imaging Ltd. | In-vivo imaging device providing constant bit rate transmission |
| US9113846B2 (en) * | 2001-07-26 | 2015-08-25 | Given Imaging Ltd. | In-vivo imaging device providing data compression |
| JP4350924B2 (ja) * | 2001-09-07 | 2009-10-28 | 富士フイルム株式会社 | 固体撮像装置およびその駆動方法 |
| JP2003179820A (ja) * | 2001-12-11 | 2003-06-27 | Hitachi Ltd | Cmos型固体撮像素子を用いた撮像システムおよび撮像装置 |
| US7428019B2 (en) * | 2001-12-26 | 2008-09-23 | Yeda Research And Development Co. Ltd. | System and method for increasing space or time resolution in video |
| DE10214809A1 (de) * | 2002-04-04 | 2003-10-23 | Wolf Gmbh Richard | Festkörpervideokamera und Helligkeitsregelung dafür |
| JP3856221B2 (ja) * | 2002-05-15 | 2006-12-13 | シャープ株式会社 | 携帯電話機 |
| EP1528380A4 (en) | 2002-07-26 | 2009-12-09 | Olympus Corp | IMAGE PROCESSING SYSTEM |
| US7388693B2 (en) * | 2003-02-28 | 2008-06-17 | Lexmark International, Inc. | System and methods for multiple imaging element scanning and copying |
| IL155175A (en) * | 2003-03-31 | 2012-01-31 | Given Imaging Ltd | A diagnostic device that uses information thinning |
| US20040210107A1 (en) * | 2003-03-31 | 2004-10-21 | Pentax Corporation | Endoscope system for fluorescent observation |
| JP4228947B2 (ja) * | 2003-05-20 | 2009-02-25 | 日産自動車株式会社 | 撮像装置 |
| US7782362B2 (en) * | 2003-06-17 | 2010-08-24 | Panasonic Corporation | Image pickup device for changing a resolution of frames and generating a static image based on information indicating the frames |
| JP4088313B2 (ja) * | 2004-01-23 | 2008-05-21 | オリンパス株式会社 | 画像処理システム、院内処理システム |
| US7106511B2 (en) * | 2004-03-02 | 2006-09-12 | Agilent Technologies, Inc. | Imaging system with large depth of field |
| JP4290066B2 (ja) | 2004-05-20 | 2009-07-01 | キヤノン株式会社 | 固体撮像装置および撮像システム |
| WO2006018796A2 (en) * | 2004-08-13 | 2006-02-23 | Koninklijke Philips Electronics, N.V. | System and method for reducing complexity in a color sequential display system |
| JP4273420B2 (ja) * | 2004-12-06 | 2009-06-03 | ソニー株式会社 | 映像信号処理装置及び映像信号の伝送方法 |
| US20060221206A1 (en) * | 2005-04-01 | 2006-10-05 | Kye Systems Corp. | Web camera with dynamic light compensation control responsive to ambient light levels |
| US20060228018A1 (en) * | 2005-04-12 | 2006-10-12 | Gil Abramovich | Reconfigurable machine vision system |
| JP2007130085A (ja) * | 2005-11-08 | 2007-05-31 | Olympus Corp | 電子内視鏡 |
| JP5009004B2 (ja) | 2006-07-31 | 2012-08-22 | 株式会社リコー | 画像処理装置、撮像装置、画像処理方法、および画像処理プログラム |
| US9224145B1 (en) | 2006-08-30 | 2015-12-29 | Qurio Holdings, Inc. | Venue based digital rights using capture device with digital watermarking capability |
| WO2009019808A1 (ja) * | 2007-08-03 | 2009-02-12 | Panasonic Corporation | 画像データを生成する装置、方法およびプログラム |
| JP4551486B2 (ja) * | 2007-12-04 | 2010-09-29 | パナソニック株式会社 | 画像生成装置 |
| JP5635750B2 (ja) | 2009-09-09 | 2014-12-03 | キヤノン株式会社 | 画像読取装置 |
| DE102010027905B4 (de) | 2010-04-19 | 2018-09-13 | Olympus Winter & Ibe Gmbh | Videoendoskopsystem und Verfahren zum Betreiben eines Videoendoskopsystems |
| WO2012008143A1 (ja) * | 2010-07-12 | 2012-01-19 | パナソニック株式会社 | 画像生成装置 |
| CA2835870A1 (en) | 2011-05-12 | 2012-11-15 | Olive Medical Corporation | Pixel array area optimization using stacking scheme for hybrid image sensor with minimal vertical interconnects |
| US9795285B2 (en) * | 2011-07-07 | 2017-10-24 | Boston Scientific Scimed, Inc. | Imaging system for endoscope |
| CN104486987A (zh) | 2012-07-26 | 2015-04-01 | 橄榄医疗公司 | 具有最小面积单片式cmos图像传感器的相机系统 |
| AU2014233192B2 (en) | 2013-03-15 | 2018-11-22 | DePuy Synthes Products, Inc. | Minimize image sensor I/O and conductor counts in endoscope applications |
| WO2014145246A1 (en) | 2013-03-15 | 2014-09-18 | Olive Medical Corporation | Image sensor synchronization without input clock and data transmission clock |
| US9777913B2 (en) | 2013-03-15 | 2017-10-03 | DePuy Synthes Products, Inc. | Controlling the integral light energy of a laser pulse |
| US9071764B2 (en) | 2013-11-13 | 2015-06-30 | Arecont Vision, Llc. | System and method for color imaging under low light |
| EP3408648B1 (en) * | 2016-01-28 | 2025-12-03 | Siemens Healthcare Diagnostics Inc. | Methods and apparatus for imaging a specimen container and/or specimen using multiple exposures |
| JP2018157918A (ja) * | 2017-03-22 | 2018-10-11 | ソニー株式会社 | 手術用制御装置、制御方法、手術システム、およびプログラム |
| KR20230010842A (ko) * | 2017-11-06 | 2023-01-19 | 에이조 가부시키가이샤 | 화상처리장치, 화상처리방법 및 화상처리 프로그램을 기록한 기록 매체 |
| EP3820133A1 (en) | 2019-11-06 | 2021-05-12 | Koninklijke Philips N.V. | A system for performing image motion compensation |
| CN111521113B (zh) * | 2020-04-24 | 2021-08-03 | 成都飞机工业(集团)有限责任公司 | 一种基于高速相机双目立体视觉的图像采集方法 |
Family Cites Families (21)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US4074306A (en) * | 1975-07-28 | 1978-02-14 | Olympus Optical Co., Ltd. | Endoscope utilizing color television and fiber optics techniques |
| US4253447A (en) * | 1978-10-16 | 1981-03-03 | Welch Allyn, Inc. | Color endoscope with charge coupled device and television viewing |
| JPS6048953B2 (ja) * | 1979-08-31 | 1985-10-30 | 日本電気株式会社 | カラ−固体撮像装置 |
| US4759347A (en) * | 1981-09-12 | 1988-07-26 | Fuji Photo Optical Company, Ltd. | Endoscope apparatus using solid state image pickup device |
| US4404585A (en) * | 1981-10-08 | 1983-09-13 | Hjortzberg Bernhard A | Video sequential color system |
| US4646166A (en) * | 1984-07-25 | 1987-02-24 | Rca Corporation | Video still image storage system with high resolution |
| JPH0646811B2 (ja) * | 1984-08-31 | 1994-06-15 | オリンパス光学工業株式会社 | カラ−撮像装置の照明装置 |
| US4598322A (en) * | 1985-05-13 | 1986-07-01 | Honeywell Inc. | Video level control for CCD camera |
| US4721998A (en) * | 1986-04-11 | 1988-01-26 | New York Institute Of Technology | Method and apparatus for processing color video signals |
| US5202692A (en) * | 1986-06-16 | 1993-04-13 | Millitech Corporation | Millimeter wave imaging sensors, sources and systems |
| US4750041A (en) * | 1986-08-21 | 1988-06-07 | Eastman Kodak Company | Apparatus for merged field operation of an image sensor in a still video camera |
| JPH0771238B2 (ja) * | 1986-09-24 | 1995-07-31 | 株式会社日立製作所 | 固体撮像装置 |
| US4860094A (en) * | 1987-03-10 | 1989-08-22 | Olympus Optical Co., Ltd. | Control apparatus for use with different types of endoscopes |
| JPS63227293A (ja) * | 1987-03-17 | 1988-09-21 | Olympus Optical Co Ltd | 面順次カラ−撮像装置 |
| JPS63290091A (ja) * | 1987-05-22 | 1988-11-28 | Olympus Optical Co Ltd | 内視鏡用画像デ−タ圧縮装置 |
| JPS63290539A (ja) * | 1987-05-22 | 1988-11-28 | Olympus Optical Co Ltd | 内視鏡用画像入力装置 |
| JP2920924B2 (ja) * | 1989-01-12 | 1999-07-19 | ソニー株式会社 | Ccdカメラ |
| US5187569A (en) * | 1989-03-03 | 1993-02-16 | Asahi Kogaku Kogyo Kabushiki Kaisha | Solid state imaging device and electronic still camera using same |
| US5196938A (en) * | 1989-11-20 | 1993-03-23 | Eastman Kodak Company | Solid state fast frame recorder having independently selectable frame rate and exposure |
| US5264925A (en) * | 1992-06-26 | 1993-11-23 | Life Surgery, Inc. | Single sensor video imaging system and method using sequential color object illumination |
| US5394187A (en) * | 1992-06-26 | 1995-02-28 | Apollo Camera, L.L.C. | Video imaging systems and method using a single interline progressive scanning sensor and sequential color object illumination |
-
1993
- 1993-12-22 US US08/171,731 patent/US5523786A/en not_active Expired - Lifetime
-
1994
- 1994-12-20 EP EP94120157A patent/EP0660616B1/en not_active Expired - Lifetime
- 1994-12-20 DE DE69423591T patent/DE69423591T2/de not_active Expired - Lifetime
- 1994-12-20 EP EP99117157A patent/EP0964584A1/en not_active Withdrawn
- 1994-12-21 JP JP6317968A patent/JPH07240931A/ja active Pending
Cited By (26)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2009071863A (ja) * | 2002-07-26 | 2009-04-02 | Olympus Corp | 撮影装置、画像処理システム |
| JPWO2010090025A1 (ja) * | 2009-02-05 | 2012-08-09 | パナソニック株式会社 | 撮像処理装置 |
| WO2010089817A1 (ja) * | 2009-02-05 | 2010-08-12 | パナソニック株式会社 | 固体撮像素子、カメラシステムおよび固体撮像素子の駆動方法 |
| WO2010090025A1 (ja) * | 2009-02-05 | 2010-08-12 | パナソニック株式会社 | 撮像処理装置 |
| JP4598162B2 (ja) * | 2009-02-05 | 2010-12-15 | パナソニック株式会社 | 撮像処理装置 |
| US8243160B2 (en) | 2009-02-05 | 2012-08-14 | Panasonic Corporation | Imaging processor |
| JP2012090725A (ja) * | 2010-10-26 | 2012-05-17 | Fujifilm Corp | 電子内視鏡システム、電子内視鏡システムのプロセッサ装置、及び画像処理方法 |
| US8626273B2 (en) | 2010-10-26 | 2014-01-07 | Fujifilm Corporation | Electronic endoscope system having processor device, and method for processing endoscopic image |
| JP2012125331A (ja) * | 2010-12-14 | 2012-07-05 | Fujifilm Corp | 内視鏡システム |
| JP2013211837A (ja) * | 2012-03-01 | 2013-10-10 | Nissan Motor Co Ltd | カメラ装置及び画像処理方法 |
| KR20150037960A (ko) * | 2012-07-26 | 2015-04-08 | 올리브 메디컬 코포레이션 | 광 부족 환경에서 ycbcr 펄싱된 조명 수법 |
| JP2015525642A (ja) * | 2012-07-26 | 2015-09-07 | オリーブ・メディカル・コーポレーション | 光が不十分な環境におけるYCbCrパルス照明方式 |
| US11070779B2 (en) | 2012-07-26 | 2021-07-20 | DePuy Synthes Products, Inc. | YCBCR pulsed illumination scheme in a light deficient environment |
| US11863878B2 (en) | 2012-07-26 | 2024-01-02 | DePuy Synthes Products, Inc. | YCBCR pulsed illumination scheme in a light deficient environment |
| US10785461B2 (en) | 2012-07-26 | 2020-09-22 | DePuy Synthes Products, Inc. | YCbCr pulsed illumination scheme in a light deficient environment |
| US11083367B2 (en) | 2012-07-26 | 2021-08-10 | DePuy Synthes Products, Inc. | Continuous video in a light deficient environment |
| JP2016519591A (ja) * | 2013-03-15 | 2016-07-07 | オリーブ・メディカル・コーポレイションOlive Medical Corporation | パルスカラー撮像システムにおける超解像度及び色運動アーチファクト補正 |
| US10917562B2 (en) | 2013-03-15 | 2021-02-09 | DePuy Synthes Products, Inc. | Super resolution and color motion artifact correction in a pulsed color imaging system |
| JP2021108453A (ja) * | 2013-03-15 | 2021-07-29 | デピュイ・シンセス・プロダクツ・インコーポレイテッド | パルスカラー撮像システムにおける超解像度及び色運動アーチファクト補正 |
| US11185213B2 (en) | 2013-03-15 | 2021-11-30 | DePuy Synthes Products, Inc. | Scope sensing in a light controlled environment |
| JP2019071609A (ja) * | 2013-03-15 | 2019-05-09 | デピュイ・シンセス・プロダクツ・インコーポレイテッド | パルスカラー撮像システムにおける超解像度及び色運動アーチファクト補正 |
| US11974717B2 (en) | 2013-03-15 | 2024-05-07 | DePuy Synthes Products, Inc. | Scope sensing in a light controlled environment |
| US12231784B2 (en) | 2013-03-15 | 2025-02-18 | DePuy Synthes Products, Inc. | Super resolution and color motion artifact correction in a pulsed color imaging system |
| US10911649B2 (en) | 2014-03-21 | 2021-02-02 | DePuy Synthes Products, Inc. | Card edge connector for an imaging sensor |
| US11438490B2 (en) | 2014-03-21 | 2022-09-06 | DePuy Synthes Products, Inc. | Card edge connector for an imaging sensor |
| JP2024543957A (ja) * | 2022-01-11 | 2024-11-26 | コーニンクレッカ フィリップス エヌ ヴェ | 対象の皮膚のスペクトル分析を行うための方法及び装置 |
Also Published As
| Publication number | Publication date |
|---|---|
| EP0660616B1 (en) | 2000-03-22 |
| DE69423591D1 (de) | 2000-04-27 |
| DE69423591T2 (de) | 2000-10-19 |
| EP0660616A2 (en) | 1995-06-28 |
| EP0964584A1 (en) | 1999-12-15 |
| EP0660616A3 (en) | 1996-04-24 |
| US5523786A (en) | 1996-06-04 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US5523786A (en) | Color sequential camera in which chrominance components are captured at a lower temporal rate than luminance components | |
| JP3268891B2 (ja) | 内視鏡撮像装置 | |
| US6771312B2 (en) | Image processing apparatus | |
| EP0682844B1 (en) | Video imaging system and method using a single interline progressive scanning sensor and sequential color object illumination | |
| US5408268A (en) | Video imaging system and method using a single full frame sensor and sequential color object illumination | |
| US6278490B1 (en) | Exposure control for an image pickup apparatus that uses an electronic flash | |
| JP3980782B2 (ja) | 撮像制御装置および撮像制御方法 | |
| US6831695B1 (en) | Image pickup apparatus for outputting an image signal representative of an optical image and image pickup control method therefor | |
| US20080036856A1 (en) | Imaging apparatus and endoscope apparatus using the same | |
| JPH0318684B2 (ja) | ||
| JP2026050498A (ja) | 医療用制御装置及び医療用観察システム | |
| JP3315809B2 (ja) | 電子内視鏡装置 | |
| JP2001148805A (ja) | 固体撮像装置 | |
| CN114269222A (zh) | 医疗图像处理设备和医疗观察系统 | |
| JPH06268898A (ja) | 固体撮像素子を用いた撮像装置 | |
| JP4199381B2 (ja) | 固体撮像装置および固体撮像素子駆動方法 | |
| JPH06315463A (ja) | 電子内視鏡装置 | |
| JP2001069409A (ja) | 撮像装置と映像記録装置 | |
| JP3059920B2 (ja) | 撮像装置 | |
| JP3055809B2 (ja) | 電子内視鏡装置 | |
| JPH11164195A (ja) | 撮像装置 | |
| JPS60117881A (ja) | 固体撮像装置 | |
| JP2000261817A (ja) | 撮像装置 | |
| JPH09261532A (ja) | 映像信号処理方法および撮像装置 | |
| JPH05284429A (ja) | 撮像装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20041119 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20041207 |
|
| A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20050426 |