JPH11509714A - 2軸画像運動補償を行う電子光学的画像検知アレイ - Google Patents

2軸画像運動補償を行う電子光学的画像検知アレイ

Info

Publication number
JPH11509714A
JPH11509714A JP9539918A JP53991897A JPH11509714A JP H11509714 A JPH11509714 A JP H11509714A JP 9539918 A JP9539918 A JP 9539918A JP 53991897 A JP53991897 A JP 53991897A JP H11509714 A JPH11509714 A JP H11509714A
Authority
JP
Japan
Prior art keywords
array
image
pixel
row
column
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP9539918A
Other languages
English (en)
Other versions
JP3392422B2 (ja
Inventor
ジー ラリュー アンドレ
ジェームズ ブライアン
アール プフィスター ウイリアム
ジェイ ジェーカーティス ケネス
アール ベラン スティーヴン
エイ ベネット ラッセル
エル ボーンズ ゴードン
Original Assignee
レコン/オプティカル インコーポレイテッド
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by レコン/オプティカル インコーポレイテッド filed Critical レコン/オプティカル インコーポレイテッド
Publication of JPH11509714A publication Critical patent/JPH11509714A/ja
Application granted granted Critical
Publication of JP3392422B2 publication Critical patent/JP3392422B2/ja
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C11/00—Photogrammetry or videogrammetry, e.g. stereogrammetry; Photographic surveying
    • G01C11/02—Picture taking arrangements specially adapted for photogrammetry or photographic surveying, e.g. controlling overlapping of pictures
    • G—PHYSICS
    • G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B15/00—Special procedures for taking photographs; Apparatus therefor
    • G03B15/006—Apparatus mounted on flying objects
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/68—Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/68—Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
    • H04N23/682—Vibration or motion blur correction
    • H04N23/684—Vibration or motion blur correction performed by controlling the image sensor readout, e.g. by controlling the integration time
    • H04N23/6842—Vibration or motion blur correction performed by controlling the image sensor readout, e.g. by controlling the integration time by controlling the scanning position, e.g. windowing
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/50—Control of the SSIS exposure
    • H04N25/53—Control of the integration time

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Transforming Light Signals Into Electric Signals (AREA)
  • Solid State Image Pick-Up Elements (AREA)

Abstract

(57)【要約】 行および列に配列されたピクセルを有する電子光学的画像アレイ(32)がアレイ面における画像運動を補償する。この補償は、運動ベクトルが行方向であるか、列方向であるか、または対角方向であるかに関係なく行われる。空中偵察適用では、画像運動はロール(R)、ピッチ(PI)および/またはヨー(Y)角を中心にした航空機(22)の回転が航空機の前進運動に加わることによって発生する。画像運動補償は運動部材なしで、また安定化されたプラットフォームを必要とせずに実行される。アレイ(32)のピクセル情報は行および列方向にステップごとに、実質的に画像運動の速度と方向に整合するように伝送される。

Description

【発明の詳細な説明】 2軸画像運動補償を行う電子光学的画像検知アレイ 発明の背景 A.発明の分野 本発明は一般的に光学装置に関するものであり、この装置はシーン画像を発生 し、画像の相対運動を装置を基準にして補償する。これは例えばエリア偵察写真 で使用される画像装置に見られる。より詳細には本発明は、電子光学的画像アレ イを基準にした任意の方向でのシーン画像の相対運動を電子的に補償する装置に 関する。 アレイは偵察移動体で運ぶのに適する。このような実施例で本発明は電子的に 画像運動を補償する。すなわち鮮明でクリアな画像をアレイから形成する。この 画像運動は、画像アレイを搬送する移動体の前進速度による動き成分と、アレイ をシーンに対して露光する際の、移動体のロール軸、ピッチ軸および/またはヨ ー軸を中心にした回転および不安定性による画像動き成分を有する。 B.背景技術 狭い範囲を高速に移動する対象物を単箱カメラにより撮影しようとする人はほ とんど、対象物のフィルム画像が画像のフィルム上の相対運動のためぶれていた り、不鮮明であることを発見する。同じ作用はカメラが静止シーンを露光する間 に移動する場合にも観察される。光条件が短時間露光を許すならば、シャッター 速度を上げることにより画像を実質的に“停止”させることができ、不鮮明さを 低減することができる。 偵察カメラではしばしば、画像不鮮明さをシャッター速度だけの増大により除 去できるような十分に短い露光時間が許されない光条件の下で画像を記録するこ とが要求される。典型的にはこのようなカメラは地形シーンを記録するために航 空機により搬送される。このようなカメラで使用される画像装置はフィルムだけ でなく、CCDを含む電子光学的デバイスを有する。撮影されるシーンと画像装 置との間で相対運動が存在するこのようなカメラでは、相対運動を補償するため の技術を使用しなくてはシーンの記録画像がぼけてしまう。このような技術は一 般に“前進運動補償”または“画像動き補償”として公知である。補償しないま まにしておくと、相対運動から生じた不鮮明さや画像悪化が記録画像の情報内容 を低減する。 カメラが航空機の下の対象シーンに垂直に向けられている場合、視野における シーン画像のすべてのポイントの運動速度はほぼ同じであり、不鮮明さを回避す るために動きを比較的容易に補償できる。例えば画像装置がフィルムであれば、 不鮮明さはフィルムエマルジョンを、カメラの焦点面におけるシーン画像の動き と同じ方向に同じ速度で移動することによって回避される。しかしカメラがシー ンに対して露光されている間に、航空機が回転(例えばロール、ピッチおよび/ またはヨー)したり、回転性の外乱を受けたりすると、画像の動きはもはや単純 に飛行線上(インライン)にあるのではなく、飛行線と飛行方向に交差する線( クラスライン)の両方の成分を有する角度方向となる。すなわち画像の運動速度 と方向はアレイに対して一定ではなく、アレイの場所によって変化する。 対象シーンが航空機の直下にはなく、飛行方向に対して垂直であるが、斜角を 有している場合には、画像運動補償の問題の解決は、航空機の回転が発生すると 極端に複雑かつ困難になる。航空機に近い対象物は、航空機から遠い対象物より も航空機に対して相対的に速く運動するように見える。航空機の回転により、飛 行方向線(インライン)上と、飛行方向に対して交差する線(クラスライン)上 にあるベクトル成分を有する動き画像が生じる。さらに画像運動速度がアレイの 場所ごとに変化する。画像運動ベクトルは回転の大きさに依存し、その成分はロ ール、ピッチおよびヨーの他に、航空機の速度と飛行高度がある。 またこれらの問題が複雑であるのは、飛行速度、飛行回転、飛行高度が変化す るからであり、偵察任務中に水平以下のカメラ俯角が生じるからである。これら の変化はカメラの焦点面における画像運動速度に影響 し、これを前進運動補償装置により考慮しなければならない。 航空機の前進速度および航空機の回転による画像運動を補償する、動き画像補 償問題の解決手段はこの分野ではまだ知られていない。過去においては航空機は 典型的には、画像解像度を保護するために安定したコース(ロール、ピッチおよ びヨー運動をできるだけ小さくする)を維持する。安定したプラットフォームに カメラを取り付けることは機械的解決手段の1つであるが、いくつかの所望の点 が満たされない。画像動き補償の電子的解決手段が電子光学的画像アレイに適し 、この解決手段は、動き画像がインライン上とクロスライン上のベクトル成分を 有するときでも動き画像補償を行う。 エリア偵察に対しては、電子光学的カメラ、とくにCCDを使用したカメラが 多くの点でフィルムカメラに勝ることが認められている。電子光学的カメラでは 、画像対象物からの光が、典型的には(少なくとも)数千画素または数千ピクセ ルを有するソリッドステートデバイスに衝突する。入射光が電荷パケット(ピク セル情報)にフォトサイト(ピクセル素子)で変換され、電位セルに収集される 。電荷パケットはシーン情報を含んでおり、素子から出力され電気信号に変換さ れる。電子光学的画像カメラの大きな利点は、シーン情報を偵察航空機からほと んど瞬時に地上局に伝送す ることができ、またビデオ画像に変換できることである。CCD画像カメラは相 互に密に隣接した非常に小さなピクセルを有しているから、得られた画像の解像 度が非常に高くなる傾向にある。電子光学的画像カメラはまた、入射光の特定の 周波数に対して感度を有するように構成することができる。CCDの背景技術は 、D.Schroder著、Modular Series On Solid State Devices,Ch.3,4,Addison-Wes ley(1987),C.Sequin & M.Tompsett著、Charge Transfer Devices,Bell Teleph one Laboratories,Academic Press(1975),S.M.Sze著、Physiscs of Semicondu ctor Devices,Ch.7,John Wiley & Sons,Inc.(1981)に記載されている。 対象物シーンを画像化するのに必要な時間を低減し、敵対脅威に曝される時間 を少なくするために、本発明の有利な実施例では、ライン(1次元)アレイでは なく、2次元電子光学的画像エリアアレイを使用する。エリアアレイは、ライン ごとにではなくシーン全体を瞬時に画像化することができる。最近まで比較的小 さな電子光学的画像アレイ(例えば典型的にはテレビジョンカメラで使用される )しか市販されていなかった。しかしエリア偵察センサに適する大きな高画素数 のエリアアレイが現在では利用できる。高画素数エリアアレイの設計に関する有 益な情報が、J.Janesick著、Multi-Pinned-Phase Charge-Coupled Device,NASA Tech.Brief Vol.14,No.8,Item No.115,p.22,Jet Prop ulsion Laboratry,August,1990に記載されている。 2次元エリアアレイ形検知器アレイはシーンの画像全体を、短時間の露出期間 の間にピクセル情報の完全なフレームに変換することができる。露出期間の後、 連続的露出を防止するためにシャッターを使用することができる。一方、アレイ のピクセル情報は信号処理ユニットに読み出される。読み出しが完了した後、ア レイは次のフレームに対して露出することができる。フレーム読み出し時間が短 ければ(1秒以下であれば)連続フレームを秒以下のインターバルで撮影し、短 時間で大シーン範囲を得ることができる。シャッターにより露出時間制御された エリア検知器で動き補償を行うことにより、本発明は実質的に航空機、操縦士お よび検知器アレイが敵の報復手段に曝される時間を短縮する。 リニア電子光学的焦点面偵察検知器、例えば米国特許4908705明細書に 記載されているようなリニア検知器では、対象物のシーンがエリア長手方向に対 して垂直の方向にラインごとに走査される。走査手段は航空機の前進運動によっ て提供されるから、航空機は安定性を維持しなければならず、シーンが記録され ている間、予め定められた飛行経路を通らなければならない。シーンの大きさに 依存して、ターゲットに対する記録時間は10から20秒、またはそれ以上の範 囲である。偵察航空機が敵対脅威を受け得る軍事的状 況では、記録時間中は攻撃を非常に受けやすい。さらに前記明細書のリニア検知 器は、飛行線に交差する要素(例えば航空機が回転性の外乱を受けたときに存在 する)を有する動き画像に対して補償を行うことができない。 機械的な前進運動補償スキーマが考案され、前進運動による画像不鮮明さを除 去する試みに、またはこのような不鮮明さを許容レベルに低減する試みに使用さ れている。このようなスキーマは、並進フィルム、並進レンズ、または回転ミラ ーの使用によって実行される。このような装置は一般的に、移動体の前進速度と 、アレイをシーンに露出している間に航空機が受ける回転とから生じる動き画像 を補償しなければならないような複雑な運動には適しない。 並進フィルム技術では、フィルムは画像部分と同じ方向および速度で移動され る。画像運動速度とフィルム速度は実質的に同期され、露出中のそれらの相対運 動が除去される。その結果、画像部分は露出中にフィルムを基準にして実質的に 停止する。並進フィルム技術はしばしば、短焦点距離および中焦点距離フレーム 形カメラに使用される。 並進レンズ技術では、レンズが空間を並進されるなら、遠方対象物の画像は1 対1の関係で同じ方向にレンズと並進する。従って、エリア偵察カメラのレンズ が飛行方向とは反対の適切な速度で並進されれば、航 空機前進運動により生じる画像速度はレンズ運動による画像速度によって相殺さ れる。その結果、画像は実質的にフィルムに対して静止し、従って露光中に重大 な動き不鮮明さは生じない。この形式の前進運動補償はしばしば、短焦点および 中焦点パノラマ形走査カメラに使用される。例えばRuck著、Design Versatility of the Prism Panoramaic Camera:The KS-116 and KA-95 Cameras,SPIE Proce edings,Vol.309,p.309-10m(Aug.27-28,1981)参照。 回転ミラー技術では、航空機が所定の飛行経路を飛行するのと同じように、シ ーンにおける対象物がカメラに対して相対的な見かけ角速度を有する。見かけ角 速度は飛行速度とターゲットの範囲に関連する。カメラが45°の公称角でミラ ーを見れば、カメラ視線は公称90°により偏向される。ミラーが露出中に適切 な方向に適切な速度で回転していれば、シーンはカメラに対して相対運動を示さ ない。従ってフィルム面では画像は実質的に静止しており、前進運動不鮮明さは 実質的に打ち消される。回転ミラー前進運動補償の概念はしばしば、長焦点フレ ーム形およびライン走査形カメラに使用される。 前記3つの機械的前進運動補償スキーマすべては、フィルムカメラおよび電子 光学的ライン走査カメラも含めて種々のエリア偵察カメラに使用されている。こ れら前進運動補償スキーマの基本的欠点は、これらす べてが機械的要素を含んでおり、結果として複雑で、重量があり、高価な画像装 置になることである。上に述べたようにこれら装置は一般的に、移動体の前進運 動と、航空機がアレイをシーンに露出している間に受ける回転とから生じる動き 画像を補償することが要求されるような複雑な運動には適さず、従ってこのよう な環境下ではぶれた画像が生じてしまう。別の前進運動補償の方法と技術も開発 されており、米国特許4505559号明細書、同4157218号明細書、同 4908705号明細書に記載されている。 米国特許第5155597号明細書には、運動部材なしで前進運動補償を電子 的に行う電子光学的画像アレイが記載されている。この明細書では画像アレイは 行と列に配置された光検知性セルから構成される。列は列群に編成されている。 各列群には固有のピクセル情報伝送速度が与えられている。各列群のピクセル情 報はアレイを通して、各列群の画像運動速度と同期して伝送される。この明細書 では、ピクセル情報はアレイを通して列群に、実際の画像運動に非常に近い速度 で伝送される。 本発明は実質的に、前記明細書に記載された画像前進運動補償技術から出発す るものであり、露光期間中の航空機回転および角度外乱をすべて電子的に運動部 材なしで補償する電子光学的画像アレイを提供する。有利にはアレイはピクセル 素子からなる複数のセルに 分割され、ピクセル情報はセル内のすべてのピクセルに対して同じ速度で行およ び列方向に伝送される。本発明では、ロール、ピッチおよび/またはヨー回転お よび外乱による画像運動が検出され、アレイの行と列の方向に配列される2つの 直交成分に分解される。航空機の前進運動と航空機回転による結合画像運動は、 アレイ中の各セルに対する行方向および列方向のピクセル情報伝送速度に分解さ れる。ピクセル情報は、実質的に画像運動と同期して行および列方向に伝送され る。これによりアレイによって形成された画像の解像度が保護される。さらに本 発明は、アレイに対する制御回路を提供するものである。この制御回路は、行お よび列方向でのピクセル情報伝送速度を連続的に更新する。すなわち、航空機外 乱および回転、速度、高度、カメラ仰角等すべての変化をリアルタイムで更新し 、アレイの連続露出中の画像解像度を保護する。 本発明の運動補償技術によって、多数のフォトサイトまたはピクセル素子(例 えばアレイの行と列の両方向に四千から六千以上)を有する検知アレイを有効に 使用することができる。このようなアレイは大面積の地形を各フレームで画像化 することができる。本発明は、航空機の回転および外乱が露出期間中に存在して も、画像のすべてのフレームにおける画像解像度(すなわちシーンの詳細情報) を実質的に保護するものである。本発明はまたアレイの高い露出感度を可能にす る。すなわち、動き補償は画像のぶれなしに長い露出時間を促進するように行わ れる。公知の装置では、露出時間は、飛行速度対高度比(V/H)により定めら れるライン速度によって制限されている。本発明では、露出時間は航空機のV/ H比によって制限されない。このことにより照明レベルの低いシーンでも動作す ることができ、光検知センサ動作に対する有効時間が拡大される。 さらに本発明は、収集されたシーン情報の高速読み出しを提供する。アレイの 電気信号を高速に読み出すことは、高フレーム率を達成するために必要である。 高フレーム率は、記録すべき多重画像を短時間で立体画像にするため必要である 。 本発明は信頼性が高く、頑強である。なぜなら、機械的走査機構、回転ミラー 、および並進レンズが前進運動補償を行うために必要ないからであり、画像運動 補償は航空機が外乱や回転を受けていても可能だからである。画像運動補償は運 動部材なしで電子的に実行される。 本発明は広範囲に適用できる。例えば、戦術偵察、薬品破壊、低強度衝突、低 高度および中高度任務、および薄暮での偵察である。 発明の要約 本発明の前記および別の対象、利点および特徴は、2軸画像運動補償を行う画 像アレイにおいて達成され る。この画像アレイは、行および列に配列されたピクセル素子のアレイを有し、 ここで行は行方向を、列は列方向を定める。ピクセル素子はシーンの画像を表す ピクセル情報を記憶する。アレイがシーンに露出されるとき、画像はピクセル素 子のアレイを基準にして運動を有している。画像アレイは、ピクセル情報をアレ イ内で2軸、すなわち行方向と列方向に伝送する手段と関連している。この伝送 は実質的に画像の運動と同期して行われる。これにより、アレイにより発生され る画像の解像度が保護される。 有利にはセルのアレイはグリッドに編成される。このグリッドはピクセル素子 からなる複数のセルを有する。セルのピクセル情報は、セル中の各ピクセル素子 に対して均等に行方向およ列方向伝送される。アレイ中のセルの数はコストパフ ォーマンスとアレイの大きさに依存する。しかし典型的には30から数百である 。 有利な実施例の画像アレイはCCDを有し、このCCDではピクセル素子が光 検知性材料であり、入射光を電荷に変換する。この形式のデバイスはゲート線路 およびコントロール線路と共に製造することができ、伝送すべきシーン情報を表 す電荷を行方向および列方向にピクセルごとに伝送することができる。他の形式 の電子光学的画像形成器を使用することもできる。 本発明に対する偵察適用では、アレイは空中移動体 に取り付けられる。この移動体は慣性ナビゲーション装置または同等の装置を有 しており、この装置は移動体のロール、ピッチおよびヨーについての情報、場合 によってはロール速度、ピッチ速度およびヨー速度を発生する。アレイに対する 適当な電荷伝送速度を検出するために、伝送手段はコンピュータを有する。この コンピュータは、慣性ナビゲーション装置に応答して回転マトリクスを移動体の 回転に対して計算し、ピクセル対して画像不均衡を回転マトリクスから計算する 手段と、前記計算手段に応答してピクセル情報伝送速度をアレイ中のセルに対し て行方向およ列方向で計算するライン速度計算手段とを有している。アレイ中の ピクセル情報は行方向および列方向に、ピクセル情報伝送速度に応じて伝送され 、これにより画像運動が補償される。このようにして航空機の前進運動による画 像運動と、航空機の回転運動による画像運動とが電子的に補償され、アレイが鮮 明な画像が得られる。 図面の簡単な説明 本発明の実施例を以下、図面に関連して説明する。 図1は、本発明の画像アレイを搬送する航空機の概略図である。ここでのアレ イの画像運動は、飛行方向と同じ線(インライン)上の成分と飛行方向に交差す る線(クロスライン)上の成分とを有する。これは航空機の前進運動と、ロール 軸、ピッチ軸および/またはヨー軸を中心にした航空機の外乱および回転による ものである。 図2は、図1のアレイの概略図である。この図では、アレイは複数のセルに分 割されており、各セルの画像運動は飛行インライン成分(列)と飛行クロスライ ン成分(行)とを有する。 図3は、図2のセルの1つを詳細に説明する図である。ここでの画像運動ベク トルは行および列方向の成分を有しており、セル内の各ピクセルのピクセル情報 は行および列方向に実質的に画像運動に整合するように伝送され、これにより画 像の不鮮明さが防止される。 図4は、図2の画像アレイの概略図である。この図は複数のセルにおけるアレ イの配置を示し、各セルは行および列に配列されたピクセルを有する。ここで各 セルにおけるピクセル情報の伝送は種々異なる所定の適切な伝送速度で行われ、 これにより画像運動の飛行インライン成分と飛行クロスライン成分とが補償され る。 図5Aから5Cは、航空機のアレイが受けるロール、ピッチおよびヨー回転に よる、アレイの物理的画像面と仮想(基準または電子的)画像面との関係を示す 。 図6Aは、81のセルに編成されたアレイでの、ロール運動だけによる画像運 動の例を示す。 図6Bは、ピッチ運動だけによるアレイのセル中の 画像運動の例を示す。 図6Cは、ヨー運動だけによるアレイのセル中の画像運動の例を示す。 図6Dは、図6A〜6Cからのロール、ピッチおよびヨー運動の作用の結合に よるアレイのセル中の画像運動の例を示す。 図6Eは、航空機の前進運動と、図6Dからのロール、ピッチおよびヨー運動 によるアレイのセル中の画像運動の例を示す。 図6Fは、式(6)による近似的不均衡が、式(4)による実際の不均衡の代 わりに図6Eに存在するときの画像運動補償のエラーを示す。 図6Gは、段階的画像運動補償が、図6A〜6Cの所定条件の下で、飛行クロ スライン方向での補償なしで実行された場合の画像運動補償のエラーを示す。 図6Hは、所定の第2の条件セットの下でのアレイの画像運動の例を示す。 図6Iは、式(6)による近似的不均衡が、式(4)による実際の不均衡の代 わりに図6Hの例に存在するときの画像運動補償のエラーを示す。 図6Jは、段階的運動補償が、図6Hの条件下で、飛行クロスライン方向での 補償なしで実行された場合の画像運動補償のエラーを示す。 図7Aは、本発明の有利な実施例による電子光学的カメラアセンブリを使用し た空中偵察装置の概略図で ある。 図7Bは、図7Aのカメラアセンブリの一部透明拡大図である。ここには、電 子光学的画像アレイを含む種々の要素の関係が示されている。 図8は、図1〜図7のアレイの動作を制御する電子装置のブロック回路図であ る。 図9は、図8に示された駆動および制御回路の詳細なブロック回路図であり、 ピクセル情報を画像アレイの各セルに伝送するカウンタおよびクロック装置が示 されている。 図10は、カメラ制御コンピュータのブロック回路図であり、アレイの各セル ごとの電荷伝送速度を検出するための機能を示す。 図11は、揮発性セルの一部の概略図である。ここでは、アレイのフォトサイ ト間のチャネルストップ領域の上部に金属化部が示されている。これはドライブ クロックをセルに供給し、電荷を1つのピクセルから別のピクセルに行および列 方向に伝送するためのものである。 発明の有利な実施例の詳細な説明 I.概観 図1を参照すると、偵察航空機22が本発明による画像アレイ32を搬送して おり、ポイントA,B,C,Dにより画定されたシーンを通過する。アレイは行 および列に配列された複数のピクセル素子からなる。 これらピクセル素子はシーン情報を電荷の形態で記憶し、この電荷は1つのピク セル素子から別のピクセル素子に伝送される。アレイ32は航空機から離れて図 示されており、アレイ32の面に発生する画像運動の例を説明するために極端に 拡大されている。ポイントA,B,C,Dはシーンの境界を形成し、アレイの四 隅のポイントA’,B’,C’,D’に画像化される。航空機は速度Vで前進し 、地上高度はHである。航空機の偵察装置はレンズを含み、レンズ軸LAは水平 以下のカメラ仰角δに配向されている。 露出期間中にアレイには画像運動が、航空機の前進運動、およびロール軸R、 ピッチ軸PIおよび/またはヨー軸Yをそれぞれ中心にした回転または外乱によ って発生する。アレイの種々の箇所におけるこの画像運動の結合的作用がアレイ 中にベクトル矢印によって示されている。ベクトルの長さは画像運動の大きさを 指示する。また矢印の方向は画像運動の方向を指示する。大きさと方向はアレイ の位置が異なれば異なることに注意されたい。矢印の1つの拡大図に示されたよ うに、画像運動ベクトル18は2つの成分に分解することができる。1つは飛行 インライン上にある成分(アレイのA’とB’の方向)であり、もう1つは飛行 クロスライン上にある成分(B’とC’の方向)である。飛行インラインはアレ イのピクセル素子の列と同じ方向であり、飛行クロスラインはアレイのピクセル 素子の行と同じ方向である。 図2を参照すると、図1のアレイが概略的に示されている。アレイ32は複数 のセルCから編成されている。これは、アレイ中の電荷運動をアレイの異なる領 域で発生する画像運動に調整するためである。各セルは多数の個別ピクセル素子 を有するアレイ32の一部を有し、ピクセル素子は行と列に配列されている。画 像運動速度は典型的には、アレイ全体にわたって場所ごとに異なる。これはロー ル、ピッチおよび/またはヨー軸を中心にした回転の作用によるものである。理 想的には画像運動を補償するために、アレイ中のすべての箇所の画像運動に整合 した画像運動補償を行うべきである。コストパフォーマンスの関係から、アレイ を扱いやすい数のセルC、例えば32,64または256に分割すると有利であ る。そして各セルのピクセルにあるピクセル情報の伝送を、このセルの特定の画 像運動に相当する1つの速度で共通して行う。セル数は少なくとも20であり、 多くの適用例に対しては30から約500の間の数が適当である。このセルの特 定の画像運動は、セル中の複数箇所の平均画像運動、またはこのセルの中心にお いて計算された画像運動とすることができる。 図3を参照すると、図2の任意の1つのセルCiが独立して示されている。こ こでは画像運動ベクトル18が示されている。画像運動は2つの成分、すなわち 飛行インラインに相応する“列”向成分と、飛行クロスラインに相応する“行” 方向成分に分解される。例えば画像中の特定点が露出中にピクセルP1からピク セルP2に移動する。セルCiは、行方向の数百のピクセル素子と、列方向の数 百のピクセル素子からなるから、画像運動を補償するために電荷(シーン情報を 表す)が露出中にステップ状に、全部で30ピクセルだけ上方に、かつ全部で4 0ピクセルだけ右側に伝送される。同じ正味ピクセル情報の伝送がセルの他のピ クセル、例えばピクセルP3とP4に対しても行われる。いくつかのエッジ効果 がセルの境界にあるピクセルに対して観察されるが、これらは典型的には小さく 重要ではない。 図3に示したピクセル情報伝送は、露出期間中の画像運動速度に整合する伝送 速度で行われる。ピクセル情報をまず列方向にすべて一度伝送し、次に行方向に 伝送するとぶれてしまう。従ってピクセル情報は露出中に行および列方向にステ ップごとに行う。例えば1ピクセル上、1ピクセル先;1ピクセル上、2ピクセ ル先;1ピクセル上、1ピクセル先;1ピクセル上、2ピクセル先等々のように 、図3の参照番号17により示されているように行う。これにより実質的に画像 運動の方向と速度が電荷運動に整合し、ぶれが小さくなる。 図4はアレイ32の有利な実施例を示す。この実施 例は2軸画像運動補償を上に説明したように実行する。アレイはn×m個のセル を有する。ここではn=4、m=8である。アレイは列方向に5040個のピク セルを、行方向に10080個のピクセルを有する。従ってセルは各辺に126 0個のピクセルを有する正方形である。これらのピクセルがセルC3,3に示され ている。fx,n,mの意味は、セルn,mに対する行方向のピクセル情報伝送速度であ る。fy,n,mの意味はセルn,mに対する列方向のピクセル情報伝送速度である。読 み出しレジスタ52がアレイ32の下に配置されており、ピクセル情報をアレイ のすべてのピクセルから受け取り、情報を信号処理装置に伝送する。これについ ては下で詳細に説明する。 アレイ32は有利には、電子光学的画像形成器、例えばCCDまたはフォトダ イオードアレイである。この素子は、光検知性サブストレートを有し、材料の選 択に依存して、所定の波長の入射光に対して感度を有することができる。例えば 可視光線およびスペクトルの近赤外線領域である。アレイの構造、アレイ中のセ ル数、およびサブストレートの選択は、デバイスが行おうとする偵察任務の種類 、およびコストパフォーマンスに依存する。有利にはアレイは、各ピクセル素子 がピクセル情報を表す電荷を記憶することができるように選択し、各セルに対す る適切なコントロール線路により電荷が2つの軸に沿って実質的にシーン画像と 同期して伝送されるようにする。このことは図3に示されている。 図4を参照すると、各セルCi,jは固有の独立変数を有し、電荷伝送速度(一 般的にはピクセル単位または電荷移動mm/sまたは電荷移動mm/露出期間に より定められる)が調整可能である。この電荷伝送速度は連続フレーム間で、セ ルの各ピクセルに対する評価画像運動速度に調整される。セルの一部が信号処理 回路によって画像速度および方向の計算に使用される。従って電荷伝送速度を列 の中心に選択することができる。またはセルのコーナーの1つ、または平均とし ても選択することができる。図2の実施例に示した電荷伝送速度はセルに対して 均一のものであることがわかる。しかし典型的にはセルごとに変化し、またアレ イの1露出ごとに変化する。下に詳細に説明するように、カメラ制御コンピュー タと関連の駆動部、および電子回路が電荷伝送速度を連続露出間で、各セルごと に調整する。これにより、露出期間中に各セルに対する電荷伝送速度が連続的に 更新され、画像運動速度に密に整合されることが保証される。 II.システム入力からの画像不均衡(運動)情報の検出 アレイ32の各セルに対する適切なピクセル情報伝送速度の計算をより理解す るために図5A〜Cと図6A〜Jを参照する。そして以下にロール、ピッチおよ びヨーがアレイ面における画像運動に及ぼす影響につ いて述べる。 このセクションの目的は、1)画像不均衡の概念の紹介、2)画像不均衡と画 像運動速度との関係、3)どのように任意のダイナミックポインティングジオメ トリーが不均衡の計算に組み込まれるかである。 を初期画像点xと、時間Tが経過した後のその最終位置xT間の(サイズPのピ クセルにおける)画像不均衡とする(図5A〜C、および下のベクトル表記のセ クションを参照)。さらに、uc,ui,uzをそれぞれ飛行クロスライン方向、 飛行インライン方向、および垂直飛行方向における単位ベクトルとする。ここで は飛行クロスライン方向と飛行インライン方向の、各画点xにおける平均画像運 動速度を求める(ピクセル/sの単位)。 (定義したような)垂直画像運動速度は常に消失することが示されている。 ベクトル表記 ここでは次の慣例表記を使用する。 1.数量(例えばP、T、F)は上部ケースに示され る。ベクトル(例えばx、dT、v、y)は下部ケースに示され、[cross-track in-track normal]Tの形態にある。マトリクス(例えばR、ΔR)は太字で示さ れている。 2.xの転置行列はxTである。xとyのドット積は、数量xTyである。 3.この表記では、x0=x、従ってすべてのxに対してd0(x)=0である。 4.画点xは常に“仮想”画像面にある。この仮想画像面は物理的画像面の瞬時 の配向に関係なく最下点(Nadir)に向いている。各仮想ピクセルはベクトルx= [McP MiP−F]Tに配列されている。ここでFは焦点距離、Mc,i=-1/2Nc,i ...+1/2Nc,iはアレイ32の相対ピクセルアドレス、NcNiはアレイのピク セル次元である。 さらに進めるために、任意の回転Rによる画像点xと、これに相当する対象点 yを持つマップが必要である(図5Bと5Cおよび下の回転表記のセクションを 参照)。Rには関係なく、対象点は常にuT,y=Hの基本面になければならな い。同じように画点は常にuT zx=−Fの仮想画像面に留まる。このマップとそ の逆は次式により与えられる。 直接代入することにより、マップ(3a)(3b)が(非線形であるにもかか わらず)“良好”な画像化数式であることが確認できる。これら数式はそれぞれ を相互に反転し、画点および対象点はそれぞれの面にそのままにし、平行線を平 行線に伝える。 レンズ40(例えば画像化プラットフォーム)を速度vで移動するとする。画 像面の各xに対してそこでは、数式(3a)により、対象yが相応する。このy は瞬時のポインティングマトリクスRにより定義される。時間Tの経過後、同じ 対象、今度はyr≡y+vTがxrに、瞬時の回転RTにより送られる。ここでΔ R≡Rr−Rがポインティングドリフトを定義する。 択一的に、RT≡ΔRRのようにドリフトを定義することもできる。このよう に行う場合、ΔRは(RTおよびRと同じように)ユニタリ回転である。小さな ドリフトに対しては2つのアプローチはほぼ同じである。いずれの場合でも、慣 性ナビゲーション装置によって与えられるRTとRである。画像運動の全く異な る表現については、Donald L.Ligh著、Film Camerasor Digital Sensors?,The C hallenge Ahead For Aerial Imaging,Photogrammetric Engineering and Remote Sensing,Vol.62,No.3 March 1996,pp.285-291参照。 従って数式(3ab)と(1)を使用して、アドレスMcMiを有するいずれか のピクセルにおける画像不均衡に対する一般解が得られる。 すべてのピクセルアドレス(Mc,Mi)に対して、まずxを式4(c)を使用 して計算し、次にxをyまたは対象空間に式4(b)を使用してマッピングし、 次に4(a)を使用して、時間インターバルTの間にピクセルがいくつ移動する か(z要素を備えた3つの成分を有するベクトルは0に等しい)を計算する。動 きとして仮想面にある垂直不均衡uT zdT(x)=0は定義により垂直要素を有 していないことに注意して欲しい。 回転表記 1.回転マトリクス(図5C参照) がクロスライン方向、イントラック方向および垂直方 向を中心にしたピッチ(pitch)角、ロール(roll)角およびヨー(yaw)角によって定 義される。次数はナビゲーション装置によって設定される(例えばナビゲーショ ン装置における機械的ジンバルの次数により)。 2.5(a)における各一次回転が次式により与えられる。 ここでΘ=roll,yaw,pitch、符号慣例はプラットフォームに対して正の回転を、 右斜線、前進斜線および反時計方向に維持する。ここではエントリーが回転軸( Θ=rollが示されている)に対して配置されている。 3.3つのユニタリマトリクスの積であるRがそれ自体ユニタリであることに注 意。従って 4.角速度に関して、ドリフト項 プラットフォーム速度、ドリフト回転、および画像座標における不均衡の依存 性を、画像不均衡一般解(4)を次のように分解するすることにより分離すると 有利である(ここでは必須ではないが)。 これらの分解は短い時間間隔に対してだけ適切に有効である。すなわち、(4a )の分母がほぼ等しい場合だけである。数式(6)の[]項は空間変量拡大(ま たは有効焦点距離)として作用することに注意。これは最下点(Nadir)ポイン ティングの場合にF/Hに縮小する。数式(6)が通常は数式(4)から分離さ れることは有利であるが、一般的に画像不均衡の計算は別個の加算的問題に分解 することができない。 一般解(4)について、画像ジオメトリーに関係なく較正除外できる“システ マティック”不均衡(例えばレンズピンキューション)を否定しない。 2軸画像運動問題に対する解答 飛行交差方向および飛行方向の画像伝送速度をアレイ32の各セルごとに対し て、数式(4c),(4b),(4a)そして(2)の順番で計算する。この計 舞は図9のカメラ制御コンピュータのブロック回路図に示されている。この計算 はアレイの各セルごとに実行される。例えばアレイが16×16セルのグリッド である場合、計算は246のセルに対して実行され、 アレイの各セルに対して行方向および列方向の電荷伝送速度が得られる。これら 512=256×2の伝送速度は次に最も近い許容クロックレートに丸められ、 256のセルコントロールカウンタの各々にラッチされる。露出インターバルの 間、画像(光検知器電荷)が(両方向に)電子的に各セルに対して所定の速度で 伝送される。これについては図3に関連して上にすでに述べた。この処理につい て下にさらに詳細に説明する。 アレイに対して選択された実際のセルサイズは、適用事例、最大許容画像ぶれ 、およびアレイの製造制限に依存する。典型的なセル構成は次のセクションで述 べる。 例 典型的な空中偵察の2つの例に基づき、2軸運動補償の有用性を説明する。第 1の例(図6A〜6F参照)は“高”フレーム率(v/H=600ノット/50 0フィート)と“ワイド”FOV(F=1.5インチ)であり、第2の例(図6 G〜6I参照)は“低”フレーム率(v/H=600ノット/15フィート)と “ナロー”FOV(F=16インチ)である。 これらの例で、航空機に対する回転の角速度(ロールール、ピッチおよびヨー )はそれぞれ、30,10,および10deg/sである。アレイ寸法[クロスイン ]トラックはN=[10080 5040]、ピクセルサイズはP =12μm、露出時間インターバルはT=16msである。他の条件は以下のと おりである。 初期ポインティング=R=R(0,0,0)=最下点 ドリフトポインティング=ΔR=R(Δpitch,Δroll,Δyaw)−R(0,0,0) アレイ寸法[クロスイン]=N=[10080 5040] グリッドサイズ[クロスイン]=[9 9] 図6A〜6Fは、上に述べた第1の実施例での画像不均衡を示す。不均衡は、 数式(2)を使用して画像伝送速度に直接スケーリングすることが常にできる。 画像はこの速度で伝送され、これにより相応する画像ぶれ(すなわち不均衡)が 相殺される。図面上部の説明はクロストラック(行)方向とイントラック(列) 方向における個別ピクセルの数を表す。画像はアレイの遠くへ、中央へ、および エッジ近傍へ移動する。図6A〜6Jではアレイ32は図4から90°回転され ていることに注意されたい。 図6A〜6Cは、数式(4)からの不均衡が飛行軸方向および交差方向に、所 定の定常プラットフォームおよび3つの典型的ドリフトプロセス(すなわち、ロ ール、ピッチ、ヨー)でどの程度変化するかを示す。ここでポインティングドリ フトは専ら画像運動を示す。図6Dは、3つすべてのドリフトを結合した、数式 (5)による正味不均衡を示す。 図6Eは、プラットフォーム速度が含まれた場合の 全不均衡(4)を示す。このドリフトプロセスは、クロストラック不均衡(一定 ポインティングの下で通常はゼロ)の原因となり、実際にイントラック不均衡( 中央最大フィールド位置を除く)を越える。 図6Fは、線形化した不均衡(6)と比較した正確な不均衡(4)を示す。線 形化不均衡のエラー(79クロストラックピクセルおよび40イントラックピク セルまで)が実在し、なぜ数式(4)による正確な不均衡が使用されるかを示す 。 1軸だけの段階的画像動き補償と比較した正確な不均衡(4)が図6Gに示さ れている。ここでも不均衡エラーがそのまま存在する(飛行クロスラインで11 1ピクセルまで、飛行インラインで61ピクセルまで)。 図6Hは、上記2つの例における条件、すなわちロール、ピッチ、ヨーの作用 とプラットフォーム速度との結合に対する画像運動を示す。図6Iは、近似不均 衡(6)におけるエラーを示し、これは実際の不均衡が数式(4)により計算さ れれば除去される。図6Jは、従来の1軸段階的画像動き補償が第2の例の条件 により1軸で使用された場合のエラーを示す。 2つの例の主たる結果が表1に示されている。この表は、飛行方向の交差線と 飛行方向線におけるピクセルに関して種々異なるセルサイズに対しての最大残留 画像ぶれを示す。第2の例に対しては段階的FMCが 実際に、補償を行わないときよりも多くの残留ぶれの原因となっていることに注 意されたい(図6G〜6Iの飛行線上ピクセルで113対77)。従って正確な 画像伝送数式(2)、(4)が、画像アレイが単軸伝送しかサポートしていなく ても有利である。 III.有利な実施例 上記の論議、例および概観を心に留めて、図7Aを参照する。偵察装置20に おける本発明の有利な実施例が航空機22に組み込まれており、直交するロール 軸、ピッチ軸およびヨー軸R,PIおよびYをそれぞれ定めている。各軸は重心 CGを通過する。ロール軸とピッチ軸は双方向面BPを定義し、この面は水平飛 行中は水平である。偵察装置20はカメラアセンブリ36を含み、カメラアセン ブリはレンズ軸LAを定め る。このレンズ軸は対象となるシーンに向けることができる。 航空機22はエビオニクス装置24を有し、この装置は装置20に、航空機対 地速度(V)、航空機地上高度(H)、および航空機のロール、ピッチおよびヨ ー角度位置と速度データを指示する信号を入力する。コンソール28から操作者 26は付加的入力を装置20に入力する。例えば軸LAと水平面との間の仰角δ である。エビオニクス装置24およびコンソール28からの入力はカメラ制御コ ンピュータ34に供給される。このコンピュータは入力を飛行前にプログラムさ れた情報と共に処理し、カメラアセンブリ36に対する制御信号を発生する。 図7Bを参照すると、カメラアセンブリ36は画像アレイ32を有しており、 このアレイは中点CEを含む焦点面FPを画定する。カメラアセンブリ36はま たハウジング38とレンズ40を有する。レンズ40は焦点距離F(図7Bには 示されていない)を有し、中点CEを通る軸LAを定める。開口面APはレンズ 40のアパーチャを軸LAに対して垂直に通過する。シャッター41がアレイを シーンからの放射光に対して選択的に露出するため設けられている。典型的には カメラハウジング38は航空機22からパッシブにフローティングされている。 これは振動またはその他の高周波低振幅の運動を低減するためである。アレイ3 2は安定したプラットフォームに取り付ける必要はない。むしろロール、ピッチ およびヨー運動をアレイの電荷運動を制御することによって補償する。プリント 基板カード39はアレイ32の動作を支援する電子回路を含んでいる。適切な冷 却装置をカメラハウジング内に配置し、暗電流を低減するためアレイを冷却する ことができる。 図7A〜7B、および図4を参照する。露出期間中にシャッター41が開いて いると、シーン情報を表す電荷がアレイ32のピクセルに収集され、次の隣接す るピクセルに、セルに対する所定の電荷伝送速度で伝送される。露出時間が終了 すると(すなわちシャッター41が閉じられると)、シーンを表す累積された電 荷が連続的にアレイ32の1つの行から同時に読み出しレジスタ52へ読み出さ れる。読み出しレジスタ52から、信号は信号処理回路に供給される。読み出し が実行されると、アレイ32は次のシーン露出に対する準備が完了する。この時 点で、下で詳細に説明するように、各セルに対する電荷伝送速度が新たな入力、 例えば飛行速度、高度、カメラ仰角、およびロール、ピッチおよび/またはヨー の新たな入力に依存して更新される。このようにして電荷伝送速度は連続的に、 連続フレーム間で調整され、複数のセルにおける電荷伝送速度がセルの画像運動 速度に整合される。シャッター41は機械的または電子的にアレイ32に埋め込 むことができる。電子的に行う場合には、累積された電荷を露出期間の直前で減 衰する。 図8を参照すると、カメラアセンブリ36とその関連する制御回路がブロック 回路図の形態に示されている。航空機エビオニクス装置24は速度、高度、ロー ル、ピッチ、ヨー角およびそれらのレート情報をバス25を介して入力としてカ メラ制御コンピュータ34に供給する。コンソール28から操作者はコンピュー タ34にバス29を介して仰角δを角度で入力する(図2)。コンピュータ34 には前もって検出されたミッションパラメータ、すなわちレンズ40の焦点距離 F、アレイ32のサイズ、セルの数とアレイのパーティション、ピクセルサイズ 、制御回路マスタクロック周波数(下で述べる)、およびその他の定数、例えば アレイを横斜角モードで使用するのか、または前方斜角モードで使用するのかが 記憶される。 コンピュータ34は電荷伝送速度を上記数式(2)、(4)およびシステム入 力から計算する。データ入力の処理後、コンピュータ34は信号をバス35を介 して伝送し、カメラ36のレンズ軸LAを所望の方向に向け、信号をバス37を 介して伝送し、フレーム露出時間をシャッター41の開閉によって制御し、さら に命令信号をバス64を介して駆動および制御電子回路54に伝送する。駆動お よび制御電子回路54は信号をバス68を介して伝送し、アレイ32のセル中の 電荷運動を、セル中にあるピクセル情報を伝送するため適当な2軸伝送速度に制 御する。マスタクロック38はパルスを、線路59を介して所定のマスタクロッ ク周波数で駆動および制御電子回路54に送出する。択一的にマスタクロックパ ルスをコンピュータ34により供給することもできる。 画像アレイ32からのシーン情報を含む出力ビデオはバス53を介して信号処 理ユニット56に供給される。この信号処理ユニットはまた情報を、バス55を 介して例えばテープのような記録または観察メディア57、および/またはデー タリンクに遠隔地のために伝送する。信号処理ユニット56はまた露出制御フィ ードバックをコンピュータ34にバス61を介して供給し、これによりフレーム 露出時間が最適の信号収集のために調整される。 図9を参照すると、カメラ制御コンピュータ34がブロック回路図に拡大して 示されている。ここには、数式(2)、(4)および(5)から電荷伝送速度を 検出するためのソフトウェアおよびハードウェア要素が示されている。エビオニ クス装置または慣性ナビゲーション装置34は、ロール、ピッチ、ヨー角、およ びそれらの速度データを画像不均衡計算器72にバス25を介して供給する。カ メラ仰角δ情報は操作者コンソール28によりバス29を介して供給される。メ モリ70は、レンズ40に対する焦点距離、露出時間 T、およびセルのパーティションとピクセルサイズ等のシステムパラメータを記 憶する。不均衡計算器は回転マトリクスRを数式(5)から、画像不均衡ベクト ルdTを数式(4)から、前記入力と焦点距離Fに基づいて計算する。 画像不均衡計算器72は、回転マトリクスRと画像不均衡ベクトルデータをラ イン速度計算器74に送出する。ライン速度計算器74はセルに対するライン速 度を数式(2)に従って計算する。ライン速度はセルアドレス発生器76に供給 され、このアドレス発生器はライン速度とアレイパーティション情報Nc,Ni、 およびピクセルアドレス発生器78からのピクセルアドレスを受け取り、駆動電 子回路における各カウンタに対して行および列方向のカウンタ値を発生する。 メモリ(図示せず)をカメラ制御コンピュータ34に設けると有利である。こ のメモリはアレイに対するライン速度を上記のように計算するソフトウェアプロ グラムを記憶する。当業者であれば容易に前記の説明とアルゴリズムに基づいて プログラムを書くことができる。 図10を参照すると、駆動および制御電子回路54が詳細に示されている。こ こでは、マスタクロックパルスが外部クロックの代わりにカメラ制御コンピュー タ34により供給される。カメラ制御コンピュータ34は、行方向Fxi,jでの セルに対する伝送速度、およ び列方向Fyi,jでのセルに対する伝送速度を計算する。ここで、n×mのセル を有するいずれのアレイに対してもi=1...nそしてj=1...mである。カウ ンタCN1,1...CNn,mと関連するクロックドライバCD1,1...CDn,mが設けら れている。カウンタCNi,jの出力側はクロックドライバCDi,jのトリガ入力側 x+/-およy+/-に接続されている。セルC1,1に対する代理カウンタCN1,1は、 コンピュータ34に配置されたマスタクロックからのパルス、フレーム・スター ト/ストップ信号、およびX(行)とY(列)方向に対するプレロード信号を含 む入力をバス64を介して受け取る。プレロード信号はカウンタ値CXi,jとC Yi,jを表し、これらの値はセルに対する電荷伝送速度に関連する。Y方向に対 するプレロード信号はX方向に対するプレロード信号のスレーブである。 カウンタCN1,1がXおよびYプレロード値に関連するカウンタ値まで計数す ると、トリガ信号がカウンタによりクロックドライバCD1,1のトリガ入力側に 送出される。クロックドライバCD1,1はこれに応答して、クロックパルスをセ ルC1,1のピクセルに4フェーズ出力バス68を介して出力し、これによりピク セル情報が均等に1行(X最終値に達するとき)および1列(Y最終値に達する とき)ごとに伝送される。カウンタ値の計数とクロックドライバのトリガ過程は 、シーン露出中に複数回繰り返される。この回数は、アレ イ32の面FP(図7B)における画像運動速度に依存する。アレイ面における 画像運動速度が速ければ、計数およびトリガサイクルも多く繰り返さなければな らない。これは画像運動をアレイ32の電荷運動に同期させるためである。 カウンタプレロード値は正または負であり、これは電荷をアレイの上方または 下方に、また右または左に伝送すべきであるかに依存することに注意されたい。 さらに図10を参照すると、カメラ制御コンピュータ34からの入力信号がデ ータバス64を介して、各セルC1,1〜Cn,mに対する各カウンタCN1,1〜CNn ,m に伝送される。これらの信号はマスタクロック信号、フレーム・スタート/ス トップ信号、およびXとY方向に対するプレロード値を含んでいる。 図11はアレイ32のいくつかのセルを示す。これらは4フェーズクロッキン グされる。クロックドライバ信号がアレイ32の上部から供給され、フォトサイ トの間にあるチャネルストップ領域(N,C)上部の金属化領域102を通過す る。所定の行はセル中のすべての列に接続する必要はないことに注意されたい。 なぜなら、接触接続された信号は水平方向にポリシリコン層をアレイの表面まで 下がるからである。従っていくつかの(垂直の)金属線100をノイズ抑圧絶縁 のためにフローティングまたはアースすることができる。付加的な金属線100 を図示のように、クロック ドライブ信号を内部セル、例えばC2,2およびC3,2に導くため使用することがで きる。 3つ以上のクロックドライブ信号が各セルに対してXとY方向で双方向に電荷 伝送するために必要である。チャネルストップもまた、水平方向の電荷伝送を所 望のように中断するため配置される。この物理的配列と、垂直から水平への電荷 伝送は同期しなければならない。なぜなら図10の“X”カウンタは“Y”カウ ンタのスレーブでなければならないからである。 電荷を水平方向および垂直方向に伝送するためのアレイゲートの構造は当業者 には容易に構成および製造することができる。これらの詳細は、本発明の実施例 で選択される画像形成器の形式に依存するものである。 図11に示されたCCDアーキテクチュアは実質的にフルフレーム画像形成器 構成である。フルフレーム構成は、光収集に使用できるシリコンウェハの割合が 高い大面積アレイを提供する。これに対し、フレーム伝送アーキテクチュアは、 近似的に画像エリアと同じ量のシリコンウェハエリアを占有するフレーム記憶領 域を必要とする。インターライン伝送アーキテクチュアは望ましいものではない 。なぜなら、フルフレーム構成の画像解像度と小さなピクセルピッチを提供しな いからである。インターライン伝送アーキテクチュアはまた、非検知スペースを 隣接するピクセル間に付加 する垂直伝送レジスタを必要とする。このため充填係数と解像度が低下する。X −Yアドレス可能電荷注入素子も本発明に対する別の可能なアーキテクチュアで ある。このようなアレイまたは上記のアーキテクチュアは紫外線、可視光線、ま たは赤外線スペクトル領域で動作することができる。ここに開示した内容は容易 にこれらのアーキテクチュアに適合することができるが、本発明の範囲はこれら 択一的実施例すべてにわたる。 IV.システム動作 図7から図11を参照し、2軸画像運動補償を行うための側方斜角モードでの 画像アレイの動作を説明する。操作者が撮影開始の容易ができると、操作者は仰 角δ(図1)を対象となる地形シーンを画像化するために選択する。この時点で エビオニクス装置24はコンピュータ34に速度データおよび高度データの他に 、ロール、ピッチ、ヨー角と、航空機に対する回転レートを供給する。カメラ制 御コンピュータ34は回転マトリクスRを計算し、さらに各セルに対する行方向 および列方向の電荷伝送速度を数式(4)、(2)に従い、シーン露出直前の瞬 時の航空機データに対して計算する。次にコンピュータ34は、駆動および制御 電子回路54の各カウンタCNに対してプレロードカウンタ値を計算し、プレロ ード値をカウンタにバス64を介して出力する。 操作者が撮影のためにフレームをトリガすると、シャッターが同時に露出期間 の間だけ開放される。この露出期間はコンピュータ34により計算されるか、ま たはここに記憶されている。この実施例では、露出期間は0.01sである。同 時に駆動および制御電子回路54にある各カウンタがマスタクロック周波数でそ のプレロードカウント値まで計数を開始する。計数はカウンタ値までカウントア ップされるか、またはカウンタ値から0までカウントダウンされる。カウンタが 所定数を計数すると、トリガ信号がカウンタCNからこのカウンタに対するクロ ックドライブCDに送出され、クロッキングの1サイクルがセルでトリガされる 。シーン情報を含むピクセル情報(電荷パケット)がこれにより1行だけ列方向 に垂直に、当該セルのすべての列においてシフトダウン(またはシフトアップ) される。同じ計数およびトリガプロセスがこのセルのすべての行に対して行方向 に行われる。 トリガパルスをクロックドライバCDに送出した後、カウンタCDは自動的に 再ロードし、カウンタ値への計数を再び開始する。カウンタ値に再び達すると、 トリガパルスが送出され、クロックドライブCDはピクセル情報を1行だけ垂直 にセルのすべての列においてシフトする。さらにカウンタCNが再ロードし、こ のサイクルが再び実行される。同じプロセスが行方向に対しても実行される。と かくするうちに、行および 列方向に対する計数とトリガサイクルもまたカウンタおよび他のセルに対するク ロックドライバで実行される。各セルは異なる電荷伝送速度と相応するカウンタ 値を有するから、電荷伝送速度を画像運動速度に整合するため、運動部材のない 2軸電子画像運動補償がアレイ32によって実現される。 図4に示した実施例で画像アレイ32は32セルに、パフォーマンスとコスト との引き替えで分割されているが、多数のセルを使用することが所望される。セ ルの数が多ければ、隣接セル間の境界にあるエラー(画像ぶれ)が少なくなる。 しかし64のセルでは2倍のカウンタとクロックドライブが必要であり、このこ とは付加的コストの原因となり、複雑となる。セルの数が少ないと、例えば12 では、制御回路と処理時間も相応して減少し、従ってコストが低下する。しかし セルエッジ近傍の画像ぶれが許容できなくなることもある。アレイのサイズは、 いくつのセルを使用するか決定するときの別のファクタである。8から600の 個別セルを有する分割アライメントがほとんどの目的に適合する。 上記の画像運動補償プロセスをさらに詳細にセルC1,4を使用して説明する。 露出期間中、画像運動の速度と方向は2つの成分に分解される。すなわち、飛行 の交差方向(行)と飛行方向(列)である。この実施例で列方向の画像運動は3 9.92mm/sの速度、ま たは下方に33.26行(0.012mmピクセル)/10msが数式(4)、 (2)から導出されたとする。さらに上方への画像運動は、これも数式(4)、 (2)から13.5mm/s、または上方へ11.25列/10msであるとす る。従ってピクセル情報またはシーン情報を表す電荷パケットを垂直方向に下方 に、列群の列を33.26ピクセルだけ10msの露出期間中に、かつ11.2 5ピクセルだけ上方にシフトしなければならない。より正確には電荷パケットを 1ピクセルだけ列方向に各0.01/33.26sごとに、かつ1ピクセルだけ 上方に各0.01/11.25sごとに移動しなければならない。 このことを実行するために、セルC1,4に対するカウンタCN1,4に、X方向と Y方向に対する所定のプレロードカウント値がロードされる。マスタクロック周 波数が10MHzまたは100ns/カウントであれば、0.01sの積分時間 は露出期間中に100000マスタクロックを計数することとなる。従ってセル C1,4に対するカウント値は列またはY方向に100000/33.26または 3006であり、行またはX方向に100000/11.25または8889で ある。説明のために列方向を使用すると、シャッターの開放時にゼロにセットさ れ、マスタクロック周波数で3006まで計数を開始する。カウント値3006 で整合が得られ、クロックドライバCD1,4が列方向のシフ トのためにトリガされる。セルのすべての列における電荷パケットは次に1行だ け垂直に列方向にシフトされる。カウンタCN1,4がゼロにリセットされ、30 06までの計数を再び開始する。計数とトリガの33全サイクルが露出期間で得 られ、積分時間の残りの時間中にはクロックサイクルはもうトリガされない。同 じプロセスが行方向でのシフトのために実行され、カウンタは8889までカウ ントアップし、行方向のクロッキングサイクルがトリガされ、カウンタがゼロに リセットされ、再び計数が開始される等々。従ってピクセル情報はステップごと にセルC1,4のすべてのピクセルに対して同時に伝送される。 この実施例では、露出期間が0.005sを下回る場合、列方向の画像運動が 33.26/2または16.33ピクセルに積分時間中になり、露出期間中の全 マスタクロック数は50000に二等分されることに注意されたい。しかしカウ ント値は同じである。従って、露出期間は本発明の実施例ではクリティカルでは なく、操作者によって画像運動補償に影響を与えることなく変化することができ る。 任意のセルC1,4に対して説明した上記プロセスは、アレイ32の他のカウン タおよびクロックドライバに対しても並行的に実行される。シーン露出の終了時 にシャッターは閉鎖され、ピクセル情報がアレイ32からレジスタ52に読み出 される。操作者が別の撮影 の準備ができると、カメラ制御コンピュータは新たな回転マトリクスRと画像運 動速度を2軸で各セルに対して検出し、上記プロセスを繰り返す。 結論 本発明の有利な実施例の前記説明では、画像アレイ32が1つで、モノリシッ ク検知器であることを前提としている。ここに開示された画像アレイと同等の検 知器を、小さな個別面積のアレイをモザイク状に大きなアレイに継ぎ合わせるこ とによって得ることもできる。個別アレイ(たぶん4,20または100)は電 子的にセルに結合され、セルにあるピクセル情報を行方向および列方向に画像運 動速度に整合した伝送速度で伝送する手段を有する。“モザイク”の素子として 使用できるこのようなアレイは、Thomson CSF THX 31157 charge-coupled devic eであり、行および列方向に電荷を伝送することが必要であるので変形されたゲ ート構造を有する。モザイクでは、各CCDは個別セルとして別個に制御するこ とができる。本請求項において“アレイ”は、シングル・モノリシックアレイ、 個別のアレイが電子的、光学的または物理的に相互に結合されたアレイ、または ハイブリッドモザイクアレイに取り付けられた個別の離散的検知器を含むもので ある。 本発明の有利な実施例の説明は、2軸画像運動補償を電子光学的に実行するた めの方法および装置につい て行ったが、当業者であれば請求の範囲の記載された本発明の枠から逸脱するこ となく多数の択一的例を想到することができる。例えば、ここに開示さえたもの 以外のデジタル電子制御回路を、画像アレイの列群での電荷伝送速度の制御に使 用することができる。さらにアナログ回路、遅延回路、または他の形式の制御回 路を、画像運動補償を実行するための電荷伝送速度の制御にために使用すること ができる。さらに開示されたデジタル電子制御回路によって実行される多数の機 能を、コンピュータ34またはほかのデータプロセッサによるソフトウェアで実 行することができる。前に述べたように、電子光学的画像アレイに対する択一的 アーキテクチュアを選択することができる。請求の範囲に定義された本発明はこ のような変形および択一的実施例すべてを網羅するものである。
【手続補正書】 【提出日】1998年10月7日 【補正内容】 請求の範囲 1. 2軸画像運動補償を行う画像装置であって、 該画像装置は、移動体に搭載されるものであり、 該移動体は、当該移動体の外側シーンを基準にして直線運動を行うことができ 、 前記シーンを画像化する形式の画像装置において、 行および列に配列されたピクセル素子からなるアレイと、コンピュータ装置と 、該コンピュータ装置に応答してピクセル情報を伝送する伝送手段とを有し、 前記行は行方向を、前記列は列方向を定め、 前記ピクセル素子は、前記シーンの画像を表すピクセル情報を記憶し、 前記画像は、前記シーンに対してアレイを露出するとき前記ピクセル素子のア レイを基準にして運動を有しており、 当該運動は、行方向と列方向の任意の組み合わせであり、前記画像装置および 移動体が前記シーンに対して線形前進運動することと、画像装置および移動体が シーンに対して回転することによって生じるものであり、 前記コンピュータ装置により、移動体ナビゲーション装置から前記線形前進運 動と回転運動の情報を受け取り、前記画像運動を2つの直交成分、すなわち行方 向と列方向に分解し、 前記コンピュータ装置はさらに、前記アレイがシーンに露出されている間、行 方向および列方向における画像運動の大きさをピクセル素子のアレイを基準にし て検出する手段を有し、 前記伝送手段は、アレイ内のピクセル情報をアレイがシーンに露出されている 間、行方向および列方向に伝送し、 当該伝送は、行方向および列方向における画像運動に実質的に同期して行われ 、 これによりアレイにより発生される画像の解像度が保護され、 前記ピクセル情報の伝送により、シーンを基準にした画像装置および移動体の 線形前進運動と回転が補償される、 ことを特徴とする画像装置。 2. 前記セルのアレイは、前記ピクセル素子の複数のセルに編成されており 、 前記セルの少なくとも1つにある前記ピクセル情報は均等に前記行方向および 前記列方向に、前記セルにある前記ピクセル素子の各々に対して伝送される、請 求項1記載の画像装置。 3. 前記アレイはCCDを有している、請求項1記載の画像装置。 4. 前記アレイは空中移動体に取り付けられている、請求項1から3までの いずれか1項記載の画像装置。 5. 前記アレイは空中移動体に取り付けられており、 前記空中移動体は、当該空中移動体のロール、ピッチおよびヨーについての情 報を発生する発生装置を有しており、 前記伝送手段は、計算手段と、ライン速度検出手段とを有し、 前記計算手段は、前記発生装置に応答して、前記空中移動体の回転に対する回 転マトリクスを計算し、かつ前記ピクセルに対する運動不均衡を前記回転マトリ クスから計算し、 前記ライン速度検出手段は、前記計算手段に応答して、前記アレイに対するピ クセル情報伝送速度を前記行方向および前記列方向で検出し、 前記アレイにおけるピクセル情報は前記行方向および前記列方向に前記ピクセ ル情報伝送速度に従って伝送され、 これにより前記画像運動に対して補償が行われる、請求項1記載の画像装置。 6. 前記伝送手段はさらに、第1のカウンタおよびクロックドライバセット と、第2のカウンタおよびクロックドライバセットとを有しており、 前記第1のカウンタおよびクロックドライバセットは、前記アレイの前記ピク セル情報を前記行方向に伝送し、 第2のカウンタおよびクロックドライバセットは、前記アレイの前記ピクセル 情報を前記列方向に伝送する、請求項5記載の画像装置。 7. 空中移動体に取り付け、シーンの画像を発生するための空中偵察カメラ 装置であって、該装置は飛行方向における航空機運動を補償し、かつ前記空中移 動体のロール、ピッチ、またはヨー外乱を補償し、 前記空中移動体は、航空機外乱情報を発生するための装置を航空機内に有し、 当該カメラ装置は、ピクセル素子が行および列に配列されたアレイと、画像不 均衡発生手段と、ピクセル伝送手段とを有し、 前記アレイは、前記シーンを表すピクセル情報を記憶し、 前記行は行方向を、前記列は列方向を定め、 前記画像不均衡発生手段は、前記航空機外乱情報に応答して、前記ピクセル素 子に対する画像不均衡ベクトルを前記行および列方向で発生し、かつ行ピクセル 情報伝送速度と列ピクセル情報伝送速度とを発生し、 前記ピクセル伝送手段は、前記ピクセル情報を前記ピクセル素子の1つから別 の1つに行方向および列方向に移動し、 かつ前記ピクセル伝送手段は、前記ピクセル情報を前記行および列ピクセル情 報伝送速度で伝送し、 前記行および列ピクセル情報伝送速度は、飛行線上の伝送速度の和を前記空中 移動体の前進運動を補償するために含んでおり、かつ前記画像不均衡ベクトルか ら導出された画像不均衡伝送速度を前記空中移動体のロール、ピッチおよびヨー 外乱の少なくとも1つを補償するために含んでいる、 ことを特徴とする空中偵察カメラ装置。 8. 前記アレイはCCDを有する、請求項7記載の空中偵察カメラ装置。 9. 前記アレイは電荷注入素子を有する、請求項7記載の空中偵察カメラ装 置。 10. 前記アレイは赤外線アレイを有する、請求項7記載の空中偵察カメラ 装置。 11. 前記アレイのピクセルは複数のセルに編成されており、 各セルはピクセル群を有し、 該ピクセル群は前記列方向に少なくとも1つのピクセルと、前記行方向に少な くとも1つのピクセルとかなる矩形を形成し、 前記セルの少なくとも1つにおける前記ピクセル情報は、均等に前記行方向と 前記列方向に、前記セルの前記ピクセル素子の各々に対して伝送され、 前記行および列情報伝送速度は前記アレイの各々のセルに対して別個に計算さ れる、請求項7記載の空中偵察カメラ装置。 12. 前記複数のセルは少なくとも8つのセルを有する、請求項11記載の 空中偵察カメラ装置。 13. 前記複数のセルは30から600のセルを有する、請求項12記載の 空中偵察カメラ装置。 14. 前記行および列ピクセル情報伝送速度は前記空中移動体のロール、ピ ッチおよびヨー回転の補正を、前記アレイが前記シーンに露出されている期間中 に行う、請求項7記載の空中偵察カメラ装置。 15. 画像装置に対するコンピュータプログラムを記憶する機械読み出し可 能記憶媒体であって、前記コンピュータプログラムは、 回転マトリクスRとドリフトマトリクスΔRを、空中偵察移動体のロール、ピ ッチ、およびヨー情報を含む入力から計算するルーチンと、 画像不均衡ベクトルdT(x)を計算するルーチンと、 ここでdT(x)は、行方向および列方向を定める行および列に配列されたピ クセルからなる画像アレイのポイント(x)に対する画像不均衡を含み、 F=前記アレイに対するレンズの焦点距離、 P=前記アレイのピクセルサイズ y=対象ポイント v=前記空中偵察移動体の前進速度 x=前記アレイの画点 T=前記アレイの露出時間であり、 前記アレイに対するピクセル情報伝送速度を、前記画像不均衡ベクトルから前 記行方向および列方向において計算するルーチンと、 からなる記憶媒体。 16. シーン画像の相対運動を、電子光学的画像アレイを基準にして電子的 に補償する方法であって、 前記アレイは複数のピクセル素子を有し、 該ピクセル素子は行および列に配列されたピクセル情報を記憶し、 前記行は行方向を、前記列は列方向を定め、 前記アレイは移動体に取り付けられている形式の補償方法において、 前記画像アレイの面における行方向および列方向の運動速度を検出し、 該運動速度は前記移動体の前進運動および角度回転によって生じるものであり 、 前記運動速度の検出は、移動体に搭載されたナビゲーション装置からの移動体 前進運動および回転に関する情報から行い、 前記検出ステップを、アレイがシーンに対して露出されているときに行い、 前記アレイをシーンに対して露出し、 前記アレイにおけるピクセル情報を行方向および列方向に、実質的に前記画像 運動速度と等しい行伝送速度および列伝送速度で伝送し、 これにより前記移動体の前記前進運動および角度回転を補償して、前記アレイ から発生する画像の解像度を保護する、 ことを特徴とする電子的補償方法。 17. 前記アレイはピクセル素子からなる複数のセルに編成されており、 前記検出ステップと前記伝送ステップは前記セルの各々に対して独立して実行 される、請求項16記載の方法。 18. 前記行方向伝送速度は、 uc T×dT(x)/Tに比例し、 前記列方向伝送速度は、 ui T×dT(x)/Tに比例し、 ここでuc Tは前記行方向でのベクトル単位であり、前記ui Tは前記列方向での ベクトル単位であり、前記dT(x)/Tは画像不均衡ベクトルである、請求項 16記載の方法。 19. 前記アレイはCCDを有する、請求項16記載の方法。 20. 前記アレイは電荷注入素子を有する、請求項16記載の方法。 21. 前記アレイは赤外線アレイを有する、請求項16記載の方法。 22. 前記アレイの前記ピクセルは複数のセルに編成されており、 各セルはピクセル群を含み、 該ピクセル群は前記列方向の少なくとも1つのピクセルと前記行方向の少なく とも1つのピクセルからなる矩形を形成し、 前記セルの少なくとも1つにおける前記ピクセル情報を均等に行方向および列 方向に前記セル中の各ピクセル素子に対して伝送し、 前記行方向および列方向の伝送速度を前記アレイ中の各セルに対して独立して 計算する、請求項16記載の方法。 23. 前記複数のセルは少なくとも22のセルを有する、請求項22記載の 方法。 24. 前記複数のセルは30から600のセルを有する、請求項23に記載 の方法。 25. 前記行方向および列方向伝送速度は、前記アレイがシーンに露出され ている期間中の前記空中移動体のロール、ピッチ、ヨー回転を補償する、請求項 17記載の方法。 26. ピクセル素子の前記アレイは、スペクトルの赤外線領域におけるシー ンからの放射光に対して感度のある検知器を有する、請求項1記載の画像装置。 27. ピクセル素子の前記アレイは、CMOS検知器である、請求項1記載 の画像装置。 28. ピクセル素子の前記アレイは、スペクトルの紫外線領域におけるシー ンからの放射光に対して感度のある検知器を有する、請求項1記載の画像装置。
───────────────────────────────────────────────────── フロントページの続き (72)発明者 ウイリアム アール プフィスター アメリカ合衆国 イリノイ シャウムバー グ エルムドライヴ 1325 (72)発明者 ケネス ジェイ ジェーカーティス アメリカ合衆国 イリノイ バーリントン ウェストメートンロード 26225 (72)発明者 スティーヴン アール ベラン アメリカ合衆国 イリノイ マウントプロ スペクト サウスエマーソン 717 (72)発明者 ラッセル エイ ベネット アメリカ合衆国 イリノイ マックヘンリ ー ウェストジャステンロード 2915 (72)発明者 ゴードン エル ボーンズ アメリカ合衆国 カリフォルニア リバー サイド ポロコート 2019

Claims (1)

  1. 【特許請求の範囲】 1. 2軸画像運動補償を行う画像アレイにおいて、 行および列に配列されたピクセル素子のアレイを有し、 前記行は行方向を、前記列は列方向を定め、 前記ピクセル素子は、シーンの画像を表すピクセル情報を記憶し、 前記画像は、ピクセル素子の前記アレイに対して運動を有しており、 前記アレイのピクセル情報を前記行方向および前記列方向に、前記画像の運動 と実質的に同期して伝送する伝送手段を有し、 これにより、前記アレイにより発生される画像の解像度が保護される、 ことを特徴とする画像アレイ。 2. 前記セルのアレイは、前記ピクセル素子の複数のセルに編成されており 、 前記セルの少なくとも1つにある前記ピクセル情報は均等に前記行方向および 前記列方向に、前記セルにある前記ピクセル素子の各々に対して伝送される、請 求項1記載のアレイ。 3. 前記アレイはCCDを有している、請求項1記載のアレイ。 4. 前記アレイは空中移動体に取り付けられている、請求項1から3までの いずれか1項記載のアレイ。 5. 前記アレイは空中移動体に取り付けられており、 前記空中移動体は、当該空中移動体のロール、ピッチおよびヨーについての情 報を発生する発生装置を有しており、 前記伝送手段は、計算手段と、ライン速度検出手段とを有し、 前記計算手段は、前記発生装置に応答して、前記空中移動体の回転に対する回 転マトリクスを計算し、かつ前記ピクセルに対する運動不均衡を前記回転マトリ クスから計算し、 前記ライン速度検出手段は、前記計算手段に応答して、前記アレイに対するピ クセル情報伝送速度を前記行方向および前記列方向で検出し、 前記アレイにおけるピクセル情報は前記行方向および前記列方向に前記ピクセ ル情報伝送速度に従って伝送され、 これにより前記画像運動に対して補償が行われる、請求項1記載のアレイ。 6. 前記伝送手段はさらに、第1のカウンタおよびクロックドライバセット と、第2のカウンタおよびクロックドライバセットとを有しており、 前記第1のカウンタおよびクロックドライバセットは、前記アレイの前記ピク セル情報を前記行方向に伝送し、 第2のカウンタおよびクロックドライバセットは、前記アレイの前記ピクセル 情報を前記列方向に伝送する、請求項5記載のアレイ。 7. 空中移動体に取り付け、シーンの画像を発生するための空中偵察カメラ 装置であって、該装置は飛行方向における航空機運動を補償し、かつ前記空中移 動体のロール、ピッチ、またはヨー外乱を補償し、 前記空中移動体は、航空機外乱情報を発生するための装置を航空機内に有し、 当該カメラ装置は、ピクセル素子が行および列に配列されたアレイと、画像不 均衡発生手段と、ピクセル伝送手段とを有し、 前記アレイは、前記シーンを表すピクセル情報を記憶し、 前記行は行方向を、前記列は列方向を定め、 前記画像不均衡発生手段は、前記航空機外乱情報に応答して、前記ピクセル素 子に対する画像不均衡ベクトルを前記行および列方向で発生し、かつ行ピクセル 情報伝送速度と列ピクセル情報伝送速度とを発生し、 前記ピクセル伝送手段は、前記ピクセル情報を前記ピクセル素子の1つから別 の1つに行方向および列方向に移動し、 かつ前記ピクセル伝送手段は、前記ピクセル情報を前記行および列ピクセル情 報伝送速度で伝送し、 前記行および列ピクセル情報伝送速度は、飛行線上の伝送速度の和を前記空中 移動体の前進運動を補償するために含んでおり、かつ前記画像不均衡ベクトルか ら導出された画像不均衡伝送速度を前記空中移動体のロール、ピッチおよびヨー 外乱の少なくとも1つを補償するために含んでいる、 ことを特徴とする空中偵察カメラ装置。 8. 前記アレイはCCDを有する、請求項7記載の空中偵察カメラ装置。 9. 前記アレイは電荷注入素子を有する、請求項7記載の空中偵察カメラ装 置。 10. 前記アレイは赤外線アレイを有する、請求項7記載の空中偵察カメラ 装置。 11. 前記アレイのピクセルは複数のセルに編成されており、 各セルはピクセル群を有し、 該ピクセル群は前記列方向に少なくとも1つのピクセルと、前記行方向に少な くとも1つのピクセルとかなる矩形を形成し、 前記セルの少なくとも1つにおける前記ピクセル情報は、均等に前記行方向と 前記列方向に、前記セルの前記ピクセル素子の各々に対して伝送され、 前記行および列情報伝送速度は前記アレイの各々の セルに対して別個に計算される、請求項7記載の空中偵察カメラ装置。 12. 前記複数のセルは少なくとも8つのセルを有する、請求項11記載の 空中偵察カメラ装置。 13. 前記複数のセルは30から600のセルを有する、請求項12記載の 空中偵察カメラ装置。 14. 前記行および列ピクセル情報伝送速度は前記空中移動体のロール、ピ ッチおよびヨー回転の補正を、前記アレイが前記シーンに露出されている期間中 に行う、請求項7記載の空中偵察カメラ装置。 15. コンピュータプログラムを記憶する機械読み出し可能記憶媒体であっ て、前記コンピュータプログラムは、 回転マトリクスRとドリフトマトリクスΔRを、空中偵察移動体のロール、ピ ッチ、およびヨー情報を含む入力から計算するルーチンと、 画像不均衡ベクトルdT(x)を計算するルーチンと、 ここでdT(x)は、行方向および列方向を定める行および列に配列されたピ クセルからなる画像アレイのポイント(x)に対する画像不均衡を含み、 F=前記アレイに対するレンズの焦点距離、 P=前記アレイのピクセルサイズ y=対象ポイント v=前記空中偵察移動体の前進速度 x=前記アレイの画点 T=前記アレイの露出時間であり、 前記アレイに対するピクセル情報伝送速度を、前記画像不均衡ベクトルから前 記行方向および列方向において計算するルーチンと、 からなる記憶媒体。 16. シーン画像の相対運動を、電子光学的画像アレイを基準にして電子的 に補償する方法であって、 前記アレイは複数のピクセル素子を有し、 該ピクセル素子は行および列に配列されたピクセル情報を記憶し、 前記行は行方向を、前記列は列方向を定め、 前記アレイは移動体に取り付けられている形式の補償方法において、 前記画像アレイの面における行方向および列方向の運動速度を検出し、 該運動速度は前記移動体の前進運動および角度回転によって生じるものであり 、 前記アレイにおけるピクセル情報を行方向および列方向に、実質的に前記画像 運動速度と等しい行伝送速度および列伝送速度で伝送し、 これにより前記移動体の前記前進運動および角度回 転を補償して、前記アレイから発生する画像の解像度を保護する、 ことを特徴とする電子的補償方法。 17. 前記アレイはピクセル素子からなる複数のセルに編成されており、 前記検出ステップと前記伝送ステップは前記セルの各々に対して独立して実行 される、請求項16記載の方法。 18. 前記行方向伝送速度は、 uc T×dT(x)/Tに比例し、 前記列方向伝送速度は、 ui T×dT(x)/Tに比例し、 ここでuc Tは前記行方向でのベクトル単位であり、前記ui Tは前記列方向での ベクトル単位であり、前記dT(x)/Tは画像不均衡ベクトルである、請求項 16記載の方法。 19. 前記アレイはCCDを有する、請求項16記載の方法。 20. 前記アレイは電荷注入素子を有する、請求項16記載の方法。 21. 前記アレイは赤外線アレイを有する、請求項16記載の方法。 22. 前記アレイの前記ピクセルは複数のセルに編成されており、 各セルはピクセル群を含み、 該ピクセル群は前記列方向の少なくとも1つのピクセルと前記行方向の少なく とも1つのピクセルからなる矩形を形成し、 前記セルの少なくとも1つにおける前記ピクセル情報を均等に行方向および列 方向に前記セル中の各ピクセル素子に対して伝送し、 前記行方向および列方向の伝送速度を前記アレイ中の各セルに対して独立して 計算する、請求項16記載の方法。 23. 前記複数のセルは少なくとも22のセルを有する、請求項22記載の 方法。 24. 前記複数のセルは30から600のセルを有する、請求項23に記載 の方法。 25. 前記行方向および列方向伝送速度は、前記アレイがシーンに露出され ている期間中の前記空中移動体のロール、ピッチ、ヨー回転を補償する、請求項 17記載の方法
JP53991897A 1996-05-07 1997-04-09 2軸画像運動補償を行う電子光学的画像検知アレイ Expired - Fee Related JP3392422B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US08/646,509 1996-05-07
US08/646,509 US5798786A (en) 1996-05-07 1996-05-07 Electro-optical imaging detector array for a moving vehicle which includes two axis image motion compensation and transfers pixels in row directions and column directions
PCT/US1997/005751 WO1997042659A1 (en) 1996-05-07 1997-04-09 Electro-optical imaging detector array with two axis image motion compensation

Publications (2)

Publication Number Publication Date
JPH11509714A true JPH11509714A (ja) 1999-08-24
JP3392422B2 JP3392422B2 (ja) 2003-03-31

Family

ID=24593324

Family Applications (1)

Application Number Title Priority Date Filing Date
JP53991897A Expired - Fee Related JP3392422B2 (ja) 1996-05-07 1997-04-09 2軸画像運動補償を行う電子光学的画像検知アレイ

Country Status (7)

Country Link
US (2) US5798786A (ja)
EP (1) EP0897596B1 (ja)
JP (1) JP3392422B2 (ja)
CA (1) CA2248650C (ja)
DE (1) DE69715397T2 (ja)
IL (1) IL126374A (ja)
WO (1) WO1997042659A1 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2017532798A (ja) * 2014-07-17 2017-11-02 エルビット・システムズ・リミテッド 遠隔画像の安定化及び表示

Families Citing this family (97)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6108032A (en) * 1996-11-05 2000-08-22 Lockheed Martin Fairchild Systems System and method for image motion compensation of a CCD image sensor
WO1998020301A1 (en) 1996-11-05 1998-05-14 Lockheed Martin Corporation Electro-optical reconnaissance system with forward motion compensation
DE19714396A1 (de) * 1997-04-08 1998-10-15 Zeiss Carl Fa Photogrammetrische Kamera
US6253161B1 (en) * 1997-07-10 2001-06-26 Universite Laval Integrated motion vision sensor
US6714240B1 (en) * 1998-06-23 2004-03-30 Boeing North American, Inc. Optical sensor employing motion compensated integration-device and process
US7554578B2 (en) * 2000-07-11 2009-06-30 Phase One A/S Digital camera with integrated accelerometers
AU2002216609A1 (en) 2000-08-31 2002-03-13 Recon/Optical, Inc. Dual band framing reconnaissance camera
US6366734B1 (en) 2000-08-31 2002-04-02 Recon/Optical, Inc. Method of forward motion compensation in an aerial reconnaissance camera
US6374047B1 (en) 2000-08-31 2002-04-16 Recon/Optical, Inc. Cassegrain optical system for framing aerial reconnaissance camera
US6477326B1 (en) 2000-08-31 2002-11-05 Recon/Optical, Inc. Dual band framing reconnaissance camera
US6658207B1 (en) 2000-08-31 2003-12-02 Recon/Optical, Inc. Method of framing reconnaissance with motion roll compensation
US7046283B1 (en) 2000-10-11 2006-05-16 Dalsa, Inc. Arrangements of clock line drivers
US20020180876A1 (en) * 2001-06-01 2002-12-05 Sobol Robert E. Intelligent motion blur minimization
US6747686B1 (en) 2001-10-05 2004-06-08 Recon/Optical, Inc. High aspect stereoscopic mode camera and method
JP3886769B2 (ja) * 2001-10-26 2007-02-28 富士通株式会社 補正画像生成装置および補正画像生成プログラム
EP1312892A1 (de) * 2001-11-20 2003-05-21 Wolf D. Dr. Teuchert Detektoranordnung zur Aufnahme eines Bildstreifens mit mehreren Detektoren
IL149934A (en) † 2002-05-30 2007-05-15 Rafael Advanced Defense Sys Airborne intelligence photography system
US8483960B2 (en) 2002-09-20 2013-07-09 Visual Intelligence, LP Self-calibrated, remote imaging and data processing system
USRE49105E1 (en) 2002-09-20 2022-06-14 Vi Technologies, Llc Self-calibrated, remote imaging and data processing system
US7424133B2 (en) 2002-11-08 2008-09-09 Pictometry International Corporation Method and apparatus for capturing, geolocating and measuring oblique images
JP4179855B2 (ja) * 2002-11-22 2008-11-12 トヨタ自動車株式会社 燃料電池システム
US20040100563A1 (en) 2002-11-27 2004-05-27 Sezai Sablak Video tracking system and method
JP4328551B2 (ja) * 2003-03-05 2009-09-09 富士重工業株式会社 撮像姿勢制御装置
US7131529B2 (en) * 2003-07-01 2006-11-07 Casa Herrera, Inc. Oven conveyor alignment system apparatus and method
US7308342B2 (en) * 2004-01-23 2007-12-11 Rafael Armament Development Authority Ltd. Airborne reconnaissance system
US7742077B2 (en) 2004-02-19 2010-06-22 Robert Bosch Gmbh Image stabilization system and method for a video camera
US7382400B2 (en) * 2004-02-19 2008-06-03 Robert Bosch Gmbh Image stabilization system and method for a video camera
DE102004017730B4 (de) * 2004-04-10 2006-05-24 Christian-Albrechts-Universität Zu Kiel Verfahren zur Rotationskompensation sphärischer Bilder
US8212872B2 (en) * 2004-06-02 2012-07-03 Robert Bosch Gmbh Transformable privacy mask for video camera images
US20050270372A1 (en) * 2004-06-02 2005-12-08 Henninger Paul E Iii On-screen display and privacy masking apparatus and method
US9210312B2 (en) 2004-06-02 2015-12-08 Bosch Security Systems, Inc. Virtual mask for use in autotracking video camera images
IL163565A (en) 2004-08-16 2010-06-16 Rafael Advanced Defense Sys Airborne reconnaissance system
FR2882137B1 (fr) * 2005-02-15 2007-04-20 Thales Sa Dispositif d'acquisition d'une image numerique par balayage avec stabilisation passive
US7511738B1 (en) * 2005-03-31 2009-03-31 Lockheed Martin Corporation Massively-parallel three-axis stabilization of focal plane data
US7443421B2 (en) 2005-04-05 2008-10-28 Hewlett-Packard Development Company, L.P. Camera sensor
IL169482A (en) 2005-06-30 2012-04-30 Rafael Advanced Defense Sys Method for reducing the number of scanning steps in an airborne reconnaissance system and a reconnaissance system operating according to said method
AT504626B1 (de) * 2006-01-12 2009-07-15 Arc Seibersdorf Res Gmbh Verfahren und einrichtung zur aufnahme, prüfung und auswertung von bildern eines gegenstandes
US7873238B2 (en) 2006-08-30 2011-01-18 Pictometry International Corporation Mosaic oblique images and methods of making and using same
DE102006055903A1 (de) * 2006-11-27 2008-05-29 Adc Automotive Distance Control Systems Gmbh Erkennung von Fahrzeuglichtern mit einer Kamera
DE102006055904A1 (de) * 2006-11-27 2008-05-29 Adc Automotive Distance Control Systems Gmbh Erkennung und Kategorisierung von Lichtpunkten mit einer Kamera in einer Fahrzeugumgebung
US10337862B2 (en) 2006-11-30 2019-07-02 Rafael Advanced Defense Systems Ltd. Digital mapping system based on continuous scanning line of sight
US8593518B2 (en) * 2007-02-01 2013-11-26 Pictometry International Corp. Computer system for continuous oblique panning
US8520079B2 (en) * 2007-02-15 2013-08-27 Pictometry International Corp. Event multiplexer for managing the capture of images
US9262818B2 (en) 2007-05-01 2016-02-16 Pictometry International Corp. System for detecting image abnormalities
US8385672B2 (en) 2007-05-01 2013-02-26 Pictometry International Corp. System for detecting image abnormalities
US8416298B2 (en) * 2007-08-07 2013-04-09 Visionmap Ltd. Method and system to perform optical moving object detection and tracking over a wide area
US7991226B2 (en) 2007-10-12 2011-08-02 Pictometry International Corporation System and process for color-balancing a series of oblique images
US8531472B2 (en) 2007-12-03 2013-09-10 Pictometry International Corp. Systems and methods for rapid three-dimensional modeling with real façade texture
US8320615B2 (en) * 2008-02-27 2012-11-27 Honeywell International Inc. Systems and methods for recognizing a target from a moving platform
US8330810B2 (en) * 2008-02-27 2012-12-11 Honeywell International Inc. Systems and method for dynamic stabilization of target data detected from a moving platform
US8497905B2 (en) 2008-04-11 2013-07-30 nearmap australia pty ltd. Systems and methods of capturing large area images in detail including cascaded cameras and/or calibration features
US8675068B2 (en) 2008-04-11 2014-03-18 Nearmap Australia Pty Ltd Systems and methods of capturing large area images in detail including cascaded cameras and/or calibration features
US8588547B2 (en) 2008-08-05 2013-11-19 Pictometry International Corp. Cut-line steering methods for forming a mosaic image of a geographical area
US8458105B2 (en) * 2009-02-12 2013-06-04 Decisive Analytics Corporation Method and apparatus for analyzing and interrelating data
US20100235314A1 (en) * 2009-02-12 2010-09-16 Decisive Analytics Corporation Method and apparatus for analyzing and interrelating video data
KR101552907B1 (ko) * 2009-02-27 2015-09-14 삼성전자주식회사 디지털 촬영장치, 그 제어방법 및 제어방법을 실행시키기 위한 프로그램을 저장한 기록매체
US8141473B2 (en) 2009-03-18 2012-03-27 Alliant Techsystems Inc. Apparatus for synthetic weapon stabilization and firing
US8401222B2 (en) 2009-05-22 2013-03-19 Pictometry International Corp. System and process for roof measurement using aerial imagery
JP5288482B2 (ja) * 2009-07-21 2013-09-11 Nec東芝スペースシステム株式会社 撮像装置、撮像方法、撮像回路及びプログラム
US9330494B2 (en) 2009-10-26 2016-05-03 Pictometry International Corp. Method for the automatic material classification and texture simulation for 3D models
WO2011089477A1 (en) * 2010-01-25 2011-07-28 Tarik Ozkul Autonomous decision system for selecting target in observation satellites
US8477190B2 (en) 2010-07-07 2013-07-02 Pictometry International Corp. Real-time moving platform management system
IL207590A (en) 2010-08-12 2016-11-30 Rafael Advanced Defense Systems Ltd A method and system for increasing the size of the area scanned at a given time by an airborne electro-optical photo system
US8922648B2 (en) 2010-08-26 2014-12-30 Honda Motor Co., Ltd. Rotation cancellation for moving obstacle detection
US8823732B2 (en) 2010-12-17 2014-09-02 Pictometry International Corp. Systems and methods for processing images with edge detection and snap-to feature
US20130120528A1 (en) * 2011-01-09 2013-05-16 Thomson Licensing Video processing apparatus and method for detecting a temporal synchronization mismatch
EP2719163B1 (en) 2011-06-10 2025-09-03 Pictometry International Corp. System and method for forming a video stream containing gis data in real-time
US20130050560A1 (en) * 2011-08-23 2013-02-28 Bae Systems Information And Electronic Systems Integration Inc. Electronic selection of a field of view from a larger field of regard
US8964045B2 (en) 2012-01-31 2015-02-24 Microsoft Corporation Image blur detection
US9183538B2 (en) 2012-03-19 2015-11-10 Pictometry International Corp. Method and system for quick square roof reporting
US9244272B2 (en) 2013-03-12 2016-01-26 Pictometry International Corp. Lidar system producing multiple scan paths and method of making and using same
US9881163B2 (en) 2013-03-12 2018-01-30 Pictometry International Corp. System and method for performing sensitive geo-spatial processing in non-sensitive operator environments
US9472844B2 (en) * 2013-03-12 2016-10-18 Intel Corporation Apparatus, system and method of wireless beamformed communication
US9753950B2 (en) 2013-03-15 2017-09-05 Pictometry International Corp. Virtual property reporting for automatic structure detection
US9275080B2 (en) 2013-03-15 2016-03-01 Pictometry International Corp. System and method for early access to captured images
CN103411589B (zh) * 2013-07-29 2016-01-13 南京航空航天大学 一种基于四维实数矩阵的三维图像匹配导航方法
WO2015105886A1 (en) 2014-01-10 2015-07-16 Pictometry International Corp. Unmanned aircraft structure evaluation system and method
US9292913B2 (en) 2014-01-31 2016-03-22 Pictometry International Corp. Augmented three dimensional point collection of vertical structures
WO2015120188A1 (en) 2014-02-08 2015-08-13 Pictometry International Corp. Method and system for displaying room interiors on a floor plan
CN104486535B (zh) * 2014-12-29 2017-07-14 中国科学院长春光学精密机械与物理研究所 帧转移型ccd航空相机扫描像移补偿方法
IL236606B (en) 2015-01-11 2020-09-30 Gornik Amihay Standards and methods for agricultural monitoring
FR3038482B1 (fr) * 2015-06-30 2017-08-11 Parrot Bloc camera apte a etre embarque dans un drone pour cartographier un terrain et procede de gestion de capture d'images par un bloc camera
KR101688331B1 (ko) 2015-09-10 2016-12-20 한국항공우주연구원 위성체 제어 장치 및 그 방법
FR3041136A1 (fr) * 2015-09-14 2017-03-17 Parrot Procede de determination d'une duree d'exposition d'une camera embarque sur un drone, et drone associe.
US9945828B1 (en) 2015-10-23 2018-04-17 Sentek Systems Llc Airborne multispectral imaging system with integrated navigation sensors and automatic image stitching
EP3391164B1 (en) 2016-01-08 2021-10-20 Pictometry International Corp. System and method for capturing, processing, retrieving and displaying images from an unmanned aerial vehicle
US10402676B2 (en) 2016-02-15 2019-09-03 Pictometry International Corp. Automated system and methodology for feature extraction
US10671648B2 (en) 2016-02-22 2020-06-02 Eagle View Technologies, Inc. Integrated centralized property database systems and methods
US10212346B2 (en) * 2016-06-08 2019-02-19 Amazon Technologies, Inc. Multi-sensor image stabilization techniques
CN107121152B (zh) * 2017-04-28 2020-01-03 长春长光睿视光电技术有限责任公司 三轴陀螺稳定平台的前向像移补偿方法
US10438326B2 (en) 2017-07-21 2019-10-08 The Boeing Company Recursive suppression of clutter in video imagery
US10453187B2 (en) 2017-07-21 2019-10-22 The Boeing Company Suppression of background clutter in video imagery
CN108444446A (zh) * 2018-02-07 2018-08-24 哈尔滨工业大学 一种像移补偿方法及装置
EP3884352B8 (en) 2018-11-21 2023-12-13 Eagle View Technologies, Inc. Navigating unmanned aircraft using pitch
CN114441139B (zh) * 2020-11-04 2023-08-15 中移物联网有限公司 一种汽车大灯测试方法和装置
CN114185365B (zh) * 2021-10-22 2024-06-18 中国科学院长春光学精密机械与物理研究所 一种支持异速像移补偿功能的航空相机控制器
CN116709025A (zh) * 2023-05-26 2023-09-05 中国科学院长春光学精密机械与物理研究所 支持多自由度像移补偿功能的可见光探测器及航空相机

Family Cites Families (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4033541A (en) * 1975-05-30 1977-07-05 Mcdonnell Douglas Corporation Torque rejection soft mounted platform
US4157218A (en) * 1977-04-14 1979-06-05 The Perkin-Elmer Corporation Wide angle scan camera
DE3314227A1 (de) * 1983-04-20 1984-10-25 Fa. Carl Zeiss, 7920 Heidenheim Verfahren und einrichtung zum ausgleich der bildwanderung bei einer luftbildkamera
US5526045A (en) * 1983-12-29 1996-06-11 Matsushita Electric Industrial Co., Ltd. Camera apparatus which automatically corrects image fluctuations
US4654876A (en) * 1984-12-19 1987-03-31 Itek Corporation Digital image motion correction method
US4709381A (en) * 1986-03-19 1987-11-24 Westinghouse Electric Corp. CCD focal plane array convolver
US4747155A (en) * 1986-09-02 1988-05-24 Loral Corporation Motion compensation for electro-optical camera imagery
US4908705A (en) * 1988-01-21 1990-03-13 Fairchild Weston Systems, Inc. Steerable wide-angle imaging system
US4959725A (en) * 1988-07-13 1990-09-25 Sony Corporation Method and apparatus for processing camera an image produced by a video camera to correct for undesired motion of the video camera
US5712678A (en) * 1988-12-08 1998-01-27 Messerschmitt Bolkow Blohm Gmbh Method and apparatus for scanning a terrain surface
US5124938A (en) * 1990-07-23 1992-06-23 Recon/Optical, Inc. Gyroless platform stabilization techniques
CA2052148A1 (en) * 1990-09-27 1992-03-28 Tadashi Sugiki Method of driving a solid-state imaging device
US5155597A (en) * 1990-11-28 1992-10-13 Recon/Optical, Inc. Electro-optical imaging array with motion compensation
US5231502A (en) * 1991-05-13 1993-07-27 Recon/Optical, Inc. Image information processing techniques for improving the resolution of scanned imaging systems
JP3350073B2 (ja) * 1991-12-12 2002-11-25 株式会社フォトロン 高速度撮影装置
JPH06205298A (ja) * 1992-11-06 1994-07-22 Sharp Corp 電荷結合型固体撮像装置
US5692062A (en) * 1994-10-03 1997-11-25 Recon/Optical, Inc. Electro-optical imaging array with profiled foward motion compensation
US5647558A (en) * 1995-02-14 1997-07-15 Bofors Ab Method and apparatus for radial thrust trajectory correction of a ballistic projectile
US5751578A (en) * 1995-05-16 1998-05-12 Recon/Optical, Inc. Platform attitude measurement system
US5604534A (en) * 1995-05-24 1997-02-18 Omni Solutions International, Ltd. Direct digital airborne panoramic camera system and method
US5668593A (en) * 1995-06-07 1997-09-16 Recon/Optical, Inc. Method and camera system for step frame reconnaissance with motion compensation
US5844602A (en) * 1996-05-07 1998-12-01 Recon/Optical, Inc. Electro-optical imaging array and camera system with pitch rate image motion compensation which can be used in an airplane in a dive bomb maneuver
WO1998020301A1 (en) * 1996-11-05 1998-05-14 Lockheed Martin Corporation Electro-optical reconnaissance system with forward motion compensation

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2017532798A (ja) * 2014-07-17 2017-11-02 エルビット・システムズ・リミテッド 遠隔画像の安定化及び表示

Also Published As

Publication number Publication date
CA2248650C (en) 2003-06-10
JP3392422B2 (ja) 2003-03-31
US6088055A (en) 2000-07-11
EP0897596A1 (en) 1999-02-24
IL126374A0 (en) 1999-05-09
IL126374A (en) 2000-10-31
DE69715397D1 (de) 2002-10-17
US5798786A (en) 1998-08-25
EP0897596B1 (en) 2002-09-11
DE69715397T2 (de) 2003-05-22
EP0897596A4 (en) 2000-08-23
WO1997042659A1 (en) 1997-11-13
CA2248650A1 (en) 1997-11-13

Similar Documents

Publication Publication Date Title
JP3392422B2 (ja) 2軸画像運動補償を行う電子光学的画像検知アレイ
US5155597A (en) Electro-optical imaging array with motion compensation
US6747686B1 (en) High aspect stereoscopic mode camera and method
US5668593A (en) Method and camera system for step frame reconnaissance with motion compensation
EP0941612B1 (en) Electro-optical imaging array and camera system with pitch rate image motion compensation
US5692062A (en) Electro-optical imaging array with profiled foward motion compensation
US4951136A (en) Method and apparatus for remote reconnaissance of the earth
US9063391B2 (en) Method and system for increasing the size of the area scanned by an airborne electro-optic reconnaissance system in a given time
EP0937230B1 (en) Electro-optical reconnaissance system with forward motion compensation
US6320611B1 (en) Method and device for air-ground recognition for optoelectronic equipment
US20200145568A1 (en) Electro-optical imager field of regard coverage using vehicle motion
US5523887A (en) Stabilized imaging system
US5333076A (en) Stabilized imaging system
Lareau Advancements in EO framing
JP2617261B2 (ja) 画素情報処理方法
RU2806667C1 (ru) Способ коррекции геометрических искажений гиперспектральных изображений
El-Sheikh et al. Spatial and temporal resolutions pixel level performance analysis of the onboard remote sensing electro-optical systems
Hinz Large image format aerial cameras: Film based systems and digital perspectives
Brownie Introduction into service of mature pushbroom electro-optic sensors
IL180478A (en) Airborne intelligence photography system

Legal Events

Date Code Title Description
R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20090124

Year of fee payment: 6

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20090124

Year of fee payment: 6

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313113

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100124

Year of fee payment: 7

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100124

Year of fee payment: 7

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110124

Year of fee payment: 8

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110124

Year of fee payment: 8

LAPS Cancellation because of no payment of annual fees