JP7621828B2 - 画像処理装置、ステレオカメラ装置、移動体及び画像処理方法 - Google Patents
画像処理装置、ステレオカメラ装置、移動体及び画像処理方法 Download PDFInfo
- Publication number
- JP7621828B2 JP7621828B2 JP2021024654A JP2021024654A JP7621828B2 JP 7621828 B2 JP7621828 B2 JP 7621828B2 JP 2021024654 A JP2021024654 A JP 2021024654A JP 2021024654 A JP2021024654 A JP 2021024654A JP 7621828 B2 JP7621828 B2 JP 7621828B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- pixels
- dissimilarity
- search area
- reference image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Landscapes
- Measurement Of Optical Distance (AREA)
- Image Analysis (AREA)
Description
ステレオカメラが撮像した基準画像及び参照画像を取得する取得部と、
前記基準画像内の基準点を含む探索領域と前記参照画像内で前記ステレオカメラの基線長方向に沿って画素単位で変位させる比較領域との第1の相違度に基づいて前記探索領域内の被写体像の視差を算出する制御部と、を備え、
前記制御部は、
前記基準画像内の各画素が被写体別にグループ分けされるように、クラスタリングを行い、
前記探索領域において、前記基準点が属する被写体と同一の被写体に属する画素に対して、該被写体以外の被写体に属する画素と異なる重付けを施して、前記第1の相違度を算出する。
基準画像及び参照画像を撮像するステレオカメラと、
前記基準画像内の基準点を含む探索領域と前記参照画像内で前記ステレオカメラの基線長方向に沿って画素単位で変位させる比較領域との第1の相違度に基づいて前記探索領域内の被写体像の視差を算出する画像処理装置とを備え、
前記画像処理装置は、
前記基準画像内で、各画素を被写体別にクラスタリングを行い、
前記探索領域において、前記基準点が属する被写体と同一の被写体に属する画素に対して、該被写体以外の被写体に属する画素と異なる重付けを施して、前記第1の相違度を算出する。
基準画像及び参照画像を撮像するステレオカメラと、前記基準画像内の基準点を含む探索領域と前記参照画像内で前記ステレオカメラの基線長方向に沿って画素単位で変位させる比較領域との第1の相違度に基づいて前記探索領域内の被写体像の視差を算出する画像処理装置とを有する、ステレオカメラ装置を備え、
前記ステレオカメラ装置は、
前記基準画像内で、各画素を被写体別にクラスタリングを行い、
前記探索領域において、前記基準点が属する被写体と同一の被写体に属する画素に対して、該被写体以外の被写体に属する画素と異なる重付けを施して、前記第1の相違度を算出する。
ステレオカメラに基準画像及び参照画像を撮像させるステップと、
前記基準画像内で、各画素を被写体別にクラスタリングを行うステップと、
前記基準画像内の基準点を含む探索領域において、前記基準点が属する被写体と同一の被写体に属する画素に対して、該被写体以外の被写体に属する画素と異なる重付けになるように、各画素の重み付けを決定するステップと、
前記基準画像内の基準点を含む探索領域と前記参照画像内で前記ステレオカメラの基線長方向に沿って画素単位で変位させる比較領域との複数の第1の相違度と、前記各画素の重付けとに基づいて前記探索領域内の被写体像の視差を算出するステップと、を備える。
11 ステレオカメラ装置
12 ステレオカメラ
13 移動体
14 外部装置
15 第1のカメラ
16 第2のカメラ
17 取得部
18 出力部
19 メモリ
20 制御部
CR1 第1の比較領域
CR2 第2の比較領域
CR3 第3の比較領域
FP 注目画素
RI 参照画像
SR 探索領域
Claims (7)
- ステレオカメラが撮像した基準画像及び参照画像を取得する取得部と、
前記基準画像内の基準点を含む探索領域と前記参照画像内で前記ステレオカメラの基線長方向に沿って画素単位で変位させる比較領域との第1の相違度に基づいて前記探索領域内の被写体像の視差を算出する制御部と、を備え、
前記制御部は、
前記基準画像内の各画素が被写体別にグループ分けされるように、クラスタリングを行い、
前記探索領域において、前記基準点が属する被写体と同一の被写体に属する画素に対して、該被写体以外の被写体に属する画素と異なる重付けを施して、前記第1の相違度を算出し、
前記基準画像及び前記参照画像の一方を前記基線長方向に0.5画素変位させた状態で前記基準画像の探索領域と前記参照画像内で前記基線長方向に沿って画素単位で変位させる比較領域との第2の相違度を算出し、前記第1の相違度及び前記第2の相違度の合計値又は平均値に基づいて、前記視差を算出し、
前記第2の相違度の算出に用いる探索領域において、該探索領域の基準点が属する被写体と同一の被写体に属する画素に対して、該被写体以外の被写体に属する画素と異なる重付けを施す
画像処理装置。 - 請求項1に記載の画像処理装置において、
前記制御部は、少なくとも1つの方法により、前記クラスタリングを行う
画像処理装置。 - 請求項1又は2に記載の画像処理装置において、
前記取得部は、前記基準画像を連続して取得し、
前記制御部は、撮像時点の異なる基準画像間のオプティカルフローに基づいて、前記クラスタリングを行う
画像処理装置。 - 請求項1から3のいずれか1項に記載の画像処理装置において、
前記制御部は、前記基準画像の各画素からの前記参照画像の各画素への視差と、該参照画像の各画素からの前記基準画像の各画素への視差との比較による相違性を算出し、該相違性が閾値以上である画素が構成する輪郭で区分けすることにより、前記クラスタリングを行う
画像処理装置。 - 基準画像及び参照画像を撮像するステレオカメラと、
前記基準画像内の基準点を含む探索領域と前記参照画像内で前記ステレオカメラの基線長方向に沿って画素単位で変位させる比較領域との第1の相違度に基づいて前記探索領域内の被写体像の視差を算出する画像処理装置とを備え、
前記画像処理装置は、
前記基準画像内で、各画素を被写体別にクラスタリングを行い、
前記探索領域において、前記基準点が属する被写体と同一の被写体に属する画素に対して、該被写体以外の被写体に属する画素と異なる重付けを施して、前記第1の相違度を算出し、
前記基準画像及び前記参照画像の一方を前記基線長方向に0.5画素変位させた状態で前記基準画像の探索領域と前記参照画像内で前記基線長方向に沿って画素単位で変位させる比較領域との第2の相違度を算出し、前記第1の相違度及び前記第2の相違度の合計値又は平均値に基づいて、前記視差を算出し、
前記第2の相違度の算出に用いる探索領域において、該探索領域の基準点が属する被写体と同一の被写体に属する画素に対して、該被写体以外の被写体に属する画素と異なる重付けを施す
ステレオカメラ装置。 - 基準画像及び参照画像を撮像するステレオカメラと、前記基準画像内の基準点を含む探索領域と前記参照画像内で前記ステレオカメラの基線長方向に沿って画素単位で変位させる比較領域との第1の相違度に基づいて前記探索領域内の被写体像の視差を算出する画像処理装置とを有する、ステレオカメラ装置を備え、
前記ステレオカメラ装置は、
前記基準画像内で、各画素を被写体別にクラスタリングを行い、
前記探索領域において、前記基準点が属する被写体と同一の被写体に属する画素に対して、該被写体以外の被写体に属する画素と異なる重付けを施して、前記第1の相違度を算出し、
前記基準画像及び前記参照画像の一方を前記基線長方向に0.5画素変位させた状態で前記基準画像の探索領域と前記参照画像内で前記基線長方向に沿って画素単位で変位させる比較領域との第2の相違度を算出し、前記第1の相違度及び前記第2の相違度の合計値又は平均値に基づいて、前記視差を算出し、
前記第2の相違度の算出に用いる探索領域において、該探索領域の基準点が属する被写体と同一の被写体に属する画素に対して、該被写体以外の被写体に属する画素と異なる重付けを施す
移動体。 - ステレオカメラに基準画像及び参照画像を撮像させるステップと、
前記基準画像内で、各画素を被写体別にクラスタリングを行うステップと、
前記基準画像内の基準点を含む探索領域において、前記基準点が属する被写体と同一の被写体に属する画素に対して、該被写体以外の被写体に属する画素と異なる重付けになるように、各画素の重付けを決定するステップと、
前記基準画像内の基準点を含む探索領域と前記参照画像内で前記ステレオカメラの基線長方向に沿って画素単位で変位させる比較領域との複数の第1の相違度と、前記各画素の重付けとに基づいて前記探索領域内の被写体像の視差を算出するステップと、を備え、
前記基準画像及び前記参照画像の一方を前記基線長方向に0.5画素変位させた状態で前記基準画像の探索領域と前記参照画像内で前記基線長方向に沿って画素単位で変位させる比較領域との第2の相違度を算出し、前記第1の相違度及び前記第2の相違度の合計値又は平均値に基づいて、前記視差を算出するステップと、
前記第2の相違度の算出に用いる探索領域において、該探索領域の基準点が属する被写体と同一の被写体に属する画素に対して、該被写体以外の被写体に属する画素と異なる重付けを施すステップと、を更に備える
画像処理方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2021024654A JP7621828B2 (ja) | 2021-02-18 | 2021-02-18 | 画像処理装置、ステレオカメラ装置、移動体及び画像処理方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2021024654A JP7621828B2 (ja) | 2021-02-18 | 2021-02-18 | 画像処理装置、ステレオカメラ装置、移動体及び画像処理方法 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2022126527A JP2022126527A (ja) | 2022-08-30 |
| JP7621828B2 true JP7621828B2 (ja) | 2025-01-27 |
Family
ID=83058859
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2021024654A Active JP7621828B2 (ja) | 2021-02-18 | 2021-02-18 | 画像処理装置、ステレオカメラ装置、移動体及び画像処理方法 |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP7621828B2 (ja) |
Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2008275366A (ja) | 2007-04-26 | 2008-11-13 | Tokyo Institute Of Technology | ステレオ3次元計測システム |
| JP2009129318A (ja) | 2007-11-27 | 2009-06-11 | Fuji Heavy Ind Ltd | 画像処理装置 |
| JP2010140201A (ja) | 2008-12-10 | 2010-06-24 | Toyota Motor Corp | 画像処理装置、画像処理方法、画像処理プログラム |
| WO2013073167A1 (ja) | 2011-11-17 | 2013-05-23 | パナソニック株式会社 | 画像処理装置、撮像装置および画像処理方法 |
| JP2014096062A (ja) | 2012-11-09 | 2014-05-22 | Yamaguchi Univ | 画像処理方法及び画像処理装置 |
| JP2015201044A (ja) | 2014-04-08 | 2015-11-12 | 株式会社東芝 | 画像処理装置および画像処理方法 |
Family Cites Families (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP3060114B2 (ja) * | 1990-09-29 | 2000-07-10 | グローリー工業株式会社 | 対応点探索方法 |
| JP3769850B2 (ja) * | 1996-12-26 | 2006-04-26 | 松下電器産業株式会社 | 中間視点画像生成方法および視差推定方法および画像伝送方法 |
-
2021
- 2021-02-18 JP JP2021024654A patent/JP7621828B2/ja active Active
Patent Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2008275366A (ja) | 2007-04-26 | 2008-11-13 | Tokyo Institute Of Technology | ステレオ3次元計測システム |
| JP2009129318A (ja) | 2007-11-27 | 2009-06-11 | Fuji Heavy Ind Ltd | 画像処理装置 |
| JP2010140201A (ja) | 2008-12-10 | 2010-06-24 | Toyota Motor Corp | 画像処理装置、画像処理方法、画像処理プログラム |
| WO2013073167A1 (ja) | 2011-11-17 | 2013-05-23 | パナソニック株式会社 | 画像処理装置、撮像装置および画像処理方法 |
| JP2014096062A (ja) | 2012-11-09 | 2014-05-22 | Yamaguchi Univ | 画像処理方法及び画像処理装置 |
| JP2015201044A (ja) | 2014-04-08 | 2015-11-12 | 株式会社東芝 | 画像処理装置および画像処理方法 |
Also Published As
| Publication number | Publication date |
|---|---|
| JP2022126527A (ja) | 2022-08-30 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| KR102772870B1 (ko) | 전자기기 및 제어방법 | |
| EP3358295B1 (en) | Image processing device, stereo camera device, vehicle, and image processing method | |
| JP7308115B2 (ja) | 物体検出装置、物体検出システム、移動体及び物体検出方法 | |
| JP6141562B1 (ja) | 視差算出装置、ステレオカメラ装置、車両及び視差算出方法 | |
| CN116736277A (zh) | 电子仪器、可移动设备、距离计算方法和存储介质 | |
| JP6456499B2 (ja) | 立体物検出装置、ステレオカメラ装置、車両及び立体物検出方法 | |
| JP6810009B2 (ja) | 視差算出装置 | |
| JP7278846B2 (ja) | 物体位置検出装置、走行制御システム、および走行制御方法 | |
| JP2015207278A (ja) | 視差値導出装置、機器制御システム、移動体、ロボット、視差値導出方法、およびプログラム | |
| CN114402357B (zh) | 路面检测装置、物体检测装置、物体检测系统、移动体和物体检测方法 | |
| JP6674959B2 (ja) | 視差算出装置、ステレオカメラ装置、車両および視差算出方法 | |
| JP5073700B2 (ja) | 物体検出装置 | |
| EP4191196A1 (en) | Image processing device, stereo camera device, moving object, parallax calculation method, and image processing method | |
| CN112639864B (zh) | 用于测距的方法和装置 | |
| JP7229129B2 (ja) | 物体検出装置、物体検出システム、移動体及び物体検出方法 | |
| JP6121641B1 (ja) | 画像処理装置、ステレオカメラ装置、車両、及び画像処理方法 | |
| JP7621828B2 (ja) | 画像処理装置、ステレオカメラ装置、移動体及び画像処理方法 | |
| JP7569173B2 (ja) | 画像処理装置、ステレオカメラ装置、移動体及び画像処理方法 | |
| US12620110B2 (en) | Image processing device, stereo camera device, mobile object, disparity calculating method, and image processing method | |
| JP7527891B2 (ja) | 画像処理装置、ステレオカメラ装置、移動体、及び、視差算出方法 | |
| JP7652739B2 (ja) | 画像処理装置及び画像処理方法 | |
| JP2024137371A (ja) | 電子機器、測距方法、及び測距プログラム | |
| JP2024050248A (ja) | 画像処理装置、ステレオカメラ装置及び画像処理方法 | |
| JP7023212B2 (ja) | 画像処理装置、撮像装置、移動体および画像処理方法 | |
| CN113763534A (zh) | 一种基于视觉环视系统点云建图方法 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20230915 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20240614 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20240709 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20240902 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20241224 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20250115 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 7621828 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |