RU2015137687A - Система формирования изображений промежуточного вида - Google Patents
Система формирования изображений промежуточного вида Download PDFInfo
- Publication number
- RU2015137687A RU2015137687A RU2015137687A RU2015137687A RU2015137687A RU 2015137687 A RU2015137687 A RU 2015137687A RU 2015137687 A RU2015137687 A RU 2015137687A RU 2015137687 A RU2015137687 A RU 2015137687A RU 2015137687 A RU2015137687 A RU 2015137687A
- Authority
- RU
- Russia
- Prior art keywords
- target
- viewpoint
- viewpoints
- series
- image
- Prior art date
Links
- 230000015572 biosynthetic process Effects 0.000 title claims 8
- 238000000034 method Methods 0.000 claims 12
- 230000001502 supplementing effect Effects 0.000 claims 2
- 230000007704 transition Effects 0.000 claims 2
- 238000004364 calculation method Methods 0.000 claims 1
- 230000000295 complement effect Effects 0.000 claims 1
- 238000004590 computer program Methods 0.000 claims 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
- H04N13/106—Processing image signals
- H04N13/111—Transformation of image signals corresponding to virtual viewpoints, e.g. spatial image interpolation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
- H04N13/106—Processing image signals
- H04N13/172—Processing image signals image signals comprising non-image signal components, e.g. headers or format information
- H04N13/178—Metadata, e.g. disparity information
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Library & Information Science (AREA)
- Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
- Processing Or Creating Images (AREA)
Claims (30)
1. Способ (700) формирования серии промежуточных изображений (721) на основе стереоизображения (701), содержащего левое изображение (101), отвечающее левой точке обзора, и правое изображение (102), отвечающее правой точке обзора; способ формирования серии промежуточных изображений, отвечающей пространственно упорядоченным точкам обзора, первая и последняя из которых определяют диапазон точек обзора, включающий в себя по меньшей мере левую или правую точку обзора; способ, включающий в себя размещение центра пространственно упорядоченных точек обзора в целевой точке обзора путем:
- определения (710) целевой точки обзора на основе прогнозируемого качества изображения серии промежуточных изображений для пространственно упорядоченных точек обзора с центром в различных целевых точках обзора, с прогнозированием качества изображения, основанным на характеристике стереоизображения, заключающейся в деталях изображения или окклюзии; и
- формирования (720) серии промежуточных изображений на основе стереоизображения для пространственно упорядоченных точек обзора с центром в определенной целевой точке обзора (711).
2. Способ по п. 1, в котором определение (710) содержит извлечение данных для определения целевой точки обзора (711) из метаданных, дополняющих стереоизображение (701).
3. Способ по п. 1, в котором определение (710) содержит вычисление множества прогнозируемых параметров качества изображения для соответствующего множества целевых точек обзора и определение целевой точки зрения (711), отвечающей прогнозируемому параметру качества изображения, имеющему наивысшее значение среди множества прогнозируемых параметров качества изображения.
4. Способ по п. 1, в котором определение (710) включает
- измерение количества деталей изображения в стереоизображении (701) с помощью детектора деталей и
- вычисление прогнозируемого качества изображения, которое основывается на измеренном количестве деталей изображения.
5. Способ по п. 1, в котором определение (710) содержит выявление переходов глубины в стереоизображении (701) с помощью детектора переходов глубины для прогнозирования окклюзии и вычисление прогнозируемого качества изображения на основе прогнозируемой окклюзии.
6. Способ по п. 1, в котором формирование серии промежуточных изображений (721) содержит формирование последующих серий промежуточных изображений (721) на основе соответствующих последующих кадров стереовидеопоследовательности, каждый из которых содержит стереоизображение (701).
7. Способ по п. 6, в котором определение (710) содержит:
- определение первой целевой точки обзора (711) для первого формирования первой серии промежуточных изображений (721) на основе первого кадра в первый момент времени,
- определение второй целевой точки обзора (711) для второго формирования второй серии промежуточных изображений (721) на основе второго кадра во второй момент времени и
- определение третьей целевой точки обзора (711) для третьего формирования третьей серии промежуточных изображений (721) на основе третьего кадра в третий момент времени, который возникает между первым и вторым моментами времени; определение третьей целевой точки обзора (711), расположенной между первой целевой точкой обзора (711) и второй целевой точкой обзора (711) и позволяющей целевой точке обзора (721) постепенно смещаться со временем.
8. Способ по п. 6, в котором определение (710) содержит:
- определение первой целевой точки обзора (711) для первого формирования первой серии промежуточных изображений (721) на основе первого кадра в первый момент времени,
- определение второй целевой точки обзора (711) для второго формирования второй серии промежуточных изображений (721) на основе второго кадра во второй момент времени, которое содержит определение возникновения смены сцены между первым и вторым моментами во времени и определение второй целевой точки обзора
(711) отличной от первой целевой точки обзора (711) в зависимости от возникновения смены сцены.
9. Способ по п. 8, в котором определение возникновения смены сцены включает в себя извлечение возникновения из метаданных, дополняющих стереоизображение (701).
10. Система, приспособленная для формирования серии промежуточных изображений (721) на основе стереоизображения (701), которое содержит левое изображение (101), отвечающее левой точке обзора, и правое изображение (102), отвечающее правой точке обзора; система для формирования серии промежуточных изображений, отвечающей пространственно упорядоченным точкам обзора, первая и последняя из которых определяют диапазон точек обзора, включающий в себя по меньшей мере левую или правую точку обзора; система, приспособленная для размещения центра пространственно упорядоченных точек обзора в целевой точке обзора (711), включающая:
- блок определения для определения (710) целевой точки обзора на основе прогнозируемого качества изображения серии промежуточных изображений для пространственно упорядоченных точек обзора с центром в различных целевых точках обзора, с прогнозированием качества изображения, основанным на характеристике стереоизображения, заключающейся в деталях изображения или окклюзии; и
- блок формирования для формирования (720) серии промежуточных изображений на основе стереоизображения для пространственно упорядоченных точек обзора с центром в определенной целевой точке обзора (711).
11. Система по п. 10, в которой блок определения приспособлен для определения целевой точки обзора путем прогнозирования качества изображения серии промежуточных изображений для множества целевых точек обзора и выбора целевой точки обзора из множества целевых точек обзора на основе прогнозируемого качества изображения серии промежуточных изображений.
12. Система по п. 10, в которой блок определения приспособлен для извлечения данных для определения целевой точки обзора из метаданных, дополняющих стереоизображение.
13. Компьютерный программный продукт, содержащий инструкции, предписывающие обрабатывающей системе выполнять способ по п. 1.
14. Видеоданные, содержащие стереоизображение (701), которое содержит левое изображение (101), отвечающее левой точке обзора, и правое изображение (102), отвечающее правой точке обзора; видеоданные, содержащие метаданные для
размещения центра пространственно упорядоченных точек обзора в целевой точке обзора (711), первая и последняя из которых определяют диапазон точек обзора, включающий в себя по меньшей мере левую или правую точку обзора, размещение осуществляется путем:
- определения целевой точки обзора на основе прогнозируемого качества изображения серии промежуточных изображений для пространственно упорядоченных точек обзора с центром в различных целевых точках обзора, с прогнозированием качества изображения, основанным на характеристике стереоизображения, заключающейся в деталях изображения или окклюзии; и
- формирования (720) серии промежуточных изображений на основе стереоизображения для пространственно упорядоченных точек обзора с центром в определенной целевой точке обзора (711).
15. Носитель медиаданных, содержащий видеоданные по п. 14.
Applications Claiming Priority (3)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| EP13154257.3A EP2765775A1 (en) | 2013-02-06 | 2013-02-06 | System for generating intermediate view images |
| EP13154257.3 | 2013-02-06 | ||
| PCT/EP2014/051156 WO2014122012A1 (en) | 2013-02-06 | 2014-01-22 | System for generating intermediate view images |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| RU2015137687A true RU2015137687A (ru) | 2017-03-13 |
Family
ID=47877741
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| RU2015137687A RU2015137687A (ru) | 2013-02-06 | 2014-01-22 | Система формирования изображений промежуточного вида |
Country Status (13)
| Country | Link |
|---|---|
| US (1) | US20150365645A1 (ru) |
| EP (2) | EP2765775A1 (ru) |
| JP (1) | JP2016513384A (ru) |
| KR (1) | KR20150116891A (ru) |
| CN (1) | CN104982033B (ru) |
| BR (1) | BR112015018556A2 (ru) |
| CA (1) | CA2900125A1 (ru) |
| MX (1) | MX353915B (ru) |
| PH (1) | PH12015501711A1 (ru) |
| RU (1) | RU2015137687A (ru) |
| TW (1) | TW201440489A (ru) |
| WO (1) | WO2014122012A1 (ru) |
| ZA (1) | ZA201506526B (ru) |
Families Citing this family (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2016048402A2 (en) | 2014-09-26 | 2016-03-31 | Reald | Multiscopic image capture system |
| TWI574047B (zh) * | 2015-06-16 | 2017-03-11 | 緯創資通股份有限公司 | 立體影像顯示裝置、方法以及系統 |
| US10165258B2 (en) * | 2016-04-06 | 2018-12-25 | Facebook, Inc. | Efficient determination of optical flow between images |
| US11172005B2 (en) * | 2016-09-09 | 2021-11-09 | Nokia Technologies Oy | Method and apparatus for controlled observation point and orientation selection audiovisual content |
| EP3509308A1 (en) * | 2018-01-05 | 2019-07-10 | Koninklijke Philips N.V. | Apparatus and method for generating an image data bitstream |
| EP3792877A1 (en) * | 2019-09-12 | 2021-03-17 | Koninklijke Philips N.V. | Apparatus and method for evaluating a quality of image capture of a scene |
| JP7329794B2 (ja) * | 2019-10-18 | 2023-08-21 | 日本電信電話株式会社 | 映像供給装置、映像供給方法、表示システムおよびプログラム |
| JP7329795B2 (ja) * | 2019-10-18 | 2023-08-21 | 日本電信電話株式会社 | 映像供給装置、映像供給方法、表示システムおよびプログラム |
Family Cites Families (17)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US6327381B1 (en) * | 1994-12-29 | 2001-12-04 | Worldscape, Llc | Image transformation and synthesis methods |
| WO1997023097A2 (en) | 1995-12-19 | 1997-06-26 | Philips Electronics N.V. | Parallactic depth-dependent pixel shifts |
| US6064424A (en) | 1996-02-23 | 2000-05-16 | U.S. Philips Corporation | Autostereoscopic display apparatus |
| JP2002541568A (ja) | 1999-03-31 | 2002-12-03 | コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ | シーンの第１の画像から第２の画像への画素ブロックの移動量を検出する方法 |
| ATE333194T1 (de) | 2000-05-19 | 2006-08-15 | Koninkl Philips Electronics Nv | Blockbasierte bewegungs- oder tiefenschätzung |
| US7092014B1 (en) * | 2000-06-28 | 2006-08-15 | Microsoft Corporation | Scene capturing and view rendering based on a longitudinally aligned camera array |
| EP1437898A1 (en) | 2002-12-30 | 2004-07-14 | Koninklijke Philips Electronics N.V. | Video filtering for stereo images |
| KR100950046B1 (ko) * | 2008-04-10 | 2010-03-29 | 포항공과대학교 산학협력단 | 무안경식 3차원 입체 ｔｖ를 위한 고속 다시점 3차원 입체영상 합성 장치 및 방법 |
| CN102239506B (zh) * | 2008-10-02 | 2014-07-09 | 弗兰霍菲尔运输应用研究公司 | 中间视合成和多视点数据信号的提取 |
| KR101697598B1 (ko) * | 2008-10-27 | 2017-02-01 | 엘지전자 주식회사 | 가상 뷰 이미지 합성 방법 및 장치 |
| JP2012010085A (ja) * | 2010-06-24 | 2012-01-12 | Sony Corp | 立体表示装置及び立体表示装置の制御方法 |
| WO2012007867A1 (en) * | 2010-07-12 | 2012-01-19 | Koninklijke Philips Electronics N.V. | Signaling for multiview 3d video |
| JP4939639B2 (ja) * | 2010-09-28 | 2012-05-30 | シャープ株式会社 | 画像処理装置、画像処理方法、プログラム及び記録媒体 |
| JP5732888B2 (ja) * | 2011-02-14 | 2015-06-10 | ソニー株式会社 | 表示装置及び表示方法 |
| JPWO2012117462A1 (ja) * | 2011-03-03 | 2014-07-07 | パナソニック株式会社 | 立体映像処理装置および方法ならびに立体映像表示装置 |
| JP2013038602A (ja) * | 2011-08-08 | 2013-02-21 | Sony Corp | 画像処理装置、および画像処理方法、並びにプログラム |
| US9866813B2 (en) * | 2013-07-05 | 2018-01-09 | Dolby Laboratories Licensing Corporation | Autostereo tapestry representation |
-
2013
- 2013-02-06 EP EP13154257.3A patent/EP2765775A1/en not_active Withdrawn
-
2014
- 2014-01-22 JP JP2015555641A patent/JP2016513384A/ja active Pending
- 2014-01-22 MX MX2015010005A patent/MX353915B/es active IP Right Grant
- 2014-01-22 US US14/763,839 patent/US20150365645A1/en not_active Abandoned
- 2014-01-22 BR BR112015018556A patent/BR112015018556A2/pt not_active IP Right Cessation
- 2014-01-22 RU RU2015137687A patent/RU2015137687A/ru not_active Application Discontinuation
- 2014-01-22 EP EP14701075.5A patent/EP2954675A1/en not_active Withdrawn
- 2014-01-22 CA CA2900125A patent/CA2900125A1/en not_active Abandoned
- 2014-01-22 CN CN201480007722.8A patent/CN104982033B/zh not_active Expired - Fee Related
- 2014-01-22 KR KR1020157024198A patent/KR20150116891A/ko not_active Withdrawn
- 2014-01-22 WO PCT/EP2014/051156 patent/WO2014122012A1/en not_active Ceased
- 2014-02-06 TW TW103103964A patent/TW201440489A/zh unknown
-
2015
- 2015-08-03 PH PH12015501711A patent/PH12015501711A1/en unknown
- 2015-09-04 ZA ZA2015/06526A patent/ZA201506526B/en unknown
Also Published As
| Publication number | Publication date |
|---|---|
| JP2016513384A (ja) | 2016-05-12 |
| EP2765775A1 (en) | 2014-08-13 |
| PH12015501711A1 (en) | 2015-10-12 |
| EP2954675A1 (en) | 2015-12-16 |
| WO2014122012A1 (en) | 2014-08-14 |
| MX353915B (es) | 2018-02-06 |
| US20150365645A1 (en) | 2015-12-17 |
| MX2015010005A (es) | 2015-10-12 |
| CA2900125A1 (en) | 2014-08-14 |
| TW201440489A (zh) | 2014-10-16 |
| CN104982033A (zh) | 2015-10-14 |
| KR20150116891A (ko) | 2015-10-16 |
| ZA201506526B (en) | 2017-06-28 |
| CN104982033B (zh) | 2017-11-24 |
| BR112015018556A2 (pt) | 2017-07-18 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| RU2015137687A (ru) | Система формирования изображений промежуточного вида | |
| CN109829875B (zh) | 用于估计视差的方法和装置 | |
| US9916667B2 (en) | Stereo matching apparatus and method through learning of unary confidence and pairwise confidence | |
| US9210398B2 (en) | Method and apparatus for temporally interpolating three-dimensional depth image | |
| KR102350235B1 (ko) | 영상 처리 방법 및 장치 | |
| CN108600731B (zh) | 用于预测眼睛位置的设备和方法 | |
| RU2012135485A (ru) | Устройство, способ и программа обработки стереоскопического видеоизображения | |
| JP2011091481A5 (ru) | ||
| JP2013533668A5 (ru) | ||
| TWI591497B (zh) | 視頻分析系統及方法 | |
| JP7004493B2 (ja) | 映像処理方法及び装置 | |
| US20110211638A1 (en) | Multi-view image processing apparatus, method and computer-readable medium | |
| JP6292122B2 (ja) | オブジェクト情報抽出装置、オブジェクト情報抽出プログラム、及びオブジェクト情報抽出方法 | |
| WO2012061549A3 (en) | Methods, systems, and computer program products for creating three-dimensional video sequences | |
| JP2015100066A5 (ja) | 撮像装置、画像処理装置、画像処理方法、及びプログラム | |
| JP2013521686A (ja) | ３ｄｔｖのための視差分布推定 | |
| JP2012034343A5 (ja) | 画像処理装置、及びその制御方法 | |
| JP2013532323A5 (ru) | ||
| US20160156902A1 (en) | Method and apparatus for generating three-dimensional image | |
| JP2014507078A5 (ru) | ||
| JP2014112783A5 (ru) | ||
| JP2012085284A5 (ru) | ||
| KR101511315B1 (ko) | 스테레오스코픽 컨텐츠를 위한 다이나믹 플로팅 윈도우 생성 방법 및 시스템 | |
| JP2013182330A5 (ru) | ||
| KR101850861B1 (ko) | 3차원 컨텐츠의 시청 피로도를 제공하는 3ｄ 디스플레이 장치 및 그의 피로도 제공 방법 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| FA92 | Acknowledgement of application withdrawn (lack of supplementary materials submitted) |
Effective date: 20180711 |