TW201320712A - 送訊裝置、送訊方法及收訊裝置 - Google Patents

送訊裝置、送訊方法及收訊裝置 Download PDF

Info

Publication number
TW201320712A
TW201320712A TW101121330A TW101121330A TW201320712A TW 201320712 A TW201320712 A TW 201320712A TW 101121330 A TW101121330 A TW 101121330A TW 101121330 A TW101121330 A TW 101121330A TW 201320712 A TW201320712 A TW 201320712A
Authority
TW
Taiwan
Prior art keywords
information
data
stream
data stream
image data
Prior art date
Application number
TW101121330A
Other languages
English (en)
Inventor
Ikuo Tsukagoshi
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Publication of TW201320712A publication Critical patent/TW201320712A/zh

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81—Monomedia components thereof
    • H04N21/816—Monomedia components thereof involving special video data, e.g 3D video
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/161—Encoding, multiplexing or demultiplexing different image signal components
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/172—Processing image signals image signals comprising non-image signal components, e.g. headers or format information
    • H04N13/183—On-screen display [OSD] information, e.g. subtitles or menus
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/194—Transmission of image signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236—Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • H04N21/23614—Multiplexing of additional data and video streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/242—Synchronisation processes, e.g. processing of PCR [Programme Clock References]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2213/00—Details of stereoscopic systems
    • H04N2213/003—Aspects relating to the "2D+depth" image format
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2213/00—Details of stereoscopic systems
    • H04N2213/005—Aspects relating to the "3D+depth" image format

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

〔課題〕以不妨礙舊型2D支援收訊裝置之收訊處理的方式，地進行視差資訊之送訊。〔解決手段〕將具有左眼影像資料及右眼影像資料的立體影像資料，予以輸出。將要重疊於左眼影像資料及右眼影像資料所致之影像上的重疊資訊之資料，予以輸出。將用來令要重疊於左眼影像資料及右眼影像資料所致之影像上的重疊資訊做平移而賦予視差所需的視差資訊，予以輸出。將多工化串流其中具有：含有立體影像資料的視訊資料串流、和含有重疊資訊之資料的第1私用資料串流、和含有視差資訊的第2私用資料串流，予以發送。在收訊側的舊型2D支援收訊裝置上，藉由從第1私用資料串流中僅讀取重疊資訊之資料，就可防止視差資訊之讀取阻礙到收訊處理。

Description

送訊裝置、送訊方法及收訊裝置
本技術係有關於送訊裝置、送訊方法及收訊裝置。本技術尤其是有關於，與具有左眼影像資料及右眼影像資料的立體影像資料，一起發送重疊資訊之資料及視差資訊的送訊裝置等。
例如，在專利文獻1中係提出了，立體影像資料的使用電視播送電波之傳輸方式。在該傳輸方式中，具有左眼用影像資料及右眼用影像資料的立體影像資料係被發送，會進行利用兩眼視差的立體影像顯示。
圖50係圖示了，利用兩眼視差之立體影像顯示時，於螢幕上的物件(物體)的左右像之顯示位置、與該立體像之再生位置的關係。例如，關於在螢幕上如圖示般地左像La是往右側偏移而右像Ra是往左側偏移而被顯示的物件A，左右的視線是在螢幕面的前方做交叉，因此該立體像的再生位置係為在螢幕面的前方。DPa係表示關於物件A的水平方向之視差向量。
又，例如，關於在螢幕上如圖示般地左像Lb及右像Rb是被顯示在同一位置上的物件B，則是由於左右的視線是在螢幕面上做交叉，因此該立體像的再生位置係為在螢幕面上。再者，關於在螢幕上如圖示般地左像Lc是往左側偏移而右像Rc是往右側偏移而被顯示的物件C，左右 的視線是在螢幕面的後方做交叉，因此該立體像的再生位置係為在螢幕面的後方。DPc係表示關於物件C的水平方向之視差向量。
〔先前技術文獻〕 〔專利文獻〕
〔專利文獻1〕日本特開2005-6114號公報
於上述的立體影像顯示中，視聽者普通是利用兩眼視差，而知覺到立體影像的遠近感。而關於被重疊到影像的重疊資訊，例如字幕等，也希望不僅只有2維空間，而是希望也能帶有3維的縱深感，和立體影像顯示連動地被演算繪製出來。例如，將字幕重疊(疊加)至影像顯示時，若不是被顯示在遠近感上最靠近前面的影像內物體(物件)的前面，則視聽者有時候會感到遠近感的矛盾。
於是，考慮連同重疊資訊之資料，一併將左眼影像及右眼影像之間的視差資訊予以發送，在收訊側，對左眼重疊資訊及右眼重疊資訊之間賦予視差。在此種可顯示立體影像的收訊裝置中，視差資訊係為有意義的資訊。另一方面，在舊型的2D支援的收訊裝置中，該視差資訊係為不需要。在該2D支援的收訊裝置中，必須要採取某些對策，使得該視差資訊之送訊不會妨礙正常的收訊處理。
本技術之目的在於，以不妨礙舊型2D支援收訊裝置 之收訊處理的方式，來進行視差資訊之送訊。
本技術的概念係在於，一種送訊裝置，其係具備：影像資料輸出部，係將具有左眼影像資料及右眼影像資料的立體影像資料，予以輸出；和重疊資訊資料輸出部，係將要重疊於上記左眼影像資料及上記右眼影像資料所致之影像上的重疊資訊之資料，予以輸出；和視差資訊輸出部，係將用來令要重疊於上記左眼影像資料及上記右眼影像資料所致之影像上的重疊資訊做平移而賦予視差所需的視差資訊，予以輸出；和資料送訊部，係發送出多工化串流，其係具有：含有從上記影像資料輸出部所輸出之立體影像資料的視訊資料串流、和含有從上記重疊資訊資料輸出部所輸出之重疊資訊之資料的第1私用資料串流、和含有從上記視差資訊輸出部所輸出之視差資訊的第2私用資料串流。
在本技術中，具有左眼影像資料及右眼影像資料的立體影像資料，會被影像資料輸出部所輸出。要重疊於左眼影像資料及右眼影像資料所致之影像上的重疊資訊之資料，會被重疊資訊資料輸出部所輸出。此處，重疊資訊係為要被重疊於影像的字幕、圖形、文字等之資訊。用來令要重疊於左眼影像資料及右眼影像資料所致之影像上的重 疊資訊做平移而賦予視差所需的視差資訊，會被視差資訊輸出部所輸出。
例如，亦可為，視差資訊係為在重疊資訊被顯示之所定數之畫格期間內被依序更新的視差資訊，是由該所定數之畫格期間的最初之畫格的視差資訊、和其後的每次更新畫格間隔的畫格的視差資訊所成。又，亦可為，例如，重疊資訊之資料係為DVB方式之字幕資料；視差資訊係為區域單位或該區域中所含之子區域單位的視差資訊、或是包含全部區域之頁面單位的視差資訊。
多工化資料串流，係被資料送訊部所發送。該多工化資料串流係為具有；含有立體影像資料的視訊資料串流、和含有重疊資訊之資料的第1私用資料串流、和含有視差資訊的第2私用資料串流。
如此，於本技術中，多工化資料串流係為具有：含有重疊資訊之資料的第1私用資料串流、和含有視差資訊的第2私用資料串流。因此，在收訊側的舊型2D支援收訊裝置上，藉由從第1私用資料串流中僅讀取重疊資訊之資料，就可防止視差資訊之讀取阻礙到收訊處理。又，在收訊側的3D支援收訊裝置上，可從第1私用資料串流讀取重疊資訊之資料，從第2私用資料串流讀取視差資訊，配合立體影像之顯示內容的重疊資訊之顯示係成為可能。
此外，於本技術中，例如，在第1私用資料串流及第2私用資料串流中係亦可含有，用來使重疊資訊之資料所致之顯示與視差資訊所致之平移控制做同步所需的同步資 訊。藉此，即使重疊資訊之資料與視差資訊是以個別之串流而被發送的情況下，在收訊側，仍可使得重疊資訊之資料所致之顯示與視差資訊所致之平移控制，獲得同步。
又，於本技術中，亦可為，例如，在多工化串流中係被插入有，用來將第1私用資料串流與第2私用資料串流建立關連的關連建立資訊。藉由該關連建立資訊，例如，在收訊側的3D支援機器上就可容易掌握第1私用資料串流與第2私用資料串流有被建立關連之事實，了解到必須要將雙方之串流予以解碼。
又，本技術的另一概念係在於，一種送訊裝置，其係具備：影像資料輸出部，係將具有左眼影像資料及右眼影像資料的立體影像資料，予以輸出；和重疊資訊資料輸出部，係將要重疊於上記左眼影像資料及上記右眼影像資料所致之影像上的重疊資訊之資料，予以輸出；和視差資訊輸出部，係將用來令要重疊於上記左眼影像資料及上記右眼影像資料所致之影像上的重疊資訊做平移而賦予視差所需的視差資訊，予以輸出；和資料送訊部，係發送出多工化串流，其係具有：含有從上記影像資料輸出部所輸出之立體影像資料的視訊資料串流、和含有從上記重疊資訊資料輸出部所輸出之重疊資訊資料的第1私用資料串流、和含有從重疊資訊資料輸出部所輸出之重疊資訊之資料及從上記視差資訊輸出部所輸 出之視差資訊的第2私用資料串流。
在本技術中，具有左眼影像資料及右眼影像資料的立體影像資料，會被影像資料輸出部所輸出。要重疊於左眼影像資料及右眼影像資料所致之影像上的重疊資訊之資料，會被重疊資訊資料輸出部所輸出。此處，重疊資訊係為要被重疊於影像的字幕、圖形、文字等之資訊。用來令要重疊於左眼影像資料及右眼影像資料所致之影像上的重疊資訊做平移而賦予視差所需的視差資訊，會被視差資訊輸出部所輸出。
例如，亦可為，視差資訊係為在重疊資訊被顯示之所定數之畫格期間內被依序更新的視差資訊，是由該所定數之畫格期間的最初之畫格的視差資訊、和其後的每次更新畫格間隔的畫格的視差資訊所成。又，亦可為，例如，重疊資訊之資料係為DVB方式之字幕資料；視差資訊係為區域單位或該區域中所含之子區域單位的視差資訊、或是包含全部區域之頁面單位的視差資訊。
多工化資料串流，係被資料送訊部所發送。該多工化資料串流係為具有；含有立體影像資料的視訊資料串流、和含有重疊資訊之資料的第1私用資料串流、和含有重疊資訊之資料及視差資訊的第2私用資料串流。
如此，於本技術中，多工化資料串流係為具有：含有重疊資訊之資料的第1私用資料串流、和含有重疊資訊之資料及視差資訊的第2私用資料串流。因此，在收訊側的舊型2D支援收訊裝置上，藉由從第1私用資料串流中僅 讀取重疊資訊之資料，就可防止視差資訊阻礙到收訊處理。又，在收訊側的3D支援收訊裝置上，可從第2私用資料串流讀取重疊資訊之資料及視差資訊，配合立體影像之顯示內容的重疊資訊之顯示係成為可能。
又，本技術的另一概念係在於，一種收訊裝置，其係具備資料收訊部，係將具有視訊資料串流、第1私用資料串流及第2私用資料串流的多工化資料串流，予以接收；上記視訊資料串流係含有，具有左眼影像資料及右眼影像資料的立體影像資料；上記第1私用資料串流係含有，要對上記左眼影像資料及上記右眼影像資料所致之影像做重疊的重疊資訊之資料；上記第2私用資料串流係含有，用來令要重疊於上記左眼影像資料及上記右眼影像資料所致之影像上的重疊資訊做平移而賦予視差所需的視差資訊；還含有：資訊取得部、影像資料處理部；上記資訊取得部，係從已被上記資料收訊部所接收到的上記多工化資料串流中，抽出上記視訊資料串流，取得該視訊資料串流中所含之上記立體影像資料；從已被上記資料收訊部所接收到的上記多工化資料串流中，抽出上記第1私用資料串流，從該第1私用資料串流，取得上記重疊資訊之資料； 從已被上記資料收訊部所接收到的上記多工化資料串流中，抽出上記第2私用資料串流，從該第2私用資料串流，取得上記視差資訊；上記影像資料處理部，係使用已被上記資訊取得部所取得的上記立體影像資料、上記重疊資訊之資料及上記視差資訊，對要重疊於左眼影像及右眼影像的同一重疊資訊，賦予視差，獲得已被重疊上記重疊資訊的左眼影像之資料及已被重疊上記重疊資訊的右眼影像之資料。
於本技術中，具有視訊資料串流、第1私用資料串流及第2私用資料串流的多工化資料串流，會被資料收訊部所接收。然後，藉由資訊取得部，視訊資料串流中所含之立體影像資料會被取得，從第1私用資料串流中會取得重疊資訊之資料，從第2私用資料串流中會取得視差資訊。
藉由影像資料處理部，會使用立體影像資料、重疊資訊之資料及視差資訊，要重疊於左眼影像及右眼影像的同一重疊資訊，會被賦予視差，獲得已被重疊有重疊資訊的左眼影像之資料及已被重疊有重疊資訊的右眼影像之資料。
例如，亦可為，視差資訊係為在重疊資訊被顯示之所定數之畫格期間內被依序更新的視差資訊；影像資料處理部係對於所定數之畫格期間內被依序更新的複數畫格的視差資訊，實施內插處理，生成所定數之畫格期間內的任意之畫格間隔的視差資訊並使用之。此情況下，即使從送訊 側每次更新畫格間隔地發送出視差資訊的情況下，仍可將重疊資訊中所被賦予的視差，以精細的間隔，例如每一畫格地加以控制。
又，亦可為，例如，視差資訊係為，在重疊資訊被顯示之所定數之畫格期間內被依序更新的視差資訊；在視差資訊中，作為更新畫格間隔之資訊，而附加有單位期間之資訊及該單位期間之個數的資訊，影像資料處理部，係以重疊資訊的顯示開始時刻為基準，將視差資訊的各更新時刻，根據各更新畫格間隔之資訊亦即單位期間之資訊及個數之資訊，而予以求出。此時，在影像資料處理部中，可根據重疊資訊的顯示開始時刻，依序求出各更新時刻。例如，相對於某更新時刻的下個更新時刻，係使用下個更新畫格間隔之資訊亦即單位期間之資訊及個數之資訊，將單位期間×個數之時間，加算至某更新時刻，藉此就可簡單求出。
如此，於本技術中，從第1私用資料串流中會取得重疊資訊之資料，從第2私用資料串流中會取得視差資訊。因此，配合立體影像之顯示內容的重疊資訊之顯示係成為可能。
此外，於本技術中，亦可為，例如，在多工化資料串流中係被插入有，用來將第1私用資料串流與第2私用資料串流建立關連的關連建立資訊；資訊取得部，係基於關連建立資訊，而從第1私用資料串流取得重疊資訊之資料，並且從第2私用資料串流取得視差資訊。藉此，收訊 側的3D支援收訊裝置上的處理就可更為適切地進行。
又，本技術的另一概念係在於，一種收訊裝置，其係具備資料收訊部，係將具有視訊資料串流、第1私用資料串流及第2私用資料串流的多工化資料串流，予以接收；上記視訊資料串流係含有，具有左眼影像資料及右眼影像資料的立體影像資料；上記第1私用資料串流係含有，要對上記左眼影像資料及上記右眼影像資料所致之影像做重疊的重疊資訊之資料；上記第2私用資料串流係含有，上記重疊資訊之資料、及用來令要重疊於上記左眼影像資料及上記右眼影像資料所致之影像上的重疊資訊做平移而賦予視差所需的視差資訊；還含有：資訊取得部、影像資料處理部；上記資訊取得部，係從已被上記資料收訊部所接收到的上記多工化資料串流中，抽出上記視訊資料串流，取得該視訊資料串流中所含之上記立體影像資料；從已被上記資料收訊部所接收到的上記多工化資料串流中，抽出上記第2私用資料串流，從該第2私用資料串流，取得上記重疊資訊之資料及上記視差資訊；上記影像資料處理部，係使用已被上記資訊取得部所取得的上記立體影像資 料、上記重疊資訊之資料及上記視差資訊，對要重疊於左眼影像及右眼影像的同一重疊資訊，賦予視差，獲得已被重疊上記重疊資訊的左眼影像之資料及已被重疊上記重疊資訊的右眼影像之資料。
於本技術中，具有視訊資料串流、第1私用資料串流及第2私用資料串流的多工化資料串流，會被資料收訊部所接收。然後，藉由資訊取得部，視訊資料串流中所含之立體影像資料會被取得，從第2私用資料串流中會取得重疊資訊之資料及視差資訊。
藉由影像資料處理部，會使用立體影像資料、重疊資訊之資料及視差資訊，要重疊於左眼影像及右眼影像的同一重疊資訊，會被賦予視差，獲得已被重疊有重疊資訊的左眼影像之資料及已被重疊有重疊資訊的右眼影像之資料。
例如，亦可為，視差資訊係為在重疊資訊被顯示之所定數之畫格期間內被依序更新的視差資訊；影像資料處理部係對於所定數之畫格期間內被依序更新的複數畫格的視差資訊，實施內插處理，生成所定數之畫格期間內的任意之畫格間隔的視差資訊並使用之。此情況下，即使從送訊側每次更新畫格間隔地發送出視差資訊的情況下，仍可將重疊資訊中所被賦予的視差，以精細的間隔，例如每一畫格地加以控制。
又，亦可為，例如，視差資訊係為，在重疊資訊被顯示之所定數之畫格期間內被依序更新的視差資訊；在視差 資訊中，作為更新畫格間隔之資訊，而附加有單位期間之資訊及該單位期間之個數的資訊，影像資料處理部，係以重疊資訊的顯示開始時刻為基準，將視差資訊的各更新時刻，根據各更新畫格間隔之資訊亦即單位期間之資訊及個數之資訊，而予以求出。此時，在影像資料處理部中，可根據重疊資訊的顯示開始時刻，依序求出各更新時刻。例如，相對於某更新時刻的下個更新時刻，係使用下個更新畫格間隔之資訊亦即單位期間之資訊及個數之資訊，將單位期間×個數之時間，加算至某更新時刻，藉此就可簡單求出。
如此在本技術中，從第2私用資料串流中會取得重疊資訊之資料及視差資訊。因此，配合立體影像之顯示內容的重疊資訊之顯示係成為可能。
又，本技術的另一概念係在於，一種收訊裝置，其係具備資料收訊部，係將具有視訊資料串流、第1私用資料串流及第2私用資料串流的多工化資料串流，予以接收；上記視訊資料串流係含有，具有左眼影像資料及右眼影像資料的立體影像資料；上記第1私用資料串流係含有，要對上記左眼影像資料及上記右眼影像資料所致之影像做重疊的重疊資訊之資料；上記第2私用資料串流係含有，用來令要重疊於上記左眼影像資料及上記右眼影像資料所致之影像上的重疊資 訊做平移而賦予視差所需的視差資訊、或者是該視差資訊及上記重疊資訊之資料；還含有：資訊取得部、影像資料處理部；上記資訊取得部，係從已被上記資料收訊部所接收到的上記多工化資料串流中，抽出上記視訊資料串流，取得該視訊資料串流中所含之上記立體影像資料；從已被上記資料收訊部所接收到的上記多工化資料串流中，抽出上記第1私用資料串流，從該第1私用資料串流，取得上記重疊資訊之資料；上記影像資料處理部，係使用已被上記資訊取得部所取得的上記立體影像資料及上記重疊資訊之資料，獲得已被重疊有上記重疊資訊的影像資料。
於本技術中，具有視訊資料串流、第1私用資料串流及第2私用資料串流的多工化資料串流，會被資料收訊部所接收。然後，藉由資訊取得部，視訊資料串流中所含之立體影像資料會被取得，從第1私用資料串流中會取得重疊資訊之資料。藉由影像資料處理部，會使用立體影像資料及重疊資訊之資料，獲得被重疊有重疊資訊的影像資料。
如此在本技術中，會從不含視差資訊的第1私用資料串流，取得重疊資訊之資料。可防止視差資訊之讀取阻礙到收訊處理。
若依據本技術，則可以不妨礙舊型2D支援收訊裝置之收訊處理的方式，良好地進行視差資訊之送訊。
以下，說明用以實施發明的形態(以下稱作「實施形態」)。此外，說明是按照以下順序進行。
1.實施形態
2.變形例
<1.實施形態> 〔影像收送訊系統之構成例〕
圖1係圖示，作為實施形態的影像收送訊系統10的構成例。該影像收送訊系統10係具有：播送台100、機上盒(STB)200、電視收訊機(TV)300。
機上盒200及電視收訊機300，係被HDMI(High Definition Multimedia Interface)的數位介面所連接。機上盒200及電視收訊機300，係使用HDMI纜線400而連接。在機上盒200上設有HDMI端子202。在電視收訊機300上設有HDMI端子302。HDMI纜線400的一端係被連接至機上盒200的HDMI端子202，該HDMI纜線400的另一端係被連接至電視收訊機300的HDMI端子302。
〔播送台的說明〕
播送台100係將位元串流資料BSD，裝載於播送波中而發送。播送台100係具備，生成位元串流資料BSD的送訊資料生成部110。該位元串流資料BSD中係含有，立體影像資料、聲音資料、重疊資訊之資料、視差資訊等。立體影像資料係具有所定傳輸格式，帶有用以顯示立體影像所需之左眼影像資料及右眼影像資料。重疊資訊，一般而言係為字幕、圖形資訊、文字資訊等，但在本實施形態中係為字幕。
「送訊資料生成部之構成例」
圖2係圖示了，播送台100中，送訊資料生成部110的構成例。該送訊資料生成部110，係以能夠容易和既存之播送規格之一的DVB(Digital Video Broadcasting)方式相容的資料結構，來發送視差資訊(視差向量)。該送訊資料生成部110係具有：資料取出部111、視訊編碼器112、音訊編碼器113。又，該送訊資料生成部110係具有：字幕產生部114、視差資訊作成部115、字幕處理部116、字幕編碼器118、多工器119。
對資料取出部111，係有資料記錄媒體111a例如可自由裝卸地被著裝。在該資料記錄媒體111a中，係除了含有左眼影像資料及右眼影像資料的立體影像資料以外，還有聲音資料、視差資訊，是被建立對應而記錄。資料取出部111，係從資料記錄媒體111a中，取出立體影像資料、 聲音資料、視差資訊等而予以輸出。資料記錄媒體111a,係為碟片狀記錄媒體、半導體記憶體等。
資料記錄媒體111a中所記錄之立體影像資料，係為所定之傳輸方式的立體影像資料。說明立體影像資料(3D影像資料)的傳輸方式之一例。此處，雖然舉出以下的第1~第3傳輸方式，但亦可為這些以外的傳輸方式。又，此處，如圖3所示，是以左眼(L)及右眼(R)的影像資料分別為已決定之解析度、例如1920×1080的像素格式的影像資料時為例子來說明。
第1傳輸方式，係為上下併排(Top & Bottom)方式，如圖4(a)所示，是在垂直方向的前半是傳輸左眼影像資料的各掃描線之資料，在垂直方向的後半是傳輸左眼影像資料的各掃描線之資料的方式。此時，由於左眼影像資料及右眼影像資料的掃描線被抽掉了1/2，因此對於原訊號而言垂直解析度係減半。
第2傳輸方式，係為並肩式(Side By Side)方式，如圖4(b)所示，是在水平方向的前半是傳輸左眼影像資料的像素資料，在水平方向的後半是傳輸右眼影像資料的像素資料的方式。此情況下，左眼影像資料及右眼影像資料，其水平方向的像素資料是分別被抽略了1/2。對原訊號而言，水平解析度係減半。
第3傳輸方式，係為畫格序列(Frame Sequential)方式，如圖4(c)所示，是將左眼影像資料與右眼影像資料按照每一畫格依序切換進行傳輸之方式。此外，該畫格 序列方式，有時候會稱為全畫格(Full Frame)方式、或對先前之2D格式之服務相容(service compatible)方式。
又，資料記錄媒體111a中所記錄的視差資訊係為，例如，構成影像的每一像素(畫素)的視差向量。說明視差向量的偵測例。此處說明，相對於左眼影像的右眼影像之視差向量的偵測例。如圖5所示，令左眼影像為偵測影像，右眼影像為參照影像。在此例中，在(xi,yi)及(xj,yj)之位置上的視差向量，會被偵測出來。
以偵測(xi,yi)之位置上的視差向量時為例來說明。此時，在左眼影像中，令(xi,yi)之位置的像素為左上，設定例如4×4、8×8、或16×16的像素區塊(視差偵測區塊)Bi。然後，於右眼影像中，探索出與像素區塊Bi契合的像素區塊。
此時，在右眼影像中，設定以(xi,yi)之位置為中心的探索範圍，將該探索範圍內的各像素逐一當作注目像素，而依序設定與上述像素區塊Bi同樣之例如4×4、8×8或16×16的比較區塊。
在像素區塊Bi與依序設定之比較區塊之間，求出對應之每一像素的差分絕對值之總和。此處，如圖6所示，令像素區塊Bi的像素值為L(x,y)，比較區塊的像素值為R(x,y)時，像素區塊Bi與某個比較區塊之間的差分絕對值之總和，係以Σ| L(x,y)-R(x,y)|來表示。
右眼影像中所被設定的探索範圍裡含有n個像素時， 最終會求出n個總和S1~Sn，其中最小的總和Smin會被選擇。然後，從獲得該總和Smin的比較區塊可得到左上之像素位置是(xi’,yi’)。藉此，(xi,yi)之位置上的視差向量，係被偵測為(xi’-xi,yi’-yi)。詳細說明雖然省略，但關於(xj,yj)之位置上的視差向量，也是在左眼影像中，令(xj,yj)之位置的像素為左上，設定例如4×4、8×8、或16×16的像素區塊Bj，以同樣的處理過程而偵測出來。
視訊編碼器112，係對從資料取出部111所取出的立體影像資料，實施MPEG4-AVC、MPEG2、VC-1等之編碼，生成視訊資料串流(視訊元素串流)。音訊編碼器113，係對從資料取出部111所取出的聲音資料，實施AC3、AAC等之編碼，生成音訊資料串流(音訊元素串流)。
字幕產生部114，係產生DVB(Digital Video Broadcasting)方式之字幕資料亦即字幕資料。該字幕資料，係為2維影像用的字幕資料。該字幕產生部114，係構成了重疊資訊資料輸出部。
視差資訊作成部115，係對從資料取出部111取出的每一像素(畫素)的視差向量(水平方向視差向量)，實施尺寸縮小處理，如以下所示，生成各階層的視差資訊。此外，視差資訊係並不一定要由視差資訊作成部115所生成，亦可從外部另行供給之構成。
圖7係圖示了，以各像素(畫素)的亮度值之方式所 給予的相對深度方向之資料的例子。此處，相對深度方向之資料係藉由所定之轉換，就可當作每一像素的視差向量來運用。在此例子中，人物部分的亮度值係較高。這是意味著，人物部分的視差向量的值較大，因此，在立體影像顯示時，該人物部分係會被感知成較為浮出之狀態。又，在此例子中，背景部分的亮度值係較低。這是意味著，背景部分的視差向量的值較小，因此，在立體影像顯示時，該背景部分係會被感知成較為深陷之狀態。
圖8係圖示了，各區塊(Block)的視差向量之一例。區塊，係相當於位於最下層之像素(畫素)的上位層。該區塊係為，影像(圖像)領域是在水平方向及垂直方向上被分割成所定大小而構成。各區塊的視差向量係為，例如，從該區塊內所存在的所有像素(畫素)的視差向量中，選擇出最大值的視差向量而獲得。在此例中，各區塊的視差向量是以箭頭表示，箭頭的長度係對應於視差向量的大小。
圖9係圖示了視差資訊作成部115所進行的尺寸縮小處理之一例。首先，視差資訊作成部115，係如圖9(a)所示，使用每一像素(畫素)的視差向量，求出每一區塊的帶有符號之視差向量。如上述，區塊，係相當於位於最下層之像素(畫素)的上位層，其係影像(圖像)領域是在水平方向及垂直方向上被分割成所定大小而構成。而且，各區塊的視差向量係為，例如，從該區塊內所存在的所有像素(畫素)的視差向量中，選擇出帶有值最小的、 或絕對值最大的負的值的視差向量而獲得。
接著，視差資訊作成部115，係如圖9(b)所示，使用每一區塊的視差向量，求出每一群組(Group Of Block)的視差向量。群組，係相當於區塊的上位層，藉由將複數個鄰近的區塊加以集合而群組化，就可獲得。在圖9(b)的例子中，各群組係由虛線框所框起來的4個區塊所構成。而且，各群組的視差向量係為，例如，從該群組內的所有區塊的視差向量，選擇出帶有值最小的、或絕對值最大的負的值的視差向量而獲得。
接著，視差資訊作成部115，係如圖9(c)所示，使用每一群組的視差向量，求出每一分割區(Partition)的視差向量。分割區，係相當於群組的上位層，是藉由將複數個鄰近的群組加以集合而群組化所獲得。在圖9(c)的例子中，各分割區係由虛線框所框起來的2個群組所構成。而且，各分割區的視差向量係為，例如，從該分割區內的所有群組的視差向量，選擇出帶有值最小的、或絕對值最大的負的值的視差向量而獲得。
接著，視差資訊作成部115，係如圖9(d)所示，使用每一分割區的視差向量，求出位於最上位層的圖像全體(影像全體)的視差向量。在圖9(d)的例子中，在圖像全體，係含有由虛線框所框起來的4個分割區。而且，圖像全體的視差向量係為，例如，從圖像全體中所含之全部分割區的視差向量，選擇出帶有值最小的、或絕對值最大的負的值的視差向量而獲得。
如此一來，視差資訊作成部115，係對位於最下層的每一像素(畫素)的視差向量，實施尺寸縮小處理，就可求出區塊、群組、分割區、圖像全體的各階層之各領域的視差向量。此外，圖9所示的尺寸縮小處理之一例，最終除了像素(畫素)之階層以外，還求出了區塊、群組、分割區、圖像全體的4階層的視差向量。可是，階層數以及各階層之領域的切割方式或領域的數量並不限定於此。
回到圖2，字幕處理部116，係基於字幕產生部114所產生的字幕資料，就可在區域內，定義子區域的領域。又，字幕處理部116，係基於視差資訊作成部115所作成的視差資訊，來設定用來將左眼影像及右眼影像中的重疊資訊之顯示位置予以平移調整所需的視差資訊。該視差資訊，係可對每一子區域或區域、或每一頁面，來作設定。
圖10(a)係圖示，在字幕資料中，畫面上所被定義的區域、和該區域內所被定義的子區域之一例。在此例中，在「Region_Starting Position」為R0的區域0(Resion0)中，定義有「SubResion 1」、「SubResion 2」這2個子區域。「SubResion 1」的水平方向位置(Horizontal Posion)x係為SR1，「SubResion 2」水平方向位置(Horizontal Posion)x係為SR2。然後，在此例中，對子區域「SubResion 1」係設定了視差資訊「disparity 1」，對子區域「SubResion 2」係設定了視差資訊「disparity 2」。
圖10(b)係圖示了視差資訊所致之左眼影像中的子 區域領域內的平移調整例。對子區域「SubResion 1」係設定了視差資訊「disparity 1」。因此，關於子區域「SubResion 1」，係做平移調整以使得水平方向位置(Horizontal Posion)x會落在SR1-disparity 1。又，對子區域「SubResion2」係設定了視差資訊「disparity 2」。因此，關於子區域「SubResion 2」，係做平移調整以使得水平方向位置(Horizontal Posion)x會落在SR2-disparity 2。
圖10(c)係圖示了視差資訊所致之右眼影像中的子區域領域內的平移調整例。對子區域「SubResion 1」係設定了視差資訊「disparity 1」。因此，關於子區域「SubResion 1」，係與上述的左眼影像反向，進行平移調整以使得水平方向位置(HorizontalPosion)x會落在SR1+disparity 1。又，對子區域「SubResion 2」係設定了視差資訊「disparity 2」。因此，關於子區域「SubResion 2」，係與上述的左眼影像反向，進行平移調整以使得水平方向位置(HorizontalPosion)x會落在SR2+disparity 2。
字幕處理部116，係將字幕產生部114所產生的字幕資料，連同上述的子區域領域之領域資訊、視差資訊等之顯示控制資訊，一併予以輸出。此外，關於視差資訊，雖然可如上述般地以子區域單位來做設定，但亦可以區域單位、或頁面單位來做設定。
字幕資料係具有DDS、PCS、RCS、CDS、ODS、EDS 等之區段。DDS(display definition segment)，係指定了HDTV用的顯示(display)尺寸。PCS(page composition segment)，係指定了頁面(page)內的區域(region)位置。RCS(region compositionsegment)，係指定了區域(Region)之大小或物件(object)之編碼模式，又還指定了物件(object)的開始位置。
CDS(CLUT definition segment)，係指定了CLUT內容。ODS(objectdata segment)，係含有編碼像素資料(Pixeldata)。EDS(end of displayset segment)，係表示從DDS之區段開始的字幕資料之結束。在本實施形態中，係還定義了DSS(Display Signaling Segment)之區段。在該DSS之區段中，係被插入有上述的顯示控制資訊。
回到圖2，字幕編碼器118，係用以下的「第1類型」或「第2類型」，生成第1及第2私用資料串流(第1及第2字幕資料串流)。
在「第1類型」下，會生成含有DDS、PCS、RCS、CDS、ODS、EDS之區段的第1私用資料串流(2D串流)。又，在該「第1類型」下，會生成含有DDS、DSS、EDS之區段的第2私用資料串流(3D擴充串流)。在「第2類型」下，會生成含有DDS、PCS、RCS、CDS、ODS、EDS之區段的第1私用資料串流(2D串流)。又，在該「第2類型」下，會生成含有DDS、PCS、RCS、DSS、CDS、ODS、EDS之區段的第2私用資 料串流(3D串流)。
多工器119係將來自視訊編碼器112、音訊編碼器113及字幕編碼器118的各資料串流予以多工化，獲得作為多工化資料串流的傳輸串流TS。該傳輸串流TS，係作為PES(Packetized Elementarty Stream)之串流，是具有視訊資料串流、音訊資料串流、第1及第2私用資料串流。
圖11係圖示了，在「第1類型」下，傳輸串流TS所具有的第1私用資料串流(2D串流)及第2私用資料串流(3D擴充串流)之構成。圖11(a)係圖示2D串流，在開頭配置有PES標頭(PES Header)，接續其之後，配置了含有DDS、PCS、RCS、CDS、ODS、EDS之各區段的PES酬載(PES Payload)。又，圖11(b)係圖示3D擴充串流，在開頭配置有PES標頭(PES Header)，接續其之後，配置了含有DDS、DSS、EDS之各區段的PES酬載(PES Payload)。
圖12係圖示了，在「第2類型」下，傳輸串流TS所具有的第1私用資料串流(2D串流)及第2私用資料串流(3D串流)之構成。圖12(a)係圖示2D串流，在開頭配置有PES標頭(PES Header)，接續其之後，配置了含有DDS、PCS、RCS、CDS、ODS、EDS之各區段的PES酬載(PES Payload)。又，圖12(b)係圖示3D串流，在開頭配置有PES標頭(PES Header)，接續其之後，配置了含有DDS、PCS、RCS、DSS、CDS、ODS、EDS之各 區段的PES酬載(PES Payload)。
多工器119，係在「第1類型」下，使得在2D串流及3D擴充串流中，會含有用來在收訊側中使重疊資訊之資料所致之顯示與視差資訊(Disparity)所致之平移控制做同步所需的同步資訊。具體而言，多工器119係如圖13所示，2D串流(PES1(1)：PES # 1)與3D擴充畫格(PES2(2)：PES # 2)的PES標頭中所被插入的時間戳記(PTS：Presentation Time Stamp)之值，是被建立關連。
圖13係圖示了，2D串流與3D擴充串流的時間戳記(PTS)之值是被設定成相同值，亦即被設定成PTS1的例子。此情況下，在收訊側(解碼側)上，字幕資料(重疊資訊之資料)所致之字幕圖案之顯示是從PTS1開始，用來將字幕圖案進行3D顯示所需的視差資訊所致之平移控制，也是從PTS1開始。
此外，圖13的例子中係圖示了，在3D擴充串流中，係含有PTS1的畫格之視差資訊、和其後的所定畫格的視差資訊這2個視差資訊。係表示了，在收訊側(解碼側)，這2個畫格之間的任意畫格的視差資訊，是可用內插處理來求出而動態地進行平移控制。
又，於圖13中，2D串流中所含之“Conventional Segments”，係意味著DDS、PCS、RCS、CDS、ODS、EDS之各區段。又，3D擴充串流中所含之“Extended Segments”，係意味著DDS、DSS、EDS之各區段。又， 於圖13中，2D串流的“Elementary_PID”係為ID1，3D擴充串流的“Elementary_PID”係為ID2。這點在以下的圖14、圖15中也同樣如此。
圖14係圖示了，2D串流與3D擴充串流的時間戳記(PTS)之值是被設定成不同值的例子。亦即，於圖13的例子中，2D串流的時間戳記(PTS)之值係被設定成PTS1，3D擴充串流的時間戳記(PTS)之值係被設定成比PTS1後面的PTS2之例子。此情況下，在收訊側(解碼側)上，字幕資料(重疊資訊之資料)所致之字幕圖案之顯示是從PTS1開始，用來將字幕圖案進行3D顯示所需的視差資訊所致之平移控制，是從PTS2開始。
此外，圖14的例子中係圖示了，在3D擴充串流中係含有PTS2的畫格之視差資訊、和其後的複數畫格的視差資訊。係表示了，在收訊側(解碼側)，這複數畫格之間的任意畫格的視差資訊，是可用內插處理來求出而動態地進行平移控制。
圖15係和圖14同樣地，圖示了2D串流與3D擴充串流的時間戳記(PTS)之值是被設定成不同值的例子，而且，時間戳記(PTS)之值為不同的3D擴充串流是有複數個存在的例子。亦即，在圖15的例子中，2D串流的時間戳記(PTS)之值係被設定成PTS1。又，複數3D擴充畫格的時間戳記(PTS)之值，係被設定成比PTS1後面的PTS2,PTS3,PTS4,．．．。
此時，在收訊側(解碼側)中，字幕資料(重疊資訊 之資料)所致之字幕圖案之顯示，是從PTS1開始。又，用來將字幕圖案進行3D顯示所需的視差資訊所致之平移控制，是從PTS2開始，其後被依序更新。此外，於圖15的例子中係圖示了，複數個3D擴充串流中係僅含有各個時間戳記所示的畫格的視差資訊，在收訊側(解碼側)中，這些複數畫格之間的任意畫格的視差資訊，是可用內插處理來求出而動態地進行平移控制。
簡單說明圖2所示的送訊資料生成部110之動作。從資料取出部111所取出的立體影像資料，係被供給至視訊編碼器112。在此視訊編碼器112中，係對該立體影像資料施以MPEG4-AVC、MPEG2、VC-1等之編碼，生成含有編碼視訊資料的視訊資料串流。該視訊資料串流係被供給至多工器119。
已被資料取出部111所取出的聲音資料，係被供給至音訊編碼器113。在此音訊編碼器113中，係對聲音資料，施以MPEG-2 Audio AAC或MPEG-4 AAC等之編碼，生成含有編碼音訊資料的音訊資料串流。該音訊資料串流係被供給至多工器119。
在字幕產生部114中，DVB之字幕資料(2維影像用)，會被產生。該字幕資料，係被供給至視差資訊作成部115及字幕處理部116。
從資料取出部111所取出的每一像素(畫素)的視差向量，係被供給至視差資訊作成部115。在該視差資訊作成部115中，對每一像素、或複數圖像的視差向量，實施 尺寸縮小處理，作成各階層的視差資訊(disparity)。該視差資訊，係被供給至字幕處理部116。
在字幕處理部116中，係基於字幕產生部114所產生的字幕資料，例如，在區域內定義了子區域的領域。又，在字幕處理部116中，係基於視差資訊作成部115所作成的視差資訊，來設定用來將左眼影像及右眼影像中的重疊資訊之顯示位置予以平移調整所需的視差資訊。此時，視差資訊係可對每一子區域或區域、或每一頁面，來作設定。
從字幕處理部116所輸出之字幕資料及顯示控制資訊，係被供給至字幕編碼器118。顯示控制資訊中係含有子區域領域的領域資訊、視差資訊等。在該字幕編碼器118中，係用以下的「第1類型」或「第2類型」，生成第1及第2私用資料串流(元素串流)。
在「第1類型」下，會生成含有DDS、PCS、RCS、CDS、ODS、EDS之各區段的第1私用資料串流(2D串流)。然後，在該「第1類型」下，會生成含有DDS、DSS、EDS之各區段的第2私用資料串流(3D擴充串流)。在「第2類型」下，會生成含有DDS、PCS、RCS、CDS、ODS、EDS之各區段的第1私用資料串流(2D串流)。然後，在該「第2類型」下，會生成含有DDS、PCS、RCS、DSS、CDS、ODS、EDS之各區段的第2私用資料串流(3D串流)。如上述，DSS之區段係為含有顯示控制資訊的區段。
對多工器119係如上述而被供給了，來自視訊編碼器112、音訊編碼器113及字幕編碼器118的各資料串流。然後，在該多工器119中，各資料串流會被PES封包化並多工化，獲得作為多工化資料串流的傳輸串流TS。該傳輸串流TS，係作為PES之串流，是具有視訊資料串流、音訊資料串流、還有第1及第2私用資料串流。
圖16係圖示了「第1類型」時的傳輸串流TS之構成例。此外，在此圖中，為了簡化圖面，關於視訊及音訊部分的圖示係省略。該傳輸串流TS中係含有，將各元素串流予以封包化而得到的PES封包。
在此構成例中，含有2D串流(第1私用資料串流)的PES封包「Subtitle PES1」、和3D擴充串流(第2私用資料串流)的PES封包「Subtitle PES2」。2D串流(PES串流)中係含有DDS、PCS、RCS、CDS、ODS、EDS之各區段。3D擴充串流(PES串流)中係含有DDS、DSS、EDS之各區段。此情況下，2D串流、3D擴充串流的“Elementary_PID”是被設定成像是PID1,PID2而有所不同，表示這些串流係為個別的串流。
圖17係圖示了PCS(page_composition_segment)之結構。該PCS之區段類型，係如圖18所示，是「0x10」。「region_horizontal_address」、「region_vertical_address」係表示區域(region)的開始位置。此外，關於DDS、RCS、ODS等之其他區段結構的圖示則省略。如圖18所示，DDS之區段類型係為「0x14」，RCS之區段類型係為 「0x11」，CDS之區段類型係為「0x12」，ODS之區段類型係為「0x13」，EDS之區段類型係為「0x80」。然後，如圖18所示，DSS之區段類型係為「0x15」。關於該DSS之區段的詳細結構，將於後述。
回到圖16，又，在傳輸串流TS中，作為PSI(Program Specific Information)，還含有PMT(ProgramMap Table)。該PSI係用來表示，傳輸串流中所含之各元素串流是屬於哪個節目的資訊。又，在傳輸串流中，作為進行事件單位管理的SI(Serviced Information)，含有EIT(EventInformation Table)。該EIT中係記載著節目單位的詮釋資料。
在PMT旗下，係被插入有表示字幕之內容的字幕描述元(Subtitle descriptor)。又，在EIT旗下，係每串流地被插入有表示配訊內容的組成描述元(Component_Descriptor)。如圖19所示，組成描述元的“stream_content”是表示字幕(subtitle)的情況下，當“component_type”是「0x15」或「0x25」時係表示3D用字幕，若為其他值時則表示2D用字幕。如圖16所示,字幕描述元的“subtitling_type”係被設定成和“component_type”相同的值。
又，在該PMT中係存在有，具有關連於字幕元素串流之資訊的字幕元素迴圈。在該字幕元素迴圈中，除了對每一串流配置了封包識別元(PID)等之資訊外，還配置有未圖示的描述有該元素串流所關連之資訊的描述元 (descriptor)。
在「第1類型」的情況下，為了表示3D擴充串流中所含之各區段是關連於2D串流的各區段，而字幕描述元的“composition_page_id”會被設定。亦即，是被設定成，在3D擴充串流與2D串流中，此一“composition_page_id”，係會共用相同的值(在圖示中係為「0xXXXX」)。又，在此「第1類型」的情況下，為了表示3D擴充串流中所含之各區段是關連於2D串流的各區段，而被編碼成在雙方之串流中，關連之各區段的“page_id”會具有相同的值。
圖20係圖示了「第2類型」時的傳輸串流TS之構成例。此外，在此圖中也是，為了簡化圖面，關於視訊及音訊部分的圖示係省略。該傳輸串流TS中係含有，將各元素串流予以封包化而得到的PES封包。
在此構成例中，含有2D串流(第1私用資料串流)的PES封包「Subtitle PES1」、和3D串流(第2私用資料串流)的PES封包「Subtitle PES2」。2D串流(PES串流)中係含有DDS、PCS、RCS、CDS、ODS、EDS之各區段。3D串流(PES串流)中係含有DDS、PCS、RCS、DSS、CDS、ODS、EDS之各區段。
「第2類型」的情況下，3D串流係為，在2D串流中被插入有DSS之區段的構成。亦即，在此3D串流中，含有為了3D支援顯示所必需的所有資訊。此情況下，2D串流、3D串流的“Elementary_PID”是被設定成像是PID1, PID2而有所不同，表示這些串流係為個別的串流。又，該「第2類型」的情況下，在3D串流與2D串流中，字幕描述元的“composition_page_id”，係被設定個別的值(在圖示中係為「0xXXXX」與「0xYYYY」)。
〔視差資訊之更新〕
如上述，在「第1類型」下係藉由3D擴充串流來發送視差資訊，在「第2類型」下係藉由3D串流來發送視差資訊。說明此視差資訊之更新。
圖21、圖22係圖示了，使用間隔期間(Interval period)的視差資訊之更新例。圖21係圖示了，間隔期間(Interval period)是固定，而且該期間係相等於更新期間的情形。亦即，A-B、B-C、C-D、．．．的各更新期間，是由1個間隔期間所成。
圖22係圖示了，一般的情況下，將間隔期間(Interval period)設成短期間(例如亦可為畫格週期)時，視差資訊之更新例。此時，間隔期間的個數，在各更新期間中係為M,N,P,Q,R。此外，在圖21、圖22中，“A”係表示字幕顯示期間的開始畫格(開始時點)，“B”~“F”係表示其後的更新畫格(更新時點)。
當將字幕顯示期間內被依序更新的視差資訊送至收訊側(機上盒200等)時，在收訊側上，係藉由對每一更新期間的視差資訊實施內插處理，就可生成任意之畫格間隔、例如1畫格間隔的視差資訊並使用之。
圖23係圖示了「第2類型」時的3D串流之構成例。圖23(a)係圖示DSS之區段僅被插入一個的例子。PES標頭中係含有時間資訊(PTS)。又，作為PES酬載資料，而含有DDS、PCS、RCS、DSS、CDS、ODS、EDS之各區段。這些係在字幕顯示期間的開始前，被整批送訊。此一個DSS之區段中係含有，在字幕顯示期間中會被依序更新的複數視差資訊。
此外，亦可不在一個DSS中含有在字幕顯示期間中會被依序更新的複數視差資訊，就將該複數視差資訊發送至收訊側(機上盒200等)。此情況下，3D串流中係在每次進行更新的時序，插入有DSS之區段。
圖23(b)係圖示了此情況的3D串流之構成例。又，作為PES酬載資料，最初會發送DDS、PCS、RCS、CDS、ODS、EDS之各區段。其後，在進行更新的時序上，用來更新視差資訊所需的所定個數之DSS區段，會被發送。最後，還與DSS區段一併地發送出EDS區段。
此外，圖23雖然圖示了「第2類型」時的3D串流之構成例，但在「第1類型」時的3D擴充串流中也是可為同樣之構成。亦即，在3D擴充畫格中係插入有一個DSS之區段，可在該DSS之區段中含有字幕顯示期間內會被依序更新的複數視差資訊。或者，在3D擴充畫格中，在每次進行視差資訊之更新的時序上，插入有DSS之區段。
圖24係圖示了，如上述，依序發送DSS區段時的視差資訊之更新例。此外，在圖24中，“A”係表示字幕顯 示期間的開始畫格(開始時點)，“B”~“F”係表示其後的更新畫格(更新時點)。
當依序發送DSS區段，而將字幕顯示期間內被依序更新的視差資訊送至收訊側(機上盒200等)時，在收訊側中也是可以進行和上述同樣的處理。亦即，此情況下也是，在收訊側中，係藉由對每一更新期間的視差資訊實施內插處理，就可生成任意之畫格間隔、例如1畫格間隔的視差資訊並使用之。
圖25係圖示了和上述圖22同樣的視差資訊(disparity)之更新例。更新畫格間隔，係以作為單位期間的間隔期間(ID：Interval Duration)的倍數來表示。例如，更新畫格間隔「DivisionPeriod 1」係以“ID*M”來表示，更新畫格間隔「Division Period 2」係以“ID*N”來表示，以下的各更新畫格間隔也同樣地表示。在圖25所示的視差資訊之更新例中，更新畫格間隔並非固定，會進行相應於視差資訊曲線的更新畫格間隔之設定。
又，在此視差資訊(disparity)的更新例中，在收訊側，字幕顯示期間的開始畫格(開始時刻)T1_0，係由該視差資訊所含之PES串流的標頭中所被插入的PTS(PresentationTime Stamp)來給定。然後，在收訊側，視差資訊的各更新時刻，是根據各更新畫格間隔之資訊亦即間隔期間之資訊(單位期間之資訊)及該間隔期間之個數之資訊，而被求出。
此時，從字幕顯示期間的開始畫格(開始時刻)T1_0，基於以下的(1)式，依序求出各更新時刻。在該(1)式中，「interval_count」係表示間隔期間之個數，是相當於圖25中的M,N,P,Q,R,S的值。又，在該(1)式中，「interval_time」係相當於圖25中的間隔期間(ID)的值。
Tm_n=Tm_(n-1)+(interval_time * interval_count)………(1)
例如，圖25所示的更新例中，係基於該(1)式，而如下述般地求出各更新時刻。亦即，更新時刻T1_1係使用開始時刻(T1_0)、間隔期間(ID)、個數(M)，以「T1_1=T1_0+(ID * M)」的方式而求出。又，更新時刻T1_2係使用更新時刻(T1_1)、間隔期間(ID)、個數(N)，以「T1_2=T1_1+(ID * N)」的方式而求出。以後的各更新時刻也同樣地求出。
於圖25所示的更新例中，在收訊側會針對字幕顯示期間內被依序更新的視差資訊，實施內插處理，而生成在字幕顯示期間內的任意之畫格間隔、例如1畫格間隔的視差資訊並使用之。例如，作為該內插處理係不是進行線性內插處理，而是進行在時間方向(畫格方向)上伴隨有低通濾波(LPF)處理的內插處理，藉此就可使得內插處理後的所定畫格間隔之視差資訊的時間方向(畫格方向)之變化變得圓滑。圖25的虛線a係表示LPF輸出例。
圖26係圖示了作為字幕的subtitle之顯示例。在該顯示例中，頁面領域(Area for Page_default)中，作為字幕顯示領域之區域(Region)，是含有2個(區域1、區域2)。區域中係含有1或複數個子區域。此處，假設區域中是含有1個子區域，區域領域與子區域領域係為相等。
圖27係圖示了，在DSS的區段中，作為在字幕顯示期間會被依序更新的視差資訊(Disparity)，是含有區域單位的視差資訊與頁面單位的視差資訊之雙方時，各區域與頁面之視差資訊曲線之一例。此處，頁面的視差資訊曲線，係為採取2個區域的視差資訊曲線之最小值的形狀。
關於區域1(Region1)，係有開始時刻的T1_0、和其後的更新時刻T1_1,T1_2,T1_3,．．．,T1_6這7個視差資訊存在。又，關於區域2(Region2)，係有開始時刻的T2_0、和其後的更新時刻T2_1,T2_2,T2_3,．．．,T2_7這8個視差資訊存在。然後，關於頁面(Page_default)，係有開始時刻的T0_0、和其後的更新時刻T0_1,T0_2,T0_3,．．．,T0_6這7個視差資訊存在。
圖28係圖示了，圖27中所示的頁面及各區域的視差資訊是以何種結構被發送。首先說明頁面層。在該頁面層中，配置有視差資訊的固定值亦即「page_default_disparity」。然後，關於字幕顯示期間內會被依序更新的視差資訊，係有開始時刻與對應於其後之各 更新時刻的表示間隔期間之個數的「interval_count」、和表示視差資訊的「disparity_page_updete」，被依序配置。此外，開始時刻的「interval_count」係被設成“0”。
接著說明區域層。針對區域1(子區域1)係配置有，視差資訊的固定值亦即「subregion_disparity_integer_part」及「subregion_disparity_fractional_part」。此處，「subregion_disparity_integer_part」係表示視差資訊的整數部分，「subregion_disparity_fractional_part」係表示視差資訊的小數部分。
然後，關於字幕顯示期間內會被依序更新的視差資訊，係有開始時刻與對應於其後之各更新時刻的表示間隔期間之個數的「interval_count」、和表示視差資訊的「disparity_region_updete_integer_part」及「disparity_region_updete_fractional_part」，被依序配置。此處，「disparity_region_updete_integer_part」係表示視差資訊的整數部分，「disparity_region_updete_fractional_part」係表示視差資訊的小數部分。此外，開始時刻的「interval_count」係被設成“0”。
針對區域2(子區域2)，係和上述區域1同樣地，配置有視差資訊的固定值亦即「subregion_disparity_integer_part」及「subregion_disparity_fractional_part」。然後，關於字幕顯示期間內會被依序更新的視差資訊，係有開始時刻與對應於其後之各更新時刻的表示間隔期間之個數的「interval_count」、和表示視差資訊的「disparity_region_updete_integer_part」及 「disparity_region_updete_fractional_part」，被依序配置。
圖29~圖31係圖示了DSS(Disparity_Signaling_Segment)之結構例(syntax)。圖32~圖35係圖示了DSS的的主要資料規定內容(semantics)。該結構中係含有「sync_byte」、「segment_type」、「page_id」、「segment_length」、「dss_version_number」之各資訊。「segment_type」，係為表示區段類型的8位元之資料，此處係設成表示DSS的值。「segment_length」係為用來表示其後之位元組數的8位元之資料。
「disparity_shift_update_sequence_page_flag」之1位元旗標，係表示頁面單位的視差資訊是否為字幕顯示期間內會被依序更新的視差資訊。“1”係表示存在，“0”係表示不存在。「page_default_disparity_shift」之8位元欄位，係表示頁面單位的固定之視差資訊，亦即字幕顯示期間內中被共通使用的視差資訊。當上述的「disparity_page_update_sequence_flag」之旗標是“1”時，會進行「disparity_shift_update_sequence( )」之讀出。
圖31係「disparity_shift_update_sequence( )」的結構例(Syntax)。「disparity_page_update_sequence_length」係為用來表示其後之位元組數的8位元之資料。「interval_duration〔23..0〕」的24位元欄位，係將作為單位期間的間隔期間(Interval Duration)(參照圖25)，以90KHz單位加以指定。亦即，「interval_duration〔 23..0〕」係為，將該間隔期間(Interval Duration)，以90KHz之時脈所計測到的值，以24位元長來表示。
相對於PES之標頭部中所被插入之PTS係為33位元長，被設成24位元長的原因，主要是基於以下的理由。亦即，雖然33位元長是可以表現超過24小時的時間，但對字幕顯示期間內的此間隔期間(Interval Duration)來說是不必要的長度。又，藉由設成24位元，就可縮小資料大小，進行較精巧的傳輸。又，24位元係為8×3位元，位元組對齊是較為容易。
「division_period_count」的8位元欄位，係表示視差資訊影響所及之期間(Division Period)的數目。例如，在圖25所示之更新例的情況下，對應於開始時刻T1_0和其後之更新時刻T1_1~T1_6，該數字係為“7”。又，該「division_period_count」之8位元欄位所示的數目，即是以下的for迴圈被重複的次數。
「interval_count」之8位元欄位，係表示間隔期間之個數。例如，圖25所示之更新例的情況中，相當於M,N,P,Q,R,S。「disparity_shift_update_integer_part」之8位元欄位，係表示視差資訊。對應於開始時刻的視差資訊(視差資訊之初期值)，「interval_count」係被設成“0”。亦即，「interval_count」為“0”時，「disparity_page_update」係表示開始時刻的視差資訊(視差資訊之初期值)。
圖29的while迴圈，係若目前為止所處理過的資料 長(processed_length)，未達區段資料長(segment_length)時，則會被重複。在該while迴圈中係配置有，區域單位、或區域內的子區域單位的視差資訊。此處，在區域中係含有1或複數個子區域，有時候子區域領域與區域領域係相同。
在該while迴圈中係含有「region_id」之資訊。「disparity_shift_update_sequence_region_flag」之1位元旗標，係為用來表示區域內的所有子區域所需的「disparity_shift_update_sequence( )」是否存在的旗標資訊。「number_of_subregions_minus_1」的2位元欄位，係表示區域內的子區域之數目減去1之後的值。當「number_of_subregions_minus_1=0」時，區域係具有與區域相同寸法的1個子區域。
當「number_of_subregions_minus_1>0」時，區域係具有在水平方向上被劃分的複數子區域。在圖30的for迴圈之中，係含有子區域之數目個的「subregion_horizontal_position」、「subregion_width」之資訊。「subregion_horizontal_position」的16位元欄位，係表示子區域之左端的像素位置。「subregion_width」係將子區域的水平方向之寬度，以像素數來表示。
「subregion_disparity_shift_integer_part」之8位元欄位，係表示區域單位(子區域單位)的固定之視差資訊，亦即字幕顯示期間內中被共通使用的視差資訊的整數部分。「subregion_disparity_shift_fractional_part」之4位 元欄位，係表示區域單位(子區域單位)的固定之視差資訊，亦即字幕顯示期間內中被共通使用的視差資訊的小數部分。當上述的「disparity_shift_update_sequence_region_flag」之旗標是“1”時，會進行「disparity_shift_update_sequence( )」(參照圖31)之讀出。
圖36係圖示了機上盒200及電視收訊機300是3D支援機器時的播送收訊概念。此情況下，在播送台100中，區域「Region0」內係被定義有子區域「SR 00」，其視差資訊「Disparity 1」會被設定。此處，假設區域「Region 0」與子區域「SR 00」係為相同領域。從播送台100，會連同立體影像資料，一起發送字幕資料、顯示控制資訊(子區域的領域資訊「Position」、視差資訊「Disparity 1」)。
首先說明，被3D支援機器的機上盒200所接收時的情形。此情況下，機上盒200係在「第1類型」下，從2D串流讀取構成字幕資料的各區段之資料，從3D擴充串流讀取視差資訊等之含有顯示控制資訊的DSS區段之資料，而使用之。又，機上盒200係在「第2類型」下，從3D串流讀取構成字幕資料之各區段、還有視差資訊等之含有顯示控制資訊的DSS區段之資料，而使用之。
機上盒200，係基於字幕資料，而生成用來顯示字幕所需的區域之顯示資料。然後，機上盒200係將區域的顯示資料，分別重疊至構成立體影像資料的左眼影像畫格(frame0)部分及右眼影像畫格(framel)部分，獲得輸 出立體影像資料。此時，機上盒200係基於視差資訊，分別將要重疊的顯示資料之位置，做平移調整。此外，機上盒200係隨著立體影像資料的傳輸格式(並肩式方式、上下併排方式、畫格序列方式、或者各視點均具有完全畫面尺寸的格式方式)，適宜地進行重疊位置、尺寸等之變更。
機上盒200，係將如上述所得到之該輸出立體影像資料，透過例如HDMI的數位介面，發送至3D支援的電視收訊機300。電視收訊機300係對從機上盒200所送來的立體影像資料，實施3D訊號處理，生成被重疊有字幕的左眼影像及右眼影像之資料。然後，電視收訊機300係在LCD等之顯示面板上，顯示出讓使用者知覺到立體影像所需的兩眼視差影像(左眼影像及右眼影像)。
接著說明，被3D支援機器的電視收訊機300所接收時的情形。此情況下，電視收訊機300係在「第1類型」下，從2D串流讀取構成字幕資料的各區段之資料，從3D擴充串流讀取視差資訊等之含有顯示控制資訊的DSS區段之資料，而使用之。又，機上盒200係在「第2類型」下，從3D串流讀取構成字幕資料之各區段、還有視差資訊等之含有顯示控制資訊的DSS區段之資料，而使用之。
電視收訊機300，係基於字幕資料，而生成用來顯示字幕所需的區域之顯示資料。然後，電視收訊機300，係將區域的顯示資料，分別重疊至，對立體影像資料進行相應於傳輸格式之處理所得之左眼影像資料及右眼影像資 料，而生成被重疊有字幕的左眼影像及右眼影像之資料。然後，電視收訊機300係在LCD等之顯示面板上，顯示出讓使用者知覺到立體影像所需的兩眼視差影像(左眼影像及右眼影像)。
圖37係圖示了機上盒200及電視收訊機300是舊型的2D支援機器時的播送收訊概念。此情況下，在播送台100中，區域「Region 0」內係被定義有子區域「SR 00」，其視差資訊「Disparity 1」會被設定。此處，假設區域「Region 0」與子區域「SR 00」係為相同領域。從播送台100，會連同立體影像資料，一起發送字幕資料、顯示控制資訊(子區域的領域資訊「Position」、視差資訊「Disparity 1」)。
接著說明，被舊型2D支援機器的機上盒200所接收時的情形。此時，機上盒200係在「第1類型」及「第2類型」之任一情形下，都是從2D串流讀取構成字幕資料之各區段之資料而使用之。亦即，由於不會進行視差資訊等之含有顯示控制資訊的DSS之區段的讀取，因此可避免該讀取妨礙到收訊處理。
機上盒200，係基於字幕資料，而生成用來顯示字幕所需的區域之顯示資料。然後，機上盒200係將區域的顯示資料，重疊至立體影像資料實施相應於傳輸格式之處理所得到的2維影像資料，而獲得輸出2維影像資料。
機上盒200，係將如上述所得到之輸出2維影像資料，透過例如HDMI的數位介面，發送至電視收訊機 300。電視收訊機300，係將從機上盒200所送來的2維影像資料所致之2維影像，加以顯示。
接著說明，被2D支援機器的電視收訊機300所接收時的情形。此時，電視收訊機300係在「第1類型」及「第2類型」之任一情形下，都是從2D串流讀取構成字幕資料之各區段之資料而使用之。亦即，由於不會進行視差資訊等之含有顯示控制資訊的DSS之區段的讀取，因此可避免該讀取妨礙到收訊處理。
電視收訊機300，係基於字幕資料，而生成用來顯示字幕所需的區域之顯示資料。電視收訊機300係將該區域的顯示資料，重疊至立體影像資料實施相應於傳輸格式之處理所得到的2維影像資料，而獲得輸出2維影像資料。然後，電視收訊機300，係將該2維影像資料所致之2維影像，加以顯示。
於圖2所示的送訊資料生成部110中，假設從多工器119所輸出的作為多工化資料串流的傳輸串流TS，係含有2個私用資料串流。亦即，在「第1類型」下係含有2D串流及3D擴充串流，在「第2類型」下係含有2D串流及3D串流(參照圖10、圖11)。
因此，在收訊側的舊型2D支援收訊裝置中，藉由從2D串流中僅讀取構成字幕資料的各區段，就可進行收訊處理。亦即，在2D支援的收訊裝置中，不需要從3D擴充串流、或3D串流中讀取DSS之區段，可避免該讀取阻礙到收訊處理。
又，在收訊側的3D支援收訊裝置中，可從3D擴充串流或3D串流讀取DSS之區段、從而讀取顯示控制資訊(包含子區域之領域資訊、視差資訊等)，而可進行配合立體影像之顯示內容的左眼影像及右眼影像之字幕(subtitle)的視差調整。
又，於圖2所示的送訊資料生成部110中，由於可以發送，含有在字幕顯示期間中會被依序更新之視差資訊的DSS區段，因此可動態地控制左眼字幕及右眼字幕的顯示位置。藉此，於收訊側上，就可使得左眼字幕及右眼字幕之間所賦予的視差，連動於影像內容之變化而動態地變化。
又，於圖2所示的送訊資料生成部110中，字幕編碼器118所得的DSS之區段中所含有之每次更新畫格間隔的畫格之視差資訊，係並非上次視差資訊起算的偏置值，而是視差資訊本身。因此，收訊側中，即使內插過程裡發生錯誤，仍可在一定延遲時間內從錯誤中恢復。
〔機上盒的說明〕
返回圖1，機上盒200，係將從播送台100裝載於載波而發送過來的傳輸串流TS，加以接收。該傳輸串流TS中係包含有：含左眼影像資料及右眼影像資料的立體影像資料、聲音資料。又，傳輸串流TS中係還含有，用來顯示字幕(subtitle)所需的立體影像用字幕資料(含有顯示控制資訊)。
亦即，該傳輸串流TS，係作為PES之串流而具有：視訊資料串流、音訊資料串流、第1及第2私用資料串流。如上述，在「第1類型」的情況下，第1及第2私用資料串流，係分別為2D串流及3D擴充串流(參照圖10)。又，在「第2類型」的情況下，第1及第2私用資料串流係分別為2D串流及3D串流(參照圖11)。
機上盒200，係具有位元串流處理部201。當機上盒200是3D支援機器(3D STB)時，位元串流處理部201係從傳輸串流TS，取得立體影像資料、聲音資料、字幕資料(含有顯示控制資訊)。
此情況下，位元串流處理部201係在「第1類型」下，從2D串流取得構成字幕資料的各區段之資料，從3D擴充串流取得視差資訊等之含有顯示控制資訊的DSS區段之資料，而使用之。又，位元串流處理部201係在「第2類型」下，從3D串流取得構成字幕資料之各區段、還有視差資訊等之含有顯示控制資訊的DSS區段之資料。
然後，位元串流處理部201，係使用立體影像資料、字幕資料(含有顯示控制資訊)，生成對左眼影像畫格(frame0)部分及右眼影像畫格(frame1)部分分別重疊有字幕的輸出立體影像資料(參照圖36)。此情況下，可在重疊於左眼影像的字幕(左眼字幕)與重疊於右眼影像的字幕(右眼字幕)之間，賦予視差。
例如，如上述，從播送台100所發送過來的立體影像用字幕資料中所被附加的顯示控制資訊裡，係含有視差資 訊，可基於該視差資訊，而在左眼字幕及右眼字幕之間，賦予視差。如此，藉由在左眼字幕與右眼字幕之間賦予視差，使用者就可將字幕(subtitle)感覺成位於影像前方。
圖38(a)係圖示了影像上的字幕(subtitle)的顯示例。在該顯示例中係為，在背景與近景物件所成之影像上，重疊有字幕的例子。圖38(b)係圖示了背景、近景物件、字幕的遠近感，表示了字幕是被辨識成位於最前面的樣子。
圖39(a)係和圖38(a)同樣地，圖示了影像上的字幕(subtitle)的顯示例。圖39(b)係圖示了，重疊於左眼影像的左眼字幕LGI、和重疊於右眼影像的右眼字幕RGI。圖39(c)係圖示了，為了使字幕被辨識成最前面，而在左眼字幕LGI與右眼字幕RGI之間，賦予視差。
又，當機上盒200是舊型的2D支援機器(2D STB)時，位元串流處理部201係從傳輸串流TS，取得立體影像資料、聲音資料、字幕資料(不含顯示控制資訊的點陣圖案資料)。然後，位元串流處理部201係使用立體影像資料、字幕資料等，而生成已被重疊有字幕的2維影像資料(參照圖37)。
此時，位元串流處理部201係在「第1類型」及「第2類型」之任一情形下，都是從2D串流取得構成字幕資料之各區段之資料。亦即，此時不需要從3D擴充串流、或3D串流中讀取DSS之區段，可避免該讀取阻礙到收訊處理。
〔機上盒的構成例〕
說明機上盒200之構成。圖40係圖示了機上盒200的構成例。該機上盒200係具有：位元串流處理部201、HDMI端子202、天線端子203、數位選台器204、映像訊號處理電路205、HDMI送訊部206、聲音訊號處理電路207。又，該機上盒200係具有：CPU211、快閃ROM212、DRAM213、內部匯流排214、遙控收訊部(RC收訊部)215、遙控送訊機(RC送訊機)216。
天線端子203，係用來將收訊天線(未圖示)所接收到的電視播送訊號加以輸入的端子。數位選台器204，係將被天線端子203所輸入之電視播送訊號予以處理，將使用者所選擇頻道所對應之傳輸串流TS(位元串流資料)予以輸出。
位元串流處理部201，係基於傳輸串流TS，輸出已被重疊有字幕的輸出立體影像資料及聲音資料。該位元串流處理部201係為，若機上盒200是3D支援機器(3D STB)時，則從傳輸串流TS，取得立體影像資料、聲音資料、字幕資料(含有顯示控制資訊)。
位元串流處理部201，係生成對構成立體影像資料的左眼影像畫格(frame0)部分及右眼影像畫格(frame1)部分分別重疊有字幕的輸出立體影像資料(參照圖36)。此時，基於視差資訊，而在重疊於左眼影像的字幕(左眼字幕)與重疊於右眼影像的字幕(右眼字幕)之間，賦予 視差。
亦即，位元串流處理部201，係基於字幕資料，而生成用來顯示字幕所需的區域之顯示資料。然後，位元串流處理部201係將區域的顯示資料，分別重疊至構成立體影像資料的左眼影像畫格(frame0)部分及右眼影像畫格(frame1)部分，獲得輸出立體影像資料。此時，位元串流處理部201係基於視差資訊，分別將要重疊的顯示資料之位置，做平移調整。
又，位元串流處理部201係為，若機上盒200是2D支援機器(2D STB)時，則取得立體影像資料、聲音資料、字幕資料(不含顯示控制資訊)。位元串流處理部201係使用立體影像資料、字幕資料等，而生成已被重疊有字幕的2維影像資料(參照圖37)。
亦即，位元串流處理部201，係基於字幕資料，而生成用來顯示字幕所需的區域之顯示資料。然後，位元串流處理部201係將區域的顯示資料，重疊至立體影像資料實施相應於傳輸格式之處理所得到的2維影像資料，而獲得輸出2維影像資料。
映像訊號處理電路205，係對位元串流處理部201所得到的影像資料，因應需要而進行畫質調整處理等，將處理後的影像資料，供給至HDMI送訊部206。聲音訊號處理電路207，係對從位元串流處理部201所輸出的聲音資料，因應需要而進行音質調整處理等，將處理後的聲音資料供給至HDMI送訊部206。
HDMI送訊部206，係藉由以HDMI為依據的通訊，例如，將非壓縮的影像資料及聲音資料，從HDMI端子202予以送出。此時，由於是以HDMI的TMDS通道進行送訊，因此影像資料及聲音資料是被打包(packing)，從HDMI送訊部206往HDMI端子202輸出。
CPU211，係控制機上盒200各部的動作。快閃ROM212，係進行控制軟體之儲存及資料之保管。DRAM213，係構成CPU211之工作區域。CPU211，係將從快閃ROM212讀出之軟體或資料，展開於DRAM213上而啟動軟體，控制機上盒200的各部。
RC收訊部215，係將從RC送訊機216所發送來之遙控訊號(遙控碼)，供給至CPU211。CPU211，係基於該遙控碼而控制著機上盒200的各部。CPU211、快閃ROM212及DRAM213係被連接至內部匯流排214。
簡單說明機上盒200之動作。已被輸入至天線端子203的電視播送訊號係被供給至數位選台器204。在該數位選台器204中，電視播送訊號會被處理，對應於使用者選擇頻道的傳輸串流(位元串流資料)TS。
從數位選台器204所輸出的傳輸串流(位元串流資料)TS，係被供給至位元串流處理部201。在該位元串流處理部201中，係如以下般地，生成用來輸出至電視收訊機300所需的輸出影像資料。
當機上盒200是3D支援機器(3D STB)時，則從傳輸串流TS，取得立體影像資料、聲音資料、字幕資料 (含有顯示控制資訊)。然後，在該位元串流處理部201中，係生成對構成立體影像資料的左眼影像畫格(frame0)部分及右眼影像畫格(frame1)部分分別重疊有字幕的輸出立體影像資料。此時，基於視差資訊，在重疊於左眼影像的左眼字幕與重疊於右眼影像的右眼字幕之間，賦予視差。
又，當機上盒200是2D支援機器(2D STB)時，則取得立體影像資料、聲音資料、字幕資料(不含顯示控制資訊)。然後，在該位元串流處理部201中，係使用立體影像資料、字幕資料等，而生成已被重疊有字幕的2維影像資料。
位元串流處理部201所得到之輸出影像資料，係被供給至映像訊號處理電路205。在該映像訊號處理電路205中，係對輸出影像資料，因應需要而實施畫質調整處理等。從該映像訊號處理電路205所輸出之處理後的影像資料，係被供給至HDMI送訊部206。
又，已被位元串流處理部201所獲得之聲音資料，係被供給至聲音訊號處理電路207。在該聲音訊號處理電路207中，係對聲音資料，因應需要而進行音質調整處理等之處理。從該聲音訊號處理電路207所輸出之處理後的聲音資料，係被供給至HDMI送訊部206。然後，已被供給至HDMI送訊部206的影像資料及聲音資料，係藉由HDMI的TMDS通道，從HDMI端子202往HDMI纜線400送出。
〔位元串流處理部之構成例〕
圖41係圖示了，機上盒200是3D支援機器(3D STB)時的位元串流處理部201的構成例。該位元串流處理部201，係對應於上述圖2所示的送訊資料生成部110而構成。該位元串流處理部201係具有：解多工器221、視訊解碼器222、音訊解碼器229。又，該位元串流處理部201係具有：字幕解碼器223、字幕產生部224、顯示控制部225、視差資訊處理部227、視訊重疊部228。
解多工器221係從傳輸串流TS，抽出視訊資料串流、音訊資料串流的封包，發送至各解碼器而進行解碼。又，解多工器221，係還將以下的串流予以抽出，送至字幕解碼器223而進行解碼。此情況下，在「第1類型」下係將2D串流及3D擴充串流予以抽出並解碼，在「第2類型」下係將3D串流予以抽出並解碼。
CPU211，係在「第1類型」下，根據關連於2D串流、3D擴充串流而被配置在PMT內之ES迴圈裡的字幕描述元內的“composition_page_id”之值，而認知到必須將雙方的PES串流予以解碼。亦即，當“composition_page_id”之值是相同時，就意味著要將雙方之PES串流予以解碼。或者，當“composition_page_id”之值是相同的值，而且是特別的值(預先定義)，則意味著要將雙方之PES串流予以解碼。
此外，也想到在「第1類型」下，新增定義了表示應 要將2D串流、3D擴充串流之2個PES串流雙方予以解碼的將2個串流建立關連的描述元，配置在所定之場所。CPU211係藉由該描述元，認知到必須要將雙方之PES串流予以解碼，來控制位元串流處理部201。
圖42係圖示，為了將2D串流、3D擴充串流建立關連而能使用的多重解碼描述元(multi_decoding descriptor)之結構例(syntax)。圖43係圖示了該結構例中主要資訊內容(Semantics)。
「descriptor_tag」之8位元欄位，係表示此描述元係為多重解碼描述元。「descriptor_length」的8位元欄位，係表示該欄位以後的全體的位元組大小。
「stream_content」的4位元欄位，係表示主要的串流的例如視訊、音訊、字幕等之串流類型。「component_type」的4位元欄位，係表示主要的串流的例如視訊、音訊、字幕等之組成類型。這些「stream_content」、「component_type」中，係被設成與主要串流所對應之組成描述元內的「stream_content」、「component_type」相同的資訊。
在此實施形態中，主要串流係被設成2D串流，「stream_content」係被設成字幕“subtitle”，「component_type」係被設成2維用“2D”。
「component_tag」係具有，與主要串流所對應之串流識別描述元(stream_identifier descriptor)內的「component_tag」相同的值。藉此，串流識別描述元、與多 重解碼描述元，就被「component_tag」建立關連。
「multi_decoding_count」的4位元欄位，係表示對主要串流建立關連的目標之串流的數目。在此實施形態中，主要串流的2D串流所關連的目標串流係為3D擴充串流，因此「multi_decoding_count」係為「1」。
「target_stream_component_type」的8位元欄位，係表示主要串流中所被追加之串流的例如視訊、音訊、字幕等之串流類型。「component_type」的4位元欄位，係表示目標串流的組成類型。又，「target_stream_component_tag」之8位元欄位，係具有與目標串流所對應之串流識別描述元(stream_identifier descriptor)內的「component_tag」相同的值。
在此實施形態中，目標串流係被設成3D擴充串流，「target_stream_component_type」係被設成3維用“3D”，「target_stream_component_tag」係被設成和3D擴充串流的「component_tag」相同之值。
多重解碼描述元，係被配置在例如PMT的旗下、或是EIT的旗下。圖44係圖示了配置有多重解碼描述元時，「第1類型」的傳輸串流TS之構成例。
回到圖41，視訊解碼器222係進行與上述送訊資料生成部110之視訊編碼器112相反的處理。亦即，視訊解碼器222係根據已被解多工器221所抽出的視訊之封包，重新構成視訊資料串流，進行解碼處理，而獲得含有左眼影像資料及右眼影像資料的立體影像資料。該立體影像資料 的傳輸格式，係例如有並肩式方式、上下併排方式、畫格序列方式、或各視點是佔有完整畫面尺寸的視訊傳輸格式之方式等。
字幕解碼器223係進行與上述送訊資料生成部110之字幕編碼器118相反的處理。亦即，該字幕解碼器223，係根據已被解多工器221所抽出的各串流的封包，重新構成各串流，進行解碼處理，而取得以下之區段的資料。
亦即，字幕解碼器223係取得構成字幕資料的各區段之資料，然後，取得DSS區段之資料。字幕解碼器223，係基於構成字幕資料的各區段之資料，而獲得字幕資料。又，字幕解碼器223，係基於DSS區段之資料，獲得顯示控制資訊(子區域的領域資訊、視差資訊等)。
字幕產生部224，係基於字幕解碼器223所取得的字幕資料，而生成用來顯示字幕所需的區域之顯示資料。此處，在區域內而未被子區域所圈起的領域，係被分配為透明色。字幕產生部224，係根據該顯示資料，產生要分別重疊至構成立體影像資料之左眼影像畫格(frame0)部分及右眼影像畫格(frame1)部分上的左眼字幕及右眼字幕之顯示資料(點陣圖資料)。
此時，字幕產生部224係隨著立體影像資料的傳輸格式(並肩式方式、上下併排方式、畫格序列方式、MVC方式等)，適宜地進行重疊位置、尺寸等之變更。又，此時，字幕產生部224係基於已被字幕解碼器223所取得之視差資訊，將各個畫格上所被重疊之顯示資料的位置，做 平移調整(參照圖36)。
此外，顯示控制資訊中係含有，在字幕顯示期間內被共通使用的視差資訊。又，該顯示控制資訊中係還會含有，在字幕顯示期間內會被依序更新的視差資訊。該在字幕顯示期間內會被依序更新的視差資訊，係如上述，是由字幕顯示期間的最初之畫格的視差資訊、和其後的每次更新畫格間隔之畫格的視差資訊所構成。
字幕產生部224，係針對在字幕顯示期間內被共通使用的視差資訊，是直接使用之。另一方面，字幕產生部224，係針對在收訊側會針對字幕顯示期間內被依序更新的視差資訊，實施內插處理，生成在字幕顯示期間內的任意之畫格間隔、例如1畫格間隔的視差資訊，而使用之。字幕產生部224，作為其內插處理，不是進行線性內插處理，而是進行在時間方向(畫格方向)上伴隨有低通濾波(LPF)處理的內插處理。藉此，就可使得內插處理後的所定畫格間隔之視差資訊的時間方向(畫格方向)之變化變得圓滑。
此處，字幕產生部224，係當只有在字幕顯示期間內被共通使用的視差資訊被送來時，則使用該視差資訊。又，字幕產生部224，係若還有在字幕顯示期間內會被依序更新之視差資訊被送來時，則可選擇性地擇一使用。藉由使用在字幕顯示期間內會被依序更新之視差資訊，就可於收訊側上，使得左眼字幕及右眼字幕之間所賦予的視差，連動於影像內容之變化而動態地變化。
視訊重疊部228，係獲得輸出立體影像資料Vout。此情況下，視訊重疊部228係對視訊解碼器222所得到的立體影像資料，重疊上已被字幕產生部224所產生的左眼字幕及右眼字幕之顯示資料(點陣圖資料)。視訊重疊部228係將該輸出立體影像資料Vout，輸出至位元串流處理部201的外部。
又，音訊解碼器229係進行與上述送訊資料生成部110之音訊編碼器113相反的處理。亦即，該音訊解碼器229係根據已被解多工器221所抽出的音訊的封包，重新構成音訊的元素串流，進行解碼處理，獲得聲音資料Aout。該音訊解碼器229係將聲音資料Aout，輸出至位元串流處理部201的外部。
簡單說明圖41所示的位元串流處理部201之動作。從數位選台器204(參照圖40)所輸出的傳輸串流TS，係被供給至解多工器221。在該解多工器221中，係從傳輸串流TS，抽出視訊資料串流、音訊資料串流的封包，供給至各解碼器。又，在該解多工器221中，還會抽出2D串流及3D擴充串流、或3D串流的封包，供給至字幕解碼器223。
在視訊解碼器222中，係根據已被解多工器221所抽出的視訊資料的封包，重新構成視訊資料串流，然後進行解碼處理，獲得含左眼影像資料及右眼影像資料的立體影像資料。該立體影像資料，係被供給至視訊重疊部228。
又，在字幕解碼器223中，係取得構成字幕資料的各 區段之資料，然後，取得DSS區段之資料。然後，在該字幕解碼器223中，係基於構成字幕資料的各區段之資料，而獲得字幕資料。又，在字幕解碼器223中，係基於DSS區段之資料，獲得顯示控制資訊(子區域的領域資訊、視差資訊等)。這些字幕資料及顯示控制資訊，係被供給至立體影像用字幕產生部224。
在字幕產生部224中，係基於字幕資料，生成用來顯示字幕所需的區域之顯示資料(點陣圖資料)。然後，在字幕產生部224中，係根據該顯示資料，產生要分別重疊至構成立體影像資料之左眼影像畫格(frame0)部分及右眼影像畫格(frame1)部分上的左眼字幕及右眼字幕之顯示資料(點陣圖資料)。此時，在字幕產生部224中，係基於視差資訊，將各個畫格上所要重疊之顯示資料的位置，做平移調整。
在字幕資料產生部224中所產生的左眼字幕及右眼字幕之顯示資料(點陣圖資料)，係被供給至視訊重疊部228。在視訊重疊部228中，係對立體影像資料，將左眼字幕及右眼字幕之顯示資料(點陣圖資料)予以重疊，獲得輸出立體影像資料Vout。該輸出立體影像資料Vout，係被輸出至位元串流處理部201的外部。
又，在音訊解碼器229中，根據已被解多工器221所抽出的音訊之封包，重新構成音訊元素串流，然後施行解碼處理，獲得上述對應於顯示用立體影像資料Vout的聲音資料Aout。該聲音資料Aout，係被輸出至位元串流處 理部201的外部。
圖45係圖示了，機上盒200是2D支援機器(2D STB)時的位元串流處理部201的構成例。於此圖45中，和圖41對應的部分，係標示同一符號，並省略其詳細說明。以下，為了說明方便，將圖41所示之位元串流處理部201稱作3D支援位元串流處理部201，將圖45所示之位元串流處理部201稱作2D支援位元串流處理部201。
圖41所示的視訊解碼器222係根據已被解多工器221所抽出的視訊之封包，重新構成視訊資料串流，進行解碼處理，而取得含有左眼影像資料及右眼影像資料的立體影像資料。相對於此，圖45所示的視訊解碼器222，係在取得了立體影像資料後，將左眼影像資料或右眼影像資料予以切出，因應需要而進行比例縮放處理等而獲得2維影像資料。
又，於圖41所示的3D支援位元串流處理部201中，解多工器221係如上述，在「第1類型」下係抽出2D串流及3D擴充串流的封包，在「第2類型」下係抽出3D串流的封包，送往字幕解碼器223。相對於此，於圖45所示的2D支援位元串流處理部201中，解多工器221係不論在「第1類型」及「第2類型」下均僅抽出2D串流的封包，送往字幕解碼器223。
又，於圖41所示的3D支援位元串流處理部201中，字幕解碼器223係如上述，例如，從2D串流取得構成字幕資料的各區段之資料，然後，從3D擴充串流取得DSS 區段之資料。或者，該字幕解碼器223係從3D串流取得構成字幕資料的各區段之資料，然後，取得DSS區段之資料。
相對於此，於圖45所示的2D支援位元串流處理部201中，字幕解碼器223係從2D串流中僅取得構成字幕資料的各區段之資料。然後，字幕解碼器223，係基於構成字幕資料的各區段之資料，而獲得字幕資料。此時，字幕解碼器223係不進行DSS區段之資料的讀取。因此，可避免該讀取阻礙到收訊處理。
又，於圖41所示的3D支援位元串流處理部201中，字幕產生部224，係基於字幕資料，生成用來顯示字幕所需的區域之顯示資料(點陣圖資料)。然後，該字幕產生部224，係更進一步地基於該顯示資料，來產生左眼字幕及右眼字幕之顯示資料(點陣圖資料)。相對於此，於圖45所示的2D支援位元串流處理部201中，字幕產生部224，係基於字幕資料，僅生成用來顯示字幕所需的區域之顯示資料。
視訊重疊部228係對視訊解碼器222所得到的2維影像資料，將已被字幕產生部224所產生的字幕之顯示資料(點陣圖資料)予以重疊，獲得輸出2維影像資料Vout。然後，視訊重疊部228係將該輸出2維影像資料Vout，輸出至位元串流處理部201的外部。
簡單說明圖45所示的2D位元串流處理部201之動作。此外，音訊系的動作，係和圖41所示的3D位元串流 處理部201相同，故省略。
從數位選台器204(參照圖40)所輸出的傳輸串流TS，係被供給至解多工器221。在該解多工器221中，係從傳輸串流TS，抽出視訊資料串流、音訊資料串流的封包，供給至各解碼器。又，在該解多工器221中，還會抽出2D串流的封包，供給至字幕解碼器223。
在視訊解碼器222中，係根據已被解多工器221所抽出的視訊資料的封包，重新構成視訊資料串流，然後進行解碼處理，獲得含左眼影像資料及右眼影像資料的立體影像資料。然後，在視訊解碼器222中，係還會從該立體影像資料中切出左眼影像資料或右眼影像資料，因應需要而實施比例縮放處理等，獲得2維影像資料。該2維影像資料，係被供給至視訊重疊部228。
又，在字幕解碼器223中，從2D串流會取得構成字幕資料的各區段之資料。然後，字幕解碼器223，係基於構成字幕資料的各區段之資料，而獲得字幕資料。該字幕資料，係被供給至字幕產生部224。
在字幕產生部224中，係基於字幕資料，生成用來顯示字幕所需的區域之顯示資料(點陣圖資料)。該顯示資料，係被供給至視訊重疊部228。在視訊重疊部228中，係對2維影像資料重疊上字幕之顯示資料(點陣圖資料)，獲得輸出2維影像資料Vout。該輸出2維影像資料Vout，係被輸出至位元串流處理部201的外部。
於圖40所示的機上盒200，在從數位選台器204所輸 出的傳輸串流TS中，除了立體影像資料、字幕資料之外，還含有顯示控制資訊。該顯示控制資訊中係含有顯示控制資訊(子區域之領域資訊、視差資訊等)。因此，可對左眼字幕及右眼字幕之顯示位置，賦予視差，於字幕(subtitle)之顯示時，可將影像內各物體之間的遠近感之整合性，維持在最佳狀態。
又，於圖40所示的機上盒200中，若在3D支援位元串流處理部201(參照圖41)之顯示控制資訊取得部226所取得的顯示控制資訊中含有在字幕顯示期間內會被依序更新之視差資訊，則可動態地控制左眼字幕及右眼字幕的顯示位置。藉此，就可使得左眼字幕及右眼字幕之間所賦予的視差，連動於影像內容之變化而動態地變化。
又，於圖40所示的機上盒200中，在3D位元串流處理部201(參照圖41)的字幕產生部224內，對將字幕顯示期間(所定數之畫格期間)內會被依序更新之視差資訊加以構成的複數畫格之視差資訊，實施內插處理。此情況下，即使從送訊側每次更新畫格間隔地發送出視差資訊的情況下，仍可將左眼字幕及右眼字幕之間所被賦予的視差，以精細的間隔，例如每一畫格地加以控制。
又，於圖40所示的機上盒200中，3D位元串流處理部201(參照圖41)的字幕產生部224中的內插處理，係亦可為例如伴隨有時間方向(畫格方向)上的低通濾波處理。因此，即使從送訊側每次更新畫格間隔地發送出視差資訊的情況下，仍可使內插處理後的視差資訊的時間方向 之變化較為圓滑，可以抑制左眼字幕及右眼字幕之間所被賦予的視差之推移在每次更新畫格間隔上造成不連續的異樣感。
此外，雖然未上述，但若機上盒200是3D支援機器時，也可考慮構成為，可讓使用者選擇2維顯示模式或3維顯示模式。此情況下，若3維顯示模式被選擇時，則位元串流處理部201係被設成和上述的3D支援位元串流處理部201(參照圖41)相同的構成、動作。另一方面，若2維顯示模式被選擇時，則位元串流處理部201係被設成和上述的2D支援位元串流處理部201(參照圖45)實質相同的構成、動作。
〔電視收訊機之說明〕
返回圖1，電視收訊機300係若為3D支援機器，則將從機上盒200透過HDMI纜線400而送來的立體影像資料，加以接收。該電視收訊機300，係具有3D訊號處理部301。該3D訊號處理部301，係對立體影像資料，進行對應於傳輸格式的處理(解碼處理)，生成左眼影像資料及右眼影像資料。
〔電視收訊機之構成例〕
說明3D支援電視收訊機300的構成例。圖46係圖示了電視收訊機300的構成例。該電視收訊機300，係具有：3D訊號處理部301、HDMI端子302、HDMI收訊部 303、天線端子304、數位選台器305、位元串流處理部306。
又，該電視收訊機300係具有：映像．圖形處理電路307、面板驅動電路308、顯示面板309、聲音訊號處理電路310、聲音增幅電路311、揚聲器312。又，該電視收訊機300係具有：CPU321、快閃ROM322、DRAM323、內部匯流排324、遙控收訊部(RC收訊部)325、遙控送訊機(RC送訊機)326。
天線端子304，係用來將收訊天線(未圖示)所接收到的電視播送訊號加以輸入的端子。數位選台器305，係將被天線端子304所輸入之電視播送訊號予以處理，將使用者所選擇頻道所對應之傳輸串流(位元串流資料)TS予以輸出。
位元串流處理部306，係基於傳輸串流TS，輸出已被重疊有字幕的輸出立體影像資料及聲音資料。該位元串流處理部201，係省越詳細說明，但例如，是和上述機上盒200的3D支援位元串流處理部201(參照圖41)相同的構成。該位元串流處理部306，係對立體影像資料，將左眼字幕及右眼字幕之顯示資料加以合成，生成已被重疊有字幕的輸出立體影像資料而輸出。
此外，該位元串流處理部306，係例如，當立體影像資料的傳輸格式是並肩式方式或上下併排方式等時候，就實施尺度轉換處理，輸出完整解析度之左眼影像資料及右眼影像資料。又，位元串流處理部306，係將對應於影像 資料的聲音資料予以輸出。
HDMI收訊部303，係藉由以HDMI為依據的通訊，將透過HDMI纜線400而被供給至HDMI端子302的非壓縮之影像資料及聲音資料，予以接收。該HDMI收訊部303，其版本係為例如HDMI1.4a，是可處理立體影像資料之狀態。
3D訊號處理部301，係對已被HDMI收訊部303所接收到的立體影像資料，進行解碼處理，生成完整解析度之左眼影像資料及右眼影像資料。3D訊號處理部301，係進行支援TMDS傳輸資料格式的解碼處理。此外，3D訊號處理部301，係對由位元串流處理部306所獲得的完整解析度之左眼影像資料及右眼影像資料，不做任何處理。
映像．圖形處理電路307，係基於3D訊號處理部301所生成之左眼影像資料及右眼影像資料，而生成顯示立體影像所需的影像資料。又，映像．圖形處理電路307，係對影像資料，因應需要而進行畫質調整處理。
又，映像．圖形處理電路307，係對影像資料，因應需要，而將選單、節目表等之重疊資訊之資料，加以合成。面板驅動電路308，係基於從映像．圖形處理電路307所輸出之影像資料，來驅動顯示面板309。顯示面板309，係由例如LCD(Liquid Crystal Display)、PDP(Plasma DisplayPanel)等所構成。
聲音訊號處理電路310係對於HDMI收訊部303所接收到的、或位元串流處理部306所得到的聲音資料，進行 D/A轉換等必要之處理。聲音增幅電路311，係將從聲音訊號處理電路310所輸出之聲音訊號予以增幅而供給至揚聲器312。
CPU321，係控制著電視收訊機300各部之動作。快閃ROM322，係進行控制軟體之儲存及資料之保管。DRAM323，係構成CPU321之工作區域。CPU321，係將從快閃ROM322讀出之軟體或資料，展開於DRAM323上而啟動軟體，控制電視收訊機300的各部。
RC收訊部325，係將從RC送訊機326所發送來之遙控訊號(遙控碼)，供給至CPU321。CPU321，係基於該遙控碼而控制著電視收訊機300的各部。CPU321、快閃ROM322及DRAM323係被連接至內部匯流排324。
簡單說明圖46所示的電視收訊機300之動作。在HDMI收訊部303中，對HDMI端子302透過HDMI纜線400所連接之機上盒200所發送過來的立體影像資料及聲音資料，會被接收。該HDMI收訊部303所接收到的立體影像資料，係被供給至3D訊號處理部301。又，該HDMI收訊部303所接收到的聲音資料，係被供給至聲音訊號處理電路310。
已被輸入至天線端子304的電視播送訊號係被供給至數位選台器305。在該數位選台器305中，電視播送訊號會被處理，對應於使用者選擇頻道的傳輸串流(位元串流資料)TS。該傳輸串流TS係被供給至位元串流處理部306。
在位元串流處理部306中，係基於視訊資料串流、音訊資料串流、還有2D串流、3D擴充串流、3D串流，而獲得已被重疊有字幕的輸出立體影像資料及聲音資料。此時，對立體影像資料，將左眼字幕及右眼字幕之顯示資料加以合成，生成已被重疊有字幕的輸出立體影像資料(完整解析度之左眼影像資料及右眼影像資料)。該輸出立體影像資料，係透過3D訊號處理部301，而被供給至映像．圖形處理電路307。
在3D訊號處理部301中，係對已被HDMI收訊部303所接收到的立體影像資料，進行解碼處理，生成完整解析度之左眼影像資料及右眼影像資料。該左眼影像資料及右眼影像資料，係被供給至映像．圖形處理電路307。在該映像．圖形處理電路307中，係基於左眼影像資料及右眼影像資料，生成立體影像顯示所需之影像資料，並也會因應需要而進行畫質調整處理、OSD(螢幕上顯示)等之重疊資訊資料的合成處理。
該映像．圖形處理電路307所獲得之影像資料，係被供給至面板驅動電路308。因此，藉由顯示面板309，就會顯示出立體影像。例如，在顯示面板309上，左眼影像資料所致之左眼影像及右眼影像資料所致之右眼影像，係交互地分時顯示。視聽者係例如，藉由戴上會同步於顯示面板309之顯示而交互開閉左眼快門及右眼快門的快門眼鏡，左眼就可只看到左眼影像，右眼就可只看到右眼影像，而可感受到立體影像。
又，已被位元串流處理部306所獲得之聲音資料，係被供給至聲音訊號處理電路310。在該聲音訊號處理電路310中，係對於HDMI收訊部303所接收到的、或位元串流處理部306所得到的聲音資料，施以D/A轉換等必要之處理。該聲音資料，係被聲音增幅電路311增幅後，供給至揚聲器312。因此，從揚聲器312就會輸出對應於顯示面板309之顯示影像的聲音。
此外，圖46係如上述是3D支援的電視收訊機300。雖然省略詳細說明，但舊型的2D支援電視收訊機也是幾乎相同的構成。只不過，若為舊型的2D支援電視收訊機，則位元串流處理部306係為和上述的圖45所示之2D支援位元串流處理部201相同的構成、動作。又，若為舊型的2D支援電視收訊機，則不需要3D訊號處理部301。
又，也可考慮構成為，是3D支援的電視收訊機300，而可讓使用者選擇2維顯示模式或3維顯示模式。此情況下，若3維顯示模式被選擇時，則位元串流處理部306係被設成和上述相同的構成、動作。另一方面，若2維顯示模式被選擇時，則位元串流處理部306係被設成和上述的圖45所示之2D支援位元串流處理部201相同的構成、動作。
<2.變形例>
此外，在圖40所示的機上盒200中，係圖示了設有被連接至數位選台器204的天線輸入端子203。可是，將 透過纜線而被發送過來的RF訊號予以輸入的機上盒，也可同樣地構成。此時係取代了天線端子203而改設至纜線端子。
又，和網際網路、家用網路直接或經由路由器而連接的機上盒，也可同樣地構成。亦即，此時，對機上盒，上述的傳輸串流TS是從網際網路、家用網路，直接或經由路由器而被送入。
圖47係圖示了此時的機上盒200A的構成例。於此圖47中，和圖40對應的部分，係標示同一符號。該機上盒200A，係具有被連接至網路介面209的網路端子208。然後，從該網路介面209會輸出傳輸串流TS，供給至位元串流處理部201。雖然省略詳細說明，但該機上盒200A的其他部分，是和圖40所示的機上盒200同樣構成，進行同樣的動作。
又，在圖46所示的電視收訊機300中，係圖示了設有被連接至數位選台器204的天線輸入端子304。可是，將透過纜線而被發送過來的RF訊號予以輸入的電視收訊機，也可同樣地構成。此時係取代了天線端子304而改設至纜線端子。
又，和網際網路、家用網路直接或經由路由器而連接的電視收訊機，也可同樣地構成。亦即，此時，對電視收訊機，上述的傳輸串流TS是從網際網路、家用網路，直接或經由路由器而被送入。
圖48係圖示了此時的電視收訊機300A的構成例。於 此圖48中，和圖46對應的部分，係標示同一符號。該電視收訊機300A，係具有被連接至網路介面314的網路端子313。然後，從該網路介面314會輸出傳輸串流TS，供給至位元串流處理部306。雖然省略詳細說明，但該電視收訊機300A的其他部分，是和圖46所示的電視收訊機300同樣構成，進行同樣的動作。
又，於上述實施形態中係展示了，影像收送訊系統10是由播送台100、機上盒200及電視收訊機300所構成。可是，電視收訊機300係如圖46所示，具備與機上盒200內的位元串流處理部201同樣機能的位元串流處理部306。因此，如圖49所示，亦可考慮由播送台100及電視收訊機300所構成的影像收送訊系統10A。
又，於於上述實施形態中係展示了，機上盒200，和電視收訊機300，是以HDMI的數位介面而連接。可是，即使它們是以與HDMI之數位介面相同的數位介面(除了有線以外也包含無線)而連接的情況下，本發明可同樣地適用。
又，於於上述實施形態中，是將字幕(subtitle)當做重疊資訊來看待。可是，其他的圖形資訊、文字資訊等之重疊資訊等等，被分割成基本串流與追加串流然後關連地輸出的此種編碼器，甚至關於操作音訊串流者，均可同樣地適用本發明。
又，本技術係亦可採取如下之構成。
(1)一種送訊裝置，其係 具備：影像資料輸出部，係將具有左眼影像資料及右眼影像資料的立體影像資料，予以輸出；和重疊資訊資料輸出部，係將要重疊於上記左眼影像資料及上記右眼影像資料所致之影像上的重疊資訊之資料，予以輸出；和視差資訊輸出部，係將用來令要重疊於上記左眼影像資料及上記右眼影像資料所致之影像上的重疊資訊做平移而賦予視差所需的視差資訊，予以輸出；和資料送訊部，係發送出多工化串流，其係具有：含有從上記影像資料輸出部所輸出之立體影像資料的視訊資料串流、和含有從上記重疊資訊資料輸出部所輸出之重疊資訊之資料的第1私用資料串流、和含有從上記視差資訊輸出部所輸出之視差資訊的第2私用資料串流。
(2)如前記(1)所記載之送訊裝置，其中，在上記第1私用資料串流及上記第2私用資料串流中係含有，用來使上記重疊資訊之資料所致之顯示與上記視差資訊所致之平移控制做同步所需的同步資訊。
(3)如前記(1)或(2)所記載之送訊裝置，其中，上記視差資訊係為在上記重疊資訊被顯示之所定數之畫格期間內被依序更新的視差資訊，是由上記所定數之畫格期間的最初之畫格的視差資訊、和其後的每次更新畫格間隔的畫格的視差資訊所成。
(4)如前記(1)至(3)之任一項所記載之送訊裝置，其中，上記重疊資訊之資料係為DVB方式之字幕資料；上記視差資訊係為區域單位或該區域中所含之子區域單位的視差資訊、或是包含全部區域之頁面單位的視差資訊。
(5)如前記(1)至(4)之任一項所記載之送訊裝置，其中，在上記多工化串流中係被插入有，用來將上記第1私用資料串流與上記第2私用資料串流建立關連的關連建立資訊。
(6)一種送訊方法，其係具備：影像資料輸出步驟，係將具有左眼影像資料及右眼影像資料的立體影像資料，予以輸出；和重疊資訊資料輸出步驟，係將要重疊於上記左眼影像資料及上記右眼影像資料所致之影像上的重疊資訊之資料，予以輸出；和視差資訊輸出步驟，係將用來令要重疊於上記左眼影像資料及上記右眼影像資料所致之影像上的重疊資訊做平移而賦予視差所需的視差資訊，予以輸出；和資料送訊步驟，係發送出多工化串流，其係具有：含有上記影像資料輸出步驟中所輸出之立體影像資料的視訊資料串流、和含有上記重疊資訊資料輸出步驟中所輸出之 重疊資訊之資料的第1私用資料串流、和含有上記視差資訊輸出步驟中所輸出之視差資訊的第2私用資料串流。
(7)一種送訊裝置，其係具備：影像資料輸出部，係將具有左眼影像資料及右眼影像資料的立體影像資料，予以輸出；和重疊資訊資料輸出部，係將要重疊於上記左眼影像資料及上記右眼影像資料所致之影像上的重疊資訊之資料，予以輸出；和視差資訊輸出部，係將用來令要重疊於上記左眼影像資料及上記右眼影像資料所致之影像上的重疊資訊做平移而賦予視差所需的視差資訊，予以輸出；和資料送訊部，係發送出多工化串流，其係具有：含有從上記影像資料輸出部所輸出之立體影像資料的視訊資料串流、和含有從上記重疊資訊資料輸出部所輸出之重疊資訊之資料的第1私用資料串流、和含有從重疊資訊資料輸出部所輸出之重疊資訊資料及從上記視差資訊輸出部所輸出之視差資訊的第2私用資料串流。
(8)如前記(7)所記載之送訊裝置，其中，上記視差資訊係為在上記重疊資訊被顯示之所定數之畫格期間內被依序更新的視差資訊，是由上記所定數之畫格期間的最初之畫格的視差資訊、和其後的每次更新畫格間隔的畫格的視差資訊所成。
(9)如前記(7)或(8)所記載之送訊裝置，其 中，上記重疊資訊之資料係為DVB方式之字幕資料；上記視差資訊係為區域單位或該區域中所含之子區域單位的視差資訊、或是包含全部區域之頁面單位的視差資訊。
(10)一種送訊方法，其係具備：影像資料輸出步驟，係將具有左眼影像資料及右眼影像資料的立體影像資料，予以輸出；和重疊資訊資料輸出步驟，係將要重疊於上記左眼影像資料及上記右眼影像資料所致之影像上的重疊資訊之資料，予以輸出；和視差資訊輸出步驟，係將用來令要重疊於上記左眼影像資料及上記右眼影像資料所致之影像上的重疊資訊做平移而賦予視差所需的視差資訊，予以輸出；和資料送訊步驟，係發送出多工化串流，其係具有：含有上記影像資料輸出步驟中所輸出之立體影像資料的視訊資料串流、和含有上記重疊資訊資料輸出步驟中所輸出之重疊資訊資料的第1私用資料串流、和含有上記重疊資訊資料輸出步驟中所輸出之重疊資訊資料及上記視差資訊輸出步驟中所輸出之視差資訊的第2私用資料串流。
(11)一種收訊裝置，其係具備資料收訊部，係將具有視訊資料串流、第1私用資料串流及第2私用資料串流的多工化資料串流，予以接 收；上記視訊資料串流係含有，具有左眼影像資料及右眼影像資料的立體影像資料；上記第1私用資料串流係含有，要對上記左眼影像資料及上記右眼影像資料所致之影像做重疊的重疊資訊之資料；上記第2私用資料串流係含有，用來令要重疊於上記左眼影像資料及上記右眼影像資料所致之影像上的重疊資訊做平移而賦予視差所需的視差資訊；還含有：資訊取得部、影像資料處理部；上記資訊取得部，係從已被上記資料收訊部所接收到的上記多工化資料串流中，抽出上記視訊資料串流，取得該視訊資料串流中所含之上記立體影像資料；從已被上記資料收訊部所接收到的上記多工化資料串流中，抽出上記第1私用資料串流，從該第1私用資料串流，取得上記重疊資訊之資料；從已被上記資料收訊部所接收到的上記多工化資料串流中，抽出上記第2私用資料串流，從該第2私用資料串流，取得上記視差資訊；上記影像資料處理部，係使用已被上記資訊取得部所取得的上記立體影像資料、上記重疊資訊之資料及上記視差資訊，對要重疊於左眼影像及右眼影像的同一重疊資訊，賦予視差，獲得已被 重疊上記重疊資訊的左眼影像之資料及已被重疊上記重疊資訊的右眼影像之資料。
(12)如前記(11)所記載之收訊裝置，其中，在上記多工化資料串流中係被插入有，用來將上記第1私用資料串流與上記第2私用資料串流建立關連的關連建立資訊；上記資訊取得部，係基於上記關連建立資訊，而從上記第1私用資料串流取得上記重疊資訊之資料，並且從上記第2私用資料串流取得上記視差資訊。
(13)如前記(11)或(12)所記載之收訊裝置，其中，上記視差資訊係為，在上記重疊資訊被顯示之所定數之畫格期間內被依序更新的視差資訊；上記影像資料處理部，係對於上記所定數之畫格期間內被依序更新的複數畫格的視差資訊，實施內插處理，生成上記所定數之畫格期間內的任意之畫格間隔的視差資訊並使用之。
(14)一種收訊裝置，其係具備資料收訊部，係將具有視訊資料串流、第1私用資料串流及第2私用資料串流的多工化資料串流，予以接收；上記視訊資料串流係含有，具有左眼影像資料及右眼影像資料的立體影像資料；上記第1私用資料串流係含有，要對上記左眼影像資 料及上記右眼影像資料所致之影像做重疊的重疊資訊之資料；上記第2私用資料串流係含有，用來令要重疊於上記左眼影像資料及上記右眼影像資料所致之影像上的重疊資訊做平移而賦予視差所需的視差資訊；還含有：資訊取得部、影像資料處理部；上記資訊取得部，係在2維顯示模式下，係從已被上記資料收訊部所接收到的上記多工化資料串流中，抽出上記視訊資料串流，取得該視訊資料串流中所含之上記立體影像資料；從已被上記資料收訊部所接收到的上記多工化資料串流中，抽出上記第1私用資料串流，從該第1私用資料串流，取得上記重疊資訊之資料；在3維顯示模式下，係從已被上記資料收訊部所接收到的上記多工化資料串流中，抽出上記視訊資料串流，取得該視訊資料串流中所含之上記立體影像資料；從已被上記資料收訊部所接收到的上記多工化資料串流中，抽出上記第1私用資料串流，從該第1私用資料串流，取得上記重疊資訊之資料；從已被上記資料收訊部所接收到的上記多工化資料串流中，抽出上記第2私用資料串流，從該第2私用資料串流，取得上記視差資訊； 上記影像資料處理部，係在2維顯示模式下，係使用已被上記資訊取得部所取得的上記立體影像資料及上記重疊資訊之資料，獲得已被重疊有上記重疊資訊的影像資料；在3維顯示模式下，係使用已被上記資訊取得部所取得的上記立體影像資料、上記重疊資訊之資料及上記視差資訊，對要重疊於左眼影像及右眼影像的同一重疊資訊，賦予視差，獲得已被重疊上記重疊資訊的左眼影像之資料及已被重疊上記重疊資訊的右眼影像之資料。
(15)一種收訊裝置，其係具備資料收訊部，係將具有視訊資料串流、第1私用資料串流及第2私用資料串流的多工化資料串流，予以接收；上記視訊資料串流係含有，具有左眼影像資料及右眼影像資料的立體影像資料；上記第1私用資料串流係含有，要對上記左眼影像資料及上記右眼影像資料所致之影像做重疊的重疊資訊之資料；上記第2私用資料串流係含有，上記重疊資訊之資料、及用來令要重疊於上記左眼影像資料及上記右眼影像資料所致之影像上的重疊資訊做平移而賦予視差所需的視差資訊； 還含有：資訊取得部、影像資料處理部；上記資訊取得部，係從已被上記資料收訊部所接收到的上記多工化資料串流中，抽出上記視訊資料串流，取得該視訊資料串流中所含之上記立體影像資料；從已被上記資料收訊部所接收到的上記多工化資料串流中，抽出上記第2私用資料串流，從該第2私用資料串流，取得上記重疊資訊之資料及上記視差資訊；上記影像資料處理部，係使用已被上記資訊取得部所取得的上記立體影像資料、上記重疊資訊之資料及上記視差資訊，對要重疊於左眼影像及右眼影像的同一重疊資訊，賦予視差，獲得已被重疊上記重疊資訊的左眼影像之資料及已被重疊上記重疊資訊的右眼影像之資料。
(16)如前記(15)所記載之收訊裝置，其中，上記視差資訊係為，在上記重疊資訊被顯示之所定數之畫格期間內被依序更新的視差資訊；上記影像資料處理部，係對於上記所定數之畫格期間內被依序更新的複數畫格的視差資訊，實施內插處理，生成上記所定數之畫格期間內的任意之畫格間隔的視差資訊並使用之。
(17)一種收訊裝置，其係具備資料收訊部，係將具有視訊資料串流、第1私用資料串流及第2私用資料串流的多工化資料串流，予以接 收；上記視訊資料串流係含有，具有左眼影像資料及右眼影像資料的立體影像資料；上記第1私用資料串流係含有，要對上記左眼影像資料及上記右眼影像資料所致之影像做重疊的重疊資訊之資料；上記第2私用資料串流係含有，上記重疊資訊之資料、及用來令要重疊於上記左眼影像資料及上記右眼影像資料所致之影像上的重疊資訊做平移而賦予視差所需的視差資訊；還含有：資訊取得部、影像資料處理部；上記資訊取得部，係在2維顯示模式下，係從已被上記資料收訊部所接收到的上記多工化資料串流中，抽出上記視訊資料串流，取得該視訊資料串流中所含之上記立體影像資料；從已被上記資料收訊部所接收到的上記多工化資料串流中，抽出上記第1私用資料串流，從該第1私用資料串流，取得上記重疊資訊之資料；在3維顯示模式下，係從已被上記資料收訊部所接收到的上記多工化資料串流中，抽出上記視訊資料串流，取得該視訊資料串流中所含之上記立體影像資料；從已被上記資料收訊部所接收到的上記多工化資料串 流中，抽出上記第2私用資料串流，從該第2私用資料串流，取得上記重疊資訊之資料及上記視差資訊；上記影像資料處理部，係在2維顯示模式下，係使用已被上記資訊取得部所取得的上記立體影像資料及上記重疊資訊之資料，獲得已被重疊有上記重疊資訊的影像資料；在3維顯示模式下，係使用已被上記資訊取得部所取得的上記立體影像資料、上記重疊資訊之資料及上記視差資訊，對要重疊於左眼影像及右眼影像的同一重疊資訊，賦予視差，獲得已被重疊上記重疊資訊的左眼影像之資料及已被重疊上記重疊資訊的右眼影像之資料。
(18)一種收訊裝置，其係具備資料收訊部，係將具有視訊資料串流、第1私用資料串流及第2私用資料串流的多工化資料串流，予以接收；上記視訊資料串流係含有，具有左眼影像資料及右眼影像資料的立體影像資料；上記第1私用資料串流係含有，要對上記左眼影像資料及上記右眼影像資料所致之影像做重疊的重疊資訊之資料；上記第2私用資料串流係含有，用來令要重疊於上記左眼影像資料及上記右眼影像資料所致之影像上的重疊資 訊做平移而賦予視差所需的視差資訊、或者是該視差資訊及上記重疊資訊之資料；還含有：資訊取得部、影像資料處理部；上記資訊取得部，係從已被上記資料收訊部所接收到的上記多工化資料串流中，抽出上記視訊資料串流，取得該視訊資料串流中所含之上記立體影像資料；從已被上記資料收訊部所接收到的上記多工化資料串流中，抽出上記第1私用資料串流，從該第1私用資料串流，取得上記重疊資訊之資料；上記影像資料處理部，係使用已被上記資訊取得部所取得的上記立體影像資料及上記重疊資訊之資料，獲得已被重疊有上記重疊資訊的影像資料。
10,10A‧‧‧影像收送訊系統
100‧‧‧播送台
110‧‧‧送訊資料生成部
111‧‧‧資料取出部
112‧‧‧視訊編碼器
113‧‧‧音訊編碼器
114‧‧‧字幕產生部
115‧‧‧視差資訊作成部
116‧‧‧字幕處理部
118‧‧‧字幕編碼器
119‧‧‧多工器
200,200A‧‧‧機上盒(STB)
201‧‧‧位元串流處理部
202‧‧‧HDMI端子
203‧‧‧天線端子
204‧‧‧數位選台器
205‧‧‧映像訊號處理電路
206‧‧‧HDMI送訊部
207‧‧‧聲音訊號處理電路
208‧‧‧網路端子
209‧‧‧網路介面
211‧‧‧CPU
215‧‧‧遙控收訊部
216‧‧‧遙控送訊機
221‧‧‧解多工器
222‧‧‧視訊解碼器
223‧‧‧字幕解碼器
224‧‧‧字幕產生部
226‧‧‧顯示控制資訊取得部
228‧‧‧視訊重疊部
229‧‧‧音訊解碼器
300,300A‧‧‧電視收訊機(TV)
301‧‧‧3D訊號處理部
302‧‧‧HDMI端子
303‧‧‧HDMI收訊部
304‧‧‧天線端子
305‧‧‧數位選台器
306‧‧‧位元串流處理部
307‧‧‧映像．圖形處理電路
308‧‧‧面板驅動電路
309‧‧‧顯示面板
310‧‧‧聲音訊號處理電路
311‧‧‧聲音增幅電路
312‧‧‧揚聲器
313‧‧‧網路端子
314‧‧‧網路介面
321‧‧‧CPU
322‧‧‧快閃ROM
323‧‧‧DRAM
324‧‧‧內部匯流排
325‧‧‧遙控收訊部
326‧‧‧遙控送訊機
400‧‧‧HDMI纜線
〔圖1〕本發明之實施形態的影像收送訊系統之構成例的區塊圖。
〔圖2〕播送台中的送訊資料生成部之構成例的區塊圖。
〔圖3〕1920×1080之像素格式的影像資料的圖示。
〔圖4〕用來說明立體影像資料(3D影像資料)之傳輸方式的「Top & Bottom」方式、「Side By Side」方式、「Frame Sequential」方式的圖。
〔圖5〕相對於左眼影像的右眼影像之視差向量偵測例的說明圖。
〔圖6〕以區塊比對方式求出視差向量的說明圖。
〔圖7〕將各像素(畫素)的視差向量之值以各圖像(各像素)之亮度值而作使用時的影像例之圖示。
〔圖8〕各區塊(Block)的視差向量之一例的圖示。
〔圖9〕於送訊資料生成部的視差資訊作成部上所進行的尺寸縮小處理的說明圖。
〔圖10〕在字幕資料中，畫面上所被定義的區域、和該區域內所被定義的子區域之一例的圖示。
〔圖11〕在「第1類型」下，傳輸串流TS所具有的2D串流及3D擴充串流之構成的圖示。
〔圖12〕在「第2類型」下，傳輸串流TS所具有的2D串流及3D串流之構成的圖示。
〔圖13］在「第1類型」下，2D串流(PES1(1)：PES # 1)與3D擴充畫格(PES2(2)：PES # 2)的PES標頭中所被插入的時間戳記(PTS)之值是被建立關連的說明圖。
〔圖14〕2D串流與3D擴充串流的時間戳記(PTS)之值是被設定成不同值的例子的圖示。
〔圖15〕2D串流與3D擴充串流的時間戳記(PTS)之值是被設定成不同值的另一例子的圖示。
〔圖16〕「第1類型」時的傳輸串流TS之構成例的圖示。
〔圖17〕構成字幕資料的PCS(page_composition_segment)之結構的圖示。
〔圖18〕「segment_type」之各值與區段類型之對應關係的圖示。
〔圖19〕新定義的表示3D用字幕之格式的資訊(Component_type=0x15,0x25)的說明圖。
〔圖20〕「第2類型」時的傳輸串流TS之構成例的圖示。
〔圖21〕使用間隔期間(Interval period)的視差資訊之更新例，且間隔期間為固定，而且該期間是等於更新期間時的圖示。
〔圖22〕使用間隔期間(Interval period)的視差資訊之更新例，且間隔期間被設成短期間時的視差資訊之更新例的圖示。
〔圖23〕「第2類型」時的3D串流之構成例的圖示。
〔圖24〕依序發送DSS區段時的視差資訊之更新例的圖示。
〔圖25〕更新畫格間隔是以作為單位期間的間隔期間(ID：IntervalDuration)之倍數來表示的視差資訊(disparity)之更新例的圖示。
〔圖26〕頁面領域(Area for Page_default)中含有2個作為字幕顯示領域之區域(Region)的字幕之顯示例的圖示。
〔圖27〕DSS的區段中，作為在字幕顯示期間會被依序更新的視差資訊(Disparity)，是含有區域單位的視差資訊與包含全部區域之頁面單位的視差資訊這兩者時，各區域與頁面之視差資訊曲線之一例的圖示。
〔圖28〕頁面及各區域的視差資訊是以何種結構被發送的圖示。
〔圖29〕DSS的結構例(syntax)的圖示(1/3)。
〔圖30〕DSS的結構例的圖示(2/3)。
〔圖31〕DSS的結構例的圖示(3/3)。
〔圖32〕DSS的主要資料規定內容(semantics)的圖示(1/4)。
〔圖33〕DSS的主要資料規定內容的圖示(2/4)。
〔圖34〕DSS的主要資料規定內容的圖示(3/4)。
〔圖35〕DSS的主要資料規定內容的圖示(4/4)。
〔圖36〕機上盒及電視收訊機是3D支援機器時的播送收訊概念的圖示。
〔圖37〕機上盒及電視收訊機是舊型2D支援機器時的播送收訊概念的圖示。
〔圖38〕影像上的字幕(圖形資訊)的顯示例，和背景、近景物件、字幕之遠近感的圖示。
〔圖39〕影像上的字幕的顯示例，和用來顯示字幕所需的左眼字幕LGI及右眼字幕RGI的圖示。
〔圖40〕構成影像收送訊系統的機上盒之構成例的區塊圖。
〔圖41〕構成機上盒的位元串流處理部之構成例(3D支援)的區塊圖。
〔圖42〕為了將2D串流、3D擴充串流建立關連而能使用的多重解碼描述元之結構例(syntax)的圖示。
〔圖43〕多重解碼描述元之結構例中的主要資訊內容(Semantics)的圖示。
〔圖44〕配置有多重解碼描述元時，「第1類型」的傳輸串流TS之構成例的圖示。
〔圖45〕構成機上盒的位元串流處理部之另一構成例(2D支援)的區塊圖。
〔圖46〕構成影像收送訊系統的電視收訊機之構成例的區塊圖。
〔圖47〕構成影像收送訊系統的機上盒之其他構成例的區塊圖。
〔圖48〕構成影像收送訊系統的電視收訊機之另一構成例的區塊圖。
〔圖49〕影像收送訊系統之其他構成例的區塊圖。
〔圖50〕利用兩眼視差之立體影像顯示時，於螢幕上的物件的左右像之顯示位置、與該立體像之再生位置的關係的說明圖。

Claims (18)

  1. 一種送訊裝置，其特徵為，具備：影像資料輸出部，係將具有左眼影像資料及右眼影像資料的立體影像資料，予以輸出；和重疊資訊資料輸出部，係將要重疊於上記左眼影像資料及上記右眼影像資料所致之影像上的重疊資訊之資料，予以輸出；和視差資訊輸出部，係將用來令要重疊於上記左眼影像資料及上記右眼影像資料所致之影像上的重疊資訊做平移而賦予視差所需的視差資訊，予以輸出；和資料送訊部，係發送出多工化串流，其係具有：含有從上記影像資料輸出部所輸出之立體影像資料的視訊資料串流、和含有從上記重疊資訊資料輸出部所輸出之重疊資訊之資料的第1私用資料串流、和含有從上記視差資訊輸出部所輸出之視差資訊的第2私用資料串流。
  2. 如請求項1所記載之送訊裝置，其中，在上記第1私用資料串流及上記第2私用資料串流中係含有，用來使上記重疊資訊之資料所致之顯示與上記視差資訊所致之平移控制做同步所需的同步資訊。
  3. 如請求項1所記載之送訊裝置，其中，上記視差資訊係為在上記重疊資訊被顯示之所定數之畫格期間內被依序更新的視差資訊，是由上記所定數之畫格期間的最初之畫格的視差資訊、和其後的每次更新畫格 間隔的畫格的視差資訊所成。
  4. 如請求項1所記載之送訊裝置，其中，上記重疊資訊之資料係為DVB方式之字幕資料；上記視差資訊係為區域單位或該區域中所含之子區域單位的視差資訊、或是包含全部區域之頁面單位的視差資訊。
  5. 如請求項1所記載之送訊裝置，其中，在上記多工化串流中係被插入有，用來將上記第1私用資料串流與上記第2私用資料串流建立關連的關連建立資訊。
  6. 一種送訊方法，其特徵為，具備：影像資料輸出步驟，係將具有左眼影像資料及右眼影像資料的立體影像資料，予以輸出；和重疊資訊資料輸出步驟，係將要重疊於上記左眼影像資料及上記右眼影像資料所致之影像上的重疊資訊之資料，予以輸出；和視差資訊輸出步驟，係將用來令要重疊於上記左眼影像資料及上記右眼影像資料所致之影像上的重疊資訊做平移而賦予視差所需的視差資訊，予以輸出；和資料送訊步驟，係發送出多工化串流，其係具有：含有上記影像資料輸出步驟中所輸出之立體影像資料的視訊資料串流、和含有上記重疊資訊資料輸出步驟中所輸出之重疊資訊之資料的第1私用資料串流、和含有上記視差資 訊輸出步驟中所輸出之視差資訊的第2私用資料串流。
  7. 一種送訊裝置，其特徵為，具備：影像資料輸出部，係將具有左眼影像資料及右眼影像資料的立體影像資料，予以輸出；和重疊資訊資料輸出部，係將要重疊於上記左眼影像資料及上記右眼影像資料所致之影像上的重疊資訊之資料，予以輸出；和視差資訊輸出部，係將用來令要重疊於上記左眼影像資料及上記右眼影像資料所致之影像上的重疊資訊做平移而賦予視差所需的視差資訊，予以輸出；和資料送訊部，係發送出多工化串流，其係具有：含有從上記影像資料輸出部所輸出之立體影像資料的視訊資料串流、和含有從上記重疊資訊資料輸出部所輸出之重疊資訊之資料的第1私用資料串流、和含有從重疊資訊資料輸出部所輸出之重疊資訊資料及從上記視差資訊輸出部所輸出之視差資訊的第2私用資料串流。
  8. 如請求項7所記載之送訊裝置，其中，上記視差資訊係為在上記重疊資訊被顯示之所定數之畫格期間內被依序更新的視差資訊，是由上記所定數之畫格期間的最初之畫格的視差資訊、和其後的每次更新畫格間隔的畫格的視差資訊所成。
  9. 如請求項7所記載之送訊裝置，其中，上記重疊資訊之資料係為DVB方式之字幕資料； 上記視差資訊係為區域單位或該區域中所含之子區域單位的視差資訊、或是包含全部區域之頁面單位的視差資訊。
  10. 一種送訊方法，其特徵為，具備：影像資料輸出步驟，係將具有左眼影像資料及右眼影像資料的立體影像資料，予以輸出；和重疊資訊資料輸出步驟，係將要重疊於上記左眼影像資料及上記右眼影像資料所致之影像上的重疊資訊之資料，予以輸出；和視差資訊輸出步驟，係將用來令要重疊於上記左眼影像資料及上記右眼影像資料所致之影像上的重疊資訊做平移而賦予視差所需的視差資訊，予以輸出；和資料送訊步驟，係發送出多工化串流，其係具有：含有上記影像資料輸出步驟中所輸出之立體影像資料的視訊資料串流、和含有上記重疊資訊資料輸出步驟中所輸出之重疊資訊資料的第1私用資料串流、和含有上記重疊資訊資料輸出步驟中所輸出之重疊資訊資料及上記視差資訊輸出步驟中所輸出之視差資訊的第2私用資料串流。
  11. 一種收訊裝置，其特徵為，具備資料收訊部，係將具有視訊資料串流、第1私用資料串流及第2私用資料串流的多工化資料串流，予以接收；上記視訊資料串流係含有，具有左眼影像資料及右眼 影像資料的立體影像資料；上記第1私用資料串流係含有，要對上記左眼影像資料及上記右眼影像資料所致之影像做重疊的重疊資訊之資料；上記第2私用資料串流係含有，用來令要重疊於上記左眼影像資料及上記右眼影像資料所致之影像上的重疊資訊做平移而賦予視差所需的視差資訊；還含有：資訊取得部、影像資料處理部；上記資訊取得部，係從已被上記資料收訊部所接收到的上記多工化資料串流中，抽出上記視訊資料串流，取得該視訊資料串流中所含之上記立體影像資料；從已被上記資料收訊部所接收到的上記多工化資料串流中，抽出上記第1私用資料串流，從該第1私用資料串流，取得上記重疊資訊之資料；從已被上記資料收訊部所接收到的上記多工化資料串流中，抽出上記第2私用資料串流，從該第2私用資料串流，取得上記視差資訊；上記影像資料處理部，係使用已被上記資訊取得部所取得的上記立體影像資料、上記重疊資訊之資料及上記視差資訊，對要重疊於左眼影像及右眼影像的同一重疊資訊，賦予視差，獲得已被重疊上記重疊資訊的左眼影像之資料及已被重疊上記重疊資訊的右眼影像之資料。
  12. 如請求項11所記載之收訊裝置，其中，在上記多工化資料串流中係被插入有，用來將上記第1私用資料串流與上記第2私用資料串流建立關連的關連建立資訊；上記資訊取得部，係基於上記關連建立資訊，而從上記第1私用資料串流取得上記重疊資訊之資料，並且從上記第2私用資料串流取得上記視差資訊。
  13. 如請求項11所記載之收訊裝置，其中，上記視差資訊係為，在上記重疊資訊被顯示之所定數之畫格期間內被依序更新的視差資訊；上記影像資料處理部，係對於上記所定數之畫格期間內被依序更新的複數畫格的視差資訊，實施內插處理，生成上記所定數之畫格期間內的任意之畫格間隔的視差資訊並使用之。
  14. 一種收訊裝置，其特徵為，具備資料收訊部，係將具有視訊資料串流、第1私用資料串流及第2私用資料串流的多工化資料串流，予以接收；上記視訊資料串流係含有，具有左眼影像資料及右眼影像資料的立體影像資料；上記第1私用資料串流係含有，要對上記左眼影像資料及上記右眼影像資料所致之影像做重疊的重疊資訊之資料；上記第2私用資料串流係含有，用來令要重疊於上記 左眼影像資料及上記右眼影像資料所致之影像上的重疊資訊做平移而賦予視差所需的視差資訊；還含有：資訊取得部、影像資料處理部；上記資訊取得部，係在2維顯示模式下，係從已被上記資料收訊部所接收到的上記多工化資料串流中，抽出上記視訊資料串流，取得該視訊資料串流中所含之上記立體影像資料；從已被上記資料收訊部所接收到的上記多工化資料串流中，抽出上記第1私用資料串流，從該第1私用資料串流，取得上記重疊資訊之資料；在3維顯示模式下，係從已被上記資料收訊部所接收到的上記多工化資料串流中，抽出上記視訊資料串流，取得該視訊資料串流中所含之上記立體影像資料；從已被上記資料收訊部所接收到的上記多工化資料串流中，抽出上記第1私用資料串流，從該第1私用資料串流，取得上記重疊資訊之資料；從已被上記資料收訊部所接收到的上記多工化資料串流中，抽出上記第2私用資料串流，從該第2私用資料串流，取得上記視差資訊；上記影像資料處理部，係在2維顯示模式下，係使用已被上記資訊取得部所取得的上記立體影像資料 及上記重疊資訊之資料，獲得已被重疊有上記重疊資訊的影像資料；在3維顯示模式下，係使用已被上記資訊取得部所取得的上記立體影像資料、上記重疊資訊之資料及上記視差資訊，對要重疊於左眼影像及右眼影像的同一重疊資訊，賦予視差，獲得已被重疊上記重疊資訊的左眼影像之資料及已被重疊上記重疊資訊的右眼影像之資料。
  15. 一種收訊裝置，其特徵為，具備資料收訊部，係將具有視訊資料串流、第1私用資料串流及第2私用資料串流的多工化資料串流，予以接收；上記視訊資料串流係含有，具有左眼影像資料及右眼影像資料的立體影像資料；上記第1私用資料串流係含有，要對上記左眼影像資料及上記右眼影像資料所致之影像做重疊的重疊資訊之資料；上記第2私用資料串流係含有，上記重疊資訊之資料、及用來令要重疊於上記左眼影像資料及上記右眼影像資料所致之影像上的重疊資訊做平移而賦予視差所需的視差資訊；還含有：資訊取得部、影像資料處理部；上記資訊取得部，係從已被上記資料收訊部所接收到的上記多工化資料串 流中，抽出上記視訊資料串流，取得該視訊資料串流中所含之上記立體影像資料；從已被上記資料收訊部所接收到的上記多工化資料串流中，抽出上記第2私用資料串流，從該第2私用資料串流，取得上記重疊資訊之資料及上記視差資訊；上記影像資料處理部，係使用已被上記資訊取得部所取得的上記立體影像資料、上記重疊資訊之資料及上記視差資訊，對要重疊於左眼影像及右眼影像的同一重疊資訊，賦予視差，獲得已被重疊上記重疊資訊的左眼影像之資料及已被重疊上記重疊資訊的右眼影像之資料。
  16. 如請求項15所記載之收訊裝置，其中，上記視差資訊係為，在上記重疊資訊被顯示之所定數之畫格期間內被依序更新的視差資訊；上記影像資料處理部，係對於上記所定數之畫格期間內被依序更新的複數畫格的視差資訊，實施內插處理，生成上記所定數之畫格期間內的任意之畫格間隔的視差資訊並使用之。
  17. 一種收訊裝置，其特徵為，具備資料收訊部，係將具有視訊資料串流、第1私用資料串流及第2私用資料串流的多工化資料串流，予以接收；上記視訊資料串流係含有，具有左眼影像資料及右眼影像資料的立體影像資料； 上記第1私用資料串流係含有，要對上記左眼影像資料及上記右眼影像資料所致之影像做重疊的重疊資訊之資料；上記第2私用資料串流係含有，上記重疊資訊之資料、及用來令要重疊於上記左眼影像資料及上記右眼影像資料所致之影像上的重疊資訊做平移而賦予視差所需的視差資訊；還含有：資訊取得部、影像資料處理部；上記資訊取得部，係在2維顯示模式下，係從已被上記資料收訊部所接收到的上記多工化資料串流中，抽出上記視訊資料串流，取得該視訊資料串流中所含之上記立體影像資料；從已被上記資料收訊部所接收到的上記多工化資料串流中，抽出上記第1私用資料串流，從該第1私用資料串流，取得上記重疊資訊之資料；在3維顯示模式下，係從已被上記資料收訊部所接收到的上記多工化資料串流中，抽出上記視訊資料串流，取得該視訊資料串流中所含之上記立體影像資料；從已被上記資料收訊部所接收到的上記多工化資料串流中，抽出上記第2私用資料串流，從該第2私用資料串流，取得上記重疊資訊之資料及上記視差資訊；上記影像資料處理部，係 在2維顯示模式下，係使用已被上記資訊取得部所取得的上記立體影像資料及上記重疊資訊之資料，獲得已被重疊有上記重疊資訊的影像資料；在3維顯示模式下，係使用已被上記資訊取得部所取得的上記立體影像資料、上記重疊資訊之資料及上記視差資訊，對要重疊於左眼影像及右眼影像的同一重疊資訊，賦予視差，獲得已被重疊上記重疊資訊的左眼影像之資料及已被重疊上記重疊資訊的右眼影像之資料。
  18. 一種收訊裝置，其特徵為，具備資料收訊部，係將具有視訊資料串流、第1私用資料串流及第2私用資料串流的多工化資料串流，予以接收；上記視訊資料串流係含有，具有左眼影像資料及右眼影像資料的立體影像資料；上記第1私用資料串流係含有，要對上記左眼影像資料及上記右眼影像資料所致之影像做重疊的重疊資訊之資料；上記第2私用資料串流係含有，用來令要重疊於上記左眼影像資料及上記右眼影像資料所致之影像上的重疊資訊做平移而賦予視差所需的視差資訊、或者是該視差資訊及上記重疊資訊之資料；還含有：資訊取得部、影像資料處理部； 上記資訊取得部，係從已被上記資料收訊部所接收到的上記多工化資料串流中，抽出上記視訊資料串流，取得該視訊資料串流中所含之上記立體影像資料；從已被上記資料收訊部所接收到的上記多工化資料串流中，抽出上記第1私用資料串流，從該第1私用資料串流，取得上記重疊資訊之資料；上記影像資料處理部，係使用已被上記資訊取得部所取得的上記立體影像資料及上記重疊資訊之資料，獲得已被重疊有上記重疊資訊的影像資料。
TW101121330A 2011-07-07 2012-06-14 送訊裝置、送訊方法及收訊裝置 TW201320712A (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2011151313A JP2013021415A (ja) 2011-07-07 2011-07-07 送信装置、送信方法および受信装置

Publications (1)

Publication Number Publication Date
TW201320712A true TW201320712A (zh) 2013-05-16

Family

ID=47436928

Family Applications (1)

Application Number Title Priority Date Filing Date
TW101121330A TW201320712A (zh) 2011-07-07 2012-06-14 送訊裝置、送訊方法及收訊裝置

Country Status (11)

Country Link
US (1) US20130162772A1 (zh)
EP (1) EP2603004A4 (zh)
JP (1) JP2013021415A (zh)
CN (1) CN103155574A (zh)
AR (1) AR086919A1 (zh)
AU (1) AU2012279594A1 (zh)
BR (1) BR112013004970A2 (zh)
CA (1) CA2806787A1 (zh)
RU (1) RU2013109054A (zh)
TW (1) TW201320712A (zh)
WO (1) WO2013005571A1 (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TWI685212B (zh) * 2018-01-18 2020-02-11 日商索尼股份有限公司 送訊方法及收訊裝置
TWI685213B (zh) * 2018-01-18 2020-02-11 日商索尼股份有限公司 送訊方法及收訊裝置

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2013066075A (ja) * 2011-09-01 2013-04-11 Sony Corp 送信装置、送信方法および受信装置
JP6724791B2 (ja) * 2014-12-19 2020-07-15 ソニー株式会社 送信装置、送信方法、受信装置および受信方法
WO2017010359A1 (ja) * 2015-07-16 2017-01-19 ソニー株式会社 送信装置、送信方法、受信装置および受信方法
CN106412718A (zh) * 2016-09-18 2017-02-15 乐视控股（北京）有限公司 一种字幕在3d空间中的渲染方法及其装置
CN110798739B (zh) * 2019-11-11 2021-10-08 四川东方网力科技有限公司 基于html5的视频实时目标属性叠加显示方法、装置及设备

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004274125A (ja) * 2003-03-05 2004-09-30 Sony Corp 画像処理装置および方法
JP4190357B2 (ja) 2003-06-12 2008-12-03 シャープ株式会社 放送データ送信装置、放送データ送信方法および放送データ受信装置
US8358331B2 (en) * 2008-12-02 2013-01-22 Lg Electronics Inc. 3D caption display method and 3D display apparatus for implementing the same
JP2011030180A (ja) * 2009-06-29 2011-02-10 Sony Corp 立体画像データ送信装置、立体画像データ送信方法、立体画像データ受信装置および立体画像データ受信方法
JP5407968B2 (ja) * 2009-06-29 2014-02-05 ソニー株式会社 立体画像データ送信装置および立体画像データ受信装置
JP5429034B2 (ja) * 2009-06-29 2014-02-26 ソニー株式会社 立体画像データ送信装置、立体画像データ送信方法、立体画像データ受信装置および立体画像データ受信方法

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TWI685212B (zh) * 2018-01-18 2020-02-11 日商索尼股份有限公司 送訊方法及收訊裝置
TWI685213B (zh) * 2018-01-18 2020-02-11 日商索尼股份有限公司 送訊方法及收訊裝置

Also Published As

Publication number Publication date
AR086919A1 (es) 2014-01-29
US20130162772A1 (en) 2013-06-27
WO2013005571A1 (ja) 2013-01-10
AU2012279594A1 (en) 2013-02-21
EP2603004A4 (en) 2015-03-11
EP2603004A1 (en) 2013-06-12
RU2013109054A (ru) 2014-09-10
BR112013004970A2 (pt) 2016-08-16
CA2806787A1 (en) 2013-01-10
CN103155574A (zh) 2013-06-12
JP2013021415A (ja) 2013-01-31

Similar Documents

Publication Publication Date Title
JP5454444B2 (ja) 立体画像データ送信装置、立体画像データ送信方法、立体画像データ受信装置および立体画像データ受信方法
US20130222542A1 (en) Transmission device, transmission method and reception device
JP2012120143A (ja) 立体画像データ送信装置、立体画像データ送信方法、立体画像データ受信装置および立体画像データ受信方法
TW201320712A (zh) 送訊裝置、送訊方法及收訊裝置
US20130169752A1 (en) Transmitting Apparatus, Transmitting Method, And Receiving Apparatus
US20120257019A1 (en) Stereo image data transmitting apparatus, stereo image data transmitting method, stereo image data receiving apparatus, and stereo image data receiving method
JP5682149B2 (ja) 立体画像データ送信装置、立体画像データ送信方法、立体画像データ受信装置および立体画像データ受信方法
US20130188016A1 (en) Transmission device, transmission method, and reception device
KR20130132239A (ko) 입체화상 데이터 송신 장치, 입체화상 데이터 송신 방법, 입체화상 데이터 수신 장치 및 입체화상 데이터 수신 방법
US20130188015A1 (en) Transmitting apparatus, transmitting method, and receiving apparatus