JP7548367B2 - 送信方法 - Google Patents
送信方法 Download PDFInfo
- Publication number
- JP7548367B2 JP7548367B2 JP2023076536A JP2023076536A JP7548367B2 JP 7548367 B2 JP7548367 B2 JP 7548367B2 JP 2023076536 A JP2023076536 A JP 2023076536A JP 2023076536 A JP2023076536 A JP 2023076536A JP 7548367 B2 JP7548367 B2 JP 7548367B2
- Authority
- JP
- Japan
- Prior art keywords
- video data
- conversion
- photoelectric conversion
- hdr
- transmission video
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/236—Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
- H04N21/23614—Multiplexing of additional data and video streams
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/90—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using coding techniques not provided for in groups H04N19/10-H04N19/85, e.g. fractals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
- H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/235—Processing of additional data, e.g. scrambling of additional data or processing content descriptors
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/236—Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
- H04N21/23605—Creation or processing of packetized elementary streams [PES]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/434—Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
- H04N21/4343—Extraction or processing of packetized elementary streams [PES]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/434—Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
- H04N21/4348—Demultiplexing of additional data and video streams
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/47—End-user applications
- H04N21/485—End-user interface for client configuration
- H04N21/4854—End-user interface for client configuration for modifying image parameters, e.g. image brightness, contrast
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/95—Computational photography systems, e.g. light-field imaging systems
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Human Computer Interaction (AREA)
- Computing Systems (AREA)
- Theoretical Computer Science (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
- Studio Devices (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
- Picture Signal Circuits (AREA)
- Television Systems (AREA)
Description
本技術は、送信方法に関する。
従来、ハイダイナミックレンジビデオデータにハイダイナミックレンジ光電変換を適用して得られた伝送ビデオデータを送信することが考えられている。以下、ハイダイナミックレンジを、適宜、「HDR」と表記する。例えば、非特許文献1には、従来受信機による受信を考慮した、従来の光電変換特性(ガンマ特性)との互換領域を含むHDR光電変換特性(新ガンマ特性)についての記載がある。
Tim Borer, "Non-Linear Opto-Electrical Transfer Functions for High Dynamic Range Television", Research & Development White Paper WHP 283, July 2014
本技術の目的は、受信側において所定の光電変換特性を持たせた伝送ビデオデータから表示用画像データを得る処理を適切に行い得るようにすることにある。
本技術の概念は、
入力ビデオデータを処理して所定の光電変換特性を持たせた伝送ビデオデータを得る光電変換処理部と、
上記伝送ビデオデータにエンコード処理を施してビデオストリームを得るエンコード部と、
上記ビデオストリームを含む所定フォーマットのコンテナを送信する送信部と、
上記ビデオストリームおよび/または上記コンテナに、上記入力ビデオデータの光電変換の状態を示す情報を挿入する情報挿入部を備える
送信装置にある。
入力ビデオデータを処理して所定の光電変換特性を持たせた伝送ビデオデータを得る光電変換処理部と、
上記伝送ビデオデータにエンコード処理を施してビデオストリームを得るエンコード部と、
上記ビデオストリームを含む所定フォーマットのコンテナを送信する送信部と、
上記ビデオストリームおよび/または上記コンテナに、上記入力ビデオデータの光電変換の状態を示す情報を挿入する情報挿入部を備える
送信装置にある。
本技術において、光電変換処理部により、入力ビデオデータが処理されて所定の光電変換特性を持たせた伝送ビデオデータが得られる。エンコード部により、伝送ビデオデータにエンコード処理が施されてビデオストリームが得られる。送信部により、このビデオストリームを含む所定フォーマットのコンテナが送信される。情報挿入部により、ビデオストリームおよび/またはコンテナに、入力ビデオデータの光電変換の状態を示す情報が挿入される。
例えば、入力ビデオデータの光電変換の状態を示す情報は、入力ビデオデータに光電変換が行われているときは、この光電変換の変換特性に対応した電光変換特性を示す情報とされ、入力ビデオデータに光電変換が行われていないときは、所定の光電変換特性に対応した電光変換特性を示す情報とされる、ようにされてもよい。
例えば、光電変換処理部は、通常ダイナミックレンジ光電変換特性を持たせた第1の伝送ビデオデータを得るか、ハイダイナミックレンジ光電変換特性を持たせた第2の伝送ビデオデータを得るか、ハイダイナミックレンジ光電変換特性を持たせた第3の伝送ビデオデータを得る、ようにされてもよい。
第1の伝送ビデオデータは、入力ビデオデータとしての通常ダイナミックレンジビデオデータに通常ダイナミックレンジ光電変換特性による光電変換が行われて得られる。第2の伝送ビデオデータは、入力ビデオデータとしてのハイダイナミックレンジビデオデータにハイダイナミックレンジ光電変換特性による光電変換が行われて得られる。
第3の伝送ビデオデータは、通常ダイナミックレンジビデオデータに通常ダイナミックレンジ光電変換特性による光電変換が行われて得られた入力ビデオデータに、通常ダイナミックレンジ光電変換特性による変換データの値をハイダイナミックレンジ光電変換特性による変換データの値に変換するための変換情報に基づいてダイナミックレンジ変換が行われて得られる。例えば、変換情報は、変換係数、あるいは変換テーブルである、ようにされてもよい。
例えば、情報挿入部は、光電変換処理部が第3の伝送ビデオデータを得るとき、ビデオストリームおよび/またはコンテナに、変換情報をさらに挿入する、ようにされてもよい。このように変換情報が挿入されることで、受信側では、この変換情報を用いて伝送ビデオデータのダイナミックレンジ変換を行うことでき、通常ダイナミックレンジの画像表示を行うための処理を容易に行い得る。
例えば、情報挿入部は、ビデオストリームおよび/またはコンテナに、所定の光電変換特性に対応した電光変換特性を示す情報をさらに挿入する、ようにされてもよい。この場合、受信側では、伝送ビデオデータが持っている所定の光電変換特性に対応した電光変換特性を容易に把握可能となる。また、例えば、情報挿入部は、ビデオストリームおよび/またはコンテナに、基準輝度レベルである基準レベル、あるいは通常ダイナミックレンジ光電変換特性とハイダイナミックレンジ光電変換特性のカーブが同一軌道から分岐して別れる輝度レベルである分岐レベルをさらに挿入する、ようにされてもよい。
このように本技術においては、入力ビデオデータを処理して得られた所定の光電変換特性を持つ伝送ビデオデータを送信する際に、その入力ビデオデータの光電変換の状態を示す情報も送信するものである。そのため、受信側において当該伝送ビデオデータから表示用画像データを得る処理を適切に行い得る。
また、本技術の他の概念は、
伝送ビデオデータがエンコードされて得られたビデオストリームを含む所定フォーマットのコンテナを受信する受信部を備え、
上記伝送ビデオデータは、送信側で入力ビデオデータが処理されて得られた所定の光電変換特性を持つ伝送ビデオデータであり、
上記ビデオストリームおよび/または上記コンテナに、上記入力ビデオデータの光電変換の状態を示す情報が挿入されており、
上記ビデオストリームにデコード処理を施して上記伝送ビデオデータを得るデコード部と、
上記ビデオストリームおよび/または上記コンテナから、上記入力ビデオデータの光電変換の状態を示す情報を抽出する情報抽出部と、
上記デコード部で得られた伝送ビデオデータに、上記情報抽出部で抽出された情報、上記所定の光電変換特性の情報および表示性能に基づいた電光変換処理を施して表示用画像データを得る処理部をさらに備える
受信装置にある。
伝送ビデオデータがエンコードされて得られたビデオストリームを含む所定フォーマットのコンテナを受信する受信部を備え、
上記伝送ビデオデータは、送信側で入力ビデオデータが処理されて得られた所定の光電変換特性を持つ伝送ビデオデータであり、
上記ビデオストリームおよび/または上記コンテナに、上記入力ビデオデータの光電変換の状態を示す情報が挿入されており、
上記ビデオストリームにデコード処理を施して上記伝送ビデオデータを得るデコード部と、
上記ビデオストリームおよび/または上記コンテナから、上記入力ビデオデータの光電変換の状態を示す情報を抽出する情報抽出部と、
上記デコード部で得られた伝送ビデオデータに、上記情報抽出部で抽出された情報、上記所定の光電変換特性の情報および表示性能に基づいた電光変換処理を施して表示用画像データを得る処理部をさらに備える
受信装置にある。
本技術において、受信部により、伝送ビデオデータがエンコードされて得られたビデオストリームを含む所定フォーマットのコンテナが受信される。ここで、伝送ビデオデータは、送信側で入力ビデオデータが処理されて得られた所定の光電変換特性を持つ伝送ビデオデータである。また、ビデオストリームおよび/またはコンテナに、入力ビデオデータの光電変換の状態を示す情報が挿入されている。
例えば、伝送ビデオデータは、通常ダイナミックレンジ光電変換特性を持つ第1の伝送ビデオデータであるか、ハイダイナミックレンジ光電変換特性を持つ第2の伝送ビデオデータであるか、ハイダイナミックレンジ光電変換特性を持つ第3の伝送ビデオデータである、ようにされてもよい。
ここで、第1の伝送ビデオデータは、入力ビデオデータとしての通常ダイナミックレンジビデオデータに通常ダイナミックレンジ光電変換特性による光電変換が行われて得られたものである。第2の伝送ビデオデータは、入力ビデオデータとしてのハイダイナミックレンジビデオデータにハイダイナミックレンジ光電変換特性による光電変換が行われて得られたものである。
第3の伝送ビデオデータは、通常ダイナミックレンジビデオデータに通常ダイナミックレンジ光電変換特性による光電変換が行われて得られた入力ビデオデータに、通常ダイナミックレンジ光電変換特性による変換データの値をハイダイナミックレンジ光電変換特性による変換データの値に変換するための変換情報に基づいてダイナミックレンジ変換が行われて得られたものである。
デコード部により、ビデオストリームにデコード処理が施されて伝送ビデオデータが得られる。情報抽出部により、ビデオストリームおよび/またはコンテナから、入力ビデオデータの光電変換の状態を示す情報が抽出される。そして、処理部により、デコード部で得られた伝送ビデオデータに、情報抽出部で抽出された情報、所定の光電変換特性の情報および表示性能に基づいた電光変換処理が施されて表示用画像データが得られる。
例えば、処理部は、表示性能がハイダイナミックレンジであるとき、伝送ビデオデータが第1の伝送ビデオデータである場合には、伝送ビデオデータにダイナミックレンジ変換を行った後にハイダイナミックレンジ電光変換特性による電光変換を施して表示用画像データを得、伝送ビデオデータが第2の伝送ビデオデータあるいは第3の伝送ビデオデータである場合には、伝送ビデオデータにハイダイナミックレンジ電光変換特性による電光変換を施して表示用画像データを得る、ようにされてもよい。
また、例えば、処理部は、表示性能が通常ダイナミックレンジであるとき、伝送ビデオデータが第1の伝送ビデオデータである場合には、伝送ビデオデータに通常ダイナミックレンジ電光変換特性による電光変換を施して上記表示用画像データを得、伝送ビデオデータが第2の伝送ビデオデータあるいは第3の伝送ビデオデータである場合には、伝送ビデオデータにダイナミックレンジ変換を行った後に通常ダイナミックレンジ電光変換特性による電光変換を施して表示用画像データを得る、ようにされてもよい。
このように本技術においては、送信側で入力ビデオデータが処理されて得られた所定の光電変換特性を持つ伝送ビデオデータに、入力ビデオデータの光電変換の状態を示す情報、所定の光電変換特性の情報および表示性能に基づいた電光変換処理を施して表示用画像データを得るものである。そのため、伝送ビデオデータから表示用画像データを得る処理を適切に行い得る。
本技術によれば、受信側において所定の光電変換特性を持たせた伝送ビデオデータから表示用画像データを得る処理を適切に行い得る。なお、本明細書に記載された効果はあくまで例示であって限定されるものではなく、また付加的な効果があってもよい。
以下、発明を実施するための形態(以下、「実施の形態」とする)について説明する。なお、説明を以下の順序で行う。
1.実施の形態
2.変形例
1.実施の形態
2.変形例
<1.実施の形態>
[送受信システムの構成例]
図1は、実施の形態としての送受信システム10の構成例を示している。この送受信システム10は、サービス送信システム100とサービス受信機200により構成されている。サービス送信システム100は、コンテナとしてのMPEG2のトランスポートストリームTSを生成し、このトランスポートストリームTSを放送波あるいはネットのパケットに載せて送信する。
[送受信システムの構成例]
図1は、実施の形態としての送受信システム10の構成例を示している。この送受信システム10は、サービス送信システム100とサービス受信機200により構成されている。サービス送信システム100は、コンテナとしてのMPEG2のトランスポートストリームTSを生成し、このトランスポートストリームTSを放送波あるいはネットのパケットに載せて送信する。
サービス送信システム100は、入力ビデオデータを処理して、所定の光電変換特性を持たせた伝送ビデオデータを得る。トランスポートストリームTSには、この伝送ビデオデータにエンコード処理を施して得られたビデオストリームが含まれる。ビデオストリームおよび/またはコンテナとしてのトランスポートストリームTSに、入力ビデオデータの光電変換の状態を示す情報が挿入される。
サービス受信機200は、サービス送信システム100から送信されてくるトランスポートストリームTSを受信する。サービス受信機200は、トランスポートストリームTSに含まれているビデオストリームにデコード処理を施して伝送ビデオデータを得る。この伝送ビデオデータは、上述したように、送信側で入力ビデオデータが処理されて得られた所定の光電変換特性を持つ伝送ビデオデータである。
サービス受信機200は、ビデオストリームおよび/またはコンテナとしてのトランスポートストリームTSに含まれている、入力ビデオデータの光電変換の状態を示す情報を抽出する。そして、サービス受信機200は、伝送ビデオデータに、抽出された情報、所定の光電変換特性の情報および表示性能に基づいた電光変換処理を施して表示用画像データを得る。
「サービス送信システムの構成例」
図2は、サービス送信システム100の構成例を示している。このサービス送信システム100は、制御部101と、HDR(High Dynamic Range:ハイダイナミックレンジ)光電変換部103と、SDR(Standard Dynamic Range:通常ダイナミックレンジ)光電変換部104と、ダイナミックレンジ変換部105と、切換スイッチ106と、RGB/YCbCr変換部107と、ビデオエンコーダ108と、コンテナエンコーダ109と、送信部110を有している。
図2は、サービス送信システム100の構成例を示している。このサービス送信システム100は、制御部101と、HDR(High Dynamic Range:ハイダイナミックレンジ)光電変換部103と、SDR(Standard Dynamic Range:通常ダイナミックレンジ)光電変換部104と、ダイナミックレンジ変換部105と、切換スイッチ106と、RGB/YCbCr変換部107と、ビデオエンコーダ108と、コンテナエンコーダ109と、送信部110を有している。
制御部101は、CPU(Central Processing Unit)を備えて構成され、制御プログラムに基づいて、サービス送信システム100の各部の動作を制御する。HDR光電変換部103は、高コントラストカメラ出力、すなわちHDRビデオデータVhに対して、HDR光電変換特性を適用して光電変換し、HDR伝送ビデオデータ(HDR光電変換特性を持たせた伝送ビデオデータ)を得る。このHDR伝送ビデオデータは、HDR OETFで映像制作された映像素材となる。
SDR光電変換部104は、通常コントラストカメラ出力、すなわちSDRビデオデータVsに対して、SDR光電変換特性を適用して光電変換し、SDR伝送ビデオデータ(SDR光電変換特性を持たせた伝送ビデオデータ)を得る。このSDR伝送ビデオデータは、SDR OETFで映像制作された映像素材となる。
ダイナミックレンジ変換部105は、SDR伝送ビデオデータにダイナミックレンジ変換を行ってHDR伝送ビデオデータ(HDR光電変換特性を持たせた伝送ビデオデータ)を得る。つまり、このダイナミックレンジ変換部105は、SDR OETFで映像制作された映像素材であるSDR伝送ビデオデータをHDR伝送ビデオデータに変換する。ここで、ダイナミックレンジ変換部105は、SDR光電変換特性による変換データの値をHDR光電変換特性による変換データの値に変換するための変換情報に基づいて、ダイナミックレンジ変換を行う。この変換情報は、例えば、制御部101から与えられる。
図3を参照して、ダイナミックレンジ変換について、さらに説明する。実線aは、SDR光電変換特性を示すSDR OETFカーブの一例を示している。実線bは、HDR光電変換特性を示すHDR OETFカーブの一例を示している。横軸は入力輝度レベルを示し、P1はSDR最大レベルに対応する入力輝度レベルを示し、P2はHDR最大レベルに対応する入力輝度レベルを示している。
また、縦軸は伝送符号値または正規化された符号化レベルの相対値を示す。相対最大レベルMはHDR最大レベルおよびSDR最大レベルを示す。基準レベルGは、SDR最大レベルに対応する入力輝度レベルP1におけるHDR OETFの伝送レベルを示すもので、いわゆるリファレンスの白レベルを意味し、このレベルよりも高い範囲をHDR特有のきらめき表現に利用することを示す。
分岐レベルBは、SDR OETFカーブとHDR OETFカーブとが同一軌道から分岐して別れるレベルを示す。Pfは、分岐レベルに対応する入力輝度レベルを示す。なお、この分岐レベルBは、0以上の任意の値とすることができる。図4は、分岐レベルBが0である場合の例を示している。
ダイナミックレンジ変換部105におけるダイナミックレンジ変換では、SDR伝送ビデオデータのうち、分岐レベルBから相対最大レベルMまでが、HDR光電変換特性による変換データの値となるように変換される。この場合、SDR最大レベルである相対最大レベルMは基準レベルGと一致するようにされる。なお、分岐レベルB未満の入力データは、そのまま出力データとされる。
ここで、変換情報は、変換テーブルあるいは変換係数で与えられる。変換テーブルで与えられる場合、ダイナミックレンジ変換部105は、この変換テーブルを参照して変換を行う。一方、変換係数で与えられる場合、ダイナミックレンジ変換部105は、この変換係数を用いた演算により変換を行う。例えば、変換係数をCとするとき、分岐レベルBから相対最大レベルMまでの入力データに関して、以下の(1)式により、変換を行う。
出力データ=分岐レベルB+(入力データ-分岐レベルB)*C ・・・(1)
出力データ=分岐レベルB+(入力データ-分岐レベルB)*C ・・・(1)
図2に戻って、切換スイッチ106は、SDR光電変換部104で得られたSDR伝送ビデオデータ(第1の伝送ビデオデータ)、HDR光電変換部103で得られたHDR伝送ビデオデータ(第2の伝送ビデオデータ)、またはダイナミックレンジ変換部105で得られたHDR伝送ビデオデータ(第3の伝送ビデオデータ)を選択的に取り出す。
RGB/YCbCr変換部107は、切換スイッチ106で取り出された伝送ビデオデータV1をRGBドメインからYCbCr(輝度・色差)ドメインに変換する。この場合、RGB/YCbCr変換部107は、色空間情報に基づいて、色空間に対応した変換式を用いて変換を行う。なお、これらの色空間のドメインは、RGBドメインに限定されるものではなく、また、輝度・色差ドメインはYCbCrに限定されるわけではない。
ビデオエンコーダ108は、RGB/YCbCr変換部107でYCbCrドメインに変換された伝送ビデオデータV1に対して、例えば、MPEG4-AVCあるいはHEVCなどの符号化を施して符号化ビデオデータを得、この符号化ビデオデータを含むビデオストリーム(ビデオエレメンタリストリーム)VSを生成する。
この際、ビデオエンコーダ108は、アクセスユニット(AU)のSPS NALユニットのVUI(video usability information)の領域に、SDRのストリームであるかHDRのストリームであるかを示す情報、伝送ビデオデータV1が持つ光電変換特性に対応した電光変換特性を示す情報(transfer function)などのメタ情報を挿入する。
ここで、伝送ビデオデータV1が持つ光電変換特性は、この伝送ビデオデータV1がSDR光電変換部104で得られたSDR伝送ビデオデータ(第1の伝送ビデオデータ)であるときは、SDR光電変換部104における光電変換特性である。また、伝送ビデオデータV1が持つ光電変換特性は、この伝送ビデオデータV1がHDR光電変換部104で得られたHDR伝送ビデオデータ(第2の伝送ビデオデータ)であるときは、HDR光電変換部103における光電変換特性である。さらに、伝送ビデオデータV1が持つ光電変換特性は、この伝送ビデオデータV1がダイナミックレンジ変換部105で得られたHDR伝送ビデオデータ(第3の伝送ビデオデータ)であるときは、HDR光電変換部103における光電変換特性である。
また、ビデオエンコーダ108は、アクセスユニット(AU)の“SEIs”の部分に、入力ビデオデータの光電変換の状態を示す情報、ダイナミックレンジ変換の変換情報などのメタ情報を持つ、新規定義するダイナミックレンジ・コンバージョンSEIメッセージ(Dynamic_range_conv SEI message)を挿入する。ここで、入力ビデオデータの光電変換の状態を示す情報は、入力ビデオデータに光電変換が行われているときは、この光電変換の変換特性に対応した電光変換特性を示す情報とされ、入力ビデオデータに光電変換が行われていないときは、伝送ビデオデータが持つ所定の光電変換特性に対応した電光変換特性を示す情報とされる。
ここで、伝送ビデオデータV1がSDR光電変換部104で得られたSDR伝送ビデオデータ(第1の伝送ビデオデータ)であるとき、入力ビデオデータの光電変換の状態を示す情報は、SDR光電変換部104における光電変換特性に対応した電光変換特性を示す情報とされる。また、伝送ビデオデータV1がHDR光電変換部104で得られたHDR伝送ビデオデータ(第2の伝送ビデオデータ)であるとき、入力ビデオデータの光電変換の状態を示す情報は、HDR光電変換部103における光電変換特性に対応した電光変換特性を示す情報とされる。さらに、伝送ビデオデータV1がダイナミックレンジ変換部105で得られたHDR伝送ビデオデータ(第3の伝送ビデオデータ)であるとき、入力ビデオデータの光電変換の状態を示す情報は、SDR光電変換部104における光電変換特性に対応した電光変換特性を示す情報とされる。
図5は、符号化方式がHEVCである場合におけるGOP(Group Of Pictures)の先頭のアクセスユニットを示している。また、図6は、符号化方式がHEVCである場合におけるGOPの先頭以外のアクセスユニットを示している。HEVCの符号化方式の場合、画素データが符号化されているスライス(slices)の前にデコード用のSEIメッセージ群「Prefix_SEIs」が配置され、このスライス(slices)の後に表示用のSEIメッセージ群「Suffix_SEIs」が配置される。ダイナミックレンジ・コンバージョンSEIメッセージは、例えば、図示のようにSEIメッセージ群「Suffix_SEIs」として、あるいはSEIメッセージ群「Prefix SEIs」として配置される。
図7は、ダイナミックレンジ・コンバージョンSEIメッセージの構造例(Syntax)を示している。図8は、その構造例における主要な情報の内容(Semantics)を示している。「Dynamic_range_conv_cancel_flag」の1ビットのフラグ情報は、“Dynamic_range_conv”のメッセージをリフレッシュするかを示す。“0”は、“Dynamic_range_conv”のメッセージをリフレッシュすることを示す。“1”は、“Dynamic_range_conv”のメッセージをリフレッシュしないこと、つまり前のメッセージをそのまま維持することを示す。
「Dynamic_range_conv_cancel_flag」が“0”であるとき、以下のフィールドが存在する。「coded_data_bit_depth」の8ビットフィールドは、符号化画素ビット数(伝送符号値のビット数)を示す。「reference_level」の16ビットフィールドは、基準輝度レベル値、つまり基準レベルG(図3参照)を示す。「ratio_conversion_flag」の1ビットのフラグ情報は、シンプル変換によること、つまり変換係数が存在することを示す。「conversion_table_flag」の1ビットのフラグ情報は、変換テーブルによること、つまり変換テーブル情報が存在することを示す。「branch_level」の16ビットフィールドは、分岐レベルB(図3参照)を示す。
「ratio_conversion_flag」が“1”であるとき、「level_conversion_ratio」の8ビットフィールドが存在する。このフィールドは、変換係数(レベル変換の比)を示す。「conversion_table_flag」が“1”であるとき、「table_size」の16ビットフィールドが存在する。
このフィールドは、変換テーブルの入力数を示す。符号化画素ビット数に対応した数だけ、「level_R[i]」、「level_G[i]」、「level_B[i]」の各16ビットフィールドが存在する。「level_R[i]」のフィールドは、赤コンポーネント(Red component)の変換後の値を示す。「level_G[i]」のフィールドは、緑コンポーネント(Red component)の変換後の値を示す。「level_B[i]」のフィールドは、青コンポーネント(Red component)の変換後の値を示す。
「original_transferfunction」の8ビットフィールドは、入力ビデオデータの光電変換の状態(オリジナル伝達関数特性の種類)を示す。“1”は、「BT.709-5 Transfer Function(SDR)」を示す。“14”は、「10bit BT.2020 Transfer Function (SDR)」を示す。“16”は、「SMPTE 2084 Transfer Function (HDR1)」を示す。“25”は、「HDR(HDR2)」を示す。
図2に戻って、コンテナエンコーダ109は、ビデオエンコーダ108で生成されたビデオストリームVSを含むトランスポートストリームTSを生成する。送信部110は、このトランスポートストリームTSを、放送波あるいはネットのパケットに載せて、サービス受信機200に送信する。
この際、コンテナエンコーダ109は、コンテナとしてのトランスポートストリームTSに、SDRのストリームであるかHDRのストリームであるかを示す情報、伝送ビデオデータV1が持つ光電変換特性に対応した電光変換特性を示す情報、入力ビデオデータの光電変換の状態(オリジナル伝達関数特性の種類)を示す情報などを挿入する。この実施の形態において、コンテナエンコーダ109は、プログラム・マップ・テーブル(PMT:Program Map Table)の配下、あるいはイベント・インフォメーション・テーブル(EIT:Event Information Table)の配下に、ダイナミックレンジ・コンバージョン・デスクリプタ(dynamic_range_conversion_descriptor)を挿入する。
図9は、ダイナミックレンジ・コンバージョン・デスクリプタの構造例(Syntax)を示している。図10は、その構造例における主要な情報の内容(Semantics)を示している。「descriptor_tag」の8ビットフィールドは、デスクリプタタイプを示し、ここでは、ダイナミックレンジ・コンバージョン・デスクリプタであることを示す。「descriptor_length」の8ビットフィールドは、デスクリプタの長さ(サイズ)を示し、デスクリプタの長さとして以降のバイト数を示す。
「highdynamicrange」の8ビットフィールドは、対象ストリームがHDRストリームであるかSDRストリームであるかを示す。“1”はHDRストリームであることを示し、“0”はSDRストリームであることを示す。「transferfunction」の8ビットフィールドは、電光変換特性(EOTF特性)を示す。つまり、このフィールドは、伝送ビデオデータV1が持つ光電変換特性に対応した電光変換特性を示す。例えば、“1”は「BT.709-5 Transfer Function(SDR)」を示し、“14”は「10bit BT.2020 Transfer Function(SDR)」を示し、“16”は「SMPTE 2084 Transfer Function(HDR1)」を示し、“25”は「HDR(HDR2)」を示す。なお、「HDR(HDR2)」は、HDR電光変換特性を示すが、PQカーブではなく、いわゆるハイブリッドガンマと称されるものである。
「xycolourprimaries」の8ビットフィールドは、色空間を示す。例えば、“1”は「BT.709-5」を示し、“9”は「BT.2020」を示し、“10”は「SMPTE 428 or XYZ」を示す。「matrixcoefficients」の8ビットフィールドは、色マトリクス係数を示す。例えば、“1”は「BT.709-5」を示し、“9”は「BT.2020 non-constant lumiinance」を示し、“11”は「SMPTE 2085 or Y′D′zD′x」を示す。
「referencelevel」の8ビットフィールドは、基準レベルG(図3参照)を示す。この場合、基準レベルGとして、最大「1」に正規化された相対範囲の中を0~100の値で指定した値が記述される。受信側では、この値を100で割ったものが相対基準レベルとして認識される。この相対基準レベルは、ダイナミックレンジ変換の変換情報としての変換係数を構成する。
「branchlevel」の8ビットフィールドは、分岐レベルB(図3参照)を示す。この場合、分岐レベルBとして、最大「1」に正規化された相対範囲の中を0~100の値で指定した値が記述される。受信側では、この値を100で割ったものが分岐レベルとして認識される。
「original_transferfunction」の8ビットフィールドは、入力ビデオデータの光電変換の状態(オリジナル伝達関数特性の種類)を示す。“1”は、「BT.709-5 Transfer Function(SDR)」を示す。“14”は、「10bit BT.2020 Transfer Function (SDR)」を示す。“16”は、「SMPTE 2084 Transfer Function (HDR1)」を示す。“25”は、「HDR(HDR2)」を示す。
図11は、トランスポートストリームTSの構成例を示している。この構成例では、PID1で識別されるビデオストリームのPESパケット「Video PES」が存在する。アクセスユニットのSPSのVUIの領域に、SDRのストリームであるかHDRのストリームであるかを示す情報、伝送ビデオデータV1が持つ光電変換特性に対応した電光変換特性を示す情報などのメタ情報が挿入される。また、アクセスユニットに、入力ビデオデータの光電変換の状態(オリジナル伝達関数特性の種類)を示す情報、ダイナミックレンジ変換の変換情報などのメタ情報を持つダイナミックレンジ・コンバージョンSEIメッセージが挿入される。
また、トランスポートストリームTSには、PSI(Program Specific Information)として、PMT(Program Map Table)が含まれている。PSIは、トランスポートストリームに含まれる各エレメンタリストリームがどのプログラムに属しているかを記した情報である。PMTには、プログラム全体に関連する情報を記述するプログラム・ループ(Program loop)が存在する。
PMTには、各エレメンタリストリームに関連した情報を持つエレメンタリストリーム・ループが存在する。この構成例では、ビデオストリームに対応したビデオエレメンタリストリーム・ループ(video ES loop)が存在する。ビデオエレメンタリストリーム・ループ(video ES loop)には、ビデオストリームに対応して、ストリームタイプ、PID(パケット識別子)等の情報が配置されると共に、そのビデオストリームに関連する情報を記述するデスクリプタも配置される。
このビデオストリームの「Stream_type」の値は、例えばHEVCビデオストリームを示す値に設定され、PID情報はビデオストリームのPESパケット「video PES」に付与されるPID1を示すものとされる。デスクリプタの一つとして、SDRのストリームであるかHDRのストリームであるかを示す情報、伝送ビデオデータV1が持つ光電変換特性に対応した電光変換特性を示す情報、入力ビデオデータの光電変換の状態を示す情報などのメタ情報を持つダイナミックレンジ・コンバージョン・デスクリプタが挿入される。
また、トランスポートストリームTSには、イベント(番組)単位の管理を行うSI(Service Information)としてのEIT(Event Information Table)が含まれている。このEITの配下に、ダイナミックレンジ・コンバージョン・デスクリプタを挿入することも考えられる。
図2に示すサービス送信システム100の動作を簡単に説明する。高コントラストカメラ出力であるHDRビデオデータVhはHDR光電変換部103に供給される。このHDR光電変換部103では、HDRビデオデータVhにHDR光電変換特性で光電変換が施され、HDR OETFで映像制作された映像素材としてのHDR伝送ビデオデータ(HDR光電変換特性を持たせた伝送ビデオデータ)が得られる。
また、通常コントラストカメラ出力であるSDRビデオデータVsはSDR光電変換部104に供給される。このSDR光電変換部104では、SDRビデオデータVsにSDR光電変換特性で光電変換が施され、SDR OETFで映像制作された映像素材としてのSDR伝送ビデオデータ(SDR光電変換特性を持たせた伝送ビデオデータ)が得られる。
SDR光電変換部104で得られたSDR伝送ビデオデータは、ダイナミックレンジ変換部105に供給される。ダイナミックレンジ変換部105では、制御部101から供給される変換情報(変換テーブル、変換係数)に基づいて、SDR伝送ビデオデータにダイナミックレンジ変換が施される。このダイナミックレンジ変換により、SDR伝送ビデオデータは、HDR伝送ビデオデータ(HDR光電変換特性を持たせた伝送ビデオデータ)に変換される(図3参照)。
切換スイッチ106では、制御部101の制御により、SDR光電変換部104で得られたSDR伝送ビデオデータ(第1の伝送ビデオデータ)、HDR光電変換部103で得られたHDR伝送ビデオデータ(第2の伝送ビデオデータ)、またはダイナミックレンジ変換部105で得られたHDR伝送ビデオデータ(第3の伝送ビデオデータ)が選択的に取り出される。このように取り出された伝送ビデオデータは、RGB/YCbCr変換部107でRGBドメインからYCbCr(輝度・色差)ドメインに変換される。
YCbCrドメインに変換された伝送ビデオデータV1は、ビデオエンコーダ108に供給される。このビデオエンコーダ108では、伝送ビデオデータV1に対して、例えば、MPEG4-AVCあるいはHEVCなどの符号化が施されて符号化ビデオデータが得られ、この符号化ビデオデータを含むビデオストリームVSが生成される。
この際、ビデオエンコーダ108では、アクセスユニット(AU)のSPS NALユニットのVUI(video usability information)の領域に、SDRのストリームであるかHDRのストリームであるかを示す情報、伝送ビデオデータV1が持つ光電変換特性に対応した電光変換特性を示す情報などのメタ情報が挿入される。また、ビデオエンコーダ108では、アクセスユニット(AU)の“SEIs”の部分に、入力ビデオデータの光電変換の状態(オリジナル伝達関数特性の種類)を示す情報、ダイナミックレンジ変換の変換情報などのメタ情報を持つ、新規定義するダイナミックレンジ・コンバージョンSEIメッセージ(図7参照)が挿入される。
ビデオエンコーダ108で得られたビデオストリームVSは、コンテナエンコーダ109に供給される。コンテナエンコーダ109では、ビデオエンコーダ108で生成されたビデオストリームVSを含むトランスポートストリームTSが生成される。このトランスポートストリームTSは、送信部110により、放送波あるいはネットのパケットに載せて、サービス受信機200に送信される。
この際、コンテナエンコーダ109では、コンテナとしてのトランスポートストリームTSに、SDRのストリームであるかHDRのストリームであるかを示す情報、伝送ビデオデータV1が持つ光電変換特性に対応した電光変換特性を示す情報、入力ビデオデータの光電変換の状態(オリジナル伝達関数特性の種類)を示す情報などのメタ情報が挿入される。すなわち、コンテナエンコーダ109では、プログラム・マップ・テーブルの配下、あるいはイベント・インフォメーション・テーブルの配下に、ダイナミックレンジ・コンバージョン・デスクリプタ(図9参照)が挿入される。
「サービス受信機の構成例」
図12は、サービス受信機200の構成例を示している。このサービス受信機200は、制御部201と、受信部202と、コンテナデコーダ203と、ビデオデコーダ204と、YCbCr/RGB変換部205と、切換スイッチ206を有している。また、このサービス受信機200は、HDR/SDR変換部207と、SDR電光変換部208と、SDR/HDR変換部209と、HDR電光変換部210を有している。
図12は、サービス受信機200の構成例を示している。このサービス受信機200は、制御部201と、受信部202と、コンテナデコーダ203と、ビデオデコーダ204と、YCbCr/RGB変換部205と、切換スイッチ206を有している。また、このサービス受信機200は、HDR/SDR変換部207と、SDR電光変換部208と、SDR/HDR変換部209と、HDR電光変換部210を有している。
制御部201は、CPU(Central Processing Unit)を備えて構成され、制御プログラムに基づいて、サービス受信機200の各部の動作を制御する。受信部202は、サービス送信システム100から放送波あるいはネットのパケットに載せて送られてくるトランスポートストリームTSを受信する。コンテナデコーダ203は、トランスポートストリームTSからビデオストリームVSを抽出する。
また、コンテナデコーダ203は、トランスポートストリームTSに挿入されている種々の情報を抽出し、制御部201に送る。この情報には、上述した、ダイナミックレンジ・コンバージョン・デスクリプタ(図9参照)も含まれる。制御部201は、このデスクリプタの記述に基づいて、SDRのストリームであるかHDRのストリームであるか、ビデオストリームVSに含まれる伝送ビデオデータV1が持つ光電変換特性に対応した電光変換特性、送信側における入力ビデオデータの光電変換の状態(オリジナル伝達関数特性の種類)などを認識する。
また、制御部201は、この認識により、ビデオストリームVSに含まれる伝送ビデオデータV1の種類を認識する。上述したように、伝送ビデオデータV1は、第1の伝送ビデオデータ、第2の伝送ビデオデータおよび第3の伝送ビデオデータのうちのいずれである。ここで、第1の伝送ビデオデータは、上述したように、SDRビデオデータVsに対してSDR光電変換が施されて得られたSDR伝送ビデオデータ(SDR光電変換特性を持たせた伝送ビデオデータ)である。
また、第2の伝送ビデオデータは、HDRビデオデータVhに対してHDR光電変換が施されて得られたHDR伝送ビデオデータ(HDR光電変換特性を持たせた伝送ビデオデータ)である。また、第3の伝送ビデオデータは、SDRビデオデータVsに対してSDR光電変換が施されて得られたSDR伝送ビデオデータにさらにダイナミックレンジ変換が行われて得られたHDR伝送ビデオデータ(HDR光電変換特性を持たせた伝送ビデオデータ)である。
伝送ビデオデータV1が第1の伝送ビデオデータである場合には、SDRのストリームを示し、また、送信側における入力ビデオデータの光電変換の状態を示す情報(以下、適宜「オリジナル電光変換情報」という)および伝送ビデオデータV1が持つ光電変換特性に対応した電光変換特性(以下、適宜、「現状電光変換情報」という)が同一のSDR電光変換特性を示すことから、制御部201は、伝送ビデオデータV1は第1の伝送ビデオデータであると認識する。
また、伝送ビデオデータV1が第2の伝送ビデオデータである場合には、HDRのストリームを示し、また、オリジナル電光変換情報および現状電光変換情報が同一のHDR電光変換特性を示すことから、制御部201は、伝送ビデオデータV1は第2の伝送ビデオデータであると認識する。また、伝送ビデオデータV1が第3の伝送ビデオデータである場合には、HDRのストリームを示し、また、オリジナル電光変換情報はSDR電光変換特性を示すが、現状電光変換情報はHDR電光変換特性を示すことから、制御部201は、伝送ビデオデータV1は第3の伝送ビデオデータであると認識する。
ビデオデコーダ204は、コンテナデコーダ203で抽出されるビデオストリームVSに対してデコード処理を施して、伝送ビデオデータV1を得る。また、ビデオデコーダ204は、ビデオストリームVSから各アクセスユニットに挿入されているパラメータセットやSEIメッセージなどの情報を抽出し、制御部201に送る。
この情報には、アクセスユニットのSPS NALユニットのVUIの領域に挿入されている、SDRのストリームであるかHDRのストリームであるかを示す情報、伝送ビデオデータV1が持つ光電変換特性に対応した電光変換特性を示す情報などのメタ情報も含まれる。また、この情報には、入力ビデオデータの光電変換の状態(オリジナル伝達関数特性の種類)を示す情報、ダイナミックレンジ変換の変換情報などのメタ情報を持つダイナミックレンジ・コンバージョンSEIメッセージ(図7参照)も含まれる。
制御部201は、このデスクリプタの記述に基づいて、SDRのストリームであるかHDRのストリームであるか、ビデオストリームVSに含まれる伝送ビデオデータV1が持つ光電変換特性に対応した電光変換特性、送信側における入力ビデオデータの光電変換の状態(オリジナル伝達関数特性の種類)などを認識する。また、制御部201は、この認識により、ビデオストリームVSに含まれる伝送ビデオデータV1の種類を認識する。
制御部201は、上述したように、ダイナミックレンジ・コンバージョン・デスクリプタの記述情報からも同様の認識を行う。しかし、デスクリプタのようなコンテナレベルの識別情報は、ビデオのフレーム単位の動的な変化に追従できない。ビデオストリームVSのアクセスユニットのSPS NALユニットのVUIの領域およびSEIメッセージから得られる情報に基づいて認識することで、フレーム単位の動的な変化に追従できる。
YCbCr/RGB変換部205は、ビデオデコーダ204で得られた伝送ビデオデータV1を、YCbCr(輝度・色差)ドメインからRGBドメインに変換する。なお、これらの色空間のドメインは、RGBドメインに限定されるものではなく、また、輝度・色差ドメインはYCbCrに限定されるわけではない。切換スイッチ206は、制御部201の制御のもと、RGBドメインに変換された伝送ビデオデータV1を、HDR/SDR変換部207、あるいはSDR/HDR変換部209に送る。
この場合、表示モニタ(図示せず)がSDR対応、つまり表示モニタの表示性能がSDRであるとき、切換スイッチ206は、伝送ビデオデータV1をHDR/SDR変換部207に送る。一方、表示モニタがHDR対応、つまり表示モニタの表示性能がHDRであるとき、切換スイッチ206は、伝送ビデオデータV1をSDR/HDR変換部209に送る。制御部201は、イナミックレンジ・コンバージョンSEIメッセージ(図7参照)から認識したダイナミックレンジの変換情報(変換テーブル、変換係数)をHDR/SDR変換部207およびSDR/HDR変換部209に与える。
HDR/SDR変換部207は、HDR伝送ビデオデータにダイナミックレンジ変換を施してSDR伝送ビデオデータを得る。このHDR/SDR変換部207は、伝送ビデオデータV1がHDR伝送ビデオデータである第2の伝送ビデオデータあるいは第3の伝送ビデオデータである場合に機能し、伝送ビデオデータV1がSDR伝送ビデオデータである第1の伝送ビデオデータである場合には、入力をそのまま出力とする。
図13を参照して、伝送ビデオデータV1がHDR伝送ビデオデータ(第3の伝送ビデオデータ)である場合におけるダイナミックレンジ変換の詳細を説明する。縦軸は出力輝度レベルを示し、図3の横軸に対応する。また、横軸は伝送符号値を示し、図3の縦軸に対応する。実線aは、SDR電光変換特性を示すSDR EOTFカーブである。このSDR EOTFカーブは、図3に実線aで示すSDR OETFカーブに対応している。実線bは、HDR電光変換特性を示すHDR EOTFカーブである。このHDR EOTFカーブは、図3に実線bで示すHDR OETFカーブに対応している。なお、図14は、分岐レベルBが0である場合の例を示しており、図4の例に対応した例である。
HDR/SDR変換部207におけるダイナミックレンジ変換では、図2のダイナミックレンジ変換部105とは逆の変換が行われる。すなわち、このダイナミックレンジ変換では、HDR伝送ビデオデータのうち、分岐レベルBから基準レベルGまでが、SDR光電変換特性による変換データの値と一致するように変換される。この場合、基準レベルGはSDR最大レベルである相対最大レベルMと一致するようにされる。なお、分岐レベルB未満の入力データは、そのまま出力データとされる。
ここで、変換情報は、例えば、上述したように制御部201から変換テーブルあるいは変換係数で与えられる。変換テーブルで与えられる場合、HDR/SDR変換部207は、この変換テーブルを参照して変換を行う。一方、変換係数で与えられる場合、HDR/SDR変換部207は、この変換係数を用いた演算により変換を行う。例えば、変換係数をCとするとき、分岐レベルBから基準レベルGまでの入力データに関して、以下の(2)式により、変換を行う。
出力データ=分岐レベルB+(入力データ-分岐レベルB)*1/C ・・・(2)
出力データ=分岐レベルB+(入力データ-分岐レベルB)*1/C ・・・(2)
次に、図15を参照して、伝送ビデオデータV1がHDR伝送ビデオデータ(第2の伝送ビデオデータ)である場合におけるダイナミックレンジ変換の詳細を説明する。この場合、HDR/SDR変換部207では、HDR EOTFカーブへの入力レベルが、SDR EOTFカーブへの入力レベルに変換される。この図15において、図13と対応する部分には同一符号を付して示している。なお、P1´は、基準レベルGより低い所定のレベルHに対応した出力輝度レベルを示している。
この場合、HDR/SDR変換部207におけるダイナミックレンジ変換では、基準レベルGより低い所定のレベルHまでの入力データに関しては、上述の伝送ビデオデータV1がHDR伝送ビデオデータ(第3の伝送ビデオデータ)である場合と同様の変換が行われる。そして、レベルHからレベルMまでの入力データに関しては、一点鎖線で示すトーンマッピング特性TMに基づいてレベル変換が行われて出力データが得られる。この場合、例えば、レベルHはレベルH´に変換され、基準レベルGはレベルG´に変換され、レベルMはそのままレベルMとされる。
このようにレベルHからレベルMまでの入力データに関してトーンマッピング特性TMに基づいたレベル変換がなされることで、基準レベルGから相対最大レベルMまでのレベル飽和による画質劣化の低減が可能となる。
SDR電光変換部209は、HDR/SDR変換部207から出力されたSDR伝送ビデオデータに、SDR電光変換特性を適用して、SDR画像を表示するための表示用ビデオデータVsdを得る。
SDR/HDR変換部209は、SDR伝送ビデオデータにダイナミックレンジ変換を施してHDR伝送ビデオデータを得る。このSDR/HDR変換部209は、伝送ビデオデータV1がSDR伝送ビデオデータである第1の伝送ビデオデータである場合に機能し、伝送ビデオデータV1がHDR伝送ビデオデータである第2の伝送ビデオデータあるいは第3の伝送ビデオデータである場合には、入力をそのまま出力とする。
図16を参照して、伝送ビデオデータV1がSDR伝送ビデオデータ(第1の伝送ビデオデータ)である場合におけるダイナミックレンジ変換の詳細を説明する。この場合、SDR/HDR変換部209では、SDR EOTFカーブへの入力レベルが、HDR EOTFカーブへの入力レベルに変換される。この図16において、図13と対応する部分には同一符号を付して示している。
SDR/HDR変換部209におけるダイナミックレンジ変換では、図2のダイナミックレンジ変換部105と同様の変換が行われる。すなわち、このダイナミックレンジ変換では、SDR伝送ビデオデータのうち、分岐レベルBからSDR最大レベルである相対最大レベルMまでが、HDR光電変換特性による変換データの値と一致するように変換される。この場合、相対最大レベルMは基準レベルGと一致するようにされる。なお、分岐レベルB未満の入力データは、そのまま出力データとされる。
HDR光電変換部210は、SDR/HDR変換部209から出力されたHDR伝送ビデオデータに、HDR電光変換特性を適用して、HDR画像を表示するための表示用ビデオデータVhdを得る。
図12に示すサービス受信機200の動作を簡単に説明する。受信部202では、サービス送信システム100から放送波あるいはネットのパケットに載せて送られてくるトランスポートストリームTSが受信される。このトランスポートストリームTSは、コンテナデコーダ203に供給される。コンテナデコーダ203では、トランスポートストリームTSからビデオストリームVSが抽出される。
また、コンテナデコーダ203では、コンテナとしてのトランスポートストリームTSに挿入されている種々の情報が抽出され、制御部201に送られる。この情報には、上述した、ダイナミックレンジ・コンバージョン・デスクリプタ(図9参照)も含まれる。制御部201では、この情報に基づいて、SDRのストリームであるかHDRのストリームであるか、ビデオストリームVSに含まれる伝送ビデオデータV1が持つ光電変換特性に対応した電光変換特性、送信側における入力ビデオデータの光電変換の状態(オリジナル伝達関数特性の種類)などが認識され、さらに伝送ビデオデータV1の種類も認識される。
コンテナデコーダ203で抽出されたビデオストリームVSは、ビデオデコーダ204に供給される。ビデオデコーダ204では、ビデオストリームVSに対してデコード処理が施され、伝送ビデオデータV1が得られる。この伝送ビデオデータV1は、SDR伝送ビデオデータ(SDR光電変換特性を持たせた伝送ビデオデータ)である第1の伝送ビデオデータであるか、あるいいは、HDR伝送ビデオデータ(HDR光電変換特性を持たせた伝送ビデオデータ)である第2の伝送ビデオデータまたは第3の伝送ビデオデータである。
また、ビデオデコーダ204では、ビデオストリームVSを構成する各アクセスユニットに挿入されているパラメータセットやSEIメッセージが抽出され、制御部201に送られる。この情報には、アクセスユニットのSPS NALユニットのVUIの領域やダイナミックレンジ・コンバージョンSEIメッセージ(図7参照)の情報も含まれる。制御部201では、この情報に基づいて、SDRのストリームであるかHDRのストリームであるか、ビデオストリームVSに含まれる伝送ビデオデータV1が持つ光電変換特性に対応した電光変換特性、送信側における入力ビデオデータの光電変換の状態(オリジナル伝達関数特性の種類)などが認識され、さらに伝送ビデオデータV1の種類も認識される。
ビデオデコーダ204で得られた伝送ビデオデータV1は、YCbCr/RGB変換部205でCbCr(輝度・色差)ドメインからRGBドメインに変換される。RGBドメインに変換された伝送ビデオデータV1は、表示モニタがSDR対応であるとき、切換スイッチ206を通じて、HDR/SDR変換部207に供給される。
HDR/SDR変換部207では、伝送ビデオデータV1がHDR伝送ビデオデータである第2の伝送ビデオデータあるいは第3の伝送ビデオデータである場合は、このHDR伝送ビデオデータにダイナミックレンジ変換が施されてSDR伝送ビデオデータが得られる(図13~図15参照)。なお、伝送ビデオデータV1がSDR伝送ビデオデータである第1の伝送ビデオデータである場合には、入力がそのまま出力とされる。
HDR/SDR変換部207で得られたSDR伝送ビデオデータは、SDR電光変換部208に供給される。このSDR電光変換部208では、SDR伝送ビデオデータに、SDR電光変換特性が適用されて、SDR画像を表示するための表示用ビデオデータVsdが得られる。この表示用ビデオデータVsdは、表示モニタの表示能力に応じて適宜表示マッピング処理が施された後に、表示モニタに供給され、SDR画像の表示が行われる。
また、YCbCr/RGB変換部205でRGBドメインに変換された伝送ビデオデータV1は、表示モニタがHDR対応であるとき、切換スイッチ206を通じて、SDR/HDR変換部209に供給される。
SDR/HDR変換部209では、伝送ビデオデータV1がSDR伝送ビデオデータである第1の伝送ビデオデータである場合は、このSDR伝送ビデオデータにダイナミックレンジ変換が施されてHDR伝送ビデオデータが得られる(図16参照)。なお、伝送ビデオデータV1がHDR伝送ビデオデータである第2の伝送ビデオデータあるいは第3の伝送ビデオデータである場合には、入力がそのまま出力とされる。
SDR/HDR変換部209で得られたHDR伝送ビデオデータは、HDR電光変換部210に供給される。このHDR電光変換部210では、HDR伝送ビデオデータに、HDR電光変換特性が適用されて、HDR画像を表示するための表示用ビデオデータVhdが得られる。この表示用ビデオデータVhdは、表示モニタの表示能力に応じて適宜表示マッピング処理が施された後に、表示モニタに供給され、HDR画像の表示が行われる。
上述したように、図1に示す送受信システム10においては、入力ビデオデータを処理して得られた所定の光電変換特性を持つ伝送ビデオデータを送信する際に、その入力ビデオデータの光電変換の状態を示す情報も送信するものである。そのため、受信側において当該伝送ビデオデータから表示用画像データを得る処理を適切に行うことができる。
<2.変形例>
なお、上述実施の形態においては、コンテナがトランスポートストリーム(MPEG-2 TS)である例を示した。しかし、本技術は、コンテナがトランスポートストリームと限定されるものではなく、他のパケット、例えばISOBMFF(ISO Base Media File Format)、あるいはMMT(Mpeg Media Transport)などの場合でも、ビデオのレイヤは同一の方法で実現できる。
なお、上述実施の形態においては、コンテナがトランスポートストリーム(MPEG-2 TS)である例を示した。しかし、本技術は、コンテナがトランスポートストリームと限定されるものではなく、他のパケット、例えばISOBMFF(ISO Base Media File Format)、あるいはMMT(Mpeg Media Transport)などの場合でも、ビデオのレイヤは同一の方法で実現できる。
図17は、MMT構造を示している。MMTストリームには、ビデオ、オーディオ等の各アセットのMMTパケットが存在する。図示の例では、ID1で識別されるビデオのアセットのMMTパケットが存在する。クセスユニットのSPSのVUIの領域に、SDRのストリームであるかHDRのストリームであるかを示す情報、伝送ビデオデータV1が持つ光電変換特性に対応した電光変換特性を示す情報などのメタ情報が挿入される。また、アクセスユニットに、入力ビデオデータの光電変換の状態(オリジナル伝達関数特性の種類)を示す情報、ダイナミックレンジ変換の変換情報などのメタ情報を持つダイナミックレンジ・コンバージョンSEIメッセージが挿入される。
また、MMTストリームには、PA(Packet Access)メッセージパケットなどのメッセージパケットが存在する。PAメッセージパケットには、MMT・パケット・テーブル(MMT Package Table)などのテーブルが含まれている。MPテーブルには、アセット毎の情報が含まれている。ここでは、ビデオのアセットに関連して、SDRのストリームであるかHDRのストリームであるかを示す情報、伝送ビデオデータV1が持つ光電変換特性に対応した電光変換特性を示す情報、入力ビデオデータの光電変換の状態を示す情報などのメタ情報を持つダイナミックレンジ・コンバージョン・デスクリプタが挿入される。
また、EPG番組表示向けにMH・イベント・インフォメーション・テーブル(MH Event Information Table)が含まれる場合に、番組イベントの識別子(id)と共にデスクリプタが配置される。このデスクリプタとしてダイナミックレンジ・コンバージョン・デスクリプタを配置して、HDR対応の番組であることを示すことも可能である。
また、上述実施の形態においては、サービス送信システム100およびサービス受信機200により構成される送受信システム10を示したが、本技術を適用し得る送受信システムの構成は、これに限定されるものではない。例えば、サービス受信機200が、例えば、(HDMI(High-Definition Multimedia Interface)などのデジタルインタフェースで接続されたセットトップボックス(STB)およびモニタからなる構成であってもよい。なお、「HDMI」は、登録商標である。
また、基準レベルや分岐レベルの情報はその値が光電変換特性を参照することで一意に求まる場合には、レベル値そのものを送らずとも、光電変換特性の識別情報によって代用させることができ、そのような情報供給においても本実施例の一つとして扱いうるものである。
また、本技術は、以下のような構成を取ることもできる。
(1)入力ビデオデータを処理して所定の光電変換特性を持たせた伝送ビデオデータを得る光電変換処理部と、
上記伝送ビデオデータにエンコード処理を施してビデオストリームを得るエンコード部と、
上記ビデオストリームを含む所定フォーマットのコンテナを送信する送信部と、
上記ビデオストリームおよび/または上記コンテナに、上記入力ビデオデータの光電変換の状態を示す情報を挿入する情報挿入部を備える
送信装置。
(2)上記光電変換処理部は、
上記入力ビデオデータとしての通常ダイナミックレンジビデオデータに通常ダイナミックレンジ光電変換特性による光電変換を行って通常ダイナミックレンジ光電変換特性を持たせた第1の伝送ビデオデータを得るか、
上記入力ビデオデータとしてのハイダイナミックレンジビデオデータにハイダイナミックレンジ光電変換特性による光電変換を行ってハイダイナミックレンジ光電変換特性を持たせた第2の伝送ビデオデータを得るか、
通常ダイナミックレンジビデオデータに通常ダイナミックレンジ光電変換特性による光電変換が行われて得られた上記入力ビデオデータに、通常ダイナミックレンジ光電変換特性による変換データの値をハイダイナミックレンジ光電変換特性による変換データの値に変換するための変換情報に基づいてダイナミックレンジ変換を行ってハイダイナミックレンジ光電変換特性を持たせた第3の伝送ビデオデータを得る
前記(1)に記載の送信装置。
(3)上記情報挿入部は、
上記光電変換処理部が上記第3の伝送ビデオデータを得るとき、
上記ビデオストリームおよび/または上記コンテナに、上記変換情報をさらに挿入する
前記(2)に記載の送信装置。
(4)上記変換情報は、変換係数である
前記(2)または(3)に記載の送信装置。
(5)上記変換情報は、変換テーブルである
前記(2)または(3)に記載の送信装置。
(6)上記情報挿入部は、
上記ビデオストリームおよび/または上記コンテナに、上記所定の光電変換特性に対応した電光変換特性を示す情報をさらに挿入する
前記(1)から(5)のいずれかに記載の送信装置。
(7)上記入力ビデオデータの光電変換の状態を示す情報は、
上記入力ビデオデータに光電変換が行われているときは、該光電変換の変換特性に対応した電光変換特性を示す情報とされ、
上記入力ビデオデータに光電変換が行われていないときは、上記所定の光電変換特性に対応した電光変換特性を示す情報とされる
前記(1)から(6)のいずれかに記載の送信装置。
(8)上記情報挿入部は、
上記ビデオストリームおよび/または上記コンテナに、基準輝度レベルである基準レベル、あるいは通常ダイナミックレンジ光電変換特性とハイダイナミックレンジ光電変換特性のカーブが同一軌道から分岐して別れる輝度レベルである分岐レベルをさらに挿入する
前記(1)から(7)のいずれかに記載の送信装置。
(9)入力ビデオデータを処理して所定の光電変換特性を持たせた伝送ビデオデータを得る光電変換処理ステップと、
上記伝送ビデオデータにエンコード処理を施してビデオストリームを得るエンコードステップと、
送信部により、上記ビデオストリームを含む所定フォーマットのコンテナを送信する送信ステップと、
上記ビデオストリームおよび/または上記コンテナに、上記入力ビデオデータの光電変換の状態を示す情報を挿入する情報挿入ステップを有する
送信方法。
(10)伝送ビデオデータがエンコードされて得られたビデオストリームを含む所定フォーマットのコンテナを受信する受信部を備え、
上記伝送ビデオデータは、送信側で入力ビデオデータが処理されて得られた所定の光電変換特性を持つ伝送ビデオデータであり、
上記ビデオストリームおよび/または上記コンテナに、上記入力ビデオデータの光電変換の状態を示す情報が挿入されており、
上記ビデオストリームにデコード処理を施して上記伝送ビデオデータを得るデコード部と、
上記ビデオストリームおよび/または上記コンテナから、上記入力ビデオデータの光電変換の状態を示す情報を抽出する情報抽出部と、
上記デコード部で得られた伝送ビデオデータに、上記情報抽出部で抽出された情報、上記所定の光電変換特性の情報および表示性能に基づいた電光変換処理を施して表示用画像データを得る処理部をさらに備える
受信装置。
(11)上記伝送ビデオデータは、
上記入力ビデオデータとしての通常ダイナミックレンジビデオデータに通常ダイナミックレンジ光電変換特性による光電変換が行われて得られた通常ダイナミックレンジ光電変換特性を持つ第1の伝送ビデオデータであるか、
上記入力ビデオデータとしてのハイダイナミックレンジビデオデータにハイダイナミックレンジ光電変換特性による光電変換が行われて得られたハイダイナミックレンジ光電変換特性を持つ第2の伝送ビデオデータであるか、
通常ダイナミックレンジビデオデータに通常ダイナミックレンジ光電変換特性による光電変換が行われて得られた上記入力ビデオデータに、通常ダイナミックレンジ光電変換特性による変換データの値をハイダイナミックレンジ光電変換特性による変換データの値に変換するための変換情報に基づいてダイナミックレンジ変換が行われて得られたハイダイナミックレンジ光電変換特性を持つ第3の伝送ビデオデータである
前記(10)に記載の受信装置。
(12)上記処理部は、表示性能がハイダイナミックレンジであるとき、
上記伝送ビデオデータが上記第1の伝送ビデオデータである場合には、上記伝送ビデオデータにダイナミックレンジ変換を行った後にハイダイナミックレンジ電光変換特性による電光変換を施して上記表示用画像データを得、
上記伝送ビデオデータが上記第2の伝送ビデオデータあるいは上記第3の伝送ビデオデータである場合には、上記伝送ビデオデータにハイダイナミックレンジ電光変換特性による電光変換を施して上記表示用画像データを得る
前記(11)に記載の受信装置。
(13)上記処理部は、表示性能が通常ダイナミックレンジであるとき、
上記伝送ビデオデータが上記第1の伝送ビデオデータである場合には、上記伝送ビデオデータに通常ダイナミックレンジ電光変換特性による電光変換を施して上記表示用画像データを得、
上記伝送ビデオデータが上記第2の伝送ビデオデータあるいは上記第3の伝送ビデオデータである場合には、上記伝送ビデオデータにダイナミックレンジ変換を行った後に通常ダイナミックレンジ電光変換特性による電光変換を施して上記表示用画像データを得る
前記(11)に記載の受信装置。
(14)受信部により、伝送ビデオデータがエンコードされて得られたビデオストリームを含む所定フォーマットのコンテナを受信する受信ステップを有し、
上記伝送ビデオデータは、送信側で入力ビデオデータが処理されて得られた所定の光電変換特性を持つ伝送ビデオデータであり、
上記ビデオストリームおよび/または上記コンテナに、上記入力ビデオデータの光電変換の状態を示す情報が挿入されており、
上記ビデオストリームにデコード処理を施して上記伝送ビデオデータを得るデコードステップと、
上記ビデオストリームおよび/または上記コンテナから、上記入力ビデオデータの光電変換の状態を示す情報を抽出する情報抽出ステップと、
上記デコードステップで得られた伝送ビデオデータに、上記情報抽出ステップで抽出された情報、上記所定の光電変換特性の情報および表示性能に基づいた電光変換処理を施して表示用画像データを得る処理ステップをさらに有する
受信方法。
(1)入力ビデオデータを処理して所定の光電変換特性を持たせた伝送ビデオデータを得る光電変換処理部と、
上記伝送ビデオデータにエンコード処理を施してビデオストリームを得るエンコード部と、
上記ビデオストリームを含む所定フォーマットのコンテナを送信する送信部と、
上記ビデオストリームおよび/または上記コンテナに、上記入力ビデオデータの光電変換の状態を示す情報を挿入する情報挿入部を備える
送信装置。
(2)上記光電変換処理部は、
上記入力ビデオデータとしての通常ダイナミックレンジビデオデータに通常ダイナミックレンジ光電変換特性による光電変換を行って通常ダイナミックレンジ光電変換特性を持たせた第1の伝送ビデオデータを得るか、
上記入力ビデオデータとしてのハイダイナミックレンジビデオデータにハイダイナミックレンジ光電変換特性による光電変換を行ってハイダイナミックレンジ光電変換特性を持たせた第2の伝送ビデオデータを得るか、
通常ダイナミックレンジビデオデータに通常ダイナミックレンジ光電変換特性による光電変換が行われて得られた上記入力ビデオデータに、通常ダイナミックレンジ光電変換特性による変換データの値をハイダイナミックレンジ光電変換特性による変換データの値に変換するための変換情報に基づいてダイナミックレンジ変換を行ってハイダイナミックレンジ光電変換特性を持たせた第3の伝送ビデオデータを得る
前記(1)に記載の送信装置。
(3)上記情報挿入部は、
上記光電変換処理部が上記第3の伝送ビデオデータを得るとき、
上記ビデオストリームおよび/または上記コンテナに、上記変換情報をさらに挿入する
前記(2)に記載の送信装置。
(4)上記変換情報は、変換係数である
前記(2)または(3)に記載の送信装置。
(5)上記変換情報は、変換テーブルである
前記(2)または(3)に記載の送信装置。
(6)上記情報挿入部は、
上記ビデオストリームおよび/または上記コンテナに、上記所定の光電変換特性に対応した電光変換特性を示す情報をさらに挿入する
前記(1)から(5)のいずれかに記載の送信装置。
(7)上記入力ビデオデータの光電変換の状態を示す情報は、
上記入力ビデオデータに光電変換が行われているときは、該光電変換の変換特性に対応した電光変換特性を示す情報とされ、
上記入力ビデオデータに光電変換が行われていないときは、上記所定の光電変換特性に対応した電光変換特性を示す情報とされる
前記(1)から(6)のいずれかに記載の送信装置。
(8)上記情報挿入部は、
上記ビデオストリームおよび/または上記コンテナに、基準輝度レベルである基準レベル、あるいは通常ダイナミックレンジ光電変換特性とハイダイナミックレンジ光電変換特性のカーブが同一軌道から分岐して別れる輝度レベルである分岐レベルをさらに挿入する
前記(1)から(7)のいずれかに記載の送信装置。
(9)入力ビデオデータを処理して所定の光電変換特性を持たせた伝送ビデオデータを得る光電変換処理ステップと、
上記伝送ビデオデータにエンコード処理を施してビデオストリームを得るエンコードステップと、
送信部により、上記ビデオストリームを含む所定フォーマットのコンテナを送信する送信ステップと、
上記ビデオストリームおよび/または上記コンテナに、上記入力ビデオデータの光電変換の状態を示す情報を挿入する情報挿入ステップを有する
送信方法。
(10)伝送ビデオデータがエンコードされて得られたビデオストリームを含む所定フォーマットのコンテナを受信する受信部を備え、
上記伝送ビデオデータは、送信側で入力ビデオデータが処理されて得られた所定の光電変換特性を持つ伝送ビデオデータであり、
上記ビデオストリームおよび/または上記コンテナに、上記入力ビデオデータの光電変換の状態を示す情報が挿入されており、
上記ビデオストリームにデコード処理を施して上記伝送ビデオデータを得るデコード部と、
上記ビデオストリームおよび/または上記コンテナから、上記入力ビデオデータの光電変換の状態を示す情報を抽出する情報抽出部と、
上記デコード部で得られた伝送ビデオデータに、上記情報抽出部で抽出された情報、上記所定の光電変換特性の情報および表示性能に基づいた電光変換処理を施して表示用画像データを得る処理部をさらに備える
受信装置。
(11)上記伝送ビデオデータは、
上記入力ビデオデータとしての通常ダイナミックレンジビデオデータに通常ダイナミックレンジ光電変換特性による光電変換が行われて得られた通常ダイナミックレンジ光電変換特性を持つ第1の伝送ビデオデータであるか、
上記入力ビデオデータとしてのハイダイナミックレンジビデオデータにハイダイナミックレンジ光電変換特性による光電変換が行われて得られたハイダイナミックレンジ光電変換特性を持つ第2の伝送ビデオデータであるか、
通常ダイナミックレンジビデオデータに通常ダイナミックレンジ光電変換特性による光電変換が行われて得られた上記入力ビデオデータに、通常ダイナミックレンジ光電変換特性による変換データの値をハイダイナミックレンジ光電変換特性による変換データの値に変換するための変換情報に基づいてダイナミックレンジ変換が行われて得られたハイダイナミックレンジ光電変換特性を持つ第3の伝送ビデオデータである
前記(10)に記載の受信装置。
(12)上記処理部は、表示性能がハイダイナミックレンジであるとき、
上記伝送ビデオデータが上記第1の伝送ビデオデータである場合には、上記伝送ビデオデータにダイナミックレンジ変換を行った後にハイダイナミックレンジ電光変換特性による電光変換を施して上記表示用画像データを得、
上記伝送ビデオデータが上記第2の伝送ビデオデータあるいは上記第3の伝送ビデオデータである場合には、上記伝送ビデオデータにハイダイナミックレンジ電光変換特性による電光変換を施して上記表示用画像データを得る
前記(11)に記載の受信装置。
(13)上記処理部は、表示性能が通常ダイナミックレンジであるとき、
上記伝送ビデオデータが上記第1の伝送ビデオデータである場合には、上記伝送ビデオデータに通常ダイナミックレンジ電光変換特性による電光変換を施して上記表示用画像データを得、
上記伝送ビデオデータが上記第2の伝送ビデオデータあるいは上記第3の伝送ビデオデータである場合には、上記伝送ビデオデータにダイナミックレンジ変換を行った後に通常ダイナミックレンジ電光変換特性による電光変換を施して上記表示用画像データを得る
前記(11)に記載の受信装置。
(14)受信部により、伝送ビデオデータがエンコードされて得られたビデオストリームを含む所定フォーマットのコンテナを受信する受信ステップを有し、
上記伝送ビデオデータは、送信側で入力ビデオデータが処理されて得られた所定の光電変換特性を持つ伝送ビデオデータであり、
上記ビデオストリームおよび/または上記コンテナに、上記入力ビデオデータの光電変換の状態を示す情報が挿入されており、
上記ビデオストリームにデコード処理を施して上記伝送ビデオデータを得るデコードステップと、
上記ビデオストリームおよび/または上記コンテナから、上記入力ビデオデータの光電変換の状態を示す情報を抽出する情報抽出ステップと、
上記デコードステップで得られた伝送ビデオデータに、上記情報抽出ステップで抽出された情報、上記所定の光電変換特性の情報および表示性能に基づいた電光変換処理を施して表示用画像データを得る処理ステップをさらに有する
受信方法。
本技術の主な特徴は、入力ビデオデータを処理して得られた所定の光電変換特性を持つ伝送ビデオデータを送信する際に、その入力ビデオデータの光電変換の状態を示す情報も送信することで、受信側において当該伝送ビデオデータから表示用画像データを得る処理を適切に行い得るようにしたことである(図11参照)。
10・・・送受信システム
100・・・サービス送信システム
101・・・制御部
103・・・HDR光電変換部
104・・・SDR光電変換部
105・・・ダイナミックレンジ変換部
106・・・切換スイッチ
107・・・RGB/YCbCr変換部
108・・・ビデオエンコーダ
109・・・コンテナエンコーダ
110・・・送信部
200・・・サービス受信機
201・・・制御部
202・・・受信部
203・・・コンテナデコーダ
204・・・ビデオデコーダ
205・・・YCbCr/RGB変換部
206・・・切換スイッチ
207・・・HDR/SDR変換部
208・・・SDR電光変換部
209・・・SDR/HDR変換部
210・・・HDR電光変換部
100・・・サービス送信システム
101・・・制御部
103・・・HDR光電変換部
104・・・SDR光電変換部
105・・・ダイナミックレンジ変換部
106・・・切換スイッチ
107・・・RGB/YCbCr変換部
108・・・ビデオエンコーダ
109・・・コンテナエンコーダ
110・・・送信部
200・・・サービス受信機
201・・・制御部
202・・・受信部
203・・・コンテナデコーダ
204・・・ビデオデコーダ
205・・・YCbCr/RGB変換部
206・・・切換スイッチ
207・・・HDR/SDR変換部
208・・・SDR電光変換部
209・・・SDR/HDR変換部
210・・・HDR電光変換部
Claims (1)
- 入力ビデオデータを処理して所定の光電変換特性を持たせた伝送ビデオデータを得る光電 変換処理ステップと、
上記伝送ビデオデータにエンコード処理を施してビデオストリームを得るエンコードステ ップと、
送信部により、上記ビデオストリームを含む所定フォーマットのコンテナを送信する送信ステップと、
上記ビデオストリームのVUIの領域に、上記入力ビデオデータの光電変換の状態を示す情報を挿入し、上記コンテナはイベント情報テーブルを含み、該イベント情報テーブルに、上記入力ビデオデータの光電変換特性に対応した電光変換特性を示す情報を挿入する情報挿入ステップを有する
送信方法。
Applications Claiming Priority (3)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2015044108 | 2015-03-05 | ||
| JP2015044108 | 2015-03-05 | ||
| JP2022109665A JP7396401B2 (ja) | 2015-03-05 | 2022-07-07 | 送信装置、送信方法、受信装置および受信方法 |
Related Parent Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2022109665A Division JP7396401B2 (ja) | 2015-03-05 | 2022-07-07 | 送信装置、送信方法、受信装置および受信方法 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2023087092A JP2023087092A (ja) | 2023-06-22 |
| JP7548367B2 true JP7548367B2 (ja) | 2024-09-10 |
Family
ID=56849366
Family Applications (5)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2017503705A Active JP6702300B2 (ja) | 2015-03-05 | 2016-03-03 | 送信装置、送信方法、受信装置および受信方法 |
| JP2020073468A Active JP6897843B2 (ja) | 2015-03-05 | 2020-04-16 | 送信装置、送信方法、受信装置および受信方法 |
| JP2021097629A Active JP7103475B2 (ja) | 2015-03-05 | 2021-06-10 | 送信装置、送信方法、受信装置および受信方法 |
| JP2022109665A Active JP7396401B2 (ja) | 2015-03-05 | 2022-07-07 | 送信装置、送信方法、受信装置および受信方法 |
| JP2023076536A Active JP7548367B2 (ja) | 2015-03-05 | 2023-05-08 | 送信方法 |
Family Applications Before (4)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2017503705A Active JP6702300B2 (ja) | 2015-03-05 | 2016-03-03 | 送信装置、送信方法、受信装置および受信方法 |
| JP2020073468A Active JP6897843B2 (ja) | 2015-03-05 | 2020-04-16 | 送信装置、送信方法、受信装置および受信方法 |
| JP2021097629A Active JP7103475B2 (ja) | 2015-03-05 | 2021-06-10 | 送信装置、送信方法、受信装置および受信方法 |
| JP2022109665A Active JP7396401B2 (ja) | 2015-03-05 | 2022-07-07 | 送信装置、送信方法、受信装置および受信方法 |
Country Status (8)
| Country | Link |
|---|---|
| US (3) | US10027856B2 (ja) |
| EP (1) | EP3267685B1 (ja) |
| JP (5) | JP6702300B2 (ja) |
| KR (1) | KR102489757B1 (ja) |
| CA (1) | CA2977204C (ja) |
| MX (1) | MX371493B (ja) |
| PH (1) | PH12017501536B1 (ja) |
| WO (1) | WO2016140293A1 (ja) |
Families Citing this family (13)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP3191687B2 (ja) | 1996-07-18 | 2001-07-23 | 日本鋼管株式会社 | 亜鉛系メッキ鋼板 |
| JP3191688B2 (ja) | 1996-07-18 | 2001-07-23 | 日本鋼管株式会社 | 亜鉛系メッキ鋼板の製造方法 |
| EP3261352B1 (en) * | 2015-02-17 | 2020-09-09 | Sony Corporation | Transmission device, transmission method, reception device, and reception method |
| JP6702300B2 (ja) * | 2015-03-05 | 2020-06-03 | ソニー株式会社 | 送信装置、送信方法、受信装置および受信方法 |
| EP3873098B1 (en) * | 2015-03-24 | 2024-01-10 | Sony Group Corporation | Transmission device, transmission method, reception device, and reception method |
| TWI764870B (zh) * | 2015-07-28 | 2022-05-21 | 法商內數位麥德遜專利控股有限公司 | 視訊訊號處理裝置及方法 |
| WO2017051808A1 (ja) | 2015-09-25 | 2017-03-30 | 日立マクセル株式会社 | 放送受信装置 |
| CN113660525A (zh) | 2015-09-25 | 2021-11-16 | 麦克赛尔株式会社 | 接收装置 |
| EP3244616A1 (en) * | 2016-05-13 | 2017-11-15 | Thomson Licensing | A method for encoding an input video comprising a luma component and two chroma components, the method comprising reshaping of said input video based on reshaping functions |
| US10972767B2 (en) * | 2017-11-01 | 2021-04-06 | Realtek Semiconductor Corp. | Device and method of handling multiple formats of a video sequence |
| JP7344654B2 (ja) * | 2019-03-07 | 2023-09-14 | キヤノン株式会社 | 撮像装置及び再生装置及びそれらの制御方法及びプログラム |
| US11412174B2 (en) * | 2020-09-22 | 2022-08-09 | Microsoft Technology Licensing, Llc | Efficient electro-optical transfer function (EOTF) curve for standard dynamic range (SDR) content |
| JP7825385B2 (ja) * | 2021-06-11 | 2026-03-06 | マクセル株式会社 | 表示方法 |
Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20110194618A1 (en) | 2009-03-13 | 2011-08-11 | Dolby Laboratories Licensing Corporation | Compatible compression of high dynamic range, visual dynamic range, and wide color gamut video |
| WO2014178286A1 (ja) | 2013-04-30 | 2014-11-06 | ソニー株式会社 | 送信装置、送信方法、受信装置および受信方法 |
| JP2014531821A (ja) | 2011-09-27 | 2014-11-27 | コーニンクレッカ フィリップス エヌ ヴェ | 画像のダイナミックレンジ変換のための装置及び方法 |
| JP2014534719A (ja) | 2011-10-20 | 2014-12-18 | ドルビー ラボラトリーズ ライセンシング コーポレイション | ビデオ等化のための方法およびシステム |
| WO2015008987A1 (ko) | 2013-07-14 | 2015-01-22 | 엘지전자 주식회사 | 디지털 방송 시스템에서 고품질의 색감 표현을 위한 초고화질 방송 신호 송수신 방법 및 장치 |
| JP2015126469A (ja) | 2013-12-27 | 2015-07-06 | 株式会社東芝 | 画像処理装置、画像処理方法及び画像処理プログラム |
Family Cites Families (26)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US5434426A (en) * | 1992-09-10 | 1995-07-18 | Kabushiki Kaisha Toshiba | Optical interconnection device |
| KR100193387B1 (ko) * | 1994-10-11 | 1999-06-15 | 윤종용 | 광전 변환된 영상신호를 위한 디지탈 신호변환방법 및 그 장치 |
| US6961524B1 (en) * | 2000-09-22 | 2005-11-01 | Nortel Networks Limited | WDM channel equalization in add/drop-capable optical networks |
| JP4292891B2 (ja) * | 2003-06-26 | 2009-07-08 | ソニー株式会社 | 撮像装置、画像記録装置および画像記録方法 |
| EP2911390B1 (en) | 2005-08-26 | 2019-01-16 | Panasonic Intellectual Property Management Co., Ltd. | Multiplexing method and recording medium |
| JP5018770B2 (ja) * | 2006-03-20 | 2012-09-05 | ソニー株式会社 | 画像信号処理装置及び画像信号処理方法 |
| JP4806329B2 (ja) * | 2006-10-23 | 2011-11-02 | 三洋電機株式会社 | 撮像装置及び撮像方法 |
| US8144214B2 (en) * | 2007-04-18 | 2012-03-27 | Panasonic Corporation | Imaging apparatus, imaging method, integrated circuit, and storage medium |
| JP4998287B2 (ja) * | 2008-01-25 | 2012-08-15 | ソニー株式会社 | 画像処理装置および方法、並びにプログラム |
| JP5429445B2 (ja) * | 2008-04-08 | 2014-02-26 | 富士フイルム株式会社 | 画像処理システム、画像処理方法、およびプログラム |
| ATE488117T1 (de) * | 2009-03-24 | 2010-11-15 | Alcatel Lucent | Verfahren zur datenübertragung mittels eines ummantelungseliminierungs- und - wiederherstellungsverstärkers, ummantelungseliminierungs- und - wiederherstellungsverstärker, übertragungsvorrichtung, empfangsvorrichtung und kommunikationsnetzwerk dafür |
| EP2247004B1 (en) * | 2009-04-28 | 2015-06-03 | Alcatel Lucent | A method for data transmission using a LINC amplifier, a LINC amplifier, a transmitting device, a receiving device, and a communication network therefor |
| CN102986214A (zh) | 2010-07-06 | 2013-03-20 | 皇家飞利浦电子股份有限公司 | 从低动态范围图像生成高动态范围图像 |
| TWI559779B (zh) * | 2010-08-25 | 2016-11-21 | 杜比實驗室特許公司 | 擴展影像動態範圍 |
| WO2012142285A2 (en) * | 2011-04-12 | 2012-10-18 | Dolby Laboratories Licensing Corporation | Quality assessment for images that have extended dynamic ranges or wide color gamuts |
| US9292940B2 (en) | 2011-04-28 | 2016-03-22 | Koninklijke Philips N.V. | Method and apparatus for generating an image coding signal |
| US8743791B2 (en) | 2011-09-22 | 2014-06-03 | Samsung Electronics Co., Ltd. | Apparatus and method for uplink transmission in wireless communication systems |
| US9992513B2 (en) * | 2012-12-21 | 2018-06-05 | Sony Corporation | Image processing efficient transmission or reception of encoded information |
| CN104956670B (zh) * | 2013-01-25 | 2017-09-08 | 杜比实验室特许公司 | 基于全局显示管理的光调制 |
| JP6464083B2 (ja) * | 2013-06-20 | 2019-02-06 | サターン ライセンシング エルエルシーSaturn Licensing LLC | 再生装置、再生方法 |
| JP2015008361A (ja) | 2013-06-24 | 2015-01-15 | ソニー株式会社 | 再生装置、再生方法、および記録媒体 |
| RU2670782C9 (ru) * | 2013-07-18 | 2018-11-23 | Конинклейке Филипс Н.В. | Способы и устройства для создания функций отображения кода для кодирования изображения hdr и способы и устройства для использования таких кодированных изображений |
| WO2015045916A1 (ja) * | 2013-09-27 | 2015-04-02 | ソニー株式会社 | 再生装置、再生方法、および記録媒体 |
| US9445111B2 (en) * | 2014-01-08 | 2016-09-13 | Sony Corporation | Image processing apparatus and image processing method |
| DE202015009982U1 (de) * | 2014-02-07 | 2022-08-02 | Sony Group Corporation | Übertragungsvorrichtung, Empfangsvorrichtung und Anzeigevorrichtung |
| JP6702300B2 (ja) * | 2015-03-05 | 2020-06-03 | ソニー株式会社 | 送信装置、送信方法、受信装置および受信方法 |
-
2016
- 2016-03-03 JP JP2017503705A patent/JP6702300B2/ja active Active
- 2016-03-03 CA CA2977204A patent/CA2977204C/en active Active
- 2016-03-03 KR KR1020177020311A patent/KR102489757B1/ko active Active
- 2016-03-03 MX MX2017011034A patent/MX371493B/es active IP Right Grant
- 2016-03-03 PH PH1/2017/501536A patent/PH12017501536B1/en unknown
- 2016-03-03 WO PCT/JP2016/056525 patent/WO2016140293A1/ja not_active Ceased
- 2016-03-03 EP EP16758985.2A patent/EP3267685B1/en active Active
- 2016-03-03 US US15/546,525 patent/US10027856B2/en active Active
-
2018
- 2018-06-27 US US15/929,027 patent/US10574864B2/en active Active
-
2020
- 2020-01-03 US US16/733,927 patent/US11057547B2/en active Active
- 2020-04-16 JP JP2020073468A patent/JP6897843B2/ja active Active
-
2021
- 2021-06-10 JP JP2021097629A patent/JP7103475B2/ja active Active
-
2022
- 2022-07-07 JP JP2022109665A patent/JP7396401B2/ja active Active
-
2023
- 2023-05-08 JP JP2023076536A patent/JP7548367B2/ja active Active
Patent Citations (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20110194618A1 (en) | 2009-03-13 | 2011-08-11 | Dolby Laboratories Licensing Corporation | Compatible compression of high dynamic range, visual dynamic range, and wide color gamut video |
| JP2012520619A (ja) | 2009-03-13 | 2012-09-06 | ドルビー ラボラトリーズ ライセンシング コーポレイション | 高ダイナミックレンジ、視覚ダイナミックレンジ及び広色域のビデオの階層化圧縮 |
| JP2014531821A (ja) | 2011-09-27 | 2014-11-27 | コーニンクレッカ フィリップス エヌ ヴェ | 画像のダイナミックレンジ変換のための装置及び方法 |
| JP2014534719A (ja) | 2011-10-20 | 2014-12-18 | ドルビー ラボラトリーズ ライセンシング コーポレイション | ビデオ等化のための方法およびシステム |
| WO2014178286A1 (ja) | 2013-04-30 | 2014-11-06 | ソニー株式会社 | 送信装置、送信方法、受信装置および受信方法 |
| WO2015008987A1 (ko) | 2013-07-14 | 2015-01-22 | 엘지전자 주식회사 | 디지털 방송 시스템에서 고품질의 색감 표현을 위한 초고화질 방송 신호 송수신 방법 및 장치 |
| JP2015126469A (ja) | 2013-12-27 | 2015-07-06 | 株式会社東芝 | 画像処理装置、画像処理方法及び画像処理プログラム |
Also Published As
| Publication number | Publication date |
|---|---|
| JP6897843B2 (ja) | 2021-07-07 |
| PH12017501536A1 (en) | 2018-02-05 |
| JP2023087092A (ja) | 2023-06-22 |
| JPWO2016140293A1 (ja) | 2017-12-14 |
| EP3267685B1 (en) | 2022-11-23 |
| KR20170123608A (ko) | 2017-11-08 |
| US20180020128A1 (en) | 2018-01-18 |
| KR102489757B1 (ko) | 2023-01-18 |
| CA2977204C (en) | 2023-04-04 |
| US10027856B2 (en) | 2018-07-17 |
| WO2016140293A1 (ja) | 2016-09-09 |
| JP2021129325A (ja) | 2021-09-02 |
| MX2017011034A (es) | 2017-11-10 |
| BR112017018459A2 (ja) | 2018-04-17 |
| JP7396401B2 (ja) | 2023-12-12 |
| EP3267685A4 (en) | 2018-08-29 |
| JP2020123974A (ja) | 2020-08-13 |
| JP7103475B2 (ja) | 2022-07-20 |
| US20180324330A1 (en) | 2018-11-08 |
| CA2977204A1 (en) | 2016-09-09 |
| US10574864B2 (en) | 2020-02-25 |
| PH12017501536B1 (en) | 2023-02-22 |
| US20200145559A1 (en) | 2020-05-07 |
| US11057547B2 (en) | 2021-07-06 |
| JP2022125280A (ja) | 2022-08-26 |
| EP3267685A1 (en) | 2018-01-10 |
| MX371493B (es) | 2020-01-31 |
| JP6702300B2 (ja) | 2020-06-03 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP7548367B2 (ja) | 送信方法 | |
| JP6984694B2 (ja) | 送信装置、送信方法、受信装置および受信方法 | |
| US11563490B2 (en) | Transmission apparatus, transmission method, reception apparatus, and reception method | |
| CN112383695B (zh) | 发送装置、接收装置和接收方法 | |
| US11272230B2 (en) | Transmission apparatus, transmission method, reception apparatus, and reception method for switching video data types | |
| JP6989037B2 (ja) | 送信装置、送信方法、受信装置および受信方法 | |
| JP6822536B2 (ja) | 送信装置、送信方法、受信装置および受信方法 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20230522 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20240730 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20240812 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 7548367 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |