TW201722154A - 視訊寫碼中成分之範圍調整之固定點實施 - Google Patents

視訊寫碼中成分之範圍調整之固定點實施 Download PDF

Info

Publication number
TW201722154A
TW201722154A TW105130370A TW105130370A TW201722154A TW 201722154 A TW201722154 A TW 201722154A TW 105130370 A TW105130370 A TW 105130370A TW 105130370 A TW105130370 A TW 105130370A TW 201722154 A TW201722154 A TW 201722154A
Authority
TW
Taiwan
Prior art keywords
video
parameters
scale
comp
information
Prior art date
Application number
TW105130370A
Other languages
English (en)
Other versions
TWI736555B (zh
Inventor
阿達許 克里許納 瑞瑪蘇布雷蒙尼安
丹姆裘 瑞斯諾斯基
喬爾 索爾 羅傑爾斯
李聖元
多納 博格戴西 三斯里
馬塔 卡茲維克茲
Original Assignee
高通公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 高通公司 filed Critical 高通公司
Publication of TW201722154A publication Critical patent/TW201722154A/zh
Application granted granted Critical
Publication of TWI736555B publication Critical patent/TWI736555B/zh

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/189Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding
    • H04N19/196Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding being specially adapted for the computation of encoding parameters, e.g. by averaging previously computed encoding parameters
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46Embedding additional information in the video signal during the compression process
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/132Sampling, masking or truncation of coding units, e.g. adaptive resampling, frame skipping, frame interpolation or high-frequency transform coefficient masking
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/184Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being bits, e.g. of the compressed video stream
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/30Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
    • H04N19/36Scalability techniques involving formatting the layers as a function of picture distortion after decoding, e.g. signal-to-noise [SNR] scalability
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/44Decoders specially adapted therefor, e.g. video decoders which are asymmetric with respect to the encoder
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/80Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/117Filters, e.g. for pre-processing or post-processing
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/154Measured or subjectively estimated visual quality after decoding, e.g. measurement of distortion
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/187Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a scalable video layer

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computing Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Picture Signal Circuits (AREA)

Abstract

使用一固定點實施來處理高動態範圍及或廣色域視訊資料。一種處理視訊資料之方法可包括:接收含有指定如何判定用於執行一反動態範圍調整程序之參數之資訊的一或多個補充增強資訊(SEI)訊息;接收經解碼視訊資料;及根據該一或多個SEI訊息中之該資訊,使用固定點計算對該經解碼視訊資料執行該反動態範圍調整程序。

Description

視訊寫碼中成分之範圍調整之固定點實施
本發明係關於視訊處理。
數位視訊能力可併入至廣泛範圍之器件中,該等器件包括數位電視、數位直播系統、無線廣播系統、個人數位助理(PDA)、膝上型或桌上型電腦、平板電腦、電子書閱讀器、數位攝影機、數位記錄器件、數位媒體播放機、視訊遊戲器件、視訊遊戲控制台、蜂巢式或衛星無線電電話(所謂的「智慧型電話」)、視訊電話會議器件、視訊串流器件及其類似者。數位視訊器件實施視訊寫碼技術,諸如由MPEG-2、MPEG-4、ITU-T H.263、ITU-T H.264/MPEG-4第10部分進階視訊寫碼(AVC)、ITU-T H.265高效率視訊寫碼(HEVC)所定義之標準及此等標準之擴展中所描述的彼等技術。視訊器件可藉由實施此等視訊寫碼技術來更有效地傳輸、接收、編碼、解碼及/或儲存數位視訊資訊。 視訊寫碼技術包括空間(圖像內)預測及/或時間(圖像間)預測以縮減或移除為視訊序列所固有的冗餘。對於基於區塊之視訊寫碼,可將視訊圖塊(例如,視訊圖框或視訊圖框之一部分)分割成視訊區塊(其亦可被稱作樹型區塊)、寫碼單元(CU)及/或寫碼節點。圖像之經框內寫碼(I)圖塊中之視訊區塊可使用相對於同一圖像中之相鄰區塊中之參考樣本的空間預測來編碼。圖像之經框間寫碼(P或B)圖塊中之視訊區塊可使用相對於同一圖像中之相鄰區塊中之參考樣本的空間預測或相對於其他參考圖像中之參考樣本的時間預測。圖像可被稱作圖框,且參考圖像可被稱作參考圖框。 空間或時間預測產生用於待寫碼之區塊之預測性區塊。殘餘資料表示待寫碼之原始區塊與預測性區塊之間的像素差。根據指向形成預測性區塊之參考樣本之區塊的運動向量及指示經寫碼區塊與預測性區塊之間的差之殘餘資料來編碼經框間寫碼區塊。根據框內寫碼模式及殘餘資料來編碼經框內寫碼區塊。為進行進一步壓縮,可將殘餘資料自像素域變換至變換域,從而產生可隨後進行量化之殘餘變換係數。最初配置成二維陣列的經量化變換係數可經掃描以便產生變換係數的一維向量,且可應用熵寫碼以達成甚至更多壓縮。 可由色域來定義可以擷取、寫碼及顯示之色值之總數目。色域指器件可擷取(例如,攝影機)或再現(例如,顯示器)之色彩之範圍。常常,色域在器件之間係不同的。針對視訊寫碼,可使用視訊資料之預定義色域,以使得視訊寫碼程序中之每一器件可經組態以在同一色域中處理像素值。某些色域係用比傳統上已用於視訊寫碼之色域大的色彩範圍進行定義。具有較大色彩範圍之此等色域可被稱作廣色域(WCG)。 視訊資料之另一態樣係動態範圍。動態範圍通常經界定為視訊信號之最大亮度與最小亮度(例如,明度)之間的比。認為過去所使用的常用視訊資料之動態範圍具有標準動態範圍(SDR)。視訊資料之其他實例規範定義具有較大的最大亮度與最小亮度之比的色彩資料。此視訊資料可描述為具有高動態範圍(HDR)。
本發明描述用於使用固定點實施來實施視訊資料之成分之動態範圍調整的實例技術及器件。該等所描述技術可適用於經組態以編碼及解碼高動態範圍(HDR)內容之視訊寫碼標準,但不限於H.264/AVC、H.265/HEVC及其他標準。 在本發明之一個實例中,一種處理視訊資料之方法包含:接收含有指定如何判定用於執行一反動態範圍調整程序之參數之資訊的一或多個語法元素;接收經解碼視訊資料;及根據接收之該資訊,使用固定點計算對該經解碼視訊資料執行該反動態範圍調整程序。 在本發明之另一實例中,一種經組態以處理視訊資料之裝置包含:一記憶體,其經組態以儲存經解碼視訊資料;及經組態以進行以下操作之一或多個處理器:接收含有指定如何判定用於執行一反動態範圍調整程序之參數之資訊的一或多個語法元素;接收該經解碼視訊資料;及根據接收之該資訊,使用固定點計算對該經解碼視訊資料執行該反動態範圍調整程序。 在本發明之另一實例中,一種經組態以處理視訊資料之裝置包含:用於接收含有指定如何判定用於執行一反動態範圍調整程序之參數之資訊的一或多個語法元素的構件;用於接收經解碼視訊資料的構件;及用於根據接收之該資訊,使用固定點計算對該經解碼視訊資料執行該反動態範圍調整程序的構件。 在另一實例中,本發明描述一種儲存指令之電腦可讀儲存媒體,該等指令在執行時使經組態以處理視訊資料之一器件之一或多個處理器進行以下操作:接收含有指定如何判定用於執行一反動態範圍調整程序之參數之資訊的一或多個語法元素;接收該經解碼視訊資料;及根據接收之該資訊,使用固定點計算對該經解碼視訊資料執行該反動態範圍調整程序。 在本發明之另一實例中,一種處理視訊資料之方法包含使用固定點計算對視訊資料執行一動態範圍調整程序,及使用固定點計算產生含有指定如何判定用於執行相對於該動態範圍調整程序之一反動態範圍調整程序之參數之資訊的一或多個語法元素。 在本發明之另一實例中,一種經組態以處理視訊資料之裝置包含:一記憶體,其經組態以儲存視訊資料;及經組態以進行以下操作之一或多個處理器:使用固定點計算對該視訊資料執行一動態範圍調整程序;及使用固定點計算產生含有指定如何判定用於執行相對於該動態範圍調整程序之一反動態範圍調整程序之參數之資訊的一或多個語法元素。 在本發明之另一實例中,一種經組態以處理視訊資料之裝置包含用於使用固定點計算對視訊資料執行一動態範圍調整程序的構件,及用於使用固定點計算產生含有指定如何判定用於執行相對於該動態範圍調整程序之一反動態範圍調整程序之參數之資訊的一或多個語法元素的構件。 在另一實例中,本發明描述一種儲存指令之電腦可讀儲存媒體,該等指令在執行時使經組態以處理視訊資料之一器件之一或多個處理器進行以下操作:使用固定點計算對該視訊資料執行一動態範圍調整程序;及使用固定點計算產生含有指定如何判定用於執行相對於該動態範圍調整程序之一反動態範圍調整程序之參數之資訊的一或多個語法元素。 在以下隨附圖式及描述中闡述一或多個實例之細節。其他特徵、目標及優勢自描述、圖式及申請專利範圍將係顯而易見的。
本申請案主張2015年9月21日申請之美國臨時申請案第62/221,586號、2015年10月2日申請之美國臨時申請案第62/236,804號及2015年10月13日申請之美國臨時申請案第62/241,063號的權利,該等臨時申請案中之每一者之全部內容係以引用方式併入本文中。 本發明係關於對具有高動態範圍(HDR)及廣色域(WCG)表示之視訊資料的處理及/或寫碼。更具體言之,本發明之技術包括用於使用固定點處理操作(例如,與浮點處理操作對比)來執行對視訊資料成分之範圍調整的技術。本文中所描述之技術及器件可改良用於寫碼視訊資料(包括HDR及WCG視訊資料)的混合式視訊寫碼系統(例如,H.265/HEVC、H.264/AVC等)之壓縮效率。 包括混合式視訊寫碼標準的視訊寫碼標準包括ITU-T H.261、ISO/IEC MPEG-1 Visual、ITU-T H.262或ISO/IEC MPEG-2 Visual、ITU-T H.263、ISO/IEC MPEG-4 Visual及ITU-T H.264 (亦被稱作ISO/IEC MPEG-4 AVC),包括其可調式視訊寫碼(SVC)及多視圖視訊寫碼(MVC)擴展。已由ITU-T視訊寫碼專家組(VCEG)及ISO/IEC運動圖像專家組(MPEG)的視訊寫碼聯合合作小組(JCT-VC)完成新的視訊寫碼標準(亦即,高效率視訊寫碼(HEVC,亦稱作H.265))之設計。Bross等人的被稱作HEVC工作草案10 (WD10)之HEVC草案規範「High efficiency video coding (HEVC) text specification draft 10 (for FDIS & Last Call)」(ITU-T SG16 WP3與ISO/IEC JTC1/SC29/WG11的關於視訊寫碼之聯合合作小組(JCT-VC),第12次會議:瑞士日內瓦,2013年1月14日至23日,JCTVC-L1003v34)可自http://phenix.int-evry.fr/jct/doc_end_user/documents/12_Geneva/wg11/ JCTVC-L1003-v34.zip獲得。定案之HEVC標準被稱作HEVC版本1。 Wang等人之瑕疵報告「High efficiency video coding (HEVC) Defect Report」(ITU-T SG16 WP3與ISO/IEC JTC1/SC29/WG11的關於視訊寫碼之聯合合作小組(JCT-VC),第14次會議:奧地利維也納,2013年7月25日至8月2日,JCTVC-N1003v1)可自http://phenix.int-evry.fr/jct/doc_end_user/documents/14_Vienna/wg11/JCTVC-N1003-v1.zip獲得。定案之HEVC標準文件在2013年4月公佈為「ITU-T H.265, Series H: Audiovisual and Multimedia Systems, Infrastructure of audiovisual services - Coding of moving video, High efficiency video coding, Telecommunication Standardization Sector of International Telecommunication Union (ITU)」,且定案在HEVC標準之另一版本係在2014年10月公佈。H.265/HEVC規範文本之複本可自http://www.itu.int/rec/T-REC-H.265-201504-I/en下載。 圖1為說明可利用本發明之技術之實例視訊編碼及解碼系統10的方塊圖。如圖1中所示,系統10包括源器件12,其提供稍後時間將由目的地裝置14解碼的經編碼視訊資料。詳言之,源器件12經由電腦可讀媒體16將視訊資料提供至目的地器件14。源器件12及目的地器件14可包含廣泛範圍之器件中的任一者,包括桌上型電腦、筆記型(即,膝上型)電腦、平板電腦、機上盒、電話手持機(諸如所謂的「智慧型」電話)、所謂的「智慧型」平板、電視機、攝影機、顯示器件、數位媒體播放器、視訊遊戲控制台、視訊串流器件、廣播接收器器件或類似者。在一些情況下,可裝備源器件12及目的地器件14以用於無線通信。 目的地器件14可經由電腦可讀媒體16接收待解碼之經編碼視訊資料。電腦可讀媒體16可包含能夠將經編碼視訊資料自源器件12移動至目的地器件14的任何類型之媒體或器件。在一個實例中,電腦可讀媒體16可包含使得源器件12能夠即時地將經編碼視訊資料直接傳輸至目的地器件14之通信媒體。經編碼視訊資料可根據通信標準(諸如有線或無線通信協定)進行調變,且傳輸至目的地器件14。通信媒體可包含任何無線或有線通信媒體,諸如射頻(RF)頻譜或一或多個實體傳輸線。通信媒體可形成基於封包之網路(諸如,區域網路、廣域網路或諸如網際網路之全球網路)之部分。通信媒體可包括路由器、交換器、基地台或可用於促進自源器件12至目的地器件14之通信的任何其他設備。 在其他實例中,電腦可讀媒體16可包括非暫時性儲存媒體,諸如硬碟、隨身碟、緊密光碟、數位視訊光碟、藍光光碟或其他電腦可讀媒體。在一些實例中,網路伺服器(未圖示)可自源器件12接收經編碼視訊資料,且例如經由網路傳輸將經編碼視訊資料提供至目的地器件14。類似地,媒體生產設施(諸如,光碟衝壓設施)之計算器件可自源器件12接收經編碼視訊資料且生產含有經編碼視訊資料之光碟。因此,在各種實例中,可理解電腦可讀媒體16包括各種形式之一或多個電腦可讀媒體。 在一些實例中,經編碼資料可自輸出介面22輸出至儲存器件。類似地,經編碼資料可由輸入介面自儲存器件存取。儲存器件可包括多種分散式或本端存取之資料儲存媒體中之任一者,諸如硬碟機、藍光光碟、DVD、CD-ROM、快閃記憶體、揮發性或非揮發性記憶體或用於儲存經編碼視訊資料之任何其他合適的數位儲存媒體。在另一實例中,儲存器件可對應於檔案伺服器或可儲存由源器件12產生之經編碼視訊的另一中間儲存器件。目的地器件14可經由串流或下載而自儲存器件存取所儲存之視訊資料。檔案伺服器可為能夠儲存經編碼視訊資料且將經編碼視訊資料傳輸至目的地器件14的任何類型之伺服器。實例檔案伺服器包括網頁伺服器(例如,用於網站)、FTP伺服器、網路附加儲存(NAS)器件或本端磁碟機。目的地器件14可經由任何標準資料連接(包括網際網路連接)而存取經編碼視訊資料。此資料連接可包括適合於存取儲存於檔案伺服器上之經編碼視訊資料的無線頻道(例如,Wi-Fi連接)、有線連接(例如,DSL、纜線數據機等)或兩者之組合。經編碼視訊資料自儲存器件之傳輸可為串流傳輸、下載傳輸或其一組合。 本發明之技術未必限於無線應用或設定。該等技術可應用於支援多種多媒體應用中之任一者的視訊寫碼,諸如空中電視廣播、有線電視傳輸、衛星電視傳輸、網際網路串流視訊傳輸(諸如,經由HTTP之動態自適應串流(DASH))、經編碼至資料儲存媒體上之數位視訊、儲存於資料儲存媒體上的數位視訊之解碼或其他應用。在一些實例中,系統10可經組態以支援單向或雙向視訊傳輸從而支援諸如視訊串流、視訊播放、視訊廣播及/或視訊電話之應用。 在圖1之實例中,源器件12包括視訊源18、視訊編碼單元21 (其包括視訊預處理器單元19及視訊編碼器20)以及輸出介面22。目的地器件14包括輸入介面28、視訊解碼單元29 (其包括視訊後處理器單元31及視訊解碼器30)以及顯示器件32。根據本發明,源器件12之視訊預處理器單元19及/或視訊編碼器20及目的地器件14之視訊後處理器單元31及/或視訊解碼器30可經組態以實施本發明之技術,包括應用於特定色彩空間中之視訊資料的發信及相關操作,以使得能夠用固定點實施更有效率地壓縮HDR及WCG視訊資料。在一些實例中,視訊預處理器單元19可與視訊編碼器20分離。在其他實例中,視訊預處理器單元19可為視訊編碼器20之部分。同樣,在一些實例中,視訊後處理器單元31可與視訊解碼器30分離。在其他實例中,視訊後處理器單元31可為視訊解碼器30之部分。在其他實例中,源器件及目的地器件可包括其他組件或配置。舉例而言,源器件12可自外部視訊源18(諸如外部攝影機)接收視訊資料。同樣地,目的地器件14可與外部顯示器件介接,而非包括整合式顯示器件。 圖1之所說明系統10僅為一個實例。用於處理HDR及WCG視訊資料之技術可由任何數位視訊編碼及/或視訊解碼器件來執行。此外,本發明之技術亦可由視訊預處理器及/或視訊後處理器(例如,視訊預處理器單元19及視訊後處理器單元31)來執行。通常,視訊預處理器可為經組態以在編碼(例如,在HEVC編碼)之前對視訊資料進行處理的任何器件。通常,視訊後處理器可為經組態以在解碼(例如,在HEVC解碼)之後對視訊資料進行處理的任何器件。源器件12及目的地器件14僅為源器件12產生經寫碼視訊資料以供傳輸至目的地器件14的此等寫碼器件之實例。在一些實例中,器件12、14可以實質上對稱之方式操作,以使得器件12、14中之每一者包括視訊編碼及解碼組件,以及視訊預處理器及視訊後處理器(例如,分別為視訊預處理器單元19及視訊後處理器單元31)。因此,系統10可支援視訊器件12、14之間的單向或雙向視訊傳輸,(例如)用於視訊串流、視訊播放、視訊廣播或視訊電話。 源器件12之視訊源18可包括視訊擷取器件,諸如視訊攝影機、含有先前擷取之視訊的視訊存檔及/或用以自視訊內容提供者接收視訊的視訊饋送介面。作為另一替代,視訊源18可產生基於電腦圖形之資料以作為源視訊,或實況視訊、存檔視訊及電腦產生之視訊的組合。在一些情況下,若視訊源18為視訊攝影機,則源器件12及目的地器件14可形成所謂的攝影機電話或視訊電話。然而,如上文所提及,本發明中所描述之技術可適用於視訊寫碼及視訊處理,一般而言,且可應用於無線及/或有線應用。在每一情況下,可由視訊編碼單元21編碼所擷取、預先擷取或電腦產生之視訊。可接著藉由輸出介面22將經編碼視訊資訊輸出至電腦可讀媒體16上。 目的地器件14之輸入介面28自電腦可讀媒體16接收資訊。電腦可讀媒體16之資訊可包括由視訊編碼器20定義之語法資訊(其亦由視訊解碼單元29使用),該語法資訊包括描述區塊及其他經寫碼單元(例如,圖像群組(GOP))之特性及/或處理的語法元素。顯示器件32向使用者顯示經解碼視訊資料,且可包含多種顯示器件中之任一者,諸如陰極射線管(CRT)、液晶顯示器(LCD)、電漿顯示器、有機發光二極體(OLED)顯示器或另一類型之顯示器件。 如所說明,視訊預處理器單元19自視訊源18接收視訊資料。視訊預處理器單元19可經組態以處理視訊資料以將其轉化成適用於藉由視頻編碼器20編碼的形式。舉例而言,視訊預處理器單元19可執行動態範圍壓縮(例如,使用非線性轉移函數)、至更緊湊或穩固色彩空間之色彩轉換,及/或浮點至整數表示轉換。視訊編碼器20可對由視訊預處理器單元19輸出之視訊資料執行視訊編碼。視訊解碼器30可執行視訊編碼器20之逆轉以解碼視訊資料,且視訊後處理器單元31可執行視訊預處理器單元19之逆轉以將視訊資料轉換成適合顯示器之形式。舉例而言,視訊後處理器單元31可執行整數至浮點轉換、自緊密或穩固色彩空間之色彩轉換及/或動態範圍壓縮之逆轉以產生適合顯示器之視訊資料。 視訊編碼器20及視訊解碼器30各自可實施為多種合適的編碼器電路中之任一者,諸如一或多個微處理器、數位信號處理器(DSP)、特殊應用積體電路(ASIC)、場可程式化閘陣列(FPGA)、離散邏輯、軟體、硬體、韌體或其任何組合。當該等技術部分以軟體實施時,器件可將用於軟體之指令儲存於合適之非暫時性電腦可讀媒體中,且在硬體中使用一或多個處理器執行該等指令以執行本發明之技術。視訊編碼器20及視訊解碼器30中之每一者可包括於一或多個編碼器或解碼器中,編碼器或解碼器中之任一者可整合為各別器件中之組合式編碼器/解碼器(編解碼器(CODEC))的部分。 視訊預處理器單元19及視訊後處理器31單元可各自實施為多種合適之編碼器電路中之任一者,諸如一或多個微處理器、數位信號處理器(DSP)、特殊應用積體電路(ASIC)、場可程式化閘陣列(FPGA)、離散邏輯、軟體、硬體、韌體或其任何組合。當該等技術部分以軟體實施時,器件可將用於軟體之指令儲存於合適之非暫時性電腦可讀媒體中,且在硬體中使用一或多個處理器執行該等指令以執行本發明之技術。如上文所論述,視訊預處理器單元19及視訊後處理器單元31可分別地為與視訊編碼器20及視訊解碼器30分離之器件。在其他實例中,視訊預處理器單元19可與視訊編碼器20整合於單一器件中,且反視訊後處理器單元31可與視訊解碼器30整合於單一器件中。 在一些實例中,視訊編碼器20及視訊解碼器30根據諸如以下各者之視訊壓縮標準而操作:ISO/IEC MPEG-4 Visual及ITU-T H.264 (亦稱為ISO/IEC MPEG-4 AVC),包括其可調式視訊寫碼(SVC)擴展、多視圖視訊寫碼(MVC)擴展及基於MVC之三維視訊(3DV)擴展。在一些情況下,遵守基於MVC之3DV的任何位元串流始終含有與MVC設定檔(例如,立體聲高設定檔)一致之子位元串流。此外,存在持續努力以產生H.264/AVC之3DV寫碼擴展,即基於AVC之3DV。視訊寫碼標準之其他實例包括ITU-T H.261、ISO/IEC MPEG-1 Visual、ITU-T H.262或ISO/IEC MPEG-2 Visual、ITU-T H.263、ISO/IEC MPEG-4 Visual及ITU-T H.264、ISO/IEC Visual。在其他實例中,視訊編碼器20及視訊解碼器30可經組態以根據HEVC標準而操作。 在HEVC及其他視訊寫碼標準中,視訊序列通常包括一系列圖像。圖像亦可被稱作「圖框」。圖像可包括三個樣本陣列,指示為SL 、SCb 及SCr 。SL 為明度樣本之二維陣列(即,區塊)。SCb 係Cb色訊樣本之二維陣列。SCr 為Cr色訊樣本之二維陣列。色訊樣本在本文中亦可被稱作「色度(chroma)」樣本。在其他情況下,圖像可為單色的,且可僅包括明度樣本之陣列。 視訊編碼器20可產生一組寫碼樹單元(CTU)。CTU中之每一者可包含明度樣本之寫碼樹型區塊、色度樣本之兩個對應的寫碼樹型區塊,及用以對寫碼樹型區塊之樣本寫碼的語法結構。在單色圖像或具有三個單獨色平面之圖像中,CTU可包含單一寫碼樹型區塊及用以對寫碼樹型區塊之樣本寫碼的語法結構。寫碼樹型區塊可為樣本之N×N區塊。CTU亦可被稱作「樹型區塊」或「最大寫碼單元」(LCU)。HEVC之CTU可廣泛地類似於諸如H.264/AVC之其他視訊寫碼標準的巨集區塊。然而,CTU未必限於特定大小,且可包括一或多個寫碼單元(CU)。圖塊可包括在光柵掃描中連續排序之整數數目個CTU。 本發明可使用術語「視訊單元」或「視訊區塊」以指代樣本之一或多個區塊,及用以對樣本之一或多個區塊之樣本寫碼的語法結構。視訊單元之實例類型可包括HEVC中之CTU、CU、PU、變換單元(TU),或其他視訊寫碼標準中之巨集區塊、巨集區塊分割區等。 為產生經寫碼CTU,視訊編碼器20可對CTU之寫碼樹型區塊遞迴地執行四分樹分割,以將寫碼樹型區塊劃分成寫碼區塊,之後命名為「寫碼樹單元」。寫碼區塊為樣本之NxN區塊。CU可包含具有明度樣本陣列、Cb樣本陣列及Cr樣本陣列之圖像的明度樣本之寫碼區塊及色度樣本之兩個對應的寫碼區塊,及用以對寫碼區塊之樣本寫碼的語法結構。在單色圖像或具有三個單獨色平面之圖像中,CU可包含單一寫碼區塊及用以對寫碼區塊之樣本寫碼的語法結構。 視訊編碼器20可將CU之寫碼區塊分割成一或多個預測區塊。預測區塊可為經應用相同預測之樣本的矩形(亦即,正方形或非正方形)區塊。CU之預測單元(PU)可包含圖像之明度樣本的預測區塊、色度樣本之兩個對應預測區塊及用於預測預測區塊樣本之語法結構。在單色圖像或具有三個單獨色平面之圖像中,PU可包含單一預測區塊,及用以對預測區塊樣本進行預測之語法結構。視訊編碼器20可針對CU之每一PU的明度、Cb及Cr預測區塊產生預測性明度、Cb及Cr區塊。 視訊編碼器20可使用框內預測或框間預測以產生PU之預測性區塊。若視訊編碼器20使用框內預測產生PU之預測性區塊,則視訊編碼器20可基於與PU相關聯之圖像的經解碼樣本產生PU之預測性區塊。 若視訊編碼器20使用框間預測以產生PU之預測性區塊,則視訊編碼器20可基於不同於與PU相關聯之圖像的一或多個圖像之經解碼樣本,產生PU之預測性區塊。框間預測可為單向框間預測(亦即,單向預測)或雙向框間預測(亦即,雙向預測)。為執行單向預測或雙向預測,視訊編碼器20可產生當前片段之第一參考圖像清單(RefPicList0)及第二參考圖像清單(RefPicList1)。 參考圖像清單中之每一者可包括一或多個參考圖像。當使用單向預測時,視訊編碼器20可搜尋RefPicList0及RefPicList1中之任一者或兩者中的參考圖像,以判定參考圖像內之參考位置。此外,當使用單向預測時,視訊編碼器20可至少部分基於對應於參考位置之樣本而產生PU之預測性樣本區塊。此外,當使用單向預測時,視訊編碼器20可產生指示PU之預測區塊與參考位置之間的空間移位之單一運動向量。為了指示PU之預測區塊與參考位置之間的空間移位,運動向量可包括指定PU之預測區塊與參考位置之間的水平移位之水平成分切可包括指定PU之預測區塊與參考位置之間的垂直移位之垂直成分。 當使用雙向預測編碼PU時,視訊編碼器20可判定RefPicList0中之參考圖像中的第一參考位置,及RefPicList1中之參考圖像中的第二參考位置。視訊編碼器20可接著至少部分基於對應於第一及第二參考位置之樣本產生PU之預測性區塊。此外,當使用雙向預測編碼PU時,視訊編碼器20可產生指示PU之樣本區塊與第一參考位置之間的空間位移之第一運動,及指示PU之預測區塊與第二參考位置之間的空間位移之第二運動。 在視訊編碼器20產生CU之一或多個PU的預測性明度區塊、Cb區塊及Cr區塊之後,視訊編碼器20可產生CU之明度殘餘區塊。CU之明度殘餘區塊中的每一樣本指示CU之預測性明度區塊中之一者中的明度樣本與CU之原始明度寫碼區塊中的對應樣本之間的差異。此外,視訊編碼器20可產生用於CU之Cb殘餘區塊。CU之Cb殘餘區塊中的每一樣本可指示CU之預測性Cb區塊中之中一者中的Cb樣本與CU之原始Cb寫碼區塊中的對應樣本之間的差異。視訊編碼器20亦可產生CU之Cr剩餘區塊。CU之Cr殘餘區塊中之每一樣本可指示CU之預測性Cr區塊中之一者中的Cr樣本與CU之原始Cr寫碼區塊中之對應樣本之間的差異。 此外,視訊編碼器20可使用四分樹分割將CU之明度、Cb及Cr殘餘區塊分解成一或多個明度、Cb及Cr變換區塊。變換區塊可為應用相同變換的樣本之矩形區塊。CU之變換單元(TU)可包含明度樣本之變換區塊、色度樣本之兩個對應變換區塊及用於對變換區塊樣本進行變換之語法結構。在單色圖像或具有三個單獨色平面之圖像中,TU可包含單一變換區塊,及用以對變換區塊樣本進行變換之語法結構。因此,CU之每一TU可與明度變換區塊、Cb變換區塊及Cr變換區塊相關聯。與TU相關聯之明度變換區塊可為CU之明度殘餘區塊之子區塊。Cb變換區塊可為CU之Cb殘餘區塊之子區塊。Cr變換區塊可為CU之Cr殘餘區塊之子區塊。 視訊編碼器20可將一或多個變換應用於TU之明度變換區塊,以產生TU之明度係數區塊。係數區塊可為變換係數之二維陣列。變換係數可為純量。視訊編碼器20可將一或多個變換應用至TU之Cb變換區塊以產生TU之Cb係數區塊。視訊編碼器20可將一或多個變換應用至TU之Cr變換區塊以產生用於TU之Cr係數區塊。 在產生係數區塊((例如,明度係數區塊、Cb係數區塊或Cr係數區塊)之後,視訊編碼器20可量化該係數區塊。量化通常指變換係數經量化以可能減少用以表示變換係數的資料之量從而提供進一步壓縮之過程。此外,視訊編碼器20可反量化變換係數,並將反變換應用至變換係數,以便重建構圖像之CU的TU之變換區塊。視訊編碼器20可使用CU之TU的經重建構變換區塊,及CU之PU的預測性區塊,以重建構CU之寫碼區塊。藉由重建構圖像之每一CU的寫碼區塊,視訊編碼器20可重建構圖像。視訊編碼器20可將經重建構圖像儲存於經解碼圖像緩衝器(DPB)中。視訊編碼器20可將DPB中之經重建構之圖像用於進行框間預測及框內預測。 在視訊編碼器20量化係數區塊之後,視訊編碼器20可熵編碼指示經量化變換係數之語法元素。舉例而言,視訊編碼器20可對指示經量化變換係數之語法元素執行上下文自適應性二進位算術寫碼(CABAC)。視訊編碼器20可在位元串流中輸出經熵編碼之語法元素。 視訊編碼器20可輸出包括形成經寫碼圖像及相關聯資料之表示的位元序列之位元串流。位元串流可包含網路抽象層(NAL)單元的序列。該等NAL單元中之每一者包括NAL單元標頭且囊封原始位元組序列酬載(RBSP)。NAL單元標頭可包括指示NAL單元類型碼之語法元素。由NAL單元之NAL單元標頭指定的NAL單元類型碼指示NAL單元之類型。RBSP可為含有囊封在NAL單元內的整數數目個位元組之語法結構。在一些情況下RBSP包括零個位元。 不同類型之NAL單元可封裝不同類型之RBSP。舉例而言,第一類型之NAL單元可封裝圖像參數集(PPS)之RBSP,第二類型之NAL單元可封裝經寫碼圖塊之RBSP,第三類型之NAL單元可封裝補充增強資訊(SEI)之RBSP等等。PPS為可含有適用於零或多個完整經寫碼圖像之語法元素的語法結構。囊封視訊寫碼資料之RBSP (與參數集及SEI訊息之RBSP相反)的NAL單元可被稱作視訊寫碼層(VCL) NAL單元。囊封經寫碼片段之NAL單元在本文中可被稱作經寫碼片段NAL單元。用於經寫碼圖塊之RBSP可包括圖塊標頭及圖塊資料。 視訊解碼器30可接收位元串流。此外,視訊解碼器30可剖析位元串流以自位元串流解碼語法元素。視訊解碼器30可至少部分基於自位元串流解碼之語法元素重建構視訊資料之圖像。重建構視訊資料之程序可大體上與由視訊編碼器20執行之程序互逆。舉例而言,視訊解碼器30可使用PU之運動向量,以判定當前CU之PU的預測性區塊。視訊解碼器30可使用PU之一或多個運動向量來產生PU之預測性區塊。 此外,視訊解碼器30可反量化與當前CU之TU相關聯的係數區塊。視訊解碼器30可對係數區塊執行反變換以重建構與當前CU之TU相關聯的變換區塊。視訊解碼器30可藉由將當前CU之PU的預測性樣本區塊之樣本添加至當前CU之TU的變換區塊之對應樣本來重建構當前CU之寫碼區塊。藉由重構圖像之每一CU的寫碼區塊,視訊解碼器30可重構圖像。視訊解碼器30可將經解碼圖像儲存於經解碼圖像緩衝器中,以用於輸出及/或用於解碼其他圖像。 補充增強資訊(SEI)訊息常常包括於視訊位元串流中,通常用以載運對於藉由解碼器(例如,視訊解碼器30)解碼位元串流並非必需之資訊。含於SEI訊息中之資訊可對改良經解碼輸出之顯示或處理有用;例如,此資訊可供解碼器側實體使用以改良內容之可視性。亦有可能,特定應用標準可以授權此等SEI訊息在位元串流中之存在,使得品質之改良能夠到達符合應用標準之所有器件(針對圖框相容之平立體3DTV視訊格式的圖框填充SEI訊息之載運,其中針對視訊之每個圖框載運SEI訊息,例如,如以下各者中所描述:ETSI - TS 101 547-2, Digital Video Broadcasting (DVB) Plano-stereoscopic 3DTV;Part 2: Frame compatible plano-stereoscopic 3DTV;恢復點SEI訊息之處置,例如,如以下各者中所描述:3GPP TS 26.114 v13.0.0, 3rd Generation Partnership Project;Technical Specification Group Services and System Aspects;IP Multimedia Subsystem (IMS);Multimedia Telephony;Media handling and interaction (Release 13);或DVB中拉移式掃描矩形SEI訊息之使用,例如,如以下各者中所描述:ETSI - TS 101 154, Digital Video Broadcasting (DVB); Specification for the use of Video and Audio Coding in Broadcasting Applications based on the MPEG-2 Transport Stream)。 載頻調映射資訊SEI訊息用以映射明度樣本或RGB成分樣本中之每一者。tone_map_id之不同值用以界定不同用途,且載頻調映射SEI訊息之語法亦經過對應修改。tone_map_id之值1允許SEI訊息將RGB樣本裁剪至最小值及最大值。tone_map_id之值3允許發信呈支點形式之查找表。然而,在應用時,相同值被應用於所有RGB成分,或僅應用於明度成分。 膝函數SEI訊息用以指示正規化線性域中的經解碼圖像之RGB成分之映射。亦指示出輸入及輸出最大明度值,且查找表將輸入明度值映射至輸出明度值。將同一查找表應用於所有三個色彩成分。 使用在HEVC標準中定義之色彩重映射資訊(CRI) SEI訊息來輸送用以將一個色彩空間中之圖像映射另一色彩空間的資訊。在一個實例中,CRI SEI訊息之語法包括三個部分:第一查找表(前LUT),繼之以指示色彩重映射係數之3×3矩陣,繼之以第二查找表(後LUT)。對於每一色彩成分(例如,R、G、B或Y、Cb、Cr),定義用於兩者之獨立LUT,前LUT及後LUT。CRI SEI訊息亦包括稱作colour_remap_id之語法元素,其不同值可用以指示SEI訊息之不同用途。圖2展示CRI SEI訊息所指定之色彩重映射資訊程序之典型結構。 動態範圍調整(DRA)SEI訊息。動態範圍調整SEI訊息(例如,如D. Bugdayci Sansli、A. K. Ramasubramonian、D. Rusanovskyy、S. Lee、J. Sole、M. Karczewicz之「Dynamic range adjustment SEI message」(m36330,MPEG會議,波蘭華沙,2015年6月22日至26日)中所描述)尚未被採用作為任何視訊寫碼標準之部分;然而,SEI訊息包括發信比例及偏移數字之一個集合以映射輸入樣本。SEI訊息亦允許針對不同成分發信不同查找表,且亦允許當將相同比例及偏移用於超過一個成分時的發信最佳化。比例及偏移數字係以固定長度準確度進行發信。 預期下一代視訊應用操作表示具有HDR及WCG之經擷取景物的視訊資料。所利用動態範圍及色域之參數為視訊內容之兩個獨立屬性,且出於數位電視及多媒體服務之目的,其規範由若干國際標準界定。舉例而言,ITU-R Rec. BT.709:“Parameter values for the HDTV standards for production and international programme exchange”及ITU-R Rec. BT.2020:“Parameter values for ultra-high definition television systems for production and international programme exchange,”分別定義用於高清晰度電視(HDTV)及超高清晰度電視(UHDTV)參數,諸如標準動態範圍(SDR)以擴展超出標準色域之色彩原色。Rec. BT.2100:“Image parameter values for high dynamic range television for use in production and international programme exchange”定義用於HDR電視用途之轉移函數及表示,包括支援廣色域表示之原色。亦存在其他標準開發組織(SDO)文獻,其指定其他系統中之動態範圍及色域屬性,例如DCI-P3色域界定於SMPTE-231-2(運動圖像及電視工程師協會)中且HDR之一些參數界定於STMPTE-2084中。以下提供視訊資料之動態範圍及色域的簡單描述。 動態範圍通常經界定為視訊信號之最大亮度與最小亮度(例如,明度)之間的比。亦可以「f光闌」為單位量測動態範圍,其中一個f光闌對應於信號動態範圍之加倍。在MPEG定義中,特徵化相對於多於16f光闌之亮度變化的內容被稱作HDR內容。在一些術語中,10f光闌與16f光闌之間的位準被視為中間動態範圍,但在其他定義中被視為HDR。在本發明之一些實例中,HDR視訊內容可為相較於傳統使用之具備標準動態範圍之視訊內容(例如,如藉由ITU-R Rec.BT.709所指定之視訊內容)具有較高動態範圍的任何視訊內容。 人類視覺系統(HVS)能夠感知比SDR內容及HDR內容大很多的動態範圍。然而,HVS包括適應機構,其將HVS之動態範圍縮窄至所謂的同時範圍。同時範圍之寬度可取決於當前照明條件(例如,當前亮度)。由HDTV之SDR、UHDTV之預期HDR及HVS動態範圍提供之動態範圍之可視化展示於圖3中,但精確範圍可基於每一個人及顯示器而改變。 當前視訊應用及服務由ITU Rec.709調節,且提供SDR,從而通常支援約每m2 0.1至100燭光(cd)(常常被稱作「尼特」)之亮度(例如,明度)範圍,導致小於10 f光闌。預期一些實例下代視訊服務將提供達至16 f光闌之動態範圍。儘管用於此等內容之詳細規格目前正在研發,但一些初始參數已於SMPTE-2084及ITU-R Rec.2020中予以指定。 除HDR以外,更逼真視訊體驗之另一態樣係色彩維度。色彩維度通常由色域定義。圖4為展示SDR色域(基於BT.709色彩原色之三角形100)及用於UHDTV之較廣色域(基於BT.2020色彩原色之三角形102)的概念圖。圖4亦描繪所謂的光譜軌跡(由舌片形狀之區域104定界),從而表示天然色之界限。如圖4所說明,自BT.709 (三角形100)移動至BT.2020 (三角形102),色彩原色旨在提供具有約多於70%之色彩的UHDTV服務。D65指定用於BT.709及/或BT.2020規範之實例白色。 用於DCI-P3、BT.709及BT.2020色彩空間之色域規範之實例展示於表1中。 1 - 色域參數 如表1中可以看出,色域可藉由白點之X及Y值及藉由原色(例如,紅色(R)、綠色(G)及藍色(B))之x及y值界定。x及y值表示根據色彩之色度(X及Z)及亮度(Y)導出之正規化值,如CIE 1931色彩空間所界定。CIE 1931色彩空間定義純色(例如,就波長而言)之間的連接及人眼如何感知此等色彩。 通常在每成分(甚至浮點)極高精度下(在4:4:4色度格式及極廣色彩空間(例如,CIE XYZ)之情況下)獲取及儲存HDR/WCG視訊資料。此表示以高精度為目標且在數學上幾乎無損。然而,用於儲存HDR/WCG視訊資料之此格式可包括大量冗餘且對於壓縮用途而言可能非最佳的。具有基於HVS之假定的較低精確度格式通常用於目前先進技術的視訊應用。 出於壓縮目的之視訊資料格式轉換程序之一個實例包括三個主要程序,如圖5中所示。圖5之該等技術可由源器件12執行。線性RGB資料110可為HDR/WCG視訊資料且可以浮點表示儲存。可使用用於動態範圍壓縮之非線性轉移函數(TF) 112來壓縮線性RGB資料110。轉移函數112可使用任何數目之非線性轉移函數(例如,如SMPTE-2084中所定義之PQ TF)來壓縮線性RGB資料110。在一些實例中,色彩轉換程序114將經壓緊之資料轉換成較適合於藉由混合式視訊編碼器壓縮的更緊湊或穩固之色彩空間(例如,YUV或YCrCb色彩空間)。接著使用浮點至整數表示量化單元116將此資料量化以產生經轉換HDR之資料118。在此實例中,HDR之資料118呈整數表示。HDR之資料現在為更適合於藉由混合式視訊編碼器(例如,應用HEVC技術之視訊編碼器20)進行壓縮之格式。圖5中所描繪之程序的次序係作為一實例給出,且在其他應用中可改變。舉例而言,色彩轉換可先於TF程序。另外,可將額外處理(例如,空間次取樣)應用於色彩成分。 在圖6中描繪解碼器側之逆轉換。可由目的地器件14執行圖6之技術。經轉換HDR之資料120可在目的地器件14處經由使用混合式視訊解碼器(例如,應用HEVC技術之視訊解碼器30)對視訊資料進行解碼而獲得。接著可由反量化單元122對HDR之資料120進行反量化。接著可將反色彩轉換程序124應用於經反量化之HDR之資料。反色彩轉換程序124可為色彩轉換程序114之逆轉。舉例而言,反色彩轉換程序124可將HDR之資料自YCrCb格式轉換回至RGB格式。接下來,可將反轉移函數126應用於該資料以添加藉由轉移函數112壓縮之動態範圍,從而重建線性RGB資料128。 現將更詳細地論述圖5中所描繪之技術。一般而言,將轉移函數應用資料(例如,HDR/WCG視訊資料)以壓縮資料之動態範圍,以使得由量化引起之錯誤在明度值範圍中在感知上(近似)均勻。此壓縮允許用較少位元來表示資料。在一個實例中,轉移函數可為一維(1D)非線性函數且可反映最終使用者顯示器之電光轉移函數(EOTF)之逆,例如,如Rec. 709中針對SDR所指定。在另一實例中,轉移函數可近似對亮度變換之HVS感知,例如,SMPTE-2084中針對HDR所指定之PQ轉移函數。OETF之反向程序為EOTF(電光轉移函數),其將碼層級映射回至明度。圖7展示用作EOTF之非線性轉移函數之若干實例。該等轉移函數亦可單獨地應用於每一R、G及B成分。 在本發明之上下文中,術語「信號值」或「色值」可用以描述對應於影像元素之特定色彩成分(諸如,R、G、B或Y)之值的明度位準。信號值通常表示線性光階(明度值)。術語「碼層級」或「數位碼值」可指影像信號值之數位表示。通常,此數位表示表示非線性信號值。EOTF表示提供至顯示器件(例如,顯示器件32)之非線性信號值與由顯示器件產生之線性色值之間的關係。 RGB資料通常被用作輸入色彩空間,此係因為RGB係通常藉由影像擷取感測器產生之資料類型。然而,RGB色彩空間在其成分當中具有高冗餘且對於緊密表示而言並非最佳的。為達成更緊湊且更穩固之表示,RGB成分通常經轉換(例如,執行色彩變換)至更適合於壓縮之更不相關色彩空間(例如,YCbCr)。YCbCr色彩空間分離不同的相關較少成分中的呈明度(Y)形式之亮度及色彩資訊(CrCb)。在此上下文中,穩固表示可指在以受限位元速率進行壓縮時特徵為較高階錯誤彈性之色彩空間。 在色彩變換之後,仍然可以高位元深度(例如,浮點準確度)來表示目標色彩空間中之輸入資料。可例如使用量化程序將高位元深度資料轉換為目標位元深度。某些研究展示,10位元至12位元準確度結合PQ轉移足以提供具有低於恰可辨差異(JND)之失真的16f光闌之HDR資料。一般而言,JND係為了使差異可辨(例如,藉由HVS)而必須改變的某物(例如,視訊資料)之量。以10位元準確度表示之資料可進一步藉由大部分目前先進技術視訊寫碼解決方案進行寫碼。此量化為有損寫碼之元素且為引入至經轉換資料之不準確度的來源。 預期下一代HDR/WCG視訊應用將對以HDR及CG之不同參數擷取的視訊資料進行操作。不同組態之實例可為具有高達1000尼特或高達10,000尼特之峰值亮度的HDR視訊內容之擷取。不同色域之實例可包括BT.709、BT.2020以及SMPTE指定之P3或其他色域。 亦預期併有(或幾乎併有)所有其他當前使用之色域的單一色彩空間(例如,目標色彩容器)將在未來使用。此目標色彩容器之一個實例係BT.2020。支援單一目標色彩容器將顯著簡化HDR/WCG系統之標準化、實施及部署,此係因為操作點之減小數目(例如,色彩容器、色彩空間、色彩轉換演算法等之數目)及/或所需演算法之減小數目應由解碼器(例如,視訊解碼器30)支援。 在此系統之一個實例中,所擷取的具有不同於目標色彩容器(例如BT.2020)之天然色域(例如P3或BT.709)的內容可在處理之前(例如,在視訊編碼之前)轉換至目標容器。以下為此轉換之若干實例: 自BT.709至BT.2020色彩容器之RGB轉換: ○ R2020 = 0.627404078626 * R709 + 0.329282097415 * G709 + 0.043313797587 * B709 ○ G2020 = 0.069097233123 * R709 + 0.919541035593 * G709 + 0.011361189924 * B709 ○ B2020 = 0.016391587664 * R709 + 0.088013255546 * G709 + 0.895595009604 * B709 (1) 自P3至BT.2020色彩容器之RGB轉換: ○ R2020 = 0.753832826496 * RP3 + 0.198597635641 * GP3 + 0.047569409186 * BP3 ○ G2020 = 0.045744636411 * RP3 + 0.941777687331 * GP3 + 0.012478735611 * BP3 ○ B2020 = -0.001210377285 * RP3 + 0.017601107390 * GP3 + 0.983608137835 * BP3 (2) 在此轉換期間,由在P3或BT.709色域中擷取之信號之每一成分(例如,RGB、YUV、YCrCb等)佔用之值範圍在BT.2020表示中之可縮小。由於資料係以浮點準確度表示,因此無損失;然而,當與色彩轉換(例如,自RGB至YCrCB之轉換,在下文於方程式3中展示)及量化(下文方程式4中之實例)結合時,值範圍之收縮引起輸入資料的增加之量化錯誤。 ○ Y' = 0.2627 * R' + 0.6780 * G' + 0.0593 * B';(3) ○(4) 在方程式(4)中,DY ' 係經量化的Y'成分,DCb 係經量化的Cb,且DCr 係經量化的Cr成分。項目<<表示逐位元右移。BitDepthY 、BitDepthCr 及BitDepthCb 分別為經量化成分之所要位元深度。 另外,在現實世界寫碼系統中,利用縮小之動態範圍對信號進行寫碼可導致經寫碼色度成分之準確度的顯著損失,且可由觀看者觀察為寫碼假影,例如,色彩失配及/或滲色。 為解決上述問題,可考慮以下技術。一個實例技術涉及原生色彩空間處之HDR寫碼。在此技術中,HDR視訊寫碼系統將支援各種類型之當前已知色域,且允許視訊寫碼標準之擴展以支援未來色域。此支援將不僅限於支援不同色彩轉換變換(例如,RGB至YCbCr,及其反變換),並且將指定應用於色域中之每一者的變換函數。對此等多種工具之支援可為複雜及代價大的。 另一實例技術包括色域感知型視訊編解碼器。在此技術中,假想視訊編碼器經組態以估計輸入信號之天然色域且調整寫碼參數(例如,用於經寫碼色度成分之量化參數),以減少由減小之動態範圍產生的任何失真。然而,此技術將不能夠恢復可歸因於以上方程式(4)中所進行之量化而發生之準確度損失,此係因為所有輸入資料係以整數點準確度提供至典型編碼解碼器。 本發明描述用以執行動態範圍調整(DRA)以補償藉由色域轉換而引入至HDR信號表示之動態範圍變化的技術、方法及裝置。動態範圍調整可幫助阻止及/或減輕由色域轉換引起之任何失真,包括色彩失配、滲色等。在本發明之一或多個實例中,在編碼器側之量化(例如,藉由源器件12)之前及在解碼器側之反量化(例如,藉由目的地器件14)之後,對目標色彩空間(例如,YCbCr)之每一色彩成分之值進行DRA。 圖8為說明根據本發明之技術操作之實例HDR/WCG轉換裝置的方塊圖。在圖8中,實線指定資料流且虛線指定控制信號。本發明之該等技術可由源器件12之視訊預處理器單元19執行。如上文所論述,視訊預處理器單元19可為與視訊編碼器20分離之器件。在其他實例中,視訊預處理器單元19可與視訊編碼器20併入至同一個器件中。 如圖8所示,RGB原生CG視訊資料200經輸入至視訊預處理器單元19。在藉由視訊預處理器單元19進行之視訊預處理之情況下,RGB原生CG視訊資料200係由輸入色彩容器定義。輸入色彩容器指定用以表示視訊資料200之一組色彩原色(例如,BT.709、BT.2020、P3等)。在本發明之一個實例中,視訊預處理器單元19可經組態以將RGB原生CB視訊資料200之色彩容器及色彩空間兩者轉換至HDR之資料216之目標色彩容器及目標色彩空間。與輸入色彩容器相同,目標色彩容器可指定用以表示HDR之資料216之一組或色彩原色。在本發明之一個實例中,RGB原生CB視訊資料200可為HDR/WCG視訊,且可具有BT.2020或P3色彩容器(或任何WCG),且可在RGB色彩空間中。在另一實例中,RGB原生CB視訊資料200可為SDR視訊,且可具有BT.709色彩容器。在一個實例中,HDR之資料216之目標色彩容器可能已針對HDR/WCG視訊經組態(例如,BT.2020色彩容器)且可使用對於視訊編碼更為最佳之色彩空間(例如,YCrCb)。 在本發明之一個實例中,CG轉換器202可經組態以將RGB原生CG視訊資料200之色彩容器自輸入色彩容器(例如,第一色彩容器)轉換至目標色彩容器(例如,第二色彩容器)。作為一個實例,CG轉換器202可將RGB原生CG視訊資料200自BT.709色彩表示轉換至BT.2020色彩表示(其實例於下文展示)。 將RGB BT.709樣本(R709 , G709 , B709 )轉換至RGB BT.2020樣本(R2020 , G2020 , B2020 )之程序可用兩步轉換來實施,該兩步轉換涉及首先轉換至XYZ表示,繼而使用適當轉換矩陣進行自XYZ至RGB BT.2020之轉換。 X = 0.412391 * R709 + 0.357584 * G709 + 0.180481 * B709 Y = 0.212639 * R709 + 0.715169 * G709 + 0.072192 * B709 (5) Z = 0.019331 * R709 + 0.119195 * G709 + 0.950532 * B709 自XYZ至R2020 G2020 B2020 (BT.2020)之轉換 R2020 = clipRGB( 1.716651 * X - 0.355671 * Y - 0.253366 * Z ) G2020 = clipRGB( -0.666684 * X + 1.616481 * Y + 0.015768 * Z ) (6) B2020 = clipRGB( 0.017640 * X - 0.042771 * Y + 0.942103 * Z ) 類似地,單一步驟且建議之方法如下: R2020 = clipRGB( 0.627404078626 * R709 + 0.329282097415 * G709 + 0.043313797587 * B709 ) G2020 = clipRGB( 0.069097233123 * R709 + 0.919541035593 * G709 + 0.011361189924 * B709 ) (7) B2020 = clipRGB( 0.016391587664 * R709 + 0.088013255546 * G709 + 0.895595009604 * B709 ) CG轉換之後的所得視訊資料在圖8中展示為RGB目標CG視訊資料204。在本發明之其他實例中,輸入資料及輸出HDR之資料之色彩容器可相同。在此實例中,CG轉換器202不必對RGB原生CG視訊資料200執行任何轉換。 接下來,轉移函數單元206壓縮RGB目標CG視訊資料204之動態範圍。轉移函數單元206可經組態以應用轉移函數以壓縮動態範圍,其方式與上文參看圖5所述的相同。色彩轉換單元208將RGB目標CG色彩資料204自輸入色彩容器之色彩空間(例如,RGB)轉換至目標色彩容器之色彩空間(例如,YCrCb)。如上文參看圖5所解釋,色彩轉換單元208將經壓縮資料轉換至更緊密或穩固之色彩空間(例如,YUV或YCrCb色彩空間)中,該色彩空間更適合於由混合式視訊編碼器(例如,視訊編碼器20)進行之壓縮。 調整單元210經組態以根據藉由DRA參數估計單元212導出之DRA參數來執行經色彩轉換之視訊資料之動態範圍調整(DRA)。一般而言,在藉由CG轉換器202進行之CG轉換及藉由轉移函數單元206進行之動態範圍壓縮之後,所得視訊資料之實際色值可能不會使用為特定目標色彩容器之色域分配的所有可獲得碼字(例如,表示每一色彩之獨特位元序列)。亦即,在某些情況下,RGB原生CG視訊資料200自輸入色彩容器至輸出色彩容器之轉換可將視訊資料之色值(例如,Cr及Cb)過度壓縮,以使得所得經壓縮視訊資料並不高效地使用所有可能色彩表示。如上文所解釋,利用色彩之縮小動態範圍對信號進行寫碼可導致經寫碼色度成分之準確度的顯著損失,且可由觀看者觀察為寫碼假影,例如,色彩失配及/或滲色。 調整單元210可經組態以將DRA參數應用於視訊資料(例如,動態範圍壓縮及色彩轉換之後的RGB目標CG視訊資料204)之色彩成分(例如,YCrCb),以充分利用可用於特定目標色彩容器之碼字。調整單元210可在像素層級將DRA參數應用於視訊資料。一般而言,DRA參數定義將用以表示實際視訊資料之碼字擴展至儘可能多的可用於目標色彩容器之碼字的功能。 在本發明之一個實例中,該等DRA參數包括應用於視訊資料之成分的比例值及偏移值。一般而言,視訊資料之色彩成分之值範圍愈低,可使用的縮放因數愈大。偏移參數可用以使色彩成分之值以用於目標色彩容器之可用碼字之中心為中心。舉例而言,若目標色彩容器每個色彩成分包括1024個碼字,則可選擇偏移值,以使得中心碼字移動至碼字512(例如,最中間之碼字)。在其他實例中,偏移參數可用以提供輸入碼字至輸出碼字之較佳映射,以使得目標色彩容器中之總體表示在對抗寫碼假影時更有效。 在一個實例中調整單元210如下所述地將DRA參數應用於目標色彩空間(例如,YCrCb)中之視訊資料: - Y'' = scale1 *Y' + offset1 - Cb'' = scale2 *Cb' + offset2 (8) - Cr'' = scale3 *Cr' + offset3 其中信號成分Y'、Cb'及Cr'為由RGB至YCbCr轉換(方程式3中之實例)產生之信號。請注意,Y'、Cr'及Cr'亦可為由視訊解碼器30解碼之視訊信號。Y''、Cb''及Cr''為DRA參數已應用於每一色彩成分之後的視訊信號之色彩成分。如在以上實例中可見,每一色彩成分與不同的比例及偏移參數相關。舉例而言,scale1及offset1用於Y'成分,scale2及offset2用於Cb'成分,且scale3及offset3用於Cr'成分。應理解,此僅為實例。在其他實例中,相同的比例值及偏移值可用於每個色彩成分。 在其他實例中,每一色彩成分可與多個比例及偏移參數相關聯。舉例而言,Cr或Cb色彩成分之色度值之實際分佈對於碼字之不同分割區或範圍可能不同。作為一個實例,與低於中心碼字相比,可使用更多的高於中心碼字(例如,碼字512)之獨特碼字。在此實例中,調整單元210可經組態以針對高於中心碼字(例如,具有大於中心碼字之值)之色度值應用比例及偏移參數之一個集合,且針對低於中心碼字(例如,具有小於中心碼字之值)之色度值應用比例及偏移參數之一不同集合。 如在以上實例中可見,調整單元210將比例及偏移DRA參數應用作為線性函數。因而,調整單元210並非必需在藉由色彩轉換單元208進行之色彩轉換之後在目標色彩空間中應用DRA參數。此係因為色彩轉換本身係線性程序。因而,在其他實例中,調整單元210可在任何色彩轉換程序之前將DRA參數應用於原生色彩空間(例如,RGB)中之視訊資料。在此實例中,色彩轉換單元208將在調整單元210應用DRA參數之後應用色彩轉換。 在本發明之另一實例中,調整單元210可如下所述地在目標色彩空間或原生色彩空間中應用DRA參數: - Y'' = (scale1 *(Y' - offsetY) + offset1) + offsetY; - Cb'' = scale2 *Cb' + offset2 (9) - Cr'' = scale3 *Cr' + offset3 在此實例中,參數scale1、scale2、scale3、offset1、offset2及offset3具有如上所述之相同含義。參數offsetY為反映信號之亮度之參數,且可等於Y'之平均值。在其他實例中,類似於offset Y之偏移參數可應用於Cb'及Cr'成分,以更好地保留輸入表示及輸出表示中之中心值之映射。 在本發明之另一實例中,調整單元210可經組態以在除原始色彩空間或目標色彩空間以外之色彩空間中應用DRA參數。一般而言,調整單元210可經組態以如下所述地應用DRA參數: - A' = scale1 *A + offset1; - B' = scale2 *B + offset2 (10) - C' = scale3 *C + offset3 其中信號成分A、B及C為不同於目標色彩空間之色彩空間(例如,RGB或中間色彩空間)中之信號成分。 在本發明之其他實例中,調整單元210經組態以將線性轉移函數應用於視訊以執行DRA。此轉移函數不同於由轉移函數單元206用以壓縮動態範圍之轉移函數。類似於上文所定義之比例及偏移術語,由調整單元210應用之轉移函數可用以擴充色值且使色值以目標色彩容器中之可用碼字為中心。應用轉移函數以執行DRA之實例展示如下。 - Y'' = TF2 (Y') - Cb'' = TF2 (Cb') - Cr'' = TF2 (Cr') 項TF2指定由調整單元210應用之轉移函數。在一些實例中,調整單元210可經組態以將不同轉移函數應用於成分中之每一者。 在本發明之另一實例中,調整單元210可經組態以在單一程序中與色彩轉換單元208之色彩轉換結合而應用DRA參數。亦即,可組合調整單元210及色彩轉換單元208之線性函數。下面展示組合應用之實例,其中f1及f2為RGB至YCbCr矩陣及DRA縮放因數之組合。在本發明之另一實例中,在應用DRA參數之後,調整單元210可經組態以執行剪裁程序,從而防止視訊資料具有在針對特定目標色彩容器所指定之碼字範圍外的值。在某些情況下,由調整單元210應用之比例及偏移參數可使某些色彩成分值超過可允許碼字之範圍。在此情況下,調整單元210可經組態以將超過範圍之成分之值裁剪至範圍中之最大值。 由調整單元210應用之DRA參數可由DRA參數估計單元212判定。DRA參數估計單元212用來更新DRA參數之頻率及時間例項係靈活的。舉例而言,DRA參數估計單元212可從時間層級上更新DRA參數。亦即,針對圖像群組(GOP)或單一圖像(圖框)可判定新DRA參數。在此實例中,RGB原生CG視訊資料200可為GOP或單一圖像。在其他實例中,DRA參數估計單元212可從空間層級上(例如,在圖塊方塊或區塊層級)更新DRA參數。在此上下文中,視訊資料區塊可為巨集區塊、編碼樹單元(CTU)、寫碼單元或任何其他大小及形狀之區塊。區塊可為正方形、矩形或任何其他形狀。相應地,可使用DRA參數以達成更加高效的時間及空間預測及寫碼。 在本發明之一個實例中,DRA參數估計單元212可基於RGB原生CG視訊資料200之天然色域於目標色彩容器之色域的對應而導出該等DRA參數。舉例而言,給定特定天然色域(例如,BT.709)及目標色彩容器之色域(例如,BT.2020),DRA參數估計單元212可使用一組預定義規則來判定比例值及偏移值。 舉例而言,假定天然色域及目標色彩容器係以xy空間中之色彩原色座標及白點座標之形式定義。用於BT.709及BT.2020之此資訊之一個實例展示於下文之表2中。 2- RGB 色彩空間參數 在一個實例中,BT.2020係目標色彩容器之色域且BT.709係原生色彩容器之色域。在此實例中,調整單元210將DRA參數應用於YCbCr目標色彩空間。DRA參數估計單元212可經組態以估計DRA參數且將該等參數轉送至調整單元210,如下所述。 scale1 = 1; offset1 = 0; scale2 = 1.0698; offset2 = 0; scale3 = 2.1735; offset3 = 0; 作為另一實例,在BT.2020係目標色域且P3係天然色域且在YCbCr目標色彩空間中應用DRA的情況下,DRA參數估計單元212可經組態以估計DRA參數如下: scale1 = 1; offset1 = 0; scale2 = 1.0068; offset2 = 0; scale3 = 1.7913; offset3 = 0; 在以上實例中,DRA參數估計單元212可經組態以藉由查閱指示將使用之DRA參數(給定特定天然色域及特定目標色域)的查找表來判定上文列出的比例值及偏移值。在其他實例中,DRA參數估計單元212可經組態以根據天然色域及目標色域之原色及白色空間值來計算該等DRA參數,例如,如表2中所示。 舉例而言,考慮由原色座標(xXt,yXt)指定之目標(T)色彩容器,其中針對R、G、B色彩成分陳述X:及由原色座標(xXn,yXn)指定之原生(N)色域,其中針對R、G、B色彩成分陳述X:兩個色域之白點座標等於whiteP=(xW,yW)。DRA參數估計單元212可依據原色座標至白點之間的距離而導出用於DRA之scale2及scale3參數。此估計之一個實例給定如下: rdT = sqrt((primeT(1,1) - whiteP(1,1))^2 + (primeN(1,2) - whiteP(1,2))^2) gdT = sqrt((primeT(2,1) - whiteP(1,1))^2 + (primeN(2,2) - whiteP(1,2))^2) bdT = sqrt((primeT(3,1) - whiteP(1,1))^2 + (primeN(3,2) - whiteP(1,2))^2) rdN = sqrt((primeN(1,1) - whiteP(1,1))^2 + (primeN(1,2) - whiteP(1,2))^2) gdN = sqrt((primeN(2,1) - whiteP(1,1))^2 + (primeN(2,2) - whiteP(1,2))^2) bdN = sqrt((primeN(3,1) - whiteP(1,1))^2 + (primeN(3,2) - whiteP(1,2))^2) scale2 = bdT/bdN scale3 = sqrt ( (rdT/rdN)^2 + (gdT/gdN)^2 ) 在一些實例中,DRA參數估計單元212可經組態以藉由根據RGB原生CG視訊資料200中之色彩值之實際分佈(而非根據天然色域之預定義原色值)判定primeN中之原色座標來估計該等DRA參數。亦即,DRA參數估計單元212可經組態以分析存在於RGB原生CG視訊資料200中之實際色彩,且在上述函數中使用根據此分析判定之原色色彩及白點來計算DRA參數。可使用對上文所定義之某些參數之近似作為DRA以促進該計算。舉例而言,在某些架構中,可將scale3 = 2.1735近似為scale3 = 2,其允許更容易實施。 在本發明之其他實例中,DRA參數估計單元212可經組態以不僅基於目標色彩容器之色域,而且基於目標色彩空間來判定該等DRA參數。成分值之值的實際分佈在色彩空間與色彩空間之間可不同。舉例而言,與具有非恆定明度之YCbCr色彩空間相比,對於具有恆定明度之YCbCr色彩空間而言,色度值分佈可不同。DRA參數估計單元212可使用不同色彩空間之色彩分佈來判定該等DRA參數。 在本發明之其他實例中,DRA參數估計單元212可經組態以導出DRA參數之值,以便將與預處理及/或編碼視訊資料相關聯之特定成本函數減至最小。作為一個實例,DRA參數估計單元212可經組態以估計最小化上文由量化單元214引入之量化錯誤(例如,參見方程式(4))的DRA參數。DRA參數估計單元212可藉由對已應用了DRA參數之不同集合之視訊資料執行量化錯誤測試而將此錯誤減至最小。在另一實例中,DRA參數估計單元212可經組態而以感知方式估計將由量化單元214引入之量化錯誤減至最小的DRA參數。DRA參數估計單元212可基於對已應用了DRA參數之不同集合之視訊資料的感知錯誤測試而將此錯誤減至最小。DRA參數估計單元212接著可選擇產生最少量化錯誤之DRA參數。 在另一實例中,DRA參數估計單元212可選擇將與由調整單元210執行之DRA及由視訊編碼器20執行之視訊編碼兩者相關聯之成本函數減至最小的DRA參數。舉例而言,DRA參數估計單元212可利用DRA參數之多個不同集合來執行DRA及對視訊資料進行編碼。DRA參數估計單元212接著可藉由形成由DRA及視訊編碼引起之位元速率以及由此等兩種有損程序引入之失真之加權總和來計算用於DRA參數之每一集合之成本函數。DRA參數估計單元212接著可選擇將成本函數減至最小的DRA參數集合。 在針對DRA參數估計之以上技術中之每一者中,DRA參數估計單元212可使用關於成分之資訊針對每一成分單獨地判定DRA參數。在其他實例中,DRA參數估計單元212可使用交叉成分資訊來判定DRA參數。舉例而言,針對Cr成分導出之DRA參數可用以導出用於Cb成分之DRA參數。 除導出DRA參數外,DRA參數估計單元212亦可經組態以在經編碼位元串流中發信該等DRA參數。DRA參數估計單元212可直接發信指示DRA參數之一或多個語法元素,或可經組態以將一或多個語法元素提供至視訊編碼器20以供於發信。參數之此等語法元素可在位元串流中發信,以使得視訊解碼器30及/或視訊後處理器單元31可執行視訊預處理器單元19之程序之逆轉,從而以原生色彩容器重建構視訊資料。在下文論述用於發信DRA參數之實例技術。 在一個實例中,DRA參數估計單元212可在以下各者中發信一或多個語法元素:作為後設資料之經編碼視訊位元串流、補充增強資訊(SEI)訊息、視訊可用性資訊(VUI)、視訊參數集合(VPS)、序列參數集合(SPS)、圖像參數集合、片段標頭、CTU標頭或適合於指示用於視訊資料之大小之DRA參數的任何其他語法結構(例如,GOP、圖像、區塊、巨集區塊、CTU等)。 在一些實例中,該一或多個語法元素明確地指示DRA參數。舉例而言,該一或多個語法元素可為用於DRA之各種比例值及偏移值。在其他實例中,該一或多個語法元素可為至包括用於DRA之比例值及偏移值之一查找表中之一或多個索引。在再一實例中,該一或多個語法元素可為至指定供DRA使用之線性轉移函數之一查找表之索引。 在其他實例中,未明確地發信該等DRA參數,實情為,視訊預處理器單元19及視訊後處理器單元31兩者經組態以使用相同預定義程序使用相對於位元串流可辨別之視訊資料的相同資訊及/或特性來導出該等DRA參數。作為一個實例,視訊後處理器單元31可經組態以在經編碼位元串流中指示視訊資料之原生色彩容器以及經編碼視訊資料之目標色彩容器。視訊後處理器單元31接著可經組態以使用如上所定義之相同程序根據此資訊導出該等DRA參數。在一些實例中,識別原生及目標色彩容器之一或多個語法元素係在語法結構中供應。此等語法元素可顯式地指示色彩容器,或可為查找表之索引。在另一實例中,視訊預處理器單元19可經組態以發信指示色彩原色之XY值及用於特定色彩容器之白點的一或多個語法元素。在另一實例中,視訊預處理器單元19可經組態以基於由DRA參數估計單元212執行之分析而發信指示視訊資料中之色彩原色之XY值及實際色彩值之白點(內容原色及內容白點)的一或多個語法元素。 作為一個實例,可發信含有內容中之色彩之最小色域的色彩原色,且在視訊解碼器30及/或視訊後處理器單元31處,使用容器原色及內容原色兩者導出該等DRA參數。在一個實例中,如上所述,使用用於R、G及B之x及y成分來發信內容原色。在另一實例中,內容原色可作為兩個已知主要集合之間的比率而發信。舉例而言,內容原色可作為BT.709原色與BT.2020原色之間的線性位置而發信:xr_content = alfar * xr_bt709 + (1-alfar ) * xr_bt2020 (類似方程式具有用於G及B成分之alfag 及alfab ),其中參數alfar 指定兩個已知主要集合之間的比率。在一些實例中,所發信及/或所導出之DRA參數可供視訊編碼器20及/或視訊解碼器30使用以基於用於寫碼HDR/WCG視訊資料之技術促進加權預測。 在利用加權預測之視訊寫碼方案中,根據以權重(Wwp )及偏移(Owp )取得的參考圖像Sr之樣本(針對單向預測)來預測當前經寫碼圖像Sc之樣本,此將產生預測樣本Sp: Sp= Sr * Wwp + Owp 。 在利用DRA之一些實例中,可用使用不同參數(即,針對當前圖像之{ scale1cur , offset1cur }及針對參考圖像之{ scale1ref , offset1ref })之DRA對參考及當前經寫碼圖像之樣本進行處理。在此等實施例中,加權預測之參數可自DRA導出,例如: Wwp = scale1cur / scale1ref Owp = offset1cur - offset1ref 在調整單元210應用DRA參數之後,視訊預處理器單元19接著可使用量化單元214將視訊資料量化。量化單元214可以與上文參看圖4所述之方式相同的方式操作。在量化之後,現在於HDR之資料216之目標原色之目標色彩空間及目標色域中對視訊資料進行調整。接著可將HDR之資料216發送至視訊編碼器20以供壓縮。 圖9為說明根據本發明之技術之實例HDR/WCG逆轉換裝置的方塊圖。如圖9所示,視訊後處理器單元31可經組態以應用由圖8之視訊預處理器單元19執行之該等技術之逆轉。在其他實例中,視訊後處理器單元31之技術可併入視訊解碼器30中且藉由視訊解碼器執行。 在一個實例中,視訊解碼器30可經組態以解碼由視訊編碼器20編碼之視訊資料。接著將經解碼視訊資料(目標色彩容器中之HDR之資料316)轉送至視訊後處理器單元31。反量化單元314對HDR之資料316執行反量化程序以逆轉由圖8之量化單元214執行之量化程序。 視訊解碼器30亦可經組態以解碼由圖8之DRA參數估計單元212產生之一或多個語法元素中之任一者且將語法元素發送至視訊後處理器單元31之DRA參數導出單元312。如上所述,DRA參數導出單元312可經組態以基於一或多個語法元素來判定DRA參數。在一些實例中,一或多個語法元素明確地指示DRA參數。在其他實例中,DRA參數導出單元312經組態以使用供圖8之DRA參數估計單元212使用之相同技術來導出DRA參數。 將由DRA參數導出單元312導出之參數發送至反調整單元310。反調整單元310使用該等參數執行由調整單元210執行之線性DRA調整之逆轉。反調整單元310可應用上文針對調整單元210所描述之調整技術中之任一者的逆轉。另外,如同調整單元210一樣,反調整單元310可在任何反色彩轉換之前或之後應用反DRA。因而,反調整單元310可對目標色彩容器或原生色彩容器中之視訊資料應用DRA參數。在一些實例中,可定位反調整單元310以在反量化單元314之前應用反調整。 反色彩轉換單元308將視訊資料自目標色彩空間(例如,YCbCr)轉換至原生色彩空間(例如,RGB)。反轉移函數306接著應用由轉移函數206應用之轉移函數之反轉,以解壓縮視訊資料之動態範圍。在一些實例中,所得視訊資料(RGB目標CG 304)仍在目標色域中,但現在處於原生動態範圍及原生色彩空間中。接下來,反CG轉換器302將RGB目標CG 304轉換至天然色域以重建構RGB原生CG 300。 在一些實例中,額外後處理技術可由視訊後處理器單元31使用。應用DRA可使視訊處於其實際天然色域外。由量化單元214及反量化單元314執行之量化步驟以及由調整單元210及反調整單元310執行之增頻取樣及降頻取樣技術可有助於原生色彩容器中之所得色值在天然色域外。當已知天然色域(或如上所述,在發信情況下,實際最小內容原色)時,則可將額外程序應用於RGB原生CG視訊資料304,以將色值(例如,RGB或Cb及Cr)變換回至預期色域中,如針對DRA的後處理。在其他實例中,可在量化之後或在DRA應用之後應用此後處理。 如上文所提及,若干SEI訊息可用以傳達關於用於視訊資料之各種色彩成分之動態範圍調整資訊的資訊。成分縮放SEI訊息(諸如上文所描述及下文更詳細描述的)可傳達可用以指示用於視訊資料之各種色彩成分之映射資訊的一組比例因數、偏移及範圍(例如,碼字值之分割區)。映射資訊可用以向視訊解碼器30及/或視訊後處理器單元31指示如何擴大或縮小樣本值之不同範圍,以使得重建構之HDR視訊資料之總體品質或重建構之SDR視訊資料之品質(在需要回溯相容性之一些情況下)得到改良,或使重建構之輸出更適合於顯示器能力。 以下表3提供成分縮放SEI訊息之語法結構中一個變體。應注意,以下語法元素之名稱含有首碼「hdr_recon_」,其不同於以下實例中所描述之首碼,其中語法元素之名稱以component_scaling為前綴,且語法表另外相同。 3- 實例範圍調整 SEI 語法 以下呈現表3之SEI語法之語義。 映射程序係基於片段線性函數map[ c ]() (其中c=0..hdr_recon_num_comps_minus1),該等函數如下所述地將[0,1]中之值x映射至值y = map[ c ]( x )。 — 對於i在0至hdr_recon_num_ranges[ c ] - 1 (包括0及hdr_recon_num_ranges[ c ] - 1 )範圍內,以下適用: — 值ScaleValue[ c ][ i ]係如語法元素hdr_recon_scale_val[ c ][ i ]之語義中所描述地導出。 — 值RangeValue[ c ][ i ]係如語法元素hdr_recon_range_val[ c ][ i ]之語義中所描述地導出。 — 值InputRanges[ c ][ i ]及OutputRanges[ c ][ i ] (其中i在0至hdr_recon_num_ranges[ c ] - 1範圍中(包括0及hdr_recon_num_ranges[ c ] - 1))係如下所述地導出: — 若i等於0,則以下適用: OutputRanges[ c ][ i ] = - hdr_recon_global_offset_val[ c ] * ScaleValue[ c ][ i - 1 ] (D-xx) InputRanges[ c ][ i ] = 0 (D-xx) — 否則(i不等於0),以下適用: InputRanges[ c ][ i ] = InputRanges[ c ][ i − 1 ] + RangeValue[ c ][ i - 1 ] (D-xx) OutputRanges[ c ][ i ] = OutputRanges[ c ][ i − 1 ] + RangeValue[ c ][ i - 1 ] * ScaleValue[ c ][ i - 1 ] (D-xx) — 值OffsetValue[ c ][ i ] (其中i在0至hdr_recon_num_ranges[ c ] - 1範圍中(包括0及hdr_recon_num_ranges[ c ] - 1))係如下所述地導出: OffsetValue[ c ][ i ] = InputRanges[ c ][ i + 1 ] − OutputRanges[ c ][ i + 1 ] 􀀀 ScaleValue[ c ][ i - 1 ] (D-xx) — 參數y = map[ c ]( x )係如下所述地導出: — 若x小於或等於OutputRanges[ c ][ 0 ],則以下適用: y = InputRanges[ c ][ 0 ] (D-xx) — 否則,若x大於OutputRanges[ c ][ hdr_recon_num_ranges[ c ] ],則以下適用: y = InputRanges[ c ][ hdr_recon_num_ranges[ c ] ] (D-xx) — 否則,以下適用: for( i = 1; i < = hdr_recon_num_ranges[ c ]; i++ ) if( OutputRanges[ i - 1 ] < x && x < = OutputRanges[ i ] ) y = x ÷ ScaleValue[ c ][ i - 1 ] + OffsetValue[ c ][ i - 1 ] (D-xx) 已識別出與成分縮放資訊SEI訊息及可適用於調整成分之動態範圍之其他參數相關聯的若干問題。詳言之,已識別出與用以導出比例值及偏移值之浮點數之使用以及用於樣本值之碼字之範圍(例如,RGB值、YCrCb值、YUV值、XYZ值等)相關之問題。舉例而言,在位元串流中發信之比例值在解碼器側(例如,藉由視訊後處理器31)使用,以執行反動態範圍調整程序。然而,為了將比例值用於計算樣本值之範圍及用於計算映射程序,在視訊後處理器31處執行互逆操作。針對成分縮放SEI訊息之先前實例語義指定將乘以樣本值之互逆(例如,比例值之互逆,或比例值及附加偏移值之互逆)的使用。在此互逆操作中引入之誤差將顯著大於轉送操作中之潛在誤差,此係因為互逆被應用於所產生之每一個樣本值。 成分縮放SEI訊息之語義指示樣本值範圍之導出程序,及關於浮點操作的至色彩成分(例如,樣本值)之每一碼字範圍的映射程序(例如,比例值及偏移值之應用)。此可以產生重建構之HDR輸出基於不同計算系統中之各種浮點算術實施的差異。 本申請案描述用以改良使用SEI發信及處理來通信成分縮放資訊之若干技術,或可在視訊寫碼標準(諸如H.265/HEVC、H.264/AVC、BDA、MPEG或其他標準)中指定之其他類似發信技術。應認識到,以下態樣中之一或多者可獨立地應用,或以與任何特定實例中之此等態樣之其他態樣之合適組合而應用。 一般而言,本發明描述多種技術,其中視訊編碼器20及/或視訊預處理器單元19可經組態以發信用於成分樣本值(例如,色彩成分值)之一或多個樣本值範圍之比例值。指定比例值,以使得視訊解碼器30及視訊後處理器單元31可經組態以執行映射程序,從而藉由以下操作而自成分之輸入樣本值獲得輸出樣本值:將針對含有輸入樣本值之特定樣本值範圍指定之比例值乘以輸入樣本值,及添加基於作為成分縮放資訊之部分之參數而計算出之偏移。 在本發明之另一實例中,並非使用浮點實施來計算色彩成分之碼字之範圍的大小及數目,視訊編碼器20及/或視訊預處理器單元19可經組態以使用固定點計算實施來導出色彩成分之碼字之範圍的大小及數目。舉例而言,視訊編碼器20及/或視訊預處理器單元19可經組態以使用預定數目個分數位元來判定及應用動態範圍調整映射程序之參數。應注意,分數位元之數目針對動態範圍調整程序之每一參數(例如,每一色彩成分(碼字)之值的範圍、比例值及偏移值)可不同。 舉例而言,視訊預處理器單元19可經組態以對用以傳達色彩成分之碼字之範圍的大小及數目的任何參數或語法元素(例如,hdr_recon_num_ranges[ c ])執行整數操作。視訊預處理器單元19可經組態以記住供所使用之固定點實施中的範圍之大小及數目之任何計算之分數部分使用的位元之數目。視訊預處理器單元19及/或視訊編碼器20可經組態以發信SEI訊息中之分數部分中所使用的位元之數目(例如,hdr_recon_offset_frac_bit_depth、hdr_recon_scale_frac_bit_depth),或用於分數部分中之位元之數目可為預定值。視訊解碼器30可經組態以解碼SEI訊息中指示分數部分中之位元之數目的語法元素,且視訊後處理器單元31可經組態以使用反動態範圍調整程序之參數中之一或多者的分數部分中之相同數目個位元來執行反動態範圍調整程序。 在本發明之一個實例中,當判定用於映射程序之範圍及/或其他參數時,視訊解碼器30及/或視訊後處理器單元31可經組態以判定此等參數,使得當不同參數之發信的分數位元深度不同時,針對參數所執行之計算之準確度儘可能地保持。舉例而言,視訊解碼器30及/或視訊後處理器單元31可經組態以藉由累積用以判定特定參數之任何中間計算步驟中的分數位元之數目來保持由捨位至最小值引入之任何誤差。視訊解碼器30及/或視訊後處理器單元31接著可在判定及/或計算特定參數之最後步驟執行裁剪程序以使特定參數之最終值達到所要的分數準確度。在另一實例中,當參數之發信的分數位元深度相同時,視訊解碼器30及/或視訊後處理器單元31可經組態以累積中間步驟中之分數位元之數目,且在最後步驟執行裁剪以使參數之最終值達到所要準確度。 在另一實例中,視訊解碼器30及/或視訊後處理器單元31可經組態以裁剪及/或截斷計算程序之一或多個中間步驟的參數之值或該參數,以使得針對該參數所獲得之值的分數部分減小至預定值。亦即,並非一直等到判定參數之最終值以執行任何裁剪,視訊解碼器30及/或視訊後處理器單元31可裁剪經執行之計算的中間值以判定參數。此裁剪或截斷可基於SEI訊息中所指示的分數位元之數目。在另一實例中,當判定若操作/步驟係無裁剪地執行,則分數位元之累積數目將超過某一預定值(例如,用以儲存中間值之暫存器之位元深度)時,視訊解碼器30及/或視訊後處理器單元31可經組態以在特定操作/步驟之前裁剪及/或截斷當計算特定參數時所使用之中間值。 在本發明之另一實例中,視訊預處理器單元19及/或視訊後處理器單元31可經組態以基於針對色彩成分之固定表示所定義之經定義最小值及最大值而根據預定樣本值範圍導出比例值、偏移值及範圍值。舉例而言,色彩成分之固定表示可具有經定義的複數個值範圍,例如,「標準」值範圍、「完全」值範圍及「受限」值範圍。與「標準」值範圍(例如,YCbCr色彩空間之8位元標準範圍表示,Y成分可選取16至235範圍中(包括16及235)之值,且Cb及Cr成分可選取16與240之間的值(包括16及240))相比,「完全」值範圍可具有特定成分之最小值與最大值之間的較大跨度(例如,對於YCbCr色彩空間之8位元全範圍表示,Y、Cb及Cr成分可選取0至255範圍中(包括0及255)之值)。與「標準」值範圍相比,「受限」值範圍可具有特定成分之最小值與最大值之間的較小跨度(例如,對於YCbCr色彩空間之10位元受限範圍表示,Y、Cb及Cr成分可選取4至1019範圍中(包括4及1019)之值)。 在一個實例中,視訊編碼器20及/或視訊預處理器單元19可經組態以發信語法元素(例如,在SEI訊息中)以向視訊解碼器30及/或視訊後處理器單元31指示基於所使用之樣本範圍(例如,完全、受限、標準或其他)的樣本(例如,色彩成分值)之最小及最大准許值。在另一實例中,視訊編碼器20及/或視訊預處理器單元19可經組態以發信基於所使用之樣本範圍(例如,完全、受限、標準)向視訊解碼器指示樣本之最小及最大准許值的一或多個語法值(例如,在SEI訊息中)。視訊解碼器30及/或視訊後處理器單元31接著可基於接收之最小值及接收之最大值而判定反動態範圍調整程序所允許的成分值之範圍。 在另一實例中,視訊編碼器20及/或視訊預處理器單元19可經組態以發信一旗標(例如,在SEI訊息中)以指示比例值是否有正負號或無正負號。在此實例中,不管旗標之值如何,任何SEI訊息之剖析程序係相同的。 以下部分包括使用先前部分中所揭示之實例技術的實施例之若干實例。在此實施例中,成分縮放函數係發信為查找表,且亦發信用以發信定義查找表之點的位元之數目。在一個實例中,查找定義片段線性映射函數。查找表之點對應於定義片段線性映射之(x,y)座標。對於不具有發信之明確點之樣本值,基於相鄰支點對值進行內插。 範圍及輸出樣本值之導出程序定義為如下。 來自成分c之樣本x至樣本y = map[ c ]( x )之映射指定如下: — 設定DefaultPrecShift之值等於9 — 令變數minSampleVal及maxSampleVal表示如內容之樣本範圍所界定之最小及最大樣本值。 — 變數ScaleValue[ c ][ i ] (其中i在0至hdr_recon_num_ranges[ c ] - 1範圍中(包括0及hdr_recon_num_ranges[ c ] - 1))係如下所述地導出: SignValue[ c ][ i ] = 0 // 0 for positive, 1 for negative hdrReconScaleBitDepth = hdr_recon_scale_bit_depth - ( hdr_negative_scales_present_flag ? 1 : 0 ) if( hdr_negative_scales_present_flag ) ScaleValue[ c ][ i ] = hdr_recon_scale_val[ c ][ i ] & ( (1 << hdrReconScaleBitDepth ) - 1 ) (D-xx) SignValue[ c ][ i ] = hdr_recon_scale_val[ c ][ i ] & ( 1 << hdrReconScaleBitDepth ) else ScaleValue[ c ][ i ] = hdr_recon_scale_val[ c ][ i ] (D-xx) shiftInvScale = 1 << hdrReconScaleBitDepth InvScaleValue[ c ][ i ] = ( 1 << (DefaultPrecShift + hdrReconScaleBitDepth) + shiftInvScale ) / ScaleValue[ c ][ i ] — 變數RangeValue[ c ][ i ](其中i在0至hdr_recon_num_ranges[ c ] - 1範圍中(包括0及hdr_recon_num_ranges[ c ] - 1)係如下所述地導出: — 若hdr_recon_equal_ranges_flag[ c ]等於0,則以下適用: RangeValue[ c ][ i ] = hdr_recon_range_val[ c ][ i ] (D-xx) — 否則(hdr_recon_equal_ranges_flag[ c ]等於1),則以下適用: RangeValue[ c ][ i ] = ( ( InputDynamicRangeValue << hdr_recon_offset_frac_bit_depth ) + ( ( hdr_recon_num_ranges[ c ] + 1 ) >> 1 ) ) / hdr_recon_num_ranges[ c ] (D-xx) 其中當將樣本範圍自0正規化至1時,InputDynamicRangeValue等於1。 — 變數InputRanges[ c ][ i ]及OutputRanges[ c ][ i ](其中i在0至hdr_recon_num_ranges[ c ]範圍中(包括0及hdr_recon_num_ranges[ c ]))係如下所述地導出: — 若i等於0,則以下適用: OutputRanges[ c ][ i ] = − hdr_recon_global_offset_val[ c ] * InvScaleValue[ c ][ i - 1 ] (D-xx) InputRanges[ c ][ i ] = 0 (D-xx) — 否則(i不等於0),以下適用: InputRanges[ c ][ i ] = InputRanges[ c ][ i − 1 ] + RangeValue[ c ][ i - 1 ] (D-xx) OutputRanges[ c ][ i ] = OutputRanges[ c ][ i − 1 ] + RangeValue[ c ][ i - 1 ] * InvScaleValue[ c ][ i - 1 ] (D-xx) — 參數OffsetValue[ c ][ i ] (其中i在0至hdr_recon_num_ranges[ c ] - 1範圍中(包括0及hdr_recon_num_ranges[ c ] - 1))係如下所述地導出: precOffsetDeltaBits = DefaultPrecShift + hdr_recon_scale_frac_bit_depth OffsetValue[ c ][ i ] = InputRanges[ c ][ i + 1 ] * (1 << precOffsetDeltaBits) − OutputRanges[ c ][ i + 1 ] * ScaleValue[ c ][ i - 1 ] (D-xx) OffsetValue[ c ][ i ] = ( ( OffsetValue[ c ][ i ] + ( 1 << (BitDepth - 1) ) ) >> BitDepth ) * ( maxSampleVal - minSampleVal ) — 參數y = map[ c ]( x )係如下所述地導出: — 變數bitDepthDelta設定等於DefaultPrecShift + hdr_recon_offset_frac_bit_depth - BitDepth — 若( x << bitDepthDelta )小於或等於OutputRanges[ c ][ 0 ],則以下適用: y = InputRanges[ c ][ 0 ] (D-xx) fracBitDepth = hdr_recon_offset_frac_bit_depth — 否則,若( x << bitDepthDelta )大於OutputRanges[ c ][ hdr_recon_num_ranges[ c ] ],則以下適用: y = InputRanges[ c ][ hdr_recon_num_ranges[ c ] ](D-xx) fracBitDepth = hdr_recon_offset_frac_bit_depth — 否則,以下適用: fracBitDepth = DefaultPrecShift + hdr_recon_scale_frac_bit_depth +hdr_recon_offset_frac_bit_depth - BitDepth for( i = 1; i < = hdr_recon_num_ranges[ c ]; i++ ) if( OutputRanges[ i - 1 ] < ( x << bitDepthDelta ) && ( x << bitDepthDelta ) < = OutputRanges[ i ] ) { rangeBitShift = DefaultPrecShift + hdr_recon_offset_frac_bit_depth - BitDepth y = ( x - minSampleVal ) * ScaleValue[ c ][ i - 1 ] * ( 1 <<rangeBitDepth ) + OffsetValue[ c ][ i - 1 ] + minSampleVal * ( 1 << fracBitDepth ) (D-xx) } – fracShiftOffset = 1 << (fracBitDepth − 1) y = ( y + fracShiftOffset ) >> fracBitDepth 替代地,不對OffsetValue執行基於minSampleVal及maxSampleVal對樣本範圍之調整,而對InputRanges及OutputRanges執行調整,如下所述: deltaSampleVal = maxSampleval - minSampleVal deltaBitShift = DefaultPrecShift + hdr_recon_offset_frac_bit_depth sampleShift = ( 1 << ( BitDepth − 1) ) + ( minSampleVal << deltaBitShift ) ) OutputRanges[ c ][ i ] = ( ( OutputRanges[ c ][ i ] * deltaSampleVal ) + sampleShift ) >> BitDepth deltaBitShift = DefaultPrecShift + hdr_recon_offset_frac_bit_depth sampleShift = ( 1 << ( BitDepth − 1) ) + ( minSampleVal << deltaBitShift ) ) InputRanges[ c ][ i ] = ( ( InputRanges[ c ][ i ] * deltaSampleVal ) + sampleShift ) >> BitDepth 本發明提供用以改良使用SEI發信及處理來攜載成分縮放資訊之若干技術,或視訊寫碼標準(諸如H.265/HEVC、H.264/AVC、BDA、MPEG或其他標準)中已指定或將指定之其他方法。此等技術中之一或多者可獨立地應用,或與其他技術組合而應用。另外,上文所述的用於發信及/或使用SEI訊息中之資訊以用於執行動態範圍程序之固定點實施的該等技術可利用下文所描述的用於發信/接收該資訊之語法結構中之一或多者。 在一些實例中,視訊編碼器20可發信包括全域偏移值之一或多個SEI訊息,對於每一成分,包括判定第一未調整成分之第一偏移值,低於其之所有成分值在應用如本發明中所描述之動態範圍調整之前被裁剪至第一成分值。解碼器30可接收此等SEI訊息中之一或多者,剖析及/或解碼該等SEI訊息中之資訊,且將該資訊傳遞至視訊後處理器31。 在一些實例中,對於每一成分,視訊編碼器20可發信包括第二偏移值之一或多個SEI訊息,該第二偏移值指定在動態範圍調整之後第一偏移值映射至的調整後值。視訊解碼器30可接收此等SEI訊息,剖析及/或解碼該資訊,且將彼資訊傳遞至視訊後處理器31。 在另一實例中,第一全域偏移值或第二全域偏移值均不在SEI訊息中發信。實情為,解碼器30假定第一全域偏移及第二全域偏移之值為解碼器30根據序列判定或藉由外部構件接收的恆定、預定或發信之值。在另一實例中,視訊編碼器20在SEI訊息中發信第一全域偏移值,但第二全域偏移值不在SEI訊息中發信。實情為,視訊解碼器30推斷其值為解碼器30根據序列判定或藉由外部構件接收的恆定、預定或發信之值。在又一實例中,視訊編碼器20在SEI訊息中發信第二全域偏移值,但第一全域偏移值不在SEI訊息中發信。實情為,視訊解碼器30推斷第一全域偏移值為解碼器30根據序列判定或藉由外部構件接收的恆定、預定或發信之值。 在一些實例中,視訊編碼器20可發信偏移值,該等偏移值由解碼器30接收且供解碼器30使用以導出其他全域或區域參數(包括全域及區域比例值及偏移值兩者),以及一系列未調整值之分割區,及一系列調整後值之分割區。 在一些實例中,視訊編碼器20可發信一或多個SEI訊息,其包括輸入表示值(即,成分值)之範圍在動態範圍調整期間劃分成的分割區之數目。在一個實例中,分割區之數目可限於2的冪(即,1、2、4、8、16等),且分割區之數目係發信為對數(例如,8分割區發信為3=log2 8)。視訊解碼器30可接收此等SEI訊息,剖析及/或解碼該資訊,且將彼資訊傳遞至視訊後處理器31。 在一些實例中,用於色度成分的分割區之數目可不同於用於明度成分的分割區之數目。分割區之數目可限於2的冪+1且發信為對數且向負0捨位。以此方式,具有中性色度之像素可具有自身之值,且彼分割區之大小可小於其他分割區。在此實例中,中性色度可指中值(例如,當色度值範圍在-0.5與0.5之間或在-512與511 (在10位表示中)之間時為0)周圍之色度之值。將分割區之數目限制為2的冪可使編碼器20能夠節約位元,此係因為編碼器20可能夠以與整數值之實際值相比更少的位元來表示值之對數。將分割區之數目限制為2的冪+1可確保至少一個分割區可專用於中性色度值,且在一些實例中,對應於中性色度值之分割區之寬度可小於其餘部分。在其他實例中,此分割區可大於其他分割區中之一或多者。 在一些實例中,解碼器30可使用發信的分割區之數目導出其他全域或區域參數(包括全域及區域比例值及偏移值兩者),以及一系列未調整成分值之分割區之實際大小及/或一系列調整後成分值之分割區之大小。 在一些實例中,編碼器20可發信一或多個SEI訊息,其可包括用於每一分割區的區域比例及區域偏移值,該等值指定一系列輸入成分值及對應的映射輸出成分值。在一些實例中,編碼器20可發信SEI訊息,其包括供語法元素使用以發信比例及偏移的位元之數目。在其他實例中,編碼器20可發信SEI訊息,其指示語法元素中用以表示比例及偏移之分數部分的位元之數目。在其他實例中,編碼器20可發信一或多個SEI訊息或語法元素,其指示縮放參數之整數部分係以有正負號表示進行發信。在一些實例中,有正負號表示係二的補碼。在其他實例中,有正負號表示係有正負號量值表示。視訊解碼器30可接收此等SEI訊息及/或語法元素,剖析及/或解碼該資訊,且將彼資訊傳遞至視訊後處理器31。 在其他實例中,編碼器20可相繼使用每一偏移值來首先計算經調整成分或表示值之範圍,接著使用比例值來計算未調整表示中之對應範圍。舉例而言,一個偏移值可用以使用針對調整後成分導出或發信之全域偏移值的值來計算調整後成分中之第一分割區之範圍,接著使用比例值及調整後表示之第一分割區之範圍導出未調整表示之對應分割區中之範圍,且利用調整後表示之第一分割區及未調整表示之對應分割區的各別範圍,導出針對調整後範圍之第一分割區及指示分割區之邊界的未調整表示之對應分割區導出的各別值。此後,另一偏移值可用以使用在前一步驟中導出的調整後中之第一分割區之邊界值來計算調整後成分中之第二分割區之範圍,接著使用比例值及調整後表示之第二分割區之範圍導出未調整表示之範圍,且利用調整後表示之第二分割區及未調整表示之對應分割區的各別範圍,導出針對調整後及未調整表示中指示各別表示之邊界的分割區導出的各別值。重複此方法,直至針對調整後及未調整表示中之所有分割區導出所有範圍及邊界。在另一實例中,編碼器20可相繼使用每一偏移值以首先計算未調整成分或表示值之範圍,接著使用比例值計算調整後表示中之對應範圍。換言之,經應用比例值及偏移值之成分或表示可在未調整表示與調整後表示之間調換。 在一些實例中,供語法元素使用以發信比例值及偏移值的位元之數目可取決於成分。在其他實例中,定義位元之預設數目且在此等數目未顯式地發信時使用該預設數目。 在一些實例中,編碼器20可發信指示輸出表示(即,輸出成分)之分割區之長度是否相等的語法元素。在此實例中,對於一或多個分割區,編碼器20可不發信偏移值。解碼器30可推斷偏移值在一些實例中相等。在另一實例中,解碼器30可假設分割區具有相等長度且可不接收如此指示之語法元素。在一些實例中,解碼器30可自發信的語法元素及表示之預定義總動態範圍而導出每一分割區之大小。 在其他實例中,並非發信每一分割區之支點以及每一分割區之比例值及偏移值,視訊編碼器20可發信指示每一分割區之導數或比例值以及一或多個或所有分割區之大小的一或多個SEI訊息。此方法可允許編碼器20避免發信每一分割區之區域偏移值。實情為,在一些實例中,編碼器20可能夠在一或多個SEI訊息中發信一或多個分割區之分割區大小及比例值(或導數)。每一分割區或分割(其可能需要更高準確度)之區域偏移值可由解碼器30判定或導出。 在一些實例中,編碼器20可發信指示模式值之一或多個SEI訊息,模式值指定特定分割區之偏移值及比例值的若干預設值。視訊解碼器30可接收此等SEI訊息,剖析及/或解碼該資訊,且將彼資訊傳遞至視訊後處理器31。 在一些實例中,編碼器20可發信一或多個SEI訊息,其指示定義SEI訊息之持續以使得可定義成分之一子集之持續且可更新成分之一子集之成分比例值的值。SEI訊息之持續指示SEI之執行個體中所發信的值可應用於之圖像。在一些實例中,定義SEI訊息之持續,以使得在SEI訊息之一個執行個體中發信之值可相應地應用於經應用SEI訊息的圖像之所有成分。在其他實例中,定義SEI訊息之持續,以使得在SEI訊息之一個執行個體中發信之值可經指示為相應地應用於成分之一子集,其中未應用SEI訊息之執行個體中之值的成分可不具有可適用的值或可具有在SEI訊息之另一執行個體中發信的可適用的值。視訊解碼器30可接收此等SEI訊息,剖析及/或解碼該資訊,且將彼資訊傳遞至視訊後處理器31。 在一些實例中,編碼器20可發信包括指示將對經解碼輸出執行的後處理步驟之語法元素的一或多個SEI訊息。每一語法元素可與特定程序(例如,縮放成分、色彩變換、增頻取向/降頻取樣濾波器等)相關聯, 且語法元素之每一值可指定將使用與處理相關聯之參數之特定集合。在一些實例中,與程序相關聯之參數係由視訊編碼器20使用SEI訊息(該等訊息為位元串流之部分或作為可經由其他構件傳輸的後設資料)來發信。視訊解碼器30可接收此等SEI訊息,剖析及/或解碼該資訊,且將彼資訊傳遞至視訊後處理器31。 在一些實例中,編碼器20可發信語法元素或一或多個SEI訊息,其可用於描述及/或建構用於將輸入表示(即,輸入成分值)映射至輸出表示(即,輸出成分值)的片段線性模型函數。視訊解碼器30可接收此等SEI訊息,剖析及/或解碼該資訊,且將彼資訊傳遞至視訊後處理器31。在其他實例中,預定義假設可用於描述及/或建構用於將輸入表示映射至輸出表示之片段線性模型函數。 在一些實例中,編碼器20可發信可包括一或多個語法元素之一或多個SEI訊息,語法元素指示SEI訊息中所發信之比例及偏移參數表示作為第二成分之不同值之函數的待應用於第一成分之比例的變化。 在一些實例中,編碼器20可發信指示偏移參數之一或多個SEI訊息,該等偏移參數作為第二成分之不同值之函數將或可與用於第一成分之比例一起應用。在一些實例中,編碼器20可發信可包括一或多個額外語法元素之一或多個SEI訊息,額外語法元素指示作為第二成分之不同值之函數將或可與用於第一成分之比例一起應用的偏移參數。視訊解碼器30可接收此等SEI訊息,剖析及/或解碼該資訊,且將彼資訊傳遞至視訊後處理器31。 在一些實例中,編碼器20可發信包括指示電光轉移函數特性之第一集合之第一語法元素的一或多個SEI訊息,以使得當在解碼器側使用電光轉移函數特性時,SEI訊息所應用的經發信之比例、偏移及其他動態範圍調整參數類似於電光轉移函數特性之第一集合。 在另一實例中,編碼器20可發信一或多個SEI訊息,其指示當電光轉移函數特性之第一集合或具有類似特性之函數供解碼器30使用時,將應用SEI訊息中的經發信之偏移、比例及其他動態範圍參數以實現HDR輸出之最佳重建構。視訊解碼器30可接收此等SEI訊息,剖析及/或解碼該資訊,且將彼資訊傳遞至視訊後處理器31。 在另一實例中,編碼器20可發信一或多個SEI訊息,其指示電光轉移函數特性之第一集合,及當在解碼器側應用對應之反電光轉移函數特性時,藉由解碼器30應用的經發信之比例、偏移及其他動態範圍調整參數。視訊解碼器30可接收此等SEI訊息,剖析及/或解碼該資訊,且將彼資訊傳遞至視訊後處理器31。 在其他實例中,編碼器20可發信一條件,以使得當超過一個SEI訊息呈現從而指示電光/光電特性及可適用的當前圖像之不同集合時,僅應用一個SEI訊息。編碼器可發信電光/光電特性之不同集合以滿足不同類型之解碼器或具有不同能力之解碼器。舉例而言,解碼器側處之某些顯示器可應用PT EOTF,以將適當域中之經寫碼成分值轉換至線性光,而其他顯示器(例如,舊式顯示器)可應用γEOTF以轉換至線性光。編碼器發送的具有特定特性之每一SEI對於特定類型之顯示器可為適當或有益的,而對於其他類型之顯示器並非適當或有益的,例如,具有PQ EOTF特性之SEI訊息可適合於應用PQ EOTF以將經寫碼視訊轉換至線性光之顯示器。解碼器30判定將應用哪一SEI訊息,且基於應用標準、基於最終使用者器件、基於接收之信號或基於經由外部構件接收之另一指示而做出此選擇。舉例而言,解碼器30可判定:應用於當前圖像之第一SEI訊息中之第一語法元素指示SEI訊息將以反PQ OETF應用,且應用於當前圖像之第二SEI訊息中之第一語法元素指示SEI訊息將以另一轉移函數(諸如BBC或PH)應用,解碼器30或最終使用者器件可選擇應用第一SEI訊息中之參數,此係因為器件使用PQ EOTF。在一些實例中,解碼器符合之應用標準可指定具有特性之特定集合之SEI訊息將被使用。 在其他實例中,編碼器20可發信載運對應於多組轉移特性之參數的SEI訊息。在其他實例中,編碼器20可發信不同SEI訊息以用於彼目的。視訊解碼器30可接收此等SEI訊息,剖析及/或解碼該資訊,且將彼資訊傳遞至視訊後處理器31。 在一些實例中,編碼器20可信號包括指示SEI訊息之適用性之語法元素的一或多個SEI訊息。SEI訊息之適用性可包括(但不限於):(1)比例及偏移將應用至的成分,(2)應用成分縮放之位置,及/或(3)是否發信額外縮放參數。 如所描述,編碼器20可發信包括指示比例及偏移應用至的成分之語法元素的一或多個SEI訊息。以下列出此應用之若干實例。舉例而言,語法元素之一個值可以指示第一成分索引之發信參數將應用於RGB成分。另一值可指示第一成分索引之發信參數將應用於明度成分,且第二及第三索引之發信參數將應用於Cb及Cr成分。另一值可指示第一成分索引之發信參數將應用於R、G及B成分,且第二及第三索引之發信參數將應用於Cb及Cr成分。另一值可指示前三個索引之發信參數將應用於明度、Cb及Cr成分,且對應於剩餘索引之發信參數被應用於色彩校正。視訊解碼器30可接收此等SEI訊息,剖析及/或解碼該資訊,且將彼資訊傳遞至視訊後處理器31。 亦如所描述,編碼器20可發信包括指示應用成分縮放之位置之語法元素的一或多個SEI訊息。若干程序在解碼視訊之後在解碼器側上及在視訊後處理器31中發生。發信指示將應用與SEI相關聯之程序之位置的語法元素(換言之,指示與使用SEI中之資訊相關聯之程序的前述或接續操作之任何子集)對於視訊解碼器30或視訊後處理器31處理視訊將有幫助。舉例而言,此語法元素可指示在增頻取樣之前或之後將成分縮放應用於(例如)YCbCr成分的位置。在另一實例中,語法元素可指示成分縮放係在量化之前應用於解碼器側。視訊解碼器30可接收此等SEI訊息,剖析及/或解碼該資訊,且將彼資訊傳遞至視訊後處理器31。 亦如所描述,編碼器20可發信包括指示是否發信縮放及參數之額外集合(例如針對色彩校正)之語法元素的一或多個SEI訊息。參數之額外集合可用於色彩校正以映射色彩成分以配合特定色域,或在應用不同於VUI中之transfer_characteristics語法元素所指示之轉移函數的轉移函數時用於校正成分值。 在其他實例中,編碼器20可發信不同語法元素以指示以上態樣;例如,一個語法元素用以指示SEI應用於哪個(哪些)成分,一個語法元素用以指示SEI是否應用於HDR相容之SDR相容內容,且一個語法元素用以指示將應用成分縮放SEI訊息之位置。 當成分縮放SEI訊息參數應用至的成分之數目大於一時,編碼器20可發信包括指示可基於成分之索引依序進行比例及偏移參數之應用之語法元素的一或多個SEI訊息。舉例而言,可應用基於第一成分之比例及偏移參數的映射,接著第二成分之映射(其例如使用針對第二成分發信之比例及偏移)可取決於第一成分之值。在一些實例中,此(例如)藉由指定應使用第一成分之映射值的語法元素來指示。視訊解碼器30可接收此等SEI訊息,剖析及/或解碼該資訊,且將彼資訊傳遞至視訊後處理器31。 在另一實例中,視訊編碼器20可限制一或多個SEI訊息中或位元串流中所發信之值,以此方式使得HDR10接收器可解碼及展示可視HDR視訊,即使未應用SEI後處理。SEI訊息可包括語法元素以指示情況如此(例如,位元串流係HDR10回溯相容之位元串流)。 此部分包括使用根據本發明之一或多個態樣揭示之技術的若干實例。實例 1 在此實例中1,成分縮放函數係發信為查找表,且亦發信用以發信定義查找表之點的位元之數目。對於不具有發信之明確點之樣本值,基於相鄰支點對值進行內插。成分縮放 SEI 訊息之語法 成分縮放 SEI 訊息之語義 成分縮放SEI訊息提供資訊以對經解碼圖像之各種成分執行縮放操作。色彩空間及應加以執行縮放操作之成分係由SEI訊息中所發信之語法元素之值判定。comp_scale_id 含有可用以識別成分縮放SEI訊息之用途之識別數字。comp_scale_id之值應在0至232 - 2範圍中(包括0及232 - 2)。comp_scale_id之值可用以指定成分縮放SEI訊息所處之色彩空間,或成分縮放SEI訊息係在線性或非線性域中應用。 如應用所判定,可使用0至255 (包括0及255)及512至231 - 1(包括512及231 - 1)的comp_scale_id之值。保留256至511 (包括256及511)及231 至232 -2(包括231 及232 -2)的comp_scale_id之值以供ITU-T|ISO/IEC未來使用。解碼器應忽略含有256至511範圍中(包括256及511)或231 至232 -2範圍中(包括231 及232 -2)的comp_scale_id之值的所有成分比例資訊SEI訊息,且位元串流不應含有此等值。 註解1 - comp_scale_id可用以支援適合於不同顯示情境之成分縮放程序。舉例而言,comp_scale_id之不同值可對應於不同顯示位元深度或縮放應用所在之不同色彩空間。 替代地,comp_scale_id亦可用以識別針對與特定類型之顯示或解碼器(例如HDR、SDR)之相容性是否執行縮放。 等於1之comp_scale_cancel_flag 指示成分縮放資訊SEI訊息以應用於當前層之輸出次序抵消任何先前成分資訊SEI訊息之持續。等於0之comp_scale_cancel_flag指示成分縮放資訊跟隨。comp_scale_persistence_flag 指定當前層之成分縮放資訊SEI消息之持續。 等於0之comp_scale_persistence_flag指定成分縮放資訊僅應用於當前經解碼圖像。 令picA為當前圖像。等於1之comp_scale_persistence_flag指定成分縮放資訊對於當前層按輸出次序持續,直至以下條件中之任一者成立: - 當前層之新CLVS開始。 - 位元串流結束。 - 含有具有comp_scale_id之相同值且可適用於當前層之成分縮放資訊SEI訊息之存取單元中的當前層中之圖像picB被輸出,其中PicOrderCnt( picB )大於PicOrderCnt( picA ),其中PicOrderCnt( picB )及PicOrderCnt( picA )分別為緊接在調用用於針對picB之圖片次序計數的解碼程序之後的picB及picA之PicOrderCntVal值。comp_scale_num_comps_minus1 加1指定成分縮放函數經指定之成分之數目。comp_scale_num_comps_minus1應在0至2 (包括0及2)之範圍中。 當comp_scale_num_comps_minus1小於2且第c個成分之成分縮放參數未發信時,推斷成分縮放參數等於第(c - 1)個成分之彼等參數。 替代地,當comp_scale_num_comps_minus1小於2且第c個成分之成分縮放參數未發信時,推斷第c個成分之成分縮放參數等於預設值,以使得實際上不存在成分之縮放。 替代地,對成分縮放參數之推斷可基於SEI訊息所應用於的色彩空間來指定。 - 當色彩空間為YCbCr且comp_scale_num_comps_minus1等於1時,成分縮放參數應用於Cb及Cr成分兩者。 - 當色彩空間為YCbCr且comp_scale_num_comps_minus1等於2時,第一及第二成分縮放參數應用於Cb及Cr成分兩者。 在一個替代方案中,基於comp_scale_id之值或基於明確語法元素來指定不同推斷。 替代地,添加如下所述之約束: 針對位元串流一致性之約束為,對於具有CLVS內之comp_scale_id之給定值的所有成分縮放SEI訊息,comp_scale_num_comps_minus1之值應相同。comp_scale_input_bit_depth_minus8 加8指定用以發信語法元素comp_scale_input_point[ c ][ i ]之位元之數目。comp_scale_input_bit_depth_minus8之值應在0至8(包括0及8)之範圍中。 當將成分縮放SEI訊息應用於在0.0至1.0之範圍中之正規化浮點表示中的輸入時,SEI訊息指為了以等於(colour_remap_input_bit_depth_minus8 + 8)之位元深度將輸入視訊轉換至經轉換視訊表示所執行的量化操作之假想結果。 當將成分縮放SEI訊息應用於具有不等於(comp_scale_input_bit_depth_minus8 + 8)之位元深度之輸入時,SEI訊息指為了以等於(colour_remap_input_bit_depth_minus8 + 8)之位元深度將輸入視訊表示轉換至經轉換視訊表示所執行的轉碼操作之假想結果。comp_scale_output_bit_depth_minus8 加8指定用以發信語法元素comp_scale_output_point[ c ][ i ]之位元之數目。comp_scale_output_bit_depth_minus8之值應在0至8範圍中(包括0及8)。 當將成分縮放SEI訊息應用於浮點表示中之輸入時,SEI訊息指為了將在處理成分縮放訊息之後獲得具有等於(colour_remap_output_bit_depth_minus8 + 8)之位元深度的視訊表示轉換至範圍0.0至1.0中之浮點表示所執行的反量化操作之假想結果。 替代地,用以發信comp_scale_input_point[ c ][ i ]及comp_scale_output_point[ c ][ i ]之位元之數目係分別發信為comp_scale_input_bit_depth及comp_scale_output_bit_depth,或換言之,無需減去8。comp_scale_num_points_minus1 [ c ]加1指定用以定義成分縮放函數之支點之數目。comp_scale_num_points_minus1[ c ]應在0至( 1 << Min(comp_scale_input_bit_depth_minus8 + 8, comp_scale_output_bit_depth_minus8 + 8) ) − 1範圍中(包括0及( 1 << Min(comp_scale_input_bit_depth_minus8 + 8, comp_scale_output_bit_depth_minus8 + 8) ) − 1)。comp_scale_input_point [ c ][ i ]指定輸入圖像之第c個成分之第i個支點。comp_scale_input_point[ c ][ i ]之值應在0至( 1 << comp_scale_input_bit_depth_minus8[ c ] + 8 ) - 1範圍中(包括0及( 1 << comp_scale_input_bit_depth_minus8[ c ] + 8 ) - 1)。comp_scale_input_point[ c ][ i ]之值應大於或等於comp_scale_input_point[ c ][ i − 1 ]之值,其中i在1至comp_scale_points_minus1[ c ]範圍中(包括1及comp_scale_points_minus1[ c ])。comp_scale_output_point [ c ][ i ]指定輸出圖像之第c個成分之第i個支點。comp_scale_output_point[ c ][ i ]之值應在0至( 1 << comp_scale_output_bit_depth_minus8[ c ] + 8 ) - 1範圍中(包括0及( 1 << comp_scale_output_bit_depth_minus8[ c ] + 8 ) - 1)。comp_scale_output_point[ c ][ i ]之值應大於或等於comp_scale_output_point[ c ][ i − 1 ]之值,其中i在1至comp_scale_points_minus1[ c ]範圍中(包括1及comp_scale_points_minus1[ c ])。 將映射輸入信號表示x及輸出信號表示y之程序指定如下,其中輸入及輸出兩者之樣本值分別在0至( 1 << comp_scale_input_bit_depth_minus8[ c ] + 8 ) - 1範圍中(包括0及( 1 << comp_scale_input_bit_depth_minus8[ c ] + 8 ) - 1)及0至( 1 << comp_scale_output_bit_depth_minus8[ c ] + 8 ) - 1範圍中(包括0及( 1 << comp_scale_output_bit_depth_minus8[ c ] + 8 ) - 1)。 if( x <= comp_scale_input_point[ c ][ 0 ] ) y = comp_scale_output_point[ c ][ 0 ] else if( x > comp_scale_input_point[ c ][ comp_scale_input_point_minus1[ c ] ] ) y = comp_scale_output_point[ c ][ comp_scale_output_point_minus1[ c ] ] else for( i = 1; i <= comp_scale_output_point_minus1[ c ]; i++ ) if( comp_scale_input_point[ i − 1 ] < x && x <= comp_scale_input_point[ i ] ) y = ( ( comp_scale_output_point[ c ][ i ] − comp_scale_output_point[ c ][ i − 1 ] ) ÷ ( comp_scale_input_point[ c ][ i ] − comp_scale_input_point[ c ][ i − 1 ] ) ) * ( x − comp_scale_input_point[ c ][ i − 1 ] ) + ( comp_scale_output_point[ c ][ i − 1 ] ) 在一個替代方案中,將輸入及輸出支點comp_scale_input_point[ c ][ i ]及comp_scale_output_point[ c ][ i ]寫碼為鄰近值之差;例如,delta_comp_scale_input_point[ ][ ]及delta_comp_scale_output_point[ ][ ],且使用指數哥倫布碼來寫碼該等語法元素。 在另一替代方案中,藉由其他內插方法(包括(但不限於)樣條及立方內插)來指定映射輸入及輸出表示值之程序。實例 2 此實例2展示與實例1中所描述之SEI語法結構相比的不同語法結構。在此語法結構中,關於比例及偏移(而非支點)來描述映射函數。成分縮放 SEI 訊息之語法 comp_scale_bit_depth_scale_val 指定用以發信語法元素comp_scale_val[ c ][ i ]之位元之數目。comp_scale_bit_depth_scale_val之值應在0至24範圍中(包括0及24)。comp_scale_log2_denom_scale_val 指定比例值之底數2分母。comp_scale_log2_denom_scale_val之值應在0至16範圍中(包括0及16)。comp_scale_global_offset_input_val[ c ] 加1指定輸入樣本值,小於該輸入樣本值之所有輸入表示值被裁剪至CompScaleOffsetOutputVal[ c ][ 0 ]。用以定義成分縮放函數。comp_scale_num_points_minus1[ c ]應在0至(1 << comp_scale_input_bit_depth)− 1範圍中(包括0及(1 << comp_scale_input_bit_depth)− 1)。用以表示comp_scale_global_offset_input_val[ c ]之位元之數目為comp_scale_input_bit_depth。comp_scale_global_offset_output_val [ c ]加1指定輸出樣本值,低於comp_scale_global_offset_input_val[ c ]之所有輸入表示值將裁剪至該輸出樣本值。 comp_scale_num_points_minus1[ c ]應在0至(1 << comp_scale_output_bit_depth)− 1範圍中(包括0及(1 << comp_scale_output_bit_depth)− 1)。用以表示comp_scale_global_offset_output_val[ c ]之位元之數目為comp_scale_output_bit_depth。comp_scale_num_points_minus1 [ c ] 加1指定用以定義成分縮放函數之支點之數目。comp_scale_num_points_minus1[ c ]應在0至( 1 << Min(comp_scale_input_bit_depth, comp_scale_output_bit_depth) − 1範圍中(包括0及( 1 << Min(comp_scale_input_bit_depth, comp_scale_output_bit_depth) − 1)。 將映射輸入信號表示x及輸出信號表示y之程序指定如下,其中輸入表示兩者之樣本值在0至(1 << comp_scale_input_bit_depth) - 1範圍中(包括0及(1 << comp_scale_input_bit_depth) - 1),且輸出表示在及0至(1 << comp_scale_output_bit_depth) - 1範圍中(包括0及(1 << comp_scale_output_bit_depth) - 1)。 if( x <= CompScaleOffsetInputVal[ c ][ 0 ] ) y = CompScaleOffsetOutputVal[ c ][ 0 ] else if( x > CompScaleOffsetInputVal[ c ][ comp_scale_output_point_minus1 ] ) y = CompScaleOffsetOutputVal[ c ][ comp_scale_output_point_minus1 ] else for( i = 1; i <= comp_scale_output_point_minus1; i++ ) if( CompScaleOffsetInputVal[ i − 1 ] < x && x <= CompScaleOffsetInputVal[ i ] ) y = ( x – CompScaleOffsetInputVal[ i − 1 ] * ( comp_scale_val[ c ][ i ] + CompScaleOffsetOutputVal[ c ][ i ]comp_scale_offset_val [ c ][ i ]指定第c個成分之第i個樣本值區之偏移值。用以表示comp_scale_offset_val[ c ]之位元之數目等於comp_scale_input_bit_depth。comp_scale_val [ c ][ i ]指定第c個成分之第i個樣本值區點之比例值。用以表示comp_scale_val[ c ]之位元之數目等於comp_scale_bit_depth_scale_val。 如下所述地導出變數CompScaleOffsetOutputVal[ c ][i]及CompScaleOffsetInputVal[ c ][i],其中i在0至comp_scale_num_points_minus1[ c ]範圍中(包括0及comp_scale_num_points_minus1[ c ])。 roundingOffset = (comp_scale_log2_denom_scale_val = = 0 ) ? 0 : (1 << comp_scale_log2_denom_scale_val - 1) for( i = 0; i <= comp_scale_num_points_minus1[ c ]; i++ ) if( i = = 0 ) CompScaleOffsetOutputVal[ c ][ i ] = comp_scale_global_offset_output_val[ c ] CompScaleOffsetInputVal[ c ][ i ] = comp_scale_global_offset_input_val[ c ] else CompScaleOffsetOutputVal[ c ][ i ] = CompScaleOffsetOutputVal[ c ][ i −1 ] + (comp_scale_offset_val[ c ][ i - 1 ] 􀀀 comp_scale_val[ c ][ i - 1 ] + roundingOffset ) >> comp_scale_log2_denom_scale_val CompScaleOffsetInputVal[ c ][ i ] = CompScaleOffsetInputVal[ c ][ i − 1 ]+ comp_scale_offset_val[ c ][ i - 1 ] 在一個替代方案中,如下所述,使用comp_scale_offset_val[ c ][ i ]直接計算CompScaleOffsetOutputVal[ ][ i ]及間接計算CompScaleOffsetInputVal[ ][ i ],其中i在0至comp_scale_num_points_minus1[ c ]範圍中。 for( i = 0; i < comp_scale_num_points_minus1[ c ]; i++ ) if( i = = 0 ) CompScaleOffsetOutputVal[ c ][ i ] = comp_scale_global_offset_output_val[ c ] CompScaleOffsetInputVal[ c ][ i ] = comp_scale_global_offset_input_val[ c ] else CompScaleOffsetInputVal[ c ][ i ] = CompScaleOffsetInputVal[ c ][ i − 1 ]+ (comp_scale_offset_val[ c ][ i - 1 ] * comp_scale_val[ c ][ i - 1 ] + roundingOffset ) >> comp_scale_log2_denom_scale_val ) CompScaleOffsetOutputVal[ c ][ i ] = CompScaleOffsetOutputVal[ c ][ i −1 ] + comp_scale_offset_val[ c ][ i - 1 ] 在一個替代方案中,未發信comp_scale_offset_val[ c ][ i ],其中i在0至comp_scale_num_points_minus1[ c ]範圍中(包括0及comp_scale_num_points_minus1[ c ]),且基於比例經指定的comp_scale_num_points_minus1[ c ]等距分佈的間隔來導出comp_scale_offset_val[ c ][ i ]之值。如下所述地導出comp_scale_offset_val[ c ][ i ]之值,其中i在0至comp_scale_num_points_minus1[ c ] − 1範圍中(包括0及comp_scale_num_points_minus1[ c ] − 1)。 comp_scale_offset_val[ c ][ i ] = ( (1 << comp_scale_output_bit_depth ) − comp_scale_global_offset_output_val[ c ] ) ÷ (comp_scale_num_points_minus1[ c ]) 在另一替代方案中,如下所述地計算comp_scale_offset_val[ c ][ i ],其中i在0至comp_scale_num_points_minus1[ c ]範圍中(包括0及comp_scale_num_points_minus1[ c ])。 comp_scale_offset_val[ c ][ i ] = (1 << comp_scale_output_bit_depth ) ÷ (comp_scale_num_points_minus1[ c ] ) 在一個替代方案中,替代發信comp_scale_num_points_minus1[ c ],使用log2_comp_scale_num_points[ c ]來發信支點之數目,其中( 1 << log2_comp_scale_num_points[ c ] )指定第c個成分之支點之數目。 替代地,將comp_scale_offset_val[ c ][ ]及comp_scale_val[ c ][ ]中之每一者發信為浮點數字,或具有指數及尾數之兩個語法元素。 在另一替代方案中,由comp_scale_output_point[ c ][ i ]來替代comp_scale_val[ c ][ i ]之發信。 語法元素之其餘部分之語義類似於實例1中所描述之彼等語義。實例 3 實例3中所描述之此方法類似於實例2中所描述之替代方案中之一者,以下情況除外:允許成分縮放函數獨立地更新。成分縮放 SEI 訊息之語法 成分縮放 SEI 訊息之語義 語義類似於實例2,以下語法元素除外。comp_scale_num_scale_regions [ c ]指定用於針對第c個成分發信語法元素comp_scale_val[ c ][ i ]的區之數目。comp_scale_num_scale_regions[ c ]應在0至(1 << comp_scale_input_bit_depth) - 1範圍中(包括0及(1 << comp_scale_input_bit_depth) - 1)。 等於0之comp_scale_persist_component_flag [ c ]指定用於第c個成分之成分縮放參數係明確地在SEI訊息中發信。等於1之comp_scale_persist_component_flag[ c ]指定用於第c個成分之成分縮放參數未明確地在SEI訊息中發信,且其按輸出次序自應用於先前圖像的成分縮放SEI訊息之第c個成分之成分縮放參數持續。 位元串流一致性之一要求為:當成分縮放SEI訊息存在於IRAP存取單元中時,comp_scale_persist_component_flag[ c ](若存在)之值應等於0。 替代地,添加以下條件: 位元串流一致性之要求為:當成分縮放SEI訊息存在於非IRAP存取單元之存取單元中且comp_scale_persist_component_flag[ c ]等於1時,則存在按輸出次序先於當前圖像且按輸出次序在按解碼次序之先前IRAP圖像之後的至少一個圖像(包括性),以使得該一個圖像與comp_scale_persistence_flag 等於1之成分縮放SEI訊息相關聯。comp_scale_persistence_flag 指定當前層之成分縮放資訊SEI消息之持續。 等於0之comp_scale_persistence_flag指定成分縮放資訊僅應用於當前經解碼圖像。 令picA為當前圖像。等於1之comp_scale_persistence_flag指定第c個成分在成分縮放資訊對於當前層按輸出次序持續,直至以下條件中之任一者成立: - 當前層之新CLVS開始。 - 位元串流結束。 - 含有具有comp_scale_id之相同值及comp_scale_persist_component_flag[ c ]等於0且可適用於當前層之成分縮放資訊SEI訊息之存取單元中的當前層中之圖像picB被輸出,其中PicOrderCnt( picB )大於PicOrderCnt( picA ),其中PicOrderCnt( picB )及PicOrderCnt( picA )分別為緊接在調用用於針對picB之圖片次序計數的解碼程序之後的picB及picA之PicOrderCntVal值。實例 4 在此實例4中,揭示發信比例區之不同方法。成分縮放 SEI 訊息語法之變化 成分縮放 SEI 訊息語義之變化 該等語法元素之語義類似於先前實例中所描述之語義,以下除外:comp_scale_offset_begin_val [ c ][ i ]指定比例值comp_scale_val[ c ][ i ]可適用的樣本值範圍之開始。用以表示comp_scale_offset_begin_val[ c ]之位元之數目等於comp_scale_input_bit_depth。comp_scale_offset_end_val [ c ][ i ]指定比例值comp_scale_val[ c ][ i ]可適用的樣本值範圍之結束。用以表示comp_scale_offset_end_val[ c ]之位元之數目等於comp_scale_input_bit_depth。 針對comp_scale_offset_begin_val及comp_scale_offset_end_val未明確指定之區,推斷彼等區之comp_scale_value[ c ][ i ]等於0。 替代地,不發信comp_scale_offset_end_val[ c ][ i ],而改為發信comp_scale_offset_end_val[ c ][ i ]與comp_scale_offset_begin_val[ c ][ i ]之間的差,且在解碼器側導出comp_scale_offset_end_val[ c ][ i ]之值。 在另一替代方案中,指定輸出樣本範圍分成的區之總數目,且發信比例區經顯式地發信的區之數目。 comp_scale_tot_scale_regions [ c ]指定樣本值分成的相等長度樣本值範圍之總數目。用以表示comp_scale_tot_scale_regions[ c ]之位元之數目等於comp_scale_input_bit_depth。 在一個替代方案中,comp_scale_tot_scale_regions[ c ]樣本值範圍在長度上可能不完全相等而係幾乎完全相等,以考慮區長度之整數準確度。comp_scale_region_idx [ c ][ i ]指定比例值comp_scale_val[ c ][ i ]所應用於的樣本值範圍之索引。語法元素comp_scale_region_idx[ c ]之長度為Ceil( Log2( comp_scale_tot_scale_regions[ c ] ) )個位元。替代方案 替代地,色度中值(對於10位元資料為511)圍繞之區具有較小大小,即其他區之大小的一半。實例 5 成分比例 SEI 訊息之語法 成分比例 SEI 訊息之語義 成分縮放SEI訊息提供資訊以對經解碼圖像之各種成分執行縮放操作。色彩空間及應加以執行縮放操作之成分係由SEI訊息中所發信之語法元素之值判定。comp_scale_id 含有可用以識別成分縮放SEI訊息之用途之識別數字。comp_scale_id之值應在0至232 - 2範圍中(包括0及232 - 2)。comp_scale_id之值可用以指定成分縮放SEI訊息所處之色彩空間,或成分縮放SEI訊息係在線性或非線性域中應用。 在一些實例中,comp_scale_id可指定HDR重建構程序之組態。在一些實例中,comp_scale_id之特定值可與用於3個成分之縮放參數之發信相關聯。第一成分之縮放將應用於R',G', B'色彩空間之樣本,且應用隨後2個成分之參數以用於縮放Cr及Cb。 對於又一comp_scale_id值,hdr重建構程序可利用用於3個成分之參數,且將縮放應用於明度、Cr及Cb色彩成分之樣本。 在又一comp_scale_id值中,hdr重建構程序可利用針對4個成分之發信,該等成分中之3個將應用於明度、Cr及Cb縮放,且第4成分攜帶色彩校正之參數。 在一些實例中,comp_scale_id值之特定範圍可與以SDR回溯相容組態進行之HDR重建構相關聯,而comp_scale_id值之另一範圍可與進行至非回溯相容組態之HDR重建構相關聯。 如應用所判定,可使用0至255 (包括0及255)及512至231 - 1(包括512及231 - 1)的comp_scale_id之值。保留256至511 (包括256及511)及231 至232 -2(包括231 及232 -2)的comp_scale_id之值以供ITU-T|ISO/IEC未來使用。解碼器應忽略含有256至511範圍中(包括256及511)或231 至232 -2範圍中(包括231 及232 -2)的comp_scale_id之值的所有成分比例資訊SEI訊息,且位元串流不應含有此等值。 註解1 - comp_scale_id可用以支援適合於不同顯示情境之成分縮放程序。舉例而言,comp_scale_id之不同值可對應於不同顯示位元深度或縮放應用所在之不同色彩空間。 替代地,comp_scale_id亦可用以識別針對與特定類型之顯示或解碼器(例如HDR、SDR)之相容性是否執行縮放。 等於1之comp_scale_cancel_flag 指示成分縮放資訊SEI訊息以應用於當前層之輸出次序抵消任何先前成分資訊SEI訊息之持續。等於0之comp_scale_cancel_flag指示成分縮放資訊跟隨。comp_scale_persistence_flag 指定當前層之成分縮放資訊SEI消息之持續。 等於0之comp_scale_persistence_flag指定成分縮放資訊僅應用於當前經解碼圖像。 令picA為當前圖像。等於1之comp_scale_persistence_flag指定成分縮放資訊對於當前層按輸出次序持續,直至以下條件中之任一者成立: - 當前層之新CLVS開始。 - 位元串流結束。 - 含有具有comp_scale_id之相同值且可適用於當前層之成分縮放資訊SEI訊息之存取單元中的當前層中之圖像picB被輸出,其中PicOrderCnt( picB )大於PicOrderCnt( picA ),其中PicOrderCnt( picB )及PicOrderCnt( picA )分別為緊接在調用用於針對picB之圖片次序計數的解碼程序之後的picB及picA之PicOrderCntVal值。comp_scale_scale_bit_depth 指定用以發信語法元素comp_scale_scale_val[ c ][ i ]之位元之數目。comp_scale_scale_bit_depth之值應在0至15範圍中(包括0及15)。comp_scale_offset_bit_depth 指定用以發信語法元素comp_scale_global_offset_val[ c ]及comp_scale_offset_val[ c ][ i ]之位元之數目。comp_scale_offset_bit_depth之值應在0至15範圍中(包括0及15)。comp_scale_scale_frac_bit_depth 指定用以指示第c個成分之第i個分割區之縮放參數之分數部分的LSB之數目。comp_scale_scale_frac_bit_depth之值應在0至15範圍中(包括0及15)。comp_scale_scale_frac_bit_depth之值應小於或等於comp_scale_scale_bit_depth之值。comp_scale_offset_frac_bit_depth 指定用以指示第c個成分之第i個分割區之偏移參數之分數部分的LSB之數目及第c個成分之全域偏移。comp_scale_offset_frac_bit_depth之值應在0至15範圍中(包括0及15)。comp_scale_offset_frac_bit_depth之值應小於或等於comp_scale_offset_bit_depth之值。comp_scale_num_comps_minus1 加1指定成分縮放函數經指定之成分之數目。comp_scale_num_comps_minus1應在0至2 (包括0及2)之範圍中。comp_scale_num_ranges [ c ]指定輸出樣本範圍分割成的範圍之數目。comp_scale_num_ranges[ c ]之值應在0至63範圍中(包括0及63)。 等於1之comp_scale_equal_ranges_flag [ c ]指示:輸出樣本範圍經分割成comp_scale_num_ranges[ c ]幾乎相等的分割區,且未明確發信分割區寬度。等於0之comp_scale_equal_ranges_flag[ c ]指示:輸出樣本範圍可分割成comp_scale_num_ranges[ c ]分割區,並非所有分割區具有相同大小,且明確發信分割區寬度。comp_scale_global_offset_val [ c ]用以導出偏移值,該偏移值用以映射第c個成分之有效輸入資料範圍之最小值。comp_scale_global_offset_val[ c ]之長度為comp_scale_offset_bit_depth個位元。comp_scale_scale_val [ c ][ i ]用以導出偏移值,該偏移值用以導出第c個成分之第i個分割區之寬度。comp_scale_global_offset_val[ c ]之長度為comp_scale_offset_bit_depth個位元。 如下所述地導出變數CompScaleScaleVal[ c ][ i ]: CompScaleScaleVal[ c ][ i ] = ( comp_scale_scale_val[ c ][ i ] >> comp_scale_scale_frac_bit_depth ) + ( comp_scale_scale_val[ c ][ i ] & ( (1 << comp_scale_scale_frac_bit_depth ) - 1 ) ) (1 << comp_scale_scale_frac_bit_depth )comp_scale_offset_val [ c ][ i ]用以導出偏移值,該偏移值用以導出第c個成分之第i個分割區之寬度。comp_scale_global_offset_val[ c ]之長度為comp_scale_offset_bit_depth個位元。 當發信comp_scale_offset_val[ c ][ i ]時,如下所述地導出CompScaleOffsetVal[ c ][ i ]之值。 CompScaleOffsetVal[ c ][ i ] = ( comp_scale_offset_val[ c ][ i ] >> comp_scale_offset_frac_bit_depth ) + ( comp_scale_offset_val[ c ][ i ] & ( (1 << comp_scale_offset_frac_bit_depth ) - 1 ) )) ÷ (1 << comp_scale_offset_frac_bit_depth ) 替代地,如下所述地導出變數CompScaleScaleVal[ c ][ i ]及CompScaleOffsetVal[ c ][ i ]。 CompScaleScaleVal[ c ][ i ] = comp_scale_scale_val[ c ][ i ] & (1 << comp_scale_scale_frac_bit_depth ) CompScaleOffsetVal[ c ][ i ] = comp_scale_offset_val[ c ][ i ] ÷ (1 << comp_scale_offset_frac_bit_depth ) 當comp_scale_equal_ranges_flag[ c ]等於1時,不發信comp_scale_offset_val[ c ][ i ],且如下所述地導出CompScaleOffsetVal[ c ][ i ]之值。 CompScaleOffsetVal[ c ][ i ] = 1 ÷ comp_scale_num_ranges[ c ] 如下所述地導出變數CompScaleOutputRanges[ c ][ i ]及CompScaleOutputRanges[ c ][ i ],其中i在0至comp_scale_num_ranges[ c ]範圍中。 for( i = 0; i <= comp_scale_num_ranges[ c ]; i++ ) if( i = = 0 ) CompScaleOutputRanges[ c ][ i ] = comp_scale_global_offset_val[ c ]÷ (1 << comp_scale_offset_frac_bit_depth ) CompScaleInputRanges[ c ][ i ] = 0 else CompScaleInputRanges[ c ][ i ] = CompScaleOffsetInputRanges[ c ][ i −1 ] + (CompScaleOffsetVal[ c ][ i - 1 ] * CompScaleScaleVal[ c ][ i - 1 ] CompScaleOutputRanges[ c ][ i ] = CompScaleOutputRanges[ c ][ i − 1 ] + CompScaleOffsetVal[ c ][ i - 1 ] 在一個替代方案中,如下所述地導出CompScaleOutputRanges[ ][ ]及CompScaleOutputRanges[ ][ ]之值。 for( i = 0; i <= comp_scale_num_ranges[ c ]; i++ ) if( i = = 0 ) CompScaleInputRanges[ c ][ i ] = comp_scale_global_offset_val[ c ]÷ (1 << comp_scale_offset_frac_bit_depth ) CompScaleOutputRanges[ c ][ i ] = 0 else CompScaleInputRanges[ c ][ i ] = CompScaleOffsetInputRanges[ c ][ i −1 ] + (CompScaleOffsetVal[ c ][ i - 1 ] * CompScaleScaleVal[ c ][ i - 1 ] CompScaleOutputRanges[ c ][ i ] = CompScaleOutputRanges[ c ][ i − 1 ] + CompScaleOffsetVal[ c ][ i - 1 ] 如下所述地指定映射輸入信號表示(其可用以涵蓋整數以及浮點兩者) x及輸出信號表示y之程序,其中輸入表示之樣本值經正規化在0至1範圍中,且輸出表示在及0至1範圍中。 if( x <= CompScaleInputRanges[ c ][ 0 ] ) y = CompScaleOutputRanges[ c ][ 0 ] else if( x > CompScaleInputRanges[ c ][ comp_scale_num_ranges[ c ] ] ) y = CompScaleOutputRanges[ c ][ comp_scale_num_ranges[ c ]; ] else for( i = 1; i <= comp_scale_num_ranges[ c ]; i++ ) if( CompScaleInputRanges[ i − 1 ] < x && x <= CompScaleInputRanges[ i ] ) y = ( x − CompScaleInputRanges[ i − 1 ] ) 􀀀 comp_scale_val[ c ][ i ] + CompScaleOutputRanges[ c ][ i - 1 ] 在一個替代方案中,基於准許之樣本值範圍來設定CompScaleOutputRanges[ c ][ 0 ]之值。 替代地,如下所述地定義將輸入值valIn映射至輸出值valOut之程序。 m_pAtfRangeIn[ 0 ] = 0; m_pAtfRangeOut[ 0 ] = −m_offset2 *m_pAtfScale2[c][0]; for (int j = 1; j < m_atfNumberRanges + 1; j++) { m_pAtfRangeIn[ j ] = m_pAtfRangeIn[j − 1] + m_pAtfDelta[j − 1]; m_pAtfRangeOut[ j ] = m_pAtfRangeOut[j − 1] + m_pAtfScale2[ c ][ j –1 ] * m_pAtfDelta[ j - 1 ]; } for (int j = 0; j < numRanges && skip = = 0; j++) { if (valIn <= pAtfRangeIn[ j + 1 ]) { valOut = (valIn − pOffset[component][ j ]) * pScale[ component ][ j ]; skip = 1; } ] 在一個替代方案中,對於第c個成分,m_offset2等於comp_scale_global_offset_val[ c ] ÷ ( 1 << comp_scale_offset_frac_bit_depth ),m_pAtfScale[ c ][ i ]等於CompScaleScaleVal[ c ][ i ]且m_pAtfDelta[ i ]等於CompScaleOffsetVal[ c ][ i ],且pScale及pOffset為自m_AtfScale及m_pAtfDelta導出之縮放參數及偏移參數。 將相應地定義反操作。實例 6 在一些實例中,上文所述(例如,實例5中)之發信方法中之一些可如展示地用於以下偽程式碼中。 m_atfNumberRanges為針對給定c的語法元素comp_scale_num_ranges[ c ]之項,其指定針對映射資料之動態範圍分割之數目。 m_pAtfRangeIn為CompScaleInputRanges之項,為具有大小m_atfNumberRanges+1之陣列,其包括指定兩個串接分割區(例如,i及i+1)之間的邊界之輸入樣本值。 m_pAtfRangeOut為CompScaleOutputRanges之項,為具有大小m_atfNumberRanges+1之陣列,其包括指定兩個串接分割區(例如,i及i+1)之間的邊界之輸出樣本值。 m_pAtfScale2為變數CompScaleScaleVal [ c ]之項,為具有大小m_atfNumberRanges之陣列,其包括用於每一分割區之比例值。 m_pAtfOffset2為陣列大小為m_atfNumberRanges之陣列,其包括用於每一分割區之偏移值。 m_offset2為針對comp_scale_global_offset_val之項目。 在此實例中,可根據語法元素判定片段線性模型之參數,如在演算法1中: 演算法1: m_pAtfRangeIn[0] = 0; m_pAtfRangeOut[0] = -m_offset2 *m_pAtfScale2[c][0]; for (int j = 1; j < m_atfNumberRanges + 1; j++) { m_pAtfRangeIn[j] = m_pAtfRangeIn[j - 1] + m_pAtfDelta[j - 1]; m_pAtfRangeOut[j] = m_pAtfRangeOut[j - 1] + m_pAtfScale2[c][j - 1] * m_pAtfDelta[j - 1]; } for (int j = 0; j < m_atfNumberRanges; j++) { temp = m_pAtfRangeIn[j + 1] - m_pAtfRangeOut[j + 1] / m_pAtfScale2[c][j]; m_pAtfOffset2[c][j] = temp; } 一旦判定,即可將片段線性模型應用於輸入樣本值inValue,以判定輸出樣本值outValue,如在演算法2中: 演算法2: for (int j = 0; j < m_atfNumberRanges && skip == 0; j++) { if (inValue <= m_pAtfRangeIn[j + 1]) { outValue = (inValue - m_pAtfOffset2 [j]) * m_pAtfScale2 [j]; skip = 1; } } 將進行逆程序,如在演算法3中: 演算法3: for (int j = 0; j < m_atfNumberRanges && skip == 0; j++) { if (inValue <= m_pAtfRangeOut[j + 1]) { outValue = inValue / m_pAtfScale2 [j] + m_pAtfOffset2 [j]; skip = 1; } } 在一些實例中,兩個串接分割區i與i+1之間的邊界樣本值(m_pAtfRangeIn或m_pAtfRangeOut之輸入項)可不同地解譯為屬於i+1分割區(而非屬於i分割區),此係因為其展示於演算法2及3中。 在一些實例中,演算法3中所展示之逆程序可藉由利用乘以m_pAtfInverseScale2值(而非除以m_pAtfScale2[j])來實施。在此等實例中,預先根據m_pAtfScale2[ j ]來判定m_pAtfScale2[ j ]之值。 在一些實例中,m_pAtfInverseScale2 [j]在解碼器側經判定為1/m_pAtfScale2[j]。 在一些實例中,m_pAtfInverseScale2 [j]可在編碼器側進行計算,且經由位元串流發信。在此等實例中,演算法1、2及3中給定之操作將予以相應調整。 各種實例 在一些實例中,建議之發信機制可用以模型化片段函數,其可用以實現針對輸入信號之樣本的動態範圍調整,(例如)以改良視訊寫碼系統之壓縮效率。 在一些實例中,建議之發信機制可用以模型化片段函數,其可應用於藉由OETF(例如,藉由ST.2084之PQ TF或其他)產生之碼字(R,G,B樣本之非線性表示)。 在一些實例中,建議之發信機制可用以模型化可應用於YCbCr色彩表示之樣本的片段函數。 在一些實例中,建議之發信機制可用以模型化可用以具有SDR相容性之HDR/WCG解決方案之片段函數。 在一些實例中,建議之發信機制可用以模型化可應用於浮點表示之樣本之片段函數。在另一實例中,建議之發信機制及所得函數可應用於整數表示(例如,10位元)之樣本。 在一些實例中,建議之發信機制可用以模型化可應用於查找表形式之樣本的片段函數。在另一實例中,建議之發信機制可用以模型化可應用於乘法器形式之樣本的函數。組合及擴展 在以上實例中,針對每一區採用線性模型(即,比例加偏移);本發明之技術亦可適用於高次多項式模型,例如,第2程度之多項式需要三個參數而非兩個參數。將針對此情境適當地擴展發信及語法。 上述態樣之組合係可能的且為本發明之技術之部分。 工具箱組合:存在可以與本發明中所描述之SEI之目的有些類似之目的為目標的若干HDR方法。為了適應其中超過一個之目標,但同時限制每個圖框之可適用SEI處理之數目,建議將此等方法(中之一或多者)組合在單一SEI中。建議之語法元素將指示在各情況下應用之特定方法。舉例而言,若SEI中存在兩種可能方法,則語法元素將為指示待使用之方法的旗標。實例 7 在此實例中,修改縮放參數之發信,以使得可傳輸負比例,且所發信之縮放參數指示針對各種成分之不同範圍將應用的比例之偏差。以下為相對於實例5之變化。SEI 訊息之語法之變化 SEI 訊息之語義之變化 等於1之comp_scale_negative_scales_present_flag 指定自comp_scale_scale_val[ c ][ i ]導出之縮放參數之整數部分係表示為有正負號整數。等於0之comp_scale_negative_scales_present_flag指定自comp_scale_scale_val[ c ][ i ]導出之整數部分縮放參數係表示為無正負號整數。 在一個替代方案中,將偏移參數之另一集合與comp_scale_scale_val一起發信,該等偏移參數用以定義與第一成分之比例一起應用之偏移作為第二成分之值之函數。 有正負號整數表示包括(但不限於)二補碼記法且有正負號量值表示(一個位元用於正負號且剩餘位元用於整數部分)。針對有正負號量值表示給出以下推導。對於其他形式之有正負號表示,可類似地定義推導。 如下所述地導出變數CompScaleScaleVal[ c ][ i ]: compScaleScaleFracPart = ( comp_scale_scale_val[ c ][ i ] & ( (1 << comp_scale_scale_frac_bit_depth ) – 1 ) ) (1 << comp_scale_scale_frac_bit_depth ) if( comp_scale_negative_scales_present_flag ) { compScaleSignPart = comp_scale_scale_val[ c ][ i ] >> (comp_scale_scale_bit_depth − 1) compScaleIntegerPart = comp_scale_scale_val[ c ][ i ] − ( compScaleSignPart << (comp_scale_scale_bit_depth − 1) ) compScaleIntegerVal = ( ( compScaleSignPart = = 1 ) : −1 : 1 ) * compScaleIntegerPart } else compScaleIntegerVal = comp_scale_scale_val[ c ][ i ] >> comp_scale_scale_frac_bit_depth CompScaleScaleVal[ c ][ i ] = compScaleIntegerVal + compScaleScaleFracPart 位元串流一致性之一要求為:當comp_scale_negative_scale_present_flag等於1時,comp_scale_scale_bit_depth之值應大於或等於comp_scale_scale_frac_bit_depth。comp_scale_dependent_component_id 指定縮放參數及偏移參數於視訊之各種成分之應用。當comp_scale_dependent_component_id等於0時,使用語法元素comp_scale_global_offset_val[ c ]、comp_scale_scale_val[ c ][ i ]及comp_scale_offset_val[ c ][ i ]來識別第c個成分之輸入值及輸出值之映射。當comp_scale_dependent_component_id大於0時,comp_scale_dependent_component_id - 1指定成分之索引,以使得語法元素comp_scale_global_offset_val[ c ]、comp_scale_scale_val[ c ][ i ]及comp_scale_offset_val[ c ][ i ]指定待應用於樣本之第c個成分之縮放參數之映射為樣本之第( comp_scale_dependent_component_id - 1 )個成分之值的函數。 語義之其餘部分類似於實例5中所描述之彼等語義。實例 8 在此實例中,ATF參數之位元深度取決於成分。對於每一成分,語法元素之位元深度係顯式地發信。另外,對於彼等語法元素,存在預設位元深度。預設值係在位元深度未明確地發信時指派。一旗標可指示是否應用預設值或顯式地發信預設值。 下表展示此等概念之實例。ATF參數之語法元素為比例hdr_recon_scale_val[ ][ ]及範圍hdr_recon_range_val[ ][ ]。指示對應位元深度之語法元素(整數部分及分數部分)為以下各者: · hdr_recon_scale_bit_depth[c], · hdr_recon_offset_bit_depth[c], · hdr_recon_scale_frac_bit_depth[c], · hdr_recon_offset_frac_bit_depth[ c ], 其中c為成分索引。可將比例及偏移(範圍)之預設位元深度設定為: · hdr_recon_scale_bit_depth[c] = 8, · hdr_recon_offset_bit_depth[c] = 8, · hdr_recon_scale_frac_bit_depth[c] = 6, · hdr_recon_offset_frac_bit_depth[ c ] = 8。 參數之準確度亦可針對ATF參數及色彩調整參數而不同。並且,預設值可按成分且針對色彩調整參數而不同。在此實例中,假定預設值為相同的。 實例 9 新HDR解決方案之所需性質為與先前HDR解決方案(如HDR10)回溯相容。語法元素可指示情況如此。此指示位元串流之特性,且HDR解碼器可決定在某些環境下不將計算資源耗費在反ATF處理上,若非ATF版本已經可視。 在一個實例中,保留hdr_recon_id語法元素之某些值以指示HDR10回溯相容性,或回溯相容性之程度。 在另一實例中,旗標(hdr_recon_hdr10_bc)指示此情形。 在一個實例中,發信之HDR10回溯相容性指示位元串流係可視的。替代地,其可指示發信值之某些特定性質:例如,發信值為保證此性質之一系列值。舉例而言,約束可為比例在0.9與1.1之間。 圖10為說明可實施本發明之技術之視訊編碼器20之實例的方塊圖。視訊編碼器20可執行目標色彩容器中已由視訊預處理器單元19處理之視訊圖塊內之視訊區塊的框內及框間寫碼。框內寫碼依賴於空間預測以減少或移除給定視訊圖框或圖像內之視訊的空間冗餘。框間寫碼依賴於時間預測以減少或移除視訊序列之相鄰圖框或圖像內之視訊的時間冗餘。框內模式(I模式)可指若干基於空間之寫碼模式中之任一者。框間模式(諸如,單向預測(P模式)或雙向預測(B模式))可指若干基於時間之寫碼模式中的任一者。 如圖10所示,視訊編碼器20接收待編碼視訊圖框之當前視訊區塊。在圖10之實例中,視訊編碼器20包括模式選擇單元40、視訊資料記憶體41、經解碼圖像緩衝器64、求和器50、變換處理單元52、量化單元54及熵編碼單元56。模式選擇單元40又包括運動補償單元44、運動估計單元42、框內預測處理單元46及分割單元48。為了視訊區塊重建構,視訊編碼器20亦包括反量化單元58、反變換處理單元60及求和器62。亦可包括解區塊濾波器(圖10中未圖示)以濾波區塊邊界以自重建構視訊移除區塊效應假影。若需要,解區塊濾波器通常將對求和器62之輸出進行濾波。亦可使用除解區塊濾波器以外之額外濾波器(迴路中或迴路後)。為簡潔起見未展示此等濾波器,但若需要,此等濾波器可對求和器50之輸出進行濾波(作為迴路中濾波器)。 視訊資料記憶體41可儲存待由視訊編碼器20之組件編碼的視訊資料。可(例如)自視訊源18獲得儲存於視訊資料記憶體41中之視訊資料。經解碼圖像緩衝器64可為儲存用於由視訊編碼器20在編碼視訊資料(例如,以框內或框間寫碼模式)時使用之參考視訊資料的參考圖像記憶體。視訊資料記憶體41及經解碼圖像緩衝器64可由多種記憶體器件中之任一者形成,諸如動態隨機存取記憶體(DRAM),包括同步DRAM (SDRAM)、磁阻式RAM(MRAM)、電阻式RAM(RRAM)或其他類型之記憶體器件。可由同一記憶體器件或單獨記憶體器件提供視訊資料記憶體41及經解碼圖像緩衝器64。在各種實例中,視訊資料記憶體41可與視訊編碼器20之其他組件一起在晶片上,或相對於彼等組件在晶片外。 在編碼程序期間,視訊編碼器20接收待寫碼之視訊圖框或圖塊。圖框或圖塊可劃分成多個視訊區塊。運動估計單元42及運動補償單元44執行所接收之視訊區塊相對於一或多個參考圖框中之一或多個區塊的框間預測性寫碼以提供時間預測。框內預測處理單元46可替代地執行所接收視訊區塊相對於在與待寫碼之區塊相同的圖框或圖塊中之一或多個相鄰區塊的框內預測性寫碼以提供空間預測。視訊編碼器20可執行多個寫碼遍次,(例如)以選擇用於每一視訊資料區塊的適當寫碼模式。 此外,分割單元48可基於對先前寫碼遍次中之先前分割方案的評估而將視訊資料之區塊分割成子區塊。舉例而言,分割單元48可起初將圖框或圖塊分割成LCU,並且基於速率-失真分析(例如,速率-失真最佳化)將LCU中之每一者分割成子CU。模式選擇單元40可進一步產生指示將LCU分割為子CU之四分樹資料結構。四分樹之葉節點CU可包括一或多個PU及一或多個TU。 模式選擇單元40可(例如)基於誤差結果而選擇寫碼模式(框內或框間)中之一者,且將所得經框內寫碼或經框間寫碼區塊提供至求和器50以產生殘餘區塊資料,且提供至求和器62以重建構用作參看圖框之經編碼區塊。模式選擇單元40亦將語法元素(諸如,運動向量、框內模式指示符、分區資訊及其他此類語法資訊)提供至熵編碼單元56。 運動估計單元42及運動補償單元44可高度整合,但為概念目的而分開說明。由運動估計單元42執行之運動估計為產生運動向量之程序,運動向量估計視訊區塊之運動。舉例而言,運動向量可指示在當前視訊圖框或圖像內之視訊區塊的PU相對於在參考圖像(或其他經寫碼單元)內的預測性區塊相對於在該當前圖像(或其他經寫碼單元)內正經寫碼的當前區塊之位移。預測性區塊為就像素差而言被發現緊密地匹配待寫碼區塊之區塊,該像素差可藉由絕對差總和(SAD)、平方差總和(SSD)或其他差度量判定。在一些實例中,視訊編碼器20可計算儲存於經解碼圖像緩衝器64中之參考圖像之子整數像素位置的值。舉例而言,視訊編碼器20可內插該參考圖像之四分之一像素位置、八分之一像素位置或其他分數像素位置之值。因此,運動估計單元42可執行相對於全像素位置及分數像素位置之運動搜尋且輸出具有分數像素精確度之運動向量。 運動估計單元42藉由比較PU之位置與參考圖像之預測性區塊之位置而計算框間寫碼圖塊中之視訊區塊之PU的運動向量。該參考圖像可選自第一參考圖像清單(清單0)或第二參考圖像清單(清單1),該等參考圖像清單中之每一者識別儲存於經解碼圖像緩衝器64中之一或多個參考圖像。運動估計單元42將所計算之運動向量發送至熵編碼單元56及運動補償單元44。 由運動補償單元44執行之運動補償可涉及基於由運動估計單元42所判定之運動向量來提取或產生該預測性區塊。又,在一些實例中,運動估計單元42及運動補償單元44可在功能上整合。在接收到當前視訊區塊之PU的運動向量之後,運動補償單元44可在參考圖像清單中之一者中定位運動向量所指向之預測性區塊。求和器50藉由自正經寫碼之當前視訊區塊的像素值減去預測性區塊之像素值來形成殘餘視訊區塊,從而形成像素差值,如下文所論述。一般而言,運動估計單元42相對於明度成分而執行運動估計,且運動補償單元44將基於明度成分所計算之運動向量用於色度成分與明度成分兩者。模式選擇單元40亦可產生與視訊區塊及視訊圖塊相關聯之語法元素以供視訊解碼器30在解碼視訊圖塊之視訊區塊過程中使用。 如上所述,作為由運動估計單元42及運動補償單元44所執行之框間預測的替代,框內預測處理單元46可對當前區塊進行框內預測。詳言之,框內預測處理單元46可判定框內預測模式以用以編碼當前區塊。在一些實例中,框內預測處理單元46可(例如)在分開之編碼遍次期間使用各種框內預測模式來編碼當前區塊,且框內預測單元46(或在一些實例中,模式選擇單元40)可自所測試之模式選擇使用之適當框內預測模式。 舉例而言,框內預測處理單元46可使用針對各種所測試框內預測模式之速率-失真分析來計算速率-失真值,且在所測試模式間選擇具有最佳速率-失真特性之框內預測模式。速率-失真分析一般判定經編碼區塊與原始未經編碼區塊(其經編碼以產生經編碼區塊)之間的失真(或誤差)量,以及用以產生經編碼區塊之位元速率(亦即,位元數目)。框內預測處理單元46可自各種經編碼區塊之失真及速率計算比率以判定哪一框內預測模式展現該區塊之最佳速率-失真值。 在選擇區塊之框內預測模式之後,框內預測處理單元46可將指示區塊之所選擇框內預測模式的資訊提供至熵編碼單元56。熵編碼單元56可編碼指示選定框內預測模式之資訊。視訊編碼器20可在所傳輸之位元串流中包括以下各者:組態資料,其可包括複數個框內預測模式索引表及複數個經修改之框內預測模式索引表(亦稱作碼字映射表);各種區塊之編碼上下文的定義;及待用於該等上下文中之每一者的最有可能之框內預測模式、框內預測模式索引表及經修改之框內預測模式索引表的指示。 視訊編碼器20藉由自正被寫碼之原始視訊區塊減去來自模式選擇單元40之預測資料而形成殘餘視訊區塊。求和器50表示執行此減法運算之一或多個組件。變換處理單元52將變換(諸如離散餘弦變換(DCT)或概念上類似之變換)應用於殘餘區塊,從而產生包含殘餘變換係數值之視訊區塊。變換處理單元52可執行概念上類似於DCT之其他變換。亦可使用小波變換、整數變換、子頻帶變換或其他類型之變換。在任何狀況下,變換處理單元52將變換應用於殘差區塊,從而產生殘差變換係數區塊。該變換可將殘差資訊自像素值域變換至變換域,諸如頻域。變換處理單元52可將所得變換係數發送至量化單元54。 量化單元54量化變換係數以進一步減小位元速率。該量化程序可減少與該等係數中之一些或全部相關聯的位元深度。可藉由調整量化參數來修改量化之程度。在一些實例中,量化單元54隨後可執行對包括經量化之變換係數之矩陣的掃描。替代地,熵編碼單元56可執行掃描。 在量化之後,熵編碼單元56熵寫碼經量化之變換係數。舉例而言,熵編碼單元56可執行上下文自適應性可變長度寫碼(CAVLC)、上下文自適應性二進位算術寫碼(CABAC)、基於語法之上下文自適應性二進位算術寫碼(SBAC)、機率區間分割熵(PIPE)寫碼或另一熵寫碼技術。在基於上下文之熵寫碼的狀況下,上下文可基於鄰近區塊。在由熵寫碼單元56進行熵寫碼之後,可將經編碼位元串流傳輸至另一器件(例如,視訊解碼器30)或加以存檔以供稍後傳輸或擷取。 反量化單元58及反變換單元60分別應用反量化及反變換以在像素域中重建構殘餘區塊(例如)以供稍後用作參考區塊。運動補償單元44可藉由將殘餘區塊加至經解碼圖像緩衝器64之圖框中的一者之預測性區塊而計算參考區塊。運動補償單元44亦可將一或多個內插濾波器應用至經重建構之殘餘區塊,以計算在運動估計中使用之子整數像素值。求和器62將經重建構之殘餘區塊添加至由運動補償單元44所產生之經運動補償預測區塊,以產生用於儲存於經解碼圖像緩衝器64中之經重建構視訊區塊。經重建構的視訊區塊可由運動估計單元42及運動補償單元44用作參考區塊以框間寫碼在後續視訊圖框中之區塊。 圖11為說明可實施本發明之技術之視訊解碼器30之實例的方塊圖。詳言之,視訊解碼器30可將視訊資料解碼成目標色彩容器,其接著可由視訊後處理器單元31進行處理,如上所述。在圖11之實例中,視訊解碼器30包括熵解碼單元70、視訊資料記憶體71、運動補償單元72、框內預測處理單元74、反量化單元76、反變換處理單元78、經解碼圖像緩衝器82及求和器80。在一些實例中,視訊解碼器30可執行大體上與關於視訊編碼器20 (圖10)所描述之編碼遍次互逆的解碼遍次。運動補償單元72可基於自熵解碼單元70所接收之運動向量產生預測資料,而框內預測處理單元74可基於自熵解碼單元70所接收之框內預測模式指示符產生預測資料。 視訊資料記憶體71可儲存待由視訊解碼器30之組件解碼的視訊資料,諸如經編碼視訊位元串流。可(例如)經由視訊資料之有線或無線網路通信或藉由存取實體資料儲存媒體而自電腦可讀媒體16 (例如,自本端視訊源,諸如攝影機)獲得儲存於視訊資料記憶體71中之視訊資料。視訊資料記憶體71可形成儲存來自經編碼視訊位元串流之經編碼視訊資料的經寫碼圖像緩衝器(CPB)。經解碼圖像緩衝器82可為儲存用於由視訊解碼器30在解碼視訊資料(例如,在框內或框間寫碼模式中)過程中使用的參考視訊資料之參考圖像記憶體。視訊資料記憶體71及經解碼圖像緩衝器82可由多種記憶體裝置中之任一者形成,諸如動態隨機存取記憶體(DRAM),包括同步DRAM(SDRAM)、磁阻式RAM(MRAM)、電阻式RAM(RRAM)或其他類型之記憶體裝置。可由同一記憶體器件或單獨記憶體器件提供視訊資料記憶體71及經解碼圖像緩衝器82。在各種實例中,視訊資料記憶體71可與視訊解碼器30之其他組件一起在晶片上,或相對於彼等組件在晶片外。 在解碼程序期間,視訊解碼器30自視訊編碼器20接收表示經編碼視訊圖塊之視訊區塊及相關聯語法元素的經編碼視訊位元串流。視訊解碼器30之熵解碼單元70熵解碼位元串流以產生經量化之係數、運動向量或框內預測模式指示符及其他語法元素。熵解碼單元70將運動向量及其他語法元素轉遞至運動補償單元72。視訊解碼器30可接收視訊片段層級及/或視訊區塊層級之語法元素。 當視訊圖塊經寫碼為經框內寫碼(I)圖塊時,框內預測處理單元74可基於經傳信框內預測模式及來自當前圖框或圖像之先前經解碼區塊的資料而產生當前視訊圖塊之視訊區塊的預測資料。當視訊圖框經寫碼為經框間寫碼(亦即,B或P)圖塊時,運動補償單元72基於自熵解碼單元70接收之運動向量及其他語法元素而產生當前視訊圖塊之視訊區塊的預測性區塊。可自參考圖像清單中之一者內的參考圖像中之一者產生預測性區塊。視訊解碼器30可基於儲存於經解碼圖像緩衝器82中之參考圖像使用預設建構技術來建構參考圖像清單(清單0及清單1)。運動補償單元72藉由剖析運動向量及其他語法元素來判定用於當前視訊圖塊之視訊區塊的預測資訊,且使用該預測資訊產生用於正經解碼之當前視訊區塊之預測性區塊。舉例而言,運動補償單元72使用所接收語法元素中之一些,以判定用以寫碼視訊圖塊之視訊區塊之預測模式(例如,框內或框間預測)、框間預測圖塊類型(例如,B圖塊或P圖塊)、用於該圖塊之參考圖像清單中之一或多者之建構資訊、用於該圖塊之每一經框間編碼視訊區塊之運動向量、用於該圖塊之每一經框間寫碼視訊區塊之框間預測狀態及用以解碼當前視訊圖塊中之視訊區塊的其他資訊。 運動補償單元72亦可基於內插濾波器執行內插。運動補償單元72可使用如由視訊編碼器20在視訊區塊之編碼期間所使用的內插濾波器,以計算參考區塊之子整數像素的內插值。在此情況下,運動補償單元72可根據接收之語法元素判定由視訊編碼器20使用之內插濾波器且使用該等內插濾波器來產生預測性區塊。 反量化單元76反量化(亦即,解量化)位元串流中所提供,並由熵解碼單元70解碼的經量化變換係數。反量化程序可包括使用由視訊解碼器30針對視訊圖塊中之每一視訊區塊計算之量化參數QPY 以判定應進行應用的量化程度及(同樣地)反量化程度。反變換處理單元78將反變換(例如,反DCT、反整數變換或概念上類似之反變換程序)應用於變換係數,以便產生像素域中之殘餘區塊。 在運動補償單元72基於運動向量及其他語法元素而產生當前視訊區塊之預測性區塊之後,視訊解碼器30藉由將來自反變換處理單元78之殘餘區塊與由運動補償單元72產生之對應預測性區塊求和而形成經解碼視訊區塊。求和器80表示可執行此求和運算之組件或多個組件。若需要,亦可應用解區塊濾波器來對經解碼區塊濾波以便移除區塊效應假影。亦可使用其他迴路濾波器(在寫碼迴路中或在寫碼迴路之後)使像素轉變平滑,或以其他方式改良視訊品質。接著將給定圖框或圖像中之經解碼視訊區塊儲存在經解碼圖像緩衝器82中,經解碼圖像緩衝器儲存用於後續運動補償之參考圖像。經解碼圖像緩衝器82亦儲存經解碼視訊,以用於稍後在顯示器件(諸如,圖1之顯示器件32)上呈現。 圖12為展示本發明之一個實例視訊處理技術的流程圖。圖12之該等技術可由視訊編碼器20及/或視訊預處理器單元19執行。在圖12之實例中,源器件12可經組態以使用一攝影機擷取視訊資料(1200)。視訊編碼器20及/或視訊預處理器單元19可經組態以使用固定點計算對視訊資料執行一動態範圍調整程序(1210)。視訊編碼器20及/或視訊預處理器單元19可經進一步組態以使用固定點計算產生含有指定如何判定用於執行相對於該動態範圍調整程序之一反動態範圍調整程序之參數之資訊的一或多個語法元素(1220)。 在一個實例中,視訊編碼器20及/或視訊預處理器單元19可經組態以藉由在一或多個補充增強資訊(SEI)訊息中產生該一或多個語法元素而產生該一或多個語法元素。在一個實例中,該等參數包含一範圍參數、一比例參數或一偏移參數中之一或多者。在另一實例中,該資訊指示以下各者中之一或多者:用於判定該範圍參數的分數位元之一第一數目、用於判定該比例參數的分數位元之一第二數目及用於判定該偏移參數的分數位元之一第三數目。在另一實例中,該資訊包括該視訊資料之一或多個色彩成分之一最小值及一最大值。在另一實例中,該資訊包括該經解碼視訊資料之樣本值之一預定範圍的一索引。 圖13為展示本發明之另一實例視訊處理技術的流程圖。圖13之該等技術可由視訊解碼器30及/或視訊後處理器單元31執行。在本發明之一個實例中,視訊解碼器30及/或視訊後處理器單元31可經組態以接收含有指定如何判定用於執行一反動態範圍調整程序之參數之資訊的一或多個語法元素(1300),且接收該經解碼視訊資料(1310)。 視訊解碼器30及/或視訊後處理器單元31可經進一步組態以根據該接收之資訊判定用於一反動態範圍調整程序之參數(1320),且根據接收之該資訊及該等經判定參數,使用固定點計算對該經解碼視訊資料執行該反動態範圍調整程序(1330)。目的地器件14可經進一步組態以在對該經解碼視訊資料執行該反動態範圍調整程序之後而顯示該經解碼視訊資料(1340)。 在本發明之一個實例中,視訊解碼器30及/或視訊後處理器單元31可經組態以接收一或多個補充增強資訊(SEI)訊息中的該一或多個語法元素。在一個實例中,該等參數包含一範圍參數、一比例參數或一偏移參數中之一或多者。在另一實例中,該資訊指示以下各者中之一或多者:用於判定該範圍參數的分數位元之一第一數目、用於判定該比例參數的分數位元之一第二數目及用於判定該偏移參數的分數位元之一第三數目。 在本發明之另一實例中,視訊解碼器30及/或視訊後處理器單元31可經組態以在分數位元之該第一數目、分數位元之該第二數目或分數位元之該第三數目中之至少一者彼此不同之情況下,藉由在用以判定該等參數之任何中間計算程序期間累積任何分數位元來判定該等參數,且基於一預定的分數準確度而裁剪一最終結果以用於判定該等參數。 在本發明之另一實例中,視訊解碼器30及/或視訊後處理器單元31可經組態以藉由在用以判定該等參數之所有中間計算程序期間截斷超出一所要分數準確度之任何分數位元來判定該等參數。 在另一實例中, 該資訊包括該經解碼視訊資料之一或多個色彩成分之一最小值及一最大值,且視訊解碼器30及/或視訊後處理器單元31可經組態以基於該接收之最小值及該接收之最大值來判定該等參數。 在另一實例中, 該資訊包括該經解碼視訊資料之一或多個色彩成分之樣本值之一預定範圍的一索引,且視訊解碼器30及/或視訊後處理器單元31可經組態以基於該接收之索引來判定該經解碼視訊資料之該一或多個色彩成分之一最小值及一最大值,且基於該判定之最小值及該判定之最大值來判定該等參數。 在本發明之另一實例中,視訊解碼器30及/或視訊後處理器單元31可經組態以接收指示該等參數帶正負號或不帶正負號之一語法元素,且對該SEI訊息中之該資訊執行一剖析程序,其中該剖析程序不管該語法元素之值如何都相同。 出於說明目的,本發明之某些態樣已經關於HEVC標準之擴展而描述。然而,本發明中所描述之技術可用於其他視訊寫碼程序,包括尚未開發之其他標準或專屬視訊寫碼程序。 如本發明中所描述,視訊寫碼器可指視訊編碼器或視訊解碼器。類似地,視訊寫碼單元可指視訊編碼器或視訊解碼器。同樣地,如適用,視訊寫碼可指視訊編碼或視訊解碼。 應認識到,取決於實例,本文中所描述之技術中之任一者的某些動作或事件可以不同序列執行、可添加、合併或完全省略(例如,並非所有所描述的動作或事件對於技術之實踐係必要的)。此外,在某些實例中,可例如經由多執行緒處理、中斷處理或多個處理器同時地(而非依序地)執行動作或事件。 在一或多個實例中,所描述之功能可以硬體、軟體、韌體或其任何組合來實施。若以軟體實施,則該等功能可作為一或多個指令或程式碼而儲存於電腦可讀媒體上或經由電腦可讀媒體進行傳輸,且藉由基於硬體之處理單元來執行。電腦可讀媒體可包括電腦可讀儲存媒體,其對應於諸如資料儲存媒體之有形媒體或(例如)根據通信協定包括促進電腦程式自一位置至另一位置之傳送之任何媒體的通信媒體。以此方式,電腦可讀媒體大體可對應於(1)為非暫時性的有形電腦可讀儲存媒體,或(2)諸如信號或載波之通信媒體。資料儲存媒體可為可由一或多個電腦或一或多個處理器存取以擷取指令、程式碼及/或資料結構以用於實施本發明中所描述之技術的任何可用媒體。電腦程式產品可包括電腦可讀媒體。 借助於實例而非限制,此等電腦可讀儲存媒體可包含RAM、ROM、EEPROM、CD-ROM或其他光碟儲存器、磁碟儲存器或其他磁性儲存器、快閃記憶體或可用以儲存呈指令或資料結構形式之所要的程式碼且可由電腦存取的任何其他媒體。又,將任何連接適當地稱為電腦可讀媒體。舉例而言,若使用同軸纜線、光纖纜線、雙絞線、數位用戶線(DSL)或諸如紅外線、無線電及微波之無線技術自網站、伺服器或其他遠端源傳輸指令,則同軸纜線、光纖纜線、雙絞線、DSL或諸如紅外線、無線電及微波之無線技術包括於媒體之定義中。然而,應理解,電腦可讀儲存媒體及資料儲存媒體不包括連接、載波、信號或其他暫時性媒體,而是針對非暫時性有形儲存媒體。如本文所使用,磁碟及光碟包括緊密光碟(CD)、雷射光碟、光學光碟、數位多功能光碟(DVD)、軟碟及藍光光碟,其中磁碟通常以磁性方式再現資料,而光碟用雷射以光學方式再現資料。以上各者之組合亦應包括於電腦可讀媒體之範圍內。 可藉由諸如一或多個數位信號處理器(DSP)、通用微處理器、特殊應用積體電路(ASIC)、場可程式化邏輯陣列(FPGA)或其他等效積體或離散邏輯電路之一或多個處理器來執行指令。相應地,如本文中所使用之術語「處理器」可指上述結構或適合於實施本文中所描述之技術的任何其他結構中的任一者。另外,在一些態樣中,本文中所描述之功能性可提供於經組態用於編碼及解碼的專用硬體及/或軟體模組內,或併入於組合式編解碼器中。再者,該等技術可完全實施於一或多個電路或邏輯元件中。 本發明之技術可在多種器件或裝置中實施,該等器件或裝置包括無線手機、積體電路(IC)或IC集合(例如,晶片組)。在本發明中描述各種組件、模組或單元以強調經組態以執行所揭示技術之器件的功能態樣,但未必要求由不同硬體單元來實現。相反地,如上所述,可將各種單元組合於編碼解碼器硬體單元中,或由互操作性硬體單元(包括如上文所描述之一或多個處理器)之集合結合合適軟體及/或韌體來提供該等單元。 已描述各種實例。此等及其他實例在以下申請專利範圍之範疇內。
10‧‧‧視訊編碼及解碼系統 12‧‧‧源器件 14‧‧‧目的地器件 16‧‧‧電腦可讀媒體 18‧‧‧視訊源 19‧‧‧視訊預處理器單元 20‧‧‧視訊編碼器 21‧‧‧視訊編碼單元 22‧‧‧輸出介面 28‧‧‧輸入介面 29‧‧‧視訊解碼單元 30‧‧‧視訊解碼器 31‧‧‧視訊後處理器單元 32‧‧‧顯示器件 40‧‧‧模式選擇單元 41‧‧‧視訊資料記憶體 42‧‧‧運動估計單元 44‧‧‧運動補償單元 46‧‧‧框內預測處理單元 48‧‧‧分割單元 50‧‧‧求和器 52‧‧‧變換處理單元 54‧‧‧量化單元 56‧‧‧熵編碼單元 58‧‧‧反量化單元 60‧‧‧反變換處理單元 62‧‧‧求和器 64‧‧‧經解碼圖像緩衝器 70‧‧‧熵解碼單元 71‧‧‧視訊資料記憶體 72‧‧‧運動補償單元 74‧‧‧框內預測處理單元 76‧‧‧反量化單元 78‧‧‧反變換處理單元 80‧‧‧求和器 82‧‧‧經解碼圖像緩衝器 100‧‧‧SDR色域/三角形 102‧‧‧較廣色域/三角形 104‧‧‧光譜軌跡/舌片形狀之區域 110‧‧‧線性RGB資料 112‧‧‧非線性轉移函數(TF) 114‧‧‧色彩轉換程序 116‧‧‧浮點至整數表示量化單元 118‧‧‧經轉換之HDR之資料 120‧‧‧經轉換之HDR之資料 122‧‧‧反量化單元 124‧‧‧反色彩轉換程序 126‧‧‧反轉移函數 128‧‧‧線性RGB資料 200‧‧‧RGB原生CG視訊資料 202‧‧‧CG轉換器 204‧‧‧RGB目標CG視訊資料 206‧‧‧轉移函數單元 208‧‧‧色彩轉換單元 210‧‧‧調整單元 212‧‧‧DRA參數估計單元 214‧‧‧量化單元 216‧‧‧HDR之資料 300‧‧‧RGB原生CG 302‧‧‧反CG轉換器 304‧‧‧RGB目標CG 306‧‧‧反轉移函數 308‧‧‧反色彩轉換單元 310‧‧‧反調整單元 312‧‧‧DRA參數導出單元 314‧‧‧反量化單元 316‧‧‧HDR之資料 1300‧‧‧步驟 1310‧‧‧步驟 1320‧‧‧步驟 1330‧‧‧步驟 1340‧‧‧步驟
圖1為說明經組態以實施本發明之技術之實例視訊編碼及解碼系統的方塊圖。 圖2為展示色彩重映射資訊(CRI)程序之典型結構的概念圖。 圖3為說明HDR資料之概念的概念圖。 圖4為說明實例色域之概念圖。 圖5為說明HDR/WCG表示轉換之實例的流程圖。 圖6為說明HDR/WCG逆轉換之實例的流程圖。 圖7為說明用於自感知均勻的碼層級至線性明度之視訊資料轉換(包括SDR及HDR)之電光轉移函數(EOTF)之實例的概念圖。 圖8為說明根據本發明之技術操作之實例HDR/WCG轉換裝置的方塊圖。 圖9為說明根據本發明之技術之實例HDR/WCG逆轉換裝置的方塊圖。 圖10為說明可實施本發明之技術之視訊編碼器之實例的方塊圖。 圖11為說明可實施本發明之技術之視訊解碼器之實例的方塊圖。 圖12為展示本發明之一個實例視訊處理技術之流程圖。 圖13為展示本發明之另一實例視訊處理技術之流程圖。
1300‧‧‧步驟
1310‧‧‧步驟
1320‧‧‧步驟
1330‧‧‧步驟
1340‧‧‧步驟

Claims (56)

  1. 一種處理視訊資料之方法,該方法包含: 接收含有指定如何判定用於執行一反動態範圍調整程序之參數之資訊的一或多個語法元素; 接收經解碼視訊資料;及 根據接收之該資訊,使用固定點計算對該經解碼視訊資料執行該反動態範圍調整程序。
  2. 如請求項1之方法,其中接收該一或多個語法元素包含接收一或多個補充增強資訊(SEI)訊息中的該一或多個語法元素,且其中該等參數包含一範圍參數、一比例參數或一偏移參數中之一或多者。
  3. 如請求項2之方法,其中該資訊指示以下各者中之一或多者:用於判定該範圍參數的分數位元之一第一數目、用於判定該比例參數的分數位元之一第二數目及用於判定該偏移參數的分數位元之一第三數目。
  4. 如請求項3之方法,其進一步包含: 使用分數位元之該第一數目、分數位元之該第二數目及分數位元之該第三數目來判定該等參數。
  5. 如請求項4之方法,其中判定該等參數進一步包含: 在分數位元之該第一數目、分數位元之該第二數目或分數位元之該第三數目中之至少一者彼此不同之情況下,藉由在用以判定該等參數之任何中間計算程序期間累積任何分數位元來判定該等參數;及 基於一預定的分數準確度而裁剪一最終結果以用於判定該等參數。
  6. 如請求項4之方法,其中判定該等參數進一步包含: 藉由在用以判定該等參數之所有中間計算程序期間截斷超出一所要分數準確度之任何分數位元來判定該等參數。
  7. 如請求項1之方法,其中該資訊包括該經解碼視訊資料之一或多個色彩成分之一最小值及一最大值,該方法進一步包含: 基於該接收之最小值及該接收之最大值來判定該等參數。
  8. 如請求項1之方法,其中該資訊包括該經解碼視訊資料之一或多個色彩成分之樣本值之一預定範圍的一索引,該方法進一步包含: 基於該接收之索引來判定該經解碼視訊資料之該一或多個色彩成分之一最小值及一最大值;及 基於該判定之最小值及該判定之最大值來判定該等參數。
  9. 如請求項1之方法,其進一步包含: 接收指示該等參數帶正負號或不帶正負號之一語法元素;及 對該SEI訊息中之該資訊執行一剖析程序,其中該剖析程序不管該語法元素之值如何都相同。
  10. 如請求項1之方法,其進一步包含: 在對該經解碼視訊資料執行該反動態範圍調整程序之後而顯示該經解碼視訊資料。
  11. 一種經組態以處理視訊資料之裝置,該裝置包含: 一記憶體,其經組態以儲存經解碼視訊資料;及 經組態以進行以下操作之一或多個處理器: 接收含有指定如何判定用於執行一反動態範圍調整程序之參數之資訊的一或多個語法元素; 接收該經解碼視訊資料;及 根據接收之該資訊,使用固定點計算對該經解碼視訊資料執行該反動態範圍調整程序。
  12. 如請求項11之裝置,其中接收該一或多個處理器經進一步組態以接收一或多個補充增強資訊(SEI)訊息中的該一或多個語法元素,且其中該等參數包含一範圍參數、一比例參數或一偏移參數中之一或多者。
  13. 如請求項12之裝置,其中該資訊指示以下各者中之一或多者:用於判定該範圍參數的分數位元之一第一數目、用於判定該比例參數的分數位元之一第二數目及用於判定該偏移參數的分數位元之一第三數目。
  14. 如請求項13之裝置,其中該一或多個處理器經進一步組態以: 使用分數位元之該第一數目、分數位元之該第二數目及分數位元之該第三數目來判定該等參數。
  15. 如請求項14之裝置,其中為判定該等參數,該一或多個處理器經進一步組態以: 在分數位元之該第一數目、分數位元之該第二數目或分數位元之該第三數目中之至少一者彼此不同之情況下,藉由在用以判定該等參數之任何中間計算程序期間累積任何分數位元來判定該等參數;且 基於一預定的分數準確度而裁剪一最終結果以用於判定該等參數。
  16. 如請求項14之裝置,其中為判定該等參數,該一或多個處理器經進一步組態以: 藉由在用以判定該等參數之所有中間計算程序期間截斷超出一所要分數準確度之任何分數位元來判定該等參數。
  17. 如請求項11之裝置,其中該資訊包括該經解碼視訊資料之一或多個色彩成分之一最小值及一最大值,且其中該一或多個處理器經進一步組態以: 基於該接收之最小值及該接收之最大值來判定該等參數。
  18. 如請求項11之裝置,其中該資訊包括該經解碼視訊資料之一或多個色彩成分之樣本值之一預定範圍的一索引,且其中該一或多個處理器經進一步組態以: 基於該接收之索引來判定該經解碼視訊資料之該一或多個色彩成分之一最小值及一最大值;且 基於該判定之最小值及該判定之最大值來判定該等參數。
  19. 如請求項11之裝置,其中該一或多個處理器經進一步組態以: 接收指示該等參數帶正負號或不帶正負號之一語法元素;且 對該SEI訊息中之該資訊執行一剖析程序,其中該剖析程序不管該語法元素之值如何都相同。
  20. 如請求項11之裝置,該裝置進一步包含: 一顯示器,其經組態以在該一或多個處理器對該經解碼視訊資料執行該反動態範圍調整程序之後而顯示該經解碼視訊資料。
  21. 如請求項11之裝置,其中該裝置包含一攝影機、一電腦、一行動器件、一廣播接收器器件或一機上盒中之一或多者。
  22. 一種經組態以處理視訊資料之裝置,該裝置包含: 用於接收含有指定如何判定用於執行一反動態範圍調整程序之參數之資訊的一或多個語法元素的構件; 用於接收經解碼視訊資料的構件;及 用於根據接收之該資訊,使用固定點計算對該經解碼視訊資料執行該反動態範圍調整程序的構件。
  23. 如請求項22之裝置,其中用於接收該一或多個語法元素的該構件包含用於接收一或多個補充增強資訊(SEI)訊息中的該一或多個語法元素的構件,且其中該等參數包含一範圍參數、一比例參數或一偏移參數中之一或多者。
  24. 如請求項23之裝置,其中該資訊指示以下各者中之一或多者:用於判定該範圍參數的分數位元之一第一數目、用於判定該比例參數的分數位元之一第二數目及用於判定該偏移參數的分數位元之一第三數目。
  25. 如請求項24之裝置,其進一步包含: 用於使用分數位元之該第一數目、分數位元之該第二數目及分數位元之該第三數目來判定該等參數的構件。
  26. 如請求項25之裝置,其中用於判定該等參數的該構件進一步包含: 用於在分數位元之該第一數目、分數位元之該第二數目或分數位元之該第三數目中之至少一者彼此不同之情況下,藉由在用以判定該等參數之任何中間計算程序期間累積任何分數位元來判定該等參數的構件;及 用於基於一預定的分數準確度而裁剪一最終結果以用於判定該等參數的構件。
  27. 如請求項25之裝置,其中用於判定該等參數的構件進一步包含: 用於藉由在用以判定該等參數之所有中間計算程序期間截斷超出一所要分數準確度之任何分數位元來判定該等參數的構件。
  28. 如請求項22之裝置,其中該資訊包括該經解碼視訊資料之一或多個色彩成分之一最小值及一最大值,該裝置進一步包含: 用於基於該接收之最小值及該接收之最大值來判定該等參數的構件。
  29. 如請求項22之裝置,其中該資訊包括該經解碼視訊資料之一或多個色彩成分之樣本值之一預定範圍的一索引,該裝置進一步包含: 用於基於該接收之索引來判定該經解碼視訊資料之該一或多個色彩成分之一最小值及一最大值的構件;及 用於基於該判定之最小值及該判定之最大值來判定該等參數的構件。
  30. 如請求項22之裝置,其進一步包含: 用於接收指示該等參數帶正負號或不帶正負號之一語法元素的構件;及 用於對該SEI訊息中之該資訊執行一剖析程序的構件,其中該剖析程序不管該語法元素之值如何都相同。
  31. 如請求項22之裝置,其進一步包含: 用於在對該經解碼視訊資料執行該反動態範圍調整程序之後而顯示該經解碼視訊資料的構件。
  32. 一種儲存指令之電腦可讀儲存媒體,該等指令在執行時使經組態以處理視訊資料之一器件之一或多個處理器進行以下操作: 接收含有指定如何判定用於執行一反動態範圍調整程序之參數之資訊的一或多個語法元素; 接收該經解碼視訊資料;及 根據接收之該資訊,使用固定點計算對該經解碼視訊資料執行該反動態範圍調整程序。
  33. 如請求項32之電腦可讀儲存媒體,其中該等指令進一步使該一或多個處理器接收一或多個補充增強資訊(SEI)訊息中的該一或多個語法元素,且其中該等參數包含一範圍參數、一比例參數或一偏移參數中之一或多者。
  34. 如請求項33之電腦可讀儲存媒體,其中該資訊指示以下各者中之一或多者:用於判定該範圍參數的分數位元之一第一數目、用於判定該比例參數的分數位元之一第二數目及用於判定該偏移參數的分數位元之一第三數目。
  35. 如請求項34之電腦可讀儲存媒體,其中該等指令進一步使該一或多個處理器: 使用分數位元之該第一數目、分數位元之該第二數目及分數位元之該第三數目來判定該等參數。
  36. 如請求項35之電腦可讀儲存媒體,其中該等指令進一步使該一或多個處理器: 在分數位元之該第一數目、分數位元之該第二數目或分數位元之該第三數目中之至少一者彼此不同之情況下,藉由在用以判定該等參數之任何中間計算程序期間累積任何分數位元來判定該等參數;及 基於一預定的分數準確度而裁剪一最終結果以用於判定該等參數。
  37. 如請求項35之電腦可讀儲存媒體,其中該等指令進一步使該一或多個處理器: 藉由在用以判定該等參數之所有中間計算程序期間截斷超出一所要分數準確度之任何分數位元來判定該等參數。
  38. 如請求項32之電腦可讀儲存媒體,其中該資訊包括該經解碼視訊資料之一或多個色彩成分之一最小值及一最大值,且其中該等指令進一步使該一或多個處理器: 基於該接收之最小值及該接收之最大值來判定該等參數。
  39. 如請求項32之電腦可讀儲存媒體,其中該資訊包括該經解碼視訊資料之一或多個色彩成分之樣本值之一預定範圍的一索引,其中該等指令進一步使該一或多個處理器: 基於該接收之索引來判定該經解碼視訊資料之該一或多個色彩成分之一最小值及一最大值;且 基於該判定之最小值及該判定之最大值來判定該等參數。
  40. 如請求項32之電腦可讀儲存媒體,其中該等指令進一步使該一或多個處理器: 接收指示該等參數帶正負號或不帶正負號之一語法元素;且 對該SEI訊息中之該資訊執行一剖析程序,其中該剖析程序不管該語法元素之值如何都相同。
  41. 如請求項32之電腦可讀儲存媒體,其中該等指令進一步使該一或多個處理器: 在對該經解碼視訊資料執行該反動態範圍調整程序之後而顯示該經解碼視訊資料。
  42. 一種處理視訊資料之方法,該方法包含: 使用固定點計算對視訊資料執行一動態範圍調整程序;及 使用固定點計算產生含有指定如何判定用於執行相對於該動態範圍調整程序之一反動態範圍調整程序之參數之資訊的一或多個語法元素。
  43. 如請求項42之方法,其中產生該一或多個語法元素包含在一或多個補充增強資訊(SEI)訊息中產生該一或多個語法元素,且其中該等參數包含一範圍參數、一比例參數或一偏移參數中之一或多者。
  44. 如請求項43之方法,其中該資訊指示以下各者中之一或多者:用於判定該範圍參數的分數位元之一第一數目、用於判定該比例參數的分數位元之一第二數目及用於判定該偏移參數的分數位元之一第三數目。
  45. 如請求項42之方法,其中該資訊包括該視訊資料之一或多個色彩成分之一最小值及一最大值。
  46. 如請求項42之方法,其中該資訊包括該經解碼視訊資料之樣本值之一預定範圍的一索引。
  47. 如請求項42之方法,其進一步包含: 用一攝影機擷取該視訊資料。
  48. 一種經組態以處理視訊資料之裝置,該裝置包含: 一記憶體,其經組態以儲存視訊資料;及 經組態以進行以下操作之一或多個處理器: 使用固定點計算對該視訊資料執行一動態範圍調整程序;及 使用固定點計算產生含有指定如何判定用於執行相對於該動態範圍調整程序之一反動態範圍調整程序之參數之資訊的一或多個語法元素。
  49. 如請求項48之裝置,其中該一或多個處理器經進一步組態以在一或多個補充增強資訊(SEI)訊息中產生該一或多個語法元素,且其中該等參數包含一範圍參數、一比例參數或一偏移參數中之一或多者。
  50. 如請求項49之裝置,其中該資訊指示以下各者中之一或多者:用於判定該範圍參數的分數位元之一第一數目、用於判定該比例參數的分數位元之一第二數目及用於判定該偏移參數的分數位元之一第三數目。
  51. 如請求項48之裝置,其中該資訊包括該視訊資料之一或多個色彩成分之一最小值及一最大值。
  52. 如請求項48之裝置,其中該資訊包括該經解碼視訊資料之樣本值之一預定範圍的一索引。
  53. 如請求項48之裝置,該裝置進一步包含: 一攝影機,其經組態以擷取該視訊資料。
  54. 如請求項48之裝置,其中該裝置包含一攝影機、一電腦、一行動器件、一廣播接收器器件或一機上盒中之一或多者。
  55. 一種經組態以處理視訊資料之裝置,該裝置包含: 用於使用固定點計算對視訊資料執行一動態範圍調整程序的構件;及 用於使用固定點計算產生含有指定如何判定用於執行相對於該動態範圍調整程序之一反動態範圍調整程序之參數之資訊的一或多個語法元素的構件。
  56. 一種儲存指令之電腦可讀儲存媒體,該等指令在執行時使經組態以處理視訊資料之一器件之一或多個處理器進行以下操作: 使用固定點計算對該視訊資料執行一動態範圍調整程序;及 使用固定點計算產生含有指定如何判定用於執行相對於該動態範圍調整程序之一反動態範圍調整程序之參數之資訊的一或多個語法元素。
TW105130370A 2015-09-21 2016-09-20 視訊寫碼中成分之範圍調整之固定點實施 TWI736555B (zh)

Applications Claiming Priority (8)

Application Number Priority Date Filing Date Title
US201562221586P 2015-09-21 2015-09-21
US62/221,586 2015-09-21
US201562236804P 2015-10-02 2015-10-02
US62/236,804 2015-10-02
US201562241063P 2015-10-13 2015-10-13
US62/241,063 2015-10-13
US15/269,558 2016-09-19
US15/269,558 US10244249B2 (en) 2015-09-21 2016-09-19 Fixed point implementation of range adjustment of components in video coding

Publications (2)

Publication Number Publication Date
TW201722154A true TW201722154A (zh) 2017-06-16
TWI736555B TWI736555B (zh) 2021-08-21

Family

ID=58283639

Family Applications (1)

Application Number Title Priority Date Filing Date
TW105130370A TWI736555B (zh) 2015-09-21 2016-09-20 視訊寫碼中成分之範圍調整之固定點實施

Country Status (10)

Country Link
US (2) US10244249B2 (zh)
EP (1) EP3354025B1 (zh)
JP (1) JP6843844B2 (zh)
KR (1) KR102824171B1 (zh)
CN (1) CN108028936B9 (zh)
AU (2) AU2016328638A1 (zh)
ES (1) ES2967321T3 (zh)
PL (1) PL3354025T3 (zh)
TW (1) TWI736555B (zh)
WO (1) WO2017053277A1 (zh)

Families Citing this family (30)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP3251366B1 (en) * 2015-01-27 2024-01-10 InterDigital Madison Patent Holdings, SAS Methods and apparatus for electro-optical and opto-electrical conversion of images and video
US10244249B2 (en) 2015-09-21 2019-03-26 Qualcomm Incorporated Fixed point implementation of range adjustment of components in video coding
US10129558B2 (en) * 2015-09-21 2018-11-13 Qualcomm Incorporated Supplement enhancement information (SEI) messages for high dynamic range and wide color gamut video coding
JP6519441B2 (ja) * 2015-10-22 2019-05-29 ソニー株式会社 送信装置、送信方法、受信装置および受信方法
WO2017135673A1 (ko) * 2016-02-01 2017-08-10 엘지전자 주식회사 방송 신호 송신 장치, 방송 신호 수신 장치, 방송 신호 송신 방법, 및 방송 신호 수신 방법
EP3526968A4 (en) * 2016-10-12 2020-06-03 Telefonaktiebolaget LM Ericsson (publ) RESIDUAL REFINEMENT OF COLOR COMPONENTS
US11202050B2 (en) * 2016-10-14 2021-12-14 Lg Electronics Inc. Data processing method and device for adaptive image playing
KR102554379B1 (ko) * 2016-10-31 2023-07-11 엘지디스플레이 주식회사 하이 다이나믹 레인지 영상 처리 방법 및 영상 처리 모듈과 그를 이용한 표시 장치
US10728559B2 (en) * 2017-07-07 2020-07-28 Qualcomm Incorporated Precision of computation and signaling of dynamic range adjustment and color remapping information
US10778978B2 (en) * 2017-08-21 2020-09-15 Qualcomm Incorporated System and method of cross-component dynamic range adjustment (CC-DRA) in video coding
US10681358B2 (en) * 2017-12-19 2020-06-09 Qualcomm Incorporated Quantization parameter control for video coding with joined pixel/transform based quantization
US11303912B2 (en) * 2018-04-18 2022-04-12 Qualcomm Incorporated Decoded picture buffer management and dynamic range adjustment
CN108596328B (zh) * 2018-04-26 2021-02-02 北京市商汤科技开发有限公司 一种定点化方法及装置、计算机设备
TWI808970B (zh) * 2018-04-30 2023-07-21 圓剛科技股份有限公司 影像訊號轉換裝置
US11064196B2 (en) * 2018-09-03 2021-07-13 Qualcomm Incorporated Parametrizable, quantization-noise aware bilateral filter for video coding
KR102784625B1 (ko) * 2018-11-01 2025-03-19 세종대학교산학협력단 칼라 좌표축 변환을 이용한 영상 부호화/복호화 방법 및 장치
US11930191B2 (en) 2019-05-16 2024-03-12 Lg Electronics Inc. Luma mapping—and chroma scaling-based video or image coding
US11558616B2 (en) * 2020-03-05 2023-01-17 Qualcomm Incorporated Methods for quantization parameter control for video coding with joined pixel/transform based quantization
CN115380525B (zh) * 2020-03-30 2025-12-02 字节跳动有限公司 图片标头中的高级别语法
US11533512B2 (en) * 2020-04-10 2022-12-20 Qualcomm Incorporated Dynamic range adjustment parameter signaling and enablement of variable bit depth support
US11375212B2 (en) * 2020-04-18 2022-06-28 Qualcomm Incorporated Flexible chroma processing for dynamic range adjustment
EP4144090A4 (en) 2020-05-22 2023-06-21 Beijing Bytedance Network Technology Co., Ltd. SUB-PICTURE SUB-BITSTREAM EXTRACTION ENHANCEMENTS
US12387305B2 (en) 2020-10-14 2025-08-12 Dolby Laboratories Licensing Corporation Color transformation for HDR video with a coding-efficiency constraint
KR102847073B1 (ko) * 2020-10-21 2025-08-19 삼성디스플레이 주식회사 하이 다이내믹 레인지 후-처리 장치, 및 이를 포함하는 표시 장치
WO2022256497A1 (en) * 2021-06-02 2022-12-08 Dolby Laboratories Licensing Corporation Method, encoder, and display device for representing a three-dimensional scene and depth-plane data thereof
CN113489930B (zh) * 2021-06-10 2024-03-19 中央广播电视总台 一种视频信号处理方法、装置及存储介质
WO2023278302A1 (en) 2021-06-29 2023-01-05 Dolby Laboratories Licensing Corporation Signaling of priority processing order for metadata messaging in video coding
CN115811616A (zh) * 2021-09-15 2023-03-17 华为技术有限公司 一种视频编码、解码方法及装置
WO2023049292A1 (en) * 2021-09-22 2023-03-30 Beijing Dajia Internet Information Technology Co., Ltd. Methods and devices for decoder-side intra mode derivation
US12368900B2 (en) * 2023-04-12 2025-07-22 Sharp Kabushiki Kaisha Systems and methods for performing motion compensation in video coding

Family Cites Families (45)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101626475B (zh) * 2004-04-01 2011-05-04 松下电器产业株式会社 影像再现装置、信息记录装置、影像处理设备及摄像装置
US8014445B2 (en) 2006-02-24 2011-09-06 Sharp Laboratories Of America, Inc. Methods and systems for high dynamic range video coding
WO2010105036A1 (en) 2009-03-13 2010-09-16 Dolby Laboratories Licensing Corporation Layered compression of high dynamic range, visual dynamic range, and wide color gamut video
US8995527B2 (en) * 2010-02-19 2015-03-31 Qualcomm Incorporated Block type signalling in video coding
EP2445214A1 (en) * 2010-10-19 2012-04-25 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Video coding using temporally coherent dynamic range mapping
UA109312C2 (uk) 2011-03-04 2015-08-10 Імпульсно-кодова модуляція з квантуванням при кодуванні відеоінформації
US9036042B2 (en) * 2011-04-15 2015-05-19 Dolby Laboratories Licensing Corporation Encoding, decoding, and representing high dynamic range images
TWI624182B (zh) * 2011-04-15 2018-05-11 杜比實驗室特許公司 高動態範圍影像的編碼、解碼及表示
JP6009538B2 (ja) 2011-04-28 2016-10-19 コーニンクレッカ フィリップス エヌ ヴェKoninklijke Philips N.V. Hdr画像を符号化及び復号するための装置及び方法
US8891863B2 (en) * 2011-06-13 2014-11-18 Dolby Laboratories Licensing Corporation High dynamic range, backwards-compatible, digital cinema
US9363535B2 (en) 2011-07-22 2016-06-07 Qualcomm Incorporated Coding motion depth maps with depth range variation
CN102333223A (zh) 2011-10-25 2012-01-25 北京华兴宏视技术发展有限公司 视频数据编码方法、解码方法、编码系统和解码系统
JP5638731B1 (ja) * 2011-11-01 2014-12-10 ドルビー ラボラトリーズ ライセンシング コーポレイション 拡張ダイナミックレンジをもつ画像の階層式符号化における適応的な偽輪郭生成防止
TWI575933B (zh) * 2011-11-04 2017-03-21 杜比實驗室特許公司 階層式視覺動態範圍編碼中之層分解技術
AR091515A1 (es) 2012-06-29 2015-02-11 Sony Corp Dispositivo y metodo para el procesamiento de imagenes
US9426462B2 (en) 2012-09-21 2016-08-23 Qualcomm Incorporated Indication and activation of parameter sets for video coding
EP2898694B1 (en) * 2012-09-24 2019-06-19 Huawei Technologies Co., Ltd. Video compression with color space scalability
US9319703B2 (en) 2012-10-08 2016-04-19 Qualcomm Incorporated Hypothetical reference decoder parameter syntax structure
KR101825575B1 (ko) 2013-01-07 2018-02-05 노키아 테크놀로지스 오와이 비디오 코딩 및 디코딩 방법 및 장치
US20140218473A1 (en) 2013-01-07 2014-08-07 Nokia Corporation Method and apparatus for video coding and decoding
EP2819414A3 (en) 2013-06-28 2015-02-25 Samsung Electronics Co., Ltd Image processing device and image processing method
AU2013206815A1 (en) * 2013-07-11 2015-03-05 Canon Kabushiki Kaisha Method, apparatus and system for encoding and decoding video data
RU2670782C9 (ru) 2013-07-18 2018-11-23 Конинклейке Филипс Н.В. Способы и устройства для создания функций отображения кода для кодирования изображения hdr и способы и устройства для использования таких кодированных изображений
TWI646828B (zh) * 2013-09-03 2019-01-01 Sony Corporation 解碼裝置及解碼方法、以及編碼裝置及編碼方法
JP2016541140A (ja) * 2013-11-13 2016-12-28 エルジー エレクトロニクス インコーポレイティド Hdr放送サービスの提供のための放送信号送受信方法及び装置
US9277196B2 (en) * 2014-02-19 2016-03-01 DDD IP Ventures, Ltd. Systems and methods for backward compatible high dynamic range/wide color gamut video coding and rendering
EP3205093B1 (en) * 2014-10-07 2022-05-18 TRELLIS EUROPE S.r.l. Improved video and image encoding process
WO2016054765A1 (en) * 2014-10-08 2016-04-14 Microsoft Technology Licensing, Llc Adjustments to encoding and decoding when switching color spaces
EP3231174B1 (en) * 2014-12-11 2020-08-26 Koninklijke Philips N.V. Optimizing high dynamic range images for particular displays
US9942551B2 (en) 2015-01-30 2018-04-10 Qualcomm Incorporated Palette index grouping for video coding
US20160309154A1 (en) 2015-04-17 2016-10-20 Qualcomm Incorporated Dynamic range adjustment for high dynamic range and wide color gamut video coding
US10244245B2 (en) 2015-06-08 2019-03-26 Qualcomm Incorporated Content-adaptive application of fixed transfer function to high dynamic range (HDR) and/or wide color gamut (WCG) video data
CN107852511B (zh) * 2015-07-16 2020-09-22 杜比实验室特许公司 用于hdr和宽色域信号的信号整形和编码
WO2017015564A1 (en) * 2015-07-22 2017-01-26 Arris Enterprises Llc System for coding high dynamic range and wide color gamut sequences
US10244249B2 (en) 2015-09-21 2019-03-26 Qualcomm Incorporated Fixed point implementation of range adjustment of components in video coding
US10129558B2 (en) 2015-09-21 2018-11-13 Qualcomm Incorporated Supplement enhancement information (SEI) messages for high dynamic range and wide color gamut video coding
US10200690B2 (en) 2015-09-22 2019-02-05 Qualcomm Incorporated Video decoder conformance for high dynamic range (HDR) video coding using a core video standard
US20170105014A1 (en) 2015-10-08 2017-04-13 Qualcomm Incorporated Luma-driven chroma scaling for high dynamic range and wide color gamut contents
US10200701B2 (en) 2015-10-14 2019-02-05 Qualcomm Incorporated HDR and WCG coding architecture with SDR backwards compatibility in a single bitstream for video coding
US11228770B2 (en) 2016-05-16 2022-01-18 Qualcomm Incorporated Loop sample processing for high dynamic range and wide color gamut video coding
US10574959B2 (en) 2017-07-05 2020-02-25 Qualcomm Incorporated Color remapping for non-4:4:4 format video content
US10778978B2 (en) 2017-08-21 2020-09-15 Qualcomm Incorporated System and method of cross-component dynamic range adjustment (CC-DRA) in video coding
US11095896B2 (en) 2017-10-12 2021-08-17 Qualcomm Incorporated Video coding with content adaptive spatially varying quantization
US10681358B2 (en) 2017-12-19 2020-06-09 Qualcomm Incorporated Quantization parameter control for video coding with joined pixel/transform based quantization
US10778979B2 (en) 2018-01-11 2020-09-15 Qualcomm Incorporated Signaling mechanisms for equal ranges and other DRA parameters for video coding

Also Published As

Publication number Publication date
KR102824171B1 (ko) 2025-06-23
KR20180054782A (ko) 2018-05-24
CN108028936B9 (zh) 2023-10-13
AU2021200087A1 (en) 2021-03-18
US20170085894A1 (en) 2017-03-23
AU2016328638A1 (en) 2018-04-26
EP3354025B1 (en) 2023-12-13
US11128878B2 (en) 2021-09-21
AU2021200087B2 (en) 2022-04-14
JP2018533278A (ja) 2018-11-08
TWI736555B (zh) 2021-08-21
US10244249B2 (en) 2019-03-26
US20190191174A1 (en) 2019-06-20
WO2017053277A1 (en) 2017-03-30
EP3354025A1 (en) 2018-08-01
EP3354025C0 (en) 2023-12-13
ES2967321T3 (es) 2024-04-29
JP6843844B2 (ja) 2021-03-17
CN108028936B (zh) 2022-01-18
CN108028936A (zh) 2018-05-11
PL3354025T3 (pl) 2024-04-02

Similar Documents

Publication Publication Date Title
AU2021200087B2 (en) Fixed point implementation of range adjustment of components in video coding
TWI755363B (zh) 用於高動態範圍及廣色域視訊寫碼之補充增強資訊(sei)訊息
RU2701961C2 (ru) Регулировка динамического диапазона для кодирования видео с расширенным динамическим диапазоном и широкой цветовой гаммой
TWI654875B (zh) 於多層視訊寫碼中用於色彩色域可擴展性之3d查找表之發信色彩值
TWI650004B (zh) 於多層視訊寫碼中用於色彩色域可擴展性之3d查找表之發信分割區資訊
TW201711470A (zh) 用於高動態範圍及廣色域視訊寫碼之自適應常數照度方法
TW201931853A (zh) 具有聯合像素/變換為基礎之量化之視頻寫碼之量化參數控制
TWI666919B (zh) 用於色域可擴展性的3d色彩預測之信令參考層
JP2019511165A (ja) ビデオのための色再マッピング情報補足エンハンスメント情報メッセージを生成するための方法およびシステム
AU2017308831B2 (en) Color remapping information sei message signaling for display adaptation
HK1241179A1 (zh) 用於高动态范围和宽色域视频译码的动态范围调整