TW201036452A - Image processing device and method - Google Patents

Description

201036452 六、發明說竑： 【發明所屬之技術領域】 本發明係關於一種圖像處理裝置及方法，尤其係關於_ 種可生成精度高的預測圖像而不會加大處理負擔的圖像户 理裝置及方法。 【先前技術】 先前，MPEG(M〇ving Picture Experts Gr〇up，動態圖像 專家組）、H.26x等之使用有運動補償及離散餘弦變換、 L轉換（K—Loeve transform，卡氏變換）、或小波轉 換（驗心transform)等之正交轉換的編碼方式一般被用作 處理動態圖像時之編碼方式。於㈣動態圖像編碼方式 中，利用成為編碼對象之輸入之圖像信號所具有之特 的空間方向及時間方向之關聯來謀求編碼量之削減。 例如於H.2M中，在利用時間 + 万白之關聯來生成成為幀 間預♦，測)之對象之㈣中間鴨時，' Ο 或雙向預測。幀間預測係根 D /貝1 像者。 刻之幀而生成預測圖 _11承表示單向預測之例之示圖。 過去或者為未來之時刻的編碼在時間上為 運動補償。利用時 之㈣為參^貞來進行 之殘差進行編竭，藉!聯來對預測圖像與實際圖像 -f? ^ * 肖】’成、編碼量。分別栋田委_ 成與運動向量來作為指定參照幢上使用參照幢資 、、之資況與指定該參照懷之 144523.doc 201036452 參…、目的地的位置之資訊，並將該等資訊自▲碼侧傳送至 解碼側。 於此，參照幅之片數並非限於μ。例如，於η·264中可 將複數片幢作為參照幢。如圖1所示，當按時間上接近編 碼傾ρ〇之順序將2片幢作為參照獅、RI時，可根據參辟 幢RO或R1之任意像素之像素值來預測編碼巾貞p〇内之任意 巨集區塊之像素值。 圖1之各幀的内側所示之框表示巨集區塊。若將作為預 測對象之編碼幢P 〇之巨集區塊設為巨集區塊M B p 〇，則與 該巨集區塊MBPG對應之參照_之巨集區塊成為由運動 向量MV0所指定之巨集區塊MBR〇。又，參照幢ri之巨集 區塊成為由運動向量MV1所指定之巨集區塊MBR1。 若將巨集區塊MBR0、㈣幻之像素值（運動補償圖像之 像素值）設為MC0(i，j)、MCl(i，j)，則於單向預測中可使 用任一運動補償圖像之像素值來作為預測圖像之像素值， 故預測圖像Pred(i，j)藉由下式（1)表示。（丨，j}表示巨集區 塊内之像素的相對位置，且〇SS16，。式〇)中 之「丨丨」表示取MC0(i，j)與MCl(i，j)中之任一值。 [數1]

Pred(i,j)=MC0(ij) I MC^ij)…⑴ 再者，將16x16像素的1個巨集區塊進一步細分為““像 素等尺寸之區塊，並針對所分割之每一區塊，可將不同之 參照幀作為參照目的地來進行運動補償。傳送小數精度之 144523.doc 201036452 運動向里而非整數精度之運動向量，使用規格中所規定之 F卿inhe Impulse Resp〇nse，有限脈衝響應）滤波器進= 内插，藉此，亦可將對應的參照目的地之位置之周邊之^ 素的像素值用於運動補償。 t 圖2係表示雙向預測之例之示圖。 义如圖2所示，當藉由雙向預測而生成成為編碼對象之當 別時刻之幅即編碼❹〇時，將對當前時刻而言在時間上為 込去X及為未來之時刻的編碼完畢之幀作為參照幀來進行 〇運動補償。將編碼完畢之複數片㈣為參照幢，利用與其 等之關聯來對預測圖像與實際圖像之殘差進行編碼，藉此 可削減編碼量。於Η·264中，亦可將過去之複數片幅與未 來之複數片幀作為參照幀。 如圖2所示，當以編碼幀Β0為基準而將過去與未來之幀 逐片地作為參照幢L0、L1時，Τ根據參照幅L0、L1之任 意像素之像素值來預測編碼巾_内之任意之巨集區塊 素值。 〇 5 2之例中’與編碼幀B0之巨集區塊ΜΒΒ0對應之參照 幀L〇之巨集區塊被當作由運動向量MV0所指定之巨集區塊 ]VI BL〇〇 7 > ' 人與編碼幀B0之巨集區塊ΜΒΒ0對應的參照幢 • 杲區塊被當作由運動向量MV1所指定之巨集區塊 MBL1。 、 .，巨集區塊MBL0、MBL1之像素值分別設為Mc〇(i， j) MCl(i ’ j)，則預測圖像pred(i，』）之像素值，j) 如下式（2)所示係作為其等之平均值而求出。 144523.doc 201036452 [數2]

Pred(i,j)=(MC0(i,j)+MC1(i,j))/2 …(2) 於使用有如上所述之單向預測之運動補償中，提高運動 向量之精度或細化巨集區塊之尺寸，以提高預測圖像之精 度’減少與實際圖像之殘差，藉此來謀求編碼效率之提 高。 又’於使用雙向預測之運動補償中，使用時間上相近之 參照幀之像素之像素值的平均值來作為預測圖像之像素之 像素值，藉此，就概率而言，亦可實現預測殘差之穩定地 減少。 圖3係表示幀内（intra)預測之例之示圖。 於圖3之例巾，表示在進行編碼㈣1()之當前區塊之解碼 時自同-畫面内之解碼完畢附近像素進行預測的情形。一 般而言，圖像與附近之像素值的關聯極高，故以如此之自 附近像素進行預測來減少當前區塊之殘差成分。藉此可實 現編碼效率之提高。 例如，於H.264規格之幀内4 « ^ . 、 4預測中，可利用附近之編 ^畢像素並以9種方法來進行當前區塊之預測。在與附 、圖像之關聯上採用二維方 、 、 高。 性猎此貫現預測精度之提 作為其他的幀内預測之方法 高的區域之手法。具體而言：二“畫面内複製關聯 之解碼而指定解碼完畢 為了進行當前區塊 圖像之特定的位置，藉此將該區 144523.doc 201036452 域利用於當前區塊之預測圖像中。 當晝面内存在有複數個規則性的紋路或同 等情形時，該手法可實現較高的預測效率。狀之物件 此外’作為其他㈣内預測之方法，亦存在如下技術： 透過解析存在於編瑪對象圖像中之特徵性之區域、纹理區 域之信號成分，而將人卫合成之圖像❹2 此使編碼量減少。 # 如此，由於用於幢内預測之各種技術之出現，因 預測之預騎度逐漸提高，但於—般的㈣圖像中，依秋 以幢間預測之預測精度為m因在於，例如即便為相、 當複雜之紋理’當於晝面内靜止之情形時，雖難以提高愤 内預測之精度，但_預測之預測殘差皆無限制地成為 零。 〇 又，作為其他的預測方法，已有考慮藉由運動補償與像 素值之FIR濾波來將時間方向之關聯轉換為空間解像度加 以利用之手法（例如，參照非專利文獻1}。 又 於非專利文IU所記載之方法中，為了對輸入圖像行進 行高解析度化處理而利用時間方向之關聯。具體而言在 當前圖像與過去圖像之間計算經運動預測、補償後之圖像 之差分資訊’並反饋至作為對象之#前_，藉此使輸入 圖像中所含之高頻成分還原。 [先行技術文獻] [非專利文獻] [非專利文獻 1]「Improving Res〇luti〇n by image 144523.doc 201036452

Registration」，MICHAL IRANI AND SHMUEL PELEG，

Department of Computer Science, The Hebrew University of Jerusalem, 91904 Jerusalem, Israel, Communicated by Rama

Chellapa，Received June 16, 1989; accepted May 25, 1990 【發明内容】 [發明所欲解決之問題] 由於在先前之幀間預測之情形時若要使用複數片的參照 +貞，則用於運動預測或運動補償之處理成本、及用於保存 參照面之記憶體容量之成本等必要成本會變得較幀内預測 時更南。非專利文獻1所記載之方法之情形亦相同。 乃一万面，於幀内 本雖較幀間預測為低，但因所生成之圖像之預測精度低， 故與幀間預測之情形相比，存在有編碼效率差之問題。 本發明係蓉於此種狀況而完成者，其係利用幢間預測之 預測精度來補償幢内預測之預測精度之不足，以實現編碼 效率之，高，進而，藉由減少悄間預測時所需之參照面之 數目而貫現處理成本之降低。 [解決問題之技術手段] 本：明之一側面為一種圖像處理裝置，纟包括：解碼機 ，’、對經編碼之圖像進行解碼；生成機構，其將經上述 解碼機構解碼徭夕国你& 对ϋ迷 L制目像相加，生成解碼完畢之 圖像，掏取機槿，並技4 完畢之圖像St作二 生成機構所生成的解碼 動向量來進…㈣ 巾貞，使隸編碼之上相像之運 仃運動補償，自上述參照幀中擷取出與上述預 144523.doc 201036452 測圖像對應之運動補償圖像；幀内預測圖像生成機構，其 於生成上述預測圖像之目前幀内進行幀内預測，自藉由上 述生成機構所生成之解碼完畢之部分圖像而生成與上述預 測圖像對應之幀内預測圖像；及預測圖像生成機構，其對 於由上述擷取機構所擷取之上述運動補償圖像及由上述幀 内預測圖像生成機構所生成之上述幢内預測圖像，利用上 述運動補償圖像及上述幢内b測圖像中所含之時間方向之 關聯來進行補償高頻成分之遽波處理，藉以生成上述預測 〇 圖像。 〇 上述預測圖像生成機構可包括：㈣慮波機構，其係對 由上述第1擷取機構所擷取之上述運動補償圖像、與由上 述+貞内預測圖像生成機構所生成之上述巾貞内預測圖像之差 分圖像實施低通遽波；第2渡波機構，其係對經上述第瑣 波機構實施低通濾波所獲得之圖像實施高通濾波；及加法 機構，其係將經上述第m波機構實施低通濾波所獲得之 圖像、與經上述第2遽波機構實施高通遽波所獲得之圖 像’加上由上述t貞内預測圖像生成機構所生成之上述上述 幀内預測圖像，而生成上述預測圖像。 上述加法機構可對以上述預測圖像之時刻為基準而自工 時刻前之幢中所擷取的上述運動補償圖像，加上經上述第 1濾波機構實施低_波所獲得之圖像、與經上述第2遽波 機構實施高通濾波所獲得之圖像。 複數個上述運動補償圖像進行單向預測 上述圖像處理裝置可進而 包括：單向預測機構，其使用 生成上述預測圖 144523.doc 201036452 像；雙向預測機構，其使用複數個上述運動補償圖像進行 雙向預測，生成上述預測圖像；及判定機構，其根據經編 碼之上述圖像之標頭中所含之識別旗標，來判定上述預測 圖像係由上述單向預測機構進行單向預測所生成、或是由 上述雙向預測機構進行雙向預測所生成、抑或是由上I 測圖像生成機構進行上述濾波處理所生成。 又，本發明之一側面為一種圖像處理方法其包括 經編碼之圖像進行解碼；將已解碼之圖像與預測圖像相 加，生成解瑪完畢之圖像；將包含所生成的解碼完畢之圖 像之幢作為參照情，使用經編碼之上述圖像之運動向 進订運動補償’自上述參照幢中擷取出與上述預測圖像對 應之運動補償圖像；於生成上述預測圖像之目前悄内進行 賴内預測’自解碼完畢之部分圖像而生成與上述預測圖像 對應之中貞内預測圖像；對上述運動補償圖像及上述幢内預 測圖像利用上逑運動補償圖像及上述巾貞内預測圖像中所 含之時間方向之關聯來進行補償高頻成分之遽波處理 以生成上述預測圖像。 9 本發明之另一側面為一種圖像處理裝置，其包括：編碼 機構，其對編碼對象之圖像即原圖像進行編碼，生成經編 碼之圖像；檢測機構，其根據基於表示上述原圖像與預測 圖像之差之殘差信號而局部地解碼所獲得之圖像虚上述原 圖像：來檢測運動向量；操取機構，其將包含經局部地解 碼所獲仟之上述圖像之幢作為參照賴，使用由上述檢測 構檢測到的運動向量來進行運動補償，自上述參照巾貞中掏 I44523.doc •10- 201036452 取出與上述預測圖像對應之運動補償圖像；幀内預測圖像 生成機構，其於生成上述預測圖像的目前幀内進行幀内預 測，自上述幀之部分圖像而生成與上述預測圖像對應之幀 内預測圖#，·及生成機構，其對由上述P擷取機構所擷 取之上述運動補償圖像及由上㈣内預測圖像生成機構所 生成之上述幀内預測圖像，利用上述運動補償圖像中所含 之時間方向之關聯來進行補償高頻成分之濾波處理，藉以 生成上述預測圖像。

上述生成機構可包括：第1濾波機構，其係對由上述第！ 擷取機構所擷取之上述運動補償圖像、與由上述_内預測 圖像生成機構所生成之上述幢内預測圖像之差分圖像實施 低通慮波，第2遽波機構’其係對經上述第旧波機構實施 低通遽波所獲得之®像㈣高㈣波；及加法機構，其係 將左述第1據波機構實施低通濾波所獲得之圖像、與經 上述第2濾波機構實施高通濾波所獲得之圖像，加上由上 述幀内預測圖像生成'撼山上、 豕生成冑構所生成之上述上述帕Θ預測圖 像’來生成上述預測圖像。 上述加法機構可對以上述預測圖像之時刻為基準而自】 個時刻則之t貞中所操取的上述運動補償圖像，加上經上述 第1;慮波—機構^施低通遽波所獲得之圖像、與經上述第2遽 波機構實施高通濾波所獲得之圖像。 上述編碼機構可於經編碼之上述圖像之標頭中包含識別 旗標’該識別旗標係識別要與在解碼裝置中所解碼之圖像 相加之預測圖像是經單向預測所生成、或是經雙向預測所 144523.doc 201036452 生成、抑或是經上述濾波處理所生成。 本發明之另一側面或 ^ J面為一種圖像處理方法，其包 碼對象之圖像即原圖像進 ’' 據基於表示上述原圖像二傻生成經編碼之圖像，·根 地解碼所獲得之圖像與：像之差之殘差信號而局部 包含經局部地解碼所獲：上' :來“運動向量；將 =已檢㈣的運動向量來進行運動補償，自上述參昭^ 預=上述預測圖像對應之運動補償圖像;於生成上述 之目前，貞内進㈣内預測，自上㈣之部分圖像 述預測圖像對應之鴨内預測圖像， 及對所擷取 之上述運動補償圖像及生成之上述㈣用 述運動補償圖像中所含之時間方向之關 成分之遽波處理，藉以生成上述預測圖像。“頻 於本發明之-側面中，對經編碼之圖像進行 :=像與預測圖像相加，生成解碼完畢之圖像丄 3成的解碼完畢之圖像之鴨作為參照鴨石 之圖像之運動向量來進行運動補償，自夫用…為碼 預測圖像對應之運動補償圖像；預；圖：取出與 =幢内預測，自解碼完畢之部分圖像而生成： 2 =之中貞内預測圖像；對運動補償圖像及巾貞内預測圖 1用運動補償圖像及幀内預測圖像中包含之 之關聯來進行補償高頻成分之滤波處理，藉以生点曰向 像。 精以生成預測圖 之圖像即原圖像進 於本發明之另一側面中，對編碼對象 】44523.doc • 12· 201036452 ''為馬生成，'二編碼之圖像；根據基於表示原圖像與預測 圖像之差之殘差信號而局部地解碼所獲得之圖像與原圖 像，來檢測運動向量；將包含經局部地解碼所獲得之圖像 .之^作為參照t貞’使用所檢測到的運動向量進行運動補 償’自參照傾中擷取出與預測圖像對應之運動補償圖像； 於生成預測圖像之目前鳩内進行巾貞内預測，自鴨之部分圖 像而生成與預測圖像對應之幢内預測圖像；對所操取之運 動補償圖像及所生成之幢内預測圖像，利用運動補償圖像 Ο中包含之時間方向之關聯來進行補償高頻成分之遽波處 理’藉以生成預測圖像。 [發明之效果] 根據本發明’可生成精度高的預測圖像而不會使串流中 之運動向$之傳送量增加，從而可達成較高之編碼效率。 【實施方式】 以下’說明用以實施發明之形態(以下稱作實施形態）。 再者，s兒明係以如下順序進行。 l第1實施形態（解碼處理） 2·第2實施形態（編碼處理） 3 *第3實施形態（濾波電路之變形例） <1.第1實施形態> [預測之概要] 一圖4係說明適用有本發明之預測圖像生成方法之概要的 圖於本發明中，為了於解碼器内獲得運動補償圖像而 利用彳立元流來傳送最低丨條的運動向量。 144523.doc -13· 201036452 圖4中，表示在用於運動補償的參照面中使用Μ υ以便進行顧之解碼之情形。於圖4中，利用串流來傳逆 用於表示在巾貞（Ν·υ中進行運動補償之圖像之座標動 向量。解碼器藉由使用該向量而獲得圖像Mc。 動 又，利用幢N中之解碼完畢像素值來進行幢内預測。於 該預測中，使用例如Η·264規格之幢内預測。然而，於本 發明中，若利用當前幢中之編碼完畢像素來進行適當之預 測以便以更高精度持續地進行渡波處理之預測而無論幢内 預測之處理之種類，則亦可對其進行選擇。 根據以上2個預測處理，於進行當前區塊之解碼時，解 碼器可㈣（N-D而獲得運動預測圖像，且由巾貞_獲得空 間預測圖像。對該2種圖像進行遽波處理，藉此可利用所 輸入之預測圖像中包含之成分而生成更接近原圖像之新的 預測圖像。 [解碼裝置之構成] 圖5係表示本發明之一實施形態之解碼裝置丨之構成例的 方塊圖。 對解碼裝置1，經由電镜、網路、或可移動式媒體而輸 入下述的經編碼裝置編碼後之圖像資訊。壓縮圖像資訊例 如係以H.264規格進行編碼後之圖像資訊。 蓄積緩衝器11依序記憶作為壓縮圖像資訊而輸入之位元 々'<·。s己憶於蓄積緩衝器丨丨内之資訊能對應構成幀之巨集區 塊等之每一個特定單位之圖像而由可逆解碼電路12適當地 磧出。於H.264規格中，亦能以將16xl6像素之巨集區塊進 144523.doc •14- 201036452 一步分割而成之8x8像素、4χ4 素之區塊為單位來進行處理。…㈣…16像 可逆解碼電路12對自蓄嫱炫i ^ 目蓄積緩衝器11讀出之圖像實施可變 長度解碼處理、算術解碼處理 ^ 處理。可逆解碼電路12將葬以 碼方式對應之解瑪 路2將藉由實施解碼處理所獲得之已詈 化之轉換係數輸出至反量化電路13。 可逆解碼電路12根據成為解碼對象之圖像之標頭中

Ο 所含的識別旗標，來識別該圖像為幅内編碼之圖像、抑或 為幢間編碼之圖像。當判斷為成為解碼對象之圖像係經幢 内編碼後之圖像時，可逆解碼電路12將儲存於該圖像之把 頭内之幢内預測模式資訊輸出至中貞内預測電路Μ。悄内預 測模式資訊中，含有成為處理單位之區塊之尺寸等的與帕 内預測相關之資訊。 ' ±當判斷為成為解碼對象之圖像係經幀間編碼後之資訊 時’可逆解碼電路12將儲存於該圖像之標頭内之運動向量 與識別旗標輪出至運動預測•補償電路21。根據識別旗標 來識別由幀間預測生成預測圖像時之預測之模式。識別旗 標例如係以巨集區塊為單位、以幀為單位而設定。 作為預測之模式，除圖丨之單向預測之模式、圖2之雙向 預測之模式以外，另準備有第3預測模式，其係對自於時 間上處於單方向或雙方向之複數之參照幀中擷取出的運動 補償圖像進行濾波以生成預測圖像。 圖6係表示第3預測模式之概念之示圖。 於圖6之例中，將以目前幀（預測幀）之時刻為基準之時 144523.doc -15- 201036452 間上為1個時刻前之幀作為參照幀R〇，將在參照幀則之^ 個時刻前之幀作為參照幀R1。此時，根據第3預測模式， 自參照幀R〇、R1中擷取出之運動補償圖像MC0、MCI被輸 入至濾波電路，將自濾波電路輸出之圖像之像素值作為對 象之巨集區塊即預測圖像的像素值。 圖7係表示於第3預測模式中輸入不同圖像時之概念之示 〇 於圖7之例中，將以目前幢（預測賴）之時刻為基準之時 間上為1個時刻前之幢作為參照幢R〇。此時，為了第3預:則 模式而:自參照細令榻取出之運動補償圖像⑽、與自 處於目則傾之當前區塊周邊之編碼完畢圖像所生成之幅内 預測圖像IP輪入至濾波電路，將自濾波電路輸出之圖像之 像素值作為對象之E集區塊即預測圖像的像素值。 :下，如參照圖i所說明，將以自處於單方向之複數之 參知、鴨中掏取出的運動補償 像中任一運動補償圖像之 象素值作為預測圖像之像素值的預 測模式。又，上办 、丨里稱TF早向預 參照圖2所說明，將以自處於雙方向之福 數之參照帕Φ八& 叉乃间之複 侑作兔 出的運動補償圖像之像素值之平均 式。 素㈣制之模 < 僅稱作雙向預測模 將對自處於單方6 各運動補償圖U S 之參照，中掏取出的 6所示之第3 = Γ 預測圖像之像素值的如圖 預’、】模式’稱作濾波預測模式。 同樣地，除白a 個或複數之參照巾貞中操取出的各運動補 144523.doc 16 201036452 償圖像之外，對藉由進行幀内預測而自目前賴之編碼完畢 圖像中擷取出的幀内預測圖像進行濾波而求出預測圖像之 像素值的如圖7所示之第3預測模式，亦同樣稱作渡波預測 模式。該濾波預測模式將於之後詳細描述。 返回至圖5之說明，反量化電路13係以與編喝側之量化 - 方式對應之方式來對由可逆解碼電路12所供給之量化後之 狀態之轉換係數進行反量化。反量化電路13將進行反量化 所獲得之轉換係數輸出至逆正交轉換電路14。 〇 逆正交轉換電路14以與離散餘弦變換、K_L轉換等之編 碼側之正交轉換方式對應之方式來對由反量化電路13所供 給之轉換係數實施例如4次逆正交轉換，並將所得之圖像 輸出至加法電路1 5。 加法電路15將由逆正交轉換電路14所供給之解碼圖像與 自運動預測.補償電路21或幀内預測電路22經由開關以^ 供給之預測圖像加以合成，並將合成圖像輸出至去塊濾波 器 1 6。 ‘ / ❹ 纟塊據波11 16去除由加法電路15供給之圖像中所包含之 區塊失真，並輸出已去除區塊失真後之圖像。由去塊:波 • 器16輸出之圖像被供給至排序緩衝器17與㈣憶體… 排序緩衝器17暫時記憶由去塊較㈣所供給之圖像。 排序緩衝器m系由所記憶之例如以巨集區塊為單位之” 而生成各幢，並將所生成之幅按顯示順序等之特定之順序 進行排序而輸出至D/A(Digital/Anal〇g，數位/類比）轉換電 I44523.doc 201036452 D/A轉換電路18對由排序緩衝器17所供給之各幢實施 D/A轉換，並將各幀之信號輸出至外部。 幅記憶體19暫時記憶由去塊滤波器16所供給之圖像。記 憶於偵記憶體19内之資訊經由開關20而被供給至運動預 測補你電路21或f貞内預測電路2 2。 當藉由_預測而生成預測圖像時，_2()連接於端子 山當藉由_預測而生成預測圖像時，開關2Q連接於端 子Μ。開關20之切換例如係由控制電路川斤控制。 運動預測•補償電路21根據由可逆解碼電路12所供給之 識㈣標來決定預測模式，並從記憶於傾記憶體19内之解 馬70、、Ό之幀中，根據預測模式來選擇用作參照幀之幀。運 動預測•補償電路21從構成參照幢之巨集區塊中，根據由 可逆解碼電路12所供給之運動向量來決定與作為對象之預 測圖像對應的巨集區塊，並將已決定之巨集區塊作為運動 補償圖像而擷取。運動預測•補償電路叫艮據預測模式而 由運動補償圖像之像素值來求出預測圖像之像素值，並將 已求出像素值之預測圖像經由開關23而輸出至加法電路 15 ° 幀内預測電路22根據由可逆解碼電路丨2所供給之幀内預 測模式資訊而進行幀内預測，生成預測圖像。幀内預測電 路22將所生成之預測圖像經由開關23而輸出至加法電路 15 〇 當已由運動預測•補償電路21而生成預測圖像時，開關 23連接於端子a2，當已由幀内預測電路22而生成預測圖像 144523.doc 18 201036452 時，開關23連接於端子b2。開關23之切換例如亦係由控制 電路3 1所控制。 控制電路31對開關20、23之連接進行切換等以控制整個 解馬裝置1之動作。處理對象之圖像為幀内編碼之圖像、 抑或為幀間編碼之圖像之識別亦可藉由控制電路31而進 行0 圖 圖8係表示圖5之運動預測•補償電路21之構成例的方塊 〇 ❹ 士圖8所不，運動預測•補償電路21係由預測模式決定 電路41、單向預測電路42、雙向預測電路G、預測電路 及;慮波電路45所構成。由可逆解碼電路12所供給之運 動向量與識別旗標被輸人至預_式決定電路41。 别Γ :模式決疋電路41根據由可逆解碼電路12所供給之識 ^來决疋預測模式。於決定藉由單向預測來進行預測 生成時，預測模式決定電路41將運動向量輸出至單 成時:、電路I、於決定藉由雙向預測來進行預測圖像之生 路43又 出至雙向預測電 時，_模=^ =來進行預測圖像之生成 如疋電路41將運動向量輸出至預測電路44。 此-來，可識別濾波預測，故 格所衫之與表示單向預測之值、表先別之H.264規 同的值設定作為識別旗標之值。再;，測之值：不 亦可藉由縣決定之方法來決 ^彳減貝訊里’ 來決定預測模式。 預、j杈式而不以識別旗標 144523.doc -19· 201036452 如圖1所不，單向預測電路42係將於時間上處於單方向 之複數之幀作為參照幀，根據運動向量來決定與預測圖像 對應之參照幀之巨集區塊。又，單向預測電路42自幀記憶 體19中讀出已決定之各個參照幀之巨集區塊作為運動補償 圖像，並將任_運動補償圖像之像素值作為預測圖像之像 素值’藉此生成預測圖像。單向預測電路42將_圖像輪 出至加法電路15。作為單向預測電路42之單向預測，可使 用例如以H.264規格所規定之單向預測。 如圖2所示，雙向預測電路43係將於時間上處於雙方向 之複數之㈣為參㈣，根據運動向量來決定與預測圖像 對應之參照巾貞之巨集區塊。又，雙向預測電路43_ Μ 體19中讀出已決定之各個參照t貞之巨集區塊作為運動補; 圖像，並將所讀出之運動補償圖像之像素值之平均值作為 預測圖像之像素值，藉此生成制輯。雙向預測電路^ 將預測圖像輸出至加法電路丨5。作為雙向預測電路4 3之雙 向預測，可使用例如以H.264規格所規定之雙向預測。 預測電路44係將於時間上處於單方向或雙方向之‘複數之 幀決定為參照幀。關於將哪幀作為參照幀，可預先決定， 亦可藉由與識別旗標一同自編碼側傳送而來之資訊指 定。 、口曰 園9係表示參照 於圖9之例t，將以預測悄之時刻為基準之時間上為工名 時刻前及再丨個時刻前之2片悄作為參照賴。2片參昭扣 中，將更接近預測幢之！個時刻前之悄料參照幢r〇^ 144523.doc -20- 201036452 參照幀R0之1個時刻前之幀作為參照幀R1。 圖10係表示參照幀之另一例之示圖。 於圖ίο之例中，將以預測φ貞之時刻為基準之時間上為1 個時刻前與i個時刻後之2片中貞作為參照幢。2片參照幢 中’將預測巾貞之i個時刻前之幢作為參照幢L0，將i個時刻 後之幀作為參照幀L1。 Ο Ο 如波預測中’將在時間上處於單方向之複 數之悄、或處於雙方向之複數之幢用作參照幅。 又，預測電路44根據由腳㈣式衫電路41所供仏之運 2向量’來衫以圖9、圖1G所示之方式而決定之參照幢 對應之巨集區塊碼元畢之巨集區塊中的與預測圖像 進：’如參照圖7所說明，預測電路44於當前幀 例如H.264規格中之幀内預測。 订 :測電路44自帕記憶體19中讀出已決定之各個參照悄之 巨集區塊作為ψ貞内預測 、 輸出至遽波電路45。 輕所漬出之幢内預測圖像 制電路44根據料向量^自# 幢中擷取出運動補償圖像，並且於$义 之>“，、 測，生成悄内預測圖像。 於“幢中進行幢内預 步Π而：動向量亦能以將16X16像素等之巨集區塊進一 處理 之區塊而非16X16像素等之區塊為單位來進行 :::波電㈣輪—集區塊為單位之圖:： 、圖中，顯示2個箭頭作為自預測電路44向滤波電路^ 144523.doc •21 - 201036452 箭頭’其表示供給有2個運動補償圖像。 Λ 至 波電路4 5將由預測電路4 4所供給之運動補償圖像輪 來進m並將藉由進行㈣所獲得之制圖像 \ ·4τ- *st^* α/» Λ * * 圖11係表 11中，預測 52 ° 示圖6之預測電路44之構成例的方塊圖。於圖 電路44包括運動補償電路51及幀内預測電路 運，補償電路51使用由預測模式決定電路41所供給之運 動向3：於田别幢以外之參照幢中特定與預測圖像對應之 巨集區塊。運動補償電路51自幢記憶體⑺中讀出已特定之 巨集區塊之圖I，並作為運動補償圖像而擷取。運動補償 電路51將擷取出之運動補償圖像⑽供給域波電路衫。 幢内預測電路52於當前+貞（目前餅，使用任意之方法 進行幢内預測(intra預測），其預測結果為生成與所需預判 圖像對應之t貞内預測圖像IP。於此， 使用例如H.264之幢内4x4預測或幢内8χ8預測或者幢内 …16預測。當使用該等幢内預測時，將在解碼器側用以 規定預測方法唯-之控财訊記輕巾並傳送。傾内 預測電路52將所生成之幀内預測圖像^供給至濾波電路 45 ° 圖12係表轉波電路45之構成例的方塊圖。於具有圖12 之構成之濾波電路45中，對時間區域之信號進行濾波。 如圖12所示，濾波電路45係由差分計算電路6ι、低通濾 波電路62、增益調整電路63、高通濾波電路64、增益調整 144523.doc -22- 201036452 電路65、加法電路66、及加法電路67所構成。由預測電路 44所供給之運動補償圖像^^⑶被輸入至差分計算電路“與 加法電路67，運動補償圖像MC1被輸入至差分計算電路 61° 如上所述，當藉由幀内預測而生成預測圖像時，例如將 於當前幀中生成之圖像作為幀内預測圖像1?，將自當前幀 以外之參照幀中擁取出之圖像作為運動補償圖像丄。 再者，如圖9所示，當藉由單向預測而生成預測圖像 〇 時，例如將自認為與預測圖像之關聯更高之自參照幀灿中 所擷取之圖像作為運動補償圖像MC0，將自參照幀R1中所 擷取之圖像作為運動補償圖像河^。亦可將自參照幀尺0中 所擷取之圖像作為運動補償圖像MC1，並將自參照幀R1中 所擷取之圖像作為運動補償圖像MC〇。 又，如圖1 0所示，當藉由雙向預測而生成預測圖像時， 例如’將自1個時刻前之參照幀L0中所擷取之圖像作為運 ❹ 動補償圖像MC0，將自1個時刻後之參照幀L1中所擷取之 圖像作為運動補償圖像MC1。亦可將自參照幀L0中所擷取 之圖像作為運動補償圖像MC丨，並將自參照幀L丨中所擷取 之圖像作為運動補償圖像MC0。 °亥專運動補償圖像MC0可替換為圖12之幀内預測圖像 IP ’並與幀内預測圖像IP相同地進行處理。以下，說明幀 内預測圖像IP。 差分計算電路61計算幀内預測圖像ip(運動補償圖像 MC0)與運動補償圖像MC1之差分，並將差分圖像輸出至 144523.doc -23- 201036452 低通濾波電路62。差分圖像D係由下式（3)表示。 [數3] D〇j) = IP(i,j)-MC1(i,j) ...(3) 於式（3)中，（i，j)表示運動補償圖像内之像素之相對位 置，當以16x16像素之巨集區塊為單位進行處理時， 0$j$i6。以下相同。 低通濾波電路62包括FIR濾波電路。低通濾波電路62對 由差分計算電路61所供給之差分圖像D進行低通濾波，並 將所獲得之圖像輸出至增益調整電路63與高通濾波電路 64。藉由進行低通濾波而獲得之圖像即差分圖像d係由下 式（4)表不。式（4)之LPF(X)係表示使用二維FIR濾波器來對 輸入圖像X進行低通濾波。 [數4] D = LPF(D)…⑷ 增盈調整電路63調整由低通濾波電路62所供給之差分圖 像D'之增益，並將已調整增益後之圖像輪出至加法電路 66。增益調整電路63之輪出圖像χ(ί，j}係由下式⑺表 示。 [數5] X(i，j) = aD.(i，j)…⑸ 高通濾波電路64包括FIR濾波電路。高通濾波電路“對 由低通濾波電路62所供給之差分圖像D，進行高通鴻皮並 144523.doc -24- 201036452 將所獲得之gj像輸出至增益調整電路Μ 波而獲得之圖像即差分圖像D，，係由下式(6以^^ HPFW係表示使用：㈣财波器來對輪 之 通濾波。 進订高 [數6] D"=HPF(D)…⑹ 增益調整電祕調整由高通錢電路 ο 像D"之增益，並將已調整增益後之圖像：:二之差分圖 66。增益锢敕輸出至加法電路 示。·、電路65之輸出圖像外，』)係由下式⑺表 [數7] Y(ij) = pD'(i,j)…⑺ 作為式⑺之认式⑺之p之值 之值，但為了提高預測像素之精 α=0·8、卜0.2 信V + 積度’亦可為除此以外之 ❹加、二據輸入序列之性質等而適應性地變化。 加法电路66將已增益調整後之圖像邓 相加’並輸出相加所得之圖像，、圖像Y(1，J) I觸由下式⑻表心 加法電路66之輸出圖像

[數8J Z(i，j) = X(i，j) + Y(i，j)...⑻ 輸出圖像Z(i，j)係表示運動 像奶之差分，即由關聯而求與運動補償面 出之圖像之高頻成分。 I44523.doc -25- 201036452 加法電路67對幀内預測圖像ιρ補充由 豕側兄由加法電路66所供給 之輸出圖像Z(i，j)，並將所獲得之圖傻 、 更卞闽像作為預測圖像而輸 出至加法電路15。加法電路67之最终輪 . 取、▼别出即預測圖像S(i， j)係由下式（9)表示。 [數9] S(i，j)=IP(i，j)+Z(i，j)…(9) 如此一來’根據遽波預測模式，藉由心貞内預測圖像ιρ 補充表示高頻成分之圖像而獲得之圖像係作為預測圖像而 生成。該預測圖像與單純地進行雙向預測時所獲得之預測 圖像相比’更多地含有高頻成分。又’與單純地進行單向 預測時相比，彳更有效地利關像之時間關聯而生成預測 圖像。進而，將較多地含有高頻成分之預測圖像在加法電 路15中與解碼圖像相加，故最終自解竭裝置i輸出之圖像 亦成為較多地含有高頻成分之高精細者。 又’於預測圖像之生成中，在當前㈣進㈣内預測， 並使所生成之巾貞内預測圖像„>與運動補償圖像赠一同被 利用’故可減少用於生成運動補償圖像之運動向量之數 如上所述， 圖像之輸出後 原0 在利用本發明中之運動補償裝置來進行預測 ’以如先前之方式進行解碼而使圖像資訊復 如此一來，解碼裝置1可利用_預測之預測精度來補 償㈣預測之預測精度之不足以實現編碼效率之提高，進 144523.doc -26· 201036452 而’可藉由減少幀間預測時 理成本之降低。 必要之參照面之數目來實現處 [解碼處理之流程之說明] 置1之處理加以說明。 明解碼裝置1之解碼處 於此，對具有以上構成之解碼裝 首先，參照圖13之流程圖來說 理。 圖13之處理例如係於藉由可逆解碼電路12自記憶於蓄積 緩衝器U内之資訊中已讀出咖6像素之巨集區塊等之特 〇冑尺寸的圖料㈣。圖13之各㈣之處理可適當地與其 他步驟之處理並行，或者與其他步驟改變順序而進行。下 述之各流程圖中之各步驟之處理亦相同。 於步驟，可逆解碼電路12對自#積緩衝Μ中所讀 出之圖像進行解碼處理，將已量化之轉換係數輸出至反量 化電路13。又，當解碼對象之圖像係傾内編碼之圖像時， 可逆解碼電路12將幢内預測模式資訊輸出至幢内預測電路 22，當解碼對象之圖像係㈣編碼之圖像時，可逆解碼電 路12將運動向量與識別旗標輸出至運動預測·補償電路 21 ° 於步驟S2中’反量化電路13以與編碼側之量化方式對應 之方式進行反量化，並將轉換係數輸出至逆正交轉換電路 14 ° 於步驟S3中，逆正交轉換電路14對由反量化電路^所供 給之轉換係數實施逆正交轉換，並將所得之圖像輸出至加 法電路15。 144523.doc -27- 201036452 於步驟S4中，加法電路15將由逆正交轉換電路i4所供給 之解碼圖像與由運動預測•補償電路21或摘内預測電路U 所供給之預測圖像加以合成， W ‘ 麵合成圖像輸出至去塊滤 於步驟S5中’去塊遽波器16藉由實施滤波而去除合成圖 "所含之區塊失真，並輸出已去除區塊失真後之圖像。 於步驟S6中，鴨記憶體19暫時記憶由去塊遽波器μ所供 給之圖像。 Ο 於步驟S7中，控制電路31判定對象之圖像是否為傾内編 碼之圖像。 當於步驟S7中判定為t貞内編碼之圖像時，於步驟％中， 幢内預測電路22藉由進行鴨内預測而生成預測圖像’並將 所生成之預測圖像輸出至加法電路15。 〇 方面*於步驟S7中判定為非幀内編碼之圖像、即 為幢間編碼之圖像時，於步驟59中，藉由運動預測•補償 電路21而進行運動預測.補償處理。經進行運動預測•補 償處理而生成之預測圖像被輸出至加法電_。關於運動 預測•補償處理，將參„14之流程圖㈣下描述。 於步驟S10中’控制電路31判定是否已對整個㈣之巨集 區塊進行了以上之處理，當判定為未進行處理時，注視其 他的巨集區塊，反覆執行步驟S1之後的處理。 另一方面，當於步驟S10中判定為已對整個i幀之巨集區 塊進行了處理時，於步驟S11中，排序緩衝器17根據控制 電路31之控制而將所生成之㈣出至D/A轉換電路18。 144523.doc •28· 201036452 於步驟Sl2中，D/A轉換電路18對由排序緩衝㈣所供 給之幀實施D/A轉換，並將類比信號輸出至外部。以上之 處理係以各幀為對象而進行。 其次，參照圖14之流程圖來說明於圖13之步驟S9中進行 之運動預測•補償處理。 於步㈣31中’運動預測•補償電路21之制模式決定 電路41判定由可逆解碼電路12所供給之識別旗標是否表示 以濾波預測模式來進行處理。 〇 田於步驟S31中判定為表示以濾波預測模式來進行處理 夺處理進入至步驟S32。於步驟S32中，預測電路44進行 4取運動補j員圖像之擷取處理、及生成幢内預測圖像之生 成處理。該擷取處理及生成處理之詳情將於以下描述。 在擷取運動補償圖像並生成幀内預測圖像後，於步驟 833中，濾波電路45進行濾波預測處理。該濾波預測處理 之詳情將於以下描述。 ❹ 在步驟S33之處理結束後，運動預測•補償處理結束， 處理返回至圖11之步驟S9，並進入至步驟si〇。 於步驟S 3 1中，當判定為不表示以濾波預測模式來 進仃處理時，處理進入至步驟S32。於步驟SS2中，由單向 預測電路42進行單向預測、或者由雙向預測電路43進行雙 向預測，生成預測圖像。 亦即，當識別旗標表示以單向預測模式來進行處理時， 自預測模式決定電路41對單向預測電路42供給運動向量， 於單向預測電路42中進行單向預測。又，當識別旗標表示 144523.doc -29- 201036452 以雙向預龍式來進行處理時，自預_式決定電路_ 雙向預測電路43供給運動向量，於雙向制電路43中進行 雙向預測。於㈣圖像被輸人至加法電_之後運動預 測.補償處理結束，處料回㈣13之步驟Μ，並進 驟 S 10。 其次’參照圖1 5之流程圖，今'明於 間況月於圖14的步驟S32中所 執行之擷取處理之流程之例。 在榻取處理開始後，於㈣S51中1測電路44之變數i =1。於步驟S52中，運動補償電路51自第⑽參照幢、即 自參照面i進行運動補償，擷取運動補償圖像⑽⑴。於步 驟⑸中，運動補償電路51將運動補償圖像紙⑴輸出至渡 波電路45。 於步驟S54中，預測電路44判定變數匕值是否為_ 下。當判定變數i之值為特定之自然數N以下時，處理進入 至步驟S55。 於步驟S55中，運動補償電路51增加變數丨。在步驟s55 之處理結束後，處理返回至步驟SS2，並反覆進行此後之 處理又，於步驟S54中，當判定變數丨之值大於N時，處 理進入至步驟S56。 於步驟S56中，幀内預測電路52判定是否進行幀内預 測。當判定為進行幀内預測時，處理進入至步驟S57。於 步驟S 5 7中貞内預測電路5 2於當前·]»貞（目前巾貞）中進行中貞 内預測。於步驟S58中，幀内預測電路52將經幀内預測所 生成之幀内預測圖像IP輸出至濾波電路45。 144523.doc -30- 201036452 在步驟S58之處理結束後，擷取處理結束，處理返回至 圖14之步驟832，並進入步驟833。又，於圖15之步驟856 中，當判定為不進行幀内預測時，擷取處理結束，處理返 回至圖14之步驟S3 2，並進入步驟S33。 其次，參照圖16之流程圖，說明於圖14之步驟S33中執 行的濾波預測處理之流程之例。 在擷取運動補償圖像而生成幀内預測圖像並開始濾波處 理後，於步驟S71中，濾波電路45之差分計算電路61計算

運動補償圖像與幀内預測圖像之差分，並將差分圖像輸出 至低通濾波電路62。 於步驟S72中，低通濾波電路62對由差分計算電路“所 供給之差分圖像進行低通濾波，並將所得之圖像輸出至增 益調整電路63與高通濾波電路64。 於步驟S73中，增益調整電路。調整由低通濾波電路62 所供給之圖像之增益’並將已調整增益後之圖像輸出至加 法電路66。 〇 於步驟S74中 供給之差分圖像進行高 益調整電路65。 ’高通濾波電路64對由低通濾波電路62所 通濾波，並將所得之圖像輸出至增 於步驟S75中，增益 所供給之差分圖像二:整=65調整由高通濾'波電路“ 至加法電路66。 並將已調整增益後之圖像輸出 於步驟S76中，加 之圖像（低通濾波之 法電路66將由增益調整電路63所供給 輪出）與由增益調整電路65所供給之圖 144523.doc 201036452 像(：通濾波之輸出)相加而求出圖像之高頻成分。所求出 之南頻成分自加法電路66而供、給至加法電路67。 加法電路67對幀内預測圖像補充由加法 於步驟S77中 並將所得之圖像作為預 ’加法電路67亦可取代 充由加法電路66所供給 電路66所供給之圖像（高頻成分）， 測圖像而輸出至加法電路丨5。再者 幀内預測圖像而對運動補償圖像補 之圖像（兩頻成分）。 於步驟S78中，瀘、波電祕判定是否已對所有的運動補 償圖像及_預測圖像進行了處理。當判定為存在有未處 理之運動補償圖像或㈣預測圖像時，處理返回至步驟 S71，並反覆進行此後之處理。 又’於步·78中，當判定為已對所有的運動補償圖像 及幢内預測圖像進行了處理時，遽波預測處理結束，處理

返回至圖12之步驟S33,運動預測·補償處理結束，返回 至圖11之步驟S9，並進入步驟sl〇D 如上所述，使m皮關所生成之㈣圖像來進行解 碼，藉此可利用巾貞間預測之預測精度來補償巾貞内預測之預 測精度之不^，因此可獲得高精細之解碼圖像。又此 時’在預測圖像之計算中使用至少 尤用主夕1個幀内預測圖像，藉 此可使編碼之運動向量之量減少，狁 " 從而可實現處理成本之 降低（抑制負載增大）。亦即’解碼裝 衣置1可由杈少之控制資 訊而生成精度高的預測圖像。 <2.第2實施形態> [編碼裝置之構成] 144523.doc -32· 201036452 其次，說明編碼側之裝置之構成與動作。 圖17係表示編碼裝置101之構成例的方塊圖。將藉由編 碼裝置1G1編碼而獲得之壓縮圖像資訊輸人至圖5之解碼裝 置1。 A/D轉換電路1叩輸人信號實施A/D轉換，並將圖像輸 ' 出至排序緩衝器112。 排序緩衝器112對應於壓縮圖像資訊之G〇p(Gr〇up 〇f MUres，目像群組）結構而進行賴之排序，並輸出巨集區 〇 +鬼等特定之單位之圖像。自排序緩衝器112所輸出之圖像 ，供給至加法電路113、模式決定電路123、運動預測•補 傷電路125、及幀内預測電路126。 加法電路113求出由排序緩衝器112所供給之圖像、與由 運動預測•補償電路125或Μ預測電路126所生成且經由 開關127所供給之預測圖像之差，並將殘差輸出至正交轉 換電路U4。在預測圖像接近原圖像而使此處求出之殘差 ▲越少的情況下，職殘差所分配之編碼量可越少，因此可 °月編碼效率越高。 正乂轉換電路114對由加法電路113所供給之殘差實施離 • 纟餘弦變換、Κ·£轉換等之正交轉換，並將經實施正交轉 換所獲得之轉換係數輸出至量化電路丨〗5。 量化電路115隨著速率控制電路118之控制而對由正交轉 換電路114所供給之轉換係數進行量化，並輸出量化後之 轉換係數。經量化電路115量化後之轉換係數被供給至可 逆編碼電路116與反量化電路119。 H4523.doc •33- 201036452 可逆編碼電路m藉由實施可變長度編碼、算術編碼等 之可逆編碼而壓縮由量化電路115所供給之轉換 將資訊輸出至蓄積緩衝器117。 、、 並 又，可逆編碼電路116按照由模式決定電路123所供孤之 ::訊而設定識別旗標之值，並於圖像之標頭中記述識；旗 標。根據由可逆編碼電路116所記述之識別旗標如上所 述於解碼裝置1中決定預測模式。 可逆編碼電路116亦將由運動預測•補償電路125或者由 卡貞内預測電路126所供給之資訊記述於圖像之標頭。自運 動預測·補償電路125而供給在進行幅間預測時檢測到的 運動向里等，自傾内預測電路126而供給與所適用之幢内 預測模式相關之資訊。 、 』蓄積緩衝urn暫時記憶由可逆編碼電路116所供給之資 戒’並以特定之時序輸出作為壓縮圖像資μ。蓄積緩衝器 U7將產生編碼量之資訊輸出至速率控制電路118。 …速制電路職據由蓄積緩衝器117所輸出之編碼量 來4异量化尺度，並以根據所計算之量化尺度來進行量化 之方式而控制量化電路115。 反量化電路U9對已藉由量化電路115而量化後之轉換係 數實施反量化，並將轉換係數輸出至逆正交轉換電_ 120。 、 逆正交轉換電路120對由反量化電路Π9所供給之轉換係 數實施逆正交轉換，並將所獲得之圖像輸出至去塊遽波器 144523.doc -34· 201036452 去塊濾波器121去除已局部地解碼後之圖像中所出現之 區塊失真，並將已去除區塊失真後之圖像輸出至幀記憶體 122 〇 幀記憶體122記憶由去塊濾波器121所供給之圖像。記憶 於幀記憶體122内之圖像藉由模式決定電路123而被適當地 讀出。 田 模式決定電路123根據記憶於幀記憶體122内之圖像與由 排序緩衝器112所供給之原圖像，來決定進行+貞内編碼抑 〇 或進仃幢間編碼。χ ’於決定進行幢間編碼時，模式決定 電路123決定單向預測模式、雙向預測模式、遽波預測模 j中之任一種模式◦模式決定電路123將表示決定結果之 資δί1作為模式資訊而輪出至可逆編碼電路11 ό。 於决疋進仃幀間編碼時，模式決定電路123將記憶於幀 $己憶體122内之經局部地解碼所獲得之+貞經由開關124而輸 出至運動預測•補償電路125。 又’於決定進行丨貞⑽碼時，模式決定電路123將記憶 於幢記憶體122内之經局部地解碼所獲得之幢輸出至幢内 預測電路126。 於進行幢間編碼時，開關124連接於端子⑴，於進行幢 内編碼時，開關m連接於端子bI1。開關124之切換例如 係由控制電路131所控制。 運動預測•補償電路125根據由排序緩衝器ιΐ2所供給之 :圖像、肖自幢記憶體122所讀出之參照㈣檢測運動向 ’並將檢測到的運動向量輸出至可逆編碼電路116。 144523.doc •35- 201036452 又’運動預測•補償電路125使用所檢測到的運動向量與 參照幀來進行運動補償，藉此生成預測圖像，並將所生成 之預測圖像經由開關127而輸出至加法電路113。 幢内預測電路126根據由排序緩衝器112所供給之原圖 像、與經局部地解碼後記憶於幀記憶體122内之參照巾貞來 進行幅内預測，生成預測圖像。幀内預測電路126將所生 成之預測圖像經由開關127而輸出至加法電路113，並將幅 内預測模式資訊輸出至可逆編碼電路116。 開關127連接於端子a 12或端子b 12 ’將藉由運動預測. 補償電路125或幀内預測電路126所生成之預測圖像輸出至 加法電路113。 控制電路13 1根據由模式決定電路123所決定之模式來切 換開關124、127之連接等，以控制編碼裝置1〇1之所有的 動作。 圖18係表示圖17之模式決定電路123之構成例的方塊 士圖18所不，模式決定電路123係由幀内預測電路、 幅間預測電路142、預測誤差計算電路143、及決定電路 144所構成。於模式衫電路123中，分別以不同大小之區 ，為對象而進行㈣預測、_預測，並根據其結果來決 疋以何種預龍式進行預測。就㈣預測而言，可進行單 向預測模式、雙向預龍式、及錢制模式之各個預測 j下的處理。由排序緩衝器112所供給之原圖像被輸入 、内預測電路141、幀間預㈣電路142、及預測誤差計算 lU523.doc • 36 - 201036452 電路143。 幢内預測電路141根據原圖像與自幀記憶體122中所讀出 之圖像，分別以不同尺寸之區塊為單位來進行幢内預測， 並將所生成之幀内預測圖像輸出至預測誤差計算電路 143。於4x4預測電路^丨^中，以4x4像素之區塊為單位來 — 進行幢内預測’於8x8預測電路151-2中，以8x8像素之區 塊為單位來進行幀内預測。於16X 1 6預測電路15 1 _3中，以 16x16像素之區塊為單位來進行幀内預測。幀内預測電路 〇 141之各電路亦將所生成之幀内預測圖像供給至濾波電路 164 〇 幀間預測電路142之預測電路16丨根據原圖像與自幀記憶 體2中所讀出之參照鳩，分別以不同尺寸之區塊為單位 來=測運動向量。又，預測電路161根據所檢測到的運動 向里來進行運動補償，並輸出用於生成預測圖像之運動補 償圖像。 ㈣x16預測電中，將以16”6像素之區塊為單 位之圖像作為對象而進行處理，於16巧預測電路16卜2 中，將以16χ8像素之區塊為單位之圖像作為對象而進行處 • β又於4M預須1J電路⑹-㈤）中，將以4x4像素之區塊 • 為單位之圖像作為對象而進行處理。於跳躍/直接 (也p/direet)預測電路161__，以跳躍預測模式、直接預 測模式來檢測運動向量，並使用所檢測到的運動向量來進 行運動補償。 將以目前幀為基準而自處 外早方向之複數之參照幀中擷 144523.doc •37· 201036452 取出的運動補償圖像由預測電路161之各電路而供給至單 向預測電路162。又，將以目前鴨為基準而自處於雙方向 之複數之參^貞中掏取出的運動補償圖像由預測電路161 之各電路而供給至雙向預測電路163。 當遽波預測係如上所述使用自處於單方向之複數之參昭 幢中操取㈣運動補償圖像來進行時，自㈣電路161; 各電路來對渡波電路164供給自處於單方向之參照㈣所 擷取之運動補償圖像。當濾波預測係使用自處於雙方向之 複數之參照龄擷取出的運動補償圖像來進行時，自預測 電路161之各電路來對遽波電路164供給自處於雙方向之參 照幀甲所擷取之運動補償圖像。 單向預測電路162藉由使用由預測電路161之各電路所供 給之尺寸各不相同之運動補償圖像來進行單向預測而生成 預測囷像，並將所生成之預測圖像輸出i予頁測誤差計算電 路143。例如，單向預測電路162藉由將由預測電路ΐ6ι ι 所供給之16χ 16像素之複數個運動補償圖像中的任一圖像 之像素值作為預測圖像之像素值而生成預測圖像。 雙向預測電路163藉由使用由預測電路161之各電路所供 給之尺寸各不相同之運動補償圖像來進行雙向預測而生成 預測圖像，並將所生成之預測圖像輸出至預測誤差計算電 路143。例如，雙向預測電路163藉由將由預測電路ΐ6ι ι 所供給之16χ 16像素之複數個運動補償圖像的像素值之平 均值作為預測圖像之像素值而生成預測圖像。 濾波電路1 64係使用由預測電路1 6 1之各電路所供給之尺 144523.doc •38- 201036452 寸各不相同之運動補償圖像、與由幀内預測電路141之各 電路所供給之尺寸各不才目同之幢内預測圖像來進行滤波預 測，藉此生成預測圖像，並將所生成之預測圖像輸出至預 測誤差計异電路143。濾波電路164對應於解碼裝置丨之濾 . 波電路45而具有與圖12所示之構成相同的構成。 例如，在將由預測電路161-1所供給之16x16像素之運動 補償圖像、與由預測電路151_3所供給之16><16像素之幢内 預測圖像作為對象而生成預測圖像時，遽波電路164求出 〇 '貞内預測圖像與運動補償圖像之差分，並對所求出之差分 圖像進行低通遽波。又，據波電路164對低通滤波之輸出 進行高通遽波，並將該輸出之增益經調整後的圖像、與低 通渡波^輸出之增益經調整後的圖像相加。滤波電路164 將表π间頻成为之相加結果之圖像與幢内預測圖像相加而 Ϊ成預測圖像’並將所生成之預測圖像輸出至預測誤差計 判铁差計算電路143針對 J月 〇 _ ......谷電路 所供給之各個預測圖像而求出 ® /、原圖像之差，並將表示所 求出之差的殘差信號輸出至決 疋电路144。又，預測誤差 汁异电路143針對由幀間預測 桃二 4私峪142之早向預測電路 、又向預測電路163、濾波電 ^ ^ ^ ^ 电峪164所供給之各個預測 圖像而求出與原圖像之差，並將 Φ X、斤求出之差的殘差信 號輸出至決定電路144。 決定電路144測定由預測誤差計算 % ^ 電路143所供給之殘差 佗唬之強度，並決定與原圖像之、 較夕的預測圖像之生成 144523.doc -39- 201036452 中所使用之預測方法，將1你达m 將，、作為用以生成編碼中所使用之 預測圖像的預測方法。氺—+ a 决疋電路將表示決定結果之資 訊作為模式資訊而輪出 w 至了逆編碼電路116。於模式資訊 ’亦包含有表示將哪種尺寸之區塊作 訊等。 f J貝 心a路144於已決^藉由制預測而生成預測圖 時（於已決定進行_編碼時），將Μ貞記憶體m中所讀 出之參照t貞與模式音句j — p & 輸出至運動預測•補償電路 1 士25。決定電路144於已決定藉由㈣預測而生成預測圖像 W於已決定進行鴨内編碼時)，_記憶體122中所讀出 之用於幀内預測之圖像盥模式資 路126。 、模式貝訊-同輸出至巾貞内預測電 :19係表示圖17之運動預測·補償電路⑵之 方塊圖。 如圖19所示，運動預測•補償電路125係由運動向量檢 測電路1”、單向預測電路182、雙向預測電路183、預測 電路⑻、及據波電路185所構成。除設置有運動向量檢測 電路181以取代預測模式決定電路4ι該點以外運動預 測•補償電路1 2 5具有與g 8彳/ί + >β 韦興圖8所不之運動預測•補償電路21 相同之構成。 運動向量檢測電路181根據由排序緩衝器ιΐ2所供給之原 圖像 '與由模式決定電路123所供給之參照幢而進行區塊 匹配等，藉此來檢測運動向量。運動向量檢測電路ΐ8ι參 照由模式決定電路123所供給之模式資訊，將運動向量與 144523.d〇c • 40- 201036452 照幀-同輪出至單向預測電 預測電路184之任一者中。 以預測電路183、 向預測時，運動向量檢測電路181將運動向量 預測二Π:向預測電路182,當選擇進行雙向 測電路⑻:選 β選擇進仃纽制時，運動向量檢測電路 將運動向量與參㈣—同輸出至預測電路184。 、與，8之單向預測電路42同樣地，單向預測電路182藉由 、"單向預测而生成預測圖像。單向預測電路⑻將所生 成之預測圖像輪出至加法電路1 U。 Ο

、：、圓8之雙向預測電路43同樣地’雙向預測電路⑻藉由 、/亍雙向預測而生成預測圖像。冑向預測電路1Μ將所生 成之預測圖像輸出至加法電路113。 與圖8之預測電路44同樣地’預測電路184自2片等之複 數之參照幀中分別擷取運動補償圖像，並將所擷取之複數 之運動補償圖像輸出至濾波電路185。 與圖8之濾波電路45同樣地，濾波電路185藉由進行濾波 預測而生成預測圖像。濾波電路〗85將所生成之預測圖像 輸出至加法電路113。再者，濾波電路185具有與圖12所示 之濾波電路45之構成相同的構成。以下，適當地引用圖12 所示之濾、波電路45之構成來作為濾波電路1 85之構成進行 說明。 藉由遽波預測所生成之預測圖像與以單向預測、雙向預 測所生成之預測圖像相比，較多地含有高頻成分而成為與 144523.doc -41- 201036452 原圖像之差較少的圖像。因此，按殘差所分配之編碼量可 較少，故可提高編碼效率。 又在 >，、、、幀之數目至少為2片時可進行濾波預測，因 此可不使處理變得複雜便能實現上述之編碼效率之提高。 例如，使傾間預測中所使用之參照巾貞之數目較多以生:精 度高的預測圖像，並使用該精度高的預測圖像，藉此亦可 減】、與原圖像之殘差而提高編碼效率，但此時因參照情之 · 數目變多而會導致處理變得複雜。 再者，於選擇預測方法時，亦可考慮預測時必要之運動 向量及編碼模式等資訊之編碼量而將與編碼量相應之權重〇 附加於殘差號之強度以選擇最佳的預測方法。藉此，可 更進一步改善編碼效率。又’為了簡化編碼處理，亦可利 用所輸入之原圖像之時問.办pq +丄 r國1豕I行間.空間方向之特徵量而適應性地 選擇預測方法。 [編碼處理之流程之說明] 、…人’對具有如上所述之構成之編碼裝置⑻之處理加 以說明。

參照圖20之流程圖來說明迆 兄月、扁碼裝置1 〇 1之編碼處理。該 處理係於巨集區塊等特定之罝办+图&上 疋之早位之圖像自排序缓衝器112 中輪出時開始。 仏；v驟S101中’加去電路113求出由排序緩衝器⑴所供 圖像與藉由運動預測•補償電路i 25或㈣内預測電 :126所生成之預測圖像之差，並將殘差輸出至正交轉換 電路114。 144523.doc •42· 201036452 於步驟S102中，正交轉換電路114對由加法電路ιΐ3所供 給之殘差實施正交轉換，並將轉換係數輪出至量化電路 115 ° 於》驟81〇3中’量化電路115對由正交轉換電路"4所供 給之轉換係數進行量化，並輸出已量化之轉換係數。 曰於步驟S104中’反量化電路119對已藉由量化電路ιΐ5而 =化後之轉換係數實施反量化，並將轉換係數輸出至逆正 交轉換電路120。 〇 ❾

於步驟S105中，逆正交轉換電路12〇對由反量化電路HQ 所供給之轉換係數實施逆正交轉換，並將所得之圖像輸出 至去塊濾波器121。 於步驟S106中’去塊濾波器121藉由進行濾波而去除區 ^失真’並將已去除區塊失真後之圖像輸出至幅記憶體 122 ° <步驟S107中，幀記憶體122記憶由去塊濾波器1 給之圖像。 於步驟sm中’由模式決定電路123而進行模式決定處 測圖^由模式決定處理，可決定以何種預_式而生成預 ' 關於模式決定處理，將於以下描述。 <步驟S1G9中’控制電路131根據模式決定電路m之決 疋來判定是否進行幀内預測。 、 中:於步驟S1G9中判定為進行中貞内預測時，於步驟川〇 =内預測電路126進行㈣預測，並將預測圖 至加法電路113。 H4523.doc -43· 201036452 另一方面，若步驟S109中判定為不進行幢内預測、即進 行幢間預測時，於步驟Slu中，藉由運動預測•補償電路 125而進行運動預測.補償處理，並將預測圖像輸出至加 法電路113。關於運動預測.補償處理，將於以下描述。 於步驟S 112中，可逆編碼電路i i 6將由量化電路⑴所供 給之轉換係數麼縮並輸出至蓄積緩衝器117。又，可逆編 碼電路116根據由模式決定電路123所供給之資訊而將識別 ❹ 旗標記述於圖像之標頭中，或者將由運動預測•補償電路 125所供給之運動向量記述於圖像之標頭中。 於步驟SH3中，蓄積緩衝器117暫時記憶由可逆編碼電 路116所供給之資訊。 於步驟川4中，控制電路131判定是否已對整個！幢之巨 集區塊進行了以上之處理，當判定為未進行處理時，注視 /、他的巨集n塊，反覆進行步驟sni之後的處理。 另—方面’當於㈣Sll4f料為已對整 ==了處理時，於步驟_中，蓄積緩衝器…根據 〇 以1=131之控制而輸出壓縮圖像資訊。以上之處理係 以各幀為對象而進行。 其-人’參照圖21之流程圖來說明於圖2G之步驟咖中所 執仃的模式決定處理。 於步驟S131中，帕内箱、+ A m T幀内預測電路141、幀間預測電路i42分 別以不同大小之區塊為對 生成預、_ 巧十象而進灯幅内預測、鳩間預測， 電圖像。所生成之預測圖像被供給至預測誤差計算 144523.doc ‘44* 201036452 於步驟S132t，預測誤差計算電路143針對由幢内預樹 電路141之各電路、幀間預測電路142之單向預測電路 162雙向預測電路163、及濾波電路164所供給之各個預 測圖像而求出與原圖像之差。預測誤差計算電路143將殘 差信號輸出至決定電路144。 於^驟8133中，決定電路144根據由預測誤差計算電路 143所供給之殘差信號之強度來決定用以生成供給至加法 電路113之預測圖像的預測方法。 Ο 〇 於步驟Si34中’決定電路144將與所決定之預測方法相 關之資訊即模式資訊輸出至可逆編碼電路116。其後，返 回至圖20之步驟S108，執行此後之處理。 其次，參照圖22之流程圖來說明於圖2〇之步驟siu中所 進行之運動預測•補償處理。 於步驟S151中，運動向量檢測電路181根據原圖像與參 照t貞來檢測運動向量。 於步驟S152中，運動向量檢測電路181判定模式決定電 路丨23是否已決定利用濾波預測模式來進行處理。 备判定為已決定利用濾波預測模式來進行處理時，處理 進入至步驟S153。步驟S153及步驟S154之各處理係分別與 圖Μ之步驟S32及步驟S33之情形同樣地執行。亦即，於步 驟S153中，擷取處理係以參照圖15之流程圖所說明之方式 而執行，於步驟8154中，濾波預測處理係以參照圖16之流 程圖所說明之方式而執行。 爪 在步驟S154之處理結束後，運動預測.補償處理結束， 144523.doc • 45 - 201036452 處理返回至圖2〇之步驟SU1，並進人步驟S112。 又，於圖之步驟Sl52中，當判 測模式來進行處理時，處理^ 處皮預 〇〇 進入至步驟S155。於步驟S155 甲’早向預測電路182或雙向 孭別书路183進仃早向預測或 又向預測，生成預測圖像。 亦即’當已決定利用單向預測模式來進行處理時，自運 量檢測電路181對單向預測電路職給運動向量，於 ^預測電路182中進行單向預測。又，當已決定利用雙 向預測模式來進行處理時， 目建勤向里檢測電路1 81對俸 f路183供給料向量，於雙向制電路⑻中進行 雙向預測。將預測圖像輸出至加法電路⑴ 驟S155之處理結束後，運 隹口 “之步 回至圖20之步驟S1U，並進入步驟sm。 处里返 如上所述，使用藉由濾 編碼，藉此可提高編以聿:成之預測圖像來進行 ^碼效率。尤其對於編碼裝置1()1，可 利用幀間預測之預测精度來 — ;補償幀内預測之預測精度之尤 足猎以提南編瑪效率D !隹而 Μ丰進而，可減少幢間預測所必 灸 照t貞之數目，故可實現處理成本之降低。 夕 <3·第3實施形態> [濾波電路之變形例] 以上’濾波電路45、185呈古l固μ 5〃、有如圖12所示之構成，作 構成可適當地變更。 〜该 圖23係表示濾波電路45 一 乃構成例的方塊圖。對蛊圖 12所示之構成對應的構成 一圖 相问之符旎，適當省略重複 144523.doc "46 - 201036452 之說明。 圖23之差分計算電路61計算+貞内預測圖像與運動補償圖 像之差分’並將差分圖像輸出至低通錢電路& «滤波電路62對由差分計算電路61所供給之差分圖像 進行低通滤波，並將所得之圖像輸出至加法電路67。 加法電路67對幀内預測圖像補充由低通慮波電路62所供 給之圖像，並將所得之圖像作為預測圖像而輸出。 與使用圖12之構成之情形相比，藉由使用如圖23所示之 ©#成而可減少處理量’從而可實現高速之動作。 圖24係表示濾、波電路45之此外另—構成例的方塊圖。對 與圖12所不之構成對應的構成附上相同之符號，適當省略 重複之說明。 於圖24之遽波電路45中，以頻率區域之信號而非時間區 域之信號為對象來進行濾、波。圖12、圖23所示之濾波電路 45均係對時間區域之信號進行濾波者。 ❹圖24之差分計算電路61計算巾貞㈣測圖像與運動補償圖 像之差分，並將差分圖像輸出至正交轉換電路2〇1。 正乂轉換電路2〇1對差分圖像進行DCT(Discrete c〇sine

TranSf〇rm，離散餘弦變換）、Hadamard 變換（Hadamard

Transformation ’ 哈達馬德變換）、KLT(Karhunen Loeve

Transformation，卡氏轉換）所代表之正交變換，並將正交 轉換後之彳s说輸出至帶通濾波電路2〇2。與對時間區域之 信號進行濾波之情形相比，進行正交轉換來對頻率區域之 進灯遽波’藉此能更靈活地進行精度高的濾波處理。 144523.doc 47· 201036452 當使用DCT來作為正交轉換時，正交轉換後之輸出DF由 下式（10)表示。式（10)之DCT(X)表示對信號X進行二維 DCT處理。 [數 10] DF = DCT(D) …⑽ 帶通濾波電路2〇2對正交轉換電路201之輸出進行濾波， 並輸出特定頻帶之信號。 增益調整電路203將帶通濾波電路202之輸出之增益調整 至α倍，並且進行頻率成分之調整。增益調整電路203之輸 出XF係由下式（11)表示。式（11)之BPF(X)表示對信號X進 行帶通濾波處理。 [數 11] XF = α · BPF(DF) ... (11) 逆正交轉換電路204以與正交轉換電路201之正交轉換對 應之方式來進行逆正交轉換，並將由增益調整電路203所 供給之頻率區域之信號轉換為時間區域之信號。例如，當 於正交轉換電路201中使用DCT來作為正交轉換時，於逆 正交轉換電路 204 中進行 IDCT(Inverse Discrete Cosine Transformation，離散餘弦反變換）。逆正交轉換電路204之 輸出X係由下式（12)表示。式（12)之IDCT(X)表示對信號X 進行二維IDCT處理。 [數 12] 144523.doc -48- 201036452 X - IDCT(XF) ...(12) 加法電路67於時間區域中對悄内預測圖像補充由逆正交 轉換電路204所供給之信號χ’並將所得之圖像作為預測： 像而輸出。加法電路67之最終輸出即預測圖像s(i 下式（13)表示。 ' [數 13] S(i,j) = MC〇(i，j)+x(i，j) ...(13) 〇 如此—來’藉由對頻率區域之信號進行濾波亦可生成精 度高的預測圖像。 又，以上係使用2片參照幀來進行濾波預測者，但亦可 將2片以上之片數之幀用作參照幀。 圖25係表示使用3片參照幀時之例之示圖。 於圖25之例中，以預測幀之時刻為基準’將時間上於i 個時刻前、再W時刻前、及進而又！個時刻前之3片㈣ 為 > ’’、、幀將更接近預測幀之1個時刻前之幀作為參照幀 ◎ R〇 ’將參照幀R〇之1個時刻前之幀作為參照幀R1，將參照 幀R1之1個時刻前之幀作為參照幀R2。 圖26係表示使用3片參照幀時之濾波電路之構成例的方 塊圖。 如圖26所示，濾波電路211係由濾波電路221與濾波電路 222所構成。濾波電路22 1與渡波電路222分別具有如圖 12圖23、圖24所示之構成。亦即，濾波電路211藉由級 聯連接用於2輸入1輸出時之濾波電路45而作為3輸入丨輸出 144523.doc -49- 201036452 之電路進行動作。 於此，說明將自參照幀R0中所擷取之運動補償圖像作為 運動補償圖像MC0、將自參照幀R1中所擷取之運動補償圖 像作為運動補償圖像MCI、並於當前幀中可獲得幀内預測 圖像者。幀内預測圖像IP與運動補償圖像MC0被輸入至渡 波電路22 1 ’運動補償圖像MC1被輸入至濾波電路222。 渡波電路221以參照圖12所說明之方式對幀内預測圖像 JP與運動補償圖像MC0進行濾波，並將濾波之結果即中間 輪出X輪出至濾波電路222。 濾波電路221以參照圖12所說明之方式對中間輸出χ與運 動補償圖像MCI進行濾波，並將濾波之結果作為預測圖像 而輸出。 〜 w u 一 1 j、曰娜狄黾塔45而 設置於圖5之解碼裝置1及圖17之編碼裝置101中。 、再者，濾波電路221與濾波電路222不必具有相同之構 =如-者具有圖12所示之構成、另一者具有圖。所示之 籌：：類的各自之構成亦可不同。又，考慮遽波前後之輪 特性，濾波器所用之參數亦可不同。 :可將自位於前後之3片參照财所 圖像而非自時間上在一個方向上之參昭 動補償圖像作為對象、 取出的運 隹/慮，皮電路211中進行濾波。 ’ d參照圖12所說明之情形，當以 為基準而將位於前後之續用作參照 、之〜刻 時間方向戋距M _ 、 亦可與參照幀之 離對應地來動態地變更遽波時之抽頭係數等 I44523.doc -50- 201036452 參數。 /自爲碼裝置1 ο 1對解碼裝置〗進行之墨縮圖像資訊之傳送 乂 ’由光^磁碟、快閃記憶體等之記錄媒體、衛星廣 播電瘦TV、網際網路、行動電話機網路等之各種媒體 而進行。 亦可由軟體執行。當 將構成上述軟體之程 上述一系列之處理可由硬體執行， 由軟體來執行上述一系列之處理時， 〇

式自料記錄媒體安裝於併人到專用硬體之電腦中、或者 藉由女裝各種程式而能實行S種功能之通用的個人電腦等 中。 圖2 7係藉由程式而執行上述—系列處理之電腦之硬 體之構成例的方塊圖。

CPU(Central Processing Unit，t it )301 ^ ROM ⑽以〇吻Mem〇ry，唯讀記憶體）302、RAM(Random WSS Mem〇ry，隨機存取記憶體）3〇3係經匯流排304而相 互連接。 於匯流排3 0 4上，進而i車垃古认、土人 退向連接有輸入輸出介面310。於輸入 輸出介面310上，連接右.办紅 迓接有.包括鍵盤、鼠標、麥克風等之 輸入部311;包括顯示器、揚聲笙 讶車器寻之輸出部312;包括硬 碟或非揮發性之記憶體等 .^ ^ ^ 4丨思。丨5 3 13，包括網路介面等 之通訊部314 ;及驅動光碟戋丰！ % 4牛導體記憶體等可移動式媒 體321之驅動器315。 在以上述方式所構成之雷腦 再取€胸300中，CPU301例如將記憶 於記憶部3 13中之程式經由齡λ & , λ 枉式、生由輸入輸出介面310及匯流排304 144523.doc 201036452 理 而載入至_”並執行，藉此來進行上述…之處 甲，：:：執订之程式係記錄於例如可移動式媒體321 線之傳送㈣w供’並被衫於記中㈣或無 此外/料執行之㈣可_找明#巾 序列進行處理之程式，亦可為並列地或者以執 仃調用時專必要之時序進行處理之程式。 執 Ο 之+驟書中’對記錄於記錄媒體中之程式進行記述 理二：二Γ按所記載之輪以時間序列所執行之處 個別::::::便—來處理亦會並列地或 置二=二，"'統由複數個元件- 广亦可將以上所說明之作為1個裝置(或處理部)之構 成加以分割而構成為複數個裝置（或處理部）。相反地，亦 可:以上所說明之作為複數個裝置（或處理部）之構成加以 I而構成Μ個裝置（或處理部）。又’當然亦可對各裝置 (或各處理部)之構成附加除上述以外之構成。進而，若系 統全體之構成及動作實質上相同，則可於其他裝置（或其 :處理部）之構成中包含某裳置（或處理部）之構成之-部 分。亦即，本發明之實施形態並不限定於上述的實施形 態’於不脫離本發明之主旨之範圍内可進行各種變更。 例如，上述的解碼裝置1或編碼裝置101可適用於任意之 144523.doc •52· 201036452 電子機器。以下說明其例。 η。圖28係表不使用彳適用本發明之解碼裝置玉之電視接收 器之主要構成例的方塊圖。 • 圖28所示之電視接收器1000包括：地面波調諧器1013、 視訊解碼益1015、影像信號處理電路1018、圖形生成電路 19面板驅動電路1020、及顯示面板1021。 地面波調諧器1〇13係經由天線而接收地面類比廣播之廣 播波信號，並進行解調而獲取影像信號，將其供給至視訊 Ο 冑碼器1G15。視訊解碼n 1G15對由地面波調譜器⑻3所供 給之影像信號實施解碼處理，並將所獲得之數位成分信號 供給至影像信號處理電路1 〇 18。 影像信號處理電路1018對由視訊解碼器1015所供給之影 像貧料實施雜訊去除等特定之處理，並將所獲得之影像資 料供給至圖形生成電路1〇19。 圖形生成電路1019生成顯示面板1〇21上所顯示之節目之 ❹ 影像資料、或者經由網路所供給之基於適用之處理的圖像 資料等，並將所生成之影像資料或圖像資料供給至面板驅 動電路1020。又，圖形生成電路1〇19亦適當地進行如下處 理：生成用於顯示由使用者在項目之選擇等時所利用之書 面的影像資料（圖形）’並使其與節目的影像資料重疊，將 以此獲付之影像資料供給至面板驅動電路1 Q 2 〇。 面板驅動電路1020根據由圖形生成電路1019所供給之資 料而驅動顯示面板1021，使節目之影像或上述之各種晝面 顯示於顯示面板1021。 144523.doc •53· 201036452 顯示面板 1021 包括 LCD(Liquid Crystal Display，液晶顯 示器）等’隨著面板驅動電路1020之控制而顯示節目之影 像等。 又，電視接收器1000亦包括：音頻A/D(Analog/Digital) 轉換電路1014、音頻信號處理電路1022、回波消除/音頻 合成電路1023、音頻放大電路ι〇24、及揚聲器1〇25。 地面波調諧器1 013藉由對所接收到的傳送波信號進行解 調’不僅獲取影像信號而且亦獲取音頻信號。地面波調諧 器1013將所獲取之音頻信號供給至音頻a/D轉換電路 1014。 音頻A/D轉換電路1〇14對由地面波調諧器1〇13所供給之 音頻信號實施A/D轉換處理，將所獲得之數位音頻信號供 給至音頻信號處理電路1 〇22。 音頻信號處理電路1022對由音頻A/D轉換電路1〇14所供 給之音頻資料實施雜訊去除等之特定之處理，並將所獲得 之音頻資料供給至回波消除/音頻合成電路丨〇23。 回波消除/音頻合成電路丨023將由音頻信號處理電路 10 2 2所供給之音頻資料供給至音頻放大電路1 〇 2 4。 音頻放大電路1024對由回波消除/音頻合成電路1〇23所 供給之音頻資料實施D/A轉換處理、放大處理’並於調整 為特定之音量後’將音頻自揚聲器1〇25中輸出。 此外，電視接收器1000亦包括數位調諧器1016&MPEG 解碼器1 01 7。 數位調諧器1016經由天線而接收數位廣播（地面數位廣 144523. doc -54- 201036452 播、BS (Broadcasting Satellite ，廣播衛星）/CS (Communications Satellite，通訊衛星）數位廣播）之廣播波 信號，並進行解調，獲取MPEG-TS(Moving Picture Experts Group-Transport Stream，動態影像專家群-傳輸 ' 流），將其供給至MPEG解碼器1 017。 ' MPEG解碼器101 7解除對由數位調諧器1 016供給之 MPEG-TS所施加的擾碼，並擷取出包含成為再生對象（視 聽對象）之節目之資料的串流。MPEG解碼器1017對構成所 〇 擷取之串流之音頻封包進行解碼，將所獲得之音頻資料供 給至音頻信號處理電路1 022，並且對構成串流之影像封包 進行解碼，將所獲得之影像資料供給至影像信號處理電路 1018。又，MPEG解碼器1017將自MPEG-TS所擷取之 EPG(Electronic Program Guide，電子節目表）資料經由未 圖示之路徑而供給至〇?111032。 電視接收器1000使用上述解碼裝置1來作為如此對影像 封包進行解碼之MPEG解碼器1017。此外，由廣播局等所 ^ 發送之MPEG-TS藉由編碼裝置101而被編碼。 與解碼裝置1之情形相同，MPEG解碼器101 7使用運動向 , 量自幀（N-1)獲得運動預測圖像，並且藉由利用幀N之解碼 完畢像素值的幀内預測而自幀N中獲得空間預測圖像。然 後，MPEG解碼器10 17對該2種圖像進行濾波處理而生成預 測圖像。因此，MPEG解碼器1 0 17可生成更接近原圖像之 新的預測圖像。 與由視訊解碼器1015所供給之影像資料之情形相同，由 144523.doc -55- 201036452 MPEG解碼器ι〇17所供給之影像資料在影像信號處理電路 1018中被實施特定之處理，於圖形生成電路1〇19中將所 生成之影像資料等適當地重疊’並經由面板驅動電路丨〇2〇 而供給至顯示面板1021，顯示該圖像。 與由音頻A/D轉換電路1 〇 14所供給之音頻資料之情形相 同，由MPEG解碼器1017所供給之音頻資料在音頻信號處 理電路1022中被實施特定之處理，並經由回波消除/音頻 合成電路1023而供給至音頻放大電路1〇24，實施D/A轉換 處理及放大處理。其結果為，被調整成特定之音量之音頻 自揚聲器1025中輸出。 又’電視接收|§ 1000亦包括麥克風1026、及A/D轉換電 路1027 。 A/D轉換電路1〇27接收藉由設置於電視接收器1〇〇〇上之 作為音頻會話用者之麥克風1026所取入之使用者的音頻信 號’並對接收到的音頻信號實施A/D轉換處理，將所獲得 之數位音頻資料供給至回波消除/音頻合成電路1〇23。 在自A/D轉換電路1〇27而供給電視接收器1〇〇〇之使用者 (使用者A)之音頻資料時，回波消除/音頻合成電路1〇23以 使用者A之音頻資料為對象而進行回波消除，使藉由與其 他音頻資料合成等所獲得之音頻資料經由音頻放大電路 1024而自揚聲器1〇25輸出。 進而，電視接收器1 〇〇〇亦包括：音頻編解碼器丨〇28、内 部匯流排 1029、SDRAM(Synchr0nous Dynamic Rand〇m

Access Memory，同步動態隨機存取記憶體）1〇3〇、快閃記 144523.doc -56- 201036452 U體 1031、CPU1032、USB(Universal Serial Bus，通用串 列匯流排）介面（I/F，interface) 1033 '及網路介面1034。 A/D轉換電路1〇27接收藉由設置於電視接收器1〇〇〇上之 作為音頻會話用者之麥克風1〇26所取入之使用者的音頻信 號’並對接收到的音頻信號實施A/D轉換處理，將所獲得 之數位音頻資料供給至音頻編解碼器1028。 音頻編解碼器1028將由A/D轉換電路1027所供給之音頻 貧料轉換為用於經由網路進行發送之特定格式之資料，並 Ο 經由内部匯流排1 〇29而供給至網路介面丨〇34。 網路介面1034係經由安裴於網路端子1〇35上之電纜而連 接於網路。網路介面1〇34例如對連接於該網路之其他的裝 置發送由音頻編解碼器丨〇28所供給之音頻資料。又，網路 w面1034例如經由網路端子丨〇35而接收從經由網路而連接 之其他的裝置所發送之音頻資料，並將其經由内部匯流排 1029而供給至音頻編解碼器1〇28。 q 音頻編解碼器1028將由網路介面1034所供給之音頻資料 轉換為特定格式之資料，並將其供給至回波消除/音頻合 成電路1023。 回波消除/音頻合成電路1〇23以由音頻編解碼器1〇28所 ，給之音頻資料為對象來料回波㈣，並與其他的音頻 資料加以合成等，將以此所獲得之音頻資料經由音頻放大 電路1024而自揚聲器1〇25輸出。 SDRAM1 03 0係於CPU1 〇3 2執行處理時記憶必要的各種資 料。 144523.doc -57- 201036452 快閃記憶體103 1記憶由CPUl032所執行之程式。記憶於 快閃記憶體103 1中之程式係於電視接收器〗〇〇〇啟動時等特 疋之時刻由CPU1 032讀出。快閃記憶體丨03丨中，亦記憶有 經由數位廣播所獲取之EPG資料、經由網路而自特定之伺 服器所獲取之資料等。 例如’於快閃記憶體103 1中，記憶有在CPU1032之控制 下I由網路而自特定之伺服器所獲取之包含内容資料的 MPEG-TS。快閃記憶體丨〇3 1例如在cpui 〇32之控制下將 該MPEG-TS經由内部匯流排丨〇29而供給至MpEG解碼器 1017。 與由數位調諧器1〇16所供給2MpEG_TS之情形相同， MPEG解碼器1017處理該MPEG_TS。如上所述，電視接收 器1〇〇〇可經由網路而接收包含影像及音頻等之内容資料， 並使用MPEG解碼n 1 〇 17進行解碼，從而顯示該影像或者 輸出音頻。 又電視接收器1 000亦包括接收自遙控器丨05丨發送之紅 外線信號之受光部1〇37。 受光部iG37接收來自遙控器1()51之紅外線，並對其進行 解調，將以此所獲得之表示使用者操作内容之控制編 出至 CPU1032。 CPU1032執行記憶於快閃記憶體則中之程式，並根據 由受光部urn所供給之控制編碼等而控制電視接收 全體之動作。CPU1G32與電視接收器⑽k各部係經 圖示之路徑而連接。 144523.doc -58- 201036452 USB介面1033係與經由安裝於USB端子1〇36上之USB電 纜而連接的電視接收器1000外部之機器之間進行資料之收 發。網路介面1034經由安裝於網路端子1〇35上之電纜而連 接於網S，亦肖連接於網路之各種裝置進行除音頻資料以 外之資料之收發。 電視接收器1000使用解碼裝置i來作為MPEG解碼器 1017，因而於對構成串流之影像封包進行之解碼中可藉 由對幢内預測圖像_充表示高頻成分之圖像而生成預測 該預測圖像相較單純地進行雙向預測時所獲得之預測圖 像而更多地含有高頻成分。 又’與單純地進行單向預測之情形相比，可更有效地利 用圖像之時間關聯來生成預測圖像。

進而，將較多地含有高頻成分之預測圖像於加法電路15 中與解碼圖像相加，因此最終自mpeg解碼器⑻7輸出之 圖像亦成為較多地含有高頻成分之高精細者。 π頂測圖像 生成f，在當前幀中進行幀η頂凋， '使所生成之巾貞内預測圖像IP與運動補償圖像MC1-同被 利用古文可減少用於生成運動補償圖像之運動向量 目0 如此 ’電視接收HHKH)於對構成串流之影像封包進行解 =之:利用_預測之預測精度來補料内預測之預測 二二：以實現編碼效率之提高，，亦可藉由減少 、 义要之參照面之數目來實現處理成本之降低。 144523.doc -59· 201036452 圖2 9係表示使用有適用本發明之解碼裝置丨及編碼裝置 101之行動電这機之主要構成例的方塊圖。 圖29所示之行動電話機1100包括：總括地控制各部之主 控制部1150、電源電路部1151、操作輸入控制部ιΐ52、圖 像編碼器1153、相機介面部1154、LCD控制部1155、圖像 編碼器1156、解多工部（心111111^1)1以丨11幻1157、記錄再生部 1162、調變解調電路部1158、及音頻編解碼器ιΐ59〇該等 係經由匯流排116 〇而相互連接。 又，行動電話機11〇〇包括操作鍵1119、（：(：1)((：：1^^

Coupled Devices ’電荷麵合元件）相機ιιΐ6、液晶顯示器〇 ms、記憶部1123、收發電路部1163、天線1114、麥克風 (話筒）1121、及揚聲器1117。 在經使用者之操作而終話及電源鍵接通之狀態時，電源 電路部115!自電池組對各部供給電力藉以啟動行動電話機 1100而成為可動作之狀態。 行動電話機1100根據由CPU、R〇M及RAM等所成之主控 制部1150之控制’以音頻通話模式或資料通訊模式等各=◎ 模式來進行音頻信號之收發、電子郵件或圖像資料之收 發、圖像攝影、或者資料記錄等之各種動作。 例如，於音頻通話模式下，行動電話機1100將麥克風 (話筒）1121所採集之音頻信號藉由音頻編解碼器而轉 換為數位音頻資料，並利用調變解調電路部1158對其進行 展頻處理’利用收發電路部1163進行數位類比轉換處理及 頻率轉換處理。行動電話機11〇〇將經該轉換處理所獲得之 144523.doc 60· 201036452 發送用信號經由天線1114而發送至未圖示之基地台。傳送 至基地台之發送用信號（音頻信號）經由公眾電話網路而被 供給至通話對象之行動電話機。 又’例如，於音頻通話模式下，行動電話機1100將由天 線1114接收到的接收信號利用收發電路部1163進行放大， 進而進行頻率轉換處理及類比數位轉換處理，利用調變解 調電路部1158進行解展頻處理，並利用音頻編解碼器1159 轉換為類比音頻信號。行動電話機1100將經該轉換所獲得 Ο 之類比音頻信號自揚聲器1117輸出。 進而’例如，於資料通訊模式下發送電子郵件時行動 電活機1100會於操作輸入控制部1152中接受經操作鍵1119 之操作所輪入之電子郵件之文本資料。行動電話機1100於 主控制部1150中處理該文本資料，並經由LCD控制部ιΐ55 而顯示於液晶顯示器丨丨丨8上作為圖像。 又，行動電話機1100於主控制部115〇中根據操作輸入控 〇 制4 11 52所接艾之文本資料或使用者指示等而生成電子郵 件貧料。行動電話機1100對該電子郵件資料利用調變解調 電路部1158進行展頻處理，並利用收發電路部1163進行數 位類比轉換處理及頻率轉換處理。行動電話機u〇〇將經該 轉換處理所獲得之發送用信號經由天線1114而發送至未圖 不之基地台。傳送至基地台之發送用信號（電子郵件）經由 網路及郵件伺服器等而被供給至特定之目的地。 又，例如，於資料通訊模式下接收電子郵件時，行動電 6舌機1100會經由天線1114而由收發電路部1163來接收自基 144523.doc 61 201036452 地台所發送之信號，並進行放大，進而進行頻率轉換處理 及類比數位轉換處理。行動電話機11〇〇利用調變解調電路 41158來對a亥接收信號進行解展頻處理而復原成原先的電 子郵件資料。行動電話機11〇〇將已復原之電子郵件資料經 由LCD控制部1155而顯示於液晶顯示器ιιΐ8。 此外’打動電話機noo亦可將所接收到的電子郵件資料 經由記錄再生部116 2而記錄（記憶）於記憶部n 2 3。 該記億部U23係可覆寫之任意之記憶媒體。記憶部⑽ 可為例如RAM或内置型快閃記憶體等之半導體記憶體，亦 I為硬碟，還可為磁碟、磁光碟、光碟、USB記憶體、或 記憶卡等之可移動式媒體。當然，亦可為除該等以外者。

進而’例如’於資料通訊模式下發送圖像f料時，行動 電話機uoo經拍攝後由CCD相機⑴6生成圖像資料。咖 相機⑴6包括透鏡或光圈等之光學元件及作為光電轉換元 CD其拍攝被攝體，將所接收到的光之強度轉換為 電氣信號’生成被攝體圖像之圖像資料。ccd相機⑴_

及圖像貝料經由相機介面部ιΐ5·由圖像編碼器I! 53進行 編碼，從而轉換成編碼圖像資料。 •動％話機11GG將上述編碼裝置1()1用作進行該種處理 之，像解碼HU53。與編碼裝置⑻之情形相@，圖像解 馬裔m3使用運動向量而自巾貞（叫中獲得運動預測圖像， :且藉由利用幀N中之解碼完畢之像素值的幀内預測而自 、N中獲得空間預測圖像。而且，圖像解碼器1153對該2種 圖像進仃濾波處理而生成預測圖像。因此，圖像解碼器 144523.doc •62- 201036452 U53可生成更接近 所分配之編碼量可較„、之新的預測圖像。所以’按殘差 熬v，故可提高編碼效率。 再者’與此同時，杆 動电活機1100將CCD相機1116於拍 攝中由麥克風（話筒）丨 1159Φ ^ ^ 斤採集之音頻在音頻編解碼器 ⑽中進仃類崎位轉換，㈣騎編碼。 行動電s舌機1100於解多丄 〇P 1157中將由圖像編碼器1153 所i/、、、.σ之編碼圖傻皆斗泣 、4、與由音頻編解碼器〗丨59所供給之

2音頻資料以特定之方式進行多工化。行動電話機· 將其結果所獲得之多卫化資料利㈣變解調電路部1158進 仃展頻處理’並利用收發電路部⑽進行數位類比轉換處 理及頻率轉換處理。行動電話機謂將經該轉換處理所獲 得之發送用信號經由天線1114而發送至未圖示之基地台。 傳送至基地台之發送用信號（圖像資料）經由網路等而被供 給至通訊對象。 再者於不發送圖像資料之情形時，行動電話機丨_亦 可不經由圖像編碼器1153而是經由LCD控制部U55來使由 CCD相機1116所生成之圖像資料顯示於液晶顯示器⑴8 上0 又，例如，於資料通訊模式下接收與簡易主頁等鏈接之 動態圖像文檔之資料時，行動電話機11〇〇會經由天線ιιΐ4 而由收發電路部1163來接收自基地台所發送之信號，並進 行放大，進而進行頻率轉換處理及類比數位轉換處理。行 動電話機1100利用調變解調電路部1158對該接收到的信號 進行解展頻處理而復原成原先的多工化資料。行動電話機 144523.doc -63- 201036452 1100於解多王部1157中㈣多工化諸進行分解，分為編 碼圖像資料與音頻資料。 行動電話機蘭於®像解碼mm對編碼圖像資料進 行解馬藉以生成再生動態圖像資料，並使其經由l⑶控 制部1155而顯示於液晶顯示器⑽上。藉此，例如使與簡 易主頁鏈接之動態圖像文檔中所含之動畫資料顯示於液晶 顯示器111 8。 Θ 行動電話機mo將上述解碼裝置丨用作進行該種處理之 圖像解碼器1156。亦即，與解碼裝置1之情形相同，圖像 解碼器H56使料動向量而自細…獲得運動預測圖像， 並且藉由利㈣Ν中之解碼完畢像素值之幢内預測而自幢 Ν獲得空間預測圖像。然後，圖像解碼器u56對該2種圖像 進行遽波處理而生成預測圖像。因此，圖像解碼器⑴“ 生成更接近原圖像之新的預測圖像。 此時，㈣電話機1100會同時於音頻編解碼器1159中將 數位音頻資料轉換為類比音頻信號，並將其自揚聲器1117

Q 輸出。藉& ’例如再生出與簡易主頁鏈接之動態圖像文檔 中所含之音頻資料。 再者’與電子郵件之情形相同’行動電話機謂亦可將 所接收到的與簡易主頁等鏈接之資料經由記錄再生部1162 而s己錄（記憶）於記憶部1123。 又，行動電話機1100可於主控制部115〇中對拍攝後由 CCD相機1116所獲得之二維碼進行解析獲取記錄於二唯 碼中之資訊。 144523.doc -64· 201036452 此外，行動電話機⑽可於紅外線通訊部ιΐ8ι利用 線而與外部之機器進行通訊。 、 行動電話機mo將編碼裝置⑻用作圖像編碼器⑽， 故例如在對⑽相機1116中所生成之圖像資料進行編碼並 傳送時’可湘_預測之預_度來補㈣内預測之預 測精度之不足藉以提高編碼效率。進而，可減少巾貞間預測 時必要之參照鳩之數目，因此行動電話機n⑼可實現處理 成本之降低。 又，行動電話機1100將解碼裝置丨用作圖像解碼器 U56，故在接收例如與簡易主頁等鏈接於之動態圖像文檔 之肓料（編碼資料）時之解碼中，可藉由對幅内預測圖像π 補充表示高頻成分之圖像而生成預測圖像。 因此，行動電活機11 〇〇可利用幀間預測之預測精度來補 償幀内預測之預測精度之不足以實現編碼效率之提高，進 而，亦可藉由減少幀間預測時必要之參照面之數目而實現 處理成本之降低。 此外，以上，說明了行動電話機i 100中使用CCD相機 1116之情形，但亦可代替該（：(：〇相機1116而使用一種適用 有 CMOS(ComPlementary Metal 〇xide Semic〇nduct〇r，互 補金屬氧化半導體）之影像感測器（CM〇s影像感測器）。此 時亦與使用有CCD相機1116之情形相同，行動電話機 1100可拍攝被攝體，生成被攝體圖像之圖像資料 又’以上說明了行動電話機丨100，但只要係例如pda (Personal Digital Assistants，個人數位助理）、智慧型手 144523.doc -65- 201036452 機、UMPC(Ultra Mobile Personal Computer’ 超級移動個 人電腦）、上網本（Netbook)、筆記型個人電腦等之與該行 動電活機1100具有相同之攝像功能或通訊功能之裝置，則 無淪何種裝置，均可與行動電話機丨丨〇〇之情形同樣地適用 解碼裝置1及編碼裝置1 〇 1。 圖30係表示使用有適用本發明之解碼裝置丨及編碼裝置 ιοί之硬碟錄影機之主要構成例的方塊圖。 圖30所示之硬碟錄影機（HDD錄影機）12〇〇係如下所述之 裝置.將由調譜器接收到的自衛星或地面之天線等所發送 之廣播波信號（電視信號）中所包含的廣播節目之音訊資料 與視訊資料保存於内置的硬碟中，並將該所保存之資料以 與使用者之指示相應之時序而提供給使用者。 ，硬碟錄影機1200例如可自廣播波信號中擷取音訊資料與 視说貧料’對其等進行適當解碼，並記憶於内置的硬碟 中。又，硬碟錄影機1200例如亦可經由網路而自其他裝置 獲取音訊資料或視訊資料， 憶於内置的硬碟中。肖其專進仃適當地解碼，並記 立=二碟錄影機1200例如可對記錄於内置的硬碟中之 =資料與視訊資料進彳轉碼並供給至螢幕126 ，於螢幕1260之畫面中，並使其聲音自螢幕126。:： 聲器輸出。又，硬碟錄_機 铴 獲取之唐播波2°〇例如可對自經由調諧器而 經由網路而自其他裝置所獲取之1貝㈣視訊資料、或者 解碼，並供給至營幕咖二二=料或視訊資料進行 之再圖像顯示於螢幕1260之晝 144523.doc • 66 * 201036452 面中，並使其聲音自螢幕1260之揚聲器輸出。 當然’亦可執行其他的動作。 如圖30所示，硬碟錄影機12〇〇包括：接收部i22i、解調 1222解多工益1223、音訊解碼器1224、視訊解石馬器 1225、及錄影機控制部！226。硬碟錄影機丨2〇〇進而包括： EPG資料记憶體1227、程式記憶體1228、工作記憶體 U29、顯示轉換器123〇、〇SD(〇n以代印，螢幕顯 示）控制部1231、顯示控制部1232、記錄再生部i233、

轉換器1234、及通訊部;[235。 又，顯示轉換器123〇包括視訊編碼器1241。記錄再生部 1233包括編碼器1251及解碼器1252。 接收部1221接收來自遙控器（未圖示）之紅外線信號，並 轉換為電氣信號而輸出至錄影機控制部1226。錄影機控制 部1226例如係由微處理器等所構成，其根據記憶於程式記 憶體1228中之程式而執行各種處理。此時，錄影機控制部 1226視需要而使用工作記憶體1229。 通§fl部123 5連接於網路，並經由網路而進行與其他裝置 之通訊處理。例如，通訊部1235受到錄影機控制部1226之 控制，與調諧器（未圖示）進行通訊，主要對調諧器輸出選 頻控制信號。 解调部1222對由調諧器所供給之信號進行解調，並輸出 至解多工斋1223。解多工器1223將由解調部1222所供給之 資料分解為音訊資料、視訊資料、及EpG資料，並分別輸 出至音訊解碼器1224、視訊解碼器1225、或錄影機控制部 144523.doc •67· 201036452 1226。 音訊解碼器1224對所輸入之音訊資料進行解碼，並輪出 至記錄再生部1233。視訊解碼器1225對所輸入之視訊資料 進行解碼，並輸出至顯示轉換器1230。錄影機控制部1226 將所輸入之EPG資料供給並記憶於EPG資料記憶體丨227 中。 顯示轉換器1230將由視訊解碼器1225或錄影機控制部 1226所供給之視訊資料藉由視訊編碼器1241而編碼為例如 NTSC(National Television Standards Committee，國家電視 標準委員會）方式之視訊資料，並輸出至記錄再生部 1233。又，顯示轉換器123〇將由視訊解碼器1225或錄影機 控制部1226所供給之視訊資料之晝面之尺寸轉換為與螢幕 1260之尺寸對應的尺寸，藉由視訊編碼器124ι而轉換為 NTSC方式之視訊資料，並轉換為類比信號而輸出至顯示 控制部1232。 顯示控制部1232在錄影機控制部1226之控制下，將 〇SD(〇n Screen Display)控制部1231所輸出之〇sd信號盥 自顯示轉換器123〇所輸入之視訊信號重疊，輪出至勞幕 1260之顯示器中而使其顯示。 而且，將音訊解碼器1224所輸出之音訊資料藉由DM轉 換器_轉換為類比信號而供給至螢以編。螢幕⑽將 該音訊信號自内置的揚聲器輪出。 資料或音訊資料 記錄再生部1233包括硬碟作為記錄視訊 等之記憶媒體。 144523.doc -68- 201036452 記錄再生部12 3 3例如获击始w , j如稭由編碼器1251而對自音訊解碼器 1224所供給之音訊資斜i隹并绝 貧抖進仃編碼。又，記錄再生部I233藉 由編碼器1251而對由顯示轉換器咖之視訊編碼器咖所 供給之視訊資料進行編碼。記錄再生部1233藉由多工器而 將該音訊資料之編碼資料與視訊資料之編碼資料加以合 成。記錄再生部1233對該合成資料進行通道編碼而放大， 並將β亥寅料經由記錄頭而寫入至硬碟。

記錄再生部1233經由再生頭而使記錄於硬碟中之資料再 生、放大’並藉由解多工器而分解為音訊資料與視訊資 料。記錄再生部⑽藉由解碼器1252而對音訊資料及視訊 資料進行解碼。記錄再生部1233對已解碼之音訊資料進行 D/A轉換，並輸出至螢^之揚聲器。又，記錄再生部 1233對已解碼之視訊資料進行D/A轉換，並輪出至勞幕 1260之顯示器。 錄影機控制部1226根據經由接收部1221接收到的來自遙 控态之紅外線信號所表示之使用者指示，而自EPG資料記 憶體1227中讀出最新的EPG資料，並將其供給至〇sd控制 部1231。0SD控制部1231生成與所輸入之Ερ(}資料對應之 圖像資料，並輸出至顯示控制部1232。顯示控制部1232將 自OSD控制部1231所輸入之視訊資料輸出至螢幕之顯 示器而使其顯示。藉此，螢幕1260之顯示器上顯示有 EPG(電子節目表） 又，硬碟錄影機1200可經由網際網路等網路而獲取自其 他裝置所供給之視訊資料、音訊資料、或資料等之各 144523.doc -69- 201036452 種資料。 通訊部1235受到錄影機控制部1226之控制，經由網路而 獲取自其他裝置所發送之視訊資料、音訊資料、及EpG資 料等之編碼資料，並將其供給至錄影機控制部1226。錄影 機控制部1226例如將所獲取之視訊資料或音訊資料之編碼 資料供給至記錄再生部1233，並記憶於硬碟中。此時，錄 機彳工制„卩1226及記錄再生部1233亦可視需要而進行再編 碼專處理。 又，錄影機控制部1226對所獲取之視訊資料或音訊資料 之編碼資料進行解碼，並將所獲得之視訊資料供給至顯示 轉換器1230。與自視訊解碼器1225供給之視訊資料同樣 地頒不轉換器1230對自錄影機控制部丨226供給之視訊資 料進仃處理，並經由顯示控制部1232而供給至螢幕1260 , 顯不該圖像。 又，配合該圖像顯示，錄影機控制部丨226亦可將已解碼 之音訊資料經由D/A轉換器1234而供給至螢幕1260，使其 音頻自揚聲器輸出。 進而，錄影機控制部1226對所獲取之EPG資料之編碼資 料進仃解碼，並將解碼後之EpG資料供給至EpG資料記憶 體 1227。 上述的硬碟錄影機丨2 〇 〇將解碼裝置丨用作視訊解碼器 解碼器1252、及内置於錄影機控制部1226中之解碼 器亦即，視矾解碼器1225、解碼器1252、及内置於錄影 機控制1226中之解碼器係與解碼裝置1同樣地，使用運 144523.doc -70· 201036452 動向量而自幢(N-”獲得運動預測圖像，並且藉由利， 中之解石馬完畢像素值的幢内預測而自悄N獲得空間預測圖 像。而且，視訊解碼器1225、解碼器1252、及内置於錄影 • 貞控制部1226中之解瑪器對該2種圖像進行遽波處理而生 成預測圖像。因此，視訊解碼器1225、解碼器1252、及内 Ε於錄影機㈣部1226巾之解碼器可生錢接近原圖像之 新的預測圖像。 因此，硬碟錄影機1200例如在調諧器或通訊部1235對視 〇 訊資料（編碼資料）進行接收時、或者在記錄再生部1233對 視訊貝料（編碼資料）自硬碟進行再生時的解碼中，可藉由 對幢内預測圖像_充表示高頻成分之圖像而生成預㈣ 像。 藉此，硬碟錄影機1200可利用幀間預測之預測精度來補 償幀内預測之預測精度之不足，從而實現編碼效率之提 高，進雨，亦可藉由減少幀間預測時必要之參照面之數目 而貫現處理成本之降低。 © 又，硬碟錄影機1200將編碼裝置ιοί用作編碼器1251。 與編碼裝置101之情形相同，編碼器1251對使用有運動向 • 1之運動預測圖像與幀内預測圖像進行濾波處理而生成預 • 測圖像。因此，編碼器1251可生成更接近原圖像之新的預 測圖像。所以，按殘差所分配之編碼量可較少，故可提高 編碼效率。 因此’硬碟錄影機12〇〇例如在向硬碟中記錄編碼資料時 的幀内預測之預測精度之不足，可利用幀間預測之預測精 144523.doc 71 201036452 度來補償以提高編碼效率。 干進而，可減少幀間預測時必要 之/照幢之數目，故硬碟錄影機12〇〇可實現處理成本 低。 再者’以上說明了將視訊資料或音訊資料記錄於硬碟中 之硬碟錄影機1200，當然’記錄媒體可為任意者。例如即 便為適用有快閃記憶體、光碟、或錄影帶等硬碟以外之記 錄媒體的錄影機，亦與上述硬碟錄影機⑽之情形同樣地 可適用解碼裝置1及編碼裝置1(H。 圖31係表示使用有適用本發明之解碼裝置丨及編碼裝置 101之相機之主要構成例的方塊圖。 圖31所示之相機1300拍攝被攝體，使被攝體之圖像顯示 於LCD1316，或將其作為圖像資料而記錄於記錄媒體 中。 透鏡區塊1311將光（即，被攝體之影像）入射至 CCD/CMOS1312。CCD/CMOS1M2係使用有 之影像感測器，其將所接收到的光之強度轉換為電氣信 號，並供給至相機信號處理部丨3 13。 相機信號處理部1313將由（：匚0/(：乂081312所供給之電氣 k號轉換為Y、Cr、Cb之色差信號，並供給至圖像信號處 理部1314。圖像信號處理部1314於控制器1321之控制下， 對由相機信號處理部13 13所供給之圖像信號實施特定之圖 像處理’又利用編碼器13 41對該圖像信號進行編碼。圖像 信號處理部1314將對圖像信號進行編碼所生成之編碼資料 供給至解碼器1315。進而’圖像信號處理部1314獲取於榮 144523.doc -72· 201036452 幕視控器（OSD) 1320中所生成之顯示用資料，並將其供給 至解碼器1315。 於上述處理中，相機信號處理部13 13適當地利用經由匯 流排 1317 所連接之 DRAM(Dynamic Random Access

Memory，動態隨機存取記憶體）1318 ’視需要而將圖像資 ' 料、或者將該圖像資料經編碼後之編碼資料等保持於該 DRAM1318。 解碼器13 15對由圖像信號處理部13 14所供給之編碼資料 〇 進行解碼，並將所獲得之圖像資料（解碼圖像資料）供給至 LCD1316。又，解碼器1315將由圖像信號處理部1314所供 給之顯示用資料供給至LCD1316。LCD1316將由解碼器 13 15所供給之解碼圖像資料之圖像與顯示用資料之圖像加 以適當合成’並顯示該合成圖像。 螢幕視控器1320於控制器1321之控制下，將包含符號、 文字、或圖形之選單畫面或圖標等之顯示用資料經由匯流 排1317而輸出至圖像信號處理部1314。

Q 控制器1321根據表示使用者使用操作部1322發出指令之 内容之信號而執行各種處理，並且經由匯流排1317來控制 • 圖像信號處理部1314、DRAM1318、外部介面Ul9、螢幕 視控器1320、及媒體驅動器Π23等。快閃ROMl324中存儲 有在控制器1321執行各種處理時所必要之程式或資料等。 例如，控制器1 3 21可代替圖像信號處理部13 14或解碼器 1315而對§己憶於DRAM1318*之圖像資料進行編碼，或者 對記憶於DRAM1318之編碼資料進行解碼。此時，控制器 144523.doc -73- 201036452 1321可猎由與圖像信號處理部i3i4或解碼器⑶$之編碼 解碼方式相同之方式來進行編碼、解碼處理，亦可藉由盘 圖縣遗處理部1314或解碼器⑶5並不對應之方式來、 編碼、解碼處理。 仃 又’例如’在由操作部1322指示開始進行圖像印刷之产 ^時’控制器1321會自DRAM1318t讀出圖像資料: =:::Γ供給至連_部介機 進而’例如，在由操作邱丨 _ 田铞作。Μ322扎不進行圖像記錄之 會自DRAM13财讀出編碼資料，將其經 淮抓排1317而供給並記憶於媒體驅動ϋ 1323上所安带之 記錄媒體1333中。 文I之 記錄媒體1333例如Α磁埋 τ^. ^ 為磁碟、磁先碟、光碟、或 =體等，可讀寫之任意的可移動式媒體。當然，記錄媒體 。％之Τ移動式媒體之種類亦為任意，可為磁帶襄置，亦 可為碟片，或者亦可為$檢丰

卡等。 為5己隐卡。當然，亦可為非接觸式IC 又亦可將媒體驅動哭1 3 2 3盘0辟 λ甘jMfc 」323與圯錄媒體⑽―體化，或 者亦可如内置型硬碟驅動器或SSD(s〇Hd Stab 態驅動器）等之由非可榷 ive，固 由非了攜性之記憶媒體所構成。 =介面⑽例如係由USB輸出輸人端子等所構成，在 仃像之印刷時’與列印機⑴4連接。又人 1319上視需要而連接有驅 11 "面 碟、光碟、或磁光適當地安裝有磁 次磁先碟專之可移動式媒體133 144523.doc -74· 201036452 §賣出之電腦程式視需要而安裝於快閃ROMl324中。 進而外部介面1319包括連接於LAN(局域網路）或網際 網路等特定之網路之網路介面。控制器1321例如可根據來 自操作部1322之指示而自DRAM1318t讀出編碼資料，並 將其自外部介面丨3丨9供給至經由網路而連接之其他裝置。 • 又，控制器1321可經由外部介面1319來獲取經網路而自其 他裝置所供給之編碼資料或圖像資料，並將其保持於 DRAM1318_，或者供給至圖像信號處理部1314。 〇 如上所述之相機1300將解碼裝置1用作解碼器1315。亦 即，與解碼裝置1之情形相同，解碼器1315使用運動向量 而自幢（N_1)獲得運動預測圖像，並且藉由利用悄N中之解 碼完畢像素值的幀内預測而自幀獲得空間預測圖像。 :後解碼器13 15對該2種圖像進行濾波處理而生成預測 圖像。因此，解碼器1315可生成更接近原圖像之新的預 圓像。 因此，相機1300例如在讀出CCD/CM〇sl312中所生成之 圖像貝料或者自DRAM1318或記錄媒體1333中讀出視訊資 料之編瑪貧料時、或者在經由網路而獲取視訊資料之編碼 資料時的解碼中，可藉由對中貞内預測圖像lp補充表示高頻 成分之圖像而生成預測圖像。 又，相機1300將編碼裝置1〇1用作編碼器1341。與編碼 裝置ιοί之情形相同，編碼器1341對使用有運動向量之運 動預測圖像與ί»貞内預測圖像進行渡波處理而生成預測圖 像。因此，編碼器1341可生成更接近原圖像之新的預测圖 144523.doc -75- 201036452 像。所以，按殘差所分配之編碼量可較少，故可提高編碼 效率。 因此’相機1300例如在進行將編碼資料記錄於 DRAM1318或記錄媒體1333時、或者在將編碼資料提供至 其他裝置時的幀内預測之預測精度之不足，可利用悄間預 測之預測精度來補償以提高編碼效率。進而，可減少幀間 預谢時必要之參照幀之數目’因此相機13〇〇可實現處理成 本之降低。 再者，於控制器132 1所進行之解碼處理中亦可適用解碼 裝置1之解碼方法。同樣地，於控制器1321所進行之編碼 處理中亦可適用編碼裝置1〇1之編碼方法。 又，相機1300所拍攝之圖像資料可為動態圖像，亦可為 靜止圖像。 ^ 解馬裝置1及編碼裝置1 〇 1亦可適用於除上述裝置 以外之裝置或系統中。 又，巨集區塊之大小為任意。本發明可適用於例如圖32 所示之所有大小之巨集區塊。例如，本發明不僅可適用於 通常之16x16像素之巨集區塊，亦可適用於2像素之擴 大的巨集區塊（擴大巨集區塊）。 圖32中於上^又自左側起依序表示分割為32x32像素、 32x16像素、16x32像素、及16xl6像素之區塊(分區)之由 3 2x32像素所構成的E集區塊。χ，於巾段自左側起依序 表示分割為16x16像素、16χ8像素、8χΐ6像素及8χ8像素 之區塊之由16x16像素所構成的區塊。進而，於下段自左 144523.doc •76- 201036452 側起依序表示分割為8x8像素、8x4像素、4χ8像素、及4χ4 像素之區塊之8x8像素的區塊。 即，32X32像素之巨集區塊可進行上段所示之32x32像 素、32><16像素、16><32像素、及16><16像素之區塊中之處 理。 上段之右側所示之丨6χ丨6像素之區塊係與H 264/Avc方 式同樣地可進行中段所示之16xl6像素、16χ8像素、8χΐ6 像素、及8x8像素之區塊中之處理。 中段之右側所示之8X8像素之區塊係與H.264/AVC方式 同樣地可進行下段所示之8χ8像素、8χ4像素、4χ8像素、 及4Μ像素之區塊中之處理。 β亥4區塊可分類為以下的3階層。即，將圖3 2之上段所 不之32x32像素、32XI6像素、及16x32像素之區塊稱作第j I5白層。將上之右側所示之16 X 16像素之區塊及中段所示 之16x16像素、16x8像素、及8x16像素之區塊稱作第2階 層。將中段之右側所示之8 X 8像素之區塊及下段所示之8 x 8 像素、8x4像素、4x8像素、及4x4像素之區塊稱作第3階 層。 關於16x16像素之區塊以下，藉由採用上述的階層結構 而可與H.264/AVC方式保持互換性，並且可將更大之區塊 定義為其超級組。 例如，解碼裝置1及編碼裝置101可於每一階層生成預測 圖像。又，例如，解碼裝置1及編碼裝置1〇1亦可對第2階 層利用較第2階層之區塊尺寸更大之階層即第1階層中所生 144523.doc •77- 201036452 成之預測圖像。 如第m層或第2階層般使用相對較大之區塊尺寸來進^ 編碼之巨集區塊中不含有較高頻率成分。相對於此，切: 如第3階層般使用相對較小之區塊尺寸來進行編碼之:集 區塊中含有較高頻率成分。 〃 傻因：，對應於區塊尺寸不同之各階層而分別生成預測圖 ^藉此可實現圖像所具“適合於局部㈣之編碼性能 的徒鬲。 【圖式簡單說明】 〇 圖1係表示單向預測之例之示圖。 圖2係表示雙向預測之例之示圖。 圖3係表示幀内預測之例之示圖。 圖4係說財發明之_圖像生成之概要之示圖。 圖5係表示本發明夕…# 方塊圖。 Λ她形怨之解碼裝置之構成例的 圖6係表示第3預測模式之概念之示圖。 〇 圖7係表示第3預測模式之概念之示圖。 圖:^表不圖5之運動預測•補償電路之構成例之方塊 圖9係表示參照幀之例之示圖。 圖1〇係表示參照幀之另-例之示圖。 示圖8之預測電路之構成例之方塊圖。 圖：表示圖8之遽波電路之構成例之方塊圖。 圖3係說明解碼裝置之解碼處理之流程圖。 I44523.doc -78- 201036452 圖14係說明於圖13之步驟S 9中進行之運動預測·補償處 理之流程圖。 圖15係說明操取處理之流程之例的流程圖。 圖16係說明濾波預測處理之流程之例的流程圖。 圖17係表不編碼裝置之構成例的方塊圖。 圖18係表示圖17之模式決定電路之構成例的方塊圖。 圖19係表示圖17之運動預測•補償電路之構成例的方塊 圖。

圖20係說明編碼裝置之編碼處理之流程圖。 圖21係說明於圖20之步驟S108中進行之模式決定處理的 流程圖。 圖22係說明於圖20之步驟SU1中進行之運動預測•補償 處理的流程圖。 圖23係表示濾波電路之另一構成例的方塊圖。 圖24係表示慮波電路之此外另一構成例的方塊圖。 圖25係表示使用3片參照幀時之例之示圖。 圖26係表示使用3片參照幀時之濾波電路之構成例之 塊圖。 圖27係表示個人電腦之構成例之方塊圖。 圖28係表示適用有本發明之電視接收器之主 方塊圖。 圖2 9係表示適用有本發明之行動電話機之主 方塊圖。 圖3〇係表示適用冑本發明之硬碟豸影機之主 要構成例的 要構成例的 要構成例的 144523.doc -79- 201036452 方塊圖。 圖3 1係表示適用有本發明之相機之主要構成例的方塊 圖。 圖32係表示巨集區塊尺寸之例之示圖。 【主要元件符號說明】 1 解碼裝置 21 運動預測•補償電路 41 預測模式決定電路 42 單向預測電路 43 雙向預測電路 44 預測電路 45 濾波電路 51 運動補償電路 52 幀内預測電路 61 差分計算電路 62 低通濾波電路 63 增益調整電路 64 南通滤·波電路 65 增益調整電路 66 加法電路 67 加法電路 144523.doc -80-

Claims (1)

1. 201036452 七、申請專利範圍： 1. 一種圖像處理裝置，其包括： 解碼機構，其對經編碼之圖像進行解碼； 、機構其將經上述解碼機構解碼後之圖像與預.測 - 圖像相加，生成解碼完畢之圖像； • #取機構’其將包含由上述生成機構所生成的解碼完 畢之圖像之幀作為參照幀，使用經編碼之上述圖像之運 動向量來進行運動補償，自上述參關巾擷取出與上述 〇 預測圖像對應之運動補償圖像； ΐ貞内預測圖像生成機構’其於生成上述預測圖像之目 前幢内進行巾貞内預測’自藉由上述生成機構所生成的解 碼凡畢之部分圖像而生成與上述預測圖像對應之幀内預 測圖像；及 預測圖像生成機構，其對於由上述擷取機構所擷取之 上述運動補償圖像及由上述幀内預測圖像生成機構所生 成之上述幀内預測圖像，利用上述運動補償圖像及上述 〇 幢内預測圖像中所含之時間方向之關聯來進行補償高頻 成为之遽波處理，藉以生成上述預測圖像。 2.如請求項1之圖像處理裝置，其中 上述預測圖像生成機構包括： 第1濾波機構，其係對由上述第〗擷取機構所擷取之 上述運動補償圖像、與由上述幀内預測圖像生成機構所 生成之上述幀内預測圖像之差分圖像實施低通濾波； 第2濾波機構，其係對經上述第丨濾波機構實施低通 144523.doc 201036452 濾波所獲得之圖像實施高通濾波；及 加法機構，其係將經上述第1濾波機構實施低通濾 波所獲得之圖像、與經上述第2濾波機構實施高通濾波 所獲得之圖像，加上由上述幀内預測圖像生成機構所生 成之上述上述幀内預測圖像，而生成上述預測圖像。 3 ·如請求項2之圖像處理裝置，其中 上述加法機構係對以上述預測圖像之時刻為基準而自 1時刻前之幀中所擷取的上述運動補償圖像，加上經上 述第1濾波機構實施低通濾波所獲得之圖像、與經上述 第2濾波機構實施高通濾波所獲得之圖像。 4.如請求項1之圖像處理裝置’其中進而包括： 早向預測機構，其使用複數個上述運動補償圖像進行 單向預測’生成上述預測圖像； 雙向預測機構，其使用複數個上述運動補償圖像進行 雙向預測，生成上述預測圖像；及 其根據經編碼之上述圖像之標頭中 所含之

   述渡波處理所生成。 一種圖像處理方法，其包括： 判定機構， 識別旗標，來 對經編碼之圖像進行解碼；

   生成解碼完畢之 144523.doc 201036452 將包含所生成的解碼完畢之圖像之幀作為參照幀，使 用經編碼之上述圖像之運動向量來進行運動補償，自上 述參照幀中擷取出與上述預測圖像對應之運動補償圖 像； 於生成上述預測圖像的目前幀内進行幀内預測，自解 碼完畢之部分圖像而生成與上述預測圖像對應之幀内預 測圖像； ' 對上述運動補償圖像及上述幀内預測圖像，利用上述 運動補償圖像及上述幀内預測圖像中所含之時間方向之 關聯進行補償高頻成分之濾、波處理，藉以生成上述預測 圖像。 6·—種圖像處理裝置，其包括： 編碼機構，其對編碼對象之圖像即原圖像進行編碼， 生成經編碼之圖像； 铋測機構’其根據基於表示上述原圖像與預測圖像之 差之殘差#號而局部地解碼所獲得之圖像與上述原圖 像’來檢測運動向量； 擷取機構，其將包含經局部地解碼所獲得之上述圖像 ^悄作為參照巾貞，使用由上述檢職構檢㈣的運動向 量來進行運動補償，自上述參照鴨中擷取出與上述預測 圖像對應之運動補償圖像； ，幀内預测圖像生成機構’其於生成上述預測圖像的目 別幢内進行幅内預測，自上述鴨之部分圖像而生成與上 述預測圖像對應之幀内預測圖像；及 144523.doc 201036452 生成機構，其對由上述第1擷取機構所擷取之上述運 動補償圖像及由上述幀内預測圖像生成機構所生成之上 述幀内預測圖像，利用上述運動補償圖像中所含之時間 方向之關聯來進行補償高頻成分之濾波處理，藉以生成 上述預測圖像。 7.如請求項6之圖像處理裝置，其中 上述生成機構包括： 第1濾波機構，其係對由上述第丨擷取機構所擷取之 上述運動補償圖像、與由上述巾負内預測圖像生成機構所 生成之上述幀内預測圖像之差分圖像實施低通濾波； 第2濾波機構，其係對經上述第丨濾波機構實施低通 濾、波所獲得之圖像實施高通濾波；及 力法機構，其係將經上述第丨濾波機構實施低通濾 波所獲得之圖像、與經上述第2濾波機構實施高通據波 所獲得之圖像，加上由上㈣内預_像生成機構所生 成之上述上述賴内預測圖像，來生成上述預測圖像。 8·如請求項7之圖像處理裝置，其中 上述加法機構係對以上述預測圖像之時刻為基準而自 1個時刻前之鴨中所擷取的上述運動補償圖像，加上經 、^第1 /慮波機構實施低通濾波所獲得之圖像、與經上 v第/慮波機構實施商通遽波所獲得之圖像。 9.如印求項6之圖像處理裝置，其中 上述編瑪機構係於經編碼 別旗沪— 上述圖像之標碩中包含識 丨旗I该識別旗標係識別要與在解碼裝置中所解碼之 144523.doc 201036452 2相加之預測圖像是經單向預測所生成、或是 預測所生成、抑或是經上述濾波處理所生成。 η ι〇· —種圖像處理方法，其包括： 對編碼對象之圖像即原圖像進行編碼生成經編 圖像； 根據基於表示上述原圖像與預測圖像之差之殘差作號 而：部地解碼所獲得之圖像與上述原圖像，來檢測運‘ 向量； ❹ Ο 將包含經局部地解碼所獲得之上述圖像之幢作為來昭 幢，使用已檢制的運動向量來進行運動補償，自上述 參照t貞"取出與上述制圖像對應之運動補償圖像； 於生成上述預測圖像的目前幀内進行幀内預測，自上 述傾之部分®像而生成與上述制圖像對應之㈣内預測 圖像；及 對所操取之上述運動補償圖像及所生成之上述幢内預 測圖像，利用上述運動補償圖像中所含之時間方向之關 聯來進行補償高頻成分之濾、波處理，藉以生成上述預測 圖像。 144523.doc