專利名稱：動(dòng)態(tài)圖像編碼方法及裝置的制作方法
技術(shù)領(lǐng)域：
本發(fā)明涉及一種參照多個(gè)編碼圖像或解碼圖像來(lái)編碼或解碼動(dòng)態(tài)圖像 信號(hào)的動(dòng)態(tài)圖像編碼方法、動(dòng)態(tài)圖像編碼裝置、動(dòng)態(tài)圖像解碼方法、動(dòng)態(tài) 圖像解碼裝置以及存儲(chǔ)由軟件來(lái)實(shí)現(xiàn)這些方法用程序的記錄媒體。
背景技術(shù)：
近年來(lái)，迎來(lái)統(tǒng)一處理聲音、圖像和其它象素值等信息的多媒體時(shí)代， 以前的信息媒體、即將報(bào)紙、雜志、電視、收音機(jī)、電話等的信息傳遞給 人的手段被采納為多媒體對(duì)象。通常，所謂多媒體是指不僅文字，還同時(shí) 關(guān)聯(lián)圖形、聲音、尤其是圖像等進(jìn)行顯示，但在將上述現(xiàn)有信息媒體作為 多媒體對(duì)象中，必需將該信息表示為數(shù)字形式。但是，若將上述各信息媒體具有的信息量估計(jì)為數(shù)字信息量，則在文 字的情況下，每l個(gè)文字的信息量為1-2字節(jié)，相反，在聲音的情況下， 必需每秒64kbits (電話品質(zhì))、另外，動(dòng)態(tài)圖像必需每秒100Mbits (現(xiàn)行 電視接收品質(zhì))以上的信息量，上述信息媒體中以數(shù)字形式來(lái)原樣處理寵 大的信息是不現(xiàn)實(shí)的。例如，已通過(guò)具有64kbps-1.5Mbps的傳送速度的服 務(wù)綜合數(shù)字通信網(wǎng)(ISDN: Integrated Services Digital Network:綜合 服務(wù)數(shù)字網(wǎng))實(shí)用化可視電話，但通過(guò)ISDN來(lái)原樣發(fā)送由攝像機(jī)拍攝的圖 像信息是不可能的。因此，必需信息壓縮技術(shù)，例如，在可視電話的情況下，使用由ITU-T (國(guó)際電氣通信聯(lián)合電氣通信標(biāo)準(zhǔn)化部門)國(guó)際標(biāo)準(zhǔn)化的H.261或H.263 標(biāo)準(zhǔn)的動(dòng)態(tài)圖像壓縮技術(shù)。另外，也可利用MPEG-1標(biāo)準(zhǔn)的信息壓縮技術(shù)將
圖像信息與聲音信息一起放入通常的音樂(lè)用CD (致密盤)。這里，所謂MPEG (Moving Picture Experts Gro叩移動(dòng)圖像專家組) 是動(dòng)態(tài)圖像信號(hào)的數(shù)字壓縮的國(guó)際標(biāo)準(zhǔn)，MPEG-1是將動(dòng)態(tài)圖像信號(hào)壓縮到 1. 5Mbps、即將電視信號(hào)的信息壓縮到約1/100的標(biāo)準(zhǔn)。另外，因?yàn)橐訫PEG-1 標(biāo)準(zhǔn)為對(duì)象的傳送速度主要限制在約1. 5Mbps，所以由應(yīng)滿足更高畫質(zhì)化要 求的標(biāo)準(zhǔn)化MPEG-2將動(dòng)態(tài)圖像信號(hào)壓縮到2-15Mbps。另外，在現(xiàn)狀下，通過(guò)MPEG-l、MPEG-2和進(jìn)行標(biāo)準(zhǔn)化的作業(yè)組(ISO/IEC JTC1/SC29/WG11)標(biāo)準(zhǔn)化壓縮率更高的MPEG-4。 MPEG-4中還引入了強(qiáng)有力 的耐錯(cuò)誤技術(shù)，不僅可以低位速率進(jìn)行高效率的編碼，而且即使發(fā)生傳送 路徑錯(cuò)誤，也可減小主觀畫質(zhì)惡化。另夕卜，ITU-T中，開(kāi)始H.26L的標(biāo)準(zhǔn)化 活動(dòng)，作為下一代圖像編碼方式。參照MPEG-1、 MPEG-2、 MPEG-4此前編碼或解碼的圖像的圖像信號(hào)(參 照?qǐng)D像)，通過(guò)使用編碼、解碼參照?qǐng)D像與被編碼、解碼圖像的差值的幀間 編碼(Inter Predictive Coded Picture (幀間預(yù)測(cè)編碼圖像)下面簡(jiǎn)稱 為Inter Picture (幀間圖像))，可實(shí)現(xiàn)大幅度的壓縮率(例如參照ISO/IEC 13818-2[INTERNATIONAL STANDARD Information technology-Generic coding of moving picture and associated audio information:Video]2000 年12月15日，第7頁(yè)，Intro.4. 1. 1)。另外，通過(guò)削減時(shí)間方向和空間方向的冗余性，可實(shí)現(xiàn)信息量壓縮。 因此，在以削減時(shí)間冗余性為目的的幀間預(yù)測(cè)編碼中，參照已編碼、解碼 的圖像(參照?qǐng)D像)形成預(yù)測(cè)圖像，對(duì)得到的預(yù)測(cè)圖像和編碼對(duì)象圖像的 差值進(jìn)行編碼。這里，所謂圖像是表示1個(gè)畫面的用語(yǔ)，在逐行圖像中表 示幀，在隔行圖像中表示幀或字段。在2001年9月時(shí)的H.26L標(biāo)準(zhǔn)中，為了進(jìn)一步提高壓縮率，不僅參照 此前編碼或解碼的圖像，而且從在被編碼、解碼圖像之前編碼、解碼的多 個(gè)圖像中選擇任意圖像，設(shè)為參照?qǐng)D像。

圖1表示現(xiàn)有動(dòng)態(tài)圖像編碼方法和動(dòng)態(tài)圖像解碼方法的概念說(shuō)明圖。 圖1是從被編碼、解碼圖像前的3個(gè)圖像中選擇任意圖像、并設(shè)為參照?qǐng)D 像的實(shí)例。圖1中，各圖像按顯示時(shí)刻的順序排列，左側(cè)圖像的顯示時(shí)刻 早。編碼順序也是左側(cè)圖像先被編碼。因此，位流順序也是圖像J,、圖像J2、圖像J:,、圖像1。因此，在被編碼、解碼圖像為圖像J.，的情況下，從 圖像J,、圖像J2、圖像J3中選擇1個(gè)，設(shè)為參照?qǐng)D像，在被編碼、解碼圖像為圖像J5的情況下，從圖像J2、圖像J3、圖像1中選擇1個(gè)，設(shè)為參照?qǐng)D像。圖2是表示現(xiàn)有動(dòng)態(tài)圖像編碼裝置構(gòu)成的框圖。動(dòng)態(tài)圖像編碼裝置4是壓縮編碼輸入的圖像信號(hào)Vin后、輸出變換為 可變長(zhǎng)編碼等位流的圖像編碼信號(hào)Str的裝置，具備動(dòng)作檢測(cè)單元40]、選 擇單元402、圖像信號(hào)減法單元403、編碼單元404、解碼單元405、加法 單元406、選擇單元407和存儲(chǔ)器408 — 410。動(dòng)作檢測(cè)單元401分別讀取存儲(chǔ)在存儲(chǔ)器408—410中作為已編碼圖像 的參照?qǐng)D像，通過(guò)與輸入圖像信號(hào)Vin相比較，確定畫面間差值大小(誤 差能量)小的參照?qǐng)D像Ref和表示畫面間差值小的象素位置的動(dòng)作信息MV。 通常，多確定誤差能量最小的參照?qǐng)D像Ref和象素位置，但最近不單純是 誤差能量最小，還利用確定動(dòng)作信息MV使誤差能量變小且壓縮率變大的方 法。將參照?qǐng)D像Ref和象素位置的信息統(tǒng)稱為動(dòng)作信息MV。選擇單元402 輸出根據(jù)作為切換指示信號(hào)的參照?qǐng)D像指示信號(hào)RefFrm從存儲(chǔ)于存儲(chǔ)器 408 — 410中的參照?qǐng)D像Ref,、參照?qǐng)D像Ref2、參照?qǐng)D像Ref:,中選擇的參照 圖像Ref 。減法單元403計(jì)算圖像信號(hào)Vin與參照?qǐng)D像Ref的差分圖像信號(hào) Dif。編碼單元404編碼差分圖像信號(hào)Dif與作為特定參照?qǐng)D像用信息的動(dòng) 作信息MV。解碼單元405解碼由編碼單元404編碼的編碼數(shù)據(jù)Coded,得 到復(fù)原差分圖像信號(hào)RecDif 。加法單元406將參照?qǐng)D像Ref與復(fù)原差分圖 像信號(hào)RecDif相加。選擇單元407在后續(xù)圖像編碼中，將輸入的解碼圖像 信號(hào)Recon參照為參照?qǐng)D像，所以作為解碼圖像信號(hào)ReCl、解碼圖像信號(hào) Rec2、解碼圖像信號(hào)Rec3輸出到存儲(chǔ)器408 — 410之一。下面，說(shuō)明上述構(gòu)成的動(dòng)態(tài)圖像編碼裝置的動(dòng)作。將圖像信號(hào)Vin輸入圖像信號(hào)減法單元403和動(dòng)作檢測(cè)單元401。動(dòng) 作檢測(cè)單元401讀取存儲(chǔ)于存儲(chǔ)器408 — 410中的作為己解碼圖像的參照?qǐng)D 像Ref,、參照?qǐng)D像Ref2、參照?qǐng)D像Ref3，通過(guò)與輸入的圖像信號(hào)Vin進(jìn)行 比較，確定畫面間差值大小最小的參照?qǐng)D像，輸出參照?qǐng)D像和作為特定參
照象素位置用信息的動(dòng)作信息MV。同時(shí)，動(dòng)作檢測(cè)單元401輸出作為切換指示信號(hào)的參照?qǐng)D像指示信號(hào) RefFrm，使選擇單元402可選擇對(duì)應(yīng)于動(dòng)作信息MV的參照?qǐng)D像并作為參照 圖像Ref輸出。因?yàn)橛捎趫?chǎng)交換等而喪失畫面間相關(guān)，所以壓縮率比僅由 幀間編碼和被編碼圖像的圖像編碼信號(hào)可復(fù)原的幀內(nèi)編碼(Intra Coding Picture:以下簡(jiǎn)稱為Intra Picture)低。此時(shí)，動(dòng)作檢測(cè)單元401輸出 由動(dòng)作信息MV表示為幀內(nèi)編碼、且總是將輸出值0的參照?qǐng)D像Ref4作為 參照?qǐng)D像Ref輸出用的參照?qǐng)D像指示信號(hào)Ref Frni。參照?qǐng)D像Ref4的值不 —定是0，在例如取0 — 255的輝度信號(hào)或RGB彩色信號(hào)的情況下，也可是 平均值128。另外，為了在防止錯(cuò)誤傳播或圖像編碼信號(hào)途中可再現(xiàn)圖像，所以必 需對(duì)每一定數(shù)量的圖像進(jìn)行可僅由被編碼圖像的圖像編碼信號(hào)復(fù)原的幀內(nèi) 編碼。因此，動(dòng)作檢測(cè)單元401可通過(guò)從外部提供的幀內(nèi)編碼指示信號(hào) Reset的指示來(lái)強(qiáng)制切換為幀內(nèi)編碼。另一方面，輸入圖像信號(hào)Vin的減法單元403計(jì)算該圖像信號(hào)Vin與 選擇單元402選擇的參照?qǐng)D像Ref之差分，將差分圖像信號(hào)Dif輸出到編 碼單元404。接著，編碼單元404編碼差分圖像信號(hào)Dif和動(dòng)作檢測(cè)單元 401輸出的動(dòng)作信息MV，輸出圖像編碼信號(hào)Str和編碼數(shù)據(jù)Coded。其中， 編碼數(shù)據(jù)Coded是復(fù)原圖像必需的數(shù)據(jù)，圖像編碼信號(hào)Str將編碼數(shù)據(jù) Coded進(jìn)一步變換為可變長(zhǎng)編碼等的位流。解碼單元405解碼編碼數(shù)據(jù)Coded,將復(fù)原差分圖像信號(hào)RecDif輸出 到加法單元406。加法單元406將復(fù)原差分圖像信號(hào)RecDif與選擇單元402 選擇的參照?qǐng)D像Ref相加，將解碼圖像信號(hào)Recon輸出到選擇單元407。選 擇單元407在后續(xù)的圖像編碼時(shí)，可將解碼圖像信號(hào)Reccm作為參照?qǐng)D像 來(lái)參照，所以作為解碼圖像信號(hào)Rec,、解碼圖像信號(hào)Rec2、解碼圖像信號(hào) Rec3輸出到存儲(chǔ)器408—410之一。在本例中，選擇單元407進(jìn)行切換，將 在最早時(shí)刻保存在存儲(chǔ)器中的圖像替換為新的解碼圖像信號(hào)Reccm。圖3是表示現(xiàn)有動(dòng)態(tài)圖像解碼裝置構(gòu)成的框圖。動(dòng)態(tài)圖像解碼裝置5是解碼上述動(dòng)態(tài)圖像編碼裝置4編碼的圖像編碼 信號(hào)Str的裝置。
解碼單元501解碼輸入的圖像編碼信號(hào)Str，輸出復(fù)原差分圖像信號(hào) RecDif和動(dòng)作信息MV。動(dòng)作復(fù)原單元502解碼動(dòng)作信息MV，輸出參照?qǐng)D像 指示信號(hào)RefFrm。選擇單元503、選擇單元505、存儲(chǔ)器506 — 508的動(dòng)作 與圖2所示動(dòng)態(tài)圖像編碼裝置4的選擇單元402、選擇單元407、和存儲(chǔ)器 408 — 410相同。加法單元504將復(fù)原差分圖像信號(hào)RecDif與參照?qǐng)D像Ref 相加后，輸出解碼圖像信號(hào)Vout (相當(dāng)于圖2中的解碼圖像信號(hào)Recon)。在所述動(dòng)態(tài)圖像編碼裝置4和動(dòng)態(tài)圖像解碼裝置5中，分別在選擇單 元402和選擇單元503的輸出側(cè)設(shè)置未圖示的動(dòng)作補(bǔ)償單元，進(jìn)行根據(jù)從 存儲(chǔ)器輸出的參照?qǐng)D像的象素值來(lái)內(nèi)插生成作為1 / 2象素位置精度等象素 值的小數(shù)象素位置精度的象素值的動(dòng)作補(bǔ)償。然而，在上述現(xiàn)有動(dòng)態(tài)圖像編碼裝置及現(xiàn)有動(dòng)態(tài)圖像解碼裝置中，未 完全區(qū)別參照?qǐng)D像是幀內(nèi)編碼的圖像(Intra Picture:幀內(nèi)圖像)還是在 幀內(nèi)編碼圖像之后進(jìn)行幀間編碼的圖像(Inter Picture:幀間圖像)。例 如，在圖1的現(xiàn)有動(dòng)態(tài)圖像編碼方法和動(dòng)態(tài)圖像解碼方法的概念說(shuō)明圖中， 圖像J2是幀內(nèi)編碼的圖像，此外的圖像J,、圖像工,、圖像J.,、圖像Js是幀 間編碼的圖像，但也參照?qǐng)D像衛(wèi)來(lái)作為圖像J4的參照?qǐng)D像。在圖像^參照 圖像J,作為參照?qǐng)D像的情況下，將在幀內(nèi)編碼圖像J2之前的圖像參照為參 照?qǐng)D像。但是，在中途再現(xiàn)圖像的情況下，即使例如從圖像編碼信號(hào)中途的幀 內(nèi)編碼圖像J2解碼圖像并進(jìn)行再現(xiàn)，在解碼圖像丄時(shí)也必需參照解碼后的 圖像J,。因此，存在不能正確解碼圖像J,以后的圖像的問(wèn)題。另外，例如在圖像編碼信號(hào)中途發(fā)生流錯(cuò)誤，并且圖像J,由于錯(cuò)誤而 不能正確解碼的情況下，雖然幀內(nèi)編碼的圖像J2可正確解碼，但解碼圖像 JJ寸必需參照?qǐng)D像J,，所以產(chǎn)生不能正確解碼圖像l以后的圖像的問(wèn)題。發(fā)明的內(nèi)容因此，鑒于上述問(wèn)題，提出本發(fā)明，其目的在于提供一種動(dòng)態(tài)圖像編 碼方法和動(dòng)態(tài)圖像解碼方法，可根據(jù)圖像編碼信號(hào)中途的幀內(nèi)編碼圖像進(jìn) 行再現(xiàn)，另外，即使在流中發(fā)生錯(cuò)誤的情況下，也可無(wú)錯(cuò)誤地再現(xiàn)幀內(nèi)編 碼圖像以后的圖像。 根據(jù)本發(fā)明的動(dòng)態(tài)圖像編碼方法，以圖像單位來(lái)編碼動(dòng)態(tài)圖像，其特 征在于包括指定步驟，將被存儲(chǔ)于存儲(chǔ)器中的多個(gè)圖像的幀內(nèi)編碼的 圖像，指定為在限制參照?qǐng)D像時(shí)作為基準(zhǔn)的圖像；和編碼步驟，編碼信號(hào)， 該信號(hào)表示在所述指定步驟指定的圖像之后將要編碼的圖像，其是僅參 照在所述指定步驟指定的圖像以后被編碼過(guò)的圖像、并在限制所述參照?qǐng)D 像時(shí)作為基準(zhǔn)的圖像。另外，根據(jù)本發(fā)明的動(dòng)態(tài)圖像編碼方法，以圖像單位來(lái)編碼動(dòng)態(tài)圖像， 其特征在于包括指定步驟，將被存儲(chǔ)于存儲(chǔ)器中的多個(gè)圖像的被幀內(nèi) 編碼的圖像，指定為在限制參照?qǐng)D像時(shí)作為基準(zhǔn)的圖像；刪除步驟，將在 所述指定步驟指定的圖像之前被編碼的圖像刪除；和編碼步驟，對(duì)信號(hào)進(jìn) 行編碼，該信號(hào)表示在所述指定步驟被指定的圖像以后被編碼的圖像， 其是僅參照所述指定步驟指定的圖像以后被編碼過(guò)的圖像、而刪除在所述 指定步驟被指定過(guò)的圖像以前被編碼過(guò)的圖像。另外，根據(jù)本發(fā)明的動(dòng)態(tài)圖像編碼方法，以圖像單位來(lái)編碼動(dòng)態(tài)圖像， 其特征在于包括特定步驟，從存儲(chǔ)器中存儲(chǔ)的多個(gè)圖像中，特定在幀 內(nèi)編碼的圖像以后被編碼的1個(gè)圖像，作為參照?qǐng)D像；編碼步驟，從所述 存儲(chǔ)器中讀取特定的參照?qǐng)D像，算出作為讀取的參照?qǐng)D像與被編碼圖像之 差分的差分圖像信號(hào)，編碼得到的差分圖像信號(hào)；和存儲(chǔ)步驟，解碼被編 碼的所述差分圖像信號(hào)，與所述參照?qǐng)D像的圖像信號(hào)相加，并將得到的圖 像存儲(chǔ)在所述存儲(chǔ)器中；所述特定步驟，計(jì)數(shù)幀內(nèi)編碼的圖像以后被編碼 的圖像數(shù)，根據(jù)計(jì)數(shù)的數(shù)，特定所述參照?qǐng)D像。另外，根據(jù)本發(fā)明的動(dòng)態(tài)圖像解碼方法，以圖像單位來(lái)解碼動(dòng)態(tài)圖像， 其特征在于包括解碼步驟，對(duì)信號(hào)進(jìn)行解碼，該信號(hào)表示在對(duì)解碼 對(duì)象圖像解碼時(shí)進(jìn)行參照的參照?qǐng)D像進(jìn)行限制時(shí)、成為基準(zhǔn)的圖像；和特 定步驟，在所述基準(zhǔn)的圖像以后將要被解碼的圖像、是僅將成為所述基準(zhǔn) 的圖像且在被幀內(nèi)解碼過(guò)的圖像以后被解碼過(guò)的圖像、特定為參照?qǐng)D像。另夕卜，根據(jù)本發(fā)明的動(dòng)態(tài)圖像解碼方法，以圖像單位來(lái)解碼動(dòng)態(tài)圖像， 其特征在于包括解碼步驟，對(duì)信號(hào)進(jìn)行解碼，該信號(hào)表示在將解碼 對(duì)象圖像解碼時(shí)進(jìn)行參照的參照?qǐng)D像進(jìn)行限制時(shí)成為基準(zhǔn)的圖像；刪除步 驟，刪除成為所述基準(zhǔn)的圖像且是在被幀內(nèi)解碼過(guò)的圖像之前被解碼過(guò)的
圖像；和特定步驟，在成為所述基準(zhǔn)圖像以后被解碼過(guò)的圖像、是僅將成 為所述基準(zhǔn)圖像且在被幀內(nèi)解碼過(guò)的圖像以后被解碼過(guò)的圖像、特定為參 照?qǐng)D像。根據(jù)本發(fā)明的動(dòng)態(tài)圖像解碼方法，以圖像單位來(lái)解碼動(dòng)態(tài)圖像，其特 征在于包括解碼步驟，解碼被輸入的圖像編碼信號(hào)；特定步驟，從存 儲(chǔ)器中存儲(chǔ)的多個(gè)圖像中，特定幀內(nèi)解碼的圖像以后被解碼的1個(gè)圖像， 作為參照?qǐng)D像；和存儲(chǔ)步驟，從所述存儲(chǔ)器中讀取特定的參照?qǐng)D像，將讀 取的參照?qǐng)D像的圖像信號(hào)與解碼的被解碼圖像的差分圖像信號(hào)相加，將得 到的圖像輸出到外部，并存儲(chǔ)在所述存儲(chǔ)器中；所述特定步驟包括判斷 步驟，根據(jù)解碼的信息來(lái)特定應(yīng)作為參照?qǐng)D像的圖像，并判斷特定的圖像 是否是幀內(nèi)解碼圖像以后被解碼的圖像；通常處理步驟，所述判斷的結(jié)果 為所述特定的圖像是幀內(nèi)解碼圖像以后被解碼的圖像時(shí)，特定所述特定的 圖像作為參照?qǐng)D像；和錯(cuò)誤處理步驟，所述判斷的結(jié)果為所述特定的圖像 不是幀內(nèi)解碼圖像以后被解碼的圖像的情況下，特定事先設(shè)定的預(yù)定圖像 作為參照?qǐng)D像。另外，根據(jù)本發(fā)明的動(dòng)態(tài)圖像編碼裝置，以圖像單位來(lái)編碼動(dòng)態(tài)圖像， 其特征在于具備特定單元，從存儲(chǔ)器中存儲(chǔ)的多個(gè)圖像中，特定在幀 內(nèi)編碼的圖像以后被編碼的1個(gè)圖像作為參照?qǐng)D像；編碼單元，從所述存 儲(chǔ)器中讀出特定的參照?qǐng)D像，算出作為讀取的參照?qǐng)D像與被編碼圖像之差 分的差分圖像信號(hào)，將得到的差分圖像信號(hào)進(jìn)行編碼；存儲(chǔ)單元，對(duì)編碼 的所述差分圖像信號(hào)解碼，與所述參照?qǐng)D像的圖像信號(hào)相加，并將得到的 圖像存儲(chǔ)在所述存儲(chǔ)器中；和計(jì)數(shù)單元，計(jì)數(shù)幀內(nèi)編碼的圖像以后被編碼 的圖像數(shù)，所述特定單元根據(jù)所述計(jì)數(shù)單元計(jì)數(shù)的數(shù)，特定所述參照?qǐng)D像。 根據(jù)本發(fā)明的動(dòng)態(tài)圖像解碼裝置，以圖像單位來(lái)解碼動(dòng)態(tài)圖像，其特 征在于具備解碼單元，將輸入的圖像編碼信號(hào)解碼；特定單元，從存 儲(chǔ)器中存儲(chǔ)的多個(gè)圖像中，特定幀內(nèi)解碼圖像以后被解碼的1個(gè)圖像，作 為參照?qǐng)D像；存儲(chǔ)單元，從所述存儲(chǔ)器中讀取特定的參照?qǐng)D像，將讀取的 參照?qǐng)D像的圖像信號(hào)與解碼的被解碼圖像的差分圖像信號(hào)相加，將得到的 圖像輸出到外部，并存儲(chǔ)在所述存儲(chǔ)器中；和計(jì)數(shù)單元，計(jì)數(shù)幀內(nèi)編碼的
圖像以后被編碼的圖像數(shù)，所述特定單元根據(jù)所述計(jì)數(shù)單元計(jì)數(shù)的數(shù)，特定所述參照?qǐng)D像。 并且，本發(fā)明實(shí)現(xiàn)為在計(jì)算機(jī)中執(zhí)行所述動(dòng)態(tài)圖像編碼方法和動(dòng)態(tài)圖像解碼方法的步驟的程序，另外，實(shí)現(xiàn)為由所述動(dòng)態(tài)圖像編碼方法編碼的流數(shù)據(jù)，可經(jīng)CD—R0M或通信網(wǎng)絡(luò)等記錄媒體或傳送媒體來(lái)流通。例如，按圖像J,、圖像J2、圖像Js、圖像J"圖像J5的順序編碼圖像，圖像J2是幀內(nèi)編碼圖像，此外的圖像J,、圖像J:,、圖像J，、圖像Js是幀間編碼的圖像。即，位流的順序?yàn)閳D像J,、圖像l、圖像J,、圖像J,、圖像Js的順序。此時(shí)，在根據(jù)本發(fā)明的動(dòng)態(tài)圖像編碼方法和動(dòng)態(tài)圖像解碼方法中，在 畫面編碼和解碼時(shí)可選擇作為參照?qǐng)D像的圖像在例如編碼圖像Js時(shí)，可參照?qǐng)D像J2、圖像J:i、圖像JN。另外，在編碼圖像l時(shí)，因?yàn)榻箙⒄赵趲瑑?nèi)編碼圖像衛(wèi)之前的圖像J,，所以可僅參照?qǐng)D像l和圖像J."附圖的簡(jiǎn)要說(shuō)明圖1是現(xiàn)有動(dòng)態(tài)圖像編碼方法和動(dòng)態(tài)圖像解碼方法概念的說(shuō)明圖。圖2是表示現(xiàn)有動(dòng)態(tài)圖像編碼裝置構(gòu)成的框圖。 圖3是表示現(xiàn)有解碼裝置構(gòu)成的框圖。圖4是表示根據(jù)本發(fā)明的動(dòng)態(tài)圖像編碼裝置一實(shí)施例構(gòu)成的框圖。圖5是表示上述實(shí)施例中動(dòng)作檢測(cè)單元的動(dòng)作的流程圖。圖6是表示上述實(shí)施例中圖像編碼時(shí)可選擇作為參照?qǐng)D像的圖像的說(shuō)明圖。圖7是表示根據(jù)本發(fā)明動(dòng)態(tài)圖像編碼裝置的其它實(shí)施例的構(gòu)成框圖。 圖8是表示根據(jù)本發(fā)明的動(dòng)態(tài)圖像解碼裝置一實(shí)施例構(gòu)成的框圖。 圖9是表示上述實(shí)施例中動(dòng)作復(fù)原單元的動(dòng)作流程圖。 圖10是說(shuō)明上述實(shí)施例中用于解碼的參照?qǐng)D像的方法l一3的選擇的說(shuō)明圖，(a)是用于解碼的參照?qǐng)D像的說(shuō)明圖，(b)是表示圖像位置關(guān)系的說(shuō)明圖。圖11是表示根據(jù)本發(fā)明的動(dòng)態(tài)圖像解碼裝置實(shí)施例2的構(gòu)成框圖。 圖12是表示上述實(shí)施例中動(dòng)作復(fù)原單元?jiǎng)幼鞯牧鞒虉D。
圖13是存儲(chǔ)由計(jì)算機(jī)系統(tǒng)來(lái)實(shí)施所述實(shí)施例1和2的動(dòng)態(tài)圖像編碼方 法和動(dòng)態(tài)圖像解碼方法的程序的記錄媒體說(shuō)明圖，(a)是表示作為記錄媒 體主體的軟盤的物理格式實(shí)例的說(shuō)明圖，(b)是表示從軟盤正面看的外觀、 截面構(gòu)造及軟盤的說(shuō)明圖，(c)是表示在軟盤FD中記錄再現(xiàn)所述程序用構(gòu) 成的說(shuō)明圖。圖14是表示實(shí)現(xiàn)內(nèi)容配送服務(wù)的內(nèi)容提供系統(tǒng)的整體構(gòu)成的框圖。圖15是表示便攜電話一例的圖。圖16是表示便攜電話內(nèi)部構(gòu)成的框圖。圖17是表示數(shù)字播放用系統(tǒng)的整體構(gòu)成的框圖。發(fā)明的具體實(shí)施方式
下面，用圖4一圖17來(lái)說(shuō)明本發(fā)明的實(shí)施例。 (實(shí)施例1)圖4是表示根據(jù)本發(fā)明的動(dòng)態(tài)圖像編碼裝置一實(shí)施例構(gòu)成的框圖。另 外，進(jìn)行與圖2所示現(xiàn)有動(dòng)態(tài)圖像編碼裝置4的各單元相同動(dòng)作的設(shè)備附 加相同標(biāo)記。動(dòng)態(tài)圖像編碼裝置1是壓縮編碼輸入的圖像信號(hào)Vin后、輸出變換為 可變長(zhǎng)編碼等位流的圖像編碼信號(hào)Str的裝置，具備動(dòng)作檢測(cè)單元101、選 擇單元402、圖像信號(hào)減法單元403、編碼單元404、解碼單元405、加法 單元406、選擇單元407、存儲(chǔ)器408—410和計(jì)數(shù)單元102。計(jì)數(shù)單元102 —旦由從外部輸入的幀內(nèi)編碼指示信號(hào)Reset指示幀內(nèi) 編碼，則開(kāi)始從幀內(nèi)編碼的圖像開(kāi)始計(jì)數(shù)圖像數(shù)，將結(jié)果作為可參照?qǐng)D像 數(shù)Num通知?jiǎng)幼鳈z測(cè)單元101 。動(dòng)作檢測(cè)單元101根據(jù)可參照?qǐng)D像數(shù)Num，將存儲(chǔ)器408—410中存儲(chǔ) 的參照?qǐng)D像Refl、參照?qǐng)D像Ref2、參照?qǐng)D像Ref3中在幀內(nèi)編碼以后編碼 和解碼的圖像作為對(duì)象，通過(guò)與各圖像信號(hào)Vin相比較，確定畫面間差值 大小(誤差能量)小的參照?qǐng)D像Ref和表示畫面間差值大小變小的象素位 置的動(dòng)作信息匿。通常，多確定誤差能量最小的參照?qǐng)D像Ref和象素位置， 但除了誤差能量最小外，也可確定動(dòng)作信息MV使誤差能量變小且壓縮率變 大。為了表示參照?qǐng)D像Ref，將參照?qǐng)D像指示信號(hào)RefFrm輸出到選擇單元 402。選擇單元402根據(jù)作為切換指示信號(hào)的參照?qǐng)D像指示信號(hào)RefFrm，從 存儲(chǔ)于存儲(chǔ)器408—410中的參照?qǐng)D像Refl、參照?qǐng)D像Ref2、參照?qǐng)D像Ref3 中選擇并作為參照?qǐng)D像Ref輸出。減法單元403計(jì)算圖像信號(hào)Vin與參照?qǐng)D像Ref的差分圖像信號(hào)Dif 。 編碼單元404編碼差分圖像信號(hào)Dif與作為特定參照?qǐng)D像用信息的動(dòng)作信 息MV，輸出圖像編碼信號(hào)Str和編碼數(shù)據(jù)Coded。這里，編碼數(shù)據(jù)Coded 是復(fù)原圖像必需的數(shù)據(jù)(編碼動(dòng)作信息MV或差分圖像信號(hào)Dif的數(shù)據(jù))， 圖像編碼信號(hào)Str還將編碼數(shù)據(jù)Coded變換為可變長(zhǎng)編碼等位流。解碼單元405解碼編碼數(shù)據(jù)Coded,得到復(fù)原差分圖像信號(hào)RecDif 。 加法單元406將參照?qǐng)D像Ref與復(fù)原差分圖像信號(hào)RecDif相加。選擇單元 407在編碼后續(xù)圖像時(shí)，將輸入的解碼圖像信號(hào)Recon參照為參照?qǐng)D像，所 以作為解碼圖像信號(hào)Recl、解碼圖像信號(hào)Rec2、解碼圖像信號(hào)Rec3輸出 到存儲(chǔ)器408—410之一。在本實(shí)施例中，由選擇單元407來(lái)進(jìn)行切替，由 新的解碼圖像信號(hào)Recon來(lái)替換最早時(shí)刻保存在存儲(chǔ)器中的解碼圖像信號(hào)。下面，說(shuō)明上述構(gòu)成的動(dòng)態(tài)圖像編碼裝置的動(dòng)作。圖5是表示動(dòng)作檢測(cè)單元101的動(dòng)作的流程圖。將圖像信號(hào)Vin輸入圖像信號(hào)減法單元403和動(dòng)作檢測(cè)單元101。動(dòng)作檢測(cè)單元101 —旦輸入圖像信號(hào)Vin，則讀取存儲(chǔ)于存儲(chǔ)器408 —410中的參照?qǐng)D像Refl (步驟S1)。接著，動(dòng)作檢測(cè)單元101判斷該參照 圖像Refl是否是幀內(nèi)編碼圖像以后的圖像。SP，根據(jù)各圖像固有的圖像序 號(hào)和從計(jì)數(shù)單元102通知的可參照?qǐng)D像數(shù)Num，使用例如式(A)來(lái)進(jìn)行判 斷(步驟S2)。這里，圖像序號(hào)是附加于編碼圖像中的識(shí)別序號(hào)，具有下述 特征。艮P，圖像信號(hào)Vin的圖像(圖片)序號(hào)僅比存儲(chǔ)器408 —410中保存后 作為參照?qǐng)D像的圖像中最近保存的圖像的圖像序號(hào)大1。參照?qǐng)D像的圖像序號(hào)^圖像信號(hào)Vin的圖像序號(hào)一可參照?qǐng)D像數(shù)Num…(A)結(jié)果，因?yàn)闈M足上式(A)的情況是參照?qǐng)D像Ref 1是幀內(nèi)編碼圖像以 后的圖像，所以動(dòng)作檢測(cè)單元101算出圖像信號(hào)Vin與參照?qǐng)D像Refl的差
值(步驟S3)。另一方面，在不滿足上式(A)的情況下，不算出差。接著，動(dòng)作檢測(cè)單元101分別對(duì)存儲(chǔ)在存儲(chǔ)器409中的參照?qǐng)D像Ref2 和存儲(chǔ)在存儲(chǔ)器410中的參照?qǐng)D像Ref3進(jìn)行與對(duì)所述參照?qǐng)D像Ref 1進(jìn)行 的處理一樣的處理(步驟S1 —步驟S3)。接著，動(dòng)作檢測(cè)單元101確定上述算出差的參照?qǐng)D像中畫而間差值大 小最小的參照?qǐng)D像(步驟S4)。另外，動(dòng)作檢測(cè)單元101輸出確定的參照?qǐng)D 像，作為特定用信息的動(dòng)作信息MV，同時(shí)，輸出作為切換指示信號(hào)的參照 圖像指示信號(hào)RefFrm，使選擇單元402選擇確定的參照單元，并作為參照 圖像Ref輸出(步驟S5)。也可在步驟S3中算出差值后，決定步驟S4中算出差的參照?qǐng)D像中畫 面間差值大小小的參照?qǐng)D像，從存儲(chǔ)器408到410重復(fù)步驟S1、步驟S2、 步驟S3、步驟S4。另一方面，輸入圖像信號(hào)Vin的減法單元403計(jì)算該圖像信號(hào)Vin與 選擇單元402選擇的參照?qǐng)D像Ref的差，將差分圖像信號(hào)Dif輸出到編碼 單元404。接著，編碼單元404編碼差分圖像信號(hào)Dif和動(dòng)作檢測(cè)單元101 輸出的動(dòng)作信息MV，輸出圖像編碼信號(hào)Str和編碼數(shù)據(jù)Coded。解碼單元405解碼編碼數(shù)據(jù)Coded,將復(fù)原差分圖像信號(hào)RecDif輸出 到加法單元406。加法單元406將復(fù)原差分圖像信號(hào)RecDif與選擇單元402 選擇的參照?qǐng)D像Ref相加，向選擇單元407輸出解碼圖像信號(hào)Recon。選擇 單元407在后續(xù)圖像編碼時(shí)可將解碼圖像信號(hào)Recon參照為參照?qǐng)D像，所 以作為解碼圖像信號(hào)Recl、解碼圖像信號(hào)Rec2、解碼圖像信號(hào)Rec3輸出 到存儲(chǔ)器408—410之一。圖6是表示圖像編碼時(shí)可選擇作為參照?qǐng)D像的圖像的說(shuō)明圖。與圖1 一樣，圖像J2是幀內(nèi)編碼圖像，此外的圖像J,、圖像J:,、圖像J"圖像Js 是幀間編碼的圖像。位流的編碼順序?yàn)閳D像Ji、圖像l、圖像J:,、圖像J,、 圖像J5的順序。如上所述，動(dòng)態(tài)圖像編碼裝置1通過(guò)動(dòng)作，在如圖6所示例如編碼圖 像L時(shí)，在進(jìn)行幀間編碼時(shí)可選擇為參照?qǐng)D像的圖像可參照?qǐng)D像J2、圖像J:,、圖像l。另外，在編碼圖像J4時(shí)，因?yàn)榻箙⒄赵趲瑑?nèi)編碼圖像J2之前的圖像l，所以可僅參照?qǐng)D像J2和圖像J3。
如上所述，因?yàn)閮H將幀內(nèi)編碼的圖像以后被編碼的圖像參照為參照?qǐng)D 像進(jìn)行編碼，所以可從圖像編碼信號(hào)途中的幀內(nèi)編碼的圖像進(jìn)行再現(xiàn)。另 外，即使在流中發(fā)生錯(cuò)誤的情況下，也可生成作為幀內(nèi)編碼圖像以后無(wú)錯(cuò)誤再現(xiàn)流的圖像編碼信號(hào)Str。另外，為了從途中再現(xiàn)DVD或硬盤中記錄的圖像信號(hào)，必需可從該途 中復(fù)原的結(jié)構(gòu)，由從途中開(kāi)始再現(xiàn)的圖像來(lái)進(jìn)行Reset指示。該Reset指 示也可是在編碼圖像時(shí)由操作者確定并進(jìn)行指示，也可在每經(jīng)過(guò)-一定圖像 周期或時(shí)間發(fā)出Reset指示。各圖像所有是幀內(nèi)編碼、還是幀間編碼各圖像等信息作為各圖像的輔 助信息。因此，也可編碼表示所述實(shí)施例1中說(shuō)明的幀內(nèi)編碼的圖像是由 幀內(nèi)編碼指示信號(hào)Reset特定的圖像(圖7)。另外，當(dāng)是表示為幀內(nèi)編碼 的圖像、且為由該幀內(nèi)編碼指示信號(hào)Reset特定的圖像的圖像時(shí)，不參照 在該特定圖像之前存儲(chǔ)在存儲(chǔ)器中的圖像。另外，雖表示在幀內(nèi)編碼的圖像為基準(zhǔn)，不參照在幀內(nèi)編碼圖像之前 存儲(chǔ)的圖像，但也可通過(guò)幀內(nèi)編碼的圖像，以幀內(nèi)編碼的圖像為基準(zhǔn)，從 存儲(chǔ)器中刪除在幀內(nèi)編碼圖像之前存儲(chǔ)的圖像。另外，幀內(nèi)編碼指示信號(hào)Reset雖表示不參照在幀內(nèi)編碼圖像之前存 儲(chǔ)的圖像，但為了從存儲(chǔ)器內(nèi)刪除在幀內(nèi)編碼圖像之前存儲(chǔ)的圖像，也可 編碼與該幀內(nèi)編碼指示信號(hào)Reset不同的控制命令。圖8是表示根據(jù)本發(fā)明的動(dòng)態(tài)圖像解碼裝置一實(shí)施例構(gòu)成的框圖。另 外，進(jìn)行與圖3所示現(xiàn)有動(dòng)態(tài)圖像解碼裝置5的各單元相同動(dòng)作的設(shè)備附 加相同標(biāo)記。動(dòng)態(tài)圖像解碼裝置2是解碼上述實(shí)施例1所示動(dòng)態(tài)圖像編碼裝置1編 碼的圖像編碼信號(hào)Str的裝置，具備解碼單元201、動(dòng)作復(fù)原單元202、選 擇單元503、加法單元504、選擇單元505、存儲(chǔ)器506 — 508和計(jì)數(shù)單元 203。解碼單元201解碼輸入的圖像編碼信號(hào)Str，輸出復(fù)原差分圖像信號(hào) RecDif、動(dòng)作信息MV和幀內(nèi)編碼指示信號(hào)Reset。計(jì)數(shù)單元203 —旦由幀 內(nèi)編碼指示信號(hào)Reset指示幀內(nèi)編碼，則開(kāi)始從幀內(nèi)編碼開(kāi)始計(jì)數(shù)圖像數(shù)， 將結(jié)果作為可參照?qǐng)D像數(shù)Num通知?jiǎng)幼鲝?fù)原單元202。動(dòng)作復(fù)原單元202解碼動(dòng)作信息MV，通過(guò)根據(jù)可參照?qǐng)D像數(shù)Num判斷 對(duì)應(yīng)于該動(dòng)作信息MV的參照?qǐng)D像是否是可參照的圖像，確定參照?qǐng)D像。
選擇單元502根據(jù)作為切換指示信號(hào)的參照?qǐng)D像指示信號(hào)RefFrm，從 存儲(chǔ)在存儲(chǔ)器506 — 508中的參照?qǐng)D像Refl、參照?qǐng)D像Ref2、參照?qǐng)D像Ref3 中選擇，并作為參照?qǐng)D像Ref輸出。加法單元504將復(fù)原差分圖像信號(hào) RecDif與參照?qǐng)D像Ref相加后，輸出解碼圖像信號(hào)Voutl (相當(dāng)于圖4中 的解碼圖像信號(hào)Recon)。
選擇單元505在后續(xù)的圖像解碼時(shí)可將輸入的解碼圖像信號(hào)Voutl參 照為參照?qǐng)D像，所以作為解碼圖像信號(hào)Recl、解碼圖像信號(hào)Rec2、解碼圖 像信號(hào)Rec3輸出到存儲(chǔ)器506 — 508之一。在本實(shí)施例中，由選擇單元505 進(jìn)行切換，以由新的解碼圖像信號(hào)Recon來(lái)替換最早時(shí)刻保存在存儲(chǔ)器屮 的圖像。
下面，說(shuō)明上述構(gòu)成的動(dòng)態(tài)圖像解碼裝置的動(dòng)作。 圖9是表示動(dòng)作復(fù)原單元202的動(dòng)作流程圖。
將圖像編碼信號(hào)Str輸入解碼單元201。解碼單元201解碼輸入的圖 像編碼信號(hào)Str，并輸出復(fù)原差分圖像信號(hào)RecDif和動(dòng)作信息MV。另外， 解碼單元201在輸入的圖像編碼信號(hào)Str是幀內(nèi)編碼的圖像的情況下，輸 出幀內(nèi)編碼指示信號(hào)Reset。
計(jì)數(shù)單元203 —旦從解碼單元201輸入幀內(nèi)編碼指示信號(hào)Rese t，則 從幀內(nèi)編碼的圖像開(kāi)始計(jì)算圖像數(shù)，并作為可參照?qǐng)D像數(shù)Num通知給動(dòng)作 復(fù)原單元202。
輸入動(dòng)作信息MV和可參照?qǐng)D像數(shù)Nuni的動(dòng)作復(fù)原單元202根據(jù)作為 特定參照?qǐng)D像用信息的動(dòng)作信息MV，特定編碼時(shí)參照的參照?qǐng)D像(步驟 Sll)。接著，動(dòng)作復(fù)原單元202判斷該參照?qǐng)D像是否是幀內(nèi)解碼圖像以后 的圖像。即，根據(jù)各圖像固有的圖像序號(hào)和從計(jì)數(shù)單元203通知的可參照 圖像數(shù)Num，用例如下式(B)來(lái)進(jìn)行判斷(步驟S12)。
參照?qǐng)D像的圖像序號(hào)^圖像編碼信號(hào)Str的圖像序號(hào)一可參照?qǐng)D像數(shù)Num…(B)結(jié)果，因?yàn)闈M足上式(B)的情況是參照?qǐng)D像是幀內(nèi)解碼圖像以后圖像， 所以動(dòng)作復(fù)原單元202選擇根據(jù)動(dòng)作信息MV特定的參照?qǐng)D像作為解碼中使
用的參照?qǐng)D像(步驟S13)。另一方面，在不滿足上式(B)的情況下，參照?qǐng)D像是在幀內(nèi)解碼圖像 之前的圖像。原來(lái)，在編碼時(shí)應(yīng)僅參照幀內(nèi)編碼圖像以后的圖像進(jìn)行編碼。 因此，根據(jù)動(dòng)作信息MV特定解碼必需的參照?qǐng)D像應(yīng)是由可參照?qǐng)D像數(shù)Nurii 得到的幀內(nèi)解碼圖像以后解碼的圖像。但是，由于傳送錯(cuò)誤，有可能參照 幀內(nèi)解碼圖像之前解碼的圖像、即不滿足上式(B)。因此，動(dòng)作復(fù)原單元 202在不滿足上式(B)的情況下，通過(guò)事先設(shè)定用于解碼的參照?qǐng)D像的以 下說(shuō)明的方法l一3之一來(lái)選擇(步驟S14)。圖10是說(shuō)明用于解碼的參照?qǐng)D像的方法l一3的選擇的說(shuō)明圖，(a) 是用于解碼的參照?qǐng)D像的說(shuō)明圖，(b)是表示圖像位置關(guān)系的說(shuō)明圖。這 里，表示解碼圖像PJ寸，圖像P2是幀內(nèi)解碼的圖像，此外的圖像P,、圖像 Pa、圖像h是畫面間解碼的圖像。圖像的顯示時(shí)刻的順序和圖像的解碼開(kāi) 始時(shí)刻(流中的位置)的順序是圖像P,、圖像h、圖像P:,、圖像巳的順序 中早的時(shí)刻。 (方法l)選擇根據(jù)動(dòng)作信息MV來(lái)特定的參照?qǐng)D像(圖像P,)，原樣作為用于解 碼的參照?qǐng)D像。此時(shí)，即使參照編碼編碼時(shí)錯(cuò)誤地進(jìn)行幀內(nèi)編碼圖像前的 圖像，只要正確解碼圖像P,，則也可正確解碼。 (方法2)選擇幀內(nèi)解碼的圖像(圖像P2)，作為用于解碼的參照?qǐng)D像。此時(shí)，因 為幀內(nèi)解碼的圖像是可參照為參照?qǐng)D像的圖像中最先解碼的圖像，所以與 可參照的圖像中畫面解碼圖像前的圖像相關(guān)最強(qiáng)，編碼時(shí)的參照?qǐng)D像為在 幀內(nèi)解碼的圖像前解碼的圖像的情況下，不損害畫質(zhì)的可能性高。 (方法3)選擇之前解碼的圖像(圖像P3)，作為用于解碼的參照?qǐng)D像。通常時(shí)間 間隔越短，圖像信號(hào)的相關(guān)越高，結(jié)果，之前解碼的圖像作為參照?qǐng)D像的 概率非常高。因此，若根據(jù)動(dòng)作信息MV特定的參照?qǐng)D像錯(cuò)誤，則在相關(guān)最強(qiáng)之前解碼的圖像是原來(lái)的參照?qǐng)D像的可能性高，不損害畫質(zhì)的可能性高。 既可使用這些方法l一方法3中的一個(gè)，也可組合多個(gè)方法來(lái)使用。 作為組合例，當(dāng)在方法1中不選擇根據(jù)動(dòng)作信息MV特定的參照?qǐng)D像(圖像
P,)原樣作為用于解碼的參照?qǐng)D像時(shí)，例如選擇方法3所示之前解碼的圖像作為用于解碼的參照?qǐng)D像的所謂默認(rèn)處理。接著，動(dòng)作復(fù)原單元202依次讀取存儲(chǔ)器506 — 508中存儲(chǔ)的參照?qǐng)D像 Refl、參照?qǐng)D像Ref2、參照?qǐng)D像Ref3，判斷是否是上述選擇的參照?qǐng)D像(圖 9，步驟S15)。 g卩，特定選擇的參照?qǐng)D像存儲(chǔ)在存儲(chǔ)器506—508的哪一個(gè) 中。另外，輸出作為切換指示信號(hào)的參照?qǐng)D像指示信號(hào)RefFrm，以便選擇 單元503能選擇特定的參照?qǐng)D像Refl、參照?qǐng)D像Ref2、參照?qǐng)D像Ref3之 一，作為參照?qǐng)D像Ref輸出(圖9，步驟S16)。加法單元504將參照?qǐng)D像Ref與解碼單元201輸出的復(fù)原差分圖像信 號(hào)RecDif相加，將解碼圖像信號(hào)Voutl (相當(dāng)于圖4中的解碼圖像信號(hào) Recon)輸出到選擇單元505。選擇單元505在后續(xù)圖像解碼時(shí)可將輸入的 解碼圖像信號(hào)Voutl參照為參照?qǐng)D像，所以作為解碼圖像信號(hào)Recl、解碼 圖像信號(hào)Rec2、解碼圖像信號(hào)Rec3輸出到存儲(chǔ)器506 — 508之一。如上所述，僅將幀內(nèi)解碼的圖像之后的圖像參照為參照?qǐng)D像，正確解 碼編碼的圖像編碼信號(hào)Str，得到解碼圖像信號(hào)Voutl，可從圖像編碼信號(hào) 的途中幀內(nèi)編碼圖像中進(jìn)行再現(xiàn)。另外，即使在流中發(fā)生錯(cuò)誤的情況下， 也可無(wú)錯(cuò)誤再現(xiàn)幀內(nèi)編碼的圖像以后的圖像。另外，在本實(shí)施例中，雖事先設(shè)定選擇動(dòng)作復(fù)原單元202用于解碼的 參照?qǐng)D像的方法1一3，但本發(fā)明不限于此。例如，在由動(dòng)作信息MV特定的 圖像與可參照?qǐng)D像數(shù)大不相同的情況下，設(shè)定方法3，在由動(dòng)作信息MV特 定的圖像存儲(chǔ)在存儲(chǔ)器內(nèi)并可參照的情況下，設(shè)定方法l，此外，也可象方 法2那樣對(duì)應(yīng)于狀況來(lái)動(dòng)態(tài)切換3個(gè)方法或其中兩個(gè)方法。另外，各圖像具有幀內(nèi)解碼或畫面間解碼各圖像等信息作為各圖像的 輔助信息，因此，也可接收包含信號(hào)的圖像編碼信號(hào)Str，該信號(hào)表示上述 實(shí)施例l中說(shuō)明的幀內(nèi)編碼圖像是由幀內(nèi)編碼指示信號(hào)Reset特定的圖像， 解碼表示是由該幀內(nèi)編碼指示信號(hào)Reset特定的圖像的信號(hào)。另外，在作 為表示是幀內(nèi)編碼圖像、且是由該幀內(nèi)編碼指示信號(hào)Reset特定的圖像的 圖像時(shí)，也可不參照在該特定圖像之前存儲(chǔ)在存儲(chǔ)器中的(解碼)圖像。另外，雖表示以幀內(nèi)解碼的圖像為基準(zhǔn)，不參照在幀內(nèi)解碼圖像之前 存儲(chǔ)的圖像，但也可通過(guò)幀內(nèi)解碼的圖像，以幀內(nèi)解碼的圖像為基準(zhǔn)，從 存儲(chǔ)器中刪除在幀內(nèi)解碼圖像之前存儲(chǔ)的圖像。另外，為了從存儲(chǔ)器內(nèi)刪除在幀內(nèi)編碼圖像之前存儲(chǔ)的圖像，也可編接收包含與該幀內(nèi)編碼指示信號(hào)Reset不同的控制命令的圖像編碼信號(hào) Reset,解碼該控制命令，判斷是否是表示由幀內(nèi)編碼指示信號(hào)Reset特定 的圖像的信號(hào)，同時(shí)是否接收該信號(hào)，進(jìn)行錯(cuò)誤控制。 (實(shí)施例2)下面，說(shuō)明本發(fā)明實(shí)施例2的動(dòng)態(tài)圖像解碼裝置。圖11是表示根據(jù)本發(fā)明的動(dòng)態(tài)圖像解碼裝置實(shí)施例2的構(gòu)成框圖。另 外，進(jìn)行與圖8所示動(dòng)態(tài)圖像解碼裝置2的各單元相同動(dòng)作的設(shè)備附加相 同標(biāo)記，省略說(shuō)明。動(dòng)態(tài)圖像解碼裝置3在圖8所示的動(dòng)態(tài)圖像解碼裝置2的構(gòu)成為還具 備選擇單元301，由于傳送錯(cuò)誤等，由動(dòng)作信息MV特定的參照?qǐng)D像為幀內(nèi)解碼圖像前解碼的圖像的情況下的動(dòng)作與實(shí)施例1不同。選擇單元301根據(jù)從動(dòng)作復(fù)原單元302通知的錯(cuò)誤通知信號(hào)Err，輸出從加法單元504輸出的解碼圖像信號(hào)Recon或從選擇單元503輸出的參照?qǐng)D像Ref之一，作為解碼圖像信號(hào)Vout2。下面，說(shuō)明上述構(gòu)成的動(dòng)態(tài)圖像解碼裝置的動(dòng)作，但對(duì)與上述實(shí)施例l一樣的部分省略說(shuō)明。圖12是表示動(dòng)作復(fù)原單元302的動(dòng)作流程圖。圖12所示步驟S21-S22的動(dòng)作與圖9所示步驟Sll-S12的動(dòng)作一樣。 接著，動(dòng)作復(fù)原單元302判斷特定的參照?qǐng)D像是否是幀內(nèi)解碼圖像以后的 圖像的結(jié)果，在不滿足上式(B)的情況下，即參照?qǐng)D像是幀內(nèi)解碼圖像以 前解碼的圖像的情況下，向選擇單元301通知錯(cuò)誤通知信號(hào)Err，作為有錯(cuò) 誤。另外，動(dòng)作復(fù)原單元302選擇此前解碼的解碼圖像，作為參照?qǐng)D像和 解碼圖像信號(hào)(步驟S23)。艮卩，在通知錯(cuò)誤通知信號(hào)Err的情況下，選擇 單元301輸出參照?qǐng)D像Ref，作為解碼圖像信號(hào)Vout2，所以將此前解碼的 解碼圖像作為參照?qǐng)D像變?yōu)閷⒋饲敖獯a的解碼圖像作為解碼圖像信號(hào)。另一方面，上述判斷的結(jié)果，在滿足上式(B)的情況下，參照?qǐng)D像是 幀內(nèi)解碼圖像以后的圖像，所以與上述實(shí)施例2 —樣，動(dòng)作復(fù)原單元302 選擇根據(jù)動(dòng)作信息MV特定的參照?qǐng)D像，作為用于解碼的參照?qǐng)D像(步驟
S24)。下面圖12所示的步驟S25-S26的動(dòng)作與圖9所示步驟S15-S16的動(dòng)作 一樣。接著，加法單元504將參照?qǐng)D像Ref與解碼單元201輸出的復(fù)原差分 圖像信號(hào)RecDif相加，輸出解碼圖像信號(hào)Recon。選擇單元301在未從動(dòng) 作復(fù)原單元302通知錯(cuò)誤通知信號(hào)Err的情況下，輸出從加法單元5(M輸 出的解碼圖像信號(hào)Recon，作為解碼圖像信號(hào)Vout2，在通知錯(cuò)誤通知信號(hào) Err的情況下，輸出從選擇單元503輸出的參照?qǐng)D像Ref，作為解碼圖像信 號(hào)Vout2。 g卩，在通知錯(cuò)誤通知信號(hào)Eir的情況下，原樣輸出此前解碼的解 碼圖像，作為解碼圖像信號(hào)Vout2。選擇單元505在后續(xù)圖像解碼時(shí)可將輸入的解碼圖像信號(hào)Vout2參照 為參照?qǐng)D像，所以作為解碼圖像信號(hào)Recl、解碼圖像信號(hào)Rec2、解碼圖像 信號(hào)Rec3輸出到存儲(chǔ)器506 — 508之一。如上所述，例如由于傳送錯(cuò)誤等發(fā)生參照幀內(nèi)解碼圖像前的圖像的情 況下，輸出作為象素相關(guān)最強(qiáng)的之前解碼圖像的參照?qǐng)D像Ref，作為解碼圖 像信號(hào)Vout2，所以可將錯(cuò)誤引起的圖像惡化的影響抑制到最小。另外，在上述各實(shí)施例中，因?yàn)榇鎯?chǔ)器的個(gè)數(shù)為3，所以可參照最大3 個(gè)圖像的編碼圖像，但不限于此，若增加存儲(chǔ)器個(gè)數(shù)，則可參照更多的編 碼圖像來(lái)進(jìn)行編碼和解碼。另外，在上述各實(shí)施例中，在所述動(dòng)態(tài)圖像編碼裝置1和動(dòng)態(tài)圖像解 碼裝置2、 3中，分別在選擇單元402和選擇單元503的輸出側(cè)設(shè)置未圖示 的動(dòng)作補(bǔ)償單元，進(jìn)行補(bǔ)償象素的圖像間動(dòng)作量的動(dòng)作補(bǔ)償。另外，在上述各實(shí)施例中，在進(jìn)行幀間編碼時(shí)，若存在幀內(nèi)編碼的圖 像，則對(duì)所有圖像進(jìn)行限制，使不參照此前編碼的圖像作為參照?qǐng)D像，但 本發(fā)明不限于此。例如，即使是幀內(nèi)編碼的圖像，也不限制不參照此前編 碼的圖像作為參照?qǐng)D像，即，也可象以前那樣設(shè)置可參照此前編碼的圖像 作為參照?qǐng)D像的多種幀內(nèi)編碼的圖像，必要時(shí)分開(kāi)使用。此時(shí)，區(qū)別兩種 幀內(nèi)編碼圖像的信息可存儲(chǔ)在例如圖像編碼信號(hào)Str內(nèi)的頭信息等中。并且，上述各實(shí)施例中的計(jì)數(shù)單元102、 103的計(jì)數(shù)不是圖像的編碼和 解碼順序(Decording order),即使是圖像的顯示順序(Display order)
也無(wú)妨。(實(shí)施例3)另外，通過(guò)將實(shí)現(xiàn)上述各實(shí)施例所示動(dòng)態(tài)圖像編碼方法或動(dòng)態(tài)圖像解 碼方法構(gòu)成的程序記錄在軟盤等記錄媒體中，可在獨(dú)立的計(jì)算機(jī)系統(tǒng)中簡(jiǎn) 單實(shí)施上述各實(shí)施例中所示處理。圖13是使用存儲(chǔ)所述實(shí)施例1和2的動(dòng)態(tài)圖像編碼方法或動(dòng)態(tài)圖像解碼方法的軟盤、由計(jì)算機(jī)系統(tǒng)來(lái)實(shí)施情況下的說(shuō)明圖。圖13 (b)表示從軟盤正面看的外觀、截面構(gòu)造及軟盤，圖13 (a)表 示作為記錄媒體主體的軟盤的物理格式實(shí)例。軟盤FD內(nèi)置于殼F內(nèi)，在該 盤的表面以同心圓從外周向內(nèi)周形成多個(gè)軌道Tr，沿角度方向?qū)⒏鬈壍婪?割成16個(gè)扇區(qū)Se。因此，在存儲(chǔ)所述程序的軟盤中，在所述軟盤FD上分 配的區(qū)域中，記錄作為所述程序的動(dòng)態(tài)圖像編碼方法或動(dòng)態(tài)圖像解碼方法。另外，圖13 (c)表示在軟盤FD中記錄再現(xiàn)所述程序用構(gòu)成。在將所 述程序記錄在軟盤FD中的情況下，從計(jì)算機(jī)系統(tǒng)Cs中經(jīng)軟盤驅(qū)動(dòng)器FDD 寫入作為所述程序的動(dòng)態(tài)圖像編碼方法或動(dòng)態(tài)圖像解碼方法。另外，在通 過(guò)軟盤內(nèi)的程序在計(jì)算機(jī)系統(tǒng)中構(gòu)筑所述動(dòng)態(tài)圖像編碼方法或動(dòng)態(tài)圖像解 碼方法的情況下，由軟盤驅(qū)動(dòng)器FDD從軟盤FD中讀取程序，傳送給計(jì)算機(jī) 系統(tǒng)。另外，在上述說(shuō)明中，使用軟盤作為記錄媒體來(lái)進(jìn)行說(shuō)明，但也可使 用光盤來(lái)同樣進(jìn)行。另外，記錄媒體不限于此，若是IC卡、R0M盒等可記 錄程序的媒體，則可同樣實(shí)施。這里，說(shuō)明上述實(shí)施例中所示的動(dòng)態(tài)圖像編碼方法或動(dòng)態(tài)圖像解碼方 法的應(yīng)用例和使用其的系統(tǒng)。圖14是表示實(shí)現(xiàn)內(nèi)容配送服務(wù)的內(nèi)容提供系統(tǒng)exl00的整體構(gòu)成的框 圖。將通信服務(wù)的提供區(qū)分割成期望大小，在各小區(qū)內(nèi)分別配置作為固定 無(wú)線站的基站exl07 — ex110。該內(nèi)容提供系統(tǒng)ex100例如經(jīng)因特網(wǎng)服務(wù)提供商exl02、電話網(wǎng)exl04 禾口基站exl07 —exl10， )|每計(jì)算機(jī)exlll、PDA(personal digital assistant) exl12、攝像機(jī)exl13、便攜電話exl14、帶照相機(jī)的便攜電話exl15等各 種設(shè)備連接于因特網(wǎng)exl01上。
但是，內(nèi)容提供系統(tǒng)exl00不限于圖14的組合，也可任意組合連接。 另外，也可不經(jīng)作為固定無(wú)線站的基站exl07 — ex110而將各設(shè)備直接連接 于電話網(wǎng)exl04。攝像機(jī)exl13是數(shù)字視頻的攝像機(jī)等可拍攝動(dòng)態(tài)圖像的設(shè)備。另外， 便攜電話是PDC(Personal Digital Communications)方式、CDMA (Code Division Multiple Access) 方式、W — CDMA (Wideband-Code Division Multiple Access)方式或GMS(Global System for Mobile Communications) 方式等便攜電話機(jī)，或PHS (Personal Handyphone System)等，無(wú)論是哪 種都無(wú)妨。另外，從攝像機(jī)exl13經(jīng)基站exl09、電話網(wǎng)exl04連接流服務(wù)器 exl03，可使用攝像機(jī)exl13來(lái)進(jìn)行基于用戶發(fā)送的編碼處理后數(shù)據(jù)的實(shí)況 配送等?？捎蓴z像機(jī)exl13來(lái)進(jìn)行拍攝數(shù)據(jù)的編碼處理，也可由進(jìn)行數(shù)據(jù) 發(fā)送處理的服務(wù)器等來(lái)進(jìn)行。另外，也可將由照相機(jī)116拍攝的動(dòng)態(tài)圖像 數(shù)據(jù)經(jīng)計(jì)算機(jī)exlll發(fā)送給流服務(wù)器exl03。照相機(jī)116是數(shù)字照相機(jī)等可 拍攝靜止圖像、動(dòng)態(tài)圖像的設(shè)備。此時(shí)，既可由照相機(jī)exl16也可由計(jì)算 機(jī)exlll來(lái)進(jìn)行動(dòng)態(tài)圖像數(shù)據(jù)的編碼。另外，在計(jì)算機(jī)exlll或照相機(jī)exl16 所有的LSIexl17中處理編碼處理。也可將圖像編碼、解碼用軟件組裝在 作為可由計(jì)算機(jī)exlll讀取的記錄媒體的任何存儲(chǔ)媒體(CD — R0M、軟盤、 硬盤等)中。并且，也可由帶照相機(jī)的便攜電話exl15來(lái)發(fā)送動(dòng)態(tài)圖像數(shù) 據(jù)。此時(shí)的動(dòng)態(tài)圖像數(shù)據(jù)是由便攜電話exl15所有的LSI進(jìn)行編碼處理的 數(shù)據(jù)。在內(nèi)容提供系統(tǒng)exl00中，用戶將用攝像機(jī)ex113、照相機(jī)exl16等 拍攝的內(nèi)容(例如拍攝音樂(lè)實(shí)況的電影等)與上述實(shí)施例一樣進(jìn)行編碼處 理后，發(fā)送到流服務(wù)器ex103，另一方面，流服務(wù)器exl03向有請(qǐng)求的客戶 機(jī)流配送上述內(nèi)容。作為客戶機(jī)，有可解碼上述編碼處理數(shù)據(jù)的計(jì)算機(jī) exlll、 PDAexl12、攝像機(jī)exl13、便攜電話exll4等。從而，內(nèi)容提供系 統(tǒng)ex100是如下系統(tǒng)客戶機(jī)接收并再現(xiàn)編碼的數(shù)據(jù)，并且客戶機(jī)通過(guò)實(shí) 時(shí)接收、解碼和再現(xiàn)，也可實(shí)現(xiàn)個(gè)人播放。在構(gòu)成該系統(tǒng)的各設(shè)備的編碼、解碼中，也可使用上述各實(shí)施例中所 示的動(dòng)態(tài)圖像編碼裝置或動(dòng)態(tài)圖像解碼裝置。 以便攜電話為例進(jìn)行說(shuō)明。圖15是表示使用上述實(shí)施例中說(shuō)明的動(dòng)態(tài)圖像編碼方法和動(dòng)態(tài)圖像 解碼方法的便攜電話exll5的圖。便攜電話exll5具有與基站exllO之 間收發(fā)信電波用的天線ex201、 CCD照相機(jī)等可拍攝電影、靜止圖像的照相 機(jī)部ex203、顯示解碼照相機(jī)部ex203拍攝的電影、天線ex201接收的電影 等的數(shù)據(jù)的液晶顯示器等顯示部ex202、由操作鍵ex204群構(gòu)成的主體部、 輸出聲音用的揚(yáng)聲器等聲音輸出部ex208、輸入聲音用的麥克風(fēng)等聲音輸入 部ex205、保存拍攝的動(dòng)態(tài)圖像或靜止圖像的數(shù)據(jù)、接收的郵件數(shù)據(jù)、動(dòng)態(tài) 圖像數(shù)據(jù)或靜止圖像的數(shù)據(jù)等編碼數(shù)據(jù)或解碼數(shù)據(jù)的存儲(chǔ)媒體ex207、可將 存儲(chǔ)媒體ex207安裝在便攜電話exl15中的開(kāi)槽部ex206。存儲(chǔ)媒體ex207 在SD卡的塑料殼內(nèi)等存放作為在可電改寫或刪除的非易失性存儲(chǔ)器的 EEPROM (Electrically Erasable and Programmable Read Only Memory) 之一的閃存元件。用圖16來(lái)說(shuō)明便攜電話exl15。便攜電話exl15經(jīng)同步總線ex313將 電源電路部ex310、操作輸入控制部ex304、圖像編碼部ex312、相機(jī)接LJ 部ex303、 LCD (Liquid Crystal Display)控制部ex302、圖像解碼部ex309、 復(fù)用分離部ex308、記錄再現(xiàn)部ex307、調(diào)制解調(diào)部ex306和聲音處理部 ex305彼此連接于統(tǒng)一控制具有顯示部ex202和操作鍵ex204的主體部各部 的主控制部ex311。電源電路部ex310 —旦由于用戶操作而打開(kāi)結(jié)束通話及電源鍵時(shí)，通 過(guò)從電池組向各部供電，將帶相機(jī)的數(shù)字便攜電話exl15啟動(dòng)到可動(dòng)作狀 態(tài)。便攜電話exl15根據(jù)由CPU、 ROM及RAM等構(gòu)成的主控制部ex311的控 制，通過(guò)聲音處理部ex305將聲音通話模式時(shí)由聲音輸入部ex205采集的 聲音信號(hào)變換為數(shù)字聲音數(shù)據(jù)，由調(diào)制解調(diào)電路部ex306進(jìn)行頻譜擴(kuò)展處 理，在由收發(fā)信電路部ex301進(jìn)行數(shù)模變換處理及變頻處理后，經(jīng)天線 ex201發(fā)送。另外，便攜電話機(jī)exl15在放大聲音通話模式時(shí)由天線ex201 接收的接收信號(hào)，實(shí)施變頻處理及模數(shù)變換處理，由調(diào)制解調(diào)部ex306進(jìn) 行頻譜逆擴(kuò)展處理，通過(guò)聲音處理部ex305變換為模擬聲音信號(hào)后，經(jīng)聲 音輸出部ex208輸出。
并且，在數(shù)據(jù)通信發(fā)送電子郵件的情況下，經(jīng)操作輸入控制部ex304 將通過(guò)主體部的操作鍵ex204的操作輸入的電子郵件的文本數(shù)據(jù)發(fā)送到主 控制部ex311。主控制部ex311由調(diào)制解調(diào)電路部ex306頻譜擴(kuò)展處理文本 數(shù)據(jù)，在由收發(fā)信電路部ex301實(shí)施數(shù)模變換處理及變頻處理后，經(jīng)天線 ex201發(fā)送到基站exl10。在數(shù)據(jù)通信模式時(shí)發(fā)送圖像數(shù)據(jù)的情況下，將由相機(jī)部ex203拍攝的 圖像數(shù)據(jù)經(jīng)相機(jī)接口部ex203提供給圖像編碼部ex312。另外，在不發(fā)送圖 像數(shù)據(jù)的情況下，也可將由相機(jī)部ex203拍攝的圖像數(shù)據(jù)經(jīng)相機(jī)接口部 ex303及LCD控制部ex302直接顯示在顯示部ex202中。圖像編碼部ex312構(gòu)成為具備本申請(qǐng)中說(shuō)明的圖像編碼裝置，通過(guò)上 述實(shí)施例所示圖像編碼裝置中所用的編碼方法壓縮編碼從相機(jī)部ex203提 供的圖像數(shù)據(jù)，變換為編碼圖像數(shù)據(jù)，并發(fā)送到復(fù)用分離部ex308。另外， 與此同時(shí)，便攜電話機(jī)exl15將拍攝機(jī)部ex203拍攝中由聲音輸入部ex205 采集的聲音作為數(shù)字聲音數(shù)據(jù)，經(jīng)聲音處理部ex305發(fā)送到復(fù)用分離部 ex308。復(fù)用分離部ex308按規(guī)定的方式復(fù)用從圖像編碼部ex312提供的編碼 圖像數(shù)據(jù)和從聲音處理部ex305提供的聲音數(shù)據(jù)，由調(diào)制解調(diào)電路部ex306 對(duì)結(jié)果得到的復(fù)用數(shù)據(jù)進(jìn)行頻譜擴(kuò)展處理，在由收發(fā)信電路部ex301實(shí)施 數(shù)模變換處理及變頻處理后，經(jīng)天線ex201發(fā)送。在接收在數(shù)據(jù)通信模式時(shí)鏈接到主頁(yè)等上的動(dòng)態(tài)圖像文件數(shù)據(jù)的情況 下，由調(diào)制解調(diào)電路部ex306頻譜逆擴(kuò)展處理經(jīng)天線ex201從基站exl10 接收的接收信號(hào)，將結(jié)果得到的復(fù)用數(shù)據(jù)發(fā)送到復(fù)用分離部ex30S。另外，在解碼經(jīng)天線ex201接收的復(fù)用數(shù)據(jù)中，復(fù)用分離部ex308通過(guò)分離復(fù)用數(shù)據(jù)，分為圖像數(shù)據(jù)的編碼位流和聲音數(shù)據(jù)的編碼位流，經(jīng)同 步總線ex313將該編碼圖像數(shù)據(jù)提供給圖像解碼部ex309，同時(shí)，將該聲音 數(shù)據(jù)提供給聲音處理部ex305。下面，圖像解碼部ex309構(gòu)成為具備本申請(qǐng)中說(shuō)明的圖像解碼裝置， 通過(guò)由對(duì)應(yīng)于上述實(shí)施例中所示編碼方法的解碼方法解碼圖像數(shù)據(jù)的編碼 位流，生成再現(xiàn)動(dòng)態(tài)圖像數(shù)據(jù)，經(jīng)LCD控制部ex302提供給顯示部ex202， 從而，顯示包含于例如鏈接于主頁(yè)上的動(dòng)態(tài)圖像文件中的動(dòng)態(tài)圖像數(shù)據(jù)。
與此同時(shí)，聲音處理部ex305將聲音數(shù)據(jù)變換為模擬聲音信號(hào)后，提供給 聲音輸出部ex208,從而，再現(xiàn)包含于例如鏈接于主頁(yè)上的動(dòng)態(tài)圖像文件中 的聲音數(shù)據(jù)。限于上述系統(tǒng)實(shí)例，最近的話題是通過(guò)衛(wèi)星、地面波來(lái)進(jìn)行數(shù)字播放， 圖17錯(cuò)誤！未發(fā)現(xiàn)參照源。也可在所示數(shù)字播放用系統(tǒng)中組裝上述實(shí)施例 的至少圖像編碼裝置或圖像解碼裝置之一。具體而言，由播放站ex409將 電影登記處的編碼位流經(jīng)電波傳送到通信或播放衛(wèi)星ex410。接收位流的描 放衛(wèi)生ex410發(fā)送播放用電波，具有衛(wèi)星播放接收設(shè)備的家庭天線ex406 接收該電波，通過(guò)電視(接收機(jī))ex401或機(jī)頂盒(STB) ex407等裝置解 碼編碼位流后進(jìn)行再現(xiàn)。另外，也可在讀取記錄在作為記錄媒體的CD或DVD 等存儲(chǔ)媒體ex402中的編碼位流、并解碼的再現(xiàn)裝置403中安裝上述實(shí)施 例所示的圖像解碼裝置。此時(shí)，再現(xiàn)的電影信號(hào)顯示于監(jiān)視器ex404上。 另外，還考慮構(gòu)成為在有線電視用電纜ex405或衛(wèi)星/地面波播放天線 ex406上連接的機(jī)頂盒ex407內(nèi)安裝圖像解碼裝置，由電視的監(jiān)視器ex408 來(lái)進(jìn)行再現(xiàn)。此時(shí)，也可不在電視內(nèi)組裝機(jī)頂盒，而組裝圖像解碼裝置。 另外，也可是有天線ex411的車ex412從衛(wèi)星ex410或基站exl07等接收 信號(hào)，在車ex412所有的車導(dǎo)航裝置ex413等顯示裝置中再現(xiàn)動(dòng)態(tài)圖像。另外，也可由上述實(shí)施例所示圖像編碼裝置編碼圖像信號(hào)，并記錄在 記錄媒體中。作為具體例，有將圖像信號(hào)記錄在DVD盤ex421中的DVD記 錄器，或記錄在硬盤中的盤記錄器等記錄器ex420。另外，也可記錄在SD 卡ex422中。若記錄器ex420具備上述實(shí)施例所示的圖像解碼裝置，則可 再現(xiàn)記錄在DVD盤ex421或SD卡ex422中的圖像信號(hào)，并由監(jiān)視器ex408 進(jìn)行顯示?？紤]車導(dǎo)航裝置ex413的構(gòu)成是例如從圖16所示構(gòu)成中去除相機(jī)部 ex203和相機(jī)接口部ex303、圖像編碼部ex312的構(gòu)成，同樣也可考慮計(jì)算 機(jī)exlll或電視(接收器)ex401等。另外，上述便攜電話exll4等的終端除具有編碼器、解碼器兩者的收 發(fā)信型終端外，還考慮僅有編碼器的發(fā)送終端、僅有解碼器的接收終端等3 種安裝形式。因此，可將上述實(shí)施例所示動(dòng)態(tài)圖像編碼方法或動(dòng)態(tài)圖像解碼方法用
于上述之一的設(shè)備、系統(tǒng)中，從而，可得到上述實(shí)施例中說(shuō)明的效果。另外，上述實(shí)施例中所示的動(dòng)態(tài)圖像編碼方法或動(dòng)態(tài)圖像解碼方法在例如中途再現(xiàn)記錄在DVD、 SD卡、存儲(chǔ)器等記錄媒體中的流數(shù)據(jù)的情況下 也有效。從上述說(shuō)明可知，根據(jù)本發(fā)明的動(dòng)態(tài)圖像編碼方法，以圖像單位來(lái)編碼動(dòng)態(tài)圖像，其特征在于包括特定步驟，從存儲(chǔ)器中存儲(chǔ)的多個(gè)圖像 中，特定在幀內(nèi)編碼的圖像以后被編碼的1個(gè)圖像，作為參照?qǐng)D像；編碼步驟，從所述存儲(chǔ)器中讀取特定的參照?qǐng)D像，算出作為讀取的參照?qǐng)D像與被編碼圖像之差分的差分圖像信號(hào)，編碼得到的差分圖像信號(hào)；和存儲(chǔ)步 驟，解碼編碼的所述差分圖像信號(hào)，與所述參照?qǐng)D像的圖像信號(hào)相加，并 將得到的圖像存儲(chǔ)在所述存儲(chǔ)器中。因?yàn)椴贿M(jìn)行將幀內(nèi)編碼圖像之前的圖像參照為參照?qǐng)D像的編碼，所以 可從圖像編碼信號(hào)的中途幀內(nèi)編碼圖像進(jìn)行再現(xiàn)。另外，即使在流中發(fā)生 錯(cuò)誤的情況下，也可生成作為可無(wú)錯(cuò)誤再現(xiàn)幀內(nèi)編碼圖像以后圖像的流的 圖像編碼信號(hào)。從而，存儲(chǔ)媒體從重要的中途再現(xiàn)或無(wú)線、有線傳送時(shí)重 要的傳送時(shí)的錯(cuò)誤耐性方面的優(yōu)點(diǎn)擴(kuò)大，實(shí)際應(yīng)用好。另外，根據(jù)本發(fā)明的動(dòng)態(tài)圖像解碼方法，以圖像單位來(lái)解碼動(dòng)態(tài)圖像， 其特征在于包括解碼步驟，解碼輸入的圖像編碼信號(hào)；特定步驟，從 存儲(chǔ)器中存儲(chǔ)的多個(gè)圖像中，特定幀內(nèi)解碼圖像以后解碼的1個(gè)圖像，作 為參照?qǐng)D像；和存儲(chǔ)步驟，從所述存儲(chǔ)器中讀取特定的參照?qǐng)D像，將讀取 的參照?qǐng)D像的圖像信號(hào)與解碼的被解碼圖像的差分圖像信號(hào)相加，將得到 的圖像輸出到外部，同時(shí)，存儲(chǔ)在所述存儲(chǔ)器中。由此，可僅將幀內(nèi)解碼圖像以后的圖像參照為參照?qǐng)D像，正確解碼編 碼的圖像編碼信號(hào)，得到解碼圖像信號(hào)，并可從圖像編碼信號(hào)途中的幀內(nèi) 編碼圖像進(jìn)行再現(xiàn)。另外，即使在流中產(chǎn)生錯(cuò)誤的情況下，也可無(wú)錯(cuò)誤再 現(xiàn)幀內(nèi)編碼的圖像以后的圖像。產(chǎn)業(yè)上的可利用性如上所述，根據(jù)本發(fā)明的動(dòng)態(tài)圖像編碼方法和動(dòng)態(tài)圖像解碼方法在途 中再現(xiàn)記錄在便攜電話、DVD裝置、個(gè)人計(jì)算機(jī)等使用的例如DVD、 SD卡、 存儲(chǔ)器等存儲(chǔ)媒體中的流數(shù)據(jù)的情況等中有用。
權(quán)利要求
1、一種編碼方法，對(duì)動(dòng)態(tài)圖像進(jìn)行編碼，其特征在于所述編碼方法包括幀內(nèi)編碼方法和幀間編碼方法，在對(duì)通過(guò)所述幀間編碼方法將要被編碼的幀間編碼圖像進(jìn)行編碼時(shí)，可以將是以顯示順序位于所述幀間編碼圖像之前的圖像、且是以顯示順序位于通過(guò)所述幀內(nèi)編碼方法將要被編碼的圖像之前的圖像選擇為參照?qǐng)D像，所述編碼方法，包括指定步驟，將所述幀內(nèi)編碼圖像，指定為在限制參照?qǐng)D像時(shí)成為基準(zhǔn)的基準(zhǔn)圖像；以及編碼步驟，在所述指定步驟中所述幀內(nèi)編碼圖像被指定為基準(zhǔn)圖像的情況下，針對(duì)在所述基準(zhǔn)圖像以后將要被編碼的幀間編碼圖像，只將在所述指定步驟中被指定了的所述基準(zhǔn)圖像以后被編碼了的圖像選擇為參照?qǐng)D像，禁止在參照在所述基準(zhǔn)圖像之前被編碼了的圖像的狀況下，對(duì)示出所述幀內(nèi)編碼圖像被指定為在限制參照?qǐng)D像時(shí)成為基準(zhǔn)的基準(zhǔn)圖像的信息進(jìn)行編碼，在所述指定步驟中所述幀內(nèi)編碼圖像未被指定為所述基準(zhǔn)圖像的情況下，針對(duì)在未被指定為所述基準(zhǔn)圖像以后的幀內(nèi)編碼圖像以后將要被編碼的幀間編碼圖像，不禁止將以顯示順序位于所述未被指定的幀內(nèi)編碼圖像之前的圖像選擇為參照?qǐng)D像，并且對(duì)示出所述幀內(nèi)編碼圖像未被指定為所述基準(zhǔn)圖像的信息進(jìn)行編碼。
2、 一種編碼裝置，對(duì)動(dòng)態(tài)圖像進(jìn)行編碼，其特征在于 所述編碼裝置包括幀內(nèi)編碼單元和幀間編碼單元，在通過(guò)所述幀間編碼單元將要被編碼的幀間編碼圖像的編碼吋，可以 將是以顯示順序位于所述幀間編碼圖像之前的圖像、且是以顯示順序位于 通過(guò)所述幀內(nèi)編碼方法將要被編碼的圖像之前的圖像選擇為參照?qǐng)D像，所述編碼裝置，包括指定單元，將所述幀內(nèi)編碼圖像，指定為在限制參照?qǐng)D像時(shí)成為基準(zhǔn)的基準(zhǔn)圖像；以及編碼單元，在所述指定單元中所述幀內(nèi)編碼圖像被指定為基準(zhǔn)圖像的 情況下，針對(duì)在所述基準(zhǔn)圖像以后將要被編碼的幀間編碼圖像，只將在所 述指定單元中被指定了的所述基準(zhǔn)圖像以后被編碼了的圖像選擇為參照?qǐng)D 像，禁止在參照在所述基準(zhǔn)圖像之前被編碼了的圖像的狀況下，對(duì)示出所 述幀內(nèi)編碼圖像被指定為在限制參照?qǐng)D像時(shí)成為基準(zhǔn)的基準(zhǔn)圖像的信息進(jìn) 行編碼，在所述指定單元中所述幀內(nèi)編碼圖像未被指定為所述基準(zhǔn)圖像的情況 下，針對(duì)在未被指定為所述基準(zhǔn)圖像以后的幀內(nèi)編碼圖像以后將要被編碼 的幀間編碼圖像，不禁止將以顯示順序位于所述未被指定的幀內(nèi)編碼圖像 之前的圖像選擇為參照?qǐng)D像，并且對(duì)示出所述幀內(nèi)編碼圖像未被指定為所 述基準(zhǔn)圖像的信息進(jìn)行編碼。
全文摘要
動(dòng)態(tài)圖像編碼方法及動(dòng)態(tài)圖像解碼方法，動(dòng)態(tài)圖像編碼裝置(1)具備計(jì)數(shù)單元(102)，進(jìn)行從幀內(nèi)編碼圖像開(kāi)始的圖像數(shù)的計(jì)數(shù)；和檢測(cè)單元(101)，根據(jù)作為計(jì)數(shù)單元(102)的計(jì)數(shù)結(jié)果的可參照?qǐng)D像數(shù)Num，僅將從存儲(chǔ)在存儲(chǔ)器(408-410)中的參照?qǐng)D像(Ref1)、參照?qǐng)D像(Ref2)、參照?qǐng)D像(Ref3)中幀內(nèi)編碼以后的參照?qǐng)D像作為對(duì)象，通過(guò)分別與圖像信號(hào)Vin相比較，確定像素間差值大小最小的參照?qǐng)D像。
文檔編號(hào)H04N7/32GK101399985SQ20081016923
公開(kāi)日2009年4月1日 申請(qǐng)日期2002年10月2日 優(yōu)先權(quán)日2001年10月17日
發(fā)明者羽飼誠(chéng), 近藤敏志, 野真也 申請(qǐng)人:松下電器產(chǎn)業(yè)株式會(huì)社