用于預(yù)測視點(diǎn)間運(yùn)動(dòng)的方法以及用于確定3維視頻中的視點(diǎn)間合并候選的方法
【技術(shù)領(lǐng)域】
[0001]本發(fā)明涉及用于編碼三維(3D)圖像的方法和設(shè)備，并且更具體地涉及用于預(yù)測視點(diǎn)間運(yùn)動(dòng)的方法以及用于確定3D視頻中的視點(diǎn)間合并候選的方法。
【背景技術(shù)】
[0002]通常，在圖像壓縮方法中，為了提高壓縮效率，會使用去除圖片的冗余的幀間預(yù)測技術(shù)和幀內(nèi)預(yù)測技術(shù)。
[0003]通過使用幀間預(yù)測來編碼圖像的方法是通過去除圖片之間的時(shí)間冗余來壓縮圖像的方法，并且其典型地包括運(yùn)動(dòng)補(bǔ)償預(yù)測編碼方法。
[0004]在運(yùn)動(dòng)補(bǔ)償預(yù)測編碼中，在位于當(dāng)前編碼圖片前面和/或后面的至少一個(gè)參考圖片中搜索類似于當(dāng)前編碼塊的區(qū)域，以生成運(yùn)動(dòng)矢量(MV)，以及通過使用所生成的運(yùn)動(dòng)矢量而執(zhí)行運(yùn)動(dòng)補(bǔ)償來獲得預(yù)測塊，并且對當(dāng)前預(yù)測單元的殘差進(jìn)行離散余弦變換(DCT)、量化、熵編碼以及傳送。
[0005]在運(yùn)動(dòng)補(bǔ)償視點(diǎn)間預(yù)測的情況下，將一個(gè)圖片分為具有預(yù)定大小的多個(gè)塊，以生成運(yùn)動(dòng)矢量(MV)，并且通過使用所生成的運(yùn)動(dòng)矢量來執(zhí)行運(yùn)動(dòng)補(bǔ)償。將關(guān)于通過執(zhí)行運(yùn)動(dòng)補(bǔ)償而獲得的每個(gè)預(yù)測塊的各個(gè)運(yùn)動(dòng)參數(shù)傳送至解碼器。
[0006]在3D圖像的情況下，每個(gè)像素包含歸因于該圖像的特征的深度信息和像素信息，并且編碼器可以計(jì)算深度信息以將多視點(diǎn)視頻信息和深度信息傳送至解碼器。
[0007]此外，在多視點(diǎn)圖像的情況下，有必要高效地減少由許多相機(jī)拍攝的多個(gè)視點(diǎn)圖像之間的視點(diǎn)間冗余。

【發(fā)明內(nèi)容】

[0008]同樣地，在3D多視點(diǎn)圖像的視點(diǎn)間運(yùn)動(dòng)預(yù)測的情況下，在對當(dāng)前視點(diǎn)圖片進(jìn)行運(yùn)動(dòng)矢量預(yù)測期間，需要一種通過使用預(yù)先編碼的視點(diǎn)間圖片的運(yùn)動(dòng)參數(shù)來高效地計(jì)算關(guān)于當(dāng)前視點(diǎn)圖片的預(yù)測運(yùn)動(dòng)矢量的方法。
[0009]本發(fā)明致力于提供用于預(yù)測3D多視點(diǎn)視頻中的視點(diǎn)間運(yùn)動(dòng)的方法，以用于降低在3D多視點(diǎn)視頻的視點(diǎn)間運(yùn)動(dòng)預(yù)測期間的復(fù)雜度。
[0010]此外，本發(fā)明致力于提供用于在3D多視點(diǎn)視頻的視點(diǎn)間運(yùn)動(dòng)預(yù)測期間確定視點(diǎn)間合并候選的方法，在3D多視點(diǎn)視頻的視點(diǎn)間運(yùn)動(dòng)預(yù)測期間，在計(jì)算當(dāng)前視點(diǎn)圖片的視點(diǎn)間合并候選的情況下，該方法具有降低復(fù)雜度的優(yōu)點(diǎn)。
[0011]本發(fā)明的示例性實(shí)施方式提供了用于預(yù)測3D多視點(diǎn)視頻中的視點(diǎn)間運(yùn)動(dòng)的方法，在該方法中，在執(zhí)行3D多視點(diǎn)視頻的視點(diǎn)間運(yùn)動(dòng)預(yù)測的情況下，通過已預(yù)先編碼的多個(gè)視點(diǎn)間圖片中的一個(gè)視點(diǎn)間圖片的運(yùn)動(dòng)參數(shù)來計(jì)算關(guān)于當(dāng)前視點(diǎn)圖片的預(yù)測運(yùn)動(dòng)矢量，以計(jì)算針對當(dāng)前視點(diǎn)圖片的預(yù)測運(yùn)動(dòng)矢量。
[0012]一個(gè)視點(diǎn)間圖片可以是當(dāng)前視點(diǎn)之前的視點(diǎn)圖片中的任何一個(gè)視點(diǎn)圖片。
[0013]一個(gè)視點(diǎn)間圖片可以是正好在當(dāng)前視點(diǎn)圖片之前的視點(diǎn)圖片。
[0014]正好在當(dāng)前視點(diǎn)圖片之前的視點(diǎn)圖片可以是在時(shí)間上早于當(dāng)前視點(diǎn)進(jìn)行編碼并且被包括在參考圖片列表ListO中的圖片。
[0015]可以通過使用早于當(dāng)前視點(diǎn)進(jìn)行編碼的所有視點(diǎn)間圖片中的正好在當(dāng)前視點(diǎn)之前的視點(diǎn)圖片的相應(yīng)塊的運(yùn)動(dòng)參數(shù)來計(jì)算關(guān)于當(dāng)前視點(diǎn)圖片的預(yù)測運(yùn)動(dòng)矢量。
[0016]可以通過使用預(yù)先編碼的多個(gè)視點(diǎn)間圖片中的一個(gè)視點(diǎn)間圖片的運(yùn)動(dòng)參數(shù)以及當(dāng)前視點(diǎn)圖片的當(dāng)前塊的相鄰塊的運(yùn)動(dòng)參數(shù)來計(jì)算關(guān)于當(dāng)前視點(diǎn)圖片的預(yù)測運(yùn)動(dòng)矢量。
[0017]可以通過使用編碼的多個(gè)視點(diǎn)間圖片中的一個(gè)視點(diǎn)間圖片的運(yùn)動(dòng)參數(shù)以及當(dāng)前視點(diǎn)圖片的當(dāng)前塊的至少一個(gè)相鄰塊的運(yùn)動(dòng)參數(shù)來計(jì)算關(guān)于當(dāng)前視點(diǎn)圖片的預(yù)測運(yùn)動(dòng)矢量。
[0018]本發(fā)明的另一示例性實(shí)施方式提供了用于確定3D多視點(diǎn)視頻中的視點(diǎn)間合并候選的方法，在該方法中，在3D多視點(diǎn)視頻的視點(diǎn)間運(yùn)動(dòng)預(yù)測期間，在計(jì)算當(dāng)前視點(diǎn)圖片的視點(diǎn)間合并候選情況下，與在時(shí)間方向上的相應(yīng)塊的運(yùn)動(dòng)參數(shù)相同的運(yùn)動(dòng)參數(shù)被用作視點(diǎn)間合并候選。
[0019]在執(zhí)行3D多視點(diǎn)視頻的視點(diǎn)間運(yùn)動(dòng)預(yù)測的情況下，可以通過已預(yù)先編碼的多個(gè)視點(diǎn)間圖片中的至少一個(gè)視點(diǎn)間圖片的運(yùn)動(dòng)參數(shù)來計(jì)算關(guān)于當(dāng)前視點(diǎn)圖片的預(yù)測運(yùn)動(dòng)矢量，以計(jì)算針對當(dāng)前視點(diǎn)圖片的預(yù)測運(yùn)動(dòng)矢量。
[0020]一個(gè)視點(diǎn)間圖片可以是當(dāng)前視點(diǎn)之前的視點(diǎn)圖片中的任何一個(gè)視點(diǎn)圖片。
[0021]一個(gè)視點(diǎn)間圖片可以是正好在當(dāng)前視點(diǎn)圖片之前的視點(diǎn)圖片。
[0022]正好在當(dāng)前視點(diǎn)圖片之前的視點(diǎn)圖片可以是在時(shí)間上早于當(dāng)前視點(diǎn)進(jìn)行編碼并且被包括在參考圖片列表ListO中的圖片。
[0023]在3D多視點(diǎn)視頻的視點(diǎn)間運(yùn)動(dòng)預(yù)測期間，在計(jì)算當(dāng)前視點(diǎn)圖片的視點(diǎn)間合并候選的情況下，與在時(shí)間方向上的相應(yīng)塊的運(yùn)動(dòng)參數(shù)相同的運(yùn)動(dòng)參數(shù)以及當(dāng)前視點(diǎn)的當(dāng)前塊的至少一個(gè)相鄰塊的運(yùn)動(dòng)參數(shù)可以被用作當(dāng)前視點(diǎn)圖片的當(dāng)前塊的視點(diǎn)間合并候選。
[0024]在3D多視點(diǎn)視頻的視點(diǎn)間運(yùn)動(dòng)預(yù)測的情況下，通過已預(yù)先編碼的多個(gè)視點(diǎn)間圖片中的一個(gè)視點(diǎn)間圖片的運(yùn)動(dòng)參數(shù)來計(jì)算關(guān)于當(dāng)前視點(diǎn)圖片的預(yù)測運(yùn)動(dòng)矢量，以計(jì)算關(guān)于當(dāng)前視點(diǎn)圖片的預(yù)測運(yùn)動(dòng)矢量。因此，通過簡化視點(diǎn)間運(yùn)動(dòng)預(yù)測能夠降低復(fù)雜度。
[0025]此外，在3D多視點(diǎn)視頻的視點(diǎn)間運(yùn)動(dòng)預(yù)測的情況下，通過已預(yù)先編碼的多個(gè)視點(diǎn)間圖片中的一個(gè)視點(diǎn)間圖片的運(yùn)動(dòng)參數(shù)以及當(dāng)前塊的相鄰塊的運(yùn)動(dòng)參數(shù)來計(jì)算關(guān)于當(dāng)前視點(diǎn)圖片的預(yù)測運(yùn)動(dòng)矢量，以計(jì)算關(guān)于當(dāng)前視點(diǎn)圖片的預(yù)測運(yùn)動(dòng)矢量。因此，與通過已預(yù)先編碼的多個(gè)視點(diǎn)間圖片中的一個(gè)視點(diǎn)間圖片的運(yùn)動(dòng)參數(shù)來計(jì)算關(guān)于當(dāng)前視點(diǎn)圖片的預(yù)測運(yùn)動(dòng)矢量的情況相比，能夠提高視點(diǎn)間運(yùn)動(dòng)預(yù)測的準(zhǔn)確度。
[0026]此外，在3D多視點(diǎn)視頻的視點(diǎn)間運(yùn)動(dòng)預(yù)測期間，通過將與在時(shí)間方向上的相應(yīng)塊的運(yùn)動(dòng)參數(shù)(預(yù)測方向、參考圖片以及運(yùn)動(dòng)矢量)相同的運(yùn)動(dòng)參數(shù)用作視點(diǎn)間合并候選來計(jì)算當(dāng)前視點(diǎn)圖片的視點(diǎn)間合并候選。因此，通過簡化視點(diǎn)間運(yùn)動(dòng)預(yù)測能夠降低復(fù)雜度。
[0027]此外，在3D多視點(diǎn)視頻的視點(diǎn)間運(yùn)動(dòng)預(yù)測期間，通過使用與在時(shí)間方向上的相應(yīng)塊的運(yùn)動(dòng)參數(shù)(預(yù)測方向、參考圖片以及運(yùn)動(dòng)矢量)相同的運(yùn)動(dòng)參數(shù)以及當(dāng)前視點(diǎn)的當(dāng)前塊的相鄰塊的運(yùn)動(dòng)參數(shù)來計(jì)算當(dāng)前視點(diǎn)圖片的當(dāng)前塊的視點(diǎn)間合并候選，以計(jì)算當(dāng)前視點(diǎn)圖片的視點(diǎn)間合并候選。因此，相比于將與在時(shí)間方向上的相應(yīng)塊的運(yùn)動(dòng)參數(shù)(預(yù)測方向、參考圖片以及運(yùn)動(dòng)矢量)相同的運(yùn)動(dòng)參數(shù)用作視點(diǎn)間合并候選的情況，能夠提高視點(diǎn)間運(yùn)動(dòng)預(yù)測的準(zhǔn)確度。
【附圖說明】
[0028]圖1是用于描述在3D多視點(diǎn)視頻的視點(diǎn)間運(yùn)動(dòng)預(yù)測的情況下，通過使用多個(gè)視點(diǎn)間圖片來計(jì)算關(guān)于當(dāng)前視點(diǎn)圖片的預(yù)測運(yùn)動(dòng)矢量的過程的示意圖。
[0029]圖2A與圖2B是示出當(dāng)前塊的相鄰塊的示意圖。
[0030]圖3是用于描述在3D多視點(diǎn)視頻的視點(diǎn)間運(yùn)動(dòng)預(yù)測的情況下，通過使用預(yù)先編碼的一個(gè)視點(diǎn)間圖片來計(jì)算關(guān)于當(dāng)前視點(diǎn)圖片的預(yù)測運(yùn)動(dòng)矢量的過程的示意圖。
【具體實(shí)施方式】
[0031]本發(fā)明可以具有各種修改和各種示例性實(shí)施方式，并且將在附圖中示出并詳細(xì)描述具體的示例性實(shí)施方式。
[0032]然而，這并不將本發(fā)明局限于具體的示例性實(shí)施方式，并且應(yīng)當(dāng)理解的是，本發(fā)明涵蓋在本發(fā)明的思想和技術(shù)范圍內(nèi)的所有的修改、等同物以及替代物。
[0033]諸如第一或第二的術(shù)語可以被用以描述各種部件，但所述各種部件不被上述術(shù)語所限制。上述術(shù)語僅用以區(qū)分一個(gè)部件與另一部件。例如，在不超出本發(fā)明的范圍的情況下，第一部件可以被稱為第二部件，并且類似地，第二部件可以被稱為第一部件。諸如和/或的術(shù)語包括多個(gè)相關(guān)項(xiàng)的組合或者多個(gè)相關(guān)項(xiàng)中的任何項(xiàng)。
[0034]應(yīng)當(dāng)理解的是，當(dāng)描述將元件“耦接”或“連接”到另一元件時(shí)，可以將該元件“直接耦接”或“直接連接”到該另一元件，或者通過第三元件將其“耦接”或“連接”到另一元件。與此相反，應(yīng)當(dāng)理解的是，當(dāng)描述將元件“直接耦接”或“直接連接”到另一元件時(shí)，將其理解為在該元件與該另一元件之間沒有元件存在。
[0035]在本申請中使用的術(shù)語僅用以描述具體的示例性實(shí)施方式，并且不意圖限制本發(fā)明。如果在上下文中不存在明確相反的含義，則單數(shù)形式可以包括復(fù)數(shù)形式。在本申請中，應(yīng)當(dāng)理解的是，術(shù)語“包括”表示存在說明書中描述的特征、數(shù)量、步驟、操作、部件、零件或其組合，但術(shù)語“包括”不事先排除存在或添加一個(gè)或更多個(gè)其他特征、數(shù)量、步驟、操作、部件、零件或組合的可能性。
[0036]如果沒有被相反地定義，則本文中所使用的包括技術(shù)術(shù)語或科學(xué)術(shù)語的所有術(shù)語具有與本領(lǐng)域的普通技術(shù)人員通常所理解的含義相同的含義。通常使用的詞典中所定義的術(shù)語應(yīng)當(dāng)被解釋為具有與在相關(guān)領(lǐng)域的背景下的含義相同的含義，但如果在本發(fā)明中沒有被明確定義，則不被解釋為理想地或過于正式的含義。
[0037]在下文中，將參考附圖更詳細(xì)地描述本發(fā)明的優(yōu)選示例性實(shí)施方式。在描述本發(fā)明的過程中，為了便于全面理解，相同的附圖標(biāo)記指的是相同的元件，并且將省略對相同元件的重復(fù)描述。
[0038]在下文中，編碼單元(⑶)具有正方形像素大小，并且可以具有2N2N(單位:像素)的可變的大小。CU可以具有遞歸編碼單元結(jié)構(gòu)。可以由CU單元來配置幀間預(yù)測、幀內(nèi)預(yù)測、變換、量化、去塊濾波和熵編碼。
[0