专利摘要:
一種視訊處理裝置,用以根據一多視角視訊串流來產生一偏振視訊串流,包含有一移動資訊偵測器以及一偏振轉換器。該移動資訊偵測器透過處理該多視角視訊串流來偵測該多視角視訊串流之移動資訊。該偏振轉換器耦接於該移動資訊偵測器,且根據該移動資訊來將該多視角視訊串流轉換為該偏振視訊串流。
公开号:TW201312993A
申请号:TW100144194
申请日:2011-12-01
公开日:2013-03-16
发明作者:Te-Hao Chang
申请人:Mediatek Inc;
IPC主号:H04N13-00
专利说明:
視訊處理裝置與視訊處理方法
本發明所揭露之實施例有關於將一多視角視訊串流(multi-view video stream)轉換為一偏振視訊串流(polarized video stream),尤指一種根據一多視角視訊串流(例如,載有左眼圖像與右眼圖像之一立體/三維視訊串流)與自該多視角視訊串流所取得之移動資訊來產生偏振視訊串流的裝置與方法。
隨著科技的進步,使用者所追求的不再只是高畫質影像,而是具立體感且更真實感的影像顯示。目前立體影像顯示的技術主要可分為兩種,亦即,一種需要視訊輸出裝置一併搭配眼鏡(例如紅藍眼鏡、偏光眼鏡或快門眼鏡)使用,而另一種則僅需要視訊輸出裝置而無需搭配任何眼鏡。無論是採用哪一種技術,立體影像顯示的主要原理就是讓左眼與右眼分別看到不同的影像畫面,進而使大腦將兩眼所分別看到的不同的影像畫面視為立體影像。
快門眼鏡被使用者廣泛地用在觀賞透過一影像輸出裝置來呈現的立體圖像。快門眼鏡包含有兩片快門鏡片,並且透過適當地控制快門鏡片在一開啟狀態與一關閉狀態之間切換,來允許使用者的左眼看到左眼圖像與使用者的右眼看到右眼圖像。然而,由於快門眼鏡需要安裝控制器來控制快門眼鏡的狀態以及需要電池模組來供應電源給控制器與快門眼鏡,因此快門眼鏡的成本不低。
由於基於偏振的立體影像顯示技術具有較低的製造成本,故可以被採用。舉例來說,為了將立體影像播放在使用者所觀看的面板上,一種基於偏振的方法是使用一相位延遲薄膜(pattern retarder,PR)型或是微相位差膜(micro retarder)型的面板,因此,原本的一個立體視訊串流(其包含有左眼圖像與右眼圖像)應被轉換為一個偏振視訊串流,以被適當地播放在相位延遲薄膜型/微相位差膜型的面板上來呈現立體圖像予使用者。傳統的方法是擷取一左眼圖像中一半的掃描線與一右眼圖像中一半的掃描線,並且透過結合所擷取的掃描線來產生一偏振視訊圖框(polarized video frame)。然而,透過此一偏振視訊串流所驅動之相位延遲薄膜型/微相位差膜型的面板上所播放出來的立體圖像的解析度會減少為透過原本的立體視訊串流所驅動之面板上所播放出來的立體圖像的解析度的一半。
為了提高偏振立體影像顯示的解析度,可以於時域上採用較快的圖框速率(frame rate),也就是說,在立體視訊串流所包含之左眼圖框與右眼圖框的原本圖框週期(例如,1/60秒)中,偏振視訊串流包含有不只一個圖框。用來於時域上達到較快的圖框速率之一傳統方法是透過匯集一對左眼圖像與右眼圖像的偶掃描線來產生一圖框,並且透過匯集同一對左眼圖像與右眼圖像的奇掃描線來產生另一圖框。然而,由於固定的掃描線選取順序,此一傳統設計只對在特定方向上具有移動(motion)的圖框會有好的播放品質,而對於在其他方向上具有移動的圖框或是不具有移動的靜態圖框,採用較快的圖框速率的偏振影像顯示會產生畫面閃爍(flicker)的問題並且具有不好的播放品質。
有鑒於此,本發明之目的在於提出一種根據多視角視訊串流(例如,載有左眼圖像與右眼圖像之一立體/三維視訊串流)與自該多視角視訊串流所取得之移動資訊來產生偏振視訊串流的裝置與方法,以解決上述之問題。
本發明一實施例提供一種一種視訊處理裝置,用以根據一多視角視訊串流來產生一偏振視訊串流。該視訊處理裝置包含有一移動資訊偵測器以及一偏振轉換器。該移動資訊偵測器透過處理該多視角視訊串流來偵測該多視角視訊串流之移動資訊。該偏振轉換器耦接於該移動資訊偵測器,且根據該移動資訊來將該多視角視訊串流轉換為該偏振視訊串流。
本發明另一實施例提供一種視訊處理方法,用以根據一多視角視訊串流來產生一偏振視訊串流。該視訊處理方法包含有:透過處理該多視角視訊串流來偵測該多視角視訊串流之移動資訊;以及根據該移動資訊來將該多視角視訊串流轉換為該偏振視訊串流。
本發明的視訊處理裝置與視訊處理方法,基於多視角視訊串流的移動資訊來將多視角視訊串流轉換為偏振視訊串流,能夠改善立體影像或三維影像的播放品質。
在說明書及後續的申請專利範圍當中使用了某些詞彙來指稱特定的元件。所屬領域中具有通常知識者應可理解,硬體製造商可能會用不同的名詞來稱呼同樣的元件。本說明書及後續的申請專利範圍並不以名稱的差異來作為區分元件的方式,而是以元件在功能上的差異來作為區分的準則。在通篇說明書及後續的請求項當中所提及的「包含」係為一開放式的用語,故應解釋成「包含但不限定於」。另外,「耦接」一詞在此係包含任何直接及間接的電氣連接手段。因此,若文中描述一第一裝置耦接於一第二裝置,則代表該第一裝置可直接電氣連接於該第二裝置,或透過其他裝置或連接手段間接地電氣連接至該第二裝置。
請參考第1圖,第1圖為本發明視訊處理裝置之一第一實施例的方塊示意圖。視訊處理裝置100用以根據一多視角視訊串流(例如,一立體/三維視訊串流)S1來產生一偏振視訊串流S2。偏振視訊串流S2可提供給用來播放垂直次要取樣圖框(vertically sub-sampled frame)之一偏光型面板(polarizer type panel)、用來播放水平次要取樣圖框(horizontally sub-sampled frame)之一屏障型面板(barrier type panel)或者用來播放垂直與水平次要取樣圖框之一屏障/柱狀型面板(barrier/lenticular type panel)。在本實施例中,視訊處理裝置100包含有(但不侷限於)一移動資訊偵測器102以及一偏振轉換器104。移動資訊偵測器102與偏振轉換器104均可存取一儲存/緩衝裝置,例如一動態隨機存取記憶體(dynamic random accesses memory,DRAM)101,用來暫時儲存待處理的資料以及處理後的資料。移動資訊偵測器102透過處理多視角視訊串流S1來偵測多視角視訊串流S1的移動資訊INF。偏振轉換器104耦接於移動資訊偵測器102,且根據移動資訊INF來將多視角視訊串流S1轉換為偏振視訊串流S2。由於移動資訊INF會針對包含於多視角視訊串流S1中之每一個原本的視訊圖框的部分影像內容或者全部影像內容來提供一移動狀態(motion status),因此偏振轉換器104可以參考移動資訊INF來啟動適當的偏振轉換模式以設定包含於偏振視訊串流S2中的處理後的視訊圖框。由於可以有一種以上的偏振轉換模式被採用,因此沒有移動及/或在不同方向上具有移動之不同的視訊圖框的播放品質便會有所提升。更明確地來說,習知設計所面臨到之上述的畫面閃爍問題可得以避免或減輕,進而使得偏振立體影像/三維影像的播放品質獲得改善。進一步的說明將詳述如下。
為了方便解說,在下列實施例中的偏振視訊串流S2係提供給用來播放垂直次要取樣圖框的偏光型面板,因此,由偏振轉換操作所產生之處理後的視訊圖框係基於多視角視訊串流S1所傳送之原本的視訊圖框中所擷取出來之奇數線與偶數線的結合(例如,複數個像素列(pixel row)的結合)。然而,此僅為說明目的之用,並非作為本發明之限制條件,舉例來說,當偏振轉換器104被用來產生偏振視訊串流S2至屏障型面板或屏障/光柵型面板時,由偏振轉換操作所產生之處理後的視訊圖框係基於多視角視訊串流S1所傳送之原本的視訊圖框中所擷取出來之奇數線與偶數線的結合(例如,複數個像素行(pixel column)的結合,或者複數個像素列與複數個像素行的結合)。簡而言之,只要是自多視角視訊串流S1所取得的移動資訊有被參考來控制用以產生偏振視訊串流S2的偏振轉換操作,皆符合本發明之精神。
在一第一設計範例中,移動資訊偵測器102透過偵測原本的視訊圖框是否為靜態圖像/圖片,來產生多視角視訊串流S1之原本的視訊圖框的移動資訊INF,也就是說,移動資訊偵測器102只會檢查原本的視訊圖框中是否包含有移動物體(moving object),並不會確切辨識移動物體的移動方向。對於偏振轉換器104而言,其可透過使用分別因應移動資訊INF所指示之不同移動狀態所設定的不同偏振轉換模式,來將多視角視訊串流S1轉換為偏振視訊串流S2。更明確地來說,當移動資訊INF指示原本的視訊圖框(例如,一對左眼圖像與右眼圖像)為靜態圖像時,偏振轉換器104便在一第一偏振轉換模式下將多視角視訊串流S1之原本的視訊圖框轉換為偏振視訊串流S2之處理後的視訊圖框;以及當移動資訊INF指示原本的視訊圖框(例如,一對左眼圖像與右眼圖像)不是靜態圖像,其表示原本的視訊圖框中包含有移動物體時,偏振轉換器104便在一第二偏振轉換模式下將多視角視訊串流S1之原本的視訊圖框轉換為偏振視訊串流S2之處理後的視訊圖框。要注意的是,當操作於不同偏振轉換模式下時,偏振轉換器104會進行不同的偏振轉換。由偏振轉換器104所進行之不同的偏振轉換的範例係說明如下。
第2圖為當移動資訊INF指示左眼圖像IMG_L與右眼圖像IMG_R為靜態圖像時,在一偏振轉換模式下所產生之一處理後的視訊圖框IMG的示意圖。當移動資訊INF指示原本的視訊圖框(例如,具有掃描線L1、L2、...、L1079以及L1080包含於其中之左眼圖像IMG_L,以及具有掃描線R1、R2、...、R1079以及R1080包含於其中之右眼圖像IMG_R)為靜態圖像時,偏振轉換器104會採用第2圖中的偏振轉換操作以產生偏振視訊串流S2之處理後的視訊圖框。舉例來說,傳統的偏振轉換方法係擷取左眼圖像IMG_L中一半的掃描線(例如,奇掃描線),擷取右眼圖像IMG_R中一半的掃描線(例如,偶掃描線),並且透過結合所擷取的掃描線來產生處理後的視訊圖框IMG。要注意的是,由偏振轉換器104在該偏振轉換模式下所產生之處理後的視訊圖框的圖框速率相同於透過多視角視訊串流S1來傳送之左眼圖像與右眼圖像的圖框速率。當沒有使用更快的圖框速率來提升偏振立體顯示(polarized stereo display)的解析度時,前述之畫面閃爍的問題便可得以避免。換句話說,不具有移動之處理後的視訊圖框在偏光型面板上播放時會有好的播放品質。
要注意的是,包含於左眼圖像IMG_L/右眼圖像IMG_R中的掃描線的條數僅作為範例說明之用,並非作為本發明之限制條件。
第3圖為當移動資訊INF指示左眼圖像IMG_L與右眼圖像IMG_R不是靜態圖像時,在另一偏振轉換模式下所產生之處理後的視訊圖框IMG_1與IMG_2的示意圖。第4圖為當移動資訊INF指示左眼圖像IMG_L與右眼圖像IMG_R不是靜態圖像時,在又一偏振轉換模式下所產生之處理後的視訊圖框IMG_1’與IMG_2’的示意圖。當移動資訊INF指示原本的視訊圖框(例如,左眼圖像IMG_L與右眼圖像IMG_R)不是靜態圖像時,偏振轉換器104會採用第3圖或第4圖所示之偏振轉換操作來產生偏振視訊串流S2之處理後的視訊圖框IMG_1與IMG_2或IMG_1’與IMG_2’。如第3圖與第4圖所示,相較於包含於多視角視訊串流S1中之左眼圖像與右眼圖像的圖框速率,由偏振轉換器104所產生之處理後的視訊圖框於時域上會具有較快的圖框速率。對於第3圖中的偏振轉換操作而言,先透過匯集(gather)一對左眼圖像IMG_L與右眼圖像IMG_R的偶掃描線來產生一處理後的視訊圖框IMG_1,然後透過匯集同一對左眼圖像IMG_L與右眼圖像IMG_R的奇掃描線來產生另一處理後的視訊圖框IMG_2。對於第4圖中的偏振轉換操作而言,先透過匯集一對左眼圖像IMG_L與右眼圖像IMG_R的奇掃描線來產生一處理後的視訊圖框IMG_1’,然後透過匯集同一對左眼圖像IMG_L與右眼圖像IMG_R的偶掃描線來產生另一處理後的視訊圖框IMG_2’。由於處理後的視訊圖框不是靜態圖像,所以會具有包含於其中的移動物體,而使用較高的圖框速率來播放處理後的視訊圖框結果將會提高解析度,且相較於使用較低的圖框速率來播放處理後的視訊圖框,另會具有更好的播放品質。
更明確地來說,基於實驗結果的觀察,採用第2圖中的偏振轉換操作的偏振轉換器104會操作於使本身為靜態圖像之視訊圖框具有最佳播放品質之一偏振轉換模式之下;採用第3圖中的偏振轉換操作的偏振轉換器104會操作於使具有朝下之移動的視訊圖框具有最佳播放品質之一偏振轉換模式之下;以及採用第4圖中的偏振轉換操作的偏振轉換器104會操作於使具有朝上之移動的視訊圖框具有最佳播放品質之一偏振轉換模式之下。根據此一觀察便發展出一第二設計範例,在此第二設計範例中,移動資訊偵測器102透過偵測原本的視訊圖框的全域移動(global motion)來產生多視角視訊串流S1之原本的視訊圖框的移動資訊INF,也就是說,當多視角視訊串流S1之一原本的視訊圖框不是一靜態圖像時,移動資訊偵測器102可辨識出原本的視訊圖框中所有移動物體所對應之全域移動的方向。舉例來說,當多視角視訊串流S1之一原本的視訊圖框不是一靜態圖像時,移動資訊偵測器102會偵測在一垂直方向上所累積的移動(亦即,垂直方向上的全域移動)以決定出原本的視訊圖框係具有向上或向下方向的全域移動。
當移動資訊INF指示原本的視訊圖框(例如,左眼圖像IMG_L與右眼圖像IMG_R)為靜態圖像時,偏振轉換器104會操作在一第一偏振轉換模式之下(例如,採用第2圖中的偏振轉換操作),來將原本的視訊圖框轉換為偏振視訊串流S2之處理後的視訊圖框。當移動資訊INF指示原本的視訊圖框(例如,左眼圖像IMG_L與右眼圖像IMG_R)具有在一第一方向上(例如,向下方向)的全域移動時,偏振轉換器104會操作在一第二偏振轉換模式之下(例如,採用第3圖中的偏振轉換操作),來將原本的視訊圖框轉換為處理後的視訊圖框。當移動資訊INF指示原本的視訊圖框(例如,左眼圖像IMG_L與右眼圖像IMG_R)具有在一第二方向上(例如,向上方向)的全域移動時,偏振轉換器104會操作在一第三偏振轉換模式之下(例如,採用第4圖中的偏振轉換操作),來將原本的視訊圖框轉換為處理後的視訊圖框。在上述條件皆未滿足的情況中,偏振轉換器104可被設定來持續使用之前所採用的偏振轉換操作,也就是說,偏振轉換器104目前操作中的偏振轉換模式會維持不變。
對於處理後的視訊圖框為靜態圖像而言,由於沒有採用更快的圖框速率來提高解析度,因此,前述之畫面閃爍的問題可輕易地得以避免。簡單來說,對於偏振立體顯示而言,不具有移動的視訊圖框將會有最佳化的播放品質。對於具有在向上方向或向下方向上的全域移動的視訊圖框而言,偏振轉換模式係適應性地根據全域移動的方向來選擇,因此,第3圖中的偏振轉換操作由於先選擇偶掃描線然後才選擇奇掃描線,其能夠避免/減緩具有向下移動之視訊圖框的畫面閃爍,播放品質則可相對應地有所提升;相似地,第4圖中的偏振轉換操作由於先選擇奇掃描線然後才選擇偶掃描線,其能夠避免/減緩具有向上移動的視訊圖框的畫面閃爍,播放品質則可相對應地有所提升。
在上述的設計範例中,偏振轉換操作係在一圖框層級(frame level)中進行,然而,這並不作為本發明的限制條件,舉例來說,在一第三設計範例中,偏振轉換操作被允許在一區塊/像素層級(block/pixel level)中進行。實作上,基於所採用的移動資訊偵測機制,偏振轉換操作可以在一圖框層級或一區塊/像素層級中進行。
在第三設計範例中,移動資訊偵測器102透過偵測原本的視訊圖框的移動向量(motion vector),來產生多視角視訊串流S1之原本的視訊圖框的移動資訊INF,也就是說,移動資訊偵測器102可決定多視角視訊串流S1之原本的視訊圖框中一部分的移動,其中原本的視訊圖框的一部分可以是一個像素或是一個包含有複數個像素的區塊。對於偏振轉換器104而言,其根據自多視角視訊串流S1之原本的視訊圖框中的一部分的處理所取得的移動資訊來決定複數個權重係數(weighting factor),以在複數個不同偏振轉換模式下產生偏振視訊串流S2之處理後的視訊圖框中的一部分的複數個候選(candidate)內容,且根據該複數個權重係數來混合(blend)該複數個候選內容,以輸出處理後的視訊圖框中的一部分的一實際內容。基於區塊/像素的偏振轉換操作係說明如下。
請參考第5圖,第5圖為根據各自的權重係數來混合複數個候選內容之偏振轉換操作範例的示意圖。在本實施例中,偏振轉換模式包含有一第一偏振轉換模式M1、一第二偏振轉換模式M2以及一第三偏振轉換模式M3。移動資訊INF係指示原本的視訊圖框(例如,左眼圖像IMG_L)中的掃描線L1與L2的移動狀態。當移動資訊ING指示掃描線L1與L2對應於一靜態圖像時,對應至第一偏振轉換模式M1的權重係數W1被設定為大於第二偏振轉換模式M2與第三偏振轉換模式M3所分別對應之權重係數W2與W3。當移動資訊INF指示掃描線L1與L2在一第一方向上(例如,一向上方向)具有大於在一第二方向上(例如,一向下方向)的移動時,權重係數W2被設定為大於權重係數W1與W3。當移動資訊INF指示掃描線L1與L2在該第二方向上(例如,該向下方向)具有大於在該第一方向上(例如,該向上方向)的移動時,權重係數W3被設定為大於權重係數W1與W2。
此外,當操作在第一偏振轉換模式M1下時,偏振轉換器104透過輸出自位於包含有一奇掃描線(例如,L1)與一偶掃描線(例如,L2)的相鄰兩掃描線上之像素所取得的像素值的平均值,來產生一候選內容;當操作在第二偏振轉換模式M2下時,偏振轉換器104係於輸出位於偶掃描線(例如,L2)上的像素之像素值之前,輸出位於奇掃描線(例如,L1)上的像素之像素值來產生另一候選內容;以及當操作在第三偏振轉換模式M3下時,偏振轉換器104於輸出位於奇掃描線(例如,L1)上的像素之像素值之前,輸出位於偶掃描線(例如,L2)上的像素之像素值來產生又一候選內容。
由於權重係數W1~W3是根據欲處理之掃描線L1與L2的實際移動狀態來設定,以較快的圖框速率來播放處理後的視訊圖框IMG_11與IMG_12會由於提升的解析度與減緩的畫面閃爍效應而具有增強的顯示品質。
如第1圖所示,移動資訊偵測器102可以是專用於(dedicated to)偏振轉換器104的硬體元件,然而,此僅作為範例說明之用,並非作為本發明之限制條件,舉例來說,可採用一硬體共用(hardware sharing)技術來降低硬體的成本。一些設計變化係顯示於第6~8圖中。
第6圖為本發明視訊處理裝置之一第二實施例的方塊示意圖。由本圖可見,移動資訊偵測器102係整合在一移動估計移動補償(motion estimation motion compensation,MEMC)圖框速率轉換器(frame rate converter)602中,也就是說,視訊處理裝置600中的移動資訊偵測器102為移動估計移動補償圖框速率轉換器602的一部分,並且與偏振轉換器104共用,以提供所需的移動資訊INF至偏振轉換器104。
第7圖為本發明視訊處理裝置之一第三實施例的方塊示意圖。由本圖可見,移動資訊偵測器102係整合在一去交錯器(deinterlacer)702中,也就是說,視訊處理裝置700中的移動資訊偵測器102為去交錯器702的一部分,並且與偏振轉換器104共用,以提供所需的移動資訊INF至偏振轉換器104。
第8圖為本發明視訊處理裝置之一第四實施例的方塊示意圖。由本圖可見,移動資訊偵測器102係整合在一時域雜訊消除(temporal noise reduction)電路802中,也就是說,視訊處理裝置800中的移動資訊偵測器102為時域雜訊消除電路802的一部分,並且與偏振轉換器104共用,以提供所需的移動資訊INF至偏振轉換器104。
第9圖為根據一多視角視訊串流來產生一偏振視訊串流之一視訊處理方法的流程圖。該視訊處理方法可被上述視訊處理裝置100,600,700,與800中之其一所採用,且可簡單總結如下。
步驟900:開始。
步驟902:透過處理一多視角視訊串流來偵測該多視角視訊串流之移動資訊。
步驟904:根據所偵測到的移動資訊來將該多視角視訊串流轉換為一偏振視訊串流。基於所採用的移動資訊偵測機制,偏振轉換操作可以在一圖框層級或一區塊/像素層級中進行。
步驟906:結束。
步驟902可以被一硬體元件(例如移動資訊偵測器102)來執行,且步驟904可以被另一硬體元件(例如偏振轉換器104)來執行。熟習此技藝者當可於閱讀以上闡述視訊處理裝置之段落後,輕易了解每一步驟的細節,詳細說明及變化可參考前述,為簡潔起見,故於此不再贅述。
以上所述僅為本發明之較佳實施例,凡依本發明申請專利範圍所做之均等變化與修飾,皆應屬本發明之涵蓋範圍。
100、600、700、800...視訊處理裝置
101...動態隨機存取記憶體
102...移動資訊偵測器
104...偏振轉換器
602...移動估計移動補償圖框速率轉換器
702...去交錯器
802...時域雜訊消除電路
第1圖為本發明視訊處理裝置之一第一實施例的方塊示意圖。
第2圖為當移動資訊指示左眼圖像與右眼圖像為靜態圖像時,在一偏振轉換模式下所產生的處理後的視訊圖框的示意圖。
第3圖為當移動資訊指示左眼圖像與右眼圖像不是靜態圖像時,在另一偏振轉換模式下所產生的處理後的視訊圖框的示意圖。
第4圖為當移動資訊指示左眼圖像與右眼圖像不是靜態圖像時,在又一偏振轉換模式下所產生的處理後的視訊圖框的示意圖。
第5圖為根據各自的權重係數來混合複數個候選內容之偏振轉換操作範例的示意圖。
第6圖為本發明視訊處理裝置之一第二實施例的方塊示意圖。
第7圖為本發明視訊處理裝置之一第三實施例的方塊示意圖。
第8圖為本發明視訊處理裝置之一第四實施例的方塊示意圖。
第9圖為根據一多視角視訊串流來產生一偏振視訊串流之一視訊處理方法的流程圖。
100...視訊處理裝置
101...動態隨機存取記憶體
102...移動資訊偵測器
104...偏振轉換器
权利要求:
Claims (24)
[1] 一種視訊處理裝置,用以根據一多視角視訊串流來產生一偏振視訊串流,包含有:一移動資訊偵測器,用來透過處理該多視角視訊串流,來偵測該多視角視訊串流之移動資訊;以及一偏振轉換器,耦接於該移動資訊偵測器,且根據該移動資訊來將該多視角視訊串流轉換為該偏振視訊串流。
[2] 如申請專利範圍第1項所述之視訊處理裝置,其中該移動資訊偵測器係透過偵測該多視角視訊串流之原本的視訊圖框是否為靜態圖像、偵測該原本的視訊圖框之全域移動或者偵測該原本的視訊圖框之移動向量,來產生該多視角視訊串流之該原本的視訊圖框之移動資訊。
[3] 如申請專利範圍第1項所述之視訊處理裝置,其中該移動資訊偵測器係整合於一移動估計移動補償圖框速率轉換器、一去交錯器或一時域雜訊消除電路之中。
[4] 如申請專利範圍第1項所述之視訊處理裝置,其中該偏振轉換器係透過使用因應該移動資訊所指示之不同移動狀態所分別設定之不同偏振轉換模式,來將該多視角視訊串流轉換為該偏振視訊串流。
[5] 如申請專利範圍第4項所述之視訊處理裝置,其中當該多視角視訊串流之原本的視訊圖框之移動資訊指示該原本的視訊圖框為靜態圖像時,該偏振轉換器係操作在一第一偏振轉換模式下,來將該原本的視訊圖框轉換為該偏振視訊串流之處理後的視訊圖框;以及當該原本的視訊圖框之該移動資訊指示該原本的視訊圖框不是靜態圖像時,該偏振轉換器係操作在一第二偏振轉換模式下,來將該原本的視訊圖框轉換為該處理後的視訊圖框。
[6] 如申請專利範圍第5項所述之視訊處理裝置,其中在該第二偏振轉換模式下所產生之該處理後的視訊圖框的一圖框速率係高於在該第一偏振轉換模式下所產生之該處理後的視訊圖框的一圖框速率。
[7] 如申請專利範圍第4項所述之視訊處理裝置,其中當該多視角視訊串流之原本的視訊圖框之移動資訊指示該原本的視訊圖框為靜態圖像時,該偏振轉換器係操作在一第一偏振轉換模式下,來將該原本的視訊圖框轉換為該偏振視訊串流之處理後的視訊圖框;當該原本的視訊圖框之該移動資訊指示該原本的視訊圖框具有在一第一方向上之全域移動時,該偏振轉換器係操作在一第二偏振轉換模式下,來將該原本的視訊圖框轉換為該處理後的視訊圖框;以及當該原本的視訊圖框之該移動資訊指示該原本的視訊圖框具有在一第二方向上之全域移動時,該偏振轉換器係操作在一第三偏振轉換模式下,來將該原本的視訊圖框轉換為該處理後的視訊圖框。
[8] 如申請專利範圍第7項所述之視訊處理裝置,其中在該第二偏振轉換模式下所產生之該處理後的視訊圖框之一第二圖框速率係高於在該第一偏振轉換模式下所產生之該處理後的視訊圖框之一第一圖框速率;以及在該第三偏振轉換模式下所產生之該處理後的視訊圖框之一第三圖框速率係高於在該第一偏振轉換模式下所產生之該處理後的視訊圖框之該第一圖框速率。
[9] 如申請專利範圍第8項所述之視訊處理裝置,其中該第三圖框速率係等於該第二圖框速率;該原本的視訊圖框包含有對應一第一視角之一第一視訊圖框以及對應一第二視角之一第二視訊圖框;當操作在該第二偏振轉換模式下時,該偏振轉換器係先透過匯集該第一視訊圖框與該第二視訊圖框之奇數線來產生一第一處理後的視訊圖框,然後透過匯集該第一視訊圖框與該第二視訊圖框之偶數線來產生一第二處理後的視訊圖框;以及當操作在該第三偏振轉換模式下時,該偏振轉換器係先透過匯集該第一視訊圖框與該第二視訊圖框之偶數線來產生該第一處理後的視訊圖框,然後透過匯集該第一視訊圖框與該第二視訊圖框之奇數線來產生該第二處理後的視訊圖框。
[10] 如申請專利範圍第1項所述之視訊處理裝置,其中該偏振轉換器係根據該多視角視訊串流之一原本的視訊圖框中一部分之移動資訊來決定複數個權重係數,在複數個不同偏振轉換模式下分別產生該偏振視訊串流之一處理後的視訊圖框中一部分之複數個候選內容,且根據該複數個權重係數來混合該複數個候選內容以輸出該處理後的視訊圖框中該部分之一實際內容。
[11] 如申請專利範圍第10項所述之視訊處理裝置,其中該複數個不同偏振轉換模式包含有一第一偏振轉換模式、一第二偏振轉換模式以及一第三偏振轉換模式;當該原本的視訊圖框中該部分之該移動資訊指示該原本的視訊圖框中該部分為一靜態圖像時,對應於該第一偏振轉換模式之一權重係數被設定為大於該第二偏振轉換模式、第三偏振轉換模式所分別對應之權重係數;當該原本的視訊圖框中該部分之該移動資訊指示該原本的視訊圖框中該部分在一第一方向上之移動大於在一第二方向上之移動時,對應於該第二偏振轉換模式之一權重係數被設定為大於該第一偏振轉換模式、第三偏振轉換模式所分別對應之權重係數;當該原本的視訊圖框中該部分之該移動資訊指示該原本的視訊圖框中該部分在該第二方向上之移動大於在該第一方向上之移動時,對應於該第三偏振轉換模式之一權重係數被設定為大於該第一偏振轉換模式、第二偏振轉換模式所分別對應之權重係數。
[12] 如申請專利範圍第11項所述之視訊處理裝置,其中當操作在該第一偏振轉換模式下時,該偏振轉換器係透過輸出自位於包含有一奇數線與一偶數線之相鄰兩條線上之像素所取得之像素值之平均值來產生一候選內容;當操作在該第二偏振轉換模式下時,該偏振轉換器係於輸出位於該偶數線上之像素之像素值之前,輸出位於該奇數線上之像素之像素值來產生另一候選內容;以及當操作在該第三偏振轉換模式下時,該偏振轉換器係於輸出位於該奇數線上之像素之像素值之前,輸出位於該偶數線上之像素之像素值來產生又一候選內容。
[13] 一種視訊處理方法,用以根據一多視角視訊串流來產生一偏振視訊串流,包含有:透過處理該多視角視訊串流,來偵測該多視角視訊串流之移動資訊;以及根據該移動資訊來將該多視角視訊串流轉換為該偏振視訊串流。
[14] 如申請專利範圍第13項所述之視訊處理方法,其中偵測該多視角視訊串流之該移動資訊的步驟包含有:透過偵測該多視角視訊串流之原本的視訊圖框是否為靜態圖像、偵測該原本的視訊圖框之全域移動或者偵測該原本的視訊圖框之移動向量,來產生該多視角視訊串流之該原本的視訊圖框之移動資訊。
[15] 如申請專利範圍第13項所述之視訊處理方法,其中偵測該多視角視訊串流之該移動資訊的步驟包含有:進行一移動估計移動補償圖框速率轉換、一去交錯操作或者一時域噪音消除,來偵測該多視角視訊串流之該移動資訊。
[16] 如申請專利範圍第13項所述之視訊處理方法,其中將該多視角視訊串流轉換為該偏振視訊串流的步驟包含有:透過使用因應該移動資訊所指示之不同移動狀態所分別設定之不同偏振轉換模式,來將該多視角視訊串流轉換為該偏振視訊串流。
[17] 如申請專利範圍第16項所述之視訊處理方法,其中透過使用不同偏振轉換模式來將該多視角視訊串流轉換為該偏振視訊串流的步驟包含有:當該多視角視訊串流之原本的視訊圖框之移動資訊指示該原本的視訊圖框為靜態圖像時,在一第一偏振轉換模式下將該原本的視訊圖框轉換為該偏振視訊串流之處理後的視訊圖框;以及當該原本的視訊圖框之該移動資訊指示該原本的視訊圖框不是靜態圖像時,在一第二偏振轉換模式下將該原本的視訊圖框轉換為該處理後的視訊圖框。
[18] 如申請專利範圍第17項所述之視訊處理方法,其中在該第二偏振轉換模式下所產生之該處理後的視訊圖框之一圖框速率係高於在該第一偏振轉換模式下所產生之該處理後的視訊圖框之一圖框速率。
[19] 如申請專利範圍第16項所述之視訊處理方法,其中透過使用不同偏振轉換模式將該多視角視訊串流轉換為該偏振視訊串流的步驟包含有:當該多視角視訊串流之原本的視訊圖框之移動資訊指示該原本的視訊圖框為靜態圖像時,在一第一偏振轉換模式下將該原本的視訊圖框轉換為該偏振視訊串流之處理後的視訊圖框;當該原本的視訊圖框之該移動資訊指示該原本的視訊圖框具有在一第一方向上之全域移動時,在一第二偏振轉換模式下將該原本的視訊圖框轉換為該處理後的視訊圖框;以及當該原本的視訊圖框之該移動資訊指示該原本的視訊圖框具有在一第二方向上之全域移動時,在一第三偏振轉換模式下將該原本的視訊圖框轉換為該處理後的視訊圖框。
[20] 如申請專利範圍第19項所述之視訊處理方法,其中在該第二偏振轉換模式下所產生之該處理後的視訊圖框之一第二圖框速率係高於在該第一偏振轉換模式下所產生之該處理後的視訊圖框之一第一圖框速率;以及在該第三偏振轉換模式下所產生之該處理後的視訊圖框之一第三圖框速率係高於在該第一偏振轉換模式下所產生之該處理後的視訊圖框之該第一圖框速率。
[21] 如申請專利範圍第20項所述之視訊處理方法,其中該第三圖框速率係等於該第二圖框速率;該原本的視訊圖框包含有對應一第一視角之一第一視訊圖框以及對應一第二視角之一第二視訊圖框;在該第二偏振轉換模式下,一第一處理後的視訊圖框先透過匯集該第一視訊圖框與該第二視訊圖框之奇數線來產生,然後一第二處理後的視訊圖框再透過匯集該第一視訊圖框與該第二視訊圖框之偶數線來產生;以及在該第三偏振轉換模式下,該第一處理後的視訊圖框先透過匯集該第一視訊圖框與該第二視訊圖框之偶數線來產生,然後該第二處理後的視訊圖框再透過匯集該第一視訊圖框與該第二視訊圖框之奇數線來產生。
[22] 如申請專利範圍第13項所述之視訊處理方法,其中將該多視角視訊串流轉換為該偏振視訊串流的步驟包含有:根據該多視角視訊串流之一原本的視訊圖框中一部分之移動資訊來決定複數個權重係數;在複數個不同偏振轉換模式下分別產生該偏振視訊串流之一處理後的視訊圖框中一部分之複數個候選內容;以及根據該複數個權重係數來混合該複數個候選內容,以輸出該處理後的視訊圖框中該部分之一實際內容。
[23] 如申請專利範圍第22項所述之視訊處理方法,其中該複數個不同偏振轉換模式包含有一第一偏振轉換模式、一第二偏振轉換模式以及一第三偏振轉換模式;當該原本的視訊圖框中該部分之該移動資訊指示該原本的視訊圖框中該部分為一靜態圖像時,對應於該第一偏振轉換模式之一權重係數被設定為大於該第二偏振轉換模式、第三偏振轉換模式所分別對應之權重係數;當該原本的視訊圖框中該部分之該移動資訊指示該原本的視訊圖框中該部分在一第一方向上之移動大於在一第二方向上之移動時,對應於該第二偏振轉換模式之一權重係數被設定為大於該第一偏振轉換模式、第三偏振轉換模式所分別對應之權重係數;當該原本的視訊圖框中該部分之該移動資訊指示該原本的視訊圖框中該部分在該第二方向上之移動大於在該第一方向上之移動時,對應於該第三偏振轉換模式之一權重係數被設定為大於該第一偏振轉換模式、第二偏振轉換模式所分別對應之權重係數。
[24] 如申請專利範圍第23項所述之視訊處理方法,其中產生該複數個候選內容的步驟包含有:在該第一偏振轉換模式下,透過輸出自位於包含有一奇數線與一偶數線之相鄰兩條線上之像素所取得之像素值之平均值來產生一候選內容;在該第二偏振轉換模式下,於輸出位於該偶數線上之像素之像素值之前,透過輸出位於該奇數線上之像素之像素值來產生另一候選內容;以及在該第三偏振轉換模式下,於輸出位於該奇數線上之像素之像素值之前,透過輸出位於該偶數線上之像素之像素值來產生又一候選內容。
类似技术:
公开号 | 公开日 | 专利标题
US8078048B2|2011-12-13|Imaging device and video recording/reproducing system
JP4763822B2|2011-08-31|映像信号処理装置及び映像信号処理方法
TWI500326B|2015-09-11|視訊播放裝置
TWI428007B|2014-02-21|視訊處理裝置及方法
US20110063422A1|2011-03-17|Video processing system and video processing method
JP4748251B2|2011-08-17|映像変換方法および映像変換装置
WO2011064913A1|2011-06-03|映像信号処理装置及び映像信号処理方法
TWI481253B|2015-04-11|視訊處理裝置與視訊處理方法
US20120307153A1|2012-12-06|Video processing device and video processing method
US8687950B2|2014-04-01|Electronic apparatus and display control method
US20120268559A1|2012-10-25|Electronic apparatus and display control method
JP4747214B2|2011-08-17|映像信号処理装置、及び、映像信号処理方法
US8274604B2|2012-09-25|Image display unit
JP4966400B2|2012-07-04|画像出力装置及び画像出力方法
JP2010087720A|2010-04-15|表示用走査方式を変換する信号処理装置及び方法
WO2011114767A1|2011-09-22|立体画像表示装置、立体画像撮像装置、テレビジョン受像機、遊技装置、記録媒体および立体画像の伝送方法
JP2011199889A|2011-10-06|映像信号処理装置、及び、映像信号処理方法
WO2015140956A1|2015-09-24|表示装置及び3次元画像表示システム
JP2011234387A|2011-11-17|映像信号処理装置及び映像信号処理方法
JP2013174665A|2013-09-05|情報処理装置、画質補正の制御方法およびプログラム
JP5759728B2|2015-08-05|情報処理装置、情報処理装置の制御方法、及びプログラム
JP2012080469A|2012-04-19|立体映像表示装置及びその制御方法
Doyen et al.2014|Towards a free viewpoint and 3D intensity adjustment on multi-view display
TWI404405B|2013-08-01|具有螢幕顯示功能之影像處理裝置及影像處理方法
US8896615B2|2014-11-25|Image processing device, projector, and image processing method
同族专利:
公开号 | 公开日
TWI481253B|2015-04-11|
US20130057645A1|2013-03-07|
CN102970552A|2013-03-13|
CN102970552B|2014-12-10|
US8953016B2|2015-02-10|
引用文献:
公开号 | 申请日 | 公开日 | 申请人 | 专利标题
US7453938B2|2004-02-06|2008-11-18|Apple Inc.|Target bitrate estimator, picture activity and buffer management in rate control for video coder|
US20080055477A1|2006-08-31|2008-03-06|Dongsheng Wu|Method and System for Motion Compensated Noise Reduction|
US8250618B2|2006-09-18|2012-08-21|Elemental Technologies, Inc.|Real-time network adaptive digital video encoding/decoding|
WO2010116329A2|2009-04-08|2010-10-14|Stergen Hi-Tech Ltd.|Method and system for creating three-dimensional viewable video from a single video stream|
HU0900478D0|2009-07-31|2009-09-28|Holografika Hologrameloeallito|Method and apparatus for displaying 3d images|
CN101631256B|2009-08-13|2011-02-09|浙江大学|用于三维电视系统中2d视频到3d视频的转换方法|
TW201123795A|2009-09-29|2011-07-01|Nokia Corp|System, method and apparatus for dynamic media file streaming|
KR20110096494A|2010-02-22|2011-08-30|엘지전자 주식회사|전자 장치 및 입체영상 재생 방법|CN105306866A|2015-10-27|2016-02-03|青岛海信电器股份有限公司|帧率转换方法及装置|
法律状态:
优先权:
申请号 | 申请日 | 专利标题
US13/223,320|US8953016B2|2011-09-01|2011-09-01|Apparatus and method for generating polarized video stream according to multi-view video stream and motion information derived from multi-view video stream|
[返回顶部]