TW201421973A - 視頻資料轉換的方法、裝置和智慧電視 - Google Patents

視頻資料轉換的方法、裝置和智慧電視 Download PDF

Info

Publication number
TW201421973A
TW201421973A TW101147899A TW101147899A TW201421973A TW 201421973 A TW201421973 A TW 201421973A TW 101147899 A TW101147899 A TW 101147899A TW 101147899 A TW101147899 A TW 101147899A TW 201421973 A TW201421973 A TW 201421973A
Authority
TW
Taiwan
Prior art keywords
service process
video
dynamic texture
engine
texture data
Prior art date
Application number
TW101147899A
Other languages
English (en)
Other versions
TWI520572B (zh
Inventor
hong-bo He
Ming-Yong Sun
Original Assignee
Mstar Semiconductor Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Mstar Semiconductor Inc filed Critical Mstar Semiconductor Inc
Publication of TW201421973A publication Critical patent/TW201421973A/zh
Application granted granted Critical
Publication of TWI520572B publication Critical patent/TWI520572B/zh

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/4402Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81Monomedia components thereof
    • H04N21/816Monomedia components thereof involving special video data, e.g 3D video

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
  • Image Generation (AREA)
  • Human Computer Interaction (AREA)

Abstract

截取視頻源正在播放的視頻圖像,並將視頻圖像轉換為3D引擎所需大小和格式的動態紋理資料。將動態紋理資料發送至3D引擎,使3D引擎利用動態紋理資料生成一幀貼圖。將貼圖貼到3D介面(UI),得到動態紋理貼圖。

Description

視頻資料轉換的方法、裝置和智慧電視
本發明涉及一種視頻資料轉換的方法、裝置和智慧電視。
隨著視頻技術的不斷發展,3D介面(UI)智慧電視也逐漸成為一種趨勢,給用戶更加完美的電視操作體驗。然而,一般的3D介面(UI)智慧電視雖然介面比較絢麗,但其本質還是採用傳統的靜態貼圖,其上面的視頻以及節目的播放也是沿用以前的二維顯示方式,靜態貼圖與視頻資料之間並沒有存在關聯。
本發明主要解決的技術問題是提供一種視頻資料轉換的方法及裝置,能夠將節目視頻資料轉換為穩定連續的動態紋理貼圖,提供一種新的節目預覽與播放模式。
為解決上述技術問題,本發明採用的一個技術方案是:提供一種視頻資料轉換的方法,包括:截取視頻源正在播放的視頻圖像,並將所述視頻圖像轉換為3D引擎所需大小和格式的動態紋理資料;將所述動態紋理資料發送至所述3D引擎,使所述3D引擎利用所述動態紋理資料生成一貼圖;將所述貼圖貼到3D介面(UI),得到動態紋理貼圖。
為解決上述技術問題,本發明採用的另一個技術方案是:提供一種視頻資料轉換裝置,包括截取模組、發送模組以及貼圖模組,其中:所述截取模組用於截取視頻源正 在播放的視頻圖像,並將所述視頻圖像轉換為3D引擎所需大小和格式的動態紋理資料,將所述動態紋理資料輸出給所述發送模組;所述發送模組用於將所述動態紋理資料發送至所述貼圖模組;所述貼圖模組用於利用所述動態紋理資料生成一貼圖並將所述貼圖貼到3D介面,得到動態紋理貼圖。
為瞭解決上述技術問題,本發明採用的還有一技術方案是:提供一種智慧電視,包括上述的視頻資料轉換裝置。
本發明的有益效果是:區別於現有技術的情況,本發明通過截取視頻圖像轉換為動態紋理資料,並通過3D引擎利用動態紋理資料生成新一幀的貼圖貼到3D UI,從而可以實現將視頻資料轉換為穩定連續的動態紋理貼圖,並達到比較高的幀率,將節目視頻與3D融合,給用戶更好的體驗效果。
為了對本案之上述及其他方面有更佳的瞭解,下文特舉實施例,並配合所附圖式,作詳細說明如下:
參閱圖1,本發明視頻資料的轉換方法一實施方式包括:
步驟S101:截取視頻源正在播放的視頻圖像,並將視頻圖像轉換為3D引擎所需大小和格式的動態紋理資料。
一般的智慧電視都支援數位電視(DTV)、亞洲電視(ATV)、高清晰度多媒體介面(HDMI)、視頻圖形陣列(VGA)、多媒體等視頻節目源。因此,首先通過多工器(Mux) 選擇上層指定的視頻源,例如DTV。然後將視頻源正在播放的視頻截取下來,並轉換成3D引擎所需的大小和格式的動態紋理資料,將轉換得到的動態紋理資料保存在視頻服務進程(Pip service)的暫存器中。
步驟S102:將動態紋理資料發送至3D引擎,使3D引擎利用動態紋理資料生成一幀貼圖。
當接收到獲取動態紋理資料的請求時,將動態紋理資料發送至3D引擎,使3D引擎利用動態紋理資料生成一貼圖。
步驟S103:將貼圖貼到3D介面,得到動態紋理貼圖。
3D引擎生成貼圖後,將貼圖貼到3D介面,得到動態紋理貼圖。可以將動態紋理貼圖送入顯示幕顯示出來。
通過上述實施方式的描述,本發明通過截取視頻圖像轉換為動態紋理資料,並通過3D引擎利用動態紋理資料生成新的貼圖貼到3D介面(UI),從而可以實現將視頻資料轉換為穩定連續的動態紋理貼圖,並達到比較高的幀率,將節目視頻與3D融合,給用戶更好的體驗效果。
請參閱圖2,在另一實施方式中,截取視頻圖像,並將視頻圖像轉換為3D引擎所需大小和格式的動態紋理資料包括以下子步驟:
子步驟S201:通過一視頻服務進程的抓圖引擎截取視頻源正在播放的視頻圖像,並將視頻圖像縮放至3D引擎所需大小。
在實際應用過程中,系統啟動的時候,首先使視頻服 務進程(Pip service)、攝像頭服務進程(Camera service)以及3D介面(UI)啟動並建立連接。這樣,如果上層需要動態紋理資料,可以隨時向攝像頭服務進程發出請求。
一般的Android智慧電視上,通過視頻服務進程的抓圖引擎(Capture engine)將視頻源正在播放的視頻圖像截取下來,並將視頻圖像縮放至3D引擎所需要的大小,並將縮放後的視頻圖像發送至視頻服務進程的圖形引擎(Graphic engine)。
通常,為了使視頻服務進程更好的融入到Android系統架構中,可以將視頻服務進程虛擬成攝像頭服務進程的一個虛擬攝像頭(Camera)設備。這樣,攝像頭服務進程除了系統默認的id為0的真實攝像頭設備外,視頻服務進程就成為攝像頭服務進程的id為1的虛擬攝像頭設備。這樣視頻服務進程不僅可以與Android系統實現無縫銜接,借用攝像頭服務進程本身的介面又能提供更加靈活強大的功能。例如動態截屏、視頻錄製等。並且3D引擎也可以靈活的連接其他視頻源介面,例如id為0的真實攝像頭設備。
子步驟S202:通過視頻服務進程的圖形引擎獲取經縮放後的視頻圖像並轉換為3D引擎所需格式的動態紋理資料。
視頻服務進程的圖形引擎從抓圖引擎獲取經縮放後的視頻圖像後,將視頻圖像轉換為3D引擎所需格式的動態紋理資料,並將動態紋理資料保存至視頻服務進程的暫存器中。
在另一實施方式中,請參閱圖3,使視頻服務進程、攝像頭服務進程以及3D介面建立連接包括以下子步驟:
子步驟S301:檢查攝像頭服務進程與視頻服務進程的連接是否成功。
首先檢查攝像頭服務進程與視頻服務進程的連接是否成功,如果連接成功則進行子步驟S302,否則進行子步驟S305。
子步驟S302:檢查攝像頭服務進程是否支援3D介面需要的參數。
當攝像頭服務進程與視頻服務進程連接成功時,檢查攝像頭服務進程是否支援3D介面需要的參數設置,如果支援,則進行子步驟S303,如果不支援,則進行子步驟S304。
子步驟S303:設置回調函數,啟動視頻服務進程的抓圖引擎,截取視頻源正在播放的視頻圖像。
當攝像頭服務進程支援3D介面需要的參數設置時,設置回調函數,該回調函數是用於資料發送的回調函數,包括攝像頭服務進程的回調函數和3D介面的回調函數。並且同時啟動視頻服務進程的抓圖引擎,截取視頻源正在播放的視頻圖像。
子步驟S304:取消視頻服務進程、攝像頭服務進程、3D介面之間的連接。
當攝像頭服務進程不支援3D介面需要的參數設置時,則使視頻服務進程、攝像頭服務進程以及3D介面斷開連接。
子步驟S305:退出流程。
當檢查到攝像頭服務進程與視頻服務進程沒有成功連接時,判斷為異常,取消連接視頻服務進程,進而退出流程。
請參閱圖4,在另一實施方式中,將動態紋理資料發送至3D引擎的步驟包括以下子步驟:
子步驟S401:將動態紋理資料發送至攝像頭服務進程。
在視頻服務進程接收到來自攝像頭服務進行的獲取動態紋理資料的請求後,從視頻服務進程的暫存器中獲取動態紋理資料,將動態紋理資料發送至攝像頭服務進程。
子步驟S402:使攝像頭服務進程將動態紋理資料發送至3D引擎。
當攝像頭服務進程接收到來自3D引擎的獲取動態紋理資料的請求時,使攝像頭服務進程將動態紋理資料發送至3D引擎。
請參閱圖5,在另一實施方式中,將動態紋理資料發送至攝像頭服務進程包括以下子步驟:
子步驟S501:準備動態紋理資料,等待發送。
視頻服務進程接收到來自攝像頭服務進程的獲取動態紋理資料的請求,調用抓圖引擎介面(API)等待下一幀動態紋理資料,等待發送。如果下一幀動態紋理資料還沒有好,進程就會因為調用當前API而睡眠,等資料好了再喚醒。
子步驟S502:判斷視頻服務進程的空閒序列中是否 有可用的暫存器。
判斷視頻服務進程的空閒序列中是否有可用的暫存器,如果有可用的暫存器則進程子步驟S503,否則,返回子步驟S501,重新準備動態紋理資料等待發送。
子步驟S503:將動態紋理資料複製到可用的暫存器。
當空閒序列中有可用的暫存器時,拿出該可用的暫存器,將動態紋理資料複製到可用的暫存器中以發送給攝像頭服務進程。
子步驟S504:將包括動態紋理資料的可用的暫存器移進視頻服務進程的發送序列的末尾,調用回調函數以將動態紋理資料發送至攝像頭服務進程。
將動態紋理資料複製到當前可用的暫存器後,將包含有動態紋理資料的可用的暫存器移進視頻服務進程的發送序列的末尾,調用回調函數將動態紋理資料發送給攝像頭服務進程。
請參閱圖6,使攝像頭服務進程將動態紋理資料發送至3D引擎包括以下子步驟:
子步驟S601:使攝像頭服務進程接收3D引擎發來的獲取動態紋理資料的請求。
當3D引擎需要動態紋理資料時,向攝像頭服務進程發送獲取動態紋理資料的請求,攝像頭服務進程接收3D引擎發來的請求,準備動態紋理資料,等待發送。
子步驟S602:使攝像頭服務進程根據請求,檢查攝像頭服務進程內的空閒序列是否有可用的暫存器。
攝像頭服務進程檢查其內的空閒序列是否有可用的 暫存器,當有可用的暫存器則進行子步驟S603,否則,進行子步驟S605。
子步驟S603:將動態紋理資料複製到可用的暫存器中。
當攝像頭服務進程的空閒序列中有可用的暫存器時,拿出該暫存器,將動態紋理資料複製到可用的暫存器中。
子步驟S604:將包含動態紋理資料的可用的暫存器移進攝像頭服務進程的發送序列的末尾,調用回調函數將動態紋理資料發送至3D引擎中。
將包含有動態紋理資料的可用的暫存器移進攝像頭服務進程的發送序列的末尾,調用3D層的回調函數將動態紋理資料發送至3D引擎中,完成動態紋理資料從攝像頭服務進程到3D引擎的發送,結束當前的流程。
子步驟S605:放棄對當前的動態紋理資料的發送。
如果攝像頭服務進程的空閒序列中沒有可用的暫存器時,說明由於某些原因,例如系統非常繁忙,之前送去的暫存器還沒有處理完,這時就放棄對當前的動態紋理資料的發送,繼續等待下一幀動態紋理資料。
在實際應用過程中,視頻服務進程、攝像頭服務進程以及3D引擎都可以提供線程池(Thread pool),這樣可以支援資料的併發訪問,提高性能。視頻服務進程、攝像頭服務進程以及3D引擎可以併發的訪問其內的2個暫存器序列即空閒序列(Free list)和發送序列(Send list)。對於視頻服務進程,它本身的抓圖引擎和圖形引擎可以併發訪問 其內的2個暫存器序列即空閒序列(Free list)和發送序列(Send list)。而視頻服務進程、攝像頭服務進程以及3D引擎的2個暫存器序列都用線程鎖來保護,以保證在同一個進程內多線程的互斥訪問。
當3D引擎利用動態紋理資料生成一幀貼圖之後,3D引擎向攝像頭服務進程發送釋放相應暫存器的請求,使攝像頭服務進程根據請求釋放相應暫存器。
請參閱圖7,使攝像頭服務進程根據請求釋放相應暫存器一實施方式包括以下子步驟:
子步驟S701:使攝像頭服務進程根據請求,從攝像頭服務進程內的發送序列獲取第一個暫存器。
當攝像頭服務進行接收到3D引擎的釋放相應暫存器的請求時,從攝像頭服務進程的發送序列中拿出第一個暫存器。理論上,凡是3D引擎正在使用的資料,以及使用完還沒來得及釋放的暫存器都在攝像頭服務進程的發送序列中,暫存器在發送序列中的順序與資料之前發送的順序一樣。所以,每次釋放的暫存器都應該是發送序列中的第一個暫存器。因此收到釋放請求時首先調用釋放暫存器的介面從發送序列中拿出第一個暫存器。
子步驟S702:判斷第一暫存器是否是3D引擎請求釋放的相應暫存器。
判斷從攝像頭服務進程的發送序列中拿出的第一個暫存器是否是3D引擎請求釋放的相應暫存器,如果是,則進行子步驟S703,如果不是,則進行子步驟S704。
子步驟S703:使第一個暫存器從發送序列轉入空閒 序列的末尾,釋放第一個暫存器。
當從攝像頭服務進行的發送序列中拿出的第一個暫存器是3D引擎請求釋放的相應暫存器時,則將該第一個暫存器從攝像頭服務進程的發送序列移進空閒序列的末尾,釋放該第一個暫存器,完成攝像頭服務進程對相應暫存器的釋放,結束當前的流程。
子步驟S704:報錯中斷。
當從攝像頭服務進程的發送序列中拿出的第一個暫存器不是3D引擎請求釋放的相應暫存器時,則發送Assert,報錯中斷,結束當前的流程。
其中,在攝像頭服務進程釋放相應暫存器後,使攝像頭服務進程向視頻服務進程發送釋放相應暫存器的請求,使視頻服務進程根據請求釋放相應暫存器。
請參閱圖8,使視頻服務進程根據請求釋放相應暫存器一實施方式包括以下子步驟:
子步驟S801:使視頻服務進程根據請求,從視頻服務進程內的發送序列獲取第一個暫存器。
當攝像頭服務進程根據3D引擎的請求釋放相應暫存器後,攝像頭服務進行向視頻服務進程發送釋放相應暫存器的請求,視頻服務進程根據請求,從其內的發送序列拿出第一個暫存器。
子步驟S802:判斷第一個暫存器是否是攝像頭服務進程請求釋放的相應暫存器。
判斷從視頻服務進程的發送序列拿出的第一個暫存器是否是攝像頭服務進程請求釋放的相應暫存器,如果是 則進行子步驟S803,如果不是則進行子步驟S804。
子步驟S803:使第一個暫存器從發送序列轉入空閒序列的末尾,釋放第一個暫存器。
當從視頻服務進程的發送序列拿出的第一個暫存器是攝像頭服務進程請求釋放的相應暫存器時,將該第一個暫存器從視頻服務進程的發送序列移進空閒序列的末尾,釋放當前的第一個暫存器,完成視頻服務進程對相應暫存器的釋放,結束當前的流程。
在步驟S804:報錯中斷。
當從視頻服務進程的發送序列拿出的第一個暫存器不是攝像頭服務進程請求釋放的相應暫存器時,則發送Assert,報錯中斷,結束當前的流程。
通過上述描述可知,動態紋理資料的發送過程,視頻服務進程、攝像頭服務進程以及3D引擎中的暫存器將不斷在發送序列和空閒序列中不斷遷移。直到3D介面層調用攝像頭服務進程的停止介面。這時設置回調函數為空,停止視頻服務進程的抓圖動作,然後斷開視頻服務進程攝像頭服務進行以及3D引擎之間的連接。
請參閱圖9,本發明視頻資料轉換裝置一實施方式包括截取模組11、發送模組12以及貼圖模組13。
截取模組11用於截取視頻源正在播放的視頻圖像,並將視頻圖像轉換為3D引擎所需大小和格式的動態紋理資料,將動態紋理資料輸出給發送模組12。
截取模組11主要用於從視頻源比如DTV、ATV、HDMI、VGA、多媒體中的任意一種視頻源中截取正在播 放的視頻圖像,並將視頻圖像轉換為3D引擎所需要大小和格式的動態紋理資料。
發送模組12用於將動態紋理資料發送至貼圖模組13。
發送模組12主要用於對動態紋理資料的發送。
貼圖模組13用於利用動態紋理資料生成一幀貼圖並將貼圖貼到3D介面,得到動態紋理貼圖。
貼圖模組13用於利用發送模組12發送來的動態紋理資料生成一幀貼圖,同時將貼圖貼到3D介面,得到新的動態紋理貼圖。
請參閱圖10,截取模組包括圖像縮放單元21和圖像轉換單元22。圖像縮放單元21用於截取視頻源正在播放的視頻圖像,並將視頻圖像縮放至3D引擎所需大小,將縮放後的視頻圖像發送給圖像轉換單元22。
圖像縮放單元21用於根據3D引擎的參數設置,將截取得到的視頻圖像縮放至3D引擎所需的大小,並將縮放後的視頻圖像發送給圖像轉換單元22。
圖像轉換單元22用於獲取經縮放後的視頻圖像,將經縮放後的視頻圖像轉換為3D引擎所需格式的動態紋理資料,將動態紋理資料輸出給發送模組。
圖像轉換單元22接收到來自圖像縮放單元21的經縮放後的視頻圖像,根據3D引擎的參數設置,將經縮放後的視頻圖像轉換為3D引擎所需的格式的動態紋理資料。
請參閱圖11,發送模組包括第一發送單元31和第二 發送單元32。第一發送單元31用於將動態紋理資料從視頻服務進程發送至攝像頭服務進程。
第一發送單元31用於在視頻服務進程接收到獲取動態紋理資料的請求後,從暫存器中獲取動態紋理資料,將動態紋理資料發送至攝像頭服務進程。第一發送單元31通過將動態紋理資料複製到視頻服務進程的可用的暫存器,通過調用回調函數將動態紋理資料發送至攝像頭服務進程。
第二發送單元32用於將動態紋理資料從攝像頭服務進程發送至貼圖模組。
第二發送單元32用於在攝像頭服務進程接收到來自貼圖模組的獲取動態紋理資料的請求後,將動態紋理資料從攝像頭服務進程發送至貼圖模組。第二發送單元32通過將動態紋理資料複製到攝像頭服務進程的可用的暫存器,通過調用回調函數將動態紋理資料發送至貼圖模組。
在另一實施方式中,視頻資料轉換裝置還包括:釋放模組,用於貼圖模組生成一幀貼圖之後,使攝像頭服務進程和視頻服務進程釋放發送動態紋理資料的相應暫存器。
當貼圖模組利用動態紋理資料生成一幀貼圖之後,釋放模組使攝像頭服務進程釋放用於發送當前動態紋理資料的相應暫存器。當攝像頭服務進程釋放相應暫存器之後,釋放模組使視頻服務進行釋放用於發送當前動態紋理資料的相應暫存器。
在另一實施方式中,視頻資料轉換裝置還包括:連接模組,用於使視頻服務進程、攝像頭服務進程、3D 介面建立連接。
連接模組用於在系統啟動後,使視頻服務進程、攝像頭服務進程以及3D介面建立連接,便於隨時獲取動態紋理資料。
其中,在另一實施方式中,視頻資料轉換裝置還包括:顯示模組,用於顯示貼圖模組得到的動態紋理貼圖。顯示模組在貼圖模組得到動態紋理貼圖後,將動態紋理貼圖輸出並顯示出來。
其中,在另一實施方式中,視頻資料轉換裝置還包括:視頻源選擇模組,用於選擇視頻源。視頻源選擇模組用於通過多工器選擇3D引擎指定的視頻源,比如選擇DTV、ATV、HDMI、VGA、多媒體中的任意一種作為視頻源。
在另一實施方式中,提供了一種智慧電視,該智慧電視包括上述任一實施方式所說的視頻資料轉換裝置。
區別於現有技術,本發明的優點在於:通過截取視頻圖像轉換為動態紋理資料,並通過3D引擎利用動態紋理資料生成新一幀的貼圖貼到3D介面,從而可以實現將視頻資料轉換為穩定連續的動態紋理貼圖,並達到比較高的幀率,將節目視頻與3D完美融合,提供一種全新的節目預覽及播放方式,給用戶更好的體驗效果。
同時,視頻資料轉換過程可以實現資料的並行訪問,提高了系統性能,同時也提高了視頻資料轉換的效率。
在本發明所提供的幾個實施方式中,應該理解到,所揭露的裝置和方法,可以通過其他的方式實現。例如,以 上所描述的裝置實施方式僅僅是示意性的,例如,所述模組或單元的劃分,僅僅為一種邏輯功能劃分,實際實現時可以有另外的劃分方式,例如多個單元或元件可以結合或者可以集成到另一個系統,或一些特徵可以忽略,或不執行。另一點,所顯示或討論的相互之間的耦合或直接耦合或通信連接可以是通過一些介面,裝置或單元的間接耦合或通信連接,可以是電性,機械或其他的形式。
所述作為分離部件說明的單元可以是或者也可以不是物理上分開的,作為單元顯示的部件可以是或者也可以不是物理單元,即可以位於一個地方,或者也可以分佈到多個網路單元上。可以根據實際的需要選擇其中的部分或者全部單元來實現本實施方式方案的目的。
另外,在本發明各個實施方式中的各功能單元可以集成在一個處理單元中,也可以是各個單元單獨物理存在,也可以兩個或兩個以上單元集成在一個單元中。上述集成的單元既可以採用硬體的形式實現,也可以採用軟體功能單元的形式實現。
綜上所述,雖然本案已以實施例揭露如上,然其並非用以限定本案。本案所屬技術領域中具有通常知識者,在不脫離本案之精神和範圍內,當可作各種之更動與潤飾。因此,本案之保護範圍當視後附之申請專利範圍所界定者為準。
S101~S103、S201~S202、S301~S305、S401~S402、S501~S504、S601~S605、S701~S704、S801~S804‧‧‧步驟
11‧‧‧截取模組
12‧‧‧發送模組
13‧‧‧貼圖模組
21‧‧‧圖像縮放單元
22‧‧‧圖像轉換單元
31‧‧‧第一發送單元
32‧‧‧第二發送單元
圖1是本發明視頻資料轉換的方法一實施方式的流程圖;圖2是本發明視頻資料轉換的方法一實施方式中截取視頻 圖像,並將視頻圖像轉換為3D引擎所需大小和格式的動態紋理資料的流程圖;圖3是本發明視頻資料轉換的方法一實施方式中使視頻服務進程、攝像頭服務進程、3D介面建立連接的流程圖;圖4是本發明視頻資料轉換的方法一實施方式中將動態紋理資料發送至3D引擎的流程圖;圖5是本發明視頻資料轉換的方法一實施方式中將動態紋理資料發送至攝像頭服務進程的流程圖;圖6是本發明視頻資料轉換的方法一實施方式中使攝像頭服務進程將動態紋理資料發送至3D引擎的流程圖;圖7是本發明視頻資料轉換的方法一實施方式中使攝像頭服務進程釋放相應暫存器的流程圖;圖8是本發明視頻資料轉換的方法一實施方式中使視頻服務進程釋放相應暫存器的流程圖;圖9是本發明視頻資料轉換裝置一實施方式的結構示意圖;圖10是本發明視頻資料轉換裝置一實施方式的截取模組的結構示意圖;圖11是本發明視頻資料裝換裝置一實施方式的發送模組的結構示意圖。
S101~S103‧‧‧步驟

Claims (20)

  1. 一種視頻資料轉換的方法,包括:截取一視頻源正在播放的一視頻圖像,並將所述視頻圖像轉換為一3D引擎所需大小和格式的一動態紋理資料;將所述動態紋理資料發送至所述3D引擎,使所述3D引擎利用所述動態紋理資料生成一貼圖;以及將所述貼圖貼到一3D介面,得到一動態紋理貼圖。
  2. 根據權利要求1所述的方法,其中,所述截取所述視頻源正在播放的所述視頻圖像,並將所述視頻圖像轉換為所述3D引擎所需大小和格式的所述動態紋理資料的步驟具體為:通過一視頻服務進程的一抓圖引擎截取所述視頻源正在播放的所述視頻圖像,並將所述視頻圖像縮放至所述3D引擎所需大小;以及通過所述視頻服務進程的一圖形引擎獲取經過縮放後的所述視頻圖像,將經過縮放後的所述視頻圖像轉換為所述3D引擎所需格式的所述動態紋理資料。
  3. 根據權利要求2所述的方法,其中,所述將所述動態紋理資料發送至所述3D引擎的步驟具體為:將所述動態紋理資料發送至一攝像頭服務進程;以及使所述攝像頭服務進程將所述動態紋理資料發送至所述3D引擎。
  4. 根據權利要求3所述的方法,其中,所述將所述動態紋理資料發送至所述攝像頭服務進程的步驟具體為:準備所述動態紋理資料,等待發送; 判斷所述視頻服務進程的一空閒序列中是否有一可用的暫存器;如果所述視頻服務進程的所述空閒序列中有所述可用的暫存器,則將所述動態紋理資料複製到所述可用的暫存器,否則,重新獲取新的動態紋理資料等待發送;以及將包括所述動態紋理資料的所述可用的暫存器移至所述視頻服務進程的一發送序列的一末尾,將所述動態紋理資料發送至所述攝像頭服務進程。
  5. 根據權利要求4所述的方法,其中,所述使所述攝像頭服務進程將所述動態紋理資料發送至所述3D引擎的步驟具體為:使所述攝像頭服務進程接收所述3D引擎發來的獲取動態紋理資料的一請求;使所述攝像頭服務進程根據所述請求,檢查所述攝像頭服務進程內的所述空閒序列是否有所述可用的暫存器;如果有所述可用的暫存器,則將所述動態紋理資料複製到所述可用的暫存器中,否則,放棄對當前的所述動態紋理資料的發送;以及將包含所述動態紋理資料的所述可用的暫存器移至所述攝像頭服務進程的所述發送序列的所述末尾,將所述動態紋理資料發送至所述3D引擎中。
  6. 根據權利要求1所述的方法,其中,所述使所述3D引擎利用所述動態紋理資料生成所述貼圖的步驟之後,還包括:使所述3D引擎向所述攝像頭服務進程發送釋放一相應暫 存器的一請求;以及使所述攝像頭服務進程根據所述請求釋放所述相應暫存器。
  7. 根據權利要求6所述的方法,其中,所述使所述攝像頭服務進程根據所述請求釋放所述相應暫存器的步驟具體為:使所述攝像頭服務進程根據所述請求,從所述攝像頭服務進程內的所述發送序列獲取一第一個暫存器;判斷所述第一個暫存器是否是所述3D引擎請求釋放的所述相應暫存器;如果所述第一個暫存器是所述3D引擎請求釋放的所述相應暫存器,則使所述第一個暫存器從所述發送序列轉入一空閒序列的一末尾,釋放所述第一個暫存器;以及如果所述第一暫存器不是所述3D引擎請求釋放的所述相應暫存器,則報錯中斷。
  8. 根據權利要求6所述的方法,其中,所述使所述攝像頭服務進程根據所述請求釋放所述相應暫存器的步驟之後,還包括:使所述攝像頭服務進程向所述視頻服務進程發送釋放所述相應暫存器的一請求;以及使所述視頻服務進程根據所述請求釋放所述相應暫存器。
  9. 根據權利要求8所述的方法,其中,所述使所述視頻服務進程根據所述請求釋放所述相應暫存器的步驟具體為:使所述視頻服務進程根據所述請求,從所述視頻服務進程內的一發送序列獲取一第一個暫存器; 判斷所述第一個暫存器是否是所述攝像頭服務進程請求釋放的所述相應暫存器;如果所述第一個暫存器是所述攝像頭服務進程請求釋放的所述相應暫存器,則使所述第一個暫存器從所述發送序列轉入一空閒序列的一末尾,釋放所述第一個暫存器;以及如果所述第一暫存器不是所述攝像頭服務進程請求釋放的所述相應暫存器,則報錯中斷。
  10. 根據權利要求2所述的方法,其中,所述使所述視頻服務進程的所述抓圖引擎截取所述視頻源正在播放的所述視頻圖像的步驟之前,還包括:使所述視頻服務進程、所述攝像頭服務進程、所述3D介面建立連接。
  11. 根據權利要求10所述的方法,其中,所述使所述視頻服務進程、所述攝像頭服務進程、所述3D介面建立連接的步驟具體為:檢查所述攝像頭服務進程與所述視頻服務進程的連接是否成功;如果所述攝像頭服務進程與所述視頻服務進程的連接成功,則檢查所述攝像頭服務進程是否支援所述3D介面需要的參數;如果所述攝像頭服務進程與所述視頻服務進程的連接不成功則退出;以及如果所述攝像頭服務進程支援所述3D介面需要的參數,則設置一回調函數,啟動所述視頻服務進程的所述抓圖引擎,截取所述視頻源正在播放的所述視頻圖像,否則,取 消所述視頻服務進程、所述攝像頭服務進程、所述3D介面之間的連接。
  12. 根據權利要求1所述的方法,其中,所述將所述貼圖貼到所述3D介面,得到所述動態紋理貼圖的步驟之後,還包括:使所述動態紋理貼圖輸出至一顯示幕顯示。
  13. 一種視頻資料轉換裝置,包括:一載取模組,一發送模組,以及一貼圖模組,其中,所述截取模組用於截取一視頻源正在播放的一視頻圖像,並將所述視頻圖像轉換為一3D引擎所需大小和格式的一動態紋理資料,將所述動態紋理資料輸出給所述發送模組;所述發送模組用於將所述動態紋理資料發送至所述貼圖模組;以及所述貼圖模組用於利用所述動態紋理資料生成一貼圖並將所述貼圖貼到一3D介面,得到一動態紋理貼圖。
  14. 根據權利要求13所述的裝置,其中,所述截取模組包括一圖像縮放單元和一圖像轉換單元;所述圖像縮放單元用於截取所述視頻源正在播放的所述視頻圖像,並將所述視頻圖像縮放至所述3D引擎所需大小,將縮放後的所述視頻圖像發送給所述圖像轉換單元;以及所述圖像轉換單元用於獲取經縮放後的所述視頻圖像,將 經縮放後的所述視頻圖像轉換為所述3D引擎所需格式的所述動態紋理資料,將所述動態紋理資料輸出給所述發送模組。
  15. 根據權利要求14所述的裝置,其中,所述發送模組包括第一發送單元和第二發送單元,其中:所述第一發送單元用於將所述動態紋理資料從所述視頻服務進程發送至所述攝像頭服務進程;以及所述第二發送單元用於將所述動態紋理資料從所述攝像頭服務進程發送至所述貼圖模組。
  16. 根據權利要求13所述的裝置,更包括一釋放模組,用於所述貼圖模組生成所述貼圖之後,使所述攝像頭服務進程和所述視頻服務進程釋放發送所述動態紋理資料的一相應暫存器。
  17. 根據權利要求13所述的裝置,更包括一連接模組,用於使所述視頻服務進程、所述攝像頭服務進程、所述3D介面建立連接。
  18. 根據權利要求13所述的裝置,更包括一顯示模組,用於顯示所述貼圖模組得到的所述動態紋理貼圖。
  19. 根據權利要求13所述的裝置,更包括一視頻源選擇模組,用於選擇所述視頻源。
  20. 一種智慧電視,包括權利要求13-19之任一項所述的視頻資料轉換裝置。
TW101147899A 2012-11-30 2012-12-17 視頻資料轉換的方法、裝置和智慧電視 TWI520572B (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201210507851.6A CN102970542B (zh) 2012-11-30 2012-11-30 一种视频数据转换的方法、装置和智能电视

Publications (2)

Publication Number Publication Date
TW201421973A true TW201421973A (zh) 2014-06-01
TWI520572B TWI520572B (zh) 2016-02-01

Family

ID=47800385

Family Applications (1)

Application Number Title Priority Date Filing Date
TW101147899A TWI520572B (zh) 2012-11-30 2012-12-17 視頻資料轉換的方法、裝置和智慧電視

Country Status (3)

Country Link
US (1) US9277273B2 (zh)
CN (1) CN102970542B (zh)
TW (1) TWI520572B (zh)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
FR3038995B1 (fr) 2015-07-15 2018-05-11 F4 Dispositif interactif a affichage personnalisable
FR3042620B1 (fr) 2015-10-16 2017-12-08 F4 Dispositif web interactif a affichage personnalisable
WO2017205702A1 (en) 2016-05-27 2017-11-30 Dolby Laboratories Licensing Corporation Transitioning between video priority and graphics priority
CN108271432B (zh) * 2016-11-08 2020-12-29 深圳市大疆创新科技有限公司 视频录制方法、装置及拍摄设备
CN108845861B (zh) * 2018-05-17 2021-04-23 北京奇虎科技有限公司 虚拟摄像头的实现方法及装置
CN109151575B (zh) * 2018-10-16 2021-12-14 Oppo广东移动通信有限公司 多媒体数据处理方法及装置、计算机可读存储介质

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6961055B2 (en) * 2001-05-09 2005-11-01 Free Radical Design Limited Methods and apparatus for constructing virtual environments
US8289390B2 (en) * 2004-07-28 2012-10-16 Sri International Method and apparatus for total situational awareness and monitoring
CN100416612C (zh) 2006-09-14 2008-09-03 浙江大学 基于视频流的三维动态人脸表情建模方法
KR100864826B1 (ko) * 2006-09-29 2008-10-23 한국전자통신연구원 디지털 방송기반의 3차원 정지영상 서비스 방법 및 장치
KR101145260B1 (ko) * 2007-04-05 2012-05-25 삼성전자주식회사 3d 객체 모델에 텍스쳐를 매핑하는 방법 및 장치
US7999819B2 (en) 2007-11-20 2011-08-16 Via Technologies, Inc. Systems and methods for managing texture descriptors in a shared texture engine
CN101271587B (zh) * 2008-02-25 2010-09-08 北京理工大学 一种基于过渡光贴图的光照和阴影绘制方法
GB0810205D0 (en) * 2008-06-04 2008-07-09 Advanced Risc Mach Ltd Graphics processing systems
JP5680283B2 (ja) * 2008-09-19 2015-03-04 株式会社Nttドコモ 動画像符号化装置、動画像復号装置、動画像符号化方法、動画像復号方法、動画像符号化プログラム、及び動画像復号プログラム
US20100214598A1 (en) * 2009-02-26 2010-08-26 Xerox Corporation System for visually managing office document finishing options
CN101674483B (zh) * 2009-09-28 2011-05-18 武汉大学 一种基于动态纹理合成的虚拟参考图像选择方法
CN102306076B (zh) * 2011-07-26 2016-02-03 深圳Tcl新技术有限公司 图形动态纹理的生成方法及终端
CN102413375A (zh) * 2011-11-29 2012-04-11 康佳集团股份有限公司 一种利用gpu实现视频播放的方法及系统

Also Published As

Publication number Publication date
CN102970542A (zh) 2013-03-13
US20140157315A1 (en) 2014-06-05
TWI520572B (zh) 2016-02-01
CN102970542B (zh) 2015-06-10
US9277273B2 (en) 2016-03-01

Similar Documents

Publication Publication Date Title
TWI520572B (zh) 視頻資料轉換的方法、裝置和智慧電視
CN102981793B (zh) 一种屏幕同步方法及装置
CN108900859B (zh) 直播方法及系统
WO2016004857A1 (zh) 一种同屏共享的方法、装置及系统
WO2022135093A1 (zh) 画面显示方法、装置及电子设备
WO2019233314A1 (zh) 一种电视墙图像回显方法、服务器件及电视墙系统
WO2016004858A1 (zh) 数据处理方法、装置及移动终端设备
TWI505698B (zh) 多視角畫面之同步顯示系統以及多視角畫面之同步顯示方法
JP5982079B2 (ja) 画像伝送の方法、装置、プログラム及び記録媒体
CN105867870B (zh) 拼接墙窗口的回显方法和装置
GB2452590A (en) Visual Presenter with Image Overlay
WO2015144024A1 (zh) 多屏互动方法及装置
WO2022022689A1 (zh) 交互方法、装置和电子设备
KR20150029461A (ko) 파노라마 영상의 스트리밍 서비스 제공 시스템에서 타일링 영상 동기화 방법
WO2023000888A1 (zh) 云应用的实现方法、装置、电子设备和存储介质
WO2013023514A1 (zh) 一种图像处理方法、装置及系统
WO2022105803A1 (zh) 摄像头调用方法、系统及电子设备
CN101902596B (zh) 一种图像处理方法、图像处理装置和数字电视接收终端
TW201438000A (zh) 顯示裝置拼接組成電視牆的方法
CN110958464A (zh) 直播数据处理方法、装置、服务器、终端及存储介质
TW201946444A (zh) 一種信號源即時動態預覽方法及系統
CN105611388A (zh) 一种多画面预览的实现方法及系统
CN110457522B (zh) 信息分享的方法及装置、终端和存储介质
GB2526618A (en) Method for generating a screenshot of an image to be displayed by a multi-display system
CN113961156A (zh) 多屏显示方法、装置、系统、电子设备及计算机介质

Legal Events

Date Code Title Description
MM4A Annulment or lapse of patent due to non-payment of fees