522736 A7 ^ B7 五、發明說明(]) 【發明所屬之技術領域】 本發明係關於動畫像資料之記錄再生方法及裝置,更 詳細爲關於適用於訊框內編碼之適用頻度少之數位動畫像 編碼資料列之部份記錄之動畫像資料之記錄再生方法及裝 置。 【習知技術】 在如數位廣播般地,將數位動畫像對不特定多數之使 用者同時即時傳送之1對多之應用中,在各終端瞬間可以 開始接收動畫像資料之解碼處理之資料構造,即由任意時 刻可以解碼之編碼資料(位元流)形式被採用。 圖2係作爲數位廣播之動畫像位元流之1例,顯示 MPEG方式之資料構造。在MPEG方式中,被稱爲訊框內編 碼、訊框間編碼、雙方向編碼之3種的編碼被定義著。 「訊框內編碼」係對於現在訊框畫像,直接施以 DCT(離散餘弦轉換)之資料壓縮方法,適用訊框內編碼之訊 框在 MPEG-4 中被稱爲 I-VOP ( Intra-coded Video Object Plane )、在MPEG-2中被稱爲I-Picture。又,VOP在矩形 畫像中與訊框爲同義語。I-VOP在編碼、解碼之際,不需 要過去之訊框的解碼資訊之故,被使用爲編碼動畫像之隨 機存取時之解碼開始訊框。 「訊框間編碼」係將1個之訊框利用時間上過去之訊 框的編碼資訊進行資料壓縮之編碼方法,適用訊框間編碼 之訊框在 MPEG-4 中被稱爲 P-VOP(Pi:edictive-codedVOP)、 本紙張尺度適用中國國家標準(CNS)A4規格(210 X 297公釐) (請先閱讀背面之注意事項再填寫本頁) 丨,-------- 訂-------- •% 經濟部智慧財產局員工消費合作社印製 -4- 經濟部智慧財產局員工消費合作社印製 522736 A7 ____ B7 五、發明說明6 ) . 在MPEG-2中被稱爲P-Pictui:e。又,「雙方向編碼」係將1 個之訊框利用編碼完畢之時間上過去以及未來之2個之訊 框具有之編碼資訊進行資料壓縮之方法,適用雙方向編碼 之訊框在 MPEG-4 中被稱爲 B-VOP ( Bidirectionally predicted-coded V〇P )、在 MPEG-2 中被稱爲 B-Picture。 在以下之說明中,以MPEG-4位元流之資料構造爲前 提,被顯示於圖面之標號I設爲意指I-VOP、P爲P-VOP、 B 爲 B-VOP。 圖2所示之MPEG位元流係顯示位元流大小等、順序全 體之特徵之頭部資訊201與I-VOP202被定期插入之資料構 造。此資料構造例如在即使由以虛線所示之P-V0P與B-V0P形成之資料部份203開始位元流之接收動作之情形,在 終端側藉由等待接著出現之頭部資訊201與I-VOP202,也 可以開始接收資料之解碼處理。因此,如依據上述資料構 造,藉由將資料部份203之大小限制爲觀眾不意識到等待 時間之程度的大小,可以對各觀眾做瞬間開始之動畫像傳 送服務。 在最近開始服務之數位廣播中,上述MPEG-4之頭部資 訊201例如如圖3所示般地,係由V0S頭部201-1、V〇頭 部 201-2、V0L 頭部 201-3、G0V 頭部 201-4 形成。 V〇S頭部201-1包含決定MPEG-4產品之適用範圍之外 形等級資訊,V0頭部201-2包含MPEG-4之版本資訊。 V〇L頭部201-3包含接收資料之解碼所必須之畫像大小、編 碼位元率、訊框記憶體大小、適用工具等之資訊。又, 本紙張尺度適用中國國家標準(CNS)A4規格(210 X 297公釐) --------------------^--------- <請先閱讀背面之注意事項再填寫本頁) -5 - 522736 A7 __ B7 五、發明說明(3 ) 一 G〇V頭部201-4包含在預約再生等被活用之時刻資訊。 定期插入上述頭部資訊201與I-VOP202之資料構造在 視頻錄影或錄影資料之隨機存取成爲有效用。例如,在視 頻錄影中,藉由解析使用者按下錄影開始按鈕後最初顯現 之頭部資訊201,可以記錄其以後之資料。MPEG解碼器即 使跳過B-VOP或B-Picture之解碼處理,也成爲不會破壞順 序全體之解碼畫像列之品質之構成之故,藉由於上述資料 部份203頻繁包夾B-VOP,記錄資料之快送或高速再生等 變得容易。 【發明欲解決之課題】 在利用無線電線路之即時通訊中,由於傳送延遲、通 訊容量、資料之傳送錯誤、消耗電力等之限制,對位元流 中之頻繁的I-VOP插入變得困難。因此,以無線電線路之 使用爲前提,隨選(on-demand )型之資料流動畫像傳送服 務中,例如如圖4所示般地,不得不採用極力迴避I-VOP 之使用之編碼資料。 圖4所示之編碼資料與圖2不同,係在頭部資訊311 與I-VOP312之後,配置由連續之多數的P-VOP形成之長的 資料列313之資料構造。在此情形,於P-VOP列中,爲了 修正傳送錯誤,一般適當配置內編碼區塊。上述內編碼區 塊係具有更新由於傳送錯誤而劣化之區塊之畫像品質之功 能,在MPEG之情形,將1個之VOP分割爲16X16像素大 小之複數之區塊’以數個VOP可以更新全部之編碼區塊 本紙張尺度適用中國國家標準(CNS)A4規格(210 X 297公釐) (請先閱讀背面之注意事項再填寫本頁) _裝!--訂--------- 經濟部智慧財產局員工消費合作社印製 經濟部智慧財產局員工消費合作社印製 522736 A7 __ B7 五、發明說明(4 ) 地’編碼對象區塊之位置被週期地變更。又,在資料流動 畫像傳送服務中,例如,如圖5所示般地,頭部資訊3 11 由VOS頭部311-1、V0頭部311-2、VOL頭部311-3構成, 也有不包含GOV頭部之情形。 可是如減少位元流中之I-VOP之插入頻度,接續於卜 VOP之資料部份3 1 3之大小變長之故,即使在終端側只想記 錄接收位元流(編碼資料列)中之特定部份之情形,實際 上,會產生也記錄在由I-VOP至目的畫像訊框爲止之間接 收之多數之不需要訊框群之問題。 例如,假定圖4所示之位元流爲3分鐘之動畫像資 料,即使使用者想記錄位於位元流中之最終部份之僅僅1 5 秒鐘之動畫之情形,也必須記錄由不可缺之頭部3 11 、I- V0P3 12至目的畫像訊框爲止之全位元流。因此,例如,在 如行動電話般地,內藏小容量記憶體之終端裝置中,使用 者即使想選擇性地錄影在接收動畫中所選擇之特定位元流 部份,在目的位元流到達前,內藏記憶體變滿載,使得錄 影失敗之可能性存在,爲了確實錄影包含所希望畫面之部 份的位元流,需要將具有充分之記憶體容量之外部記憶裝 置預先接續於終端裝置。 本發明之目的在於提供··適用於內藏比較小容量的記 憶體之終端裝置之動畫像資料之記錄再生方法。 本發明之其它目的在於提供:可以將由訊框內編碼之 適用頻度少之動畫像編碼資料列被抽出之任意部份之畫像 流記錄於比較小容量之記憶體之動畫像資料之記錄再生方 本紙張尺度適用中國國家標準(CNS)A4規格(210 X 297公釐) ------1:--------------訂---------線 (請先閱讀背面之注意事項再填寫本頁) 522736 A7 _ B7 五、發明說明(5 ) - 法。 (請先閱讀背面之注意事項再填寫本頁) 本發明之進而的其它目的在於提供:可以記錄再生訊 框內編碼之適用頻度少之動畫像編碼資料列中之任意部份 之畫像流之終端裝置。 【解決課題用之手段】 爲了達成上述目的,本發明中,係以:在解碼接收之 動畫編碼資料列(接收位元流)顯示再生畫像之間,將任 意被選擇之解碼畫像當成虛擬訊框內編碼畫像保存,將產 生接續於被當成虛擬訊框內編碼畫像處理之解碼畫像之特 定期間份之再生畫像之部份的位元流當成錄影資料加以記 錄爲特徵。 經濟部智慧財產局員工消費合作社印製 如依據本發明,以上述虛擬訊框內編碼畫像爲初期資 料,依序解碼作爲錄影資料被記錄之後續訊框之位元流, 可以顯示再生畫像。上述虛擬訊框內編碼畫像也可以以再 編碼解碼畫像而獲得之編碼資料之形式而被保存。上述虛 擬訊框內編碼畫像之選擇基本上係使用者以錄影指定定時 (timing )而被進行,藉由此,在被顯不之動畫中,使用 者所希望之場面被錄影。 在本發明之合適之實施例中,爲了避免起因於使用者 操作之延遲與對於使用者指令之回應動作之延遲之錄影開 始定時之延遲,再生接收動畫中之終端裝置以指定之週期 定期更新上述虛擬訊框內編碼畫像,於每次虛擬訊框內編 碼畫像之更新,重新以更新記錄部份之接收位元流之預備 -8- 本紙張尺度適用中國國家標準(CNS)A4規格(210 X 297公釐) 522736 A7 B7 五、發明說明(6 ) … (請先閱讀背面之注意事項再填寫本頁) 錄影模式動作。在預備錄影模式動作中,使用者如指定錄 影’抑制上述虛擬訊框內編碼畫像之更新,移往繼續接收 位元流之記錄動作之錄影保存模式。錄影保存模式在使用 者指示錄影終了,或錄影用記憶體成爲滿載時終了。藉由 適當設定虛擬訊框內編碼畫像之更新週期,使用者可以由 所希望之場面確實錄影。 在只利用I-VOP與P-VOP之一般的MPEG-4解碼器中, 準備2面之訊框記憶體,使一方爲動作預測處理之參考 VOP畫像用、另一方爲現行VOP畫像用之訊框記憶體,實 行訊框單位之解碼處理,每一解碼循環交互切換記憶體用 途。在此情形,被蓄積在參考VOP用之訊框記憶體之解碼 畫像在下一解碼循環中,藉由新的解碼畫像之覆蓋而消 滅。 經濟部智慧財產局員工消費合作社印製 在本發明之第1實施例中,在將被蓄積於上述參考 VOP用之訊框記憶體之解碼畫像瞬間而且任意期間當成虛 擬訊框內編碼畫像(以下,稱爲虛擬I-VOP畫像)保存之 目的,於MPEG解碼器追加第3訊框記憶體。平常藉由將被 分配於參考VOP畫像用、現行VOP畫像用之2個之訊框記 憶體交互切換,接收位元流以訊框單位被解碼。在虛擬I-V〇P畫像之更新定時中,將參考VOP畫像用之訊框記憶體 切換爲虛擬I-VOP畫像用,將至目前爲止成爲虛擬I-VOP畫 像用之訊框記憶體切換爲現行VOP畫像用。如依據上述構 成,不進行訊框記憶體間之畫像資料轉送’在瞬間保存解 碼畫像之後,可以解碼後續訊框。 -9- 本紙張尺度適用中國國家標準(CNS)A4規格(210 X 297公釐) 經濟部智慧財產局員工消費合作社印製 522736 _____B7___ 五、發明說明(7 ) 產生接續於虛擬I-VOP畫像之特定期間份之再生畫像 之部份的接收位元流被蓄積在成爲錄影記憶體之位元流記 憶體。於本實施例中,錄影之再生係藉由將虛擬I-VOP畫 像用之訊框記憶體切換爲參考VOP畫像用,將由位元流記 憶體被讀出之編碼資料供給於MPEG解碼器而被達成。 在本發明之第2實施例中,代替上述第3訊框記憶 體,使用MPEG編碼器,在成爲虛擬I-VOP畫像之更新定時 之時間點,將被蓄積於參考VOP畫像用之訊框記憶體之參 考VOP畫像供給MPEG編碼器。在MPEG編碼器被編碼之畫 像資料被蓄積在位元流記憶體。因此,在第2實施例中, 虛擬I-VOP畫像與後續畫像全部當成編碼資料被蓄積在位 元流記憶體,錄影再生時,由位元流記憶體被讀出之編碼 資料陸續被供給於MPEG解碼器。 【發明之實施形態】 以下,參考圖面說明本發明之實施例。 圖6係顯示例如依據被搭載於行動電話等之無線電通 訊終端之本發明之動畫資料處理系統之第1實施例。 本實施例之特徵爲:MPEG-4解碼器503在參考VOP用 訊框記憶體、現繩VOP用訊框記憶體之外,具備虛擬I-VOP畫像保存用之第3訊框記憶體。於具備:實行各種之 應用軟體(程式)之微處理器;以及處理動畫像資料之 DSP(數位信號處理器)之無線電通訊終端中’可以藉由DSP 之資料處理而實現上述MPEG-4解碼器503之機能。此處’ (請先閱讀背面之注意事項再填寫本頁)
本紙張尺度適用中國國家標準(CNS)A4規袼(210 X 297公釐) -10- 522736
五、發明說明(8 ) . (請先閱讀背面之注意事項再填寫本頁) 雖然說明藉由DSP構成MPEG-4解碼器5 03之動畫資料處理 系統’但是MPEG-4解碼器503之機能也可以以專用LSI而 實現’又,也可以藉由利用微處理器之資料處理機能之軟 體而實現。 圖中,501係應用控制部(微處理器)、502係暫時儲 存被接收之編碼資料(位元流)之輸入緩衝器、503係 MPEG-4資料、504係由液晶顯示裝置等形成之解碼VOP畫 像輸出部、505係保存被傳送之動畫像之一部份用之位元 流記憶體、506係保存資料控制用之開關、507係輸入資料 選擇用之切換閘、508係具備使用者操作之各種之輸入按 鈕之輸入裝置。 MPEG-4解碼器部503、輸出部504、位元流記憶體 505、開關506以及閘507係藉由由應用控制部501被輸出 知控制信號521、522、520、523、524而分別被控制。 又,輸入緩衝器502藉由由應用控制部501被輸出之控制信 號525而被淸除。 經濟部智慧財產局員工消費合作社印製 在解碼傳送動畫像輸出於顯示畫面之接收動畫像輸出 模式中,切換閘507選擇由圖面上被省略之無線電接收線 路被輸出之動畫編碼資料(位元流),透過總線5 11供給 於輸入緩衝記憶體502。暫時被蓄積在輸入緩衝記憶體502 之動畫編碼資料依序被讀出,透過總線512、514被供給於 解碼器503與開關506。開關506藉由控制信號523被開關 (QN-OFF )控制,於開啓期間中之編碼資料透過總線515 被輸入位元流記億體505。對於位元流記憶體505之資料的 -11 - 本紙張尺度適用中國國家標準(CNS)A4規格(210 X 297公釐) 522736 _______B7__ 五、發明說明(9 ) . 寫入與讀出係藉由控制信號520而被控制。 (請先閱讀背面之注意事項再填寫本頁) MPEG-4解碼器部503係由:第1、第2、第3訊框記 憶體101、102、103、及訊框記憶體控制部100、及解析 由總線512被輸入之編碼資料之分離部104、及誤差解碼部 105、動作補償部1〇6、相加上述誤差解碼部105與動作補 償部106之輸出之加法器107、及將由上述加法器來之輸出 選擇性地供給第1、第2、第3訊框記憶體101〜103用之第 1切換閘108、及將第1、第2、第3訊框記憶體101〜 103之輸出選擇性地供給輸出部504與動作補償部106用之 第2切換閘109形成。上述訊框記憶體控制部100係回應由 應用控制部501來之控制信號521 ,對第1、第2切換閘 108、109給予控制信號111、112,切換訊框記憶體101〜 103之輸入輸出。 經濟部智慧財產局員工消費合作社印製 上述分離部1 04係解析由總線5 1 2被輸入之編碼資料, 檢測頭部資訊。由開始解析動作至最初的頭部資訊被檢測 出爲止被輸入之編碼資料被廢棄。分離部104由被檢測出 之各頭部資訊抽出畫像大小與時刻精度資訊,將其傳遞於 應用控制部501。分離部104依循由被包含在VOL頭部之適 用工具資訊而一意決定之資料構造,解析接續上述頭部資 訊被輸入之一連串之VOP資料,將由各VOP資料被抽出之 時刻相關資訊、誤差相關資訊、動作相關資訊個別分配於 應用控制部501、誤差解碼部105、動作控制部106。 於上述MPEG-4解碼器部5 03中,編碼資料被輸入分離 部104,由各VOP被抽出之誤差資訊與動作資訊分別被分 本紙張尺度適用中國國家標準(CNS)A4規格(210 X 297公釐) ~ 522736 B7__ 五、發明說明(l〇 ) . (請先閱讀背面之注意事項再填寫本頁) 配於誤差解碼部105與動作補償部106。現在,假定第1訊 框記憶體101被分配爲現行VOP畫像用、第2訊框記憶體 102被分配爲參考VOP畫像用、第3訊框記億體103被分配 爲虛擬I-VOP畫像用之VOP解碼循環。在前循環被解碼之 VOP畫像資料被包存在成爲參考VOp畫像用之第2訊框記 憶體102。 訊框記憶體控制部100切換切換閘109以使被記憶於第 2訊框記憶體102之參考VOP畫像被供給於動作補償部106 與輸出部504,控制切換閘108以使由加法器107被輸出之 解碼VOP畫像信號被輸入第1訊框記憶體1〇1。動作補償部 106使用由分離部104被輸入之新VOP之動作資訊與參考 VOP畫像進行動作補償處理,產生預測VOP畫像。加法器 107合成上述預測VOP畫像與由誤差解碼部105被輸出之誤 差畫像,產生解碼VOP畫像。此解碼VOP畫像透過切換閘 108被輸入第1訊框記億體101。訊框記憶體控制部100關 於1個之VOP,每次解碼處理完了,依據控制信號526 , 將VOP處理之終了與解碼完畢VOP之種類以及輸出時刻通 知應用控制部501。 經濟部智慧財產局員工消費合作社印製 訊框記憶體控制部1〇〇先於下一 VOP之解碼處理,因 應由應用控制部501被給予之控制信號521,變更上述第1 〜第3訊框記憶體之任務。例如,藉由上述控制信號 521,在參考VOP畫像之保存被指示之情形,將此次作爲參 考VOP畫像用而使用之第2訊框記億體102切換爲虛擬I-V〇P畫像用,將作爲解碼VOP畫像用而使用之第1訊框記 -13- 本紙張尺度適用中國國家標準(CNS)A4規格(210 X 297公釐) 經濟部智慧財產局員工消費合作社印製 522736 一― _ B7__ 五、發明說明(11 ) - 憶體101切換爲參考VOP畫像用,將至目前爲止虛擬I-VOP 畫像被蓄積之第3訊框記憶體103切換爲現行VOP畫像用。 假如,參考VOP畫像之保存未被指示,將此次作爲參考 VOP畫像用而使用之第2訊框記憶體102切換爲現行VOP畫 像用,將作爲解碼VOP畫像用而使用之第1訊框記憶體101 切換爲參考VOP畫像用,被蓄積在第3訊框記憶體103之虛 擬I-VOP畫像保持原樣。輸出部504將由第2切換閘109被 輸出於總線5 1 3之畫像依循作爲控制信號522被給予之輸出 畫像大小、顯示定時、時刻資訊輸出於顯示畫面。 在本實施例中,如上述般地,將第1〜第3訊框之中 之其一當成虛擬I-VOP畫像用使用,將虛擬I-VOP畫像以後 之位元流蓄積在記憶體505。虛擬I-VOP畫像之變更係由應 用控制部501以參考VOP保存指令之形式被指定。 應用控制部501例如在通過輸入裝置508接受由使用者 來之錄影開始指示之時間點,藉由對開關506與訊框記憶 體控制部100給予控制信號523、521 ,可以開始虛擬1_ VOP畫像之變更(參考VOP畫像之保存)與對記憶體505 之位元流之蓄積動作。但是,等待來自使用者之指示.,一 開始錄影動作,例如,由於應用程式之快取控制之延遲 等,錄影開始位置有可能比使用者所期望之畫面延遲。 因此,在本發明之合適的實施例中,應用控制部501 在動畫之顯示中,使開關506經常爲開啓狀態,實行:藉 由控制信號520與521定期更新保存之位元流與虛擬I-VOP 畫像之預備錄影模式動作。在此模式中,以因應位元流記 (請先閱讀背面之注意事項再填寫本頁) 裝----- 111111. 本紙張尺度適用中國國家標準(CNS)A4規格(210 x 297公釐) -14- 522736 A7 B7 經濟部智慧財產局員工消費合作社印製 五、發明說明(12 ) - 憶體505之記憶容量以及控制延遲時間而被設定之指定之 週期定期更新虛擬I-V〇P畫像。又,每次在虛擬I-VOP畫像 之更新時,使續基於位元流記憶體505完畢之不需要的VOP 列(編碼資料)無效,以新接收之VOP列依序重寫。在接 受由使用者來之錄影開始指示之情形,抑制虛擬I-VOP畫 像之週期更新動作,在位元流記憶體505之記憶容量之範 圍內,移往接收位元流之蓄積錄影保存模式。 如依據上述方法,先於使用者來之錄影開始指示,錄 影動作被實行之故,在有使用者來之錄影再生指示後,可 以由使用者所期望之錄影開始畫面再生輸出指定時間份之 動畫。例如,在預備錄影模式中,利用位元流記憶體容量 之一部份,週期性地記憶可以充分補充對於使用者來之錄 影開始指示之回應延遲之數VOP〜數十VOP期間之編碼資 料,回應使用者來之錄影開始指示,移往錄影保存模式, 停止虛擬I-VOP畫像之更新,將位元流記憶體505之剩餘全 部容量使用於後述編碼資料之蓄積,可以有效利用記憶體 容量錄影使用者所期望之動畫視景。 在錄影保存模式中,爲了錄影資料之再生而預先準 備,記憶由使用者來之錄影開始指示與對應錄影終了指示 之時刻資訊。這些之時刻資訊在MPEG-4中可以利用被稱爲 r modulo一time一base」、「νορ一time一increment」之資訊。 這些資訊被包含在各VOP,modulo_time_base係顯示秒單 位,vop_time_increment係顯示秒以下之時間。上述 v〇p_time__increment 之精度在各 VOP 頭部中以 (請先閱讀背面之注意事項再填寫本頁) 裝 I I ·ϋ 一so, I I ϋ I ·ϋ ϋ I . 本紙張尺度適用中國國家標準(CNS)A4規格(210 X 297公釐) -15- 522736 A7 B7 五、發明說明(13 ) . r vop_timejncrement_resolution」被設定。 (請先閱讀背面之注意事項再填寫本頁) 上述modulo-timejase表示與之前之VOP顯示之秒時 刻之相對値,爲包含與秒單位之時間差相當之各樹枝位元 “ 1 “之位元形態(bit pattern )。例如,該VOP之時刻與 之前之VOP在秒單位一致之情形,成爲“ 〇 “,在1秒不 同之情形,成爲“ 10 “,2秒不同之情形,成爲“ 1 10 “。各VOP之秒以下之時刻藉由vop_time_increment ,以 vop_time_increment__resolution 之精度被表示。因此,時刻 資訊關於vop_time_increment記錄其之解碼値,關於 modulo_time_base記錄以錄影開始VOP爲基準之位元“ 1 “之個數即可。又,關於modulo_time_base也可以爲以更新 開始VOP爲基準之位元“ 1 “値之個數。 接著,參考圖7〜圖10說明P-VOP成爲虛擬I-VOP之 情形之預備錄影模式之MPEG-4解碼器503之動作。 圖7係顯示透過切換閘507被供給於輸入緩衝器502之 接收位元流300之一例。接收位元流300係由位於頭部資訊 311之後之I訊框(I-VOP ) 311,以及接續於其之複數之P 訊框(P-VOP ) 331、332、…而形成。圖中,被賦予於標 經濟部智慧財產局員工消費合作社印製 號I、P之數字係表示訊框號碼。現在,假定爲:上述位元 流之P2訊框332爲錄影開始VOP、P4訊框334爲顯示中、 P5訊框335爲解碼中之狀態。 在此狀態中,如圖8所示般地,此後被解碼之P5訊框 以後之編碼資料被蓄積於輸入緩衝器502。此處,第3訊 框記憶體103蓄積成爲虛擬I-VOP用之錄影開始VOP ( P2 -16- 本紙張尺度適用中國國家標準(CNS)A4規格(210 X 297公釐) 522736 A7 B7 五、發明說明(14 ) - 訊框)之情形,剩餘之第1訊框記憶體101與第2訊框記億 體102作爲現行VOP畫像用、參考VOP畫像用被交互分開 使用。例如,P4訊框之解碼循環中,第2訊框記憶體102 成爲現行VOP畫像之情形,在P5訊框之解碼循環中,第2 訊框記憶體102成爲參考VOP畫像用,P5訊框之解碼區塊 畫像陸續被蓄積在現行VOP畫像用之第1訊框記憶體101。 編碼資料之解析所必要之頭部資訊3 11以及接續於成爲現 在錄影開始VOP之P2訊框之P訊框333以後之編碼資料依 序被保存在位元流記憶體505。 經濟部智慧財產局員工消費合作社印製 (請先閱讀背面之注意事項再填寫本頁) 在P5訊框之解碼完了之時間點,假定由應用控制部 501藉由控制信號521,虛擬I_VOP畫像之更新被指示。在 此情形,如圖9所示般地,至目前爲止成爲參考VOP畫像 用之第2訊框記憶體102被切換爲虛擬I-VOP畫像用,成爲 現行VOP畫像用之第1訊框記憶體1〇1被切換爲參考VOP 畫像用,成爲虛擬I-VOP畫像用之第3訊框記憶體103被切 換爲現行VOP畫像用,下一 P6訊框336之解碼循環被實 行。此時,由被蓄積在位元流記憶體505完畢之P3、P4訊 框之編碼資料構成之部份位元流成爲無效,接續於新的虛 擬I_V〇P畫像(P4訊框)之P5訊框以後之編碼資料被蓄 積。 在P5訊框之解碼完了之時間點,假如,應用控制部 501沒有下虛擬ι-vop畫像之更新指令之情形,如圖10所示 般地,成爲解碼完畢之P5訊框之編碼資料被追加於位元流 記憶體505,將第1訊框記憶體1〇1當成參考VOP畫像、將 本紙張尺度適用中國國家標準(CNS)A4規格(210 x 297公髮1 -17- " 522736 A7 B7 五、發明說明(15) - 第2訊框記憶體102當成現行VOP畫像用,P6訊框之解碼 循環被實行。 如上述般地,在預備錄影模式中,藉由以由應用控制 部501來之控制信號521,以指定之訊框間隔週期性的指示 虛擬I-VOP畫像之更新,於位元流記憶體505重複指定時間 份之動畫編碼資料(部份之位元流)之蓄積,在有由使用 來之錄影開始之指示時,移往錄影保存模式,於抑制虛擬 I-VOP畫像之自動更新之狀態,繼續進行畫像資料之蓄積。 在錄影保存模式中,藉由重複圖10說明之動作,在位 元流記憶體505容許之範圍蓄積接收動會之後續位元順 序。在錄影保存模式中,於重複編碼資料之蓄積之間,於 有由使用者來之錄影終了之指示之情形,保存蓄積完畢之 動畫編碼資料。在此情形,在位元流記憶體505之剩餘容 量之範圍內,可以再度開始藉由預備錄影模式之資料蓄積 動作,在沒有由使用者來之特別的指示下,也可以抑制預 備錄影模式之再開。 在預備錄影模式以及接續於此之錄影保存模式被蓄積 於位元流記憶體505之編碼資料在有由使用者來之再生指 示時,接續於頭部資訊3 11,依序被讀出於總線5 1 6,透過 切換閘507與輸入緩衝器502被輸入MPEG-4解碼器503。 這些之編碼資料於“?£〇-4解碼器5 03中,將虛擬1-乂〇?畫 像當成初期畫像被解碼處理,再生畫像被輸出於顯示畫 面。關於錄影資料之全部,也可以在再生動作終了時,解 除錄影保存,自動地再度開始預備錄影模式動作。 本紙張尺度適用中國國家標準(CNS)A4規格(210 X 297公釐) (請先閱讀背面之注意事項再填寫本頁) · I I I I I I I 訂-! 111!·. 經濟部智慧財產局員工消費合作社印製 -18- 522736 Α7 _ Β7 五、發明說明(16) . (請先閱讀背面之注意事項再填寫本頁) 又’在圖9中,爲了使位元流記憶體505之蓄積內容明 確,雖然使無效資料(P3、P4訊框)成爲削除之形式,但 是在實際之應用上,將頭部3 11之記憶區域以外之記憶體 區域當成環記憶體(ring memory)使用,將P5訊框之編碼 資料如圖10所示般地,寫入P4訊框之後,將P5訊框寫入 區域之前端位址記憶爲有效資料區域之開始位址亦可。在 此情形,於編碼資料被寫入位元流記憶體505之最後之區 域之時間點,寫入位址回到頭部3 11之下一位置,新的編 碼資料被寫於無效資料(P3、P4訊框)區域,於錄影再生 時,編碼資料列(位元流)由有效資料區域之開始位址被 讀出。 接著,參考圖11〜圖14說明I_VOP被包含在接收位元 流之P-VOP列中之情形的預備錄影模式動作。 圖11係顯示I-VOP可以成爲虛擬I-VOP之接收位元流 300-2之1例。接收位元流300-2與圖7所示之位元流300不 同,第4 V 334·2成爲I-VOP ( 14 )。現在,假定P2訊框 332爲錄影開始VOP、14訊框334-2爲參考VOP顯示中、 Ρ5訊框335爲現在解碼中之狀態。 經濟部智慧財產局員工消費合作社印製 在此狀態中,如圖1 2所示般地,此後被解碼之Ρ5訊框 以後之編碼資料被蓄積在輸入緩衝器502,Ρ2訊框被蓄積 在成爲虛擬I-VOP畫像用之第3訊框記億體103,例如,14 訊框被蓄積在成爲參考VOP畫像用之第2訊框記憶體1〇2, 參考將此14訊框,Ρ5訊框被解碼處理’解碼畫像依序被蓄 積在現行VOP畫像用之第1訊框記億體1〇1。又’頭部資訊 -19- 本紙張尺度適用中國國家標準(CNS)A4規格(210 X 297公釐) 522736 A7 B7 五、發明說明(17) - 311以及接續於錄影開始VOP之P2訊框之P3、P4訊框之編 碼資料3 3 3、334-2被保存在位元流記憶體505。 如上述14訊框般地,將I-VOP當成參考VOP被進行解 碼時,由應用控制部501被指示虛擬I-VOP之更新之情形, 如圖13所示般地,蓄積14訊框之第2訊框記憶體102成爲 虛擬I-VOP畫像用,第1訊框記憶體101由現行VOP畫像用 被切換爲參考VOP畫像用,第3訊框記憶體103由虛擬I-VOP畫像用被切換爲現行VOP畫像用。又,在位元流記憶 體505中,至目前爲止被蓄積之P3、14訊框之編碼資料被 設爲無效,接續於虛擬I-VOP畫像(14訊框)之訊框 (P5、P6、…)之編碼資料依序被蓄積。 如上述般地,I-VOP成爲虛擬I-VOP時,由檢測此之應 用控制部501對位元流記憶體505下指令,例如,如圖14 所示般地,使比14訊框前面之畫像資料無效,使14訊框以 後之訊框之編碼資料334-2、335 、336、…留下地控制 之。在此情形,在有由使用者來之錄影再生之指示時,利 用由位元流記憶體505被讀出之14訊框之編碼資料,P5訊 框以後之編碼資料被解碼。 經濟部智慧財產局員工消費合作社印製 (請先閱讀背面之注意事項再填寫本頁) %, 接著,說明藉由圖6所示之動畫資料處理系統之錄影 資料之再生處理。 應用控制部501通過輸入裝置508,一接受由使用者來 之錄影資料之再生指示,藉由控制信號521 ’對訊框記憶 體控制部100指示錄影之再生。回應此指令,訓1〇〇使在現 在時間點成爲虛擬I-V0P畫像用之訊框記憶體之內容當成 本紙張尺度適用中國國家標準(CNS)A4規格(210 X 297公釐) -20- 經濟部智慧財產局員工消費合作社印製 522736 ___B7___ 五、發明說明(18 ) . 參考VOP被輸入動作補償部106地,對切換閘109給予切換 控制信號11 2,剩餘之訊框記憶體之一方成爲現行VOP畫 像用地,對切換閘1 08給予切換控制信號111。應用控制部 501接續於上述錄影再生指令(控制信號521 )產生控制信 號523、524、525,藉由此,淸除輸入緩衝器502,在遮 斷由輸入緩衝器502對位元流記憶體505之資料輸入之狀 態,由位元流記憶體505被讀出於總線516之資料透過切換 閘507被供給於輸入緩衝器502。 如在圖8〜圖13說明般地,於虛擬I-VOP畫像用訊框 記憶體保持P-VOP (或I-VOP )之解碼資料,於位元流記 憶體505蓄積後續訊框之編碼資料之情形,將由輸入緩衝 器502被讀出之編碼資料依序供給MPEG-4解碼器503,將 由虛擬I-VOP畫像用訊框記憶體獲得之P-VOP (或I-VOP ) 之畫像訊框當成參考VOP開始後續訊框之解碼。之後,每 一訊框藉由切換現行VOP畫像用訊框記憶體與參考VOP畫 像用訊框記憶體,錄影資料陸續被再生。 參考VOP畫像用訊框記憶體所獲得之再生畫像依序被 輸出於輸出部504。此時,將由位元流記憶體505被讀出之 各訊框之同步時刻於應用控制部501檢查後,由使用者指 定錄影之時刻的訊框起開始顯示地,以控制信號522控制 輸出部504亦可。 如在圖14說明般地,在由I-VOP開始之編碼資料被蓄 積於位元流記憶體505之情形,省略將虛擬I-VOP畫像用訊 框記憶體接續於動作補償部106用之切換閘109之控制動 (請先閱讀背面之注意事項再填寫本頁)
I ϋ 1 §mmm n ϋ I 一 5, ·.1 ϋ n I ϋ ϋ ϋ I %, 本紙張尺度適用中國國家標準(CNS)A4規格(210 X 297公釐) _ 21 _ 522736 A7 B7____ 五、發明說明(19 ) - 作,將由位元流記憶體505被讀出之畫像編碼資料依序供 給於MPEG-4解碼器即可。 圖1係顯示依據由MPEG-4編碼系統省略保存VOP畫像 用之訊框記憶體之本發明之動畫資料處理系統之第2實施 例。此實施例之特徵爲··代替虛擬I-VOP畫像用之訊框記 憶體而使用MPEG編碼器601,設置將參考VOP畫像用之訊 框記憶體之輸出選擇性地輸入上述MPEG-4編碼器601用之 切換閘110。 在本實施例中,使第1、第2訊框記憶體101、102之 一方爲現行VOP畫像用、另一方爲參考VOP畫像用,使其 任意每一訊框交互切換,在各編碼循環中,藉由將參考 VOP畫像用訊框記憶體之輸出供給於動作補償部106,解碼 接收位元流。又,藉由將參考VOP畫像用訊框記憶體之內 容輸出於輸出部504以顯示接收動畫。 實行預備錄影模式中之應用控制部501與在圖6說明之 第1實施例相同,藉由控制信號521 ,對訊框記憶體控制 經濟部智慧財產局員工消費合作社印製 部100週期性地指示虛擬I-VOP畫像之更新。訊框記憶體控 制部100 —接受上述虛擬I-VOP畫像之更新指令,在下一訊 框之解碼循環中,切換切換閘110以使參考VOP畫像用訊 框記憶體之輸出被輸入動作補償部106與MPEG-4編碼器 601之兩方。 MPEG-4編碼器601將由切換聞110透過總線611被輸 入之參考VOP畫像內編碼。在MPEG-4編碼器601中被內編 碼之參考VOP畫像當成包含頭部資訊之編碼資料被輸出於 -22- (請先閱讀背面之注意事項再填寫本頁) %, 本紙張尺度適用中國國家標準(CNS)A4規格(210 X 297公釐) 522736 A7 _____ B7 五、發明說明(20 ) - 總線612,作爲虛擬I-VOP被蓄積於位元流記憶體505。但 是,上述MPEG-4編碼器以與保存在位元流記憶體505完畢 之頭部資訊相同之資訊實行上述參考VOP畫像之編碼處理 之情形,不一定需要保存新被產生之頭部資訊。在此情 形,MPEG-4編碼器601只要具備訊框內編碼機能即可。 例如,在終了 P4訊框之解碼處理之時間點,虛擬I-VOP之更新指令由應用控制部501被發行之情形,訊框記憶 體控制部100於將上述P4訊框當成參考VOP之P5訊框之解 碼循環中,將P4訊框供給於MPEG-4編碼器601。 以MPEG-4編碼器601被再編碼之P4訊框之再編碼資料 (位元流)4 1 1例如,如圖1 5所示般地,在位元流記憶體 505內被寫入頭部資訊311之後。此次被編碼之P5訊框之編 碼資料(位元流)3 3 5與此後被編碼之後續訊框之編碼資 料3 36、…被寫入上述再編碼資料411之後。但是,再編碼 資料(位元流)4 11例如如圖1 6所示般地,也可以使之位 於頭部資訊3 11之前。 位元流4 11之位置被以應用控制部50 1認識之故,於錄 影資料之再生時,最初將成爲虛擬I-VOP之位元流411讀 出,將其之解碼VOP畫像當成參考VOP,依序解碼下一訊 框以後之位元流即可。又,在MPEG-4中,允許頭部資訊之 再送之故,如圖16所示般地,即使在P4訊框再編碼資料 411之後存在接收編碼資料之頭部資訊3 1 1之情形,也可以 解碼處理。 又,如圖11所示之14訊框334-1般地,接收位元流包 本紙張尺度適用中國國家標準(CNS)A4規格(210 X 297公釐) _ 23 - (請先閱讀背面之注意事項再填寫本頁)
Γ· 4··· I Μ·· Μ·· ·! 】fJI 1_· 1 ϋ* —Bi 1 ϋ I I 經濟部智慧財產局員工消費合作社印製 522736 A7 B7 五、發明說明(21 ) - 含前端I-VOP以外之I-VOP訊框之情形’在定期更新之外’ 如配合各I-VOP之解碼定時而更新虛擬Ι·ν〇ρ ’於應用控制 部501判定成爲保存對象之VOP之種類’在將I-VOP訊框當 成參考VOP之解碼循環中,省略對MPEG_4編碼器之資料供 給即可。在此情形,位元流記憶體505之內容例如以在圖 1 4說明之形式被更新。 圖17係顯示依據本發明之動畫資料處理系統之第3實 施例。 在本實施例中,MPEG_4編碼器具備現行VOP畫像用、 參考VOP畫像用、虛擬I-VOP畫像用之3個之訊框記憶體 101〜103,進而成爲MPEG-4編碼器601被附加之構造。 如依據本實施例,係採用:將參考VOP保存於虛擬I-VOP 畫像用之訊框記憶體後,以任意之定時再編碼,當成虛擬 I-VOP蓄積於位元流記憶體505之控制順序。 於上述第1、第2實施例中,成爲虛擬I-VOP畫像用 之訊框記憶體也可以當成暫時停止被顯示於輸出部504之 動畫像之動作用之訊框記憶體使用。例如,在有由使用者 來之顯示畫面之暫時停止要求時,藉由切換閘111 ,將現 在被輸出於顯示畫面之參考VOP畫像用訊框記憶體切換爲 虛擬I-VOP畫像用訊框記憶體,同時,將該虛擬I-VOP畫像 用訊框記憶體之內容輸出於輸出部504地切換切換閘109。 藉由此切換操作,對顯示部之動畫輸出暫時停止,可以使 顯不畫面成爲靜止畫狀態。 又,顯示畫面之停止期間中,也可以中斷接收位元流 本紙張尺度適用中國國家標準(CNS)A4規格(210 X 297公釐) (請先閱讀背面之注意事項再填寫本頁)
Γν Γ . 0 in I mmmt I ϋ ί"-, ·ϋ 1 amMt ϋ ϋ ϋ·. I 經濟部智慧財產局員工消費合作社印製 -24- 522736 A7 B7 五、發明說明(22 ) . (請先閱讀背面之注意事項再填寫本頁) 之解碼處理,利用其它之2個訊框記憶體繼續接收位元流 之解碼處理亦可。在後者之情形,參考VOP畫像用之訊框 記憶體之內容被供給於動作補償部106,只被利用於下一 訊框之解碼處理,不被反映於輸出部504。於顯示畫面停 止期間中,在保存用位元流記憶體505蓄積接收位元流, 於位元流記憶體成爲滿載之時間點,停止解碼處理亦可。 又,輸入緩衝器502比較大容量之情形,於顯示畫面 停止期間中,將被接收之位元流蓄積於輸入緩衝器,在輸 入緩衝器成爲滿載之時間點,解除暫時停止亦可。畫像傳 送伺服器具備因應由終端來之暫時停止要求,暫時停止資 料之傳送機能之情形,使用者指示顯示畫面之暫時停止 時,由應用控制部501對畫像傳送伺服器要求資料傳送之 暫時停止,使用者解除顯示畫面之暫時停止時,再度開始 畫像之傳送動作亦可。 經濟部智慧財產局員工消費合作社印製 上述顯示畫面之暫時停止機能也可以利用於錄影資料 之再生時,例如,在再生顯示錄影資料中,因應由使用者 來之顯示畫面暫時停止要求,固定畫面,因應停止解除要 求,再度開始後續訊框之再生顯示,可以給予確實檢討被 使用者錄影之特定之視景之機會。 爲了由錄影資料之中檢索特定之視景,錄影再生畫像 之訊框編輯機能成爲有效。例如,對於錄影資料,使用者 指示訊框編輯再生之情形,訊框記憶體控制部1〇〇在解碼 循環間自動地設定休止期間,以每一訊框可以識別之程度 的週期切換顯示畫面。在此情形,也可以因應使用者來之 -25- 本紙張尺度適用中國國家標準(CNS)A4規格(210 X 297公釐) 522736 A7 B7 五、發明說明(23 ) _ (請先閱讀背面之注意事項再填寫本頁) 指示使畫面之切換週期爲可變。又,因應使用者來之指 示,1訊框1訊框進行訊框編輯亦可。又,如捕取檢索之 畫像可以當成壁紙使用。 圖18係顯示依據本發明之動畫資料處理系統之第4實 施例。 在上述第2、第3實施例中,藉由MPEG-4編碼器601 再編碼當成虛擬I-VOP應保存之參考VOP,蓄積於位元流 記憶體505。此藉由使虛擬I-VOP之編碼方式與被蓄積再位 元流記憶體505之後續訊框之編碼方式統一,係爲了可以 以相同之MPEG-4解碼器503處理由位元流記憶體505被讀 出之全部之錄影資料之故。但是,將虛擬I-VOP以不同於 接收位元流之編碼方式編碼,於錄影資料之再生處理時, 只將虛擬I-VOP以與後續訊框不同之解碼方式進行解碼處 理,也可以將此當成參考VOP再生後續訊框。 圖18所示之第4實施例係代替圖1所示之動畫像編碼 方式之MPEG-4編碼器601 ,而使用靜止畫向編碼方式之 JPEG之編碼器701 ,藉由此,產生虛擬I-VOP 。即,以 經濟部智慧財產局員工消費合作社印製 JPEG方式再編碼參考VOP畫像用之訊框記憶體101或102 之畫像資料,當成虛擬I-VOP蓄積於位元流記憶體505。接 續於虛擬I-VOP之後續訊框之編碼資料維持MPEG-4方式之 原樣被蓄積在位元流記憶體505。 於錄影再生時,將上述虛擬I-VOP由位元流記憶體505 讀出於總線713,將以JPEG編碼器702被解碼之虛擬I-VOP 畫像藉由切換閘108設定於參考VOP畫像用之訊框記憶體 -26- 本紙張尺度適用中國國家標準(CNS)A4規格(210 X 297公釐) 522736
五、發明說明(24 ) . (請先閱讀背面之注音?事項再填寫本頁) 101或102。由位元流記憶體505被讀出之後續訊框之編碼 資料以上述虛擬I-VOP爲初期畫面陸續以MPEG-4解碼器 503被解碼。如此,藉由將虛擬I-VOP以靜止畫向編碼方式 之編碼器再編碼,可以更壓縮虛擬I-VOP畫像之編碼資料 大小。 上述第4實施例之方式也同樣可以適用於圖17所示之 具備3面之訊框記憶體之動畫處理系統。又,虛擬I-VOP 畫像之編碼/解碼方式在JPEG以外,例如也可以適用 MPEG-4靜止畫像編碼方式或ZIP之類的其它之編碼/解碼 方式或壓縮工具。 在上述之實施例中,接收位元流雖成爲以MPEG-4被編 碼者,但是在本發明之動畫資料處理系統中,藉由使解碼 器5 03適用於接收位元流之編碼方式,例如,也可以處理 以MPEG-1、MPEG-2、H.261、H.263等其它之編碼方式被 壓縮之動畫資料。依據編碼方式,圖3所示之頭部資訊不 存在,在該情形,省略頭部資訊之解碼與對位元流記憶體 之蓄積即可。 經濟部智慧財產局員工消費合作社印製 又,在上述實施例中,將參考VOP畫像用之訊框記憶 體之內容供給動作補償部106與輸出部504,在有由使用者 來之錄影開始之指示時,將相當於顯示畫面之參考VOP畫 像用之訊框記憶體之內容視爲錄影開始畫面,記憶附隨上 述參考VOP之時刻資訊,控制錄影資料之再生。但是,如 考慮對於顯示畫面之使用者操作之延遲,在有由使用者來 之錄影開始之指示時,也可以將比參考VOP還前之訊框當 -27- 本紙張尺度適用中國國家標準(CNS)A4規格(210 X 297公釐) 522736 A7 — B7 五、發明說明(25 ) „ 成錄影開始畫面處理之。 (請先閱讀背面之注意事項再填寫本頁) 又,在現行VOP畫面用、參考VOP畫面用之訊框記億 體之外,準備保持顯示畫面之輸出畫像之顯示VOP畫面用 之訊框記憶體,通常以現行VOP畫面用、參考VOP畫面 用、顯示VOP畫面用、現行VOP畫面用之順序切換訊框記 憶體用途,在虛擬I-VOP之更新時,將顯示VOP畫面用切 換爲虛擬I-VOP畫面用,將虛擬Ι·ν〇Ρ畫用當成現行VOP 畫面用使用亦可。 經濟部智慧財產局員工消費合作社印製 如此將顯示VOP畫像用之訊框記憶體與參與解碼處理 之參考VOP畫像、現行VOP畫像用之訊框記憶體做成不同 記憶體之情形,畫像之解碼處理與顯示處理被完全分離之 故,例如,依據輸出部之情況,即使在產生需要變更顯示 VOP畫面用記憶體之內容之情形,可以迴避對解碼處理造 成不好影響。又,於上述訊框記憶體構成中,例如,將參 考VOP畫面用之訊框記憶體之內容輸出於顯示畫面,將顯 示VOP畫面用之訊框記憶體當成前一顯示VOP畫面用而使 用,使用者做錄影指定時,可以將比現在之顯示畫面還早 1個之訊框當成錄影開始VOP或虛擬I-VOP記憶之。 接著,說明指示傳送動畫資料之錄影、錄影資料之再 生、再生畫面之暫時停止用之使用者介面。 圖19係顯示作爲視頻處理用專用之操作按鈕,具備再 生按鈕821、錄影按鈕822、停止按鈕823、暫時停止按鈕 824之行動電話終端800之操作面之1例。 再生按鈕821例如被使用於接收使用者藉由Web檢索 -28- 本紙張尺度適用中國國家標準(CNS)A4規格(210 X 297公釐) 522736 A7 B7 五、發明說明(26 ) - (請先閱讀背面之注意事項再填寫本頁) 等找到之視頻資料,於顯示畫面8 11再生之際,或再生錄 影之編碼資料之際。上述再生按鈕821 —被按下,應用控 制部501啓動動畫再生控制用之程式或DSP600,將被解碼 之畫像輸出於成爲輸出部5 04之一部份之顯示畫面811。由 再生開始時刻起至現在爲止之經過時間(「2秒25」)時 時刻刻被顯示在時刻顯示區域8 1 2。 記錄按鈕822被使用於對MPEG-4解碼器指示錄影開始 用。MPEG-4解碼器一面週期性地更新保存VOP畫像(虛擬 I-VOP )以面以預備錄影模式記錄接收畫像時,使用者操作 記錄按鈕822 (錄影指示)之情形,應用控制部501終止保 存VOP畫像之週期性更新,記憶附隨錄影開始訊框(現在 顯示中之畫像訊框)之編碼資料之同步時刻,同時,以錄 影保存模式將其以後之接收畫像蓄積於位元流記憶體 5 05。被記憶之同步時刻在時刻顯示區域8 1 2作爲錄影開始 時刻被顯示。在圖示之例中,顯示在由接收畫像之再生開 始經過2秒05之時間點,錄影被開始。 經濟部智慧財產局員工消費合作社印製 錄影資料之再生方法例如有:由被蓄積於位元流記憶 體505之錄影資料之前端VOP再生顯示之方法,以及由使 用者指示錄影之時刻(錄影開始同步時刻)之VOP再生顯 示之方法。通常由錄影開始同步時刻之VOP再生,只限於 使用者特別指示之情形,由錄影前端VOP再生。 停止按鈕823被使用於停止接收畫像之再生動作、錄 影動作、錄影在生動作用。於錄影動作中’停止按鈕823 被操作之情形,在此時間點,記憶附隨解碼處理中之編碼 -29- 本紙張尺度適用中國國家標準(CNS)A4規格(210 X 297公釐) 功736 A7 B7___ 五、發明說明(27 ) 資料之同步時刻之同時,將此當成錄影終了時刻顯示於時 刻顯示區域8 1 2 ,於位元流記憶體再被錄影之最終訊框 (請先閱讀背面之注意事項再填寫本頁) (編碼資料)之後記憶結束碼。以錄影保存模式動作中, 位元流記憶體505似乎要滿載之情形,不等待使用者來之 錄影停止指示地,自動終了錄影,顯示錄影終了時刻。 又,時刻顯示區域812狹窄之情形,可以採用:上述 錄影終了時刻例如代替錄影開始時刻而顯示,或停止顯示 經過時間之現行V 0 P之同步時刻之顯示,於此暫時顯示錄 影終了時刻等之方式。 暫時停止按鈕824被使用於暫時停止接收畫像或錄影 之再生動作,使顯示畫面靜止用。接收畫像之再生動作停 止期間中,MPEG-4解碼器503如前述般地,可以繼續解碼 處理。再一次按暫時停止按鈕824,脫離暫時停止狀態, 再生動作被再度開始。前述之顯示畫面之訊框編輯例如在 暫時停止狀態下,藉由按下再生按鈕82 1可以進行指示。 又,由訊框編輯狀態往通常之再生模式之回歸例如藉由按 下暫時停止按鈕後,按下再生按鈕之操作而可以進行指 示0 經濟部智慧財產局員工消費合作社印製 圖20係顯示將圖18所示之視頻相關專用按鈕821〜 824之機能置換爲數字按鈕之行動電話終端801之操作面之 1例。 831係Video按鈕,藉由按下此,終端進入視頻模式 (接收動畫輸出碼),顯示視頻模式之標記“ V "被顯示於 時刻顯示部8 1 2。終端一進入視頻模式,數字1之輸入按鈕 本紙張尺度適用中國國家標準(CNS)A4規格(210 X 297公釐) · - 522736 A7 B7__ 五、發明說明(28 ) - 834作用爲再生按鈕、數字2之輸入按鈕835作爲用記錄/ 停止按鈕、數字3之輸入按鈕836作用爲暫時停止按鈕。 832與833係音量按鈕,於暫時停止中,按鈕832作用爲訊 框編輯。 上述圖19、圖20所示之使用者介面不過爲單純之實施 例而已,於依據本發明之動畫像之記錄/再生控制中,使 用者來之控制指令很淸楚係可以採用圖標選擇方式或其它 之按鈕操作方式等,其它之任意之輸入方式。 以上,雖就本發明之實施例而做說明,但是本發明包 含如下之變形。 (1 )接收位元流如圖2所示般地,也可以爲在中途包 含B_VOP之編碼資料。但是,應保存在位元流記憶體之編 碼資料之前端成爲B-VOP之情形,可以將前端VOP以及接 續於此之複數之B-VOP之編碼資料由保存對象去除。假 如,要解碼B-VOP而顯示之情形,需要增設參考VOP畫像 用之訊框記憶體。 (2 )接收位元流也可以爲矩形畫像以外之任意形狀 畫像。但是,在MPEG-4中,需要參考VOP畫像之各編碼區 塊之形狀形式之故,在解碼矩形畫像以外之位元流之情 形,於虛擬I-VOP之更新時以及錄影開始時,記錄編碼資 料之同步時刻資訊與各編碼區塊之形狀形式。 (3 )將新的虛擬I-VOP保存於位元流記憶體之情形’ 在實施例中,雖然使成爲不需要之從前的位元流成爲無 效,但是使1個之虛擬I-VOP與接續於此之複數VOP之位 本紙張尺度適用中國國家標準(CNS)A4規格(210 X 297公釐) -31 - " {請先閱讀背面之注意事項再填寫本頁) 裝— II訂-------
.P 經濟部智慧財產局員工消費合作社印製 522736 A7 B7 五、發明說明(29 ) 元流成爲1組,在位元流記憶體蓄積連續之複數組之位元 流’由舊有之組依序使之無效亦可。 (4 )預備錄影模式之虛擬I-VOP之更新替代以VOP 數決定之固定週期,使之依存於被蓄積於位元流記憶體之 錄影資料大小亦可。即,於預備錄影模式使用之記憶體容 量設定上限値,蓄積資料量超過上限値時,以下一解碼循 環更新虛擬I-VOP,置換爲新的位元流亦可。 (5 )在錄影保存模式中,位元流記憶體成爲滿載 時,記憶附隨成爲不能蓄積之後續位元流之前端VOP之同 步時刻(時刻1 ),在有由使用者來之錄影終了之指示之 時間點,記憶附隨上述後續位元流之最終VOP之同步時刻 (時刻2 ),於錄影再生時,可以使以這些之時刻資訊 (時刻1〜時刻2 )被特定之不足位元流由畫像伺服器以 檔案轉送通訊協定再度傳送。又,記憶附隨虛擬I-VOP之 下一 VOP之同步時刻(時刻0 ),在接受使用者來之錄影 終了指示前,位元流記憶體成爲滿載之情形,由畫像伺服 器再度傳送以時刻0與時刻2被特定之錄影範圍之位元流’ 以在終端側保持這些之位元流之虛擬I-VOP爲起點進行解 碼處理亦可。如此,藉由利用畫像伺服器來之再度傳送機 能,超過位元流記憶體之記憶容量之錄影再生成爲可能。 (6 )在實施例中,作爲識別使用者指定之錄影開始 訊框與錄影終了訊框用之資訊,在接收位元順序中雖然利 用附隨各畫像訊框(VOP)之同步時刻(modulo-time 一 base 以及vop_time_increment ),但是代替适些之同步時刻’例 (請先閱讀背面之注意事項再填寫本頁) ----I I I I 訂-------I I . 經濟部智慧財產局員工消費合作社印製 本紙張尺度適用中國國家標準(CNS)A4規格(210 X 297公釐) -32- 522736 經濟部智慧財產局員工消費合作社印製 A7 B7 五、發明說明(30 ) 一 如,也可以適用訊框號碼等之其它資訊。又,代替使用者 指示錄影之開始,預先登錄應錄影視景之特徵資訊,在具 備這些特徵之畫像被解碼或被再生之時間點,自動開始錄 影保存模式,也可以自動記錄指定時間份之動畫。 【發明之效果】 由以上說明可以明白地,如依據本發明,藉由將在接 收位元流之任意位置選擇之解碼畫像當成虛擬訊框內編碼 畫像(虛擬I-VOP )保存,使其爲初期畫面解碼處理後續 訊框之畫像編碼資料,可以由中途不具備隨機存取用訊框 內編碼畫像,或其之插入頻度少之動畫像編碼資料列有效 率地錄影、再生使用者期望之視景。 【圖面之簡單說明】 圖1係顯示依據本發明之動畫資料處理系統之1實施 例。 圖2係顯示動畫像位元流之MPEG-4之資料構造之1 例。 圖3係顯示MPEG-4位元流之順序頭部之構造。 圖4係顯示被適用於無線電通訊之MPEG-4位元流之資 料構造之1例。 圖5係顯示被適用於無線電通訊之MPEG-4位元流之之 順序頭部之構造。 圖6係顯示依據本發明之動畫資料處理系統之其它之 ______ 本紙張尺度適用中國國家標準(CNS)A4規格(210 X 297公釐) _ 33 - (請先閱讀背面之注意事項再填寫本頁)
522736 A7 ___ B7 五、發明說明(31 ) . 實施例。 圖7係顯示在上述動畫資料處理系統被處理之接收位 元流300之1例。 圖8係顯示接收位元流300之P5訊框之解碼循環之上 述動畫資料處理系統之記憶體之狀態。 圖9係顯示在接收位元流300之P5訊框之解碼循環, 有虛擬I-VOP更新指令之情形之記憶體之狀態。 圖10係顯示在接收位元流300之P5訊框之解碼循環, 沒有虛擬I-VOP更新指令之情形之記憶體之狀態。 圖11係顯示包含在上述動畫資料處理系統被處理之複 數之I-VOP之接收位元流300-2之1例。 圖12係顯示接收位元流300-2之P5訊框之解碼循環之 上述動畫資料處理系統之記憶體之狀態。 圖13係顯示在接收位元流300-2之P5訊框之解碼循 環,有虛擬I-VOP更新指令之情形之記憶體之狀態。 圖14係說明接收位元流300-2之P5訊框之解碼循環之 虛擬I-VOP更新指令之變形例用之圖。 圖15係顯示被再編碼之虛擬I-VOP之對位元流記憶體 505之保存形式之1例。 圖16係顯示被再編碼之虛擬I-VOP之對位元流記憶體 505之保存形式之其它例。 圖17係顯示依據本發明之動畫資料處理系統之第3實 施例。 圖18係顯示依據本發明之動畫資料處理系統之第4實 本紙張尺度適用中國國家標準(CNS)A4規格(210 X 297公釐) (請先閱讀背面之注意事項再填寫本頁) 裝 i ----訂· II------· 經濟部智慧財產局員工消費合作社印製 -34- 522736 A7 B7 五、發明說明(32) . 施例。 圖19係顯示依據本發明之攜帶型終端具備之使用者介 面之1例。 圖20係顯示依據本發明之攜帶型終端具備之使用者介 面之其它例。 【標號之說明】 100 :訊框記憶體控制部,101〜103 :訊框記憶體, 108〜110、507 :切換閘,501 :應用控制部,502 :輸入 緩衝記憶體,503 : MPEG編碼器,504 :輸出部,505 : 位元流記憶體,506 :開關,508 :輸入裝置,600 :數位 信號處理器,601 : MPEG編碼器,701 : JPEG編碼器, 702 : JPEG解碼器,800、801 :行動電話終端,811 ··顯 示畫面,812 :時刻顯示區域,821 、834 :再生按鈕, 822 :記錄按鈕,823 :停止按鈕,824、836 :暫時停止 按鈕,8 3 5 :記錄/停止按鈕 (請先閱讀背面之注意事項再填寫本頁) · n 11 1· ϋ n 1 1 一 口, ·- ϋ H ϋ I i_i I · 經濟部智慧財產局員工消費合作社印製 -35- 本紙張尺度適用中國國家標準(CNS)A4規格(210 X 297公釐)