TWI376948B - Method, device and storage medium for frame specification - Google Patents
Method, device and storage medium for frame specification Download PDFInfo
- Publication number
- TWI376948B TWI376948B TW097127608A TW97127608A TWI376948B TW I376948 B TWI376948 B TW I376948B TW 097127608 A TW097127608 A TW 097127608A TW 97127608 A TW97127608 A TW 97127608A TW I376948 B TWI376948 B TW I376948B
- Authority
- TW
- Taiwan
- Prior art keywords
- frame
- program
- time
- specifying
- receiving
- Prior art date
Links
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/44—Receiver circuitry for the reception of television signals according to analogue transmission standards
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/70—Information retrieval; Database structures therefor; File system structures therefor of video data
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/60—Type of objects
- G06V20/62—Text, e.g. of license plates, overlay texts or captions on TV images
- G06V20/635—Overlay text, e.g. embedded captions in a TV program
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs
- H04N21/44008—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics in the video stream
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/47—End-user applications
- H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
- H04N21/47214—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for content reservation or setting reminders; for requesting event notification, e.g. of sport results or stock market
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
- H04N21/81—Monomedia components thereof
- H04N21/812—Monomedia components thereof involving advertisement data
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
- H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
- H04N21/845—Structuring of content, e.g. decomposing content into time segments
- H04N21/8455—Structuring of content, e.g. decomposing content into time segments involving pointers to the content, e.g. pointers to the I-frames of the video stream
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/433—Content storage operation, e.g. storage operation in response to a pause request, caching operations
- H04N21/4331—Caching operations, e.g. of an advertisement for later insertion during playback
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/45—Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
- H04N21/462—Content or additional data management, e.g. creating a master electronic program guide from data received from the Internet and a Head-end, controlling the complexity of a video stream by scaling the resolution or bit-rate based on the client capabilities
- H04N21/4622—Retrieving content or additional data from different sources, e.g. from a broadcast channel and the Internet
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/47—End-user applications
- H04N21/478—Supplemental services, e.g. displaying phone caller identification, shopping application
- H04N21/4782—Web browsing, e.g. WebTV
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/47—End-user applications
- H04N21/482—End-user interface for program selection
- H04N21/4828—End-user interface for program selection for searching program descriptors
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
- H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
- H04N21/84—Generation or processing of descriptive data, e.g. content descriptors
- H04N21/8405—Generation or processing of descriptive data, e.g. content descriptors represented by keywords
Description
九、發明說明: 明所属技領域;3 發明背景 本發明是關於根據一使用者的指令指定一動離、影像 (動畫)中的一畫格之技術。 C先前技術3 被電視播送的一 TV節目(動態影像;動畫)包含一場 景,在該場景中,除了該節目的原始情節的内容之外還 顯示各種類型的資訊(其也被稱為廣告資訊),諸如商品的一 CM(商業訊息)、節目預告、在原版的一美食節目中介紹的 一商店的位置及在一烹調節目中介紹的一烹調食譜。 在需要這種類型的廣告資訊的情況下,—般慣例是, 在正被顯示在一TV螢幕上的一段時間期間,該資訊被迅速 寫在紙上或被錄影。 然而,準備紙且將資訊寫在紙上或啟動錄影系統且錄 製该貧訊是浪費時間的,而在另一方面,該廣告資訊保持 被顯不的一段時間是相當短的,導致該資訊不能被寫下或 錄製的一種情況。 因此,有一TV系統,該TV系統在廣告資訊被顯示的這 樣一種情況下,僅僅藉由透過一遙控器給出一指令,使一 使用者此夠獲得-所謂的螢幕備忘錄,以將—顯示影像暫 時儲存在一記憶體中。 C 明内穷】 發明概要 1376948 然而,當使用者給出指令以獲得備忘錄時,程序是, 使用者在看到且判斷顯示在τν螢幕上的廣告資訊是必需 - 的後,拿起使用者手中的遙控器且給出獲得備忘錄的指 令,及因此,出現這樣一問題:自從廣告資訊已經被顯示 5 直到該獲得指令被傳送到該TV系統之間有一延時,且使用 者所期望的資訊不能總是肯定地被獲得。 既然如此,本發明提供根據使用者的指令恰當地指定 動態影像中的一程序目標畫格。 為了解決以上給出的問題,本發明採取下面組態。 · 10 那就是,根據本發明,由電腦執行的一畫格指定方法 包含: 播放一動態影像的一步驟; 當使用者執行指示對於動態影像中的一部分場景的程 序的執行的操作時,基於該使用者的操作,接收一指令信 15 號的一步驟;及 當藉由接收該指令信號被觸發時,指定接收構成該動 態影像的該等畫格中的該指令信號時正在播放中的一畫格 ® 或距離正在播放中的該晝格一預先決定的時間長度的一畫 格作為該程序目標畫格的一步驟。 20 而且,根據本發明,一畫格指定裝置包含: 播放一動態影像的一播放單元; 一指令接收單元,其在一使用者執行指示對於該動態 影像中的一部分場景的程序的執行的操作時,基於該使用 者的操作,接收一指令信號;及 6 1376948 一畫格指定單元,當藉由接收該指令信號被觸發時, •其指定接收構成該動態影像的該等畫格中的該指令信號時 正在播放中的一畫格或距離正在播放中的該畫格一預先決 定的時間長度的一畫格作為該程序目標畫格。 ' 5 而且,本發明也可以是用以使電腦執行該畫格指定方 法的一程式。另外,本發明也可以是記錄該程式的電腦可 讀記錄媒體。電腦被使得讀取且執行這記錄媒體上的程 式,因此使其功能可被提供。 ® 在此,該電腦可讀記錄媒體隱含能夠以電、磁、光、 10 機械或藉由化學作用的方式儲存可以從電腦中讀取的諸如 資料及程式之資訊的一記錄媒體。在這些記錄媒體中,例 如,一軟磁碟、一磁光碟、一CD-ROM、一CD-R/W、一DVD、 一 DAT、一 8mm磁帶、一記憶卡等等作為從電腦可拆卸的 那些記錄媒體被給出。 15 而且,一硬碟、一ROM(唯讀記憶體)等等作為固定在 電腦内部的記錄媒體被給出。 ® 根據本發明,提供能夠根據使用者的指令恰當地指定 一動態影像中的一程序目標畫格的技術是可行的。 圖式簡單說明 20 第1圖是一搜尋系統的一概要圖。 .. 第2圖是一搜尋方法(包括一搜尋關鍵字擷取方法)的一 說明圖。 第3圖是藉由自動指定一CM的一預先決定的區域(尾 部)的搜尋該區域的一方法的一說明圖。 7 1376948 第4圖是藉由根據使用者的操作指定一晝格,擷取一關 鍵字的一方法的一說明圖。 第5圖是一分析順序的一說明圖。 第6圖是在一現場直播期間緩衝擷取的關鍵字的一範 5 例的一說明圖。 第7圖是藉由分析一指定後畫格及擷取關鍵字進行一 搜尋的一方法的一說明圖。 第8圖是説明顯示一搜尋結果的一範例的一圖式。 第9A-B圖是包含模擬一搜尋框的一區域的一影像的一 10 說明圖。 【實施方式3 較佳實施例之詳細說明 以下將參考圖式描述用以執行本發明的最佳模式。下 面實施例中的一組態是一範例,及本發明不限於該實施例 15 中的該組態。 <實施例概要> 該實施例中的一方案是,根據從一廣播電台接收的資 料或從諸如一DVD(數位多功能光碟)之儲存媒體讀取的資 料,動態影像被播放,及如果一使用者指示一指定場景, 20 而動態影像中的廣告資訊被顯示在該指定場景中,則場景 構成畫格以考慮直到該指示被傳送到一畫格指定裝置的一 延時的方式被指定。 然後,該等指定的畫格可以經歷一預先決定的程序, 諸如擷取字元及輸出一列印。 8 在下面的範例中,例示畫格如何被指定,字元(關鍵字) 怎樣被_及藉由使用該_字-搜尋程序如何被執行。 <裝置組態> 第1圖是根據實施例的一搜尋系統的一概要圖。 該實施例中的-搜尋系統10包括播放—TM播的廣 播電台的-電台側裝置HH、接收由該電台側裝置1〇1播送 的動態影像(動畫)的-使用者终端機卜藉由諸如網際網路 之網路提供資訊的-,網站伺服器2、對由該網站飼服器2提 供的資訊提供搜尋服務的一搜尋伺服器(搜尋弓丨擎)3、一排 名伺服器4等等。 該使用者終端機1對應於該搜尋系統1〇中的畫格指定 裝置。 該使用者終端機1是一通用電腦,其包括:由一cpu(中 央處理單元)、-m,it體等構成的—算術處理單元12、為 -算術程序儲存資料及軟體的—儲存單別硬碟)13、—輸入 /輸出埠14、一通訊控制單元(ccu)15等。 諸如-鍵盤、-滑鼠、一遙控^、一CD_R〇M光碟機 及-TV(電視)接收單元16之輸人裝置,及諸如—顯示裝置 及一印表機之輸出裝置被恰當地連接到該1/0埠14。 該TV接收單凡(調·^器)16經由一 丁乂天線從該廣播電 台接收無線電波’然、後將該等無線電波轉換成電信號(影像 資訊),且輸入該等信號到該I/O埠14。 該COJ 15藉由網路執行與其他電腦的通訊。 β玄儲存單元13被預先安裝m统(〇s)及應用軟體 (一畫格指定程式、一關鍵字擷取裎式、一搜尋程式)。 該算術處理單元12從贿存單元13恰當地讀取該⑽ 及該等應用程式,且執行該⑺及該等應用程式,及算 ,從該料Μ㈣CCU丨5輸人的料件資減從該儲存 早仙讀取的資訊,因而也作為—影像獲取單元(畫格指定 單元)、-分析單元、-摘取單元、—播放單元及—指^ 收單元發揮作用。 接 。。該影像獲取單元獲取影像資訊(晝格)。例如,該影像獲 取單7L接收㈣Τν接(料16接收_像冑訊,或讀取且 獲取儲存在(記錄在)該儲存單元13中的影像資訊。而且,該 影像獲取單元在接收從該指令接收單元給出的—指示信號 時,從如此獲取的畫格中指定由使用者指示的構成該場景 的該等畫格。 y' 基於由該影像獲取單元獲取的影像資訊,該播放單元 播放該動態影像。具體地說,該動態影像被顯示在該顯示 翠疋上,且該動態影像的聲音從一揚聲器被輸出。而且, 對於播放,根據使用者的操作等,該播放單元通知該丁¥接 收單元16將被接收或切換的一頻道。 該指令接收單元接收由使用者的操作給出的一搜尋指 令(指令信號)。 5亥分析單元指定相對應於模擬一搜尋框(欄)的一預先 決疋的圖樣的一區域作為一模擬搜尋框區域。 藉由辨識該模擬搜尋框區域中的字元,該擷取單元擷 取一搜尋關鍵字。 藉由使用該搜尋關鍵字,該搜尋處理單元執行一搜尋 程序或一預搜尋程序。該搜尋處理單元經由該CCU 15傳送 包含該搜尋關鍵字的一搜尋請求到該搜尋伺服器3,及取得 顯示在該顯示單元上的從該搜尋祠服器送回的一搜尋結 果。而且,該搜尋處理單元還具有根據顯示的内容摘要及 —超鏈結的搜尋結果等存取該網站祠服器’及顯示該内容 的功能。注意,該搜尋處理單元可以包含使用一般類型的 網頁瀏覽器。 另一方面,該搜尋伺服器3是一般類型的所謂的基於電 腦的搜尋引擎,其包括:用以從該使用者終端機1的該搜尋 處理單元(網頁瀏覽器)接收搜尋請求之裝置、儲存該網站伺 服器2的資訊的一儲存裝置、用以根據該已接收到的搜尋請 求的關鍵字搜尋儲存裝置以尋找該網站伺服器的一件對應 的資訊之裝置,及用以傳送該搜尋結果到該請求者使用者 終端機1之裝置。 而且’經由像網際網路之網路,該網站伺服器2被連接 到諸如該使用者終端機1之其他電腦及該搜尋伺服器3。該 網站伺服器2提供(傳送)由從另一電腦給出的存取請求 (URL等)指定的一内容(播案)給該請求者電腦。注意,該網 站伺服器2具有眾所周知的組態,及它的深入描述被省略。 同樣地,經由像網際網路之網路,該排名伺服器(關鍵 =提供伺服器)4被連接到諸如該使用者終端機〖之其他電 腦及該搜尋⑸服^ ^該排名词服根據從其他電腦給出的 凊求提供關鍵字(排名資訊),在該排名伺服器4中,儲存單 1376948 元儲存包含用以在一搜尋網頁上搜尋的關鍵字的排名資 訊,該等關鍵字被按照從最大搜尋量至最小搜尋量的順序 排序。注意,該排名伺服器4也可以與該搜尋伺服器3組合 使用。而且,一操作員可以在該儲存單元中儲存用於CM的 5 關鍵字。該排名伺服器4與一般類型的網站伺服器具有同樣 的組態,及因此其詳細解釋被省略。 <搜尋法> 然後,參考第2圖,將描述一搜尋法(包括一搜尋關鍵 字擷取方法),該搜尋法被具有以上所描述的組態的該使用 10 者終端機1基於一搜尋程式執行。 如在第2圖十所說明,在該使用者終端機1十,當透過 使用者的操作被指示音訊/視訊接收(播放)一TV節目時,根 據從該儲存單元13讀取或從該TV接收單元接收的影像資 訊,該播放單元播放該動態影像。 15 在這時,該使用者終端機1的該影像獲取單元自構成該 動態影像的一連串畫格中指定(獲取)滿足一預先決定的條 件的畫格作為一分析目標畫格(影像資訊),該預先決定的條 件稍後將被解釋(步驟卜其在後面將被縮寫為S1)。 接著,該分析單元分析該指定的畫格且指定相對應於 20 該預先決定的模擬該搜尋引擎的該搜尋框的圖案的該模擬 搜尋框區域(S2)。 而且,該擷取單元辨識該模擬搜尋框區域中的字元, 且擷取關鍵字(S3)。 然後,該搜尋單元啟動該網頁瀏覽器,且傳送由該擷 12 1376948 •取單元擷取的關鍵字到該搜尋伺服器,藉此該搜尋被執 -行,及一搜尋結果被顯示(S4)。 藉由列舉下面特定範例的方式將描述在各自步驟中的 特定程序。 5 <第一特定範例> 第3圖是顯示自動指定來自動態影像的CM畫格的一預 先決定的部分(尾部)的一搜尋法的一說明圖。 首先,該影像獲取單元檢測該動態影像(動畫)中除節目 • 的原始情節以外的CM畫格(S11)。 10 在滿足下面條件的情況下,該CM畫格由目前的CM檢 測方法指定: 1. 藉由比較前面的與後面的畫格(如果一致度小於一 預先決定的值),畫格的一整個區域證明是不同的,即,當 一視訊剪輯被改變時,有一預先決定的或較長的靜音時間 15 段° 2. 該節目的原始情節被單音地廣播,及當播放該CM時 ® 被切換到一立體聲系統,及因此該條件被設定在自從該單 音系統已經被切換至該立體聲系統直到該廣播返回到該單 音系統的一段時間。 20 3·視訊剪輯在一預先決定的時間點(例如15秒的倍數) . 被改變。 -- 4· 一預先決定的時間點(例如在該小時之前的5分鐘) 被設定。 5.根據從一EPG(電子節目導引)獲得的節目資訊,在節 13 目更換時間之前及以後的5分鐘,及當從該節目更換時間起 (以2或4)平分該節目的一時間點被設定。 注意’該CM檢測方法可以包含利用其他已知技術中的 任何一個,及也可以包含使用那些技術的一組合。 然後,該影像獲取單元設定一段時間L作為對該CM的 長度的參考》在該第一範例中,時間L被設定’諸如L=15 (分) (S12)〇 順便提一下,有很大的可能性的是:用以通知關鍵字 等的時序存在於該CM畫格的尾部,及因此該影像獲取單元 獲取從基於以上給出的該等條件檢測到的該CM畫格之首 起的一預先決定的時間長度(L/2、L/3、L-5 (秒))之後到L範 圍内的畫格。在該第一範例中,獲取的該畫格從L-5到L範 圍内變化(S13)。 然後,該分析單元分析由該影像獲取單元獲取的該畫 格(影像資訊)’且相定相對應於該預先決定的模擬該搜尋框 的圖案的區域作為模擬搜哥框區域,及該摘取單元從該模 擬搜尋框區域擷取字元(S14)。 在這時,自從該分析單元指定模擬該影像中的搜尋框 的區域,如在第9圖中所說明’該影像在一水平方向(主掃 描方向)及一垂直方向(次掃描方向)上被掃描,且一區域被 操取,在該區域中,像素在該水平或垂直方向上在一預先 決定的或較長的距離處變得連續以形成一直線。然後,該 區域被設定為該模擬搜尋框區域,在該區域中該直線組成 一長方形。 1376948 特定地,在本發明中,具有—短的寬度(在該水平方向 上)的一矩形62與矩形61相鄰,且如果字元[搜尋]存在於該 短的矩形中,即如果與諸如包含相對應於一搜尋按鈕的一 影像之預先決定的圖樣一致,則該矩形61的區域被指定作 5 為該模擬搜尋框區域。 在這時,如果能夠擷取關鍵字,則該搜尋單元被通知 該關鍵字,而如果不能擷取,則該影像獲取單元被通知不 能擷取這大概意思(S15)。 接收這不能棟取的通知的該影像獲取單元判斷這操取 10目標畫格是否在從該CM之首起的L秒之後到達(S16),及如 果該畫格不是在L秒之後到達,則獲取下一畫格(si?)。 而且,如果在步驟16中判斷該畫格是在L·秒之後到 達,則判斷該時間長度L是否小於60秒(S18),然後,如果 不小於60秒’則該處理結束,如果等於或小於6〇秒(si9), 15則隨後15秒被加到L上’且如果沒有超過該αν[的最大值(例 如60秒),則該處理循環回到步驟13,在該步驟13中該畫格 被獲取(S20)。 注意,當在步驟13中獲取該畫格時,所有從L-5秒到L 秒範圍内變化的畫格可以被獲取’然而,在基於MPEG(動 20 畫專家組)系統的動態影像的情況下,也可僅獲取I-畫面(内 畫面)。因此,如果採取僅獲取I-畫面的一方案,一通量可 被減少。 <第二特定範例> 第4圖是顯示藉由根據使用者的操作指定畫格,擷取關 15 1376948 鍵字的_方法的-說明圖,及第5圖是顯示在該第二範例中 的一分析順序的一說明圖。 首先,當藉由使用透過該娜扣被連接的鍵盤及該遙 控器’ -關鍵字獲取指令透過使用者的輸入操作被輸入 5 (S21)時,該影像獲取單元獲取在接收該輸入時的一時間點 處被播放的畫格(S22)。 然後,該分析單元分析由該影像獲取單元獲取的該晝 格(影像資訊),且指定相對應於該預先決定的模擬該搜尋框 的圖案的區域作為模擬搜尋框區域,及該擷取單元從該模 10 擬搜尋框區域擷取字元(S23)。 在這時,如果此夠擷取該關鍵字,則該搜尋單元被通 知該關鍵字,而如果不能擷取,則該影像獲取單元被通知 不能夠擷取這大概意思(S24) 〇 接收這不能夠擷取的通知的該影像獲取單元判斷這操 15取目標畫格是否是先於輸入的畫格(S25),及進一步判斷, 如果是先於輸入的畫格,則判斷該畫格是否是早於從接收 該輸入時的時間點N-秒到達的一晝格(S26)。 如果在步驟26中判斷不是早於N-秒到達的該畫格,則 存在於其之前的畫格被獲取(S27),而如果是早於N_秒到達 20 的該畫格,則存在於接收該輸入時的時間點處的下—書格 被獲取(S28)。 而在另一方面,如果在步驟25中判斷的是在接收該輸 入之後的該畫格,則判斷該晝格是否是在自接收該輸入時 的時間點起已經過去M-秒之後到達的一畫格,及如果不是 16 1376948 過程被終止 在Μ-秒過去之後到達的該畫格,則該影像獲取單元被通知 這大概意思(S29),且獲取下一畫格(S30)。注意,如果在牛 驟29中判斷的是在m-秒過去之後到達的該畫格,則該梅^ 5 目此’在根據使用者的輸人指定該畫格的情況下,由
於使用者在檢職動態影像中的關鍵字之後做輸人操作存 在很大的可能性,所以該畫格以下面一種方式被指定:從 接收忒輸入時的時間點連續地向回追蹤該等晝格,及如果 該關鍵字沒被棟取,則在接收該輸入時的時間點之後的該 10畫格翻定作為該分析目標畫格,因而使該分析過程能夠 被迅速地執行。 <第三範例> 第6圖是顯示在現場直播期間擷取一關鍵字及緩衝該 榻取的關鍵字的一範例的一說明圖。 15 首先,該影像獲取單元決定播放中的動態影像是否是
現場直播(由該TV接收單元接收的資訊)(S31),及如果是現 場直播,則在目前時間點處的畫格被獲取(S32)。 該分析單元自該已獲取的畫格指定模擬搜尋框區域 (S33)。在此,如果該模擬搜尋框區域可以被指定,則該擷 20 取單元辨識該模擬搜尋框區域中的字元(S34-S35),且擷取 該關鍵字’而如果該模擬搜尋框區域無法被指定,則該處 理循環回到步驟S31。 如果在步驟35中該關鍵字可以被擷取,則決定緩衝器 是否充滿資料(S36-S37),然後如果充滿資料,則緩衝器中 17 1376948 最舊的資料被刪除(S38),且該擷取的關鍵字被加入到該緩 ' 衝器(S39)。 - 關於已經被緩衝的該等關鍵字,例如,當一指令從使 用者被給出時,該擷取單元從該緩衝器讀取最新的關鍵 5 字,且通知該搜尋單元這關鍵字,從而執行搜尋。 注意,在該第三範例中,在步驟35中擷取的該關鍵字 被儲存在該緩衝器中,然而,一可用方案是,在步驟33中 指定的該模擬搜尋框區域被儲存在該緩衝器中,而步驟 34、35可以被省略。 · 10 而且,在步驟32中在現場直播期間連續地獲取畫格的 情況下’所有構成動態影像(動畫)的該等晝格可以被獲取, 然而’另—可用方案是,如果是基於該MPEG系統的動態影 像’僅I-畫面(内晝面)被獲取。這方案使儲存容量及分析通 量能夠被限制。 15 <第四特定範例> 第7圖是顯示分析指定後晝格、擷取關鍵字及進行搜尋 的一方法的一說明圖。 鲁 首先’該分析單元分析該分析的目標晝格,及如果能 夠指定該模擬搜尋框區域(S41),則該擷取單元辨識在這模 20擬搜尋框區域中的字元(S42)。 ' 如果能夠從該模擬搜尋框區域擷取關鍵字(S43),則該 關鍵字被與儲存在該排名伺服器4的一資料庫(儲存單元)中 的關鍵字比較,從而決定是否有-相似的關鍵字(S44)。 如果有相似的關鍵字,則該搜尋單元設定這關鍵字作 18 1376948 為該網頁瀏覽器上的一搜尋關鍵字,且存取該搜尋網站, -從而進行一搜尋(S45、S47)。此外,如果在步驟44中沒有 相似的關鍵字,該擷取的關鍵字被設定為該搜尋關鍵字, 從而實施該搜尋(S46、S47)。 5 當該搜尋網站執行基於關鍵字的搜尋且送回一搜尋結 果時(S48),該使用者終端機1的該搜尋單元得到這搜尋結果 的最高排序内容,顯示在該顯示單元上(S49)。 第8圖是說明顯示該搜尋結果的一範例的一圖式。 • 搜尋到的内容的一URL被顯示在顯示搜尋結果的一視 10 窗中的一位址框51中,及從該網站伺服器接收的内容被顯 示在一内容樞52中。 而且,在該第四範例中,一搜尋結果列表54及一搜尋 關鍵字53也被顯示在不同於這内容的晝格的畫格裏。如果 其他鏈結從該搜尋結果列表被選擇,則除了以上給出的該 15 内容以外之内容也可以被瀏覽。 將被注意的是,譚搜尋結果顯示方法不限於以上所描 ® 述的方法,及也可以只有最高排序内容或只有該搜尋結果 列表被顯示。 一進一步可用方案是,在不執行基於關鍵字的搜尋的 20 程序的情況下,該預搜尋過程包含,使該程序停在啟動該 網頁瀏覽器的一狀態中,然後將該擷取的關鍵字插入該搜 尋伺服器2的一搜尋頁上的一搜尋框,及等待使用者的操 作。 <其他> 19 1376948 本發明不只限於以上所描述的說明性範例,且理所當 然的是,在不背離本發明的主旨的情況下,可以被以許多 - 形式修改。 C圓式簡單說明3 5 第1圖是一搜尋系統的一概要圖。 Λ 第2圖是一搜尋方法(包括一搜尋關鍵字擷取方法)的一 說明圖。 第3圖是藉由自動指定一CM的一預先決定的區域(尾 部)的搜尋該區域之一方法的一說明圖。 ® 10 第4圖是藉由根擄使用者的操作指定一晝格,擷取一關 鍵字的一方法的一說明圖。 第5圖是一分析順序的一說明圖。 第6圖是在一現場直播期間緩衝擷取的關鍵字的一範 例的一說明圖。 15 第7圖是藉由分析一指定後畫格及擷取關鍵字進行一 搜尋的一方法的一說明圖。 第8圖是說明顯示一搜尋結果的一範例的一圖式。 ® 第9A-B圖是包含模擬一搜尋框的一區域的一影像的一 說明圖。 20 【主要元件符號說明】 1.. .使用者終端機 2.. .網站伺服器 3.. .搜尋伺服器(搜尋引擎) 4···排名伺服器(關鍵字提供伺服器) 20 1376948 10.. .搜尋系統 12.. .算術處理單元 13…儲存單元(硬碟) 14.. .輸入/輸出埠 15.. .通訊控制單元 16··. TV接收單元(調諧器) 61-62...矩形 101.. .電台侧裝置 S1-S49…步驟1-步驟49
Claims (1)
1376948 第097127608號申請案申請專利範圍替換本 101. 4. 3 十、申請專利範圍: 1. 一種由電腦執行的畫格指定方法,其包含以下步驟 播放一動態影像; 接收一指令信號,該指令信號係基於一使用者所為 之指示執行對於該動態影像中的一部分場景的一程序 之一操作;及 藉由接收該指令信號而觸發指定構成該動態影像 的該等晝格中之當接收該指令信號時正在播放中的一 畫格作為一程序目標畫格之動作,且如果一關鍵字元不 存在該程序目標畫格中,則指定自該程序目標畫格以一 預定時間長度彼此對立地相距之一第一畫格及一第二 畫格的任一者; 其中該預定時間長度係基於在該使用者的操作以 及接收到該指令信號之間的時間遲延而被決定。 15 2. 如申請專利範圍第1項所述之晝格指定方法,其中接收 該指令信號時構成該動態影像的連_畫格中的正在播 放中的該畫格前面的該畫格被指定為該程序目標畫格。 20
3. 如申請專利範圍第1項所述之畫格指定方法,其中構成 該動態影像的連串畫格中的在一預先決定的間隔處配 置的該畫格被指定為該程序目標畫格。 4. 如申請專利範圍第1項所述之畫格指定方法,其中藉由 比較該動態影像中的該等畫格,滿足對於一商業訊息 (CM)的一條件的該畫格自該部分場景中被指定作為該 程序目標畫格,且該關鍵字元係存在於滿足對於該CM 22 1376948 第097127608號申請案申請專利範圍替換本 101. 4. 3 之該條件的該畫格中。 5. 如申請專利範圍第4項所述之畫格指定方法,其中滿足 對於該CM的該條件的該等多個晝格中的且被定義為在 連串時間上是連續的一組畫格的一畫格組中的一預先 5 決定的期間内的畫格被設定為該程序目標晝格。 6. 如申請專利範圍第5項所述之畫格指定方法,其中該預 先決定的期間對應於該畫格組中的一後半區域,或者從 開始起在一預定時間長度之後的一區域,或者從結束起 在該預定時間長度之前的一區域。 10 7.如申請專利範圍第1項所述之畫格指定方法,其中該程 序包括從該程序目標畫格擷取該關鍵字元。 8. 如申請專利範圍第7項所述之畫格指定方法,其中從在 接收該指令信號時正在播放中的該晝格起在該預定時 間長度之前的該畫格被設定為該程序目標畫格’及 15 如果該關鍵字元依然不存在,則從在接收該指令信 號時正在播放中的該晝格起在該預定時間長度之後的 該畫格被設定為該程序目標畫格。 9. 如申請專利範圍第8項所述之畫格指定方法,其中該等 晝格被儲存在一儲存單元中,及 20 從在接收該指令信號時正在播放中的該畫格起在 該預定時間長度之前的該畫格從該儲存單元被讀取且 被設定為一分析目標晝格。 10. —種畫格指定裝置,包含: 用於播放一動態影像的一播放單元; 23 1376948 • - ~ — __ —- —~ 第097127608號申請案申請專利範圍替換本 ι〇ι 4 3 ▲一指令接收單元’其用於接收一指令信號,該指令 k號係基於一使用者所為之指示執行對於該動態影像 中的一部分場景的/程序之一操作,·及 一晝格指定單元,其係用於藉由接收該指令信號而 觸發指疋構成該動態影像的該等畫格中之當接收該指 令信號時正在播放中的一晝格作為一程序目標畫格之 動作,且如果一關鍵字元不存在該程序目標畫格中,則 指定自該程序目標畫格以一預定時間長度彼此對立地 相距之一第一畫格及一第二畫格的任一者; 1〇 其中該預定時間長度係基於在該使用者的操作以 及接收到該指令信號之間的時間遲延而被決定。 U•如申請專利範圍第1〇項所述之畫格指定裝置,其中該畫 格指定單元指定接收該指令k號時構成該動態影像的 連串畫格中的正在播放中的該畫格前面的該畫格作為 該程序目標畫袼。 I2.如申請專利範圍第10項所述之晝格指定裝置,其中該晝 格指定單元指定構成該動態影像的連串畫格中的在一 預先決定的間隔處配置的该畫格作為該程序目標晝格。 2〇丨3.如申請專利範圍第1〇項所述之晝格指定裝置,其中藉由 比較該動態影像中的該等畫格,該畫格指定單元自該邹 分場景中指定滿足對於/商業訊息(CM)的一條件的該 畫格作為該程序目標書檢,且該關鍵字元係存在於滿足 Μ對於該CM之該條件的該畫袷中。 如申凊專利範圍第13項所述之畫格指定裝置,其中該畫 24 1376948 第097127608號申請案申請專利範圍替換本 1〇J 4 g 格指定單元指定滿足對於該CM的該條件的該等多個查 格中的且被定義為在連串時間上是連續的—組晝格的 一畫格組中的一預先決定的期間内的該畫格作為該程 序目標畫格。 5 I5.如申請專利範圍第14項所述之畫格指定裝置,其中該預 先決定的期間對應於該畫格組中的一後半區域戈者從 開始起在一預定時間長度之後的一區域,或者從結束起 在該預定時間長度之前的一區域。 16. 如申請專利範圍第1〇項所述之畫格指定裝置,其進—牛 10 包含一擷取單元,該擷取單元用以該程序的方式從該程 序目標畫格擷取該關鍵字元。 17. 如申請專利範圍第16項所述之畫格指定裝置,其中該佥 格指定單元設定在接收該指令信號時從正在播放中的 該畫格起在該預定時間長度之前的該畫格作為該程序 15 目標畫格,及如果該關鍵字元依然不存在,則設定在接 收該指令信號時從正在播放中的該畫格起在該預定時 間長度之後的該畫格作為該程序目標畫格。 18. 如申請專利範圍第17項所述之畫格指定裝置,其中該等 畫格被儲存在一儲存單元中,及 -0 從在接收該指令信號時正在播放中的該畫格起在 該預定時間長度之前的該畫格從該儲存單元被讀取且 被設定為一分析目標畫格。 19. 如申請專利範圍第1〇項所述之畫格指定裝置,其中該動 態影像被定義為電視播送的τν廣播信號。 25 1376948 第097127608號申請案申請專利範圍替換本 101.4.3 20. —種有形實施可由一電腦執行的指令的一程式的電腦 可讀儲存媒體,以執行多數個方法步驟,該等方法步驟 包含: 播放一動態影像; 5 接收一指令信號,該指令信號係基於一使用者所為 之指示執行對於該動態影像中的一部分場景的一程序 之一操作;及 藉由接收該指令信號而觸發指定構成該動態影像 的該等晝格中之當接收該指令信號時正在播放中的一 10 畫格作為一程序目標畫格之動作,且如果一關鍵字元不 存在該程序目標畫格中,則指定自該程序目標畫格以一 預定時間長度彼此對立地相距之一第一畫格及一第二 畫格的任一者; 其中該預定時間長度係基於在該使用者的操作以 15 及接收到該指令信號之間的時間遲延而被決定。 26 1376948 101.4.3 第097127608號申請案圖式修正頁 第2圓
S1 S2 S3 S4 "年f月> 曰修正雜頁
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2007209945A JP4814849B2 (ja) | 2007-08-10 | 2007-08-10 | フレームの特定方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
TW200910953A TW200910953A (en) | 2009-03-01 |
TWI376948B true TWI376948B (en) | 2012-11-11 |
Family
ID=39847146
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
TW097127608A TWI376948B (en) | 2007-08-10 | 2008-07-21 | Method, device and storage medium for frame specification |
Country Status (6)
Country | Link |
---|---|
US (1) | US8020188B2 (zh) |
EP (1) | EP2023617A3 (zh) |
JP (1) | JP4814849B2 (zh) |
KR (1) | KR100975327B1 (zh) |
CN (1) | CN101365134B (zh) |
TW (1) | TWI376948B (zh) |
Families Citing this family (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103004228A (zh) * | 2010-07-26 | 2013-03-27 | 皇家飞利浦电子股份有限公司 | 获取关键词用于搜索 |
JP5143270B1 (ja) * | 2011-11-14 | 2013-02-13 | 株式会社東芝 | 画像処理装置、及び画像処理装置の制御方法 |
JP5627030B2 (ja) * | 2012-02-13 | 2014-11-19 | 日本電信電話株式会社 | 関連情報提供方法、関連情報提供装置および関連情報提供プログラム |
JP5458163B2 (ja) * | 2012-11-16 | 2014-04-02 | 株式会社東芝 | 画像処理装置、及び画像処理装置の制御方法 |
US11080777B2 (en) * | 2014-03-31 | 2021-08-03 | Monticello Enterprises LLC | System and method for providing a social media shopping experience |
JP7134662B2 (ja) * | 2018-03-20 | 2022-09-12 | ヤフー株式会社 | 情報配信システム、および情報配信方法 |
US11074457B2 (en) * | 2019-04-17 | 2021-07-27 | International Business Machines Corporation | Identifying advertisements embedded in videos |
Family Cites Families (25)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US7859551B2 (en) * | 1993-10-15 | 2010-12-28 | Bulman Richard L | Object customization and presentation system |
JPH07203420A (ja) * | 1993-11-26 | 1995-08-04 | Sony Corp | 双方向放送方式およびその受信装置とその遠隔制御装置 |
US8813137B2 (en) * | 1998-05-08 | 2014-08-19 | Qualcomm Incorporated | Apparatus and method for decoding digital image and audio signals |
TW420946B (en) | 1998-07-20 | 2001-02-01 | Intel Corp | Display capture system |
US6731788B1 (en) | 1999-01-28 | 2004-05-04 | Koninklijke Philips Electronics N.V. | Symbol Classification with shape features applied to neural network |
US6608930B1 (en) | 1999-08-09 | 2003-08-19 | Koninklijke Philips Electronics N.V. | Method and system for analyzing video content using detected text in video frames |
US7536705B1 (en) * | 1999-02-22 | 2009-05-19 | Tvworks, Llc | System and method for interactive distribution of selectable presentations |
KR20010029074A (ko) * | 1999-09-29 | 2001-04-06 | 구자홍 | 플라즈마 디스플레이 패널의 영상정보 캡쳐 장치 |
US7299405B1 (en) | 2000-03-08 | 2007-11-20 | Ricoh Company, Ltd. | Method and system for information management to facilitate the exchange of ideas during a collaborative effort |
WO2001053966A1 (en) | 2000-01-20 | 2001-07-26 | Interactual Technologies, Inc. | System, method, and article of manufacture for embedded keywords in video |
JP2001298709A (ja) | 2000-04-13 | 2001-10-26 | Sharp Corp | 動画像記録再生装置 |
JP2002044575A (ja) * | 2000-07-25 | 2002-02-08 | Sony Corp | 動画像取り込み装置及びその動画像取り込み方法 |
JP2002108889A (ja) | 2000-09-29 | 2002-04-12 | Hitachi Ltd | 情報処理装置および情報サービス方法 |
US7680324B2 (en) | 2000-11-06 | 2010-03-16 | Evryx Technologies, Inc. | Use of image-derived information as search criteria for internet and other search engines |
JP2002290947A (ja) | 2001-03-22 | 2002-10-04 | Purantekku:Kk | デジタル放送に於ける番組・cmコンテンツ情報提供システム |
US7143353B2 (en) | 2001-03-30 | 2006-11-28 | Koninklijke Philips Electronics, N.V. | Streaming video bookmarks |
DE60229632D1 (de) | 2001-05-15 | 2008-12-11 | Koninkl Philips Electronics Nv | Untertitelerkennung in anzeigbaren Bildbereich eines Videosignals |
CN100411434C (zh) * | 2002-05-09 | 2008-08-13 | 汤姆森许可贸易公司 | 在数字视频记录器中的内容标识方法和装置 |
EP1573594A2 (en) | 2002-12-11 | 2005-09-14 | Koninklijke Philips Electronics N.V. | Method and system for utilizing video content to obtain text keywords or phrases for providing content related links to network-based resources |
JP2004297618A (ja) * | 2003-03-27 | 2004-10-21 | Kyocera Corp | 画像抽出方法および画像抽出装置 |
KR20050037703A (ko) * | 2003-10-20 | 2005-04-25 | 주식회사 대우일렉트로닉스 | 텔레비전의 정지화상 저장 및 출력장치 |
JP4413633B2 (ja) | 2004-01-29 | 2010-02-10 | 株式会社ゼータ・ブリッジ | 情報検索システム、情報検索方法、情報検索装置、情報検索プログラム、画像認識装置、画像認識方法および画像認識プログラム、ならびに、販売システム |
US20060173825A1 (en) | 2004-07-16 | 2006-08-03 | Blu Ventures, Llc And Iomedia Partners, Llc | Systems and methods to provide internet search/play media services |
KR20070061096A (ko) | 2005-12-08 | 2007-06-13 | 한국전자통신연구원 | 비디오 장면 저장/구매를 위한 디지털 방송 수신 장치 및그 방법 |
KR100789911B1 (ko) | 2005-12-08 | 2008-01-02 | 한국전자통신연구원 | 디지털 멀티미디어 방송 단말기에서의 텍스트 표시 장치 및그 방법 |
-
2007
- 2007-08-10 JP JP2007209945A patent/JP4814849B2/ja not_active Expired - Fee Related
-
2008
- 2008-07-08 US US12/169,097 patent/US8020188B2/en not_active Expired - Fee Related
- 2008-07-10 EP EP08160113A patent/EP2023617A3/en not_active Ceased
- 2008-07-21 TW TW097127608A patent/TWI376948B/zh not_active IP Right Cessation
- 2008-07-23 KR KR1020080071663A patent/KR100975327B1/ko not_active IP Right Cessation
- 2008-08-04 CN CN2008101452513A patent/CN101365134B/zh not_active Expired - Fee Related
Also Published As
Publication number | Publication date |
---|---|
CN101365134B (zh) | 2011-01-26 |
US20090040383A1 (en) | 2009-02-12 |
JP4814849B2 (ja) | 2011-11-16 |
EP2023617A3 (en) | 2011-02-02 |
KR20090016384A (ko) | 2009-02-13 |
US8020188B2 (en) | 2011-09-13 |
KR100975327B1 (ko) | 2010-08-12 |
EP2023617A2 (en) | 2009-02-11 |
CN101365134A (zh) | 2009-02-11 |
TW200910953A (en) | 2009-03-01 |
JP2009044657A (ja) | 2009-02-26 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
TWI457770B (zh) | 關鍵字擷取方法及裝置、搜尋方法及裝置,以及電腦可讀儲存媒體 | |
TWI376948B (en) | Method, device and storage medium for frame specification | |
US9544544B2 (en) | Method and system for sharing information between users in media reproducing system | |
CN1988646B (zh) | 显示关于广播内容的信息的方法和设备 | |
JP4388128B1 (ja) | 情報提供サーバ、情報提供方法及び情報提供システム | |
CN102413359A (zh) | 提供媒体内容相关信息的方法及执行该方法的设备和服务器 | |
US20140050457A1 (en) | Information processing system, recording/playback apparatus, playback terminal, information processing method, and program | |
US8301009B2 (en) | Detailed information providing method and apparatus of personal video recorder | |
JP4174056B2 (ja) | 映像再生方法、映像再生端末 | |
US8483547B2 (en) | Information processing apparatus, recording method, and recording system | |
US20110295971A1 (en) | Information processing system, information processing apparatus, and information processing method | |
JP2008227909A (ja) | 映像検索装置 | |
CN109792502A (zh) | 信息处理设备、信息处理方法、程序和信息处理系统 | |
JP4846674B2 (ja) | 静止画抽出装置及び静止画抽出プログラム | |
JP2007201680A (ja) | 情報管理装置および方法、並びにプログラム | |
JP2008278039A (ja) | 映像記録再生装置およびコンテンツ配信システム | |
JP2009260742A (ja) | テレビ放送波送信側装置およびテレビ放送受信機 | |
US20110299834A1 (en) | Program review on alternate display devices | |
JP2012205029A (ja) | 記録再生方法、および、記録再生装置 | |
JP2005341102A (ja) | 番組情報検索装置及びその方法 | |
JP2010171671A (ja) | 携帯端末への予約録画支援方法 | |
JP2008293214A (ja) | データ生成装置、データ処理システムおよびデータ生成方法 | |
JP2008293215A (ja) | 端末装置、連携処理システムおよび連携処理方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
MM4A | Annulment or lapse of patent due to non-payment of fees |