TWI376948B - Method, device and storage medium for frame specification - Google Patents

Method, device and storage medium for frame specification Download PDF

Info

Publication number
TWI376948B
TWI376948B TW097127608A TW97127608A TWI376948B TW I376948 B TWI376948 B TW I376948B TW 097127608 A TW097127608 A TW 097127608A TW 97127608 A TW97127608 A TW 97127608A TW I376948 B TWI376948 B TW I376948B
Authority
TW
Taiwan
Prior art keywords
frame
program
time
specifying
receiving
Prior art date
Application number
TW097127608A
Other languages
English (en)
Other versions
TW200910953A (en
Inventor
Takashi Terasaki
Hiroyuki Komai
Masashi Urushihara
Original Assignee
Fujitsu Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fujitsu Ltd filed Critical Fujitsu Ltd
Publication of TW200910953A publication Critical patent/TW200910953A/zh
Application granted granted Critical
Publication of TWI376948B publication Critical patent/TWI376948B/zh

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/44Receiver circuitry for the reception of television signals according to analogue transmission standards
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/70Information retrieval; Database structures therefor; File system structures therefor of video data
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/60Type of objects
    • G06V20/62Text, e.g. of license plates, overlay texts or captions on TV images
    • G06V20/635Overlay text, e.g. embedded captions in a TV program
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs
    • H04N21/44008Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics in the video stream
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/472End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/47214End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for content reservation or setting reminders; for requesting event notification, e.g. of sport results or stock market
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81Monomedia components thereof
    • H04N21/812Monomedia components thereof involving advertisement data
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/845Structuring of content, e.g. decomposing content into time segments
    • H04N21/8455Structuring of content, e.g. decomposing content into time segments involving pointers to the content, e.g. pointers to the I-frames of the video stream
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/433Content storage operation, e.g. storage operation in response to a pause request, caching operations
    • H04N21/4331Caching operations, e.g. of an advertisement for later insertion during playback
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/462Content or additional data management, e.g. creating a master electronic program guide from data received from the Internet and a Head-end, controlling the complexity of a video stream by scaling the resolution or bit-rate based on the client capabilities
    • H04N21/4622Retrieving content or additional data from different sources, e.g. from a broadcast channel and the Internet
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/478Supplemental services, e.g. displaying phone caller identification, shopping application
    • H04N21/4782Web browsing, e.g. WebTV
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/482End-user interface for program selection
    • H04N21/4828End-user interface for program selection for searching program descriptors
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/84Generation or processing of descriptive data, e.g. content descriptors
    • H04N21/8405Generation or processing of descriptive data, e.g. content descriptors represented by keywords

Description

九、發明說明: 明所属技領域;3 發明背景 本發明是關於根據一使用者的指令指定一動離、影像 (動畫)中的一畫格之技術。 C先前技術3 被電視播送的一 TV節目(動態影像;動畫)包含一場 景,在該場景中,除了該節目的原始情節的内容之外還 顯示各種類型的資訊(其也被稱為廣告資訊),諸如商品的一 CM(商業訊息)、節目預告、在原版的一美食節目中介紹的 一商店的位置及在一烹調節目中介紹的一烹調食譜。 在需要這種類型的廣告資訊的情況下,—般慣例是, 在正被顯示在一TV螢幕上的一段時間期間,該資訊被迅速 寫在紙上或被錄影。 然而,準備紙且將資訊寫在紙上或啟動錄影系統且錄 製该貧訊是浪費時間的,而在另一方面,該廣告資訊保持 被顯不的一段時間是相當短的,導致該資訊不能被寫下或 錄製的一種情況。 因此,有一TV系統,該TV系統在廣告資訊被顯示的這 樣一種情況下,僅僅藉由透過一遙控器給出一指令,使一 使用者此夠獲得-所謂的螢幕備忘錄,以將—顯示影像暫 時儲存在一記憶體中。 C 明内穷】 發明概要 1376948 然而,當使用者給出指令以獲得備忘錄時,程序是, 使用者在看到且判斷顯示在τν螢幕上的廣告資訊是必需 - 的後,拿起使用者手中的遙控器且給出獲得備忘錄的指 令,及因此,出現這樣一問題:自從廣告資訊已經被顯示 5 直到該獲得指令被傳送到該TV系統之間有一延時,且使用 者所期望的資訊不能總是肯定地被獲得。 既然如此,本發明提供根據使用者的指令恰當地指定 動態影像中的一程序目標畫格。 為了解決以上給出的問題,本發明採取下面組態。 · 10 那就是,根據本發明,由電腦執行的一畫格指定方法 包含: 播放一動態影像的一步驟; 當使用者執行指示對於動態影像中的一部分場景的程 序的執行的操作時,基於該使用者的操作,接收一指令信 15 號的一步驟;及 當藉由接收該指令信號被觸發時,指定接收構成該動 態影像的該等畫格中的該指令信號時正在播放中的一畫格 ® 或距離正在播放中的該晝格一預先決定的時間長度的一畫 格作為該程序目標畫格的一步驟。 20 而且,根據本發明,一畫格指定裝置包含: 播放一動態影像的一播放單元; 一指令接收單元,其在一使用者執行指示對於該動態 影像中的一部分場景的程序的執行的操作時,基於該使用 者的操作,接收一指令信號;及 6 1376948 一畫格指定單元,當藉由接收該指令信號被觸發時, •其指定接收構成該動態影像的該等畫格中的該指令信號時 正在播放中的一畫格或距離正在播放中的該畫格一預先決 定的時間長度的一畫格作為該程序目標畫格。 ' 5 而且,本發明也可以是用以使電腦執行該畫格指定方 法的一程式。另外,本發明也可以是記錄該程式的電腦可 讀記錄媒體。電腦被使得讀取且執行這記錄媒體上的程 式,因此使其功能可被提供。 ® 在此,該電腦可讀記錄媒體隱含能夠以電、磁、光、 10 機械或藉由化學作用的方式儲存可以從電腦中讀取的諸如 資料及程式之資訊的一記錄媒體。在這些記錄媒體中,例 如,一軟磁碟、一磁光碟、一CD-ROM、一CD-R/W、一DVD、 一 DAT、一 8mm磁帶、一記憶卡等等作為從電腦可拆卸的 那些記錄媒體被給出。 15 而且,一硬碟、一ROM(唯讀記憶體)等等作為固定在 電腦内部的記錄媒體被給出。 ® 根據本發明,提供能夠根據使用者的指令恰當地指定 一動態影像中的一程序目標畫格的技術是可行的。 圖式簡單說明 20 第1圖是一搜尋系統的一概要圖。 .. 第2圖是一搜尋方法(包括一搜尋關鍵字擷取方法)的一 說明圖。 第3圖是藉由自動指定一CM的一預先決定的區域(尾 部)的搜尋該區域的一方法的一說明圖。 7 1376948 第4圖是藉由根據使用者的操作指定一晝格,擷取一關 鍵字的一方法的一說明圖。 第5圖是一分析順序的一說明圖。 第6圖是在一現場直播期間緩衝擷取的關鍵字的一範 5 例的一說明圖。 第7圖是藉由分析一指定後畫格及擷取關鍵字進行一 搜尋的一方法的一說明圖。 第8圖是説明顯示一搜尋結果的一範例的一圖式。 第9A-B圖是包含模擬一搜尋框的一區域的一影像的一 10 說明圖。 【實施方式3 較佳實施例之詳細說明 以下將參考圖式描述用以執行本發明的最佳模式。下 面實施例中的一組態是一範例,及本發明不限於該實施例 15 中的該組態。 <實施例概要> 該實施例中的一方案是,根據從一廣播電台接收的資 料或從諸如一DVD(數位多功能光碟)之儲存媒體讀取的資 料,動態影像被播放,及如果一使用者指示一指定場景, 20 而動態影像中的廣告資訊被顯示在該指定場景中,則場景 構成畫格以考慮直到該指示被傳送到一畫格指定裝置的一 延時的方式被指定。 然後,該等指定的畫格可以經歷一預先決定的程序, 諸如擷取字元及輸出一列印。 8 在下面的範例中,例示畫格如何被指定,字元(關鍵字) 怎樣被_及藉由使用該_字-搜尋程序如何被執行。 <裝置組態> 第1圖是根據實施例的一搜尋系統的一概要圖。 該實施例中的-搜尋系統10包括播放—TM播的廣 播電台的-電台側裝置HH、接收由該電台側裝置1〇1播送 的動態影像(動畫)的-使用者终端機卜藉由諸如網際網路 之網路提供資訊的-,網站伺服器2、對由該網站飼服器2提 供的資訊提供搜尋服務的一搜尋伺服器(搜尋弓丨擎)3、一排 名伺服器4等等。 該使用者終端機1對應於該搜尋系統1〇中的畫格指定 裝置。 該使用者終端機1是一通用電腦,其包括:由一cpu(中 央處理單元)、-m,it體等構成的—算術處理單元12、為 -算術程序儲存資料及軟體的—儲存單別硬碟)13、—輸入 /輸出埠14、一通訊控制單元(ccu)15等。 諸如-鍵盤、-滑鼠、一遙控^、一CD_R〇M光碟機 及-TV(電視)接收單元16之輸人裝置,及諸如—顯示裝置 及一印表機之輸出裝置被恰當地連接到該1/0埠14。 該TV接收單凡(調·^器)16經由一 丁乂天線從該廣播電 台接收無線電波’然、後將該等無線電波轉換成電信號(影像 資訊),且輸入該等信號到該I/O埠14。 該COJ 15藉由網路執行與其他電腦的通訊。 β玄儲存單元13被預先安裝m统(〇s)及應用軟體 (一畫格指定程式、一關鍵字擷取裎式、一搜尋程式)。 該算術處理單元12從贿存單元13恰當地讀取該⑽ 及該等應用程式,且執行該⑺及該等應用程式,及算 ,從該料Μ㈣CCU丨5輸人的料件資減從該儲存 早仙讀取的資訊,因而也作為—影像獲取單元(畫格指定 單元)、-分析單元、-摘取單元、—播放單元及—指^ 收單元發揮作用。 接 。。該影像獲取單元獲取影像資訊(晝格)。例如,該影像獲 取單7L接收㈣Τν接(料16接收_像冑訊,或讀取且 獲取儲存在(記錄在)該儲存單元13中的影像資訊。而且,該 影像獲取單元在接收從該指令接收單元給出的—指示信號 時,從如此獲取的畫格中指定由使用者指示的構成該場景 的該等畫格。 y' 基於由該影像獲取單元獲取的影像資訊,該播放單元 播放該動態影像。具體地說,該動態影像被顯示在該顯示 翠疋上,且該動態影像的聲音從一揚聲器被輸出。而且, 對於播放,根據使用者的操作等,該播放單元通知該丁¥接 收單元16將被接收或切換的一頻道。 該指令接收單元接收由使用者的操作給出的一搜尋指 令(指令信號)。 5亥分析單元指定相對應於模擬一搜尋框(欄)的一預先 決疋的圖樣的一區域作為一模擬搜尋框區域。 藉由辨識該模擬搜尋框區域中的字元,該擷取單元擷 取一搜尋關鍵字。 藉由使用該搜尋關鍵字,該搜尋處理單元執行一搜尋 程序或一預搜尋程序。該搜尋處理單元經由該CCU 15傳送 包含該搜尋關鍵字的一搜尋請求到該搜尋伺服器3,及取得 顯示在該顯示單元上的從該搜尋祠服器送回的一搜尋結 果。而且,該搜尋處理單元還具有根據顯示的内容摘要及 —超鏈結的搜尋結果等存取該網站祠服器’及顯示該内容 的功能。注意,該搜尋處理單元可以包含使用一般類型的 網頁瀏覽器。 另一方面,該搜尋伺服器3是一般類型的所謂的基於電 腦的搜尋引擎,其包括:用以從該使用者終端機1的該搜尋 處理單元(網頁瀏覽器)接收搜尋請求之裝置、儲存該網站伺 服器2的資訊的一儲存裝置、用以根據該已接收到的搜尋請 求的關鍵字搜尋儲存裝置以尋找該網站伺服器的一件對應 的資訊之裝置,及用以傳送該搜尋結果到該請求者使用者 終端機1之裝置。 而且’經由像網際網路之網路,該網站伺服器2被連接 到諸如該使用者終端機1之其他電腦及該搜尋伺服器3。該 網站伺服器2提供(傳送)由從另一電腦給出的存取請求 (URL等)指定的一内容(播案)給該請求者電腦。注意,該網 站伺服器2具有眾所周知的組態,及它的深入描述被省略。 同樣地,經由像網際網路之網路,該排名伺服器(關鍵 =提供伺服器)4被連接到諸如該使用者終端機〖之其他電 腦及該搜尋⑸服^ ^該排名词服根據從其他電腦給出的 凊求提供關鍵字(排名資訊),在該排名伺服器4中,儲存單 1376948 元儲存包含用以在一搜尋網頁上搜尋的關鍵字的排名資 訊,該等關鍵字被按照從最大搜尋量至最小搜尋量的順序 排序。注意,該排名伺服器4也可以與該搜尋伺服器3組合 使用。而且,一操作員可以在該儲存單元中儲存用於CM的 5 關鍵字。該排名伺服器4與一般類型的網站伺服器具有同樣 的組態,及因此其詳細解釋被省略。 <搜尋法> 然後,參考第2圖,將描述一搜尋法(包括一搜尋關鍵 字擷取方法),該搜尋法被具有以上所描述的組態的該使用 10 者終端機1基於一搜尋程式執行。 如在第2圖十所說明,在該使用者終端機1十,當透過 使用者的操作被指示音訊/視訊接收(播放)一TV節目時,根 據從該儲存單元13讀取或從該TV接收單元接收的影像資 訊,該播放單元播放該動態影像。 15 在這時,該使用者終端機1的該影像獲取單元自構成該 動態影像的一連串畫格中指定(獲取)滿足一預先決定的條 件的畫格作為一分析目標畫格(影像資訊),該預先決定的條 件稍後將被解釋(步驟卜其在後面將被縮寫為S1)。 接著,該分析單元分析該指定的畫格且指定相對應於 20 該預先決定的模擬該搜尋引擎的該搜尋框的圖案的該模擬 搜尋框區域(S2)。 而且,該擷取單元辨識該模擬搜尋框區域中的字元, 且擷取關鍵字(S3)。 然後,該搜尋單元啟動該網頁瀏覽器,且傳送由該擷 12 1376948 •取單元擷取的關鍵字到該搜尋伺服器,藉此該搜尋被執 -行,及一搜尋結果被顯示(S4)。 藉由列舉下面特定範例的方式將描述在各自步驟中的 特定程序。 5 <第一特定範例> 第3圖是顯示自動指定來自動態影像的CM畫格的一預 先決定的部分(尾部)的一搜尋法的一說明圖。 首先,該影像獲取單元檢測該動態影像(動畫)中除節目 • 的原始情節以外的CM畫格(S11)。 10 在滿足下面條件的情況下,該CM畫格由目前的CM檢 測方法指定: 1. 藉由比較前面的與後面的畫格(如果一致度小於一 預先決定的值),畫格的一整個區域證明是不同的,即,當 一視訊剪輯被改變時,有一預先決定的或較長的靜音時間 15 段° 2. 該節目的原始情節被單音地廣播,及當播放該CM時 ® 被切換到一立體聲系統,及因此該條件被設定在自從該單 音系統已經被切換至該立體聲系統直到該廣播返回到該單 音系統的一段時間。 20 3·視訊剪輯在一預先決定的時間點(例如15秒的倍數) . 被改變。 -- 4· 一預先決定的時間點(例如在該小時之前的5分鐘) 被設定。 5.根據從一EPG(電子節目導引)獲得的節目資訊,在節 13 目更換時間之前及以後的5分鐘,及當從該節目更換時間起 (以2或4)平分該節目的一時間點被設定。 注意’該CM檢測方法可以包含利用其他已知技術中的 任何一個,及也可以包含使用那些技術的一組合。 然後,該影像獲取單元設定一段時間L作為對該CM的 長度的參考》在該第一範例中,時間L被設定’諸如L=15 (分) (S12)〇 順便提一下,有很大的可能性的是:用以通知關鍵字 等的時序存在於該CM畫格的尾部,及因此該影像獲取單元 獲取從基於以上給出的該等條件檢測到的該CM畫格之首 起的一預先決定的時間長度(L/2、L/3、L-5 (秒))之後到L範 圍内的畫格。在該第一範例中,獲取的該畫格從L-5到L範 圍内變化(S13)。 然後,該分析單元分析由該影像獲取單元獲取的該畫 格(影像資訊)’且相定相對應於該預先決定的模擬該搜尋框 的圖案的區域作為模擬搜哥框區域,及該摘取單元從該模 擬搜尋框區域擷取字元(S14)。 在這時,自從該分析單元指定模擬該影像中的搜尋框 的區域,如在第9圖中所說明’該影像在一水平方向(主掃 描方向)及一垂直方向(次掃描方向)上被掃描,且一區域被 操取,在該區域中,像素在該水平或垂直方向上在一預先 決定的或較長的距離處變得連續以形成一直線。然後,該 區域被設定為該模擬搜尋框區域,在該區域中該直線組成 一長方形。 1376948 特定地,在本發明中,具有—短的寬度(在該水平方向 上)的一矩形62與矩形61相鄰,且如果字元[搜尋]存在於該 短的矩形中,即如果與諸如包含相對應於一搜尋按鈕的一 影像之預先決定的圖樣一致,則該矩形61的區域被指定作 5 為該模擬搜尋框區域。 在這時,如果能夠擷取關鍵字,則該搜尋單元被通知 該關鍵字,而如果不能擷取,則該影像獲取單元被通知不 能擷取這大概意思(S15)。 接收這不能棟取的通知的該影像獲取單元判斷這操取 10目標畫格是否在從該CM之首起的L秒之後到達(S16),及如 果該畫格不是在L秒之後到達,則獲取下一畫格(si?)。 而且,如果在步驟16中判斷該畫格是在L·秒之後到 達,則判斷該時間長度L是否小於60秒(S18),然後,如果 不小於60秒’則該處理結束,如果等於或小於6〇秒(si9), 15則隨後15秒被加到L上’且如果沒有超過該αν[的最大值(例 如60秒),則該處理循環回到步驟13,在該步驟13中該畫格 被獲取(S20)。 注意,當在步驟13中獲取該畫格時,所有從L-5秒到L 秒範圍内變化的畫格可以被獲取’然而,在基於MPEG(動 20 畫專家組)系統的動態影像的情況下,也可僅獲取I-畫面(内 畫面)。因此,如果採取僅獲取I-畫面的一方案,一通量可 被減少。 <第二特定範例> 第4圖是顯示藉由根據使用者的操作指定畫格,擷取關 15 1376948 鍵字的_方法的-說明圖,及第5圖是顯示在該第二範例中 的一分析順序的一說明圖。 首先,當藉由使用透過該娜扣被連接的鍵盤及該遙 控器’ -關鍵字獲取指令透過使用者的輸入操作被輸入 5 (S21)時,該影像獲取單元獲取在接收該輸入時的一時間點 處被播放的畫格(S22)。 然後,該分析單元分析由該影像獲取單元獲取的該晝 格(影像資訊),且指定相對應於該預先決定的模擬該搜尋框 的圖案的區域作為模擬搜尋框區域,及該擷取單元從該模 10 擬搜尋框區域擷取字元(S23)。 在這時,如果此夠擷取該關鍵字,則該搜尋單元被通 知該關鍵字,而如果不能擷取,則該影像獲取單元被通知 不能夠擷取這大概意思(S24) 〇 接收這不能夠擷取的通知的該影像獲取單元判斷這操 15取目標畫格是否是先於輸入的畫格(S25),及進一步判斷, 如果是先於輸入的畫格,則判斷該畫格是否是早於從接收 該輸入時的時間點N-秒到達的一晝格(S26)。 如果在步驟26中判斷不是早於N-秒到達的該畫格,則 存在於其之前的畫格被獲取(S27),而如果是早於N_秒到達 20 的該畫格,則存在於接收該輸入時的時間點處的下—書格 被獲取(S28)。 而在另一方面,如果在步驟25中判斷的是在接收該輸 入之後的該畫格,則判斷該晝格是否是在自接收該輸入時 的時間點起已經過去M-秒之後到達的一畫格,及如果不是 16 1376948 過程被終止 在Μ-秒過去之後到達的該畫格,則該影像獲取單元被通知 這大概意思(S29),且獲取下一畫格(S30)。注意,如果在牛 驟29中判斷的是在m-秒過去之後到達的該畫格,則該梅^ 5 目此’在根據使用者的輸人指定該畫格的情況下,由
於使用者在檢職動態影像中的關鍵字之後做輸人操作存 在很大的可能性,所以該畫格以下面一種方式被指定:從 接收忒輸入時的時間點連續地向回追蹤該等晝格,及如果 該關鍵字沒被棟取,則在接收該輸入時的時間點之後的該 10畫格翻定作為該分析目標畫格,因而使該分析過程能夠 被迅速地執行。 <第三範例> 第6圖是顯示在現場直播期間擷取一關鍵字及緩衝該 榻取的關鍵字的一範例的一說明圖。 15 首先,該影像獲取單元決定播放中的動態影像是否是
現場直播(由該TV接收單元接收的資訊)(S31),及如果是現 場直播,則在目前時間點處的畫格被獲取(S32)。 該分析單元自該已獲取的畫格指定模擬搜尋框區域 (S33)。在此,如果該模擬搜尋框區域可以被指定,則該擷 20 取單元辨識該模擬搜尋框區域中的字元(S34-S35),且擷取 該關鍵字’而如果該模擬搜尋框區域無法被指定,則該處 理循環回到步驟S31。 如果在步驟35中該關鍵字可以被擷取,則決定緩衝器 是否充滿資料(S36-S37),然後如果充滿資料,則緩衝器中 17 1376948 最舊的資料被刪除(S38),且該擷取的關鍵字被加入到該緩 ' 衝器(S39)。 - 關於已經被緩衝的該等關鍵字,例如,當一指令從使 用者被給出時,該擷取單元從該緩衝器讀取最新的關鍵 5 字,且通知該搜尋單元這關鍵字,從而執行搜尋。 注意,在該第三範例中,在步驟35中擷取的該關鍵字 被儲存在該緩衝器中,然而,一可用方案是,在步驟33中 指定的該模擬搜尋框區域被儲存在該緩衝器中,而步驟 34、35可以被省略。 · 10 而且,在步驟32中在現場直播期間連續地獲取畫格的 情況下’所有構成動態影像(動畫)的該等晝格可以被獲取, 然而’另—可用方案是,如果是基於該MPEG系統的動態影 像’僅I-畫面(内晝面)被獲取。這方案使儲存容量及分析通 量能夠被限制。 15 <第四特定範例> 第7圖是顯示分析指定後晝格、擷取關鍵字及進行搜尋 的一方法的一說明圖。 鲁 首先’該分析單元分析該分析的目標晝格,及如果能 夠指定該模擬搜尋框區域(S41),則該擷取單元辨識在這模 20擬搜尋框區域中的字元(S42)。 ' 如果能夠從該模擬搜尋框區域擷取關鍵字(S43),則該 關鍵字被與儲存在該排名伺服器4的一資料庫(儲存單元)中 的關鍵字比較,從而決定是否有-相似的關鍵字(S44)。 如果有相似的關鍵字,則該搜尋單元設定這關鍵字作 18 1376948 為該網頁瀏覽器上的一搜尋關鍵字,且存取該搜尋網站, -從而進行一搜尋(S45、S47)。此外,如果在步驟44中沒有 相似的關鍵字,該擷取的關鍵字被設定為該搜尋關鍵字, 從而實施該搜尋(S46、S47)。 5 當該搜尋網站執行基於關鍵字的搜尋且送回一搜尋結 果時(S48),該使用者終端機1的該搜尋單元得到這搜尋結果 的最高排序内容,顯示在該顯示單元上(S49)。 第8圖是說明顯示該搜尋結果的一範例的一圖式。 • 搜尋到的内容的一URL被顯示在顯示搜尋結果的一視 10 窗中的一位址框51中,及從該網站伺服器接收的内容被顯 示在一内容樞52中。 而且,在該第四範例中,一搜尋結果列表54及一搜尋 關鍵字53也被顯示在不同於這内容的晝格的畫格裏。如果 其他鏈結從該搜尋結果列表被選擇,則除了以上給出的該 15 内容以外之内容也可以被瀏覽。 將被注意的是,譚搜尋結果顯示方法不限於以上所描 ® 述的方法,及也可以只有最高排序内容或只有該搜尋結果 列表被顯示。 一進一步可用方案是,在不執行基於關鍵字的搜尋的 20 程序的情況下,該預搜尋過程包含,使該程序停在啟動該 網頁瀏覽器的一狀態中,然後將該擷取的關鍵字插入該搜 尋伺服器2的一搜尋頁上的一搜尋框,及等待使用者的操 作。 <其他> 19 1376948 本發明不只限於以上所描述的說明性範例,且理所當 然的是,在不背離本發明的主旨的情況下,可以被以許多 - 形式修改。 C圓式簡單說明3 5 第1圖是一搜尋系統的一概要圖。 Λ 第2圖是一搜尋方法(包括一搜尋關鍵字擷取方法)的一 說明圖。 第3圖是藉由自動指定一CM的一預先決定的區域(尾 部)的搜尋該區域之一方法的一說明圖。 ® 10 第4圖是藉由根擄使用者的操作指定一晝格,擷取一關 鍵字的一方法的一說明圖。 第5圖是一分析順序的一說明圖。 第6圖是在一現場直播期間緩衝擷取的關鍵字的一範 例的一說明圖。 15 第7圖是藉由分析一指定後畫格及擷取關鍵字進行一 搜尋的一方法的一說明圖。 第8圖是說明顯示一搜尋結果的一範例的一圖式。 ® 第9A-B圖是包含模擬一搜尋框的一區域的一影像的一 說明圖。 20 【主要元件符號說明】 1.. .使用者終端機 2.. .網站伺服器 3.. .搜尋伺服器(搜尋引擎) 4···排名伺服器(關鍵字提供伺服器) 20 1376948 10.. .搜尋系統 12.. .算術處理單元 13…儲存單元(硬碟) 14.. .輸入/輸出埠 15.. .通訊控制單元 16··. TV接收單元(調諧器) 61-62...矩形 101.. .電台侧裝置 S1-S49…步驟1-步驟49

Claims (1)

1376948 第097127608號申請案申請專利範圍替換本 101. 4. 3 十、申請專利範圍: 1. 一種由電腦執行的畫格指定方法,其包含以下步驟 播放一動態影像; 接收一指令信號,該指令信號係基於一使用者所為 之指示執行對於該動態影像中的一部分場景的一程序 之一操作;及 藉由接收該指令信號而觸發指定構成該動態影像 的該等晝格中之當接收該指令信號時正在播放中的一 畫格作為一程序目標畫格之動作,且如果一關鍵字元不 存在該程序目標畫格中,則指定自該程序目標畫格以一 預定時間長度彼此對立地相距之一第一畫格及一第二 畫格的任一者; 其中該預定時間長度係基於在該使用者的操作以 及接收到該指令信號之間的時間遲延而被決定。 15 2. 如申請專利範圍第1項所述之晝格指定方法,其中接收 該指令信號時構成該動態影像的連_畫格中的正在播 放中的該畫格前面的該畫格被指定為該程序目標畫格。 20
3. 如申請專利範圍第1項所述之畫格指定方法,其中構成 該動態影像的連串畫格中的在一預先決定的間隔處配 置的該畫格被指定為該程序目標畫格。 4. 如申請專利範圍第1項所述之畫格指定方法,其中藉由 比較該動態影像中的該等畫格,滿足對於一商業訊息 (CM)的一條件的該畫格自該部分場景中被指定作為該 程序目標畫格,且該關鍵字元係存在於滿足對於該CM 22 1376948 第097127608號申請案申請專利範圍替換本 101. 4. 3 之該條件的該畫格中。 5. 如申請專利範圍第4項所述之畫格指定方法,其中滿足 對於該CM的該條件的該等多個晝格中的且被定義為在 連串時間上是連續的一組畫格的一畫格組中的一預先 5 決定的期間内的畫格被設定為該程序目標晝格。 6. 如申請專利範圍第5項所述之畫格指定方法,其中該預 先決定的期間對應於該畫格組中的一後半區域,或者從 開始起在一預定時間長度之後的一區域,或者從結束起 在該預定時間長度之前的一區域。 10 7.如申請專利範圍第1項所述之畫格指定方法,其中該程 序包括從該程序目標畫格擷取該關鍵字元。 8. 如申請專利範圍第7項所述之畫格指定方法,其中從在 接收該指令信號時正在播放中的該晝格起在該預定時 間長度之前的該畫格被設定為該程序目標畫格’及 15 如果該關鍵字元依然不存在,則從在接收該指令信 號時正在播放中的該晝格起在該預定時間長度之後的 該畫格被設定為該程序目標畫格。 9. 如申請專利範圍第8項所述之畫格指定方法,其中該等 晝格被儲存在一儲存單元中,及 20 從在接收該指令信號時正在播放中的該畫格起在 該預定時間長度之前的該畫格從該儲存單元被讀取且 被設定為一分析目標晝格。 10. —種畫格指定裝置,包含: 用於播放一動態影像的一播放單元; 23 1376948 • - ~ — __ —- —~ 第097127608號申請案申請專利範圍替換本 ι〇ι 4 3 ▲一指令接收單元’其用於接收一指令信號,該指令 k號係基於一使用者所為之指示執行對於該動態影像 中的一部分場景的/程序之一操作,·及 一晝格指定單元,其係用於藉由接收該指令信號而 觸發指疋構成該動態影像的該等畫格中之當接收該指 令信號時正在播放中的一晝格作為一程序目標畫格之 動作,且如果一關鍵字元不存在該程序目標畫格中,則 指定自該程序目標畫格以一預定時間長度彼此對立地 相距之一第一畫格及一第二畫格的任一者; 1〇 其中該預定時間長度係基於在該使用者的操作以 及接收到該指令信號之間的時間遲延而被決定。 U•如申請專利範圍第1〇項所述之畫格指定裝置,其中該畫 格指定單元指定接收該指令k號時構成該動態影像的 連串畫格中的正在播放中的該畫格前面的該畫格作為 該程序目標畫袼。 I2.如申請專利範圍第10項所述之晝格指定裝置,其中該晝 格指定單元指定構成該動態影像的連串畫格中的在一 預先決定的間隔處配置的该畫格作為該程序目標晝格。 2〇丨3.如申請專利範圍第1〇項所述之晝格指定裝置,其中藉由 比較該動態影像中的該等畫格,該畫格指定單元自該邹 分場景中指定滿足對於/商業訊息(CM)的一條件的該 畫格作為該程序目標書檢,且該關鍵字元係存在於滿足 Μ對於該CM之該條件的該畫袷中。 如申凊專利範圍第13項所述之畫格指定裝置,其中該畫 24 1376948 第097127608號申請案申請專利範圍替換本 1〇J 4 g 格指定單元指定滿足對於該CM的該條件的該等多個查 格中的且被定義為在連串時間上是連續的—組晝格的 一畫格組中的一預先決定的期間内的該畫格作為該程 序目標畫格。 5 I5.如申請專利範圍第14項所述之畫格指定裝置,其中該預 先決定的期間對應於該畫格組中的一後半區域戈者從 開始起在一預定時間長度之後的一區域,或者從結束起 在該預定時間長度之前的一區域。 16. 如申請專利範圍第1〇項所述之畫格指定裝置,其進—牛 10 包含一擷取單元,該擷取單元用以該程序的方式從該程 序目標畫格擷取該關鍵字元。 17. 如申請專利範圍第16項所述之畫格指定裝置,其中該佥 格指定單元設定在接收該指令信號時從正在播放中的 該畫格起在該預定時間長度之前的該畫格作為該程序 15 目標畫格,及如果該關鍵字元依然不存在,則設定在接 收該指令信號時從正在播放中的該畫格起在該預定時 間長度之後的該畫格作為該程序目標畫格。 18. 如申請專利範圍第17項所述之畫格指定裝置,其中該等 畫格被儲存在一儲存單元中,及 -0 從在接收該指令信號時正在播放中的該畫格起在 該預定時間長度之前的該畫格從該儲存單元被讀取且 被設定為一分析目標畫格。 19. 如申請專利範圍第1〇項所述之畫格指定裝置,其中該動 態影像被定義為電視播送的τν廣播信號。 25 1376948 第097127608號申請案申請專利範圍替換本 101.4.3 20. —種有形實施可由一電腦執行的指令的一程式的電腦 可讀儲存媒體,以執行多數個方法步驟,該等方法步驟 包含: 播放一動態影像; 5 接收一指令信號,該指令信號係基於一使用者所為 之指示執行對於該動態影像中的一部分場景的一程序 之一操作;及 藉由接收該指令信號而觸發指定構成該動態影像 的該等晝格中之當接收該指令信號時正在播放中的一 10 畫格作為一程序目標畫格之動作,且如果一關鍵字元不 存在該程序目標畫格中,則指定自該程序目標畫格以一 預定時間長度彼此對立地相距之一第一畫格及一第二 畫格的任一者; 其中該預定時間長度係基於在該使用者的操作以 15 及接收到該指令信號之間的時間遲延而被決定。 26 1376948 101.4.3 第097127608號申請案圖式修正頁 第2圓
S1 S2 S3 S4 "年f月> 曰修正雜頁
TW097127608A 2007-08-10 2008-07-21 Method, device and storage medium for frame specification TWI376948B (en)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2007209945A JP4814849B2 (ja) 2007-08-10 2007-08-10 フレームの特定方法

Publications (2)

Publication Number Publication Date
TW200910953A TW200910953A (en) 2009-03-01
TWI376948B true TWI376948B (en) 2012-11-11

Family

ID=39847146

Family Applications (1)

Application Number Title Priority Date Filing Date
TW097127608A TWI376948B (en) 2007-08-10 2008-07-21 Method, device and storage medium for frame specification

Country Status (6)

Country Link
US (1) US8020188B2 (zh)
EP (1) EP2023617A3 (zh)
JP (1) JP4814849B2 (zh)
KR (1) KR100975327B1 (zh)
CN (1) CN101365134B (zh)
TW (1) TWI376948B (zh)

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103004228A (zh) * 2010-07-26 2013-03-27 皇家飞利浦电子股份有限公司 获取关键词用于搜索
JP5143270B1 (ja) * 2011-11-14 2013-02-13 株式会社東芝 画像処理装置、及び画像処理装置の制御方法
JP5627030B2 (ja) * 2012-02-13 2014-11-19 日本電信電話株式会社 関連情報提供方法、関連情報提供装置および関連情報提供プログラム
JP5458163B2 (ja) * 2012-11-16 2014-04-02 株式会社東芝 画像処理装置、及び画像処理装置の制御方法
US11080777B2 (en) * 2014-03-31 2021-08-03 Monticello Enterprises LLC System and method for providing a social media shopping experience
JP7134662B2 (ja) * 2018-03-20 2022-09-12 ヤフー株式会社 情報配信システム、および情報配信方法
US11074457B2 (en) * 2019-04-17 2021-07-27 International Business Machines Corporation Identifying advertisements embedded in videos

Family Cites Families (25)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7859551B2 (en) * 1993-10-15 2010-12-28 Bulman Richard L Object customization and presentation system
JPH07203420A (ja) * 1993-11-26 1995-08-04 Sony Corp 双方向放送方式およびその受信装置とその遠隔制御装置
US8813137B2 (en) * 1998-05-08 2014-08-19 Qualcomm Incorporated Apparatus and method for decoding digital image and audio signals
TW420946B (en) 1998-07-20 2001-02-01 Intel Corp Display capture system
US6731788B1 (en) 1999-01-28 2004-05-04 Koninklijke Philips Electronics N.V. Symbol Classification with shape features applied to neural network
US6608930B1 (en) 1999-08-09 2003-08-19 Koninklijke Philips Electronics N.V. Method and system for analyzing video content using detected text in video frames
US7536705B1 (en) * 1999-02-22 2009-05-19 Tvworks, Llc System and method for interactive distribution of selectable presentations
KR20010029074A (ko) * 1999-09-29 2001-04-06 구자홍 플라즈마 디스플레이 패널의 영상정보 캡쳐 장치
US7299405B1 (en) 2000-03-08 2007-11-20 Ricoh Company, Ltd. Method and system for information management to facilitate the exchange of ideas during a collaborative effort
WO2001053966A1 (en) 2000-01-20 2001-07-26 Interactual Technologies, Inc. System, method, and article of manufacture for embedded keywords in video
JP2001298709A (ja) 2000-04-13 2001-10-26 Sharp Corp 動画像記録再生装置
JP2002044575A (ja) * 2000-07-25 2002-02-08 Sony Corp 動画像取り込み装置及びその動画像取り込み方法
JP2002108889A (ja) 2000-09-29 2002-04-12 Hitachi Ltd 情報処理装置および情報サービス方法
US7680324B2 (en) 2000-11-06 2010-03-16 Evryx Technologies, Inc. Use of image-derived information as search criteria for internet and other search engines
JP2002290947A (ja) 2001-03-22 2002-10-04 Purantekku:Kk デジタル放送に於ける番組・cmコンテンツ情報提供システム
US7143353B2 (en) 2001-03-30 2006-11-28 Koninklijke Philips Electronics, N.V. Streaming video bookmarks
DE60229632D1 (de) 2001-05-15 2008-12-11 Koninkl Philips Electronics Nv Untertitelerkennung in anzeigbaren Bildbereich eines Videosignals
CN100411434C (zh) * 2002-05-09 2008-08-13 汤姆森许可贸易公司 在数字视频记录器中的内容标识方法和装置
EP1573594A2 (en) 2002-12-11 2005-09-14 Koninklijke Philips Electronics N.V. Method and system for utilizing video content to obtain text keywords or phrases for providing content related links to network-based resources
JP2004297618A (ja) * 2003-03-27 2004-10-21 Kyocera Corp 画像抽出方法および画像抽出装置
KR20050037703A (ko) * 2003-10-20 2005-04-25 주식회사 대우일렉트로닉스 텔레비전의 정지화상 저장 및 출력장치
JP4413633B2 (ja) 2004-01-29 2010-02-10 株式会社ゼータ・ブリッジ 情報検索システム、情報検索方法、情報検索装置、情報検索プログラム、画像認識装置、画像認識方法および画像認識プログラム、ならびに、販売システム
US20060173825A1 (en) 2004-07-16 2006-08-03 Blu Ventures, Llc And Iomedia Partners, Llc Systems and methods to provide internet search/play media services
KR20070061096A (ko) 2005-12-08 2007-06-13 한국전자통신연구원 비디오 장면 저장/구매를 위한 디지털 방송 수신 장치 및그 방법
KR100789911B1 (ko) 2005-12-08 2008-01-02 한국전자통신연구원 디지털 멀티미디어 방송 단말기에서의 텍스트 표시 장치 및그 방법

Also Published As

Publication number Publication date
CN101365134B (zh) 2011-01-26
US20090040383A1 (en) 2009-02-12
JP4814849B2 (ja) 2011-11-16
EP2023617A3 (en) 2011-02-02
KR20090016384A (ko) 2009-02-13
US8020188B2 (en) 2011-09-13
KR100975327B1 (ko) 2010-08-12
EP2023617A2 (en) 2009-02-11
CN101365134A (zh) 2009-02-11
TW200910953A (en) 2009-03-01
JP2009044657A (ja) 2009-02-26

Similar Documents

Publication Publication Date Title
TWI457770B (zh) 關鍵字擷取方法及裝置、搜尋方法及裝置,以及電腦可讀儲存媒體
TWI376948B (en) Method, device and storage medium for frame specification
US9544544B2 (en) Method and system for sharing information between users in media reproducing system
CN1988646B (zh) 显示关于广播内容的信息的方法和设备
JP4388128B1 (ja) 情報提供サーバ、情報提供方法及び情報提供システム
CN102413359A (zh) 提供媒体内容相关信息的方法及执行该方法的设备和服务器
US20140050457A1 (en) Information processing system, recording/playback apparatus, playback terminal, information processing method, and program
US8301009B2 (en) Detailed information providing method and apparatus of personal video recorder
JP4174056B2 (ja) 映像再生方法、映像再生端末
US8483547B2 (en) Information processing apparatus, recording method, and recording system
US20110295971A1 (en) Information processing system, information processing apparatus, and information processing method
JP2008227909A (ja) 映像検索装置
CN109792502A (zh) 信息处理设备、信息处理方法、程序和信息处理系统
JP4846674B2 (ja) 静止画抽出装置及び静止画抽出プログラム
JP2007201680A (ja) 情報管理装置および方法、並びにプログラム
JP2008278039A (ja) 映像記録再生装置およびコンテンツ配信システム
JP2009260742A (ja) テレビ放送波送信側装置およびテレビ放送受信機
US20110299834A1 (en) Program review on alternate display devices
JP2012205029A (ja) 記録再生方法、および、記録再生装置
JP2005341102A (ja) 番組情報検索装置及びその方法
JP2010171671A (ja) 携帯端末への予約録画支援方法
JP2008293214A (ja) データ生成装置、データ処理システムおよびデータ生成方法
JP2008293215A (ja) 端末装置、連携処理システムおよび連携処理方法

Legal Events

Date Code Title Description
MM4A Annulment or lapse of patent due to non-payment of fees