TWI420501B - Information device and information method - Google Patents
Information device and information method Download PDFInfo
- Publication number
- TWI420501B TWI420501B TW097136686A TW97136686A TWI420501B TW I420501 B TWI420501 B TW I420501B TW 097136686 A TW097136686 A TW 097136686A TW 97136686 A TW97136686 A TW 97136686A TW I420501 B TWI420501 B TW I420501B
- Authority
- TW
- Taiwan
- Prior art keywords
- unit
- playback speed
- line
- sight
- display
- Prior art date
Links
Classifications
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
- G11B27/005—Reproducing at a different information rate from the information rate of recording
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
- G06F3/013—Eye tracking input arrangements
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B19/00—Driving, starting, stopping record carriers not specifically of filamentary or web form, or of supports therefor; Control thereof; Control of operating function ; Driving both disc and head
- G11B19/02—Control of operating function, e.g. switching from recording to reproducing
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/76—Television signal recording
- H04N5/78—Television signal recording using magnetic recording
- H04N5/782—Television signal recording using magnetic recording on tape
- H04N5/783—Adaptations for reproducing at a rate different from the recording rate
Landscapes
- Engineering & Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Television Signal Processing For Recording (AREA)
- Signal Processing For Digital Recording And Reproducing (AREA)
- Digital Computer Display Output (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
- Indexing, Searching, Synchronizing, And The Amount Of Synchronization Travel Of Record Carriers (AREA)
- User Interface Of Digital Computer (AREA)
- Financial Or Insurance-Related Operations Such As Payment And Settlement (AREA)
- Traffic Control Systems (AREA)
Description
本發明係與資訊提示裝置及資訊提示方法有關,其係極適合於譬如利用複數個顯示裝置而提示資訊者。
先前,欲以顯示裝置等從播放中之影像等以良好效率取得資訊之情形,係進行以快轉之播放等。藉由以快轉之播放,可增加在單位時間內可取得的資訊量。然而,在觀賞以快轉之播放者的情形時,使用者(觀賞者)會經常錯過必要的資訊。
在已錯過資訊的情形時,進行倒轉播放位置的操作即可,但卻每錯過一次就有進行操作的必要,故有耗時費力的問題。又,如此之操作反而可能導致資訊之取得效率的降低。
基於此因,在播放之影像上,在動作少之場面方面,降低播放速度,在動作多之場面方面,提昇播放速度;如此方式般,亦依據影像之特徵而將播放速度作自動調整。
在特開10-243351號公報中係揭示如下事項:檢測含有動態圖像與聲音之影像中的影像特徵,在依據此影像之特徵而自動調整播放速度的同時並將影像播放。
然而,亦有如此之使用者存在:即使為動作多之場面,亦想要提昇影像之播放速度進行播放。亦即,使用者欲將影像之播放速度一下子降低、一下子提昇之場面,可謂因使用者各自所處之狀態或使用者之能力、嗜好而有所不同。
亦即,可認為,如可配合使用者所處之狀態或使用者之能力、嗜好而將資訊提供之量作最佳化的話,使用者則可從播放影像之中以良好效率取得必要的資訊。然而,為了配合使用者之狀態、能力或嗜好而將資訊提供之量作最佳化,則首先有必要計測使用者之狀態或能力,在如此之資料的計測上,係有必要使用腦波計或心電圖、NIRS(Near-Infrared Spectroscopy:近紅外線分光設備)等大規模之裝置。亦即,由於成本變得高昂,所以難以實現資訊提示系統的情形頗多。
為了不使用如此之裝置而取得使用者之狀態、能力或嗜好等內部狀態,亦可考慮讓使用者將此等資訊作自行申告的手法。然而,如須讓使用者進行按鍵輸入等繁雜之操作,則施加於使用者之負擔係變大,因而,可預期此事反而成為使用者之效率化資訊取得的障礙。
本發明係有鑑於此點而研發者,其目的在於,以容易之方法將提供給使用者的資訊量作適應性調整。
本發明包含:延遲部,其係將特定量之延遲加於已變換播放速度之影像,並輸出至複數個顯示部中之第1顯示部以外的顯示部者;及播放速度變換部,其係根據被賦予的變數而變換輸入影像之播放速度,並輸出至第1顯示部及延遲部者。此外,包含:視線位置判定部,其係判定以視線檢測部所檢測出之視線的位置是否位於第1顯示部的畫面上,並將判定結果輸出,而視線檢測部係檢測使用者之視線的位置者;及播放速度決定部,其係依據在視線位置判定部之判定結果,而決定播放速度,並將依據播放速度之變數輸出至播放速度變換部者。
藉由採取此方式,當使用者錯過顯示於第1顯示部之資訊,而將視線移動至影像已被加上延遲之其他顯示部時,則該視線之位置資訊係從視線位置判定部被輸出至播放速度決定部。接著,在播放速度決定部,係依據從視線位置判定部所輸出之判定結果而决定播放速度,依據已決定之播放速度的變數,係從播放速度決定部被輸出至播放速度變換部。
藉由本發明,由於根據使用者之視線的位置資訊而調整播放速度,因此,可將提供給使用者的資訊量作適應性調整。
以下,參考圖式,針對在本發明之第1實施型作說明。圖1(a)係顯示本實施型態中之系統的構成例。圖1(a)所示系統係以如下者所構成:播放裝置1,其係將圖像或影像等譬如以2倍速等之播放速度予以播放者;顯示裝置2A、顯示裝置2B、顯示裝置2C、顯示裝置2D、顯示裝置2E,其係顯示播放影像者;及視線檢測裝置3,其係將使用者U之視線L1的位置藉由使用者U之眼的位置予以檢測者。顯示裝置2A~2E及視線檢測裝置3係藉由纜線4而與播放裝置1連接。再者,在本例中,係應用於利用5台顯示裝置的情形,但台數並不限定於此。
圖1(b)係顯示將圖1(a)所示顯示裝置2A~2E及正看著其之使用者U,從側面之方向觀察的情形之圖。顯示裝置2A~2E係譬如以液晶面板等所構成,如圖1(b)所示般,以深度方向及垂直方向之配置位置互為不同階之方式配置,使其從使用者U看來係呈縱一行配置般。在深度方向之最眼前側且垂直方向之最下方側,係配置著顯示裝置2A。
然後,在對顯示裝置2A之配置位置往深度方向之深側及垂直方向之上側,係配置著顯示裝置2B。以後,在深度方向上係往深側方向、在垂直方向上係往上側方向,在將位置各作些微挪移的同時並配置著顯示裝置2C、2D、2E。亦即,對使用者U而言而言,配置於最眼前側的是顯示裝置2A,配置於最深側的是顯示裝置2E。再者,在圖1(a)及圖1(b)中,雖省略保持顯示裝置2A~2E之構造體的圖示,但就構造體而言,係設為利用搭載顯示部之梯階狀之台或支撐各顯示部之支柱等。
在顯示裝置2A~2E係顯示從後述播放裝置1內之存積部30所讀出之相同的素材之影像,但在播放裝置1係設有未圖示之延遲部,因此,顯示於顯示裝置2A~2E之影像係設為,隨著顯示裝置之配置位置越往深側而各作些微延遲。因而,使用者U會產生影像從顯示裝置之眼前側往深側移動般之錯覺。
視線檢測裝置3係檢測使用者U之視線L1的位置之裝置,譬如配置於與使用者U呈對面之位置等容易檢測使用者U之視線L1的位置。再者,在本例中,作為視線檢測裝置3,係設為使用固定型之裝置,但如設為使用讓使用者U穿載之類型的觀賞檢測用之眼鏡亦可。或是,設為藉由設於遠方之監視攝影機而檢測使用者U之視線L1的位置亦可。
使用者U通常係觀賞顯示於顯示裝置2A之影像,但在已錯過資訊之情形,為了追尋已錯過之資訊,則會將視線移動至顯示如下影像之顯示裝置,而該影像係比顯示於顯示裝置2A之影像更延遲者,亦即,此一情形,使用者U之視線L1係變成從顯示裝置2A往深側之方向移動。視線檢測裝置3係檢測如此情形之使用者U之視線L1的動作、或視線L1的位置,並將檢測結果傳送至播放裝置1。
接著,參考圖2所示區塊圖,針對系統之內部構成例作說明。播放裝置1包含:影像輸入部10、編碼‧解碼處理部20、存積部30、作為視線位置判定部之資訊錯過檢測部40、播放速度決定部50、播放速度變換部60、及延遲部70A、70B、70C、70D。在圖2中,記錄於存積部30之記錄影像係以虛線顯示;在顯示裝置上所播放之播放影像係以一點鏈線,而資料係以實線顯示。
影像輸入部10係介以輸入端子等將影像信號取入播放裝置1內,進行信號位準的變換處理。編碼‧解碼處理部20係進行如下處理:將從影像輸入部10所輸入之影像信號予以編碼,作為記錄影像而輸出至存積部30。或是,進行如下處理:將存積於存積部30之壓縮影像資料予以解碼,作為播放影像而輸出至播放速度變換部60。編碼速率係設為,使用與從影像輸入部10所輸入的影像之圖框速率相同之速率;解碼係設為,根據從後述播放速度決定部50所傳送之播放速度Vk(單位:倍速)而進行。播放速度Vk係在播放速度決定部50生成而被傳送至播放速度變換部60。然後,在播放速度變換部60中進行如下處理:將現在之(在該時點之)播放速度V變換為從播放速度決定部50所輸出之播放速度Vk。存積部30係譬如以HDD(Hard Disk Drive:硬碟)所構成,將在編碼‧解碼處理部20已作編碼之影像予以存積。
資訊錯過檢測部40係根據從視線檢測裝置3所輸入之檢測結果,而賦予使用者U之視線位置與顯示裝置2A~2E之配置位置對應關係,當判斷使用者U之視線L1係在顯示裝置2A以外的位置之情形時,則判定為已發生藉由使用者之資訊的錯過,而將檢測結果傳送至播放速度決定部50。當判斷使用者U之視線L1係保持注視於顯示裝置2A之情形時,則將判定為無藉由使用者U之資訊的錯過之檢測結果,傳送至播放速度決定部50。
播放速度決定部50具有用於使現在之播放速度V變快的變數Pinc、及用於使現在之播放速度V變慢的變數Pdec,依據從資訊錯過檢測部40所傳送之檢測結果,而決定該應用變數Pinc與變數Pdec之哪一方。就變數Pinc而言,係譬如設定為使用1.5,就變數Pdec而言,係譬如設定為使用0.5等數值。播放速度決定部50係藉由將任一方之變數乘置於現在之播放速度V,而算出播放速度Vk。在Pinc之值方面,如為大於1之值,則任何值均可;在Pdec之值方面,如為大於0小於1之值,則任何值均可。然後,將已算出之播放速度Vk輸出至播放速度變換部60。有關資訊錯過檢測部40與播放速度決定部50之處理的詳細內容,係如後所述。
播放速度變換部60係以影像處理部61與聲音處理部62所構成。影像處理部61係進行如下處理:以從編碼‧解碼處理部20所輸出之影像之播放速度V成為從播放速度決定部50所輸入之播放速度Vk之方式,而變換播放速度。然後,在將已變換播放速度之影像供應至顯示裝置2A的同時,並供應至延遲部70A、延遲部70B、延遲部70C、及延遲部70D。聲音處理部62係進行如下處理:以將在聲音信號中無音之部分或聲音性特徵呈連續之部分予以刪除等的手法,進行不改變間距而變換播放速度。在聲音之播放速度變換之具體的處理方面,特開2000-99097號公報係記著一例。有關播放速度變換部60(影像處理部61)之處理的詳細內容,係如後所述。
延遲部70A係將D秒之延遲量加於從播放速度變換部60所輸出之影像,並傳送至顯示裝置2B與延遲部70B。D秒係譬如指2秒等,設為依據顯示裝置2之台數或使用者之資訊取得能力、嗜好而可設定為任意之值。延遲部70B係更將D秒之延遲加於從延遲部70A所傳送之影像,並輸出至顯示裝置2C與延遲部70C。延遲部70C係更將D秒之延遲加於從延遲部70B所傳送之影像,並輸出至顯示裝置2D與延遲部70D。延遲部70D係更將D秒之延遲加於從延遲部70C所傳送之影像,並輸出至顯示裝置2E。亦即,在顯示裝置2E,係顯示比顯示於顯示裝置2A之影像呈4D秒延遲的影像。
接著,參考圖3之流程圖,針對資訊錯過檢測部40之處理例作說明。資訊錯過檢測部40係首先根據從視線檢測裝置3所輸入之視線位置資訊,進行使用者U之視線是否位於最眼前側之畫面(亦即,顯示裝置2A)上的判斷(步驟S1)。在判斷為使用者U之視線L1係位於顯示裝置2A上之情形時,則視為未發生藉由使用者U之資訊的錯過(步驟S2),並作為「無錯過」而輸出檢測結果(步驟S4)。在判斷為使用者U之視線並不在顯示裝置2A上之情形時,則視為有藉由使用者U之資訊的錯過(步驟S3),並作為「有錯過」而輸出檢測結果。
再者,在圖3所示之例方面係設為,以使用者U之視線L1之位置是否位於最眼前側的顯示裝置2A上為基準,而判斷有無藉由使用者U之資訊的錯過,但如設為使用其他基準而作判斷亦可。譬如,如設為與視線L1之位置資訊一起,亦考慮視線L1之動作亦可。圖4係顯示針對該情形的處理例。
在圖4中,資訊錯過檢測部40首先係進行如下判斷:使用者U之視線L1是否正處於從最眼前(亦即,顯示裝置2A)之配置位置往深處移動之中(步驟S11)。在判斷為使用者U之視線L1正往深側移動之情形時,則視為有藉由使用者U之資訊的錯過,判斷為「有錯過」(步驟S12),而輸出檢測結果(判斷結果)(步驟S13)。在判斷為使用者U之視線L1並未從顯示裝置2A之配置位置往深處移動之情形時,則接著進行如下判斷:使用者U之視線L1是否位於最深處之畫面(亦即,顯示裝置2E)上(步驟S14)。
在判斷為使用者U之視線L1係位於顯示裝置2E上之情形時,則視為有藉由使用者U之資訊的錯過(步驟S12),作為「有錯過」而輸出檢測結果(步驟S13)。在判斷為使用者U之視線L1並不位於顯示裝置2E上之情形時,則視為未發生藉由使用者U之資訊的錯過(步驟S15),並作為「無錯過」而輸出檢測結果(步驟S13)。
接著,參考圖5之流程圖,針對播放速度決定部50之處理例作說明。播放速度決定部50係首先根據從資訊錯過檢測部40所傳送之檢測結果,進行判斷是否有藉由使用者U之資訊的錯過(步驟S21)。在資訊錯過檢測部40所傳送之檢測結果為「有錯過」之情形時,則將變數Pdec乘算於在該時點之播放速度V,而算出播放速度Vk(步驟S22)。如Pdec為0.5,在該時點之播放速度V為1倍速之情形時,則播放速度Vk係成為0.5(Pdec)×1(V)=0.5倍速。亦即,在判斷為有藉由使用者U之資訊的錯過之情形時,則進行使播放速度變慢的處理。再者,播放速度V為1倍速係指,在保持著記錄於存積部30之影像的圖框速率之狀態下而進行播放的情形。
在資訊錯過檢測部40所傳送之檢測結果為「無錯過」之情形時,則將變數Pinc乘算於在該時點之播放速度V,而算出播放速度Vk(步驟S23)。如Pinc為1.5,播放速度V為1倍速之情形時,則播放速度Vk係成為1.5×1=1.5倍速。然後,將在步驟S22或步驟S23所算出之播放速度Vk,輸出至編碼‧解碼處理部20與播放速度變換部60(步驟S24)。亦即,在判斷為無藉由使用者U之資訊的錯過之情形時,則判斷使用者U之資訊取得尚有裕度,而進行使播放速度變快的處理。
播放速度Vk在播放速度變換部60中係成為作播放速度變換的對象值。在播放速度變換部60方面,係進行將在該時點之播放速度V變換為播放速度Vk的處理(亦即,使播放速度Vk成為新的播放速度V之處理)。因而,播放速度V係根據播放速度Vk而被每次作變更。譬如,在播放速度V為1.5倍之情形、且在步驟S21之判斷上判斷為有資訊之錯過的情形時,則在步驟S22上進行0.5(Pdec)×1.5(播放速度V)的計算,將播放速度Vk設為0.75。然後,藉由根據播放速度變換部60之播放速度變換處理,則播放速度Vk=播放速度V=0.75倍速。
接著,參考圖6,針對播放速度變換部60之處理例作說明。在圖6(a)中係顯示,將輸入至播放速度變換部60的圖框,以時間系列依序從左起作排列之狀態;在圖6(b)中係顯示,將從播放速度變換部60所輸出的各圖框,同樣以時間系列依序從左起作排列之狀態。在圖6中,係將f1~fn(n為自然數)之圖框號碼賦予各個圖框。
輸入至播放速度變換部60的圖框數係以播放速度Vk×區塊大小B求出。區塊大小B係藉由如下方式所算出:將存積部30所存積之影像的圖框速率fr乘算於播放速度變換部60之實施常式的時間之間隔T。譬如,當播放速度變換部60之實施常式的時間之間隔T為1秒、存積部30所存積之影像的圖框速率fr為30fps之情形時,區塊大小B係成為1(T)×30(B)=30(圖框)。然後,在播放速度Vk為3之情形時,則輸入至播放速度變換部60的圖框數係成為30×3=90(圖框)。
輸入至播放速度變換部60的圖框數係指,亦即,編碼‧解碼處理部20從存積部30所抽出之圖框數。編碼‧解碼處理部20係以從播放速度決定部50所輸入之播放速度Vk、存積部30所記錄之影像的圖框速率fr、播放速度變換部60之實施常式的時間之間隔T為基礎,而算出從存積部30所抽出之圖框數。然後,以相當於所算出之圖框數分,從存積部30抽出,並輸出至播放速度變換部60。
在圖6(a)中係顯示,將90圖框之影像輸入至播放速度變換部60之例。在播放速度變換部60中,係以將所取得的圖框收納於區塊大小B以內之方式,以一定之取樣間隔將圖框作間拔,藉由此方式,而進行播放速度的變換。譬如,當區塊大小B為30之情形時,係進行將已取得之90圖框以3圖框單位作間拔而設為30圖框之處理。在圖6(b)中係顯示間拔為30圖框後之圖框,且顯示,間拔後之30圖框係以從編碼‧解碼處理部20所輸入之圖框中的圖框號碼f1、f4、f7、f10...f88所構成。在圖6所示之例中,藉由進行如此之處理,而使播放速度成為3倍。此一手法由於無須使用複雜之構成即可實現,因此,藉由使用此一手法,而可抑制硬體規模。
再者,在在圖6所示之例中係顯示如下情形:藉由將從編碼‧解碼處理部20所輸入之圖框,以一定之取樣間隔將圖框作間拔,而進行播放速度的變換;但如設為藉由變換圖框速率本身而變換播放速度亦可。譬如,如設為如下者亦可:藉由將圖7(a)所示90圖框之圖框速率從30fps變換為90fps,而如圖7(b)所示般,將90fps之圖框速率的影像輸出90圖框分。藉由如此般處理,由於輸入後之圖框的全部均被輸出,因此,輸出影像中之閃爍變少,可獲得高品質之影像。
或是,設為如下者亦可:從編碼‧解碼處理部20所輸入的圖框之中,僅抽出資訊量多之圖框作為播放用之圖框,藉由此方式而進行速度變換。此一情形之處理例係如圖8之流程圖所示。圖8所示處理係設為以1秒間隔進行(亦即,T=1)。首先,藉由編碼‧解碼處理部20,從存積部30取得播放速度Vk×區塊大小B分的圖框(步驟S31);接著,在圖框號碼fx(x係表示從1至n之間的特定數)的圖框方面,在算出注目像素與其鄰接像素之像素值的差後,將與鄰接像素之像素值的差成為臨限值Th以上之像素的總數Si予以算出(步驟S32)。亦即,在從編碼‧解碼處理部20所輸入之全部的圖框方面,上述像素的總數Si係被算出。
在步驟S31上,譬如,播放速度Vk為1.5、區塊大小為30之情形時,係取得1.5×30=45圖框。因而,在步驟S32所處理之圖框號碼係成為f1~f45。就在步驟S32所使用之臨限值Th而言,係譬如設為設定為50等之數值。
步驟S32之處理係針對在步驟S31所取得之全部圖框進行;在步驟S33方面,係進行取得後之全部圖框的處理是否已經完畢的判斷。在判斷為在全部圖框中處理已經完畢之情形時,接著,將如下像素的總數Si大的圖框,抽出相當於區塊大小分,進行以圖框號碼順序輸出之處理(步驟S34),而該像素係與鄰接像素之像素值的差成為臨限值Th以上者。
圖9係顯示進行如此之處理後的情形之例。在圖9(a)中係顯示,將已輸入至播放速度變換部60的45圖框,以圖框號碼較小之順序從左作排列的狀態。在圖9(b)中係顯示,從此45圖框之中,將如下像素的總數(Si)大的圖框,抽出相當於區塊大小(30圖框)分,以圖框號碼順序作排列的狀態,而該像素係與鄰接像素之像素值的差成為臨限值Th以上者。在圖9(b)中係顯示,從播放速度變換部60所輸出之30圖框,係以圖框號碼f2、f3、f5、f7、f9、f10...f25所構成。亦即,根據圖8及圖9所示方法,藉由僅將資訊量多之圖框抽出,則可提高播放速度(在圖8、圖9之例中為1.5倍)。又,根據如此之處理,在輸入圖框之中,由於可保留含有字幕等文字資訊多的可能性高之圖框,因此,藉由速度變換處理而刪除使用者所需要之資訊的現象,並不會發生。藉由此方式,而讓使用者U可以良好效率取得資訊。
如根據以上所說明之本實施型態之構成及處理,係以使用者U之視線L1的位置資訊或視線L1之時間方向的遷移資訊為基礎,而判斷藉由使用者U之資訊的錯過之有無,當判斷為有錯過之情形時,則進行使播放速度變慢之處理。藉由此方式,使用者U即使在已錯過資訊之情形,亦可將已錯過之資訊在配置於深側之顯示裝置的畫面上,從容不迫地進行確認。
又,當判斷為未發生錯過之情形時,由於判斷為使用者U在資訊取得上尚有裕度而加快播放速度,因此,讓使用者U可以更良好效率取得資訊。
進而,由於自動判斷藉由使用者U之資訊的錯過之有無,因此並無請使用者U將其內部狀態作自行申告的必要性。因而,無須對使用者U施加負擔,而讓使用者U可專心於資訊取得。
再者,設為,在顯示裝置2A~2E作再提示之資訊即使非影像,而是靜態圖像或僅字幕等文字資訊亦可。
又,在上述實施型態中,係設為如下構成:在使用者U之視線L1位於顯示裝置2A上之情形時,則提高影像之播放速度;但如設為如下構成亦可:使用者U之視線L1位於顯示裝置2A上之期間,並不進行播放速度之變更。
又,在上述實施型態中,係以將顯示裝置2A~2E排列於縱方向(深度方向)之情形為例,但如排列於橫方向亦可。此一情形之系統構成例係顯示於圖10。在圖10中,對應於圖1之部分係賦予相同符號。在圖10之右端係配置著顯示裝置2A,在顯示裝置2A之左鄰,係分開特定之間隔而配置著顯示裝置2B。以下,同樣的,在顯示裝置2B之左鄰,係配置著顯示裝置2C,在顯示裝置2C之左鄰,係配置著顯示裝置2D,在顯示裝置2D之左鄰,係配置著顯示裝置2E。
在此系統之內部構成方面,係設為與圖2所示構成為相同。亦即,相對於顯示裝置2A直接連接於播放速度變換部60,顯示裝置2B~2E係分別與延遲部70A~70D連接。基於此因,顯示裝置2A係顯示未加延遲之影像,而顯示裝置2B則顯示比顯示裝置2A所顯示之影像呈2D延遲的影像;在配置於最左端之顯示裝置2E,則顯示比顯示裝置2A所顯示之影像呈4D秒延遲的影像。基於此因,使用者U會產生顯示於各顯示裝置2之影像係從右往左(亦即,從顯示裝置2A側往顯示裝置2E側)移動般的錯覺。
在圖10所示系統中,使用者U在觀賞配置於中央之顯示裝置2C(第2顯示部)之狀態下而錯過字幕等資訊的情形時,為了再度確認已錯過之資訊,而使視線移動至顯示裝置2D或顯示裝置2E,而其係顯示比顯示裝置2C呈時間性延遲之影像者。亦即,在已錯過資訊之情形時,則使視線往左方向移動。又,使用者U想看正顯示於顯示裝置2C之影像的未來之影像的情形時,則使視線移動至顯示裝置2B或顯示裝置2A,而其係已經顯示顯示裝置2C即將顯示之影像者。亦即,在無資訊之錯過、資訊之取得尚具有裕度的情形時,則使視線往右方向移動。在圖11中,係顯示此一情形之使用者U的動作模式圖。如圖11所示般,使用者U在欲再度確認已錯過之影像的情形時,係使視線往左方向(箭頭A1之方向)移動;在想看在時間上較晚之影像的情形時,則使視線往右方向(箭頭A2之方向)移動。
在圖10所示例中,係設為進行如下處理:在使用者U之視線位於中央之顯示裝置2C上之情形時,並不進行播放速度的變換,當視線往右側移動之情形時,則提高播放速度,當視線往左側移動之情形時,則使播放速度變慢。參考圖12,針對此一情形之資訊錯過檢測部40(參考圖2)的處理例,作說明。資訊錯過檢測部40係首先根據從視線檢測裝置3所傳送之資訊,進行判斷使用者U之視線是否位於中央之顯示裝置2C的畫面上(步驟S41)。在判斷為使用者U之視線L1是位於中央之畫面(顯示裝置2C之畫面)的情形時,則不進行任何事而結束處理。
在判斷為使用者U之視線L1並未位於中央之畫面的情形時,接著,係判斷使用者U之視線L1是否位於配置於顯示裝置2C之左側的顯示裝置之畫面(步驟S42)。在判斷為使用者U之視線L1係位於左側之畫面的情形時,則判斷為已發生藉由使用者U之資訊的錯過(步驟S43),並將「有錯過」之檢測結果傳送至播放速度決定部50(參考圖1)(步驟S44)。
在步驟S42上,在判斷為使用者U之視線L1並不位於左側之畫面的情形時,接著,係判斷使用者U之視線L1是否位於右側之畫面(步驟S45)。在判斷為使用者U之視線L1並不位於右側之畫面的情形時,則結束處理;在判斷為使用者U之視線L1係位於右側之畫面的情形時,則判斷為未發生藉由使用者U之資訊的錯過(步驟S46),並將「無錯過」之檢測結果傳送至播放速度決定部50(步驟S44)。
播放速度決定部50係進行圖5之流程圖所記載之處理者,在從資訊錯過檢測部40所傳送之檢測結果為「有錯過」之情形時,則將變數Pdec乘算於在該時點之播放速度V,而算出播放速度Vk(步驟S22),並將所算出之播放速度Vk輸出至編碼‧解碼處理部20與播放速度變換部60(步驟S24)。在從資訊錯過檢測部40所傳送之檢測結果為「無錯過」之情形時,則將變數Pinc乘算於在該時點之播放速度V,而算出播放速度Vk(步驟S23),並將所算出之播放速度Vk輸出至編碼‧解碼處理部20與播放速度變換部60(步驟S24)。
如前所述般,變數Pinc係用於使播放速度V變快的變數,變數Pdec係用於使播放速度V變慢的變數。此外,在播放速度變換部60,係將在該時點之播放速度V變換為已與變數Pinc或變數Pdec作乘算的播放速度Vk。亦即,在使用者U之視線L1係位於配置於從中央往右側之顯示裝置上的情形時,則判斷為未發生資訊的錯過,而進行使影像之播放速度變快的處理。又,在使用者U之視線L1係位於配置於從中央往左側之顯示裝置上的情形時,則判斷為已發生資訊的錯過,而進行使影像之播放速度變慢的處理。
藉由進行如此之處理,譬如,在使用者U已使視線L1往右側之顯示裝置移動之情形時,播放速度V係變快;如變快後之播放速度對使用者U而言為最佳的話,則使用者U係變成在配置於中央之顯示裝置2C上觀賞影像。在使用者U之視線L1位於顯示裝置2C上之期間,由於播放速度並不變更,因此,使用者U係持續觀賞顯示於顯示裝置2C上之影像,藉由此方式,而可維持喜好的播放速度。
又,在藉由播放速度變快而錯過資訊之情形時,使用者U係追尋已錯過之資訊,而使視線L1持續往左移動。然後,在視線L1移動至比中央左側之顯示裝置上的情形時,播放速度V係變慢。藉由反覆進行如此般視線的移動,則在配置於中央之顯示裝置2C上,係進行對使用者U而言為最佳播放速度的顯示。亦即,藉由進行如下處理,使用者U之視線L1係自然會集中於配置於中央之顯示裝置2C上,而該處理係:如圖13所示般,在使用者U之視線已往左側(箭頭A1之方向)移動之情形時,係降低影像之播放速度;在使用者U之視線已往右側(箭頭A2之方向)移動之情形時,則加快影像之播放速度。亦即,依據使用者U之資訊取得能力、使用狀況、或嗜好,而使資訊提示量被作適應性調整。
再者,在圖10所示例方面,係以將顯示裝置2A配置於最右側之情形為例作說明,而顯示裝置2A係顯示未加延遲之影像者;然而,如應用於如下型態亦可:將將顯示裝置2A配置於左端,隨著配置位置往右前進,則顯示於各顯示裝置上之影像係逐漸延遲。
接著,參考圖14~圖16,針對本發明之第2實施型態作說明。在本實施型態中,在判斷為有藉由使用者U之資訊的錯過之情形時,則在對使用者U配置於最眼前側之顯示裝置2A上,將使用者U所錯過之資訊進行作再提示之處理。顯示裝置2A~2E之配置係設為圖1所示之配置。
圖14係顯示本實施型態中之系統的構成例之區塊圖。在圖14中,係顯示本實施型態中之系統的構成例之區塊圖。在圖14中,對應於圖2之部分係賦予相同符號。圖14所示系統係以如下者所構成:播放裝置1';顯示裝置2A、顯示裝置2B、顯示裝置2C、顯示裝置2D、顯示裝置2E,其係顯示播放影像者;及視線檢測裝置3,其係檢測使用者U之視線L1的位置者。
首先,從播放裝置1'之構成起作說明。播放裝置1'包含:影像輸入部10、編碼‧解碼處理部20、存積部30、資訊錯過檢測部40、播放速度‧播放位置決定部80、播放速度變換部60、及延遲部70A、70B、70C、70D。在影像輸入部10、編碼‧解碼處理部20、存積部30、資訊錯過檢測部40、播放速度變換部60、及延遲部70A~70D之各部的構成方面,由於與第1實施型態中之構成為相同,因此省略說明。播放速度‧播放位置決定部80係連接於作為再提示資訊記憶部的再提示隊列81、及作為播放位置記憶部之記憶體82。
播放速度‧播放位置決定部80具有變數Pinc與變數Pdec,依據從資訊錯過檢測部40所傳送之檢測結果,而決定該應用變數Pinc與變數Pdec之哪一方。至此,係成為與在第1實施型態所說明之播放速度決定部50同樣之處理。在資訊錯過檢測部40方面,如在第1實施型態所說明般,在使用者U之視線L1並不位於顯示裝置2A上的情形、或比顯示裝置2A更往深側移動的情形、位於配置於最深側之顯示裝置2E上的情形時,則判斷為有藉由使用者U之資訊的錯過。
在從資訊錯過檢測部40所傳送之檢測結果為表示有藉由使用者U之資訊的錯過之情形時,播放速度‧播放位置決定部80係使在顯示裝置2E顯示中之影像的圖框號碼(播放位置資訊)記憶於再提示隊列81,且將播放位置資訊傳送至編碼‧解碼處理部20。再提示隊列81係以FIFO(First In First Out:先進先出)型之記憶體等構成。再者,在本例中係設為,使在顯示裝置2E顯示中之圖框的圖框號碼記憶於再提示隊列81,但如設為如下者亦可:使其記憶在視線L1所位於的顯示裝置顯示中之圖框;而顯示裝置2E係配置於最深測者。
播放速度‧播放位置決定部80係設為,以特定之間隔確認在再提示隊列81是否存積著播放位置資訊;如在再提示隊列81有播放位置資訊之情形時,則設為將作為播放位置資訊而記憶的圖框號碼交給編碼‧解碼處理部20。在顯示裝置2A上正將使用者U所錯過之資訊作再提示中、且在再提示隊列81存積著播放位置資訊之情形時,係進行如下處理:使在該時點之顯示裝置2E上所顯示之圖框的圖框號碼記憶於記憶體82。
在編碼‧解碼處理部20方面,係從存積部30將圖框讀出,並輸出至播放速度變換部60,而該圖框係對應於從播放速度‧播放位置決定部80所傳送之圖框號碼者。然後,在播放速度變換部60方面係進行如下處理:將被輸入之圖框變換為特定之播放速度,並輸出至顯示裝置2A。藉由如此般構成,而將使用者U所錯過之資訊在位於最接近使用者U之顯示裝置2A上作再提示。在未發生藉由使用者U之資訊錯過的情形時,則存積於存積部3的未提示之影像,係被輸出至顯示裝置2A~2E。再者,設為,在顯示裝置2A作再提示之資訊即使非影像,僅字幕等文字資訊亦可。
接著,針對播放速度‧播放位置決定部80之處理的詳細內容,參考圖15之流程圖作說明。首先,在從資訊錯過檢測部40所傳送之檢測結果中,進行是否有藉由使用者U之資訊錯過的判斷(步驟S51)。在判斷為有資訊的錯過之情形時,則進行如下處理:將現在之顯示位置(在顯示裝置2E顯示中之圖框的圖框號碼)追加於再提示隊列81(步驟S52),且將變數Pdec乘算於現在之播放速度後,將其設為新的播放速度Vk(步驟S53)。
在步驟S41上,在判斷為無資訊的錯過之情形時,係進行如下處理:將變數Pinc乘算於現在之播放速度V後,將其設為新的播放速度Vk(步驟S54)。然後,接著,進行在顯示裝置2A中是否正將使用者U所錯過之資訊作再提示中的判斷(步驟S55)。在判斷為非再提示中之情形時,則進行在再提示隊列81是否存積著播放位置資訊的判斷(步驟S56),如為未存積之情形,則結束處理。
在顯示裝置2A中正將使用者U所錯過之資訊作再提示中、且在再提示隊列81存積著播放位置資訊之情形時,則將在顯示裝置2E顯示中之圖框作為現在之播放位置而保存於記憶體82(步驟S57)。然後,將存積於再提示隊列81的播放位置資訊作為現在之播放位置資訊,而輸出至編碼‧解碼處理部20(步驟S58)。
在步驟S55上判斷為並非正將錯過資訊作再提示中之情形時,則進行是否在再提示隊列81存積著播放位置資訊的判斷(步驟S59)。在判斷為在再提示隊列81存積著播放位置資訊之情形時,則前進至步驟S58,進行如下處理:將再提示隊列81所存積之播放位置資訊作為現在之播放位置資訊,而輸出至編碼‧解碼處理部20。在步驟S59上判斷為在再提示隊列81未存積著播放位置資訊之情形時,則進行如下處理:將記憶體82所記憶之播放位置資訊讀出,而輸出至編碼‧解碼處理部20(步驟S60)。
藉由作如此般處理,而在顯示裝置2A上將使用者U所錯過之資訊作再提示,同時,在資訊再提示中,亦使影像之播放位置資訊記憶於記憶體82。然後,在資訊再提示處理結束後,由於對應於記憶於記憶體82之播放位置資訊的影像係被讀出,因此,在顯示裝置2A上,則顯示在再提示前所顯示之影像的持續影像。
圖16係顯示針對將資訊再提示處理作說明之圖。如圖16(a)所示般,在使用者U錯過顯示裝置2A上所顯示之字幕等重要資訊的情形時,使用者U之視線L1係追尋字幕而往深側之方向移動(參考圖16(b))。亦即,視線L1變成不在顯示裝置2A上。因而,已收到來自視線檢測裝置3之檢測結果的資訊錯過檢測部40,係判斷為有藉由使用者U之資訊的錯過。判斷結果係被輸出至播放速度‧播放位置決定部80,將在該時點顯示於顯示裝置2E之圖框的圖框號碼追加於再提示隊列81,且將變數Pdec乘算於播放速度V而算出新的播放速度Vk。再提示隊列81所記憶之圖框號碼、及播放速度Vk係被輸出至編碼‧解碼處理部20與播放速度變換部60。
在編碼‧解碼處理部20方面,係進行如下處理:從存積部30將圖框讀出,而該圖框係對應於從播放速度‧播放位置決定部80所輸出之圖框號碼者。從存積部30所讀出之圖框係被輸入至播放速度變換部60,在播放速度變換部60將播放速度變換為Vk。然後,播放速度被變換為Vk之影像,則被輸出至顯示裝置2A。亦即,在顯示裝置2A上,使用者U已錯過之字幕等資訊係被作再提示(參考圖16(c))。
根據以上所說明之實施型態的構成及處理,在使用者U之視線L1並不位於顯示裝置2A上之情形時,則視為已發生藉由使用者U之資訊的錯過,在該時間使用者U所看見之影像,會在顯示裝置2A上被作再提示。基於此因,可將藉由使用者U之資訊的錯過予以確實防止。
再者,在至此所說明之實施型態中,係以使用複數台顯示裝置2之構成為例作說明,但如設為如下者亦可:將一台顯示裝置2之畫面分割為複數個區域,對分割後之各區域輸出影像。在圖17(a)中係顯示,將顯示裝置2之畫面往縱方向分割為5個之情形之例;在圖17(b)中係顯示,將顯示裝置2之畫面往橫方向分割為5個之情形之例。藉由使用如此之顯示裝置2,亦可獲得與上述實施型態中之效果同樣的效果。
1...播放裝置
2、2A~2E...顯示裝置
3...視線檢測裝置
4...纜線
10...影像輸入部
20...編碼‧解碼處理部
30...存積部
40...資訊錯過檢測部
50...播放速度決定部
60...播放速度變換部
61...影像處理部
62...聲音處理部
70A~70D...延遲部
80...播放速度‧播放位置決定部
81...再提示隊列
82...記憶體
A1、A2...箭頭
B...區塊大小
L1...視線
Pdec、Pinc...變數
Si...總數
T、Th...間隔
U...使用者
V、Vk...播放速度
f1、f2...圖框號碼
fr...圖框速率
fx...圖框號碼
圖1(a)、(b)係顯示根據本發明之第1實施型態的系統之構成例的說明圖。
圖2係顯示根據本發明之第1實施型態的系統之內部構成例的區塊圖。
圖3係顯示根據本發明之第1實施型態的資訊錯過檢測部之處理例的流程圖。
圖4係顯示根據本發明之第1實施型態的資訊錯過檢測部之其他處理例的流程圖。
圖5係顯示根據本發明之第1實施型態的播放速度決定部的處理例之流程圖。
圖6係顯示根據本發明之第1實施型態的播放速度變換部的處理例之說明圖,(a)係顯示輸入圖框,(b)係顯示輸出圖框。
圖7係顯示根據本發明之第1實施型態的播放速度變換部的其他處理例之說明圖,(a)係顯示輸入圖框,(b)係顯示輸出圖框。
圖8係顯示根據本發明之第1實施型態的保留資訊多之圖框的情形之處理例的流程圖。
圖9係顯示根據本發明之第1實施型態的播放速度變換部之其他處理例之說明圖,(a)係顯示輸入圖框,(b)係顯示輸出圖框。
圖10係顯示根據本發明之第1實施型態的其他實施型態的系統之構成例的說明圖。
圖11係顯示根據本發明之第1實施型態的其他實施型態的使用者之動作之例的模式圖。
圖12係顯示根據本發明之第1實施型態的其他實施型態的資訊錯過檢測部之處理例的流程圖。
圖13係顯示根據本發明之第1實施型態的其他實施型態的播放速度之變換處理與使用者之動作間的關聯例的模式圖。
圖14係顯示根據本發明之第2實施型態之系統的內部構成例的區塊圖。
圖15係顯示根據本發明之第2實施型態的播放速度‧播放位置決定部之處理例的流程圖。
圖16(a)-(c)係顯示根據本發明之第2實施型態的資訊再提示處理之說明圖。
圖17(a)-(b)係顯示根據本發明之其他實施型態之顯示裝置的構成例之說明圖。
1...播放裝置
2A、2B、2C、2D、2E...顯示裝置
3...視線檢測裝置
10...影像輸入部
20...編碼、解碼處理部
30...存積部
40...資訊錯過檢測部
50...播放速度決定部
60...播放速度變換部
61...影像處理部
62...聲音處理部
70A...延遲部
70B...延遲部
70C...延遲部
70D...延遲部
Claims (19)
- 一種資訊提示裝置,其包含:延遲部,其係將特定量之延遲加於已變換播放速度之影像,並輸出至複數個顯示部中之第1顯示部以外的顯示部者;播放速度變換部,其係根據被賦予的變數而變換輸入影像之播放速度,並輸出至前述第1顯示部及前述延遲部者;視線位置判定部,其係判定以視線檢測部所檢測出之視線的位置是否位於前述複數個顯示部之第2顯示部的畫面上,並將判定結果輸出,該視線檢測部係檢測使用者之視線的位置者;及播放速度決定部,其係依據在前述視線位置判定部之判定結果,而決定前述播放速度,並將依據前述播放速度之變數輸出至前述播放速度變換部者;且前述複數個顯示部係以前述第1顯示部為前頭,分開特定之間隔依序作配置;前述延遲部所加於前述影像之延遲的量,係依據前述複數個顯示部之配置的順序而作設定。
- 一種資訊提示裝置,其包含:延遲部,其係將特定量之延遲加於已變換播放速度之影像,並輸出至複數個顯示部中之第1顯示部以外的顯示部者;播放速度變換部,其係根據被賦予的變數而變換輸入 影像之播放速度,並輸出至前述第1顯示部及前述延遲部者;視線位置判定部,其係判定以視線檢測部所檢測出之視線的位置是否位於前述複數個顯示部之第2顯示部的畫面上,並將判定結果輸出,該視線檢測部係檢測使用者之視線的位置者;及播放速度決定部,其係依據在前述視線位置判定部之判定結果,而決定前述播放速度,並將依據前述播放速度之變數輸出至前述播放速度變換部者;且前述複數個顯示部係以前述第1顯示部為前頭,分開特定之間隔依序作配置;前述複數個顯示部係以前述第1顯示部為前頭,以與前述第1顯示部之深度方向的距離呈逐漸遠離之方式,分開特定之間隔作配置。
- 如請求項2之資訊提示裝置,其中前述視線位置判定部係在檢測出前述視線正從前述第1顯示部之位置往深度方向移動的情形,或是,判斷前述視線係位於如下顯示部之畫面上的情形時,則將使前述播放速度變慢之變數輸出至前述播放速度變換部,該顯示部係在前述複數個顯示部中在深度方向配置於最深之位置者。
- 一種資訊提示裝置,其包含:延遲部,其係將特定量之延遲加於已變換播放速度之影像,並輸出至複數個顯示部中之第1顯示部以外的顯 示部者;播放速度變換部,其係根據被賦予的變數而變換輸入影像之播放速度,並輸出至前述第1顯示部及前述延遲部者;視線位置判定部,其係判定以視線檢測部所檢測出之視線的位置是否位於前述複數個顯示部之第2顯示部的畫面上,並將判定結果輸出,該視線檢測部係檢測使用者之視線的位置者;及播放速度決定部,其係依據在前述視線位置判定部之判定結果,而決定前述播放速度,並將依據前述播放速度之變數輸出至前述播放速度變換部者;且前述第1顯示部與前述第2顯示部為相同;前述播放速度決定部係在判斷以前述視線檢測部所檢測出之視線的位置是位於前述第1顯示部之畫面上的情形時,並不將變數輸出至前述播放速度變換部。
- 一種資訊提示裝置,其包含:延遲部,其係將特定量之延遲加於已變換播放速度之影像,並輸出至複數個顯示部中之第1顯示部以外的顯示部者;播放速度變換部,其係根據被賦予的變數而變換輸入影像之播放速度,並輸出至前述第1顯示部及前述延遲部者;視線位置判定部,其係判定以視線檢測部所檢測出之視線的位置是否位於前述複數個顯示部之第2顯示部的 畫面上,並將判定結果輸出,該視線檢測部係檢測使用者之視線的位置者;及播放速度決定部,其係依據在前述視線位置判定部之判定結果,而決定前述播放速度,並將依據前述播放速度之變數輸出至前述播放速度變換部者;且前述複數個顯示部係以前述第1顯示部為前頭,分開特定之間隔依序作配置;前述播放速度決定部係在判斷以前述視線檢測部所檢測出之視線的位置並不位於前述第2顯示部之畫面上、且前述視線的位置係位於配置於前述第1顯示部所配置之方向的顯示部之畫面上的情形時,係將使前述播放速度變快之變數輸出至前述播放速度變換部;在判斷以前述視線檢測部所檢測出之視線的位置並不位於前述第2顯示部之畫面上、且前述視線的位置係位於配置於前述第1顯示部所配置之方向以外之方向的顯示部之畫面上的情形時,則將使前述播放速度變慢之變數輸出至前述播放速度變換部。
- 如請求項5之資訊提示裝置,其中前述播放速度決定部係在判斷以前述視線檢測部所檢測出之視線的位置是位於前述第2顯示部之畫面上的情形時,並不將變數輸出至前述播放速度變換部。
- 一種資訊提示裝置,其包含:延遲部,其係將特定量之延遲加於已變換播放速度之影像,並輸出至複數個顯示部中之第1顯示部以外的顯 示部者;播放速度變換部,其係根據被賦予的變數而變換輸入影像之播放速度,並輸出至前述第1顯示部及前述延遲部者;視線位置判定部,其係判定以視線檢測部所檢測出之視線的位置是否位於前述複數個顯示部之第2顯示部的畫面上,並將判定結果輸出,該視線檢測部係檢測使用者之視線的位置者;播放速度決定部,其係依據在前述視線位置判定部之判定結果,而決定前述播放速度,並將依據前述播放速度之變數輸出至前述播放速度變換部者;存積部,其係存積前述影像者;及編碼.解碼處理部,其係進行下列處理:將前述輸入影像編碼並輸出至前述存積部者;及進行存積於前述存積部之影像的解碼並輸出者;且前述播放速度決定部係在判斷以前述視線檢測部所檢測出之視線的位置並不位於前述第1顯示部之畫面上的情形時,在已進行判定之時點,將顯示於前述複數個顯示部中的特定之顯示部的影像之圖框號碼、及使前述播放速度變慢之變數輸出至前述編碼.解碼處理部及前述播放速度變換部;前述編碼.解碼處理部係將對應於從前述播放速度決定部所輸出之圖框號碼的圖框,從前述存積部讀出並輸出至前述播放速度變換部; 前述播放速度變換部係將從前述編碼.解碼處理部所輸出之圖框的播放速度,根據從前述播放速度決定部所輸出之使前述播放速度變慢的變數予以變換,並輸出至前述第1顯示部。
- 如請求項7之資訊提示裝置,其中前述特定之顯示部係指,與前述第1顯示部之距離係配置於最遠離之位置的顯示部。
- 如請求項7之資訊提示裝置,其中於資訊提示裝置中,前述特定之顯示部係指,配置於前述視線檢測部所檢測出之視線的位置之前述第1顯示部以外的顯示部。
- 如請求項7之資訊提示裝置,其中包含再提示資訊記憶部,其係記憶前述播放速度決定部所輸出之前述圖框號碼者;及播放位置記憶部,其係在前述圖框號碼已記憶於前述再提示資訊記憶部之情形時,將顯示於前述特定之顯示部的影像之圖框號碼予以儲存者;前述播放速度決定部係在對應於從前述播放速度決定部所輸出之圖框號碼的圖框並未顯示於前述第1顯示部之情形、且前述圖框號碼已記憶於前述再提示資訊記憶部之情形時,則將顯示於前述特定之顯示部的影像之圖框號碼輸出至前述播放位置記憶部,且將記憶於前述再提示資訊記憶部之圖框號碼予以讀出,並輸出至前述編碼.解碼處理部。
- 如請求項10之資訊提示裝置,其中前述播放速度決定部係在對應於從前述播放速度決定部所輸出之圖框號碼的圖框顯示於前述第1顯示部之情形、且前述圖框號碼並未記憶於前述再提示資訊記憶部之情形時,則將記憶於前述播放位置記憶部之前述圖框號碼予以讀出,並輸出至前述編碼.解碼處理部。
- 一種資訊提示裝置,其包含:延遲部,其係將特定量之延遲加於已變換播放速度之影像,並輸出至複數個顯示部中之第1顯示部以外的顯示部者;播放速度變換部,其係根據被賦予的變數而變換輸入影像之播放速度,並輸出至前述第1顯示部及前述延遲部者;視線位置判定部,其係判定以視線檢測部所檢測出之視線的位置是否位於前述複數個顯示部之第2顯示部的畫面上,並將判定結果輸出,該視線檢測部係檢測使用者之視線的位置者;及播放速度決定部,其係依據在前述視線位置判定部之判定結果,而決定前述播放速度,並將依據前述播放速度之變數輸出至前述播放速度變換部者;且前述播放速度變換部係藉由將構成前述輸入影像的圖框,以特定之間隔作間拔,而進行前述播放速度之變換。
- 一種資訊提示裝置,其包含: 延遲部,其係將特定量之延遲加於已變換播放速度之影像,並輸出至複數個顯示部中之第1顯示部以外的顯示部者;播放速度變換部,其係根據被賦予的變數而變換輸入影像之播放速度,並輸出至前述第1顯示部及前述延遲部者;視線位置判定部,其係判定以視線檢測部所檢測出之視線的位置是否位於前述複數個顯示部之第2顯示部的畫面上,並將判定結果輸出,該視線檢測部係檢測使用者之視線的位置者;及播放速度決定部,其係依據在前述視線位置判定部之判定結果,而決定前述播放速度,並將依據前述播放速度之變數輸出至前述播放速度變換部者;且前述播放速度變換部係藉由變換前述輸入影像之圖框速率,而進行前述播放速度之變換。
- 一種資訊提示裝置,其包含:延遲部,其係將特定量之延遲加於已變換播放速度之影像,並輸出至複數個顯示部中之第1顯示部以外的顯示部者;播放速度變換部,其係根據被賦予的變數而變換輸入影像之播放速度,並輸出至前述第1顯示部及前述延遲部者;視線位置判定部,其係判定以視線檢測部所檢測出之視線的位置是否位於前述複數個顯示部之第2顯示部的 畫面上,並將判定結果輸出,該視線檢測部係檢測使用者之視線的位置者;及播放速度決定部,其係依據在前述視線位置判定部之判定結果,而決定前述播放速度,並將依據前述播放速度之變數輸出至前述播放速度變換部者;且前述播放速度變換部係將前述輸入影像之各圖框中之與鄰接像素的像素值的差成為特定值以上之像素的總數予以算出,從前述已算出之總數大之圖框依照順序作特定圖框數輸出,藉由此方式,而進行前述播放速度之變換。
- 一種資訊提示裝置,其包含:延遲部,其係將特定量之延遲加於已變換播放速度之影像,並輸出至複數個顯示部中之第1顯示部以外的顯示部者;播放速度變換部,其係根據被賦予的變數而變換輸入影像之播放速度,並輸出至前述第1顯示部及前述延遲部者;視線位置判定部,其係判定以視線檢測部所檢測出之視線的位置是否位於前述複數個顯示部之第2顯示部的畫面上,並將判定結果輸出,該視線檢測部係檢測使用者之視線的位置者;及播放速度決定部,其係依據在前述視線位置判定部之判定結果,而決定前述播放速度,並將依據前述播放速度之變數輸出至前述播放速度變換部者;且 前述顯示部係在將一個畫面分割為複數個區域之情形的分割後之各個區域。
- 一種資訊提示方法,其包含如下程序:將已變換播放速度之影像顯示於複數個顯示部中之第1顯示部;將特定之圖框週期單位的延遲加於輸入影像,並輸出至前述第1顯示部以外的前述顯示部;檢測使用者之視線的位置,並將檢測結果輸出;判定前述所檢測出之視線的位置是否位於前述第1顯示部的畫面上,並將判定結果輸出;依據前述判定結果而決定前述播放速度,並將依據前述播放速度之變數輸出;及依據前述已輸出之變數,而變換前述影像之播放速度;且前述複數個顯示部係以前述第1顯示部為前頭,分開特定之間隔依序作配置;加於前述影像之延遲的量,係依據前述複數個顯示部之配置的順序而作設定。
- 一種資訊提示方法,其包含如下程序:將已變換播放速度之影像顯示於複數個顯示部中之第1顯示部;將特定之圖框週期單位的延遲加於輸入影像,並輸出至前述第1顯示部以外的前述顯示部;檢測使用者之視線的位置,並將檢測結果輸出; 判定前述所檢測出之視線的位置是否位於前述第1顯示部的畫面上,並將判定結果輸出;依據前述判定結果而決定前述播放速度,並將依據前述播放速度之變數輸出;及依據前述已輸出之變數,而變換前述影像之播放速度;且藉由將構成前述輸入影像的圖框,以特定之間隔作間拔,而進行前述播放速度之變換。
- 一種資訊提示方法,其包含如下程序:將已變換播放速度之影像顯示於複數個顯示部中之第1顯示部;將特定之圖框週期單位的延遲加於輸入影像,並輸出至前述第1顯示部以外的前述顯示部;檢測使用者之視線的位置,並將檢測結果輸出;判定前述所檢測出之視線的位置是否位於前述第1顯示部的畫面上,並將判定結果輸出;依據前述判定結果而決定前述播放速度,並將依據前述播放速度之變數輸出;及依據前述已輸出之變數,而變換前述影像之播放速度;且藉由變換前述輸入影像之圖框速率,而進行前述播放速度之變換。
- 一種資訊提示方法,其包含如下程序:將已變換播放速度之影像顯示於複數個顯示部中之第 1顯示部;將特定之圖框週期單位的延遲加於輸入影像,並輸出至前述第1顯示部以外的前述顯示部;檢測使用者之視線的位置,並將檢測結果輸出;判定前述所檢測出之視線的位置是否位於前述第1顯示部的畫面上,並將判定結果輸出者;依據前述判定結果而決定前述播放速度,並將依據前述播放速度之變數輸出者;及依據前述已輸出之變數,而變換前述影像之播放速度者;且將前述輸入影像之各圖框中之與鄰接像素的像素值的差成為特定值以上之像素的總數予以算出,從前述已算出之總數大之圖框依照順序作特定圖框數輸出,藉由此方式,而進行前述播放速度之變換。
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2007286449A JP5115150B2 (ja) | 2007-11-02 | 2007-11-02 | 情報提示装置及び情報提示方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
TW200929160A TW200929160A (en) | 2009-07-01 |
TWI420501B true TWI420501B (zh) | 2013-12-21 |
Family
ID=40590953
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
TW097136686A TWI420501B (zh) | 2007-11-02 | 2008-09-24 | Information device and information method |
Country Status (8)
Country | Link |
---|---|
US (1) | US8805173B2 (zh) |
EP (1) | EP2204992B1 (zh) |
JP (1) | JP5115150B2 (zh) |
KR (1) | KR20100076974A (zh) |
CN (1) | CN101828390B (zh) |
AT (1) | ATE550758T1 (zh) |
TW (1) | TWI420501B (zh) |
WO (1) | WO2009057562A1 (zh) |
Families Citing this family (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102145228B (zh) * | 2010-02-05 | 2015-04-29 | Pc概念有限公司 | 使用视频录像构建交互式视频游戏的方法和装置 |
WO2011135704A1 (ja) * | 2010-04-28 | 2011-11-03 | 富士通株式会社 | 動画出力装置、動画出力方法、および動画出力プログラム |
US8836777B2 (en) | 2011-02-25 | 2014-09-16 | DigitalOptics Corporation Europe Limited | Automatic detection of vertical gaze using an embedded imaging device |
JP5510366B2 (ja) * | 2011-03-08 | 2014-06-04 | カシオ計算機株式会社 | 画像表示制御装置及びプログラム |
KR101920646B1 (ko) * | 2011-12-15 | 2018-11-22 | 한국전자통신연구원 | 시각인식 기반의 프로그래시브 비디오 스트리밍 장치 및 방법 |
JP5907353B2 (ja) * | 2013-08-06 | 2016-04-26 | コニカミノルタ株式会社 | 表示装置、表示制御プログラムおよび画像処理装置 |
US10334224B2 (en) | 2016-02-19 | 2019-06-25 | Alcacruz Inc. | Systems and method for GPU based virtual reality video streaming server |
EP3264222B1 (en) * | 2016-06-27 | 2019-04-10 | Nokia Technologies Oy | An apparatus and associated methods |
CN110177299B (zh) * | 2018-08-30 | 2021-04-30 | 深圳市野生动物园有限公司 | 视频播放速率调整平台 |
KR20210075641A (ko) * | 2019-12-13 | 2021-06-23 | 삼성전자주식회사 | 정보 제공 방법 및 이를 지원하는 전자 장치 |
CN115767159A (zh) * | 2022-11-16 | 2023-03-07 | 深圳创维-Rgb电子有限公司 | 投屏方法、装置、电子设备及存储介质 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5412775A (en) * | 1988-04-13 | 1995-05-02 | Hitachi, Ltd. | Display control method and apparatus determining corresponding validity of windows or operations |
US5555324A (en) * | 1994-11-01 | 1996-09-10 | Massachusetts Institute Of Technology | Method and apparatus for generating a synthetic image by the fusion of signals representative of different views of the same scene |
US5621429A (en) * | 1993-03-16 | 1997-04-15 | Hitachi, Ltd. | Video data display controlling method and video data display processing system |
US5909244A (en) * | 1996-04-15 | 1999-06-01 | Massachusetts Institute Of Technology | Real time adaptive digital image processing for dynamic range remapping of imagery including low-light-level visible imagery |
Family Cites Families (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP3074967B2 (ja) | 1992-10-27 | 2000-08-07 | 松下電器産業株式会社 | 高ダイナミックレンジ撮像・合成方法及び高ダイナミックレンジ撮像装置 |
KR100283619B1 (ko) * | 1998-12-03 | 2001-03-02 | 정선종 | 연속-시간 필터를 위한 주파수 튜닝 회로 |
US20070078552A1 (en) * | 2006-01-13 | 2007-04-05 | Outland Research, Llc | Gaze-based power conservation for portable media players |
JP2002084449A (ja) | 2000-09-08 | 2002-03-22 | Sanyo Electric Co Ltd | 固体撮像素子を用いた撮像装置 |
JP4977950B2 (ja) * | 2004-02-04 | 2012-07-18 | セイコーエプソン株式会社 | マルチ画面映像再生システム、映像再生方法及び表示装置 |
JP2005286378A (ja) * | 2004-03-26 | 2005-10-13 | Fuji Photo Film Co Ltd | 動画像再生システムおよび動画像再生方法 |
JP2006115469A (ja) * | 2004-09-15 | 2006-04-27 | Sony Corp | 画像処理装置、画像処理方法、画像処理プログラム及びプログラム格納媒体 |
JP2006270829A (ja) * | 2005-03-25 | 2006-10-05 | Fujitsu Ten Ltd | 動画再生装置 |
JP2007074038A (ja) * | 2005-09-02 | 2007-03-22 | Sony Corp | 情報再生装置、および情報再生方法、並びにコンピュータ・プログラム |
US8360578B2 (en) | 2006-01-26 | 2013-01-29 | Nokia Corporation | Eye tracker device |
WO2007111206A1 (ja) | 2006-03-14 | 2007-10-04 | Sony Corporation | 画像処理装置及び画像処理方法 |
-
2007
- 2007-11-02 JP JP2007286449A patent/JP5115150B2/ja not_active Expired - Fee Related
-
2008
- 2008-09-24 TW TW097136686A patent/TWI420501B/zh not_active IP Right Cessation
- 2008-10-27 KR KR1020107008350A patent/KR20100076974A/ko active IP Right Grant
- 2008-10-27 US US12/682,038 patent/US8805173B2/en not_active Expired - Fee Related
- 2008-10-27 AT AT08844606T patent/ATE550758T1/de active
- 2008-10-27 EP EP08844606A patent/EP2204992B1/en not_active Not-in-force
- 2008-10-27 WO PCT/JP2008/069474 patent/WO2009057562A1/ja active Application Filing
- 2008-10-27 CN CN2008801119881A patent/CN101828390B/zh not_active Expired - Fee Related
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5412775A (en) * | 1988-04-13 | 1995-05-02 | Hitachi, Ltd. | Display control method and apparatus determining corresponding validity of windows or operations |
US5621429A (en) * | 1993-03-16 | 1997-04-15 | Hitachi, Ltd. | Video data display controlling method and video data display processing system |
US5555324A (en) * | 1994-11-01 | 1996-09-10 | Massachusetts Institute Of Technology | Method and apparatus for generating a synthetic image by the fusion of signals representative of different views of the same scene |
US5909244A (en) * | 1996-04-15 | 1999-06-01 | Massachusetts Institute Of Technology | Real time adaptive digital image processing for dynamic range remapping of imagery including low-light-level visible imagery |
Also Published As
Publication number | Publication date |
---|---|
EP2204992A1 (en) | 2010-07-07 |
CN101828390B (zh) | 2013-02-27 |
US20100209074A1 (en) | 2010-08-19 |
ATE550758T1 (de) | 2012-04-15 |
US8805173B2 (en) | 2014-08-12 |
JP5115150B2 (ja) | 2013-01-09 |
EP2204992A4 (en) | 2011-04-27 |
WO2009057562A1 (ja) | 2009-05-07 |
CN101828390A (zh) | 2010-09-08 |
TW200929160A (en) | 2009-07-01 |
JP2009117986A (ja) | 2009-05-28 |
EP2204992B1 (en) | 2012-03-21 |
KR20100076974A (ko) | 2010-07-06 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
TWI420501B (zh) | Information device and information method | |
JP5371493B2 (ja) | 装置及び方法 | |
US20100220975A1 (en) | Information presentation apparatus and information presentation method | |
JP6419306B2 (ja) | 要約コンテンツサービス方法及び放送受信装置 | |
KR101335518B1 (ko) | 동영상 디스플레이 방법 및 이를 적용한 영상재생장치 | |
TWI571116B (zh) | 數位視訊串流中的特技播放 | |
JPWO2009001683A1 (ja) | 表示装置及び表示方法 | |
US20080136937A1 (en) | Image processing apparatus, image processing method, and program | |
US8330863B2 (en) | Information presentation apparatus and information presentation method that display subtitles together with video | |
JPH06292075A (ja) | 映画フィルムの一連の画面のフレームを識別する装置、その装置を含んでなる映画エンコーダおよびインターフレーム予測符号化を実行する映画エンコーダ | |
JP6614547B2 (ja) | 視聴状態検出装置、視聴状態検出システムおよび視聴状態検出方法 | |
US20110032979A1 (en) | Image display control device and imaging device provided with the image display control device, image processing device and imaging device using the image processing device | |
JP5149283B2 (ja) | 動画像再生装置、デジタルカメラ、半導体集積回路および動画像再生方法 | |
JP2008197266A (ja) | 再生装置、再生システム、再生方法及びコンピュータプログラム | |
KR20040041704A (ko) | 비-순차 더미 양방향 예측 화상을 이용한 고속 움직임트릭 모드 | |
JP5242762B2 (ja) | 画像再生装置、画像再生方法及びデータ構造 | |
JP5232744B2 (ja) | 要約コンテンツを表示する表示装置、方法及びプログラム | |
JP2013232696A (ja) | 記録再生装置 | |
JP2009117988A (ja) | 情報提示装置及び情報提示方法 | |
JP2009117990A (ja) | 情報提示装置及び情報提示方法 | |
KR101462116B1 (ko) | 방송처리장치 및 그 제어방법 | |
JP2006005594A (ja) | 映像データ再生装置、および映像データ再生方法 | |
JP2013098878A (ja) | 映像変換装置、映像表示装置、テレビ受像装置、映像変換方法及びコンピュータプログラム | |
JP2012120018A (ja) | 符号化装置及び再生装置、及びその制御方法及びプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
MM4A | Annulment or lapse of patent due to non-payment of fees |