TWI540493B - 於使用者介面中顯示內容之電腦實施方法及實施該電腦實施方法之系統 - Google Patents

於使用者介面中顯示內容之電腦實施方法及實施該電腦實施方法之系統 Download PDF

Info

Publication number
TWI540493B
TWI540493B TW103109157A TW103109157A TWI540493B TW I540493 B TWI540493 B TW I540493B TW 103109157 A TW103109157 A TW 103109157A TW 103109157 A TW103109157 A TW 103109157A TW I540493 B TWI540493 B TW I540493B
Authority
TW
Taiwan
Prior art keywords
content
image
user interface
software application
computer software
Prior art date
Application number
TW103109157A
Other languages
English (en)
Other versions
TW201447723A (zh
Inventor
強納森J 李
瑪西耶 史達裘維克
Original Assignee
蘋果公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 蘋果公司 filed Critical 蘋果公司
Publication of TW201447723A publication Critical patent/TW201447723A/zh
Application granted granted Critical
Publication of TWI540493B publication Critical patent/TWI540493B/zh

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90Details of database functions independent of the retrieved data types
    • G06F16/95Retrieval from the web
    • G06F16/957Browsing optimisation, e.g. caching or content distillation
    • G06F16/9577Optimising the visualization of content, e.g. distillation of HTML documents
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44Arrangements for executing specific programs
    • G06F9/445Program loading or initiating
    • G06F9/44521Dynamic linking or loading; Link editing at or after load time, e.g. Java class loading
    • G06F9/44526Plug-ins; Add-ons

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Software Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Databases & Information Systems (AREA)
  • Data Mining & Analysis (AREA)
  • Human Computer Interaction (AREA)
  • User Interface Of Digital Computer (AREA)

Description

於使用者介面中顯示內容之電腦實施方法及實施該電腦實施方法之系統
本發明大體而言係關於藉由執行電腦軟體應用程式(例如,外掛程式)而於使用者介面中顯示內容。
可將電腦軟體應用程式實施為電腦指令,該等電腦指令可儲存於電腦可讀媒體上且由電腦系統執行以執行操作。電腦系統在執行電腦軟體應用程式時所消耗之電力的量可取決於電腦系統在執行該應用程式時所執行之操作的類型。舉例而言,電腦系統為了經由網路(諸如,網際網路)自伺服器系統接收高解析度媒體內容(諸如,數位視訊)及在顯示器件上呈現該內容所消耗的電力可為高的。相對而言,電腦系統為了執行「計算器」應用程式以執行簡單之算術加法所消耗的電力可為低的。在電腦系統為電池供電型的情況下,在執行用以呈現內容之操作(諸如,上文所描述之操作)時的電池電力之損耗可致使電腦系統不可使用且可使得有必要對電池頻繁再充電。
本說明書描述關於在由電腦系統提供之使用者介面中呈現外掛程式內容之快照的技術。
一般而言,可將此處所描述之標的物的一個新穎態樣實施為電腦實施方法。接收用以呈現使用者介面之輸入,該使用者介面包括藉 由執行電腦軟體應用程式所獲得之內容。回應於接收到該輸入,執行電腦軟體應用程式以獲得內容。自內容來識別代表內容之影像。當識別出代表內容之影像時終止對電腦軟體應用程式之執行。於使用者介面中顯示代表內容之影像。
此及其他態樣可包括以下特徵中之一或多者。可於使用者介面中顯示物件。該物件可為可經選擇以呈現藉由執行電腦軟體應用程式所獲得之內容。可接收對物件之選擇。回應於接收到對物件之選擇,可重新執行個體化對電腦軟體應用程式之執行以獲得內容。可於使用者介面中顯示所獲得之內容以代替影像。執行電腦軟體應用程式以獲得內容可包括:在執行電腦軟體應用程式時判定電腦軟體應用程式之執行參數;及儲存該等執行參數。重新執行個體化對電腦軟體應用程式之執行以獲得內容可包括使用該等執行參數來執行電腦軟體應用程式。回應於接收到對物件之選擇,可儲存電腦軟體應用程式之識別碼。可接收用以呈現一不同使用者介面之隨後輸入,該使用者介面包括藉由執行電腦軟體應用程式所獲得之不同內容。自動地且在無使用者干預的情況下,可執行電腦軟體應用程式以獲得不同內容。可於該不同使用者介面中顯示該不同內容。
在一時刻,可判定自儲存電腦軟體應用程式之識別碼的時間至該時刻的已消逝之時間週期係大於臨限週期。回應於判定該時間週期係大於該臨限週期,可刪除電腦軟體應用程式之識別碼。可接收用以呈現一不同使用者介面之隨後輸入,該使用者介面包括藉由類似於該電腦軟體應用程式之另一電腦軟體應用程式獲得的不同內容。自動地且在無使用者干預的情況下,可執行該另一電腦軟體應用程式以獲得該不同內容。可於該不同使用者介面中顯示該不同內容。可基於以下各者中之至少一者來判定該另一電腦軟體應用程式係類似於該電腦軟體應用程式:呈現於使用者介面中之內容的資料物件模型(DOM)結 構;呈現於使用者介面中之內容之DOM結構的識別符;或以下三者之組合:參照呈現於使用者介面中之內容的第一統一資源定位符(URL)、電腦軟體應用程式之多用途網際網路郵件擴充(MIME)類型及參照電腦軟體應用程式之第二URL。
內容可為包括影像序列之視覺內容,其中代表待呈現於該部分中之內容的影像被包括於該序列中。於使用者介面中顯示所獲得之內容可包括從影像開始顯示視覺內容。執行電腦軟體應用程式以獲得內容可包括執行電腦軟體應用程式以獲得該序列之每一影像。識別代表內容之影像可包括:識別該序列之滿足臨限值的一影像;及將滿足臨限值之所識別之影像提供作為代表內容之影像。可判定該序列之該影像不滿足臨限值。可獲得該序列之下一影像。可判定該序列之該下一影像是否滿足臨限值。識別該序列之滿足臨限值之該影像可包括藉由以下步驟來判定該序列之該影像是否滿足臨限值:識別該影像中所包括的像素;比較每一像素與每一鄰近像素,以判定與每一像素及每一鄰近像素相關聯之影像參數的差值;彙總與該影像中所包括之像素相關聯的差值;及判定該等差值是否滿足臨限值。比較每一像素與每一鄰近像素以判定與每一像素及每一鄰近像素相關聯之影像參數的差值可包括將取樣柵格上覆於該影像中所包括之像素。
可判定使用者介面之將呈現有內容之一部分的大小。可基於該部分的相對於使用者介面大小之大小而自動地抑或回應於使用者輸入而於使用者介面中顯示可經選擇以呈現藉由執行電腦軟體應用程式所獲得之內容的物件。可判定該部分的相對於使用者介面大小之大小係小於臨限大小。回應於判定該部分的相對於使用者介面大小之大小係小於臨限大小,可在偵測到對使用者介面之該部分之選擇時顯示該可選擇之物件。偵測對使用者介面之該部分之選擇可包括偵測在使用者介面之該部分上的滑鼠移入(mouse-over)事件或滑鼠移動事件或滑鼠 移出(mouse-out)事件中的至少一者。可判定該部分的相對於使用者介面大小之大小係大於臨限大小。回應於判定該部分的相對於使用者介面大小之大小係大於臨限大小,可在無使用者互動的情況下自動地於使用者介面內顯示可選擇之物件。電腦軟體應用程式可為在使用者介面中執行之外掛程式。
可將此處所描述之標的物的其他新穎態樣實施為儲存指令之電腦可讀媒體,該等指令可由一或多個處理器執行以執行此處所描述之操作,或實施為包括電腦可讀媒體及一或多個處理器之系統,或實施為電腦可讀媒體與系統兩者。
本說明書中所描述之標的物之一或多個實施例的細節闡述於隨附圖式及以下描述中。於使用者介面中呈現外掛程式內容之快照的其他特徵、態樣及優點將自描述、圖式及申請專利範圍變得顯而易見。
102‧‧‧電腦系統
104‧‧‧顯示器件
106‧‧‧使用者介面
108‧‧‧鍵盤
110‧‧‧位置指示器
112‧‧‧網路
114a‧‧‧伺服器電腦系統
114b‧‧‧伺服器電腦系統
114c‧‧‧伺服器電腦系統
120‧‧‧影像
122‧‧‧物件
124‧‧‧位置指示器
130‧‧‧內容
150‧‧‧電腦可讀媒體
152‧‧‧資料處理裝置
200‧‧‧使用者介面
202‧‧‧物件
210‧‧‧使用者介面
212‧‧‧影像
214‧‧‧可選擇之物件
302‧‧‧應用程式執行單元
304‧‧‧應用程式比較單元
306‧‧‧快照識別單元
308‧‧‧快照評估單元
310‧‧‧內容呈現單元
312‧‧‧電腦可讀儲存器
400a‧‧‧實例處理程序
400b‧‧‧實例處理程序
500‧‧‧實例處理程序
700‧‧‧實例處理程序
800‧‧‧架構
802‧‧‧處理器
804‧‧‧輸出器件
806‧‧‧輸入器件
808‧‧‧網路介面
810‧‧‧通信頻道
812‧‧‧電腦可讀媒體
814‧‧‧網路通信模組
816‧‧‧作業系統
圖1A及圖1B說明用以於使用者介面中呈現快照之一實例電腦系統。
圖2A及圖2B說明藉由使用圖1A及圖1B之電腦系統來執行電腦軟體應用程式所提供的實例使用者介面。
圖3說明圖1A及圖1B之電腦系統之實例組件。
圖4A及圖4B為藉由圖3中所示之實例組件實施的實例處理程序之流程圖。
圖5為藉由圖3中所示之實例組件實施的實例處理程序之流程圖。
圖6為藉由圖3中所示之實例組件實施的實例處理程序之流程圖。
圖7為藉由圖3中所示之實例組件實施的實例處理程序之流程圖。
圖8為圖1A及圖1B之實例電腦系統的架構。
各圖式中相同參考數字及名稱指示相同元件。
本發明描述用於在使用者介面中呈現外掛程式內容之快照的電腦實施方法、電腦可讀媒體及電腦系統。電腦系統可實施可在顯示器件中呈現數位媒體內容(例如,視訊、音訊、影像、文字及其類似者)之電腦軟體應用程式。舉例而言,電腦系統可經由網際網路而連接至內容主機伺服器。電腦系統可執行網際網路瀏覽器軟體應用程式以在顯示器件中呈現使用者介面(例如,網際網路瀏覽器)及在使用者介面中呈現內容。內容主機伺服器提供至電腦系統之內容可包括視覺內容,該視覺內容可為電腦系統之使用者想要看到之主要內容或使用者可能沒興趣看到之輔助或次要內容(例如,廣告)。視覺內容之實例可包括視訊內容或由網站之發行者為了建立沉浸式網站(例如,針對服裝商或餐館)所使用之內容、視訊遊戲或生產率應用程式(或其組合)。若電腦系統執行用以顯示廣告之外掛程式,則電腦系統可耗盡電力來執行使用者可能不想要之操作。
將網際網路瀏覽器軟體應用程式組態成在無使用者輸入的情況下不執行任何外掛程式可防止電腦系統自動地執行以執行不良操作。若內容主機伺服器所提供之內容包括僅可藉由執行外掛程式而呈現之內容,則使用者可能不能夠看到任何內容。替代地或額外地,網際網路瀏覽器應用程式可在使用者介面中呈現替代符號(例如,灰階影像)以代替內容,從而產生具有不完整外觀之使用者介面。又,除非使用者知道由電腦系統接收之內容的類型,否則使用者可能不能夠容易地識別要啟動之外掛程式及要忽略之另一外掛程式。
本發明描述對於總是執行外掛程式或永久性地停用外掛程式之替代解決方案。如下文所描述,可(例如)在背景中執行外掛程式,以 獲得代表待藉由執行外掛程式而呈現之內容的影像。一旦獲得影像,便可終止外掛程式之執行。可於使用者介面中將所獲得之影像顯示作為在電腦系統執行外掛程式的情況下將被呈現於使用者介面中的內容之快照。當檢視快照時,使用者可將請求在使用者介面中呈現視訊內容的輸入提供至電腦系統。回應於接收到該輸入,電腦系統可重新執行個體化外掛程式之執行以獲得內容之剩餘部分,且在使用者介面中呈現內容。以此方式,可節約由電腦系統藉由執行外掛程式來呈現內容所消耗的電力(例如,電池電力)。另外,由於產生不完整外觀之替代符號(亦即,灰階影像)被代表內容之快照所代替,所以可改良使用者體驗。
圖1A及圖1B說明用以在使用者介面中呈現快照之一實例電腦系統102。一般而言,電腦系統102可為任何電腦(例如,桌上型電腦、膝上型電腦、平板電腦、智慧電話、個人數位助理(PDA)及其類似者)。電腦系統102可為可使用電池電力來操作的。電腦系統102可將一或多個電腦軟體應用程式實施為電腦指令,該等電腦指令儲存於電腦可讀媒體150上且由資料處理裝置152執行。該一或多個應用程式可包括電腦軟體應用程式(例如,網際網路瀏覽器應用程式),該電腦軟體應用程式在由電腦系統102執行時可提供一或多個使用者介面(例如,網際網路瀏覽器)以呈現內容。該一或多個應用程式亦可包括電腦軟體應用程式(例如,外掛程式),該電腦軟體應用程式在由電腦系統102執行時可起始一視訊內容播放器以播放視訊內容。
電腦系統102可連接至顯示器件104(例如,CRT或LCD監視器、觸控螢幕及其類似者),在該顯示器件104中,電腦系統102可藉由執行此處所描述之電腦軟體應用程式中之一或多者來顯示使用者介面106。電腦系統102可連接至一或多個輸入器件,例如,鍵盤108(諸如,實體或虛擬鍵盤)、位置指示器110(諸如,滑鼠、觸控螢幕、觸 控板)及其類似者。電腦系統102可使用一或多個輸入器件而自使用者接收用以執行操作之輸入。回應於接收到該輸入,電腦系統102可執行電腦軟體應用程式以於顯示器件104中呈現輸出(例如,於使用者介面106中顯示輸出)。
電腦系統102可經由一或多個網路112(例如,網際網路)而連接至一或多個伺服器電腦系統(例如,伺服器電腦系統114a、伺服器電腦系統114b、伺服器電腦系統114c)。每一伺服器電腦系統可儲存內容,電腦系統102可經由一或多個網路112來接收該內容以用於呈現於顯示器件104上。舉例而言,回應於用以執行電腦系統102之輸入,電腦系統102可於顯示器件104中顯示網際網路瀏覽器。經由網際網路瀏覽器,電腦系統102可接收統一資源定位符(URL),該URL參照由該等伺服器電腦系統中之一者(例如,伺服器電腦系統114a)所代管的網站之網頁。電腦系統102可經由網際網路將URL傳輸至代管網頁之伺服器電腦系統114a。作為回應,伺服器電腦系統114a可經由網際網路將網頁中所包括之內容傳輸至電腦系統102。電腦系統102可於網際網路瀏覽器中顯示網頁及網頁中所包括之內容。
在一些實施中,電腦系統102可接收用以呈現使用者介面106(例如,網際網路瀏覽器)之輸入,該使用者介面106包括藉由執行電腦軟體應用程式(例如,外掛程式)所獲得之內容(例如,數位視訊內容)。回應於接收到該輸入,電腦系統102可執行電腦軟體應用程式以獲得內容。電腦系統102可自該內容來識別代表該內容之影像。電腦系統102當識別出代表內容之影像時可終止電腦軟體應用程式之執行。電腦系統102可於使用者介面106中顯示代表內容之影像120。
電腦系統102可另外於使用者介面106中顯示物件122,該物件122可經選擇以呈現藉由執行電腦軟體應用程式所獲得之內容。電腦系統102可接收對物件122之選擇(例如,藉由定位受輸入器件控制之 位置指示器124)。回應於接收到對物件122之選擇,電腦系統102可重新執行個體化對電腦軟體應用程式之執行(亦即,重新載入電腦軟體應用程式)以獲得內容,且於使用者介面106中顯示所獲得之內容130(圖1B)以代替影像120。下文參看圖2A及圖2B來描述由電腦系統102執行的操作之實例。
圖2A及圖2B說明藉由使用圖1A及圖1B之電腦系統來執行電腦軟體應用程式所提供的實例使用者介面。電腦系統102可執行電腦軟體應用程式(例如,網際網路瀏覽器應用程式)以經由一或多個網路112來請求內容及自伺服器電腦系統114a接收內容。為了獲得用於顯示於顯示器件104中之內容的全部或一部分,電腦系統102可執行另一電腦軟體應用程式(例如,外掛程式)。圖2A說明使用者介面200(例如,網際網路瀏覽器)之實例,在該使用者介面200中,電腦系統102不執行電腦軟體應用程式(亦即,外掛程式)來獲得內容之該部分。舉例而言,使用者先前可已停用所有外掛程式之執行。由於電腦系統102不能夠執行外掛程式以獲得內容,所以電腦系統可在使用者介面200之應已顯示有內容的一部分中顯示物件202。
圖2B說明使用者介面210(例如,網際網路瀏覽器)之實例,在該使用者介面210中,電腦系統102執行外掛程式以獲得內容及識別代表內容之影像。電腦系統102可接著終止外掛程式之執行且在使用者介面210中顯示影像212。另外,電腦系統102可顯示可選擇之物件214以向使用者傳達:影像214代表內容(亦即,為內容之快照)及為了顯示該內容,使用者可選擇使用者介面210之一部分(例如,影像212或物件214)。
電腦系統102可自動地抑或回應於輸入來顯示可選擇之物件214。在一些實施中,電腦系統102可判定使用者介面210之將呈現有內容之一部分的大小。電腦系統102可基於該部分的相對於使用者介 面210大小之大小而自動地抑或回應於使用者輸入而在使用者介面210中顯示物件214。舉例而言,若電腦系統102判定該部分的相對於使用者介面大小之大小係小於臨限大小,則電腦系統102可在偵測到使用者與使用者介面210之互動(例如,對使用者介面210之任何部分的選擇)時顯示物件214。對使用者介面210之該部分之選擇的實例可包括自該部分外部至該部分內之滑鼠移入事件、在該部分內之滑鼠移動事件或自該部分內至該部分外部之滑鼠移出事件。在另一實例中,電腦系統102可判定該部分的相對於使用者介面大小之大小係大於臨限大小。作為回應,電腦系統102可在無使用者與使用者介面210之互動的情況下於使用者介面210中自動地顯示物件214。
圖3說明圖1A及圖1B之電腦系統102的實例組件。可將電腦系統102之每一組件實施為電腦指令,該等電腦指令儲存於電腦可讀媒體(例如,電腦可讀媒體150)上且可由資料處理裝置(例如,資料處理裝置152)執行。下文參看圖4至圖7中所示之流程圖來描述由電腦系統102之組件執行的例示性操作。
圖4A為藉由圖3中所示之實例組件實施的實例處理程序400a之流程圖。可將處理程序400a實施為電腦指令,該等電腦指令儲存於電腦可讀媒體150上且由資料處理裝置152執行。在402處,可接收用以呈現使用者介面之輸入,該使用者介面包括藉由執行電腦軟體應用程式所獲得之內容。舉例而言,電腦系統102可使用輸入器件中之一者而自使用者接收輸入。作為回應,應用程式執行單元302可執行網際網路瀏覽器應用程式以顯示使用者介面106(亦即,網際網路瀏覽器)及接收待顯示於使用者介面106中之內容。該內容可包括可藉由執行外掛程式而呈現之視訊內容。電腦系統102可判定外掛程式是否已被停用。若外掛程式已被停用,則電腦系統102不能使應用程式執行單元302執行外掛程式。
在404處,回應於接收到該輸入,可執行電腦軟體應用程式以獲得內容。舉例而言,應用程式執行單元302可執行電腦軟體應用程式(亦即,外掛程式)以獲得內容之一部分。在一些實施中,應用程式執行單元302可於背景中執行外掛程式以獲得內容之一部分。
在406處,可自內容之該部分來識別代表內容之影像。舉例而言,待藉由執行外掛程式而獲得之內容可為包括影像序列之數位視訊內容。如下文所描述,代表待呈現於使用者介面之該部分中之內容的影像可被包括於該序列中。快照識別單元306及快照評估單元308可自影像序列識別代表性影像,如下文參看圖5所描述。
在408處,當識別出代表內容之影像時可終止對電腦軟體應用程式之執行。舉例而言,應用程式執行單元302可自快照評估單元308接收通知,該通知表示已獲得包括於視訊內容之該部分中之影像及該所獲得之影像代表視訊內容。回應於接收到該通知,應用程式執行單元302可終止(亦即,停止或結束)外掛程式之執行。
在410處,可於使用者介面中顯示代表內容之影像。舉例而言,內容呈現單元310可於使用者介面106中顯示由快照識別單元306識別及由快照評估單元308評估之影像(例如,影像120)。
在412處,可顯示可經選擇以呈現藉由執行電腦軟體應用程式而產生之內容的物件。舉例而言,內容呈現單元310可於使用者介面106中顯示可選擇之物件(例如,可選擇之物件122)。如上文所描述,電腦系統102可使內容呈現單元310基於使用者介面之將呈現有視訊內容之該部分的相對於使用者介面大小之大小而自動地(亦即,在無使用者與使用者介面106之互動的情況下)或回應於使用者輸入來顯示物件。因此,在一些實施中,電腦系統102可偵測在影像邊緣內之滑鼠移動或在使用者介面上之滑鼠移入,且作為回應,使內容呈現單元310顯示物件。
在414處,可接收對物件之選擇。舉例而言,電腦系統102可偵測鄰近於物件122(亦即,接近物件122或位於物件122上)之游標124的定位及對物件122之選擇(例如,觸控選擇、滑鼠點選、音訊選擇及其類似者)。或者,可接收對影像之選擇。對物件或影像之選擇可代表來自使用者之用以重新執行個體化外掛程式之執行的輸入。
在416處,可重新執行個體化對電腦軟體應用程式之執行以獲得內容。在418處,可於使用者介面中顯示所獲得之內容以代替影像。舉例而言,內容呈現單元310可於使用者介面106中顯示在應用程式執行單元302執行外掛程式時所獲得的視訊內容130以代替影像120及可選擇之物件122。
圖4B為藉由圖3中所示之實例組件實施的實例處理程序400b之流程圖。可將處理程序400b實施為電腦指令,該等電腦指令儲存於電腦可讀媒體150上且由資料處理裝置152執行。在452處,可偵測一選擇。如上文所描述,可選擇物件抑或影像。更具體言之,可選擇影像上之某一位置。任一選擇皆可代表用以重新執行個體化外掛程式之執行的輸入。因此,在454處,可回應於偵測到選擇來重新執行個體化外掛程式以獲得內容。在456處,可判定是否選擇了物件或是否選擇了影像上之位置。若選擇了物件(決策分支「物件」),則無需執行額外動作。外掛程式可獲得內容,該內容可經呈現以代替影像。
若選擇影像上之位置(決策分支「影像」),則在458處,可判定所接收的選擇所在的位置(例如,當使用者用滑鼠點選時游標之位置)。在460處,可在一時間週期已到期之後實施該選擇至該位置之傳遞(pass-through)。該時間週期可足以供外掛程式獲得內容之至少一部分及在使用者介面中顯示內容之該至少一部分以代替影像。在實施傳遞方面不具有延遲的情況下,使用者體驗將為以下情況:使用者已選擇影像以檢視內容,但外掛程式尚未獲得內容。在實施傳遞方面具有 延遲的情況下,到傳遞使用者之點選時,外掛程式將已獲得內容且內容呈現單元310將已開始呈現內容,從而產生使用者體驗之改良。在一些實施中,該時間週期可為極小的(例如,幾秒,諸如兩秒或更小)。
圖5為藉由圖3中所示之實例組件實施的實例處理程序500之流程圖。可將處理程序500實施為電腦指令,該等電腦指令儲存於電腦可讀媒體150上且由資料處理裝置152執行。如上文所描述,快照識別單元306可識別在應用程式執行單元302執行外掛程式時所獲得的內容之一部分。快照評估單元308可評估所識別之部分作為藉由執行外掛程式將獲得之內容的代表而受到呈現的適合度。
在502處,可執行電腦軟體應用程式(例如,外掛程式)以產生視訊內容中所包括之影像序列之一影像。舉例而言,應用程式執行單元302可執行外掛程式歷時一持續時間(例如,小於或大於1秒)且獲得該序列之一影像。應用程式執行單元302執行外掛程式所歷時之持續時間可取決於外掛程式之初始化的持續時間。一些外掛程式可緩衝視訊內容,在此期間,外掛程式在使用者介面上表現為自旋圖示。對於此等外掛程式而言,應用程式執行單元302執行外掛程式以產生影像所歷時的持續時間可包括初始化之持續時間。如上文所描述,一旦快照識別單元306已獲得該序列之一影像,應用程式執行單元302便可在快照評估單元308評估影像代表內容之適合度時繼續執行外掛程式。
為此,快照評估單元308可評估影像是否具有足夠的有用之內容。藉由評估影像,快照評估單元308可識別該序列之滿足臨限值的一影像,且將滿足臨限值之所識別之影像提供作為代表內容之影像。下文描述用於評估影像之適合度的實例演算法。可使用任何演算法(例如,實施起來快速且簡單的演算法)來評估影像之適合度。
在504處,快照評估單元308可識別所獲得之影像中所包括的像 素。舉例而言,快照評估單元308可將影像轉換成灰階影像並將取樣柵格上覆於灰階影像中所包括之像素。取樣柵格可為散佈在整個影像上之點柵格(例如,7×7柵格)。該柵格可為不顯著地增加評估影像之適合度之持續時間的任何大小。
在506處,快照評估單元308可比較每一像素與每一鄰近像素。舉例而言,快照評估單元308可判定每一像素之影像參數(諸如,亮度、不透明度及其類似者)且比較該等特徵與每一鄰近像素之類似特徵。在508處,快照評估單元308可判定與每一像素及每一鄰近像素相關聯之影像參數的差值。在510處,快照評估單元308可彙總與影像中所包括之像素相關聯的差值。舉例而言,快照評估單元308可彙總一像素與其相鄰像素在明度方面之差值。在512處,快照評估單元308可判定該等差值是否滿足臨限值。
若快照評估單元308判定該等差值滿足臨限值(決策分支「是」),則在516處,快照評估單元308可提供待顯示於使用者介面中之所獲得之影像。然而,有時候,快照評估單元308可判定總差值不滿足臨限值(決策分支「否」)且影像不適合於代表視訊內容。舉例而言,對於空白或大部分空白之影像而言差值之總和將極低。舉例而言,若影像為被均一白色或灰色包圍之自旋圖示中之一者,則明度之總差值將為零或接近零,且因此小於臨限值。此影像不適合代表視訊內容。在彼情形中,在514處,電腦系統102可獲得該序列中之下一影像。
如上文所描述,應用程式執行單元302在快照識別單元306及快照評估單元308獲得及評估序列中之一影像時繼續執行外掛程式。快照識別單元306可自藉由執行外掛程式所獲得之內容獲得下一影像。舉例而言,快照識別單元306可實施計時器歷時一持續時間(諸如,1秒),在計時器已運行歷時該持續時間之後獲得影像,且接著重設計 時器。若快照評估單元308藉由實施上文所描述之步驟而判定所獲得之影像不合適,則快照識別單元306可再次運行計時器歷時該持續時間,在計時器已運行歷時該持續時間之後獲得下一影像,且接著重設計時器。快照評估單元308可藉由重複處理程序步驟504、506、508及510來評估下一影像。此處理程序可繼續直至快照評估單元308識別有用之影像為止。在一些實施中,此處理程序可繼續直至某一持續時間(例如,10秒)已到期。若快照評估單元308在某一持續時間已到期之前尚未識別有用之影像,則內容呈現單元310可於使用者介面中呈現快照評估單元308所評估之最近影像。在此階段,應用程式評估單元302可終止外掛程式之執行。
當快照評估單元308判定所獲得之影像為視訊內容之合適快照時,則內容呈現單元310可(例如)於使用者介面106中將影像122顯示為視訊內容之替代符號或海報。內容呈現單元310可對影像122進行一或多個視覺處理,該一或多個視覺處理指示影像代表待藉由執行外掛程式所獲得之視訊內容。一個此視覺處理為可選擇之物件124。在一些實施中,內容呈現單元310可顯示影像122就如同外掛程式正在具有最小或無額外視覺處理的情況下執行一般。在具有有用之內容的情況下,可鼓勵使用者與影像122自然地互動,就如同影像係栩栩如生的一般。互動係對使用者想要外掛程式執行於之電腦系統102的輸入。作為回應,應用程式執行單元302可重新執行個體化外掛程式。
圖6為藉由圖3中所示之實例組件實施的實例處理程序之流程圖。如下文參看圖6所描述,應用程式執行單元302可使用在終止外掛程式時外掛程式之執行參數來啟動外掛程式。舉例而言,在602處,應用程式執行單元302可在執行(亦即,載入)電腦軟體應用程式時判定電腦軟體應用程式之執行參數。外掛程式之執行參數可包括(例如)外掛程式所參照之URL、電腦指令(例如,HTML或JavaScript)可已提 供作為至外掛程式之輸入的其他參數,及其類似者。在604處,應用程式執行單元302可儲存該等執行參數。在606處,應用程式執行單元302可終止對電腦軟體應用程式之執行,且在608處(例如)回應於接收到對物件214之選擇來接收用以重新執行個體化外掛程式之執行的輸入。在610處,應用程式執行單元302可使用所儲存之執行參數來執行外掛程式。
總而言之,在識別代表視訊內容之影像之後重新執行個體化外掛程式之執行所使用的執行參數可與載入外掛程式以獲得影像時所使用的執行參數相同。如上文所描述,當使用者提供請求視訊內容之輸入時(例如,點選使用者介面),繼續外掛程式之執行。由於使用者在影像於用以執行外掛程式的一短延遲之後出現時正與由外掛程式獲得之影像互動,所以電腦系統102在發送使用者之啟動點選之前等待相同之持續時間。為此,在一些實施中,電腦系統102可在點選傳遞及將點選注入至在快照被識別時外掛程式所在之處的時序中建置一延遲。以此方式,回應於使用者輸入在重新執行個體化外掛程式之執行時顯示於使用者介面中的視訊內容始於緊接在終止外掛程式之執行之前所獲得的影像。由於外掛程式在其執行之第一執行個體之後將業已本端地儲存於快取記憶體中,所以當使用者選擇使用者介面時,外掛程式可比當在第一執行個體時加以執行時更快地初始化。
使用者對使用者介面106之選擇(例如,可選擇之物件122)表示了使用者對執行外掛程式以獲得及呈現視訊內容的意圖。在一些實施中,電腦系統102可追蹤使用者已在第一使用者介面(例如,第一網頁)上啟動之外掛程式,且自動地(亦即,無使用者干預)執行相同或類似之外掛程式(例如,在其他網頁中執行之外掛程式或在對網頁之當前或隨後瀏覽期間在同一網頁中執行之外掛程式)。為此,電腦系統102可維持外掛程式之白名單。在無使用者干預的情況下自動地執行 白名單上之外掛程式可改良使用者體驗,此係因為不要求使用者在每次使用者想要檢視內容時皆啟動外掛程式。舉例而言,電腦系統102可維持外掛程式之白名單(例如,將外掛程式之清單儲存於電腦可讀儲存器312上)。應用程式比較單元304可判定外掛程式是否類似於先前所執行之外掛程式。
電腦系統102可基於包括以下各者之一或多個因素來判定外掛程式是否類似於先前所執行之外掛程式:呈現於使用者介面(亦即,網頁)中之內容的資料物件模型(DOM)結構;呈現於使用者介面中之DOM結構內容的識別符;以下四者之組合:參照網頁之URL、參照正藉由執行電腦軟體應用程式獲得之內容的URL、電腦軟體應用程式之識別符(例如,MIME類型)及參照電腦軟體應用程式之另一URL;或其組合。額外因素可包括:串接樣式表(CSS)規則、自視覺觀點之置放、在DOM結構中之置放、外掛程式之唯一名稱,及其類似者。舉例而言,URL www.webpage.com可參照顯示於網際網路瀏覽器中之網頁,且另一URL www.plugin.com可參照待執行以呈現網頁中所包括之視訊內容的外掛程式。當使用者將指示使用者想要檢視視訊內容之輸入提供至電腦系統102時,電腦系統102可執行外掛程式。電腦系統102可將網頁之URL中的網域名稱(亦即,webpage.com)及外掛程式之URL中的網域名稱(亦即,plugin.com)儲存於電腦可讀儲存器312中。
隨後,使用者可存取相同網頁或相同網域之其他網頁。由於應用程式比較單元304判定參照網頁之URL的網域名稱及參照外掛程式之URL的網域名稱匹配儲存於電腦可讀儲存器312中的彼等網域名稱,所以電腦系統102在無使用者干預的情況下自動地執行外掛程式。或者,相同網頁可包括不同視訊內容,可藉由執行相同外掛程式來獲得該不同視訊內容。該不同視訊內容可為廣告。應用程式比較單元304可判定;雖然參照外掛程式之網域名稱匹配儲存於白名單中之 網域名稱,但參照視訊內容之網域名稱卻不匹配儲存於白名單中之網域名稱。作為回應,電腦系統102可終止外掛程式之執行(例如)直至電腦系統102自使用者接收到輸入為止。在另一實例中,在存取該網頁之後,使用者可存取一執行相同外掛程式或不同外掛程式之不同網頁。應用程式比較單元304可比較該對網頁網域名稱及外掛程式網域名稱與儲存於白名單中之一對網域名稱,以判定不同網頁中之外掛程式是否類似於先前所執行之外掛程式。
在一些實施中,電腦系統102可實施用於白名單中所列出之外掛程式的到期策略。舉例而言,為了在網際網路瀏覽器中顯示廣告,使用者可已提供用以執行外掛程式之輸入。回應於該輸入,電腦系統102可將白名單中之外掛程式儲存於電腦可讀儲存器312上。但是,使用者可能不想要再次顯示此視訊。若白名單永久地持續,則使用者可能需要在每次網際網路瀏覽器顯示藉由執行外掛程式所獲得之內容時停用外掛程式。在此等情形中,電腦系統102可實施到期策略以自白名單清除外掛程式,使得使用者需要提供用於使外掛程式保留於白名單上抑或被添加至白名單的輸入。
圖7為藉由圖3中所示之實例組件實施的實例處理程序700之流程圖。可將處理程序700實施為電腦指令,該等電腦指令儲存於電腦可讀媒體150上且由資料處理裝置152執行。在702處,應用程式執行單元302可接收用以執行電腦軟體應用程式(亦即,外掛程式)以獲得內容的輸入。在704處,電腦系統102可判定接收到輸入的第一時刻。在706處,在第一時刻之後的第二時刻,應用程式執行單元302可接收用以呈現一不同使用者介面之輸入,該不同使用者介面包括藉由執行電腦軟體應用程式(亦即,外掛程式)所獲得之不同內容。在708處,電腦系統102可判定第一時刻與第二時刻之間的時間週期。
在710處,電腦系統102可判定該時間週期是否滿足臨限值。該 時間週期可為(例如)一或多週、一或多月或任何其他合適之週期。若電腦系統102判定自儲存外掛程式之識別碼的時間(亦即,第一時刻)至第二時刻的已消逝之時間週期係小於臨限值(決策分支「是」),則應用程式執行單元302可自動地且在無使用者干預的情況下執行外掛程式以獲得內容。若電腦系統102判定自儲存外掛程式之識別碼的時間至第二時刻的已消逝之時間週期係大於臨限值(決策分支「否」),則電腦系統102可實施類似於上文所描述之彼等處理程序的處理程序。
亦即,在714處,應用程式執行單元302可執行外掛程式以獲得內容之一部分。在716處,快照識別單元306及快照評估單元308可自該部分識別代表內容之影像。在718處,內容呈現單元310可於使用者介面中顯示影像,且在720處,應用程式執行單元302可終止外掛程式之執行。為了判定自第一時刻至第二時刻的已消逝之時間週期是否大於臨限值,電腦系統102可使時脈與外掛程式相關聯,且使用該時脈來判定該時間週期。
在一些實施中,電腦系統102可基於使用者與白名單中之外掛程式的互動來延長外掛程式之到期時間。舉例而言,若電腦系統102偵測到使用者與外掛程式之互動(亦即,使用者已選擇執行相同或不同網頁中之該外掛程式),則電腦系統102可自互動之時間延長到期時間。或者,若電腦系統102未偵測到與外掛程式之任何互動,則電腦系統102可自白名單移除外掛程式且返回至拍快照(snapshotting),如上文所描述。在一些實施中,電腦系統102可於使用者介面中顯示白名單,使用者可自該白名單移除外掛程式或使用者可將外掛程式添加至該白名單。
圖8為用於實施上文所描述之特徵及操作的例示性架構之方塊圖。其他架構係可能的,包括具有更多或更少組件之架構。在一些實 施中,架構800包括一或多個處理器802(例如,雙核心Intel® Xeon®處理器)、一或多個輸出器件804(例如,LCD)、一或多個網路介面806、一或多個輸入器件808(例如,滑鼠、鍵盤、觸敏顯示器、用以接收音訊輸入之麥克風)及一或多個電腦可讀媒體912(例如,RAM、ROM、SDRAM、硬碟、光碟、快閃記憶體等)。此等組件可經由一或多個通信頻道810(例如,匯流排)來交換通信及資料,該一或多個通信頻道810可利用各種硬體及軟體以用於促進在組件之間資料及控制信號的傳送。
術語「電腦可讀媒體」係指參與向處理器802提供指令以供執行之媒體,包括(但不限於)非揮發性媒體(例如,光碟或磁碟)、揮發性媒體(例如,記憶體)及傳輸媒體。傳輸媒體包括(但不限於)同軸電纜、銅線及光纖。
電腦可讀媒體812可進一步包括作業系統814(例如,Linux®作業系統)及網路通信模組816。作業系統814可為多使用者、多處理、多任務、多執行緒、即時作業系統等中之一或多者,或其組合。作業系統814執行基本任務,包括(但不限於):辨識來自器件804、808之輸入及將輸出提供至器件804、808;保持頻道及管理電腦可讀媒體812(例如,記憶體或儲存器件)上的檔案及目錄;控制周邊器件;及管理一或多個通信頻道810上之訊務。網路通信模組816包括用於建立及維持網路連接之各種組件(例如,用於實施諸如TCP/IP、HTTP等之通信協定的軟體)。
架構800可實施於並行處理或同級間基礎架構中或具有一或多個處理器之單一器件上。軟體可包括多個軟體組件或可為單一程式碼主體。
所描述之特徵可有利地實施於可在可程式化系統上執行的一或多個電腦程式中,該可程式化系統包括:至少一個可程式化處理器, 其經耦接以自資料儲存系統接收資料及指令且將資料及指令傳輸至該資料儲存系統;至少一個輸入器件;及至少一個輸出器件。電腦程式為可直接或間接地在電腦中使用以執行特定活動或造成特定結果的指令集。電腦程式可以任何形式之程式設計語言(例如,Objective-C、Java)(包括編譯或解譯語言)進行撰寫,且電腦程式可經部署成任何形式,包括作為獨立程式,或作為模組、組件、次常式、以瀏覽器為基礎之網路應用程式,或適於在計算環境中使用之其他單元。
用於執行指令程式之合適處理器包括(作為實例)通用微處理器與專用微處理器兩者,以及任何種類之電腦之單獨處理器或多個處理器或核心中之一者。大體而言,處理器將自唯讀記憶體或隨機存取記憶體或兩者接收指令及資料。電腦之基本元件為用於執行指令之處理器,以及用於儲存指令及資料之一或多個記憶體。大體而言,電腦亦將包括用於儲存資料檔案之一或多個大容量儲存器件或操作性地經耦接以與該一或多個大容量儲存器件通信;此等器件包括:磁碟,諸如,內部硬碟及抽取式磁碟;磁光碟;及光碟。適合於有形地體現電腦程式指令及資料的儲存器件包括所有形式之非揮發性記憶體,包括(作為實例):半導體記憶體器件,諸如,EPROM、EEPROM及快閃記憶體器件;磁碟,諸如,內部硬碟及抽取式磁碟;磁光碟;以及CD-ROM及DVD-ROM碟片。處理器及記憶體可藉由ASIC(特殊應用積體電路)補充或併入於ASIC(特殊應用積體電路)中。
可將該等特徵實施於一電腦系統中,該電腦系統包括諸如資料伺服器之後端組件,或該電腦系統包括諸如應用程式伺服器或網際網路伺服器之中間軟體組件,或該電腦系統包括諸如具有圖形使用者介面或網際網路瀏覽器之用戶端電腦的前端組件,或上述各者之任何組合。系統之該等組件可藉由任何形式之數位資料通信或數位資料通信媒體(諸如,通信網路)連接。通信網路之實例包括(例如)LAN、 WAN,以及形成網際網路之電腦及網路。
計算系統可包括用戶端及伺服器。用戶端與伺服器大體上遠離彼此且通常經由通信網路而互動。用戶端與伺服器之關係由於在各別電腦上執行且彼此具有主從式關係之多個電腦程式而產生。在一些實施例中,伺服器將資料(例如,HTML網頁)傳輸至用戶端器件(例如,為了將資料向與用戶端器件互動之使用者顯示及自該使用者接收使用者輸入的目的)。可在伺服器處自用戶端器件接收在用戶端器件處產生之資料(例如,使用者互動之結果)。
一或多個電腦之系統可經組態以由於具有安裝於系統上之軟體、韌體、硬體或其組合來執行特定動作,該軟體、韌體、硬體或其組合在操作中使系統執行該等動作。一或多個電腦程式可經組態以由於包括指令來執行特定動作,該等指令在由資料處理裝置執行時使該裝置執行該等動作。
雖然本說明書含有許多特定實施細節,但此等特定實施細節不應解釋為對本發明之範疇或可主張之內容的限制,而是特定發明之特定實施例所特有的特徵之描述。在單獨實施例之上下文中描述於本說明書中之某些特徵亦可在單一實施例中組合地實施。相反,在單一實施例之上下文中所描述的各種特徵亦可分離地在多個實施例中或以任何合適之子組合而實施。此外,儘管上文可將特徵描述為以某些組合起作用且甚至最初按此來主張,但來自所主張之組合之一或多個特徵在一些狀況下可被從該組合刪去,且所主張之組合可針對子組合或子組合之變化。
類似地,儘管按特定次序在圖式中描繪了操作,但不應將此情形理解為需要按展示之特定次序或按順序次序執行此等操作或應執行所有說明之操作來達成所要結果。在某些情況下,多任務及並行處理可為有利的。此外,不應將在上文所描述之實施例中的各種系統組件 之分離理解為在所有實施例中皆需要此分離,且應理解,所描述之程式組件及系統大體上可在單一軟體產品中整合在一起或經封裝至多個軟體產品中。
因此,已描述標的物之特定實施例。其他實施例係在以下申請專利範圍之範疇內。在一些狀況下,申請專利範圍中所敍述之動作可以不同次序執行且仍達成所要結果。另外,在隨附諸圖中所描繪之處理程序未必需要所展示之特定次序或順序次序來達成所要結果。在某些實施中,多任務及並列處理可為有利的。
已描述本發明之諸多實施。然而,應理解,可在不脫離本發明之精神及範疇的情況下進行各種修改。舉例而言,在上文所描述之實例實施中,當識別出代表內容之影像時終止外掛程式且隨後回應於接收到用以執行外掛程式之輸入來重新執行個體化該外掛程式。在替代性實施中,外掛程式可被暫停(亦即,臨時停止)而非終止,且自暫停狀態繼續而非被重新執行個體化。在另一實例中,若外掛程式具有與視訊相關聯之音訊,則為了識別代表視訊之影像,電腦系統102可在排除音訊之處理程序中於背景中執行外掛程式。當使用者於使用者介面中選擇影像時,則電腦系統102可重新執行個體化外掛程式,但係在包括音訊之處理程序中進行此操作。
在另一實例中,為了呈現自伺服器電腦系統114c接收之內容,電腦系統102可能需要執行多個外掛程式。電腦系統102可執行如上文所描述之每一外掛程式。為此,電腦系統102可使時脈與每一外掛程式相關聯,且使用相關聯之時脈來監視與每一外掛程式之初始化、終止及重新執行個體化相關聯的持續時間。
在進一步之實例中,電腦系統102可判定外掛程式為0×0或1×1像素外掛程式(例如,用以協調多個外掛程式之間的活動或用以播放音訊的外掛程式,或含有於DOM中之具有類似大小之上階內的外掛程 式)。此等外掛程式可能太小以致於使用者在使用者介面中無法看到。電腦系統102可執行此等外掛程式,因為此等外掛程式並非總是消耗大量電力。
在一些情形中,當外掛程式不可見時,無需實施上文所描述之技術以獲得快照。在一些情形中,設計一網頁使得使用者與網頁上之並非外掛程式的元件、網頁中之程式碼的互動的結果建立外掛程式。在此等情形中,將使用者與元件之互動理解為意謂使用者想要與內容互動或觀看內容。因此,可不實施上文所描述之技術以獲得快照。
200‧‧‧使用者介面
202‧‧‧物件

Claims (29)

  1. 一種電腦實施方法,其包含:接收用以呈現一使用者介面之輸入,該使用者介面包括藉由執行一電腦軟體應用程式所獲得之內容;回應於接收到該輸入:執行該電腦軟體應用程式以獲得該內容,自該內容識別代表該內容之一影像,及當識別出代表該內容之該影像時終止對該電腦軟體應用程式之一執行;於該使用者介面中顯示代表該內容之該影像;於該使用者介面中之一位置接收對該影像之一選擇;及回應於接收到對該影像之該選擇:重新執行個體化對該電腦軟體應用程式之該執行以獲得該內容,其中至該電腦軟體應用程式的該影像之該位置之該選擇之一傳遞(pass-through)延遲達一時間週期,該時間週期足以供該電腦軟體應用程式獲得該內容之至少一部分,及於該使用者介面中顯示該所獲得之內容以代替該影像,其中該延遲導致該顯示係自該影像開始。
  2. 如請求項1之方法,其中執行該電腦軟體應用程式以獲得該內容包含:在執行該電腦軟體應用程式時判定該電腦軟體應用程式之執行參數;及儲存該等執行參數,且其中重新執行個體化對該電腦軟體應用程式之該執行以獲得該內容包含使用該等執行參數來執行該電腦軟體應用程式。
  3. 如請求項1之方法,其進一步包含:回應於接收到對該物件之該選擇,儲存該電腦軟體應用程式之一識別碼;接收用以呈現一不同使用者介面之一隨後輸入,該不同使用者介面包括藉由執行該電腦軟體應用程式所獲得之不同內容;自動地且在無使用者干預的情況下,執行該電腦軟體應用程式以獲得該不同內容;及於該不同使用者介面中顯示該不同內容。
  4. 如請求項3之方法,其進一步包含:在一時刻,判定自儲存該電腦軟體應用程式之該識別碼的一時間至該時刻的已消逝之一時間週期係大於一臨限週期;及回應於判定該時間週期係大於該臨限週期,刪除該電腦軟體應用程式之該識別碼。
  5. 如請求項4之方法,其中在該時刻判定該時間週期係大於該臨限週期包含:使一時脈與該電腦軟體應用程式相關聯;及使用該時脈來判定該時間週期。
  6. 如請求項1之方法,其進一步包含:接收用以呈現一不同使用者介面之一隨後輸入,該不同使用者介面包括藉由類似於該電腦軟體應用程式之另一電腦軟體應用程式所獲得的不同內容;自動地且在無使用者干預的情況下,執行該另一電腦軟體應用程式以獲得該不同內容;及於該不同使用者介面中顯示該不同內容。
  7. 如請求項6之方法,其進一步包含基於以下各者中之至少一者來判定該另一電腦軟體應用程式係類似於該電腦軟體應用程式: 呈現於該使用者介面中之內容的一資料物件模型(DOM)結構;呈現於該使用者介面中之該內容之該DOM結構的一識別符;或以下三者之一組合:參照呈現於該使用者介面中之該內容的第一統一資源定位符(URL)、該電腦軟體應用程式之一多用途網際網路郵件擴充(MIME)類型及參照該電腦軟體應用程式之一第二URL。
  8. 如請求項1之方法,其中該內容為包括一影像序列之視覺內容,其中代表待呈現於該部分中之該內容的該影像被包括於該序列中。
  9. 如請求項8之方法,其中於該使用者介面中顯示該所獲得之內容包含:從該影像開始顯示該視覺內容。
  10. 如請求項8之方法,其中執行該電腦軟體應用程式以獲得該內容包含:執行該電腦軟體應用程式以獲得該序列之每一影像。
  11. 如請求項10之方法,其中識別代表該內容之該影像包含:識別該序列之滿足一臨限值的一影像;及將滿足該臨限值之該所識別之影像提供作為代表該內容之該影像。
  12. 如請求項11之方法,其進一步包含:判定該序列之該影像不滿足該臨限值;獲得該序列之一下一影像;及判定該序列之該下一影像是否滿足該臨限值。
  13. 如請求項11之方法,其中識別該序列之滿足該臨限值的該影像包含藉由以下步驟來判定該序列之該影像是否滿足該臨限值:識別該影像中所包括之像素;比較每一像素與每一鄰近像素,以判定與每一像素及每一鄰近像素相關聯之影像參數的一差值; 彙總與該影像中所包括之該等像素相關聯的差值;及判定該等差值是否滿足該臨限值。
  14. 如請求項13之方法,其中比較每一像素與每一鄰近像素以判定與每一像素及每一鄰近像素相關聯之影像參數的該差值包含:將一取樣柵格上覆於該影像中所包括之該等像素。
  15. 如請求項1之方法,其進一步包含:判定該使用者介面之將呈現有該內容之一部分的一大小;及基於該部分的相對於該使用者介面之一大小的該大小而自動地抑或回應於使用者輸入,而於該使用者介面中顯示可經選擇以呈現藉由執行該電腦軟體應用程式所獲得之該內容的該物件。
  16. 如請求項15之方法,其進一步包含:判定該部分的相對於該使用者介面之該大小的該大小係小於一臨限大小;及回應於判定該部分的相對於該使用者介面之該大小的該大小係小於該臨限大小,在偵測到對該使用者介面之該部分之一選擇時顯示該可選擇之物件。
  17. 如請求項16之方法,其中偵測對該使用者介面之該部分之該選擇包含:偵測在該使用者介面之該部分上的一滑鼠移入事件或一滑鼠移動事件或一滑鼠移出事件中的至少一者。
  18. 如請求項15之方法,其進一步包含:判定該部分的相對於該使用者介面之該大小的該大小係大於該臨限大小;回應於判定該部分的相對於該使用者介面之該大小的該大小係大於該臨限大小,在無使用者互動的情況下自動地於該使用者介面內顯示該可選擇之物件。
  19. 如請求項1之方法,其中該電腦軟體應用程式為在該使用者介面中執行之一外掛程式。
  20. 一種系統,其包含:一或多個處理器;及一儲存指令之電腦可讀媒體,該等指令可由該一或多個處理器執行以執行包含以下各者之操作:接收用以呈現一使用者介面之輸入,該使用者介面包括藉由執行一電腦軟體應用程式所獲得之內容;回應於接收到該輸入:執行該電腦軟體應用程式以獲得該內容,自該內容識別代表該內容之一影像,及當識別出代表該內容之該影像時終止對該電腦軟體應用程式之一執行;於該使用者介面中顯示代表該內容之該影像;於該使用者介面中顯示一物件,該物件可經選擇以呈現藉由執行該電腦軟體應用程式所獲得之該內容;於該使用者介面中之一位置接收對該影像之一選擇;及回應於接收到對該影像之該選擇:重新執行個體化對該電腦軟體應用程式之該執行以獲得該內容,其中至該電腦軟體應用程式的該影像之該位置之該選擇之一傳遞延遲達一時間週期,該時間週期足以供該電腦軟體應用程式獲得該內容之至少一部分,及於該使用者介面中顯示該所獲得之內容以代替該影像,其中該延遲導致該顯示係自該影像開始。
  21. 如請求項20之系統,其中識別代表該內容之該影像包含:識別該序列之滿足一臨限值的一影像;及 將滿足該臨限值之該所識別之影像提供作為代表該內容之該影像。
  22. 如請求項21之系統,該等操作進一步包含:判定該序列之該影像不滿足該臨限值;獲得該序列之一下一影像;及判定該序列之該下一影像是否滿足該臨限值。
  23. 如請求項21之系統,其中識別該序列之滿足該臨限值的該影像包含藉由以下各者來判定該序列之該影像是否滿足該臨限值:識別該影像中所包括之像素;比較每一像素與每一鄰近像素,以判定與每一像素及每一鄰近像素相關聯之影像參數的一差值;彙總與該影像中所包括之該等像素相關聯的差值;及判定該等差值是否滿足該臨限值。
  24. 如請求項23之系統,其中比較每一像素與每一鄰近像素以判定與每一像素及每一鄰近像素相關聯之影像參數的該差值包含:將一取樣柵格上覆於該影像中所包括之該等像素。
  25. 如請求項20之系統,該等操作進一步包含:判定該使用者介面之將呈現有該內容之一部分的一大小;及基於該部分的相對於該使用者介面之一大小的該大小而自動地抑或回應於使用者輸入,而於該使用者介面中顯示可經選擇以呈現藉由執行該電腦軟體應用程式所獲得之該內容的該物件。
  26. 如請求項25之系統,該等操作進一步包含:判定該部分的相對於該使用者介面之該大小的該大小係小於一臨限大小;及回應於判定該部分的相對於該使用者介面之該大小的該大小 係小於該臨限大小,當偵測到對該使用者介面之該部分的一選擇時顯示該可選擇之物件。
  27. 如請求項26之系統,其中偵測對該使用者介面之該部分的該選擇包含:偵測在該使用者介面之該部分上的一滑鼠移動事件。
  28. 如請求項25之系統,該等操作進一步包含:判定該部分的相對於該使用者介面之該大小的該大小係大於該臨限大小;回應於判定該部分的相對於該使用者介面之該大小的該大小係大於該臨限大小,在無使用者與該使用者介面之互動的情況下自動地顯示該可選擇之物件。
  29. 如請求項20之系統,其中該電腦軟體應用程式為在該使用者介面中執行之一外掛程式。
TW103109157A 2013-03-14 2014-03-13 於使用者介面中顯示內容之電腦實施方法及實施該電腦實施方法之系統 TWI540493B (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
US13/803,659 US20140282014A1 (en) 2013-03-14 2013-03-14 Presenting snapshots of plug-in content in user interfaces

Publications (2)

Publication Number Publication Date
TW201447723A TW201447723A (zh) 2014-12-16
TWI540493B true TWI540493B (zh) 2016-07-01

Family

ID=50478578

Family Applications (1)

Application Number Title Priority Date Filing Date
TW103109157A TWI540493B (zh) 2013-03-14 2014-03-13 於使用者介面中顯示內容之電腦實施方法及實施該電腦實施方法之系統

Country Status (3)

Country Link
US (1) US20140282014A1 (zh)
TW (1) TWI540493B (zh)
WO (1) WO2014159596A1 (zh)

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10212130B1 (en) * 2015-11-16 2019-02-19 Shape Security, Inc. Browser extension firewall
CN106059999B (zh) * 2016-05-06 2021-03-23 腾讯科技(北京)有限公司 一种媒体文件的展示方法、客户端、插件及系统
US10534587B1 (en) 2017-12-21 2020-01-14 Intuit Inc. Cross-platform, cross-application styling and theming infrastructure
US11157259B1 (en) 2017-12-22 2021-10-26 Intuit Inc. Semantic and standard user interface (UI) interoperability in dynamically generated cross-platform applications
US10956179B1 (en) * 2017-12-22 2021-03-23 Intuit, Inc. Third party integration of plugins and widgets
US11137985B2 (en) * 2020-01-31 2021-10-05 Salesforce.Com, Inc. User interface stencil automation
CN113076162B (zh) * 2021-04-14 2023-12-05 北京小云力量信息技术有限公司 一种互动场景插件半屏展示的处理方法、装置及存储介质

Family Cites Families (27)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1145157A4 (en) * 1998-10-28 2007-10-17 Yahoo Inc METHOD FOR CONTROLLING INTERFACE OF INTERNET BROWSER AND CONTROLLABLE BROWSER INTERFACE
US20080177994A1 (en) * 2003-01-12 2008-07-24 Yaron Mayer System and method for improving the efficiency, comfort, and/or reliability in Operating Systems, such as for example Windows
US7257771B2 (en) * 2004-05-26 2007-08-14 Texterity, Inc. System and method for converting a page description file to a composite representation thereof for fast Web viewing
CN100385852C (zh) * 2004-06-22 2008-04-30 腾讯科技(深圳)有限公司 一种网页插件选择下载的实现方法及其装置
US8538997B2 (en) * 2004-06-25 2013-09-17 Apple Inc. Methods and systems for managing data
US8327440B2 (en) * 2004-11-08 2012-12-04 Bt Web Solutions, Llc Method and apparatus for enhanced browsing with security scanning
US20070162842A1 (en) * 2006-01-09 2007-07-12 Apple Computer, Inc. Selective content imaging for web pages
US20070250781A1 (en) * 2006-04-20 2007-10-25 Dolph Blaine H Methods and arrangements for supplementing static contents
US9081589B2 (en) * 2006-12-01 2015-07-14 Adobe Systems Incorporated Persistent web plug-ins
US8390684B2 (en) * 2008-03-28 2013-03-05 On-Net Surveillance Systems, Inc. Method and system for video collection and analysis thereof
EP2164008A3 (en) * 2008-09-10 2010-12-01 Advanced Digital Broadcast S.A. System and method for transforming web page objects
US8448090B2 (en) * 2009-01-23 2013-05-21 Hewlett-Packard Development Company, L.P. Selective plug-in activation for resource-limited platforms
US9146757B1 (en) * 2009-03-16 2015-09-29 Xilinx, Inc. Dynamically loaded plug-ins to provide an integrated graphical user interface
GB2470570B (en) * 2009-05-27 2014-07-16 Snell Ltd Determining a regional shot change parameter
RU2012125616A (ru) * 2009-11-20 2013-12-27 Конинклейке Филипс Электроникс Н.В. Рендеринг веб-страницы, содержащей контент подключаемого модуля
US20110167345A1 (en) * 2010-01-06 2011-07-07 Jeremy Jones Method and apparatus for selective media download and playback
US8751925B1 (en) * 2010-04-05 2014-06-10 Facebook, Inc. Phased generation and delivery of structured documents
GB2482005A (en) * 2010-07-14 2012-01-18 Sony Europe Ltd Resizing graphical elements on the display of a computing device.
US8613007B2 (en) * 2010-09-29 2013-12-17 Business Objects Software Limited Server independent deployment of plug-ins
CA2718180A1 (en) * 2010-10-25 2011-01-04 Ibm Canada Limited - Ibm Canada Limitee Interactive element management in a web page
US8732571B2 (en) * 2011-03-31 2014-05-20 Google Inc. Methods and systems for generating and displaying a preview image of a content area
US8250228B1 (en) * 2011-09-27 2012-08-21 Google Inc. Pausing or terminating video portion while continuing to run audio portion of plug-in on browser
KR101907934B1 (ko) * 2012-02-16 2018-10-15 삼성전자주식회사 전자 장치에서 컨텐츠를 재생하기 위한 장치 및 방법
US10157184B2 (en) * 2012-03-30 2018-12-18 Commvault Systems, Inc. Data previewing before recalling large data files
US10249007B2 (en) * 2012-12-28 2019-04-02 Facebook, Inc. Social cover feed interface
US11372672B2 (en) * 2013-02-15 2022-06-28 Apple Inc. Centralized task scheduling
JP2014240900A (ja) * 2013-06-11 2014-12-25 株式会社リコー 情報処理装置、電力管理プログラム、電力管理方法及び電力管理システム

Also Published As

Publication number Publication date
TW201447723A (zh) 2014-12-16
US20140282014A1 (en) 2014-09-18
WO2014159596A1 (en) 2014-10-02

Similar Documents

Publication Publication Date Title
TWI540493B (zh) 於使用者介面中顯示內容之電腦實施方法及實施該電腦實施方法之系統
US9760541B2 (en) Systems and methods for delivery techniques of contextualized services on mobile devices
JP6214547B2 (ja) ウェブページのレンダリング時間の測定
US9361625B2 (en) Game navigation interface for electronic content
JP2019520618A (ja) 3d環境におけるコンテンツのレンダリング
US8386414B2 (en) Browsing within a virtual environment to determine web content of interest based on interactions with virtual objects
US20150007014A1 (en) Detect and Automatically Hide Spoiler Information in a Collaborative Environment
US10528980B2 (en) Targeted marketing using dynamically varied recommendations
US9665965B2 (en) Video-associated objects
US9355413B2 (en) Timer-based ad placement in content retrieval applications
JP2016528608A5 (zh)
KR20160100393A (ko) 통신 세션 상태를 저장 및 제시하는 기법
JP6067068B2 (ja) アプリストアとタイムラインを連携させて掲示物を推薦するサービスの提供方法およびシステム
US20210042441A1 (en) Protecting user privacy in user interface data collection
US11348144B2 (en) Shoppable ads with query relevant offers
WO2016137435A1 (en) Element identifier generation
US10213693B2 (en) Method and apparatus for awarding trophies
CN114764485B (zh) 一种信息显示方法、装置、存储介质及计算机设备
JP2019098064A (ja) 情報処理装置及びプログラム
Khouri THE YEAR AHEAD FOR EXTENDED REALITY XR.
Weise Microsoft Weighs In on App Store Debate, Urging More Openness
McArdle Five shows more people should be watching
Provost The Art of Games: Virtual reality may be the future but struggles in the present-The Tufts Daily
Garcia China's Tencent drops hugely popular combat game PUBG
US9727908B2 (en) Method and system to enhance presentation of a shared resource

Legal Events

Date Code Title Description
MM4A Annulment or lapse of patent due to non-payment of fees