TWI606384B - 透過自由形式描繪之吸引人的顯示 - Google Patents

透過自由形式描繪之吸引人的顯示 Download PDF

Info

Publication number
TWI606384B
TWI606384B TW103101469A TW103101469A TWI606384B TW I606384 B TWI606384 B TW I606384B TW 103101469 A TW103101469 A TW 103101469A TW 103101469 A TW103101469 A TW 103101469A TW I606384 B TWI606384 B TW I606384B
Authority
TW
Taiwan
Prior art keywords
free
depiction
graphical object
image
graphical
Prior art date
Application number
TW103101469A
Other languages
English (en)
Other versions
TW201439877A (zh
Inventor
李范欣
史密斯葛列格里R
哈比卡濟盧百特
Original Assignee
微軟技術授權有限責任公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 微軟技術授權有限責任公司 filed Critical 微軟技術授權有限責任公司
Publication of TW201439877A publication Critical patent/TW201439877A/zh
Application granted granted Critical
Publication of TWI606384B publication Critical patent/TWI606384B/zh

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)
  • Processing Or Creating Images (AREA)
  • Image Generation (AREA)

Description

透過自由形式描繪之吸引人的顯示
本發明係關於透過自由形式描繪之吸引人的顯示。
【相關申請案之交互參照】
本申請案主張美國專利臨時申請案2013年1月15日案號61/752,928,標題為「透過自由形式描繪之吸引人的顯示(ENGAGING PRESENTATION THROUGH FREEFORM SKETCHING)」之優先權,其全文於本文中併入參照。
資訊視覺化涉及到使用視覺呈現的資訊以獲得注目來表現基礎樣式及揭開資料位元間的關係,否則資料將被以複雜或未經處理的量而隱藏。在過去數十年間,資訊視覺化研究社群已創造各種系統及技術來使資料探索為可能並易於視覺性增加此注目。較少深入研究的是實施於呈現視覺資訊給其他人的實際交際行為,儘管此呈現通常是資訊探索作業的最終目標。例如,資訊的訂製化圖形代表是廣泛被記者、研究員、及統計員使用以傳達概念性資訊給視聽者。這些代表可包括與特別設計來快速並清楚地溝通複雜資訊之訂製化 圖像一同繪製的圖表(如長條圖、折線圖等)。這些資訊視覺化通常以精緻的圖形工具創建,這些資訊視覺化可以是美學上令人滿意的且富表現的。然而,此視覺化通常可以是靜態的,而錯失了能給現場講述者完整的溝通力道。
另一常見技術涉及白板動畫(whiteboard animation),也稱為視訊描寫(video scribing)。白板動畫是一種視覺溝通技術其中呈現者可產生一系列動態描繪與同步的旁白以生動地傳達故事。由於其創新及富表現的圖形風格,白板動畫已日漸吸引視聽者及藝術性傾向的呈現者,且白板動畫已變得在各領域如廣告及教育中更受歡迎。然而,產生高品質白板動畫是耗時且潛在性昂貴的。此外,其隨著資料的溝通力量是受限於依賴呈現者在現場表現時以視覺上令人注目的方式形成及呈現基本數字的數字與藝術性能力。
本文所描述為各種關於在顯示螢幕上呈現圖形物件的技術。指明用於圖形物件自資料組中所選出之值屬性的指示及用於圖形物件的範例圖像可被接收。該範例圖像是筆觸的叢集,其中筆觸是可顯示於顯示螢幕上的標誌。圖形物件可以是基於範例圖像及自資料組所選出之值屬性的資料來產生。此外,圖形物件可包括個別基於自資料組所選出之值屬性的資料而修改的範例圖像的實例。圖形物件可被使得在顯示螢幕上被顯示。此外,包含於圖形物件中之範例圖像的實例的筆觸的創建可被記錄為預備呈現的一部分以為了隨後的重播。圖形物件可進一步被註解、藉由過濾自資料組選出之 值屬性的資料來修改、上述之組合、等等。
根據各種態樣,呈現系統可支援個人化及富表現的圖形物件(如資料圖表、地圖等)的創建。例如,使用者可描繪用於圖形物件的範例圖像,且呈現系統可自動地藉由基於自資料組之資料來合成範例圖像完成圖形物件。此外,呈現系統允許使用者與圖形物件互動。此外,呈現系統可支援記錄及回放預備呈現。
以上發明內容呈現簡化之總結,以為了提供本文討論之系統及/或方法的一些態樣的基本瞭解。本發明內容並非本文所討論之系統及/或方法的廣泛概述。其非欲以辨識關鍵/重要元素或描述此系統及/或方法的範圍。其唯一目的是以簡化形式呈現一些概念作為於後呈現之更詳盡描述的前言。
100‧‧‧系統
102‧‧‧計算裝置
104‧‧‧呈現系統
106‧‧‧感測器
108‧‧‧使用者
110‧‧‧顯示螢幕
112‧‧‧使用者介面
200‧‧‧系統
202‧‧‧互動偵測元件
204‧‧‧資料選擇元件
206‧‧‧範例指定元件
208‧‧‧修改元件
210‧‧‧產生元件
212‧‧‧資料組
214‧‧‧資料儲存庫
216‧‧‧表現元件
300‧‧‧範例圖像庫
400‧‧‧增強元件
500‧‧‧系統
502‧‧‧基線指定元件
504‧‧‧類型辨識元件
506‧‧‧動畫元件
508‧‧‧註解接收元件
510‧‧‧註解控制元件
512‧‧‧操作偵測元件
514‧‧‧過濾元件
600‧‧‧系統
602‧‧‧編寫元件
604‧‧‧預備呈現
606‧‧‧回放元件
608‧‧‧多媒體內容
610‧‧‧整合元件
612‧‧‧視覺關鍵字
800‧‧‧按鈕
802‧‧‧按鈕
900‧‧‧按鈕
1000‧‧‧按鈕
1700‧‧‧圖像
1702‧‧‧圖像
1704‧‧‧基線
1900‧‧‧方法
1902‧‧‧步驟
1904‧‧‧步驟
1906‧‧‧步驟
1908‧‧‧步驟
2000‧‧‧方法
2002‧‧‧步驟
2100‧‧‧計算裝置
2102‧‧‧處理器
2104‧‧‧記憶體
2106‧‧‧系統匯流排
2108‧‧‧資料儲存
2110‧‧‧輸入介面
2112‧‧‧輸出介面
第1圖繪示示例系統的功能方塊圖,其便於產生基於自由形式描繪的呈現及/或表現此呈現於顯示螢幕上。
第2圖繪示示例系統的功能方塊圖,其便於藉由合成範例圖像來自動地創建圖形物件。
第3圖至第4圖繪示有關圖形物件的範例圖像之接收的各種示例情境。
第5圖繪示示例系統的功能方塊圖,其致能產生及/或操作圖形物件。
第6圖繪示示例系統的功能方塊圖以預備呈現及/或回放預備呈現。
第7圖至第16圖繪示本文所述由呈現系統產生之呈 現的使用者介面的示例系列。
第17至第18圖繪示本文所述由呈現系統產生之呈現的使用者介面的另一示例系列。
第19圖為一流程圖,其繪示呈現圖形物件於顯示螢幕上之示例方法。
第20圖為一流程圖,其繪示呈現圖形物件於顯示螢幕上之示例方法。
第21圖繪示示例計算裝置。
現參照至隨附圖式描述關於創建呈現的各種技術,該呈現包括了自動地以由自由形式描繪所創建的圖形物件,其中類似的元件符號被用於參照至全文類似的元件。於以下實施方式中,為了解釋之目的,許多特定細節被描述以為了提供一或更多個態樣的透徹理解。明顯地,然而,這些態樣可以不與這些特定細節一同實施。在其他實例中,熟知的結構及裝置被示為方塊圖形式以便於描述一或更多個態樣。再者,應了解所描述之被特定系統元件實現的功能可被多個元件實行。類似的,例如,元件可被設置以實行所描述被由多個元件實現的功能。
此外,「或」之一詞係欲以表示一包含性的「或」而非互斥的「或」。意即,除非特別陳明,或由前後文而明顯可知,「X使用A或B」一語,是意欲意指任意自然包含性的排列。意即,「X使用A或B」一語是被任意以下實例所滿足:X使用A;X使用B;或X使用A與B兩者。此外, 被用於本申請案及隨附申請專利範圍之量詞「一」應一般性被解釋為意指「一個或更多個」,除非特別陳明或可由上下文清楚得知係指單一形式。
如在此所述,各種技術支援創建個人化及富表現的圖形物件(如,資料表、地圖等)。使用者可描繪一範例圖像,且一呈現系統可自動地藉由基於來自一資料組中的資料來合成該範例圖像而完成一圖形物件。再者,該呈現系統允許使用者與該圖形物件互動。此外,該呈現系統可支援記錄及回放已預備之呈現。在回放時,該已預備之呈現可被如記錄時而重播且/或在重播時被改變(例如,由使用者,在傳送該已預備之呈現時);因此,一系列步驟可被記錄,且該系列中之步驟可被照順序於重播時執行,額外的步驟可在重播時被加入至該系列,步驟可在重播時被自該系列中移除,且/或系列的步驟可再重播時被修改。呈現系統可利用描繪之富表現及自由形式的本質來創建互動性及有組織的圖形物件以用於資料呈現與敘述有資料的講述。
現參照至隨附圖示,第1圖繪示系統100,其便於產生基於自由形式描繪的呈現及/或表現此呈現於顯示螢幕110上。系統100包括計算裝置102,其進一步包括呈現系統104。系統100亦包括感測器106,其被設置以自使用者108接收輸入資料。使用者108可利用實質上任何輸入設備,其中感測器106經配置以感測此輸入設備的動作及/或位置。輸入設備的範例可被使用者108利用包括,但不限於,使用者108的一手指(或多指)、使用者108的一隻手(或多手)、 一互動白板筆(於本文參照為筆)、一觸控筆、及其中的組合,等等。
感測器106可輸出指示該輸入設備之動作及/或位置的資料,且此資料可被該計算裝置102接收。顯示螢幕110可與計算裝置102通訊,使得計算裝置102能夠使顯示螢幕110顯示使用者介面112。更特定而言,呈現系統104可被設置以使顯示螢幕110顯示使用者介面112。使用者介面112可包括畫布的圖形描寫與圖形物件(如圖表、地圖等)、註解、多媒體內容,及其他等等,其可被顯示於顯示螢幕110上。此外,呈現系統104可動畫顯示在顯示螢幕110上而被包含於使用者介面112中的此視覺元件的創建及/或操作。
經考量感測器106可為實質上任意類型接受來自使用者108之輸入的感測器。例如,感測器106可為能以手勢操作的軌跡板、觸控顯示螢幕(例如,感測器106可被整合入顯示螢幕110中)、滑鼠、攝影機、麥克風、遠端控制、鍵盤、以上之組合、或類似者。根據各種範例,經考量感測器106可依靠語音辨識、觸碰及觸控筆辨識、於顯示螢幕110上及靠近顯示螢幕110兩者的手勢辨識、懸浮手勢(air gestures)、頭及眼追蹤、聲音及語音、視覺、觸控、手勢、及類似者。再者,感測器106可被設置以輸出指示位置及/或動作的資料。輸出資料可被呈現系統104利用,該呈現系統104可造成顯示於顯示螢幕110上的使用者介面112的修改,其為反射使用者108的意圖。
根據一範例,感測器106可為能以手勢操作的軌跡 板。根據此範例,該能以手勢操作的軌跡板可輸出指示使用者108的一手指(或多指)的位置或/及動作的資料。呈現系統104可獲得此資料並使得顯示於顯示螢幕110上的使用者介面112被修改。
透過另一例,感測器106可為一滑鼠。根據此範例,透過滑鼠的動作及該滑鼠上一或更多按鈕的選擇,使用者108可使該滑鼠輸出指示使用者輸入的資料。呈現系統104可接收此資料並造成修改顯示於顯示螢幕110上的使用者介面112。
根據進一步之範例,感測器106可被整合入顯示螢幕110中;根據此範例,顯示螢幕110可為互動顯示螢幕。例如,該互動顯示螢幕可為數位白板、互動顯示表面、觸控表面、基於筆的表面、或此類。使用者108可移動其手指(或多指)或筆於顯示螢幕110上有如使用者108正在畫布上畫圖。呈現系統104可使得顯示於顯示螢幕110上的使用者介面112被至少部分地基於在顯示螢幕110上由使用者108的手指(或多指)或使用者108利用的筆所被感測到的動作而被更新。
根據本文揭示的許多範例,使用者108可利用觸碰於顯示螢幕110(如,互動顯示螢幕)上的筆來畫圖且利用觸碰於顯示螢幕110上的手指來操作包括於顯示在顯示螢幕110上的使用者介面112中之視覺元件。呈現系統104可區別筆與手指互動間的角色以減輕圖形物件創建及操作的明顯模式;因此,呈現系統104可致能使用筆來畫圖形物件、註解、 或此類,及使用手指觸碰來操作這些視覺元件。因此,例如,呈現者可由觸碰來移動、選擇等視覺元件(例如,圖形物件、所選擇筆觸的集合等)而沒有明顯改變模式。然而,應考量所請求主張標的不限於前文所述;例如,一手指觸碰可被用於繪圖且一筆觸碰可被用於操作視覺元件、創件及操作視覺元件的明顯模式可被利用等。
如本文所更詳細描述,呈現系統104可被設置以藉由即時地合成使用者108提供之範例圖像來自動地產生圖形物件。另外或替代地,呈現系統104可致能編寫經預備的呈現,該呈現因此而能被重播。再次地,呈現系統104當使用者108創建預備之呈現時,可藉由合成使用者108提供之範例圖像來支持自動產生圖形物件。
呈現系統104可自動地藉由合成來自自由形式描繪的範例圖像來產生圖形物件(例如,資料圖表、地圖等)。此方法可保存描繪的組成樣式並便於創建富表現的圖形物件(例如,資料圖表、地圖等)而降低手動繪圖的負擔。因此,由於使用者108(例如,呈現者)在呈現系統104完成圖形物件時可講述,此繪圖負擔的降低可幫助使用者108講述溝通。
如本文所參照,圖形物件可以是資料圖表、地圖、或此類。更特定而言,圖形物件如本文所述可以是一視覺元件,該視覺元件自動地由呈現系統104基於範例圖像而創建。
呈現系統104可結合資訊圖表(infographics,information graphics)的富表現之視覺語言和動態描繪與白板動畫的講述溝通。資訊圖表是資訊、資料、或知識的圖形呈 現。資訊圖表廣泛被報告者、電腦科學家、統計學者等使用於在廣大範圍領域中溝通概念性資訊。此外,資訊圖表的創建可能是很昂貴的。白板動畫是另一種視覺溝通技術,其中呈現者通常講述並描繪一系列的線條藝術元件來傳達故事。然而,由於其中所涉及的手繪,創建傳統白板動畫可能是昂貴且勞力密集的。
為了使得使用者108能產生可與講述合作之富表現及自訂的代表圖像,呈現系統104可允許使用者108描繪所欲代表圖像作為一範例視覺元件且可自該範例元件合成圖形物件(例如,圖表、地圖等)。再者,為了使故事講述更生動及有回應,呈現系統104可支持互動。呈現系統104可被設計來流暢地整合自由形式描繪與綁定視覺化資料的組成樣式來傳達訊息或講述故事。
呈現系統104可支持即時內容創建與流暢動畫。為了吸引注意並產生期望如許多表演藝術技巧,呈現系統104可使用即時方式於內容創建。為了降低手繪整個圖形物件的負擔,當輔助講述溝通時,呈現系統104可藉由綁定視覺元件至基礎資料來完成圖形物件。因此,使用者108可講述而呈現系統104自動地以流暢動畫完成圖形物件,來使其看來像是使用者108正以高速描繪。
此外,語境資訊可被提供於畫布上。呈現系統104可使用畫布的概念來呈現資訊。因此,觀看者可瞭解整個故事的語境並推知視覺元件間的關係。先前之所述可被畫布支援。呈現系統104可支援自由形式註解於畫布上任何地方來 強調、裝飾、及描述。
根據諸多實施例,經考量呈現系統104可以是一獨立的呈現工具。另外或替代地,根據諸多實施例,應理解呈現系統104可以是不同呈現工具的外掛程式或包含不同的呈現工具作為外掛程式。
參照至第2圖,所繪示為範例系統200,其便於藉由合成範例圖像來自動地創建圖形物件。系統200包括呈現系統104及顯示螢幕110。此外,系統200包括資料儲存庫214,該資料儲存庫保留資料組212。因此,呈現系統104可基於範例圖像及保留於資料儲存庫214中的資料組212中的資料來產生圖形物件,且此圖形物件可被顯示於顯示螢幕110上。
呈現系統104包括互動偵測元件202,其偵測使用者輸入。例如,互動偵測元件202可接收自第1圖感測器106的使用者輸入。根據如上述之範例,互動偵測元件202可決定使用者輸入是否為一筆觸碰或一手指觸碰、此筆觸碰或手指觸碰的位置及/或移動等。
互動偵測元件202進一步包括資料選擇元件204,其從由互動偵測元件202所偵測之使用者輸入接收指示,該指示指出用於圖形物件而自資料組212中所選擇之值屬性。透過範例,指出用於圖形物件而自資料組212中所選擇之值屬性的該指示可以是,由使用者完成,顯示於顯示螢幕110上之資料屬性選單中之特定值屬性的選擇的一指示。根據此範例,資料屬性選單可包括一組可選擇的值屬性,該值屬性 可被使用者選擇。透過另一例,資料選擇元件204可自動地辨識用於圖形物件自資料組212選出的值屬性。又根據進一步範例,資料選擇元件204可實質上接收任意其他類型的明確指示,該指示指明用於圖形物件自資料組212選出的值屬性。根據一圖,資料選擇元件204可由預先記錄的檔案(例如,在重播時)讀取用於圖形物件自資料組212選出的值屬性。然而,應理解所主張權利標的並不限於上述範例。
再者,互動偵測元件202可包括範例指定元件206。範例指定元件206可自互動偵測元件202所偵測的使用者輸入來接收用於圖形物件的範例圖像。範例圖像是筆觸的叢集。再者,一筆觸是可在顯示螢幕110上顯示的一標誌。範例圖像的筆觸的叢集可被視為單一特徵。為了叢集由使用者描繪的範例圖像的筆觸,範例指定元件206可融合筆觸與重疊的邊界。
呈現系統104可包括修改元件208,修改元件208可分析由互動偵測元件202所偵測之使用者輸入並基於這些分析而修改產生以顯示於顯示螢幕110上的使用者介面。例如,修改元件208可創建及/或操作視覺元件,該視覺元件被包含於基於使用者輸入的分析之使用者介面中。再者,呈現系統104可包括表現元件216,表現元件216可使得使用者介面被顯示於顯示螢幕110上。
修改元件208可包括產生元件210,產生元件210可基於範例圖像及自資料組212選出之值屬性的資料產生。圖形物件可包括個別基於自資料組212選出之值屬性的資料 而修改的範例圖像的實例。因此,產生元件210可產生範例圖像的實例,該等實例是個別基於自資料組212的資料而修改。此外,自資料組212之資料可被包含於具有範例圖像之實例的圖像物件中;然而,所主張權利標的並不如此限定。可藉由產生元件210而被實施於範例圖像的實例之修改的範例包括改變範例圖像之大小、位置、副本數量等。此外,經考量,例如,範例圖像可被美化(例如藉由產生元件210)。此外,表現元件216可使得由產生元件210產生之圖形物件被顯示於顯示螢幕110上。
資料儲存庫214可使資料組212為可被利用於操作及互動。根據各種範例,資料組212可被保留於伺服器上或在分散式資料庫中、可以是本地客戶端上的檔案、可以是記憶體內資料、或此類。在又另一範例中,資料儲存庫214可為雲端運算基礎架構的部分。
根據一範例,為了支援圖形物件的產生如基於時間的圖表及地圖圖表,被包含於資料組212中的一屬性可包含時間資訊(例如,年、日、時等),而另一屬性可包含對應於預備地圖描繪檔案的地理資訊。在初始時,呈現系統104可在資料組212及地圖描繪檔案中讀取(例如,或是對應於包含在資料組212中之地理資訊的地圖描繪檔案的一部分),且呈現系統可動態地產生可被使用者選擇的選單項目。然而,所主張權利標的不限於前文所述如時間資訊及/或地理資訊不必須要被包含(例如,時間以外的其他屬性可以在資料圖表的X軸上等)。
如前所述,範例指定元件206可接收圖形物件的範例圖像。根據各種示例情境,範例指定元件206可藉由偵測利用輸入設備而被繪於顯示螢幕110(如,由使用者)上的範例圖像之自由形式描繪來接收圖形物件的範例圖像。例如,範例指定元件206可叢集自由形式描繪的筆觸成為範例圖像。根據其他示例情境,經考量範例指定元件206可自包括一組範例圖像組的範例圖像庫來接收圖形物件的範例圖像。
第3圖至第4圖繪示有關圖形物件的範例圖像之接收的各種實施例。然而,應理解,所主張權利標的並不限於第3圖至第4圖描述之示例情境。
現參照至第3圖。範例指定元件206可獲得使用者輸入,該使用者輸入關於自範例圖像庫300之範例圖像的選擇。此外,範例指定元件206可自範例圖像庫300取得範例圖像。在第3圖所描述之範例之後,範例圖像庫300可包括先前記錄的使用輸入設備所繪的自由形式描繪(例如,使用如本文所述之編寫元件記錄)。另外或替代地,範例圖像庫300可包括自實質上任意來源之預先定義的範例圖像。儘管未示於第3圖,經考量範例圖像庫300可被保留於第2圖之資料儲存庫214中。
現參照至第4圖。再次地,範例指定元件206可接收使用者輸入。更特定而言,在第4圖之示例情境中,範例指定元件206可偵測使用輸入設備被繪於顯示螢幕上之範例圖像的自由形式描繪。此外,增強元件400可增強(例如,美化、改變等)繪於顯示螢幕上之範例圖像。經考量增強元 件400可利用實質上任易技術(例如,非真實感繪製(non-photorealistic rendering)等)來增強範例圖像。
參照至第5圖,所繪示為系統500,該系統致能產生及/或操作圖形物件。系統500包括呈現系統104、顯示螢幕110、及資料儲存庫214。如上所述,呈現系統104進一步包括互動偵測元件202、修改元件208、及表現元件216。
互動偵測元件202可包括資料選擇元件204、範例指定元件206、及基線指定元件502。基線指定元件502可接收使用輸入設備繪於顯示螢幕110上之圖形物件的基線。應理解實質上任意類型的筆觸可被運用為基線。例如,圖形物件的基線可為繪於顯示螢幕110上之非線性筆觸、繪於顯示螢幕110上之線性筆觸、繪於顯示螢幕110上之一組筆觸等。
因此,例如,資料選擇元件204可接收指示,該指示指明自圖形物件的資料組212所選擇的值屬性。此外,範例指定元件206可接收圖形物件的範例圖像。圖形物件的範例圖像可被顯示於顯示螢幕110上。如前所述,使用者可將範例圖像繪於顯示螢幕110上、範例圖像可自範例圖像庫300被選擇、顯示螢幕110上之自由形式描繪可被增強以提供範例圖像、以上之組合或是此類。此外,基線指定元件502可接收使用輸入設備繪於顯示螢幕110上之圖形物件的基線。
如上所述,修改元件208可包括產生元件210,產生元件210可產生圖形物件。產生元件210可進一步包括類型辨識元件504,該類型辨識元件504可基於範例圖像的特性及範例圖像與基線的相關位置來決定圖形物件的類型。範例 圖像的特性,例如,可以是該範例圖像是否為單一圖像或多圖像。此外,產生元件210可產生具有如所決定之類型的圖形物件,而圖形物件進一步包括基線。
類型辨識元件504可支援各種類型的圖形物件。由類型辨識元件504決定之圖形物件的類型可以是,例如,帳目圖(tally chart)、線圖、條狀圖、或是地圖;然而,應理解所主張權利標的並不如此限定,而其他類型係意欲落入本文隨附申請專利範圍之範圍中。此外,類型辨識元件504支援動態地改變圖形物件的類型。透過範例,互動偵測元件202可接收使用者輸入,該使用者輸入指明將圖形物件改變為第二類型。在此範例之後,類型辨識元件504可動態地將圖形物件改變為由使用者輸入表明的第二類型。根據繪示,類型辨識元件504可初始決定圖形物件的類型為帳目圖。回應於表明將圖形物件改變為條狀圖的使用者輸入,類型辨識元件504可使得產生元件210將圖形物件改變為條狀圖。然而,應理解所主張權利標的並不限於前文所示。
例如,類型辨識元件504可利用以下示例啟發式來決定圖形物件的類別。若範例圖像為多圖像範例,且此多圖像範例並不與基線交叉,則類型辨識元件504可決定該類型為帳目圖。此外,若範例圖像為單一圖像範例,且此單一圖像範例並不與基線交叉,則類型辨識元件504可決定該類型為線圖。此外,若範例圖像為單一圖像範例,且此單一圖像範例與基線交叉,則類型辨識元件504可識別該類型為條狀圖。此外,若該基線是矩形,則類型辨識元件504可識別該 類型為地圖。筆觸的邊界框可決定地圖的大小。在此狀況下,圖像可於地圖上被覆蓋而圖像的比例可代表其基本資料。應理解,然而,所主張權利標的並不限於前述範例啟發式,而其他啟發式係意欲落於本文隨附申請專利範圍之範圍中。根據其他實施例,經進一步考量類型辨識元件504可自動地辨識圖形物件的類型、回應於描繪手勢(例如,條狀圖的長條形、線圖的線形)或明確輸入(例如,回應於按下呈現於顯示螢幕110上指明圖形物件的特定類型的按鈕)而決定圖形物件的類型、或此類。
此外,呈現系統104可在顯示螢幕110上動畫筆觸創建。更特定而言,表現元件216可包括動畫元件506,該動畫元件506可在顯示螢幕110上動畫包含於圖形物件中之範例圖像的實例的筆觸之創建。例如,若範例圖像包括五個筆觸,該等筆觸是以特定系列被繪於顯示螢幕110上,那麼該等五個筆觸可於包含於該圖形物件中之每個實例以相同系列重複。此外,若該圖形物件包括範例圖像的六個實例,該等實例包括五個筆觸,則該等五個筆觸可於該範例圖像的六個實的每一個以相同系列重複(例如,由產生元件210個別地修改)。應理解範例圖像可同時地、順序地等此類方式被描繪。此外,動畫元件506可支援動態動畫;因此,根據圖形物件的複雜度,動畫元件506可決定要多快來動畫筆觸的創建及/或要用多少平行描繪來動畫。例如,此決定可基於圖形物件的總筆觸長度來實行;然而,經考量所主張權利標的並不如此限制。
呈現系統104可進一步支援語境感知註解(context aware annotation)。例如,互動偵測元件202可包括註解接收元件508,該註解接收元件508可接收使用輸入設備在顯示螢幕110上所繪之自由形式註解。修改元件208可進一步包括註解控制元件510,其可決定該自由形式註解是否對應於由產生元件210所產生之圖形物件(或由顯示於顯示螢幕110上之一組圖形物件中的不同的圖形物件)。當註解控制元件510決定該自由形式註解對應於特定圖形物件,那麼該自由形式註解可由該註解控制元件510而被與該特定圖形物件連結。互動偵測元件202可進一步包括操作偵測元件512,該操作偵測元件可偵測使用者輸入,該使用者輸入造成顯示於顯示螢幕110上之使用者介面的各種態樣的操作。例如,操作偵測元件512可接收使用者輸入,該使用者輸入造成圖形物件與自由形式註解連結的操作。因此,註解控制元件510可使得自由形式註解回應於圖形物件被操作而被操作。
根據範例,多個圖形物件可被繪於顯示在顯示螢幕110上的畫布上。此外,自由形式註解可被使用者繪於顯示螢幕110上。註解控制元件510可決定自由形式註解所對應至之圖形物件。因此,當圖形物件被移動,註解可跟隨(例如,隨著該圖形物件被移動)。此外,當圖形物件被改變大小,註解亦可被改變大小。然而,經考量所主張權利標的並不限於上述範例。
經考量修改元件208可另外或替代地回應於由操作偵測元件512接收的使用者輸入而改變圖形物件的其他態 樣,且因此,修改元件208可管理繪於顯示在顯示螢幕110上的畫布上之圖形物件。可被基於使用者輸入改變的圖形物件之態樣的範例包括尺寸、位置、顏色、方向、透明度、類型等。此外,圖形物件可基於使用者輸入而被最小化、恢復、複製等。互動及/或輸入形式的各種類型可引起對圖形物件的改變。例如,觸碰可對圖形物件(或其一部分)移動及改變大小,或草繪手勢可消去圖形物件(或其一部分)。此外,例如,聲音命令可造成對圖形物件的一些改變。
此外,修改元件208可包括過濾元件514,其可支援動態過濾。操作偵測元件512可接收顯示於顯示螢幕110上的視覺關鍵字的選擇。過濾元件514可回應於該視覺關鍵字的選擇而過濾自資料組212的所選值屬性之資料。此外,產生元件210可以更新圖形物件,該更新是藉由基於自資料組212所選擇之值屬性的資料如過濾元件514所過濾來改變一或更多個範例圖像的實例。
例如,視覺關鍵字可以是某種形狀的筆觸或圖像。例如,在呈現之前,使用者可創建筆觸與文字關鍵字之對映,以為了實行藉由與筆觸互動來動態過濾而不是輸入關鍵字(例如,使用虛擬鍵盤)。關鍵字的圖畫代表可保存視覺的富表現圖形風格。
當使用者藉由輕觸顯示螢幕110上的圖像來選擇視覺關鍵字時,過濾元件514可從被產生元件210所利用之資料組212過濾資料來更新圖形物件。因此,當使用者藉由輕觸圖像來選擇視覺關鍵字時,修改元件208可根據關聯於所 選擇圖像之文字關鍵字來更新其他視覺元件。例如,當使用者輕觸視覺關鍵字時選擇可被觸發;然而,所主張權利標的並不如此限定。
根據繪示,當使用者自第一圖形物件選擇圖像時,其他顯示於顯示螢幕110上之圖形物件可自動地藉由產生元件210透過由過濾元件514的動態過濾而被更新。例如另一例,經考量當動態過濾被應用時註解控制元件510可移除註解,且之後,當該過濾被重設時,可使得該註解重新出現。然而,所主張權利標的並不限於前述示例。
現參照至第6圖,所繪示為預備呈現及/或回放預備呈現的系統600。系統600包括呈現系統104、顯示螢幕110、及資料儲存庫214。呈現系統104進一步包括互動偵測元件202、修改元件208、及表現元件216,如本文所描述。互動偵測元件202可進一步包括資料選擇元件204及範例指定元件206。儘管未圖示,進一步經考量互動偵測元件202可包括基線指定元件502、註解接收元件508、及操作偵測元件512。此外,修改元件208包括產生元件210。儘管未圖示,進一步經考量修改元件208可包括註解控制元件510及過濾元件514。此外,產生元件210可進一步包括類型辨識元件504。儘管未圖示,亦應理解表現元件216可包括動畫元件506。
呈現系統104可進一步包括編寫元件602,該編寫元件602可致能預備呈現604之創建。例如,由編寫元件602所產生之預備呈現可被保留於資料儲存庫214中。此外,呈現系統104包括回放元件606,該回放元件606可重播預備呈 現604。在預備呈現604的重播時,使用者輸入可被接收;回應於在預備呈現604之重播時所接收之使用者輸入,預備呈現604可被修改。
根據範例,編寫元件602可被利用以記錄樣品圖像。此範例圖像可被保持於範例圖像庫300中,該範例圖像庫300可被包含於資料儲存庫214中。因此,如上與第3圖所述,所記錄的樣品圖像可被自範例圖像庫300選擇,而範例指定元件206接收指明了所記錄樣品圖像之選擇的使用者輸入。
此外,編寫元件602可以記錄,作為預備呈現604的一部分,包含於由產生元件210產生之圖形物件中之範例圖像的實例的筆觸的創建。編寫元件602可進一步記錄,作為預備呈現604的一部分,多媒體內容608、自由形式註解的創建、包含於不同圖形物件中之不同範例圖像的實例的不同筆觸之創建、圖形物件的操作、自由形式註解的操作、視覺關鍵字的創建、以上之組合、及此類。因此,編寫元件602可允許本文所描述之記錄動畫。
回放元件606可藉由動畫包含於顯示螢幕110上之圖形物件中的範例圖像之實例的筆觸的創建來重播預備呈現604。此外,回放元件606可於顯示螢幕110上動畫多媒體內容608、自由形式註解的創建、包含於不同圖形物件中的不同範例圖像的不同筆觸的創建、圖形物件的操作、自由形式註解的操作、以上之組合等。
回放元件606可提供用於重播預備呈現604的回放 時間軸控制。因此,預備呈現604可以是能用回放時間軸控制來重播的一系列步驟。此外,當預備呈現604被回放元件606重播,修改元件208可回應於由互動偵測元件202偵測之使用者輸入而修改預備呈現604。例如,預備呈現604在回放時可被註解、動態過濾可被利用以在回放時操作一或更多圖形物件重播,以及等等。此外,經考量於回放時額外圖形物件可如本文所述被產生。
回放元件606可如所記錄的重播預備呈現604。另外或替代地,預備呈現604在回放元件606重播時可被改變。例如,系列步驟可被編寫元件602如前所述而記錄。此外,系列中之步驟於重播時可被以順序執行、額外的步驟於重播時可被加入至系列中、於重播時步驟可被自該系列中移除、且/或系列的步驟於重播時可被修改。此外,預備呈現604的重播可轉變為由使用者即時創建呈現(例如,當預備呈現604結束時,回應於明確的使用者輸入、回應於系列中下一個步驟的非選擇,等等)及/或即時創建呈現可轉變為預備呈現604的重播。
編寫元件602可記錄或儲存一系列步驟作為預備呈現604。例如,系列步驟可關於具有第一範例圖像的條狀圖的創建接著具有第二範例圖像的線圖的創建。回放元件606可重播步驟的系列。在回放時,具有第一圖像的條狀圖的創建可被動畫於顯示螢幕110上。然而,使用者可決定於預備呈現604回放時覆蓋儲存為預備呈現604的部分之第二圖像。因此,使用者可即時描繪第三範例圖像,該第三範例圖像可 具有較儲存為預備呈現604的部分之第二圖像高的優先權;因此,該線圖可被基於該即時描繪之第三範例圖像創建(例如,將關於第二範例圖像創建的步驟取代為關於第三範例圖像的創建之步驟)。進一步接著此例,在回放中線圖的創建之後,該線圖可於回放中被改變為帳目圖。然而,應理解,所主張權利標的並不限於前述之示例範例。
根據另一例,經考量,預設圖形物件(例如一預設圖表)可被描繪於當使用者未提供範例圖像之時(例如,被存於預備呈現604中或即時繪示)。因此,若範例圖樣既未被包含於由回放元件606所回放之預備呈現604中亦未即時描繪,則預設圖像可被利用。使外,圖形物件可被基於預設圖像而產生。
修改元件208可進一步包括整合元件610,該整合元件610可將多媒體內容608整合至預備呈現604中。多媒體內容,例如,可以是圖片、視訊、或此類;然而,經考量所主張權利標的並不以此限制。
此外,編寫元件602可被利用以創建視覺關鍵字612,而視覺關鍵字612如上所述可被利用於動態過濾的語境。視覺關鍵字612可被保持於資料儲存庫214中。
根據範例,由編寫元件602記錄之預備呈現604可被保存為視訊。接著此例,該視訊可被散佈、保留(例如,於資料儲存庫214中)、沒有修改地重播、及等等。
第7圖至第16圖繪示本文所述由呈現系統104產生之呈現的使用者介面的示例系列。此範例呈現是以即時創建 來描述;然而,經考量此呈現之部分可進一步如上所述利用編寫元件602來創建。第7圖至第16圖所描述之呈現是有關1980年至2005年間關於全球能源消耗的樣品故事。基本資料組包括五欄(例如,內容、年、能源消耗、人口、及每一人之能源消耗)及總共36列(例如,六大洲、每一洲六個時間點)。此外,可假設使用者是講述關於全球能源消耗的故事的呈現者。
如第7圖所示,使用者藉由描繪太陽及具有地球於其中之文字「power」開始(例如,使用一筆)來表達他的呈現是關於全球能源消耗。為顯示整體能源消耗是如何隨著時間改變,使用者可產生關於此能源消耗的圖形物件。
圖形物件的創建可包含一系列步驟。例如,使用者可由資料屬性選單選擇所欲之值屬性(例如,用於資料圖表的Y軸之數據資料)。例如,目前所選擇之資料屬性可被示於選單列上。之後,使用者可切換至範例圖像模式且可描繪一或更多範例圖像。接著,使用者可切換至圖表軸模式且可繪用於該所欲圖形物件之基線。根據另一範例(未圖示),並未利用前述三形式步驟來創建圖形物件,描繪辨識可被利用;然而,所主張權利標的並不如此限制。
前述創建圖形物件的步驟係示於第8圖至第11圖。更特定而言,如第8圖所示,自選單列的資料屬性按鈕800可被使用者選擇,而使得資料屬性選單被顯示。接著,使用者可自資料屬性選單選擇能源消耗按鈕802(ppconsumption)。參照至第9圖,使用者可自選單列選擇 範例圖像按鈕900。接著,使用者可使用筆繪一燈泡形狀作為範例圖像。使用者可接著選擇圖表軸按鈕1000如第10圖所示。此外,使用者可使用筆繪一基線1002用於一線圖。呈現系統(例如,呈現系統104)可自動地藉由放置額外的範例圖像的實例基於包含在基本資料組中之時間及消耗量以適當的相對基線1002位移來完成具有範例圖像的線圖的描繪。此外,第11圖顯示該圖形物件,即該線圖,可回應於由使用者的手指實行的使用者輸入而被移動至使用者介面的右上角。使用者可以箭頭指至該線圖來增加註解「能源(energy)」(如,第12圖所示)。
使用者可進一步想要描繪人口如何隨著相同的時間框架而改變。因此,使用者可如上所述自資料屬性選單選擇人口屬性。在如上之類似程序,使用者可選擇範例圖像按鈕、畫一個火柴人作為範例圖示、選擇圖表軸按鈕、及如第12圖描繪用於該圖表之基線。因此,呈現系統可藉由如第13圖所示垂直地按基本資料值的比例延展額外圖像來完成該圖表作為一條狀圖。為了確保更多延展空間並為了將圖表對齊現有之線圖,使用者可如第14圖移動該條狀圖至右側並以文字「人口(Population)」註解它。此外,若需要的話,使用者可改變大小或最小化該條狀圖,以提供更多描繪空間。
使用者現在可想要展示能源消耗如何隨著地理位置而不同。因此,使用者可自資料屬性選單選擇能源消耗屬性。接著,使用者可選擇範例圖像按鈕、繪一電池圖像作為範例圖像、選擇圖表軸按鈕、及繪一四方形以指明地圖的大小及 位置,如第14圖所示。呈現系統可完成該描繪作為地圖,根據每一個區域的基本資料量縮放範例圖像並根據地理位置放置每一個圖像,如第15圖所示。
為了比較北美洲與亞洲之間個別能源消耗及人口的趨勢,使用者可於地圖上輕觸北美洲及亞洲。呈現系統可根據那兩洲來過濾基本資料,並可因此更新其他圖表。如圖所示,該條狀圖及該線圖可被更新以描繪北美洲及亞洲的資料。
第17至第18圖繪示本文所述由呈現系統104產生之呈現的使用者介面的另一示例系列。然而再次地,所主張權利標的並不限於此範例。第17圖繪示包括由使用者所繪之範例圖像的使用者介面。更特定而言,包含於第17圖之使用者介面中的範例圖像為多圖像,這是由於該範例圖像的筆觸可被叢集成兩個圖像,即,圖像1700及圖像1702。此外,第17圖之使用者介面包括彎曲基線1704。如本文所述,基線實質上可以是任意形狀。如第18圖所繪示,呈現系統可基於第17圖所示之範例圖像1700、範例圖像1702、及基線1704來產生帳目圖且使得此帳目圖被顯示。
第19圖至第20圖繪示關於產生包含圖形物件的呈現之示例方法。雖然該方法被展示及描述為由一系列所實行之動作的系列,應明白及理解該方法並不限於此系列之順序。例如,某些動作可以不同於本文所描述之順序發生。此外,一動作可與另一動作同時發生。此外,在某些範例中,並非需要所有動作的動作來實施本文所描述之方法。
此外,本文描述之動作可為可由一或更多處理器實 施且/或儲存於電腦可讀取媒體的電腦可執行指令。電腦可讀取指令可包括常式、子常式、程式、執行緒、及/或此類。再進一步,方法的動作的結果可被儲存於電腦可讀取媒體中、顯示於顯示裝置上、及/或此類。
第19圖繪示呈現圖形物件於顯示螢幕上之方法1900。在步驟1902,指明用於圖形物件自資料組所選出之值屬性的指示可被接收。在步驟1904,用於圖形物件的範例圖像可被接收。範例圖像可為筆觸的叢集。此外,筆觸可以是可被顯示於顯示螢幕上的標誌。在步驟1906,圖形物件可基於範例圖像及自資料組所選出之值屬性的資料而被產生。圖形物件可包括個別基於自資料組所選出之值屬性的資料而修改的範例圖像的實例。在步驟1908,圖形物件可被使得在顯示螢幕上被顯示。
現參照至第20圖,所繪示為呈現圖形物件於顯示螢幕上之方法2000。在步驟2002,指明用於圖形物件自資料組所選出之值屬性的指示可被接收。在步驟2004,用於圖形物件的範例圖像可被接收。在步驟2006,使用輸入設備繪於顯示螢幕之圖形物件的基線可被接收。在步驟2008,圖形物件的類型可基於範例圖像的屬性及範例圖像與基線的相對位置而被決定。例如,範例圖像的屬性可以是範例圖像是否是單一圖像或多圖像。在步驟2010,圖形物件可基於範例圖像、基線、及自資料組所選出之值屬性的資料而被產生。圖形物件可包括個別基於自資料組所選出之值屬性的資料而修改的範例圖像的實例及基線。此外,圖形物件可為如所決定之類 型。在步驟2012,包含於圖形物件中之範例圖像的實例之筆觸的創建可被動畫於顯示螢幕上。
現參照至第21圖,可被根據本文所揭示之系統及方法使用之示例計算裝置2100的上層圖示被描繪。例如,計算裝置2100可被用於基於範例圖像的呈現來產生圖形物件的系統。例如另一例,計算裝置2100可被用於記錄及/或回放此呈現的系統。計算裝置2100包括至少一處理器2102,該處理器執行儲存於記憶體2104中之指令。指令可以是,例如,實行描述為被由前文討論之一或更多元件實現之功能之指令或實行前述一或更多方法的指令。處理器2102可藉由系統匯流排2106存取記憶體2104。在儲存可執行指令之外,記憶體2104亦可儲存資料組、範例圖像庫、多媒體內容、預備呈現、視覺關鍵字、等等。
計算裝置2100更包括資料儲存2108,其可被處理器2102藉由系統匯流排2106存取。資料儲存2108可包括可執行指令、資料組、範例圖像庫、多媒體內容、預備呈現、視覺關鍵字等。計算裝置2100亦包括輸入介面2110,其允許外部裝置與計算裝置2100通訊。例如,輸入介面2110可被用於接收由外部計算裝置、由使用者等之指令。計算裝置2100亦包括輸出介面2112,其將計算裝置2100與一或更多外部裝置連接。例如,計算裝置2100可透過輸出介面2112顯示文字、圖片等。
經考量與計算裝置2100透過輸入介面2110及輸出介面2112通訊之外部裝置可被包含於提供了使用者可與之互 動實質上任意類型之使用者介面的環境中。使用者介面類型之範例包括圖形使用者介面(graphical user interfaces)、自然使用者介面(natural user interfaces)等等。例如,圖形使用者介面可接收由使用者利用輸入裝置如鍵盤、滑鼠、遠端遙控、或此類的輸入並提供輸出於輸出裝置如顯示器上。此外,自然使用者介面可使得使用者得以與計算裝置2100以不受輸入裝置如鍵盤、滑鼠、遠端遙控、及此類之制約而互動。然而,自然使用者介面可依賴於語音辨識、觸碰及觸控筆辨識、螢幕及靠近螢幕兩者的手勢辨識、懸浮手勢、頭部及眼部追蹤、聲音及語音、視覺、觸碰、手勢、機器智慧等。
此外,儘管繪示為單系統,應理解計算裝置2100可為分散式系統。因此,例如,一些裝置可透過網路連接來通訊且可整體地實施描述為被由計算裝置2100所實施之工作。
於本文中所用,「元件」及「系統」之用語係意欲包含電腦可讀取資料儲存,該電腦可讀取資料儲存被與電腦可執行指令配置以使得當由處理器執行時特定功能被實施。電腦可執行指令可包括常式、函式、或此類。亦應理解元件或系統可被本地化為單一裝置或分散於一些裝置上。
此外,如本文所用,「示例」之用語係欲以意謂「作為某事之說明或範例」。
本文所描述之各種功能可被實施於硬體、軟體、或任意其中之組合中。若實施於軟體中,該等功能可被儲存於或傳輸為在電腦可讀取媒體上之一或更多指令或代碼。電腦可讀取媒體包括電腦可讀取儲存媒體。電腦可讀取儲存媒體 可為任意可被電腦存取之可利用儲存媒體。例如,但非限制,此電腦可讀取儲存媒體可包括RAM、ROM、EEPROM、CD-ROM或其他光碟儲存、磁碟儲存或其他磁性儲存裝置、或任意其他可被用於以指令或資料結構形式攜帶或儲存所欲之程式代碼且可由電腦存取的媒體。本文所使用之「碟(disk、disc)」,包括光碟(CD)、雷射磁碟、光碟(optical disc)、多樣化數位光碟(DVD)、軟碟(floppy disk)、及藍光光碟(BD),而碟(disks)通常磁性地重現資料而碟(discs)通常光學地與雷射重現資料。此外,傳遞訊號並不包含於電腦可讀取儲存媒體之範圍內。電腦可讀取媒體亦包括通訊媒體,該通訊媒體包括便於將電腦程式自一處至另一處傳輸的媒體。例如,一連接可為一通訊媒體。例如,若軟體被自網站、伺服器、或其他遠端來源使用同軸電纜、光纜、雙絞線、數位用戶線路(DSL)、或無線技術如紅外線、無線電、及微波來傳送,則該同軸電纜、光纜、雙絞線、DSL、或無線技術如紅外線、無線電、及微波係被包含於通訊媒體之定義中。上述之組合亦被包含於電腦可讀取媒體之範圍中。
替代地,或另外地,本文所描述之功能可被,至少部分地,由一或更多硬體邏輯元件實施。例如,但非限制,可被使用之硬體邏輯元件的說明性類型包括場效可規劃閘極陣列(FPGAs)、特殊應用積體電路(ASICs)、特殊應用標準產品(ASSPs)、單晶片系統(SOCs)、複合可程式邏輯裝置(CPLDs)等。
上述所描述包括一或更多實施例之範例。當然地, 無法描述每個可想到的上述裝置或方法的修改及改變以為了描述前述的態樣,然而所屬技術領域具有通常知識者可辨識各種態樣之許多進一步修改及代換是可能的。因此,所述態樣係欲以包含所有落入於隨附申請專利範圍之範疇及精神的代換、修改、及變形。此外,就「包含(includes)」用語用於實施方式或申請專利範圍的情況下,當被利用於申請專利範圍中之連接詞時,此用語係欲為包含的如類似「包括(comprising)」用語之方式,而如「包括(comprising)」所解釋。
104‧‧‧呈現系統
110‧‧‧顯示螢幕
200‧‧‧系統
202‧‧‧互動偵測元件
204‧‧‧資料選擇元件
206‧‧‧範例指定元件
208‧‧‧修改元件
210‧‧‧產生元件
212‧‧‧資料組
214‧‧‧資料儲存庫
216‧‧‧表現元件

Claims (20)

  1. 一種在一顯示螢幕上呈現一基於自由形式描繪的圖形物件的方法,該方法包括以下步驟:接收一指示,該指示指明來自用於該基於自由形式描繪的圖形物件的一資料組之一所選出值屬性,其中該所選出值屬性指明來自該資料組的資料值;接收用於該基於自由形式描繪的圖形物件之一自由形式描繪的範例圖像,其中該自由形式描繪的範例圖像是以一系列(in a sequence)所繪之筆觸(strokes)的一叢集,且其中一筆觸為可顯示於該顯示螢幕上之一標誌;基於該自由形式描繪的範例圖像及由來自該資料組之該所選出值屬性所指明的該等資料值來產生該基於自由形式描繪的圖形物件,其中該基於自由形式描繪的圖形物件是由基於如所接收之該自由形式描繪的範例圖像來將該自由形式描繪的範例圖像的複數個實例併入該基於自由形式描繪的圖形物件中而產生,且其中該自由形式描繪的範例圖像的該等實例是基於由來自該資料組之該所選出值屬性所指明的該等資料值而個別地修改;及動畫(animating)被包括於該基於自由形式描繪的圖形物件中的該自由形式描繪的範例圖像的該等實例的筆觸的一系列的創建(creation)以用於顯示於該顯示螢幕上,其中被包括於該基於自由形式描繪的圖形物件中的該自由形式描繪的範例圖像的該等實例的該等筆觸的該系列是基於如所接收之該自由形式描繪的範例圖像中,該等筆觸被繪於其中之該 系列。
  2. 如請求項1所述之方法,其中該接收用於該基於自由形式描繪的圖形物件之該自由形式描繪的範例圖像之步驟進一步包括偵測使用一輸入設備在該顯示螢幕上的該自由形式描繪的範例圖像的描繪,且其中繪於該顯示螢幕上之該自由形式描繪的範例圖像是被併入該基於自由形式描繪的圖形物件的該自由形式描繪的範例圖像的該等實例中之一個實例。
  3. 如請求項1所述之方法,其中該接收用於該基於自由形式描繪的圖形物件之該自由形式描繪的範例圖像之步驟進一步包括:獲得使用者輸入,該使用者輸入關於自一範例圖像庫之該自由形式描繪的範例圖像的選擇;及自該範例圖像庫取得該自由形式描繪的範例圖像。
  4. 如請求項3所述之方法,其中該範例圖像庫包括先前所記錄使用一輸入設備所繪之自由形式描繪的範例圖像。
  5. 如請求項1所述之方法,其中用於該基於自由形式描繪的圖形物件之該自由形式描繪的範例圖像被顯示於該顯示螢幕上,該方法進一步包括以下步驟:在接收該自由形式描繪的範例圖像之後,且當該自由形式描繪的範例圖像顯示於該顯示螢幕上時,偵測在該顯示螢 幕上用於該基於自由形式描繪的圖形物件之一基線的描繪,其中該基線包括使用一輸入設備繪於該顯示螢幕上之至少一個筆觸;基於該自由形式描繪的範例圖像的一屬性及該自由形式描繪的範例圖像與該基線的相關位置來決定該基於自由形式描繪的圖形物件的一類型;及產生該基於自由形式描繪的圖形物件為如所決定之該類型,其中該基於自由形式描繪的圖形物件進一步包括該基線,且其中該自由形式描繪的範例圖像的該等實例是基於由來自該資料組之該所選出值屬性所指明的該等資料值而相關於該基線如繪於該基於自由形式描繪的圖形物件來定位。
  6. 如請求項5所述之方法,該方法進一步包括以下步驟:接收使用者輸入,該使用者輸入指明將該基於自由形式描繪的圖形物件改變為一第二類型;及動態地改變該基於自由形式描繪的圖形物件為由該使用者輸入所指明之該第二類型。
  7. 如請求項5所述之方法,其中用於該基於自由形式描繪的圖形物件的該基線的該至少一個筆觸包括繪於該顯示螢幕上之一非線性筆觸,其中顯示於該顯示螢幕上的該基於自由形式描繪的圖形物件包括該非線性筆觸,且其中該自由形式描繪的範例圖像的該等實例是關於在該基於自由形式描繪的圖形物件中的該非線性筆觸來定位。
  8. 如請求項1所述之方法,該方法進一步包括編寫一預備呈現之步驟,其中該編寫該預備呈現之步驟進一步包括:作為該預備呈現的部分,記錄包含於該基於自由形式描繪的圖形物件中之該自由形式描繪的範例圖像的該等實例之該等筆觸的該系列的該創建;及作為該預備呈現的部分,記錄下列至少一者:多媒體內容、自由形式註解的創建、包含於一不同的基於自由形式描繪的圖形物件中之一不同的自由形式描繪的範例圖像的不同筆觸之創建、該基於自由形式描繪的圖形物件的操作、該自由形式註解的操作、或一視覺關鍵字的創建。
  9. 如請求項8所述之方法,該方法進一步包括重播該預備呈現之步驟,該步驟是藉由動畫(animating)包含於該基於自由形式描繪的圖形物件中之該自由形式描繪的範例圖像的該等實例之該等筆觸的該系列的該創建以及以下至少一者:該多媒體內容、該自由形式註解的該創建、包含於該不同的基於自由形式描繪的圖形物件中之該不同的自由形式描繪的範例圖像的該等不同筆觸之該創建、該基於自由形式描繪的圖形物件的該操作、或該自由形式註解的該操作。
  10. 如請求項8所述之方法,該方法進一步包括以下步驟:重播該預備呈現;在重播該預備呈現時,接收使用者輸入;及 回應於在重播該預備呈現時之該使用者輸入,修改該預備呈現。
  11. 如請求項1所述之方法,該方法進一步包括以下步驟:接收使用一輸入設備繪於該顯示螢幕上之一自由形式註解;決定該自由形式註解是否對應於該基於自由形式描繪的圖形物件;及當該自由形式註解被決定為對應於該基於自由形式描繪的圖形物件時:將該自由形式註解與該基於自由形式描繪的圖形物件連結;及回應於被操作之該基於自由形式描繪的圖形物件而操作該自由形式註解。
  12. 如請求項1所述之方法,該方法進一步包括以下步驟:接收顯示於該顯示螢幕上之一視覺關鍵字的一選擇;回應於該視覺關鍵字的該選擇而過濾由來自該資料組之該所選出值屬性所指明的該等資料值;及基於由來自該資料組之該所選出值屬性所指明的該等資料值如所過濾的而藉由改變該自由形式描繪的範例圖像之該等實例的一或更多實例來更新該基於自由形式描繪的圖形物件。
  13. 如請求項1所述之方法,其中該顯示螢幕是接收使用者輸入的一互動顯示螢幕。
  14. 一種計算裝置,包括:至少一個處理器;及記憶體,該記憶體包括電腦可執行指令,當由該至少一個處理器執行該等電腦可執行指令時,使得該至少一個處理器實行以下動作包括:接收使用者輸入,該使用者輸入指明用於一基於自由形式描繪的圖形物件而來自一資料組之一所選出值屬性,其中該所選出值屬性指明來自該資料組的資料值;接收用於該基於自由形式描繪的圖形物件之一自由形式描繪的範例圖像,其中該自由形式描繪的範例圖像是以一系列(in a sequence)所繪之筆觸(strokes)的一叢集,且其中一筆觸為可顯示於一顯示螢幕上之一標誌(mark);基於該自由形式描繪的範例圖像及由來自該資料組之該所選出值屬性所指明的該等資料值來產生該基於自由形式描繪的圖形物件,該基於自由形式描繪的圖形物件是由基於如所接收之該自由形式描繪的範例圖像來將該自由形式描繪的範例圖像的複數個實例併入作為該基於自由形式描繪的圖形物件的部分而產生,且該自由形式描繪的範例圖像的該等實例是基於由來自該資料組之該所選出值屬性所指明的該等資料值而個別地修改; 動畫(animating)被包括於該基於自由形式描繪的圖形物件中的該自由形式描繪的範例圖像的該等實例的筆觸的一系列的創建(creation),其中被包括於該基於自由形式描繪的圖形物件中的該自由形式描繪的範例圖像的該等實例的該等筆觸的該系列是基於如所接收之該自由形式描繪的範例圖像中,該等筆觸被繪於其中之該系列;及作為一預備呈現的部分,記錄包含於該基於自由形式描繪的圖形物件中之該自由形式描繪的範例圖像的該等實例之該等筆觸的該系列的該創建。
  15. 如請求項14所述之計算裝置,該記憶體進一步包括電腦可執行指令,當由該至少一個處理器執行該等電腦可執行指令時,使得該至少一個處理器實行以下動作包括:作為該預備呈現的部分,記錄下列至少一者:多媒體內容、自由形式註解的創建、包含於一不同的基於自由形式描繪的圖形物件中之一不同的自由形式描繪的範例圖像的實例的不同筆觸之創建、該基於自由形式描繪的圖形物件的操作、該自由形式註解的操作、或一視覺關鍵字的創建。
  16. 如請求項14所述之計算裝置,該記憶體進一步包括電腦可執行指令,當由該至少一個處理器執行該等電腦可執行指令時,使得該至少一個處理器實行以下動作包括:從該預備呈現,重播包含於該基於自由形式描繪的圖形 物件中之該自由形式描繪的範例圖像的該等實例之該等筆觸的該系列的該創建。
  17. 如請求項16所述之計算裝置,其中該預備呈現被修改以回應於當重播時所偵測到之使用者輸入。
  18. 如請求項14所述之計算裝置,該記憶體進一步包括電腦可執行指令,當由該至少一個處理器執行該等電腦可執行指令時,使得該至少一個處理器實行以下動作包括:當該自由形式描繪的範例圖像顯示於該顯示螢幕上時,偵測用於該基於自由形式描繪的圖形物件之一基線的描繪,其中該基線包括至少一個自由形式筆觸;及基於由來自該資料組之該所選出值屬性所指明的該等資料值而相關於該基線如繪於該基於自由形式描繪的圖形物件中地定位該自由形式描繪的範例圖像的該等實例。
  19. 如請求項18所述之計算裝置,該記憶體進一步包括電腦可執行指令,當由該至少一個處理器執行該等電腦可執行指令時,使得該至少一個處理器實行以下動作包括:基於該自由形式描繪的範例圖像的一屬性及該自由形式描繪的範例圖像與該基線的相關位置來決定該基於自由形式描繪的圖形物件的一類型,其中該自由形式描繪的範例圖像的該等實例是基於該基於自由形式描繪的圖形物件的該類型而進一步修改。
  20. 一種包含電腦可執行指令的電腦可讀取儲存媒體,當由一處理器執行該等指令時,使得該處理器實行以下動作包括:接收一指示,該指示指明來自用於一基於自由形式描繪的圖形物件的一資料組之一所選出值屬性,其中該所選出值屬性指明來自該資料組的資料值;接收用於該基於自由形式描繪的圖形物件之一自由形式描繪的範例圖像,其中該自由形式描繪的範例圖像是以一系列(in a sequence)所繪之筆觸(strokes)的一叢集,且其中一筆觸為可顯示於一顯示螢幕上之一標誌;使得該自由形式描繪的範例圖像被顯示於該顯示螢幕上;在接收用於該基於自由形式描繪的圖形物件之該自由形式描繪的範例圖像之後,且當該自由形式描繪的範例圖像顯示於該顯示螢幕上時,接收用於該基於自由形式描繪的圖形物件之一基線,其中該基線包括使用一輸入設備繪於該顯示螢幕上之至少一個筆觸;基於該自由形式描繪的範例圖像的一屬性及該自由形式描繪的範例圖像與該基線的相關位置來決定該基於自由形式描繪的圖形物件的一類型;基於該自由形式描繪的範例圖像、該基線、及由來自該資料組之該所選出值屬性所指明的該等資料值,來產生該基於自由形式描繪的圖形物件,其中該基於自由形式描繪的圖形物件是由基於如所接收之該自由形式描繪的範例圖像來將 該自由形式描繪的範例圖像的複數個實例包括入該基於自由形式描繪的圖形物件而產生,其中該自由形式描繪的範例圖像的該等實例是基於由來自該資料組之該所選出值屬性所指明的該等資料值而個別地修改,其中該自由形式描繪的範例圖像的該等實例是基於該基於自由形式描繪的圖形物件的該類型而進一步修改,且其中該自由形式描繪的範例圖像的該等實例是關於在該基於自由形式描繪的圖形物件中的該基線來定位;及將包含於該基於自由形式描繪的圖形物件中之該自由形式描繪的範例圖像的該等實例之筆觸的一系列的創建動畫(animating)於該顯示螢幕上。
TW103101469A 2013-01-15 2014-01-15 透過自由形式描繪之吸引人的顯示 TWI606384B (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
US201361752928P 2013-01-15 2013-01-15

Publications (2)

Publication Number Publication Date
TW201439877A TW201439877A (zh) 2014-10-16
TWI606384B true TWI606384B (zh) 2017-11-21

Family

ID=51166273

Family Applications (1)

Application Number Title Priority Date Filing Date
TW103101469A TWI606384B (zh) 2013-01-15 2014-01-15 透過自由形式描繪之吸引人的顯示

Country Status (6)

Country Link
US (1) US10809865B2 (zh)
EP (1) EP2946276A1 (zh)
CN (1) CN105074640B (zh)
AR (1) AR099533A1 (zh)
TW (1) TWI606384B (zh)
WO (1) WO2014113341A1 (zh)

Families Citing this family (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2014106910A1 (ja) * 2013-01-04 2014-07-10 株式会社ユビキタスエンターテインメント 情報処理装置及び情報入力制御プログラム
US9665259B2 (en) 2013-07-12 2017-05-30 Microsoft Technology Licensing, Llc Interactive digital displays
USD759111S1 (en) * 2014-02-12 2016-06-14 Samsung Electronics Co., Ltd. Display screen or portion thereof with animated graphical user interface
US10416871B2 (en) * 2014-03-07 2019-09-17 Microsoft Technology Licensing, Llc Direct manipulation interface for data analysis
US10002449B2 (en) * 2015-04-16 2018-06-19 Sap Se Responsive and adaptive chart controls
CN108463784B (zh) * 2016-01-15 2022-03-25 皮尔森教育有限公司 用于交互式演示控制的系统和方法
US20170236318A1 (en) * 2016-02-15 2017-08-17 Microsoft Technology Licensing, Llc Animated Digital Ink
WO2018227617A1 (zh) * 2017-06-16 2018-12-20 富士通株式会社 信号发送方法、检测方法及其装置、通信系统
US10353997B1 (en) * 2018-04-09 2019-07-16 Amazon Technologies, Inc. Freeform annotation transcription
US10649618B2 (en) * 2018-05-15 2020-05-12 Fuji Xerox Co., Ltd. System and method for creating visual representation of data based on generated glyphs
CN111415398B (zh) * 2019-01-08 2024-01-05 杭州海康威视数字技术股份有限公司 一种在显示屏上显示批注的方法及装置
CN111078169B (zh) * 2019-11-29 2023-09-26 武汉虹信技术服务有限责任公司 一种可视化大屏系统的前端装置及其搭建方法

Family Cites Families (43)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5880743A (en) 1995-01-24 1999-03-09 Xerox Corporation Apparatus and method for implementing visual animation illustrating results of interactive editing operations
US5731997A (en) * 1996-03-19 1998-03-24 Trimble Navigation Limited Method and apparatus for collecting recording and displaying data pertaining to an artifact
US6208360B1 (en) 1997-03-10 2001-03-27 Kabushiki Kaisha Toshiba Method and apparatus for graffiti animation
US6952803B1 (en) * 1998-12-29 2005-10-04 Xerox Corporation Method and system for transcribing and editing using a structured freeform editor
US6201549B1 (en) * 1998-12-30 2001-03-13 Microsoft Corporation System and method for drawing and painting with bitmap brushes
US6459442B1 (en) 1999-09-10 2002-10-01 Xerox Corporation System for applying application behaviors to freeform data
WO2001075568A1 (en) 2000-03-30 2001-10-11 Ideogramic Aps Method for gesture based modeling
US6639600B2 (en) * 2000-05-31 2003-10-28 Sony Computer Entertainment Inc. Image drawing method, image drawing apparatus, recording medium, and program
US20030154443A1 (en) * 2002-02-13 2003-08-14 Ncr Corporation Visual discovery tool
AU2003295430A1 (en) 2002-11-11 2004-06-03 Zxibix, Inc. System and method of facilitating and evaluating user thinking about an arbitrary problem
US20040235520A1 (en) 2003-05-20 2004-11-25 Cadiz Jonathan Jay Enhanced telephony computer user interface allowing user interaction and control of a telephone using a personal computer
US20050248560A1 (en) 2004-05-10 2005-11-10 Microsoft Corporation Interactive exploded views from 2D images
US7788606B2 (en) * 2004-06-14 2010-08-31 Sas Institute Inc. Computer-implemented system and method for defining graphics primitives
US7515752B2 (en) 2004-08-27 2009-04-07 Corel Corporation Sketch recognition and enhancement
WO2006090406A1 (en) * 2005-02-23 2006-08-31 Hewlett-Packard Development Company, L.P. System, method, and apparatus for automatic segmentation and analysis of ink stream
US8972902B2 (en) 2008-08-22 2015-03-03 Northrop Grumman Systems Corporation Compound gesture recognition
US7693773B2 (en) * 2006-10-13 2010-04-06 Morgan Stanley Interactive user interface for displaying information related to publicly traded securities
US8645853B2 (en) * 2006-11-03 2014-02-04 Business Objects Software Ltd. Displaying visualizations linked to one or more data source queries
US20080301571A1 (en) * 2007-01-18 2008-12-04 Herzog Robert M System and Method for Administration and Documentation of Health Care Services
US7737979B2 (en) 2007-02-12 2010-06-15 Microsoft Corporation Animated transitions for data visualization
US20080231926A1 (en) 2007-03-19 2008-09-25 Klug Michael A Systems and Methods for Updating Dynamic Three-Dimensional Displays with User Input
US8082274B2 (en) 2007-06-28 2011-12-20 Microsoft Corporation Scheduling application allowing freeform data entry
US20090278848A1 (en) 2008-05-12 2009-11-12 Microsoft Corporation Drawing familiar graphs while system determines suitable form
US20100031202A1 (en) 2008-08-04 2010-02-04 Microsoft Corporation User-defined gesture set for surface computing
US8489999B2 (en) 2008-09-02 2013-07-16 Accenture Global Services Limited Shared user interface surface system
JP4752921B2 (ja) * 2009-01-28 2011-08-17 ソニー株式会社 情報処理装置、アニメーション付加方法、及びプログラム
JP5343676B2 (ja) * 2009-04-08 2013-11-13 ソニー株式会社 画像処理装置、画像処理方法およびコンピュータプログラム
US20100325564A1 (en) 2009-06-19 2010-12-23 Microsoft Corporation Charts in virtual environments
EP2524323A4 (en) * 2010-01-15 2016-01-20 Digimarc Corp METHOD AND ARRANGEMENTS RELATED TO SIGNALING ART
US8766982B2 (en) 2010-01-19 2014-07-01 Disney Enterprises, Inc. Vectorization of line drawings using global topology and storing in hybrid form
US9235268B2 (en) 2010-04-09 2016-01-12 Nokia Technologies Oy Method and apparatus for generating a virtual interactive workspace
US20110261060A1 (en) * 2010-04-23 2011-10-27 Markus Waibel Drawing method and computer program
JP2012003689A (ja) * 2010-06-21 2012-01-05 Sony Corp 情報処理装置、情報処理方法およびプログラム
US20120011465A1 (en) 2010-07-06 2012-01-12 Marcelo Amaral Rezende Digital whiteboard system
US8823711B2 (en) * 2010-12-17 2014-09-02 Microsoft Corporation Incremental creation of a graphical object to visually represent a data set
US8994732B2 (en) 2011-03-07 2015-03-31 Microsoft Corporation Integration of sketch-based interaction and computer data analysis
JP5741079B2 (ja) * 2011-03-09 2015-07-01 セイコーエプソン株式会社 画像生成装置およびプロジェクター
CA2836813C (en) 2011-05-23 2020-10-27 Jeffrey Jon REUSCHEL Digital whiteboard collaboration apparatuses, methods and systems
US8738543B2 (en) * 2011-06-21 2014-05-27 Ebay Inc. Business intelligence based social network with virtual data-visualization cards
US9153062B2 (en) * 2012-02-29 2015-10-06 Yale University Systems and methods for sketching and imaging
US9123145B2 (en) * 2012-06-15 2015-09-01 Disney Enterprises, Inc. Temporal noise control for sketchy animation
US9563674B2 (en) * 2012-08-20 2017-02-07 Microsoft Technology Licensing, Llc Data exploration user interface
US9665259B2 (en) 2013-07-12 2017-05-30 Microsoft Technology Licensing, Llc Interactive digital displays

Also Published As

Publication number Publication date
AR099533A1 (es) 2016-08-03
CN105074640A (zh) 2015-11-18
EP2946276A1 (en) 2015-11-25
US10809865B2 (en) 2020-10-20
US20140201682A1 (en) 2014-07-17
CN105074640B (zh) 2019-03-08
WO2014113341A1 (en) 2014-07-24
TW201439877A (zh) 2014-10-16

Similar Documents

Publication Publication Date Title
TWI606384B (zh) 透過自由形式描繪之吸引人的顯示
EP1784709B1 (en) Multi-planar three-dimensional user interface
US10699063B2 (en) Authoring content for digital books
US7565608B2 (en) Animation on object user interface
JP5372518B2 (ja) 相互対話的な電子的にシミュレートされた環境の音声および映像制御
AU2013347973B2 (en) System and method for managing digital content items
JP6050347B2 (ja) コンテキストベースメニュー用ランチャ
US9779097B2 (en) Platform agnostic UI/UX and human interaction paradigm
JP5752708B2 (ja) 電子テキスト処理及び表示
US8225208B2 (en) Interactive frames for images and videos displayed in a presentation application
US20110035692A1 (en) Scalable Architecture for Dynamic Visualization of Multimedia Information
US20160267700A1 (en) Generating Motion Data Stories
JP5862103B2 (ja) 電子黒板装置、画面表示方法およびプログラム
KR20200121357A (ko) 물리적 조작을 사용한 오브젝트 생성
KR20200122362A (ko) 혼합 현실 시스템들을 위한 브라우저
US20130100133A1 (en) Methods and systems for generating a dynamic multimodal and multidimensional presentation
US20220261088A1 (en) Artificial reality platforms and controls
JP6723749B2 (ja) 画像表示装置、画像表示方法、およびプログラム
Godbold Mastering UI Development with Unity: An in-depth guide to developing engaging user interfaces with Unity 5, Unity 2017, and Unity 2018
KR102648288B1 (ko) 편집 환경에서 다수의 미디어 요소들을 갖는 미디어 콘텐츠를 제시하기 위한 방법들 및 시스템들
US20230393701A1 (en) Techniques for generating immersive spaces that enable inspirational materials to be collected, discovered, and envisioned
Finkelstein et al. Flash Professional CS5 and Flash Catalyst CS5 For Dummies

Legal Events

Date Code Title Description
MM4A Annulment or lapse of patent due to non-payment of fees