TW469397B - A data processor controlled display system with audio identifiers for overlapping windows in an interactive graphical user interface - Google Patents

Description

:9 397 A7 ----------B7_____ 五、發明說明（） 發明頜娀：_ 本發明係有關於一種使用者互動式電腦支援之顯示技 術’並且特別是指有關於具使用者親和性，以及可提供給 互動式使用者一種易於使用的介面環境之圖形使用者介 面。 發明背景：_ 1990年代起十年間的代表作’即在於由以資料處理產 業噪起所堪動，而對於消費性電子產業方面之技術革命β 這種進步甚至更進—步地由於消費者與企業界在這兩年 間的廣泛地介入網際網路，因而加速發展。由於這些變 化’造成如同幾乎是在工業化世界中所有的人類作業觀點 均需要與電腦間的人機介面β故在此產生讓電腦導向活動 可實際地被世界上大部分的人所接取到之需求，而彼等甚 而在數年前，仍為電腦文盲或最多是對電腦感到冷漠。為 讓廣大的電腦支援市場領域可繼續成長以及具有商業性 生產力，從而亟需提供對於電腦感到冷漠之消費者大眾一 (請先閲讀背面之注意事項再填寫本頁) 面 介 腦 電 之 與 參 其 供 可 箱 經濟部智慧財產局員工消费合作社印製 資 與 能 功 的 用 享 可 者 用 使 式 動 互 大 強 趄 曰 腦 電 著 隨 之百 用數 可於 者至 用甚 使個 著十 隨數 伴有 即若 ， 倘 加， 增然 的當 能。 功异 而上 然性 。 樣 多多 增與 趨量 日數 亦窗 源視 之視 素的 元疊 諸重 等相 項互 圖。一 如了藉 有雜係 含複式 且更方 並得示 中.變頃 其面其 而介而 ，讓’ 面會 介就置 用這安 可，來 個料疊 是 像 如 例 種 货堆利 式以專 動是國 互窗美 頁 3 第 本紙張尺度適用中困國家標準（CNS)A4規格（210 * 297公迓） 4 69 39 7 Α7 ---- Β7 經濟部智慧財產局貝工消费合作社印製 五、發明說明（） 5,241，656文件内所描述的深度緩衝器之多階式顯示或視 框緩衝器來加以控制。 事實上*該多階式視窗層級早已廣泛應用，而常常置 放於多個桌面會期水平之中。一個桌面會期經常係由數個 重疊視窗的層級所组成，其中該深度視框緩衝器可對其加 以索引與追蹤。此外，設立視窗介面以處理額外的層級视 窗之桌面會期，彼等常為未作用並且將其儲存在視框緩衝 器之外’不過若當該會期既經啟動時，亦可以互動方式將 彼等移進或是移離視框緩衝器。經由這種複雜安排，很明 顯地在任何給定時間上，大量的視窗將會整個或是部分地 被重疊於其上之視窗所掩蓋或隱藏。 當最初發展視窗環境時，互動式使用者僅需應付大約 數個視窗即可a從那個時候開始，即習慣於對每個視窗標 示一個標題區’其中含有視窗名稱或抬頭β當視窗數目不 多時’即使是有部分重疊，使用者仍可很簡易地利用游標 來移動視窗，以便讓標題區顯示出來並且辨識該視窗，而 今曰’對於如上述般大量且複雜階層架構之視窗，常常需 耗費使用者冗長且麻煩的工作來搬移或牽動目前己頬示 視窗’以便將標題區顯示出來足夠大小藉以辨識各個視 窗。本發明即可提供一種實作方法以簡化該等視窗辨識問 題》 發明概诚；： , 本發明可提供一種用於對複雜的視窗階層架構圈形使 第4肓 ί請先閱讀背面之注意事項再填寫本頁) 裝 丨I .1丨訂.！1丨1·線 本紙張尺度適用中國國家標準（CNS)A4規格（210 * 297公釐） 397 469 397 A7 B7 經濟部智慧財產局貝工消费合作社印製 五、發明說明（ 用者介面之諸視窗，以互動方式進行視窗處理與排序的使 用者親和性顯示介面系統。該系統可提供視窗階層式儲存 功能，可按選定之次序重鲞顯示，而同時該等多個视窗仍 為部分可見。在顯示螢幕上，亦提供有用以顯示多個該等 部分重疊視窗之裝置。並且對於每一個該等視窗均提供並 存有一不同之音效辨識器。亦提供有用以對例如像游標的 指示裝置予以在顯示螢幕上移動與定位之裝置，併同回應 於該指示裝置之裝置’以此而為各個該指示裝置所進入到 的視窗聲音知會其音效辨識器，該指示裝置可為使用者控 制式游標，觸控筆甚或是觸感式顯示系統的手指。該音效 辨識器可簡易地採用視窗標題區内之名稱。 蹰示簡單說明： 藉由參酌隨附圖示併同規格文件，可更瞭解本發明與 其各式應用目的，並且對於熟捻本項技藝之人士來說，其 優點即更加明顯易見，而其中： 、 第i圖為-由互動式資料處理器所控制的襄示系統之區 塊圖，其中包括-足以實作本發明之音效視窗辨 識舆聲音知會功能的中央處理單元； 第2圖為—顯示勞幕之輪廓圏，藉以說明用來敘述本發明 有關位於堆4内各個視窗之音效辨識的视窗堆吞 或階層’以及顯示該項位於某視窗内的指示裝 置’即游磕》 第3圖為輿第2圖相同的類示勞幕輪廓困，其中將該游標 第5頁 私紙張尺度適用中國國家標毕（CNS)A4規格C 297公·5" (請先閲讀背面之注意事項再填寫本頁) i ! I--I I ^----1 線 經濟部智慧財產局員工消t合作社印製 A7 B7______ 五、發明說明（） 移至另外-個視窗内； 第4圖為與第 3阁相同的顯示螢幕輪廓圖，其中再將該游 標移至S At 王另外一個視窗内； 第5圖為~將久加 +偃1如第3圖中諸視窗關連到其預存音效辨 識器的傲左t J傅存列表之輪廓概念圖； 第6圖為—奎； 到設定本發明之音效辨識系統各項步纸 的裎式波程圖；以及 第7圖為執行彼龙 吸辛如第6®程式内各設定步驟之說明性访 程圓。 、 圖號對照說明： 10 CPU 12 系統匯流排 14 RAM 16 ROM 18 I/O介面卡 20 磁碟儲存裝置 22 使用者介面介面卡 24 鍵盤 26 滑氣 28 味J，八 32 軌跡球 34 通訊介面卡 36 顧示介面卡 38 顯示螢幕 39 視框緩衝器 40 應用程式 41 作業系統 57 游標 50,5 1,52,5 3,54,55,56 視窗 發明詳細說明： . 現參考第1圖，其中顯示一種資料處理系統，可作為 第6頁 本紙張尺度適用中0國家標準（CNS)A4規格（210 X 297公« ) (琦先閱讀背面之;i意事項再#鸾本頁> --------訂·！----線 469 397 A7 B7 五、發明說明（） 經濟部智慧財產局員工消费合作杜印製 應用在控制該根據本發明而處理之視窗堆疊階層的電腦 控制式顯示終端機，並且當該指示裝置進入該等視窗之 後，用以提供視窗的音效儲存與聲音知會功能。在此提供 有例如像IBM公司所銷售之PC用微處理器，或是如ibm 公司所销售之RISC系統/6000(RS/600〇)系列工作站（該 RISC/6000為IBM公司之註冊商標）的中央處理單元 (CPU) 1 0 ’並且經由系統匯流排丨2而連接到各種其他的元 件。作業系統41執行於該cpu 1〇之上，提供控制功能並 用以協調如第1圖中各種元件的運作。而該作業系統41， 可為例如IBM公司所銪售之Αϊχ 600()作業系統或〇s/2 作業系統（該AIX 6000與OS/2作業系統俱為ibm公司之 狂冊商標）' 微軟的視窗98或視窗NT，以及UNIX與AIX 作業系統等等各種商業販售之視窗型態作業系統其中之 一。而由該系統所控制之應用程式4〇，可被搬移進入或 離開其主記憶體「隨機存取記憶鳢AM)」1 4。這些程式 中包括有文中後續將說明並可提供視窗之音效辨識器的 本發明程式《 —「唯讀記憶體（R〇N1)」1 6經由匯流排12 而連接於CPU 1 0 ’其中並包括控制各項電腦基本功能的 「基本輸入輸出系統（BIOS)」》RAM 14、I/O介面卡18以 及通訊介面卡34也連接於該系統匯流排12〇應注意到包 含有作業系統41與應用程式40的軟體元件，會被載入到 RAM 14，其中該RAM為電腦系統之主記憶體。I/O介面 卡18為可與磁碟‘存裝置2〇，即硬碟，互通的小型電腦 系統介面卡。通訊介面卡3 4則將匯流排1 2舆外部網路互 (請先閲讀背面之注意^項再填寫本頁) 裝

n I n n I I I « I I n I 線 本紙張尺度適用中國國家標準（CNS)A4規格（210 * 297公龙> 469 397 A7 B7 經濟部智慧財產局員工消费合作社印數 五、發明說明（) 相連接，讓該資料處理系統能夠與其他類似系統通訊。在 今日之系統内，可將視窗型態的資料由例如像網際網路般 網路裡其他的電腦機站傳輸而來。 I/O裝置也透過使用者介面介面卡22以及顯示介面卡 36而連接到系統匯流排1 2。鍵盤24、軌跡球32、滑氣26 以及味1队2 8所有均經由該使用者介面介面卡2 2連接到匿 流排12»透過該等輸入裝置，即可實作出涉及到本發明 顯示之使用者介面功能。顯示介面卡36内包括一视框緩 衝器39’此為一足可持握顯示螢幕38上各個像素表示之 儲存裝置。影像可存放在視框緩衝器39内，以便透過諸 等例如數位類比轉換器（未示出）之元件，而將其顯示在跃 視器38上。正如前文所述’為了容納重疊與隱藏视窗之 階層’該視框緩衝器3 9應具備有深度緩衝器，例如像是 美國專利5,241，656文件内所描述的深度緩衝器β透過上 文的I/O裝置’使用者可藉由鍵盤24、軌跡球32、滑鼠 26以輸入資訊給系統，並且經由喇叭28與顯示器38而 自系統接收輸出資訊。當然，可藉喇叭2 8而將指示裝置 或游標所進入到的各視窗發出聲音以告知該互動使用 者。 茲藉由如第2至4®内的顯示螢幕，來對本發明之— 簡易範例進行說明。當說明該等螢幕影像時，應瞭解其可 為如第1圖系統的RAM 1 4裡在傳統性視窗作業系統内的 各種儲存影像與文字之產生程式，該作業系統概圖顯示於 第1圓内的作業系統41。而如第2至4圖内之顯示勞幕

*8X 本紙張尺度適用中國圉家標準（CNS)A4規格（210 X 297公贫） (請先閱讀背面之>i意事項再填寫本頁> -----I--訂.！ -----緩 1 . 469 397 經濟部智慧財產局員工消费合作社印製 A7 ________B7_ 五、發明說明（） 則係於第1圖内呈現給觀看者的顯示監視器3 8。根據傳 統性的技術，使用者可透過例如像1圖中滑鼠2 6的傳兢 I/O裝置而以互動方式來控制該勞幕，該傳統1/〇裝置經 由使用者介面介面卡22來呼叫RAM 14内的程式併同該 作業系統41，而在顯示介面卡36的視框緩衝器39内產 生影像，藉以控制該監視器38的顯示作業》如前文所示， 即透過喇< 28播送某特定視窗辨識之音效性聲音知會。 現參考第2圖的螢幕上之重疊視窗階層或堆疊，多數 為部分重疊。為簡化說明起見’有些物件或圖像與文字係 自下層視窗所移除，並且僅顯示了上層視窗50的部分圖 像。該堆疊裡其餘的部分可見之視窗為51、52、53、54、 55和56。這些視窗每一個可藉視覺方式依照其位於視窗 頂端標題區内的名稱而加以辨識<根據本發明，視窗名稱 係紀錄於電腦之音效系統内，並且儲存於如第5圖之列表 6 0裡，其中，各個視窗5 0到5 6的名稱是以所對應的多 個音效性聲音知會項目61來存放，而當游標57進入各個 視窗開始時，即產生音效性聲音知會《因此，如第2圖， 由於游標57係位於視窗53内’故當該游標進入到該视窗 剛開始的時候，該音效性聲音知會為「Freeiance Heip^ 而接著如第3圖，當游標57進入到視窗52剛開始的時 候’該音效性聲音知會即成為「Control Panel」，然後如 第4囷，當游標57進入到視窗56剛開始的時候，該音致 性聲音知會即成為·「Untitled Paint」> 現參考第6圓’來說明一根據本發明而用以每次該游 I I I ! -----I--訂---------線 (請先Μ讀背面之注意事項具填寫本頁> 4 69 397 A7 經濟部智慧財產局員工消t合作社印製 B7 五、發明說明（) 標進入視窗隋層裡的視窗時，可藉動態方式製作視窗名稱 之音效性聲音知會的程式實作程序a而由第6圖中程序所 產生的程式副程序，可將有關於由第2至5圖中所敘述的 作業予以實際完成。在第6圖中的流程圖裡，如步驟71 藉由任何一種例如Windows 95、OS/2以及Unix或是AIX 的Motif等等可用以管理視窗階層作業系統，來設立一基 本型態的作業系統。接著，對於視窗階層内每一個視窗進 行處理’以紀錄並且儲存其聲音辨識器，如步驟72。為 簡化起見，該辨識器可為出現於個別視窗其上標題方塊内 的名稱。然後建立一程序以便對各個辨識器製作—錄製之 音效性聲音知會，如步驟73 a如步驟74處，藉一處理程 序來利用游標所進入的某視窗，其聲音辨識器之音效性聲 音知會，來回應於該游標進入該視窗的動作。該聲音知會 源自於一可加以更新之列表，並且係為其所支援，而如步 驟75該表内列有各聲音辨識器》 經描述並說明過該基本程式後，現討論第7圖中的簡 易作業流程圖，其中頚示該程式是如何對多個視窗而執行 個別辨識器之音效性聲音知會β首先，如步鄉，顯示 有一視窗滑層，其中多個視窗為部分重疊與部分可見。該 游標或其他指示裝置的位置係由視窗作業系統所利用到 有關本項用途之既有程序所追蹤=在步驟81處作一決 定，是否該游標已進入一新的視窗"如為否，則將該程序 返還到步驟82，且繼續追蹤該游標。如為是，則如步 驟84在第5圖内的列表中査看所進入到的視窗辨識器， 第10頁 本紙張尺度適用中0國家標準（CNS)A4規格（210 X 297公芨） -----1------- ^--------訂 i n n —1 -I I C請先M讀背面之注意事項再填窝本頁) 4 69 397 A7 B7 五、發明說明（） 並且如步驟85發出該音效性辨識器之聲音知會。然後， 在步驟86處作一決定，該會期是否已結束。如為是’則 結束該會期。如為否，則該程序返回到步驟82處，並且 如上述般繼續追跋該游標。 當彼等視窗之文字名稱藉由一般傳統可用來作為直接 讀取該文字内碼而將其轉換為音效輸出的系統，而直接轉 換成語音輸出時，即可獲得最佳之結果。這種文字轉為語 音輸出系統，係描述於 C 〇 k e r e t a 1.之美國專利 3,704,345、1：461玨1,之美國專利4,398,058 以及八1^〇乂6131. 之美國專利4,27 8，83 8内。經由該等系統，即可讀取各個 視窗内的標題區或其他文字辨識器，並且當啟動某一視窗 時’神奇地予以轉換。另一方面，如有需要亦可讀取第5 圖列表中的文字，且轉換成語音輸出。 本發明之一較佳具體實施例係當成該作業系統中的副 程式，在電腦作業過程中，由常駐於第1圖裡RAM14内 的諸程式步驟或是指令所構成。可將該程式指令存放於另 外一個例如像是磁碟機20的可讀取媒體，或者是用於 CD-ROM電腦輸入的光碟或用於軟碟機電腦輸入的軟碟 之可柚取式記憶體上，一直等到由電腦系統需要叫用。此 外*在使用本發明之系統前，該程式指令亦可存放於另外 一台電腦的記憶體上，而當本發明之使用者有需要而叫用 時’可透過區域網路（LAN)或是例如像網際網路般的廣域 網路（WAN)而傳送籩來。 對於熟检本項技藝之人士應知悉該等控制本發明之程

第HIT 本紙張尺度適用中画國家標準（CNS)A4規格（210 X 297公釐） (請先Μ讀背面之注意事項再填寫本頁) 裝·！ III 訂i I — 11 -線 經濟部智慧財產局貝工消費合作杜印製 4 69 397 A7 B7 五、發明說明（ 序，可為各種電腦可讀取媒體之型式而銷售配送。 數項較佳之具體實施例雖於前文中予以顯示並描述， 然應明暸實可對其進行多種變化與修飾，而仍不悖離隨附 申請專利範圍之範疇與宗旨。 (請先閱讀背面之注意事項再填寫本頁) 經濟部智慧財產局貝工消费合作社印製 第121 本紙張尺度適用中國國家標準（CNS)A4規格（210 X 297公釐）

Claims (1)

1. 經濟部智慧財產局員工消費合作社印製 69397 § D8、申請專利範圍 1. 一種電腦控制互動式顯示系統，其至少包括有： 多個用以在顯示器螢幕上顯示一視窗喈層之裝置， 而其中該視窗階層彼此互相重疊，且該多個視窗係部分 可見， 用以對該视窗階層内每個視窗提供一聲音辨識器之 裝置， 用以對該顯示器螢幕上的指示裝置加以定位之裝 置，以及 回應於該指示裝置，以便針對每個該指示裝置所進 入到的視窗而發出聲音辨識器知會之裝置。 2. 如申請專利範園第1項所述之顯示系統，其中上述之指 示裝置係一使用者控制游標。 3 .如申請專利範圍第1項所述之顯示系統，其中上述之指 示裝置為一觸控筆3 4. 如申請專利範圍第1項所述之顯示系統，其中上述之聲 音辨識器包括至少部份的出現於視窗標題區内之視窗 名稱。 5. —種用以於電腦控制互動式顯示而部分地辨識隱藏視 •窗的方法，其中包括： 在顯示螢幕上顯示一彼此互相重疊之視窗睹層，而 第13頁 (請先閱讀背面之注意事項再填寫本頁) --I Ϊ l· I I — 訂.------I I 本紙張尺度適用中國國家標準（CNS)A4規格（210 X 297公釐） 4 9 3 9 5 A8B8C8D8 六、申請專利範圍 且該多個視窗係屬部分可見* 對該視窗階層内每個視窗提供一聲音辨識器， 對該顯示器螢幕上的指示裝置加以'定位，以及 回應於該指示裝置，針對.每·個該指示裝置所進入到 的視窗而發出聲音辨識器知會。 6.如申請專利範圍第5項所述之方法，其中上迷之指示裝 置定位作業，係經由一使用者控制游標而執行。 •如_請專利範圍第5項所述之方法’其中上述之指示裝 置定位作業，係經由一觸控筆而執行， 8.如令請專利範圍第5項所述之银中上述之聲 音辨識器包括至少部份的出現於視窗區内之視窗 名稱。 9. 一種電腦控制顯示程式，其具有包含於電腦可讀取媒體 上並用來作為互動方式控制一顯示系統的程式碼’該顯 示系統包括有： 多個用以在顯示器螢幕上顯示一視窗階層之裝置， 而其中該視窗階層彼此互相重疊，且該多個視窗係屬部 分可見， ' 用以對該視窗榷層内每個視窗提供一聲音辨識器之 裝置| 第UT 本紙張尺度適用t國國家標準（CNS)A4規格（210 « 297公釐） (請先閱讀背面之注意事項再填寫本頁) -丨裝 訂---------線 經濟部智慧財產局員工消f合作社印製 A8B8C8D8 4.6 9 39 7 六、申請專利範圍 用以對該顯示器螢幕上的指示裝置加以定位之裝 置，以及 回應於該指示裝置.以便針對每個該指示裝置所進 入到的視窗而發出聲音辨識器知會之裝置^ 1〇·如申請專利範圍第9項所述之電腦程式，其中上述之 指示裝置係一使用者控制游標β Π.如申請專利範圍第9項所述之電腦程式，其中上述之 指示.裝置係一觸控筆。 12.如申請專利範圍第9項所述之電腦程式，其中上迷之 聲音辨識器包括至少部份的出現於視窗標題區内之視 窗名稱》 (請先閱讀背面之注意ί項再填窝本頁> 裝-----r---訂---------線s 準 標 家 國 國 Φ* 用 適 度 張 紙- U 經濟部智慧財產局員工消費合作社印製 規 4 )Α s)