TWI504270B - 視訊通信即時螢幕互動裝置、方法及系統 - Google Patents

Description

視訊通信即時螢幕互動裝置、方法及系統

本發明係有關於視訊通信領域，特別是有關於視訊通信即時螢幕互動裝置、方法及系統。

3G通信隨著科技發展，提供人們許多生活上的便利。例如：遠距離視訊通信，讓使用者彼此之間能以通信裝置透過通信系統所提供之影像/聲音的傳送服務而看到彼此，這也使得“通信”不再僅是以聲音作為通信雙方唯一的溝通管道，更是輔以影像作為通信雙方表情語言的呈現。

雖然，視訊通信可以同時傳送影像與聲音而讓通話雙方如同面對面交談，但是當通話雙方須針對一份相同資料加以討論修改時，則目前的視訊通信功能略顯不足。例如：在視訊通信中，當A欲告知B如何在地圖上走到目的地時，A只能邊指著地圖邊攝影傳送給B，A並無法以電子地圖(或地圖圖檔影像)即時指示B所應走的路徑。又例如：當A與B欲一起在視訊通信中完成一份工作，A與B並無法在相同一份文件(例如：電子檔文件)同時編輯。

有鑑於上述視訊通信之不足，本發明提供一種視訊通信即時螢幕互動裝置、方法及系統，可改進習知視訊通信之功能。

本發明之目的之一，係藉由螢幕的即時互動以增加視訊通信中通信雙方的資訊交流。

本發明揭露一種通信設備，用於視訊通信即時螢幕互動操作，其包括：一視訊通信模組，包括：一影音輸出轉換裝置，依據一聲音輸入與一視訊輸入產生一第一影音串流；及一通信裝置，傳送此第一影音串流與接收一第二影音串流；一聲音擷取模組，提供一第一聲音信號成為此聲音輸入；一輸入介面，接受一使用者的操作產生至少一操作命令；一處理器，依據此第二影音串流或/與此至少一操作命令產生一畫面；以及一影像擷取模組，包括：一攝像裝置，以攝影方式提供此視訊輸入；一錄像裝置，依據此畫面提供此視訊輸入；及一切換裝置，依據此至少一操作命令選擇此攝像裝置與此錄像裝置之一提供此視訊輸入。

前述之通信設備，其中此處理器是執行一程式並依據此至少一操作命令產生此畫面。

前述之通信設備，其中此聲音擷取模組包括一麥克風，且此處理器依據此第二影音串流產生包括一第二聲音信號至一揚聲器。

前述之通信設備，其中此輸入介面包括一觸控螢幕，且此畫面顯示於此觸控螢幕上。

本發明揭露一種通信方法，用於視訊通信即時螢幕互動操作，其包括：依據一聲音輸入與一視訊輸入產生一第一影音串流；傳送此第一影音串流與接收一第二影音串流；提供一第一聲音信號成為此聲音輸入；接受一使用者的操作產生至少一操作命令；依據此第二影音串流或/與此至少一操作命令產生一畫面；以及依據此至少一操作命令選擇一攝像裝置攝影或依據此畫面提供此視訊輸入。

前述之通信方法，其中此畫面是由一處理器執行一程式並依據此至少一操作命令所產生。

前述之通信方法，其中此第一聲音信號是由一麥克風所擷取提供，且一處理器依據此第二影音串流產生包括一第二聲音信號至一揚聲器。

前述之通信方法，其中此使用者透過一輸入介面的操作產生此至少一操作命令，此輸入介面包括一觸控螢幕，且此畫面顯示於此觸控螢幕上。

本發明揭露一種通信系統，用於視訊通信即時螢幕互動操作，其包括：一通信網路，提供一第一影音串流與一第二影音串流的傳輸；一第一通信設備，包括：一第一視訊通信模組，包括：一第一影音輸出轉換裝置，依據一第一聲音輸入與一第一視訊輸入產生此第一影音串流；及一第一通信裝置，透過此通信網路傳送此第一影音串流與接收此第二影音串流；一第一聲音擷取模組，提供一第一聲音信號成為此第一聲音輸入；一第一輸入介面，接受一使用者的操作產生至少一操作命令；一第一處理器，依據此第二影音串流或/與此至少一操作命令產生一第一畫面；及一第一影像擷取模組，包括：一攝像裝置，以攝影方式提供此第一視訊輸入；一錄像裝置，依據此第一畫面提供此第一視訊輸入；及一切換裝置，依據此至少一操作命令選擇此攝像裝置與此錄像裝置之一提供此第一視訊輸入；以及一第二通信設備，包括：一第二視訊通信模組，包括：一第二影音輸出轉換裝置，依據一第二聲音輸入與一第二視訊輸入產生此第二影音串流；及一第二通信裝置，透過此通信網路傳送此第二影音串流與接收此第一影音串流；一第二聲音擷取模組，提供一第二聲音信號成為此第二聲音輸入；一第二處理器，依據此第一影音串流產生一第二畫面；及一第二影像擷取模組，以攝影方式提供此第二視訊輸入。

前述之通信系統，其中此第一處理器是執行一程式並依據此至少一操作命令產生此第一畫面。

前述之通信系統，其中此第一聲音擷取模組包括一第一麥克風，且此第一處理器依據此第二影音串流產生包括一第三聲音信號至一第一揚聲器，此第二聲音擷取模組包括一第二麥克風，且此第二處理器依據此第一影音串流產生包括一第四聲音信號至一第二揚聲器。

前述之通信系統，其中此第一輸入介面包括一觸控螢幕，且此第一畫面顯示於此觸控螢幕上。

本發明亦揭露一種視訊通信即時螢幕互動方法，包括：切換一第一視訊資料路徑成一第二視訊資料路徑；藉由此第二視訊資料路徑擷取一第一螢幕的一第一操作顯示資料成一第一互動資料；轉換此第一互動資料成一第一視訊通信信號；以及送出此第一視訊通信信號，藉此，在一視訊通信中之一第二螢幕顯示此第一操作顯示資料。

前述之視訊通信即時螢幕互動方法，其中此第一螢幕包括一第一觸控螢幕。

前述之視訊通信即時螢幕互動方法，更包括：在該第一視訊通信信號與/或該第二視訊通信信號加入一同步資訊，其中該第一操作顯示資料與/或該第二操作顯示資料是依據該同步資訊來顯示。

前述之視訊通信即時螢幕互動方法，更包括：切換一第三視訊資料路徑成一第四視訊資料路徑；藉由此第四視訊資料路徑擷取此第二螢幕的一第二操作顯示資料成一第二互動資料，其中此第二操作顯示資料包括此第一操作顯示資料；轉換此第二互動資料成一第二視訊通信信號；以及送出此第二視訊通信信號，藉此，在此視訊通信中之此第一螢幕顯示此第二操作顯示資料。

前述之視訊通信即時螢幕互動方法，其中此第二螢幕包括一第二觸控螢幕。

本發明亦揭露一種視訊通信即時螢幕互動裝置，包括：一處理器，擷取一螢幕的一操作顯示資料成一互動資料，並將此互動資料轉換成一視訊通信信號送出，藉此，在一視訊通信中之一另一螢幕顯示此操作顯示資料。

前述之視訊通信即時螢幕互動裝置，其中此處理器包括一切換器以切換一第一視訊資料路徑與一第二視訊資料路徑，其中此處理器藉由此第二視訊資料路徑擷取此操作顯示資料。

前述之視訊通信即時螢幕互動裝置，其中此螢幕包括一觸控螢幕。

前述之視訊通信即時螢幕互動裝置，更包括一控制裝置用以前置處理此操作顯示資料。

前述之視訊通信即時螢幕互動裝置，更包括一介面裝置用以連接一麥克風與一揚聲器至此處理器。

前述之視訊通信即時螢幕互動裝置，更包括一收發裝置，其中此處理器藉由此收發裝置送出此視訊通信信號。

本發明亦揭露一種視訊通信即時螢幕互動系統，包括：一第一通信設備，包括：一第一螢幕；一第一處理器，擷取此第一螢幕的一第一操作顯示資料成一第一互動資料，並將此第一互動資料轉換成一第一視訊通信信號；及一第一收發裝置，送出此第一視訊通信信號，藉此，在一視訊通信中之一第二通信設備之一第二螢幕顯示此第一操作顯示資料；以及此第二通信設備，包括：此第二螢幕；一第二處理器，擷取此第二螢幕的一第二操作顯示資料成一第二互動資料，並將此第二互動資料轉換成一第二視訊通信信號，其中此第二操作顯示資料包括此第一操作顯示資料；及一第二收發裝置，送出此第二視訊通信信號，藉此，在此視訊通信中之此第一通信設備之此第一螢幕顯示此第二操作顯示資料。

前述之視訊通信即時螢幕互動系統，其中此第一處理器包括一第一切換器以切換一第一視訊資料路徑與一第二視訊資料路徑，其中此第一處理器藉由此第二視訊資料路徑擷取此第一操作顯示資料，此第二處理器包括一第二切換器以切換一第三視訊資料路徑與一第四視訊資料路徑，其中此第二處理器係藉由此第四視訊資料路徑擷取此第二操作顯示資料。

前述之視訊通信即時螢幕互動系統，其中此第一螢幕包括一第一觸控螢幕，此第二螢幕包括一第二觸控螢幕。

前述之視訊通信即時螢幕互動系統，其中此第一通信設備包括一第一控制裝置用以前置處理此第一操作顯示資料，此第二通信設備包括一第二控制裝置用以前置處理此第二操作顯示資料。

前述之視訊通信即時螢幕互動系統，其中此第一通信設備包括一第一介面裝置用以連接一第一麥克風與一第一揚聲器至此第一處理器，此第二通信設備包括一第二介面裝置用以連接一第二麥克風與一第二揚聲器至此第二處理器。

前述之視訊通信即時螢幕互動系統，其中該第一視訊通信信號與/或該第二視訊通信信號包括一同步資訊，其中該第一操作顯示資料與/或該第二操作顯示資料是依據該同步資訊來顯示。

本發明將詳細描述一些實施例如下。然而，除了所揭露之實施例外，本發明亦可以廣泛地運用在其他之實施例施行。本發明之範圍並不受該些實施例之限定，乃以其後之申請專利範圍為準。而為提供更清楚之描述及使熟悉該項技藝者能理解本發明之發明內容，圖示內各部分並沒有依照其相對之尺寸而繪圖，某些尺寸與其他相關尺度之比例會被突顯而顯得誇張，且不相關之細節部分亦未完全繪出，以求圖示之簡潔。

請參照第一圖，其為本發明之一較佳實施設備10之方塊圖，其用於視訊通信即時螢幕互動操作，使得視訊通信中的B可以即時看到視訊通信中的A對螢幕操作的顯示。一視訊通信模組110，接收一聲音輸入與一視訊輸入，並輸出一第一影音串流(video streaming)。其中，視訊通信模組110包括一影音輸出轉換裝置112與一通信裝置114。影音輸出轉換裝置112係依據此聲音輸入與此視訊輸入產生此第一影音串流；通信裝置114係傳送此第一影音串流與接收一第二影音串流(來自視訊通信中對方的信號，稍後說明)。一聲音擷取模組120，提供一第一聲音信號成為此聲音輸入，其中聲音擷取模組120包括一麥克風。

一輸入介面130，接受一使用者的操作產生至少一操作命令。一處理器140，依據此第二影音串流或/與此至少一操作命令在一螢幕160產生一畫面。一影像擷取模組150，提供此視訊輸入。其中影像擷取模組150包括一攝像裝置152、一錄像裝置154以及一切換裝置156。攝像裝置152係以攝影方式提供此視訊輸入，在本實施例中，其可以包括一般視訊通信裝置的攝影機；錄像裝置154則係依據此畫面提供此視訊輸入，亦即，擷取此畫面交由視訊通信模組110處理；切換裝置156係依據此至少一操作命令選擇攝像裝置152或是錄像裝置154提供此視訊輸入。此外，處理器140係依據此第二影音串流產生包括一第二聲音信號至一揚聲器170。

在本實施例中，處理器140是執行一程式並且依據此至少一操作命令產生此畫面。例如，當A與B在視訊通信過程中，A透過輸入介面130產生一操作命令使得處理器140執行此程式，將原本視訊輸入由攝像裝置152經由切換裝置156改變成錄像裝置154提供。因此，在B的螢幕上所見不再是由A攝像裝置152所拍攝之影像，而是A錄像裝置154所擷取A螢幕之畫面，藉此，當A操作改變螢幕的顯示時，B就可即時看見A螢幕上的變化。而當A若未執行此程式操作時，A與B仍可進行一般視訊通信。

此外，在本實施例中，輸入介面130可以包括一觸控螢幕，亦即，輸入介面130可以是螢幕160，且此畫面顯示於此觸控螢幕上。所述的觸控螢幕可以是一觸控面板與一顯示器的結合，觸控面板或觸控螢幕的形式可以是電阻式、電容式、表面聲波式、紅外線式或光學式，應用於本發明的觸控面板包括但不限於上列的形式。

請再參照第一圖，依據較佳實施設備10之操作方式，本發明亦提供一通信方法用於視訊通信即時螢幕互動操作，包括：影音輸出轉換裝置112依據此聲音輸入與此視訊輸入而產生此第一影音串流；通信裝置114係傳送此第一影音串流與接收此第二影音串流；聲音擷取模組120提供此第一聲音信號成為此聲音輸入，其中，聲音擷取模組120包括一麥克風；輸入介面130係接受此使用者的操作產生至少一操作命令；處理器140依據此第二影音串流或/與此至少一操作命令產生此畫面；以及切換裝置156依據此至少一操作命令選擇攝像裝置152攝影或依據此畫面(錄像裝置154擷取螢幕160之畫面)提供此視訊輸入。在本發明的一範例中，聲音輸入可以是處理器140依據上述操作命令播放產生，在該聲音輸入被播放時，亦可以同時由揚聲器170輸出。

其中，此畫面是由處理器140執行一程式並且依據此至少一操作命令所產生。且處理器140依據此第二影音串流產生此第二聲音信號至揚聲器170。在本實施例中，使用者透過輸入介面130操作產生此至少一操作命令，而輸入介面130可包括一觸控螢幕，且此畫面顯示於此觸控螢幕上。

請參照第二圖，其為本發明之一較佳實施系統20之方塊圖，其用於視訊通信即時螢幕互動操作，使得視訊通信中的B可以即時看到視訊通信中的A對螢幕操作的顯示。一通信網路280，提供一第一影音串流與一第二影音串流傳輸。一第一通信設備200A與一第二通信設備200B視訊通信。其中，一第一視訊通信模組210A接收一第一聲音輸入與一第一視訊輸入，並且輸出此第一影音串流，其中，第一視訊通信模組210A包括一第一影音輸出轉換裝置212A與一第一通信裝置214A。第一影音輸出轉換裝置212A依據此第一聲音輸入與此第一視訊輸入產生此第一影音串流；第一通信裝置214A透過通信網路280傳送第一影音串流與接收第二影音串流。一第一聲音擷取模組220A，提供一第一聲音信號成為此第一聲音輸入，其中第一聲音擷取模組220A包括一第一麥克風。

一第一輸入介面230A，係接受一使用者的操作產生至少一操作命令。一第一處理器240A，依據第二影音串流或/與此至少一操作命令產生一第一畫面於一第一螢幕260A。一第一影像擷取模組250A，提供此第一視訊輸入。其中，第一影像擷取模組250A包括一第一攝像裝置252A、一第一錄像裝置254A與一第一切換裝置256A。第一攝像裝置252A以攝影方式提供第一視訊輸入，在本實施例中，其可以包括一般視訊通信裝置的攝影機；第一錄像裝置254A則是依據畫面提供視訊輸入，亦即，擷取畫面交由第一視訊通信模組210A處理；第一切換裝置256A係依據至少一操作命令選擇第一攝像裝置252A或是第一錄像裝置254A提供第一視訊輸入。此外，第一處理器240A依據第二影音串流產生包括一第三聲音信號至一第一揚聲器270A。在本實施例中，第一輸入介面230A亦可以包括一觸控螢幕，亦即，第一輸入介面230A可以是第一螢幕160且此畫面顯示於觸控螢幕上。

一第二視訊通信模組210B係接收一第二聲音輸入與一第二視訊輸入，並輸出此第二影音串流，其中，第二視訊通信模組210B包括一第二影音輸出轉換裝置212B與一第二通信裝置214B。第二影音輸出轉換裝置212B，依據第二聲音輸入與第二視訊輸入產生第二影音串流；第二通信裝置214B，則透過通信網路280傳送與接收第二影音串流與第一影音串流。一第二聲音擷取模組220B，提供第二聲音信號成為第二聲音輸入，其中第二聲音擷取模組220B包括一第二麥克風。

一第二處理器240B，依據第一影音串流產生一第二畫面於一第二螢幕260B，當第一影音串流的第一視訊輸入來源係來自第一錄像裝置254A所提供時，則第二畫面相當於第一畫面，藉此，當第一螢幕260A上的畫面改變時，第二螢幕260B上的畫面亦隨之變動。此外，第二通信設備200B亦具有一第二影像擷取模組250B，以攝影方式提供第二視訊輸入。第二處理器240B亦依據第二影音串流產生包括一第四聲音信號至一第二揚聲器270B。

請參照第三圖，其為本發明之另一較佳實施例30之方塊圖。一第一通信設備300A與一第二通信設備300B正透過一通信網路380進行本發明之視訊通信。一處理器310，係擷取一螢幕320A的一操作顯示資料成為一互動資料，並且將互動資料轉換成一視訊通信信號送出第一通信設備300A，藉此，在此視訊通信中之另一螢幕320B顯示操作顯示資料。所述操作顯示資料可以是軌跡、圖像或其他視覺化的資訊。

其中，處理器310包括一切換器312以切換一第一視訊資料路徑(經由一般視訊通信裝置的攝影路徑，例如影像感測器362與影像處理器364)與一第二視訊資料路徑(擷取螢幕320A的操作顯示資料路徑)，其中處理器藉由第二視訊資料路徑擷取操作顯示資料。在本實施例中，螢幕320A可以是一觸控螢幕，而一控制裝置330用以前置處理操作顯示資料(例如：觸控信號的處理、觸控位置的判斷與觸控畫面的回應等)。此外，第一通信設備300A亦包括一介面裝置340用以連接一麥克風344與一揚聲器342至處理器310；且更包括一收發裝置350以送出處理器310所產生的視訊通信信號。

在本實施例中，第一通信設備300A藉由切換器312將原本第一視訊資料路徑(經由影像感測器362與影像處理器364)切換成第二視訊資料路徑(擷取螢幕320A的操作顯示資料)，因此在第二通信設備300B的螢幕320B所見的畫面不再是由影像感測器362所拍攝之影像，而是處理器310所擷取螢幕320A之畫面。藉此，當螢幕320A的顯示改變時，螢幕320B的顯示亦會即時隨之改變。例如：以一觸控筆370在螢幕320A顯示的電子地圖畫一行徑路線，則螢幕320B亦會即時顯示電子地圖與行徑路線。

請參照第四圖，其為本發明另一較佳實施系統40之方塊圖。一第一通信設備400A與一第二通信設備400B正透過一通信網路380進行本發明之視訊通信。一第一處理器410A，擷取一第一螢幕420A的一第一操作顯示資料成一第一互動資料，並將第一互動資料轉換成一第一視訊通信信號。一第一收發裝置450A，送出第一視訊通信信號，藉此，在視訊通信中之第二通信設備400B之一第二螢幕420B顯示第一操作顯示資料。一第二處理器410B，擷取第二螢幕420B的一第二操作顯示資料成一第二互動資料，並將第二互動資料轉換成一第二視訊通信信號，其中第二操作顯示資料包括第一操作顯示資料。一第二收發裝置450B，送出第二視訊通信信號，藉此，在視訊通信中之第一通信設備400A之第一螢幕420A顯示第二操作顯示資料。

其中，第一處理器410A包括一第一切換器412A以切換一第一視訊資料路徑(經由第一影像感測器462A以及第一影像處理器464A)與一第二視訊資料路徑(擷取第一螢幕420A操作顯示資料)，其中第一處理器410A藉由第二視訊資料路徑擷取第一操作顯示資料。第二處理器410B包括一第二切換器412B以切換一第三視訊資料路徑(第二影像感測器462B以及第二影像處理器464B)與一第四視訊資料路徑(擷取第二螢幕420B操作顯示資料)，其中第二處理器410B藉由第四視訊資料路徑擷取第二操作顯示資料。在本實施例中，第一螢幕420A可以是一第一觸控螢幕，第二螢幕420B亦可以是一第二觸控螢幕，而一第一、一第二控制裝置430A、430B係分別用以前置處理第一、第二操作顯示資料(例如：觸控信號處理、觸控位置判斷與觸控畫面的回應等)。此外，第一、第二通信設備400A、400B亦分別包括一第一、一第二介面裝置440A、440B用以分別連接一第一、一第二麥克風444A、444B以及一第一、一第二揚聲器442A、442B至第一、第二處理器410A、410B；且更分別包括一第一、一第二收發裝置450A、450B以分別送出第一、第二處理器410A、410B所產生的第一、第二視訊通信信號。

在本實施例中，說明了通信雙方皆可採本發明之技術，使得第一螢幕420A的顯示改變可即時顯示在第二螢幕420B，並且第二螢幕420B的顯示改變亦可即時顯示在第一螢幕420A。例如：利用一第一觸控筆470A在第一螢幕420A所顯示的電子地圖上畫一第一行徑路線(例如第一螢幕420A內的實線)，則第二螢幕420B會即時顯示電子地圖與第一行徑路線(例如第二螢幕420B內的實線)；在此同時利用一第二觸控筆470B在第二螢幕420B所顯示的電子地圖上畫一第二行徑路線(例如第二螢幕420B內的虛線)，則第一螢幕420A亦會即時顯示第二行徑路線(例如第一螢幕420A內的虛線)。

請再參照第四圖，本發明亦依其操作提供另一較佳實施方法，其包括：藉由第一切換器412A切換一第一視訊資料路徑成一第二視訊資料路徑；第一處理器410A藉第二視訊資料路徑擷取第一螢幕420A一第一操作顯示資料成一第一互動資料；第一處理器410A轉換第一互動資料成為一第一視訊通信信號；以及第一處理器410A藉由第一收發裝置450A送出第一視訊通信信號，藉此在視訊通信之第二螢幕420B顯示第一操作顯示資料。而此較佳實施方法更可以包括：藉由第二切換器412B切換一第三視訊資料路徑成為一第四視訊資料路徑；第二處理器410B藉第四視訊資料路徑擷取第二螢幕420B一第二操作顯示資料成一第二互動資料，其中第二操作顯示資料係包括第一操作顯示資料；第二處理器410B轉換第二互動資料成為一第二視訊通信信號；以及第二處理器410B藉由第一收發裝置450B送出第二視訊通信信號，藉此在此視訊通信之第一螢幕420A顯示第二操作顯示資料。而在本實施例中，第一、第二螢幕420A、420B可以是一第一、一第二觸控螢幕。

在本發明的一範例中，前述的通信設備可以應用於行動電話上，例如以第三代(3G)行動通信協定、WiMAX、LTE等等與其他行動通信設備進行影音通信。例如，前述的通信設備內建於一智慧型行動電話中，以撥打電話方式透過行動通信網路與另一行動電話進行影音通信。

在習知技術中，行動電話可以藉由行動通信網路交換並播放影音串流，例如建立影音通信的兩行動電話可以接收並播放彼此擷取到的聲音與影像。影像可以是由行動裝置的錄像裝置以攝影的方式提供，如以CCD或CMOS鏡頭攝影，而聲音可以是以行動裝置上的麥克風來擷取。此外，收到影音串流的行動電話可以在行動電話的螢幕上播放影音串流中的影像，並在揚聲器播放影音串流中的聲音。

在具有前述的通信設備的行動電話可以是在螢幕上播放影音串流中的影像以外的畫面或影像，例如螢幕是播放執行一個或多個程式的畫面或影像，而不播放影音串流中的影像，或將影音串流中的影像縮小，僅以螢幕中的部份範圍來播放。同時，使用者與被執行的程式的互動過程可以配合執行所述的程式的畫面成為被傳輸的影音串流的影像。在本發明中的一範例中，被傳輸的影音串流的影像包括但不限於執行程式的影像、與被執行程式的互動過程的呈現、攝像裝置攝影的影像的至少一者或全部的組合。

例如，當使用者A以具備前述通信設備的行動電話打電話給持有不具備前述通信裝置的行動電話的使用者B，在通話的過程中，使用者A執行一地圖軟體(如google maps)，並以觸控的方式操控地圖軟體，並可以配合語音解說。因此使用者B即使行動電話無法執行地圖軟體，也可以看到使用者A操作地圖軟體的過程以及語音解說的過程，獲得使用者A所要表達的互動資訊。

例如，使用者B可以用簡單的影像電話觀看並收聽使用者A傳來的地圖，配合語音解說，在地圖上看到使用者A畫線的過程，得知如何到達目的地的資訊。因此本發明提供了資訊接收方在不需改變現有行動電話的條件下，克服傳統僅憑語音溝通可能造成的理解困難，使得資訊提供方能結合動態影像的說明，讓資訊接收方充分理解的影音資訊。在這個過程中，資訊接收方更可以透過語音通話詢問與表達對資訊的理解程度，讓資訊提供方能即時地回應。

此外，如果使用者B的行動電話也具備前述的通信設備，則使用者A與使用者B雙方都可以看到彼此對螢幕的互動。例如，雙方都執行相同的程式或主從架構的程式，以在雙方的螢幕上顯示出相同的背景畫面，雙方都可以對背景畫面操作，例如移動(pan)、放大、縮小、旋轉或扭曲背景畫面，或是以前景影像疊在背景畫面上劃線、貼圖、書寫。

在本發明的一範例中，背景畫面可包括一同步資訊，同步資訊可以是以編碼(code)、文字或圖形方式存在於背景畫面中，存在的方式可以是以可觀察或無法觀察的方式存在。例如，同步資訊可以是以條碼或二維條碼的方式顯示在背景畫面上，亦可以是以類似隱形墨水的方式以特定演算法藏於背景畫面中，需透過對背景畫面的特定演算法進行處理才能將同步資訊顯示或辨識出來。因此影音通信的通信設備可透過定同步資訊讓彼此的背景畫面同步。例如，使用者A平移地圖時，使用者B的行動電話的程式能夠透過辨識影音串流的影像中的同步資訊來同步螢幕中顯示的地圖。又例如，使用者操作的過程可以透過同步資訊來表示，因此雙方的通信設備可以由影音串流的影像將雙方互動的過程呈現於螢幕上。

同步資訊不但可被用於同步雙方的畫面與操作呈現，亦可以用來交換資訊。換言之，雙方可單憑影像來交換資訊，交換的資訊可以顯示或隱藏在單幅畫面或連續畫面中。此外，交換資訊亦可以在影音串流的聲音中。

由於影音電話與數據傳輸的收費模式可能不同，數據傳輸可能需要單方或雙方的額外收費，並且費用可能相當地高。本發明可以是只透過影音通信達成資訊的同步與/或交換，並且資訊的接收方可以只是使用僅具有影音電話功能而不具備可執行資訊傳送方正在執行的程式的行動電話。

在本發明的一範例中，前述的行動電話可以是平板電腦、桌上型電腦或具備傳輸影音與播放影音的電腦。例如，前述的影音串流可以是由電腦或網路電話經網際網路或區域網路傳輸，例如可以是執行即時通軟體或網路電話軟體，或者是以硬體達成前述軟體的功能。由於本發明可以反應雙方對於畫面的操作，在本發明的一範例中，前述的通信設備所執行的程式可以為一遊戲軟體、簡報軟體、文書處理軟體或任何可手動提供資訊輸入的軟體。

以上所述僅為本發明之較佳實施例而已，並非用以限定本發明之申請專利範圍；凡其他為脫離本發明所揭示之精神下所完成之等效改變或修飾，均應包括在下述之申請專利範圍。

10、30．．．本發明之兩較佳實施設備

20、40．．．本發明之兩較佳實施系統

110．．．視訊通信模組

112．．．影音輸出轉換裝置

114．．．通信裝置

120．．．聲音擷取模組

130．．．輸入介面

140．．．處理器

150．．．影像擷取模組

152．．．攝像裝置

154．．．錄像裝置

156．．．切換裝置

160．．．螢幕

170．．．揚聲器

200A、200B．．．第一、第二通信設備

210A、210B．．．第一、第二視訊通信模組

212A、212B．．．第一、第二影音輸出轉換裝置

214A、214B．．．第一、第二通信裝置

220A、220B．．．第一、第二聲音擷取模組

230A．．．第一輸入介面

240A、240B．．．第一、第二處理器

250A、250B．．．第一、第二影像擷取模組

252A．．．第一攝像裝置

254A．．．第一錄像裝置

256A．．．第一切換裝置

260A、260B．．．第一、第二螢幕

270A、270B．．．第一、第二揚聲器

280、380．．．通信網路

300A、300B．．．第一、第二通信設備

310．．．處理器

312．．．切換器

320A、320B．．．第一、第二螢幕

330．．．控制裝置

340．．．介面裝置

342．．．揚聲器

344．．．麥克風

350．．．收發裝置

362．．．影像感測器

364．．．影像處理器

370．．．觸控筆

400A、400B．．．第一、第二通信設備

410A、410B．．．第一、第二處理器

412A、412B．．．第一、第二切換器

420A、420B．．．第一、第二螢幕

430A、430B．．．第一、第二控制裝置

440A、440B．．．第一、第二介面裝置

442A、442B．．．第一、第二揚聲器

444A、444B．．．第一、第二麥克風

450A、450B．．．第一、第二收發裝置

462A、462B．．．第一、第二影像感測器

464A、464B．．．第一、第二影像處理器

470A、470B．．．第一、第二觸控筆

第一圖係本發明之一較佳實施設備之方塊圖；

第二圖係本發明之一較佳實施系統之方塊圖；

第三圖係本發明之另一較佳實施設備之方塊圖；以及

第四圖係本發明之另一較佳實施系統之方塊圖。

10．．．本發明之一較佳實施設備

110．．．視訊通信模組

112．．．影音輸出轉換裝置

114．．．通信裝置

120．．．聲音擷取模組

130．．．輸入介面

140．．．處理器

150．．．影像擷取模組

152．．．攝像裝置

154．．．錄像裝置

156．．．切換裝置

160．．．螢幕

170．．．揚聲器

Claims (29)

1. 一通信設備，用於視訊通信即時螢幕互動操作，該通信設備包括：一視訊通信模組，包括：一影音輸出轉換裝置，依據一聲音輸入與一視訊輸入產生一第一影音串流；及一通信裝置，傳送該第一影音串流與接收一第二影音串流；一聲音擷取模組，提供一第一聲音信號成為該聲音輸入；一輸入介面，接受一使用者的操作產生至少一操作命令；一處理器，依據該第二影音串流或/與該至少一操作命令產生一畫面；以及一影像擷取模組，包括：一攝像裝置，以攝影方式提供該視訊輸入；一錄像裝置，依據該畫面提供該視訊輸入；及一切換裝置，依據該至少一操作命令選擇該攝像裝置與該錄像裝置之一提供該視訊輸入。
2. 根據申請專利範圍第1項之通信設備，其中該處理器是執行一程式並依據該至少一操作命令產生該畫面。
3. 根據申請專利範圍第1項之通信設備，其中該聲音擷取模組包括一麥克風，且該處理器依據該第二影音串流產生包括一第二聲音信號至一揚聲器。
4. 根據申請專利範圍第1項之通信設備，其中該輸入介面包括一觸控螢幕，且該畫面顯示於該觸控螢幕上。
5. 一通信方法，用於視訊通信即時螢幕互動操作，該通信方法包括：依據一聲音輸入與一視訊輸入產生一第一影音串流；傳送該第一影音串流與接收一第二影音串流；提供一第一聲音信號成為該聲音輸入；接受一使用者的操作產生至少一操作命令；依據該第二影音串流或/與該至少一操作命令產生一畫面；以及依據該至少一操作命令選擇一攝像裝置攝影或依據該畫面提供該視訊輸入。
6. 根據申請專利範圍第5項之通信方法，其中該畫面是由一處理器執行一程式並依據該至少一操作命令所產生。
7. 根據申請專利範圍第5項之通信方法，其中該第一聲音信號是由一麥克風所擷取提供，且一處理器依據該第二影音串流產生包括一第二聲音信號至一揚聲器。
8. 根據申請專利範圍第5項之通信方法，其中該使用者透過一輸入介面的操作產生該至少一操作命令，該輸入介面包括一觸控螢幕，且該畫面顯示於該觸控螢幕上。
9. 一通信系統，用於視訊通信即時螢幕互動操作，該通信系統包括：一通信網路，提供一第一影音串流與一第二影音串流的傳輸；一第一通信設備，包括：一第一視訊通信模組，包括：一第一影音輸出轉換裝置，依據一第一聲音輸入與一第一視訊輸入產生該第一影音串流；及一第一通信裝置，透過該通信網路傳送該第一影音串流與接收該第二影音串流；一第一聲音擷取模組，提供一第一聲音信號成為該第一聲音輸入；一第一輸入介面，接受一使用者的操作產生至少一操作命令；一第一處理器，依據該第二影音串流或/與該至少一操作命令產生一第一畫面；及一第一影像擷取模組，包括：一攝像裝置，以攝影方式提供該第一視訊輸入；一錄像裝置，依據該第一畫面提供該第一視訊輸入；及一切換裝置，依據該至少一操作命令選擇該攝像裝置與該錄像裝置之一提供該第一視訊輸入；以及一第二通信設備，包括：一第二視訊通信模組，包括：一第二影音輸出轉換裝置，依據一第二聲音輸入與一第二視訊輸入產生該第二影音串流；及一第二通信裝置，透過該通信網路傳送該第二影音串流與接收該第一影音串流；一第二聲音擷取模組，提供一第二聲音信號成為該第二聲音輸入；一第二處理器，依據該第一影音串流產生一第二畫面；及一第二影像擷取模組，以攝影方式提供該第二視訊輸入。
10. 根據申請專利範圍第9項之通信系統，其中該第一處理器是執行一程式並依據該至少一操作命令產生該第一畫面。
11. 根據申請專利範圍第9項之通信系統，其中該第一聲音擷取模組包括一第一麥克風，且該第一處理器依據該第二影音串流產生包括一第三聲音信號至一第一揚聲器，該第二聲音擷取模組包括一第二麥克風，且該第二處理器依據該第一影音串流產生包括一第四聲音信號至一第二揚聲器。
12. 根據申請專利範圍第9項之通信系統，其中該第一輸入介面包括一觸控螢幕，且該第一畫面顯示於該觸控螢幕上。
13. 一種視訊通信即時螢幕互動方法，包括：切換一第一視訊資料路徑成一第二視訊資料路徑，其中該第一視訊資料路徑連接到一第一攝像裝置；藉由該第二視訊資料路徑擷取一第一螢幕的一第一操作顯示資料成一第一互動資料；轉換該第一互動資料成一第一視訊通信信號；以及送出該第一視訊通信信號，藉此，在一視訊通信中之一第二螢幕顯示該第一操作顯示資料。
14. 根據申請專利範圍第13項之視訊通信即時螢幕互動方法，其中該第一螢幕包括一第一觸控螢幕。
15. 根據申請專利範圍第13項之視訊通信即時螢幕互動方法，更包括：切換一第三視訊資料路徑成一第四視訊資料路徑；藉由該第四視訊資料路徑擷取該第二螢幕的一第二操作顯示資料成一第二互動資料，其中該第二操作顯示資料包括該第一操作顯示資料；轉換該第二互動資料成一第二視訊通信信號；以及送出該第二視訊通信信號，藉此，在該視訊通信中之該第一螢幕顯示該第二操作顯示資料。
16. 根據申請專利範圍第15項之視訊通信即時螢幕互動方法，其中該第二螢幕包括一第二觸控螢幕。
17. 根據申請專利範圍第15項之視訊通信即時螢幕互動方法，更包括：在該第一視訊通信信號與/或該第二視訊通信信號加入一同步資訊，其中該第一操作顯示資料與/或該第二操作顯示資料是依據該同步資訊來顯示。
18. 一種視訊通信即時螢幕互動裝置，包括：一處理器，擷取一螢幕的一操作顯示資料成一互動資料，並將該互動資料轉換成一視訊通信信號送出，藉此，在一視訊通信中之一另一螢幕顯示該操作顯示資料。
19. 根據申請專利範圍第18項之視訊通信即時螢幕互動裝置，其中該處理器包括一切換器以切換一第一視訊資料路徑與一第二視訊資料路徑，其中該處理器藉由該第二視訊資料路徑擷取該操作顯示資料。
20. 根據申請專利範圍第18項之視訊通信即時螢幕互動裝置，其中該螢幕包括一觸控螢幕。
21. 根據申請專利範圍第18項之視訊通信即時螢幕互動裝置，更包括一控制裝置用以前置處理該操作顯示資料。
22. 根據申請專利範圍第18項之視訊通信即時螢幕互動裝置，更包括一介面裝置用以連接一麥克風與一揚聲器至該處理器。
23. 根據申請專利範圍第18項之視訊通信即時螢幕互動裝置，更包括一收發裝置，其中該處理器藉由該收發裝置送出該視訊通信信號。
24. 一種視訊通信即時螢幕互動系統，包括：一第一通信設備，包括：一第一螢幕；一第一處理器，擷取該第一螢幕的一第一操作顯示資料成一第一互動資料，並將該第一互動資料轉換成一第一視訊通信信號；及一第一收發裝置，送出該第一視訊通信信號，藉此，在一視訊通信中之一第二通信設備之一第二螢幕顯示該第一操作顯示資料；以及該第二通信設備，包括：該第二螢幕；一第二處理器，擷取該第二螢幕的一第二操作顯示資料成一第二互動資料，並將該第二互動資料轉換成一第二視訊通信信號，其中該第二操作顯示資料包括該第一操作顯示資料；及一第二收發裝置，送出該第二視訊通信信號，藉此，在該視訊通信中之該第一通信設備之該第一螢幕顯示該第二操作顯示資料。
25. 根據申請專利範圍第24項之視訊通信即時螢幕互動系統，其中該第一處理器包括一第一切換器以切換一第一視訊資料路徑與一第二視訊資料路徑，其中該第一處理器藉由該第二視訊資料路徑擷取該第一操作顯示資料，該第二處理器包括一第二切換器以切換一第三視訊資料路徑與一第四視訊資料路徑，其中該第二處理器係藉由該第四視訊資料路徑擷取該第二操作顯示資料。
26. 根據申請專利範圍第24項之視訊通信即時螢幕互動系統，其中該第一螢幕包括一第一觸控螢幕，該第二螢幕包括一第二觸控螢幕。
27. 根據申請專利範圍第24項之視訊通信即時螢幕互動系統，其中該第一通信設備包括一第一控制裝置用以前置處理該第一操作顯示資料，該第二通信設備包括一第二控制裝置用以前置處理該第二操作顯示資料。
28. 根據申請專利範圍第24項之視訊通信即時螢幕互動系統，其中該第一通信設備包括一第一介面裝置用以連接一第一麥克風與一第一揚聲器至該第一處理器，該第二通信設備包括一第二介面裝置用以連接一第二麥克風與一第二揚聲器至該第二處理器。
29. 根據申請專利範圍第24項之視訊通信即時螢幕互動系統，其中該第一視訊通信信號與/或該第二視訊通信信號包括一同步資訊，其中該第一操作顯示資料與/或該第二操作顯示資料是依據該同步資訊來顯示。