TW201716975A - 即時視訊互動方法與裝置 - Google Patents

即時視訊互動方法與裝置 Download PDF

Info

Publication number
TW201716975A
TW201716975A TW104133984A TW104133984A TW201716975A TW 201716975 A TW201716975 A TW 201716975A TW 104133984 A TW104133984 A TW 104133984A TW 104133984 A TW104133984 A TW 104133984A TW 201716975 A TW201716975 A TW 201716975A
Authority
TW
Taiwan
Prior art keywords
electronic device
video
user interface
data
interaction
Prior art date
Application number
TW104133984A
Other languages
English (en)
Inventor
王建華
Original Assignee
王建華
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 王建華 filed Critical 王建華
Publication of TW201716975A publication Critical patent/TW201716975A/zh

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/14—Systems for two-way working
    • H04N7/15—Conference systems
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/414—Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance
    • H04N21/41422—Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance located in transportation means, e.g. personal vehicle
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/4223—Cameras
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45—Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/4508—Management of client data or end-user data
    • H04N21/4524—Management of client data or end-user data involving the geographical location of the client
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/47217—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for controlling playback functions for recorded or on-demand content, e.g. using progress bars, mode or play-point indicators or bookmarks
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/14—Systems for two-way working
    • H04N7/141—Systems for two-way working between two video terminals, e.g. videophone
    • H04N7/147—Communication arrangements, e.g. identifying the communication as a video-communication, intermediate storage of the signals
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/038—Indexing scheme relating to G06F3/038
    • G06F2203/0383—Remote input, i.e. interface arrangements in which the signals generated by a pointing device are transmitted to a PC at a remote location, e.g. to a PC in a LAN

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Databases & Information Systems (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

一種即時視訊互動方法及裝置，該方法包括建立所述第一電子裝置與所述第二電子裝置之間的連線，所述連線包括用於傳輸串流視訊資料至所述第二電子裝置之串流視訊層及用於交換所述第一與第二電子裝置的使用者輸入之互動層。所述方法取得所述第一電子裝置所處環境的視訊並顯示，以及透過所述串流視訊層發送所述視訊至所述第二電子裝置顯示。所述方法透過所述互動層接收所述第二電子裝置的一個或多個使用者輸入，使所述第一電子裝置依據所述接收到的使用者輸入執行第一使用者介面操作，並顯示所述第一使用者介面操作在所述視訊上的操作結果。

Description

即時視訊互動方法與裝置
本發明係有關於資料結構的傳輸以及使能即時視訊互動的使用者介面，尤其更有關於一種透過傳輸對應於使用者輸入的使用者介面以及透過串流視訊顯示的即時視訊互動方法及裝置。
通常，移動裝置可以安裝允許使用者透過所述移動裝置上預安裝的視訊拍攝單元進行對話且能彼此看見的視訊通話應用，如視訊通話軟體“Facetime”、網路電話“Skype”等，利用這些視訊通話應用，所述移動裝置可以與另一移動裝置進行即時通訊。所述視訊拍攝單元同樣可以取得所述移動裝置周圍的環境信息並透過所述移動裝置的視訊通話應用將該資訊發送至接收方。另一方面，電子白板、網路電話的視訊分享或其他在線會議裝置可以使使用者能夠分享所述裝置的內容（通常為螢幕的內容）以及透過分享所述分享螢幕的控制進行互動。藉助社群網路服務（social network service，SNS）進行資訊的廣播也可以是一種對話模式，其允許使用者透過一發佈文字資訊及另一方回應所述文字資訊來進行彼此互動。
然而，雖然一些軟體與裝置可以實現面對面的通訊，但是它們無法允許同時分享影像或視訊。電子白板之內容分享與互動通常局限於所述電腦而非所述裝置所在之環境。另一方面，社群網路上的資訊發佈可能會缺乏即時性。當前的通訊方法幾乎不能提供一種根據與環境相關的視訊允許即時協同的解決方案。
鑒於以上內容，有必要提供一種方法或裝置，利用該方法為第一裝置建立連線，該連線包括至少用於視訊分享的一層以及至少用於與一個或多個第二裝置之間進行互動的一層。所述連線可以實現與一個或多個第二電子裝置的即時通訊。所述即時通訊可以包括分享與所述第一電子裝置周圍的環境有關的影像或視訊以及使用直接顯示於所述視訊之上的使用者介面同時與一個或多個第二電子裝置進行互動。
一種使能第一裝置與第二裝置之間之即時視訊互動方法。該方法包括以下步驟：所述第一裝置將一連線請求、與所述第一裝置周圍的環境有關的內容以及所述第一裝置的IP（Internet Protocol，網際網路協定）位址發送至一管理伺服器；所述管理伺服器將所述第一裝置與第二裝置進行配對；所述管理伺服器將所述連線請求、所述內容以及所述第一裝置的IP位址發送至第二裝置以及將所述第二裝置的IP位址發送至所述第一裝置；由所述第一裝置與第二裝置建立彼此之間的一連線，其中所述連線包括一用於傳輸串流視訊資料至所述第二裝置之串流視訊層以及用於交換所述第一與第二裝置之間之使用者輸入資料之互動層；所述第一裝置從該第一裝置周圍的環境取得一視訊；所述第一裝置透過所述串流視訊層將該視訊發送至所述第二裝置；於所述第一與第二裝置上均顯示所述視訊；所述第一裝置與第二裝置中之其中一個裝置接收一個或多個使用者輸入並透過所述互動層傳輸至所述第一與第二裝置中之另一裝置；所述第一裝置與第二裝置均對所述對視訊執行對應於所述使用者輸入的使用者介面操作；以及在所述第一與第二裝置上均顯示所述使用者介面操作在所述視訊上的操作結果。基於上述，利用本發明範例實施例所提出的使能第一裝置與第二裝置之間即時視訊互動之方法，所述第一裝置可以將該第一裝置周圍的環境之視訊提供給所述第二裝置，並根據所述兩個裝置所偵測到的使用者輸入利用顯示於所述視訊之上的使用者介面實現即時互動。
本發明還提供一種使能即時視訊互動的裝置。所述裝置可以是第一電子裝置且可以包括一記憶體，隨同一個或多個處理器、一通訊模組、一視訊拍攝單元、一輸入模組以及一顯示單元一起，該記憶體中儲存有能夠與一第二電子裝置即時互動的一個或多個程式。所述一個或多個程式包括：透過一管理伺服器將一連線請求、所述輸入模組接收的與所述第一電子裝置周圍的環境有關的內容以及所述第一電子裝置的IP位址發送至第二電子裝置之指令，其中所述管理伺服器依據從所述第一電子裝置接收到的資料將所述第一電子裝置與所述第二電子裝置進行配對；由所述通訊模組建立所述第一電子裝置與第二電子裝置之間的連線之指令，該連線包括一用於傳輸串流視訊資料至所述第二裝置之串流視訊層以及用於交換所述第一與第二裝置之間之使用者輸入資料之互動層；由所述視訊拍攝單元取得所述環境的視訊並將該視訊顯示於顯示單元上之指令；由通訊模組將所述視訊透過串流視訊層發送至第二電子裝置以顯示於所述第二電子裝置上之指令；由通訊模組透過所述互動層從所述第二電子裝置接收一個或多個使用者輸入之指令；根據所述一個或多個使用者輸入對所述視訊執行一使用者介面操作以及在所述顯示單元上顯示所述使用者介面操作在所述視訊之上的操作結果之指令。
本發明對照先前技術所能達成之功效在於，所述第一電子裝置可以將該第一電子裝置周圍的環境之視訊提供給所述第二電子裝置，並結合兩個電子裝置偵測到的附加使用者輸入實現即時視訊互動。利用本發明範例實施例所提出的使能即時視訊互動的裝置和方法，可以提供一種與環境相關的視訊並且允許即時協同的互動方案。
圖1為本發明較佳實施例之網路架構示意圖。
圖2為本發明一較佳實施例之查詢裝置方框圖。
圖3為本發明一較佳實施例之另一查詢裝置方塊圖。
圖4為本發明一較佳實施例之幫助裝置方框圖。
圖5為本發明一較佳實施例之實現兩個電子裝置之間即時視訊互動方法的流程示意圖。
圖6為本發明另一較佳實施例之實現在一個網路中的兩個電子裝置之間即時視訊互動方法的流程示意圖。
圖7為本發明一較佳實施例之透過查詢裝置實現即時視訊互動方法的流程示意圖。
圖8為本發明另一較佳實施例之透過查詢裝置實現即時視訊互動方法的流程示意圖。
圖9為本發明一較佳實施例之透過幫助裝置實現即時視訊互動方法的流程示意圖。
圖10為本發明一較佳實施例之透過管理伺服器實現即時視訊互動方法的流程示意圖。
圖11為本發明一較佳實施例之用於執行查詢節點與幫助節點之間即時視訊互動的一系列使用者介面操作的示意圖。
圖12為本發明一較佳實施例之用於執行查詢節點與幫助節點之間即時視訊互動的一系列使用者介面操作的示意圖。
圖13為本發明一較佳實施例之用於執行查詢節點與幫助節點之間即時視訊互動的一系列使用者介面操作的示意圖。
圖14為本發明一較佳實施例之用於執行查詢節點與幫助節點之間即時視訊互動的一系列使用者介面操作的示意圖。
圖15為本發明一較佳實施例之用於執行從幫助節點到計算裝置的導航指令的一系列使用者介面操作的示意圖。
茲就本發明之較佳實施例，配合圖式，詳細說明如後。
圖1示意了本發明一較佳實施例之網路架構。參閱圖1，一查詢節點10可以與一網路40連接，以查詢一請求至所述網路中一個或多個幫助節點20。在本發明一實施例中，所述查詢節點10可以發送IP位址、與所述查詢節點10周圍的環境有關的內容以及所述查詢節點10的連線請求至所述一個或多個幫助節點20。所述一個或多個幫助節點20可以發送所述一個或多個幫助節點20的IP位址至所述查詢節點10，以為所述查詢節點10與所述一個或多個幫助節點20彼此之間建立一連線。在本發明另一實施例中，一管理伺服器30可以與所述網路40連線。所述查詢節點10可以發送該查詢節點10的IP位址、所述內容以及所述連線請求至所述管理伺服器30，以由所述管理伺服器30發送至至少一個幫助節點。根據從所述查詢節點10接收到的資料，所述管理伺服器30可以將所述查詢節點10與所述一個或多個幫助節點20中至少一個幫助節點（例如第一幫助節點21）進行配對，並發送所述IP位址、所述內容以及所述連線請求至該第一幫助節點21。
在一些實施方式中，所述管理伺服器30可以根據從所述查詢節點10接收到的標識將所述查詢節點10與一個或多個幫助節點20進行配對。在一些實施方式中，所述管理伺服器30可以接收所述查詢節點10的地理資訊並依據該地理資訊將所述查詢節點10與一個或多個所述幫助節點20進行配對。例如，所述管理伺服器30可以將所述查詢節點10與在地理上靠近所述查詢節點10的一個或多個幫助節點20進行配對。再如，所述管理伺服器30可以將所述查詢節點10與已經訪問過地理上靠近所述查詢節點10區域的一個或多個幫助節點20進行配對。當將所述查詢節點10與所述一個或多個幫助節點20配對後，所述管理伺服器30可以將所述查詢節點10的IP位址、內容及連線請求發送至所述一個或多個幫助節點20，以及將所述一個或多個幫助節點20的IP位址發送至所述查詢節點10。因而，所述查詢節點10與所述一個或多個幫助節點20可以擁有彼此的IP位址。基於上述IP位址，所述查詢節點10與所述一個或多個幫助節點20之間可以建立一連線。應說明的是，在其他較佳實施例中，也可以採用所屬領域具有通常知識者所習知的手段（例如同儕連線，pear-to-pear connection）來建立所述連線。
在本較佳實施例中，所述連線可以至少包括用於串流視訊資料傳輸的第一層（以下稱為“串流視訊層”）以及使用者控制或使用者介面資料傳輸的第二層（以下簡稱“互動層”）。當建立所述連線後，透過該連線所述查詢節點10可以與所述一個或多個所述幫助節點20進行通訊。所述查詢節點10可以從該查詢節點10周圍的環境取得視訊並透過所述連線之串流視訊層將所述視訊傳輸至所述一個或多個幫助節點20。在一些實施方式中，所述查詢節點10與所述一個或多個幫助節點20均可以顯示所述視頻，即，兩者可以共用同一螢幕的視頻。所述一個或多個幫助節點20與所述查詢節點10可以進一步地接收使用者輸入並透過所述連線的互動層相互傳輸對應的使用者介面資料或對應的命令。透過互動層傳輸的所述使用者介面資料或命令可以顯示於透過視頻流層在所述查詢節點10與所述一個或多個幫助節點20上傳輸的所述視訊上。在一些實施方式中，所述一個或多個幫助節點20及所述查詢節點10可以共用同一螢幕的所述視訊和所述使用者介面資料。因此，所述查詢節點10的使用者和所述一個或多個幫助節點20的使用者之間可以基於所述視訊以及對所述互動具有的視覺輔助進行通訊。因此，所述查詢節點10與所述一個或多個幫助節點20之間可以使能關於所述查詢節點10周圍的環境的即時通訊以及在所述視訊上直接地即時可視化互動。當所述查詢節點10的使用者有關於周圍的環境的疑問時，本發明的所述實施例可以使該使用者能夠透過即時通訊以及視覺化輔助互動向所述一個或多個幫助節點20的使用者諮詢。
本發明所述的查詢節點10可以是智慧手機、平板電腦、筆記本電腦、數位相機、錄影機、或穿戴式計算裝置（如腕戴式設備及頭戴式設備）等。此外，本發明所述的查詢節點10同樣可以是能夠連接所述網路40的任何裝置，該任何裝置具有一用於取得所述查詢節點10周圍的環境之視訊的視訊拍攝單元以及一用於顯示所述視訊或所述使用者介面的視訊顯示單元。在一些實施方式中，所述查詢節點10可以是可連接於一移動物體的計算裝置，所述移動物體可以是人、寵物或載具等。例如，所述查詢節點10可以是一能夠放置在一汽車內的車載單元（on-board unit， OBU或整合於一汽車中的控制台）。在一些實施例中，所述查詢節點10可以進一步地是一具有網路連通性及視訊拍攝能力的移動物體，例如具有攝影機的無人駕駛載具。
同樣，本發明所述的一個或多個幫助節點20可以是智慧手機、平板電腦、筆記本電腦、電子書閱讀器、數位相框、電視盒、智慧電視、電子白板、路由器、無線接入點或遠端射頻收發模組(remote radio head，RRH)。此外，本發明所述的一個或多個幫助節點20同樣可以是能夠連接所述網路、且能夠顯示從所述查詢節點10接收的視訊資料之任何裝置，該任何裝置具有一用於接收使用者輸入作為使用者對所述視訊資料之反應的輸入單元。在一些實施例中，所述一個或多個幫助節點20可以是一視訊顯示裝置，該視訊顯示裝置能夠用於接收對應於所述顯示的視訊之使用者輸入，例如，具有觸控螢幕的計算裝置或具有照相機和影像辨識功能以接收或識別其使用者之手勢的智慧電視。在一些實施方式中，所述一個或多個幫助節點20可以進一步地是一能夠同時連接顯示裝置和輸入裝置的網路連線設備，例如，可以是一連接於一顯示單元和一攝影裝置的電視盒，所述攝影裝置具有影像辨識功能以接收並識別使用者的手勢。
參閱圖2，所述查詢節點10可以是第一電子裝置100，其包括一個或多個處理器101、記憶體102、與所述記憶體102連接並由所述一個或多個處理器101控制的通訊模組103、與所述記憶體102連接並由所述一個或多個處理器101控制的視訊拍攝單元104、輸入模組105，及顯示單元106。如圖1所描述的所述第一電子裝置100與所述一個或多個幫助節點20之間的連線程式同樣可以作為一個或多個程式儲存於所述記憶體102中。所述一個或多個處理器101可以執行所述程式並透過控制所述通訊模組103發送一連線請求以主動建立與所述幫助節點20通訊的一連線。所述通訊模組103可以建立該連線包括用於傳輸串流視訊資料至所述幫助節點20之串流視訊層，所述串流視訊資料由所述視訊拍攝單元104從所述第一電子裝置100所處的環境取得的。所述建立的連線還包括用於交換所述第一電子裝置100與所述幫助節點20之間之使用者輸入資料之互動層，所述使用者輸入資料由所述輸入模組105收集。所述由視訊拍攝單元104取得的串流視訊資料同樣可以顯示於所述顯示單元106上。所述一個或多個處理器101可以進一步地根據所述使用者輸入對所述串流視訊資料執行第一使用者介面操作，並於所述顯示單元106上顯示所述第一使用者介面操作在所述串流視訊資料上的操作結果。在一些實施例中，所述通訊模組103可以進一步地透過互動層接收來自所述一個或多個幫助節點20的使用者介面資料。所述一個或多個處理器101可以進一步地根據從所述一個或多個幫助節點20接收的使用者介面資料執行第二使用者介面操作，並於所述顯示單元106上顯示所述第二使用者介面在所述串流視訊資料上的操作結果。
在一實施例中，所述輸入模組105可以接收與所述環境有關的內容，以及所述通訊模組103可以將所述內容隨所述第一電子裝置100的IP位址一起發送至所述一個或多個幫助節點20。在一些實施方式中，所述第一電子裝置100可以發送所述內容、所述IP位址、以及所述連線請求至所述管理伺服器30。所述管理伺服器30可以將所述第一電子裝置100與一個或多個幫助節點20配對，並發送所述內容、所述IP位址、以及所述連線請求至所述一個或多個幫助節點20。
在一實施例中，所述第一電子裝置100同樣可以包括一用於取得所述環境地理資料的地理感測器。所述通訊模組103可以進一步地透過所述互動層發送所述地理資料至所述幫助節點20。在一些實施方式中，所述通訊模組103可以發送所述地理資料至所述管理伺服器30。所述管理伺服器30可以基於所述地理資料將所述第一電子裝置100與一個或多個所述幫助節點20配對。另一個例子，所述管理伺服器30可以將所述第一電子裝置100與訪問過對應於所述地理資料之位置的所述一個或多個幫助節點20配對。在一些實施方式中，所述第一電子裝置100可以利用所述通訊模組103取得與所述地理資料有關的地圖資料。所述一個或多個處理器101可以產生對應於所述地圖資料的地圖。所述顯示單元106可以同時顯示所述地圖與所述視訊。在一些方案中，所述一個或多個處理器101可以構造一導航使用者介面，其包括所述地圖、所述第一電子裝置100的位置以及由所述視訊拍攝單元104收集的所述視訊。所述通訊模組103可以從所述一個或多個幫助節點20接收方向指引。所述一個或多個處理器101可以產生對應於所述方向指引的方向圖標，以及所述顯示單元106可以相應地顯示所述導航使用者介面與所述方向圖標。
在一實施例中，所述一個或多個處理器101同樣可以識別所述視訊拍攝單元104所取得的所述視訊中的一個物體。所述一個或多個處理器101可以透過所述通訊模組103取得所述物體的一個或多個特徵，例如所述物體的名稱。所述通訊模組103透過所述互動層發送所述一個或多個特徵至所述幫助節點20。在一些實施方式中，所述一個或多個處理器101在識別物體的同時可以產生識別資料如物體的影像特徵。所述通訊模組103可以發送識別資料至所述管理伺服器30。所述管理伺服器30可以檢索所述帶有識別資料的物體的特徵。在一些方案中，所述物體可以是一產品。所述一個或多個處理器101可以透過配對影像特徵識別所述產品並產生表示所述產品的ID。所述通訊模組103可以發送所述產品的ID至所述管理伺服器30（或其他包括產品資料庫的伺服器）。所述管理伺服器30可以利用所述產品的ID檢索產品信息如產品的型號、名稱及價格，並發送檢索到的產品資訊至所述第一電子裝置100。所述顯示單元106可以將所述產品資訊隨同所述視訊一起顯示。所述通訊模組103可以進一步地透過所述互動層傳輸所述產品資訊或所述ID至所述一個或多個幫助節點20，以使得所述一個或多個幫助節點20也將所述產品信息或所述ID隨同所述視訊一起顯示。
在本發明一實施例中，由所述輸入模組105透過互動層從所述一個或多個幫助節點20接收到的所述使用者輸入資料可以是一觸控或手勢，以及所述一個或多個處理器101可以將一個或多個演算機制(heuristics)應用於所述使用者輸入資料以確定第一使用者介面操作。所述一個或多個處理器101相應地對所述串流視訊資料執行所述第一使用者介面操作並於顯示單元106上顯示所述第一使用者介面操作在所述串流視訊資料（由所述視訊拍攝單元104所拍攝）上的操作結果。在另一實施例中，所述輸入模組105可以包括一個或多個觸控感測器以偵測手指接觸並產生觸控資料。所述一個或多個處理器101同樣可以將一個或多個演算機制應用於所述觸控資料以確定第二使用者介面操作並相應地對所述串流視訊資料執行所述第二使用者介面操作，以及於顯示單元106上顯示所述第二使用者介面操作在所述串流視訊資料（由所述視訊拍攝單元104所拍攝）上的操作結果。另一方面，所述通訊模組103發送由所述觸控感測器偵測到的所述觸控資料至所述一個或多個幫助節點20。
在一實施例中，所述輸入模組105可以包括一個或多個光感測器以偵測使用者行為並產生手勢資料。所述一個或多個處理器101同樣可以將一個或多個演算機制應用於所述手勢資料以確定第二使用者介面操作並相應地在所述串流視訊資料上執行所述第二使用者介面操作，以及於顯示單元106上顯示所述第二使用者介面操作在所述串流視訊資料（由所述視訊拍攝單元104所拍攝）上的操作結果。另一方面，所述通訊模組103發送由所述光感測器偵測到的所述手勢資料至所述一個或多個幫助節點20。
在一實施例中，所述一個或多個處理器101拍攝一張螢幕截圖，該截圖包括由所述第一使用者介面操作所產生之所述串流視訊資料的一幀影像。所述通訊模組103透過所述互動層發送所述螢幕截圖至所述一個或多個幫助節點20。這樣，所述第一電子裝置100與所述一個或多個幫助節點20可以透過使用所述螢幕截圖進行互動和協作。
參閱圖3，所述查詢節點10同樣可以是一控制無人駕駛載具之載具主體的計算裝置200。所述計算裝置200包括一個或多個處理器201，一記憶器202、由所述一個或多個處理器201控制的通訊模組203、與所述記憶體202連接並由所述一個或多個處理器201控制的視訊拍攝單元204、輸入模組205，執行單元206、以及儲存於所述記憶體202並由所述一個或多個處理器201執行的一個或多個程式。在一實施例中，如圖3所描述的所述計算裝置200與所述一個或多個幫助節點20之間的連線程式同樣可以作為一個或多個程式儲存於所述記憶體202中。所述一個或多個處理器201可以執行所述程式並透過控制所述通訊模組203發送一連線請求以主動建立與所述幫助節點20通訊的連線。所述通訊模組203可以建立包括用於傳輸串流視訊資料至所述幫助節點20之串流視訊層的所述連線，所述串流視訊資料由所述視訊拍攝單元204從所述計算裝置200所處的環境取得的。所述連線還包括用於交換所述計算裝置200與所述幫助節點20之間之使用者輸入資料之互動層，所述使用者輸入資料由所述輸入模組205收集。所述一個或多個處理器201可以用於透過所述通訊模組203處理從所述一個或多個幫助節點20接收的一個或多個使用者輸入資料；將一個或多個演算機制應用於所述一個或多個使用者輸入資料以確定所述載具與所述環境之間所定義的用於互動的一個或多個命令；以及執行所述一個或多個命令以控制所述載具主體執行所述執行單元206與所述環境之間的互動。
在一實施例中，所述一個或多個使用者輸入資料可以是觸控資料，其定義了所述串流視訊資料一個或多個幀影像中對應於所述環境的至少一個位置。所述一個或多個處理器201利用所述執行單元206執行所述一個或多個命令以控制所述載具主體移動至所述環境中的上述位置。
在另一實施例中，所述一個或多個程式進一步地包括透過管理伺服器30發送一連線請求、一預設內容、以及所述載具的IP位址至一個或多個幫助節點20的指令。當從所述載具的計算裝置200接收到上述資料時，所述管理伺服器30將所述載具與所述一個或多個幫助節點20配對。
參閱圖4，所述一個或多個幫助節點20可以是第二電子裝置300，其包括一個或多個處理器301、記憶體302、由所述處理器301控制的通訊模組303、輸入模組304、顯示單元305、以及儲存於所述記憶器302且用於被所述一個或多個處理器301執行的一個或多個程式。在一實施例中，所述通訊模組303可以從所述管理伺服器30接收與所述查詢節點10周圍的環境有關的內容、所述查詢節點10的IP位址以及所述連線請求。如圖4所描述的所述第二電子裝置300與所述查詢節點10之間的連線程式同樣可以作為一個或多個程式儲存於所述記憶體302中。所述一個或多個處理器301可以執行所述程式並透過控制所述通訊模組303發送一連線請求以主動建立與所述查詢節點10通訊的連線。所述通訊模組303可以建立所述連線，該連線包括用於從所述查詢節點10接收所述串流視訊資料之串流視訊層以及用於交換所述第二電子裝置300與所述查詢節點10之間由輸入模組304收集的使用者輸入資料之互動層。所述一個或多個處理器301可以利用所述顯示單元305顯示從所述查詢節點10接收的所述串流視訊資料。所述一個或多個處理器301同樣可以根據所述使用者輸入對所述串流視訊資料執行一使用者介面操作，並於所述顯示單元305上顯示所述使用者介面操作在所屬串流視訊資料上的操作結果。
本發明所述的處理器101，201，或301可以是用於執行記憶體102，202，或302中程式指令的處理器或控制器。所述記憶器102，202，或302可以是靜態隨機記憶體SRAM、動態隨機記憶體DRAM、可擦可編程只讀記憶體EPROM、電可抹除只讀記憶體EEPROM、快閃記憶體、或其他任意合適類型的計算機記憶體。所述處理器101，201，或301可以進一步地包括一嵌入式系統或具有嵌入式程式指令的專用集成電路。
本發明所述通訊模組103，203，或303可以採用客制化通訊協定或遵循通訊標準如乙太網（Ethernet）標準、IEEE 802.11標準、IEEE 802.15標準、Wireless USB標準等或無線電通訊標準如通用分組無線服務技術GPRS、CDMA2000、TD-SCDMA、LTE、LET-Advance或WiMAX等標準。所述通訊模組103，203，或303同樣可以採用客制化多媒體編碼/解碼演算法或遵循多媒體壓縮標準如MPEG標準、H.264標準、或高效率視頻編碼HEVC（H.265）標準等。
所述視訊拍攝單元104、204可以包括攝影機、影像感測器以及緩衝記憶體，以從所述環境取得影像並產生所述視訊的影像幀。在一些實施方式中，所述視訊拍攝單元104，204同樣可以是用於連接視訊拍攝裝置的視訊介面。
所述輸入模組105，205，或304可以是鍵盤、鼠標、控制台或其他輸入手段，以接收使用者的輸入。在一些實施方式中，所述輸入模組105，205，或304可以具有感測器及識別器以偵測使用者輸入。例如，所述輸入模組105，205，或304可以包括一個或多個觸控觸感器，以偵測手指解除並產生觸控資料，該觸控資料定義了對應於所述查詢節點10所處環境中至少一個位置的所述視訊之一個或多個幀影像中至少一個點。另一實施例中，所述輸入模組105，205，或304可以包括一個或多個光感測器以在所述視訊的一個或多個幀影像中識別由一光源指出的至少一個位置。在另一實施方式中，所述輸入模組105、205，或304可以包括影像感測器或觸控感測器以收集影像資料或觸控資料並識別所述影像資料或觸控資料中的手勢。所述輸入模組105、205，或304可以產生對應的手勢資料在所述互動層中傳輸。
本發明所述的顯示單元106或305可以是能夠顯示視訊的任意裝置。本發明所述的顯示單元106或305也可以是用於連接顯示裝置的一介面，所述顯示裝置可以包括計算裝置的外部顯示器、電視機，或投影裝置。
本發明所述的執行單元206可以是具有不同程度的能力以物理上地與所述環境進行互動的任何裝置，例如，能夠移動至所述環境中的特定位置或捕捉/放置環境中的物體。例如，所述執行單元206可以是載具主體或一個或多個機器人手臂。
在一實施例中，所述查詢節點10或所述一個或多個幫助節點20之間的連線進一步地包括一用於交換所述查詢節點10與所述幫助節點20之間語音資料之語音通訊層。
圖5和圖6示意了依據本發明一實施例在網路40中一查詢節點10與一個或多個幫助節點20之間即時視訊互動方法。
圖5是依據本發明一實施例之建立所述查詢節點10與所述一個或多個幫助節點20之間的連線以進行資料交換的方式流程示意圖。所述方法可以執行如下步驟。步驟S101，所述查詢節點10的通訊模組103可以發送所述查詢節點10的IP位址、與所述查詢節點10周圍的環境有關的內容以及所述查詢節點10的一連線請求至所述管理伺服器30。在一實施例中，與所述環境有關的所述內容可以是詢問方向或請求關於決策的建議。
步驟S102，所述管理伺服器30發送所述查詢節點10的IP位址、與所述環境有關的內容以及所述查詢節點的連線請求至所述一個或多個幫助節點20的所述通訊模組303。在一實施例中，可以透過去除所述管理伺服器30將所述步驟S101與步驟S102合併在一起，即，所述查詢節點10的通訊模組103發送所述查詢節點10的IP位址、與所述環境有關的內容以及所述連線請求至所述一個或多個幫助節點20。在一實施例中，所述步驟S101可以進一步地包括由所述查詢節點10接收使用者輸入資料，該使用者輸入資料表明所述查詢節點10在記憶體102中儲存的聯繫人清單中的ID。例如，所述ID可以屬於第一幫助節點21。所述步驟S102可以進一步地包括將所述查詢節點10與所述第一幫助節點21配對。在另一實施例中，所述步驟S101可以進一步地包括發送所述查詢節點10周圍的環境的地理資料至所述管理伺服器30，相應地，在所述步驟S102中，可以藉助所述地理資料將所述查詢節點10與靠近所述查詢節點10地理位置的一個或多個幫助節點20配對。
步驟S103，建立所述查詢節點10與所述一個或多個幫助節點20之間的連線。所述連線可以包括用於傳輸串流視訊資料至所述一個或多個幫助節點20之串流視訊層，以及用於交換所述查詢節點10與所述一個或多個幫助節點20之間之使用者輸入資料之互動層。在一實施例中，所述連線可以進一步地包括一用於交換聲音資料的語音通訊層，如詢問的問題，及所述查詢節點10與所述一個或多個幫助節點20之間以聲音提供的命令或建議。
步驟S104，所述查詢節點10可以取得所述查詢節點10所處環境內的串流視訊資料以及顯示所述串流視訊資料。
步驟S105，所述查詢節點10可以透過所述串流視訊層發送所述串流視訊資料至所述一個或多個幫助節點20。在另一實施例中，所述步驟S104可以進一步地包括取得物體資料，所述物體資料可以是由配對影像特徵識別到的產品信息。步驟S105可以進一步地包括發送所述產品資訊至所述一個或多個幫助節點20。
步驟S106，所述一個或多個幫助節點20可以顯示從所述查詢節點10接收到的所述串流視訊資料。
步驟S107，所述一個或多個幫助節點20可以偵測使用者輸入資料並將一個或多個演算機制應用於所述使用者輸入資料以確定所述使用者介面操作。所述步驟S107同樣可以包括由所述一個或多個幫助節點20對所述串流視訊資料執行所述使用者介面操作並顯示所述使用者介面操作在所述串流視訊資料上的操作結果。在一實施例中，所述使用者輸入資料可以是由觸控感測器取得的觸控資料，例如，在所述一個或多個幫助節點20的觸控面板上畫的一個圓。所述使用者輸入資料同樣可以是手勢資料，例如，由觸控感測器捕捉到的運動。在另一實施例中，所述使用者介面操作可以是對所述串流視訊資料的操控，例如放大/縮小或暫停所述串流視訊資料，且所述一個或多個幫助節點20可以依據所述使用者介面資料顯示所述被操控的串流視訊資料。在另一實施例中，所述使用者輸入資料可以表明一個單擊以對對應於與所述查詢節點10的環境有關的內容作出一個選擇。
步驟S108，所述一個或多個幫助節點20可以透過所述互動層利用所述通訊模組303傳輸所述觸控或手勢資料至所述查詢節點10。
步驟S109，所述查詢節點10可以透過所述互動層利用所述通訊模組103從所述一個或多個幫助節點20接收所述使用者輸入資料。所述查詢節點10可以依據該接收的使用者輸入資料對所述串流視訊資料執行所述使用者介面操作並顯示所述使用者介面操作在所述串流視訊資料上的操作結果。在一實施例中，所述使用者介面操作可以是對所述串流視訊資料的操控，例如放大/縮小或暫停所述串流視訊資料，且所述查詢節點10可以依據所述使用者介面資料顯示所述被操控的串流視訊資料。在另一實施例中，所述步驟S109進一步地包括依據所述地理資料取得儲存於所述查詢節點10記憶體102中的地圖資訊，以及所述查詢節點10執行對應於所述地圖資訊的使用者介面操作以與所述串流視訊資料同時顯示。
應該瞭解，本發明上述的方法並不限於圖5所示流程圖中的步驟及順序。根據不同的實施例，圖5所示流程圖中的步驟可以增加、移除、或者改變順序，不同的步驟也可以進行組合。例如，所述步驟S103可以省略以及所述步驟S103與步驟S104可以交換順序。
圖6是依據本發明一實施例之建立所述查詢節點10與所述一個或多個幫助節點20之間的連線以透過社群網路服務（Social Networking Services，SNS）進行資料交換的方法流程示意圖。所述方法可以執行如下步驟。步驟S201，所述查詢節點10的輸入模組105用於接收一使用者輸入以發送與所述查詢節點10周圍的環境有關的內容以及所述查詢節點10的連線請求至SNS伺服器(圖中未示出)。
步驟S202，所述查詢節點10發送所述查詢節點10的IP位址、與所述環境有關的內容、所述查詢節點10的連線請求至所述管理伺服器30以請求一個鏈接。所述鏈接是讓所述一個或多個幫助節點20訪問並對與所述查詢節點10的環境相關的所述內容作出反應。對與所述查詢節點10的環境相關的所述內容作出反應包括給出的方向或提供的建議。
步驟S203，所述管理伺服器30可以發送所述鏈接至所述查詢節點10。
步驟S204，所述查詢節點10可以發送所述鏈接以及與所述環境相關的所述內容至所述SNS伺服器。
步驟S205，所述SNS伺服器可以發送一包括所述鏈接及與所述環境相關之所述內容的頁面至所述一個或多個幫助節點20。
步驟S206，所述一個或多個幫助節點20的第一幫助節點21可以接收一使用者輸入以對與所述查詢節點10的環境相關的所述內容作出反應之使用者輸入。
步驟S207，所述第一幫助節點21可以發送對與所述查詢節點10的環境相關的所述內容作出反應之請求至所述管理伺服器30。
步驟S208，所述管理伺服器30可以發送所述查詢節點10的IP位址至所述第一幫助節點21。一旦所述第一幫助節點21接收到所述IP位址時，所述第一幫助節點21與所述查詢節點10可以執行上述步驟S103-S109以建立連線及交換資料。
應該瞭解，本發明上述的方法並不限於圖6所示流程圖中的步驟及順序。根據不同的實施例，圖6所示流程圖中的步驟可以增加、移除、改變順序，不同的步驟也可以進行組合。
圖7示意了依據本發明一實施例之將所述第一電子裝置100與所述一個或多個幫助節點20配對的方法，所述方法由一系列指令執行。在一實施例中，由儲存於所述第一電子裝置100的記憶器102中的指令執行。所述方法可以執行如下步驟。步驟S301，所述第一電子裝置100可以透過一管理伺服器30發送一連線請求、與所述環境有關的內容，以及所述第一電子裝置100的IP位址至所述一個或多個幫助節點20。
步驟S302，所述第一電子裝置100可以建立所述第一電子裝置100與所述一個或多個幫助節點20之間的連線。所述連線可以包括用於傳輸串流視訊資料至所述一個或多個幫助節點20之串流視訊層，以及用於交換所述一個或多個幫助節點20的使用者輸入資料及傳輸控制資料至所述一個或多個幫助節點20之互動層。所述連線可以由UDP(User Datagram Protocol 使用者資料包通訊協定) hole punching(打洞)技術建立。
步驟S303，所述第一電子裝置100可以取得該第一電子裝置100所處環境的串流視訊資料並顯示所述串流視訊資料。
步驟S304，所述第一電子裝置100可以透過所述串流視訊層發送所述串流視訊資料至所述一個或多個幫助節點20以顯示於所述一個或多個幫助節點20上。
步驟S305，所述第一電子裝置100可以透過所述互動層從所述一個或多個幫助節點20接收一個或多個使用者輸入。
步驟S306，所述第一電子裝置100可以依據上述接收的使用者輸入對所述串流視訊資料執行對應的使用者介面操作，並顯示所述使用者介面操作在所述串流視訊資料上的操作結果。
圖8示意了依據本發明另一實施例之將所述第一電子裝置100與所述一個或多個幫助節點20配對的方法，所述方法由一系列指令執行。在一實施例中，由儲存於所述第一電子裝置100的記憶器102中的指令執行。所述方法可以執行如下步驟。步驟S401，所述第一電子裝置100可以建立所述第一電子裝置100與所述一個或多個幫助節點20之間的連線。所述連線可以包括用於傳輸串流視訊資料至所述一個或多個幫助節點20之串流視訊層，以及用於交換所述一個或多個幫助節點20的使用者輸入資料及傳輸控制資料至所述一個或多個幫助節點20之互動層。所述連線可以由UDP(User Datagram Protocol 使用者資料包通訊協定) hole punching(打洞)技術建立。
步驟S402，所述第一電子裝置100可以取得其所處環境內的串流視訊資料並顯示所述串流視訊資料。
步驟S403，所述第一電子裝置100可以透過所述串流視訊層發送所述串流視訊資料至所述一個或多個幫助節點20並顯示於所述一個或多個幫助節點20上。
步驟S404，所述第一電子裝置100可以透過所述互動層從所述一個或多個幫助節點20接收第一使用者輸入。所述第一使用者輸入可以是一觸控感測器感測由手指在所述一個或多個幫助節點20的觸控面板上觸控的位置而取得到的觸控資料。所述第一使用者輸入也可以是一光感測器偵測到的手勢資料。
步驟S405，如果所述第一使用者輸入是所述觸控資料，所述第一電子裝置100可以將一個或多個觸控演算機制應用於所述第一使用者輸入以確定第一使用者介面操作。如果所述第一使用者輸入是所述手勢資料，所述第一電子裝置100可以將一個或多個手勢演算機制應用於所述第一使用者輸入以確定第一使用者介面操作。
步驟S406，所述第一電子裝置100可以依據上述使用者輸入對所述串流視訊資料執行所述第一使用者介面操作，並顯示所述第一使用者介面操作在所述串流視訊資料上的操作結果。所述一個或多個演算機制可以包括識別在所述一個或多個幫助節點20的觸控面上畫出的形狀以及識別所述光感測器捕捉到的所述光源的運動。
圖9示意了依據本發明一實施例之將所述第二電子裝置300與所述查詢節點10配對的方法，所述方法由一系列指令執行。在一實施例中，由儲存於所述第二電子裝置300的記憶器102中的指令執行。所述方法可以執行如下步驟。步驟S501，所述第二電子裝置300可以建立所述第二電子裝置300與所述查詢節點10之間的連線。其中，所述連線可以包括用於接收來自所述查詢節點10之串流視訊資料之串流視訊層，以及用於交換所述第二電子裝置300與所述查詢節點10之間之使用者輸入資料之互動層。
步驟S502，所述第二電子裝置300可以透過串流視訊層從所述查詢節點10接收第一串流視訊資料。其中，所述第一串流視訊資料是由所述查詢節點10從其所處環境取得的，且所述查詢節點10也會顯示所述第一串流視訊資料。
步驟S503，所述第二電子裝置300可以顯示所述第一串流視訊資料。
步驟S504，所述第二電子裝置300可以偵測使用者輸入資料並將一個或多個演算機制應用於所述使用者輸入資料以確定一使用者介面操作。所述偵測到的使用者輸入資料可以是一觸控感測器感測手指在所述查詢節點10的觸控面板上觸控的位置而取得到的觸控資料。所述偵測到的使用者輸入資料也可以是一光感測器偵測到的手勢資料。所述一個或多個演算機制可以包括識別在所述查詢節點10的觸控面上畫出的形狀及識別所述光感測器捕捉到的所述光源的運動。
步驟S505，所述第二電子裝置300可以對所述第一串流視訊資料執行所述使用者介面操作，並顯示所述使用者介面操作在所述第一串流視訊資料上的操作結果。
步驟S506，所述第二電子裝置300可以透過所述互動層傳輸所述使用者輸入資料至所述查詢節點10，以使得所述查詢節點10同樣對所述第一串流視訊資料執行所述使用者介面操作。
圖10示意了依據本發明一實施例之透過所述管理伺服器30將所述查詢節點10與所述一個或多個幫助節點20配對的方法，所述方法由一系列指令執行。在一實施例中，可以由儲存於所述管理伺服器30的記憶器中的指令執行。所述方法可以執行如下步驟。步驟S601，管理伺服器30從所述查詢節點10接收所述查詢節點10的IP位址以及與所述查詢節點10周圍的環境有關的內容。
步驟S602，所述管理伺服器30可以根據上述接收到的IP位址及所述內容，為所述查詢節點10配對所述一個或多個幫助節點20中至少一個幫助節點，如第一幫助節點21。
步驟S603，所述管理伺服器30可以發送一連線請求、所述內容及所述查詢節點10的IP位址至所述一個或多個幫助節點20。
步驟S604，所述管理伺服器30可以接收所述一個或多個幫助節點20中至少一個幫助節點的IP位址並發送該IP位址至所述查詢節點10。因此所述查詢節點10與所述一個或多個幫助節點20中至少一個幫助節點之間可以具有彼此的IP位址。所述查詢節點10與所述一個或多個幫助節點20中至少一個幫助節點之間可以基於所述IP位址建立一連線。
圖11圖示地示意了依據本發明一實施例之一系列的使用者介面操作以執行所述查詢節點10與所述一個或多個幫助節點20之間的即時視訊互動。當所述一個或多個幫助節點20的所述通訊模組303透過所述互動層從所述查詢節點10接收到串流視訊資料401後，所述串流視訊資料401可以顯示於所述一個或多個幫助節點20上。所述一個或多個幫助節點20可以在各自的顯示單元上共享相同的所述串流視訊資料401。所述一個或多個幫助節點20可以進一步地接收使用者輸入資料並傳輸至使用者介面資料402。例如，所述使用者輸入資料可以是在所述一個或多個幫助節點20的觸控面板上畫的一個圓。所述一個或多個幫助節點20可以根據所述使用者介面資料402執行第一使用者介面操作以取得第一結果403，並在所述串流視訊資料401上顯示所述第一結果403。所述一個或多個幫助節點20可以透過所述互動層發送所述使用者介面資料402至所述查詢節點10。所述查詢節點10可以根據所述使用者介面資料402執行第二使用者介面操作並取得第二結果405。所述查詢節點10可以在所述串流視訊資料404上顯示所述第二結果405。所述串流視訊資料404可以與所述顯示於所述一個或多個幫助節點20上的串流視訊資料401相同。
圖12圖示地示意了依據本發明另一實施例之一系列的使用者介面操作以執行所述查詢節點10與所述一個或多個幫助節點20之間的即時視訊互動。當所述一個或多個幫助節點20的所述通訊模組303透過所述互動層從所述查詢節點10接收到串流視訊資料501後，所述串流視訊資料501可以顯示於所述一個或多個幫助節點20上。所述一個或多個幫助節點20可以接收使用者輸入資料並傳輸至使用者介面資料502。其中所述使用者輸入資料可以是在所述一個或多個幫助節點20的觸控面板上的輕擊。所述一個或多個幫助節點20可以根據所述使用者介面資料502執行第一使用者介面操作以取得第一結果503，並在所述串流視訊資料501上顯示所述第一結果503。所述第一結果503可以是在所述串流視訊資料501上顯示的一個圓。所述查詢節點10可以根據從所述一個或多個幫助節點20接收的所述使用者介面資料502執行第二使用者介面操作並取得第二結果505。所述第二結果505可以是對應於所述第一結果503的一個類似的圓。所述查詢節點10可以在所述串流視訊資料504上顯示所述第二結果505。所述串流視訊資料504可以與所述顯示於所述一個或多個幫助節點20上的串流視訊資料501相同。
圖13圖示地示意了依據本發明一實施例之一系列的使用者介面操作以執行所述查詢節點10與所述一個或多個幫助節點20之間的合作。第一串流視訊資料601可以顯示於所述查詢節點10上。所述查詢節點10可以接收第一使用者輸入資料與第二使用者輸入資料，並分別傳輸至第一使用者介面資料602與第二使用者介面資料603。其中所述第一與第二使用者輸入資料可以是在顯示所述第一串流視訊資料601螢幕上位於多個項目(Item)上的輕擊。所述查詢節點10可以根據所述第一使用者介面資料602與第二使用者介面資料603執行第一使用者介面操作以取得第一結果604與第二結果605，並在所述第一串流視訊資料601上顯示所述第一結果604與所述第二結果605。所述第一結果604與第二結果605可以是位於所顯示的串流視訊資料的多個項目上的多個圓。所述查詢節點10可以透過所述互動層發送所述第一使用者介面資料602與第二使用者介面資料603之所述一個或多個幫助節點20。所述一個或多個幫助節點20可以根據所述第一使用者介面資料602與第二使用者介面資料603執行第二使用者介面操作以取得第三結果607與第四結果608。其中所述第三結果607與第四結果608可以是對應於所述第一結果604與第二結果605的類似的多個圓。所述一個或多個幫助節點20可以在所述第二串流視訊資料606上顯示所述第三結果607與所述第四結果608。所述一個或多個幫助節點20可以接收第三使用者輸入資料並傳輸至第三使用者介面資料609。所述第三使用者輸入資料可以是在所述一個或多個幫助節點20的觸控面板上的一個輕擊，其可以表示對應於所述第三結果607與所述第四結果608所作出了一個選擇。所述一個或多個幫助節點20可以根據所述第三使用者介面資料609執行第三使用者介面操作並取得第五結果610。其中，所述第五結果610可以一個飛濺圖標，用以取代第四結果608而區別於所述第三結果607。所述第五結果610可以在所述第二串流視訊資料606上顯示以取代所述第四結果608。所述一個或多個幫助節點20可以透過所述互動層發送所述第三使用者介面資料609至所述查詢節點10。所述查詢節點10可以依據該第三使用者介面資料執行第四使用者介面操作以取得第六結果611，並在所述第一串流視訊資料601上顯示所述第六結果611以取代所述第二結果605。所述第二串流視訊資料606可以與所述顯示於所述查詢節點10上的第一串流視訊資料601相同。
圖14圖示地示意了依據本發明一實施例之一系列的使用者介面操作以執行所述查詢節點10與所述一個或多個幫助節點20之間的即時視訊互動。當所述一個或多個幫助節點20的所述通訊模組303透過所述互動層從所述查詢節點10接收到串流視訊資料701後，所述串流視訊資料701可以顯示於所述一個或多個幫助節點20上。所述一個或多個幫助節點20可以進一步地接收使用者輸入資料並傳輸至使用者介面資料702。其中，所述使用者輸入資料可以是使用多個手指在所述一個或多個幫助節點20的觸控面板上從左滑到右的滑動。所述一個或多個幫助節點20可以根據所述使用者介面資料702執行第一使用者介面操作以取得第一結果703，並在所述串流視訊資料701上顯示所述第一結果703。所述第一結果703可以是顯示於所述串流視訊資料701上的對應於所述使用者輸入資料的命令，例如一右轉的指示。所述一個或多個幫助節點20可以透過所述互動層發送所述使用者介面資料702至所述查詢節點10。所述查詢節點10可以根據所述使用者介面資料702執行第二使用者介面操作並取得第二結果705。所述第二結果705可以是對應於所述第一結果703的一類似命令，如一右轉的命令。所述查詢節點10可以在所述串流視訊資料704上顯示所述第二結果705。所述串流視訊資料704可以與所述顯示於所述一個或多個幫助節點20上的串流視訊資料701相同。
圖15圖示地示意了依據本發明一實施例之一系列的使用者介面操作以執行從所述一個或多個幫助節點20到所述計算裝置200的導航指令。當所述一個或多個幫助節點20的所述通訊模組303透過所述互動層從所述計算裝置200接收到串流視訊資料801後，所述串流視訊資料801可以顯示於所述一個或多個幫助節點20上。所述一個或多個幫助節點20可以進一步地接收使用者輸入資料並傳輸至使用者介面資料802。其中，所述使用者輸入資料可以是使用兩個手指在所述一個或多個幫助節點20的觸控面板上從左到右畫出的一個半圓。所述一個或多個幫助節點20可以根據所述使用者介面資料802執行第一使用者介面操作以取得第一結果803，並在所述串流視訊資料801上顯示所述第一結果803。所述第一結果803可以是顯示於所述串流視訊資料801上的對應於所述使用者輸入資料的命令，例如一右轉的指示。所述一個或多個幫助節點20可以透過所述互動層發送所述使用者介面資料802至所述計算裝置200。所述計算裝置200可以根據所述使用者介面資料802執行第二使用者介面操作並取得第二結果805。所述第二結果805可以是對應於所述第一結果803針對所述載具主體的導航命令，如一右轉的命令。
以上所述僅為本發明之較佳具體實例，非因此即侷限本發明之專利範圍，故舉凡運用本發明內容所為之等效變化，均同理皆包含於本發明之範圍內，合予陳明。
10‧‧‧查詢節點
20‧‧‧幫助節點
21‧‧‧第一幫助節點
22‧‧‧第二幫助節點
30‧‧‧管理伺服器
40‧‧‧網路
100‧‧‧第一電子裝置
200‧‧‧計算裝置
300‧‧‧第二電子裝置
101、201、301‧‧‧處理器
102、202、302‧‧‧記憶體
103、203、303‧‧‧通訊模組
104、204‧‧‧視訊拍攝單元
105、205、304‧‧‧輸入模組
106、305‧‧‧顯示單元
206‧‧‧執行單元
S101~S109‧‧‧步驟
S201~S208‧‧‧步驟
S301~S306‧‧‧步驟
S401~S406‧‧‧步驟
S501~S506‧‧‧步驟
S601~S604‧‧‧步驟
無
10‧‧‧查詢節點
20‧‧‧幫助節點
21‧‧‧第一幫助節點
22‧‧‧第二幫助節點
30‧‧‧管理伺服器
40‧‧‧網路

Claims (35)

  1. 一種即時視訊互動方法，應用於第一電子裝置中，該方法包括：
    由所述第一電子裝置透過一管理伺服器發送一連線請求、一與所述第一電子裝置周圍的環境有關的內容，以及所述第一電子裝置的網際協定IP位址至一第二電子裝置，其中所述管理伺服器依據從所述第一電子裝置接收到的上述資料將所述第一電子裝置與所述第二電子裝置配對；
    由所述第一電子裝置建立所述第一電子裝置與所述第二電子裝置之間的連線，其中，所述連線包括用於傳輸串流視訊資料至所述第二電子裝置之串流視訊層以及用於交換所述第二電子裝置的使用者輸入資料及傳輸控制資料至所述第二電子裝置之互動層；
    由所述第一電子裝置取得所述第一電子裝置所處環境的視訊並由所述第一電子裝置顯示所述視訊；
    由所述第一電子裝置透過所述串流視訊層發送所述視訊至所述第二電子裝置，以由所述第二電子裝置顯示所述視訊；
    由所述第一電子裝置透過所述互動層接收所述第二電子裝置的一個或多個使用者輸入；及
    由所述第一電子裝置依據所述接收到的使用者輸入執行第一使用者介面操作，並顯示所述第一使用者介面在所述視訊上的操作結果。
  2. 如申請專利範圍第1項所述之即時視訊互動方法，該方法還包括：
    由所述第一電子裝置接收所述第二電子裝置的身份；及
    發送接收到的第二電子裝置的身份至所述第二電子裝置，其中，所述管理伺服器根據該身份將所述第一電子裝置與所述第二電子裝置進行配對。
  3. 如申請專利範圍第1項所述之即時視訊互動方法，該方法還包括：
    從所述管理伺服器接收依據所述連線請求、所述內容及所述IP位址產生的鏈接，其中所述鏈接使得一個或多個訪問者能夠從所述管理伺服器接收到所述連線請求、所述內容及所述IP位址；及
    產生包括所述鏈接的社群網路服務（SNS）訊息，並發送該SNS訊息至一SNS伺服器。
  4. 如申請專利範圍第1項所述之即時視訊互動方法，該方法還包括：
    由所述第一電子裝置取得從所述第一電子裝置周圍的環境收集的地理資料；及
    由所述第一電子裝置透過所述互動層發送所述地理資料至所述第二電子裝置以與所述視訊同時顯示於所述第二電子裝置上。
  5. 如申請專利範圍第1項所述之即時視訊互動方法，該方法還包括：
    由所述第一電子裝置從所述視訊中識別一物體；
    由所述第一電子裝置取得所述物體的一個或多個特徵；及
    由所述第一電子裝置透過所述互動層發送所述一個或多個特徵至所述第二電子裝置以與所述視訊同時顯示於所述第二電子裝置上。
  6. 如申請專利範圍第1項所述之即時視訊互動方法，該方法還包括：
    由所述第一電子裝置將一個或多個演算機制應用於所述一個或多個使用者輸入及所述視訊，以確定一個或多個定義為與所述環境互動的命令；及
    由所述第一電子裝置執行所述一個或多個命令以控制所述第一電子裝置執行所述與所述環境的互動。
  7. 如申請專利範圍第4項所述之即時視訊互動方法，該方法還包括：
    由所述第一電子裝置基於所述地理資料取得地圖資料；及
    由所述第一電子裝置執行一第二使用者介面操作以將所述地圖資料與所述視訊同時顯示。
  8. 一種即時視訊互動方法，應用於所述第一電子裝置中，該方法包括：
    由所述第一電子裝置建立所述第一電子裝置與所述第二電子裝置之間的連線，其中，所述連線包括用於傳輸串流視訊資料至所述第二電子裝置之串流視訊層以及用於在所述第一電子裝置與第二電子裝置之間交換從觸控資料或手勢資料選擇的使用者輸入資料；
    由所述第一電子裝置取得所述第一電子裝置所處環境的視訊並由所述第一電子裝置顯示所述視訊；
    由所述第一電子裝置透過所述串流視訊層發送所述視訊至所述第二電子裝置，以由所述第二電子裝置顯示所述視訊；
    由所述第一電子裝置透過所述互動層從所述第二電子裝置接收第一使用者輸入；及
    將一個或多個觸控/手勢演算機制應用於所述第一使用者輸入以確定第一使用者介面操作；
    執行所述第一使用者介面操作，並顯示所述第一使用者介面操作在所述視訊上的操作結果。
  9. 如申請專利範圍第8項所述之即時視訊互動方法，所述第一使用者介面操作定義為對所述視訊的操縱，其中，所述第一電子裝置依據所述第一使用者介面操作顯示操縱後的視訊。
  10. 如申請專利範圍第8項所述之即時視訊互動方法，該方法還包括：
    由所述第一電子裝置取得一螢幕截圖，該螢幕截圖包括所述視訊的幀影像及所述第一使用者介面操作的操作結果；及
    透過所述互動層發送所述螢幕截圖至所述第二電子裝置。
  11. 如申請專利範圍第8項所述之即時視訊互動方法，所述連線進一步地包括一用於交換所述第一電子裝置與所述第二電子裝置之間之語音資料的語音通訊層。
  12. 如申請專利範圍第8項所述之即時視訊互動方法，該方法還包括：
    當顯示所述視訊時，由所述第一電子裝置接收使用者輸入的觸控/手勢資料；
    依據所接收的觸控/手勢資料對所述視訊執行第三使用者介面操作，並顯示所述第三使用者介面操作在所述視訊上的操作結果；及
    由所述第一電子裝置透過所述互動層發送所述觸控/手勢資料至所述第二電子裝置，以使得所述第二電子裝置依據所接收的觸控/手勢資料對所述視訊執行所述第三使用者介面操作。
  13. 一種使能即時視訊互動的第一電子裝置，該第一電子裝置包括：
    一個或多個處理器；
    一記憶體；
    由所述一個或多個處理器控制的一通訊模組；
    連接於所述記憶體且由所述一個或多個處理器控制的一視訊拍攝單元；
    一輸入模組；
    一顯示單元；其中，所述一個或多個處理器用於執行：
    透過一管理伺服器發送一連線請求、由所述輸入模組接收的與所述第一電子裝置周圍的環境有關的一內容以及所述第一電子裝置的IP位址至一第二電子裝置之指令，其中，所述管理伺服器依據從所述第一電子裝置接收到的上述資料將所述第一電子裝置與所述第二電子裝置配對；
    由所述通訊模組建立所述第一電子裝置與所述第二電子裝置之間的連線之指令，其中，所述連線包括用於傳輸串流視訊資料至所述第二電子裝置之串流視訊層以及用於交換所述第一電子裝置與所述第二電子裝置之間之使用者輸入資料之互動層；
    由所述視訊拍攝單元取得所述第一電子裝置所處環境的視訊並顯示所述視訊於所述顯示單元上之指令；
    由所述通訊模組透過所述串流視訊層發送所述視訊至所述第二電子裝置之指令，以由所述第二電子裝置顯示所述視訊；
    由所述通訊模組透過所述互動層接收所述第二電子裝置的一個或多個使用者輸入之指令；及
    依據所述接收到的使用者輸入對所述視訊執行一使用者介面操作並顯示所述第一使用者介面操作在所述視訊上的操作結果之指令。
  14. 如申請專利範圍第13項所述之使能即時視訊互動的第一電子裝置，該第一電子裝置還包括：
    一地理感測器，用於取得所述第一電子裝置周圍的環境的地理資料；以及所述一個或多個處理器還用於執行：
    由所述通訊模組透過所述互動層發送所述地理資料至所述第二電子裝置之指令。
  15. 如申請專利範圍第14項所述之使能即時視訊互動的第一電子裝置，所述一個或多個處理器還用於執行：
    由所述地理感測器基於所取得的地理資料取得對應的地圖資料之指令；
    執行第二使用者介面操作以將所述地圖資料與所述視訊同時顯示之指令；及
    由顯示單元顯示所述第二使用者介面操作在所述視訊上的操作結果之指令。
  16. 如申請專利範圍第14項所述之使能即時視訊互動的第一電子裝置，所述一個或多個處理器還用於執行：
    從所述視訊中識別一物體之指令；
    取得所述物體的一個或多個特徵之指令；及
    由所述通訊模組透過所述互動層發送所述一個或多個特徵之所述第二電子裝置之指令，以使得所述第二電子裝置在所述視訊上顯示所述一個或多個特徵。
  17. 如申請專利範圍第13項所述之使能即時視訊互動的第一電子裝置，所述一個或多個處理器還用於執行：
    由所述通訊模組透過所述互動層接收所述第二電子裝置的第一使用者輸入之指令；
    將一個或多個觸控/手勢演算機制應用於所述第一使用者輸入以確定一使用者介面操作之指令；及
    對所述視訊執行所述確定的使用者介面操作並在所述顯示單元上顯示所述第一使用者介面操作在所述視訊上的操作結果之指令。
  18. 如申請專利範圍第17項所述之使能即時視訊互動的第一電子裝置，所述輸入模組包括一個或多個觸控感測器以偵測手指接觸並產生觸控資料；以及所述一個或多個處理器還用於執行：
    將一個或多個觸控演算機制應用於所述觸控資料以確定一第二使用者輸入之指令；
    依據所述第二使用者輸入對所述視訊執行一第二使用者介面操作並顯示所述第二使用者介面操作在所述視訊上的操作結果之指令；及
    由所述通訊模組透過所述互動層發送所述第二使用者輸入至所述第二電子裝置之指令，以使得所述第二電子裝置依據所述第二使用者輸入執行所述第二使用者介面操作。
  19. 如申請專利範圍第17項所述之使能即時視訊互動的第一電子裝置，所述輸入模組包括一個或多個光感測器以偵測使用者的行為並產生手勢資料；以及所述一個或多個處理器還用於執行：
    將一個或多個手勢演算機制應用於所述手勢資料以確定一第三使用者輸入之指令；
    依據所述第三使用者輸入對所述視訊執行一第三使用者介面操作並顯示所述第三使用者介面操作在所述視訊上的操作結果之指令；及
    由所述通訊模組透過所述互動層發送所述第三使用者輸入至所述第二電子裝置之指令，以使得所述第二電子裝置依據所述第三使用者輸入執行所述第三使用者介面操作。
  20. 如申請專利範圍第13項所述之使能即時視訊互動的第一電子裝置，所述一個或多個處理器還用於執行：
    取得一螢幕截圖之指令，該螢幕截圖包括所述視訊的一幀影像以及所述第一使用者介面操作的操作結果；及
    由所述通訊模組透過所述互動層發送所述螢幕截圖至所述第二電子裝置之指令。
  21. 一種即時視訊互動方法，應用第二電子裝置中，該方法包括：
    由所述第二電子裝置建立所述第一電子裝置與所述第二電子裝置之間的連線，其中，所述連線包括用於接收來自所述第一電子裝置之串流視訊資料之串流視訊層以及用於交換所述第一電子裝置與所述第二電子裝置之間之使用者輸入資料之互動層；
    由所述第二電子裝置透過所述串流視訊層從所述第一電子裝置接收一視訊，其中所述視訊是由所述第一電子裝置從所述第一電子裝置周圍的環境取得的，且該視訊顯示於所述第一電子裝置；
    由所述第二電子裝置顯示所述視訊；
    由所述第二電子裝置偵測一觸控/手勢輸入並將一個或多個演算機制應用於所述觸控/手勢輸入以確定一使用者介面操作；
    由所述第二電子裝置對所述視訊執行所述使用者介面操作並顯示所述使用者介面操作在所述視訊上的操作結果；及
    由所述第二電子裝置透過所述互動層傳輸所述觸控/手勢輸入至所述第一電子裝置，以使得所述第一電子裝置對所述視訊執行所述使用者介面操作。
  22. 如申請專利範圍第21項所述之即時視訊互動方法，所述觸控/手勢輸入對應於在所述第二電子裝置的一觸控螢幕上的手指接觸的一位置，其中，所述使用者介面操作對應於在所述位置處呈現一使用者介面。
  23. 如申請專利範圍第21項所述之即時視訊互動方法，所述觸控/手勢輸入對應於在所述第二電子裝置的一觸控螢幕上手指接觸的一移動路徑，其中，所述使用者介面操作對應於沿著所述移動路徑呈現一使用者介面。
  24. 如申請專利範圍第21項所述之即時視訊互動方法，所述觸控/手勢輸入對應於在所述第二電子裝置的一觸控螢幕上一個或多個手指接觸，其中，所述第二電子裝置進一步地從所述觸控/手勢輸入中識別一手勢，並確定一對應的視訊操縱作為所述使用者介面操作。
  25. 如申請專利範圍第21項所述之即時視訊互動方法，所述連線進一步地包括一用於交換所述第一電子裝置與所述第二電子裝置之間之語音資料的語音通訊層。
  26. 一種使能即時視訊互動的第二電子裝置，該第二電子裝置包括：
    一個或多個處理器；
    一記憶體；
    由所述一個或多個處理器控制的一通訊模組；
    一輸入模組；
    一顯示單元；其中，所述一個或多個處理器用於執行：
    由所述通訊模組從一管理伺服器接收一第一電子裝置的IP位址、與所述第一電子裝置周圍的環境有關的一內容以及一連線請求之指令；
    由所述通訊模組建立所述第一電子裝置與所述第二電子裝置之間的連線之指令，其中，所述連線包括用於接收來自所述第一電子裝置之串流視訊資料之串流視訊層以及用於交換所述第一電子裝置與所述第二電子裝置之間之使用者輸入資料之互動層；
    由所述通訊模組透過所述串流視訊層從所述第一電子裝置接收一視訊之指令，其中所述視訊是由所述第一電子裝置從所述第一電子裝置周圍的環境取得的，且該視訊顯示於所述第一電子裝置上；
    由所述顯示單元顯示所述視訊之指令；
    偵測一觸控/手勢輸入並將一個或多個演算機制應用於所述觸控/手勢輸入以確定一使用者介面操作之指令；
    對所述視訊執行所述使用者介面操作並顯示所述使用者介面操作在所述視訊上的操作結果之指令；及
    由透過所述互動層傳輸所述觸控/手勢輸入至所述第一電子裝置之指令，以使得所述第一電子裝置對所述視訊執行所述使用者介面操作。
  27. 如申請專利範圍第26項所述之使能即時視訊互動的第二電子裝置，所述輸入模組包括一個或多個觸控感測器以用於偵測手指接觸並產生所述觸控/手勢輸入。
  28. 如申請專利範圍第26項所述之使能即時視訊互動的第二電子裝置，所述輸入模組包括一個或多個光感測器以用於識別至少一個手勢並產生所述觸控/手勢輸入。
  29. 一種即時視訊互動方法，應用於一管理伺服器中，該方法包括：
    由所述管理伺服器從一查詢裝置接收該查詢裝置的IP位址、與所述查詢裝置周圍的環境有關的一內容；
    由所述管理伺服器依據上述從所述查詢裝置接收到的資料應用一個或多個演算機制以確定一個或多個幫助裝置；
    由所述管理伺服器發送一連線請求、所述內容及所述查詢裝置的IP位址至所述一個或多個幫助裝置；
    接收所述一個或多個幫助裝置中至少一個幫助裝置的IP位址，並將該至少一個幫助裝置的IP位址發送至所述查詢裝置；
    其中，所述至少一個幫助裝置與所述查詢裝置建立連線，所述連線包括用於從所述查詢裝置傳輸從所述查詢裝置周圍的環境收集的視訊至所述至少一個幫助裝置之串流視訊層以及用於交換所述查詢裝置與所述至少一個幫助裝置之間之使用者輸入資料之互動層；以及
    所述查詢裝置與所述至少一個幫助裝置均顯示所述視訊，且依據所述使用者輸入資料在所述視訊上產生一個或多個使用者介面。
  30. 如申請專利範圍第29項所述之即時視訊互動方法，所述一個或多個演算機制進一步地包括一用於確定通訊地連線所述管理伺服器的裝置作為所述一個或多個幫助裝置的演算機制。
  31. 如申請專利範圍第29項所述之即時視訊互動方法，該方法還包括：
    由所述管理伺服器接收所述查詢裝置的一地理位置；及
    所述一個或多個演算機制包括一用於基於所述查詢裝置的地理位置確定一個或多個幫助裝置的演算機制。
  32. 如申請專利範圍第29項所述之即時視訊互動方法，該方法還包括：
    依據從所述查詢裝置接收到的資料產生一鏈接，並發送所述鏈接至所述查詢裝置；及其中所述一個或多個演算機制包括確定所述鏈接的一個或多個訪問者所對應的一個或多個幫助裝置的演算機制。
  33. 一種用於提供來自內容提供者的內容之電腦程式產品，當電腦載入該電腦程式並執行後，可完成申請專利範圍第1項所述之方法。
  34. 一種用於提供來自內容提供者的內容之電腦程式產品，當電腦載入該電腦程式並執行後，可完成申請專利範圍第8項所述之方法。
  35. 一種用於提供來自內容提供者的內容之電腦程式產品，當電腦載入該電腦程式並執行後，可完成申請專利範圍第21項所述之方法。
TW104133984A 2015-07-21 2015-10-16 即時視訊互動方法與裝置 TW201716975A (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
US14/804,345 US20170026617A1 (en) 2015-07-21 2015-07-21 Method and apparatus for real-time video interaction by transmitting and displaying user interface correpsonding to user input

Publications (1)

Publication Number Publication Date
TW201716975A true TW201716975A (zh) 2017-05-16

Family

ID=57836300

Family Applications (1)

Application Number Title Priority Date Filing Date
TW104133984A TW201716975A (zh) 2015-07-21 2015-10-16 即時視訊互動方法與裝置

Country Status (2)

Country Link
US (1) US20170026617A1 (zh)
TW (1) TW201716975A (zh)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7035669B2 (ja) * 2018-03-19 2022-03-15 セイコーエプソン株式会社 表示装置の制御方法、表示装置および表示システム
WO2020251385A1 (en) * 2019-06-14 2020-12-17 Ringcentral, Inc., (A Delaware Corporation) System and method for capturing presentation gestures
CN111309279B (zh) * 2020-05-06 2020-11-24 上海幻电信息科技有限公司 多屏互动显示方法及装置
CN114185503B (zh) * 2020-08-24 2023-09-08 荣耀终端有限公司 多屏交互的系统、方法、装置和介质

Also Published As

Publication number Publication date
US20170026617A1 (en) 2017-01-26

Similar Documents

Publication Publication Date Title
US11171893B2 (en) Methods and systems for providing virtual collaboration via network
US11032709B2 (en) Host a conference call
US10484437B2 (en) Remote support service with two-way smart whiteboard
JP6368033B2 (ja) 端末、サーバ、および端末制御方法
US20140181683A1 (en) Method and system for controlling external device
WO2013145566A1 (en) Information processing apparatus, information processing method, and program
JP6531436B2 (ja) 通信システム、伝送端末、通信方法、プログラム
KR20150032674A (ko) 통신 시스템
US11416202B2 (en) Communication terminal, communication system, method of sharing data, and recording medium
US11394757B2 (en) Communication terminal, communication system, and method of sharing data
WO2012133916A1 (en) Transmission management system, transmission system, program, program supply system, and maintenance system
TW201716975A (zh) 即時視訊互動方法與裝置
JP2013145557A (ja) 携帯式電子装置に用いられるインスタントメッセージング方法及びそのシステム
US20190096130A1 (en) Virtual mobile terminal implementing system in mixed reality and control method thereof
US20160050280A1 (en) Wireless Access Point for Facilitating Bidirectional, Application-Layer Communication Among Computing Devices
CN111367444A (zh) 应用功能执行方法、装置、电子设备及存储介质
AU2015272608A1 (en) Control system, communication system, control method, and program
EP3113489A1 (en) Transfer control system, transfer system, transfer control method, and recording medium
US11553158B2 (en) Information processing apparatus, information processing method, and program
AU2014346878B2 (en) Digital glass enhanced media system
WO2016117249A1 (ja) 通信端末、通信システム、表示制御方法、及びプログラム
CN115605835A (zh) 显示设备与终端设备的交互方法、存储介质及电子设备
US11729281B2 (en) Calibration data transmissions
KR20120050258A (ko) 화상 회의 시스템 및 그 방법
CN106033246B (zh) 一种数据传输方法及电子设备