TWI539291B - 鏡像傳輸方法 - Google Patents

鏡像傳輸方法 Download PDF

Info

Publication number
TWI539291B
TWI539291B TW104109199A TW104109199A TWI539291B TW I539291 B TWI539291 B TW I539291B TW 104109199 A TW104109199 A TW 104109199A TW 104109199 A TW104109199 A TW 104109199A TW I539291 B TWI539291 B TW I539291B
Authority
TW
Taiwan
Prior art keywords
electronic device
transmitting
network
image
end electronic
Prior art date
Application number
TW104109199A
Other languages
English (en)
Other versions
TW201635158A (zh
Inventor
周冠宇
劉世斌
張政雄
王彥翔
郭嘉珍
Original Assignee
奇揚網科股份有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 奇揚網科股份有限公司 filed Critical 奇揚網科股份有限公司
Priority to TW104109199A priority Critical patent/TWI539291B/zh
Priority to CN201510827479.0A priority patent/CN105991760B/zh
Priority to US15/059,823 priority patent/US10148994B2/en
Application granted granted Critical
Publication of TWI539291B publication Critical patent/TWI539291B/zh
Publication of TW201635158A publication Critical patent/TW201635158A/zh

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/4104—Peripherals receiving signals from specially adapted client devices
    • H04N21/4122—Peripherals receiving signals from specially adapted client devices additional display device, e.g. video projector
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/10—Protocols in which an application is distributed across nodes in the network
    • H04L67/1095—Replication or mirroring of data, e.g. scheduling or transport for data synchronisation between network nodes
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/4302—Content synchronisation processes, e.g. decoder synchronisation
    • H04N21/4307—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen
    • H04N21/43076—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen of the same content streams on multiple devices, e.g. when family members are watching the same movie on different devices
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/436—Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
    • H04N21/4363—Adapting the video stream to a specific local network, e.g. a Bluetooth® network
    • H04N21/43637—Adapting the video stream to a specific local network, e.g. a Bluetooth® network involving a wireless protocol, e.g. Bluetooth, RF or wireless LAN [IEEE 802.11]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/439—Processing of audio elementary streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442—Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/44227—Monitoring of local network, e.g. connection or bandwidth variations; Detecting new devices in the local network

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Databases & Information Systems (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Mobile Radio Communication Systems (AREA)

Description

鏡像傳輸方法 【0001】
本發明涉及無線傳輸，尤其涉及鏡像傳輸方法。
 【0002】
近年來，各式可攜式電子裝置，例如智慧型行動電話、平板電腦等迅速發展，並且已普及於一般大眾的生活週遭。目前，已有許多使用者習慣以該些可攜式電子裝置取代傳統的桌上型電腦或筆記型電腦，並直接使用該些可攜式電子裝置來儲存、編輯、播放大容量的多媒體檔案。
【0003】
上述該些可攜式電子裝置確實可便於使用者隨時隨地進行多媒體檔案的播放與觀賞，然而為了攜帶便利，該些可攜式電子裝置一般僅會搭載尺寸較小的顯示螢幕。因此，許多使用者於家中觀賞儲存在可攜式電子裝置中的多媒體檔案時，常會藉由鏡像傳輸功能，將於該可攜式電子裝置播放多媒體檔案時所生的影像及聲音無線傳送至具有大尺寸顯示螢幕的電子裝置，例如智慧型電視上播放(例如通過Google發售的Chromecast產品或是Apple發售的Apple TV產品)。
【0004】
上述鏡像傳輸功能主要是通過無線網路連接一傳送端電子裝置(例如智慧型行動電話)及一接收端電子裝置(例如智慧型電視)，以擷取該傳送端電子裝置的影像幀及聲音訊號並傳送至該接收端電子裝置上播放。因此，當該無線網路的頻寬不足，或是有突波產生時，將可能造成資料傳輸的不穩定。
【0005】
具體而言，於現有的鏡像傳輸技術中，當頻寬不足或是有突波產生，造成無線網路不穩定時，該接收端電子裝置接收到的聲音訊號將可能會有不連續的問題，或者甚至可能會有爆音產生，進而影響到使用者聆聽的舒適度。
【0006】
另外，當無線網路因頻率不足或突波問題造成擁塞時，該接收端電子裝置會因為無法持續接收影像幀而無法與該傳送端電子裝置進行同步顯示。而當無線網路的狀態恢復正常時，該接收端電子裝置將會在一瞬間接收到大量先前未傳輸完成的影像幀，並將該些影像幀於瞬間播放完畢，進而產生影像的快速。如此一來，使用者將無法於該接收端電子裝置得到正常的影像及聲音資訊，進而影響使用者使用鏡像傳輸技術的意願。
 【0007】
本發明的主要目的，在於提供一種鏡像傳輸方法，可於網路不穩定時，改變擷取傳送端電子裝置播放的聲音並傳送至接收端電子裝置播放的方式，以降低傳輸的資料量，同時避免使用者於接收端電子裝置接收到不連續或是有爆音現象的聲音訊號。
【0008】
為了達成上述之目的，本發明提供了一種 擷取傳送端電子裝置的影像幀以及聲音訊號，並將影像幀及聲音訊號無線傳送至接收端電子裝置上播放的鏡像傳輸方法。同時，本發明於傳輸過程中持續監控網路狀態，並且於網路狀態不穩定時，停止擷取與傳送該傳送端電子裝置的聲音訊號至該接收端電子裝置，同時令聲音由該傳送端電子裝置上的聲音播放模組直接播放。
【0009】
本發明對照現有技術可達到的技術功效在於，藉由在網路不穩定時停止擷取與傳送該傳送端裝置的聲音訊號至該接收端裝置，並令聲音訊號直接由該傳送端裝置上進行播放，可令使用者從該傳送端裝置得到正確的聲音訊號，不會因為網路不穩定而被迫於該接收端裝置處取得不連續或是有爆音現象的聲音訊號，進而影響正常的鏡像傳輸功能所能帶來的效果。
【0010】
另外，本發明還可在網路不穩定時，調整擷取該傳送端裝置的影像幀的參數，以及傳送該影像幀至該接收端裝置的參數，進而可大幅降低該傳送端裝置傳輸的資料量，解決因為該傳輸的資料量太大，或是有突波產生而導致網路的頻寬不足，難以順利進行鏡像傳輸的問題。
 【0060】
1‧‧‧傳輸端電子裝置
【0061】
11‧‧‧顯示模組
【0062】
12‧‧‧聲音播放模組
【0063】
13‧‧‧處理器
【0064】
130‧‧‧鏡像傳輸軟體
【0065】
14‧‧‧無線傳輸模組
【0066】
2‧‧‧接收端電子裝置
【0067】
21‧‧‧中央處理單元
【0068】
210‧‧‧鏡像接收軟體
【0069】
22‧‧‧無線傳輸單元
【0070】
23‧‧‧輸出單元
【0071】
3‧‧‧顯示裝置
【0072】
31‧‧‧顯示單元
【0073】
32‧‧‧聲音播放單元
【0074】
33‧‧‧輸入單元
【0075】
A1‧‧‧聲音訊號
【0076】
F1‧‧‧影像幀
【0077】
S10~S22‧‧‧傳輸步驟
【0078】
S30~S48‧‧‧傳輸步驟
【0079】
S60~S78‧‧‧傳輸步驟
【0080】
S80~S98‧‧‧傳輸步驟
【0011】
圖1為本發明的第一具體實施例的系統架構圖。
【0012】
圖2為本發明的第一具體實施例的系統方塊圖。
【0013】
圖3為本發明的第一具體實施例的傳輸流程圖。
【0014】
圖4為本發明的第二具體實施例的傳輸流程圖。
【0015】
圖5為本發明的第三具體實施例的傳輸流程圖。
【0016】
圖6為本發明的第四具體實施例的傳輸流程圖。
 【0017】
茲就本發明之一較佳實施例，配合圖式，詳細說明如後。
【0018】
首請參閱圖1，為本發明的第一具體實施例的系統架構圖。本發明揭露一種鏡像傳輸方法，主要運用於一傳送端電子裝置1及一接收端電子裝置2，其中該傳送端電子裝置1與該接收端電子裝置2通過一網路彼此無線連接。當本發明的該鏡像傳輸方法被執行時，該鏡像傳輸方法將擷取該傳送端電子裝置1原本藉由其上的一顯示模組11顯示的一影像幀(frame)F1，以及原本藉由一聲音播放模組12播放的一聲音訊號A1(如圖2所示)，並且將所擷取的該影像幀F1與該聲音訊號A1經由該網路無線傳送至該接收端電子裝置2以進行遠端播放。
【0019】
值得一提的是，當執行了該鏡像傳輸方法時，該傳送端電子裝置1即停止通過其上的該聲音播放模組12播放該聲音訊號A1，故而使用者無法通過該聲音播放模組12得到該聲音訊號A1。並且，該傳送端電子裝置1可經過設定，令其上的該顯示模組11停止顯示該影像幀F1以節省電力，或是繼續通過該顯示模組11顯示該影像幀F1，達到與該接收端電子裝置2同步播放的目的。
【0020】
於圖1的實施例中，該接收端電子裝置2係電性連接一外接的顯示裝置3，該顯示裝置3具有一顯示單元31及一聲音播放單元32，其中該顯示單元31的顯示尺寸大於該傳送端電子裝置1的該顯示模組11的顯示尺寸。該接收端電子裝置2於無線接收該傳送端電子裝置1傳輸的該影像幀F1及該聲音訊號A1後，係直接傳送至該顯示裝置3，並藉由該顯示裝置3上的該顯示單元31及該聲音播放單元32進行播放。
【0021】
於另一實施例中，該接收端電子裝置2也可直接內建該顯示單元31與該聲音播放單元32(即，將該接收端電子裝置2與該顯示裝置3整合為一體)，不加以限定。
【0022】
請同時參閱圖2，為本發明的第一具體實施例的系統方塊圖。如圖2所示，本實施例中，該傳送端電子裝置1主要具有該顯示模組11、該聲音播放模組12、一處理器13及一無線傳輸模組14，其中該處理器13電性連接該顯示模組11、該聲音播放模組12及該無線傳輸模組14，並且該處理器13儲存有一鏡像傳輸軟體130。
【0023】
本實施例中，該傳送端電子裝置1通過該處理器13執行該鏡像傳輸軟體130，並於該鏡像傳輸軟體130的執行期間持續擷取該顯示模組11上顯示的影像(例如該傳送端電子裝置1的桌面影像，或是執行一多媒體檔案所產生的影像等)，以及該聲音播放模組12所播放的聲音。接著，被擷取的該影像幀F1與該聲音訊號A1經過該鏡像傳輸軟體130的處理後，經由該無線傳輸模組14無線傳輸至對應的該接收端電子裝置2。
【0024】
如圖2所示，該接收端電子裝置2主要具有一中央處理單元21、一無線傳輸單元22及一輸出單元23，其中該中央處理單元21電性連接該無線傳輸單元22及一輸出單元23，並且儲存有一鏡像接收軟體210。該接收端電子裝置2通過該中央處理單元21執行該鏡像接收軟體210，並且於該鏡像接收軟體210被執行後，該接收端電子裝置2可與該傳送端電子裝置1建立連線。
【0025】
本實施例中，該接收端電子裝置2係於該鏡像接收軟體210的執行期間保持與該傳送端電子裝置1的連線，並持續通過該無線傳輸單元22接收該傳送端電子裝置1傳輸的該影像幀F1與該聲音訊號A1。該接收端電子裝置2通過該鏡像接收軟體210處理所接收的該影像幀F1與該聲音訊號A1，並經由該輸出單元23輸出至該接收端電子裝置2所連接的該顯示裝置3進行播放。值得一提的是，若該接收端電子裝置2與該顯示裝置3整合為一體，則該輸出單元23不必然存在。
【0026】
如圖2所示，該顯示裝置3可例如為一智慧型電視，並且包括一輸入單元33，以及與該輸入單元33電性連接的該顯示單元31及該聲音播放單元32。值得一提的是，若該顯示裝置3與該接收端電子裝置2整合為一體，則該輸入單元33不必然存在，該顯示單元31與該聲音播放單元32則內建於該接收端電子裝置2中並且電性連接該中央處理單元21。然而，上述僅為本發明的一較佳具體實例，不應以此為限。
【0027】
該顯示裝置3通過該輸入單元33電性連接該接收端電子裝置2的該輸出單元23，以從該接收端電子裝置2接收該影像幀F1與該聲音訊號A1，並且藉由該顯示單元31播放所接收的該影像幀F1，同時藉由該聲音播放單元32播放所接收的該聲音訊號A1。藉此，使用者可將該傳送端電子裝置1的影像與聲音無線傳送至該接收端電子裝置2(或該顯示裝置3)上播放，達到鏡像傳輸的目的並得到對應的功效。
【0028】
參閱圖3，為本發明的第一具體實施例的傳輸流程圖。要實現本發明的該鏡像傳輸方法，首先需啟動一鏡像傳輸功能(步驟S10)。具體而言，本發明中可藉由執行該鏡像傳輸軟體130與該鏡像接收軟體210，並建立該傳送端電子裝置1與該接收端電子裝置2間的連線，以啟動該鏡像傳輸功能，但不加以限定。
【0029】
該步驟S10後，該傳送端電子裝置1通過該鏡像傳輸軟體130擷取該顯示模組11上顯示的該影像幀F1 (步驟S12)，並且藉由該無線傳輸模組14無線傳送至該接收端電子裝置2進行播放(步驟S14)。同時，該傳送端電子裝置1還通過該鏡像傳輸軟體130擷取該聲音播放模組12播放的該聲音訊號A1 (步驟S16)，並且藉由該無線傳輸模組14無線傳送至該接收端電子裝置2進行播放(步驟S18)。
【0030】
值得一提的是，於本發明中，該傳送端電子裝置1及／或該接收端電子裝置2係於鏡像傳輸過程中持續監控該網路的狀態(步驟S20)，以判斷是否要改變目前的鏡像傳輸方式(容後詳述)。另外，該傳送端電子裝置1或該接收端電子裝置2亦持續判斷該鏡像傳輸功能是否被關閉(步驟S22)，例如，判斷該鏡像傳輸軟體130或該鏡像接收軟體210是否被關閉，或是該傳送端電子裝置1與該接收端電子裝置2之間的連線是否斷除。並且，於該鏡像傳輸功能被關閉之前持續執行上述步驟S12至步驟S20，以持續於該傳送端電子裝置1上擷取該影像幀F1與該聲音訊號A1並無線傳送至該接收端電子裝置2，以達到鏡像傳輸的目的。
【0031】
參閱圖4，為本發明的第二具體實施例的傳輸流程圖。本實施例中，該傳送端電子裝置1及／或該接收端電子裝置2會於鏡像傳輸過程中持續監控該網路的狀態(步驟S30)，並且依據監控所得的數據判斷該網路的狀態是否穩定(步驟S32)。本發明中，當發現該網路的狀態不穩定時，該傳送端電子裝置1停止擷取該聲音訊號A1 (步驟S34)，同時停止傳輸該聲音訊號A1至該接收端電子裝置2(步驟S36)，並且，令該聲音訊號A1直接通過其上的該聲音播放模組12進行播放(步驟S38)。
【0032】
具體地，本實施例是在判斷該網路的狀態不穩定時，控制該鏡像傳輸軟體130停止自該傳送端電子裝置1擷取及對外傳送該聲音訊號A1，並且控制該傳送端電子裝置1直接通過其上的該聲音播放模組12，例如喇叭進行該聲音訊號A1的播放。如此一來，當該網路的狀態不穩定，造成該聲音訊號A1無法流暢、平穩地通過該網路傳送時，不會有勉強將該聲音訊號A1傳送至該接收端電子裝置2，造成該接收端電子裝置2播放的聲音不連續，或是有爆音產生的問題。
【0033】
另一方面，若於該步驟S32中判斷該網路的狀態不穩定，則該傳送端電子裝置1可同時調整該鏡像傳輸軟體130擷取的該影像幀F1的一擷取品質(步驟S40)，並且調整從該顯示模組11擷取該影像幀F1的一擷取頻率以及傳送該影像幀F1的一傳送頻率(步驟S42)。並且，該鏡像傳輸軟體130將改為採用調整後的參數(即，調整後的該擷取品質、該擷取頻率及該傳送頻率的至少其中之一)進行該影像幀F1的擷取與傳送動作(步驟S44)。如此一來，可藉由降低該傳送端電子裝置1傳輸的資料量，令該接收端電子裝置2可確實接收到要播放的該影像幀F1，進而能夠與該傳送端電子裝置1進行同步播放。
【0034】
值得一提的是，上述該步驟S34至該步驟S38係對該聲音訊號A1的擷取與傳輸方式進行調整，該步驟S40至該步驟S44係對該影像幀F1的擷取與傳輸方式進行調整，然而該步驟S34至該步驟S38和該步驟S40至該步驟S44並不具有執行上的順序關係。再者，該鏡像傳輸軟體130可僅調整該聲音訊號A1或該影像幀F1的擷取與傳輸方式，而不同時調整，不加以限定。
【0035】
如圖4所示，於該鏡像傳輸過程中，該傳送端電子裝置1及／或該接收端電子裝置2係持續判斷該鏡像傳輸功能是否被關閉(步驟S46)，於被關閉之前持續監控該網路的狀態(步驟S30)，並且於被關閉之後結束該鏡像傳輸方法。
【0036】
本實施例中，當該網路的狀態不穩定(例如頻寬不足，或是有突波產生)，則該鏡像傳輸軟體130藉由上述該步驟S34~步驟S44的執行調整該影像幀F1與該聲音訊號A1的擷取與傳輸方式，以解決該接收端電子裝置2的聲音不連續、爆音以及無法同步播放的問題。並且，當於該步驟S32中判斷該網路的狀態恢復穩定時，該鏡像傳輸軟體130立即恢復為初始的擷取與傳輸方式(步驟S48)。即，恢復擷取並傳送該聲音訊號A1至該接收端電子裝置2上播放，並將該擷取品質、該擷取頻率及該傳送頻率恢復為一初始值。
【0037】
值得一提的是，上述的該擷取品質，是指該鏡像傳輸軟體130擷取的該影像幀F1的解析度。例如，若該顯示模組11目前播放的影像的解析度為1920x1080，則於該網路的狀態穩定的情況下，該鏡像傳輸軟體130係直接以1920x1080的解析度擷取該影像幀F1；反之，於該網路的狀態不穩定的情況下，為了降低傳輸的資料量，該鏡像傳輸軟體130可在該步驟S40後，改以1280x720的解析度、甚至是以640x480的解析度來擷取該影像幀F1，藉此大幅降低該傳送端電子裝置1傳送的資料量，以減輕該網路的負擔，以利該網路盡速恢復到穩定的狀態。
【0038】
另外，上述該擷取頻率及該傳送頻率，是指該鏡像傳輸軟體130每秒擷取、傳送的該影像幀F1的張數，即，每秒的幀速率(frames per second,FPS)。例如，於該網路的狀態穩定的情況下，該鏡像傳輸軟體130每秒擷取並傳送30張的該影像幀F1至該接收端電子裝置2；反之，當該網路的狀態不穩定時，該鏡像傳輸軟體130可在該步驟S42後，改為每秒只擷取並傳送10張的該影像幀F1至該接收端電子裝置2。如此一來，可在使用者仍能持續於該接收端電子裝置2觀看同步影像的前提下，降低該傳送端電子裝置1傳輸的資料量，以減輕該網路的負擔。
【0039】
值得一提的是，現有的串流傳輸技術(一般稱之為streaming，例如線上觀看Youtube影片即採用串流傳輸技術)主要是在伺服器端存放完整的影片檔案，並且將影片檔案的內容做為串流內容，經過傳輸控制協定(Transmission Control Protocol,TCP)或使用者資料流通訊協定(User Datagram Protocol,UDP)串流傳輸至用戶端上進行播放。
【0040】
承上所述，於串流傳輸技術中，該影片檔案的播放是連續的，因此當網路的狀態不穩定時，伺服器端會先將未傳輸成功的影像幀存放在暫存器中(該些未傳輸成功的影像幀無法被捨棄)，待網路順暢的時候再一次傳輸至用戶端。因此，當網路的狀態不穩定時，用戶端上播放的串流內容會有卡住而無法繼續播放的問題。同時，在使用者使用串流傳輸時，也無法在播放過程中任意切換同一個影片檔案的解析度(更換串流來源則不在此限)。
【0041】
本發明涉及的是鏡像傳輸技術，而非上述的串流傳輸技術，該接收端電子裝置2上播放的是該鏡像傳輸軟體130所擷取的影像幀，而不是將該傳送端電子裝置1內的影片檔案直接串流傳輸至該接收端電子裝置2上播放。因此，本發明可通過調整該鏡像傳輸軟體130採用的該擷取品質，切換該接收端電子裝置2上播放的該影像幀F1的解析度。同時，還可通過調整該鏡像傳輸軟體130採用的該擷取頻率及該傳送頻率，適度的捨棄部分的影像幀不擷取也不傳送，以降低傳輸的資料量，但仍能令該接收端電子裝置2保持與該傳送端電子裝置1的同步播放。
【0042】
再者，於一般鏡像傳輸的應用情境中，使用者只是想將小螢幕裝置(如該傳送端電子裝置1)中的畫面影像與聲音傳遞至大螢幕裝置(如該接收端電子裝置2)上播放，但仍會將該小螢幕裝置帶在身邊，以利操控該畫面。如上所述，由於鏡像傳輸技術有別於串流傳輸技術是將串源來源放置在遠端的伺服器端，因此本發明可通過停止擷取與傳送該聲音訊號A1的方式解決該接收端電子裝置2播放的聲音不連續或是有爆音的問題，但使用者仍可通過該傳送端電子裝置1來得到正確的該聲音訊號A1，不會因為解決上述問題而犧牲使用者的聽覺效果。
【0043】
參閱圖5，為本發明的第三具體實施例的傳輸流程圖。如圖5所示，該傳送端電子裝置1及／或該接收端電子裝置2係持續監控該網路的狀態(步驟S60)，並且依據監控所得的數據判斷該網路的狀態是否穩定。本實施例中，該傳送端電子裝置1及／或該接收端電子裝置2主要是判斷該影像幀F1或該聲音訊號A1的一傳輸時間是否大於一第一門檻值，並且是否超過一第一預設次數(步驟S62)，藉此判斷該網路的狀態是否穩定。更具體而言，當該影像幀F1或該聲音訊號A1的該傳輸時間大於該第一門檻值(例如500ms或700ms)，並且大於的次數超過該第一預設次數(例如3次或5次)時，該傳送端電子裝置1及／或該接收端電子裝置2判斷該網路的狀態不穩定。
【0044】
上述該傳輸時間，主要指該傳送端電子裝置1傳送該影像幀F1或該聲音訊號A1至該接收端電子裝置2，並且接收到該接收端電子裝置2所回覆的一回應訊息之間的時間，但不加以限定。
【0045】
若該傳輸時間未大於該第一門檻值，或是大於的次數未超過該第一預設次數，則進一步判斷該鏡像傳輸功能是否被關閉(步驟S63)，並且於被關閉之前持續監控該網路的狀態(步驟S60)。
【0046】
若該傳輸時間大於該第一門檻值，且大於的次數超過該第一預設次數，則該鏡像傳輸軟體130依據前述的該步驟S34至步驟S42調整該影像幀F1及該聲音訊號A1的擷取方式與傳輸方式(步驟S64)，並且依據調整後的方式進行鏡像傳輸動作(步驟S66)。具體而言，該步驟S66係以調整後的該擷取品質、該擷取頻率及該傳送頻率的至少其中之一來擷取並傳送該影像幀F1，並且不擷取也不傳送該聲音訊號A1。
【0047】
步驟S66後，該傳送端電子裝置1及／或該接收端電子裝置2仍判斷該鏡像傳輸功能是否被關閉(步驟S68)，並且於被關閉之前持續監控該網路的狀態(步驟S70)。接著，依據監控所得的數據判斷該網路的狀態是否恢復穩定。本實施例中，該傳送端電子裝置1及／或該接收端電子裝置2主要是判斷該影像幀F1或該聲音訊號A1的該傳輸時間是否小於一第二門檻值，並且是否超過一第二預設次數(步驟S72)，藉此判斷該網路的狀態是否恢復穩定。更具體而言，當該影像幀F1或該聲音訊號A1的該傳輸時間小於該第二門檻值(例如300ms或500ms)，並且小於的次數超過該第二預設次數(例如10次或20次)時，該傳送端電子裝置1及／或該接收端電子裝置2判斷該網路的狀態已恢復穩定。
【0048】
若該傳輸時間未小於該第二門檻值，或者小於的次數未達該第二預設次數，則返回該步驟S66，該鏡像傳輸軟體130持續以上述調整後的方式進行鏡像傳輸動作。
【0049】
若該傳輸時間小於該第二門檻值，並且小於的次數超過該第二預設次數，則該鏡像傳輸軟體130將該影像幀F1及該聲音訊號A1的擷取方式與傳輸方式恢復為該初始值(步驟S74)，並且依據恢復後的方式進行鏡像傳輸動作(步驟S76)。具體而言，步驟S74是將該擷取品質、該擷取頻率及該傳送頻率恢復為該初始值，並且恢復擷取並傳送該聲音訊號A1，同時控制該傳送端電子裝置1停止通過該聲音播放模組12播放該聲音訊號A1。
【0050】
該步驟S76後，該傳送端電子裝置1及／或該接收端電子裝置2持續判斷該鏡像傳輸功能是否被關閉(步驟S78)，並且於被關閉之前持續監控該網路的狀態(步驟S60)。
【0051】
本實施例中，該鏡像傳輸軟體130可在判斷該網路的狀態不穩定時停止擷取與傳送該聲音訊號A1，並且直接將該影像幀F1的該擷取品質、該擷取頻率及該傳送頻率調整為最小值，以大幅降低傳輸的資料量，以令於該網路的狀態可盡速恢復穩定。然而，於其他實施例中，該鏡像傳輸軟體130亦可逐次慢慢地調降該影像幀F1的該擷取品質、該擷取頻率及該傳送頻率，以避免該接收端電子裝置2所播放的影像產生瞬間鉅變而造成使用者的不適。
【0052】
參閱圖6，為本發明的第四具體實施例的傳輸流程圖。首先，與上述實施例相同地，該傳送端電子裝置1通過該鏡像傳輸軟體130的執行，於該網路的狀態不穩定時調整該影像幀F1與該聲音訊號A1的擷取方式及傳輸方式(步驟S80)，並且依據調整後的方式進行鏡像傳輸動作(步驟S82)。
【0053】
該步驟S82後，該傳送端電子裝置1及／或該接收端電子裝置2判斷該鏡像傳輸功能是否被關閉(步驟S84)，並且於被關閉之前持續監控該網路的狀態(步驟S86)。接著，該傳送端電子裝置1及／或該接收端電子裝置2判斷該網路的狀態是否因該步驟S80的執行而有所改善(步驟S88)。若該網路的狀態沒有改善，則再次調整該影像幀F1的擷取方式與傳輸方式(步驟S90)，並且返回該步驟S82，依據再次調整後的方式(即，再次調整後的該擷取品質、該擷取頻率及該傳送頻率)執行鏡像傳輸動作。
【0054】
該步驟S90主要是再次調降該鏡像傳輸軟體130採用的該擷取品質、該擷取頻率及該傳送頻率的至少其中之一，但不加以限定。具體而言，於第一種實施方式中，該鏡像傳輸軟體130可於第一次調整時僅調整該擷取品質、於再次調整時調整該擷取頻率、並於第三次調整時調整該傳送頻率。於第二種實施方式中，該鏡像傳輸軟體130亦可於每一次調整時皆同時調整該擷取品質、該擷取頻率及該傳送頻率，不加以限定。
【0055】
本實施例中，該傳送端電子裝置1及／或該接收端電子裝置2主要判斷該影像幀F1或該聲音訊號A1的該傳輸時間是否縮短，進而判斷該網路的狀態是否改善，但不加以限定。
【0056】
若於該步驟S88中判斷該網路的狀態已改善， 則進一步判斷該網路的狀態是否已恢復穩定(步驟S92)，即，該影像幀F1或該聲音訊號A1的該傳輸時間是否小於該第二門檻值，並且小於的次數超過該第二預設次數。若該網路的狀態尚未恢復穩定，則返回該步驟S82，該鏡像傳輸軟體130持續依據上述調整後的方式進行鏡像傳輸動作(步驟S82)。
【0057】
若於該步驟S92中判斷該網路的狀態已恢復穩定，則該鏡像傳輸軟體130將該影像幀F1及該聲音訊號A1的擷取方式與傳輸方式恢復為該初始值(步驟S94)，並且依據恢復後的方式進行鏡像傳輸動作(步驟S96)。具體而言，步驟S94是將該擷取品質、該擷取頻率及該傳送頻率恢復為該初始值，並且恢復擷取並傳送該聲音訊號A1，同時控制該傳送端電子裝置1停止通過該聲音播放模組12播放該聲音訊號A1。
【0058】
該步驟S96後，該傳送端電子裝置1及／或該接收端電子裝置2判斷該鏡像傳輸功能是否被關閉(步驟S98)，於被關閉之前持續監控該網路的狀態(步驟S80)，並且於被關閉後停止擷取與傳送該影像幀F1及該聲音訊號A1，同時斷除該傳送端電子裝置1與該接收端電子裝置2間的連線。
【0059】
以上所述僅為本發明之較佳具體實例，非因此即侷限本發明之專利範圍，故舉凡運用本發明內容所為之等效變化，均同理皆包含於本發明之範圍內，合予陳明。
S30~S48‧‧‧傳輸步驟

Claims (10)

  1. 【第1項】
    一種鏡像傳輸方法，運用於通過一網路無線連接的一傳送端電子裝置及一接收端電子裝置，該鏡像傳輸方法包括：
    a)於該傳送端電子裝置上擷取一影像幀並傳送至該接收端電子裝置上播放；
    b)於該傳送端電子裝置上擷取一聲音訊號並傳送至該接收端電子裝置上播放；
    c)判斷該網路的狀態是否穩定；
    d)於該網路的狀態不穩定時停止於該傳送端電子裝置上擷取該聲音訊號；及
    e)步驟d後，控制該聲音訊號於該傳送端電子裝置上直接播放。
  2. 【第2項】
    如請求項1所述的鏡像傳輸方法，其中該步驟c是於該影像幀或該聲音訊號的一傳輸時間大於一第一門檻時間，且大於次數超過一第一預設次數時，判斷該網路的狀態不穩定。
  3. 【第3項】
    如請求項2所述的鏡像傳輸方法，其中該傳輸時間為該傳送端電子裝置傳送該影像幀或該聲音訊號至該接收端電子裝置，至接收該接收端電子裝置回覆的一回應訊息之間的時間。
  4. 【第4項】
    如請求項1所述的鏡像傳輸方法，其中更包括下列步驟：
    f)於該網路的狀態不穩定時調整該影像幀的一擷取品質以及一擷取頻率；
    g)於該網路的狀態不穩定時調整傳送該影像幀至該接收端電子裝置的一傳送頻率；及
    h)依據調整後的該擷取品質、該擷取頻率及該傳送頻率的至少其中之一執行該步驟a。
  5. 【第5項】
    如請求項4所述的鏡像傳輸方法，其中更包括下列步驟：
    i)步驟h後，判斷該網路的狀態是否改善；及
    j)若該網路的狀態未改善，重新執行該步驟f至該步驟h以再次調整該擷取品質、該擷取頻率及該傳送頻率。
  6. 【第6項】
    如請求項4所述的鏡像傳輸方法，其中更包括下列步驟：
    k)步驟h後，判斷該網路的狀態是否恢復穩定；及
    l)於該網路的狀態恢復穩定時將該擷取品質、該擷取頻率及該傳送頻率恢復為一初始值。
  7. 【第7項】
    如請求項1所述的鏡像傳輸方法，其中更包括下列步驟：
    m)步驟e後，判斷該網路的狀態是否恢復穩定；及
    n)於該網路的狀態恢復穩定時控制該傳送端電子裝置停止播放該聲音訊號，並且恢復擷取該傳送端電子裝置的該聲音訊號並傳送至該接收端電子裝置上播放。
  8. 【第8項】
    如請求項6或7中任一項所述的鏡像傳輸方法，其中該步驟k或該步驟m是於該影像幀或該聲音訊號的一傳輸時間小於一第二門檻時間，且小於次數超過一第二預設次數時，判斷該網路的狀態恢復穩定。
  9. 【第9項】
    如請求項1所述的鏡像傳輸方法，其中該接收端電子裝置具有用於播放該影像幀的一顯示單元，該傳送端電子裝置具有一顯示模組，其中該顯示單元的尺寸大於該顯示模組的尺寸。
  10. 【第10項】
    如請求項1所述的鏡像傳輸方法，其中該接收端電子裝置電性連接具有用於播放該影像幀的一顯示單元的一顯示裝置，該傳送端電子裝置具有一顯示模組，其中該顯示單元的尺寸大於該顯示模組尺寸。
TW104109199A 2015-03-23 2015-03-23 鏡像傳輸方法 TWI539291B (zh)

Priority Applications (3)

Application Number Priority Date Filing Date Title
TW104109199A TWI539291B (zh) 2015-03-23 2015-03-23 鏡像傳輸方法
CN201510827479.0A CN105991760B (zh) 2015-03-23 2015-11-25 镜像传输方法
US15/059,823 US10148994B2 (en) 2015-03-23 2016-03-03 Mirror transmission method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
TW104109199A TWI539291B (zh) 2015-03-23 2015-03-23 鏡像傳輸方法

Publications (2)

Publication Number Publication Date
TWI539291B true TWI539291B (zh) 2016-06-21
TW201635158A TW201635158A (zh) 2016-10-01

Family

ID=56756004

Family Applications (1)

Application Number Title Priority Date Filing Date
TW104109199A TWI539291B (zh) 2015-03-23 2015-03-23 鏡像傳輸方法

Country Status (3)

Country Link
US (1) US10148994B2 (zh)
CN (1) CN105991760B (zh)
TW (1) TWI539291B (zh)

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3925297B2 (ja) 2002-05-13 2007-06-06 ソニー株式会社 映像表示システム及び映像表示制御装置
JP2005073157A (ja) * 2003-08-27 2005-03-17 Sanyo Electric Co Ltd 再生システム
TWI367649B (en) 2008-05-08 2012-07-01 Acer Inc Electronic device, method, and computer readable medium for communicating video data
TWI433072B (zh) 2010-06-03 2014-04-01 Hannstar Display Corp 智慧型手機顯示裝置
US8958018B2 (en) 2010-12-22 2015-02-17 Google Technology Holdings LLC Remote control device and method for controlling operation of a media display system
CN102739614B (zh) * 2011-04-07 2015-01-21 奇扬网科股份有限公司 远程影音分享方法
TWI629902B (zh) * 2012-12-20 2018-07-11 中強光電股份有限公司 具有視訊功能的投影裝置及利用投影裝置進行視訊會談的方法
US9173000B2 (en) 2013-04-12 2015-10-27 Sony Corporation Automatic discovery and mirroring of server-client remote user interface (RUI) session on a companion device and synchronously controlling both sessions using RUI on companion device
JP2015070568A (ja) * 2013-09-30 2015-04-13 ソニー株式会社 情報処理装置、通信方法およびプログラム
TW201528125A (zh) * 2014-01-02 2015-07-16 Acer Inc 操作方法及操作系統

Also Published As

Publication number Publication date
TW201635158A (zh) 2016-10-01
CN105991760B (zh) 2019-02-12
US10148994B2 (en) 2018-12-04
CN105991760A (zh) 2016-10-05
US20160286257A1 (en) 2016-09-29

Similar Documents

Publication Publication Date Title
EP3195606B1 (en) Direct streaming for wireless display
WO2016004857A1 (zh) 一种同屏共享的方法、装置及系统
CN107396171A (zh) 网络直播方法、装置和存储介质
CN111417006A (zh) 视频投屏方法、装置、终端及存储介质
CN109413453B (zh) 视频播放方法、装置、终端及存储介质
US9344678B2 (en) Information processing apparatus, information processing method and computer-readable storage medium
US11582300B2 (en) Streaming synchronized media content to separate devices
CN110996117A (zh) 视频转码方法、装置、电子设备和存储介质
CN114501122B (zh) 音视频数据的投屏方法、装置、存储介质和投屏器
WO2024179279A1 (zh) 多媒体数据传输方法、装置、介质及设备
CA2763098A1 (en) Apparatus and method for synchronizing media capture in a wireless device
US20140362166A1 (en) Incoming call display method, electronic device, and incoming call display system
GB2486425A (en) Rendering multimedia content from a mobile device onto an external display device
WO2017080191A1 (zh) 基于多屏互动的图片处理方法及系统
TWI539291B (zh) 鏡像傳輸方法
CN113141541A (zh) 码率切换方法、装置、设备及存储介质
US9407895B2 (en) Apparatus and method for controlling a video
US20190200057A1 (en) Streaming system with a backup mechanism and a backup method thereof
US20220353462A1 (en) Managing a call on a communication system with an external display device
WO2022088899A1 (zh) 显示设备、显示设备与外接音响的通信方法及外接音响音频输出方法
CN114615529A (zh) 显示设备、外接设备及音频播放方法
WO2020128625A1 (en) Method for operating an electronic device when playing an audiovisual content
US11704088B2 (en) Intelligent control method and electronic device
CN115811628A (zh) 声音与画面的同步处理方法及相关装置
TWI593280B (zh) 動態調整無線視訊之編碼的方法

Legal Events

Date Code Title Description
MM4A Annulment or lapse of patent due to non-payment of fees