CN105991760A - 镜像传输方法 - Google Patents

镜像传输方法 Download PDF

Info

Publication number
CN105991760A
CN105991760A CN201510827479.0A CN201510827479A CN105991760A CN 105991760 A CN105991760 A CN 105991760A CN 201510827479 A CN201510827479 A CN 201510827479A CN 105991760 A CN105991760 A CN 105991760A
Authority
CN
China
Prior art keywords
electronic installation
network
transmission
mirror image
receiving terminal
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201510827479.0A
Other languages
English (en)
Other versions
CN105991760B (zh
Inventor
周冠宇
刘世斌
张政雄
王彦翔
郭嘉珍
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Awind Inc
Original Assignee
Awind Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Awind Inc filed Critical Awind Inc
Publication of CN105991760A publication Critical patent/CN105991760A/zh
Application granted granted Critical
Publication of CN105991760B publication Critical patent/CN105991760B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/4104Peripherals receiving signals from specially adapted client devices
    • H04N21/4122Peripherals receiving signals from specially adapted client devices additional display device, e.g. video projector
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/10Protocols in which an application is distributed across nodes in the network
    • H04L67/1095Replication or mirroring of data, e.g. scheduling or transport for data synchronisation between network nodes
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/4302Content synchronisation processes, e.g. decoder synchronisation
    • H04N21/4307Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen
    • H04N21/43076Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen of the same content streams on multiple devices, e.g. when family members are watching the same movie on different devices
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/436Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
    • H04N21/4363Adapting the video stream to a specific local network, e.g. a Bluetooth® network
    • H04N21/43637Adapting the video stream to a specific local network, e.g. a Bluetooth® network involving a wireless protocol, e.g. Bluetooth, RF or wireless LAN [IEEE 802.11]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/439Processing of audio elementary streams
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/44227Monitoring of local network, e.g. connection or bandwidth variations; Detecting new devices in the local network

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Databases & Information Systems (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Mobile Radio Communication Systems (AREA)

Abstract

本发明有关于一种镜像传输方法,是撷取传送端电子装置的影像帧及声音信号,并无线传送至接收端电子装置上播放。同时,于传输过程中持续监控网络状态,并且于网络状态不稳定时,停止撷取与传送传送端电子装置的声音信号至接收端电子装置,同时令声音由传送端电子装置上的声音播放模块直接播放。本发明藉由停止撷取与传送声音信号,可令使用者在传送端电子装置得到正确的声音信号,不会因网络不稳定而被迫于接收端电子装置得到不连续或是有爆音现象的声音信号。

Description

镜像传输方法
技术领域
本发明涉及无线传输,尤其涉及镜像传输方法。
背景技术
近年来,各式可携式电子装置,例如智慧型行动电话、平板电脑等迅速发展,并且已普及于一般大众的生活周遭。目前,已有许多使用者习惯以这些可携式电子装置取代传统的桌上型电脑或笔记型电脑,并直接使用这些可携式电子装置来储存、编辑、播放大容量的多媒体文件。
上述这些可携式电子装置确实可便于使用者随时随地进行多媒体文件的播放与观赏,然而为了携带便利,这些可携式电子装置一般仅会搭载尺寸较小的显示屏幕。因此,许多使用者于家中观赏储存在可携式电子装置中的多媒体文件时,常会藉由镜像传输功能,将于该可携式电子装置播放多媒体文件时所生的影像及声音无线传送至具有大尺寸显示屏幕的电子装置,例如智慧型电视上播放(例如通过Google发售的Chromecast产品或是Apple发售的Apple TV产品)。
上述镜像传输功能主要是通过无线网络连接一传送端电子装置(例如智慧型行动电话)及一接收端电子装置(例如智慧型电视),以撷取该传送端电子装置的影像帧及声音信号并传送至该接收端电子装置上播放。因此,当该无线网络的频宽不足,或是有突波产生时,将可能造成数据传输的不稳定。
具体而言,于现有的镜像传输技术中,当频宽不足或是有突波产生,造成无线网络不稳定时,该接收端电子装置接收到的声音信号将可能会有不连续的问题,或者甚至可能会有爆音产生,进而影响到使用者聆听的舒适度。
另外,当无线网络因频率不足或突波问题造成拥塞时,该接收端电子装置会因为无法持续接收影像帧而无法与该传送端电子装置进行同步显示。而当无线网络的状态恢复正常时,该接收端电子装置将会在一瞬间接收到大量先前未传输完成的影像帧,并将这些影像帧于瞬间播放完毕,进而产生影像的快速。如此一来,使用者将无法于该接收端电子装置得到正常的影像及声音资讯,进而影响使用者使用镜像传输技术的意愿。
发明内容
本发明的主要目的,在于提供一种镜像传输方法,可于网络不稳定时,改变撷取传送端电子装置播放的声音并传送至接收端电子装置播放的方式,以降低传输的数据量,同时避免使用者于接收端电子装置接收到不连续或是有爆音现象的声音信号。
为了达成上述的目的,本发明提供了一种镜像传输方法,运用于通过一网络无线连接的一传送端电子装置及一接收端电子装置,该镜像传输方法包括:
a)于该传送端电子装置上撷取一影像帧并传送至该接收端电子装置上播放;
b)于该传送端电子装置上撷取一声音信号并传送至该接收端电子装置上播放;
c)判断该网络的状态是否稳定;
d)于该网络的状态不稳定时停止于该传送端电子装置上撷取该声音信号;及
e)步骤d后,控制该声音信号于该传送端电子装置上直接播放。
如上所述,其中该步骤c是于该影像帧或该声音信号的一传输时间大于一第一门槛时间,且大于次数超过一第一预设次数时,判断该网络的状态不稳定。
如上所述,其中该传输时间为该传送端电子装置传送该影像帧或该声音信号至该接收端电子装置,至接收该接收端电子装置回复的一回应信息之间的时间。
如上所述,其中更包括下列步骤:
f)于该网络的状态不稳定时调整该影像帧的一撷取品质以及一撷取频率;
g)于该网络的状态不稳定时调整传送该影像帧至该接收端电子装置的一传送频率;及
h)依据调整后的该撷取品质、该撷取频率及该传送频率的至少其中之一执行该步骤a。
如上所述,其中更包括下列步骤:
i)步骤h后,判断该网络的状态是否改善;及
j)若该网络的状态未改善,重新执行该步骤f至该步骤h以再次调整该撷取品质、该撷取频率及该传送频率。
如上所述,其中更包括下列步骤:
k)步骤h后,判断该网络的状态是否恢复稳定;及
l)于该网络的状态恢复稳定时将该撷取品质、该撷取频率及该传送频率恢复为一初始值。
如上所述,其中更包括下列步骤:
m)步骤e后,判断该网络的状态是否恢复稳定;及
n)于该网络的状态恢复稳定时控制该传送端电子装置停止播放该声音信号,并且恢复撷取该传送端电子装置的该声音信号并传送至该接收端电子装置上播放。
如上所述,其中该步骤k或该步骤m是于该影像帧或该声音信号的一传输时间小于一第二门槛时间,且小于次数超过一第二预设次数时,判断该网络的状态恢复稳定。
如上所述,其中该接收端电子装置具有用于播放该影像帧的一显示单元,该传送端电子装置具有一显示模块,其中该显示单元的尺寸大于该显示模块的尺寸。
如上所述,其中该接收端电子装置电性连接具有用于播放该影像帧的一显示单元的一显示装置,该传送端电子装置具有一显示模块,其中该显示单元的尺寸大于该显示模块尺寸。
本发明对照现有技术可达到的技术功效在于,藉由在网络不稳定时停止撷取与传送该传送端装置的声音信号至该接收端装置,并令声音信号直接由该传送端装置上进行播放,可令使用者从该传送端装置得到正确的声音信号,不会因为网络不稳定而被迫于该接收端装置处取得不连续或是有爆音现象的声音信号,进而影响正常的镜像传输功能所能带来的效果。
另外,本发明还可在网络不稳定时,调整撷取该传送端装置的影像帧的参数,以及传送该影像帧至该接收端装置的参数,进而可大幅降低该传送端装置传输的数据量,解决因为该传输的数据量太大,或是有突波产生而导致网络的频宽不足,难以顺利进行镜像传输的问题。
附图说明
图1为本发明的第一具体实施例的系统架构图;
图2为本发明的第一具体实施例的系统方块图;
图3为本发明的第一具体实施例的传输流程图;
图4为本发明的第二具体实施例的传输流程图;
图5为本发明的第三具体实施例的传输流程图;
图6为本发明的第四具体实施例的传输流程图。
其中,附图标记:
1…传输端电子装置;
11…显示模块;
12…声音播放模块;
13…处理器;
130…镜像传输软件;
14…无线传输模块;
2…接收端电子装置;
21…中央处理单元;
210…镜像接收软件;
22…无线传输单元;
23…输出单元;
3…显示装置;
31…显示单元;
32…声音播放单元;
33…输入单元;
A1…声音信号;
F1…影像帧;
S10~S22…传输步骤;
S30~S48…传输步骤;
S60~S78…传输步骤;
S80~S98…传输步骤。
具体实施方式
兹就本发明的一较佳实施例,配合图式,详细说明如后。
首请参阅图1,为本发明的第一具体实施例的系统架构图。本发明揭露一种镜像传输方法,主要运用于一传送端电子装置1及一接收端电子装置2,其中该传送端电子装置1与该接收端电子装置2通过一网络彼此无线连接。当本发明的该镜像传输方法被执行时,该镜像传输方法将撷取该传送端电子装置1原本藉由其上的一显示模块11显示的一影像帧(frame)F1,以及原本藉由一声音播放模块12播放的一声音信号A1(如图2所示),并且将所撷取的该影像帧F1与该声音信号A1经由该网络无线传送至该接收端电子装置2以进行远端播放。
值得一提的是,当执行了该镜像传输方法时,该传送端电子装置1即停止通过其上的该声音播放模块12播放该声音信号A1,故而使用者无法通过该声音播放模块12得到该声音信号A1。并且,该传送端电子装置1可经过设定,令其上的该显示模块11停止显示该影像帧F1以节省电力,或是继续通过该显示模块11显示该影像帧F1,达到与该接收端电子装置2同步播放的目的。
于图1的实施例中,该接收端电子装置2电性连接一外接的显示装置3,该显示装置3具有一显示单元31及一声音播放单元32,其中该显示单元31的显示尺寸大于该传送端电子装置1的该显示模块11的显示尺寸。该接收端电子装置2于无线接收该传送端电子装置1传输的该影像帧F1及该声音信号A1后,直接传送至该显示装置3,并藉由该显示装置3上的该显示单元31及该声音播放单元32进行播放。
于另一实施例中,该接收端电子装置2也可直接内建该显示单元31与该声音播放单元32(即,将该接收端电子装置2与该显示装置3整合为一体),不加以限定。
请同时参阅图2,为本发明的第一具体实施例的系统方块图。如图2所示,本实施例中,该传送端电子装置1主要具有该显示模块11、该声音播放模块12、一处理器13及一无线传输模块14,其中该处理器13电性连接该显示模块11、该声音播放模块12及该无线传输模块14,并且该处理器13储存有一镜像传输软件130。
本实施例中,该传送端电子装置1通过该处理器13执行该镜像传输软件130,并于该镜像传输软件130的执行期间持续撷取该显示模块11上显示的影像(例如该传送端电子装置1的桌面影像,或是执行一多媒体文件所产生的影像等),以及该声音播放模块12所播放的声音。接着,被撷取的该影像帧F1与该声音信号A1经过该镜像传输软件130的处理后,经由该无线传输模块14无线传输至对应的该接收端电子装置2。
如图2所示,该接收端电子装置2主要具有一中央处理单元21、一无线传输单元22及一输出单元23,其中该中央处理单元21电性连接该无线传输单元22及该输出单元23,并且储存有一镜像接收软件210。该接收端电子装置2通过该中央处理单元21执行该镜像接收软件210,并且于该镜像接收软件210被执行后,该接收端电子装置2可与该传送端电子装置1建立连线。
本实施例中,该接收端电子装置2于该镜像接收软件210的执行期间保持与该传送端电子装置1的连线,并持续通过该无线传输单元22接收该传送端电子装置1传输的该影像帧F1与该声音信号A1。该接收端电子装置2通过该镜像接收软件210处理所接收的该影像帧F1与该声音信号A1,并经由该输出单元23输出至该接收端电子装置2所连接的该显示装置3进行播放。值得一提的是,若该接收端电子装置2与该显示装置3整合为一体,则该输出单元23不必然存在。
如图2所示,该显示装置3可例如为一智慧型电视,并且包括一输入单元33,以及与该输入单元33电性连接的该显示单元31及该声音播放单元32。值得一提的是,若该显示装置3与该接收端电子装置2整合为一体,则该输入单元33不必然存在,该显示单元31与该声音播放单元32则内建于该接收端电子装置2中并且电性连接该中央处理单元21。然而,上述仅为本发明的一较佳具体实例,不应以此为限。
该显示装置3通过该输入单元33电性连接该接收端电子装置2的该输出单元23,以从该接收端电子装置2接收该影像帧F1与该声音信号A1,并且藉由该显示单元31播放所接收的该影像帧F1,同时藉由该声音播放单元32播放所接收的该声音信号A1。藉此,使用者可将该传送端电子装置1的影像与声音无线传送至该接收端电子装置2(或该显示装置3)上播放,达到镜像传输的目的并得到对应的功效。
参阅图3,为本发明的第一具体实施例的传输流程图。要实现本发明的该镜像传输方法,首先需启动一镜像传输功能(步骤S10)。具体而言,本发明中可藉由执行该镜像传输软件130与该镜像接收软件210,并建立该传送端电子装置1与该接收端电子装置2间的连线,以启动该镜像传输功能,但不加以限定。
该步骤S10后,该传送端电子装置1通过该镜像传输软件130撷取该显示模块11上显示的该影像帧F1(步骤S12),并且藉由该无线传输模块14无线传送至该接收端电子装置2进行播放(步骤S14)。同时,该传送端电子装置1还通过该镜像传输软件130撷取该声音播放模块12播放的该声音信号A1(步骤S16),并且藉由该无线传输模块14无线传送至该接收端电子装置2进行播放(步骤S18)。
值得一提的是,于本发明中,该传送端电子装置1及/或该接收端电子装置2于镜像传输过程中持续监控该网络的状态(步骤S20),以判断是否要改变目前的镜像传输方式(容后详述)。另外,该传送端电子装置1或该接收端电子装置2亦持续判断该镜像传输功能是否被关闭(步骤S22),例如,判断该镜像传输软件130或该镜像接收软件210是否被关闭,或是该传送端电子装置1与该接收端电子装置2之间的连线是否断除。并且,于该镜像传输功能被关闭之前持续执行上述步骤S12至步骤S20,以持续于该传送端电子装置1上撷取该影像帧F1与该声音信号A1并无线传送至该接收端电子装置2,以达到镜像传输的目的。
参阅图4,为本发明的第二具体实施例的传输流程图。本实施例中,该传送端电子装置1及/或该接收端电子装置2会于镜像传输过程中持续监控该网络的状态(步骤S30),并且依据监控所得的数据判断该网络的状态是否稳定(步骤S32)。本发明中,当发现该网络的状态不稳定时,该传送端电子装置1停止撷取该声音信号A1(步骤S34),同时停止传输该声音信号A1至该接收端电子装置2(步骤S36),并且,令该声音信号A1直接通过其上的该声音播放模块12进行播放(步骤S38)。
具体地,本实施例是在判断该网络的状态不稳定时,控制该镜像传输软件130停止自该传送端电子装置1撷取及对外传送该声音信号A1,并且控制该传送端电子装置1直接通过其上的该声音播放模块12,例如喇叭进行该声音信号A1的播放。如此一来,当该网络的状态不稳定,造成该声音信号A1无法流畅、平稳地通过该网络传送时,不会有勉强将该声音信号A1传送至该接收端电子装置2,造成该接收端电子装置2播放的声音不连续,或是有爆音产生的问题。
另一方面,若于该步骤S32中判断该网络的状态不稳定,则该传送端电子装置1可同时调整该镜像传输软件130撷取的该影像帧F1的一撷取品质(步骤S40),并且调整从该显示模块11撷取该影像帧F1的一撷取频率以及传送该影像帧F1的一传送频率(步骤S42)。并且,该镜像传输软件130将改为采用调整后的参数(即,调整后的该撷取品质、该撷取频率及该传送频率的至少其中之一)进行该影像帧F1的撷取与传送动作(步骤S44)。如此一来,可藉由降低该传送端电子装置1传输的数据量,令该接收端电子装置2可确实接收到要播放的该影像帧F1,进而能够与该传送端电子装置1进行同步播放。
值得一提的是,上述该步骤S34至该步骤S38对该声音信号A1的撷取与传输方式进行调整,该步骤S40至该步骤S44对该影像帧F1的撷取与传输方式进行调整,然而该步骤S34至该步骤S38和该步骤S40至该步骤S44并不具有执行上的顺序关系。再者,该镜像传输软件130可仅调整该声音信号A1或该影像帧F1的撷取与传输方式,而不同时调整,不加以限定。
如图4所示,于该镜像传输过程中,该传送端电子装置1及/或该接收端电子装置2持续判断该镜像传输功能是否被关闭(步骤S46),于被关闭之前持续监控该网络的状态(步骤S30),并且于被关闭之后结束该镜像传输方法。
本实施例中,当该网络的状态不稳定(例如频宽不足,或是有突波产生),则该镜像传输软件130藉由上述该步骤S34~步骤S44的执行调整该影像帧F1与该声音信号A1的撷取与传输方式,以解决该接收端电子装置2的声音不连续、爆音以及无法同步播放的问题。并且,当于该步骤S32中判断该网络的状态恢复稳定时,该镜像传输软件130立即恢复为初始的撷取与传输方式(步骤S48)。即,恢复撷取并传送该声音信号A1至该接收端电子装置2上播放,并将该撷取品质、该撷取频率及该传送频率恢复为一初始值。
值得一提的是,上述的该撷取品质,是指该镜像传输软件130撷取的该影像帧F1的解析度。例如,若该显示模块11目前播放的影像的解析度为1920x1080,则于该网络的状态稳定的情况下,该镜像传输软件130直接以1920x1080的解析度撷取该影像帧F1;反之,于该网络的状态不稳定的情况下,为了降低传输的数据量,该镜像传输软件130可在该步骤S40后,改以1280x720的解析度、甚至是以640x480的解析度来撷取该影像帧F1,藉此大幅降低该传送端电子装置1传送的数据量,以减轻该网络的负担,以利该网络尽速恢复到稳定的状态。
另外,上述该撷取频率及该传送频率,是指该镜像传输软件130每秒撷取、传送的该影像帧F1的张数,即,每秒的帧速率(frames per second,FPS)。例如,于该网络的状态稳定的情况下,该镜像传输软件130每秒撷取并传送30张的该影像帧F1至该接收端电子装置2;反之,当该网络的状态不稳定时,该镜像传输软件130可在该步骤S42后,改为每秒只撷取并传送10张的该影像帧F1至该接收端电子装置2。如此一来,可在使用者仍能持续于该接收端电子装置2观看同步影像的前提下,降低该传送端电子装置1传输的数据量,以减轻该网络的负担。
值得一提的是,现有的串流传输技术(一般称之为streaming,例如线上观看Youtube影片即采用串流传输技术)主要是在伺服器端存放完整的影片文件,并且将影片文件的内容做为串流内容,经过传输控制协定(Transmission ControlProtocol,TCP)或使用者数据流通讯协定(User Datagram Protocol,UDP)串流传输至用户端上进行播放。
承上所述,于串流传输技术中,该影片文件的播放是连续的,因此当网络的状态不稳定时,伺服器端会先将未传输成功的影像帧存放在暂存器中(这些未传输成功的影像帧无法被舍弃),待网络顺畅的时候再一次传输至用户端。因此,当网络的状态不稳定时,用户端上播放的串流内容会有卡住而无法继续播放的问题。同时,在使用者使用串流传输时,也无法在播放过程中任意切换同一个影片文件的解析度(更换串流来源则不在此限)。
本发明涉及的是镜像传输技术,而非上述的串流传输技术,该接收端电子装置2上播放的是该镜像传输软件130所撷取的影像帧,而不是将该传送端电子装置1内的影片文件直接串流传输至该接收端电子装置2上播放。因此,本发明可通过调整该镜像传输软件130采用的该撷取品质,切换该接收端电子装置2上播放的该影像帧F1的解析度。同时,还可通过调整该镜像传输软件130采用的该撷取频率及该传送频率,适度的舍弃部分的影像帧不撷取也不传送,以降低传输的数据量,但仍能令该接收端电子装置2保持与该传送端电子装置1的同步播放。
再者,于一般镜像传输的应用情境中,使用者只是想将小屏幕装置(如该传送端电子装置1)中的画面影像与声音传递至大屏幕装置(如该接收端电子装置2)上播放,但仍会将该小屏幕装置带在身边,以利操控该画面。如上所述,由于镜像传输技术有别于串流传输技术是将串源来源放置在远端的伺服器端,因此本发明可通过停止撷取与传送该声音信号A1的方式解决该接收端电子装置2播放的声音不连续或是有爆音的问题,但使用者仍可通过该传送端电子装置1来得到正确的该声音信号A1,不会因为解决上述问题而牺牲使用者的听觉效果。
参阅图5,为本发明的第三具体实施例的传输流程图。如图5所示,该传送端电子装置1及/或该接收端电子装置2持续监控该网络的状态(步骤S60),并且依据监控所得的数据判断该网络的状态是否稳定。本实施例中,该传送端电子装置1及/或该接收端电子装置2主要是判断该影像帧F1或该声音信号A1的一传输时间是否大于一第一门槛值,并且是否超过一第一预设次数(步骤S62),藉此判断该网络的状态是否稳定。更具体而言,当该影像帧F1或该声音信号A1的该传输时间大于该第一门槛值(例如500ms或700ms),并且大于的次数超过该第一预设次数(例如3次或5次)时,该传送端电子装置1及/或该接收端电子装置2判断该网络的状态不稳定。
上述该传输时间,主要指该传送端电子装置1传送该影像帧F1或该声音信号A1至该接收端电子装置2,并且接收到该接收端电子装置2所回复的一回应信息之间的时间,但不加以限定。
若该传输时间未大于该第一门槛值,或是大于的次数未超过该第一预设次数,则进一步判断该镜像传输功能是否被关闭(步骤S63),并且于被关闭之前持续监控该网络的状态(步骤S60)。
若该传输时间大于该第一门槛值,且大于的次数超过该第一预设次数,则该镜像传输软件130依据前述的该步骤S34至步骤S42调整该影像帧F1及该声音信号A1的撷取方式与传输方式(步骤S64),并且依据调整后的方式进行镜像传输动作(步骤S66)。具体而言,该步骤S66是以调整后的该撷取品质、该撷取频率及该传送频率的至少其中之一来撷取并传送该影像帧F1,并且不撷取也不传送该声音信号A1。
步骤S66后,该传送端电子装置1及/或该接收端电子装置2仍判断该镜像传输功能是否被关闭(步骤S68),并且于被关闭之前持续监控该网络的状态(步骤S70)。接着,依据监控所得的数据判断该网络的状态是否恢复稳定。本实施例中,该传送端电子装置1及/或该接收端电子装置2主要是判断该影像帧F1或该声音信号A1的该传输时间是否小于一第二门槛值,并且是否超过一第二预设次数(步骤S72),藉此判断该网络的状态是否恢复稳定。更具体而言,当该影像帧F1或该声音信号A1的该传输时间小于该第二门槛值(例如300ms或500ms),并且小于的次数超过该第二预设次数(例如10次或20次)时,该传送端电子装置1及/或该接收端电子装置2判断该网络的状态已恢复稳定。
若该传输时间未小于该第二门槛值,或者小于的次数未达该第二预设次数,则返回该步骤S66,该镜像传输软件130持续以上述调整后的方式进行镜像传输动作。
若该传输时间小于该第二门槛值,并且小于的次数超过该第二预设次数,则该镜像传输软件130将该影像帧F1及该声音信号A1的撷取方式与传输方式恢复为该初始值(步骤S74),并且依据恢复后的方式进行镜像传输动作(步骤S76)。具体而言,步骤S74是将该撷取品质、该撷取频率及该传送频率恢复为该初始值,并且恢复撷取并传送该声音信号A1,同时控制该传送端电子装置1停止通过该声音播放模块12播放该声音信号A1。
该步骤S76后,该传送端电子装置1及/或该接收端电子装置2持续判断该镜像传输功能是否被关闭(步骤S78),并且于被关闭之前持续监控该网络的状态(步骤S60)。
本实施例中,该镜像传输软件130可在判断该网络的状态不稳定时停止撷取与传送该声音信号A1,并且直接将该影像帧F1的该撷取品质、该撷取频率及该传送频率调整为最小值,以大幅降低传输的数据量,以令于该网络的状态可尽速恢复稳定。然而,于其他实施例中,该镜像传输软件130亦可逐次慢慢地调降该影像帧F1的该撷取品质、该撷取频率及该传送频率,以避免该接收端电子装置2所播放的影像产生瞬间巨变而造成使用者的不适。
参阅图6,为本发明的第四具体实施例的传输流程图。首先,与上述实施例相同地,该传送端电子装置1通过该镜像传输软件130的执行,于该网络的状态不稳定时调整该影像帧F1与该声音信号A1的撷取方式及传输方式(步骤S80),并且依据调整后的方式进行镜像传输动作(步骤S82)。
该步骤S82后,该传送端电子装置1及/或该接收端电子装置2判断该镜像传输功能是否被关闭(步骤S84),并且于被关闭之前持续监控该网络的状态(步骤S86)。接着,该传送端电子装置1及/或该接收端电子装置2判断该网络的状态是否因该步骤S80的执行而有所改善(步骤S88)。若该网络的状态没有改善,则再次调整该影像帧F1的撷取方式与传输方式(步骤S90),并且返回该步骤S82,依据再次调整后的方式(即,再次调整后的该撷取品质、该撷取频率及该传送频率)执行镜像传输动作。
该步骤S90主要是再次调降该镜像传输软件130采用的该撷取品质、该撷取频率及该传送频率的至少其中之一,但不加以限定。具体而言,于第一种实施方式中,该镜像传输软件130可于第一次调整时仅调整该撷取品质、于再次调整时调整该撷取频率、并于第三次调整时调整该传送频率。于第二种实施方式中,该镜像传输软件130亦可于每一次调整时皆同时调整该撷取品质、该撷取频率及该传送频率,不加以限定。
本实施例中,该传送端电子装置1及/或该接收端电子装置2主要判断该影像帧F1或该声音信号A1的该传输时间是否缩短,进而判断该网络的状态是否改善,但不加以限定。
若于该步骤S88中判断该网络的状态已改善,则进一步判断该网络的状态是否已恢复稳定(步骤S92),即,该影像帧F1或该声音信号A1的该传输时间是否小于该第二门槛值,并且小于的次数超过该第二预设次数。若该网络的状态尚未恢复稳定,则返回该步骤S82,该镜像传输软件130持续依据上述调整后的方式进行镜像传输动作(步骤S82)。
若于该步骤S92中判断该网络的状态已恢复稳定,则该镜像传输软件130将该影像帧F1及该声音信号A1的撷取方式与传输方式恢复为该初始值(步骤S94),并且依据恢复后的方式进行镜像传输动作(步骤S96)。具体而言,步骤S94是将该撷取品质、该撷取频率及该传送频率恢复为该初始值,并且恢复撷取并传送该声音信号A1,同时控制该传送端电子装置1停止通过该声音播放模块12播放该声音信号A1。
该步骤S96后,该传送端电子装置1及/或该接收端电子装置2判断该镜像传输功能是否被关闭(步骤S98),于被关闭之前持续监控该网络的状态(步骤S80),并且于被关闭后停止撷取与传送该影像帧F1及该声音信号A1,同时断除该传送端电子装置1与该接收端电子装置2间的连线。
以上所述仅为本发明的较佳具体实例,非因此即局限本发明的专利范围,故举凡运用本发明内容所为的等效变化,均同理皆包含于本发明的范围内,合予陈明。

Claims (10)

1.一种镜像传输方法,运用于通过一网络无线连接的一传送端电子装置及一接收端电子装置,其特征在于,该镜像传输方法包括:
a)于该传送端电子装置上撷取一影像帧并传送至该接收端电子装置上播放;
b)于该传送端电子装置上撷取一声音信号并传送至该接收端电子装置上播放;
c)判断该网络的状态是否稳定;
d)于该网络的状态不稳定时停止于该传送端电子装置上撷取该声音信号;及
e)步骤d后,控制该声音信号于该传送端电子装置上直接播放。
2.根据权要求1所述的镜像传输方法,其特征在于,该步骤c是于该影像帧或该声音信号的一传输时间大于一第一门槛时间,且大于次数超过一第一预设次数时,判断该网络的状态不稳定。
3.根据权要求2所述的镜像传输方法,其特征在于,该传输时间为该传送端电子装置传送该影像帧或该声音信号至该接收端电子装置,至接收该接收端电子装置回复的一回应信息之间的时间。
4.根据权要求1所述的镜像传输方法,其特征在于,更包括下列步骤:
f)于该网络的状态不稳定时调整该影像帧的一撷取品质以及一撷取频率;
g)于该网络的状态不稳定时调整传送该影像帧至该接收端电子装置的一传送频率;及
h)依据调整后的该撷取品质、该撷取频率及该传送频率的至少其中之一执行该步骤a。
5.根据权要求4所述的镜像传输方法,其特征在于,更包括下列步骤:
i)步骤h后,判断该网络的状态是否改善;及
j)若该网络的状态未改善,重新执行该步骤f至该步骤h以再次调整该撷取品质、该撷取频率及该传送频率。
6.根据权要求4所述的镜像传输方法,其特征在于,更包括下列步骤:
k)步骤h后,判断该网络的状态是否恢复稳定;及
l)于该网络的状态恢复稳定时将该撷取品质、该撷取频率及该传送频率恢复为一初始值。
7.根据权要求1所述的镜像传输方法,其特征在于,更包括下列步骤:
m)步骤e后,判断该网络的状态是否恢复稳定;及
n)于该网络的状态恢复稳定时控制该传送端电子装置停止播放该声音信号,并且恢复撷取该传送端电子装置的该声音信号并传送至该接收端电子装置上播放。
8.根据权要求6或7中任一项所述的镜像传输方法,其特征在于,该步骤k或该步骤m是于该影像帧或该声音信号的一传输时间小于一第二门槛时间,且小于次数超过一第二预设次数时,判断该网络的状态恢复稳定。
9.根据权要求1所述的镜像传输方法,其特征在于,该接收端电子装置具有用于播放该影像帧的一显示单元,该传送端电子装置具有一显示模块,其中该显示单元的尺寸大于该显示模块的尺寸。
10.根据权要求1所述的镜像传输方法,其特征在于,该接收端电子装置电性连接具有用于播放该影像帧的一显示单元的一显示装置,该传送端电子装置具有一显示模块,其中该显示单元的尺寸大于该显示模块尺寸。
CN201510827479.0A 2015-03-23 2015-11-25 镜像传输方法 Expired - Fee Related CN105991760B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
TW104109199 2015-03-23
TW104109199A TWI539291B (zh) 2015-03-23 2015-03-23 鏡像傳輸方法

Publications (2)

Publication Number Publication Date
CN105991760A true CN105991760A (zh) 2016-10-05
CN105991760B CN105991760B (zh) 2019-02-12

Family

ID=56756004

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201510827479.0A Expired - Fee Related CN105991760B (zh) 2015-03-23 2015-11-25 镜像传输方法

Country Status (3)

Country Link
US (1) US10148994B2 (zh)
CN (1) CN105991760B (zh)
TW (1) TWI539291B (zh)

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1592143A (zh) * 2003-08-27 2005-03-09 三洋电机株式会社 再生系统
CN102739614A (zh) * 2011-04-07 2012-10-17 奇扬网科股份有限公司 远程影音分享方法及其应用程序
US20140176664A1 (en) * 2012-12-20 2014-06-26 Coretronic Corporation Projection apparatus with video conference function and method of performing video conference using projection apparatus

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3925297B2 (ja) 2002-05-13 2007-06-06 ソニー株式会社 映像表示システム及び映像表示制御装置
TWI367649B (en) 2008-05-08 2012-07-01 Acer Inc Electronic device, method, and computer readable medium for communicating video data
TWI433072B (zh) 2010-06-03 2014-04-01 Hannstar Display Corp 智慧型手機顯示裝置
US8958018B2 (en) 2010-12-22 2015-02-17 Google Technology Holdings LLC Remote control device and method for controlling operation of a media display system
US9173000B2 (en) 2013-04-12 2015-10-27 Sony Corporation Automatic discovery and mirroring of server-client remote user interface (RUI) session on a companion device and synchronously controlling both sessions using RUI on companion device
JP2015070568A (ja) * 2013-09-30 2015-04-13 ソニー株式会社 情報処理装置、通信方法およびプログラム
TW201528125A (zh) * 2014-01-02 2015-07-16 Acer Inc 操作方法及操作系統

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1592143A (zh) * 2003-08-27 2005-03-09 三洋电机株式会社 再生系统
CN102739614A (zh) * 2011-04-07 2012-10-17 奇扬网科股份有限公司 远程影音分享方法及其应用程序
US20140176664A1 (en) * 2012-12-20 2014-06-26 Coretronic Corporation Projection apparatus with video conference function and method of performing video conference using projection apparatus

Also Published As

Publication number Publication date
TWI539291B (zh) 2016-06-21
US20160286257A1 (en) 2016-09-29
US10148994B2 (en) 2018-12-04
TW201635158A (zh) 2016-10-01
CN105991760B (zh) 2019-02-12

Similar Documents

Publication Publication Date Title
CN106658205B (zh) 直播间视频流合成控制方法、装置及终端设备
CN108769726B (zh) 多媒体数据推送方法、装置、存储介质及设备
CN111417006A (zh) 视频投屏方法、装置、终端及存储介质
CN109089330A (zh) 一种音频数据传输方法及终端
US8738072B1 (en) Devices and methods for transferring a multimedia mobile call data from a mobile device to a device having a display
JP2006262484A (ja) 画像通信中の画像合成方法及び装置
CN108280817B (zh) 一种图像处理方法及移动终端
CN104065401B (zh) 基于hid蓝牙模块语音传输方法及hid蓝牙语音通信装置
JP2023537249A (ja) 投影データ処理方法および装置
CN103596063B (zh) 终端、电视机、多屏互动系统和抓屏参数的设置方法
CN108111912A (zh) 多屏互动中的图像传输方法、终端及存储介质
CN109474833B (zh) 一种网络直播的方法、相关装置和系统
CN103561311A (zh) 传屏方法和电视机
CN205105347U (zh) 视频的无线传输设备、视频播放设备及系统
CN103517044A (zh) 视频会议装置及其唇形同步的方法
WO2017080191A1 (zh) 基于多屏互动的图片处理方法及系统
CN105991760A (zh) 镜像传输方法
JP4692138B2 (ja) 携帯端末からのパン&チルト機能搭載型ネットワークカメラ画像の閲覧方法及びパン&チルト機能搭載型ネットワークカメラ
CN103414867A (zh) 多媒体通话控制方法、终端及系统
CN115361629A (zh) 一种音频配置的方法及装置
KR101341862B1 (ko) 플로우 모션 영상 촬영 방법 및 시스템
US7587223B2 (en) Terminal for mobile phone and method for controlling the synchronism of terminal for mobile phone
CN108259741A (zh) 多终端同步拍照的方法、移动终端及计算机可读存储介质
WO2021137252A1 (en) Dynamic low latency mode for a digital video production system
CN101783897A (zh) 一种带摄像头的电视机以及实现方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
CB02 Change of applicant information
CB02 Change of applicant information

Address after: China Taiwan New Taipei Itabashi Station Road 16, 33 floor

Applicant after: Bake GmbH

Address before: The way and Chinese Taiwan District of New Taipei City in No. 866 No. 5 17 floor

Applicant before: Awind Inc.

GR01 Patent grant
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20190212

Termination date: 20201125