CN105635626A - 包交换网络中的视频通话方法及支持该方法的装置 - Google Patents
包交换网络中的视频通话方法及支持该方法的装置 Download PDFInfo
- Publication number
- CN105635626A CN105635626A CN201510825000.XA CN201510825000A CN105635626A CN 105635626 A CN105635626 A CN 105635626A CN 201510825000 A CN201510825000 A CN 201510825000A CN 105635626 A CN105635626 A CN 105635626A
- Authority
- CN
- China
- Prior art keywords
- tune
- away
- subscriber equipment
- information
- frame type
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
- H04N21/258—Client or end-user data management, e.g. managing client capabilities, user preferences or demographics, processing of multiple end-users preferences to derive collaborative data
- H04N21/25808—Management of client data
- H04N21/25833—Management of client data involving client hardware characteristics, e.g. manufacturer, processing or storage capabilities
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/14—Systems for two-way working
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
- H04L65/60—Network streaming of media packets
- H04L65/70—Media network packetisation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
- H04L65/60—Network streaming of media packets
- H04L65/75—Media network packet handling
- H04L65/762—Media network packet handling at the source
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/41—Structure of client; Structure of client peripherals
- H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
- H04N21/42204—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
- H04N21/42206—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor characterized by hardware details
- H04N21/42221—Transmission circuitry, e.g. infrared [IR] or radio frequency [RF]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs
- H04N21/4402—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/47—End-user applications
- H04N21/478—Supplemental services, e.g. displaying phone caller identification, shopping application
- H04N21/4788—Supplemental services, e.g. displaying phone caller identification, shopping application communicating with other users, e.g. chatting
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/14—Systems for two-way working
- H04N7/141—Systems for two-way working between two video terminals, e.g. videophone
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/14—Systems for two-way working
- H04N7/141—Systems for two-way working between two video terminals, e.g. videophone
- H04N7/142—Constructional details of the terminal equipment, e.g. arrangements of the camera and the display
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/14—Systems for two-way working
- H04N7/141—Systems for two-way working between two video terminals, e.g. videophone
- H04N7/142—Constructional details of the terminal equipment, e.g. arrangements of the camera and the display
- H04N2007/145—Handheld terminals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04W—WIRELESS COMMUNICATION NETWORKS
- H04W76/00—Connection management
- H04W76/10—Connection setup
- H04W76/15—Setup of multiple wireless link connections
- H04W76/16—Involving different core network technologies, e.g. a packet-switched [PS] bearer in combination with a circuit-switched [CS] bearer
Abstract
一种电子装置,其包括通信模块、图像处理模块以及控制模块,通信模块配置为将基于数据包的视频通话连接至用户设备,图像处理模块配置为生成用于视频通话的传输图像,以及控制模块配置为基于从用户设备接收的调谐脱离信息来控制由图像处理模块生成的传输图像的帧类型。
Description
优先权
本申请要求于2014年11月25日在韩国知识产权局提交的第10-2014-0165531号韩国专利申请的权益,其公开的全部内容通过引用并入本文。
技术领域
本公开涉及使用包交换(Packet-Switched,PS)网络的终端之间的视频通话质量,更具体地涉及缓解视频通话期间的视频退化。
背景技术
不同于电路交换(CS)2G或3G网络,长期演进(LTE)(后4G通信协议)支持PS网络。然而,即使是LTE,语音通话仍可使用3G网络。例如,如果在用户设备(UE)访问4G网络时接收到语音呼叫,则电路交换回落(CSFB)技术将从4G网络断开并连接至3G网络。
另外,LTE上的语音(VoLTE)支持更宽的LTE带宽中的高质量语音通话,并且同样支持具有高清晰度(HD)视频质量(1280x720像素,30fps)的基于VoLTE的视频通话。HD视频质量优于现有的CS视频通话(例如,公共中间格式(CIF)353x288像素,15fps)的质量。
CSFB技术是在进行语音通话的方法,其中移动通信载体将CS呼叫寻呼信息插入核心网络中的LTE信号之间并将其提供至UE。然而,通过单射频LTE(SingleRadioLTE,SRLTE)UE,当UE为CS寻呼信息(调谐脱离(tune–away))而检测3G网络时,SRLTEUE必须停止LTE网络上的通信。因此,在SRLTEUE上,LTE数据吞吐量可能在调谐脱离期间退化。
根据第三代合作伙伴项目(3GPP)TS44.018规范,CS寻呼时间段可具有470ms的最小的时间和2.12s的最大时间。CS寻呼时间段由每个CELL中设定的参数BS_PA_FRMS来确定。在每个CS寻呼时间段中,LTE连接断开约15ms至约30ms以对UE调谐脱离,从而接收和解析寻呼信息。换言之,在支持SRLTE方法的终端的情况下,在使用VoLTE进行视频通话期间,视频质量可能由于每470ms~2.12s出现的15-30ms的调谐脱离而退化。
发明内容
相应地,本公开的一方面提供了通过补偿因调谐脱离而发生的数据吞吐量退化、用于在终端之间提供视频通话的方法和设备,从而最小化视频质量退化。
根据本公开的一方面,电子装置可包括通信模块、图像处理模块、以及控制模块,通信模块配置为将基于数据包的视频通话连接至用户设备,图像处理模块配置为生成用于视频通话的传输图像,控制模块配置为基于从用户设备接收的调谐脱离信息来控制由图像处理模块生成的传输图像的帧类型。
附图说明
通过结合附图的以下描述,本公开的某些实施方式的以上及其它方面、特征、以及优点将变得更加显而易见,在附图中:
图1是示出了根据本公开的各实施方式用于基于数据包的网络中视频通话的图像帧调节方法的概念图。
图2是示出了根据本公开的各实施方式用于控制传输图像帧的终端的配置的视图。
图3是示出了根据本公开的各实施方式的调谐脱离和数据吞吐量的概念图。
图4是示出了根据本公开的各实施方式在网络环境中的电子装置的视图。
图5是示出了根据本公开的各实施方式的用户设备之间视频通话方法的视图。
图6是示出了根据本公开的各实施方式的使用附加信息确定传输图像帧的方法的流程图。
图7是示出根据本公开的各实施方式、依赖于另一方终端确定传输图像帧的方法的流程图。
图8是根据本公开的各实施方式的电子装置的框图。
图9是根据本公开的各实施方式的程序模块的框图。
在所有附图中,应注意相同的附图标号用于指示相同或相似的元件、特征和结构。
具体实施方式
在下文中,参照附图公开本公开的多种实施方式。然而,这并非将本公开的各个实施方式限制为具体的实施方式,并且应理解的是,本公开覆盖落入所附权利要求及其等同的范围内的对本公开的全部修改、等同和/或替代。对于附图的描述,相同的附图标号指代相同的元件。
本文中使用的每个用语“包括(include)”、“包括(comprise)”、“具有(have)”、“可包括(mayinclude)”、“可包括(maycomprise)”或“可具有(mayhave)”均表示公开的功能、操作或元件的存在,并不排除其它功能、操作或元件。
通常,短语“A和/或B”表示仅选择A、仅选择B、或选择A和B。类似地,短语“A、B和/或C”表示选择A、B和C的任意组合,包括仅选择A、仅选择B、仅选择C、...以及选择A和B和C。
本文中使用的用语,例如“第一(1st)”、“第二(2nd)”、“第一(first)”、“第二(second)”等均可表示为修饰本公开的各实施方式的各种不同元件,但是不限制元件。例如,“第一用户装置”和“第二用户装置”可表示不同用户装置并且不必表示顺序或重要性。
在本公开的各个实施方式中,应理解的是,当部件(例如,第一部件)称为“与”另一部件(例如,第二部件)“耦接”/“耦接至”另一部件(例如,第二部件)或“连接至”另一部件(例如,第二部件)时,该部件可直接连接至另一部件或通过其它部件(例如,第三部件)连接。在本公开的各实施方式中,应理解的是,当部件(例如,第一部件)称为“直接连接至”或“直接接入”另一部件(例如,第二部件)时,在该部件(例如,第一部件)和该另一部件(例如,第二部件)之间不存在其它部件(例如,第三部件)。
如在本公开中使用的表述“配置为”可根据情况与“适合于”、“具有...的能力”、“设计为”、“适应于”、“制造为”或“能够...”交换地使用。在一些情况下,表述“配置为执行XYZ的装置”可意味着该装置“能够执行XYZ”。
本公开中使用的各种用语用于描述本公开的一些实施方式,并不旨在限制其它实施方式的范围。单数形式的用语可包括复数形式,除非它们在上下文中具有明显不同的意思或具体限制为单数意思。除非本文中另有指示,否则本文中使用的全部用语,包括技术术语或科学术语,均具有与本领域技术人员通常理解的意思相同的意思。通常,词典中限定的用语应认为具有与相关技术的上下文意思相同的意思,并且,除非本文中明确限定,否则不应反常地理解或理解为具有过度正式的意思。在任何情况下,本说明书中限定的用语不排除本公开的任何实施方式,除非具体如此说明。
根据公开的各种实施方式,电子装置可以是例如智能手机、平板个人计算机(PC)、移动电话、视频电话、电子书(e-book)阅读器、台式个人计算机(PC)、膝上型个人计算机(PC)、上网本、工作站服务器、个人数字助理(PDA)、便携式多媒体播放器(PMP)、MP3播放器、移动医疗装置、相机、或任何可穿戴装置(例如,智能眼镜、头戴式装置(HMD)、电子服饰、电子腕带、电子项链、电子配饰、电子纹身、智能镜子、或智能手表)。
根据本公开的一些实施方式,电子装置可以是智能家电。智能家电可以是例如电视、数字化视频光碟(DVD)播放器、音响装置、冰箱、空调、清洁器、烘箱、微波炉、洗衣机、空气净化器、机顶盒、家庭自动化控制面板、安全控制面板、电视盒(例如,SamsungHomeSyncTM、AppleTVTM或GoogleTVTM)、游戏机(例如,XboxTM和PlayStationTM)、电子词典、电子钥匙、摄像机或电子相框。
根据本公开的一些实施方式,电子装置可以是例如各种测量装置之一(例如,血糖仪、心率计、血压仪、温度计等)、磁共振血管造影(MRA)装置、磁共振成像(MRI)装置、计算机断层扫描(CT)装置、医学成像装置、超声装置等、导航装置、全球定位系统(GPS)接收器、行车记录仪(EDR)、飞行数据记录器(FDR)、车载信息娱乐装置、船用电子设备(例如,船舶导航系统、回转罗盘等)、航空电子装置、安全设备、车辆音响单元、工业或家庭机器人、金融机构自动取款机(ATM)、商店销售点(POS)、或物联网(例如,灯泡、各种传感器、电表或煤气表、喷淋系统、火警、恒温器、路灯、烘炉、训练设备、热水槽、加热器、锅炉等)。
在本公开的各种的实施方式中,电子装置可包括支持呼叫转送服务的家具或建筑/结构的一部分、电子板、电子签名接收装置、投影仪、以及例如测量水、电、气体或无线电信号的各种仪器中的至少一个。根据本公开的各实施方式的电子装置可以是上述各种装置或它们的组合中的一个。另外,根据本公开的实施方式的电子装置可以是柔性电子装置。另外,根据本公开的实施方式的电子装置不限于上述装置,并且还可包括还未研发的新类型的电子装置。
在下文中,将参照附图更加详细地描述根据本公开的各实施方式的电子装置。本公开中的用语“用户”可指代使用电子装置的人或使用电子装置的装置(例如,人工智能电子装置)。
图1是示出了根据本公开的各实施方式的基于数据包的网络中视频通话的图像帧调节方法的概念图。
参照图1,第一用户设备(或UE1)100和第二用户设备(或UE2)200可执行基于VoLTE的视频通话。虽然图1示出了示例性的基于VoLTE的视频通话,但是使用LTE或PS系统以任意方式进行的视频通话均可对应于根据本公开的各实施方式的视频通话。例如,应理解,由聊天应用、社交网络应用、或终端本身支持的视频通话(例如,FaceTime)可以是图1中所示的基于VoLTE的视频通话的一个示例。
根据本公开的各实施方式,第一用户设备100和第二用户设备200可以是相同类型的终端,或可以是支持相同或兼容的通信方法的终端。例如,用户设备100和200可支持SRLTE方法。在另一示例中,用户设备100和200可支持单射频双待机(SRDS)方法。通常,用户设备100和200可以是通过使用LTE网络(例如,PS域)和3G网络(或使用CS域的网络,例如2G网络和GSM网络)通信并使用调谐脱离方法搜索用于CS域的呼叫寻呼的终端。本公开描述了用于支持SRLTE和SRDS方法的终端,但是这不限制本公开的范围。将参照图3来描述每一种方法。
根据本公开的各实施方式,对于第一用户设备100的描述可应用于第二用户设备200。以同样的方式,对于第二用户设备200的描述可应用于第一用户设备100。例如,在图1中,如果第一用户设备100执行用于使用调谐脱离方法检测CS呼叫寻呼信息的操作,则第二用户设备200也以相同方式操作。例如,在用户设备100和200之间的视频通话期间,第二用户设备200可基于从第一用户设备100接收的调谐脱离信息来调节用于视频通话传输的传输图像的帧。类似地,与第二用户设备200处于视频通话中的第一用户设备100可基于来自第二用户设备200的调谐脱离信息,控制所提供的图像帧。在下文中,将参照图2来描述第二用户设备200的操作。
图2是示出了根据本公开的各实施方式的用于控制传输图像帧的终端的配置的视图。
参照图2,第二用户设备200可类似于图1中所示的第二用户设备200,并可包括天线205、通信模块210、获取模块220、图像处理模块230、控制模块240和存储器250。在下文中,第二用户设备200可简单地简写为终端200。
图2示出了终端200的部件以示例性地描述各个实施方式。可以本领域普通技术人员的水平添加或替换其它部件。例如,终端200还可包括用于在视频通话中显示终端200的用户和/或另一方的图像的显示器。将在后面参照图4和图8来描述用户终端的更通常的配置的示例。
通信模块210可通过天线205与另一终端通信。例如,通信模块210可处理通过至少一个天线205(例如,主发送/接收天线、分集接收天线等)接收或发送的信号。通信模块210可支持例如使用PS域的4G通信方法(例如,LTE、LTE-A等)和使用CS域的3G/2G通信方法(例如,GSM、WCDMA等)。另外,通信模块210例如可执行用于获得CS呼叫寻呼信息的调谐脱离操作。另外,通信模块210可从另一终端接收与该另一终端执行的调谐脱离操作有关的信息(例如,调谐脱离开始、结束、平均长度、预期结束时间等),并可将与通过终端200执行的调谐脱离有关的信息发送至该另一终端。
根据本公开的各实施方式,通信模块210可执行与另一终端的使用PS域的视频通话(例如,基于VoLTE的视频通话)。通信模块210可将终端200的用户语音和图像数据包发送至另一终端。另外,通信模块210可从另一终端接收其它用户的语音和图像数据包。
获取模块220可获取和/或处理用于视频通话的用户图像。例如,获取模块220可包括终端200的前方相机和用于信号处理的处理器(例如,图像信号处理器(ISP))。获取模块220可将由相机获得的图像提供至图像处理模块230。
图像处理模块230可生成待传输用于视频通话的传输图像。例如,图像处理模块230可根据由终端200或接收终端(例如,第一用户设备100)支持的图像质量以及使用中的网络(例如,4G网络、3G网络、WiFi网络等),确定生成的传输图像的质量或尺寸。在HD视频通话的情况下,图像处理模块230可生成具有例如1280x720分辨率的图像。
根据本公开的各实施方式,图像处理模块230可确定生成的图像的帧类型。例如,图像处理模块230可配置用于视频通话的任意图片组(GOP)。如已知的,图像处理模块230可生成关键帧,关键帧也可称为内帧(I帧)。I帧提供本公开所描述的帧之中最优的质量,但是每帧需要最多数量的位。
另一帧类型可以是基于前一帧的图像信息的帧,并可称为预测帧(P帧)。基于前一帧和后一帧生成的帧可称为双向帧(B帧)。因此,P帧和B帧参考至少一个其它参考帧(referenceframe)。因此,在本公开中,P帧和B帧可称为“参照帧(referringframe)”。
控制模块240可控制终端200的全部操作。控制模块240可基于通过通信模块210接收的来自另一方终端的调谐脱离信息,来控制由图像处理模块230生成的图像的帧类型。例如,当接收到另一方终端开始调谐脱离的信息时,控制模块240可允许图像处理模块230以P帧生成传输图像。这只是示例性的并取决于终端200的设置或与终端200通信的另一方终端的类型(例如,是否是支持SRLTE的终端或支持SRDS的终端)。控制模块240可确定由图像处理模块230生成的传输图像的帧类型。
根据本公开的各实施方式,控制模块240和图像处理模块230可实现在一个处理器或一个芯上系统(SoC)中或可使用附加的硬件模块配置。根据本公开的实施方式,SoC可包括上文所述的ISP。
由获取模块220获得的或由图像处理模块230生成的图像可存储在存储器250中。存储器250可包括易失性和/或非易失性存储器。另外,由通信模块210接收的另一方传输图像可存储在存储器250中。控制模块240可解码从另一方接收的图像并可在终端200的显示器上输出解码后的图像。
根据本公开的各实施方式,用于执行本文中描述的多个方法或操作的指令可存储在存储器250中。例如,存储器250可存储用于从另一方终端接收调谐脱离信息并基于接收到的调谐脱离信息确定发送至另一方终端的传输图像的帧类型的指令。终端200还可在存储器250中存储可由终端200中各种模块执行的指令。例如,指令可执行为允许在通信模块210执行用于搜索CS寻呼信息的调谐脱离操作时、通过使用PS系统将调谐脱离信息发送至视频通话中的另一方终端。
在下文中,将参照图3描述为终端提供调谐脱离信息的操作。
图3是示出了根据本公开的各实施方式的调谐脱离和数据吞吐量的概念图。
为了参考,图3示出了通信模块的配置和数据吞吐量图表,为了方便描述,它们被示意性地示出。因此,实际装置配置可以不同并且产生的数据吞吐量图表也可以不同。
参照图3,SRLTE终端300例如可包括一个发送天线Tx301和两个接收天线Rx1303和Rx2305。在本公开的一些实施方式中,SRLTE终端300可包括一个发送/接收天线Tx/Rx。根据本公开的各实施方式,为了支持CS寻呼,终端300可将接收天线从PS域调谐脱离至CS域。例如,终端300可允许接收天线从LTE网络被引导至GSM网络。CS寻呼时间段可根据3GPP规范定义为“51多帧时间段×BS_PA_MFRMS”。在本文中,51多帧的长度可以是235.4ms并且BS_PA_MFRMS值可从通信载波网络提供。通常,BS_PA_MFRMS可具有2至9之间的值。因此,CS寻呼时间段的最小值可以是约470ms并且最大值可以是约2.12s。
因为在CS寻呼时间段中出现调谐脱离时不能从LTE网络接收数据,所以数据吞吐量可能退化。参照图3,在SRLTE数据吞吐量图表中可知,在调谐脱离区段(或时间段)中没有数据吞吐量。即使对于恒定的BS_PA_MFRMS值,调谐脱离时间段也可能变化,因为如果没有CS寻呼信息则可能立即回到LTE。然而,如果存在CS寻呼信息,则需要一些时间来处理从CS域接收的信息。
根据本公开的各实施方式,终端300可在调谐脱离开始时将调谐脱离信息发送至另一方终端(例如,终端200)。例如,当调谐脱离开始时,终端300可将指示调谐脱离开始的调谐脱离开始信息发送至另一方终端。根据本公开的各实施方式,终端300可将与调谐脱离的结束预期时间或平均时间段有关的信息与调谐脱离开始信息一起发送。另外,当调谐脱离结束时,终端300可将指示调谐脱离结束的调谐脱离结束信息发送至另一方终端。
参照图3,在支持SRDS类型的终端310的情况下,相比于SRLTE终端300,在CS寻呼操作和数据吞吐量中存在差异。终端310可以不同时调谐脱离全部接收天线,并可通过使用一个天线(例如,Rx2315)执行用于接收CS寻呼的操作。在这种情况下,在接收天线Rx1313处的数据吞吐量保持的情况下,执行调谐脱离的接收天线Rx2315的数据吞吐量可能退化。
根据本公开的各实施方式,SRLTE类型终端300可能在调谐脱离区段期间不从PS域接收数据,但是SRDS类型终端310可从PS域接收数据。因此,当在视频通话中从SRDS类型终端310接收到调谐脱离开始信息时,终端200可从对应时间点开始发送P帧图像直到调谐脱离结束(或结束预期时间点)。因此,SRDS类型终端310依然可从终端200接收P帧图像以使得终端310可无缝地保持视频通话。当接收到调谐脱离结束信息时,终端200可生成I帧以将它们发送至终端310,以使得终端310可保持视频通话的质量。根据本公开的各实施方式,当终端200与支持SRLTE的终端300通信时,因为终端300在调谐脱离时间段期间不能从终端200接收传输图像,所以传输图像的帧类型可能不同于SRDS。后面将参照图5至图7描述用于确定传输图像帧类型的本公开的各实施方式。在下文中,将参照图4描述可应用本公开的各实施方式的示例性电子装置。
图4是示出了根据本公开的各实施方式在网络环境中的电子装置的视图。
参照图4,描述了根据本公开的各实施方式在网络环境400中的电子装置401。电子装置401可对应于上文所述的终端100、200、300、或310中的一个。电子装置401可包括总线410、处理器420、存储器430、输入/输出接口450、显示器460、以及通信接口470。根据本公开的实施方式,电子装置401可省略部件中的至少一个或可附加地包括不同的部件。例如,这可通过组合部件的功能或分离部件的功能来实现。另外,在电子装置中可添加或移除功能。
总线410例如可包括用于将部件410至470彼此连接并在它们之间传送通信(例如,控制消息和/或数据)的电路。
处理器420可包括例如中央处理器(CPU)、应用处理器(AP)和通信处理器(CP)中的至少一个。例如,处理器420可至少对应于图2的控制模块240,或可对应于图2的控制模块240、图像处理模块230、和其它计算装置。另外,处理器420例如可执行用于电子装置401的至少一个其它部件的控制和/或通信的计算或数据处理。
存储器430可包括易失性和/或非易失存储器。例如,存储器430可对应于图2的存储器250。存储器430可存储与电子装置401的至少一个其它部件有关的指令和/或数据。根据本公开的实施方式,存储器430可存储软件和/或程序440。程序440可包括内核441、中间件443、应用编程接口(API)445、和/或应用程序(或应用)447。内核441、中间件443、或API445中的至少一部分可称为操作系统(OS)。
内核441例如可控制或管理用于执行在其它程序(例如,中间件443、API445、或应用程序447)中实现的操作或功能的系统资源(例如,总线410、处理器420、存储器430等)。另外,内核441可提供用于通过从中间件443、API445、或应用程序447接入电子装置401的单个组件来控制或管理系统资源的接口。
中间件443例如可用于随API445或应用程序447与内核441通信而交换数据的中间作用。
另外,中间件443可处理从应用程序447接收的作业请求(多个作业请求)。例如,中间件443可将用于使用电子装置401的系统资源(多个系统资源)(例如,总线410、处理器420、和/或存储器430)的优先级,分配给至少一个应用程序447。例如,中间件443可根据分配给作业请求(多个作业请求)的优先级来执行时序安排或负载均衡。
API445作为用于允许应用程序447访问内核441或中间件443中功能的接口,可包括至少一个用于文件控制、窗口控制、图像处理、或字符控制的接口或功能(例如,指令)。
输入/输出接口450可用作用于将从用户或另一外部装置输入的指令或数据传送至电子装置401的另一部件(多个部件)的接口。另外,输入/输出接口450可将从电子装置401的另一部件(多个部件)接收的指令或数据输出至用户或另一外部装置。
显示器460可包括例如液晶显示器(LCD)、发光二极管(LED)显示器、有机发光二极管(OLED)显示器、微型机电系统(MEMS)显示器、或电子纸显示器。显示器460可向用户显示各种内容(例如,文本、图像、视频、图标、符号等)。显示器460可包括例如可接收通过使用电子笔或用户的身体部分输入的触摸、手势、接近、或悬浮的触摸屏。
通信接口470可允许电子装置401和外部装置(例如,第一外部电子装置402、第二外部电子装置404、或服务器406)之间的通信。例如,通信接口470可使用无线通信或有线通信通过网络462与外部装置404通信。
无线通信可使用例如LTE、LTE-A、CDMA、WCDMA、UMTS、WiBro、和GSM中的至少一个作为蜂窝通信协议。例如,通信接口470可支持上述通信方法中的PS类型网络和CS类型网络中的至少一个。另外,无线通信可包括近程通信464。近程通信464可包括例如无线保真(WiFi)、Bluetooth(BT)、近场通信(NFC)、全球定位系统(GPS)等中的至少一个。有线通信可包括例如通用串行总线(USB)、高清晰度多媒体接口(HDMI)、推荐标准832(RS-232)、和简易老式电话业务(POTS)中的至少一个。网络462可包括至少一个通信网络,例如,计算机网络(例如,LAN或WAN)、因特网、和电话网络。
第一外部电子装置402和第二外部电子装置404中的每一个可以是与电子装置401相同或不同的类型。根据本公开的实施方式,服务器406可包括一个或多个服务器的组。根据本公开的各实施方式,在电子装置401上执行的操作中全部或部分可在另一个电子装置或更多电子装置(例如,电子装置402或电子装置404、或服务器406)上执行。根据本公开的实施方式,当电子装置401自动地或通过请求执行某一功能或服务时,代替电子装置401自身执行该功能或服务或除了电子装置401自身执行该功能或服务之外,电子装置401可请求在另一装置(例如,电子装置402、或电子装置404、或服务器406)上执行与电子装置401有关的功能中的至少部分。其它电子装置(例如,外部电子装置402、或404、或服务器406)可执行所请求的功能和/或附加功能,并可将执行结果传送至电子装置401。电子装置401可提供所请求的功能或服务。因此,例如,可使用云计算、分布式计算、或客户端-服务器计算技术。
根据本公开的各实施方式,电子装置可包括通信模块、图像处理模块、以及控制模块,其中,通信模块配置为将基于数据包的视频通话连接至用户设备,图像处理模块配置为生成用于视频通话的传输图像,控制模块配置为基于从用户设备接收的调谐脱离信息来控制由图像处理模块生成的传输图像的帧类型。
根据本公开的各实施方式,调谐脱离信息可包括用户设备的调谐脱离开始信息,并且控制模块从获得开始信息的时间点起生成预测帧类型的传输图像。
根据本公开的各实施方式,调谐脱离信息可包括用户设备的调谐脱离结束信息,并且控制模块可在获得结束信息时生成关键帧类型的图像,以将生成的图像发送至用户设备。另外,控制模块可在预期结束时间经过时生成关键帧类型的图像。
根据本公开的各实施方式,调谐脱离信息可包括与用户设备的调谐脱离平均结束时间有关的信息,并且控制模块可在平均结束时间经过时生成关键帧类型的图像。
另外,控制模块可在生成关键帧类型的图像之后生成预测帧类型的图像。
根据本公开的各实施方式,调谐脱离信息可包括用户设备的调谐脱离开始信息以及与用户设备有关的信息,并且当用户设备是支持单射频LTE(SRLTE)的终端时,控制模块可从获得开始信息的时间点起生成关键帧类型的传输图像。
另外,当从用户设备接收调谐脱离的结束信息时,控制模块可生成关键帧类型的传输图像以将生成的传输图像发送至用户设备,并在传输之后生成参照帧类型的传输图像。
根据本公开的各实施方式,调谐脱离信息可包括用户设备的调谐脱离开始信息和与用户设备有关的信息,并且当用户设备是支持单射频双待机(SRDS)的终端时,控制模块可从获得开始信息的时间点起生成参照帧类型的传输图像。
根据本公开的各实施方式,当用户设备是支持SRDS的终端时,如果经过了调谐脱离的预期结束时间或接收到调谐脱离的结束信息,则控制模块可生成关键帧类型的传输图像以将生成的传输图像发送至用户设备。
图5是示出了根据本公开的各实施方式在用户设备之间的视频通话方法的视图。图5理解为在第一用户设备100(下文中称为终端100)和第二用户设备200(下文中称为终端200)之间进行基于数据包的视频通话(例如,基于VoLTE的视频通话)期间执行的操作。
在操作510中,可在终端100和终端200之间建立基于LTE的视频通话会话。终端100和终端200可连续地互相交换用于视频通话的语音和图像数据包。
在操作520中,终端100可开始用于接收CS寻呼的调谐脱离操作。虽然在图5中示出的是终端100执行调谐脱离操作,但是终端100和终端200都可执行调谐脱离操作。例如,如果终端100和终端200是支持SRLTE和SRDS两者的终端,则它们可执行调谐脱离操作。如果终端100是支持SRLTE的终端并且终端200是不需要调谐脱离操作的终端(例如,诸如同步语音及LTE(SVLTE)终端的支持双无线电LTE的终端),则只有终端100执行调谐脱离操作,并且终端200只控制传输至终端100的图像的帧类型。
在操作530中,随着调谐脱离操作的开始(例如,在开始的同时或恰在开始之前),终端100可将调谐脱离开始信息发送至终端200。根据本公开的各实施方式,在操作531中,终端100可将附加信息(例如,关于调谐脱离预期结束时间点、平均调谐脱离时间段、最小调谐脱离时间段等的信息)与调谐脱离开始信息一起发送。
在操作540中,当接收到调谐脱离信息时,终端200可确定待发送至终端100用于视频通话的传输图像的帧类型。例如,当从终端100接收到调谐脱离开始的信息时,终端200可预测终端100的数据吞吐量的退化,并可确定通过相对更少数量的位的预测帧(P帧)来编码传输图像。
根据本公开的各实施方式,终端200可根据附加信息或终端100的类型以不同的方法来编码传输图像。将参照图6和图7描述每一个示例。
在操作550中,在终端100中执行的调谐脱离操作被终止,并且能够返回LTE网络。在操作560中,终端100可将调谐脱离结束的信息发送至终端200。
当接收到终端100的调谐脱离结束的信息时,终端200可在操作570中,生成关键帧(例如,I帧)类型的传输图像,并将它们发送至终端100。一旦在调谐脱离之后生成并发送了关键帧,则通过常见方法(例如,在关键帧之后生成参照帧以配置GOP)生成传输图像以使得视频通话可以延续。
根据本公开的各实施方式,可假设终端100的CS寻呼时间段是940ms,调谐脱离是100ms,以及终端100和终端200处于具有1280x720的分辨率的HD质量视频通话中,则终端100和终端200在彼此之间以每秒30帧(fps)发送/接收图像。换言之,终端200可将对应于每秒30幅图像的数据发送至终端100,并且发送对应于一幅图像的数据可用去约33毫秒。当从终端100接收到调谐脱离开始信息时,终端200可生成具有P帧的图像并将其发送至终端100。因为调谐脱离持续大约100ms,所以直到从终端100接收到调谐脱离结束的通知,终端200可在100ms期间发送三幅P帧图像。当接收到调谐脱离结束通知时,终端200可生成I帧类型的图像以将它们立即发送至终端100。
如果终端100是支持SRDS的终端,即使出现数据吞吐量的退化,终端100也可通过使用在调谐脱离区段中从终端200接收的P帧,连续地保持视频通话的质量。
当终端100是支持SRLTE的终端时,其可能在调谐脱离区段期间不从终端200接收图像。换言之,即使当发送了P帧和I帧,也可能出现对应的帧损失。然而,根据本公开的各实施方式,终端200在接收到调谐脱离开始信息时可生成P帧以将其提供至终端100,并且终端100可在调谐脱离实际结束的时间点与调谐脱离结束信息到达终端200的时间点之间接收P帧。例如,在上述实施方式中,从终端200发送的三个P帧中的前两帧可能没有被终端100接收。终端100可接收第三个P帧。终端100可基于在调谐脱离之前接收到的I帧、通过利用接收到的P帧将视频通话的质量维持在预定水平。此外,终端100可将调谐脱离结束信息提供至终端200,并且终端200可在接收到调谐脱离结束信息的时间点处立即生成新的I帧以将其发送至终端100。从而,终端100可保持用于视频通话的原始质量。
图6是示出了根据本公开的各实施方式的通过使用附加信息确定传输图像帧的方法的流程图。
参照图6,在操作610中,终端200可从终端100接收附加信息,例如,一起接收调谐脱离开始信息和调谐脱离区段信息。例如,附加信息可包括终端100的预期调谐脱离结束时间点、平均调谐脱离时间段、和最小调谐脱离时间段。根据本公开的各实施方式,终端100可将调谐脱离开始信息和平均调谐脱离时间段信息一起发送,并且终端200可利用平均调谐脱离时间段作为调谐脱离的预期结束时间点。
在操作620中,当接收到调谐脱离信息时,终端200可将传输图像编码为参照帧(例如,P帧)。在操作630中,终端200可确定是否经过预期结束时间点,并可重复操作620直到经过预期结束时间点。
在操作640中,如果经过了预期结束时间,则终端200可将传输图像编码为关键帧(例如,I帧)。因此,即使在从终端100接收到调谐脱离结束通知之前,终端200也可生成并发送I帧。因此,终端100可在调谐脱离结束的通知到达终端200之前接收I帧,从而更快地通过使用关键帧来维持视频通话的质量。根据本公开的各实施方式,在30fps传输率的情况下,一个或两个I帧可在调谐脱离的预期结束时间点和实际结束时间点之间发送。
在操作650中,终端200可确定是否从终端100接收到调谐脱离结束信息,并且如果接收到,则可将传输图像编码为I帧。如果终端100的数据吞吐量没有恢复,则在操作640中生成的I帧图像可能丢失,但是因为对应于操作660的I帧是在调谐脱离结束之后发送的I帧,所以其被正常地发送至终端100并用于视频通话。在操作660之后,终端200可以通常方法连续地维持视频通话。
图7是示出根据本公开的各实施方式依赖于另一方终端确定传输图像帧的方法的流程图。
参照图7,在操作710中,终端200可从终端100接收附加信息,例如一起接收调谐脱离开始信息和调谐脱离区段信息。在图7的实施方式中,附加信息可包括关于由终端100支持的通信方法(或调谐脱离方法)的信息。根据本公开的各实施方式,终端100和终端200可在建立视频通话会话时彼此交换这种信息。例如,这可在图5的操作510中预先发生。
在操作720中,终端200可确定另一方终端(例如,终端100)是否使用SRLTE方法或SRDS方法。终端200可通过使用预先获得的信息或在操作710中接收的信息来确定另一方终端的通信方法(例如,调谐脱离方法)。如果另一方终端使用SRDS方法,则终端200可执行操作(多个操作)A,例如,图5的操作540至580(在这种情况下,操作550和560由终端100执行)或图6的操作620至660。
根据本公开的各实施方式,如果终端100使用SRLTE方法,即使当终端200生成具有P帧的图像并将其发送时,因为终端100不能在调谐脱离区段期间接收对应的图像,所以为了在终端100的调谐脱离一结束时便接收到I帧,终端200可在操作730中生成具有I帧的图像并将其立即发送。例如,终端200可执行操作(多个操作)B,例如,图5的操作570和580或图6的操作640、650和660。
根据本公开的各实施方式,视频通话方法可包括将基于数据包的视频通话连接至用户设备,从用户设备接收调谐脱离信息,以及基于接收到的调谐脱离信息确定发送至用户设备的传输图像的帧类型。
根据本公开的各实施方式,接收调谐脱离信息的步骤可包括接收用户设备的调谐脱离开始信息,以及确定帧类型的步骤可包括当接收到调谐脱离开始信息时,将预测帧类型确定为传输图像的帧类型。
根据本公开的各实施方式,接收调谐脱离信息的步骤可包括接收用户设备的调谐脱离结束信息,以及确定帧类型的步骤可包括当接收到调谐脱离结束信息时,将关键帧类型确定为传输图像的帧类型。
根据本公开的各实施方式,接收调谐脱离信息的步骤可包括接收用户设备的调谐脱离预期结束时间的信息,以及确定帧类型的步骤可包括当经过了预期结束时间时,将关键帧类型确定为传输图像的帧类型。
另外,方法还可包括,当在接收到结束信息之后生成关键帧类型的传输图像时,生成预测帧类型的下一幅图像。
图8是根据本公开的各实施方式的电子装置的框图。
参照图8,电子装置801可配置上文描述的图4中所示的电子装置401中的全部或部分。电子装置801可包括至少一个处理器(例如,应用处理器(AP)810)、通信模块820、用户识别模块(SIM)824、存储器830、传感器模块840、输入装置850、显示器860、接口870、音频模块880、相机模块891、电源管理模块895、电池896、指示器897、和马达898。
处理器810可控制连接至处理器810的多个硬件或软件部件,并且还可通过执行操作系统或应用程序来执行各种数据处理和操作。例如,处理器810可通过芯上系统(SoC)实现。根据本公开的实施方式,处理器810还可包括图形处理单元(GPU)(未示出)和/或图像信号处理器(未示出)。处理器810可包括图8所示的部件中的至少一些(例如,蜂窝模块821)。处理器810可从例如存储器830的非易失性部分载入命令或数据并对其进行处理,并且可将各种数据存储在存储器830的非易失性部分中。
通信模块820可类似于图4中的通信接口470。通信模块820可包括蜂窝模块821、WiFi模块823、BT模块825、GPS模块827、NFC模块828、和射频(RF)模块829。
蜂窝模块821可通过通信网络(例如,网络462)提供例如语音通话、视频通话、文本服务、或因特网服务。根据本公开的实施方式,蜂窝模块821可通过使用SIM824执行关于通信网络中的电子装置801的区分和验证操作。根据本公开的实施方式,蜂窝模块821可执行处理器810提供的功能中的至少一部分。根据本公开的实施方式,蜂窝模块821还可包括通信处理器(CP)(未示出)。
WiFi模块823、BT模块825、GPS模块827、和NFC模块828中的每一个均可包括用于处理通过对应模块发送/接收的数据的处理器。根据本公开的实施方式,蜂窝模块821、WiFi模块823、BT模块825、GPS模块827、和NFC模块828中的至少一部分(例如,至少一个)可包括在一个集成芯片(IC)或IC封装中。
RF模块829可发送/接收通信信号,例如RF信号。RF模块829例如可包括收发器、功率放大模块(PAM)、频率滤波器、低噪声放大器(LNA)、和/或天线。根据本公开的另一实施方式,蜂窝模块821、WiFi模块823、Bluetooth模块825、GPS模块827、和NFC模块828中的至少一个可通过分开的RF模块(未示出)发送/接受RF信号。
SIM824可包括例如包括SIM和/或嵌入的SIM的卡,并且还可包括唯一标识信息(例如,集成电路卡标识符(ICCID))或用户信息(例如,国际移动用户识别码(IMSI))。
存储器830(例如,存储器430)可包括内部存储器832和/或外部储存器834。内部存储器832可包括易失性存储器(例如,动态RAM(DRAM)、静态RAM(SRAM)、同步动态RAM(SDRAM))和非易失性存储器(例如,一次性可编程ROM(OTPROM)、可编程序ROM(PROM)、可擦除可编程ROM(EPROM)、电可擦除可编程ROM(EEPROM)、掩模ROM、闪速ROM、闪速存储器(例如,NAND闪速存储器和NOR闪速存储器)、硬盘、或固态硬盘(SSD))中的至少一个。
外部储存器834可包括闪存驱动,例如,紧凑型闪存(CF)、安全数字(SD)、微微-SD、迷你-SD、极速数字(xD)、(多媒体卡(MMC))、或存储棒。外部储存器834可通过各种接口在功能上和/或物理上连接至电子装置801。
传感器模块840测量物理量或检测电子装置801的操作状态,从而将测量的或检测出的信息转换为电信号。传感器模块840可包括手势传感器840A、陀螺仪传感器840B、大气压传感器840C、磁性传感器840D、加速度传感器840E、紧握传感器840F、近程式传感器840G、色彩传感器840H(例如,红色、绿色、蓝色(RGB)传感器)、生物传感器840I、温度/湿度传感器840J、照度传感器840K、和紫外(UV)传感器840M中的至少一种。附加地或替代地,传感器模块840可包括电子鼻传感器、肌电图(EMG)传感器、脑电图(EEG)传感器、心电图(ECG)传感器、红外(IR)传感器、虹膜传感器、或指纹传感器。传感器模块840还可包括用于控制传感器模块840中的至少一个传感器的控制电路。根据本公开的实施方式,配置为控制传感器模块840的处理器可以是处理器810的一部分。替代地,配置为控制传感器模块840的处理器可与处理器810分离。在这两种情况下,即使在未用于控制传感器模块840的处理器810的电路处于休眠状态时,配置为控制传感器模块840的处理器也可操作。
输入装置850可包括触摸板852、(数字)笔传感器854、按键856、或超声输入装置858。触摸板852可使用例如电容式方法、电阻式方法、红外方法、或超声方法中的至少一种。另外,触摸板852还可包括控制电路。触摸板852还可包括触觉层以向用户提供触觉响应。
(数字)笔传感器854可包括例如作为触摸板的一部分的用于识别的部分或用于识别的分离部分。按键856例如可包括物理按钮、光学按键、或小键盘。超声输入装置858可通过麦克风(例如,麦克风888)检测从输入工具生成的超声波,以检查对应于检测到的超声波的数据。
显示器860(例如,显示器460)可包括面板862、全息图装置864、和/或投影仪866。面板862可具有与图4中的显示器460相同或类似的配置。面板862可实现为例如柔性的、透明的、和/或可穿戴的。面板862和触摸板852可配置为一个模块。全息图装置864可在空中投影三维图像。投影仪866可通过将光投射在屏幕上来显示图像。屏幕例如可设置在电子装置801的内部或外部。根据本公开的实施方式,显示器860还可包括用于控制面板862、全息图装置864、或投影仪866的控制电路。
接口870可包括例如高清晰度多媒体接口(HDMI)872、通用串行总线(USB)874、光接口876、和/或D-超小型(sub)878。接口870例如可包括在图4中所示的通信接口470中。附加地或替代地,接口870可包括移动高清晰度连接(MHL)接口、安全数字(SD)卡/多媒体卡(MMC)接口、或红外数据通信(IrDA)标准接口。
音频模块880可将声音转换为电信号并将电信号转换为声音。音频模块880中的至少一些部件例如可包括在图4所示的输入/输出接口450中。音频模块880可处理通过扬声器882、接收器884、耳机886、或麦克风888输入/输出的声音信息。
相机模块891,即用于获取静像和视频的装置,可包括至少一个图像传感器(例如,前方传感器和/或后方传感器)、透镜(未示出)、图像信号处理器(ISP)(未示出)、和/或闪光灯(未示出)(例如,LED或氙气灯)。
电源管理模块895可管理电子装置801的电源。根据本公开的实施方式,电源管理模块895可包括例如电源管理IC(PMIC)、充电器IC、和/或电池量表。PMIC可支持有线和/或无线充电方法。作为无线充电方法,例如存在磁共振方法、磁感应方法、或电磁方法。可添加用于无线充电的附加线路,例如线圈环、谐振电路、或整流电路的电路。电池量表可测量电池896的余量、或充电期间电池的电压、电流、或温度。电池896例如可包括可再充电的电池和/或太阳能电池。
指示器897可显示电子装置801或其部分(例如,处理器810)的具体状态,例如启动状态、消息状态、或充电状态。马达898可将电信号转换为机械振动并可生成振动或触觉效果。虽然附图中未示出,但是电子装置801可包括用于支持移动TV的处理装置(例如,GPU)。用于支持移动TV的处理装置可根据标准(例如,数字多媒体广播(DMB)、数字视频广播(DVB)、或媒体FLO)处理媒体数据。
根据本公开的各实施方式的电子装置的上述部件中的每一个均可通过至少一个部件来配置,并且对应部件的名称可根据电子装置的种类而变化。根据本公开的各实施方式,根据本公开的各实施方式的电子装置可包括上述部件中的至少一个,可不包括上述部件中的一些、或还可包括另一部件。另外,根据本公开的各实施方式的电子装置中的部件中的一些被配置为一个实体,以使得先前相应部件的功能被相同地执行。
关于图8的配置,电子装置可具有包括处理器(例如,AP810)、存储器(例如,存储器830)、和通信模块(例如,通信模块820)的配置。根据本公开的各实施方式,电子装置可包括处理器、存储器、和配置为支持包交换(PS)和电路交换(CS)系统通信网络的通信模块,其中,当通信模块执行用于接收CS寻呼信息的调谐脱离操作时,由处理器运行的存储器包括用于通过PS系统在视频通话中向用户设备发送关于调谐脱离的信息的指令。
根据本公开的各实施方式,关于调谐脱离的信息可包括调谐脱离的开始信息或调谐脱离的结束信息。另外,除了调谐脱离的开始信息之外,关于调谐脱离的信息可包括调谐脱离的预期结束时间点、平均调谐脱离时间段、和最小调谐脱离时间段中的至少一个。
根据本公开的各实施方式,处理器可将来自电子装置的出现调谐脱离的时间段和时间段的平均值存储在存储器中。
根据本公开的各实施方式,电子装置还可包括电连接至通信模块的多个接收天线,并且多个接收天线中的至少一个可设置为在执行调谐脱离操作时接收PS系统通信网络的信号。
图9是根据本公开的各实施方式的程序模块的框图。
参照图9,根据本公开的实施方式,程序模块910(例如,程序440)可包括用于控制与电子装置(例如,电子装置401)有关的资源的操作系统(OS)和/或在OS上运行的各种应用(例如,应用程序447)。
程序模块910可包括内核920、中间件930、API960、和/或应用970。程序模块910中的至少一部分可预加载在电子装置上,或可从服务器(例如,电子装置402和404和服务器装置406)下载。
内核920(例如,内核441)例如可包括系统资源管理器921、或装置驱动器923。系统资源管理器921可执行系统资源的控制、分配、或获取。根据本公开的实施方式,系统资源管理器921可包括进程管理单元、存储器管理单元、或文件系统管理单元。装置驱动器923例如可包括显示器驱动器、相机驱动器、Bluetooth驱动器、共享存储器驱动器、USB驱动器、小键盘驱动器、WiFi驱动器、音频驱动器、或进程间通信(IPC)驱动器。
中间件930例如可提供应用970通常需要的功能,或可通过API960向应用970提供各种功能以允许应用970有效地使用电子装置内的有限系统资源。根据本公开的实施方式,中间件930(例如,中间件443)可包括运行时间库935、应用管理器941、窗口管理器942、多媒体管理器943、资源管理器944、电源管理器945、数据库管理器946、数据包管理器947、连通性管理器948、通知管理器949、位置管理器950、图形管理器951、和安全性管理器952中的至少一个。
运行时间库935例如可包括库模块,其中,编译器在运行应用970时使用库模块通过编程语言添加新的功能。运行时间库935可执行关于输入/输出管理、存储管理、或算法功能的功能。
应用管理器941例如可管理应用970中的至少一个应用的生命周期。窗口管理器942可管理在屏幕中使用的GUI资源。多媒体管理器943可识别用于播放各种媒体文件的格式,并可通过使用与对应格式相对应的编解码器来编码或解码媒体文件。资源管理器944可管理例如应用970中的至少任意一个的源代码、存储器、或存储空间的资源。
电源管理器945例如可与基本输入/输出系统(BIOS)一起操作以管理电池或电力,并可提供电子装置操作所需的电力信息。数据库管理器946可生成、搜索、或修改用于应用970中的至少一个应用的数据库。数据包管理器947可管理以数据包文件格式分配的应用的安装或更新。
连通性管理器948可管理无线连接,例如,WiFi或Bluetooth。通知管理器949可以不打扰用户的形式向用户显示或通知事件(例如,消息到达、约会、和接近警告)。位置管理器950可管理电子装置上的位置信息。图形管理器951可管理待提供至用户或与图形管理器951相关的用户接口的图形效果。安全性管理器952可提供系统安全性或用户验证所需的各种安全功能。根据实施方式,当电子装置(例如,电子装置401)包括电话功能时,中间件930还可包括用于管理电子装置的语音或视频通话功能的电话管理器。
中间件930可包括用于形成上述部件的各种功能的组合的中间件模块。中间件930可提供专门用于OS的每种类型的模块以提供不同功能。另外,中间件930可动态地删除现有的部件中的一部分或添加新的部件。
例如,作为API编程功能的集合的API960(例如,API445)可根据OS被设置为另一配置。例如,在安卓(Andriod)或iOS的情况下,一个API集合可提供给每个平台,以及在Tizen的情况下,至少两个API集合可提供给每个平台。
应用970(例如,应用程序447)可包括用于提供例如以下功能的至少一个应用:主页971、拨号器972、SMS/MMS973、即时消息974、浏览器975、相机976、闹钟977、通讯录978、语音拨号979、电子邮件980、日历981、媒体播放器982、相册983、时钟984、保健(例如,测量锻炼量或血糖)、或环境信息供应(例如,提供气压、湿度、或温度信息)。
根据实施方式,应用970可包括用于支持电子装置(例如,电子装置401)和外部电子装置(例如,电子装置402和404)之间的信息交换的应用(下文中称为“信息交换应用”)。信息交换应用例如可包括用于将特定信息中继至外部装置的通知中继应用,或用于管理外部电子装置的装置管理应用。
例如,通知中继应用可具有用于将从电子装置的另一应用(例如,SMS/MMS应用、电子邮件应用、保健应用、或环境信息应用)出现的通知信息中继至外部电子装置(例如,电子装置402和404)的功能。另外,通知中继应用可从外部电子装置接收通知信息,并可随后将接收的通知信息提供至用户。
设备管理应用例如可管理(例如,安装、删除、或更新)与电子装置通信的外部电子装置(例如,电子装置402和404)的至少一个功能(开启/关闭外部电子装置本身(或一些部件)或调节显示器的亮度(或分辨率))、在外部电子装置中运行的应用、或从外部装置提供的服务(例如,呼叫服务或消息服务)。
根据本公开的实施方式,根据外部电子装置(例如,电子装置402和404)的性质,应用970可包括特定应用(例如,移动医疗装置的保健应用)。根据实施方式,应用970可包括从外部电子装置(例如,服务器406或电子装置402或404)接收的应用。根据本公开的实施方式,应用970可包括预加载的应用或可从服务器下载的第三方应用。根据所示实施方式的程序模块910中的部件的名称可根据OS的类型而变化。
根据本公开的各实施方式,程序模块910的至少一部分可通过软件、固件、硬件或它们的组合实现。程序模块910中的至少一部分例如可通过处理器(例如,处理器810)来实现(例如,执行)。例如,程序模块910中的至少一部分可包括模块、程序、例程、指令集、或进程以执行至少一个功能。
根据本公开的各实施方式,关于使用PS类型网络的高质量视频通话(例如,基于VoLTE的视频通话),即使当终端执行用于接收CS寻呼信息的调谐脱离操作时,由调谐脱离操作引起的LTE数据吞吐量退化的影响也可最小化,并且可保持高质量视频通话。
本公开各种实施方式中使用的用语“模块”例如可意味着包括硬件、软件、和/或固件中的至少一个的组合的单元。用语“模块”、“单元”、“逻辑”、“逻辑块”、“部件”或“电路”可以交换地使用。“模块”可以是整体配置部件的最小单元或部分。“模块”可以是执行至少一个功能或它的一部分的最小单元。“模块”可机械地或电子地实现。例如,根据本公开的各实施方式的“模块”可包括例如执行某些操作的专用集成电路(ASIC)芯片、现场可编程门阵列(FPGA)、可编程逻辑装置、和本领域普通技术人员已知的可适于本公开的各实施方式的其它模块中的至少一个,以及未来可能发展的其它合适的模块。
根据本公开的各实施方式,例如以编程模块形式的、根据本公开的装置(例如,模块或模块的功能)或方法(例如,操作)中的至少一部分可使用存储在计算机可读存储介质中的指令实现。当至少一个处理器(例如,处理器420)执行指令时,其可执行对应于指令的功能。非瞬时计算机可读存储介质可包括例如存储器430。
非瞬时计算机可读存储介质可包括硬盘、软盘、磁介质(例如,磁带)、光学介质(例如,CD-ROM和DVD)、磁光媒介(例如,软光盘)和硬件装置(例如,ROM、RAM、或闪速存储器)。另外,除了由编译器生成的机器代码之外,程序指令可包括可使用解释器由计算机执行的高级语言代码。硬件装置可配置为操作为至少一个软件模块以执行本公开的各实施方式的操作,反之亦然。
根据本公开的各实施方式的模块或编程模块可包括上述部件中的至少一个、可不包括上述部件中的一些、或还可包括另一部件。根据本公开的各实施方式的由模块、编程模块、或其它部件执行的操作可通过连续的、并列的、重复的或启发性方法来执行。另外,一些操作可以不同的顺序执行或可被省略。或者,可添加其它操作。
此外,在本说明书中公开的实施方式被提出以用于技术内容的描述和理解,并不限制本公开的范围。因此,本公开的范围应解释为包括基于本公开的技术思路的全部修改或各种其它实施方式。
Claims (15)
1.一种电子装置,包括:
通信模块,配置为将基于数据包的视频通话连接至用户设备(UE);
图像处理模块,配置为生成用于所述基于数据包的视频通话的传输图像;以及
控制模块,配置为基于从所述用户设备接收的调谐脱离信息,控制由所述图像处理模块生成的传输图像的帧类型。
2.根据权利要求1所述的电子装置,其中,所述调谐脱离信息包括所述用户设备的调谐脱离开始信息,以及
其中,所述控制模块还配置为:从获得所述调谐脱离开始信息的时间点起生成预测帧类型的传输图像。
3.根据权利要求2所述的电子装置,其中,所述调谐脱离信息包括所述用户设备的调谐脱离结束信息,以及
其中,所述控制模块还配置为:当获得所述调谐脱离结束信息时生成内帧类型的传输图像,并将生成的传输图像发送至所述用户设备。
4.根据权利要求2所述的电子装置,其中,所述调谐脱离信息包括与所述用户设备的调谐脱离平均结束时间有关的信息,并且所述控制模块在经过所述调谐脱离平均结束时间时,生成内帧类型的传输图像。
5.根据权利要求2所述的电子装置,其中,所述调谐脱离信息包括与所述用户设备的调谐脱离预期结束时间有关的信息,并且所述控制模块在所述调谐脱离预期结束时间经过时,生成内帧类型的传输图像。
6.根据权利要求5所述的电子装置,其中,所述控制模块在生成内帧类型的所述传输图像之后,生成预测帧类型的后一传输图像。
7.根据权利要求1所述的电子装置,其中,所述调谐脱离信息包括所述用户设备的调谐脱离开始信息和与所述用户设备有关的信息,并且当所述用户设备是支持单射频LTE(SRLTE)的终端时,所述控制模块从获得所述调谐脱离开始信息的时间点起,生成内帧类型的传输图像。
8.根据权利要求7所述的电子装置,其中,当从所述用户设备接收到调谐脱离结束信息时,所述控制模块生成内帧类型的传输图像以将生成的传输图像发送至所述用户设备,并在发送之后生成参照帧类型的后一传输图像。
9.根据权利要求1所述的电子装置,其中,所述调谐脱离信息包括所述用户设备的调谐脱离开始信息和与所述用户设备有关的信息,并且当所述用户设备是支持单射频双待机(SRDS)的终端时,所述控制模块从获得所述调谐脱离开始信息的时间点起生成参照帧类型的传输图像。
10.根据权利要求9所述的电子装置,其中,当所述用户设备是支持SRDS的终端时,如果经过了调谐脱离的预期结束时间或接收到调谐脱离结束信息,则所述控制模块生成内帧类型的传输图像以将生成的传输图像发送至所述用户设备。
11.一种视频通话方法,包括:
在第一用户设备和第二用户设备之间连接基于数据包的视频通话;
在所述第一用户设备处从所述第二用户设备接收调谐脱离信息;以及
基于接收到的所述调谐脱离信息,确定待发送至所述第二用户设备的传输图像的帧类型。
12.根据权利要求11所述的方法,其中,接收所述调谐脱离信息的步骤包括接收所述第二用户设备的调谐脱离开始信息,并且确定所述帧类型的步骤包括:当接收到所述调谐脱离开始信息时将预测帧类型确定为所述传输图像的帧类型。
13.根据权利要求12所述的方法,其中,接收所述调谐脱离信息的步骤包括接收所述第二用户设备的调谐脱离预期结束时间的信息,并且确定所述帧类型的步骤包括:当经过了所述调谐脱离预期结束时间时将内帧类型确定为所述传输图像的帧类型。
14.根据权利要求12所述的方法,其中,接收所述调谐脱离信息的步骤包括接收所述第二用户设备的调谐脱离结束信息,并且确定所述帧类型的步骤包括:当接收到所述调谐脱离结束信息时将内帧类型确定为所述传输图像的帧类型。
15.根据权利要求14所述的方法,还包括:当在接收到所述调谐脱离结束信息之后生成所述内帧类型的传输图像时,生成预测帧类型的下一图像。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR10-2014-0165531 | 2014-11-25 | ||
KR1020140165531A KR20160062579A (ko) | 2014-11-25 | 2014-11-25 | 패킷 기반 네트워크에서의 영상 통화 방법 및 이를 지원하는 장치 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN105635626A true CN105635626A (zh) | 2016-06-01 |
CN105635626B CN105635626B (zh) | 2019-04-19 |
Family
ID=54707557
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201510825000.XA Expired - Fee Related CN105635626B (zh) | 2014-11-25 | 2015-11-24 | 包交换网络中的视频通话方法及支持该方法的装置 |
Country Status (4)
Country | Link |
---|---|
US (1) | US9544536B2 (zh) |
EP (1) | EP3026921A1 (zh) |
KR (1) | KR20160062579A (zh) |
CN (1) | CN105635626B (zh) |
Families Citing this family (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20170034723A1 (en) * | 2015-07-30 | 2017-02-02 | Qualcomm Incorporated | Managing Tune Away During An Ongoing Voice Call |
CN106856472B (zh) * | 2015-12-09 | 2019-10-25 | 展讯通信(上海)有限公司 | 基于VoLTE的视频通话方法、装置及移动终端 |
KR101827118B1 (ko) | 2016-05-23 | 2018-02-07 | 엘에스산전 주식회사 | 회로차단기 |
US10524230B1 (en) * | 2017-06-21 | 2019-12-31 | Sprint Spectrum L.P. | Dynamic paging concatenation methods and systems |
EP3782429A4 (en) * | 2018-07-17 | 2021-06-23 | Samsung Electronics Co., Ltd. | METHOD AND SYSTEM FOR THE PROVISION OF SIMULTANEOUS VOICE AND DATA SERVICES IN EN-DC CAPABLE USER DEVICES |
CN111405316A (zh) * | 2020-03-12 | 2020-07-10 | 北京奇艺世纪科技有限公司 | 插帧方法、电子设备及可读存储介质 |
CN113691761B (zh) * | 2021-08-30 | 2023-01-06 | 联想(北京)有限公司 | 通信控制方法、装置及电子设备 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102246521A (zh) * | 2008-12-15 | 2011-11-16 | 微软公司 | 视频会议速率匹配 |
WO2012177763A2 (en) * | 2011-06-20 | 2012-12-27 | Vid Scale. Inc. | Method and apparatus for video aware bandwidth aggregation and/or management |
US20130331057A1 (en) * | 2012-06-09 | 2013-12-12 | Apple Inc. | Adjusting connection states of a mobile wireless device |
US20140119293A1 (en) * | 2012-11-01 | 2014-05-01 | Qualcomm Incorporated | Optimized scheduling subscription procedures on a wireless communication device |
Family Cites Families (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9307489B2 (en) * | 2012-02-20 | 2016-04-05 | Apple Inc. | Methods and apparatus for preferred data traffic (application) mode |
US9807651B2 (en) * | 2012-04-04 | 2017-10-31 | Apple Inc. | Assisted management of radio resources across dual networks |
US8868130B2 (en) * | 2012-04-10 | 2014-10-21 | Apple Inc. | Apparatus and methods for state suspension in hybrid networks |
US9906998B2 (en) * | 2012-05-08 | 2018-02-27 | Qualcomm Incorporated | Mechanism to improve dynamic sharing of receive chain(s) among radio access technologies |
US9363694B2 (en) * | 2012-06-29 | 2016-06-07 | Apple Inc. | Determining connection states of a mobile wireless device |
WO2014052501A1 (en) | 2012-09-26 | 2014-04-03 | Apple Inc. | Method for simultaneously receiving lte and 1x in srlte device |
US9936478B2 (en) * | 2014-05-23 | 2018-04-03 | Verizon Patent And Licensing Inc. | Dual registration coordination for tune away |
-
2014
- 2014-11-25 KR KR1020140165531A patent/KR20160062579A/ko not_active Application Discontinuation
-
2015
- 2015-11-24 EP EP15196050.7A patent/EP3026921A1/en not_active Ceased
- 2015-11-24 CN CN201510825000.XA patent/CN105635626B/zh not_active Expired - Fee Related
- 2015-11-25 US US14/952,542 patent/US9544536B2/en not_active Expired - Fee Related
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102246521A (zh) * | 2008-12-15 | 2011-11-16 | 微软公司 | 视频会议速率匹配 |
WO2012177763A2 (en) * | 2011-06-20 | 2012-12-27 | Vid Scale. Inc. | Method and apparatus for video aware bandwidth aggregation and/or management |
US20130331057A1 (en) * | 2012-06-09 | 2013-12-12 | Apple Inc. | Adjusting connection states of a mobile wireless device |
US20140119293A1 (en) * | 2012-11-01 | 2014-05-01 | Qualcomm Incorporated | Optimized scheduling subscription procedures on a wireless communication device |
Also Published As
Publication number | Publication date |
---|---|
CN105635626B (zh) | 2019-04-19 |
KR20160062579A (ko) | 2016-06-02 |
US20160150181A1 (en) | 2016-05-26 |
EP3026921A1 (en) | 2016-06-01 |
US9544536B2 (en) | 2017-01-10 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10902772B2 (en) | Display driving method, display driver integrated circuit, and electronic device comprising the same | |
CN105578446B (zh) | 使用多个订户身份模块的移动通信 | |
KR102277207B1 (ko) | 복수의 네트워크를 이용한 전자 장치의 통신 방법 및 그 장치 | |
CN105635626A (zh) | 包交换网络中的视频通话方法及支持该方法的装置 | |
US10761498B2 (en) | Electronic device and method for operating the same | |
US10810927B2 (en) | Electronic device and method for controlling display in electronic device | |
EP3379896B1 (en) | Method for providing tethering service and electronic device supporting the same | |
KR20160023065A (ko) | 적어도 하나 이상의 통신 방식을 선택하기 위한 방법 및 장치 | |
US10912130B2 (en) | Electronic device and tethering connection establishment method thereof | |
US20190208557A1 (en) | Method using a time point for sharing data between electronic devices based on situation information | |
US9918320B2 (en) | Method and apparatus for managing capability of electronic device in wireless communication system | |
US10135291B2 (en) | Method for charging one or more electronic devices and charging device therefor | |
US20170155917A1 (en) | Electronic device and operating method thereof | |
US10963208B2 (en) | Electronic device and method for operating electronic device | |
KR20160073171A (ko) | 통신 서비스를 제공하기 위한 방법 및 그 전자 장치 및 방법 | |
EP3054709B1 (en) | Electronic apparatus and short-range communication method thereof | |
US10397974B2 (en) | Electronic device and communication method of electronic device | |
KR102185182B1 (ko) | 전류 소모를 줄이기 위한 방법 및 그 전자 장치 | |
US9612790B2 (en) | Method and electronic device for providing frame information | |
KR20180089722A (ko) | 직접 통신 방법 및 그 전자 장치 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant | ||
CF01 | Termination of patent right due to non-payment of annual fee | ||
CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20190419 Termination date: 20201124 |