CN106658117A - 音/视频数据的处理方法及装置 - Google Patents

音/视频数据的处理方法及装置 Download PDF

Info

Publication number
CN106658117A
CN106658117A CN201611254743.7A CN201611254743A CN106658117A CN 106658117 A CN106658117 A CN 106658117A CN 201611254743 A CN201611254743 A CN 201611254743A CN 106658117 A CN106658117 A CN 106658117A
Authority
CN
China
Prior art keywords
video data
audio
played
thread
terminal equipment
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201611254743.7A
Other languages
English (en)
Inventor
周星杰
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Baidu Netcom Science and Technology Co Ltd
Original Assignee
Beijing Baidu Netcom Science and Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Baidu Netcom Science and Technology Co Ltd filed Critical Beijing Baidu Netcom Science and Technology Co Ltd
Priority to CN201611254743.7A priority Critical patent/CN106658117A/zh
Publication of CN106658117A publication Critical patent/CN106658117A/zh
Pending legal-status Critical Current

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/433Content storage operation, e.g. storage operation in response to a pause request, caching operations
    • H04N21/4331Caching operations, e.g. of an advertisement for later insertion during playback
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/414Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance
    • H04N21/41407Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance embedded in a portable device, e.g. video client on a mobile phone, PDA, laptop
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/414Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance
    • H04N21/41422Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance located in transportation means, e.g. personal vehicle
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/432Content retrieval operation from a local storage medium, e.g. hard-disk
    • H04N21/4325Content retrieval operation from a local storage medium, e.g. hard-disk by playing back content from the storage medium
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/436Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
    • H04N21/4363Adapting the video stream to a specific local network, e.g. a Bluetooth® network
    • H04N21/43637Adapting the video stream to a specific local network, e.g. a Bluetooth® network involving a wireless protocol, e.g. Bluetooth, RF or wireless LAN [IEEE 802.11]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/4402Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • H04N21/440218Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display by transcoding between formats or standards, e.g. from MPEG-2 to MPEG-4

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Databases & Information Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

本发明提供一种音/视频数据的处理方法及装置。本发明实施例通过接收互联应用所在第一终端设备所连接的第二终端设备的待播放音/视频数据,进而利用第一线程,将所述待播放音/视频数据写入缓冲队列,以及利用第二线程,从所述缓冲队列读取所述待播放音/视频数据,对所读取的待播放音/视频数据进行解码处理,以获得原始音/视频数据,使得能够对所述原始音/视频数据进行播放处理,由于引入了缓冲队列,使得缓冲队列中的待播放音/视频数据能够按照写入该缓冲队列的写入顺序被读取出来,能够尽量减少延时,有效地避免了卡顿现象的出现,从而提高了音/视频数据播放的流畅度。

Description

音/视频数据的处理方法及装置
【技术领域】
本发明涉及通信技术,尤其涉及一种音/视频数据的处理方法及装置。
【背景技术】
随着通信技术的发展,终端设备集成了越来越多的功能,从而使得终端设备的系统功能列表中包含了越来越多相应的应用(Application,APP)。有些终端设备上所安装的应用,本发明中称为互联应用,需要通过与其连接的另一个终端设备上安装一个相应的配合应用才能正常使用,否则没有任何使用价值,特别是对于一些车机互联应用。通常情况下,互联应用在接收到配合应用所发送的待播放音/视频数据之后,直接对该待播放音/视频数据进行解码处理,并播放解码处理之后的音/视频数据。
然而,由于互联应用在接收到待播放音/视频数据之后,直接进行解码处理与播放处理,使得很容易出现卡顿现象,从而导致了音/视频数据播放的流畅度的降低。
【发明内容】
本发明的多个方面提供一种音/视频数据的处理方法及装置,用以提高音/视频数据播放的流畅度。
本发明的一方面,提供一种音/视频数据的处理方法,包括:
接收互联应用所在第一终端设备所连接的第二终端设备的待播放音/视频数据;
利用第一线程,将所述待播放音/视频数据写入缓冲队列;
利用第二线程,从所述缓冲队列读取所述待播放音/视频数据,对所读取的待播放音/视频数据进行解码处理,以获得原始音/视频数据;
对所述原始音/视频数据进行播放处理。
如上所述的方面和任一可能的实现方式,进一步提供一种实现方式,所述待播放音/视频数据包括下列数据中的至少一项:
所述第二终端设备上所述互联应用所对应的配合应用的待播放音/视频数据;以及
所述第二终端设备上除了所述互联应用所对应的配合应用之外的其他应用的待播放音/视频数据。
如上所述的方面和任一可能的实现方式,进一步提供一种实现方式,所述利用第一线程,将所述待播放音/视频数据写入缓冲队列之前,还包括:
设置所述第一线程的优先级和所述第二线程的优先级。
如上所述的方面和任一可能的实现方式,进一步提供一种实现方式,所述设置所述第一线程的优先级和所述第二线程的优先级,包括:
将所述第一线程的优先级设置为高于所述第二线程的优先级。
如上所述的方面和任一可能的实现方式,进一步提供一种实现方式,所述利用第一线程,将所述待播放音/视频数据写入缓冲队列之后,所述利用第二线程,从所述缓冲队列读取所述待播放音/视频数据,对所读取的待播放音/视频数据进行解码处理,以获得原始音/视频数据之前,还包括:
利用所述第一线程,发送指示信息,以指示所述第二线程可以开始工作。
如上所述的方面和任一可能的实现方式,进一步提供一种实现方式,
所述第一终端设备为车载终端设备;
所述第二终端设备为用户终端设备。
本发明的另一方面,提供一种音/视频数据的处理装置,包括:
接收单元,用于接收互联应用所在第一终端设备所连接的第二终端设备的待播放音/视频数据;
写入单元,用于利用第一线程,将所述待播放音/视频数据写入缓冲队列;
解码单元,用于利用第二线程,从所述缓冲队列读取所述待播放音/视频数据,对所读取的待播放音/视频数据进行解码处理,以获得原始音/视频数据;
播放单元,用于对所述原始音/视频数据进行播放处理。
如上所述的方面和任一可能的实现方式,进一步提供一种实现方式,所述待播放音/视频数据包括下列数据中的至少一项:
所述第二终端设备上所述互联应用所对应的配合应用的待播放音/视频数据;以及
所述第二终端设备上除了所述互联应用所对应的配合应用之外的其他应用的待播放音/视频数据。
如上所述的方面和任一可能的实现方式,进一步提供一种实现方式,所述装置还包括设置单元,用于
设置所述第一线程的优先级和所述第二线程的优先级。
如上所述的方面和任一可能的实现方式,进一步提供一种实现方式,所述设置单元,具体用于
将所述第一线程的优先级设置为高于所述第二线程的优先级。
如上所述的方面和任一可能的实现方式,进一步提供一种实现方式,所述写入单元,还用于
利用所述第一线程,发送指示信息,以指示所述第二线程可以开始工作。
如上所述的方面和任一可能的实现方式,进一步提供一种实现方式,
所述第一终端设备为车载终端设备;
所述第二终端设备为用户终端设备。
由所述技术方案可知,本发明实施例通过接收互联应用所在第一终端设备所连接的第二终端设备的待播放音/视频数据,进而利用第一线程,将所述待播放音/视频数据写入缓冲队列,以及利用第二线程,从所述缓冲队列读取所述待播放音/视频数据,对所读取的待播放音/视频数据进行解码处理,以获得原始音/视频数据,使得能够对所述原始音/视频数据进行播放处理,由于引入了缓冲队列,使得缓冲队列中的待播放音/视频数据能够按照写入该缓冲队列的写入顺序被读取出来,能够尽量减少延时,有效地避免了卡顿现象的出现,从而提高了音/视频数据播放的流畅度。
另外,采用本发明所提供的技术方案,由于分别采用不同的线程即第一线程和第二线程进行待播放音/视频数据的读取处理和解码处理,能够有效保证音/视频数据播放的实时性。
另外,采用本发明所提供的技术方案,通过将用于进行待播放音/视频数据的读取处理的第一线程的优先级设置为高于用于进行待播放音/视频数据的解码处理第二线程的优先级,使得中央处理器(Central Processing Unit,CPU)不会被需要占用较多CPU时间的第二线程所独占,能够有效避免需要占用较短CPU时间的第一线程的延时。
另外,采用本发明所提供的技术方案,能够极大提升用户体验。
【附图说明】
为了更清楚地说明本发明实施例中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作一简单地介绍,显而易见地,下面描述中的附图是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1为本发明一实施例提供的音/视频数据的处理方法的流程示意图;
图2为本发明另一实施例提供的音/视频数据的处理装置的结构示意图;
图3为本发明另一实施例提供的音/视频数据的处理装置的结构示意图。
【具体实施方式】
为使本发明实施例的目的、技术方案和优点更加清楚,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的全部其他实施例,都属于本发明保护的范围。
需要说明的是,本发明实施例中所涉及的用户终端设备可以包括但不限于手机、个人数字助理(Personal Digital Assistant,PDA)、无线手持设备、平板电脑(TabletComputer)、个人电脑(Personal Computer,PC)、MP3播放器、MP4播放器、可穿戴设备(例如,智能眼镜、智能手表、智能手环等)等。本发明实施例中所涉及的车载终端设备,还可以称为车机,指的是安装在汽车里面的车载信息娱乐产品的简称,车机在功能上要能够实现人与车,车与外界(车与车)的信息通信。
另外,本文中术语“和/或”,仅仅是一种描述关联对象的关联关系,表示可以存在三种关系,例如,A和/或B,可以表示:单独存在A,同时存在A和B,单独存在B这三种情况。另外,本文中字符“/”,一般表示前后关联对象是一种“或”的关系。
图1为本发明一实施例提供的音/视频数据的处理方法的流程示意图,如图1所示。
101、接收互联应用所在第一终端设备所连接的第二终端设备的待播放音/视频数据。
102、利用第一线程,将所述待播放音/视频数据写入缓冲队列。
103、利用第二线程,从所述缓冲队列读取所述待播放音/视频数据,对所读取的待播放音/视频数据进行解码处理,以获得原始音/视频数据。
104、对所述原始音/视频数据进行播放处理。
需要说明的是,101~104的执行主体可以为位于第一终端设备的应用即互联应用,或者还可以为设置在位于第一终端设备的应用(即互联应用)中的插件或软件开发工具包(Software Development Kit,SDK)等功能单元,本实施例对此不进行特别限定。
可以理解的是,所述互联应用可以是安装在第一终端设备上的本地程序(nativeApp),或者还可以是第一终端设备上的浏览器的一个网页程序(webApp),本实施例对此不进行特别限定。
这样,通过接收互联应用所在第一终端设备所连接的第二终端设备的待播放音/视频数据,进而利用第一线程,将所述待播放音/视频数据写入缓冲队列,以及利用第二线程,从所述缓冲队列读取所述待播放音/视频数据,对所读取的待播放音/视频数据进行解码处理,以获得原始音/视频数据,使得能够对所述原始音/视频数据进行播放处理,由于引入了缓冲队列,使得缓冲队列中的待播放音/视频数据能够按照写入该缓冲队列的写入顺序被读取出来,能够尽量减少延时,有效地避免了卡顿现象的出现,从而提高了音/视频数据播放的流畅度。
可选地,在本实施例的一个可能的实现方式中,所述第一终端设备优选为车载终端设备;所述第二终端设备优选为用户终端设备。
反过来,所述第一终端设备也可以为用户终端设备;所述第二终端设备也可以为车载终端设备。但是,在实际应用中,用户终端设备上所安装的应用都可以单独执行,无需依赖与其连接的另一个终端设备才能正常使用,或者依赖与其连接的另一个终端设备上安装一个相应的配合应用才能正常使用。
本发明中,第一终端设备与第二终端设备通过但不限于蓝牙连接、通用串行总线(Universal Serial Bus,USB)连接和无线相容性认证(Wireless Fidelity,WI-FI)连接中的至少一项进行连接,本实施例对此不进行特别限定。
在完成第一终端设备与第二终端设备之间的设备连接建立之后,基于所建立的设备连接,还需要进一步建立第一终端设备上的互联应用与第二终端设备上的配合应用之间的通信连接。可以理解的是,所述通信连接可以包括但不限于蓝牙连接、USB连接和WI-FI连接中的至少一项,本实施例对此不进行特别限定。
这样,在建立第一终端设备上的互联应用与第二终端设备上的配合应用之间的通信连接之后,配合应用才可以通过互联应用,将配合应用所在第二终端设备的显示装置所显示的实时内容投射到互联应用中进行输出。
在一个具体的实现过程中,第一终端设备上的互联应用,可以通过第二终端设备上的该互联应用所对应的配合应用,在第一终端设备的显示装置上投射第二终端设备的显示装置所输出的界面,用户可以通过在互联应用中所投射的界面上进行操作,例如,触控操作或物理按键操作等,这样,就可以实现操作与其所在第一终端设备连接的第二终端设备上的配合应用。
在另一个具体的实现过程中,第一终端设备上的互联应用,还可以通过第二终端设备上的该互联应用所对应的配合应用,作为一个操作端例如,鼠标或遥控器等,用户可以通过在互联应用中进行操作,例如,触控操作或物理按键操作等,这样,就可以实现操作与其所在第一终端设备连接的第二终端设备上的配合应用。
可选地,在本实施例的一个可能的实现方式中,在101中,具体可以基于所述配合应用与所述互联应用之间的通信连接,接收所述互联应用所在第一终端设备所连接的第二终端设备的待播放音/视频数据。
具体来说,所接收到的所述待播放音/视频数据,可以包括但不限于下列数据中的至少一项:
所述第二终端设备上所述互联应用所对应的配合应用的待播放音/视频数据;以及
所述第二终端设备上除了所述互联应用所对应的配合应用之外的其他应用的待播放音/视频数据。
可选地,在本实施例的一个可能的实现方式中,在102之前,还可以进一步设置所述第一线程的优先级和所述第二线程的优先级。
具体来说,具体可以将所述第一线程的优先级设置为高于所述第二线程的优先级。这样,通过将用于进行待播放音/视频数据的读取处理的第一线程的优先级设置为高于用于进行待播放音/视频数据的解码处理第二线程的优先级,使得中央处理器(CentralProcessing Unit,CPU)不会被需要占用较多CPU时间的第二线程所独占,能够有效避免需要占用较短CPU时间的第一线程的延时。
同时,还可以进一步优化系统性能,降低使用过程中的平均CPU消耗,从而保证了音/视频数据播放的实时性和流畅性,能够大大提升用户体验。
可选地,在本实施例的一个可能的实现方式中,在102中,在利用第一线程,读取所接收到的待播放音/视频数据之后,可以将该待播放音/视频数据,写入缓冲队列。在写入缓冲队列的过程中,具体可以递增写入位置,以确保下一次写入待播放音/视频数据的写入位置在上一次写入待播放音/视频数据的写入位置之后。相应地,在写入缓冲队列之后,在执行103的过程中,则可以利用第二线程,从缓存队列的队列头读取该缓存队列中的待播放音/视频数据,并可以递增读取对应的写入位置,能够有效保证按照待播放音/视频数据的写入顺序进行读取。在读取待播放音/视频数据之后,可以对所读取的待播放音/视频数据进行解码处理,解码处理的详细描述可以参见现有技术中的相关内容,此处不再赘述。
可选地,在本实施例的一个可能的实现方式中,在102之后,在103之前,还可以进一步利用所述第一线程,发送指示信息,以指示所述第二线程可以开始工作。
具体来说,在执行102之后,也就是说,在第一线程接收到所述待播放音/视频数据之后,可以通过发送指示信息的方式,通知第二线程开始工作。
本实施例中,通过接收互联应用所在第一终端设备所连接的第二终端设备的待播放音/视频数据,进而利用第一线程,将所述待播放音/视频数据写入缓冲队列,以及利用第二线程,从所述缓冲队列读取所述待播放音/视频数据,对所读取的待播放音/视频数据进行解码处理,以获得原始音/视频数据,使得能够对所述原始音/视频数据进行播放处理,由于引入了缓冲队列,使得缓冲队列中的待播放音/视频数据能够按照写入该缓冲队列的写入顺序被读取出来,能够尽量减少延时,有效地避免了卡顿现象的出现,从而提高了音/视频数据播放的流畅度。
另外,采用本发明所提供的技术方案,由于分别采用不同的线程即第一线程和第二线程进行待播放音/视频数据的读取处理和解码处理,能够有效保证音/视频数据播放的实时性。
另外,采用本发明所提供的技术方案,通过将用于进行待播放音/视频数据的读取处理的第一线程的优先级设置为高于用于进行待播放音/视频数据的解码处理第二线程的优先级,使得中央处理器(Central Processing Unit,CPU)不会被需要占用较多CPU时间的第二线程所独占,能够有效避免需要占用较短CPU时间的第一线程的延时。
另外,采用本发明所提供的技术方案,能够极大提升用户体验。
需要说明的是,对于前述的各方法实施例,为了简单描述,故将其都表述为一系列的动作组合,但是本领域技术人员应该知悉,本发明并不受所描述的动作顺序的限制,因为依据本发明,某些步骤可以采用其他顺序或者同时进行。其次,本领域技术人员也应该知悉,说明书中所描述的实施例均属于优选实施例,所涉及的动作和模块并不一定是本发明所必须的。
在所述实施例中,对各个实施例的描述都各有侧重,某个实施例中没有详述的部分,可以参见其他实施例的相关描述。
图2为本发明另一实施例提供的音/视频数据的处理装置的结构示意图,如图2所示。本实施例的音/视频数据的处理装置可以包括接收单元21、写入单元22、解码单元23和播放单元24。其中,接收单元21,用于接收互联应用所在第一终端设备所连接的第二终端设备的待播放音/视频数据;写入单元22,用于利用第一线程,将所述待播放音/视频数据写入缓冲队列;解码单元23,用于利用第二线程,从所述缓冲队列读取所述待播放音/视频数据,对所读取的待播放音/视频数据进行解码处理,以获得原始音/视频数据;播放单元24,用于对所述原始音/视频数据进行播放处理。
需要说明的是,本实施例所提供的音/视频数据的处理装置可以为位于第一终端设备的应用即互联应用,或者还可以为设置在位于第一终端设备的应用(即互联应用)中的插件或软件开发工具包(Software Development Kit,SDK)等功能单元,本实施例对此不进行特别限定。
可以理解的是,所述互联应用可以是安装在第一终端设备上的本地程序(nativeApp),或者还可以是第一终端设备上的浏览器的一个网页程序(webApp),本实施例对此不进行特别限定。
可选地,在本实施例的一个可能的实现方式中,所述第一终端设备优选为车载终端设备;所述第二终端设备优选为用户终端设备。
可选地,在本实施例的一个可能的实现方式中,所述接收单元21所接收到的所述待播放音/视频数据,可以包括但不限于下列数据中的至少一项:
所述第二终端设备上所述互联应用所对应的配合应用的待播放音/视频数据;以及
所述第二终端设备上除了所述互联应用所对应的配合应用之外的其他应用的待播放音/视频数据。
可选地,在本实施例的一个可能的实现方式中,如图3所示,本实施例所提供的音/视频数据的处理装置还可以进一步包括设置单元31,用于设置所述第一线程的优先级和所述第二线程的优先级。
具体来说,所述设置单元,具体可以用于将所述第一线程的优先级设置为高于所述第二线程的优先级。
可选地,在本实施例的一个可能的实现方式中,所述写入单元22,还可以进一步用于利用所述第一线程,发送指示信息,以指示所述第二线程可以开始工作。
本实施例中,通过接收单元接收互联应用所在第一终端设备所连接的第二终端设备的待播放音/视频数据,进而由写入单元利用第一线程,将所述待播放音/视频数据写入缓冲队列,以及由解码单元利用第二线程,从所述缓冲队列读取所述待播放音/视频数据,对所读取的待播放音/视频数据进行解码处理,以获得原始音/视频数据,使得播放单元能够对所述原始音/视频数据进行播放处理,由于引入了缓冲队列,使得缓冲队列中的待播放音/视频数据能够按照写入该缓冲队列的写入顺序被读取出来,能够尽量减少延时,有效地避免了卡顿现象的出现,从而提高了音/视频数据播放的流畅度。
另外,采用本发明所提供的技术方案,由于分别采用不同的线程即第一线程和第二线程进行待播放音/视频数据的读取处理和解码处理,能够有效保证音/视频数据播放的实时性。
另外,采用本发明所提供的技术方案,通过将用于进行待播放音/视频数据的读取处理的第一线程的优先级设置为高于用于进行待播放音/视频数据的解码处理第二线程的优先级,使得中央处理器(Central Processing Unit,CPU)不会被需要占用较多CPU时间的第二线程所独占,能够有效避免需要占用较短CPU时间的第一线程的延时。
另外,采用本发明所提供的技术方案,能够极大提升用户体验。
需要说明的是,本实施例的音/视频数据的处理装置可以为位于第二终端设备的应用即互联应用所对应的配合应用,或者还可以为设置在位于第二终端设备的应用(即互联应用所对应的配合应用)中的插件或软件开发工具包(Software Development Kit,SDK)等功能单元,本实施例对此不进行特别限定。
可以理解的是,所述应用可以是安装在第二终端设备上的本地程序(nativeApp),或者还可以是第二终端设备上的浏览器的一个网页程序(webApp),本实施例对此不进行特别限定。
可选地,在本实施例的一个可能的实现方式中,所述第一终端设备优选为车载终端设备;所述第二终端设备优选为用户终端设备。
反过来,所述第一终端设备也可以为用户终端设备;所述第二终端设备也可以为车载终端设备。但是,在实际应用中,用户终端设备上所安装的应用都可以单独执行,无需依赖与其连接的另一个终端设备才能正常使用,或者依赖与其连接的另一个终端设备上安装一个相应的配合应用才能正常使用。
本发明中,第一终端设备与第二终端设备通过但不限于蓝牙连接、通用串行总线(Universal Serial Bus,USB)连接和无线相容性认证(Wireless Fidelity,WI-FI)连接中的至少一项进行连接,本实施例对此不进行特别限定。
在完成第一终端设备与第二终端设备之间的设备连接建立之后,基于所建立的设备连接,还需要进一步建立第一终端设备上的互联应用与第二终端设备上的配合应用之间的通信连接。可以理解的是,所述通信连接可以包括但不限于蓝牙连接、USB连接和WI-FI连接中的至少一项,本实施例对此不进行特别限定。
可选地,在本实施例的一个可能的实现方式中,所述获取单元21,具体可以用于基于所述配合应用与所述互联应用之间的通信连接,获取所述用户通过所述互联应用操作所述第二终端设备的操作事件数据。
在本发明中,所谓的用户通过第一终端设备上的互联应用操作与所述第一终端设备连接的第二终端设备的操作事件数据,是指用户在第一终端设备上的互联应用中所进行的操作行为,例如,单击、双击、拖动等操作,映射到第二终端设备的显示装置上的操作事件的相关数据,可以包括但不限于操作事件(例如,触控事件、物理按键事件等)和所述操作事件的坐标数据。
可以理解的是,具体可以根据第一终端设备的显示装置的显示尺寸与第二终端设备的显示装置的显示尺寸的比值,将用户在第一终端设备上的互联应用中所进行的操作行为的坐标数据,映射到第二终端设备的显示装置上的操作事件的坐标数据,以作为所获取的操作事件的坐标数据。
通常,目前的终端设备都是触控类型的终端设备,其显示装置除了具有显示功能之外,还具有触控输入功能。在终端设备的显示装置上的任何一个操作行为,都需要被分解为若干个操作事件的集合,才能够对这些操作事件的相关数据进行相应处理。具体地,所述操作事件包括下列事件中的至少一项:
Down事件;
Up事件;以及
Move事件。
所谓的Down事件,在一次操作行为中仅会触发一次,是在手指刚接触终端设备的显示装置时触发。
所谓的Up事件,在一次操作行为中仅会触发一次,是在手指离开终端设备的显示装置时触发。
所谓的Move事件,在一次操作行为的过程中会触发0个、1个或者多个Move事件,如果手指一直在终端设备的显示装置上移动,就会一直触发Move事件,而且都是在Down事件之后与Up事件之前。
需要说明的是,图1对应的实施例中方法,可以由本实施例提供的音/视频数据的处理装置实现。详细描述可以参见图1对应的实施例中的相关内容,此处不再赘述。
本实施例中,通过获取单元获取用户通过第一终端设备上的互联应用操作与所述第一终端设备连接的第二终端设备的操作事件数据,进而,由传递单元将所述操作事件数据,直接传递给所述第二终端设备上所述互联应用对应的配合应用当前所输出的页面对象,以使得所述页面对象执行所述操作事件数据,由于可以将所述操作事件数据,直接传递给所述第二终端设备上所述互联应用对应的配合应用当前所输出的页面对象,通过配合应用当前所输出的页面对象直接进行操作事件数据的分发,因此,无需额外利用另一个终端设备的操作系统的事件模拟接口,通过该操作系统的输入管理(InputManager)模块,重新进行操作事件数据的分发,操作简单,且操作时间短,从而提高了互联应用的操作效率。
另外,采用本发明所提供的技术方案,能够极大提升用户体验。
本发明实施例提供的上述方法和装置可以以设置并运行于设备中的计算机程序体现。该设备可以包括一个或多个处理器,还包括存储器和一个或多个程序。其中该一个或多个程序存储于存储器中,被上述一个或多个处理器执行以实现本发明上述实施例中所示的方法流程和/或装置操作。例如,被上述一个或多个处理器执行的方法流程,可以包括:
获取用户通过第一终端设备上的互联应用操作与所述第一终端设备连接的第二终端设备的操作事件数据;
将所述操作事件数据,直接传递给所述第二终端设备上的配合应用当前所输出的页面对象,以使得所述页面对象执行所述操作事件数据;所述配合应用为所述互联应用所对应的应用。
所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,所述描述的系统,装置和单元的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。
在本发明所提供的几个实施例中,应该理解到,所揭露的系统,装置和方法,可以通过其它的方式实现。例如,以上所描述的装置实施例仅仅是示意性的,例如,所述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,装置或单元的间接耦合或通信连接,可以是电性,机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本发明各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。所述集成的单元既可以采用硬件的形式实现,也可以采用硬件加软件功能单元的形式实现。
所述以软件功能单元的形式实现的集成的单元,可以存储在一个计算机可读取存储介质中。所述软件功能单元存储在一个存储介质中,包括若干指令用以使得一台计算机装置(可以是个人计算机,音频处理引擎,或者网络装置等)或处理器(processor)执行本发明各个实施例所述方法的部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(Read-Only Memory,ROM)、随机存取存储器(Random Access Memory,RAM)、磁碟或者光盘等各种可以存储程序代码的介质。
最后应说明的是:以上实施例仅用以说明本发明的技术方案,而非对其限制;尽管参照前述实施例对本发明进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围。

Claims (12)

1.一种音/视频数据的处理方法,其特征在于,包括:
接收互联应用所在第一终端设备所连接的第二终端设备的待播放音/视频数据;
利用第一线程,将所述待播放音/视频数据写入缓冲队列;
利用第二线程,从所述缓冲队列读取所述待播放音/视频数据,对所读取的待播放音/视频数据进行解码处理,以获得原始音/视频数据;
对所述原始音/视频数据进行播放处理。
2.根据权利要求1所述的方法,其特征在于,所述待播放音/视频数据包括下列数据中的至少一项:
所述第二终端设备上所述互联应用所对应的配合应用的待播放音/视频数据;以及
所述第二终端设备上除了所述互联应用所对应的配合应用之外的其他应用的待播放音/视频数据。
3.根据权利要求1所述的方法,其特征在于,所述利用第一线程,将所述待播放音/视频数据写入缓冲队列之前,还包括:
设置所述第一线程的优先级和所述第二线程的优先级。
4.根据权利要求3所述的方法,其特征在于,所述设置所述第一线程的优先级和所述第二线程的优先级,包括:
将所述第一线程的优先级设置为高于所述第二线程的优先级。
5.根据权利要求1~4任一权利要求所述的方法,其特征在于,所述利用第一线程,将所述待播放音/视频数据写入缓冲队列之后,所述利用第二线程,从所述缓冲队列读取所述待播放音/视频数据,对所读取的待播放音/视频数据进行解码处理,以获得原始音/视频数据之前,还包括:
利用所述第一线程,发送指示信息,以指示所述第二线程可以开始工作。
6.根据权利要求1~4任一权利要求所述的方法,其特征在于,
所述第一终端设备为车载终端设备;
所述第二终端设备为用户终端设备。
7.一种音/视频数据的处理装置,其特征在于,包括:
接收单元,用于接收互联应用所在第一终端设备所连接的第二终端设备的待播放音/视频数据;
写入单元,用于利用第一线程,将所述待播放音/视频数据写入缓冲队列;
解码单元,用于利用第二线程,从所述缓冲队列读取所述待播放音/视频数据,对所读取的待播放音/视频数据进行解码处理,以获得原始音/视频数据;
播放单元,用于对所述原始音/视频数据进行播放处理。
8.根据权利要求7所述的装置,其特征在于,所述待播放音/视频数据包括下列数据中的至少一项:
所述第二终端设备上所述互联应用所对应的配合应用的待播放音/视频数据;以及
所述第二终端设备上除了所述互联应用所对应的配合应用之外的其他应用的待播放音/视频数据。
9.根据权利要求7所述的装置,其特征在于,所述装置还包括设置单元,用于
设置所述第一线程的优先级和所述第二线程的优先级。
10.根据权利要求9所述的装置,其特征在于,所述设置单元,具体用于
将所述第一线程的优先级设置为高于所述第二线程的优先级。
11.根据权利要求7~10任一权利要求所述的装置,其特征在于,所述写入单元,还用于
利用所述第一线程,发送指示信息,以指示所述第二线程可以开始工作。
12.根据权利要求7~10任一权利要求所述的装置,其特征在于,
所述第一终端设备为车载终端设备;
所述第二终端设备为用户终端设备。
CN201611254743.7A 2016-12-30 2016-12-30 音/视频数据的处理方法及装置 Pending CN106658117A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201611254743.7A CN106658117A (zh) 2016-12-30 2016-12-30 音/视频数据的处理方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201611254743.7A CN106658117A (zh) 2016-12-30 2016-12-30 音/视频数据的处理方法及装置

Publications (1)

Publication Number Publication Date
CN106658117A true CN106658117A (zh) 2017-05-10

Family

ID=58837250

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201611254743.7A Pending CN106658117A (zh) 2016-12-30 2016-12-30 音/视频数据的处理方法及装置

Country Status (1)

Country Link
CN (1) CN106658117A (zh)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108877845A (zh) * 2018-06-29 2018-11-23 广州酷狗计算机科技有限公司 歌曲播放方法及装置
CN109361951A (zh) * 2018-10-30 2019-02-19 腾讯科技(深圳)有限公司 一种视频数据缓存方法、装置及用户终端
CN113766266A (zh) * 2021-09-10 2021-12-07 阿波罗智联(北京)科技有限公司 音视频处理方法、装置、设备以及存储介质
WO2022160743A1 (zh) * 2021-01-29 2022-08-04 稿定(厦门)科技有限公司 视频文件播放系统、音视频播放流程、存储介质

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20040181611A1 (en) * 2003-03-14 2004-09-16 Viresh Ratnakar Multimedia streaming system for wireless handheld devices
CN101236567A (zh) * 2008-02-04 2008-08-06 上海升岳电子科技有限公司 一种实现在线网络多媒体应用的方法和终端设备
CN103281500A (zh) * 2013-04-24 2013-09-04 贵阳朗玛信息技术股份有限公司 处理视频的方法及装置
CN104240739A (zh) * 2014-09-04 2014-12-24 广东欧珀移动通信有限公司 一种移动终端的音乐播放方法及装置
CN104394456A (zh) * 2014-11-20 2015-03-04 福建星网视易信息系统有限公司 一种嵌入式环境下音视频解码的方法及装置
CN105872668A (zh) * 2016-03-31 2016-08-17 百度在线网络技术(北京)有限公司 音视频数据处理方法、装置以及车载终端

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20040181611A1 (en) * 2003-03-14 2004-09-16 Viresh Ratnakar Multimedia streaming system for wireless handheld devices
CN101236567A (zh) * 2008-02-04 2008-08-06 上海升岳电子科技有限公司 一种实现在线网络多媒体应用的方法和终端设备
CN103281500A (zh) * 2013-04-24 2013-09-04 贵阳朗玛信息技术股份有限公司 处理视频的方法及装置
CN104240739A (zh) * 2014-09-04 2014-12-24 广东欧珀移动通信有限公司 一种移动终端的音乐播放方法及装置
CN104394456A (zh) * 2014-11-20 2015-03-04 福建星网视易信息系统有限公司 一种嵌入式环境下音视频解码的方法及装置
CN105872668A (zh) * 2016-03-31 2016-08-17 百度在线网络技术(北京)有限公司 音视频数据处理方法、装置以及车载终端

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108877845A (zh) * 2018-06-29 2018-11-23 广州酷狗计算机科技有限公司 歌曲播放方法及装置
CN109361951A (zh) * 2018-10-30 2019-02-19 腾讯科技(深圳)有限公司 一种视频数据缓存方法、装置及用户终端
WO2022160743A1 (zh) * 2021-01-29 2022-08-04 稿定(厦门)科技有限公司 视频文件播放系统、音视频播放流程、存储介质
CN113766266A (zh) * 2021-09-10 2021-12-07 阿波罗智联(北京)科技有限公司 音视频处理方法、装置、设备以及存储介质
CN113766266B (zh) * 2021-09-10 2024-02-13 阿波罗智联(北京)科技有限公司 音视频处理方法、装置、设备以及存储介质

Similar Documents

Publication Publication Date Title
CN106658117A (zh) 音/视频数据的处理方法及装置
CN102265250A (zh) 控制功能手势
CN111651384B (zh) 寄存器的读写方法、芯片、子系统、寄存器组及终端
CN104380258A (zh) 对图形硬件实施调度操作
CN104049732A (zh) 多输入控制方法和系统和支持该方法和系统的电子装置
CN106844017A (zh) 用于网站服务器处理事件的方法和设备
CN102483703A (zh) 计算机线程至异构资源的映射
CN109756568A (zh) 文件的处理方法、设备及计算机可读存储介质
CN108416744A (zh) 图像处理方法、装置、设备及计算机可读存储介质
CN103348320A (zh) 通用图形处理单元中的计算资源管线化
CN105554294A (zh) 终端设备的控制方法及装置
CN107678780A (zh) 一种内存管理方法、装置、存储介质及终端设备
CN108696649A (zh) 图像处理方法、装置、设备及计算机可读存储介质
CN110493125A (zh) 即时通信方法、设备及计算机可读存储介质
CN107038905A (zh) 一种vr智能教育控制系统
CN103201705A (zh) 视频内容的输出
CN104980801A (zh) 音频数据/视频数据的处理方法及装置
CN106843794A (zh) 一种基于安卓的分屏显示方法和系统
CN107463929A (zh) 语音数据的处理方法、装置、设备及计算机可读存储介质
CN109940611A (zh) 轨迹复现方法、系统及终端设备
CN108292286A (zh) 用于等待时间敏感的掩蔽写入的全掩码部分比特字段(fm-pbf)技术
CN109032422A (zh) 一种智能手写板及其实现方法和装置
CN102609310A (zh) 一种计算机操作系统及其进程间通讯的方法
CN109189705B (zh) 一种usb扩展方法、装置、设备、存储介质及系统
CN105046638B (zh) 处理器系统及其图像数据处理方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20170510