CN101889441A - 便携式终端和用于视频输出的方法 - Google Patents

便携式终端和用于视频输出的方法 Download PDF

Info

Publication number
CN101889441A
CN101889441A CN200780101583.5A CN200780101583A CN101889441A CN 101889441 A CN101889441 A CN 101889441A CN 200780101583 A CN200780101583 A CN 200780101583A CN 101889441 A CN101889441 A CN 101889441A
Authority
CN
China
Prior art keywords
decoding
video
frame
output
portable terminal
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN200780101583.5A
Other languages
English (en)
Inventor
村田竜一
羽田哲
坂爪俊宏
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Holdings Corp
Original Assignee
Matsushita Electric Industrial Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Matsushita Electric Industrial Co Ltd filed Critical Matsushita Electric Industrial Co Ltd
Publication of CN101889441A publication Critical patent/CN101889441A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/414—Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance
    • H04N21/41407—Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance embedded in a portable device, e.g. video client on a mobile phone, PDA, laptop
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/44—Decoders specially adapted therefor, e.g. video decoders which are asymmetric with respect to the encoder
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/426—Internal components of the client ; Characteristics thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442—Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/44231—Monitoring of peripheral device or external card, e.g. to detect processing problems in a handheld device or the failure of an external recording device

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • General Engineering & Computer Science (AREA)
  • Automation & Control Theory (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Databases & Information Systems (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Telephone Function (AREA)
  • Mobile Radio Communication Systems (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

本发明提供了一种便携式终端，其能够实现由解码消耗的功率的减少、并且能够在从任意位置再现运动图像数据时减少，将对应于该位置的视频信号输出到显示器所需要的时间。在流控制单元(19)检测到解码开始触发时，视频解码单元(15)从作为开始点的视频帧的关键帧开始解码，该关键帧与由音频解码单元(12)解码的音频帧同步。在流控制单元(19)检测到显示操作时，视频输出单元(16)从作为开始点的第一视频信号开始输出，第一视频信号与从音频输出单元(14)输出的音频信号同步。

Description

便携式终端和用于视频输出的方法
技术领域
本发明涉及可以重放数字视频的移动终端以及该移动终端的数字视频输出方法。
背景技术
近年来，根据安装在移动终端中的存储器的存储容量的增大或数字电视播送的播送开始，重放数据量相对较大的运动图像数据的场合增多了。
为了重放运动图像数据，在模式从仅重放构成运动图像数据的音频帧的模式切换到重放构成运动图像数据的音频帧和视频帧的模式时，移动终端需要执行视频帧的解码处理。如果在给出视频帧的重放指令的操作(上面提及的切换操作)之后执行解码处理，则向显示器输出视频信号被延迟多达解码处理所需要的时间(具体地是，多达直到用作用于解码P帧的参考的I帧被解码为止所需要的时间)。另一方面，如果移动终端在接受给出视频帧的重放指令的操作之前执行解码处理，则移动终端可以在接受该操作的同时在显示器上输出视频信号，但是还需要执行用于不输出到显示器的视频帧的解码处理，并且在解码处理中涉及的功耗增加。考虑到直到视频信号被输出到显示器为止所需要的时间的缩短以及在解码处理中涉及的功耗的功率节省，专利文献1和2公开了以下的装置：
在接受给出视频帧的重放指令的操作时，在专利文献1中公开的运动图像解码装置解码顶部视频帧(top video frame)，并且输出解码的视频信号(静止图像)，并且在将该信号输出到显示器的同时进行后面的视频帧的解码。
在专利文献2中公开的折叠移动电话(folded mobile telephone)是可以接收TV播送的移动电话。在该移动电话从打开状态操作到折叠状态时，停止向显示器输出视频信号，而继续向扬声器输出声音信号。
专利文献1：JP-3-228490A
专利文献2：JP-2005-94418A
发明内容
本发明要解决的问题
然而，尽管在专利文献1中公开的运动图像解码装置可以缩短直到视频信号被输出到显示器为止所需要的时间，但是输出到显示器的屏幕始终如一地成为基于顶部视频帧的静止图像。可以在视频帧的任意期望的点处执行重放；在此情况下，与对应于期望的点的视频无关的静止图像被显示在显示器上，由此显示器缺乏一致性。
在专利文献2中公开的折叠移动电话使得可以节省在解码处理中涉及的功耗，然而，在移动电话从折叠状态操作到打开状态时，向显示器输出视频信号仍被延迟多达执行解码处理所需要的时间。
鉴于上述情况，本发明的目的是提供一种移动终端和数字视频输出方法，其中在实现在解码处理中涉及的功耗的功率节省同时，如果在视频帧的任意期望的点处执行重放，可以缩短直到对应于该点的视频信号被输出到显示器为止所需要的时间。
解决问题的手段
根据本发明的移动终端被结构为包括：声音解码部分，其被适配为顺序解码形成声音的音频帧；声音输出部分，其被适配为输出由声音解码部分解码的声音信号；视频解码部分，其被适配为顺序解码形成运动图像的视频帧；解码触发检测部分，其被适配为检测用于使得视频解码部分开始解码视频帧的解码开始触发；视频输出部分，其被适配为输出由视频解码部分解码的视频信号；以及显示操作检测部分，其被适配为检测用于使得视频输出部分开始输出视频信号的显示操作，其中在解码触发检测部分检测到解码开始触发时，视频解码部分以视频帧的关键帧作为开始点而开始解码，关键帧与由声音解码部分解码的音频帧同步，并且在显示操作检测部分检测到显示操作时，视频输出部分以第一视频信号作为开始点而开始输出，第一视频信号与由声音输出部分输出的声音信号同步。
根据本发明的视频输出方法包括以下步骤：解码形成声音的音频帧；输出解码的声音信号；检测用于开始解码形成运动图像的视频帧的解码开始触发；在检测到解码开始触发时，从与解码的音频帧同步的视频帧的关键帧开始解码；检测用于开始输出解码的视频信号的显示操作；以及从与所输出的声音信号同步的视频信号开始输出。
根据这些结构，在实现在解码处理中涉及的功耗的功率节省的同时，如果在运动图像数据中的任意期望的点处执行重放，可以缩短直到对应于该点的视频信号被输出到显示器为止所需要的时间。
根据本发明的移动终端还包括以下结构，其中如果在视频解码部分以视频帧的关键帧作为开始点而开始解码之前、显示操作检测部分检测到显示操作，则视频输出部分输出不同于第一视频信号的第二视频信号。
根据本发明的移动终端还包括以下结构，其中第二视频信号是在解码触发检测部分检测到解码开始触发之前由视频输出部分解码的视频信号。
因此，可以存在输出以下的视频信号的场合：尽管该视频信号被解码，但是由于用户未执行显示操作，因此该视频信号未被输出；从而，可以有效地使用该视频信号。
根据本发明的移动终端还包括以下结构，其中如果在从由解码触发检测部分检测到解码开始触发起的预定时间内显示操作检测部分未检测到显示操作，则视频解码部分停止解码视频帧。
根据本发明的移动终端还包括以下结构，其中如果解码触发检测部分检测到用于终止解码被解码的视频帧的解码终止触发，则视频解码部分停止解码视频帧。
根据本发明的视频输出方法包括以下结构，该结构包括以下步骤：检测用于终止正被执行的解码的解码终止触发；以及在检测到解码终止触发时终止正被执行的视频帧解码。
根据这些结构，可以抑制在检测到显示操作之前执行的视频帧的解码中涉及的功耗。
根据本发明的移动终端还包括以下结构，其中显示操作检测部分将视频输出部分的开始检测为显示操作。
根据本发明的移动终端还包括以下结构，其中显示操作检测部分将从通过执行应用程序而生成的第一显示屏幕到通过视频输出部分输出视频信号的第二显示屏幕的显示的切换检测为显示操作。
根据本发明的移动终端还包括以下结构，其中解码触发检测部分将由声音解码部分解码的声音信号的音调的改变和声音的改变之一或者两者检测为解码开始触发。
根据本发明的移动终端还包括以下结构，其中解码触发检测部分将用于解码音频帧或者视频帧中的预定帧的时间点检测为解码开始触发，该预定帧由有关包括音频帧和视频帧的运动图像内容的内容信息指定。
根据本发明的移动终端还包括以下结构，其中解码触发检测部分将终止显示通过执行应用程序而生成的第一显示屏幕检测为解码开始触发。
根据本发明的移动终端还包括以下结构，其中移动终端包括传感器，其被适配为感测用户行为的改变以及放置移动终端的环境的改变，其中解码触发检测部分将从传感器输入的信号的改变检测为解码开始触发。
根据这些结构，可以事先检测在由用户执行的仅重放声音期间视频显示操作在哪一定时被执行。
本发明的优点
根据本发明的移动终端和视频输出方法，在实现节省在解码处理中包含的功耗的同时，如果在运动图像数据中的任意期望的点处执行重放，可以缩短直到对应于该点的视频信号被输出到显示器为止所需要的时间。
附图说明
图1是根据本发明的实施例的移动终端的功能框图。
图2是根据本发明的实施例的移动终端的解码处理的概念图示。
图3是示出根据本发明的实施例的移动终端进行的视频输出的流程的流程图。
图4是示出根据本发明的实施例的移动终端进行的视频输出的流程的流程图。
图5是示出根据本发明的实施例的移动终端进行的对于解码开始/终止触发的检测处理的流程的流程图。
附图标号和符号的描述
11数据格式分析部分
12声音解码部分
13声音分析部分
14声音输出部分
15视频解码部分
16视频输出部分
17应用部分
18外部传感器
19流控制部分
具体实施方式
下面将详细描述根据本发明的实施例的移动终端以及该移动终端的视频输出方法：
图1是根据本发明的实施例的移动终端的功能框图。根据本发明的实施例的移动终端包括数据格式分析部分11、声音解码部分12、声音分析部分13、声音输出部分14、视频解码部分15、视频输出部分16、应用部分17、外部传感器部分18、以及流控制部分19。在图1中，从数据格式分析部分11指向声音输出部分14或者视频输出部分16的每个轮廓线箭头(outlinearrow)表示音频帧或者声音信号的流、以及视频帧或者视频信号的流；指向流控制部分19的每个箭头(细线)表示从箭头的起始的部分到流控制部分19的控制信号流；从流控制部分19指向视频解码部分15或者视频输出部分16的每个箭头(粗线)表示从流控制部分19到视频解码部分15或者视频输出部分16的驱动控制信号流。
数据格式分析部分11分析从在根据本发明的实施例的移动终端中包括的存储器(图中未示出)以及数字TV播送接收机(图中未示出)输入的运动图像数据。运动图像数据指每个音频帧、每个视频帧、关于音频帧或者视频帧的重放控制的控制数据、以及关于运动图像数据的内容数据(指定其中观看运动图像数据的用户可能感兴趣的运动图像数据的任意期望的点的信息，诸如例如被运动图像数据的创建者指定为重要点的运动图像数据上的时间信息)的集合(可以在音频帧或者视频帧的头部中描述控制数据，并且控制数据可以处于与运动图像数据相区别的文件格式)。数据格式分析部分11参考运动图像数据的控制数据并且将音频帧顺序输出到声音解码部分12，并且将视频帧顺序输出到视频解码部分15。数据格式分析部分11还参考内容数据中描述的时间信息(其在下文中可被称作截止点(cutout point))。如果输出到声音解码部分12的音频帧或者输出到视频解码部分15的视频帧具有对应于所述时间信息的时间戳、或者在所述时间信息对应于音乐作品的吸引人的部分的开始时刻时、或者如果该帧具有对应于该时间信息之前若干秒的时间信息的时间戳，数据格式分析部分11向流控制部分19输出控制信号，用于请求开始解码视频帧。
声音解码部分12解码从数据格式分析部分11输入的音频帧并且向声音分析部分13和声音输出部分14输出经过解码的声音信号。声音解码部分12的解码处理例如符合MPEG(运动画面专家组)标准。
声音分析部分13分析从声音解码部分12输入的声音信号，并且如果确定该声音信号具有特征点，则声音分析部分13向流控制部分19输出控制信号，用于请求开始解码视频帧。使用已经存在的基于声音音量、频率、模式匹配(pattern matching)来确定特征点的算法，作为声音分析部分13对于特征点存在或者不存在的确定算法。
声音输出部分14对应于扬声器，输入由声音解码部分12解码的声音信号，并且基于该声音信号输出声音。
在从流控制部分19输入用于请求解码视频帧的驱动控制信号的同时，视频解码部分15解码从数据格式分析部分11输入的视频帧，并且向视频输出部分16输出经过解码的视频信号。另一方面，在视频解码部分15不输入来自流控制部分19的驱动控制信号的同时，视频解码部分15不输入从数据格式分析部分11输出的视频帧，或者即使在输入视频帧时也不解码视频帧，由此节省功率。视频解码部分15的解码处理例如符合MPEG(运动画面专家组)标准。
将参照图2中所示的根据本发明的移动终端的解码处理的概念图示来描述视频解码部分15的解码处理。在图2所示的上部的相邻矩形表示由声音解码部分12解码的音频帧，而下部的相邻矩形表示由视频解码部分15解码的视频帧。带阴影的(screened)矩形表示由声音解码部分12解码的音频帧或者由视频解码部分15解码的视频帧。在图2中，假定将时间戳T1到T15分配给音频帧或者视频帧。
声音解码部分12顺序解码由数据格式分析部分11根据时间戳的顺序输出到声音解码部分12的音频帧。另一方面，在直到从自流控制部分19输入用于请求解码视频帧的驱动控制信号为止的时间段(图2中的功率节省时间段)，视频解码部分15不输入或者解码由数据格式分析部分11根据时间戳的顺序输出到视频解码部分15的视频帧(在图2中是具有时间戳T1到T3的视频帧)。视频解码部分15在从流控制部分19输入用于请求解码视频帧的驱动控制信号的时间段(图2中的功率节省解除时间段(power savingrelease period))执行以下的解码处理。
当视频解码部分15从流控制部分19输入用于请求解码视频帧的驱动控制信号时，视频解码部分15开始输入由数据格式分析部分11根据时间戳的顺序输出到视频解码部分15的视频帧，并且等待视频帧的I帧(在图2中，将直到输入I帧为止的时间段描述为待机时间段)。在符合MPEG标准的编码系统、例如MPEG4中，将视频信号压缩为I帧和P帧。在如此压缩的帧中，将I帧解码为仅具有I帧的信息的视频信号。另一方面，P帧是P帧的数据和具有比P帧更早的时间戳的I帧的数据之间的差异信息，并且该P帧被解码为具有P帧的和紧接在P帧之前的I帧的数据的信息的视频信号。I帧具有成为用于解码P帧的参考的功能，并且可以由此被称为关键帧。在视频解码部分15输入由数据格式分析部分11根据时间戳的顺序输出到视频解码部分15的视频帧的I帧(在图2中是具有时间戳T6的视频帧)时，视频解码部分15解码I帧，并且每当视频解码部分15在I帧之后输入P帧(在图2中是时间戳T7上的以及之后的每个视频帧)时，视频解码部分15参考I帧(具有时间戳T6的视频帧)并且解码P帧(在图2中，将解码I帧和P帧的时间段描述为解码时间段)。
在视频输出部分16从流控制部分19输入用于请求输出视频信号的驱动控制信号，视频输出部分16基于从视频解码部分15输入的视频信号执行视频输出。另一方面，在视频输出部分16未从流控制部分19输入驱动控制信号，视频输出部分16不执行从视频解码部分15输入的视频信号的视频输出。
应用部分17执行在存储器(图中未示出)中存储的应用程序，向视频输出部分16输出所生成的视频信号，并且使得视频输出部分16执行视频输出。应用部分17参考应用程序，生成不同于由视频解码部分15解码并且生成的视频信号的视频信号，并且向视频输出部分16输出所生成的信号。应用部分17参考从操作键(图中未示出)接受的输入信号，并且执行应用程序。此时，在应用部分17通过一个应用程序执行终止生成视频信号的处理或者预知的终止处理(它们可被称为应用终止处理)时，应用部分17向流控制部分19输出用于请求开始解码视频帧的控制信号，其中，所述终止生成视频信号的处理或者预知的终止处理诸如是接受用于停止应用程序的输入信号(例如用于请求关闭诸如计算器、记事簿、或者电话簿之类的应用程序的信号)、切换到由不同的应用程序输出的另一窗口、屏幕滚动到达底端、或者完成应用程序的执行(例如完成下载或者到达游戏程序的转折点)。
外部传感器部分18基于由加速传感器、压电传感器等的各种传感器(包含用于将从外部添加的一些刺激转换为电信号的通用设备)检测到的信号而确定用户行为的改变或者放置移动终端的环境的改变。如果外部传感器部分18确定存在改变，则其向流控制部分19输出用于请求开始解码视频帧的控制信号。例如，如果由加速传感器检测到的信号变得大于阈值，则外部传感器部分18假定用户取出移动设备，并且确定未操作移动终端的用户开始操作移动终端。外部传感器部分18从由用于移动终端进行的无线通信的无线部分(图中未示出)执行的接收强度的测量状况以及移交的状况确定未操作移动终端的用户开始操作移动终端。
在流控制部分19从数据格式分析部分11、声音分析部分12、应用部分17、以及外部传感器部分18中的至少一个输入用于请求开始解码视频帧的控制信号时，流控制部分19向视频解码部分15输出用于请求解码视频帧的驱动控制信号。在接受来自用户的用于请求输出运动图像数据的操作时，流控制部分19向视频输出部分16输出用于请求输出视频信号的驱动控制信号。
接下来，将参照图3和图4中所示的、示出根据本发明的实施例的移动终端进行的视频输出的流程的流程图，来描述根据本发明的实施例的移动终端进行的视频输出的流程。
根据本发明的实施例的移动终端存储运动图像数据并且执行运动图像数据的音频帧的重放处理。在开始读取运动图像数据时，首先移动终端参考在内容数据中描述的数据(步骤301)并且确定截止点存在与否(步骤303)。如果截止点存在(步骤302处的是)，则移动终端登记截止点(步骤303)。
如果在内容数据中不存在截止点(步骤302处的否)或者在登记截止点(步骤303)之后，移动终端解码被分配了时间戳T1的音频帧(步骤305)并且输出声音信号T1(步骤306)。在此之后，移动终端执行如步骤307处所示的解码开始/终止触发的检测处理。图5是示出根据本发明的实施例的移动终端进行的解码开始/终止触发的检测处理的流程的流程图。
移动终端在一时间点处确定是否有除了运动图像重放之外的屏幕显示被输出到显示器(步骤501)。如果通过执行应用程序生成的运动图像重放之外的屏幕显示未被输出到显示器(步骤501处的否)，则移动终端分析经过解码并且生成的声音信号Tn(步骤502)并且确定在声音信号Tn中是否存在特征点(步骤503)。在此之后，移动终端确定时间戳Tn是否与对应于截止点的时刻匹配(步骤504)，并且还基于从外部传感器输入的信号来确定是否存在用户行为的改变或者放置移动终端的环境的改变(步骤505)。另一方面，如果移动终端在步骤501处确定通过执行应用程序将除了运动图像重放之外的屏幕显示输出到显示器(步骤501处的是)，则移动终端确定是否存在停止应用程序、屏幕滚动到达底端、完成应用程序的执行等的应用终止处理(步骤506)。如果移动终端在步骤503、504、505、或者506中的任何步骤处的处理中检测到对应的事件，则移动终端确定检测到解码触发；如果移动终端在任何步骤处的处理中都未能检测到对应的事件，则移动终端确定不能检测到解码触发。如果移动终端检测到解码触发，则其确定该解码触发是作为解码的开始条件的触发(其将在下文中被称为解码开始触发)还是作为正被执行的解码的终止条件的触发(其将在下文中被称为解码终止触发)(步骤507)。
关于解码开始触发与解码终止触发之间的差异，在步骤503处的处理中，从其中在声音信号Tn中不存在特征点的状态到其中存在特征点的状态的改变对应于解码开始触发，而从其中在声音信号Tn中存在特征点的状态到其中不存在特征点的状态的改变对应于解码终止触发。在步骤504处的处理中，在截止点设定开始点的时刻以及终止点的时刻，开始点的时刻对应于解码开始触发，终止点的时刻对应于解码终止触发。在步骤505处的处理中，从其中在来自传感器的输入信号中不存在改变的状态到其中存在改变的状态的改变对应于解码开始触发，从其中存在改变的状态到其中不存在改变的状态的改变对应于解码终止触发。在步骤506处的处理中，检测到应用终止处理对应于解码开始触发，检测到应用开始处理对应于解码终止触发。
在解码开始/终止触发的检测处理之后，移动终端将时间戳T1递增1以变为时间戳T2(步骤308)并且在解码开始/终止触发的检测处理中确定是否检测到解码开始触发(步骤309)。在此之后，在步骤308处的处理中将时间戳递增1以变为下一时间戳的同时，移动终端重复从步骤305到步骤309的处理，直到检测到解码开始触发为止。
如果移动终端在解码开始/终止触发的检测处理中确定检测到解码开始触发(步骤309处的是)，则移动终端开始运动图像数据的视频帧的解码处理(至“A”)。
当在步骤307处检测到解码开始触发时，移动终端参考时间戳Tn，确定被分配了时间戳Tn的视频帧，并且确定视频帧是否是I帧(步骤401)。如果所确定的视频帧不是I帧(步骤401处的否)，则移动终端仅解码被分配了时间戳Tn的音频帧(步骤402)，输出经解码并且生成的声音信号Tn(步骤403)，并且将时间戳递增1以变为时间戳Tn(步骤405)。在移动终端输出声音信号Tn的同时，移动终端可以显示之前解码的静止图像或者运动图像(备选图像(alternative image)，后面将在步骤412处的处理中描述备选图像的生成处理)(步骤404)。
另一方面，如果所确定的视频帧是I帧(步骤401处的是)，则移动终端开始对时间计数(步骤406)并且解码被分配了时间戳Tn的音频帧和视频帧(步骤407)。
在移动终端接受用于请求通过诸如键操作或者轻触(flip)的开启操作之类的显示操作而输出运动图像数据的信号(用于请求输出视频信号的信号)(步骤408处的是)时，移动终端输出经解码并且生成的声音信号Tn以及视频信号Tn(步骤409)，并且将时间戳递增1以变为时间戳Tn(步骤410)。如果移动终端未接受用于请求通过诸如键操作或者轻触的开启操作之类的显示操作而输出运动图像数据的信号(用于请求输出视频信号的信号)(步骤408处的否)，则移动终端仅输出经解码并且生成的声音信号Tn(步骤411)，执行解码开始/终止触发的检测处理(步骤413)，并且将时间戳递增1以变为时间戳Tn(步骤414)。
如果移动终端未接受用于请求输出运动图像数据的信号(用于请求输出视频信号的信号)(步骤408处的否)，则移动终端可以存储在步骤407处解码的声音信号作为备选图像(步骤412)。因此，可以存在输出以下的视频信号的场合：尽管该视频信号在图2中所示的待机时间段中被解码，但是由于用户未执行显示操作，因此该视频信号未被输出；由此，可以有效地使用该视频信号。
如果在步骤414处的处理中将时间戳递增1以变为时间戳Tn之后不能检测到解码终止触发(步骤415处的否)，或者如果在步骤406处的处理中所计数的时间小于预定时间(步骤416处的否)，则移动终端重复从步骤407到步骤416的处理。另一方面，如果检测到解码终止触发(步骤415处的是)，或者如果在步骤406处的处理中所计数的时间超过预定时间(步骤416处的是)，则移动终端停止解码后面的视频帧并且进入步骤305处的处理(至“B”)。
步骤416处的处理意味着：当在图2中示出的解码时间段变为预定时间或者更长、同时用户未执行显示处理时，进行到功率节省时间段的转换，以等待检测到解码开始触发。因此，可以抑制在视频帧的解码中涉及的功耗。
如上所述，根据本发明的实施例的移动终端，在实现解码处理中涉及的功耗的功率节省的同时，如果在运动图像数据中的任意期望的点处执行重放，可以缩短直到对应于该点的视频信号被输出到显示器为止所需要的时间。
尽管已经参照具体实施例详细描述了本发明，但是对于本领域技术人员来说显而易见的是：可以在不偏离本发明的精神和范围的情况下做出各种改变和修改。
工业可应用性
根据本发明的移动终端和视频输出方法，本发明提供了以下优点：在实现在解码处理中涉及的功耗的功率节省同时，如果在运动图像数据中的任意期望的点处执行重放，可以缩短直到对应于该点的视频信号被输出到显示器为止所需要的时间，并且本发明在可以重放数字视频的移动终端的领域中是有用的。

Claims (13)

1.一种移动终端，包括：
声音解码部分，其被适配为顺序解码形成声音的音频帧；
声音输出部分，其被适配为输出由声音解码部分解码的声音信号；
视频解码部分，其被适配为顺序解码形成运动图像的视频帧；
解码触发检测部分，其被适配为检测用于使得视频解码部分开始解码视频帧的解码开始触发；
视频输出部分，其被适配为输出由视频解码部分解码的视频信号；以及
显示操作检测部分，其被适配为检测用于使得视频输出部分开始输出视频信号的显示操作，其中
在解码触发检测部分检测到解码开始触发时，视频解码部分以视频帧的关键帧作为开始点而开始解码，关键帧与由声音解码部分解码的音频帧同步，并且
在显示操作检测部分检测到显示操作时，视频输出部分以第一视频信号作为开始点而开始输出，第一视频信号与由声音输出部分输出的声音信号同步。
2.如权利要求1所述的移动终端，其中
如果在视频解码部分以视频帧的关键帧作为开始点而开始解码之前、显示操作检测部分检测到显示操作，则视频输出部分输出不同于第一视频信号的第二视频信号。
3.如权利要求2所述的移动终端，其中
第二视频信号是在解码触发检测部分检测到解码开始触发之前由视频输出部分解码的视频信号。
4.如权利要求1到3中的任一项所述的移动终端，其中
如果在从由解码触发检测部分检测到解码开始触发起的预定时间内显示操作检测部分未检测到显示操作，则视频解码部分停止解码视频帧。
5.如权利要求1到4中的任一项所述的移动终端，其中
如果解码触发检测部分检测到用于终止解码被解码的视频帧的解码终止触发，则视频解码部分停止解码视频帧。
6.如权利要求1到4中的任一项所述的移动终端，其中
显示操作检测部分将视频输出部分的开始检测为显示操作。
7.如权利要求1到4中的任一项所述的移动终端，其中
显示操作检测部分将从通过执行应用程序而生成的第一显示屏幕到通过视频输出部分输出视频信号的第二显示屏幕的显示的切换检测为显示操作。
8.如权利要求1到7中的任一项所述的移动终端，其中
解码触发检测部分将由声音解码部分解码的声音信号的音调的改变和声音的改变之一或者两者检测为解码开始触发。
9.如权利要求1到7中的任一项所述的移动终端，其中
解码触发检测部分将用于解码音频帧或者视频帧中的预定帧的时间点检测为解码开始触发，该预定帧由有关包括音频帧和视频帧的运动图像内容的内容信息指定。
10.如权利要求7所述的移动终端，其中
解码触发检测部分将终止显示通过执行应用程序而生成的第一显示屏幕检测为解码开始触发。
11.如权利要求1到7中的任一项所述的移动终端，包括：
传感器，其被适配为感测用户行为的改变以及放置移动终端的环境的改变，其中
解码触发检测部分将从传感器输入的信号的改变检测为解码开始触发。
12.一种视频输出方法，包括以下步骤：
解码形成声音的音频帧；
输出解码的声音信号；
检测用于开始解码形成运动图像的视频帧的解码开始触发；
在检测到解码开始触发时，从与解码的音频帧同步的视频帧的关键帧开始解码；
检测用于开始输出解码的视频信号的显示操作；以及
从与所输出的声音信号同步的视频信号开始输出。
13.如权利要求12所述的视频输出方法，包括以下步骤：
检测用于终止正被执行的解码的解码终止触发；以及
在检测到解码终止触发时终止正被执行的视频帧解码。
CN200780101583.5A 2007-11-16 2007-11-16 便携式终端和用于视频输出的方法 Pending CN101889441A (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/JP2007/072320 WO2009063572A1 (ja) 2007-11-16 2007-11-16 携帯端末装置及び映像出力方法

Publications (1)

Publication Number Publication Date
CN101889441A true CN101889441A (zh) 2010-11-17

Family

ID=40638428

Family Applications (1)

Application Number Title Priority Date Filing Date
CN200780101583.5A Pending CN101889441A (zh) 2007-11-16 2007-11-16 便携式终端和用于视频输出的方法

Country Status (4)

Country Link
US (1) US20100238996A1 (zh)
JP (1) JPWO2009063572A1 (zh)
CN (1) CN101889441A (zh)
WO (1) WO2009063572A1 (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109862384A (zh) * 2019-03-13 2019-06-07 北京河马能量体育科技有限公司 一种音视频自动同步方法及同步系统

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102457558B (zh) * 2010-10-25 2015-05-27 中国移动通信集团公司 一种基于感知能力的终端和应用程序控制方法
KR101887187B1 (ko) * 2011-11-17 2018-08-09 삼성전자주식회사 디코딩 정보를 이용하여 컨텐츠의 데이터를 디코딩하는 방법 및 장치

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100310548B1 (ko) * 1993-12-18 2002-06-27 이데이 노부유끼 데이타재생장치및데이타기억매체
US6396874B1 (en) * 1997-11-12 2002-05-28 Sony Corporation Decoding method and apparatus and recording method and apparatus for moving picture data
JP2000354241A (ja) * 1999-06-14 2000-12-19 Matsushita Electric Ind Co Ltd 画像復号化装置
JP4035277B2 (ja) * 2000-05-31 2008-01-16 富士通株式会社 映像・音声再生装置及び映像・音声再生方法
WO2002086740A2 (en) * 2001-04-18 2002-10-31 Matsushita Electric Industrial Co., Ltd. Portable terminal, overlay output method, and program therefor
JP3755817B2 (ja) * 2001-04-18 2006-03-15 松下電器産業株式会社 携帯端末、出力方法、プログラム、及びその記録媒体
FR2841080A1 (fr) * 2002-06-14 2003-12-19 Thomson Licensing Sa Procede de visualisation video utilisant un decodeur
JP4408677B2 (ja) * 2002-11-29 2010-02-03 キヤノン株式会社 受信装置及び受信方法
WO2005098854A1 (ja) * 2004-04-06 2005-10-20 Matsushita Electric Industrial Co., Ltd. 音声再生装置、音声再生方法及びプログラム

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109862384A (zh) * 2019-03-13 2019-06-07 北京河马能量体育科技有限公司 一种音视频自动同步方法及同步系统

Also Published As

Publication number Publication date
WO2009063572A1 (ja) 2009-05-22
JPWO2009063572A1 (ja) 2011-03-31
US20100238996A1 (en) 2010-09-23

Similar Documents

Publication Publication Date Title
US9794605B2 (en) Using time-stamped event entries to facilitate synchronizing data streams
KR100630204B1 (ko) 휴대단말기의 멀티태스킹 수행 장치 및 방법
RU2648262C2 (ru) Способ и устройство для выполнения синхронизации мультимедийных данных
CN110636370B (zh) 一种视频处理方法、装置、电子设备和可读介质
CN100574389C (zh) 一种具有数码相框功能的数字电视的实现方法
CN106507204B (zh) 一种视频倒放方法和装置
CN103780943A (zh) 一种音轨切换的方法、设备及系统
CN104616241A (zh) 进行视频截图的方法和装置
US20070186250A1 (en) Video processing methods and systems for portable electronic devices lacking native video support
CN104486645A (zh) 确定节目收视率的方法、播放设备、服务器及装置
CN106792118A (zh) 多媒体文件的播放方法及装置
CN101889441A (zh) 便携式终端和用于视频输出的方法
CN107734390B (zh) 直播方法、装置及存储介质
CN108668346A (zh) 终端设备的功耗优化方法、装置、设备和存储介质
KR101342210B1 (ko) 휴대단말기의 화면밝기 제어장치 및 방법
US20080045202A1 (en) Remote control method through wireless transmission
JP6178570B2 (ja) 携帯端末機における音楽再生終了装置及びその方法
CN107277592B (zh) 基于嵌入式平台的多媒体数据播放方法、装置及存储介质
US11740698B2 (en) Electronic device
US20130331972A1 (en) System and method for synchronizing an application with audio content
CN100437546C (zh) 一种实现音频和视频同步的方法
CN101009894B (zh) 显示关于便携式终端的条件的信息的方法
JP4592713B2 (ja) 情報処理装置
KR20060118195A (ko) 영상 입력부를 구비한 휴대용 단말기에서 영상을입력신호로 인식하는 장치 및 방법
TW201419038A (zh) 智慧型裝置之快速選擇功能之方法、記錄媒體及電腦程式產品

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C02 Deemed withdrawal of patent application after publication (patent law 2001)
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20101117