JP2008092353A - Image output apparatus, portable image display apparatus, and program - Google Patents

Image output apparatus, portable image display apparatus, and program Download PDF

Info

Publication number
JP2008092353A
JP2008092353A JP2006271985A JP2006271985A JP2008092353A JP 2008092353 A JP2008092353 A JP 2008092353A JP 2006271985 A JP2006271985 A JP 2006271985A JP 2006271985 A JP2006271985 A JP 2006271985A JP 2008092353 A JP2008092353 A JP 2008092353A
Authority
JP
Japan
Prior art keywords
unit
moving image
image output
component
pixel
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2006271985A
Other languages
Japanese (ja)
Inventor
Katsuhiko Kamei
克比古 亀井
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sharp Corp
Original Assignee
Sharp Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sharp Corp filed Critical Sharp Corp
Priority to JP2006271985A priority Critical patent/JP2008092353A/en
Publication of JP2008092353A publication Critical patent/JP2008092353A/en
Pending legal-status Critical Current

Links

Images

Classifications

    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02DCLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
    • Y02D30/00Reducing energy consumption in communication networks
    • Y02D30/70Reducing energy consumption in communication networks in wireless communication networks

Landscapes

  • Telephone Function (AREA)
  • Color Television Systems (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Mobile Radio Communication Systems (AREA)

Abstract

<P>PROBLEM TO BE SOLVED: To provide an image output apparatus capable of significantly reducing power consumption as required, preventing frame missing and image irregularities, and decoding and outputting image data consisting of a plurality of components that have been decoded in decoding processes indipendently from other components. <P>SOLUTION: If an output voltage value of a battery 110 rises beyond a specified value, a control part 108 turns on a switch 1043, and connects a switch 1048 to a terminal B, operating all components of a moving image processing part 104. If the output voltage value of the battery 110 drops beyond the specified value, the control part 108 turns off the switch 1043, connects the switch 1048 to a terminal A, and stops a color difference re-constituting part 1044, a color difference filter part 1046, and a color space conversion part 1047 of the moving image processing part 104, to operate other components. <P>COPYRIGHT: (C)2008,JPO&INPIT

Description

本発明は、他の成分と独立した復号プロセスで復号される複数の成分によって構成される画像データを復号して出力する画像出力装置に関する。また、本発明は、そのような画像出力装置を有する携帯用画像表示機器に関する。また、本発明は、そのような画像出力装置の動作を制御するプログラムに関する。   The present invention relates to an image output apparatus that decodes and outputs image data composed of a plurality of components decoded by a decoding process independent of other components. The present invention also relates to a portable image display device having such an image output device. The present invention also relates to a program for controlling the operation of such an image output apparatus.

近年、テレビジョン放送の視聴機能やテレビ電話機能を有する携帯電話に代表される、画像出力が可能な小型の携帯機器が普及してきている。   In recent years, small portable devices capable of image output, such as mobile phones having a television broadcast viewing function and a videophone function, have become widespread.

一般的に、画像データの処理プロセスは、テキストデータなどの処理プロセスと比べて複雑であり、消費電力も大きい。そのため、電池によって駆動する機器が画像データの処理を行うと、該機器の駆動時間が短くなるという問題が発生する。   In general, the processing process of image data is more complicated than the processing process of text data and the power consumption is large. Therefore, when a device driven by a battery processes image data, there arises a problem that the drive time of the device is shortened.

この問題に対処するための発明として、特許文献1に記載の通信端末装置が知られている。図5は、特許文献1に記載の、地上波ディジタル放送の視聴が可能な通信端末装置900の概略の構成を示すブロック図である。なお、図5においては、特許文献1に記載の通信端末装置の構成要素のうち、地上波ディジタル放送の動画像データを受信してから動画像を表示するまでの流れに関わる構成要素のみを抽出して示している。   As an invention for dealing with this problem, a communication terminal device described in Patent Document 1 is known. FIG. 5 is a block diagram showing a schematic configuration of a communication terminal device 900 described in Patent Document 1 and capable of viewing terrestrial digital broadcasting. In FIG. 5, only the components related to the flow from the reception of moving image data of terrestrial digital broadcasting to the display of moving images are extracted from the components of the communication terminal device described in Patent Document 1. As shown.

通信端末装置900は、アンテナ901と、OFDM(Orthogonal Frequency Division Multiplexing)復調部902と、受信メモリ部903と、動画像処理部904と、表示メモリ部905と、表示制御部906と、表示部907と、画質制御部908と、計測部909と、電池910とを有している。   The communication terminal device 900 includes an antenna 901, an OFDM (Orthogonal Frequency Division Multiplexing) demodulator 902, a reception memory unit 903, a moving image processing unit 904, a display memory unit 905, a display control unit 906, and a display unit 907. An image quality control unit 908, a measurement unit 909, and a battery 910.

通信端末装置900による、地上波ディジタル放送の動画像データを受信してから動画像を表示するまでの処理の流れは以下の通りである。まず、アンテナ901が地上波ディジタル放送の動画像データを受信し、OFDM復調部902へ伝達する。OFDM復調部902は、アンテナ901から伝達された地上波ディジタル放送の動画像データに対するOFDM復調を施し、得られた動画像データを受信メモリ部903へ伝達する。   The flow of processing from the reception of moving image data of terrestrial digital broadcasting by the communication terminal device 900 until the display of the moving image is as follows. First, the antenna 901 receives moving image data of terrestrial digital broadcasting and transmits it to the OFDM demodulator 902. The OFDM demodulator 902 performs OFDM demodulation on the moving image data of the terrestrial digital broadcast transmitted from the antenna 901 and transmits the obtained moving image data to the reception memory unit 903.

受信メモリ部903は、OFDM復調部902から伝達された動画像データをメモリに記憶する。動画像処理部904は、受信メモリ部903のメモリに記憶された動画像データを取り込み、該動画像データに対する各種動画像処理を施し、得られた画素情報(R成分、G成分、B成分)を表示メモリ部905へ伝達する。   The reception memory unit 903 stores the moving image data transmitted from the OFDM demodulation unit 902 in the memory. The moving image processing unit 904 takes in moving image data stored in the memory of the reception memory unit 903, performs various moving image processing on the moving image data, and obtains pixel information (R component, G component, B component). Is transmitted to the display memory unit 905.

表示メモリ部905は、動画像処理部904から伝達された画素情報をメモリに記憶する。表示制御部906は、表示メモリ部905のメモリに記憶された画素情報を定期的に読み出して、表示部907へ伝達する。表示部907は、表示制御部906から伝達された画素情報を基に、動画像を表示する。   The display memory unit 905 stores the pixel information transmitted from the moving image processing unit 904 in the memory. The display control unit 906 periodically reads out pixel information stored in the memory of the display memory unit 905 and transmits the pixel information to the display unit 907. The display unit 907 displays a moving image based on the pixel information transmitted from the display control unit 906.

ここで、表示制御部906には画質制御部908が、画質制御部908には計測部909が、計測部909には電池910が、各々接続されている。電池910は、通信端末装置900に電源を供給する。計測部909は、電池910の出力電圧値を所定の時間間隔で計測し、これを画質制御部908に伝達する。   Here, an image quality control unit 908 is connected to the display control unit 906, a measurement unit 909 is connected to the image quality control unit 908, and a battery 910 is connected to the measurement unit 909. The battery 910 supplies power to the communication terminal device 900. The measurement unit 909 measures the output voltage value of the battery 910 at a predetermined time interval, and transmits this to the image quality control unit 908.

画質制御部908は、計測部909から伝達された電池910の出力電圧値が所定値以下である場合に、表示部907に表示する動画像の解像度を粗くする、あるいは表示部907に表示する動画像のフレーム数を削減する旨の指令を表示制御部906に伝達する。表示制御部906は、画質制御部908からの指令に応じて、表示部907に表示する動画像の解像度を粗くする、あるいは表示部907に表示する動画像のフレーム数を削減する制御を行う。   When the output voltage value of the battery 910 transmitted from the measurement unit 909 is equal to or lower than a predetermined value, the image quality control unit 908 coarsens the resolution of the moving image displayed on the display unit 907 or displays the moving image displayed on the display unit 907 A command to reduce the number of image frames is transmitted to the display control unit 906. The display control unit 906 performs control to reduce the resolution of the moving image displayed on the display unit 907 or reduce the number of frames of the moving image displayed on the display unit 907 in response to a command from the image quality control unit 908.

上記構成の通信端末装置900によると、表示制御部906は、電池910の出力電圧値が所定値以下である場合に、表示部907に表示する動画像の解像度を粗くする、あるいは表示部907に表示する動画像のフレーム数を削減する制御を行うので、表示部907の消費電力を低減させることができる。電池910の出力電圧値が所定値を下回っている場合には、電池910の残量が十分でないので、表示部907の消費電力を低減させることによって、電話やメールの送受信ができなくなる事態を未然に防止することができる。また、ユーザは、動画像視聴中に、電池910の残量が少なくなったことを視認できることとなるので、電池910の電池切れによって電話やメールの送受信ができなくなることを防止するために、地上波ディジタル放送の視聴を停止するなどの対策をとることができる。
特開2005−109616号公報
According to the communication terminal device 900 having the above configuration, the display control unit 906 roughens the resolution of the moving image displayed on the display unit 907 when the output voltage value of the battery 910 is a predetermined value or less, or Since control is performed to reduce the number of frames of moving images to be displayed, power consumption of the display unit 907 can be reduced. When the output voltage value of the battery 910 is lower than the predetermined value, the remaining amount of the battery 910 is not sufficient, so that the situation in which the telephone or mail cannot be transmitted / received by reducing the power consumption of the display unit 907 may occur. Can be prevented. In addition, since the user can visually recognize that the remaining amount of the battery 910 has decreased during viewing of the moving image, in order to prevent the phone and mail from being transmitted / received due to the battery 910 being out of battery, Measures such as stopping the viewing of digital wave broadcasting can be taken.
JP 2005-109616 A

ところで、現在、テレビ電話などにおける動画像圧縮に利用されている動画像圧縮方式として、ISO(International Organization for Standardization)よって策定されたMPEG(Motion Picture Experts Group)4方式が知られている。また、携帯機器向け地上波ディジタル放送などにおける動画像圧縮に利用されている動画像圧縮方式として、ITU−T(International Telecommunications Union-Telecommunications Standardization Sector)によって策定されたH.264方式が知られている。   By the way, as a moving image compression method currently used for moving image compression in a video phone or the like, there is known an MPEG (Motion Picture Experts Group) 4 method established by ISO (International Organization for Standardization). In addition, as a moving image compression method used for moving image compression in terrestrial digital broadcasting for portable devices, the H.264 standard developed by ITU-T (International Telecommunications Union-Telecommunications Standardization Sector). The H.264 system is known.

ここで、通信端末装置900のように、MPEG4方式やH.264方式などの動画像圧縮方式で圧縮された動画像データを復号して出力する場合には、動画像処理部904の処理プロセスが非常に複雑であり、消費電力が大きい。しかしながら、特許文献1に記載の通信端末装置900においては、電池910の残量が少なくなった場合に、表示部907の消費電力を低減しているのみであり、動画像処理部904の消費電力の低減については考慮されておらず、消費電力の低減効果は限定的である。   Here, like the communication terminal device 900, the MPEG4 system or the H.264 standard is used. When moving image data compressed by a moving image compression method such as the H.264 method is decoded and output, the processing process of the moving image processing unit 904 is very complicated and consumes a large amount of power. However, in the communication terminal device 900 described in Patent Document 1, when the remaining amount of the battery 910 is reduced, only the power consumption of the display unit 907 is reduced, and the power consumption of the moving image processing unit 904 is reduced. The reduction of power consumption is not considered, and the effect of reducing power consumption is limited.

また、通信端末装置900のように、電池910で駆動し、動画像出力を行う携帯機器においては、駆動時間を延ばすために、動画像処理部904の能力を低めに設定することがある。例えば、動画像処理部904の動作クロックを低く設定すると、消費電力が抑えられるので、駆動時間を延ばすことができる。   Further, in a mobile device that is driven by the battery 910 and outputs a moving image like the communication terminal device 900, the capability of the moving image processing unit 904 may be set to be low in order to extend the driving time. For example, when the operation clock of the moving image processing unit 904 is set low, the power consumption can be suppressed, so that the driving time can be extended.

しかしながら、動画像処理部904の能力を低めに設定した場合、一時的に多量の動画像データを処理する必要があるときに、動画像処理部904による動画像データの処理が追いつかず、コマ落ちや画像乱れが発生するという問題がある。特に、動画像の中でシーンが変わるような場面では、一つのフレームに多量のデータ量が割り当てられることがあり、コマ落ちや画像乱れが発生しやすくなる。   However, when the capability of the moving image processing unit 904 is set low, when it is necessary to process a large amount of moving image data temporarily, the moving image data processing by the moving image processing unit 904 cannot catch up, and frame dropping occurs. And there is a problem that image disturbance occurs. In particular, in a scene where a scene changes in a moving image, a large amount of data may be assigned to one frame, and frame dropping and image disturbance are likely to occur.

上記の問題点を鑑みて、本発明においては、必要に応じて消費電力を大きく低減でき、コマ落ちや画像乱れを防止できる、他の成分と独立した復号プロセスで復号される複数の成分によって構成される画像データを復号して出力する画像出力装置を提供することを目的とする。また、本発明の他の目的は、そのような画像出力装置を有する携帯用画像表示機器を提供することである。また、本発明の他の目的は、そのような画像出力装置の動作を制御するプログラムを提供することである。   In view of the above problems, the present invention is configured by a plurality of components decoded by a decoding process independent of other components, which can greatly reduce power consumption as necessary, and prevent frame dropping and image disturbance. An object of the present invention is to provide an image output device that decodes and outputs image data to be output. Another object of the present invention is to provide a portable image display device having such an image output device. Another object of the present invention is to provide a program for controlling the operation of such an image output apparatus.

本発明においては、画像出力装置は、他の成分と独立した復号プロセスで復号される複数の成分によって構成される画像データを復号して出力する画像出力装置であって、複数の前記成分各々に対して特定される前記復号プロセスによって復号処理を行う複数の独立復号処理部と、前記画像出力装置の状態を確認し、前記画像出力装置の状態によって定められる前記独立復号処理部各々の停止条件が満たされるときに、該停止条件が満たされる前記独立復号処理部を停止させる制御部とを有することを特徴とする。   In the present invention, the image output device is an image output device that decodes and outputs image data composed of a plurality of components decoded by a decoding process independent of other components, and each of the plurality of components is A plurality of independent decoding processing units that perform decoding processing according to the decoding process specified for each of the independent decoding processing units, and confirms a state of the image output device, and a stop condition of each of the independent decoding processing units determined by the state of the image output device is And a control unit that stops the independent decoding processing unit that satisfies the stop condition when the stop condition is satisfied.

本発明においては、上記構成の画像出力装置において、電池によって電源が供給され、前記電池の残量を計測する計測部を有し、前記独立復号処理部各々の前記停止条件は、前記電池の残量によって定められることが望ましい。   According to the present invention, the image output apparatus having the above configuration includes a measuring unit that is powered by a battery and measures the remaining amount of the battery, and the stop condition of each of the independent decoding processing units is the remaining amount of the battery. It is desirable to be determined by the amount.

本発明においては、上記構成の画像出力装置において、前記画像データの復号遅延時間を計算する計算部を有し、前記独立復号処理部各々の前記停止条件は、前記画像データの復号遅延時間によって定められることが望ましい。   In the present invention, the image output apparatus having the above-described configuration further includes a calculation unit that calculates a decoding delay time of the image data, and the stop condition of each of the independent decoding processing units is determined by the decoding delay time of the image data. It is desirable that

本発明においては、上記構成の画像出力装置において、複数の前記成分は、画素の輝度成分と画素の色差成分とであり、前記制御部は、前記画像出力装置の状態に応じて、前記画素の輝度成分の前記独立復号処理部と、前記画素の色差成分の前記独立復号部処理部とが共に動作する状態と、前記画素の輝度成分の前記独立復号処理部が動作し、前記画素の色差成分の前記独立復号部処理部が停止する状態との2状態を切り換えることとしてもよい。   In the present invention, in the image output device configured as described above, the plurality of components are a luminance component of a pixel and a color difference component of the pixel, and the control unit is configured to output the pixel according to a state of the image output device. A state in which the independent decoding processing unit for the luminance component and the independent decoding processing unit for the color difference component of the pixel operate together, and the independent decoding processing unit for the luminance component of the pixel operates, and the color difference component of the pixel It is good also as switching two states with the state which the said independent decoding part process part stops.

本発明においては、携帯用画像表示機器は、上記構成の画像出力装置を有することを特徴とする。   In the present invention, a portable image display device includes the image output device having the above-described configuration.

本発明においては、プログラムは、他の成分と独立した復号プロセスで復号される複数の成分によって構成される画像データを復号して出力する画像出力装置の動作を制御するプログラムであって、前記画像出力装置の状態を確認する第1ステップと、前記画像出力装置の状態によって定められる、複数の前記成分各々に対して特定される前記復号プロセスのスキップ条件が満たされるか否かを判定する第2ステップと、前記スキップ条件が満たされる前記成分に対して特定される前記復号プロセスをスキップさせる第3ステップとを有することを特徴とする。   In the present invention, the program is a program for controlling the operation of an image output apparatus that decodes and outputs image data composed of a plurality of components decoded by a decoding process independent of other components, A first step of confirming a state of the output device; and a second step of determining whether or not a decoding process skip condition specified for each of the plurality of components, which is determined by the state of the image output device, is satisfied And a third step of skipping the decoding process specified for the component that satisfies the skip condition.

本発明の画像出力装置は、画像出力装置の状態によって定められる独立復号処理部各々の停止条件が満たされるときに、該停止条件が満たされる独立復号処理部を停止させる制御部を有するので、必要に応じて消費電力を大きく低減できることとなる。   The image output device of the present invention has a control unit that stops the independent decoding processing unit that satisfies the stop condition when the stop condition of each independent decoding processing unit determined by the state of the image output device is satisfied. Accordingly, power consumption can be greatly reduced.

例えば、独立復号処理部各々の停止条件を電池の残量によって定めると、電池の残量が十分ある場合には全ての独立復号処理部を動作させ、電池の残量が十分でない場合には幾つかの独立復号処理部を停止させる制御ができることとなる。そのため、電池の残量が十分ある場合には質の高い画像の出力ができ、電池の残量が十分でない場合には消費電力の低減ができ、駆動時間の延長ができる。   For example, if the stop condition of each independent decoding processing unit is determined by the remaining battery level, all the independent decoding processing units are operated when the remaining battery level is sufficient, and how many when the remaining battery level is not enough. Such an independent decoding processing unit can be controlled to stop. Therefore, a high-quality image can be output when the remaining battery level is sufficient, and when the remaining battery level is insufficient, power consumption can be reduced and the driving time can be extended.

また、独立復号処理部各々の停止条件を画像データの復号遅延時間によって定めると、十分な処理能力がある場合(復号遅延時間が絶対値の十分大きい負の値である場合)には全ての独立復号処理部を動作させ、十分な処理能力がない場合(復号遅延時間が絶対値の十分大きい負の値でない場合)には幾つかの独立復号処理部を停止させる制御ができることとなる。そのため、十分な処理能力がある場合には質の高い画像の出力ができ、十分な処理能力がない場合には処理量の低減ができ、コマ落ちや画像乱れを防止できる。そして、画像出力装置の処理能力不足に起因するコマ落ちや画像乱れを防止できることから、画像出力装置の画像処理能力を低く設定することができ、画像出力装置の消費電力の低減ができ、駆動時間の延長ができる。   Further, when the stop condition of each independent decoding processing unit is determined by the decoding delay time of the image data, if there is sufficient processing capability (when the decoding delay time is a negative value having a sufficiently large absolute value) When the decoding processing unit is operated and there is not sufficient processing capability (when the decoding delay time is not a negative value having a sufficiently large absolute value), it is possible to control to stop some independent decoding processing units. Therefore, when there is sufficient processing capability, a high-quality image can be output, and when there is not enough processing capability, the amount of processing can be reduced, and frame dropping and image disturbance can be prevented. And since it is possible to prevent frame dropping and image disturbance due to insufficient processing capability of the image output device, the image processing capability of the image output device can be set low, the power consumption of the image output device can be reduced, and the drive time Can be extended.

また、本発明によると、上記の効果を奏する画像出力装置を有する携帯用画像表示機器が提供される。また、本発明によると、上記の効果を奏する画像出力装置の動作を制御するプログラムが提供される。   In addition, according to the present invention, there is provided a portable image display device having an image output device that exhibits the above effects. In addition, according to the present invention, a program for controlling the operation of the image output apparatus having the above-described effects is provided.

本発明の実施形態について、図面を用いて説明すれば以下の通りである。   Embodiments of the present invention will be described below with reference to the drawings.

(第1の実施形態)
図1は、本発明の第1の実施形態に係る画像出力装置100の概略の構成を示すブロック図である。画像出力装置100は、メモリカード101に記録された、輝度成分(Y成分)と色差成分(Cb成分、Cr成分)とによって構成される、MPEG4方式又はH.264方式で圧縮された動画像データを復号して表示するものとする。
(First embodiment)
FIG. 1 is a block diagram showing a schematic configuration of an image output apparatus 100 according to the first embodiment of the present invention. The image output apparatus 100 includes an MPEG4 system or an H.264 format that is configured by a luminance component (Y component) and a color difference component (Cb component, Cr component) recorded in the memory card 101. It is assumed that moving image data compressed by the H.264 system is decoded and displayed.

画像出力装置100は、読み出し部102と、読み出しメモリ部103と、動画像処理部104と、表示メモリ部105と、表示制御部106と、表示部107と、制御部108と、計測部109と、電池110とを有している。   The image output apparatus 100 includes a reading unit 102, a reading memory unit 103, a moving image processing unit 104, a display memory unit 105, a display control unit 106, a display unit 107, a control unit 108, and a measurement unit 109. The battery 110 is included.

画像出力装置100による、メモリカード101に記録された動画像データを読み出してから動画像を表示するまでの処理の流れは以下の通りである。まず、読み出し部102がメモリカード101に記録された動画像データを読み出し、読み出しメモリ部103へ伝達する。   The flow of processing by the image output apparatus 100 from reading moving image data recorded on the memory card 101 to displaying a moving image is as follows. First, the reading unit 102 reads moving image data recorded on the memory card 101 and transmits the moving image data to the reading memory unit 103.

読み出しメモリ部103は、読み出し部102から伝達された動画像データをメモリに記憶する。動画像処理部104は、読み出しメモリ部103のメモリに記憶された動画像データを取り込み、該動画像データに対する各種動画像処理を施し、得られた画素情報を表示メモリ部105へ伝達する。   The read memory unit 103 stores the moving image data transmitted from the read unit 102 in a memory. The moving image processing unit 104 takes in moving image data stored in the memory of the read memory unit 103, performs various moving image processing on the moving image data, and transmits the obtained pixel information to the display memory unit 105.

表示メモリ部105は、動画像処理部104から伝達された画素情報をメモリに記憶する。表示制御部106は、表示メモリ部105のメモリに記憶された画素情報を定期的に読み出して、表示部107へ伝達する。表示部107は、表示制御部106から伝達された画素情報を基に、動画像を表示する。   The display memory unit 105 stores the pixel information transmitted from the moving image processing unit 104 in a memory. The display control unit 106 periodically reads out pixel information stored in the memory of the display memory unit 105 and transmits the pixel information to the display unit 107. The display unit 107 displays a moving image based on the pixel information transmitted from the display control unit 106.

ここで、動画像処理部104には制御部108が、制御部108には計測部109が、計測部109には電池110が、各々接続されている。電池110は、画像出力装置100に電源を供給する。計測部109は、所定の時間間隔で電池110の出力電圧値を計測し、これを制御部108に伝達する。制御部108は、電池110の出力電圧値が所定値を上回っているか否かに応じて、動画像処理部104に対する各種の制御を行う。   Here, the control unit 108 is connected to the moving image processing unit 104, the measurement unit 109 is connected to the control unit 108, and the battery 110 is connected to the measurement unit 109. The battery 110 supplies power to the image output apparatus 100. The measurement unit 109 measures the output voltage value of the battery 110 at a predetermined time interval and transmits this value to the control unit 108. The control unit 108 performs various controls on the moving image processing unit 104 according to whether or not the output voltage value of the battery 110 exceeds a predetermined value.

また、動画像処理部104は、その構成要素として、可変長符号復号部1041と、輝度再構成部1042と、スイッチ1043と、色差再構成部1044と、輝度フィルタ部1045と、色差フィルタ部1046と、色空間変換部1047と、スイッチ1048とを有している。   The moving image processing unit 104 includes, as its components, a variable-length code decoding unit 1041, a luminance reconstruction unit 1042, a switch 1043, a color difference reconstruction unit 1044, a luminance filter unit 1045, and a color difference filter unit 1046. A color space conversion unit 1047 and a switch 1048.

次に、電池110の出力電圧値が所定値を上回っている場合の、動画像処理部104による動画像処理の詳細について説明する。ここで、電池110の出力電圧値が所定値を上回っている場合、制御部108は、スイッチ1043をONとし、スイッチ1048を端子Bに接続し、動画像処理部104の全ての構成要素を動作させる。   Next, details of the moving image processing by the moving image processing unit 104 when the output voltage value of the battery 110 exceeds a predetermined value will be described. Here, when the output voltage value of the battery 110 exceeds the predetermined value, the control unit 108 turns on the switch 1043, connects the switch 1048 to the terminal B, and operates all the components of the moving image processing unit 104. Let

MPEG4方式やH.264方式によって圧縮された動画像データは、画素の各成分(Y成分、Cb成分、Cr成分)の、圧縮対象情報と予測対象情報との差分情報のDCT(Discrete Cosine Transform)変換及び量子化によって得られた係数情報や、動きベクトルなどの予測情報などが多重化され、可変長符号化されたものである。したがって、MPEG4方式やH.264方式で圧縮された動画像データを復号する際には、まず、可変長符号の復号を行う必要がある。   MPEG4 and H.264 The moving image data compressed by the H.264 method is obtained by DCT (Discrete Cosine Transform) conversion and quantization of difference information between compression target information and prediction target information of each component (Y component, Cb component, Cr component) of a pixel. The obtained coefficient information and prediction information such as motion vectors are multiplexed and variable-length encoded. Therefore, the MPEG4 system and the H.264 standard. When decoding moving image data compressed by the H.264 method, it is necessary to first decode a variable length code.

そのため、動画像処理部104は、読み出しメモリ部103のメモリに記憶された動画像データを取り込むと、可変長符号復号部1041によって、可変長符号の復号処理を行う。ここで、可変長符号としては、ハフマン符号、ハフマンテーブルを用いた符号、算術符号、ZL(Ziv-Lempel)符号、AIC(Akaike Information Criterion)原理に基づく符号、MDL(Minimum Description Length)原理に基づく符号、ベイズ符号などが知られている。   Therefore, when the moving image processing unit 104 takes in moving image data stored in the memory of the read memory unit 103, the variable length code decoding unit 1041 performs variable length code decoding processing. Here, as a variable length code, a Huffman code, a code using a Huffman table, an arithmetic code, a ZL (Ziv-Lempel) code, a code based on an AIC (Akaike Information Criterion) principle, an MDL (Minimum Description Length) principle Codes, Bayes codes, and the like are known.

MPEG4方式やH.264方式で圧縮された動画像データに対して、可変長符号復号部1041によって可変長符号の復号処理を行うと、各成分(Y成分、Cb成分、Cr成分)の係数情報や予測情報などが得られる。そして、可変長符号復号部1041は、Y成分の係数情報や予測情報などを輝度再構成部1042へ伝達し、Cb成分、Cr成分の係数情報や予測情報などを色差再構成部1044へ伝達する。   MPEG4 and H.264 When variable length code decoding processing is performed on the moving image data compressed by the H.264 method by the variable length code decoding unit 1041, coefficient information and prediction information of each component (Y component, Cb component, Cr component) are obtained. can get. The variable-length code decoding unit 1041 transmits the Y component coefficient information and prediction information to the luminance reconstruction unit 1042, and transmits the Cb component and Cr component coefficient information and prediction information to the color difference reconstruction unit 1044. .

輝度再構成部1042は、Y成分の係数情報に対して逆量子化及び逆DCT変換を施すことによって、画素のY成分の差分情報を得る。そして、画素のY成分の差分情報及び予測情報から、画素のY成分情報を得て、これを輝度フィルタ部1045へ伝達する。色差再構成部1044は、Cb成分、Cr成分の係数情報に対して逆量子化及び逆DCT変換を施すことによって、画素のCb成分の差分情報、Cr成分の差分情報を得る。そして、画素のCb成分の差分情報、Cr成分の差分情報及び予測情報から、画素のCb成分情報、Cr成分情報を得て、これを色差フィルタ部1046へ伝達する。   The luminance reconstruction unit 1042 obtains difference information of the Y component of the pixel by performing inverse quantization and inverse DCT transform on the coefficient information of the Y component. Then, the Y component information of the pixel is obtained from the difference information and prediction information of the Y component of the pixel, and this is transmitted to the luminance filter unit 1045. The color difference reconstruction unit 1044 performs inverse quantization and inverse DCT transform on the coefficient information of the Cb component and the Cr component, thereby obtaining difference information of the Cb component of the pixel and difference information of the Cr component. Then, Cb component information and Cr component information of the pixel are obtained from the difference information of the Cb component of the pixel, the difference information of the Cr component, and the prediction information, and this is transmitted to the color difference filter unit 1046.

輝度フィルタ部1045は、輝度再構成部1042から伝達された画素のY成分情報に対して、縦横2方向のフィルタ処理を行うことで、量子化に起因する圧縮ノイズの低減処理を行い、得られた画素のY成分情報を色空間変換部1047へ伝達する。色差フィルタ部1046は、色差再構成部1044から伝達された画素のCb成分情報、Cr成分情報に対して、縦横2方向のフィルタ処理を行うことで、量子化に起因する圧縮ノイズの低減処理を行い、得られた画素のCb成分情報、Cr成分情報を色空間変換部1047へ伝達する。   The luminance filter unit 1045 performs compression noise reduction processing due to quantization by performing filter processing in two vertical and horizontal directions on the Y component information of the pixel transmitted from the luminance reconstruction unit 1042 and obtained. The Y component information of the obtained pixel is transmitted to the color space conversion unit 1047. The chrominance filter unit 1046 performs a process of reducing compression noise caused by quantization by performing filter processing in two vertical and horizontal directions on the Cb component information and Cr component information of the pixel transmitted from the chrominance reconstruction unit 1044. Then, the obtained Cb component information and Cr component information of the pixel are transmitted to the color space conversion unit 1047.

色空間変換部1047は、輝度フィルタ部1045から伝達された画素のY成分情報、及び、色差フィルタ部1046から伝達された画素のCb成分情報、Cr成分情報から、画素のR成分情報、G成分情報、B成分情報を得て、これを表示メモリ部105へ伝達する。   The color space conversion unit 1047 calculates the R component information and G component of the pixel from the Y component information of the pixel transmitted from the luminance filter unit 1045 and the Cb component information and Cr component information of the pixel transmitted from the color difference filter unit 1046. Information and B component information are obtained and transmitted to the display memory unit 105.

次に、電池110の出力電圧値が所定値を下回っている場合の、動画像処理部104による動画像処理の詳細について説明する。電池110の出力電圧値が所定値を下回っている場合、制御部108は、スイッチ1043をOFFとし、スイッチ1048を端子Aに接続し、動画像処理部104の構成要素のうち、色差再構成部1044と、色差フィルタ部1046と、色空間変換部1047との動作を停止させ、他の構成要素を動作させる。   Next, details of moving image processing by the moving image processing unit 104 when the output voltage value of the battery 110 is lower than a predetermined value will be described. When the output voltage value of the battery 110 is lower than the predetermined value, the control unit 108 turns off the switch 1043, connects the switch 1048 to the terminal A, and among the components of the moving image processing unit 104, the color difference reconstruction unit. The operations of 1044, the color difference filter unit 1046, and the color space conversion unit 1047 are stopped, and other components are operated.

この場合、動画像処理部104は、読み出しメモリ部103のメモリに記憶された動画像データを取り込むと、可変長符号復号部1041によって、可変長符号の復号処理を行う。そして、可変長符号復号部1041は、Y成分の係数情報や予測情報などを輝度再構成部1042へ伝達する一方、スイッチ1043がOFFされていることから、Cb成分、Cr成分の係数情報や予測情報などの色差再構成部1044への伝達は行わない。   In this case, when the moving image processing unit 104 takes in moving image data stored in the memory of the read memory unit 103, the variable length code decoding unit 1041 performs variable length code decoding processing. The variable length code decoding unit 1041 transmits the coefficient information and prediction information of the Y component to the luminance reconstruction unit 1042, while the switch 1043 is turned off. Information such as information is not transmitted to the color difference reconstruction unit 1044.

輝度再構成部1042は、Y成分の係数情報に対して逆量子化及び逆DCT変換を施すことによって、画素のY成分の差分情報を得る。そして、画素のY成分の差分情報及び予測情報から、画素のY成分情報を得て、これを輝度フィルタ部1045へ伝達する。輝度フィルタ部1045は、輝度再構成部1042から伝達された画素のY成分情報に対して、縦横2方向のフィルタ処理を行うことで、量子化に起因する圧縮ノイズの低減処理を行い、得られた画素のY成分情報を表示メモリ部105へ伝達する。   The luminance reconstruction unit 1042 obtains difference information of the Y component of the pixel by performing inverse quantization and inverse DCT transform on the coefficient information of the Y component. Then, the Y component information of the pixel is obtained from the difference information and prediction information of the Y component of the pixel, and this is transmitted to the luminance filter unit 1045. The luminance filter unit 1045 performs compression noise reduction processing due to quantization by performing filter processing in two vertical and horizontal directions on the Y component information of the pixel transmitted from the luminance reconstruction unit 1042 and obtained. The Y component information of the obtained pixel is transmitted to the display memory unit 105.

以上の制御部108による動画像処理部104に対する制御手順について、以下で説明する。図2は、制御部108による動画像処理部104に対する制御手順を示すフローチャートである。制御部108は、動画像処理中には(S101)、計測部109から伝達される電池110の出力電圧値を監視する(S102)。   A control procedure for the moving image processing unit 104 by the control unit 108 will be described below. FIG. 2 is a flowchart illustrating a control procedure for the moving image processing unit 104 by the control unit 108. During the moving image processing (S101), the control unit 108 monitors the output voltage value of the battery 110 transmitted from the measurement unit 109 (S102).

電池110の出力電圧値が所定値を上回っている場合には、制御部108は、スイッチ1043をONとし、スイッチ1048を端子Bに接続し、動画像処理部104の全ての構成要素を動作させ、リターンする(S103、S104)。   When the output voltage value of the battery 110 exceeds the predetermined value, the control unit 108 turns on the switch 1043, connects the switch 1048 to the terminal B, and operates all the components of the moving image processing unit 104. Return (S103, S104).

一方、S102において、電池110の出力電圧値が所定値を下回っている場合には、制御部108は、スイッチ1043をOFFとし、スイッチ1048を端子Aに接続し、動画像処理部104の構成要素のうち、色差再構成部1044と、色差フィルタ部1046と、色空間変換部1047との動作を停止させ、他の構成要素を動作させ、リターンする(S105、S104)。   On the other hand, when the output voltage value of the battery 110 is lower than the predetermined value in S102, the control unit 108 turns off the switch 1043, connects the switch 1048 to the terminal A, and the components of the moving image processing unit 104 Among them, the operations of the color difference reconstruction unit 1044, the color difference filter unit 1046, and the color space conversion unit 1047 are stopped, the other components are operated, and the process returns (S105, S104).

以上より、電池110の出力電圧値が所定値を上回っている場合には、動画像処理部104の全ての構成要素を動作させることとなり、消費電力は大きいが、表示部107にカラー動画像を表示させることができる。電池110の出力電圧値が所定値を上回っている場合には、電池110の残量は十分なので、カラー動画像を楽しむメリットが消費電力の低減によるメリットを上回ることから、このような制御が有効である。   As described above, when the output voltage value of the battery 110 exceeds the predetermined value, all the components of the moving image processing unit 104 are operated, and although the power consumption is large, the color moving image is displayed on the display unit 107. Can be displayed. When the output voltage value of the battery 110 exceeds a predetermined value, the remaining amount of the battery 110 is sufficient, and the advantage of enjoying color moving images exceeds the advantage of reducing power consumption. It is.

また、電池110の出力電圧値が所定値を下回っている場合には、動画像処理部104の構成要素のうち、色差再構成部1044と、色差フィルタ部1046と、色空間変換部1047との動作を停止させることとなり、表示部107には白黒動画像が表示されることとなるが、画像出力装置100の消費電力を低減させることができる。電池110の出力電圧値が所定値を下回っている場合には、電池110の残量が十分でないので、画像出力装置100の消費電力を低減させることによるメリットが大きい。   When the output voltage value of the battery 110 is lower than the predetermined value, among the components of the moving image processing unit 104, the color difference reconstruction unit 1044, the color difference filter unit 1046, and the color space conversion unit 1047 The operation is stopped and a monochrome moving image is displayed on the display unit 107, but the power consumption of the image output apparatus 100 can be reduced. When the output voltage value of the battery 110 is lower than the predetermined value, the remaining amount of the battery 110 is not sufficient, so that the merit of reducing the power consumption of the image output apparatus 100 is great.

具体的には、例えば、画像出力装置100が通信端末装置に備えられており、電池110が通信端末装置全体に電源を供給している場合には、画像出力装置100の消費電力を低減させることで、電話やメールの送受信ができなくなる事態を未然に防止することができる。また、表示部107に白黒動画像が表示されることで、ユーザは電池110の残量が少なくなったことを視認でき、充電などの迅速な対応をとることができる。   Specifically, for example, when the image output device 100 is provided in the communication terminal device and the battery 110 supplies power to the entire communication terminal device, the power consumption of the image output device 100 is reduced. Thus, it is possible to prevent a situation in which it is impossible to send / receive a telephone or mail. In addition, by displaying the black and white moving image on the display unit 107, the user can visually recognize that the remaining amount of the battery 110 has decreased, and can take quick measures such as charging.

なお、電池110の出力電圧値の所定値は、ユーザによって設定できるものとしてもよい。この場合には、画像出力装置100は、電池110の出力電圧値の所定値を入力する入力部を有するものとすればよい。   The predetermined value of the output voltage value of battery 110 may be set by the user. In this case, the image output apparatus 100 may include an input unit that inputs a predetermined value of the output voltage value of the battery 110.

(第2の実施形態)
次に、本発明の第2の実施形態について説明する。図3は、本発明の第2の実施形態に係る画像出力装置200の概略の構成を示すブロック図である。画像出力装置200は、輝度成分(Y成分)と色差成分(Cb成分、Cr成分)とによって構成される、H.264方式で圧縮されたワンセグ放送の動画像データを受信し、復号して表示するものとする。ここで、ワンセグ放送とは、ARIB(Association of Radio Industries and Businesses)によって策定された、携帯機器向けテレビ放送のことである。
(Second Embodiment)
Next, a second embodiment of the present invention will be described. FIG. 3 is a block diagram showing a schematic configuration of an image output apparatus 200 according to the second embodiment of the present invention. The image output apparatus 200 is composed of a luminance component (Y component) and a color difference component (Cb component, Cr component). It is assumed that moving image data of one-segment broadcasting compressed by the H.264 system is received, decoded, and displayed. Here, the one-segment broadcasting is a television broadcasting for portable devices formulated by ARIB (Association of Radio Industries and Businesses).

画像出力装置200は、アンテナ201と、OFDM復調部202と、受信メモリ部203と、動画像処理部204と、表示メモリ部205と、表示制御部206と、表示部207と、制御部208(計算部)と、STC(System Time Clock)209とを有している。   The image output apparatus 200 includes an antenna 201, an OFDM demodulation unit 202, a reception memory unit 203, a moving image processing unit 204, a display memory unit 205, a display control unit 206, a display unit 207, and a control unit 208 ( And a STC (System Time Clock) 209.

画像出力装置200による、ワンセグ放送の動画像データを受信してから動画像を表示するまでの処理の流れは以下の通りである。まず、アンテナ201がワンセグ放送の動画像データを受信し、OFDM復調部202へ伝達する。OFDM復調部202は、アンテナ201から伝達されたワンセグ放送の動画像データに対するOFDM復調を施し、得られた動画像データを受信メモリ部203へ伝達する。   The flow of processing by the image output apparatus 200 from receiving moving image data of one-segment broadcasting until displaying the moving image is as follows. First, the antenna 201 receives moving image data of one-segment broadcasting and transmits it to the OFDM demodulator 202. The OFDM demodulator 202 performs OFDM demodulation on the one-segment broadcast moving image data transmitted from the antenna 201, and transmits the obtained moving image data to the reception memory unit 203.

受信メモリ部203は、OFDM復調部202から伝達された動画像データをメモリに記憶する。動画像処理部204は、受信メモリ部203のメモリに記憶された動画像データを取り込み、該動画像データに対する各種動画像処理を施し、得られた画素情報を表示メモリ部205へ伝達する。   The reception memory unit 203 stores the moving image data transmitted from the OFDM demodulation unit 202 in a memory. The moving image processing unit 204 takes in moving image data stored in the memory of the reception memory unit 203, performs various moving image processes on the moving image data, and transmits the obtained pixel information to the display memory unit 205.

表示メモリ部205は、動画像処理部204から伝達された画素情報をメモリに記憶する。表示制御部206は、表示メモリ部205のメモリに記憶された画素情報を定期的に読み出して、表示部207へ伝達する。表示部207は、表示制御部206から伝達された画素情報を基に、動画像を表示する。   The display memory unit 205 stores the pixel information transmitted from the moving image processing unit 204 in the memory. The display control unit 206 periodically reads out pixel information stored in the memory of the display memory unit 205 and transmits the pixel information to the display unit 207. The display unit 207 displays a moving image based on the pixel information transmitted from the display control unit 206.

ここで、動画像処理部204には制御部208が、制御部208にはSTC209が、各々接続されている。STC209は時刻を刻むカウンタである。制御部208は、STC209からの時刻情報を定期的に読み出し、また、動画像処理部204に対する各種の制御を行う。   Here, a control unit 208 is connected to the moving image processing unit 204, and an STC 209 is connected to the control unit 208. The STC 209 is a counter that keeps time. The control unit 208 periodically reads time information from the STC 209 and performs various controls on the moving image processing unit 204.

また、動画像処理部204は、その構成要素として、可変長符号復号部2041と、輝度再構成部2042と、スイッチ2043と、色差再構成部2044と、輝度フィルタ部2045と、色差フィルタ部2046と、色空間変換部2047と、スイッチ2048とを有している。なお、この動画像処理部204の各構成要素は、第1の実施形態に係る動画像処理部104の各構成要素と同一のものである。   The moving image processing unit 204 includes, as its components, a variable length code decoding unit 2041, a luminance reconstruction unit 2042, a switch 2043, a color difference reconstruction unit 2044, a luminance filter unit 2045, and a color difference filter unit 2046. A color space conversion unit 2047 and a switch 2048. Each component of the moving image processing unit 204 is the same as each component of the moving image processing unit 104 according to the first embodiment.

次に、制御部208による動画像処理部204に対する各種の制御の詳細について説明する。ワンセグ放送の動画像データにおいては、1フレームごとに、該フレームが表示されるべき時刻を示すPTS(Presentation Time Stamp)と呼ばれる情報が付加されている。制御部208は、各フレームのPTSとSTC209からの時刻情報とを比較することにより、画素情報を表示メモリ部205に伝達する時刻を調整する。これによって、ワンセグ放送の動画像が表示部207に適切に表示されることとなる。   Next, details of various controls performed on the moving image processing unit 204 by the control unit 208 will be described. In one-segment broadcasting moving image data, information called PTS (Presentation Time Stamp) indicating the time at which the frame should be displayed is added to each frame. The control unit 208 adjusts the time at which the pixel information is transmitted to the display memory unit 205 by comparing the PTS of each frame with the time information from the STC 209. As a result, the moving image of the one-segment broadcasting is appropriately displayed on the display unit 207.

また、制御部208は、動画像データの復号遅延時間の計算及びそれに伴う動画像処理部204に対する制御を行う。以下にこの詳細を説明する。   The control unit 208 also calculates the decoding delay time of moving image data and controls the moving image processing unit 204 associated therewith. The details will be described below.

図4は、制御部208による動画像処理部204に対する制御手順を示すフローチャートである。制御部208は、動画像処理中には(S201)、動画像処理部204に、受信メモリ部203のメモリに記憶された動画像データを取り込ませる(S202)。1フレーム分のデータが取り込まれるまでは、制御部208は、動画像処理部204に、動画像データの取り込みを続けさせる(S203)。   FIG. 4 is a flowchart showing a control procedure for the moving image processing unit 204 by the control unit 208. During the moving image processing (S201), the control unit 208 causes the moving image processing unit 204 to capture the moving image data stored in the memory of the reception memory unit 203 (S202). Until the data for one frame is captured, the control unit 208 causes the moving image processing unit 204 to continue capturing the moving image data (S203).

1フレーム分のデータが取り込まれると、制御部208は、可変長符号復号部2041に可変長符号の復号処理を行わせ、得られたY成分の係数情報や予測情報などを輝度再構成部2042へ伝達させる(S204)。   When the data for one frame is captured, the control unit 208 causes the variable-length code decoding unit 2041 to perform variable-length code decoding processing, and obtains the obtained Y component coefficient information, prediction information, and the like as the luminance reconfiguration unit 2042. (S204).

次に、制御部208は、輝度再構成部2042に、可変長符号復号部2041から伝達されたY成分の係数情報や予測情報などから、画素のY成分情報を計算させ、これを輝度フィルタ部2045へ伝達させる(S205)。次に、制御部208は、輝度フィルタ部2045に、輝度再構成部2042から伝達された画素のY成分情報に対する圧縮ノイズの低減処理を行わせる(S206)。   Next, the control unit 208 causes the luminance reconstruction unit 2042 to calculate the Y component information of the pixel from the Y component coefficient information and prediction information transmitted from the variable length code decoding unit 2041, and this is used as the luminance filter unit. It is transmitted to 2045 (S205). Next, the control unit 208 causes the luminance filter unit 2045 to perform compression noise reduction processing on the Y component information of the pixel transmitted from the luminance reconstruction unit 2042 (S206).

次に、制御部208は、STC209からの時刻情報を読み出し、処理中のフレームのPTSと比較することによって、復号遅延が生じているかどうかを検出する(S207)。具体的には、この時点で、処理中のフレームが表示されるべき時刻を過ぎている場合に、復号遅延が生じていると判定する。あるいは、色差再構成部2044と、色差フィルタ部2046と、色空間変換部2047と、表示メモリ部205と、表示制御部206と、表示部207とにおける処理にかかる時間を推定することによって処理中のフレームの推定表示可能時刻を算出し、該推定表示可能時刻が、処理中のフレームが表示されるべき時刻を過ぎている場合に、復号遅延が生じていると判定してもよい。   Next, the control unit 208 reads out the time information from the STC 209 and compares it with the PTS of the frame being processed to detect whether a decoding delay has occurred (S207). Specifically, at this time, it is determined that a decoding delay has occurred when the time when the frame being processed is to be displayed has passed. Alternatively, the color difference reconstruction unit 2044, the color difference filter unit 2046, the color space conversion unit 2047, the display memory unit 205, the display control unit 206, and the display unit 207 are estimated to estimate the time required for processing. The estimated displayable time of the current frame may be calculated, and it may be determined that a decoding delay has occurred when the estimated displayable time has passed the time at which the frame being processed is to be displayed.

ここで、復号遅延が生じている場合には、制御部208は、スイッチ2043をOFFとし、スイッチ2048を端子Aに接続し、動画像処理部204の構成要素のうち、色差再構成部2044と、色差フィルタ部2046と、色空間変換部2047との動作を停止させ、他の構成要素を動作させる(S208)。そして、輝度フィルタ部2045で得られた画素のY成分情報を表示メモリ部205へ伝達させ、リターンする(S209、S210)。   Here, when a decoding delay occurs, the control unit 208 turns off the switch 2043, connects the switch 2048 to the terminal A, and among the components of the moving image processing unit 204, the color difference reconstruction unit 2044 Then, the operation of the color difference filter unit 2046 and the color space conversion unit 2047 is stopped and the other components are operated (S208). Then, the Y component information of the pixel obtained by the luminance filter unit 2045 is transmitted to the display memory unit 205, and the process returns (S209, S210).

一方、S207において復号遅延が生じていない場合には、制御部208は、スイッチ2043をONとし、スイッチ2048を端子Bに接続し、動画像処理部204の全ての構成要素を動作させる(S211)。そして、制御部208は、S204における、可変長符号復号部2041による可変長符号の復号処理によって得られている、Cb成分、Cr成分の係数情報や予測情報などを色差再構成部2044へ伝達させ、色差再構成部2044に、可変長符号復号部2041から伝達されたCb成分、Cr成分の係数情報や予測情報などから、画素のCb成分情報、Cr成分情報を計算させ、これを色差フィルタ部2046へ伝達させる(S212)。   On the other hand, if no decoding delay occurs in S207, the control unit 208 turns on the switch 2043, connects the switch 2048 to the terminal B, and operates all the components of the moving image processing unit 204 (S211). . Then, the control unit 208 transmits the coefficient information and prediction information of the Cb component and the Cr component obtained by the variable length code decoding process by the variable length code decoding unit 2041 in S204 to the color difference reconstruction unit 2044. The color difference reconstruction unit 2044 calculates the Cb component information and Cr component information of the pixel from the coefficient information and prediction information of the Cb component and Cr component transmitted from the variable length code decoding unit 2041, and this is calculated as the color difference filter unit. It is transmitted to 2046 (S212).

次に、制御部208は、色差フィルタ部2046に、色差再構成部2044から伝達された画素のCb成分情報、Cr成分情報に対する圧縮ノイズの低減処理を行わせ、得られた画素のCb成分情報、Cr成分情報を色空間得変換部2047へ伝達させる(S213)。そして、制御部208は、S206における、輝度フィルタ部2045による、輝度再構成部2042から伝達された画素のY成分情報に対する圧縮ノイズの低減処理によって得られている、画素のY成分情報を色空間変換部2047へ伝達させ、色空間変換部2047に、輝度フィルタ部2045から伝達された画素のY成分情報及び色差フィルタ部2046から伝達された画素のCb成分情報、Cr成分情報から、画素のR成分情報、G成分情報、B成分情報を計算させる(S214)。   Next, the control unit 208 causes the chrominance filter unit 2046 to perform compression noise reduction processing on the Cb component information and Cr component information of the pixel transmitted from the chrominance reconstruction unit 2044 and obtain the Cb component information of the obtained pixel. , Cr component information is transmitted to the color space obtaining conversion unit 2047 (S213). In step S206, the control unit 208 converts the Y component information of the pixel obtained by the compression noise reduction processing on the Y component information of the pixel transmitted from the luminance reconstruction unit 2042 by the luminance filter unit 2045 into the color space. From the pixel Y component information transmitted from the luminance filter unit 2045 and the pixel Cb component information and Cr component information transmitted from the color difference filter unit 2046 to the color space conversion unit 2047. Component information, G component information, and B component information are calculated (S214).

そして、色空間変換部2047で得られた画素のR成分情報、G成分情報、B成分情報を表示メモリ部205へ伝達させ、リターンする(S209、S210)。   Then, the R component information, G component information, and B component information obtained by the color space conversion unit 2047 are transmitted to the display memory unit 205, and the process returns (S209, S210).

以上より、復号遅延が生じていない場合には、動画像処理部204の全ての構成要素を動作させることとなり、復号に必要な処理量は大きいが、表示部207にカラー動画像を表示させることができる。復号遅延が生じていない場合には、動画像処理部204の処理能力が十分なので、カラー動画像を楽しむメリットが処理量の低減によるメリットを上回ることから、このような制御が有効である。   As described above, when there is no decoding delay, all the components of the moving image processing unit 204 are operated, and a large amount of processing is necessary for decoding, but a color moving image is displayed on the display unit 207. Can do. When there is no decoding delay, since the processing capability of the moving image processing unit 204 is sufficient, the merit of enjoying a color moving image exceeds the merit of reducing the processing amount, and thus such control is effective.

また、復号遅延が生じている場合には、動画像処理部204の、色差再構成部2044と、色差フィルタ部2046と、色空間変換部2047とを停止させることとなり、表示部207には白黒動画像が表示されることとなるが、処理量を低減させることができる。復号遅延が生じている場合には、動画像処理部204の処理能力が十分でないので、処理量を低減させることで、コマ落ちや画像乱れを防止でき、また、表示部207に白黒動画像が表示されることで、ユーザは復号遅延が生じていることを視認でき、迅速な対応をとることができる。そして、動画像処理部204の処理能力不足に起因するコマ落ちや画像乱れを防止できることから、動画像処理部204の動作クロックを低く設定するなどして動画像処理部204の処理能力を低く設定することができ、動画像処理部204の消費電力の低減ができ、駆動時間の延長ができる。   If a decoding delay occurs, the color difference reconstruction unit 2044, the color difference filter unit 2046, and the color space conversion unit 2047 of the moving image processing unit 204 are stopped. Although a moving image is displayed, the processing amount can be reduced. When there is a decoding delay, the processing capacity of the moving image processing unit 204 is not sufficient, and therefore, by reducing the processing amount, frame dropping and image disturbance can be prevented, and a black and white moving image is displayed on the display unit 207. By being displayed, the user can visually recognize that a decoding delay has occurred, and can take quick action. Since frame dropping and image disturbance due to insufficient processing capability of the moving image processing unit 204 can be prevented, the processing capability of the moving image processing unit 204 is set low by setting the operation clock of the moving image processing unit 204 low. The power consumption of the moving image processing unit 204 can be reduced, and the driving time can be extended.

なお、上記の実施形態においては、動画像処理部204は、画素の輝度成分に関する処理と、画素の色差成分に関する処理とを直列に行う構成としたが、並列に行う構成とすることもできる。この場合、制御部208は、動画像処理部204に、輝度フィルタ部2045あるいは色空間変換部2047で得られた画素情報を表示メモリ部205へ伝達させる直前あるいは伝達させた直後に、復号遅延が生じているか否かを判定することとすればよい。この場合には、復号遅延の有無に応じた制御の影響は、次のフレームを処理する際に現れることとなる。   In the above-described embodiment, the moving image processing unit 204 is configured to perform the processing related to the luminance component of the pixel and the processing related to the color difference component of the pixel in series, but may be configured to perform in parallel. In this case, the control unit 208 has a decoding delay immediately before or after the pixel information obtained by the luminance filter unit 2045 or the color space conversion unit 2047 is transmitted to the display memory unit 205. What is necessary is just to determine whether it has arisen. In this case, the influence of the control according to the presence or absence of the decoding delay appears when the next frame is processed.

また、上記の実施形態においては、復号遅延の有無に応じて制御部208の制御手順を変えることとしたが、復号遅延時間(負の値も取り得ることとする)がある所定値を超えた場合に制御部208の制御手順を変えることとしてもよい。また、その場合には、復号遅延時間の所定値は、ユーザによって設定できるものとしてもよい。この場合には、画像出力装置200は、復号遅延時間の所定値を入力する入力部を有するものとすればよい。   In the above embodiment, the control procedure of the control unit 208 is changed according to the presence or absence of the decoding delay. However, the decoding delay time (which can be a negative value) exceeds a predetermined value. In this case, the control procedure of the control unit 208 may be changed. In that case, the predetermined value of the decoding delay time may be set by the user. In this case, the image output apparatus 200 may include an input unit that inputs a predetermined value of the decoding delay time.

なお、本発明は上記の実施形態に限定されず、本発明の趣旨を逸脱しない範囲で、種々の変更が可能である。例えば、上記第1の実施形態の計測部109と、電池110と、上記第2の実施形態のSTC209と、制御部とを有し、制御部が、電池残量及び復号遅延を各々判定し、いずれかの停止条件が満たされるときに、色差再構成部と、色差フィルタ部と、色空間変換部とを停止させる画像出力装置を構成することもできる。   In addition, this invention is not limited to said embodiment, A various change is possible in the range which does not deviate from the meaning of this invention. For example, the measurement unit 109 according to the first embodiment, the battery 110, the STC 209 according to the second embodiment, and a control unit, each of which determines the remaining battery level and the decoding delay, It is also possible to configure an image output device that stops the color difference reconstruction unit, the color difference filter unit, and the color space conversion unit when any one of the stop conditions is satisfied.

また、画像出力装置は、動画像データを復号して出力するものでなくともよく、他の成分と独立した復号プロセスで復号される複数の成分によって構成される静止画像データを復号して出力する画像出力装置であってもよい。   Further, the image output device does not have to decode and output moving image data, but decodes and outputs still image data composed of a plurality of components decoded by a decoding process independent of other components. It may be an image output device.

本発明は、他の成分と独立した復号プロセスで復号される複数の成分によって構成される画像データを復号して出力する画像出力装置として有効である。また、本発明は、そのような画像出力装置を有する携帯用画像表示機器として有効である。また、本発明は、そのような画像出力装置の動作を制御するプログラムとして有効である。   The present invention is effective as an image output apparatus that decodes and outputs image data composed of a plurality of components decoded by a decoding process independent of other components. The present invention is also effective as a portable image display device having such an image output device. The present invention is effective as a program for controlling the operation of such an image output apparatus.

本発明の第1の実施形態に係る画像出力装置100の概略の構成を示すブロック図。1 is a block diagram showing a schematic configuration of an image output apparatus 100 according to a first embodiment of the present invention. 制御部108による動画像処理部104に対する制御手順を示すフローチャート。7 is a flowchart showing a control procedure for the moving image processing unit 104 by the control unit 108. 本発明の第2の実施形態に係る画像出力装置200の概略の構成を示すブロック図。The block diagram which shows the structure of the outline of the image output apparatus 200 which concerns on the 2nd Embodiment of this invention. 制御部208による動画像処理部204に対する制御手順を示すフローチャート。7 is a flowchart showing a control procedure for the moving image processing unit 204 by the control unit 208. 特許文献1に記載の、地上波ディジタル放送の視聴が可能な通信端末装置900の概略の構成を示すブロック図。The block diagram which shows the structure of the outline of the communication terminal device 900 which can view the terrestrial digital broadcast of patent document 1.

符号の説明Explanation of symbols

100 画像出力装置
108 制御部
109 計測部
110 電池
200 画像出力装置
208 制御部(計算部)
DESCRIPTION OF SYMBOLS 100 Image output apparatus 108 Control part 109 Measurement part 110 Battery 200 Image output apparatus 208 Control part (calculation part)

Claims (6)

他の成分と独立した復号プロセスで復号される複数の成分によって構成される画像データを復号して出力する画像出力装置であって、
複数の前記成分各々に対して特定される前記復号プロセスによって復号処理を行う複数の独立復号処理部と、
前記画像出力装置の状態を確認し、前記画像出力装置の状態によって定められる前記独立復号処理部各々の停止条件が満たされるときに、該停止条件が満たされる前記独立復号処理部を停止させる制御部とを有することを特徴とする画像出力装置。
An image output device that decodes and outputs image data composed of a plurality of components decoded by a decoding process independent of other components,
A plurality of independent decoding processing units for performing decoding processing by the decoding process specified for each of a plurality of the components;
A control unit that checks the state of the image output device and stops the independent decoding processing unit that satisfies the stop condition when the stop condition of each of the independent decoding processing units determined by the state of the image output device is satisfied An image output apparatus comprising:
電池によって電源が供給され、
前記電池の残量を計測する計測部を有し、
前記独立復号処理部各々の前記停止条件は、前記電池の残量によって定められることを特徴とする請求項1に記載の画像出力装置。
Powered by batteries,
Having a measuring unit for measuring the remaining amount of the battery;
The image output apparatus according to claim 1, wherein the stop condition of each of the independent decoding processing units is determined by a remaining amount of the battery.
前記画像データの復号遅延時間を計算する計算部を有し、
前記独立復号処理部各々の前記停止条件は、前記画像データの復号遅延時間によって定められることを特徴とする請求項1に記載の画像出力装置。
A calculation unit for calculating a decoding delay time of the image data;
The image output apparatus according to claim 1, wherein the stop condition of each independent decoding processing unit is determined by a decoding delay time of the image data.
複数の前記成分は、画素の輝度成分と画素の色差成分とであり、
前記制御部は、前記画像出力装置の状態に応じて、
前記画素の輝度成分の前記独立復号処理部と、前記画素の色差成分の前記独立復号部処理部とが共に動作する状態と、
前記画素の輝度成分の前記独立復号処理部が動作し、前記画素の色差成分の前記独立復号部処理部が停止する状態との2状態を切り換えることを特徴とする請求項1から3のいずれかに記載の画像出力装置。
The plurality of components are a luminance component of a pixel and a color difference component of the pixel,
The control unit, depending on the state of the image output device,
A state in which the independent decoding processing unit of the luminance component of the pixel and the independent decoding processing unit of the color difference component of the pixel operate together;
4. The device according to claim 1, wherein the independent decoding processing unit for the luminance component of the pixel operates and the two states are switched between a state in which the independent decoding processing unit for the color difference component of the pixel is stopped. 5. The image output device described in 1.
請求項1から4のいずれかに記載の画像出力装置を有することを特徴とする携帯用画像表示機器。   A portable image display device comprising the image output device according to claim 1. 他の成分と独立した復号プロセスで復号される複数の成分によって構成される画像データを復号して出力する画像出力装置の動作を制御するプログラムであって、
前記画像出力装置の状態を確認する第1ステップと、
前記画像出力装置の状態によって定められる、複数の前記成分各々に対して特定される前記復号プロセスのスキップ条件が満たされるか否かを判定する第2ステップと、
前記スキップ条件が満たされる前記成分に対して特定される前記復号プロセスをスキップさせる第3ステップとを有することを特徴とするプログラム。
A program for controlling the operation of an image output apparatus that decodes and outputs image data composed of a plurality of components decoded by a decoding process independent of other components,
A first step of checking the state of the image output device;
A second step of determining whether or not a decoding process skip condition specified for each of the plurality of components defined by a state of the image output device is satisfied;
And a third step of skipping the decoding process specified for the component that satisfies the skip condition.
JP2006271985A 2006-10-03 2006-10-03 Image output apparatus, portable image display apparatus, and program Pending JP2008092353A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2006271985A JP2008092353A (en) 2006-10-03 2006-10-03 Image output apparatus, portable image display apparatus, and program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2006271985A JP2008092353A (en) 2006-10-03 2006-10-03 Image output apparatus, portable image display apparatus, and program

Publications (1)

Publication Number Publication Date
JP2008092353A true JP2008092353A (en) 2008-04-17

Family

ID=39376001

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2006271985A Pending JP2008092353A (en) 2006-10-03 2006-10-03 Image output apparatus, portable image display apparatus, and program

Country Status (1)

Country Link
JP (1) JP2008092353A (en)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104506920A (en) * 2014-12-24 2015-04-08 天脉聚源(北京)科技有限公司 Method and device for playing omnimedia data information
CN104967899A (en) * 2015-06-29 2015-10-07 天脉聚源(北京)科技有限公司 Method and device for multilevel display of omnimedia data

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104506920A (en) * 2014-12-24 2015-04-08 天脉聚源(北京)科技有限公司 Method and device for playing omnimedia data information
CN104967899A (en) * 2015-06-29 2015-10-07 天脉聚源(北京)科技有限公司 Method and device for multilevel display of omnimedia data

Similar Documents

Publication Publication Date Title
US10972722B2 (en) Image processing device and image processing method
US20200336743A1 (en) Image decoding device, image encoding device, and method thereof
US10666945B2 (en) Image processing device and image processing method for decoding a block of an image
US9405989B2 (en) Image processing apparatus and method
US20090080524A1 (en) Video decoding apparatus and video decoding method
US20130070857A1 (en) Image decoding device, image encoding device and method thereof, and program
US9053549B2 (en) Image decoding apparatus, image encoding apparatus, and method and program for image decoding and encoding
EP2521356A1 (en) Image processing device and method, and program
US8705627B2 (en) Image processing apparatus and method
US8189688B2 (en) Image decoding device and image decoding method
US20130182770A1 (en) Image processing device, and image processing method
US9918084B2 (en) Encoding device, encoding method, decoding device, and decoding method
US20090080520A1 (en) Video decoding apparatus and video decoding method
JP2008092353A (en) Image output apparatus, portable image display apparatus, and program
US8767831B2 (en) Method and system for motion compensated picture rate up-conversion using information extracted from a compressed video stream
JP4782023B2 (en) Moving picture data decoding apparatus and program
US20130089146A1 (en) Information processing apparatus and information processing method
JPWO2014122708A1 (en) Screen encoding device, screen decoding device, screen encoding transmission system
JP2005123990A (en) Portable communication terminal