JP4475900B2 - Image playback device and frame memory control method for image playback device - Google Patents
Image playback device and frame memory control method for image playback device Download PDFInfo
- Publication number
- JP4475900B2 JP4475900B2 JP2003309996A JP2003309996A JP4475900B2 JP 4475900 B2 JP4475900 B2 JP 4475900B2 JP 2003309996 A JP2003309996 A JP 2003309996A JP 2003309996 A JP2003309996 A JP 2003309996A JP 4475900 B2 JP4475900 B2 JP 4475900B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- frame
- unit
- output unit
- data
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Landscapes
- Television Signal Processing For Recording (AREA)
Description
本発明は、符号化された画像データを復号し、フレーム毎に再生した画像データを表示出力する画像再生装置に関し、特に、復号された画像データをフレームメモリに記憶させる処理とフレームメモリから画像データを読み出して出力する処理の制御に関するものである。 The present invention relates to an image reproducing apparatus that decodes encoded image data and displays and outputs image data reproduced for each frame, and more particularly to processing for storing decoded image data in a frame memory and image data from the frame memory. Is related to the process of reading and outputting.
従来の画像再生装置は、ビデオ入力端子などから取り込んだテレビジョン放送の画像や、小型カメラで撮影したビデオ画像を、MPEG4などの符号化手段を用いて符号化した画像データとして例えばSDカードやメモリスティック等の記録メディアに一旦書き込んで録画し、その符号化画像データを記録メディアから読み出して復号し、表示出力することにより、録画したテレビジョン放送画像やビデオ画像を再生できるものである。 A conventional image reproducing apparatus is an image data obtained by encoding a television broadcast image taken from a video input terminal or the like or a video image taken by a small camera using an encoding means such as MPEG4, for example, an SD card or a memory. The recorded television broadcast image and video image can be reproduced by temporarily recording on a recording medium such as a stick and recording, reading out the encoded image data from the recording medium, decoding and displaying it.
従来の画像再生装置は、多数のフレーム分の画像データを記憶するに十分な容量のフレームメモリを有したため、符号化画像データを復号した復号画像データを一旦フレームメモリに複数フレーム分蓄積しておき、符号化画像データに含まれるタイムスタンプに合わせて復号画像データを読み出すことにより、再生途中にフレームのコマ遅れやコマ進みがないなめらかな画像再生を行うものであった。なお、ここで、コマ遅れとは、復号処理が遅い、あるいは、その後の出力処理が遅いために、タイムスタンプより遅れて画像を再生してしまうことを表わし、コマ進みとは、復号処理が早く、タイムスタンプを守ろうとしたとき、メモリのオーバーライトやオーバーフローをしてしまう状態を表わす。 Since the conventional image reproducing apparatus has a frame memory having a capacity sufficient to store a large number of frames of image data, the decoded image data obtained by decoding the encoded image data is temporarily stored in the frame memory for a plurality of frames. By reading out the decoded image data in accordance with the time stamp included in the encoded image data, smooth image reproduction without frame delay or frame advance during reproduction is performed. Here, the frame delay means that the decoding process is slow or the subsequent output process is slow, so that the image is reproduced later than the time stamp. The frame advance means that the decoding process is fast. This indicates a state where the memory is overwritten or overflowed when trying to keep the time stamp.
なお、画像フレーム毎に出力画像を切り替えるフレームメモリ制御技術としては、復号時のエラーコンシールメントに伴う画像の不自然さを抑制する技術があり、例えば、エラー処理ブロック数がある閾値を上回るときには、メモリ出力をストップして静止画像を出力し、逆に閾値を下回るときにはメモリ出力を更新して動画像出力する構成として、エラーレートに応じて、動画像表示と静止画像表示のうち画質が高い方が選択され、視聴者にとって良好な画像を再生できるようにした画像復号装置が知られている。(例えば、特許文献1参照。)
As a frame memory control technique for switching an output image for each image frame, there is a technique for suppressing unnaturalness of an image accompanying error concealment at the time of decoding, for example, when the number of error processing blocks exceeds a certain threshold value, Memory output is stopped and still images are output. Conversely, when the value falls below the threshold value, the memory output is updated and moving images are output. Depending on the error rate, either the moving image display or still image display with the higher image quality is displayed. There is known an image decoding apparatus in which is selected and an image that is favorable for a viewer can be reproduced. (For example, refer to
しかし、携帯電話やPDA(Personal Digital Assistant)等のように、外形寸法や消費電力等が制限される装置では、復号処理回路ブロックと表示出力処理回路ブロックが分離されたハードウェア構成をもつことも多く、復号処理回路と表示出力処理回路毎に使用可能なメモリの記憶容量が制限され、処理能力も制限される。この場合、上記したような、再生途中にフレームのコマ遅れやコマ進みがないなめらかな画像再生を行うことが困難であるという問題があった。 However, in a device such as a mobile phone or PDA (Personal Digital Assistant) whose outer dimensions and power consumption are limited, the decoding processing circuit block and the display output processing circuit block may have a separated hardware configuration. In many cases, the storage capacity of a memory that can be used for each decoding processing circuit and display output processing circuit is limited, and the processing capability is also limited. In this case, there is a problem that it is difficult to perform smooth image reproduction without frame delay or frame advance during reproduction as described above.
本発明は上記した問題を解決するためになされたものであって、復号処理回路ブロックと表示出力処理回路ブロックが分離され、復号処理回路および表示出力処理回路毎に使用されるフレームメモリの記憶容量や処理能力が制限されている場合でも、符号化画像データの復号処理および復号画像データの出力処理に用いるフレームメモリを効率的に使用して、再生途中にフレームのコマ遅れやコマ進みがないなめらかな画像再生のできる方法を提供することを目的とする。 The present invention has been made to solve the above-described problem, and the decoding processing circuit block and the display output processing circuit block are separated, and the storage capacity of the frame memory used for each of the decoding processing circuit and the display output processing circuit. Even when the processing capability is limited, the frame memory used for the decoding process of encoded image data and the output process of decoded image data is efficiently used, and there is no frame delay or frame advance during playback. An object of the present invention is to provide a method that can reproduce images smoothly.
上述の目的を達成するため本発明の画像再生装置は、符号化画像データに対する復号処理要求を出力する復号処理制御および復号画像データに対する画像再生要求を出力する出力処理制御を行う制御部と、前記制御部からの復号処理要求により、符号化画像データを復号してフレーム毎の復号画像データを生成すると共に、該復号が完了する毎に復号完了情報を出力する画像復号部と、前記復号画像データを所定フレーム数分記憶する記憶領域を有し、前記復号画像データをフレーム毎に格納するフレームメモリと、前記復号完了情報の入力により、読み出し可能な前記復号画像データを前記フレームメモリから読み出すための読み出し開始アドレスを設定すると共に、未出力状態あるいは保持状態にある復号画像データに相当する記憶領域への書込を禁止する情報を、破棄可能状態にある復号画像データに相当する記憶領域への書込を許可する情報と共に、前記画像復号部に出力して、前記書込みを禁止する情報によって書込みが禁止されている前記記憶領域への前記復号画像データの書込みを前記画像復号部に実行させず、前記書込みを許可する情報によって書込みが許可されている前記記憶領域への前記復号画像データの書込みを前記画像復号部に実行させ、前記制御部からの画像再生要求が入力されたときに、入力された垂直/水平同期信号に基づいて、読み出し開始アドレスに設定された復号画像データを前記フレームメモリから1フレーム分読み出して出力する画像出力部と、画像データを表示手段にあわせて前記画像出力部から出力させるための前記垂直/水平同期信号を発生させる表示データ出力部とを備え、前記画像復号部が復号画像データを前記フレームメモリに書き込む動作と、前記画像出力部が前記フレームメモリから復号画像データを読み出す動作とは、各々独立して動作が可能であり、前記フレームメモリの記憶領域の使用については前記画像復号部と前記画像出力部でハンドシェイク方式で通信して管理する。 In order to achieve the above object, an image reproduction apparatus of the present invention includes a control unit that performs a decoding process control that outputs a decoding process request for encoded image data and an output process control that outputs an image reproduction request for decoded image data; In response to a decoding process request from the control unit, the encoded image data is decoded to generate decoded image data for each frame, and each time decoding is completed, an image decoding unit that outputs decoding completion information; and the decoded image data For storing a predetermined number of frames, a frame memory for storing the decoded image data for each frame, and reading the decoded image data readable from the frame memory by inputting the decoding completion information Storage area corresponding to decoded image data that has not been output or is being held while setting the read start address The information prohibiting writing is output to the image decoding unit together with information permitting writing to the storage area corresponding to the decoded image data in the discardable state, and writing is performed by the information prohibiting writing. Writing the decoded image data to the storage area that is allowed to be written by the information that permits the writing without causing the image decoding unit to write the decoded image data to the prohibited storage area. When the image decoding unit executes the image reproduction request from the control unit, the decoded image data set as the read start address is read from the frame memory based on the input vertical / horizontal synchronization signal. An image output unit that reads and outputs one frame, and the vertical / horizontal synchronization for outputting image data from the image output unit in accordance with display means And a display data output unit that generates No., operation and writing the image decoding unit decodes the image data in the frame memory, and operation of the image output unit reads the decoded image data from the frame memory are each independently operation Te are possible, the use of the storage area of the frame memory is managed communicate with handshaking with the image output unit and the image decoding unit.
また、本発明の画像再生装置のフレームメモリ制御方法は、画像復号部で符号化画像データを復号してフレーム毎の復号画像データを生成し、フレームメモリに前記復号画像データをフレーム毎に格納し、画像再生要求が入力したときに、画像出力部が前記フレーム毎の復号画像データを前記フレームメモリからフレーム毎に読み出して表示データ出力部に出力し、前記表示データ出力部では表示手段にあわせて前記画像出力部から出力させるための垂直/水平同期信号を発生させる画像再生装置のフレームメモリ制御方法であって、画像復号部で画像を復号する際には、フレーム毎の復号画像データを生成する毎に復号完了情報を出力し、画像出力部では、前記復号完了情報の入力により、読み出し可能な前記復号画像データを前記フレームメモリから読み出すための読み出し開始アドレスを設定すると共に、未出力状態あるいは保持状態にある復号画像データに相当する記憶領域への書込を禁止する情報を、破棄可能状態にある復号画像データに相当する記憶領域への書込を許可する情報と共に、前記画像復号部に出力して、前記書込みを禁止する情報によって書込みが禁止されている前記記憶領域への前記復号画像データの書込みを前記画像復号部に実行させず、前記書込みを許可する情報によって書込みが許可されている前記記憶領域への前記復号画像データの書込みを前記画像復号部に実行させ、前記制御部からの画像再生要求が入力されたときに、入力された垂直/水平同期信号に基づいて、読み出し開始アドレスに設定された復号画像データを前記フレームメモリから1フレーム分読み出して出力し、表示データ出力部では、画像データを表示させるための前記垂直/水平同期信号を前記画像出力部に出力し、前記画像復号部が復号画像データを前記フレームメモリに書き込む動作と、前記画像出力部が前記フレームメモリから復号画像データを読み出す動作とは、各々独立して動作が可能であり、前記フレームメモリの記憶領域の使用については前記画像復号部と前記画像出力部でハンドシェイク方式で通信して管理する。 Also, in the frame memory control method of the image reproduction device of the present invention, the image decoding unit decodes the encoded image data to generate decoded image data for each frame, and the decoded image data is stored in the frame memory for each frame. When an image reproduction request is input, the image output unit reads out the decoded image data for each frame from the frame memory for each frame and outputs it to the display data output unit. The display data output unit matches the display means. A frame memory control method of an image reproducing apparatus for generating a vertical / horizontal synchronization signal for output from the image output unit, wherein decoded image data is generated for each frame when the image decoding unit decodes an image. Decoding completion information is output every time, and the image output unit converts the decoded image data that can be read out into the frame by inputting the decoding completion information. Information for setting a read start address for reading from the memory and prohibiting writing to the storage area corresponding to the decoded image data in the non-output state or the holding state corresponds to the decoded image data in the discardable state. Output to the image decoding unit together with information permitting writing to a storage area, and writing the decoded image data to the storage area prohibited from being written by the information prohibiting writing The image decoding unit is caused to execute the writing of the decoded image data to the storage area that is allowed to be written by the information that permits the writing, and an image reproduction request is input from the control unit. Sometimes, based on the input vertical / horizontal synchronization signal, the decoded image data set as the read start address is stored in the frame memory. 1 reading frame is output, the display data output unit outputs the vertical / horizontal synchronizing signal for displaying the image data to the image output unit, the image decoding unit writes the decoded image data in the frame memory The operation and the operation in which the image output unit reads out the decoded image data from the frame memory can operate independently, and the image decoding unit and the image output unit are used for using the storage area of the frame memory. Communicate and manage with handshake method .
本発明は、画像復号部で画像を復号する際には、フレーム毎の復号画像データを生成する毎に復号完了情報を出力し、画像出力部では、復号完了情報に相当するフレームメモリの記憶領域に対する読み出し開始アドレスを設定すると共に記憶領域に対する書込禁止を書込許可する記憶領域の情報と共に出力し、画像再生要求が入力したときに、フレーム毎の復号画像データをフレームメモリからフレーム毎に読み出し、入力する垂直/水平同期信号に基づいて出力し、表示データ出力部では、画像データを表示させるための垂直/水平同期信号を画像出力部に出力するので、例えば復号処理回路ブロックと表示出力処理回路ブロックが分離され、3フレーム分等の少ない記憶容量のフレームメモリでも、再生途中にフレームのコマ遅れやコマ進みがないなめらかな画像再生が可能となるので、なめらかで良好な表示出力が可能となる。また、画像復号部と画像出力部は独立に動作させながらフレームメモリの使用に関してはハンドシェイク方式で通信して画像の復号および表示を行なうようにしたので、フレームメモリを効率的に使用でき、無駄なく復号画像データを再生させることができる。 In the present invention, when an image is decoded by an image decoding unit, decoding completion information is output every time decoded image data is generated for each frame, and the image output unit stores a storage area of a frame memory corresponding to the decoding completion information A read start address is set, and write prohibition to the storage area is output together with information on the storage area to which writing is permitted. When an image reproduction request is input, the decoded image data for each frame is read from the frame memory for each frame. The display data output unit outputs the vertical / horizontal synchronization signal for displaying the image data to the image output unit. For example, the decoding processing circuit block and the display output process Even if the circuit block is separated and the frame memory has a small storage capacity such as 3 frames, frame delay or Because only it is possible that there is no smooth image playback, smooth and excellent display output is made possible. In addition, since the image decoding unit and the image output unit operate independently, the use of the frame memory is communicated by the handshake method to decode and display the image, so that the frame memory can be used efficiently and wasted. Thus, the decoded image data can be reproduced.
実施の形態1.
以下、本発明をその実施の形態を示す図面に基づいて具体的に説明する。
図1は、本発明の実施の形態1の画像再生装置の概略構成を示すブロック図である。
制御部1は、例えば、マイクロプロセッサ、CPU(中央処理装置)、DSP(デジタル信号処理装置)等のように他の回路部を制御可能な回路であり、本発明の画像再生装置内の各部と接続されて各種情報および制御信号を送受信することにより、符号化された画像データを復号し、予め入力されたグラフィックデータと合成して表示させる制御を行う。画像復号部2は、制御部1、フレームメモリ3および画像出力部4と接続され、MPEG4、H263等の規格により符号化された画像の符号化データが入力され、その符号化画像データをフレーム毎の画像データ(復号画像データ)に復号すると共に、その復号が完了する毎に復号完了情報を出力する。
Hereinafter, the present invention will be specifically described with reference to the drawings showing embodiments thereof.
FIG. 1 is a block diagram showing a schematic configuration of an image reproduction apparatus according to
The
フレームメモリ3は、画像復号部2および画像出力部4と接続され、復号画像データの所定フレーム数分の容量を有し、画像復号部2で復号されたフレーム単位の復号画像データ(以降では、フレームデータとも表現する。)をフレーム毎に格納し、読み出し開始アドレスを含むメモリ制御信号により格納したフレームデータを出力する。画像出力部4は、制御部1、画像復号部2、フレームメモリ3、およびLCD(液晶表示)出力部6と接続され、フレームメモリ3に記憶された復号画像データを読み出して出力する回路であり、画像復号部2からの復号完了情報の入力により、復号画像データをフレームメモリ3から読み出すための読み出し開始アドレスを設定すると共に、フレームメモリ3における読み出し開始アドレスから1フレーム分の記憶領域への書込を禁止する情報を書込が許可される記憶領域の情報と共に出力し、制御部1からの画像再生要求が入力したときに、フレーム毎の復号画像データ(フレームデータ)をフレームメモリ3からフレーム毎に読み出し、入力する垂直/水平同期信号に基づいて表示フレームデータとして出力する。
The
グラフィックメモリ5は、制御部1およびLCDデータ出力部6と接続され、復号画像データと合成させるために、予め不図示の入力部等により入力されるグラフィックデータを格納する。LCDデータ出力部(表示データ出力部)6は、制御部1、画像出力部4、グラフィックメモリ5、およびLCDデータ表示部7と接続され、LCDデータ表示部7から入力するフレーム同期信号に基づいて画像データを表示させるための垂直/水平同期信号を生成して画像出力部4に出力し、画像出力部4から入力するフレーム毎の復号画像データにグラフィックメモリ5から読み出されたグラフィックデータを合成し、その合成結果の表示データをLCDイメージ画像を形成するためのLCDデータ(表示データ)としてLCDデータ表示部7に出力する。
The
LCDデータ表示部(表示部)7は、LCDデータ出力部6から出力されるLCDデータに基づく画像を表示する液晶パネル部であり、液晶を用いた表示部であるので、液晶のリフレッシュタイミングに基づくフレーム同期信号を出力する。音声復号部8は、制御部1および音声出力部9と接続され、MPEG4、H263等の規格により符号化された音声の符号化データが入力され、その符号化音声データを復号音声データに復号する。音声出力部9は、音声復号部8と接続され、復号音声を出力するスピーカ等の音声出力部である。
The LCD data display unit (display unit) 7 is a liquid crystal panel unit that displays an image based on the LCD data output from the LCD
フレームメモリ3が複数のフレームバッファにより構成される場合には、画像復号部2から出力される復号完了情報には、表示出力可能なフレームバッファの番号情報を含み、画像出力部4は、表示出力可能フレームバッファがある場合に、その表示出力可能フレームバッファの読み出し開始アドレスを含むメモリ制御信号により格納した復号画像データを読み出して出力し、フレームメモリ3における書込の禁止および許可される記憶領域の情報には、書込可能なフレームバッファ番号を含み、画像復号部2は、書込可能なフレームバッファがある場合に画像の復号処理を実行する。
When the
画像出力部4は、画像再生要求が通常再生要求である場合で、且つ表示出力可能フレームバッファがある場合には、通常再生要求が入力される度に、復号画像データの読み出し開始アドレスを次の順番のフレームバッファの先頭に更新し、画像再生要求が飛び越し再生要求である場合で、且つ表示出力可能フレームバッファが複数ある場合には、飛び越し再生要求が入力される度に、復号画像データの読み出し開始アドレスを、飛び越したフレーム数だけ進めた順番のフレームバッファの先頭に更新する。
When the image playback request is a normal playback request and there is a display output capable frame buffer, the
フレームメモリ3が複数のフレームバッファにより構成される場合のフレームバッファは、少なくとも3個の再生画像サイズの復号画像データを格納できる記憶容量のフレームバッファから構成され、画像復号部2および画像出力部4により復号画像データの書き込み及び読み出しが循環的に制御される。
In the case where the
画像復号部2が復号画像データをフレームメモリ3に書き込む動作と、画像出力部4がフレームメモリ3から復号画像データを読み出す動作とは、各々独立して動作が実施され、フレームメモリ3の記憶領域の使用については画像復号部2と画像出力部4との間で復号完了情報とメモリ書込禁止/許可情報をハンドシェイク方式で通信することにより、読み出し前の領域への次の復号画像データの書込禁止や、復号画像データが書き込まれた領域からの読み出しを管理する。
The operation in which the
画像出力部4は、表示出力可能なフレームバッファがある場合で、且つ復号完了情報の入力後の制御部1からの画像再生要求が入力した場合に、表示出力可能なフレームバッファから復号画像データを読み出す前に、表示部への画像出力が可能であることを示す表示レディ信号を出力する。表示データ出力部6は、表示レディ信号の入力により前記フレーム同期信号の入力に基づく垂直/水平同期信号を生成して画像出力部4に出力することで、液晶用の表示データを得てLCDデータ表示部7に出力する。
The
グラフィックメモリ5のグラフィックデータが更新された場合、LCDデータ出力部6は、画像出力部4に再出力要求信号を出力する。画像出力部4は、再出力要求信号が入力したとき、要求されたフレームの復号画像データをフレームメモリ3から読み出してLCDデータ出力部6に出力する。
When the graphic data in the
図2は、図1の画像出力部4の内部構成を示すブロック図である。
入力端子40は、復号画像データ(フレームデータ)を読み出すための画素クロックが、LCDデータ出力部6から入力されるか、あるいは画像出力部4内の不図示のクロック発振部から出力される端子である。入力端子41は、フレームデータを読み出すための垂直同期信号が、LCDデータ出力部6から入力される端子である。入力端子42は、フレームデータを読み出すための水平同期信号が、LCDデータ出力部6から入力される端子である。入力端子43は、水平画素数や垂直画素数などの表示画像のパラメータを設定するための制御信号が、制御部1から入力される端子である。
FIG. 2 is a block diagram showing an internal configuration of the
The
ライン数カウンタ44は、フレームデータのライン数を計数するカウンタである。水平方向画素数カウンタ45は、フレームデータの水平方向の画素数を計数するカウンタである。
The
入力端子46は、任意の1フレーム分の復号画像データが画像復号部2からフレームメモリ3に出力されたことを示す復号完了情報が、画像復号部2から入力される端子である。
The
メモリ読み出し制御部47は、フレームメモリ3からのフレームデータの読み出しを制御する。メモリ読み出し制御部47中の全読み出し開始アドレス記憶部47bは、フレームメモリ3中のフレーム単位の全読み出し開始アドレスを記憶する。読み出し開始アドレス記憶部47aは、復号完了情報に対応するフレームデータの読み出し開始アドレスを記憶する。
The memory read
出力端子48は、フレームメモリ3の復号画像データが書き込み後で未読み出しの領域に対する書込禁止、および、復号画像データが書き込み前か復号画像データが読み出し後の領域に対する書込許可についての情報であるメモリ書き込み禁止/許可情報を出力される端子である。出力端子49は、フレームメモリ3からフレームデータを読み出すためのメモリ制御信号を出力される端子である。入力端子50は、フレームメモリ3から読み出されたフレームデータが入力される端子である。
The
出力端子51は、復号完了情報に対応するフレームデータが、表示するための読み出しが可能な状態であることを示す表示レディ信号を、LCDデータ出力部6に出力する端子である。出力端子52は、フレームメモリ3から読み出されたフレームデータがLCDデータ出力部6へ出力される端子である。入力端子53は、グラフィックデータが更新された場合等の再出力要求信号が、LCDデータ出力部6から入力される端子である。
The
図3は、画像復号部2の概略動作の流れを示すフローチャートである。
まず、画像復号部2は、制御部1から初期化を要求する制御信号が入力されたか否かを判断し(S1)、要求が入力された場合(S1:YES)には画像復号部2内の各種設定値を初期値にする初期化を実施(S2)してステップS1に戻る。初期化要求が無い場合(S1:NO)には、制御部1から復号処理を要求する制御信号が入力されたか否かを判断し(S3)、復号処理要求が無い場合(S3:NO)にはステップS1に戻る。復号処理要求が入力された場合(S3:YES)には、該当する符号化画像データの復号が完了してフレームメモリ3に格納されたことを示すための復号完了情報が初期値であるか否かを判断し(S4)、復号完了情報が初期値で無い場合(S4:NO)には、復号完了情報を初期値にリセットする(S5)。
FIG. 3 is a flowchart showing a schematic operation flow of the
First, the
画像復号部2は、復号完了情報が初期値である場合(S4:YES)および復号完了情報を初期値にリセットされた場合(S5)には、復号処理要求に従って入力された符号化画像データに対して復号処理を実施し、復号画像データをフレームメモリ3の所定のアドレスの記憶領域(フレームバッファ)に出力する(S6)。また、ステップS6の復号処理を実施すると共にその復号処理が完了したか否かを判断し(S7)、復号処理が完了しない場合(S7:NO)にはステップS6に戻る。復号処理が完了した場合(S7:YES)には、画像出力部4に復号完了情報を出力する(S8)。その後、復号処理要求されたデータが終了したか否かを判断し(S9)、データが終了しない場合(S9:NO)にはステップS4に戻り、データが終了した場合(S9:YES)には処理を終了する。
When the decoding completion information is the initial value (S4: YES) and when the decoding completion information is reset to the initial value (S5), the
なお、ステップS4の復号完了情報が初期値であるか否かについては、例えば、初期値を記憶させておいて現在値と対比することで判断しても良いし、あるいは、復号された画像データが格納されるフレームメモリ3の記憶領域(フレームバッファ)の数値に基づき、初期化後に格納される復号画像データの順番の数値がその記憶領域の数値よりも少ない場合には、初期化後の初使用、すなわち、初期値と判断してもよい。
Whether or not the decoding completion information in step S4 is an initial value may be determined, for example, by storing the initial value and comparing it with the current value, or decoded image data. If the numerical value of the order of the decoded image data stored after initialization is smaller than the numerical value of the storage area based on the numerical value of the storage area (frame buffer) of the
図4は、画像出力部4の概略動作の流れを示すフローチャートである。
まず、画像出力部4は、制御部1から初期化を要求する制御信号が入力されたか否かを判断し(S11)、要求が入力された場合(S11:YES)には画像出力部4内の各種設定値を初期値にする初期化を実施(S12)してステップS11に戻る。初期化要求が無い場合(S11:NO)には、画像復号部2から復号完了情報が入力されたか否かを判断し(S13)、復号完了情報が無い場合(S13:NO)にはステップS11に戻る。復号完了情報が入力された場合(S13:YES)には、その復号完了情報の内容、初期化後の復号完了情報の数値、および全読み出し開始アドレス記憶部47b等により該当するフレームデータの読み出し開始アドレス情報を取得し(S14)、その読み出し開始アドレスの記憶領域への書込を禁止すると共に、他の記憶領域で読み出しが終了した領域については書込を許可するメモリ書込禁止/許可情報を画像復号部2に出力する(S15)。
FIG. 4 is a flowchart showing a schematic operation flow of the
First, the
画像出力部4は、制御部1からの画像データ(フレームデータ)の再生を要求する制御信号が入力されたか否かを判断し(S16)、再生要求が無い場合(S16:NO)には再度ステップS16の判断を繰り返し、再生要求があった場合(S16:YES)には読み出し開始アドレスを読み出し開始アドレス記憶部47aに格納して設定し(S17)、表示させる復号画像データの出力準備ができたことを示す表示レディ信号をLCDデータ出力部6に出力し(S18)、メモリ書込禁止/許可情報を更新する(S19)。
The
画像出力部4は、LCDデータ出力部6からの垂直/水平同期信号が入力されたか否かを判断し(S20)、同期信号が入力され無い場合(S20:NO)には再度ステップS20の判断を繰り返し、同期信号が入力された場合(S20:YES)にはフレームメモリ3中の読み出し開始アドレスに該当する記憶領域(フレームバッファ)から復号画像データ(フレームデータ)を読み出し、そのフレームデータをLCDデータ出力部6から入力する垂直/水平同期信号に合わせた表示フレームデータとしてLCDデータ出力部6に出力する(S21)。その後、再生要求されたデータが終了したか否かを判断し(S22)、データが終了しない場合(S22:NO)にはステップS21に戻り、データが終了した場合(S22:YES)には処理を終了する。なお、LCDデータ出力部6からの再出力要求信号に対しては、例えば、ステップS18以降の処理を実施すればよい。
The
図5は、LCDデータ出力部6から画像出力部4に入力される垂直同期信号/水平同期信号、および画像出力部4から出力されるフレームデータの関係の一例を示すタイミングチャートである。
図5の(m)行に示した垂直同期信号は、LCDデータ出力部6から画像出力部4に垂直同期信号間隔Tvss毎に入力される。図5の(n)行に示した水平同期信号は、図5(m)行の最初の垂直同期信号に対して、水平同期信号先頭位置Phsstまで遅れて出力される。水平同期信号は、水平同期信号間隔Thss毎に入力あるいは設定される。図5の(o)行に示したフレームデータの各有効画素は、図5(n)行の水平同期信号に対して、水平有効画素先頭位置Pheptまで遅れて最初の水平有効画素が水平有効画素数Nhep分だけ出力され、以降は、水平同期間隔Thss毎に水平有効画素数Nhep分のフレームデータが、垂直有効ライン数Nvelに達するまで出力される。
FIG. 5 is a timing chart showing an example of the relationship between the vertical / horizontal synchronization signal input from the LCD
5 is input from the LCD
図5(m)行において、垂直同期信号間隔Tvssが経過して次の垂直同期信号が画像出力部4に入力されると、図5の(n)行に示した水平同期信号が前回と同様に入力あるいは設定され、図5の(o)行に示したフレームデータの各有効画素も前回と同様に出力される。なお、図5(m)〜(o)に示した各信号のタイミング、および信号タイミングの規定方法はこれに限るものではなく、フレームデータが同期信号をきっかけとして出力されればよい。例えば、図5(m)〜(o)に示した信号極性は逆であってもよく、各同期信号中にダミー信号や、フレームデータ中にダミーデータがあってもよい。
In the row (m) of FIG. 5, when the vertical synchronization signal interval Tvss elapses and the next vertical synchronization signal is input to the
以下、図1に示した本実施の形態1の画像再生装置の全体的な動作を、図2〜図5を参照しつつ説明する。
符号化画像データはCPUバスや専用バスを介して、メモリや他装置から画像復号部2に入力される。画像復号部2では、制御部1からの制御信号に従い、入力された符号化画像データの画像符号化方式に応じた復号処理を行ない、復号画像データをフレームメモリ3に格納し、復号完了情報を画像出力部4に対して出力するとともに、復号情報を制御部1に出力する。復号情報としては、水平画素数、垂直画素数などである。
The overall operation of the image reproduction apparatus according to the first embodiment shown in FIG. 1 will be described below with reference to FIGS.
The encoded image data is input to the
画像出力部4では、入力端子46を介して画像復号部2から入力された復号完了情報をもとに、メモリ読み出し制御部47でフレームメモリ3からの復号画像データの読み出し開始アドレスを設定するとともに、メモリ書き込み禁止/許可情報を更新し、出力端子48を介して画像復号部2に出力する。また、制御部1からは、入力端子43を介して、通常再生要求、飛び越し再生要求が制御信号として、メモリ読み出し制御部47に入力され、LCDデータ出力部6に対して、表示更新すべき画像が用意できたことを通知する表示レディ信号を出力端子51を介して出力する。
In the
LCDデータ出力部6では、画像出力部4から表示レディ信号を受けると、LCDデータ表示部7から出力されるLCDのリフレッシュタイミングを示すフレーム同期信号を受け、内部で、垂直同期信号/水平同期信号を生成し、画像出力部4に出力する。なお、フレーム同期信号からの垂直同期信号先頭位置、垂直同期信号間隔、垂直同期信号からの水平同期信号先頭位置、水平同期信号間隔、水平同期信号からの有効画素先頭位置等は、レジスタ設定等で調整可能である。
When receiving the display ready signal from the
図2の入力端子42を介してLCDデータ出力部6から入力された水平同期信号は、水平画素数カウンタ45に入力され、水平画素数カウンタ45を水平同期タイミングで初期化する。同様に、入力端子41を介してLCDデータ出力部6から入力された垂直同期信号は、ライン数カウンタ44に入力され、ライン数カウンタ44を垂直同期タイミングで初期化する。水平画素数カウンタ45、ライン数カウンタ44には、入力端子40から入力された画素クロックが入力される。また、制御部1からは、垂直同期信号からの水平同期信号先頭位置、垂直有効画素数(垂直ライン数とも表現する。)、水平同期信号からの有効画素先頭位置(水平有効画素先頭位置とも表現する。)、水平有効画素数などが入力端子43を介して入力される。水平画素数カウンタ45では、水平有効画素数先頭位置から、水平有効画素数までカウントアップし、水平有効画素数までカウントすると、ラインカウンタ44を1つアップする。ライン数カウンタ44では、垂直同期信号に対する水平同期信号先頭位置から、垂直有効画素数までカウントアップする。水平画素数カウンタ45と、ライン数カウンタ44のカウント値はメモリ読み出し制御部47に入力され、ライン数カウンタ44と水平画素数カウンタ45のカウント値がそれぞれ、垂直有効画素数、水平有効画素数になるまで、メモリ読み出しを有効とし、フレームメモリ3から復号画像データを読み出す。このときの復号画像データの読み出し開始アドレスは、復号完了情報受信時に設定を行なったアドレスである。
The horizontal synchronization signal input from the LCD
図2の入力端子50を介してフレームメモリ3から読み出された復号画像データは、出力端子52を介してLCDデータ出力部6に出力される。LCDデータ出力部6はラインメモリ程度のメモリしか持たず、画像出力部4から読み出したタイミングに合わせて、グラフィックメモリ5からグラフィック画像を読み出し合成する。なお、このグラフィック画像5はあらかじめ、LCDデータ出力部6での画像合成処理の前に、制御部1からグラフィックメモリ5に格納される。LCDデータ出力部6で合成された復号画像データとグラフィック画像はLCDイメージを構成し、LCDデータとして、LCDデータ表示部7に出力される。
The decoded image data read from the
音声符号化データは、CPUバスや専用バスを介して、メモリや他装置から音声復号部8に入力される。音声復号部9では、制御部1からの制御信号に従って、入力された音声符号化データを音声符号化方式に応じた復号処理を行ない、音声出力部9に出力するとともに、復号情報を制御部1に出力する。音声出力部9では、入力された音声復号データを、音声データとして出力する。
The speech encoded data is input to the
ところで、本実施の形態のフレームメモリ3は3個(3フレーム分)のフレームバッファのみから構成されているため、制御部1から画像出力部4に再生要求が入力される場合に、表示中のフレームバッファを確保したうえで、残る2面のフレームバッファを使って、表示出力処理とは独立に画像の復号処理を進める必要がある。本実施の形態の画像再生装置では、画像復号部2と画像出力部4間でハンドシェーク方式で通信することで、画像復号部2と画像出力部4を各々独立して動作させている。
By the way, since the
なお、表示するフレームバッファを確保する理由は、例えば、再出力動作に対応させるためである。本実施の形態のLCDデータ出力部6はメモリ容量削減のため、ラインメモリ程度のメモリしか持たないため、画像出力部4から出力された復号画像データ(フレームデータ)を内部で保持する手段がない。従って、グラフィックメモリ5の内容を変更した場合に、その変更内容をLCDデータ表示部7に反映させるためには、あらためて、画像出力部4から復号画像データを再出力させる必要があるためである。そのため、画像出力部4は、LCDデータ出力部6からのグラフィック画像更新にともなう再出力要求信号を受けると、上記確保していたフレームバッファの内容を再出力する。また、表示するフレームバッファを確保する他の理由としては、例えば、画像再生途中に巻き戻しをする場合には、再生中の復号画像データ以外を破棄し、そこに新しい復号画像データを、現表示中の復号画像を保持したまま用意する必要があるためである。
The reason for securing the frame buffer to be displayed is, for example, to cope with the re-output operation. The LCD
図6は、画像復号部2と画像出力部4のハンドシェイク方式の通信に関係する信号および処理のタイミングを示すタイミングチャートであり、制御部1から画像出力部4に制御信号として入力される再生要求は通常再生の要求のみである時のタイミングチャートである。
FIG. 6 is a timing chart showing the signals related to the handshake communication between the
図6(a)は、制御部1から画像出力部4に入力される制御信号であり、図6の場合には、制御信号として通常再生の要求のみが画像出力部4に入力される。図6(b)は、画像復号部2と画像出力部4のハンドシェイク方式の通信に関係する信号および処理のタイミングを示している。図6(c)は、画像復号部2で符号化画像データが復号処理されるタイミングを示し、そのタイミング中に示された数字が復号画像データが格納されるフレームバッファの番号を示す。図6の場合は、フレームメモリ3が、フレームバッファ0、フレームバッファ1、フレームバッファ2の3個のフレームバッファから構成される場合であるので、0、1、2の各番号が循環的に割り当てられる。
6A shows a control signal input from the
図6(d)は、画像復号部2から画像出力部4へ出力される復号完了情報の1つであり、フレームバッファ0に格納される復号画像データについての復号状態を復号完了情報(FLAG0)として示しており、ローレベルが復号前あるいは復号処理中の状態を示し、ハイレベルが復号完了状態であることを示している。すなわち、ハイレベルがフレームバッファ0に復号画像データが格納されており表示出力が可能な状態を示しており、ローレベルがフレームバッファ0に復号画像データが格納されておらず表示出力できない状態を示している。
FIG. 6 (d) is one piece of decoding completion information output from the
図6(e)は、画像復号部2から画像出力部4へ出力される復号完了情報の1つであり、フレームバッファ1に格納される復号画像データについての復号状態を復号完了情報(FLAG1)として示しており、ローレベルが復号前あるいは復号処理中の状態を示し、ハイレベルが復号完了状態であることを示している。すなわち、ハイレベルがフレームバッファ1に復号画像データが格納されており表示出力が可能な状態を示しており、ローレベルがフレームバッファ1に復号画像データが格納されておらず表示出力できない状態を示している。
FIG. 6 (e) is one piece of decoding completion information output from the
図6(f)は、画像復号部2から画像出力部4へ出力される復号完了情報の1つであり、フレームバッファ2に格納される復号画像データについての復号状態を復号完了情報(FLAG2)として示しており、ローレベルが復号前あるいは復号処理中の状態を示し、ハイレベルが復号完了状態であることを示している。すなわち、ハイレベルがフレームバッファ2に復号画像データが格納されており、表示出力が可能な状態を示しており、ローレベルがフレームバッファ2に復号画像データが格納されておらず表示出力できない状態を示している。
FIG. 6 (f) is one piece of decoding completion information output from the
図6(g)は、画像出力部4から画像復号部2へ出力されるメモリ書き込み禁止/許可情報の1つであり、フレームバッファ0についての書込禁止あるいは許可情報をメモリ書込禁止/許可情報(CLR0)として示しており、ハイレベルが書込許可状態であり、ローレベルが書込禁止状態であることを示している。
FIG. 6G is one of the memory write prohibition / permission information output from the
図6(h)は、画像出力部4から画像復号部2へ出力されるメモリ書き込み禁止/許可情報の1つであり、フレームバッファ1についての書込禁止あるいは許可情報をメモリ書込禁止/許可情報(CLR1)として示しており、ハイレベルが書込許可状態であり、ローレベルが書込禁止状態であることを示している。
FIG. 6 (h) is one of memory write prohibition / permission information output from the
図6(i)は、画像出力部4から画像復号部2へ出力されるメモリ書き込み禁止/許可情報の1つであり、フレームバッファ2についての書込禁止あるいは許可情報をメモリ書込禁止/許可情報(CLR2)として示しており、ハイレベルが書込許可状態であり、ローレベルが書込禁止状態であることを示している。
FIG. 6 (i) is one of memory write prohibition / permission information output from the
なお、具体的に、メモリ書込禁止/許可情報(CLR0、CLR1、CLR2)が書込許可状態となるのは、次に出力できるフレームバッファが準備できたために現在出力しているフレームバッファの内容が不要になった状態、つまり、破棄可能状態になった場合である。また、書込禁止状態となるのは、まだフレームバッファの内容が出力されていない状態、つまり、未出力状態にある場合、あるいは、次に出力できるフレームバッファの内容がない状態、つまり、現在のフレームバッファの内容を保持しておかないといけない状態(保持状態)にある場合である。
Specifically, the memory write inhibition / permission information (CLR0, CLR1, CLR2) is in a write- permitted state because the frame buffer that can be output next is prepared and the contents of the frame buffer that is currently output Is no longer needed, that is, when it can be discarded. In addition, the write-inhibited state is a state where the contents of the frame buffer have not been output yet, that is, in a non-output state, or there is no content of the frame buffer that can be output next, that is, the current This is a case where the contents of the frame buffer must be held (held state).
図6(j)は、画像出力部4内の読み出し開始アドレス記憶部47aに格納される読み出し開始アドレスを示し、そのタイミング中に示された数字が復号画像データが格納されるフレームバッファの番号を示す。図6の場合は、フレームバッファ0、フレームバッファ1、フレームバッファ2の3個のフレームバッファに対応する、0、1、2の何れかの番号が割り当てられる。この読み出し開始アドレスは、基本的には図6(c)のように循環的に割り当てられるが、画像復号部2における符号化画像データの復号処理が読み出しタイミングまでに終了しない場合には、その前の番号が繰り返し割り当てられる。
FIG. 6 (j) shows the read start address stored in the read start
図6(k)は、図6(j)の読み出し開始アドレスの割り当て時に画像出力部4からLCDデータ出力部6に出力される表示レディ信号を示している。図6(l)は、LCDデータ表示部7からLCDデータ出力部6にフレーム同期信号として出力されるLCDのリフレッシュタイミングを示している。図6(m)は、図5(m)に対応する垂直同期信号を示し、図6(l)のフレーム同期信号の何れかと同じタイミングで出力される。図6(n)は、図5(n)に対応する水平同期信号を示している。図6(o)は、図5(o)に対応するフレームデータを示し、そのタイミング中に示された数字が復号画像データを読み出すフレームバッファの番号を示す。図6の場合は、フレームバッファ0、フレームバッファ1、フレームバッファ2の3個のフレームバッファに対応する、0、1、2の何れかの番号となる。フレームデータは、図6(j)の読み出し開始アドレスの番号が読み出されるので、画像復号部2における符号化画像データの復号処理が読み出しタイミングまでに終了しない場合には、その前の番号のフレームデータが繰り返し読み出されることになる。
FIG. 6K shows a display ready signal output from the
次に、図6(b)のタイミングに基づく各動作および各処理のタイミングについて画像再生初期状態から説明する。まず、図6の場合の画像再生時の初期状態は、フレームバッファ0に対応する復号完了情報であるFLAG0、フレームバッファ1に対応する復号完了情報であるFLAG1、フレームバッファ2に対応する復号完了情報であるFLAG2はローレベル、つまり、表示不可状態であり、フレームバッファ0に対応するメモリ書き込み禁止/許可情報であるCLR0、フレームバッファ1に対応するメモリ書き込み禁止/許可情報であるCLR1、フレームバッファ2に対応するメモリ書き込み禁止/許可情報であるCLR2はハイレベル、つまり、メモリへの書き込み許可状態である。
Next, each operation and each processing timing based on the timing of FIG. 6B will be described from the initial state of image reproduction. First, the initial state at the time of image reproduction in the case of FIG. 6 is FLAG0 which is decoding completion information corresponding to the
タイミングt=t1で、初期化後の最初の符号化画像データに対する復号処理要求が、制御部1から画像復号部2に出力される。タイミングt=t2で、画像復号部2において初期化後の最初の符号化画像データ復号処理が完了すると、画像復号部2は、フレームバッファ0、フレームバッファ1、フレームバッファ2の3個のフレームバッファの番号は循環的に割り当てられることから、まず、FLAG0をハイレベルにして画像出力部4に出力する(1−a)。そして、画像再生初期状態後、最初の復号処理の結果は、フレームバッファ0に書き込まれる。
At timing t = t1, a decoding process request for the first encoded image data after initialization is output from the
一方、画像出力部4では、FLAG0がハイレベルになったのを受けて、読み出し開始アドレスがフレームバッファ0であるという情報を取得し、CLR0をローレベルにして画像復号部2に出力する(2−a)ことで、LCDデータ表示部7における表示が完了してフレームバッファ0のメモリ内容が不要になるまで、画像復号部2によるフレームバッファ0への書き込みを禁止する。
On the other hand, the
この状態で、制御部1から通常再生要求が入力される(3−a)と、画像出力部4は、復号画像データの読み出し開始アドレスをフレームバッファ0に設定(4−a)すると共に、LCDデータ出力部6に表示レディ信号を出力する(5−a)。画像復号部2と画像出力部4との間で復号完了情報とメモリ書込禁止/許可情報をハンドシェイク方式で通信させることでフレームバッファの使用についての書込と読み出しの連携をとってはいるが、画像復号部2で符号化画像データを復号してフレームメモリ3に格納する処理と、画像出力部4でフレームメモリ3から復号画像データを読み出して出力する処理とは、各々別個のフレームに対して独立して処理することができる。
In this state, when a normal reproduction request is input from the control unit 1 (3-a), the
一方、LCDデータ表示部7は、上記復号処理とは独立に、例えば、1秒あたり60回、つまり、60Hzで表示内容が画面上から消えないように、LCDのリフレッシュを行なっている。なお、リフレッシュ間隔は、60Hzに限るものではない。このリフレッシュタイミングは、LCDデータ出力部6にフレーム同期信号として入力される。ある一定期間の遅延を含め、このタイミングにLCDデータ出力を同期させることにより、画面の更新タイミングとずらしたタイミングで、画像をLCDに転送することが可能であり、結果、画像の切り替わりを隠すことができる。
On the other hand, the LCD
LCDデータ出力部6は、LCDデータ表示部7から入力されたフレーム同期信号から、垂直同期信号/水平同期信号を作成して、画像出力部4に出力する(7−a)。画像出力部4は、垂直同期信号/水平同期信号を受けてフレームバッファ0のフレームデータを出力する(8−a)。
The LCD
タイミングt=t3で、初期化後の第2の符号化画像データに対する復号処理要求が、制御部1から画像復号部2に出力される。画像復号部2は、復号処理要求に応じて、第2の符号化画像データの復号処理を行ない、タイミングt=t4で、FLAG1をハイレベルにする(1−b)。この時点では、図6(c)に示した画像復号部2における第2の符号化画像データの復号処理中に、画像出力部4では、最初の符号化画像データに対応する復号画像データの読み出し開始アドレスをフレームバッファ0に設定する処理(4−a)と、LCDデータ出力部6に最初の符号化画像データ復号画像データに対応する表示レディ信号を出力している(5−a)。すなわち、画像復号部2では第2の符号化画像データの復号処理を実施し、画像出力部4では、最初の符号化画像データに対応する復号画像データの読み出し処理を各々独立に実施している。
At timing t = t3, a decoding process request for the second encoded image data after initialization is output from the
画像出力部4では、FLAG1がハイレベルになったのを受けて、CLR1をローレベルにする(2−b)。制御部1から通常再生要求が入力される(3−b)と、画像出力部4は、復号画像データの読み出し開始アドレスをフレームバッファ1に設定(4−b)すると共に、LCDデータ出力部6に表示レディ信号を出力する(5−b)。このとき、CLR0をハイレベルに変更し、フレームバッファ0を書き込み可能にする(6−b)。LCDデータ出力部6では表示レディ信号を受けて、LCDデータ表示部7から入力されたフレーム同期信号から、垂直同期信号/水平同期信号を作成し、画像出力部4に出力する(7−b)。画像出力部4は垂直同期信号/水平同期信号を受けてフレームバッファ1のフレームデータを出力する(8−b)。
In response to the FLAG1 becoming high level, the
タイミングt=t5で、初期化後の第3の符号化画像データに対する復号処理要求が、制御部1から画像復号部2に出力される。画像復号部2は、復号処理要求に応じて、第3の符号化画像データの復号処理を行ない、タイミングt=t6で、FLAG2をハイレベルにする(1−c)。FLAG2がハイレベルになったのを受けて、画像出力部4では、CLR2をローレベルにする(2−c)。このあと、制御部1からの通常再生要求が来る前に、さらに、タイミングt=t7で、画像復号部2は制御部1からの復号処理要求に応じて、さらに次(第4の符号化画像データ)の復号処理を行ない、タイミングt=t8で、FLAG0をハイレベルにする(1−d)。この復号処理が可能なのは、6−bでCLR0がローレベル→ハイレベルとなり、フレームバッファ0が書き込み可能状態になっているからである。つまり、画像復号部2は、画像出力部4からのメモリ書き込み禁止/許可情報に基づいて、復号処理を実行するかどうかを決定する。
At timing t = t5, a decoding process request for the third encoded image data after initialization is output from the
このあと、制御部1から画像出力部4に通常再生要求が入力される(3−c)と、最新の復号画像データはフレームバッファ0に格納されているが、そのまえの復号画像が、フレームバッファ2にあるため、画像出力部4では、復号画像データの読み出し開始アドレスをフレームバッファ2に設定し(4−c)、LCDデータ出力部6に表示レディ信号を出力する(5−c)。このとき、CLR1をハイレベルに変更し、フレームバッファ1を書き込み可能にする(6−c)。LCDデータ出力部6では表示レディ信号を受けて、LCDデータ表示部7から出力されたフレーム同期信号から、垂直同期信号/水平同期信号を作成し、画像出力部4に出力する(7−c)。画像出力部4は垂直同期信号/水平同期信号を受けてフレームバッファ2のフレームデータを出力する(8−c)。
Thereafter, when a normal reproduction request is input from the
次に、制御部1から画像出力部4に通常再生要求が入力される(3−d)と、画像出力部4では、スタックされていたフレームバッファ0を復号画像の読み出し開始アドレスに設定し(4−d)、LCDデータ表示部6に表示レディ信号を出力する(5−d)。このとき、CLR2をハイレベルに変更し、フレームバッファ2を書き込み可能にする(6−d)。LCDデータ出力部6では表示レディ信号を受けて、LCDデータ表示部7から出力されたフレーム同期信号から、垂直同期信号/水平同期信号を作成し、画像出力部4に出力する(7−d)。画像出力部4は垂直同期信号/水平同期信号を受けてフレームバッファ0のフレームデータを出力する(8−d)。
Next, when a normal reproduction request is input from the
また、この間、タイミングt=t9で、画像復号部2では、制御部1からの復号処理要求を受けて、さらにまた次(第5の符号化画像データ)の復号処理を行ない、タイミングt=t10で、FLAG1をハイレベルにする(1−e)。FLAG1がハイレベルになったのを受けて、画像出力部4では、CLR1をローレベルにする(2−e)。制御部1から通常再生要求が入力される(3−e)と、画像出力部4は、復号画像データの読み出し開始アドレスをフレームバッファ1に設定(4−e)すると共に、LCDデータ出力部6に表示レディ信号を出力する(5−e)。このとき、CLR0をハイレベルに変更し、フレームバッファ0を書き込み可能にする(6−e)。LCDデータ出力部6では表示レディ信号を受けて、LCDデータ表示部7から入力されたフレーム同期信号から、垂直同期信号/水平同期信号を作成し、画像出力部4に出力する(7−e)。画像出力部4は垂直同期信号/水平同期信号を受けてフレームバッファ1のフレームデータを出力する(8−e)。
During this time, at timing t = t9, the
さらに、この間、タイミングt=t11で、画像復号部2では、制御部1からの復号処理要求を受けて、また次(第6の符号化画像データ)の復号処理を行ない、タイミングt=t12で、FLAG2をハイレベルにする(1−f)。FLAG2がハイレベルになったのを受けて、画像出力部4では、CLR2をローレベルにする(2−f)。制御部1から通常再生要求が入力される(3−f)と、画像出力部4は、復号画像データの読み出し開始アドレスをフレームバッファ2に設定(4−f)すると共に、LCDデータ出力部6に表示レディ信号を出力する(5−f)。このとき、CLR1をハイレベルに変更し、フレームバッファ1を書き込み可能にする(6−f)。LCDデータ出力部6では表示レディ信号を受けて、LCDデータ表示部7から入力されたフレーム同期信号から、垂直同期信号/水平同期信号を作成し、画像出力部4に出力する(7−f)。画像出力部4は垂直同期信号/水平同期信号を受けてフレームバッファ2のフレームデータを出力する(8−f)。
Further, during this time, at timing t = t11, the
このあと、タイミングt=t13で、制御部1からの復号処理要求を受けて、画像復号部2では次(第7の符号化画像データ)の復号処理を行なうが、復号処理が完了するまえに、制御部1から通常再生要求が入力される(3−g)と、前の復号画像読み出し開始アドレスと、現在のフレームバッファの状態(CLR0、CLR1、CLR2)を見て、出力可能なフレームバッファを決定する。CLR0がまだハイレベル→ローレベルになっていないので、前回と同様に、復号画像読み出し開始アドレスをフレームバッファ2に設定(4−g)すると共に、LCDデータ出力部6に表示レディ信号を出力する(5−g)。ただし、このとき、CLR0がローレベルにない、つまり、次の表示の準備ができていないので、CLR2はローレベルのままにする(6−g)。LCDデータ出力部6では表示レディ信号を受けて、LCDデータ表示部7から入力されたフレーム同期信号から、垂直同期信号/水平同期信号を作成し、画像出力部4に出力する(7−g)。画像出力部4は垂直同期信号/水平同期信号を受けてフレームバッファ2のフレームデータを出力する(8−g)。
Thereafter, at timing t = t13, a decoding process request is received from the
タイミングt=t14で、画像復号部2での復号処理が完了すると、FLAG0をハイレベルにする(1−h)。FLAG0がハイレベルになったのを受けて、画像出力部4では、CLR0をローレベルにする(2−h)。制御部1から通常再生要求が入力される(3−h)と、画像出力部4は、復号画像データの読み出し開始アドレスをフレームバッファ0に設定(4−h)すると共に、LCDデータ出力部6に表示レディ信号を出力する(5−h)。このとき、CLR2をハイレベルに変更し、フレームバッファ2を書き込み可能にする(6−h)。LCDデータ出力部6では表示レディ信号を受けて、LCDデータ表示部7から入力されたフレーム同期信号から、垂直同期信号/水平同期信号を作成し、画像出力部4に出力する(7−h)。画像出力部4は垂直同期信号/水平同期信号を受けてフレームバッファ0のフレームデータを出力する(8−h)。
When the decoding process in the
このように、本実施の形態の画像復号部2と画像出力部4では、フレームバッファを3個用意することにより、制御部1から画像出力部4に通常再生要求のみが入力される場合には、表示中のフレームバッファを確保したうえで、残る2面のフレームバッファを使って、表示出力処理とは独立に画像の復号処理を進めることができる。
As described above, in the
また、上記したように、画像出力部4は、LCDデータ出力部6からのグラフィック画像更新にともなう再出力要求信号を受けると、上記確保していたフレームバッファの内容を再出力するので、現在、表示されているフレームバッファは、次の復号画像データの準備ができ、その復号画像データの再生要求がきた時点で開放され、メモリ書き込み可能となる。
Further, as described above, when the
ところで、上記した図6の場合には制御部1から画像出力部4に通常再生要求のみが入力される場合を示したが、制御部1から画像出力部4には、通常再生要求のみでなく飛び越し再生の要求が入力される場合がある。飛び越し再生が入力される場合とは、例えば、画像復号部2での画像の復号処理が早く、一方で、LCDデータ表示部7、LCDデータ出力部6とのインターフェースを含めた画像出力部4での画像出力処理が遅い場合である。その場合、画像復号部5において画像復号された復号画像データと、音声復号部8において音声復号された音声復号データは、制御部1によってそれぞれ再生タイミングを調整する必要がある。このとき、画像出力部4からLCD出力への表示レディ信号や、LCDデータ表示部7のLCDリフレッシュタイミング、LCDデータ出力部6から画像出力部4への垂直同期信号/水平同期信号、これら相互のタイミングによって、遅延が発生し、音声の再生タイミングと同期が取れなくなる場合がある。このとき、復号画像データの再生を1フレーム飛び越すことにより、音声再生と画像再生のタイミングが図れ、自然な再生が可能となる。なお、本実施の形態では、フレームメモリ3を3個のフレームバッファから構成しているため、再生時においては、1フレームの飛び越しのみ可能でなるが、画像復号部4の画像復号処理と、LCDデータ表示部7、LCDデータ出力部6とのインターフェースを含めた画像出力部4での画像出力処理の速さにより、フレームバッファ数を増やすことにより、メモリの効率よい使用を実現した上で、画像復号処理と画像出力処理を連携させ、自然な画像再生を実現することができる。
Incidentally, in the case of FIG. 6 described above, the case where only the normal reproduction request is input from the
図7は、図6の制御信号が通常再生要求のみではなく飛び越し再生要求が混ざる場合の飛び越し再生を行なうタイミングチャートである。
図7と図6との違いは、制御部1から画像出力部4への3番目の制御信号が通常再生要求でなく、飛び越し再生要求(3−C)となっているため、飛び越し再生要求(3−C)の入力後に出力されるフレームデータがフレームバッファ2に格納された復号画像データでなくなり、フレームバッファ0に格納された復号画像データになる点、および、それに伴う画像出力部4内の処理内容が変更される点である。
FIG. 7 is a timing chart for performing interlaced reproduction when the control signal of FIG. 6 is mixed with not only normal reproduction requests but also interlaced reproduction requests.
The difference between FIG. 7 and FIG. 6 is that the third control signal from the
タイミングt=t1〜t8までの入力およびタイミングt=t10〜t14までの入力による動作は、図6を用いて上記に説明した制御部1からの制御信号が通常再生要求のみの場合と同様であるので重複する説明を省略する。
飛び越し再生要求(3−C)が入力される時点では、FLAG0がハイレベル、FLAG1がハイレベル、FLAG2がハイレベル、CLR0がローレベル、CLR1がローレベル、および、CLR2がローレベルであり、読み出し開始アドレスはフレームバッファ1に設定されている。
The operation by the input from timing t = t1 to t8 and the input from timing t = t10 to t14 is the same as the case where the control signal from the
At the time when the interlace playback request (3-C) is input, FLAG0 is high level, FLAG1 is high level, FLAG2 is high level, CLR0 is low level, CLR1 is low level, and CLR2 is low level, and reading is performed The start address is set in the
図7のタイミング(3−C)で、制御部1から飛び越し再生要求が入力されると、画像復号部4は、まだ読み出していない復号画像がフレームバッファ2にあるが、この復号画像を破棄し、次にできている復号画像がフレームバッファ0にあるので、復号画像データの読み出し開始アドレスをフレームバッファ0に設定し(4−C)、LCDデータ出力部6に表示レディ信号を出力する(5−c)。このとき、表示出力として不要になったフレームバッファ1をメモリ書き込み状態にするためにCLR1をハイレベルに変更するとともに、出力する必要がなくなったフレームバッファ2についても、CLR2をハイレベルに変更し、フレームバッファ2を書き込み可能にする(6−C)。LCDデータ出力部6では表示レディ信号を受けて、LCDデータ表示部7から出力されたフレーム同期信号から、垂直同期信号/水平同期信号を作成し、画像出力部4に出力する(7−c)。画像出力部4は垂直同期信号/水平同期信号を受けてフレームバッファ0のフレームデータを出力する(8−c)。
When a skip reproduction request is input from the
次に、制御部1から通常再生要求が入力される(3−d)と、画像復号部4は、まだ次のフレームバッファ1に対応する復号画像の復号処理が完了していないので、フレームバッファ0を復号画像の読み出し開始アドレスに設定し(4−d)、LCDデータ出力部6に表示レディ信号を出力する(5−d)と共に、フレームバッファ1に新しい復号画像がないので、CLR0をローレベルのまま保持する(6−d)。LCDデータ出力部6では表示レディ信号を受けて、LCDデータ表示部7から出力されたフレーム同期信号から、垂直同期信号/水平同期信号を作成し、画像出力部4に出力する(7−d)。画像出力部4は垂直同期信号/水平同期信号を受けてフレームバッファ0のフレームデータを出力する(8−d)。
Next, when a normal reproduction request is input from the control unit 1 (3-d), the
また、この間、タイミングt=t9で、画像復号部2では、制御部1からの復号処理要求を受けて、次の符号化画像データの復号処理を行ない、タイミングt=t10で、FLAG1をハイレベルにする(1−e)。以降の処理は、制御部1からの制御信号が通常再生要求のみの場合と同様である。
このように、本実施の形態の画像復号部2と画像出力部4では、フレームバッファを3個用意することにより、制御部1から画像出力部4への通常再生要求の中に1フレームの飛び越し再生要求が混ざる時でも、表示中のフレームバッファを確保したうえで、残る2面のフレームバッファを使って、表示出力処理とは独立に画像の復号処理を進めることができる。
During this time, at timing t = t9, the
As described above, in the
また、上記した図6および図7の場合には制御部1から画像出力部4に通常再生要求あるいは飛び越し再生要求が入力される場合を示したが、制御部1から画像出力部4には、全フレームのフレームバッファを初期化する要求が入力される場合がある。なお、通常、全フレームバッファを初期化するのは画像再生を開始する前であるが、以下に説明する図8の場合は、画像再生の途中で、フレームバッファのすべてを初期化する場合のタイミングである。
In the case of FIGS. 6 and 7 described above, the normal reproduction request or the interlaced reproduction request is input from the
図8は、図6の3個のフレームバッファがすべて初期化される場合のタイミングチャートである。
図8と図6との違いは、制御部1から画像出力部4への3番目の制御信号が通常再生要求でなく、全フレームバッファの初期化要求(3−α)となっているため、初期化要求(3−α)の入力後に次の符号化画像データの復号処理が終了するまでは、フレームデータが出力されない出力不定期間となる点、および、それに伴う画像復号部2と画像出力部4の処理内容が変更される点である。より具体的には、制御部1から画像出力部4への3番目の制御信号が全フレームのフレームバッファの初期化要求になったことで、その結果、初期化要求以降のフレームバッファ出力がずれ、それに伴って画像復号部2と画像出力部4の処理内容が変更される。
FIG. 8 is a timing chart when all the three frame buffers in FIG. 6 are initialized.
The difference between FIG. 8 and FIG. 6 is that the third control signal from the
タイミングt=t1〜t8までの入力による動作は、図6を用いて上記に説明した制御部1からの制御信号が通常再生要求のみの場合と同様であるので重複する説明を省略する。
全フレームバッファの初期化要求(3−α)が入力される時点では、FLAG0がハイレベル、FLAG1がハイレベル、FLAG2がハイレベル、CLR0がローレベル、CLR1がローレベル、および、CLR2がローレベルであり、読み出し開始アドレスはフレームバッファ1に設定されている。
The operation by the input from timing t = t1 to t8 is the same as the case where the control signal from the
At the time when the initialization request (3-α) for all frame buffers is input, FLAG0 is high level, FLAG1 is high level, FLAG2 is high level, CLR0 is low level, CLR1 is low level, and CLR2 is low level The read start address is set in the
図8のタイミング(3−α)で、制御部1から全フレームバッファ初期化要求が入力されると、画像出力部4は、CLR0、CLR1、CLR2をすべてハイレベルにし、フレームメモリ3を構成するすべてのフレームバッファをメモリ書き込み許可状態にし、読み出し開始アドレスも初期化してフレームバッファ0に設定する。一方、画像復号部2は、FLAG0、FLAG1、FLAG2をすべてローレベルにし、制御部1からの次の符号化画像データの復号処理要求待機状態にする(6−α)。このあと、復号処理が完了し、フレームバッファ0への復号画像書き込みが終了するまでの間、入力された制御部1からの通常再生要求(3−d)は無視される。
When the all-frame buffer initialization request is input from the
全初期化後、画像復号部2、画像出力部4は、フレームバッファ0、フレームバッファ1、フレームバッファ2の順番に、画像復号化処理、画像出力処理を実行する。タイミングt=t9で、画像復号部2では、制御部1からの復号処理要求を受けて、次の符号化画像データの復号処理を行ない、タイミングt=t10で、FLAG0をハイレベルにする(1−e)。FLAG0がハイレベルになったのを受けて、画像出力部4では、CLR0をローレベルにする(2−e)。制御部1から次の通常再生要求が入力される(3−e)と、画像出力部4は、復号画像データの読み出し開始アドレスをフレームバッファ0に設定する(4−e)と共に、LCDデータ出力部6に表示レディ信号を出力する(5−e)。LCDデータ出力部6では表示レディ信号を受けて、LCDデータ表示部7から入力されたフレーム同期信号から、垂直同期信号/水平同期信号を作成し、画像出力部4に出力する(7−e)。画像出力部4は垂直同期信号/水平同期信号を受けてフレームバッファ0のフレームデータを出力する(8−e)。
After all initialization, the
さらに、この間、タイミングt=t11で、画像復号部2では、制御部1からの復号処理要求を受けて、次の符号化画像データの復号処理を行ない、タイミングt=t12で、FLAG1をハイレベルにする(1−f)。FLAG1がハイレベルになったのを受けて、画像出力部4では、CLR1をローレベルにする(2−f)。制御部1から通常再生要求が入力される(3−f)と、画像出力部4は、復号画像データの読み出し開始アドレスをフレームバッファ1に設定(4−f)すると共に、LCDデータ出力部6に表示レディ信号を出力する(5−f)。このとき、CLR0をハイレベルに変更し、フレームバッファ0を書き込み可能にする(6−f)。LCDデータ出力部6では表示レディ信号を受けて、LCDデータ表示部7から入力されたフレーム同期信号から、垂直同期信号/水平同期信号を作成し、画像出力部4に出力する(7−f)。画像出力部4は垂直同期信号/水平同期信号を受けてフレームバッファ1のフレームデータを出力する(8−f)。
Further, during this period, at timing t = t11, the
このあと、タイミングt=t13で、制御部1からの復号処理要求を受けて、画像復号部2では次の符号化画像データの復号処理を行なうが、復号処理が完了するまえに、制御部1から通常再生要求が入力される(3−g)と、前の復号画像読み出し開始アドレスと、現在のフレームバッファの状態(CLR0、CLR1、CLR2)を見て、出力可能なフレームバッファを決定する。CLR2がまだハイレベル→ローレベルになっていないので、前回と同様に、復号画像読み出し開始アドレスをフレームバッファ1に設定(4−g)すると共に、LCDデータ出力部6に表示レディ信号を出力する(5−g)。ただし、このとき、CLR2がローレベルにない、つまり、次の表示の準備ができていないので、CLR1はローレベルのままにする(6−g)。LCDデータ出力部6では表示レディ信号を受けて、LCDデータ表示部7から入力されたフレーム同期信号から、垂直同期信号/水平同期信号を作成し、画像出力部4に出力する(7−g)。画像出力部4は垂直同期信号/水平同期信号を受けてフレームバッファ1のフレームデータを出力する(8−g)。
Thereafter, at timing t = t13, a decoding process request is received from the
タイミングt=t14で、画像復号部2での復号処理が完了すると、FLAG2をハイレベルにする(1−h)。FLAG2がハイレベルになったのを受けて、画像出力部4では、CLR2をローレベルにする(2−h)。制御部1から通常再生要求が入力される(3−h)と、画像出力部4は、復号画像データの読み出し開始アドレスをフレームバッファ2に設定(4−h)すると共に、LCDデータ出力部6に表示レディ信号を出力する(5−h)。このとき、CLR1をハイレベルに変更し、フレームバッファ1を書き込み可能にする(6−h)。LCDデータ出力部6では表示レディ信号を受けて、LCDデータ表示部7から入力されたフレーム同期信号から、垂直同期信号/水平同期信号を作成し、画像出力部4に出力する(7−h)。画像出力部4は垂直同期信号/水平同期信号を受けてフレームバッファ2のフレームデータを出力する(8−h)。
When the decoding process in the
また、上記した図8の場合には制御部1から画像出力部4に全フレームのフレームバッファを初期化する要求が入力される場合を示したが、制御部1から画像出力部4には、現在表示中のフレーム(現フレーム)以外の全てのフレームバッファを初期化する要求が入力される場合がある。以下に説明する図9の場合は、画像再生の途中で、現フレーム以外の全てのフレームバッファを初期化する場合のタイミングである。現フレームバッファ以外を初期化する場合は、例えば、画像再生中に、早送りや巻き戻しをする場合に、すでに復号した画像を破棄しないと表示としておかしくなる場合である。
In the case of FIG. 8 described above, a case where a request for initializing the frame buffer of all frames is input from the
図9は、図6の3個のフレームバッファのうち、現フレーム以外の全てのフレームバッファがすべて初期化される場合のタイミングチャートである。
図9と図6との違いは、制御部1から画像出力部4への3番目の制御信号が通常再生要求でなく、現フレーム以外の全フレームバッファの初期化要求(3−β)となっているため、初期化要求(3−β)の入力後に次の符号化画像データの復号処理が終了するまでは、フレームデータの読み出し開始アドレスが現フレームの読み出し開始アドレスとなる点、および、それに伴う画像復号部2と画像出力部4の処理内容が変更される点である。より具体的には、制御部1から画像出力部4への3番目の制御信号が現フレーム以外の全フレームバッファの初期化要求になったことで、その結果、初期化要求以降のフレームバッファ出力がずれ、それに伴って画像復号部2と画像出力部4の処理内容が変更される。
FIG. 9 is a timing chart when all the frame buffers other than the current frame among the three frame buffers of FIG. 6 are initialized.
The difference between FIG. 9 and FIG. 6 is that the third control signal from the
タイミングt=t1〜t8までの入力による動作は、図6を用いて上記に説明した制御部1からの制御信号が通常再生要求のみの場合と同様であるので重複する説明を省略する。
現フレーム以外の全フレームバッファの初期化要求(3−β)が入力される時点では、FLAG0がハイレベル、FLAG1がハイレベル、FLAG2がハイレベル、CLR0がローレベル、CLR1がローレベル、および、CLR2がローレベルであり、読み出し開始アドレスはフレームバッファ1に設定されている。
The operation by the input from timing t = t1 to t8 is the same as the case where the control signal from the
At the time when an initialization request (3-β) for all frame buffers other than the current frame is input, FLAG0 is high level, FLAG1 is high level, FLAG2 is high level, CLR0 is low level, CLR1 is low level, and CLR2 is at a low level, and the read start address is set in the
図9のタイミング(3−β)で、制御部1から現フレームバッファ以外初期化要求が入力されると、画像出力部4はCLR1以外をすべてハイレベルにし、フレームメモリ3を構成するフレームバッファのうち、表示出力用に設定されているフレームバッファ1以外のフレームバッファを書き込み可能状態にし、復号画像データの読み出し開始アドレスを現フレームのフレームバッファ1に設定(4−c)する。一方、画像復号部2は、現フレームバッファに対応するFLAG1以外をすべてローレベルにし、制御部1からの次の符号化画像データの復号処理要求待機状態にする(6−β)。次の符号化画像データの復号処理が完了するまでに通常再生要求が入力される(3−d)と、画像出力部4は、復号画像データの読み出し開始アドレスを現在表示中のフレームバッファ1に設定(4−d)すると共に、LCDデータ出力部6に表示レディ信号を出力する(5−d)。LCDデータ出力部6では表示レディ信号を受けて、LCDデータ表示部7から入力されたフレーム同期信号から、垂直同期信号/水平同期信号を作成し、画像出力部4に出力する(7−d)。画像出力部4は垂直同期信号/水平同期信号を受けてフレームバッファ1のフレームデータを出力する(8−d)。
When the initialization request other than the current frame buffer is input from the
現フレームバッファ以外初期化後、画像復号部2、画像出力部4は、現フレームバッファであるフレームバッファ1の次のフレームバッファから順番に、画像復号化処理、画像出力処理を実行する。タイミングt=t9で、画像復号部2では、制御部1からの復号処理要求を受けて、次の符号化画像データの復号処理を行ない、タイミングt=t10で、FLAG2をハイレベルにする(1−e)。FLAG2がハイレベルになったのを受けて、画像出力部4では、CLR2をローレベルにする(2−e)。制御部1から通常再生要求が入力される(3−e)と、画像出力部4は、復号画像データの読み出し開始アドレスをフレームバッファ2に設定(4−e)すると共に、LCDデータ出力部6に表示レディ信号を出力する(5−e)。このとき、CLR1をハイレベルに変更し、表示出力用に保持していたフレームバッファ1を書き込み可能にする(6−f)。LCDデータ出力部6では表示レディ信号を受けて、LCDデータ表示部7から入力されたフレーム同期信号から、垂直同期信号/水平同期信号を作成し、画像出力部4に出力する(7−e)。画像出力部4は垂直同期信号/水平同期信号を受けてフレームバッファ2のフレームデータを出力する(8−e)。
After initialization other than the current frame buffer, the
さらに、この間、タイミングt=t11で、画像復号部2では、制御部1からの復号処理要求を受けて、次の符号化画像データの復号処理を行ない、タイミングt=t12で、FLAG0をハイレベルにする(1−f)。FLAG0がハイレベルになったのを受けて、画像出力部4では、CLR0をローレベルにする(2−f)。制御部1から通常再生要求が入力される(3−f)と、画像出力部4は、復号画像データの読み出し開始アドレスをフレームバッファ0に設定(4−f)すると共に、LCDデータ出力部6に表示レディ信号を出力する(5−f)。このとき、CLR2をハイレベルに変更し、フレームバッファ2を書き込み可能にする(6−f)。LCDデータ出力部6では表示レディ信号を受けて、LCDデータ表示部7から入力されたフレーム同期信号から、垂直同期信号/水平同期信号を作成し、画像出力部4に出力する(7−f)。画像出力部4は垂直同期信号/水平同期信号を受けてフレームバッファ0のフレームデータを出力する(8−f)。
Further, during this period, at timing t = t11, the
このあと、タイミングt=t13で、制御部1からの復号処理要求を受けて、画像復号部2では次の符号化画像データの復号処理を行なうが、復号処理が完了するまえに、制御部1から通常再生要求が入力される(3−g)と、前の復号画像読み出し開始アドレスと、現在のフレームバッファの状態(CLR0、CLR1、CLR2)を見て、出力可能なフレームバッファを決定する。CLR1がまだハイレベル→ローレベルになっていないので、前回と同様に、復号画像読み出し開始アドレスをフレームバッファ0に設定(4−g)すると共に、LCDデータ出力部6に表示レディ信号を出力する(5−g)。ただし、このとき、CLR1がローレベルにない、つまり、次の表示の準備ができていないので、CLR0はローレベルのままにする(6−g)。LCDデータ出力部6では表示レディ信号を受けて、LCDデータ表示部7から入力されたフレーム同期信号から、垂直同期信号/水平同期信号を作成し、画像出力部4に出力する(7−g)。画像出力部4は垂直同期信号/水平同期信号を受けてフレームバッファ0のフレームデータを出力する(8−g)。
Thereafter, at timing t = t13, a decoding process request is received from the
タイミングt=t14で、画像復号部2での復号処理が完了すると、FLAG1をハイレベルにする(1−h)。FLAG1がハイレベルになったのを受けて、画像出力部4では、CLR1をローレベルにする(2−h)。制御部1から通常再生要求が入力される(3−h)と、画像出力部4は、復号画像データの読み出し開始アドレスをフレームバッファ1に設定(4−h)すると共に、LCDデータ出力部6に表示レディ信号を出力する(5−h)。このとき、CLR0をハイレベルに変更し、フレームバッファ0を書き込み可能にする(6−h)。LCDデータ出力部6では表示レディ信号を受けて、LCDデータ表示部7から入力されたフレーム同期信号から、垂直同期信号/水平同期信号を作成し、画像出力部4に出力する(7−h)。画像出力部4は垂直同期信号/水平同期信号を受けてフレームバッファ1のフレームデータを出力する(8−h)。
When the decoding process in the
このように本実施の形態1の画像再生装置は、画像復号部2による画像復号処理と画像出力部4による画像出力処理との間でフレームメモリ3を共有し、ハンドシェイク方式で通信するため、画像復号部2における画像復号処理性能と、画像出力部4における画像出力処理性能と、画像出力部4以降の構成要素とそのタイミング(グラフィックメモリ5、LCDデータ出力部6、LCDデータ表示部7)に合わせて、フレームメモリ3の容量を、例えば、最少3個のフレームバッファ分で構成することが可能であり、再生途中にフレームのコマ遅れやコマ進みがないなめらかな画像再生を得ることができる。また、本実施の形態1の画像再生装置は、フレームメモリの使用に関してハンドシェイク方式で通信しながら、画像復号部2と画像出力部4は独立に動作して画像の復号および表示を行うので、フレームメモリを効率的に使用するとともに、画像復号部2、画像出力部4についても、個々に効率的な処理が可能である。
As described above, the image reproducing apparatus according to the first embodiment shares the
また、本実施の形態1の画像再生装置は、グラフィックメモリ5の更新内容をLCDデータ表示部上のLCD表示イメージに反映させるため、LCDデータ出力部6から画像出力部4に対して、再出力要求信号を出力し、画像復号部2からの復号画像データ出力がない場合であっても画像出力を可能とするので、必要なタイミングで表示されるグラフィックデータを更新することができる。
In addition, the image reproduction apparatus according to the first embodiment re-outputs the updated contents of the
また、本実施の形態1の画像再生装置は、画像復号部2と画像出力部4においてハンドシェイク方式で通信を行なうフレームメモリ3を構成する複数のフレームバッファをリングバッファとして制御するので、画像復号部2と画像出力部4各々にとって連続した処理が可能である。
In addition, the image reproduction apparatus according to the first embodiment controls a plurality of frame buffers constituting the
また、本実施の形態1の画像再生装置は、表示出力可能フレームバッファがある場合の画像出力部4において、制御部1から制御信号としての通常再生要求がある度に、復号画像データの読み出し開始アドレスを次のフレームバッファの先頭に更新するので、制御部1から画像出力部4への通常再生要求により、再生タイミングを制御することができる。
In addition, in the image reproduction apparatus according to the first embodiment, in the
また、本実施の形態1の画像再生装置は、表示出力可能フレームバッファが複数ある場合の画像出力部4において、制御部1から制御信号として飛び越し再生要求がある度に、復号画像データの読み出し開始アドレスを、必要な飛び越しフレーム数だけ進めたフレームバッファの先頭に更新するので、制御部1から画像出力部4への飛び越し再生要求により、復号画像データ出力が、音声復号データ出力/表示出力、あるいは、画像表示出力に比べて早いタイミングで出力された場合にタイミングを調整することができる。
また、本実施の形態1の画像再生装置は、復号処理回路ブロックと表示出力処理回路ブロックが分離され、3フレーム分等の少ない記憶容量のフレームメモリでも、再生途中にフレームのコマ遅れやコマ進みがないなめらかな画像再生が可能となるので、なめらかで良好な表示出力が可能となる。
Further, in the image reproduction apparatus according to the first embodiment, in the
In the image reproducing apparatus of the first embodiment, the decoding processing circuit block and the display output processing circuit block are separated, and even with a frame memory having a small storage capacity such as three frames, frame delay and frame advance during reproduction. As a result, smooth image reproduction with no image can be achieved, and smooth and good display output is possible.
なお、本実施の形態の画像再生装置では、LCDデータ表示部7に、画像出力部4から出力された復号画像データと、グラフィックメモリ5から読み出されたグラフィック画像を合成して作成し、最終的な表示イメージを構成するLCDデータを保持するメモリを持たせた場合として説明を行なったが、本実施の形態はこれに限る物ではなく、例えば、逆に、LCDデータ表示部7に前記したメモリがなくて、LCDデータ出力部6にLCDデータを保持するメモリを持たせた場合でも適用することができる。
Note that in the image reproduction device of the present embodiment, the LCD
実施の形態2.
上記した実施の形態1では、表示部としての液晶パネルを用いたLCDデータ表示部7と、表示データ出力部としてのLCDデータ出力部6を構成要素として有する画像再生装置の場合について説明したが、例えば、テレビジョン信号の規格に準拠した信号を表示させるテレビジョン(TV)信号表示部が知られており、そのためのテレビジョン(TV)信号出力部を用いてもフレームメモリ3から読み出された復号画像データを表示させることができる。このとき、実施の形態1のLCDデータ出力部6とLCDデータ表示部7の組み合わせでは、最終的な表示イメージを構成するLCDデータを保持するメモリが、LCDデータ出力部6とLCDデータ表示部7のいずれかに存在し、表示レディ信号をきっかけにLCDのリフレッシュタイミングでLCDデータの更新を行なっていたが、実施の形態2では、テレビジョン信号の規格に準拠したタイミングで、常時、TV信号出力部から画像データが出力され、TV電話表示部に表示される。そこで、以下に説明する実施の形態2では、表示データ出力部としてTV信号出力部を用い、表示部としてTV信号表示部を用いる場合について説明する。
In the first embodiment described above, the case of an image reproducing device having the LCD
図10は、本発明の実施の形態2の画像再生装置の概略構成を示すブロック図である。
図10に示した本実施の形態2の画像再生装置が図1に示した実施の形態1の画像再生装置と構成上で異なる点は、実施の形態1のLCDデータ出力部6がTV信号出力部16に変更され、LCDデータ表示部7がTV信号表示部17に変更され、それに伴い、画像出力部4からLCDデータ出力部6に入力されていた表示レディ信号、LCDデータ出力部6から画像出力部4に入力されていた再出力要求信号、LCDデータ表示部7からLCDデータ出力部6に入力されていたフレーム同期信号が削除されている点である。また、画像出力部4aも、表示レディ信号、再出力要求信号、フレーム同期信号が無くなるため、実施の形態1の画像出力部4とは内部処理が異なる。その他の構成については実施の形態1と同様であるので、重複する説明については省略する。
FIG. 10 is a block diagram showing a schematic configuration of the image reproduction apparatus according to the second embodiment of the present invention.
The difference between the image reproducing apparatus of the second embodiment shown in FIG. 10 and the image reproducing apparatus of the first embodiment shown in FIG. 1 is that the LCD
TV信号出力部16は、その内部で、NTSCやPAL等のテレビジョン信号の規格に準拠したタイミングで垂直/水平同期信号を生成して画像出力部4aに出力することで、テレビジョン信号の規格に準拠したタイミングで表示フレームデータを受信し、TV信号表示部17に出力する。TV信号表示部17は、テレビジョン信号の規格に準拠した画像データを表示させる表示部である。
The TV
画像出力部4aは、制御部1、画像復号部2、およびフレームメモリ3との間の情報及びデータの授受については実施の形態1の画像出力部4と同様であるが、TV信号出力部16との間の情報及びデータの授受については実施の形態1の画像出力部4と異なる。また、画像出力部4aの内部処理については、例えば、図4のステップS18に示した表示レディ信号を生成して出力する処理がない点と、再出力要求信号を受信して復号画像データを再出力する処理がない点、垂直同期信号/水平同期信号のタイミングが、実施の形態1ではLCDリフレッシュタイミングに基づいているのに対して、テレビジョン信号の規格に準拠したタイミングに基づいている点、以外は同様である。
The
画像出力部4aは、図2の内部ブロック図では、表示レディ信号と再出力要求信号が無くなることから、出力端子51と入力端子53が無くなる。その他の構成は同様である。画像出力部4aは、図4のフローチャートでは、ステップS18が無くなる。その他の動作は同様である。図6〜図9に示した通常再生要求、飛び越し再生要求、全フレームバッファ初期化要求、現フレームバッファ以外初期化要求のタイミングチャートについては、各々(k)の表示レディ信号が無くなり、(l)のLCDリフレッシュタイミングの代わりに、TV信号出力部16の内部で生成されたフレーム同期タイミング、もしくは、同様に内部で生成されたフィールド同期タイミングとなる。
In the internal block diagram of FIG. 2, the
図10および図2を参照して本実施の形態の画像再生装置の全体的な動作を説明すると以下のようになる。
図2の入力端子42を介してTV信号出力部16から入力された水平同期信号は、水平画素数カウンタ45に入力され、水平画素数カウンタ45を水平同期タイミングで初期化する。同様に、入力端子41を介してTV信号出力部16から入力された垂直同期信号は、ライン数カウンタ44に入力され、ライン数カウンタ44を垂直同期タイミングで初期化する。水平画素数カウンタ45、ライン数カウンタ44には、入力端子40から入力された画素クロックが入力される。また、制御部1からは、垂直同期信号からの水平同期信号先頭位置、垂直有効画素数(垂直ライン数とも表現する。)、水平同期信号からの有効画素先頭位置、水平有効画素数を入力端子43を介して入力される。水平画素数カウンタ45では、水平同期信号からの有効画素数先頭位置から、水平有効画素数までカウントアップし、水平有効画素数までカウントすると、ラインカウンタ44を1つアップする。ライン数カウンタ44では、垂直同期信号から水平同期信号先頭位置から、垂直有効画素数までカウントアップする。水平画素数カウンタ45と、ライン数カウンタ44のカウント値はメモリ読み出し制御部47に入力され、ライン数カウンタ44と水平画素数カウンタ45のカウント値がそれぞれ、垂直有効画素数、水平有効画素数になるまで、メモリ読み出しを有効とし、フレームメモリ3から復号画像データを読み出す。このときの復号画像データの読み出し開始アドレスは、復号完了情報受信時に設定を行なったアドレスである。
The overall operation of the image reproduction apparatus of the present embodiment will be described with reference to FIGS. 10 and 2 as follows.
The horizontal synchronization signal input from the TV
図2の入力端子50を介してフレームメモリ3から読み出された復号画像データは、出力端子52を介してTV信号出力部16に出力される。TV信号出力部16では、画像出力部4aから読み出したタイミングに合わせて、グラフィックメモリ5からグラフィック画像を読み出し合成する。なお、このグラフィック画像5はあらかじめ、TV信号出力部16での画像合成処理の前に、制御部1からグラフィックメモリ5に格納される。TV信号出力部16で合成された復号画像データとグラフィック画像はTVイメージを構成し、TVデータとして、TV信号表示部17に出力される。
The decoded image data read from the
このように本実施の形態2の画像再生装置は、画像復号部2による画像復号処理と画像出力部4aによる画像出力処理との間でフレームメモリ3を共有し、ハンドシェイク方式で通信するため、画像復号部2における画像復号処理性能と、画像出力部4aにおける画像出力処理性能と、画像出力部4a以降の構成要素とそのタイミング(グラフィックメモリ5、TV信号出力部16、TV信号表示部17)に合わせて、フレームメモリ3の容量を、例えば、最少3個のフレームバッファ分で構成することが可能であり、再生途中にフレームのコマ遅れやコマ進みがないなめらかな画像再生を得ることができる。また、本実施の形態2の画像再生装置は、フレームメモリの使用に関してハンドシェイク方式で通信しながら、画像復号部2と画像出力部4aは独立に動作して画像の復号および表示を行うので、フレームメモリを効率的に使用するとともに、画像復号部2、画像出力部4aについても、個々に効率的な処理が可能である。
As described above, the image reproduction apparatus according to the second embodiment shares the
なお、上記した各実施の形態では、フレームメモリ3を3個のフレームバッファから構成したが、本発明はこれに限られるものではなく、例えば、画像復号部2による画像復号処理と、画像出力部4(あるいは、画像出力部4a)、LCDデータ出力部6、LCDデータ表示部7を含めた画像出力処理(画像表示処理)の処理時間に応じて、フレームバッファ数を増減させてもよい。例えば、画像復号処理に比べて、画像出力処理が遅い場合などには、フレーム飛び越しによる画像の間引き処理がより多く必要となるので、フレームバッファ数を増やしても良い。
In each of the above embodiments, the
また、上記した各実施の形態では、再生する対象となる画像が動画像である場合について説明したが、本発明はこれに限らず、例えば、Motion JPEG等の準動画像でも上記した効果を得ることができ、また、JPEG等の静止画像の表示切替時等に適用しても効果を得ることができる。 Further, in each of the above-described embodiments, the case where the image to be reproduced is a moving image has been described. However, the present invention is not limited to this, and the above-described effect can be obtained even with a quasi-moving image such as Motion JPEG In addition, the effect can be obtained even when it is applied at the time of switching the display of a still image such as JPEG.
また、本発明のハンドシェイク方式で通信する方法は、上記した各実施の形態に記載した方法に限るものではなく、例えば、ビット極性を逆にしてもよい。また、本発明の復号完了情報は、上記した各実施の形態では画像復号部2側で生成して出力を保持するものとして記載したが、本発明はこの構成に限るものではなく、例えば、更新後の復号完了情報については、画像出力部4(あるいは、画像出力部4a)側で保持するように構成してもよい。また、本発明のメモリ書き込み禁止/許可情報は、上記した各実施の形態では画像出力部4(あるいは、画像出力部4a)側で保持するものとして構成したが、これについても、本発明はこの構成に限るものではなく、例えば、更新後のメモリ書き込み禁止/許可情報については、画像復号部2側で保持するように構成してもよい。
Further, the method of communication using the handshake method of the present invention is not limited to the method described in each of the above embodiments, and for example, the bit polarity may be reversed. Further, the decoding completion information of the present invention is described as being generated on the
1 制御部、 2 画像復号部、 3 フレームメモリ、 4、4a 画像出力部、 5 グラフィックメモリ、 6 LCDデータ出力部、 7 LCDデータ表示部、 8 音声復号部、 9 音声出力部、 16 TV信号出力部、 17 TV信号表示部、 40〜43、50、53 入力端子、 44 ライン数カウンタ、 45 水平画素数カウンタ、 47 メモリ読み出し制御部、 47a (表示フレームの)読み出し開始アドレス記憶部、 47b (フレーム単位)全読み出し開始アドレス記憶部、 48、49、51、52 出力端子。
1 control unit, 2 image decoding unit, 3 frame memory, 4, 4a image output unit, 5 graphic memory, 6 LCD data output unit, 7 LCD data display unit, 8 audio decoding unit, 9 audio output unit, 16 TV signal output Unit, 17 TV signal display unit, 40 to 43, 50, 53 input terminal, 44 line number counter, 45 horizontal pixel number counter, 47 memory read control unit, 47a (display frame) read start address storage unit, 47b (frame) Unit) All read start address storage section, 48, 49, 51, 52 Output terminal.
Claims (10)
前記制御部からの復号処理要求により、符号化画像データを復号してフレーム毎の復号画像データを生成すると共に、該復号が完了する毎に復号完了情報を出力する画像復号部と、
前記復号画像データを所定フレーム数分記憶する記憶領域を有し、前記復号画像データをフレーム毎に格納するフレームメモリと、
前記復号完了情報の入力により、読み出し可能な前記復号画像データを前記フレームメモリから読み出すための読み出し開始アドレスを設定すると共に、未出力状態あるいは保持状態にある復号画像データに相当する記憶領域への書込を禁止する情報を、破棄可能状態にある復号画像データに相当する記憶領域への書込を許可する情報と共に、前記画像復号部に出力して、前記書込みを禁止する情報によって書込みが禁止されている前記記憶領域への前記復号画像データの書込みを前記画像復号部に実行させず、前記書込みを許可する情報によって書込みが許可されている前記記憶領域への前記復号画像データの書込みを前記画像復号部に実行させ、前記制御部からの画像再生要求が入力されたときに、入力された垂直/水平同期信号に基づいて、読み出し開始アドレスに設定された復号画像データを前記フレームメモリから1フレーム分読み出して出力する画像出力部と、
画像データを表示手段にあわせて前記画像出力部から出力させるための前記垂直/水平同期信号を発生させる表示データ出力部と
を備え、
前記画像復号部が復号画像データを前記フレームメモリに書き込む動作と、前記画像出力部が前記フレームメモリから復号画像データを読み出す動作とは、各々独立して動作が可能であり、前記フレームメモリの記憶領域の使用については前記画像復号部と前記画像出力部でハンドシェイク方式で通信して管理する
ことを特徴とする画像再生装置。 A control unit that performs a decoding process control for outputting a decoding process request for encoded image data and an output process control for outputting an image reproduction request for decoded image data;
In response to a decoding process request from the control unit, the encoded image data is decoded to generate decoded image data for each frame, and an image decoding unit that outputs decoding completion information every time the decoding is completed;
A frame memory for storing the decoded image data for a predetermined number of frames, and storing the decoded image data for each frame;
By inputting the decoding completion information, a read start address for reading the readable decoded image data from the frame memory is set, and writing to the storage area corresponding to the decoded image data in the unoutput state or the hold state is performed. The information prohibiting writing is output to the image decoding unit together with the information allowing the writing to the storage area corresponding to the decoded image data in the discardable state, and the writing is prohibited by the information prohibiting the writing. The decoding of the decoded image data is not performed by the image decoding unit without writing the decoded image data to the storage area, and the writing of the decoded image data to the storage area is permitted by the information that permits the writing. When the image reproduction request is input from the control unit, the decoding unit executes the image based on the input vertical / horizontal synchronization signal. Te, an image output unit for outputting the decoded image data set in the read start address and read one frame from the frame memory,
A display data output unit for generating the vertical / horizontal synchronization signal for outputting image data from the image output unit in accordance with display means ,
The operation in which the image decoding unit writes the decoded image data into the frame memory and the operation in which the image output unit reads out the decoded image data from the frame memory can operate independently of each other. The use of the area is managed by communicating with a handshake method between the image decoding unit and the image output unit .
前記復号完了情報には、表示出力可能なフレームバッファの番号情報を含み、
前記画像出力部は、表示出力可能なフレームバッファがある場合に、該表示出力可能フレームバッファから復号画像データを読み出して出力し、
前記フレームメモリにおける書込が許可される記憶領域の情報は、書込可能なフレームバッファ番号を含み、
前記画像復号部は、前記書込可能なフレームバッファがある場合に画像の復号処理を実行する
ことを特徴とする請求項1に記載の画像再生装置。 The frame memory is composed of a plurality of frame buffers,
The decoding completion information includes frame buffer number information that can be displayed and output,
When there is a frame buffer capable of display output, the image output unit reads out and outputs decoded image data from the display output capable frame buffer,
The information of the storage area where writing in the frame memory is permitted includes a writable frame buffer number,
The image reproduction apparatus according to claim 1, wherein the image decoding unit executes an image decoding process when there is the writable frame buffer.
ことを特徴とする請求項2に記載の画像再生装置。 When the image reproduction request is a normal reproduction request and there is a display output capable frame buffer, the image output unit uses the currently displayed frame as a reference every time a normal reproduction request is input. The image reproduction apparatus according to claim 2, wherein the read start address of the decoded image data is updated to the head of the next frame buffer.
ことを特徴とする請求項2に記載の画像再生装置。 When the image reproduction request is an interlaced reproduction request and there are a plurality of display output-capable frame buffers, the image output unit uses the currently displayed frame as a reference every time an interlaced reproduction request is input. The image reproduction apparatus according to claim 2, wherein the read start address of the decoded image data is updated to the head of the frame buffer in the order advanced by the number of skipped frames.
ことを特徴とする請求項2から4の何れか1項に記載の画像再生装置。 5. The image reproduction device according to claim 2, wherein the frame buffer includes a frame buffer having a storage capacity capable of storing decoded image data of at least three reproduction image sizes.
ことを特徴とする請求項2から4の何れか1項に記載の画像再生装置。 5. The image reproduction according to claim 2, wherein the frame buffer number is cyclically controlled by the image decoding unit and the image output unit to write and read decoded image data. apparatus.
前記表示部は、液晶を用いた表示部であり、液晶のリフレッシュタイミングに基づくフレーム同期信号を出力し、
前記画像出力部は、表示出力可能なフレームバッファがある場合で、前記復号完了情報の入力後の前記制御部からの画像再生要求が入力した場合に、前記表示出力可能フレームバッファから復号画像データを読み出す前に、前記液晶の表示部への画像出力が可能であることを示す表示レディ信号を出力し、
前記表示データ出力部は、前記表示レディ信号の入力により前記フレーム同期信号の入力に基づく前記垂直/水平同期信号を生成して前記画像出力部に出力することで、液晶用の表示データを得て表示部に出力する
ことを特徴とする請求項2から6の何れか1項に記載の画像再生装置。 A display unit for displaying the display data output from the display data output unit;
The display unit is a display unit using liquid crystal, and outputs a frame synchronization signal based on the refresh timing of the liquid crystal,
The image output unit, when there is a frame buffer capable of display output, and when an image reproduction request is input from the control unit after input of the decoding completion information, decodes image data from the display output possible frame buffer. Before reading, output a display ready signal indicating that the image output to the liquid crystal display unit is possible,
The display data output unit generates display data for liquid crystal by generating the vertical / horizontal synchronization signal based on the input of the frame synchronization signal and outputting the generated signal to the image output unit by inputting the display ready signal. image reproducing apparatus according to any one of claims 2 to 6, and outputting to the display unit.
前記表示データ出力部が前記画像出力部から出力されたフレーム毎の復号画像データに、前記グラフィックメモリから読み出されたグラフィックデータを合成して、該合成結果の表示データを前記液晶の表示部に出力し、
前記グラフィックメモリのグラフィックデータが更新された場合、前記表示データ出力部は、前記画像出力部に再出力要求信号を出力し、
前記画像出力部は、前記再出力要求信号が入力したとき、要求されたフレームの復号画像データを前記フレームメモリから読み出して出力する
ことを特徴とする請求項7に記載の画像再生装置。 A graphic memory for storing graphic data to be combined with the decoded image data output from the image output unit;
The display data output unit combines the decoded image data for each frame output from the image output unit with the graphic data read from the graphic memory, and displays the combined display data on the liquid crystal display unit. Output,
When the graphic data of the graphic memory is updated, the display data output unit outputs a re-output request signal to the image output unit,
8. The image reproducing apparatus according to claim 7 , wherein when the re-output request signal is input, the image output unit reads out and outputs decoded image data of a requested frame from the frame memory.
前記表示部は、テレビジョン信号の規格に準拠した信号を表示させる表示部であり、
前記表示データ出力部は、テレビジョン信号の規格に準拠したタイミングで前記垂直/水平同期信号を生成して前記画像出力部に出力することで、テレビジョン信号の規格に準拠した表示データを得て表示部に出力する
ことを特徴とする請求項1から6の何れか1項に記載の画像再生装置。 A display unit for displaying the display data output from the display data output unit;
The display unit is a display unit that displays a signal that conforms to the standard of a television signal,
The display data output unit generates display data compliant with the television signal standard by generating the vertical / horizontal synchronization signal at a timing compliant with the television signal standard and outputting the generated signal to the image output unit. image reproducing apparatus according to any one of 6 claim 1, characterized in that the output to the display unit.
画像復号部で画像を復号する際には、フレーム毎の復号画像データを生成する毎に復号完了情報を出力し、
画像出力部では、前記復号完了情報の入力により、読み出し可能な前記復号画像データを前記フレームメモリから読み出すための読み出し開始アドレスを設定すると共に、未出力状態あるいは保持状態にある復号画像データに相当する記憶領域への書込を禁止する情報を、破棄可能状態にある復号画像データに相当する記憶領域への書込を許可する情報と共に、前記画像復号部に出力して、前記書込みを禁止する情報によって書込みが禁止されている前記記憶領域への前記復号画像データの書込みを前記画像復号部に実行させず、前記書込みを許可する情報によって書込みが許可されている前記記憶領域への前記復号画像データの書込みを前記画像復号部に実行させ、前記制御部からの画像再生要求が入力されたときに、入力された垂直/水平同期信号に基づいて、読み出し開始アドレスに設定された復号画像データを前記フレームメモリから1フレーム分読み出して出力し、
表示データ出力部では、画像データを表示させるための前記垂直/水平同期信号を前記画像出力部に出力し、
前記画像復号部が復号画像データを前記フレームメモリに書き込む動作と、前記画像出力部が前記フレームメモリから復号画像データを読み出す動作とは、各々独立して動作が可能であり、前記フレームメモリの記憶領域の使用については前記画像復号部と前記画像出力部でハンドシェイク方式で通信して管理する
ことを特徴とする画像再生装置のフレームメモリ制御方法。 The image decoding unit decodes the encoded image data to generate decoded image data for each frame, stores the decoded image data for each frame in a frame memory, and when an image reproduction request is input, the image output unit Decoded image data for each frame is read from the frame memory for each frame and output to a display data output unit. The display data output unit outputs a vertical / horizontal synchronization signal for output from the image output unit in accordance with display means. A frame memory control method for an image reproducing device to be generated, comprising:
When the image decoding unit decodes the image, the decoding completion information is output every time the decoded image data for each frame is generated,
The image output unit sets a read start address for reading out the readable decoded image data from the frame memory by inputting the decoding completion information, and corresponds to decoded image data in an unoutput state or a holding state. Information for prohibiting writing to the image decoding unit together with information for permitting writing to the storage area corresponding to the decoded image data in the discardable state together with information for prohibiting writing to the storage area The decoded image data to the storage area that is allowed to be written by the information that permits the writing without causing the image decoding unit to execute the writing of the decoded image data to the storage area that is prohibited to be written by When the image decoding request is input from the control unit, the input vertical / water is input. Based on the synchronization signal, the decoded image data set in the reading start address and outputs the read one frame from the frame memory,
The display data output unit outputs the vertical / horizontal synchronization signal for displaying the image data to the image output unit ,
The operation in which the image decoding unit writes the decoded image data into the frame memory and the operation in which the image output unit reads out the decoded image data from the frame memory can operate independently of each other. A method for controlling a frame memory of an image reproducing apparatus, wherein the use of a region is managed by communicating with a handshake method between the image decoding unit and the image output unit .
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2003309996A JP4475900B2 (en) | 2003-09-02 | 2003-09-02 | Image playback device and frame memory control method for image playback device |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2003309996A JP4475900B2 (en) | 2003-09-02 | 2003-09-02 | Image playback device and frame memory control method for image playback device |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2005080077A JP2005080077A (en) | 2005-03-24 |
JP4475900B2 true JP4475900B2 (en) | 2010-06-09 |
Family
ID=34411994
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2003309996A Expired - Fee Related JP4475900B2 (en) | 2003-09-02 | 2003-09-02 | Image playback device and frame memory control method for image playback device |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP4475900B2 (en) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN117499601B (en) * | 2024-01-02 | 2024-04-05 | 上海励驰半导体有限公司 | Method for calling multi-camera data for SoC |
-
2003
- 2003-09-02 JP JP2003309996A patent/JP4475900B2/en not_active Expired - Fee Related
Also Published As
Publication number | Publication date |
---|---|
JP2005080077A (en) | 2005-03-24 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
ES2664860T3 (en) | Performing trick play functions (non-standard playback) on a digital video recorder with efficient use of resources | |
JP5502436B2 (en) | Video signal processing device | |
JP4958993B2 (en) | Video display device and control method thereof | |
JP2011055148A (en) | Video combining device, video display apparatus, and video combining method | |
US6975309B2 (en) | Display driver, and display unit and electronic instrument using the same | |
JP5524193B2 (en) | Media stream processing | |
JP2007336520A (en) | Portable communication terminal and image displaying method | |
KR20130054901A (en) | Method for moving image reproduction processing and mobile information terminal using the method | |
JP2009111932A (en) | Moving image decoding device | |
JP2008072244A (en) | Video display system, video display device, its control method, and program | |
WO2012012936A1 (en) | Video picture display device and method | |
KR20190050714A (en) | A METHOD AND APPARATUS FOR ENCODING/DECODING 360 Virtual Reality VIDEO | |
US9218848B1 (en) | Restructuring video streams to support random access playback | |
JP4475900B2 (en) | Image playback device and frame memory control method for image playback device | |
JP2002218472A (en) | Device and method for decoding variable image rate | |
US8736668B2 (en) | Electronic apparatus and image processing method | |
JP4661652B2 (en) | Decoding method and decoding apparatus | |
JP2006191538A (en) | Compressed stream decoding instrument and compressed stream decoding method | |
WO2013076778A1 (en) | Image transmitting apparatus, image receiving apparatus, image transmitting method, and image receiving method | |
JP2001231035A (en) | Decoding synchronous controller, decoder, and decode synchronization control method | |
EP1746834A2 (en) | Systems, methods, and apparatus for trick mode | |
EP1755343A1 (en) | Signal reproducing device | |
US20120257817A1 (en) | Image output apparatus | |
JP4164966B2 (en) | MPEG image display control method and apparatus | |
KR101336820B1 (en) | Apparatus and method for decoding specialized multi-channel trick mode |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20070327 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20070510 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20070703 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20070828 |
|
A911 | Transfer of reconsideration by examiner before appeal (zenchi) |
Free format text: JAPANESE INTERMEDIATE CODE: A911 Effective date: 20070912 |
|
A912 | Removal of reconsideration by examiner before appeal (zenchi) |
Free format text: JAPANESE INTERMEDIATE CODE: A912 Effective date: 20080620 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20100309 |
|
R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130319 Year of fee payment: 3 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130319 Year of fee payment: 3 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20140319 Year of fee payment: 4 |
|
LAPS | Cancellation because of no payment of annual fees |