WO2009081708A1 - 端末装置、端末装置の制御方法、及び記録媒体 - Google Patents

端末装置、端末装置の制御方法、及び記録媒体 Download PDF

Info

Publication number
WO2009081708A1
WO2009081708A1 PCT/JP2008/071986 JP2008071986W WO2009081708A1 WO 2009081708 A1 WO2009081708 A1 WO 2009081708A1 JP 2008071986 W JP2008071986 W JP 2008071986W WO 2009081708 A1 WO2009081708 A1 WO 2009081708A1
Authority
WO
WIPO (PCT)
Prior art keywords
data
decoder
nal unit
terminal device
standard
Prior art date
Application number
PCT/JP2008/071986
Other languages
English (en)
French (fr)
Inventor
Kazuma Nachi
Shinichi Yamada
Original Assignee
Nec Corporation
Nec Electronics Corporation
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nec Corporation, Nec Electronics Corporation filed Critical Nec Corporation
Priority to US12/747,787 priority Critical patent/US8423859B2/en
Priority to JP2009547011A priority patent/JP5522725B2/ja
Publication of WO2009081708A1 publication Critical patent/WO2009081708A1/ja

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • H04N19/89—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving methods or arrangements for detection of transmission errors at the decoder
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/42—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards

Definitions

  • the present invention relates to a terminal device, a terminal device control method, and a recording medium.
  • a content playback device can be cited as a technology related to this terminal device.
  • This content playback apparatus plays back content distributed from the server that stores the content via the Internet.
  • An example of the content playback apparatus is described in Patent Document 1.
  • the content reproduction apparatus disclosed in Patent Document 1 is “a content reproduction apparatus equipped with a decoder and having a function of decoding content data received from a content storage server via a network and reproducing the content related to the content data.
  • the content reproduction apparatus is equipped with a soft encoder that can be updated appropriately as firmware.
  • a soft encoder that can be updated appropriately as firmware.
  • the received music data is sent to the decoder and the music is played back.
  • the received music data is a codec that is not supported by the coder
  • the received music data is encoded into the music data of the codec supported by the decoder in the soft encoder, and then sent to the decoder. Play music. JP 2007-215099 A
  • the data stream received depending on the reception sensitivity of the terminal device includes an error.
  • decoding the error stream as it is may cause image distortion, stop updating the image, or cause the hardware (also called HW) to be in an error state. For this reason, decoding of the error stream is not preferable.
  • the existing media playback HW cannot perform error correction specialized for a specific digital broadcast.
  • a digital broadcast receiving terminal using HW it takes a considerable amount of time to replace / modify only the image decoder HW (hard decoder) with a digital broadcast specific one.
  • the optimal image stream error correction algorithm may differ depending on the digital broadcasting system, and mounting with HW has a problem such as being wasteful.
  • an object of the present invention is to provide a terminal device, a control method for the terminal device, and a recording medium that can perform error correction without changing hardware.
  • the device performs error correction by analyzing the encoded data in the data stream on software in a terminal device that receives a data stream composed of NAL Unit by a hard decoder compliant with the H.264 standard. It is characterized by comprising error correction means for input to a later hard decoder.
  • the method of the present invention analyzed the encoded data in the data stream and corrected the error in the control method of the terminal device that receives the data stream consisting of NAL Unit by the hard decoder compliant with the H.264 standard. It is characterized by being input to the rear hard decoder.
  • the recording medium of the present invention is a recording medium in which a control program of a terminal device that receives a data stream consisting of NAL units by a hard decoder compliant with the H.264 standard is recorded, and the encoded data in the data stream is recorded on a computer. And a control program for executing a process of performing error correction, a process of performing error correction, and a process of inputting to the hard decoder after the error correction process.
  • the present invention it is possible to provide a terminal device capable of correcting an error without changing hardware, a control method for the terminal device, and a recording medium.
  • the terminal device replaces and modifies the existing H.264 decoder HW as media playback HW, and replaces the H.264 decoder HW with an H.264 simple (soft) encoder and an H.264 encoder before the H.264 decoder HW.
  • the problem is solved by installing 264 simple (software) decoder. Before inputting the stream to the H.264 decoder HW, perform error correction without changing the existing H.264 decoder HW by analyzing the stream with a simple (soft) decoder, and normal image output Obtainable.
  • this terminal device can use the existing H.264 Decoder for media playback as it is, can perform error correction without changing the media playback HW, and can correct errors by re-encoding the stream. There is a feature in performing.
  • An embodiment of a terminal device is a terminal device that receives a data stream composed of NAL units by a hard decoder compliant with the H.264 standard, and analyzes encoded data in the data stream on software. And error correction means for performing error correction and inputting the data to a hard decoder described later.
  • the encoded data in the data stream is analyzed on the software and error correction is performed.
  • error correction means for input to the hard decoder afterwards, it takes time to correct the hard decoder by performing analysis and error correction with the soft decoder and soft encoder before inputting the data stream to the hard decoder.
  • a normal output image can be obtained by using an existing hard decoder for media reproduction as it is and performing error correction. That is, error correction can be performed without changing hardware.
  • the error correction means includes a software decoder for decoding data and checking for the presence of an error, and software for correcting an erroneous parameter to an appropriate parameter.
  • An encoder and a software control unit that inputs corrected data to a hard decoder and controls the software decoder and the software encoder are provided.
  • the software control unit determines whether the data has a specific NAL unit, and if the data is not a specific NAL unit Inputs the data to the hard decoder, and if the data is a specific NAL unit, the soft decoder decodes a part of the data to determine whether the specific NAL unit is in violation of the specified standard. If the NAL Unit does not violate the specified standard, the data is input to the hard decoder, and if the specific NAL Unit violates the specified standard, the noncompliant parameter is corrected to an appropriate value. And a soft decoder for encoding the modified parameter.
  • the data is image data for one-segment broadcasting or image data for digital terrestrial broadcasting
  • the predetermined standard is image data for one-segment broadcasting or digital terrestrial broadcasting. It is a standard related to image data for a user.
  • One embodiment of a control method for a terminal device is a method for controlling a terminal device that receives a data stream consisting of NAL Units by a hard decoder compliant with the H.264 standard. The data is analyzed, error-corrected, and then input to a hard decoder.
  • the encoded data in the data stream is analyzed on the software and error correction is performed.
  • error correction means for input to the hard decoder afterwards, it takes time to correct the hard decoder by performing analysis and error correction with the soft decoder and soft encoder before inputting the data stream to the hard decoder.
  • a normal output image can be obtained by using an existing hard decoder for media reproduction as it is and performing error correction. That is, error correction can be performed without changing hardware.
  • another embodiment of the method for controlling a terminal device decodes data, checks for errors, corrects an incorrect parameter to an appropriate parameter, and stores the corrected data in hardware. Input to a decoder.
  • another embodiment of the method for controlling a terminal device determines whether or not there is a specific NAL unit in the data, and if the data is not a specific NAL unit, When the data is input to the decoder and the data is a specific NAL unit, the soft decoder decodes a part of the data to determine whether the specific NAL unit is in violation of the specified standard. If the specified standard is not violated, the data is input to the hard decoder, and if a specific NAL Unit violates the specified standard, the parameter that violates the standard is corrected to an appropriate value. Is encoded by a soft decoder.
  • the data is image data for one-segment broadcasting or image data for digital terrestrial broadcasting
  • the predetermined standard is image data for one-segment broadcasting or terrestrial It may be a standard related to image data for digital broadcasting.
  • Control program and recording medium The terminal device of the present invention described above is realized by a control program that causes a computer to execute processing.
  • Examples of the computer include general-purpose computers such as personal computers and workstations, but the present invention is not limited to this.
  • One embodiment of a control program for a terminal device is a control program for a terminal device that receives a data stream consisting of NAL units by a hard decoder compliant with the H.264 standard. On the computer, (1) Processing to analyze the encoded data in the data stream (2) Error correction processing (3) A process of inputting to the hard decoder after the error correction process is executed.
  • the encoded data in the data stream is analyzed on the software and error correction is performed.
  • error correction means for input to the hard decoder afterwards, it takes time to correct the hard decoder by performing analysis and error correction with the soft decoder and soft encoder before inputting the data stream to the hard decoder.
  • a normal output image can be obtained by using an existing hard decoder for media reproduction as it is and performing error correction. That is, error correction can be performed without changing hardware.
  • the data is image data for one-seg broadcasting or image data for digital terrestrial broadcasting
  • the predetermined standard is image data for one-seg broadcasting.
  • it may be a standard related to image data for terrestrial digital broadcasting.
  • the terminal device of the present invention can be realized anywhere as long as there is a computer environment capable of executing the control program.
  • a control program may be stored in a computer-readable recording medium.
  • the recording medium include a computer-readable recording medium such as a CD-ROM (Compact Disc Read Only Memory), a flexible disk (FD), a CD-R (CD Recordable), and a DVD (Digital Versatile Disk).
  • Semiconductor memory such as flash memory, RAM (Random Access Memory), ROM (Read Only Memory), Fe RAM (ferroelectric memory), and HDD (Hard Disc Drive).
  • FIG. 1 shows a block diagram of an embodiment of a terminal device to which the terminal device control method according to the present invention is applied.
  • reference numeral 1 denotes a digital broadcast reception information terminal as a terminal device for receiving a digital broadcast, which is equipped with a media playback HW (H.264 decoder HW) 4.
  • a software decoder 3 and a software encoder 2 and a software control unit 5 for controlling the software encoder 2, the software decoder, and the media playback HW 4 are mounted before the media playback HW 4.
  • a system part essential for digital broadcasting, such as a tuner or DEMUX (demultiplexer) is referred to as a digital broadcast receiving system unit 6.
  • the signal flow varies depending on the data, and is a solid line arrow and a wavy line arrow.
  • the soft decoder 2 has a function of decoding data and checking for errors.
  • the soft encoder 3 has a function of correcting an incorrect parameter to an appropriate parameter.
  • An example of the media playback HW 4 as a hard decoder is an existing H.264 decoder.
  • the software control unit 5 is formed of, for example, a microprocessor, and causes the software decoder 3 to encode the modified parameters and also performs overall control of the digital broadcast receiving terminal 1.
  • the software control unit 5 determines whether or not the data has a specific NAL Unit, and inputs data to the hard decoder if the data is not a specific NAL Unit, and the data is a specific NARNAL Unit.
  • a soft decoder decodes part of the data to determine whether a specific NAL Unit violates the standard. If a specific NAL Unit does not violate the standard, the data is transferred to the hard decoder. It consists of software that consists of a means to input and correct a parameter that violates the standard to an appropriate value when a specific NAL Unit violates the standard.
  • These soft encoder 3, soft decoder 4, and software control unit 5 constitute error correction means.
  • FIG. 2 is an example of a flowchart for explaining a control method of the terminal device according to the present invention.
  • the software control unit 5 having error correction control software receives the H.264 stream from the digital broadcast system 6 in the digital broadcast receiving terminal (step S1).
  • the control software unit 5 determines whether or not it is a specific (error correctable) NAL Unit (step S2). If error correction is possible, the stream is passed to the soft decoder 2 and a part of the stream is decoded by the soft decoder 2 (step S3).
  • step S4 Check the parameter values of specific NAL units such as NAL header, AUD (Access Unit Delimiter), SPS (Sequence Parameter Set), PPS (Picture Parameter Set), etc., and check whether they violate the standard (step S4 ). If the standard is violated (step S4 / Yes), the parameter value is corrected to an appropriate value (step S5). The corrected value is encoded by the soft encoder 3 (S6). As a result, the error mixed stream is corrected to an appropriate stream. The error-corrected stream is input to the existing media playback HW 4 (step S7) and decoded (step S8). Due to the error-corrected stream, a normal output image is obtained from the media playback HW 4 (step S9).
  • NAL units such as NAL header, AUD (Access Unit Delimiter), SPS (Sequence Parameter Set), PPS (Picture Parameter Set), etc.
  • the media playback HW4 is analyzed without error by correcting with the soft decoder and soft encoder before the stream is input to the media playback HW4.
  • a normal output image can be obtained by implementing error correction by using the media playback HW4 for media playback as it is.
  • the error correction of the H.264 stream which is an image stream for one-segment broadcasting
  • the present invention is not limited to this, and may be applied to processing of images for terrestrial digital broadcasting. Good.
  • Patent Document 1 is an invention related to a general technique called a music transcoder, for example, converting MP3 of a first format into a second format AAC. It does not change any parameters.
  • the invention described in Patent Document 1 does not correct an error, but is merely a format conversion, and an error included cannot be converted.
  • a decoder capable of decoding the second format is already required, but Patent Document 1 does not describe this. If the decoder is included, the system is not necessary in the first place.
  • the present application corrects an error of an image stream, and digital broadcasting such as 1Seg includes an error depending on the reception sensitivity of the terminal, so that the error is corrected and a normal image is displayed.
  • digital broadcasting such as 1Seg includes an error depending on the reception sensitivity of the terminal, so that the error is corrected and a normal image is displayed.
  • H.264 which is the original one-segment image stream, can be decoded by an HW decoder.
  • HW takes time to change. This application has the merit that HW is not changed.
  • the encoded data in the data stream is analyzed on software,
  • the hard decoder is corrected by performing analysis and error correction with the soft decoder and soft encoder before inputting the data stream to the hard decoder.
  • a normal output image can be obtained by performing error correction by using an existing hard decoder for media playback as it is without spending time. That is, error correction can be performed without changing hardware.
  • Terminal device digital broadcast receiving terminal
  • Soft decoder 3
  • Soft encoder 4
  • Media playback HW 5
  • Software control unit 6

Abstract

　ハードウェアの変更を行うことなくエラー訂正が可能な端末装置、端末装置の制御方法、及び記録媒体を提供する。 　H.264規格に準拠したハードデコーダでNAL Unitからなるデータストリームを受信する端末装置において、データストリーム中の符号化されたデータをソフトウェア上で解析し、エラー訂正を行った後ハードデコーダに入力するエラー訂正手段を備える。

Description

端末装置、端末装置の制御方法、及び記録媒体
　本発明は、端末装置、端末装置の制御方法、及び記録媒体に関する。
　近年、地上デジタルテレビジョン放送やワンセグ（１セグ：携帯電話・移動体端末向けの１セグメント部分受信サービス）放送（以下、共にデジタル放送という）の開始に伴い、デジタル放送のような画像ストリームを受信することができる端末装置が開発されている。
　また、この端末装置に関連した技術としてコンテンツ再生装置が挙げられる。このコンテンツ再生装置は、コンテンツを蓄積したサーバからインターネットを介して配信されるコンテンツを再生するものであり、コンテンツ再生装置の一例が特許文献１に記載されている。
　特許文献１のコンテンツ再生装置は、「デコーダを装備し、コンテンツ蓄積サーバからネットワークを介して受信するコンテンツデータを前記デコーダによりデコードして、前記コンテンツデータに係るコンテンツを再生する機能を有するコンテンツ再生装置において、前記コンテンツ蓄積サーバからの受信コンテンツデータが前記デコーダによりデコード可能である第１のフォーマットであるか、デコード不可能である第２のフォーマットであるかを判別する判別手段、第２のフォーマットのコンテンツデータを第１のフォーマットのコンテンツデータへ変換する変換手段、及び前記受信コンテンツデータが第１のフォーマットである場合には、該受信コンテンツデータを前記デコーダにおけるデコード対象とし、また、該受信コンテンツデータが第２のフォーマットである場合には、該受信コンテンツデータを前記変換手段より第１のフォーマットへ変換した後のコンテンツデータを、前記デコーダにおけるデコード対象とするデコード対象切替手段」で構成されており、以下のように動作する。
　コンテンツ再生装置は、ファームウェアとして適宜更新可能となっているソフトエンコーダを装備する。コンテンツ蓄積サーバへの楽曲データの送信要求に対して、コンテンツ蓄積サーバから受信した楽曲データが、デコーダが対応しているコーディックである場合には、受信楽曲データをデコーダへ送り、楽曲の再生を行う。もし、受信楽曲データが、コーダが未対応となっているコーディックである場合には、受信楽曲データをソフトエンコーダにおいて、デコーダが対応しているコーディックの楽曲データへエンコードしてから、デコーダへ送り、楽曲の再生を行う。
特開２００７－２１５０９９号公報
　ところで、デジタル放送を、端末装置で受信すると、端末装置の受信感度によって受信したデータストリームは、エラーを含んだものになってしまう。デジタル放送の中の画像の場合、エラーストリームをそのままデコードすると、画像の乱れを引き起こしたり、画像の更新を停止したり、もしくは、ハードウェア（HWともいう）がエラーの状態になったりするおそれがあるため、エラーストリームのデコードは好ましくない。
　ここで、既存のメディア再生向けHWでは、特定のデジタル放送に特化したエラー訂正は行えない。しかし、HWを用いたデジタル放送受信端末を実現しようとしている場合、画像のデコーダHW（ハードデコーダ）のみをデジタル放送に特化したものに交換/修正すると、かなりの時間を要する。また、デジタル放送方式により最適な画像ストリームのエラー訂正のアルゴリズムが異なる場合があり、HWで実装するのは、無駄が多いなどの問題点がある。
　そこで、本発明の目的は、ハードウェアの変更を行うことなくエラー訂正が可能な端末装置、端末装置の制御方法、及び記録媒体を提供することにある。
　本発明の装置は、H.264規格に準拠したハードデコーダでNAL Unitからなるデータストリームを受信する端末装置において、データストリーム中の符号化されたデータをソフトウェア上で解析し、エラー訂正を行った後ハードデコーダに入力するエラー訂正手段を備えたことを特徴とする。
　本発明の方法は、H.264規格に準拠したハードデコーダでNAL Unitからなるデータストリームを受信する端末装置の制御方法において、データストリーム中の符号化されたデータを解析し、エラー訂正を行った後ハードデコーダに入力することを特徴とする。
　本発明の記録媒体は、H.264規格に準拠したハードデコーダでNAL Unitからなるデータストリームを受信する端末装置の制御プログラムを記録した記録媒体において、コンピュータに、データストリーム中の符号化されたデータを解析する処理、エラー訂正を行う処理、エラー訂正処理後ハードデコーダに入力する処理を実行させる制御プログラムを記録したことを特徴とする。
　本発明によれば、ハードウェアの変更を行うことなくエラー訂正が可能な端末装置、端末装置の制御方法、及び記録媒体の提供を実現することができる。
（特　徴）
　本発明に係る端末装置は、既存のメディア再生用HWとしてのH.264 デコーダ HWを交換/修正をせずに、そのH.264 デコーダHWの前段にH.264簡易(ソフト)エンコーダとH.264簡易(ソフト)デコーダとを搭載することで問題点を解決するものである。H.264デコーダHWにストリームを入力する前に、簡易(ソフト)デコーダでストリームを解析するなどして、既存のH.264デコーダHWを変更することなく、エラー訂正を行い、正常な画像出力を得ることができる。
　すなわち、本端末装置は既存のメディア再生向けH.264Decoderをそのまま用いることができる点、メディア再生用HWを変更することなく、エラー訂正を行うことができる点 、ストリームを再エンコードすることによりエラー訂正を行う点に特徴がある。
　本発明にかかる端末装置の一実施の形態は、H.264規格に準拠したハードデコーダでNAL Unitからなるデータストリームを受信する端末装置において、データストリーム中の符号化されたデータをソフトウェア上で解析し、エラー訂正を行った後記ハードデコーダに入力するエラー訂正手段を備えたことを特徴とする。
　上記構成によれば、H.264規格に準拠したハードデコーダでNAL Unitからなるデータストリームを受信する端末装置において、データストリーム中の符号化されたデータをソフトウェア上で解析し、エラー訂正を行った後ハードデコーダに入力するエラー訂正手段を備えたことにより、ハードデコーダにデータストリームを入力する前にソフトデコーダ、及びソフトエンコーダで解析、エラー訂正を行うことによって、ハードデコーダを修正する時間をかけずに、既存のメディア再生向けのハードデコーダをそのまま使用し、エラー訂正を行うことによって正常な出力画像を得ることができる。すなわち、ハードウェアの変更を行うことなくエラー訂正が可能となる。
　本発明にかかる端末装置の他の実施の形態は、上記構成に加え、エラー訂正手段は、データを復号化し、エラーの有無をチェックするソフトデコーダと、誤ったパラメータを適切なパラメータに修正するソフトエンコーダと、修正したデータをハードデコーダに入力し、ソフトデコーダ及びソフトエンコーダを制御するソフト制御部とを備えたことを特徴とする。
　本発明にかかる端末装置の他の実施の形態は、上記構成に加え、ソフト制御部は、データに特定のNAL Unitがあるか否かを判断する手段と、データが特定のNAL Unitでない場合にはデータをハードデコーダに入力し、データが特定のNAL Unitである場合にはソフトデコーダにデータの一部をデコードさせ特定のNAL Unitが所定の規格に違反しているか否かを判断し、特定のNAL Unitが所定の規格に違反していない場合にはデータをハードデコーダに入力し、特定のNAL Unitが所定の規格に違反している場合には規格違反のパラメータを適切な値に修正する手段と、修正したパラメータをソフトデコーダにエンコードさせることを特徴とする。
　本発明にかかる端末装置の他の実施の形態は、上記構成に加え、データはワンセグ放送向け画像データもしくは地上デジタル放送向け画像データであり、前記所定の規格はワンセグ放送向け画像データもしくは地上デジタル放送向け画像データに関する規格であることを特徴とする。
　本発明に係る端末装置の制御方法の一実施の形態は、H.264規格に準拠したハードデコーダでNAL Unitからなるデータストリームを受信する端末装置の制御方法において、データストリーム中の符号化されたデータを解析し、エラー訂正を行った後ハードデコーダに入力することを特徴とする。
　上記構成によれば、H.264規格に準拠したハードデコーダでNAL Unitからなるデータストリームを受信する端末装置において、データストリーム中の符号化されたデータをソフトウェア上で解析し、エラー訂正を行った後ハードデコーダに入力するエラー訂正手段を備えたことにより、ハードデコーダにデータストリームを入力する前にソフトデコーダ、及びソフトエンコーダで解析、エラー訂正を行うことによって、ハードデコーダを修正する時間をかけずに、既存のメディア再生向けのハードデコーダをそのまま使用し、エラー訂正を行うことによって正常な出力画像を得ることができる。すなわち、ハードウェアの変更を行うことなくエラー訂正が可能となる。
　本発明に係る端末装置の制御方法の他の実施の形態は、上記構成に加え、データを復号化し、エラーの有無をチェックし、誤ったパラメータを適切なパラメータに修正し、修正したデータをハードデコーダに入力することを特徴とする。
　本発明に係る端末装置の制御方法の他の実施の形態は、上記構成に加え、データに特定のNAL Unitがあるか否かを判断し、データが特定のNAL Unitでない場合にはデータをハードデコーダに入力し、データが特定のNAL Unitである場合にはソフトデコーダにデータの一部をデコードさせ特定のNAL Unitが所定の規格に違反しているか否かを判断し、特定のNAL Unitが所定の規格に違反していない場合にはデータをハードデコーダに入力し、特定のNAL Unitが所定の規格に違反している場合には規格違反のパラメータを適切な値に修正し、修正したパラメータをソフトデコーダにエンコードさせることを特徴とする。
　本発明に係る端末装置の制御方法の他の実施の形態は、上記構成に加え、データはワンセグ放送向け画像データもしくは地上デジタル放送向け画像データであり、所定の規格はワンセグ放送向け画像データもしくは地上デジタル放送向け画像データに関する規格であってもよい。
（制御プログラム及び記録媒体）
　以上で説明した本発明の端末装置は、コンピュータで処理を実行させる制御プログラムによって実現されている。コンピュータとしては、例えばパーソナルコンピュータやワークステーションなどの汎用的なものが挙げられるが、本発明はこれに限定されるものではない。
　本発明に係る端末装置の制御プログラムの一実施の形態は、H.264規格に準拠したハードデコーダでNAL Unitからなるデータストリームを受信する端末装置の制御プログラムにおいて、
　コンピュータに、
(1)データストリーム中の符号化されたデータを解析する処理
(2)エラー訂正を行う処理
(3)エラー訂正処理後ハードデコーダに入力する処理
を実行させるものである。
　上記構成によれば、H.264規格に準拠したハードデコーダでNAL Unitからなるデータストリームを受信する端末装置において、データストリーム中の符号化されたデータをソフトウェア上で解析し、エラー訂正を行った後ハードデコーダに入力するエラー訂正手段を備えたことにより、ハードデコーダにデータストリームを入力する前にソフトデコーダ、及びソフトエンコーダで解析、エラー訂正を行うことによって、ハードデコーダを修正する時間をかけずに、既存のメディア再生向けのハードデコーダをそのまま使用し、エラー訂正を行うことによって正常な出力画像を得ることができる。すなわち、ハードウェアの変更を行うことなくエラー訂正が可能となる。
　また、本発明に係る端末装置の制御プログラムの他の実施の形態は、上記構成に加え、
　コンピュータに、
(4)ソフトデコーダがデータを復号化し、エラーの有無をチェックする処理
(5)ソフトエンコーダが誤ったパラメータを適切なパラメータに修正する処理
(6)修正したデータをハードデコーダに入力する処理
を実行させてもよい。
　さらに、本発明に係る端末装置の制御プログラムの他の実施の形態は、上記構成に加え、
　コンピュータに、
(7)データに特定のNAL Unitがあるか否かを判断する処理
(8)データが特定のNAL Unitでない場合にはデータをハードデコーダに入力する処理
(9)データが特定のNAL Unitである場合にはソフトデコーダにデータの一部をデコードさせ特定のNAL Unitが所定の規格に違反しているか否かを判断する処理
(10)特定のNAL Unitが所定の規格に違反していない場合にはデータをハードデコーダに入力する処理
(11)特定のNAL Unitが所定の規格に違反している場合には規格違反のパラメータを適切な値に修正する処理
(12)修正したパラメータをソフトデコーダにエンコードさせる処理
を実行させてもよい。
　さらに、本発明に係る端末装置の制御プログラムの他の実施の形態は、上記構成に加え、データはワンセグ放送向け画像データもしくは地上デジタル放送向け画像データであり、所定の規格はワンセグ放送向け画像データもしくは地上デジタル放送向け画像データに関する規格であってもよい。
　これにより、制御プログラムが実行可能なコンピュータ環境さえあれば、どこにおいても本発明の端末装置を実現することができる。
　このような制御プログラムは、コンピュータに読み取り可能な記録媒体に記憶されていてもよい。
　ここで、記録媒体としては、例えば、CD-ROM(Compact Disc Read Only Memory)、フレキシブルディスク(FD)、CD-R(CD Recordable)、DVD(Digital Versatile Disk)などのコンピュータで読み取り可能な記録媒体、フラッシュメモリ、RAM(Random Access Memory)、ROM(Read Only Memory)、Fe RAM(強誘電体メモリ)等の半導体メモリやHDD(Hard Disc Drive)が挙げられる。
　なお、上述した実施の形態は、本発明の好適な実施の形態の一例を示すものであり、本発明はそれに限定されることなく、その要旨を逸脱しない範囲内において、種々変形実施が可能である。
　以下実施例につき本発明を詳細に説明する。
（構　成）
　本発明に係る端末装置の制御方法を適用した端末装置の一実施例のブロック図を図１に示す。
　図中１は、デジタル放送を受信する端末装置としてのデジタル放送受信情報端末であり、メディア再生用HW（H.264デコーダHW ）４を搭載している。また、そのメディア再生用HW４の前段にソフトデコーダ３、ソフトエンコーダ２、そして、それらソフトエンコーダ２、ソフトデコーダ、及びメディア再生用HW４を制御するソフト制御部５を搭載する。
　チューナーやDEMUX（デマルチプレクサ）などのデジタル放送に必須のシステム部分をデジタル放送受信システム部６と称する。信号の流れはデータに応じて異なり実線矢印及び波線矢印となっている。
　ソフトデコーダ２は、データを復号化し、エラーの有無をチェックする機能を有する。
　ソフトエンコーダ３は、誤ったパラメータを適切なパラメータに修正する機能を有する。
　ハードデコーダとしてのメディア再生用HW４は、例えば、既存のH.264デコーダが挙げられる。
　ソフト制御部５は、例えばマイクロプロセッサからなり、修正したパラメータをソフトデコーダ３にエンコードさせる他、デジタル放送受信端末１を統括制御する。
　また、ソフト制御部５は、データに特定のNAL Unitがあるか否かを判断する手段と、データが特定のNAL Unitでない場合にはデータをハードデコーダに入力し、データが特定のNARNAL Unitである場合にはソフトデコーダにデータの一部をデコードさせ特定のNAL Unitが規格に違反しているか否かを判断し、特定のNAL Unitが規格に違反していない場合にはデータをハードデコーダに入力し、特定のNAL Unitが規格に違反している場合には規格違反のパラメータを適切な値に修正する手段とで構成された、ソフトウェアからなっている。
　これらソフトエンコーダ３、ソフトデコーダ４、及びソフト制御部５でエラー訂正手段が構成されている。
（動作の説明）
　本発明に係る端末装置の制御方法の一実施例の一連の流れを、図１、２を用いて説明する。
　図２は、本発明に係る端末装置の制御方法を説明するためのフローチャートの一例である。
　デジタル放送受信端末内のデジタル放送システム６からエラー訂正制御ソフトを有するソフト制御部５がH.264ストリームを受信する(ステップS1)。
　制御ソフト部５で、特定の（エラー訂正可能な）NAL Unitか否か判別する(ステップS2)。
　エラー訂正可能な場合は、ソフトデコーダ２にストリームを渡し、ソフトデコーダ２でストリームの一部をデコードする(ステップS3)。
　NALヘッダ、AUD(Access Unit Delimiter)、SPS(Sequence Parameter Set)、PPS(Picture Parameter Set)などの特定のNAL Unitのパラメータ値を確認し、規格に違反しているか否かをチェックする(ステップS4)。
　規格に違反している場合（ステップS4／Yes）は、パラメータの値を適切な値に修正する(ステップS5)。
　修正した値をソフトエンコーダ３でエンコードする(S6)。
その結果、エラーの混入したストリームは、適切なストリームに訂正される。
　エラー訂正したストリームを既存のメディア再生用HW４に入力し（ステップS7）、デコードする(ステップS8)。
　エラー訂正されたストリームのため、正常な出力画像がメディア再生用HW４から得られる(ステップS9)。
（効果の説明）
　以上のように本発明は、メディア再生用HW４にストリームを入力する前にソフトデコーダ、及びソフトエンコーダで解析し、エラー訂正を行うことによって、メディア再生用HW４は修正の時間をかけずに、既存のメディア再生向けのメディア再生用HW４をそのまま使用し、エラー訂正の実現によって正常な出力画像を得ることができる。
　尚、本実施例では、ワンセグ放送向け画像ストリームであるH.264ストリームのエラー訂正について述べたが、本発明はこれに限定されるものではなく、地上デジタル放送向け画像の処理に適用してもよい。
　ここで、特許文献１に記載の発明は、音楽のトランスコーダという一般的な技術に関する発明であり、例えば、第１のフォーマットのMP3を第２のフォーマットAACに変換するものであり、本願のようなパラメータを変更するものではない。また、特許文献１に記載の発明はエラーを訂正するものではなく、あくまでフォーマットの変換であり、エラーが含まれるものは変換できない。この再変換を行うには既に第２のフォーマットをデコード可能なデコーダが必要であるが、特許文献１にはその記載はない。そのデコーダが含まれているのであれば、このシステムはそもそも必要はない。
　これに対して本願は、画像ストリームのエラーを訂正するものであり、ワンセグなどのデジタル放送は、端末の受信感度によってエラーを含んでしまうので、そのエラーを訂正し、正常な画像を表示するものである。元々のワンセグの画像ストリームであるH.264はHWデコーダでデコード可能である。HWは変更に時間を要する。本願はHWを変更しないというメリットがある。
　以上説明したように本発明によれば、H.264規格に準拠したハードデコーダでNAL Unitからなるデータストリームを受信する端末装置において、データストリーム中の符号化されたデータをソフトウェア上で解析し、エラー訂正を行った後ハードデコーダに入力するエラー訂正手段を備えたことにより、ハードデコーダにデータストリームを入力する前にソフトデコーダ、及びソフトエンコーダで解析、エラー訂正を行うことによって、ハードデコーダを修正する時間をかけずに、既存のメディア再生向けのハードデコーダをそのまま使用し、エラー訂正を行うことによって正常な出力画像を得ることができる。すなわち、ハードウェアの変更を行うことなくエラー訂正が可能となる。
　この出願は、２００７年１２月２０日に出願された日本出願特願２００７－３２８４５４を基礎とする優先権を主張し、その開示の全てをここに取り込む。
本発明に係る端末装置の制御方法を適用した端末装置の一実施例を示すブロック図である。 本発明に係る端末装置の制御方法を説明するためのフローチャートの一例である。
符号の説明
　１　　端末装置（デジタル放送受信端末）
　２　　ソフトデコーダ
　３　　ソフトエンコーダ
　４　　メディア再生用HW
　５　　ソフト制御部
　６　　デジタル放送受信システム部

Claims (12)

  1. 　H.264規格に準拠したハードデコーダでNAL Unitからなるデータストリームを受信する端末装置において、
    　前記データストリーム中の符号化されたデータをソフトウェア上で解析し、エラー訂正を行った後前記ハードデコーダに入力するエラー訂正手段を備えたことを特徴とする端末装置。
  2. 　前記エラー訂正手段は、
    　前記データを復号化し、エラーの有無をチェックするソフトデコーダと、
    　誤ったパラメータを適切なパラメータに修正するソフトエンコーダと、
    　修正したデータを前記ハードデコーダに入力し、前記ソフトデコーダ及び前記ソフトエンコーダを制御するソフト制御部と、を備えたことを特徴とする請求項１記載の端末装置。
  3. 　前記ソフト制御部は、前記データに特定のNAL Unitがあるか否かを判断する手段と、前記データが特定のNAL Unitでない場合には前記データを前記ハードデコーダに入力し、前記データが特定のNARNAL Unitである場合には前記ソフトデコーダに前記データの一部をデコードさせ特定のNAL Unitが所定の規格に違反しているか否かを判断し、前記特定のNAL Unitが前記所定の規格に違反していない場合には前記データを前記ハードデコーダに入力し、前記特定のNAL Unitが前記所定の規格に違反している場合には規格違反のパラメータを適切な値に修正する手段と、修正したパラメータを前記ソフトデコーダにエンコードさせることを特徴とする請求項２記載の端末装置。
  4. 　前記データはワンセグ放送向け画像データもしくは地上デジタル放送向け画像データであり、前記所定の規格はワンセグ放送向け画像データもしくは地上デジタル放送向け画像データに関する規格であることを特徴とする請求項３記載の端末装置。
  5. 　H.264規格に準拠したハードデコーダでNAL Unitからなるデータストリームを受信する端末装置の制御方法において、
    　前記データストリーム中の符号化されたデータを解析し、エラー訂正を行った後前記ハードデコーダに入力することを特徴とする端末装置の制御方法。
  6. 　前記データを復号化し、エラーの有無をチェックし、誤ったパラメータを適切なパラメータに修正し、修正したデータを前記ハードデコーダに入力することを特徴とする請求項５記載の端末装置の制御方法。
  7. 　前記データに特定のNAL Unitがあるか否かを判断し、前記データが特定のNAL Unitでない場合には前記データを前記ハードデコーダに入力し、前記データが特定のNAL Unitである場合には前記ソフトデコーダに前記データの一部をデコードさせ特定のNAL Unitが所定の規格に違反しているか否かを判断し、前記特定のNAL Unitが前記所定の規格に違反していない場合には前記データを前記ハードデコーダに入力し、前記特定のNAL Unitが前記所定の規格に違反している場合には規格違反のパラメータを適切な値に修正し、修正したパラメータを前記ソフトデコーダにエンコードさせることを特徴とする請求項６記載の端末装置の制御方法。
  8. 　前記データはワンセグ放送向け画像データもしくは地上デジタル放送向け画像データであり、前記所定の規格はワンセグ放送向け画像データもしくは地上デジタル放送向け画像データに関する規格であることを特徴とする請求項７記載の端末装置の制御方法。
  9. 　H.264規格に準拠したハードデコーダでNAL Unitからなるデータストリームを受信する端末装置の制御プログラムを記録した記録媒体において、
    　コンピュータに、前記データストリーム中の符号化されたデータを解析する処理、エラー訂正を行う処理、エラー訂正処理後前記ハードデコーダに入力する処理を実行させる制御プログラムを記録したことを特徴とする記録媒体。
  10. 　前記コンピュータに、
    　ソフトデコーダが前記データを復号化し、エラーの有無をチェックする処理、
    　ソフトエンコーダが誤ったパラメータを適切なパラメータに修正する処理、
    　修正したデータを前記ハードデコーダに入力する処理、を実行させる制御プログラムを記録したことを特徴とする請求項９記載の記録媒体。
  11. 　前記コンピュータに、
    　前記データに特定のNAL Unitがあるか否かを判断する処理、
    　前記データが特定のNAL Unitでない場合には前記データを前記ハードデコーダに入力する処理、
    　前記データが特定のNAL Unitである場合には前記ソフトデコーダに前記データの一部をデコードさせ特定のNAL Unitが所定の規格に違反しているか否かを判断する処理、
    　前記特定のNAL Unitが前記所定の規格に違反していない場合には前記データを前記ハードデコーダに入力する処理、
    　前記特定のNAL Unitが前記所定の規格に違反している場合には規格違反のパラメータを適切な値に修正する処理、
    　修正したパラメータを前記ソフトデコーダにエンコードさせる処理、を実行させる制御プログラムを記録したことを特徴とする請求項１０記載の記録媒体。
  12. 　前記データはワンセグ放送向け画像データもしくは地上デジタル放送向け画像データであり、前記所定の規格はワンセグ放送向け画像データもしくは地上デジタル放送向け画像データに関する規格であることを特徴とする請求項７記載の制御プログラムを記録したことを特徴とする記録媒体。
PCT/JP2008/071986 2007-12-20 2008-12-03 端末装置、端末装置の制御方法、及び記録媒体 WO2009081708A1 (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
US12/747,787 US8423859B2 (en) 2007-12-20 2008-12-03 Terminal device, terminal device control method, and storage medium
JP2009547011A JP5522725B2 (ja) 2007-12-20 2008-12-03 端末装置、端末装置の制御方法、及び制御プログラム

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2007-328454 2007-12-20
JP2007328454 2007-12-20

Publications (1)

Publication Number Publication Date
WO2009081708A1 true WO2009081708A1 (ja) 2009-07-02

Family

ID=40801019

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2008/071986 WO2009081708A1 (ja) 2007-12-20 2008-12-03 端末装置、端末装置の制御方法、及び記録媒体

Country Status (3)

Country Link
US (1) US8423859B2 (ja)
JP (1) JP5522725B2 (ja)
WO (1) WO2009081708A1 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2016157724A1 (ja) * 2015-03-27 2016-10-06 パナソニックＩｐマネジメント株式会社 動画像復号装置

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH11136684A (ja) * 1997-10-29 1999-05-21 Nec Ic Microcomput Syst Ltd 画像再生装置及び画像データの再生方法
JP2004048311A (ja) * 2002-07-11 2004-02-12 Yokogawa Electric Corp Ｍｐｅｇデータ復号処理装置およびエラー検出方法
JP2006262016A (ja) * 2005-03-16 2006-09-28 Victor Co Of Japan Ltd エラー訂正装置
JP2007166129A (ja) * 2005-12-13 2007-06-28 Victor Co Of Japan Ltd 符号化データ生成装置

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8667554B2 (en) * 2004-07-01 2014-03-04 Oy Gamecluster Ltd. Method and a device for supplying a decoder with data
US20070011557A1 (en) * 2005-07-07 2007-01-11 Highdimension Ltd. Inter-sequence permutation turbo code system and operation methods thereof
US7844877B2 (en) * 2005-11-15 2010-11-30 Ramot At Tel Aviv University Ltd. Method and device for multi phase error-correction
JP2007215099A (ja) 2006-02-13 2007-08-23 Kenwood Corp コンテンツ再生装置及びその制御方法
JP4737003B2 (ja) * 2006-08-10 2011-07-27 ソニー株式会社 編集装置、編集方法、編集プログラムおよび編集システム
US8095680B2 (en) * 2007-12-20 2012-01-10 Telefonaktiebolaget Lm Ericsson (Publ) Real-time network transport protocol interface method and apparatus

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH11136684A (ja) * 1997-10-29 1999-05-21 Nec Ic Microcomput Syst Ltd 画像再生装置及び画像データの再生方法
JP2004048311A (ja) * 2002-07-11 2004-02-12 Yokogawa Electric Corp Ｍｐｅｇデータ復号処理装置およびエラー検出方法
JP2006262016A (ja) * 2005-03-16 2006-09-28 Victor Co Of Japan Ltd エラー訂正装置
JP2007166129A (ja) * 2005-12-13 2007-06-28 Victor Co Of Japan Ltd 符号化データ生成装置

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2016157724A1 (ja) * 2015-03-27 2016-10-06 パナソニックＩｐマネジメント株式会社 動画像復号装置

Also Published As

Publication number Publication date
JP5522725B2 (ja) 2014-06-18
US8423859B2 (en) 2013-04-16
US20110276853A1 (en) 2011-11-10
JPWO2009081708A1 (ja) 2011-05-06

Similar Documents

Publication Publication Date Title
US8407565B2 (en) System and method for producing importance rate-based rich media, and server applied to the same
CN114339408A (zh) 一种视频解码方法
US20100104267A1 (en) System and method for playing media file
JP5522725B2 (ja) 端末装置、端末装置の制御方法、及び制御プログラム
US20070003229A1 (en) Content recording apparatus, content reproducing apparatus, and method for recording parameter information
JP2006202353A (ja) Ｍｐｅｇ２トランスポート・ストリームの管理情報の補正機能を有する再生装置
CN111741376B (zh) 一种多媒体文件拼接音视频唇音同步的方法
US20090257484A1 (en) Method for audio-video encoding and apparatus for multimedia storage
JP2009152855A (ja) マルチメディアデータ記録装置及びマルチメディアデータ再生装置
JP2006236475A (ja) 符号化データ再生装置
EP1909266B1 (en) Signal processing apparatus, signal processing method, and computer program thereof
JP2008076847A (ja) 復号器及び信号処理システム
KR100859089B1 (ko) 자막 파일 검사 장치
KR100657703B1 (ko) 하드디스크 내장형 미디어 플레이어에서의 디빅스 파일재생 방법
KR100729063B1 (ko) 광디스크 플레이어에서의 디빅스 파일 재생 방법
JP2007226917A (ja) データ修復機能を備えた機器
JP2010123225A (ja) 記録再生装置及び記録再生方法
JP2005064664A (ja) データファイルの圧縮方法
JP2007058128A (ja) ビットストリーム復号装置
US20070280634A1 (en) Recording/reproduction apparatus and method
Gournay A Very Low Bit Rate Protection Layer to Increase the Robustness of the AMR-WB+ Codec against Bit Errors
JP2011013620A (ja) 音声編集方法及び装置
KR100785206B1 (ko) 디빅스 재생 장치에서의 자막 언어 표시 장치 및 그 방법
JP2005234122A (ja) 画像符号化装置
JP2008112494A (ja) オーディオ再生装置、並びにオーディオ再生方法及びプログラム、オーディオ記録装置、オーディオ記録方法

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 08863674

Country of ref document: EP

Kind code of ref document: A1

WWE Wipo information: entry into national phase

Ref document number: 2009547011

Country of ref document: JP

WWE Wipo information: entry into national phase

Ref document number: 12747787

Country of ref document: US

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 08863674

Country of ref document: EP

Kind code of ref document: A1