JP4121725B2 - Portable viewing device - Google Patents

Portable viewing device Download PDF

Info

Publication number
JP4121725B2
JP4121725B2 JP2001297392A JP2001297392A JP4121725B2 JP 4121725 B2 JP4121725 B2 JP 4121725B2 JP 2001297392 A JP2001297392 A JP 2001297392A JP 2001297392 A JP2001297392 A JP 2001297392A JP 4121725 B2 JP4121725 B2 JP 4121725B2
Authority
JP
Japan
Prior art keywords
memory card
file
viewing device
priority
audio data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2001297392A
Other languages
Japanese (ja)
Other versions
JP2003111003A (en
Inventor
一郎 梶谷
一廣 家田
之教 十一
直昭 三井
航 松岡
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sanyo Electric Co Ltd
Original Assignee
Sanyo Electric Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sanyo Electric Co Ltd filed Critical Sanyo Electric Co Ltd
Priority to JP2001297392A priority Critical patent/JP4121725B2/en
Publication of JP2003111003A publication Critical patent/JP2003111003A/en
Application granted granted Critical
Publication of JP4121725B2 publication Critical patent/JP4121725B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Description

【0001】
【産業上の利用分野】
この発明は、テレビの視聴等が行える携帯型視聴装置に関する。
【0002】
【従来の技術】
従来より、携帯型のテレビジョン受信装置が提供されており、かかる装置は内蔵の小型チューナによって地上波アナログ放送を受信し、液晶表示パネルに受信映像を映し出すようになっている。また、近年においては、MPEG4(Moving Picture Experts Group4)に基づいた符号化映像データをメモリカードに記録し、このメモリカードを携帯型視聴装置のスロットに装填することにより、外出先でも録画映像を楽しむことができるようになっている。MPEG4に基づいた符号化映像データは、通常のテレビジョン放送による受信映像やハンディカメラで撮像した映像をMPEG4エンコーダに通すことで得たり、或いは、インターネットを利用してダウンロードすることで得ることができる。
【0003】
【発明が解決しようとする課題】
このように、映像の符号化技術の高度化や機器の小型化によって、外出先でも手軽に映像を楽しむことができるようになっているが、更に、使い勝手に優れた携帯型視聴装置が求められている。
【0004】
この発明は、上記の事情に鑑み、使い勝手に優れた携帯型視聴装置を提供することを目的とする。
【0005】
【課題を解決するための手段】
この発明の携帯型視聴装置は、上記の課題を解決するために、地上波ディジタル放送を受信して符号化映像・音声データを取得するチューナと、符号化映像・音声データをメモリカード又は内蔵メモリに格納する手段と、符号化映像・音声データをメモリカード又は内蔵メモリから読み出す手段と、メモリカードから読み出した符号化映像・音声データ及びチューナからの符号化映像・音声データをデコードしてディスプレイ上に映像表示するとともに音声出力する手段と、符号化映像・音声データをメモリカードに格納中にその残量が所定量以下となり又は残量が無くなったときに、メモリカードの交換を促す報知を行う手段と、報知後に前記メモリカードが装着状態であるとき、装着状態のメモリカードへの格納進行中の状態にある現ファイルの中で先に記録した部分から削除していき、新たに受け取る符号化映像・音声データの格納領域を確保することを特徴とする。
【0008】
さらに、この発明の携帯型視聴装置は、メモリカードに格納するファイルに優先度を与え、優先度の低い既存ファイルから削除する優先度対応削除モードを併存させ、この優先度対応削除モードと、現ファイル内削除モードとの択一的許可或いは両者許可が行えるように構成されていてもよい。優先度対応削除モードが許可されており、現ファイル内削除モードが許可されていない場合、現ファイルに与えられた優先度よりも低い既存ファイルを削除していくようにしてもよい。優先度対応削除モードが許可されており、更に現ファイル内削除モードが許可されている場合、現ファイルに与えられた優先度よりも低い既存ファイルを削除していき、削除する既存ファイルが無くなって追記できなくなると、現ファイル内削除モードを実行するようにしてもよい。
【0011】
【発明の実施の形態】
以下、この発明の実施形態を図1乃至図5に基づいて説明する。
【0012】
図1及び図2に示すように、据置型周辺装置1とこの実施形態の携帯型視聴装置2とによって放送視聴システムが構成される。このシステムでは、据置型周辺装置1がアナログ放送を受信し、この受信した放送をエンコードして得た符号化映像・音声データをスロット101に差し込まれたメモリカード3(例えば、コンパクトフラッシュカード(商標)やマルチメディアカード(商標)等)に格納する。据置型周辺装置1の本体部1aは縦長にデザインされており、その下部には脚部1bを有し、転倒防止が図られている。また、据置型周辺装置1には電源ボタン及び視聴に関する操作ボタン(プレイ/ポーズ、ストップ、送り)は設けられているが、チャンネル選択のための操作ボタン類は設けられていない。そして、据置型周辺装置1の本体部1aにおける手前側には、収容凹部1cが形成されており、この収容凹部1cに携帯型視聴装置2を差し込んで装着することができる。この装着状態で携帯型視聴装置2は据置型周辺装置1から充電を受けるようになっている。
【0013】
携帯型視聴装置2は、略方形状で偏平な形状を有しており、電池駆動される構成となっている。携帯型視聴装置2は、チューナー230によって地上波ディジタル放送を受信し、映像を液晶表示パネル202上に映し出すとともに、音声をイヤホン203から出力する。また、スロット201に差し込まれたメモリカード3から符号化映像・音声データを読み出し、映像を液晶表示パネル202上に映し出すとともに、音声をイヤホン203から出力する。液晶表示パネル202上にはタッチパネル211が貼られており、タッチペン等によってパネル操作を行って所望の指示を与えることができる。なお、視聴に関する操作ボタン(プレイ/ポーズ、ストップ、送り、音量等)については、筐体部に設けている。
【0014】
以下、これら据置型周辺装置1と携帯型視聴装置2の回路構成を、図3に基づいて詳しく説明していく。
【0015】
まず、据置型周辺装置1について説明していく。チューナ102は、アナログ放送を受信し、この放送受信信号を出力する。チューナ102の起動指令や任意の放送を受信するための選局情報(チャンネル情報)は、I/O(インプット/アウトプット)回路103及びシステムバス104を介してCPU110から与えられる。CPU110は、ユーザによる選局指令情報(指定チャンネル情報、指定時間情報など)を、システムバス104、PCMCIAインターフェイス105、及びスロット101を介して前記メモリカード3から受け取る。スイッチ106は、前記放送受信信号を入力する入力部と外部信号を入力する入力部とを有し、いずれかの信号を選択してA/D変換回路107に供給する。
【0016】
A/D変換回路107は、アナログ信号をディジタル信号に変換してMPEG4(Moving Picture Experts Group4)エンコーダ108に供給する。MPEG4エンコーダ108は、MPEG4に従い、例えば、映像中の背景や背景中の人物を各々オブジェクトとして個別に記述し、この任意形状の各オブジェクトを取り扱うために形状情報を付加すると共にMPEG2と同様にDCT処理や動きベクトル処理等を行ってビデオパケットを生成し、これを連続させたビットストリームを出力する。音声についても所定の符号化を行い、この音声符号化データを上記ビットストリームに組み込む。SDRAM109は、MPEG4エンコーダ108の上記処理において利用される。
【0017】
MPEG4エンコーダ108が出力したビットストリーム(符号化映像・音声データ)は、システムバス104、PCMCIAインターフェイス105、及びスロット101を介して前記メモリカード3に格納される。
【0018】
スロット101及びPCMCIAインターフェイス105のセットは、二組設けられている。スロット101には、上記メモリカード3の他、PHSデータカード4等を装着することができる。
【0019】
充電回路113は、商用電源からの交流を直流化する回路等を有して成り、図1に示すごとく携帯型視聴装置2が据置型周辺装置1に装着されたとき、図示しない充電端子部を介して携帯型視聴装置2への充電電力供給を行う。
【0020】
CPU110は、上述したチューナ102の動作制御やMPEG4エンコーダ108の出力をメモリカード3に格納する処理(録画処理)を行う他、スロット101にPHSデータカード4が装着された場合のデータ送受信、このデータに基づく各機能部の制御、FlashROM111やDRAM112のリード/ライト制御なども行うようになっている。
【0021】
次に、携帯型視聴装置2を説明していく。メモリカード3に格納されているMPEG4ビットストリームデータ(符号化映像・音声データ)は、PCMCIAインターフェイス220、及びシステムバス213を経てMPEG4デコーダ204に供給される。地上波ディジタル放送を受信するチューナ230は、この地上波ディジタル放送で放送されるMPEG4のビットストリームデータを取り出し、MPEG4デコーダ204に与えたり、メモリカード3やSDRAM219への記録のためにシステムバス213に供給したりする。MPEG4デコーダ204は、ビットストリームデータを復号して量子化係数や動きベクトルを求め、逆DCT変換や動きベクトルに基づく動き補償制御などを行うことによって得た映像データをグラフィックスコントローラ205に供給する。グラフィックスコントローラ205は映像データ(例えば、R,G,Bデータ)に対して色調整等の処理を施す。また、グラフィックスコントローラ205は、CPU209から出力指示された文字等(操作ボタン、メニュー画面、地上波ディジタル放送から取得した番組情報によるEPG画面等)を液晶表示パネル202に表示する処理も行う。オーディオデコーダ206は、ビットストリーム中の音声符号データをMPEG4デコーダ204から受け取り、復号して音声データを生成する。SDRAM210は、MPEG4デコーダ204の上記処理において利用される。
【0022】
LCDコントローラ207は、グラフィックスコントローラ205から供給された映像データに基づいて液晶表示パネル202を駆動する。D/A変換器208は、オーディオデコーダ206から出力された音声データを受け取ってD/A変換を行い、右(R)音のアナログ信号および左(L)音のアナログ信号を生成してイヤホン203に与える。
【0023】
タッチパネル211に対する操作情報は、専用インターフェイス212、及びシステムバス213を介してCPU209に与えられる。CPU209は上記操作情報と液晶表示パネル202上の操作ボタン等の表示との対応によって指令内容を把握して必要な処理を実行する。
【0024】
本体キー214は先述した視聴に関する操作ボタン(プレイ/ポーズ、ストップ、送り)に相当する。この本体キー214に対する操作情報は、インターフェイス215、及びシステムバス213を介してCPU209に与えられる。CPU209は上記操作情報に基づいて必要な処理を実行する。
【0025】
また、無線ネットワークを可能にするために、通信ブロック216及びインターフェイス(例えば、Bluetooth (商標)など)217が設けられている。更に、FlashROM218やSDRAM219も備える。電池221は二次電池であり、据置型周辺装置1から電力の供給を得てこれを蓄える。携帯電話部231は、通常の電話のために用いることとしている。
【0026】
CPU209は、無線ネットワークのための処理、スロット201にPHSデータカード4が装着された場合のデータ送受信、受信データに基づく各機能部の制御、FlashROM218やSDRAM219のリード/ライト制御なども行うようになっている。更に、ユーザがタッチパネル211等を用いて受信番組指定(チャンネル及び時刻指定)を行ったときには、その情報をメモリカード3に格納する処理を行うようになっている。
【0027】
図4は携帯型視聴装置2における受信番組録画処理(受信番組の符号化映像・音声データをスロット201に装着されているメモリカード3に記録する処理)を示したフローチャートである。CPU209は番組をメモリカード3に録画する処理中において、メモリカード3の残量を検出している(ステップS1)。メモリカード3に残量がない場合又は残りが少ない場合は(ステップS2でYES)、アラームにて報知し(ステップS3)、ユーザにメモリカード3の交換を促す。そして、スロット201に装填してあるメモリカード3が外されたかどうかを判断する(ステップS4)。メモリカード3が外されていない場合には(ステップS4でNO)、メモリカード3に記録されたファイルの削除が必要であるかどうかを判断する(ステップS5)。最初にこのステップS5にきたときには、メモリカード3に残量がない場合又は残りが少ない場合であるので、ファイルの削除が必要であるとの判断がなされることになる。ファイルの削除が必要である場合には、優先度の低いファイルをメモリカード3から削除し(ステップS6)、録画処理を続行し、メモリカードの残量を検出する。ファイルの削除が不要である場合はそのまま録画処理を続行し、メモリカードの残量を検出する。
【0028】
ステップS4でメモリカードが外されたと判断した場合には、受信番組の符号化映像・音声データを内蔵メモリ(例えば、SDRAM219)へ一時的に記録する(ステップS7)。そして、メモリカード3の交換が完了したかどうかを判断し(ステップS8)、メモリカード3の交換が完了していない場合には内蔵メモリへの記録を続ける(ステップS7)。メモリカード3の交換が完了した場合には、内蔵メモリの符号化映像・音声データをメモリカードへ転送し(ステップS9)、新たに受け取る符号化映像・音声データを交換後のメモリカード3に記録する(ステップS10)。そして、録画が終了したかどうかを判断し(ステップS11)、終了していない場合には、ステップS1に進み、終了した場合には、処理を終了する。
【0029】
このように、番組の録画中にメモリカード3が残量不足になったことを前記アラーム報知によってユーザが知ることができ、メモリカード3の交換を迅速に行うことができることになる。報知の形態としては、アラーム(電子音)による報知の他、警告ランプによる報知、警告メッセージを画面表示することによる報知、予め登録したユーザの携帯電話にメール等で通知することによる報知などがある。そして、アラーム後で未だメモリカード3の交換がなされないときには、メモリカード3の既存ファイルの中で優先度が低いファイルを削除するようにしたので、受信番組の符号化映像・音声データの格納領域をしばらくは確保できることになる。そして、メモリカード3がスロット201から外されたときは、受信番組の符号化映像・音声データを内蔵メモリに格納するので、当該データの不記録といった事態は招来せず、メモリカード3の交換後には、内蔵メモリ内の符号化映像・音声データはメモリカード3に転送され、新たに受け取る符号化映像・音声データも続けてメモリカード3に格納されていくことになる。
【0030】
前記ファイルの優先度について説明すると、例えば、特に指定のない記録においては、そのファイルは優先度”低”が与えられ、何からの指定があるときの記録においては、優先度”高”が与えられる。なお、記録を「ループ録画」と「通常録画」といった区分けで取り扱い、ファイルには「ループ録画」又は「通常録画」のラベルを貼り付けることとし、「ループ録画」は優先度”低”、「通常録画」は優先度”高”とすることもできる。そして、「通常録画」のみがメモリカード3に残っている場合には、ファイル削除は実行しないといった処理をとることもできる。「ループ録画」とするか或いは「通常録画」とするかは、録画に際してユーザ設定を受けることとし、ユーザ設定がなされない場合にはデフォルトで「ループ録画」のラベルを貼るようにしてもよい。また、録画後にファイルのプロパティを見てラベルの貼り替えが行えるようにしてもよい。また、上述した既存ファイル削除は行わないで、アラーム報知後及びメモリカード3の交換中において、新たに受け取る符号化映像・音声データを内蔵メモリに格納するようにしてもよい。
【0031】
ところで、ファイル形式として、インデックス形式のファイル(indexFile)で録画コンテンツ1 本全体を管理することで、録画可能な領域が確保できなかった場合、自らの録画先頭部分を取り潰しながら、録画を継続するようにしてもよい。そして、これとは別に他の録画コンテンツの重要度判定のためのファイルもある。Indexにしなくても他のファイルを消しながらの録画はできる。すなわち、装着状態のメモリカード3への格納進行中の状態にある現ファイル(indexFile)の中で先に記録した部分から削除していき、新たに受け取る符号化映像・音声データの格納領域を確保するようにしてもよい(Loop録画許可)。このモードの許可は後述する優先度判定に基づいて許可/不許可が変更されるようにしてもよい。また、メモリカード3に格納するファイルに優先度を与え、優先度の低い既存ファイルから削除する優先度対応削除モード(重要度判定許可)を併存させ、この優先度対応削除モードと、現ファイル内削除モードとの択一的許可或いは両者許可が行えるように構成されていてもよい。現ファイル内削除モード(Loop録画許可)は上記優先度判定に関連して許可/不許可が変更されるようにしてもよい。また、優先度対応削除モードが許可されており、現ファイル内削除モードが許可されていない場合、現ファイルに与えられた優先度よりも低い既存ファイルを削除していくようにしてもよい。また、優先度対応削除モードが許可されており、更に現ファイル内削除モードが許可されている場合、現ファイルに与えられた優先度よりも低い既存ファイルを削除していき、削除する既存ファイルが無くなって追記できなくなると、現ファイル内削除モードを実行するようにしてもよい。
【0032】
上記のインデックスファイルは、図5に示すようなファイル構造を有する。このインデックスファイルについて以下に簡単に説明する。
【0033】
indexFile
CodeTop // 先頭の有効データファイル
CodeEnd // 最終の有効データファイル
CodeTime // 録画時間と単位時間(この例は5min.)とCode数N
FormatHeader // 記録形式(Code1〜N共通)などが指定されている。
Code1 // たとえば5 分程度のMPEG録画ファイル
Code2 // たとえば5 分程度のMPEG録画ファイル
Code3
・・・
CodeN // たとえば5 分程度のMPEG録画ファイル
Code1
[Header、Data]
[Header、Data]
[Header、Data]
・・・
[Header、Data]
CodeN
[Header、Data]
[Header、Data]
[Header、Data]
・・・
[Header、Data]
【0034】
通常はCode1から撮り始めて、新たなCode領域(CodeN+1)を追加できなくなったら、CodeNで終わることとする。CodeTopはCode1、CodeEndはCodeNとなる。
【0035】
Loop録画が許可されておらず、重要度判定許可がされていれば、自身ファイル(現ファイル)より重要度の低い(重要度に応じてLoop録画許可判定を行ってもよい)既存ファイルを削除して、新たなCode領域(CodeN+1)を追加していく。追加できなくなったら終了する。
【0036】
Loop録画が許可されていて、録画中に新たなCode領域(CodeN+1)を追加できなくなったら、CodeTopをCode2に変更し、CodeEndをCode1として録画を継続する。
【0037】
Loop録画が許可されていて、さらに重要度判定許可がされていれば、自身ファイル(現ファイル)より重要度の低い(重要度に応じてLoop録画許可判定を行ってもよい)既存ファイルを削除して、新たなCode領域(CodeN+1)を追加していく。追加できなくなったら、CodeTopをCode2に変更し、CodeEndをCode1として録画を継続する。
【0038】
上記のインデックスファイルを取り出す(別の機器への出力や別の記録媒体への書込等)ときには、インデックス形式ではなく、1本の連続した録画ファイルに変換して出力するようにすればよい。
【0039】
なお、スロット201にPHSデータカード4を装着することで、電子メールやインターネットを利用したページ閲覧等が行えるようになっている。従って、かかる携帯型視聴装置をテレビ視聴や映像再生機として使う他に、ネット端末として利用できる。また、据置型周辺装置1にも携帯型視聴装置2に設けてある通信ブロック216及びインターフェイス(例えば、Bluetooth (商標)など)217と同規格の通信ブロック及びインターフェイスを設け、据置型周辺装置1と携帯型視聴装置2との間で無線ネットワークが行えるようにしてもよい。これによれば、携帯型視聴装置2から選局情報を無線ネットワークで据置型周辺装置1に与えることもできる。また、このような無線ネットワークによって、据置型周辺装置1からMPEG4によるビットストリームデータを携帯型視聴装置2に送信することができ、これによれば、携帯型視聴装置2を用いて現在放送中のアナログ放送の映像をリアルタイムで視ることができる。なお、据置型周辺装置1と携帯型視聴装置2とを有線ネットワークによって接続することとし、上記と同様に選局情報やビットストリームデータの送出を行うこととしてもよい。また、据置型周辺装置1からMPEG4によるビットストリームデータを携帯型視聴装置2に送ることに代えて、据置型周辺装置1からコンポジット映像信号(コンポーネント映像信号でもよい)をAV端子(或いは、S端子やD端子など)経由で携帯型視聴装置2に送出するようにしてもよい。
【0040】
据置型周辺装置1の収容凹部1cに携帯型視聴装置2を装着した状態で放送をリアルタイムに視聴することとし、図1に示したごとく、携帯型視聴装置2の操作ボタンが据置型周辺装置1によって隠されるとする場合は、据置型周辺装置1には当該操作ボタンと同じように操作ボタンを配することとし、この据置型周辺装置1側で携帯型視聴装置2を操作することができるようにしてもよい。据置型周辺装置1の操作ボタンに対する操作情報は、無線ネットワークや有線又は有線ネットワークを用いて携帯型視聴装置2側へ送出することができる。また、据置型周辺装置1にスピーカを備えてもよく、受信放送の音声は据置型周辺装置1のスピーカから出力し、映像は携帯型視聴装置2の液晶表示パネル202で表示するといった形態を採ることができるようにしてもよい。
【0041】
【発明の効果】
以上説明したように、この発明によれば、番組の録画中にメモリカードが残量不足になったことを報知によってユーザが知ることができ、メモリカードの交換を迅速に行うことができることになる。そして、報知後でメモリカードの交換前において、メモリカードの既存ファイルの中で優先度が低いファイルを削除する構成であれば、重要なファイルは保持しつつ受信番組の符号化映像・音声データの格納領域をしばらくは確保できることになる。そして、メモリカードが外されたとき受信番組の符号化映像・音声データを内蔵メモリに格納する構成であれば、交換中データの不記録といった事態は招来しないことになる。
【図面の簡単な説明】
【図1】この発明の実施形態の携帯型視聴装置と据置型周辺装置との装着状態を示した外観斜視図である。
【図2】この発明の実施形態の携帯型視聴装置の外観斜視図である。
【図3】この発明の実施形態の携帯型視聴装置及び据置型周辺装置の構成を示したブロック図である。
【図4】この発明の実施形態の携帯型視聴装置の番組録画中にメモリカードの残量が無くなったときの処理を示したフローチャートである。
【図5】インデックスファイル形式の内容を示した説明図である。
【符号の説明】
1 据置型周辺装置
102 チューナ
108 MPEG4エンコーダ
113 充電回路
2 携帯型視聴装置
202 液晶表示パネル
204 MPEG4デコーダ
219 SDRAM
230 地上波ディジタルチューナ
231 携帯電話部
3 メモリカード
4 PHSデータカード
[0001]
[Industrial application fields]
The present invention relates to a portable viewing device capable of viewing a television or the like.
[0002]
[Prior art]
2. Description of the Related Art Conventionally, portable television receivers have been provided. Such devices receive terrestrial analog broadcasts with a built-in small tuner and project received images on a liquid crystal display panel. In recent years, encoded video data based on MPEG4 (Moving Picture Experts Group 4) is recorded on a memory card, and this memory card is loaded into a slot of a portable viewing device, so that recorded video can be enjoyed on the go. Be able to. The encoded video data based on MPEG4 can be obtained by passing a video received by a normal television broadcast or a video taken by a handy camera through an MPEG4 encoder, or by downloading using the Internet. .
[0003]
[Problems to be solved by the invention]
In this way, advanced video coding technology and downsizing of equipment have made it possible to enjoy video easily even when away from home, but there is a need for a portable viewing device with excellent usability. ing.
[0004]
An object of this invention is to provide the portable viewing apparatus excellent in usability in view of said situation.
[0005]
[Means for Solving the Problems]
In order to solve the above problems, a portable viewing device of the present invention includes a tuner that receives terrestrial digital broadcasting and acquires encoded video / audio data, and stores the encoded video / audio data in a memory card or a built-in memory. Means for reading the encoded video / audio data from the memory card or the built-in memory, and decoding the encoded video / audio data read from the memory card and the encoded video / audio data from the tuner on the display. And a means for displaying audio and outputting audio, and informing the user to replace the memory card when the remaining amount of the encoded video / audio data is less than or equal to a predetermined amount during storage in the memory card. means and, when the memory card after the notification is in the mounted state, the current off in the state of being stored progression to the memory card attachment state It will be removed from the portion previously recorded in the yl, characterized in that to ensure the storage region of the encoded video and audio data received newly.
[0008]
Furthermore, the portable viewing device of the present invention assigns a priority to a file stored in a memory card and coexists with a priority deletion mode for deleting from an existing file with a low priority. You may be comprised so that alternative permission with both in-file deletion mode or both permission can be performed. If the priority-corresponding deletion mode is permitted and the current file deletion mode is not permitted, an existing file having a priority lower than that given to the current file may be deleted. If the priority deletion mode is allowed and the current file deletion mode is allowed, the existing files lower than the priority given to the current file are deleted, and there are no existing files to delete. When it becomes impossible to append, the current file deletion mode may be executed.
[0011]
DETAILED DESCRIPTION OF THE INVENTION
Hereinafter, an embodiment of the present invention will be described with reference to FIGS.
[0012]
As shown in FIGS. 1 and 2, the stationary peripheral device 1 and the portable viewing device 2 of this embodiment constitute a broadcast viewing system. In this system, the stationary peripheral device 1 receives an analog broadcast, and the encoded video / audio data obtained by encoding the received broadcast is inserted into a slot 101 (for example, a compact flash card (trademark)). ) Or multimedia card (trademark, etc.). The main body 1a of the stationary peripheral device 1 is designed to be vertically long, and has a leg portion 1b at the lower portion thereof to prevent overturning. The stationary peripheral device 1 is provided with a power button and operation buttons (play / pause, stop, and feed) related to viewing, but is not provided with operation buttons for channel selection. And the accommodation recessed part 1c is formed in the near side in the main-body part 1a of the stationary peripheral apparatus 1, The portable viewing-and-listening apparatus 2 can be inserted and mounted | worn in this accommodation recessed part 1c. In this attached state, the portable viewing device 2 is charged from the stationary peripheral device 1.
[0013]
The portable viewing device 2 has a substantially square shape and a flat shape, and is configured to be battery-driven. The portable viewing device 2 receives the terrestrial digital broadcast by the tuner 230, displays the video on the liquid crystal display panel 202, and outputs the sound from the earphone 203. Also, the encoded video / audio data is read from the memory card 3 inserted into the slot 201, the video is displayed on the liquid crystal display panel 202, and the audio is output from the earphone 203. A touch panel 211 is pasted on the liquid crystal display panel 202, and a desired instruction can be given by operating the panel with a touch pen or the like. Note that operation buttons (play / pause, stop, feed, volume, etc.) relating to viewing are provided on the casing.
[0014]
Hereinafter, the circuit configurations of the stationary peripheral device 1 and the portable viewing device 2 will be described in detail with reference to FIG.
[0015]
First, the stationary peripheral device 1 will be described. The tuner 102 receives an analog broadcast and outputs this broadcast reception signal. Tuning information for starting tuner 102 and channel selection information (channel information) for receiving an arbitrary broadcast are provided from CPU 110 via I / O (input / output) circuit 103 and system bus 104. The CPU 110 receives channel selection command information (designated channel information, designated time information, etc.) from the user from the memory card 3 via the system bus 104, the PCMCIA interface 105, and the slot 101. The switch 106 has an input unit for inputting the broadcast reception signal and an input unit for inputting an external signal. The switch 106 selects one of the signals and supplies the selected signal to the A / D conversion circuit 107.
[0016]
The A / D conversion circuit 107 converts an analog signal into a digital signal and supplies it to an MPEG4 (Moving Picture Experts Group 4) encoder 108. In accordance with MPEG4, the MPEG4 encoder 108 describes, for example, the background in the video and the person in the background individually as objects, adds shape information to handle each object of this arbitrary shape, and performs DCT processing in the same way as MPEG2. Or a motion vector process or the like is performed to generate a video packet, and a continuous bit stream is output. The audio is also subjected to predetermined encoding, and the audio encoded data is incorporated into the bit stream. The SDRAM 109 is used in the above processing of the MPEG4 encoder 108.
[0017]
The bit stream (encoded video / audio data) output from the MPEG4 encoder 108 is stored in the memory card 3 via the system bus 104, the PCMCIA interface 105, and the slot 101.
[0018]
Two sets of the slot 101 and the PCMCIA interface 105 are provided. In addition to the memory card 3, the PHS data card 4 and the like can be mounted in the slot 101.
[0019]
The charging circuit 113 includes a circuit that converts alternating current from a commercial power source into a direct current, and the like. When the portable viewing device 2 is attached to the stationary peripheral device 1 as shown in FIG. The charging power is supplied to the portable viewing device 2 through the mobile phone.
[0020]
The CPU 110 performs the above-described operation control of the tuner 102 and the processing (recording processing) for storing the output of the MPEG4 encoder 108 in the memory card 3, and also data transmission / reception when the PHS data card 4 is mounted in the slot 101, Control of each functional unit based on the above, read / write control of the Flash ROM 111 and the DRAM 112, and the like are also performed.
[0021]
Next, the portable viewing device 2 will be described. MPEG4 bit stream data (encoded video / audio data) stored in the memory card 3 is supplied to the MPEG4 decoder 204 via the PCMCIA interface 220 and the system bus 213. The tuner 230 that receives the terrestrial digital broadcast takes out the MPEG4 bit stream data broadcast by the terrestrial digital broadcast and provides it to the MPEG4 decoder 204 or to the system bus 213 for recording to the memory card 3 or SDRAM 219. Or supply. The MPEG4 decoder 204 decodes the bit stream data to obtain a quantization coefficient and a motion vector, and supplies video data obtained by performing inverse DCT transformation, motion compensation control based on the motion vector, and the like to the graphics controller 205. The graphics controller 205 performs processing such as color adjustment on video data (for example, R, G, B data). The graphics controller 205 also performs processing for displaying characters or the like (operation buttons, menu screens, EPG screens based on program information acquired from terrestrial digital broadcasts), etc., instructed to be output from the CPU 209 on the liquid crystal display panel 202. The audio decoder 206 receives the audio code data in the bit stream from the MPEG4 decoder 204 and decodes it to generate audio data. The SDRAM 210 is used in the above processing of the MPEG4 decoder 204.
[0022]
The LCD controller 207 drives the liquid crystal display panel 202 based on the video data supplied from the graphics controller 205. The D / A converter 208 receives the audio data output from the audio decoder 206, performs D / A conversion, generates a right (R) sound analog signal and a left (L) sound analog signal to generate the earphone 203. To give.
[0023]
Operation information for the touch panel 211 is given to the CPU 209 via the dedicated interface 212 and the system bus 213. The CPU 209 grasps the contents of the command based on the correspondence between the operation information and the display of the operation buttons on the liquid crystal display panel 202, and executes necessary processing.
[0024]
The main body key 214 corresponds to the operation buttons (play / pause, stop, feed) related to viewing described above. Operation information for the main body key 214 is given to the CPU 209 via the interface 215 and the system bus 213. The CPU 209 executes necessary processing based on the operation information.
[0025]
In addition, a communication block 216 and an interface (for example, Bluetooth (trademark), etc.) 217 are provided to enable a wireless network. Further, a flash ROM 218 and an SDRAM 219 are also provided. The battery 221 is a secondary battery, and obtains power from the stationary peripheral device 1 and stores it. The mobile phone unit 231 is used for normal phone calls.
[0026]
The CPU 209 also performs processing for the wireless network, data transmission / reception when the PHS data card 4 is installed in the slot 201, control of each functional unit based on the received data, read / write control of the FlashROM 218 and SDRAM 219, and the like. ing. Further, when the user designates a received program (channel and time designation) using the touch panel 211 or the like, processing for storing the information in the memory card 3 is performed.
[0027]
FIG. 4 is a flowchart showing received program recording processing (processing for recording encoded video / audio data of the received program in the memory card 3 mounted in the slot 201) in the portable viewing device 2. The CPU 209 detects the remaining amount of the memory card 3 during the process of recording the program on the memory card 3 (step S1). If the memory card 3 has no remaining amount or the remaining amount is low (YES in step S2), an alarm is given (step S3) to prompt the user to replace the memory card 3. Then, it is determined whether or not the memory card 3 loaded in the slot 201 has been removed (step S4). If the memory card 3 has not been removed (NO in step S4), it is determined whether it is necessary to delete the file recorded on the memory card 3 (step S5). When this step S5 is first performed, it is determined that the file needs to be deleted because the memory card 3 has no remaining amount or the remaining amount is small. If it is necessary to delete the file, the low priority file is deleted from the memory card 3 (step S6), the recording process is continued, and the remaining amount of the memory card is detected. If it is not necessary to delete the file, the recording process is continued and the remaining memory card is detected.
[0028]
If it is determined in step S4 that the memory card has been removed, the encoded video / audio data of the received program is temporarily recorded in a built-in memory (eg, SDRAM 219) (step S7). Then, it is determined whether or not the replacement of the memory card 3 has been completed (step S8). If the replacement of the memory card 3 has not been completed, the recording in the built-in memory is continued (step S7). When the replacement of the memory card 3 is completed, the encoded video / audio data in the built-in memory is transferred to the memory card (step S9), and the newly received encoded video / audio data is recorded in the replaced memory card 3. (Step S10). Then, it is determined whether or not the recording is finished (step S11). If not finished, the process proceeds to step S1, and if finished, the process is finished.
[0029]
In this way, the user can know that the memory card 3 has run out during recording of the program by the alarm notification, and the memory card 3 can be replaced quickly. As a form of notification, in addition to notification by an alarm (electronic sound), notification by a warning lamp, notification by displaying a warning message on the screen, notification by notifying a user's mobile phone registered in advance by e-mail, etc. . When the memory card 3 is not yet replaced after the alarm, the low priority file is deleted from the existing files on the memory card 3, so that the storage area for the encoded video / audio data of the received program is deleted. Can be secured for a while. Then, when the memory card 3 is removed from the slot 201, the encoded video / audio data of the received program is stored in the built-in memory. The encoded video / audio data in the built-in memory is transferred to the memory card 3 and the newly received encoded video / audio data is also stored in the memory card 3 in succession.
[0030]
The priority of the file will be described. For example, in the case of recording that is not specified, the file is given a priority “low”, and in the case of recording from what is specified, the priority is given “high”. It is done. It should be noted that the recording is handled by classification such as “loop recording” and “normal recording”, and the label “loop recording” or “normal recording” is attached to the file, and “loop recording” has a priority “low”, “ “Normal recording” can also have a priority “high”. Then, when only “normal recording” remains in the memory card 3, processing such as not deleting the file can be performed. Whether “loop recording” or “normal recording” is selected, user settings are received at the time of recording, and a label of “loop recording” may be attached by default when user settings are not made. In addition, the label may be changed after viewing the file properties after recording. In addition, the existing file deletion described above is not performed, and encoded video / audio data newly received may be stored in the built-in memory after alarm notification and during replacement of the memory card 3.
[0031]
By the way, if the entire recordable content cannot be secured by managing the entire recorded content as an index format file (indexFile) as the file format, the recording is continued while crushing its own recording head portion. You may do it. Apart from this, there are also files for determining the importance of other recorded contents. You can record while deleting other files without using Index. That is, the current file (indexFile) that is in the process of being stored in the attached memory card 3 is deleted from the previously recorded portion, and a storage area for newly received encoded video / audio data is secured. You may make it perform (Loop recording permission). In this mode, permission / non-permission may be changed based on priority determination described later. Also, a priority is given to the file stored in the memory card 3, and a priority deletion mode (importance judgment permission) for deleting from an existing file with a low priority is also coexisted. You may be comprised so that alternative permission with deletion mode or both permission can be performed. In the current file deletion mode (Loop recording permission), permission / non-permission may be changed in relation to the priority determination. Further, when the priority deletion mode is permitted and the current file deletion mode is not permitted, an existing file having a lower priority than the priority given to the current file may be deleted. In addition, when the priority deletion mode is permitted and the current file deletion mode is permitted, the existing file lower than the priority given to the current file is deleted, and the existing file to be deleted is deleted. If it becomes impossible to append to the current file, the in-file deletion mode may be executed.
[0032]
The index file has a file structure as shown in FIG. The index file will be briefly described below.
[0033]
indexFile
CodeTop // First valid data file CodeEnd // Last valid data file CodeTime // Recording time, unit time (in this example, 5 min.), And code number N
FormatHeader /// Recording format (common to Code 1 to N) is specified.
Code1 // For example, MPEG recording file Code2 for about 5 minutes // For example, MPEG recording file Code3 for about 5 minutes
...
CodeN // For example, MPEG recording file Code1 of about 5 minutes
[Header, Data]
[Header, Data]
[Header, Data]
...
[Header, Data]
CodeN
[Header, Data]
[Header, Data]
[Header, Data]
...
[Header, Data]
[0034]
Usually, when shooting is started from Code 1 and a new Code area (Code N + 1) cannot be added, it ends with Code N. CodeTop is Code1, and CodeEnd is CodeN.
[0035]
If Loop recording is not permitted and importance determination is permitted, the existing file having a lower importance than the own file (current file) (Loop recording permission determination may be performed according to the importance) is deleted. Then, a new Code area (Code N + 1) is added. Exit when no more can be added.
[0036]
If Loop recording is permitted and a new Code area (CodeN + 1) cannot be added during recording, CodeTop is changed to Code2, and recording is continued with CodeEnd being Code1.
[0037]
If Loop recording is permitted and importance determination permission is allowed, an existing file having a lower importance level than the own file (current file) (Loop recording permission determination may be performed according to the importance level) is deleted. Then, a new Code area (Code N + 1) is added. When it becomes impossible to add, CodeTop is changed to Code2, and Recording is continued with CodeEnd being Code1.
[0038]
When the above index file is taken out (output to another device, writing to another recording medium, etc.), the index file may be converted into a single continuous recording file and output.
[0039]
It should be noted that by loading the PHS data card 4 in the slot 201, page browsing or the like using electronic mail or the Internet can be performed. Therefore, the portable viewing device can be used as a network terminal in addition to watching TV or playing a video player. Further, the stationary peripheral device 1 is also provided with a communication block 216 and an interface (for example, Bluetooth (trademark), etc.) 217 provided in the portable viewing device 2 and the communication block and interface of the same standard, and the stationary peripheral device 1 A wireless network may be established with the portable viewing device 2. According to this, channel selection information can also be given from the portable viewing device 2 to the stationary peripheral device 1 via the wireless network. Also, such a wireless network can transmit bit stream data in MPEG4 from the stationary peripheral device 1 to the portable viewing device 2, and according to this, the portable viewing device 2 is currently broadcasting. You can watch analog broadcast video in real time. Note that the stationary peripheral device 1 and the portable viewing device 2 may be connected by a wired network, and channel selection information and bit stream data may be transmitted in the same manner as described above. Also, instead of sending bit stream data in MPEG4 from the stationary peripheral device 1 to the portable viewing device 2, a composite video signal (which may be a component video signal) is sent from the stationary peripheral device 1 to an AV terminal (or S terminal). Or the D terminal, etc.) may be sent to the portable viewing device 2.
[0040]
The broadcast is viewed in real time with the portable viewing device 2 mounted in the receiving recess 1c of the stationary peripheral device 1, and the operation buttons of the portable viewing device 2 are displayed on the stationary peripheral device 1 as shown in FIG. If the mobile device is hidden by the stationary peripheral device 1, the operation button is arranged in the same manner as the operation button so that the portable viewing device 2 can be operated on the stationary peripheral device 1 side. It may be. The operation information for the operation buttons of the stationary peripheral device 1 can be sent to the portable viewing device 2 using a wireless network, a wired network, or a wired network. Further, the stationary peripheral device 1 may be provided with a speaker. The received broadcast sound is output from the speaker of the stationary peripheral device 1, and the video is displayed on the liquid crystal display panel 202 of the portable viewing device 2. You may be able to do that.
[0041]
【The invention's effect】
As described above, according to the present invention, the user can know that the memory card has run out during recording of a program, and can quickly replace the memory card. . If the configuration is such that the low priority file is deleted from the existing files on the memory card after the notification and before the replacement of the memory card, the encoded video / audio data of the received program is retained while retaining the important file. The storage area can be secured for a while. If the encoded video / audio data of the received program is stored in the built-in memory when the memory card is removed, a situation such as non-recording of the data being exchanged does not occur.
[Brief description of the drawings]
FIG. 1 is an external perspective view showing a mounting state of a portable viewing device and a stationary peripheral device according to an embodiment of the present invention.
FIG. 2 is an external perspective view of a portable viewing device according to an embodiment of the present invention.
FIG. 3 is a block diagram showing a configuration of a portable viewing device and a stationary peripheral device according to the embodiment of the present invention.
FIG. 4 is a flowchart showing processing when the remaining amount of the memory card runs out during program recording of the portable viewing device according to the embodiment of the present invention.
FIG. 5 is an explanatory diagram showing the contents of an index file format.
[Explanation of symbols]
DESCRIPTION OF SYMBOLS 1 Stationary type peripheral device 102 Tuner 108 MPEG4 encoder 113 Charging circuit 2 Portable viewing apparatus 202 Liquid crystal display panel 204 MPEG4 decoder 219 SDRAM
230 Terrestrial digital tuner 231 Mobile phone unit 3 Memory card 4 PHS data card

Claims (4)

地上波ディジタル放送を受信して符号化映像・音声データを取得するチューナと、符号化映像・音声データをメモリカード又は内蔵メモリに格納する手段と、符号化映像・音声データをメモリカード又は内蔵メモリから読み出す手段と、メモリカードから読み出した符号化映像・音声データ及びチューナからの符号化映像・音声データをデコードしてディスプレイ上に映像表示するとともに音声出力する手段と、符号化映像・音声データをメモリカードに格納中にその残量が所定量以下となり又は残量が無くなったときに、メモリカードの交換を促す報知を行う手段と、前記報知後に前記メモリカードが装着状態であるとき、装着状態のメモリカードへの格納進行中の状態にある現ファイルの中で先に記録した部分から削除していき、新たに受け取る符号化映像・音声データの格納領域を確保することを特徴とする携帯型視聴装置。 A tuner that receives terrestrial digital broadcasting and obtains encoded video / audio data, means for storing the encoded video / audio data in a memory card or a built-in memory, and the encoded video / audio data in a memory card or a built-in memory Means for reading from the memory card, means for decoding the encoded video / audio data read from the memory card and the encoded video / audio data from the tuner, displaying the video on the display, and outputting the audio, and the encoded video / audio data A means for informing the user to replace the memory card when the remaining amount becomes less than or equal to a predetermined amount during storage in the memory card, and when the memory card is in the mounted state after the notification, the mounted state Delete from the previously recorded part of the current file that is in the process of being stored in the memory card Portable viewing device, characterized in that to secure a storage area for encoding video and audio data take only. 請求項に記載の携帯型視聴装置において、メモリカードに格納するファイルに優先度を与え、優先度の低い既存ファイルから削除する優先度対応削除モードを併存させ、この優先度対応削除モードと、現ファイル内削除モードとの択一的許可或いは両者許可が行えるように構成されたことを特徴とする携帯型視聴装置。The portable viewing device according to claim 1 , wherein priority is given to a file stored in a memory card, and a priority-compatible deletion mode for deleting from an existing file having a low priority is coexisted. A portable viewing device configured to be able to selectively permit or permit both of the current file deletion mode. 請求項に記載の携帯型視聴装置において、優先度対応削除モードが許可されており、現ファイル内削除モードが許可されていない場合、現ファイルに与えられた優先度よりも低い既存ファイルを削除していくことを特徴とする携帯型視聴装置。 3. The portable viewing device according to claim 2 , wherein when the priority deletion mode is permitted and the current file deletion mode is not permitted, an existing file having a priority lower than that given to the current file is deleted. A portable viewing device characterized by that. 請求項に記載の携帯型視聴装置において、優先度対応削除モードが許可されており、更に現ファイル内削除モードが許可されている場合、現ファイルに与えられた優先度よりも低い既存ファイルを削除していき、削除する既存ファイルが無くなって追記できなくなると、現ファイル内削除モードを実行することを特徴とする携帯型視聴装置。The portable viewing device according to claim 2 , wherein when the priority deletion mode is permitted and the deletion mode within the current file is permitted, an existing file lower than the priority given to the current file is selected. A portable viewing device that performs deletion in an existing file when an existing file to be deleted is lost and cannot be additionally recorded.
JP2001297392A 2001-09-27 2001-09-27 Portable viewing device Expired - Fee Related JP4121725B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2001297392A JP4121725B2 (en) 2001-09-27 2001-09-27 Portable viewing device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2001297392A JP4121725B2 (en) 2001-09-27 2001-09-27 Portable viewing device

Publications (2)

Publication Number Publication Date
JP2003111003A JP2003111003A (en) 2003-04-11
JP4121725B2 true JP4121725B2 (en) 2008-07-23

Family

ID=19118482

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2001297392A Expired - Fee Related JP4121725B2 (en) 2001-09-27 2001-09-27 Portable viewing device

Country Status (1)

Country Link
JP (1) JP4121725B2 (en)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4707371B2 (en) * 2004-11-19 2011-06-22 京セラ株式会社 Digital broadcast receiver and information storage device

Also Published As

Publication number Publication date
JP2003111003A (en) 2003-04-11

Similar Documents

Publication Publication Date Title
JP4182257B2 (en) Portable viewing device
US8073304B2 (en) Portable recorded television viewer
JP2003110955A (en) Mobile viewing apparatus and its peripheral apparatus
JP3851129B2 (en) Portable viewing device
US20140179423A1 (en) Video Game Display System and Related Method of Using a Portable Computing Device to Control Game Play in Video Games Displayed on a Wireless Display
US20050108462A1 (en) Memory expansion pack for providing content to portable terminal
JP2003224822A (en) Digital signal receiving apparatus, digital signal receiving method, and digital signal receiving system
JP4024061B2 (en) Portable viewing device
JP4073187B2 (en) Portable viewing device
KR101877391B1 (en) Media card, Media apparatus, contents server, and method for operating the same
JP3851130B2 (en) Peripheral device for portable viewing device and broadcast viewing system
US20050266878A1 (en) Multi-function device and method for controlling the device
JP4578831B2 (en) Display device capable of recording / reproducing video signal and / or audio signal and method of operating the same
JP2006217529A (en) Image display system and device
JP4121725B2 (en) Portable viewing device
JP3806688B2 (en) Portable viewing device
JP4267012B2 (en) Video recording apparatus with portable terminal and video recording apparatus
JP2008109175A (en) Communication apparatus with television receiving function
JP4100939B2 (en) Broadcast viewing recording / playback device
JP3869826B2 (en) Video recording device with portable terminal
JP2005323279A (en) Broadcast receiving, recording and reproducing apparatus
JP2003274214A (en) Broadcast audience system
US8417086B2 (en) Data recording apparatus, data transfer method, data transfer program and recording medium, and data transfer system
KR100772368B1 (en) Display apparatus capable of recording/reproducing image signal and/or audio signal and method thereof
JP2004112370A (en) Portable audiovisual unit

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20050905

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20071106

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20071210

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20080129

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20080305

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20080408

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20080430

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110509

Year of fee payment: 3

R151 Written notification of patent or utility model registration

Ref document number: 4121725

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110509

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110509

Year of fee payment: 3

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313111

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110509

Year of fee payment: 3

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120509

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130509

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140509

Year of fee payment: 6

LAPS Cancellation because of no payment of annual fees