JP2004247954A - 制御装置および方法、記録媒体、プログラム、電子装置、並びに遠隔制御システム - Google Patents

制御装置および方法、記録媒体、プログラム、電子装置、並びに遠隔制御システム Download PDF

Info

Publication number
JP2004247954A
JP2004247954A JP2003035531A JP2003035531A JP2004247954A JP 2004247954 A JP2004247954 A JP 2004247954A JP 2003035531 A JP2003035531 A JP 2003035531A JP 2003035531 A JP2003035531 A JP 2003035531A JP 2004247954 A JP2004247954 A JP 2004247954A
Authority
JP
Japan
Prior art keywords
command signal
mode
processing
user
estimation mode
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2003035531A
Other languages
English (en)
Other versions
JP4210907B2 (ja
Inventor
Masanori Machimura
昌紀 町村
Tetsujiro Kondo
哲二郎 近藤
Masaaki Hattori
正明 服部
Hiroto Kimura
裕人 木村
Gakuho Fukushi
岳歩 福士
Takafumi Hibi
啓文 日比
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Priority to JP2003035531A priority Critical patent/JP4210907B2/ja
Publication of JP2004247954A publication Critical patent/JP2004247954A/ja
Application granted granted Critical
Publication of JP4210907B2 publication Critical patent/JP4210907B2/ja
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Landscapes

  • Input From Keyboards Or The Like (AREA)
  • Details Of Television Systems (AREA)
  • Selective Calling Equipment (AREA)

Abstract

【課題】制御可能な機能の項目を制限することなく、操作が簡単で、操作ボタンの少ないリモコンを実現する。
【解決手段】ステップS11において、ユーザの操作に対応する操作信号を、操作履歴情報に照らし合わせることより、操作推定モードに遷移するか否か(通常モードに留まるか)を判定する。具体的には、例えば、異なるチャンネルのチャンネルボタンを押下した頻度が所定の閾値以上である場合、ユーザが頻繁にチャンネルを切り替える操作(いわゆるザッピング)を行っている状態であると判断できるので、操作推定モードに遷移すると判定される。ステップS12において、操作推定モードに遷移し、制御対象であるテレビジョン受像機の画面が分割表示されるように制御するコマンド信号が送信される。本発明は、テレビジョン受像機に付属されるリモートコントローラに適用することができる。
【選択図】 図5

Description

【0001】
【発明の属する技術分野】
本発明は、制御装置および方法、記録媒体、プログラム、電子装置、並びに遠隔制御システムに関し、特に、ユーザの操作意図を推定して制御、または動作するようにした制御装置および方法、記録媒体、プログラム、電子装置、並びに遠隔制御システムに関する。
【0002】
【従来の技術】
テレビジョン受像機等の家電製品に付属されているリモートコントローラ(以下、リモコンとも記述する)は、対応する家電製品の多機能化に伴い、リモコンから制御可能な項目も増加される傾向にあった。リモコンから制御可能な項目を増加させるには、操作ボタンの数を増加させることが最も単純な方法であるが、ユーザにとっては使い勝手がよくない問題があった。
【0003】
そこで、リモコンお使い勝手を低下させない方法として、リモコンに数値入力ボタンとファンクションボタンを設けることが提案されている(例えば、特許文献1参照)。
【0004】
【特許文献1】
特開平7−30972号公報
【0005】
【発明が解決しようとする課題】
しかしながら、上述したような方法によっても、操作の複雑化や操作ボタンの増加は避けられないので、制御可能な機能の項目を制限することなく、操作が簡単で、操作ボタンの少ないリモコンの出現が望まれている課題があった。
【0006】
また、従来のリモコンは、操作ボタン等へのユーザの押下操作に対する反発力が変化することなく一様であって操作感に乏しいので、操作感の高いリモコンの出現が望まれている課題があった。
【0007】
本発明はこのような状況に鑑みてなされたものであり、制御可能な機能の項目を制限することなく、操作が簡単で、操作ボタンの少ないリモコンを実現することを目的とする。
【0008】
【課題を解決するための手段】
本発明の制御装置は、ユーザインタフェースに対するユーザの操作を検知する検知手段と、検知手段の検知結果を操作履歴情報として記憶する記憶手段と、記憶手段によって記憶された操作履歴情報を参照して、通常モードから操作推定モードに遷移するか否かを判定する判定手段と、判定手段によって操作推定モードに遷移しないと判定された場合、通常モードの処理として、検知手段によって検知されたユーザの操作に対応するコマンド信号を送信し、判定手段によって操作推定モードに遷移すると判定された場合、操作推定モードの処理として、検知手段によって検知されたユーザの操作に対応するコマンド信号とは異なるコマンド信号を送信する送信手段とを含むことを特徴とする。
【0009】
前記記憶手段は、検知手段によって検知されたユーザの操作の操作日時、操作内容、操作圧力、操作方向、操作傾斜角、または操作継続時間のうち、少なくとも1つを操作履歴情報として記憶するようにすることができる。
【0010】
前記判定手段は、記憶手段によって記憶された操作履歴情報に含まれる操作日時を参照し、同一のユーザインタフェースに対する操作頻度が高い場合、通常モードから操作推定モードに遷移すると判定するようにすることができる。
【0011】
前記判定手段は、記憶手段によって記憶された操作履歴情報に含まれる操作日時を参照し、異なるユーザインタフェースに対する操作頻度が高い場合、通常モードから操作推定モードに遷移すると判定するようにすることができる。
【0012】
本発明の制御装置は、制御対象の電子装置から送信される、電子装置の状態を示す信号を受信する受信手段をさらに含むことができる。
【0013】
本発明の制御方法は、ユーザインタフェースに対するユーザの操作を検知する検知ステップと、検知ステップの処理での検知結果を操作履歴情報として記憶する記憶ステップと、記憶ステップの処理によって記憶された操作履歴情報を参照して、通常モードから操作推定モードに遷移するか否かを判定する判定ステップと、判定ステップの処理によって操作推定モードに遷移しないと判定された場合、通常モードの処理として、検知ステップの処理で検知されたユーザの操作に対応するコマンド信号を送信し、判定ステップの処理で操作推定モードに遷移すると判定された場合、操作推定モードの処理として、検知ステップの処理によって検知されたユーザの操作に対応するコマンド信号とは異なるコマンド信号を送信する送信ステップとを含むことを特徴とする。
【0014】
本発明の記録媒体のプログラムは、ユーザインタフェースに対するユーザの操作を検知する検知ステップと、検知ステップの処理での検知結果を操作履歴情報として記憶する記憶ステップと、記憶ステップの処理によって記憶された操作履歴情報を参照して、通常モードから操作推定モードに遷移するか否かを判定する判定ステップと、判定ステップの処理によって操作推定モードに遷移しないと判定された場合、通常モードの処理として、検知ステップの処理で検知されたユーザの操作に対応するコマンド信号を送信し、判定ステップの処理で操作推定モードに遷移すると判定された場合、操作推定モードの処理として、検知ステップの処理によって検知されたユーザの操作に対応するコマンド信号とは異なるコマンド信号を送信する送信ステップとを含むことを特徴とする。
【0015】
本発明のプログラムは、ユーザインタフェースに対するユーザの操作を検知する検知ステップと、検知ステップの処理での検知結果を操作履歴情報として記憶する記憶ステップと、記憶ステップの処理によって記憶された操作履歴情報を参照して、通常モードから操作推定モードに遷移するか否かを判定する判定ステップと、判定ステップの処理によって操作推定モードに遷移しないと判定された場合、通常モードの処理として、検知ステップの処理で検知されたユーザの操作に対応するコマンド信号を送信し、判定ステップの処理で操作推定モードに遷移すると判定された場合、操作推定モードの処理として、検知ステップの処理によって検知されたユーザの操作に対応するコマンド信号とは異なるコマンド信号を送信する送信ステップとをコンピュータに実行させることを特徴とする。
【0016】
本発明の電子装置は、リモートコントローラから送信されたコマンド信号を受信する受信手段と、受信手段によって受信されたコマンド信号の種類と受信日時を履歴情報として記憶する記憶手段と、記憶手段によって記憶された履歴情報を参照して、通常モードから操作推定モードに遷移するか否かを判定する判定手段と、判定手段によって操作推定モードに遷移しないと判定された場合、通常モードの処理として、受信手段によって受信されたコマンド信号に対応する動作を実行し、判定手段によって操作推定モードに遷移すると判定された場合、操作推定モードの処理として、受信手段によって受信されたコマンド信号に対する動作とは異なる動作を実行する実行手段とを含むことを特徴とする。
【0017】
本発明の第1の遠隔制御システムは、制御装置が、ユーザインタフェースに対するユーザの操作を検知する検知手段と、検知手段の検知結果を操作履歴情報として記憶する記憶手段と、記憶手段によって記憶された操作履歴情報を参照して、通常モードから操作推定モードに遷移するか否かを判定する判定手段と、判定手段によって操作推定モードに遷移しないと判定された場合、通常モードの処理として、検知手段によって検知されたユーザの操作に対応するコマンド信号を送信し、判定手段によって操作推定モードに遷移すると判定された場合、操作推定モードの処理として、検知手段によって検知されたユーザの操作に対応するコマンド信号とは異なるコマンド信号を送信する送信手段とを含むことを特徴とする。
【0018】
本発明の第2の遠隔制御システムは、電子装置が、リモートコントローラから送信されたコマンド信号を受信する受信手段と、受信手段によって受信されたコマンド信号の種類と受信日時を履歴情報として記憶する記憶手段と、記憶手段によって記憶された履歴情報を参照して、通常モードから操作推定モードに遷移するか否かを判定する判定手段と、判定手段によって操作推定モードに遷移しないと判定された場合、通常モードの処理として、受信手段によって受信されたコマンド信号に対応する動作を実行し、判定手段によって操作推定モードに遷移すると判定された場合、操作推定モードの処理として、受信手段によって受信されたコマンド信号に対する動作とは異なる動作を実行する実行手段とを含むことを特徴とする。
【0019】
本発明の制御装置および方法、並びにプログラムにおいては、ユーザインタフェースに対するユーザの操作が検知されて、その検知結果が操作履歴情報として記憶される。また、記憶された操作履歴情報を参照して、通常モードから操作推定モードに遷移するか否かが判定される。操作推定モードに遷移しないと判定された場合、通常モードの処理として、検知されたユーザの操作に対応するコマンド信号が送信される。反対に、操作推定モードに遷移すると判定された場合、操作推定モードの処理として、検知されたユーザの操作に対応するコマンド信号とは異なるコマンド信号が送信される。
【0020】
本発明の電子装置においては、リモートコントローラから送信されたコマンド信号が受信され、受信されたコマンド信号の種類と受信日時が履歴情報として記憶される。また、記憶された履歴情報が参照され、通常モードから操作推定モードに遷移するか否かが判定される。操作推定モードに遷移しないと判定された場合、通常モードの処理として、受信されたコマンド信号に対応する動作が実行される。反対に、操作推定モードに遷移すると判定された場合、操作推定モードの処理として、受信されたコマンド信号に対する動作とは異なる動作が実行される。
【0021】
本発明の第1の遠隔制御システムにおいては、制御装置により、ユーザインタフェースに対するユーザの操作が検知されて、その検知結果が操作履歴情報として記憶される。また、記憶された操作履歴情報を参照して、通常モードから操作推定モードに遷移するか否かが判定される。操作推定モードに遷移しないと判定された場合、通常モードの処理として、検知されたユーザの操作に対応するコマンド信号が送信される。反対に、操作推定モードに遷移すると判定された場合、操作推定モードの処理として、検知されたユーザの操作に対応するコマンド信号とは異なるコマンド信号が送信される。
【0022】
本発明の第2の遠隔制御システムにおいては、電子装置により、リモートコントローラから送信されたコマンド信号が受信され、受信されたコマンド信号の種類と受信日時が履歴情報として記憶される。また、記憶された履歴情報が参照され、通常モードから操作推定モードに遷移するか否かが判定される。操作推定モードに遷移しないと判定された場合、通常モードの処理として、受信されたコマンド信号に対応する動作が実行される。反対に、操作推定モードに遷移すると判定された場合、操作推定モードの処理として、受信されたコマンド信号に対する動作とは異なる動作が実行される。
【0023】
【発明の実施の形態】
図1は、本発明の一実施の形態であるリモートコントローラの外観を示している。このリモートコントローラ1(以下、リモコン1と記述する)は、電源ボタン3をはじめとする各種の操作ボタン等に対するユーザの操作に対応し、遠隔制御の対象であるテレビジョン受像機に、対応するコマンド信号を送信するものであって、ユーザの操作履歴に対応して、操作ボタン等の操作感を調整したり(操作感調整処理として後述する)、ユーザの操作意図を推定して、押下された操作ボタンに対応するコマンド信号とは異なるコマンド信号を送信したりする(操作推定モードの処理として後述する)ものである。
【0024】
リモコン1の外面には、タッチパネル式LCD(Liquid Crystal Display)2および電源ボタン3をはじめとする各種の操作ボタン等が設けられている。
【0025】
タッチパネル式LCD2は、制御対象であるテレビジョン受像機の状態、送信したコマンドの種類等を表示する。また、タッチパネル式LCD2は、擬似的な操作ボタンを表示し、その擬似的な操作ボタンに対するユーザの操作を検知する。
【0026】
電源ボタン3は、制御対象であるテレビジョン受像機の電源をオン/オフをさせるときに押下される。入力切替ボタン4は、制御対象であるテレビジョン受像機が表示するソース信号(テレビジョン放送信号、VCR(Video Cassette Recorder)からのAV(Audio Video)信号、DVD(Digital Versatile Disc)プレーヤからのAV信号)を切り替えるときに押下される。音声切替ボタン5は、制御対象であるテレビジョン受像機の音声出力の種類(ステレオ、モノラル、主副音声等)を切り替えるときに操作される。消音ボタン6は、制御対象であるテレビジョン受像機の音声出力を消音させるときに操作される。チャンネル(CH)ボタン7は、制御対象であるテレビジョン受像機に、指定するチャンネルを選局させるときに押下される。以下、1チャンネルのチャンネルボタンをチャンネルボタン7−1、2チャンネルのチャンネルボタンをチャンネルボタン7−2、他のチャンネルについても同様に記述する。
【0027】
番組情報ボタン8は、制御対象であるテレビジョン受像機に、選局中の番組の番組情報(例えば、放送信号に含まれるEPG(Electronic Program Guide)等)を表示させるときに押下される。分割表示ボタン9は、制御対象であるテレビジョン受像機に、画面を複数に分割してそれぞれに異なるチャンネルの映像を表示させるときに押下される。
【0028】
チャンネルシフトボタン10は、制御対象であるテレビジョン受像機に、チャンネルの選局を順方向または逆方向にシフトさせるときに押下される。音量ボタン11は、制御対象であるテレビジョン受像機の音声出力のレベルを増減させるときに操作される。なお、チャンネルシフトボタン10、および音量ボタン11は、押下される深さに対応して、チャンネル選局のシフト速度、または音量増減の速度が変化する。
【0029】
ジョイスティック12は、例えば、制御対象であるテレビジョン受像機の画面に表示されるカーソルを移動させるときに任意の方向に傾倒操作される。また、ジョイスティック12は、画面に表示されるカーソルの位置を決定するときに押下操作される。
【0030】
明度調整ボタン13は、制御対象であるテレビジョン受像機の画面の明るさを調整するための明度調整モードに遷移するときに押下操作される。解像度調整ボタン14は、明度調整モードにおいて、制御対象であるテレビジョン受像機の画面の解像度を調整するときの押下操作される。すなわち、解像度調整ボタン14による解像度を調整は、明度調整ボタン13が押下されて明度調整モードとなっているときにだけ可能とされている。
【0031】
図2は、リモコン1の内部の構成例を示している。制御部21は、記憶部26に記憶されている制御用プログラムに従い、バス2を介して接続されている各部の全体を制御する。例えば、制御部21は、操作検出部25からバス22を介して入力される操作信号に従い、送受信部27を制御して、制御対象であるテレビジョン受像機に、対応するコマンド信号を送信させる。また、制御部21は、操作検出部25からの操作信号と、圧力センサ付アクチュエータ24からの計測結果に基づき、操作履歴情報を生成して記憶部26に記憶させる。さらに、制御部21は、記憶部26に記憶されている操作履歴情報に基づき、圧力センサ付アクチュエータ24に供給するためのフィードバック情報を生成する。
【0032】
図3は、制御部21によって生成される操作履歴情報の例を示している。操作履歴情報には、操作された時系列の順序を示すシリアル番号、操作された時刻(年、月、日、時、分、秒)、操作ボタンの種類、並びに、操作時の押下圧力、および押下時間(ミリ秒単位)からなる操作パラメータが含まれる。なお、操作パラメータとして押下時間を記録する代わりに、押下操作が解除された時刻を記憶するようにしてもよい。また、ジョイスティック12が傾倒操作されたときについては、操作パラメータとして傾倒の方向、および傾倒の角度も記録される。
【0033】
図2に戻る。ユーザインタフェース(ユーザI/F)23は、リモコン1の外面に設けられた電源ボタン3乃至解像度調整ボタン14に相当する。圧力センサ付アクチュエータ24は、ユーザインタフェース23に対するユーザの操作圧力を計測し、バス23を介して制御部21に通知する。また、圧力センサ付アクチュエータ24は、制御部21からフィードバック情報に従い、ユーザインタフェース23の操作感、すなわち、押下操作に対する反発力を調整する。
【0034】
操作検出部25は、ユーザインタフェース23に対するユーザからの操作を検出し、対応する操作信号を生成して、バス22を介して制御部21に出力する。
【0035】
記憶部26は、制御部21によって実行される制御用プログラム、制御部21によって生成される操作履歴情報等を記憶する。送受信部27は、制御部21からの制御に従い、制御対象であるテレビジョン受像機に対するコマンド信号を、例えば、赤外線によって送信する。また、送受信部27は、制御対象であるテレビジョン受像機から送信されるステータス信号を受信し、バス22を介して制御部21に出力する。
【0036】
次に、図4は、ユーザの操作履歴に対応して、操作ボタン等の操作感を調整する操作感調整処理について、図4のフローチャートを参照して説明する。
【0037】
ステップS1において、操作検出部25は、ユーザインタフェース23に対するユーザの操作を検知するまで待機し、ユーザの操作を検知したと判定した場合、ステップS2に進む。
【0038】
ステップS2において、操作検知部25は、ユーザの操作に対応する操作信号を生成し、バス22を介して制御部21に出力する。一方、圧力センサ付アクチュエータ24は、ユーザインタフェース23に対するユーザの押下圧力を計測氏、その計測結果を、バス22を介して制御部21に出力する。制御部21は、操作検知部25からの操作信号に基づき、操作時の処理を実行する。
【0039】
ステップS2における操作時の処理について、図5のフローチャートを参照して説明する。ステップS11において、制御部21は、操作検知部25からの操作信号を、記憶部26に記憶されている操作履歴情報に照らし合わせることより、操作推定モードに遷移するか否か(通常モードに留まるか)を判定する。
【0040】
具体的には、例えば、異なるチャンネルのチャンネルボタン7を押下した頻度(操作回数/N秒間)、あるいはチャンネルシフトボタン10の押下頻度が所定の閾値以上である場合、ユーザが頻繁にチャンネルを切り替える操作(いわゆるザッピング)を行っている状態であると判断できるので、操作推定モードのうちのザッピングモードに遷移すると判定される。
【0041】
また、例えば、テレビジョン受像機が選局しているチャンネル(テレビジョン受像機からのステータス信号に基づいて判断する)と同一のチャンネルのチャンネルボタン7が、所定の時間内に所定の回数以上押下されている場合、あるいは、同一のチャンネルのチャンネルボタン7が所定の時間以上押下され続けている場合、操作推定モードのうちの連続操作モードに遷移すると判定される。
【0042】
さらに、例えば、テレビジョン受像機が明度調整モードでない場合において(テレビジョン受像機からのステータス信号に基づいて判断する)、解像度調整ボタン14が所定の時間内に所定の回数以上押下されている場合、あるいは、解像度調整ボタン14が所定の時間以上押下され続けている場合、操作推定モードのうちの連続操作モードに遷移すると判定される。
【0043】
ステップS11において、操作推定モードに遷移すると判定された場合、処理はステップS12に進む。ステップS12において、制御部21は、操作推定モードに遷移して、操作検出部25からの操作信号に対応するコマンド信号を、送受信部27に送信させる。送受信部27は、制御部21からの制御に従い、制御対象であるテレビジョン受像機にコマンド信号を送信する。
【0044】
例えば、操作検出部25からの操作信号が、6チャンネルのチャンネルボタン7−6が押下されたことを示すものであって、操作推定モードのうちのザッピングモードに遷移された場合、ザッピングモードにおける対応するコマンド信号として、図6示すように、制御対象であるテレビジョン受像機の画面31が分割表示されるように制御するコマンド信号(分割表示ボタン9が押下されたときに送信されるコマンド信号と同じもの)が送信され、さらに、画面31に表示されるカーソル32が、6チャンネルの映像が表示されている分割領域を指し示すようにテレビジョン受像機を制御するコマンド信号が送信される。この場合、ザッピングを行っているユーザの選局の助けとなるように、分割表示が行われることになる。
【0045】
また、例えば、チャンネル操作検出部25からの操作信号が、6チャンネルのチャンネルボタン7−6が押下されたことを示すものであって、操作推定モードのうちの連続操作モードに遷移された場合、連続操作モードにおける対応するコマンド信号として、6チャンネルの番組情報が表示されるように制御するコマンド信号(番組情報ボタン8が押下されたときに送信されるコマンド信号と同じもの)、および音量が増加されるように制御するコマンド信号(音量ボタン11の音量増加側が押下されたときに送信されるコマンド信号と同じもの)が送信される。この場合、表示中のチャンネルにユーザが関心を持っていると思われるので、番組情報が表示されることになる。
【0046】
さらに、例えば、チャンネル操作検出部25からの操作信号が、解像度調整ボタン14が押下されたことを示すものであって、操作推定モードのうちの連続操作モードに遷移された場合、連続操作モードにおける対応するコマンド信号として、明度調整モードに遷移させるように制御するコマンド信号(明度調整ボタン13が押下されたときに送信されるコマンド信号と同じもの)が送信された後、解像度を調整するためのコマンド信号が送信される。この場合、ユーザが解像度の変更を行おうとしているので、解像度の変更が可能な明度調整モードに遷移されることになる。
【0047】
このように、操作推定モードでは、ユーザの操作意図が推定されてコマンド信号が送信される。したがって、このような操作推定モードを設けることにより、リモコン1から、番組情報ボタン8、分割表示ボタン9等を省略することができる。
【0048】
反対に、ステップS11において、操作推定モードに遷移しない(通常モードに留まる)と判定された場合、処理はステップS13に進む。制御部21は、通常モードにおいて、操作検出部25からの操作信号に対応するコマンド信号を、送受信部27に送信させる。送受信部27は、制御部21からの制御に従い、制御対象であるテレビジョン受像機にコマンド信号を送信する。
【0049】
例えば、操作検出部25からの操作信号が、6チャンネルのチャンネルボタン7−6が押下されたことを示すものである場合、制御対象であるテレビジョン受像機の選局を6チャンネルに制御するためのコマンド信号が送信される。
【0050】
以上説明したように、ステップS2において、送受信部27からコマンド信号が送信された後、処理は、図4のステップS3に進む。
【0051】
ステップS3において、制御部21は、操作検出部25からの操作信号と、圧力センサ付アクチュエータ24の計測結果に基づき、記憶部26に記憶されている操作履歴情報を更新する。ステップS4において、制御部21は、記憶部26に記憶されている操作履歴情報に基づき、ユーザインタフェース23の操作感を変更するか否かを判定する。例えば、操作履歴情報のシリアル番号が所定の値(例えば、100の倍数)になったとき、あるいは、前回のユーザインタフェース23の操作感を変更してから所定の日数が経過したとき等に、ユーザインタフェース23の操作感を変更すると判定する。
【0052】
ユーザインタフェース23の操作感を変更すると判定された場合、処理はステップS5に進む。ステップS5において、制御部21は、記憶部26に記憶されている操作履歴情報に基づき、圧力センサ付アクチュエータ24を制御するためのフィードバック情報を生成し、バス22を介して圧力センサ付アクチュエータ24に出力する。
【0053】
フィードバック情報には、例えば、操作履歴情報に基づき、ユーザインタフェース23に対するユーザの押下圧力が統計的に強いと判断できる場合、ユーザインタフェース23の反発力を大きくするようにする情報が書き込まれる。反対に、ユーザインタフェース23に対するユーザの押下圧力が統計的に弱いと判断できる場合、ユーザインタフェース23の反発力を小さくするようにする情報が書き込まれる。
【0054】
また、ユーザインタフェース23に含まれるジョイスティック12を傾ける操作の角度が統計的に小さいと判断できる場合には、ジョイスティック12を傾けるユーザの操作範囲(すなわち、傾斜角度)がより広くなるように、ジョイスティック12の反発力を小さくするようにする情報が書き込まれる。反対に、ユーザインタフェース23に含まれるジョイスティック12を傾ける操作の角度が統計的に大きいと判断できる場合には、ジョイスティック12を傾けるユーザの操作範囲がより狭くなるように、ジョイスティック12の反発力を大きくするようにする情報が書き込まれる。
【0055】
ステップS6において、圧力センサ付アクチュエータ24は、制御部21からのフィードバック情報に従い、ユーザインタフェース23の反発力を調整する。処理はステップS1に戻り、それ以降の処理が繰り返される。以上で、リモコン1の操作感調整処理の説明を終了する。
【0056】
以上説明したように、操作感調整処理によれば、ユーザインタフェース23に対する押下圧力が統計的に強い場合、ユーザインタフェース23の反発力が大きく調整され、反対に、ユーザインタフェース23に対する押下圧力が統計的に弱い場合、ユーザインタフェース23の反発力が小さく調整されるので、ユーザにとって操作感が向上する。
【0057】
特に、チャンネルシフトボタン10、および音量ボタン11は、押下される深さに対応して、チャンネル選局のシフト速度、または音量増減の速度が変化するようになされているが、上述した処理により、例えば、押下圧力の強い人が操作しても、反発力が増して深く押下されることが抑えられる。よって、チャンネル選局のシフト速度や音量の増減速度が必要以上に速くなってしまうことを防ぐことができる。反対に、押下圧力の弱い人が操作した場合、反発力が小さくなって押下し易くなる。よって、チャンネル選局のシフト速度や音量の増減速度を容易に調整できるようになる。
【0058】
なお、ユーザインタフェース23の操作感の変更は、ステップS4の処理で実行するか否かを判定する他、ユーザが任意のタイミングで実行させること可能である。
【0059】
また、記憶部26に記憶された操作履歴情報は、圧力センサ付アクチュエータ24を制御するためのフィードバック情報を生成するためだけでなく、例えば、ユーザインタフェース23に対する操作パターン等を抽出して、リモコン1を操作している人の個人認証に利用するようにしてもよい。そして、個人認証を実行した後、操作者毎に操作履歴情報を別個に生成するようにしてもよい。
【0060】
本発明は、テレビジョン受像機を制御するリモコンだけでなく、どのようなリモコンにも適用することが可能である。
【0061】
さらに、上述したように、リモコン1が、操作履歴情報を生成して記憶し、操作履歴情報に基づいてユーザの操作意図に即したコマンド信号を送信する代わりに、制御対象のテレビジョン受像機が、リモコン1から送信されたコマンド信号の履歴を記憶するようにし、その履歴に基づき、ユーザの操作意図を推定して、それに即して自律的に動作するようにしてもよい。
【0062】
ところで、上述した一連の処理は、記憶部26に記憶されている制御プログラム(ソフトウェア)を、制御部21が実行することによって実現されるが、ハードウェアによって実行するようにしてもよい。
【0063】
本明細書において、システムとは、複数の装置により構成される装置全体を表すものである。
【0064】
また、本明細書において、記録媒体に記録されるプログラムを記述するステップは、記載された順序に従って時系列的に行われる処理はもちろん、必ずしも時系列的に処理されなくとも、並列的あるいは個別に実行される処理をも含むものである。
【0065】
【発明の効果】
以上のように、本発明によれば、制御可能な機能の項目を制限することなく、操作が簡単で、操作ボタンの少ないリモコンを実現することが可能となる。
【図面の簡単な説明】
【図1】本発明の一実施の形態であるリモコンの外観を示す図である。
【図2】図1のリモコンの構成例を示すブロック図である。
【図3】操作履歴情報の一例を示す図である。
【図4】リモコンによる操作感調整処理を説明するフローチャートである。
【図5】図4のステップS2の処理を説明するフローチャートである。
【図6】制御対象のテレビジョン受像機の表示例を示す図である。
【符号の説明】
1 リモートコントローラ, 21 制御部,23 ユーザI/F, 24 圧力センサ付アクチュエータ, 25 操作検出部, 26 記憶部, 27 送受信部

Claims (11)

  1. ユーザインタフェースに対するユーザの操作に対応して、制御対象の電子装置にコマンド信号を送信する制御装置において、
    前記ユーザインタフェースに対するユーザの操作を検知する検知手段と、
    前記検知手段の検知結果を操作履歴情報として記憶する記憶手段と、
    前記記憶手段によって記憶された前記操作履歴情報を参照して、通常モードから操作推定モードに遷移するか否かを判定する判定手段と、
    前記判定手段によって前記操作推定モードに遷移しないと判定された場合、前記通常モードの処理として、前記検知手段によって検知された前記ユーザの操作に対応するコマンド信号を送信し、前記判定手段によって前記操作推定モードに遷移すると判定された場合、前記操作推定モードの処理として、前記検知手段によって検知された前記ユーザの操作に対応する前記コマンド信号とは異なるコマンド信号を送信する送信手段と
    を含むことを特徴とする制御装置。
  2. 前記記憶手段は、前記検知手段によって検知されたユーザの操作の操作日時、操作内容、操作圧力、操作方向、操作傾斜角、または操作継続時間のうち、少なくとも1つを前記操作履歴情報として記憶する
    ことを特徴とする請求項1に記載の制御装置。
  3. 前記判定手段は、前記記憶手段によって記憶された前記操作履歴情報に含まれる操作日時を参照し、同一の前記ユーザインタフェースに対する操作頻度が高い場合、前記通常モードから前記操作推定モードに遷移すると判定する
    ことを特徴とする請求項1に記載の制御装置。
  4. 前記判定手段は、前記記憶手段によって記憶された前記操作履歴情報に含まれる操作日時を参照し、異なる前記ユーザインタフェースに対する操作頻度が高い場合、前記通常モードから前記操作推定モードに遷移すると判定する
    ことを特徴とする請求項1に記載の制御装置。
  5. 制御対象の前記電子装置から送信される、前記電子装置の状態を示す信号を受信する受信手段を
    さらに含むことを特徴とする請求項1に記載の制御装置。
  6. ユーザインタフェースに対するユーザの操作に対応して、制御対象の電子装置にコマンド信号を送信する制御方法において、
    前記ユーザインタフェースに対するユーザの操作を検知する検知ステップと、
    前記検知ステップの処理での検知結果を操作履歴情報として記憶する記憶ステップと、
    前記記憶ステップの処理によって記憶された前記操作履歴情報を参照して、通常モードから操作推定モードに遷移するか否かを判定する判定ステップと、
    前記判定ステップの処理によって前記操作推定モードに遷移しないと判定された場合、前記通常モードの処理として、前記検知ステップの処理で検知された前記ユーザの操作に対応するコマンド信号を送信し、前記判定ステップの処理で前記操作推定モードに遷移すると判定された場合、前記操作推定モードの処理として、前記検知ステップの処理によって検知された前記ユーザの操作に対応する前記コマンド信号とは異なるコマンド信号を送信する送信ステップと
    を含むことを特徴とする制御方法。
  7. ユーザインタフェースに対するユーザの操作に対応して、制御対象の電子装置にコマンド信号を送信するためのプログラムであって、
    前記ユーザインタフェースに対するユーザの操作を検知する検知ステップと、
    前記検知ステップの処理での検知結果を操作履歴情報として記憶する記憶ステップと、
    前記記憶ステップの処理によって記憶された前記操作履歴情報を参照して、通常モードから操作推定モードに遷移するか否かを判定する判定ステップと、
    前記判定ステップの処理によって前記操作推定モードに遷移しないと判定された場合、前記通常モードの処理として、前記検知ステップの処理で検知された前記ユーザの操作に対応するコマンド信号を送信し、前記判定ステップの処理で前記操作推定モードに遷移すると判定された場合、前記操作推定モードの処理として、前記検知ステップの処理によって検知された前記ユーザの操作に対応する前記コマンド信号とは異なるコマンド信号を送信する送信ステップと
    を含むことを特徴とするコンピュータが読み取り可能なプログラムが記録されている記録媒体。
  8. ユーザインタフェースに対するユーザの操作に対応して、制御対象の電子装置にコマンド信号を送信するためのプログラムであって、
    前記ユーザインタフェースに対するユーザの操作を検知する検知ステップと、
    前記検知ステップの処理での検知結果を操作履歴情報として記憶する記憶ステップと、
    前記記憶ステップの処理によって記憶された前記操作履歴情報を参照して、通常モードから操作推定モードに遷移するか否かを判定する判定ステップと、
    前記判定ステップの処理によって前記操作推定モードに遷移しないと判定された場合、前記通常モードの処理として、前記検知ステップの処理で検知された前記ユーザの操作に対応するコマンド信号を送信し、
    前記判定ステップの処理で前記操作推定モードに遷移すると判定された場合、前記操作推定モードの処理として、前記検知ステップの処理によって検知された前記ユーザの操作に対応する前記コマンド信号とは異なるコマンド信号を送信する送信ステップと
    を含む処理をコンピュータに実行させることを特徴とするプログラム。
  9. リモートコントローラから送信されたコマンド信号に従って動作する電子装置において、
    前記リモートコントローラから送信された前記コマンド信号を受信する受信手段と、
    前記受信手段によって受信された前記コマンド信号の種類と受信日時を履歴情報として記憶する記憶手段と、
    前記記憶手段によって記憶された前記履歴情報を参照して、通常モードから操作推定モードに遷移するか否かを判定する判定手段と、
    前記判定手段によって前記操作推定モードに遷移しないと判定された場合、前記通常モードの処理として、前記受信手段によって受信された前記コマンド信号に対応する動作を実行し、前記判定手段によって前記操作推定モードに遷移すると判定された場合、前記操作推定モードの処理として、前記受信手段によって受信された前記コマンド信号に対する前記動作とは異なる動作を実行する実行手段と
    を含むことを特徴とする電子装置。
  10. ユーザインタフェースに対するユーザの操作に対応して、コマンド信号を送信する制御装置、および前記制御装置から送信された前記コマンド信号に対応して動作する電子装置から構成される遠隔制御システムにおいて、
    前記制御装置は、
    前記ユーザインタフェースに対するユーザの操作を検知する検知手段と、
    前記検知手段の検知結果を操作履歴情報として記憶する記憶手段と、
    前記記憶手段によって記憶された前記操作履歴情報を参照して、通常モードから操作推定モードに遷移するか否かを判定する判定手段と、
    前記判定手段によって前記操作推定モードに遷移しないと判定された場合、前記通常モードの処理として、前記検知手段によって検知された前記ユーザの操作に対応するコマンド信号を送信し、前記判定手段によって前記操作推定モードに遷移すると判定された場合、前記操作推定モードの処理として、前記検知手段によって検知された前記ユーザの操作に対応する前記コマンド信号とは異なるコマンド信号を送信する送信手段とを含む
    ことを特徴とする遠隔制御システム。
  11. ユーザインタフェースに対するユーザの操作に対応して、コマンド信号を送信する制御装置、および前記制御装置から送信された前記コマンド信号に対応して動作する電子装置から構成される遠隔制御システムにおいて、
    前記電子装置は、
    前記リモートコントローラから送信された前記コマンド信号を受信する受信手段と、
    前記受信手段によって受信された前記コマンド信号の種類と受信日時を履歴情報として記憶する記憶手段と、
    前記記憶手段によって記憶された前記履歴情報を参照して、通常モードから操作推定モードに遷移するか否かを判定する判定手段と、
    前記判定手段によって前記操作推定モードに遷移しないと判定された場合、前記通常モードの処理として、前記受信手段によって受信された前記コマンド信号に対応する動作を実行し、前記判定手段によって前記操作推定モードに遷移すると判定された場合、前記操作推定モードの処理として、前記受信手段によって受信された前記コマンド信号に対する前記動作とは異なる動作を実行する実行手段とを含む
    ことを特徴とする遠隔制御システム。
JP2003035531A 2003-02-13 2003-02-13 制御装置および方法、記録媒体、プログラム、並びに遠隔制御システム Expired - Fee Related JP4210907B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2003035531A JP4210907B2 (ja) 2003-02-13 2003-02-13 制御装置および方法、記録媒体、プログラム、並びに遠隔制御システム

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2003035531A JP4210907B2 (ja) 2003-02-13 2003-02-13 制御装置および方法、記録媒体、プログラム、並びに遠隔制御システム

Publications (2)

Publication Number Publication Date
JP2004247954A true JP2004247954A (ja) 2004-09-02
JP4210907B2 JP4210907B2 (ja) 2009-01-21

Family

ID=33020929

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2003035531A Expired - Fee Related JP4210907B2 (ja) 2003-02-13 2003-02-13 制御装置および方法、記録媒体、プログラム、並びに遠隔制御システム

Country Status (1)

Country Link
JP (1) JP4210907B2 (ja)

Cited By (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007005873A (ja) * 2005-06-21 2007-01-11 Kyocera Corp 放送受信装置、表示制御方法
WO2008078540A1 (ja) * 2006-12-27 2008-07-03 Kyocera Corporation 放送受信装置
JP2008258803A (ja) * 2007-04-03 2008-10-23 Sharp Corp デジタル放送受信装置及びその制御方法、並びにコンピュータプログラム
JP2009201010A (ja) * 2008-02-25 2009-09-03 Seiko Epson Corp プロジェクタシステム、プロジェクタ及びリモートコントローラ
JP2010008984A (ja) * 2008-06-30 2010-01-14 Canon Inc 画像処理システム、画像処理方法及びプログラム
US7927253B2 (en) 2007-08-17 2011-04-19 Adidas International Marketing B.V. Sports electronic training system with electronic gaming features, and applications thereof
US7953549B2 (en) * 2004-01-16 2011-05-31 Adidas Ag Wireless device, program products and methods of using a wireless device to deliver services
JP2012100083A (ja) * 2010-11-02 2012-05-24 Nippon Telegr & Teleph Corp <Ntt> 機器状態推定装置
US8360904B2 (en) 2007-08-17 2013-01-29 Adidas International Marketing Bv Sports electronic training system with sport ball, and applications thereof
JP2013115821A (ja) * 2012-11-21 2013-06-10 Toshiba Corp 情報処理装置、システム及び方法
JP5253376B2 (ja) * 2007-10-16 2013-07-31 パナソニック株式会社 放送受信装置、放送受信方法およびプログラム
US8702430B2 (en) 2007-08-17 2014-04-22 Adidas International Marketing B.V. Sports electronic training system, and applications thereof
US9392941B2 (en) 2010-07-14 2016-07-19 Adidas Ag Fitness monitoring methods, systems, and program products, and applications thereof
US10039970B2 (en) 2010-07-14 2018-08-07 Adidas Ag Location-aware fitness monitoring methods, systems, and program products, and applications thereof
US11040246B2 (en) 2018-02-06 2021-06-22 Adidas Ag Increasing accuracy in workout autodetection systems and methods
US11217341B2 (en) 2011-04-05 2022-01-04 Adidas Ag Fitness monitoring methods, systems, and program products, and applications thereof
US12105208B2 (en) 2004-06-30 2024-10-01 Adidas Ag Systems and methods for providing a health coaching message

Cited By (40)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10955558B2 (en) 2003-01-16 2021-03-23 Adidas Ag Systems and methods for electronically sharing information about health-related activities
US10132930B2 (en) 2003-01-16 2018-11-20 Adidas Ag Systems and methods for maintaining a health-related action database
US10371819B2 (en) 2003-01-16 2019-08-06 Adidas Ag Systems and methods for presenting health-related messages
US10509129B2 (en) 2003-01-16 2019-12-17 Adidas Ag Systems and methods for maintaining a health-related action database
US8620585B2 (en) 2003-01-16 2013-12-31 Adidas Ag Systems and methods for presenting comparative athletic performance information
US10816671B2 (en) 2003-01-16 2020-10-27 Adidas Ag Systems and methods for presenting comparative athletic performance information
US11650325B2 (en) 2004-01-16 2023-05-16 Adidas Ag Systems and methods for providing a health coaching message
US11150354B2 (en) 2004-01-16 2021-10-19 Adidas Ag Systems and methods for modifying a fitness plan
US11119220B2 (en) 2004-01-16 2021-09-14 Adidas Ag Systems and methods for providing a health coaching message
US7953549B2 (en) * 2004-01-16 2011-05-31 Adidas Ag Wireless device, program products and methods of using a wireless device to deliver services
US11493637B2 (en) 2004-01-16 2022-11-08 Adidas Ag Systems and methods for providing a health coaching message
US10571577B2 (en) 2004-01-16 2020-02-25 Adidas Ag Systems and methods for presenting route traversal information
US12105208B2 (en) 2004-06-30 2024-10-01 Adidas Ag Systems and methods for providing a health coaching message
JP2007005873A (ja) * 2005-06-21 2007-01-11 Kyocera Corp 放送受信装置、表示制御方法
WO2008078540A1 (ja) * 2006-12-27 2008-07-03 Kyocera Corporation 放送受信装置
JP2008258803A (ja) * 2007-04-03 2008-10-23 Sharp Corp デジタル放送受信装置及びその制御方法、並びにコンピュータプログラム
US9759738B2 (en) 2007-08-17 2017-09-12 Adidas International Marketing B.V. Sports electronic training system, and applications thereof
US8221290B2 (en) 2007-08-17 2012-07-17 Adidas International Marketing B.V. Sports electronic training system with electronic gaming features, and applications thereof
US9625485B2 (en) 2007-08-17 2017-04-18 Adidas International Marketing B.V. Sports electronic training system, and applications thereof
US9645165B2 (en) 2007-08-17 2017-05-09 Adidas International Marketing B.V. Sports electronic training system with sport ball, and applications thereof
US9242142B2 (en) 2007-08-17 2016-01-26 Adidas International Marketing B.V. Sports electronic training system with sport ball and electronic gaming features
US12020588B2 (en) 2007-08-17 2024-06-25 Adidas International Marketing B.V. Sports electronic training system, and applications thereof
US10062297B2 (en) 2007-08-17 2018-08-28 Adidas International Marketing B.V. Sports electronic training system, and applications thereof
US9087159B2 (en) 2007-08-17 2015-07-21 Adidas International Marketing B.V. Sports electronic training system with sport ball, and applications thereof
US7927253B2 (en) 2007-08-17 2011-04-19 Adidas International Marketing B.V. Sports electronic training system with electronic gaming features, and applications thereof
US8702430B2 (en) 2007-08-17 2014-04-22 Adidas International Marketing B.V. Sports electronic training system, and applications thereof
US8360904B2 (en) 2007-08-17 2013-01-29 Adidas International Marketing Bv Sports electronic training system with sport ball, and applications thereof
JP5253376B2 (ja) * 2007-10-16 2013-07-31 パナソニック株式会社 放送受信装置、放送受信方法およびプログラム
JP2009201010A (ja) * 2008-02-25 2009-09-03 Seiko Epson Corp プロジェクタシステム、プロジェクタ及びリモートコントローラ
US8743133B2 (en) 2008-06-30 2014-06-03 Canon Kabushiki Kaisha Image processing system, image processing method, and program
JP2010008984A (ja) * 2008-06-30 2010-01-14 Canon Inc 画像処理システム、画像処理方法及びプログラム
US10518163B2 (en) 2010-07-14 2019-12-31 Adidas Ag Location-aware fitness monitoring methods, systems, and program products, and applications thereof
US9392941B2 (en) 2010-07-14 2016-07-19 Adidas Ag Fitness monitoring methods, systems, and program products, and applications thereof
US10878719B2 (en) 2010-07-14 2020-12-29 Adidas Ag Fitness monitoring methods, systems, and program products, and applications thereof
US10039970B2 (en) 2010-07-14 2018-08-07 Adidas Ag Location-aware fitness monitoring methods, systems, and program products, and applications thereof
JP2012100083A (ja) * 2010-11-02 2012-05-24 Nippon Telegr & Teleph Corp <Ntt> 機器状態推定装置
US11217341B2 (en) 2011-04-05 2022-01-04 Adidas Ag Fitness monitoring methods, systems, and program products, and applications thereof
JP2013115821A (ja) * 2012-11-21 2013-06-10 Toshiba Corp 情報処理装置、システム及び方法
US11040246B2 (en) 2018-02-06 2021-06-22 Adidas Ag Increasing accuracy in workout autodetection systems and methods
US11779810B2 (en) 2018-02-06 2023-10-10 Adidas Ag Increasing accuracy in workout autodetection systems and methods

Also Published As

Publication number Publication date
JP4210907B2 (ja) 2009-01-21

Similar Documents

Publication Publication Date Title
JP4210907B2 (ja) 制御装置および方法、記録媒体、プログラム、並びに遠隔制御システム
US7639239B2 (en) Control input device with vibrating function
JP5695819B2 (ja) テレビ操作方法
EP1847117B1 (en) Method for enabling user control of an apparatus
US8436948B2 (en) Remote control system, television set and remote controller using manipulation signals
US20120144299A1 (en) Blind Navigation for Touch Interfaces
EP2341492B1 (en) Electronic device including touch screen and operation control method thereof
KR101092558B1 (ko) 영상신호 선택방법 및 영상처리장치
MXPA04009859A (es) Aparato y metodo para conmutar entre un modo interactivo y un modo de programa de television.
EP1493152B1 (en) Remote control system and method for personal video recorder
JP4363053B2 (ja) 制御装置、および調整方法
JP2009182827A (ja) 情報処理装置および情報提供方法
EP2144438A1 (en) Television device with user interface
JP2004236034A (ja) リモコン信号送信装置
JP4536363B2 (ja) リモートコントロール装置
JP3709900B2 (ja) タイマー装置、タイマー機能付電子機器および遠隔操作装置
JP3744842B2 (ja) 遠隔制御装置および遠隔制御プログラム
JP2006157684A (ja) 画面表示設定装置を含むav機器およびオンスクリーン表示画面の表示設定方法
JP5763730B2 (ja) テレビジョン受像機の操作を行うための手元端末、制御装置、及びシステム
JP3118817B2 (ja) 機能切換選択装置
JP2008311822A (ja) コンテンツ再生装置
KR100247593B1 (ko) 오에스디 메뉴 선택방법
KR100874930B1 (ko) 휠을 이용한 원격제어장치
JP2000152117A (ja) 放送状態表示窓を用いた使用者調整モ―ド切換方法
JP2006229664A (ja) リモートコントロールユニットにおける信号送信方法

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20060112

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20080715

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20080910

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20081002

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20081015

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20111107

Year of fee payment: 3

R151 Written notification of patent or utility model registration

Ref document number: 4210907

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20111107

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20111107

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20121107

Year of fee payment: 4

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20121107

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20131107

Year of fee payment: 5

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees