JP2005348036A - Information processing system, information input device, information processing method and program - Google Patents
Information processing system, information input device, information processing method and program Download PDFInfo
- Publication number
- JP2005348036A JP2005348036A JP2004164588A JP2004164588A JP2005348036A JP 2005348036 A JP2005348036 A JP 2005348036A JP 2004164588 A JP2004164588 A JP 2004164588A JP 2004164588 A JP2004164588 A JP 2004164588A JP 2005348036 A JP2005348036 A JP 2005348036A
- Authority
- JP
- Japan
- Prior art keywords
- input
- information
- user
- operation input
- unit
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Withdrawn
Links
Images
Landscapes
- Details Of Television Systems (AREA)
- User Interface Of Digital Computer (AREA)
- Selective Calling Equipment (AREA)
- Position Input By Displaying (AREA)
Abstract
Description
本発明は、情報処理システム、情報入力装置、情報処理方法、および、プログラムに関し、特に、ユーザが所定の装置に対して操作入力を行う場合、機能を選択する操作、その機能に対して値を入力する操作、および、フリーカーソルを移動させる操作を、1つの入力デバイスを用いた一貫した操作により実現することができるようにした、情報処理システム、情報入力装置、情報処理方法、および、プログラムに関する。 The present invention relates to an information processing system, an information input device, an information processing method, and a program, and in particular, when a user performs an operation input to a predetermined device, an operation for selecting a function and a value for the function The present invention relates to an information processing system, an information input device, an information processing method, and a program capable of realizing an input operation and an operation of moving a free cursor by a consistent operation using one input device. .
従来、テレビジョン受像機やエアーコンディショナー(エアコン)などを操作するためのリモートコマンダ(いわゆる、リモコン)においては、リモートコマンダに設けられているそれぞれのボタンなどに対して、操作される装置の各機能が割り当てられるようになされていた。ユーザは、利用したい機能に対応するボタンなどを操作することにより、テレビジョン受像機やエアーコンディショナーを操作することができるようになされていた。 Conventionally, in a remote commander (so-called remote controller) for operating a television receiver, an air conditioner (air conditioner), etc., each function of the device to be operated with respect to each button provided on the remote commander Was to be assigned. A user can operate a television receiver or an air conditioner by operating a button corresponding to a function to be used.
また、テレビジョン受像機の設定を変更するためのメニューを操作するため、十字ボタンが搭載されたリモートコマンダも広く利用されている。さらに、近年では、テレビジョン受像機の表示画面に表示されたカーソルをユーザが自由に操作することができるように、例えば、シャトルボールを備えたリモートコマンダが用いられている(例えば、特許文献1)。 A remote commander equipped with a cross button is also widely used to operate a menu for changing the setting of the television receiver. Furthermore, in recent years, for example, a remote commander including a shuttle ball is used so that a user can freely operate a cursor displayed on a display screen of a television receiver (for example, Patent Document 1). ).
また、リモートコマンダではないが、アップルコンピュータ株式会社が販売しているiPod(商標)では、タッチホイールと称される円形またはドーナッツ状のトラックパッドが搭載されている(例えば、非特許文献1)。このトラックパッドを、ユーザが指で円形になぞることにより、メニュー表示画面内のカーソルを移動させたり、音量の大小を変更することができるため、ユーザにとっては非常に使いやすい。 Further, although not a remote commander, an iPod (trademark) sold by Apple Computer Corporation has a circular or donut-shaped track pad called a touch wheel (for example, Non-Patent Document 1). The user can move the cursor in the menu display screen or change the volume level by tracing the trackpad with a finger.
しかしながら、上述した従来のリモートコマンダを用いて操作入力を行う場合、または、トラックパッドを入力デバイスとして操作入力を行う場合においては、機能を選択する操作、その機能に対する入力値(例えば、音量の大小など)を選択する操作、および、フリーカーソルを移動させる操作を、複数の入力デバイスに対してそれぞれ行う必要があり、更に、これらの操作入力方法には、一貫性がなく、それぞれ、独立した操作として行われていた。例えば、十字ボタンを供えたリモートコマンダにおいては、まず、音量設定ボタンを押したのち、十字ボタンを操作して、音量の大小を調節したり、メニューボタンを押して、メニュー画面を表示させたのち、十字ボタンを操作して、フリーカーソルを移動させる必要がある。同様に、シャトルボールを備えたリモートコマンダでは、カーソルを動かすためにはシャトルボールを操作する必要があり、音量やチャンネルを変更するには、それぞれのボタンを操作する必要がある。また、iPod(商標)では、タッチホイール以外のボタンにより、メニューを呼び出したり、音量変更機能を呼び出したのち、タッチホイールを操作する必要がある。 However, when performing operation input using the above-described conventional remote commander, or when performing operation input using the trackpad as an input device, an operation for selecting a function, an input value for the function (for example, a volume level) Etc.) and the operation to move the free cursor must be performed for each of the multiple input devices. Furthermore, these operation input methods are not consistent and are independent operations. It was done as. For example, in a remote commander with a cross button, first press the volume setting button, then operate the cross button to adjust the volume level or press the menu button to display the menu screen, It is necessary to move the free cursor by operating the cross button. Similarly, in a remote commander equipped with a shuttle ball, it is necessary to operate the shuttle ball to move the cursor, and it is necessary to operate each button to change the volume and channel. In addition, in the iPod (trademark), it is necessary to operate the touch wheel after calling a menu or calling a volume changing function by a button other than the touch wheel.
本発明はこのような状況に鑑みてなされたものであり、機能を選択する操作、その機能に対して値を入力する操作、および、フリーカーソルを移動させる操作を、1つの入力デバイスを用いた一貫した操作により、実現することができるようにするものである。 The present invention has been made in view of such a situation, and an operation for selecting a function, an operation for inputting a value for the function, and an operation for moving a free cursor are performed using one input device. It can be realized by consistent operation.
本発明の情報処理システムは、情報入力装置と情報処理装置により構成される情報処理システムであって、情報入力装置は、ユーザの操作入力を受ける操作入力手段と、操作入力手段により入力されたユーザの操作入力を基に、入力モードを制御する入力モード制御手段と、入力モード制御手段により制御される入力モードに関する情報を、情報処理装置に送信する第1の送信手段とを備え、操作入力手段は、所定の表面積を有する図形描写領域を有し、入力モード制御手段は、ユーザにより操作入力手段の図形描写領域に描写された図形の形状を基に、入力モードを制御し、情報処理装置は、情報入力装置の第1の送信手段により送信される情報を受信する第1の受信手段と、第1の受信手段により受信された情報に基づいて、情報処理装置が実行可能な動作を制御する動作制御手段と、動作制御手段による制御にしたがって、所定の情報を表示する表示手段とを備え、表示手段は、入力モードに対応して、ユーザによる情報入力装置の操作入力手段への操作入力を補助するための情報を表示することを特徴とする。 The information processing system according to the present invention is an information processing system including an information input device and an information processing device, and the information input device includes an operation input unit that receives a user's operation input, and a user input by the operation input unit. An input mode control means for controlling the input mode based on the operation input, and a first transmission means for transmitting information relating to the input mode controlled by the input mode control means to the information processing apparatus. Has a graphic drawing area having a predetermined surface area, and the input mode control means controls the input mode based on the shape of the graphic drawn by the user in the graphic drawing area of the operation input means. A first receiving means for receiving information transmitted by the first transmitting means of the information input device, and an information processing device based on the information received by the first receiving means. The operation control means for controlling the operation that can be executed, and the display means for displaying the predetermined information according to the control by the operation control means, the display means corresponding to the input mode of the information input device by the user Information for assisting operation input to the operation input means is displayed.
情報処理装置には、入力モードに関する情報を情報入力装置に送信する第2の送信手段を更に備えさせるようにすることができ、情報入力装置には、情報処理装置の第2の送信手段により送信される、入力モードに関する情報を受信する第2の受信手段を更に備えさせるようにすることができ、情報処理装置の動作制御手段には、情報処理装置が実行中の動作に基づいて、入力モードを指定するための情報を、第2の送信手段により情報入力装置に送信させさせるようにすることができ、情報入力装置の入力モード制御手段には、第2の受信手段により受信された入力モードを指定するための情報を基に、入力モードを更に制御させるようにすることができる。 The information processing apparatus may further include a second transmission unit that transmits information related to the input mode to the information input apparatus. The information input apparatus transmits the information by the second transmission unit of the information processing apparatus. The second receiving means for receiving information on the input mode can be further provided. The operation control means of the information processing apparatus has the input mode based on the operation being executed by the information processing apparatus. The information for designating the information can be transmitted to the information input device by the second transmission means, and the input mode control means of the information input device has the input mode received by the second reception means. The input mode can be further controlled based on the information for designating.
情報処理装置の動作制御手段には、実行中の動作が、表示手段により表示されている所定の情報を参照しているユーザにより、情報入力装置を用いてカーソルの移動が指令される状態である場合、入力モードをカーソルの移動に対応する操作入力を受ける入力モードとするための情報を、第2の送信手段により情報入力装置に送信させるようにすることができる。 The operation control means of the information processing apparatus is in a state in which the operation being executed is instructed to move the cursor using the information input device by the user referring to the predetermined information displayed by the display means. In this case, information for setting the input mode to an input mode that receives an operation input corresponding to the movement of the cursor can be transmitted to the information input device by the second transmitting means.
情報入力装置の表示手段に表示される、ユーザによる操作入力を補助するための情報は、情報入力装置の操作入力手段の形状に対応した形状で表示されるものとすることができる。 Information for assisting the operation input by the user displayed on the display means of the information input device can be displayed in a shape corresponding to the shape of the operation input means of the information input device.
情報入力装置の操作入力手段の形状は円形であるものとすることができる。 The shape of the operation input means of the information input device can be circular.
本発明の第1の情報処理方法は、所定の図形描写領域を有し、ユーザの操作入力を受ける操作入力部が設けられている情報入力装置と、所定の情報を表示可能な表示部が設けられている情報処理装置とにより構成される情報処理システムの情報処理方法であって、情報入力装置において、操作入力部により入力されたユーザの第1の操作入力を取得する第1の操作入力取得ステップと、情報入力装置において、第1の操作入力取得ステップの処理により取得されたユーザの第1の操作入力を基に、図形描写領域に描写された図形の形状を分析する形状分析ステップと、情報入力装置において、形状分析ステップの処理により分析された、図形の形状を基に、ユーザの指令内容を抽出する抽出ステップと、情報入力装置において、抽出ステップの処理により抽出されたユーザの指令内容に対応する情報を情報処理装置へ送信する第1の送信ステップと、情報入力装置において、抽出ステップの処理により抽出されたユーザの指令内容に基づいて、入力モードを制御する入力モード制御ステップと、情報処理装置において、第1の送信ステップの処理により送信された、ユーザの指令内容に対応する情報を受信する受信ステップと、情報処理装置において、受信ステップの処理により受信されたユーザの指令内容に基づいて、表示部への、所定の情報の表示を制御する表示制御ステップと、情報入力装置において、入力モード制御ステップの処理により制御されている入力モードに基づいて、操作入力部により入力された、表示部を参照したユーザの第2の操作入力を取得する第2の操作入力取得ステップと、第2の操作入力取得ステップの処理により取得されたユーザの第2の操作入力に対応する情報を情報処理装置へ送信する第2の送信ステップとを含むことを特徴とする。 According to a first information processing method of the present invention, an information input device having a predetermined graphic rendering area and provided with an operation input unit for receiving a user's operation input, and a display unit capable of displaying predetermined information are provided. An information processing method for an information processing system configured with an information processing apparatus that is configured to obtain a first operation input of a user that is input by an operation input unit in the information input device And a shape analysis step for analyzing the shape of the graphic drawn in the graphic drawing area based on the first operation input of the user acquired by the processing of the first operation input acquisition step in the information input device; In the information input device, an extraction step for extracting the command content of the user based on the shape of the figure analyzed by the processing of the shape analysis step, and in the information input device, the extraction step A first transmission step for transmitting information corresponding to a user instruction content extracted by the process to the information processing apparatus; and an input mode based on the user instruction content extracted by the extraction step process in the information input device. An input mode control step for controlling the information, a reception step for receiving information corresponding to the user's instruction content transmitted by the processing of the first transmission step in the information processing device, and a processing of the reception step in the information processing device The display control step for controlling the display of predetermined information on the display unit based on the content of the user command received by the control unit, and the input mode controlled by the processing of the input mode control step in the information input device The second operation for acquiring the second operation input of the user referring to the display unit, which is input by the operation input unit. An input obtaining step, characterized in that it comprises a second transmission step of transmitting information corresponding to the second operation input of the user obtained by the process of the second operation input obtaining step to the information processing apparatus.
本発明の第1のプログラムは、所定の図形描写領域を有する操作入力部を用いて、所定の情報を表示可能な表示部が設けられている情報処理装置に対するユーザの操作入力を受け、情報処理装置にユーザの操作入力に対応する情報を送信させる処理をコンピュータに実行させるためのプログラムであって、操作入力部により入力されたユーザの第1の操作入力を取得する第1の操作入力取得ステップと、第1の操作入力取得ステップの処理により取得されたユーザの第1の操作入力を基に、図形描写領域に描写された図形の形状を分析する形状分析ステップと、形状分析ステップの処理により分析された図形の形状を基に、ユーザの指令内容を抽出する抽出ステップと、抽出ステップの処理により抽出されたユーザの指令内容に対応する情報の情報処理装置への送信を制御する第1の送信制御ステップと、抽出ステップの処理により抽出されたユーザの指令内容に基づいて、入力モードを制御する入力モード制御ステップと、第1の送信制御ステップの処理により送信が制御されたユーザの指令内容に対応する情報を受信した情報処理装置の表示部に表示される操作入力を補助するための情報を参照したユーザにより、操作入力部により入力された第2の操作入力を、入力モード制御ステップの処理により制御されている入力モードに基づいて取得する第2の操作入力取得ステップと、第2の操作入力取得ステップの処理により取得されたユーザの第2の操作入力に対応する情報の、情報処理装置への送信を制御する第2の送信制御ステップと含むことを特徴とする処理をコンピュータに実行させる。
The first program of the present invention receives an operation input from a user to an information processing apparatus provided with a display unit capable of displaying predetermined information, using an operation input unit having a predetermined graphic rendering area, A first operation input acquisition step for causing a computer to execute processing for transmitting information corresponding to a user's operation input to a device, and acquiring a user's first operation input input by an operation input unit And a shape analysis step for analyzing the shape of the graphic drawn in the graphic drawing area based on the first operation input of the user acquired by the processing of the first operation input acquisition step, and the processing of the shape analysis step An extraction step for extracting user command contents based on the shape of the analyzed figure, and information corresponding to the user command contents extracted by the processing of the extraction step A first transmission control step for controlling transmission to the information processing device; an input mode control step for controlling an input mode based on a user instruction content extracted by the extraction step; and a first transmission control step. Input by the operation input unit by the user who referred to the information for assisting the operation input displayed on the display unit of the information processing apparatus that has received the information corresponding to the instruction content of the user whose transmission is controlled by the process of The second operation input acquisition step for acquiring the second operation input based on the input mode controlled by the process of the input mode control step, and the user's first operation acquired by the process of the second operation input acquisition step And a second transmission control step for controlling transmission of information corresponding to the
本発明の情報処理システムおよび第1の情報処理方法、並びに、第1のプログラムにおいては、情報入力装置で、ユーザの操作入力が取得され、取得されたユーザの操作入力を基に、図形描写領域に描写された図形の形状が分析され、図形の形状を基に、ユーザの指令内容が抽出され、ユーザの指令内容に対応する情報が情報処理装置へ送信され、ユーザの指令内容に基づいて、入力モードが制御され、ユーザの指令内容に対応する情報を受信した情報処理装置の表示部に、操作入力を補助するための情報が表示され、情報入力装置で、これを参照したユーザによる操作入力が取得され、取得されたユーザ操作入力に対応する情報が、情報処理装置へ送信される。 In the information processing system, the first information processing method, and the first program of the present invention, a user's operation input is acquired by the information input device, and the graphic drawing area is based on the acquired user's operation input. The shape of the graphic depicted in FIG. 6 is analyzed, and based on the shape of the graphic, the user's command content is extracted, information corresponding to the user's command content is transmitted to the information processing device, and based on the user's command content, Information for assisting the operation input is displayed on the display unit of the information processing apparatus whose input mode is controlled and receives information corresponding to the user's command content, and the operation input by the user who refers to the information is displayed on the information input apparatus Is acquired, and information corresponding to the acquired user operation input is transmitted to the information processing apparatus.
本発明の情報入力装置は、ユーザの操作入力を受ける操作入力手段と、操作入力手段により入力されたユーザの操作入力を基に、入力モードを制御する入力モード制御手段と、入力モード制御手段により制御される入力モードにしたがって、第1の情報を表示する表示手段と、ユーザが所定の装置を制御するための操作入力に関する第2の情報を、所定の装置に送信する送信手段とを備え、操作入力手段は、所定の表面積を有する図形描写領域を有し、入力モード制御手段は、ユーザにより操作入力手段の図形描写領域に描写された図形の形状を基に、入力モードを制御し、表示手段により表示される第1の情報は、入力モードに対応して、ユーザによる情報入力装置の操作入力手段への操作入力を補助するための情報であり、送信手段により送信される第2の情報は、表示手段により表示された第1の情報を参照したユーザにより実行された操作入力に関する情報であることを特徴とする。 An information input device according to the present invention includes an operation input unit that receives a user operation input, an input mode control unit that controls an input mode based on the user operation input input by the operation input unit, and an input mode control unit. In accordance with the input mode to be controlled, a display means for displaying the first information, and a transmission means for transmitting the second information related to the operation input for the user to control the predetermined device to the predetermined device, The operation input means has a graphic drawing area having a predetermined surface area, and the input mode control means controls and displays the input mode based on the shape of the graphic drawn in the graphic drawing area of the operation input means by the user. The first information displayed by the means is information for assisting the user to perform an operation input to the operation input means of the information input device corresponding to the input mode. Second information to be transmitted, characterized in that the information relating to the performed operating input by the user with reference to the first information displayed by the display means.
表示手段に表示される、ユーザによる操作入力を補助するための情報は、操作入力手段の形状に対応した形状で表示されるものとすることができる。 Information for assisting the operation input by the user displayed on the display means may be displayed in a shape corresponding to the shape of the operation input means.
操作入力手段の形状は円形であるものとすることができる。 The shape of the operation input means can be circular.
本発明の第2の情報処理方法は、所定の図形描写領域を有し、ユーザの操作入力を受ける操作入力部と、所定の情報を表示可能な表示部とを備える情報入力装置の情報処理方法であって、操作入力部により入力されたユーザの第1の操作入力を取得する第1の操作入力取得ステップと、第1の操作入力取得ステップの処理により取得された、ユーザの第1の操作入力を基に、図形描写領域に描写された図形の形状を分析する形状分析ステップと、形状分析ステップの処理により分析された、図形の形状を基に、ユーザの指令内容を抽出する抽出ステップと、抽出ステップの処理により抽出されたユーザの指令内容に基づいて、表示部への、所定の情報の表示を制御する表示制御ステップと、抽出ステップの処理により抽出されたユーザの指令内容に対応する情報を他の装置へ送信する第1の送信ステップと、抽出ステップの処理により抽出されたユーザの指令内容に基づいて、入力モードを制御する入力モード制御ステップと、入力モード制御ステップの処理により制御されている入力モードに基づいて、操作入力部により入力されたユーザの第2の操作入力を取得する第2の操作入力取得ステップと、第2の操作入力取得ステップの処理により取得されたユーザの第2の操作入力に対応する情報を他の装置へ送信する第2の送信ステップとを含むことを特徴とする。 A second information processing method according to the present invention is an information processing method for an information input device, which includes an operation input unit that has a predetermined graphic rendering area and receives a user operation input, and a display unit that can display predetermined information. The first operation input acquisition step of acquiring the first operation input of the user input by the operation input unit, and the first operation of the user acquired by the processing of the first operation input acquisition step A shape analysis step for analyzing the shape of the graphic drawn in the graphic drawing area based on the input; and an extraction step for extracting the user's command content based on the shape of the graphic analyzed by the processing of the shape analysis step; The display control step for controlling the display of predetermined information on the display unit based on the user command content extracted by the extraction step process, and the user command extracted by the extraction step process A first transmission step for transmitting information corresponding to the content to another device, an input mode control step for controlling the input mode based on the user instruction content extracted by the processing of the extraction step, and an input mode control step The second operation input acquisition step for acquiring the second operation input of the user input by the operation input unit and the processing of the second operation input acquisition step based on the input mode controlled by the processing of And a second transmission step of transmitting information corresponding to the user's second operation input to another device.
本発明の第2のプログラムは、所定の図形描写領域を有し、ユーザの操作入力を受ける操作入力部と、所定の情報を表示可能な表示部とを用いて、他の情報処理装置に対するユーザの操作入力を受け、情報処理装置にユーザの操作入力に対応する情報を送信させる処理をコンピュータに実行させるためのプログラムであって、操作入力部により入力されたユーザの第1の操作入力を取得する第1の操作入力取得ステップと、第1の操作入力取得ステップの処理により取得された、ユーザの第1の操作入力を基に、図形描写領域に描写された図形の形状を分析する形状分析ステップと、形状分析ステップの処理により分析された、図形の形状を基に、ユーザの指令内容を抽出する抽出ステップと、抽出ステップの処理により抽出されたユーザの指令内容に基づいて、表示部への、所定の情報の表示を制御する表示制御ステップと、抽出ステップの処理により抽出されたユーザの指令内容に対応する情報の、情報処理装置への送信を制御する第1の送信制御ステップと、抽出ステップの処理により抽出されたユーザの指令内容に基づいて、入力モードを制御する入力モード制御ステップと、入力モード制御ステップの処理により制御されている入力モードに基づいて、操作入力部により入力されたユーザの第2の操作入力を取得する第2の操作入力取得ステップと、第2の操作入力取得ステップの処理により取得されたユーザの第2の操作入力に対応する情報の、情報処理装置への送信を制御する第2の送信ステップとを含むことを特徴とする処理をコンピュータに実行させる。 A second program of the present invention is a user for another information processing apparatus using an operation input unit that has a predetermined graphic rendering area and receives a user's operation input and a display unit that can display predetermined information. Is a program for causing a computer to execute processing for transmitting information corresponding to a user's operation input to the information processing apparatus, and obtaining the first operation input of the user input by the operation input unit Shape analysis for analyzing the shape of the graphic drawn in the graphic drawing area based on the first operation input of the user acquired by the first operation input acquisition step and the processing of the first operation input acquisition step An extraction step for extracting the user's command content based on the shape of the figure analyzed by the step and the shape analysis step; and the user extracted by the extraction step Based on the contents of the instruction, the display control step for controlling the display of the predetermined information on the display unit and the transmission of the information corresponding to the instruction contents of the user extracted by the processing of the extraction step to the information processing device are controlled. The first transmission control step, the input mode control step for controlling the input mode based on the user instruction content extracted by the processing of the extraction step, and the input mode controlled by the processing of the input mode control step. Based on the second operation input acquisition step for acquiring the second operation input of the user input by the operation input unit and the second operation input of the user acquired by the processing of the second operation input acquisition step. A second transmission step for controlling transmission of the corresponding information to the information processing apparatus.
本発明の情報入力装置および第2の情報処理方法、並びに、第2のプログラムにおいては、ユーザの操作入力が取得され、取得されたユーザの操作入力を基に、図形描写領域に描写された図形の形状が分析され、図形の形状を基に、ユーザの指令内容が抽出され、ユーザの指令内容に対応する情報が情報処理装置へ送信され、ユーザの指令内容に基づいて、入力モードが制御され、ユーザの指令内容に基づいて操作入力を補助するための情報が表示され、これを参照したユーザによる操作入力が取得され、取得されたユーザ操作入力に対応する情報が、情報処理装置へ送信される。 In the information input device, the second information processing method, and the second program of the present invention, a user's operation input is acquired, and a graphic drawn in the graphic drawing area based on the acquired user's operation input The user's command content is extracted based on the shape of the figure, information corresponding to the user's command content is transmitted to the information processing apparatus, and the input mode is controlled based on the user's command content. The information for assisting the operation input is displayed based on the user's instruction content, the operation input by the user referring to this is acquired, and the information corresponding to the acquired user operation input is transmitted to the information processing apparatus. The
本発明においては、所定の装置を遠隔操作することができ、特に、ただ1つの操作入力デバイスに描かれる図形の形状を基に、入力モードが制御され、入力モードに基づいたGUIが表示部に表示され、GUIを参照したユーザによる、ただ1つの操作入力デバイスに対する操作入力を基に、所定の装置が制御される。 In the present invention, a predetermined apparatus can be remotely operated. In particular, the input mode is controlled based on the shape of a graphic drawn on only one operation input device, and a GUI based on the input mode is displayed on the display unit. A predetermined apparatus is controlled based on an operation input to a single operation input device by a user who is displayed and refers to the GUI.
以下に本発明の実施の形態を説明するが、本明細書に記載の発明と、発明の実施の形態との対応関係を例示すると、次のようになる。この記載は、本明細書に記載されている発明をサポートする実施の形態が、本明細書に記載されていることを確認するためのものである。したがって、発明の実施の形態中には記載されているが、発明に対応するものとして、ここには記載されていない実施の形態があったとしても、そのことは、その実施の形態が、その発明に対応するものではないことを意味するものではない。逆に、実施の形態が発明に対応するものとしてここに記載されていたとしても、そのことは、その実施の形態が、その発明以外の発明には対応しないものであることを意味するものでもない。 Embodiments of the present invention will be described below. The correspondence relationship between the invention described in this specification and the embodiments of the invention is exemplified as follows. This description is intended to confirm that the embodiments supporting the invention described in this specification are described in this specification. Therefore, even if there is an embodiment that is described in the embodiment of the invention but is not described here as corresponding to the invention, the fact that the embodiment is not It does not mean that it does not correspond to the invention. Conversely, even if an embodiment is described herein as corresponding to an invention, that means that the embodiment does not correspond to an invention other than the invention. Absent.
更に、この記載は、本明細書に記載されている発明の全てを意味するものでもない。換言すれば、この記載は、本明細書に記載されている発明であって、この出願では請求されていない発明の存在、すなわち、将来、分割出願されたり、補正により出現、追加される発明の存在を否定するものではない。 Further, this description does not mean all the inventions described in this specification. In other words, this description is for the invention described in the present specification, which is not claimed in this application, that is, for the invention that will be applied for in the future or that will appear and be added by amendment. It does not deny existence.
請求項1に記載の情報処理システムは、情報入力装置(例えば、リモートコマンダ1またはリモートコマンダ121)と情報処理装置(例えば、テレビジョン受像機2またはテレビジョン受像機122)により構成される情報処理システムにであって、情報入力装置は、ユーザの操作入力を受ける操作入力手段(例えば、図1のトラックパッド11)と、操作入力手段により入力されたユーザの操作入力を基に、入力モードを制御する入力モード制御手段(例えば、図4の状態管理処理部93、図18の状態管理処理部131)と、入力モード制御手段により制御される入力モードに関する情報を、情報処理装置に送信する第1の送信手段(例えば、図4の赤外線送信部12、すなわち図4の赤外線送信部96、または、図18の赤外線送受信部132)とを備え、操作入力手段は、所定の表面積を有する図形描写領域を有し、入力モード制御手段は、ユーザにより操作入力手段の図形描写領域に描写された図形の形状(例えば、図6を用いて説明した形状)を基に、入力モードを制御し、情報処理装置は、情報入力装置の第1の送信手段により送信される情報を受信する第1の受信手段(例えば、図4の赤外線受信部101または図18の赤外線送受信部141)と、第1の受信手段により受信された情報に基づいて、情報処理装置が実行可能な動作を制御する動作制御手段(例えば、図4の動作制御部103、または、図18の動作制御部142)と、動作制御手段による制御にしたがって、所定の情報を表示する表示手段(例えば、図1の表示部22)とを備え、表示手段は、入力モードに対応して、ユーザによる情報入力装置の操作入力手段への操作入力を補助するための情報(例えば、図7乃至図11、並びに、図13および図14を用いて説明した表示画面に表示される情報)を表示することを特徴とする。
The information processing system according to
情報処理装置は、入力モードに関する情報を情報入力装置に送信する第2の送信手段(例えば、図18の赤外線送受信部141)を更に備えることができ、情報入力装置は、情報処理装置の第2の送信手段により送信される、入力モードに関する情報を受信する第2の受信手段(例えば、図18の赤外線送受信部132)を更に備えることができ、情報処理装置の動作制御手段は、情報処理装置が実行中の動作に基づいて、入力モードを指定するための情報を、第2の送信手段により情報入力装置に送信させることができ、情報入力装置の入力モード制御手段は、第2の受信手段により受信された入力モードを指定するための情報を基に、入力モードを更に制御することができる。
The information processing apparatus can further include a second transmission unit (for example, the infrared transmission /
請求項6に記載の情報処理方法は、所定の図形描写領域を有し、ユーザの操作入力を受ける操作入力部(例えば、図1、または、図21のトラックパッド11)が設けられている情報入力装置と、所定の情報を表示可能な表示部(例えば、図1の表示部22)が設けられている情報処理装置とにより構成される情報処理システムの情報処理方法であって、情報入力装置において、操作入力部により入力されたユーザの第1の操作入力を取得する第1の操作入力取得ステップ(例えば、図16のステップS3、または、図19のステップS43の処理)と、情報入力装置において、第1の操作入力取得ステップの処理により取得されたユーザの第1の操作入力を基に、図形描写領域に描写された図形の形状(例えば、図6を用いて説明した形状)を分析する形状分析ステップ(例えば、図16のステップS5、または、図19のステップS45の処理)と、情報入力装置において、形状分析ステップの処理により分析された、図形の形状を基に、ユーザの指令内容を抽出する抽出ステップ(例えば、図16のステップS6、または、図19のステップS46の処理)と、情報入力装置において、抽出ステップの処理により抽出されたユーザの指令内容に対応する情報を情報処理装置へ送信する第1の送信ステップ(例えば、図16のステップS7、または、図19のステップS47の処理)と、情報入力装置において、抽出ステップの処理により抽出されたユーザの指令内容に基づいて、入力モードを制御する入力モード制御ステップ(例えば、図16のステップS8、または、図19のステップS48の処理)と、情報処理装置において、第1の送信ステップの処理により送信された、ユーザの指令内容に対応する情報を受信する受信ステップと、情報処理装置において、受信ステップの処理により受信されたユーザの指令内容に基づいて、表示部への、所定の情報の表示を制御する表示制御ステップと、情報入力装置において、入力モード制御ステップの処理により制御されている入力モードに基づいて、操作入力部により入力された、表示部を参照したユーザの第2の操作入力を取得する第2の操作入力取得ステップ(例えば、図16のステップS9、または、図19のステップS49の処理)と、第2の操作入力取得ステップの処理により取得されたユーザの第2の操作入力に対応する情報を情報処理装置へ送信する第2の送信ステップ(例えば、図16のステップS9、または、図19のステップS49の処理)とを含むことを特徴とする。
The information processing method according to
請求項7に記載のプログラムは、所定の図形描写領域を有する操作入力部(例えば、図1、または、図21のトラックパッド11)を用いて、所定の情報を表示可能な表示部(例えば、図1の表示部22、)が設けられている情報処理装置に対するユーザの操作入力を受け、情報処理装置にユーザの操作入力に対応する情報を送信させる処理をコンピュータに実行させるためのプログラムであって、コンピュータに、操作入力部により入力されたユーザの第1の操作入力を取得する第1の操作入力取得ステップ(例えば、図16のステップS3、または、図19のステップS43の処理)と、第1の操作入力取得ステップの処理により取得されたユーザの第1の操作入力を基に、図形描写領域に描写された図形の形状(例えば、図6を用いて説明した形状)を分析する形状分析ステップ(例えば、図16のステップS5、または、図19のステップS45の処理)と、形状分析ステップの処理により分析された図形の形状を基に、ユーザの指令内容を抽出する抽出ステップ(例えば、図16のステップS6、または、図19のステップS46の処理)と、抽出ステップの処理により抽出されたユーザの指令内容に対応する情報の情報処理装置への送信を制御する第1の送信制御ステップ(例えば、図16のステップS7、または、図19のステップS47の処理)と、抽出ステップの処理により抽出されたユーザの指令内容に基づいて、入力モードを制御する入力モード制御ステップ(例えば、図16のステップS8、または、図19のステップS48の処理)と、第1の送信制御ステップの処理により送信が制御されたユーザの指令内容に対応する情報を受信した情報処理装置の表示部に表示される操作入力を補助するための情報を参照したユーザにより、操作入力部により入力された第2の操作入力を、入力モード制御ステップの処理により制御されている入力モードに基づいて取得する第2の操作入力取得ステップ(例えば、図16のステップS9、または、図19のステップS49の処理)と、第2の操作入力取得ステップの処理により取得されたユーザの第2の操作入力に対応する情報の、情報処理装置への送信を制御する第2の送信制御ステップ(例えば、図16のステップS9、または、図19のステップS49の処理)とを含むことを特徴とする処理を実行させる。
The program according to
請求項8に記載の情報入力装置(例えば、図20および図21のリモートコマンダ161)は、ユーザの操作入力を受ける操作入力手段(例えば、図20および図21のトラックパッド11)と、操作入力手段により入力されたユーザの操作入力を基に、入力モードを制御する入力モード制御手段(例えば、図21の状態管理処理部191)と、入力モード制御手段により制御される入力モードに従って、第1の情報を表示する表示手段(例えば、図20の液晶表示部171)と、ユーザが所定の装置を制御するための操作入力に関する第2の情報を、所定の装置に送信する送信手段(例えば、図20の赤外線送信部12、すなわち図21の赤外線送信部96)とを備え、操作入力手段は、所定の表面積を有する図形描写領域を有し、入力モード制御手段は、ユーザにより操作入力手段の図形描写領域に描写された図形の形状(例えば、図6を用いて説明した形状)を基に、入力モードを制御し、表示手段により表示される第1の情報は、入力モードに対応して、ユーザによる情報入力装置の操作入力手段への操作入力を補助するための情報(例えば、図7乃至図11、並びに、図13および図14を用いて説明した表示画面に表示される情報)であり、送信手段により送信される第2の情報は、表示手段により表示された第1の情報を参照したユーザにより実行された操作入力に関する情報であることを特徴とする。
The information input device according to claim 8 (for example, the
請求項11に記載の情報処理方法は、所定の図形描写領域を有し、ユーザの操作入力を受ける操作入力部(例えば、図1、図20、または、図21のトラックパッド11)と、所定の情報を表示可能な表示部(例えば、図20の液晶表示部171)とを備える情報入力装置の情報処理方法であって、操作入力部により入力されたユーザの第1の操作入力を取得する第1の操作入力取得ステップ(例えば、図22のステップS73の処理)と、第1の操作入力取得ステップの処理により取得された、ユーザの第1の操作入力を基に、図形描写領域に描写された図形の形状(例えば、図6を用いて説明した形状)を分析する形状分析ステップ(例えば、図22のステップS75の処理)と、形状分析ステップの処理により分析された、図形の形状を基に、ユーザの指令内容を抽出する抽出ステップ(例えば、図22のステップS76の処理)と、抽出ステップの処理により抽出されたユーザの指令内容に基づいて、表示部への、所定の情報の表示を制御する表示制御ステップ(例えば、図22のステップS77の処理)と、抽出ステップの処理により抽出されたユーザの指令内容に対応する情報を他の装置へ送信する第1の送信ステップ(例えば、図22のステップS78の処理)と、抽出ステップの処理により抽出されたユーザの指令内容に基づいて、入力モードを制御する入力モード制御ステップ(例えば、図22のステップS79の処理)と、入力モード制御ステップの処理により制御されている入力モードに基づいて、操作入力部により入力されたユーザの第2の操作入力を取得する第2の操作入力取得ステップ(例えば、図22のステップS80の処理)と、第2の操作入力取得ステップの処理により取得されたユーザの第2の操作入力に対応する情報を他の装置へ送信する第2の送信ステップ(例えば、図22のステップS80の処理)とを含むことを特徴とする。
An information processing method according to an eleventh aspect includes an operation input unit (for example, the
請求項12に記載のプログラムは、所定の図形描写領域を有し、ユーザの操作入力を受ける操作入力部(例えば、図1、図20、または、図21のトラックパッド11)と、所定の情報を表示可能な表示部(例えば、図20の液晶表示部171)とを用いて、他の情報処理装置に対するユーザの操作入力を受け、情報処理装置にユーザの操作入力に対応する情報を送信させる処理をコンピュータに実行させるためのプログラムであって、コンピュータに、操作入力部により入力されたユーザの第1の操作入力を取得する第1の操作入力取得ステップ(例えば、図22のステップS73の処理)と、第1の操作入力取得ステップの処理により取得された、ユーザの第1の操作入力を基に、図形描写領域に描写された図形の形状(例えば、図6を用いて説明した形状)を分析する形状分析ステップ(例えば、図22のステップS75の処理)と、形状分析ステップの処理により分析された、図形の形状を基に、ユーザの指令内容を抽出する抽出ステップ(例えば、図22のステップS76の処理)と、抽出ステップの処理により抽出されたユーザの指令内容に基づいて、表示部への、所定の情報の表示を制御する表示制御ステップ(例えば、図22のステップS77の処理)と、抽出ステップの処理により抽出されたユーザの指令内容に対応する情報の、情報処理装置への送信を制御する第1の送信制御ステップ(例えば、図22のステップS78の処理)と、抽出ステップの処理により抽出されたユーザの指令内容に基づいて、入力モードを制御する入力モード制御ステップ(例えば、図22のステップS79の処理)と、入力モード制御ステップの処理により制御されている入力モードに基づいて、操作入力部により入力されたユーザの第2の操作入力を取得する第2の操作入力取得ステップ(例えば、図22のステップS80の処理)と、第2の操作入力取得ステップの処理により取得されたユーザの第2の操作入力に対応する情報の、情報処理装置への送信を制御する第2の送信ステップ(例えば、図22のステップS80の処理)とを含むことを特徴とする処理を実行させる。
The program according to
以下、図を参照して、本発明の実施の形態について説明する。 Hereinafter, embodiments of the present invention will be described with reference to the drawings.
図1は、本発明を適用したリモートコマンダ1と、テレビジョン受像機2との外観構成を示す図である。リモートコマンダ1は、テレビジョン受像機2に対してユーザが操作入力を行う場合に用いられるものであり、円形のトラックパッド11と、ユーザによってトラックパッド11に対して行われた操作入力に対応する信号を、テレビジョン受像機2に送信する赤外線送信部12と、ユーザによってトラックパッド11に対して行われた操作入力が正しく検出されなかった場合などに点灯されるエラー表示用LED13とで構成されている。
FIG. 1 is a diagram showing an external configuration of a
テレビジョン受像機2は、図示しないチューナにより選局されて受信されたテレビジョン放送信号を処理して、映像を表示するとともに、音声を出力する処理を実行するものであり、リモートコマンダ1から送信される信号を受信する赤外線受信部21、および、テレビジョン信号に対応する映像のみならず、必要に応じて、ユーザがテレビジョン受信機2を操作するために必要なメニュー画面やメッセージなどを表示可能な表示部22が設けられている。
The
図2は、本発明を適用したリモートコマンダ1のハードウェアブロック図である。
FIG. 2 is a hardware block diagram of the
CPU(Central Processing Unit)41は、リモートコマンダ1の動作を制御するものであり、トラックパッド11から供給される、ユーザの操作入力を基に、赤外線送信部12を制御して、ユーザの操作入力に対応する赤外線信号を送信させたり、エラー表示用LED13の点灯を制御する。メモリ41は、CPU41が実行する処理に対応するプログラムや、CPU41が実行する処理に必要な情報などを記憶する。
A CPU (Central Processing Unit) 41 controls the operation of the
図3は、本発明を適用したテレビジョン受像機2のハードウェアブロック図である。
FIG. 3 is a hardware block diagram of the
CPU61は、テレビジョン受像機2の動作を制御するものであり、リモートコマンダ1から送信され、赤外線受信部21により受信された、ユーザの操作入力を示す信号や、操作入力部62を用いてユーザが行った操作入力を基に、チューナ63、画像処理部64、表示制御部65、音声処理部66、電源制御部69を制御する。
The
チューナ63は、CPU61の制御に基づいて、図示しない受信アンテナで捕らえられた放送信号(例えば、RF変調信号)や、所定のケーブルなどを介して取得された放送信号、または、コンテンツデータに対して、選局処理、中間周波増幅処理、検波処理等を行って、映像信号を抽出し、画像処理部64に供給するとともに、音声信号を抽出し、音声処理部66に供給する。
Based on the control of the
画像処理部64は、CPU61の制御に基づいて、チューナ63から供給された映像信号に対して、例えば、復号処理、色復調(搬送色信号であるコンポジット信号を、色差信号であるコンポーネント信号に変換する)処理、同期分離処理などの、取得された映像信号に対して必要な処理を施し、表示制御部65に供給する。表示制御部65は供給された処理済の映像信号の、表示部22への表示を制御するとともに、CPU61の制御に基づいて、例えば、メニュー画面やメッセージ画面などの表示部22への表示を制御する。
Based on the control of the
音声処理部66は、CPU61の制御に基づいて、チューナ63から供給された音声信号に対して、例えば、復号処理、ノイズ除去処理、信号増幅処理などを施して、スピーカ67に供給させる。スピーカ67は、供給された音声データを出力する。
Under the control of the
記憶部68は、CPU61が実行する処理に対応するプログラムや、CPU61が実行する処理に必要な情報などを記憶する。電源制御部69は、CPU61の制御に基づいて、テレビジョン受像機2の電源のオンオフを制御する。
The
また、CPU61には、必要に応じて、ドライブ70が接続されている。ドライブ70には、磁気ディスク71、光ディスク72、光磁気ディスク73、または、半導体メモリ74などが適宜装着され、それらから読み出されたコンピュータプログラムが、必要に応じて記憶部68にインストールされる。
Further, a
なお、図3においては図示されていないが、表示部22に表示される映像信号、および、スピーカ67から出力される音声信号は、他の装置(例えば、ビデオデッキ)などから、所定のケーブルを介して、または、無線通信によって取得することができるようにしても良いし、外部のチューナにより選局された放送信号を取得することができるようにしても良い。
Although not shown in FIG. 3, the video signal displayed on the
図4は、リモートコマンダ1、および、テレビジョン受像機2のリモートコマンダ1からの信号を受信してユーザの操作入力を受ける部分に関する機能を説明するための機能ブロック図である。
FIG. 4 is a functional block diagram for explaining functions relating to a part that receives signals from the
リモートコマンダ1は、操作入力取得部91、操作分析処理部92、状態管理処理部93、LED制御部94、信号パターン生成処理部95、および赤外線送信部96により実行される機能を有する。
The
操作入力取得部91は、トラックパッド11に対してなされた操作入力を取得し、操作分析処理部92に供給する。操作分析処理部92は、操作入力取得部91により取得された操作を分析し、ユーザの操作が、所定の機能に対応付けられるか否かの判定を行って、その分析結果を、状態管理処理部93に供給する。状態管理処理部93は、操作分析処理部92による操作分析結果に基づいて、入力モードの状態を管理するとともに、操作分析処理部92に入力モードの変更を通知する。また、状態管理処理部93は、ユーザの操作入力が所定の機能に対応付けられない場合、LED制御部94にエラー発生を通知し、所定の機能に対応付けられている場合、いずれの機能に対応する操作入力が行われたかを示す情報を、信号パターン生成処理部95に供給する。LED制御部94は、状態管理処理部93からエラー発生の通知を受けた場合、エラー表示用LED13の点灯を制御する。信号パターン生成処理部95は、状態管理処理部93から供給された情報を基に、テレビジョン受像機2に送信される赤外線信号のパターンを取得し、赤外線送信部96に供給する。赤外線送信部96は、信号パターン生成処理部95が取得したパターンの赤外線信号を、テレビジョン受像機2に送信する。
The operation
テレビジョン受像機2は、赤外線受信部101、信号パターン分析処理部102、動作制御部103、GUI出力制御部104、音量制御処理部105、入力ソース制御処理部106、カーソル移動制御処理部107、電源制御処理部108、チャンネル制御処理部109、および、設定メニュー制御処理部110により実行される機能を有する。
The
赤外線受信部101は、リモートコマンダ1から送信された赤外線信号を受信し、信号パターン分析処理部102に供給する。信号パターン分析処理部102は、受信した赤外線信号のパターンを基に、ユーザの操作入力に対応する機能を特定し、その結果を示す情報を、動作制御部103に供給する。動作制御部103は、ユーザの操作入力に対応する機能を示す情報に基づいて、GUI出力制御部104、音量制御処理部105、入力ソース制御処理部106、カーソル移動制御処理部107、電源制御処理部108、チャンネル制御処理部109、および、設定メニュー制御処理部110を制御する。GUI出力制御部104は、動作制御部103の制御に基づいて、ユーザの操作入力を促したり、ユーザの操作内容をユーザに通知するためのGUIの表示部22への表示を制御する。
The
音量制御処理部105は、動作制御部103の制御に基づいて、スピーカ67から出力される音声のボリュームを制御する。入力ソース制御処理部106は、動作制御部103の制御に基づいて、例えば、地上波アナログ、地上波デジタル、衛星放送、ケーブルテレビジョン、または、ビデオデッキなどからの外部入力などの、テレビジョン受像機2への信号の入力ソースの変更を制御する。カーソル移動制御処理部107は、動作制御部103の制御に基づいて、表示部22に表示されたフリーカーソルの移動を制御する。電源制御処理部108は、動作制御部103の制御に基づいて、電源制御部69によるテレビジョン受像機2の電源のオンオフを制御する。チャンネル制御処理部109は、動作制御部103の制御に基づいて、テレビジョン放送の受信時におけるチューナ63(または、テレビジョン受像機2に接続されている外部のチューナ)による選局を制御する。設定メニュー制御処理部110は、動作制御部103の制御に基づいて、各種設定メニューを制御する。
The sound volume
次に、図5を参照して、トラックパッド11の領域の分割と、操作入力取得部91による、トラックパッド11に対してなされた操作入力の取得について説明する。
Next, with reference to FIG. 5, the division of the area of the
操作入力取得部91は、例えば、図5Aに示されるように、トラックパッド11の領域を、仮想的に、円周方向に8分割するとともに、中心付近の所定の半径の範囲(トラックパッド11の半径に対して、例えば、1/3乃至1/4など、充分小さい範囲)を1つの領域として、計9個の領域に分割する。
For example, as shown in FIG. 5A, the operation
そして、操作入力取得部91は、ユーザの指などがトラックパッド11に触れてから離れるまでの間に、例えば、100msなどの所定の期間毎(ここでは100msという間隔で動作する場合を例として説明しているが、この間隔は任意の値で構わない。以下同様。)に、ユーザの指がこの8つの領域のうちのどこの領域に存在しているかを取得し続ける。操作入力取得部91は、100ms経過後も、ユーザの指などが同じ領域に存在している場合は、その情報を捨て、領域が変った場合の情報のみを残し、ユーザの指などがトラックパッド11に触れている位置が、図5Aの9個の領域のうちのどの領域を移動しているかを示す情報を取得する。すなわち、操作入力取得部91は、ユーザの指などがトラックパッド11から離れたとき、ユーザの指などがトラックパッド11において移動した領域のリストを得ることができる。
Then, the operation
例えば、ユーザの指などが、図5Aに示されるトラックパッド11の仮想的な9個の領域において、a8,a9,a5,a9,a2の順で移動した場合、操作入力取得部91は、ユーザの指などが、a8,a9,a5,a9,a2の順で移動したことを示す情報を、操作分析処理部92に供給する。
For example, when the user's finger or the like moves in the order of a8, a9, a5, a9, a2 in the virtual nine areas of the
図5Aに示される領域分割方法は、例えば、トラックパッド11に対してなされた操作入力が、例えば、機能を指定するための操作入力であるときに用いるようにすると好適である。
The area dividing method shown in FIG. 5A is preferably used, for example, when an operation input made on the
また、操作入力取得部91は、例えば、図5Bに示されるように、トラックパッド11の領域を、仮想的に、円周方向に16分割するようにしても良い。操作入力取得部91は、ユーザの指などがトラックパッド11に触れてから離れるまでの間に、例えば、100msなどの所定の期間毎にユーザの指がこの16個の領域のうちのどこの領域に存在しているかを取得し続ける。操作入力取得部91は、100ms経過後も、ユーザの指などが同じ領域に存在している場合は、その情報を捨て、領域が変った場合の情報のみを残し、ユーザの指などがトラックパッド11に触れている位置が、図5Bの16個の領域のうちのどの領域を移動しているかを示す情報を取得する。そして、操作入力取得部91は、ユーザの指などがトラックパッド11で移動した領域を順に示す情報か、または、移動した方向(右回りか左回りか)と移動量(いくつ隣の領域に移動したか)を示す情報を、操作分析処理部92に供給する。
Further, for example, as illustrated in FIG. 5B, the operation
図5Bに示される領域分割方法は、例えば、トラックパッド11に対してなされた操作入力が、例えば、音声のボリュームなど、所定の値の変化量を指定するための操作入力であるときに用いるようにすると好適である。
The area dividing method shown in FIG. 5B is used, for example, when the operation input made on the
また、操作入力取得部91は、例えば、図5Cに示されるように、トラックパッド11の領域を、仮想的に、円周方向に4分割するとともに、中心付近の所定の半径の範囲(トラックパッド11の半径に対して、例えば、1/3乃至1/4など、充分小さい範囲)を1つの領域として、計5個の領域に分割するようにしても良い。操作入力取得部91は、ユーザの指などがトラックパッド11に触れてから離れるまでの間に、例えば、100msなどの所定の期間毎にユーザの指がこの5個の領域のうちのどこの領域に存在しているかを取得し続ける。操作入力取得部91は、100ms経過後も、ユーザの指などが同じ領域に存在している場合は、その情報を捨て、領域が変った場合の情報のみを残し、ユーザの指などがトラックパッド11に触れている位置が、図5Cの5個の領域のうちのどの領域を移動しているかを示す情報を取得する。そして、操作入力取得部91は、ユーザの指などがトラックパッド11で移動した領域を順に示す情報を、操作分析処理部92に供給する。
Further, for example, as shown in FIG. 5C, the operation
図5Cに示される領域分割方法は、例えば、トラックパッド11に対してなされた操作入力が、例えば、メニューの選択など、従来のリモートコマンダにおいて、十字ボタンの操作に対応する操作入力であるときに用いるようにすると好適である。
The area dividing method shown in FIG. 5C is, for example, when the operation input made on the
このようにして、操作入力取得部91により取得された、ユーザによるトラックパッド11への操作入力を示す信号は、操作分析処理部92に供給される。
In this way, the signal indicating the operation input to the
そして、操作分析処理部92は、操作入力取得部91により取得された操作を分析し、分析結果を状態管理処理部93に供給する。状態管理処理部93は、操作分析処理部92による操作分析結果に基づいて、ユーザの操作が、所定の機能に対応付けられるか否かの判定を行って入力モードの状態を管理する。次に、図6を参照して、ユーザの操作入力と機能との対応関係の一例について説明する。
Then, the operation
操作分析処理部92は、操作入力取得部91により取得された操作が、図6Aに示されるように、トラックパッド11を略1周なぞる操作であった場合、その操作入力は、右回りであれば、テレビジョン受像機2の電源をオンする機能に対応するものであり、左回りであれば、テレビジョン受像機2の電源をオフする機能に対応するものであるものと判定する。また、操作分析処理部92は、操作入力取得部91により取得された操作が、図6Aに示されるように、トラックパッド11を略1周なぞる操作であった場合、右回りであるか、左回りであるかにかかわらず、現在、電源がオンであれば、電源をオフする機能に対応するものであるとし、現在、電源がオフであれば、電源をオンする機能に対応するものであると判定するようにしても良い。
When the operation acquired by the operation
状態管理処理部93は、操作分析処理部92から供給された、テレビジョン受像機2の電源のオンオフの指令に対応する操作入力が行われたことを示す情報を、信号パターン生成処理部95に供給する。信号パターン生成処理部95は、状態管理処理部93から供給された情報を基に、テレビジョン受像機2に送信される赤外線信号のパターンを取得して、赤外線送信部96に供給し、赤外線送信部96は、赤外線信号を、テレビジョン受像機2に送信する。
The state
そして、リモートコマンダ1からの赤外線信号を赤外線受信部101により受信したテレビジョン受像機2においては、信号パターン分析処理部102で、受信した赤外線信号のパターンを基に、ユーザの操作入力に対応する機能が特定されて、その結果を示す情報が、動作制御部103に供給される。そして、動作制御部103は、ユーザの操作入力に対応する機能が、テレビジョン受像機2の電源のオンオフの指令であることを示す情報に基づいて、電源制御処理部108を制御して、テレビジョン受像機2の電源をオンオフする(CPU61が電源制御部69を制御する)。
In the
また、操作分析処理部92は、操作入力取得部91により取得された操作が、図6Bに示されるように、トラックパッド11に一筆書きでV字形を描く軌跡の入力であった場合、その操作入力は、テレビジョン受像機2のチャンネルを変更する機能に対応するものであるとする。状態管理処理部93は、操作分析処理部92から供給された、チャンネル変更の指令に対応する操作入力が行われたことを示す情報を、信号パターン生成処理部95に供給するとともに、入力モードを変更量入力モードであるとして、次にユーザにより入力される操作は、チャンネルの変更のための操作であると認識し、操作分析処理部92に、入力モードの変更を通知する。信号パターン生成処理部95は、状態管理処理部93から供給された情報を基に、テレビジョン受像機2に送信される赤外線信号のパターンを取得し、赤外線送信部96に供給し、赤外線送信部96は、赤外線信号を、テレビジョン受像機2に送信する。
Further, when the operation acquired by the operation
そして、リモートコマンダ1からの赤外線信号を赤外線受信部101により受信したテレビジョン受像機2においては、信号パターン分析処理部102で、受信した赤外線信号のパターンを基に、ユーザの操作入力に対応する機能が特定されて、その結果を示す情報が、動作制御部103に供給される。そして、動作制御部103は、ユーザの操作入力に対応する機能がチャンネル変更の指令であることを示す情報に基づいて、GUI出力制御部104を制御し、図7に示されるような、チャンネルの値を変化量とする、変化量入力用のGUI画面を、表示部22に表示させる。図7に示される、チャンネルの値を変化量とする、変化量入力用のGUI画面は、トラックパッド11によるユーザの操作入力と、チャンネルの値の変化とを直感的に対応つけるため、チャンネル番号が、円周状に並んで表示されるようになされている。
In the
ユーザが、この状態でトラックパッド11を右回転でなぞると、操作入力取得部91、操作分析処理部92、および、状態管理処理部93の処理により、ユーザの操作入力に対応する変化量の情報が、テレビジョン受像機2に送信されるので、上述した場合と同様にして、ユーザの操作入力に対応する信号の供給を受けた動作制御部103は、チャンネル制御処理部109を制御して、ユーザがトラックパッド11をなぞった距離にしたがって、チャンネルを変更させる(CPU61により、チューナ63による放送信号の選局が制御される)。
When the user traces the
そして、動作制御部103は、GUI出力制御部104を制御し、表示部22に表示されたGUI画面の表示を変更させる。例えば、現在、テレビジョン受像機2が4chの放送信号を受信し、表示部22に表示されたGUI画面において、4chの放送信号を受信している状態であることを表示している状態で、ユーザが、リモートコマンダ1のトラックパッド11において、指などの接触点を右回転で1周させる操作入力を行った場合、テレビジョン受像機2のチューナ63により選局されて受信される放送信号は、8chに変更され、表示部22に表示されたGUI画面において、8chの放送信号を受信している状態であることが表示される。また、ユーザが、リモートコマンダ1のトラックパッド11において、指などの接触点を左回転で変更させた場合、受信されるチャンネルの数字は、小さくなる方向で変化される。
Then, the
また、操作分析処理部92は、操作入力取得部91により取得された操作が、図6Cに示されるように、トラックパッド11に一筆書きでV字形を上下反転させた図形を描く軌跡の入力であった場合、その操作入力は、テレビジョン受像機2から出力される音声のボリュームを変更する機能に対応するものであるとする。状態管理処理部93は、操作分析処理部92から供給された、ボリューム変更の指令に対応する操作入力が行われたことを示す情報を、信号パターン生成処理部95に供給するとともに、入力モードを変更量入力モードであるとして、次にユーザにより入力される操作は、音声のボリュームの変更のための操作であると認識し、操作分析処理部92に、入力モードの変更を通知する。信号パターン生成処理部95は、状態管理処理部93から供給された情報を基に、テレビジョン受像機2に送信される赤外線信号のパターンを取得し、赤外線送信部96に供給し、赤外線送信部96は、赤外線信号を、テレビジョン受像機2に送信する。
In addition, the operation
そして、リモートコマンダ1からの赤外線信号を赤外線受信部101により受信したテレビジョン受像機2においては、信号パターン分析処理部102で、受信した赤外線信号のパターンを基に、ユーザの操作入力に対応する機能が特定されて、その結果を示す情報が、動作制御部103に供給される。そして、動作制御部103は、ユーザの操作入力に対応する機能が音声出力のボリュームの変更であることを示す情報に基づいて、GUI出力制御部104を制御し、図8に示されるような、ボリュームに対応する数値を変化量とする、変化量入力用のGUI画面を、表示部22に表示させる。図8に示される、ボリュームに対応する数値を変化量とする、変化量入力用のGUI画面は、トラックパッド11によるユーザの操作入力と、音声ボリュームの値の変化とを直感的に対応つけるため、ボリュームを示す数字を囲んで表示され、音声ボリュームの大きさを示すグラフィックスが、円周状に並んで表示されるようになされている。
In the
ユーザが、この状態でトラックパッド11を右回転でなぞると、操作入力取得部91、操作分析処理部92、および、状態管理処理部93の処理により、ユーザの操作入力に対応する変化量の情報が、テレビジョン受像機2に送信されるので、上述した場合と同様にして、ユーザの操作入力に対応する信号の供給を受けた動作制御部103は、音量制御処理部105を制御して、ユーザがトラックパッド11をなぞった距離にしたがって、音声出力のボリュームを増加させる(CPU61により、音声処理部66による音声データの増幅量が制御される)。また、同様にして、ユーザが、この状態でトラックパッド11を左回転でなぞると、ユーザの操作入力に対応する信号の供給を受けた動作制御部103は、音量制御処理部105を制御して、ユーザがトラックパッド11をなぞった距離にしたがって、音声出力のボリュームを減少させる。
When the user traces the
そして、動作制御部103は、GUI出力制御部104を制御し、表示部22に表示されたGUI画面の表示を変更させる。例えば、現在、テレビジョン受像機2が、予め定められている音量を規定する値12に対応するボリュームで音声を出力し、表示部22に表示されたGUI画面において、値12に対応するボリュームで音声を出力している状態であることを表示している状態で、ユーザが、リモートコマンダ1のトラックパッド11において、指などで右回転でなぞる操作入力を行った場合、テレビジョン受像機2の、音声処理部66による音声データの増幅量が制御されて、スピーカ67から出力される音声のボリュームが大きくなり、表示部22に表示されたGUI画面において、出力されている音声のボリュームを示す数値が表示される。また、ユーザが、リモートコマンダ1のトラックパッド11において、指などの接触点を左回転で変更させた場合、出力される音声のボリュームと、表示される音声ボリュームを示す数値は、小さくなる方向で変化される。
Then, the
また、操作分析処理部92は、操作入力取得部91により取得された操作が、図6Dに示されるように、トラックパッド11に一筆書きで>を描く軌跡の入力であった場合、その操作入力は、テレビジョン受像機2が取得するデータの入力ソースを変更する機能に対応するものであるとする。状態管理処理部93は、操作分析処理部92から供給された、入力ソース変更の指令に対応する操作入力が行われたことを示す情報を、信号パターン生成処理部95に供給するとともに、入力モードを変更量入力モードであるとして、次にユーザにより入力される操作は、入力ソースの変更のための操作であると認識し、操作分析処理部92に、入力モードの変更を通知する。信号パターン生成処理部95は、状態管理処理部93から供給された情報を基に、テレビジョン受像機2に送信される赤外線信号のパターンを取得し、赤外線送信部96に供給し、赤外線送信部96は、赤外線信号を、テレビジョン受像機2に送信する。
In addition, when the operation acquired by the operation
そして、リモートコマンダ1からの赤外線信号を赤外線受信部101により受信したテレビジョン受像機2においては、信号パターン分析処理部102で、受信した赤外線信号のパターンを基に、ユーザの操作入力に対応する機能が特定されて、その結果を示す情報が、動作制御部103に供給される。そして、動作制御部103は、ユーザの操作入力に対応する機能が入力ソースの変更であることを示す情報に基づいて、GUI出力制御部104を制御し、図9に示されるような、入力ソースの変更指令を受けるためのGUI画面を、表示部22に表示させる。図9に示される、入力ソースの変更指令を受けるためのGUI画面は、トラックパッド11によるユーザの操作入力と、入力ソースの変化とを直感的に対応つけるため、入力ソースを示すテキストが、円周状に並んで表示されるようになされている。
In the
ユーザが、この状態でトラックパッド11を右回転でなぞると、操作入力取得部91、操作分析処理部92、および、状態管理処理部93の処理により、ユーザの操作入力に対応する変化量の情報が、テレビジョン受像機2に送信されるので、上述した場合と同様にして、ユーザの操作入力に対応する信号の供給を受けた動作制御部103は、入力ソース制御処理部106を制御して、ユーザがトラックパッド11をなぞった距離および方向にしたがって、入力ソースを変更させる。
When the user traces the
そして、動作制御部103は、GUI出力制御部104を制御し、表示部22に表示されたGUI画面の表示を変更させる。例えば、現在、テレビジョン受像機2が地上波テレビジョン放送を入力ソースとして選択し、表示部22に表示されたGUI画面において、地上波テレビジョン放送を入力ソースとして選択している状態であることを表示している状態で、ユーザが、リモートコマンダ1のトラックパッド11において、指などの接触点を右回転させる操作入力を行った場合、テレビジョン受像機2の入力ソースは、地上波TV、BS、CATV、ビデオ入力1、ビデオ入力2、ビデオ入力3、地上波TV、の順に順次切り替わり、表示部22に表示されたGUI画面において、現在指定されている入力ソースに対応するテキストが、例えば、ハイライト表示、拡大表示、または、色反転表示などで、他のテキストデータと区別可能なように表示される。また、ユーザが、リモートコマンダ1のトラックパッド11において、指などの接触点を左回転で変更させた場合、入力ソースの切替えは、上述した場合と逆の順番で変化される。
Then, the
また、操作分析処理部92は、操作入力取得部91により取得された操作が、図6Eに示されるように、トラックパッド11に一筆書きで<を描く軌跡の入力であった場合、その操作入力は、設定メニューを呼び出す機能に対応するものであるとする。状態管理処理部93は、操作分析処理部92から供給された、設定メニューを呼び出す指令に対応する操作入力が行われたことを示す情報を、信号パターン生成処理部95に供給するとともに、入力モードを十字ボタンモードであるとして、次にユーザにより入力される操作は、設定メニューの変更のための操作であると認識し、操作分析処理部92に、入力モードの変更を通知する。信号パターン生成処理部95は、状態管理処理部93から供給された情報を基に、テレビジョン受像機2に送信される赤外線信号のパターンを取得し、赤外線送信部96に供給し、赤外線送信部96は、赤外線信号を、テレビジョン受像機2に送信する。
Further, when the operation acquired by the operation
そして、リモートコマンダ1からの赤外線信号を赤外線受信部101により受信したテレビジョン受像機2においては、信号パターン分析処理部102で、受信した赤外線信号のパターンを基に、ユーザの操作入力に対応する機能が特定されて、その結果を示す情報が、動作制御部103に供給される。そして、動作制御部103は、ユーザの操作入力に対応する機能が設定メニューの呼出しであることを示す情報に基づいて、GUI出力制御部104を制御し、図10に示されるような、設定メニューを示すGUI画面を、表示部22に表示させる。
In the
ユーザが、この状態でトラックパッド11を操作すると、操作入力取得部91、操作分析処理部92、および、状態管理処理部93の処理により、ユーザの操作入力に対応する変化量の情報が、テレビジョン受像機2に送信されるので、上述した場合と同様にして、ユーザの操作入力に対応する信号の供給を受けた動作制御部103は、GUI出力制御部104を制御し、表示部22に表示されたGUI画面の表示を変更させる。
When the user operates the
例えば、現在、テレビジョン受像機2において、アイテム1が設定メニューとして選択され、表示部22に表示されたGUI画面において、アイテム1が設定メニューとして選択されている状態であることを表示している状態で、ユーザが、リモートコマンダ1のトラックパッド11を中心から下方向になぞると、表示部22に表示されているメニュー上のカーソルが一つ下のアイテムに移動し、中心から上方向になぞると、メニュー上のカーソルが一つ上のアイテムに移動し、中心から右方向になぞると、メニュー上のカーソルが一つ右のアイテムに移動し、中心から左方向になぞると、メニュー上のカーソルが一つ左のアイテムに移動する。そして、ユーザが、リモートコマンダ1のトラックパッド11をタッピング(トラックパッドに触れて、その位置から動かさずに、そのまま離す動作)すると、現在カーソルのあるアイテムが選択される(設定メニューが変更される)。そして、動作制御部103は、設定メニュー制御処理部110を制御して、ユーザによるトラックパッド11への操作入力にしたがって、設定メニューを変更させる。
For example, the
また、操作分析処理部92は、操作入力取得部91により取得された操作が、図6Fに示されるように、トラックパッド11に接触した指などを左方向から右方向に移動させる入力を行った場合、その操作入力は、フリーカーソルを操作する機能に対応するものであるとする。状態管理処理部93は、操作分析処理部92から供給された、フリーカーソルを操作する機能を呼び出す指令に対応する操作入力が行われたことを示す情報を、信号パターン生成処理部95に供給するとともに、入力モードをフリーカーソルモードであるとして、次にユーザにより入力される操作は、カーソル位置の変更のための操作であると認識し、操作分析処理部92に、入力モードの変更を通知する。信号パターン生成処理部95は、状態管理処理部93から供給された情報を基に、テレビジョン受像機2に送信される赤外線信号のパターンを取得し、赤外線送信部96に供給し、赤外線送信部96は、赤外線信号を、テレビジョン受像機2に送信する。
In addition, the operation
そして、リモートコマンダ1からの赤外線信号を赤外線受信部101により受信したテレビジョン受像機2においては、信号パターン分析処理部102で、受信した赤外線信号のパターンを基に、ユーザの操作入力に対応する機能が特定されて、その結果を示す情報が、動作制御部103に供給される。そして、動作制御部103は、ユーザの操作入力に対応する機能がフリーカーソルの操作であることを示す情報に基づいて、カーソル移動制御処理部107を制御し、図11に示されるように、例えば、フリーカーソルにより設定可能なようになされている設定画面を表示する表示部22、または、双方向通信機能や、ウェブブラウザ機能が利用されている状態の表示部22に、ユーザが任意に位置を移動させることができるカーソル111を表示させる。
In the
ユーザが、この状態でトラックパッド11を操作すると、操作入力取得部91、操作分析処理部92、および、状態管理処理部93の処理により、ユーザの操作入力に対応する変化量の情報が、テレビジョン受像機2に送信されるので、上述した場合と同様にして、ユーザの操作入力に対応する信号の供給を受けた動作制御部103は、カーソル移動制御処理部107を制御し、表示部22に表示されたカーソル111の表示位置を変更させる。
When the user operates the
そして、ユーザが、リモートコマンダ1のトラックパッド11をタッピング(トラックパッドに触れて、その位置から動かさずに、そのまま離す動作)すると、現在カーソルのあるアイテムが選択される。そして、動作制御部103は、カーソル移動制御処理部107を制御して、ユーザによるトラックパッド11への操作入力にしたがった処理を実行する。
Then, when the user taps the
このように、図6乃至図11を用いて説明した、ユーザの操作入力(トラックパッド11へ指などを用いて描く軌跡)と読み出される機能とは、対応されるようになされている。具体的には、例えば、ユーザの指などが、図5Aに示されるトラックパッド11の仮想的な9個の領域において、a8,a9,a5,a9,a2の順で移動したとする。操作分析処理部92は、このときのユーザの指などの動きは、V字型であることから、ユーザが、テレビジョン受像機2のチャンネルを変更する機能を指示していることを検出し、状態管理処理部93に、ユーザが呼び出した機能を示す情報を供給するので、状態管理処理部93は、入力モードを変更し、操作分析処理部92に通知するので、操作分析処理部92は、次の操作入力は、チャンネルの変更のための変更量入力であることを認識する。
As described above, the user's operation input (trajectory drawn on the
なお、操作分析処理部92は、ユーザの操作入力(トラックパッド11へ指などを用いて描く軌跡)と読み出される機能との対応関係を示すテーブルを、予め記憶するようにしてもよい。このテーブルには、例えば、図5Aに示されるトラックパッド11の仮想的な9個の領域において、ユーザの指などの移動領域が(a8,a9,a5,a9,a2)または(a8,a9,a2)である場合に対応する機能が、チャンネル変更であり、ユーザの指などの移動領域が(a9,a9,a1,a9,a4)または(a6,a9,a4)である場合に対応する機能が、音量変更であることなどが予め登録されている。操作分析処理部92は、そのテーブルを参照することにより、ユーザが指令する機能を検出することができる。
Note that the operation
操作分析処理部92は、ユーザの操作入力に対応する機能を検出できないとき、そのことを状態管理処理部93に通知するので、状態管理処理部93は、LED制御部94を制御して、エラー表示用LED13を点灯させ、入力モードを変更せずに、ユーザからの再入力を待機する。
When the operation
なお、図6乃至図11を用いて説明した、ユーザの操作入力(描かれる図形)と機能との対応関係は、その一例を示すものであり、ユーザの操作入力により、呼び出される機能が1対1で決定できれば、この限りでなくても良く、さまざまなパターンが考えられることは言うまでもない。 The correspondence relationship between the user's operation input (drawn figure) and the function described with reference to FIGS. 6 to 11 shows an example, and the function called by the user's operation input is a pair. If it can be determined by 1, this need not be the case, and it goes without saying that various patterns can be considered.
次に、図12の状態遷移図を参照して、状態管理処理部93における操作入力の状態管理について説明する。
Next, state management of operation input in the state
例えば、ユーザがテレビジョン受像機2において、ある入力ソースによるテレビジョン放送の、あるチャンネルの放送番組を視聴しているものとする。このとき、状態管理処理部93によって管理されているリモートコマンダ1の状態は、図12の状態遷移図における「第1段階入力待機状態」である。「第1段階入力待機状態」において、操作入力取得部91は、トラックパッド11の領域分割方法に、図5Aを用いて説明した領域分割方法を用いるようにすると好適である。
For example, it is assumed that the user is watching a broadcast program of a certain channel of a television broadcast by a certain input source on the
ここで、ユーザが、トラックパッド11をV字型になぞる操作入力を行った場合、操作分析処理部92は、ユーザが、テレビジョン受像機2のチャンネルを変更する機能を指示していることを検出し、状態管理処理部93に供給するので、状態管理処理部93は、入力モードを「変更量入力モード」に遷移させ、操作分析処理部92に通知する。
Here, when the user performs an operation input for tracing the
「変更量入力モード」において、操作入力取得部91は、トラックパッド11の領域分割方法に、図5Bを用いて説明した領域分割方法を用いるようにすると好適である。
In the “change amount input mode”, it is preferable that the operation
操作分析処理部92は、「変更量入力モード」における「第2段階入力待機状態」において、操作入力取得部91から供給される、ユーザの操作入力を示す情報を基に、100ms毎にユーザの指などが触れている領域が変化したか、また、いくつ分の領域を移動したかを監視し、ユーザの指などによって描かれる軌跡が、右回りの円周の少なくとも一部である場合はチャンネルを数字が大きくなる方向に変更する機能が呼び出されたと特定し、左回りの円周の少なくとも一部である場合はチャンネルを数値が小さくなる方向に変更する機能が呼び出されたと特定するとともに、領域の移動量によって、チャンネルの変更量を検出し、状態管理処理部93に供給する。例えば、ある100msの間に、ユーザの指などがトラックパッド11に触れている位置に対応する領域が、図5Bを用いて説明した領域分割方法における領域b8から領域b12へ移動した場合、チャンネルに対応する値を2チャンネル分大きくする指令であるものと定義する。状態管理処理部93は、信号パターン生成処理部95に、チャンネルの変更に関する情報を供給し、再び、状態を、「第1段階入力待機状態」とする。そして、信号パターン生成処理部95は、状態管理処理部93から供給された情報を基に、テレビジョン受像機2に送信される赤外線信号のパターンを取得し、赤外線送信部96に供給し、赤外線送信部96は、赤外線信号を、テレビジョン受像機2に送信する。
The operation
また、状態管理処理部93によって管理されているリモートコマンダ1の状態が、図12の状態遷移図における「第1段階入力待機状態」であって、ユーザが、トラックパッド11を、Vを上下反転させた図形を描写した場合、または、>の形をなぞる操作入力を行った場合、入力モードは、上述した場合と同様にして、変化量入力モードに遷移される。
Further, the state of the
また、状態管理処理部93によって管理されているリモートコマンダ1の状態が、図12の状態遷移図における「第1段階入力待機状態」であって、ユーザが、トラックパッド11を<の形になぞる操作入力を行った場合、操作分析処理部92は、ユーザが、設定メニューの呼出しを指示していることを検出し、状態管理処理部93に供給するので、状態管理処理部93は、入力モードを「十字ボタンモード」に遷移させ、操作分析処理部92に通知する。
Further, the state of the
「十字ボタンモード」において、操作入力取得部91は、トラックパッド11の領域分割方法に、図5Cを用いて説明した領域分割方法を用いるようにすると好適である。
In the “cross button mode”, it is preferable that the operation
操作分析処理部92は、「十字ボタンモード」における「第2段階入力待機状態」において、操作入力取得部91から供給される、ユーザの操作入力を示す情報を基に、100ms毎にユーザの指などが触れている領域が変化したか、また、いくつ分の領域を移動したかを監視することにより、ユーザにより選択されるメニューを特定するとともに、タッピングが行われたことが検出された場合、状態管理処理部93は、選択されているメニューを確定する操作入力が行われたことを検出し、再び、状態を、「第1段階入力待機状態」に遷移させる。そして、信号パターン生成処理部95は、状態管理処理部93から供給された情報を基に、テレビジョン受像機2に送信される赤外線信号のパターンを取得し、赤外線送信部96に供給し、赤外線送信部96は、赤外線信号を、テレビジョン受像機2に送信する。
In the “second stage input standby state” in the “cross button mode”, the operation
また、状態管理処理部93によって管理されているリモートコマンダ1の状態が、図12の状態遷移図における「第1段階入力待機状態」であって、ユーザが、トラックパッド11に接触した指などを左方向から右方向に移動させる入力を行った場合、操作分析処理部92は、ユーザが、フリーカーソルモードを指示していることを検出し、状態管理処理部93に供給するので、状態管理処理部93は、入力モードを「フリーカーソルモード」に遷移させ、操作分析処理部92に通知する。
Further, the state of the
操作分析処理部92は、「フリーカーソルモード」における「第2段階入力待機状態」において、操作入力取得部91から供給される、ユーザの操作入力を示す情報を基に、100ms毎にユーザの指などが触れている領域が変化したか、また、いくつ分の領域を移動したかを監視することにより、カーソルの移動方向や移動量を特定するとともに、タッピングが行われたことが検出された場合、選択されているアイテムを確定する操作入力が行われたことを検出し、状態管理処理部93に供給する。状態管理処理部93は、信号パターン生成処理部95に、フリーカーソルの移動に関する情報を供給し、再び、状態を、「第1段階入力待機状態」とする。そして、信号パターン生成処理部95は、状態管理処理部93から供給された情報を基に、テレビジョン受像機2に送信される赤外線信号のパターンを取得し、赤外線送信部96に供給し、赤外線送信部96は、赤外線信号を、テレビジョン受像機2に送信する。
In the “second stage input standby state” in the “free cursor mode”, the operation
また、状態管理処理部93によって管理されているリモートコマンダ1の状態が、図12の状態遷移図における「第1段階入力待機状態」であって、ユーザが、トラックパッド11を略1周なぞる操作入力を行った場合、操作分析処理部92は、ユーザが、テレビジョン受像機2の電源のオンオフを指示していることを検出し、状態管理処理部93に供給するので、状態管理処理部93は、入力モードを「第1段階入力待機状態」のままとし、電源のオンオフの指令に対応する操作入力が行われたことを示す情報を、信号パターン生成処理部95に供給する。信号パターン生成処理部95は、状態管理処理部93から供給された情報を基に、テレビジョン受像機2に送信される赤外線信号のパターンを取得して、赤外線送信部96に供給し、赤外線送信部96は、赤外線信号を、テレビジョン受像機2に送信する。
Further, the state of the
ところで、「変更量入力モード」における「第2段階入力待機状態」において、変更量の入力は、100ms毎に、トラックパッド11に対するユーザの指などが触れている領域が変化したか、また、いくつ分の領域を移動したかを監視し、ユーザの指などによって描かれる軌跡が、右回りの円周の少なくとも一部であるか、左回りの円周の少なくとも一部であるかによって、特定の機能が呼び出され、領域の移動量によって、所定の値の変更量を検出するものとして説明したが、例えば、「変更量入力モード」における「第2段階入力待機状態」において、トラックパッド11にて、ユーザが指などで、数字や文字の形を描くようにすることによって、変更量を指示することができるようにしてもよい。この場合、上述したような、ユーザの指などによる軌跡の移動量(領域の変化量)を基にした変化量の入力との識別が困難とならないように、図6を用いて説明したユーザの操作入力と機能との対応関係とは区別可能な、ユーザの操作入力と機能との対応関係を定義して入力を行うようにすると好適である。
By the way, in the “second stage input standby state” in the “change amount input mode”, the change amount is input every 100 ms as to whether the area touched by the user's finger or the like on the
操作分析処理部92は、操作入力取得部91により取得された操作が、例えば、三角形を上下反転した図形を一筆書きした操作入力であった場合、その操作入力は、テレビジョン受像機2が取得するデータの入力ソース、および、選局されるチャンネルの変更を指令する機能に対応するものであるとする。状態管理処理部93は、操作分析処理部92から供給された、入力ソース、および、選局されるチャンネルの変更の指令に対応する操作入力が行われたことを示す情報を、信号パターン生成処理部95に供給するとともに、入力モードを文字・数字入力モードであるとして、次にユーザにより入力される操作は、入力ソースおよびチャンネルを指定するための、文字、または、数字であると認識し、操作分析処理部92に、入力モードの変更を通知する。信号パターン生成処理部95は、状態管理処理部93から供給された情報を基に、テレビジョン受像機2に送信される赤外線信号のパターンを取得し、赤外線送信部96に供給し、赤外線送信部96は、赤外線信号を、テレビジョン受像機2に送信する。
When the operation acquired by the operation
そして、リモートコマンダ1からの赤外線信号を赤外線受信部101により受信したテレビジョン受像機2においては、信号パターン分析処理部102で、受信した赤外線信号のパターンを基に、ユーザの操作入力に対応する機能が特定されて、その結果を示す情報が、動作制御部103に供給される。そして、動作制御部103は、ユーザの操作入力に対応する機能が入力ソース、および、選局されるチャンネルの変更であることを示す情報に基づいて、GUI出力制御部104を制御し、図13に示されるような、入力ソース、および、選局されるチャンネルの変更指令を受けるためのGUI画面を、表示部22に表示させる。
In the
この場合の表示画面には、現在の入力ソースおよびチャンネルを示す情報と、ユーザが第2段階入力において入力した入力ソースおよびチャンネルを示す情報が表示されるとともに、ユーザによる操作入力をサポートするために、例えば、地上波テレビの入力を行う場合は直接数字を入力すること、BS放送を選択する場合は始めに「B」を入力して、その右にチャンネル番号を入力すること(例えば「B7」)、ケーブルテレビを選択する場合は始めに「C」を入力して、その右にチャンネル番号を入力すること(例えば「C20」)、ビデオ入力を選択する場合は始めに「V」を入力しその右に端子番号を入力すること(例えばビデオ入力2を選択する場合は「V2」)などの、入力方法の説明が表示されている。 In this case, the display screen displays information indicating the current input source and channel, and information indicating the input source and channel input by the user in the second stage input, and supports operation input by the user. For example, when inputting a terrestrial television, input a number directly, and when selecting BS broadcasting, first input “B” and input a channel number to the right (for example, “B7”). ), When selecting cable TV, first input "C" and input the channel number to the right (for example, "C20"). When selecting video input, input "V" at the beginning. A description of an input method such as inputting a terminal number to the right (for example, “V2” when selecting video input 2) is displayed.
なお、第2段階入力において、トラックパッド11に描かれた文字や数字を検出する方法については、例えば、特開平11−184970号公報などに記載されているので、その詳細な説明は省略する。
Note that a method for detecting characters and numbers drawn on the
ユーザが、この状態でトラックパッド11に文字または数字を入力すると、操作入力取得部91、操作分析処理部92、および、状態管理処理部93の処理により、ユーザの操作入力に文字または数字の情報が、一文字ごとにテレビジョン受像機2に送信されるので、上述した場合と同様にして、ユーザの操作入力に対応する信号の供給を受けた動作制御部103は、入力ソース制御処理部106を制御して、入力ソースを変更させ、チャンネル制御処理部109を制御して、受信される放送信号のチャンネル、または、入力端子の番号を変更させる。そして、動作制御部103は、GUI出力制御部104を制御し、表示部22に表示されたGUI画面の表示を変更させる。
When the user inputs characters or numbers into the
ここで、入力パターンによっては、1文字の入力である場合と、2文字以上の入力があるが、従来広く用いられている文字入力方法と同様に、1文字以上の入力があった後に、特定時間経過後も次の文字の入力がなかった場合、1文字で入力が完了したと認識されるものとする。この特定時間の時間幅はユーザにより設定変更可能であるものとするが、例えば、0.5秒程度が適切である。具体的には、操作入力取得部91、操作分析処理部92、および、状態管理処理部93は、例えば、「1」と入力された後に、0.5秒以上操作入力を受けなかった場合、ユーザの入力した文字は「1」であり、文字の入力が終了したものと判定して「第1段階入力待機状態」に状態を遷移させ、「1」と入力された後0.5秒以内に、「1」の入力位置の右側に「0」の入力を受けた場合、ユーザの入力した文字は「10」であり、文字の入力が終了したものと判定して「第1段階入力待機状態」に状態を遷移させる。状態管理処理部93は、文字の入力が完了されたと判定した場合、テレビジョン受像機2にそれを通知させる。すなわち、信号パターン生成処理部95は、状態管理処理部93から供給された情報を基に、テレビジョン受像機2に送信される赤外線信号のパターンを取得し、赤外線送信部96に供給し、赤外線送信部96は、文字の入力が完了したことを示す赤外線信号を、テレビジョン受像機2に送信する。
Here, depending on the input pattern, there is an input of one character and an input of two or more characters. However, in the same way as a character input method widely used in the past, after an input of one or more characters, it is specified. If the next character is not input after the elapse of time, it is recognized that the input is completed with one character. The time width of the specific time can be changed by the user. For example, about 0.5 seconds is appropriate. Specifically, the operation
また、操作分析処理部92は、操作入力取得部91により取得された操作が、例えば、三角形を一筆書きした操作入力であった場合、その操作入力は、テレビジョン受像機2から出力される音声のボリュームを変更する機能に対応するものであるとする。状態管理処理部93は、操作分析処理部92から供給された、音声ボリュームの変更の指令に対応する操作入力が行われたことを示す情報を、信号パターン生成処理部95に供給するとともに、入力モードを文字・数字入力モードであるとして、次にユーザにより入力される操作は、音声ボリュームの変更のための文字または数字の入力操作であると認識し、操作分析処理部92に、入力モードの変更を通知する。信号パターン生成処理部95は、状態管理処理部93から供給された情報を基に、テレビジョン受像機2に送信される赤外線信号のパターンを取得し、赤外線送信部96に供給し、赤外線送信部96は、赤外線信号を、テレビジョン受像機2に送信する。
Further, when the operation acquired by the operation
そして、リモートコマンダ1からの赤外線信号を赤外線受信部101により受信したテレビジョン受像機2においては、信号パターン分析処理部102で、受信した赤外線信号のパターンを基に、ユーザの操作入力に対応する機能が特定されて、その結果を示す情報が、動作制御部103に供給される。そして、動作制御部103は、ユーザの操作入力に対応する機能が音声ボリュームの変更であることを示す情報に基づいて、GUI出力制御部104を制御し、図14に示されるような、音声ボリュームの変更指令を受けるためのGUI画面を、表示部22に表示させる。
In the
この場合の表示画面には、現在の音声ボリュームに対応する数値を示す情報と、ユーザが第2段階入力において入力した音声ボリュームに対応する数値を示す情報が表示される。ユーザが、この状態でトラックパッド11に文字または数字を入力すると、操作入力取得部91、操作分析処理部92、および、状態管理処理部93の処理により、ユーザの操作入力に文字または数字の情報が、テレビジョン受像機2に送信されるので、上述した場合と同様にして、ユーザの操作入力に対応する信号の供給を受けた動作制御部103は、入力ソース制御処理部106を制御して、音量制御処理部105を制御して、音声出力のボリュームを変更させる。そして、動作制御部103は、GUI出力制御部104を制御し、表示部22に表示されたGUI画面の表示を変更させる。
On the display screen in this case, information indicating a numerical value corresponding to the current audio volume and information indicating a numerical value corresponding to the audio volume input by the user in the second stage input are displayed. When the user inputs characters or numbers into the
入力モードとして、新たに「文字・数字入力モード」を設け、「文字・数字入力モード」における「第2段階入力待機状態」において、トラックパッド11にて、ユーザが指などで、数字や文字の形を描くことによって、「変化量入力モード」における場合と同様にして、変更量を指示することができるようにした場合の状態遷移図を図15に示す。
As the input mode, a “character / number input mode” is newly provided. In the “second stage input standby state” in the “character / number input mode”, the user can use a finger or the like on the
すなわち、図15の状態遷移図は、第1段階入力の待機状態から、文字・数字入力モードへの遷移が追加されている以外は、図12を用いて説明した状態遷移図と、基本的に同様の状態遷移を示すものである。 That is, the state transition diagram in FIG. 15 is basically the same as the state transition diagram described with reference to FIG. The same state transition is shown.
状態管理処理部93によって管理されているリモートコマンダ1の状態が、図15の状態遷移図における「第1段階入力待機状態」であって、ユーザが、トラックパッド11に対して三角形を上下反転した図形、または、三角形を一筆書きした操作入力を行った場合、操作分析処理部92は、ユーザが、テレビジョン受像機2が取得するデータの入力ソース、および、選局されるチャンネルを変更する機能、または、出力される音声のボリュームを変更させる機能の呼出しを指示していることを検出し、状態管理処理部93に供給するので、状態管理処理部93は、入力モードを「文字・数字入力モード」に遷移させ、操作分析処理部92に通知する。
The state of the
操作分析処理部92は、「文字・数字入力モード」における「第2段階入力待機状態」において、操作入力取得部91から供給される、ユーザの操作入力を示す情報を基に、入力された文字、または、数字を検出する。そして、信号パターン生成処理部95は、状態管理処理部93から供給された情報を基に、テレビジョン受像機2に送信される赤外線信号のパターンを取得し、赤外線送信部96に供給し、赤外線送信部96は、赤外線信号を、テレビジョン受像機2に送信する。状態管理処理部93は、文字または数字の入力から、特定の時間が経過した後、文字または数字の入力が完了したものとして、状態を、再び、「第1段階入力待機状態」に遷移させる。
The operation
次に、図16のフローチャートを参照して、図4を用いて説明したリモートコマンダ1が実行する、リモートコマンダの処理1について説明する。
Next, the
ステップS1において、操作入力取得部91は、トラックパッド11にユーザの指などが接触したか否かを判断する。ステップS1において、トラックパッド11にユーザの指などが接触していないと判断された場合、ユーザの指などが接触したと判断されるまで、ステップS1の処理が繰り返される。
In step S <b> 1, the operation
ステップS1において、トラックパッド11にユーザの指などが接触したと判断された場合、ステップS2において、操作入力取得部91は、ユーザの指などがトラックパッド11に触れた初期位置の座標情報を取得する。
If it is determined in step S1 that the user's finger or the like has touched the
ステップS3において、操作入力取得部91は、所定の期間(100msec)ごとにユーザの指などがトラックパッド11に触れている位置を示す座標情報(領域情報)を取得する。
In step S <b> 3, the operation
ステップS4において、操作入力取得部91は、トラックパッド11からユーザの指などが離れたか否かを判断する。ステップS4において、トラックパッド11からユーザの指などが離れていないと判断された場合、処理はステップS3に戻り、それ以降の処理が繰り返される。
In step S <b> 4, the operation
ステップS4において、トラックパッド11からユーザの指などが離れたと判断された場合、ステップS5において、操作入力取得部91は、ユーザの指などがトラックパッド11において移動した座標(領域)のリストを得て、操作分析処理部92に供給する。操作分析処理部92は、操作入力取得部91から供給された、ユーザの指などの軌跡を分析する。
When it is determined in step S4 that the user's finger or the like has moved away from the
ステップS6において、操作分析処理部92は、分析結果を基に、図6を用いて説明したように、ユーザの指などの軌跡と対応付けられたユーザの指令内容を抽出し、状態管理処理部93に供給する。
In step S6, the operation
ステップS7において、状態管理処理部93は、抽出されたユーザの指令内容をテレビジョン受像機2に送信するために、いずれの機能に対応する操作入力が行われたかを示す情報を、信号パターン生成処理部95に供給する。信号パターン生成処理部95は、状態管理処理部93から供給された情報を基に、テレビジョン受像機2に送信される赤外線信号のパターンを取得し、赤外線送信部96に供給し、赤外線送信部96は、赤外線信号を、テレビジョン受像機2に送信する。
In step S <b> 7, the state
ステップS8において、状態管理処理部93は、抽出されたユーザの指令内容を基に、入力モードの状態を管理し、必要に応じて、現在の入力モードを変更し、操作分析処理部92に入力モードの変更を通知する。
In step S <b> 8, the state
ステップS9において、操作分析処理部92は、操作入力取得部91から供給される、ユーザの指などがトラックパッド11において移動した座標(領域)のリストと、通知された入力モードに基づいて、ユーザの操作入力を取得し、状態管理処理部93に供給する。状態管理処理部93は、入力モードの状態を管理し、必要に応じて、信号パターン生成処理部95および赤外線送信部96の処理により、ユーザの指令内容を、テレビジョン受像機2に送信させる。
In step S <b> 9, the operation
ステップS10において、状態管理処理部93は、操作分析処理部92から供給される、ユーザの操作入力に対応する指令内容を基に、入力モードが終了されたか否かを判断する。ステップS10において、入力モードが終了されていないと判断された場合、処理は、ステップS9に戻り、同一の入力モードにおいて、それ以降の処理が繰り返される。ステップS10において、入力モードが終了されたと判断された場合、状態は、再び「第1段階入力待機状態」に戻るので、処理は、ステップS1に戻り、それ以降の処理が繰り返される。
In step S <b> 10, the state
このような処理により、リモートコマンダ1を利用するユーザは、ただ1つの入力デバイスであるトラックパッド11を用いて、機能を選択する操作、その機能に対して値を入力する操作、および、フリーカーソルを移動させる操作を入力することができる。
Through such processing, the user using the
また、リモートコマンダ1からの赤外線信号を赤外線受信部101により受信したテレビジョン受像機2においては、信号パターン分析処理部102で、受信した赤外線信号のパターンを基に、ユーザの操作入力に対応する機能が特定されて、その結果を示す情報が、動作制御部103に供給される。そして、動作制御部103は、ユーザの操作入力に対応する機能を示す情報に基づいて、GUI出力制御部104、音量制御処理部105、入力ソース制御処理部106、カーソル移動制御処理部107、電源制御処理部108、チャンネル制御処理部109、および、設定メニュー制御処理部110を適宜制御する。
Further, in the
図12および図15の状態遷移図を用いて説明したように、図16のステップS9において、各種の入力モードに基づいて、ユーザの操作入力に対応する機能や指令内容が抽出されて、テレビジョン受像機2に送信される。次に、図17のフローチャートを参照して、各種の入力モードにおける処理の一例として、リモートコマンダ1の変化量入力モードにおける処理について説明する。
As described with reference to the state transition diagrams of FIGS. 12 and 15, in step S <b> 9 of FIG. 16, functions and command contents corresponding to user operation inputs are extracted based on various input modes, and the television is set. It is transmitted to the
ステップS21において、操作入力取得部91は、トラックパッド11にユーザの指などが接触したか否かを判断する。ステップS1において、トラックパッド11にユーザの指などが接触していないと判断された場合、ユーザの指などが接触したと判断されるまで、ステップS1の処理が繰り返される。
In step S <b> 21, the operation
ステップS21において、トラックパッド11にユーザの指などが接触したと判断された場合、ステップS22において、操作入力取得部91は、ユーザの指などがトラックパッド11に触れた初期位置の座標情報を取得する。
If it is determined in step S21 that the user's finger or the like has touched the
ステップS23において、操作入力取得部91は、所定の期間(100msec)ごとにユーザの指などがトラックパッド11に触れている位置を示す座標情報(領域情報)を取得する。
In step S <b> 23, the operation
ステップS24において、操作入力取得部91は、トラックパッド11からユーザの指などが離れたか否かを判断する。ステップS24において、トラックパッド11からユーザの指などが離れていないと判断された場合、処理はステップS23に戻り、それ以降の処理が繰り返される。
In step S <b> 24, the operation
ステップS24において、トラックパッド11からユーザの指などが離れたと判断された場合、ステップS25において、操作入力取得部91および操作分析処理部92は、ユーザの操作に対応する機能を特定する。すなわち、操作入力取得部91は、ユーザの指などがトラックパッド11において移動した座標(領域)のリストを得て、操作分析処理部92に供給する。操作分析処理部92は、操作入力取得部91から供給された、ユーザの指などの軌跡を分析する。そして、操作分析処理部92は、分析結果(方向および変化量)を基に、チャンネルの変更、音声ボリュームの変更、または、入力ソースの変更など、入力モードとユーザの指などの軌跡とに対応付けられたユーザの指令内容を抽出し、状態管理処理部93に供給する。
If it is determined in step S24 that the user's finger or the like has moved away from the
ステップS26において、状態管理処理部93は、抽出されたユーザの指令内容をテレビジョン受像機2に送信するために、操作入力に対応する変更量(チャンネルの変更、音声ボリュームの変更、または、入力ソースの変更)を示す情報を、信号パターン生成処理部95に供給する。信号パターン生成処理部95は、状態管理処理部93から供給された情報を基に、テレビジョン受像機2に送信される赤外線信号のパターンを取得し、赤外線送信部96に供給し、赤外線送信部96は、赤外線信号を、テレビジョン受像機2に送信して、処理が終了される。
In step S26, the state
このような処理により、リモートコマンダ1を利用するユーザは、ただ1つの入力デバイスであるトラックパッド11を用いて、それぞれの入力モードにおける操作入力を行うことができる。
By such processing, the user using the
また、リモートコマンダ1からの赤外線信号を赤外線受信部101により受信したテレビジョン受像機2においては、信号パターン分析処理部102で、受信した赤外線信号のパターンを基に、ユーザの操作入力に対応する機能が特定されて、その結果を示す情報が、動作制御部103に供給される。そして、動作制御部103は、ユーザの操作入力に対応する機能を示す情報に基づいて、GUI出力制御部104、音量制御処理部105、入力ソース制御処理部106、カーソル移動制御処理部107、電源制御処理部108、チャンネル制御処理部109、および、設定メニュー制御処理部110を適宜制御する。
Further, in the
ところで、上述した処理においては、「第1段階入力待機状態」において、ユーザが、トラックパッド11に接触した指などを左方向から右方向に移動させる入力を行った場合、操作分析処理部92は、ユーザが、フリーカーソルモードを指示していることを検出し、状態管理処理部93に供給するので、状態管理処理部93は、入力モードを「フリーカーソルモード」に遷移させるものとして説明したが、上述した実施の形態においては、タッピングが行われたことが検出された場合、選択されているアイテムを確定する操作入力が行われたと認識されて、状態は、再び、「第1段階入力待機状態」に戻る。したがって、例えば、テレビジョン受像機2が、双方向通信機能、ウェブブラウジング機能、または、デジタル放送におけるBML(Broadcast Markup Language)ブラウザを利用する機能を有し、フリーカーソルの入力を連続して行う可能性が高い場合、タッピングが行われるごとに、改めてフリーカーソルモードを指令する必要があり、操作性が良いとは言いがたい。
By the way, in the process described above, in the “first stage input standby state”, when the user performs an input to move the finger touching the
通常、フリーカーソルの入力が必要な状態であるか否かは、テレビジョン受像機において判断可能であるため、フリーカーソルの入力が必要な状態であるときには、テレビジョン受像機からリモートコマンダに対して、フリーカーソルモードでの操作入力を受けるように通知し、リモートコマンダの入力モードを制御することができるようにしても良い。 Normally, a television receiver can determine whether or not the input of a free cursor is necessary. Therefore, when the input of the free cursor is necessary, the television receiver can send a remote commander to the remote commander. Alternatively, it may be notified that the operation input in the free cursor mode is received so that the input mode of the remote commander can be controlled.
図18は、フリーカーソルの入力が必要な状態であることを、テレビジョン受像機からリモートコマンダに通知することができるようにした場合における、リモートコマンダ121、および、テレビジョン受像機122の機能(ユーザの操作入力に対する処理に対応する部分のみ)を説明するための機能ブロック図である。
FIG. 18 shows the functions of the
なお、図4を用いて説明した場合と対応する部分については、同一の符号を付してあり、その説明は適宜省略する。 Note that portions corresponding to those described with reference to FIG. 4 are denoted with the same reference numerals, and description thereof is omitted as appropriate.
すなわち、図18のリモートコマンダ121は、状態管理処理部93に代わって状態管理処理部131が、赤外線送信部96に代わって赤外線送受信部132が設けられ、新たに、信号パターン分析処理部133が設けられている以外は、基本的に、図4を用いて説明したリモートコマンダ1と同様に構成されている。
That is, the
状態管理処理部131は、操作分析処理部92による操作分析結果、および、信号パターン分析処理部133から供給される信号に基づいて、入力モードの状態を管理するとともに、操作分析処理部92に入力モードの変更を通知する。また、状態管理処理部131は、状態管理処理部93と同様に、ユーザの操作入力が所定の機能に対応付けられない場合、LED制御部94にエラー発生を通知し、所定の機能に対応付けられている場合、いずれの機能に対応する操作入力が行われたかを示す情報を、信号パターン生成処理部95に供給する。赤外線送受信部132は、テレビジョン受像機122に赤外線信号を送信するのみならず、テレビジョン受像機122から送信される赤外線信号を受信し、信号パターン分析処理部133に供給する。信号パターン分析処理部133は、赤外線送受信部132により受信された信号のパターンを基に、フリーカーソルの入力が必要な状態であるか否かを特定し、その結果を示す情報を、状態管理処理部131に供給する。
The state
また、図18のテレビジョン受像機122は、赤外線受信部101に代わって赤外線送受信部141が、動作制御部103に代わって、動作制御部142が設けられ、新たに、信号パターン生成処理部143が設けられている以外は、基本的に、図4を用いて説明したテレビジョン受像機2と同様の構成を有するものである。
18 is provided with an infrared transmission /
赤外線送受信部141は、リモートコマンダ121から送信される赤外線信号を受信するのみならず、信号パターン生成処理部143から供給された信号を基に、リモートコマンダ121に赤外線信号を送信する。動作制御部142は、ユーザの操作入力に対応する機能を示す情報に基づいて、GUI出力制御部104、音量制御処理部105、入力ソース制御処理部106、カーソル移動制御処理部107、電源制御処理部108、チャンネル制御処理部109、および、設定メニュー制御処理部110を制御するのみならず、例えば、双方向通信機能やウェブブラウジング機能が利用されている場合や、デジタル放送におけるBMLブラウザを起動した場合など、フリーカーソルの入力を連続して行う可能性が高い状態であるとき、フリーカーソルモードでの操作入力を受けるようにリモートコマンダ121に通知するために、信号パターン生成処理部143を制御し、フリーカーソルの入力を連続して行う可能性が高い状態が解除されたとき、フリーカーソルモードを終了させるようにリモートコマンダ121に通知するために、信号パターン生成処理部143を制御する。信号パターン生成処理部143は、動作制御部142から供給された情報を基に、リモートコマンダ121に送信される赤外線信号のパターンを取得し、赤外線送受信部141に供給する。
The infrared transmission /
次に、図19のフローチャートを参照して、図18を用いて説明したリモートコマンダ121が実行する、リモートコマンダの処理2について説明する。
Next, the
ステップS41乃至ステップS49においては、図16のフローチャートを用いて説明した、ステップS1乃至ステップS9と基本的に同様の処理が実行される。 In step S41 to step S49, basically the same processing as step S1 to step S9 described with reference to the flowchart of FIG. 16 is executed.
すなわち、トラックパッド11にユーザの指などが接触したと判断された場合、ユーザの指などがトラックパッド11に触れた初期位置の座標情報が取得され、所定の期間(100msec)ごとにユーザの指などがトラックパッド11に触れている位置を示す座標情報(領域情報)が取得される。そして、トラックパッド11からユーザの指などが離れたと判断された場合、ユーザの指などがトラックパッド11において移動した座標(領域)のリストを基に、ユーザの指などの軌跡が分析され、図6を用いて説明したように、ユーザの指などの軌跡と対応付けられたユーザの指令内容が抽出される。
That is, when it is determined that the user's finger or the like has touched the
そして、抽出されたユーザの指令内容がテレビジョン受像機122に送信され、抽出されたユーザの指令内容を基に、入力モードの状態が管理され、必要に応じて、現在の入力モードが変更され、現在の入力モードに基づいて、ユーザの指令内容が、テレビジョン受像機122に送信される。
Then, the extracted command content of the user is transmitted to the
ステップS50において、状態管理処理部131は、信号パターン分析処理部133から供給される信号に基づいて、テレビジョン受像機122から、フリーカーソルモードへの移行通知を受けたか否かを判断する。
In step S <b> 50, the state
ステップS50において、テレビジョン受像機122から、フリーカーソルモードへの移行通知を受けたと判断された場合、ステップS51において、状態管理処理部131は、入力モードをフリーカーソルモードに遷移させ、入力モードがフリーカーソルモードであることを、操作分析処理部92に通知し、処理は、ステップS49に戻り、それ以降の処理が繰り返される。
If it is determined in step S50 that a notification of transition to the free cursor mode has been received from the
ステップS50において、テレビジョン受像機122から、フリーカーソルモードへの移行通知を受けていないと判断された場合、ステップS52において、状態管理処理部131は、操作分析処理部92から供給される、ユーザの操作入力に対応する指令内容を基に、または、入力モードがテレビジョン受像機122からの通知によるフリーカーソルモードであるときは、信号パターン分析処理部133から供給される信号に基づいて、入力モードが終了されたか否かを判断する。ステップS52において、入力モードが終了されていないと判断された場合、処理は、ステップS49に戻り、同一の入力モードにおいて、それ以降の処理が繰り返される。ステップS52において、入力モードが終了されたと判断された場合、状態は、再び「第1段階入力待機状態」に戻るので、処理は、ステップS41に戻り、それ以降の処理が繰り返される。
If it is determined in step S50 that the notification of transition to the free cursor mode has not been received from the
なお、それぞれの入力モードにおける処理は、図17を用いて、変化量入力モードを例として説明した場合と同様であるので、ここでは、その詳細な説明は省略する。 The processing in each input mode is the same as that described with reference to FIG. 17 using the change amount input mode as an example, and thus detailed description thereof is omitted here.
このような処理により、リモートコマンダ121を利用するユーザは、ただ1つの入力デバイスであるトラックパッド11を用いて、機能を選択する操作、その機能に対して値を入力する操作、および、フリーカーソルを移動させる操作を入力することができ、更に、テレビジョン受像機122が、双方向通信機能やウェブブラウジング機能が利用されている場合や、デジタル放送におけるBMLブラウザを起動した場合など、フリーカーソルの入力を連続して行う可能性が高い状態であるとき、テレビジョン受像機122から、フリーカーソルの入力を連続して行う可能性が高い状態であることを示す信号を受け、自動的に、フリーカーソルモードに状態を遷移させるようにすることができる。
Through such processing, the user using the
ところで、以上説明した実施の形態においては、ユーザの操作入力を補助するためのGUI画面が、テレビジョン受像機の表示部22に表示されるものとして説明したが、テレビジョン受像機がGUI画面を表示させる機能を有していない場合、または、リモートコマンダにより操作される機器が、ステレオやエアーコンディショナーなど、十分な表示機能を有さない機器である場合、リモートコマンダに液晶表示部などを設けて、ユーザの操作入力を補助するためのGUI画面をリモートコマンダに表示させるようにしても良い。
In the above-described embodiment, the GUI screen for assisting the user's operation input is described as being displayed on the
図20は、ユーザの操作入力を補助するためのGUI画面を表示させることが可能なリモートコマンダ161の外観構成図である。図20のリモートコマンダ161は、液晶表示部171が新たに追加された以外は、図1を用いて説明したリモートコマンダ1と基本的に同様の外観構成を有するものである。また、図20のリモートコマンダ161においては、エラー情報を液晶表示部171に表示させるようにすることにより、エラー表示用LED13を省略するようにしても良い。
FIG. 20 is an external configuration diagram of the
図21は、ユーザの操作入力を補助するためのGUI画面を表示させることが可能なリモートコマンダ161、および、ユーザの操作入力を補助するためのGUI画面を表示させないテレビジョン受像機181の機能(ユーザの操作入力に対する処理に対応する部分のみ)を説明するための機能ブロック図である。
FIG. 21 shows functions of a
なお、図4を用いて説明した場合と対応する部分については、同一の符号を付してあり、その説明は適宜省略する。 Note that portions corresponding to those described with reference to FIG. 4 are denoted with the same reference numerals, and description thereof is omitted as appropriate.
すなわち、図21のリモートコマンダ161は、状態管理処理部93に代わって状態管理処理部191が設けられ、新たに、GUI出力制御部192が設けられている以外は、基本的に、図4を用いて説明したリモートコマンダ1と同様に構成されている。
That is, the
状態管理処理部191は、操作分析処理部92による操作分析結果に基づいて、入力モードの状態を管理し、操作分析処理部92に入力モードの変更を通知するとともに、図7乃至図11、並びに、図13および図14を用いて説明したような、ユーザにより呼び出された機能に対応して、ユーザの操作入力を補助するためのGUI画面を液晶表示部171に表示させるために、GUI出力制御部192を制御する。また、状態管理処理部191は、状態管理処理部93と同様に、ユーザの操作入力が所定の機能に対応付けられない場合、LED制御部94にエラー発生を通知し、所定の機能に対応付けられている場合、いずれの機能に対応する操作入力が行われたかを示す情報を、信号パターン生成処理部95に供給する。GUI出力制御部192は、状態管理処理部191の制御に基づいて、図7乃至図11、並びに、図13および図14を用いて説明したような、ユーザにより呼び出された機能に対応して、ユーザの操作入力を補助するためのGUI画面の、液晶表示部171への表示を制御する。
The state
また、図21のテレビジョン受像機181は、動作制御部103に代わって、動作制御部201が設けられ、GUI出力制御部104が省略されている以外は、基本的に、図4を用いて説明したテレビジョン受像機2と同様の構成を有するものである。
Further, the
動作制御部201は、ユーザの操作入力に対応する機能を示す情報に基づいて、音量制御処理部105、入力ソース制御処理部106、カーソル移動制御処理部107、電源制御処理部108、チャンネル制御処理部109、および、設定メニュー制御処理部110を制御する。
Based on information indicating a function corresponding to a user operation input, the
次に、図22のフローチャートを参照して、図20および図21を用いて説明したリモートコマンダ161が実行する、リモートコマンダの処理3について説明する。
Next, the
ステップS71乃至ステップS76においては、図16のフローチャートを用いて説明した、ステップS1乃至ステップS6と基本的に同様の処理が実行される。 In steps S71 to S76, basically the same processing as that in steps S1 to S6 described with reference to the flowchart of FIG. 16 is executed.
すなわち、トラックパッド11にユーザの指などが接触したと判断された場合、ユーザの指などがトラックパッド11に触れた初期位置の座標情報が取得され、所定の期間(100msec)ごとにユーザの指などがトラックパッド11に触れている位置を示す座標情報(領域情報)が取得される。そして、トラックパッド11からユーザの指などが離れたと判断された場合、ユーザの指などがトラックパッド11において移動した座標(領域)のリストを基に、ユーザの指などの軌跡が分析され、図6を用いて説明したように、ユーザの指などの軌跡と対応付けられたユーザの指令内容が抽出される。
That is, when it is determined that the user's finger or the like has touched the
ステップS77において、状態管理処理部191は、図7乃至図11、並びに、図13および図14を用いて説明したような、ユーザにより呼び出された機能に対応して、ユーザの操作入力を補助するためのGUI画面を液晶表示部171に表示させるために、GUI出力制御部192を制御する。GUI出力制御部192は、状態管理処理部191の制御に基づいて、ユーザにより呼び出された機能に対応して、ユーザの操作入力を補助するためのGUI画面の、液晶表示部171への表示を制御する。
In step S77, the state
そして、ステップS78およびステップS79において、図16のフローチャートを用いて説明した、ステップS7およびステップS8と基本的に同様の処理が実行される。 In steps S78 and S79, basically the same processing as that in steps S7 and S8 described with reference to the flowchart of FIG. 16 is executed.
すなわち、抽出されたユーザの指令内容がテレビジョン受像機122に送信され、抽出されたユーザの指令内容を基に、入力モードの状態が管理され、必要に応じて、現在の入力モードが変更される。
That is, the extracted user command content is transmitted to the
ステップS80において、状態管理処理部191は、操作入力取得部91から供給される、ユーザの指などがトラックパッド11において移動した座標(領域)のリストと、通知された入力モードに基づいて、ユーザの操作入力を取得し、状態管理処理部93に供給する。状態管理処理部93は、ユーザの操作入力を基に、GUI画面の表示を更新させるために、GUI出力制御部192を制御するとともに、入力モードの状態を管理し、必要に応じて、信号パターン生成処理部95および赤外線送信部96の処理により、ユーザの指令内容を、テレビジョン受像機2に送信させる。
In step S80, the state
ステップS81において、状態管理処理部191は、操作分析処理部92から供給される、ユーザの操作入力に対応する指令内容を基に、入力モードが終了されたか否かを判断する。ステップS81において、入力モードが終了されていないと判断された場合、処理は、ステップS80に戻り、同一の入力モードにおいて、それ以降の処理が繰り返される。ステップS81において、入力モードが終了されたと判断された場合、状態は、再び「第1段階入力待機状態」に戻るので、処理は、ステップS71に戻り、それ以降の処理が繰り返される。
In step S <b> 81, the state
なお、それぞれの入力モードにおける処理は、図17を用いて、変化量入力モードを例として説明した場合と同様であるので、ここでは、その詳細な説明は省略する。 The processing in each input mode is the same as that described with reference to FIG. 17 using the change amount input mode as an example, and thus detailed description thereof is omitted here.
このような処理により、リモートコマンダ161を利用するユーザは、GUI画面の表示機能を有さない装置に対する操作入力を行う場合においても、ただ1つの入力デバイスであるトラックパッド11を用いて、機能を選択する操作、その機能に対して値を入力する操作、および、フリーカーソルを移動させる操作を入力することができる。
Through such processing, even when a user using the
以上により、ユーザは、チャンネル指定、音量変更、入力ソース切替え、設定メニューなどの選択、フリーカーソルの移動において、統一された操作性を有するリモートコマンダを用いて操作入力を行うことが可能である。特に、本発明を適用した場合、操作が簡単であるので、ユーザは、リモートコマンダの入力デバイス(ユーザの手元)を見ることなく、操作入力を行うことが可能である。また、本発明を適用したリモートコマンダは、従来のリモートコマンダに用いられていた、ボタン、シャトルボタン、トラックボールなどの可動部品が設けられてないため、耐久性に優れている。 As described above, the user can perform operation input using a remote commander having unified operability in channel designation, volume change, input source switching, selection of a setting menu, and movement of a free cursor. In particular, when the present invention is applied, since the operation is simple, the user can perform the operation input without looking at the input device (the user's hand) of the remote commander. In addition, the remote commander to which the present invention is applied is excellent in durability because there are no movable parts such as buttons, shuttle buttons, trackballs, etc. used in conventional remote commanders.
なお、以上の説明において、リモートコマンダのトラックパッド11の形状は円形状としているが、トラックパッド11の形状は他の形状であっても良い。例えば、リモートコマンダのトラックパッド11は、四角形やドーナッツ型であってもよいし、平面的ではなく、ドーム状に盛り上がった形状で、手のひら全体を使って操作することができるようにしてもよい。
In the above description, the shape of the
また、本実施の形態においては、リモートコマンダを用いて、テレビジョン受像機を操作する場合について説明しているが、ユーザの操作対象となる機器が、例えば、ビデオデッキ、ステレオ、エアーコンディショナーなど、リモートコマンダで操舵される既存のいかなる装置であっても、本発明は適用可能である。 Further, in the present embodiment, the case where the television receiver is operated using the remote commander is described, but the device that is the operation target of the user is, for example, a video deck, a stereo, an air conditioner, etc. The present invention is applicable to any existing device that is steered by a remote commander.
上述した一連の処理は、ソフトウェアにより実行することもできる。そのソフトウェアは、そのソフトウェアを構成するプログラムが、専用のハードウェアに組み込まれているコンピュータ、または、各種のプログラムをインストールすることで、各種の機能を実行することが可能な、例えば汎用のパーソナルコンピュータなどに、記録媒体からインストールされる。 The series of processes described above can also be executed by software. The software is a computer in which a program constituting the software is incorporated in dedicated hardware, or a various personal computer capable of executing various functions by installing various programs. For example, it is installed from a recording medium.
この記録媒体は、図3に示すように、コンピュータとは別に、ユーザにプログラムを提供するために配布される、プログラムが記録されている磁気ディスク71(フレキシブルディスクを含む)、光ディスク72(CD-ROM(Compact Disk-Read Only Memory),DVD(Digital Versatile Disk)を含む)、光磁気ディスク73(MD(Mini-Disk)(商標)を含む)、もしくは半導体メモリ74などよりなるパッケージメディアなどにより構成される。
As shown in FIG. 3, this recording medium is distributed to provide a program to a user separately from a computer, and includes a magnetic disk 71 (including a flexible disk) on which a program is recorded, an optical disk 72 (CD- Consists of a package medium composed of ROM (Compact Disk-Read Only Memory), DVD (Digital Versatile Disk), magneto-optical disk 73 (including MD (Mini-Disk) (trademark)), or
また、本明細書において、記録媒体に記録されるプログラムを記述するステップは、記載された順序に沿って時系列的に行われる処理はもちろん、必ずしも時系列的に処理されなくとも、並列的あるいは個別に実行される処理をも含むものである。 Further, in the present specification, the step of describing the program recorded on the recording medium is not limited to the processing performed in chronological order according to the described order, but may be performed in parallel or It also includes processes that are executed individually.
なお、本明細書において、システムとは、複数の装置により構成される装置全体を表すものである。 In the present specification, the term “system” represents the entire apparatus constituted by a plurality of apparatuses.
1 リモートコマンダ, 2 テレビジョン受像機, 311 トラックパッド, 12 赤外線送信部, 21 赤外線受信部, 22 表示部, 41 CPU, 61 CPU, 91 操作入力取得部, 92 操作分析処理部, 93 状態管理処理部, 95 信号パターン生成処理部, 96 赤外線送信部, 101 赤外線受信部, 102 信号パターン分析処理部, 103 動作制御部, 104 GUI処理部, 121 リモートコマンダ, 122 テレビジョン受像機, 131 状態管理処理部, 132 赤外線送受信部, 133 信号パターン分析処理部, 141 赤外線送受信部, 142 動作制御部, 143 信号パターン生成処理部, 161 リモートコマンダ, 171 液晶表示部, 181 テレビジョン受像機, 191 状態管理処理部, 192 GUI処理部, 201 動作制御部
DESCRIPTION OF
Claims (12)
前記情報入力装置は、
ユーザの操作入力を受ける操作入力手段と、
前記操作入力手段により入力された前記ユーザの操作入力を基に、入力モードを制御する入力モード制御手段と、
前記入力モード制御手段により制御される前記入力モードに関する情報を、前記情報処理装置に送信する第1の送信手段と
を備え、
前記操作入力手段は、所定の表面積を有する図形描写領域を有し、
前記入力モード制御手段は、前記ユーザにより前記操作入力手段の前記図形描写領域に描写された図形の形状を基に、前記入力モードを制御し、
前記情報処理装置は、
前記情報入力装置の前記第1の送信手段により送信される情報を受信する第1の受信手段と、
前記第1の受信手段により受信された前記情報に基づいて、前記情報処理装置が実行可能な動作を制御する動作制御手段と、
前記動作制御手段による制御にしたがって、所定の情報を表示する表示手段と
を備え、
前記表示手段は、前記入力モードに対応して、前記ユーザによる前記情報入力装置の前記操作入力手段への操作入力を補助するための情報を表示する
ことを特徴とする情報処理システム。 In an information processing system composed of an information input device and an information processing device,
The information input device includes:
Operation input means for receiving user operation input;
Input mode control means for controlling the input mode based on the user's operation input input by the operation input means;
First transmission means for transmitting information on the input mode controlled by the input mode control means to the information processing apparatus,
The operation input means has a graphic drawing area having a predetermined surface area,
The input mode control means controls the input mode based on the shape of a graphic drawn by the user in the graphic drawing area of the operation input means,
The information processing apparatus includes:
First receiving means for receiving information transmitted by the first transmitting means of the information input device;
An operation control unit that controls an operation that can be performed by the information processing device based on the information received by the first receiving unit;
Display means for displaying predetermined information according to the control by the operation control means,
The information processing system, wherein the display unit displays information for assisting an operation input to the operation input unit of the information input device by the user according to the input mode.
前記情報入力装置は、前記情報処理装置の前記第2の送信手段により送信される、前記入力モードに関する情報を受信する第2の受信手段を更に備え、
前記情報処理装置の前記動作制御手段は、前記情報処理装置が実行中の動作に基づいて、前記入力モードを指定するための情報を、前記第2の送信手段により前記情報入力装置に送信させ、
前記情報入力装置の前記入力モード制御手段は、前記第2の受信手段により受信された前記入力モードを指定するための情報を基に、前記入力モードを更に制御する
ことを特徴とする請求項1に記載の情報処理システム。 The information processing apparatus further includes second transmission means for transmitting information on the input mode to the information input apparatus,
The information input device further includes second receiving means for receiving information on the input mode transmitted by the second transmitting means of the information processing apparatus,
The operation control means of the information processing apparatus causes the information input apparatus to transmit information for designating the input mode to the information input apparatus based on an operation being performed by the information processing apparatus.
The input mode control means of the information input device further controls the input mode based on information for designating the input mode received by the second receiving means. Information processing system described in 1.
ことを特徴とする請求項2に記載の情報処理システム。 The operation control means of the information processing apparatus is configured such that the user is referring to the predetermined information displayed by the display means when the operation being executed is moved by the user using the information input device. When in the commanded state, the second transmission means transmits information for setting the input mode to an input mode for receiving an operation input corresponding to the movement of the cursor, to the information input device. The information processing system according to claim 2.
ことを特徴とする請求項1に記載の情報処理システム。 The information for assisting the operation input by the user displayed on the display unit of the information input device is displayed in a shape corresponding to the shape of the operation input unit of the information input device. The information processing system according to claim 1.
ことを特徴とする請求項1に記載の情報処理システム。 The information processing system according to claim 1, wherein the operation input unit of the information input device has a circular shape.
所定の情報を表示可能な表示部が設けられている情報処理装置と
により構成される情報処理システムの情報処理方法であって、
前記情報入力装置において、前記操作入力部により入力された前記ユーザの第1の操作入力を取得する第1の操作入力取得ステップと、
前記情報入力装置において、前記第1の操作入力取得ステップの処理により取得された前記ユーザの前記第1の操作入力を基に、前記図形描写領域に描写された図形の形状を分析する形状分析ステップと、
前記情報入力装置において、前記形状分析ステップの処理により分析された、前記図形の形状を基に、前記ユーザの指令内容を抽出する抽出ステップと、
前記情報入力装置において、前記抽出ステップの処理により抽出された前記ユーザの指令内容に対応する情報を前記情報処理装置へ送信する第1の送信ステップと、
前記情報入力装置において、前記抽出ステップの処理により抽出された前記ユーザの指令内容に基づいて、入力モードを制御する入力モード制御ステップと、
前記情報処理装置において、前記第1の送信ステップの処理により送信された、前記ユーザの指令内容に対応する情報を受信する受信ステップと、
前記情報処理装置において、前記受信ステップの処理により受信された前記ユーザの指令内容に基づいて、前記表示部への、所定の情報の表示を制御する表示制御ステップと、
前記情報入力装置において、前記入力モード制御ステップの処理により制御されている前記入力モードに基づいて、前記操作入力部により入力された、前記表示部を参照した前記ユーザの第2の操作入力を取得する第2の操作入力取得ステップと、
前記第2の操作入力取得ステップの処理により取得された前記ユーザの前記第2の操作入力に対応する情報を前記情報処理装置へ送信する第2の送信ステップと
を含むことを特徴とする情報処理方法。 An information input device having a predetermined graphic depiction area and provided with an operation input unit for receiving a user's operation input;
An information processing method for an information processing system including an information processing device provided with a display unit capable of displaying predetermined information,
In the information input device, a first operation input acquisition step of acquiring the first operation input of the user input by the operation input unit;
In the information input device, based on the first operation input of the user acquired by the processing of the first operation input acquisition step, a shape analysis step of analyzing the shape of the graphic drawn in the graphic drawing area When,
In the information input device, based on the shape of the graphic analyzed by the processing of the shape analysis step, an extraction step for extracting the command content of the user;
In the information input device, a first transmission step of transmitting information corresponding to the user's instruction content extracted by the extraction step processing to the information processing device;
In the information input device, an input mode control step for controlling an input mode based on the command content of the user extracted by the processing of the extraction step;
In the information processing apparatus, a reception step of receiving information corresponding to the user instruction content transmitted by the processing of the first transmission step;
In the information processing apparatus, a display control step for controlling display of predetermined information on the display unit based on the user instruction content received by the processing of the reception step;
In the information input device, based on the input mode controlled by the processing of the input mode control step, the second operation input of the user referring to the display unit input by the operation input unit is acquired. A second operation input acquisition step,
And a second transmission step of transmitting information corresponding to the second operation input of the user acquired by the processing of the second operation input acquisition step to the information processing apparatus. Method.
前記操作入力部により入力された前記ユーザの第1の操作入力を取得する第1の操作入力取得ステップと、
前記第1の操作入力取得ステップの処理により取得された前記ユーザの前記第1の操作入力を基に、前記図形描写領域に描写された図形の形状を分析する形状分析ステップと、
前記形状分析ステップの処理により分析された前記図形の形状を基に、前記ユーザの指令内容を抽出する抽出ステップと、
前記抽出ステップの処理により抽出された前記ユーザの指令内容に対応する情報の前記情報処理装置への送信を制御する第1の送信制御ステップと、
前記抽出ステップの処理により抽出された前記ユーザの指令内容に基づいて、入力モードを制御する入力モード制御ステップと、
前記第1の送信制御ステップの処理により送信が制御された前記ユーザの指令内容に対応する情報を受信した前記情報処理装置の前記表示部に表示される操作入力を補助するための情報を参照した前記ユーザにより、前記操作入力部により入力された第2の操作入力を、前記入力モード制御ステップの処理により制御されている前記入力モードに基づいて取得する第2の操作入力取得ステップと、
前記第2の操作入力取得ステップの処理により取得された前記ユーザの前記第2の操作入力に対応する情報の、前記情報処理装置への送信を制御する第2の送信制御ステップと
含むことを特徴とする処理をコンピュータに実行させるためのプログラム。 Using an operation input unit having a predetermined graphic drawing area, a user's operation input to an information processing apparatus provided with a display unit capable of displaying predetermined information is received, and the information processing apparatus receives the user's operation input. A program for causing a computer to execute processing for transmitting corresponding information,
A first operation input acquisition step of acquiring the first operation input of the user input by the operation input unit;
A shape analysis step of analyzing the shape of the graphic depicted in the graphic depiction region based on the first operation input of the user acquired by the processing of the first operation input acquisition step;
Based on the shape of the figure analyzed by the processing of the shape analysis step, an extraction step for extracting the user's command content;
A first transmission control step for controlling transmission to the information processing apparatus of information corresponding to the user's instruction content extracted by the extraction step;
An input mode control step for controlling the input mode based on the user's instruction content extracted by the extraction step;
The information for assisting the operation input displayed on the display unit of the information processing apparatus that has received the information corresponding to the command content of the user whose transmission is controlled by the processing of the first transmission control step is referred to A second operation input acquisition step of acquiring, by the user, a second operation input input by the operation input unit based on the input mode controlled by the process of the input mode control step;
A second transmission control step for controlling transmission of information corresponding to the second operation input of the user acquired by the processing of the second operation input acquisition step to the information processing apparatus. A program for causing a computer to execute the process.
前記ユーザの操作入力を受ける操作入力手段と、
前記操作入力手段により入力された前記ユーザの操作入力を基に、入力モードを制御する入力モード制御手段と、
前記入力モード制御手段により制御される前記入力モードにしたがって、第1の情報を表示する表示手段と、
前記ユーザが前記所定の装置を制御するための操作入力に関する第2の情報を、前記所定の装置に送信する送信手段と
を備え、
前記操作入力手段は、所定の表面積を有する図形描写領域を有し、
前記入力モード制御手段は、前記ユーザにより前記操作入力手段の前記図形描写領域に描写された図形の形状を基に、前記入力モードを制御し、
前記表示手段により表示される前記第1の情報は、前記入力モードに対応して、前記ユーザによる前記情報入力装置の前記操作入力手段への操作入力を補助するための情報であり、
前記送信手段により送信される前記第2の情報は、前記表示手段により表示された前記第1の情報を参照した前記ユーザにより実行された操作入力に関する情報である
ことを特徴とする情報入力装置。 In an information input device in which a user performs an operation input for controlling a predetermined device,
An operation input means for receiving an operation input of the user;
Input mode control means for controlling the input mode based on the user's operation input input by the operation input means;
Display means for displaying first information according to the input mode controlled by the input mode control means;
Transmission means for transmitting, to the predetermined device, second information related to an operation input for the user to control the predetermined device;
The operation input means has a graphic drawing area having a predetermined surface area,
The input mode control means controls the input mode based on the shape of a graphic drawn by the user in the graphic drawing area of the operation input means,
The first information displayed by the display means is information for assisting an operation input to the operation input means of the information input device by the user corresponding to the input mode,
The second information transmitted by the transmission means is information related to an operation input performed by the user referring to the first information displayed by the display means.
ことを特徴とする請求項8に記載の情報入力装置。 The information input device according to claim 8, wherein information for assisting an operation input by the user displayed on the display unit is displayed in a shape corresponding to a shape of the operation input unit.
ことを特徴とする請求項9に記載の情報入力装置。 The information input device according to claim 9, wherein the operation input unit has a circular shape.
所定の情報を表示可能な表示部と
を備える情報入力装置の情報処理方法であって、
前記操作入力部により入力された前記ユーザの第1の操作入力を取得する第1の操作入力取得ステップと、
前記第1の操作入力取得ステップの処理により取得された、前記ユーザの前記第1の操作入力を基に、前記図形描写領域に描写された図形の形状を分析する形状分析ステップと、
前記形状分析ステップの処理により分析された、前記図形の形状を基に、前記ユーザの指令内容を抽出する抽出ステップと、
前記抽出ステップの処理により抽出された前記ユーザの指令内容に基づいて、前記表示部への、所定の情報の表示を制御する表示制御ステップと、
前記抽出ステップの処理により抽出された前記ユーザの指令内容に対応する情報を他の装置へ送信する第1の送信ステップと、
前記抽出ステップの処理により抽出された前記ユーザの指令内容に基づいて、入力モードを制御する入力モード制御ステップと、
前記入力モード制御ステップの処理により制御されている前記入力モードに基づいて、前記操作入力部により入力された前記ユーザの第2の操作入力を取得する第2の操作入力取得ステップと、
前記第2の操作入力取得ステップの処理により取得された前記ユーザの前記第2の操作入力に対応する情報を他の装置へ送信する第2の送信ステップと
を含むことを特徴とする情報処理方法。 An operation input unit having a predetermined graphic description area and receiving an operation input by a user;
An information processing method for an information input device comprising a display unit capable of displaying predetermined information,
A first operation input acquisition step of acquiring the first operation input of the user input by the operation input unit;
A shape analysis step of analyzing a shape of a graphic depicted in the graphic depiction region based on the first operation input of the user acquired by the processing of the first operation input acquisition step;
Based on the shape of the figure analyzed by the processing of the shape analysis step, an extraction step for extracting the user's command content;
A display control step for controlling display of predetermined information on the display unit based on the user's instruction content extracted by the extraction step;
A first transmission step of transmitting information corresponding to the user instruction content extracted by the processing of the extraction step to another device;
An input mode control step for controlling the input mode based on the user's instruction content extracted by the extraction step;
A second operation input acquisition step of acquiring a second operation input of the user input by the operation input unit based on the input mode controlled by the process of the input mode control step;
And a second transmission step of transmitting information corresponding to the second operation input of the user acquired by the processing of the second operation input acquisition step to another device. .
所定の情報を表示可能な表示部と
を用いて、他の情報処理装置に対する前記ユーザの操作入力を受け、前記情報処理装置に前記ユーザの操作入力に対応する情報を送信させる処理をコンピュータに実行させるためのプログラムであって、
前記操作入力部により入力された前記ユーザの第1の操作入力を取得する第1の操作入力取得ステップと、
前記第1の操作入力取得ステップの処理により取得された、前記ユーザの前記第1の操作入力を基に、前記図形描写領域に描写された図形の形状を分析する形状分析ステップと、
前記形状分析ステップの処理により分析された、前記図形の形状を基に、前記ユーザの指令内容を抽出する抽出ステップと、
前記抽出ステップの処理により抽出された前記ユーザの指令内容に基づいて、前記表示部への、所定の情報の表示を制御する表示制御ステップと、
前記抽出ステップの処理により抽出された前記ユーザの指令内容に対応する情報の、前記情報処理装置への送信を制御する第1の送信制御ステップと、
前記抽出ステップの処理により抽出された前記ユーザの指令内容に基づいて、入力モードを制御する入力モード制御ステップと、
前記入力モード制御ステップの処理により制御されている前記入力モードに基づいて、前記操作入力部により入力された前記ユーザの第2の操作入力を取得する第2の操作入力取得ステップと、
前記第2の操作入力取得ステップの処理により取得された前記ユーザの前記第2の操作入力に対応する情報の、前記情報処理装置への送信を制御する第2の送信ステップと
を含むことを特徴とする処理をコンピュータに実行させるためのプログラム。 An operation input unit having a predetermined graphic description area and receiving an operation input by a user;
And a display unit capable of displaying predetermined information. The computer receives a user operation input to another information processing apparatus and causes the information processing apparatus to transmit information corresponding to the user operation input to the computer. A program for
A first operation input acquisition step of acquiring the first operation input of the user input by the operation input unit;
A shape analysis step of analyzing a shape of a graphic depicted in the graphic depiction region based on the first operation input of the user acquired by the processing of the first operation input acquisition step;
Based on the shape of the figure analyzed by the processing of the shape analysis step, an extraction step for extracting the user's command content;
A display control step for controlling display of predetermined information on the display unit based on the user's instruction content extracted by the extraction step;
A first transmission control step for controlling transmission to the information processing apparatus of information corresponding to the user instruction content extracted by the extraction step;
An input mode control step for controlling the input mode based on the user's instruction content extracted by the extraction step;
A second operation input acquisition step of acquiring a second operation input of the user input by the operation input unit based on the input mode controlled by the process of the input mode control step;
A second transmission step of controlling transmission of information corresponding to the second operation input of the user acquired by the processing of the second operation input acquisition step to the information processing apparatus. A program for causing a computer to execute the process.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2004164588A JP2005348036A (en) | 2004-06-02 | 2004-06-02 | Information processing system, information input device, information processing method and program |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2004164588A JP2005348036A (en) | 2004-06-02 | 2004-06-02 | Information processing system, information input device, information processing method and program |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2005348036A true JP2005348036A (en) | 2005-12-15 |
Family
ID=35500007
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2004164588A Withdrawn JP2005348036A (en) | 2004-06-02 | 2004-06-02 | Information processing system, information input device, information processing method and program |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP2005348036A (en) |
Cited By (22)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2008052582A (en) * | 2006-08-25 | 2008-03-06 | Kyocera Corp | Portable electronic equipment and control method thereof |
JP2008052567A (en) * | 2006-08-25 | 2008-03-06 | Kyocera Corp | Portable electronic equipment and operation detection method of the same |
JP2008052585A (en) * | 2006-08-25 | 2008-03-06 | Kyocera Corp | Portable electronic device and its control method |
JP2008090680A (en) * | 2006-10-03 | 2008-04-17 | Nec Saitama Ltd | Portable terminal device, and function activation method for portable terminal device |
JP2010503919A (en) * | 2006-09-13 | 2010-02-04 | サバント システムズ エルエルシー | Programmable multimedia controller remote control unit |
US20100277337A1 (en) * | 2009-05-01 | 2010-11-04 | Apple Inc. | Directional touch remote |
WO2011034097A1 (en) * | 2009-09-17 | 2011-03-24 | 日本電気株式会社 | Electronic apparatus using touch panel and setting value modification method of same |
JP2011082712A (en) * | 2009-10-05 | 2011-04-21 | Toshiba Corp | Remote control apparatus |
JP2011082609A (en) * | 2009-10-02 | 2011-04-21 | Toshiba Corp | Broadcast receiver |
JP2011166794A (en) * | 2011-03-03 | 2011-08-25 | Toshiba Corp | Remote controller |
JP2012038292A (en) * | 2010-08-06 | 2012-02-23 | Samsung Electronics Co Ltd | Display device and control method thereof |
WO2012117652A1 (en) * | 2011-02-28 | 2012-09-07 | シャープ株式会社 | Image display device set |
JP2013503386A (en) * | 2009-08-31 | 2013-01-31 | クアルコム,インコーポレイテッド | User interface method providing search function |
JP2013132061A (en) * | 2013-01-25 | 2013-07-04 | Toshiba Corp | Receiver and operation control method of the same |
JP2013140597A (en) * | 2012-01-05 | 2013-07-18 | Visteon Global Technologies Inc | Projection dynamic icon knobs |
CN103809873A (en) * | 2012-11-13 | 2014-05-21 | 联想(北京)有限公司 | Information processing method and input device |
JP2014532949A (en) * | 2011-11-08 | 2014-12-08 | マイクロソフト コーポレーション | Indirect user interface interaction |
CN104298448A (en) * | 2014-10-31 | 2015-01-21 | 珠海格力电器股份有限公司 | Control method and device for touch sliding strip and household electric appliance |
JP2015038665A (en) * | 2012-01-06 | 2015-02-26 | 株式会社東芝 | Electronic apparatus, and control method for electronic apparatus |
JP2016534440A (en) * | 2013-07-31 | 2016-11-04 | オラクル・インターナショナル・コーポレイション | User interface for tracking health behavior |
JP2017157245A (en) * | 2017-06-16 | 2017-09-07 | 株式会社三菱東京Ufj銀行 | Information processing unit and program |
JP2022529482A (en) * | 2019-04-17 | 2022-06-22 | ビーエルディー カンパニー リミテッド | 4D touchpad module |
-
2004
- 2004-06-02 JP JP2004164588A patent/JP2005348036A/en not_active Withdrawn
Cited By (46)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2008052582A (en) * | 2006-08-25 | 2008-03-06 | Kyocera Corp | Portable electronic equipment and control method thereof |
JP2008052567A (en) * | 2006-08-25 | 2008-03-06 | Kyocera Corp | Portable electronic equipment and operation detection method of the same |
JP2008052585A (en) * | 2006-08-25 | 2008-03-06 | Kyocera Corp | Portable electronic device and its control method |
JP4721986B2 (en) * | 2006-08-25 | 2011-07-13 | 京セラ株式会社 | Portable electronic device and method for controlling portable electronic device |
JP2010503919A (en) * | 2006-09-13 | 2010-02-04 | サバント システムズ エルエルシー | Programmable multimedia controller remote control unit |
US8766782B2 (en) | 2006-09-13 | 2014-07-01 | Savant Systems, Llc | Remote control unit for a programmable multimedia controller |
US9442474B2 (en) | 2006-09-13 | 2016-09-13 | Savant Systems, Llc | Location-aware operation based on bluetooth positioning within a structure |
US9541910B2 (en) | 2006-09-13 | 2017-01-10 | Savant Systems, Llc | Remote control unit for a programmable multimedia controller |
US8421602B2 (en) | 2006-09-13 | 2013-04-16 | Savant Systems, Llc | Remote control unit for a programmable multimedia controller |
JP2008090680A (en) * | 2006-10-03 | 2008-04-17 | Nec Saitama Ltd | Portable terminal device, and function activation method for portable terminal device |
US20100277337A1 (en) * | 2009-05-01 | 2010-11-04 | Apple Inc. | Directional touch remote |
US11792256B2 (en) | 2009-05-01 | 2023-10-17 | Apple Inc. | Directional touch remote |
US10958707B2 (en) * | 2009-05-01 | 2021-03-23 | Apple Inc. | Directional touch remote |
JP2012525773A (en) * | 2009-05-01 | 2012-10-22 | アップル インコーポレイテッド | Directional touch remote operation |
US8742885B2 (en) | 2009-05-01 | 2014-06-03 | Apple Inc. | Directional touch remote |
US20140359467A1 (en) * | 2009-05-01 | 2014-12-04 | Apple Inc. | Directional touch remote |
JP2013503386A (en) * | 2009-08-31 | 2013-01-31 | クアルコム,インコーポレイテッド | User interface method providing search function |
WO2011034097A1 (en) * | 2009-09-17 | 2011-03-24 | 日本電気株式会社 | Electronic apparatus using touch panel and setting value modification method of same |
US8941606B2 (en) | 2009-09-17 | 2015-01-27 | Lenovo Innovations Limited (Hong Kong) | Electronic apparatus using touch panel and setting value modification method of same |
JP5590342B2 (en) * | 2009-09-17 | 2014-09-17 | 日本電気株式会社 | Electronic device using touch panel and method for changing set value |
JP2011082609A (en) * | 2009-10-02 | 2011-04-21 | Toshiba Corp | Broadcast receiver |
JP2011082712A (en) * | 2009-10-05 | 2011-04-21 | Toshiba Corp | Remote control apparatus |
JP2012038292A (en) * | 2010-08-06 | 2012-02-23 | Samsung Electronics Co Ltd | Display device and control method thereof |
US10057623B2 (en) | 2010-08-06 | 2018-08-21 | Samsung Electronics Co., Ltd. | Display apparatus and control method thereof |
US10999619B2 (en) | 2010-08-06 | 2021-05-04 | Samsung Electronics Co., Ltd. | Display apparatus and control method thereof |
US10771836B2 (en) | 2010-08-06 | 2020-09-08 | Samsung Electronics Co., Ltd. | Display apparatus and control method thereof |
US10419807B2 (en) | 2010-08-06 | 2019-09-17 | Samsung Electronics Co., Ltd. | Display apparatus and control method thereof |
US9788045B2 (en) | 2010-08-06 | 2017-10-10 | Samsung Electronics Co., Ltd. | Display apparatus and control method thereof |
JP2016015148A (en) * | 2010-08-06 | 2016-01-28 | 三星電子株式会社Samsung Electronics Co.,Ltd. | Display apparatus and control method thereof |
US9479817B2 (en) | 2010-08-06 | 2016-10-25 | Samsung Electronics Co., Ltd. | Display apparatus and control method thereof |
WO2012117652A1 (en) * | 2011-02-28 | 2012-09-07 | シャープ株式会社 | Image display device set |
JP2015039084A (en) * | 2011-02-28 | 2015-02-26 | シャープ株式会社 | Image display device set |
JP2011166794A (en) * | 2011-03-03 | 2011-08-25 | Toshiba Corp | Remote controller |
US9594504B2 (en) | 2011-11-08 | 2017-03-14 | Microsoft Technology Licensing, Llc | User interface indirect interaction |
JP2014532949A (en) * | 2011-11-08 | 2014-12-08 | マイクロソフト コーポレーション | Indirect user interface interaction |
JP2013140597A (en) * | 2012-01-05 | 2013-07-18 | Visteon Global Technologies Inc | Projection dynamic icon knobs |
JP2015038665A (en) * | 2012-01-06 | 2015-02-26 | 株式会社東芝 | Electronic apparatus, and control method for electronic apparatus |
CN103809873B (en) * | 2012-11-13 | 2018-02-27 | 联想(北京)有限公司 | A kind of information processing method and input equipment |
CN103809873A (en) * | 2012-11-13 | 2014-05-21 | 联想(北京)有限公司 | Information processing method and input device |
JP2013132061A (en) * | 2013-01-25 | 2013-07-04 | Toshiba Corp | Receiver and operation control method of the same |
JP2016534440A (en) * | 2013-07-31 | 2016-11-04 | オラクル・インターナショナル・コーポレイション | User interface for tracking health behavior |
CN104298448A (en) * | 2014-10-31 | 2015-01-21 | 珠海格力电器股份有限公司 | Control method and device for touch sliding strip and household electric appliance |
CN104298448B (en) * | 2014-10-31 | 2017-11-24 | 珠海格力电器股份有限公司 | A kind of control method of touch draw runner, device and household electrical appliance |
JP2017157245A (en) * | 2017-06-16 | 2017-09-07 | 株式会社三菱東京Ufj銀行 | Information processing unit and program |
JP2022529482A (en) * | 2019-04-17 | 2022-06-22 | ビーエルディー カンパニー リミテッド | 4D touchpad module |
JP7229454B2 (en) | 2019-04-17 | 2023-02-28 | ビーエルディー カンパニー リミテッド | 4D touchpad module |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP2005348036A (en) | Information processing system, information input device, information processing method and program | |
KR101451271B1 (en) | Broadcast receiving apparatus and control method thereof | |
JP4572696B2 (en) | Control signal input system, control signal input method. | |
US11650667B2 (en) | Haptic feedback remote control systems and methods | |
US8850356B2 (en) | Information processing system and information processing apparatus | |
JP2012038292A (en) | Display device and control method thereof | |
KR20100045188A (en) | Remote control device and method for controlling other devices using the remote control device | |
JP2007036526A (en) | Input apparatus, and system and input method for video contents | |
US8330865B2 (en) | Electronic apparatus, image display system and image display method | |
JP2015080079A (en) | Equipment and control method therefor | |
KR20140055486A (en) | Display apparatus and method for controlling display apparatus thereof | |
US20130120667A1 (en) | Remote control apparatus | |
JP2006279137A (en) | Remote control system | |
KR20140100306A (en) | Portable device and Method for controlling external device thereof | |
JP2014130590A (en) | Display apparatus and method for controlling the same | |
KR20150049362A (en) | Display apparatus and UI providing method thereof | |
KR102250091B1 (en) | A display apparatus and a display method | |
JP4719296B1 (en) | Information processing apparatus and information processing method | |
KR20140133351A (en) | Remote control device, Display apparatus and Method for controlling the remote control device and the display apparatus thereof | |
JP2010259047A (en) | Display apparatus and method of controlling the same | |
JP2007281659A (en) | Electronic information display system, electronic information display device and remote controller | |
JP2013210802A (en) | Terminal device and computer program | |
KR101833790B1 (en) | Media system and method of achieving various modes using force input | |
JP4766073B2 (en) | Information processing apparatus and information processing method | |
KR102425445B1 (en) | Display apparatus and Method for controlling the display apparatus thereof |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A300 | Application deemed to be withdrawn because no request for examination was validly filed |
Free format text: JAPANESE INTERMEDIATE CODE: A300 Effective date: 20070807 |