JP5122035B1 - 操作装置、情報処理システム、および通信方法 - Google Patents
操作装置、情報処理システム、および通信方法 Download PDFInfo
- Publication number
- JP5122035B1 JP5122035B1 JP2012541670A JP2012541670A JP5122035B1 JP 5122035 B1 JP5122035 B1 JP 5122035B1 JP 2012541670 A JP2012541670 A JP 2012541670A JP 2012541670 A JP2012541670 A JP 2012541670A JP 5122035 B1 JP5122035 B1 JP 5122035B1
- Authority
- JP
- Japan
- Prior art keywords
- data
- information processing
- communication
- frequency
- image data
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/41—Structure of client; Structure of client peripherals
- H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
- H04N21/42204—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
- A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
- A63F13/20—Input arrangements for video game devices
- A63F13/23—Input arrangements for video game devices for interfacing with the game device, e.g. specific interfaces between game controller and console
- A63F13/235—Input arrangements for video game devices for interfacing with the game device, e.g. specific interfaces between game controller and console using a wireless connection, e.g. infrared or piconet
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
- A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
- A63F13/25—Output arrangements for video game devices
- A63F13/26—Output arrangements for video game devices having at least one additional display device, e.g. on the game controller or outside a game booth
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
- G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
- G06F3/0346—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of the device orientation or free movement in a 3D space, e.g. 3D mice, 6-DOF [six degrees of freedom] pointers using gyroscopes, accelerometers or tilt-sensors
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/41—Structure of client; Structure of client peripherals
- H04N21/4104—Peripherals receiving signals from specially adapted client devices
- H04N21/4126—The peripheral being portable, e.g. PDAs or mobile phones
- H04N21/41265—The peripheral being portable, e.g. PDAs or mobile phones having a remote control device for bidirectional communication between the remote control device and client device
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/41—Structure of client; Structure of client peripherals
- H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
- H04N21/42204—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
- H04N21/42206—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor characterized by hardware details
- H04N21/42208—Display device provided on the remote control
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Human Computer Interaction (AREA)
- Signal Processing (AREA)
- General Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Physics & Mathematics (AREA)
- Computer Networks & Wireless Communication (AREA)
- Selective Calling Equipment (AREA)
- User Interface Of Digital Computer (AREA)
- Studio Devices (AREA)
- Accessory Devices And Overall Control Thereof (AREA)
- Facsimiles In General (AREA)
Abstract
操作装置は、情報処理装置と無線通信可能である。操作装置は、生成部と、通信部と、表示部とを備える。生成部は、操作装置に対する操作に基づいて操作データを生成する。通信部は、情報処理装置において操作データに基づいた処理によって生成される画像データであって、1画像分の画像データを情報処理装置から第1頻度で受信し、第1頻度よりも高い第2頻度で情報処理装置へ操作データを送信する。表示部は、画像データに基づいて画像を表示する。
【選択図】図8
Description
本発明の一例は、情報処理装置と無線通信可能な操作装置である。操作装置は、生成部と、通信部と、表示部とを備える。生成部は、操作装置に対する操作に基づいて操作データを生成する。通信部は、情報処理装置において操作データに基づいた処理によって生成される画像データであって、1画像分の画像データを情報処理装置から第1頻度で受信し、第1頻度よりも高い第2頻度で情報処理装置へ操作データを送信する。表示部は、画像データに基づいて画像を表示する。
また、本発明の他の一例は、情報処理装置と無線通信可能な操作装置であって、操作装置は、カメラと、生成部と、通信部とを備える。生成部は、操作装置に対する操作に基づいて操作データを生成する。通信部は、カメラによって生成されるカメラ画像データを所定の頻度で情報処理装置へ送信し、1画像分のカメラ画像データを送信する頻度の整数倍の頻度で操作データを送信する。
また、本発明の他の一例は、情報処理装置と無線通信可能な操作装置であって、生成部と、拡張通信部と、通信部とを備える。生成部は、操作装置に対する操作に基づいて操作データを生成する。拡張通信部は、情報処理装置とは異なる他の外部装置との通信を行う。通信部は、外部装置との通信における管理情報を表す通信管理データを操作データとともに所定の頻度で情報処理装置へ送信する。通信部は、送信機会が相対的に多い第1の種類のデータと、送信機会が相対的に少ない第2の種類のデータとを情報処理装置へ送信可能であり、通信管理データおよび操作データを、第1の種類のデータとして情報処理装置へ送信し、外部装置から受信したデータを、第2の種類のデータとして情報処理装置へ送信する。
また、本発明の他の一例は、情報処理装置と無線通信可能な操作装置であって、生成部と、通信部と、表示部とを備える。生成部は、操作装置に対する操作に基づいて操作データを生成する。通信部は、情報処理装置において操作データに基づいた処理によって生成される画像データを情報処理装置から受信し、情報処理装置へ操作データを送信する。表示部は、画像データに基づいて画像を表示する。通信部は、第1頻度で画像データを受信する第1通信モードと、第1頻度の半分の頻度で画像データを受信する第2通信モードとの両方で動作可能であり、第1通信モードおよび第2通信モードのいずれのモードにおいても、第1頻度よりも高い第2頻度で情報処理装置へ操作データを送信する。
また、どちらの使用方法においても、操作装置において表示される画像の更新頻度よりも高い頻度で操作データが送信される。したがって、操作装置に対する操作内容を高い頻度で情報処理装置へ伝達することができ、操作性の良い操作装置を提供することができる。さらに、操作装置は、一定の操作性を提供できる程度に操作データの送信頻度を確保しつつ、情報処理装置から画像データを受信して画像を表示することができ、操作データを効率的な方法で送信することができる。
また、本発明の他の一例は、情報処理装置と無線通信可能な操作装置であって、カメラと、生成部と、通信部と、表示部とを備える。生成部は、操作装置に対する操作に基づいて操作データを生成する。通信部は、情報処理装置から送信される同期信号に基づくタイミングで送信される1画像分の画像データを情報処理装置から第1頻度で受信し、情報処理装置から送信されてくる同期信号に基づくタイミングでかつ第1頻度の整数倍の第2頻度で情報処理装置へ操作データを送信し、カメラによる1画像分のカメラ画像データを第1頻度の1/n(nは自然数)の第3頻度で情報処理装置へ送信する。表示部は、画像データに基づいて画像を表示する。
また、上記(5)の構成によれば、同期信号を用いることによって、操作装置は、適切なタイミングでの操作データの送信をより確実に行うことができ、また、操作データの送信タイミングを同期信号によって決めることで操作データの遅延時間を保証することができる。さらに、カメラ画像データを第1頻度の1/n(nは自然数)の第3頻度で送信することによって、操作装置は、カメラ画像データを送信する場合であっても、情報処理装置からの画像を高い頻度で表示することができる。
通信部は、情報処理装置において操作データに基づいた処理によって生成される画像データであって1画像分の画像データを情報処理装置から第1頻度で受信し、第1頻度よりも高い第2頻度で情報処理装置へ操作データを送信してもよい。
通信部は、画像データを受信する頻度の整数倍の頻度で操作データを送信してもよい。
情報処理装置は、同期信号を操作装置へ送信し、当該同期信号に基づくタイミングで画像データを送信してもよい。このとき、通信部は、情報処理装置から送信されてくる同期信号に基づくタイミングで操作データを送信する。
表示部は、同期信号に基づくタイミングで、かつ、第1頻度で画像データを更新して表示してもよい。
表示部は、同期信号を受信してから、第1頻度の間隔よりも短い時間内に、当該同期信号に基づくタイミングで送信された画像データの描画を開始してもよい。
通信部は、同期信号とは独立したタイミングで情報処理装置から音声データを受信してもよい。
操作装置は、マイクをさらに備えていてもよい。このとき、通信部は、マイクによる音声データを、同期信号とは独立したタイミングで情報処理装置へ送信する。
操作装置は、カメラをさらに備えていてもよい。このとき、通信部は、カメラによって生成される1画像分のカメラ画像データを第1頻度よりも低い頻度で情報処理装置へ送信する。
通信部は、1の頻度よりも高くかつ第2頻度よりも低い頻度で1パケット分の音声データを情報処理装置から受信してもよい。
操作装置は、マイクをさらに備えていてもよい。このとき、通信部は、第1頻度よりも高くかつ第2頻度よりも低い頻度で、マイクによって生成される1パケット分の音声データを情報処理装置へ送信する。
通信部は、送信の度に新しく生成される操作データを送信してもよい。
タッチパネル、加速度センサ、およびジャイロセンサのうち少なくとも1つを含むセンサ部をさらに備えていてもよい。このとき、生成部は、センサ部の出力に基づくデータを含む操作データを生成する。
情報処理装置とは異なる他の外部装置との通信を行う拡張通信部をさらに備えていてもよい。このとき、通信部は、外部装置との通信における管理情報を表す通信管理データを操作データとともに情報処理装置へ送信する。
通信部は、送信機会が相対的に多い第1の種類のデータと、送信機会が相対的に少ない第2の種類のデータとを情報処理装置へ送信可能であり、通信管理データおよび操作データを、第1の種類のデータとして情報処理装置へ送信し、外部装置から受信したデータを、第2の種類のデータとして情報処理装置へ送信してもよい。
通信部は、第2の種類のデータの送信よりも第1の種類のデータの送信を優先し、かつ、情報処理装置から送信されてくる画像データの受信を第1の種類のデータの送信よりも優先する無線通信方法を用いて情報処理装置との通信を行うようにしてもよい。
通信部は、第1の頻度で画像データを受信する第1通信モードと、第1の頻度の半分の頻度で画像データを受信する第2通信モードとの両方で動作可能であってもよい。
通信部は、第1通信モードおよび第2通信モードのいずれのモードにおいても第2頻度で情報処理装置へ操作データを送信してもよい。
情報処理装置は、同期信号を操作装置へ送信し、当該同期信号に基づくタイミングで画像データを送信してもよい。このとき、通信部は、情報処理装置から送信されてくる同期信号に基づくタイミングで操作データを送信し、第2通信モードにおいて、情報処理装置と無線通信可能な他の装置が操作データを送信するタイミングとは異なるタイミングで操作データを送信することが可能である。
通信部は、第2通信モードにおいて、第1通信モードと同じタイミングで操作データを送信するモードと、第1通信モードと異なるタイミングで操作データを送信するモードとの両方で動作可能であってもよい。
通信部は、第1通信モードおよび第2通信モードのいずれの場合においても、操作装置が備えるカメラによる1画像分のカメラ画像データを所定の頻度で情報処理装置へ送信してもよい。
通信部は、第2通信モードにおいては、第1通信モードの場合よりも1画像分のデータ量を減らしてカメラ画像データを情報処理装置へ送信してもよい。
以下、図面を参照して、本発明の一実施形態に係る操作装置、情報処理システム、および通信方法の一例について説明する。図1は、情報処理システムの一例の外観図である。図1において、情報処理システム1は、操作装置2と、情報処理装置3と、表示装置4とを含む。情報処理システム1は、操作装置2に対する操作に基づいて情報処理装置3において情報処理を実行し、情報処理によって得られる画像を操作装置2および/または表示装置4に表示するものである。
次に、図2〜図4を参照して、操作装置2の構成について説明する。図2は、操作装置2の一例の正面図である。図3は、操作装置2の一例の背面図である。
次に、図5を参照して、情報処理装置3の構成について説明する。図5は、一例である情報処理装置3の内部構成を示すブロック図である。本実施形態において、情報処理装置3は、図5に示す各部を備える。
次に、図6〜図7を参照して、操作装置2と情報処理装置3との間で送受信されるデータについて説明する。図6は、操作装置2と情報処理装置3との間で送受信されるデータを示す図である。
また、図6において示されるように、操作装置2と情報処理装置3との間で送受信される各データに対して、通信の優先度が設定される。この優先度は、操作装置2および情報処理装置3(各無線モジュール33および45)が複数のデータを送信可能である場合に、先に送信する優先順位を表す。換言すれば、優先度は、上記の場合に優先して送信されるデータの順序を表す。例えばWi−Fiの認証を受けた通信モジュールについては、このような優先度を設定することが可能である。
優先度1:出力画像データおよび出力音声データ
優先度2:送信情報データ
優先度3:カメラ画像データおよびマイク音声データ
優先度4:制御データ
優先度5:第1拡張通信データ
優先度6:第2拡張通信データ
上記のように、出力画像データおよび出力音声データは、最も優先して送信される。また、送信情報データは、出力画像データおよび出力音声データ以外の他のデータよりも優先して送信される。このように、出力画像データ、出力音声データ、および送信情報データは、他のデータよりも優先して送信される。これによれば、情報処理装置3の基本的な機能である、情報処理装置3からの出力画像(および出力音声)を出力する機能、および、操作内容を情報処理装置3へ送信する機能が、通信状況の悪化等によって低下する可能性を抑制することができる。
次に、図8〜図12を参照して、操作装置2と情報処理装置3との間の通信動作について説明する。以下では、まず、図8および図9を参照して、操作装置2と情報処理装置3との間における通信の基本的な動作(外部装置が存在しない場合の動作)について説明する。その後、図10〜図12を参照して、操作装置2と外部装置とが通信を行う場合における動作について説明する。
まず、第1通信モードにおける通信について説明する。図8は、第1通信モードにおいて、操作装置2と情報処理装置3との間で送受信される各データの送信タイミングを示す図である。なお、図8においては、1つの矩形ブロックが、データ送信の1単位(1つのパケット)を示している(図9においても同様)。
図8において、一点鎖線より上には、情報処理装置3から操作装置2へ送信されるデータ(ダウンストリーム)が示される。情報処理装置3は、操作装置2へ同期信号を送信する。同期信号は、情報処理装置3および操作装置2におけるいくつかの処理に関して同期を取るための信号である。つまり、同期信号によって、情報処理装置3および操作装置2における処理のタイミングを揃えることができる。情報処理装置3は、所定時間T1の間隔で同期信号を送信する。操作装置2は、上記時間T1の間隔で同期信号を受信する。詳細は後述するが、出力画像データは同期信号と同期を取って送信され、出力画像データが表す画像の更新間隔は上記時間T1となる。つまり、時間T1は1フレーム時間であると言うことができる。上記時間T1は、例えば16.68[msec]に設定される。このとき、同期信号の送信頻度、すなわち、出力画像データが表す画像の更新頻度(フレームレート)は、約59.94[fps](一般的には60[fps]と言われることもある)となる。
情報処理装置3は、操作装置2へ出力画像データを送信する。本実施形態において、情報処理装置3は、所定の頻度で1画像分(1画面分)の出力画像データを送信する。すなわち、情報処理装置3は、上記1フレーム時間の間に1画像分の出力画像データを送信する。操作装置2は、上記所定の頻度で1画像分の出力画像データを受信する。その結果、表示部11は1フレーム時間に1回の割合で画像を更新して表示する。また、情報処理装置3は、出力画像データを複数の(図では20個)パケットに分割して送信する。本実施形態において、出力画像データの圧縮および送信の方法はどのような方法でもよい。例えば、圧縮伸張部44は1画像分の画像を複数の領域に分割し、分割された領域毎に圧縮処理を行ってもよい。このとき、無線モジュール45は、上記領域の圧縮されたデータを複数のパケットに分割して送信する。各パケットは、所定時間(例えば569[μsec])間隔で送信される。
情報処理装置3は、操作装置2へ出力音声データを送信する。出力音声データは、同期信号(換言すれば、出力画像データ)とは非同期で送信される。換言すれば、情報処理装置3は、同期信号とは独立したタイミングで出力音声データを送信する。操作装置2は、同期信号とは独立したタイミングで情報処理装置3から出力音声データを受信する。また、情報処理装置3は、出力音声データの1つのパケットを所定時間T3の間隔で送信する。上記時間T3は、例えば8.83[msec]に設定される。このとき、出力音声データの1つのパケットは1フレーム時間に2回あるいは1回送信される。
また、図8において、一点鎖線より下には、操作装置2から情報処理装置3へ送信されるデータ(アップストリーム)が示される。操作装置2は、上記送信情報データを情報処理装置3へ送信する。本実施形態において、操作装置2は、所定の頻度で送信情報データを送信する。すなわち、操作装置2は、所定時間T4の間隔で送信情報データを送信する。情報処理装置3は、上記所定の頻度で操作装置2から送信情報データを受信する。上記時間T4は、例えば、上記同期信号の送信間隔T1の1/m(mは1以上の整数)に設定される。具体的には、時間T4は、例えば5.56(=T1/3)[msec]に設定される。このとき、送信情報データは、1画像分の出力画像データの送信頻度に対して上記m倍の頻度で送信されることになる。
操作装置2は、上記カメラ画像データを情報処理装置3へ送信する。操作装置2は、1画像分のカメラ画像データを所定の頻度で送信する。情報処理装置3は、上記所定の頻度で1画像分のカメラ画像データを操作装置2から受信する。例えば図8に示すように、操作装置2は、1画像分のカメラ画像データを2フレーム時間の間に(2フレーム時間に1つの割合で)送信する。つまり、1画像分の出力画像データの送信頻度に対する1画像分のカメラ画像データの送信頻度は1/2である。
操作装置2は、上記マイク音声データを情報処理装置3へ送信する。マイク音声データは、同期信号(換言すれば、送信情報データ)とは非同期で送信される。換言すれば、操作装置2は、同期信号とは独立したタイミングでマイク音声データを送信する。また、操作装置2は、マイク音声データの1つのパケットを所定の頻度で送信する。すなわち、操作装置2は、マイク音声データの1つのパケットを所定時間T7の間隔で送信する。情報処理装置3は、マイク音声データ(マイク音声データの1つのパケット)を上記所定の頻度で操作装置2から受信する。上記時間T7は、例えば16[msec]に設定される。
次に、上記第2通信モードにおける通信について説明する。図9は、第2通信モードにおいて、操作装置2と情報処理装置3との間で送受信される各データの送信タイミングを示す図である。
図9において、一点鎖線より上には、情報処理装置3から操作装置2へ送信されるデータ(ダウンストリーム)が示される。第2通信モードにおいて、情報処理装置3は、第1同期信号を第1操作装置へ送信し、第2同期信号を第2操作装置へ送信する。第1同期信号の送信処理は、上述の第1通信モードにおける同期信号の送信処理と同様である。一方、情報処理装置3は、第1同期信号の送信の後に続けて第2同期信号を第2操作装置へ送信する。ただし、第1同期信号と第2同期信号とは必ずしも連続して送信される必要はなく、第2同期信号は第1同期信号の送信直後に送信される必要はない。第2同期信号の送信間隔は、第2同期信号の送信間隔T1と同じである。
情報処理装置3は、2つの操作装置2へ出力画像データをそれぞれ送信する。すなわち、第1出力画像データが第1操作装置へ送信される。また、第2出力画像データが第2操作装置へ送信される。第1出力画像データは、第1操作装置で表示すべき出力画像を表す出力画像データである。第2出力画像データは、第2操作装置で表示すべき出力画像を表す出力画像データである。第1操作装置は、第1出力画像データを受信する。また、第2操作装置は、第2出力画像データを受信する。
情報処理装置3は、2つの操作装置2へ出力音声データをそれぞれ送信する。すなわち、第1出力音声データが第1操作装置へ送信される。また、第2出力音声データが第2操作装置へ送信される。第1出力音声データは、第1操作装置で出力すべき出力音声を表す出力音声データである。第2出力音声データは、第2操作装置で出力すべき出力音声を表す出力音声データである。第1操作装置は、第1出力音声データを受信する。また、第2操作装置は、第2出力音声データを受信する。
また、図9において、一点鎖線より下には、各操作装置2から情報処理装置3へ送信されるデータ(アップストリーム)が示される。各操作装置2は、第1送信情報データおよび第2送信情報データを情報処理装置3へ送信する。第1送信情報データは、第1操作装置から送信される送信情報データである。第2送信情報データは、第2操作装置から送信される送信情報データである。第1操作装置が第1送信情報データを送信する処理は、上述の第1通信モードにおいて操作装置2が送信情報データを送信する処理と同様である。
各操作装置2は、第1カメラ画像データおよび第2カメラ画像データを情報処理装置3へ送信する。第1カメラ画像データは、第1操作装置から送信されるカメラ画像データである。第2カメラ画像データは、第2操作装置から送信されるカメラ画像データである。
各操作装置2は、第1マイク音声データおよび第2マイク音声データを情報処理装置3へ送信する。第1マイク音声データは、第1操作装置から送信されるマイク音声データである。第2マイク音声データは、第2操作装置から送信されるマイク音声データである。第2通信モードにおいて各操作装置2がマイク音声データを送信する方法は、第1通信モードにおけるマイク音声データの送信方法と同様である。
以上に示した構成および動作によって、操作装置2は、以下に示す効果を奏する。なお、以下に示す効果を奏するためには、操作装置2は、以下において効果とともに説明する構成を有していればよく、本実施形態における全ての構成を備えている必要はない。
次に、操作装置2と外部装置とが通信を行う場合における動作について説明する。本実施形態においては、外部装置との通信のために、操作装置2と情報処理装置3との間の通信において、上述した各拡張通信データおよび通信管理データが用いられる。すなわち、操作装置2と情報処理装置3との間においては、情報処理装置3からの通信に関する指令を表すデータ、および、外部装置に対して送受信されるデータは、拡張通信データ(第1拡張通信データまたは第2拡張通信データ)として送受信される。また、操作装置2と外部装置との通信に関する状態を情報処理装置3が認識するべく、当該状態を表す通信管理データが操作装置2から情報処理装置3へ送信される。以下、操作装置2と外部装置とが通信を行う場合における動作の詳細について説明する。
まず、操作装置2と外部装置とが赤外線通信を行う場合を説明する。図10は、通信管理データに含まれるデータの一例を示す図である。また、図11は、操作装置2と外部装置とが赤外線通信を行う場合における通信動作の一例を示す図である。
次に、図10および図12を参照して、操作装置2と外部装置(近距離無線通信においては、「タグ」と呼ばれることもある)とが近距離無線通信を行う場合を説明する。図12は、操作装置2と外部装置とが近距離無線通信を行う場合における通信動作の一例を示す図である。
以上に示した構成および動作によって、操作装置2は、以下に示す効果を奏する。なお、以下に示す効果を奏するためには、操作装置2は、以下において効果とともに説明する構成を有していればよく、本実施形態における全ての構成を備えている必要はない。
次に、図13を参照して、操作データの生成方法の詳細について説明する。図13は、操作データに含まれる各データを生成方法の一例を示す図である。上述のように、操作データは、操作装置2に対する操作に基づいて生成される。以下、操作データに含まれるデータの一例と、その生成方法の一例について説明する。
操作データ51は、送信ボタンデータ71を含む。送信ボタンデータ71は、操作装置2が備える1以上のボタン(ここではボタン群14)に対する入力状況を表す。例えば、送信ボタンデータ71は、ボタン群14に含まれる各ボタンがそれぞれ押下されたか否かを表す。
操作データ51は、送信指示方向データ72を含む。送信指示方向データ72は、操作装置2を用いてユーザによって指示された方向に関する情報を表す。例えば、送信指示方向データ72は、ユーザによって指示された方向(例えば上述の可動部材が傾倒された方向)と、その方向に関する量(例えば可動部材が傾倒された量)とを表す。具体的には、縦方向および横方向の2軸方向の傾き量がそれぞれ検出され、出力される。これらの2軸成分の値は、方向および量を表す2次元ベクトルとみなすこともできる。なお、送信指示方向データ72は、上記方向および量に加えて、上記可動部材が押下されたか否かを表してもよい。また、本実施形態においては、方向入力部13は2つのアナログスティック13Aおよび13Bを含む。したがって、送信指示方向データ72は、アナログスティック13Aおよび13Bのそれぞれに対する指示方向に関する情報を表す。
操作データ51は、送信加速度データ73を含む。送信加速度データ73は、操作装置2が備える加速度センサ23が検出する加速度に関する情報を表す。送信加速度データ73は、例えば3次元の加速度(ベクトルあるいは行列)を表すが、1次元以上の加速度を表すものであればよい。
操作データ51は、送信角速度データ74を含む。送信角速度データ74は、操作装置2が備えるジャイロセンサ24が検出する角速度に関する情報を表す。送信角速度データ74は、例えば3次元の角速度(ベクトルあるいは行列)を表すが、1次元以上の角速度を表すものであればよい。
操作データ51は、送信磁気データ75を含む。送信磁気データ75は、操作装置2が備える磁気センサ25が検出する磁気方向に関する情報を表す。送信磁気データ75は、例えば3次元の磁気方向(ベクトルあるいは行列)を表すが、1次元以上の磁気方向を表すものであればよい。
操作データ51は、送信入力位置データ76を含む。送信入力位置データ76は、操作装置2が備えるタッチパネル12が検出する入力位置(タッチ位置)に関する情報を表す。送信入力位置データ76は例えば、上記入力位置を示す2次元の座標値を表す。また、タッチパネル12が例えばマルチタッチ方式のものである場合には、送信入力位置データ76は、複数個の入力位置に関する情報を表すものであってもよい。
(操作データが各データ71〜76のうちの任意の1つを含む例)
・データ71のみ
・データ72のみ
・データ73のみ
・データ74のみ
・データ75のみ
・データ76のみ
(操作データが各データ71〜76のうちの任意の2つを含む例)
・データ71および72
・データ71および73
・データ71および74
・データ71および75
・データ71および76
・データ72および73
・データ72および74
・データ72および75
・データ72および76
・データ73および74
・データ73および75
・データ73および76
・データ74および75
・データ74および76
・データ75および76
(操作データが各データ71〜76のうちの任意の3つを含む例)
・データ71,72,および73
・データ71,72,および74
・データ71,72,および75
・データ71,72,および76
・データ71,73,および74
・データ71,73,および75
・データ71,73,および76
・データ71,74,および75
・データ71,74,および76
・データ71,75,および76
・データ72,73,および74
・データ72,73,および75
・データ72,73,および76
・データ72,74,および75
・データ72,74,および76
・データ72,75,および76
・データ73,74,および75
・データ73,74,および76
・データ73,75,および76
・データ74,75,および76
(操作データが各データ71〜76のうちの任意の4つを含む例)
・データ71,72,73,および74
・データ71,72,73,および75
・データ71,72,73,および76
・データ71,72,74,および75
・データ71,72,74,および76
・データ71,72,75,および76
・データ71,73,74,および75
・データ71,73,74,および76
・データ71,73,75,および76
・データ71,74,75,および76
・データ72,73,74,および75
・データ72,73,74,および76
・データ72,73,75,および76
・データ72,74,75,および76
・データ73,74,75,および76
(操作データが各データ71〜76のうちの任意の5つを含む例)
・データ71,72,73,74,および75
・データ71,72,73,74,および76
・データ71,72,73,75,および76
・データ71,72,74,75,および76
・データ71,73,74,75,および76
・データ72,73,74,75,および76
なお、上記において、操作装置2は、各操作部12〜14および23〜25のうちで、操作データ51に含まれないデータに対応する操作部を備えていなくてもよい。
以上に示した構成および動作によって、操作装置2は、以下に示す効果を奏する。なお、以下に示す効果を奏するためには、操作装置2は、以下において効果とともに説明する構成を有していればよく、本実施形態における全て構成を備えている必要はない。
(1)ジャイロセンサ24が検出する角速度の9個分を加算した値を表すデータ
(2)加速度センサ23が検出する加速度の1個分を表すデータ
(3)方向入力部13が検出する方向の1個分を表すデータ
(4)タッチパネル12が検出する位置の10個分を表すデータ
(1’)ジャイロセンサ24が検出する複数回(例えば9回)分の角速度を加算した値を表すデータ
(2’)加速度センサ23が検出する複数回(例えば4回)分の加速度の平均値を表すデータ
(4’)タッチパネル12が検出する複数回(例えば10回)分の位置を表すデータ
これによれば、操作装置2は、操作データが上記(1)〜(4)のデータを含む場合と同様の効果を奏することができる。
(5)磁気センサ25が検出する磁気方向の1個分を表すデータ(換言すれば、磁気センサ25が検出する1回分の磁気方向を表すデータ)
これによれば、操作装置2は、操作データのデータサイズを抑えつつ、磁気センサ25の検出結果に基づくデータを情報処理装置3へ送信することができる。なお、本実施形態の変形例においては、操作データは、上記(5)のデータを含まない構成であってもよい。
・第1センサが検出する1回分の値を表すデータ
・第2センサが検出する複数回分の値の平均値を表すデータ
・第3センサが検出する複数回分の値の和を表すデータ
上記の構成によれば、操作装置2は、第1センサが検出する1回分の値を表すデータを送信データに含めることによって、操作データのデータサイズを抑えることができる。また、操作装置2は、第2センサが検出する複数回分の値の平均値を表すデータを送信データに含めることによって、操作データのデータサイズを抑えつつ、第2センサの検出精度を向上することができる。さらに、操作装置2は、第3センサが検出する複数回分の値の和を表すデータを送信データに含めることによって、操作データのデータサイズを抑えつつ、第3センサの検出精度を向上することができる。なお、第3センサについては第2センサよりも検出頻度が高く、多くのデータが出力されるので、平均値を算出するための除算を省略することで、操作装置2における処理負荷を軽減することができる。なお、本実施形態の変形例においては、操作データ51は、上記3つのセンサが検出する各データの一部または全部を含まない構成であってもよい。
<7−1:概要>
次に、図14〜図18を参照して、操作装置2において上述の第2プログラム(第2情報処理)が実行される場合の動作について説明する。図14は、情報処理システム1の各装置における動作の一例を示す図である。本実施形態においては、上述の第1プログラム(第1情報処理)が情報処理装置3において実行される場合において、操作装置2は第2プログラム(第2情報処理)を実行することが可能である。以下、図14を参照して、上記第1および第2情報処理が実行される場合における上記各装置の動作の概要を説明する。
図15は、第2情報処理の実行中において操作装置に表示される画像の一例を示す図である。図15において、操作装置2の表示部11には、第1出力画像80が表示される。第1出力画像80は、第1プログラムの実行によって生成される画像であり、具体的な内容はどのようなものであってもよい。図15においては、第1プログラムがゲームプログラムであり、第1出力画像80としてゲーム画像が表示される場合を例として示している。すなわち、情報処理装置3は、ゲーム処理を実行し、ゲーム処理によって生成されるゲーム画像データを出力画像データとして操作装置2へ送信する。操作装置2は、ゲーム画像データを受信する。そして、操作装置2は、ゲーム画像データが表す画像を表示部11に表示する。また、情報処理装置3がネットワーク(例えばインターネット)を介して他の情報処理装置と通信可能である場合には、第1プログラムが例えばブラウザプログラムであり、第1出力画像80としてWebページの画像が表示されてもよい。
上記のように、本実施形態においては、第2情報処理の実行中において、第1情報処理も実行される。したがって、第1情報処理に関する操作と第2情報処理に関する操作との両方の操作が操作装置2によって行われる。つまり、操作装置2の各構成要素は、各情報処理に用いられる可能性がある。そこで、本実施形態においては、操作装置2を2つの情報処理に対応させるべく、操作装置2の各構成要素を次のように使用する。以下、詳細を説明する。
次に、操作装置2および情報処理装置3における処理の流れの一例を説明する。図17は、操作装置2における処理の一例を示すフローチャートである。本実施形態では、操作装置2における処理は通信データ管理部27において実行される。ここで、操作装置2および情報処理装置3の起動後において、第1プログラムを実行する指示がユーザによって行われることに応じて、情報処理装置3は第1プログラムの実行を開始する。図17に示すフローチャートは、第1プログラムの実行開始後に実行される処理を示している。なお、第1プログラムの実行は、どのような方法で開始されてもよい。例えば、操作装置2および情報処理装置3の起動に応じて操作装置2にメニュー画面が表示され、メニュー画面が表示されている状態において、第1プログラムを実行する指示がユーザによって行われることに応じて第1プログラムが起動されてもよい。また、操作装置2および情報処理装置3の起動後に第1プログラムが自動的に起動されてもよい。
以上に示した構成および動作によって、操作装置2は、以下に示す効果を奏する。なお、以下に示す効果を奏するためには、操作装置2は、以下において効果とともに説明する構成を有していればよく、本実施形態における全て構成を備えている必要はない。
上記実施形態においては、“[6.操作データの生成]”において操作データの生成方法およびその詳細な内容について説明した。ただし、操作データの生成方法および具体的な内容はどのようなものであってもよい。
2 操作装置
3 情報処理装置
4 表示装置
11 表示部
12 タッチパネル
13 方向入力部
14 ボタン群
16 カメラ
21 入出力制御部
23 加速度センサ
24 ジャイロセンサ
25 磁気センサ
27 通信データ管理部
28 CPU
29 メモリ
31 スピーカ
32 マイク
33 無線モジュール
36 赤外線通信部
37 近距離無線通信部
38 赤外線発光部
41 制御部
42 CPU
43 メモリ
44 圧縮伸張部
45 無線モジュール
50 送信情報データ
51 操作データ
52 管理データ
53 通信管理データ
54 起動状態データ
71 送信ボタンデータ
72 送信指示方向データ
73 送信加速度データ
74 送信角速度データ
75 送信磁気データ
76 送信入力位置データ
80 出力画像(第1出力画像)
81 操作画像(第2出力画像)
Claims (64)
- 情報処理装置と無線通信可能な操作装置であって、
前記操作装置に対する操作に基づいて操作データを生成する生成部と、
前記情報処理装置において前記操作データに基づいた処理によって生成される画像データであって、1画像分の画像データを前記情報処理装置から第1頻度で受信し、前記第1頻度よりも高い第2頻度で前記情報処理装置へ前記操作データを送信する通信部と、
前記画像データに基づいて画像を表示する表示部とを備え、
前記通信部は、前記第1の頻度で前記画像データを受信する第1通信モードと、前記第1の頻度の半分の頻度で前記画像データを受信する第2通信モードとの両方で動作可能である、操作装置。 - 情報処理装置と無線通信可能な操作装置であって、
カメラと、
前記操作装置に対する操作に基づいて操作データを生成する生成部と、
前記カメラによって生成されるカメラ画像データを所定の頻度で前記情報処理装置へ送信し、1画像分の前記カメラ画像データを送信する頻度の整数倍の頻度で前記操作データを送信する通信部とを備え、
前記通信部は、前記情報処理装置において前記操作データに基づいた処理によって生成される画像データであって1画像分の画像データを前記情報処理装置から第1頻度で受信し、前記第1頻度よりも高い第2頻度で前記情報処理装置へ前記操作データを送信し、
前記通信部は、前記第1の頻度で前記画像データを受信する第1通信モードと、前記第1の頻度の半分の頻度で前記画像データを受信する第2通信モードとの両方で動作可能である、操作装置。 - 情報処理装置と無線通信可能な操作装置であって、
前記操作装置に対する操作に基づいて操作データを生成する生成部と、
前記情報処理装置とは異なる他の外部装置との通信を行う拡張通信部と、
前記外部装置との通信における管理情報を表す通信管理データを前記操作データとともに所定の頻度で前記情報処理装置へ送信する通信部とを備え、
前記通信部は、送信機会が相対的に多い第1の種類のデータと、送信機会が相対的に少ない第2の種類のデータとを前記情報処理装置へ送信可能であり、前記通信管理データおよび前記操作データを、前記第1の種類のデータとして前記情報処理装置へ送信し、前記外部装置から受信したデータを、前記第2の種類のデータとして前記情報処理装置へ送信し、
前記通信部は、前記情報処理装置において前記操作データに基づいた処理によって生成される画像データであって1画像分の画像データを前記情報処理装置から第1頻度で受信し、前記第1頻度よりも高い第2頻度で前記情報処理装置へ前記操作データを送信し、
前記通信部は、前記第1の頻度で前記画像データを受信する第1通信モードと、前記第1の頻度の半分の頻度で前記画像データを受信する第2通信モードとの両方で動作可能である、操作装置。 - 情報処理装置と無線通信可能な操作装置であって、
前記操作装置に対する操作に基づいて操作データを生成する生成部と、
前記情報処理装置において前記操作データに基づいた処理によって生成される画像データを前記情報処理装置から受信し、前記情報処理装置へ前記操作データを送信する通信部と、
前記画像データに基づいて画像を表示する表示部とを備え、
前記通信部は、第1頻度で前記画像データを受信する第1通信モードと、前記第1頻度の半分の頻度で前記画像データを受信する第2通信モードとの両方で動作可能であり、前記第1通信モードおよび前記第2通信モードのいずれのモードにおいても、前記第1頻度よりも高い第2頻度で前記情報処理装置へ前記操作データを送信する、操作装置。 - 情報処理装置と無線通信可能な操作装置であって、
カメラと、
前記操作装置に対する操作に基づいて操作データを生成する生成部と、
前記情報処理装置から送信される同期信号に基づくタイミングで送信される1画像分の画像データを前記情報処理装置から第1頻度で受信し、前記情報処理装置から送信されてくる前記同期信号に基づくタイミングでかつ前記第1頻度の整数倍の第2頻度で前記情報処理装置へ前記操作データを送信し、前記カメラによる1画像分のカメラ画像データを前記第1頻度の1/n(nは自然数)の第3頻度で前記情報処理装置へ送信する通信部と、
前記画像データに基づいて画像を表示する表示部とを備え、
前記通信部は、前記第1の頻度で前記画像データを受信する第1通信モードと、前記第1の頻度の半分の頻度で前記画像データを受信する第2通信モードとの両方で動作可能である、操作装置。 - 前記通信部は、前記画像データを受信する頻度の整数倍の頻度で前記操作データを送信する、請求項1から請求項4のいずれか1項に記載の操作装置。
- 前記情報処理装置は、同期信号を前記操作装置へ送信し、当該同期信号に基づくタイミングで前記画像データを送信し、
前記通信部は、前記情報処理装置から送信されてくる前記同期信号に基づくタイミングで前記操作データを送信する、請求項1から請求項4のいずれか1項に記載の操作装置。 - 前記表示部は、前記同期信号に基づくタイミングで、かつ、前記第1頻度で前記画像データを更新して表示する、請求項7に記載の操作装置。
- 前記表示部は、前記同期信号を受信してから、前記第1頻度の間隔よりも短い時間内に、当該同期信号に基づくタイミングで送信された前記画像データの描画を開始する、請求項8に記載の操作装置。
- 前記通信部は、前記同期信号とは独立したタイミングで前記情報処理装置から音声データを受信する、請求項7に記載の操作装置。
- 前記操作装置は、マイクをさらに備え、
前記通信部は、前記マイクによる音声データを、前記同期信号とは独立したタイミングで前記情報処理装置へ送信する、請求項7に記載の操作装置。 - 前記操作装置は、カメラをさらに備え、
前記通信部は、前記カメラによって生成される1画像分のカメラ画像データを前記第1頻度よりも低い頻度で前記情報処理装置へ送信する、請求項1、請求項3、および請求項4のいずれか1項に記載の操作装置。 - 前記通信部は、前記第1頻度よりも高くかつ前記第2頻度よりも低い頻度で1パケット分の音声データを前記情報処理装置から受信する、請求項1から請求項5のいずれか1項に記載の操作装置。
- 前記操作装置は、マイクをさらに備え、
前記通信部は、前記第1頻度よりも高くかつ前記第2頻度よりも低い頻度で、前記マイクによって生成される1パケット分の音声データを前記情報処理装置へ送信する、請求項1から請求項5のいずれか1項に記載の操作装置。 - 前記通信部は、送信の度に新しく生成される操作データを送信する、請求項1から請求項5のいずれか1項に記載の操作装置。
- タッチパネル、加速度センサ、およびジャイロセンサのうち少なくとも1つを含むセンサ部をさらに備え、
前記生成部は、前記センサ部の出力に基づくデータを含む操作データを生成する、請求項1から請求項5のいずれか1項に記載の操作装置。 - 前記情報処理装置とは異なる他の外部装置との通信を行う拡張通信部をさらに備え、
前記通信部は、前記外部装置との通信における管理情報を表す通信管理データを前記操作データとともに前記情報処理装置へ送信する、請求項1、請求項2、請求項4、および請求項5のいずれか1項に記載の操作装置。 - 前記通信部は、送信機会が相対的に多い第1の種類のデータと、送信機会が相対的に少ない第2の種類のデータとを前記情報処理装置へ送信可能であり、前記通信管理データおよび前記操作データを、前記第1の種類のデータとして前記情報処理装置へ送信し、前記外部装置から受信したデータを、前記第2の種類のデータとして前記情報処理装置へ送信する、請求項17に記載の操作装置。
- 前記通信部は、前記第2の種類のデータの送信よりも前記第1の種類のデータの送信を優先し、かつ、前記情報処理装置から送信されてくる画像データの受信を前記第1の種類のデータの送信よりも優先する無線通信方法を用いて前記情報処理装置との通信を行う、請求項3または請求項18に記載の操作装置。
- 前記通信部は、前記第1通信モードおよび前記第2通信モードのいずれのモードにおいても前記第2頻度で前記情報処理装置へ前記操作データを送信する、請求項1から請求項3、および、請求項5のいずれか1項に記載の操作装置。
- 前記情報処理装置は、同期信号を前記操作装置へ送信し、当該同期信号に基づくタイミングで前記画像データを送信し、
前記通信部は、前記情報処理装置から送信されてくる前記同期信号に基づくタイミングで前記操作データを送信し、前記第2通信モードにおいて、前記情報処理装置と無線通信可能な他の装置が操作データを送信するタイミングとは異なるタイミングで操作データを送信することが可能である、請求項4または請求項20に記載の操作装置。 - 前記通信部は、前記第2通信モードにおいて、前記第1通信モードと同じタイミングで前記操作データを送信するモードと、前記第1通信モードと異なるタイミングで前記操作データを送信するモードとの両方で動作可能である、請求項21に記載の操作装置。
- 前記通信部は、前記第1通信モードおよび前記第2通信モードのいずれの場合においても、前記操作装置が備えるカメラによる1画像分のカメラ画像データを所定の頻度で前記情報処理装置へ送信する、請求項1から請求項5のいずれか1項に記載の操作装置。
- 前記通信部は、前記第2通信モードにおいては、前記第1通信モードの場合よりも1画像分のデータ量を減らして前記カメラ画像データを前記情報処理装置へ送信する、請求項23に記載の操作装置。
- 情報処理装置と、当該情報処理装置と無線通信可能な操作装置とを含む情報処理システムであって、
前記情報処理装置は、前記操作装置からの操作データに基づいた処理によって画像データを生成し、1画像分の画像データを前記操作装置へ第1頻度で送信し、
前記操作装置は、
前記操作装置に対する操作に基づいて操作データを生成する生成部と、
前記1画像分の画像データを前記情報処理装置から第1頻度で受信し、前記第1頻度よりも高い第2頻度で前記情報処理装置へ前記操作データを送信する通信部と、
前記画像データに基づいて画像を表示する表示部とを備え、
前記情報処理装置は、前記画像データを第1頻度で前記操作装置へ送信する第1通信モードと、前記第1頻度の半分の頻度で前記画像データを前記操作装置へ送信する第2通信モードとの両方で動作可能であり、
前記通信部は、前記第1頻度で前記画像データを受信する第1通信モードと、前記第1頻度の半分の頻度で前記画像データを受信する第2通信モードとの両方で動作可能である、情報処理システム。 - 情報処理装置と、当該情報処理装置と無線通信可能な操作装置とを含む情報処理システムであって、
前記操作装置は、
カメラと、
前記操作装置に対する操作に基づいて操作データを生成する生成部と、
前記カメラによって生成されるカメラ画像データを所定の頻度で前記情報処理装置へ送信し、1画像分の前記カメラ画像データを送信する頻度の整数倍の頻度で前記操作データを送信する通信部とを備え、
前記情報処理装置は、前記操作データと前記カメラ画像データとを受信し、
前記情報処理装置は、前記操作装置からの操作データに基づいた処理によって画像データを生成し、1画像分の画像データを前記操作装置へ第1頻度で送信する第1通信モードと、当該第1頻度の半分の頻度で当該画像データを送信する第2通信モードとの両方で動作可能であり、
前記通信部は、前記情報処理装置において前記操作データに基づいた処理によって生成される画像データであって1画像分の画像データを前記情報処理装置から第1頻度で受信し、前記第1頻度よりも高い第2頻度で前記情報処理装置へ前記操作データを送信する、情報処理システム。 - 情報処理装置と、当該情報処理装置と無線通信可能な操作装置とを含む情報処理システムであって、
前記操作装置は、
前記操作装置に対する操作に基づいて操作データを生成する生成部と、
前記情報処理装置とは異なる他の外部装置との通信を行う拡張通信部と、
前記外部装置との通信における管理情報を表す通信管理データを前記操作データとともに所定の頻度で前記情報処理装置へ送信する通信部とを備え、
前記情報処理装置は、前記操作データと前記通信管理データとを受信し、
前記通信部は、送信機会が相対的に多い第1の種類のデータと、送信機会が相対的に少ない第2の種類のデータとを前記情報処理装置へ送信可能であり、前記通信管理データおよび前記操作データを、前記第1の種類のデータとして前記情報処理装置へ送信し、前記外部装置から受信したデータを、前記第2の種類のデータとして前記情報処理装置へ送信し、
前記情報処理装置は、前記操作装置からの操作データに基づいた処理によって画像データを生成し、1画像分の画像データを前記操作装置へ第1頻度で送信する第1通信モードと、当該第1頻度の半分の頻度で当該画像データを送信する第2通信モードとの両方で動作可能であり、
前記通信部は、前記情報処理装置において前記操作データに基づいた処理によって生成される画像データであって1画像分の画像データを前記情報処理装置から第1頻度で受信し、前記第1頻度よりも高い第2頻度で前記情報処理装置へ前記操作データを送信する、情報処理システム。 - 情報処理装置と、当該情報処理装置と無線通信可能な操作装置とを含む情報処理システムであって、
前記情報処理装置は、前記操作装置からの操作データに基づいた処理によって画像データを生成して前記操作装置へ送信し、
前記操作装置は、
前記操作装置に対する操作に基づいて前記操作データを生成する生成部と、
前記画像データを前記情報処理装置から受信し、前記情報処理装置へ前記操作データを送信する通信部と、
前記画像データに基づいて画像を表示する表示部とを備え、
前記情報処理装置は、前記画像データを第1頻度で前記操作装置へ送信する第1通信モードと、前記第1頻度の半分の頻度で前記画像データを前記操作装置へ送信する第2通信モードとの両方で動作可能であり、
前記通信部は、前記第1頻度で前記画像データを受信する第1通信モードと、前記第1頻度の半分の頻度で前記画像データを受信する第2通信モードとの両方で動作可能であり、前記第1通信モードおよび前記第2通信モードのいずれのモードにおいても、前記第1頻度よりも高い第2頻度で前記情報処理装置へ前記操作データを送信する、情報処理システム。 - 情報処理装置と、当該情報処理装置と無線通信可能な操作装置とを含む情報処理システムであって、
前記情報処理装置は、前記操作装置からの操作データに基づいた処理によって前記画像データを生成して前記操作装置へ送信し、
前記操作装置は、
前記操作装置に対する操作に基づいて前記操作データを生成する生成部と、
カメラと、
前記情報処理装置から送信される同期信号に基づくタイミングで送信される1画像分の画像データを前記情報処理装置から第1頻度で受信し、前記情報処理装置から送信されてくる前記同期信号に基づくタイミングでかつ前記第1頻度の整数倍の第2頻度で前記情報処理装置へ前記操作データを送信し、前記カメラによる1画像分のカメラ画像データを前記第1頻度の1/n(nは自然数)の第3頻度で前記情報処理装置へ送信する通信部と、
前記画像データに基づいて画像を表示する表示部とを備え、
前記情報処理装置は、前記操作データと前記カメラ画像データとを前記操作装置から受信し、
前記情報処理装置は、前記画像データを第1頻度で前記操作装置へ送信する第1通信モードと、前記第1頻度の半分の頻度で前記画像データを前記操作装置へ送信する第2通信モードとの両方で動作可能であり、
前記通信部は、前記第1頻度で前記画像データを受信する第1通信モードと、前記第1頻度の半分の頻度で前記画像データを受信する第2通信モードとの両方で動作可能である、情報処理システム。 - 前記通信部は、前記画像データを受信する頻度の整数倍の頻度で前記操作データを送信する、請求項25から請求項28のいずれか1項に記載の情報処理システム。
- 前記情報処理装置は、同期信号を前記操作装置へ送信し、当該同期信号に基づくタイミングで前記画像データを送信し、
前記通信部は、前記情報処理装置から送信されてくる前記同期信号に基づくタイミングで前記操作データを送信する、請求項25から請求項28のいずれか1項に記載の情報処理システム。 - 前記表示部は、前記同期信号に基づくタイミングで、かつ、前記第1頻度で前記画像データを更新して表示する、請求項31に記載の情報処理システム。
- 前記表示部は、前記同期信号を受信してから、前記第1頻度の間隔よりも短い時間内に、当該同期信号に基づくタイミングで送信された前記画像データの描画を開始する、請求項32に記載の情報処理システム。
- 前記情報処理装置とは異なる他の外部装置との通信を行う拡張通信部をさらに備え、
前記通信部は、前記外部装置との通信における管理情報を表す通信管理データを前記操作データとともに前記情報処理装置へ送信し、
前記情報処理装置は、前記操作データと前記通信管理データとを受信する、請求項25、請求項26、請求項28、および請求項29のいずれか1項に記載の情報処理システム。 - 前記通信部は、送信機会が相対的に多い第1の種類のデータと、送信機会が相対的に少ない第2の種類のデータとを前記情報処理装置へ送信可能であり、前記通信管理データおよび前記操作データを、前記第1の種類のデータとして前記情報処理装置へ送信し、前記外部装置から受信したデータを、前記第2の種類のデータとして前記情報処理装置へ送信する、請求項34に記載の情報処理システム。
- 前記通信部は、前記第2の種類のデータの送信よりも前記第1の種類のデータの送信を優先し、かつ、前記情報処理装置から送信されてくる画像データの受信を前記第1の種類のデータの送信よりも優先する無線通信方法を用いて前記情報処理装置との通信を行う、請求項27または請求項35に記載の情報処理システム。
- 前記情報処理装置は、前記画像データを第1頻度で前記操作装置へ送信する第1通信モードと、前記第1頻度の半分の頻度で前記画像データを前記操作装置へ送信する第2通信モードとの両方で動作可能であり、
前記通信部は、前記第1頻度で前記画像データを受信する第1通信モードと、前記第1頻度の半分の頻度で前記画像データを受信する第2通信モードとの両方で動作可能である、請求項26または請求項27に記載の情報処理システム。 - 前記通信部は、前記第1通信モードおよび前記第2通信モードのいずれのモードにおいても前記第2頻度で前記情報処理装置へ前記操作データを送信する、請求項37に記載の情報処理システム。
- 前記情報処理装置は、同期信号を前記操作装置へ送信し、当該同期信号に基づくタイミングで前記画像データを送信し、
前記通信部は、前記情報処理装置から送信されてくる前記同期信号に基づくタイミングで前記操作データを送信し、前記第2通信モードにおいて、前記情報処理装置と無線通信可能な他の装置が操作データを送信するタイミングとは異なるタイミングで操作データを送信することが可能である、請求項28または請求項37に記載の情報処理システム。 - 前記通信部は、前記第2通信モードにおいて、前記第1通信モードと同じタイミングで前記操作データを送信するモードと、前記第1通信モードと異なるタイミングで前記操作データを送信するモードとの両方で動作可能である、請求項39に記載の情報処理システム。
- 情報処理装置と無線通信可能な操作装置において実行される通信方法であって、
前記操作装置に対する操作に基づいて操作データを生成する生成ステップと、
前記情報処理装置において前記操作データに基づいた処理によって生成される画像データであって、1画像分の画像データを前記情報処理装置から第1頻度で受信し、前記第1頻度よりも高い第2頻度で前記情報処理装置へ前記操作データを送信する通信ステップと、
前記画像データに基づいて画像を表示する表示ステップとを備え、
前記通信ステップにおいて、操作装置は、前記第1の頻度で前記画像データを受信する第1通信モードと、前記第1の頻度の半分の頻度で前記画像データを受信する第2通信モードとの両方で動作可能である、通信方法。 - 情報処理装置と無線通信可能な操作装置において実行される通信方法であって、
前記操作装置に対する操作に基づいて操作データを生成する生成ステップと、
前記操作装置が備えるカメラによって生成されるカメラ画像データを所定の頻度で前記情報処理装置へ送信し、1画像分の前記カメラ画像データを送信する頻度の整数倍の頻度で前記操作データを送信する通信ステップとを備え、
前記通信ステップにおいて、操作装置は、前記情報処理装置において前記操作データに基づいた処理によって生成される画像データであって1画像分の画像データを前記情報処理装置から第1頻度で受信し、前記第1頻度よりも高い第2頻度で前記情報処理装置へ前記操作データを送信し、
前記通信ステップにおいて、操作装置は、前記第1の頻度で前記画像データを受信する第1通信モードと、前記第1の頻度の半分の頻度で前記画像データを受信する第2通信モードとの両方で動作可能である、通信方法。 - 情報処理装置と無線通信可能な操作装置において実行される通信方法であって、
前記操作装置に対する操作に基づいて操作データを生成する生成ステップと、
前記情報処理装置とは異なる他の外部装置との通信を行う拡張通信ステップと、
前記外部装置との通信における管理情報を表す通信管理データを前記操作データとともに所定の頻度で前記情報処理装置へ送信する通信ステップとを備え、
前記通信ステップにおいて、操作装置は、送信機会が相対的に多い第1の種類のデータと、送信機会が相対的に少ない第2の種類のデータとを前記情報処理装置へ送信可能であり、前記通信管理データおよび前記操作データを、前記第1の種類のデータとして前記情報処理装置へ送信し、前記外部装置から受信したデータを、前記第2の種類のデータとして前記情報処理装置へ送信し、
前記通信ステップにおいて、操作装置は、前記情報処理装置において前記操作データに基づいた処理によって生成される画像データであって1画像分の画像データを前記情報処理装置から第1頻度で受信し、前記第1頻度よりも高い第2頻度で前記情報処理装置へ前記操作データを送信し、
前記通信ステップにおいて、操作装置は、前記第1の頻度で前記画像データを受信する第1通信モードと、前記第1の頻度の半分の頻度で前記画像データを受信する第2通信モードとの両方で動作可能である、通信方法。 - 情報処理装置と無線通信可能な操作装置において実行される通信方法であって、
前記操作装置に対する操作に基づいて操作データを生成する生成ステップと、
前記情報処理装置において前記操作データに基づいた処理によって生成される画像データを前記情報処理装置から受信し、前記情報処理装置へ前記操作データを送信する通信ステップと、
前記画像データに基づいて画像を表示する表示ステップとを備え、
前記通信ステップにおいて、操作装置は、第1頻度で前記画像データを受信する第1通信モードと、前記第1頻度の半分の頻度で前記画像データを受信する第2通信モードとの両方で動作可能であり、前記第1通信モードおよび前記第2通信モードのいずれのモードにおいても、前記第1頻度よりも高い第2頻度で前記情報処理装置へ前記操作データを送信する、通信方法。 - 情報処理装置と無線通信可能な操作装置において実行される通信方法であって、
前記操作装置に対する操作に基づいて操作データを生成する生成ステップと、
前記情報処理装置から送信される同期信号に基づくタイミングで送信される1画像分の画像データを前記情報処理装置から第1頻度で受信し、前記情報処理装置から送信されてくる前記同期信号に基づくタイミングでかつ前記第1頻度の整数倍の第2頻度で前記情報処理装置へ前記操作データを送信し、前記操作装置が備えるカメラによる1画像分のカメラ画像データを前記第1頻度の1/n(nは自然数)の第3頻度で前記情報処理装置へ送信する通信ステップと、
前記画像データに基づいて画像を表示する表示ステップとを備え、
前記通信ステップにおいて、操作装置は、前記第1の頻度で前記画像データを受信する第1通信モードと、前記第1の頻度の半分の頻度で前記画像データを受信する第2通信モードとの両方で動作可能である、通信方法。 - 前記通信ステップにおいて、操作装置は、前記画像データを受信する頻度の整数倍の頻度で前記操作データを送信する、請求項41から請求項44のいずれか1項に記載の通信方法。
- 前記情報処理装置は、同期信号を前記操作装置へ送信し、当該同期信号に基づくタイミングで前記画像データを送信し、
前記通信ステップにおいて、操作装置は、前記情報処理装置から送信されてくる前記同期信号に基づくタイミングで前記操作データを送信する、請求項41から請求項44のいずれか1項に記載の通信方法。 - 前記表示ステップにおいて、操作装置は、前記同期信号に基づくタイミングで、かつ、前記第1頻度で前記画像データを更新して表示する、請求項47に記載の通信方法。
- 前記表示ステップにおいて、操作装置は、前記同期信号を受信してから、前記第1頻度の間隔よりも短い時間内に、当該同期信号に基づくタイミングで送信された前記画像データの描画を開始する、請求項48に記載の通信方法。
- 前記通信ステップにおいて、操作装置は、前記同期信号とは独立したタイミングで前記情報処理装置から音声データを受信する、請求項47に記載の通信方法。
- 前記通信ステップにおいて、操作装置は、前記操作装置が備えるマイクによる音声データを、前記同期信号とは独立したタイミングで前記情報処理装置へ送信する、請求項47に記載の通信方法。
- 前記通信ステップにおいて、操作装置は、前記操作装置が備えるカメラによって生成される1画像分のカメラ画像データを前記第1頻度よりも低い頻度で前記情報処理装置へ送信する、請求項41、請求項43、および請求項44のいずれか1項に記載の通信方法。
- 前記通信ステップにおいて、操作装置は、前記第1の頻度よりも高くかつ前記第2頻度よりも低い頻度で1パケット分の音声データを前記情報処理装置から受信する、請求項41から請求項45のいずれか1項に記載の通信方法。
- 前記通信ステップにおいて、操作装置は、前記第1頻度よりも高くかつ前記第2頻度よりも低い頻度で、前記操作装置が備えるマイクによって生成される1パケット分の音声データを前記情報処理装置へ送信する、請求項41から請求項45のいずれか1項に記載の通信方法。
- 前記通信ステップにおいて、操作装置は、送信の度に新しく生成される操作データを送信する、請求項41から請求項45のいずれか1項に記載の通信方法。
- 前記操作装置は、タッチパネル、加速度センサ、およびジャイロセンサのうち少なくとも1つを含むセンサ部を備え、
前記生成ステップにおいて、操作装置は、前記センサ部の出力に基づくデータを含む操作データを生成する、請求項41から請求項45のいずれか1項に記載の通信方法。 - 前記情報処理装置とは異なる他の外部装置との通信を行う拡張通信ステップをさらに備え、
前記通信ステップにおいて、操作装置は、前記外部装置との通信における管理情報を表す通信管理データを前記操作データとともに前記情報処理装置へ送信する、請求項41、請求項42、請求項44、および請求項45のいずれか1項に記載の通信方法。 - 前記通信ステップにおいて、操作装置は、送信機会が相対的に多い第1の種類のデータと、送信機会が相対的に少ない第2の種類のデータとを前記情報処理装置へ送信可能であり、前記通信管理データおよび前記操作データを、前記第1の種類のデータとして前記情報処理装置へ送信し、前記外部装置から受信したデータを、前記第2の種類のデータとして前記情報処理装置へ送信する、請求項57に記載の通信方法。
- 前記通信ステップにおいて、操作装置は、前記第2の種類のデータの送信よりも前記第1の種類のデータの送信を優先し、かつ、前記情報処理装置から送信されてくる画像データの受信を前記第1の種類のデータの送信よりも優先する無線通信方法を用いて前記情報処理装置との通信を行う、請求項43または請求項58に記載の通信方法。
- 前記通信ステップにおいて、操作装置は、前記第1通信モードおよび前記第2通信モードのいずれのモードにおいても前記第2頻度で前記情報処理装置へ前記操作データを送信する、請求項41から請求項43、および、請求項45のいずれか1項に記載の通信方法。
- 前記情報処理装置は、同期信号を前記操作装置へ送信し、当該同期信号に基づくタイミングで前記画像データを送信し、
前記通信ステップにおいて、操作装置は、前記情報処理装置から送信されてくる前記同期信号に基づくタイミングで前記操作データを送信し、前記第2通信モードにおいて、前記情報処理装置と無線通信可能な他の装置が操作データを送信するタイミングとは異なるタイミングで操作データを送信する、請求項44または請求項60に記載の通信方法。 - 前記通信ステップにおいて、操作装置は、前記第2通信モードにおいて、前記第1通信モードと同じタイミングで前記操作データを送信するモードと、前記第1通信モードと異なるタイミングで前記操作データを送信するモードとの両方で動作可能である、請求項61に記載の通信方法。
- 前記通信ステップにおいて、操作装置は、前記第1通信モードおよび前記第2通信モードのいずれの場合においても、前記操作装置が備えるカメラによる1画像分のカメラ画像データを所定の頻度で前記情報処理装置へ送信する、請求項41から請求項45のいずれか1項に記載の通信方法。
- 前記通信ステップにおいて、操作装置は、前記第2通信モードにおいては、前記第1通信モードの場合よりも1画像分のデータ量を減らして前記カメラ画像データを前記情報処理装置へ送信する、請求項63に記載の通信方法。
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
PCT/JP2012/063494 WO2013175629A1 (ja) | 2012-05-25 | 2012-05-25 | 操作装置、情報処理システム、および通信方法 |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2012212309A Division JP6042154B2 (ja) | 2012-09-26 | 2012-09-26 | 操作装置、情報処理システム、および通信方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP5122035B1 true JP5122035B1 (ja) | 2013-01-16 |
JPWO2013175629A1 JPWO2013175629A1 (ja) | 2016-01-12 |
Family
ID=47692873
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2012541670A Active JP5122035B1 (ja) | 2012-05-25 | 2012-05-25 | 操作装置、情報処理システム、および通信方法 |
Country Status (4)
Country | Link |
---|---|
US (2) | US8749489B2 (ja) |
EP (2) | EP2730995B1 (ja) |
JP (1) | JP5122035B1 (ja) |
WO (1) | WO2013175629A1 (ja) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2014216702A (ja) * | 2013-04-23 | 2014-11-17 | オリンパス株式会社 | 操作端末、撮影端末、遠隔撮影システム、遠隔撮影方法およびプログラム |
Families Citing this family (43)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8547339B2 (en) | 2008-01-04 | 2013-10-01 | Tactus Technology, Inc. | System and methods for raised touch screens |
US9612659B2 (en) | 2008-01-04 | 2017-04-04 | Tactus Technology, Inc. | User interface system |
US9367132B2 (en) | 2008-01-04 | 2016-06-14 | Tactus Technology, Inc. | User interface system |
US9372565B2 (en) | 2008-01-04 | 2016-06-21 | Tactus Technology, Inc. | Dynamic tactile interface |
US9052790B2 (en) | 2008-01-04 | 2015-06-09 | Tactus Technology, Inc. | User interface and methods |
US9557915B2 (en) | 2008-01-04 | 2017-01-31 | Tactus Technology, Inc. | Dynamic tactile interface |
US9298261B2 (en) | 2008-01-04 | 2016-03-29 | Tactus Technology, Inc. | Method for actuating a tactile interface layer |
US9128525B2 (en) | 2008-01-04 | 2015-09-08 | Tactus Technology, Inc. | Dynamic tactile interface |
US9013417B2 (en) | 2008-01-04 | 2015-04-21 | Tactus Technology, Inc. | User interface system |
US8947383B2 (en) | 2008-01-04 | 2015-02-03 | Tactus Technology, Inc. | User interface system and method |
US9063627B2 (en) | 2008-01-04 | 2015-06-23 | Tactus Technology, Inc. | User interface and methods |
US9760172B2 (en) | 2008-01-04 | 2017-09-12 | Tactus Technology, Inc. | Dynamic tactile interface |
US8456438B2 (en) * | 2008-01-04 | 2013-06-04 | Tactus Technology, Inc. | User interface system |
US9274612B2 (en) | 2008-01-04 | 2016-03-01 | Tactus Technology, Inc. | User interface system |
US9588683B2 (en) | 2008-01-04 | 2017-03-07 | Tactus Technology, Inc. | Dynamic tactile interface |
US8243038B2 (en) | 2009-07-03 | 2012-08-14 | Tactus Technologies | Method for adjusting the user interface of a device |
US9720501B2 (en) | 2008-01-04 | 2017-08-01 | Tactus Technology, Inc. | Dynamic tactile interface |
US9423875B2 (en) | 2008-01-04 | 2016-08-23 | Tactus Technology, Inc. | Dynamic tactile interface with exhibiting optical dispersion characteristics |
US8154527B2 (en) | 2008-01-04 | 2012-04-10 | Tactus Technology | User interface system |
US9552065B2 (en) | 2008-01-04 | 2017-01-24 | Tactus Technology, Inc. | Dynamic tactile interface |
US9588684B2 (en) | 2009-01-05 | 2017-03-07 | Tactus Technology, Inc. | Tactile interface for a computing device |
CN102483675B (zh) | 2009-07-03 | 2015-09-09 | 泰克图斯科技公司 | 用户界面增强系统 |
CN102782617B (zh) | 2009-12-21 | 2015-10-07 | 泰克图斯科技公司 | 用户接口系统 |
US9239623B2 (en) | 2010-01-05 | 2016-01-19 | Tactus Technology, Inc. | Dynamic tactile interface |
KR20130141344A (ko) | 2010-04-19 | 2013-12-26 | 택투스 테크놀로지, 아이엔씨. | 촉각 인터페이스층의 구동 방법 |
JP5647353B2 (ja) | 2010-10-20 | 2014-12-24 | タクタス テクノロジーTactus Technology | ユーザインタフェースシステム |
KR20140043697A (ko) | 2010-10-20 | 2014-04-10 | 택투스 테크놀로지, 아이엔씨. | 사용자 인터페이스 시스템 및 방법 |
US10429961B2 (en) * | 2012-05-25 | 2019-10-01 | Nintendo Co., Ltd. | Controller device, information processing system, and information processing method |
EP2730995B1 (en) * | 2012-05-25 | 2016-11-30 | Nintendo Co., Ltd. | Controller device, information processing system, and communication method |
CN104662497A (zh) | 2012-09-24 | 2015-05-27 | 泰克图斯科技公司 | 动态触觉界面和方法 |
US9405417B2 (en) | 2012-09-24 | 2016-08-02 | Tactus Technology, Inc. | Dynamic tactile interface and methods |
GB2513345B (en) * | 2013-04-23 | 2017-07-26 | Gurulogic Microsystems Oy | Data communication system and method |
US9413797B2 (en) | 2013-04-23 | 2016-08-09 | Gurulogic Microsystems Oy | Data communication system and method |
US9557813B2 (en) | 2013-06-28 | 2017-01-31 | Tactus Technology, Inc. | Method for reducing perceived optical distortion |
CN103869985B (zh) * | 2014-03-27 | 2019-07-26 | 联想(北京)有限公司 | 信息处理方法和终端设备 |
JP6482771B2 (ja) | 2014-04-22 | 2019-03-13 | 任天堂株式会社 | 情報処理装置、情報処理システム、情報処理プログラムおよび情報処理方法 |
JP6699480B2 (ja) * | 2016-09-16 | 2020-05-27 | 株式会社デンソー | 信号処理装置 |
JP6760394B2 (ja) * | 2016-12-02 | 2020-09-23 | ヤマハ株式会社 | コンテンツ再生機器、収音機器、及びコンテンツ再生システム |
US10074269B2 (en) | 2017-01-09 | 2018-09-11 | Nintendo Co., Ltd. | Communication system, apparatus and method |
US10507385B2 (en) | 2017-01-25 | 2019-12-17 | Kieran S. Lyden | Game controller |
JP6624767B1 (ja) | 2019-08-26 | 2019-12-25 | 株式会社ブラック | 情報処理システム及び情報処理方法 |
JP6695530B1 (ja) * | 2019-11-25 | 2020-05-20 | 株式会社ブラック | 情報処理システム及び情報処理方法 |
WO2023203802A1 (ja) * | 2022-11-11 | 2023-10-26 | 任天堂株式会社 | 電子機器 |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2002268691A (ja) * | 2001-03-12 | 2002-09-20 | Sony Corp | 音声データ受信方法及び音声データ受信装置 |
JP2012096005A (ja) * | 2011-08-01 | 2012-05-24 | Nintendo Co Ltd | 表示装置、ゲームシステム、およびゲーム処理方法 |
Family Cites Families (68)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5872562A (en) | 1985-05-30 | 1999-02-16 | U.S. Philips Corporation | Universal remote control transmitter with simplified device identification |
EP0331257B1 (en) | 1988-03-04 | 1995-01-11 | Philips Electronics North America Corporation | Universal remote control transmitter with simplified device indentification |
US5410326A (en) | 1992-12-04 | 1995-04-25 | Goldstein; Steven W. | Programmable remote control device for interacting with a plurality of remotely controlled devices |
JPH07284166A (ja) | 1993-03-12 | 1995-10-27 | Mitsubishi Electric Corp | 遠隔操作装置 |
JP2000116940A (ja) | 1998-10-15 | 2000-04-25 | Seta Corp | 双方向通信型ゲームシステム |
WO2004096399A1 (ja) | 1999-02-04 | 2004-11-11 | Toru Ogawa | ゲームシステム、ゲーム装置、ゲームデータ配信装置、画像データ配信システムおよびコンピュータ利用可能な情報 |
JP2000295206A (ja) | 1999-02-04 | 2000-10-20 | Namco Ltd | ゲームシステム、ゲーム装置、ゲームデータ配信装置、画像データ配信システムおよび情報記憶媒体 |
WO2001055969A1 (fr) | 2000-01-28 | 2001-08-02 | Namco Ltd. | Systeme de jeu et procede de creation d'image |
JP2003307524A (ja) | 2002-04-15 | 2003-10-31 | Pioneer Electronic Corp | 加速度データの補正装置、その補正方法、その補正プログラム、その補正プログラムを記録した記録媒体、および、ナビゲーション装置 |
JP3937939B2 (ja) | 2002-06-14 | 2007-06-27 | アイシン・エィ・ダブリュ株式会社 | ナビゲーションシステム及び経路案内データ記録方法のプログラム |
JP3980966B2 (ja) | 2002-08-21 | 2007-09-26 | シャープ株式会社 | プレゼンテーション用表示装置 |
AU2003266092A1 (en) | 2002-10-09 | 2004-05-04 | Raphael Bachmann | Rapid input device |
US20060059233A1 (en) | 2003-01-23 | 2006-03-16 | Matsushita Electric Industrilal Co., Ltd | Media data transmission apparatus and media data reception apparatus |
JP2005039764A (ja) | 2003-01-23 | 2005-02-10 | Matsushita Electric Ind Co Ltd | メディアデータ送信装置およびメディアデータ受信装置 |
US8547401B2 (en) | 2004-08-19 | 2013-10-01 | Sony Computer Entertainment Inc. | Portable augmented reality device and method |
WO2006058408A1 (en) | 2004-09-21 | 2006-06-08 | Timeplay Entertainment Corporation | System, method and handheld controller for multi-player gaming |
US7031886B1 (en) | 2004-12-14 | 2006-04-18 | Synaptics Incorporated | Methods and systems for detecting noise in a position sensor using minor shifts in sensing frequency |
US20060223635A1 (en) | 2005-04-04 | 2006-10-05 | Outland Research | method and apparatus for an on-screen/off-screen first person gaming experience |
US7642741B2 (en) | 2005-04-27 | 2010-01-05 | Sidman Adam D | Handheld platform stabilization system employing distributed rotation sensors |
JP4505740B2 (ja) | 2005-05-16 | 2010-07-21 | ソニー株式会社 | 撮像装置及びその起動方法 |
JP4907129B2 (ja) | 2005-09-01 | 2012-03-28 | 任天堂株式会社 | 情報処理システムおよびプログラム |
US8708822B2 (en) | 2005-09-01 | 2014-04-29 | Nintendo Co., Ltd. | Information processing system and program |
JP4794957B2 (ja) | 2005-09-14 | 2011-10-19 | 任天堂株式会社 | ゲームプログラム、ゲーム装置、ゲームシステム、およびゲーム処理方法 |
EP1988709B1 (en) * | 2006-02-21 | 2012-12-19 | Panasonic Corporation | Display control device, display control method, and display control program |
JP4845612B2 (ja) * | 2006-07-03 | 2011-12-28 | 株式会社ソニー・コンピュータエンタテインメント | 通信装置、通信中継装置およびゲーム装置 |
US9007299B2 (en) | 2006-07-14 | 2015-04-14 | Ailive Inc. | Motion control used as controlling device |
JP5051822B2 (ja) | 2006-08-02 | 2012-10-17 | 任天堂株式会社 | 汎用遠隔制御機能を備えたゲーム装置 |
US7852818B2 (en) * | 2006-10-06 | 2010-12-14 | Amimon Ltd | Device, method and system of dual-mode wireless communication |
US20080297487A1 (en) | 2007-01-03 | 2008-12-04 | Apple Inc. | Display integrated photodiode matrix |
US8232970B2 (en) | 2007-01-03 | 2012-07-31 | Apple Inc. | Scan sequence generator |
US8902155B2 (en) | 2007-07-09 | 2014-12-02 | Sony Corporation | Electronic apparatus and control method therefor |
US8760400B2 (en) | 2007-09-07 | 2014-06-24 | Apple Inc. | Gui applications for use with 3D remote controller |
US20090069096A1 (en) | 2007-09-12 | 2009-03-12 | Namco Bandai Games Inc. | Program, information storage medium, game system, and input instruction device |
JP5233000B2 (ja) | 2007-11-21 | 2013-07-10 | 株式会社国際電気通信基礎技術研究所 | 動き測定装置 |
JP5134350B2 (ja) | 2007-12-05 | 2013-01-30 | シャープ株式会社 | リモコン装置及びシステム |
JP5107017B2 (ja) | 2007-12-20 | 2012-12-26 | 三菱電機株式会社 | 遠隔操作装置および遠隔操作システム |
US20090273560A1 (en) | 2008-02-04 | 2009-11-05 | Massachusetts Institute Of Technology | Sensor-based distributed tangible user interface |
US8384661B2 (en) | 2008-03-04 | 2013-02-26 | Namco Bandai Games Inc. | Program, information storage medium, determination device, and determination method |
US8244136B2 (en) * | 2008-03-31 | 2012-08-14 | Universal Electronics Inc. | System and method for reduction of infrared noise during communication between consumer appliances |
JP5390115B2 (ja) | 2008-03-31 | 2014-01-15 | 株式会社バンダイナムコゲームス | プログラム、ゲームシステム |
US9852615B2 (en) | 2011-03-25 | 2017-12-26 | Universal Electronics Inc. | System and method for facilitating appliance control via a smart device |
JP4661907B2 (ja) | 2008-05-30 | 2011-03-30 | ソニー株式会社 | 情報処理システム、情報処理装置及び情報処理方法、並びにプログラム |
US20120077586A1 (en) | 2008-10-27 | 2012-03-29 | Shervin Pishevar | Apparatuses, methods and systems for an interactive proximity display tether |
JP5191876B2 (ja) | 2008-12-17 | 2013-05-08 | シャープ株式会社 | リモコンリコメンドシステム |
JP5558730B2 (ja) | 2009-03-24 | 2014-07-23 | 株式会社バンダイナムコゲームス | プログラム及びゲーム装置 |
US8956229B2 (en) | 2009-03-30 | 2015-02-17 | Nintendo Co., Ltd. | Computer readable storage medium having game program stored thereon and game apparatus |
JP2011053060A (ja) | 2009-09-01 | 2011-03-17 | Namco Bandai Games Inc | プログラム、情報記憶媒体、加速度センサの誤差測定方法、加速度センサの誤差測定装置及びゲームシステム |
US8456314B2 (en) | 2009-09-29 | 2013-06-04 | Universal Electronics Inc. | System and method for reconfiguration of an entertainment system controlling device |
US8913009B2 (en) | 2010-02-03 | 2014-12-16 | Nintendo Co., Ltd. | Spatially-correlated multi-display human-machine interface |
EP2392391B1 (en) | 2010-02-03 | 2017-06-28 | Nintendo Co. Ltd. | Display device, game system, and game processing method |
JP5166472B2 (ja) | 2010-03-30 | 2013-03-21 | 株式会社バンダイナムコゲームス | プログラム及びゲーム装置 |
JP2011224239A (ja) * | 2010-04-22 | 2011-11-10 | Nintendo Co Ltd | 情報処理システムおよび付属装置 |
JP2011224240A (ja) * | 2010-04-22 | 2011-11-10 | Nintendo Co Ltd | 入力装置および情報処理システム |
JP2012027541A (ja) | 2010-07-20 | 2012-02-09 | Sony Corp | 接触圧検知装置および入力装置 |
JP5764885B2 (ja) | 2010-08-17 | 2015-08-19 | セイコーエプソン株式会社 | 集積回路装置及び電子機器 |
JP6184658B2 (ja) | 2010-08-20 | 2017-08-23 | 任天堂株式会社 | ゲームシステム、ゲーム装置、ゲームプログラム、および、ゲーム処理方法 |
US10150033B2 (en) | 2010-08-20 | 2018-12-11 | Nintendo Co., Ltd. | Position calculation system, position calculation device, storage medium storing position calculation program, and position calculation method |
JP5101677B2 (ja) | 2010-09-14 | 2012-12-19 | 株式会社ソニー・コンピュータエンタテインメント | 情報処理システム |
US20120144299A1 (en) | 2010-09-30 | 2012-06-07 | Logitech Europe S.A. | Blind Navigation for Touch Interfaces |
US8854298B2 (en) | 2010-10-12 | 2014-10-07 | Sony Computer Entertainment Inc. | System for enabling a handheld device to capture video of an interactive application |
US20120086630A1 (en) | 2010-10-12 | 2012-04-12 | Sony Computer Entertainment Inc. | Using a portable gaming device to record or modify a game or application in real-time running on a home gaming system |
KR101364826B1 (ko) | 2010-11-01 | 2014-02-20 | 닌텐도가부시키가이샤 | 조작 장치 및 조작 시스템 |
US9226020B2 (en) * | 2011-05-03 | 2015-12-29 | Lg Electronics Inc. | Electronic device and method for operating the same |
JP5852336B2 (ja) | 2011-06-13 | 2016-02-03 | 任天堂株式会社 | 表示制御プログラム、表示制御方法、表示制御システムおよび表示制御装置 |
US20130101140A1 (en) | 2011-10-25 | 2013-04-25 | Lg Electronics Inc. | Electronic device and method of operating the same |
JP5841409B2 (ja) | 2011-11-09 | 2016-01-13 | 任天堂株式会社 | 制御プログラム、入力端末装置、制御システムおよび制御方法 |
EP2730995B1 (en) * | 2012-05-25 | 2016-11-30 | Nintendo Co., Ltd. | Controller device, information processing system, and communication method |
US10429961B2 (en) | 2012-05-25 | 2019-10-01 | Nintendo Co., Ltd. | Controller device, information processing system, and information processing method |
-
2012
- 2012-05-25 EP EP13195870.4A patent/EP2730995B1/en active Active
- 2012-05-25 EP EP12877508.7A patent/EP2708980B1/en active Active
- 2012-05-25 WO PCT/JP2012/063494 patent/WO2013175629A1/ja active Application Filing
- 2012-05-25 JP JP2012541670A patent/JP5122035B1/ja active Active
- 2012-05-25 US US13/702,430 patent/US8749489B2/en active Active
-
2013
- 2013-01-08 US US13/736,364 patent/US9615048B2/en active Active
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2002268691A (ja) * | 2001-03-12 | 2002-09-20 | Sony Corp | 音声データ受信方法及び音声データ受信装置 |
JP2012096005A (ja) * | 2011-08-01 | 2012-05-24 | Nintendo Co Ltd | 表示装置、ゲームシステム、およびゲーム処理方法 |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2014216702A (ja) * | 2013-04-23 | 2014-11-17 | オリンパス株式会社 | 操作端末、撮影端末、遠隔撮影システム、遠隔撮影方法およびプログラム |
Also Published As
Publication number | Publication date |
---|---|
US20130314608A1 (en) | 2013-11-28 |
EP2708980A1 (en) | 2014-03-19 |
JPWO2013175629A1 (ja) | 2016-01-12 |
EP2730995A2 (en) | 2014-05-14 |
WO2013175629A1 (ja) | 2013-11-28 |
EP2730995A3 (en) | 2015-01-07 |
EP2730995B1 (en) | 2016-11-30 |
US8749489B2 (en) | 2014-06-10 |
US9615048B2 (en) | 2017-04-04 |
EP2708980A4 (en) | 2015-04-22 |
EP2708980B1 (en) | 2016-08-17 |
US20140160361A1 (en) | 2014-06-12 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5122035B1 (ja) | 操作装置、情報処理システム、および通信方法 | |
JP5122037B1 (ja) | 操作装置、情報処理システム、および情報処理方法 | |
JP5122036B1 (ja) | 操作装置、情報処理システム、および通信方法 | |
US8920235B2 (en) | Computer-readable storage medium, information processing apparatus, information processing system and information processing method | |
US9219961B2 (en) | Information processing system, computer-readable non-transitory storage medium having stored therein information processing program, information processing control method, and information processing apparatus | |
JP5876229B2 (ja) | ゲームプログラム、ゲーム装置、ゲームシステム及びゲーム処理方法 | |
JP2012221145A (ja) | 入力システム、情報処理装置、情報処理プログラム、および3次元位置算出方法 | |
JP6038440B2 (ja) | ゲームシステム、ゲーム処理方法、ゲーム装置、携帯ゲーム機およびゲームプログラム | |
US20150123897A1 (en) | Gesture detection system, gesture detection apparatus, and mobile communication terminal | |
JP2012252609A (ja) | 情報処理システム、情報処理装置、情報処理プログラム、およびコンテンツ再生制御方法 | |
CN110349527B (zh) | 虚拟现实显示方法、装置及系统、存储介质 | |
JP6042154B2 (ja) | 操作装置、情報処理システム、および通信方法 | |
JP2014207680A (ja) | 情報処理システム、情報処理装置、情報処理プログラム、およびコンテンツ再生制御方法 | |
JP2015226807A (ja) | ゲームプログラム、ゲーム装置、ゲームシステム及びゲーム処理方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20121023 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20121023 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20151102 Year of fee payment: 3 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 5122035 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |