JP7067484B2 - 情報処理装置、情報処理方法、プログラム、および情報処理システム - Google Patents

情報処理装置、情報処理方法、プログラム、および情報処理システム Download PDF

Info

Publication number
JP7067484B2
JP7067484B2 JP2018554861A JP2018554861A JP7067484B2 JP 7067484 B2 JP7067484 B2 JP 7067484B2 JP 2018554861 A JP2018554861 A JP 2018554861A JP 2018554861 A JP2018554861 A JP 2018554861A JP 7067484 B2 JP7067484 B2 JP 7067484B2
Authority
JP
Japan
Prior art keywords
information
unit
output
vibration
information processing
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2018554861A
Other languages
English (en)
Other versions
JPWO2018105266A1 (ja
Inventor
亜由美 中川
猛史 荻田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Sony Group Corp
Original Assignee
Sony Corp
Sony Group Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp, Sony Group Corp filed Critical Sony Corp
Publication of JPWO2018105266A1 publication Critical patent/JPWO2018105266A1/ja
Application granted granted Critical
Publication of JP7067484B2 publication Critical patent/JP7067484B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/016Input arrangements with force or tactile feedback as computer generated output to the user
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16Constructional details or arrangements
    • G06F1/1613Constructional details or arrangements for portable computers
    • G06F1/1626Constructional details or arrangements for portable computers with a single-body enclosure integrating a flat display, e.g. Personal Digital Assistants [PDAs]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16Constructional details or arrangements
    • G06F1/1613Constructional details or arrangements for portable computers
    • G06F1/163Wearable computers, e.g. on a belt
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16Constructional details or arrangements
    • G06F1/1613Constructional details or arrangements for portable computers
    • G06F1/1633Constructional details or arrangements of portable computers not specific to the type of enclosures covered by groups G06F1/1615 - G06F1/1626
    • G06F1/1637Details related to the display arrangement, including those related to the mounting of the display in the housing
    • G06F1/1643Details related to the display arrangement, including those related to the mounting of the display in the housing the display being associated to a digitizer, e.g. laptops that can be used as penpads
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16Constructional details or arrangements
    • G06F1/1613Constructional details or arrangements for portable computers
    • G06F1/1633Constructional details or arrangements of portable computers not specific to the type of enclosures covered by groups G06F1/1615 - G06F1/1626
    • G06F1/1684Constructional details or arrangements related to integrated I/O peripherals not covered by groups G06F1/1635 - G06F1/1675
    • G06F1/1694Constructional details or arrangements related to integrated I/O peripherals not covered by groups G06F1/1635 - G06F1/1675 the I/O peripheral being a single or a set of motion sensors for pointer control or gesture input obtained by sensing movements of the portable computer
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F13/00Interconnection of, or transfer of information or other signals between, memories, input/output devices or central processing units
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0346Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of the device orientation or free movement in a 3D space, e.g. 3D mice, 6-DOF [six degrees of freedom] pointers using gyroscopes, accelerometers or tilt-sensors
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • H04M1/7243User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality with interactive means for internal management of messages

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Hardware Design (AREA)
  • Signal Processing (AREA)
  • Business, Economics & Management (AREA)
  • General Business, Economics & Management (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • User Interface Of Digital Computer (AREA)
  • Information Transfer Between Computers (AREA)
  • Telephone Function (AREA)

Description

本開示は、情報処理装置、情報処理方法、プログラム、および情報処理システムに関する。
近年、振動を発生させる種々の装置が開発されている。また、上記のような装置を内蔵し、情報伝達手段の一つとして振動を用いるデバイスが普及している。例えば、特許文献1には、振動により端末の内部情報をユーザに提示する技術が開示されている。
特開2010-136151号公報
ところで、上記のような振動を用いるデバイスでは、特許文献1に記載のようにデバイス内で完結する処理の外、他の装置と振動情報に係る通信を行うことも想定される。しかし、広帯域な振動情報は音声情報と同等のデータ量に匹敵することから、振動情報の通信を行う場合、データ通信量の増大が想定される。
そこで、本開示では、振動に係る情報通信においてデータ通信量を効果的に低減することが可能な、新規かつ改良された情報処理装置、情報処理方法、プログラム、および情報処理システムが提案される。
本開示によれば、送信元装置に表示されるユーザインタフェース上において入力される入力情報と、当該入力情報に係るメタ情報を受信する通信部と、前記メタ情報を解析し振動種別を特定する解析部と、前記振動種別と振動波形データとを関連付けて記憶する波形記憶部と、前記振動種別に基づいて前記波形記憶部から取得した前記振動波形データに対応する触覚刺激を出力部に出力させる出力制御部と、を備え、前記通信部は、前記解析部が特定した前記振動種別に係る情報を前記送信元装置に送信する、情報処理装置が提供される。
また、本開示によれば、プロセッサが、送信元装置に表示されるユーザインタフェース上において入力される入力情報と、当該入力情報に係るメタ情報を受信することと、前記メタ情報を解析し振動種別を特定することと、前記振動種別と振動波形データとを関連付けて記憶することと、前記振動種別に基づいて取得した前記振動波形データに対応する触覚刺激を出力部に出力させることと、を含前記受信することでは、前記特定することにより特定した前記振動種別に係る情報を前記送信元装置に送信する、情報処理方法が提供される。
また、本開示によれば、コンピュータを、送信元装置に表示されるユーザインタフェース上において入力される入力情報と、当該入力情報に係るメタ情報を受信する通信部と、前記メタ情報を解析し振動種別を特定する解析部と、前記振動種別と振動波形データとを関連付けて記憶する波形記憶部と、前記振動種別に基づいて前記波形記憶部から取得した前記振動波形データに対応する触覚刺激を出力部に出力させる出力制御部と、を備え、前記通信部は、前記解析部が特定した前記振動種別に係る情報を前記送信元装置に送信する、情報処理装置、として機能させるためのプログラムが提供される。
また、本開示によれば、アプリケーションに係るユーザインタフェースの表示を制御する出力制御部と、前記ユーザインタフェース上において入力される入力情報と、当該入力情報に係るメタ情報とを送信する第1通信部と、を備える、送信元装置と、前記入力情報と前記メタ情報とを受信する第2通信部と、前記メタ情報を解析し振動種別を特定する解析部と、前記振動種別と振動波形データとを関連付けて記憶する波形記憶部と、前記振動種別に基づいて前記波形記憶部から取得した前記振動波形データに対応する触覚刺激を出力部に出力させる出力制御部と、を備え、前記第2通信部は、前記解析部が特定した前記振動種別に係る情報を前記送信元装置に送信する、受信装置と、を含む、情報処理システムが提供される。
以上説明したように本開示によれば、振動に係る情報通信においてデータ通信量を効果的に低減することが可能となる。
なお、上記の効果は必ずしも限定的なものではなく、上記の効果とともに、または上記の効果に代えて、本明細書に示されたいずれかの効果、または本明細書から把握され得る他の効果が奏されてもよい。
振動波形の通信に伴うデータ通信量の増大について説明するための図である。 本開示の一実施形態に係るメタ情報の送受信について説明するための図である。 同実施形態に係る情報処理システムのシステム構成例を示す図である。 同実施形態に係る送信元装置の機能ブロック図の一例である。 同実施形態に係る受信装置の機能ブロック図の一例である。 同実施形態に係る解析部による振動種別の特定について説明するための図である。 同実施形態に係る波形記憶部が記憶する振動種別と振動波形データの一例を示す図である。 同実施形態に係る振動DBへの振動波形データの登録と、振動DBおよび波形記憶部の同期とについて説明するための図である。 同実施形態に係る受信装置から送信元装置に送信される振動種別について説明するための図である。 同実施形態に係る出力位置情報に基づく触覚刺激の出力制御について説明するための図である。 同実施形態に係る振動デバイスを特定した触覚刺激の出力制御について説明するための図である。 同実施形態に係るタップ情報に基づく触覚刺激の出力制御について説明するための図である。 同実施形態に係る受信装置による触覚刺激の出力制御の流れを示すフローチャートである。 同実施形態に係る状態推定に基づくユーザインタフェースの表示制御について説明するための図である。 同実施形態に係る状態推定部による状態推定の一例を示す図である。 同実施形態に係る送信元装置による状態推定に基づく出力制御の流れを示すフローチャートである。 本開示に係るハードウェア構成例である。
以下に添付図面を参照しながら、本開示の好適な実施の形態について詳細に説明する。なお、本明細書及び図面において、実質的に同一の機能構成を有する構成要素については、同一の符号を付することにより重複説明を省略する。
なお、説明は以下の順序で行うものとする。
1.実施形態
1.1.実施形態の概要
1.2.システム構成例
1.3.送信元装置10の機能構成例
1.4.受信装置20の機能構成例
1.5.触覚刺激に係る出力制御の詳細
1.6.受信装置20による触覚刺激の出力制御の流れ
1.7.送信先装置の状態に基づく出力制御
1.8.送信元装置10による状態推定に基づく出力制御の流れ
2.ハードウェア構成例
3.まとめ
<1.実施形態>
<<1.1.実施形態の概要>>
まず、本開示の一実施形態の概要について説明する。上述したとおり、近年では、振動を発生させる種々の装置が存在し、また、モバイル端末向けの振動デバイスも多く開発されている。さらには、近年では、様々な振動パターンを再現することが可能なLRA(Linear Resonant Actuator:リニア・バイブレータ)やピエゾ(電圧)素子なども広く普及しており、今後は振動情報の通信が盛んに行われることが想定される。
一方、上述したとおり、広帯域な振動情報は音声情報と同等のデータ量に匹敵することから、振動情報の通信を行う場合、データ通信量の増大が懸念される。図1Aは、振動波形の通信に伴うデータ通信量の増大について説明するための図である。図1Aには、2つの情報処理端末80および90の間で、振動波形データWIが直接送受信される場合の例が示されている。図1Aでは、情報処理端末90が受信した振動波形データWIに基づいて、触覚刺激V1を出力している。この際、振動波形データWIは、音声波形データと同等のデータ量となることも想定され、特に、画像情報や音声情報などに付随して振動情報が送受信される場合にあっては、データ通信量を逼迫する要因となり得る。
本実施形態に係る技術思想は上記の点に着目して発想されたものであり、振動波形データを直接送受信することなく、振動に係るメタ情報を送受信することで、データ通信量の逼迫を防止することができる。図1Bは、本実施形態に係るメタ情報の送受信について説明するための図である。図1Bには、本実施形態に係る送信元装置10が振動に係るメタ情報MIを受信装置20に送信する場合の例が示されている。
また、この際、本実施形態に係る受信装置20は、受信したメタ情報MIを解析し、メタ情報MIに対応する振動種別を特定することができる。さらには、受信装置20は、特定した振動種別に紐付いた振動波形を内部に備える波形記憶部から取得することで、当該振動波形に基づく触覚刺激V1を出力することができる。
このように、本実施形態に係る情報処理システムでは、振動波形に代えて振動に係るメタ情報を送受信することで、データ通信量を低減することが可能である。以下、本実施形態に係る情報処理装置、情報処理方法、プログラムおよび情報処理システムが有する機能と、当該機能が奏する効果について詳細に説明する。
<<1.2.システム構成例>>
次に、本実施形態に係る情報処理システムのシステム構成例について説明する。図2は、本実施形態に係る情報処理システムのシステム構成例を示す図である。図2を参照すると、本実施形態に係る情報処理システムは、送信元装置10、受信装置20、および振動DB30を備え得る。また、送信元装置10と受信装置20、受信装置20と振動DB30は互いに通信が行えるように、ネットワーク40を介して接続される。
(送信元装置10)
本実施形態に係る送信元装置10は、振動に係るメタ情報を受信装置20に送信する情報処理装置である。この際、本実施形態に係る送信元装置10は、例えば、メッセージアプリケーションやゲームアプリケーションに係るユーザインタフェース上で行われた入力操作などに基づいて、上記のメタ情報を受信装置20に送信してもよい。送信元装置10は、例えば、メッセージアプリケーションのユーザインタフェース上でユーザにより選択されたスタンプなどのオブジェクト情報に基づいて、当該オブジェクト情報に対応するメタ情報を受信装置20に送信することができる。
このため、本実施形態に係る送信元装置10は、メッセージアプリケーションやゲームアプリケーションなどを動作させる機能を有するスマートフォン、タブレット、携帯電話、PC(Personal Computer)、またはウェアラブル装置などであり得る。
(受信装置20)
本実施形態に係る受信装置20は、送信元装置10から送信されるメタ情報に基づいて触覚刺激を出力する情報処理装置である。この際、本実施形態に係る受信装置20は、例えば、メッセージアプリケーションやゲームアプリケーションなどを介して受信した上記のメタ情報に基づいて触覚刺激を出力することができる。また、この際、本実施形態に係る受信装置20は、内部に備える波形記憶部からメタ情報に基づく振動波形データを取得することで、上記の触覚刺激を出力することを特徴の一つとする。
このため、本実施形態に係る受信装置20は、メッセージアプリケーションやゲームアプリケーションなどを動作させる機能や、触覚デバイス備えたスマートフォン、タブレット、携帯電話、PCまたはウェアラブル装置などにより実現され得る。
(振動DB30)
本実施形態に係る振動DB30は、振動種別と振動波形データとを紐付けて記憶するデータベースである。振動DB30が記憶する振動波形データは、定期または不定期、あるいは受信装置20の要求に基づいて、受信装置20が内部に備える波形記憶部と同期される。
(ネットワーク40)
ネットワーク40は、送信元装置10と受信装置20、受信装置20と振動DB30を接続する機能を有する。ネットワーク40は、インターネット、電話回線網、衛星通信網などの公衆回線網や、Ethernet(登録商標)を含む各種のLAN(Local Area Network)、WAN(Wide Area Network)などを含んでもよい。また、ネットワーク40は、IP-VPN(Internt Protocol-Virtual Private Network)などの専用回線網を含んでもよい。また、ネットワーク40は、Wi-Fi(登録商標)、Bluetooth(登録商標)など無線通信網を含んでもよい。
以上、本実施形態に係る情報処理システムの構成例について説明した。なお、図2を用いた上記の説明では、本実施形態に係る情報処理システムが送信元装置10、受信装置20、および振動DB30を備える場合を例に説明したが、本実施形態に係る情報処理システムの構成例は、係る例に限定されない。本実施形態に係る情報処理システムは、例えば、送信元装置10および受信装置20の間の通信を仲介する情報処理サーバなどを備えてもよい。この場合、送信元装置10や受信装置20が有する機能の一部は、上記の情報処理サーバの機能として実現されてよい。本実施形態に係る情報処理システムの構成は、システムの仕様や運用、また扱われる情報の性質やデータ量などに応じて柔軟に変形され得る。
<<1.3.送信元装置10の機能構成例>>
次に、本実施形態に係る送信元装置10の機能構成例について説明する。図3は、本実施形態に係る送信元装置10の機能ブロック図の一例である。図3を参照すると、本実施形態に係る送信元装置10は、入力部110、センサ部120、出力部130、出力制御部140、状態推定部150、および通信部160を備える。
(入力部110)
入力部110は、ユーザによる入力操作を認識する機能を有する。本実施形態に係る入力部110は、特に、アプリケーションのユーザインタフェース上におけるユーザの入力操作を認識することができる。例えば、本実施形態に係る入力部110は、ユーザインタフェース上でユーザが入力した文字情報、画像情報、オブジェクト情報、音声情報などを認識してよい。
このために、本実施形態に係る入力部110は、ユーザによる入力操作を検出するための各種の装置やセンサなどを含んでよい。入力部110は、例えば、各種のボタン、キーボード、タッチパネル、マウス、スイッチなどを含んで構成され得る。また、入力部110は、ユーザの発話などを検出するマイクロフォンなどを含んでもよい。
(センサ部120)
センサ部120は、送信元装置10の状態に係る種々のセンサ情報を収集する機能を有する。本実施形態に係るセンサ部120は、例えば、加速度センサ、ジャイロセンサ、地磁気センサ、撮像センサ、GPS(Global Positioning System)、時計などを含んで構成され得る。なお、本実施形態に係るセンサ部120は、入力部110とマイクロフォンなどの集音装置を共有してもよい。すなわち、本実施形態に係るセンサ情報には、音声情報が含まれてよい。
(出力部130)
出力部130は、出力制御部140による制御に基づいて種々の情報を出力する機能を有する。特に、本実施形態に係る出力部130は、アプリケーションに係るユーザインタフェースを表示する機能を有してよい。また、出力部130が出力する情報には、視覚情報の他、聴覚情報、触覚情報などが含まれ得る。
このために、本実施形態に係る出力部130は、例えば、CRT(Cathode Ray Tube)ディスプレイ装置、液晶ディスプレイ(LCD:Liquid Crystal Display)装置、OLED(Organic Light Emitting Diode)装置、タッチパネルなどを含んで構成される。
また、出力部130は、例えば、音声出力アンプやスピーカーなどを含んで構成される。なお、本実施形態に係る出力部130は、ステレオ再生に対応した複数のスピーカーを備えてもよい。
また、出力部130は、例えば、LRA、ピエゾ素子、偏心モーターなどの振動デバイスや当該振動デバイスを駆動するIC(Integrated Circuit)を含んで構成される。なお、本実施形態に係る出力部130は、複数の振動デバイスを備えてもよい。
(出力制御部140)
出力制御部140は、出力部130による情報出力を制御する機能を有する。特に、本実施形態に係る出力制御部140は、アプリケーションに係るユーザインタフェースの表示を制御することができる。この際、本実施形態に係る出力制御部140は、送信先端末、すなわち受信装置20の状態に基づいてユーザインタフェースの表示を制御してよい。本実施形態に係る出力制御部140が有する機能の詳細については、別途説明する。
(状態推定部150)
状態推定部150は、受信装置20から受信した環境情報に基づいて、受信装置20の状態を推定する機能を有する。ここで、本実施形態に係る環境情報には、受信装置20の外部環境または内部環境に係る種々の情報が含まれてよい。より具体的には、本実施形態に係る環境情報には、例えば、センサ情報、位置情報、ユーザのスケジュール情報、アプリケーションの稼働情報、マナーモードなどを含む着信設定情報などが含まれる。本実施形態に係る状態推定部150が有する機能の詳細については、別途説明する。
(通信部160)
通信部160は、受信装置20との情報通信を行う機能を有する。具体的には、本実施形態に係る通信部160は、アプリケーションに係るユーザインタフェース上でユーザが入力した入力情報やメタ情報を受信装置20に送信する。また、通信部160は、受信装置20から環境情報を受信する。
以上、本実施形態に係る送信元装置10の機能構成例について説明した。なお、図3を用たて説明した上記の機能構成はあくまで一例であり、本実施形態に係る送信元装置10の機能構成は、係る例に限定されない。本実施形態に係る送信元装置10は上記に挙げた以外の構成をさらに備えてもよいし、送信元装置10が有する機能の一部は、別途設置される情報処理サーバの機能として実現されてもよい。本実施形態に係る送信元装置10の機能構成は、柔軟に変形され得る。
<<1.4.受信装置20の機能構成例>>
次に、本実施形態に係る受信装置20の機能構成例について説明する。図4は、本実施形態に係る受信装置20の機能ブロック図の一例である。図4を参照すると、本実施形態に係る受信装置20は、入力部210、センサ部220、出力部230、出力制御部240、解析部250、波形記憶部260、および通信部270を備える。ここで、上記の入力部210、センサ部220、および出力部230は、それぞれ送信元装置10の入力部110、センサ部120、および出力部130と実質的に同一の構成であってよいため、詳細な説明を省略する。
(出力制御部240)
出力制御部240は、出力部230による情報出力を制御する機能を有する。特に、本実施形態に係る出力制御部240は、解析部250が特定した振動種別に基づいて波形記憶部260から取得した振動波形データに対応する触覚刺激を出力部230に出力させる機能を有する。また、出力制御部240は、振動種別に関連付いた振動波形データが波形記憶部260に記憶されていない場合、当該振動種別に基づいて振動DB30から振動波形データを取得してよい。本実施形態に係る出力制御部240が有する機能の詳細については、別途説明する。
(解析部250)
解析部250は、通信部270が受信したメタ情報を解析し、振動種別を特定する機能を有する。この際、本実施形態に係る解析部250は、メタ情報に含まれるオブジェクト情報、画像情報、文字情報またはセンサ情報などを解析し振動種別を特定してよい。図5は、本実施形態に係る解析部250による振動種別の特定について説明するための図である。
図5に示すように、本実施形態に係るメタ情報MIは、送信元装置10のユーザインタフェース上で選択されたオブジェクトに係るオブジェクト情報OIを含んでよい。本実施形態に係る解析部250は、オブジェクト情報OIに基づいて振動種別VT1を特定することができる。ここで、本実施形態に係るオブジェクトとは、送信元装置10のユーザにより選択されたスタンプなどを含む。また、オブジェクト情報OIは、オブジェクトのIDやタグ情報、カテゴリなどを含んでよい。本実施形態に係る解析部250は、上記のIDやタグ情報を読み取ることで、振動種別VT1を特定することができる。図5に示す一例では、解析部250は、オブジェクト情報OIから、「喜び」に対応する振動種別VT1を特定している。このように、本実施形態に係る振動種別は、感情の種別などに対応するものであってもよい。
また、図5に示すように、本実施形態に係るメタ情報MIは、送信元装置10のユーザインタフェース上で選択された画像情報PIを含んでよい。本実施形態に係る解析部250は、画像情報PIを解析し、振動種別VT1を特定することができる。この際、解析部250は、広く用いられる画像認識技術などを用いて感情推定を行ってもよい。また、解析部250は、画像情報PIに含まれるオノマトペなどの文字を認識し解析を行ってもよい。
また、図5に示すように、本実施形態に係るメタ情報MIは、送信元装置10のユーザインタフェース上で入力された文字情報CIを含んでよい。本実施形態に係る解析部250は、文字情報CIを解析し振動種別VT1を特定することができる。この際、解析部250は、文字情報CIの意図解釈を行うことで感情の推定を行ってもよい。また、本実施形態に係る文字情報CIには、送信元装置10を扱うユーザの発話をテキスト化した情報が含まれてもよい。
また、図5に示すように、本実施形態に係るメタ情報MIは、送信元装置10により収集されたセンサ情報SIを含んでもよい。本実施形態に係る解析部250は、センサ情報SIを解析し振動種別VT1を特定することができる。解析部250は、例えば、センサ情報SIに含まれる加速度情報が、送信元装置10の急速な運動を示すことに基づいて、送信元装置10のユーザが喜んでいることなどを推定してもよい。また、本実施形態に係るセンサ情報SIには、タッチパネル上における操作体の接触位置、接触の強さ、移動速度などの情報も含まれる。
以上、説明したように、本実施形態に係る解析部250は、送信元装置10から受信したメタ情報に基づいて振動種別を特定する機能を有する。また、本実施形態に係るメタ情報は、オブジェクト情報、画像情報、文字情報、およびセンサ情報などを含んでよい。本実施形態に係る解析部250が有する上記の機能によれば、振動波形データを直接的に通信することなく、振動種別を特定することが可能となり、データ通信量を低減することが可能となる。
(波形記憶部260)
波形記憶部260は、振動種別と振動波形データを関連付けて記憶する機能を有する。図6は、本実施形態に係る波形記憶部が記憶する振動種別と振動波形データの一例を示す図である。図6には、波形記憶部260に記憶される振動種別VT1と振動波形データVW1とが示されている。このように、本実施形態に係る波形記憶部260が振動種別に関連付いた振動波形データを記憶することで、振動波形データを都度通信することなく、振動出力を伴うコミュニケーションを実現することが可能となる。
また、波形記憶部260に記憶される振動種別および振動波形データは、振動DB30と定期または不定期、あるいは要求により同期されてよい。図7は、本実施形態に係る振動DB30への振動波形データの登録と、振動DB30および波形記憶部260の同期とについて説明するための図である。図7には、クリエータなどにより作成された振動波形データVW2と、音声波形データSW3に基づいて生成された振動波形データVW3とが示されている。ここで、音声波形データSW3は、例えば、「喜び」、を表す効果音に係る音声波形データであり、振動波形データVW3は、音声波形データSW3をローパスフィルタで処理することにより生成された振動波形データであってもよい。このように、本実施形態に係る振動DB30には、生成された振動波形データが都度追加される。
この際、受信装置20の波形記憶部260は、定期または不定期に振動DB30との差分をチェックし、新たな振動波形データをダウンロードしてもよい。また、波形記憶部260は、例えば、受信装置20のユーザによる振動波形データの購入手続きに基づいて、振動DB30から該当する振動波形データをダウンロードしてもよい。また、上述したとおり、本実施形態に係る出力制御部240は、波形記憶部260に該当する振動波形データが記憶されていない場合には、振動DB30から振動波形データを取得する。この場合、波形記憶部260は、出力制御部240が取得した上記の振動波形データを新たに記憶してよい。
(通信部270)
通信部270は、送信元装置10や振動DB30との情報通信を行う機能を有する。具体的には、本実施形態に係る通信部270は、送信元装置10に表示されるユーザインタフェース上において入力される入力情報と、当該入力情報に係るメタ情報を受信する。また、通信部270は、センサ部220などが収集した環境情報を送信元装置10に送信する。
以上、本実施形態に係る受信装置20の機能構成例について説明した。なお、図4を用いて説明した上記の機能構成はあくまで一例であり、本実施形態に係る受信装置20の機能構成は係る例に限定されない。本実施形態に係る受信装置20は、上記に挙げた以外の構成をさらに含んでもよい。
また、受信装置20が有する機能の一部は、送信元装置10の機能として実現されてもよい。例えば、解析部250は、送信元装置10の機能として実現され得る。この場合、受信装置20は、送信元装置10が特定した振動種別を受信することで、当該振動種別に対応する振動の出力を行うことができる。
また、送信元装置10と受信装置20との間の情報通信を仲介する情報処理サーバが設置される場合には、解析部250や出力制御部240は、当該情報処理サーバの機能として実現されてもよい。受信装置20は、情報処理サーバから振動種別や各種の制御信号を受信することで、上述した機能を実現することができる。
また、上記では、説明の簡便化のために送信元装置10および受信装置20が有する機能を分離して記載したが、送信元装置10および受信装置20は、上記で挙げた構成を共通して備えてもよい。すなわち、本実施形態に係る送信元装置10は同時に受信装置であり、本実施形態に係る受信装置20は同時に送信元装置であり得る。
<<1.5.触覚刺激に係る出力制御の詳細>>
次に、本実施形態の触覚刺激に係る出力制御の詳細について説明する。上述したとおり、本実施形態に係る解析部250は、送信元装置10から送信されるメタ情報を解析し、振動種別を特定することができる。また、本実施形態に係る出力制御部240は、解析部250が特定した振動種別に関連付いた振動波形データを波形記憶部260から取得し、当該振動波形データに基づく触覚刺激を出力部230に出力させることができる。
この際、出力制御部240は、例えば、メッセージアプリケーションが送信元装置10からのメッセージを受信した際に、触覚刺激を出力部230に出力させてもよい。この場合、受信装置20のユーザは、例えば、ポケットなどに受信装置20を入れている場合であっても、メッセージを確認することなく、触覚刺激のみで、当該メッセージの内容を予測することも可能である。
また、出力制御部240は、例えば、受信装置20のユーザが、アプリケーション画面を開いた際に、触覚刺激を出力部230に出力させてもよい。また、この際、出力制御部240は、複数のメッセージが蓄積されている場合には、最新のメッセージに係る触覚刺激のみを出力させてもよいし、メッセージ順に触覚刺激を出力させてもよい。この場合、受信装置20のユーザは、メッセージを確認する意思がある場合にのみ、触覚刺激の提示を受けることができ、より感度高く触覚刺激を楽しむことができる。
また、出力制御部240は、例えば、受信装置20のユーザがアプリケーションを開いている際にメッセージの受信を受けた場合にのみ、触覚刺激を出力部230に出力させることもできる。この場合、受信装置20のユーザは、リアルタイムかつより臨場感のある触覚刺激のコミュニケーションを楽しむことが可能である。
さらには、本実施形態に係る通信部270は、解析部250が特定した振動種別に係る情報を送信元装置10に送信してもよい。図8は、受信装置20から送信元装置10に送信される振動種別について説明するための図である。図8を参照すると、受信装置20は、送信元装置10から送信された入力情報に基づいてユーザインタフェース上にオブジェクトO1を出力した後、オブジェクトO1に係るメタ情報に基づいて振動種別VT1を特定し、振動種別VT1に対応する触覚刺激V1を出力している。
また、この際、受信装置20の通信部は、解析部250が特定した振動種別VT1を送信元装置10に送信している。送信元装置10は、受信した振動種別VT1に対応する触覚刺激V1を出力している。この場合、送信元装置10は、波形記憶部260に相当する構成をさらに備えてよい。
以上説明したように、本実施形態に係る受信装置20は、特定した触覚種別に係る情報を送信元装置10に送信することで、出力する触覚刺激の情報を送信元装置10にフィードバックすることができる。この場合、送信元装置10のユーザは、自身のメッセージ送信に基づいて、送信先装置、すなわち受信装置20でどのような触覚刺激が出力されるか、あるいは出力されたかを知ることが可能である。
また、上述したように、本実施形態に係る送信元装置10は、解析部250に相当する構成を備えてもよい。この場合、送信元装置10の出力制御部140は、例えば、メッセージ送信に係るレビュー画面で振動種別に基づく触覚刺激を出力させることができる。上記の機能によれば、送信元装置10のユーザは、メッセージが実際に送信される前に予め出力される触覚刺激を確認することが可能となる。また、出力制御部140は、レビュー時に触覚刺激を出力させた場合には、受信装置20から振動種別に係る情報を受信した場合でも、触覚刺激を出力しないよう制御を行ってもよい。
また、受信装置20の出力制御部240、および送信元装置10の出力制御部140は、ユーザインタフェース上でユーザによりメッセージがタップなどにより選択された際に、触覚刺激を出力させてもよい。本実施形態に係る触覚刺激の出力タイミングは、アプリケーションの特性などに応じて適宜設計されてもよいし、ユーザの設定などに応じて制御されてもよい。
また、本実施形態に係る出力制御部240は、出力位置を指定した触覚刺激の出力制御を行ってもよい。この際、本実施形態に係るメタ情報には、出力位置情報が含まれてよい。また、出力位置情報は、予めオブジェクトなどに設定された情報であってもよいし、送信元装置10のユーザにより指定された情報であってもよい。出力制御部240は、上記の出力位置情報に基づいて、出力部230による触覚刺激の出力を制御することができる。
図9は、本実施形態に係る出力位置情報に基づく触覚刺激の出力制御について説明するための図である。図9の左側には、受信装置20の出力部130に出力される通知AL1が示されている。ここで、通知AL1は、受信したメッセージに係る触覚刺激が頭部で再生される旨を示す文言を含んでよい。このように、本実施形態に係る出力制御部240は、メタ情報に含まれる出力位置情報に基づいて、触覚刺激を出力する位置を特定し、通知AL1を出力部130に出力させることができる。なお、図9の一例では、出力制御部240がメッセージ開封前に通知AL1を出力させる場合を示しているが、出力制御部240は、例えば、動画再生中などに上記のような通知を行うこともできる。
また、図9の右側には、受信装置20のユーザU2が装着するウェアラブル装置50と、ウェアラブル装置50の出力部が出力する触覚刺激V2とが示されている。このように、出力制御部240は、上記の出力位置情報に基づいて触覚刺激を出力させる出力部を決定し、触覚刺激を出力させることができる。また、この際、出力制御部240の制御対象となる出力部は、受信装置20の備える出力部230に限定されず、図9に示すようなウェアラブル装置50や各種の情報処理端末が備える出力部が含まれる。出力制御部240は、無線通信などにより接続されたウェアラブル装置50から受信した情報に基づき、装着の有無などを判定することができる。
また、本実施形態に係る出力制御部240は、出力位置情報に基づいて、受信装置20の出力部230が有する複数の振動デバイスのうち、特定の振動デバイスに触覚刺激を出力させてもよい。図10は、本実施形態に係る振動デバイスを特定した触覚刺激の出力制御について説明するための図である。
図10の左側には、受信装置20の出力部230に出力されるアバターAVと触覚刺激V3とが示されている。ここで、アバターAVは、例えば、ゲームアプリケーションなどにおいて送信元装置10のユーザの代替となるグラフィカルイメージなどであってよい。この際、本実施形態に係る出力制御部240は、アバターAVの出力位置に応じて触覚刺激V3を出力させる振動デバイスを決定してよい。図10に示す一例の場合、出力制御部240は、アバターAVを画面右上に表示させると共に、受信装置20の向かって右上に内蔵される振動デバイスに触覚刺激V3を出力させている。
また、図10の右側には、同様に、受信装置20の出力部230に出力されるアバターAVと触覚刺激V4とが示されている。この場合、出力制御部240は、アバターAVを画面左下に表示させると共に、受信装置20の向かって左下に内蔵される振動デバイスに触覚刺激V4を出力させている。このように、本実施形態に係る出力制御部240は、出力部230が複数の振動デバイスを有する場合には、出力位置情報に対応する振動デバイスにのみ触覚刺激を出力させてよい。本実施形態に係る出力制御部240が有する上記の機能によれば、視覚情報とリンクしたより現実感のある触覚刺激をユーザに提示することが可能となる。
また、本実施形態に係る出力位置情報は、タップ情報を含んでもよい。この場合、本実施形態に係る出力制御部240は、上記のタップ情報に基づいて、出力部230による触覚刺激の出力を制御することができる。
図11は、本実施形態に係るタップ位置情報に基づく触覚刺激の出力制御について説明するための図である。図11の左側には、送信元装置10の入力部110におけるユーザのタップt5~t7が示されている。ここで、タップt5~t7の強度はイメージの大きさに比例するものであってよい。
また、図11の右側には、受信装置20の出力部230に出力されるオブジェクトO5~O7と、触覚刺激V5~V7とがしめされている。ここで、オブジェクトO5~O7および触覚刺激V5~V7は、タップt5~t7に対応して出力される視覚情報および触覚刺激であってよい。すなわち、本実施形態に係る出力制御部240は、受信したタップt5~t7のタップ情報に基づいて、タップt5~t7に対応する位置にオブジェクトO5~O7を表示させることができる。また、出力制御部240は、タップt5~t7のタップ情報に基づいて、タップt5~t7と近い位置に内蔵される振動デバイスに触覚刺激V5~V7を出力させることができる。
また、この際、出力制御部240は、タップt5~t7の強度に基づいて、オブジェクトO5~O7の大きさや触覚刺激V5~V7の強度を制御することもできる。本実施形態に係る出力制御部240が有する上記の機能によれば、より臨場感のある触覚コミュニケーションを実現することが可能となる。
<<1.6.受信装置20による触覚刺激の出力制御の流れ>>
次に、本実施形態に係る受信装置20による触覚刺激の出力制御の流れについて説明する。図12は、本実施形態に係る受信装置20による触覚刺激の出力制御の流れを示すフローチャートである。
図12を参照すると、まず、受信装置20の通信部270は、送信元装置10からメタ情報を受信する(S1101)。
次に、解析部250は、ステップS1101で受信したメタ情報に基づいて、振動種別を特定する(S1102)。
次に、出力制御部240は、ステップS1101で受信したメタ情報に基づいて触覚刺激の出力位置を特定する(S1103)。
次に、出力制御部240は、波形記憶部260からステップS1102で特定された振動種別に関連付いた振動波形データの取得を試みる。ここで、波形記憶部260に該当する振動波形データが存在する場合(S1104:Yes)、出力制御部240は、波形記憶部260から振動波形データを取得する(S1105)。
一方、波形記憶部260に該当する振動波形データが存在しない場合(S1104:No)、出力制御部240は、振動DB30から振動種別に関連付いた振動波形データの取得を試みる。ここで、振動DB30に該当する振動波形データが存在する場合(S1106:Yes)、出力制御部240は、振動波形DB30から振動波形データを取得する(S1107)。一方、振動DB30にも該当する振動波形データが存在しない場合(S1106:No)、出力制御部240は、触覚刺激の出力制御に係る処理を終了する。
ステップS1105またはステップS1107において振動波形データが取得された場合には、出力制御部240は、取得した振動波形データに基づく触覚刺激の出力制御を行う(S1108)。
<<1.7.送信先装置の状態に基づく出力制御>>
以上、本実施形態に係る触覚刺激の出力制御について詳細に説明した。次に、本実施形態に係る送信元装置10の出力制御部140による送信先装置、すなわち受信装置20の状態に基づく出力制御について詳細に説明する。
上述したように、本実施形態に係る送信元装置10の状態推定部150は、送信先装置、すなわち受信装置20が送信する環境情報に基づいて受信装置20の状態を推定することができる。また、本実施形態に係る出力制御部140は、状態推定部150により推定された受信装置20の状態に基づいて、アプリケーションに係るユーザインタフェースの表示を制御することができる。
図13は、本実施形態に係る状態推定に基づくユーザインタフェースの表示制御について説明するための図である。ここで、図13の右側には、受信装置20を所持してランニング中のユーザU2が示されており、図13の左側には、送信元装置10の出力部130に出力されるユーザインタフェースIFが示されている。
この際、本実施形態に係る状態推定部150は、受信装置20のセンサ部120が収集した加速度情報などに基づき、ユーザU2が走っている状態であると推定することができる。また、出力制御部140は、状態推定部150により推定された受信装置20の状態に基づいて、種々の表示制御を行うことができる。
例えば、出力制御部140は、状態推定部150により推定された受信装置20の状態に基づいて、ユーザインタフェース上におけるオブジェクトの選択可否を制御してもよい。図13に示す一例の場合、出力制御部140は、受信装置20が運動状態であると推定されたことに基づいて、オブジェクトO13およびO14が選択できないように表示制御を行っている。
ここで、図13に示されるオブジェクトO11およびO12は、触覚刺激の出力を伴わないオブジェクトであってよく、オブジェクトO13およびO14は、触覚刺激の出力を伴うオブジェクトであってよい。すなわち、本実施形態に係る出力制御部140は、受信装置20が運動状態である場合には、触覚刺激を出力してもユーザU2が当該触覚刺激を知覚する可能性が低いことから、触覚刺激を伴うオブジェクトO13およびO14が選択できないように制御を行っている。
また、状態推定部150は、環境情報から受信装置20と周辺装置との通信状態などを推定することもできる。この場合、出力制御部140は、例えば、受信装置20と接続されたウェアラブル装置で出力させることが可能な触覚刺激に対応したオブジェクトを表示させるなどの制御を行うことができる。
また、出力制御部140は、状態推定部150により推定された送信先装置、すなわち受信装置20の状態に係る情報をユーザインタフェース上に表示させてもよい。図13に示す一例の場合、出力制御部140は、ユーザU2を表すアイコンと共にメッセージMsg1を表示させている。ここで、メッセージMsg1は、ユーザU2が運動状態であることを示すメッセージであってよい。送信元装置10のユーザは、上記のようなメッセージを確認することで、ユーザU2および受信装置20の状態を知ることができる。
また、図13を用いた上記の説明では、状態推定部150が環境情報に基づいて受信装置20の運動状態を推定する場合を例に述べたが、本実施形態に係る状態推定部150は、運動状態以外にも受信装置20に係る種々の状態を推定することが可能である。例えば、本実施形態に係る状態推定部150は、環境情報に基づいて、送信先装置、すなわち受信装置20の把持状態、設置状態、マナー状態などを推定することが可能である。
図14は、本実施形態に係る状態推定部150による状態推定の一例を示す図である。図14の左側には、卓上に設置される受信装置20、およびユーザにより把持される受信装置20が示されている。この際、本実施形態に係る状態推定部150は、例えば、受信装置20から受信した環境情報に含まれる加速度情報に基づいて、設置状態や把持状態を推定することができる。図14の右側には、受信装置20から送信される加速度情報の一例が示されている。ここで、曲線A1は、受信装置20が把持されていない状態で収集された加速度情報であってよく、曲線A2は、受信装置20が把持状態にある際に収集された加速度情報であってよい。
この際、状態推定部150は、受信装置20が把持状態にある場合には、振動が小さくなる現象に基づいて、上記の把持状態を推定してよい。具体的は、状態推定部150は、まず、受信装置20が把持されていない状態で触覚刺激が出力された際の揺れ(加速度情報)を記憶する。その後、状態推定部150は、定期または不定期に振動と揺れを検出し、揺れの値が下がった場合に、受信装置20が把持状態であると推定してよい。また、状態推定部150は、揺れの値が所定値以下である状態が続いた場合、受信装置20が設置状態であると推定してもよい。
また、本実施形態に係る状態推定部150は、加速度情報以外の環境情報に基づいて、受信装置20の状態を推定してもよい。例えば、状態推定部150は、受信装置20から受信するマナーモードに係る情報、位置情報、スケジュール情報、他アプリケーションの稼働情報などに基づいて、受信装置20の状態を推定することができる。また、出力制御部140は、状態推定部150により推定された受信装置20の状態に基づいて、種々の出力制御を行ってよい。
例えば、出力制御部140は、状態推定部150が受信装置20のユーザが着信に応じられない状態であると推定した場合、送信元装置10のユーザにその旨を通知する出力制御を行ってもよいし、触覚刺激を伴う入力ができないように表示制御を行ってもよい。
また、出力制御部140は、表示制御の他、受信装置20で出力される触覚刺激に係る制御を行うことも可能である。例えば、出力制御部140は、受信装置20が運動状態であると推定されたことに基づいて、通常時よりも強度の高い触覚刺激を出力させるようにメタ情報を生成することもできる。
また、出力制御部140は、状態推定部150が、運動状態など、ユーザが着信に気付きにくい状態であると推定したことに基づいて、メッセージアプリケーションの履歴とは独立した、着信に気付くための触覚刺激を出力させるメタ情報を生成することもできる。
以上、本実施形態に係る送信先装置の状態に基づく出力制御の詳細について説明した。上述したように、本実施形態に係る出力制御部140は、状態推定部150が推定した受信装置20の状態に基づいて、種々の出力制御を行うことができる。本実施形態に係る出力制御部140が有する上記の機能によれば、送信先相手の状態を考慮した触覚コミュニケーションを実現することが可能となる。
また、上述したように、本実施形態に係る受信装置20は、送信元装置10が有する機能を共通して有してもよい。すなわち、本実施形態に係る受信装置20の出力制御部240は、上記で説明した出力制御部140と同等の機能を有してよい。
また、上述したように、本実施形態に係る情報処理システムは、送信元装置10と受信装置20との情報通信を仲介する情報処理サーバを備えてもよい。この場合、情報処理サーバは、上記で説明した状態推定部150や出力制御部140に相当する構成を備えることで、送信元装置10や受信装置20の状態を推定し、当該状態に基づく種々の出力制御を行ってもよい。
<<1.8.送信元装置10による状態推定に基づく出力制御の流れ>>
次に、本実施形態に係る送信元装置10による状態推定に基づく出力制御の流れについて説明する。図15は、本実施形態に係る送信元装置10による状態推定に基づく出力制御の流れを示すフローチャートである。
図16を参照すると、送信元装置10の通信部160は、まず送信先装置、すなわち受信装置20から環境情報を受信する(S1201)。
次に、本実施形態に係る状態推定部150は、ステップS1201で受信された環境情報に基づいて受信装置20の状態推定を行う(S1202)。
次に、本実施形態に係る出力制御部140は、ステップS1202で推定された受信装置20の状態に基づいて、種々の出力制御を行う(S1203)。
<2.ハードウェア構成例>
次に、本開示に係る送信元装置10および受信装置20に共通するハードウェア構成例について説明する。図16は、本開示に係る送信元装置10および受信装置20のハードウェア構成例を示すブロック図である。図16を参照すると、送信元装置10および受信装置20は、例えば、CPU871と、ROM872と、RAM873と、ホストバス874と、ブリッジ875と、外部バス876と、インターフェース877と、入力装置878と、出力装置879と、ストレージ880と、ドライブ881と、接続ポート882と、通信装置883と、を有する。なお、ここで示すハードウェア構成は一例であり、構成要素の一部が省略されてもよい。また、ここで示される構成要素以外の構成要素をさらに含んでもよい。
(CPU871)
CPU871は、例えば、演算処理装置又は制御装置として機能し、ROM872、RAM873、ストレージ880、又はリムーバブル記録媒体901に記録された各種プログラムに基づいて各構成要素の動作全般又はその一部を制御する。
(ROM872、RAM873)
ROM872は、CPU871に読み込まれるプログラムや演算に用いるデータ等を格納する手段である。RAM873には、例えば、CPU871に読み込まれるプログラムや、そのプログラムを実行する際に適宜変化する各種パラメータ等が一時的又は永続的に格納される。
(ホストバス874、ブリッジ875、外部バス876、インターフェース877)
CPU871、ROM872、RAM873は、例えば、高速なデータ伝送が可能なホストバス874を介して相互に接続される。一方、ホストバス874は、例えば、ブリッジ875を介して比較的データ伝送速度が低速な外部バス876に接続される。また、外部バス876は、インターフェース877を介して種々の構成要素と接続される。
(入力装置878)
入力装置878には、例えば、マウス、キーボード、タッチパネル、ボタン、スイッチ、及びレバー等が用いられる。さらに、入力装置878としては、赤外線やその他の電波を利用して制御信号を送信することが可能なリモートコントローラ(以下、リモコン)が用いられることもある。また、入力装置878には、マイクロフォンなどの音声入力装置が含まれる。
(出力装置879)
出力装置879は、例えば、CRT(Cathode Ray Tube)、LCD、又は有機EL等のディスプレイ装置、スピーカー、ヘッドホン等のオーディオ出力装置、プリンタ、携帯電話、又はファクシミリ等、取得した情報を利用者に対して視覚的又は聴覚的に通知することが可能な装置である。また、本開示に係る出力装置879は、触覚刺激を出力することが可能な種々の振動デバイスを含む。
(ストレージ880)
ストレージ880は、各種のデータを格納するための装置である。ストレージ880としては、例えば、ハードディスクドライブ(HDD)等の磁気記憶デバイス、半導体記憶デバイス、光記憶デバイス、又は光磁気記憶デバイス等が用いられる。
(ドライブ881)
ドライブ881は、例えば、磁気ディスク、光ディスク、光磁気ディスク、又は半導体メモリ等のリムーバブル記録媒体901に記録された情報を読み出し、又はリムーバブル記録媒体901に情報を書き込む装置である。
(リムーバブル記録媒体901)
リムーバブル記録媒体901は、例えば、DVDメディア、Blu-ray(登録商標)メディア、HD DVDメディア、各種の半導体記憶メディア等である。もちろん、リムーバブル記録媒体901は、例えば、非接触型ICチップを搭載したICカード、又は電子機器等であってもよい。
(接続ポート882)
接続ポート882は、例えば、USB(Universal Serial Bus)ポート、IEEE1394ポート、SCSI(Small Computer System Interface)、RS-232Cポート、又は光オーディオ端子等のような外部接続機器902を接続するためのポートである。
(外部接続機器902)
外部接続機器902は、例えば、プリンタ、携帯音楽プレーヤ、デジタルカメラ、デジタルビデオカメラ、又はICレコーダ等である。
(通信装置883)
通信装置883は、ネットワークに接続するための通信デバイスであり、例えば、有線又は無線LAN、Bluetooth(登録商標)、又はWUSB(Wireless USB)用の通信カード、光通信用のルータ、ADSL(Asymmetric Digital Subscriber Line)用のルータ、又は各種通信用のモデム等である。
<3.まとめ>
以上説明したように、本開示に係る送信元装置10は、受信装置20から受信する環境情報に基づいて受信装置20の状態を推定し、当該状態に基づく種々の出力制御を行うことができる。また、本開示に係る受信装置20は、送信元装置10から受信したメタ情報から振動種別を特定し、当該振動種別に対応する触覚刺激を出力することができる。係る構成によれば、振動に係る情報通信においてデータ通信量を効果的に低減することが可能となる。
以上、添付図面を参照しながら本開示の好適な実施形態について詳細に説明したが、本開示の技術的範囲はかかる例に限定されない。本開示の技術分野における通常の知識を有する者であれば、請求の範囲に記載された技術的思想の範疇内において、各種の変更例または修正例に想到し得ることは明らかであり、これらについても、当然に本開示の技術的範囲に属するものと了解される。
また、本明細書の送信元装置10および受信装置20の処理における各ステップは、必ずしもフローチャートとして記載された順序に沿って時系列に処理する必要はない。例えば、送信元装置10および受信装置20の処理における各ステップは、フローチャートとして記載した順序と異なる順序で処理されても、並列的に処理されてもよい。
また、本明細書に記載された効果は、あくまで説明的または例示的なものであって限定的ではない。つまり、本開示に係る技術は、上記の効果とともに、または上記の効果に代えて、本明細書の記載から当業者には明らかな他の効果を奏しうる。
なお、以下のような構成も本開示の技術的範囲に属する。
(1)
送信元装置に表示されるユーザインタフェース上において入力される入力情報と、当該入力情報に係るメタ情報を受信する通信部と、
前記メタ情報を解析し振動種別を特定する解析部と、
前記振動種別と振動波形データとを関連付けて記憶する波形記憶部と、
前記振動種別に基づいて前記波形記憶部から取得した前記振動波形データに対応する触覚刺激を出力部に出力させる出力制御部と、
を備える、
情報処理装置。
(2)
前記メタ情報は、選択されたオブジェクトに係るオブジェクト情報を含み、
前記解析部は、前記オブジェクト情報に基づいて前記振動種別を特定する、
前記(1)に記載の情報処理装置。
(3)
前記メタ情報は、選択された画像情報を含み、
前記解析部は、前記画像情報を解析し前記振動種別を特定する、
前記(1)または(2)に記載の情報処理装置。
(4)
前記メタ情報は、入力された文字情報を含み、
前記解析部は、前記文字情報を解析し前記振動種別を特定する、
前記(1)~(3)のいずれかに記載の情報処理装置。
(5)
前記メタ情報は、前記送信元装置により収集されたセンサ情報を含み、
前記解析部は、前記センサ情報を解析し前記振動種別を特定する、
前記(1)~(4)のいずれかに記載の情報処理装置。
(6)
前記通信部は、前記解析部が特定した前記振動種別に係る情報を前記送信元装置に送信する、
前記(1)~(5)のいずれかに記載の情報処理装置。
(7)
前記出力制御部は、前記振動種別に関連付いた前記振動波形データが前記波形記憶部に記憶されていない場合、前記振動種別に基づいて外部装置から前記振動波形データを取得する、
前記(1)~(6)のいずれかに記載の情報処理装置。
(8)
前記メタ情報は、出力位置情報を含み、
前記出力制御部は、前記出力位置情報に基づいて前記出力部による触覚刺激の出力を制御する、
前記(1)~(7)のいずれかに記載の情報処理装置。
(9)
前記出力制御部は、前記出力位置情報に基づいて触覚刺激を出力させる前記出力部を決定する、
前記(8)に記載の情報処理装置。
(10)
前記出力位置情報は、タップ情報を含み、
前記出力制御部は、前記タップ情報に基づいて、前記出力部による触覚刺激の出力を制御する、
前記(8)または(9)に記載の情報処理装置。
(11)
送信先装置が送信する環境情報に基づいて、前記送信元装置の状態を推定する状態推定部、
をさらに備え、
前記出力制御部は、前記状態推定部により推定された前記送信先装置の状態に基づいて、アプリケーションに係るユーザインタフェースの表示を制御する、
前記(1)~(10)のいずれかに記載の情報処理装置。
(12)
前記出力制御部は、前記状態推定部により推定された前記送信元装置の状態に基づいて、前記ユーザインタフェース上におけるオブジェクトの選択可否を制御する、
前記(11)に記載の情報処理装置。
(13)
前記状態推定部は、前記環境情報に基づいて前記送信先装置の把持状態、設置状態、運動状態、またはマナー状態の少なくともいずれかを推定し、
前記出力制御部は、前記状態推定部により前記送信先装置が把持状態、設置状態、または運動状態であると推定されたことに基づいて、前記ユーザインタフェースの表示を制御する、
前記(11)または(12)に記載の情報処理装置。
(14)
前記出力制御部は、前記状態推定部により推定された前記送信先装置の状態に係る情報を、前記ユーザインタフェース上に表示させる、
前記(11)~(13)のいずれかに記載の情報処理装置。
(15)
前記環境情報は、センサ情報、スケジュール情報、またはアプリケーションの稼働情報のうち少なくとも1つを含む、
前記(11)~(14)のいずれかに記載の情報処理装置。
(16)
前記出力制御部による制御に基づいて、触覚刺激を出力する出力部、
をさらに備える、
前記(1)~(15)のいずれかに記載の情報処理装置。
(17)
前記出力制御部による制御に基づいて、アプリケーションに係るユーザインタフェースを表示する出力部、
をさらに備える、
前記(1)~(16)のいずれかに記載の情報処理装置。
(18)
プロセッサが、
送信元装置に表示されるユーザインタフェース上において入力される入力情報と、当該入力情報に係るメタ情報を受信することと、
前記メタ情報を解析し振動種別を特定することと、
前記振動種別と振動波形データとを関連付けて記憶することと、
前記振動種別に基づいて取得した前記振動波形データに対応する触覚刺激を出力部に出力させることと、
を含む、
情報処理方法。
(19)
コンピュータを、
送信元装置に表示されるユーザインタフェース上において入力される入力情報と、当該入力情報に係るメタ情報を受信する通信部と、
前記メタ情報を解析し振動種別を特定する解析部と、
前記振動種別と振動波形データとを関連付けて記憶する波形記憶部と、
前記振動種別に基づいて前記波形記憶部から取得した前記振動波形データに対応する触覚刺激を出力部に出力させる出力制御部と、
を備える、
情報処理装置、
として機能させるためのプログラム。
(20)
アプリケーションに係るユーザインタフェースの表示を制御する出力制御部と、
前記ユーザインタフェース上において入力される入力情報と、当該入力情報に係るメタ情報とを送信する通信部と、
を備える、送信元装置と、
前記入力情報と前記メタ情報とを受信する通信部と、
前記メタ情報を解析し振動種別を特定する解析部と、
前記振動種別と振動波形データとを関連付けて記憶する波形記憶部と、
前記振動種別に基づいて前記波形記憶部から取得した前記振動波形データに対応する触覚刺激を出力部に出力させる出力制御部と、
を備える、受信装置と、
を含む、
情報処理システム。
10 送信元装置
110 入力部
120 センサ部
130 出力部
140 出力制御部
150 状態推定部
160 通信部
20 受信装置
220 センサ部
230 出力部
240 出力制御部
250 解析部
260 波形記憶部
270 通信部
30 振動DB
40 ネットワーク

Claims (19)

  1. 送信元装置に表示されるユーザインタフェース上において入力される入力情報と、当該入力情報に係るメタ情報を受信する通信部と、
    前記メタ情報を解析し振動種別を特定する解析部と、
    前記振動種別と振動波形データとを関連付けて記憶する波形記憶部と、
    前記振動種別に基づいて前記波形記憶部から取得した前記振動波形データに対応する触覚刺激を出力部に出力させる出力制御部と、
    を備え、
    前記通信部は、前記解析部が特定した前記振動種別に係る情報を前記送信元装置に送信する、
    情報処理装置。
  2. 前記メタ情報は、選択されたオブジェクトに係るオブジェクト情報を含み、
    前記解析部は、前記オブジェクト情報に基づいて前記振動種別を特定する、
    請求項1に記載の情報処理装置。
  3. 前記メタ情報は、選択された画像情報を含み、
    前記解析部は、前記画像情報を解析し前記振動種別を特定する、
    請求項1または2に記載の情報処理装置。
  4. 前記メタ情報は、入力された文字情報を含み、
    前記解析部は、前記文字情報を解析し前記振動種別を特定する、
    請求項1~3のいずれか1項に記載の情報処理装置。
  5. 前記メタ情報は、前記送信元装置により収集されたセンサ情報を含み、
    前記解析部は、前記センサ情報を解析し前記振動種別を特定する、
    請求項1~4のいずれか1項に記載の情報処理装置。
  6. 前記出力制御部は、前記振動種別に関連付いた前記振動波形データが前記波形記憶部に記憶されていない場合、前記振動種別に基づいて外部装置から前記振動波形データを取得する、
    請求項1~のいずれか1項に記載の情報処理装置。
  7. 前記メタ情報は、出力位置情報を含み、
    前記出力制御部は、前記出力位置情報に基づいて前記出力部による触覚刺激の出力を制御する、
    請求項1~のいずれか1項に記載の情報処理装置。
  8. 前記出力制御部は、前記出力位置情報に基づいて触覚刺激を出力させる前記出力部を決定する、
    請求項に記載の情報処理装置。
  9. 前記出力位置情報は、タップ情報を含み、
    前記出力制御部は、前記タップ情報に基づいて、前記出力部による触覚刺激の出力を制御する、
    請求項またはに記載の情報処理装置。
  10. 送信先装置が送信する環境情報に基づいて、前記送信元装置の状態を推定する状態推定部、
    をさらに備え、
    前記出力制御部は、前記状態推定部により推定された前記送信先装置の状態に基づいて、アプリケーションに係るユーザインタフェースの表示を制御する、
    請求項1~のいずれか1項に記載の情報処理装置。
  11. 前記出力制御部は、前記状態推定部により推定された前記送信元装置の状態に基づいて、前記ユーザインタフェース上におけるオブジェクトの選択可否を制御する、
    請求項10に記載の情報処理装置。
  12. 前記状態推定部は、前記環境情報に基づいて前記送信先装置の把持状態、設置状態、運動状態、またはマナー状態の少なくともいずれかを推定し、
    前記出力制御部は、前記状態推定部により前記送信先装置が把持状態、設置状態、または運動状態であると推定されたことに基づいて、前記ユーザインタフェースの表示を制御する、
    請求項10または11に記載の情報処理装置。
  13. 前記出力制御部は、前記状態推定部により推定された前記送信先装置の状態に係る情報を、前記ユーザインタフェース上に表示させる、
    請求項1012のいずれか1項に記載の情報処理装置。
  14. 前記環境情報は、センサ情報、スケジュール情報、またはアプリケーションの稼働情報のうち少なくとも1つを含む、
    請求項1013のいずれか1項に記載の情報処理装置。
  15. 前記出力制御部による制御に基づいて、触覚刺激を出力する出力部、
    をさらに備える、
    請求項1~14のいずれか1項に記載の情報処理装置。
  16. 前記出力制御部による制御に基づいて、アプリケーションに係るユーザインタフェースを表示する出力部、
    をさらに備える、
    請求項1~15のいずれか1項に記載の情報処理装置。
  17. プロセッサが、
    送信元装置に表示されるユーザインタフェース上において入力される入力情報と、当該入力情報に係るメタ情報を受信することと、
    前記メタ情報を解析し振動種別を特定することと、
    前記振動種別と振動波形データとを関連付けて記憶することと、
    前記振動種別に基づいて取得した前記振動波形データに対応する触覚刺激を出力部に出力させることと、
    を含
    前記受信することでは、
    前記特定することにより特定した前記振動種別に係る情報を前記送信元装置に送信する、
    情報処理方法。
  18. コンピュータを、
    送信元装置に表示されるユーザインタフェース上において入力される入力情報と、当該入力情報に係るメタ情報を受信する通信部と、
    前記メタ情報を解析し振動種別を特定する解析部と、
    前記振動種別と振動波形データとを関連付けて記憶する波形記憶部と、
    前記振動種別に基づいて前記波形記憶部から取得した前記振動波形データに対応する触覚刺激を出力部に出力させる出力制御部と、
    を備え、
    前記通信部は、前記解析部が特定した前記振動種別に係る情報を前記送信元装置に送信する、
    情報処理装置、
    として機能させるためのプログラム。
  19. アプリケーションに係るユーザインタフェースの表示を制御する出力制御部と、
    前記ユーザインタフェース上において入力される入力情報と、当該入力情報に係るメタ情報とを送信する第1通信部と、
    を備える、送信元装置と、
    前記入力情報と前記メタ情報とを受信する第2通信部と、
    前記メタ情報を解析し振動種別を特定する解析部と、
    前記振動種別と振動波形データとを関連付けて記憶する波形記憶部と、
    前記振動種別に基づいて前記波形記憶部から取得した前記振動波形データに対応する触覚刺激を出力部に出力させる出力制御部と、
    を備え、
    前記第2通信部は、前記解析部が特定した前記振動種別に係る情報を前記送信元装置に送信する、
    受信装置と、
    を含む、
    情報処理システム。
JP2018554861A 2016-12-05 2017-10-27 情報処理装置、情報処理方法、プログラム、および情報処理システム Active JP7067484B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2016235573 2016-12-05
JP2016235573 2016-12-05
PCT/JP2017/038890 WO2018105266A1 (ja) 2016-12-05 2017-10-27 情報処理装置、情報処理方法、プログラム、および情報処理システム

Publications (2)

Publication Number Publication Date
JPWO2018105266A1 JPWO2018105266A1 (ja) 2019-10-24
JP7067484B2 true JP7067484B2 (ja) 2022-05-16

Family

ID=62490947

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2018554861A Active JP7067484B2 (ja) 2016-12-05 2017-10-27 情報処理装置、情報処理方法、プログラム、および情報処理システム

Country Status (5)

Country Link
US (1) US20190265798A1 (ja)
EP (1) EP3550438A4 (ja)
JP (1) JP7067484B2 (ja)
CN (1) CN110023917A (ja)
WO (1) WO2018105266A1 (ja)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7771320B2 (en) 2006-09-07 2010-08-10 Nike, Inc. Athletic performance sensing and/or tracking systems and methods
JP7000253B2 (ja) * 2018-05-31 2022-01-19 国立大学法人東海国立大学機構 力覚視覚化装置、ロボットおよび力覚視覚化プログラム
JP2020046714A (ja) * 2018-09-14 2020-03-26 コニカミノルタ株式会社 表示装置および表示装置の制御プログラム
GB2584167B (en) * 2019-05-24 2023-06-28 Sensae Aps User interface, user interface system and method
JP7171530B2 (ja) * 2019-09-20 2022-11-15 日本電信電話株式会社 触覚振動配信装置、触覚振動配信方法、触覚振動配信プログラム
WO2022118746A1 (ja) * 2020-12-04 2022-06-09 ソニーグループ株式会社 情報処理装置、情報処理方法、プログラム及び情報処理システム

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2013503578A (ja) 2009-08-31 2013-01-31 クアルコム,インコーポレイテッド モバイル装置を振動させる、または揺り動かすことによって通信する方法および機器
WO2014006797A1 (ja) 2012-07-04 2014-01-09 日本電気株式会社 電子機器、その制御方法及び制御プログラムが格納された非一時的なコンピュータ可読媒体
WO2014084374A1 (ja) 2012-11-30 2014-06-05 日本電気株式会社 通信システム、通信方法、通信装置、プログラム、及び記録媒体

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8315652B2 (en) * 2007-05-18 2012-11-20 Immersion Corporation Haptically enabled messaging
JP2009058548A (ja) * 2007-08-30 2009-03-19 Oki Electric Ind Co Ltd 音声検索装置
EP2741177B1 (en) * 2008-07-15 2019-06-26 Immersion Corporation Systems and Methods for Transmitting Haptic Messages
JP5227769B2 (ja) 2008-12-05 2013-07-03 ソニーモバイルコミュニケーションズ, エービー 携帯端末およびコンピュータプログラム
US20120133494A1 (en) * 2010-11-29 2012-05-31 Immersion Corporation Systems and Methods for Providing Programmable Deformable Surfaces
US20130311881A1 (en) 2012-05-16 2013-11-21 Immersion Corporation Systems and Methods for Haptically Enabled Metadata
KR20140115836A (ko) * 2013-03-22 2014-10-01 삼성전자주식회사 햅틱 효과를 제공하는 휴대 단말 및 방법
US10325457B2 (en) * 2013-08-29 2019-06-18 Sony Corporation Wristband-type information processing device, information processing system, and information processing method

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2013503578A (ja) 2009-08-31 2013-01-31 クアルコム,インコーポレイテッド モバイル装置を振動させる、または揺り動かすことによって通信する方法および機器
WO2014006797A1 (ja) 2012-07-04 2014-01-09 日本電気株式会社 電子機器、その制御方法及び制御プログラムが格納された非一時的なコンピュータ可読媒体
WO2014084374A1 (ja) 2012-11-30 2014-06-05 日本電気株式会社 通信システム、通信方法、通信装置、プログラム、及び記録媒体

Also Published As

Publication number Publication date
JPWO2018105266A1 (ja) 2019-10-24
CN110023917A (zh) 2019-07-16
WO2018105266A1 (ja) 2018-06-14
EP3550438A4 (en) 2019-11-20
US20190265798A1 (en) 2019-08-29
EP3550438A1 (en) 2019-10-09

Similar Documents

Publication Publication Date Title
JP7067484B2 (ja) 情報処理装置、情報処理方法、プログラム、および情報処理システム
US9959783B2 (en) Converting audio to haptic feedback in an electronic device
TW201820315A (zh) 改良型音訊耳機裝置及其聲音播放方法、電腦程式
JP2013101248A (ja) 音声制御装置、音声制御方法、およびプログラム
US11244682B2 (en) Information processing device and information processing method
CN110830368B (zh) 即时通讯消息发送方法及电子设备
JP6857024B2 (ja) 再生制御方法、システム、及び情報処理装置
JP6404709B2 (ja) 音出力装置および音出力装置における音の再生方法
JPWO2016136104A1 (ja) 情報処理装置、情報処理方法及びプログラム
JPWO2018034077A1 (ja) 情報処理装置、情報処理方法、及びプログラム
JP6733662B2 (ja) 情報処理装置、情報処理方法及びコンピュータプログラム
CN116208704A (zh) 一种声音处理方法及其装置
JP2018151828A (ja) 情報処理装置および情報処理方法
US20160133243A1 (en) Musical performance system, musical performance method and musical performance program
RU2679719C2 (ru) Способ и устройство для управления рабочим состоянием
CN106487989A (zh) 信息发送、接收方法、装置及终端
JP7037426B2 (ja) 電子機器及び処理システム
JPWO2019146188A1 (ja) 情報処理装置および情報処理方法
JP7238579B2 (ja) 端末装置、出席管理システム、出席管理方法、及びプログラム
JP2020080122A (ja) 情報処理装置、情報処理方法、および記憶媒体
JP7151707B2 (ja) 情報処理装置、情報処理方法、およびプログラム
JP2020017038A (ja) 情報処理システム、情報処理方法およびプログラム
US12019941B2 (en) Information processing apparatus and information processing method
CN110024028B (zh) 信息处理装置、信息处理方法以及程序
JP2017228167A (ja) 情報出力システム及び情報出力方法

Legal Events

Date Code Title Description
RD02 Notification of acceptance of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7422

Effective date: 20190515

RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7424

Effective date: 20190522

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20200817

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20200817

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20211102

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20211227

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20220329

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20220411

R151 Written notification of patent or utility model registration

Ref document number: 7067484

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151