JP7434633B1 - 情報処理装置、情報処理システム、入力デバイスおよび制御方法 - Google Patents

Abstract

【課題】入力デバイスの重みを表現して、使用感を向上する。【解決手段】入力情報取得部は、入力デバイスに作用する圧力と入力デバイスの移動状態を示す入力情報を取得し、振動制御部は入力情報に基づいて振動源から取得される振動源信号の振動特性を制御し、移動状態を示す速度を遅延させた遅延速度を用いて振動特性を制御し、入力デバイスは、駆動信号に基づいて振動する振動発生器を備え、駆動信号は振動制御部により制御された振動特性を有する振動信号を含む。【選択図】図１

Description

本願は、情報処理装置、情報処理システム、入力デバイスおよび制御方法に関する。

ハプティックペン（haptic pen）とは、触覚フィードバック機能（haptics feedback）を有するデジタルペンである。デジタルペンは、手書き文字、描画など、各種の情報機器への表示および記録に用いられる入力デバイスである。デジタルペンは、電子ペン、スマートペン、スタイラス、などとも呼ばれる。触覚フィードバックは、文字等を表示するタッチパネルへの接触に応じて振動体を振動させることにより実現される。

例えば、特許文献１には、ストロークデータの再生に応じた触覚フィードバックを生成する手書きデータ生成装置について記載されている。当該装置は、手書き入力に応じて生成されるストロークデータの少なくとも一部に対して触覚フィードバックを関連付け、ストロークデータおよび触覚フィードバックを示すハプティックスデータを含むデジタルインクを生成するように構成される。

特開２０２１－１９２２１３号公報

ハプティックペンでは、筆記動作における接触物との摩擦感を表現するため、筆圧もしくは筆記速度に基づいて振動量を制御することがある。摩擦感は、表面が滑らかなパネルやペン先のように、摩擦係数が低い場合でも表現することができる。しかしながら、ペン自体の重さまでは、考慮されていなかった。例えば、木製の鉛筆のような軽さや、高級万年筆のような重さは、振動量だけでは表現されない。

本願は上記の課題を解決するためになされたものであり、本願の一態様に係る情報処理システムは、入力デバイスに作用する圧力と前記入力デバイスの移動状態を示す入力情報を取得する入力情報取得部と、前記入力情報に基づいて、振動源から取得される振動源信号の振動特性を制御する振動制御部と、を備え、前記振動制御部は、前記移動状態を示す速度を遅延させた遅延速度を用いて前記振動特性を制御し、前記入力デバイスは、駆動信号に基づいて振動する振動発生器を備え、前記駆動信号は、前記振動制御部により制御された振動特性を有する振動信号を含む。

上記の情報処理システムにおいて、前記振動源信号の振動特性を制御して得られる振動信号と音声信号を合成して駆動信号を生成するミキサを備えてもよい。

上記の情報処理システムにおいて、前記入力情報に基づいて、音源から取得される音源信号の音響特性を、前記圧力を遅延させずに制御する音声制御部を備え、前記ミキサは、前記振動信号と前記音源信号の音響特性を制御して得られる音声信号を合成して前記駆動信号を生成してもよい。

上記の情報処理システムにおいて、前記振動信号の振動特性は、振幅であってもよい。

上記の情報処理システムにおいて、前記情報処理装置は、周囲の音を収音する収音部を備え、前記コントローラは、前記収音部が収音する音の強度に基づいて前記音声成分の強度を定めてもよい。

本願の第２態様に係る情報処理装置は、入力デバイスに作用する圧力と前記入力デバイスの移動状態を示す入力情報を取得する入力情報取得部と、前記入力情報に基づいて、振動源から取得される振動源信号の振動特性を制御して振動信号を生成する振動制御部と、前記振動信号を含む駆動信号を前記入力デバイスに出力する通信部と、を備え、前記振動制御部は、前記移動状態を示す速度を遅延させた遅延速度を用いて前記振動特性を制御する。

本願の第３態様に係る制御方法は、情報処理装置と入力デバイスを備える情報処理システムにおける制御方法であって、前記入力デバイスは、振動信号を含む駆動信号に基づいて振動する振動発生器を備え、前記情報処理装置または前記入力デバイスは、前記入力デバイスに作用する圧力と前記入力デバイスの移動状態を示す入力情報を取得し、前記入力情報に基づいて、振動源から取得される振動源信号の振動特性を制御して振動信号を生成し、前記振動特性の制御において、前記移動状態を示す速度を遅延させた遅延速度を用いる。

本願の実施形態によれば、入力デバイスの重みを表現して、使用感を向上することができる。

第１実施形態に係る情報処理システムの基本構成例を示す概略ブロック図である。 第１実施形態に係る情報処理システムのハードウェア構成例を示すブロック図である。 第１実施形態に係る情報処理システムの機能構成例を示すブロック図である。 比較例における入力デバイスの振幅変化を例示する説明図である。 第１実施形態における入力デバイスの振幅変化を例示する説明図である。 第２実施形態に係る情報処理システムの概要構成例を示す概略ブロック図である。 第２実施形態に係る情報処理システムの機能構成例を示すブロック図である。 第１変形例に係る機能構成例を示すブロック図である。 第２変形例に係る機能構成例を示すブロック図である。

＜第１実施形態＞
以下、本願の実施形態について、図面を参照して説明する。まず、第１実施形態に係る情報処理システムＳ１の概要について説明する。図１は、本実施形態に係る情報処理システムＳ１の基本構成例を示す概略ブロック図である。情報処理システムＳ１は、情報処理装置１と入力デバイス３０を備える。入力デバイス３０は、触覚提示機能を有するデジタルペンである。デジタルペンは、ペン形状を有する操作媒体であり、筆記デバイスとしての機能を有する。本願では、デジタルペンを、単に「ペン」と呼ぶことがある。
情報処理装置１には、タッチセンサ２２が備わる。タッチセンサ２２は、各種の物体との接触により生じる圧力分布を検出する圧力センサを備える。検出される圧力分布は、入力デバイス３０に作用する圧力を示す。圧力センサは、静電容量方式、抵抗膜方式、などいずれの方式に基づくものであってもよい。情報処理装置１は、入力デバイス３０と無線で各種のデータを出力可能に接続する。

情報処理装置１は、入力情報取得部１０１、振動制御部１１０、および、振動源６２を備える。
入力情報取得部１０１は、タッチセンサ２２から入力される検出情報に基づいて入力デバイス３０の使用状態を示す入力情報を取得する。入力情報取得部１０１は、圧力検出部１０１ｐと移動速度検出部１０１ｖとを備える。
圧力検出部１０１ｐは、入力デバイス３０から入力される検出情報を所定周期ごとに取得し（サンプリング）、検出情報に示される圧力分布をなす位置ごとの圧力の代表値（例えば、最大値）を圧力として検出する。圧力検出部１０１ｐは、検出した圧力を振動制御部１１０に出力する。

移動速度検出部１０１ｖは、入力デバイス３０から入力される検出情報を所定周期ごとに取得し、検出情報に示される圧力分布から入力デバイス３０との接触位置の代表点（例えば、重心、圧力の代表値を）をデバイスとの接触位置として特定する。移動速度検出部１０１ｖは、最新のサンプル（以下、「現サンプル」と呼ぶことがある）の直前のサンプル（以下、「前サンプル」と呼ぶことがある）における接触位置から現サンプルにおける接触位置までの変位とサンプリング周期に基づいて移動速度を算出する。移動速度検出部１０１ｖは、算出した移動速度を振動制御部１１０に出力する。

振動制御部１１０は、入力情報取得部１０１から入力される入力情報に基づいて振動源６２から出力される振動源信号の振動特性を制御する。振動制御部１１０は、遅延部１１０ｄと利得設定部１１０ｇとを備える。
遅延部１１０ｄは、移動速度検出部１０１ｖから入力される移動速度を所定の遅延量だけ遅延させる。遅延量は、典型的には、２０～５０ｍｓ程度である。遅延部１１０ｄは、遅延させた移動速度を利得設定部１１０ｇに出力する。

利得設定部１１０ｇには、圧力検出部１０１ｐから圧力が入力され、遅延部１１０ｄから移動速度が入力される。利得設定部１１０ｇは、利得設定情報を用いて、入力される圧力と移動速度に基づいて振動源信号に対する利得を定める。利得設定部１１０ｇには、圧力ならびに移動速度と利得との関係を示す利得設定情報を予め設定しておく。利得設定情報は、情報テーブル、演算手順のいずれの形式を有していてもよい。利得設定情報には、例えば、圧力が高いほど、または、移動速度が高いほど、より大きい利得との関係を与える情報が示される。利得設定部１１０ｇは、定めた利得をアンプ３４に出力する。
振動源６２は、サンプルごとの振幅の時系列を示す振動信号を生成し、生成した振動信号をアンプ３４に出力する。

入力デバイス３０は、アンプ３４と振動発生器３５を備える。
アンプ３４は、振動源６２から入力される振動信号に対して、利得設定部１１０ｇから入力される利得に従って振動信号の振幅を増幅する。アンプ３４ｖは、振幅を増幅して得られる振動信号を駆動信号として振動発生器３５に供給する。
振動発生器３５は、アンプ３４から供給される駆動信号に従って振動を発生させる。振動発生器３５は、アクチュエータを含んで構成される。

ここで、図４に例示されるように筆記もしくは描画（本願では、「筆記等」と総称することがある）により入力デバイス３０を操作する場合を仮定する。筆記等に係る動作では、入力デバイス３０の位置が一定の空間内で反復して折り返される。折り返し点または、その近傍では、周囲よりも移動速度が低下しがちである。図４の例では、当初、入力デバイス３０が左方から右方に向け動作し、その後、折り返しを経て、右方から左方に動作する。入力デバイス３０の速度は、折り返し点に向かう段階で減速し、折り返し点を超えると加速する。入力デバイス３０の塗りつぶしの濃淡は移動速度を示す。濃い塗りつぶしほど、移動速度が高いことを示す。比較例では、移動速度が高くなるほど単に大きくなるように振動信号の振幅を定めていた。かかる状況では、折り返し点において入力デバイス３０に生じる振動の強度が極小となる。

これに対し、本実施形態では、入力デバイス３０の移動よりも遅延した移動速度に応じて振動信号の振幅が定まる。図５に例示されるように、入力デバイス３０が折り返し点を通過する段階では、現実の移動速度より高い移動速度に応じた強度の高い振動が生じる。入力デバイス３０を操作するユーザは、本来生じるはずがない強度の高い振動により重量感を錯覚する。入力デバイス３０が折り返し点を通過した後、入力デバイス３０が加速するのに対し、減速に伴い振幅が減少する。ユーザは、移動速度が高い段階では、入力デバイス３０の移動に対し注意を払い、振幅強度の低下に気づきにくくなりがちである。よって、ユーザは入力デバイス３０の操作全体として入力デバイス３０の重量感を感知することができる。

次に、本実施形態に係る情報処理システムＳ１のハードウェア構成例について説明する。図２は、本実施形態に係る情報処理システムＳ１のハードウェア構成例を示すブロック図である。情報処理システムＳ１は、情報処理装置１と、入力デバイス３０とを備える。図示される情報処理装置１は、コンピュータシステムを備える情報端末装置として実現される。情報処理装置１は、パーソナルコンピュータ、携帯電話機、タブレット端末装置などの汎用の情報機器として実現されてもよいし、ハンドヘルド端末装置、キオスク端末装などの専用の情報機器として実現されてもよい。情報処理装置１は、プロセッサ１１と、メインメモリ１２と、フラッシュメモリ１３と、タッチスクリーン２０と、オーディオシステム２４と、マイクロホン２５と、スピーカ２６と、ベースバンドチップ２７と、第２通信部２８と、無線通信部２９とを備える。

プロセッサ１１は、情報処理装置１全体の機能を制御する。プロセッサ１１として、例えば、１個以上のＣＰＵ（Central Processing Unit）が用いられる。プロセッサ１１は、所定のプログラムを実行し、メインメモリ１２と、その他のハードウェアと協働し、制御部１０（図３）の機能を奏するコンピュータシステムを構成する。後述するように、制御部１０は、入力情報取得部１０１と振動制御部１１０（図１、図３）を備える。

メインメモリ１２は、プロセッサ１１の作業領域、即ち、実行プログラム、各種設定データの読み込み領域、プログラムの実行により取得した処理データの書き込み領域として利用される書き込み可能メモリである。メインメモリ１２は、例えば、複数個のＤＲＡＭ（Dynamic Random Access Memory）チップを含んで構成される。実行プログラムには、ＯＳ、周辺機器等を制御するための各種デバイスドライバ、各種サービス／ユーティリティ、アプリケーションプログラム（本願では、「アプリ」と呼ぶことがある）、などが含まれる。

フラッシュメモリ１３には、予め各種のプログラムならびに各種のデータを記憶させておく。
表示部２１は、プロセッサ１１から出力される表示データに基づく各種の表示画面を表示する。表示部２１は、例えば、液晶ディスプレイ、有機エレクトロルミネッセンスディスプレイなどのいずれであってもよい。

タッチセンサ２２は、接触検出部２２１と、デバイス検出部２２２とを備える。
接触検出部２２１は、表示画面に接触した物体（本願では、主に入力デバイス３０）と、その接触位置を検出する。接触検出部２２１は、表示画面に接触した物体の接触圧力を検出する。接触検出部２２１は、例えば、静電容量圧力センサを含んで構成される。接触検出部２２１は、接触した物体の傾き、即ち、ペン角度を検出してもよい。接触検出部２２１が３軸の圧力センサである場合には、個々の軸方向の圧力に対する方向余弦を用いてペン角度を特定することができる。

デバイス検出部２２２は、接触には至っていないが、自部に接近した入力デバイス３０とその位置を接近位置として検出してもよい。デバイス検出部２２２は、例えば、電磁誘導センサを備える。電磁誘導センサは、接近により、入力デバイス３０の共振回路ＬＣ１（後述）に生じる交流の誘導磁場を検出する。電磁誘導センサは、その共振周波数における検出した磁場の大きさが一定値を超える位置が存在するか否かにより、入力デバイス３０の接近の有無を検出することができる。電磁誘導センサは、検出した磁場の大きさが一定値を超える位置を入力デバイス３０の接近位置として特定することができる。

オーディオシステム２４は、音声信号に対する処理を実行可能とする。音声信号に対する処理には、入力、出力、記録、再生、符号化、および、復号などが含まれる。オーディオシステム２４は、例えば、オーディオＩＣ（Integrated Circuit）を備える。オーディオシステム２４には、マイクロホン２５とスピーカ２６が接続されている。オーディオシステム２４には、プロセッサ１１、マイクロホン２５またはベースバンドチップ２７から音声信号が入力されうる。オーディオシステム２４は、自部に記録した音声信号を読み出す。オーディオシステム２４は、取得した音声信号をスピーカ２６またはプロセッサ１１に出力することができる。プロセッサ１１に出力された音声信号は、無線通信部２９を経由して入力デバイス３０に出力されうる。

マイクロホン２５は、自部に到来する音を収音し、収音された音を表す音声信号を生成する。マイクロホン２５は、生成した音声信号をオーディオシステム２４に出力する。
スピーカ２６は、オーディオシステム２４から入力される音声信号に基づいて音を提示する。

ベースバンドチップ２７は、第２通信部２８を用いた通信を制御するための専用ＩＣである。ベースバンドチップ２７は、例えば、４Ｇ（第４世代無線通信システム）、５Ｇ（第５世代無線通信システム）などの公衆無線通信システム、ＩＥＥＥ８０２．１１に規定された構内無線通信ネットワークなどを用いた通信を実現する。ベースバンドチップ２７は、プロセッサ１１からの制御に従い、第２通信部２８を用いて通信ネットワークを経由した他の機器と各種のデータを送受信可能に接続し、各種のデータを送受信する。

第２通信部２８は、無線通信ネットワークと接続するための無線通信モジュールである。第２通信部２８は、電波を送受信するアンテナを備える。
無線通信部２９は、入力デバイス３０と無線データを送受信するための無線通信モジュールである。無線通信部２９は、通信方式として、例えば、ＩＥＥＥ８０２．１５．１に規定された無線ＰＡＮ（Personal Area Network）方式を用いることができる。

入力デバイス３０は、径よりも長さの方が大きい細長の形状を有する操作媒体である。入力デバイス３０は、無線通信部３１と、ＭＣＵ３２と、ＤＡＣ３３と、アンプ３４と、振動発生器３５と、共振回路ＬＣ１とを備える。
無線通信部３１は、情報処理装置１の無線通信部２９と無線データを送受信するための無線通信モジュールである。

ＭＣＵ（Micro Controller Unit）３２は、入力デバイス３０の機能を統括的に制御する。ＭＣＵ３２は、プロセッサと、ＲＯＭやＲＡＭなどのメモリと、各種の入出力インタフェースを備える。ＭＣＵ３２は、情報処理装置１とは独立に稼働する。
ＭＣＵ３２には、情報処理装置１から無線通信部３１を用いて振動源信号と振動制御情報が入力される。振動制御情報には、振動制御部１１０において設定された利得を示す情報が含まれる。ＭＣＵ３２は、振動制御情報で通知される利得をアンプ３４に設定する。
ＭＣＵ３２は、自部に入力された振動源信号をＤＡＣ３３に出力する。

ＤＡＣ（Digital-to-Analog Converter）３３は、ＭＣＵ３２から入力されるディジタルの振動源信号をアナログの振動源信号に変換する。ＤＡＣ３３は、変換されたアナログの振動源信号をアンプ３４に出力する。
アンプ（amplifier）３４は、ＤＡＣ３３から入力される振動源信号の振幅を調整し、振幅を調整して得られる振動信号を駆動信号として振動発生器３５に出力する。
振動発生器３５は、アンプ３４から入力される駆動信号に従って振動を発生するアクチュエータである。振動発生器３５は、例えば、ピエゾ素子などの圧電振動子を備える。

共振回路ＬＣ１は、一定の共振周波数で共振する電流を生ずる電気回路である。共振回路ＬＣ１は、例えば、コイルとキャパシタを直列に接続して構成される。共振回路ＬＣ１は、自身が発生した交流電流により、その共振周波数で極性が変動する磁場を発生させる。発生した磁場によりタッチセンサ２２のデバイス検出部２２２により入力デバイス３０の接近が検出される。共振回路ＬＣ１は、ＤＡＣ３３、アンプ３４および振動発生器３５から電気的に絶縁される。

次に、本実施形態に係る情報処理システムＳ１の機能構成例について説明する。図３は、本実施形態に係る情報処理システムＳ１の機能構成例を示すブロック図である。情報処理システムＳ１は、情報処理装置１と、入力デバイス３０とを備える。
情報処理装置１は、制御部１０と、タッチセンサ２２と、無線通信部２９とを備える。タッチセンサ２２は、入力デバイス３０の入力動作として、表示画面への接触または一定距離内への接近（ホバリング）を検出するとともに、その位置を特定する。タッチセンサ２２は、検出した接触または接近、および、その位置を示す検出情報を生成し、生成した検出情報を制御部１０に出力する。タッチセンサ２２は、入力デバイス３０と接触するとき、接触による圧力分布を検出し、検出した圧力分布の情報を検出情報に含めて制御部１０に出力する。

制御部１０は、情報処理装置１の機能全体を制御する。制御部１０は、表示処理部１０２と、入力情報取得部１０１と、振動制御部１１０と、振動源６２と、を備える。
入力情報取得部１０１は、上記のように、タッチセンサ２２から入力される検出情報に基づいて入力デバイス３０の使用状態を示す入力情報を取得する。入力情報取得部１０１は、圧力検出部１０１ｐと移動速度検出部１０１ｖの機能を有する。圧力検出部１０１ｐと移動速度検出部１０１ｖの機能に関しては、特に断らない限り図１の説明を援用する。移動速度検出部１０１ｖは、タッチセンサ２２から入力される検出情報に基づいてサンプリング周期ごとに取得される接触位置を表示処理部１０２に通知する。
表示処理部１０２は、入力情報取得部１０１から入力されるサンプリング周期ごとの接触位置からなる接触位置の時系列に基づいて移動軌跡を生成する。表示処理部１０２は、生成した移動軌跡を示す表示データをタッチスクリーン２０の表示部２１に出力する。なお、入力情報取得部１０１の機能は、例えば、タッチセンサ２２のデバイスドライバを実行して実現される。

振動制御部１１０は、上記のように、入力情報取得部１０１から入力される入力情報に基づいて振動源６２から出力される振動源信号の振幅を制御する。振動制御部１１０は、遅延部１１０ｄと利得設定部１１０ｇの機能を有する。遅延部１１０ｄと利得設定部１１０ｇの機能に関しては、特に断らない限り図１の説明を援用する。利得設定部１１０ｇは、圧力と遅延した移動速度に基づいて振動信号に対する利得を定める。利得設定部１１０ｇは、定めた利得を示す振動制御情報を、無線通信部２９を用いて入力デバイス３０に無線で出力する。

振動源６２は、サンプリング時刻ごとの振幅の時系列を示す振動源信号を生成し、無線通信部２９を用いて生成した振動源信号を入力デバイス３０に出力する。
無線通信部２９は、所定の通信方式を用いて、入力デバイス３０と無線で各種のデータを送受信する。

次に、入力デバイス３０の機能構成例について説明する。入力デバイス３０は、無線通信部３１と、振動発生器３５と、デバイス制御部５０と、を備える。
無線通信部３１は、所定の通信方式を用いて、情報処理装置１と無線で各種のデータを送受信する。
デバイス制御部５０は、入力デバイス３０の機能を制御する。デバイス制御部５０には、例えば、無線通信部３１を用いて振動源信号と振動制御情報が情報処理装置１から入力される。デバイス制御部５０は、振動源信号の振幅を振動制御情報で指示される利得に基づいて調整し、振幅が調整された振動信号を駆動信号として振動発生器３５に出力する。デバイス制御部５０の機能は、例えば、ＭＣＵ３２が所定のファームウェアを実行し、ＤＡＣ３３、アンプ３４、その他のハードウェアと協働して実現される。
振動発生器３５は、デバイス制御部５０から供給される駆動信号に従って振動する。振動発生器３５に生ずる振動は、入力デバイス３０の他の部分を振動させる。

＜第２実施形態＞
次に、第２実施形態について、第１実施形態との差異点を主として説明する。第１実施形態と共通の機能、構成については、共通の符号を付し、特に断らない限り、その説明を援用する。第１実施形態では、振動成分が含まれる駆動信号に従って振動発生器３５が振動する場合を例にした。これに対し、本実施形態では、振動発生器３５は振動成分と音声成分がさらに含まれる駆動信号に従って振動する場合を例示する。音声成分による入力デバイス３０が振動し、周囲の空気を振動させて音声を発生させる。

本願では、振動成分は、約４００Ｈｚ以下の低域成分が主となるのに対し、音声成分は、約２００Ｈｚ以上の高域成分が主となる。一般に人間の聴覚特性によれば、５００Ｈｚ－２ｋＨｚ帯域に対する感度が他の周波数帯域に対する感度より高く、より低い周波数帯域では、感度が低下する。人間の触覚特性によれば、１０－１００Ｈｚ帯域に対する感度が他の周波数帯域に対する感度より高い周波数帯域では感度が低下し、５００Ｈｚ以上の周波数では、ほとんど振動が知覚されない。

次に、本実施形態に係る情報処理システムＳ１の概要について説明する。図６は、本実施形態に係る情報処理システムＳ１の基本構成例を示す概略ブロック図である。情報処理装置１は、入力情報取得部１０１、振動制御部１１０、および、振動源６２の他、音声制御部１１２と音源６４を備える。入力デバイス３０は、アンプ３４ｖと振動発生器３５の他、アンプ３４ａとミキサ３７を備える。

音声制御部１１２は、入力情報取得部１０１から入力される入力情報に基づいて、音源信号の音響特性を制御する。音声制御部１１２には、圧力検出部１０１ｐから圧力が入力され、移動速度検出部１０１ｖから移動速度が入力される。音声制御部１１２は、音声特性設定情報を用いて、入力される圧力と移動速度に基づいて音源信号に対する音響特性の例として、利得を定める。音声制御部１１２には、圧力ならびに移動速度と利得との関係を示す音響特性設定情報を予め設定しておく。音響特性設定情報は、情報テーブル、演算手順のいずれの形式を有していてもよい。音響特性設定情報には、例えば、圧力が高いほど、または、移動速度が高いほど、より大きい利得との関係を与える情報が示される。音声制御部１１２は、定めた利得をアンプ３４ａに出力する。音声制御部１１２は、振動制御部１１０とは異なり、利得を定める際、移動速度検出部１０１ｖから入力される移動速度を遅延せずに参照する。

音源６４は、サンプルごとの音声の振幅の時系列を示す音源信号を生成し、生成し音源信号をアンプ３４ａに出力する。
アンプ３４ａは、音源６４から入力される音源信号の振幅を、音声制御部１１２により設定される利得に基づいて調整し、得られた音声信号をミキサ３７に出力する。

本実施形態に係るアンプ３４ｖの機能は、第１実施形態に係るアンプ３４の機能に相当する。即ち、アンプ３４ｖは、振動源６２から入力される振動源信号の振幅を調整して得られる振動信号をミキサ３７に出力する。
ミキサ３７は、アンプ３４ａから入力される音声信号とアンプ３４ｖから入力される振動信号とを加算（ミキシング）する。ミキサ３７は、加算して得られる駆動信号を振動発生器３５に供給する。

次に、本実施形態に係る情報処理システムＳ１の機能構成例について説明する。図７は、本実施形態に係る情報処理システムＳ１の機能構成例を示すブロック図である。情報処理システムＳ１において、情報処理装置１の制御部１０は入力情報取得部１０１、表示処理部１０２、振動制御部１１０および振動源６２の他、振動制御部１１０と音源６４を備える。入力デバイス３０のデバイス制御部５０は、アンプ３４ｖ、３４ａとミキサ３７の機能を有する（図示せず）。

上記の構成により、入力デバイス３０の現実の移動速度よりも遅れた移動速度に対応する強度を有する振動が生じる。他方、入力デバイス３０において、移動速度に対応する音量を有する音声が発生する、よって、音声に対する違和感をもたらさずに、振動による重量感を入力デバイス３０のユーザに与えることができる。

＜変形例＞
上記の実施形態は、変形して実現されてもよい。図８に例示されるように、制御部１０は、アンプ６６とミキサ６８を備えてもよい。アンプ６６は、アンプ３４ｖ、３４ａと同様の機能を有する。
即ち、アンプ６６は、振動源６２から入力される振動源信号の振幅を、振動制御部１１０により設定される利得に従って調整し、得られる振動信号をミキサ６８に出力する。アンプ６６は、音源６４から入力される音源信号の振幅を、音声制御部１１２により設定される利得に従って調整し、得られる音声信号をミキサ６８に出力する。
ミキサ６８は、アンプ６６から入力される振動信号と音声信号を加算して駆動信号を生成する。ミキサ６８は、無線通信部２９を用いて生成した駆動信号を入力デバイス３０に出力する。

入力デバイス３０のデバイス制御部５０は、無線通信部３１を用いて情報処理装置１から入力される駆動信号を振動発生器３５に供給する。振動発生器３５は、デバイス制御部５０から入力される駆動信号に従って振動を発生する。

入力デバイス３０では、アンプ３４ｖ、３４ａおよびミキサ３７の機能が省略されてもよい。また、入力デバイス３０から音声を提示しない場合には、情報処理装置１において音源６４およびミキサ６８が省略されてもよい。その場合、アンプ６６において振幅が調整された振動信号が入力デバイス３０に出力される。

上記の説明では、情報処理装置１が、振動制御部１１０と振動源６２の機能を備える場合を主としたが、これには限られない。入力デバイス３０が、振動制御部１１０と振動源６２と同様の機能を備え、これらが情報処理装置１において省略されてもよい。図９の例では、入力デバイス３０のデバイス制御部５０は、振動制御部５１０と振動源５６２を備える。振動制御部５１０と振動源５６２は、それぞれ振動制御部１１０と振動源６２と同様の機能を備える。

入力情報取得部１０１は、取得した入力情報を入力デバイス３０に無線通信部２９を用いて出力する。
入力デバイス３０の振動制御部５１０は、情報処理装置１から無線通信部３１を用いて入力される入力情報に基づいて振動源５６２から出力される振動源信号の振動特性を制御する。振動制御部５１０は、振動特性を制御して得られる振動信号を駆動信号として振動発生器３５に供給する。

デバイス制御部５０は、さらに音源、音声制御部とミキサを備えてもよい（図示せず）。音声制御部は、情報処理装置１から入力される入力情報に基づいて音源から出力される音源信号の音響特性を制御する。音声制御部は、音響特性を制御して得られる音声信号をミキサに出力する。また、振動制御部５１０は、振動源信号の振動特性を制御して得られる振動信号をミキサに出力する。ミキサは、振動制御部５１０から入力される振動信号と音声制御部から入力される音声信号を加算して駆動信号を生成する。ミキサは、生成した駆動信号を振動発生器３５に出力する。

なお、上記の説明では、音源信号の音響特性を入力情報に基づいて制御する場合を主としたが、これには限られない。音響特性が入力情報に基づいて制御されずに、音源信号をそのまま音声信号として振動信号と加算して得られる駆動信号が振動発生器３５に供給されてもよい。入力情報に基づく制御の要否は、音源の種類により予め設定されてもよい。音源の種類が、筆記により生じる動作音である場合には、入力情報に基づく制御が行われてもよい。かかる動作音は、物理的な筆記具と筆記媒体との摩擦音、打撃音、その他、接触により生ずる音を模擬したものであってもよい。物理的な筆記具として、ペン、鉛筆、毛筆、チョークなど、筆記媒体として、紙、プラスチックシート、黒板など、いずれが適用されてもよい。
その他の種類の音源、例えば、発話音声、音楽、筆記等によらない物音などに対しては、入力情報に基づく音響特性の制御を不要としてもよい。

以上に説明したように、上記の情報処理システムＳ１は、入力デバイス３０に作用する圧力と入力デバイスの移動状態を示す入力情報を取得する入力情報取得部１０１と、入力情報に基づいて、振動源６２から取得される振動源信号の振動特性を制御する振動制御部１１０と、を備える。振動制御部１１０は、移動状態を示す速度を遅延させた遅延速度を用いて振動源信号の振動特性を制御し、入力デバイス３０は、駆動信号に基づいて振動する振動発生器３５を備え、駆動信号は、振動制御部１１０により制御された振動特性を有する振動信号を含む。

この構成によれば、入力デバイス３０の移動よりも遅延した移動速度に応じて振動信号の振幅が制御される。操作により入力デバイス３０の位置の折り返しにより、移動速度が低下すると、より高い移動速度に応じた強度の高い振動が生じる。そのため、入力デバイス３０を操作するユーザは、強度の高い振動により重量感を知覚することができる。

以上、この発明の実施形態について図面を参照して詳述してきたが、具体的な構成は上述の実施形態に限られるものではなく、この発明の要旨を逸脱しない範囲の設計等も含まれる。上述の実施形態において説明した各構成は、任意に組み合わせることができる。

Ｓ１…情報処理システム、１…情報処理装置、１０…制御部、１１…プロセッサ、１２…メインメモリ、１３…フラッシュメモリ、２０…タッチスクリーン、２１…表示部、２２…タッチセンサ、２４…オーディオシステム、２５…マイクロホン、２６…スピーカ、２７…ベースバンドチップ、２８…第２通信部、２９、３１…無線通信部、３０…入力デバイス、３２…ＭＣＵ、３３…ＤＡＣ、３４、３４ａ、３４ｖ、６６…アンプ、３５…振動発生器、３７、６８…ミキサ、４０…記憶部、５０…デバイス制御部、５５…振動部、６２、５６２…振動源、６４…音源、１０１…入力情報取得部、１０１ｐ…圧力検出部、１０１ｖ…移動速度検出部、１０２…表示処理部、１０３…音声設定部、１０４…音声処理部、１１０、５１０…振動制御部、１１０ｄ…遅延部、１１０ｇ…利得設定部、２２１…接触検出部、２２２…デバイス検出部

Claims (6)

1. 入力デバイスに作用する圧力と前記入力デバイスの移動状態を示す入力情報を取得する入力情報取得部と、
   前記入力情報に基づいて、振動源から取得される振動源信号の振動特性を制御する振動制御部と、を備え、
   前記振動制御部は、
   前記移動状態を示す速度を遅延させた遅延速度を用いて前記振動特性を制御し、
   前記入力デバイスは、駆動信号に基づいて振動する振動発生器を備え、
   前記駆動信号は、前記振動制御部により制御された振動特性を有する振動信号を含む 情報処理システム。
2. 前記振動源信号の振動特性を制御して得られる振動信号と音声信号を合成して駆動信号を生成するミキサを備える
   請求項１に記載の情報処理システム。
3. 前記入力情報に基づいて、音源から取得される音源信号の音響特性を前記速度を遅延させずに制御する音声制御部を備え、
   前記ミキサは、前記振動信号と前記音源信号の音響特性を制御して得られる音声信号を合成して前記駆動信号を生成する
   請求項２に記載の情報処理システム。
4. 前記振動信号の振動特性は、振幅である
   請求項１に記載の情報処理システム。
5. 入力デバイスに作用する圧力と前記入力デバイスの移動状態を示す入力情報を取得する入力情報取得部と、
   前記入力情報に基づいて、振動源から取得される振動源信号の振動特性を制御して振動信号を生成する振動制御部と、
   前記振動信号を含む駆動信号を前記入力デバイスに出力する通信部と、を備え、
   前記振動制御部は、
   前記移動状態を示す速度を遅延させた遅延速度を用いて前記振動特性を制御する
   情報処理装置。
6. 情報処理装置と入力デバイスを備える情報処理システムにおける制御方法であって、 前記入力デバイスは、振動信号を含む駆動信号に基づいて振動する振動発生器を備え、 前記情報処理装置または前記入力デバイスは、
   前記入力デバイスに作用する圧力と前記入力デバイスの移動状態を示す入力情報を取得し、
   前記入力情報に基づいて、振動源から取得される振動源信号の振動特性を制御して振動信号を生成し、
   前記振動特性の制御において、前記移動状態を示す速度を遅延させた遅延速度を用いる 制御方法。

Images