JP5937831B2 - 端末装置、端末装置の制御方法及び端末装置の制御プログラム - Google Patents

Description

本発明は、例えば通信ネットワーク上でメッセージをやり取りするものに関し、詳細にはワンモーションのタッチ操作のみでメッセージの入力から送信まで完了する仕組みに関するものである。

従来から、例えば軽い挨拶や単なる情報を伝える場合には、電子メールでメッセージを送ることが多い。電子メールを送るには、ユーザは携帯端末に付属のテンキーやタッチパネルを操作して、メッセージの入力から送り先の呼び出し及び送信まで一つ一つ順番に操作しなければならず手間がかかる反面、画面に表示される文字のみではユーザの感情が伝わり難いという欠点があった。さらに携帯端末を操作し難い場所にいる場合には、上述したような操作が煩わしく、メッセージを送る機会を損失する恐れがあった。

このように、利便性の高い電子メールでも伝えたいメッセージを容易に送れなかったり感情が伝わり切らなかったりすることがある。したがって、より簡単な操作で入力や送信をするばかりでなく、感情を備えたメッセージを振動として伝達することが注目されてきた。

そこで伝えたいメッセージを振動で表現したい場合、ディスプレイ上の所定のキーを押した後に携帯電話を振ると、この携帯電話に搭載した加速度センサが加速度を測定し、振り終わった後に再び所定のキーを押すとこの加速度が記憶される発想（例えば特許文献１参照。）が提案されている。

また携帯電話に入力した音声が音声信号に変換され、この音声信号から判定された感情に対応した振動が、音声信号に基づいて出力される音と同時に、振動手段を通じて出力する発想（例えば特許文献２参照。）が提案されている。

さらに音声の周波数や振幅を分析し、これにより得られた周波数や振幅を所定の変換処理により変換し、変換処理後に周波数と振幅により振動体が振動する発想（例えば特許文献３参照。）が提案されている。

特開２００６−０１４１４１号公報 特開２００６−０４７６４０号公報 特開平１１−１９６４９７号公報

しかしながら上述した特許文献１の振動によるメッセージ伝達は、携帯電話を振って加速度を測定する前後においてキー操作が発生するため、手間がかかるばかりでなく操作ミスが発生し易い。

さらに特許文献２及び３で開示されている発明では、感情を込めた音声でなければメッセージ性のある振動に変換することができない。すなわち同じ言葉を発しても、感情に変化が生じると、この変化が音声信号の波形や振幅に如実に反映されてしまうため、違った感情が振動として伝達されてしまう恐れがある。したがって、音声の認識精度や振動への変換精度が高くなければコミュニケーションとして成立し難い。

理想的なコミュニケーションとは、メッセージのキャッチボールを繰り返すことであり、このキャッチボールを実現するには端末装置の簡易な操作性が重要になってくる。しかしながら従来技術においては、音声や振動等のメッセージを入力する工程とこのメッセージの送信先を選択する工程とをそれぞれ別のモーションで行わなければならない。このため、感情を伝えたいという想いを素早くメッセージという形式に変換し難く、送り先にこのメッセージを送信するころには、この感情が薄れてしまうことがある。したがって円滑なコミュニケーションを図り難い。

本発明が解決しようとする課題は、端末装置を用いて通信ネットワーク上でメッセージを伝達するサービスにおいて、メッセージの入力から送信までの操作をユーザに手間なく行わせて気軽なコミュニケーションを喚起することである。

上記課題を解決するために、本発明は、メッセージの入力から送信までを端末装置に対する長押し操作で行わせるものである。

本発明の第１態様に係る「端末装置」は、メッセージの送信先である他の端末装置と該送信先における該メッセージの出力方法とを指定する長押し操作が検知手段により検知されている間に、該メッセージの作成に資するメッセージ用データを取得する取得手段と、前記長押し操作が前記検知手段により検知されなくなった後に、前記取得手段により取得されたメッセージ用データ又はこれに基づいて作成されるメッセージを、複数の送信先の候補にそれぞれ対応する複数のイメージ情報の表示領域のうち該長押し操作の操作対象たる表示領域に対応する送信先に向けて供給する供給手段と、を具備する。
本発明の第１態様に係る「端末装置の制御方法」は、メッセージの送信先である他の端末装置と該送信先における該メッセージの出力方法とを指定する長押し操作が検知手段により検知されている間に、該メッセージの作成に資するメッセージ用データを取得する取得ステップと、前記長押し操作が前記検知手段により検知されなくなった後に、前記取得ステップにおいて取得されたメッセージ用データ又はこれに基づいて作成されるメッセージを、複数の送信先の候補にそれぞれ対応する複数のイメージ情報の表示領域のうち該長押し操作の操作対象たる表示領域に対応する送信先に向けて供給する供給ステップと、を含む。
本発明の第１態様に係る「制御プログラム」は、メッセージの送信先である他の端末装置と該送信先における該メッセージの出力方法とを指定する長押し操作が検知手段により検知されている間に、該メッセージの作成に資するメッセージ用データを取得する取得機能と、前記長押し操作が前記検知手段により検知されなくなった後に、前記取得機能により取得されたメッセージ用データ又はこれに基づいて作成されるメッセージを、複数の送信先の候補にそれぞれ対応する複数のイメージ情報の表示領域のうち該長押し操作の操作対象たる表示領域に対応する送信先に向けて供給する供給機能と、を端末装置のコンピュータに実現させる。

本発明の第１態様に係る「端末装置」には、下記の技術的限定を加えてもよい。また、同様の技術的限定を、本発明の第１態様に係る「端末装置の制御方法」及び「制御プログラム」に加えてもよい。
例えば、前記供給手段が、複数の前記出力方法の候補にそれぞれさらに対応する複数のイメージ情報の表示領域のうち前記長押し操作の対象たる表示領域に対応する出力方法に対応付けて、前記メッセージ用データ又は前記メッセージを供給する、という技術的限定を加えてもよい。このとき、前記メッセージの出力方法は、前記送信先に前記メッセージが到達した後に発生し得る所定の事象の発生を条件として決定される前記メッセージの出力タイミングである、という技術的限定をさらに加えてもよい。
また、前記長押し操作は、複数の前記メッセージ用データの入力方法からなる組合せをさらに指定する長押し操作である、という技術的限定を加えてもよい。このとき、前記長押し操作が前記検知手段により検知された際に該長押し操作により指定される前記組合せを構成する複数の入力方法にそれぞれ対応する複数の入力装置をそれぞれオンに切り替えるとともに、前記長押し操作が前記検知手段により検知されなくなった際に前記複数の入力装置をそれぞれオフに切り替える制御手段をさらに具備する、という技術的限定をさらに加えてもよい。

本発明の第２態様に係る「端末装置」は、メッセージの送信先と該メッセージの作成に資するメッセージ用データの入力方法を複数含む組合せとを指定する長押し操作が検知手段により検知されている間に、該メッセージ用データを該複数の入力方法によりそれぞれ取得する取得手段と、前記長押し操作が前記検知手段により検知されなくなった後に、前記取得手段により取得されたメッセージ用データ又はこれに基づいて作成されるメッセージを、複数の送信先の候補にそれぞれ対応する複数のイメージ情報の表示領域のうち該長押し操作の操作対象たる表示領域に対応する送信先に向けて供給する供給手段と、を具備する。
本発明の第２態様に係る「端末装置の制御方法」は、メッセージの送信先と該メッセージの作成に資するメッセージ用データの入力方法を複数含む組合せとを指定する長押し操作が検知手段により検知されている間に、該メッセージ用データを該複数の入力方法によりそれぞれ取得する取得ステップと、前記長押し操作が前記検知手段により検知されなくなった後に、前記取得ステップにおいて取得されたメッセージ用データ又はこれに基づいて作成されるメッセージを、複数の送信先の候補にそれぞれ対応する複数のイメージ情報の表示領域のうち該長押し操作の操作対象たる表示領域に対応する送信先に向けて供給する供給ステップと、を含む。
本発明の第２態様に係る「制御プログラム」は、メッセージの送信先と該メッセージの作成に資するメッセージ用データの入力方法を複数含む組合せとを指定する長押し操作が検知手段により検知されている間に、該メッセージ用データを該複数の入力方法によりそれぞれ取得する取得機能と、前記長押し操作が前記検知手段により検知されなくなった後に、前記取得機能により取得されたメッセージ用データ又はこれに基づいて作成されるメッセージを、複数の送信先の候補にそれぞれ対応する複数のイメージ情報の表示領域のうち該長押し操作の操作対象たる表示領域に対応する送信先に向けて供給する供給機能と、を端末装置のコンピュータに実現させる。

本発明の第２態様に係る「端末装置」には、下記の技術的限定を加えてもよい。また、同様の技術的限定を、本発明の第２態様に係る「端末装置の制御方法」及び「制御プログラム」に加えてもよい。
例えば、前記長押し操作が前記検知手段により検知された際に該長押し操作により指定される前記組合せを構成する複数の入力方法にそれぞれ対応する複数の入力装置をそれぞれオンに切り替えるとともに、前記長押し操作が前記検知手段により検知されなくなった際に前記複数の入力装置をそれぞれオフに切り替える制御手段をさらに具備する、という技術的限定を加えてもよい。

ここで「メッセージ」とは、ワンモーションのタッチ操作（例えば、長押し操作）の間に取得されるメッセージ用データに基づいて作成される、送信対象となるものを意味する。例えばユーザの音声、この音声を認識して文字に変換したテキスト、キーボードで入力したテキスト、端末装置の振動の加速度を測定した振動データ、カメラで撮影した画像データ又は動画データ、ＧＰＳ（Global Positioning System）で計測した位置情報、ウェブページのＵＲＬ（Uniform Resource Locator）、チェック情報が該当する。なお位置情報及びチェック情報は、座標情報、ＵＲＬ、又はテキストで示してもよい。「チェック情報」とは、ＧＰＳで計測した位置情報又は所定のウェブサイト若しくは地図アプリケーションに表示される地域に関連する建屋やランドマークを意味し、例えば、地名、公共施設、神社、寺、空港、駅名、駅の出入口名、公園、野球場、サッカー場、百貨店、スーパーマーケット、ショッピングセンター、アウトレットモール、飲食店、遊園地、映画館に限らず、すべてのスポットが該当する。
また「メッセージ用データ」とは、メッセージの作成に資するデータを意味する。例えば音声データ、テキストデータ、振動データ、画像データ又は動画データ、位置データが該当する。

「端末装置」は、所定のプログラムで構成したアプリケーションをインストールできるもの又は所定のウェブブラウザを通じてインターネットサイトにアクセスできるものを意味し、例えばスマートフォン、携帯電話、タブレットＰＣ及びＰＨＳ等のモバイル機器ばかりでなく、デスクトップ型やノート型のパーソナルコンピュータや通信ネットワークに接続するゲーム機が該当する。

「情報伝達サーバ」は、端末装置や他の外部サーバと通信ネットワークを介してデータの授受を実行するもので、この外部サーバは、例えば友人や知人と通信ネットワークを介してコミュニケーションを行うソーシャル・ネットワーキング・サービスサーバ（以下、「ＳＮＳサーバ」という。）、所定の端末装置を特定するための端末情報を共有するデータベースサーバ、又は所定のデータを記憶するストレージサーバが該当する。

「長押し操作」とは、一定の時間ユーザの指がイメージ情報又はタッチパネル（「検知手段」を構成する要素の一例。）の任意の位置に触れている状態を意味する。なお「一定の時間」は自由に設定可能である。「長押し操作に伴って」とは、例えば長押し操作を開始するタイミングや終了するタイミングが該当する。すなわち、ユーザがイメージ情報等に触れている指を離すことにより、長押し操作は終了する。「長押し操作の間」とは、長押し操作を開始してから終了するまでを意味し、例えば長押し操作の開始後メッセージの記録を開始する前や、記録の終了後このメッセージを送信する前が該当する。

「オブジェクト」とは、端末装置内にあってメッセージをどのように処理するかの判断や指定をするものを意味し、例えば長押し操作が行われたイメージ情報、メッセージの属性、このメッセージの入力方法、このメッセージの送信先、または送信先となった端末装置におけるメッセージの出力方法について判断や指定をする。

「イメージ情報」とは、タッチパネルの画面に表示されるものを意味し、例えばユーザリストに限らず、アイコン、ショートカット、又は所定の画像データが該当する。なおイメージ情報の数は、単数でも複数でもよい。

「メッセージ用データの入力方法」とは、メッセージ用データをどのように入力するか指示するものを意味し、例えばマイクロフォン（「入力装置」を構成する要素の一例。）で音声を取ること、音声を認識してテキストに変換すること、加速度センサ（「入力装置」を構成する要素の一例。）で端末装置の振動を測定すること、内向きまたは外向きのカメラ（「入力装置」を構成する要素の一例。）で画像や動画を撮影すること、ＧＰＳ（「入力装置」を構成する要素の一例。）で位置情報を計測すること、タッチパネルに表示されているウェブページの画面をプリントスクリーンすること、又はこの画面のＵＲＬを認識することが該当する。

「メッセージの送信先」は、例えば情報伝達サーバ、他の端末装置、端末装置内の記憶領域、又は通信ネットワークを介して接続する他のデータベースサーバが該当する。この送信先として、他のユーザの端末装置又は情報伝達サーバが選択された場合、送信されるメッセージには、少なくとも送信先情報が付与される。「送信先情報」は、例えば端末装置を有するユーザ固有のユーザＩＤ、氏名、住所、電話番号、メールアドレス、ＳＮＳのユーザＩＤが該当する。

「メッセージの出力方法」とは、このメッセージをどのタイミングで出力させるか指示するものを意味し、このタイミングは例えば送信先の端末装置がメッセージを受信した直後、この端末装置がメッセージを受信してから一定時間経過後、この端末装置がスリープ状態から復帰した直後（レジュームしたとき）、特定の日時になったとき、特定の場所に到着したとき、この端末が特定の条件を満たしたとき、受信後一定の時間内に所定の条件を満たしたとき、この端末装置を有するユーザとＳＮＳ等で関係を有する他のユーザを含む他人により特定のアクションが発生したときが該当する。「特定のアクション」とは、例えば現在地の変化、業務やプライベートなどの予定の追加や変更、在宅状況の変化、職場などのオフィス内での行動、購買行動、メッセージの投稿が該当する。なお、設定した時間の経過後であっても、例えば端末装置の電源が入っておらずメッセージを受信したことに気づいていない場合は、このメッセージの出力をしなくてもよい。

「音声認識手段」は、例えば通信ネットワークを介して音声を認識しテキストに変換する音声認識サーバと通信するものが該当する。

「端末情報」は、例えば端末装置固有の端末ＩＤ、シリアル番号、又は電話番号が該当する。

本発明によれば、ワンモーションのタッチ操作のみでユーザにメッセージを素早く送信させることができる。

情報伝達システムを実施する場面のイメージ図である。 情報伝達システムのシステム構成図である。 端末装置の機能ブロック図である。 メッセージの入力から送信までのタイミングフローチャートである。 メッセージの受信から出力までのフローチャートである。

以下図１〜図５を参照しつつ、本発明の実施形態における情報伝達システムについて説明する。図１は、この情報伝達システムを使用してメッセージを伝える場面を示す図である。

さて図１に示すように、ユーザＡは端末装置１（本発明に係る「端末装置」の一例。）のタッチパネル（「検知手段」を構成する要素の一例。）を操作してユーザリストを呼び出し、このタッチパネルの画面に表示されるユーザリストのうちメッセージを送りたいユーザＢに対して長押し操作（「ワンモーションのタッチ操作」の一例。）を行う。この長押し操作の間に、オブジェクトに従って端末装置１はメッセージとしてテキスト及び振動データを取得し記録する。すなわちユーザＡは、ユーザリストに指を当てたまま端末装置１に向かって音声を発すると共に、上下方向に振って振動を起こす。そしてユーザＡが指を離して長押し操作を終了すると、端末装置１はテキスト及び振動データを情報伝達サーバ２に送信（「供給」の一形態。）する。情報伝達サーバ２は、これらのメッセージに対応付けられたユーザＢの送信先情報をキーにしてこれらのメッセージをデータ記憶手段に記憶すると共に、この送信先情報に関連付く端末情報を有するユーザＢの端末装置１（「送信先」の一例。）に、メッセージを受信した旨の通知を送信する。この通知を受けたユーザＢの端末装置１からの求めに応じて、情報伝達サーバ２から端末装置１に対してメッセージが送信される。

次に、図２を用いて、この情報伝達システムの基本構成について説明する。

図２に示すように、この情報伝達システムは、メッセージを送信する端末装置１と、この端末装置と通信ネットワークＮを介して接続する情報伝達サーバ２とで構成されている。

端末装置１は、長押し操作が行われるタッチパネル１１ａ、この長押し操作を検知する画面接触検知手段１１ｂ、この画面接触検知手段が検知する長押し操作に伴ってメッセージの記録及び送信を制御するデータ記録制御手段１２、情報伝達サーバ２に対してこのメッセージの授受を制御するデータ送受信制御手段１３、音声を入力するマイクロフォン１４ａ、この音声を認識してテキストに変換する音声認識手段１４ｂ、振動の加速度を測定する加速度センサ１５ａ、この加速度をデジタルな振動データに変換する振動エンコーダ１５ｂ、この振動データを復元する振動デコーダ１５ｃ、及びこの振動デコーダが復元したデータに基づいて振動する振動デバイス１５ｄを搭載している。なお、図示しない静止画や動画を撮影できるカメラや位置情報を把握するＧＰＳ機能を搭載していてもよい。

情報伝達サーバ２は、端末装置１から受信したメッセージを制御するサーバ制御手段２１、端末装置１に対してこのメッセージの授受を制御するデータ送受信制御手段２２、複数のユーザに付与された送信先情報を記憶する送信先情報ＤＢ２３、この送信先情報と関連付けて端末装置に付与された端末情報を記憶する端末情報ＤＢ２４、及びこの端末装置から受信したこのメッセージを記憶するメッセージＤＢ２５を備えている。

ここで図３を用いながら、端末装置１及びこの端末装置が搭載する各部の詳細を説明する。

図３に示すように、端末装置１はスマートフォンで、情報伝達サーバ２及び音声認識サーバ３と３Ｇ回線や無線ＬＡＮによるアクセスポイント経由で通信している。この端末装置には、この情報伝達システムを使用する為の専用アプリケーションがインストールしてあり、このアプリケーションの立上によりオブジェクトが起動する。詳細には、タッチパネル１１ａにイメージ情報を表示する処理、このイメージ情報に対して行われる長押し操作を画面接触検知手段１１ｂで検知する処理、この長押し操作の間にオブジェクトに従ってメッセージとして音声認識手段１４ｂが変換したテキスト及び振動エンコーダ１５ｂが変換した振動データをデータ記録制御手段１３で記録する処理とを含むロジックを実行するプログラムである。

またこの専用アプリケーションには、例えば長押し操作の開始後ユーザに音声や振動を発する指示の表示をタッチパネル１１ａの画面に出力する処理、マイクロフォン１４ａや加速度センサ１５ａが音声や振動を入力したり測定したりできる状態にする処理、音声データや振動データを記録できる時間（例えば、１０秒）がオーバーしたりユーザが長押し操作を終了したりしたことに伴いこのマイクロフォンや加速度センサが音声や振動を入力したり測定したりしない状態にする処理、又はユーザに対して音声や振動の入力や測定が完了したことを示唆する表示をタッチパネル１１ａの画面上に出力する処理が含まれてもよい。なお、上記指示や示唆は、画面表示のみならず、音声や振動を出力することで行ってもよい。

タッチパネル１１ａは、ユーザの指の接触点を同時に二箇所以上多点検知する静電容量方式を有する。タッチパネル１１ａの画面には、イメージ情報に限らず、長押し操作を行う所定のターゲットが表示される。またタッチパネル１１ａの画面に対しては、専用アプリケーションの立上操作及びこのアプリケーションの実行操作が行われる。

画面接触検知手段１１ｂは、タッチパネル１１ａの画面にユーザの指が触れてから一定の時間後に長押し操作の開始を検知して起動し、この指が画面から離れたときに長押し操作の終了を検知するアルゴリズムからなるプログラム又はこのプログラムを組み込んだマイクロチップ等が該当する。

データ記録制御手段１２は、長押し操作を検知した画面接触検知手段１１ｂの要求に従い、この長押し操作の間にオブジェクトに従ってメッセージの記録及び送信を制御するアルゴリズムからなるプログラム又はこのプログラムを組み込んだマイクロチップ等が該当する。

詳細には、各オブジェクトには、それぞれコマンドが関連付いており、これらのコマンドは画面接触検知手段１１ｂの要求に従って実行する。このオブジェクトとしては、タッチパネル１１ａに対して行われる長押し操作の対象となるイメージ情報、送信するメッセージの属性、端末装置１に対するこのメッセージの入力方法、このメッセージの送信先情報、又はこの送信先となった端末装置１におけるこのメッセージの出力方法について判断や指定を行う。

イメージ情報としては、ユーザリストに限らず、アイコン、ショートカット、又は所定の画像データでもよい。なおイメージ情報の数は、単数でも複数でもよい。アイコン等は所定の画像ファイルへのディレクトリパス情報などが仕込まれている。

メッセージとしては、音声を認識して文字に変換したテキストや端末装置の振動の加速度を測定した振動データのみならず、カメラで撮影した画像データ又は動画データ、ＧＰＳで計測した位置情報、ウェブページのＵＲＬ、チェック情報でもよい。なお位置情報及びチェック情報は、座標情報、ＵＲＬ、又はテキストで示してもよい。「チェック情報」としては、ＧＰＳで計測した位置情報又は所定のウェブサイト若しくは地図アプリケーションに表示される地域に関連する建屋やランドマークを意味し、例えば、地名、公共施設、神社、寺、空港、駅名、駅の出入口名、公園、野球場、サッカー場、百貨店、スーパーマーケット、ショッピングセンター、アウトレットモール、飲食店、遊園地、映画館に限らず、すべてのスポットが該当する。

メッセージの入力方法としては、マイクロフォン１４ａで音声を認識すること、この音声を認識してテキストに変換すること、加速度センサ１５ａで端末装置１の振動を測定することに限らず、内向きまたは外向きのカメラで画像や動画を撮影すること、ＧＰＳで位置情報を計測すること、タッチパネル１１ａに表示されているウェブページの画面をプリントスクリーンすること、又はこの画面のＵＲＬを認識することでもよい。

メッセージの送信先は、他のユーザの端末装置１に限らず、情報伝達サーバ２、端末装置１内の記憶領域、又は通信ネットワークを介して接続する他のデータベースサーバでもよい。 メッセージの送信先が他のユーザの端末装置１や情報伝達サーバ２の場合、このユーザの送信先情報や、端末装置１又は情報伝達サーバ２のドメイン或いはＩＰアドレス等を付与するとことが好ましい。

メッセージの出力方法としては、送信先の端末装置１がメッセージを受信した直後のみならず、この端末装置がメッセージを受信してから一定時間経過後、この端末装置がスリープ状態から復帰した直後（レジュームしたとき）、特定の日時になったとき、特定の場所に到着したとき、この端末が特定の条件を満たしたとき、受信後一定の時間内に所定の条件を満たしたとき、この端末装置を有するユーザとＳＮＳ等で関係を有する他のユーザを含む他人により特定のアクションが発生したときでもよい。「特定のアクション」とは、例えば現在地の変化、業務やプライベートなどの予定の追加や変更、在宅状況の変化、職場などのオフィス内での行動、購買行動、メッセージの投稿が該当する。なお、設定した時間の経過後であっても、例えば端末装置の電源が入っておらずメッセージを受信したことに気づいていない場合は、このメッセージの出力をしなくてもよい。

なおユーザの任意でオブジェクトを設定できるようにしてもよい。送信先の端末装置１が受信したメッセージの出力方法の選択ロジックは、例えば出力方法毎に所定のＩＤを振り分け、所望の出力方法を選択するとメッセージにこのＩＤが付与されるというものである。

データ送受信制御手段１３は無線用の送受信機で、データ記録制御手段１２の要求に従って、記録したメッセージの情報伝達サーバ１２への送信、及びこの情報伝達サーバから送られたメッセージの受信を行う。

マイクロフォン１４ａは、データ記録制御手段１２の要求に従って、ユーザが発した音声を入力する。また音声認識手段１４ｂは、マイクロフォン１４ａが入力した音声を、音声認識サーバを介してテキストに変換するアルゴリズムからなるプログラム又はこのプログラムを組み込んだマイクロチップ等が該当する。

加速度センサ１５ａは、データ記録制御手段１２の要求に従って、ユーザが端末情報１に与えた振動の加速度を測定する。振動エンコーダ１５ｂは、加速度センサ１５ａが測定した加速度をデジタルな数列の振動データに変換する。また振動デコーダ１５ｃは、データ送受信制御手段１３が受信した振動データをアナログに復元する。振動デバイス１５ｄは端末装置用バイブレーションで、振動デコーダ１５ｃが復元したデータに基づいて振動する。なお復元した振動データに閾値を設定し、この閾値でＯＮ・ＯＦＦ制御することにより振動デコーダ１５ｃが三三七拍子等リズミカルに駆動するようにしてもよい。

情報伝達サーバ２は、ＳＮＳサーバや他のデータベースサーバと送信先情報や端末情報を共有している。情報伝達サーバ２を使用するには事前登録が必要で、ユーザはそれぞれ所有する登録した固有のＩＤ情報やパスワードを入力して接続する。

サーバ制御手段２１は、メッセージの記憶や呼び出し、このメッセージの送信、及び他のユーザの端末装置１への通知を制御するアルゴリズムからなるプログラム又はこのプログラムを組み込んだマイクロチップ等が該当する。

データ送受信制御手段２２は無線用の送受信機で、サーバ制御手段２１の要求に従って端末装置１に記憶してあるメッセージの送信、及びこの端末装置から送られてきたメッセージの受信を行う。なお、端末装置１に対してメッセージを送る前に、このメッセージを端末装置から受信しメッセージＤＢ２５に格納している旨の通知を送信してもよい。

送信先情報ＤＢ２３はユーザの属性情報を記憶しているストレージで、例えばユーザ固有のユーザＩＤやＳＮＳのユーザＩＤ、氏名、住所、又は電話番号の他、ハンドルネームやプロフィール画像を記憶している。端末情報ＤＢ２４は端末装置の属性情報を記憶しているストレージで、例えば端末装置固有の端末ＩＤ、シリアル番号、又は電話番号の他、製造番号や型番を記録している。送信先情報ＤＢ２３及び端末情報ＤＢ２４は、送信先情報及び端末情報を記憶している外部のストレージサーバと通信ネットワークＮを介して連動している。メッセージＤＢ２５は、それぞれのユーザのメッセージを記憶しているストレージである。

なお端末装置１には、音声認識手段１４ｂで変換したテキストの記憶領域であるテキストストレージが内蔵されており、長押し操作の終了に伴いデータ記録制御手段１２の要求に従ってこのテキストストレージに記憶してもよい。また振動エンコーダ１５ｂで数列化した振動データを記憶しておく振動データストレージが内蔵されており、長押し操作の終了に伴いデータ記録制御手段１２の要求に従ってこの振動データストレージに記憶してもよい。

さらに、データ記録制御手段１２の要求に従って上記テキストストレージからテキストを呼び出し、タッチパネル１１ａの画面にこのテキストを表示するタイミングを、ユーザ任意に設定してもよい。データ記録制御手段１２の要求に従って上記振動データストレージから振動データを呼び出し、振動デコーダ１５ｃを介して振動デバイス１５ｄで復元するタイミングを、ユーザ任意に設定してもよい。

端末装置１及び情報伝達サーバ２は、周知のコンピュータ装置であり、ＣＰＵ（Central Processing Unit）、ＲＯＭ（Read Only Memory）、ＲＡＭ（Random Access
Memory）、ＨＤＤ（Hard Disk Drive）、サウンドカード、アンプ、Ａ／Ｄ（Analog-to Digital）コンバータ、Ｄ／Ａ（Digital-to
Analog）コンバータ、モデム、ＤＳＰ（Digital Signal Processor）、タイマーボード、キーボード、ディスプレイ、カメラ及び各入出力装置等情報処理を行う上で必要なハードウェアを漏れなく有し、各種の制御や情報処理はこれらのハードウェアが連関して行う。また端末装置１及び情報伝達サーバ２には、それぞれ所定のＯＳ（Operating
System）、ミドルウェア、及びアプリケーションソフトが組み込まれ又はインストールされている。情報伝達サーバ２は、インターネット回線に限らず、例えばＬＡＮケーブルで直接接続する構成や社内ネットワーク回線を通じて接続する構成のいずれも該当する。タッチパネル１１ａは、抵抗膜方式、表面弾性方式、赤外線方式、又は電磁誘導方式のものでもよい。

次に、図１乃至図４を用いてこの情報伝達システムの基本的な動作を説明する。図４は、ユーザＡが端末装置１に対して発した音声及び振動を入力して情報伝達サーバ２に送信するまでの流れを示す。

図４に示すように、ユーザＡは、専用アプリケーションを立ち上げ、端末装置１のタッチパネル１１ａの画面に表示されるユーザリストに指を当てて長押しを開始し、一定の時間後に画面接触手段１１ｂがこの長押しを長押し操作として認識する（Ｓ４１０）。ユーザＡの長押し操作によりオブジェクトに関連するコマンドが実行し、このオブジェクトをデータ記録制御手段１２に通知する。すなわちこのオブジェクトには、メッセージとしてテキスト及び振動データ、このメッセージの送信先としてユーザＢ、テキスト及び振動データの入力方法としてマイクロフォン１４ａ及び加速度センサ１５ａ、これらのメッセージの出力方法としてユーザＢの端末装置がテキスト及び振動データを受信した直後という情報が含まれている。そこでデータ記録制御手段１２は、画面接触手段１１ｂの要求に従って、上記オブジェクトからテキスト及び振動データの記録方法を判断する（Ｓ４２０）。マイクロフォン１４ａ及び加速度センサ１５ａは、データ記録制御手段１２の要求に従ってテキスト及び振動データの記録をそれぞれ開始する（Ｓ４３０−１、Ｓ４３０−２）。

タッチパネル１１ａの画面には、音声及び振動の発生を促す文字や画像による指示が表示される。この指示を見たユーザＡは、マイクロフォン１４ａに音声を発して入力すると、データ記録制御手段１２の要求に従って音声認識手段１４ｂが音声認識サーバ３を介して音声をテキストに変換する（Ｓ４４０−１）。さらにユーザＡは、端末装置１を上下方向に揺さぶって加速度センサ１５ａで加速度を測定すると、データ記録制御手段１２の要求に従って振動エンコーダ１５ｂがこの加速度をデジタルな数列の振動データに変換する（Ｓ４４０−２）。その後、ユーザＡが長押し操作を終了し、画面接触手段１１ｂが長押し操作の終了を検知すると、データ記録制御手段１２の要求に従ってテキスト及び振動データの記録が完了する（Ｓ４５０）。

音声認識手段１４ｂ及び振動エンコーダ１５ｂがそれぞれ変換したテキスト及び振動データには、データ記録制御手段１２により上記オブジェクトに従ってメッセージの送信先であるユーザＢのユーザＩＤが付与される（Ｓ４６０）。データ記録制御手段１２は、ユーザＩＤが付与されたテキスト及び振動データをデータ送受信制御手段１３に供給する（Ｓ４７０）。

なおユーザＡは、タッチパネル１１ａの画面に他のイメージ情報を表示する操作をしてもよい。またタッチパネ１１ａルの画面に複数のイメージ情報が羅列するアプリケーションを起動して表示する操作をしてもよい。

図５は、ユーザＢの端末装置１がテキスト及び振動データを受信し、このテキスト及び振動データを出力するまでの流れを示す。

図５に示すように、情報伝達サーバ２のデータ送受信制御手段２２は、ユーザＡの端末装置１のデータ送受信制御手段１３が送信したテキスト及び振動データを受信し、メッセージＤＢ２５に記憶する（Ｓ５１０）。サーバ制御手段２１は、受信したテキスト及び振動データに付与されたユーザＩＤと、端末情報ＤＢ２４が記憶するユーザＢの端末装置の端末ＩＤに関連付くユーザＩＤとを紐付けて上記端末ＩＤを割り出す（Ｓ５２０）。その後、サーバ制御手段２１の要求に従いデータ送受信制御手段２２は割り出した端末ＩＤを用いて、ユーザＢの端末装置１にテキスト及び振動データを受信した旨の通知を送信する（Ｓ５３０）。ユーザＢの端末装置１が上記通知に基づいて情報伝達サーバ２にアクセスすると、サーバ制御手段２１がメッセージＤＢ２５からテキスト及び振動データを呼び出し、データ送受信制御手段２２がユーザＢの端末装置１にこのテキスト及び振動データを送信することでユーザＢはメッセージを取得する（Ｓ５４０）。そしてテキスト及び振動データを受信した直後に、ユーザＢの端末装置１のタッチパネル１１ａの画面にこのテキストが表示されると共に、この振動データが振動デコーダ１５ｃで復元され振動デバイス１５ｄが振動する（Ｓ５５０）。

したがって、この情報伝達システムは、ユーザＡがタッチパネル１１ａの画面に表示されるイメージ情報を長押し操作する間に、データ記録制御手段１２がこのオブジェクトに従ってテキスト及び振動データを記録し、画面接触検知手段１１ｂがこの長押し操作の終了を検知した場合、このデータ記録制御手段の要求に従って、データ送受信制御手段１３がこのテキスト及び振動データを情報伝達サーバ２に送信することにより、極めて簡単なワンモーションのキー操作のみでユーザＡが伝えたいと想った感情をメッセージとして素早く送信することができる。したがって気軽なコミュニケーションを喚起し、複数のユーザ同士で感情のキャッチボールをリアルタイムに行うことができるばかりでなく、ユーザＡの感情を文字と振動両方で伝えることができ、コミュニケーションの質が向上する。

またメッセージとしては、テキストや振動ばかりでなく、カメラで撮影した画像データや動画データ、ＧＰＳで計測した位置情報、ウェブページのＵＲＬ、チェック情報でもよく、ユーザは様々な形で感情や状況を伝達することができる。例えば、端末装置１の専用のアプリケーションを介して地図アプリケーションを起動し、この地図アプリケーションに表示されるＧＰＳで計測した自分の所在地に対して長押し操作することにより、送信先の端末装置にはこの所在地を表すＵＲＬや座標情報が通知される。したがって、メッセージをそれぞれ組み合わせることで、より好適にメッセージを相手に伝えることができる。また地域情報を掲載するウェブサイトや地図アプリーションに表示されるこの地域に関連する建屋やランドマークに対して長押し操作することにより、送信先の端末装置にはチェック情報が通知される。これにより、例えば端末装置を有するユーザ同士で待ち合わせ場所や会合の開催場所を手間無く共有することができる。

またオブジェクトには、テキストや振動の送信先での出力方法が含まれ、このオブジェクトに応じてこのテキストや振動の出力方法がコントロールされることにより、ユーザＡはメッセージを伝えたいタイミングを自ら設定することができる。したがってメッセージを受け取ったユーザＢはこのユーザの感情をより的確に把握することができる。

またテキストや振動の出力方法をコントロールする方法としては、このテキストや振動データを出力するタイミングを制御することにより、それぞれのメッセージの特徴に合わせて好適にこのメッセージを相手に伝えることができる。

またユーザＡが送信したテキスト及び振動データには、このテキスト及び振動データの送り先となるユーザＢのユーザＩＤが付与されている。そこで情報伝達サーバ２では、このテキスト及び振動データに付与されたユーザＩＤと、端末情報ＤＢ２４が記憶する端末ＩＤに関連付くユーザＩＤとが紐付いて管理されているため、このテキスト及び振動データはこの端末情報をキーにしてユーザＢの端末装置１に送信される。したがって、ユーザＡは一度に複数のテキスト及び振動データを送信できると共に、情報伝達サーバ２で複数人分のテキスト及び振動データを管理することができる。

さらにユーザＢの端末装置１がテキスト及び振動データを受信すると、このテキストがタッチパネル１１ａの画面に表示されると共に、この振動データが振動デコーダ１５ｃで復元され振動デバイス１５ｄが振動することにより、ユーザＢは双方のメッセージを視覚及び触覚で受け取ることができる。

本発明における情報伝達システム、情報伝達方法、情報伝達プログラム、情報伝達端末装置、及び情報伝達端末装置のプログラムは、ＳＮＳにおけるコミュニケーションツールとしてばかりでなく、オンラインゲーム、医療や介護、及び製造業に関する産業に広く利用可能である。

１ 端末装置
１１ａ タッチパネル
１１ｂ 画面接触手段
１２ データ記録手段
１３ データ送受信手段
２ 情報伝達サーバ

Claims (10)

1. メッセージの送信先である他の端末装置と該送信先における該メッセージの出力方法とを指定する長押し操作が検知手段により検知されている間に、該メッセージの作成に資するメッセージ用データを取得する取得手段と、
   前記長押し操作が前記検知手段により検知されなくなった後に、前記取得手段により取得されたメッセージ用データ又はこれに基づいて作成されるメッセージを、複数の送信先の候補にそれぞれ対応する複数のイメージ情報の表示領域のうち該長押し操作の操作対象たる表示領域に対応する送信先に向けて供給する供給手段と、
   を具備する端末装置。
2. 前記供給手段が、複数の前記出力方法の候補にそれぞれさらに対応する複数のイメージ情報の表示領域のうち前記長押し操作の対象たる表示領域に対応する出力方法に対応付けて、前記メッセージ用データ又は前記メッセージを供給する、
   請求項１に記載の端末装置。
3. 前記メッセージの出力方法は、前記送信先に前記メッセージが到達した後に発生し得る所定の事象の発生を条件として決定される前記メッセージの出力タイミングである、
   請求項１又は請求項２に記載の端末装置。
4. 前記長押し操作は、複数の前記メッセージ用データの入力方法からなる組合せをさらに指定する長押し操作である、
   請求項１から請求項３までのいずれか一項に記載の端末装置。
5. メッセージの送信先と該メッセージの作成に資するメッセージ用データの入力方法を複数含む組合せとを指定する長押し操作が検知手段により検知されている間に、該メッセージ用データを該複数の入力方法によりそれぞれ取得する取得手段と、
   前記長押し操作が前記検知手段により検知されなくなった後に、前記取得手段により取得されたメッセージ用データ又はこれに基づいて作成されるメッセージを、複数の送信先の候補にそれぞれ対応する複数のイメージ情報の表示領域のうち該長押し操作の操作対象たる表示領域に対応する送信先に向けて供給する供給手段と、
   を具備する端末装置。
6. 前記長押し操作が前記検知手段により検知された際に該長押し操作により指定される前記組合せを構成する複数の入力方法にそれぞれ対応する複数の入力装置をそれぞれオンに切り替えるとともに、前記長押し操作が前記検知手段により検知されなくなった際に前記複数の入力装置をそれぞれオフに切り替える制御手段をさらに具備する、
   請求項４又は請求項５に記載の端末装置。
7. メッセージの送信先である他の端末装置と該送信先における該メッセージの出力方法とを指定する長押し操作が検知手段により検知されている間に、該メッセージの作成に資するメッセージ用データを取得する取得ステップと、
   前記長押し操作が前記検知手段により検知されなくなった後に、前記取得ステップにおいて取得されたメッセージ用データ又はこれに基づいて作成されるメッセージを、複数の送信先の候補にそれぞれ対応する複数のイメージ情報の表示領域のうち該長押し操作の操作対象たる表示領域に対応する送信先に向けて供給する供給ステップと、
   を含む、端末装置の制御方法。
8. メッセージの送信先である他の端末装置と該送信先における該メッセージの出力方法とを指定する長押し操作が検知手段により検知されている間に、該メッセージの作成に資するメッセージ用データを取得する取得機能と、
   前記長押し操作が前記検知手段により検知されなくなった後に、前記取得機能により取得されたメッセージ用データ又はこれに基づいて作成されるメッセージを、複数の送信先の候補にそれぞれ対応する複数のイメージ情報の表示領域のうち該長押し操作の操作対象たる表示領域に対応する送信先に向けて供給する供給機能と、
   を端末装置のコンピュータに実現させる制御プログラム。
9. メッセージの送信先と該メッセージの作成に資するメッセージ用データの入力方法を複数含む組合せとを指定する長押し操作が検知手段により検知されている間に、該メッセージ用データを該複数の入力方法によりそれぞれ取得する取得ステップと、
   前記長押し操作が前記検知手段により検知されなくなった後に、前記取得ステップにおいて取得されたメッセージ用データ又はこれに基づいて作成されるメッセージを、複数の送信先の候補にそれぞれ対応する複数のイメージ情報の表示領域のうち該長押し操作の操作対象たる表示領域に対応する送信先に向けて供給する供給ステップと、
   を含む、端末装置の制御方法。
10. メッセージの送信先と該メッセージの作成に資するメッセージ用データの入力方法を複数含む組合せとを指定する長押し操作が検知手段により検知されている間に、該メッセージ用データを該複数の入力方法によりそれぞれ取得する取得機能と、
    前記長押し操作が前記検知手段により検知されなくなった後に、前記取得機能により取得されたメッセージ用データ又はこれに基づいて作成されるメッセージを、複数の送信先の候補にそれぞれ対応する複数のイメージ情報の表示領域のうち該長押し操作の操作対象たる表示領域に対応する送信先に向けて供給する供給機能と、
    を端末装置のコンピュータに実現させる制御プログラム。

Images