JP4745566B2 - コミュニケーション方法、マルチメディアメッセージ送受信用プログラム及び記録媒体 - Google Patents

Description

【０００１】
【発明の属する技術分野】
この本発明は、コミュニケーション方法、マルチメディアメッセージ送受信用プログラム及び記録媒体に関する。
【０００２】
【従来の技術】
例えばコンピュータを用いたコミュニケーション方法には、単一のコンピュータを利用するｓｈｏｕｌｄｅｒ−ｔｏ−ｓｈｏｕｌｄｅｒコミュニケーション，画面を共有する遠隔コミュニケーション，電子メール等のメッセージを送信し合う遠隔・非同期コミュニケーションがある。
【０００３】
また、コンピュータを用いた障害者のコミュニケーション方法には、手話，シンボル又は写真カードを利用する拡大・代替コミュニケーションとしてのサウンド＆シンボル（以下、Ｓ＆Ｓという）法，ピクトグラム法，マカトン法などを利用したものがある。
【０００４】
【発明が解決しようとする課題】
しかしながら、コンピュータを用いた従来のコミュニケーション方法は、コンピュータに不慣れな情報弱者（例えば、高齢者，障害者など）にとって、その習得が非常に困難である。
【０００５】
例えば情報弱者が遠隔・非同期コミュニケーションの一例としての電子メール送受信用プログラムを利用して意思の伝達を行なう場合、電子メール送受信用プログラムの知識が必要であると共に、キーボードを利用して文字を入力する必要がある。
【０００６】
しかし、情報弱者にとっては、キーボードを利用して文字を入力するという行為自体が困難であると共に、キーボードを利用して文字を入力するという単純作業により集中力の欠けた作業となるため継続的な利用促進の妨げとなっている。また、情報弱者にとっては、電子メール送受信用プログラムの知識を習得することが困難である。
【０００７】
したがって、コンピュータを用いた従来のコミュニケーション方法は、情報弱者に知識的な負荷を掛けることで意欲喪失の原因となり、情報格差を拡げる要因となっていた。
【０００８】
また、障害者のコミュニケーション方法の一例としてのＳ＆Ｓ法，ピクトグラム法，マカトン法を利用して意思の伝達を行なう場合、シンボルの意味やシンボルの組み合わせ方を習得する必要がある。
【０００９】
しかし、Ｓ＆Ｓ法，ピクトグラム法，マカトン法は、シンボル数が膨大であると共に、１つのシンボルが抽象的で複数の意味を持つため直感的に理解できないことがあり、習得にも多大な時間を必要としていた。一方、写真カードは具象的で直感的に理解しやすいが、一般化されていなかった。そのため、これらの手法は誰でも容易に使えるものでなく、自分とその周辺でしか利用できなかった。
【００１０】
本発明は、上記の点に鑑みなされたもので、習得及び操作が容易であり、汎用性のあるコミュニケーションを実現することが可能なマルチメディア単語を用いたコミュニケーション方法，マルチメディアメッセージ作成方法，マルチメディアメッセージ閲覧方法，マルチメディアメッセージ送受信用プログラム及び記録媒体を提供することを目的とする。
【００１１】
【課題を解決するための手段】
そこで、上記課題を解決するため、本発明は、コンピュータを用いて意思の伝達を行なう為に、ユーザからの指示に応じて前記ユーザが伝達したい意思に応じた文章を１つ以上のマルチメディア単語で表現し、ユーザからの指示に応じて前記１つ以上のマルチメディア単語で表現した文章を前記ユーザが意思の伝達を行いたい相手に提供することを特徴とする。
【００１２】
マルチメディア単語とは、自己説明型コンポーネントをいい、自身についての多角的な説明を有している。このように、自己説明型コンポーネントの理解が容易であるため、習得までの時間を大幅に短縮することができる。
【００１３】
また、本発明は、前記文章表現段階が、ユーザが伝達したい意思に応じた文章を前記マルチメディア単語を用いて、主語，述語，場所，時間，理由，手段という観点で表現することを特徴とする。
【００１４】
このように、ユーザが伝達したい意思に応じた文章の主語，述語，場所，時間，理由，手段をマルチメディア単語で表現し、マルチメディア単語で表現した文章の主語，述語，場所，時間，理由，手段を相手に伝えることにより、意思を伝達することができる。
【００１５】
また、本発明は、前記マルチメディア単語に、１つ以上のマルチメディアコンテンツ，分類情報，統計情報の少なくとも１つが付加されており、前期１つ以上のマルチメディアコンテンツ，分類情報，統計情報を組み合わせて多角的な説明としての意味，性質，使用法の少なくとも１つを提供することを特徴とする。
【００１６】
このように、マルチメディア単語に付加されている１つ以上のマルチメディアコンテンツ，分類情報，統計情報などにより、意味，性質，使用法などのマルチメディア単語の多角的な説明を得ることができる。
【００１７】
また、本発明は、前記マルチメディア単語が予め格納されたマルチメディア単語格納手段から１つ以上のマルチメディア単語を検索し、検索した１つ以上のマルチメディア単語を用いて、前記ユーザが伝達したい意思に応じた文章を表現することを特徴とする。
【００１８】
このように、マルチメディア単語格納手段から１つ以上のマルチメディア単語を検索し、検索したマルチメディア単語を用いることができるので、簡単な操作でユーザが伝達したい意思に応じた文書をマルチメディア単語で表現することが可能である。
【００１９】
また、本発明は、前記ユーザ及びマルチメディア単語の使用頻度の少なくとも一方に応じて前記マルチメディア単語格納手段からの検索結果を変更することを特徴とする。
【００２０】
このように、ユーザの技術レベル，障害，年齢，性別，文化，地域などに応じて検索結果を変更することにより、例えば検索結果としてのマルチメディア単語の言語をユーザが使用する言語に変更することができる。また、マルチメディア単語の使用頻度に応じて検索結果を変更することにより、例えば使用頻度の多いマルチメディア単語が優先的に検索されるように検索結果を変更することができる。
【００２１】
また、本発明は、前記検索段階および表現段階が、前記ユーザおよび統計情報の少なくとも１つに応じて、画面構成および操作手法を変更することを特徴とする。
【００２２】
このように、ユーザおよび統計情報の少なくとも１つに応じて画面構成および操作手法を変更することができるので、ユーザは自分のレベルに応じた画面構成および操作手法を利用することができる。
【００２３】
また、本発明は、前記マルチメディア単語が、画像情報，文字情報，音情報の少なくとも１つであることを特徴とする。
【００２４】
このように、マルチメディア単語は、画像情報，文字情報，音情報の少なくとも１つで構成することができる。したがって、マルチメディア単語は、自身についての多角的な説明を画像情報，文字情報，音情報の少なくとも１つを利用して行なうことができる。
【００２５】
【発明の実施の形態】
次に、本発明の実施の形態について図面に基づいて説明する。まず、本発明の理解を容易とする為に、本発明のコミュニケーション方法の原理について説明する。
【００２６】
本発明のコミュニケーション方法では、意思の伝達を行いたい相手にマルチメディア単語及びマイクロアイコンで構成されたマルチメディアヒエログリフを提示することにより、ユーザの意思を相手に伝達する。
【００２７】
ここで、マルチメディアヒエログリフとは、文章を所謂５Ｗ１Ｈのデータ形式で表すためのものであり、いつ（時間），どこで（場所），誰が（主語），何をどうする（述語），なぜ（理由），どのように（手段）を表す６つのヒエログリフセルで構成される。なお、ヒエログリフセルは、マイクロアイコンを添付する１つ以上のマイクロアイコンセルを備えるように構成される。
【００２８】
また、マルチメディア単語とは、静止画，テキスト，動画及び音声などのマルチメディアコンテンツの総称をいい、事物や動作の過程などを表す。マルチメディア単語は、例えば事物や動作の過程を直感的に理解させる為に１つ以上のマルチメディアコンテンツが組み合わされて構成されている。
【００２９】
また、マイクロアイコンとは、マルチメディア単語又はマルチメディアヒエログリフを形容し、マルチメディア単語又はマルチメディアヒエログリフの表現の幅を広げるものである。マイクロアイコンは、例えばマルチメディア単語に代名詞，所有格，修飾詞又は他のマルチメディア単語を関連付ける。
【００３０】
図１は、マルチメディアヒエログリフの一実施例のイメージ図を示す。図１のマルチメディアヒエログリフ１は、どこで（場所）に対応するヒエログリフセル２ａ，いつ（時間）に対応するヒエログリフセル２ｂ，誰が（主語）に対応するヒエログリフセル２ｃ，何をどうする（述語）に対応するヒエログリフセル２ｄ，なぜ（理由）に対応するヒエログリフセル２ｅ，どのように（手段）に対応するヒエログリフセル２ｆを備える。ヒエログリフセル２ａ〜２ｆは、それぞれ１つ以上のマルチメディア単語が配置されることで、意味を持つようになる。
【００３１】
例えば「昨日私はコンサートホールでピアノを弾きました。お父さんとお母さんが観に来てくれたのでとても嬉しかったです。」という文章に応じたマルチメディアヒエログリフ１を表現する場合、図２のようなマルチメディア単語３ａ〜３ｆをヒエログリフセル２ａ〜２ｆに配置する。
【００３２】
図２は、マルチメディア単語を配置したマルチメディアヒエログリフの一実施例のイメージ図を示す。図２のマルチメディアヒエログリフ１は、ヒエログリフセル２ａに「コンサートホール」を表すマルチメディア単語３ａが配置され、ヒエログリフセル２ｂに「昨日」を表すマルチメディア単語３ｂが配置され、ヒエログリフセル２ｃに「私」を表すマルチメディア単語３ｃが配置され、ヒエログリフセル２ｄに「ピアノを弾いている」を表すマルチメディア単語３ｄが配置され、ヒエログリフセル２ｅに「両親が来る」を表すマルチメディア単語３ｅが配置され、ヒエログリフセル２ｆに「とても嬉しい」を表すマルチメディア単語３ｆが配置される。
【００３３】
例えば「ピアノを弾いている」を表すマルチメディア単語３ｄは、ピアノを弾いている静止画又は動画と、見出しテキストと、ピアノで演奏されている音楽とを組み合わせて構成することができる。
【００３４】
図２のようなマルチメディアヒエログリフ１又はマルチメディア単語３ａ〜３ｆは、マイクロアイコンで形容することにより、細やかなニュアンスや正確な表現を実現することができる。
【００３５】
例えば、図２のマルチメディアヒエログリフ１のヒエログリフセル２ｂで「昨日の夜」を表す場合、図３のようなマイクロアイコン４をヒエログリフセル２ｂに配置する。
【００３６】
図３は、マイクロアイコンを配置したマルチメディアヒエログリフの一実施例のイメージ図を示す。図３のヒエログリフセル２ｂは、「昨日」を表すマルチメディア単語３ｂと「夜」を表すマイクロアイコン４とが配置されている。このように「昨日」を表すマルチメディア単語３ｂを「夜」を表すマイクロアイコン４で形容することにより、「昨日の夜」を表すヒエログリフセル２ｂを実現することができる。
【００３７】
なお、図３のヒエログリフセル２ｃは、「私」を表すマルチメディア単語３ｃが配置されているが、「自分の写真」をマイクロアイコンとして配置することもできる。
【００３８】
自己説明型コンポーネントであるマルチメディアヒエログリフは、マルチメディア単語およびマイクロアイコンとして他のマルチメディアヒエログリフにおいて使用することができる。例えば図２のヒエログリフセル２ｂに、主語が「友達」，述語が「バイオリンを弾いている」のマルチメディアヒエログリフを配置することにより、「友達がバイオリンを弾いている時」を表すヒエログリフセル２ｂを実現することができる。このとき、表示領域などに応じてヒエログリフセル，マイクロアイコンセルにマルチメディアヒエログリフを直接配置するか、マルチメディアヒエログリフ全体または一部へのリンクを表すアイコンを配置するかを選択することができる。
【００３９】
図２又は図３のようなマルチメディアヒエログリフ１は、ユーザが伝達したい意思に応じた文章を所謂５Ｗ１Ｈのデータ形式で表している。したがって、図２又は図３のようなマルチメディアヒエログリフ１を相手に提示することで、相手にユーザの意思を伝達することが可能である。
【００４０】
以下、本発明のコミュニケーション方法を実現するシステムについて図面を参照しつつ説明していく。なお、本実施例では、コミュニケーション方法の一例として遠隔・非同期コミュニケーションの一例としてのマルチメディアメッセージに本発明を適用する例について説明するがこれに限らない。
【００４１】
ここでマルチメディアメッセージとは、１つ以上のマルチメディア単語およびマルチメディア単語で表現した文章を持ち、宛先・差出人などの情報を備えた自己説明型コンポーネントである。なお、本発明のコミュニケーション方法は、電子メールのように、意志の伝達を行いたい相手にメッセージを提示又は送信する全ての場合に適用が可能である。
【００４２】
図４は、本発明のコミュニケーション方法を実現するシステムの一実施例の構成図を示す。図４のシステム１０は、コミュニケーションサーバ１１，クライアント１２ａ〜１２ｎ，基地局１３，移動通信端末１４，インターネット等のネットワーク１５を含むように構成される。なお、クライアント１２ｎ，基地局１３及び移動通信端末１４は、移動通信を行なうときに必要な構成であって、必ずしも必要でない。
【００４３】
コミュニケーションサーバ１１と，クライアント１２ａ〜１２ｎ−１と，基地局１３とは、ネットワーク１５を介して接続されている。また、クライアント１２ｎは移動通信端末１４とケーブル等で接続されており、移動通信端末１４及び基地局１３を介してネットワーク１５に接続されている。
【００４４】
クライアント１２ａ〜１２ｎは、本発明のコミュニケーション方法を利用するユーザが使用するものであって、ネットワーク１５を介してコミュニケーションサーバ１１に接続される。クライアント１２ａ〜１２ｎは、例えば通信機能，メッセージ作成機能，メッセージ閲覧機能，メッセージ送受信機能などを有する。
【００４５】
コミュニケーションサーバ１１は、本発明のコミュニケーション方法に必要な各種データを格納するデータベース（以下、ＤＢという），そのＤＢからデータを検索する検索機能などを有する。
【００４６】
なお、コミュニケーションサーバ１１は分散型でも集中型でもよく、設置場所も問わず、クライアントと同一コンピュータであってもかまわない。また、本発明のコミュニケーション方法に必要な各種データは、コミュニケーションサーバ１１に全て保存してもよいし、クライアント１２ａ〜１２ｎに全て保存してもよいし、コミュニケーションサーバ１１及びクライアント１２ａ〜１２ｎに分散して保存してもよい。
【００４７】
本実施例では、本発明のコミュニケーション方法に必要な各種データのうち個人用データ及び使用頻度の高いデータをクライアント１２ａ〜１２ｎに保存し、残りの各種データをコミュニケーションサーバ１１に保存する例について説明する。
【００４８】
コミュニケーションサーバ１１及びクライアント１２ａ〜１２ｎは、例えば図５のように構成される。図５は、本発明によるコミュニケーションサーバ及びクライアントの一例の構成図を示す。図５のコミュニケーションサーバ１１及びクライアント１２ａ〜１２ｎは、それぞれバスＢで相互に接続されている入力装置２１と，表示装置２２と，ドライブ装置２３と，記録媒体２４と，補助記憶装置２５と，メモリ装置２６と，演算処理装置２７と，インターフェース装置２８と，ＤＢ２９とを含むように構成される。
【００４９】
入力装置２１は、コミュニケーションサーバ１１又はクライアント１２ａ〜１２ｎのユーザが操作するキーボード，マウスなどで構成され、コミュニケーションサーバ１１又はクライアント１２ａ〜１２ｎに各種操作信号を入力するために用いられる。表示装置２２は、コミュニケーションサーバ１１又はクライアント１２ａ〜１２ｎを操作するのに必要な各種ウインドウやデータ等を表示する。
【００５０】
インターフェース装置２８は、コミュニケーションサーバ１１又はクライアント１２ａ〜１２ｎをネットワーク１５に接続する為のインターフェースであり、例えばモデム，ルータ等で構成される。ＤＢ２９は、本発明のコミュニケーション方法に必要な各種データを格納している。なお、ＤＢ２９に格納されている各種データの詳細は後述する。
【００５１】
本発明のコミュニケーション方法を実現するプログラムは、ＣＤ−ＲＯＭ等の記録媒体２４によって提供される。プログラムを記録した記録媒体２４は、ドライブ装置２３にセットされ、プログラムが記録媒体２４からドライブ装置２３を介して補助記憶装置２５にインストールされる。
【００５２】
なお、このプログラムを記録する記録媒体は、ＣＤ−ＲＯＭ、フレキシブルディスク、光磁気ディスク（ＭＯ）等の様に情報を光学的，電気的或いは磁気的に記録する記録媒体、ＲＯＭ、フラッシュメモリ等の様に情報を電気的に記録する半導体メモリ等、様々なタイプの記録媒体を用いることができる。
【００５３】
補助記憶装置２５は、インストールされたプログラムを格納すると共に、必要なファイル，データ等を格納する。メモリ装置２６は、コミュニケーションサーバ１１又はクライアント１２ａ〜１２ｎの起動時に補助記憶装置２５からプログラムを読み出して格納する。演算処理装置２７は、メモリ装置２６に読み出され格納されたプログラムに従ってコミュニケーションサーバ１１又はクライアント１２ａ〜１２ｎに係る処理を実行する。
【００５４】
図６は、本発明のコミュニケーション方法を実現するシステムの処理の一例のフローチャートを示す。以下、ユーザがクライアント１２ａを操作する例について説明する。
【００５５】
図６中、ステップＳ１０では、ユーザがクライアント１２ａを操作してコミュニケーションサーバ１１に対するログイン処理を行なう。ログイン処理が正常に終了すると、クライアント１２ａはステップＳ１０に続いてステップＳ１１に進み、コミュニケーションサーバ１１に対してマルチメディアメッセージ受信処理を行なう。
【００５６】
例えばマルチメディアメッセージ受信処理は、メッセージテーブル，メールボックステーブル，状態テーブルを利用して行われる。なお、メッセージテーブルは、マルチメディアメッセージに関する情報を格納するものである。状態テーブルは、マルチメディアメッセージの状態（例えば、未読，既読など）を格納するものである。メールボックスは、メッセージテーブルと状態テーブルとを対応付けるものである。
【００５７】
ステップＳ１１に続いてステップＳ１２に進み、クライアント１２ａはユーザからマルチメディアメッセージを作成する旨の指示があったか否かを判定する。
ユーザからマルチメディアメッセージを作成する旨の指示があったと判定すると（Ｓ１２においてＹＥＳ）、クライアント１２ａはステップＳ１３に進み、マルチメディアメッセージ作成処理を行なう。
【００５８】
ステップＳ１３のマルチメディアメッセージ作成処理では、クライアント１２ａがマルチメディアメッセージの作成に必要な各種データをコミュニケーションサーバ１１から受信する。
【００５９】
マルチメディアメッセージ作成処理でマルチメディアメッセージの作成が終了すると、ステップＳ１３に続いてステップＳ１４に進み、クライアント１２ａはマルチメディアメッセージ送信処理を行なう。例えばマルチメディアメッセージ送信処理は、メッセージテーブル，メールボックステーブル，状態テーブルを利用して行われる。
【００６０】
ステップＳ１４のマルチメディアメッセージ送信処理では、クライアント１２ａがステップＳ１３で作成したマルチメディアメッセージをコミュニケーションサーバ１１に送信し、ステップＳ１５に進む。また、ユーザからマルチメディアメッセージを作成する旨の指示がなかったと判定すると（Ｓ１２においてＮＯ）、クライアント１２ａはステップＳ１５に進む。
【００６１】
そして、ステップＳ１５では、ユーザがクライアント１２ａを操作してコミュニケーションサーバ１１に対するログアウト処理を行なって処理を終了する。
【００６２】
図６のフローチャートの処理を更に詳細に説明していく。図７は、ログイン処理の一例のフローチャートを示す。図７中、ステップＳ２１では、ユーザがクライアント１２ａを操作してログインを要求する。
【００６３】
ステップＳ２１に続いてステップＳ２２に進み、クライアント１２ａは図８のようなユーザ情報テーブルのデータ項目「ＳｉｇｎＩＤ」からマルチメディア単語のＩＤを取得し、そのＩＤをキー情報として図９のようなサインテーブルからマルチメディア単語を取得する。図８は、ユーザ情報テーブルの一例の構成図を示す。また、図９は、サインテーブルの一例の構成図を示す。
【００６４】
なお、ユーザ情報テーブルのデータ項目「ＳｉｇｎＩＤ」は、ユーザを視覚的に識別させる為のマルチメディア単語のＩＤである。したがって、そのＩＤをキー情報としてサインテーブルを検索することにより、ユーザを視覚的に識別させる為のマルチメディア単語を取得できる。例えばユーザを視覚的に識別させる為のマルチメディア単語の一例として、ユーザの顔を表したユーザ画像がある。
【００６５】
クライアント１２ａは、サインテーブルから取得したマルチメディア単語を画面上に表示する。つまり、クライアント１２ａの画面上には、クライアント１２ａを利用する一部又は全部のユーザ画像が表示される。
【００６６】
ステップＳ２２に続いてステップＳ２３に進み、ユーザはクライアント１２ａを操作し、クライアント１２ａの画面上に表示された一つ以上のユーザ画像から自分のユーザ画像を選択する。ユーザ画像が選択されると、クライアント１２ａは、選択されたユーザ画像に対応するログイン名をユーザ情報テーブルから取得する。
【００６７】
ステップＳ２３に続いてステップＳ２４に進み、クライアント１２ａはユーザにパスワードの入力を要求する。パスワードの入力は、例えばクライアント１２ａの画面上に複数の画像を表示し、複数の画像から選択した画像の組み合わせで行なう。
【００６８】
ステップＳ２４に続いてステップＳ２５に進み、クライアント１２ａは入力されたパスワードが正しいか否かをユーザ情報テーブルのデータ項目「Ｐａｓｓｗｏｒｄ」を参照して判定する。入力されたパスワードが正しければ（Ｓ２５においてＹＥＳ）、クライアント１２ａはステップＳ２６に進む。
【００６９】
入力されたパスワードが正しくなければ（Ｓ２５においてＮＯ）、クライアント１２ａはステップＳ２４に進み、再度パスワードの入力を要求する。なお、入力されたパスワードが正しくない場合に、ログイン処理を終了させるようにしてもよい。
【００７０】
ステップＳ２６では、クライアント１２ａがユーザ情報テーブル及び図１０のような所属団体テーブルからユーザのプロファイル情報を取得する一方、コミュニケーションサーバ１１にログイン名及びパスワードを送信してログイン要求を行なう。図１０は、所属団体テーブルの一例の構成図を示す。
【００７１】
ステップＳ２６に続いてステップＳ２７に進み、コミュニケーションサーバ１１は図１１のようなカウンタテーブル及び図１２のようなマンスリーカウンタテーブルを利用してマルチメディアヒエログリフ及びマルチメディア単語の使用頻度を判定する。図１１は、カウンタテーブルの一例の構成図を示す。図１２は、マンスリーカウンタテーブルの一例の構成図を示す。
【００７２】
マルチメディアヒエログリフ及びマルチメディア単語の使用頻度の判定は、例えば以下の式（１）〜（５）を用いて使用頻度ランクを数値化することにより行なうことができる。
【００７３】
【数１】

式（１）は、ログイン処理を行なっているユーザを対象とし、全ての自己説明型コンポーネントのユーザアクセス回数に対する１つの自己説明型コンポーネントのユーザアクセス回数の割合Ｕを算出するものである。式（２）は、ログイン処理を行なっているユーザの所属団体を対象とし、全ての自己説明型コンポーネントのユーザアクセス回数に対する１つの自己説明型コンポーネントのユーザアクセス回数の割合Ｏを算出するものである。
【００７４】
式（３）は、システム１０を利用する全ユーザを対象とし、全ての自己説明型コンポーネントのユーザアクセス回数に対する１つの自己説明型コンポーネントのユーザアクセス回数の割合Ａを算出するものである。また、式（４）は、全ユーザを対象とし、指定月（例えば、ログインを行なっている月）の全ての自己説明型コンポーネントのユーザアクセス回数に対する１つの自己説明型コンポーネントのユーザアクセス回数の割合Ｍを算出するものである。
【００７５】
そして、算出した割合Ｕ，Ｏ，Ａ，Ｍを式（５）に代入することにより、使用頻度ランクを算出することができる。なお、式（５）のａ，ｂ，ｃ，ｄは、割合Ｕ，Ｏ，Ａ，Ｍの重要度に応じて適宜変更するものであるが、例えばａ＝４０００，ｂ＝２０００，ｃ＝１０００，ｄ＝３０００に設定する。
【００７６】
算出される使用頻度ランクは、使用頻度が高い自己説明型コンポーネントほど大きく、使用頻度が低い自己説明型コンポーネントほど小さくなる。つまり、使用頻度ランクの大小に応じて自己説明型コンポーネントの使用頻度を判定することができる。
【００７７】
コミュニケーションサーバ１１は使用頻度ランクが大きいマルチメディアヒエログリフ及びマルチメディア単語を取得し、取得したマルチメディアヒエログリフ及びマルチメディア単語をクライアント１２ａに送信する。したがって、クライアント１２ａは使用頻度の高いマルチメディアヒエログリフ及びマルチメディア単語を自動的に取得することができる。
【００７８】
ステップＳ２７に続いてステップＳ２８に進み、コミュニケーションサーバ１１はクライアント１２ａからのログイン要求を許可し、ログイン処理を正常終了させる。
【００７９】
次に、ステップＳ１３のマルチメディアメッセージ作成処理について図１３を参照しつつ説明する。図１３は、マルチメディアメッセージ作成処理の一例のフローチャートを示す。図１３のマルチメディアメッセージ作成処理では、ユーザが既存のマルチメディアヒエログリフを利用してマルチメディアメッセージを作成するか、又は新規のマルチメディアヒエログリフを利用してマルチメディアメッセージを作成するかを選択できる。
【００８０】
図１３中、ステップＳ３１では、クライアント１２ａがユーザから既存のマルチメディアヒエログリフを利用してマルチメディアメッセージを作成する旨の指示があったか否かを判定する。
【００８１】
ユーザから既存のマルチメディアヒエログリフを利用してマルチメディアメッセージを作成する旨の指示があったと判定すると（Ｓ３１においてＹＥＳ）、クライアント１２ａはステップＳ３２に進む。また、ユーザから既存のマルチメディアヒエログリフを利用してマルチメディアメッセージを作成する旨の指示がなかったと判定すると（Ｓ３１においてＮＯ）、クライアント１２ａはステップＳ３３に進む。
【００８２】
ステップＳ３２では、クライアント１２ａが既存のマルチメディアヒエログリフを検索し、検索したマルチメディアヒエログリフを画面上に表示する。ここで検索されるヒエログリフは、使用頻度，履歴，ヒエログリフ分類，配置されているマルチメディア単語およびマイクロアイコンなどに応じて検索される。
【００８３】
ユーザは、画面上に表示したマルチメディアヒエログリフから１つのマルチメディアヒエログリフを選択する。クライアント１２ａは、ユーザに選択されたマルチメディアヒエログリフを画面上に表示する。ステップＳ３３では、クライアント１２ａが新規のマルチメディアヒエログリフを画面上に表示する。
【００８４】
ステップＳ３２又はＳ３３に続いてステップＳ３４に進み、クライアント１２ａは画面上のマルチメディアヒエログリフにマルチメディア単語を配置するマルチメディア単語編集処理を行なう。また、ステップＳ３４に続いてステップＳ３５に進み、クライアント１２ａは画面上のマルチメディアヒエログリフにマイクロアイコンを添付するマイクロアイコン編集処理を行なう。
【００８５】
図１４は、マルチメディア単語編集処理の一例のフローチャートを示す。ステップＳ４１では、ユーザがクライアント１２ａを操作して画面上のマルチメディアヒエログリフからヒエログリフセルを選択する。
【００８６】
ステップＳ４１に続いてステップＳ４２に進み、クライアント１２ａはマルチメディア単語検索処理を行い、ユーザが選択したヒエログリフセルに応じてマルチメディア単語を検索する。ここで検索されるマルチメディア単語は、例えば使用頻度，履歴，単語分類などに応じて検索される。そして、ステップＳ４２に続いてステップＳ４３に進み、クライアント１２ａはマルチメディア単語検索処理により検索されたマルチメディア単語を画面上に表示する。
【００８７】
例えばユーザが「誰が」に対応するヒエログリフセル２ｃを選択した場合、クライアント１２ａは、図１５のような１つ以上のマルチメディア単語３１を画面上に表示する。図１５は、マルチメディア単語編集画面の一例のイメージ図を示す。図１５のマルチメディア単語編集画面は、マルチメディアヒエログリフ１，１つ以上のマルチメディア単語３１を含むように構成されている。
【００８８】
ステップＳ４３に続いてステップＳ４４に進み、ユーザは画面上に表示されたマルチメディア単語から１つのマルチメディア単語を選択し、選択したマルチメディア単語をステップＳ４１で選択したヒエログリフセルに配置する。例えば図１５のマルチメディア単語編集画面の場合、予めユーザはコピーボタン３２を選択してコピーモードに切り替えた後、ステップＳ４１でヒエログリフセル２ｃを選択している。ここで５つのマルチメディア単語３１から１つのマルチメディア単語をクリック等で選択することにより、選択したマルチメディア単語がステップＳ４１で選択したヒエログリフセル２ｃに配置される。
【００８９】
ステップＳ４４に続いてステップＳ４５に進み、クライアント１２ａはマルチメディアヒエログリフの作成が終了した旨の指示がユーザからあったか否かを判定する。マルチメディアヒエログリフの作成が終了した旨の指示がユーザからあったと判定すると（Ｓ４５においてＹＥＳ）、クライアント１２ａはマルチメディア単語編集処理を終了する。
【００９０】
一方、マルチメディアヒエログリフの作成が終了した旨の指示がユーザからなかったと判定すると（Ｓ４５においてＮＯ）、クライアント１２ａはステップＳ４１に進み、処理を続ける。図１４のマルチメディア単語編集処理により、例えば図２のようなマルチメディアヒエログリフ１を作成することができる。
【００９１】
図１６は、マイクロアイコン編集処理の一例のフローチャートを示す。ステップＳ５１では、ユーザがクライアント１２ａを操作して画面上のマルチメディアヒエログリフからヒエログリフセルを選択する。クライアント１２ａはユーザが選択したヒエログリフセルに応じて図１７のようなマイクロアイコン添付画面を画面上に表示する。図１７は、マイクロアイコン添付画面の一例のイメージ図を示す。
【００９２】
図１７（Ａ）は、どこで（場所）に対応するヒエログリフセル２ａのマイクロアイコン添付画面である。図１７（Ｂ）は、いつ（時間）に対応するヒエログリフセル２ｂのマイクロアイコン添付画面である。図１７（Ｃ）は、誰が（主語）に対応するヒエログリフセル２ｃのマイクロアイコン添付画面である。
【００９３】
図１７（Ｄ）は、何をどうする（述語）に対応するヒエログリフセル２ｄのマイクロアイコン添付画面である。図１７（Ｅ）は、なぜ（理由）に対応するヒエログリフセル２ｅのマイクロアイコン添付画面である。図１７（Ｆ）は、どのように（手段）に対応するヒエログリフセル２ｆのマイクロアイコン添付画面である。
【００９４】
図１７（Ａ）〜図１７（Ｆ）のマイクロアイコン添付画面は、添付位置４１〜４６の何れか一つと，添付位置４７〜５２とを有するように構成される。マイクロアイコンは、添付位置４１〜４９に添付することができる。なお、添付位置４１〜４９に添付することができるマイクロアイコンのグループは、予め以下の表１のように定義されている。
【００９５】
【表１】

添付位置４１は、場所の前置詞（例えば、「〜の上」など）に対応するマイクロアイコンを添付することができる。添付位置４２は、時の前置詞（例えば、「〜より以前」など）に対応するマイクロアイコンを添付することができる。添付位置４３は、動作の対象（例えば、「彼女へ」など）に対応するマイクロアイコンを添付することができる。添付位置４４は、動作のニュアンス（例えば、「〜しなければならない」など）に対応するマイクロアイコンを添付することができる。添付位置４５は、理由又は条件に対応するマイクロアイコンを添付することができる。添付位置４６は、感情，言語，方法，道具，輸送機関，材料などに対応するマイクロアイコンを添付することができる。
【００９６】
添付位置４７は、代名詞又は所有格（例えば、「私の」など）に対応するマイクロアイコンを添付することができる。添付位置４８は、修飾詞（例えば、「奇麗な」など）に対応するマイクロアイコンを添付することができる。添付位置４９は、疑問，否定，強調などに対応するマイクロアイコンを添付することができる。
【００９７】
添付位置５０〜５２は、マルチメディア単語が添付される。例えばヒエログリフセル２ｃに「私」に対応するマルチメディア単語を配置し、図１７（Ｃ）のマイクロアイコン添付画面の添付位置５０に「友達」に対応するマルチメディア単語を添付すれば、「私と友達」という表現が可能となる。
【００９８】
また、ヒエログリフセル２ｃに「私の家族」に対応するマルチメディア単語を配置し、図１７（Ｃ）のマイクロアイコン添付画面の添付位置５２に「おじいちゃん」に対応するマルチメディア単語を添付すれば、「おじいちゃんを除く私の家族」という表現が可能となる。
【００９９】
さらに、ヒエログリフセル２ｃに「私」に対応するマルチメディア単語を配置し、図１７（Ｃ）のマイクロアイコン添付画面の添付位置５１に「あなた」に対応するマルチメディア単語を添付すれば、「私かあなた」という表現が可能となる。
【０１００】
ステップＳ５１に戻り説明を続けると、ユーザはクライアント１２ａの画面上に表示された図１７（Ａ）〜図１７（Ｆ）の何れか１つのマイクロアイコン添付画面から添付位置４１〜５２の何れか１つを選択する。
【０１０１】
ステップＳ５１に続いてステップＳ５２に進み、クライアント１２ａはマイクロアイコン検索処理を行い、ステップＳ５１でユーザが選択したヒエログリフセル２ａ〜２ｆ及び添付位置４１〜５２に応じてマイクロアイコン又はマルチメディア単語を検索する。ステップＳ５２に続いてステップＳ５３に進み、クライアント１２ａはマイクロアイコン検索処理により検索されたマイクロアイコン又はマルチメディア単語を画面上に表示する。
【０１０２】
例えばユーザが「誰が」に対応するヒエログリフセル２ｃを選択し、マイクロアイコン添付画面の添付位置４７を選択した場合、クライアント１２ａは、図１８のような１つ以上のマイクロアイコン５５を画面上に表示する。図１８は、マイクロアイコン編集画面の一例のイメージ図を示す。図１８のマイクロアイコン編集画面は、１つ以上のマイクロアイコン５５，マイクロアイコン添付画面５６を含むように構成される。
【０１０３】
ステップＳ５３に続いてステップＳ５４に進み、ユーザは画面上に表示されたマイクロアイコン５５から１つのマイクロアイコンを選択し、選択したマイクロアイコンをステップＳ５１で選択した添付位置４１〜４９の何れか１つに添付する。例えば図１８のマイクロアイコン編集画面の場合、２つのマイクロアイコン５５から１つのマイクロアイコンを選択し、マイクロアイコン添付ボタン５７をクリック等することにより、選択したマイクロアイコンがステップＳ５１で選択した添付位置４７に配置される。
【０１０４】
ステップＳ５４に続いてステップＳ５５に進み、クライアント１２ａはマイクロアイコンの編集が終了した旨の指示がユーザからあったか否かを判定する。マイクロアイコンの編集が終了した旨の指示がユーザからあったと判定すると（Ｓ５５においてＹＥＳ）、クライアント１２ａはマイクロアイコン編集処理を終了する。一方、マイクロアイコンの編集が終了した旨の指示がユーザからなかったと判定すると（Ｓ５５においてＮＯ）、クライアント１２ａはステップＳ５１に進み、処理を続ける。図１６のマイクロアイコン編集処理により、例えば図３のようなマルチメディアヒエログリフ１を作成することができる。
【０１０５】
図１４のマルチメディア単語編集処理及び図１６のマイクロアイコン編集処理により、クライアント１２ａは図１９のようなマルチメディアヒエログリフテーブルのレコードを作成することができる。図１９は、マルチメディアヒエログリフテーブルの一例の構成図を示す。
【０１０６】
マルチメディアヒエログリフテーブルは、マルチメディアヒエログリフ１に配置又は添付されたマルチメディア単語及びマイクロアイコンとを関連付けるものである。例えばデータ項目「ｗｈｅｒｅ０」〜「ｗｈｅｒｅ７」は、「どこで」に対応するヒエログリフセル２ａに配置又は添付されたマルチメディア単語及びマイクロアイコンのマルチメディア単語グループ及びマイクロアイコングループを表している。
【０１０７】
なお、データ項目「ｗｈｅｎ０」〜「ｗｈｅｎ７」，「ｗｈｏ０」〜「ｗｈｏ７」，「ｗｈａｔ０」〜「ｗｈａｔ７」，「ｗｈｙ０」〜「ｗｈｙ７」，「ｈｏｗ０」〜「ｈｏｗ７」もデータ項目「ｗｈｅｒｅ０」〜「ｗｈｅｒｅ７」と同様であるので説明を省略する。
【０１０８】
ところで、本発明で利用するマルチメディア単語は、自身についての多角的な説明を有する自己説明型コンポーネントであり、自身について多角的な説明を行なう辞書機能を有している。
【０１０９】
例えばマルチメディア単語を選択して辞書機能を利用すると、図２０のような多角ビュー画面がクライアント１２ａに表示される。図２０は、多角ビュー画面の一例のイメージ図を示す。
【０１１０】
多角ビュー画面は、選択されたマルチメディア単語についての基本ビュー６０を画面上に表示し、選択されたマルチメディア単語についての補助ビュー６１を画面上に表示する。
【０１１１】
基本ビュー６０には、選択されたマルチメディア単語が表示されている。補助ビュー６１には、１つ以上のアイコン６２及び画像６３が表示されている。したがって、基本ビュー６０に表示されているマルチメディア単語の多角的な説明が補助ビュー６１に含まれているため、ユーザは事前に学習しなくてもマルチメディア単語を直感的に理解することができる。
【０１１２】
なお、アイコン６２は、様々な画像又は短いハイパーテキストによる説明，音声読み上げ等にアクセスする為のボタンである。現在、画像による説明が選択されているので、補助ビュー６１にはマルチメディア単語に対応する様々な画像６３が表示されている。短いハイパーテキストによる説明など他の説明が選択された場合、補助ビュー６１には選択に応じてハイパーテキストなどが表示される。ユーザは、辞書機能をいつでも呼び出すことができるので、マルチメディア単語の説明を極めて容易に得ることができる。
【０１１３】
また、前述したステップＳ４２のマルチメディア単語検索処理およびステップＳ５２のマイクロアイコン検索処理は、図８のユーザ情報テーブルに含まれるデータ項目「ＣｕｌｔｕｒｅＩＤ」，「ＳｃｒｅｅｎＰｅｔＩＤ」等に応じて検索結果を変更することができる。例えば、ユーザに応じて言語や画像を変更することができる。
【０１１４】
ユーザが子供の場合、図１５のマルチメディア単語編集画面を図２１のような子供用のマルチメディア単語編集画面に変更することができる。図２１は、子供用のマルチメディア単語編集画面の一例のイメージ図を示す。
【０１１５】
図２１のマルチメディア単語編集画面は、画面上にスクリーンペット７１が表示されており、そのスクリーンペット７１との対話形式で編集が行われる。具体的には、スクリーンペット７１がユーザに対して吹き出し及び音声などにより質問を行う。スクリーンペット７１が行う質問内容は、マルチメディア単語の編集に関するものである。
【０１１６】
ヒエログリフ７０は、編集中のヒエログリフセルをハイライトする。図２１のマルチメディア単語編集画面では、チューリップの形状をしたヒエログリフ７０が表示されている。
【０１１７】
１つ以上のマルチメディア単語７２は、ハイライトされたヒエログリフセルで使用可能なものである。図２１のマルチメディア単語編集画面では、マルチメディア単語検索処理を行い、検索された１つ以上のマルチメディア単語７２が大砲のアイコン７３から発射される。マルチメディア単語７２の数が多い場合、アイコン７３は複数のグループに分けられたマルチメディア単語を一定間隔ごとに発射してもよい。
【０１１８】
ユーザは、マルチメディア単語編集画面上に表示されたマルチメディア単語７２から１つのマルチメディア単語を選択することで、選択したマルチメディア単語をハイライトされたヒエログリフセルに配置することができる。
【０１１９】
その他のヒエログリフおよびマイクロアイコンについても同様に処理することができる。スクリーンペット７１が行う質問内容および回数は、ユーザのレベルに応じて変更することが可能である。
【０１２０】
ステップＳ１４のマルチメディアメッセージ送信処理では、ユーザがクライアント１２ａを操作し、ステップＳ１３で作成されたマルチメディアメッセージを送信する送信先を選択する。マルチメディアメッセージの送信先の選択は、ステップＳ１０のログイン処理と同様にユーザ画像を利用して行なうことができる。
【０１２１】
なお、マルチメディアメッセージに含まれるマルチメディアヒエログリフは１つ以上であればよく、マルチメディアヒエログリフとマルチメディア単語との混合であってもよい。
【０１２２】
本発明によるマルチメディアメッセージ送受信用プログラムでは、マルチメディアメッセージの作成，閲覧，送受信がマウス等のポインティングデバイスのみで行なうことができ、情報弱者であっても容易に利用することができる。また、マルチメディア単語を直観的に理解することができる為、汎用性のあるコミュニケーションを実現することが可能である。
【０１２３】
【発明の効果】
上述の如く、本発明によれば、自己説明型コンポーネントの理解が容易であるため、習得までの時間を大幅に短縮することができる。また、本発明によれば、マルチメディア単語で表現した文章の主語，述語，場所，時間，理由，手段を相手に伝えることにより、意思を伝達することができる。
【０１２４】
また、本発明によれば、マルチメディア単語に付加されている１つ以上のマルチメディアコンテンツ，分類情報，統計情報などにより、意味，性質，使用法などのマルチメディア単語の多角的な説明を得ることができる。また、本発明によれば、簡単な操作でユーザが伝達したい意思に応じた文書をマルチメディア単語で表現することが可能である。
【０１２５】
また、本発明によれば、ユーザの技術レベル，障害，年齢，性別，文化，地域などによらずに意思を伝達することができる。また、本発明によれば、ユーザは自分のレベルに応じた画面構成および操作手法を利用することができる。また、本発明によれば、マルチメディア単語は、自身についての多角的な説明を画像情報，文字情報，音情報の少なくとも１つを利用して行なうことができる。
【０１２６】
したがって、習得及び操作が容易であり、汎用性のあるコミュニケーションを実現することが可能である。
【０１２７】
【図面の簡単な説明】
【図１】マルチメディアヒエログリフの一実施例のイメージ図である。
【図２】マルチメディア単語を配置したマルチメディアヒエログリフの一実施例のイメージ図である。
【図３】マイクロアイコンを配置したマルチメディアヒエログリフの一実施例のイメージ図である。
【図４】本発明のコミュニケーション方法を実現するシステムの一実施例の構成図である。
【図５】本発明によるコミュニケーションサーバ及びクライアントの一例の構成図である。
【図６】本発明のコミュニケーション方法を実現するシステムの処理の一例のフローチャートである。
【図７】ログイン処理の一例のフローチャートである。
【図８】ユーザ情報テーブルの一例の構成図である。
【図９】サインテーブルの一例の構成図である。
【図１０】所属団体テーブルの一例の構成図である。
【図１１】カウンタテーブルの一例の構成図である。
【図１２】マンスリーカウンタテーブルの一例の構成図である。
【図１３】マルチメディアメッセージ作成処理の一例のフローチャートである。
【図１４】マルチメディア単語編集処理の一例のフローチャートである。
【図１５】マルチメディア単語編集画面の一例のイメージ図である。
【図１６】マイクロアイコン編集処理の一例のフローチャートである。
【図１７】マイクロアイコン添付画面の一例のイメージ図である。
【図１８】マイクロアイコン編集画面の一例のイメージ図である。
【図１９】マルチメディアヒエログリフテーブルの一例の構成図である。
【図２０】多角ビュー画面の一例のイメージ図である。
【図２１】子供用のマルチメディア単語編集画面の一例のイメージ図である。
【符号の説明】
１，７０ マルチメディアヒエログリフ
２ａ〜２ｆ ヒエログリフセル
３ａ〜３ｆ，３１，７２ マルチメディア単語
４，５５ マイクロアイコン
１０ システム
１１ コミュニケーションサーバ
１２ａ〜１２ｎ クライアント
１３ 基地局
１４ 移動通信端末
１５ ネットワーク
２１ 入力装置
２２ 表示装置
２３ ドライブ装置
２４ 記録媒体
２５ 補助記憶装置
２６ メモリ装置
２７ 演算処理装置
２８ インターフェース装置
２９ データベース（ＤＢ）
３２ コピーボタン
４１〜５２ 添付位置
５６ マイクロアイコン添付画面
５７ マイクロアイコン添付ボタン
６０ 基本ビュー
６１ 補助ビュー
６２，７３ アイコン
６３ 画像
７１ スクリーンペット

Claims (5)

1. コンピュータを用いて意思の伝達を行うコミュニケーション方法であって、
   各種データは予めデータベースに記憶し、
   ユーザからの指示に応じて前記ユーザが伝達したい意思に応じた文章を、事物や動作の過程を直感的に理解させる１つ以上のマルチメディア単語で表現する文章表現段階と、
   ユーザからの指示に応じて前記１つ以上のマルチメディア単語で表現した文章を、前記ユーザが意思の伝達を行いたい相手に提供する提供段階とを有し、
   前記文章表現段階が、時間と場所と主語と述語と理由と手段とを表す６つのヒエログリフセルで構成されたマルチメディアヒエログリフに、マルチメディア単語を配置する単語編集処理を有し、
   該単語編集処理では、選択されたヒエログリフセルに応じたマルチメティア単語を使用頻度に応じて検索し、該検索されたマルチメディア単語を画面に表示し、該画面に表示されたマルチメディア単語から選択された一つのマルチメティア単語をヒエログリフセルに配置するコミュニケーション方法。
2. マルチメディア単語が、自身についての説明を行う辞書機能を有し、該自身についての説明を、画像情報、文字情報又は音情報の少なくとも１つを利用して行う請求項１記載のコミュニケーション方法。
3. マルチメディア単語を形成する代名詞、所有格、修飾詞又はその他のマルチメディア単語を設けた請求項１又は２に記載のコミュニケーション方法。
4. 請求項１乃至３の何れかに記載のコミュニケーション方法を実現させるマルチメディアメッセージ送受信用プログラム。
5. 請求項４のマルチメディアメッセージ送受信用プログラムを記録したコンピュータ読み取り可能な記録媒体。

Images