JP2012190112A - 電子データ作成装置、電子データ作成方法、及び電子データ作成プログラム - Google Patents

Abstract

【課題】挿入データを選択する作業を軽減すると共に、実質的に有効な選択肢を表示できるようにする。
【解決手段】電子データ作成装置１は、複数の挿入データを記憶する挿入データ記憶部２と、複数の感情種別と複数の挿入データとを一対多の関係で関連付ける関連付けデータを記憶する関連付けデータ記憶部３と、ユーザの現在の感情を取得する感情取得部４と、ユーザの現在の感情と関連付けデータとに基づいてユーザの現在の感情に関連する複数の挿入データを取得する挿入データ取得部５と、挿入データ取得部５によって取得された複数の挿入データを他の挿入データより優先的に表示する挿入データ表示部６と、挿入データ表示６によって表示されている複数の挿入データのうちユーザによって選択された挿入データを電子データに挿入する挿入部７とを有する。
【選択図】図１

Description

本発明は、電子データ作成装置、電子データ作成方法、及び電子データ作成プログラムに関する。

この種の技術として、特許文献１は、カメラ付き携帯電話機でメールを作成するに際し、メール作成中に撮像した自分自身の顔写真を解析し、顔の表情を認識して感情を判定し、その感情に対応する顔文字又は顔絵文字を生成してメールの件名や本文の指定位置に挿入する技術を開示している。また、特許文献１の段落番号００３８〜００４５には、カメラの現在の被写界をリアルタイムに撮影して生成される所謂スルー画像に基づいて感情判定を行い、希望の感情表現にマッチした顔アイコンが画面上に表示されたら、その顔アイコンをユーザが選択することにより、その顔アイコンがメールの本文の指定位置に挿入される変形例が記載されている。この変形例では、現在のスルー画像に一対一で対応した顔アイコンの他、過去の顔写真に対応した顔アイコンも同時に画面上に表示されるようになっており、ユーザは、表示されている複数の顔アイコンから希望する顔アイコンを選択できるようになっている。

特開２００９−２５３９３１号公報

ところで、昨今の携帯電話機は、電子メールの件名や本文中に挿入できる顔文字（文字や記号を組み合わせて顔の表情等を表現したもの）や絵文字（顔の表情等を表現したイメージデータ（アニメーションＧＩＦを含む））（以下、単に「絵文字等」と称する）として、５０００種以上のバリエーションを用意している。このように膨大なバリエーションの絵文字等が用意されること自体に問題はないが、一方で、希望する絵文字等を探し出す作業の困難性が看過できないレベルにまで達してきている。

このような問題に対し、上記特許文献１の変形例は、ユーザの作業を軽減する点で有効である。しかしながら、当該変形例においては、上記のようにメール作成中のユーザの表情に一対一で対応した絵文字等の他には、過去の顔写真に対応した顔アイコン、即ち現在の表情（感情）とは関係のない絵文字等しか候補として表示されない。そのため、ユーザにとって実質的に有効な選択肢がほとんどない状態となる場合がある。

そこで、本発明は、電子メール等の電子データに絵文字等の挿入データを挿入するに際し、ユーザが挿入データを選択する作業を軽減すると共に、ユーザに実質的に有効な複数の選択肢を与えられるようにすることを課題とする。

本発明の第１の態様は、電子データを作成するための電子データ作成装置であって、前記電子データに挿入可能な複数の挿入データを記憶する挿入データ記憶手段と、複数の感情種別と前記複数の挿入データとを一対多の関係で関連付ける関連付けデータを記憶する関連付けデータ記憶手段と、前記電子データを作成しているユーザの現在の感情を取得する感情取得手段と、前記感情取得手段によって取得された前記ユーザの現在の感情と前記関連付けデータ記憶手段によって記憶されている関連付けデータとに基づいて前記ユーザの現在の感情に関連する前記複数の挿入データを取得する挿入データ取得手段と、前記挿入データ取得手段によって取得された前記複数の挿入データを他の挿入データより優先的に表示する挿入データ表示手段と、前記挿入データ表示手段によって表示されている前記複数の挿入データのうち前記ユーザによって選択された挿入データを前記電子データに挿入する挿入手段とを有するものである。

また、本発明の第２の態様は、電子データを作成するための電子データ作成方法であって、前記電子データを作成しているユーザの現在の感情を取得する感情取得ステップと、前記感情取得ステップによって取得された前記ユーザの現在の感情と、複数の感情種別と前記電子データに挿入可能な複数の挿入データとを一対多の関係で関連付ける関連付けデータとに基づいて、前記ユーザの現在の感情に関連する前記複数の挿入データを取得する挿入データ取得ステップと、前記挿入データ取得ステップによって取得された前記複数の挿入データを他の挿入データより優先的に表示する挿入データ表示ステップと、前記挿入データ表示ステップによって表示されている前記複数の挿入データのうち前記ユーザによって選択された挿入データを前記電子データに挿入する挿入ステップとを有するものである。

更に、本発明の第３の態様は、電子データを作成するための電子データ作成プログラムであって、コンピュータに、前記電子データを作成しているユーザの現在の感情を取得する感情取得処理と、前記感情取得処理によって取得された前記ユーザの現在の感情と、複数の感情種別と前記電子データに挿入可能な複数の挿入データとを一対多の関係で関連付ける関連付けデータとに基づいて、前記ユーザの現在の感情に関連する前記複数の挿入データを取得する挿入データ取得処理と、前記挿入データ取得処理によって取得された前記複数の挿入データを他の挿入データより優先的に表示する挿入データ表示処理と、前記挿入データ表示処理によって表示されている前記複数の挿入データのうち前記ユーザによって選択された挿入データを前記電子データに挿入する挿入処理とを実行させるものである。

本発明によれば、ユーザの現在の感情に適合すると共に、ユーザが選択する蓋然性が高いと考えられる絵文字等（挿入データ）を複数個、優先的に選択候補として表示することができる。これにより、ユーザが挿入データを選択する負担を軽減することができると共に、ユーザは実質的に有効な選択肢の中から好みの挿入データを選択する楽しさを得ることができる。

図１は、本発明の実施の形態１に係る電子データ作成装置の機能的な構成を示すブロック図である。 図２は、実施の形態１に係る電子データ作成装置が適用される電子機器の具体例を示す図である。 図３は、実施の形態１に係る電子データ作成装置により電子データを作成する際の画面を例示する図である。 図４は、実施の形態１に係る電子データ作成装置が適用される電子機器のハードウェア構成を例示するブロック図である。 図５は、実施の形態１に係る電子データ作成装置の動作を例示するフローチャートである。

実施の形態１
以下、図面を参照して本発明の実施の形態について説明する。図１は、本実施の形態に係る電子データ作成装置１の機能的な構成を示している。図２は、当該電子データ作成装置１が適用される電子機器１０の具体例を示している。当該電子機器１０は、いわゆる携帯電話機１０であり、表示部１１、入力部１２、及び撮像部１３を有する。

図１に示す電子データ作成装置１は、電子メール等の電子データを作成するための装置であって、挿入データ記憶部２、関連付けデータ記憶部３、感情取得部４、挿入データ取得部５、挿入データ表示部６、及び挿入部７を有する。

挿入データ記憶部２は、電子データに挿入可能な絵文字等の挿入データを記憶する機構である。

関連付けデータ記憶部３は、複数の感情種別（喜び、悲しみ、怒り等）と複数の挿入データとを一体多の関係で関連付けるデータを記憶する機構である。

感情取得部４は、電子データを作成しているユーザの現在の感情を取得（コンピュータを利用して推定）する機構である。

挿入データ取得部５は、上記感情取得部４によって取得されたユーザの現在の感情と、上記関連付けデータ記憶部３に記憶されている関連付けデータとに基づいて、ユーザの現在の感情に関連する複数の挿入データを取得（データベースから抽出）する機構である。

挿入データ表示部６は、上記挿入データ取得部５によって取得された複数の挿入データを他の挿入データより優先的に表示部１１に表示する機構である。

挿入部７は、上記挿入データ表示部６によって表示されている複数の挿入データのうちユーザによって選択された挿入データを電子メール等の電子データに挿入する機構である。

図３は、上記電子データ作成装置１により電子データ（電子メールの送信文書）を作成する際の画面を例示している。本例において、文章部分の最後には、絵文字１６が挿入されている。当該絵文字１６は、表示部１１の下方に設けられた挿入データ候補欄１７に表示された複数の絵文字等の候補から選択される。

上記電子データ作成装置１によれば、挿入データ候補欄１７に、上記感情取得部４により取得（推定）された感情に関連付けられた複数の絵文字等のみを優先的に表示することが可能となる。また、当該候補は、１つの感情種別に対して一対多の関係で関連付けられた絵文字等であるため、常に複数個表示される。

また、挿入データ候補欄１７には、通常、絵文字等をジャンル毎に区分けする複数のタブ１８が設けられている。これらのタブ１８の１つとして「感情」タブ１９を設け、当該「感情」タブ１９を選択する操作をすることにより、上記ユーザの感情に対応した複数の候補が表示されるようにすることが好ましい。

このように、ユーザの感情に対応して絵文字等の候補が自動的に絞り込まれることにより、ユーザが絵文字等を選択する負担が軽減される。また、現在の感情に対応する絵文字等の候補が常に複数個挙げられるため、ユーザは好みのものを選択する楽しさを得ることができる。

図４は、上記電子データ作成装置１が適用される携帯電話機１０のハードウェア構成を例示している。携帯電話機１０は、中央処理装置２１、記憶装置２２、通信装置２３、表示装置２４、入力装置２５、及び撮像装置２６を有している。

中央処理装置２１は、記憶装置２２に格納されたプログラム群３０及びデータベース群４０に基づいて、各種演算・制御処理を実行する。

通信装置２３は、通話、電子メールの送受信、インターネット閲覧、プログラムのダウンロード等の機能を実現するために必要な信号の送受信処理を実行する。

表示装置２４（表示部１１）は、ＬＣＤ(Liquid Crystal Display)等であり、各種情報を表示する。

入力装置２５（入力部１２）は、ボタン、レバー等からなり、各種機能の実行時におけるユーザの操作を受け付ける。尚、タッチパネル機構を備える場合には、表示装置２４が入力装置２５の一部を構成する。

撮像装置２６（撮像部１３）は、携帯電話機１０の外部の画像情報を取得するものであり、本実施の形態においては、携帯電話機１０を操作している（表示部１１に対面している）ユーザの顔の画像を取得できる位置にレンズが設けられている。

上記記憶装置２２には、文章作成プログラム３１、感情認識プログラム３２、絵文字等抽出プログラム３３、絵文字等データベース４１、関連付けデータベース４２、及び感情データベース４３が格納されている。

文書作成プログラム３１は、文字、記号、絵文字等からなる文書を作成するためのものであり、電子メールを作成する時等に機能する。

感情認識プログラム３２は、撮像装置２６により取得されたユーザの顔の画像情報と、感情データベース４３とに基づいて、ユーザの感情をリアルタイムに推定する。感情データベース４３には、顔の表情に対応する画像データの特徴と感情の種別との対応関係等が記憶されている。

絵文字等抽出プログラム３３は、感情認識プログラム３２の動作により推定されたユーザの感情と、関連付けデータベース４２とに基づいて、ユーザの感情に対応する複数の絵文字等を抽出する。関連付けデータベース４２においては、複数の感情種別（喜び、悲しみ、怒り等）と複数の絵文字等とが、一体多の関係で関連付けられている。

図５は、上記電子データ作成装置１の動作を例示している。先ず、ユーザが入力部１２に対して所定の操作を行うと（Ｓ１０１）、電子メールを作成するためのメールアプリケーションが起動する（Ｓ１０２）と共に、携帯電話機１０の前面側（ユーザの顔に対面する位置）に配置された撮像部１３が起動する（Ｓ１０３）。この時、表示部１１には撮像部１３により取得された画像（プレビュー）は表示されない。

その後、ユーザが電子メールの作成を開始すると（Ｓ１０４）、上記感情認識プログラムが起動し（Ｓ１０５）、撮像部１３により取得された画像情報から現在のユーザの感情が認識（推定）される（Ｓ１０６）。

その後、ステップＳ１０６において認識された感情に対応する複数の絵文字等が、上記関連付けデータベース４２及び絵文字等データベース４１を参照することによって選定される（Ｓ１０７）。当該選定は、ユーザの表情の変化に追従してリアルタイムに行われる。

その後、ユーザが上記「感情」タブ１９（図３参照）を選択する操作を行うことにより（Ｓ１０８）、ステップＳ１０７で選定された最新の感情に対応する絵文字等が表示され（Ｓ１０９）、ユーザは表示された複数の絵文字等から使用したいものを選択する（Ｓ１１０）。

上記のようにして電子メールを作成し、送信すると（Ｓ１１１）、上記感情認識機能、前面カメラ（撮像部１３）、及びメールアプリケーションがＯＦＦとなる（Ｓ１１２）。

上記のように、本実施の形態に係る電子データ作成装置１によれば、ユーザの現在の感情に適合すると共に、ユーザが選択する蓋然性が高いと考えられる絵文字等（挿入データ）を複数個、優先的に選択候補として表示することができる。これにより、ユーザが挿入データを選択する負担を軽減することができると共に、ユーザは実質的に有効な選択肢の中から好みの挿入データを選択する楽しさを得ることができる。

尚、本発明は上記実施の形態に限られるものではなく、趣旨を逸脱しない範囲で適宜変更することが可能なものである。例えば、上記実施の形態においては、電子データ作成装置１が適用される電子機器として携帯電話機が例示されているが、本発明はこれに限定されるものではなく、ユーザ自身を撮影可能な撮像機構を備えるパーソナルコンピュータ等の各種機器に適用可能なものである。また、上記電子データとして電子メールが例示されているが、本発明はこれに限定されるものではなく、通常のワープロソフトを用いて文書を作成する場合にも適用可能なものである。

１ 電子データ作成装置
２ 挿入データ記憶部
３ 関連付けデータ記憶部
４ 感情取得部
５ 挿入データ取得部
６ 挿入データ表示部
７ 挿入部
１０ 電子機器（携帯電話機）
１１ 表示部
１２ 入力部
１３ 撮像部
１６ 絵文字
１７ 挿入データ候補欄
１８ タブ
１９ 「感情」タブ
２１ 中央処理装置
２２ 記憶装置
２３ 通信装置
２４ 表示装置
２５ 入力装置
２６ 撮像装置
３０ プログラム群
４０ データベース群

Claims (7)

1. 電子データを作成するための電子データ作成装置であって、
   前記電子データに挿入可能な複数の挿入データを記憶する挿入データ記憶手段と、
   複数の感情種別と前記複数の挿入データとを一対多の関係で関連付ける関連付けデータを記憶する関連付けデータ記憶手段と、
   前記電子データを作成しているユーザの現在の感情を取得する感情取得手段と、
   前記感情取得手段によって取得された前記ユーザの現在の感情と前記関連付けデータ記憶手段によって記憶されている関連付けデータとに基づいて前記ユーザの現在の感情に関連する前記複数の挿入データを取得する挿入データ取得手段と、
   前記挿入データ取得手段によって取得された前記複数の挿入データを他の挿入データより優先的に表示する挿入データ表示手段と、
   前記挿入データ表示手段によって表示されている前記複数の挿入データのうち前記ユーザによって選択された挿入データを前記電子データに挿入する挿入手段と、
   を有する電子データ作成装置。
2. 前記挿入データ表示手段は、前記挿入データ取得手段によって取得された前記複数の挿入データのみを表示する、
   請求項１に記載の電子データ作成装置。
3. 前記挿入データ取得手段は、前記感情取得手段によって取得される前記ユーザの感情の変化に追従して前記複数の挿入データを更新する、
   請求項１又は２に記載の電子データ作成装置。
4. 前記感情取得手段は、前記電子データを作成している時の前記ユーザの顔の画像データに基づいて前記感情を取得する、
   請求項１〜３のいずれか１つに記載の電子データ作成装置。
5. 前記電子データは、電子メールである、
   請求項１〜４のいずれか１つに記載の電子データ作成装置。
6. 電子データを作成するための電子データ作成方法であって、
   前記電子データを作成しているユーザの現在の感情を取得する感情取得ステップと、
   前記感情取得ステップによって取得された前記ユーザの現在の感情と、複数の感情種別と前記電子データに挿入可能な複数の挿入データとを一対多の関係で関連付ける関連付けデータとに基づいて、前記ユーザの現在の感情に関連する前記複数の挿入データを取得する挿入データ取得ステップと、
   前記挿入データ取得ステップによって取得された前記複数の挿入データを他の挿入データより優先的に表示する挿入データ表示ステップと、
   前記挿入データ表示ステップによって表示されている前記複数の挿入データのうち前記ユーザによって選択された挿入データを前記電子データに挿入する挿入ステップと、
   を有する電子データ作成方法。
7. 電子データを作成するための電子データ作成プログラムであって、
   コンピュータに、
   前記電子データを作成しているユーザの現在の感情を取得する感情取得処理と、
   前記感情取得処理によって取得された前記ユーザの現在の感情と、複数の感情種別と前記電子データに挿入可能な複数の挿入データとを一対多の関係で関連付ける関連付けデータとに基づいて、前記ユーザの現在の感情に関連する前記複数の挿入データを取得する挿入データ取得処理と、
   前記挿入データ取得処理によって取得された前記複数の挿入データを他の挿入データより優先的に表示する挿入データ表示処理と、
   前記挿入データ表示処理によって表示されている前記複数の挿入データのうち前記ユーザによって選択された挿入データを前記電子データに挿入する挿入処理と、
   を実行させる電子データ作成プログラム。

Images