JP2008242693A - データ処理装置、データ処理方法、及びプログラム - Google Patents

Abstract

【課題】閲覧者が文章と画像との各々から受ける印象を近づける。
【解決手段】データベース５８には、予め用意されているキーワードと該キーワードが表現している感情とが予め対応付けられている。文章処理部５４は、該キーワードが、入力された文章を構成している各文に含まれているか否かを判定する。そして、この判定により該文に含まれていると判定したキーワードについてデータベース５８で対応付けられている感情を、当該文に込められている感情の分析結果として出力する。画像処理部５６は、該文章とともに入力された画像を、文章処理部５４による分析結果に基づいて変化させる。
【選択図】 図３

Description

本発明は、データ処理技術に関し、特に、連携した文章データ及び画像データの処理技術に関する。

本発明に関し、例えば特許文献１には、文章を文節単位に解析して表現の異なる文節候補を文節毎に表示し、任意の文節において文節候補の選択が行われると、他の文節における文節候補のうち当該選択に係る文節候補と関連付けがされているものを強調表示することで、表現の統一された文章の作成を容易に行えるようにするという技術が開示されている。

また、本発明に関し、例えば特許文献２には、感情を表現する所定の画像と感情を要素値とする感情ベクトルとを関連付けた画像データベースを用意しておき、入力文章に含まれている感情を表す単語についての感情ベクトルを辞書検索に基づいて算出し、この算出結果に最も近い感情ベクトルに関連付けられている画像を当該画像データベースから選択して表示することで、入力文章に表されている感情をきめこまかく豊かに表現できるようにするという技術が開示されている。

また、例えば非特許文献１には、生体認証の技術的、制度的な取り組みについての記事が掲載されており、この記事では、顔認証を行うために顔画像から目、鼻、口などといった局所の部分画像を、照合のために抽出する技術が紹介されている。
特開２００２−２９７５８１号公報 特開２００５−２０８８９２号公報 「生体認証大ブレーク―可能性と課題―」，日経バイト２００５年１０月号，日本，日経ＢＰ社，２００５年９月２２日，第２６９号，ｐ．２８−４７

昨今、インターネット上のウェブサイトとして急激に増加しているもののひとつに、ブログ（Blog）がある。ブログは、元々はウェブログ（Weblog）の略であり、作成者の個人的な体験や特定の記事に関する話題などといった情報を日記のように時系列で公開するウェブサイトである。

ブログ作成用のツールとして、文章と共に画像を公開する機能を有しているものがある。多くの人に閲覧されるような人気の高いブログを作成する観点からは、ブログの閲覧者が画像を一目見ただけで併せて公開する文章へ注意を喚起させるようにするために、公開する画像として、その文章の印象に適合しているものを用いることが好ましい。

本発明は上述した問題に鑑みてなされたものであり、その解決しようとする課題は、閲覧者が文章と画像との各々から受ける印象を近づけることである。

本発明の態様のひとつであるデータ処理装置は、入力された文章データ及び画像データを格納する格納手段と、予め用意されているキーワードと該キーワードが表現している感情を示している感情情報とが予め対応付けられて格納されているデータベースと、前記データベースに格納されているキーワードが、前記文章データで表されている文章を構成している各文に含まれているか否かを判定する判定手段と、前記文章を構成している各文に込められている感情の分析結果として、前記判定手段が該文に含まれていると判定したキーワードについて前記データベースにおいて対応付けられている感情情報で示されている感情を出力する感情分析手段と、前記画像データで表されている画像を、前記感情分析手段による分析結果に基づいて変化させて出力する画像変化手段と、を有することを特徴とするものであり、この特徴によって前述した課題を解決する。

なお、上述した本発明に係るデータ処理装置において、前記画像変化手段は、前記画像の明度、コントラスト、彩度、及び該画像を表示する際の表示サイズのうちの少なくとも１つ以上を変化させることで該画像を変化させるように構成してもよい。

また、前述した本発明に係るデータ処理装置において、前記画像変化手段は、前記画像に他の画像を合成することで該画像を変化させるように構成してもよい。
また、前述した本発明に係るデータ処理装置において、前記画像データは、人物の顔を撮影して得られた顔画像の画像データであり、前記画像変化手段は、前記顔画像に表されている人物の顔の形態を変形させる、ように構成してもよい。

なお、このとき、前記画像変化手段は、前記顔画像に表されている人物の顔における目及び口のうちの少なくともどちらか一方の形態を変形させるように構成してもよい。
あるいは、このとき、前記画像変化手段は、更に、前記顔画像における前記人物の顔以外の領域である背景領域の明度を変化させるように構成してもよい。

また、前述した本発明に係るデータ処理装置において、前記文章データで表現されている文章は複数の文で構成されており、前記判定手段は、前記文章を構成している各文について前記キーワードの有無の判定を行い、前記感情分析手段は、前記文章に込められている感情の分析を、該文章を構成している各文について行い、前記画像変化手段は、前記文章を構成している各文についての前記感情分析手段による分析の結果、該各文に込められている感情が同一であるものが存在した場合には、その数に応じて前記画像の変化の程度を制御する、ように構成してもよい。

また、本発明の別の態様のひとつであるデータ処理方法は、データ処理装置によって行われるデータ処理の方法であって、前記データ処理装置の有する格納手段が、入力された文章データ及び画像データを格納し、前記データ処理装置の有するデータベースであって、予め用意されているキーワードと該キーワードが表現している感情を示している感情情報とが予め対応付けられて格納されている該データベースに格納されている該キーワードが、前記文章データで表されている文章を構成している各文に含まれているか否かを、該データ処理装置の有する判定手段が判定し、前記データ処理装置の有する感情分析手段が、前記文章を構成している各文に込められている感情の分析結果として、前記判定手段が該文に含まれていると判定したキーワードについて前記データベースにおいて対応付けられている感情情報で示されている感情を出力し、前記データ処理装置の有する画像変化手段が、前記画像データで表されている画像を、前記感情分析手段による分析結果に基づいて変化させて出力する、ことを特徴とするものであり、この特徴によって前述した課題を解決する。

また、本発明の更なる別の態様のひとつであるプログラムは、入力された文章データ及び画像データをコンピュータが有している記憶部に格納する格納処理と、予め用意されているキーワードと該キーワードが表現している感情を示している感情情報とが予め対応付けられて格納されているデータベースに格納されている該キーワードが、前記文章データで表されている文章を構成している各文に含まれているか否かを判定する判定処理と、前記文章を構成している各文に込められている感情の分析結果として、前記判定処理により該文に含まれていると判定したキーワードについて前記データベースにおいて対応付けられている感情情報で示されている感情を出力する感情分析処理と、前記画像データで表されている画像を、前記感情分析処理による分析結果に基づいて変化させて出力する画像変化処理と、をコンピュータに行わせるためのプログラムであり、このプログラムをコンピュータに実行させることによっても、前述した課題は解決される。

本発明によれば、以上のようにすることにより、閲覧者が文章と画像との各々から受ける印象を近づけることができるようになるという効果を奏する。

以下、本発明の実施の形態を図面に基づいて説明する。
図１は本発明を実施するデータ処理装置であるブログサイトサーバを含む通信ネットワークの構成を示している。

図１において、インターネット３５は通信ネットワークである。図１においては、インターネット３５には、ブログサービスを提供するコンピュータであるブログサイトサーバ５１と、ＰＣ（パーソナルコンピュータ）３２及び３４とが接続されている。ここで、ＰＣ３２はブログの作成者が操作するコンピュータであり、ＰＣ３４はブログの閲覧者が操作するコンピュータである。

なお、ブログサイトサーバ５１並びにＰＣ３２及び３４はいずれもごく標準的な構成のコンピュータであり、制御プログラムの実行によってコンピュータ全体の動作制御を司るＭＰＵ（演算処理装置）、このＭＰＵが必要に応じてワークメモリとして使用するメインメモリ、マウスやキーボードなどといったユーザからの各種の指示を取得するための入力部、他の機器と直接に、若しくはインターネット３５を介して各種データの授受を管理するインタフェースユニット、及び、各種のプログラムやデータを記憶しておく例えばハードディスク装置なとの補助記憶装置を有している。

ＰＣ３２にはカメラ１０が接続されている。このカメラ１０は、いわゆるデジタルカメラであり、被写体の撮影を行うと、当該被写体についての画像を表現している画像データを記録する。

ここで図２について説明する。同図はカメラ１０の機能構成を示している。
図２において、撮像部１１は、撮像レンズや撮像素子を備えており、撮像素子の受光面に結像させた被写体像を撮像する。撮像により得られた画像を表現している画像信号は画像処理及び制御処理部１２に入力され、当該画像に対する各種の画像処理が行われる。なお、画像処理及び制御処理部１２は単一の集積回路であり、カメラ１０の各構成要素全体の動作制御も行う。

合焦制御部１３は、撮像された画像のコントラスト情報などに基づいて撮像部１１を制御し、撮像レンズを駆動して被写体像を撮像素子の受光面上で合焦させる。
指示取得部１４は、カメラ１０の使用者からの各種の指示を取得する各種の操作スイッチ群である。

記録部１５は、撮像された画像に対して画像処理及び制御処理部１２が画像圧縮処理を施して得られた画像データの記録を行う。
時計部１６は日時の計時を行う。

関連付け処理部１７は、記録部１５に記録された画像データで表現されている画像の撮像日時を時計部１６から取得し、この日時を撮影時刻情報として当該画像データに関連付けて記録部１５にまとめて記録する。また、撮影被写体として人物の顔の撮影を行う指示を指示取得部１４が受け取っていた場合には、画像処理及び制御処理部１２によって行われる、撮像した顔画像における顔位置並びに目部、鼻部、及び口部の抽出処理の結果を示す位置情報を、顔位置情報として当該画像データに関連付けて記録部１５にまとめて記録する。

なお、カメラ１０にＧＰＳ（全地球測位システム：Global Positioning System ）情報取得部を備えて画像の撮像時の場所情報を取得するようにし、関連付け処理部１７がこの撮像場所情報を当該画像データに関連付けて記録部１５にまとめて記録するようにしておいてもよい。

インタフェース部１８は、ＰＣ３２との間で行われる各種のデータの授受を管理する。
カメラ１０は以上の構成を有している。
次に図３について説明する。同図は、ブログサイトサーバ５１の機能構成を示している。なお、同図に示されている各機能は、ブログサイトサーバ５１であるコンピュータで実現されるものであり、このコンピュータでは、補助記憶装置に予め格納しておいた所定のプログラムをＭＰＵが読み出して実行することによって、これらの各機能を実現する。

ブログの作成者がＰＣ３２に入力した文を表している文データは、インターネット３５を介してブログサイトサーバ５１へ送られる。また、カメラ１０で撮像された画像についての画像データも、関連付け処理部１７により関連付けられた各種のデータと共に、ＰＣ３２及びインターネット３５を介してブログサイトサーバ５１へ送られる。ブログサイトサーバ５１では、インターネット３５を介して送られてくる文データ及び画像データをアクセス受け付け部５２が受け取って記録処理部５３へと渡す。

記録処理部５３は、ブログサイトサーバ５１に入力されたこの文データ及び画像データをハードディスク等の補助記憶装置に記録して格納する。以降、ブログ作成者がＰＣ３２を操作して文データのブログサイトサーバ５１への送信を行う度に、ブログサイトサーバ５１には文データが文章データとして蓄積されていく。

一方、ブログの閲覧者がＰＣ３４を操作してブログの閲覧要求を行うと、この要求はインターネット３５を介してブログサイトサーバ５１へ送られる。ブログサイトサーバ５１では、この閲覧要求をアクセス受け付け部５２が受け取ると、格納しておいた文データ及び画像データを記録処理部５３が読み出し、画像処理部５６を介して表示制御部５７に渡す。表示制御部５７は、複数の文データで表されている文章と画像データで表されている画像とを所定の表示様式に組み込んでウェブログページデータを作成し、インターネット３５を介してＰＣ３４へ送付する。ＰＣ３４では、受け取ったウェブログページデータに従った様式で文章及び画像を表示して閲覧者に提示する。

データベース５８は、ブログサイトサーバ５１であるコンピュータの補助記憶装置に構築されている。このデータベース５８には、キーワードデータベースが蓄積されている。
キーワードデータベースは、予め用意されているキーワードと、そのキーワードが表現している感情を示している感情情報とが予め対応付けられて格納されている。

なお、以下の説明では、キーワードとして「気持ちよい」と「痛い」とが予め用意されており、キーワードデータベースにおいて、「気持ちよい」と感情情報「嬉しい」とが予め対応付けられており、「痛い」と感情情報「悲しい」とが予め対応付けられてそれぞれ格納されているものとする。

文章処理部５４は、キーワードデータベースに格納されているキーワードが、記録処理部５３により記録された文データで表されている文に含まれているか否かを判定すると共に、この判定において文に含まれていると判定したキーワードについてキーワードデータベースにおいて対応付けられている感情情報で示されている感情を、当該文に込められている感情の分析結果として出力する。

例えば、記録処理部５３により記録された文データで表されている文が、「今日はよい天気で気持ちよい。」であったとする。このとき、文章処理部５４は、キーワードデータベースに格納されているキーワードとして、当該文から「気持ちよい」を見つけ出す。ここで、前述したように、キーワードデータベースにおいて、「気持ちよい」には感情情報「嬉しい」が対応付けられている。従って、文章処理部５４は、「嬉しい」を当該文についての感情の分析結果として出力する。

また、例えば、記録処理部５３により記録された文データで表されている文が、「乾燥した天気が続いて、のどが痛い。」であったとする。このとき、文章処理部５４は、キーワードデータベースに格納されているキーワードとして、当該文から「痛い」を見つけ出す。ここで、前述したように、キーワードデータベースにおいて、「痛い」には感情情報「悲しい」が対応付けられている。従って、文章処理部５４は「悲しい」を当該文についての感情の分析結果として出力する。

分類処理部５５は、記録処理部５３により記録された複数の文データで表されている各文を、文章処理部５４による感情の分析結果に従って分類する。従って、分類処理部５５は、上述した例では、「嬉しい」なるグループに文「今日はよい天気で気持ちよい。」を分類し、「悲しい」なるグループに文「乾燥した天気が続いて、のどが痛い。」を分類する。

このように、本実施形態に係るブログサイトサーバ５１では、ブログの文章を、各文に込められている感情に応じて分類しておく。
なお、上述した例では、説明を簡単にするために、感情情報を「嬉しい」と「悲しい」とのみに限定して各文の分類を行うようにしていたが、例えば「悔しい」や「怒った」など、感情情報を更に増やして分類を行うようにしてもよい。

画像処理部５６は、記録処理部５３により記録された画像データで表されている画像に対して画像処理を施し、文章処理部５４による感情の分析結果に基づいて変化させる。この画像処理部５６により行われる画像処理は、画像の明度、コントラスト、及び彩度を変化させる処理や、画像を表示する際の表示サイズを変化させる処理、画像に別の画像を合成させる処理などがある。また、処理対象の画像が人物の顔を撮影して得られた顔画像である場合には、画像処理部５６により行われる画像処理は、顔画像に表されている人物の顔の形態を変形させる処理や、顔画像における人物の顔以外の領域である背景領域の明度を変化させる処理などがある。これらの処理については後述する。

表示制御部５７は、記録処理部５３により記録された画像データで表されている画像に対して画像処理部５６が画像処理を施した場合には、分類処理部５５により分類された文と、画像処理部５６が変化させた画像とを、文章処理部５４による分析結果に従って関連付けた上で所定の表示様式に組み込んでウェブログページデータを該分析結果毎に作成して出力し、インターネット３５を介してＰＣ３４へ送付する。ＰＣ３４では、受け取ったウェブログページデータに従った様式で文章及び画像を表示して閲覧者に提示する。

ブログサイトサーバ５１は、以上の機能を有している。
以下、ブログサイトサーバ５１であるコンピュータが上述した機能を提供するために当該コンピュータのＭＰＵで実行される各種制御処理について説明する。

まず図４について説明する。同図は、ブログ作成処理の処理内容をフローチャートで示したものである。
図４において、まず、Ｓ１１０では、ＰＣ３２から送られてきた画像データを入力データとして取得し、補助記憶装置に格納する処理が行われる。

Ｓ１１１では、ＰＣ３２から送られてきた文データを作成中のブログの文章における最初の文の入力データとして取得して補助記憶装置に格納する処理が行われる。
Ｓ１１２では、補助記憶装置に構築されているデータベース５８のうちのキーワードデータベースを参照する処理が行われる。この処理により、このキーワードデータベースには、キーワードとして「気持ちよい」と「痛い」とが用意されており、その各々が感情情報「嬉しい」と「悲しい」とに対応付けられていることをＭＰＵは認識する。

Ｓ１１３では、直近に取得した文データで表されている文に、感情情報「嬉しい」に対応付けられているキーワード（本実施形態においては「気持ちよい」）が含まれているか否かを判定する処理が行われる。ここで、「嬉しい」に対応付けられているキーワードが含まれていると判定されたとき（判定結果がＹｅｓのとき）にはＳ１２１からＳ１２３の処理を実行し、その後はＳ１１５に処理を進める。一方、「嬉しい」に対応付けられているキーワードが含まれていないと判定されたとき（判定結果がＮｏのとき）にはＳ１１４に処理を進める。

Ｓ１１４では、直近に取得した文データで表されている文に、感情情報「悲しい」に対応付けられているキーワード（本実施形態においては「痛い」）が含まれているか否かを判定する処理が行われる。ここで、「悲しい」に対応付けられているキーワードが含まれていると判定されたとき（判定結果がＹｅｓのとき）にはＳ１２４からＳ１２６の処理を実行し、その後はＳ１１５に処理を進める。一方、「悲しい」に対応付けられているキーワードが含まれていないと判定されたとき（判定結果がＮｏのとき）にはＳ１１４に処理を進める。

Ｓ１１５では、終了判定処理、すなわち、直近に取得した文データで表されている文が、作成中のブログの文章における最後の文であることを示す指示をＰＣ３２から取得したか否かを判定する処理が行われる。ここで、当該文が当該最後の文であると判定されたとき（判定結果がＹｅｓのとき）は、このブログ作成処理を終了する。一方、当該文が当該最後の文ではないと判定されたとき（判定結果がＮｏのとき）は、Ｓ１１６に処理を進める。

Ｓ１１６では、ＰＣ３２から次に送られてきた文データを作成中のブログの文章における次の文の入力データとして取得して補助記憶装置に格納する処理が行われ、その後はＳ１１３へと処理を戻して上述した処理が繰り返される。

これより説明するＳ１２１からＳ１２３にかけての処理は、直近に取得した文データで表されている文に込められている感情が「嬉しい」と判定されたときの処理である。
まず、Ｓ１２１では、補助記憶装置に格納した画像データで表されている画像に対し、感情「嬉しい」が強調されるような変化を施す画像処理（＋）が行われる。この画像処理の詳細は後述する。

続くＳ１２２では、Ｓ１２１の処理が行われた補助記憶装置に格納した画像データで表されている画像が顔画像である場合に、この画像に対し、感情「嬉しい」が更に強調されるような変化を施す人物画像処理（＋）が行われる。この画像処理の詳細も後述する。

Ｓ１２３では、直近に取得した文データで表されている文と、上述のように画像処理が施された画像とを関連付け、当該文に込められていると判定された感情「嬉しい」のグループに分類して補助記憶装置に格納する処理が行われる。この処理の後は、前述したＳ１１５に処理を進める。

これより説明するＳ１２４からＳ１２６にかけての処理は、直近に取得した文データで表されている文に込められている感情が「嬉しい」と判定されたときの処理である。
まず、Ｓ１２４では、補助記憶装置に格納した画像データで表されている画像に対し、感情「悲しい」が強調されるような変化を施す画像処理（−）が行われる。この画像処理の詳細は後述する。

続くＳ１２５では、Ｓ１２４の処理が行われた補助記憶装置に格納した画像データで表されている画像が顔画像である場合に、この画像に対し、感情「悲しい」が更に強調されるような変化を施す人物画像処理（−）が行われる。この画像処理の詳細も後述する。

Ｓ１２６では、直近に取得した文データで表されている文と、上述のように画像処理が施された画像とを関連付け、当該文に込められていると判定された感情「悲しい」のグループに分類して補助記憶装置に格納する処理が行われる。この処理の後は、前述したＳ１１５に処理を進める。

以上までの処理がブログ作成処理である。
次に図５について説明する。同図は、図４に示したブログ作成処理におけるＳ１２１及びＳ１２４の処理として行われる画像処理の処理内容をフローチャートで示したものである。

図５において、まず、Ｓ１３１では、「＋」の画像処理を行うか否か、すなわち、感情「嬉しい」が強調されるような変化を施す画像処理（図４のＳ１２１の処理としての画像処理）を行うか否かを判定する処理が行われる。ここで、「＋」の画像処理を行うと判定されたとき（判定結果がＹｅｓのとき）にはＳ１３２に処理を進める。一方、「−」の画像処理、すなわち、感情「悲しい」が強調されるような変化を施す画像処理（図４のＳ１２４の処理としての画像処理）を行うと判定されたとき（判定結果がＮｏのとき）にはＳ１３６に処理を進める。

Ｓ１３２、Ｓ１３３、及びＳ１３４では、感情「嬉しい」が強調されるような変化を施す画像処理として、補助記憶装置に格納した画像データで表されている画像に対し、明度を高める画像処理、コントラストを高める画像処理、及び彩度を高める画像処理がそれぞれ行われる。また、続くＳ１３５では、この画像に対し、例えば、太陽や花弁、花束などといった、感情「嬉しい」を強調する別の画像を挿入して合成する画像処理が行われる。そして、このＳ１３５の処理を終えた後には、処理後の画像を補助記憶装置に格納した上で、図４のブログ作成処理へと処理を戻す。

一方、Ｓ１３６、Ｓ１３７、及びＳ１３８では、感情「悲しい」が強調されるような変化を施す画像処理として、補助記憶装置に格納した画像データで表されている画像に対し、明度を下げる画像処理、コントラストを下げる画像処理、及び彩度を下げる画像処理がそれぞれ行われる。また、続くＳ１３９では、この画像の画素数を間引く、若しくはこの画像のついての表示サイズの設定情報を変更する等して、当該画像が表示されるときの表示サイズが小さくなるようにする画像処理が行われる。そして、このＳ１３９の処理を終えた後には、処理後の画像を補助記憶装置に格納した上で、図４のブログ作成処理へと処理を戻す。

以上までの処理が画像処理であり、この処理を実行することにより、補助記憶装置に格納した画像データで表されている画像に対し、直近に取得した文データで表されている文に込められている感情が強調される変化を施すことができる。

ここで図６Ａ、図６Ｂ、及び図６Ｃについて説明する。図６Ａは、カメラ１０によって撮影された元の画像の例を示しており、図６Ｂ及び図６Ｃは、上述した図５の画像処理の実行によって作成されたウェブログページのＰＣ３４での表示画面例である。ここで、図６Ｂは、「嬉しい」感情の強調がされたウェブログページについてのものであり、図６Ｃは、「悲しい」感情の強調がされたウェブログページについてのものである。

図６Ｂの表示例では、前述した文「今日はよい天気で気持ちよい。」におけるキーワード「気持ちよい」に基づいて判定される感情「嬉しい」に応じ、図６Ａに示した木の画像に対し、明度、コントラスト、及び彩度をそれぞれ高める画像処理と、太陽の画像を合成する画像処理とが施された結果、明るく、くっきりした、楽しい印象の画像が表示される。

また、図６Ｃの表示例では、前述した文「乾燥した天気が続いて、のどが痛い。」におけるキーワード「痛い」に基づいて判定される感情「悲しい」に応じ、図６Ａに示した木の画像に対し、明度、コントラスト、彩度をそれぞれ下げる画像処理と、当該画像が表示されるときの表示サイズが小さくなるようにする画像処理とが施された結果、暗く、ぼやけた印象である、小さな画像が表示される。

このように、図５の画像処理がブログサイトサーバ５１で行われることにより、元の文に込められている感情が強調される処理をその文に対応付けられている画像に対して施したものがブログとして公開されるので、ブログ閲覧者の興味を引くことができるようになる。

なお、図５の処理において、感情「嬉しい」が強調されるような変化を施す画像処理として、この画像の画素数を補間等により増やす、若しくはこの画像のついての表示サイズの設定情報を変更する等して、当該画像が表示されるときの表示サイズが大きくなるようにする画像処理を行うようにしてもよい。

次に図７について説明する。同図は、図４に示したブログ作成処理におけるＳ１２２及びＳ１２５の処理として行われる人物画像処理の処理内容をフローチャートで示したものである。

図７において、まず、Ｓ１５１では、補助記憶装置に格納した画像データに関連付けられている、当該画像データで表されている顔画像の目部、鼻部、及び口部の抽出処理の結果を示す位置情報を取得する処理が行われる。

Ｓ１５２では、「＋」の画像処理を行うか否か、すなわち、感情「嬉しい」が強調されるような変化を施す人物画像処理（図４のＳ１２２の処理としての人物画像処理）を行うか否かを判定する処理が行われる。ここで、「＋」の人物画像処理を行うと判定されたとき（判定結果がＹｅｓのとき）にはＳ１５３に処理を進める。一方、「−」の人物画像処理、すなわち、感情「悲しい」が強調されるような変化を施す人物画像処理（図４のＳ１２５の処理としての画像処理）を行うと判定されたとき（判定結果がＮｏのとき）にはＳ１５５に処理を進める。

Ｓ１５３では、感情「嬉しい」が強調されるような変化を施す画像処理として、画像データで表されている顔画像における口部に対し、図８Ａに示すように、口の形態を変形させてその口元を上げる画像処理を行い、笑顔の表情の顔画像とする処理が行われる。そして、続くＳ１５４において、当該顔画像における顔以外の領域である背景領域の明度を高める画像処理が行われる。その後、このＳ１５４の処理を終えた後には、処理後の画像を補助記憶装置に格納した上で、図４のブログ作成処理へと処理を戻す。

なお、Ｓ１５４において顔の明度を変化させないのは、顔の明度を更に高め過ぎることにより顔の表情が不明確になってしまうことを避けるためである。
Ｓ１５５では、感情「悲しい」が強調されるような変化を施す画像処理として、画像データで表されている顔画像における口部に対し、図８Ｂに示すように、口の形態を変形させてその口元を下げる画像処理が行われる。そして、続くＳ１５６において、当該顔画像における目部に対し、図８Ｂに示すように、目の形態を変形させて細目にすると共に、その周囲を顔の皮膚部の色彩で塗りつぶす画像処理が行われる。更に、続くＳ１５７において、図８Ｂに示すように、予め用意しておいた涙の画像を、顔画像における目部の下方に１粒合成する画像処理が行われる。そして、続くＳ１５８において、当該顔画像における顔以外の領域である背景領域の明度を下げる画像処理が行われる。その後、このＳ１５８の処理を終えた後には、処理後の画像を補助記憶装置に格納した上で、図４のブログ作成処理へと処理を戻す。

なお、Ｓ１５８において顔の明度を変化させないのは、顔の明度を更に下げ過ぎることにより顔の表情が不明確になってしまうことを避けるためである。
また、図４に示したブログ作成処理において、Ｓ１２５の人物画像処理（−）が繰り返し複数回実行される場合、すなわち、各文についての感情の分析の結果、感情「悲しい」が複数の文に込められていた場合には、図７のＳ１５７における涙の画像の合成処理では、その合成の度に合成位置を変化させるようにして涙の数を１粒ずつ増加させるようにする。このように、同一の感情「悲しい」が複数の文に込められていた場合に、その文の数に応じて画像処理における画像の変化の程度（ここでは涙の画像の合成回数）を変化させることにより、文章全体として込められている感情「悲しい」の程度に応じた感情強調のされた画像を得ることができる。

以上までの処理が人物画像処理であり、この処理を実行することにより、補助記憶装置に格納した画像データで表されている顔画像に対し、直近に取得した文データで表されている文に込められている感情が強調される変化を施すことができる。従って、この人物画像処理がブログサイトサーバ５１で行われることにより、元の文に込められている感情が強調される処理をその文に対応付けられている顔画像に対して施したものがブログとして公開されるので、ブログ閲覧者の興味を引くことができるようになる。

なお、図７に示した人物画像処理では、感情「嬉しい」及び「悲しい」に応じた顔画像の画像処理のみを行うようにしているが、この他の感情に応じた顔画像の画像処理を行うようにすることは勿論可能である。例えば、感情「悔しい」や「怒った」に応じた顔画像の画像処理としては、図８Ｃに示すように、画像データで表されている顔画像における目部に対し、目の形態を変形させて目じり側をつり上げる画像処理や、当該顔画像における口部に対し、口の形態を変形させて、その口元を、感情「悲しい」に応じた場合よりも更に極端に下げる画像処理を行うようにすればよい。

以上、本発明の実施形態を説明したが、本発明は、上述した各実施形態に限定されることなく、本発明の要旨を逸脱しない範囲内で種々の改良・変更が可能である。

本発明を実施するデータ処理装置であるブログサイトサーバを含む通信ネットワークの構成を示す図である。 図１に示したカメラの機能構成を示す図である。 図１に示したブログサイトサーバの機能構成を示す図である。 ブログ作成処理の処理内容をフローチャートで示した図である。 画像処理の処理内容をフローチャートで示した図である。 図１に示したカメラによって撮影された元の画像の例を示す図である。 図５の処理の実行によって作成されたウェブログページの表示画面例（その１）を示す図である。 図５の処理の実行によって作成されたウェブログページの表示画面例（その２）を示す図である。 人物画像処理の処理内容をフローチャートで示した図である。 顔画像に対する人物画像処理の第一の例を示す図である。 顔画像に対する人物画像処理の第二の例を示す図である。 顔画像に対する人物画像処理の第三の例を示す図である。

符号の説明

１０ カメラ
１１ 撮像部
１２ 画像処理及び制御処理部
１３ 合焦制御部
１４ 指示取得部
１５ 記録部
１６ 時計部
１７ 関連付け処理部
１８ インタフェース部
３２、３４ ＰＣ
３５ インターネット
５１ ブログサイトサーバ
５２ アクセス受け付け部
５３ 記録処理部
５４ 文章処理部
５５ 分類処理部
５６ 画像処理部
５７ 表示制御部
５８ データベース

Claims (9)

1. 入力された文章データ及び画像データを格納する格納手段と、
   予め用意されているキーワードと該キーワードが表現している感情を示している感情情報とが予め対応付けられて格納されているデータベースと、
   前記データベースに格納されているキーワードが、前記文章データで表されている文章を構成している各文に含まれているか否かを判定する判定手段と、
   前記文章を構成している各文に込められている感情の分析結果として、前記判定手段が該文に含まれていると判定したキーワードについて前記データベースにおいて対応付けられている感情情報で示されている感情を出力する感情分析手段と、
   前記画像データで表されている画像を、前記感情分析手段による分析結果に基づいて変化させて出力する画像変化手段と、
   を有することを特徴とするデータ処理装置。
2. 前記画像変化手段は、前記画像の明度、コントラスト、彩度、及び該画像を表示する際の表示サイズのうちの少なくとも１つ以上を変化させることで該画像を変化させることを特徴とする請求項１に記載のデータ処理装置。
3. 前記画像変化手段は、前記画像に他の画像を合成することで該画像を変化させることを特徴とする請求項１に記載のデータ処理装置。
4. 前記画像データは、人物の顔を撮影して得られた顔画像の画像データであり、
   前記画像変化手段は、前記顔画像に表されている人物の顔の形態を変形させる、
   ことを特徴とする請求項１に記載のデータ処理装置。
5. 前記画像変化手段は、前記顔画像に表されている人物の顔における目及び口のうちの少なくともどちらか一方の形態を変形させることを特徴とする請求項４に記載のデータ処理装置。
6. 前記画像変化手段は、更に、前記顔画像における前記人物の顔以外の領域である背景領域の明度を変化させることを特徴とする請求項４に記載のデータ処理装置。
7. 前記文章データで表現されている文章は複数の文で構成されており、
   前記判定手段は、前記文章を構成している各文について前記キーワードの有無の判定を行い、
   前記感情分析手段は、前記文章に込められている感情の分析を、該文章を構成している各文について行い、
   前記画像変化手段は、前記文章を構成している各文についての前記感情分析手段による分析の結果、該各文に込められている感情が同一であるものが存在した場合には、その数に応じて前記画像の変化の程度を制御する、
   ことを特徴とする請求項１に記載のデータ処理装置。
8. データ処理装置によって行われるデータ処理の方法であって、
   前記データ処理装置の有する格納手段が、入力された文章データ及び画像データを格納し、
   前記データ処理装置の有するデータベースであって、予め用意されているキーワードと該キーワードが表現している感情を示している感情情報とが予め対応付けられて格納されている該データベースに格納されている該キーワードが、前記文章データで表されている文章を構成している各文に含まれているか否かを、該データ処理装置の有する判定手段が判定し、
   前記データ処理装置の有する感情分析手段が、前記文章を構成している各文に込められている感情の分析結果として、前記判定手段が該文に含まれていると判定したキーワードについて前記データベースにおいて対応付けられている感情情報で示されている感情を出力し、
   前記データ処理装置の有する画像変化手段が、前記画像データで表されている画像を、前記感情分析手段による分析結果に基づいて変化させて出力する、
   ことを特徴とするデータ処理方法。
9. 入力された文章データ及び画像データをコンピュータが有している記憶部に格納する格納処理と、
   予め用意されているキーワードと該キーワードが表現している感情を示している感情情報とが予め対応付けられて格納されているデータベースに格納されている該キーワードが、前記文章データで表されている文章を構成している各文に含まれているか否かを判定する判定処理と、
   前記文章を構成している各文に込められている感情の分析結果として、前記判定処理により該文に含まれていると判定したキーワードについて前記データベースにおいて対応付けられている感情情報で示されている感情を出力する感情分析処理と、
   前記画像データで表されている画像を、前記感情分析処理による分析結果に基づいて変化させて出力する画像変化処理と、
   をコンピュータに行わせるためのプログラム。