JP5031421B2 - データ処理装置、データ処理方法、及びプログラム - Google Patents

Description

本発明は、データ処理技術に関し、特に、連携した文章データ及び画像データの処理技術に関する。

本発明に関し、例えば特許文献１には、文章を文節単位に解析して表現の異なる文節候補を文節毎に表示し、任意の文節において文節候補の選択が行われると、他の文節における文節候補のうち当該選択に係る文節候補と関連付けがされているものを強調表示することで、表現の統一された文章の作成を容易に行えるようにするという技術が開示されている。

また、例えば特許文献２には、感情を表現する所定の画像と感情を要素値とする感情ベクトルとを関連付けた画像データベースを用意しておき、入力文章に含まれている感情を表す単語についての感情ベクトルを辞書検索に基づいて算出し、この算出結果に最も近い感情ベクトルに関連付けられている画像を当該画像データベースから選択して表示することで、入力文章に表されている感情をきめこまかく豊かに表現できるようにするという技術が開示されている。

また、例えば非特許文献１には、生体認証の技術的、制度的な取り組みについての記事が掲載されており、この記事では、顔認証を行うために顔画像から目、鼻、口などといった局所の部分画像を、照合のために抽出する技術が紹介されている。
特開２００２−２９７５８１号公報 特開２００５−２０８８９２号公報 「生体認証大ブレーク―可能性と課題―」，日経バイト２００５年１０月号，日本，日経ＢＰ社，２００５年９月２２日，第２６９号，ｐ．２８−４７

昨今、インターネット上のウェブサイトとして急激に増加しているもののひとつに、ブログ（Blog）がある。ブログは、元々はウェブログ（Weblog）の略であり、作成者の個人的な体験や特定の記事に関する話題などといった情報を日記のように時系列で公開するウェブサイトである。

ブログ作成用のツールとして、文章と共に画像を公開する機能を有しているものがある。しかし、この文章の作成技術や画像の作成技術、写真の撮影技術などはブログ作成者のスキルに依存するものである。このため、ブログ作成者がこのようなスキルを有していないと、多くの人に閲覧されるような人気の高いブログの作成は容易なものではなく、トラックバック等の閲覧者からのレスポンスを得ることも余り期待できない。

本発明は上述した問題に鑑みてなされたものであり、その解決しようとする課題は、閲覧者の興味を引くような、ユニークなブログの作成を支援することである。

本発明の態様のひとつであるデータ処理装置は、入力された文章データ及び画像データを格納する格納手段と、予め用意されているキーワードと該キーワードが表現している感情を示している感情情報とが予め対応付けられて格納されているデータベースと、前記データベースに格納されているキーワードが、前記文章データで表されている文章を構成している各文に含まれているか否かを判定する判定手段と、前記文章を構成している各文に込められている感情の分析結果として、前記判定手段が該文に含まれていると判定したキーワードについて前記データベースにおいて対応付けられている感情情報で示されている感情を出力する感情分析手段と、前記文章を構成している各文を、前記感情分析手段による感情の分析結果に従って分類する分類手段と、前記画像データで表されている画像を、前記感情分析手段による分析結果に基づいて変化させる画像変化手段と、前記分類手段により分類された文と前記画像変化手段により変化させた画像とを前記感情分析手段による分析結果に従って関連付ける関連付け手段と、予め用意されているキーワードと予め用意されている複数の文章とが予め対応付けられて格納されているアシスト文章データベースと、前記アシスト文章データベースに格納されているキーワードが、前記文章データで表されている文章に含まれているか否かを判定するアシスト文章キーワード判定手段と、前記アシスト文章キーワード判定手段が前記文章データで表されている文章に含まれていると判定したキーワードについて前記アシスト文章データベースにおいて対応付けられている文章を複数読み出して出力するアシスト文章出力手段と、前記アシスト文章出力手段により出力された複数の文章に対する選択の指示を取得する選択指示取得手段と、前記選択指示取得手段により取得された指示により選択されている文章を、前記アシスト文章キーワード判定手段が前記キーワードの有無の判定を行った文章に追加することで該文章を変更して出力する文章アシスト手段と、を有することを特徴とするものであり、この特徴によって前述した課題を解決する。

なお、上述した本発明に係るデータ処理装置において、前記画像変化手段は、前記画像の明度、コントラスト、彩度、及び該画像を表示する際の表示サイズのうちの少なくとも１つ以上を変化させることで該画像を変化させるように構成してもよい。

また、前述した本発明に係るデータ処理装置において、前記画像変化手段は、前記画像に別の画像を合成することで該画像を変化させるように構成してもよい。
また、前述した本発明に係るデータ処理装置において、前記判定手段が前記キーワードの有無の判定を行った文を、前記感情分析手段による分析結果に基づいて変更して出力する文変更手段を更に有するように構成してもよい。

なお、このとき、前記文変更手段は、前記感情に予め対応付けられている所定の語句を前記文に追加することで該文を変更するように構成してもよい。
また、前述した本発明に係るデータ処理装置において、前記画像データは、人物の顔を撮影して得られた顔画像の画像データであり、前記画像変化手段は、前記顔画像に表されている人物の顔の形態を変形させる、ように構成してもよい。

なお、このとき、前記画像変化手段は、前記顔画像に表されている人物の顔における目及び口のうちの少なくともどちらか一方の形態を変形させるように構成してもよい。
あるいは、このとき、前記画像変化手段は、更に、前記顔画像における前記人物の顔以外の領域である背景領域の明度を変化させるように構成してもよい。

また、本発明の別の態様のひとつであるデータ処理方法は、データ処理装置によって行われるデータ処理の方法であって、前記データ処理装置の有する格納手段が、入力された文章データ及び画像データを格納し、予め用意されているキーワードと該キーワードが表現している感情を示している感情情報とが予め対応付けられて格納されているデータベースに格納されている該キーワードが、前記文章データで表されている文章を構成している各文に含まれているか否かを、前記データ処理装置の有する判定手段が判定し、前記データ処理装置の有する感情分析手段が、前記文章を構成している各文に込められている感情の分析結果として、前記判定手段が該文に含まれていると判定したキーワードについて前記データベースにおいて対応付けられている感情情報で示されている感情を出力し、前記データ処理装置の有する分類手段が、前記文章を構成している各文を、前記感情分析手段による感情の分析結果に従って分類し、前記データ処理装置の有する画像変化手段が、前記画像データで表されている画像を、前記感情分析手段による分析結果に基づいて変化させ、前記データ処理装置の有する出力手段が、前記分類手段により分類された文と前記画像変化手段により変化させた画像とを前記感情分析手段による分析結果に従って関連付け、予め用意されているキーワードと予め用意されている複数の文章とが予め対応付けられて格納されているアシスト文章データベースに格納されているキーワードが、前記文章データで表されている文章に含まれているか否かを、前記データ処理装置の有するアシスト文章キーワード判定手段が判定し、前記アシスト文章キーワード判定手段が前記文章データで表されている文章に含まれていると判定したキーワードについて前記アシスト文章データベースにおいて対応付けられている文章を、前記データ処理装置の有するアシスト文章出力手段が複数読み出して出力し、前記データ処理装置の有する選択指示取得手段が、前記アシスト文章出力手段により出力された複数の文章に対する選択の指示を取得し、前記データ処理装置の有する文章アシスト手段が、前記選択指示取得手段により取得された指示により選択されている文章を、前記アシスト文章キーワード判定手段が前記キーワードの有無の判定を行った文章に追加することで該文章を変更して出力する、ことを特徴とするものであり、この特徴によって前述した課題を解決する。

また、本発明の更なる別の態様のひとつであるプログラムは、入力された文章データ及び画像データをコンピュータが有している記憶部に格納する格納処理と、予め用意されているキーワードと該キーワードが表現している感情を示している感情情報とが予め対応付けられて格納されているデータベースに格納されている該キーワードが、前記文章データで表されている文章を構成している各文に含まれているか否かを判定する判定処理と、前記文章を構成している各文に込められている感情の分析結果として、前記判定処理によって該文に含まれていると判定されたキーワードについて前記データベースにおいて対応付けられている感情情報で示されている感情を出力する感情分析処理と、前記文章を構成している各文を、前記感情分析処理による感情の分析結果に従って分類する分類処理と、前記画像データで表されている画像を、前記感情分析処理による分析結果に基づいて変化させる画像変化処理と、前記分類処理により分類された文と前記画像変化処理により変化させた画像とを前記感情分析処理による分析結果に従って関連付ける関連付け処理と、予め用意されているキーワードと予め用意されている複数の文章とが予め対応付けられて格納されているアシスト文章データベースに格納されているキーワードが、前記文章データで表されている文章に含まれているか否かを判定するアシスト文章キーワード判定処理と、前記アシスト文章キーワード判定処理によって前記文章データで表されている文章に含まれていると判定されたキーワードについて前記アシスト文章データベースにおいて対応付けられている文章を複数読み出して出力するアシスト文章出力処理と、前記アシスト文章出力処理により出力された複数の文章に対する選択の指示を取得する選択指示取得処理と、前記選択指示取得処理により取得された指示により選択されている文章を、前記アシスト文章キーワード判定処理による前記キーワードの有無の判定が行われた文章に追加することで該文章を変更して出力する文章アシスト処理と、をコンピュータに行わせるためのプログラムであり、このプログラムをコンピュータに実行させることによっても、前述した課題は解決される。

本発明によれば、以上のようにすることにより、閲覧者の興味を引くような、ユニークなブログの作成の支援が可能になるという効果を奏する。

以下、本発明の実施の形態を図面に基づいて説明する。
図１は本発明を実施するデータ処理装置であるブログサイトサーバを含む通信ネットワークの構成を示している。

図１において、インターネット３５は通信ネットワークである。図１においては、インターネット３５には、ブログサービスを提供するコンピュータであるブログサイトサーバ５１と、ＰＣ（パーソナルコンピュータ）３２及び３４とが接続されている。ここで、ＰＣ３２はブログの作成者が操作するコンピュータであり、ＰＣ３４はブログの閲覧者が操作するコンピュータである。

なお、ブログサイトサーバ５１並びにＰＣ３２及び３４はいずれもごく標準的な構成のコンピュータであり、制御プログラムの実行によってコンピュータ全体の動作制御を司るＭＰＵ（演算処理装置）、このＭＰＵが必要に応じてワークメモリとして使用するメインメモリ、マウスやキーボードなどといったユーザからの各種の指示を取得するための入力部、他の機器と直接に、若しくはインターネット３５を介して各種データの授受を管理するインタフェースユニット、及び、各種のプログラムやデータを記憶しておく例えばハードディスク装置なとの補助記憶装置を有している。

ＰＣ３２にはカメラ１０が接続されている。このカメラ１０は、いわゆるデジタルカメラであり、被写体の撮影を行うと、当該被写体についての画像を表現している画像データを記録する。

ここで図２について説明する。同図はカメラ１０の機能構成を示している。
図２において、撮像部１１は、撮像レンズや撮像素子を備えており、撮像素子の受光面に結像させた被写体像を撮像する。撮像により得られた画像を表現している画像信号は画像処理及び制御処理部１２に入力され、当該画像に対する各種の画像処理が行われる。なお、画像処理及び制御処理部１２は単一の集積回路であり、カメラ１０の各構成要素全体の動作制御も行う。

合焦制御部１３は、撮像された画像のコントラスト情報などに基づいて撮像部１１を制御し、撮像レンズを駆動して被写体像を撮像素子の受光面上で合焦させる。
指示取得部１４は、カメラ１０の使用者からの各種の指示を取得する各種の操作スイッチ群である。

記録部１５は、撮像された画像に対して画像処理及び制御処理部１２が画像圧縮処理を施して得られた画像データの記録を行う。
時計部１６は日時の計時を行う。

関連付け処理部１７は、記録部１５に記録された画像データで表現されている画像の撮像日時を時計部１６から取得し、この日時を撮影時刻情報として当該画像データに関連付けて記録部１５にまとめて記録する。また、撮影被写体として人物の顔の撮影を行う指示を指示取得部１４が受け取っていた場合には、画像処理及び制御処理部１２によって行われる、撮像した顔画像における顔位置並びに目部、鼻部、及び口部の抽出処理の結果を示す位置情報を、顔位置情報として当該画像データに関連付けて記録部１５にまとめて記録する。

なお、カメラ１０にＧＰＳ（全地球測位システム：Global Positioning System ）情報取得部を備えて画像の撮像時の場所情報を取得するようにし、関連付け処理部１７がこの撮像場所情報を当該画像データに関連付けて記録部１５にまとめて記録するようにしておいてもよい。

インタフェース部１８は、ＰＣ３２との間で行われる各種のデータの授受を管理する。
カメラ１０は以上の構成を有している。
次に図３について説明する。同図は、ブログサイトサーバ５１の機能構成を示している。なお、同図に示されている各機能は、ブログサイトサーバ５１であるコンピュータで実現されるものであり、このコンピュータでは、補助記憶装置に予め格納しておいた所定のプログラムをＭＰＵが読み出して実行することによって、これらの各機能を実現する。

ブログの作成者がＰＣ３２に入力した文章を表している文章データは、インターネット３５を介してブログサイトサーバ５１へ送られる。また、カメラ１０で撮像された画像についての画像データも、関連付け処理部１７により関連付けられた各種のデータと共に、ＰＣ３２及びインターネット３５を介してブログサイトサーバ５１へ送られる。ブログサイトサーバ５１では、インターネット３５を介して送られてくる文章データ及び画像データをアクセス受け付け部５２が受け取って記録処理部５３へと渡す。

記録処理部５３は、ブログサイトサーバ５１に入力されたこの文章データ及び画像データをハードディスク等の補助記憶装置に記録して格納する。従って、ブログ作成者がＰＣ３２を操作して文章データ及び画像データのブログサイトサーバ５１への送信を行う度に、ブログサイトサーバ５１には文章データ及び画像データが蓄積されていく。

一方、ブログの閲覧者がＰＣ３４を操作してブログの閲覧要求を行うと、この要求はインターネット３５を介してブログサイトサーバ５１へ送られる。ブログサイトサーバ５１では、この閲覧要求をアクセス受け付け部５２が受け取ると、格納しておいた文章データ及び画像データを記録処理部５３が読み出し、画像処理部５６を介して表示制御部５７に渡す。表示制御部５７は、文章データで表されている文章と画像データで表されている画像とを所定の表示様式に組み込んでウェブログページデータを作成し、インターネット３５を介してＰＣ３４へ送付する。ＰＣ３４では、受け取ったウェブログページデータに従った様式で文章及び画像を表示して閲覧者に提示する。

データベース５８は、ブログサイトサーバ５１であるコンピュータの補助記憶装置に構築されている。このデータベース５８には、キーワードデータベースとアシスト文章データベースとが蓄積されている。このうちアシスト文章データベースについては後述する。

キーワードデータベースは、予め用意されているキーワードと、そのキーワードが表現している感情を示している感情情報とが予め対応付けられて格納されている。
なお、以下の説明では、キーワードとして「気持ちよい」と「痛い」とが予め用意されており、キーワードデータベースにおいて、「気持ちよい」と感情情報「嬉しい」とが予め対応付けられており、「痛い」と感情情報「悲しい」とが予め対応付けられてそれぞれ格納されているものとする。

文章処理部５４は、キーワードデータベースに格納されているキーワードが、記録処理部５３により記録された文章データで表されている文章を構成している各文に含まれているか否かを判定すると共に、この判定において文に含まれていると判定したキーワードについてキーワードデータベースにおいて対応付けられている感情情報で示されている感情を、当該文に込められている感情の分析結果として出力する。

例えば、記録処理部５３により記録された文章データで表されている文章が、「今日はよい天気で気持ちよい。乾燥した天気が続いて、のどが痛い。」であったとする。このとき、文章処理部５４は、キーワードデータベースに格納されているキーワードとして、当該文章における第一文「今日はよい天気で気持ちよい。」から「気持ちよい」を見つけ出し、第二文「乾燥した天気が続いて、のどが痛い。」から「痛い」を見つけ出す。ここで、前述したように、キーワードデータベースにおいて、「気持ちよい」には感情情報「嬉しい」が対応付けられており、「痛い」には感情情報「悲しい」が対応付けられている。従って、文章処理部５４は、「嬉しい」を当該第一文についての感情の分析結果として出力し、「悲しい」を当該第二文についての感情の分析結果として出力する。

分類処理部５５は、記録処理部５３により記録された文章データで表されている文章を構成している各文を、文章処理部５４による感情の分析結果に従って分類する。従って、分類処理部５５は、上述した例では、「嬉しい」なるグループに当該第一文を分類し、「悲しい」なるグループに当該第二文を分類する。

このように、本実施形態に係るブログサイトサーバ５１では、ブログの文章を、各文に込められている感情に応じて分類することで、複数のブログを作成し提供することを可能にしている。従って、閲覧者のうち、悲しいブログの閲覧を所望する者に対しては、希望通りの「悲しい」グループに分類されている文のみを提供することができるようになり、また、嬉しいブログの閲覧を所望する者に対しても、希望通りの「嬉しい」グループに分類されている文のみを提供することができるようになる。また、閲覧者が全てのブログの閲覧を希望するのであれば、各グループに分類されている文を全て提供することも、もちろん可能である。

なお、上述した例では、説明を簡単にするために、感情情報を「嬉しい」と「悲しい」とのみに限定して各文の分類を行うようにしていたが、例えば「悔しい」や「怒った」など、感情情報を更に増やして分類を行うようにしてもよい。

画像処理部５６は、記録処理部５３により記録された画像データで表されている画像に対して画像処理を施し、文章処理部５４による感情の分析結果に基づいて変化させる。この画像処理部５６により行われる画像処理は、画像の明度、コントラスト、及び彩度を変化させる処理や、画像を表示する際の表示サイズを変化させる処理、画像に別の画像を合成させる処理などがある。また、処理対象の画像が人物の顔を撮影して得られた顔画像である場合には、画像処理部５６により行われる画像処理は、顔画像に表されている人物の顔の形態を変形させる処理や、顔画像における人物の顔以外の領域である背景領域の明度を変化させる処理などがある。これらの処理については後述する。

表示制御部５７は、記録処理部５３により記録された画像データで表されている画像に対して画像処理部５６が画像処理を施した場合には、分類処理部５５により分類された文と、画像処理部５６が変化させた画像とを、文章処理部５４による分析結果に従って関連付けた上で所定の表示様式に組み込んでウェブログページデータを該分析結果毎に作成して出力し、インターネット３５を介してＰＣ３４へ送付する。ＰＣ３４では、受け取ったウェブログページデータに従った様式で文章及び画像を表示して閲覧者に提示する。

アシスト文章処理部５９は、文章作成の苦手なブログ作成者のために、文章の作成を支援するための処理である、文章作成アシスト処理を行うものであり、ブログ作成者からの文章作成アシスト要求に応じて機能する。

アシスト文章処理部５９は、データベース５８に蓄積されているアシスト文章データベースを使用する。アシスト文章データベースには、予め用意されているキーワードと予め用意されている複数の文章とが予め対応付けられて格納されている。

アシスト文章処理部５９は、まず、アシスト文章データベースに格納されているキーワードが、記録処理部５３により記録された文章データで表されている文章に含まれているか否かを判定する。そして、この判定により当該文章に含まれていると判定したキーワードについてアシスト文章データベースにおいて対応付けられている文章を複数読み出して表示制御部５７へ渡す。表示制御部５７は、これらの文章の一覧表示画面データを作成し、インターネット３５を介してブログ作成者のＰＣ３２へ送付する。

ブログ作成者は、ＰＣ３２により表示される文章の一覧表示画面を参照し、この一覧から文章を選択する指示をＰＣ３２に対して行う。この指示はＰＣ３２からインターネット３５を介してブログサイトサーバ５１へと送られる。

ブログサイトサーバ５１では、この選択指示をアクセス受け付け部５２が取得してアシスト文章処理部５９に渡す。アシスト文章処理部５９は、この指示により選択されている文章を、文章処理部５４がキーワードの有無の判定を行った文章に追加することでその文章を変更して表示制御部５７へ出力する。表示制御部５７は、この変更後の文章をアシスト文章処理部５９から受け取った場合には、この変更後の文章と画像データで表されている画像とを所定の表示様式に組み込んでウェブログページデータを作成し、インターネット３５を介してＰＣ３４へ送付する。ＰＣ３４では、受け取ったウェブログページデータに従った様式で文章及び画像を表示して閲覧者に提示する。

ブログサイトサーバ５１は、以上の機能を有している。
以下、ブログサイトサーバ５１であるコンピュータが上述した機能を提供するために当該コンピュータのＭＰＵで実行される各種制御処理について説明する。

まず図４について説明する。同図は、ブログ作成処理の処理内容をフローチャートで示したものである。
図４において、まず、Ｓ１１０では、ＰＣ３２から送られてくる文章データ及び画像データを入力データとして取得し、両者を対応付けて補助記憶装置に格納する処理が行われる。

Ｓ１１１では、補助記憶装置に格納した文章データを読み出し、その文章データで表されている文章のうちの最初の文を選択する処理が行われる。
Ｓ１１２では、補助記憶装置に構築されているデータベース５８のうちのキーワードデータベースを参照する処理が行われる。この処理により、このキーワードデータベースには、キーワードとして「気持ちよい」と「痛い」とが用意されており、その各々が感情情報「嬉しい」と「悲しい」とに対応付けられていることをＭＰＵは認識する。

Ｓ１１３では、現在選択中の文に、感情情報「嬉しい」に対応付けられているキーワード（本実施形態においては「気持ちよい」）が含まれているか否かを判定する処理が行われる。ここで、「嬉しい」に対応付けられているキーワードが含まれていると判定されたとき（判定結果がＹｅｓのとき）にはＳ１２１からＳ１２３の処理を実行し、その後はＳ１１５に処理を進める。一方、「嬉しい」に対応付けられているキーワードが含まれていないと判定されたとき（判定結果がＮｏのとき）にはＳ１１４に処理を進める。

Ｓ１１４では、現在選択中の文に、感情情報「悲しい」に対応付けられているキーワード（本実施形態においては「痛い」）が含まれているか否かを判定する処理が行われる。ここで、「悲しい」に対応付けられているキーワードが含まれていると判定されたとき（判定結果がＹｅｓのとき）にはＳ１２４からＳ１２６の処理を実行し、その後はＳ１１５に処理を進める。一方、「悲しい」に対応付けられているキーワードが含まれていないと判定されたとき（判定結果がＮｏのとき）にはＳ１１４に処理を進める。

Ｓ１１５では、終了判定処理、すなわち、現在選択中の文が、補助記憶装置に格納した文章データで表されている文章のうちの最後の文であったか否かを判定する処理が行われる。ここで、現在選択中の文が当該最後の文であると判定されたとき（判定結果がＹｅｓのとき）は、このブログ作成処理を終了する。一方、現在選択中の文が当該最後の文ではないと判定されたとき（判定結果がＮｏのとき）は、Ｓ１１６に処理を進める。

Ｓ１１６では、補助記憶装置に格納した文章データで表されている文章において、現在選択中であった文に続く次の文を選択する処理が行われ、その後はＳ１１３へと処理を戻して上述した処理が繰り返される。

これより説明するＳ１２１からＳ１２３にかけての処理は、選択中の文に込められている感情が「嬉しい」と判定されたときの処理である。
まず、Ｓ１２１では、文強調処理が行われる。この処理は、現在選択中の文に対し、当該文に込められていると判定された感情「嬉しい」が強調されるように変更する処理である。具体的には、例えば、現在選択中の文に対し、検出されたキーワード「気持ちよい」の直前に、「とても」や「非常に」などの語句を挿入する処理を行う。また、現在選択中の文の先頭や末尾に、笑顔を表している顔文字を追加する処理を行うようにしてもよい。

Ｓ１２２では、Ｓ１２１の処理による変更が施された文を、当該文に込められていると判定された感情「嬉しい」のグループに分類して補助記憶装置に格納する処理が行われる。

Ｓ１２３では、補助記憶装置に格納した画像データで表されている画像に対し、感情「嬉しい」が強調されるような変化を施す画像処理（＋）が行われる。この画像処理の詳細は後述する。この処理の後は、前述したＳ１１４に処理を進める。

これより説明するＳ１２４からＳ１２６にかけての処理は、選択中の文に込められている感情が「悲しい」と判定されたときの処理である。
まず、Ｓ１２４では、文強調処理が行われる。この処理は、現在選択中の文に対し、当該文に込められていると判定された感情「悲しい」が強調されるように変更する処理である。具体的には、例えば、現在選択中の文に対し、検出されたキーワード「痛い」の直前に、「とても」や「非常に」などの語句を挿入する処理を行う。また、現在選択中の文の先頭や末尾に、泣き顔を表している顔文字を追加する処理を行うようにしてもよい。

Ｓ１２５では、Ｓ１２４の処理による変更が施された文を、当該文に込められていると判定された感情「悲しい」のグループに分類して補助記憶装置に格納する処理が行われる。

Ｓ１２６では、補助記憶装置に格納した画像データで表されている画像に対し、感情「悲しい」が強調されるような変化を施す画像処理（−）が行われる。この画像処理の詳細は後述する。この処理の後は、前述したＳ１１４に処理を進める。

以上までの処理がブログ作成処理である。
次に図５について説明する。同図は、図４に示したブログ作成処理におけるＳ１２３及びＳ１２６の処理として行われる画像処理の第一の例の処理内容をフローチャートで示したものである。

図５において、まず、Ｓ１３１では、「＋」の画像処理を行うか否か、すなわち、感情「嬉しい」が強調されるような変化を施す画像処理（図４のＳ１２３の処理としての画像処理）を行うか否かを判定する処理が行われる。ここで、「＋」の画像処理を行うと判定されたとき（判定結果がＹｅｓのとき）にはＳ１３２に処理を進める。一方、「−」の画像処理、すなわち、感情「悲しい」が強調されるような変化を施す画像処理（図４のＳ１２６の処理としての画像処理）を行うと判定されたとき（判定結果がＮｏのとき）にはＳ１３６に処理を進める。

Ｓ１３２、Ｓ１３３、及びＳ１３４では、感情「嬉しい」が強調されるような変化を施す画像処理として、補助記憶装置に格納した画像データで表されている画像に対し、明度を高める画像処理、コントラストを高める画像処理、及び彩度を高める画像処理がそれぞれ行われる。また、続くＳ１３５では、この画像に対し、例えば、太陽や花弁、花束などといった、感情「嬉しい」を強調する別の画像を挿入して合成する画像処理が行われる。そして、このＳ１３５の処理を終えた後には、処理後の画像を補助記憶装置に格納した上で、図４のブログ作成処理へと処理を戻す。

一方、Ｓ１３６、Ｓ１３７、及びＳ１３８では、感情「悲しい」が強調されるような変化を施す画像処理として、補助記憶装置に格納した画像データで表されている画像に対し、明度を下げる画像処理、コントラストを下げる画像処理、及び彩度を下げる画像処理がそれぞれ行われる。また、続くＳ１３９では、この画像の画素数を間引く、若しくはこの画像のついての表示サイズの設定情報を変更する等して、当該画像が表示されるときの表示サイズが小さくなるようにする画像処理が行われる。そして、このＳ１３９の処理を終えた後には、処理後の画像を補助記憶装置に格納した上で、図４のブログ作成処理へと処理を戻す。

以上までの処理が画像処理の第一の例である。
以上の図４及び図５の処理を実行する度に、ブログサイトサーバ５１には、込められている感情が強調された文章データ及び画像データが、当該感情によって分類されて蓄積されていく。ここで、ブログの閲覧者がＰＣ３４を操作し、感情の分類を指定してブログの閲覧要求を行うと、ブログサイトサーバ５１では、感情に応じて分類して格納しておいた文章データ及び画像データが読み出され、この文章データで表されている文章（感情が強調されているもの）と画像データで表されている画像（感情が強調されているもの）とを所定の表示様式に組み込んでウェブログページデータを作成してＰＣ３４へ送付する。ＰＣ３４では、受け取ったウェブログページデータに従った様式で文章及び画像を表示して閲覧者に提示する。

ここで図６Ａ、図６Ｂ、及び図６Ｃについて説明する。図６Ａは、カメラ１０によって撮影された元の画像の例を示しており、図６Ｂ及び図６Ｃは、上述した図４及び図５の処理の実行によって作成されたウェブログページのＰＣ３４での表示画面例である。ここで、図６Ｂは、「嬉しい」感情の強調がされたウェブログページについてのものであり、図６Ｃは、「嬉しい」感情の強調がされたウェブログページについてのものである。

図６Ｂの表示例では、前述した第一文「今日はよい天気で気持ちよい。」におけるキーワード「気持ちよい」の直前に強調語句「とても」が挿入された文が表示されている。更に、図６Ｂの表示例では、図６Ａに示した木の画像に対し、明度、コントラスト、及び彩度をそれぞれ高める画像処理と、太陽の画像を合成する画像処理とが施された結果、明るく、くっきりした、楽しい印象の画像が表示される。

また、図６Ｃの表示例では、前述した第二文「乾燥した天気が続いて、のどが痛い。」におけるキーワード「痛い」の直前に強調語句「非常に」が挿入された文が表示されている。更に、図６Ｃの表示例では、図６Ａに示した木の画像に対し、明度、コントラスト、彩度をそれぞれ下げる画像処理と、当該画像が表示されるときの表示サイズが小さくなるようにする画像処理とが施された結果、暗く、ぼやけた印象である、小さな画像が表示される。

このように、図４及び図５の処理がブログサイトサーバ５１で行われることにより、元の文章を構成する各文に込められている感情に応じて各文が分類され、更に、その感情が強調される処理を各文とその文章に対応付けられている画像とに対して施したものがブログとして公開されるので、ブログ閲覧者の興味を引くことができるようになる。

なお、図５の処理において、感情「嬉しい」が強調されるような変化を施す画像処理として、この画像の画素数を補間等により増やす、若しくはこの画像のついての表示サイズの設定情報を変更する等して、当該画像が表示されるときの表示サイズが大きくなるようにする画像処理を行うようにしてもよい。

次に図７について説明する。同図は、図４に示したブログ作成処理におけるＳ１２３及びＳ１２６の処理として行われる画像処理の第二の例の処理内容をフローチャートで示したものである。なお、この処理は、元の文章に関連付けられている画像が人物の顔画像である場合に好適な画像処理である。

まず、Ｓ１５１において、補助記憶装置に格納した画像データに関連付けられている、当該画像データで表されている顔画像の目部、鼻部、及び口部の抽出処理の結果を示す位置情報を取得する処理が行われる。

Ｓ１５２では、「＋」の画像処理を行うか否か、すなわち、感情「嬉しい」が強調されるような変化を施す画像処理（図４のＳ１２３の処理としての画像処理）を行うか否かを判定する処理が行われる。ここで、「＋」の画像処理を行うと判定されたとき（判定結果がＹｅｓのとき）にはＳ１５３に処理を進める。一方、「−」の画像処理、すなわち、感情「悲しい」が強調されるような変化を施す画像処理（図４のＳ１２６の処理としての画像処理）を行うと判定されたとき（判定結果がＮｏのとき）にはＳ１５５に処理を進める。

Ｓ１５３では、感情「嬉しい」が強調されるような変化を施す画像処理として、画像データで表されている顔画像における口部に対し、図８Ａに示すように、口の形態を変形させてその口元を上げる画像処理を行い、笑顔の表情の顔画像とする処理が行われる。そして、続くＳ１５４において、当該顔画像における顔以外の領域である背景領域の明度を高める画像処理が行われる。その後、このＳ１５４の処理を終えた後には、処理後の画像を補助記憶装置に格納した上で、図４のブログ作成処理へと処理を戻す。

なお、Ｓ１５４において顔の明度を変化させないのは、顔の明度を高め過ぎることにより顔の表情が不明確になってしまうことを避けるためである。
Ｓ１５５では、感情「悲しい」が強調されるような変化を施す画像処理として、画像データで表されている顔画像における口部に対し、図８Ｂに示すように、口の形態を変形させてその口元を下げる画像処理が行われる。そして、続くＳ１５６において、当該顔画像における目部に対し、図８Ｂに示すように、目の形態を変形させて細目にすると共に、その周囲を顔の皮膚部の色彩で塗りつぶす画像処理が行われる。更に、続くＳ１５７において、図８Ｂに示すように、予め用意しておいた涙の画像を、顔画像における目部の下方に合成する画像処理が行われる。そして、続くＳ１５８において、当該顔画像における顔以外の領域である背景領域の明度を下げる画像処理が行われる。その後、このＳ１５８の処理を終えた後には、処理後の画像を補助記憶装置に格納した上で、図４のブログ作成処理へと処理を戻す。

なお、Ｓ１５８において顔の明度を変化させないのは、顔の明度を下げ過ぎることにより顔の表情が不明確になってしまうことを避けるためである。
以上の図４及び図７の処理を実行する度に、ブログサイトサーバ５１には、込められている感情が強調された文章データ及び画像データが、当該感情によって分類されて蓄積されていく。ここで、ブログの閲覧者がＰＣ３４を操作し、感情の分類を指定してブログの閲覧要求を行うと、ブログサイトサーバ５１では、感情に応じて分類して格納しておいた文章データ及び画像データが読み出され、この文章データで表されている文章（感情が強調されているもの）と画像データで表されている顔画像（感情が強調されているもの）とを所定の表示様式に組み込んでウェブログページデータを作成してＰＣ３４へ送付する。ＰＣ３４では、受け取ったウェブログページデータに従った様式で文章及び顔画像を表示して閲覧者に提示する。

このように、図４及び図７の処理がブログサイトサーバ５１で行われることにより、元の文章を構成する各文に込められている感情に応じて各文が分類され、更に、その感情が強調される処理を各文とその文章に対応付けられている顔画像とに対して施したものがブログとして公開されるので、ブログ閲覧者の興味を引くことができるようになる。

次に図９について説明する。同図は、文章作成アシスト処理の処理内容をフローチャートで示したものである。なお、この処理は、ブログ作成者がＰＣ３２を操作して行う文章作成アシスト要求をブログサイトサーバ５１が取得することにより、図４に示したブログ作成処理におけるＳ１１０の処理に代えて実行される処理である。

図９において、まずＳ１６１では、ＰＣ３２から送られてくる画像データを入力データとして取得し、補助記憶装置に格納する処理が行われる。
続くＳ１６２では、当該画像データと共にＰＣ３２から送られてくる文章データを入力データとして取得する処理が行われる。

Ｓ１６３では、Ｓ１６２の処理で取得した文章データで表されている文章のうちの最初の文を選択する処理が行われる。
Ｓ１６４では、補助記憶装置に構築されているデータベース５８のうちのアシスト文章データベースを参照する処理が行われる。

Ｓ１６５では、現在選択中の文に、アシスト文章データベースに格納されているキーワードが含まれているか否かを判定する処理が行われる。ここで、当該キーワードが含まれていると判定されたとき（判定結果がＹｅｓのとき）にはＳ１６６に処理を進める。一方、当該キーワードが含まれていると判定されたとき（判定結果がＹｅｓのとき）にはＳ１７０に処理を進める。

Ｓ１６６では、Ｓ１６５の判定処理により、現在選択中の文に含まれていると判定されたキーワードについてアシスト文章データベースにおいて対応付けられている文章（アシスト文章）を全て読み出す処理が行われる。そして、続くＳ１６７において、読み出された全てのアシスト文章の一覧表示画面データを作成して、ＰＣ３２へ送付する処理が行われる。

ここで図１０Ａ及び図１０Ｂについて説明する。これらの図は、上述したＳ１６６の処理の実行によって作成された一覧表示画面データのＰＣ３２での表示画面例である。
ここで、図１０Ａの画面には、キーワード「気持ちよい」についてアシスト文章データベースにおいて対応付けられている、「空が青い。」、「暖かかった。」、及び「太陽がキラキラ。」の３つのアシスト文章が一覧表示されている。また、図１０Ｂの画面には、キーワード「痛い」についてアシスト文章データベースにおいて対応付けられている、「咳がひどい。」、「火事になる。」、及び「さんざんだ。」の３つのアシスト文章が一覧表示されている。

また、図１０Ａ及び図１０Ｂに示されている矢印は、一覧表示されているアシスト文章に対して選択を行うためのカーソルである。
ブログ作成者は、ＰＣ３２により表示されるアシスト文章の一覧表示画面を参照しながらカーソルを移動させるための操作を行い、この一覧からアシスト文章を選択する指示をＰＣ３２に対して行う。この指示はＰＣ３２からブログサイトサーバ５１へと送られる。

図９の説明へ戻る。Ｓ１６８では、ＰＣ３２から送られてきたアシスト文章の選択指示を取得する処理が行われる。そして、続くＳ１６９において、選択指示されたアシスト文章を、現在選択中の文に追加してその文を変更する処理が行われ、その後はＳ１７０に処理を進める。

図１０Ａの例では、アシスト文章「太陽がキラキラ。」がカーソルにより選択されている。従って、上述したＳ１６９の処理により、現在選択中の文「今日はよい天気で気持ちよい。」に続けてアシスト文章「太陽がキラキラ。」が追加される。また、図１０Ｂの例では、アシスト文章「さんざんだ。」がカーソルにより選択されている。従って、上述したＳ１６９の処理により、現在選択中の文「乾燥した天気が続いて、のどが痛い。」に続けてアシスト文章「さんざんだ。」が追加される。

Ｓ１７０では、終了判定処理、すなわち、現在選択中の文が、Ｓ１６２の処理により取得した文章データで表されている文章のうちの最後の文であったか否かを判定する処理が行われる。ここで、現在選択中の文が当該最後の文であると判定されたとき（判定結果がＹｅｓのとき）は、Ｓ１７２に処理を進める。一方、現在選択中の文が当該最後の文ではないと判定されたとき（判定結果がＮｏのとき）は、Ｓ１７１に処理を進める。

Ｓ１７１では、Ｓ１６２の処理により取得した文章データで表されている文章において、現在選択中であった文に続く次の文を選択する処理が行われ、その後はＳ１６５へと処理を戻して上述した処理が繰り返される。

Ｓ１７２では、以上までの処理により変更された文章を表している文章データを、Ｓ１６１の処理により格納した画像データと対応付けて補助記憶装置に格納する処理が行われる。この後は、図４に示したブログ作成処理へと処理を戻す。

以上までの処理が文章作成アシスト処理である。この処理がブログサイトサーバ５１で行われることにより、文章に豊かさが加わり、文章の表現力が増す。こうして作成された文章がブログとして公開されるので、ブログ閲覧者の興味を引くことができるようになる。

以上、本発明の実施形態を説明したが、本発明は、上述した各実施形態に限定されることなく、本発明の要旨を逸脱しない範囲内で種々の改良・変更が可能である。

本発明を実施するデータ処理装置であるブログサイトサーバを含む通信ネットワークの構成を示す図である。 図１に示したカメラの機能構成を示す図である。 図１に示したブログサイトサーバの機能構成を示す図である。 ブログ作成処理の処理内容をフローチャートで示した図である。 画像処理の第一の例の処理内容をフローチャートで示した図である。 図１に示したカメラによって撮影された元の画像の例を示す図である。 図４及び図５の処理の実行によって作成されたウェブログページの表示画面例（その１）を示す図である。 図４及び図５の処理の実行によって作成されたウェブログページの表示画面例（その２）を示す図である。 画像処理の第二の例の処理内容をフローチャートで示した図である。 顔画像に対する画像処理の第一の例を示す図である。 顔画像に対する画像処理の第二の例を示す図である。 文章作成アシスト処理の処理内容をフローチャートで示した図である。 アシスト文章の一覧表示画面の表示例（その１）を示す図である。 アシスト文章の一覧表示画面の表示例（その２）を示す図である。

符号の説明

１０ カメラ
１１ 撮像部
１２ 画像処理及び制御処理部
１３ 合焦制御部
１４ 指示取得部
１５ 記録部
１６ 時計部
１７ 関連付け処理部
１８ インタフェース部
３２、３４ ＰＣ
３５ インターネット
５１ ブログサイトサーバ
５２ アクセス受け付け部
５３ 記録処理部
５４ 文章処理部
５５ 分類処理部
５６ 画像処理部
５７ 表示制御部
５８ データベース
５９ アシスト文章処理部

Claims (10)

1. 入力された文章データ及び画像データを格納する格納手段と、
   予め用意されているキーワードと該キーワードが表現している感情を示している感情情報とが予め対応付けられて格納されているデータベースと、
   前記データベースに格納されているキーワードが、前記文章データで表されている文章を構成している各文に含まれているか否かを判定する判定手段と、
   前記文章を構成している各文に込められている感情の分析結果として、前記判定手段が該文に含まれていると判定したキーワードについて前記データベースにおいて対応付けられている感情情報で示されている感情を出力する感情分析手段と、
   前記文章を構成している各文を、前記感情分析手段による感情の分析結果に従って分類する分類手段と、
   前記画像データで表されている画像を、前記感情分析手段による分析結果に基づいて変化させる画像変化手段と、
   前記分類手段により分類された文と前記画像変化手段により変化させた画像とを前記感情分析手段による分析結果に従って関連付ける関連付け手段と、
   予め用意されているキーワードと予め用意されている複数の文章とが予め対応付けられて格納されているアシスト文章データベースと、
   前記アシスト文章データベースに格納されているキーワードが、前記文章データで表されている文章に含まれているか否かを判定するアシスト文章キーワード判定手段と、
   前記アシスト文章キーワード判定手段が前記文章データで表されている文章に含まれていると判定したキーワードについて前記アシスト文章データベースにおいて対応付けられている文章を複数読み出して出力するアシスト文章出力手段と、
   前記アシスト文章出力手段により出力された複数の文章に対する選択の指示を取得する選択指示取得手段と、
   前記選択指示取得手段により取得された指示により選択されている文章を、前記アシスト文章キーワード判定手段が前記キーワードの有無の判定を行った文章に追加することで該文章を変更して出力する文章アシスト手段と、
   を有することを特徴とするデータ処理装置。
2. 前記画像変化手段は、前記画像の明度、コントラスト、彩度、及び該画像を表示する際の表示サイズのうちの少なくとも１つ以上を変化させることで該画像を変化させることを特徴とする請求項１に記載のデータ処理装置。
3. 前記画像変化手段は、前記画像に別の画像を合成することで該画像を変化させることを特徴とする請求項１に記載のデータ処理装置。
4. 前記判定手段が前記キーワードの有無の判定を行った文を、前記感情分析手段による分析結果に基づいて変更して出力する文変更手段を更に有することを特徴とする請求項１に記載のデータ処理装置。
5. 前記文変更手段は、前記感情に予め対応付けられている所定の語句を前記文に追加することで該文を変更することを特徴とする請求項４に記載のデータ処理装置。
6. 前記画像データは、人物の顔を撮影して得られた顔画像の画像データであり、
   前記画像変化手段は、前記顔画像に表されている人物の顔の形態を変形させる、
   ことを特徴とする請求項１に記載のデータ処理装置。
7. 前記画像変化手段は、前記顔画像に表されている人物の顔における目及び口のうちの少なくともどちらか一方の形態を変形させることを特徴とする請求項６に記載のデータ処理装置。
8. 前記画像変化手段は、更に、前記顔画像における前記人物の顔以外の領域である背景領域の明度を変化させることを特徴とする請求項６に記載のデータ処理装置。
9. データ処理装置によって行われるデータ処理の方法であって、
   前記データ処理装置の有する格納手段が、入力された文章データ及び画像データを格納し、
   予め用意されているキーワードと該キーワードが表現している感情を示している感情情報とが予め対応付けられて格納されているデータベースに格納されている該キーワードが、前記文章データで表されている文章を構成している各文に含まれているか否かを、前記データ処理装置の有する判定手段が判定し、
   前記データ処理装置の有する感情分析手段が、前記文章を構成している各文に込められている感情の分析結果として、前記判定手段が該文に含まれていると判定したキーワードについて前記データベースにおいて対応付けられている感情情報で示されている感情を出力し、
   前記データ処理装置の有する分類手段が、前記文章を構成している各文を、前記感情分析手段による感情の分析結果に従って分類し、
   前記データ処理装置の有する画像変化手段が、前記画像データで表されている画像を、前記感情分析手段による分析結果に基づいて変化させ、
   前記データ処理装置の有する出力手段が、前記分類手段により分類された文と前記画像変化手段により変化させた画像とを前記感情分析手段による分析結果に従って関連付け、
   予め用意されているキーワードと予め用意されている複数の文章とが予め対応付けられて格納されているアシスト文章データベースに格納されているキーワードが、前記文章データで表されている文章に含まれているか否かを、前記データ処理装置の有するアシスト文章キーワード判定手段が判定し、
   前記アシスト文章キーワード判定手段が前記文章データで表されている文章に含まれていると判定したキーワードについて前記アシスト文章データベースにおいて対応付けられている文章を、前記データ処理装置の有するアシスト文章出力手段が複数読み出して出力し、
   前記データ処理装置の有する選択指示取得手段が、前記アシスト文章出力手段により出力された複数の文章に対する選択の指示を取得し、
   前記データ処理装置の有する文章アシスト手段が、前記選択指示取得手段により取得された指示により選択されている文章を、前記アシスト文章キーワード判定手段が前記キーワードの有無の判定を行った文章に追加することで該文章を変更して出力する、
   ことを特徴とするデータ処理方法。
10. 入力された文章データ及び画像データをコンピュータが有している記憶部に格納する格納処理と、
    予め用意されているキーワードと該キーワードが表現している感情を示している感情情報とが予め対応付けられて格納されているデータベースに格納されている該キーワードが、前記文章データで表されている文章を構成している各文に含まれているか否かを判定する判定処理と、
    前記文章を構成している各文に込められている感情の分析結果として、前記判定処理によって該文に含まれていると判定されたキーワードについて前記データベースにおいて対応付けられている感情情報で示されている感情を出力する感情分析処理と、
    前記文章を構成している各文を、前記感情分析処理による感情の分析結果に従って分類する分類処理と、
    前記画像データで表されている画像を、前記感情分析処理による分析結果に基づいて変化させる画像変化処理と、
    前記分類処理により分類された文と前記画像変化処理により変化させた画像とを前記感情分析処理による分析結果に従って関連付ける関連付け処理と、
    予め用意されているキーワードと予め用意されている複数の文章とが予め対応付けられて格納されているアシスト文章データベースに格納されているキーワードが、前記文章データで表されている文章に含まれているか否かを判定するアシスト文章キーワード判定処理と、
    前記アシスト文章キーワード判定処理によって前記文章データで表されている文章に含まれていると判定されたキーワードについて前記アシスト文章データベースにおいて対応付けられている文章を複数読み出して出力するアシスト文章出力処理と、
    前記アシスト文章出力処理により出力された複数の文章に対する選択の指示を取得する選択指示取得処理と、
    前記選択指示取得処理により取得された指示により選択されている文章を、前記アシスト文章キーワード判定処理による前記キーワードの有無の判定が行われた文章に追加することで該文章を変更して出力する文章アシスト処理と、
    をコンピュータに行わせるためのプログラム。