JP6338418B2 - 画像処理装置及び画像処理方法 - Google Patents

Description

本発明は、スマートフォンや携帯電話機などの情報端末で撮影した写真情報を含む画像データに対し、画像処理を行う画像処理装置に関する。

近年、デジタルカメラやスマートフォン等の情報端末の普及により、簡単にデジタル写真を作成することができるようになった。それゆえ、各ユーザーのスマートフォンには１０００枚を超える大量のカメラ画像データが蓄積されていることも少なくない。また、近年のスマートフォンやデジタルカメラのメモリは大容量化が進んでおり、蓄積できるカメラ画像データの枚数も益々増える傾向にある。そのため、大量のカメラ画像データより所望の写真情報を探し出すための検索方法としては、カメラ画像データのファイル名やカメラ画像データの撮影日時を利用する手段や、スマートフォンやデジカメを使用して撮影した画像データには位置情報が付加されていることより、写真を撮影した位置情報基づいて所望のカメラ画像データ内の写真情報を検索する方法がある。

また、特許文献１では、撮影した画像データをサーバーにアップロードして、アップロードされた画像データ内の写真情報における顔画像を検出し、同じ写真（情報）に写っている人物同士を検出することで画像データに基づきユーザー相関図を作成するユーザー相関図作成装置が開示されている。

特開２００９−２５１８３２号公報

しかしながら、特許文献１に開示のユーザー相関図作成装置ではユーザー相関図の作成のために画像データを必ずサーバーにアップロードする必要があり、それ以前の手順として相関情報作成サーバー装置というサービス実行部にユーザー登録を実施しなければならない。また、ユーザー相関図を作成するためにはその都度サーバーへのカメラ画像データをアップロードするという手順が発生する。このように、ユーザーに要求される操作が多くユーザーに負担をかけているという問題点があった。

加えて、ユーザー相関図を作成するために、まずは大量画像の中より所望の画像データをサーバーへのアップロード用に検索することが必要となる。さらに、ユーザー相関図自体も画像データに基づくものに限られているという問題点があった。

この発明は上記問題点を解決するためになされたもので、ユーザーに負担をかけることなく、情報端末のユーザーとの関連性を容易に理解できる態様で写真情報に関する表示用画像を表示することができる画像処理装置を得ることを目的とする。

この発明に係る請求項１記載の画像処理装置は、複数の写真情報を含む画像データと、各々が顔画像情報と関連付けられた登録人数分の個人情報である情報端末登録データとに基づき、画像処理を行う画像処理装置であって、前記画像データ及び前記情報端末登録データを保持する情報端末は他の通信機器との複数のコミュニケーション機能を有し、前記登録人数分の個人情報は、前記顔画像情報と関連づけられ、少なくとも前記複数のコミュニケーション機能の利用相手を指示するコミュニケーション利用者情報と、前記複数のコミュニケーション機能の利用履歴を利用相手を特定して示すコミュニケーション履歴情報とをさらに含み、前記画像処理装置は、前記情報端末と独立して設けられ、前記画像データ及び前記情報端末登録データを受け、前記複数の写真情報それぞれと前記登録人数分の前記顔画像情報それぞれとを画像比較し、前記写真情報単位に前記顔画像情報と関連付けられた登録人物が含まれているか否かを示す相関画像データを得る画像判定部と、前記コミュニケーション履歴情報を含む前記情報端末登録データに基づき、前記登録人数分の登録人物に関連づけて、前記情報端末のユーザーの前記複数のコミュニケーション機能に含まれる選択コミュニケーション機能の利用頻度に対応させる形式で複数種の識別項目に分類した個人情報識別データを得る識別項目分類処理を実行する個人情報識別部と、前記相関画像データ及び前記個人情報識別データに基づき、前記情報端末のユーザーの前記選択コミュニケーション機能における利用頻度の高い登録人物が優先されるように、前記画像データにおける前記複数の写真情報の少なくとも一部に、前記複数種の識別項目のいずれかを関連付けた態様の表示用画像を表示用画面上に表示する画像表示手段とを備える。

請求項１記載の本願発明である画像処理装置における画像表示手段は、画像判定部及び個人情報識別部より得られた相関画像データ及び前記個人情報識別データに基づき、複数の写真情報の少なくとも一部に、複数種の識別項目のいずれかを関連付けた態様の表示用画像を表示用画面上に表示するため、表示用画面に表示される表示用画像から、写真情報と情報端末のユーザーとの関連性を容易に理解することができる。この際、情報端末のユーザーは特に操作を要しないため、情報端末のユーザーに負担かけることもない。

この発明の実施の形態である画像出力装置を含む写真プリントシステムの構成を示すブロック図である。 図１で示した画像出力装置における内部構成の詳細を示すブロック図である。 本実施の形態の画像出力装置によるユーザー相関図データの作成手順を主として示すフローチャートである。 図１及び図２で示した電話帳データの具体的内容を示す説明図である。 図１で示した判定部による顔画像検出処理結果と相関画像データとの関係を模式的に示す説明図である。 図１で示したコミュニケーション検出部によるコミュニケーション判定処理内容を模式的に示す説明図である。 ユーザー相関図データに基づく画像表示手段による表示用画面上における表示例を示す説明図（その１）である。 ユーザー相関図データに基づく画像表示手段による表示用画面上における表示例を示す説明図（その２）である。

＜実施の形態＞
（相関表示作成手段２５の構成）
図１はこの発明の実施の形態である画像処理装置である画像出力装置１を含む写真プリントシステムの構成を示すブロック図である。同図に示すように、画像出力装置１に相互接続手段２２を介して情報端末２が接続されることより、情報端末２内の記憶媒体６に記録された、複数の写真情報を含む画像データＤ１に基づくプリントアウト処理が実行可能となる。

なお、情報端末２としては、カメラ機能を有し、撮影した複数の写真情報を画像データＤ１として保存し、かつ、電話機能、電子メール機能等のコミュニケーション機能を有するスマートフォンや携帯電話機等が考えられる。また、情報端末２はカメラ機能を有していない場合でも、別途、デジタルカメラ等で別途撮影された写真情報を画像データＤ１として取り込む画像データ保持機能を有している端末であっても良い。さらに、画像データＤ１を格納するメディア自体を情報端末２とは独立して持たせる態様も考えられる。

相互接続手段２２は後述する画像データ読み込み手段７及びモバイルデータ読込み手段２１のハードウェア部分であり、具体的には、相互接続手段２２として、情報端末２とのケーブルなどの有線接続手段やＷｉ-Ｆｉなどの無線接続手段およびカードメディアなどの記憶媒体の読出し機構等が考えられる。

例えば、記憶媒体６がＣＤ/ＤＶＤ、ＵＳＢメモリ、赤外線通信が可能な装置、Bluetooth（登録商標）によりデータを受信するBluetooth装置、情報端末と無線通信を行う無線ＬＡＮが可能な装置である場合、ＣＤ/ＤＶＤを読み込むＣＤ/ＤＶＤドライブ、ＵＳＢを読み込むＵＳＢポート、携帯電話から赤外線通信によりデータを受信する赤外線通信装置、Bluetoothによりデータを受信するBluetooth装置、情報端末と無線通信を行う無線ＬＡＮやＷｉ-Ｆｉ等で相互接続手段２２を構成しても良い。また、相互接続手段２２として、情報端末２を直接接続しデータ通信を行うケーブル、あるいはスキャナー装置であってもよい。このように、相互接続手段２２として、画像出力装置１と情報端末２の記憶媒体６と接続することが可能な多種多様な構成が考えられる。

画像出力装置１における特徴部分である相関表示作成手段２５は、内部に画像検出部２５１、判定部２５２、及びコミュニケーション検出部２５３を有し、記憶部として写真ＤＢ２５４及びコミュニケーション履歴ＤＢ２５５を有している。

画像検出部２５１は、相互接続手段２２を介して、画像データＤ１を取り込み、画像データＤ１に規定された複数の写真情報それぞれについて顔画像の有無を検出する顔画像検出処理を実行して、顔画像が存在する写真情報を特定する顔存在情報Ｄ１ｆを生成する。そして、画像検出部２５１は画像データＤ１及び顔存在情報Ｄ１ｆを判定部２５２に出力する。

判定部２５２は、画像データＤ１、顔存在情報Ｄ１ｆ及び電話帳データＤ２を受け、画像データＤ１内の複数の写真情報のうち、顔存在情報Ｄ１ｆが顔画像を検出したことを指示する少なくとも一つの写真情報（顔検出写真情報）それぞれと電話帳データＤ２内の登録人数分の顔画像情報それぞれとを画像比較し、顔検出写真情報単位に顔画像情報が合致した個人情報を関連づけた相関画像データＤ１２を写真ＤＢ２５４に登録する。電話帳データＤ２は各々が顔画像情報と関連付けられた登録人数分の個人情報（本人、及びコミュニケーション履歴データＤ３における利用相手の個人情報）が含まれるコミュニケーション利用者情報である。

これら画像検出部２５１及び判定部２５２により、画像データＤ１及び電話帳データＤ２を受け、画像データＤ１で規定された複数の写真情報それぞれと登録人数分の顔画像情報それぞれとを画像比較し、写真情報単位に顔画像情報が合致した個人情報を関連づけて相関画像データＤ１２を得る画像判定部を構成する。

個人情報識別部であるコミュニケーション検出部２５３は、相互接続手段２２を介して情報端末２から、モバイルデータＤ２０（情報端末登録データ）である電話帳データＤ２及びコミュニケーション履歴データＤ３を取得する。

コミュニケーション履歴データＤ３は通話履歴データＤ３１、メール履歴データＤ３２及び通信履歴データＤ３３を含んでいる。

電話履歴情報である通話履歴データＤ３１は、情報端末２に本来備わる電話機能を利用して、情報端末２のユーザーによる他の通信機器との電話機能の利用履歴を、利用相手を特定して示すデータである。電子メール履歴情報であるメール履歴データＤ３２は、情報端末２に本来備わる電子メール機能を利用して、情報端末２のユーザーによる他の通信機器等との電子メール機能の利用履歴を利用相手を特定して示すデータである。通信履歴データＤ３３は、情報端末２に実行可能なアプリケーションソフトによって実現されるアプリケーション通信機能を利用して、情報端末２のユーザーによる他の通信機器等とのアプリケーション通信機能の利用履歴を利用相手を特定して示すデータである。なお、上述した利用相手は電話帳データＤ２内の登録人数分の個人情報によって特定することができる。

そして、コミュニケーション検出部２５３は、電話帳データＤ２及びコミュニケーション履歴データＤ３に基づき、電話帳データＤ２内における登録人数分の個人情報を、コミュニケーション履歴データＤ３に基づき識別される複数種の識別項目に分類した個人情報識別データＤ２３を得るコミュニケーション判定処理（識別項目分類処理）を実行し、個人情報識別データＤ２３をコミュニケーション履歴ＤＢ２５５に登録する。

上述した複数種の識別項目としては、通話履歴データＤ３１による通話頻度（電話機能の利用頻度）、メール履歴データＤ３２による電子メール利用頻度、及びコミュニケーション履歴データＤ３によるアプリケーション通信頻度に基づくコミュニケーション機能利用頻度がある。すなわち、これら履歴データＤ３１〜Ｄ３３の総合評価、一部評価、あるいは個別評価に基づき、コミュニケーション機能の利用頻度の度合に基づく複数のランク付けが複数種の識別項目に該当する。

また、複数種の識別項目はユーザー単位に行うことが基本であるが、電話帳データＤ２内に登録されている家族、友人、同僚等のグループ情報（情報端末２のユーザーの特定の関係性を示す情報）単位で分類しても良い。

このように、相関表示作成手段２５は、上述した写真ＤＢ２５４に登録された相関画像データＤ１２と、コミュニケーション履歴ＤＢ２５５に登録された個人情報識別データＤ２３との組合せによるユーザー相関図データＤ２５を得ることができる。

そして、図１では図示しない、画像出力装置１の特徴部分である画像表示手段１３（図２参照）は、画像データＤ１に加えて、上述したユーザー相関図データＤ２５を受ける。そして、画像表示手段１３は、ユーザー相関図データＤ２５に基づき、画像データＤ１によって規定された複数の写真情報の少なくとも一部に、複数種の識別項目のいずれかを関連付けた態様の表示用画像を表示用画面上に表示する。

（画像出力装置１の全体構成）
図２は図１で示した画像出力装置１の内部構成の詳細を示すブロック図である。同図に示すように、画像出力装置１は画像データ受付端末(以後、「受付端末」と称する)３と、プリンタ４（プリンタ４１〜４ｎ）とにより構成される。

受付端末３は、情報端末２やデジタルカメラ等で撮影された画像データＤ１、電話帳データＤ２、及びコミュニケーション履歴データＤ３を記憶媒体６から読み込み、画像出力装置１に搭載された画像表示手段１３の表示画面上にユーザー相関図データＤ２５に基づく画像表示を行い、ユーザーに画像を選択させる端末である。

受付端末３は、制御部２６及び記憶部１０より構成され、制御部２６は、図１で示した相関表示作成手段２５以外に、画像データ読み込み手段７、モバイルデータ読込み手段２１、画像表示手段１３、音声再生手段１４、課金手段２０、位置検出手段１５、データ選択手段１６、通信手段１８、印刷データ作成手段１１、及びプリントデータ送信手段１２を有して構成される。

プリンタ４は、受付端末３に接続され、記憶部１０に格納された画像データＤ１に基づく写真画像出力である写真５（５１〜５ｎ）をプリントアウトする。同図に示すように、プリンタ４はｎ（ｎ≧２）台のプリンタ４１〜４ｎにより構成され、各プリンタ４ｉ（ｉ＝１〜ｎのいずれか）によって写真５ｉがプリントアウトされる。

画像データ読み込み手段７は、ハードウェア部分として、上述した相互接続手段２２を有しており、情報端末２の記憶媒体６に格納された画像データＤ１を読み込み、記憶部１０に格納する。

記憶部１０は画像データ読み込み手段７で読み込んだ画像データＤ１を格納するともに、画面表示や音声ガイダンス情報のデータ群である定義データＤ９と、プリンタ５よりプリントされる写真５の画質を調整するための画質調整データＤ１７と、モバイルデータ読込み手段２１を介して読み込んだモバイルデータＤ２０（電話帳データＤ２＋コミュニケーション履歴データＤ３）を格納している。

印刷データ作成手段１１は、画像表示手段１３からの印刷制御信号ＳＣ１３に基づき、記憶部１０に記憶された画像データＤ１内の複数の写真画像から選択された印刷用画像からなるプリントデータを得る。この際、画質調整データＤ１７に基づき必要に応じて画質調整を行う。

プリントデータ送信手段１２は印刷データ作成手段１１より得たプリントデータをプリンタ４ｉに送信することにより、プリンタ４ｉに画像データＤ１に基づく写真５ｉのプリントアウト処理を実行させる。

画像表示手段１３は、上述したように、画像データ読み込み手段７により読み込んだ画像データＤ１を受け、相関表示作成手段２５で作成したユーザー相関図データＤ２５に基づく表示用画像を表示用画面上に表示することにより、ユーザーにプリンタ４によるプリントアウトを所望する写真５を選択させる機会を与えている。

画像表示手段１３のハートウェア部分として例えばＣＲＴや液晶パネル等の表示装置と一体化されたタッチパネル等が該当する。また、タッチパネルについてはマルチタッチ対応のタッチパネルであっても良い。したがって、ユーザーは画像表示手段１３によるユーザー相関図データＤ２５に基づく表示用画像の表示用画面上の表示に対し、タッチパネル機能を利用したタッチ等のユーザーによる直接操作が可能である。

音声再生手段１４は、ユーザーがプリントを所望する写真情報の選択や受付端末３の操作を困惑することなく操作するための音声によるガイダンスや、写真５ｉのプリント中のＢＧＭや情報端末２が操作されていないときに表示用画面上にスクリーンセーバーと共に通行人に端末の機能を告知するキャッチ音声などの音声再生を行う。音声再生手段１４はハードウェア部分としてスピーカーを有している。

課金手段２０は画像出力装置１のユーザーが受付端末３で注文した分のプリント料金を支払うための手段である。課金手段２０のハードウェア部分として、硬貨や紙幣の受け入れと、投入された硬貨や紙幣を保持する機能と、投入された金額に対して販売金額との差額のつり銭返却などを行う部分がある。

位置検出手段１５は画像出力装置１が設置された位置情報を検出する手段である。具体的なハードウェア部分として、例えば、ＧＰＳ(Global Positioning System)やＩＰアドレスによる位置測定方法やＷｉ-Ｆｉ基地局による位置測定などを使用して、画像出力装置１の位置の座標を求め、その結果を出力する構成等が考えられる。ここでいう、座標とは緯度・経度のことを指すが、その他取得した位置情報により画像出力装置１の位置情報が特定できるものであれば、特に限定する必要はない。

データ選択手段１６は、位置検出手段１５により検出された位置情報に基づいて最適な画面表示や音声ガイダンスを行うための定義データＤ９を選択して、記憶部１０に格納する。なお、データ選択手段１６は、例えば、記憶部１０に格納されたデータ選択手段１６用のプログラムに従ってデータ選択を行う。

複数種の定義データは画像出力装置１外のデータサーバー１９に準備されており、データ選択手段１６は通信手段１８を介してデータサーバー１９と通信することにより、データサーバー１９上に準備された複数種の定義データのうち、最適な定義データを定義データＤ９として記憶部１０に格納する。

データ選択手段１６の制御下で通信手段１８は前述した記憶部１０に記憶されている定義データＤ９の取得や更新を行うためにデータサーバー１９との通信を行う。通信手段１８の具体的なハードウェア構成として、有線、無線の通信機能は問わない。

モバイルデータ読込み手段２１はハードウェア機能として前述した相互接続手段２２を有し、記憶媒体６より情報端末２の電話帳データＤ２及びコミュニケーション履歴データＤ３を読み込む。そして、モバイルデータ読込み手段２１は電話帳データＤ２及びコミュニケーション履歴データＤ３からなるデータをモバイルデータＤ２０として記憶部１０に格納する。なお、モバイルデータ読込み手段２１は、電話帳データＤ２及びコミュニケーション履歴データＤ３を読み込んで、モバイルデータＤ２０として記憶部１０に格納できる手段であれば方法及び構成は限定しない。

コミュニケーション履歴データＤ３には、情報端末２に本来備わる電話通信を行った時に情報端末２内に残る通話履歴情報である通話履歴データＤ３１や、情報端末２に本来備わる電子メールの送信または受信をした時のメール送受信履歴情報であるメール履歴データＤ３２や、情報端末２にインストールしたアプリケーションを使用して他ユーザーと通信を行った際に残るアプリケーション通信履歴情報である通信履歴データＤ３３からなる。

相関表示作成手段２５は、記憶部１０に格納された画像データＤ１とモバイルデータＤ２０（電話帳データＤ２＋コミュニケーション履歴データＤ３）とを取り込み、図１を用いて説明したように、画像データＤ１及びモバイルデータＤ２０に基づき、相関画像データＤ１２及び個人情報識別データＤ２３からなるユーザー相関図データＤ２５を作成する。

制御部２６による上述した各手段の主要な機能はソフトウェアに基づくＣＰＵによるプログラム処理により実現可能である。以下、この点を詳述する。画像データ読み込み手段７及びモバイルデータ読込み手段２１と記憶媒体６との接続自体は、相互接続手段２２であるハードウェア部分により実現する。一方、画像データ読み込み手段７による画像データ読み込み処理とモバイルデータ読込み手段２１によるモバイルデータ読み込み処理についてはソフトウェアに基づくＣＰＵによるプログラム処理で実現する。

課金手段２０について、上述したように、硬貨や紙幣の投入口や投入された硬貨や紙幣の蓄積はコインメックやビルバリなどのハードウェアにより実現する。投入された硬貨や紙幣の計上や払い出しについてはソフトウェアに基づくＣＰＵによるプログラム処理で実現する。

その他、相関表示作成手段２５等の各手段の処理手順は主としてソフトウェアに基づくＣＰＵよるプログラム処理で実現する。このように、制御部２６は上述したようにソフトウェアに基づくプログラム処理により、画像出力装置１の全体を制御しており、パソコンのＣＰＵなどに相当するものである。

プリンタ４は、例えば、高解像度のカラープリンタであり、昇華型プリンタ、またはインクジェットプリンタなどであり、印刷の方式は限定しない。また、プリンタ４にてプリントされる写真５については、Ｌ判サイズの写真に限定することはなく、はがきサイズや２Ｌ判などの大きなサイズや、シールプリントとなっても良い。

記憶媒体６とは、デジタルカメラ等で使用されているＳＤカードやメモリースティックなどのカードメディアと、ＣＤやＤＶＤやＵＳＢメモリなどのことをいう。また、記憶媒体６は、上述したカードメディアに加えて情報端末に内蔵されており、カメラ画像データなどを記憶しているメモリを含む意味で用いている。

定義データＤ９は、位置検出手段１５にて取得する位置情報に基づき定する画面表示や音声ガイダンスに加え、プリントされる写真の色味や質感を調整する画質調整ファイルと、画像出力装置１の写真の販売金額を設定している料金設定データとを対応させたデータを含む。すなわち、定義データＤ９は、位置検出手段１５によって得られた位置情報、例えば、緯度・経度とその地域で使用される画面表示や音声ガイダンスと、プリントされる写真の色味や質感と、画像出力装置１の写真の販売金額を関連付けたデータを意味する。

記憶部１０はハードディスクなどの大容量記憶装置のことをいう。この記憶部１０には、各構成部分を制御するプログラムを含んでいる。例えば、記憶部１０は、記憶媒体６から画像データＤ１を読込んで記憶部１０に一時保存するプログラム（画像データ読み込み手段７を実現するためのプログラム）、表示用画面に表示する表示用画像を制御するプログラム（画像表示手段１３を実現するプログラム）、及び表示用画面上に表示された画像の編集や加工を行うプログラム（印刷データ作成手段１１を実現するためのプログラム）を格納している。さらに、記憶部１０は、ユーザーのプリント注文情報を保持するプログラム（課金手段２０を実現するためのプログラム）、プリンタ４にプリントする画像を送信するプログラム（プリントデータ送信手段１２を実現するためのプログラム）、データサーバー１９とデータをやり取りするプログラム（通信手段１８を用いたデータ選択手段１６を実現するためのプログラム）、及びユーザー相関図を作成するためのプログラム（相関表示作成手段２５を実現するためのプログラム）等を格納している。

ユーザーは選択した写真画像に対して画像表示手段１３の表示用画面上のタッチパネル機能を利用して、らくがき、スタンプ、フレーム付加のような画像加工や画像の拡大または縮小、回転、トリミングなどの画像編集操作が可能である。これらの画像編集操作において、定義データＤ９に記憶されているスタンプやフレームなどの素材データを、印刷データ作成手段１１が作成するプリントデータに反映させることができる。

（相関表示作成手段２５の動作）
図３は画像出力装置１によるユーザー相関図データＤ２５の作成手順を主として示すフローチャートである。以下、図３を参照して、ユーザー相関図データＤ２５の作成処理手順及び画像表示手段１３による表示動作について説明する。

まず、ステップＳ１において、画像出力装置１に情報端末２を接続する。情報端末２は、前述したように、ユーザーがプリントを所望するカメラ画像である複数の写真情報を有する画像データＤ１を記憶媒体６内に保存している、スマートフォンや携帯電話機等である。

情報端末２の画像出力装置１への接続方法は、相互接続手段２２で説明したように、ケーブルを使用した有線接続、Ｗｉ-Ｆｉなど無線を使用した無線接続、メモリーカードなどを使用した記憶媒体接続など接続形式は問わない。すなわち、画像データ読み込み手段７による画像データＤ１の読み込み、モバイルデータ読込み手段２１による電話帳データＤ２及びコミュニケーション履歴データＤ３の読み込みができるように、画像出力装置１に情報端末２を接続できれば良い。

次に、ステップＳ２において、画像データ読み込み手段７は、画像出力装置１に接続された情報端末２等の記憶媒体６に保存されている画像データＤ１を読み取り、画像出力装置１の記憶部１０に格納する画像データＤ１の読み込み処理を実行する。

その後、ステップＳ３において、モバイルデータ読込み手段２１は、画像出力装置１に接続された情報端末２の記憶媒体６に保存されている電話帳データＤ２及びコミュニケーション履歴データＤ３を読み取り、画像出力装置１の記憶部１０にモバイルデータＤ２０として格納するモバイルデータの読み込み処理を実行する。なお、モバイルデータＤ２０とは電話帳データＤ２及びコミュニケーション履歴データＤ３のことである。

図４は電話帳データＤ２の具体的内容を示す説明図である。同図に示すように、電話帳データＤ２は、登録人数の個人情報を規定した登録データＲＤ１、ＲＤ１１〜ＲＤ１３により構成される。登録データＲＤ１には本人の顔画像情報である顔画像データＦＤ１と、本人の名前、電話番号、及びメールアドレス等の個人情報を規定した個人データＪＤ１から構成される。

登録データＲＤ１１〜ＲＤ１３は、情報端末２のユーザーの利用相手の顔画像情報である顔画像データＦＤ１１〜ＦＤ１３と、利用相手の名前、電話番号、及びメールアドレス、及び利用相手との関係性を示すグループ情報等の個人情報を規定した個人データＪＤ１１〜ＪＤ１３から構成される。

なお、図４には示していないが、個人データＪＤ１，ＪＤ１１〜ＪＤ１３として、本人（利用相手）の生年月日、住所、各ユーザーに対するコメントなどを含ませてもよく、図４で示した個人データの内容に限定するものではない。

また、コミュニケーション履歴データＤ３は、情報端末２のユーザーと他の通信機器等のユーザーと間で行った、コミュニケーション機能の利用履歴を利用相手を特定して示すコミュニケーション履歴情報を意味する。

コミュニケーション履歴データＤ３として、情報端末２に本来備わった電話機能を利用した電話機能の利用履歴を利用相手を特定して示す通話履歴データＤ３１、情報端末２に本来備わった電子メール機能を利用した電子メール機能の利用履歴を利用相手を特定して示すメール履歴データＤ３２が含まれる。さらに、コミュニケーション履歴データＤ３として、情報端末２にインストールして他のユーザーとアプリケーション通信を行うアプリケーション通信機能を利用履歴を特定して示すアプリケーション通信履歴データＤ３３が含まれる。

その後、ステップＳ４では、相関表示作成手段２５の画像検出部２５１が記憶部１０に保持された画像データＤ１に、人物の顔が含まれているかどうかを検出する顔画像検出処理を実行する。すなわち、画像検出部２５１により、画像データＤ１における各写真画像中に顔画像が含まれているか否かの画像解析を行い、画像解析結果として複数の写真情報それぞれにおける顔画像の有無を示す顔存在情報Ｄ１ｆを得る顔画像検出処理を実行する。画像検出部２５１は画像データＤ１と共に顔存在情報Ｄ１ｆを次段の判定部２５２に出力する。

これらの画像検出部２５１による顔画像検出処理は記憶部１０に保持された画像データＤ１を構成する複数の写真画像全てに対して行われる。なお、画像検出部２５１が実行する顔画像検出処理については、例えば、記憶部１０に保存されている顔検出プログラムおよび画像解析プログラム、顔画像比較プログラム等を制御部２６が実行することにより実現される。

次に、ステップＳ５において、顔画像検出処理による顔画像の検出の有無を確認する。すなわち、ステップＳ４の顔画像検出処理により、顔存在情報Ｄ１ｆが少なくとも一つの写真情報における顔画像の存在を指示する場合(YES)は、次のステップＳ６に進み、顔存在情報Ｄ１ｆが全ての写真情報における顔画像の存在を指示しなかった場合(NO)は、ステップＳ９に移行する。ここで、複数の写真情報のうち顔存在情報Ｄ１ｆが顔画像の存在を指示する写真情報を、「（少なくとも一つの）顔検出写真情報」と呼ぶ。なお、ステップＳ５でＮＯの場合は、ステップＳ９〜Ｓ１１の実行による個人情報識別データＤ２３のコミュニケーション履歴ＤＢ２５５への登録処理のみが行われることになる。

ステップＳ５でＹＥＳの場合に実行されるステップＳ６において、相関表示作成手段２５の判定部２５２は、電話帳データＤ２に登録されている顔画像（顔画像データＦＤ）との比較処理を実行する。すなわち、判定部２５２は、一つの顔検出写真情報と、電話帳データＤ２に保存されている登録人数分のユーザー（本人もしくは利用相手）の顔画像情報（以下、「ユーザー顔画像」と略記）とを比較して、顔検出写真情報について、ユーザー顔画像に合致するか否かを判定する。

そして、判定部２５２は、顔検出写真情報に合致するユーザー顔画像が存在する場合、合致したユーザー顔画像の利用相手（複数を含む）を特定する情報と顔検出写真情報を特定する情報とを関連づけた相関関連情報を生成する。

その後、ステップＳ７において、検出した顔画像数分、すなわち、顔検出写真情報の全てに対してステップＳ６の比較処理が終了したかの確認処理を行い、終了した場合(YES)はステップＳ８に移行し、終了していない場合(NO)はステップＳ６に戻る。以降、ステップＳ７でＹＥＳと判定されるまでステップＳ６及びＳ７の処理が繰り返される。

ステップＳ７でＹＥＳの場合に実行されるステップＳ８において、少なくとも一つの顔検出写真情報のうち、合致するユーザー顔画像が存在した場合にステップＳ６にて生成された上記相関関連情報の集合体である相関画像データＤ１２を得ることができ、判定部２５２はこの相関画像データＤ１２を写真ＤＢ２５４に登録する。

図５は判定部２５２による顔画像検出処理結果と相関画像データＤ１２との関係を模式的に示す説明図である。

同図(a) に示すように、画像データＤ１で規定される複数の画像情報のうち、画像検出部２５１により検出された少なくとも一つの顔検出写真情報である写真データ（写真情報）ＰＤ１〜ＰＤ４に対し、電話帳データＤ２の登録データＲＤ１１〜ＲＤ１３で規定されたユーザーＡ〜Ｃの顔画像データＦＤ１１〜ＦＤ１３（顔画像情報）との顔画像検出処理結果を示している。同図(a) において、○印が、写真データＰＤ１〜ＰＤ４内に対応するユーザーのユーザー顔画像が存在した場合、×印が写真データＰＤ１〜ＰＤ４内に対応するユーザーのユーザー顔画像が存在しなかった場合を示している。

例えば、判定部２５２によって、写真データＰＤ１（識別番号１）では、ユーザーＡ〜ユーザーＣのうち、ユーザーＡとユーザーＢとが写っていると判定されため、ユーザーＡは○、ユーザーＢは○、ユーザーＣは×となる。同様にして、写真データＰＤ２（識別番号２）では、ユーザーＡは×、ユーザーＢは○、ユーザーＣは×となる。

図５の(a) で示す判定部２５２による判定結果（写真データＰＤ単位の相関関連情報の集合体）が得られると、判定部２５２は上記判定結果に基づく相関画像データＤ１２を生成することになる。すなわち、図５(b) に示すように、ユーザーＡ関連写真情報２４Ａとして、ユーザーＡに画像データＤ１の写真画像の識別番号（採番）である１，３，…（ＰＤ１〜ＰＤ４に１〜４が対応）を対応させ、ユーザーＢ関連写真情報２４ＢとしてユーザーＢに画像データＤ１の写真画像の識別番号である１，２，３，４，…を対応させ、ユーザーＣ関連写真情報２４ＣとしてユーザーＣに画像データＤ１の写真画像の識別番号である３，…を対応させて、相関画像データＤ１２を生成している。

なお、写真データＰＤ２に関しては電話帳データＤ２より検出されなかったユーザーの顔画像（右側の顔画像）が含まれているが、このような顔画像については、相関画像データＤ１２の作成対象とはしない。

以上のように、ステップＳ８において、判定部２５２は、電話帳データＤ２より登録された登録データＲＤ内の顔画像データＦＤに基づいて、各ユーザーが画像データＤ１における顔検出写真情報それぞれで規定される写真に写っているか否かを関連付けた相関画像データＤ１２を写真ＤＢ２５４に登録する。なお、写真ＤＢ２５４は記憶部１０内に設けも、相関表示作成手段２５専用に画像出力装置１内に別途設けても良い。

続いて、ステップＳ９において、コミュニケーション検出部２５３は、電話帳データＤ２のグループ情報に基づき、グループ設定を行う。グループ情報とは図４に示すように、情報端末２のユーザーが電話帳データＤ２に登録された各ユーザーの個人データＪＤ１１〜ＪＤ１３に対して、友人、家族・親戚、同僚などのユーザーとの関連性をもたせたグルーピング情報を意味し、電話帳データＤ２にグループ情報が存在する場合は、グループ情報に基づきグループ単位に設定を行うことができる。例えば、利用者を友人、家族・親戚、同僚別にグループ設定することができる。このグループ設定は一例であり、情報端末２のユーザーによって任意のグループ設定が可能である。

コミュニケーション検出部２５３は、まず記憶部１０に保持されている電話帳データＤ２に登録されている各ユーザーのグループ情報を検出して、存在する場合はグループ情報によるグループ設定を行う。

次に、ステップＳ１０において、相関表示作成手段２５のコミュニケーション検出部２５３は、記憶部１０に保持されている電話帳データＤ２とコミュニケーション履歴データＤ３とに基づき、情報端末２のユーザーがどのユーザー（利用相手）と親密に連絡を取っているかを判定するコミュニケーション判定処理（識別項目分類処理）を実行する。

すなわち、コミュニケーション検出部２５３は、上記コミュニケーション判定処理の判定結果に基づき、コミュニケーション機能の利用頻度に対応させる形式で、画像データＤ１内の登録人数分の個人情報を複数種の識別項目（例えば、コミュニケーション機能の利用頻度に基づき順位づけた識別項目）に分類した個人情報識別データＤ２３を得るコミュニケーション判定処理を実行する。

そして、ステップＳ１１において、相関表示作成手段２５は、ステップＳ１０のコミュニケーション判定処理で得た個人情報識別データＤ２３をコミュニケーション履歴ＤＢ２５５に登録する。

図６はコミュニケーション検出部２５３によるコミュニケーション判定処理内容を模式的に示す説明図である。

同図(a) に示すように、コミュニケーション判定結果Ｄ２５５には、電話帳データＤ２に登録されている各ユーザー(Ａ，Ｂ，Ｃ)と、ステップＳ９で検出された各ユーザーのグループ設定と、各ユーザー(Ａ、Ｂ、Ｃ)とのコミュニケーション機能利用回数（電話，（電子）メール、アプリ（ケーション通信）による通信回数）が示されている。

コミュニケーション履歴データＤ３には、電話帳データＤ２に登録されている各ユーザーの電話番号を使用した電話発着信、メールアドレスを使用した電子メール送受信、情報端末にインストールされている通信アプリケーションを使用したアプリケーション通信履歴を有している。情報端末２にインストールされているアプリケーションを使用したアプリケーション通信の場合でも電話番号やメールアドレスを使用して宛先を確定し、通信を行うため、当該ユーザーがどのユーザーと通信を行ったかを判別することができる。

以下、図６(a) のコミュニケーション判定結果Ｄ２５５におけるユーザーＡを例に説明する。コミュニケーション履歴データＤ３から、図４に示すユーザーＡの個人データＪＤ１１に登録されている電話番号とメールアドレスが何度使用されているかを検出することができる。なお、電話通話のカウントに関して、ユーザーＡに発信したにも関わらずユーザーＡが応答しない場合やユーザーＡから当該ユーザーに対して着信があった場合、当該ユーザーが電話にでることができず不在着信となった場合はカウント除外とする。これにより、情報端末２のユーザーから利用相手であるユーザーＡへ電話の発信が５回、ユーザーＡから当該ユーザーに対して着信が４回、情報端末２のユーザーからユーザーＡへメールの発信が３回、ユーザーＡから情報端末２のユーザーに対してのメールの受信が３回、情報端末２のユーザーからユーザーＡへのアプリケーション通信を使用した発信が１回、ユーザーＡから情報端末２のユーザーに対して着信が１回となり、情報端末２のユーザーとユーザーＡのコミュニケーション数は合計１７回となる。

さらに、ユーザーＢ、ユーザーＣについてもグループ設定が行われ、コミュニケーション判定処理により、コミュニケーション履歴データＤ３に基づくユーザーＢとのコミュニケーション数は３１回、ユーザーＣとのコミュニケーション数は２０回と判定される。

その結果、得られたコミュニケーション数（判定結果）により、情報端末２のユーザーがどのユーザーとコミュニケーションをとっているかを順位付けすると、ユーザーＢがコミュニケーション機能の利用頻度ランク（RANK）１位、ユーザーＣが同ランク２位、ユーザーＡが同ランク３位となるコミュニケーション判定結果Ｄ２５５を得ることができる。

以上のように、電話帳データＤ２とコミュニケーション履歴データＤ３とより、情報端末２のユーザーがどのユーザーとコミュニケーション機能の利用頻度により分類（順位づけ）したコミュニケーション判定結果Ｄ２５５を得ることができる。

その結果、図６(b) に示すように、コミュニケーション検出部２５３は、コミュニケーション判定結果Ｄ２５５に沿って電話帳データＤ２の登録人数分の個人情報を複数の識別項目（コミュニケーション頻度のランキング等）に分類した個人情報識別データＤ２３を得ることができる。

例えば、図６(b) で示す個人情報識別データＤ２３では、ユーザーＡのグループ設定は「友人」であり、コミュニケーション機能の利用頻度はランク３に分類される。また、ユーザーＢのグループ設定は「家族・親戚」であり、コミュニケーション機能の利用頻度はランク１に分類され、ユーザーＣのグループ設定は「同僚」であり、コミュニケーション機能の利用頻度はランク２に分類される。したがって、各グループがユーザーＡ，Ｂ，Ｃに代表される場合、グループ単位のコミュニケーション機能の利用頻度は、家族・親戚がランク１、同僚がランク２、友人がランク３に分類される。

このようにして得られた個人情報識別データＤ２３がコミュニケーション履歴ＤＢ２５５に格納される。なお、コミュニケーション履歴ＤＢ２５５は記憶部１０内に格納しても良いし、相関表示作成手段２５専用に設けも良い。

その後、ステップＳ１２において、画像表示手段１３は、ステップＳ８で写真ＤＢ２５４に格納された相関画像データＤ１２と、ステップＳ１１でコミュニケーション履歴ＤＢ２５５に格納された個人情報識別データＤ２３との組合せであるユーザー相関図データＤ２５に基づき、画像データＤ１で規定された複数の（顔検出）写真情報の少なくとも一部に、複数種の識別項目（ランクＡ〜Ｃ）のいずれかを必要に応じて設定グループを関連付けた形式の表示用画像を表示画面上に表示する。

さらに、画像表示手段１３は、ユーザーが表示用画面のタッチパネル機能等を利用した選択操作内容に沿って、画像データＤ１内の複数の写真情報のうち印刷対象の写真情報を指示する印刷制御信号ＳＣ１３を印刷データ作成手段１１に出力する。

（画像表示手段１３による表示例等）
図７及び図８はユーザー相関図データＤ２５に基づく画像表示手段１３による表示用画面上における表示用画像の表示例を示す説明図である。図７は表示用画面を画像選択画面２７としたユーザー別の表示例、図８は表示用画面を画像選択画面３２としたグループ別の表示例を示している。

図７に示す画像選択画面２７の左上方の表示方法ボタン３１のユーザー表示ボタン３１ｂに対しタッチ等による選択操作を施すことによりユーザー別表示となり、グループ表示ボタン３１ａに対し選択操作を施すことによりグループ別表示となる。

図７及び図８では、画像出力装置１にてユーザーが所望のプリント画像を選択する表示画面であるユーザー別及びグループ別の画像選択画面２７及び３２を示している。画像選択画面２７（３２）の画面左側では情報端末２のユーザーと他のユーザーの関連性を示している。

画像選択画面２７上において、個人情報識別データＤ２３に基づき、コミュニケーション機能の利用頻度が最も高い識別項目に分類されたユーザーがユーザーＢであることを線の太さと丸数字の順位で示されており、以下ユーザーＣとユーザーＡの順となることが示されている。

図７（図８）の例では順位（ランク）が１位から３位までとなっているが、もちろんこの限りではなく表示するユーザー数（グループ数）は、相関画像データＤ１２と個人情報識別データＤ２３との関係等により適宜変化させてよい。また、図７では、ユーザーＢ、ユーザーＣ及びユーザーＡに対応して第１優先選択ボタン２８１、第２優先選択ボタン２８２及び第３優先選択ボタン２８３が割り当てられており、図８では、家族・親戚、同僚、及び友人に対応して第１優先選択ボタン３３１、第２優先選択ボタン３３２及び第３優先選択ボタン３３３が割り当てられている。

図７に示すように、画像選択画面２７の右側では、画像出力装置１を操作するユーザーにより第１優先選択ボタン２８１（破線にて表示）によってユーザーＢが選択された際の写真データＰＤ１１〜ＰＤ１４が表示されている。ユーザー選択ボタン２８１による選択操作にユーザーＢが選択されたことにより、写真ＤＢ２５４における相関画像データＤ１２に基づき、画像データＤ１のうちユーザーＢが写っている顔検出写真情報である写真データＰＤ１１〜ＰＤ１４が優先的に表示される態様の表示用画像を、画像表示手段１３は表示用画面上に表示する。この際、写真データＰＤ１１〜ＰＤ１４においてユーザーＢを特定する選択ボックスＳＢ１〜ＳＢ４が併せて表示される。選択ボックスＳＢ１〜ＳＢ４は、例えば、相関画像データＤ１２が顔画像の位置情報をさらに指示することにより、画像表示手段１３により実現することができる。

このように、ランク１に分類されたユーザーＢ用の写真情報として画像データＤ１で規定された複数の（顔検出）写真情報の少なくとも一部である写真データＰＤ１１〜ＰＤ１４（写真情報）が関連付けられた形式の表示用画像が画像選択画面２７上に表示される。

また、画像選択画面２７では期間設定ボタン２９にて、コミュニケーション履歴ＤＢ２５５内の個人情報識別データＤ２３の生成条件としての期間設定が行える。これにより、特定の指定期間における情報端末２のユーザーと他ユーザーとのコミュニケーション機能の関連性を示すユーザー相関図データＤ２５に基づく表示用画像を画像選択画面２７上に表示することができる。

上記のように、画像表示手段１３に対するユーザーによる操作によりユーザー相関図データＤ２５の変更を要する場合、画像表示手段１３は適宜、相関表示作成手段２５に対し、操作情報（新たなユーザー相関図データＤ２５の作成指示とそれに必要な情報）の転送を相関表示作成手段２５に対して行う。

そして、画像表示手段１３から上記操作情報を受けたコミュニケーション検出部２５３は、画像表示手段１３で設定された指定期間をコミュニケーション判定処理における判定対象期間として、上述したコミュニケーション判定処理を実行する期間指定分類機能を備えている。

すなわち、相関表示作成手段２５のコミュニケーション検出部２５３は、期間設定ボタン２９による設定内容に基づく指定期間を個人情報識別データＤ２３の生成条件としてステップＳ１０のコミュニケーション判定処理を改めて行う。

期間設定の使用方法として、例えば、情報端末２のユーザーがある時期に旅行に行ったとする。この場合、情報端末２のユーザーは旅行に行く前には旅行の同行者とは連絡を密に取ることが想定できる。よって、その旅行期間の少し前を指定期間として期間設定すると、一緒に旅行行った同行者は、ユーザー相関図データＤ２５における情報端末２のユーザーとのコミュニケーション機能の利用頻度が上位に順位付け（分類）されるため、画像表示手段１３は、ユーザー相関図データＤ２５に基づき簡易に旅行同行者との写真情報を表示用画像として優先的に画像選択画面２７上に表示することができる。

画像選択画面２７の右側下部には画像ソートボタン３０があり、表示する画像データを撮影日の新しい順や古い順、画像データのファイル名の昇順や降順にさらにソートすることができる。新規順ソートボタン３０ａにより新しい順、新規逆順ソートボタン３０ｂにより古い順、名称昇順ソートボタン３０ｃによりファイル名昇順、画像ソートボタン３０によりファイル名降順のソート内容指定が行える。これらのソート処理においても、記憶部１０に格納されたソート用プログラムを制御部２６が相関表示作成手段２５として実行することにより、容易に実現することができる。

次に、図８を参照して、表示方法ボタン３１のグループ表示ボタン３１ａを選択操作することにより、図７で示す画像選択画面２７によるユーザー別表示から、図８で示す画像選択画面３２によるグループ別表示に切り換えられた場合について説明する。

画像選択画面３２の左側では情報端末２のユーザーと電話帳データＤ２におけるグループ設定の相関図を示している。画像選択画面３２でのグループ設定との相関図については、グループ内に属する各ユーザー人数およびコミュニケーション機能の利用頻度によって決定する。

画像選択画面３２では、説明の都合上、コミュニケーション機能の利用頻度による識別項目として、ユーザーＢのみが属する家族・親戚グループがランク１位、ユーザーＣのみが属する同僚グループがランク２位、ユーザーＡのみが属する友人グループがランク３位となっている場合を示している。

図８では第３優先選択ボタン３３３によりグループ「友人」が選択されていることにより、図４に示す電話帳データＤ２においてグループ設定が友人となっているユーザーＡが撮影された写真データＰＤ２１〜ＰＤ２４（写真情報）が優先的に画像選択画面３２上に表示される。画像選択画面３２でも画像選択画面２７と同様に表示したユーザーＡの画像について、画像ソートボタン３０による画像のソートが行える。

なお、画像表示手段１３の操作（選択ボタン２８１〜２８３，３３１〜３３３の操作、期間設定ボタン２９による期間指定操作、画像ソートボタン３０のソート処理操作）が行われると、ユーザー相関図データＤ２５の内容変更が必要な場合がある。この場合、前述したように、画像表示手段１３の操作情報が相関表示作成手段２５に伝達され、相関表示作成手段２５により画像表示手段１３からの操作情報に合致したユーザー相関図データＤ２５の生成処理が行われる。

（効果等）
以上説明したように、本発明の実施の形態の画像出力装置１によれば、画像出力装置１において、情報端末２に保存された画像データＤ１を表示する際に、情報端末２にて通信を行ったユーザーとのコミュニケーション履歴データＤ３の内容を反映させたユーザー相関図データＤ２５に基づく表示用画像を表示するため、情報端末２のユーザーと親密に連絡を取り合うユーザーとの画像データを優先的に表示することができ、当該ユーザーの画像検索に要する手順を簡易にすることができる。

近年、ユーザー同士のコミュニケーション装置として大きな役割を占めている情報端末２のコミュニケーション履歴データＤ３を使用するため、ユーザー同士の関係性がリアルタイムに反映されるユーザー相関図データＤ２５を作成することができる。

上記のように、本実施の形態の画像出力装置１における画像表示手段１３は、画像データＤ１が規定する複数の写真情報の少なくとも一部に、相関表示作成手段２５より得られたユーザー相関図データＤ２５に基づき、複数種の識別項目（コミュニケーションの利用頻度順位等）のいずれかを関連付けた態様の表示用画像を表示用画面上に表示する。このため、情報端末２のユーザーは、画像表示手段１３の表示用画面上に表示される表示用画像から、写真情報と情報端末２のユーザーとの関連性を容易に理解することができる。この際、情報端末２のユーザーは従来のようにサーバーへのユーザー登録、アップロード等の操作を行う必要がないため、ユーザーに負担がかかることもない。

また、画像出力装置１内において、印刷データ作成手段１１，プリントデータ送信手段１２及びプリンタ４からなる写真印刷部は、画像表示手段１３からの印刷制御信号ＳＣ１３に基づくことより、複数種の識別項目のいずれかと関連性が高い写真を選択的に印刷することができる。

相関表示作成手段２５の個人情報識別部であるコミュニケーション検出部２５３は、コミュニケーション履歴データＤ３に基づき、情報端末２のユーザーのコミュニケーション機能の利用頻度に対応させる形式で複数種の識別項目を分類する、コミュニケーション判定処理（識別項目分類処理）を実行している。このため、コミュニケーション機能の利用頻度の高い利用相手に関連性を持たせて、画像表示手段１３によって表示用画像を表示用画面上に表示するができ、その結果、情報端末２のユーザーに親しい人の写真情報の選択を容易にすることができる。

なお、本実施の形態では、通話履歴データＤ３１、メール履歴データＤ３２及びアプリケーション通信履歴データＤ３３による総合的なコミュニケーション機能の利用頻度によりランクづけをしたが、通話履歴データＤ３１，メール履歴データＤ３２及びアプリケーション通信履歴データＤ３３それぞれ個別、あるいは２つの組合せの履歴データの利用頻度によってランクづけをしても良い。

例えば、コミュニケーション検出部２５３により、通話履歴データＤ３１のみに基づき、情報端末２のユーザーの電話機能の利用頻度に対応させる形式で複数種の識別項目を分類してコミュニケーション判定処理を実行させることが考えられる。この場合、電話機能の利用頻度の高い利用相手に関連性を持たせて、画像表示手段１３により表示用画像を表示用画面上に表示することができ、その結果、情報端末２のユーザーとの電話通信頻度に基づき判定された親しい人の写真情報の選択を容易にすることができる。

また、コミュニケーション検出部２５３により、メール履歴データＤ３２にのみに基づき、情報端末２のユーザーとの電子メール機能の利用頻度に対応させる形式で複数種の識別項目を分類してコミュニケーション判定処理を実行させることが考えられる。この場合、電子メール機能の利用頻度の高い利用相手に関連性を持たせて、表示用画像を表示用画面上に表示することができ、その結果、情報端末２のユーザーの電子メール通信頻度に基づき判定されたに親しい人の写真情報の選択を容易にすることができる。

コミュニケーション検出部２５３は、画像表示手段１３の期間設定ボタン２９で指定された指定期間を生成条件としてコミュニケーション判定処理を実行する期間指定分類機能を有することにより、指定期間に限定して、情報端末２のユーザーのコミュニケーション機能の利用頻度に基づき判定された親しい人の写真情報の選択を容易にすることができる。

コミュニケーション検出部２５３は、電話帳データＤ２がグループ情報を含んでいる場合、グループ情報単位にコミュニケーション判定処理を実行することができるため、情報端末２のユーザーに対し特定の関係性を有するグループに関連づけて、表示用画像を表示用画面上に表示することができ、その結果、情報端末のユーザーに対し特定の関係性を有する利用相手の写真情報の選択を容易にすることができる。

（画像処理方法）
図３で示した相関表示作成手段２５及び画像表示手段１３による処理手順を、以下のステップ(a) 〜(d) からなる画像処理方法として本発明を展開することができる。

(a) 複数の写真情報を含む画像データＤ１と、各々が顔画像情報と関連付けられた登録人数分の個人情報であり、情報端末２に登録されたモバイルデータＤ２０（画像データＤ１及び電話帳データＤ２）とを入力するステップと、
(b) 画像データＤ１で規定される複数の写真情報それぞれと、電話帳データＤ２における登録人数分の顔画像情報それぞれとを画像比較し、写真情報単位に顔画像情報が合致した個人情報を関連づけて相関画像データＤ１２を得るステップと、
(c) モバイルデータＤ２０に基づき、登録人数分の個人情報を複数種の識別項目（コミュニケーション機能の利用頻度等）に分類した個人情報識別データＤ２３を得るステップとを備え、相関画像データＤ１２と個人情報識別データＤ２３との組合せがユーザー相関図データＤ２５として規定され、
(d) ユーザー相関図データＤ２５（相関画像データＤ１２＋個人情報識別データＤ２３）に基づき、画像データＤ１における複数の写真情報の少なくとも一部に、ステップ(c) で分類した複数種の識別項目のいずれかを関連付けた態様の表示用画像を表示用画面上に表示するステップをさらに備えた画像処理方法。

上記画像処理方法におけるステップ(d) は、画像データＤ１が規定する複数の写真情報の少なくとも一部に、ステップ(b) 及びステップ(c) で得られたユーザー相関図データＤ２５に基づき、複数種の識別項目のいずれかを関連付けた態様の表示用画像を表示用画面上に表示する。このため、情報端末２のユーザーは、ステップ(d) において表示用画面上に表示される表示用画像から、写真情報と情報端末２のユーザーとの関連性を容易に理解することができる効果を奏する。

なお、上述した(a) 〜(d) の処理は、例えば、制御部２６によるソフトウェアに基づくプログラム処理により実現可能である。

（その他）
また、本実施の形態では電話帳データＤ２とコミュニケーション履歴データＤ３をモバイルデータＤ２０として、画像出力装置１に取り込み、画像出力装置１の相関表示作成手段２５にて個人情報識別データＤ２３を作成する構成を示した。

しかし、この方法に限らず情報端末２内にユーザー相関図作成のためのアプリケーションをインストールし、かつ、情報端末２内で写真ＤＢとコミュニケーションＤＢをもたせ、画像データＤ１と共にユーザー相関図データＤ２５を画像出力装置１に読み込ませる構成にすることも可能である。

例えば、画像出力装置１内における相関表示作成手段２５及び記憶部１０を情報端末２に取り込んだ態様も考えられる。すなわち、情報端末２内にて相関表示作成手段２５用のアプリケーションプログラムを実行させ、ユーザー相関図データＤ２５を作成するようにしてもよい。

上記例では、図３のステップＳ２〜Ｓ１１の処理を情報端末２が実行することにより、ステップＳ１２の処理のみ画像出力装置１の画像表示手段１３が実行することになる。そして、画像出力装置１内の画像表示手段１３が情報端末２から画像データＤ１及びユーザー相関図データＤ２５を受けることになる。

なお、情報端末２が表示用画面を有している場合、記憶部１０、相関表示作成手段２５に加え、画像表示手段１３の機能を内蔵する構成も考えられる。

上記例では、図３のステップＳ２〜Ｓ１２の処理を情報端末２が実行することによる。そして、画像出力装置１内の印刷データ作成手段１１が情報端末２から画像データＤ１及び印刷制御信号ＳＣ１３を受けることになる。

また、メモリーカードなどのカードメディア記憶媒体を用いて、画像データをプリントする際にも使用するメモリーカード内に写真ＤＢとコミュニケーションＤＢを作成しておき、メモリーカードに保存されている画像データと同時に画像出力装置に取り込ませることにより、画像出力装置１によりユーザー相関図データＤ２５に基づく画像表示が可能となる。この場合、カードメディア自体が相関表示作成手段２５及び記憶部１０を内蔵した情報端末２と等価な構成として扱われる。

また、情報端末２内に保存された画像データＤ１で規定された複数の写真情報に基づき、スナップ写真、あるいは、集合写真などから顔情報と個々人間の親密度の情報を取得して、コミュニケーション履歴ＤＢ２５５の登録情報に加えて、ユーザー相関図データＤ２５を作成するようにしてもよい。

なお、本発明は、その発明の範囲内において、実施の形態を適宜、変形、省略することが可能である。

１ 画像出力装置、２ 情報端末、３ 受付端末、４，４１〜４ｎ プリンタ、６ 記憶媒体、１０ 記憶部、１１ 印刷データ作成手段、１２ プリントデータ送信手段、１３ 画像表示手段、２５ 相関表示作成手段、２６ 制御部、２５１ 画像検出部、２５２ 判定部、２５３ コミュニケーション検出部、２５４ 写真ＤＢ、２５５ コミュニケーション履歴ＤＢ。

Claims (6)

1. 複数の写真情報を含む画像データと、各々が顔画像情報と関連付けられた登録人数分の個人情報である情報端末登録データとに基づき、画像処理を行う画像処理装置であって、
   前記画像データ及び前記情報端末登録データを保持する情報端末は他の通信機器との複数のコミュニケーション機能を有し、
   前記登録人数分の個人情報は、
   前記顔画像情報と関連づけられ、少なくとも前記複数のコミュニケーション機能の利用相手を指示するコミュニケーション利用者情報と、
   前記複数のコミュニケーション機能の利用履歴を利用相手を特定して示すコミュニケーション履歴情報とをさらに含み、
   前記画像処理装置は、前記情報端末と独立して設けられ、
   前記画像データ及び前記情報端末登録データを受け、前記複数の写真情報それぞれと前記登録人数分の前記顔画像情報それぞれとを画像比較し、前記写真情報単位に前記顔画像情報と関連付けられた登録人物が含まれているか否かを示す相関画像データを得る画像判定部と、
   前記コミュニケーション履歴情報を含む前記情報端末登録データに基づき、前記登録人数分の登録人物に関連づけて、前記情報端末のユーザーの前記複数のコミュニケーション機能に含まれる選択コミュニケーション機能の利用頻度に対応させる形式で複数種の識別項目に分類した個人情報識別データを得る識別項目分類処理を実行する個人情報識別部と、
   前記相関画像データ及び前記個人情報識別データに基づき、前記情報端末のユーザーの前記選択コミュニケーション機能における利用頻度の高い登録人物が優先されるように、前記画像データにおける前記複数の写真情報の少なくとも一部に、前記複数種の識別項目のいずれかを関連付けた態様の表示用画像を表示用画面上に表示する画像表示手段とを備える、
   画像処理装置。
2. 請求項１記載の画像処理装置であって、
   前記画像表示手段は、前記複数の写真情報のうち印刷対象の写真情報を指示する印刷制御信号をさらに出力し、
   前記画像処理装置は、
   前記印刷制御信号に基づき、前記画像データにおける前記複数の写真情報を選択的に印刷する写真印刷部をさらに備える、
   画像処理装置。
3. 請求項１記載の画像処理装置であって、
   前記複数のコミュニケーション機能は他の通信機器との電話機能及び他の通信機器との電子メール機能を含み、
   前記選択コミュニケーション機能は、前記電話機能、前記電子メール機能及び前記電話機能と前記電子メール機能との組合せのうちのいずれかを含む、
   画像処理装置。
4. 請求項１から請求項３のうち、いずれか１項に記載の画像処理装置であって、
   前記個人情報識別部は、指定期間における前記情報端末のユーザーの前記選択コミュニケーション機能の利用頻度に対応させる形式で前記識別項目分類処理を実行する期間指定分類機能を備える、
   画像処理装置。
5. 請求項１から請求項４のうち、いずれか１項に記載の画像処理装置であって、
   前記登録人数分の個人情報は、
   前記情報端末のユーザーとの関係性をグループ単位に示すグループ情報をさらに含み、
   前記個人情報識別部は、前記グループ情報単位に、前記識別項目分類処理を実行する、
   画像処理装置。
6. コンピュータによるソフトウェア処理で実行される画像処理方法であって
   (a) 複数の写真情報を含む画像データと、各々が顔画像情報と関連付けられた登録人数分の個人情報である情報端末登録データを受けるステップを備え、
   前記画像データ及び前記情報端末登録データを保持する情報端末は他の通信機器との複数のコミュニケーション機能を有し、
   前記登録人数分の個人情報は、
   前記顔画像情報と関連づけられ、少なくとも前記複数のコミュニケーション機能の利用相手を指示するコミュニケーション利用者情報と、
   前記複数のコミュニケーション機能の利用履歴を利用相手を特定して示すコミュニケーション履歴情報とをさらに含み、
   前記画像処理方法は、前記情報端末と独立して実行され、
   (b) 前記画像データで規定される複数の写真情報それぞれと、前記情報端末登録データにおける前記登録人数分の前記顔画像情報それぞれとを画像比較し、前記写真情報単位に顔画像情報と関連付けられた登録人物が含まれているか否かを示す相関画像データを得るステップと、
   (c) 前記コミュニケーション履歴情報を含む前記情報端末登録データに基づき、前記登録人数分の登録人物に関連づけて、前記情報端末のユーザーの前記複数のコミュニケーション機能に含まれる選択コミュニケーション機能の利用頻度に対応させる形式で複数種の識別項目に分類した個人情報識別データを得るステップと、
   (d) 前記相関画像データ及び前記情報端末登録データに基づき、前記情報端末のユーザーの前記選択コミュニケーション機能における利用頻度の高い登録人物が優先されるように、前記画像データにおける前記複数の写真情報の少なくとも一部に、前記ステップ(c) で分類した複数種の識別項目のいずれかを関連付けた態様の表示用画像を表示用画面上に表示するステップと、
   をさらに備える画像処理方法。

Images