JP5423219B2 - 携帯端末装置、画像管理方法およびプログラム - Google Patents

Description

画像データを記憶可能な携帯端末装置に関するものである。

近年、携帯電話機、ＰＨＳ（Personal Handyphone System）、ＰＤＡ（Personal Digital Assistants）などの携帯端末装置では、備え付けの電子カメラで撮像したり、撮像した画像をメールに添付して送信したりすることが行われている。また、撮像した画像には、サーバやアドレス帳から取得した固有の情報を付与したり、取得した情報に基づいて送信したりすることもなされている（例えば、特許文献１−３参照。）。

特開２００６−２９３９１２号公報 特開２００９−１０５６５２号公報 特開２００４−３２６２８１号公報

しかしながら、カメラで撮像した画像は、特に指定がされていない場合、所定のフォルダにまとめて保存されるため、枚数が増えるに連れて管理が煩雑になっていた。また、フォルダ分けをしていても、仕分けの方法によっては画像の検索をスムーズに行えない場合があり、メールで画像を添付する際などに手間がかかっていた。

特に、１つの画像に複数の人物が含まれる場合には、人物毎にフォルダ分けすると、その画像を複数コピーすることとなるので、多くのメモリ資源を消費することになり、メモリ資源の節約の観点からは効率的でなかった。

そこで、本願発明は、画像を効率的に管理することができる携帯端末装置、画像管理方法およびプログラムを提供することを目的とする。

上述したような課題を解決するために、本発明に係る携帯端末装置は、第１の画像データを取得する画像取得部と、複数の個人情報とこの個人情報に対応する第２の画像データとを対応付けて格納する第１の格納部と、この第１の格納部に格納された前記第２の画像データのうちの何れかが、前記第１の画像データと一致するか否かを判定する判定部と、この判定部により前記第１の格納部に格納された前記第２の画像データのうちの何れかと一致すると判定された前記第１の画像データを格納する第２の格納部と、前記判定部により一致すると判定された前記第２の画像データに対応する個人情報と、当該第１の画像データのサムネイルと、当該第１の画像データの格納先に関する情報とを少なくとも含む管理表を作成する作成部と、この作成部により作成された前記管理表を格納する第３の格納部とものである。

また、本発明に係る画像管理方法は、第１の画像データを取得する画像取得ステップと、複数の個人情報とこの個人情報に対応する第２の画像データとを対応付けて第１の格納部に格納する第１の格納ステップと、前記第１の格納部に格納された前記第２の画像データのうちの何れかが、前記第１の画像データと一致するか否かを判定する判定ステップと、この判定ステップにより前記第１の格納部に格納された前記第２の画像データのうちの何れかと一致すると判定された前記第１の画像データを第２の格納部に格納する第２の格納ステップと、前記判定ステップにより一致すると判定された前記第２の画像データに対応する個人情報と、当該第１の画像データのサムネイルと、当該第１の画像データの格納先に関する情報とを少なくとも含む管理表を作成する作成ステップと、この作成ステップにより作成された前記管理表を第３の格納部に格納する第３の格納ステップとを有することを特徴とするものである。

また、本発明に係るプログラムは、コンピュータを、第１の画像データを取得する画像取得部と、複数の個人情報とこの個人情報に対応する第２の画像データとを対応付けて格納する第１の格納部と、この第１の格納部に格納された前記第２の画像データのうちの何れかが、前記第１の画像データと一致するか否かを判定する判定部と、この判定部により前記第１の格納部に格納された前記第２の画像データのうちの何れかと一致すると判定された前記第１の画像データを格納する第２の格納部と、前記判定部により一致すると判定された前記第２の画像データに対応する個人情報と、当該第１の画像データのサムネイルと、当該第１の画像データの格納先に関する情報とを少なくとも含む管理表を作成する作成部と、この作成部により作成された前記管理表を格納する第３の格納部とを備えた携帯端末装置として機能させるためのプログラムである。

本発明によれば、個人情報とこの個人情報に対応する第１の画像データのサムネイルと第１の画像データの格納先に関する情報とを含む管理表を作成することにより、第１の画像に複数の人物が含まれる場合であっても、第１の画像データを複数コピーしなくても第１の画像データの格納先、内容、個人情報等を管理表から確認することができ、多くのメモリ資源を消費することを防ぐことができるので、結果として、第１の画像データを効率的に管理することができる。

図１は、本発明の第１の実施の形態に係る携帯端末装置の構成を示す図である。 図２は、本発明の第２の実施の形態に係る携帯端末装置の構成を示す図である。 図３は、画像管理動作を示すフローチャートである。 図４は、管理表を説明するための図である。 図５は、管理表を説明するための図である。

以下、図面を参照して本発明の実施の形態について詳細に説明する。

［第１の実施の形態］
図１に示すように、本発明の第１の実施の形態に係る携帯端末装置１は、画像取得部１１と、第１の格納部１２と、判定部１３と、第２の格納部１４と、作成部１５と、第３の格納部１６とを備えている。

画像取得部１１は、デジタルカメラにより撮像された画像データや電子メールや無線通信を介して外部から受信した画像データを取得する機能部である。

第１の格納部１２は、氏名、住所、メールアドレス等を含む個人情報と、この個人情報に対応する人物の画像が含まれる第２の画像データとを対応付けて格納する機能部である。ここで、個人情報は複数設けられる。

判定部１３は、第１の画像データが、第２の格納部１４に格納された第２の画像のうち何れと一致するか否かを判定する機能部である。

第２の格納部１４は、判定部１３により第２の格納部１４に格納された何れかの第２の画像と一致すると判定された第１の画像データを格納する格納部である。

作成部１５は、判定部１３により一致すると判定された第２の画像データに対応する個人情報と、第１の画像データのサムネイルと、第１の画像データの格納先に関する情報とを含む管理表を作成する機能部である。

第３の格納部１６は、作成部１５により作成された管理表を格納する機能部である。

このような携帯端末装置１は、ＣＰＵ等の演算装置と、メモリ、ＨＤＤ（Hard Disk Drive）等の記憶装置と、ポインティングデバイス、ボタン、タッチパネル等の外部から情報の入力を検出する入力装置と、携帯電話網、公衆電話網、インターネット、ＬＡＮ（Local Area Network）、ＷＡＮ（Wide Area Network）等の通信回線を介して各種情報の送受信を行うＩ／Ｆ装置と、ＬＣＤ（Liquid Crystal Display）またはＦＥＤ（Field Emission Display）等の表示装置を備えたコンピュータと、このコンピュータにインストールされたプログラムとから構成される。すなわちハードウェア装置とソフトウェアとが協働することによって、上記のハードウェア資源がプログラムによって制御され、上述したカードリーダＩ／Ｆ部３１、アクセスポイントＩ／Ｆ部３２、人数検出部３３、位置判定部３４、熱負荷量推定部３５、熱負荷量送信部３６および記憶部３７が実現される。なお、上記プログラムは、フレキシブルディスク、ＣＤ−ＲＯＭ、ＤＶＤ−ＲＯＭ、メモリカードなどの記録媒体に記録された状態で提供されるようにしてもよい。

上述したような構成を有することにより、本実施の形態では、個人情報とこの個人情報に対応する第１の画像データのサムネイルと第１の画像データの格納先に関する情報とを含む管理表を作成することにより、第１の画像データに複数の人物が含まれる場合であっても、第１の画像を複数コピーしなくても第１の画像データの格納先、内容、個人情報等を管理表から確認することができ、多くのメモリ資源を消費することを防ぐことができるので、結果として、画像データを効率的に管理することができる。

［第２の実施の形態］
次に、本発明に係る第２の実施の形態について説明する。

＜携帯電話機２の構成＞
図２に示すように、本実施の形態に係る携帯電話機２は、無線通信を行う無線送受信部２１と、ユーザの操作入力を検出する操作部２２と、各種表示を行う表示部２３と、ユーザの音声を検出するとともに通話相手の音声を出力する通話部２４と、撮像を行うカメラ部２５と、記憶部２６と、ＲＯＭ２７と、主制御部２８とを備えている。

無線送受信部２１は、送受信する無線信号を変復調し、無線基地局を介して電話網、インターネット、ＬＡＮ（Local Area Network）側と通信を行う通信装置からなる。

操作部２２は、テンキー、タッチパネル、ジョグシャトル等のユーザの操作入力を検出するインターフェース装置からなる。操作部２２が検出したユーザの操作入力に関する情報は、主制御部２８に送出される。

表示部２３は、ＬＣＤ（Liquid Crystal Display）、有機ＥＬ（Electro Luminescence）など、公知の表示装置からなる。このような表示部２３は、主制御部２８の指示に基づいて各種情報を表示する。

通話部２４は、公知のマイクおよびスピーカから構成される。このような通話部２４は、無線送受信部２１を介して電話網側から受信した音声信号を出力するとともに、ユーザの音声を音声信号に変換して無線送受信部２１を介して電話網側に出力する。

カメラ部２５は、ＣＣＤ（Charge Coupled Device）やＣＭＯＳ（Complementary Metal Oxide Semiconductor）などの固体撮像素子を用いた公知のデジタルカメラからなる。カメラ部２５により撮像された画像データは、記憶部２６の後述する画像データ格納部２６１に送出される。

記憶部２６は、公知のメモリ装置からなり、画像データを格納する画像データ格納部２６１と、個人情報を格納するアドレス帳データ格納部２６２と、携帯電話機２の各種動作に用いる各種データを格納する設定データ格納部２６３と、管理表格納部２６４とを備えている。

画像データ格納部２６１は、カメラ部２５が撮像した画像データや無線送受信部２１を介して外部から受信した画像データを格納する。なお、画像データ格納部２６１には、複数のフォルダが設定可能であり、画像データはフォルダ毎に分別して格納することが可能である。後述する管理表に登録される画像データは、所定のフォルダ（以下、「自動管理フォルダ」という）に格納される。

アドレス帳データ格納部２６２は、携帯電話機２のユーザの知人の名前、電話番号、住所、メールアドレス等の情報からなる個人情報を記憶する。この個人情報は、個人毎に他の個人情報と区別して記憶され、対応する人物の顔の画像データが対応付けて記憶される。

設定データ格納部２６３は、後述する画像管理動作を行うか否かに関する設定情報、この画像管理動作で行われる顔認証で用いられる閾値など、携帯電話機２で用いられる各種データが格納される。

管理表格納部２６４は、後述する画像管理動作により作成された管理表が格納される。この管理表は、名前、日付、所定の項目などにより分類することが可能である。

ＲＯＭ２７は、主制御部２８が実行する各種制御プログラムや文字等の固定データを格納する公知のメモリ装置からである。

主制御部２８は、ＣＰＵなどのマイクロプロセッサとその周辺回路からなり、ＲＯＭ２７に記憶された動作プログラムを読み込んで実行することにより、通話機能、メーラー機能、ブラウザ機能、カメラ機能等の公知の携帯電話機の動作とともに、後述する画像管理動作やこの画像管理動作で用いられる顔認証機能を実現する。

＜携帯電話機２の画像管理動作＞
次に、携帯電話機２による画像管理動作について説明する。

はじめに、主制御部２８は、アドレス帳データ格納部２６２の設定を開始する（ステップＳ１）。

まず、主制御部２８は、ユーザに対して、アドレス帳データ格納部２６２に格納されている個人情報に、その個人情報に対応する人物の顔の画像データを登録させる（ステップＳ２）。顔の画像データは、画像データ格納部２６１から取得することができる。このとき、個人情報には、「友人」や「会社」等の分類も併せて行うようにしてもよい。

アドレス帳データ格納部２６２の設定が行われると、主制御部２８は、ユーザに対して、画像管理動作を行うか否かを設定させる（ステップＳ３）。このとき、後述する顔認証において、アドレス帳データ格納部２６２に登録した顔の画像データと比較する画像データが、何％以上一致すればよいかという閾値も併せて登録される。これらの設定された値は、設定データ格納部２６３に格納される。

上述したステップＳ１〜Ｓ３の動作は、例えば、携帯電話機２の初期操作時や携帯電話機２の電源投入時など、カメラ部２５よる撮像に先立って予め行われる。

次に、カメラ部２５により撮像が行われたり、電子メールや非接触通信などにより外部から受信したりすることにより、画像データを取得すると（ステップＳ１２）、主制御部２８は、ユーザに対して、その画像データを保存するか否かを確認させる（ステップＳ５）。この確認は、例えば、表示部２３に画像データを保存するか否かを選択させるメッセージを表示させ、操作部２２によるその表示に対するユーザの操作入力により行われる。

保存されない場合（ステップＳ５：ＮＯ）、主制御部２８は、ステップＳ４の処理に戻る。

一方、保存される場合（ステップＳ５：ＹＥＳ）、主制御部２８は、記憶部２６の設定データ格納部２６３に格納された設定情報に基づいて、携帯電話機２が画像管理動作を行うように設定されているか否かを確認する（ステップＳ６）。

画像管理動作を行うように設定されていない場合（ステップＳ６：ＮＯ）、主制御部２８は、取得された画像データを、記憶部２６の画像データ格納部２６１の所定のフォルダに格納させる（ステップＳ１３）。

一方、画像管理動作を行うように設定されている場合（ステップＳ６：ＹＥＳ）、主制御部２８は、取得した画像データと、アドレス帳データ格納部２６２に登録されている顔の画像データとを比較し、顔認証機能を用いて、それらのうちの何れかが一致するか否かを判定する（ステップＳ７）。ここで、顔認証機能については、公知の顔認証技術が用いられ、取得した画像およびアドレス帳データ格納部２６２に登録されている顔の画像データの特徴をそれぞれ抽出して比較し、一致する特徴の割合が画像データ記憶部２６の設定データ格納部２６３に格納された閾値よりも高いものを一致するとして判定される。なお、閾値を超える画像データが複数ある場合には、一致する特徴割合が最も高いものを一致するとして判定する。また、取得した画像データに複数の人物が含まれる場合には、それぞれについて判定が行われる。

１つも一致しないと判定された場合（ステップＳ７：ＮＯ）、主制御部２８は、ユーザに対して、取得した画像データを手動で個人を特定するか否かを選択させる（ステップＳ１１）。この選択は、例えば、表示部２３に一致しないと判定された画像データを手動で個人を特定するか否かを選択させるメッセージを表示させ、操作部２２によるその表示に対するユーザの操作入力に基づいて行われる。

手動で個人を特定しない場合（ステップＳ１１：ＮＯ）、主制御部２８は、一致しないと判定された画像データを、記憶部２６の画像データ格納部２６１の所定のフォルダに格納させる（ステップＳ１３）。
一方、手動で個人を特定する場合（ステップＳ１１：ＹＥＳ）、主制御部２８は、ユーザに対して、アドレス帳データ格納部２６２から取得した画像に対応する人物の個人情報を選択させる。この選択は、例えば、表示部２３に取得した画像データに対応する人物をアドレス帳から選択させるメッセージを表示させ、操作部２２によるその表示に対するユーザの操作入力に基づいて行われる。

一方、一致すると判定された場合（ステップＳ７：ＹＥＳ）、または、アドレス帳から取得した画像データに対応する人物が特定された場合、主制御部２８は、管理表を作成し（ステップＳ８）、その画像データを画像データ格納部２６１の自動管理フォルダに格納する（ステップＳ９）。ここで、管理表には、取得した画像データと一致すると判定された画像データに対応する個人情報、取得した画像の撮像日時、取得した画像データを格納したフォルダ、取得した画像データのサムネイル画像などが含まれる。また、取得した画像に複数の人物が含まれる場合、主制御部２８は、各人物について管理表を作成する。

このとき、取得した画像データは、人物毎にコピーされることなく、自動管理フォルダに格納される。したがって、取得した画像データに複数の人物が含まれる場合であっても、管理表を確認することによりその画像データを複数コピーしなくても管理することが可能となるので、結果として、メモリ資源を節約することができる。

このような方法により管理表が作成されると、主制御部２８は、ユーザの要求に応じてその管理表を閲覧させる（ステップＳ１０）。例えば、ユーザによる画像データの閲覧を要求する操作入力が操作部２２により検出されると、主制御部２８は、図４に示すように、表示部２３に画像データが格納された各フォルダを表示させる。このとき、表示部２３には、上述した画像管理動作により他の画像と分別された画像データが格納される自動管理フォルダ（符号ａ）と、管理表が格納された自動管理ビュアーのフォルダ（符号ｂ）が表示される。この自動管理ビュアーが選択されると、主制御部２８は、管理表を分類した項目を表示部２３に表示させる。例えば、図４において、符号ｃの「アドレス帳別一覧」は、アドレス帳に登録された順序で項目表を並び替えたもの、符号ｄの「日付」は、作成された日付順に項目表が並び替えられたもの、符号ｅの「分類」は、ステップＳ２で設定された「友人」や「会社」等の分類で並び替えられたものを意味する。何れかの項目が選択されると、その項目の種類にしたがって並び替えられた画像データのサムネイルや個人情報などが表示される。このように、本実施の形態によれば、管理表を選択するだけで、取得した画像データの内容や個人情報等を容易に確認することができる。

また、メールに画像を添付する場合、上述した管理表を用いることにより、その動作を容易に行うことができる。例えば、図５に示すメール作成画面において、符号ｆに示すように所定の宛先を入力された後、符号ｇに示す添付する画像データの入力が要求されたものとする。このとき、その所定の宛先を含む項目表が存在する場合、主制御部２８は、符号ｈで示すように、その所定の宛先に対応する項目表のサムネイルや個人情報等を表示部２３に表示させる。このようにすることにより、ユーザは、取得した画像データの内容や個人情報を容易に確認できるので、メールに添付する画像の選択をより容易に行うことができる。

以上説明したように、本実施の形態によれば、個人情報とこの個人情報に対応する取得した画像データのサムネイルとその画像データの格納先に関する情報とを含む管理表を作成することにより、取得した画像データに複数の人物が含まれる場合であっても、取得した画像を複数コピーしなくてもその画像データの格納先、内容、個人情報等を管理表から確認することができ、多くのメモリ資源を消費することを防ぐことができるので、結果として、画像データを効率的に管理することができる。

本発明は、携帯電話機、ＰＨＳ（Personal Handyphone System）、ＰＤＡ（Personal Digital Assistants）、スマートフォンなど、アドレス帳、電子カメラ、顔認証機能を有する各種携帯端末装置に適用することができる。

１，２…携帯電話機、１１…画像取得部、１２…第１の格納部、１３…判定部、１４…第２の格納部、１５…作成部、１６…第３の格納部、２１…無線送受信部、２２…操作部、２３…表示部、２４…通話部、２５…カメラ部、２６記憶部、２６１…画像データ格納部、２６２…アドレス帳データ格納部、２６３…設定データ格納部、２７…ＲＯＭ、２８…主制御部。

Claims (5)

1. 第１の画像データを取得する画像取得部と、
   複数の個人情報とこの個人情報に対応する第２の画像データとを対応付けて格納する第１の格納部と、
   この第１の格納部に格納された前記第２の画像データのうちの何れかが、前記第１の画像データと一致するか否かを判定する判定部と、
   この判定部により前記第１の格納部に格納された前記第２の画像データのうちの何れかと一致すると判定された前記第１の画像データを格納する第２の格納部と、
   前記判定部により一致すると判定された前記第２の画像データに対応する個人情報と、当該第１の画像データのサムネイルと、当該第１の画像データの格納先に関する情報とを少なくとも含む管理表を作成する作成部と、
   この作成部により作成された前記管理表を格納する第３の格納部と、
   所定の宛先へ電子メールを作成して送信する制御部と
   を備え、
   前記制御部は、前記電子メールに画像データの添付を要求されたとき、前記所定の宛先を含む前記管理表が存在する場合、この管理表に含まれる前記個人情報および前記サムネイルを表示装置に表示させる
   ことを特徴とする携帯端末装置。
2. 前記第１の画像データおよび前記第２の画像データは、人物の顔を含む画像データからなり、
   前記判定部は、顔認証により判定を行う
   ことを特徴とする請求項１記載の携帯端末装置。
3. 前記画像取得部は、電子カメラが撮像した画像データまたは外部より受信した画像データを第１の画像データとして取得する
   ことを特徴とする請求項１または２記載の携帯端末装置。
4. 画像取得部が、第１の画像データを取得する画像取得ステップと、
   第１の格納部が、複数の個人情報とこの個人情報に対応する第２の画像データとを対応付けて格納する第１の格納ステップと、
   判定部が、前記第１の格納部に格納された前記第２の画像データのうちの何れかが、前記第１の画像データと一致するか否かを判定する判定ステップと、
   第２の格納部が、前記判定部により前記第１の格納部に格納された前記第２の画像データのうちの何れかと一致すると判定された前記第１の画像データを格納する第２の格納ステップと、
   作成部が、前記判定部により一致すると判定された前記第２の画像データに対応する個人情報と、当該第１の画像データのサムネイルと、当該第１の画像データの格納先に関する情報とを少なくとも含む管理表を作成する作成ステップと、
   第３の格納部が、前記作成部により作成された前記管理表を格納する第３の格納ステップと、
   制御部が、所定の宛先への電子メールを作成して送信するメール作成ステップと
   を有し、
   前記メール作成ステップは、前記電子メールに画像データの添付を要求されたとき、前記所定の宛先を含む前記管理表が存在する場合、この管理表に含まれる前記個人情報および前記サムネイルを表示装置に表示させる
   ことを特徴とする画像管理方法。
5. コンピュータを、
   第１の画像データを取得する画像取得部と、
   複数の個人情報とこの個人情報に対応する第２の画像データとを対応付けて格納する第１の格納部と、
   この第１の格納部に格納された前記第２の画像データのうちの何れかが、前記第１の画像データと一致するか否かを判定する判定部と、
   この判定部により前記第１の格納部に格納された前記第２の画像データのうちの何れかと一致すると判定された前記第１の画像データを格納する第２の格納部と、
   前記判定部により一致すると判定された前記第２の画像データに対応する個人情報と、当該第１の画像データのサムネイルと、当該第１の画像データの格納先に関する情報とを少なくとも含む管理表を作成する作成部と、
   この作成部により作成された前記管理表を格納する第３の格納部と、
   所定の宛先へ電子メールを作成して送信する制御部と
   を備え、
   前記制御部は、前記電子メールに画像データの添付を要求されたとき、前記所定の宛先を含む前記管理表が存在する場合、この管理表に含まれる前記個人情報および前記サムネイルを表示装置に表示させる
   を備えた携帯端末装置として機能させるためのプログラム。