JP2023021054A - 人物情報を利用した写真分類機能を提供する方法、コンピュータ装置、およびコンピュータプログラム - Google Patents

Abstract

【課題】 人物情報を利用した写真分類機能を提供するコンピュータ装置で実行される写真分類方法を提供する。【解決手段】 前記コンピュータ装置は、メモリに含まれるコンピュータ読み取り可能な命令を実行するように構成された少なくとも１つのプロセッサを含み、写真分類方法は、前記少なくとも１つのプロセッサにより、１つ以上の写真に登場する人物をフィルタリストとして提供する段階、および前記少なくとも１つのプロセッサにより、前記フィルタリストを利用してユーザが複数の人物を選択する場合、前記複数の人物が含まれた写真を提供する段階を含む。【選択図】図４

Description

以下の説明は、写真分類機能を提供する技術に関する。

スマートフォンやタブレットのようなモバイル端末の最大の特徴は、オペレーティングシステム（ＯＳ）の搭載により、コンピュータで処理が可能な形態の応用プログラムを実行したりインターネットに接続したりするなどのデータ通信機能を含んでいることにあると言える。

このようなモバイル端末では、電話機能はもちろん、写真撮影や写真管理などの多様な付加機能を基本的に提供している。

モバイル端末で撮影した写真を管理するための応用プログラムは、モバイル端末のローカル（ｌｏｃａｌ）状態で写真を保存して管理する方式や、モバイル端末で撮影した写真をサーバ環境の上位システムにアップロードする方式を適用している。

写真を管理するための応用プログラムは、写真に対する多様な分類機能を提供している。

写真分類技術の一例として、特許文献１（公開日２０２０年３月２０日）は、関心地点の位置を利用してイメージをフィルタリングする方法およびシステムを開示している。

韓国公開特許第１０－２０２０－００３０３９２号公報

人物アルバムにおいて、ユーザが希望する人物の写真に対して多様な分類機能を提供することができる。

ユーザが希望する人物の写真を単独写真と団体写真に区分して提供することができる。

団体人物写真の場合、基準となる人物と追加で選択された人物とがともに写っている写真を提供することができる。

写真検索において、人物と異なるカテゴリのフィルタの組み合わせによって写真検索結果を提供することができる。

コンピュータ装置で実行される写真分類方法であって、前記コンピュータ装置は、メモリに含まれるコンピュータ読み取り可能な命令を実行するように構成された少なくとも１つのプロセッサを含み、前記写真分類方法は、前記少なくとも１つのプロセッサにより、１つ以上の写真に登場する人物をフィルタリストとして提供する段階、および前記少なくとも１つのプロセッサにより、前記フィルタリストを利用してユーザが複数の人物を選択する場合、前記複数の人物が含まれた写真を提供する段階を含む、写真分類方法を提供する。

一側面によると、前記写真を提供する段階は、前記フィルタリストから選択された基準人物の写真として前記基準人物が登場する写真を分類する段階、および前記基準人物が登場する写真を単独写真と団体写真に区分して表示する段階を含んでよい。

他の側面によると、前記写真分類方法は、前記少なくとも１つのプロセッサにより、前記基準人物が登場する各写真に登場する他の人物を追加フィルタリストとして提供する段階をさらに含み、前記分類する段階は、前記基準人物と前記追加フィルタリストから選択された少なくとも１人の追加人物がともに登場する写真を前記団体写真として分類する段階を含んでよい。

また他の側面によると、前記表示する段階は、前記基準人物に対する写真分類結果を提供する画面上に、写真全体リストを提供する全体タブ、単独写真リストを提供する単独タブ、および団体写真リストを提供する団体タブを区分して表示してよい。

また他の側面によると、前記表示する段階は、前記団体タブにおいて、前記基準人物が登場する各写真に登場する他の人物で構成された追加フィルタリストを表示し、前記団体写真リストにおいて、前記基準人物と前記追加フィルタリストから選択された少なくとも１人の追加人物がともに登場する写真リストを表示してよい。

また他の側面によると、前記団体タブには、前記団体写真の分類範囲を選択するためのインタフェースが含まれ、前記表示する段階は、前記インタフェースによるユーザ選択にしたがい、前記団体タブ上において、前記基準人物と前記追加人物が登場するすべての写真リストまたは前記基準人物と前記追加人物だけが登場する写真リストを前記団体写真リストとして表示してよい。

また他の側面によると、前記表示する段階は、前記単独タブにおいて、前記単独写真リストに含まれた少なくとも一部の写真に対して前記基準人物と同一人物であるかに対するユーザフィードバックのためのインタフェースを提供してよい。

また他の側面によると、前記写真分類方法は、前記少なくとも１つのプロセッサにより、写真検索環境において、人物フィルタリストと、人物とカテゴリが異なるフィルタリストを提供する段階、および前記少なくとも１つのプロセッサにより、前記人物フィルタリストと前記異なるフィルタリストから選択されたフィルタの組み合わせによって分類された写真を写真検索結果として提供する段階を含んでよい。

また他の側面によると、前記写真分類方法は、前記少なくとも１つのプロセッサにより、前記フィルタリストを編集するための機能として、特定の人物を隠し処理するためのインタフェースと、２人以上の人物を１つの人物に併合するためのインタフェースを提供する段階を含んでよい。

さらに他の側面によると、前記写真分類方法は、前記少なくとも１つのプロセッサにより、人物単位の写真をアルバムで構成した人物アルバムリストを編集するための機能として、特定の人物のアルバムを隠し処理するためのインタフェースと、２つ以上の人物アルバムを１つの人物アルバムに併合するためのインタフェースを提供する段階を含んでよい。

前記写真分類方法を前記コンピュータ装置に実行させるためにコンピュータ読み取り可能な記録媒体に記録される、コンピュータプログラムを提供する。

コンピュータ装置であって、メモリに含まれるコンピュータ読み取り可能な命令を実行するように構成された少なくとも１つのプロセッサを含み、前記少なくとも１つのプロセッサは、１つ以上の写真に登場する人物をフィルタリストとして提供し、前記フィルタリストを利用してユーザが複数の人物を選択する場合、前記複数の人物が含まれた写真を提供することを特徴とする、コンピュータ装置を提供する。

本発明の実施形態によると、人物写真に対する分類機能として、ユーザが希望する人物の写真を単独写真と団体写真に分類する機能、団体写真の場合、基準となる人物と追加で選択された人物がともに写っている写真を分類する機能、人物と異なるカテゴリのフィルタの組み合わせによって人物写真を分類する機能を提供することにより、人物写真に対する精巧なフィルタリングを提供することができる。

本発明の一実施形態における、ネットワーク環境の例を示した図である。 本発明の一実施形態における、コンピュータ装置の例を示したブロック図である。 本発明の一実施形態における、コンピュータ装置のプロセッサが含むことのできる構成要素の例を示した図である。 本発明の一実施形態における、コンピュータ装置が実行することのできる方法の例を示したフローチャートである。 本発明の一実施形態における、人物写真を分類して表示する過程を説明するための例示図である。 本発明の一実施形態における、人物写真を分類して表示する過程を説明するための例示図である。 本発明の一実施形態における、人物写真を分類して表示する過程を説明するための例示図である。 本発明の一実施形態における、人物写真を分類して表示する過程を説明するための例示図である。 本発明の一実施形態における、人物写真を分類して表示する過程を説明するための例示図である。 本発明の一実施形態における、人物写真を分類して表示する過程を説明するための例示図である。 本発明の一実施形態における、人物写真を分類して表示する過程を説明するための例示図である。 本発明の一実施形態における、人物写真を分類して表示する過程を説明するための例示図である。

以下、本発明の実施形態について、添付の図面を参照しながら詳しく説明する。

本発明の実施形態は、写真分類機能を提供する技術に関する。

本明細書で具体的に開示される事項を含む実施形態は、人物アルバムにおいて、ユーザが希望する人物の写真に対して多様な分類機能を提供することができ、これにより、写真分類の精巧性や効率性などの側面において相当な長所を達成することができる。

本発明の実施形態に係る写真分類装置は、少なくとも１つのコンピュータ装置によって実現されてよく、本発明の実施形態に係る写真分類方法は、写真分類装置に含まれる少なくとも１つのコンピュータ装置によって実行されてよい。このとき、コンピュータ装置においては、本発明の一実施形態に係るコンピュータプログラムがインストールされて実行されてよく、コンピュータ装置は、実行されたコンピュータプログラムの制御にしたがって本発明の実施形態に係る写真分類方法を実行してよい。上述したコンピュータプログラムは、コンピュータ装置と結合して写真分類方法をコンピュータに実行させるためにコンピュータ読み取り可能な記録媒体に記録されてよい。

図１は、本発明の一実施形態における、ネットワーク環境の例を示した図である。図１のネットワーク環境は、複数の電子機器１１０、１２０、１３０、１４０、複数のサーバ１５０、１６０、およびネットワーク１７０を含む例を示している。このような図１は、発明の説明のための一例に過ぎず、電子機器の数やサーバの数が図１のように限定されることはない。また、図１のネットワーク環境は、本実施形態に適用可能な環境のうちの一例を説明したものに過ぎず、本実施形態に適用可能な環境が図１のネットワーク環境に限定されることはない。

複数の電子機器１１０、１２０、１３０、１４０は、コンピュータ装置によって実現される固定端末や移動端末であってよい。複数の電子機器１１０、１２０、１３０、１４０の例としては、スマートフォン、携帯電話、ナビゲーション、ＰＣ（ｐｅｒｓｏｎａｌ ｃｏｍｐｕｔｅｒ）、ノート型ＰＣ、デジタル放送用端末、ＰＤＡ（Ｐｅｒｓｏｎａｌ Ｄｉｇｉｔａｌ Ａｓｓｉｓｔａｎｔ）、ＰＭＰ（Ｐｏｒｔａｂｌｅ Ｍｕｌｔｉｍｅｄｉａ Ｐｌａｙｅｒ）、タブレットなどがある。一例として、図１では、電子機器１１０の例としてスマートフォンを示しているが、本発明の実施形態において、電子機器１１０は、実質的に無線または有線通信方式を利用し、ネットワーク１７０を介して他の電子機器１２０、１３０、１４０および／またはサーバ１５０、１６０と通信することができる多様な物理的なコンピュータ装置のうちの１つを意味してよい。

通信方式が限定されることはなく、ネットワーク１７０が含むことのできる通信網（一例として、移動通信網、有線インターネット、無線インターネット、放送網）を利用する通信方式だけではなく、機器間の近距離無線通信が含まれてもよい。例えば、ネットワーク１７０は、ＰＡＮ（ｐｅｒｓｏｎａｌ ａｒｅａ ｎｅｔｗｏｒｋ）、ＬＡＮ（ｌｏｃａｌ ａｒｅａ ｎｅｔｗｏｒｋ）、ＣＡＮ（ｃａｍｐｕｓ ａｒｅａ ｎｅｔｗｏｒｋ）、ＭＡＮ（ｍｅｔｒｏｐｏｌｉｔａｎ ａｒｅａ ｎｅｔｗｏｒｋ）、ＷＡＮ（ｗｉｄｅ ａｒｅａ ｎｅｔｗｏｒｋ）、ＢＢＮ（ｂｒｏａｄｂａｎｄ ｎｅｔｗｏｒｋ）、インターネットなどのネットワークのうちの１つ以上の任意のネットワークを含んでよい。さらに、ネットワーク１７０は、バスネットワーク、スターネットワーク、リングネットワーク、メッシュネットワーク、スター－バスネットワーク、ツリーまたは階層的ネットワークなどを含むネットワークトポロジのうちの任意の１つ以上を含んでもよいが、これらに限定されることはない。

サーバ１５０、１６０それぞれは、複数の電子機器１１０、１２０、１３０、１４０とネットワーク１７０を介して通信して命令、コード、ファイル、コンテンツ、サービスなどを提供する１つ以上のコンピュータ装置によって実現されてよい。例えば、サーバ１５０は、ネットワーク１７０を介して接続した複数の電子機器１１０、１２０、１３０、１４０にサービス（一例として、アルバム管理サービスなど）を提供するシステムであってよい。

図２は、本発明の一実施形態における、コンピュータ装置の例を示したブロック図である。上述した複数の電子機器１１０、１２０、１３０、１４０それぞれやサーバ１５０、１６０それぞれは、図２に示したコンピュータ装置２００によって実現されてよい。

このようなコンピュータ装置２００は、図２に示すように、メモリ２１０、プロセッサ２２０、通信インタフェース２３０、および入力／出力インタフェース２４０を含んでよい。メモリ２１０は、コンピュータ読み取り可能な記録媒体であって、ＲＡＭ（ｒａｎｄｏｍ ａｃｃｅｓｓ ｍｅｍｏｒｙ）、ＲＯＭ（ｒｅａｄ ｏｎｌｙ ｍｅｍｏｒｙ）、およびディスクドライブのような永続的大容量記録装置を含んでよい。ここで、ＲＯＭやディスクドライブのような永続的大容量記録装置は、メモリ２１０とは区分される別の永続的記録装置としてコンピュータ装置２００に含まれてもよい。また、メモリ２１０には、オペレーティングシステムと、少なくとも１つのプログラムコードが記録されてよい。このようなソフトウェア構成要素は、メモリ２１０とは別のコンピュータ読み取り可能な記録媒体からメモリ２１０にロードされてよい。このような別のコンピュータ読み取り可能な記録媒体は、フロッピー（登録商標）ドライブ、ディスク、テープ、ＤＶＤ／ＣＤ－ＲＯＭドライブ、メモリカードなどのコンピュータ読み取り可能な記録媒体を含んでよい。他の実施形態において、ソフトウェア構成要素は、コンピュータ読み取り可能な記録媒体ではない通信インタフェース２３０を通じてメモリ２１０にロードされてもよい。例えば、ソフトウェア構成要素は、ネットワーク１７０を介して受信されるファイルによってインストールされるコンピュータプログラムに基づいてコンピュータ装置２００のメモリ２１０にロードされてよい。

プロセッサ２２０は、基本的な算術、ロジック、および入出力演算を実行することにより、コンピュータプログラムの命令を処理するように構成されてよい。命令は、メモリ２１０または通信インタフェース２３０によって、プロセッサ２２０に提供されてよい。例えば、プロセッサ２２０は、メモリ２１０のような記録装置に記録されたプログラムコードにしたがって受信される命令を実行するように構成されてよい。

通信インタフェース２３０は、ネットワーク１７０を介してコンピュータ装置２００が他の装置（一例として、上述した記録装置）と互いに通信するための機能を提供してよい。一例として、コンピュータ装置２００のプロセッサ２２０がメモリ２１０のような記録装置に記録されたプログラムコードにしたがって生成した要求や命令、データ、ファイルなどが、通信インタフェース２３０の制御にしたがってネットワーク１７０を介して他の装置に伝達されてよい。これとは逆に、他の装置からの信号や命令、データ、ファイルなどが、ネットワーク１７０を経てコンピュータ装置２００の通信インタフェース２３０を通じてコンピュータ装置２００に受信されてよい。通信インタフェース２３０を通じて受信された信号や命令、データなどは、プロセッサ２２０やメモリ２１０に伝達されてよく、ファイルなどは、コンピュータ装置２００がさらに含むことのできる記録媒体（上述した永続的記録装置）に記録されてよい。

入力／出力インタフェース２４０は、入力／出力装置２５０とのインタフェースのための手段であってよい。例えば、入力装置は、マイク、キーボード、またはマウスなどの装置を、出力装置は、ディスプレイ、スピーカのような装置を含んでよい。他の例として、入力／出力インタフェース２４０は、タッチスクリーンのように入力と出力のための機能が１つに統合された装置とのインタフェースのための手段であってもよい。入力／出力装置２５０は、コンピュータ装置２００と１つの装置で構成されてもよい。

また、他の実施形態において、コンピュータ装置２００は、図２の構成要素よりも少ないか多くの構成要素を含んでもよい。しかし、大部分の従来技術の構成要素を明確に図に示す必要はない。例えば、コンピュータ装置２００は、上述した入力／出力装置２５０のうちの少なくとも一部を含むように実現されてもよいし、トランシーバ、データベースなどのような他の構成要素をさらに含んでもよい。

以下では、人物情報を利用した写真分類機能を提供する方法および装置の具体的な実施形態について説明する。

本実施形態では、人物アルバムにおいて、多様な分類方式で人物写真を表示することができる。

図３は、本発明の一実施形態における、コンピュータ装置のプロセッサが含むことのできる構成要素の例を示したブロック図であり、図４は、本発明の一実施形態における、コンピュータ装置が実行することのできる方法の例を示したフローチャートである。

本実施形態に係るコンピュータ装置２００は、クライアントを対象に、クライアント上にインストールされた専用アプリケーションやコンピュータ装置２００と関連するウェブ／モバイルサイトへの接続によってアルバム管理サービスを提供してよい。コンピュータ装置２００には、コンピュータで実現された写真分類装置が構成されてよい。

コンピュータ装置２００のプロセッサ２２０は、図４に係る写真分類方法を実行するための構成要素として、図３に示すように、フィルタ提供部３１０、写真分類部３２０、および写真表示部３３０を含んでよい。実施形態によって、プロセッサ２２０の構成要素は、選択的にプロセッサ２２０に含まれても除外されてもよい。また、実施形態によって、プロセッサ２２０の構成要素は、プロセッサ２２０の機能の表現のために分離されても併合されてもよい。

このようなプロセッサ２２０およびプロセッサ２２０の構成要素は、図３の写真分類方法が含む段階４１０～４３０を実行するようにコンピュータ装置２００を制御してよい。例えば、プロセッサ２２０およびプロセッサ２２０の構成要素は、メモリ２１０が含むオペレーティングシステムのコードと、少なくとも１つのプログラムのコードとによる命令（ｉｎｓｔｒｕｃｔｉｏｎ）を実行するように実現されてよい。

ここで、プロセッサ２２０の構成要素は、コンピュータ装置２００に格納されたプログラムコードが提供する命令にしたがってプロセッサ２２０によって実行される、互いに異なる機能（ｄｉｆｆｅｒｅｎｔ ｆｕｎｃｔｉｏｎｓ）の表現であってよい。例えば、コンピュータ装置２００が写真分類のためのフィルタを提供するように上述した命令にしたがってコンピュータ装置２００を制御するプロセッサ２２０の機能的表現として、フィルタ提供部３１０が利用されてよい。

プロセッサ２２０は、コンピュータ装置２００の制御と関連する命令がロードされたメモリ２１０から必要な命令を読み取ってよい。この場合、前記読み取られた命令には、プロセッサ２２０が以下で説明する段階４１０～４３０を実行するように制御するための命令が含まれてよい。

以下で説明する段階４１０～４３０は、図４に示したものとは異なる順序で実行されてもよいし、段階４１０～４３０のうちの一部が省略されたり追加の過程がさらに含まれたりしてもよい。

図４を参照すると、段階４１０で、フィルタ提供部３１０は、人物写真で構成されたアルバム（以下、「人物アルバム」とする）に対して、写真分類に適用可能なフィルタリストを提供してよい。フィルタ提供部３１０は、フィルタタイプごとに各タイプのフィルタリストを提供してよく、フィルタタイプは、人物を基準に写真を分類する人物フィルタ、テーマを基準に写真を分類するテーマフィルタ、場所（位置）を基準に写真を分類する場所フィルタ、日付を基準に写真を分類する日付フィルタを含んでよい。ディープラーニングのようなイメージ分析技術によって写真を直接分析した結果を利用したり、写真にタグ付けされた情報を利用したりしてフィルタリストを構成してよい。例えば、人物フィルタの場合は、写真に含まれた人物（顔）情報を認識した後、認識された人物情報でフィルタリストを構成してよく、場所フィルタの場合は、写真にタグ付けされた場所を抽出してフィルタリストを構成してよい。フィルタ提供部３１０は、事前に定められた整列基準を適用してフィルタリストを提供してよいが、整列基準の一例としては、写真の枚数や写真撮影時間が適用されてよい。例えば、人物フィルタの場合は、写真の枚数が多い人物またはここ最近に撮影した写真に含まれた人物をリストの上段に整列してよい。この他にも、名前のあいうえお順、距離順（場所フィルタの場合）などの多様な整列基準の活用が可能である。フィルタリストに適用可能な整列基準のうち、ユーザ設定によってユーザが希望する整列基準を選択的に適用することも可能である。

段階４２０で、写真分類部３２０は、ユーザがフィルタリストから特定の人物（以下、「基準人物」とする）を選択する場合、人物アルバム内の写真のうちから基準人物が含まれた写真を分類してよい。特に、写真分類部３２０は、基準人物に対するフィルタリングによって、基準人物が１人で写っている単独写真と基準人物と他の人物がともに写っている団体写真を分類してよい。団体写真の一例として、フィルタ提供部３１０は、基準人物が含まれた写真を対象に、基準人物とともに写っている人物情報に基づいて追加フィルタリストを提供してよい。これにより、写真分類部３２０は、人物アルバム内の写真のうちから追加フィルタリストによって選択された少なくとも１人以上の人物が基準人物とともに写っている写真を分類することができる。さらに、写真分類部３２０は、人物フィルタリングの他に、写真検索環境において、人物と異なるカテゴリのフィルタの組み合わせによって人物写真を分類してよい。写真分類部３２０は、ユーザがフィルタリストから、写真検索条件となる基準人物とともに、テーマ、場所、および日付のうちの少なくとも１つのフィルタを選択する場合、人物アルバム内の写真のうちから、基準人物が含まれると同時に、選択されたフィルタ条件に適合する写真を分類してよい。人物アルバムに含まれたそれぞれの写真は、人物情報だけでなく、テーマ情報、場所情報、日付情報を含んでおり、このような情報に対して必要によってＯＲ条件やＡＮＤ条件を適用して写真をフィルタリングしてよい。ファイル管理環境において、複数の人物が含まれた写真に対しては個別の団体識別子が付与されてよく、ユーザが複数の人物を指定する場合には団体識別子が付与された写真を検索対象にすることで、検索範囲を減らすことができる。

段階４３０で、写真表示部３３０は、フィルタリストを利用したユーザ要請に対するフィルタリング結果として、基準人物が含まれた写真を表示してよい。写真表示部３３０は、基準人物が含まれた写真全体を表示してよく、基準人物が含まれた写真を単独写真と団体写真に区分して表示してよい。写真表示部３３０は、人物基準で写真フィルタリング結果を提供するにあたり、１人で写っている写真とともに、写っている写真を区別して表示するためのインタフェースを提供する。また、写真表示部３３０は、写真検索環境において、ユーザが選択した人物とともに、人物と異なるカテゴリである、テーマ、場所、日付のうちの少なくとも１つのフィルタの組み合わせによって分類された写真を写真検索結果として表示してよい。

図５～１２は、本発明の一実施形態における、人物写真を分類して表示する過程を説明するための例示図である。

図５～１０は、ユーザの電子機器であるクライアントデバイスに表示されるアルバム管理サービス画面５００を示している。

図５を参照すると、アルバム管理サービス画面５００には、写真分類のためのフィルタとして、人物を基準に写真を分類する人物フィルタ５０１、テーマを基準に写真を分類するテーマフィルタ５０２、場所を基準に写真を分類する場所フィルタ５０３などが含まれてよい。

人物フィルタ５０１、テーマフィルタ５０２、場所フィルタ５０３などは、ユーザが保存した写真を対象に、それぞれの写真に含まれた情報で構成されてよい。それぞれの写真には人物情報、テーマ情報、場所情報などが含まれてよく、このような情報に基づいてフィルタリストが構成されてよい。例えば、人物フィルタ５０１の場合は、ユーザが保存した写真に登場する人物リストで構成されてよい。

プロセッサ２２０は、ユーザがアルバム管理サービス画面５００で人物フィルタ５０１を選択する場合、図６に示すように、写真分類のためのフィルタリストとして人物リスト６１０を提供してよい。このとき、人物リスト６１０は、人物ごとに顔イメージで構成されてよく、ユーザによって名前が設定されている人物の場合は該当の名前が表示されてよい。各人物の名前は、ユーザによって設定あるいは修正が可能である。

プロセッサ２２０は、人物フィルタ５０１からユーザが希望する基準人物を選択する場合、図７に示すように、基準人物に対する分類結果画面７００を提供してよい。

分類結果画面７００には、基準人物の名前を設定あるいは編集するためのインタフェース７０１が含まれてよい。

特に、本実施形態において、分類結果画面７００は、人物写真を多様な分類で提供するためのインタフェースとして、基準人物が含まれた写真全体リストを提供する全体タブ７１０、基準人物が１人で写っている単独写真リストを提供する単独写真タブ７２０、基準人物と他の人物がともに写っている団体写真リストを提供する団体写真タブ７３０などが含まれてよい。

図７を参照すると、プロセッサ２２０は、全体タブ７１０において、ユーザが保存した写真のうちで基準人物が登場するすべての写真、すなわち、単独写真と団体写真を含む写真全体リスト７１１を表示してよい。このとき、写真全体リスト７１１は、日付別のアルバム形態で表示されてよく、ここ最近の写真が上段に表示されるように時間順に整列されてよい。

図８を参照すると、プロセッサ２２０は、単独写真タブ７２０において、基準人物が登場する写真のうちから単独写真リスト７２１を分類して表示してよい。このとき、単独写真リスト７２１は、日付別のアルバム形態で表示されてよく、ここ最近の写真が上段に表示されるように時間順に整列されてよい。

プロセッサ２２０は、単独写真タブ７２０において、単独写真リスト７２１に含まれた少なくとも一部の写真に対して基準人物と同一人物であるかに対するユーザフィードバックのためのインタフェースを提供してよい。例えば、プロセッサ２２０は、単独写真リスト７２１において、人物の類似度が誤差範囲内にある写真に対して基準人物と同一人物であるかに対するユーザフィードバックを受信してよく、ユーザフィードバックに基づいて単独写真リスト７２１をアップデートしてよい。

図９を参照すると、プロセッサ２２０は、団体写真タブ７３０において、基準人物が登場する写真のうちから、単独写真でなく他の人物とともに写っている団体写真リスト７３１だけを分類して表示してよい。このとき、団体写真リスト７３１は、日付別のアルバム形態で表示されてよく、ここ最近の写真が上段に表示されるように時間順に整列されてよい。

他の例として、図１０を参照すると、プロセッサ２２０は、団体写真に基準人物とともに登場する人物を追加でフィルタリングできるように、団体写真タブ７３０において、写真に基準人物とともに写っている人物情報で構成された追加フィルタリストである人物リスト７３２を提供してよい。プロセッサ２２０は、人物リスト７３２から追加で選択された人物が基準人物とともに写っている団体写真リスト７３１を分類して表示してよい。団体写真リスト７３１には、基準人物と追加で選択された人物がともに登場する写真として、基準人物と追加の人物以外の他の人物が登場する写真が含まれてよい。実施形態によっては、個別のインタフェース７３３を利用したユーザ要請にしたがい、基準人物と追加で選択された人物だけが登場する写真からなる団体写真リスト７３１が提供されてもよい。ユーザは、インタフェース７３３を利用して、団体写真に対する分類範囲を、基準人物と追加人物だけが登場する写真にするか、基準人物と追加の人物が登場するすべての写真（基準人物と追加人物以外の他の人物が登場する写真を含む）にするかを選択的に適用することができる。このとき、団体写真リスト７３１は、日付別のアルバム形態で表示されてよく、ここ最近の写真が上段に表示されるように時間順に整列されてよい。

したがって、本実施形態では、ユーザが希望する基準人物の写真を多様なインタフェースを利用して単独写真リスト７２１と団体写真リスト７３１に区分して表示することができ、団体写真リスト７３１の場合には人物を追加で選択することにより、基準人物と追加で選択された人物がともに写っている写真をフィルタリングして表示することができる。

基準人物を指定した後、追加の人物を指定して団体写真をフィルタリングすると説明しているが、実施形態によっては、人物リスト６１０で複数の人物をすぐに指定して団体写真をフィルタリングすることも可能である。一例として、人物リスト６１０で複数の人物が指定される場合、指定された人物が含まれた写真をフィルタリングし、フィルタリング結果をアルバムとして生成してよく、該当のアルバムにおいて指定された人物が含まれる写真を提供してよい。

図１１は、人物アルバム編集画面１１００を示している。

図１１を参照すると、プロセッサ２２０は、人物アルバム編集画面１１００において、人物単位の写真をアルバムで構成した人物アルバムリスト１１１０を提供してよい。このとき、人物アルバムリスト１１１０において少なくとも１つ以上の人物アルバムを編集するための機能として、特定の人物のアルバムを隠し処理するための人物隠しメニュー１１０１、２つ以上の人物アルバムを１つの人物アルバムに併合するための人物併合メニュー１１０２などが含まれてよい。

プロセッサ２２０は、人物アルバム編集画面１１００における人物アルバム編集内容を人物フィルタ５０１に反映してよい。隠し処理された人物の場合には人物フィルタ５０１から除外してよく、１つの人物アルバムに併合された人物の場合は１つの人物フィルタが提供されてよい。

実施形態によっては、人物フィルタを編集するための機能として、基準人物を選択するための人物リスト６１０に対して人物隠しメニュー１１０１と人物併合メニュー１１０２を提供してよい。

図１２は、写真検索画面１２００を示している。

図１２を参照すると、プロセッサ２２０は、写真検索画面１２００において、人物写真検索機能を提供してよい。写真検索画面１２００にはフィルタタイプごとに各タイプのフィルタリストが提供されてよく、フィルタタイプは、人物フィルタ５０１、テーマフィルタ５０２、場所フィルタ５０３、日付フィルタ５０４などが含まれてよい。

プロセッサ２２０は、ユーザが人物フィルタ５０１を利用して検索しようとする人物を選択し、人物と異なるタイプのフィルタ５０２、５０３、５０４のうちの少なくとも１つのフィルタを選択する場合、ユーザが選択したフィルタの組み合わせ１２１０と、該当のフィルタの組み合わせ１２１０によって分類された検索結果に該当する写真リスト１２２０を提供してよい。このとき、写真リスト１２２０は、日付別のアルバム形態で表示されてよく、ここ最近の写真が上段に表示されるように時間順に整列されてよい。例えば、ユーザが、写真検索要請として、人物フィルタ５０１から２人の人物を選択し、テーマフィルタ５０２から「スマイル」と「自然」を選択した場合、選択された２人の人物がともに登場しながら自然を背景とした写真のうちで少なくとも１人以上の人物が笑っている写真をフィルタリングして表示してよい。

したがって、本実施形態では、人物と異なるカテゴリのフィルタの組み合わせによって詳細条件の人物写真を検索することができる。

このように、本発明の実施形態によると、人物写真に対する分類機能として、ユーザが希望する人物の写真を単独写真と団体写真に分類する機能、団体写真の場合は、基準となる人物と追加で選択された人物がともに写っている写真を分類する機能、人物と異なるカテゴリのフィルタの組み合わせによって人物写真を分類する機能を提供することにより、人物写真に対する精巧なフィルタリングを提供することができる。

上述した装置は、ハードウェア構成要素、ソフトウェア構成要素、および／またはハードウェア構成要素とソフトウェア構成要素との組み合わせによって実現されてよい。例えば、実施形態で説明された装置および構成要素は、プロセッサ、コントローラ、ＡＬＵ（ａｒｉｔｈｍｅｔｉｃ ｌｏｇｉｃ ｕｎｉｔ）、デジタル信号プロセッサ、マイクロコンピュータ、ＦＰＧＡ（ｆｉｅｌｄ ｐｒｏｇｒａｍｍａｂｌｅ ｇａｔｅ ａｒｒａｙ）、ＰＬＵ（ｐｒｏｇｒａｍｍａｂｌｅ ｌｏｇｉｃ ｕｎｉｔ）、マイクロプロセッサ、または命令を実行して応答することができる様々な装置のように、１つ以上の汎用コンピュータまたは特殊目的コンピュータを利用して実現されてよい。処理装置は、オペレーティングシステム（ＯＳ）およびＯＳ上で実行される１つ以上のソフトウェアアプリケーションを実行してよい。また、処理装置は、ソフトウェアの実行に応答し、データにアクセスし、データを記録、操作、処理、および生成してもよい。理解の便宜のために、１つの処理装置が使用されるとして説明される場合もあるが、当業者であれば、処理装置が複数個の処理要素および／または複数種類の処理要素を含んでもよいことが理解できるであろう。例えば、処理装置は、複数個のプロセッサまたは１つのプロセッサおよび１つのコントローラを含んでよい。また、並列プロセッサのような、他の処理構成も可能である。

ソフトウェアは、コンピュータプログラム、コード、命令、またはこれらのうちの１つ以上の組み合わせを含んでもよく、思うままに動作するように処理装置を構成したり、独立的または集合的に処理装置に命令したりしてよい。ソフトウェアおよび／またはデータは、処理装置に基づいて解釈されたり、処理装置に命令またはデータを提供したりするために、いかなる種類の機械、コンポーネント、物理装置、コンピュータ記録媒体または装置に具現化されてよい。ソフトウェアは、ネットワークによって接続されたコンピュータシステム上に分散され、分散された状態で記録されても実行されてもよい。ソフトウェアおよびデータは、１つ以上のコンピュータ読み取り可能な記録媒体に記録されてよい。

実施形態に係る方法は、多様なコンピュータ手段によって実行可能なプログラム命令の形態で実現されてコンピュータ読み取り可能な媒体に記録されてよい。ここで、媒体は、コンピュータ実行可能なプログラムを継続して記録するものであっても、実行またはダウンロードのために一時記録するものであってもよい。また、媒体は、単一または複数のハードウェアが結合した形態の多様な記録手段または格納手段であってよく、あるコンピュータシステムに直接接続する媒体に限定されることはなく、ネットワーク上に分散して存在するものであってもよい。媒体の例としては、ハードディスク、フロッピー（登録商標）ディスク、および磁気テープのような磁気媒体、ＣＤ－ＲＯＭおよびＤＶＤのような光媒体、フロプティカルディスク（ｆｌｏｐｔｉｃａｌ ｄｉｓｋ）のような光磁気媒体、およびＲＯＭ、ＲＡＭ、フラッシュメモリなどを含み、プログラム命令が記録されるように構成されたものであってよい。また、媒体の他の例として、アプリケーションを配布するアプリケーションストアやその他の多様なソフトウェアを供給または配布するサイト、サーバなどで管理する記録媒体または格納媒体が挙げられる。

以上のように、実施形態を、限定された実施形態および図面に基づいて説明したが、当業者であれば、上述した記載から多様な修正および変形が可能であろう。例えば、説明された技術が、説明された方法とは異なる順序で実行されたり、かつ／あるいは、説明されたシステム、構造、装置、回路などの構成要素が、説明された方法とは異なる形態で結合されたりまたは組み合わされたり、他の構成要素または均等物によって対置されたり置換されたとしても、適切な結果を達成することができる。

したがって、異なる実施形態であっても、特許請求の範囲と均等なものであれば、添付される特許請求の範囲に属する。

２２０：プロセッサ
３１０：フィルタ提供部
３２０：写真分類部
３３０：写真表示部

Claims (20)

1. コンピュータ装置で実行される写真分類方法であって、
   前記コンピュータ装置は、メモリに含まれるコンピュータ読み取り可能な命令を実行するように構成された少なくとも１つのプロセッサを含み、
   前記写真分類方法は、
   前記少なくとも１つのプロセッサにより、１つ以上の写真に登場する人物をフィルタリストとして提供する段階、および
   前記少なくとも１つのプロセッサにより、前記フィルタリストを利用してユーザが複数の人物を選択する場合、前記複数の人物が含まれた写真を提供する段階を含む、写真分類方法。
2. 前記写真を提供する段階は、
   前記フィルタリストから選択された基準人物の写真として前記基準人物が登場する写真を分類する段階、および
   前記基準人物が登場する写真を単独写真と団体写真に区分して表示する段階
   を含む、請求項１に記載の写真分類方法。
3. 前記写真分類方法は、
   前記少なくとも１つのプロセッサにより、前記基準人物が登場する各写真に登場する他の人物を追加フィルタリストとして提供する段階
   をさらに含み、
   前記分類する段階は、
   前記基準人物と前記追加フィルタリストから選択された少なくとも１つの追加人物がともに登場する写真を前記団体写真として分類する段階
   を含む、請求項２に記載の写真分類方法。
4. 前記表示する段階は、
   前記基準人物に対する写真分類結果を提供する画面上に、写真全体リストを提供する全体タブ、単独写真リストを提供する単独タブ、および団体写真リストを提供する団体タブを区分して表示すること
   を含む、請求項２に記載の写真分類方法。
5. 前記表示する段階は、
   前記団体タブにおいて、前記基準人物が登場する各写真に登場する他の人物で構成された追加フィルタリストを表示し、前記団体写真リストとして、前記基準人物と前記追加フィルタリストから選択された少なくとも１人の追加人物がともに登場する写真リストを表示すること
   を含む、請求項４に記載の写真分類方法。
6. 前記団体タブには前記団体写真の分類範囲を選択するためのインタフェースが含まれ、
   前記表示する段階は、
   前記インタフェースにおけるユーザ選択にしたがい、前記団体タブ上において、前記基準人物と前記追加人物が登場するすべての写真リストまたは前記基準人物と前記追加人物だけが登場する写真リストを前記団体写真リストとして表示すること
   を含む、請求項５に記載の写真分類方法。
7. 前記表示する段階は、
   前記単独タブにおいて、前記単独写真リストに含まれた少なくとも一部の写真に対して前記基準人物と同一人物であるかに対するユーザフィードバックのためのインタフェースを提供すること
   を含む、請求項４に記載の写真分類方法。
8. 前記写真分類方法は、
   前記少なくとも１つのプロセッサにより、写真検索環境において、人物フィルタリストと、人物とカテゴリが異なるフィルタリストを提供する段階、および
   前記少なくとも１つのプロセッサにより、前記人物フィルタリストと前記異なるフィルタリストから選択されたフィルタの組み合わせに基づいて分類された写真を写真検索結果として提供する段階
   を含む、請求項１に記載の写真分類方法。
9. 前記写真分類方法は、
   前記少なくとも１つのプロセッサにより、前記フィルタリストを編集するための機能として、特定の人物を隠し処理するためのインタフェースと、２人以上の人物を１つの人物に併合するためのインタフェースを提供する段階
   を含む、請求項１に記載の写真分類方法。
10. 前記写真分類方法は、
    前記少なくとも１つのプロセッサにより、人物単位の写真をアルバムで構成した人物アルバムリストを編集するための機能として、特定の人物のアルバムを隠し処理するためのインタフェースと、２つ以上の人物アルバムを１つの人物アルバムに併合するためのインタフェースを提供する段階
    を含む、請求項１に記載の写真分類方法。
11. 請求項１～１０のうちのいずれか一項に記載の写真分類方法を前記コンピュータ装置に実行させるためのコンピュータプログラム。
12. コンピュータ装置であって、
    メモリに含まれるコンピュータ読み取り可能な命令を実行するように構成された少なくとも１つのプロセッサ
    を含み、
    前記少なくとも１つのプロセッサは、
    １つ以上の写真に登場する人物をフィルタリストとして提供し、
    前記フィルタリストを利用してユーザが複数の人物を選択する場合、前記複数の人物が含まれた写真を提供すること
    を特徴とする、コンピュータ装置。
13. 前記少なくとも１つのプロセッサは、
    前記フィルタリストから選択された基準人物の写真として前記基準人物が登場する写真を分類し、
    前記基準人物が登場する写真を単独写真と団体写真に区分して表示すること
    を特徴とする、請求項１２に記載のコンピュータ装置。
14. 前記少なくとも１つのプロセッサは、
    前記少なくとも１つのプロセッサにより、前記基準人物が登場する各写真に登場する他の人物を追加フィルタリストとして提供し、
    前記基準人物と前記追加フィルタリストから選択された少なくとも１人の追加人物がともに登場する写真を前記団体写真として分類すること
    を特徴とする、請求項１３に記載のコンピュータ装置。
15. 前記少なくとも１つのプロセッサは、
    前記基準人物に対する写真分類結果を提供する画面上に、写真全体リストを提供する全体タブ、単独写真リストを提供する単独タブ、および団体写真リストを提供する団体タブを区分して表示すること
    を特徴とする、請求項１３に記載のコンピュータ装置。
16. 前記少なくとも１つのプロセッサは、
    前記団体タブにおいて、前記基準人物が登場する各写真に登場する他の人物で構成された追加フィルタリストを表示し、前記団体写真リストとして、前記基準人物と前記追加フィルタリストから選択された少なくとも１人の追加人物がともに登場する写真リストを表示すること
    を特徴とする、請求項１５に記載のコンピュータ装置。
17. 前記団体タブには前記団体写真の分類範囲を選択するためのインタフェースが含まれ、
    前記少なくとも１つのプロセッサは、
    前記インタフェースによるユーザ選択にしたがい、前記団体タブ上に、前記基準人物と前記追加人物が登場するすべての写真リストまたは前記基準人物と前記追加人物だけが登場する写真リストを前記団体写真リストとして表示すること
    を特徴とする、請求項１６に記載のコンピュータ装置。
18. 前記少なくとも１つのプロセッサは、
    前記単独タブにおいて、前記単独写真リストに含まれた少なくとも一部の写真に対して前記基準人物と同一人物であるかに対するユーザフィードバックのためのインタフェースを提供すること
    を特徴とする、請求項１５に記載のコンピュータ装置。
19. 前記少なくとも１つのプロセッサは、
    写真検索環境において、人物フィルタリストと、人物とカテゴリが異なるフィルタリストを提供し、
    前記人物フィルタリストと前記異なるフィルタリストから選択されたフィルタの組み合わせによって分類された写真を写真検索結果として提供すること
    を特徴とする、請求項１２に記載のコンピュータ装置。
20. 前記少なくとも１つのプロセッサは、
    前記フィルタリストを編集するための機能として、特定の人物を隠し処理するためのインタフェースと、２人以上の人物を１つの人物に併合するためのインタフェースを提供すること
    を特徴とする、請求項１２に記載のコンピュータ装置。

Images