JP2014503914A - 生成された画像中に含まれるオブジェクトの収集をサポートするための方法、端末およびコンピュータ可読記録媒体 - Google Patents

Abstract

本発明のある側面によれば、生成された画像に含まれるオブジェクトの収集をサポートする方法であって：（ａ）あるオブジェクトの画像を動作させるよう端末が使用される段階と；（ｂ）前記オブジェクトの性質についての認識情報、前記画像が生成された場所についての認識情報または前記画像が生成された時間についての認識情報が使用されて、適用可能な言語の文法に従うよう組み合わされた文を自動的に生成して端末の画面の第一の領域上で提供し、認識されたオブジェクトに対応するサムネイルが自動的に取得されて端末の画面の第二の領域上に表示される、段階と；（ｃ）オブジェクトについての収集を実行するよう、第一の領域および第二の領域上に提供されるデータが記憶される段階とを含む、方法が提供される。

Description

本発明は、生成された画像中に含まれるオブジェクトの収集をサポートするための方法、端末およびコンピュータ可読記録媒体に関する。より詳細には、本発明は、画像中に含まれるオブジェクトに対する複数のユーザーの経験をサポートし、その情報が非常に簡単に生成され、非常に効果的に共有されるようにするための方法、端末およびコンピュータ可読記録媒体に関する。それは、前記オブジェクトを認識し、前記オブジェクトの素性が何であるか、前記画像が生成された場所および前記画像が生成された時間についての認識情報からの少なくとも一つを使って前記オブジェクトについての自動コメントとしてある言語で文法的に組み合わされた文を生成して端末の画面の第一の領域に提供し、認識されたオブジェクトに対応するサムネイルを自動的に取得して端末画面の第二の領域上に表示し、収集ボタン上の選択情報が入力されたら、前記オブジェクトの収集を実行するよう第一および第二の領域上に表示されるデータを記憶スペースに記憶することによる。

近年、インターネットの広範な使用のため、かつて書籍のような印刷された素材の形で提供された情報をデジタル形式に変換したものを提供することが一般的な慣行となった。デジタル・データに変換された情報は、インターネットおよび3Gネットワークもしくは他の高速通信システムのおかげで、多くのユーザーによってリアルタイムで共有され、送達されうるので、情報共有および送達の立場からは比較的欠点をもつ印刷素材に比べて、広く使用される。

特に、ユーザー端末によってリアルタイムで撮影された入力画像上に組み合わされたコンピュータ・グラフィック（CG）、テキストなどを含む補足情報を表示する拡張現実感（AR: augmented reality）のための方法を通じていくつかの情報形を提供する技術が最近導入された。拡張現実感技術によれば、該技術は、ユーザーが見る現実世界が表示される画面上で視覚的に互いに重なっていてもよい必要とされる情報を提供しうるので、ユーザーにとってのよりよい環境を提供しうる。

他方、上記の拡張現実感を使っていくつかの情報源が提供され、共有されるとき、実際には、ユーザー端末によって撮影されたまたは入力された画像上に含まれるすべてのオブジェクトについての情報を判別し、該情報を効果的に記憶することは難しい。たとえユーザーが比較的関心（または重要性）の高いオブジェクトについての情報だけを異なる仕方で記憶したいとしても、該情報を系統的に記録し、記憶することはきわめてわずらわしい。したがって、ユーザーのより積極的な参加を引き出すにはある程度の限界があることが確かである。

上記の問題のすべてを解決することが本発明の目的である。

事前設定画像に含まれる、素性、位置および時間のような情報を使うことによってオブジェクトの自動コメントを完成させ、前記オブジェクトに対応する画像サムネイルなどを含むデータを自動的に取得し、完成させ、表示し、これが系統的に記憶されることを簡単なボタン操作だけで許容することが本発明のもう一つの目的である。それにより、ユーザーのまわりの多数のオブジェクトについてのさまざまな情報を一つ一つ編集するというわずらわしい操作なしに、データが情報が便利かつ迅速に記憶されうる。

生成された画像に含まれるさまざまなオブジェクトについての収集された情報に基づいて、ユーザーが他のユーザーの収集についての情報を共有することを許容することが本発明のさらにもう一つの目的である。それによりそのユーザーは、そのユーザーの選好に適切な情報を与えられる。

下記は、上記目的を達成するための本発明の代表的な構成を記述する。

本発明のある側面によれば、生成された画像に含まれるオブジェクトの収集をサポートする方法であって、（ａ）オブジェクトの画像を動作させるよう端末が使用される段階と；（ｂ）ひとたび前記画像が生成されたら、前記画像に含まれるオブジェクトの収集を実行することをサポートするために、前記オブジェクトの素性についての認識情報、前記画像が生成された場所についての認識情報および前記画像が生成された時間についての認識情報のうち少なくとも一つが使用されて、前記オブジェクトについての自動コメントとしてある言語の文法のもとで正しい組み合わされた文を生成して端末の画面の第一の領域上で提供し、認識されたオブジェクトに対応するサムネイルが自動的に取得されて端末の画面の第二の領域上に表示される、段階と；（ｃ）ひとたび収集実行ボタン上の選択情報が入力されたら、前記オブジェクトについての収集を実行するよう、第一の領域および第二の領域上に提供されるデータが記憶スペースに提供されることが許容される段階とを含む方法が提供される。

本発明のもう一つの側面によれば、生成された画像に含まれるオブジェクトの収集をサポートするための端末であって、オブジェクトの画像を生成する画像撮影部と；ひとたび画像が生成されたら、画像に含まれるオブジェクトの収集を実行するためにサポートするために、前記オブジェクトの素性についての認識情報、前記画像が生成された場所についての認識情報および前記画像が生成された時間についての認識情報からの少なくとも一つが、前記オブジェクトについての自動コメントとしてある言語の文法のもとで正しい組み合わされた文を生成して画面の第一の領域上で提供するために、使用される、自動コメント生成部と；ひとたび画像が画像撮影部によって生成されたら、画像に含まれるオブジェクトの収集を実行するためにサポートするために、認識されたオブジェクトに対応するサムネイルを自動的に取得して画面の第二の領域上に表示する対応画像選択部と；ひとたび収集実行ボタン上の選択情報が入力されたら、オブジェクトについての収集を実行するよう、第一の領域および第二の領域上で提供されるべきデータが記憶スペース上に提供されることを許容する収集実行部とを有する端末が提供される。

加えて、本発明を実装するための別の方法およびシステムならびに前記方法を実行するためのコンピュータ・プログラムを記録するための他のコンピュータ可読記録媒体がさらに提供される。

本発明によれば、生成された画像に含まれるオブジェクトの素性、画像が生成された時間と場所などを含む情報が、適用可能な年代の文法に従った文の形で自動的に完成するために使用され、適用可能なオブジェクトに対応するサムネイル画像が自動的に表示される。それにより、ユーザーは、非常に簡単かつ効率的に、一つずつ編集するという面倒なしに、ユーザーによって所望されるオブジェクトについての収集を実行しうる。

加えて、本発明によれば、ユーザーは、自分のまわりに散乱している多数のオブジェクトについての収集を非常に簡単に実行しうる。より具体的には、自分のまわりに存在するオブジェクトについて写真撮影ボタンを押し、次いで収集登録ボタンを今一度押すことによって（つまり、たった二回のボタン選択によって）そのオブジェクトについての情報の収集を系統的に実行しうる。これは、オブジェクトについての情報の収集を系統的に実行することを可能にするために自動的に提供される自動コメントおよび自動画像に基づく。これは、ユーザーの積極的な参加につながる。

さらに、本発明によれば、特定のオブジェクトについての収集は非常に簡単に実行されることができるので、収集情報の爆発的な増大を通じて、多くのユーザーの間での関係情報がより正確に取得される。それにより、真のソーシャル・ネットワークが形成されうる。

本発明のある実施例に基づく端末の内部構成を例示的に表すブロック図である。 本発明のある実施例におけるオブジェクトに含まれる画像を取得するプロセスを記述する図である。 本発明のある実施例における自動コメントおよびサムネイル画像を表示するプロセスを記述する図である。 本発明のある実施例におけるオブジェクトについての収集を実行するプロセスを記述する図である。 本発明のある実施例における収集されたオブジェクトを管理するプロセスを記述する図である。 本発明のある実施例におけるオブジェクトの自動コメントを編集するプロセスを記述する図である。 本発明のある実施例におけるオブジェクトのサムネイルを編集するプロセスを記述する図である。

以下の本発明の詳細な記述では、付属の図面が参照される。図面は本発明が実施されうる例として個別的な実施例を示す。これらの実施例は、当業者が本発明を実施できるようにするのに十分な詳細さで記述される。本発明のさまざまな実施例は、異なる実施例ではあっても、必ずしも互いに排反ではないことを理解しておくものとする。たとえば、本稿においてある実施例との関連で記述される特定の特徴、構造または特性は、本発明の精神および範囲から外れることなく、他の実施例において実装されてもよい。加えて、開示される各実施例内での個々の要素の位置または配置は、本発明の精神および範囲から外れることなく修正されてもよいことは理解しておくものとする。したがって、以下の詳細な記述は、限定する意味で解釈されるものではなく、本発明の範囲は、適切に解釈される場合の付属の請求項および請求項が請求する等価物全体の範囲によってのみ定義される。図面においては、同様の参照符号は、各側面を通じて同じまたは同様の機能を指す。

下記は、本発明が属する技術分野における通常の知識を有する者が本発明を容易に実施できるよう、本発明の好ましい実施例を参照することによって本発明を詳細に記述する。

本明細書では、収集は、画像に含まれる、型、属性などを含むオブジェクトの素性についての情報および該当オブジェクトを含む画像を撮影する時間と場所についての情報のうちの少なくとも一つを使うことによって作られる自動コメントならびに該当オブジェクトに対応するサムネイルをデータとして収集し、記憶する一連のプロセスを指すものと定義されうる。たとえば、映画ポスターが入力画像に含まれる場合、該当ポスターを収集のターゲット・オブジェクトとして認識し、該ポスターに対応する映画についての情報（その梗概、監督および主演俳優・女優情報を含む）およびそのポスターを含む画像がデータとして撮影された時間と場所についての情報から、ある言語の文法のもとで正しい組み合わされた文についての情報を収集して記憶する一連のプロセスが、映画ポスターについての収集に該当する。

図１は、本発明のある実施例に基づく端末の内部構成を例示的に表すブロック図である。

図１に示されるように、本発明のある実施例に基づく端末（１００）は、画像撮影部（１１０）と、自動コメント生成部（１２０）と、対応画像選択部（１３０）と、収集実行部（１４０）と、通信部（１５０）と、データベース（１６０）と、制御部（１７０）とを含んでいてもよい。

画像撮影部（１１０）は、画像を生成するよう外部から入力された像を受けるカメラを含んでいてもよい。さらに、画像撮影部（１１０）は、画像に含まれる、収集のターゲットとなるべきオブジェクトがあるかどうかを判定してもよい。

収集のターゲットとなるべきオブジェクトが撮影された画像中に含まれていると判定される場合、自動コメント生成部（１２０）がそのオブジェクトについての情報を収集し、自動的に自動コメントを完成させる。実施例として、完成された自動コメントは、オブジェクトの型、名前、アプリケーションなどを含むオブジェクトの素性についての登録情報、そのオブジェクトをもつ画像が撮影された場所についての情報、撮影された時間についての認識情報などを含む。

さらに、収集のターゲットとなるべきオブジェクトが撮影された画像に含まれていると判定される場合、対応画像選択部（１３０）は、そのオブジェクトに対応するサムネイル画像を選択してもよい。そのための詳細な方法はのちに述べる。選択されたサムネイル画像は、自動コメント生成部（１２０）によって完成された自動コメントとともに、端末（１００）の画面上に自動的に表示されてもよい。

収集のターゲット・オブジェクトについて自動コメントおよびサムネイル画像が画面上で自動的に提供された状態で、ユーザーによって収集ボタンが押されたら、収集実行部（１４０）が、後述する自動コメントおよびサムネイル画像をデータベース（１６０）上に記憶することによって、オブジェクトの収集を完成させる。

他方、本発明のある実施例によれば、ソーシャル・ネットワーク・サービス（SNS）との関連で、特定のユーザーと、データベース（１６０）に記憶されているものと同じまたは同様であるオブジェクトを収集した他のユーザーとの間の関係についての情報を提供することも可能である。たとえば、収集されたオブジェクトの素性、該オブジェクトが属するカテゴリー、該オブジェクトが収集された場所、該オブジェクトが収集された時間などを参照することによって、特定のユーザーと同じまたは同様の選好をもつ他のユーザーについての情報を得て、前記特定のユーザーにこれを推薦するためのサービスを与えることが可能である。そのようなサービスを提供するために、端末（１００）はさらに、別個の人間関係推定部（図示せず）のようなモジュールが備えられていてもよい。

図２は、本発明のある実施例においてオブジェクトに含まれる画像を得るプロセスを記述するための図である。

図２を参照するに、画像撮影部（１１０）によって撮影される画像（２００）が端末（１００）の画面上に表示されている。図２に示されるように、収集のための画像を撮影するための機能を提供するアイコン（２２０）が表示されており、ユーザーがそのアイコン（２２０）を選択する場合、画面上に表示されている画像（２００）を撮影することが可能となる。

画像（２００）が撮影され、記憶される場合、画像撮影部（１１０）は、収集のターゲットとなるべきオブジェクト（２１０）が画像（２００）に含まれているか否かを判定する。オブジェクト（２１０）は、ユーザーによって直接選択させられても、あるいはオブジェクト認識技術、光学式文字認識技術またはバーコード認識技術によって画像（２００）内で自動的に選択されてもよい。ユーザーは、ユーザーが収集したいオブジェクト（２１０）を画像（２００）の中心近くに置きながら画像（２００）を撮影するのがしばしばであり、一般的なので、図２に示されるように、画像（２００）の中心のオブジェクト（２１０）が収集のターゲットであると認識されることを許容することが可能であってもよい。

他方、本実施例では、書籍がオブジェクト（２１０）、収集のターゲットとして認識される場合は、一実施例として記述されている。

図３は、本発明のある実施例における自動コメントおよびサムネイル画像を表示するプロセスを記述する図である。

図３を参照するに、収集のターゲットであるオブジェクト（２１０）のための収集をサポートするために、オブジェクト（２１０）の素性（すなわち、書籍の書名）についての認識情報、オブジェクト（２１０）を含む画像が生成された場所（すなわち、XX書店）についての認識情報および画像が生成された時間（すなわち、2010年10月20日）についての認識情報からの少なくとも一つを使って、ある言語の文法のもとで正しい組み合わされた文を、オブジェクト（２１０）についての自動コメントとして（すなわち、2010年10月20日の晩にxx書店にて『ジョブズのように夢見てゲイツのように実現せよ』を購入した）、自動的に生成し、画面（３００）の第一の領域（３２０）上に表示するとともに、認識されたオブジェクト（２１０）に対応するサムネイルを自動的に取得し、端末（３００）の第二の領域（３３０）上に表示してもよい。

この時点で、画面（３００）上の領域（３１０）には、オブジェクト、収集のターゲットを識別することを可能にするオブジェクトの素性についての認識情報の一つである書籍の書名（すなわち、ジョブズのように夢見てゲイツのように実現せよ）が、領域（３２０）の内容の一部に重複して表示されてもよい。それは、オブジェクトの素性についての認識情報を表示するための領域と考えられてもよい。それはまた、領域（３２０）とともに前記第一の領域としても扱われる。すなわち、前記第一の領域は、領域（３１０）および領域（３２０）に分離されて構成されていてもよい。

他方、第二の領域（３３０）上で与えられるサムネイルは、生成された画像から直接取得されてもよく、または生成された画像に含まれるオブジェクトに対応する事前記憶された画像から間接的に取得されてもよい。生成された画像に含まれるオブジェクトは、オブジェクト認識技術、光学式文字認識技術またはバーコード認識技術からの少なくとも一つを使って認識されたものである。

上記のように、画面（３００）の第一および第二の領域上に自動的に表示される書名（３１０）、自動コメント（３２０）、サムネイル（３３０）などを含む収集ページをデータベース（１６０）に記憶するためには、単に登録ボタン（３４０）が選択されるだけでよい。

他方、画像（２００）内の収集のターゲットとしてのオブジェクトが誤って選択されている場合、ユーザーは画面（３００）の上の取り消しボタンをタップして、前のページに戻ってもよい。

オブジェクトは正しく選択されたが、自動コメント（３２０）またはサムネイル（３３０）が誤って提供されているまたはコンテンツを追加する必要がある場合、ユーザーは、画面（３００）上で該当データが表示されている領域（単数または複数）を選択して、自動コメント（３２０）またはサムネイル（３３０）を編集してもよい。詳細な説明は図６および図７を参照して下記で与える。

図４は、本発明のある実施例における、オブジェクトについての収集を実行するプロセスを記述するための図である。

ユーザーが、画面（３００）上に表示される自動コメント（３２０）、サムネイル（３３０）などを含む収集ページのデータをチェックし、収集を実行するために登録ボタン（３４０）をタップする場合、ユーザーに収集ページのデータをデータベース（１６０）に記憶する過程を示すために、収集画像（３５０）が表示される。

記憶プロセスが完了したら、記憶プロセスが完了したことを知らせる表示（４００）が現れる。表示（４００）上で収集のためのターゲットとされるオブジェクトのサムネイル（３３０）に対応する画像（４２０）を表示することが可能である。上には、ユーザーに収集の完了を確認して別の画面に移ることを許容する変換ボタン（４１０）が表示される。

図５は、本発明のある実施例における収集されたオブジェクトを管理するプロセスを記述するための図である。

図５を参照するとき、特定のユーザーによって収集されたオブジェクトが、あたかも書籍（５４０）が本棚に表示されるかのように表示される「マイ・ルーム」、すなわち管理画面（５００）が示される。このとき、もし複数のユーザーがデータベース（１６０）にアクセス可能であれば、各ユーザーが収集したオブジェクトのデータを各ユーザーが管理しうる仮想空間が各ユーザーに割り当てられてもよい。効率性およびデータへのアクセスしやすさのため、収集された情報はさらに、分離され、各ユーザーによって管理されてもよい。

本棚に表示される各書籍（５４０）の画像は収集された各オブジェクトに対応する。収集された各オブジェクトが図２に示されるような書籍である場合、書籍（５４０）の画像はその書籍の実際のカバーであってもよく、オブジェクトが映画であれば、映画のポスターなどが利用されてもよい。本棚の形で表示される管理画面（５００）を見るために管理画面（５００）上のコレクション・ボタン（５１０）がタップされてもよいし、あるいは収集を完了したユーザーのプロファイル、そのコレクションについての詳細な情報などをチェックするためにプロファイル・ボタン（５２０）がタップされてもよい。

図５に示されるように、管理画面（５００）は、本（５４０）の形のアイコンで、または各収集オブジェクトの典型的な特性（オブジェクト名、収集が実行された位置、収集が実行された時間など）を表す文の形で各収集オブジェクトを表示してもよい。オブジェクトは、管理画面（５００）の下部のアイコンの形のボタン（５５０）または文の型のボタン（５６０）のいずれかをタップしたのちに選択されてもよいが、それに限定されるものではない。

図６は、本発明のある実施例におけるオブジェクトの自動コメントを編集するプロセスを記述するための図である。

図６を参照するとき、オブジェクトの自動コメント（６２０）およびサムネイル（６３０）のデータが新たに収集される画面（６００）が表示されている。画面（６００）の上には、収集のためのオブジェクトの型（または名前）および収集が実行された場所が代表的な情報（６１０）として表示されている。図３に示されたように、画面（６００）の下部には、収集ページを登録するための収集ボタン（６５０）が表示されている。

ユーザーが収集が実行された場所が、代表的な情報（６１０）に誤って入力されていると判定し、それを編集するために代表的な情報（６１０）における右側に表示される位置をタップする場合、図６の二番目の位置に示される位置編集画面（７００）が表示される。位置編集画面（７００）では、ユーザーが位置を直接入力しうる入力ボタン（７１０）、その位置のまわりの登録されたPOIのリストが候補として表示されるリスト・ボタン（７２０）および現在の位置が追加されうる現在位置情報（７３０）が表示される。

ユーザーが位置を直接入力するために入力ボタン（７１０）をタップする場合、画面上に文字を入力するためのキーパッドが表示されてもよい。他方、ユーザーがリスト・ボタン（７２０）上の特定の項目を選択してタップする場合、選択された項目が、新たな収集が実行された位置に適用される。

他方、ユーザーが現在位置を追加するために現在位置情報（７３０）をタップする場合、現在位置の名前、住所、電話番号などが入力されうる入力窓（７４０）と、現在位置が表示されるある種のスケールのマップ（７５０）とを出現させることが可能でありうる。ユーザーは、マップ（７５０）上でユーザーがどこに位置しているかをチェックしてもよく、次いで位置を編集する、または表示されるマップを参照することによってユーザーが入力窓（７４０）内に求める位置情報を自分の現在位置として入力するために、マップをドラッグしてもよい。

入力が完了したら、ユーザーによって編集された位置情報が画面（６００）の代表的情報（６１０）上に現れ、自動コメント（６２０）に含まれる、収集が実行された場所も修正され、次いで再び表示されてもよい。図３で上述したように、自動コメント（６２０）を直接編集するために、自動コメント（６２０）が表示される画面領域がタップされてもよいことは言うまでもない
図７は、本発明のある実施例におけるオブジェクトのサムネイルを編集するプロセスを解釈するための図である。

画面上に表示されるオブジェクトのサムネイル（７３０）が適切でないためユーザーがこれを編集しようと意図する場合、ユーザーはサムネイル（７３０）が表示されている画面領域またはその下部の編集ボタン（７４０）をタップする。ユーザーによるタップに際して、ユーザーがサムネイル（８３０）を修正することを許容する画像編集画面（８００）が表示される。

画像編集画面（８００）上では、ユーザーが収集のためのオブジェクトの型を選択するまたはオブジェクトの名前を直接入力するのに用いうるオブジェクト検索ボタン（８１０）が設けられる。ユーザーがオブジェクトの型を選択するまたは名前を直接入力し、次いでオブジェクト検索ボタン（８１０）をタップすると、ユーザーによって入力されたオブジェクトに対応する画像の画像リスト（８２０）が画面上でブラウズおよび表示されうる。

ユーザーが望むサムネイルが検索されたリスト（８２０）上に存在する場合、ユーザーは対応する画像をリスト（８２０）から選択してエントリーを作成してもよい。利用可能な検索結果がなければ、ユーザーがタグを直接入力するのを助けるタグ入力窓（８３０）が提供されてもよい。

次に、本発明のある実施例に基づく通信部（１５０）が、端末（１００）が外部装置と通信することを許容する機能を実行してもよい。

本発明のある実施例によれば、データベース（１６０）は、狭義のみならず、コンピュータ・ファイル・システムに基づくデータ・レコード等を含む広義でのデータベースの概念である。この側面から、一組の単純な操作処理ログがブラウズされ、その組からデータが抽出されるとしても、それは本発明でいうデータベースに含まれうることは理解しなければならない。図１に示したデータベース（１６０）は端末（１００）に含まれることによって画像中に含まれるオブジェクトの収集をサポートするために構成されるものの、データベース（１６０）は可能性としては、本発明を実装する当業者に必要性により、端末（１００）とは別個に構成されてもよい。

次に、本発明のある実施例に基づく制御部（１７０）が、画像撮影部（１１０）、自動コメント生成部（１２０）、対応画像選択部（１３０）、収集実行部（１４０）、通信部（１５０）およびデータベース（１６０）の間のデータ流れを制御する機能を実行する。換言すれば、本発明に基づく制御部（１７０）は、画像撮影部（１１０）、自動コメント生成部（１２０）、対応画像選択部（１３０）、収集実行部（１４０）、通信部（１５０）およびデータベース（１６０）にその特有の機能を実行させるよう、端末（１００）の構成要素の外部からの／外部へのまたは該構成要素の間でのデータの流れを制御する。

本発明に基づく上記の実施例は、多様なコンピュータ・コンポーネントを通じて実行されてもよく、コンピュータ可読記録媒体に記録されてもよいプログラム・コマンドの形で実装されることができる。コンピュータ可読媒体は、プログラム・コマンド、データ・ファイルおよびデータ構造を単独でまたは組み合わせにおいて含みうる。コンピュータ可読記録媒体に記録されたプログラム・コマンドは特に本発明のために設計および構成されていてもよいし、あるいはコンピュータ・ソフトウェアの分野の当業者に既知であり使用可能なものであってもよい。コンピュータ可読記録媒体の例は、ハードディスク、フロッピー（登録商標）ディスクおよび磁気テープのような磁気媒体、CD-ROMおよびDVDのような光学式媒体、フロプティカル・ディスクのような光磁気媒体およびROM、RAMおよびフラッシュ・メモリのような、プログラム・コマンドを記憶および実行するよう特に構成されたハードウェア・デバイスを含む。プログラム・コマンドは、コンパイラによって作られる機械語コードのみならず、コンピュータによって実行されるインタープリタなどによって使用できる高水準コードをも含む。前記ハードウェア・デバイスは、本発明に基づく動作を実行する一つまたは複数のソフトウェア・モジュールとして機能するよう構成されていてもよく、逆も同じである。

本発明についてこれまで個別的な構成要素および限定された実施例および図面といったある種の詳細により記述してきたが、それらは単に本発明の全体的な理解を促進するために与えられたのであって、本発明は上記の実施例によって限定されるものではない。かかる記述に基づいて、当業者は、さまざまな修正および変更を試みることができる。

したがって、本発明の発想は、記載されている実施例に限定されてはならず、別途記載される特許請求の範囲および該特許請求の範囲に等しいまたはこれと等価な変形を含むあらゆるものが本発明の発想の範疇に属する。

Claims (21)

1. 生成された画像に含まれるオブジェクトの収集をサポートする方法であって：
   （ａ）オブジェクトの画像を動作させるよう端末が使用される段階と；
   （ｂ）ひとたび前記画像が生成されたら、前記画像に含まれるオブジェクトの収集を実行することをサポートするために、前記オブジェクトの素性についての認識情報、前記画像が生成された場所についての認識情報および前記画像が生成された時間についての認識情報のうち少なくとも一つが使用されて、前記オブジェクトについての自動コメントとしてある言語の文法のもとで正しい組み合わされた文を生成して端末の画面の第一の領域上で提供し、認識されたオブジェクトに対応するサムネイルが自動的に取得されて端末の画面の第二の領域上に表示される、段階と；
   （ｃ）ひとたび収集実行ボタンの選択情報が入力されたら、前記オブジェクトについての収集を実行して収集ページを生成するよう、第一の領域および第二の領域上に提供されるデータが記憶スペースに提供されることが許容される段階とを含む、
   方法。
2. （ｄ）複数の端末から取得された収集情報が、同じまたは同様のオブジェクトを収集した該複数の端末のユーザー間の選好についての関係情報を取得するために使用される段階をさらに含む、請求項１記載の方法。
3. 前記第一の領域が、スペースにおいて分割された複数の領域を含む、請求項１記載の方法。
4. 前記第一の領域において提供される文が、提供される形で編集可能である、請求項１記載の方法。
5. 前記第二の領域に提供上されるサムネイルが、生成された画像から直接取得される、または生成された画像に含まれる認識されたオブジェクトに対応する事前記憶された画像から間接的に取得される、請求項１記載の方法。
6. 前記オブジェクトの素性についての認識情報が、オブジェクト認識技術、光学式文字認識技術またはバーコード認識技術のうちからの少なくとも一つを適用することによって取得される、請求項１記載の方法。
7. 収集された情報が、前記オブジェクトを収集するユーザーによって管理されうるよう記憶される、請求項１記載の方法。
8. ユーザーが収集された情報を管理することを許容するよう、各ユーザーに一意的な仮想空間が割り当てられる、請求項７記載の方法。
9. ある時間期間にわたってユーザーによるそれぞれの収集されたオブジェクトに関係する各画像が書籍の画像のようにされ、前記仮想空間を通じて本棚に陳列されているかのように表示される、請求項８記載の方法。
10. 前記第一の領域上に表示されている前記場所についての認識情報が不適切に選択されている場合、POIを直接選択するのをサポートするために、認識された場所のまわりのPOI関係情報が与えられる、あるいは現在位置を新たなPOIとして登録することをサポートするために、現在位置についての情報が提供される、請求項１記載の方法。
11. 生成された画像に含まれるオブジェクトの収集をサポートするための端末であって：
    オブジェクトの画像を生成する画像撮影部と；
    ひとたび画像が生成されたら、前記画像に含まれるオブジェクトの収集を実行するのをサポートするために、前記オブジェクトの素性についての認識情報、前記画像が生成された場所についての認識情報および前記画像が生成された時間についての認識情報からの少なくとも一つが、前記オブジェクトについての自動コメントとしてある言語の文法のもとで正しい組み合わされた文を生成して画面の第一の領域上で提供するために、使用される、自動コメント生成部と；
    ひとたび前記画像が前記画像撮影部によって生成されたら、前記画像に含まれるオブジェクトの収集を実行するのをサポートするために、認識されたオブジェクトに対応するサムネイルを自動的に取得して画面の第二の領域上に表示する対応画像選択部と；
    ひとたび収集実行ボタンの選択情報が入力されたら、前記オブジェクトについての収集を実行して収集ページを生成するよう、前記第一の領域および前記第二の領域上で提供されるべきデータが記憶スペース上に提供されることを許容する収集実行部とを有する、
    端末。
12. 複数の端末から取得された収集情報を、同じまたは同様のオブジェクトを収集する該複数の端末におけるユーザーの選好に関する関係についての情報を取得するために使用する人間関係推定部をさらに含む、請求項１１記載の端末。
13. 前記第一の領域が、スペースにおいて分割され、表示される複数の領域を含む、請求項１１記載の端末。
14. 前記自動コメント生成部が、前記提供される文が、前記第一の領域上で編集可能であることを許容するよう備えられる、請求項１１記載の端末。
15. 前記対応画像選択部が、前記第二の領域に提供上されるサムネイルを、生成された画像から直接取得する、または生成された画像に含まれるオブジェクトを認識する際に該オブジェクトに対応する事前記憶された画像から間接的に取得する、請求項１１記載の端末。
16. 前記自動コメント生成部が、前記オブジェクトの素性についての認識情報を、オブジェクト認識技術、光学式文字認識技術またはバーコード認識技術のうちからの少なくとも一つを前記画像に適用することによって取得する、請求項１１記載の端末。
17. 前記収集実行部が、収集された情報を、各ユーザーによって管理されうるよう記憶スペースに記憶する、請求項１１記載の端末。
18. 記憶スペースにおいて、収集された情報が各ユーザーによって管理されうるよう、一意的な仮想空間が割り当てられる、請求項１７記載の端末。
19. ある時間期間にわたってユーザーによるそれぞれの収集されたオブジェクトに関係する各画像が書籍の画像のようにされ、前記仮想空間を通じて本棚に陳列されているかのように表示される、請求項１８記載の端末。
20. 前記第一の領域上に表示されている前記場所についての認識情報が不適切である場合、POIを直接選択するのをサポートするために、認識された場所のまわりのPOI関係情報が与えられる、あるいは現在位置を新たなPOIとして登録することをサポートするために、現在位置についての情報が提供される、請求項１１記載の端末。
21. 請求項１ないし１０のうちいずれか一項記載の方法を実行するためのコンピュータ・プログラムが記録されているコンピュータ可読記録媒体。

Images