JP5402122B2 - Information processing apparatus having autofocus function, control method of information processing apparatus having autofocus function, etc. - Google Patents

Information processing apparatus having autofocus function, control method of information processing apparatus having autofocus function, etc. Download PDF

Info

Publication number
JP5402122B2
JP5402122B2 JP2009065399A JP2009065399A JP5402122B2 JP 5402122 B2 JP5402122 B2 JP 5402122B2 JP 2009065399 A JP2009065399 A JP 2009065399A JP 2009065399 A JP2009065399 A JP 2009065399A JP 5402122 B2 JP5402122 B2 JP 5402122B2
Authority
JP
Japan
Prior art keywords
information
focus
feature information
feature
priority determination
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2009065399A
Other languages
Japanese (ja)
Other versions
JP2010217613A (en
Inventor
祐介 田口
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
NEC Corp
Original Assignee
NEC Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by NEC Corp filed Critical NEC Corp
Priority to JP2009065399A priority Critical patent/JP5402122B2/en
Publication of JP2010217613A publication Critical patent/JP2010217613A/en
Application granted granted Critical
Publication of JP5402122B2 publication Critical patent/JP5402122B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Focusing (AREA)
  • Automatic Focus Adjustment (AREA)
  • Studio Devices (AREA)

Description

本発明は、オートフォーカス機能を有する情報処理装置、オートフォーカス機能を有する情報処理装置の制御方法及びオートフォーカス機能を有する情報処理装置の制御プログラムの技術分野に関する。   The present invention relates to an information processing apparatus having an autofocus function, a control method for an information processing apparatus having an autofocus function, and a control program for an information processing apparatus having an autofocus function.

近年、カメラが搭載された携帯電話が主流となっており、また、搭載されるカメラが高機能となってきたことから、オートフォーカス機能について注目されることが増えてきている。また最近では、複数の顔を検出しフォーカスを合わせる機能などもでてきている(例えば、特許文献1および特許文献2参照)。   In recent years, mobile phones equipped with cameras have become the mainstream, and since cameras equipped with them have become highly functional, attention has been focused on the autofocus function. Recently, a function of detecting a plurality of faces and adjusting the focus has been developed (for example, see Patent Document 1 and Patent Document 2).

特開2005−215040号公報JP-A-2005-2105040 特開2008−277903号公報JP 2008-277903 A

しかし、フォーカスを合わせる対象が複数あった場合、どこにフォーカスを優先的に合わせるかがあまり検討されていない状況である。   However, when there are a plurality of targets to be focused on, the situation where the focus is preferentially focused is not so much studied.

そこで、本発明は上記の課題に鑑みて為されたもので、その目的の一例は、カメラ付き携帯電話のオートフォーカス機能について、複数のフォーカス対象が存在した場合に、どの対象に優先的にフォーカスを当てるかを携帯電話に蓄積されている他の情報と連携することで、ユーザにとってより快適なオートフォーカス機能を提供するオートフォーカス機能を有する情報処理装置、オートフォーカス機能を有する情報処理装置の制御方法及びオートフォーカス機能を有する情報処理装置の制御プログラムを提供することにある。   Therefore, the present invention has been made in view of the above problems, and an example of the purpose thereof is to focus on which object has priority when there are a plurality of focus objects for the autofocus function of a camera-equipped mobile phone. Information processing apparatus having an autofocus function that provides a more comfortable autofocus function for a user by linking with other information stored in a mobile phone, and control of the information processing apparatus having an autofocus function A method and a control program for an information processing apparatus having an autofocus function are provided.

上記課題を解決するために、請求項1に記載の発明は、撮影機能を有する情報処理装置であって、撮像対象の中から選定されたフォーカス対象に対して自動的にレンズの焦点を合わせるオートフォーカス手段と、前記レンズを介して取得した撮像光に基づいて撮影情報を生成する撮影情報生成手段と、前記撮影情報を解析し、当該撮影情報を特徴付ける特徴情報を抽出する特徴情報抽出手段と、前記特徴情報抽出手段によって生成された前記特徴情報を記憶手段において検索し、前記特徴情報と同一の特徴情報が前記記憶手段において検出された場合であって、一回の撮影中に前記特徴情報の一つのみが前記記憶手段で検出された場合には当該特徴情報に対応する撮影対象にフォーカスするように、フォーカス優先度決定情報を決定し、一回の撮影中に前記特徴情報が前記記憶手段で複数検出された場合には前記特徴情報に対応する前記フォーカス優先度決定情報に基づいてフォーカス対象を決定するように、前記フォーカス優先度決定情報を決定するフォーカス優先度決定手段と、前記フォーカス優先度決定手段によって決定された前記フォーカス優先度決定情報に基づいて、撮影のフォーカス対象を決定するフォーカス対象決定手段と、前記撮像対象からの音声情報が入力される音声情報入力手段と、前記フォーカス対象となっている被写体に関連する情報に基づいて、前記撮像光による写真に付加する付加情報を決定し、当該付加情報を前記写真に付加する情報付加手段と、インターネット回線上にアップロードされた情報が入力されるインターネット情報入力手段と、を備え、前記フォーカス優先度決定手段は、前記撮影情報が前記撮影情報生成手段によって生成されるたびに前記ォーカス優先度決定情報を累積的に高く設定し、前記フォーカス優先度決定情報は当該撮影情報の前記特徴情報とともに前記記憶手段に記憶され、前記記憶手段には、前記情報処理装置を介して入力された情報であって、前記特徴情報抽出手段によって当該情報から抽出された前記特徴情報が記憶され、前記特徴情報抽出手段は、前記音声情報から前記特徴情報を抽出し、前記フォーカス優先度決定手段は前記特徴情報に対応する前記音声情報が入力されるたびに当該特徴情報の前記フォーカス優先度決定情報を累積的に高く設定し、前記フォーカス優先度決定情報は当該撮影情報の前記特徴情報とともに前記記憶手段に記憶され、前記特徴情報抽出手段は、前記インターネット回線上にアップロードされた前記情報から前記特徴情報を抽出し、前記フォーカス優先度決定手段は、前記特徴情報に対応するアップロードされた前記情報が検索されるたびに、当該特徴情報の前記フォーカス優先度決定情報を累積的に高く設定し、前記フォーカス優先度決定情報は当該撮影情報の前記特徴情報とともに前記記憶手段に記憶され、前記情報付加手段は、前記フォーカス対象となっている被写体の中に、前記アップロードされた情報の検索に基づき判定されるユーザの趣味に対応する被写体がある場合、前記撮像光による写真に付加する付加情報として、当該ユーザの趣味に対応する被写体を際立たせる当該付加情報を決定し、当該付加情報を前記写真に付加することを特徴とする In order to solve the above-described problem, an invention according to claim 1 is an information processing apparatus having a photographing function, wherein the lens is automatically focused on a focus target selected from among the imaging targets. A focusing unit; a shooting information generation unit that generates shooting information based on imaging light acquired through the lens; a feature information extraction unit that analyzes the shooting information and extracts feature information that characterizes the shooting information; The feature information generated by the feature information extraction unit is searched in the storage unit, and the same feature information as the feature information is detected in the storage unit. When only one is detected by the storage means, the focus priority determination information is determined so as to focus on the imaging target corresponding to the feature information, and once The focus priority determination information is determined so that a focus target is determined based on the focus priority determination information corresponding to the feature information when a plurality of the feature information is detected by the storage unit during shooting. Based on the focus priority determination means, the focus priority determination information determined by the focus priority determination means, focus target determination means for determining a focus target for shooting, and audio information from the imaging target is input. Audio information input means, and information addition means for determining additional information to be added to the photograph by the imaging light based on information relating to the subject to be focused, and adding the additional information to the photograph , Bei and Internet information input means that information that has been uploaded on the Internet line is input, the , The focus priority determining means, said each time the photographing information is generated by the photographing information generation unit, the full Okasu priority determination information set cumulatively increased, the focus priority determining information corresponding photographic information The feature information is stored in the storage means, and the feature information extracted from the information by the feature information extraction means is stored in the storage means. is, the feature information extracting means, wherein the extracting the feature information from the voice information, the focus priority determining means, each time said voice information corresponding to the characteristic information is input, the focus of the feature information Priority determination information is set cumulatively high, and the focus priority determination information is stored in the storage unit together with the feature information of the shooting information. The feature information extraction unit extracts the feature information from the information uploaded on the Internet line, and the focus priority determination unit searches for the uploaded information corresponding to the feature information. Each time, the focus priority determination information of the feature information is set cumulatively high, the focus priority determination information is stored in the storage unit together with the feature information of the shooting information, and the information addition unit is When there is a subject corresponding to the user's hobby determined based on the retrieval of the uploaded information among the subjects to be focused, the user's hobby is added as additional information to be added to the photograph by the imaging light. the subject corresponding determines accentuate the additional information, especially the adding the additional information to the photo And

このようにして、請求項1に係る発明によれば、カメラ付き携帯電話のオートフォーカス機能について、複数のフォーカス対象が存在した場合に、どの対象に優先的にフォーカスを当てるかを携帯電話に蓄積されている他の情報と連携することで、ユーザにとってよ
り快適なオートフォーカス機能を提供することが可能になる。このようにして、請求項1に係る発明によれば、ユーザが撮影対象を撮影するたびにその撮対象に係わる撮影情報が生成されるので、撮影情報が生成されるたびに、撮影情報に対応するフォーカス優先度情報の優先度を高くする。この構成によれば、複数の(他の)撮影対象が一回の撮影の画面の中に含まれている場合でも、ユーザが好んで撮影している撮影対象(被写体)に対して、フォーカスが優先的に自動で合うことが可能になる。この構成によれば、携帯電話の機能である電話帳(個人情報)や登録できる様々なデータ、認識できる物体や顔(笑顔)などを抽出し、それらに優先的にフォーカスをあてることで複数のオートフォーカス対象に対してユーザがスムーズに撮影を行うことができる。また、携帯電話を使用することで蓄積されたユーザの趣味や嗜好を判別し、興味が深い物体などに自動的にフォーカスを当てることも可能である。この構成によれば、ユーザが携帯電話機等の情報処理装置に入力された音声情報から特徴情報が抽出され、同一の音声情報が入力されるたびに、音声情報の特徴情報に対応するフォーカス優先度情報が高く設定される。したがって、撮影対象中から音声情報が情報処理装置に入力されれば、被写体中のユーザの趣味や嗜好に合致さすると推定される物体が速やかに判別されて、自動的にフォーカスが当てられることが可能である。この構成によれば、ユーザが携帯電話機等の情報処理装置に入力されたインターネット上のウェブ情報等の情報から特徴情報が抽出され、インターネット上のウェブ情報等の情報をユーザが検索または選択するたびに、そのインターネット上のウェブ情報等の特徴情報に対応するフォーカス優先度情報が高く設定される。したがって、撮影情報中の特徴情報が過去のユーザのインターネット検索履歴の特徴情報と一致すれば、被写体中のユーザの趣味や嗜好に合致さすると推定される物体(ユーザのインターネット検索履歴の特徴情報と一致する物体)が速やかに判別されて、自動的にフォーカスが当てられることが可能である。
Thus, according to the first aspect of the present invention, when there are a plurality of focus targets for the auto-focus function of the camera-equipped mobile phone, which target is to be focused preferentially is stored in the mobile phone. By coordinating with other information, it is possible to provide an autofocus function that is more comfortable for the user. Thus, according to the first aspect of the present invention, the shooting information related to the shooting target is generated every time the user captures the shooting target, so that the shooting information is generated each time the shooting information is generated. Increase the priority of focus priority information. According to this configuration, even when a plurality of (other) shooting targets are included in a single shooting screen, the focus is set on the shooting target (subject) that the user likes to shoot. It becomes possible to automatically match with priority. According to this configuration, a telephone directory (personal information) that is a function of a mobile phone, various data that can be registered, an object that can be recognized, a face (smile), and the like are extracted, and a plurality of objects are obtained by preferentially focusing on them. The user can smoothly shoot an autofocus target. It is also possible to discriminate the user's hobbies and preferences accumulated by using a mobile phone, and to automatically focus on objects that are of great interest. According to this configuration, when the feature information is extracted from the voice information input to the information processing apparatus such as the mobile phone by the user, and the same voice information is input, the focus priority corresponding to the feature information of the voice information Information is set high. Therefore, if audio information is input to the information processing apparatus from the subject to be photographed, an object that is estimated to match the user's hobbies and preferences in the subject can be quickly identified and automatically focused. Is possible. According to this configuration, feature information is extracted from information such as web information on the Internet input to an information processing apparatus such as a mobile phone, and whenever the user searches or selects information such as web information on the Internet. In addition, focus priority information corresponding to feature information such as web information on the Internet is set high. Therefore, if the feature information in the shooting information matches the feature information of the Internet search history of the past user, the object (the feature information of the user's Internet search history and the object estimated to match the user's hobbies and preferences in the subject) The matching object) can be quickly determined and automatically focused.

上記課題を解決するために、請求項に記載の発明は、撮影機能を有する情報処理装置であって、撮像対象の中から選定されたフォーカス対象に対して自動的にレンズの焦点を合わせるオートフォーカス手段と、前記レンズを介して取得した撮像光に基づいて撮影情報を生成する撮影情報生成手段と、前記撮影情報を解析し、当該撮影情報を特徴付ける特徴情報を抽出する特徴情報抽出手段と、前記特徴情報抽出手段によって生成された前記特徴情報を記憶手段において検索し、前記特徴情報と同一の特徴情報が前記記憶手段において検出された場合であって、一回の撮影中に前記特徴情報の一つのみが前記記憶手段で検出された場合には当該特徴情報に対応する撮影対象にフォーカスするように、フォーカス優先度決定情報を決定し、一回の撮影中に前記特徴情報が前記記憶手段で複数検出された場合には前記特徴情報に対応する前記フォーカス優先度決定情報に基づいてフォーカス対象を決定するように、前記フォーカス優先度決定情報を決定するフォーカス優先度決定手段と、前記フォーカス優先度決定手段によって決定された前記フォーカス優先度決定情報に基づいて、撮影のフォーカス対象を決定するフォーカス対象決定手段と、前記撮像対象からの音声情報が入力される音声情報入力手段と、前記フォーカス対象となっている被写体に関連する情報に基づいて、前記撮像光による写真に付加する付加情報を決定し、当該付加情報を前記写真に付加する情報付加手段と、電話帳データとして登録するデータ情報が入力される電話帳データ情報入力手段と、を備え、前記フォーカス優先度決定手段は、前記撮影情報が前記撮影情報生成手段によって生成されるたびに前記ォーカス優先度決定情報を累積的に高く設定し、前記フォーカス優先度決定情報は当該撮影情報の前記特徴情報とともに前記記憶手段に記憶され、前記記憶手段には、前記情報処理装置を介して入力された情報であって、前記特徴情報抽出手段によって当該情報から抽出された前記特徴情報が記憶され、前記特徴情報抽出手段は、前記音声情報から前記特徴情報を抽出し、前記フォーカス優先度決定手段は前記特徴情報に対応する前記音声情報が入力されるたびに当該特徴情報の前記フォーカス優先度決定情報を累積的に高く設定し、前記フォーカス優先度決定情報は当該撮影情報の前記特徴情報とともに前記記憶手段に記憶され、前記特徴情報抽出手段は、前記電話帳データとして登録するデータ情報から前記特徴情報を抽出し、前記フォーカス優先度決定手段は、前記特徴情報に対応する前記電話帳データとして登録するデータ情報が前記情報処理装置において検索されるたびに、当該特徴情報の前記フォーカス優先度決定情報を累積的に高く設定し、前記フォーカス優先度決定情報は当該撮影情報の前記特徴情報とともに前記記憶手段に記憶され、前記情報付加手段は、前記フォーカス対象となっている被写体が人物の場合、前記電話帳データを参照して当該人物の誕生日であるとき、前記付加情報として誕生日フレームを付加することを特徴とする。 In order to solve the above-mentioned problem, an invention according to claim 2 is an information processing apparatus having a photographing function, wherein the lens is automatically focused on a focus target selected from among the imaging targets. A focusing unit; a shooting information generation unit that generates shooting information based on imaging light acquired through the lens; a feature information extraction unit that analyzes the shooting information and extracts feature information that characterizes the shooting information; The feature information generated by the feature information extraction unit is searched in the storage unit, and the same feature information as the feature information is detected in the storage unit. When only one is detected by the storage means, the focus priority determination information is determined so as to focus on the imaging target corresponding to the feature information, and once The focus priority determination information is determined so that a focus target is determined based on the focus priority determination information corresponding to the feature information when a plurality of the feature information is detected by the storage unit during shooting. Based on the focus priority determination means, the focus priority determination information determined by the focus priority determination means, focus target determination means for determining a focus target for shooting, and audio information from the imaging target is input. Audio information input means, and information addition means for determining additional information to be added to the photograph by the imaging light based on information relating to the subject to be focused, and adding the additional information to the photograph , and a telephone directory data information input means for data information to be registered as the telephone directory data is entered, the full Carcass priority determining means, every time said imaging information is generated by the photographing information generation unit, the full Okasu priority determination information set cumulatively increased, the focus priority determining information above the shooting information The feature information is stored in the storage means, and the feature information extracted from the information by the feature information extraction means is stored in the storage means. the feature information extracting means, wherein the extracting the feature information from the voice information, the focus priority determining means, each time said voice information corresponding to the characteristic information is input, the focus priority of the feature information the determination information set cumulatively increased, the focus priority determination information is stored together with the feature information of the captured information in the storage means, wherein The feature information extraction unit extracts the feature information from the data information registered as the phone book data, and the focus priority determination unit determines that the data information registered as the phone book data corresponding to the feature information is the information processing Each time the device is searched, the focus priority determination information of the feature information is set cumulatively high, and the focus priority determination information is stored in the storage unit together with the feature information of the shooting information, and the information adding means, said when the subject that is the focusing target is a person, when the birth date of the person by referring to the telephone directory data, characterized that you added birthday frame as the additional information .

この構成によれば、ユーザが携帯電話機等の情報処理装置に入力された電話帳データとして登録されるべきデータ情報から特徴情報が抽出され、携帯電話機等の電話帳データをユーザが検索または選択するたびに、その電話帳データとして登録されるべきデータ情報の特徴情報に対応するフォーカス優先度情報が高く設定される。したがって、撮影情報中の特徴情報がユーザの電話帳データ中の情報の特徴情報と一致すれば、被写体中のユーザの趣味や嗜好に合致さすると推定される物体(電話帳データ中の情報と一致する人物)が速やかに判別されて、自動的にフォーカスが当てられることが可能である。   According to this configuration, feature information is extracted from data information to be registered as phone book data input to an information processing apparatus such as a mobile phone, and the user searches or selects phone book data such as a mobile phone. Every time, the focus priority information corresponding to the feature information of the data information to be registered as the phone book data is set high. Therefore, if the feature information in the shooting information matches the feature information of the information in the user's phone book data, the object that is estimated to match the user's hobbies and preferences in the subject (matches the information in the phone book data) Person) can be quickly identified and focused automatically.

上記課題を解決するために、請求項に記載の発明は、撮影機能を有する情報処理装置の制御方法であって、撮像対象の中から選定されたフォーカス対象に対して自動的にレンズの焦点を合わせるオートフォーカス工程と、前記レンズを介して取得した撮像光に基づいて撮影情報を生成する撮影情報生成工程と、前記撮影情報を解析し、当該撮影情報を特徴付ける特徴情報を抽出する特徴情報抽出工程と、前記特徴情報抽出工程において生成された前記特徴情報を記憶手段において検索し、前記特徴情報と同一の特徴情報が前記記憶手段において検出された場合であって、一回の撮影中に前記特徴情報の一つのみが前記記憶手段において検出された場合には当該特徴情報に対応する撮影対象にフォーカスするように、フォーカス優先度決定情報を決定し、一回の撮影中に前記特徴情報が前記記憶工程において複数検出された場合には前記特徴情報に対応する前記フォーカス優先度決定情報に基づいてフォーカス対象を決定するように、前記フォーカス優先度決定情報を決定するフォーカス優先度決定工程と、前記フォーカス優先度決定工程において決定された前記フォーカス優先度決定情報に基づいて、撮影のフォーカス対象を決定するフォーカス対象決定工程と、前記撮像対象からの音声情報が入力される音声情報入力工程と、前記フォーカス対象となっている被写体に関連する情報に基づいて、前記撮像光による写真に付加する付加情報を決定し、当該付加情報を前記写真に付加する情報付加工程と、インターネット回線上にアップロードされた情報が入力されるインターネット情報入力工程と、を備え、前記フォーカス優先度決定工程において、前記撮影情報が前記撮影情報生成工程によって生成されるたびに前記ォーカス優先度決定情報を累積的に高く設定し、前記フォーカス優先度決定情報は当該撮影情報の前記特徴情報とともに前記記憶手段に記憶され、前記記憶手段には、前記情報処理装置を介して入力された情報であって、前記特徴情報抽出工程によって当該情報から抽出された前記特徴情報が記憶され、前記特徴情報抽出工程において、前記音声情報から前記特徴情報を抽出し、前記フォーカス優先度決定工程において前記特徴情報に対応する前記音声情報が入力されるたびに当該特徴情報の前記フォーカス優先度決定情報を累積的に高く設定し、前記フォーカス優先度決定情報は当該撮影情報の前記特徴情報とともに前記記憶手段に記憶され、前記特徴情報抽出行程において、前記インターネット回線上にアップロードされた前記情報から前記特徴情報を抽出し、前記フォーカス優先度決定工程において、前記特徴情報に対応するアップロードされた前記情報が検索されるたびに、当該特徴情報の前記フォーカス優先度決定情報を累積的に高く設定し、前記フォーカス優先度決定情報は当該撮影情報の前記特徴情報とともに前記記憶手段に記憶され、前記情報付加工程において、前記フォーカス対象となっている被写体の中に、前記アップロードされた情報の検索に基づき判定されるユーザの趣味に対応する被写体がある場合、前記撮像光による写真に付加する付加情報として、当該ユーザの趣味に対応する被写体を際立たせる当該付加情報を決定し、当該付加情報を前記写真に付加することを特徴とする。 In order to solve the above-described problem, an invention according to claim 3 is a method for controlling an information processing apparatus having a photographing function, wherein the focal point of a lens is automatically set with respect to a focus target selected from among the imaging targets. Auto-focusing process for matching, imaging information generating process for generating imaging information based on imaging light acquired through the lens, and feature information extraction for analyzing the imaging information and extracting characteristic information characterizing the imaging information And the feature information generated in the feature information extraction step is searched in the storage means, and the same feature information as the feature information is detected in the storage means, When only one of the feature information is detected in the storage unit, the focus priority determination information is set so that the photographing object corresponding to the feature information is focused. The focus target is determined based on the focus priority determination information corresponding to the feature information when a plurality of the feature information is detected in the storage step during one shooting. A focus priority determination step for determining priority determination information, a focus target determination step for determining a focus target for shooting based on the focus priority determination information determined in the focus priority determination step, and the imaging target Based on the audio information input step in which audio information is input from and information related to the subject that is the focus target, additional information to be added to the photograph by the imaging light is determined, and the additional information is determined as the photograph Internet where the information adding step of adding, the information uploaded on the Internet line is input to the Includes an information input step, and in the focus priority determination step, each time the photographing information is generated by the imaging information generating step, set high the full Okasu priority determining information cumulatively, the focus priority The degree determination information is stored in the storage unit together with the feature information of the photographing information, and is input to the storage unit via the information processing apparatus, and is extracted from the information by the feature information extraction step. The feature information is stored, the feature information is extracted from the voice information in the feature information extraction step, and the voice information corresponding to the feature information is input in the focus priority determination step , The focus priority determination information of the feature information is set cumulatively high, and the focus priority determination information is The feature information is stored in the storage unit together with the feature information, and the feature information is extracted from the information uploaded on the Internet line in the feature information extraction process, and the focus priority determination step corresponds to the feature information. Each time the uploaded information is searched, the focus priority determination information of the feature information is set cumulatively high, and the focus priority determination information is stored in the storage unit together with the feature information of the shooting information. In the information adding step, if there is a subject corresponding to the user's hobby determined based on the retrieval of the uploaded information among the subjects to be focused, the subject is added to the photograph by the imaging light. As additional information to be used, the additional information that highlights the subject corresponding to the user's hobby Determining the information, it characterized that you added to the additional information to the photograph.

このようにして、請求項7に係る発明によれば、カメラ付き携帯電話のオートフォーカス機能について、複数のフォーカス対象が存在した場合に、どの対象に優先的にフォーカスを当てるかを携帯電話に蓄積されている他の情報と連携することで、ユーザにとってより快適なオートフォーカス機能を提供することが可能になる。   In this way, according to the invention of claim 7, with respect to the autofocus function of the camera-equipped mobile phone, when there are a plurality of focus targets, which target is focused preferentially is stored in the mobile phone. By coordinating with other information, it is possible to provide an autofocus function that is more comfortable for the user.

上記課題を解決するために、請求項に記載の発明は、撮影機能を有する情報処理装置の制御プログラムにおいて、コンピュータを、撮像対象の中から選定されたフォーカス対象に対して自動的にレンズの焦点を合わせるオートフォーカス手段、前記レンズを介して取得した撮像光に基づいて撮影情報を生成する撮影情報生成手段、前記撮影情報を解析し、当該撮影情報を特徴付ける特徴情報を抽出する特徴情報抽出手段、前記特徴情報抽出手段によって生成された前記特徴情報を記憶手段において検索し、前記特徴情報と同一の特徴情報が前記記憶手段において検出された場合であって、一回の撮影中に前記特徴情報の一つのみが前記記憶手段で検出された場合には当該特徴情報に対応する撮影対象にフォーカスするように、フォーカス優先度決定情報を決定し、一回の撮影中に前記特徴情報が前記記憶手段で複数検出された場合には前記特徴情報に対応する前記フォーカス優先度決定情報に基づいてフォーカス対象を決定するように、前記フォーカス優先度決定情報を決定するフォーカス優先度決定手段、前記フォーカス優先度決定手段によって決定された前記フォーカス優先度決定情報に基づいて、撮影のフォーカス対象を決定するフォーカス対象決定手段、前記撮像対象からの音声情報が入力される音声情報入力手段、前記フォーカス対象となっている被写体に関連する情報に基づいて、前記撮像光による写真に付加する付加情報を決定し、当該付加情報を前記写真に付加する情報付加手段、および、インターネット回線上にアップロードされた情報が入力されるインターネット情報入力手段として機能させ、前記フォーカス優先度決定手段は、前記撮影情報が前記撮影情報生成手段によって生成されるたびに前記ォーカス優先度決定情報を累積的に高く設定し、前記フォーカス優先度決定情報は当該撮影情報の前記特徴情報とともに前記記憶手段に記憶され、前記記憶手段には、前記情報処理装置を介して入力された情報であって、前記特徴情報抽出手段によって当該情報から抽出された前記特徴情報が記憶され、前記特徴情報抽出手段は、前記音声情報から前記特徴情報を抽出し、前記フォーカス優先度決定手段は前記特徴情報に対応する前記音声情報が入力されるたびに当該特徴情報の前記フォーカス優先度決定情報を累積的に高く設定し、前記フォーカス優先度決定情報は当該撮影情報の前記特徴情報とともに前記記憶手段に記憶され、前記特徴情報抽出手段は、前記インターネット回線上にアップロードされた前記情報から前記特徴情報を抽出し、前記フォーカス優先度決定手段は、前記特徴情報に対応するアップロードされた前記情報が検索されるたびに、当該特徴情報の前記フォーカス優先度決定情報を累積的に高く設定し、前記フォーカス優先度決定情報は当該撮影情報の前記特徴情報とともに前記記憶手段に記憶され、前記情報付加手段は、前記フォーカス対象となっている被写体の中に、前記アップロードされた情報の検索に基づき判定されるユーザの趣味に対応する被写体がある場合、前記撮像光による写真に付加する付加情報として、当該ユーザの趣味に対応する被写体を際立たせる当該付加情報を決定し、当該付加情報を前記写真に付加することを特徴とする。 In order to solve the above-described problems, according to a fourth aspect of the present invention, in a control program for an information processing apparatus having a photographing function, a computer automatically controls a lens with respect to a focus target selected from among imaging targets. Autofocus means for focusing, shooting information generation means for generating shooting information based on imaging light acquired through the lens, and feature information extraction means for analyzing the shooting information and extracting characteristic information characterizing the shooting information The feature information generated by the feature information extraction means is searched in the storage means, and the same feature information as the feature information is detected in the storage means, and the feature information is taken during one shooting. When only one of the two is detected by the storage means, the focus superiority is set so that the photographing object corresponding to the feature information is focused. The degree determination information is determined, and when a plurality of pieces of feature information are detected by the storage unit during one shooting, a focus target is determined based on the focus priority determination information corresponding to the feature information. A focus priority determination unit that determines the focus priority determination information, a focus target determination unit that determines a focus target for shooting based on the focus priority determination information determined by the focus priority determination unit, and the imaging Audio information input means for inputting audio information from a target; additional information to be added to the photograph by the imaging light is determined based on information related to the subject that is the focus target; information adding means for adding to, and, inter information uploaded on the Internet line is input Tsu to function as preparative information input means, the focus priority determining means, every time said imaging information is generated by the imaging information generating means, is set high the full Okasu priority determining information cumulatively, the focus The priority determination information is stored in the storage unit together with the feature information of the shooting information, and is input to the storage unit via the information processing apparatus, and is obtained from the information by the feature information extraction unit. The extracted feature information is stored, the feature information extracting means extracts the feature information from the voice information, and the focus priority determining means is input each time the voice information corresponding to the feature information is input. , The focus priority determination information of the feature information is set cumulatively high, and the focus priority determination information is set to the feature information of the shooting information. Stored in the storage means together with the information , the feature information extracting means extracts the feature information from the information uploaded on the Internet line, and the focus priority determining means is uploaded corresponding to the feature information. Each time the information is retrieved, the focus priority determination information of the feature information is set cumulatively high, and the focus priority determination information is stored in the storage unit together with the feature information of the shooting information, The information adding means adds to the photograph by the imaging light when there is a subject corresponding to the user's hobby determined based on the search of the uploaded information among the subjects to be focused. As the information, the additional information that makes the subject corresponding to the user's hobby stand out is determined, and the additional information is determined. It characterized that you added to the photograph.

上記課題を解決するために、請求項に記載の発明は、請求項に記載の情報処理装置の制御プログラムがコンピュータに読み取り可能に記録されていることを特徴とする記録媒体である。 In order to solve the above-described problems, the invention described in claim 5 is a recording medium in which the control program for the information processing apparatus described in claim 4 is recorded in a computer-readable manner.

本発明によれば、カメラ付き携帯電話のオートフォーカス機能について、複数のフォーカス対象が存在した場合に、どの対象に優先的にフォーカスを当てるかを携帯電話に蓄積されている他の情報と連携することで、ユーザにとってより快適なオートフォーカス機能を提供することが可能になる。   According to the present invention, when there are a plurality of focus targets for the autofocus function of a camera-equipped mobile phone, which target is to be focused preferentially is linked with other information stored in the mobile phone. This makes it possible to provide an autofocus function that is more comfortable for the user.

また、ユーザが撮影対象を撮影するたびにその撮対象に係わる撮影情報が生成されるので、撮影情報が生成されるたびに、撮影情報に対応するフォーカス優先度情報の優先度を高く設定することが可能になる。   Further, since shooting information related to the shooting target is generated every time the user captures the shooting target, the priority of the focus priority information corresponding to the shooting information can be set high every time shooting information is generated. It becomes possible.

また、複数の(他の)撮影対象が一回の撮影の画面の中に含まれている場合でも、ユーザが好んで撮影している撮影対象(被写体)に対して、フォーカスが優先的に自動で合うことが可能になる。   In addition, even when multiple (other) shooting targets are included in a single shooting screen, the focus is automatically prioritized for the shooting target (subject) that the user likes to shoot. It becomes possible to fit in.

また、携帯電話の機能である電話帳(個人情報)や登録できる様々なデータ、認識できる物体や顔(笑顔)などを抽出し、それらに優先的にフォーカスをあてることで複数のオートフォーカス対象に対してユーザがスムーズに撮影を行うことができる。また、携帯電話を使用することで蓄積されたユーザの趣味や嗜好を判別し、興味が深い物体などに自動的にフォーカスを当てることも可能である。   In addition, the phone book (personal information), which is a function of mobile phones, various data that can be registered, objects that can be recognized, faces (smiles), etc. are extracted and given priority to multiple autofocus targets. On the other hand, the user can perform shooting smoothly. It is also possible to discriminate the user's hobbies and preferences accumulated by using a mobile phone, and to automatically focus on objects that are of great interest.

また、ユーザが携帯電話機等の情報処理装置に入力された音声情報から特徴情報が抽出され、同一の音声情報が入力されるたびに、音声情報の特徴情報に対応するフォーカス優先度情報が高く設定される。したがって、撮影対象中から音声情報が情報処理装置に入力されれば、被写体中のユーザの趣味や嗜好に合致さすると推定される物体が速やかに判別されて、自動的にフォーカスが当てられることが可能である。   In addition, when the user extracts feature information from the voice information input to the information processing apparatus such as a mobile phone and the same voice information is input, the focus priority information corresponding to the feature information of the voice information is set higher. Is done. Therefore, if audio information is input to the information processing apparatus from the subject to be photographed, an object that is estimated to match the user's hobbies and preferences in the subject can be quickly identified and automatically focused. Is possible.

また、ユーザが携帯電話機等の情報処理装置に入力されたインターネット上のウェブ情報等の情報から特徴情報が抽出され、インターネット上のウェブ情報等の情報をユーザが検索または選択するたびに、そのインターネット上のウェブ情報等の特徴情報に対応するフォーカス優先度情報が高く設定される。したがって、撮影情報中の特徴情報が過去のユーザのインターネット検索履歴の特徴情報と一致すれば、被写体中のユーザの趣味や嗜好に合致さすると推定される物体(ユーザのインターネット検索履歴の特徴情報と一致する物体)が速やかに判別されて、自動的にフォーカスが当てられることが可能である。   In addition, feature information is extracted from information such as web information on the Internet input to an information processing apparatus such as a mobile phone, and whenever the user searches for or selects information such as web information on the Internet, the Internet Focus priority information corresponding to feature information such as the above web information is set high. Therefore, if the feature information in the shooting information matches the feature information of the Internet search history of the past user, the object (the feature information of the user's Internet search history and the object estimated to match the user's hobbies and preferences in the subject) The matching object) can be quickly determined and automatically focused.

また、ユーザが携帯電話機等の情報処理装置に入力された電話帳データとして登録されるべきデータ情報から特徴情報が抽出され、携帯電話機等の電話帳データをユーザが検索または選択するたびに、その電話帳データとして登録されるべきデータ情報の特徴情報に対応するフォーカス優先度情報が高く設定される。したがって、撮影情報中の特徴情報がユーザの電話帳データ中の情報の特徴情報と一致すれば、被写体中のユーザの趣味や嗜好に合致さすると推定される物体(電話帳データ中の情報と一致する人物)が速やかに判別されて、自動的にフォーカスが当てられることが可能である。   In addition, feature information is extracted from data information to be registered as phone book data input to an information processing apparatus such as a mobile phone, and whenever the user searches or selects phone book data such as a mobile phone, Focus priority information corresponding to feature information of data information to be registered as telephone directory data is set high. Therefore, if the feature information in the shooting information matches the feature information of the information in the user's phone book data, the object that is estimated to match the user's hobbies and preferences in the subject (matches the information in the phone book data) Person) can be quickly identified and focused automatically.

本実施形態におけるシステム構成の一例を示す図である。It is a figure which shows an example of the system configuration | structure in this embodiment. 本実施形態における情報処理装置のブロック図の一例である。It is an example of the block diagram of the information processing apparatus in this embodiment. 本実施形態における情報処理装置のブロック図の一例である。It is an example of the block diagram of the information processing apparatus in this embodiment. 本実施形態における情報処理装置の機能ブロック図の一例である。It is an example of the functional block diagram of the information processing apparatus in this embodiment. 本実施形態における動作を説明するフローチャートの一例である。It is an example of the flowchart explaining the operation | movement in this embodiment. 本実施形態における概念を説明する図の一例である。It is an example of the figure explaining the concept in this embodiment. 本実施形態における概念を説明する図の一例である。It is an example of the figure explaining the concept in this embodiment.

以下、本発明の最良の実施形態を図面に基づいて説明する。なお、本発明は、有線または無線による電子通信回線を通じて情報をダウンロードできる全ての情報処理装置(電子情報機器)に対して適用することも可能である。
[1.システム構成の一例]
図1には、サーバ装置10と、本実施形態に係るユーザ端末20と他のユーザ端末30から構成される情報処理システム1を示す。なお、図1においては、情報処理システム1は、サーバ装置10と、ユーザ端末20とがそれぞれ一つずつで示されているが、これに限られず、それぞれ複数台で構成されても良い。ユーザ端末20の一例としては携帯電話機がある。
DESCRIPTION OF EXEMPLARY EMBODIMENTS Hereinafter, the best embodiment of the invention will be described with reference to the drawings. The present invention can also be applied to all information processing apparatuses (electronic information devices) that can download information through a wired or wireless electronic communication line.
[1. Example of system configuration]
FIG. 1 shows an information processing system 1 including a server device 10, a user terminal 20 according to the present embodiment, and another user terminal 30. In FIG. 1, the information processing system 1 is shown with one server device 10 and one user terminal 20, but is not limited thereto, and may be configured with a plurality of devices. An example of the user terminal 20 is a mobile phone.

図2は、ユーザ端末20の一例としての携帯電話機28の構成を例示する図である。この図2に示すように、前記携帯電話機28は、中央演算処理装置であるCPU100と、読出専用メモリであるROM102と、随時書込読出メモリであるRAM104と、フラッシュROM等の憶部106と、表示部108と、操作部110と、アンテナ112と、送受信部114と、モデム部116と、音声コーディック部118と、アナログフロントエンド120と、スピーカ122と、音声入力装置であるマイクロフォン124と、前記カラオケ装置16にリモコン信号(赤外線信号)を送信するための情報送信部としてのリモコン送信部126とを、備えて構成されている。   FIG. 2 is a diagram illustrating a configuration of a mobile phone 28 as an example of the user terminal 20. As shown in FIG. 2, the mobile phone 28 includes a CPU 100 that is a central processing unit, a ROM 102 that is a read-only memory, a RAM 104 that is a write / read memory as needed, a storage unit 106 such as a flash ROM, Display unit 108, operation unit 110, antenna 112, transmission / reception unit 114, modem unit 116, voice codec unit 118, analog front end 120, speaker 122, microphone 124 which is a voice input device, A remote control transmission unit 126 as an information transmission unit for transmitting a remote control signal (infrared signal) to the karaoke apparatus 16 is provided.

また、上記記憶部106には、携帯電話の機能である電話帳(個人情報)や登録できる様々なデータ、認識できる物体や顔(笑顔)などの情報が特徴情報とともに、サーバ装置10を介してあらかじめ記憶されていてもよい。   In addition, the storage unit 106 includes a phone book (personal information), which is a function of a mobile phone, various data that can be registered, information such as a recognizable object and a face (smile), and feature information as well as via the server device 10. It may be stored in advance.

上記CPU100は、随時書込読出メモリであるRAM104の一時記憶機能を利用しつつ読出専用メモリであるROM102に予め記憶されたプログラムに従って信号処理を行う所謂マイクロコンピュータであり、所定の文字ボタン等を備えた操作部110からの入力に従って文字入力が実行されるように制御したり、その操作部110から入力された電話番号に従って通信或いは通話チャンネルを成立させると共に相互の通信或いは通話が可能となるように制御したり、その操作部110から入力されたURLに従って所定のウェブサイトにアクセスしたり、メールの作成及び送受信を制御する等の基本的な制御に加えて、後述する本発明の制御を実行する。   The CPU 100 is a so-called microcomputer that performs signal processing in accordance with a program stored in advance in a ROM 102 that is a read-only memory while utilizing a temporary storage function of the RAM 104 that is a read / write memory as needed, and includes predetermined character buttons and the like. In accordance with the input from the operation unit 110, control is performed such that character input is performed, or communication or a call channel is established according to the telephone number input from the operation unit 110, and mutual communication or communication is enabled. In addition to basic control such as controlling, accessing a predetermined website according to the URL input from the operation unit 110, and controlling creation and transmission / reception of mail, the control of the present invention described later is executed. .

例えば、前記携帯電話機28の通話状態においては、上記アンテナ112を介して送受信部114に受けた通話信号等がモデム部116を介して音声コーディック部118においてデジタルコード信号から音声信号に変換され、アナログフロントエンド120によりスピーカ122が駆動されて音声が出力される。   For example, in a call state of the mobile phone 28, a call signal received by the transmission / reception unit 114 via the antenna 112 is converted from a digital code signal to a voice signal by the voice codec unit 118 via the modem unit 116. The speaker 122 is driven by the front end 120 to output sound.

同時に、上記マイクロフォン124により音声から変換された音声信号が上記アナログフロントエンド120を介して上記音声コーディック部118に送られてそこでディジタル信号に変換され、上記モデム部116、送受信部114、及びアンテナ112を介して送信される。   At the same time, an audio signal converted from audio by the microphone 124 is sent to the audio codec unit 118 via the analog front end 120 and converted into a digital signal there, and the modem unit 116, the transmission / reception unit 114, and the antenna 112. Sent through.

また、通信状態において、上記CPU100は、上記操作部110から入力された信号を通信先へ送信すると同時に、通信先から受信された信号を表示部108に表示させる制御を行う。   In the communication state, the CPU 100 controls the display unit 108 to display the signal received from the communication destination simultaneously with transmitting the signal input from the operation unit 110 to the communication destination.

また、他の通信端末からの着信があったと判定される場合には、上記記憶部106に予め記憶された着信メロディ情報を読み出し、その着信メロディ情報に基づいて図示しない音源部により所定のメロディ(呼出音)を発生させて前記スピーカ122から出力させたり、呼出音非出力モードにおいては図示しないバイブレータを駆動させて振動を発生させたりする。   When it is determined that there is an incoming call from another communication terminal, the incoming melody information stored in advance in the storage unit 106 is read out, and a predetermined melody (not shown) is read out by a sound source unit (not shown) based on the incoming melody information. A ringing tone) is generated and output from the speaker 122, or in a ringing tone non-output mode, a vibrator (not shown) is driven to generate vibration.

また、前記CPU100にインストールされた所定のアプリケーションにより、前記リモコン送信部126を介して前記カラオケ装置16に対する選曲入力や後述するゲームの結果情報等のリモコン送信制御を行う。   Further, by a predetermined application installed in the CPU 100, remote control transmission control such as music selection input to the karaoke device 16 and game result information described later is performed via the remote control transmission unit 126.

次に、サーバ装置10および他の端末装置30の内部構成について説明する。   Next, the internal configuration of the server device 10 and the other terminal device 30 will be described.

サーバ装置10および他の端末装置30は、図3に示すように、制御部300を構成するCPU(Central Processing Unit)310(マルチプロセッサ構成ではCPU320等複数のCPUが追加されても良い)、バスライン200、通信I/F(I/F:インターフェース)330、メインメモリ340、BIOS(Basic Input Output System)350、I/Oコントローラ360、ハードディスク370、光ディスクドライブ380、並びに半導体メモリ390を備える。なお、ハードディスク370、光ディスクドライブ380、並びに、半導体メモリ390はまとめて記憶装置410と呼ばれる。   As shown in FIG. 3, the server device 10 and the other terminal devices 30 include a CPU (Central Processing Unit) 310 (a plurality of CPUs such as the CPU 320 may be added in a multiprocessor configuration), a bus, and the control unit 300. A line 200, a communication I / F (I / F: interface) 330, a main memory 340, a BIOS (Basic Input Output System) 350, an I / O controller 360, a hard disk 370, an optical disk drive 380, and a semiconductor memory 390 are provided. The hard disk 370, the optical disk drive 380, and the semiconductor memory 390 are collectively referred to as a storage device 410.

制御部300は、サーバ10(または他の端末装置30)を統括的に制御する部分であり、ハードディスク370に記憶された各種プログラムを適宜読み出して実行することにより、上述したハードウェアと協働し、本発明に係る各種機能を実現している。   The control unit 300 is a part that controls the server 10 (or another terminal device 30) in an integrated manner, and cooperates with the hardware described above by appropriately reading and executing various programs stored in the hard disk 370. Various functions according to the present invention are realized.

通信I/F330は、サーバ10が、ネットワークを介してユーザ端末30等の他の装置と情報を送受信する場合のネットワーク・アダプタである。   The communication I / F 330 is a network adapter when the server 10 transmits / receives information to / from other devices such as the user terminal 30 via the network.

BIOS350は、サーバ10の起動時にCPU310が実行するブートプログラムや、サーバ10のハードウェアに依存するプログラム等を記録する。   The BIOS 350 records a boot program executed by the CPU 310 when the server 10 is started up, a program depending on the hardware of the server 10, and the like.

I/Oコントローラ360には、ハードディスク370、光ディスクドライブ380、及び半導体メモリ390等の記憶装置410を接続することができる。   A storage device 410 such as a hard disk 370, an optical disk drive 380, and a semiconductor memory 390 can be connected to the I / O controller 360.

ハードディスク370は、本ハードウェアをサーバ10として機能させるための各種プログラム、本発明の機能を実行するプログラム及び後述するテーブル等を記憶する。なお、サーバ10は、外部に別途設けたハードディスク(図示せず)を外部記憶装置として利用することもできる。   The hard disk 370 stores various programs for causing the hardware to function as the server 10, a program for executing the functions of the present invention, a table to be described later, and the like. The server 10 can also use an external hard disk (not shown) as an external storage device.

光ディスクドライブ380としては、例えば、DVD−ROMドライブ、CD−ROMドライブ、DVD−RAMドライブ、CD−RAMドライブを使用することができる。この場合は各ドライブに対応した光ディスク400を使用する。光ディスク400から光ディスクドライブ380によりプログラム又はデータを読み取り、I/Oコントローラ360を介してメインメモリ340又はハードディスク370に提供することもできる。
[2.情報処理装置の処理機能ブロックの説明]
ここで、本発明の機能を発揮するための本実施形態に係るユーザ端末20の構成について、図4に示す機能ブロック図を用いて説明する。
As the optical disk drive 380, for example, a DVD-ROM drive, a CD-ROM drive, a DVD-RAM drive, or a CD-RAM drive can be used. In this case, the optical disk 400 corresponding to each drive is used. A program or data can be read from the optical disk 400 by the optical disk drive 380 and provided to the main memory 340 or the hard disk 370 via the I / O controller 360.
[2. Description of processing function block of information processing apparatus]
Here, the configuration of the user terminal 20 according to the present embodiment for exhibiting the functions of the present invention will be described with reference to the functional block diagram shown in FIG.

携帯電話機等のユーザ端末20のオートフォーカス手段としてのオートフォーカス部201は、撮像対象の中から選定されたフォーカス対象に対して自動的にレンズの焦点を合わせる機能を有する。   The autofocus unit 201 as an autofocus unit of the user terminal 20 such as a mobile phone has a function of automatically focusing the lens on a focus target selected from among the imaging targets.

また、優先的にフォーカスするフォーカス対象は、以降に記述されるフォーカス対象決定部に基づいてフォーカスされる。   In addition, a focus target to be focused preferentially is focused based on a focus target determination unit described below.

携帯電話機等のユーザ端末20の撮影情報生成手段としての撮影情報生成部202は、オートフォーカス部201のレンズを介して取得した撮像光に基づいて撮影情報を生成する機能を有する。   The shooting information generation unit 202 as shooting information generation means of the user terminal 20 such as a mobile phone has a function of generating shooting information based on the imaging light acquired through the lens of the autofocus unit 201.

携帯電話機等のユーザ端末20の特徴情報抽出手段としての特徴情報抽出部203は、撮影情報生成部202が生成した撮影情報を解析し、撮影情報を特徴付ける特徴情報を抽出する機能を有する。   The feature information extraction unit 203 as a feature information extraction unit of the user terminal 20 such as a mobile phone has a function of analyzing the shooting information generated by the shooting information generation unit 202 and extracting the feature information characterizing the shooting information.

また、特徴情報抽出部203はインターネット回線上にアップロードされた情報から特徴情報を抽出する機能を有する。   The feature information extraction unit 203 has a function of extracting feature information from information uploaded on the Internet line.

また、特徴情報抽出部203は音声情報から特徴情報を抽出する機能を有する。   The feature information extraction unit 203 has a function of extracting feature information from audio information.

また、特徴情報抽出部203は電話帳データとして登録されるべきデータ情報から特徴情報を抽出する機能を有する。   The feature information extraction unit 203 has a function of extracting feature information from data information to be registered as telephone directory data.

ここで、電話帳データとして登録されるべきデータ情報には、電話番号、住所、誕生日、顔写真、音声情報等の情報がある。   Here, the data information to be registered as the phone book data includes information such as a telephone number, an address, a birthday, a face photo, and voice information.

また特徴情報はアルファベット、ひらがな、カタカナ等の文字、図形、記号、音声情報、画像情報等の一つの情報を他の情報から認識するための如何なる情報であってもよい。   The feature information may be any information for recognizing one piece of information such as letters such as alphabets, hiragana and katakana, graphics, symbols, voice information, and image information from other information.

携帯電話機等のユーザ端末20のフォーカス優先度決定手段としてのフォーカス優先度決定部204は、特徴情報抽出部203によって生成された特徴情報を記憶手段としての記憶部106aにおいて検索し、特徴情報と同一の特徴情報が記憶部106aにおいて検出された場合であって、一回の撮影中に特徴情報の一つのみが記憶部106aで検出された場合にはフォーカス優先度情報を特徴情報に対応する撮影対象にフォーカスし、一回の撮影中に特徴情報が記憶部106aで複数検出された場合には特徴情報に対応するフォーカス優先度情報に基づいてフォーカス対象を決定する機能を有する。   A focus priority determination unit 204 as a focus priority determination unit of the user terminal 20 such as a mobile phone searches the storage unit 106a as a storage unit for the feature information generated by the feature information extraction unit 203, and is the same as the feature information. When the feature information is detected in the storage unit 106a and only one of the feature information is detected in the storage unit 106a during one shooting, the focus priority information is captured corresponding to the feature information. When a plurality of pieces of feature information are detected in the storage unit 106a during one shooting, the focus target is determined based on focus priority information corresponding to the feature information.

フォーカス優先度決定部204は、撮影情報が撮影情報生成部202によって生成される度に撮影情報に対応するフォーカス優先度情報を高く設定し(例えば、一回目に撮影された場合にはフォーカス優先度情報を1とし、二回目に撮影された場合にはフォーカス優先度情報を1だけインクリメントし1とし、以降撮影されるたびにフォーカス優先度情報を1つずつインクリメントする。)、フォーカス優先度情報は撮影情報の特徴情報とともに記憶部106aに記憶される。   The focus priority determination unit 204 sets the focus priority information corresponding to the shooting information high every time shooting information is generated by the shooting information generation unit 202 (for example, when the first shooting is performed, the focus priority is set). When the information is set to 1 and the second image is taken, the focus priority information is incremented by 1 to be set to 1 and the focus priority information is incremented by 1 every time the image is taken thereafter). It is memorize | stored in the memory | storage part 106a with the characteristic information of imaging | photography information.

フォーカス優先度決定部204は特徴情報に対応する音声情報が入力されるたびに特徴情報のフォーカス優先度情報を高く設定し、フォーカス優先度情報は当該撮影情報の特徴情報とともに前記記憶部106aに記憶される(フォーカス優先度情報を撮影情報の特徴情報とともに前記記憶部106aに記憶する)機能を有する。   The focus priority determination unit 204 sets the focus priority information of the feature information high every time the audio information corresponding to the feature information is input, and the focus priority information is stored in the storage unit 106a together with the feature information of the shooting information. (The focus priority information is stored in the storage unit 106a together with the feature information of the shooting information).

フォーカス優先度決定部204は前記特徴情報に対応するアップロードされた前記情報が検索されるたびに当該特徴情報の前記フォーカス優先度情報を高く設定し、前記フォーカス優先度情報は当該撮影情報の前記特徴情報とともに前記記憶手段に記憶される
また、特徴情報に対するフォーカス優先度情報はユーザが入力部110bを介して、入力することにより設定されることも可能であり、ユーザの好みによって何時でもフォーカス優先度情報の設定が変更されることが可能である。
The focus priority determination unit 204 sets the focus priority information of the feature information high each time the uploaded information corresponding to the feature information is searched, and the focus priority information is the feature of the shooting information. The focus priority information for the feature information can be set by the user through the input unit 110b, and the focus priority can be set at any time according to the user's preference. Information settings can be changed.

携帯電話機等のユーザ端末20の記憶手段としての記憶部106aには、情報処理装置としての携帯電話機等のユーザ端末20または他のユーザ端末30を介して入力された情報であって、特徴情報抽出部203によって(入力された)情報から抽出された特徴情報が記憶される機能を有する。   The storage unit 106a serving as a storage unit of the user terminal 20 such as a mobile phone is information input via the user terminal 20 such as the mobile phone as the information processing apparatus or another user terminal 30 and includes feature information extraction The unit 203 has a function of storing feature information extracted from information (input).

携帯電話機等のユーザ端末20のフォーカス対象決定手段としてのフォーカス対象決定部205は、フォーカス優先度決定部204によって決定されたフォーカス優先度情報に基づいて、撮影のフォーカス対象を決定する機能を有する。   A focus target determining unit 205 serving as a focus target determining unit of the user terminal 20 such as a mobile phone has a function of determining a focus target for shooting based on the focus priority information determined by the focus priority determining unit 204.

携帯電話機等のユーザ端末20の音声情報入力手段としての音声情報入力部124aは撮像対象からの音声情報が入力される機能を有する。   The voice information input unit 124a as voice information input means of the user terminal 20 such as a cellular phone has a function of inputting voice information from an imaging target.

この場合、撮影対象の中から音声情報が発せられた場合に、音声情報に対応する人物等の特徴情報が記憶部106aに記憶されていれば、この音声情報を発した人物等を優先的にフォーカスすることが可能になる。   In this case, when voice information is emitted from the subject to be photographed, if the feature information such as a person corresponding to the voice information is stored in the storage unit 106a, the person who issued the voice information is given priority. It becomes possible to focus.

携帯電話機等のユーザ端末20のインターネット回線上にアップロードされた情報が入力されるインターネット情報入力手段としてのインターネット情報入力部114aは、インターネット回線上にアップロードされた情報が入力される機能を有する。   The Internet information input unit 114a as an Internet information input means for inputting information uploaded on the Internet line of the user terminal 20 such as a mobile phone has a function of inputting information uploaded on the Internet line.

この場合、ユーザがインターネット上でアップロードされた情報を検索、閲覧等してアップロードされた情報の特徴情報が記憶部106aに記憶されていれば、この特徴情報に対応する撮像対象(被写体)を優先的に自動的にフォーカスすることが可能になる。   In this case, if the feature information of the information uploaded by the user searching and browsing information uploaded on the Internet is stored in the storage unit 106a, the imaging target (subject) corresponding to the feature information is given priority. Automatically focus.

携帯電話機等のユーザ端末20の電話帳データとして登録されるべきデータ情報が入力される電話帳データ情報入力手段としての電話帳データ情報入力部110bは、電話帳データとして登録されるべきデータ情報が入力される機能を有する。   The phone book data information input unit 110b as a phone book data information input means to which data information to be registered as phone book data of the user terminal 20 such as a mobile phone is input has data information to be registered as phone book data. Has the function to be input.

携帯電話機等のユーザ端末20のフォーカス対象決定手段としてのフォーカス対象決定部205は、フォーカス優先度決定部204において決定されたフォーカス優先度情報に基づいて、優先的にフォーカスすべき対象(被写体)に、オートフォーカス部201のフォーカスを制御する。
[3.処理動作を示すフローチャートの一例]
次に、図5を用いて、携帯電話機等のユーザ端末20において、カメラ付き携帯電話のオートフォーカス機能について、複数のフォーカス対象が存在した場合に、どの対象に優先的にフォーカスを当てるかを携帯電話に蓄積されている他の情報と連携することで、ユーザにとってより快適なオートフォーカス機能を提供するオートフォーカス機能を有する情報処理装置の動作概要を説明する。
A focus target determining unit 205 serving as a focus target determining unit of the user terminal 20 such as a mobile phone is set to a target (subject) to be focused preferentially based on the focus priority information determined by the focus priority determining unit 204. The focus of the autofocus unit 201 is controlled.
[3. Example of flowchart showing processing operations]
Next, referring to FIG. 5, in the user terminal 20 such as a mobile phone, when there are a plurality of focus targets for the autofocus function of the camera-equipped mobile phone, it is determined which target is to be focused preferentially. An outline of the operation of the information processing apparatus having an autofocus function that provides a more comfortable autofocus function for the user by linking with other information stored in the telephone will be described.

なお、本発明を適用した場合において実現され得る具体的な処理手順である以下に示す処理手順は、一例であってこれ以外にも実現され得る処理手順は無数に存在する。   Note that the following processing procedure, which is a specific processing procedure that can be realized when the present invention is applied, is an example, and there are innumerable other processing procedures that can be realized.

まず、図5のステップS1において、携帯電話機等のユーザ端末20のオートフォーカス部201は、撮像対象の中から選定されたフォーカス対象に対して自動的にレンズの焦点を合わせる機能を有し、撮影情報生成部202は、オートフォーカス部201のレンズを介して取得した撮像光に基づいて撮影情報を生成する。   First, in step S1 of FIG. 5, the autofocus unit 201 of the user terminal 20 such as a mobile phone has a function of automatically focusing the lens on a focus target selected from among the imaging targets. The information generation unit 202 generates shooting information based on the imaging light acquired through the lens of the autofocus unit 201.

ステップS2において、携帯電話機等のユーザ端末20の特徴情報抽出部203は、撮影情報生成部202が生成した撮影情報を解析し、撮影情報を特徴付ける特徴情報を抽出する。   In step S <b> 2, the feature information extraction unit 203 of the user terminal 20 such as a mobile phone analyzes the shooting information generated by the shooting information generation unit 202 and extracts feature information that characterizes the shooting information.

ここで、特徴情報抽出部203はインターネット回線上にアップロードされた情報、音声情報、電話帳データとして登録されるべきデータ情報が存在する場合にはこれらの情報からも特徴情報を抽出する。   Here, when there is information uploaded on the Internet line, voice information, and data information to be registered as telephone directory data, the feature information extraction unit 203 extracts the feature information from these information.

また、撮影情報の解析は、撮影情報のみを用いてもよいし、記憶部106aに記憶された各種情報を用いて解析することにより特徴情報を抽出してもよい。   Further, the shooting information may be analyzed using only the shooting information, or the feature information may be extracted by performing analysis using various types of information stored in the storage unit 106a.

ステップS3において、携帯電話機等のユーザ端末20のフォーカス優先度決定部204は、特徴情報抽出部203によって生成された特徴情報を記憶手段としての記憶部106aにおいて検索し、特徴情報と同一の特徴情報が記憶部106aにおいて検出された場合であって、一回の撮影中に特徴情報の一つのみが記憶部106aで検出された場合にはフォーカス優先度情報を特徴情報に対応する撮影対象にフォーカスし、一回の撮影中に特徴情報が記憶部106aで複数検出された場合には特徴情報に対応するフォーカス優先度情報に基づいてフォーカス対象を決定する。   In step S3, the focus priority determination unit 204 of the user terminal 20 such as a mobile phone searches for the feature information generated by the feature information extraction unit 203 in the storage unit 106a as a storage unit, and the same feature information as the feature information. Is detected in the storage unit 106a, and when only one piece of feature information is detected in the storage unit 106a during one shooting, the focus priority information is focused on the shooting target corresponding to the feature information. When a plurality of pieces of feature information are detected in the storage unit 106a during one shooting, the focus target is determined based on the focus priority information corresponding to the feature information.

一回の撮影中に特徴情報の一つのみが記憶部106aで検出された場合、例えば複数の人物を撮影しようとした場合に、その中の一人の特徴情報が記憶部106aに記憶されている場合には、特徴情報が記憶部106aに記憶されている人物と携帯電話機等のユーザ端末20の所有者とは友人、知人等であると考えられので、その人物にフォーカスを合わせるようにフォーカス優先度情報を決定する。フォーカス優先度情報の記憶形式は任意の構造とすることができる。   When only one piece of feature information is detected in the storage unit 106a during one shooting, for example, when shooting a plurality of persons, the feature information of one of them is stored in the storage unit 106a. In this case, since the person whose feature information is stored in the storage unit 106a and the owner of the user terminal 20 such as a mobile phone are considered to be friends, acquaintances, etc., focus priority is given so that the person is focused. Determining degree information. The storage format of the focus priority information can be an arbitrary structure.

また、携帯電話機等のユーザ端末20の所有者がユーザ端末20の入力インターフェースを介して入力した情報の全てにフォーカス優先度情報を付加することが可能である。   Further, it is possible to add focus priority information to all of the information input via the input interface of the user terminal 20 by the owner of the user terminal 20 such as a mobile phone.

フォーカス優先度情報は、ユーザがユーザ端末20の入力インターフェースを介してその情報を入力するたびに、フォーカス優先度が高くなるように設定される。   The focus priority information is set so that the focus priority is increased every time the user inputs the information via the input interface of the user terminal 20.

ステップS4において、携帯電話機等のユーザ端末20のフォーカス対象決定部205は、フォーカス優先度決定部204において決定されたフォーカス優先度情報に基づいて、優先的にフォーカスすべき対象(被写体)に、オートフォーカス部201のフォーカスを制御する。   In step S <b> 4, the focus target determining unit 205 of the user terminal 20 such as a mobile phone automatically sets the target (subject) to be focused preferentially based on the focus priority information determined by the focus priority determining unit 204. The focus of the focus unit 201 is controlled.

ステップS5において、携帯電話機等のユーザ端末20のオートフォーカス部201は、ステップS4におけるフォーカス対象決定部205のフォーカス制御に従って、撮影対象にフォーカスを合わせて撮影する。
[4.本実施形態の概念を示す図の一例]
次に、本実施形態の携帯電話機等のユーザ端末20の動作概念の一例を図6に示す。
In step S <b> 5, the autofocus unit 201 of the user terminal 20 such as a mobile phone captures an image with the focus on the imaging target according to the focus control of the focus target determination unit 205 in step S <b> 4.
[4. Example of a diagram illustrating the concept of the present embodiment]
Next, an example of the operation concept of the user terminal 20 such as a mobile phone according to the present embodiment is shown in FIG.

図6には、携帯電話機によって特徴情報が抽出されるべき対象となる、携帯電話機に入力される各種情報の一例が示されている。   FIG. 6 shows an example of various types of information input to the mobile phone, which is a target from which feature information is to be extracted by the mobile phone.

携帯電話機によって特徴情報が抽出されるべき対象となる情報には、電話帳データには、情報入力部110aを介して入力される電話番号、住所、誕生日、顔写真、音声情報等が含まれる。この中の顔写真は、オートフォーカス部201を介して画像情報として入力されてもよく、音声情報は音声情報入力部124aを介して音声情報として入力されてもよい。   Information on which feature information is to be extracted by the mobile phone includes phone numbers, addresses, birthdays, face photos, voice information, and the like input via the information input unit 110a in the phone book data. . The face photograph in this may be input as image information via the autofocus unit 201, and the audio information may be input as audio information via the audio information input unit 124a.

また、携帯電話機をインターネット端末として使用した場合には、ユーザの趣味/嗜好に合った被写体にフォーカスを合わせるために、インターネット情報入力部114aを介して入力される情報を特徴情報が抽出されるべき対象の情報とすることも可能である(インターネット履歴)。   When a mobile phone is used as an Internet terminal, feature information should be extracted from information input via the Internet information input unit 114a in order to focus on a subject that matches the user's hobbies / preferences. It is also possible to set it as target information (Internet history).

また、携帯電話機のデジカメ機能を使用して撮影された情報もユーザの趣味/嗜好を示していると考えられるので、オートフォーカス部201を介して入力される撮影情報を特徴情報が抽出されるべき対象の情報とすることも可能である(撮影履歴)。   In addition, since the information photographed using the digital camera function of the mobile phone is considered to indicate the user's hobbies / preferences, the feature information should be extracted from the photographing information input via the autofocus unit 201. It is also possible to use target information (shooting history).

また、携帯電話機のメール機能を使用して送受信される情報もユーザの趣味/嗜好を示していると考えられるので、送受信部114を介して入力される撮影情報を特徴情報が抽出されるべき対象の情報とすることも可能である(メール(キーワード)履歴)。   In addition, since the information transmitted / received using the mail function of the mobile phone is also considered to indicate the user's hobbies / preferences, the feature information should be extracted from the shooting information input via the transmitting / receiving unit 114 (Mail (keyword) history).

この場合には、メールで送受信される文字情報から、使用頻度の高い文字情報をキーワード情報として特徴情報にし、または、キーワード情報から特徴情報を抽出してもよい。   In this case, frequently used character information may be used as keyword information from the character information transmitted and received by e-mail, or the feature information may be extracted from the keyword information.

以上のように携帯電話機の入力インターフェースを介して入力される全ての情報を特徴情報が抽出されるべき情報とすることが可能である。   As described above, all information input through the input interface of the mobile phone can be used as information for which feature information is to be extracted.

次に、図7には、携帯電話機によって、優先的にオートフォーカスの対象となる特徴情報に対応する撮影情報の一例が示されている。   Next, FIG. 7 shows an example of shooting information corresponding to feature information that is preferentially subject to autofocus by a mobile phone.

図7の中央上段には、携帯電話機の撮影対象となったものが複数の人物である場合について説明されている。   In the upper middle part of FIG. 7, a case where a plurality of persons are photographed by the mobile phone is described.

携帯電話機の撮影対象となった複数の人物の一人一人について、特徴情報抽出部203は特徴情報を抽出する。特徴情報抽出部203が抽出した特徴情報に対応する顔写真と一致する人物が記憶部106aに記憶されている場合には、フォーカス優先度決定部204はその人物に優先的にフォーカスを当てるように、フォーカス優先度情報を決定する。   The feature information extraction unit 203 extracts feature information for each of a plurality of persons to be photographed by the mobile phone. When a person who matches the face photograph corresponding to the feature information extracted by the feature information extraction unit 203 is stored in the storage unit 106a, the focus priority determination unit 204 preferentially focuses the person. Determine focus priority information.

図7の中央中段には、携帯電話機の撮影対象となったものが風景と物体(構造物等)である場合について説明されている。   In the middle middle part of FIG. 7, a case where a subject to be photographed by the mobile phone is a landscape and an object (such as a structure) is described.

携帯電話機の撮影対象となった風景と物体(構造物等)について、特徴情報抽出部203は特徴情報を抽出する。特徴情報抽出部203が抽出した特徴情報に対応する風景または物体と一致する情報が記憶部106aに記憶されている場合には(この場合には、ユーザが以前に携帯電話機を使用してその風景または物体に関する情報を入力しているので、携帯電話機を使用しているユーザの趣味/嗜好に合致するものと推測することが可能である)、フォーカス優先度決定部204は風景または物体に優先的にフォーカスを当てるように、フォーカス優先度情報を決定する。   The feature information extraction unit 203 extracts feature information for a landscape and an object (such as a structure) that are to be photographed by the mobile phone. When information corresponding to the landscape or object corresponding to the feature information extracted by the feature information extraction unit 203 is stored in the storage unit 106a (in this case, the user previously uses the mobile phone to Alternatively, since the information about the object is input, it can be estimated that the user matches the hobby / preference of the user using the mobile phone), and the focus priority determination unit 204 prioritizes the scenery or the object. Focus priority information is determined so as to focus on.

図7の中央下段には、携帯電話機の撮影対象となったものが複数の人物と物体である場合について説明されている。   In the lower center part of FIG. 7, a case where a subject to be photographed by the mobile phone is a plurality of persons and objects is described.

携帯電話機の撮影対象となった複数の人物と物体の一つ一つについて、特徴情報抽出部203は特徴情報を抽出する。特徴情報抽出部203が抽出した特徴情報に対応する人物または物体と一致する情報が記憶部106aに記憶されている場合には、フォーカス優先度決定部204はその人物または物体に優先的にフォーカスを当てるように、フォーカス優先度情報を決定する。
[4.その他の実施形態の一例]
(1)(東京タワーや雷門といった)特徴のある物体が被写体となっている場合に携帯電話を介した情報提供が可能となる。
(2)電話帳データと照合した結果、フォーカスが当たった人物が誕生日であったら自動的に誕生日フレームで加飾することが可能となる。
(3)携帯電話で「城」についてユーザがインターネットを介してよく調べていた場合には、「城」をユーザの趣味と判定して、撮影情報に「城」が写りこんでいたらその「城」際立たせるようなデコレーション情報を付加することが可能となる。
(4)携帯電話に搭載されているGPS(Global Positioning System)とも連携して観光地といった有名な場所にユーザがいて撮影情報中の有名な建物を検出してフォーカスを当てることが可能となる。
The feature information extraction unit 203 extracts feature information for each of a plurality of persons and objects that are objects to be photographed by the mobile phone. When information matching the person or object corresponding to the feature information extracted by the feature information extraction unit 203 is stored in the storage unit 106a, the focus priority determination unit 204 preferentially focuses on the person or object. Focus priority information is determined so as to be applied.
[4. Example of other embodiment]
(1) When a characteristic object (such as Tokyo Tower or Kaminarimon) is a subject, information can be provided via a mobile phone.
(2) As a result of collation with the phone book data, if the focused person is a birthday, it can be automatically decorated with a birthday frame.
(3) If the user has often investigated “castle” on the mobile phone via the Internet, it is determined that “castle” is a user's hobby, and if “castle” is reflected in the shooting information, the “castle” It becomes possible to add decoration information that makes it stand out.
(4) In cooperation with GPS (Global Positioning System) mounted on a mobile phone, a user can be located in a famous place such as a sightseeing spot, and a famous building in shooting information can be detected and focused.

このように本発明に係わる携帯電話機等のユーザ端末20を用いた、カメラ付き携帯電話のオートフォーカス機能について、複数のフォーカス対象が存在した場合に、どの対象に優先的にフォーカスを当てるかを携帯電話に蓄積されている他の情報と連携することで、ユーザにとってより快適なオートフォーカス機能を提供することが可能となる。   As described above, with respect to the autofocus function of the camera-equipped mobile phone using the user terminal 20 such as the mobile phone according to the present invention, when there are a plurality of focus targets, it is determined which target is focused preferentially. By linking with other information stored in the telephone, it is possible to provide an autofocus function that is more comfortable for the user.

なお、図4における動作手順を、ハードディスク等の記録媒体に予め記録しておき、或いはインターネット等のネットワークを介して予め記録しておき、これを汎用のマイクロコンピュータ等により読み出して実行することにより、当該汎用のマイクロコンピュータ等を実施形態に係わるCPUとして機能させることも可能である。   4 is recorded in advance on a recording medium such as a hard disk or recorded in advance via a network such as the Internet, and is read and executed by a general-purpose microcomputer or the like. It is possible to cause the general-purpose microcomputer or the like to function as a CPU according to the embodiment.

また各情報処理機器間の情報の送受信は有線、無線に限定されず、いずれの方法においても情報の送受信を行うことができる。   In addition, transmission / reception of information between information processing devices is not limited to wired or wireless, and information can be transmitted / received by any method.

本発明は携帯電話に限られず、他の情報処理装置とのインターフェースを有するデジタルカメラのあらゆる使用シーンで利用可能である。   The present invention is not limited to a mobile phone, and can be used in any use scene of a digital camera having an interface with another information processing apparatus.

10 ・・・ サーバ装置
20、30・・・ 情報処理装置
201 ・・・ オートフォーカス部
202 ・・・ 撮影情報生成部
203 ・・・ 特徴情報抽出部
204 ・・・ フォーカス優先度決定部
205 ・・・ フォーカス対象度決定部
106 ・・・ 決定部
DESCRIPTION OF SYMBOLS 10 ... Server apparatus 20, 30 ... Information processing apparatus 201 ... Autofocus part 202 ... Shooting information generation part 203 ... Feature information extraction part 204 ... Focus priority determination part 205 ...・ Focus target degree determination unit 106 ・ ・ ・ Determination unit

Claims (5)

撮影機能を有する情報処理装置であって、
撮像対象の中から選定されたフォーカス対象に対して自動的にレンズの焦点を合わせるオートフォーカス手段と、
前記レンズを介して取得した撮像光に基づいて撮影情報を生成する撮影情報生成手段と、
前記撮影情報を解析し、当該撮影情報を特徴付ける特徴情報を抽出する特徴情報抽出手段と、
前記特徴情報抽出手段によって生成された前記特徴情報を記憶手段において検索し、前記特徴情報と同一の特徴情報が前記記憶手段において検出された場合であって、一回の撮影中に前記特徴情報の一つのみが前記記憶手段で検出された場合には当該特徴情報に対応する撮影対象にフォーカスするように、フォーカス優先度決定情報を決定し、一回の撮影中に前記特徴情報が前記記憶手段で複数検出された場合には前記特徴情報に対応する前記フォーカス優先度決定情報に基づいてフォーカス対象を決定するように、前記フォーカス優先度決定情報を決定するフォーカス優先度決定手段と、
前記フォーカス優先度決定手段によって決定された前記フォーカス優先度決定情報に基づいて、撮影のフォーカス対象を決定するフォーカス対象決定手段と、
前記撮像対象からの音声情報が入力される音声情報入力手段と、
前記フォーカス対象となっている被写体に関連する情報に基づいて、前記撮像光による写真に付加する付加情報を決定し、当該付加情報を前記写真に付加する情報付加手段と、
インターネット回線上にアップロードされた情報が入力されるインターネット情報入力手段と、
を備え、
前記フォーカス優先度決定手段は、前記撮影情報が前記撮影情報生成手段によって生成されるたびに前記ォーカス優先度決定情報を累積的に高く設定し、前記フォーカス優先度決定情報は当該撮影情報の前記特徴情報とともに前記記憶手段に記憶され、
前記記憶手段には、前記情報処理装置を介して入力された情報であって、前記特徴情報抽出手段によって当該情報から抽出された前記特徴情報が記憶され、
前記特徴情報抽出手段は、前記音声情報から前記特徴情報を抽出し、
前記フォーカス優先度決定手段は前記特徴情報に対応する前記音声情報が入力されるたびに当該特徴情報の前記フォーカス優先度決定情報を累積的に高く設定し、前記フォーカス優先度決定情報は当該撮影情報の前記特徴情報とともに前記記憶手段に記憶され、
前記特徴情報抽出手段は、前記インターネット回線上にアップロードされた前記情報から前記特徴情報を抽出し、
前記フォーカス優先度決定手段は、前記特徴情報に対応するアップロードされた前記情報が検索されるたびに、当該特徴情報の前記フォーカス優先度決定情報を累積的に高く設定し、前記フォーカス優先度決定情報は当該撮影情報の前記特徴情報とともに前記記憶手段に記憶され、
前記情報付加手段は、前記フォーカス対象となっている被写体の中に、前記アップロードされた情報の検索に基づき判定されるユーザの趣味に対応する被写体がある場合、前記撮像光による写真に付加する付加情報として、当該ユーザの趣味に対応する被写体を際立たせる当該付加情報を決定し、当該付加情報を前記写真に付加することを特徴とする情報処理装置。
An information processing apparatus having a photographing function,
Autofocus means for automatically focusing the lens on a focus target selected from among the imaging targets;
Shooting information generation means for generating shooting information based on imaging light acquired through the lens;
Analyzing the shooting information and extracting feature information that characterizes the shooting information; and
The feature information generated by the feature information extraction unit is searched in the storage unit, and the same feature information as the feature information is detected in the storage unit. When only one is detected by the storage unit, focus priority determination information is determined so as to focus on the shooting target corresponding to the feature information, and the feature information is stored in the storage unit during one shooting. A focus priority determination means for determining the focus priority determination information so as to determine a focus target based on the focus priority determination information corresponding to the feature information when a plurality of is detected in
A focus target determining unit that determines a focus target for shooting based on the focus priority determination information determined by the focus priority determining unit;
Voice information input means for inputting voice information from the imaging target;
Information adding means for determining additional information to be added to the photograph by the imaging light based on information related to the subject to be focused, and adding the additional information to the photograph;
Internet information input means for inputting information uploaded on the Internet line;
With
The focus priority determining means, every time said imaging information is generated by the photographing information generation unit, the full Okasu priority determination information set cumulatively increased, the focus priority determining information of the captured information Stored together with the feature information in the storage means,
The storage means stores information inputted through the information processing apparatus, the feature information extracted from the information by the feature information extraction means,
The feature information extraction means extracts the feature information from the voice information,
The focus priority determining means, each time said voice information corresponding to the characteristic information is input, the focus priority determining information of the feature information sets cumulatively increased, the focus priority determining information corresponding Stored in the storage means together with the feature information of the shooting information,
The feature information extracting means extracts the feature information from the information uploaded on the Internet line,
The focus priority determination unit sets the focus priority determination information of the feature information to be cumulatively high every time the uploaded information corresponding to the feature information is searched, and the focus priority determination information Is stored in the storage unit together with the feature information of the photographing information,
The information adding means adds to the photograph by the imaging light when there is a subject corresponding to the user's hobby determined based on the search of the uploaded information among the subjects to be focused. An information processing apparatus characterized in that, as information, the additional information that makes a subject corresponding to the user's hobby stand out is determined, and the additional information is added to the photograph .
撮影機能を有する情報処理装置であって、
撮像対象の中から選定されたフォーカス対象に対して自動的にレンズの焦点を合わせるオートフォーカス手段と、
前記レンズを介して取得した撮像光に基づいて撮影情報を生成する撮影情報生成手段と、
前記撮影情報を解析し、当該撮影情報を特徴付ける特徴情報を抽出する特徴情報抽出手段と、
前記特徴情報抽出手段によって生成された前記特徴情報を記憶手段において検索し、前記特徴情報と同一の特徴情報が前記記憶手段において検出された場合であって、一回の撮影中に前記特徴情報の一つのみが前記記憶手段で検出された場合には当該特徴情報に対応する撮影対象にフォーカスするように、フォーカス優先度決定情報を決定し、一回の撮影中に前記特徴情報が前記記憶手段で複数検出された場合には前記特徴情報に対応する前記フォーカス優先度決定情報に基づいてフォーカス対象を決定するように、前記フォーカス優先度決定情報を決定するフォーカス優先度決定手段と、
前記フォーカス優先度決定手段によって決定された前記フォーカス優先度決定情報に基づいて、撮影のフォーカス対象を決定するフォーカス対象決定手段と、
前記撮像対象からの音声情報が入力される音声情報入力手段と、
前記フォーカス対象となっている被写体に関連する情報に基づいて、前記撮像光による写真に付加する付加情報を決定し、当該付加情報を前記写真に付加する情報付加手段と、
電話帳データとして登録するデータ情報が入力される電話帳データ情報入力手段と、
を備え、
前記フォーカス優先度決定手段は、前記撮影情報が前記撮影情報生成手段によって生成されるたびに前記ォーカス優先度決定情報を累積的に高く設定し、前記フォーカス優先度決定情報は当該撮影情報の前記特徴情報とともに前記記憶手段に記憶され、
前記記憶手段には、前記情報処理装置を介して入力された情報であって、前記特徴情報抽出手段によって当該情報から抽出された前記特徴情報が記憶され、
前記特徴情報抽出手段は、前記音声情報から前記特徴情報を抽出し、
前記フォーカス優先度決定手段は前記特徴情報に対応する前記音声情報が入力されるたびに当該特徴情報の前記フォーカス優先度決定情報を累積的に高く設定し、前記フォーカス優先度決定情報は当該撮影情報の前記特徴情報とともに前記記憶手段に記憶され、
前記特徴情報抽出手段は、前記電話帳データとして登録するデータ情報から前記特徴情報を抽出し、
前記フォーカス優先度決定手段は、前記特徴情報に対応する前記電話帳データとして登録するデータ情報が前記情報処理装置において検索されるたびに、当該特徴情報の前記フォーカス優先度決定情報を累積的に高く設定し、前記フォーカス優先度決定情報は当該撮影情報の前記特徴情報とともに前記記憶手段に記憶され、
前記情報付加手段は、前記フォーカス対象となっている被写体が人物の場合、前記電話帳データを参照して当該人物の誕生日であるとき、前記付加情報として誕生日フレームを付加することを特徴とする情報処理装置。
An information processing apparatus having a photographing function,
Autofocus means for automatically focusing the lens on a focus target selected from among the imaging targets;
Shooting information generation means for generating shooting information based on imaging light acquired through the lens;
Analyzing the shooting information and extracting feature information that characterizes the shooting information; and
The feature information generated by the feature information extraction unit is searched in the storage unit, and the same feature information as the feature information is detected in the storage unit. When only one is detected by the storage unit, focus priority determination information is determined so as to focus on the shooting target corresponding to the feature information, and the feature information is stored in the storage unit during one shooting. A focus priority determination means for determining the focus priority determination information so as to determine a focus target based on the focus priority determination information corresponding to the feature information when a plurality of is detected in
A focus target determining unit that determines a focus target for shooting based on the focus priority determination information determined by the focus priority determining unit;
Voice information input means for inputting voice information from the imaging target;
Information adding means for determining additional information to be added to the photograph by the imaging light based on information related to the subject to be focused, and adding the additional information to the photograph;
Phone book data information input means for inputting data information to be registered as phone book data;
With
The focus priority determining means, every time said imaging information is generated by the photographing information generation unit, the full Okasu priority determination information set cumulatively increased, the focus priority determining information of the captured information Stored together with the feature information in the storage means,
The storage means stores information inputted through the information processing apparatus, the feature information extracted from the information by the feature information extraction means,
The feature information extraction means extracts the feature information from the voice information,
The focus priority determining means, each time said voice information corresponding to the characteristic information is input, the focus priority determining information of the feature information sets cumulatively increased, the focus priority determining information corresponding Stored in the storage means together with the feature information of the shooting information,
The feature information extracting means extracts the feature information from data information registered as the phone book data,
The focus priority determination means increases the focus priority determination information of the feature information cumulatively each time data information registered as the phone book data corresponding to the feature information is searched in the information processing apparatus. The focus priority determination information is stored in the storage unit together with the feature information of the shooting information;
The information adding unit, when the subject has become the focus object is a person, when the birth date of the person by referring to the telephone directory data, characterized that you added birthday frame as the additional information Information processing apparatus.
撮影機能を有する情報処理装置の制御方法であって、
撮像対象の中から選定されたフォーカス対象に対して自動的にレンズの焦点を合わせるオートフォーカス工程と、
前記レンズを介して取得した撮像光に基づいて撮影情報を生成する撮影情報生成工程と、
前記撮影情報を解析し、当該撮影情報を特徴付ける特徴情報を抽出する特徴情報抽出工程と、
前記特徴情報抽出工程において生成された前記特徴情報を記憶手段において検索し、前記特徴情報と同一の特徴情報が前記記憶手段において検出された場合であって、一回の撮影中に前記特徴情報の一つのみが前記記憶手段において検出された場合には当該特徴情報に対応する撮影対象にフォーカスするように、フォーカス優先度決定情報を決定し、一回の撮影中に前記特徴情報が前記記憶工程において複数検出された場合には前記特徴情報に対応する前記フォーカス優先度決定情報に基づいてフォーカス対象を決定するように、前記フォーカス優先度決定情報を決定するフォーカス優先度決定工程と、
前記フォーカス優先度決定工程において決定された前記フォーカス優先度決定情報に基づいて、撮影のフォーカス対象を決定するフォーカス対象決定工程と、
前記撮像対象からの音声情報が入力される音声情報入力工程と、
前記フォーカス対象となっている被写体に関連する情報に基づいて、前記撮像光による写真に付加する付加情報を決定し、当該付加情報を前記写真に付加する情報付加工程と、
インターネット回線上にアップロードされた情報が入力されるインターネット情報入力工程と、
を備え、
前記フォーカス優先度決定工程において、前記撮影情報が前記撮影情報生成工程によって生成されるたびに前記ォーカス優先度決定情報を累積的に高く設定し、前記フォーカス優先度決定情報は当該撮影情報の前記特徴情報とともに前記記憶手段に記憶され、
前記記憶手段には、前記情報処理装置を介して入力された情報であって、前記特徴情報抽出工程によって当該情報から抽出された前記特徴情報が記憶され、
前記特徴情報抽出工程において、前記音声情報から前記特徴情報を抽出し、前記フォーカス優先度決定工程において前記特徴情報に対応する前記音声情報が入力されるたびに当該特徴情報の前記フォーカス優先度決定情報を累積的に高く設定し、前記フォーカス優先度決定情報は当該撮影情報の前記特徴情報とともに前記記憶手段に記憶され、
前記特徴情報抽出行程において、前記インターネット回線上にアップロードされた前記情報から前記特徴情報を抽出し、
前記フォーカス優先度決定工程において、前記特徴情報に対応するアップロードされた前記情報が検索されるたびに、当該特徴情報の前記フォーカス優先度決定情報を累積的に高く設定し、前記フォーカス優先度決定情報は当該撮影情報の前記特徴情報とともに前記記憶手段に記憶され、
前記情報付加工程において、前記フォーカス対象となっている被写体の中に、前記アップロードされた情報の検索に基づき判定されるユーザの趣味に対応する被写体がある場合、前記撮像光による写真に付加する付加情報として、当該ユーザの趣味に対応する被写体を際立たせる当該付加情報を決定し、当該付加情報を前記写真に付加することを特徴とする情報処理装置の制御方法。
A method for controlling an information processing apparatus having a photographing function,
An autofocus process for automatically focusing the lens on a focus target selected from among the imaging targets;
An imaging information generation step for generating imaging information based on imaging light acquired through the lens;
A feature information extraction step of analyzing the shooting information and extracting feature information characterizing the shooting information;
The feature information generated in the feature information extraction step is searched in the storage means, and the same feature information as the feature information is detected in the storage means. When only one is detected in the storage means, focus priority determination information is determined so as to focus on the imaging target corresponding to the feature information, and the feature information is stored in the storage step during one shooting. A focus priority determination step for determining the focus priority determination information so as to determine a focus target based on the focus priority determination information corresponding to the feature information when a plurality of detections are detected in
Based on the focus priority determination information determined in the focus priority determination step, a focus target determination step for determining a focus target for shooting,
A voice information input step in which voice information from the imaging target is input;
An information adding step for determining additional information to be added to the photograph by the imaging light based on information related to the subject to be focused, and adding the additional information to the photograph;
Internet information input process in which information uploaded on the Internet line is input;
With
In the focus priority determination step, each time the photographing information is generated by the imaging information generating step, the full Okasu priority determination information set cumulatively increased, the focus priority determining information of the captured information Stored together with the feature information in the storage means,
The storage means is information input via the information processing apparatus, and the feature information extracted from the information by the feature information extraction step is stored.
In the feature information extraction step, the extracts the characteristic information from the speech information, each time the voice information corresponding to the characteristic information in the focus priority determination process is input, the focus priority determination of the characteristic information The information is set cumulatively high, and the focus priority determination information is stored in the storage unit together with the feature information of the shooting information,
In the feature information extraction process, the feature information is extracted from the information uploaded on the Internet line,
Each time the uploaded information corresponding to the feature information is searched in the focus priority determination step, the focus priority determination information of the feature information is set to be cumulatively high, and the focus priority determination information Is stored in the storage unit together with the feature information of the photographing information,
In the information addition step, if there is a subject corresponding to the user's hobby determined based on the search of the uploaded information among the subjects to be focused, addition to be added to the photograph by the imaging light as information, the control method of an information processing apparatus subject corresponding to hobby of the user to determine the highlight the additional information, which is characterized that you added to the additional information to the photograph.
撮影機能を有する情報処理装置の制御プログラムにおいて、
コンピュータを、
撮像対象の中から選定されたフォーカス対象に対して自動的にレンズの焦点を合わせるオートフォーカス手段、
前記レンズを介して取得した撮像光に基づいて撮影情報を生成する撮影情報生成手段、
前記撮影情報を解析し、当該撮影情報を特徴付ける特徴情報を抽出する特徴情報抽出手段、
前記特徴情報抽出手段によって生成された前記特徴情報を記憶手段において検索し、前記特徴情報と同一の特徴情報が前記記憶手段において検出された場合であって、一回の撮影中に前記特徴情報の一つのみが前記記憶手段で検出された場合には当該特徴情報に対応する撮影対象にフォーカスするように、フォーカス優先度決定情報を決定し、一回の撮影中に前記特徴情報が前記記憶手段で複数検出された場合には前記特徴情報に対応する前記フォーカス優先度決定情報に基づいてフォーカス対象を決定するように、前記フォーカス優先度決定情報を決定するフォーカス優先度決定手段、
前記フォーカス優先度決定手段によって決定された前記フォーカス優先度決定情報に基づいて、撮影のフォーカス対象を決定するフォーカス対象決定手段、
前記撮像対象からの音声情報が入力される音声情報入力手段、
前記フォーカス対象となっている被写体に関連する情報に基づいて、前記撮像光による写真に付加する付加情報を決定し、当該付加情報を前記写真に付加する情報付加手段、および、
インターネット回線上にアップロードされた情報が入力されるインターネット情報入力手段として機能させ、
前記フォーカス優先度決定手段は、前記撮影情報が前記撮影情報生成手段によって生成されるたびに前記ォーカス優先度決定情報を累積的に高く設定し、前記フォーカス優先度決定情報は当該撮影情報の前記特徴情報とともに前記記憶手段に記憶され、
前記記憶手段には、前記情報処理装置を介して入力された情報であって、前記特徴情報抽出手段によって当該情報から抽出された前記特徴情報が記憶され、
前記特徴情報抽出手段は、前記音声情報から前記特徴情報を抽出し、前記フォーカス優先度決定手段は前記特徴情報に対応する前記音声情報が入力されるたびに当該特徴情報の前記フォーカス優先度決定情報を累積的に高く設定し、前記フォーカス優先度決定情報は当該撮影情報の前記特徴情報とともに前記記憶手段に記憶され、
前記特徴情報抽出手段は、前記インターネット回線上にアップロードされた前記情報から前記特徴情報を抽出し、
前記フォーカス優先度決定手段は、前記特徴情報に対応するアップロードされた前記情報が検索されるたびに、当該特徴情報の前記フォーカス優先度決定情報を累積的に高く設定し、前記フォーカス優先度決定情報は当該撮影情報の前記特徴情報とともに前記記憶手段に記憶され、
前記情報付加手段は、前記フォーカス対象となっている被写体の中に、前記アップロードされた情報の検索に基づき判定されるユーザの趣味に対応する被写体がある場合、前記撮像光による写真に付加する付加情報として、当該ユーザの趣味に対応する被写体を際立たせる当該付加情報を決定し、当該付加情報を前記写真に付加することを特徴とする情報処理装置の制御プログラム。
In a control program for an information processing apparatus having a photographing function,
Computer
Autofocus means for automatically focusing the lens on the focus target selected from among the imaging targets;
Photographing information generating means for generating photographing information based on imaging light acquired through the lens;
Feature information extraction means for analyzing the shooting information and extracting feature information characterizing the shooting information;
The feature information generated by the feature information extraction unit is searched in the storage unit, and the same feature information as the feature information is detected in the storage unit. When only one is detected by the storage unit, focus priority determination information is determined so as to focus on the shooting target corresponding to the feature information, and the feature information is stored in the storage unit during one shooting. A focus priority determination means for determining the focus priority determination information so as to determine a focus target based on the focus priority determination information corresponding to the feature information when a plurality of is detected in
A focus target determination unit that determines a focus target for shooting based on the focus priority determination information determined by the focus priority determination unit;
Audio information input means for inputting audio information from the imaging target;
Information adding means for determining additional information to be added to the photograph by the imaging light based on information related to the subject to be focused, and adding the additional information to the photograph; and
Function as an Internet information input means to input information uploaded on the Internet line ,
The focus priority determining means, every time said imaging information is generated by the photographing information generation unit, the full Okasu priority determination information set cumulatively increased, the focus priority determining information of the captured information Stored together with the feature information in the storage means,
The storage means stores information inputted through the information processing apparatus, the feature information extracted from the information by the feature information extraction means,
The feature information extracting means, wherein the extracting the feature information from the speech information, said focus priority determining means every time said voice information corresponding to the characteristic information is input, the focus priority determination of the characteristic information The information is set cumulatively high, and the focus priority determination information is stored in the storage unit together with the feature information of the shooting information,
The feature information extracting means extracts the feature information from the information uploaded on the Internet line,
The focus priority determination unit sets the focus priority determination information of the feature information to be cumulatively high every time the uploaded information corresponding to the feature information is searched, and the focus priority determination information Is stored in the storage unit together with the feature information of the photographing information,
The information adding means adds to the photograph by the imaging light when there is a subject corresponding to the user's hobby determined based on the search of the uploaded information among the subjects to be focused. information as the subject corresponding to the hobby of the user to determine the highlight the additional information, the control program for an information processing apparatus characterized that you added to the additional information to the photograph.
請求項4に記載の情報処理装置の制御プログラムがコンピュータに読み取り可能に記録されていることを特徴とする記録媒体。   A recording medium in which the control program for the information processing apparatus according to claim 4 is recorded in a computer-readable manner.
JP2009065399A 2009-03-18 2009-03-18 Information processing apparatus having autofocus function, control method of information processing apparatus having autofocus function, etc. Expired - Fee Related JP5402122B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2009065399A JP5402122B2 (en) 2009-03-18 2009-03-18 Information processing apparatus having autofocus function, control method of information processing apparatus having autofocus function, etc.

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2009065399A JP5402122B2 (en) 2009-03-18 2009-03-18 Information processing apparatus having autofocus function, control method of information processing apparatus having autofocus function, etc.

Publications (2)

Publication Number Publication Date
JP2010217613A JP2010217613A (en) 2010-09-30
JP5402122B2 true JP5402122B2 (en) 2014-01-29

Family

ID=42976528

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2009065399A Expired - Fee Related JP5402122B2 (en) 2009-03-18 2009-03-18 Information processing apparatus having autofocus function, control method of information processing apparatus having autofocus function, etc.

Country Status (1)

Country Link
JP (1) JP5402122B2 (en)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9890223B2 (en) 2010-09-28 2018-02-13 Sekisui Plastics Co., Ltd. Resin particles and process for producing same, antiglare film, light-diffusing resin composition, and external preparation
JP5990951B2 (en) 2012-03-15 2016-09-14 オムロン株式会社 Imaging apparatus, imaging apparatus control method, imaging apparatus control program, and computer-readable recording medium recording the program
JP6319981B2 (en) * 2013-09-30 2018-05-09 キヤノン株式会社 Imaging apparatus, information processing method, and program
JP6024719B2 (en) 2014-09-09 2016-11-16 カシオ計算機株式会社 Detection device, detection method, and program
US10902276B2 (en) 2016-12-22 2021-01-26 Samsung Electronics Co., Ltd. Apparatus and method for processing image

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB2374225A (en) * 2001-03-28 2002-10-09 Hewlett Packard Co Camera for recording linked information associated with a recorded image
JP2002333652A (en) * 2001-05-10 2002-11-22 Oki Electric Ind Co Ltd Photographing device and reproducing apparatus
JP2004240622A (en) * 2003-02-05 2004-08-26 Konica Minolta Holdings Inc Image processing method, image processor and image processing program
JP2006101186A (en) * 2004-09-29 2006-04-13 Nikon Corp Camera
JP4704225B2 (en) * 2006-01-30 2011-06-15 富士フイルム株式会社 Album creating apparatus, album creating method, and album creating program
US8330830B2 (en) * 2006-04-13 2012-12-11 Eastman Kodak Company Camera user input based image value index
JP4848569B2 (en) * 2007-06-14 2011-12-28 シャープ株式会社 Digital camera, camera phone

Also Published As

Publication number Publication date
JP2010217613A (en) 2010-09-30

Similar Documents

Publication Publication Date Title
US9471600B2 (en) Electronic device and method for handling tags
JP5763075B2 (en) Object information providing method and photographing apparatus to which the object information is applied
JP4757949B2 (en) Imaging apparatus, control method, control program, recording medium, and portable terminal
RU2408067C2 (en) Metadata identification
JP2010514023A (en) How to automatically prefetch words while entering multimedia message text
JP4651624B2 (en) System and method for audible control of camera associated with mobile phone
JP5218989B2 (en) Communication terminal device and program
JP5402122B2 (en) Information processing apparatus having autofocus function, control method of information processing apparatus having autofocus function, etc.
JP2007027945A (en) Photographing information presenting system
US20050267749A1 (en) Information processing apparatus and information processing method
JP5283947B2 (en) Voice recognition device for mobile terminal, voice recognition method, voice recognition program
JP7144571B2 (en) Information equipment and camera image sharing system
JP5152045B2 (en) Telephone device, image display method, and image display processing program
JP2007018166A (en) Information search device, information search system, information search method, and information search program
US9762767B2 (en) Imaging operation terminal, imaging system, software extraction method, and computer-readable device
TWI494864B (en) Method and system for searching image and computer program product using the method
JP2006238190A (en) Method and device for creating electronic album
JP4826500B2 (en) Information processing terminal device, data storage method thereof, and program
JP2003069925A (en) Attached information input method, device and program
JP5565057B2 (en) Portable information terminal, image registration method, and image classification and arrangement method
JP2006267934A (en) Minutes preparation device and minutes preparation processing program
JP5354648B2 (en) Terminal device and program
JP7333683B2 (en) Information provision system, information provision method and computer program
JP5561809B2 (en) Terminal device
JP2017092528A (en) Imaging apparatus, imaging method, image management system, and program

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20120203

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20121005

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20121016

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20121213

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20130430

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20130628

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20131001

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20131014

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313113

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees