JP2011114579A - Image collecting method and mobile device - Google Patents

Image collecting method and mobile device Download PDF

Info

Publication number
JP2011114579A
JP2011114579A JP2009269090A JP2009269090A JP2011114579A JP 2011114579 A JP2011114579 A JP 2011114579A JP 2009269090 A JP2009269090 A JP 2009269090A JP 2009269090 A JP2009269090 A JP 2009269090A JP 2011114579 A JP2011114579 A JP 2011114579A
Authority
JP
Japan
Prior art keywords
request
photographing
imaging
unit
image data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2009269090A
Other languages
Japanese (ja)
Other versions
JP5318734B2 (en
Inventor
Masaru Sanada
勝 真田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nippon Telegraph and Telephone Corp
Original Assignee
Nippon Telegraph and Telephone Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nippon Telegraph and Telephone Corp filed Critical Nippon Telegraph and Telephone Corp
Priority to JP2009269090A priority Critical patent/JP5318734B2/en
Publication of JP2011114579A publication Critical patent/JP2011114579A/en
Application granted granted Critical
Publication of JP5318734B2 publication Critical patent/JP5318734B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Abstract

<P>PROBLEM TO BE SOLVED: To obtain the data of an image on which a user's figure is shown. <P>SOLUTION: The method executes the following steps: a detecting step in which a mobile device 110a carried by a user 2a detects a mobile device 110b existing within a predetermined distance from the own device, a photographing request step in which the mobile device 110a requests the mobile device 110b to execute photographing, a step in which the mobile device 110b confirms that the mobile device 110a exists within a photographing range, a photographing execution step in which the mobile device 110b executes photographing in response to the request from the mobile device 110a, and an image transmitting step in which the mobile device 110b transmits the captured image data in accordance with information designated in the request from the mobile device 110a. <P>COPYRIGHT: (C)2011,JPO&INPIT

Description

本発明は、画像収集方法および携帯装置に関する。   The present invention relates to an image collection method and a portable device.

近年、デジタルカメラやカメラ付き携帯電話等の普及により、誰でも自分の日々の生活の様々な出来事を画像データとして容易に記録することが可能になっている。また、そのような日常生活を記録した画像データ等を個人の活動記録として集積し、個人の過去の活動を追跡できるようにするライフログと呼ばれるサービスも利用されている(例えば、非特許文献1および非特許文献2)。   In recent years, with the widespread use of digital cameras, camera-equipped mobile phones, etc., anyone can easily record various events in their daily lives as image data. In addition, a service called life log that collects image data and the like recorded in such daily life as individual activity records and enables tracking of individual past activities is also used (for example, Non-Patent Document 1). And Non-Patent Document 2).

“Life−Xについて”、[online]、ソニーマーケティング株式会社、[2009年10月15日検索]、インターネット<URL:http://life-x.jp/about/>“About Life-X”, [online], Sony Marketing Inc., [October 15, 2009 search], Internet <URL: http://life-x.jp/about/> “オンラインアルバムZorg”、[online]、株式会社ゾーグ、[2009年9月15日検索]、インターネット<URL:http://www.zorg.com/>“Online Album Zorg”, [online], Zorg Co., Ltd. [searched on September 15, 2009], Internet <URL: http://www.zorg.com/>

自分の日々の生活の様々な出来事を画像データとして記録する場合、自身の姿も画像に写っていることが好ましいが、従来技術では、個人が自身の姿が写った画像データを取得することは困難であった。デジタルカメラ等を自分に向けて自身の姿を撮影することは可能であるものの、撮影できるアングルが限定され、周囲の状況を背景として写し込み難い。また、同行者に撮影してもらうことは可能であるものの、日常生活では同行者を伴わずに行動することも多い。   When recording various events of one's daily life as image data, it is preferable that one's own figure is also reflected in the image, but in the prior art, it is not possible for an individual to acquire image data that reflects his / her own figure. It was difficult. Although it is possible to take a picture of yourself with a digital camera or the like, it is difficult to capture the background of the surroundings because the angle at which it can be taken is limited. In addition, although it is possible for the accompanying person to take a picture, it often acts without accompanying persons in daily life.

本発明は、上記に鑑みてなされたものであって、自分の姿が写った画像データを取得することができる画像収集方法および携帯装置を提供することを目的とする。   The present invention has been made in view of the above, and an object of the present invention is to provide an image collection method and a portable device that can acquire image data showing a person's appearance.

上述した課題を解決し、目的を達成するために、本発明に係る画像収集方法は、1つの態様において、利用者に携帯されている撮影要求装置が、自装置から所定の距離内に存在する撮影装置を検出する検出工程と、前記撮影要求装置が、前記検出工程において検出された撮影装置に撮影の実行を要求する撮影要求工程と、前記撮影装置が、前記撮影要求装置の外観上の特徴に基づいて、前記撮影要求装置が前記撮影装置の撮影範囲内に存在するか否かを判定する判定工程と、前記判定工程において前記撮影要求装置が前記撮影装置の撮影範囲内に存在すると判定された場合に、前記撮影装置が、前記撮影要求工程における要求に応じて撮影を実行する撮影実行工程と、前記撮影装置が、前記撮影実行工程において撮影した画像データを、前記撮影要求工程における要求にて指定された情報に従って送信する画像送信工程とを含むことを特徴とする。   In order to solve the above-described problems and achieve the object, an image collection method according to the present invention, in one aspect, includes a photographing request device carried by a user within a predetermined distance from the device itself. A detection step of detecting a photographing device, a photographing request step in which the photographing requesting device requests execution of photographing to the photographing device detected in the detection step, and an appearance feature of the photographing requesting device. Based on the determination step of determining whether or not the imaging request device is within the imaging range of the imaging device, and determining in the determination step that the imaging request device is within the imaging range of the imaging device. The imaging device performs imaging in response to the request in the imaging request step, and the imaging device captures the image data captured in the imaging execution step by the imaging device. Characterized in that it comprises an image transmission step of transmitting according to the information specified by the request in the shadow request process.

また、本発明に係る携帯装置は、1つの態様において、他の装置から撮影の実行の要求を受信する撮影要求受信手段と、前記要求の要求元の装置が撮影範囲内に存在するか否かを該装置の外観上の特徴に基づいて判定する要求元検出手段と、前記要求元検出手段によって前記要求の要求元の装置が撮影範囲内に存在すると判定された場合に、前記要求に応じて撮影を実行する撮影実行手段と、前記撮影実行手段によって撮影された画像データを、前記要求にて指定された情報に従って送信する画像送信手段とを備えることを特徴とする。   In one aspect, the portable device according to the present invention includes, in one aspect, a photographing request receiving unit that receives a photographing execution request from another device and whether or not the requesting device is within the photographing range. A request source detecting means for determining the request based on the appearance characteristics of the apparatus, and the request source detecting means in response to the request when the request source detecting means determines that the request source apparatus is within the imaging range. The image processing apparatus includes: an imaging execution unit that executes imaging; and an image transmission unit that transmits image data captured by the imaging execution unit according to information specified by the request.

本発明に係る画像収集方法および携帯装置は、自分の姿が写った画像データを取得することができるという効果を奏する。   The image collecting method and the portable device according to the present invention have an effect that it is possible to acquire image data that shows one's own appearance.

図1−1は、実施例1に係る画像収集システムを示す図である。FIG. 1-1 is a diagram illustrating an image collection system according to the first embodiment. 図1−2は、実施例1に係る画像収集システムの変形例を示す図である。FIG. 1-2 is a diagram illustrating a modification of the image collection system according to the first embodiment. 図2は、実施例1に係る携帯装置の構成を示すブロック図である。FIG. 2 is a block diagram illustrating the configuration of the mobile device according to the first embodiment. 図3は、実施例1に係る画像管理装置の構成を示すブロック図である。FIG. 3 is a block diagram illustrating the configuration of the image management apparatus according to the first embodiment. 図4は、実施例1に係る携帯装置の動作を示すフローチャートである。FIG. 4 is a flowchart illustrating the operation of the mobile device according to the first embodiment. 図5は、実施例1に係る画像管理装置の動作を示すフローチャートである。FIG. 5 is a flowchart illustrating the operation of the image management apparatus according to the first embodiment. 図6は、撮影要求装置の構成を示すブロック図である。FIG. 6 is a block diagram illustrating a configuration of the photographing request apparatus. 図7は、撮影装置の構成を示すブロック図である。FIG. 7 is a block diagram illustrating a configuration of the photographing apparatus. 図8は、実施例2に係る画像収集システムを示す図である。FIG. 8 is a diagram illustrating an image collection system according to the second embodiment. 図9は、実施例2に係る携帯装置の構成を示すブロック図である。FIG. 9 is a block diagram illustrating the configuration of the mobile device according to the second embodiment. 図10は、認証結果の記録の一例を示す図である。FIG. 10 is a diagram illustrating an example of recording of authentication results. 図11は、実施例2に係るサービス提供装置の構成を示すブロック図である。FIG. 11 is a block diagram illustrating the configuration of the service providing apparatus according to the second embodiment. 図12は、実施例2に係る携帯装置の動作を示すフローチャートである。FIG. 12 is a flowchart illustrating the operation of the mobile device according to the second embodiment. 図13は、認証要求処理の処理手順を示すフローチャートである。FIG. 13 is a flowchart showing the processing procedure of the authentication request processing. 図14は、要求元認証処理の処理手順を示すフローチャートである。FIG. 14 is a flowchart illustrating a processing procedure of request source authentication processing. 図15は、撮影要求送信処理の処理手順を示すフローチャートである。FIG. 15 is a flowchart illustrating the processing procedure of the imaging request transmission process. 図16は、撮影処理の処理手順を示すフローチャートである。FIG. 16 is a flowchart illustrating the processing procedure of the photographing process. 図17は、実施例2に係るサービス提供装置の動作を示すフローチャートである。FIG. 17 is a flowchart illustrating the operation of the service providing apparatus according to the second embodiment.

以下に、本発明に係る画像収集方法および携帯装置の実施例を図面に基づいて詳細に説明する。なお、この実施例によりこの発明が限定されるものではない。また、以下の実施例では、既に説明した部分と同様の部分には同一の符号を付して、重複する説明を省略する。   Embodiments of an image collection method and a portable device according to the present invention will be described below in detail with reference to the drawings. Note that the present invention is not limited to the embodiments. In the following embodiments, the same parts as those already described are denoted by the same reference numerals, and redundant description is omitted.

まず、本実施例に係る画像収集システムおよび画像収集方法について図1−1を参照しながら説明する。図1−1に示すように、本実施例に係る画像収集システムは、携帯装置110aおよび110bと、画像管理装置120aおよび120bとを含む。   First, an image collection system and an image collection method according to the present embodiment will be described with reference to FIG. As illustrated in FIG. 1A, the image collection system according to the present embodiment includes portable devices 110a and 110b and image management devices 120a and 120b.

携帯装置110aは、利用者2aの頭部や肩等に装着されるウェアブルなデバイスであり、利用者2aの視点で撮影を実行して画像データを生成し、生成した画像データを画像管理装置120aに保存させる機能を有する。携帯装置110bは、利用者2bの頭部や肩等に装着されるウェアブルなデバイスであり、利用者2bの視点で撮影を実行して画像データを生成し、生成した画像データを画像管理装置120bに保存させる機能を有する。   The portable device 110a is a wearable device that is worn on the user's 2a head, shoulders, and the like. The portable device 110a executes shooting from the viewpoint of the user 2a to generate image data, and the generated image data is used as the image management device 120a. Has the function of saving. The portable device 110b is a wearable device that is worn on the head or shoulder of the user 2b, and performs image capturing from the viewpoint of the user 2b to generate image data. The generated image data is used as the image management device 120b. Has the function of saving.

携帯装置110aおよび110bは、それぞれ、画像データを画像管理装置120aおよび120bに保存させるために、画像データを含む画像データ保存要求を無線通信で無線基地局20へ送信する。無線基地局20は、受信した画像データ保存要求をその要求が示す送信先へネットワーク10を通じて転送する。   The portable devices 110a and 110b transmit image data storage requests including image data to the wireless base station 20 by wireless communication in order to store the image data in the image management devices 120a and 120b, respectively. The radio base station 20 transfers the received image data storage request to the transmission destination indicated by the request through the network 10.

画像管理装置120aは、利用者2aの画像データの保管や公開を行うサーバ装置であり、画像管理装置120bは、利用者2bの画像データの保管や公開を行うサーバ装置である。画像管理装置120aおよび120bは、例えば、ライフログサービスを提供する装置に相当する。   The image management device 120a is a server device that stores and discloses image data of the user 2a, and the image management device 120b is a server device that stores and discloses image data of the user 2b. The image management devices 120a and 120b correspond to devices that provide a life log service, for example.

このような構成の画像収集システムにおいて、本実施例に係る画像収集方法は以下のように実行される。携帯装置110aは、所定の範囲1a内に他の携帯装置110が存在するか否かを定期的に確認する。ここで、所定の範囲1aは、携帯装置110aを携帯している利用者2aの姿を他の携帯装置110が撮影できる範囲であり、例えば、半径約10メートルの範囲である。   In the image collection system having such a configuration, the image collection method according to the present embodiment is executed as follows. The portable device 110a periodically checks whether or not another portable device 110 exists within the predetermined range 1a. Here, the predetermined range 1a is a range in which the other mobile device 110 can photograph the appearance of the user 2a carrying the mobile device 110a, for example, a radius of about 10 meters.

そして、携帯装置110aは、所定の範囲1a内に携帯装置110bが存在することを検出すると、携帯装置110bに対して撮影要求を送信する(ステップS11)。携帯装置110aが送信する撮影要求には、自装置の利用者を識別するためのID等の認証情報(この場面では、利用者2aの認証情報)や画像データの転送先を示す情報(この場面では、画像管理装置120aのネットワークアドレス等)が含まれる。   When the portable device 110a detects that the portable device 110b exists within the predetermined range 1a, the portable device 110a transmits a photographing request to the portable device 110b (step S11). In the photographing request transmitted by the portable device 110a, authentication information such as an ID for identifying the user of the own device (in this case, authentication information of the user 2a) and information indicating the transfer destination of the image data (this scene) Includes the network address of the image management apparatus 120a.

携帯装置110bは、撮影要求を受信すると、要求元検出用の撮影を行い、撮影によって得られた画像データを解析して携帯装置110aが自装置の撮影範囲に入っているかを判定する(ステップS12)。携帯装置110aおよび110bは、ある特定の形状や色彩等の外観上の特徴を有しており、携帯装置110bは、その外観上の特徴を有する物品が画像データに含まれる場合に、携帯装置110aが自装置の撮影範囲に入っていると判定する。   When the portable device 110b receives the photographing request, the portable device 110b performs photographing for detecting the request source, analyzes image data obtained by photographing, and determines whether the portable device 110a is within the photographing range of the own device (step S12). ). The mobile devices 110a and 110b have appearance features such as a specific shape and color, and the mobile device 110b can be used when the image data includes an article having the appearance features. Is in the shooting range of the device itself.

携帯装置110bは、携帯装置110aが自装置の撮影範囲に入っていると判定すると、通常の撮影を実行して画像データを生成し、生成した画像データを含む画像データ保存要求を画像管理装置120bへ向けて送信する(ステップS13)。この場面で携帯装置110bが送信する画像データ保存要求には、携帯装置110bの利用者を識別するためのID等の認証情報が送信元の認証情報として含められるとともに、撮影要求に含まれていた認証情報と転送先を示す情報が対応付けて含められる。画像データ保存要求は、無線基地局20とネットワーク10を介して画像管理装置120bへ到達する。   When the portable device 110b determines that the portable device 110a is within the photographing range of the own device, the portable device 110b executes normal photographing to generate image data, and issues an image data storage request including the generated image data to the image management device 120b. (Step S13). The image data storage request transmitted by the portable device 110b in this scene includes authentication information such as an ID for identifying the user of the portable device 110b as the authentication information of the transmission source and is included in the photographing request. Authentication information and information indicating the transfer destination are included in association with each other. The image data storage request reaches the image management apparatus 120b via the wireless base station 20 and the network 10.

画像管理装置120bは、携帯装置110bからの画像データ保存要求を受信すると、画像データ保存要求に転送先を示す情報が含まれているか否かを確認する。この場面では、画像データ保存要求に転送先を示す情報として画像管理装置120aの情報が含まれているので、画像管理装置120bは、送信元である携帯装置110bの利用者の認証情報が正しいことを確認してその認証情報に含まれるIDに対応する領域に画像データを保存する通常の動作を行った後、画像データ保存要求を画像管理装置120aへ送信する。送信される画像データ保存要求には、転送先を示す情報と対応付けて格納されていた認証情報が送信元の認証情報として含まれるとともに、画像データのコピーが含まれる。   When the image management device 120b receives the image data storage request from the portable device 110b, the image management device 120b checks whether or not the image data storage request includes information indicating the transfer destination. In this scene, the image data storage request includes the information of the image management device 120a as the information indicating the transfer destination, so that the image management device 120b has the correct authentication information of the user of the portable device 110b that is the transmission source. After performing the normal operation of storing the image data in the area corresponding to the ID included in the authentication information, an image data storage request is transmitted to the image management apparatus 120a. The transmitted image data storage request includes authentication information stored in association with information indicating the transfer destination as authentication information of the transmission source, and includes a copy of the image data.

画像管理装置120aは、画像データ保存要求を受信すると、画像データ保存要求に転送先を示す情報が含まれているか否かを確認する。この場面では、転送先を示す情報が含まれないので、画像管理装置120aは、画像データ保存要求に含まれる認証情報が正しいことを確認した後、その認証情報に含まれるIDに対応する領域に画像データを保存する(ステップS14)。   Upon receiving the image data storage request, the image management apparatus 120a checks whether or not the image data storage request includes information indicating the transfer destination. In this scene, since information indicating the transfer destination is not included, the image management apparatus 120a confirms that the authentication information included in the image data storage request is correct, and then stores the information in the area corresponding to the ID included in the authentication information. Image data is saved (step S14).

このように、本実施例に係る画像収集方法では、利用者2aが携帯する携帯装置110aが所定の範囲1a内に携帯装置110bが存在することを検出して携帯装置110bに撮影の実行を要求する仕組みと、携帯装置110bが自装置の撮影範囲に携帯装置110aが入っているのを確認した後に撮影を実行し、画像データを要求に従って送信する仕組みとを組み合わせて利用することとしたので、利用者2aは、自身の姿が写った画像データを取得することができる。   As described above, in the image collecting method according to the present embodiment, the portable device 110a carried by the user 2a detects that the portable device 110b exists within the predetermined range 1a, and requests the portable device 110b to execute shooting. Since the mobile device 110b and the mobile device 110b confirm that the mobile device 110a is within the shooting range of the device, the shooting is executed and the image data is transmitted according to the request. The user 2a can acquire image data showing his / her appearance.

なお、上記の説明では、携帯装置110bが撮影した画像データを利用者2aが取得する場合について説明したが、同様の手順により、携帯装置110aが撮影した画像データを利用者2bが取得することができる。また、図1に示した携帯装置110と画像管理装置120の台数は一例であり、これらの装置の台数は任意である。   In the above description, the case where the user 2a acquires the image data captured by the mobile device 110b has been described. However, the user 2b can acquire the image data captured by the mobile device 110a by the same procedure. it can. In addition, the numbers of the portable device 110 and the image management device 120 illustrated in FIG. 1 are examples, and the number of these devices is arbitrary.

また、上記の説明における要求元検出用の撮影では、携帯装置110bが焦点距離を変更して複数回の撮影を行うこととしてもよい。この場合、携帯装置110bの撮影範囲内に要求元が存在すれば、いずれかの画像データに要求元が鮮明に写っている可能性が高くなるので、要求元の検出精度が向上する。また、要求元が鮮明に写っていた焦点距離で通常の撮影を実行することにより、利用者2aは、自身の姿が鮮明に写った画像データを取得することができる。   Further, in the request source detection shooting in the above description, the portable device 110b may change the focal length and perform shooting a plurality of times. In this case, if there is a request source within the shooting range of the portable device 110b, there is a high possibility that the request source is clearly shown in any of the image data, so that the detection accuracy of the request source is improved. In addition, by performing normal shooting at a focal length at which the request source is clearly imaged, the user 2a can acquire image data in which his / her appearance is clearly imaged.

また、上記の説明では、携帯装置110bが要求元検出用の撮影と通常の撮影という2回の撮影を行っているが、これは要求元検出用の撮影では要求元の検出精度を向上させるために通常の撮影とは撮影条件を変更することを想定しているためである。このため、撮影条件を変更しなくても十分な精度で要求元を検出できる場合は、要求元検出用の撮影を実行せずに、通常の撮影で得られた画像データ内に要求元が写っているかを判定し、要求元が写っていれば、その画像データを要求に従って画像管理装置120へ送信する構成としてもよい。   In the above description, the portable device 110b performs two shootings, ie, shooting for request source detection and normal shooting. This is to improve detection accuracy of the request source in shooting for request source detection. This is because normal shooting assumes changing shooting conditions. Therefore, if the request source can be detected with sufficient accuracy without changing the shooting conditions, the request source is captured in the image data obtained by normal shooting without performing shooting for detecting the request source. If the request source is captured, the image data may be transmitted to the image management apparatus 120 according to the request.

また、図1−1に示した例は、どの方向から撮影されたかに関係なく自身の姿が写った画像データを取得する例であるが、自分の正面方向から撮影された画像データのみを取得したい場合は、図1−2の例に示すように、携帯装置110aが、前方の所定の範囲1b内に他の携帯装置110が存在するか否かを定期的に確認するようにしてもよい。   In addition, the example shown in FIG. 1-1 is an example of acquiring image data that shows the appearance of itself regardless of the direction from which the image was taken, but only the image data taken from the front direction of the user is acquired. If desired, as shown in the example of FIG. 1-2, the portable device 110a may periodically check whether another portable device 110 exists in the predetermined range 1b ahead. .

前方の所定の範囲1b内に他の携帯装置110が存在するか否かを定期的に確認するには、例えば、携帯装置110aが短波のように指向性の強い電波等を用いて他の携帯装置110を検出することとしてもよいし、携帯装置110aが撮影した画像データ内の所定の範囲1bに相当する領域に他の携帯装置110が写っているか否かを判定することとしてもよい。   In order to periodically check whether another portable device 110 is present in the predetermined range 1b ahead, for example, the portable device 110a uses another radio wave having strong directivity such as a short wave. The device 110 may be detected, or it may be determined whether another portable device 110 is shown in an area corresponding to the predetermined range 1b in the image data captured by the portable device 110a.

次に、図1に示した携帯装置110aおよび110bと画像管理装置120aおよび120bのより詳細な構成について説明する。なお、携帯装置110aおよび110bの構成は同様であるので、携帯装置110aを例にして構成を説明する。また、画像管理装置120aおよび120bの構成は同様であるので、画像管理装置120aを例にして構成を説明する。   Next, a more detailed configuration of the portable devices 110a and 110b and the image management devices 120a and 120b shown in FIG. 1 will be described. Since the configurations of the mobile devices 110a and 110b are the same, the configuration will be described using the mobile device 110a as an example. Since the image management apparatuses 120a and 120b have the same configuration, the configuration will be described using the image management apparatus 120a as an example.

図2は、携帯装置110aの構成を示すブロック図である。図2に示すように、携帯装置110aは、撮影部111と、通信部112と、通信部113と、記憶部114と、制御部115とを有する。撮影部111は、撮像センサによって得られる信号をデジタル処理して画像データを生成する。   FIG. 2 is a block diagram illustrating a configuration of the mobile device 110a. As illustrated in FIG. 2, the mobile device 110 a includes a photographing unit 111, a communication unit 112, a communication unit 113, a storage unit 114, and a control unit 115. The imaging unit 111 digitally processes a signal obtained by the imaging sensor to generate image data.

通信部112は、比較的短距離の通信を行うための通信部であり、他の携帯装置110を検出したり、他の携帯装置110との間で要求や応答をやりとりしたりするために使用される。通信部112は、例えば、光や音波や微弱な電波を用いて対向の装置と通信を行う。通信部113は、比較的長距離の通信を行うための通信部であり、無線基地局20を介して画像管理装置120との間で要求や応答をやりとりしたりするために使用される。   The communication unit 112 is a communication unit for performing communication over a relatively short distance, and is used for detecting another portable device 110 and exchanging requests and responses with the other portable device 110. Is done. The communication unit 112 communicates with the opposite device using, for example, light, sound waves, or weak radio waves. The communication unit 113 is a communication unit for performing communication over a relatively long distance, and is used for exchanging requests and responses with the image management apparatus 120 via the radio base station 20.

記憶部114は、例えば、半導体記憶装置であり、自装置を所有する利用者のIDや自装置を所有する利用者に対応する画像管理装置120のネットワークアドレスのように制御部115の動作に必要な各種設定情報や、撮影部111によって生成された画像データを記憶する。   The storage unit 114 is a semiconductor storage device, for example, and is necessary for the operation of the control unit 115 such as the ID of the user who owns the device and the network address of the image management device 120 corresponding to the user who owns the device. Various kinds of setting information and image data generated by the photographing unit 111 are stored.

制御部115は、携帯装置110aを全体制御する制御部であり、撮影要求処理部115aと、撮影実行処理部115bとを有する。撮影要求処理部115aは、撮影手段検出部115cと、撮影要求送信部115dとを有し、所定の範囲1a内に存在する他の携帯装置110またはこれと同等の機能を有する装置を検出するとともに、検出した装置に撮影の実行と画像データの送信を要求する。撮影実行処理部115bは、撮影要求受信部115eと、要求元検出部115fと、撮影実行部115gと、画像送信部115hとを有し、予め設定されているタイミングと他の装置から要求されて要求元が撮影範囲内に存在することを確認したタイミングで撮影部111に撮影を実行させ、生成された画像データを自装置に対応する画像管理装置120へ送信する。   The control unit 115 is a control unit that totally controls the portable device 110a, and includes a photographing request processing unit 115a and a photographing execution processing unit 115b. The imaging request processing unit 115a includes an imaging means detection unit 115c and an imaging request transmission unit 115d, and detects another portable device 110 existing in the predetermined range 1a or a device having an equivalent function. The detected apparatus is requested to execute photographing and transmit image data. The imaging execution processing unit 115b includes an imaging request reception unit 115e, a request source detection unit 115f, an imaging execution unit 115g, and an image transmission unit 115h, and is requested from a preset timing and another device. The photographing unit 111 is caused to perform photographing at a timing when it is confirmed that the request source is within the photographing range, and the generated image data is transmitted to the image management device 120 corresponding to the own device.

撮影手段検出部115cは、所定の範囲1a内に存在する他の携帯装置110またはこれと同等の機能を有する装置を検出する。具体的には、撮影手段検出部115cは、通信部112から所定の範囲1a内に届く程度の強度で所定の検出用の信号を送信させ、いずれかの装置からの応答が受信された場合に他の携帯装置110等が所定の範囲1a内に存在すると判定する。また、撮影手段検出部115cは、所定の検出用の信号が通信部112で受信された場合に、通信部112から応答を送信させる。   The imaging means detection unit 115c detects another portable device 110 existing in the predetermined range 1a or a device having a function equivalent to this. Specifically, the imaging means detection unit 115c transmits a predetermined detection signal with an intensity that reaches within the predetermined range 1a from the communication unit 112, and when a response from any device is received. It is determined that another portable device 110 or the like is within the predetermined range 1a. In addition, the imaging unit detection unit 115 c transmits a response from the communication unit 112 when a predetermined detection signal is received by the communication unit 112.

撮影要求送信部115dは、撮影手段検出部115cによって他の携帯装置110等が検出された場合に、通信部112から撮影要求を送信させる。撮影要求送信部115dは、自装置を所有する利用者のID等を記憶部114から取得して認証情報として撮影要求に含めるとともに、自装置を所有する利用者に対応する画像管理装置120のネットワークアドレスを記憶部114から取得して画像データの転送先を示す情報として撮影要求に含める。   The imaging request transmission unit 115d transmits an imaging request from the communication unit 112 when another imaging apparatus 110 or the like is detected by the imaging unit detection unit 115c. The imaging request transmission unit 115d acquires the ID and the like of the user who owns the device from the storage unit 114 and includes it as authentication information in the imaging request, and also the network of the image management device 120 corresponding to the user who owns the device. The address is acquired from the storage unit 114 and included in the photographing request as information indicating the transfer destination of the image data.

撮影要求受信部115eは、撮影要求が通信部112で受信された場合に、撮影要求の要求元が撮影部111の撮影範囲内に存在するかを要求元検出部115fに確認させる。要求元検出部115fは、撮影部111に撮影を実行させ、生成された画像データ内に撮影要求の要求元が存在するか否かを判定する。具体的には、要求元検出部115fは、撮影要求の要求元がもっているはずの形状や色彩等の外観上の特徴が画像データに含まれているか否かを解析することによって、画像データ内に撮影要求の要求元が存在するか否かを判定する。   When the imaging request is received by the communication unit 112, the imaging request reception unit 115e causes the request source detection unit 115f to check whether the request source of the imaging request exists within the imaging range of the imaging unit 111. The request source detection unit 115f causes the photographing unit 111 to perform photographing and determines whether or not a photographing request request source exists in the generated image data. Specifically, the request source detection unit 115f analyzes whether or not the image data includes appearance features such as shape and color that the request source of the imaging request should have. It is determined whether or not there is a request source for the imaging request.

なお、携帯装置110の形状や色彩等の外観上の特徴が機種毎に異なる場合にも対応できるように、撮影要求送信部115dが自装置の外観上の特徴に関する情報を撮影要求に含めて送信し、要求元検出部115fが撮影要求に含まれる情報が示す外観上の特徴が画像データに含まれているか否かを解析することとしてもよい。   Note that the imaging request transmission unit 115d transmits information regarding the appearance characteristics of the mobile device 110 included in the imaging request so that it is possible to cope with the case where the appearance characteristics such as the shape and color of the portable device 110 are different for each model. Then, the request source detection unit 115f may analyze whether or not the appearance feature indicated by the information included in the imaging request is included in the image data.

撮影実行部115gは、予め設定されているタイミングまたは要求元検出部115fが撮影要求の要求元を検出したタイミングで撮影部111に画像データを生成させ、画像送信部115hに画像データの送信を要求する。   The imaging execution unit 115g causes the imaging unit 111 to generate image data at a preset timing or when the request source detection unit 115f detects the request source of the imaging request, and requests the image transmission unit 115h to transmit the image data. To do.

画像送信部115hは、自装置を所有する利用者に対応する画像管理装置120のネットワークアドレスと自装置を所有する利用者のID等の認証情報を記憶部114から取得し、取得したネットワークアドレスを送信先として設定し、取得した認証情報を送信元の認証情報として設定した画像データ保存要求を通信部113から送信させる。画像データ保存要求には、生成された画像データが含められる。   The image transmission unit 115h acquires authentication information such as the network address of the image management device 120 corresponding to the user who owns the device and the ID of the user who owns the device from the storage unit 114, and uses the acquired network address. An image data storage request that is set as a transmission destination and the acquired authentication information is set as the authentication information of the transmission source is transmitted from the communication unit 113. The generated image data is included in the image data storage request.

要求元検出部115fが撮影要求の要求元を検出したタイミングで画像データが生成された場合、画像送信部115hは、受信された撮影要求に含まれていた認証情報と転送先を示す情報を対応付けて、送信される画像データ保存要求に含める。   When the image data is generated at the timing when the request source detection unit 115f detects the request source of the shooting request, the image transmission unit 115h associates the authentication information included in the received shooting request with the information indicating the transfer destination. In addition, it is included in the transmitted image data storage request.

図3は、画像管理装置120aの構成を示すブロック図である。図3に示すように、画像管理装置120aは、通信部121と、画像記憶部122と、利用者情報記憶部123と、制御部124とを有する。なお、図3では、本実施例に係る画像収集方法に関連する構成のみを図示しており、画像データを公開するための構成等については図示を省略している。   FIG. 3 is a block diagram illustrating a configuration of the image management apparatus 120a. As illustrated in FIG. 3, the image management apparatus 120 a includes a communication unit 121, an image storage unit 122, a user information storage unit 123, and a control unit 124. In FIG. 3, only the configuration related to the image collection method according to the present embodiment is illustrated, and the configuration for publishing the image data is not illustrated.

通信部121は、ネットワーク10に接続された他の装置との間で要求や応答をやりとりするとともに、無線基地局20を介して携帯装置110との間で要求や応答をやりとりしたりするために使用される。   The communication unit 121 exchanges requests and responses with other devices connected to the network 10 and also exchanges requests and responses with the portable device 110 via the radio base station 20. used.

画像記憶部122と利用者情報記憶部123は、例えば、ハードディスク装置や半導体記憶装置である。画像記憶部122は、利用者情報記憶部123に登録されている各利用者の画像データを、利用者毎に設けられた領域に記憶する。利用者情報記憶部123は、利用者のIDや暗証番号等の認証番号や、利用者が利用しているサービスの各種設定情報等を記憶する。   The image storage unit 122 and the user information storage unit 123 are, for example, a hard disk device or a semiconductor storage device. The image storage unit 122 stores the image data of each user registered in the user information storage unit 123 in an area provided for each user. The user information storage unit 123 stores an authentication number such as a user ID and a personal identification number, and various setting information of services used by the user.

制御部124は、画像管理装置120aを全体制御する制御部であり、画像受信部124aと、保存場所判定部124bと、画像保存部124cと、画像転送部124dとを有する。   The control unit 124 is a control unit that controls the entire image management apparatus 120a, and includes an image reception unit 124a, a storage location determination unit 124b, an image storage unit 124c, and an image transfer unit 124d.

画像受信部124aは、画像データ保存要求が通信部121で受信された場合に、画像データ保存要求に含まれる画像データの保存場所を保存場所判定部124bに判定させる。保存場所判定部124bは、画像データ保存要求に転送先を示す情報が含まれていなければ、画像データの保存場所を自装置と判定し、さもなければオリジナルの画像データの保存場所を自装置と判定し、画像データのコピーの保存場所を画像データ保存要求に含まれる転送先を示す情報が示す他の装置と判定する。   When the image data storage request is received by the communication unit 121, the image reception unit 124a causes the storage location determination unit 124b to determine the storage location of the image data included in the image data storage request. If the image data storage request does not include information indicating the transfer destination, the storage location determination unit 124b determines the storage location of the image data as the own device, and otherwise sets the storage location of the original image data as the own device. The image data copy storage location is determined to be another device indicated by the information indicating the transfer destination included in the image data storage request.

画像保存部124cは、画像データ保存要求に送信元の認証情報として含まれるID等と利用者情報記憶部123に記憶されている利用者のID等を照合して認証を行う。そして、認証が成功した場合、画像保存部124cは、認証が成功した利用者に対応する画像記憶部122の領域に画像データを保存する。一方、認証が成功しなかった場合、画像保存部124cは、画像データを破棄する。   The image storage unit 124 c performs authentication by checking the ID included in the image data storage request as the authentication information of the transmission source with the user ID stored in the user information storage unit 123. When the authentication is successful, the image storage unit 124c stores the image data in the area of the image storage unit 122 corresponding to the user who has been authenticated successfully. On the other hand, when the authentication is not successful, the image storage unit 124c discards the image data.

画像転送部124dは、保存場所判定部124bによって画像データのコピーの保存場所が他の装置と判定された場合に、転送先を示す情報として設定されているネットワークアドレスを送信先として設定した画像データ保存要求を通信部121から送信させる。画像転送部124dが送信させる画像データ保存要求には、転送先を示す情報と対応付けて格納されていた認証情報が送信元の認証情報として含まれるとともに、画像データのコピーが含まれる。   When the storage location determination unit 124b determines that the storage location of the copy of the image data is another device, the image transfer unit 124d sets the network data set as information indicating the transfer destination as the transmission destination. A save request is transmitted from the communication unit 121. The image data storage request transmitted by the image transfer unit 124d includes authentication information stored in association with information indicating the transfer destination as authentication information of the transmission source, and includes a copy of the image data.

次に、図2に示した携帯装置110aと図3に示した画像管理装置120aの動作についてフローチャートを参照しながら説明する。   Next, operations of the portable device 110a shown in FIG. 2 and the image management device 120a shown in FIG. 3 will be described with reference to flowcharts.

図4は、携帯装置110aの動作を示すフローチャートである。図4に示すように、携帯装置110aにおいては、通信部112で撮影要求が受信されると(ステップS101肯定)、要求元検出部115fが、撮影部111に撮影を実行させ、生成された画像データ内に撮影要求の要求元が存在するか否かを判定する(ステップS102)。   FIG. 4 is a flowchart showing the operation of the portable device 110a. As illustrated in FIG. 4, in the mobile device 110a, when a communication request is received by the communication unit 112 (Yes in step S101), the request source detection unit 115f causes the shooting unit 111 to perform shooting and generates a generated image. It is determined whether or not the request source of the imaging request exists in the data (step S102).

ここで、画像データ内に撮影要求の要求元が存在すれば(ステップS103肯定)、撮影実行部115gが、撮影部111に撮影を実行させる(ステップS104)。そして、画像送信部115hが、撮影部111によって生成された画像データを含む画像データ保存要求を画像管理装置120aへ送信する(ステップS105)。   Here, if the request source of the shooting request exists in the image data (Yes at Step S103), the shooting execution unit 115g causes the shooting unit 111 to execute shooting (Step S104). Then, the image transmission unit 115h transmits an image data storage request including the image data generated by the photographing unit 111 to the image management apparatus 120a (step S105).

一方、通信部112で撮影要求が受信されていない場合(ステップS101否定)、撮影手段検出部115cが、所定の範囲1a内に携帯装置110b等が存在することを検出していれば(ステップS106肯定)、撮影要求送信部115dが、撮影要求を送信する(ステップS107)。   On the other hand, when the photographing request is not received by the communication unit 112 (No at Step S101), if the photographing unit detection unit 115c detects that the portable device 110b or the like is present within the predetermined range 1a (Step S106). (Yes), the shooting request transmission unit 115d transmits a shooting request (step S107).

以上の処理手順を携帯装置110aは、繰り返し実行する。また、携帯装置110aは、図4に示した動作以外にも、予め設定されているタイミングで撮影部111に撮影を実行させ、生成された画像データを画像管理装置120aへ送信する動作を実行する。   The portable device 110a repeatedly executes the above processing procedure. In addition to the operation shown in FIG. 4, the portable device 110a causes the photographing unit 111 to perform photographing at a preset timing, and performs an operation of transmitting the generated image data to the image management device 120a. .

図5は、画像管理装置120aの動作を示すフローチャートである。図5に示すように、画像管理装置120aにおいては、通信部121で画像データ保存要求が受信されると(ステップS201肯定)、保存場所判定部124bが、画像データの転送が必要であるかを判定する。   FIG. 5 is a flowchart showing the operation of the image management apparatus 120a. As shown in FIG. 5, in the image management apparatus 120a, when the image data storage request is received by the communication unit 121 (Yes in step S201), the storage location determination unit 124b determines whether the image data needs to be transferred. judge.

そして、画像データの転送が必要でないと判定された場合は(ステップS202否定)、画像保存部124cが、画像データを画像記憶部122に保存する(ステップS203)。一方、画像データの転送が必要であると判定された場合は(ステップS202肯定)、画像保存部124cが、画像データを画像記憶部122に保存し(ステップS204)、画像転送部124dが、画像データのコピーを含む画像データ保存要求を、転送先を示す情報に対応する装置へ転送する(ステップS205)。   If it is determined that image data transfer is not necessary (No at Step S202), the image storage unit 124c stores the image data in the image storage unit 122 (Step S203). On the other hand, when it is determined that the image data needs to be transferred (Yes at Step S202), the image storage unit 124c stores the image data in the image storage unit 122 (Step S204), and the image transfer unit 124d The image data storage request including the data copy is transferred to the device corresponding to the information indicating the transfer destination (step S205).

以上の処理手順を画像管理装置120aは、繰り返し実行する。また、画像管理装置120aは、図5に示した動作以外にも、画像記憶部122に記憶されている画像データを、ネットワーク10を介して公開する等の動作を行う。   The image management apparatus 120a repeatedly executes the above processing procedure. In addition to the operations shown in FIG. 5, the image management apparatus 120 a performs operations such as publishing image data stored in the image storage unit 122 via the network 10.

なお、本実施例では、撮影を他の装置に要求する機能と、他の装置からの要求に従って撮影を実行する機能とを併せもった携帯装置110aおよび110bの例を示したが、これらの機能の一方のみをもつように装置を構成してもよい。   In the present embodiment, examples of the portable devices 110a and 110b that include a function for requesting another device for shooting and a function for executing shooting according to a request from another device have been described. The apparatus may be configured to have only one of them.

例えば、撮影を他の装置に要求する機能はもつが、他の装置からの要求に従って撮影を実行する機能はもたない装置は、図6に示す撮影要求装置130のように、通信部112と、記憶部114と、撮影要求処理部115aを含む制御部135とを有する装置として構成することができる。   For example, a device that has a function of requesting another device for shooting but does not have a function of performing shooting in accordance with a request from another device, like the shooting request device 130 shown in FIG. The storage unit 114 and the control unit 135 including the photographing request processing unit 115a can be configured as an apparatus.

一方、撮影を他の装置に要求する機能はもたないが、他の装置からの要求に従って撮影を実行する機能はもつ装置は、図7に示す撮影装置140のように、撮影部111と、通信部112と、通信部113と、記憶部114と、撮影実行処理部115bを含む制御部145とを有する装置として構成することができる。   On the other hand, an apparatus that does not have a function of requesting shooting from another apparatus, but has a function of executing shooting according to a request from another apparatus, includes a shooting unit 111, as in the shooting apparatus 140 illustrated in FIG. The communication unit 112, the communication unit 113, the storage unit 114, and the control unit 145 including the imaging execution processing unit 115b can be configured.

このように携帯装置110aの機能を撮影要求装置130と撮影装置140という2台の装置に分離する場合、利用者は、目的や都合に応じて、撮影要求装置130と撮影装置140を両方とも携帯してもよいし、一方のみを携帯してもよい。また、この場合、撮影装置140を街頭や店頭などに固定的に設置することとしてもよい。   In this way, when the functions of the portable device 110a are separated into two devices, the photographing request device 130 and the photographing device 140, the user carries both the photographing request device 130 and the photographing device 140 according to the purpose and convenience. Alternatively, only one of them may be carried. In this case, the photographing device 140 may be fixedly installed on a street or a store.

また、本実施例では、携帯装置110が、他の装置から撮影要求を受信した場合に、自装置に対応する画像管理装置を経由して撮影要求で指定された画像管理装置へ画像データを送信することとしたが、異なる経路で画像データを送信することとしてもよい。例えば、他の装置から撮影要求を受信した場合に、携帯装置110が、自装置に対応する画像管理装置を経由させることなく、撮影要求で指定された画像管理装置へ画像データを直接に送信することとしてもよい。また、他の装置から撮影要求を受信した場合に、携帯装置110が、画像データを撮影要求の送信元の装置へ送信することとしてもよい。   In this embodiment, when the portable device 110 receives a shooting request from another device, the portable device 110 transmits image data to the image management device designated by the shooting request via the image management device corresponding to the own device. However, the image data may be transmitted through a different route. For example, when a shooting request is received from another device, the portable device 110 directly transmits the image data to the image management device designated by the shooting request without going through the image management device corresponding to the device itself. It is good as well. In addition, when a photographing request is received from another device, the portable device 110 may transmit the image data to the device that has transmitted the photographing request.

本実施例では、利用者が、ほぼ正面から見た自分の姿が写っている画像を自分の希望するタイミングで取得することを可能にする例について説明する。   In the present embodiment, an example will be described in which a user can acquire an image in which his / her appearance is seen almost from the front at a timing desired by the user.

まず、本実施例に係る画像収集システムおよび画像収集方法について図8を参照しながら説明する。図8に示すように、本実施例に係る画像収集システムは、携帯装置210aおよび210bと、画像管理装置220aおよび220bと、サービス提供装置250とを含む。なお、図8では、無線基地局20の図示を説明の便宜上省略している。   First, an image collection system and an image collection method according to the present embodiment will be described with reference to FIG. As shown in FIG. 8, the image collection system according to the present embodiment includes portable devices 210a and 210b, image management devices 220a and 220b, and a service providing device 250. In FIG. 8, the illustration of the radio base station 20 is omitted for convenience of explanation.

携帯装置210aは、利用者2aの頭部や肩等に装着されるウェアブルなデバイスであり、利用者2aの視点で撮影を実行して画像データを生成し、生成した画像データを画像管理装置220aに保存させる機能を有する。携帯装置210bは、利用者2bの頭部や肩等に装着されるウェアブルなデバイスであり、利用者2bの視点で撮影を実行して画像データを生成し、生成した画像データを画像管理装置220bに保存させる機能を有する。   The portable device 210a is a wearable device that is worn on the user's 2a's head, shoulders, and the like. The portable device 210a executes shooting from the viewpoint of the user 2a to generate image data, and the generated image data is used as the image management device 220a. Has the function of saving. The portable device 210b is a wearable device that is worn on the head or shoulder of the user 2b. The portable device 210b executes shooting from the viewpoint of the user 2b to generate image data, and the generated image data is used as the image management device 220b. Has the function of saving.

携帯装置210aおよび210bは、それぞれ、画像データを画像管理装置220aおよび220bに保存させるために、画像データを含む画像データ保存要求をサービス提供装置250へ送信する。サービス提供装置250は、受信した画像データ保存要求を、画像データの送信先を示す情報として設定されているネットワークアドレスや、画像データの転送先を示す情報として設定されているネットワークアドレス等に基づいて画像管理装置220aや画像管理装置220bへ転送する。   The portable devices 210a and 210b transmit image data storage requests including image data to the service providing device 250 in order to store the image data in the image management devices 220a and 220b, respectively. The service providing apparatus 250 sends the received image data storage request based on a network address set as information indicating the transmission destination of the image data, a network address set as information indicating the transfer destination of the image data, or the like. The image is transferred to the image management device 220a or the image management device 220b.

画像管理装置220aは、利用者2aの画像データの保管や公開を行うサーバ装置であり、画像管理装置220bは、利用者2bの画像データの保管や公開を行うサーバ装置である。画像管理装置220aおよび220bは、例えば、ライフログサービスを提供する装置に相当する。   The image management apparatus 220a is a server apparatus that stores and discloses image data of the user 2a, and the image management apparatus 220b is a server apparatus that stores and discloses image data of the user 2b. The image management devices 220a and 220b correspond to devices that provide a life log service, for example.

サービス提供装置250は、携帯装置210aおよび210bに対して、対向の携帯装置210についての認証や、画像データ保存要求の転送といったサービスを提供する。   The service providing device 250 provides services such as authentication of the opposite mobile device 210 and transfer of an image data storage request to the mobile devices 210a and 210b.

このような構成の画像収集システムにおいて、本実施例に係る画像収集方法は以下のように実行される。携帯装置210aは、所定の範囲1b内に他の携帯装置210が存在するか否かを定期的に確認する。   In the image collection system having such a configuration, the image collection method according to the present embodiment is executed as follows. The portable device 210a periodically checks whether another portable device 210 exists within the predetermined range 1b.

そして、携帯装置210aは、前方の所定の範囲1b内に携帯装置210bが存在することを検出すると、携帯装置210bに対して認証要求を送信する(ステップS21)。携帯装置210aが送信する認証要求には、自装置の利用者を識別するためのID等の認証情報(この場面では、利用者2aの認証情報)が含まれる。   Then, when the portable device 210a detects that the portable device 210b exists within the predetermined range 1b ahead, the portable device 210a transmits an authentication request to the portable device 210b (step S21). The authentication request transmitted by the portable device 210a includes authentication information such as an ID for identifying the user of the own device (in this case, authentication information of the user 2a).

携帯装置210bは、認証要求を受信すると、認証要求に含まれる認証情報をサービス提供装置250へ送信して認証処理を実行させるとともに、認証要求の要求元が自装置の撮影範囲内に存在するか否かを判定する(ステップS22)。   When the portable device 210b receives the authentication request, the portable device 210b transmits the authentication information included in the authentication request to the service providing device 250 to execute the authentication process, and whether the request source of the authentication request exists within the photographing range of the own device. It is determined whether or not (step S22).

そして、サービス提供装置250から認証成功の応答があり、かつ、認証要求の要求元が自装置の撮影範囲内に存在する場合、携帯装置210bは、自装置の利用者を識別するためのID等の認証情報(この場面では、利用者2bの認証情報)を含めて撮影許可の応答をする。一方、サービス提供装置250から認証失敗の応答があった場合、または、認証要求の要求元が自装置の撮影範囲内に存在しない場合、携帯装置210bは、撮影不可の応答をする(ステップS23)。   Then, when there is a response of authentication success from the service providing apparatus 250 and the request source of the authentication request exists within the imaging range of the own apparatus, the portable apparatus 210b identifies an ID for identifying the user of the own apparatus, etc. , Including the authentication information (in this case, the authentication information of the user 2b), a response to permit photographing is made. On the other hand, when there is an authentication failure response from the service providing device 250, or when the request source of the authentication request does not exist within the imaging range of the own device, the portable device 210b responds that the imaging is not possible (step S23). .

携帯装置210bから撮影許可が応答された場合、携帯装置210aは、応答に含まれる認証情報をサービス提供装置250へ送信して認証処理を実行させる。そして、認証結果が認証成功だった場合、携帯装置210aは、所定の範囲1b内に撮影手段が存在する旨を光や音を用いて利用者2aに報知する(ステップS24)。   When the photographing permission is returned from the portable device 210b, the portable device 210a transmits the authentication information included in the response to the service providing device 250 to execute the authentication process. If the authentication result is a successful authentication, the portable device 210a notifies the user 2a using light or sound that the photographing means is present within the predetermined range 1b (step S24).

報知を受けた利用者2aは、自分の希望するタイミングで携帯装置210aに対して所定の操作を行って撮影要求を送信させる(ステップS25)。携帯装置210aが送信する撮影要求には、自装置の利用者を識別するためのID等の認証情報(この場面では、利用者2aの認証情報)や画像データの転送先を示す情報(この場面では、画像管理装置220aのネットワークアドレス等)が含まれる。   The user 2a receiving the notification performs a predetermined operation on the portable device 210a at a timing desired by the user 2a and transmits a photographing request (step S25). In the photographing request transmitted by the portable device 210a, authentication information such as an ID for identifying the user of the own device (in this case, authentication information of the user 2a) and information indicating the transfer destination of the image data (this scene) Includes the network address of the image management apparatus 220a.

携帯装置210bは、撮影要求を受信すると、撮影を実行して画像データを生成し、生成した画像データを含む画像データ保存要求をサービス提供装置250へ向けて送信する(ステップS26)。この場面で携帯装置210bが送信する画像データ保存要求には、携帯装置110bに対応する画像管理装置220bのネットワークアドレス等が送信先を示す情報として設定され、携帯装置110bの利用者を識別するためのID等の認証情報が送信先を示す情報と対応付けて設定される。また、撮影要求に含まれていた認証情報と転送先を示す情報が、対応付けられて、画像データ保存要求に含められる。   Upon receiving the shooting request, the portable device 210b executes shooting to generate image data, and transmits an image data storage request including the generated image data to the service providing device 250 (step S26). In the image data storage request transmitted by the portable device 210b in this scene, the network address of the image management device 220b corresponding to the portable device 110b is set as information indicating the transmission destination, and the user of the portable device 110b is identified. The authentication information such as the ID is set in association with the information indicating the transmission destination. Further, authentication information included in the photographing request and information indicating the transfer destination are associated with each other and included in the image data storage request.

サービス提供装置250は、画像データ保存要求を受信すると、画像データ保存要求に含まれる画像データの送信先を示す情報に対応する装置へ画像データ保存要求を転送する。この場面では、画像データの送信先を示す情報として画像管理装置220bのネットワークアドレス等が設定されているので、サービス提供装置250は、画像データ保存要求を画像管理装置220bへ転送する。画像管理装置220bは、画像データ保存要求を受信すると、画像データの送信先を示す情報と対応付けてられている認証情報が正しいことを確認した後、その認証情報に含まれるIDに対応する領域に画像データを保存する(ステップS27)。   When receiving the image data storage request, the service providing apparatus 250 transfers the image data storage request to an apparatus corresponding to information indicating the transmission destination of the image data included in the image data storage request. In this scene, since the network address of the image management apparatus 220b is set as information indicating the transmission destination of the image data, the service providing apparatus 250 transfers the image data storage request to the image management apparatus 220b. When the image management apparatus 220b receives the image data storage request, the image management apparatus 220b confirms that the authentication information associated with the information indicating the transmission destination of the image data is correct, and then the area corresponding to the ID included in the authentication information The image data is stored in (Step S27).

さらに、サービス提供装置250は、画像データ保存要求に画像データの転送先を示す情報が含まれていれば、その情報に対応する装置へ画像データ保存要求を転送する。この場面では、画像データの転送先を示す情報として画像管理装置220aのネットワークアドレス等が設定されているので、サービス提供装置250は、画像データのコピーを含む画像データ保存要求を画像管理装置220aへ送信する。画像管理装置220aへ送信される画像データ保存要求には、受信された画像データ保存要求で画像データの転送先を示す情報として設定されていた情報が、画像データの送信先を示す情報として設定される。また、受信された画像データ保存要求で画像データの転送先を示す情報と対応付けられていた認証情報が、画像データの送信先を示す情報と対応付けて設定される。画像管理装置220aは、画像データ保存要求を受信すると、画像データの送信先を示す情報と対応付けてられている認証情報が正しいことを確認した後、その認証情報に含まれるIDに対応する領域に画像データを保存する(ステップS28)。   Further, if the image data storage request includes information indicating the transfer destination of the image data, the service providing apparatus 250 transfers the image data storage request to the apparatus corresponding to the information. In this scene, since the network address of the image management apparatus 220a is set as information indicating the transfer destination of the image data, the service providing apparatus 250 sends an image data storage request including a copy of the image data to the image management apparatus 220a. Send. In the image data storage request transmitted to the image management apparatus 220a, information set as information indicating the transfer destination of the image data in the received image data storage request is set as information indicating the transmission destination of the image data. The Further, authentication information associated with information indicating the transfer destination of the image data in the received image data storage request is set in association with information indicating the transmission destination of the image data. When the image management apparatus 220a receives the image data storage request, it confirms that the authentication information associated with the information indicating the transmission destination of the image data is correct, and then the area corresponding to the ID included in the authentication information The image data is stored in (Step S28).

このように、本実施例に係る画像収集方法では、携帯装置210aが所定の範囲1b内に携帯装置210bが存在することを検出し、携帯装置210bに撮影を依頼することが可能となった場合にその旨を利用者2aに報知することとしたので、利用者2aは、自身の姿をほぼ正面から見た画像データを取得可能な状態か否かを把握した上で、自分の希望するタイミングで携帯装置210bが撮影した画像データを取得することができる。   As described above, in the image collection method according to the present embodiment, when the mobile device 210a detects that the mobile device 210b exists within the predetermined range 1b, it is possible to request the mobile device 210b to take an image. Since the user 2a is notified of this, the user 2a grasps whether or not the image data obtained by viewing the appearance of the user from the front can be obtained, and then the timing desired by the user 2a. Thus, it is possible to acquire image data captured by the portable device 210b.

また、本実施例に係る画像収集方法では、撮影を依頼する装置と撮影を実行する装置が対向の装置について認証を行うこととしたので、不正な目的をもつ者のために撮影を行ったり、撮影された画像データが悪用されたりといったリスクを低減することができる。   Further, in the image collection method according to the present embodiment, since the device that requests photographing and the device that performs photographing authenticate the opposite device, photographing for a person with an unauthorized purpose, It is possible to reduce the risk that the photographed image data is misused.

なお、上記の説明では、携帯装置210bが撮影した画像データを利用者2aが取得する場合について説明したが、同様の手順により、携帯装置210aが撮影した画像データを利用者2bが取得することができる。また、図8に示した携帯装置210と画像管理装置220の台数は一例であり、これらの装置の台数は任意である。   In the above description, the case where the user 2a acquires the image data captured by the portable device 210b has been described. However, the user 2b can acquire the image data captured by the portable device 210a by the same procedure. it can. Further, the numbers of the portable device 210 and the image management device 220 shown in FIG. 8 are examples, and the number of these devices is arbitrary.

次に、図8に示した携帯装置210aおよび210bとサービス提供装置250のより詳細な構成について説明する。なお、携帯装置210aおよび210bの構成は同様であるので、携帯装置210aを例にして構成を説明する。   Next, more detailed configurations of the mobile devices 210a and 210b and the service providing device 250 shown in FIG. 8 will be described. Since the mobile devices 210a and 210b have the same configuration, the configuration will be described using the mobile device 210a as an example.

図9は、携帯装置210aの構成を示すブロック図である。図9に示すように、携帯装置210aは、撮影部111と、通信部112と、通信部113と、記憶部214と、制御部215と、操作部216と、報知部217とを有する。   FIG. 9 is a block diagram illustrating a configuration of the portable device 210a. As illustrated in FIG. 9, the mobile device 210 a includes a photographing unit 111, a communication unit 112, a communication unit 113, a storage unit 214, a control unit 215, an operation unit 216, and a notification unit 217.

記憶部214は、例えば、半導体記憶装置であり、自装置を所有する利用者のIDや自装置を所有する利用者に対応する画像管理装置220のネットワークアドレスのように制御部215の動作に必要な各種設定情報や、撮影部111によって生成された画像データを記憶する。また、記憶部214は、図10に示すように、携帯装置210aがサービス提供装置250に要求した認証処理の結果を、認証対象の利用者のIDと対応付けて記憶する。   The storage unit 214 is a semiconductor storage device, for example, and is necessary for the operation of the control unit 215 such as the ID of the user who owns the device and the network address of the image management device 220 corresponding to the user who owns the device. Various kinds of setting information and image data generated by the photographing unit 111 are stored. In addition, as illustrated in FIG. 10, the storage unit 214 stores the authentication processing result requested by the mobile device 210 a from the service providing device 250 in association with the ID of the user to be authenticated.

操作部216は、他の装置への撮影要求の送信指示等のための操作を利用者から受け付ける。報知部217は、他の装置に撮影を依頼することが可能となった場合に、その旨を利用者に報知する。報知部217による報知は、例えば、光、音、振動等によって実現される。   The operation unit 216 receives an operation for sending an imaging request to another apparatus from a user. When the notification unit 217 can request another device to take a picture, the notification unit 217 notifies the user to that effect. The notification by the notification unit 217 is realized by light, sound, vibration, or the like, for example.

制御部215は、携帯装置210aを全体制御する制御部であり、撮影要求処理部215aと、撮影実行処理部215bと、認証部215hと、要求元検出部215iとを有する。撮影要求処理部215aは、撮影手段検出部215cと、撮影要求送信部215dとを有し、所定の範囲1b内に存在する他の携帯装置210またはこれと同等の機能を有する装置を検出するとともに、検出した装置に撮影の実行と画像データの送信を要求する。撮影実行処理部215bは、撮影要求受信部215eと、撮影実行部215fと、画像送信部215gとを有し、予め設定されているタイミングと他の装置から要求されたタイミングで撮影部111に撮影を実行させ、生成された画像データを自装置に対応する画像管理装置220へ送信する。   The control unit 215 is a control unit that totally controls the portable device 210a, and includes a photographing request processing unit 215a, a photographing execution processing unit 215b, an authentication unit 215h, and a request source detection unit 215i. The imaging request processing unit 215a includes an imaging means detection unit 215c and an imaging request transmission unit 215d, and detects another portable device 210 present in the predetermined range 1b or a device having a function equivalent to this. The detected apparatus is requested to execute photographing and transmit image data. The imaging execution processing unit 215b includes an imaging request receiving unit 215e, an imaging execution unit 215f, and an image transmission unit 215g. The imaging execution processing unit 215b performs imaging on the imaging unit 111 at a preset timing and a timing requested from another device. And the generated image data is transmitted to the image management device 220 corresponding to the device itself.

認証部215hは、対向装置の認証に関する処理を実行する。具体的には、所定の範囲1b内に存在する他の携帯装置210またはこれと同等の機能を有する装置が撮影手段検出部215cによって検出された場合に、自装置を所有する利用者のID等を記憶部214から取得し、これらを認証情報として設定した認証要求を送信して、自装置についての認証を求める。認証要求に対して撮影許可の応答があった場合、認証部215hは、応答に含まれる認証情報をサービス提供装置250に送信して応答元の装置についての認証処理の実行を要求する。そして、サービス提供装置250から認証成功の応答があった場合、他の装置に撮影を依頼することが可能となった旨の報知を報知部217に行わせる。   The authentication unit 215h executes processing related to authentication of the opposite device. Specifically, when another photographing device 210 existing in the predetermined range 1b or a device having the same function is detected by the photographing means detection unit 215c, the ID of the user who owns the device, etc. Are acquired from the storage unit 214, and an authentication request in which these are set as authentication information is transmitted to request authentication of the device itself. In the case where there is a response to photographing permission in response to the authentication request, the authentication unit 215h transmits authentication information included in the response to the service providing apparatus 250 and requests execution of authentication processing for the response source apparatus. Then, when there is a response of successful authentication from the service providing apparatus 250, the notification unit 217 is notified that it is possible to request another apparatus to perform imaging.

また、認証部215hは、他の装置から認証要求を受信した場合、認証要求に含まれる認証情報をサービス提供装置250に送信して要求元の装置についての認証処理の実行を要求する。サービス提供装置250から認証成功の応答があった場合、認証部215hは、認証要求の要求元が撮影部111の撮影範囲に存在するか否かを要求元検出部215iに判定させる。   Further, when the authentication unit 215h receives an authentication request from another device, the authentication unit 215h transmits the authentication information included in the authentication request to the service providing device 250 to request execution of authentication processing for the requesting device. When there is a response of authentication success from the service providing apparatus 250, the authentication unit 215h causes the request source detection unit 215i to determine whether or not the request source of the authentication request exists in the shooting range of the shooting unit 111.

そして、認証要求の要求元が撮影部111の撮影範囲に存在すると要求元検出部215iが判定した場合、認証部215hは、認証要求の要求元へ撮影許可を応答する。撮影許可を応答する場合、認証部215hは、自装置を所有する利用者のID等を記憶部214から取得し、これらを認証情報として応答に含める。   When the request source detection unit 215i determines that the request source of the authentication request exists in the shooting range of the shooting unit 111, the authentication unit 215h responds to the request for the authentication request with permission for shooting. When responding to permission for photographing, the authentication unit 215h acquires the ID of the user who owns the device from the storage unit 214, and includes these in the response as authentication information.

なお、認証部215hは、サービス提供装置250に要求した認証処理の結果を図10に示したように記憶部214に記憶させる。そして、サービス提供装置250に認証処理を要求すべき認証情報に対応する認証結果が記憶部214に記憶されている場合は、サービス提供装置250に要求を行わずに、記憶部214に記憶されている認証結果をサービス提供装置250からの応答として利用する。   The authentication unit 215h stores the result of the authentication process requested to the service providing apparatus 250 in the storage unit 214 as illustrated in FIG. When the authentication result corresponding to the authentication information that should request authentication processing from the service providing apparatus 250 is stored in the storage unit 214, the authentication result is stored in the storage unit 214 without making a request to the service providing apparatus 250. The authentication result is used as a response from the service providing apparatus 250.

要求元検出部215iは、撮影部111に撮影を実行させ、生成された画像データ内に認証要求の要求元が存在するか否かを判定する。具体的には、要求元検出部215iは、認証要求の要求元がもっているはずの形状や色彩等の外観上の特徴が画像データに含まれているか否かを解析することによって、画像データ内に認証要求の要求元が存在するか否かを判定する。   The request source detection unit 215i causes the photographing unit 111 to perform photographing and determines whether or not a request source of an authentication request exists in the generated image data. Specifically, the request source detection unit 215i analyzes whether or not the image data includes appearance features such as shape and color that the request source of the authentication request should have. It is determined whether or not there is a request source of the authentication request.

なお、携帯装置210の形状や色彩等の外観上の特徴が機種毎に異なる場合にも対応できるように、認証部215hが自装置の外観上の特徴に関する情報を認証要求に含めて送信し、要求元検出部215iが認証要求に含まれる情報が示す外観上の特徴が画像データに含まれているか否かを解析することとしてもよい。   In addition, the authentication unit 215h transmits information on the appearance characteristics of the own device included in the authentication request so as to be able to cope with the case where the appearance features such as the shape and color of the mobile device 210 are different for each model, The request source detection unit 215i may analyze whether or not the appearance characteristic indicated by the information included in the authentication request is included in the image data.

撮影手段検出部215cは、所定の範囲1b内に存在する他の携帯装置210またはこれと同等の機能を有する装置を検出する。具体的には、撮影手段検出部215cは、通信部112から所定の範囲1b内に届く程度の強度と指向性で所定の検出用の信号を送信させ、いずれかの装置からの応答が受信された場合に他の携帯装置210等が所定の範囲1b内に存在すると判定する。また、撮影手段検出部215cは、所定の検出用の信号が通信部112で受信された場合に、通信部112から応答を送信させる。   The photographing means detection unit 215c detects another portable device 210 existing in the predetermined range 1b or a device having a function equivalent to this. Specifically, the imaging means detection unit 215c transmits a predetermined detection signal with a strength and directivity that reaches within the predetermined range 1b from the communication unit 112, and a response from any device is received. If it is determined that the other portable device 210 or the like is within the predetermined range 1b. In addition, the imaging unit detection unit 215 c transmits a response from the communication unit 112 when a predetermined detection signal is received by the communication unit 112.

撮影要求送信部215dは、撮影要求の送信指示を示す操作が操作部216に対して行われた場合に、通信部112から撮影要求を送信させる。撮影要求送信部215dは、自装置を所有する利用者のID等を記憶部214から取得して認証情報として撮影要求に含めるとともに、自装置を所有する利用者に対応する画像管理装置220のネットワークアドレスを記憶部214から取得して画像データの転送先を示す情報として撮影要求に含める。   The photographing request transmission unit 215d causes the communication unit 112 to transmit a photographing request when an operation indicating a photographing request transmission instruction is performed on the operation unit 216. The imaging request transmission unit 215d acquires the ID of the user who owns the device from the storage unit 214 and includes it as authentication information in the imaging request, and the network of the image management device 220 corresponding to the user who owns the device. The address is acquired from the storage unit 214 and included in the imaging request as information indicating the transfer destination of the image data.

撮影要求受信部215eは、撮影要求が通信部112で受信された場合に、撮影要求に含まれる認証情報に対応する認証結果を記憶部214から取得する。そして、認証情報に対応する認証結果が記憶部214に存在し、かつ、認証結果が認証成功の場合、撮影要求受信部215eは、撮影実行部215fに撮影の実行を要求する。   The imaging request receiving unit 215e acquires an authentication result corresponding to the authentication information included in the imaging request from the storage unit 214 when the imaging request is received by the communication unit 112. If the authentication result corresponding to the authentication information exists in the storage unit 214 and the authentication result is successful, the imaging request reception unit 215e requests the imaging execution unit 215f to execute imaging.

撮影実行部215fは、予め設定されているタイミングまたは撮影要求受信部215eから要求されたタイミングで撮影部111に画像データを生成させ、画像送信部215gに画像データの送信を要求する。   The imaging execution unit 215f causes the imaging unit 111 to generate image data at a preset timing or a timing requested from the imaging request reception unit 215e, and requests the image transmission unit 215g to transmit the image data.

画像送信部215gは、サービス提供装置250のネットワークアドレスと自装置を所有する利用者のID等の認証情報を記憶部214から取得し、取得したネットワークアドレスを画像データの送信先を示す情報として設定し、取得した認証情報を画像データの送信先を示す情報と対応付けて設定した画像データ保存要求を通信部113から送信させる。画像データ保存要求には、生成された画像データが含められる。   The image transmission unit 215g acquires authentication information such as the network address of the service providing apparatus 250 and the ID of the user who owns the apparatus from the storage unit 214, and sets the acquired network address as information indicating the transmission destination of the image data. Then, the communication unit 113 transmits an image data storage request that is set by associating the acquired authentication information with information indicating the transmission destination of the image data. The generated image data is included in the image data storage request.

撮影要求受信部215eから要求されたタイミングで画像データが生成された場合、画像送信部215gは、受信された撮影要求に含まれていた認証情報と転送先を示す情報を対応付けて、送信される画像データ保存要求に含める。   When image data is generated at the timing requested by the imaging request receiving unit 215e, the image transmission unit 215g transmits the authentication information included in the received imaging request in association with the information indicating the transfer destination. Included in the image data storage request.

図11は、サービス提供装置250の構成を示すブロック図である。図11に示すように、サービス提供装置250は、通信部251と、利用者情報記憶部252と、制御部253とを有する。   FIG. 11 is a block diagram illustrating a configuration of the service providing apparatus 250. As illustrated in FIG. 11, the service providing apparatus 250 includes a communication unit 251, a user information storage unit 252, and a control unit 253.

通信部251は、ネットワーク10に接続された他の装置との間で要求や応答をやりとりするとともに、無線基地局(図示略)を介して携帯装置210との間で要求や応答をやりとりしたりするために使用される。   The communication unit 251 exchanges requests and responses with other devices connected to the network 10 and also exchanges requests and responses with the portable device 210 via a wireless base station (not shown). Used to do.

利用者情報記憶部252は、例えば、ハードディスク装置や半導体記憶装置であり、利用者のIDや暗証番号等の認証番号や、利用者が利用しているサービスの各種設定情報等を記憶する。   The user information storage unit 252 is, for example, a hard disk device or a semiconductor storage device, and stores an authentication number such as a user ID and a personal identification number, and various setting information of services used by the user.

制御部253は、サービス提供装置250を全体制御する制御部であり、認証部253aと、画像受信部253bと、転送先判定部253cと、画像転送部253dとを有する。   The control unit 253 is a control unit that totally controls the service providing apparatus 250, and includes an authentication unit 253a, an image reception unit 253b, a transfer destination determination unit 253c, and an image transfer unit 253d.

認証部253aは、通信部251で受信された認証情報と利用者情報記憶部252に記憶されている認証情報とを照合して認証処理を行い、認証結果を通信部251から認証処理の要求元へ送信させる。   The authentication unit 253a performs authentication processing by comparing the authentication information received by the communication unit 251 with the authentication information stored in the user information storage unit 252, and sends the authentication result from the communication unit 251 to the requester of the authentication process. To send to.

画像受信部253bは、画像データ保存要求が通信部251で受信された場合に、転送先判定部253cに画像データ保存要求の転送先を判定させる。転送先判定部253cは、画像データ保存要求に含まれる送信先を示す情報が示す装置をオリジナルの画像データの転送先と判定する。また、転送先判定部253cは、画像データ保存要求に転送先を示す情報が含まれている場合は、転送先を示す情報が示す装置を画像データのコピーの転送先と判定する。   When the image data storage request is received by the communication unit 251, the image reception unit 253 b causes the transfer destination determination unit 253 c to determine the transfer destination of the image data storage request. The transfer destination determination unit 253c determines that the device indicated by the information indicating the transmission destination included in the image data storage request is the transfer destination of the original image data. Further, when the image data storage request includes information indicating the transfer destination, the transfer destination determination unit 253c determines that the device indicated by the information indicating the transfer destination is the transfer destination of the copy of the image data.

画像転送部253dは、転送先判定部253cによってオリジナルの画像データの転送先と判定された装置のネットワークアドレスを送信先として設定し直して、画像データ保存要求を通信部251から送信させる。また、画像転送部253dは、転送先判定部253cによって画像データのコピーの転送先と判定された装置があれば、その装置のネットワークアドレスを送信先として設定し、画像データのコピーを含めた画像データ保存要求を通信部251から送信させる。コピーの転送先と判定された装置へ送信される画像データ保存要求には、受信された画像データ保存要求で画像データの転送先を示す情報として設定されていた情報が、画像データの送信先を示す情報として設定される。また、受信された画像データ保存要求で画像データの転送先を示す情報と対応付けられていた認証情報が、画像データの送信先を示す情報と対応付けて設定される。   The image transfer unit 253d resets the network address of the apparatus determined as the transfer destination of the original image data by the transfer destination determination unit 253c as the transmission destination, and causes the communication unit 251 to transmit the image data storage request. In addition, if there is a device that is determined as the transfer destination of the copy of the image data by the transfer destination determination unit 253c, the image transfer unit 253d sets the network address of the device as the transmission destination, and the image including the copy of the image data A data storage request is transmitted from the communication unit 251. In the image data storage request transmitted to the apparatus determined to be the transfer destination of the copy, the information set as the information indicating the transfer destination of the image data in the received image data storage request indicates the transmission destination of the image data. It is set as information to show. Further, authentication information associated with information indicating the transfer destination of the image data in the received image data storage request is set in association with information indicating the transmission destination of the image data.

次に、図9に示した携帯装置210aと図11に示したサービス提供装置250の動作についてフローチャートを参照しながら説明する。   Next, operations of the portable device 210a shown in FIG. 9 and the service providing device 250 shown in FIG. 11 will be described with reference to flowcharts.

図12は、携帯装置210aの動作を示すフローチャートである。図12に示すように、携帯装置210aにおいては、通信部112で撮影要求が受信されると(ステップS301肯定)、撮影実行処理部215bが、後述する撮影処理を実行する(ステップS302)。また、通信部112で認証要求が受信されると(ステップS301否定、ステップS303肯定)、認証部215hが、後述する要求元認証処理を実行する(ステップS304)。   FIG. 12 is a flowchart showing the operation of the portable device 210a. As shown in FIG. 12, in the portable device 210a, when a shooting request is received by the communication unit 112 (Yes at Step S301), the shooting execution processing unit 215b executes a shooting process described later (Step S302). When the authentication request is received by the communication unit 112 (No at Step S301, Yes at Step S303), the authentication unit 215h executes a request source authentication process described later (Step S304).

また、撮影要求の送信指示を示す操作が操作部216に対して行われると(ステップS301否定、ステップS303否定、ステップS305肯定)、撮影要求処理部215aが後述する撮影要求送信処理を実行する(ステップS306)。また、所定の範囲1b内に存在する他の携帯装置210等が撮影手段検出部215cによって検出されると(ステップS301否定、ステップS303否定、ステップS305否定、ステップS307肯定)、認証部215hが、後述する認証要求処理を実行する(ステップS308)。   When an operation indicating a shooting request transmission instruction is performed on the operation unit 216 (No at Step S301, No at Step S303, Yes at Step S305), the shooting request processing unit 215a executes a shooting request transmission process described later ( Step S306). Further, when another portable device 210 or the like existing in the predetermined range 1b is detected by the photographing means detection unit 215c (No at Step S301, No at Step S303, No at Step S305, Yes at Step S307), the authentication unit 215h Authentication request processing described later is executed (step S308).

以上の処理手順を携帯装置210aは、繰り返し実行する。また、携帯装置210aは、図12に示した動作以外にも、予め設定されているタイミングで撮影部111に撮影を実行させ、生成された画像データをサービス提供装置250へ送信する動作を実行する。   The portable device 210a repeatedly executes the above processing procedure. In addition to the operations shown in FIG. 12, the portable device 210 a causes the photographing unit 111 to perform photographing at a preset timing, and performs an operation for transmitting the generated image data to the service providing device 250. .

図13は、認証要求処理の処理手順を示すフローチャートである。図13に示すように、認証部215hは、検出された他の装置へ認証要求を送信し(ステップS401)、要求結果を受信する(ステップS402)。ここで、要求結果が撮影許可でなければ(ステップS403否定)、認証部215hは、認証要求処理を終了させる。   FIG. 13 is a flowchart showing the processing procedure of the authentication request processing. As illustrated in FIG. 13, the authentication unit 215h transmits an authentication request to another detected device (step S401) and receives a request result (step S402). Here, if the request result is not photography permission (No at Step S403), the authentication unit 215h ends the authentication request process.

一方、要求結果が撮影許可であれば(ステップS403肯定)、認証部215hは、応答に認証情報として含まれるIDに対応する認証結果を記憶部214から取得する(ステップS404)。ここで、認証結果がなかった場合は(ステップS405否定)、認証部215hは、応答に含まれる認証情報をサービス提供装置250へ送信して認証処理の実行を要求し(ステップS406)、サービス提供装置250から応答された認証結果を認証情報に含まれるIDと対応付けて記憶部214に記録する(ステップS407)。   On the other hand, if the request result is permission for photographing (Yes at Step S403), the authentication unit 215h acquires an authentication result corresponding to the ID included as authentication information in the response from the storage unit 214 (Step S404). Here, when there is no authentication result (No at Step S405), the authentication unit 215h sends the authentication information included in the response to the service providing apparatus 250 to request execution of the authentication process (Step S406), and provides the service. The authentication result returned from the device 250 is recorded in the storage unit 214 in association with the ID included in the authentication information (step S407).

そして、ステップS404で取得した認証結果が認証成功だった場合、または、サービス提供装置250から応答された認証結果が認証成功だった場合(ステップS408肯定)、認証部215hは、他の装置に撮影を依頼することが可能となった旨の報知を報知部217に行わせ、認証要求処理を終了させる(ステップS409)。一方、ステップS404で取得した認証結果が認証失敗だった場合、または、サービス提供装置250から応答された認証結果が認証失敗だった場合(ステップS408否定)、認証部215hは、他の装置に撮影を依頼することが可能となった旨の報知を報知部217に行わせることなく、認証要求処理を終了させる。   Then, if the authentication result acquired in step S404 is authentication success, or if the authentication result returned from the service providing apparatus 250 is authentication success (Yes in step S408), the authentication unit 215h captures the image on another apparatus. The notification unit 217 is notified that the request can be requested, and the authentication request process is terminated (step S409). On the other hand, if the authentication result acquired in step S404 is an authentication failure, or if the authentication result returned from the service providing device 250 is an authentication failure (No in step S408), the authentication unit 215h takes a picture of another device. The authentication request process is terminated without causing the notification unit 217 to notify that the request can be made.

図14は、要求元認証処理の処理手順を示すフローチャートである。図14に示すように、認証部215hは、認証要求に認証情報として含まれるIDに対応する認証結果を記憶部214から取得する(ステップS501)。ここで、認証結果がなかった場合は(ステップS502否定)、認証部215hは、認証要求に含まれる認証情報をサービス提供装置250へ送信して認証処理の実行を要求し(ステップS503)、サービス提供装置250から応答された認証結果を認証情報に含まれるIDと対応付けて記憶部214に記録する(ステップS504)。   FIG. 14 is a flowchart illustrating a processing procedure of request source authentication processing. As illustrated in FIG. 14, the authentication unit 215h acquires an authentication result corresponding to an ID included as authentication information in the authentication request from the storage unit 214 (step S501). If there is no authentication result (No at Step S502), the authentication unit 215h transmits the authentication information included in the authentication request to the service providing apparatus 250 to request execution of the authentication process (Step S503). The authentication result returned from the providing device 250 is recorded in the storage unit 214 in association with the ID included in the authentication information (step S504).

ステップS501で取得した認証結果が認証成功だった場合、または、サービス提供装置250から応答された認証結果が認証成功だった場合(ステップS505肯定)、要求元検出部215iは、撮影部111に要求元検出用の画像を撮影させる(ステップS506)。そして、要求元検出部215iは、画像データの解析を行い、要求元が検出された場合は(ステップS507肯定)、認証部215hは、自装置を所有する利用者のID等を記憶部214から取得し、これらを認証情報として含めた撮影許可の応答をする(ステップS508)。   If the authentication result acquired in step S501 is authentication success, or if the authentication result returned from the service providing apparatus 250 is authentication success (Yes in step S505), the request source detection unit 215i requests the imaging unit 111. An original detection image is taken (step S506). Then, the request source detection unit 215i analyzes the image data, and when the request source is detected (Yes in step S507), the authentication unit 215h receives the ID of the user who owns the device from the storage unit 214. Obtaining and responding to the photographing permission including these as authentication information (step S508).

一方、ステップS501で取得した認証結果が認証成功でなかった場合、または、サービス提供装置250から応答された認証結果が認証成功でなかった場合(ステップS505否定)、認証部215hは、撮影不可の応答をする(ステップS509)。また、要求元検出用の画像データから要求元が検出されなかった場合も(ステップS507否定)、認証部215hは、撮影不可の応答をする(ステップS509)。   On the other hand, if the authentication result acquired in step S501 is not successful, or if the authentication result returned from the service providing apparatus 250 is not successful (No in step S505), the authentication unit 215h cannot shoot. A response is made (step S509). Even when the request source is not detected from the image data for request source detection (No at Step S507), the authentication unit 215h makes a response indicating that the photographing is impossible (Step S509).

図15は、撮影要求送信処理の処理手順を示すフローチャートである。図15に示すように、撮影要求処理部215aの撮影要求送信部215dは、認証情報と転送先を示す情報とを含む撮影要求を送信する(ステップS601)。その処理結果が受信されると(ステップS602)、撮影要求送信部215dは、報知部217等を通じて処理結果を利用者に通知する(ステップS603)。   FIG. 15 is a flowchart illustrating the processing procedure of the imaging request transmission process. As illustrated in FIG. 15, the shooting request transmission unit 215d of the shooting request processing unit 215a transmits a shooting request including authentication information and information indicating a transfer destination (step S601). When the processing result is received (step S602), the imaging request transmission unit 215d notifies the user of the processing result through the notification unit 217 or the like (step S603).

図16は、撮影処理の処理手順を示すフローチャートである。図16に示すように、撮影実行処理部215bの撮影要求受信部215eは、撮影要求に認証情報として含まれるIDに対応する認証結果を記憶部214から取得する(ステップS701)。ここで、IDに対応する認証結果が記憶部214に存在し、かつ、認証結果が認証成功の場合(ステップS702肯定)、撮影実行部215fは撮影を実行し(ステップS703)、画像送信部215gは生成された画像データをサービス提供装置250へ送信する(ステップS704)。そして、撮影実行処理部215bは、撮影要求の送信元に処理結果を応答する(ステップS705)。   FIG. 16 is a flowchart illustrating the processing procedure of the photographing process. As shown in FIG. 16, the imaging request receiving unit 215e of the imaging execution processing unit 215b acquires an authentication result corresponding to an ID included as authentication information in the imaging request from the storage unit 214 (step S701). Here, when the authentication result corresponding to the ID exists in the storage unit 214 and the authentication result is successful authentication (Yes in step S702), the imaging execution unit 215f executes imaging (step S703), and the image transmission unit 215g. Transmits the generated image data to the service providing apparatus 250 (step S704). Then, the imaging execution processing unit 215b returns a processing result to the transmission source of the imaging request (step S705).

一方、IDに対応する認証結果が記憶部214に存在しない場合、または、存在した認証結果が認証成功でない場合(ステップS702否定)、撮影を実行することなく、撮影実行処理部215bは、撮影要求の送信元に処理結果を応答する(ステップS705)。   On the other hand, if the authentication result corresponding to the ID does not exist in the storage unit 214, or if the existing authentication result is not successful authentication (No in step S702), the imaging execution processing unit 215b performs the imaging request without executing imaging. The processing result is returned to the transmission source (step S705).

図17は、サービス提供装置250の動作を示すフローチャートである。図17に示すように、サービス提供装置250においては、通信部251で認証要求が受信されると(ステップS801肯定)、認証部253aが、通信部251で受信された認証情報と利用者情報記憶部252に記憶されている認証情報とを照合して認証処理を行い(ステップS802)、認証結果を通信部251から認証処理の要求元へ送信させる(ステップS803)。   FIG. 17 is a flowchart showing the operation of the service providing apparatus 250. As shown in FIG. 17, in the service providing apparatus 250, when the authentication request is received by the communication unit 251 (Yes in step S801), the authentication unit 253a stores the authentication information and user information received by the communication unit 251. The authentication information stored in the unit 252 is collated to perform authentication processing (step S802), and the authentication result is transmitted from the communication unit 251 to the authentication processing request source (step S803).

また、画像データ保存要求が通信部251で受信されると(ステップS801否定、
ステップS804肯定)、画像転送部253dが、画像データ保存要求を転送する(ステップS805)。以上の処理手順をサービス提供装置250は、繰り返し実行する。
When the image data storage request is received by the communication unit 251 (No in step S801,
In step S804, the image transfer unit 253d transfers the image data storage request (step S805). The service providing apparatus 250 repeatedly executes the above processing procedure.

2a、2b 利用者
10 ネットワーク
20 無線基地局
110 携帯装置
110a、110b、210a、210b 携帯装置
111 撮影部
112 通信部
113 通信部
114、214 記憶部
115、215 制御部
115a、215a 撮影要求処理部
115b、215b 撮影実行処理部
115c、215c 撮影手段検出部
115d、215d 撮影要求送信部
115e、215e 撮影要求受信部
115f、215i 要求元検出部
115g、215f 撮影実行部
115h、215g 画像送信部
215h 認証部
216 操作部
217 報知部
120a、120b、220a、220b 画像管理装置
121 通信部
122 画像記憶部
123 利用者情報記憶部
124 制御部
124a 画像受信部
124b 保存場所判定部
124c 画像保存部
124d 画像転送部
130 撮影要求装置
135 制御部
140 撮影装置
145 制御部
250 サービス提供装置
251 通信部
252 利用者情報記憶部
253 制御部
253a 認証部
253b 画像受信部
253c 転送先判定部
253d 画像転送部
2a, 2b User 10 Network 20 Wireless base station 110 Portable device 110a, 110b, 210a, 210b Portable device 111 Imaging unit 112 Communication unit 113 Communication unit 114, 214 Storage unit 115, 215 Control unit 115a, 215a Imaging request processing unit 115b 215b Imaging execution processing unit 115c, 215c Imaging means detection unit 115d, 215d Imaging request transmission unit 115e, 215e Imaging request reception unit 115f, 215i Request source detection unit 115g, 215f Imaging execution unit 115h, 215g Image transmission unit 215h Authentication unit 216 Operation unit 217 Notification unit 120a, 120b, 220a, 220b Image management device 121 Communication unit 122 Image storage unit 123 User information storage unit 124 Control unit 124a Image reception unit 124b Storage location determination unit 124c Image storage unit 124d Image transfer section 130 imaging request unit 135 control unit 140 image capturing apparatus 145 control unit 250 the service providing apparatus
251 Communication unit 252 User information storage unit 253 Control unit 253a Authentication unit 253b Image reception unit 253c Transfer destination determination unit 253d Image transfer unit

Claims (8)

利用者に携帯されている撮影要求装置が、自装置から所定の距離内に存在する撮影装置を検出する検出工程と、
前記撮影要求装置が、前記検出工程において検出された撮影装置に撮影の実行を要求する撮影要求工程と、
前記撮影装置が、前記撮影要求装置の外観上の特徴に基づいて、前記撮影要求装置が前記撮影装置の撮影範囲内に存在するか否かを判定する判定工程と、
前記判定工程において前記撮影要求装置が前記撮影装置の撮影範囲内に存在すると判定された場合に、前記撮影装置が、前記撮影要求工程における要求に応じて撮影を実行する撮影実行工程と、
前記撮影装置が、前記撮影実行工程において撮影した画像データを、前記撮影要求工程における要求にて指定された情報に従って送信する画像送信工程と
を含むことを特徴とする画像収集方法。
A detection step in which a photographing request device carried by a user detects a photographing device existing within a predetermined distance from the own device;
The photographing requesting step, wherein the photographing requesting device requests the photographing device detected in the detecting step to perform photographing,
A determination step of determining whether or not the imaging requesting device is within the imaging range of the imaging device based on the appearance characteristics of the imaging requesting device;
In the determination step, when it is determined that the photographing request device is within the photographing range of the photographing device, the photographing device performs photographing in response to a request in the photographing request step;
An image transmission method comprising: an image transmission step in which the imaging device transmits image data captured in the imaging execution step in accordance with information specified in the request in the imaging request step.
前記検出工程において、前記撮影要求装置は、自装置から所定の距離内の範囲のうち、前記利用者よりも前方の範囲に存在する撮影装置を検出することを特徴とする請求項1に記載の画像収集方法。   The said detection request | requirement WHEREIN: The said imaging | photography request | requirement apparatus detects the imaging device which exists in the range ahead of the said user within the range within a predetermined distance from an own apparatus. Image collection method. 前記判定工程において、前記撮影装置は、前記撮影要求装置から通知された前記撮影装置の外観上の特徴に基づいて、前記撮影要求装置が前記撮影装置の撮影範囲内に存在するか否かを判定することを特徴とする請求項1または2に記載の画像収集方法。   In the determination step, the imaging device determines whether the imaging request device exists within the imaging range of the imaging device based on the appearance characteristics of the imaging device notified from the imaging request device. The image collecting method according to claim 1, wherein: 前記判定工程において、前記撮影装置は、焦点距離を変更して撮影した複数の画像の中に前記撮影要求装置の外観上の特徴を含む画像があった場合に、前記撮影要求装置が前記撮影装置の撮影範囲内に存在すると判定し、
前記撮影実行工程において、前記撮影装置は、前記撮影要求装置の外観上の特徴を含む画像が撮影されたときと同じ焦点距離で撮影を実行することを特徴とする請求項1〜3のいずれか1つに記載の画像収集方法。
In the determination step, the photographing requesting device is configured so that the photographing requesting device includes the photographing device when there is an image including an appearance characteristic of the photographing requesting device among a plurality of images photographed by changing a focal length. Is determined to be within the shooting range,
4. The image capturing execution step, wherein the image capturing device performs image capturing at the same focal length as when an image including an appearance feature of the image capturing request device is captured. The image collection method as described in one.
他の装置から撮影の実行の要求を受信する撮影要求受信手段と、
前記要求の要求元の装置が撮影範囲内に存在するか否かを該装置の外観上の特徴に基づいて判定する要求元検出手段と、
前記要求元検出手段によって前記要求の要求元の装置が撮影範囲内に存在すると判定された場合に、前記要求に応じて撮影を実行する撮影実行手段と、
前記撮影実行手段によって撮影された画像データを、前記要求にて指定された情報に従って送信する画像送信手段と
を備えることを特徴とする携帯装置。
Photographing request receiving means for receiving a photographing execution request from another device;
Request source detection means for determining whether or not the request source device of the request exists within the imaging range based on the appearance characteristics of the device;
Shooting execution means for executing shooting in response to the request when the request source detection means determines that the request source device is within the shooting range;
An image transmission means for transmitting image data photographed by the photographing execution means according to the information specified in the request.
前記要求元検出手段は、前記要求の要求元の装置から通知された該装置の外観上の特徴に基づいて、前記要求の要求元の装置が撮影範囲内に存在するか否かを判定することを特徴とする請求項5に記載の携帯装置。   The request source detection unit determines whether or not the request source device exists within the imaging range based on the appearance characteristic of the device notified from the request source device. The portable device according to claim 5. 前記要求元検出手段は、焦点距離を変更して撮影した複数の画像の中に前記外観上の特徴を含む画像があった場合に、前記要求の要求元の装置が撮影範囲内に存在すると判定し、
前記撮影実行手段は、前記外観上の特徴を含む画像が撮影されたときと同じ焦点距離で撮影を実行することを特徴とする請求項5または6に記載の携帯装置。
The request source detection unit determines that the request source device is within the shooting range when there is an image including the appearance feature in a plurality of images shot with a changed focal length. And
The portable apparatus according to claim 5, wherein the photographing execution unit executes photographing at the same focal length as when the image including the appearance feature is photographed.
自装置から所定の距離内に存在する他の携帯装置を検出する検出手段と、
前記検出手段によって検出された他の携帯装置に対して、撮影した画像データの送信先を指定して撮影の実行を要求する撮影要求送信手段と
をさらに備えたことを特徴とする請求項5〜7のいずれか1つに記載の携帯装置。
Detecting means for detecting other portable devices existing within a predetermined distance from the own device;
6. An imaging request transmission unit that requests the other portable device detected by the detection unit to specify the transmission destination of the captured image data and execute the imaging. 8. The portable device according to any one of 7.
JP2009269090A 2009-11-26 2009-11-26 Image collecting method and portable device Expired - Fee Related JP5318734B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2009269090A JP5318734B2 (en) 2009-11-26 2009-11-26 Image collecting method and portable device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2009269090A JP5318734B2 (en) 2009-11-26 2009-11-26 Image collecting method and portable device

Publications (2)

Publication Number Publication Date
JP2011114579A true JP2011114579A (en) 2011-06-09
JP5318734B2 JP5318734B2 (en) 2013-10-16

Family

ID=44236597

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2009269090A Expired - Fee Related JP5318734B2 (en) 2009-11-26 2009-11-26 Image collecting method and portable device

Country Status (1)

Country Link
JP (1) JP5318734B2 (en)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2016158206A1 (en) * 2015-03-31 2016-10-06 ソニー株式会社 Information processing device, information processing method, and program
JP2017169131A (en) * 2016-03-17 2017-09-21 日本電信電話株式会社 Image processing apparatus and image processing method
JP2017175453A (en) * 2016-03-24 2017-09-28 日本電信電話株式会社 Image processing apparatus and image processing method
JP2020014078A (en) * 2018-07-17 2020-01-23 本田技研工業株式会社 System, imaging device, communication terminal, and program
WO2021255931A1 (en) * 2020-06-19 2021-12-23 日本電信電話株式会社 Image collection device, image collection system, image collection method, and program

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003023564A (en) * 2001-07-09 2003-01-24 Mazda Motor Corp Imaging device for vehicle and control method therefor, and computer program
JP2007173992A (en) * 2005-12-19 2007-07-05 Sharp Corp Remote camera device and remote camera operation device

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003023564A (en) * 2001-07-09 2003-01-24 Mazda Motor Corp Imaging device for vehicle and control method therefor, and computer program
JP2007173992A (en) * 2005-12-19 2007-07-05 Sharp Corp Remote camera device and remote camera operation device

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2016158206A1 (en) * 2015-03-31 2016-10-06 ソニー株式会社 Information processing device, information processing method, and program
US10360453B2 (en) 2015-03-31 2019-07-23 Sony Corporation Information processing apparatus and information processing method to link devices by recognizing the appearance of a device
US10789476B2 (en) 2015-03-31 2020-09-29 Sony Corporation Information processing apparatus and information processing method
JP2017169131A (en) * 2016-03-17 2017-09-21 日本電信電話株式会社 Image processing apparatus and image processing method
JP2017175453A (en) * 2016-03-24 2017-09-28 日本電信電話株式会社 Image processing apparatus and image processing method
JP2020014078A (en) * 2018-07-17 2020-01-23 本田技研工業株式会社 System, imaging device, communication terminal, and program
JP7141876B2 (en) 2018-07-17 2022-09-26 本田技研工業株式会社 System, Imaging Device, and Program
WO2021255931A1 (en) * 2020-06-19 2021-12-23 日本電信電話株式会社 Image collection device, image collection system, image collection method, and program

Also Published As

Publication number Publication date
JP5318734B2 (en) 2013-10-16

Similar Documents

Publication Publication Date Title
JP3741713B2 (en) Imaging system
JP5965708B2 (en) Wireless communication device, memory device, wireless communication system, wireless communication method, and program
US9485404B2 (en) Timing system and method with integrated event participant tracking management services
JP4366601B2 (en) Time shift image distribution system, time shift image distribution method, time shift image request device, and image server
US20070228159A1 (en) Inquiry system, imaging device, inquiry device, information processing method, and program thereof
JP5318734B2 (en) Image collecting method and portable device
JP6192306B2 (en) Imaging apparatus, management server, image transmission method, and program
KR101145543B1 (en) System and method for providing ward&#39;s image
WO2018116485A1 (en) Video collection system, video collection server, video collection method and program
JP5151451B2 (en) Person identification system, person identification device, person identification method, and person identification program
CN111414598A (en) Monitoring method, device and equipment based on block chain and storage medium
JP2009206617A (en) Crime prevention system using face authentication
KR100798917B1 (en) Digital photo contents system and method adn device for transmitting/receiving digital photo contents in digital photo contents system
JP6504896B2 (en) INFORMATION PROCESSING APPARATUS, INFORMATION PROCESSING METHOD, AND IMAGE TRANSFER SYSTEM
JP5367547B2 (en) Image collection method and portable device
JP2009124539A (en) Photographic image providing server, photographic image providing system and method
JP4206488B2 (en) Image processing apparatus, photographing system, image processing method, image processing program, and recording medium
JP4206489B2 (en) Photography availability determination device, imaging system, imaging availability determination method, imaging availability determination program, and recording medium
JP4919545B2 (en) Data transmission system and photographing apparatus
JP2006101028A (en) Supervisory system
JP2021125789A (en) Image processing device, image processing system, image processing method, and computer program
JP3888143B2 (en) Imaging notification system
JP2020009087A (en) Information collection server, information collection system, and information collection method
JP7207586B2 (en) Imaging control device and imaging system
JP2011009900A (en) Imaging apparatus

Legal Events

Date Code Title Description
RD02 Notification of acceptance of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7422

Effective date: 20110520

RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7424

Effective date: 20110520

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20120309

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20130208

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20130226

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20130411

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20130709

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20130710

R150 Certificate of patent or registration of utility model

Ref document number: 5318734

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150

S531 Written request for registration of change of domicile

Free format text: JAPANESE INTERMEDIATE CODE: R313531

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

LAPS Cancellation because of no payment of annual fees