JP7408116B2 - Imaging data provision system - Google Patents

Imaging data provision system Download PDF

Info

Publication number
JP7408116B2
JP7408116B2 JP2019087826A JP2019087826A JP7408116B2 JP 7408116 B2 JP7408116 B2 JP 7408116B2 JP 2019087826 A JP2019087826 A JP 2019087826A JP 2019087826 A JP2019087826 A JP 2019087826A JP 7408116 B2 JP7408116 B2 JP 7408116B2
Authority
JP
Japan
Prior art keywords
imaging
user
data
mobile terminal
imaging device
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2019087826A
Other languages
Japanese (ja)
Other versions
JP2020184165A (en
Inventor
正博 鳥山
Original Assignee
株式会社鳥山研究室
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 株式会社鳥山研究室 filed Critical 株式会社鳥山研究室
Priority to JP2019087826A priority Critical patent/JP7408116B2/en
Publication of JP2020184165A publication Critical patent/JP2020184165A/en
Priority to JP2023210143A priority patent/JP2024020650A/en
Application granted granted Critical
Publication of JP7408116B2 publication Critical patent/JP7408116B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Image Analysis (AREA)
  • Studio Devices (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)
  • Image Processing (AREA)

Description

本発明は、撮像データ提供システムに関し、特に、プライバシーに配慮した撮像データ提供システムに関する。 The present invention relates to an imaging data providing system, and particularly to an imaging data providing system that takes privacy into consideration.

特許文献1には、旅行参加者が自分が撮影された実際の画像を確認した上で該画像のプリントを注文できる写真販売システムが開示されている。この写真販売システムは、デジタルカメラと、前記デジタルカメラで人物を撮影した画像の画像データを、撮影直後に送信する第1の通信装置と、前記第1の通信装置からの前記画像データを受信する第2の通信装置と、前記第2の通信装置が受信した画像データの画像を表示する画像表示部と前記撮影された人物による前記画像のプリント注文を受け付ける受注部とを備えたプリントの受注装置とからなり、前記デジタルカメラ及び第1の通信装置と、前記第2の通信装置及び前記受注装置とは隔離された位置に配置されていることを特徴とする。 Patent Document 1 discloses a photo sales system in which a travel participant can check an actual image taken of himself or herself and then order a print of the image. This photo sales system includes a digital camera, a first communication device that transmits image data of an image of a person taken with the digital camera immediately after the photo is taken, and receives the image data from the first communication device. a print order receiving device comprising: a second communication device; an image display unit that displays an image of image data received by the second communication device; and an order receiving unit that receives a print order for the image from the photographed person. The digital camera and the first communication device, and the second communication device and the order receiving device are arranged in isolated positions.

特許文献2には、ウエブサイトを介して写真のプリント及び写真アルバムを配信する写真アルバム作成システムが開示されている。この写真アルバム作成システムでは、ユーザは、ウエブサイトにて会員登録し、ログインID及びパスワードの配布を受ける。写真アルバム作成サーバ装置側では、専門のカメラマンを幼稚園、学校等に派遣し、園児又は生徒の写真を撮影し、ウエブサイトに掲示する。会員登録したユーザは、ウエブサイトにて写真及び写真アルバムを申し込む。ユーザは、写真アルバムを自由に編集することができる。写真アルバム作成サーバ装置では、長期間に亘って、画像データを保存する。
特開2003-223504号公報 特開2008-21191号公報
Patent Document 2 discloses a photo album creation system that distributes photo prints and photo albums via a website. In this photo album creation system, a user registers as a member on a website and receives a login ID and password. On the photo album creation server device side, a professional photographer is dispatched to a kindergarten, school, etc. to take pictures of children or students and post them on a website. Users who have registered as members apply for photos and photo albums on the website. The user can freely edit the photo album. The photo album creation server device stores image data for a long period of time.
Japanese Patent Application Publication No. 2003-223504 Japanese Patent Application Publication No. 2008-21191

しかし、特許文献1に開示されている写真販売システムは、撮影対象者ではない写真に映り込んでしまった人物に対するプライバシーの配慮がされていない。また、このためプリント注文者の意識が低いと、撮影対象者ではない写真に映り込んでしまった人物に対するプライバシーが十分に保護されない場合がある。 However, the photo sales system disclosed in Patent Document 1 does not take into account the privacy of a person who is not the subject of the photo and is included in the photo. Furthermore, if the print orderer is not aware of the issue, the privacy of a person who is not the subject of the photograph may not be sufficiently protected.

また、特許文献2に開示されている写真アルバム作成システムは、同じ幼稚園、同じ学校等の園児又は生徒に限定される話ではあるが、ユーザは他の園児又は生徒の写真もウエブサイトでの掲示を通じて閲覧することが可能である。換言すると、ウエブサイトに掲載された写真は、同じ幼稚園、同じ学校等の園児又は生徒、その父兄等であれば、誰もが自由に見得る状態となる。しかし、これを希望しない園児又は生徒、その父兄等がいる場合に、それに対処することができない。 Furthermore, although the photo album creation system disclosed in Patent Document 2 is limited to children or students from the same kindergarten or school, users can post photos of other children or students on the website. It can be viewed through. In other words, photos posted on a website can be freely viewed by anyone who is a kindergartener, student, parent, etc. of the same kindergarten or school. However, if there are children, students, or their parents who do not wish to do so, it is not possible to deal with this situation.

そこで、本発明は、旅行者等を撮影対象者とした撮像データを、撮影対象者ではない写真に映り込んでしまった人物に対するプライバシーに十分に配慮した上で、撮影対象者及びこれに付帯する人物が写っている撮像データを第三者が閲覧しないようにすることを課題とする。 Therefore, the present invention provides imaging data that includes a traveler or the like as a photographic subject, while giving sufficient consideration to the privacy of a person who is not the photographic subject and is incidental to the photographic subject. The problem is to prevent third parties from viewing image data in which a person is photographed.

上記課題を解決するために、本発明は、
撮像者によって操作される撮像装置と、ユーザによって使用される位置特定手段を有する携帯端末と、を備える撮像データ提供システムであって、
前記ユーザの顔画像のマスターデータを登録を促す登録促進手段と、
前記位置特定手段の発する信号に基づいて前記撮像装置によって撮像された顔画像の撮像データと前記マスターデータとのマッチング判定をする判定手段と、
前記判定手段によってマスターデータにマッチングすると判定された顔画像の撮像データに対して前記ユーザ及びこれに付帯するメンバーを除く人顔に加工処理を施す加工処理手段と、
を備える。
In order to solve the above problems, the present invention
An imaging data providing system comprising an imaging device operated by a photographer, and a mobile terminal having a position specifying means used by a user, the system comprising:
registration promotion means for prompting registration of master data of the user's face image;
determination means for determining a match between the imaging data of the face image taken by the imaging device and the master data based on a signal emitted by the position specifying means;
processing means for performing processing on human faces excluding the user and members associated therewith with respect to the captured data of the face image determined to match the master data by the determination means;
Equipped with.

また、前記マスターデータを登録する仲介装置を備えることもできる。そして、前記仲介装置、前記撮像装置又は前記携帯端末に、前記加工処理手段を設けることもできる。 Furthermore, it is also possible to include an intermediary device that registers the master data. The processing means may also be provided in the intermediary device, the imaging device, or the mobile terminal.

撮像装置によって撮像された顔画像の撮像データを送信する送信手段を備えてもよい。 The image capturing apparatus may include a transmitting means for transmitting image data of a face image captured by the imaging device.

前記判定手段によってマスターデータにマッチングすると判定された顔画像のユーザに対して本人確認をする確認手段と、
前記確認手段によって前記撮像データの顔画像が当該本人確認できたユーザの顔画像であることを条件に前記撮像装置によって撮像された顔画像のうち当該ユーザの他の顔画像を提供する提供手段と、
を備えることもできる。
Confirmation means for verifying the identity of the user whose face image is determined to match the master data by the determination means;
providing means for providing other facial images of the user among the facial images captured by the imaging device on the condition that the facial image of the imaging data is the facial image of the user whose identity has been confirmed by the confirmation unit; ,
can also be provided.

前記携帯端末は、前記登録促進手段によって促されたことに従って前記マスターデータ を登録する登録手段を備えることもできる。 The mobile terminal may also include registration means for registering the master data in accordance with prompts from the registration promotion means.

発明の実施の形態Embodiments of the invention

以下、本発明の実施形態について、図面を参照して説明する。 Embodiments of the present invention will be described below with reference to the drawings.

(概要の説明)
例えば、観光名所では、観光客らが、デジタルカメラなどを用いて同行者を撮像したり、近年、自撮りと称される撮像者自身を撮像したりしていることを目にする。観光客らの真のニーズは、自分自身や同行者が写っている写真を入手することである。
(Explanation of overview)
For example, at tourist attractions, tourists are often seen using digital cameras to take images of their companions, or, in recent years, taking images of themselves, often referred to as selfies. What tourists really want is to get photos of themselves and their travel companions.

本実施形態の撮像データ提供システムは、ユーザである観光客らに対して、観光地にて撮像された撮像データを提供するというサービス(以下、「本サービス」と称する。)を実現するものである。 The imaging data providing system of this embodiment realizes a service (hereinafter referred to as "this service") of providing imaging data taken at tourist spots to tourists who are users. be.

観光客らとしては、典型的には、本サービスの提供を受けるのに先立って、自身及び同行者の顔画像をマスターデータとして予め登録しておき、自身のスマートフォンなどに搭載されているGPSをアクティブにした状態で仲介装置300にスマートフォンの位置情報を送信できるようにし、ユーザであることの目印を洋服等に装着して観光地を見物すればよい。 Typically, before receiving this service, tourists register face images of themselves and their companions as master data, and use the GPS installed in their smartphones. The location information of the smartphone can be transmitted to the intermediary device 300 in the activated state, and the user may wear a mark indicating that the user is a user on clothes or the like and visit tourist spots.

もっとも、スマートフォンの位置情報の送信に代えて、観光予定又は観光履歴の送信とすることもできる。さらに、これに代えて又はこれとともに、当日の服装情報(赤いシャツ、青いセーター、白いバック、サングラスの有無など)も送信することができる。 However, instead of transmitting the location information of the smartphone, it is also possible to transmit the sightseeing schedule or sightseeing history. Furthermore, instead of or in addition to this, clothing information for the day (red shirt, blue sweater, white bag, presence or absence of sunglasses, etc.) can also be transmitted.

このとき、いろいろな観光地に設置された監視カメラ、ライブカメラなどの自動撮影カメラ、又は、本サービスに会員登録しているカメラマンによって、ユーザらが撮像される。そして、マスターデータに照らして、ユーザ毎に適宜、撮像データを送信すればよい。なお、カメラマン等による撮像から撮像データをユーザに送信するまでの時間を短くすれば、ユーザにとって魅力的なサービスを提供することが可能となる。 At this time, the users are imaged by surveillance cameras installed at various tourist spots, automatic cameras such as live cameras, or by photographers who are registered as members of this service. Then, imaging data may be transmitted as appropriate for each user in light of the master data. Note that by shortening the time from when a cameraman or the like takes an image to when the image data is transmitted to the user, it is possible to provide services that are attractive to the user.

このように、ライブカメラ等が、自分たちを次々と撮影してくれるので、ユーザは、わざわざ自撮りなどをしなくとも、観光終了後に、何十枚何百枚の自分の写真を入手することが可能となる。 In this way, live cameras etc. take pictures of themselves one after another, so users can obtain dozens or hundreds of photos of themselves after sightseeing without having to go through the trouble of taking selfies. becomes possible.

ここで、ライブカメラ等によって撮像された撮像データには、ユーザ及びその同伴者ら以外の第三者が写り込む場合がある。このときに、当該第三者の顔部分などをその人物が特定できない程度に加工を施してプライバシーに配慮することが、本実施形態の撮像データ提供システムの特徴の一つである。 Here, a third party other than the user and his or her companion may be captured in the image data captured by a live camera or the like. At this time, one of the features of the imaging data providing system of the present embodiment is that the third party's face is processed to such an extent that the person cannot be identified, in consideration of privacy.

なお、撮像データの提供手法については不問であるが、例えば、解像度が相対的に大きな撮像データの解像度を下げてユーザに対して無料提供してもよいし、その中でユーザが気に入ったものがあればオリジナルの解像度の高い撮像データを有料で提供することも考えられる。 There is no restriction on the method of providing the imaging data, but for example, it is possible to lower the resolution of imaging data with a relatively high resolution and provide it to the user free of charge, or to provide the user with the data that he or she likes for free. If so, it may be possible to provide original, high-resolution imaging data for a fee.

ちなみに、撮像データを有料提供した場合には、その撮影者が本サービスの提供によって生じる経費分を差し引いて入手してもよいし、会員カメラマン全員で所定の重み付けをもってシェアしてもよい。 Incidentally, if imaging data is provided for a fee, the photographer may obtain it after deducting the expenses incurred by providing this service, or all member photographers may share it with a predetermined weighting.

ところで、GPSを用いれば、通常、撮像データに写り込む、ユーザ、その同行者、及び、第三者の総数は、せいぜい数十人程度であろう。したがって、撮像データの人顔とマスターデータとのマッチングは精度良く行うことができる。このため、当該第三者のプライバシー問題が生じる可能性は非常に低い。しかも、ユーザに提供する撮像データの枚数が増えれば増えるほど、マッチングのサンプル数が増えるため、マッチング精度が向上する。 By the way, if GPS is used, the total number of users, their companions, and third parties who will be captured in the imaged data will normally be about several dozen at most. Therefore, matching between the human face of the imaged data and the master data can be performed with high accuracy. Therefore, it is extremely unlikely that privacy issues will arise for the third party. Furthermore, as the number of images of image data provided to the user increases, the number of samples for matching increases, and thus matching accuracy improves.

(構成の説明)
図1は、本発明の実施形態の画像データ提供システムの模式的な構成図である。図1には、以下説明する、撮像装置100と、携帯端末200と、仲介装置300と、ネットワーク400とを示している。
(Explanation of configuration)
FIG. 1 is a schematic configuration diagram of an image data providing system according to an embodiment of the present invention. FIG. 1 shows an imaging device 100, a mobile terminal 200, an intermediary device 300, and a network 400, which will be described below.

撮像装置100は、カメラマンによって操作されるデジタルカメラ若しくはスマートフォンなど、又は、町中若しくは観光地等に設置されている監視カメラ若しくはライブカメラなどである。撮像装置100は、被写体となる旅行者などの撮像対象を撮像する撮像手段110と、撮像手段110によって撮像された撮像データをネットワーク400を介して仲介装置300に送信する通信手段120と、を備えている。 The imaging device 100 is a digital camera or a smartphone operated by a photographer, or a surveillance camera or a live camera installed in a town, a tourist spot, or the like. The imaging device 100 includes an imaging device 110 that images an object to be imaged, such as a traveler, and a communication device 120 that transmits imaging data captured by the imaging device 110 to an intermediary device 300 via a network 400. ing.

携帯端末200は、ユーザが所有する携帯電話機又はスマートフォンなどである。携帯端末200は、グローバルポジショニングシステム(以下、「GPS」と称する)210と、撮像装置100及び仲介装置300と各種データの送受信を行う通信手段220と、を備えている。 The mobile terminal 200 is a mobile phone or a smartphone owned by the user. The mobile terminal 200 includes a global positioning system (hereinafter referred to as "GPS") 210 and a communication means 220 that transmits and receives various data to and from the imaging device 100 and the intermediary device 300.

仲介装置300は、本実施形態の画像データ提供システムによる画像提供サービス(以下、「本サービス」と称する。)をするものであり、撮像装置100と携帯端末200とのやり取りを仲介するものである。 The intermediary device 300 provides an image providing service (hereinafter referred to as "this service") using the image data providing system of this embodiment, and mediates the exchange between the imaging device 100 and the mobile terminal 200. .

仲介装置300は、以下説明する、登録促進手段310と、判定手段320と、加工処理手段330と、確認手段340と、提供手段350と、を備えている。 The mediation device 300 includes a registration promotion means 310, a determination means 320, a processing means 330, a confirmation means 340, and a provision means 350, which will be described below.

登録促進手段310は、ユーザの顔画像のマスターデータを含むユーザ登録と、撮像装置100のカメラマンに対するカメラマンとしての会員登録を促すものである。ユーザは、典型的には、登録促進手段310によって促されると、携帯端末200又は図示しないデジタルカメラなどを操作することによって、自己の顔画像のマスターデータを撮像して、通信手段220又は図示しないパーソナルコンピュータ(以下、「PC」と称する。)などを用いて仲介装置300に送信する。 The registration promotion means 310 prompts user registration including master data of the user's face image and member registration as a photographer for the photographer of the imaging device 100. When prompted by the registration promotion means 310, the user typically captures the master data of his or her own facial image by operating the mobile terminal 200 or a digital camera (not shown), and transfers the master data to the communication means 220 or the communication means 220 (not shown). It is transmitted to the intermediary device 300 using a personal computer (hereinafter referred to as a "PC") or the like.

仲介装置300は、携帯端末200等から送信されたマスターデータを受信すると、自装置に付帯する図示しない格納媒体に格納する。なお、ユーザ登録には、ユーザの氏名・住所・電話番号・メールアドレスなどの登録も行われ、これらはマスターデータと紐づけられて格納される。また、会員登録には、カメラマンの氏名・住所・電話番号・メールアドレスなどが格納される。 When the intermediary device 300 receives the master data transmitted from the mobile terminal 200 or the like, the intermediary device 300 stores the data in a storage medium (not shown) attached to the intermediary device 300 . Note that the user registration also includes the registration of the user's name, address, telephone number, email address, etc., and these are stored in association with master data. The member registration also stores the photographer's name, address, phone number, email address, etc.

判定手段320は、主として、撮像装置100によって撮像された顔画像の撮像データとマスターデータとがマッチングするか否か判定し、すなわち、撮像装置100によって撮像された被写体が、本サービスを受ける者であるか否かを判定するものである。この判定のためには、ユーザの観光予定、服装情報、携帯端末200の移動履歴なども考慮することができる。 The determining means 320 mainly determines whether or not the image data of the face image captured by the imaging device 100 matches the master data, that is, whether the subject imaged by the imaging device 100 is the person receiving this service. This is to determine whether or not there is. For this determination, the user's sightseeing schedule, clothing information, movement history of the mobile terminal 200, etc. can also be taken into consideration.

加工処理手段330は、判定手段320によってマスターデータにマッチングすると判定された顔画像の撮像データに対して、本サービスを受けるユーザ及びこれに付帯するメンバーを除く人顔に加工処理を施すものである。加工処理の内容は不問であるが、いわゆるぼかしを自然的に入れたり、ピントがあっていないような状態にしたり、当該第三者を撮像データから消し込みしたりといったその人顔の人物が特定できないようにして、当該人物のプライバシーを保護できればよい。 The processing means 330 processes the captured data of the face image determined by the determination means 320 to match the master data, except for the user receiving this service and the members associated therewith. . The details of the processing do not matter, but it may be possible to make the person's face more specific, such as adding a natural blur, making it appear out of focus, or erasing the third person from the imaged data. It would be good if the privacy of the person in question could be protected by preventing them from doing so.

確認手段340は、判定手段320によってマスターデータにマッチングすると判定された顔画像のユーザが、本サービスによって撮像データを送信すべきか否かの本人確認をするものである。具体的には、判定手段320による判定対象に用いた顔画像の撮像データを必要に応じて加工処理手段330によって加工処理を施してから、ユーザ登録されたメールアドレス宛に送信すればよい。 The confirmation unit 340 confirms the identity of the user whose face image has been determined by the determination unit 320 to match the master data, to determine whether or not the user should transmit the captured data through this service. Specifically, the processing unit 330 may process the captured data of the face image used as the judgment target by the judgment unit 320 as necessary, and then send the data to the user's registered email address.

提供手段350は、確認手段340によってユーザの本人確認ができた場合に、撮像装置100によって撮像された撮像データのうち当該ユーザが写っている撮像データをユーザ登録されたメールアドレス宛に提供するものである。 The providing means 350 provides, when the user's identity can be verified by the verification means 340, the imaged data in which the user is captured among the imaged data captured by the imaging device 100, to the e-mail address registered by the user. It is.

を備えることもできる。 It is also possible to have

ネットワーク400は、撮像装置100と携帯端末200と仲介装置300とを相互に接続するインターネットなどのネットワークである。なお、これらの間でのデータのやり取りは、インターネットのみならず、郵送などのネットワークも含むものとする。 The network 400 is a network such as the Internet that interconnects the imaging device 100, the mobile terminal 200, and the intermediary device 300. Note that the exchange of data between them includes not only the Internet but also networks such as mail.

(動作の説明)
図2は、図1に示す撮像データ提供システムの動作を示すタイムチャートである。なお、ここでは、ユーザのメールアドレスが、携帯端末200に設定されているものとして説明するが、PC又はタブレット端末にインストールされているメーラーに設定されていてもよい。
(Explanation of operation)
FIG. 2 is a time chart showing the operation of the imaging data providing system shown in FIG. Note that although the user's email address will be described here as being set in the mobile terminal 200, it may be set in a mailer installed in a PC or a tablet terminal.

まず、本サービスの提供に先立って行うべき登録処理について説明する。仲介装置300の登録促進手段310は、撮像装置100のカメラマン及び携帯端末200のユーザに対して、それぞれ、会員登録要求及びユーザ登録要求を送信して、会員登録及びユーザ登録を促す(ステップS1,S2)。 First, we will explain the registration process that must be performed prior to providing this service. The registration promotion unit 310 of the intermediary device 300 sends a member registration request and a user registration request to the cameraman of the imaging device 100 and the user of the mobile terminal 200, respectively, to prompt membership registration and user registration (step S1, S2).

具体的には、仲介装置300の管理者等によって本サービスに係るウェブページ又はアプリケーションプログラムを作成しておき、そこにアクセス等してきたカメラマン及びユーザに対して、氏名等の会員登録等に必要な情報の入力及び送信を促す。ユーザ登録の際には、ユーザの顔画像のマスターデータの送信も促す。 Specifically, a web page or application program related to this service is created by the administrator of the intermediary device 300, and photographers and users who access it are asked to provide information necessary for membership registration, such as their name. Encourage input and submission of information. When registering as a user, the system also prompts the user to send master data of the user's facial image.

仲介装置300は、カメラマン等から必要な情報が送信されてくると(ステップS3,S4)、図示しない格納媒体に対して、それらの情報を格納する(ステップS5)。これにより、当該カメラマンも当該ユーザも、本サービスを受けられることになる。 When the mediation device 300 receives necessary information from a photographer or the like (steps S3, S4), it stores the information in a storage medium (not shown) (step S5). This allows both the cameraman and the user to receive this service.

なお、ユーザ登録の際には、カメラマンがユーザ及びこれに付帯する人物を撮像することに同意することを確認するとよい。以上が、本サービスの提供に先立って行うべき処理である。 Note that when registering as a user, it is recommended to confirm that the cameraman agrees to take images of the user and accompanying persons. The above is the process that should be performed prior to providing this service.

この状態で、例えば、ユーザがとある週末に、家族で観光地に観光旅行に出かけようとしたとする。この場合、ユーザは、事前に、自分以外の家族の少なくとも顔画像をマスターデータとして追加送信するとよい。また、ユーザは、参考のため、事前に観光予定を仲介装置300に送信するとよい(ステップS6)。 In this state, for example, suppose that the user wants to go on a sightseeing trip with his family to a tourist spot on a certain weekend. In this case, the user may additionally transmit at least facial images of family members other than the user as master data in advance. Further, the user may send the sightseeing schedule to the intermediary device 300 in advance for reference (step S6).

仲介装置300は、ユーザから追加送信されたマスターデータ等を受信すると、当該ユーザの格納情報に当該マスターデータを追加し、併せて、ユーザから観光予定が送信されてきた場合にも、それを当該ユーザの格納情報に追加する(ステップS7)。 When the intermediary device 300 receives master data etc. additionally transmitted from the user, it adds the master data to the stored information of the user, and also adds the master data to the stored information of the user. It is added to the user's stored information (step S7).

ユーザが、実際に、観光旅行に出かけた場合には、観光先では携帯端末200のGPS210をアクティブにしておく(ステップS8)。これにより、後述するアプリケーションプログラムによってGPS210からの緯度経度情報などの位置情報が現在時刻と紐付けた状態で、仲介装置300に送信されることになる(ステップS10)。 When the user actually goes on a sightseeing trip, the GPS 210 of the mobile terminal 200 is activated at the sightseeing destination (step S8). As a result, location information such as latitude and longitude information from the GPS 210 is transmitted to the intermediary device 300 in a state in which it is linked to the current time (step S10).

また、ユーザ及びその家族は、本サービスを受けるユーザであることを示す目印となるようなバッジ等を洋服又はカバンなどに装着しておく。なお、カメラマンにも会員であることを示す目印となるようなバッジ、スカーフ、腕章等を装着しておくとよい。 In addition, the user and his or her family wear a badge or the like on their clothes or bag that indicates that they are the user receiving this service. It is also a good idea for photographers to wear badges, scarves, armbands, etc. that will show that they are members.

この状態で、ユーザが家族とともに、観光地を見物したとする。そうすると、その観光地にいるカメラマンは、目印となるバッジ等を装着しているユーザ及びその同行者を、撮像装置100を用いて撮像することが可能となる。 Suppose that in this state, the user visits a tourist spot with his family. Then, a photographer at the tourist spot can use the imaging device 100 to take images of the user and his/her companion who is wearing a badge or the like that serves as a landmark.

実際に、カメラマンが、撮像装置100を操作することによって、撮像手段110によってユーザらを撮像すると(ステップS9)、通信手段120は、その撮像データを仲介装置300に送信する(ステップS11)。 In fact, when the cameraman images the users with the imaging means 110 by operating the imaging device 100 (step S9), the communication means 120 transmits the imaged data to the intermediary device 300 (step S11).

なお、送信対象の撮像データは静止画でもよいし動画でもよい。また、撮像データは、スクランブル処理などをして秘匿化してから送信してもよい。 Note that the captured image data to be transmitted may be a still image or a moving image. Further, the imaged data may be transmitted after being concealed by scrambling processing or the like.

なお、撮像装置100から撮像データを送信する際には、撮像場所情報(例えば、観光地名、撮像場所の住所又は地名)と撮像時間情報とを付加すると、判定手段320による判定処理の負荷を減らすこと、判定精度を向上させることに寄与するために好ましい。 Note that when transmitting imaging data from the imaging device 100, adding imaging location information (for example, tourist spot name, address or place name of the imaging location) and imaging time information reduces the load on the determination process by the determining means 320. This is preferable because it contributes to improving the determination accuracy.

仲介装置300では、撮像装置100から送信される撮像データを受信すると、判定手段320が、当該撮像データの顔画像に基づいて、マスターデータの格納媒体を参照することによってユーザを特定する。 In the intermediary device 300, when the imaging data transmitted from the imaging device 100 is received, the determining means 320 identifies the user by referring to the master data storage medium based on the facial image of the imaging data.

判定手段320は、この際、撮像データに撮像場所情報が付加されていて、かつ、ユーザから観光予定も送信されていた場合には、この撮像場所情報と観光予定とも照合すれば、判定効率が高まり、判定処理の負荷を減らすことができるし、判定精度を向上させることもできる。さらに、判定手段320は、携帯端末200のGPS210に基づく位置情報も使って判定処理を行えば、ほぼ100%の精度で判定処理を行うことができる。 At this time, if imaging location information has been added to the imaging data and a sightseeing schedule has also been sent from the user, the determination means 320 can improve the determination efficiency by comparing this imaging location information with the sightseeing schedule. It is possible to reduce the load on the determination process and improve the determination accuracy. Furthermore, if the determination means 320 also uses the position information based on the GPS 210 of the mobile terminal 200 to perform the determination process, it is possible to perform the determination process with almost 100% accuracy.

なお、判定処理に先立って、撮影データの顔画像を特定する際には、撮像装置100の撮像エリアの、撮像装置100と被写体との焦点距離も考慮するとよい。また、複数の撮像データを用いて判定をするとよい。 Note that, prior to the determination process, when specifying the face image in the photographic data, it is preferable to also consider the focal distance between the imaging device 100 and the subject in the imaging area of the imaging device 100. Further, it is preferable to make the determination using a plurality of pieces of imaging data.

また、判定制度をより向上させるために、強化学習系のAIを活用することも一法である。正面からの画像を斜めから見たならばこうなるであろうといった予想を、AIを用いてするとよい。 Another way to improve the judgment system is to use reinforcement learning AI. It is a good idea to use AI to predict what will happen if an image from the front is viewed from an angle.

さらに、マスターデータについては、継時的な顔の変化があるので、撮像データの顔画像で、マスターデータをアップデートするとよい。 Furthermore, since the face of the master data changes over time, it is preferable to update the master data with the face image of the imaging data.

なお、撮像装置100には、カメラマンが操作するデジタルカメラ等に限定されず、観光地などに設置されたライブカメラ等も含むので、ステップS11において送信される撮像データには、ユーザの観光ルート或いは観光地に設置されているライブカメラ等によって撮像されたユーザの撮像データも含まれる。 Note that the imaging device 100 is not limited to a digital camera operated by a photographer, but also includes a live camera installed at a tourist spot, etc., so the imaging data transmitted in step S11 may include the user's sightseeing route or the like. It also includes user image data captured by live cameras installed at tourist spots.

ライブカメラ等は、恒常的に、動画撮影をして置き、その動画に目印となるバッヂ等を装着している人らが写り込んだ場合に、当該撮像データを抜き出して仲介装置300に送信するようにすればよい。 A live camera or the like constantly records video, and when people wearing badges or the like serving as landmarks are captured in the video, the captured image data is extracted and transmitted to the intermediary device 300. Just do it like this.

もっとも、ライブカメラ等による動画の撮像データの全てを仲介装置300に送信するようにして、その撮像データの中から、仲介装置300においてユーザの写っている部分を抜き出すことも可能である。 Of course, it is also possible to transmit all of the image data of a moving image by a live camera or the like to the intermediary device 300, and extract the portion in which the user is captured in the intermediary device 300 from among the image data.

なお、仲介装置300の管理者等は、観光地において自ら、撮像装置100を設置する、或いは、ドローンに搭載した撮像装置100を当該ドローンとともに遠隔操作する或いは所定のプログラム等によって自動的にドローン稼働及び撮像装置100による撮像をすることも可能である。 The administrator of the intermediary device 300 may install the imaging device 100 himself at a tourist spot, remotely control the imaging device 100 mounted on a drone together with the drone, or automatically operate the drone using a predetermined program or the like. It is also possible to take an image using the imaging device 100.

観光地における具体的な設置場所は不問であるが、観光地が神社であるとするならば、境内の鈴近辺のように、自然に顔を向ける位置にすることもできる。 The specific location in a tourist spot is not a problem, but if the tourist spot is a shrine, it can be placed in a position that faces naturally, such as near the bell in the temple grounds.

この場合の撮像装置100は、撮像手段と、「こちらを向いてください」、「はいポーズ」、「撮影します。3・2・1」など撮像に関する各種音声ガイダンスを流す案内手段と、撮像エリアにユーザが写り込んだことを特定する特定手段と、を備えるとよい。 In this case, the imaging device 100 includes an imaging means, a guidance means for playing various audio guidance related to imaging such as "Please turn here", "Yes pose", "I will take a picture. 3.2.1", and an imaging area. It is preferable to include a specifying means for specifying that the user is reflected in the image.

なお、特定手段を設けることは必須ではなく、これに代えて、撮像エリアに対する進入物に対して画像認識をして人顔であるか否かを判定する判定手段を備えてもよい。なお、撮像装置100によって自動的に撮像する場合には、連続撮像をしたうえで笑顔認識手段を備えるなどして笑顔の多いものを保存することも一法である。 Note that it is not essential to provide the identifying means; instead, a determining means may be provided that performs image recognition on an object entering the imaging area and determines whether or not it is a human face. Note that when images are automatically captured by the imaging device 100, one method is to capture images continuously and then store images with many smiles by providing a smiling face recognition means or the like.

なお、撮像装置100は、ユーザらを撮像するのみならず、観光地の典型的な観光写真(寺院の本堂、山門、山門からの景色等)を撮像して、その撮像データも併せて送信することもできる。 Note that the imaging device 100 not only images the users, but also images typical tourist photos of tourist spots (the main hall of a temple, the Sanmon gate, the view from the Sanmon gate, etc.), and also transmits the imaged data. You can also do that.

こうすると、通常時には撮像手段において動画を撮像しておき、その動画に目印となるバッヂを装着したユーザが写り込んだことを特定手段によって特定した場合には、案内手段によってユーザの視線を観光地用撮像装置に向けさせたり、ポーズをとらせたりした状態で、撮像手段によって静止画又は動画の撮像データを撮像させ、仲介装置300に送信させることができる。 In this way, when the imaging means normally captures a video, and the identification means identifies that a user wearing a badge that serves as a landmark appears in the video, the guidance means directs the user's line of sight to the tourist spot. It is possible to cause the image capturing device to capture a still image or moving image data while facing the image capturing device for personal use or to take a pose, and to transmit the image data to the intermediary device 300.

つぎに、仲介装置300では、撮像データにユーザ及びその家族以外の第三者が写っているか否かを判別して、写っていると判別した場合には、加工処理手段330によって、当該第三者のプライバシーを保護するために加工処理を行う(ステップS13)。 Next, the intermediary device 300 determines whether or not a third party other than the user and his or her family is included in the captured image data, and if it is determined that the image data includes a third party, the processing unit 330 Processing is performed to protect the privacy of the user (step S13).

ここでの加工処理は、既述のように、ぼかしを自然的に入れたり、ピントがあっていないような状態にしたりすることに加えて、モザイクを入れる、何からの画像を重畳させる、又は、第三者の人影を取り除くといったものなどが挙げられるが、いずれも既知の手法を採用すればよく、また、結果的に、この第三者が誰であるか特定不可能な程度まで加工すればよい。 As mentioned above, the processing here includes adding a natural blur or creating an out-of-focus state, as well as adding a mosaic, superimposing an image from what source, or , remove the person of a third party, etc., but in either case, known methods can be used, and as a result, it is necessary to process the data to the extent that it is impossible to identify who this third party is. Bye.

つぎに、仲介装置300では、確認手段340が、判定手段320によってマスターデータにマッチングすると判定された顔画像のユーザが、本サービスによって撮像データを送信すべきか否かの本人確認をする(ステップS14)。 Next, in the intermediary device 300, the confirmation unit 340 confirms the identity of the user whose face image is determined to match the master data by the determination unit 320, to determine whether or not the user should transmit the captured data through this service (step S14). ).

この確認としては、例えば、携帯端末200から送信される観光予定又は位置情報と、撮像装置100から送信される撮像データに含まれている撮像場所情報及び撮像時間情報との照合、並びに、当該撮像データの顔画像とマスターデータとの照合などによって行えばよい。 This confirmation includes, for example, comparing the sightseeing schedule or location information transmitted from the mobile terminal 200 with the imaging location information and imaging time information included in the imaging data transmitted from the imaging device 100, and This may be done by comparing the face image of the data with the master data.

この例のように、家族全員が写っている写真であれば、それらのマスターデータと照合することでほぼ100%の確認ができると考えられるが、ユーザの一人旅のような、複数の特定の撮像データを例えば1ファイルだけ携帯端末200に送信することで、ユーザに本人確認を促すことも一法である。 As in this example, if the photo shows the whole family, it can be verified almost 100% by comparing it with the master data, but if the photo shows multiple specific photos, such as a user traveling alone. One method is to prompt the user to confirm his/her identity by transmitting, for example, only one file of imaging data to the mobile terminal 200.

つぎに、確認手段340によってユーザの本人確認ができた場合に、仲介装置300では、提供手段350が、撮像装置100によって撮像された撮像データのうち当該ユーザが写っていて、必要に応じてステップS13の加工処理がなされた撮像データを携帯端末200に送信する。 Next, when the user's identity can be confirmed by the confirmation means 340, the provision means 350 in the intermediary device 300 selects the image data captured by the image capture device 100 that includes the user, and if necessary, steps are taken. The imaged data processed in S13 is transmitted to the mobile terminal 200.

その結果、ユーザが気に入った撮像データがあれば、それを選択して購入処理をすることができる(ステップS16)。この場合には、クレジットカード、銀行振り込みなどをすることで、仲介装置300に撮像データの購入対価を支払い(ステップS17)、当該撮像データの送信元が、カメラマンの撮像装置100である場合には、その対価の一部が、撮像装置100のカメラマンに支払われる(ステップS18)。 As a result, if there is imaging data that the user likes, he or she can select it and perform purchase processing (step S16). In this case, pay the purchase price for the imaging data to the intermediary device 300 by using a credit card, bank transfer, etc. (step S17), and if the source of the imaging data is the cameraman's imaging device 100, , a part of the compensation is paid to the cameraman of the imaging device 100 (step S18).

(アプリケーションプログラムの説明)
図3及び図4は、図1に示す携帯端末200にインストールされるアプリケーションプログラムを起動した場合に携帯端末200のディスプレイに表示されるウェブページの例を示す図である。
(Application program description)
3 and 4 are diagrams showing examples of web pages displayed on the display of the mobile terminal 200 when the application program installed on the mobile terminal 200 shown in FIG. 1 is started.

なお、このアプリケーションプログラムは、携帯端末200に予めインストールされていてもよいし、ユーザが携帯端末200を操作することによって、図示しないアプリケーションサーバからダウンロードすることもできる。 Note that this application program may be installed in advance on the mobile terminal 200, or may be downloaded from an application server (not shown) by the user operating the mobile terminal 200.

図3(a)には、ユーザ登録処理に必要な入力欄を含むウェブページ10を示している。ここには、ユーザの氏名入力欄10aと、ユーザの住所入力欄10bと、ユーザの電話番号入力欄10cと、ユーザのメールアドレス入力欄10dと、ログインに必要なパスワード入力欄10eとが示されている。 FIG. 3(a) shows a web page 10 including input fields necessary for user registration processing. Here, a user name input field 10a, a user address input field 10b, a user telephone number input field 10c, a user email address input field 10d, and a password input field 10e necessary for login are shown. ing.

図3(b)には、図3(a)に示す入力画面に必要な情報を入力した後に表示されるプライバシーポリシーが表示されたウェブページ11を示している。ここには、「カメラマンがユーザ及びこれに付帯する人物を撮像します。」ということ、「位置情報サービス機能をオンすることを求めます」ということなどが表示され、同意するか同意しないかを選択するラジオボタン11a,11bも用意されている。 FIG. 3(b) shows a web page 11 on which a privacy policy is displayed after entering necessary information on the input screen shown in FIG. 3(a). Here, messages such as ``The cameraman will take images of the user and accompanying persons'' and ``We request that you turn on the location information service function'' are displayed, and you can agree or disagree. Radio buttons 11a and 11b for selection are also provided.

図3(c)には、ユーザのマスターデータを選択及び送信させるウェブページ12を示している。この例では、「マスターデータを選択して下さい。」という表示と、「送信ファイルを選択」という領域12aの表示とが示されている。ユーザが「送信ファイルを選択」という領域12aをタップすると、携帯端末200内の写真フォルダ等が、携帯端末200のディスプレイに表示され、適宜、ユーザ自身の顔画像を選択することができる。 FIG. 3(c) shows a web page 12 that allows the user to select and send master data. In this example, the display ``Please select master data.'' and the display ``Select transmission file'' in area 12a are shown. When the user taps the "select file to send" area 12a, the photo folder and the like in the mobile terminal 200 are displayed on the display of the mobile terminal 200, and the user can select the user's own facial image as appropriate.

なお、ユーザは、正面から撮影された顔画像、斜めから撮影された顔画像など、いくつかのファイルをマスターデータとして選択することも可能とされていて、これにより、判定手段320における判定処理の精度を高めることができる。 Note that the user can also select several files as master data, such as a face image photographed from the front and a face image photographed from an oblique angle. Accuracy can be increased.

ユーザは、図3(a)~図3(c)に示すウェブページ11~13を通じて、ユーザ登録を行うことができる。 A user can register as a user through web pages 11 to 13 shown in FIGS. 3(a) to 3(c).

図4(d)には、このアプリケーションプログラムの使用時のログイン画面のウェブページ13を示している。ここには、ログイン用のID入力欄13aと、図3(a)のパスワード入力欄10eを通じて設定したパスワード入力欄13bとを示している。なお、IDは個別に設定してもよいし、メールアドレス入力欄10dを通じて入力したメールアドレスを代用することもできる。 FIG. 4(d) shows the web page 13 of the login screen when using this application program. Here, an ID input field 13a for login and a password input field 13b set through the password input field 10e in FIG. 3(a) are shown. Note that the ID may be set individually, or the e-mail address entered through the e-mail address input field 10d may be substituted.

図4(e)には、携帯端末200の位置情報サービス機能をオンすることをユーザに選択させるウェブページ14を示している。ユーザはラジオボタン14a,14bのいずれかを選択することによって、位置情報サービス機能をオンするか否かを決定することができる。なお、位置情報サービス機能をオンすると、携帯端末200に搭載されているGPS210がオンされ、携帯端末200の位置情報及び移動履歴が定期的に仲介装置300に送信されることになる。 FIG. 4E shows a web page 14 that allows the user to select to turn on the location information service function of the mobile terminal 200. The user can decide whether to turn on the location information service function by selecting either radio button 14a or 14b. Note that when the location information service function is turned on, the GPS 210 installed in the mobile terminal 200 is turned on, and the position information and movement history of the mobile terminal 200 are periodically transmitted to the intermediary device 300.

図4(f)には、ユーザの観光予定の入力させるウェブページ15を示している。ここには、日程を選択させるカレンダー15aと、観光先の都道府県以下を選択させるプルダウンメニュー15bと、フリーワードによる観光地名入力欄15cとを示している。 FIG. 4(f) shows a web page 15 for inputting the user's sightseeing schedule. Here, a calendar 15a for selecting a date, a pull-down menu 15b for selecting the prefecture of the sightseeing destination, and a sightseeing spot name input field 15c using free words are shown.

ユーザは、図4(d)~図4(f)に示すウェブページ14~16を通じて、携帯端末200から仲介装置300に向けて、観光旅行前に観光予定を送信することが可能になり、また、携帯端末200の位置情報及び移動履歴を定期的に送信することが可能になる。 Users can now send their sightseeing schedule from the mobile terminal 200 to the intermediary device 300 through the web pages 14 to 16 shown in FIGS. 4(d) to 4(f), and , it becomes possible to periodically transmit the location information and movement history of the mobile terminal 200.

(撮像装置100からの撮像データ送信の説明)
図5は、図1に示す撮像装置100から仲介装置300に対して撮像データを送信する場合に撮像装置100のディスプレイに表示される画面例を示す図である。
(Description of imaging data transmission from imaging device 100)
FIG. 5 is a diagram showing an example of a screen displayed on the display of the imaging device 100 when imaging data is transmitted from the imaging device 100 shown in FIG. 1 to the intermediary device 300.

なお、ここでは、WiFi及びGPS機能が搭載された撮像装置100からネットワーク400を通じて仲介装置300に直接送信する例を説明するが、撮像装置100によって生成される撮像データを、カメラマンがPCを操作することによって、一旦PCに取り込んでから、ネットワーク400を通じて仲介装置300に送信することもできる。 Note that here, an example will be described in which the imaging device 100 equipped with WiFi and GPS functions directly transmits data to the intermediary device 300 via the network 400. By doing so, it is also possible to once import the information into the PC and then transmit it to the intermediary device 300 via the network 400.

図5(a)には、会員登録処理に必要な入力欄を含む画面例20を示している。ここには、カメラマンの氏名入力欄20aと、カメラマンの住所入力欄20bと、カメラマンの電話番号入力欄20cと、カメラマンのメールアドレス入力欄20dと、ログインに必要なパスワード入力欄20eとが示されている。 FIG. 5A shows an example screen 20 including input fields necessary for member registration processing. Here, a photographer's name input field 20a, a photographer's address input field 20b, a cameraman's telephone number input field 20c, a photographer's email address input field 20d, and a password input field 20e necessary for login are shown. ing.

図5(b)には、図5(a)に示す入力画面に必要な情報を入力した後に表示される注意書きが表示された画面例21を示している。ここには、「ユーザ及びこれに付帯する人物、並びに、周辺の第三者が不快と感じるような撮像を禁止します。」ということ、「撮像データのメタデータ等に撮像位置・撮像時間情報が含まれていない場合には、可能な限り詳細な撮影位置・撮像時間情報を含めて送信してください。」ということなどが表示され、同意するか同意しないかを選択するラジオボタン21a,21bも用意されている。 FIG. 5(b) shows a screen example 21 on which a note is displayed after necessary information is input on the input screen shown in FIG. 5(a). This includes the following: ``We prohibit the capturing of images that may cause discomfort to users, accompanying persons, and third parties in the vicinity,'' and ``Information about the imaging location and time in the metadata of the imaging data, etc. If the information is not included, please include as detailed information as possible about the shooting location and time of shooting. Also available.

カメラマンは、図5(a)~図5(b)に示す画面例20~21を通じて、会員登録を行うことができる。 The photographer can register as a member through screen examples 20 to 21 shown in FIGS. 5(a) to 5(b).

図5(c)には、このアプリケーションプログラムの使用時のログイン画面の画面例22を示している。ここには、ログイン用のID入力欄22aと、図5(a)のパスワード入力欄10eを通じて設定したパスワード入力欄22bとを示している。なお、IDは個別に設定してもよいし、メールアドレス入力欄20dを通じて入力したメールアドレスを代用することもできる。 FIG. 5(c) shows a screen example 22 of a login screen when using this application program. Here, an ID input field 22a for login and a password input field 22b set through the password input field 10e in FIG. 5(a) are shown. Note that the ID may be set individually, or the e-mail address entered through the e-mail address input field 20d may be substituted.

図5(d)には、撮像データを選択及び送信させる画面例23を示している。この例では、「撮像データを選択して下さい。」という表示と、「送信ファイルを選択」という領域23aの表示と、が示されている。ユーザが「送信ファイルを選択」という領域23aをタップすると、撮像装置100内の写真フォルダ等が、撮像装置100のカメラマンのPCのディスプレイに表示され、適宜、送信ファイルを選択することができる。 FIG. 5D shows an example screen 23 for selecting and transmitting imaging data. In this example, a display saying "Please select imaging data" and a display in the area 23a saying "Select file to send" are shown. When the user taps the "select file to send" area 23a, the photo folder and the like in the imaging device 100 are displayed on the display of the cameraman's PC of the imaging device 100, and the user can select a file to send as appropriate.

カメラマンは、図5(c)~図5(d)に示す画面例22~23を通じて、撮像装置100から仲介装置300に向けて、撮像データを送信することが可能になる。 The cameraman can transmit imaging data from the imaging device 100 to the intermediary device 300 through the screen examples 22 to 23 shown in FIGS. 5(c) to 5(d).

なお、撮像データのメタデータ等に撮像位置・撮像時間情報が含まれていない場合には、カメラマンが撮像位置・撮像時間情報を含められるように、入力欄を設ければよい。したがって、カメラマンは、この入力欄を通じて、例えば、「京都の嵐山の渡月橋周辺」、「10月1日13:00~14:00頃撮影」といような情報を入力すればよい。 Note that if the metadata of the imaging data does not include imaging position/imaging time information, an input field may be provided so that the cameraman can include the imaging position/imaging time information. Therefore, the photographer may input information such as "Around Togetsukyo Bridge in Arashiyama, Kyoto" or "Photographed on October 1st between 13:00 and 14:00" through this input field.

また、カメラマンは、予め撮像日時・撮像場所が決定している場合には、それらの予定情報を仲介装置300に送信しておくこともできる。これによって、携帯端末200から観光予定を送信することと同様の効果を得ることもできる。すなわち、仲介装置300の判定手段320における判定処理をする際に、判定精度を高めることができる。 Furthermore, if the photographing date and time and photographing location have been determined in advance, the photographer can also transmit the schedule information to the intermediary device 300. With this, it is also possible to obtain the same effect as transmitting a sightseeing schedule from the mobile terminal 200. That is, when performing the determination process in the determination means 320 of the intermediary device 300, the determination accuracy can be improved.

加えて、この場合には、仲介装置300では、撮像装置100から送信される予定情報と、携帯端末200から送信される観光予定とのマッチングを行って、撮像装置100の撮像日時・撮像場所を携帯端末200に通知することもできる。 In addition, in this case, the intermediary device 300 matches the schedule information transmitted from the imaging device 100 with the sightseeing schedule transmitted from the mobile terminal 200, and determines the imaging date and time and location of the imaging device 100. It is also possible to notify the mobile terminal 200.

また、カメラマンの会員登録時など事前に、カメラマン自身の情報(プロカメラマン/アマチュアカメラマンの種別、カメラマン歴など)、撮像装置100のスペックなどを、仲介装置300に送信させることもでき、この場合には、上記通知内容に、これらの情報を含めることもできる。 Further, when a photographer registers as a member, the information of the photographer himself (professional photographer/amateur photographer type, photographer history, etc.), specifications of the imaging device 100, etc. can be sent to the intermediary device 300. may also include this information in the notification content.

さらに、仲介装置300は、単に、上記通知を行うだけではなく、携帯端末200の地図アプリケーションプログラムで用いることができるように、撮影場所の緯度経度情報を割り出して、それも携帯端末200に送信することもできる。 Furthermore, the intermediary device 300 not only provides the above-mentioned notification, but also determines the latitude and longitude information of the shooting location and sends it to the mobile terminal 200 so that it can be used in the map application program of the mobile terminal 200. You can also do that.

そうすると、あまり土地勘のない観光地においても、ユーザが地図アプリケーションプログラムを通じて、目当てのカメラマンのいる撮影地に向かって、撮像してもらうことが可能となる。 In this way, even at a tourist spot with which the user is unfamiliar, the user can use the map application program to direct the user to the location where the desired photographer is located and have the user take an image.

また、本実施形態では、GPS210を用いる場合を例に説明をしたが、例えば、GPS衛星からの信号を受信しにくい、地下などに携帯端末200がある場合には、GPS210に代えて、Wifi又はセルIDを用いて位置情報を仲介装置300に送信してもよい。 Further, in this embodiment, the case where the GPS 210 is used has been explained as an example, but for example, if the mobile terminal 200 is located underground or the like where it is difficult to receive signals from GPS satellites, instead of the GPS 210, Wi-Fi or Location information may be transmitted to the intermediary device 300 using the cell ID.

本実施形態では、典型的な構成・動作について説明しただけであり、構成・動作は上記例に限定されるものではなく、仲介装置300に備える手段の幾つかは、撮像装置100又は携帯端末200に備えてもよい。例えば、判定手段320及び/又は加工処理手段330は、撮像装置100に備えることもできる。 In this embodiment, only the typical configuration and operation have been described, and the configuration and operation are not limited to the above example. Some of the means provided in the intermediary device 300 are You may prepare for For example, the determining means 320 and/or the processing means 330 can be included in the imaging device 100.

本発明の実施形態の画像データ提供システムの模式的な構成図である。1 is a schematic configuration diagram of an image data providing system according to an embodiment of the present invention. 図1に示す撮像データ提供システムの動作を示すタイムチャートである。2 is a time chart showing the operation of the imaging data providing system shown in FIG. 1. FIG. 図1に示す携帯端末200にインストールされるアプリケーションプログラムを起動した場合に携帯端末200のディスプレイに表示されるウェブページの例を示す図である。2 is a diagram showing an example of a web page displayed on the display of the mobile terminal 200 when an application program installed on the mobile terminal 200 shown in FIG. 1 is started. FIG. 図1に示す携帯端末200にインストールされるアプリケーションプログラムを起動した場合に携帯端末200のディスプレイに表示されるウェブページの例を示す図である。2 is a diagram showing an example of a web page displayed on the display of the mobile terminal 200 when an application program installed on the mobile terminal 200 shown in FIG. 1 is started. FIG. 図1に示す撮像装置100から仲介装置300に対して撮像データを送信する場合に撮像装置100のディスプレイに表示される画面例を示す図である。2 is a diagram showing an example of a screen displayed on the display of the imaging device 100 when imaging data is transmitted from the imaging device 100 shown in FIG. 1 to the intermediary device 300. FIG.

100 撮像装置
200 携帯端末
300 仲介装置
310 登録促進手段
320 判定手段
330 加工処理手段
340 確認手段
350 提供手段
400 ネットワーク
100 Imaging device 200 Mobile terminal 300 Intermediary device 310 Registration promotion means 320 Determination means 330 Processing means 340 Confirmation means 350 Providing means 400 Network

Claims (6)

撮像者によって操作される撮像装置と、ユーザによって使用される位置特定手段を有する携帯端末と、を備える撮像データ提供システムであって、
前記ユーザの顔画像のマスターデータ登録を促す登録促進手段と、
前記位置特定手段の発する信号に基づいて前記撮像装置によって撮像された顔画像の撮像データと前記マスターデータとのマッチング判定をする判定手段と、
前記判定手段によってマスターデータにマッチングすると判定された顔画像の撮像データに対して前記ユーザ及びこれに付帯するメンバーを除く人顔に加工処理を施す加工処理手段と、
前記判定手段によってマスターデータにマッチングすると判定された顔画像のユーザに対して本人確認をする確認手段と、
前記確認手段によって前記撮像データの顔画像が当該本人確認できたユーザの顔画像であることを条件に前記撮像装置によって撮像された顔画像のうち当該ユーザの他の顔画像を提供する提供手段と、
を備える撮像データ提供システム。
An imaging data providing system comprising an imaging device operated by a photographer, and a mobile terminal having a position specifying means used by a user, the system comprising:
Registration promotion means for prompting registration of master data of the user's face image;
determination means for determining a match between the imaging data of the face image taken by the imaging device and the master data based on a signal emitted by the position specifying means;
processing means for performing processing on human faces excluding the user and members associated therewith with respect to the captured data of the face image determined to match the master data by the determination means;
Confirmation means for verifying the identity of the user whose face image is determined to match the master data by the determination means;
providing means for providing other facial images of the user among the facial images captured by the imaging device on the condition that the facial image of the imaging data is the facial image of the user whose identity has been confirmed by the confirmation unit; ,
An imaging data providing system comprising:
前記マスターデータを登録する仲介装置を備える、請求項1記載の撮像データ提供システム。 The imaging data providing system according to claim 1, further comprising an intermediary device that registers the master data. 前記マスターデータを登録する仲介装置、前記撮像装置又は前記携帯端末に、前記加工処理手段を設ける、請求項1記載の撮像データ提供システム。 2. The imaging data providing system according to claim 1, wherein the processing means is provided in an intermediary device, the imaging device, or the mobile terminal that registers the master data. 前記撮像装置によって撮像された顔画像の撮像データを送信する送信手段を備える、請求項1記載の撮像データ提供システム。 The imaging data providing system according to claim 1, further comprising a transmitting means for transmitting imaging data of a face image captured by the imaging device. 前記判定手段は、前記ユーザの観光予定又は前記携帯端末の移動履歴若しくは位置情報と、前記撮像装置から送信される撮像場所情報又は撮像時間情報と、の照合を行う、請求項1記載の撮像データ提供システム。 The imaging data according to claim 1, wherein the determination means compares the user's sightseeing schedule or the movement history or location information of the mobile terminal with imaging location information or imaging time information transmitted from the imaging device. Providing system. 前記携帯端末は、前記登録促進手段によって促されたことに従って前記マスターデータ を登録する登録手段を備える、請求項1記載の撮像データ提供システム。 2. The imaging data providing system according to claim 1, wherein the mobile terminal includes a registration means for registering the master data according to a prompt from the registration promotion means.
JP2019087826A 2019-05-07 2019-05-07 Imaging data provision system Active JP7408116B2 (en)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2019087826A JP7408116B2 (en) 2019-05-07 2019-05-07 Imaging data provision system
JP2023210143A JP2024020650A (en) 2019-05-07 2023-12-13 Imaged data provision system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2019087826A JP7408116B2 (en) 2019-05-07 2019-05-07 Imaging data provision system

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2023210143A Division JP2024020650A (en) 2019-05-07 2023-12-13 Imaged data provision system

Publications (2)

Publication Number Publication Date
JP2020184165A JP2020184165A (en) 2020-11-12
JP7408116B2 true JP7408116B2 (en) 2024-01-05

Family

ID=73045183

Family Applications (2)

Application Number Title Priority Date Filing Date
JP2019087826A Active JP7408116B2 (en) 2019-05-07 2019-05-07 Imaging data provision system
JP2023210143A Pending JP2024020650A (en) 2019-05-07 2023-12-13 Imaged data provision system

Family Applications After (1)

Application Number Title Priority Date Filing Date
JP2023210143A Pending JP2024020650A (en) 2019-05-07 2023-12-13 Imaged data provision system

Country Status (1)

Country Link
JP (2) JP7408116B2 (en)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2023170781A1 (en) * 2022-03-08 2023-09-14 日本電気株式会社 Server device, system, server device control method, and storage medium
JP7452591B1 (en) 2022-08-31 2024-03-19 大日本印刷株式会社 Image generation system and image generation method

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2012248967A (en) 2011-05-25 2012-12-13 Fujitsu Ltd Security-ensuring remote monitoring apparatus and method
JP2013171311A (en) 2012-02-17 2013-09-02 Nec Casio Mobile Communications Ltd Image processing device, terminal device, image processing method, and program
JP2014082695A (en) 2012-10-18 2014-05-08 Nec Casio Mobile Communications Ltd Portable terminal device, portable terminal system, control method of portable terminal device, and program
JP2018106435A (en) 2016-12-27 2018-07-05 清水建設株式会社 Labor Management System

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2012248967A (en) 2011-05-25 2012-12-13 Fujitsu Ltd Security-ensuring remote monitoring apparatus and method
JP2013171311A (en) 2012-02-17 2013-09-02 Nec Casio Mobile Communications Ltd Image processing device, terminal device, image processing method, and program
JP2014082695A (en) 2012-10-18 2014-05-08 Nec Casio Mobile Communications Ltd Portable terminal device, portable terminal system, control method of portable terminal device, and program
JP2018106435A (en) 2016-12-27 2018-07-05 清水建設株式会社 Labor Management System

Also Published As

Publication number Publication date
JP2020184165A (en) 2020-11-12
JP2024020650A (en) 2024-02-14

Similar Documents

Publication Publication Date Title
US9911002B2 (en) Method of modifying image including photographing restricted element, and device and system for performing the method
US9558593B2 (en) Terminal apparatus, additional information managing apparatus, additional information managing method, and program
JP2024020650A (en) Imaged data provision system
US7796776B2 (en) Digital image pickup device, display device, rights information server, digital image management system and method using the same
US20170318219A1 (en) Image file management system and imaging device with tag information in a communication network
JP2002112074A (en) Photographic image managing system and recording medium
US10192252B2 (en) Information processing apparatus to provide position based services
JP2008027336A (en) Location information delivery apparatus, camera, location information delivery method and program
KR20160044667A (en) Printing system for a photograph using a mobile phone
KR101952623B1 (en) Method and apparatus for video service with privacy protection
JP2007065146A (en) Image ordering system
CN109918527B (en) Image processing apparatus, non-transitory computer readable medium
US6832101B1 (en) Image registration server and an image mediation distributing system
WO2019008948A1 (en) Data system, server, and program
JP2018166282A (en) Automatic photographing system and transmitter
US7502555B2 (en) Information terminal device
KR102118441B1 (en) Server for managing of natural park tour service
JP4940804B2 (en) POSITION INFORMATION DISTRIBUTION METHOD, POSITION INFORMATION DISTRIBUTION DEVICE, AND POSITION INFORMATION DISTRIBUTION PROGRAM
JP7263791B2 (en) Display system and captured image display method
US20190318416A1 (en) System and Method for Providing Photography
JP7375336B2 (en) Shooting control system, shooting control method, and program
JP7211055B2 (en) Route search server, route search system and route search method
JP2020014092A (en) Image management apparatus, image management method, and program
JP4946674B2 (en) Image server apparatus, image server apparatus control method, image server apparatus control program, computer-readable recording medium recording the program, image transmission system, image transmission system control method, image transmission system control program, and program A recorded computer-readable recording medium.
JP6809558B2 (en) Server and billing method

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20220428

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20230523

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20230808

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20231006

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20231114

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20231213

R150 Certificate of patent or registration of utility model

Ref document number: 7408116

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150