JP7408116B2 - Imaging data provision system - Google Patents
Imaging data provision system Download PDFInfo
- Publication number
- JP7408116B2 JP7408116B2 JP2019087826A JP2019087826A JP7408116B2 JP 7408116 B2 JP7408116 B2 JP 7408116B2 JP 2019087826 A JP2019087826 A JP 2019087826A JP 2019087826 A JP2019087826 A JP 2019087826A JP 7408116 B2 JP7408116 B2 JP 7408116B2
- Authority
- JP
- Japan
- Prior art keywords
- imaging
- user
- data
- mobile terminal
- imaging device
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000003384 imaging method Methods 0.000 title claims description 124
- 238000012545 processing Methods 0.000 claims description 19
- 230000001815 facial effect Effects 0.000 claims description 13
- 238000012790 confirmation Methods 0.000 claims description 10
- 238000000034 method Methods 0.000 description 15
- 238000004891 communication Methods 0.000 description 11
- 238000010586 diagram Methods 0.000 description 7
- 230000006870 function Effects 0.000 description 4
- 230000005540 biological transmission Effects 0.000 description 2
- 238000012546 transfer Methods 0.000 description 2
- 238000013500 data storage Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 230000008676 import Effects 0.000 description 1
- 230000002787 reinforcement Effects 0.000 description 1
- 238000004904 shortening Methods 0.000 description 1
- 238000012795 verification Methods 0.000 description 1
Images
Landscapes
- Image Analysis (AREA)
- Studio Devices (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
- Image Processing (AREA)
Description
本発明は、撮像データ提供システムに関し、特に、プライバシーに配慮した撮像データ提供システムに関する。 The present invention relates to an imaging data providing system, and particularly to an imaging data providing system that takes privacy into consideration.
特許文献1には、旅行参加者が自分が撮影された実際の画像を確認した上で該画像のプリントを注文できる写真販売システムが開示されている。この写真販売システムは、デジタルカメラと、前記デジタルカメラで人物を撮影した画像の画像データを、撮影直後に送信する第1の通信装置と、前記第1の通信装置からの前記画像データを受信する第2の通信装置と、前記第2の通信装置が受信した画像データの画像を表示する画像表示部と前記撮影された人物による前記画像のプリント注文を受け付ける受注部とを備えたプリントの受注装置とからなり、前記デジタルカメラ及び第1の通信装置と、前記第2の通信装置及び前記受注装置とは隔離された位置に配置されていることを特徴とする。
特許文献2には、ウエブサイトを介して写真のプリント及び写真アルバムを配信する写真アルバム作成システムが開示されている。この写真アルバム作成システムでは、ユーザは、ウエブサイトにて会員登録し、ログインID及びパスワードの配布を受ける。写真アルバム作成サーバ装置側では、専門のカメラマンを幼稚園、学校等に派遣し、園児又は生徒の写真を撮影し、ウエブサイトに掲示する。会員登録したユーザは、ウエブサイトにて写真及び写真アルバムを申し込む。ユーザは、写真アルバムを自由に編集することができる。写真アルバム作成サーバ装置では、長期間に亘って、画像データを保存する。
しかし、特許文献1に開示されている写真販売システムは、撮影対象者ではない写真に映り込んでしまった人物に対するプライバシーの配慮がされていない。また、このためプリント注文者の意識が低いと、撮影対象者ではない写真に映り込んでしまった人物に対するプライバシーが十分に保護されない場合がある。
However, the photo sales system disclosed in
また、特許文献2に開示されている写真アルバム作成システムは、同じ幼稚園、同じ学校等の園児又は生徒に限定される話ではあるが、ユーザは他の園児又は生徒の写真もウエブサイトでの掲示を通じて閲覧することが可能である。換言すると、ウエブサイトに掲載された写真は、同じ幼稚園、同じ学校等の園児又は生徒、その父兄等であれば、誰もが自由に見得る状態となる。しかし、これを希望しない園児又は生徒、その父兄等がいる場合に、それに対処することができない。 Furthermore, although the photo album creation system disclosed in Patent Document 2 is limited to children or students from the same kindergarten or school, users can post photos of other children or students on the website. It can be viewed through. In other words, photos posted on a website can be freely viewed by anyone who is a kindergartener, student, parent, etc. of the same kindergarten or school. However, if there are children, students, or their parents who do not wish to do so, it is not possible to deal with this situation.
そこで、本発明は、旅行者等を撮影対象者とした撮像データを、撮影対象者ではない写真に映り込んでしまった人物に対するプライバシーに十分に配慮した上で、撮影対象者及びこれに付帯する人物が写っている撮像データを第三者が閲覧しないようにすることを課題とする。 Therefore, the present invention provides imaging data that includes a traveler or the like as a photographic subject, while giving sufficient consideration to the privacy of a person who is not the photographic subject and is incidental to the photographic subject. The problem is to prevent third parties from viewing image data in which a person is photographed.
上記課題を解決するために、本発明は、
撮像者によって操作される撮像装置と、ユーザによって使用される位置特定手段を有する携帯端末と、を備える撮像データ提供システムであって、
前記ユーザの顔画像のマスターデータを登録を促す登録促進手段と、
前記位置特定手段の発する信号に基づいて前記撮像装置によって撮像された顔画像の撮像データと前記マスターデータとのマッチング判定をする判定手段と、
前記判定手段によってマスターデータにマッチングすると判定された顔画像の撮像データに対して前記ユーザ及びこれに付帯するメンバーを除く人顔に加工処理を施す加工処理手段と、
を備える。
In order to solve the above problems, the present invention
An imaging data providing system comprising an imaging device operated by a photographer, and a mobile terminal having a position specifying means used by a user, the system comprising:
registration promotion means for prompting registration of master data of the user's face image;
determination means for determining a match between the imaging data of the face image taken by the imaging device and the master data based on a signal emitted by the position specifying means;
processing means for performing processing on human faces excluding the user and members associated therewith with respect to the captured data of the face image determined to match the master data by the determination means;
Equipped with.
また、前記マスターデータを登録する仲介装置を備えることもできる。そして、前記仲介装置、前記撮像装置又は前記携帯端末に、前記加工処理手段を設けることもできる。 Furthermore, it is also possible to include an intermediary device that registers the master data. The processing means may also be provided in the intermediary device, the imaging device, or the mobile terminal.
撮像装置によって撮像された顔画像の撮像データを送信する送信手段を備えてもよい。 The image capturing apparatus may include a transmitting means for transmitting image data of a face image captured by the imaging device.
前記判定手段によってマスターデータにマッチングすると判定された顔画像のユーザに対して本人確認をする確認手段と、
前記確認手段によって前記撮像データの顔画像が当該本人確認できたユーザの顔画像であることを条件に前記撮像装置によって撮像された顔画像のうち当該ユーザの他の顔画像を提供する提供手段と、
を備えることもできる。
Confirmation means for verifying the identity of the user whose face image is determined to match the master data by the determination means;
providing means for providing other facial images of the user among the facial images captured by the imaging device on the condition that the facial image of the imaging data is the facial image of the user whose identity has been confirmed by the confirmation unit; ,
can also be provided.
前記携帯端末は、前記登録促進手段によって促されたことに従って前記マスターデータ を登録する登録手段を備えることもできる。 The mobile terminal may also include registration means for registering the master data in accordance with prompts from the registration promotion means.
以下、本発明の実施形態について、図面を参照して説明する。 Embodiments of the present invention will be described below with reference to the drawings.
(概要の説明)
例えば、観光名所では、観光客らが、デジタルカメラなどを用いて同行者を撮像したり、近年、自撮りと称される撮像者自身を撮像したりしていることを目にする。観光客らの真のニーズは、自分自身や同行者が写っている写真を入手することである。
(Explanation of overview)
For example, at tourist attractions, tourists are often seen using digital cameras to take images of their companions, or, in recent years, taking images of themselves, often referred to as selfies. What tourists really want is to get photos of themselves and their travel companions.
本実施形態の撮像データ提供システムは、ユーザである観光客らに対して、観光地にて撮像された撮像データを提供するというサービス(以下、「本サービス」と称する。)を実現するものである。 The imaging data providing system of this embodiment realizes a service (hereinafter referred to as "this service") of providing imaging data taken at tourist spots to tourists who are users. be.
観光客らとしては、典型的には、本サービスの提供を受けるのに先立って、自身及び同行者の顔画像をマスターデータとして予め登録しておき、自身のスマートフォンなどに搭載されているGPSをアクティブにした状態で仲介装置300にスマートフォンの位置情報を送信できるようにし、ユーザであることの目印を洋服等に装着して観光地を見物すればよい。
Typically, before receiving this service, tourists register face images of themselves and their companions as master data, and use the GPS installed in their smartphones. The location information of the smartphone can be transmitted to the
もっとも、スマートフォンの位置情報の送信に代えて、観光予定又は観光履歴の送信とすることもできる。さらに、これに代えて又はこれとともに、当日の服装情報(赤いシャツ、青いセーター、白いバック、サングラスの有無など)も送信することができる。 However, instead of transmitting the location information of the smartphone, it is also possible to transmit the sightseeing schedule or sightseeing history. Furthermore, instead of or in addition to this, clothing information for the day (red shirt, blue sweater, white bag, presence or absence of sunglasses, etc.) can also be transmitted.
このとき、いろいろな観光地に設置された監視カメラ、ライブカメラなどの自動撮影カメラ、又は、本サービスに会員登録しているカメラマンによって、ユーザらが撮像される。そして、マスターデータに照らして、ユーザ毎に適宜、撮像データを送信すればよい。なお、カメラマン等による撮像から撮像データをユーザに送信するまでの時間を短くすれば、ユーザにとって魅力的なサービスを提供することが可能となる。 At this time, the users are imaged by surveillance cameras installed at various tourist spots, automatic cameras such as live cameras, or by photographers who are registered as members of this service. Then, imaging data may be transmitted as appropriate for each user in light of the master data. Note that by shortening the time from when a cameraman or the like takes an image to when the image data is transmitted to the user, it is possible to provide services that are attractive to the user.
このように、ライブカメラ等が、自分たちを次々と撮影してくれるので、ユーザは、わざわざ自撮りなどをしなくとも、観光終了後に、何十枚何百枚の自分の写真を入手することが可能となる。 In this way, live cameras etc. take pictures of themselves one after another, so users can obtain dozens or hundreds of photos of themselves after sightseeing without having to go through the trouble of taking selfies. becomes possible.
ここで、ライブカメラ等によって撮像された撮像データには、ユーザ及びその同伴者ら以外の第三者が写り込む場合がある。このときに、当該第三者の顔部分などをその人物が特定できない程度に加工を施してプライバシーに配慮することが、本実施形態の撮像データ提供システムの特徴の一つである。 Here, a third party other than the user and his or her companion may be captured in the image data captured by a live camera or the like. At this time, one of the features of the imaging data providing system of the present embodiment is that the third party's face is processed to such an extent that the person cannot be identified, in consideration of privacy.
なお、撮像データの提供手法については不問であるが、例えば、解像度が相対的に大きな撮像データの解像度を下げてユーザに対して無料提供してもよいし、その中でユーザが気に入ったものがあればオリジナルの解像度の高い撮像データを有料で提供することも考えられる。 There is no restriction on the method of providing the imaging data, but for example, it is possible to lower the resolution of imaging data with a relatively high resolution and provide it to the user free of charge, or to provide the user with the data that he or she likes for free. If so, it may be possible to provide original, high-resolution imaging data for a fee.
ちなみに、撮像データを有料提供した場合には、その撮影者が本サービスの提供によって生じる経費分を差し引いて入手してもよいし、会員カメラマン全員で所定の重み付けをもってシェアしてもよい。 Incidentally, if imaging data is provided for a fee, the photographer may obtain it after deducting the expenses incurred by providing this service, or all member photographers may share it with a predetermined weighting.
ところで、GPSを用いれば、通常、撮像データに写り込む、ユーザ、その同行者、及び、第三者の総数は、せいぜい数十人程度であろう。したがって、撮像データの人顔とマスターデータとのマッチングは精度良く行うことができる。このため、当該第三者のプライバシー問題が生じる可能性は非常に低い。しかも、ユーザに提供する撮像データの枚数が増えれば増えるほど、マッチングのサンプル数が増えるため、マッチング精度が向上する。 By the way, if GPS is used, the total number of users, their companions, and third parties who will be captured in the imaged data will normally be about several dozen at most. Therefore, matching between the human face of the imaged data and the master data can be performed with high accuracy. Therefore, it is extremely unlikely that privacy issues will arise for the third party. Furthermore, as the number of images of image data provided to the user increases, the number of samples for matching increases, and thus matching accuracy improves.
(構成の説明)
図1は、本発明の実施形態の画像データ提供システムの模式的な構成図である。図1には、以下説明する、撮像装置100と、携帯端末200と、仲介装置300と、ネットワーク400とを示している。
(Explanation of configuration)
FIG. 1 is a schematic configuration diagram of an image data providing system according to an embodiment of the present invention. FIG. 1 shows an
撮像装置100は、カメラマンによって操作されるデジタルカメラ若しくはスマートフォンなど、又は、町中若しくは観光地等に設置されている監視カメラ若しくはライブカメラなどである。撮像装置100は、被写体となる旅行者などの撮像対象を撮像する撮像手段110と、撮像手段110によって撮像された撮像データをネットワーク400を介して仲介装置300に送信する通信手段120と、を備えている。
The
携帯端末200は、ユーザが所有する携帯電話機又はスマートフォンなどである。携帯端末200は、グローバルポジショニングシステム(以下、「GPS」と称する)210と、撮像装置100及び仲介装置300と各種データの送受信を行う通信手段220と、を備えている。
The
仲介装置300は、本実施形態の画像データ提供システムによる画像提供サービス(以下、「本サービス」と称する。)をするものであり、撮像装置100と携帯端末200とのやり取りを仲介するものである。
The
仲介装置300は、以下説明する、登録促進手段310と、判定手段320と、加工処理手段330と、確認手段340と、提供手段350と、を備えている。
The
登録促進手段310は、ユーザの顔画像のマスターデータを含むユーザ登録と、撮像装置100のカメラマンに対するカメラマンとしての会員登録を促すものである。ユーザは、典型的には、登録促進手段310によって促されると、携帯端末200又は図示しないデジタルカメラなどを操作することによって、自己の顔画像のマスターデータを撮像して、通信手段220又は図示しないパーソナルコンピュータ(以下、「PC」と称する。)などを用いて仲介装置300に送信する。
The registration promotion means 310 prompts user registration including master data of the user's face image and member registration as a photographer for the photographer of the
仲介装置300は、携帯端末200等から送信されたマスターデータを受信すると、自装置に付帯する図示しない格納媒体に格納する。なお、ユーザ登録には、ユーザの氏名・住所・電話番号・メールアドレスなどの登録も行われ、これらはマスターデータと紐づけられて格納される。また、会員登録には、カメラマンの氏名・住所・電話番号・メールアドレスなどが格納される。
When the
判定手段320は、主として、撮像装置100によって撮像された顔画像の撮像データとマスターデータとがマッチングするか否か判定し、すなわち、撮像装置100によって撮像された被写体が、本サービスを受ける者であるか否かを判定するものである。この判定のためには、ユーザの観光予定、服装情報、携帯端末200の移動履歴なども考慮することができる。
The determining means 320 mainly determines whether or not the image data of the face image captured by the
加工処理手段330は、判定手段320によってマスターデータにマッチングすると判定された顔画像の撮像データに対して、本サービスを受けるユーザ及びこれに付帯するメンバーを除く人顔に加工処理を施すものである。加工処理の内容は不問であるが、いわゆるぼかしを自然的に入れたり、ピントがあっていないような状態にしたり、当該第三者を撮像データから消し込みしたりといったその人顔の人物が特定できないようにして、当該人物のプライバシーを保護できればよい。 The processing means 330 processes the captured data of the face image determined by the determination means 320 to match the master data, except for the user receiving this service and the members associated therewith. . The details of the processing do not matter, but it may be possible to make the person's face more specific, such as adding a natural blur, making it appear out of focus, or erasing the third person from the imaged data. It would be good if the privacy of the person in question could be protected by preventing them from doing so.
確認手段340は、判定手段320によってマスターデータにマッチングすると判定された顔画像のユーザが、本サービスによって撮像データを送信すべきか否かの本人確認をするものである。具体的には、判定手段320による判定対象に用いた顔画像の撮像データを必要に応じて加工処理手段330によって加工処理を施してから、ユーザ登録されたメールアドレス宛に送信すればよい。
The
提供手段350は、確認手段340によってユーザの本人確認ができた場合に、撮像装置100によって撮像された撮像データのうち当該ユーザが写っている撮像データをユーザ登録されたメールアドレス宛に提供するものである。
The providing means 350 provides, when the user's identity can be verified by the verification means 340, the imaged data in which the user is captured among the imaged data captured by the
を備えることもできる。 It is also possible to have
ネットワーク400は、撮像装置100と携帯端末200と仲介装置300とを相互に接続するインターネットなどのネットワークである。なお、これらの間でのデータのやり取りは、インターネットのみならず、郵送などのネットワークも含むものとする。
The
(動作の説明)
図2は、図1に示す撮像データ提供システムの動作を示すタイムチャートである。なお、ここでは、ユーザのメールアドレスが、携帯端末200に設定されているものとして説明するが、PC又はタブレット端末にインストールされているメーラーに設定されていてもよい。
(Explanation of operation)
FIG. 2 is a time chart showing the operation of the imaging data providing system shown in FIG. Note that although the user's email address will be described here as being set in the
まず、本サービスの提供に先立って行うべき登録処理について説明する。仲介装置300の登録促進手段310は、撮像装置100のカメラマン及び携帯端末200のユーザに対して、それぞれ、会員登録要求及びユーザ登録要求を送信して、会員登録及びユーザ登録を促す(ステップS1,S2)。
First, we will explain the registration process that must be performed prior to providing this service. The
具体的には、仲介装置300の管理者等によって本サービスに係るウェブページ又はアプリケーションプログラムを作成しておき、そこにアクセス等してきたカメラマン及びユーザに対して、氏名等の会員登録等に必要な情報の入力及び送信を促す。ユーザ登録の際には、ユーザの顔画像のマスターデータの送信も促す。
Specifically, a web page or application program related to this service is created by the administrator of the
仲介装置300は、カメラマン等から必要な情報が送信されてくると(ステップS3,S4)、図示しない格納媒体に対して、それらの情報を格納する(ステップS5)。これにより、当該カメラマンも当該ユーザも、本サービスを受けられることになる。
When the
なお、ユーザ登録の際には、カメラマンがユーザ及びこれに付帯する人物を撮像することに同意することを確認するとよい。以上が、本サービスの提供に先立って行うべき処理である。 Note that when registering as a user, it is recommended to confirm that the cameraman agrees to take images of the user and accompanying persons. The above is the process that should be performed prior to providing this service.
この状態で、例えば、ユーザがとある週末に、家族で観光地に観光旅行に出かけようとしたとする。この場合、ユーザは、事前に、自分以外の家族の少なくとも顔画像をマスターデータとして追加送信するとよい。また、ユーザは、参考のため、事前に観光予定を仲介装置300に送信するとよい(ステップS6)。
In this state, for example, suppose that the user wants to go on a sightseeing trip with his family to a tourist spot on a certain weekend. In this case, the user may additionally transmit at least facial images of family members other than the user as master data in advance. Further, the user may send the sightseeing schedule to the
仲介装置300は、ユーザから追加送信されたマスターデータ等を受信すると、当該ユーザの格納情報に当該マスターデータを追加し、併せて、ユーザから観光予定が送信されてきた場合にも、それを当該ユーザの格納情報に追加する(ステップS7)。
When the
ユーザが、実際に、観光旅行に出かけた場合には、観光先では携帯端末200のGPS210をアクティブにしておく(ステップS8)。これにより、後述するアプリケーションプログラムによってGPS210からの緯度経度情報などの位置情報が現在時刻と紐付けた状態で、仲介装置300に送信されることになる(ステップS10)。
When the user actually goes on a sightseeing trip, the
また、ユーザ及びその家族は、本サービスを受けるユーザであることを示す目印となるようなバッジ等を洋服又はカバンなどに装着しておく。なお、カメラマンにも会員であることを示す目印となるようなバッジ、スカーフ、腕章等を装着しておくとよい。 In addition, the user and his or her family wear a badge or the like on their clothes or bag that indicates that they are the user receiving this service. It is also a good idea for photographers to wear badges, scarves, armbands, etc. that will show that they are members.
この状態で、ユーザが家族とともに、観光地を見物したとする。そうすると、その観光地にいるカメラマンは、目印となるバッジ等を装着しているユーザ及びその同行者を、撮像装置100を用いて撮像することが可能となる。
Suppose that in this state, the user visits a tourist spot with his family. Then, a photographer at the tourist spot can use the
実際に、カメラマンが、撮像装置100を操作することによって、撮像手段110によってユーザらを撮像すると(ステップS9)、通信手段120は、その撮像データを仲介装置300に送信する(ステップS11)。 In fact, when the cameraman images the users with the imaging means 110 by operating the imaging device 100 (step S9), the communication means 120 transmits the imaged data to the intermediary device 300 (step S11).
なお、送信対象の撮像データは静止画でもよいし動画でもよい。また、撮像データは、スクランブル処理などをして秘匿化してから送信してもよい。 Note that the captured image data to be transmitted may be a still image or a moving image. Further, the imaged data may be transmitted after being concealed by scrambling processing or the like.
なお、撮像装置100から撮像データを送信する際には、撮像場所情報(例えば、観光地名、撮像場所の住所又は地名)と撮像時間情報とを付加すると、判定手段320による判定処理の負荷を減らすこと、判定精度を向上させることに寄与するために好ましい。
Note that when transmitting imaging data from the
仲介装置300では、撮像装置100から送信される撮像データを受信すると、判定手段320が、当該撮像データの顔画像に基づいて、マスターデータの格納媒体を参照することによってユーザを特定する。
In the
判定手段320は、この際、撮像データに撮像場所情報が付加されていて、かつ、ユーザから観光予定も送信されていた場合には、この撮像場所情報と観光予定とも照合すれば、判定効率が高まり、判定処理の負荷を減らすことができるし、判定精度を向上させることもできる。さらに、判定手段320は、携帯端末200のGPS210に基づく位置情報も使って判定処理を行えば、ほぼ100%の精度で判定処理を行うことができる。
At this time, if imaging location information has been added to the imaging data and a sightseeing schedule has also been sent from the user, the determination means 320 can improve the determination efficiency by comparing this imaging location information with the sightseeing schedule. It is possible to reduce the load on the determination process and improve the determination accuracy. Furthermore, if the determination means 320 also uses the position information based on the
なお、判定処理に先立って、撮影データの顔画像を特定する際には、撮像装置100の撮像エリアの、撮像装置100と被写体との焦点距離も考慮するとよい。また、複数の撮像データを用いて判定をするとよい。
Note that, prior to the determination process, when specifying the face image in the photographic data, it is preferable to also consider the focal distance between the
また、判定制度をより向上させるために、強化学習系のAIを活用することも一法である。正面からの画像を斜めから見たならばこうなるであろうといった予想を、AIを用いてするとよい。 Another way to improve the judgment system is to use reinforcement learning AI. It is a good idea to use AI to predict what will happen if an image from the front is viewed from an angle.
さらに、マスターデータについては、継時的な顔の変化があるので、撮像データの顔画像で、マスターデータをアップデートするとよい。 Furthermore, since the face of the master data changes over time, it is preferable to update the master data with the face image of the imaging data.
なお、撮像装置100には、カメラマンが操作するデジタルカメラ等に限定されず、観光地などに設置されたライブカメラ等も含むので、ステップS11において送信される撮像データには、ユーザの観光ルート或いは観光地に設置されているライブカメラ等によって撮像されたユーザの撮像データも含まれる。
Note that the
ライブカメラ等は、恒常的に、動画撮影をして置き、その動画に目印となるバッヂ等を装着している人らが写り込んだ場合に、当該撮像データを抜き出して仲介装置300に送信するようにすればよい。
A live camera or the like constantly records video, and when people wearing badges or the like serving as landmarks are captured in the video, the captured image data is extracted and transmitted to the
もっとも、ライブカメラ等による動画の撮像データの全てを仲介装置300に送信するようにして、その撮像データの中から、仲介装置300においてユーザの写っている部分を抜き出すことも可能である。
Of course, it is also possible to transmit all of the image data of a moving image by a live camera or the like to the
なお、仲介装置300の管理者等は、観光地において自ら、撮像装置100を設置する、或いは、ドローンに搭載した撮像装置100を当該ドローンとともに遠隔操作する或いは所定のプログラム等によって自動的にドローン稼働及び撮像装置100による撮像をすることも可能である。
The administrator of the
観光地における具体的な設置場所は不問であるが、観光地が神社であるとするならば、境内の鈴近辺のように、自然に顔を向ける位置にすることもできる。 The specific location in a tourist spot is not a problem, but if the tourist spot is a shrine, it can be placed in a position that faces naturally, such as near the bell in the temple grounds.
この場合の撮像装置100は、撮像手段と、「こちらを向いてください」、「はいポーズ」、「撮影します。3・2・1」など撮像に関する各種音声ガイダンスを流す案内手段と、撮像エリアにユーザが写り込んだことを特定する特定手段と、を備えるとよい。
In this case, the
なお、特定手段を設けることは必須ではなく、これに代えて、撮像エリアに対する進入物に対して画像認識をして人顔であるか否かを判定する判定手段を備えてもよい。なお、撮像装置100によって自動的に撮像する場合には、連続撮像をしたうえで笑顔認識手段を備えるなどして笑顔の多いものを保存することも一法である。
Note that it is not essential to provide the identifying means; instead, a determining means may be provided that performs image recognition on an object entering the imaging area and determines whether or not it is a human face. Note that when images are automatically captured by the
なお、撮像装置100は、ユーザらを撮像するのみならず、観光地の典型的な観光写真(寺院の本堂、山門、山門からの景色等)を撮像して、その撮像データも併せて送信することもできる。
Note that the
こうすると、通常時には撮像手段において動画を撮像しておき、その動画に目印となるバッヂを装着したユーザが写り込んだことを特定手段によって特定した場合には、案内手段によってユーザの視線を観光地用撮像装置に向けさせたり、ポーズをとらせたりした状態で、撮像手段によって静止画又は動画の撮像データを撮像させ、仲介装置300に送信させることができる。
In this way, when the imaging means normally captures a video, and the identification means identifies that a user wearing a badge that serves as a landmark appears in the video, the guidance means directs the user's line of sight to the tourist spot. It is possible to cause the image capturing device to capture a still image or moving image data while facing the image capturing device for personal use or to take a pose, and to transmit the image data to the
つぎに、仲介装置300では、撮像データにユーザ及びその家族以外の第三者が写っているか否かを判別して、写っていると判別した場合には、加工処理手段330によって、当該第三者のプライバシーを保護するために加工処理を行う(ステップS13)。
Next, the
ここでの加工処理は、既述のように、ぼかしを自然的に入れたり、ピントがあっていないような状態にしたりすることに加えて、モザイクを入れる、何からの画像を重畳させる、又は、第三者の人影を取り除くといったものなどが挙げられるが、いずれも既知の手法を採用すればよく、また、結果的に、この第三者が誰であるか特定不可能な程度まで加工すればよい。 As mentioned above, the processing here includes adding a natural blur or creating an out-of-focus state, as well as adding a mosaic, superimposing an image from what source, or , remove the person of a third party, etc., but in either case, known methods can be used, and as a result, it is necessary to process the data to the extent that it is impossible to identify who this third party is. Bye.
つぎに、仲介装置300では、確認手段340が、判定手段320によってマスターデータにマッチングすると判定された顔画像のユーザが、本サービスによって撮像データを送信すべきか否かの本人確認をする(ステップS14)。
Next, in the
この確認としては、例えば、携帯端末200から送信される観光予定又は位置情報と、撮像装置100から送信される撮像データに含まれている撮像場所情報及び撮像時間情報との照合、並びに、当該撮像データの顔画像とマスターデータとの照合などによって行えばよい。
This confirmation includes, for example, comparing the sightseeing schedule or location information transmitted from the
この例のように、家族全員が写っている写真であれば、それらのマスターデータと照合することでほぼ100%の確認ができると考えられるが、ユーザの一人旅のような、複数の特定の撮像データを例えば1ファイルだけ携帯端末200に送信することで、ユーザに本人確認を促すことも一法である。
As in this example, if the photo shows the whole family, it can be verified almost 100% by comparing it with the master data, but if the photo shows multiple specific photos, such as a user traveling alone. One method is to prompt the user to confirm his/her identity by transmitting, for example, only one file of imaging data to the
つぎに、確認手段340によってユーザの本人確認ができた場合に、仲介装置300では、提供手段350が、撮像装置100によって撮像された撮像データのうち当該ユーザが写っていて、必要に応じてステップS13の加工処理がなされた撮像データを携帯端末200に送信する。
Next, when the user's identity can be confirmed by the confirmation means 340, the provision means 350 in the
その結果、ユーザが気に入った撮像データがあれば、それを選択して購入処理をすることができる(ステップS16)。この場合には、クレジットカード、銀行振り込みなどをすることで、仲介装置300に撮像データの購入対価を支払い(ステップS17)、当該撮像データの送信元が、カメラマンの撮像装置100である場合には、その対価の一部が、撮像装置100のカメラマンに支払われる(ステップS18)。
As a result, if there is imaging data that the user likes, he or she can select it and perform purchase processing (step S16). In this case, pay the purchase price for the imaging data to the
(アプリケーションプログラムの説明)
図3及び図4は、図1に示す携帯端末200にインストールされるアプリケーションプログラムを起動した場合に携帯端末200のディスプレイに表示されるウェブページの例を示す図である。
(Application program description)
3 and 4 are diagrams showing examples of web pages displayed on the display of the
なお、このアプリケーションプログラムは、携帯端末200に予めインストールされていてもよいし、ユーザが携帯端末200を操作することによって、図示しないアプリケーションサーバからダウンロードすることもできる。
Note that this application program may be installed in advance on the
図3(a)には、ユーザ登録処理に必要な入力欄を含むウェブページ10を示している。ここには、ユーザの氏名入力欄10aと、ユーザの住所入力欄10bと、ユーザの電話番号入力欄10cと、ユーザのメールアドレス入力欄10dと、ログインに必要なパスワード入力欄10eとが示されている。
FIG. 3(a) shows a
図3(b)には、図3(a)に示す入力画面に必要な情報を入力した後に表示されるプライバシーポリシーが表示されたウェブページ11を示している。ここには、「カメラマンがユーザ及びこれに付帯する人物を撮像します。」ということ、「位置情報サービス機能をオンすることを求めます」ということなどが表示され、同意するか同意しないかを選択するラジオボタン11a,11bも用意されている。
FIG. 3(b) shows a
図3(c)には、ユーザのマスターデータを選択及び送信させるウェブページ12を示している。この例では、「マスターデータを選択して下さい。」という表示と、「送信ファイルを選択」という領域12aの表示とが示されている。ユーザが「送信ファイルを選択」という領域12aをタップすると、携帯端末200内の写真フォルダ等が、携帯端末200のディスプレイに表示され、適宜、ユーザ自身の顔画像を選択することができる。
FIG. 3(c) shows a
なお、ユーザは、正面から撮影された顔画像、斜めから撮影された顔画像など、いくつかのファイルをマスターデータとして選択することも可能とされていて、これにより、判定手段320における判定処理の精度を高めることができる。 Note that the user can also select several files as master data, such as a face image photographed from the front and a face image photographed from an oblique angle. Accuracy can be increased.
ユーザは、図3(a)~図3(c)に示すウェブページ11~13を通じて、ユーザ登録を行うことができる。
A user can register as a user through
図4(d)には、このアプリケーションプログラムの使用時のログイン画面のウェブページ13を示している。ここには、ログイン用のID入力欄13aと、図3(a)のパスワード入力欄10eを通じて設定したパスワード入力欄13bとを示している。なお、IDは個別に設定してもよいし、メールアドレス入力欄10dを通じて入力したメールアドレスを代用することもできる。
FIG. 4(d) shows the
図4(e)には、携帯端末200の位置情報サービス機能をオンすることをユーザに選択させるウェブページ14を示している。ユーザはラジオボタン14a,14bのいずれかを選択することによって、位置情報サービス機能をオンするか否かを決定することができる。なお、位置情報サービス機能をオンすると、携帯端末200に搭載されているGPS210がオンされ、携帯端末200の位置情報及び移動履歴が定期的に仲介装置300に送信されることになる。
FIG. 4E shows a
図4(f)には、ユーザの観光予定の入力させるウェブページ15を示している。ここには、日程を選択させるカレンダー15aと、観光先の都道府県以下を選択させるプルダウンメニュー15bと、フリーワードによる観光地名入力欄15cとを示している。
FIG. 4(f) shows a
ユーザは、図4(d)~図4(f)に示すウェブページ14~16を通じて、携帯端末200から仲介装置300に向けて、観光旅行前に観光予定を送信することが可能になり、また、携帯端末200の位置情報及び移動履歴を定期的に送信することが可能になる。
Users can now send their sightseeing schedule from the
(撮像装置100からの撮像データ送信の説明)
図5は、図1に示す撮像装置100から仲介装置300に対して撮像データを送信する場合に撮像装置100のディスプレイに表示される画面例を示す図である。
(Description of imaging data transmission from imaging device 100)
FIG. 5 is a diagram showing an example of a screen displayed on the display of the
なお、ここでは、WiFi及びGPS機能が搭載された撮像装置100からネットワーク400を通じて仲介装置300に直接送信する例を説明するが、撮像装置100によって生成される撮像データを、カメラマンがPCを操作することによって、一旦PCに取り込んでから、ネットワーク400を通じて仲介装置300に送信することもできる。
Note that here, an example will be described in which the
図5(a)には、会員登録処理に必要な入力欄を含む画面例20を示している。ここには、カメラマンの氏名入力欄20aと、カメラマンの住所入力欄20bと、カメラマンの電話番号入力欄20cと、カメラマンのメールアドレス入力欄20dと、ログインに必要なパスワード入力欄20eとが示されている。
FIG. 5A shows an
図5(b)には、図5(a)に示す入力画面に必要な情報を入力した後に表示される注意書きが表示された画面例21を示している。ここには、「ユーザ及びこれに付帯する人物、並びに、周辺の第三者が不快と感じるような撮像を禁止します。」ということ、「撮像データのメタデータ等に撮像位置・撮像時間情報が含まれていない場合には、可能な限り詳細な撮影位置・撮像時間情報を含めて送信してください。」ということなどが表示され、同意するか同意しないかを選択するラジオボタン21a,21bも用意されている。 FIG. 5(b) shows a screen example 21 on which a note is displayed after necessary information is input on the input screen shown in FIG. 5(a). This includes the following: ``We prohibit the capturing of images that may cause discomfort to users, accompanying persons, and third parties in the vicinity,'' and ``Information about the imaging location and time in the metadata of the imaging data, etc. If the information is not included, please include as detailed information as possible about the shooting location and time of shooting. Also available.
カメラマンは、図5(a)~図5(b)に示す画面例20~21を通じて、会員登録を行うことができる。 The photographer can register as a member through screen examples 20 to 21 shown in FIGS. 5(a) to 5(b).
図5(c)には、このアプリケーションプログラムの使用時のログイン画面の画面例22を示している。ここには、ログイン用のID入力欄22aと、図5(a)のパスワード入力欄10eを通じて設定したパスワード入力欄22bとを示している。なお、IDは個別に設定してもよいし、メールアドレス入力欄20dを通じて入力したメールアドレスを代用することもできる。
FIG. 5(c) shows a screen example 22 of a login screen when using this application program. Here, an
図5(d)には、撮像データを選択及び送信させる画面例23を示している。この例では、「撮像データを選択して下さい。」という表示と、「送信ファイルを選択」という領域23aの表示と、が示されている。ユーザが「送信ファイルを選択」という領域23aをタップすると、撮像装置100内の写真フォルダ等が、撮像装置100のカメラマンのPCのディスプレイに表示され、適宜、送信ファイルを選択することができる。
FIG. 5D shows an
カメラマンは、図5(c)~図5(d)に示す画面例22~23を通じて、撮像装置100から仲介装置300に向けて、撮像データを送信することが可能になる。
The cameraman can transmit imaging data from the
なお、撮像データのメタデータ等に撮像位置・撮像時間情報が含まれていない場合には、カメラマンが撮像位置・撮像時間情報を含められるように、入力欄を設ければよい。したがって、カメラマンは、この入力欄を通じて、例えば、「京都の嵐山の渡月橋周辺」、「10月1日13:00~14:00頃撮影」といような情報を入力すればよい。 Note that if the metadata of the imaging data does not include imaging position/imaging time information, an input field may be provided so that the cameraman can include the imaging position/imaging time information. Therefore, the photographer may input information such as "Around Togetsukyo Bridge in Arashiyama, Kyoto" or "Photographed on October 1st between 13:00 and 14:00" through this input field.
また、カメラマンは、予め撮像日時・撮像場所が決定している場合には、それらの予定情報を仲介装置300に送信しておくこともできる。これによって、携帯端末200から観光予定を送信することと同様の効果を得ることもできる。すなわち、仲介装置300の判定手段320における判定処理をする際に、判定精度を高めることができる。
Furthermore, if the photographing date and time and photographing location have been determined in advance, the photographer can also transmit the schedule information to the
加えて、この場合には、仲介装置300では、撮像装置100から送信される予定情報と、携帯端末200から送信される観光予定とのマッチングを行って、撮像装置100の撮像日時・撮像場所を携帯端末200に通知することもできる。
In addition, in this case, the
また、カメラマンの会員登録時など事前に、カメラマン自身の情報(プロカメラマン/アマチュアカメラマンの種別、カメラマン歴など)、撮像装置100のスペックなどを、仲介装置300に送信させることもでき、この場合には、上記通知内容に、これらの情報を含めることもできる。
Further, when a photographer registers as a member, the information of the photographer himself (professional photographer/amateur photographer type, photographer history, etc.), specifications of the
さらに、仲介装置300は、単に、上記通知を行うだけではなく、携帯端末200の地図アプリケーションプログラムで用いることができるように、撮影場所の緯度経度情報を割り出して、それも携帯端末200に送信することもできる。
Furthermore, the
そうすると、あまり土地勘のない観光地においても、ユーザが地図アプリケーションプログラムを通じて、目当てのカメラマンのいる撮影地に向かって、撮像してもらうことが可能となる。 In this way, even at a tourist spot with which the user is unfamiliar, the user can use the map application program to direct the user to the location where the desired photographer is located and have the user take an image.
また、本実施形態では、GPS210を用いる場合を例に説明をしたが、例えば、GPS衛星からの信号を受信しにくい、地下などに携帯端末200がある場合には、GPS210に代えて、Wifi又はセルIDを用いて位置情報を仲介装置300に送信してもよい。
Further, in this embodiment, the case where the
本実施形態では、典型的な構成・動作について説明しただけであり、構成・動作は上記例に限定されるものではなく、仲介装置300に備える手段の幾つかは、撮像装置100又は携帯端末200に備えてもよい。例えば、判定手段320及び/又は加工処理手段330は、撮像装置100に備えることもできる。
In this embodiment, only the typical configuration and operation have been described, and the configuration and operation are not limited to the above example. Some of the means provided in the
100 撮像装置
200 携帯端末
300 仲介装置
310 登録促進手段
320 判定手段
330 加工処理手段
340 確認手段
350 提供手段
400 ネットワーク
100
Claims (6)
前記ユーザの顔画像のマスターデータの登録を促す登録促進手段と、
前記位置特定手段の発する信号に基づいて前記撮像装置によって撮像された顔画像の撮像データと前記マスターデータとのマッチング判定をする判定手段と、
前記判定手段によってマスターデータにマッチングすると判定された顔画像の撮像データに対して前記ユーザ及びこれに付帯するメンバーを除く人顔に加工処理を施す加工処理手段と、
前記判定手段によってマスターデータにマッチングすると判定された顔画像のユーザに対して本人確認をする確認手段と、
前記確認手段によって前記撮像データの顔画像が当該本人確認できたユーザの顔画像であることを条件に前記撮像装置によって撮像された顔画像のうち当該ユーザの他の顔画像を提供する提供手段と、
を備える撮像データ提供システム。 An imaging data providing system comprising an imaging device operated by a photographer, and a mobile terminal having a position specifying means used by a user, the system comprising:
Registration promotion means for prompting registration of master data of the user's face image;
determination means for determining a match between the imaging data of the face image taken by the imaging device and the master data based on a signal emitted by the position specifying means;
processing means for performing processing on human faces excluding the user and members associated therewith with respect to the captured data of the face image determined to match the master data by the determination means;
Confirmation means for verifying the identity of the user whose face image is determined to match the master data by the determination means;
providing means for providing other facial images of the user among the facial images captured by the imaging device on the condition that the facial image of the imaging data is the facial image of the user whose identity has been confirmed by the confirmation unit; ,
An imaging data providing system comprising:
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019087826A JP7408116B2 (en) | 2019-05-07 | 2019-05-07 | Imaging data provision system |
JP2023210143A JP2024020650A (en) | 2019-05-07 | 2023-12-13 | Imaged data provision system |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019087826A JP7408116B2 (en) | 2019-05-07 | 2019-05-07 | Imaging data provision system |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2023210143A Division JP2024020650A (en) | 2019-05-07 | 2023-12-13 | Imaged data provision system |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2020184165A JP2020184165A (en) | 2020-11-12 |
JP7408116B2 true JP7408116B2 (en) | 2024-01-05 |
Family
ID=73045183
Family Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019087826A Active JP7408116B2 (en) | 2019-05-07 | 2019-05-07 | Imaging data provision system |
JP2023210143A Pending JP2024020650A (en) | 2019-05-07 | 2023-12-13 | Imaged data provision system |
Family Applications After (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2023210143A Pending JP2024020650A (en) | 2019-05-07 | 2023-12-13 | Imaged data provision system |
Country Status (1)
Country | Link |
---|---|
JP (2) | JP7408116B2 (en) |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2023170781A1 (en) * | 2022-03-08 | 2023-09-14 | 日本電気株式会社 | Server device, system, server device control method, and storage medium |
JP7452591B1 (en) | 2022-08-31 | 2024-03-19 | 大日本印刷株式会社 | Image generation system and image generation method |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2012248967A (en) | 2011-05-25 | 2012-12-13 | Fujitsu Ltd | Security-ensuring remote monitoring apparatus and method |
JP2013171311A (en) | 2012-02-17 | 2013-09-02 | Nec Casio Mobile Communications Ltd | Image processing device, terminal device, image processing method, and program |
JP2014082695A (en) | 2012-10-18 | 2014-05-08 | Nec Casio Mobile Communications Ltd | Portable terminal device, portable terminal system, control method of portable terminal device, and program |
JP2018106435A (en) | 2016-12-27 | 2018-07-05 | 清水建設株式会社 | Labor Management System |
-
2019
- 2019-05-07 JP JP2019087826A patent/JP7408116B2/en active Active
-
2023
- 2023-12-13 JP JP2023210143A patent/JP2024020650A/en active Pending
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2012248967A (en) | 2011-05-25 | 2012-12-13 | Fujitsu Ltd | Security-ensuring remote monitoring apparatus and method |
JP2013171311A (en) | 2012-02-17 | 2013-09-02 | Nec Casio Mobile Communications Ltd | Image processing device, terminal device, image processing method, and program |
JP2014082695A (en) | 2012-10-18 | 2014-05-08 | Nec Casio Mobile Communications Ltd | Portable terminal device, portable terminal system, control method of portable terminal device, and program |
JP2018106435A (en) | 2016-12-27 | 2018-07-05 | 清水建設株式会社 | Labor Management System |
Also Published As
Publication number | Publication date |
---|---|
JP2020184165A (en) | 2020-11-12 |
JP2024020650A (en) | 2024-02-14 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US9911002B2 (en) | Method of modifying image including photographing restricted element, and device and system for performing the method | |
US9558593B2 (en) | Terminal apparatus, additional information managing apparatus, additional information managing method, and program | |
JP2024020650A (en) | Imaged data provision system | |
US7796776B2 (en) | Digital image pickup device, display device, rights information server, digital image management system and method using the same | |
US20170318219A1 (en) | Image file management system and imaging device with tag information in a communication network | |
JP2002112074A (en) | Photographic image managing system and recording medium | |
US10192252B2 (en) | Information processing apparatus to provide position based services | |
JP2008027336A (en) | Location information delivery apparatus, camera, location information delivery method and program | |
KR20160044667A (en) | Printing system for a photograph using a mobile phone | |
KR101952623B1 (en) | Method and apparatus for video service with privacy protection | |
JP2007065146A (en) | Image ordering system | |
CN109918527B (en) | Image processing apparatus, non-transitory computer readable medium | |
US6832101B1 (en) | Image registration server and an image mediation distributing system | |
WO2019008948A1 (en) | Data system, server, and program | |
JP2018166282A (en) | Automatic photographing system and transmitter | |
US7502555B2 (en) | Information terminal device | |
KR102118441B1 (en) | Server for managing of natural park tour service | |
JP4940804B2 (en) | POSITION INFORMATION DISTRIBUTION METHOD, POSITION INFORMATION DISTRIBUTION DEVICE, AND POSITION INFORMATION DISTRIBUTION PROGRAM | |
JP7263791B2 (en) | Display system and captured image display method | |
US20190318416A1 (en) | System and Method for Providing Photography | |
JP7375336B2 (en) | Shooting control system, shooting control method, and program | |
JP7211055B2 (en) | Route search server, route search system and route search method | |
JP2020014092A (en) | Image management apparatus, image management method, and program | |
JP4946674B2 (en) | Image server apparatus, image server apparatus control method, image server apparatus control program, computer-readable recording medium recording the program, image transmission system, image transmission system control method, image transmission system control program, and program A recorded computer-readable recording medium. | |
JP6809558B2 (en) | Server and billing method |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20220428 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20230523 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20230808 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20231006 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20231114 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20231213 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7408116 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |