JP6831513B2

JP6831513B2 - 被写体を自動撮影する撮影装置

Info

Publication number: JP6831513B2
Application number: JP2017001456A
Authority: JP
Inventors: 西野　有; 有西野
Original assignee: ナスクインターナショナル株式会社
Priority date: 2017-01-06
Filing date: 2017-01-06
Publication date: 2021-02-17
Anticipated expiration: 2037-01-06
Also published as: JP2018113517A

Description

本発明は、カメラを動作させてユーザーを自動で撮影する撮影装置において、ユーザーがカメラで撮影可能な位置かどうかを高い精度で判別するための装置であり、ユーザーの近傍の複数の位置から発する電波をユーザーの所持する受信機で受信し、それぞれの受信信号の強度の値から、撮影の要否を判断し、カメラを動作させることが可能な撮影装置である。

デジタルカメラの普及と、ソーシャルネットワークの拡大を背景に、自分の行動を記録する手段として写真を撮る機会が多くなっている。

一方、自分を撮影する際には、自画撮り用の棒の先にカメラを付ける等の煩雑な方法が必要となる。

また、写真を整理し、ソーシャルネットワーク上に公開する際などに、写真撮影時の情報を自分で紐づける必要がある。

特開２０１４−９０３８９号公報

特定の位置に設置したカメラで、特定の人物等を撮影する場合に、その特定の人物が写る位置にいるかどうかを自動的に判別し、撮影を行うことが必要である。

特許文献１の技術を用いれば、特定の人物のいるおおよその位置を知ることができるが、カメラの撮影可能な領域と、ビーコン発信機の電波の受信強度を関連付ける簡易な判別方法を得るのが難しい。

また、周囲の環境に電波を遮断したり、散乱したりするものがある場合に、カメラの撮影可能な領域と、ビーコン発信機の電波の受信強度を関連付ける簡易な判別方法を得るのが難しい。

さらに、受信機のアンテナの方向により、受信強度が大きく変化する場合も、カメラの撮影可能な領域と、ビーコン発信機の電波の受信強度を関連付ける簡易な判別方法を得るのが難しい。

本発明は、特定の信号の電波を発信する複数の送信機から発信された信号を、受信機で受信し、それぞれの信号の受信強度の強弱の組み合わせから、特定の位置に設置したカメラで、その受信機を持つ人物を撮影可能かどうか精度よく判別することで、自動的に、受信機をもつ人物を撮影することを目的としている。

上記目的のため、本発明は、カメラで撮影可能な領域の複数の位置において、それぞれの送信機が送信した信号を受信した時の信号強度をあらかじめ記録する手段と、その後、受信機をもつ人物の受信したそれぞれの送信機が送信した信号強度と、あらかじめ記録した受信強度の値を比較する手段と、その差が小さい場合にはカメラを動作させる手段を有する。

また、複数の送信機が送信した信号を受信した時の受信強度をあらかじめ記録する際に、カメラで撮影している画像を画像モニタに送信し、その画像モニタに受信機をもつ人物が写っている場合には、その受信強度の組み合わせはカメラで撮影可能な位置であるとして記録する手段を有することで、カメラで撮影可能な位置の受信強度を記録する作業を容易にする。

さらに、前述の画像モニタを受信機の近くに置くことにより、受信機をもつ人物が画像モニタを見ながら自分が写っているかどうかを確認し、記録することが可能となり、受信強度の組み合わせがカメラで撮影可能な位置であると記録する作業が容易になる。

さらに、受信機が受信したそれぞれの送信機からの信号の受信強度の組み合わせを入力データ、カメラで撮影可能かどうかを出力データとし、ニューラルネットワーク等で機械学習することで、受信強度の組み合わせとカメラで撮影可能な位置の関連付けを容易に実現する。

本発明の撮影装置を用いることで、特定の人物が、特定の位置に設置したカメラで撮影可能な位置にいるかどうかを自動的に精度よく判別し、撮影を行うことができるという利点がある。

また、特定の位置に設置したカメラで撮影可能な位置にいるかどうかを自動的に精度よく判別する方法として、複数の送信機から発信される信号の受信強度と、カメラの撮影可能な領域を関連付けることを容易に実現できるという利点がある。

図１は、本発明装置の実施例の撮影時の情報の流れを示す概略図である。図２は、本発明装置の実施例の準備時の情報の流れを示す概略図である。図３は、本発明装置の実施例のユーザー端末の構成図である。図４は、本発明装置の実施例のサーバーの構成図である。図５は、本発明装置の実施例のカメラの構成図である。図６は、本発明装置の実施例のオペレータの構成図である。図７は、本発明装置の実施例の撮影時の処理の流れを示す概略図である。図８は、本発明装置の実施例の閲覧時の処理の流れを示す概略図である。図９は、本発明装置の実施例の準備時の処理の流れを示す概略図である。図１０は、本発明装置の実施例の撮影可否判別部の情報の流れを示す概略図である。

以下の実施例では、サービス運用時にカメラで撮影される人をユーザー、サービス準備時に撮影判断に使用する受信信号の強度の値の範囲を測定する人をオペレータと記載して説明する。

カメラを動作させてユーザーを自動で撮影する撮影装置において、ユーザーがカメラで撮影可能な位置かどうかを高い精度で判別するという目的を、ユーザーの近傍の複数の位置にあるビーコン信号発信器から発する電波をユーザーの所持する受信機で受信し、それぞれの受信信号の強度の値が所定の範囲にあるかどうかを判別することで実現する。また、この所定の範囲を決定するため、サービス準備時において、オペレータの端末にカメラの映像を映し、その端末で近傍の複数の位置から発する電波の受信強度を受信機で測定し、端末の映像に端末を所持しているオペレータが写っているか否かの情報と共に記録することで、サービス運用時にユーザーを撮影するための判断に使用する受信信号の強度の値の範囲を高精度で決定することを可能としている。

図１は、本発明装置の実施例の撮影時の情報の流れを示す概略図であって、
１００はユーザー、
１０１はユーザー端末、
１１０、１１１、１１２はビーコン信号発信器、
１２０、１２１、１２２はビーコン信号、
１３０はカメラ、
１４０はサーバー、
１５０はユーザー端末からの情報、
１５１はサーバーからカメラへの制御信号、
１５２はカメラからの画像データ、である。

ユーザー１００はユーザー端末１０１でビーコン信号発信器１１０、１１１、および１１２からのビーコン信号１２０、１２１、および１２２を受信し、その受信強度を測定し、記録し、ユーザー固有番号と共にユーザー端末からの情報１５０としてサーバー１４０へ送信する。サーバー１４０はユーザー端末からの情報１５０を分析し、カメラ１３０で撮影可能と判断した場合には、カメラへの制御信号１５１をカメラ１３０へ送信し、カメラ１３０はカメラへの制御信号１５１に応じて撮影を行い、画像データ１５２としてサーバーへ送信する。

本発明装置はこのように動作するため、ユーザー１００はカメラ１３０の位置を認識していなくても、撮影可能な位置に居れば自動的に撮影され、ユーザー固有情報と紐づけられた画像をサーバーに保管できる。サーバーに保管された画像データは、撮影後、いつでも閲覧し、ダウンロードすることが可能になる。

図２は、本発明装置の実施例の準備時の情報の流れを示す概略図であって、
２００はオペレータ、
２１０はオペレータ端末、
２１１は表示部、
２１２はオペレータの画像、
２１３は入力ボタン、
２２０、２２１、２２２はビーコン信号発信器、
２３０、２３１、２３２はビーコン信号、
２４０はカメラ、
２５０はサーバー、
２６０はオペレータ端末からの情報、
２６１はサーバーからカメラへの制御信号、
２６２はカメラからの画像データ、
２６３はサーバーからの画像データ、である。

サーバー２５０からのカメラ２４０への制御信号２６１によってカメラ２４０は撮影を行い、画像データ２６２をサーバー２５０へ送信する。画像２６２データは、サーバー２５０から、画像データ２６３としてオペレータ端末２１０へ送信される。
画像データ２６３はオペレータ端末２１０の表示部２１１に表示される。オペレータ２００は表示部２１１にオペレータの画像２１２が表示されたら、入力ボタン２１３に触れ、オペレータの画像２１２が表示されなかったら、入力ボタン２１３に触れない。オペレータ端末２１０はビーコン信号発信器２２０、２２１、および２２２からのビーコン信号２３０、２３１、および２３２を受信し、その受信強度を測定し、入力ボタン２１３の情報とともにオペレータ端末からの情報２６０としてサーバーへ送信する。以上の動作をオペレータ２００はカメラ２４０の近傍で移動しながら繰り返し実施する。

画像データ２６２、２６３は静止画像でなく、動画でもよい。

上記のように、繰り返してビーコン信号の強度と、撮影の可否の情報を取得することで、サーバーは、どのようなビーコン信号強度の組み合わせの時に撮影が可能かどうかを分析することが可能となり、サービスの運用時にユーザーが、特定の位置に設置したカメラで撮影可能な位置にいるかどうかを自動的に精度よく判別し、撮影を行うことができる。

入力ボタンは１つである必要はなく、オペレータの写っている像の大きさによって、あるいは向いている方向や、光の当たり具合などで、入力ボタンを変えることもできる。その場合、サービス運用時にユーザーの設定によっては撮影したり、撮影しなかったりの選択が可能となる。

さらに、カメラの方向が制御信号によって変えられる場合は、カメラの方向毎に上記の準備作業を繰り返すことで、ユーザーから送られる受信強度に応じてカメラの方向を自動的に変えて、最適な条件でユーザーを撮影することができる。

図３は、本発明装置の実施例のユーザー端末の構成図であって、
３００はユーザー端末、
３１０はビーコン信号受信アンテナ、
３１１はビーコン信号受信機、
３１２はビーコン信号受信強度測定部、
３１３はビーコン信号受信強度記録部、
３２０はユーザー固有番号記録部、
３２１はユーザー固有番号およびビーコン信号受信強度送信機、
３２２はデータ送信アンテナ、である。

本発明装置のユーザー端末３００は、1つ以上のビーコン信号発信器から発信される電波を取り込むビーコン信号受信アンテナ３１０と、ビーコン信号受信アンテナ３１０で取り込まれた高周波のビーコン信号をそれぞれのビーコン信号発信器につけられた固有番号ごとにデータに変換するビーコン信号受信機３１１と、ビーコン信号発信器につけられた固有番号ごとのビーコン信号の受信強度を測定するビーコン信号受信強度測定部３１２と、ビーコン信号受信強度測定部３１２で測定した受信強度をビーコン信号発信器の固有番号と共に記録するビーコン信号受信強度記録部３１３と、ユーザー端末につけられた固有番号を記録するユーザー固有番号記録部３２０と、ビーコン信号受信強度記録部３１３に記録された固有番号ごとのビーコン信号の受信強度とユーザー固有番号記録部３２０に記録されたユーザー固有番号を高周波の信号に変換するユーザー固有番号およびビーコン信号受信強度送信機３２１と、高周波信号を空間に放射するデータ送信アンテナ３２２、から成る。

上記の構成のうち、ビーコン信号受信強度記録部３１３とユーザー固有番号記録部３２０はユーザー端末のメモリであり、ユーザー端末の計算機によって制御する。また、ビーコン信号受信機３１１、ビーコン信号受信強度測定部３１２、ユーザー固有番号およびビーコン信号受信強度送信機３２１もユーザー端末の計算機によって制御する。

ユーザー固有番号とは、本発明の装置の利用時にユーザーごとに割り当てられたユニークな番号のことであるが、ユーザー端末が携帯電話を兼ねている場合は、例えば電話番号やメールアドレスでもよい。

図４は、本発明装置の実施例のサーバーの構成図であって、
４００はサーバー、
４１０はデータ受信アンテナ、
４１１はデータ受信器、
４１２はデータ記録部、
４１３はユーザーごとのデータ抽出部、
４１４は受信強度抽出部、
４１５は撮影可能カメラ抽出部、
４１６はパラメータ記録部、
４２０は撮影可否判別部、
４３０は撮像指示信号発生部、
４３１は撮像指示信号送信機、
４３２は撮像指示信号送信アンテナ、
４４０は画像データ受信アンテナ、
４４１は画像データ受信機、
４４２は画像データ記録部、
４４３は画像データ処理部、
４４４はインターネットインターフェース、
４５０は画像データ処理部、
４５１は画像データ送信機、
４５２は画像データ送信アンテナ、である。

本発明装置のサーバーは、ユーザー端末から放射されたデータ信号を含む電波を取り込むデータ受信アンテナ４１０と、データ受信アンテナ４１０で取り込まれたユーザーからの高周波のデータ信号を、それぞれのユーザー端末につけられた固有番号ごとにデータに変換するデータ受信機４１１と、変換されたデータを記録するデータ記録部４１２と、データ記録部４１２からユーザーごとのデータを抽出するデータ抽出部４１３と、データ抽出部４１３で抽出されたデータからユーザー端末が受信したビーコン信号受信強度を抽出する受信強度抽出部４１４と、受信強度抽出部４１４で抽出されたビーコン信号受信強度の値から、当該ユーザーを撮影できるカメラを抽出する撮影可能カメラ抽出部４１５と、ビーコン信号受信強度の値と撮影可能なカメラの関係を関連付けるパラメータを記録するパラメータ記録部４１６と、パラメータ記録部４１６に記録されるパラメータを決定する撮影可否判別部４２０と、撮影可能カメラ抽出部４１５で抽出されたカメラに撮影指示の信号を発生する撮像指示信号発生部４３０と、撮像指示信号発生部４３０で発生した撮像指示の信号を高周波の信号に変換する撮像指示信号送信機４３１と、高周波信号を空間に放射する撮像指示信号送信アンテナ４３２と、カメラが撮影した画像データを含む電波を取り込む画像データ受信アンテナ４４０と、画像データ受信アンテナ４４０で取り込まれたカメラからの高周波の画像データを、それぞれのカメラにつけられた固有番号ごとに画像データに変換する画像データ受信機４４１と、画像データ受信機４４１で変換された画像データを記録する画像データ記録部４４２と、画像データ記録部４４２に記録された画像データを、特定のユーザーごとに分類し、表示画面を生成する画像データ処理部４４３と、画像データ処理部４４３で処理された表示画面をユーザーの携帯端末やパーソナルコンピュータにインターネットを介して配信するインターネットインターフェース４４４と、サービスの準備時に画像データ受信機４４１で変換された画像データからオペレータ端末の表示画面を生成するオペレータ向け画像データ処理部４５０と、画像データ処理部４５０で処理された画像データを高周波の信号に変換する画像データ送信機４５１と、高周波信号を空間に放射する画像データ送信アンテナ４５２から成る。

データ受信アンテナ４１０、データ受信器４１１、撮像指示信号送信機４３１、撮像指示信号送信アンテナ４３２、画像データ受信アンテナ４４０、画像データ受信機４４１、画像データ送信機４５１、画像データ送信アンテナ４５２は必ずしも、サーバーと一体でなくてもよく、サーバーから制御された別の機器として構成しても良い。

図５は、本発明装置の実施例のカメラの構成図であって、
５００はカメラ、
５１０は撮像指示データ受信アンテナ、
５１１は撮像指示データ受信機、
５１２は撮像制御部、
５１３は撮像部、
５２０は撮像データ記録部、
５３０は画像データ処理部、
５３１は画像データ送信機、
５３２は画像データ送信アンテナ、である。

本発明装置のカメラ５００は、サーバーから送信された高周波の撮像指示の信号を含む電波を取り込む撮像指示データ受信アンテナ５１０と、撮像指示データ受信アンテナ５１０で取り込まれたサーバーからの高周波の撮像指示の信号を撮像指示データに変換する撮像指示データ受信機５１１と、変換された撮像指示データに従い、カメラ５００での撮像指示かどうかを判別し、要すれば撮像指示を出す撮像制御部５１２と、撮像制御部５１２の指示で撮像する撮像部５１３と、撮像部５１３が撮像した撮像データを記録する撮像データ記録部５２０と、撮像データ記録部５２０から撮像データを読み出し、サーバーへ送信する画像データとして処理する画像データ処理部５３０と、画像データ処理部５３０で処理された画像データを高周波の信号に変換する画像データ送信機５３１と、高周波信号を空間に放射する画像データ送信アンテナ５３２から成る。

本実施例では、撮像指示のデータや、画像データを無線で送受信することで説明しているが、有線で行っても良い。

撮像部５２０は撮像制御部５１２の指示により、焦点を変化させたり、カメラの方向を変えてもよい。

図６は、本発明装置の実施例のオペレータ端末の構成図であって、
６００はオペレータ端末、
６１０はビーコン信号受信アンテナ、
６１１はビーコン信号受信機、
６１２はビーコン信号受信強度測定部、
６１３はビーコン信号受信強度記録部、
６１４はオペレータ入力GUI部、
６１５はオペレータ入力検知部、
６２０は送信データ作成部、
６２１はオペレータデータ送信機、
６２２はデータ送信アンテナ、
６３０は画像データ受信アンテナ、
６３１は画像データ受信機、
６３２はオペレータ出力GUI部、
６３３はオペレータ固有番号記録部、である。

本発明装置のオペレータ端末６００は、1つ以上のビーコン信号発信器から発信される電波を取り込むビーコン信号受信アンテナ６１０と、ビーコン信号受信アンテナ６１０で取り込まれた高周波のビーコン信号をそれぞれのビーコン信号発信器につけられた固有番号ごとにデータに変換するビーコン信号受信機６１１と、ビーコン信号発信器につけられた固有番号ごとのビーコン信号の受信強度を測定するビーコン信号受信強度測定部６１２と、ビーコン信号受信強度測定部６１２で測定した受信強度をビーコン信号発信器の固有番号と共に記録するビーコン信号受信強度記録部６１３と、オペレータが撮影可否を判断しその結果を入力するオペレータ端末６００のインタフェースとしてのオペレータ入力GUI部６１４と、オペレータ入力GUI部６１４の入力状態を検知するオペレータ入力検知部６１５と、オペレータ端末につけられた固有番号を記録するオペレータ固有番号記録部６１６と、ビーコン信号受信強度記録部６１３に記録されたビーコン信号受信強度、オペレータ入力検知部６１５で検知したオペレータ入力状態およびオペレータ固有番号記録部６１６に記録されているオペレータ固有番号をまとめてサーバーへ送信するデータを作成する送信データ作成部６２０と、送信データ作成部６２０で作成された送信データを高周波の信号に変換するオペレータデータ送信機６２１と、高周波信号を空間に放射するデータ送信アンテナ６２２と、サーバーから発信されるカメラの画像データを含む電波を取り込む画像データ受信アンテナ６３０と、画像データ受信アンテナ６３０で取り込まれた高周波の信号を画像データに変換する画像データ受信機６３１と、画像データ受信機６３１で変換した画像をオペレータ端末に表示するオペレータ出力GUI部６３２、から成る。

オペレータ入力GUI部６１４と、オペレータ入力検知部６１５、オペレータ出力GUI部６３２は必ずしもオペレータ端末６００と一体である必要はない。

その場合、オペレータ入力GUI部６１４と、オペレータ入力検知部６１５は必ずしもオペレータが操作する必要はなく、離れた場所で、オペレータ出力GUI部６３２を観察する別の作業者が操作しても良い。

図７は本発明装置の実施例の撮影時の処理の流れを示す概略図であって、
７１０はビーコン信号の受信強度を記録する処理、
７１１はビーコン信号の受信強度とユーザー固有番号を送信する処理、
７２０はビーコン信号の受信強度とユーザー固有番号を受信する処理、
７２１はユーザーがカメラで撮影可能かどうか判別する処理、
７２３はカメラに撮影指示の信号を送信する処理、
７２４は無処理、
７３０は撮像装置で撮影する処理、
７３１は撮影した画像データをサーバーに送信する処理、
７４０は受信した画像データとユーザー固有番号を紐づけて記録する処理、である。

図１および図７を用いて、撮影時の動作を説明する。
ビーコン信号の受信強度を記録する処理７１０は、ユーザー端末１０１でビーコン信号発信器１１０、１１１、および１１２からのビーコン信号１２０、１２１、および１２２を受信し、その受信強度を測定し、記録する。ビーコン信号の受信強度とユーザー固有番号を送信する処理７１０は、記録されたビーコン信号の受信強度をユーザー固有番号と共にサーバー１４０へ送信する。サーバーでビーコン信号の受信強度とユーザー固有番号を受信する処理７２０は、ユーザーごとのビーコン信号の受信強度のデータを受信し、記録する。
ユーザーがカメラで撮影可能かどうか判別する処理７２１は、ユーザーごとのビーコン信号の受信強度のデータを分析し、受信強度の組み合わせパターンから、ユーザーを撮影可能なカメラがあるかどうかを算出する。撮影可能なカメラがない場合には、カメラは無処理７２４となり、撮影しない。撮影可能なカメラがある場合には、カメラに撮影指示の信号を送信する処理７２３が、カメラに撮影指示の信号を送信し、カメラは、撮像装置で撮影する処理７３０にて撮影する。撮影した画像データをサーバーに送信する処理７３１は、撮影した画像データをサーバーへ送信する。受信した画像データとユーザー固有番号を紐づけて記録する処理７４０は、サーバーで受信した画像データとユーザー固有番号、および撮影したカメラの情報を紐づけて記録する。

図８は、本発明装置の実施例の閲覧時の処理の流れを示す概略図であって、
８１０はユーザーの固有番号をサーバーに送信する処理、
８１１はユーザーの固有番号をサーバーに受信する処理、
８１２はユーザーの固有番号に紐づいた画像データを抽出する処理、
８１３は抽出した画像データをユーザー端末に表示する処理、
８１４はユーザー端末に表示された画像データから記録に残したい画像を選択する処理、
８１５はユーザーの選択した画像データをユーザーに送信する処理、
８１６は選択した画像データを受信し記録する処理、
８１７は選択されなかった画像データを削除する処理、である。

図８を用いてユーザーが撮影された画像を閲覧する時の動作を説明する。
ユーザーの固有番号をサーバーに送信する処理８１０は、閲覧処理を開始するにあたって、どのユーザーの画像データを閲覧するのかをサーバーに知らせるために、ユーザーの固有番号をサーバーに送信する。ユーザーの固有番号をサーバーに受信する処理８１１は、ユーザーの固有番号をサーバーで受信する。ユーザーの固有番号に紐づいた画像データを抽出する処理８１２は、サーバーに記録されている画像データの中から、ユーザーの固有番号に紐づいた画像データを抽出する。抽出した画像データをユーザー端末に表示する処理８１３は、処理８１２で抽出されたデータをユーザー端末の画面に表示する。この時、どの場所で撮影されたか等、撮影したカメラの情報も同時に表示できる。また、ユーザーが任意の画像データを選択できるように、画像データの近くに選択するためのボタン等を表示した画面を作成する。ユーザー端末に表示された画像データから記録に残したい画像を選択する処理８１４は、ユーザーが端末で画像データを閲覧し、その中から記録に残したい画像データの選択ボタンにタッチすることで、選択された画像データを特定し、その画像データの番号をサーバーに伝える。ユーザーの選択した画像データをユーザーに送信する処理８１５は、サーバーがユーザーから選択した画像データを、記録された画像データから抽出し、ユーザーがダウンロードできる環境にする。選択した画像データを受信し記録する処理は、ユーザーが処理８１４で選択した画像をサーバーからダウンロードし、ユーザー端末に記録する。選択されなかった画像データを削除する処理８１７は、処理８１６でダウンロードされなかった画像データをサーバーの記録から削除する。

ここでいうユーザー端末は、撮影時にユーザーが所持しているユーザー端末でなく、別のユーザー端末や、パーソナルコンピュータでもよい。

また、ここでいう画像データは静止画である必要はなく、動画でもよい。

画像データには、どのカメラで撮影したかの情報が紐づいており、画像の中にカメラの情報やカメラの近くの施設の情報を埋め込むこともできる。その場合、画像そのものの中にカメラごとに異なるメッセージを表示することもでき、また、表示されなくても画像データファイルの中に埋め込んで置き、別の処理で、当該情報を表示させることもできる。

図９は、本発明装置の実施例の準備時の処理の流れを示す概略図であって、
９１０はカメラに撮影指示の信号を送る処理、
９１１は撮影指示の信号を受信し撮影する処理、
９１２は撮影した画像データをサーバーに送る処理、
９１３はカメラが撮影した画像データをオペレータに送信する処理、
９１４はサーバーから受信した画像データをディスプレイに表示する処理、
９１５はオペレータの入力を記録する処理、
９１６はビーコン信号の受信強度を記録する処理、
９１７はビーコン信号の受信強度とオペレータの入力をサーバーに送信する処理、
９１８はビーコン信号の受信強度とオペレータの入力を撮影可否判別部に入力する処理、
である。

図９を用いて準備時の動作を説明する。
カメラに撮影指示の信号を送る処理９１０は、サーバーからカメラに撮影指示の信号を送信する。撮影指示の信号を受信し撮影する処理９１１は、撮影指示の信号を受信したカメラが撮影を行う。この時、撮影指示にカメラの焦点調整や方向変更の指示があれば、カメラはそれに従い撮影する。撮影した画像データをサーバーに送る処理９１２は、カメラで撮影した画像データをサーバーに送る。カメラが撮影した画像データをオペレータに送信する処理９１３は、サーバーが受信したカメラが撮影した画像データをオペレータに送信する。サーバーから受信した画像データをディスプレイに表示する処理９１４は、オペレータ端末のディスプレイにサーバーから受信した画像データを表示する。オペレータはこの表示画面を見ることで、自分がカメラに撮影されていることを認識する。オペレータの入力を記録する処理９１５は、オペレータが表示画面を見ることで、自分がカメラに撮影されていることを認識したとき、表示画面に表示されたボタンをタッチしたことを記録する。ボタンは表示画面に表示されるのではなく、オペレータ端末等に別に設けられていても良い。ビーコン信号の受信強度を記録する処理９１６は、決められた時間間隔でオペレータ端末が受信するビーコン信号の受信強度を記録する。ビーコン信号の受信強度とオペレータの入力をサーバーに送信する処理９１７は、オペレータの入力の有無にかかわらず、ビーコン信号の受信強度とオペレータの入力値を決められた時間間隔でサーバーへ送信する。ビーコン信号の受信強度とオペレータの入力を撮影可否判別部に入力する処理９１８は、サーバーで受信したビーコン信号の受信強度とオペレータの入力値を撮影可否判別部に入力する。この時、一旦別の記録部にビーコン信号の受信強度とオペレータの入力値を記録したのち、その記録を読み出して撮影可否判別部に入力する等、時間的なずれがあっても構わない。ただし、ビーコン信号の受信強度を測定した時間とオペレータの入力値の時間が合っている必要がある。

このように動作するので、オペレータがいる位置でビーコン信号を受信した際の、各ビーコン信号の受信強度の値と、オペレータがカメラに写っているかどうかの判別に相当するオペレータの入力値が同時に記録され、これをサーバーの計算機で撮影可否判別部が機械学習的に学習することで、実際にユーザーがビーコン信号を受信した際に、各ビーコン信号の受信強度の値をサーバーに伝えれば、ユーザーがカメラに写っているかどうかの判別が可能となる。

この時、オペレータ端末が受信するビーコン信号の受信強度を記録する時間間隔は、オペレータの入力値が“カメラに撮影されていることを認識”状態のときは短く、オペレータの入力値が“カメラに撮影されていないことを認識”状態のときは長くすることで、記録容量を抑えつつ、撮影可否の精度を高くすることができる。

撮影指示の信号を受信し撮影する処理９１１で、カメラが撮影する画像データは動画でもよい。

各ビーコン信号の受信強度の値の他に、各ビーコン信号の受信時刻あるいは受信強度測定の時間間隔、受信強度の変化量を記録し、サーバーに送信することで、撮影可否判別部は機械学習的手法によりオペレータの位置を精度よく予測できるようになり、ひいてはユーザーの位置も精度よく予測ができるようになるため、撮影可否の判別精度が高くなる。

図１０は、本発明装置の実施例の撮影可否判別部の情報の流れを示す概略図であって、
１０００は入力データ、
１００１は入力データ変換装置、
１００２は計算装置、
１００３は入力層、
１００４は第２層、
１００５は出力層、
１００６は出力データ変換装置、
１００７は撮影可の出力、
１００８は撮影不可の出力、
１０１０は撮影可否の入力、
１０１１は出力データの差分、
１０１２はパラメータ調整装置、
１０１３は変更されたパラメータ
である。

入力データ変換装置１００１は、各ビーコン信号の受信強度やその測定間隔が含まれた入力データ１０００を、計算装置１００２の入力層１００３へ入力するデータに変換する。例えば、ビーコン信号の受信強度が“受信しない”、“弱い”、“普通”、“強い”で分けられている場合は、入力層１００３のうち、ノード１とノード２の２ビットを用いて、“受信しない”場合は００、“弱い”場合は０１、“普通”の場合は１０、“強い”場合は１１のように２進数で表したり、あるいは入力層１００３のうち、ノード１からノード３を用いて、“受信しない”場合は０００、“弱い”場合は００１、“普通”の場合は０１１、“強い”場合は１１１のように３ビットの中の“１”の数で表しても良い。入力層１００３に入力された数値は入力層のノードiと第２層目のノードjであらかじめ決められている伝達パラメータWijの値を掛け合わせた値をすべての2層目のノード１００４へ伝達する。第２層目のノード１００４は、入力層１００３の各ノードから伝達された値を合計し、ある基準の値を超えた場合は１、超えない場合は０とし、第２層目のノードnと第３層目のノードmであらかじめ決められている伝達パラメータWnmの値を掛け合わせた値をすべての次の層目のノードへ伝達する。このようにして出力層１００５のノードの値が決まる。出力層１００５は2つのノードを持ち、一つは撮影可の出力１００７に対応し、もう一つは撮影不可の出力１００８に対応している。撮影可の出力１００７が、撮影不可の出力１００８より大きければ、入力データ１０００の場合撮影可という判断がなされる。

準備時においては、オペレータが撮影可否を判断した入力値と同じ値を撮影可否の入力１０１０と、出力ノード１００５の出力値を比較し、その差分をパラメータ調整装置１０１２に入力する。パラメータ調整装置１０１２は伝達パラメータをどのように変更すれば撮影可否の入力１０１０と、出力ノード１００５の出力値の差分が小さくなるかを計算し、新しい伝達パラメータ１０１３を計算する。計算装置１００２の伝達パラメータは、新しい伝達パラメータ１０１３に置き換えられる。パラメータ調整装置１０１２は1つの入力データ１０００とそれに対応する撮影可否の入力１０１０ごとに達パラメータ１０１３を更新しても良いが、複数の入力データ１０００とそれに対応する撮影可否の入力１０１０のすべてを用いてその差分の二乗和を最小にする等の手法を用いて、差分を最小化しても良い。

また、実施例の撮影可否判別部はニューラルネットワークを基本とした機械学習の方法で構成しているが、上記機能を実現できる他の方法でも本発明の目的を達成できる。

また、実施例の撮影可否判別部は図４のサーバー４００の中に構成されているが、インターネット等で接続された別の計算機の中に構成することもできる。

カメラを有するサービス提供者が、サービスを利用するユーザーをカメラで撮影し、その画像をユーザーに提供する過程において、カメラの撮影可能な位置にユーザーがいるかどうかを自動的に判別し、撮影可能な場合には自動的に撮影を実施し、その画像をユーザーが閲覧、ダウンロードできる環境を提供することが可能となる。また、カメラの撮影可能な位置にユーザーがいるかどうかを自動的に判別するために、オペレータが事前にカメラの撮影可能な位置を本発明の装置に学習させることで、カメラの設置場所によって撮影可能な位置が異なる場合でも効率的にユーザーを撮影することが可能となる。また、カメラの位置が変わったり、周りの環境が変わっても、改めてオペレータがカメラの撮影可能な位置を装置に学習させることで、カメラの撮影可能な位置の変化に対応することが可能となる。

本発明装置は、遊園地や、行楽地等、記念写真を撮るような場所や施設において、訪問者自身がカメラを所持、撮影を行わなくても、近傍に設置された本発明装置のカメラで撮影した写真を得ることができる。

また、本発明装置は、通学路や、人通りの少ない道等で、通行人自身がカメラを所持、撮影を行わなくても、近傍に設置された本発明装置のカメラで撮影した写真がサーバーに保存されることで、犯罪の防止につながる。この例では、本発明装置を通行人が所持していることを明示できる表示物があると犯罪の未然防止に役立つ。

１００ユーザー
１０１ユーザー端末
１１０ビーコン信号発信器
１１１ビーコン信号発信器
１１２ビーコン信号発信器
１２０ビーコン信号
１２１ビーコン信号
１２２ビーコン信号
１３０カメラ、
１４０サーバー
１５０ユーザー端末からの情報
１５１サーバーからカメラへの制御信号
１５２カメラからの画像データ

２００オペレータ
２１０オペレータ端末
２１１表示部
２１２オペレータの画像
２１３入力ボタン
２２０ビーコン信号発信器
２２１ビーコン信号発信器
２２２ビーコン信号発信器
２３０ビーコン信号
２３１ビーコン信号
２３２ビーコン信号
２４０カメラ
２５０サーバー
２６０オペレータ端末からの情報
２６１サーバーからカメラへの制御信号
２６２カメラからの画像データ
２６３サーバーからの画像データ

３００ユーザー端末
３１０ビーコン信号受信アンテナ
３１１ビーコン信号受信機
３１２ビーコン信号受信強度測定部
３１３ビーコン信号受信強度記録部
３２０ユーザー固有番号記録部
３２１ユーザー固有番号およびビーコン信号受信強度送信機
３２２データ送信アンテナ

４００サーバー
４１０データ受信アンテナ
４１１データ受信器
４１２データ記録部
４１３ユーザーごとのデータ抽出部
４１４受信強度抽出部
４１５撮影可能カメラ抽出部
４１６パラメータ記録部
４２０撮影可否判別部
４３０撮像指示信号発生部
４３１撮像指示信号送信機
４３２撮像指示信号送信アンテナ
４４０画像データ受信アンテナ
４４１画像データ受信機
４４２画像データ記録部
４４３画像データ処理部
４４４インターネットインターフェース
４５０画像データ処理部
４５１画像データ送信機
４５２画像データ送信アンテナ

５００カメラ
５１０撮像指示データ受信アンテナ
５１１撮像指示データ受信機
５１２撮像制御部
５１３撮像部
５２０撮像データ記録部
５３０画像データ処理部
５３１画像データ送信機
５３２画像データ送信アンテナ

６００オペレータ端末
６１０ビーコン信号受信アンテナ
６１１ビーコン信号受信機
６１２ビーコン信号受信強度測定部
６１３ビーコン信号受信強度記録部
６１４オペレータ入力GUI部
６１５オペレータ入力検知部
６２０送信データ作成部
６２１オペレータデータ送信機
６２２データ送信アンテナ
６３０画像データ受信アンテナ
６３１画像データ受信機
６３２オペレータ出力GUI部
６３３オペレータ固有番号記録部

７１０ビーコン信号の受信強度を記録する処理
７１１ビーコン信号の受信強度とユーザー固有番号を送信する処理
７２０ビーコン信号の受信強度とユーザー固有番号を受信する処理
７２１ユーザーがカメラで撮影可能かどうか判別する処理
７２３カメラに撮影指示の信号を送信する処理
７２４無処理
７３０撮像装置で撮影する処理
７３１撮影した画像データをサーバーに送信する処理
７４０受信した画像データとユーザー固有番号を紐づけて記録する処理

８１０ユーザーの固有番号をサーバーに送信する処理
８１１ユーザーの固有番号をサーバーに受信する処理
８１２ユーザーの固有番号に紐づいた画像データを抽出する処理
８１３抽出した画像データをユーザー端末に表示する処理
８１４ユーザー端末に表示された画像データから記録に残したい画像を選択する処理
８１５ユーザーの選択した画像データをユーザーに送信する処理
８１６選択した画像データを受信し記録する処理
８１７選択されなかった画像データを削除する処理

９１０カメラに撮影指示の信号を送る処理、
９１１撮影指示の信号を受信し撮影する処理、
９１２撮影した画像データをサーバーに送る処理、
９１３カメラが撮影した画像データをオペレータに送信する処理、
９１４サーバーから受信した画像データをディスプレイに表示する処理、
９１５オペレータの入力を記録する処理、
９１６ビーコン信号の受信強度を記録する処理、
９１７ビーコン信号の受信強度とオペレータの入力をサーバーに送信する処理、
９１８ビーコン信号の受信強度とオペレータの入力を撮影可否判別部に入力する処理

１０００入力データ、
１００１入力データ変換装置、
１００２計算装置、
１００３入力層、
１００４第２層、
１００５出力層、
１００６出力データ変換装置、
１００７撮影可の出力、
１００８撮影不可の出力、
１０１０撮影可否の入力、
１０１１出力データの差分、
１０１２パラメータ調整装置、
１０１３変更されたパラメータ

Claims

異なる位置にあり異なる固有番号の信号を発する複数の電波発信部と、
複数の前記信号を受信する受信部と、
複数の前記信号の受信電波強度を計測する測定部と、
特定の位置に配置したカメラと、
複数の前記信号の受信電波強度の組み合わせと前記カメラを関連付けた情報を記録するための記録手段であって、当該情報の作成においては、準備時に、前記カメラで撮影を行い、当該撮影中に前記受信部が存在する領域において前記測定部の計測した複数の前記信号の受信電波強度の組み合わせと、当該組み合わせに対応する複数の前記信号の受信時に前記カメラの撮影した画像に前記領域が写っているか否かの情報とを関連付けているところの、記録手段と、
所定の位置で前記受信部が受信した複数の前記信号の受信電波強度と、前記記録手段が記録する前記カメラに関連付けられた受信電波強度の組み合わせとを比較し、その比較結果に基づいて、前記所定の位置が、前記領域に含まれる位置であって前記カメラにより撮影可能な位置であるかを判別し、撮影可能な位置である場合、前記カメラに対し前記所定の位置の撮影指示を行う手段と
を含むことを特徴とした撮影装置。
異なる位置にあり異なる固有番号の信号を発する複数の電波発信部と、
複数の前記信号を受信する受信部と、
前記受信部を移動させる手段と、
複数の前記信号の受信電波強度を計測する測定部と、
特定の位置に配置したカメラと、
前記カメラで撮像した画像を表示するモニタと、
複数の前記信号の受信電波強度を記録し、かつ複数の前記信号の受信電波強度の組み合わせと前記カメラを関連付けた情報を記録するための記録手段と、
を備え、
前記記録手段に記録する当該情報の作成においては、準備時に、前記カメラで撮影を行い、当該撮影中に前記受信部を移動させ、前記測定部の計測した複数の前記信号の受信電波強度の組み合わせと、当該組み合わせに対応する複数の前記信号の受信時に前記カメラの撮影した画像に前記受信部あるいは前記受信部を移動する手段が写っているか否かの情報とを関連付けており、
前記受信部が移動された所定の位置で受信した複数の前記信号の受信電波強度と前記情報とに基づいて、前記所定の位置が、準備時に前記受信部あるいは前記受信部を移動する手段が前記カメラに写った位置であって前記カメラにより撮影可能な位置であるかを判別し、撮影可能な位置である場合、前記カメラに対し前記所定の位置の撮影指示を行う手段をさらに含むことを特徴とした撮影装置。
複数の前記信号を受信する前記受信部と、複数の前記信号の受信電波強度を計測する前記測定部と、前記カメラで撮像した画像を表示する前記モニタを一体化したことを特徴とする請求項２の撮影装置。
複数の前記信号の受信電波強度の組み合わせと前記カメラを関連付けた情報の作成において、前記受信部を移動させ、準備時に、前記測定部の計測した複数の前記信号の受信電波強度の組み合わせを入力データ、前記カメラの撮影した画像に前記受信部あるいは前記受信部を移動する手段が写っているか否かの情報を出力データとして、機械学習を使用して生成したことを特徴とする請求項２あるいは請求項３の撮影装置。
複数の前記信号の受信電波強度の組み合わせと前記カメラを関連付けた情報の作成において、前記受信部を移動させ、準備時に、前記測定部の計測した複数の前記信号の受信電波強度の組み合わせとその変化量を入力データ、前記カメラの撮影した画像に前記受信部あるいは前記受信部を移動する手段が写っているか否かの情報を出力データとして、機械学習を使用して生成したことを特徴とする請求項２あるいは請求項３の撮影装置。