JP2022012283A - 情報処理装置 - Google Patents

Abstract

【課題】ユーザが好みそうな画像をユーザに提供する。【解決手段】屋内または屋外に配置された第一カメラが撮影したユーザの周辺の画像を取得することと、ユーザが、ユーザの端末に備わる第二カメラで撮影を行っていることを検出することと、第一カメラが撮影したユーザの周辺の画像のうち、ユーザの端末に備わる第二カメラでユーザが撮影を行っているときに第一カメラで撮影された画像である第一画像を選定して、ユーザの端末に送信することと、を実行する制御部を備える。【選択図】図７

Description

本開示は、情報処理装置に関する。

固定カメラを使って自動的に撮影された画像を編集してアルバムを作成する技術が知られている（例えば、特許文献１参照。）。

特開２００７－３３４４８２号公報

本開示の目的は、ユーザが好みそうな画像をユーザに提供することにある。

本開示の態様の一つは、
屋内または屋外に配置された第一カメラが撮影したユーザの周辺の画像を取得することと、
前記ユーザが、前記ユーザの端末に備わる第二カメラで撮影を行っていることを検出することと、
前記第一カメラが撮影した前記ユーザの周辺の画像のうち、前記ユーザの端末に備わる前記第二カメラで前記ユーザが撮影を行っているときに前記第一カメラで撮影された画像である第一画像を選定して、前記ユーザの端末に送信することと、
を実行する制御部を備える情報処理装置である。

また、本開示の他の態様は、上記の情報処理装置における処理をコンピュータに実行させる情報処理方法である。また、本開示の他の態様は、上記の情報処理装置における処理をコンピュータが実行するプログラム、または、このプログラムを非一時的に記憶した記憶媒体である。

本開示によれば、ユーザが好みそうな画像をユーザに提供することができる。

実施形態に係るシステムの概略構成を示す図である。 実施形態において行われる撮影について説明するための図である。 実施形態に係るシステムを構成する第一カメラ、ユーザ端末、及び、センタサーバのそれぞれの構成の一例を概略的に示すブロック図である。 センタサーバの機能構成を例示した図である。 画像ＤＢのテーブル構成を例示した図である。 ユーザ端末の機能構成を例示した図である。 実施形態に係るセンタサーバがユーザ端末に画像を提供する処理のフローチャートである。

本開示の態様の一つである情報処理装置は、制御部を備える。制御部は、屋内または屋
外に配置された第一カメラが撮影したユーザの周辺の画像を取得する。第一カメラは、例えば、監視カメラまたはライブカメラである。第一カメラは、例えば、連続して撮影を行うカメラ、人に反応して撮影を行うカメラ、または、所定時間毎に撮影を行うカメラの何れであってもよい。第一カメラは、ユーザが操作しないカメラである。ユーザは、予め登録されたユーザであってもよい。

また、制御部は、第一カメラが撮影したユーザの周辺の画像のうち、ユーザの端末に備わる第二カメラでユーザが撮影を行っているときに第一カメラで撮影された画像である第一画像を選定して、ユーザの端末に送信する。すなわち、ユーザが第二カメラで撮影しているときに、他の角度から第一カメラによって撮影された画像が第一画像として選定される。ユーザの周辺の画像であるか否かは、例えば、ユーザが写っている画像であるか否かによって判断してもよいし、ユーザの端末の位置情報に基づいて判断してもよい。画像にユーザが写っているか否かは、例えば、予め登録しておいたユーザの顔写真に基づいた顔認識、または、ユーザの端末の位置情報などを利用して判断できる。ユーザが撮影を行っているか否かは、例えば、第一カメラで撮影された画像の画像解析、または第二カメラで撮影された画像に紐付けされた時刻に基づいて判断できる。ユーザが第二カメラを用いて撮影を行う場面は、ユーザ自身が画像に残しておきたい場面であると考えられる。このときに、他の角度から第一カメラによって撮影した画像をユーザに提供することにより、ユーザが好みそうな画像を提供することができる。

以下、図面に基づいて、本開示の実施の形態を説明する。以下の実施形態の構成は例示であり、本開示は実施形態の構成に限定されない。また、以下の実施形態は可能な限り組み合わせることができる。

＜第１実施形態＞
図１は、本実施形態に係るシステム１の概略構成を示す図である。システム１は、第一カメラ１０で撮影した画像のうち、所定の画像をユーザ端末２０に送信するシステムである。

図１の例では、システム１は、第一カメラ１０、ユーザ端末２０、及び、センタサーバ３０を含む。第一カメラ１０、ユーザ端末２０、及び、センタサーバ３０は、ネットワークＮ１によって相互に接続されている。第一カメラ１０は、例えば、監視カメラ又はライブカメラなどである。ユーザ端末２０は、ユーザが利用する端末である。

ネットワークＮ１は、例えば、インターネット等の世界規模の公衆通信網でありＷＡＮ（Ｗｉｄｅ Ａｒｅａ Ｎｅｔｗｏｒｋ）やその他の通信網が採用されてもよい。また、ネットワークＮ１は、携帯電話等の電話通信網、または、Ｗｉ－Ｆｉ（登録商標）等の無線通信網を含んでもよい。なお、図１には、例示的に１つの第一カメラ１０及び１つのユーザ端末２０を図示しているが、これらは複数存在し得る。

図２は、本実施形態において行われる撮影について説明するための図である。本実施形態では、ユーザがユーザ端末２０に備わるカメラを利用して被写体を撮影する。そのときに、第一カメラ１０によって撮影されたユーザ周辺の画像をセンタサーバ３０が取得する。第一カメラ１０によって撮影された画像には、例えば、ユーザが被写体を撮影している場面が写っている。ここで、ユーザがユーザ端末２０で被写体を撮影した画像と、第一カメラ１０が同じ被写体を撮影した画像とでは、被写体に対する角度が異なる。ユーザ端末２０では、ユーザが好ましいと考えているタイミングで撮影が行われるため、そのタイミングで他の角度から撮影した画像は、ユーザに好まれると考えられる。したがって、そのときに撮影された画像をユーザ端末２０に送信することにより、ユーザは、複数の角度から被写体を撮影した画像を得ることができる。

なお、別法として、ユーザがユーザ端末２０で撮影をしていないときに第一カメラ１０によって撮影されたユーザ周辺の画像をユーザ端末２０に送信することも考えられる。これにより、ユーザは、シャッターチャンスを逃した場合であっても、第一カメラ１０によって撮影された画像を得ることができる。

図３に基づいて、第一カメラ１０、ユーザ端末２０、及び、センタサーバ３０のハードウェア構成及び機能構成について説明する。図３は、本実施形態に係るシステム１を構成する第一カメラ１０、ユーザ端末２０、及び、センタサーバ３０のそれぞれの構成の一例を概略的に示すブロック図である。

センタサーバ３０は、一般的なコンピュータの構成を有している。センタサーバ３０は、プロセッサ３１、主記憶部３２、補助記憶部３３、及び、通信部３４を有する。これらは、バスにより相互に接続される。プロセッサ３１は、制御部の一例である。

プロセッサ３１は、ＣＰＵ（Central Processing Unit）やＤＳＰ（Digital Signal Processor）等である。プロセッサ３１は、センタサーバ３０を制御し、様々な情報処理の
演算を行う。プロセッサ３１は、制御部の一例である。主記憶部３２は、ＲＡＭ（Random
Access Memory）、ＲＯＭ（Read Only Memory）等である。補助記憶部３３は、ＥＰＲＯＭ（Erasable Programmable ROM）、ハードディスクドライブ（ＨＤＤ、Hard Disk Drive）、リムーバブルメディア等である。補助記憶部３３には、オペレーティングシステム（Operating System :ＯＳ）、各種プログラム、各種テーブル等が格納される。補助記憶部３３に格納されたプログラムをプロセッサ３１が主記憶部３２の作業領域にロードして実行し、このプログラムの実行を通じて各構成部等が制御される。これにより、所定の目的に合致した機能をセンタサーバ３０が実現する。主記憶部３２および補助記憶部３３は、コンピュータで読み取り可能な記録媒体である。なお、センタサーバ３０は、単一のコンピュータであってもよいし、複数台のコンピュータが連携したものであってもよい。また、補助記憶部３３に格納される情報は、主記憶部３２に格納されてもよい。また、主記憶部３２に格納される情報は、補助記憶部３３に格納されてもよい。

通信部３４は、ネットワークＮ１経由で、第一カメラ１０及びユーザ端末２０と通信を行う手段である。通信部３４は、例えば、ＬＡＮ（Local Area Network）インターフェースボード、無線通信のための無線通信回路である。ＬＡＮインターフェースボードや無線通信回路は、ネットワークＮ１に接続される。

次に、第一カメラ１０は、屋内または屋外に配置されて第一カメラ１０の周辺を撮影する装置である。第一カメラ１０は、撮像部１１及び通信部１２を備える。撮像部１１は、例えばＣＣＤ（Charge Coupled Device）イメージセンサまたはＣＭＯＳ（Complementary
Metal Oxide Semiconductor）イメージセンサなどの撮像素子を用いて撮影を行う。撮影により得られる画像は、静止画または動画の何れであってもよい。

通信部１２は、第一カメラ１０をネットワークＮ１に接続するための通信手段である。通信部１２は、例えば、移動体通信サービス（例えば、５Ｇ（5th Generation）、４Ｇ（4th Generation）、３Ｇ（3rd Generation）、ＬＴＥ（Long Term Evolution）等の電話
通信網）、Ｗｉ－Ｆｉ（登録商標）、または、Ｂｌｕｅｔｏｏｔｈ(登録商標)等の無線通信を利用して、ネットワークＮ１経由で他の装置（例えばセンタサーバ３０等）と通信を行うための回路である。第一カメラ１０で撮影された画像は、通信部１２を介してセンタサーバ３０へ送信される。

次に、ユーザ端末２０について説明する。ユーザ端末２０は、例えば、スマートフォン
、携帯電話、タブレット端末、個人情報端末、ウェアラブルコンピュータ（スマートウォッチ等）、パーソナルコンピュータ（Ｐｅｒｓｏｎａｌ Ｃｏｍｐｕｔｅｒ、ＰＣ）といった小型のコンピュータである。ユーザ端末２０は、プロセッサ２１、主記憶部２２、補助記憶部２３、入力部２４、ディスプレイ２５、通信部２６、及び、第二カメラ２７を有する。これらは、バスにより相互に接続される。プロセッサ２１、主記憶部２２、及び、補助記憶部２３については、センタサーバ３０のプロセッサ３１、主記憶部３２、及び、補助記憶部３３と同様であるため、説明を省略する。

入力部２４は、ユーザが行った入力操作を受け付ける手段であり、例えば、タッチパネル、マウス、キーボード、または、押しボタン等である。ディスプレイ２５は、ユーザに対して情報を提示する手段であり、例えば、ＬＣＤ（Liquid Crystal Display）、または、ＥＬ（Electroluminescence）パネル等である。入力部２４及びディスプレイ２５は、
１つのタッチパネルディスプレイとして構成してもよい。通信部２６は、ユーザ端末２０をネットワークＮ１に接続するための通信手段である。通信部２６は、例えば、移動体通信サービス（例えば、５Ｇ（5th Generation）、４Ｇ（4th Generation）、３Ｇ（3rd Generation）、ＬＴＥ（Long Term Evolution）等の電話通信網）、Ｗｉ－Ｆｉ（登録商標
）、Ｂｌｕｅｔｏｏｔｈ（登録商標）等の無線通信網を利用して、ネットワークＮ１経由で他の装置（例えば第一カメラ１０またはセンタサーバ３０等）と通信を行うための回路である。第二カメラ２７は、第一カメラ１０と同様に、ＣＣＤイメージセンサまたはＣＭＯＳイメージセンサなどの撮像素子を用いて撮影を行う。第二カメラ２７によって撮影された画像は、補助記憶部２３に記憶される。

次に、センタサーバ３０の機能について説明する。図４は、センタサーバ３０の機能構成を例示した図である。センタサーバ３０は、機能構成要素として、制御部３０１、及び、画像ＤＢ３１１を備える。センタサーバ３０のプロセッサ３１は、主記憶部３２上のコンピュータプログラムにより、制御部３０１の処理を実行する。画像ＤＢ３１１は、プロセッサ３１によって実行されるデータベース管理システム（Ｄａｔａｂａｓｅ Ｍａｎａｇｅｍｅｎｔ Ｓｙｓｔｅｍ、ＤＢＭＳ）のプログラムが、補助記憶部３３に記憶されるデータを管理することで構築される。画像ＤＢ３１１は、例えば、リレーショナルデータベースである。なお、センタサーバ３０の各機能構成要素のいずれか、またはその処理の一部は、ネットワークＮ１に接続される他のコンピュータにより実行されてもよい。

制御部３０１は、第一カメラ１０から画像を受信して、補助記憶部３３に記憶させる。また、制御部３０１は、補助記憶部３３に記憶されている画像に対して画像解析を行い、ユーザが第二カメラ２７を用いて撮影を行っている場面が写っている画像を抽出する。この抽出には、公知の技術を用いることができる。例えば、ユーザがユーザ端末２０を構えるときの腕の角度、または、目線などに基づいてユーザがユーザ端末２０を用いて撮影を行っている否か判定する。なお、センタサーバ３０がユーザ端末２０にアクセスして画像に関する情報を取得できる場合には、ユーザ端末２０から画像を撮影した時刻を取得してもよい。この画像には、位置情報が含まれていてもよい。そして、ユーザ端末２０によって撮影が行われた時刻及び位置において、第一カメラ１０によって撮影された画像を抽出してもよい。

また、制御部３０１は、画像に写っているユーザを特定する。例えば、顔認証プログラムを利用してユーザを特定する。なお、ユーザは、ユーザ端末２０を介して予め顔の画像をセンタサーバ３０に登録しておく。ユーザの顔の画像は、ユーザに固有の識別子であるユーザＩＤと紐付けされて画像ＤＢ３１１に格納される。制御部３０１は、画像ＤＢ３１１に格納されている画像と、第一カメラ１０によって撮影された画像とを比較することにより、第一カメラ１０で撮影された画像のうち、ユーザが写っている画像（第一画像）を抽出する。

ユーザが撮影を行っている画像を抽出した場合には、その画像をユーザに提供する第一画像とする。なお、ユーザに提供する第一画像には、さらに、同時刻にその周辺にある他の第一カメラ１０で撮影した画像も含めることができる。そして、制御部３０１は、第一画像をユーザ端末２０に送信する。ユーザへの第一画像の提供は随時行われてもよく、所定のタイミングで行われてもよい。

次に、画像ＤＢ３１１に格納される画像情報の構成について、図５に基づいて説明する。図５は、画像ＤＢ３１１のテーブル構成を例示した図である。画像情報テーブルは、ユーザＩＤ、顔画像、及び、ユーザ端末ＩＤの各フィールドを有する。ユーザＩＤフィールドには、ユーザに固有の識別子（ユーザＩＤ）が入力される。ユーザＩＤは、制御部３０１がユーザ毎に付与する。顔画像フィールドには、ユーザの顔を撮影した画像が入力される。なお、別法として、顔画像フィールドに、ユーザの顔を撮影した画像の特徴量が入力されてもよい。ユーザ端末ＩＤフィールドには、ユーザに紐付けされるユーザ端末２０の識別子（ユーザ端末ＩＤ）が入力される。ユーザ端末ＩＤは、制御部３０１がユーザ端末２０毎に付与する。顔画像に関する情報は、例えば、ユーザ端末２０で撮影され、ユーザＩＤ及びユーザ端末ＩＤと共にセンタサーバ３０へ送信される。

次に、第一カメラ１０の機能について説明する。第一カメラ１０は、例えば、所定時間毎に撮影を行う。そして、撮影した画像をセンタサーバ３０へ送信する。

次に、ユーザ端末２０の機能について説明する。図６は、ユーザ端末２０の機能構成を例示した図である。ユーザ端末２０は、機能構成要素として、制御部２０１を備える。ユーザ端末２０のプロセッサ２１は、主記憶部２２上のコンピュータプログラムにより、制御部２０１の処理を実行する。制御部２０１は、例えば、センタサーバ３０から受信した画像をディスプレイ２５に表示させる。なお、制御部２０１は、センタサーバ３０へ、第一カメラ１０が撮影した画像の提供を要求することもできる。また、制御部２０１は、第二カメラ２７によって撮影された画像を補助記憶部２３に記憶させる。

次に、センタサーバ３０がユーザ端末２０に画像を提供する処理について説明する。図７は、本実施形態に係るセンタサーバ３０がユーザ端末２０に画像を提供する処理のフローチャートである。図７に示した処理は、センタサーバ３０において、所定の時間毎に実行される。

ステップＳ１０１では、制御部３０１が、第一カメラ１０から画像を受信したか否か判定する。ステップＳ１０１で肯定判定された場合にはステップＳ１０２へ進み、否定判定された場合には本ルーチンを終了させる。ステップＳ１０２では、制御部３０１が、第一カメラ１０から受信した画像にユーザが写っているか否か判定する。制御部３０１は、画像の中から人の顔を抽出し、その人の顔と画像ＤＢ３１１に記憶されている画像とを比較することで、画像にユーザが写っているか否か判定する。ステップＳ１０２で肯定判定された場合にはステップＳ１０３へ進み、否定判定された場合には本ルーチンを終了させる。

ステップＳ１０３では、制御部３０１が、ステップＳ１０２において抽出された画像が、ユーザが撮影している場面が写っている画像であるか否か判定する。制御部３０１は、例えば、画像解析を行うことにより、ユーザが撮影を行っているか否か判定する。ステップＳ１０３で肯定判定された場合にはステップＳ１０４へ進み、否定判定された場合には本ルーチンを終了させる。ステップＳ１０４では、制御部３０１が、ユーザ端末２０へ送信するための画像情報を生成する。ユーザに送信するのは、ユーザが撮影している場面が写っている画像であるが、更に、その周辺を他の第一カメラ１０が撮影した画像が含まれ
ていてもよい。そして、ステップＳ１０５において、画像情報がユーザ端末２０へ送信される。このユーザ端末２０は、ステップＳ１０２で顔が一致したユーザに紐付けされるユーザ端末２０であり、画像ＤＢ３１１に記憶されている情報に基づいて決定される。

以上説明したように本実施形態によれば、ユーザが第二カメラ２７を用いて撮影を行っているときに、他の角度から第一カメラ１０で撮影した画像をユーザに提供することができる。したがって、ユーザが好みそうな画像をユーザに提供することができる。

＜その他の実施形態＞
上記の実施形態はあくまでも一例であって、本開示はその要旨を逸脱しない範囲内で適宜変更して実施し得る。

本開示において説明した処理や手段は、技術的な矛盾が生じない限りにおいて、自由に組み合わせて実施することができる。

また、１つの装置が行うものとして説明した処理が、複数の装置によって分担して実行されてもよい。あるいは、異なる装置が行うものとして説明した処理が、１つの装置によって実行されても構わない。コンピュータシステムにおいて、各機能をどのようなハードウェア構成（サーバ構成）によって実現するかは柔軟に変更可能である。例えば、センタサーバ３０の機能の一部を、第一カメラ１０またはユーザ端末２０が備えていてもよい。

また、上記実施形態では、ユーザの顔の画像を予めセンタサーバ３０に登録しているが、これに限らない。例えば、ユーザ端末２０の位置情報を用いて、画像に写っているユーザを特定してもよい。すなわち、第一カメラ１０の位置及び向きなどから、画像に写っているユーザの位置を特定し、この位置と同一の位置情報を発信したユーザ端末２０とを紐付けすれば、ユーザの顔の画像はなくても、第一画像を送信するユーザ端末２０を特定することができる。

また、制御部３０１は、ユーザが第二カメラ２７で撮影している被写体を特定し、その被写体が写っている画像を第一画像としてユーザに提供してもよい。例えば、ユーザの家族の顔写真を予め登録しておくことで、ユーザが家族を撮影している場合に、被写体が家族であると特定できる。別法として、ユーザのカメラの画角を画像解析により取得して、取得した画角に応じて被写体を推定してもよい。

本開示は、上記の実施形態で説明した機能を実装したコンピュータプログラムをコンピュータに供給し、当該コンピュータが有する１つ以上のプロセッサがプログラムを読み出して実行することによっても実現可能である。このようなコンピュータプログラムは、コンピュータのシステムバスに接続可能な非一時的なコンピュータ可読記憶媒体によってコンピュータに提供されてもよいし、ネットワークを介してコンピュータに提供されてもよい。非一時的なコンピュータ可読記憶媒体は、例えば、磁気ディスク（フロッピー（登録商標）ディスク、ハードディスクドライブ（ＨＤＤ）等）、光ディスク（ＣＤ－ＲＯＭ、ＤＶＤディスク、ブルーレイディスク等）など任意のタイプのディスク、読み込み専用メモリ（ＲＯＭ）、ランダムアクセスメモリ（ＲＡＭ）、ＥＰＲＯＭ、ＥＥＰＲＯＭ、磁気カード、フラッシュメモリ、光学式カード、電子的命令を格納するために適した任意のタイプの媒体を含む。

１ システム
１０ 第一カメラ
２０ ユーザ端末
３０ センタサーバ
３１ プロセッサ
３３ 補助記憶部

Claims (1)

1. 屋内または屋外に配置された第一カメラが撮影したユーザの周辺の画像を取得することと、
   前記ユーザが、前記ユーザの端末に備わる第二カメラで撮影を行っていることを検出することと、
   前記第一カメラが撮影した前記ユーザの周辺の画像のうち、前記ユーザの端末に備わる前記第二カメラで前記ユーザが撮影を行っているときに前記第一カメラで撮影された画像である第一画像を選定して、前記ユーザの端末に送信することと、
   を実行する制御部を備える情報処理装置。

Images