JP7418857B2 - 情報提供システム - Google Patents

Description

本発明は、情報提供システムに関する。

特許文献１には、画像解析に基づく画像への情報付加をサーバの処理負荷を増やすこと
なく行いつつ、処理に応じた報酬を付与するシステムが提案されている。

特開２００３－１６１８７号公報

上記特許文献１と同様に、ユーザが設置したカメラ等から画像データや映像データを受
信し、相当の報酬を当該ユーザに付与するサービスが知られている。かかるサービスは、
例えば、防犯目的や、環境調査等を目的としているものである。

具体的には、ユーザが設置したカメラから常に画像（映像）を送り続け、送信した時間
毎に報酬を付与するものや、カメラで取得した画像を枚数毎に報酬を付与するものもある
。

しかしながら、カメラで取得した画像（ローデータ）をリアルタイムでサービス提供業
者に送信した場合、個人情報やセキュリティの観点から漏洩リスク開示リスクが発生する
。

そこで、本発明は、特にプライバシーやセキュリティ上のリスクを低減するとともにユ
ーザから得られる画像の有効活用を行う技術を提供することを目的とする。

本発明によれば
管理サーバと、当該管理サーバとネットワークを介して接続された複数のユーザ端末と
を含む情報提供システムであって、
前記ユーザ端末は：
判定条件情報及び加工処理情報を含むミッション情報を受信し；
前記判定条件情報に基づいて第１の外界情報を取得し、当該第１の外界情報が判定条
件を満たすか否かを判定し；
当該第１の外界情報が判定条件を満たす場合に第２の外界情報を取得し、前記加工処
理情報に基づいて当該第２の外界情報を加工して加工情報を生成し；
前記加工情報を前記管理サーバに送信する、
情報提供システム
が得られる。

本発明によれば、外界情報に含まれる対象物を検出・加工する判定部及び加工部をユー
ザ端末側に設けたことにより、所謂ローデータを管理サーバに送信する必要がなく、セキ
ュリティや個人情報の漏洩・不要な開示を防ぐことができる。

換言すれば、本発明を利用することによって、ユーザはカメラ等の取得部を常時起動し
ながら、必要な情報のみを管理サーバに対して提供することができる。

また、本発明によれば、ユーザは自己の端末さえあれば、複数のミッション情報を受信
することにより複数の報酬を得ることが可能となり、本システムに対して積極的な参加を
促すことができる。

更に、本発明によれば、ユーザは、自己の許容できる範囲の情報を管理サーバに提供す
ることとできるため、セキュリティを自分の意志でコントロールすることができる。

本発明の実施の形態による情報提供システムの構成図である。 図１の管理サーバの機能ブロック図を示す図である。 図１のユーザ端末の機能ブロック図を示す図である。 本発明によるユーザ端末側の情報処理の流れを説明する図である。 本発明による管理サーバ側の情報処理の流れを説明する図である。 ユーザのＨＭＤに表示される表示例である。 ユーザ端末から管理サーバに送信される情報の種類を絶命する図である。 本発明の応用例を説明した図である。

本発明の実施形態の内容を列記して説明する。本発明の実施の形態による情報提供シス
テムは、以下のような構成を備える。
［項目１］
管理サーバと、当該管理サーバとネットワークを介して接続された複数のユーザ端末と
を含む情報提供システムであって、
前記ユーザ端末は：
判定条件情報及び加工処理情報を含むミッション情報を受信し；
前記判定条件情報に基づいて第１の外界情報を取得し、当該第１の外界情報が判定条
件を満たすか否かを判定し；
当該第１の外界情報が判定条件を満たす場合に第２の外界情報を取得し、前記加工処
理情報に基づいて当該第２の外界情報を加工して加工情報を生成し；
前記加工情報を前記管理サーバに送信する、
情報提供システム。
［項目２］
項目１に記載の情報提供システムであって、
前記第２の外界情報は、前記第１の外界情報と同一の取得手段によって得られる、
情報提供システム。
［項目３］
項目１又は項目２に記載の情報提供システムであって、
前記加工情報は、前記第２の外界情報の少なくとも一部に対する匿名化処理を行うこと
により生成される、
情報提供システム。
［項目４］
項目１乃至項目３のいずれかに記載の情報提供システムであって、
前記加工情報は、前記第２の外界情報から抽出されることにより生成される、
情報提供システム。
［項目５］
項目１乃至項目４のいずれかに記載の情報提供システムであって、
前記ユーザ端末は、カメラ部を備えており、
前記第１の外界情報又は前記第２の外界情報の少なくともいずれかは当該カメラ部によ
り取得される、
情報提供システム。
［項目６］
項目１乃至項目５のいずれかに記載の情報提供システムであって、
前記管理サーバは、前記加工情報に応じて、前記ミッション情報に関連付けられた報酬
をユーザに付与する、
情報提供システム。
［項目７］
項目６のいずれかに記載の情報提供システムであって、
前記管理サーバは、前記ユーザ端末から取得した前記加工情報を評価条件に従って評価
し、
前記報酬は、前記評価に基づいて算定される、
情報提供システム。
［項目８］
項目７に記載の情報提供システムであって、
前記加工処理情報の内容は、前記ユーザ端末からの指定によって所定の範囲で変更可能
であり、
前記管理サーバは、前記指定に応じて前記報酬を補正する、
情報提供システム。
項目［項目９］
項目７に記載の情報提供システムであって、
前記管理サーバは、前記ミッション情報を前記ユーザ端末に送信する、
情報提供システム。
［項目１０］
項目９のいずれかに記載の情報提供システムであって、
依頼主端末を更に含み、
前記管理サーバは、前記依頼主端末からの依頼に基づいて前記ミッション情報を生成す
る、
情報提供システム。
［項目１１］
管理サーバと、当該管理サーバとネットワークを介して接続された複数のユーザ端末と
を利用して実現される情報提供方法であって、
前記ユーザ端末が：
判定条件情報及び加工処理情報を含むミッション情報を受信するステップ；
前記判定条件情報に基づいて第１の外界情報を取得し、当該第１の外界情報が判定条
件を満たすか否かを判定するステップ；
当該第１の外界情報が判定条件を満たす場合に第２の外界情報を取得し、前記加工処
理情報に基づいて当該第２の外界情報を加工して加工情報を生成するステップ；
前記加工情報を前記管理サーバに送信するステップ、を含む
情報提供方法。
［項目１２］
ユーザ端末を：
判定条件情報及び加工処理情報を含むミッション情報を受信する受信部；
前記判定条件情報に基づいて第１の外界情報を取得し、当該第１の外界情報が判定条
件を満たすか否かを判定する判定部；
当該第１の外界情報が判定条件を満たす場合に第２の外界情報を取得し、前記加工処
理情報に基づいて当該第２の外界情報を加工して加工情報を生成する加工部；
前記加工情報を前記管理サーバに送信する送信部、
として機能させる情報提供プログラム。

＜構成＞
図１は、本実施の形態による情報提供システムを構成する要素を示す概略図である。な
お、図の構成は一例であり、これら以外の要素が含まれていてもよい。

本発明による情報提供システムは、管理サーバ１と、複数のユーザＰ１（ユーザ端末２
：図示せず）と、複数の企業（企業端末：図示せず）とを有している。これらは、ネット
ワークを介して、管理サーバ１を起点に互いに通信可能に接続されている。

本実施の形態による情報提供システムは、管理サーバ１を介して企業端末から送信され
たミッション情報をユーザ端末２が受信し、当該ユーザ端末２の取得部（ＧＰＳ、カメラ
、マイク等の入力部）で得た情報の中から所定の条件を満たす情報のみを切り出し（又は
加工して）管理サーバ１に送信し、報酬を得るものである。

＜ハードウェア構成＞
情報提供システムのハードウェア構成について、図２及び図３を参照して説明する。本
実施の形態による管理サーバ１及びユーザ端末２は、次のようなハードウェア構成を有し
ている。なお、以下の構成は一例であり、これ以外の構成を有していてもよい。また同等
の機能を有する他の手段を適宜採用することも可能である。

＜管理サーバ１＞
管理サーバ１は、ユーザ端末２と企業端末と通信を介して情報処理を実行することによ
り、情報提供システムの一部を構成する。管理サーバ１は、情報提供システム全体の処理
に関する機能を有している。

図２は、管理サーバ１の機能ブロック図の例を示す図である。なお、図示される構成は
一例であり、これら以外の機能が付加されていてもよい。

管理サーバ１は、例えばワークステーションやパーソナルコンピュータのような汎用コ
ンピュータとしてもよいし、或いはクラウド・コンピューティングによって論理的に実現
されてもよい。

管理サーバ１は、少なくとも、プロセッサ１０、メモリ１１、ストレージ１２、送受信
部１３、入出力部１４等を備え、これらはバス１５を通じて相互に電気的に接続される。

プロセッサ１０は、管理サーバ１全体の動作を制御し、各要素間におけるデータの送受
信の制御、及びアプリケーションの実行に必要な情報処理等を行う演算装置である。例え
ばプロセッサ１０はＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）であり
、ストレージ１２に格納されメモリ１１に展開されたプログラム等を実行して各情報処理
を実施する。

メモリ１１は、ＤＲＡＭ（Ｄｙｎａｍｉｃ Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒ
ｙ）等の揮発性記憶装置で構成される主記憶と、フラッシュメモリやＨＤＤ（Ｈａｒｄ
Ｄｉｓｃ Ｄｒｉｖｅ）等の不揮発性記憶装置で構成される補助記憶と、を含む。メモリ
１１は、プロセッサ１０のワークエリア等として使用され、また、管理サーバ１の起動時
に実行されるＢＩＯＳ（Ｂａｓｉｃ Ｉｎｐｕｔ ／ Ｏｕｔｐｕｔ Ｓｙｓｔｅｍ）、
及び各種設定情報等を格納する。

ストレージ１２は、アプリケーション・プログラム等の各種プログラムを格納する。各
処理に用いられるデータを格納したデータベースがストレージ２２に構築されていてもよ
い。

送受信部１３は、管理サーバ１をネットワークに接続する。なお、送受信部１３は、Ｂ
ｌｕｅｔｏｏｔｈ（登録商標）及びＢＬＥ（Ｂｌｕｅｔｏｏｔｈ Ｌｏｗ Ｅｎｅｒｇｙ
）の近距離通信インタフェースを備えていてもよい。送受信部は、企業端末より依頼を受
けて、生成されたミッション情報をユーザ端末に送信する。

入出力部１４は、キーボード・マウス類等の情報入力機器、及びディスプレイ等の出力
機器である。

バス１５は、上記各要素に共通に接続され、例えば、アドレス信号、データ信号及び各
種制御信号を伝達する。

＜ユーザ端末２＞

ユーザ端末２は、管理サーバ１と通信を介して情報処理を実行することにより、情報提
供システムの一部を構成する。

図３は、ユーザ端末２の機能ブロック図の例を示す図である。なお、図示される構成は
一例であり、これら以外の機能が付加されていてもよい。

ユーザ端末２は、例えばスマートフォンやタブレット端末等の携帯通信機器等が挙げら
れるが、パーソナルコンピュータのような汎用コンピュータであってもよい。

図示されるように、ユーザ端末２は、少なくとも、プロセッサ２０、メモリ２１、スト
レージ２２、送受信部２３、入出力部２４等を備え、これらはバス２５を通じて相互に電
気的に接続される。これらの機能は上述した管理サーバ１のものと同様であるため、ここ
では詳細な説明は省略する。

本実施の形態によるユーザ端末２は、所謂ウェアラブル端末（ＡＲゴーグル）であり、
ユーザの頭部に装着される。

上述した入出力部２４は、少なくとも、入力部としてカメラ部２４２と、出力部として
ＨＭＤ（Ｈｅａｄ Ｍｏｕｎｔ Ｄｉｓｐｌａｙ）２４１とを備えている。

カメラ部は、ユーザの視界とほぼ同様の領域をカバーする録画機能を有している。ＨＭ
Ｄ２４２は、例えば、グラスタイプのものであり、レンズ越しに様々な情報を表示するこ
とが可能である。

図４に示されるように、機能ブロックとして、判定部、加工部及び取得部を有している
。これらの機能については後述する。
＜データ＞
図４に示されるように、ミッション情報は、判定条件情報、加工処理情報及び報酬情報
を少なくとも含んでいる。これらは、企業端末からの依頼に基づいて管理サーバ１が生成
するものであるが、必要に応じて、ミッション情報を企業端末に生成させることとしても
よい。

判定条件情報は、ユーザ端末２の取得部によって取得された情報（位置情報、カメラ部
、時刻、温度、気圧、操作状況、その他ユーザ端末の備えるセンサ群で直接又は間接的に
取得された情報）が所定の判定条件を満たすか否かを判定（認識）するために必要な情報
（機能パッケージ）が含まれている。取得する情報は複数であってもよい。

加工処理情報は、上述した判定条件を満たした場合に取得部から得られる情報を加工す
るための情報（機能パッケージ）である。

上述した判定条件情報及び加工処理情報は、例えば、カメラ部等で取得した画像（映像
）から対象物を抽出するためのロジックが含まれている。当該ロジックは例えば、画像認
識モデルや、（対象が音声の場合には）音声認識モデル等、対象物の抽出に必要な種々の
技術を採用することができる。

例えば、「街中に落ちている空き缶の放置場所情報」という趣旨のミッション情報の場
合、判定条件情報はカメラ部（取得部）に常時映像を取得させ当該映像の中に空き缶があ
るか否かを判定（認識）させるための情報であり、加工処理情報は、空き缶が落ちていた
ことを判定した際のユーザ端末の位置情報を取得させるための指示情報である。

また「街中に放置されている車両のナンバープレートの情報」という趣旨のミッション
情報の場合、判定条件情報はカメラ部（取得部）に常時映像を取得させ当該映像の中に放
置車両があるか否かを判定させるための情報であり、加工処理情報は、放置車両からナン
バープレートを切り出すための情報や、ナンバープレートの文字を認識してテキスト情報
として抽出するための情報である。

＜処理の流れ＞
続いて、図１、図４及び図５を参照して、本実施の形態による情報提供システムの処理
の流れを説明する。図１に示されるように、本実施の形態による管理サーバ１は、概略、
企業（企業端末）とユーザ（ユーザ端末）とを接続するためのプラットフォームサービス
を提供するものである。なお、図１は概略図であり、管理サーバ１は、１台である必要は
なく、また、各機能が複数の端末に分散されていてもよい。

企業（企業Ａ乃至企業Ｃ）は、管理サーバ１に対して、依頼を行う。依頼は、例えば、
「街中に放置されている空き缶の情報を知りたい」、「違法駐車の情報を集めたい」、「
コンビニエンスストアに入ったユーザの購入商品を知りたい」等、例えば、主にカメラ部
を利用して得られるユーザの視覚情報に関するものである。

この際、企業側は、知りたい情報や集めたい情報に報酬を設定する。例えば、「空き缶
を一つ見つけたら０．１円」、「放置車両を１台見つけたら０．７円」、「コンビニエン
スストアにおいて購入した商品情報を提供してくれたら８円」などである。報酬の設定の
仕方は、個数・台数毎に設定したり、まとまった数によって設定したり、探していた時間
に応じて設定することとしてもよい。

管理サーバ１は、当該依頼を上述したミッション情報としてユーザ端末に送信し、ユー
ザ端末に所定の処理をさせる。ミッション情報としては、例えば、「空き缶／０．１円」
や「放置車両／０．７円」、「コンビニ内での視野情報／８円」という項目を含む。

ユーザＰ１乃至ユーザＰｎは、それぞれ上述したＨＭＤを操作可能な端末を有しており
、各ＨＭＤに搭載されたカメラ部は、視界Ｖ１乃至視界Ｖｎの情報を取得することが可能
である。

ミッション情報を受信したユーザは、当該ミッション情報により特定されるミッション
に参加するか否かを選択することができる。ユーザがミッションに参加すると参加情報が
管理サーバ１に送信され、参加してミッションの識別情報と当該ユーザ（ユーザ端末）の
識別情報とが対応付けられて管理される。

＜ユーザ端末２側の処理＞
より詳しくは、図４に示されるように、ユーザ端末２の受信部は、管理サーバ１から送
信されたミッション情報を受信する。なお、この時、ミッション情報のうち、判定条件情
報と加工処理情報のみをミッション情報として受信することとしてもよい。

当該ミッション情報は、制御部に入力される。以下、上述した「街中に落ちている空き
缶の放置場所情報」及び「街中に放置されている車両のナンバープレートの情報」に関す
るミッション情報を受信した場合に行われる夫々の処理を説明する。

「街中に落ちている空き缶の放置場所情報」を受信した場合、判定部は、判定条件情報
に基づいてカメラ部の機能を有効にし常時映像を取得させるとともに、映像の中に空き缶
があるか否かを画像認識技術によって判定する。加工部は、判定結果に基づいてＧＰＳか
ら位置情報を取得する。当該位置情報は加工情報として送信部に出力され、管理サーバ１
へ送信される。

加工部は、更に、上述した機能の他に、画像のうち空き缶部分のみをトリミングしたり
、空き缶以外の部分にモザイクをかけたり、画像内から空き缶の個数のみを抽出して数値
データ（他の形式）に変換したり、空き缶の銘柄を抽出する処理を行うこととしてもよい
。また、時刻情報等、ユーザ端末により得られる他の情報と共に送信することとしてもよ
い。

なお、必要に応じて、何らの加工もせずに送信部に出力することとしてもよい。この場
合、ユーザ側からすると、企業に対して提供される情報量が多くなることから、報酬を増
加させることとしてもよい。

続いて、「街中に放置されている車両のナンバープレートの情報」を受信した場合、判
定部は、判定条件情報に基づいてカメラ部の機能を有効にし常時映像を取得させるととも
に、映像の中に停止している車両があるか否かを画像認識技術によって判定する。加工部
は、映像の中からナンバープレートの部分のみを抽出する。抽出された情報は送信部に出
力され、加工情報として管理サーバ１へ送信される。

加工部は、更に、上述した機能の他に、画像のうちナンバープレートの部分のみをトリ
ミングしたり、ナンバープレート以外の部分にモザイクをかけたり、画像内からナンバー
プレートのテキストのみを抽出してテキストデータに変換したり、車両の車種の情報等も
抽出することとしてもよい。更にこれらの情報に加えて、ＧＰＳから位置情報を取得する
こととしてもよい。

本実施の形態における画像認識モデルは、処理対象となる画像当該モデルに入力する。
次に、入力された画像から、認識対象となる領域を抽出する。例えば、認識対象となるの
が、対象情報に関する物（人）である場合、供給された画像から、それらと判断される領
域が抽出される。１つの画像から複数の領域が抽出されてもよい。

その後、抽出された領域（その領域の画像）内から、特徴量を抽出する。抽出された特
徴量は、認識処理によってその内容が特定される。

認識処理（画像認識モデル）としては、例えば、ＨＭＭ（Ｈｉｄｄｅｎ Ｍａｒｋｏｖ
Ｍｏｄｅｌ）やＳＶＭ（Ｓｕｐｐｏｒｔ Ｖｅｃｔｏｒ Ｍａｃｈｉｎｅ）など、認識
対象に適した方式が用いられる。そして、その用いられる方式に適した特徴量が抽出され
、パラメータが保持される。

＜管理サーバ側１の処理＞
図５に示されるように、ユーザ端末２から送信されたデータは、管理サーバ１の受信部
で受信される。受信されたデータは、制御部に入力され報酬計算部において報酬が計算さ
れる。

報酬の計算は評価条件に従って行われる。評価条件は、様々な観点で行われる。例えば
、ユーザ端末から送信された情報がミッション情報によって提供対象となる情報ではない
場合には０となる（すなわち、ユーザ端末側における処理ミス等が発生していた場合や、
不正操作がされていた場合等）。また、対象情報を満たす情報であっても、既に同一のも
のを送信している他のユーザがいた場合には、当該情報にデータとしての新しさはないこ
とから低い報酬となる。

このように、評価条件は、対象情報としての適格性、データの有用性の観点から定義さ
れる。なお、評価の観点はこれ以外にあってもよい。

報酬計算部は、上記評価条件に基づいて当該ユーザに付与すべき報酬を補正し確定する
。報酬の補正は、基準金額に応じた係数を乗じたり、定数を増減させたりする方法が挙げ
られるがこれに限られない。

確定した報酬は、ユーザ端末２に通知される。

＜実施例＞
図６は、ユーザがＨＭＤ越しに見ている視界（外界情報）である。例えば、図示される
ように、ユーザが参加しているミッション情報に関する検知対象物にカーソルが合わせら
れてユーザに知らせることとしてもよい。

図においては、路上に停止された車を放置車両として認識し、当該車のナンバープレー
トにカーソルが表示されている。この場合、当該ナンバープレートの情報が管理サーバ１
に送信される。

同様に、図においては、道路に捨てられた空き缶を認識し、当該空き缶にカーソルが表
示されている。この場合、当該空き缶が道路上にあったという情報が管理サーバ１に送信
される。

上述した加工情報の送信は、逐次行うこととしてもよいし、ある程度のデータがまとま
ってから行うこととしてもよい。

上述したように、管理サーバ１は、ユーザ端末から送信された分析結果に応じて、設定
された報酬をユーザ（ユーザ端末）に付与する。

図７は、ユーザ端末２から管理サーバ１に送信される情報の種類を説明するイメージ図
である。上述したように、カメラ部で取得された情報の全てが管理サーバ１に送信される
わけではない。換言すれば、管理サーバ１には、外界情報のうち、ミッション情報に含ま
れる検知対象物に関する情報のみが抽出されて送信されることとなる。

ユーザ端末から管理サーバ１に送信される情報は例えば、次の３パターンが考えられる
。空き缶のような場合には、その検知対象物の「有無」のみの情報が管理サーバ１に送信
される（１）。また、放置車両の場合にはナンバープレートの部分のみの画像データが管
理サーバ１に送信される場合（２）、ナンバープレートから文字情報を更に分析し（即ち
、（２）の情報を加工して）管理サーバ１に送信される場合等がある（３）。また他のセ
ンサ群から得られた情報を付加して送信することとしてもよい（４）。

このように、本実施の形態においては、ユーザ端末のカメラ部で取得された情報のうち
、ミッション情報に必要な部分だけが抽出された管理サーバ１に送信されることとしてい
るため、データの軽量化を行うことに加えて次のような効果を得ることができる。

即ち、本実施の形態によれば、所謂ローデータを管理サーバに送信する必要がないため
、セキュリティや個人情報の漏洩・不要な開示を防ぐことができる。

また、本発明を利用することによって、ユーザはカメラ部を常時起動しながら、必要な
情報のみを管理サーバに対して提供することができる。即ち検知対象物をカメラ部で撮る
とき（放置車両を見つけた場合や、空き缶を見つけた場合等）のみカメラ部を起動すると
いった手間を省くことができる。

また、複数のミッション情報を受信することにより複数の報酬を得ることが可能となり
、本システムに対して積極的な参加を促すことができる。この結果、ミッション情報に関
する依頼をおこなった企業への情報提供の効率化を図ることができる。

なお、報酬情報は、ユーザ端末から受け取る情報の量・内容に応じて変動させることと
してもよい。また、ユーザ側が管理サーバ１に対して送信される情報の量・内容をコント
ロールすることとしてもよい。

上述した実施の形態は、本発明の理解を容易にするための例示に過ぎず、本発明を限定
して解釈するためのものではない。本発明は、その趣旨を逸脱することなく、変更、改良
することができると共に、本発明にはその均等物が含まれることは言うまでもない。

図７に示されるように、本発明は、ＨＭＤのみならず、例えば、カメラ部を備えた無人
飛行体（ドローン等）、自動運転機能を有する自動車等にも適用することが可能である。
この場合、ミッション情報の検知対象物を分析する分析部を無人飛行体や自動車側に設け
ることとすればよい。

また、上述したミッション情報は、例示したものに限られず、例えば、特定の人物や物
・現象等に関する情報の提供や、ユーザの自宅内に関する情報を対象としたものであって
もよい。

１ 管理サーバ
２ ユーザ端末

Claims (1)

1. 管理サーバに接続されたカメラ部を備える情報処理装置が、
   判定条件及び画像から加工情報を生成するロジックを含む加工処理情報を記憶するステップと、
   前記カメラ部から画像を取得するステップと、
   前記加工処理情報に従って前記画像から前記加工情報を生成するステップと、
   前記画像が前記判定条件を満たす場合に、前記加工情報を前記管理サーバに送信するステップと、
   を実行すること特徴とする情報処理方法。