JP3974034B2 - Sales management system - Google Patents

Sales management system Download PDF

Info

Publication number
JP3974034B2
JP3974034B2 JP2002378655A JP2002378655A JP3974034B2 JP 3974034 B2 JP3974034 B2 JP 3974034B2 JP 2002378655 A JP2002378655 A JP 2002378655A JP 2002378655 A JP2002378655 A JP 2002378655A JP 3974034 B2 JP3974034 B2 JP 3974034B2
Authority
JP
Japan
Prior art keywords
product
vending machine
unit
survey
column
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2002378655A
Other languages
Japanese (ja)
Other versions
JP2004213109A (en
Inventor
敏彦 島川
教和 高島
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Japan Tobacco Inc
Original Assignee
Japan Tobacco Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Japan Tobacco Inc filed Critical Japan Tobacco Inc
Priority to JP2002378655A priority Critical patent/JP3974034B2/en
Publication of JP2004213109A publication Critical patent/JP2004213109A/en
Application granted granted Critical
Publication of JP3974034B2 publication Critical patent/JP3974034B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Description

【0001】
【発明の属する技術分野】
この発明は情報解析技術に関し、とくに画像に基づいて商品ディスプレイにおける商品または商品サンプルの商品構成を解析する技術に関する。
【0002】
【従来の技術】
ネットワーク技術の発達にともない、テキストデータ、画像データ、音声データ、映像データなどのコンテンツを、ネットワークを介して送受信できるようになった。こうしたネットワークを介したコンテンツの送受信機能は、デスクトップコンピュータなどの据置型の端末装置だけでなく、例えば携帯電話、PDA(Personal Digital Assistants)などの携帯可能な端末装置にも設けられている。こうしたネットワーク接続機能を有する端末装置は、広く普及し、その台数は膨大なものである。こうした携帯端末装置を情報収集手段として利用し、従来手作業で行っていた調査を自動化するためのシステムがある(特許文献1)。
【0003】
【特許文献1】
特開平10−143520号公報
【0004】
【発明が解決しようとする課題】
現在の自動販売機戦略を実践する商品メーカー企業は、自動販売機から在庫情報を日々収集し、自動販売機に格納した商品毎の販売実績管理を行っている。在庫情報は、自動販売機のカラム毎に在庫量を対応付けたもの、つまり、カラム番号と在庫量とを対応付けたものである。自動販売機は、商品毎に格納庫を備え、商品ディスプレイに展示された商品サンプルと、その商品が装填された格納庫が対応付けられている。この個々の格納庫を「カラム」という。在庫情報は、このカラムと在庫量とを対応付けたものであるため、在庫情報から商品を特定することができない。そこで販売実績を管理する装置は、カラム番号と商品とを対応付けた商品装填マスタと在庫情報とに基づいて、商品毎の在庫量を管理する。この商品装填マスタは、人手により自動販売機毎にカラムの調査を行い、その調査結果に基づいて手作業で作成される。
【0005】
一般に一台の自動販売機には、複数企業の商品が格納されている。企業にとって、商品ディスプレイにおける展示スペースの確保、すなわちカラムの確保は商品を販売する上で必須である。そのため、競合企業とのカラムの争奪が激しい。カラムの奪取によりカラムに装填する商品に変更が生じた場合、商品装填マスタも同じように変更しなければ、販売実績の管理を正確に行うことができない。そこで、カラムの調査を頻繁におこない、装填商品マスタの更新を迅速かつ的確に行う必要がある。
【0006】
しかしながら、自動販売機毎のカラムの調査は、調査員により人手で行われているため、多大な時間を必要とする。また、調査員は視認により商品と配置されているカラムを判断するため、誤認することが多々ある。商品装填マスタの入力ミスは、販売実績に誤差を生じる原因になってしまう。
【0007】
本発明は上記課題に鑑みてなされたものであり、その目的は、商品装填マスタを迅速に作成する技術、商品の販売管理を効率的に行う技術、商品ディスプレイにおける商品もしくは商品サンプルの配置状態を調査する技術、端末装置を所持する調査員に対して、配置状態の調査対象を指示する技術、収集した調査結果の信頼性を判断する技術、解析結果の品質を向上する技術の提供にある。
【0008】
【課題を解決するための手段】
本発明によれば、自動販売機から、当該自動販売機の各カラムのカラム番号と当該カラムに装填された商品の在庫量とを対応付けた在庫情報を収集して当該自動販売機に格納した商品毎の販売実績管理を行うために、調査対象の自動販売機の各カラムに装填された商品の情報を管理するシステムであって、
自動販売機の識別情報と当該自動販売機の外観画像とを対応付けた情報を保持する自販機情報データベースと、
商品毎に、当該商品の識別情報と当該商品の外観画像とを対応付けた情報を保持する商品情報データベースと、
調査対象の自動販売機の商品ディスプレイを撮影して得られた状態画像を含む調査データの入力を受け付ける調査データ入力部と、
前記調査対象の自動販売機の前記状態画像と前記自販機情報データベースに保持された前記外観画像とのマッチングにより、前記調査対象の自動販売機の識別情報を特定する自販機特定部と、
前記調査対象の自動販売機の前記状態画像に含まれる商品の画像部分を切り出して商品毎に抽出画像を生成し、各前記抽出画像毎にカラム番号を対応付けるカラム特定部と、
各前記抽出画像と前記商品情報データベースに保持された前記商品の画像とのマッチングにより、各抽出画像の商品の識別情報を特定する商品特定部と、
前記商品特定部が特定した前記商品の識別情報と当該商品の識別情報の前記抽出画像に対応付けられた前記カラム番号とを対応付けて保持する装填商品マスタを生成する商品マスタ生成
を備え、
前記自販機情報データベースは、前記自販機特定部が特定した前記調査対象の自動販売機の識別情報と、前記商品マスタ生成部が生成した前記装填商品マスタとを対応付けて記憶することを特徴とする販売管理システムに関する。これにより、装填商品マスタを状態画像に基づいて作成できるので、装填商品マスタの作成にかかる時間を短縮できる。
【0010】
本発明の販売管理システムにおいて、前記調査データは、前記状態画像に対応付けて、当該状態画像の撮影場所を特定する撮影地点位置情報を含むことができ、前記販売管理システムは、自動販売機の設置場所を特定する情報と当該設置場所に設置されている自動販売機の識別情報とを対応付けて保持する商店情報データベースをさらに含むことができ、前記自販機特定部は、前記調査データに含まれる前記撮影地点位置情報と前記商店情報データベースに保持された前記自動販売機の設置場所を特定する情報とに基づいて、前記撮影地点周辺に存在する自動販売機の識別情報を、前記調査対象の自動販売機の候補として出力する選択部と、前記調査対象の自動販売機の前記状態画像と前記選択部が出力した前記候補の前記自販機の識別情報に対応付けられた前記外観画像とのマッチングにより、前記調査対象の自動販売機の識別情報を特定する自販機識別部と、を含むことができる。これにより、撮影場所に基づいて自動販売機を絞り込み、更に状態画像に基づいて自動販売機を特定できる。
【0011】
本発明の販売管理システムにおいて、前記抽出画像の商品の識別情報を特定できない場合、前記商品特定部は、商品を特定できないことを示す未特定フラグとカラム番号とを対応付けて前記商品マスタ生成部に供給することができ、前記商品マスタ生成部は、前記未特定フラグと前記カラム番号とを対応付けて分析結果ファイル格納部に記憶することができる。
【0013】
前記商品マスタ生成は、新しく生成した装填商品マスタに基づいて既に存在する前記装填商品マスタを更新する更新部を更に備えてもよい。これにより、装填商品マスタを迅速に更新できる。
【0014】
前記更新部は、既に存在する装填商品マスタと新しく生成した装填商品マスタとを比較して、装填商品が変更されたカラムの有無を検出する検出部と、装填商品が変更されたカラムについて装填商品マスタの更新を行う書込部とを有してもよい。これにより、装填商品マスタの効率的な更新が可能である。
【0016】
本発明の販売管理システムにおいて、前記商品マスタ生成部が生成した前記装填商品マスタを自動販売機毎にファイル名を有するファイルとして格納する格納部をさらに含むことができ、前記自販機情報データベースは、前記自販機特定部が特定した前記調査対象の自動販売機の識別情報と、前記格納部に格納された当該自動販売機の前記装填商品マスタの前記ファイルのファイル名とを対応付けて記憶することができる。
【0017】
なお、以上の構成要素の任意の組合せ、本発明の表現を方法、装置、システム、記録媒体、コンピュータプログラムなどの間で変換したものもまた、本発明の態様として有効である。
【0018】
【発明の実施の形態】
<第1の実施形態>
図1は、第1の実施形態に係る販売管理システム800の構成図である。自動販売機管理装置802は、第1自動販売機502aおよび第2自動販売機502b(以下、単に「自動販売機502」という)から例えば、オンライン、オフライン、またはハンディー・ターミナルなどを介して在庫情報を収集する。自動販売機管理装置802は、ネットワーク804を介して、収集した在庫情報をデータ収集サーバ806に出力する。データ収集サーバ806は、収集した在庫情報を在庫情報データベース808に格納する。一般に自動販売機管理装置802は、データ収集サーバ806へのアクセス集中を避けるために設けられており、例えば所定のエリアや自動販売機の所定の台数毎に設けられる。他の例では、自動販売機管理装置802は設けず、自動販売機502から在庫情報が、データ収集サーバ806に直接出力されてもよい。
【0019】
販売実績解析装置810は、在庫情報データベース808と装填商品マスタ格納部812とに基づいて、商品毎の在庫量を販売実績データベース814に格納する。また、販売実績解析装置810は、販売実績に基づいて、例えば販売予測や装填計画を作成する。装填商品マスタ生成システム500は、自動販売機毎に装填商品マスタを生成して装填商品マスタ格納部812に格納する。「装填商品マスタ」は、自動販売機におけるカラムとそのカラムに装填されている商品の、例えば商品名や商品コードなどの情報を対応付けて保持する。装填商品マスタ生成システム500は、撮影装置504により撮影された自動販売機の画像に基づいて商品装填マスタを生成する商品マスタ生成装置600を備える。
【0020】
図2は、図1の販売管理システム800における処理のフローチャートの一例である。販売管理システム800では、まず撮影装置504が調査対象となる自動販売機、すなわち装填商品マスタの生成対象となる自動販売機の商品ディスプレイを撮影する(S800)。また、撮影装置504は撮影により得られた画像に、例えば撮影時の位置情報などを付加し(S802)、それらを図1の商品マスタ生成装置600に送信する(S804)。この撮影装置504から商品マスタ生成装置600に供給される情報を、以下「調査結果」といい、調査結果に含まれる自動販売機の画像を「状態画像」という。撮影装置504は、例えば撮影機能付きの携帯電話、PDAなどの携帯端末であってよい。そして、商品マスタ生成装置600は、撮影装置504から調査結果を収集する(S806)。
【0021】
そして、商品マスタ生成装置600は、調査結果から状態画像を抽出する(S808)。次に、商品マスタ生成装置600は、状態画像に基づいて、自動販売機を特定し、自動販売機の識別情報を把握する(S809)。そして、商品マスタ生成装置600は、状態画像における自動販売機のカラムの配置を判定し(S810)、カラム毎の商品を識別する(S812)。そして、商品マスタ生成装置600は、カラム番号と商品とを対応付けて装填商品マスタを生成する(S814)。そして、商品マスタ生成装置600は生成した装填商品マスタを装填商品マスタ格納部812に格納する(S815)。図1の販売実績解析装置810は、図1の在庫情報データベース808に保持されている在庫情報と装填商品マスタ格納部812に保持されている装填商品マスタとに基づいて商品毎の販売実績を確定し、販売実績データベース814に格納する(S816)。そして、販売実績解析装置810は、販売実績に基づいて各種の解析を行う(S818)。また、装填商品マスタ格納部812に保持される装填商品マスタは、例えば営業マンがカラム確保のために自動販売機のオーナーと商談する際の資料として利用される(S820)。このように、一連の販売管理作業において自動化が可能になる。
【0022】
図3は、第1の実施形態に係る装填商品マスタ生成システム500の概要を説明するための図である。調査員Aは、撮影装置504を利用して、調査対象となる自動販売機502を撮影する。商品マスタ生成装置600は、撮影装置504により得られた状態画像を含む調査データ506の入力を受け付ける。商品マスタ生成装置600は、受け付けた状態画像に所定の画像処理を施して、自動販売機502の商品ディスプレイ522における商品または商品サンプル(以下、単に「商品」という)の配置状態を判断し、自動販売機502における商品構成を把握する。商品マスタ生成装置600は、こうして得られた商品の配置状態に基づいて、カラム毎に装填されている商品の情報を装填商品マスタ508として出力する。装填商品マスタ508は、カラム番号を保持するカラムID欄510と、そのカラムに装填された商品の例えば商品名や商品コードを保持する商品名欄512とを含む。装填商品マスタ生成システム500の調査対象は、自動販売機502の商品ディスプレイ522でもよいし、例えばコンビニエンスストアのレジ裏に配置されている什器における一般にフェースと呼ばれている商品展示枠、コンビニエンスストアやスーパーなどの冷蔵庫内などの商品毎に陳列スペースが区分けされている商品展示スペースであってもよい。また、通常の商品棚など予め仕切りが設けられていない商品展示スペースであってもよい。また、商品は、食品、飲料、たばこ、ゲームソフトなどであってよい。以下、自動販売機502の商品ディスプレイ522における商品の商品構成調査を例に本実施形態を説明する。
【0023】
図4は、図3の自動販売機502を撮影して得られた状態画像520の一例を示す図である。商品ディスプレイ522には、第1商品524a、第2商品524b、第3商品524c、第4商品524d、第5商品524e、第6商品524f、および第7商品524g(以下、それぞれの商品を単に「商品524」という)が並んでいる。投入口526は、金銭を投入する部分である。釣銭取出口528は、釣銭の取り出し口である。商品取出口530は商品の取り出し口である。
【0024】
図5は、図3の調査データ506に含まれるデータの一例を示す図である。調査データ506は、位置情報540、撮影日時542、および画像データ544を有する。位置情報540は、撮影場所を特定する情報(以下、単に「撮影地点位置情報」という)である。この撮影地点位置情報は、例えば「○○商店」などの撮影地点の名称、住所、GPS(Global Positioning System)により得られた緯度、経度、高度の情報であってもよい。要は、撮影地点位置情報は、撮影場所をある程度の範囲まで狭めて特定することができればよい。撮影日時542は、撮影日時である。画像データ544は、図3の自動販売機502を撮影することにより得られた状態画像のデータである。この調査データ506が、例えば記録媒体に記録されたり、ネットワークを介したりして商品マスタ生成装置600に供給される。
【0025】
図6は、図3の商品マスタ生成装置600の内部構成図である。商品マスタ生成装置600の各構成要素は、任意のコンピュータのCPU、メモリ、メモリにロードされた本図の構成要素を実現するプログラム、そのプログラムを格納するハードディスクなどの記憶ユニット、ネットワーク接続用インターフェースを中心にハードウエアとソフトウエアの任意の組み合わせによって実現されるが、その実現方法、装置にはいろいろな変形例があることは、当業者には理解されるところである。以下説明する各図は、ハードウエア単位の構成ではなく、機能単位のブロックを示している。
【0026】
調査データ入力部604は、例えば記録媒体602やネットワーク601から図3の調査データ506(以下、符号は付けず単に「調査データ」という)の入力を受け付ける。分析部606は、調査データとデータ格納部616に保持されるデータとに基づいて、図3の商品ディスプレイ522に並ぶ商品を識別するとともに、商品毎にカラムを特定する。そして、分析部606は、図3の装填商品マスタ508(以下、符号は付けず単に「装填商品マスタ」という)を作成する。データ格納部616は、自動販売機毎の情報を保持する自販機情報データベース617と、自動販売機の機種毎の情報を保持する機種情報データベース618と、自動販売機の設置されている商店に関する情報を保持する商店情報データベース620と、商品に関する情報を保持する商品情報データベース622と、分析結果すなわち装填商品マスタを保持する分析結果ファイル格納部624を有する。
【0027】
分析部606は、作成した装填商品マスタを分析結果ファイル格納部624に格納するとともに、装填商品マスタを作成したことを分析結果提供部608に通知する。以下、分析結果ファイル格納部624に保持されている装填商品マスタを、「準装填商品マスタ」といい、図1の装填商品マスタ格納部812に保持されている装填商品マスタを単に「装填商品マスタ」という。分析結果提供部608は、その通知を契機として分析結果ファイル格納部624から準装填商品マスタを読み込んで、例えば装填商品マスタ格納部812に保持されている装填商品マスタを更新したり、記録媒体603に記録したり、表示部610に表示したりする。
【0028】
図7は、分析結果提供部608の内部構成図である。媒体書込部664は、分析結果ファイル格納部624に保持されている準装填商品マスタや状態画像などを記録媒体603に記録する。表示処理部662は、分析結果ファイル格納部624に保持されている準装填商品マスタや状態画像などを表示部610に表示させる。更新部660は、分析結果ファイル格納部624に保持されている準装填商品マスタに基づいて、装填商品マスタ格納部812に保持されている装填商品マスタを更新する。
【0029】
図8は、更新部660の内部構成図である。検出部670は、分析結果ファイル格納部624に保持されている準装填商品マスタと装填商品マスタ格納部812に保持されている装填商品マスタとを比較して、カラムに格納されている商品の変更(以下、単に「カラム変更」という)の有無を検出する。更新指示部672は、管理者であるオペレータから装填商品マスタの更新指示を受け付ける。例えば、検出部670によりカラム変更が検出された場合に、更新指示部672は、カラムが変更されたことをオペレータに通知し、更新するか否かの指示をオペレータから受け付ける。そして、更新の指示を受け付けた場合、更新指示部672は、書込部674に装填商品マスタの更新を指示する。書込部674は、検出部670から商品の変更のあったカラムのカラム番号と商品情報とを受け付け、装填商品マスタ格納部812の装填商品マスタを書き換える。これにより、カラム変更を検出した時点で、即座に装填商品マスタが更新される。
【0030】
図6に戻り、本実施の形態では、分析部606は、状態画像に基づいて自動販売機に装填されている商品およびその商品のカラムを特定する。このため、状態画像の画質などの影響により、状態画像に含まれる個々の商品を特定できない場合がある。こうした場合に、通知部612は、その旨を表示部610に表示させる。オペレータは、こうした通知が表示部610に表示された場合、例えば図4の状態画像520を表示部610に表示させ、個々の商品を自ら判断し、装填商品マスタを完成する。操作部626は、例えば、キーボード、マウスなどのオペレータの操作を受け付けるデバイスである。修正部614は、操作部626からの指示に基づいて分析結果ファイル格納部624に保持されている装填商品マスタに修正を加える。
【0031】
図9は、図6の分析部606の内部構成図である。自販機特定部635は、調査データ入力部604から供給された調査データに基づいて、状態画像として撮影された自動販売機、すなわち調査対象である自動販売機を特定する。自販機特定部635は、分離部630、選択部632、および自販機識別部634を有する。分離部630は、調査データ入力部604から調査データを受け付け、調査データに含まれる情報を分離する。本実施形態では、分離部630は、調査データを撮影地点位置情報と状態画像とに分離し、撮影地点位置情報を選択部632に供給し、状態画像を自販機識別部634に供給する。
【0032】
選択部632は、商店情報データベース620に保持されているデータと撮影地点位置情報とに基づいて、その調査地点周辺に存在する自動販売機を識別するための情報(以下、単に「自販機ID」という)を、調査対象の自動販売機の候補として出力する。自販機識別部634は、分離部630から供給された状態画像と、選択部632から供給された候補の外観の画像(以下、単に「外観画像」という)とから調査対象である自動販売機を特定する。これにより、同一の地点に複数台の自動販売機が設置されている場合でも、状態画像に基づいて調査対象の自動販売機を特定できる。
【0033】
自販機識別部634は、特定した自動販売機の自販機IDをカラム特定部636に供給する。ここで、自販機識別部634は、自動販売機を特定できた場合に、自販機IDをカラム特定部636に出力し、自動販売機を特定できない場合、自販機識別部634は、例えばオペレータから自販機IDの入力を受け付ける。すなわち、自販機特定部635は、撮影地点位置情報に基づいて自動販売機を絞り込み、次いで状態画像と候補として選択された自動販売機の外観画像とに基づいて自動販売機を特定する。
【0034】
カラム特定部636は、状態画像に含まれる商品の画像部分を切り出し、商品毎に抽出画像を生成する。そして、カラム特定部636は、抽出画像ごとにカラム番号を対応付けて商品特定部640に供給する。つまり、カラム特定部636は、一枚の状態画像から、個々の商品が含まれている領域を抽出画像として切り出す。例えば、12カラムの自動販売機を撮影して得られた状態画像から、カラム特定部636は、12枚の抽出画像を切り出す。この処理は、一般的に利用されている画像処理技術を利用すればよく、例えば状態画像に2値化処理を施した後、エッジ検出処理を施す。次に、矩形として認識できる部分を商品の領域として判定する。そして、矩形と認識した部分を含む領域を状態画像から切り出し抽出画像とする。また、カラム特定部636は、矩形として認識した部分に、例えば状態画像に向かって左から順にカラム番号を割り振る。
【0035】
商品特定部640は、商品情報データベース622に保持される商品の外観の画像(以下、単に「商品画像」という)との一致の度合いを判定することにより商品を特定する。この判定処理を、以下「マッチング」という。このマッチング処理には、一般的に利用されている画像処理技術を利用すればよく、例えば画像の伸縮処理、色分布の比較処理、二値化処理、エッジ検出処理、商品画像に印刷されている文字の認識処理などを組み合わせて一致度を判定する。そして商品特定部640は、商品名や商品コードなどの商品を特定する情報(以下、単に「商品情報」という)とカラム番号とを対応付けて商品マスタ生成部642に供給する。商品マスタ生成部642は、商品特定部640から供給されるカラム番号と商品情報とを対応付けて装填商品マスタを作成する。商品マスタ生成部642は、作成した装填商品マスタを準装填商品マスタとして分析結果ファイル格納部624に格納する。
【0036】
図10は、図6の機種情報データベース618のデータ構造の一例を示す図である。機種ID欄700は、自動販売機の機種IDを保持する。画像ファイル名欄702は、自動販売機の外観画像のファイル名を保持する。画像ファイル名欄702は、単一の自販機毎に、例えば正面、側面など複数の方向から撮影した複数の外観画像のファイル名を保持してもよい。カラム数欄704はカラムの数を保持する。外観画像は、機種情報データベース618に保持される。この他、機種情報データベース618は、自動販売機の製造メーカ、製造年代、外形寸法、販売商品種類などのデータを有してもよい。
【0037】
図11は、図6の商品情報データベース622のデータ構造の一例を示す図である。商品ID欄710は、商品を特定する情報(以下、単に「商品ID」という)を保持する。商品名欄712は、商品名を保持する。商品画像ファイル名欄714は、商品画像のファイル名を保持する。商品画像ファイル名欄714は、単一の商品毎に、例えば正面、側面など複数の方向から撮影した複数の商品画像のファイル名を保持してもよい。販売期間欄716は、商品の販売期間を保持する。図9の商品特定部640は、この期間を利用して商品の候補を絞り込んでもよい。例えば、商品特定部640は、状態画像の撮影日時が販売期間に含まれている商品を抽出し、抽出した商品をマッチングの対象としてもよい。これにより、マッチングを効率的に行うことができるとともに、マッチングの精度を向上できる。商品画像は、商品情報データベース622に保持される。
【0038】
図12は、図6の商店情報データベース620のデータ構造の一例を示す図である。設置場所コード欄720は、自動販売機の設置場所を特定する情報(以下、単に「設置場所コード」という)を保持する。設置場所名称欄722は、例えば商店の名称、ビルの名称などの設置場所を示す名称を保持する。位置情報欄724は、設置場所の位置情報を保持する。本図では、位置情報として緯度、経度、および高度を保持する。自販機ID欄726は、その場所に設置されている自動販売機の自販機IDを保持する。例えば、設置場所コード「S105」の「○○商店」には、自販機ID「3612」と「3613」の2台の自動販売機が設置されていることがわかる。図9の選択部632は、撮影地点位置情報に基づいて、その調査地点周辺に存在する自動販売機を、商店情報データベース620を参照して探索し、探索した商店に設置されている自動販売機の自販機IDを図9の自販機識別部634に出力する。
【0039】
図13は、自販機情報データベース617のデータ構造の一例を示す図である。自販機ID欄730は、自販機IDを保持する。機種ID欄732は、機種IDを保持する。これにより、機種IDに基づいて図10の機種情報データベース618を参照することで、外観画像やカラム数などを把握できる。設置場所コード欄734は、設置場所コードを保持する。他の例では、位置情報を保持してもよい。装填商品マスタファイル名欄736は、図1の装填商品マスタ格納部812に保持された装填商品マスタのファイル名を保持する。図8の更新部660は、このファイル名で特定される装填商品マスタの更新を行う。マスタ更新日欄738は、マスタファイルを更新した日時を保持する。
【0040】
外観画像ファイル名欄740は、直近に撮影された状態画像のファイル名を保持する。図9の自販機識別部634は、この外観画像ファイル名欄740に保持されたファイル名で特定される状態画像を外観画像として利用してもよい。一般に、自動販売機にはPOP広告が貼り付けられている。このため予め用意されている機種毎の外観画像を用いてマッチングを行うと、そのPOP広告がノイズとなり正しい判定を行うことが出来ないことがある。そこで、自販機識別部634は、前回の調査で利用した状態画像を、マッチングを行う際の外観画像として利用する。自販機識別部634は、自動販売機を特定した際に、状態画像のファイル名を外観画像ファイル名欄740に書き込む。
【0041】
図14は、図6の商品マスタ生成装置600における処理のフローチャートの一例を示す。まず、図6の調査データ入力部604は、調査データを受け付ける(S500)。図9の自販機特定部635は、調査データに基づいて自動販売機を特定する(S502)。
【0042】
図15は、図14のステップ502における処理の詳細なフローチャートの一例を示す。まず、図9の選択部632は、図9の分離部630から供給された位置情報で特定される位置の周辺に存在する自動販売機の自販機IDを商店情報データベース620から抽出する(S522)。そして、自販機識別部634は、抽出された自販機IDで特定される自動販売機の外観画像と、状態画像に含まれる自動販売機とのマッチングを行う(S524)。そして、そのマッチングにより、自動販売機を特定できた場合(S526のY)、自販機識別部634は、その自動販売機の自販機IDをカラム特定部636に出力する(S530)。また、ステップ526で、自動販売機を特定できない場合(S526のN)、自販機識別部634は、オペレータから自販機IDを受け付ける(S532)。このように、位置情報に基づいて、自動販売機の候補を絞り込むことで、マッチング処理にかかる時間を短縮できるとともに、マッチング精度を高めることができる。
【0043】
図14に戻り、図9のカラム特定部636は、状態画像に含まれる商品の画像部分を切り出し、商品毎に抽出画像を生成する(S506)。次に、図9の商品特定部640は、抽出画像に含まれる商品を個々に特定する(S510)。そして、全ての商品を特定できた場合(S512のN)、商品特定部640は、その商品の商品情報とカラム番号とを図9の商品マスタ作成部642に供給する。そして、商品マスタ作成部642は、それらを対応付けて準装填商品マスタを作成する(S516)。また、ステップ512で、特定出来ない商品がある場合(S512のY)、商品特定部640は、商品を特定できないことを示す未特定フラグとカラムIDとを装填商品マスタ作成部642に供給する(S514)。
【0044】
図16は、図14のステップ516における処理により、図6の分析結果ファイル格納部624に保持される準装填商品マスタのデータ構造の一例を示す図である。分析結果ファイル格納部624には、このような準装填商品マスタが、自動販売機毎に格納される。カラム番号欄510は、カラム番号を保持する。商品名欄512は、カラムに格納されている商品の商品情報を保持する。未特定フラグ欄514は、未特定フラグを保持する。本図で、「1」は商品の特定ができたことを示し、「0」は商品の特定ができなかったことを示す。未特定フラグとして「0」が保持されている場合に、図6の分析結果提供部608は、その旨を通知部612に通知させる。この通知に基づいてオペレータは準装填商品マスタの修正を行う。図7の更新部660は、この未特定フラグが全て「1」になった場合に、装填商品マスタの更新のための処理を開始してもよい。これにより、確実に装填商品マスタの更新を行うことができる。
【0045】
<第2の実施形態>
図17は、幅の広い大型の自動販売機502の外観と、それを撮影したときの第1状態画像520a、第2状態画像520b、および第3状態画像520cの関係を説明するための図である。このように、自動販売機502の外観を一枚の状態画像として撮影出来ない場合の処理について、第2の実施形態では説明する。
【0046】
図18は、自動販売機502の外観を複数の領域に分けて撮影した場合に、図3の調査データ506に含まれるデータの一例を示す図である。調査データ506は、位置情報540、撮影日時542、複数画像フラグ546、第1画像データ544a、第2画像データ544b、および第3画像データ544cを有する。本図は、自動販売機502を3つの領域に分けた場合の例である。複数画像フラグ546は、複数の状態画像が存在することを指定する情報を保持する。このフラグは、図3の撮影装置504によって自動的に付加されてもよいし、調査員Aの操作により付加されてもよい。第1画像データ544a、第2画像データ544b、および第3画像データ544cは、各状態画像のデータである。
【0047】
図19は、第2の実施形態における分析部650の内部構成図である。第2の実施形態おいて、既に説明した構成と同一の符号を付した構成は、その機能または動作が既に説明した構成と同一である。以下の説明では、既に説明した構成と異なる機能または動作を有する構成について主に説明する。分離部630は、図6の調査データ入力部604から、図3を用いて説明した調査データ506を受け付ける。分離部630は、その調査データから複数の状態画像を分離してそれぞれ画像供給部652に出力する。画像供給部652は、判定部654と合成部656とを有する。判定部654は、図18の複数画像フラグ546の有無に基づいて状態画像が複数存在するか否かを判定する。合成部656は、状態画像が複数存在する場合に、複数の状態画像を合成して、一枚の状態画像を生成する。そうして生成した状態画像を、画像供給部652は、自販機識別部634に供給する。合成部656における合成手法は色々と考えられるが、例えば図3の調査員Aは、重複部分を含むようにそれぞれの状態画像を撮影し、合成部656は、その重複部分を重ね合わせることで一枚の状態画像を生成してもよい。このような合成部656を備えることで、調査対象の大きさや、調査に利用する撮影装置504の性能などによらない柔軟な調査が可能である。
【0048】
<第3の実施形態>
第3の実施形態は、ネットワークを介して複数の調査員から調査データを収集して、装填商品マスタを生成するシステムである。第1の実施形態、および第2の実施形態で説明したとおり、装填商品マスタを生成するためには、単にマスタを生成する対象となる自動販売機の画像を撮影すればよいので、調査員に高度な技術を求めなくてもよい。このため、調査員としてアルバイトを採用することができる。また、カメラ、GPS、通信機能、プログラム実行機能などを備える携帯電話は広く普及している。このような携帯電話を有する人をアルバイトとして採用すれば、アルバイトが所持する携帯電話を調査用端末として利用できる。アルバイトを採用することにより、低いコストで多くの調査データを短期間に収集できる。また、例えば、調査員の自宅から通学先までの経路に設置されている自動販売機を日々撮影することを依頼しておけば、カラム変更に迅速に対応できる。また、同一の自動販売機の状態画像を複数の調査員から得ることもできるので、網羅的な調査が可能になり、不良データに対するバックアップも可能である。一方、多くの調査員すなわちアルバイトが集まると、彼らの意識の違いはまちまちであり、調査員の中には実際に調査地点まで赴き、自動販売機を撮影しない者もいることが予想される。このため、各調査員から収集した調査データの信頼性すなわち確かさの確保が重要になる。こうした点を解決する構成を備えたシステムについて以下説明する。
【0049】
図20は、第3の実施形態に係る装填商品マスタ生成システム10の構成図である。装填商品マスタ生成システム10は、図1の装填商品マスタ生成システム500の別の形態であり、置き換えることができる。第1端末装置200a、第2端末装置200b、第3端末装置200c、および第4端末装置200d(以下、単に「端末装置200」という)は、例えば、携帯電話やPDAなどの携帯可能な端末である。端末装置200は、例えばGPS衛星16からGPS信号を受信して位置情報を取得するGPS(Global Positioning System)ユニット、CCDカメラ、マイクなどを有する。また、それぞれの端末装置200は、基地局14を介してネットワーク12に接続し、商品マスタ生成装置100と通信を行う機能を有する。
【0050】
商品マスタ生成装置100は、調査内容を端末装置200の表示部202に表示させるための調査内容ファイルを、ネットワーク12を介して端末装置200に提供する。調査員は、表示部202に表示された調査内容に基づいて、例えば、指定された調査地点まで端末装置200を所持して移動し、その場で調査を行う。端末装置200は、その移動地点の位置情報(以下、単に「調査位置情報」という)を、GPSユニットを利用して取得する。その取得指示は、調査員の指示に基づいて行われてもよいし、端末装置200内部のプログラムにより自動的に行われてもよいし、その他外部からの信号に基づいて行われてもよい。調査員は、端末装置200のCCDカメラを利用して指定された対象物を撮影したり、調査内容に沿った事項を、例えばキーボタンなどの操作部204を利用して端末装置200に入力したりする。端末装置200は、調査員に入力された事項、画像、調査位置情報などを調査結果として商品マスタ生成装置100に送信する。商品マスタ生成装置100は、調査結果を収集して所定の解析を行う。このように、商品マスタ生成装置100は、複数の端末装置200から調査位置情報の対応付けられた調査結果を収集する。
【0051】
図21は、図20の表示部202に表示される調査内容表示画面320の一例を示す図である。調査内容表示画面320は、調査の概要を表示するための調査内容表示領域300と、詳細な調査項目を表示するための調査項目表示領域302と、調査結果を送信するための送信ボタン314と、調査内容の入力を中断するためのキャンセルボタン316とを有する。調査内容表示領域300には、調査地点の住所、名称等の調査地点に関する情報、調査対象、調査期間などの情報が表示される。例えば、調査地点に関する情報として、「○○商店」、「○○駅周辺」など調査対象となる地点や範囲が指定される。本実施形態では、第4ボタン318を押下することで、調査地点の詳細な住所や電話番号などが表示される。
【0052】
調査項目表示領域302には、調査における一連の作業が項目別(以下、単に「調査項目」という)に表示される。それぞれの調査項目には、入力内容に応じたコンポーネントが表示される。例えば、「項目1」は、GPSユニットを利用して調査位置情報を取得する作業を指示する項目である。この作業は、調査員が、第1ボタン304を押下することで自動的に行われる。本図の第1ボタン304には「取得済」と表示されているが、これは既に調査位置情報を取得している状態を示している。この第1ボタン304は、調査位置情報の取得前では「取得」と表示される。第2ボタン310および第3ボタン312は、CCDカメラを使って調査対象を撮影するためのボタンである。このボタンを押下することで撮影が行われる。調査対象を一枚の画像に含めることが出来ない場合、調査員は調査対象を複数枚の画像に分けて撮影する。例えば、複数回撮影した場合、図18を用いて説明した複数画像フラグ546が調査結果に自動的に付加される。
【0053】
「項目2」および「項目3」には、コンポーネントとしてラジオボタン306ならびにコンボボックス308が設けられている。このように、入力内容に応じたコンポーネントを予め用意しておくことで、調査員の入力ミスを減らすことができるので、調査結果の品質を端末装置200でも高めることができる。また、経験の浅い調査員でも、容易に操作することができる。調査員は、全ての調査項目の入力を終えて、送信ボタン314を押下する。これにより、調査結果が商品マスタ生成装置100に送信される。
【0054】
このような調査内容表示画面320を表示するための調査内容ファイルは、例えばjava(登録商標)などのプログラミング言語で作成されたプログラムであってよい。端末装置200は、そうしたプログラムを商品マスタ生成装置100から受信して実行することで調査内容表示画面320を表示部202に表示する。以下、こうして表示された調査内容表示画面320を「調査シート」といい、調査シートを表示するためのデータを「調査内容ファイル」という。
【0055】
図22は、図20の商品マスタ生成装置100の内部構成図である。調査内容登録部128は、調査内容ファイルを調査内容ファイル格納部102に格納し、調査結果の信頼性を判断する際に利用する情報(以下、単に「判断ファイル」という)を判断ファイル格納部126に格納する。提供部106は、図20の端末装置200から調査内容ファイルを要求された場合、その端末装置200を操作する調査員の認証を調査員情報データベース110に保持されたデータに基づいて認証を行う。例えば、その認証は、端末装置200ごとに割り当てられた識別情報(以下、単に「端末ID」という)に基づいて行う。そして、認証に成功した場合、提供部106は、調査内容ファイルの読み出しを読出部104に指示する。読出部104は、調査内容ファイル格納部102から調査内容ファイルを読み出して、提供部106に供給する。提供部106は、読出部104から供給された調査内容ファイルを端末装置200に送信する。こうして送信された調査内容ファイルに基づいて、図20の端末装置200の表示部202には、図21を用いて説明した調査内容表示画面320が表示される。また、提供部106は、調査内容ファイルを送信する度に、送信履歴をログ格納部108に格納する。
【0056】
図23は、図22のログ格納部108のデータ構造の一例を示す図である。シートID欄400は、調査内容ファイルを識別する情報、すなわち調査シートを識別する情報(以下、単に「シートID」という)を保持する。調査員ID欄402は、調査内容ファイルを送信した端末装置200の所有者である調査員を識別する情報(以下、単に「調査員ID」という)を保持する。提供日時欄404は、調査内容ファイルを送信した日時を保持する。開始日時欄405は、送信した調査内容ファイルに基づいて作成された調査結果の受け付けを開始する日時を保持する。期限日時欄406は、送信した調査内容ファイルに基づいて作成された調査結果を受け付ける期限を保持する。例えば、後述する図22の収集部114は、開始日時欄405および期限日時欄406に保持された日時で定まる期間(以下、単に「収集期間」という)内に限り、調査結果を受け付ける。受信フラグ欄408は、送信した調査内容ファイルに基づいて作成された調査結果を受信したか否かを示す情報(以下、単に「受信フラグ」という)を保持する。本図では「1」が、受信したことを意味し、「0」が受信していないことを意味する。この受信フラグは、図22の収集部114により書き込まれる。
【0057】
本図で、例えば、シートID「1051」の調査内容ファイルは、調査員IDが「36112」の調査員の端末装置200に、「2002年12月2日、13時15分」に送信されたことがわかる。また、この調査内容ファイルに基づいて作成された調査結果の収集期間は、「2002年12月1日、8時」から「2002年12月7日、20時」までであることがわかる。そして、受信フラグ欄408を参照することにより、商品マスタ生成装置100は、この調査内容ファイルに基づいて作成された調査結果を既に受信していることがわかる。
【0058】
図24は、図22の調査員情報データベース110のデータ構造の一例を示す図である。調査員ID欄410は、調査員IDを保持する。端末ID欄412は、調査員が所持する端末装置200の端末IDを保持する。電子メールアドレス欄414は、調査員の電子メールアドレスを保持する。調査員氏名欄416は、調査員の氏名を保持する。これらのデータの他、調査員情報データベース110は、調査員の住所、年齢、性別、嗜好などの調査員に関する各種の情報を保持してもよい。他の例では、図22の提供部106は、調査員の性別や嗜好などに応じた調査内容ファイルを選択的に送信してもよい。
【0059】
図22に戻り、通知部112は、図23の期限日時欄406に保持されたデータに基づいて調査結果の受け付け期限が近づいていることを通知する。その通知のタイミングは、予め設定されていてもよく、また調査内容ファイル毎に設定されてもよい。例えば、そのタイミングが期限から2日前に設定されている場合、通知部112は、図23の期限日時欄406を参照して、期限日時から2日前の調査内容ファイルをダウンロードした調査員の調査員IDを探索する。次に、その調査員IDに基づいて調査員情報データベース110を参照し、電子メールアドレスを読み出す。そして、通知部112は、その電子メールアドレス宛に通知を行う。また、通知部112は、図23の受信フラグ欄408を参照して、未だ調査結果を送信していない調査員に対してのみ、その通知を行ってもよい。これにより、調査員に対して調査結果の送信を促すことができる。また、予め収集すべき調査結果の数を設定しておき、その数に到達していない場合に、通知部112は通知を行ってもよい。これにより、商品マスタ生成装置100は、解析に必要な調査結果の数を確保できる。
【0060】
収集部114は、端末装置200から、例えばログ格納部108に設定された収集期間に限り、調査結果を収集して、調査結果格納部116に格納する。また、収集部114は、調査結果を受信したことをログ格納部108に書き込む。これにより、図23の受信フラグ欄408に受信フラグとして「1」が書き込まれる。調査結果格納部116は、調査結果として収集した例えばテキスト形式の調査結果ファイル、画像ファイル、映像ファイル、音声ファイルなどと、それらを管理するための管理テーブルを保持する。解析部130は、調査結果格納部116に格納された調査結果に基づいて所定の解析を行う。解析部130は、解析に利用する調査結果を選択する抽出部118と、選択された調査結果に基づいて分析を行う分析部120とを有する。
【0061】
図25は、調査結果格納部116に保持される調査結果ファイルのデータ構造の一例を示す図である。調査結果ファイルは、調査結果ごとにファイルに記録され、固有のファイル名が付加される。本図の調査結果ファイルのファイル名468は、「36112○○○.dat」である。この調査結果ファイルは、XML(eXtensible Markup Language)形式で、各調査項目の入力値(以下、単に「調査データ」という)を保持している。調査データは、調査結果開始タグ450aと調査結果終了タグ450bとで囲まれた範囲に記述される。このように、調査結果ファイルは、個々の調査データを開始タグと終了タグで挟み込んで保持する。このようなデータ構造を取ることにより、商品マスタ生成装置100は、複数の異なる調査内容を柔軟に取り扱うことができる。つまり、単一の商品マスタ生成装置100で、複数の調査内容を同時に取り扱うことができる。例えば、装填商品マスタを生成するための調査と、単にフェースや商品陳列棚に配置された商品のならびを把握するための調査とを同時に行うことができる。
【0062】
調査員ID欄452は、調査結果を提供した調査員の調査員IDを保持する。シートID欄454は、調査結果を作成する元となった調査シートのシートIDを保持する。調査日時欄456は、調査を行った日時を保持する。第1項目欄458、第2項目欄460、第3項目欄462、第4項目欄464、および第5項目欄466は、調査シートにおける調査項目ごとの調査データを保持する。本図の場合、それぞれの項目欄は、図21の調査項目ごとの調査データを保持する。例えば、第1項目欄458は、調査時の端末装置200の位置情報、すなわち調査位置情報を保持する。その位置情報は、例えば緯度、経度、高度などで表現される。第2項目欄460は、図21のラジオボタン306で選択された内容を保持する。第3項目欄462は、図21のコンボボックス308で選択された内容を保持する。第4項目欄464および第5項目欄466は、図21の項目4ならびに項目5で撮影された画像ファイルのファイル名を保持する。
【0063】
一般に図25を用いて説明したXML形式のデータ構造は、柔軟性に優れるがデータの検索などの処理には、予め固定のフィールドを有するテーブルを使った場合に比べて時間がかかってしまう。そこで、調査結果格納部116は、調査結果に含まれる調査データのうち、後段の処理で利用頻度の高いものをフィールドに含む管理テーブルを更に保持する。収集部114は、調査結果を受信すると、必要な調査データを管理テーブルに書き込む。
【0064】
図26は、調査結果格納部116に保持される管理テーブルのデータ構造の一例を示す図である。調査員ID欄420は、調査結果を提供した調査員の調査員IDを保持する。この調査員IDは、図25の調査員ID欄452に保持されたデータと同一である。シートID欄422は、調査結果を作成する元となった調査シートのシートIDを保持する。このシートIDは、図25のシートID欄454に保持されたデータと同一である。収集日時欄424は、図22の収集部114が調査結果を収集した日時を保持する。位置情報欄426は、調査位置情報を保持する。この調査位置情報は、図25の第1項目欄458に保持されたデータと同一である。調査日時欄428は、調査を行った日時を保持する。この日時は、図25の調査日時欄456に保持されたデータと同一である。結果ファイル名欄430は、調査結果ファイルのファイル名を保持する。図25のファイル名468が結果ファイル名欄430に保持される。これにより、この管理テーブルに基づいて図25の調査結果ファイルを参照できる、すなわちリレーションが張られる。
【0065】
信頼性欄432は、信頼性を示す情報(以下、単に「信頼値」という)を保持する。この信頼値は、後述する図22の判断部124により書き込まれる。本図で、「A」は信頼性が高いことを示し、「B」は、やや信頼性が高いことを示し、「C」は、信頼性が低いことを示す。他の例では、信頼値は数値で表現されてもよい。詳細は後述するが、図22の解析部130は、この信頼値に基づいて、信頼性の高い調査結果を優先的に抽出し、分析の対象とする。解析フラグ欄434は、解析に利用したか否かを示す情報(以下、単に「解析フラグ」という)を保持する。この解析フラグは、後述する図22の解析部130により書き込まれる。本図で、「1」は、解析に利用したことを示し、「0」は解析に利用していないことを示す。
【0066】
図22に戻り、判断部124は、判断ファイル格納部126に保持されている判断ファイルに基づいて、調査結果格納部116に保持されている調査結果の信頼性を個々に判断し、その判断結果である信頼値を図26の信頼性欄432に書き込む。
【0067】
図27は、判断ファイル格納部126のデータ構造の一例を示す図である。シートID欄470は、シートIDを保持する。信頼性判断データ項目欄472は、図22の判断部124において信頼性を判断する際に利用する調査項目(以下、単に「判断対象項目」という)を保持する。この判断対象項目の調査データを「判断データ」という。理想値欄474は、判断データの理想値、すなわち判断データがとるべき理想の値を保持する。例えば、図21を用いて説明した調査シートのように、「○○商店」に配置された自動販売機に関する調査の場合、この調査シートに基づいて撮影された自動販売機の画像などは、「○○商店」の所在地、すなわち理想値欄474に保持された理想値の近傍で撮影されるはずである。こうした観点から、図22の判断部124は、調査結果の信頼性を判断する。その判断に必要な情報が判断ファイル格納部126に保持される。本図では、シートID「1051」に基づいて作成された調査結果の信頼性の判断に用いる判断対象項目は、図25の第1項目欄458に保持されたデータ、すなわち調査位置情報であることが指定されている。そして、実調査地点情報としての理想値は、「○○商店」の位置情報であることがわかる。
【0068】
信頼値欄476は、理想値欄474に保持された理想値と、信頼性判断データ項目欄472に保持された判断データとの差分に応じて信頼値を決めるための情報を保持する。例えば、本実施の形態では、信頼値は「A」、「B」、および「C」の3段階で表現され、それぞれ範囲が設定されている。例えば、シートID「1051」において、信頼値「A」は、差分の範囲すなわち調査位置と商店位置との距離が「0m以上5m未満」に設定され、信頼値「B」は、差分の範囲が「5m以上15m未満」に設定され、信頼値「C」は、差分の範囲が「15m以上」に設定されている。図22の判断部124は、このような情報を利用して、調査結果格納部116に保持された個々の調査結果の信頼値を決める。
【0069】
図27の例では、判断対象項目として、調査位置情報を取り上げたが、他の例では、調査地点で撮影した画像、調査地点でサンプリングした音、調査時の時間、調査地点の気温、調査地点の湿度、調査地点の高度などの位置情報以外の外部環境情報を利用してもよい。また、これらの外部環境情報を組み合わせて、判断対象項目としてもよい。例えば、所定の地点における交通量を調査する場合、調査位置情報と調査時間とを判断対象項目として設定してもよい。また、判断対象項目に応じて、適宜、理想値欄474や信頼値欄476に保持される情報が設定される。
【0070】
図22に戻り、解析部130は、信頼性の高い調査結果に基づいて作成した装填商品マスタを出力部122に出力する。出力部122は、装填商品マスタを図1の装填商品マスタ格納部812に書き込む。受付部131は、オペレータからの指示を受け付ける。そして、受付部131はその指示を解析部130に供給する。例えば、この指示は、解析部130における装填商品マスタの修正などの指示であってよい。
【0071】
図28は、図22の解析部130の内部構成図である。本図で、既に説明した構成と同一の符号を付した構成は、その機能または動作が既に説明した構成と同一である。以下の説明では、既に説明した構成と異なる機能または動作を有する構成について主に説明する。抽出部118は、例えば収集期限が到達した場合に、調査結果格納部116から調査結果の解析に利用する調査結果を選択して、選択した調査結果を分析部606に提供する。抽出部118は、信頼値の高い調査結果を優先的に選択する。例えば、抽出部118は、同一の調査シートに関する調査結果が複数ある場合、信頼値の高い調査結果から順に選択する。これにより、信頼性の高い調査結果が積極的に解析対象として選択される。また、抽出部118は、信頼性が高く、調査日時の新しい調査結果を優先的に選択してもよい。抽出部118における抽出条件は、調査内容に応じて任意に設定できることが好ましい。
【0072】
分析部606は、図9を用いて説明した構成と同一の内部構成を保持し、抽出部118により抽出された調査結果に含まれる状態画像に基づいて、自動販売機の装填商品マスタを作成する。また、この分析部606を、図19を用いて説明した分析部650に置き換えてもよい。分析結果提供部608は、分析結果ファイル格納部624から装填商品マスタを読み込んで出力部122に供給する。また、分析結果提供部608は、重複して装填商品マスタが存在する場合に、重複した状態で装填商品マスタを提供するのではなく、単一の装填商品マスタだけを提供するように処理を行う。また、必要に応じて、分析結果提供部608は、重複した状態で装填商品マスタを提供してもよい。通知部612は、装填商品マスタに未特定フラグが対応付けられている場合に、オペレータに確認を要求するメッセージを出力部122に出力する。修正部614は、そのメッセージに応じて装填商品マスタの修正が指示された場合に、その指示に応じて装填商品マスタの修正を行う。
【0073】
図29は、図20の端末装置200の内部構成図である。受信部208は、商品マスタ生成装置100から調査内容ファイルを受信して、シートIDをシートID格納部232に格納し、調査内容ファイルを調査内容ファイル格納部210に格納する。制御部212は、調査内容ファイルに基づいて各構成を制御する。制御部212は例えば、調査内容ファイルに基づいて表示データを生成し、表示処理部206に出力する。表示処理部206は、その表示データに基づいて図21の調査内容表示画面320を表示部202に表示させる。操作部204は、例えばキーボタンなどであって、調査員からの調査データの入力を受け付け、制御部212に出力する。制御部212は、その調査データを、調査項目に対応付けて格納処理部236に供給する。また、制御部212は、調査日時取得部216に調査日時の取得を指示し、外部環境データ取得部218に外部環境データの取得を指示する。
【0074】
調査日時取得部216は、時計214から現在の日時を読み込んで格納処理部236に供給する。外部環境データ取得部218は、位置情報取得部220、撮影部222、マイク224を有する。他の例では、外部環境データ取得部218は、温度を測定する温度計、湿度を測定する湿度計、気圧を測定する気圧計などの各種センサを備えてもよい。位置情報取得部220は、例えばGPSユニットであり、制御部212から指示された時点における端末装置200の位置情報を取得する。そして、取得した位置情報を調査位置情報として格納処理部236に供給する。撮影部222は、例えばCCDカメラであり調査対象を撮影して、例えば静止画または動画などの画像データを格納処理部236に供給する。マイク224は、端末装置200の周囲の音をサンプリングして音声データを格納処理部236に供給する。
【0075】
格納処理部236は、制御部212、調査日時取得部216、外部環境データ取得部218からそれぞれ供給された調査データを、それぞれの調査項目に対応付けて調査データ格納部226に格納する。また、調査データとして撮影部222から複数枚の状態画像が供給された場合に、格納処理部236はそれを示す複数画像フラグを格納する。このフラグは、図18の複数画像フラグ546に該当する。結果ファイル生成部228は、例えば、図21の送信ボタン314が押下されたタイミングで、調査データ格納部226に保持された調査データと、シートID格納部232に保持されたシートIDとを読み込み、調査結果ファイルを生成する。送信部230は、生成された調査結果ファイルを商品マスタ生成装置100に送信する。受信部208および送信部230は、調査内容ファイルの受信および調査結果ファイルの送信の際に、認証のために端末ID格納部234に保持された端末IDを商品マスタ生成装置100に送信する。
【0076】
図30は、図20の商品マスタ生成装置100および端末装置200間の処理のシーケンスの一例を示す図である。まず、端末装置200は、商品マスタ生成装置100に調査内容ファイルを要求する(S10)。商品マスタ生成装置100は、調査内容ファイルを読み出し(S12)、端末装置200に送信する(S14)。次に、端末装置200は、調査内容ファイルに基づいて調査シートを表示する(S16)。次に、端末装置200は、調査シートに応じた調査データの入力を、調査員から受け付ける(S18)。また、端末装置200は、信頼性の判断に利用する判断データである、例えば位置情報などの外部環境情報を取得する(S20)。そして、端末装置200は、調査結果ファイルを生成し(S22)、商品マスタ生成装置100に送信する(S24)。
【0077】
商品マスタ生成装置100は、調査結果ファイルを図22の調査結果格納部116に格納する(S26)。そして、図22の判断部124は、調査結果の信頼性を判断する(S28)。例えば、調査結果の収集期限に到達したことを契機として、図22の抽出部118は、信頼性の高い調査結果を優先して選択する(S30)。図22の分析部120は、抽出部118に選択された調査結果に基づいて所定の解析、すなわち装填商品マスタの作成を行う(S32)。
【0078】
装填商品マスタ生成システム10は、例えば、実際に調査地点まで行かずに偽りの調査結果を送信するような調査員による不適切な調査結果を解析から排除することができる。また、そのような不正をする調査員を把握できるので、その調査員を注意することもでき、不適切な調査結果の送信を抑止する効果もある。
【0079】
以上、本発明を実施の形態をもとに説明した。実施の形態は例示であり、それらの各構成要素や各処理プロセスの組合せにいろいろな変形例が可能なこと、またそうした変形例も本発明の範囲にあることは当業者に理解されるところである。
【0080】
第1の変形例は、図6の分析結果提供部608に関する。分析結果提供部608は、同一の自動販売機に関する装填商品マスタが複数存在する場合に、例えば画質が最もよい状態画像を利用して作成した装填商品マスタを選択して表示部610に表示してもよいし、状態画像の撮影日時が最も新しいもの選択して表示部610に表示してもよい。要は、分析結果提供部608は、重複して装填商品マスタが存在する場合に、重複した状態で装填商品マスタを提供するのではなく、単一の装填商品マスタだけを提供するように処理を行う。また、必要に応じて、分析結果提供部608は、重複した状態で装填商品マスタを提供してもよい。オペレータは、表示部610に表示された装填商品マスタを参照して、マーケティング戦略を建てる際の資料などに利用する。
【0081】
【発明の効果】
本発明によれば、状態画像に基づいて、商品装填マスタを生成することができる。商品ディスプレイにおける商品サンプルの配置状態を調査できる。複数の端末装置から調査結果を収集できる。また、信頼性の高い調査結果に基づいて、解析を行うことができる。
【図面の簡単な説明】
【図1】第1の実施形態に係る販売管理システムの構成図である。
【図2】図1の販売管理システムおける処理のフローチャート一例である。
【図3】図1の装填商品マスタ生成システムの概要を説明するための図である。
【図4】図3の撮影装置により撮影された状態画像の一例を示す図である。
【図5】図3の商品マスタ生成装置に入力する調査データに含まれるデータの一例を示す図である。
【図6】図3の商品マスタ生成装置の内部構成図である。
【図7】図6の分析結果提供部の内部構成図である。
【図8】図7の更新部の内部構成図である。
【図9】図6の分析部の内部構成図である。
【図10】図6の機種情報データベースのデータ構造の一例を示す図である。
【図11】図6の商品情報データベースのデータ構造の一例を示す図である。
【図12】図6の商店情報データベースのデータ構造の一例を示す図である。
【図13】図6の自販機情報データベースのデータ構造の一例を示す図である。
【図14】図6の商品マスタ生成装置における処理のフローチャートの一例である。
【図15】図14のステップ502における処理の詳細なフローチャートの一例である。
【図16】図14のステップ516における処理により、図6の分析結果ファイル格納部に保持される解析中の自動販売機における装填商品マスタのデータ構造の一例を示す図である。
【図17】幅の広い大型の自動販売機の外観と、それを撮影したときの第1状態画像、第2状態画像、および第3状態画像の関係を説明するための図である。
【図18】自動販売機の外観を複数の領域に分けて撮影した場合に、図3の調査データに含まれるデータの一例を示す図である。
【図19】第2の実施形態に係る分析部の内部構成図である。
【図20】第3の実施形態に係る装填商品マスタ生成システムの構成図である。
【図21】図20の端末装置の表示部に表示される調査内容表示画面の一例を示す図である。
【図22】図20の商品マスタ生成装置の内部構成図の一例を示す図である。
【図23】図22のログ格納部のデータ構造の一例を示す図である。
【図24】図22の調査員情報データベースのデータ構造の一例を示す図である。
【図25】図22の調査結果格納部に保持される調査結果ファイルのデータ構造の一例を示す図である。
【図26】図22の調査結果格納部に保持される管理テーブルのデータ構造の一例を示す図である。
【図27】図22の判断ファイル格納部に保持されるデータ構造の一例を示す図である。
【図28】図22の解析部の内部構成図である。
【図29】図20の端末装置の内部構成図の一例を示す図である。
【図30】図20の商品マスタ生成装置および端末装置における処理のシーケンスの一例を示す図である。
【符号の説明】
10 装填商品マスタ生成システム
12 ネットワーク
14 基地局
16 GPS衛星
100 商品マスタ生成装置
102 調査内容ファイル格納部
104 読出部
106 提供部
108 ログ格納部
110 調査員情報データベース
112 通知部
114 収集部
116 調査結果格納部
118 抽出部
120 分析部
122 出力部
124 判断部
126 判断ファイル格納部
128 調査内容登録部
130 解析部
131 受付部
200 端末装置
202 表示部
204 操作部
206 表示処理部
208 受信部
210 調査内容ファイル格納部
212 制御部
214 時計
216 調査日時取得部
218 外部環境データ取得部
220 位置情報取得部
222 撮影部
224 マイク
226 調査データ格納部
228 結果ファイル生成部
230 送信部
232 シートID格納部
234 端末ID格納部
236 格納処理部
500 装填商品マスタ生成システム
502 自動販売機
504 撮影装置
506 調査データ
508 装填商品マスタ
520 状態画像
600 商品マスタ生成装置
604 調査データ入力部
606 分析部
608 分析結果提供部
610 表示部
612 通知部
614 修正部
616 データ格納部
617 自販機情報データベース
618 機種情報データベース
620 商店情報データベース
622 商品情報データベース
624 分析結果ファイル格納部
626 操作部
630 分離部
632 選択部
634 自販機識別部
635 自販機特定部
636 カラム特定部
640 商品特定部
642 商品マスタ作成部
650 分析部
652 画像供給部
654 判定部
656 合成部
660 更新部
662 表示処理部
664 媒体書込部
670 検出部
672 更新指示部
674 書込部
[0001]
BACKGROUND OF THE INVENTION
The present invention relates to an information analysis technique, and more particularly to a technique for analyzing a product configuration of a product or a product sample on a product display based on an image.
[0002]
[Prior art]
With the development of network technology, contents such as text data, image data, audio data, and video data can be transmitted and received via a network. Such a function for transmitting and receiving content via a network is provided not only in a stationary terminal device such as a desktop computer but also in a portable terminal device such as a mobile phone and a PDA (Personal Digital Assistants). Terminal devices having such a network connection function are widely used, and the number thereof is enormous. There is a system for automating investigations that have been performed manually by using such portable terminal devices as information collecting means (Patent Document 1).
[0003]
[Patent Document 1]
Japanese Patent Laid-Open No. 10-143520
[0004]
[Problems to be solved by the invention]
Product manufacturer companies that practice the current vending machine strategy collect inventory information from vending machines every day and manage the sales performance of each product stored in the vending machine. The inventory information is information in which the inventory amount is associated with each column of the vending machine, that is, the column number and the inventory amount are associated with each other. The vending machine includes a hangar for each product, and a product sample displayed on the product display is associated with a hangar loaded with the product. This individual hangar is called a “column”. Since the inventory information associates this column with the inventory quantity, it is not possible to specify a product from the inventory information. Therefore, an apparatus for managing sales results manages the stock quantity for each product based on a product loading master that associates column numbers with products and inventory information. This merchandise loading master is manually created based on the result of the investigation of the column for each vending machine manually.
[0005]
In general, a single vending machine stores products of a plurality of companies. For companies, it is essential to secure an exhibition space in a product display, that is, secure a column in order to sell a product. As a result, column competition with competitors is fierce. If the product loaded into the column is changed due to the take-off of the column, the sales record cannot be accurately managed unless the product loading master is also changed in the same manner. Therefore, it is necessary to frequently investigate the column and update the loaded product master quickly and accurately.
[0006]
However, since the investigation of the column for each vending machine is performed manually by the investigator, a great deal of time is required. In addition, the investigator often misidentifies the column in order to determine the column in which the product and the product are arranged. An input mistake of the product loading master causes an error in the sales performance.
[0007]
The present invention has been made in view of the above problems, and its purpose is to quickly create a product loading master, a technology for efficiently managing the sales of products, and an arrangement state of products or product samples on a product display. The technology is to provide the technology to investigate, the technology to instruct the investigator who possesses the terminal device, the technology to instruct the subject of the arrangement status, the technology to judge the reliability of the collected survey results, and the technology to improve the quality of the analysis results.
[0008]
[Means for Solving the Problems]
  The present inventionAccording tovending machineTo collect inventory information that associates the column number of each column of the vending machine with the inventory amount of the product loaded in the column, and manages the sales results for each product stored in the vending machine Loaded into each column of the vending machine under investigation.CommodityManage informationIn the systemThere,
A vending machine information database that holds information in which the identification information of the vending machine is associated with the appearance image of the vending machine;
For each product, a product information database that holds information that associates the identification information of the product with the appearance image of the product,
SurveyedState image obtained by photographing the product display of the vending machineA survey data input unit that accepts input of survey data including
A vending machine specifying unit for identifying identification information of the vending machine to be investigated by matching the state image of the vending machine to be investigated and the appearance image held in the vending machine information database;
A column specifying unit that generates an extracted image for each product by cutting out an image part of the product included in the state image of the vending machine to be investigated, and associates a column number for each of the extracted images;
A product specifying unit that specifies product identification information of each extracted image by matching each extracted image and the product image stored in the product information database;
The product identification unit identified by the product identification unit and the column number associated with the extracted image of the product identification information are stored in association with each other.Product master generation to generate a loaded product masterPartWhen,
With
The vending machine information database stores the identification information of the vending machine to be surveyed specified by the vending machine specifying unit and the loaded product master generated by the product master generating unit in association with each other. Regarding the management system.Thereby, since the loaded product master can be created based on the state image, the time required for creating the loaded product master can be shortened.
[0010]
  In the sales management system of the present invention, the survey data can include shooting point position information that identifies the shooting location of the state image in association with the state image, and the sales management system includes a vending machine. It may further include a store information database that stores information for specifying the installation location and identification information of the vending machine installed at the installation location, and the vending machine specifying unit is included in the survey data Based on the shooting point position information and the information specifying the installation location of the vending machine held in the store information database, the identification information of the vending machines existing around the shooting point is obtained as the automatic inspection target. A selection unit that outputs as a candidate for a vending machine, the status image of the vending machine to be examined, and the identification information of the candidate vending machine that is output by the selection unit By matching with the associated said appearance image, a vending machine identification unit for identifying the identification information of the vending machine of the surveyed may include.ThisThe vending machines can be narrowed down based on the shooting location, and the vending machines can be identified based on the state image.
[0011]
  In the sales management system of the present invention, when the product identification information of the extracted image cannot be specified, the product specification unit associates an unspecified flag indicating that the product cannot be specified with a column number and the product master generation unit. The merchandise master generation unit can store the unspecified flag and the column number in association with each other in the analysis result file storage unit.
[0013]
  Product master generationPartMay further include an updating unit that updates the existing loaded product master based on the newly generated loaded product master. Thereby, the loaded product master can be updated quickly.
[0014]
The update unit compares a pre-existing loaded product master with a newly generated loaded product master to detect the presence or absence of a column in which the loaded product has been changed, and a loaded product for a column in which the loaded product has been changed. And a writing unit that updates the master. Thereby, an efficient update of the loaded product master is possible.
[0016]
  Of the present inventionIn the sales management system, the vending machine information database may further include a storage unit that stores the loaded product master generated by the product master generation unit as a file having a file name for each vending machine. Can be stored in association with the identification information of the vending machine to be surveyed specified by and the file name of the file of the loaded product master of the vending machine stored in the storage unit.
[0017]
It should be noted that any combination of the above-described constituent elements and a conversion of the expression of the present invention between a method, an apparatus, a system, a recording medium, a computer program, etc. are also effective as an aspect of the present invention.
[0018]
DETAILED DESCRIPTION OF THE INVENTION
<First Embodiment>
FIG. 1 is a configuration diagram of a sales management system 800 according to the first embodiment. The vending machine management apparatus 802 stores inventory information from the first vending machine 502a and the second vending machine 502b (hereinafter simply referred to as “vending machine 502”) via, for example, online, offline, or a handy terminal. To collect. The vending machine management apparatus 802 outputs the collected inventory information to the data collection server 806 via the network 804. The data collection server 806 stores the collected inventory information in the inventory information database 808. In general, the vending machine management apparatus 802 is provided to avoid concentration of access to the data collection server 806, and is provided, for example, for a predetermined area or for a predetermined number of vending machines. In another example, the vending machine management apparatus 802 may not be provided, and the inventory information may be directly output from the vending machine 502 to the data collection server 806.
[0019]
The sales performance analysis apparatus 810 stores the inventory amount for each product in the sales performance database 814 based on the inventory information database 808 and the loaded product master storage unit 812. In addition, the sales performance analysis apparatus 810 creates a sales prediction and a loading plan, for example, based on the sales performance. The loaded product master generation system 500 generates a loaded product master for each vending machine and stores it in the loaded product master storage unit 812. The “loaded product master” holds a column in the vending machine and information such as a product name and a product code of the product loaded in the column in association with each other. The loaded product master generation system 500 includes a product master generation device 600 that generates a product loading master based on an image of a vending machine photographed by the photographing device 504.
[0020]
FIG. 2 is an example of a flowchart of processing in the sales management system 800 of FIG. In the sales management system 800, first, the imaging device 504 images the product display of the vending machine to be investigated, that is, the vending machine to be the generation target of the loaded product master (S800). Further, the photographing device 504 adds position information at the time of photographing, for example, to the image obtained by photographing (S802), and transmits them to the product master generating device 600 of FIG. 1 (S804). The information supplied from the photographing device 504 to the product master generation device 600 is hereinafter referred to as “survey result”, and the image of the vending machine included in the survey result is referred to as “state image”. The photographing device 504 may be a portable terminal such as a mobile phone with a photographing function or a PDA, for example. Then, the product master generation device 600 collects the survey results from the imaging device 504 (S806).
[0021]
Then, the product master generation device 600 extracts a state image from the survey result (S808). Next, the product master generation device 600 identifies the vending machine based on the state image and grasps the vending machine identification information (S809). Then, the product master generation device 600 determines the arrangement of the vending machine columns in the state image (S810), and identifies the product for each column (S812). Then, the product master generation device 600 generates a loaded product master by associating the column number with the product (S814). Then, the product master generation device 600 stores the generated loaded product master in the loaded product master storage unit 812 (S815). The sales performance analysis apparatus 810 in FIG. 1 determines the sales performance for each product based on the inventory information held in the inventory information database 808 in FIG. 1 and the loaded product master stored in the loaded product master storage unit 812. And stored in the sales record database 814 (S816). Then, the sales performance analysis device 810 performs various analyzes based on the sales performance (S818). Further, the loaded product master held in the loaded product master storage unit 812 is used, for example, as a material when a salesperson makes a business talk with the owner of the vending machine to secure a column (S820). In this way, automation is possible in a series of sales management operations.
[0022]
FIG. 3 is a diagram for explaining the outline of the loaded product master generation system 500 according to the first embodiment. The investigator A uses the photographing device 504 to photograph the vending machine 502 to be investigated. The product master generation device 600 accepts input of survey data 506 including a state image obtained by the imaging device 504. The product master generation device 600 performs predetermined image processing on the received state image, determines the arrangement state of products or product samples (hereinafter simply referred to as “products”) on the product display 522 of the vending machine 502, and automatically The product configuration in the vending machine 502 is grasped. The product master generation device 600 outputs, as the loaded product master 508, information on the product loaded for each column based on the product arrangement state thus obtained. The loaded product master 508 includes a column ID column 510 that holds a column number, and a product name column 512 that holds, for example, a product name and a product code of a product loaded in the column. The survey target of the loaded product master generation system 500 may be the product display 522 of the vending machine 502, for example, a product display frame generally called a face in a fixture placed behind a cash register of a convenience store, a convenience store, It may be a product display space in which a display space is divided for each product such as in a refrigerator such as a supermarket. Further, it may be a product display space that is not provided with a partition in advance, such as a normal product shelf. The product may be food, beverage, tobacco, game software, or the like. Hereinafter, the present embodiment will be described by taking as an example a product configuration survey of products on the product display 522 of the vending machine 502.
[0023]
FIG. 4 is a diagram showing an example of a state image 520 obtained by photographing the vending machine 502 of FIG. The product display 522 includes a first product 524a, a second product 524b, a third product 524c, a fourth product 524d, a fifth product 524e, a sixth product 524f, and a seventh product 524g (hereinafter, each product is simply referred to as “ Product 524 "). The insertion port 526 is a portion for inputting money. The change outlet 528 is a change outlet. The product outlet 530 is a product outlet.
[0024]
FIG. 5 is a diagram illustrating an example of data included in the survey data 506 of FIG. The survey data 506 includes position information 540, shooting date / time 542, and image data 544. The position information 540 is information for specifying a shooting location (hereinafter simply referred to as “shooting point position information”). This shooting point position information may be, for example, the name, address, and latitude, longitude, and altitude information obtained by GPS (Global Positioning System), such as “XX store”. In short, the shooting location position information only needs to be able to be specified by narrowing the shooting location to some extent. The shooting date and time 542 is a shooting date and time. The image data 544 is state image data obtained by photographing the vending machine 502 of FIG. The survey data 506 is recorded on a recording medium or supplied to the product master generation device 600 via a network, for example.
[0025]
FIG. 6 is an internal configuration diagram of the product master generation device 600 of FIG. Each component of the product master generation device 600 includes a CPU, a memory of a computer, a program that realizes the components of this figure loaded in the memory, a storage unit such as a hard disk that stores the program, and a network connection interface. Although it is mainly realized by an arbitrary combination of hardware and software, it will be understood by those skilled in the art that there are various modifications in the implementation method and apparatus. Each drawing described below shows a functional unit block, not a hardware unit configuration.
[0026]
The survey data input unit 604 accepts input of survey data 506 in FIG. 3 (hereinafter simply referred to as “survey data” without reference numerals) from, for example, the recording medium 602 or the network 601. The analysis unit 606 identifies the products lined up on the product display 522 of FIG. 3 based on the survey data and the data stored in the data storage unit 616, and specifies a column for each product. Then, the analysis unit 606 creates the loaded product master 508 in FIG. 3 (hereinafter simply referred to as “loaded product master” without reference numerals). The data storage unit 616 includes a vending machine information database 617 that holds information for each vending machine, a model information database 618 that holds information for each model of the vending machine, and information about a store where the vending machine is installed. It has a store information database 620 for holding, a product information database 622 for holding information about products, and an analysis result file storage unit 624 for holding analysis results, that is, loaded product masters.
[0027]
The analysis unit 606 stores the created loaded product master in the analysis result file storage unit 624 and notifies the analysis result providing unit 608 that the loaded product master has been created. Hereinafter, the loaded product master held in the analysis result file storage unit 624 is referred to as a “semi-loaded product master”, and the loaded product master held in the loaded product master storage unit 812 in FIG. " In response to the notification, the analysis result providing unit 608 reads the semi-loaded product master from the analysis result file storage unit 624 and updates, for example, the loaded product master held in the loaded product master storage unit 812 or the recording medium 603. Or displayed on the display unit 610.
[0028]
FIG. 7 is an internal configuration diagram of the analysis result providing unit 608. The medium writing unit 664 records the semi-loaded product master and the state image held in the analysis result file storage unit 624 on the recording medium 603. The display processing unit 662 causes the display unit 610 to display the semi-loaded product master, the state image, and the like held in the analysis result file storage unit 624. The update unit 660 updates the loaded product master held in the loaded product master storage unit 812 based on the semi-loaded product master held in the analysis result file storage unit 624.
[0029]
FIG. 8 is an internal configuration diagram of the update unit 660. The detecting unit 670 compares the semi-loaded product master held in the analysis result file storage unit 624 with the loaded product master held in the loaded product master storage unit 812, and changes the product stored in the column. (Hereinafter simply referred to as “column change”) is detected. The update instruction unit 672 receives an instruction to update the loaded product master from an operator who is a manager. For example, when a column change is detected by the detection unit 670, the update instruction unit 672 notifies the operator that the column has been changed, and receives an instruction from the operator as to whether or not to update. When an update instruction is received, the update instruction unit 672 instructs the writing unit 674 to update the loaded product master. The writing unit 674 receives the column number of the column in which the product has been changed and the product information from the detection unit 670, and rewrites the loaded product master in the loaded product master storage unit 812. Thereby, when the column change is detected, the loaded product master is immediately updated.
[0030]
Returning to FIG. 6, in the present embodiment, the analysis unit 606 identifies the product loaded in the vending machine and the column of the product based on the state image. For this reason, there are cases where individual products included in the state image cannot be specified due to the influence of the image quality of the state image. In such a case, the notification unit 612 displays that fact on the display unit 610. When such a notification is displayed on the display unit 610, for example, the operator displays the status image 520 of FIG. 4 on the display unit 610, determines each product, and completes the loaded product master. The operation unit 626 is a device that receives an operation of an operator such as a keyboard and a mouse. The correction unit 614 corrects the loaded product master held in the analysis result file storage unit 624 based on an instruction from the operation unit 626.
[0031]
FIG. 9 is an internal block diagram of the analysis unit 606 of FIG. Based on the survey data supplied from the survey data input unit 604, the vending machine identifying unit 635 identifies the vending machine photographed as the state image, that is, the vending machine that is the subject of the survey. The vending machine specifying unit 635 includes a separation unit 630, a selection unit 632, and a vending machine identification unit 634. The separating unit 630 receives survey data from the survey data input unit 604 and separates information included in the survey data. In the present embodiment, the separation unit 630 separates the survey data into shooting point position information and a state image, supplies the shooting point position information to the selection unit 632, and supplies the state image to the vending machine identification unit 634.
[0032]
Based on the data held in the store information database 620 and the shooting location information, the selection unit 632 identifies information (hereinafter simply referred to as “vending machine ID”) for identifying vending machines existing around the survey location. ) As a candidate for the vending machine to be surveyed. The vending machine identification unit 634 identifies the vending machine to be investigated from the state image supplied from the separation unit 630 and the candidate appearance image supplied from the selection unit 632 (hereinafter simply referred to as “appearance image”). To do. Thereby, even when a plurality of vending machines are installed at the same point, the vending machine to be investigated can be specified based on the state image.
[0033]
The vending machine identification unit 634 supplies the vending machine ID of the specified vending machine to the column specifying unit 636. Here, when the vending machine identifying unit 634 can identify the vending machine, the vending machine ID is output to the column identifying unit 636, and when the vending machine cannot be identified, the vending machine identifying unit 634 receives the vending machine ID from the operator, for example. Accept input. That is, the vending machine specifying unit 635 narrows down the vending machines based on the shooting point position information, and then specifies the vending machines based on the state image and the appearance image of the vending machine selected as a candidate.
[0034]
The column specifying unit 636 cuts out the image portion of the product included in the state image, and generates an extracted image for each product. Then, the column specifying unit 636 associates the column number with each extracted image and supplies the column number to the product specifying unit 640. That is, the column specifying unit 636 cuts out an area including individual products as an extracted image from one state image. For example, the column specifying unit 636 cuts out 12 extracted images from a state image obtained by photographing a 12-column vending machine. For this process, a commonly used image processing technique may be used. For example, after the binarization process is performed on the state image, the edge detection process is performed. Next, a portion that can be recognized as a rectangle is determined as a product region. Then, an area including a portion recognized as a rectangle is cut out from the state image and is set as an extracted image. In addition, the column specifying unit 636 assigns column numbers to the part recognized as a rectangle, for example, in order from the left toward the state image.
[0035]
The product specifying unit 640 specifies the product by determining the degree of coincidence with the appearance image of the product held in the product information database 622 (hereinafter simply referred to as “product image”). This determination process is hereinafter referred to as “matching”. For this matching processing, a commonly used image processing technique may be used. For example, image expansion / contraction processing, color distribution comparison processing, binarization processing, edge detection processing, and product images are printed. The degree of matching is determined by combining character recognition processing and the like. Then, the product identification unit 640 associates information for identifying a product such as a product name and a product code (hereinafter simply referred to as “product information”) and a column number, and supplies them to the product master generation unit 642. The product master generating unit 642 creates a loaded product master by associating the column number supplied from the product specifying unit 640 with the product information. The product master generation unit 642 stores the created loaded product master in the analysis result file storage unit 624 as a semi-loaded product master.
[0036]
FIG. 10 is a diagram showing an example of the data structure of the model information database 618 in FIG. The model ID column 700 holds the model ID of the vending machine. The image file name column 702 holds the file name of the appearance image of the vending machine. The image file name column 702 may hold, for each single vending machine, file names of a plurality of appearance images taken from a plurality of directions such as the front and the side. The column number column 704 holds the number of columns. The appearance image is held in the model information database 618. In addition, the model information database 618 may include data such as the manufacturer of the vending machine, the manufacturing age, the external dimensions, and the sales product type.
[0037]
FIG. 11 is a diagram illustrating an example of the data structure of the product information database 622 of FIG. The product ID column 710 holds information for specifying a product (hereinafter simply referred to as “product ID”). The product name column 712 holds a product name. The product image file name column 714 holds the file name of the product image. The product image file name column 714 may hold, for each single product, file names of a plurality of product images taken from a plurality of directions such as the front and side surfaces. The sales period column 716 holds the sales period of the product. The product specifying unit 640 of FIG. 9 may narrow down product candidates using this period. For example, the product specifying unit 640 may extract a product in which the shooting date and time of the state image is included in the sales period, and set the extracted product as a matching target. Thus, matching can be performed efficiently and matching accuracy can be improved. The product image is held in the product information database 622.
[0038]
FIG. 12 is a diagram showing an example of the data structure of the store information database 620 of FIG. The installation location code column 720 holds information for specifying the installation location of the vending machine (hereinafter simply referred to as “installation location code”). The installation location name column 722 holds a name indicating an installation location, such as a store name or a building name. The position information column 724 holds the position information of the installation location. In this figure, latitude, longitude, and altitude are held as position information. The vending machine ID column 726 holds the vending machine ID of the vending machine installed at the place. For example, it can be seen that two vending machines with vending machine IDs “3612” and “3613” are installed in “XX store” of the installation location code “S105”. The selection unit 632 in FIG. 9 searches for vending machines existing around the survey point based on the shooting point position information with reference to the store information database 620, and the vending machines installed in the searched store. Are output to the vending machine identification unit 634 shown in FIG.
[0039]
FIG. 13 is a diagram showing an example of the data structure of the vending machine information database 617. The vending machine ID column 730 holds a vending machine ID. The model ID column 732 holds a model ID. Thereby, by referring to the model information database 618 of FIG. 10 based on the model ID, it is possible to grasp the appearance image, the number of columns, and the like. The installation location code column 734 holds an installation location code. In another example, position information may be held. The loaded product master file name column 736 holds the file name of the loaded product master held in the loaded product master storage unit 812 of FIG. The update unit 660 in FIG. 8 updates the loaded product master specified by this file name. The master update date column 738 holds the date and time when the master file was updated.
[0040]
The appearance image file name column 740 holds the file name of the most recently captured state image. The vending machine identification unit 634 in FIG. 9 may use the state image specified by the file name held in the appearance image file name column 740 as the appearance image. Generally, a POP advertisement is pasted on a vending machine. For this reason, if matching is performed using an external appearance image for each model prepared in advance, the POP advertisement may become noise and cannot be correctly determined. Therefore, the vending machine identification unit 634 uses the state image used in the previous survey as an appearance image when performing matching. When the vending machine identification unit 634 identifies the vending machine, the vending machine identification unit 634 writes the file name of the state image in the appearance image file name column 740.
[0041]
FIG. 14 shows an example of a flowchart of processing in the product master generation device 600 of FIG. First, the survey data input unit 604 in FIG. 6 receives survey data (S500). The vending machine specifying unit 635 in FIG. 9 specifies a vending machine based on the survey data (S502).
[0042]
FIG. 15 shows an example of a detailed flowchart of the process in step 502 of FIG. First, the selection unit 632 in FIG. 9 extracts the vending machine IDs of the vending machines existing around the position specified by the position information supplied from the separation unit 630 in FIG. 9 from the store information database 620 (S522). Then, the vending machine identification unit 634 performs matching between the appearance image of the vending machine specified by the extracted vending machine ID and the vending machine included in the state image (S524). If the vending machine can be specified by the matching (Y in S526), the vending machine identifying unit 634 outputs the vending machine ID of the vending machine to the column specifying unit 636 (S530). If the vending machine cannot be specified in step 526 (N in S526), the vending machine identification unit 634 receives the vending machine ID from the operator (S532). Thus, by narrowing down the vending machine candidates based on the position information, the time required for the matching process can be shortened and the matching accuracy can be increased.
[0043]
Returning to FIG. 14, the column specifying unit 636 in FIG. 9 cuts out the image portion of the product included in the state image and generates an extracted image for each product (S506). Next, the product identification unit 640 in FIG. 9 individually identifies the products included in the extracted image (S510). If all the products have been identified (N in S512), the product identification unit 640 supplies the product information and column numbers of the products to the product master creation unit 642 in FIG. Then, the product master creation unit 642 creates a semi-loaded product master by associating them (S516). If there is a product that cannot be specified in step 512 (Y in S512), the product specification unit 640 supplies an unspecified flag indicating that the product cannot be specified and a column ID to the loaded product master creation unit 642 ( S514).
[0044]
FIG. 16 is a diagram showing an example of the data structure of the semi-loaded product master held in the analysis result file storage unit 624 in FIG. 6 by the processing in step 516 in FIG. Such a semi-loaded product master is stored in the analysis result file storage unit 624 for each vending machine. The column number column 510 holds a column number. The product name column 512 holds product information of products stored in the column. The unspecified flag column 514 holds an unspecified flag. In this figure, “1” indicates that the product has been specified, and “0” indicates that the product has not been specified. When “0” is held as the unspecified flag, the analysis result providing unit 608 in FIG. 6 causes the notification unit 612 to notify the fact. Based on this notification, the operator corrects the semi-loaded product master. The update unit 660 of FIG. 7 may start the process for updating the loaded product master when all the unspecified flags are “1”. Thereby, the loaded product master can be reliably updated.
[0045]
<Second Embodiment>
FIG. 17 is a diagram for explaining the external appearance of a wide large vending machine 502 and the relationship between the first state image 520a, the second state image 520b, and the third state image 520c when the image is taken. is there. As described above, in the second embodiment, processing when the appearance of the vending machine 502 cannot be captured as a single state image will be described.
[0046]
FIG. 18 is a diagram illustrating an example of data included in the survey data 506 of FIG. 3 when the appearance of the vending machine 502 is captured in a plurality of regions. The survey data 506 includes position information 540, shooting date / time 542, multiple image flag 546, first image data 544a, second image data 544b, and third image data 544c. This figure is an example when the vending machine 502 is divided into three areas. The multiple image flag 546 holds information specifying that there are multiple status images. This flag may be automatically added by the imaging device 504 in FIG. 3 or may be added by the operation of the investigator A. The first image data 544a, the second image data 544b, and the third image data 544c are data of each state image.
[0047]
FIG. 19 is an internal configuration diagram of the analysis unit 650 in the second embodiment. In the second embodiment, the configurations given the same reference numerals as those already described are the same as the configurations already described in terms of their functions or operations. In the following description, a configuration having functions or operations different from those already described will be mainly described. The separation unit 630 receives the survey data 506 described with reference to FIG. 3 from the survey data input unit 604 in FIG. 6. The separation unit 630 separates a plurality of state images from the survey data and outputs them to the image supply unit 652 respectively. The image supply unit 652 includes a determination unit 654 and a composition unit 656. The determination unit 654 determines whether there are a plurality of state images based on the presence / absence of the multiple image flag 546 in FIG. When there are a plurality of state images, the combining unit 656 combines the plurality of state images to generate one state image. The image supply unit 652 supplies the state image thus generated to the vending machine identification unit 634. There are various combining methods in the combining unit 656. For example, the investigator A in FIG. 3 takes each state image so as to include the overlapping portion, and the combining unit 656 superimposes the overlapping portions. One sheet of state image may be generated. By including such a combining unit 656, a flexible survey can be performed regardless of the size of the survey target and the performance of the imaging device 504 used for the survey.
[0048]
<Third Embodiment>
The third embodiment is a system that collects survey data from a plurality of surveyors via a network and generates a loaded product master. As described in the first embodiment and the second embodiment, in order to generate the loaded product master, it is only necessary to take an image of the vending machine for which the master is to be generated. It is not necessary to seek advanced technology. For this reason, part-time workers can be employed as investigators. Mobile phones equipped with cameras, GPS, communication functions, program execution functions, and the like are widely used. If a person with such a mobile phone is employed as a part-time job, the mobile phone possessed by the part-time job can be used as a research terminal. By employing a part-time job, a large amount of survey data can be collected in a short time at a low cost. For example, if the vending machine installed on the route from the investigator's home to the school destination is requested to be photographed every day, the column change can be quickly handled. In addition, since the same vending machine status image can be obtained from a plurality of investigators, it is possible to conduct a comprehensive survey and to back up defective data. On the other hand, when many investigators, part-time workers, gather, the difference in their consciousness varies, and it is expected that some investigators actually go to the survey point and do not shoot vending machines. For this reason, it is important to ensure the reliability of the survey data collected from each investigator. A system having a configuration for solving these points will be described below.
[0049]
FIG. 20 is a configuration diagram of the loaded product master generation system 10 according to the third embodiment. The loaded product master generation system 10 is another form of the loaded product master generation system 500 of FIG. 1 and can be replaced. The first terminal device 200a, the second terminal device 200b, the third terminal device 200c, and the fourth terminal device 200d (hereinafter simply referred to as “terminal device 200”) are portable terminals such as mobile phones and PDAs, for example. is there. The terminal device 200 includes, for example, a GPS (Global Positioning System) unit that receives a GPS signal from the GPS satellite 16 and acquires position information, a CCD camera, a microphone, and the like. Each terminal device 200 has a function of connecting to the network 12 via the base station 14 and communicating with the product master generation device 100.
[0050]
The product master generation device 100 provides the terminal device 200 via the network 12 with a survey content file for displaying the survey content on the display unit 202 of the terminal device 200. Based on the contents of the survey displayed on the display unit 202, the investigator moves, for example, with the terminal device 200 to the designated survey point and conducts the survey on the spot. The terminal device 200 acquires the position information of the moving point (hereinafter simply referred to as “survey position information”) using the GPS unit. The acquisition instruction may be performed based on an instruction from the investigator, may be automatically performed by a program inside the terminal device 200, or may be performed based on other external signals. The investigator takes an image of the designated object using the CCD camera of the terminal device 200, and inputs items in accordance with the investigation content to the terminal device 200 using the operation unit 204 such as a key button. Or The terminal device 200 transmits items, images, survey position information, and the like input by the researcher to the product master generation device 100 as survey results. The product master generation device 100 collects the survey results and performs a predetermined analysis. In this way, the product master generation device 100 collects the survey results associated with the survey position information from the plurality of terminal devices 200.
[0051]
FIG. 21 is a diagram showing an example of the survey content display screen 320 displayed on the display unit 202 of FIG. The survey content display screen 320 includes a survey content display region 300 for displaying a survey summary, a survey item display region 302 for displaying detailed survey items, a send button 314 for transmitting survey results, And a cancel button 316 for interrupting the input of the survey content. In the survey content display area 300, information on the survey point such as the address and name of the survey point, information on the survey target, the survey period, and the like are displayed. For example, as the information about the survey point, a point or range to be surveyed such as “XX store” or “around XX station” is designated. In the present embodiment, when the fourth button 318 is pressed, a detailed address or telephone number of the survey point is displayed.
[0052]
In the survey item display area 302, a series of work in the survey is displayed for each item (hereinafter simply referred to as “survey item”). In each survey item, a component corresponding to the input content is displayed. For example, “item 1” is an item for instructing an operation of acquiring survey position information using a GPS unit. This work is automatically performed by the investigator pressing the first button 304. Although “acquired” is displayed on the first button 304 in this figure, this indicates that the survey position information has already been acquired. The first button 304 is displayed as “acquired” before the survey position information is acquired. The second button 310 and the third button 312 are buttons for photographing an investigation object using a CCD camera. Shooting is performed by pressing this button. When the survey target cannot be included in one image, the researcher shoots the survey target by dividing it into a plurality of images. For example, when a plurality of images are taken, the multiple image flag 546 described with reference to FIG. 18 is automatically added to the survey result.
[0053]
Item 2” and “Item 3” are provided with a radio button 306 and a combo box 308 as components. In this way, by preparing components according to the input contents in advance, it is possible to reduce the input mistakes of the investigator, so that the quality of the survey result can be improved even in the terminal device 200. Even an inexperienced researcher can easily operate the system. The surveyor finishes inputting all survey items and presses the send button 314. Thereby, the survey result is transmitted to the product master generation device 100.
[0054]
The survey content file for displaying the survey content display screen 320 may be a program created in a programming language such as Java (registered trademark). The terminal device 200 displays the survey content display screen 320 on the display unit 202 by receiving and executing such a program from the product master generation device 100. Hereinafter, the survey content display screen 320 displayed in this manner is referred to as “survey sheet”, and data for displaying the survey sheet is referred to as “survey content file”.
[0055]
FIG. 22 is an internal block diagram of the product master generation device 100 of FIG. The survey content registration unit 128 stores the survey content file in the survey content file storage unit 102 and uses information (hereinafter simply referred to as “determination file”) used when determining the reliability of the survey result as the determination file storage unit 126. To store. When the survey content file is requested from the terminal device 200 of FIG. 20, the providing unit 106 authenticates the investigator who operates the terminal device 200 based on the data held in the investigator information database 110. For example, the authentication is performed based on identification information assigned to each terminal device 200 (hereinafter simply referred to as “terminal ID”). If the authentication is successful, the providing unit 106 instructs the reading unit 104 to read the investigation content file. The reading unit 104 reads the survey content file from the survey content file storage unit 102 and supplies it to the providing unit 106. The providing unit 106 transmits the survey content file supplied from the reading unit 104 to the terminal device 200. Based on the survey content file thus transmitted, the survey content display screen 320 described with reference to FIG. 21 is displayed on the display unit 202 of the terminal device 200 of FIG. Further, the providing unit 106 stores the transmission history in the log storage unit 108 every time the investigation content file is transmitted.
[0056]
FIG. 23 is a diagram illustrating an example of a data structure of the log storage unit 108 of FIG. The sheet ID column 400 holds information for identifying a survey content file, that is, information for identifying a survey sheet (hereinafter simply referred to as “sheet ID”). The investigator ID column 402 holds information for identifying the investigator who is the owner of the terminal device 200 that has transmitted the investigation content file (hereinafter simply referred to as “investigator ID”). The provision date and time column 404 holds the date and time when the survey content file is transmitted. The start date and time column 405 holds the date and time when reception of the survey result created based on the transmitted survey content file is started. The time limit date / time column 406 holds a time limit for accepting a survey result created based on the transmitted survey content file. For example, the collection unit 114 in FIG. 22 described later accepts the investigation result only within a period (hereinafter simply referred to as “collection period”) determined by the date and time held in the start date and time field 405 and the expiration date and time field 406. The reception flag column 408 holds information (hereinafter simply referred to as “reception flag”) indicating whether or not a survey result created based on the transmitted survey content file has been received. In this figure, “1” means that it has been received, and “0” means that it has not been received. This reception flag is written by the collection unit 114 of FIG.
[0057]
In this figure, for example, the survey content file with the sheet ID “1051” is transmitted to the terminal device 200 of the surveyor with the surveyor ID “36112” at “December 2, 2002, 13:15”. I understand that. Further, it can be seen that the collection period of the survey results created based on the survey content file is from “December 1, 2002, 8:00” to “December 7, 2002, 20:00”. Then, by referring to the reception flag column 408, it is understood that the product master generation device 100 has already received the survey result created based on this survey content file.
[0058]
24 is a diagram showing an example of the data structure of the investigator information database 110 of FIG. The investigator ID column 410 holds an investigator ID. The terminal ID column 412 holds the terminal ID of the terminal device 200 possessed by the investigator. The e-mail address column 414 holds an investigator's e-mail address. The investigator name column 416 holds the name of the investigator. In addition to these data, the investigator information database 110 may hold various types of information related to the investigator, such as the investigator's address, age, sex, and preferences. In another example, the providing unit 106 in FIG. 22 may selectively transmit a survey content file according to the sex or preference of the researcher.
[0059]
Returning to FIG. 22, the notification unit 112 notifies that the examination result acceptance deadline is approaching based on the data held in the deadline date / time field 406 of FIG. 23. The notification timing may be set in advance, or may be set for each survey content file. For example, when the timing is set two days before the deadline, the notifying unit 112 refers to the deadline date / time column 406 in FIG. 23, and the investigator of the investigator who downloaded the investigation content file two days before the deadline date and time Search for an ID. Next, the investigator information database 110 is referred to based on the investigator ID, and the e-mail address is read out. Then, the notification unit 112 notifies the electronic mail address. In addition, the notification unit 112 may refer to the reception flag column 408 in FIG. 23 and notify only the investigator who has not yet transmitted the investigation result. Thereby, it is possible to prompt the investigator to transmit the survey result. In addition, the number of survey results to be collected in advance may be set, and the notification unit 112 may notify when the number has not been reached. Thereby, the merchandise master generation device 100 can secure the number of investigation results necessary for the analysis.
[0060]
The collection unit 114 collects survey results from the terminal device 200 only during the collection period set in the log storage unit 108, for example, and stores the collected survey results in the survey result storage unit 116. Further, the collection unit 114 writes that the investigation result has been received in the log storage unit 108. As a result, “1” is written as the reception flag in the reception flag column 408 of FIG. The survey result storage unit 116 holds, for example, a text format survey result file, an image file, a video file, an audio file, and the like collected as a survey result and a management table for managing them. The analysis unit 130 performs a predetermined analysis based on the survey result stored in the survey result storage unit 116. The analysis unit 130 includes an extraction unit 118 that selects a survey result used for analysis, and an analysis unit 120 that performs analysis based on the selected survey result.
[0061]
FIG. 25 is a diagram illustrating an example of a data structure of a survey result file held in the survey result storage unit 116. The survey result file is recorded in the file for each survey result, and a unique file name is added. The file name 468 of the investigation result file in this figure is “36112xxx.dat”. This survey result file holds an input value (hereinafter simply referred to as “survey data”) of each survey item in an XML (eXtensible Markup Language) format. The survey data is described in a range surrounded by the survey result start tag 450a and the survey result end tag 450b. Thus, the survey result file holds each survey data sandwiched between the start tag and the end tag. By taking such a data structure, the merchandise master generation device 100 can flexibly handle a plurality of different survey contents. That is, a single product master generation device 100 can handle a plurality of survey contents at the same time. For example, a survey for generating a loaded product master and a survey for simply grasping the arrangement of products arranged on the face or the product display shelf can be performed simultaneously.
[0062]
The investigator ID column 452 holds the investigator ID of the investigator who provided the survey result. The sheet ID column 454 holds the sheet ID of the survey sheet that is the basis for creating the survey result. The survey date column 456 holds the date and time when the survey was performed. The first item column 458, the second item column 460, the third item column 462, the fourth item column 464, and the fifth item column 466 hold survey data for each survey item in the survey sheet. In the case of this figure, each item column holds survey data for each survey item in FIG. For example, the first item column 458 holds the position information of the terminal device 200 at the time of the survey, that is, the survey position information. The position information is expressed by latitude, longitude, altitude, etc., for example. The second item column 460 holds the content selected by the radio button 306 in FIG. The third item column 462 holds the content selected in the combo box 308 in FIG. The fourth item column 464 and the fifth item column 466 hold the file names of the image files photographed in the items 4 and 5 in FIG.
[0063]
In general, the data structure in the XML format described with reference to FIG. 25 is excellent in flexibility, but processing such as data retrieval takes time compared to the case of using a table having a fixed field in advance. Therefore, the survey result storage unit 116 further holds a management table that includes, in the field, survey data included in the survey result, which is frequently used in subsequent processing. When the collection unit 114 receives the survey result, the collection unit 114 writes necessary survey data in the management table.
[0064]
FIG. 26 is a diagram illustrating an example of the data structure of the management table held in the survey result storage unit 116. The investigator ID column 420 holds the investigator ID of the investigator who provided the investigation result. This investigator ID is the same as the data held in the investigator ID column 452 of FIG. The sheet ID column 422 holds the sheet ID of the survey sheet that is the basis for creating the survey result. This sheet ID is the same as the data held in the sheet ID column 454 of FIG. The collection date / time column 424 holds the date / time when the collection unit 114 of FIG. The position information column 426 holds survey position information. This survey position information is the same as the data held in the first item column 458 of FIG. The survey date column 428 holds the date and time when the survey was performed. This date and time is the same as the data held in the survey date and time column 456 of FIG. The result file name column 430 holds the file name of the investigation result file. The file name 468 of FIG. 25 is held in the result file name column 430. Thereby, the investigation result file of FIG. 25 can be referred to based on this management table, that is, a relation is established.
[0065]
The reliability column 432 holds information indicating reliability (hereinafter simply referred to as “reliability value”). This confidence value is written by the determination unit 124 of FIG. In this figure, “A” indicates that the reliability is high, “B” indicates that the reliability is somewhat high, and “C” indicates that the reliability is low. In another example, the confidence value may be expressed numerically. Although details will be described later, the analysis unit 130 in FIG. 22 preferentially extracts a highly reliable survey result based on the reliability value and sets it as an analysis target. The analysis flag column 434 holds information (hereinafter simply referred to as “analysis flag”) indicating whether or not the analysis flag is used. This analysis flag is written by the analysis unit 130 of FIG. In this figure, “1” indicates that it is used for analysis, and “0” indicates that it is not used for analysis.
[0066]
Returning to FIG. 22, the determination unit 124 determines the reliability of the investigation result held in the investigation result storage unit 116 based on the determination file held in the determination file storage unit 126, and the determination result Is written in the reliability column 432 of FIG.
[0067]
FIG. 27 is a diagram illustrating an example of the data structure of the determination file storage unit 126. The sheet ID column 470 holds a sheet ID. The reliability determination data item column 472 holds survey items (hereinafter simply referred to as “determination target items”) used when the determination unit 124 of FIG. 22 determines reliability. The survey data of this judgment target item is called “judgment data”. The ideal value column 474 holds the ideal value of the determination data, that is, the ideal value that the determination data should take. For example, as in the case of the survey sheet described with reference to FIG. 21, in the case of a survey regarding vending machines arranged in “XX store”, an image of the vending machine photographed based on this survey sheet is “ The photograph should be taken in the vicinity of the ideal value stored in the ideal value column 474, that is, the location of “OO store”. From such a viewpoint, the determination unit 124 in FIG. 22 determines the reliability of the investigation result. Information necessary for the determination is held in the determination file storage unit 126. In this figure, the determination target item used for determining the reliability of the survey result created based on the sheet ID “1051” is the data held in the first item column 458 of FIG. 25, that is, the survey position information. Is specified. Then, it can be seen that the ideal value as the actual survey point information is the position information of “XX store”.
[0068]
The reliability value column 476 holds information for determining a reliability value according to the difference between the ideal value held in the ideal value column 474 and the determination data held in the reliability determination data item column 472. For example, in the present embodiment, the confidence value is expressed in three stages of “A”, “B”, and “C”, and a range is set for each. For example, in the sheet ID “1051”, the reliability value “A” is set to the difference range, that is, the distance between the survey position and the store position is “0 m or more and less than 5 m”, and the reliability value “B” is the difference range. “5 m or more and less than 15 m” is set, and the reliability value “C” has the difference range set to “15 m or more”. The determination unit 124 of FIG. 22 uses such information to determine the reliability value of each survey result held in the survey result storage unit 116.
[0069]
In the example of FIG. 27, the survey position information is taken up as the determination target item, but in the other examples, the image taken at the survey point, the sound sampled at the survey point, the time at the survey, the temperature at the survey point, the survey point External environmental information other than location information such as humidity and survey point altitude may be used. Moreover, it is good also as a judgment object item combining these external environment information. For example, when investigating the traffic volume at a predetermined point, the investigation position information and the investigation time may be set as items to be determined. In addition, information held in the ideal value column 474 and the confidence value column 476 is appropriately set according to the determination target item.
[0070]
Returning to FIG. 22, the analysis unit 130 outputs the loaded product master created based on the highly reliable survey result to the output unit 122. The output unit 122 writes the loaded product master in the loaded product master storage unit 812 of FIG. The accepting unit 131 accepts an instruction from the operator. Then, the reception unit 131 supplies the instruction to the analysis unit 130. For example, this instruction may be an instruction to correct the loaded product master in the analysis unit 130.
[0071]
FIG. 28 is an internal block diagram of the analysis unit 130 of FIG. In this figure, the structure which attached | subjected the code | symbol same as the already demonstrated structure is the same as the structure already demonstrated in the function or operation | movement. In the following description, a configuration having functions or operations different from those already described will be mainly described. For example, when the collection deadline has been reached, the extraction unit 118 selects a survey result to be used for analysis of the survey result from the survey result storage unit 116 and provides the selected survey result to the analysis unit 606. The extraction unit 118 preferentially selects a survey result with a high reliability value. For example, when there are a plurality of survey results related to the same survey sheet, the extraction unit 118 selects the survey results in descending order of reliability values. Thereby, a highly reliable survey result is positively selected as an analysis target. Further, the extraction unit 118 may have high reliability and preferentially select a new survey result on the survey date and time. It is preferable that the extraction condition in the extraction unit 118 can be arbitrarily set according to the survey contents.
[0072]
The analysis unit 606 retains the same internal configuration as that described with reference to FIG. 9, and creates a loaded product master for the vending machine based on the state image included in the survey result extracted by the extraction unit 118. . Further, the analysis unit 606 may be replaced with the analysis unit 650 described with reference to FIG. The analysis result providing unit 608 reads the loaded product master from the analysis result file storage unit 624 and supplies it to the output unit 122. The analysis result providing unit 608 performs processing so as to provide only a single loaded product master instead of providing a loaded product master in a duplicated state when there are duplicated loaded product masters. . Further, the analysis result providing unit 608 may provide the loaded product master in an overlapping state as necessary. When the unspecified flag is associated with the loaded product master, the notification unit 612 outputs a message requesting confirmation from the operator to the output unit 122. When the correction of the loaded product master is instructed according to the message, the correcting unit 614 corrects the loaded product master in accordance with the instruction.
[0073]
FIG. 29 is an internal block diagram of the terminal device 200 of FIG. The receiving unit 208 receives the survey content file from the product master generation device 100, stores the sheet ID in the sheet ID storage unit 232, and stores the survey content file in the survey content file storage unit 210. The control unit 212 controls each configuration based on the survey content file. For example, the control unit 212 generates display data based on the survey content file and outputs the display data to the display processing unit 206. The display processing unit 206 causes the display unit 202 to display the survey content display screen 320 of FIG. 21 based on the display data. The operation unit 204 is, for example, a key button, and receives an input of survey data from the investigator and outputs it to the control unit 212. The control unit 212 supplies the survey data to the storage processing unit 236 in association with the survey item. In addition, the control unit 212 instructs the survey date acquisition unit 216 to acquire the survey date and time, and instructs the external environment data acquisition unit 218 to acquire external environment data.
[0074]
The survey date acquisition unit 216 reads the current date from the clock 214 and supplies it to the storage processing unit 236. The external environment data acquisition unit 218 includes a position information acquisition unit 220, a photographing unit 222, and a microphone 224. In another example, the external environment data acquisition unit 218 may include various sensors such as a thermometer that measures temperature, a hygrometer that measures humidity, and a barometer that measures atmospheric pressure. The position information acquisition unit 220 is a GPS unit, for example, and acquires the position information of the terminal device 200 at the time point instructed by the control unit 212. Then, the acquired position information is supplied to the storage processing unit 236 as survey position information. The photographing unit 222 is, for example, a CCD camera, photographs an investigation target, and supplies image data such as a still image or a moving image to the storage processing unit 236. The microphone 224 samples the sound around the terminal device 200 and supplies the sound data to the storage processing unit 236.
[0075]
The storage processing unit 236 stores the survey data supplied from the control unit 212, the survey date acquisition unit 216, and the external environment data acquisition unit 218 in the survey data storage unit 226 in association with the respective survey items. Further, when a plurality of state images are supplied as the survey data from the imaging unit 222, the storage processing unit 236 stores a multiple image flag indicating the state image. This flag corresponds to the multiple image flag 546 in FIG. For example, the result file generation unit 228 reads the survey data held in the survey data storage unit 226 and the sheet ID held in the sheet ID storage unit 232 at the timing when the transmission button 314 in FIG. Generate a survey result file. The transmission unit 230 transmits the generated survey result file to the product master generation device 100. When receiving the survey content file and transmitting the survey result file, the receiving unit 208 and the transmitting unit 230 transmit the terminal ID held in the terminal ID storage unit 234 to the product master generation device 100 for authentication.
[0076]
FIG. 30 is a diagram illustrating an example of a processing sequence between the product master generation device 100 and the terminal device 200 in FIG. 20. First, the terminal device 200 requests a survey content file from the product master generation device 100 (S10). The product master generation device 100 reads the survey content file (S12) and transmits it to the terminal device 200 (S14). Next, the terminal device 200 displays a survey sheet based on the survey content file (S16). Next, the terminal device 200 receives an input of survey data corresponding to the survey sheet from the surveyor (S18). Further, the terminal device 200 acquires external environment information such as position information, which is determination data used for determination of reliability (S20). And the terminal device 200 produces | generates an investigation result file (S22), and transmits to the goods master production | generation apparatus 100 (S24).
[0077]
The product master generation device 100 stores the survey result file in the survey result storage unit 116 of FIG. 22 (S26). Then, the determination unit 124 of FIG. 22 determines the reliability of the investigation result (S28). For example, when the survey result collection deadline has been reached, the extraction unit 118 in FIG. 22 preferentially selects a highly reliable survey result (S30). The analysis unit 120 in FIG. 22 performs a predetermined analysis based on the survey result selected by the extraction unit 118, that is, creates a loaded product master (S32).
[0078]
The loaded product master generation system 10 can exclude, from the analysis, an inappropriate survey result by a researcher who transmits a false survey result without actually going to the survey point. Moreover, since the investigator who performs such fraud can be grasped, it is possible to pay attention to the investigator, and there is an effect of suppressing transmission of an inappropriate investigation result.
[0079]
The present invention has been described based on the embodiments. The embodiments are exemplifications, and it will be understood by those skilled in the art that various modifications can be made to combinations of the respective constituent elements and processing processes, and such modifications are within the scope of the present invention. .
[0080]
The first modification relates to the analysis result providing unit 608 in FIG. The analysis result providing unit 608 selects, for example, a loaded product master created using a state image with the best image quality and displays it on the display unit 610 when there are a plurality of loaded product masters related to the same vending machine. Alternatively, the latest state image shooting date may be selected and displayed on the display unit 610. In short, the analysis result providing unit 608 performs processing so as to provide only a single loaded product master instead of providing a loaded product master in a duplicated state when there are duplicate loaded product masters. Do. Further, the analysis result providing unit 608 may provide the loaded product master in an overlapping state as necessary. The operator refers to the loaded merchandise master displayed on the display unit 610 and uses it for materials when building a marketing strategy.
[0081]
【The invention's effect】
According to the present invention, a product loading master can be generated based on a state image. The arrangement state of product samples on the product display can be investigated. Survey results can be collected from multiple terminal devices. In addition, analysis can be performed based on highly reliable survey results.
[Brief description of the drawings]
FIG. 1 is a configuration diagram of a sales management system according to a first embodiment.
FIG. 2 is an example of a flowchart of processing in the sales management system of FIG. 1;
FIG. 3 is a diagram for explaining the outline of the loaded product master generation system of FIG. 1;
4 is a diagram illustrating an example of a state image photographed by the photographing apparatus of FIG. 3. FIG.
5 is a diagram illustrating an example of data included in survey data input to the product master generation device in FIG. 3; FIG.
6 is an internal configuration diagram of the product master generation device of FIG. 3;
7 is an internal configuration diagram of an analysis result providing unit in FIG. 6;
FIG. 8 is an internal configuration diagram of an updating unit in FIG. 7;
9 is an internal configuration diagram of the analysis unit in FIG. 6;
10 is a diagram illustrating an example of a data structure of a model information database in FIG. 6;
11 is a diagram illustrating an example of a data structure of a product information database in FIG. 6;
12 is a diagram showing an example of the data structure of the store information database in FIG. 6;
13 is a diagram showing an example of the data structure of the vending machine information database in FIG. 6;
14 is an example of a flowchart of processing in the product master generation device of FIG. 6;
FIG. 15 is an example of a detailed flowchart of processing in Step 502 of FIG. 14;
16 is a diagram showing an example of a data structure of a loaded product master in the vending machine under analysis held in the analysis result file storage unit in FIG. 6 by the processing in step 516 in FIG. 14;
FIG. 17 is a diagram for explaining the relationship between the appearance of a wide large vending machine and the first state image, the second state image, and the third state image when the vending machine is photographed;
18 is a diagram showing an example of data included in the survey data of FIG. 3 when the appearance of the vending machine is photographed while being divided into a plurality of areas.
FIG. 19 is an internal configuration diagram of an analysis unit according to the second embodiment.
FIG. 20 is a configuration diagram of a loaded product master generation system according to a third embodiment.
FIG. 21 is a diagram illustrating an example of a survey content display screen displayed on the display unit of the terminal device of FIG. 20;
22 is a diagram illustrating an example of an internal configuration diagram of the product master generation device in FIG. 20;
FIG. 23 is a diagram illustrating an example of a data structure of a log storage unit in FIG. 22;
24 is a diagram showing an example of the data structure of the investigator information database in FIG. 22;
25 is a diagram showing an example of a data structure of a survey result file held in the survey result storage unit of FIG.
26 is a diagram showing an example of the data structure of a management table held in the investigation result storage unit of FIG.
27 is a diagram illustrating an example of a data structure held in a determination file storage unit in FIG. 22;
28 is an internal block diagram of the analysis unit in FIG. 22;
29 is a diagram illustrating an example of an internal configuration diagram of the terminal device in FIG. 20;
30 is a diagram illustrating an example of a processing sequence in the product master generation device and the terminal device in FIG. 20;
[Explanation of symbols]
10 Loaded goods master generation system
12 network
14 base stations
16 GPS satellites
100 Commodity master generation device
102 Survey content file storage
104 Reading section
106 Supply Department
108 Log storage
110 Surveyor Information Database
112 Notification unit
114 Collection Department
116 Survey result storage
118 Extractor
120 analysis unit
122 Output unit
124 Judgment part
126 Judgment file storage
128 Survey Content Registration Department
130 Analysis unit
131 Reception
200 Terminal device
202 Display section
204 Operation unit
206 Display processing unit
208 Receiver
210 Survey content file storage
212 Control unit
214 clock
216 Survey date acquisition department
218 External environment data acquisition unit
220 Location information acquisition unit
222 Shooting unit
224 microphone
226 Survey data storage
228 Result file generator
230 Transmitter
232 Sheet ID storage
234 Terminal ID storage unit
236 Storage processing unit
500 Loaded goods master generation system
502 Vending machine
504 Imaging device
506 Survey data
508 Loaded goods master
520 state image
600 Commodity master generation device
604 Survey data input section
606 Analysis Department
608 Analysis result provider
610 display unit
612 Notification unit
614 Correction
616 Data storage unit
617 Vending Machine Information Database
618 Model information database
620 Store information database
622 Product Information Database
624 Analysis result file storage
626 operation unit
630 Separation part
632 Selector
634 Vending machine identification section
635 Vending Machine Identification Department
636 Column specific part
640 Product Identification Department
642 Product Master Creation Department
650 analysis unit
652 Image supply unit
654 determination unit
656 synthesis unit
660 Update Department
662 Display processing unit
664 Medium writing unit
670 detector
672 Update instruction section
674 Writing section

Claims (6)

自動販売機から、当該自動販売機の各カラムのカラム番号と当該カラムに装填された商品の在庫量とを対応付けた在庫情報を収集して当該自動販売機に格納した商品毎の販売実績管理を行うために、調査対象の自動販売機の各カラムに装填された商品の情報を管理するシステムであって、
自動販売機の識別情報と当該自動販売機の外観画像とを対応付けた情報を保持する自販機情報データベースと、
商品毎に、当該商品の識別情報と当該商品の外観画像とを対応付けた情報を保持する商品情報データベースと、
調査対象の自動販売機の商品ディスプレイを撮影して得られた状態画像を含む調査データの入力を受け付ける調査データ入力部と、
前記調査対象の自動販売機の前記状態画像と前記自販機情報データベースに保持された前記外観画像とのマッチングにより、前記調査対象の自動販売機の識別情報を特定する自販機特定部と、
前記調査対象の自動販売機の前記状態画像に含まれる商品の画像部分を切り出して商品毎に抽出画像を生成し、各前記抽出画像毎にカラム番号を対応付けるカラム特定部と、
各前記抽出画像と前記商品情報データベースに保持された前記商品の画像とのマッチングにより、各抽出画像の商品の識別情報を特定する商品特定部と、
前記商品特定部が特定した前記商品の識別情報と当該商品の識別情報の前記抽出画像に対応付けられた前記カラム番号とを対応付けて保持する装填商品マスタを生成する商品マスタ生成と、
を備え、
前記自販機情報データベースは、前記自販機特定部が特定した前記調査対象の自動販売機の識別情報と、前記商品マスタ生成部が生成した前記装填商品マスタとを対応付けて記憶することを特徴とする販売管理システム。
Collecting inventory information that associates the column number of each column of the vending machine with the inventory quantity of the product loaded in the column from the vending machine, and managing the sales results for each product stored in the vending machine In order to perform information on products loaded in each column of the vending machine to be investigated ,
A vending machine information database that holds information in which the identification information of the vending machine is associated with the appearance image of the vending machine;
For each product, a product information database that holds information that associates the identification information of the product with the appearance image of the product,
A survey data input unit that accepts input of survey data including a state image obtained by photographing the product display of the vending machine to be surveyed;
A vending machine specifying unit for identifying identification information of the vending machine to be investigated by matching the state image of the vending machine to be investigated and the appearance image held in the vending machine information database;
A column specifying unit that generates an extracted image for each product by cutting out an image part of the product included in the state image of the vending machine to be investigated, and associates a column number for each of the extracted images;
A product specifying unit that specifies product identification information of each extracted image by matching each extracted image and the product image stored in the product information database;
A product master generating unit that generates a loaded product master that holds the product identification information specified by the product specification unit and the column number associated with the extracted image of the product identification information ;
With
The vending machine information database stores the identification information of the vending machine to be surveyed specified by the vending machine specifying unit and the loaded product master generated by the product master generating unit in association with each other. Management system.
請求項1に記載の販売管理システムにおいて、
前記調査データは、前記状態画像に対応付けて、当該状態画像の撮影場所を特定する撮影地点位置情報を含み、
前記販売管理システムは、自動販売機の設置場所を特定する情報と当該設置場所に設置されている自動販売機の識別情報とを対応付けて保持する商店情報データベースをさらに含み、
前記自販機特定部は、
前記調査データに含まれる前記撮影地点位置情報と前記商店情報データベースに保持された前記自動販売機の設置場所を特定する情報とに基づいて、前記撮影地点周辺に存在する自動販売機の識別情報を、前記調査対象の自動販売機の候補として出力する選択部と、
前記調査対象の自動販売機の前記状態画像と前記選択部が出力した前記候補の前記自販機の識別情報に対応付けられた前記外観画像とのマッチングにより、前記調査対象の自動販売機の識別情報を特定する自販機識別部と、
を含むことを特徴とする販売管理システム。
In the sales management system according to claim 1,
The survey data includes shooting location information that identifies the shooting location of the state image in association with the state image,
The sales management system further includes a store information database that stores information that identifies the installation location of the vending machine and identification information of the vending machine installed at the installation location,
The vending machine identifying unit is
Based on the shooting point location information included in the survey data and information specifying the installation location of the vending machine held in the store information database, identification information of vending machines existing around the shooting point is obtained. A selection unit for outputting as a candidate for the vending machine to be investigated,
By identifying the state image of the surveyed vending machine and the appearance image associated with the candidate vending machine identification information output by the selection unit, the identification information of the surveyed vending machine is obtained. A vending machine identification unit to identify,
A sales management system characterized by including:
請求項1または2に記載の販売管理システムにおいて、
前記抽出画像の商品の識別情報を特定できない場合、前記商品特定部は、商品を特定できないことを示す未特定フラグとカラム番号とを対応付けて前記商品マスタ生成部に供給し、
前記商品マスタ生成部は、前記未特定フラグと前記カラム番号とを対応付けて分析結果ファイル格納部に記憶することを特徴とする販売管理システム。
In the sales management system according to claim 1 or 2,
When the identification information of the product of the extracted image cannot be specified, the product specifying unit supplies an unspecified flag indicating that the product cannot be specified and a column number in association with each other, and supplies the product master generation unit.
The product master generation unit stores the unspecified flag and the column number in association with each other in an analysis result file storage unit .
請求項1から3いずれかに記載の販売管理システムにおいて、
前記商品マスタ生成部は、新しく生成した装填商品マスタに基づいて既に存在する前記装填商品マスタを更新する更新部を更に備えることを特徴とする販売管理システム。
In the sales management system according to any one of claims 1 to 3,
The merchandise master generation unit further includes an updating unit that updates the already-installed merchandise master based on a newly generated loaded merchandise master .
請求項4に記載の販売管理システムにおいて、
前記更新部は、既に存在する装填商品マスタと新しく生成した装填商品マスタとを比較 して、装填商品が変更されたカラムの有無を検出する検出部と、
装填商品が変更されたカラムについて装填商品マスタの更新を行う書込部と、
を有することを特徴とする販売管理システム。
In the sales management system according to claim 4,
The update unit compares a loaded product master that already exists with a newly created loaded product master, and detects the presence or absence of a column in which the loaded product has been changed;
A writing unit for updating a loaded product master for a column in which the loaded product has been changed;
A sales management system characterized by comprising:
請求項1から5いずれかに記載の販売管理システムにおいて、
前記商品マスタ生成部が生成した前記装填商品マスタを自動販売機毎にファイル名を有するファイルとして格納する格納部をさらに含み、
前記自販機情報データベースは、前記自販機特定部が特定した前記調査対象の自動販売機の識別情報と、前記格納部に格納された当該自動販売機の前記装填商品マスタの前記ファイルのファイル名とを対応付けて記憶することを特徴とする販売管理システム。
In the sales management system according to any one of claims 1 to 5,
A storage unit that stores the loaded product master generated by the product master generation unit as a file having a file name for each vending machine;
The vending machine information database corresponds to the identification information of the vending machine to be investigated specified by the vending machine specifying unit and the file name of the file of the loaded product master of the vending machine stored in the storage unit. A sales management system characterized by attaching and memorizing .
JP2002378655A 2002-12-26 2002-12-26 Sales management system Expired - Fee Related JP3974034B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2002378655A JP3974034B2 (en) 2002-12-26 2002-12-26 Sales management system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2002378655A JP3974034B2 (en) 2002-12-26 2002-12-26 Sales management system

Publications (2)

Publication Number Publication Date
JP2004213109A JP2004213109A (en) 2004-07-29
JP3974034B2 true JP3974034B2 (en) 2007-09-12

Family

ID=32815422

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2002378655A Expired - Fee Related JP3974034B2 (en) 2002-12-26 2002-12-26 Sales management system

Country Status (1)

Country Link
JP (1) JP3974034B2 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109377057A (en) * 2018-10-26 2019-02-22 苏州浪潮智能软件有限公司 A kind of automatic calculating method of wisdom retail platform cargo path commodity capacity

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4610284B2 (en) * 2004-09-30 2011-01-12 日本たばこ産業株式会社 Vending machine system
JP5617485B2 (en) * 2010-09-28 2014-11-05 キヤノンマーケティングジャパン株式会社 Mobile terminal, sales management system, control method, sales management method, and program
JP2012126532A (en) * 2010-12-16 2012-07-05 Japan Tobacco Inc Article management device, article management method and program
JP6136257B2 (en) * 2012-12-27 2017-05-31 日本電気株式会社 Vending machine management apparatus, data processing method thereof, and program
JP6236825B2 (en) * 2013-03-26 2017-11-29 日本電気株式会社 Vending machine sales product recognition apparatus, sales product recognition method, and computer program
JP5677547B2 (en) * 2013-10-23 2015-02-25 東芝テック株式会社 Information processing apparatus and program

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109377057A (en) * 2018-10-26 2019-02-22 苏州浪潮智能软件有限公司 A kind of automatic calculating method of wisdom retail platform cargo path commodity capacity

Also Published As

Publication number Publication date
JP2004213109A (en) 2004-07-29

Similar Documents

Publication Publication Date Title
JP4444841B2 (en) Investigation system and investigation method
JP6586076B2 (en) Visual audiovisual annotation on infrared images using a separate wireless mobile device
US8396280B2 (en) Apparatus and method for inspecting assets in a processing or other environment
US7406400B2 (en) Equipment inspection support system, equipment inspection support method, and program therefor
EP2031877B1 (en) Apparatus and method for capturing image information during asset inspections in a processing or other environment
US20180247361A1 (en) Information processing apparatus, information processing method, wearable terminal, and program
JP4569471B2 (en) Electronic image storage method, electronic image storage device, and electronic image storage system
US11315084B2 (en) Method and system for aggregating diagnostic analyzer related information
CN107301197B (en) Service data tracking processing system and method
US20210240773A1 (en) Systems and methods for proactive information discovery with multiple senses
US11386700B2 (en) Face detection system
JPH11134369A (en) Facility inspecting device
JP3974034B2 (en) Sales management system
JP6534598B2 (en) Warehouse management system
JP2017052649A (en) Warehouse management system
JP2010287145A (en) Work recording support system, and work recording support method and program
EP3893126A1 (en) Data retrieval device, data retrieval method and program, and edge server and program thereof
JP4610284B2 (en) Vending machine system
JP2007183813A (en) Construction management system and information collection system
JP2004213238A (en) Advertising investigation system
US20220295016A1 (en) Processing apparatus, and processing method
JP4001824B2 (en) POP media management system
JP4261935B2 (en) Input plan development support system
CN113485742A (en) Host application version registration method and device
JP2004310533A (en) Advertising research system

Legal Events

Date Code Title Description
A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20061206

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20061226

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20070223

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20070612

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20070613

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100622

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110622

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120622

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130622

Year of fee payment: 6

LAPS Cancellation because of no payment of annual fees