JP2018073226A - 情報処理システム、代替物取得支援方法、データベース作成装置、情報処理装置、情報処理方法および情報処理プログラム - Google Patents

Abstract

【課題】ユーザに、異なる国間の商品であっても互いに同一あるいは類似の商品を提示すること。【解決手段】通信端末から、少なくともユーザによって設定された国の情報と前記通信端末が撮像した画像とを受信する受信部と、撮像された画像を解析して画像に含まれる商品を特定し、特定された商品の属性を判定する判定部と、撮像された画像に含まれる商品が設定された国とは異なる国で販売されている商品である場合、商品の属性が同一あるいは類似である設定された国の商品を検索する検索部と、検索された設定された国の商品を、通信端末の表示部に表示させる表示制御部と、を備える。【選択図】 図１

Description

本発明は、情報処理システム、代替物取得支援方法、データベース作成装置、情報処理装置、情報処理方法および情報処理プログラムに関する。

上記技術分野において、特許文献１には、商品に付属する二次元コードを撮像して得た商品ＩＤ番号を用いて商品データベースに商品データを登録する。そして、当該商品が廃盤となった場合に、商品データベースから廃盤商品の類似商品データを検索して、当該商品の商品データと類似商品データとを関連付けて商品情報登録管理データベースに登録する技術が開示されている。

特開２００５−１９００１４号公報

しかしながら、上記文献に記載の技術では、廃盤商品も類似商品も同じ国内で販売されている商品であり、国が異なる場合に、異なる国間で互いに同一あるいは類似の商品を知ることができなかった。

本発明の目的は、上述の課題を解決する技術を提供することにある。

上記目的を達成するため、本発明に係る情報処理装置は、
通信端末から、少なくともユーザによって設定された国の情報と前記通信端末が撮像した画像とを受信する受信手段と、
前記撮像された画像を解析して前記画像に含まれる商品を特定し、前記特定された商品の属性を判定する判定手段と、
前記撮像された画像に含まれる商品が前記設定された国とは異なる国で販売されている商品である場合、前記商品の属性が同一あるいは類似である前記設定された国の商品を検索する検索手段と、
検索された前記設定された国の商品を、前記通信端末の表示部に表示させる表示制御手段と、
を備える。

上記目的を達成するため、本発明に係る情報処理方法は、
通信端末から、少なくともユーザによって設定された国の情報と前記通信端末が撮像した画像とを受信する受信ステップと、
前記撮像された画像を解析して前記画像に含まれる商品を特定し、前記特定された商品の属性を判定する判定ステップと、
前記撮像された画像に含まれる商品が前記設定された国とは異なる国で販売されている商品である場合、前記商品の属性が同一あるいは類似である前記設定された国の商品を検索する検索ステップと、
検索された前記設定された国の商品を、前記通信端末の表示部に表示させる表示制御ステップと、
を含む。

上記目的を達成するため、本発明に係る情報処理プログラムは、
通信端末から、少なくともユーザによって設定された国の情報と前記通信端末が撮像した画像とを受信する受信ステップと、
前記撮像された画像を解析して前記画像に含まれる商品を特定し、前記特定された商品の属性を判定する判定ステップと、
前記撮像された画像に含まれる商品が前記設定された国とは異なる国で販売されている商品である場合、前記商品の属性が同一あるいは類似である前記設定された国の商品を検索する検索ステップと、
検索された前記設定された国の商品を、前記通信端末の表示部に表示させる表示制御ステップと、
をコンピュータに実行させる。

上記目的を達成するため、本発明に係るデータベース作成装置は、
少なくとも、第１国の第１商品と前記第１商品の属性と前記第１商品を撮像した第１画像とを対応付けて格納する第１商品データベースと、第２国の第２商品と前記第２商品の属性と前記第２商品を撮像した第２画像とを対応付けて格納する第２商品データベースとから商品データを収集する収集手段と、
前記第１商品の属性と前記第２商品の属性とが同一あるいは類似である場合、前記第１国と前記第２国との対応商品として、前記第１画像と前記第２画像とを対応つけて商品データベースに格納する格納手段と、
を備える。

上記目的を達成するため、本発明に係る情報処理システムは、
各国で販売されている商品と前記商品の属性とを対応付けて格納する商品データベースと、
少なくとも、ユーザによって設定された国の情報と撮像された画像とを取得する取得手段と、
前記撮像された画像を解析して前記画像に含まれる商品を特定し、前記商品データベースを参照して前記特定された商品の属性を判定する判定手段と、
前記撮像された画像に含まれる商品が前記設定された国とは異なる国で販売されている商品である場合、前記商品データベースを参照して、前記商品の属性が同一あるいは類似である前記設定された国の商品を検索する検索手段と、
検索された前記設定された国の商品を、前記ユーザに提示する提示手段と、
を備える。

上記目的を達成するため、本発明に係る代替物取得支援方法は、
各国で販売されている商品と前記商品の属性とを対応付けて格納する商品データベースを作成するステップと、
少なくともユーザによって設定された国の情報と撮像された画像とを取得する取得ステップと、
前記撮像された画像を解析して前記画像に含まれる商品を特定し、前記商品データベースを参照して前記特定された商品の属性を判定する判定ステップと、
前記撮像された画像に含まれる商品が前記設定された国と異なる国の商品である場合、前記商品の属性が同一あるいは類似である前記設定された国の商品を検索する検索ステップと、
検索された前記設定された国の商品を、前記ユーザに提示する提示ステップと、
を含む。

本発明によれば、ユーザに、異なる国間の商品であっても互いに同一あるいは類似の商品を提示することができる。

本発明の第１実施形態に係る情報処理装置の構成を示すブロック図である。 本発明の第２実施形態に係る情報処理装置を含む情報処理システムの構成および動作を示す図である。 本発明の第２実施形態に係る情報処理システムにおける代替商品検索処理の概要を説明する図である。 本発明の第２実施形態に係る情報処理装置の機能構成を示すブロック図である。 本発明の第２実施形態に係る商品データベースの構成を示す図である。 本発明の第２実施形態に係る情報処理装置のハードウェア構成を示すブロック図である。 本発明の第２実施形態に係る情報処理装置の処理手順を示すフローチャートである。 本発明の第３実施形態に係る情報処理システムにおける代替商品検索処理の概要を説明する図である。 本発明の第３実施形態に係る商品データベースの構成を示す図である。 本発明の第４実施形態に係る情報処理装置を含む情報処理システムの構成および動作を示す図である。 本発明の第４実施形態に係る情報処理システムにおける代替商品検索処理の概要を説明する図である。 本発明の第５実施形態に係る情報処理システムにおける商品データベースの作成処理の概要を説明する図である。 本発明の第５実施形態に係るデータベース作成装置の機能構成を示すブロック図である。 本発明の第５実施形態に係る情報処理システムにおける代替商品検索処理の概要を説明する図である。 本発明の第５実施形態に係る情報処理装置の処理手順を示すフローチャートである。 本発明の第６実施形態に係る通信端末の機能構成を示すブロック図である。

以下に、図面を参照して、本発明の実施の形態について例示的に詳しく説明する。ただし、以下の実施の形態に記載されている構成要素は単なる例示であり、本発明の技術範囲をそれらのみに限定する趣旨のものではない。なお、以下の実施形態で使用される「滞在国」は、ユーザが現在滞在している国を示す文言であり、「出身国」は、ユーザが生まれた国に限定されず、その後生活している国、あるいは、長期に滞在していた国を含む、ユーザが親しんだ商品を販売している国を表わす文言である。

［第１実施形態］
本発明の第１実施形態としての情報処理装置１００について、図１を用いて説明する。情報処理装置１００は、撮像画像に含まれる商品と代替可能な異なる国の商品を提示する装置である。

図１に示すように、情報処理装置１００は、受信部１０１と、判定部１０２と、検索部１０３と、表示制御部１０４と、を含む。受信部１０１は、通信端末１２０から、少なくともユーザによって設定された国の情報と通信端末１２０が撮像した画像とを受信する。判定部１０２は、撮像された画像を解析して画像に含まれる商品を特定し、特定された商品の属性を判定する。検索部１０３は、撮像された画像に含まれる商品が設定された国とは異なる国で販売されている商品である場合、商品の属性が同一あるいは類似である設定された国の商品を検索する。表示制御部１０４は、検索された設定された国の商品を、通信端末１２０の表示部に表示させる。

さらに、情報処理装置１００は、商品データベース１０５を備える。商品データベース１０５は、各国が販売している商品と商品の属性とを対応付けて格納する。判定部１０２は、商品データベース１０５を参照して特定された商品の属性を判定する。検索部１０３は、商品データベース１０５から商品の属性が同一あるいは類似である商品を検索する。なお、商品データベース１０５は、情報処理装置１００の外部にあってもよい。

本実施形態によれば、通信端末が撮像した商品の画像に基づいて商品の属性が同一あるいは類似である商品を検索するので、ユーザに、不慣れな国（滞在国）と慣れている国（出身国）とで互いに同一あるいは類似の商品を提示することができる。

［第２実施形態］
次に、本発明の第２実施形態に係る情報処理装置について説明する。本実施形態に係る情報処理装置は、ユーザが滞在国で薬品のパッケージを撮像すると、出身国の同一あるいは類似の薬品やそのパッケージをユーザに提示する。また、ユーザが出身国の薬品のパッケージを撮像すると、滞在国の同一あるいは類似の薬品やそのパッケージをユーザに提示する。なお、以下の実施形態においては、情報処理装置としてのサーバが、通信端末から受信した撮像画像からパッケージ画像を抽出して、商品を特定する構成を説明する。しかしながら、通信端末において撮像画像から特徴量を抽出してサーバに特徴量を送信する構成、あるいは、通信端末において撮像画像からパッケージ画像を抽出してサーバに送信する構成であってもよい。

《情報処理システムの構成》
図２は、本実施形態に係る情報処理装置２１０を含む情報処理システム２００の構成および動作を示す図である。図２は、出身国が滞在国と異なる外国人が滞在国の薬局で薬品を購入しようとした場合の、本実施形態の代替物取得支援の手順を示している。

図２の上段は、出身国が滞在国と異なる外国人２３１が滞在国の薬局で薬品を購入しようとした場合である。外国人２３１は、薬局の薬品棚の置かれている薬品“ヨクナール”２０２を通信端末２２０のカメラで撮像する。通信端末２２０の表示画面２２１には、撮像した薬品“ヨクナール”のパッケージ画像を含む画像が表示される。そして、通信端末２２０から情報処理装置２１０としてのサーバに薬品“ヨクナール”のパッケージ画像を含む画像が送信される。

情報処理装置２１０は、薬品“ヨクナール”のパッケージ画像を含む画像から薬品“ヨクナール”のパッケージ画像を抽出して、商品データベース２１１を参照して、薬品“ヨクナール”であることを特定し、薬品“ヨクナール”の成分を判定する。なお、撮像画像からの商品のパッケージ画像の抽出や、パッケージ画像からの商品の特定は、種々の既存技術が使用されてよいが、高速でかつ精度の高い方法が望ましい。次に、情報処理装置２１０は、薬品“ヨクナール”の成分と同一あるいは類似する成分を有し、かつ、外国人２３１の出身国にある薬品を商品データベース２１１から検索する。そして、検索された薬品“gotbetter”の情報（パッケージ画像を含む）を通信端末２２０に送信する。

通信端末２２０は、検索された薬品“gotbetter”の情報（パッケージ画像を含む）を受信して、通信端末２２０の表示画面２２２に表示して、外国人２３１に、薬品“ヨクナール”２０２が出身国の薬品“gotbetter”を代替する薬品であることを提示する。なお、提示する代替商品の情報については、パッケージ画像と薬品名とを含むことが望ましいが、成分などの他の情報の提示については選択可能である。外国人２３１は、安心して薬品“ヨクナール”２０２を購入することができる。ここで、通信端末２２０は、ユーザにより、出身国と滞在国のいずれかの指定を受け付ける受付部と、画像を表示する表示部を備える構成としてもよい。なお、受付部は、出身国と滞在国の両方の指定を受け付ける構成とすることもできる。さらに、通信端末２２０は、受け付けた出身国または/および滞在国を通信端末２２０のメモリーに格納する構成とすることもできる。

一方、図２の下段には、出身国が滞在国と異なる外国人２３２が滞在国の薬局で薬品を購入しようとした場合である。外国人２３２は、出身国の所望の薬品の画像が印刷されたカタログやパンフレット２０３、または、出身国の所望の薬品のパッケージ画像２０４を、通信端末２２０で撮像する。通信端末２２０の表示画面２２３には、撮像した出身国の薬品のパッケージ画像を含む画像が表示される。そして、通信端末２２０から情報処理装置２１０に出身国の薬品のパッケージ画像を含む画像が送信される。

情報処理装置２１０は、出身国の薬品のパッケージ画像を含む画像からパッケージ画像を抽出して、商品データベース２１１を参照して、薬品を特定し、その薬品の成分を判定する。次に、情報処理装置２１０は、特定された薬品の成分と同一あるいは類似する成分を有し、かつ、外国人２３１の滞在国の薬局で販売している薬品を商品データベース２１１から検索する。そして、検索された滞在国の薬品“ヨクナール”の情報（パッケージ画像を含む）を通信端末２２０に送信する。

通信端末２２０は、検索された薬品“ヨクナール”の情報（パッケージ画像を含む）を受信して、通信端末２２０の表示画面２２４に表示して、外国人２３１に、出身国の薬品“gotbetter”を代替する薬品として薬品“ヨクナール”２０２があることを提示する。外国人２３１は、薬局において安心して薬品“ヨクナール”２０２を購入することができる。

（代替商品検索処理の概要）
図３は、本実施形態に係る情報処理システム２００における代替商品検索処理の概要を説明する図である。

図３のステップＳ３０１において、ユーザは通信端末２２０のカメラにより、例えば薬局の薬品棚に置かれた“ヨクナール”２０２のパッケージを撮像する。通信端末２２０は表示画面に“ヨクナール”のパッケージ画像を表示すると共に、画像データを情報処理装置としてのサーバに送信する。サーバでは、ステップＳ３０２においてユーザが撮像した画像を取得し、ユーザの出身国を取得する。なお、ユーザの出身国は、通信端末２２０で使用されている言語により判定してもよいし、通信端末２２０から取得してもよいし、あるいは、本アプリケーションへのユーザのアクセス時に取得してもよい。

サーバにおいては、ステップＳ３０３において、撮像画像から商品を抽出して商品ＩＤに紐付け、商品データベース２１１から商品ＩＤと販売国とに基づいて商品の属性の１つである成分を判定する。図３の例では、滞在国の日本で販売している“ヨクナール”２０２の成分（Ａ，Ｂ，Ｃ）が分かる。そして、サーバは、ステップＳ３０４において、成分（Ａ，Ｂ，Ｃ）と同一あるいは類似する成分の他国の薬品を検索する。図３の例では、成分が類似するα国の“gotbetter”（Ａ，Ｂ，Ｃ’）やβ国の“治療疾病”（Ａ，Ｂ"，Ｃ）が検索される。

そして、ユーザの出身国がα国であれば、ステップＳ３０５において、“gotbetter”３１２の薬品名や薬品のパッケージ画像がサーバから通信端末２２０に送信される。通信端末２２０の表示画面２２２には、薬品棚の“ヨクナール”がα国の“gotbetter”に相当することが提示され、α国のユーザは安心して“ヨクナール”を購入して飲むことができる。

《情報処理装置の機能構成》
図４は、本実施形態に係る情報処理装置２１０の機能構成を示すブロック図である。

情報処理装置２１０は、通信制御部４０１と、画像データ取得部４０２と、商品特定部４０３と、商品属性判定部４０４と、ユーザ出身国取得部４０５と、商品検索部４０６と、商品表示制御部４０７と、を備える。

通信制御部４０１は、ネットワークを介した通信端末２２０との通信を制御する。画像データ取得部４０２は、通信端末２２０が撮像して送信した商品を含む画像を取得する。商品特定部４０３は、画像データ取得部４０２が取得した画像から、その画像に含まれる商品を、例えば、パッケージ画像として抽出して商品を識別する商品識別子（以下、商品ＩＤ：Identifier）に対応付ける。商品属性判定部４０４は、商品データベース２１１を参照して、商品ＩＤに対応する商品の属性である、例えば商品の成分などを判定する。ユーザ出身国取得部４０５は、商品を含む画像を送信してきた通信端末２２０を携帯するユーザの出身国を、例えば、使用言語やＳＩＭ（Subscriber Identity Module）登録情報などから取得する。商品検索部４０６は、商品データベース２１１から、商品の属性が同一あるいは類似の滞在国と出身国間の対応商品を検索する。商品表示制御部４０７は、通信端末２２０の表示部に撮像した商品が滞在国の商品であれば検索結果の出身国の商品を表示させ、撮像した商品が出身国の商品であれば検索結果の滞在国の商品を表示させる。商品表示制御部４０７による表示の制御は、商品名でもよいが商品のパッケージ画像を表示させるのが望ましい。また、ユーザが確認するために、商品の属性を対比して表示させてもよい。商品データベース２１１は、商品属性判定部４０４が商品の属性を判定し、商品検索部４０６が商品の属性が同一あるいは類似の商品を検索するために用いられる。

なお、図４には、ユーザ滞在国取得部を設けていないが、ユーザ滞在国は情報処理装置２１０が存在する国としている。ここで、ユーザ滞在国取得部を設けてもよい。なお、ユーザ滞在国取得部は、通信端末２２０からユーザの滞在国の情報を取得してよく、位置情報を取得し、滞在国を決定するようにしてもよい。さらに、ユーザ滞在国取得部は、通信端末２２０からユーザの滞在国の情報と、出身国の情報を取得してよい。

（商品データベース）
図５は、本実施形態に係る商品データベース２１１の構成を示す図である。商品データベース２１１は、図５の構成に限定されない。例えば、商品データベース２１１には、商品特定部４０３が撮像画像から商品のパッケージ画像を抽出して商品を特定するためのデータを格納することもできる。

本例では、商品データベース２１１は、商品代替用データベース５１０と、類似条件テーブル５２０と、排除条件テーブル５３０と、を含む。

商品代替用データベース５１０は、撮像画像から抽出した商品の属性を判定し、商品の属性に基づいて、滞在国と出身国間で同一あるいは類似する商品を検察するために使用される。商品代替用データベース５１０は、商品ＩＤ５１１に対応付けて、商品種別５１２と、商品属性５１３と、パッケージ画像５１４と、を格納する。商品種別５１２には、薬品の商品分類や商品名などが含まれる。商品属性５１３には、薬品の成分や薬品などが含まれる。パッケージ画像５１４には、画像データや特徴量などが含まれる。この特徴量が、商品特定部４０３で使用されてもよい。そして、商品代替用データベース５１０には、各商品について滞在国や出身国となる販売国が格納される。

類似条件テーブル５２０は、滞在国と出身国間で商品が類似であると判定する場合の条件を格納する。類似条件テーブル５２０は、類似条件５２１に対応付けて、優先順位５２２と、他の類似条件との組合せ５２３などを格納する。類似条件５２１としては、本例の薬品の場合、成分数が所定数以上合致する場合、成分割合が所定閾値範囲内で合致する場合、主成分が一致する場合、データベース上で類似商品として登録されている場合、などが含まれる。さらに、成分が類似しなくとも“味が類似する”あるいは“形が類似する”というような場合も含まれてよい。

排除条件テーブル５３０は、滞在国と出身国間で商品が類似であっても、代替商品として提示しない排除条件を格納する。排除条件としては、本例の薬品の場合、異なる成分がアレルギー成分を含む場合、異なる成分が飲み合わせを禁止された成分を含む場合、異なる成分が遺伝子的影響成分を含む場合、などが含まれる。

《情報処理装置のハードウェア構成》
図６は、本実施形態に係る情報処理装置２１０のハードウェア構成を示すブロック図である。

図６で、ＣＰＵ(Central Processing Unit)６１０は演算制御用のプロセッサであり、プログラムを実行することで図４の機能構成部を実現する。ＣＰＵ６１０は複数のプロセッサを有し、異なるプログラムやモジュール、タスク、スレッドなどを並行して実行してもよい。ＲＯＭ(Read Only Memory)６２０は、初期データおよびプログラムなどの固定データおよびプログラムを記憶する。ネットワークインタフェース６３０は、ネットワークを介して、通信端末あるいは他のサーバとの通信を制御する。

ＲＡＭ(Random Access Memory)６４０は、ＣＰＵ６１０が一時記憶のワークエリアとして使用するランダムアクセスメモリである。ＲＡＭ６４０には、本実施形態の実現に必要なデータを記憶する領域が確保されている。撮像画像６４１は、通信端末２２０が撮像して情報処理装置２１０が受信した画像データを示す。抽出された商品６４２は、撮像画像６４１から抽出された商品の画像と商品を識別するデータを示す。ユーザ出身国／滞在国６４３は、通信端末１２０を携帯するユーザの出身国と、ユーザが現在滞在する滞在国とを示す。なお、滞在国は、通常であれば情報処理装置２１０が存在する国となるが、限定されるものではない。商品属性６４４は、抽出された商品６４２の成分などの商品を特定するデータである。代替商品（同一）６４４は、抽出された商品６４２と属性が同一の滞在国と出身国間の代替商品を示すデータであり、同一の代替商品のパッケージ画像を含む。代替商品（類似）６４５は、抽出された商品６４２と属性が類似の滞在国と出身国間の代替商品を示すデータであり、類似の代替商品のパッケージ画像を含む。送受信データ６４７は、ネットワークインタフェース６３０を介して送受信されるデータである。

ストレージ６５０は、データベースや各種のパラメータ、あるいは本実施形態の実現に必要な以下のデータまたはプログラムが記憶されている。商品データベース２１１は、図５に示したデータベースである。商品データベース２１１は、商品代替用データベース５１０と、類似条件テーブル５２０と、排除条件テーブル５３０と、を含む。

ストレージ６５０には、以下のプログラムが格納される。情報処理プログラム６５１は、情報処理装置２１０全体の情報処理を制御するプログラムである。商品画像受信モジュール６５２は、通信端末から商品を含む撮像画像に受信を制御するモジュールである。商品判定モジュール６５３は、商品データベース２１１を参照して、撮像画像から商品を抽出して、商品とその属性とを判定するモジュールである。代替商品検索モジュール６５４は、商品データベース２１１から、抽出された商品から、同一あるいは類似である滞在国と出身国間の代替商品を検索するモジュールである。代替商品表示制御モジュール６５５は、検索されたる滞在国と出身国間の代替商品を表示制御するモジュールである。

なお、図６のＲＡＭ６４０やストレージ６５０には、情報処理装置２１０が有する汎用の機能や他の実現可能な機能に関連するプログラムやデータは図示されていない。

《情報処理装置の処理手順》
図７は、本実施形態に係る情報処理装置２１０の処理手順を示すフローチャートである。このフローチャートは、図６のＣＰＵ６１０がＲＡＭ６４０を使用して実行し、図４の機能構成部を実現する。

情報処理装置２１０は、ステップＳ７０１において、ユーザが通信端末２２０で撮像して送信した商品を含む画像を取得する。情報処理装置２１０は、ステップＳ７０３において、ユーザの出身国を取得する。情報処理装置２１０は、ステップＳ７０５において、商品データベース２１１を参照して、取得画像を解析して含まれる商品の画像、例えば、商品のパッケージ画像を抽出して、商品を特定する。情報処理装置２１０は、ステップＳ７０７において、特定された商品ＩＤに基づいて、商品データベース２１１を参照して商品の属性を判定する。

情報処理装置２１０は、ステップＳ７０９において、商品データベース２１１から特定された商品ＩＤの属性と同一あるいは類似する対象国の商品を検索する。ここで対象国とは、通信端末２２０で撮像した商品が滞在国の商品であれば対象国はユーザの出身国であり、通信端末２２０で撮像した商品がユーザの出身国の商品であれば対象国は滞在国である。対象国の商品を検索するステップＳ７０９は、ステップＳ７９１とＳ７９３とＳ７０５とを含む。情報処理装置２１０は、ステップＳ７９１において、商品の属性が同一の商品があるか否かを判定する。同一の商品がなければ、情報処理装置２１０は、ステップＳ７９３において、商品の属性が類似の商品があるか否かを判定する。同一の商品がなく類似の商品がなければ、処理を終了する。同一の商品がある、あるいは、類似の商品がある場合、情報処理装置２１０は、ステップＳ７９５において、同一の商品や類似の商品で対象国が一致する商品があるか否かを判定する。対象国が一致する商品がなければ、処理を終了する。なお、ステップＳ７９１とＳ７９３とＳ７０５との配置は図７に限定されず、順番が逆であってもよい。

対象国が一致する商品があれば、情報処理装置２１０は、ステップＳ７１１において、検索結果の商品の情報を抽出する。提示情報が商品名や商品のパッケージ画像のみであれば、ステップＳ７１１はなくてもよい。情報処理装置２１０は、ステップＳ７１３において、商品を撮像した通信端末２２０に対象国の代替商品を提示して、通信端末２２０を携帯するユーザに通知する。

本実施形態によれば、ユーザが滞在国で滞在国または出身国の薬品のパッケージを撮像すると、同一あるいは類似の代替可能な薬品またはそのパッケージをユーザに提示することができる。

［第３実施形態］
次に、本発明の第３実施形態に係る情報処理装置について説明する。本実施形態に係る情報処理装置は、上記第２実施形態と比べると、薬品ではなく食品において、滞在国と出身国とで同一あるいは類似の食品を提示する点で異なる。その他の構成および動作は、第２実施形態と同様であるため、同じ構成および動作については同じ符号を付してその詳しい説明を省略する。

（代替商品検索処理の概要）
図８は、本実施形態に係る情報処理システム８００における代替商品検索処理の概要を説明する図である。なお、図８において、図３と同様の構成要素またはステップには同じ参照番号またはステップ番号を付与する。

図８のステップＳ３０１において、ユーザは通信端末２２０のカメラにより、例えばコンビニエンスストアの棚に置かれた“チョコレート”８０２のパッケージを撮像する。通信端末２２０は表示画面に“チョコレート”のパッケージ画像を表示すると共に、画像データを情報処理装置としてのサーバに送信する。サーバでは、ステップＳ３０２においてユーザが撮像した画像を取得し、ユーザの出身国を取得する。

サーバにおいては、ステップＳ３０３において、撮像画像から商品を抽出して商品ＩＤに紐付け、商品データベース８１１から商品ＩＤと販売国とに基づいて商品の属性の１つである味を判定する。図８の例では、滞在国の日本で販売している“チョコレート”８０２の味（ｄ，ｅ，ｆ）が分かる。そして、サーバは、ステップＳ３０４において、味（ｄ，ｅ，ｆ）と同一あるいは類似する味の他国の食品（あるいは、菓子）を検索する。図８の例では、味が類似するγ国の“ciocolato”（ｄ，ｅ，ｆ’）やδ国の“socola”（ｄ，ｅ"，ｆ）が検索される。

そして、ユーザの出身国がγ国であれば、ステップＳ３０５において、“ciocolato”８１３の菓子名や菓子のパッケージ画像がサーバから通信端末２２０に送信される。通信端末２２０の画面８２２には、棚の“チョコレート”がγ国の“ciocolato”に相当することが提示され、γ国のユーザは安心して“チョコレート”を購入して食べることができる。

（商品データベース）
図９は、本実施形態に係る商品データベース８１１の構成を示す図である。なお、図９の構成は図５の構成と類似である。商品データベース８１１は、図９の構成に限定されない。例えば、商品データベース８１１には、商品特定部４０３が撮像画像から商品のパッケージ画像を抽出して商品を特定するためのデータを格納することもできる。

本例では、商品データベース８１１は、商品代替用データベース９１０と、類似条件テーブル９２０と、排除条件テーブル９３０と、を含む。

商品代替用データベース９１０は、撮像画像から抽出した商品の属性を判定し、商品の属性に基づいて、滞在国と出身国間で同一あるいは類似する商品を検察するために使用される。商品代替用データベース９１０は、商品ＩＤ９１１に対応付けて、商品種別９１２と、商品属性９１３と、パッケージ画像９１４と、を格納する。商品種別９１２には、食品の商品分類や商品名などが含まれる。商品属性９１３には、食品の味や食感や香りなどが含まれる。パッケージ画像９１４には、画像データや特徴量などが含まれる。この特徴量が、商品特定部４０３で使用されてもよい。そして、商品代替用データベース９１０には、各商品について滞在国や出身国となる販売国が格納される。

類似条件テーブル９２０は、滞在国と出身国間で商品が類似であると判定する場合の条件を格納する。類似条件テーブル９２０は、類似条件９２１に対応付けて、優先順位９２２と、他の類似条件との組合せ９２３などを格納する。類似条件９２１としては、本例の食品の場合、味の要素が所定数以上合致する場合、味が所定閾値範囲内で合致する場合、料理後の食感や香りが一致する場合、データベース上で類似商品として登録されている場合、などが含まれる。さらに、味や食感が類似しなくとも“形が類似する”というような場合も含まれてよい。

排除条件テーブル９３０は、滞在国と出身国間で商品が類似であっても、代替商品として提示しない排除条件を格納する。排除条件としては、本例の食品の場合、アレルギー成分を含む場合、食べ合わせを禁止された成分を含む場合、遺伝子的影響成分を含む場合、などが含まれる。

本実施形態によれば、ユーザが滞在国で滞在国または出身国の食品のパッケージを撮像すると、同一あるいは類似の代替可能な食品またはそのパッケージをユーザに提示することができる。

［第４実施形態］
次に、本発明の第４実施形態に係る情報処理装置について説明する。本実施形態に係る情報処理装置は、上記第２実施形態および第３実施形態と比べると、滞在国の商品データベースのみでなく、世界各国の商品データベースを参照して滞在国と出身国とで同一あるいは類似の商品を提示する点で異なる。その他の構成および動作は、第２実施形態や第３実施形態と同様であるため、同じ構成および動作については同じ符号を付してその詳しい説明を省略する。

《情報処理システムの構成》
図１０は、本実施形態に係る情報処理装置としてのサーバ１０１０を含む情報処理システム１０００の構成および動作を示す図である。

図１０においては、世界各国のサーバ１０１０〜１０１ｎに蓄積された商品データベースを参照して、滞在国と出身国間で同一あるいは類似する商品を検索して、ユーザに提示する。例えば、サーバ１０１０が日本にあって日本の商品を蓄積した商品データベースを有し、サーバ１０１１がアメリカにあってアメリカの商品を蓄積した商品データベースを有し、サーバ１０１５が中国にあって中国の商品を蓄積した商品データベースを有しているとする。

そして、中国人が日本の食品店において、通信端末２２０によって食品のパッゲージ画像を撮像してサーバ１０１０に送信すると、サーバ１０１０は食品のパッゲージ画像に基づいて食品の味を判定する。サーバ１０１０はサーバ１０１５と接続して、味が同一あるいは類似する中国の食品をサーバ１０１５の商品データベースを検索することによって特定し、通信端末２２０を携帯する日本滞在の中国人に提示する。また、日本人がアメリカの薬局において、通信端末２２０によって薬品のパッゲージ画像を撮像してサーバ１０１１に送信すると、サーバ１０１１は薬品のパッゲージ画像に基づいて薬品の成分を判定する。サーバ１０１１はサーバ１０１０と接続し、成分が同一あるいは類似する日本の薬品をサーバ１０１５の商品データベースを検索することによって特定し、通信端末２２０を携帯するアメリカ滞在の日本人に提示する。

（代替商品検索処理の概要）
図１１は、本実施形態に係る情報処理システム１０００における代替商品検索処理の概要を説明する図である。なお、図１１において、図３または図８と同様の構成要素またはステップには同じ参照番号またはステップ番号を付与する。

図１１において、ステップＳ３０１において、ユーザは通信端末２２０のカメラにより、例えば薬局の薬品棚に置かれた“ヨクナール”２０２のパッケージを撮像する。通信端末２２０は表示画面に“ヨクナール”のパッケージ画像を表示すると共に、画像データを情報処理装置としてのサーバ１０１０に送信する。サーバ１０１０では、ステップＳ３０２においてユーザが撮像した画像を取得し、ユーザの出身国を取得する。

サーバ１０１０においては、ステップＳ３０３において、撮像画像から商品を抽出して商品ＩＤに紐付け、商品データベース１１１１から商品ＩＤと販売国とに基づいて商品の属性の１つである成分を判定する。図１０の例では、滞在国の日本で販売している“ヨクナール”２０２の成分（Ａ，Ｂ，Ｃ）１１２１が分かる。

次に、サーバ１０１０は、ステップＳ１１０４において、成分（Ａ，Ｂ，Ｃ）１１２１と同一あるいは類似する成分の他国の薬品を、他国のサーバ１０１ｎの商品データベース１１１ｎなどから検索する。図１０の例では、成分が類似するα国の“gotbetter”（Ａ，Ｂ，Ｃ’）１１２ｎがα国の商品データベース１１１ｎから検索される。そして、ユーザの出身国がα国であれば、ステップＳ１１０５において、“gotbetter”の薬品名や薬品のパッケージ画像がサーバから通信端末２２０に送信されて、通信端末２２０の表示画面２２２には、薬品棚の“ヨクナール”がα国の“gotbetter”に相当することが提示される。α国のユーザは安心して“ヨクナール”を購入して飲むことができる。

本実施形態によれば、滞在国の商品データベースに登録されていない商品についても検索することができる。

［第５実施形態］
次に、本発明の第５実施形態に係る情報処理装置について説明する。本実施形態に係る情報処理装置は、上記第２実施形態乃至第４実施形態と比べると、同一あるいは類似の代替可能な商品について、あらかじめパッケージ画像対パッケージ画像の商品データベースを作成しておく点で異なる。その他の構成および動作は、第２実施形態から第４実施形態と同様であるため、同じ構成および動作については同じ符号を付してその詳しい説明を省略する。

（商品データベースの作成処理の概要）
図１２は、本実施形態に係る情報処理システム１２００における商品データベース１２１１の作成処理の概要を説明する図である。

図１２のステップＳ１２１１において、日本のユーザは通信端末２２０のカメラにより、“ヨクナール”２０２のパッケージを撮像する。通信端末２２０は表示画面１２２１に“ヨクナール”のパッケージ画像を表示すると共に、画像データをサーバに送信する。サーバは、ステップＳ１２１３において、“ヨクナール”のパッケージ画像を、商品ＩＤ、販売国、成分などと関連付けて商品データベース１２３１に格納する。

一方、図１２のステップＳ１２ｎ１において、アメリカのユーザは通信端末２２０のカメラにより、“gotbetter”１２０２のパッケージを撮像する。通信端末２２０は表示画面１２２２に“gotbetter”のパッケージ画像を表示すると共に、画像データをサーバに送信する。サーバは、ステップＳ１２ｎ３において、“ヨクナール”のパッケージ画像を、商品ＩＤ、販売国、成分などと関連付けて商品データベース１２３ｎに格納する。

そして、本実施形態の商品データベース作成装置は、ステップＳ１２２５において、商品データベース１２３１〜１２３ｎを検索して、成分が同一あるいは類似する商品群をまとめて、商品データベース１２１１に格納する。商品データベース１２１１には、成分が同一あるいは類似する商品群と、そのパッケージ画像１２１２とが対応付けられて格納される。したがって、この商品データベース１２１１を使用することで、通信端末２２０で撮像したパッケージ画像に対応する代替商品のパッケージ画像が直接に取得されるので、サーバに負荷をかけず迅速に、かつ、ユーザに一目で判断できる代替商品の情報を、通信端末２２０によりユーザに提示することができる。

《データベース作成装置の機能構成》
図１３は、本実施形態に係るデータベース作成装置１３１０の機能構成を示すブロック図である。なお、図１３において、図１２と同様の構成要素には同じ参照番号を付して、重複する説明を省略する。また、データベース作成装置１３１０は、代替商品を提示する情報処理装置２１０と統合されて、商品データベースの作成処理と、その商品データベースを用いた滞在国と出身国間の代替商品の提示処理とを行なってもよい。

データベース作成装置１３１０は、通信制御部１３０１と、商品情報取得部１３０２と、代替商品判定部１３０３と、代替商品画像関係生成部１３０４と、代替商品画像関係提供部１３０５と、を備える。

通信制御部１３０１は、データベース作成装置１３１０と、世界各国の商品データベース１２３１〜１２３ｎおよび代替商品画像関係を格納する商品データベース１２１１との通信を制御する。商品情報取得部１３０２は、世界各国の商品データベース１２３１〜１２３ｎから商品情報を収集する。例えば、商品情報には、商品が薬品であれば商品名（ＩＤ）、成分、パッケージ画像が含まれる。代替商品判定部１３０３は、商品情報取得部１３０２が収集した商品情報から、成分が同一あるいは類似であり代替可能な薬品を判定する。

代替商品画像関係生成部１３０４は、代替商品判定部１３０３が判定した成分が同一あるいは類似であり代替可能な薬品のパッケージ画像を関係付けて記憶する。代替商品画像関係提供部１３０５は、薬品のパッケージ画像を関係付けたまま、代替商品画像関係を格納する商品データベース１２１１に提供する。

（代替商品検索処理の概要）
図１４は、本実施形態に係る情報処理システム１２００における代替商品検索処理の概要を説明する図である。なお、図１４において、図３、図８または図１１と同様の構成要素またはステップには同じ参照番号またはステップ番号を付与する。

図１４において、ステップＳ３０１において、ユーザは通信端末２２０のカメラにより、例えば薬局の薬品棚に置かれた“ヨクナール”２０２のパッケージを撮像する。通信端末２２０は表示画面に“ヨクナール”のパッケージ画像を表示すると共に、画像データを情報処理装置としてのサーバに送信する。サーバでは、ステップＳ３０２においてユーザが撮像した画像を取得し、ユーザの出身国を取得する。

サーバは、ステップＳ３０４において、データベース作成装置１３１０により作成されたパッケージ画像を関連付けて格納する商品データベース１２１１から、“ヨクナール”と同一あるいは類似する他国の薬品のパッケージ画像を検索する。図１４の例では、あらかじめ対応付けられたα国の“gotbetter”（Ａ，Ｂ，Ｃ’）やβ国の“治療疾病”（Ａ，Ｂ"，Ｃ）が検索される。

そして、ユーザの出身国がα国であれば、ステップＳ３０５において、“gotbetter”３１２のパッケージ画像がサーバから通信端末２２０に送信される。通信端末２２０の表示画面２２２には、薬品棚の“ヨクナール”がα国の“gotbetter”に相当することが提示され、α国のユーザは安心して“ヨクナール”を購入して飲むことができる。

《情報処理装置の処理手順》
図１５は、本実施形態に係る情報処理装置の処理手順を示すフローチャートである。なお、図１５において、図７または図１２と同様の構成要素およびステップには同じ参照番号およびステップ番号を付して、重複する説明は省略する。

データベース作成装置は、ステップＳ１５０１において、商品データベース１２３１〜１１３ｎから、商品を撮像した画像（パッケージ画像）、商品の販売国および商品の成分を、対応付けて収集する。そして、データベース作成装置は、ステップＳ１５０３において、成分が同一あるいは類似する商品の画像を対応付けて、代替商品画像関係を格納する商品データベース１２１１に格納する。

情報処理装置は、ステップＳ１５０９において、成分による判定なしに代替商品画像関係を格納する商品データベース１２１１により対象国の対応商品を検索して、対象国のパッケージ画像を特定する。ステップＳ１５０９で、情報処理装置は、ステップＳ１５９１において、代替商品画像関係を格納する商品データベース１２１１に既にパッケージ画像が対応付けて格納された、同一あるいは類似の商品があるか否かを判定する。同一あるいは類似の商品がなければ、処理を終了する。同一あるいは類似の商品があり対象国が一致すれば、情報処理装置は、ステップＳ７１３において、対象国の代替商品のパッケージ画像をユーザの通信端末２２０に提示する。

本実施形態によれば、滞在国と出身国とで同一あるいは類似の商品について、あらかじめパッケージ画像とパッケージ画像とを対応付けて格納しているので、サーバに負荷をかけず迅速に、かつ、ユーザに一目で判断できる代替商品の情報を提示することができる。

なお、本実施形態においては、複数の商品データベース１２３１〜１２３ｎから、各国の代替商品をまとめた商品データベース１２１１を作成する例を示したが、例えば、複数の商品データベース１２３１〜１２３ｎをＳＮＳ(Social Networking Service)におけるＷｅｂ上のつぶやきや口コミを蓄積したデータベースとし、それらのつぶやきや口コミを分析して各国の代替商品を抽出して、商品データベース１２１１にまとめる構成に変形することもできる。このように生成した商品データベース１２１１を用いることで、言葉では表現できない感覚の類似なども判定に含めることもできる。

［第６実施形態］
次に、本発明の第６実施形態に係る通信端末について説明する。本実施形態に係る通信端末は、上記第２実施形態乃至第５実施形態と比べると、通信端末において、同一あるいは類似の代替可能な商品について検索してユーザに提示する処理を完結する点で異なる。その他の構成および動作は、第２実施形態から第５実施形態と同様であるため、同じ構成および動作については同じ符号を付してその詳しい説明を省略する。

図１６は、本実施形態に係る通信端末１６２０の機能構成を示すブロック図である。なお、図１６において、図４の情報処理装置２１０が有する機能構成部と同様の構成には同じ参照番号を付して、重複する説明は省略する。

通信端末１６２０は、情報処理装置２１０の機能構成部に加えて、撮像部１６２１と、操作部１６２２と、表示部１６２３と、を備える。撮像部１６２１は、ユーザが求める商品を含む画像を撮像する。操作部１６２２は、ユーザの出身地や滞在地を含むデータをユーザの指示により入力する。表示部１６２３は、商品表示制御部４０７の表示制御に従って、属性が同一あるいは類似である異なる国の商品をユーザに提示する。なお、商品データベース２１１の内容は、あらかじめ格納されていてもよいし、本実施形態の代替物取得支援のアプリケーションを起動した時点、あるいは、実行中に滞在国の情報処理装置（サーバ）または対応国の情報処理装置（サーバ）から取得してもよい。

本実施形態によれば、通信端末により代替物取得支援の処理が完結するので、サーバとの通信なしに、あるいは、個人情報を秘匿して代替商品の情報を提示することができる。

［他の実施形態］
なお、上記実施形態においては、ユーザが滞在国と出身国とで同一あるいは類似の商品を知りたい対象商品として、薬品と食品とを代表させて説明したが、これに限定されない。他の、ユーザが滞在国と出身国とで同一あるいは類似の商品を知りたい対象商品となるものであれば、本発明の適用および効果の達成が可能である。例えば、対象商品としては、同一あるいは類似の評価が見た目ではなく商品の内部にあるもの、また、同一あるいは類似の評価が五感による主観的な感覚にあるもの、などがある。その場合には、成分や味、食感などに限定されず、その商品特有の原料や印象なども考慮されることになる。

また、上記実施形態においては、通信端末のカメラで商品のパッケージ画像を撮像する例を示したが、出身国や滞在国の代替商品の情報を要求する入力情報としては、商品に添付されたバーコード情報、あるいは、分かるのであれば商品名や商品コードを入力することで、他国の代替商品を提示する構成であってもよい。

また、実施形態を参照して本願発明を説明したが、本願発明は上記実施形態に限定されるものではない。本願発明の構成や詳細には、本願発明のスコープ内で当業者が理解し得る様々な変更をすることができる。また、それぞれの実施形態に含まれる別々の特徴を如何様に組み合わせたシステムまたは装置も、本発明の範疇に含まれる。

また、本発明は、複数の機器から構成されるシステムに適用されてもよいし、単体の装置に適用されてもよい。さらに、本発明は、実施形態の機能を実現する情報処理プログラムが、システムあるいは装置に直接あるいは遠隔から供給される場合にも適用可能である。したがって、本発明の機能をコンピュータで実現するために、コンピュータにインストールされるプログラム、あるいはそのプログラムを格納した媒体、そのプログラムをダウンロードさせるＷＷＷ(World Wide Web)サーバも、本発明の範疇に含まれる。特に、少なくとも、上述した実施形態に含まれる処理ステップをコンピュータに実行させるプログラムを格納した非一時的コンピュータ可読媒体（non-transitory computer readable medium）は本発明の範疇に含まれる。

Claims (12)

1. 通信端末から、少なくともユーザによって設定された国の情報と前記通信端末が撮像した画像とを受信する受信手段と、
   前記撮像された画像を解析して前記画像に含まれる商品を特定し、前記特定された商品の属性を判定する判定手段と、
   前記撮像された画像に含まれる商品が前記設定された国とは異なる国で販売されている商品である場合、前記商品の属性が同一あるいは類似である前記設定された国の商品を検索する検索手段と、
   検索された前記設定された国の商品を、前記通信端末の表示部に表示させる表示制御手段と、
   を備える情報処理装置。
2. 前記設定された国は、前記ユーザが現在滞在している国と前記ユーザが住んでいる国とのすくなくとも一方である、請求項１に記載の情報処理装置。
3. 前記検索手段は、前記画像に含まれる商品が、前記ユーザが現在滞在している国で販売されている商品である場合、前記商品の属性が同一あるいは類似である前記ユーザが住んでいる国の商品を検索し、前記画像に含まれる商品が、前記ユーザが住んでいる国で販売されている商品である場合、前記商品の属性が同一あるいは類似である前記ユーザが滞在している国の商品を検索する、請求項１または２に記載の情報処理装置。
4. 各国で販売されている商品と前記商品の属性とを対応付けて格納する商品データベースをさらに備え、
   前記判定手段は、前記商品データベースを参照して前記特定された商品の属性を判定し、
   前記検索手段は、前記商品データベースから前記商品の属性が同一あるいは類似である商品を検索し、
   前記表示制御手段は、検索された前記商品を前記通信端末の表示部に表示させる、請求項１乃至３のいずれか１項に記載の情報処理装置。
5. 前記商品は薬品または食品を含み、前記商品の属性は、前記商品の成分、前記商品の味および前記商品の食感の少なくとも１つを含む、請求項１乃至４のいずれか１項に記載の情報処理装置。
6. 前記類似である商品は、前記成分の所定数以上が合致する場合、前記成分の割合が所定閾値範囲内で合致する場合、主の前記成分が一致する場合、類似の商品として登録されている場合、を含む、請求項５に記載の情報処理装置。
7. 前記検索手段は、前記商品が薬品の場合は前記成分が多い薬品または飲み合わせを禁止された薬品の検索を排除し、前記商品が食べ物の場合は食べ合わせを禁止された薬品の検索を排除する、請求項５または６に記載の情報処理装置。
8. 通信端末から、少なくともユーザによって設定された国の情報と前記通信端末が撮像した画像とを受信する受信ステップと、
   前記撮像された画像を解析して前記画像に含まれる商品を特定し、前記特定された商品の属性を判定する判定ステップと、
   前記撮像された画像に含まれる商品が前記設定された国とは異なる国で販売されている商品である場合、前記商品の属性が同一あるいは類似である前記設定された国の商品を検索する検索ステップと、
   検索された前記設定された国の商品を、前記通信端末の表示部に表示させる表示制御ステップと、
   を含む情報処理方法。
9. 通信端末から、少なくともユーザによって設定された国の情報と前記通信端末が撮像した画像とを受信する受信ステップと、
   前記撮像された画像を解析して前記画像に含まれる商品を特定し、前記特定された商品の属性を判定する判定ステップと、
   前記撮像された画像に含まれる商品が前記設定された国とは異なる国で販売されている商品である場合、前記商品の属性が同一あるいは類似である前記設定された国の商品を検索する検索ステップと、
   検索された前記設定された国の商品を、前記通信端末の表示部に表示させる表示制御ステップと、
   をコンピュータに実行させる情報処理プログラム。
10. 少なくとも、第１国の第１商品と前記第１商品の属性と前記第１商品を撮像した第１画像とを対応付けて格納する第１商品データベースと、第２国の第２商品と前記第２商品の属性と前記第２商品を撮像した第２画像とを対応付けて格納する第２商品データベースとから商品データを収集する収集手段と、
    前記第１商品の属性と前記第２商品の属性とが同一あるいは類似である場合、前記第１国と前記第２国との対応商品として、前記第１画像と前記第２画像とを対応つけて商品データベースに格納する格納手段と、
    を備えるデータベース作成装置。
11. 各国で販売されている商品と前記商品の属性とを対応付けて格納する商品データベースと、
    少なくとも、ユーザによって設定された国の情報と撮像された画像とを取得する取得手段と、
    前記撮像された画像を解析して前記画像に含まれる商品を特定し、前記商品データベースを参照して前記特定された商品の属性を判定する判定手段と、
    前記撮像された画像に含まれる商品が前記設定された国とは異なる国で販売されている商品である場合、前記商品データベースを参照して、前記商品の属性が同一あるいは類似である前記設定された国の商品を検索する検索手段と、
    検索された前記設定された国の商品を、前記ユーザに提示する提示手段と、
    を備える情報処理システム。
12. 各国で販売されている商品と前記商品の属性とを対応付けて格納する商品データベースを作成するステップと、
    少なくともユーザによって設定された国の情報と撮像された画像とを取得する取得ステップと、
    前記撮像された画像を解析して前記画像に含まれる商品を特定し、前記商品データベースを参照して前記特定された商品の属性を判定する判定ステップと、
    前記撮像された画像に含まれる商品が前記設定された国と異なる国の商品である場合、前記商品の属性が同一あるいは類似である前記設定された国の商品を検索する検索ステップと、
    検索された前記設定された国の商品を、前記ユーザに提示する提示ステップと、
    を含む代替物取得支援方法。

Images