JP6050473B2 - 保管位置におけるアイテムの位置決めを補助するための方法 - Google Patents

保管位置におけるアイテムの位置決めを補助するための方法 Download PDF

Info

Publication number
JP6050473B2
JP6050473B2 JP2015500391A JP2015500391A JP6050473B2 JP 6050473 B2 JP6050473 B2 JP 6050473B2 JP 2015500391 A JP2015500391 A JP 2015500391A JP 2015500391 A JP2015500391 A JP 2015500391A JP 6050473 B2 JP6050473 B2 JP 6050473B2
Authority
JP
Japan
Prior art keywords
item
mobile device
information
product
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2015500391A
Other languages
English (en)
Other versions
JP2015517137A (ja
Inventor
ジョシュア・カーニー
ヘンリク・カーレン
Original Assignee
エスセーアー・ハイジーン・プロダクツ・アーベー
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by エスセーアー・ハイジーン・プロダクツ・アーベー filed Critical エスセーアー・ハイジーン・プロダクツ・アーベー
Publication of JP2015517137A publication Critical patent/JP2015517137A/ja
Application granted granted Critical
Publication of JP6050473B2 publication Critical patent/JP6050473B2/ja
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00Administration; Management
    • G06Q10/08Logistics, e.g. warehousing, loading or distribution; Inventory or stock management
    • G06Q10/087Inventory or stock management, e.g. order filling, procurement or balancing against orders
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/40Information retrieval; Database structures therefor; File system structures therefor of multimedia data, e.g. slideshows comprising image and additional audio data
    • G06F16/43Querying
    • G06F16/432Query formulation
    • G06F16/434Query formulation using image data, e.g. images, photos, pictures taken by a user
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00Commerce
    • G06Q30/06Buying, selling or leasing transactions
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/70Determining position or orientation of objects or cameras
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W4/00Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/02Services making use of location information
    • H04W4/029Location-based management or tracking services
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10016Video; Image sequence
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W4/00Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/80Services using short range communication, e.g. near-field communication [NFC], radio-frequency identification [RFID] or low energy communication

Landscapes

  • Engineering & Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Economics (AREA)
  • Accounting & Taxation (AREA)
  • Finance (AREA)
  • Development Economics (AREA)
  • General Business, Economics & Management (AREA)
  • Strategic Management (AREA)
  • Marketing (AREA)
  • General Engineering & Computer Science (AREA)
  • Operations Research (AREA)
  • Tourism & Hospitality (AREA)
  • Quality & Reliability (AREA)
  • Human Resources & Organizations (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Computer Graphics (AREA)
  • Mathematical Physics (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Multimedia (AREA)
  • Software Systems (AREA)
  • Computer Hardware Design (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)
  • Image Analysis (AREA)
  • User Interface Of Digital Computer (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Description

本発明は、保管位置における少なくとも1つのアイテムが存在する位置決めを補助するための方法に関する。本発明はまた、保管位置における少なくとも1つのアイテムの位置決めを補助するためのコンピュータプログラム、および、保管位置における少なくとも1つのアイテムの位置決めを補助するためのモバイルデバイスに関する。
今日、小売店舗、スーパーマーケット、およびその他の店(store)のような店舗(shop)が、店舗における通路を形成する棚に配置および展示された、多種にわたる製品(products)および商品(goods)を販売することは通常のことである。
特に、大きなスーパーマーケットは、様々な納入業者から非常に大量の様々な製品を売り出してもよい。このため、時として、消費者が展示された製品の非常に広い選択肢の中で、ある所望の製品の位置を知ることが非常に難しくなることがある。
特に、いくつかのエリアや、ある種類の商品においては、例えばスーパーマーケットに内の消費者が特定の製品カテゴリ内の、異なるが、しかし同じような製品を実際に識別することも、難しいことがある。その結果、消費者は2つの問題に直面したであろう。第1には、スーパーマーケットの環境などにおいて、特定の種類の製品の実際の位置を知ること、第2には、各製品カテゴリ内から、様々な製造業者および納入業者からの様々な製品を実際に識別できることである。
消費者が特定の所望の製品の位置を実際に知るのが特に難しいことがある1つの特定の製品分野は、特に吸収性(absorbent)物品の形式の衛生用製品の分野である。そのような物品は、生理用ナプキンなどの女性用衛生製品、または代替的にはオムツなどのベビー製品、または代替的には、男性および女性の両方のための失禁用製品の形式で販売される。これらの種類の製品は全て、一見してパッケージされ、販売され、売られる方法がほとんど同じようであることがある。吸収性衛生用製品の製品名はお互いに識別するのが難しいことがある。また、これらの種類の製品は全て、一般的には、例えばスーパーマーケットの同じエリアに位置することがある。
要約すれば、吸収性製品の消費者は、非常に幅広い範囲の製造業者および製品の種類に直面することがある。これらの製品は全て、同じようなデザインのパッケージであり、かつ同じような製品名称で売り出されるため、消費者を混乱させることがある。
その結果、本分野内の製品の分類は、消費者が理解するには複雑かつ難解に見える可能性がある。また、吸収性衛生用製品は、時として(店舗またはスーパーマーケット内の)見つけるのが容易ではない棚、または消費者が直接的な注意を引かないであろう場所に配置されることを意味する、「劣った棚の配置(poor self placement)」に悩まされることがある。
要約すれば、消費者が、今日のマーケットおける衛生用製品の全体の範囲を理解し、把握することが困難であるいうことが理解される。
例えばスーパーマーケットにおける消費者が特定の製品を発見するためなどのユーザを補助するための現代のコンピュータに基づくシステムの使用が先に知られている。例えば米国特許文献2010/0013662は、特定の製品または製品が位置する棚に位置するRFIDデバイスを使用した製品位置決めシステムに関する。消費者は、スーパーマーケット内に据え付けられたコンピュータ端末上で製品説明についての情報を入力することができ、RFIDデバイスは、その後コンピュータ端末に当該の製品の位置を示す信号を返す。
さらに、米国特許文献2012/0023034は、店内の製品が位置インジケータ(location indicator)を備える、店の商品を位置決めするためのシステムを開示する。店内の消費者は、製品の位置についての情報が格納されたデータベースにアクセスすることによって、製品を発見することができる。
しかし、上述のシステムおよび方法は、所望の製品を発見することにおける店舗内の消費者などのユーザを助けることに関するが、それらは不必要に複雑で、消費者が使用するのが難しいと了解される。従って、スーパーマーケットまたは同様の保管位置内の製品などのアイテムにおいて、使用するのが容易で、消費者を補助するための明確で有益な情報を与える改善されたシステムおよび方法が必要である。
従って、本発明の目的は、上述の問題を解決し、例えば吸収性製品などの特定の製品のユーザを補助するのに使用可能な、例えばスーパーマーケット、卸売店(warehouse)などの保管位置における製品などの位置決めをするために使用可能な方法を提供することである。
特に、本発明の目的は、使用するのが容易で、保管位置における所望の製品の位置について、モバイルデバイス上でユーザに明確な情報を与えるための方法およびデバイスを提供することである。
本発明のさらに別の目的は、吸収性衛生製品などの製品のユーザが、製品の位置を発見することに加えて、製品関連情報を入手することを容易にする方法を提供することである。
これらおよび他の主題は、画像キャプチャデバイスを備えるモバイルデバイスによって実行される、少なくとも以下のステップ、すなわち、画像キャプチャデバイスの手段によって、保管位置を表現する、少なくとも1つの画像またはビデオシーケンスまたはライブビデオフィードをキャプチャリングするステップと、画像キャプチャデバイスの視野内のアイテムの任意の存在を認識するステップと、アイテムの位置に関する情報を提示するステップとを備える、少なくとも1つのアイテムが存在する位置決めを補助するための方法によって達成される。
本発明は、モバイルデバイス(例えば携帯電話)に設けられた従来型のカメラなどの画像キャプチャデバイスを備えたモバイルデバイスが、製品が位置すると思われる保管位置の画像またはビデオシーケンスをキャプチャリングするために、保管スペースの少なくともあるセクションをスキャンするために使用されることが可能であるという洞察に依存する。
さらに、モバイルデバイスは、所望の製品がカメラのスキャンしたフィールド内に位置するかどうかを認識するための適切なソフトウェアを含む。これは、製品のグラフィック表現がソフトウェアによって検出および識別されることが可能な、キャプチャされた画像またはビデオシーケンスの画像解析の使用を介して取得されることが可能である。製品が識別された場合、ソフトウェアは、好ましくは、モバイルデバイスのディスプレイ上に適切な情報を含むことによって、それをモバイルデバイスのユーザにすぐに示す。
キャプチャされた1つまたは複数の画像は、1つまたは複数の単一の画像、記録されたビデオシーケンス、またはライブビデオフィード、すなわちライブストリーミングビデオシーケンスの形式であってもよいことに留意されたい。
モバイルデバイスが製品に関する情報を提示するのに使用可能であるという事実によって、ユーザが製品の実際の位置を発見することを可能にする情報に加えて、ユーザは、適切な製品を選択するためにそのような情報を取得することが可能である。そのような情報は、製品の特質(property)、価格、または品質を反映することが可能である。そのような製品関連情報は、モバイルデバイスおよび/またはモバイルデバイスが通信可能に接続可能な通信デバイス(例えば別のモバイルデバイス)上で、視覚、聴覚、触覚、もしくはそれ以外の物理的手段、またはそのような手段の任意の組み合わせによって提供されることが可能である。
携帯電話、いわゆるスマートフォン、パーソナルデジタルアシスタント(PDA)、またはタブレットコンピュータなどのような画像キャプチャデバイスを備えるモバイルデバイスの使用は、そのようなモバイルデバイスを所有している誰もが本方法を容易に利用可能とする。
本方法は、コンピュータプログラムの実行を通じてモバイルデバイスによって実行され、好ましい実施形態において、アプリケーションプログラム(モバイルデバイスのユーザが特定のタスクを実行するのを助けるように設計されたソフトウェアの一部を説明するために使用され、以降、「App」または「アプリケーション」として参照される)の形式で実現される。Appは、モバイルデバイスの記憶媒体にダウンロード可能であるように適宜配置される。
本方法が実際のモバイルデバイスの中にダウンロードされてもよいAppの実行を介して行われるようにすることで、本方法は任意のユーザに容易に利用可能となる。
本方法を実行するために、モバイルデバイスはユーザによって所望の製品が置かれていることが期待される保管スペースの少なくともセクションをスキャンするために使用可能な場所に適切に位置する。好ましくは、画像キャプチャデバイスは、比較的高解像度の画像を登録するのに十分な感度であるカメラである。
画像をキャプチャリングするステップの結果は、高解像度カメラが使用され、モバイルデバイスが使用される吸収性製品に適切な距離で安定して保持される場合により信頼度の高いものであってよい。
要約すれば、これは、所望の製品の位置についての明確な表示、および必要に応じ特質が、保管スペースの実際のスキャニングの間、モバイルデバイスのグラフィカルユーザインターフェースを介してユーザに提供されることが可能であることを意味する。
さらに、本発明は、この目的でモバイルデバイス内に統合される光源を適切に使用させる。これは、自然光の条件が不十分である場所で撮影するために使用される光源を使用する、従来型の携帯電話の場合である。その結果、本発明は、画像キャプチャリングステージの間、保管位置をモバイルデバイスの統合された光源で照明するステップを適切に含む。代替的には、本発明は分離した、すなわち、モバイルデバイスの統合された部分である必要がない光源の補助で画像のキャプチャリングのために使用されることが可能である。
画像キャプチャリングは、少なくとも2つの方法、画像キャプチャデバイスが製品のいずれかの1枚の単一の画像をキャプチャすることで使用されるか、または、画像キャプチャデバイスがビデオもしくは複数の画像、スキャニング中の画像のシーケンス、もしくはモバイルデバイスが保管位置に沿ったスワイピングを取得することで使用されるかで実行される。これらの種類の方法の両方が、モバイルデバイスのプロセッサが当該の製品はどこに位置するのかを判定することを可能とするために、ユーザが画像情報をモバイルデバイスのソフトウェアに入力することを可能とする。
上述したように、本方法は、コンピュータプログラムの実行を通じてモバイルデバイスによって実行される、コンピュータで実装される方法であってよい。従って、本発明の別の態様によれば、保管位置における少なくとも1つのアイテムの位置決めを補助するためのコンピュータプログラムが提供される。マイクロプロセッサによって実行されるとき、コンピュータプログラムは上述のような方法を実行するように構成される。本発明は、コンピュータ可読命令を記憶する不揮発性メモリを含むコンピュータプログラム製品もまた提供し、上述のコンピュータプログラムは、不揮発性メモリ上にエンコードされる。
さらに、本発明は、保管位置における製品の位置決めにおける、ユーザを補助するためのモバイルデバイスに関し、モバイルデバイスは、画像キャプチャデバイス、プロセッサおよび上記プロセッサによって実行可能なコンピュータプログラムを記憶するための記憶媒体を含む。また、記憶媒体は上述のコンピュータプログラムを記憶する。
当該の製品、例えば、本発明のユーザが保管位置(例えば、スーパーマーケットでありうる)において探索することが期待されることが可能なアイテムは、それが保管スペースに位置する限りにおいて、一般的には任意の種類、サイズ、デザインおよび外観であり、その結果、モバイルデバイスの画像キャプチャデバイスによってキャプチャされることが可能である。
本発明は、上述したように、例えば吸収性製品などの衛生用製品の形式の製品に関連して適切に使用されることに留意されたい。このような吸収性製品は、男性もしくは女性用失禁防具、生理用パッド、パンティライナーまたはテープファスナーつきオムツ、パンツ型オムツ、もしくはベルトつきオムツなどのオムツのような、個人向けの吸収性衛生物品の任意の形式であることが可能である。上記衛生用製品はローション、ティッシュ(wipe)、または衛生用のペーパータオルのようなタオルによって構成されてもよい。
本発明は、実施形態および添付の図面を参照して、以下に説明される。
図1は、本発明のユーザが位置する、スーパーマーケットまたは同様の環境において発見される種類の保管位置を図示する図である。 図2は、図1と比較して別の角度からモバイルデバイスおよび保管位置を図示し、本発明に従う方法を示す図である。 図3Aは、本発明の操作の異なる段階において本発明が使用されるモバイルデバイスを示す図である。 図3Bは、本発明の操作の異なる段階において本発明が使用されるモバイルデバイスを示す図である。 図3Cは、本発明の操作の異なる段階において本発明が使用されるモバイルデバイスを示す図である。
図1は、スーパーマーケット、卸売店、店舗、図書館、または同様の種類の環境において発見される空間のような、いくつかの様々な製品の保管位置1を図示する。保管位置1は、実施形態に従って、販売される製品4の形式でいくつかのアイテムが位置するいくつかの棚3に基づいて、いくつかの保管器具2を含む。
また、図1は、本発明のユーザ5、すなわちモバイルデバイス6を装備した人間を示す。以下で詳細に説明するように、モバイルデバイス6は、本発明が実行可能であるように準備される。図1に示されるモバイルデバイス6はいわゆるタブレットコンピュータの形式であるが、携帯電話、パーソナルデジタルアシスタント(PDA)、いわゆるスマートフォン、または同様のものなどの任意の種類のモバイルデバイスが本発明を実行するために使用されてよいことを了解されたい。
モバイルデバイス6は、画像およびビデオの記録物をキャプチャリングするために統合された画像キャプチャデバイス7を備え、その後モバイルデバイス6に記憶される。ここで、本発明は、前記画像およびビデオの記録物についての情報がモバイルデバイス6に記憶される方法に限定されず、キャプチャされた画像およびビデオシーケンスがモバイルデバイス6およびユーザ5から離れ、さらなる解析のためにリモートコンピュータ(図示せず)に送信される方式で実装されることも可能であることに留意されたい。
上述の画像キャプチャデバイス7は、一般的に知られており、典型的には例えば写真画像およびビデオシーケンスをキャプチャリングするために携帯電話およびタブレットコンピュータにおいて使用される画像センサおよびレンズ(図示せず)を含む。
図面には詳細に示されていないが、モバイルデバイス6はデータを処理するためのプロセッサを備える。データはモバイルデバイス6がネットワークを介して通信接続可能である通信デバイスから受信されるか、またはプロセッサによりアクセス可能なモバイルデバイスのデジタル記憶媒体に記憶されてもよい。
その結果、モバイルデバイス6は記憶媒体に記憶されたコンピュータプログラムを搬送し、プロセッサによって実行されると、以下に説明するようにモバイルデバイス6に本発明による方法を実行させる。
図2は、保管位置1における棚3のセットに面するときの、異なる角度、すなわちユーザ5の視点から見た角度からのモバイルデバイス6を示す図である。図2に示すように、実施形態によるモバイルデバイス6は、ユーザ5に情報を表示し、いわゆるタッチディスプレイの形式で実現される場合、ユーザ入力の形式でユーザ5から情報を受信する、ディスプレイ8を備える。モバイルデバイス6は、例えばラウドスピーカー、振動デバイスなどの信号および情報を出力するための手段や、ボタン、マイクロフォンなどのユーザ入力を受信するためのその他の手段もまた備えてもよい。そのような追加的なデバイスは一般的によく知られており、従って、ここでは詳細に説明しない。
その結果、実施形態によれば、ディスプレイ8は、ユーザ5から情報及び命令を入力するためのユーザインターフェースを構成する。以下で説明するように、ディスプレイ8は、好ましくは所望の製品の位置に関する視覚情報、または、価格、特質もしくはサイズなどの製品についての他の関連した情報を表示するための手段もまた構成する。
モバイルデバイス6は、以下でより詳細に説明するように、記憶媒体に記憶されたコンピュータプログラムの実行を介して、発明の方法の全てのステップを実行するように動作可能である。
好ましくは、コンピュータプログラムは、プログラムを実行するために外部データからいかなるデータも受信する必要がないことを意味する、スタンドアロンアプリケーションの形式で実現される。しかしながら、コンピュータプログラムは、モバイルデバイスが通信接続可能なアプリケーションサーバ内に常駐するサーバ側アプリケーションをさらに含む、分散ソフトウェアソリューションのクライアントアプリケーションであってもよい。この場合、以下で説明する本方法のいくつかのステップは、サーバ側アプリケーションの実行を通じてアプリケーションサーバによって実行されてもよい。
本発明の好ましい実施形態において、モバイルデバイス6上に記憶されたコンピュータプログラムは、モバイルデバイス6が接続可能なダウンロードサーバから記憶媒体内にダウンロード可能なApp(または「アプリケーションプログラム」)の形式で実現される。Appは、好ましくはアップル社のiOSプラットフォームおよび/またはアンドロイド(Android)プラットフォームに適用され、既知の配布チャネルを通じて配布される。
従って、モバイルデバイス6の記憶媒体に記憶されたコンピュータプログラムを以降「App」と称することを了解されたい。図2に単純化された形式で示されるように、Appは、例えばユーザがタッチし、本実施形態においてAppのための「スタートボタン」に対応する、ディスプレイ8上の特定のアイコン9の形式で、適切なユーザ入力の手段によって実行されることが可能である。
さらに、本発明の実施形態に従えば、Appは、アイコンユーザ5がどの製品をユーザ5が保管位置1において発見したいと思っているかを選択する、すなわち、製品またはアイテムA、BまたはCの間での選択のために使用される製品アイコン10の形式における第1の系列のアイコンのようないくつかのさらなるユーザ入力アイコンを表示するステップを備える。
アイテムA、BおよびCを表現するアイコン10は、例えば特定の製品カテゴリ、例えば失禁パッドを表現するということが可能である。モバイルデバイス6は、さらにユーザ5がさらなる製品カテゴリ、例えばベビー用オムツからアイテムを選択することができるように準備されることが可能である。この理由から、本発明によるAppは、上記のさらなる製品カテゴリに対応するディスプレイ8上に第2の系列のアイコン11を提示するように準備されることが可能である。図3Aに示すように、ユーザ5はその後、様々な種類の製品を表現する様々なアイテムの間で選択してもよい。
実施形態に従えば、ユーザ5が図3Aに示される「start」アイコン9をタッチしたときに、モバイルデバイス6のAppが開始される。上記の発生時、Appは、画像キャプチャデバイス(図3Aの視点からは見えない)が保管スペース1の少なくとも一部を表示し、好適にはビデオシーケンスの形式である、一連の画像のキャプチャリングを開始するモードに入る。図3Bを参照すると、モバイルデバイス6のディスプレイ8は次に、好適にはビデオシーケンスのライブフィードの形式である、保管位置1の対応する画像を表示する。
好ましくは、画像キャプチャデバイス7は、カメラの形式であり、モバイルデバイス6の背面側に位置する。しかしながら、本発明は、そのような配置のみに限定されない。すなわち、画像キャプチャデバイス7は、例えばモバイルデバイス1の上面(top surface)上に、または側辺(side edge)に沿って配置されてもよい。
図2において単純化された方式で示すように、画像キャプチャデバイスは画像キャプチャリング角度7a内の画像またはビデオシーケンスをキャプチャリングするために準備される。
この段階では、ユーザ5は、特定の所望の製品を「探索する」かのように、保管位置1に沿ってモバイルデバイス6を捜索する(sweep)ように使用してもよい。言い換えれば、ユーザ5は、特定の所望の製品が発見されることが期待される、保管位置1の棚3の位置の方へ、またはあるセクション内に、モバイルデバイス6を向ける。図3Bにおいて、そのような所望の製品は、参照番号13の手段によって示される。さらに、この製品13は、モバイルデバイス6内の画像処理ソフトウェアの手段によって認識されることが可能である特定の認識画像13bが設けられている。
実施形態に従えば、当業者によく知られており、そのためここでは詳細に説明しない原理に従って、所望の製品を認識するために、モバイルデバイス6は画像認識を通じて画像またはビデオシーケンスをキャプチャリングおよび解析するために準備される。
実施形態に従えば、モバイルデバイス6は所望の製品13のグラフィック表現を認識するために特に適合される。このような認識は、その形状、デザイン、色、パターン、または製品パッケージングにプリントもしくはそれ以外の方法で適用される特定の特徴についての製品パッケージングの全体的または一部のデザインの画像解析に基づくことが可能である。モバイルデバイス6は、製品13全体またはその一部を認識するように適合されることが可能である。
その結果、認識画像として参照可能な、製品13の特定の部分、形状、マーキングまたはデザインは、モバイルデバイス6の手段によって検出、解析および認識可能である。この認識画像は、図3Bにおいて、参照番号13bの手段によって、概略的に示される。
本発明によるAppは、その結果、製品13の認識画像が認識されるような種類の画像認識のために用意され、この発生時に、製品13の画像または適切なグラフィック表現がユーザがディスプレイ8に示された他の製品と容易に識別可能な方式で、ディスプレイ8上に示される。例えば、モバイルデバイス6内のソフトウェアは、所望の製品13が適切な色、例えば赤で示される製品13の外形(outline)または輪郭(contour)を有するように示されるように準備可能である。この方法において、当該の製品13は、ディスプレイ8上で容易に検出可能である。これは、図3Cで示される。製品13のグラフィック表現は、好適には製品13の写真画像またはビデオシーケンスに対応する位置でディスプレイ8に表示された画像またはビデオシーケンス上に重畳されて示される。
製品13の正確な位置(position)についての情報は要求されないが、ただモバイルデバイス6に対する製品13の場所(location)についての情報が要求されることに留意されたい。
製品13の場所に関する情報は、例えばサウンドエフェクトもしくは音声メッセージなどの聴覚情報の形式で、もしくは触覚の形式で、もしくは振動などの物理的手段によって示されるいくつの他の種類の情報、または、視覚、聴覚、触覚もしくは他の物理的情報の組み合わせであることが可能である。
本発明は、上述の画像認識のみに限定されず、例えばNFC(Near Field Recognition)タグ、トランスポンダ、QRコード(登録商標)もしくは他のデバイス、または画像キャプチャデバイス7を備えたモバイルデバイス6が当該の製品13の位置を判定し、ユーザ5に位置に関する情報を提示するのを可能にするマーキングなどの使用を通じた代替方法で実現可能である。
さらに、本発明は、任意に当該の製品13についての製品関連情報もまたユーザ5に提示されるように準備されることが可能である。このような場合、製品関連情報は製品13の価格、コンテンツ、特質、または出荷(handling)に関連する情報によって構成されることが可能である。
ユーザ5に提示される情報は、実際の製品13に関するものだけでなく、継続販売に関する情報もしくは同様な製品についての情報などの他のいくつかの要因に関連する情報によって構成されることが可能である。
さらに、本発明は、任意に実際の画像スキャニングおよび画像認識が終わった後に、ユーザ5が1つまたは複数の所望の製品の選択をするように準備されることが可能である。例えば、ユーザ5は、ユーザ5の関心の有無に関係なく、モバイルデバイスにいくつかの製品が位置することが期待される特定の保管位置1のスキャニングを開始するように指示してもよい。モバイルデバイス6が1つまたは複数の所望の製品の存在を認識する場合、これらの製品に関する情報がディスプレイ8に示される。
さらに、モバイルデバイス6は、「ショッピングリスト」、すなわちユーザ5が購入したいと考えるいくつかの製品の形式で情報のセットが提供されることが可能である。ユーザ5がモバイルデバイス6を使用してスーパーマーケットにおける保管位置1をスキャンするとき、モバイルデバイス6は、そのようなショッピングリストから任意のアイテムを認識し、ディスプレイ8上に示す。この場合、モバイルデバイス6は、1つ以上の製品を同時に発見するように準備される。
さらに、モバイルデバイス1は、好ましくは、携帯電話のような今日のモバイルデバイスの多くで使用されるような従来型のフラッシュタイプの光デバイスであることが可能な光源(図示せず)を備える。光源は、モバイルデバイス6から向けられた光のフィールド(図示せず)を生成するように準備される。代替的には、本発明は、光の条件が十分な場合、分離した光源または自然環境光のみで使用されてもよい。
さらに、図には示されていないが、モバイルデバイスは、自律走行車(autonomous vehicle)または同様の画像キャプチャデバイスを運送するもの形式であってもよいことに留意されたい。画像(すなわち、1つまたは複数の単一の画像、ビデオシーケンスまたはライブビデオフィード)をキャプチャしている間、そのような自律走行車は、保管位置の経路をたどるようにプログラムされていてもよい。そして、これらの画像は保管位置内のアイテムの位置決めを補助するために、本発明の原理に従って使用されてもよい。
本発明は、吸収性製品に特に適切であるが、そのような製品のみに限定されず、それらが保管スペース1に位置し、画像キャプチャデバイス7によってキャプチャ可能である限りにおいては、全ての種類の商品(merchandise)および品物(goods)に対して一般的に使用可能である。
製品が衛生製品である場合、本発明は、男性または女性用失禁パッド、生理用パッド、または例えばテープファスナーつきオムツ、パンツ型オムツもしくはベルトつきオムツなどのオムツの形式の、吸収性製品などの全ての種類の衛生用製品で使用可能である。本発明は、ローション、ティッシュまたはタオルなどの他の種類の衛生用製品で使用することも可能である。
任意の追加的なステップとして、モバイルデバイス6は、製品13についてのアイテム関連または製品関連の情報を好適に提供し、ディスプレイ8上にそのような情報を示すように準備されることが可能である。そのような製品関連情報の例は、製品13のサイズ、価格もしくはコンテンツ、または例えば製品13の操作マニュアルである。
明らかに、プロセッサはディスプレイ8上に様々な情報を表示するように適合してもよい。通常のユーザにとって、表示されるべき最も有益と思われる情報は、製品13をどのように使用するかについての示唆に直接的に関連する情報である。このように、本発明は、非常にユーザフレンドリな方法で使用される。
本発明は、上述の実施形態に限定されず、特許請求の範囲内で変形が可能である。
例えば、モバイルデバイス6は、モバイルデバイス6の加速度または方位を検知するために、内蔵の加速度計、ジャイロまたはジャイロスコープデバイス(図示せず)を使用してもよい。このようなデバイスは、ユーザ5からのコマンドを入力するために使用することが可能である。例えば、ユーザ5は、(上述の「start」アイコン9をタッピングする代わりに)モバイルデバイス6を振る(shaking)ことによって所望の製品13の探索を開始することが可能である。加速度計またはジャイロスコープは次に、実施形態による画像キャプチャリング処理の開始をトリガするために、この振る動きを検出するように使用される。
さらに、上述のように、モバイルデバイスは好適にはタブレットコンピュータ、携帯電話、またはそのような形式のものであるが、代替的には、保管位置における1つまたは複数の所望のアイテムの位置決めをするために画像キャプチャデバイスを運搬するとともに、保管位置をスキャニングするように構成された自律的なモバイルデバイスによって構成されてもよい。
さらに、キャプチャされた画像またはビデオシーケンスがディスプレイに実際に示されるのと同時に、画像またはビデオシーケンスのコンテンツの解析が行われる必要はない。例えば、キャプチャされた画像は、リモートコンピュータに転送され、適切な時間的なポイントで解析されることが可能である。
1 保管位置
2 保管器具
3 棚
4 製品
5 ユーザ
6 モバイルデバイス
7 画像キャプチャデバイス
8 ディスプレイ
9 アイコン
10 アイコン
11 アイコン
13 製品
13b 認識画像

Claims (11)

  1. 画像キャプチャデバイス(7)を備えるモバイルデバイス(6)によって実行され、保管位置(1)における少なくとも1つのアイテム(4;13)が存在する位置決めを補助するための方法であって、
    −前記画像キャプチャデバイス(7)の手段によって、前記保管位置(1)を表現する、少なくとも1つの画像、ビデオシーケンスまたはライブビデオフィードをキャプチャリングするステップと、
    −画像処理ソフトウェアを介して、前記アイテムにおけるデザイン、プリント、マーキング、コード、もしくは前記アイテム(13)に同様に適用されるもの、またはそのパッケージングの形式で表現された認識画像(13a)の使用を通じて、前記画像キャプチャデバイス(7)の視野内の前記アイテム(13)の任意の存在を認識するステップと、
    −前記認識するステップの終了後に、所望のアイテム(13)を示す情報をユーザ(5)からの入力として受信するステップと、
    −前記アイテム(13)の前記位置に関する情報と、前記アイテム(3)についてのアイテム関連情報とを提示するステップであって、前記アイテム関連情報は前記アイテム(13)の使用方法に関する情報を含む、提示するステップ
    を少なくとも備え
    前記アイテム(13)は、男性または女性用失禁防具、生理用パッド、テープファスナーつきオムツ、パンツ型オムツもしくはベルトつきオムツ、またはローション、ティッシュ(wipe)もしくはタオルなどの衛生物品であ方法。
  2. 前記アイテム(13)の前記位置に関する前記情報を、前記モバイルデバイス(6)の一部を形成するディスプレイ(8)上で前記モバイルデバイス(6)のユーザ(5)に提示するステップを含む、請求項1に記載の方法。
  3. −前記画像またはビデオシーケンスまたはライブビデオフィードを前記ディスプレイ(8)に表示するステップと、
    −前記アイテム(13)の前記位置に関する前記情報のグラフィック表現を前記ディスプレイ(8)に示された画像またはビデオシーケンス上に重畳し、それにより前記アイテム(13)の前記位置に関する情報を前記モバイルデバイス(6)上に提示するステップを備える、請求項2に記載の方法。
  4. 前記アイテム関連情報を前記ディスプレイ(8)に提示するステップを含む、請求項2または3に記載の方法。
  5. 前記アイテム関連情報は、前記アイテム(13)の価格、コンテンツ、特質または出荷(handling)に関連する情報をさらに含む、請求項4に記載の方法。
  6. 前記ユーザ(5)から前記アイテム(13)を選択することに対応する入力情報を受信するステップを備える、請求項2〜5のいずれか一項に記載の方法。
  7. 前記アイテム(13)が位置することが期待される保管位置(1)の少なくとも一部を光源で照明するステップを含む、請求項1〜6のいずれか一項に記載の方法。
  8. 前記認識するステップは、前記アイテム(13)の任意の存在が聴覚、触覚、振動、または他の物理的種類の出力信号が組み合わされる、請求項1〜7のいずれか一項に記載の方法。
  9. 保管位置(1)における少なくとも1つのアイテム(4;13)の位置決めを補助するためのコンピュータプログラムであって、画像キャプチャデバイス(7)を備えるモバイルデバイス(6)のプロセッサによって実行されるとき、前記モバイルデバイス(7)に請求項1〜のいずれか一項に記載の方法を実行させる、コンピュータプログラム。
  10. 保管位置(1)における少なくとも1つのアイテム(4;13)の位置決めを補助するためのモバイルデバイス(6)であって、前記モバイルデバイス(6)は、画像キャプチャデバイス(7)と、プロセッサと、前記プロセッサによって実行可能な、請求項に記載のコンピュータプログラムを格納するための記憶媒体を備える、モバイルデバイス。
  11. タブレットコンピュータ、携帯電話、パーソナルデジタルアシスタント(PDA)、スマートフォン、または同等物によって構成される、請求項10に記載のモバイルデバイス。
JP2015500391A 2012-03-15 2012-03-15 保管位置におけるアイテムの位置決めを補助するための方法 Expired - Fee Related JP6050473B2 (ja)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/SE2012/050290 WO2013137789A1 (en) 2012-03-15 2012-03-15 Method for assisting in locating an item in a storage location

Publications (2)

Publication Number Publication Date
JP2015517137A JP2015517137A (ja) 2015-06-18
JP6050473B2 true JP6050473B2 (ja) 2016-12-21

Family

ID=49161560

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2015500391A Expired - Fee Related JP6050473B2 (ja) 2012-03-15 2012-03-15 保管位置におけるアイテムの位置決めを補助するための方法

Country Status (9)

Country Link
US (1) US20150134497A1 (ja)
EP (1) EP2826009A4 (ja)
JP (1) JP6050473B2 (ja)
CN (1) CN104254861A (ja)
AU (1) AU2012373332B2 (ja)
CA (1) CA2867113A1 (ja)
RU (1) RU2597492C2 (ja)
TW (1) TW201343504A (ja)
WO (1) WO2013137789A1 (ja)

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102012108990A1 (de) * 2012-09-24 2014-05-15 Endress + Hauser Process Solutions Ag Verfahren zum Lokalisieren eines Feldgerätes in einer Automatisierungsanlage
RU2636102C2 (ru) * 2012-12-21 2017-11-20 Ска Хайджин Продактс Аб Система и способ для помощи в определении местоположения и выборе желаемого предмета в месте хранения
WO2014177751A1 (en) * 2013-04-29 2014-11-06 Nokia Corporation Method and apparatus for finding a location
JP6512283B2 (ja) * 2015-03-18 2019-05-15 日本電気株式会社 情報処理装置及び発注支援方法
DE102016122163A1 (de) * 2016-11-17 2018-05-17 Endress+Hauser Conducta Gmbh+Co. Kg Verfahren zur Online-Konfiguration und -Bestellung
US10817764B2 (en) * 2018-09-21 2020-10-27 Beijing Jingdong Shangke Information Technology Co., Ltd. Robot system for processing an object and method of packaging and processing the same
US20210279695A1 (en) * 2019-04-08 2021-09-09 Transmira, Inc. Systems and methods for item acquisition by selection of a virtual object placed in a digital environment
CN112308915A (zh) * 2020-03-30 2021-02-02 北京沃东天骏信息技术有限公司 用于定位快递包裹的方法和装置
CN116611763B (zh) * 2023-04-25 2023-12-15 亳州神农谷中药控股有限公司 一种仓库货物定位查找系统

Family Cites Families (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000067079A (ja) * 1998-08-26 2000-03-03 Nippon Telegr & Teleph Corp <Ntt> 書籍検索方法及び装置並びに書籍検索プログラムを記録した記録媒体
JP2001344661A (ja) * 2000-05-30 2001-12-14 Sharp Corp 情報提供装置
US6912507B1 (en) * 2000-08-05 2005-06-28 Motorola, Inc. Method and apparatus for interactive shopping
US20060071774A1 (en) * 2004-02-26 2006-04-06 Brown Katherine A Item monitoring system and methods using an item monitoring system
RU2007106882A (ru) * 2004-07-23 2008-09-10 Конинклейке Филипс Электроникс Н.В. (Nl) Устройство и способ помощи в указании местоположения и/или выборе элементов
US8547401B2 (en) * 2004-08-19 2013-10-01 Sony Computer Entertainment Inc. Portable augmented reality device and method
US20070226088A1 (en) * 2004-10-15 2007-09-27 Earth Class Mail Corporation Item management systems and associated methods
US7885598B2 (en) * 2004-12-30 2011-02-08 Kimberly-Clark Worldwide, Inc. Generating and providing personalized information to a user regarding the purchase and use of personal care products
US20080071559A1 (en) * 2006-09-19 2008-03-20 Juha Arrasvuori Augmented reality assisted shopping
US8091782B2 (en) * 2007-11-08 2012-01-10 International Business Machines Corporation Using cameras to monitor actual inventory
US8199966B2 (en) * 2008-05-14 2012-06-12 International Business Machines Corporation System and method for providing contemporaneous product information with animated virtual representations
US7707073B2 (en) * 2008-05-15 2010-04-27 Sony Ericsson Mobile Communications, Ab Systems methods and computer program products for providing augmented shopping information
JP2011053945A (ja) * 2009-09-02 2011-03-17 Seiko Epson Corp 商品購入支援プログラム、商品購入支援装置、商品購入支援システム、及び商品購入支援方法
US9838744B2 (en) * 2009-12-03 2017-12-05 Armin Moehrle Automated process for segmenting and classifying video objects and auctioning rights to interactive sharable video objects
CN102906623A (zh) * 2010-02-28 2013-01-30 奥斯特豪特集团有限公司 交互式头戴目镜上的本地广告内容
JP5280475B2 (ja) * 2010-03-31 2013-09-04 新日鉄住金ソリューションズ株式会社 情報処理システム、情報処理方法及びプログラム
CN102893327B (zh) * 2010-03-19 2015-05-27 数字标记公司 直觉计算方法和系统
US20120023034A1 (en) 2010-07-23 2012-01-26 Nancy Lynch Store Mapping System and Method for Locating Merchandise in a Store
US8866847B2 (en) * 2010-09-14 2014-10-21 International Business Machines Corporation Providing augmented reality information
US20120099756A1 (en) * 2010-10-20 2012-04-26 Faiz Feisal Sherman Product Identification
US9773285B2 (en) * 2011-03-08 2017-09-26 Bank Of America Corporation Providing data associated with relationships between individuals and images
US20120233003A1 (en) * 2011-03-08 2012-09-13 Bank Of America Corporation Providing retail shopping assistance

Also Published As

Publication number Publication date
RU2014141370A (ru) 2016-05-10
WO2013137789A1 (en) 2013-09-19
AU2012373332B2 (en) 2015-07-30
EP2826009A4 (en) 2015-12-09
TW201343504A (zh) 2013-11-01
JP2015517137A (ja) 2015-06-18
US20150134497A1 (en) 2015-05-14
RU2597492C2 (ru) 2016-09-10
EP2826009A1 (en) 2015-01-21
AU2012373332A1 (en) 2014-10-02
CN104254861A (zh) 2014-12-31
CA2867113A1 (en) 2013-09-19

Similar Documents

Publication Publication Date Title
JP6050473B2 (ja) 保管位置におけるアイテムの位置決めを補助するための方法
AU2012379721B2 (en) Method for assisting in locating a desired item in a storage location
AU2018253509A1 (en) System and method for assisting in locating and choosing a desired item in a storage location
WO2017085771A1 (ja) 精算支援システム、精算支援プログラム、及び精算支援方法
CN108764998B (zh) 智能展示装置以及智能展示方法
US20150310414A1 (en) Information processing device and method of changing a transaction statement
JP6261060B2 (ja) 情報処理装置
US11328335B2 (en) Visual graphic aided location identification
JP2017102574A (ja) 情報表示プログラム、情報表示方法、及び情報表示装置
JP6583043B2 (ja) 画像表示装置、表示制御方法および表示制御プログラム
JP2016024596A (ja) 情報処理装置
US20140375555A1 (en) Work support system, work support apparatus, work support method, and computer readable storage medium
US20170300927A1 (en) System and method for monitoring display unit compliance
JP6586904B2 (ja) 画像表示装置、表示制御方法および表示制御プログラム
WO2013191598A1 (en) Method for providing product-related information
JP2018005515A (ja) プログラム、情報処理装置、電子機器、及び情報処理システム
JP2019061430A (ja) 画像形成装置及びシステム
JP2017146941A (ja) 画像表示装置、表示制御方法および表示制御プログラム

Legal Events

Date Code Title Description
A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20150924

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20151005

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20151228

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20160418

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20160818

A911 Transfer to examiner for re-examination before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A911

Effective date: 20160826

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20161024

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20161124

R150 Certificate of patent or registration of utility model

Ref document number: 6050473

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

S533 Written request for registration of change of name

Free format text: JAPANESE INTERMEDIATE CODE: R313533

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

LAPS Cancellation because of no payment of annual fees