JP6653759B2 - ポータブル端末による室内ナビゲーション方法、ポータブル端末及び記憶媒体 - Google Patents

ポータブル端末による室内ナビゲーション方法、ポータブル端末及び記憶媒体 Download PDF

Info

Publication number
JP6653759B2
JP6653759B2 JP2018527723A JP2018527723A JP6653759B2 JP 6653759 B2 JP6653759 B2 JP 6653759B2 JP 2018527723 A JP2018527723 A JP 2018527723A JP 2018527723 A JP2018527723 A JP 2018527723A JP 6653759 B2 JP6653759 B2 JP 6653759B2
Authority
JP
Japan
Prior art keywords
combination
barcode
triangle
image
coordinates
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2018527723A
Other languages
English (en)
Other versions
JP2019504300A (ja
Inventor
宝 周
宝 周
衆程 頼
衆程 頼
国強 戎
国強 戎
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Ping An Technology Shenzhen Co Ltd
Original Assignee
Ping An Technology Shenzhen Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Ping An Technology Shenzhen Co Ltd filed Critical Ping An Technology Shenzhen Co Ltd
Publication of JP2019504300A publication Critical patent/JP2019504300A/ja
Application granted granted Critical
Publication of JP6653759B2 publication Critical patent/JP6653759B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/20Instruments for performing navigational calculations
    • G01C21/206Instruments for performing navigational calculations specially adapted for indoor navigation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/29Geographical information databases
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0346Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of the device orientation or free movement in a 3D space, e.g. 3D mice, 6-DOF [six degrees of freedom] pointers using gyroscopes, accelerometers or tilt-sensors
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06KGRAPHICAL DATA READING; PRESENTATION OF DATA; RECORD CARRIERS; HANDLING RECORD CARRIERS
    • G06K7/00Methods or arrangements for sensing record carriers, e.g. for reading patterns
    • G06K7/10Methods or arrangements for sensing record carriers, e.g. for reading patterns by electromagnetic radiation, e.g. optical sensing; by corpuscular radiation
    • G06K7/14Methods or arrangements for sensing record carriers, e.g. for reading patterns by electromagnetic radiation, e.g. optical sensing; by corpuscular radiation using light without selection of wavelength, e.g. sensing reflected white light
    • G06K7/1404Methods for optical code recognition
    • G06K7/1408Methods for optical code recognition the method being specifically adapted for the type of code
    • G06K7/14131D bar codes
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06KGRAPHICAL DATA READING; PRESENTATION OF DATA; RECORD CARRIERS; HANDLING RECORD CARRIERS
    • G06K7/00Methods or arrangements for sensing record carriers, e.g. for reading patterns
    • G06K7/10Methods or arrangements for sensing record carriers, e.g. for reading patterns by electromagnetic radiation, e.g. optical sensing; by corpuscular radiation
    • G06K7/14Methods or arrangements for sensing record carriers, e.g. for reading patterns by electromagnetic radiation, e.g. optical sensing; by corpuscular radiation using light without selection of wavelength, e.g. sensing reflected white light
    • G06K7/1404Methods for optical code recognition
    • G06K7/1439Methods for optical code recognition including a method step for retrieval of the optical code
    • G06K7/1443Methods for optical code recognition including a method step for retrieval of the optical code locating of the code in an image
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W4/00Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/02Services making use of location information
    • H04W4/024Guidance services
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W64/00Locating users or terminals or network equipment for network management purposes, e.g. mobility management
    • H04W64/003Locating users or terminals or network equipment for network management purposes, e.g. mobility management locating network equipment

Landscapes

  • Engineering & Computer Science (AREA)
  • Remote Sensing (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Automation & Control Theory (AREA)
  • General Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • Health & Medical Sciences (AREA)
  • Electromagnetism (AREA)
  • General Health & Medical Sciences (AREA)
  • Toxicology (AREA)
  • Artificial Intelligence (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Human Computer Interaction (AREA)
  • Data Mining & Analysis (AREA)
  • Studio Devices (AREA)
  • Image Analysis (AREA)
  • User Interface Of Digital Computer (AREA)
  • Telephone Function (AREA)
  • Navigation (AREA)
  • Traffic Control Systems (AREA)

Description

「関連出願の相互参照」
本願は、2016年6月22日に中国国家知識産権局に出願された、中国特許出願第201610460576.5号の「ポータブル端末による室内ナビゲーション方法及びポータブル端末」と題する中国特許出願の優先権を主張し、当該出願の全体が参照により本願に援用される。
本発明は、ナビゲーション技術分野に関し、特にポータブル端末による室内ナビゲーション方法、ポータブル端末及び記憶媒体に関するものである。
従来、ユーザがポータブル端末を使用するとき、一部の室内場所は非常に広く、エリアの分布状況も複雑であるため、ユーザがこのような場所に入ると、目標エリアや位置を特定することが困難である。また、一部の室内場所でポータブル端末を用いてナビゲーションを行う解決手段はあるものの、このような場所には、高度なソフトウェアとハードウェアの設置が求められており、ポータブル端末のリアルタイムな位置について高度な演算を迅速で正確に行うことができないため、ナビゲーションの精度が低くなるのが現状である。
本発明は、ポータブル端末による正確な室内ナビゲーションを低コストで実現すべく、ポータブル端末による室内ナビゲーション方法、ポータブル端末及び記憶媒体を提供することを目的としている。
上記の目的を達成すべく、本発明は、ポータブル端末による室内ナビゲーション方法を提供し、前記方法は、
ユーザから発信された室内ナビゲーションコマンドを受信すると、ポータブル端末は、そのカメラを制御してレンズ範囲内の画像を取得し、レンズ範囲内の画像における室内の所定位置に予め設置されたバーコードラベルのバーコードに対してデータ解析を行うことで、レンズ範囲内の画像における各バーコードラベルの認識情報を取得し、所定のカラーブロック選択ルールに従って、レンズ範囲内の画像における少なくとも2つのバーコードラベルから所定数量のカラーブロックを選択するステップと、
レンズ範囲内の画像における選択された各カラーブロックの位置に基づき、各カラーブロックに対応する画素座標系の座標を算出し、
予め設定されたバーコードラベルの認識情報とカラーブロックのワールド座標系の座標との関連データにより、選択された各カラーブロックの所属したバーコードラベルに基づき、各カラーブロックに対応するワールド座標系の座標を算出するステップと、
選択された各カラーブロックに対応する画素座標系の座標及びワールド座標系の座標に基づき、所定の座標算出ルールに従って、前記ポータブル端末のワールド座標系における座標を算出することにより、前記ポータブル端末の位置を得るステップと、を含む。
室内ナビゲーション機能が搭載されたポータブル端末であって、前記ポータブル端末は、
ユーザから発信された室内ナビゲーションコマンドを受信すると、ポータブル端末のカメラを制御してレンズ範囲内の画像を取得し、レンズ範囲内の画像における室内の所定位置に予め設置されたバーコードラベルのバーコードに対してデータ解析を行うことで、レンズ範囲内の画像における各バーコードラベルの認識情報を取得し、所定のカラーブロック選択ルールに従って、レンズ範囲内の画像における少なくとも2つのバーコードラベルから所定数量のカラーブロックを選択する取得モジュールと、
レンズ範囲内の画像における選択された各カラーブロックの位置に基づき、各カラーブロックに対応する画素座標系の座標を算出し、
予め設定されたバーコードラベルの認識情報とカラーブロックのワールド座標系の座標との関連データにより、選択された各カラーブロックの所属したバーコードラベルに基づき、各カラーブロックに対応するワールド座標系の座標を算出する演算モジュールと、
選択された各カラーブロックに対応する画素座標系の座標及びワールド座標系の座標に基づき、所定の座標算出ルールに従って、前記ポータブル端末のワールド座標系における座標を算出することにより、前記ポータブル端末の位置を得る測位モジュールと、を含む。
ポータブル端末であって、ユーザインタラクション機器と、記憶機器と、カメラと、プロセッサとを含み、
前記ユーザインタラクション機器は、前記端末とユーザの間でのインタラクションを実現し、
前記記憶機器には、コンピュータ可読コードコマンドが記憶されており、前記コンピュータ可読コードコマンドは、前記プロセッサによって実行されることで、
ユーザから発信された室内ナビゲーションコマンドを受信すると、カメラを制御してレンズ範囲内の画像を取得し、レンズ範囲内の画像における室内の所定位置に予め設置されたバーコードラベルのバーコードに対してデータ解析を行うことで、レンズ範囲内の画像における各バーコードラベルの認識情報を取得し、所定のカラーブロック選択ルールに従って、レンズ範囲内の画像における少なくとも2つのバーコードラベルから所定数量のカラーブロックを選択するステップと、
レンズ範囲内の画像における選択された各カラーブロックの位置に基づき、各カラーブロックに対応する画素座標系の座標を算出し、
予め設定されたバーコードラベルの認識情報とカラーブロックのワールド座標系の座標との関連データにより、選択された各カラーブロックの所属したバーコードラベルに基づき、各カラーブロックに対応するワールド座標系の座標を算出するステップと、
選択された各カラーブロックに対応する画素座標系の座標及びワールド座標系の座標に基づき、所定の座標算出ルールに従って、前記電子機器のワールド座標系における座標を算出することにより、前記電子機器の位置を得るステップと、を実現することができる。
コンピュータ実行可能コマンドが搭載された記憶媒体であって、前記記憶媒体は、1つ又は複数のプロセッサにより実行されることで、
ユーザから発信された室内ナビゲーションコマンドを受信すると、カメラを制御してレンズ範囲内の画像を取得し、レンズ範囲内の画像における室内の所定位置に予め設置されたバーコードラベルのバーコードに対してデータ解析を行うことで、レンズ範囲内の画像における各バーコードラベルの認識情報を取得し、所定のカラーブロック選択ルールに従って、レンズ範囲内の画像における少なくとも2つのバーコードラベルから所定数量のカラーブロックを選択する動作と、
レンズ範囲内の画像における選択された各カラーブロックの位置に基づき、各カラーブロックに対応する画素座標系の座標を算出し、
予め設定されたバーコードラベルの認識情報とカラーブロックのワールド座標系の座標との関連データにより、選択された各カラーブロックの所属したバーコードラベルに基づき、各カラーブロックに対応するワールド座標系の座標を算出する動作と、
選択された各カラーブロックに対応する画素座標系の座標及びワールド座標系の座標に基づき、所定の座標算出ルールに従って、前記電子機器のワールド座標系における座標を算出することにより、前記電子機器の位置を得る動作と、を実現することができる。
本発明は、ポータブル端末による室内ナビゲーション方法、ポータブル端末及び記憶媒体を提供する。それは、ポータブル端末のカメラを用いて、レンズ範囲内の画像における室内の所定位置に予め設置されたバーコードラベルの認識情報を取得し、レンズ範囲内の画像における少なくとも2つのバーコードラベルから所定数量のカラーブロックを選択し、さらに、各カラーブロックに対応する画素座標系の座標及び対応するワールド座標系の座標を算出し、さらに、選択された各カラーブロックに対応する画素座標系の座標及びワールド座標系の座標に基づき、所定の座標算出ルールに従って、前記ポータブル端末の位置を算出するものである。ポータブル端末のカメラ及び室内の所定位置に予め設置されたバーコードラベルを利用するだけで、室内ナビゲーションを行うことができるため、高度なソフトウェアとハードウェアは要求されず、また、室内の所定位置に予め設置されたバーコードラベルのカラーブロックの画素座標系の座標及び対応するワールド座標系の座標に基づき総合的な演算を行うことで、ポータブル端末のリアルタイムな位置について高度な演算を迅速で正確に行って、室内ナビゲーションの精度を高めることができる。
本発明のポータブル端末のハードウェアを示すブロック図である。 本発明のポータブル端末による室内ナビゲーション方法の実施例1のフローチャートである。 本発明のポータブル端末による室内ナビゲーション方法の一実施例におけるバーコードラベルの構造を示す図である。 本発明のポータブル端末による室内ナビゲーション方法の一実施例における凸四角形の4つの頂点からなる4通りの三角形の頂点の組み合わせを示す図である。 本発明のポータブル端末による室内ナビゲーション方法の一実施例における凹四角形の4つの頂点からなる4通りの三角形の頂点の組み合わせを示す図である。 本発明のポータブル端末による室内ナビゲーション方法の実施例2のフローチャートである。 本発明のポータブル端末による室内ナビゲーション方法の一実施例におけるナビゲーション応用を示す図である。 本発明の室内ナビゲーション機能が搭載されたポータブル端末の実施例1の機能モジュールを示す図である。 本発明の室内ナビゲーション機能が搭載されたポータブル端末の実施例2の機能モジュールを示す図である。
以下、実施例及び図面を踏まえて、本発明の目的の達成、機能上の特徴及び利点を詳しく説明する。なお、次の実施例は、本発明を説明するためのものに過ぎず、本発明は実施例にて限定されるものではないことは言うまでもない。
本発明は、ポータブル端末による室内ナビゲーション方法を提供する。図1に示すように、前記室内ナビゲーション方法が適用されるポータブル端末のハードウェアを示すブロック図である。ポータブル端末は、バスシステムによって接続された、プロセッサと、記憶機器と、ユーザインタラクション機器と、カメラとを含む。なお、前記プロセッサは、演算及び制御を行うことで、ポータブル端末全体の動作を支持する。前記記憶機器には、データ、コマンドコードなどが記憶されている。一部の実施例では、前記記憶機器は、不揮発性記憶媒体及びメモリを含む。前記不揮発性記憶媒体には、ポータブル端末のオペレーティングシステム、データベース及び少なくとも1つのコンピュータ実行可能コマンドが記憶されており、コンピュータ実行可能コマンドは、プロセッサによって実行されることで、本発明の実施例による室内ナビゲーション方法を実現することができる。メモリは、オペレーティングシステム及びコンピュータ実行可能コマンドのための、キャッシュを備えた動作環境を提供する。ユーザインタラクション機器は、ユーザがポータブル端末のタッチコマンドを入力し、又はポータブル端末に前記室内ナビゲーション方法の結果データを表示してユーザに提供するなど、ユーザとポータブル端末との間でのインタラクションを実現する。さらに、カメラを備えており、本発明の実施例による室内ナビゲーション方法を実現するにあたり、カメラは、プロセッサの制御コマンドを受信して制御コマンドに基づき室内のバーコードラベルの画像を取得することができる。
なお、当業者であれば、図1に示される構造は、本発明の解決手段に関係する一部構造のブロック図を示すものに過ぎず、サーバへの本発明の解決手段の適用を限定するものではないことは理解できるであろう。具体的に、ポータブル端末は、図に示されるものよりも要素数が多くても少なくてもよく、一部の要素を組み合わせたり、要素を異なる形態で配置したりしてもよい。
図2は本発明のポータブル端末による室内ナビゲーション方法の実施例1のフローチャートを示しており、図2によると、実施例1による、前記ポータブル端末による室内ナビゲーション方法は、ステップS10と、ステップS20と、ステップS30とを含む。
ステップS10:ユーザから発信された室内ナビゲーションコマンドを受信すると、ポータブル端末は、カメラを制御してレンズ範囲内の画像を取得し、レンズ範囲内の画像における室内の所定位置に予め設置されたバーコードラベルのバーコードに対してデータ解析を行うことで、レンズ範囲内の画像における各バーコードラベルの認識情報を取得し、所定のカラーブロック選択ルールに従って、レンズ範囲内の画像における少なくとも2つのバーコードラベルから所定数量のカラーブロックを選択する。
本実施例では、室内場所の所定位置、例えば地面、壁面、天井などにバーコードラベルを予め設置することができ、前記バーコードラベルは、少なくとも対応する認識情報、カラーブロックなどを含む。ポータブル端末は、ユーザが物理ボタン又は仮想ボタンによって発信した室内ナビゲーションコマンドを受信すると、ポータブル端末のカメラを起動させ、カメラを制御してレンズ範囲内の画像を取得する。ポータブル端末のカメラによりレンズ範囲内の画像における室内の所定位置に予め設置されたバーコードラベルを取得し、レンズ範囲内の画像における室内の所定位置に予め設置されたバーコードラベルのバーコードに対してデータ解析を行うことで、レンズ範囲内の画像における各バーコードラベルの認識情報を取得し、所定のカラーブロック選択ルールに従って、レンズ範囲内の画像における少なくとも2つのバーコードラベルから所定数量のカラーブロックを選択する。なお、選択されるカラーブロックの数量については限定しない。
ステップS20:レンズ範囲内の画像における選択された各カラーブロックの位置に基づき、各カラーブロックに対応する画素座標系の座標を算出し、
予め設定されたバーコードラベルの認識情報とカラーブロックのワールド座標系の座標との関連データにより、選択された各カラーブロックの所属したバーコードラベルに基づき、各カラーブロックに対応するワールド座標系の座標を算出する。
選択されたカラーブロックごとに、レンズ範囲内の画像におけるその位置に基づき、対応する画素座標系の座標を特定し、例えば、一つの実施形態において、カラーブロックの幾何中心の画素座標系における座標を算出してもよい。さらに、予め設定されたバーコードラベルの認識情報とカラーブロックのワールド座標系の座標との関連データに基づき、選択されたカラーブロックごとに、それが所属したバーコードラベルに基づき、対応するワールド座標系の座標を特定し、例えば、一つの実施形態では、カラーブロックの幾何中心のワールド座標系における座標を算出してもよい。
ステップS30:選択された各カラーブロックに対応する画素座標系の座標及びワールド座標系の座標に基づき、所定の座標算出ルールに従って、前記ポータブル端末のワールド座標系における座標を算出することにより、前記ポータブル端末の位置を得る。
選択された各カラーブロックに対応する画素座標系の座標及びワールド座標系の座標に基づき、所定の座標算出ルールに従って、前記ポータブル端末のワールド座標系における座標、すなわち前記ポータブル端末の位置を算出することで、ポータブル端末のリアルタイムな位置について高度な演算を実現し、室内ナビゲーションを行う。
本実施例は、ポータブル端末のカメラを用いて、レンズ範囲内の画像における室内の所定位置に予め設置されたバーコードラベルの認識情報を取得し、レンズ範囲内の画像における少なくとも2つのバーコードラベルから所定数量のカラーブロックを選択し、さらに、各カラーブロックに対応する画素座標系の座標及び対応するワールド座標系の座標を算出し、さらに、選択された各カラーブロックに対応する画素座標系の座標及びワールド座標系の座標に基づき、所定の座標算出ルールに従って、前記ポータブル端末の位置を算出するものである。ポータブル端末のカメラ及び室内の所定位置に予め設置されたバーコードラベルを利用するだけで、室内ナビゲーションを行うことができるため、高度なソフトウェアとハードウェアは要求されず、また、室内の所定位置に予め設置されたバーコードラベルのカラーブロックの画素座標系の座標及び対応するワールド座標系の座標に基づき総合的な演算を行うことで、ポータブル端末のリアルタイムな位置について高度な演算を迅速で正確に行って、室内ナビゲーションの精度を高めることができる。
さらに、別の実施例として、前記バーコードラベルは、ラベル基体と、バーコードと、2つのカラーブロックとを含み、
前記バーコード及び2つのカラーブロックは、前記ラベル基体に設けられ、且つ前記2つのカラーブロックは、前記バーコードの両端に位置し、
前記バーコードには、それが所属したバーコードラベルの認識情報(IDなど)が内蔵されており、
前記選択されたカラーブロックの所定数量は、4つであり、
前記所定のカラーブロック選択ルールとして、レンズ範囲内の画像にバーコードラベルが2つのみある場合、レンズ範囲内の画像における2つのバーコードラベルから、それぞれ2つのカラーブロックを選択し、レンズ範囲内の画像におけるバーコードラベルの数量が2つより大きいと、レンズに最も近接した2つのバーコードラベルをロックし、ロックされた2つのバーコードラベルから、それぞれ2つのカラーブロックを選択する。
さらに、別の実施例として、前記バーコードラベルは、ラベル基体と、バーコードと、2つの、カラーブロックの組み合わせとを含み、
前記バーコード及び2つの、カラーブロックの組み合わせは、前記ラベル基体に設けられ、且つ前記2つの、カラーブロックの組み合わせは、前記バーコードの両端に位置し、
前記カラーブロックの組み合わせは、色を異にする複数のカラーブロックを含み、
前記バーコードには、それが所属したバーコードラベルの認識情報(IDなど)が内蔵されており、
前記選択されたカラーブロックの所定数量は、4つであり、
前記所定のカラーブロック選択ルールとして、レンズ範囲内の画像にバーコードラベルが2つのみある場合、レンズ範囲内の画像における2つのバーコードラベルからそれぞれ、所属したラベル基体の最も外側に位置する2つのカラーブロックを選択し、レンズ範囲内の画像におけるバーコードラベルの数量が2つより大きいと、各バーコードラベルから分散指標最大の場合の4つのカラーブロックを特定する。
詳しくは、図3に示されるように、本発明のポータブル端末による室内ナビゲーション方法の一実施例におけるバーコードラベルの構造を示す図であり、このバーコードラベルは、ラベル基体1と、バーコード2と、2つの、カラーブロックの組み合わせ3とを含み、
前記バーコード2及び2つの、カラーブロックの組み合わせ3は、前記ラベル基体1に設けられ、且つ前記2つの、カラーブロックの組み合わせ3は、前記バーコード2の両端に位置し、
前記カラーブロックの組み合わせ3は、色を異にする複数のカラーブロック31を含み、例えば、図2のように、前記バーコード2の両端に位置する赤、緑、青のカラーブロック31である。なお、最も外側に位置するカラーブロックは、それが所属した前記ラベル基体1の最も外側に位置し、例えば、図3のように、赤のカラーブロック31である。
さらに、別の実施例として、レンズ範囲内の画像におけるバーコードラベルの数量が2つより大きいと、各バーコードラベルから分散指標最大の場合の4つのカラーブロックを特定する前記ステップとして、
異なるバーコードラベルから順列組合せ法により、それぞれ4つのカラーブロックを抽出して異なるカラーブロックの組み合わせを構成し、
カラーブロックの組み合わせごとに、カラーブロックの組み合わせにおける4つのカラーブロックの所定位置点を特定し、特定された4つの所定位置点が凸四角形を構成した場合、前記凸四角形の面積を対応するカラーブロックの組み合わせの分散指標とし、特定された4つの所定位置点が凹四角形を構成した場合、前記凹四角形の4つの頂点のうちから、構成された三角形の面積が最大となる3つの点を特定し、特定された3つの点が構成した三角形の面積を対応するカラーブロックの組み合わせの分散指標とし、
各カラーブロックの組み合わせに対応する分散指標を比較し、分散指標最大のカラーブロックの組み合わせにおける4つのカラーブロックを特定する。
本実施例では、異なるバーコードラベルから順列組合せ法により、それぞれ4つのカラーブロックを抽出して異なるカラーブロックの組み合わせを構成する。例えば、すべてのバーコードラベルには合計N個のカラーブロックがあると、合計通りのカラーブロックの組み合わせを構成することができる。
カラーブロックの組み合わせごとに、カラーブロックの組み合わせにおける4つのカラーブロックの所定位置点、例えば幾何中心点を特定し、特定された4つの頂点が凸四角形を構成した場合、凸四角形の面積を対応するカラーブロックの組み合わせの分散指標とし、特定された4つの頂点が凹四角形を構成した場合、前記4つの頂点のうちから、構成された三角形面積が最大となる3つの点を特定し、特定された3つの点が構成した三角形の面積を対応するカラーブロックの組み合わせの分散指標とし、
各カラーブロックの組み合わせに対応する分散指標を比較し、分散指標最大のカラーブロックの組み合わせにおける4つのカラーブロックを特定する。
なお、本実施例では、四角形を凸四角形及び凹四角形に分類し、いずれか1つの内角が180度より大きい四角形は凹四角形であり、そうでないものは凸四角形である。凸四角形の場合、その面積をその分散程度をはかる指標とし、凹四角形の場合、いずれか3つの点で構成した三角形の面積のうちの最大値をその分散指標とする。
さらに、別の実施例として、レンズ範囲内の画像におけるバーコードラベルの数量が2つより大きいと、各バーコードラベルから、分散指標最大の場合の4つのカラーブロックを特定する前記ステップとして、さらに、
特定された4つの所定位置点が凸四角形を構成した場合、凸四角形の4つの頂点から順列組合せ法により、それぞれ3つの点を抽出して異なる三角形頂点の組み合わせを構成し、
各三角形頂点の組み合わせに対応する三角形の面積をそれぞれ算出し、すべての三角形頂点の組み合わせに対応する三角形面積の和を2で割って、凸四角形の面積を得、前記凸四角形の面積を対応するカラーブロックの組み合わせの分散指標とする。
本実施例では、凸四角形の4つの頂点から順列組合せ法により、それぞれ3つの点を抽出して異なる三角形頂点の組み合わせを構成し、さらに、各三角形頂点の組み合わせに対応する三角形の面積をそれぞれ算出し、すべての三角形頂点の組み合わせに対応する三角形面積の和を2で割って、凸四角形の面積を得る。
詳しくは、図4に示されるように、本発明のポータブル端末による室内ナビゲーション方法の一実施例における凸四角形の4つの頂点からなる4通りの三角形頂点の組み合わせを示す図であり、凸四角形は、合計4つの頂点を有するため、合計通りの三角形頂点の組み合わせを構成することができる。
さらに、別の実施例として、レンズ範囲内の画像におけるバーコードラベルの数量が2つより大きいと、各バーコードラベルから、分散指標最大の場合の4つのカラーブロックを特定する前記ステップとして、さらに、
特定された4つの所定位置点が凹四角形を構成した場合、前記凹四角形の4つの頂点から順列組合せ法により、それぞれ3つの点を抽出して異なる三角形頂点の組み合わせを構成し、各三角形頂点の組み合わせに対応する三角形の面積をそれぞれ算出し、三角形の面積が最大となる場合に対応する三角形頂点の組み合わせを特定し、三角形の面積の最大値を前記凹四角形に対応するカラーブロックの組み合わせの分散指標とする。
本実施例では、凹四角形の4つの頂点から順列組合せ法により、それぞれ3つの点を抽出して異なる三角形頂点の組み合わせを構成し、さらに、各三角形頂点の組み合わせに対応する三角形の面積をそれぞれ算出し、三角形面積が最大となる場合に対応する三角形頂点の組み合わせを特定し、三角形面積の最大値を凹四角形の分散指標とする。
詳しくは、図5に示されるように、本発明のポータブル端末による室内ナビゲーション方法の一実施例における凹四角形の4つの頂点からなる4通りの三角形頂点の組み合わせを示す図であり、凹四角形は、合計4つの頂点を有するため、合計通りの三角形頂点の組み合わせを構成することができる。
さらに、別の実施例として、各三角形頂点の組み合わせに対応する三角形の面積をそれぞれ算出する前記ステップとして、
ある三角形頂点の組み合わせに対応する三角形の面積を算出する際、予め記憶されている三角形頂点の組み合わせと三角形面積との関連データの全てに亘って、前記三角形頂点の組み合わせとマッチングした三角形頂点の組み合わせが予め記憶されているか否かを分析する。例えば、予め記憶されている三角形頂点の組み合わせに、A1、A2、A3という組み合わせが含まれると想定すると、前記三角形頂点の組み合わせが頂点A1、A2、A3からなる場合、前記三角形頂点の組み合わせとマッチングした三角形頂点の組み合わせが予め記憶されていることを表す。
前記三角形頂点の組み合わせとマッチングした三角形頂点の組み合わせが予め記憶されている場合、マッチングした三角形頂点の組み合わせに対応する三角形の面積値を検索し、見つかった面積値を前記三角形頂点の組み合わせに対応する三角形の面積とし、
前記三角形頂点の組み合わせとマッチングした三角形頂点の組み合わせが予め記憶されていない場合、前記三角形頂点の組み合わせにおける各頂点のワールド座標系の座標、すなわち前記三角形頂点の組み合わせの各頂点が所属したカラーブロックに対応するワールド座標系の座標に基づき、前記三角形頂点の組み合わせに対応する三角形の各辺の長さを特定し、特定された辺の長さに基づき、前記三角形頂点の組み合わせに対応する三角形の面積を算出し、後続の三角形面積の検索に備えて、前記三角形頂点の組み合わせと算出された三角形面積とを関連データとして生成させて保存する。
さらに、別の実施例として、前記選択されたカラーブロックの所定数量は、4つであり、
前記所定の座標算出ルールとして、選択された4つのカラーブロックに対応する4つの画素座標系の座標及び4つのワールド座標系の座標に基づき、さらに、前記ポータブル端末に予め記憶されているカメラ内部パラメータに基づき、カメラ外部パラメータに属する回転行列及び並進行列を算出し、さらに、前記回転行列及び並進行列により変換することで、前記ポータブル端末のカメラのワールド座標系における座標を得て前記ポータブル端末のワールド座標系における座標とする。
本実施例では、選択された4つのカラーブロックに対応する4つの画素座標系の座標及び4つのワールド座標系の座標に基づき、さらに、ポータブル端末に予め記憶されているカメラ内部パラメータ(f,f,u,v)に基づき、カメラ外部パラメータに属する回転行列R及び並進行列Tを算出する。例えば、OpenCVにおけるsolvePnP関数によりカメラ外部パラメータに属する回転ベクトルRvec及び並進行列Tを算出し、さらに、OpenCVにおけるcvRodrigues2関数により回転ベクトルRvecを変換して回転行列Rを得る。
カメラ座標系の原点座標(X=0,Y=0,Z=0)を座標系変換式
cはカメラ座標系を、wはワールド座標系を指す)に代入し、
さらに、カメラのワールド座標系における座標を算出し、すなわち、ポータブル端末のワールド座標系における座標は、
図6に示すように、本発明の実施例2は、ポータブル端末による室内ナビゲーション方法を提供しており、前記実施例をベースに、前記ステップS30後に、さらにステップS40を含む。
ステップS40:算出された前記ポータブル端末のワールド座標系における座標に基づき、所定の方向算出ルールに従って、前記ポータブル端末の方向ベクトルを算出する。
本実施例では、前記ポータブル端末のワールド座標系における座標を算出した後、さらに、所定の方向算出ルールに従って、前記ポータブル端末の方向ベクトルを算出する。
詳しくは、前記所定の方向算出ルールとして、方向ベクトルと地面との交点のワールド座標系における座標を(Xw2,Yw2,Zw2)と設定し(ただしZw2=0)、よって、Xw2及びYw2を求めればよい。ポータブル端末のワールド座標系における座標(Xw1,Yw1,Zw1)、カメラ内部パラメータ(f,f,u,v)、回転行列R、並進行列Tに基づき、さらに、カメラキャリブレーションモデルにより、次式を得る。
式を簡略化するために行列Sで表し、次のとおり設定すると、
次式を得る。
さらに、
前記式(5)、(6)、(7)からなる連立3元1次方程式を解き、次式を得る。
また、Zw2=0から、法線ベクトルと地面との交点のワールド座標系における座標(Xw2,Yw2,Zw2)は解析解を有し、前記ポータブル端末の方向ベクトルは、(Xw2−Xw1,Yw2−Yw1,Zw2−Zw1)となる。
さらに、図7に示されるように、本発明のポータブル端末による室内ナビゲーション方法の一実施例におけるナビゲーションの応用を示す図である。
本実施例は、ポータブル端末のカメラを用いて、レンズ範囲内の画像における室内の所定位置に予め設置されたバーコードラベルの認識情報を取得し、レンズ範囲内の画像における少なくとも2つのバーコードラベルから所定数量のカラーブロックを選択し、さらに、各カラーブロックに対応する画素座標系の座標及び対応するワールド座標系の座標を算出し、さらに、選択された各カラーブロックに対応する画素座標系の座標及びワールド座標系の座標に基づき、所定の座標算出ルールに従って、前記ポータブル端末の位置及び方向ベクトルを算出するものである。室内の所定位置に予め設置されたバーコードラベルのカラーブロックの画素座標系の座標及び対応するワールド座標系の座標に基づき、総合的な演算を行うことで、ポータブル端末のリアルタイムな位置及び方向ベクトルについて高度な演算を迅速で正確に行って、室内ナビゲーションの精度を高めることができる。
本発明は、室内ナビゲーション機能が搭載されたポータブル端末をさらに提供する。
図8は、本発明の室内ナビゲーション機能が搭載されたポータブル端末の実施例1の機能モジュールを示しており、図8によると、実施例1では、前記室内ナビゲーション機能が搭載されたポータブル端末は、取得モジュール01と、演算モジュール02と、測位モジュール03とを含む。
取得モジュール01は、ユーザから発信された室内ナビゲーションコマンドを受信すると、ポータブル端末のカメラを制御してレンズ範囲内の画像を取得し、レンズ範囲内の画像における室内の所定位置に予め設置されたバーコードラベルのバーコードに対してデータ解析を行うことで、レンズ範囲内の画像における各バーコードラベルの認識情報を取得し、所定のカラーブロック選択ルールに従って、レンズ範囲内の画像における少なくとも2つのバーコードラベルから所定数量のカラーブロックを選択する。
本実施例では、室内場所の所定位置、例えば地面、壁面、天井などにバーコードラベルを予め設置することができ、前記バーコードラベルは、少なくとも対応する認識情報、カラーブロックなどを含む。ポータブル端末は、ユーザが物理ボタン又は仮想ボタンによって発信した室内ナビゲーションコマンドを受信すると、ポータブル端末のカメラを起動させ、カメラを制御してレンズ範囲内の画像を取得する。ポータブル端末のカメラによりレンズ範囲内の画像における室内の所定位置に予め設置されたバーコードラベルを取得し、レンズ範囲内の画像における室内の所定位置に予め設置されたバーコードラベルのバーコードに対してデータ解析を行うことで、レンズ範囲内の画像における各バーコードラベルの認識情報を取得し、所定のカラーブロック選択ルールに従って、レンズ範囲内の画像における少なくとも2つのバーコードラベルから所定数量のカラーブロックを選択する。なお、選択されるカラーブロックの数量については限定しない。
演算モジュール02は、レンズ範囲内の画像における選択された各カラーブロックの位置に基づき、各カラーブロックに対応する画素座標系の座標を算出し、
予め設定されたバーコードラベルの認識情報とカラーブロックのワールド座標系の座標との関連データにより、選択された各カラーブロックの所属したバーコードラベルに基づき、各カラーブロックに対応するワールド座標系の座標を算出する。
選択されたカラーブロックごとに、レンズ範囲内の画像におけるその位置に基づき、対応する画素座標系の座標を特定し、例えば、一つの実施形態において、カラーブロックの幾何中心の画素座標系における座標を算出してもよい。
予め設定されたバーコードラベルの認識情報とカラーブロックのワールド座標系の座標との関連データに基づき、選択されたカラーブロックごとに、それが所属したバーコードラベルに基づき、対応するワールド座標系の座標を特定する。例えば、一つの実施形態において、カラーブロックの幾何中心のワールド座標系における座標を算出してもよい。
測位モジュール03は、選択された各カラーブロックに対応する画素座標系の座標及びワールド座標系の座標に基づき、所定の座標算出ルールに従って、前記ポータブル端末のワールド座標系における座標を算出することにより、前記ポータブル端末の位置を得る。
選択された各カラーブロックに対応する画素座標系の座標及びワールド座標系の座標に基づき、所定の座標算出ルールに従って、前記ポータブル端末のワールド座標系における座標、すなわち前記ポータブル端末の位置を算出することで、ポータブル端末のリアルタイムな位置について高度な演算を実現し、室内ナビゲーションを行う。
本実施例は、ポータブル端末のカメラを用いて、レンズ範囲内の画像における室内の所定位置に予め設置されたバーコードラベルの認識情報を取得し、レンズ範囲内の画像における少なくとも2つのバーコードラベルから所定数量のカラーブロックを選択し、さらに、各カラーブロックに対応する画素座標系の座標及び対応するワールド座標系の座標を算出し、さらに、選択された各カラーブロックに対応する画素座標系の座標及びワールド座標系の座標に基づき、所定の座標算出ルールに従って、前記ポータブル端末の位置を算出するものである。ポータブル端末のカメラ及び室内の所定位置に予め設置されたバーコードラベルを利用するだけで、室内ナビゲーションを行うことができるため、高度なソフトウェアとハードウェアは要求されず、また、室内の所定位置に予め設置されたバーコードラベルのカラーブロックの画素座標系の座標及び対応するワールド座標系の座標に基づき総合的な演算を行うことで、ポータブル端末のリアルタイムな位置について高度な演算を迅速で正確に行って、室内ナビゲーションの精度を高めることができる。
さらに、別の実施例として、前記バーコードラベルは、ラベル基体と、バーコードと、2つのカラーブロックとを含み、
前記バーコード及び2つのカラーブロックは、前記ラベル基体に設けられ、且つ前記2つのカラーブロックは、前記バーコードの両端に位置し、
前記バーコードには、それが所属したバーコードラベルの認識情報(IDなど)が内蔵されており、
前記選択されたカラーブロックの所定数量は、4つであり、
前記所定のカラーブロック選択ルールとして、レンズ範囲内の画像にバーコードラベルが2つのみある場合、レンズ範囲内の画像における2つのバーコードラベルから、それぞれ2つのカラーブロックを選択し、レンズ範囲内の画像におけるバーコードラベルの数量が2つより大きいと、レンズに最も近接した2つのバーコードラベルをロックし、ロックされた2つのバーコードラベルから、それぞれ2つのカラーブロックを選択する。
さらに、別の実施例として、前記バーコードラベルは、ラベル基体と、バーコードと、2つの、カラーブロックの組み合わせとを含み、
前記バーコード及び2つの、カラーブロックの組み合わせは、前記ラベル基体に設けられ、且つ前記2つの、カラーブロックの組み合わせは、前記バーコードの両端に位置し、
前記カラーブロックの組み合わせは、色を異にする複数のカラーブロックを含み、
前記バーコードには、それが所属したバーコードラベルの認識情報(IDなど)が内蔵されており、
前記選択されたカラーブロックの所定数量は、4つであり、
前記所定のカラーブロック選択ルールとして、レンズ範囲内の画像にバーコードラベルが2つのみある場合、レンズ範囲内の画像における2つのバーコードラベルからそれぞれ、所属したラベル基体の最も外側に位置する2つのカラーブロックを選択し、レンズ範囲内の画像におけるバーコードラベルの数量が2つより大きいと、各バーコードラベルから分散指標最大の場合の4つのカラーブロックを特定する。
さらに、別の実施例として、前記演算モジュール02は、さらに、
異なるバーコードラベルから順列組合せ法により、それぞれ4つのカラーブロックを抽出して異なるカラーブロックの組み合わせを構成し、
カラーブロックの組み合わせごとに、カラーブロックの組み合わせにおける4つのカラーブロックの所定位置点を特定し、特定された4つの所定位置点が凸四角形を構成した場合、前記凸四角形の面積を対応するカラーブロックの組み合わせの分散指標とし、特定された4つの所定位置点が凹四角形を構成した場合、前記凹四角形の4つの頂点のうちから、構成された三角形の面積が最大となる3つの点を特定し、特定された3つの点が構成した三角形の面積を対応するカラーブロックの組み合わせの分散指標とし、
各カラーブロックの組み合わせに対応する分散指標を比較し、分散指標最大のカラーブロックの組み合わせにおける4つのカラーブロックを特定する。
本実施例では、異なるバーコードラベルから順列組合せ法により、それぞれ4つのカラーブロックを抽出して異なるカラーブロックの組み合わせを構成する。例えば、すべてのバーコードラベルには合計N個のカラーブロックがあると、合計通りのカラーブロックの組み合わせを構成することができる。
カラーブロックの組み合わせごとに、カラーブロックの組み合わせにおける4つのカラーブロックの所定位置点、例えば幾何中心点を特定し、
特定された4つの頂点が凸四角形を構成した場合、凸四角形の面積を対応するカラーブロックの組み合わせの分散指標とし、特定された4つの頂点が凹四角形を構成した場合、前記4つの頂点のうちから、構成された三角形面積が最大となる3つの点を特定し、特定された3つの点が構成した三角形の面積を対応するカラーブロックの組み合わせの分散指標とし、
各カラーブロックの組み合わせに対応する分散指標を比較し、分散指標最大のカラーブロックの組み合わせにおける4つのカラーブロックを特定する。
なお、本実施例では、四角形を凸四角形及び凹四角形に分類し、いずれか1つの内角が180度より大きい四角形は凹四角形であり、そうでないものは凸四角形である。凸四角形の場合、その面積をその分散程度をはかる指標とし、凹四角形の場合、いずれか3つの点で構成した三角形の面積のうちの最大値をその分散指標とする。
さらに、別の実施例として、前記演算モジュール02は、さらに、
特定された4つの所定位置点が凸四角形を構成した場合、凸四角形の4つの頂点から順列組合せ法により、それぞれ3つの点を抽出して異なる三角形頂点の組み合わせを構成し、
各三角形頂点の組み合わせに対応する三角形の面積をそれぞれ算出し、すべての三角形頂点の組み合わせに対応する三角形面積の和を2で割って、凸四角形の面積を得、前記凸四角形の面積を対応するカラーブロックの組み合わせの分散指標とする。
本実施例では、凸四角形の4つの頂点から順列組合せ法により、それぞれ3つの点を抽出して異なる三角形頂点の組み合わせを構成し、さらに、各三角形頂点の組み合わせに対応する三角形の面積をそれぞれ算出し、すべての三角形頂点の組み合わせに対応する三角形面積の和を2で割って、凸四角形の面積を得る。
さらに、別の実施例として、前記演算モジュール02は、さらに、
特定された4つの所定位置点が凹四角形を構成した場合、前記凹四角形の4つの頂点から順列組合せ法により、それぞれ3つの点を抽出して異なる三角形頂点の組み合わせを構成し、各三角形頂点の組み合わせに対応する三角形の面積をそれぞれ算出し、三角形の面積が最大となる場合に対応する三角形頂点の組み合わせを特定し、三角形の面積の最大値を前記凹四角形に対応するカラーブロックの組み合わせの分散指標とする。
本実施例では、凹四角形の4つの頂点から順列組合せ法により、それぞれ3つの点を抽出して異なる三角形頂点の組み合わせを構成し、さらに、各三角形頂点の組み合わせに対応する三角形の面積をそれぞれ算出し、三角形面積が最大となる場合に対応する三角形頂点の組み合わせを特定し、三角形面積の最大値を凹四角形の分散指標とする。
さらに、別の実施例として、前記演算モジュール02は、さらに、
ある三角形頂点の組み合わせに対応する三角形の面積を算出する際、予め記憶されている三角形頂点の組み合わせと三角形面積との関連データの全てに亘って、前記三角形頂点の組み合わせとマッチングした三角形頂点の組み合わせが予め記憶されているか否かを分析する。例えば、予め記憶されている三角形頂点の組み合わせに、A1、A2、A3という組み合わせが含まれると想定すると、前記三角形頂点の組み合わせが頂点A1、A2、A3からなる場合、前記三角形頂点の組み合わせとマッチングした三角形頂点の組み合わせが予め記憶されていることを表す。
前記三角形頂点の組み合わせとマッチングした三角形頂点の組み合わせが予め記憶されている場合、マッチングした三角形頂点の組み合わせに対応する三角形の面積値を検索し、見つかった面積値を前記三角形頂点の組み合わせに対応する三角形の面積とし、
前記三角形頂点の組み合わせとマッチングした三角形頂点の組み合わせが予め記憶されていない場合、前記三角形頂点の組み合わせにおける各頂点のワールド座標系における座標、すなわち前記三角形頂点の組み合わせの各頂点が所属したカラーブロックに対応するワールド座標系の座標に基づき、前記三角形頂点の組み合わせに対応する三角形の各辺の長さを特定し、特定された辺の長さに基づき、前記三角形頂点の組み合わせに対応する三角形の面積を算出し、後続の三角形面積の検索に備えて、前記三角形頂点の組み合わせと算出された三角形面積とを関連データとして生成させて保存する。
さらに、別の実施例として、前記選択されたカラーブロックの所定数量は、4つであり、
前記所定の座標算出ルールとして、選択された4つのカラーブロックに対応する4つの画素座標系の座標及び4つのワールド座標系の座標に基づき、さらに、前記ポータブル端末に予め記憶されているカメラ内部パラメータに基づき、カメラ外部パラメータに属する回転行列及び並進行列を算出し、さらに、前記回転行列及び並進行列により変換することで、前記ポータブル端末のカメラのワールド座標系における座標を得て前記ポータブル端末のワールド座標系における座標とする。
本実施例では、選択された4つのカラーブロックに対応する4つの画素座標系の座標及び4つのワールド座標系の座標に基づき、さらに、ポータブル端末に予め記憶されているカメラ内部パラメータ(f,f,u,v)に基づき、カメラ外部パラメータに属する回転行列R及び並進行列Tを算出する。例えば、OpenCVにおけるsolvePnP関数によりカメラ外部パラメータに属する回転ベクトルRvec及び並進行列Tを算出し、さらに、OpenCVにおけるcvRodrigues2関数により回転ベクトルRvecを変換して回転行列Rを得る。
カメラ座標系の原点座標(X=0,Y=0,Z=0)を座標系変換式
cはカメラ座標系を、wはワールド座標系を指す)に代入し、
さらに、カメラのワールド座標系における座標を算出し、すなわち、ポータブル端末のワールド座標系における座標は、
図9に示すように、本発明の実施例2は、室内ナビゲーション機能が搭載されたポータブル端末を提供しており、前記実施例をベースに、さらに方向特定モジュール04を含む。
方向特定モジュール04は、算出された前記ポータブル端末のワールド座標系における座標に基づき、所定の方向算出ルールに従って、前記ポータブル端末の方向ベクトルを算出する。
本実施例では、前記ポータブル端末のワールド座標系における座標を算出した後、さらに、所定の方向算出ルールに従って、前記ポータブル端末の方向ベクトルを算出する。
詳しくは、前記所定の方向算出ルールとして、方向ベクトルと地面との交点のワールド座標系における座標を(Xw2,Yw2,Zw2)と設定し(ただしZw2=0)よって、Xw2及びYw2を求めればよい。ポータブル端末のワールド座標系における座標(Xw1,Yw1,Zw1)、カメラ内部パラメータ(f,f,u,v)、回転行列R、並進行列Tに基づき、さらに、カメラキャリブレーションモデルにより、次式を得る。
式を簡略化するために行列Sで表し、次のとおり設定すると、
次式を得る。
さらに、前記式(5)、(6)、(7)からなる連立3元1次方程式を解き、次式を得る。
また、Zw2=0から、法線ベクトルと地面との交点のワールド座標系における座標(Xw2,Yw2,Zw2)は解析解を有し、前記ポータブル端末の方向ベクトルは、(Xw2−Xw1,Yw2−Yw1,Zw2−Zw1)となる。
上記のとおり記載された本発明の実施例に番号がついたが、それは記載時の便宜を図るために付与したものに過ぎず、実施例の優劣を示すものではない。当業者であれば、本発明に関する実施形態の記載により、前記実施例による方法は、ソフトウェアと特定の汎用ハードウェアプラットフォームによる形態でも、ハードウェアでも実現できるが、多くの場合、前者による実施形態が好ましいことはよく理解できるであろう。これを踏まえれば、本発明の技術的解決手段の趣旨、又は従来技術に対して改善した部分は、ソフトウェア製品の形式で実施することができ、このコンピュータソフトウェア製品は、記憶媒体(例えばROM/RAM、磁気ディスク、CDROM)に記憶され、端末機器(携帯電話、コンピュータ、サーバ、又はネットワーク機器などであってもよい)にて本発明の各実施例による前記方法が実行されるように、幾つかのコマンドを含んでいる。
以上、単に本発明の好ましい実施例を記載したに過ぎず、これをもって本発明の特許請求の範囲を限定するものではなく、本発明の明細書及び図面に準じてなされた同等の構造上もしくは手順上の変更、又はその他の関係技術分野への直接的もしくは間接的な適用は、すべて本発明の特許請求の範囲に含まれるものとする。

Claims (16)

  1. ポータブル端末による室内ナビゲーション方法であって、
    ユーザから発信された室内ナビゲーションコマンドを受信すると、ポータブル端末は、そのカメラを制御してレンズ範囲内の画像を取得し、レンズ範囲内の画像における室内の所定位置に予め設置されたバーコードラベルのバーコードに対してデータ解析を行うことで、レンズ範囲内の画像における各バーコードラベルの認識情報を取得し、所定のカラーブロック選択ルールに従って、レンズ範囲内の画像における少なくとも2つのバーコードラベルから所定数量のカラーブロックを選択するステップと、
    レンズ範囲内の画像における選択された各カラーブロックの位置に基づき、各カラーブロックに対応する画素座標系の座標を算出し、
    予め設定されたバーコードラベルの認識情報とカラーブロックのワールド座標系の座標との関連データにより、選択された各カラーブロックの所属したバーコードラベルに基づき、各カラーブロックに対応するワールド座標系の座標を算出するステップと、
    選択された各カラーブロックに対応する画素座標系の座標及びワールド座標系の座標に基づき、所定の座標算出ルールに従って、前記ポータブル端末のワールド座標系における座標を算出することにより、前記ポータブル端末の位置を得るステップと、
    を含み、
    前記バーコードラベルは、ラベル基体と、バーコードと、2つの、カラーブロックの組み合わせとを含み、
    前記バーコード及び2つの、カラーブロックの組み合わせは、前記ラベル基体に設けられ、且つ前記2つの、カラーブロックの組み合わせは、前記バーコードの両端に位置し、
    前記カラーブロックの組み合わせは、色を異にする複数のカラーブロックを含み、前記バーコードには、それが所属したバーコードラベルの認識情報が内蔵されており、
    前記選択されたカラーブロックの所定数量は、4つであり、
    前記所定のカラーブロック選択ルールとして、レンズ範囲内の画像にバーコードラベルが2つのみある場合、レンズ範囲内の画像における2つのバーコードラベルからそれぞれ、所属したラベル基体の最も外側に位置する2つのカラーブロックを選択し、レンズ範囲内の画像におけるバーコードラベルの数量が2つより大きいと、各バーコードラベルから、分散指標最大の場合の4つのカラーブロックを特定する
    ことを特徴とするポータブル端末による室内ナビゲーション方法。
  2. 前記バーコードラベルは、ラベル基体と、バーコードと、2つのカラーブロックとを含み、
    前記バーコード及び2つのカラーブロックは、前記ラベル基体に設けられ、且つ前記2つのカラーブロックは、前記バーコードの両端に位置し、
    前記バーコードには、それが所属したバーコードラベルの認識情報が内蔵されており、
    前記選択されたカラーブロックの所定数量は、4つであり、
    前記所定のカラーブロック選択ルールとして、レンズ範囲内の画像にバーコードラベルが2つのみある場合、レンズ範囲内の画像における2つのバーコードラベルから、それぞれ2つのカラーブロックを選択し、レンズ範囲内の画像におけるバーコードラベルの数量が2つより大きいと、レンズに最も近接した2つのバーコードラベルをロックし、ロックされた2つのバーコードラベルから、それぞれ2つのカラーブロックを選択する
    ことを特徴とする請求項1に記載のポータブル端末による室内ナビゲーション方法。
  3. レンズ範囲内の画像におけるバーコードラベルの数量が2つより大きいと、各バーコードラベルから、分散指標最大の場合の4つのカラーブロックを特定する前記ステップとして、
    異なるバーコードラベルから順列組合せ法により、それぞれ4つのカラーブロックを抽出して異なるカラーブロックの組み合わせを構成し、
    カラーブロックの組み合わせごとに、カラーブロックの組み合わせにおける4つのカラーブロックの所定位置点を特定し、特定された4つの所定位置点が凸四角形を構成した場合、前記凸四角形の面積を対応するカラーブロックの組み合わせの分散指標とし、特定された4つの所定位置点が凹四角形を構成した場合、前記凹四角形の4つの頂点のうちから、構成された三角形の面積が最大となる3つの点を特定し、特定された3つの点が構成した三角形の面積を対応するカラーブロックの組み合わせの分散指標とし、
    各カラーブロックの組み合わせに対応する分散指標を比較し、分散指標最大のカラーブロックの組み合わせにおける4つのカラーブロックを特定する
    ことを特徴とする請求項に記載のポータブル端末による室内ナビゲーション方法。
  4. レンズ範囲内の画像におけるバーコードラベルの数量が2つより大きいと、各バーコードラベルから、分散指標最大の場合の4つのカラーブロックを特定する前記ステップとして、さらに、
    特定された4つの所定位置点が凸四角形を構成した場合、凸四角形の4つの頂点から順列組合せ法により、それぞれ3つの点を抽出して異なる三角形頂点の組み合わせを構成し、
    各三角形頂点の組み合わせに対応する三角形の面積をそれぞれ算出し、すべての三角形頂点の組み合わせに対応する三角形面積の和を2で割って、凸四角形の面積を得、前記凸四角形の面積を対応するカラーブロックの組み合わせの分散指標とする
    ことを特徴とする請求項に記載のポータブル端末による室内ナビゲーション方法。
  5. レンズ範囲内の画像におけるバーコードラベルの数量が2つより大きいと、各バーコードラベルから、分散指標最大の場合の4つのカラーブロックを特定する前記ステップとして、さらに、
    特定された4つの所定位置点が凹四角形を構成した場合、前記凹四角形の4つの頂点から順列組合せ法により、それぞれ3つの点を抽出して異なる三角形頂点の組み合わせを構成し、各三角形頂点の組み合わせに対応する三角形の面積をそれぞれ算出し、三角形の面積が最大となる場合に対応する三角形頂点の組み合わせを特定し、三角形の面積の最大値を前記凹四角形に対応するカラーブロックの組み合わせの分散指標とする
    ことを特徴とする請求項3又は4に記載のポータブル端末による室内ナビゲーション方法。
  6. 各三角形頂点の組み合わせに対応する三角形の面積をそれぞれ算出する前記ステップとして、
    ある三角形頂点の組み合わせに対応する三角形の面積を算出する際、予め記憶されている三角形頂点の組み合わせと三角形面積との関連データの全てに亘って、前記三角形頂点の組み合わせとマッチングした三角形頂点の組み合わせが予め記憶されているか否かを分析し、
    前記三角形頂点の組み合わせとマッチングした三角形頂点の組み合わせが予め記憶されている場合、マッチングした三角形頂点の組み合わせに対応する三角形の面積値を検索し、見つかった面積値を前記三角形頂点の組み合わせに対応する三角形の面積とし、
    前記三角形頂点の組み合わせとマッチングした三角形頂点の組み合わせが予め記憶されていない場合、前記三角形頂点の組み合わせにおける各頂点のワールド座標系の座標に基づき、前記三角形頂点の組み合わせに対応する三角形の各辺の長さを特定し、特定された辺の長さに基づき、前記三角形頂点の組み合わせに対応する三角形の面積を算出し、後続の三角形面積の検索に備えて、前記三角形頂点の組み合わせと算出された三角形面積とを関連データとして生成させて保存する
    ことを特徴とする請求項に記載のポータブル端末による室内ナビゲーション方法。
  7. 前記選択されたカラーブロックの所定数量は、4つであり、
    前記所定の座標算出ルールとして、選択された4つのカラーブロックに対応する4つの画素座標系の座標及び4つのワールド座標系の座標に基づき、さらに、前記ポータブル端末に予め記憶されているカメラ内部パラメータに基づき、カメラ外部パラメータに属する回転行列及び並進行列を算出し、さらに、前記回転行列及び並進行列により変換することで、前記ポータブル端末のカメラのワールド座標系における座標を得て前記ポータブル端末のワールド座標系における座標とする
    ことを特徴とする請求項1に記載のポータブル端末による室内ナビゲーション方法。
  8. ポータブル端末であって、ユーザインタラクション機器と、記憶機器と、カメラと、プロセッサとを含み、
    前記ユーザインタラクション機器は、前記端末とユーザの間でのインタラクションを実現し、
    前記記憶機器には、コンピュータ可読コードコマンドが記憶されており、
    前記コンピュータ可読コードコマンドは、前記プロセッサによって実行されることで、
    ユーザから発信された室内ナビゲーションコマンドを受信すると、カメラを制御してレンズ範囲内の画像を取得し、レンズ範囲内の画像における室内の所定位置に予め設置されたバーコードラベルのバーコードに対してデータ解析を行うことで、レンズ範囲内の画像における各バーコードラベルの認識情報を取得し、所定のカラーブロック選択ルールに従って、レンズ範囲内の画像における少なくとも2つのバーコードラベルから所定数量のカラーブロックを選択するステップと、
    レンズ範囲内の画像における選択された各カラーブロックの位置に基づき、各カラーブロックに対応する画素座標系の座標を算出し、
    予め設定されたバーコードラベルの認識情報とカラーブロックのワールド座標系の座標との関連データにより、選択された各カラーブロックの所属したバーコードラベルに基づき、各カラーブロックに対応するワールド座標系の座標を算出するステップと、
    選択された各カラーブロックに対応する画素座標系の座標及びワールド座標系の座標に基づき、所定の座標算出ルールに従って、前記ポータブル端末のワールド座標系における座標を算出することにより、前記ポータブル端末の位置を得るステップと、を実現することができ
    前記バーコードラベルは、ラベル基体と、バーコードと、2つのカラーブロックとを含み、
    前記バーコード及び2つのカラーブロックは、前記ラベル基体に設けられ、且つ前記2つのカラーブロックは、前記バーコードの両端に位置し、
    前記バーコードには、それが所属したバーコードラベルの認識情報が内蔵されており、
    前記選択されたカラーブロックの所定数量は、4つであり、
    前記所定のカラーブロック選択ルールとして、レンズ範囲内の画像にバーコードラベルが2つのみある場合、レンズ範囲内の画像における2つのバーコードラベルから、それぞれ2つのカラーブロックを選択し、レンズ範囲内の画像におけるバーコードラベルが2つより大きいと、レンズに最も近接した2つのバーコードラベルをロックし、ロックされた2つのバーコードラベルから、それぞれ2つのカラーブロックを選択する
    ことを特徴とすポータブル端末。
  9. ポータブル端末であって、ユーザインタラクション機器と、記憶機器と、カメラと、プロセッサとを含み、
    前記ユーザインタラクション機器は、前記端末とユーザの間でのインタラクションを実現し、
    前記記憶機器には、コンピュータ可読コードコマンドが記憶されており、
    前記コンピュータ可読コードコマンドは、前記プロセッサによって実行されることで、
    ユーザから発信された室内ナビゲーションコマンドを受信すると、カメラを制御してレンズ範囲内の画像を取得し、レンズ範囲内の画像における室内の所定位置に予め設置されたバーコードラベルのバーコードに対してデータ解析を行うことで、レンズ範囲内の画像における各バーコードラベルの認識情報を取得し、所定のカラーブロック選択ルールに従って、レンズ範囲内の画像における少なくとも2つのバーコードラベルから所定数量のカラーブロックを選択するステップと、
    レンズ範囲内の画像における選択された各カラーブロックの位置に基づき、各カラーブロックに対応する画素座標系の座標を算出し、
    予め設定されたバーコードラベルの認識情報とカラーブロックのワールド座標系の座標との関連データにより、選択された各カラーブロックの所属したバーコードラベルに基づき、各カラーブロックに対応するワールド座標系の座標を算出するステップと、
    選択された各カラーブロックに対応する画素座標系の座標及びワールド座標系の座標に基づき、所定の座標算出ルールに従って、前記ポータブル端末のワールド座標系における座標を算出することにより、前記ポータブル端末の位置を得るステップと、を実現することができ
    前記バーコードラベルは、ラベル基体と、バーコードと、2つの、カラーブロックの組み合わせとを含み、
    前記バーコード及び2つの、カラーブロックの組み合わせは、前記ラベル基体に設けられ、且つ前記2つの、カラーブロックの組み合わせは、前記バーコードの両端に位置し、
    前記カラーブロックの組み合わせは、色を異にする複数のカラーブロックを含み、
    前記バーコードには、それが所属したバーコードラベルの認識情報が内蔵されており、
    前記選択されたカラーブロックの所定数量は、4つであり、
    前記所定のカラーブロック選択ルールとして、レンズ範囲内の画像にバーコードラベルが2つのみある場合、レンズ範囲内の画像における2つのバーコードラベルからそれぞれ、所属したラベル基体の最も外側に位置する2つのカラーブロックを選択し、レンズ範囲内の画像におけるバーコードラベルの数量が2つより大きいと、各バーコードラベルから、分散指標最大の場合の4つのカラーブロックを特定する
    ことを特徴とすポータブル端末。
  10. レンズ範囲内の画像におけるバーコードラベルの数量が2つより大きいと、各バーコードラベルから、分散指標最大の場合の4つのカラーブロックを特定する前記ステップとして、
    異なるバーコードラベルから順列組合せ法により、それぞれ4つのカラーブロックを抽出して異なるカラーブロックの組み合わせを構成し、
    カラーブロックの組み合わせごとに、カラーブロックの組み合わせにおける4つのカラーブロックの所定位置点を特定し、特定された4つの所定位置点が凸四角形を構成した場合、前記凸四角形の面積を対応するカラーブロックの組み合わせの分散指標とし、特定された4つの所定位置点が凹四角形を構成した場合、前記凹四角形の4つの頂点のうちから、構成された三角形の面積が最大となる3つの点を特定し、特定された3つの点が構成した三角形の面積を対応するカラーブロックの組み合わせの分散指標とし、
    各カラーブロックの組み合わせに対応する分散指標を比較し、分散指標最大のカラーブロックの組み合わせにおける4つのカラーブロックを特定する
    ことを特徴とする請求項8又は9に記載のポータブル端末。
  11. レンズ範囲内の画像におけるバーコードラベルの数量が2つより大きいと、各バーコードラベルから、分散指標最大の場合の4つのカラーブロックを特定する前記ステップとして、さらに、
    特定された4つの所定位置点が凸四角形を構成した場合、凸四角形の4つの頂点から順列組合せ法により、それぞれ3つの点を抽出して異なる三角形頂点の組み合わせを構成し、
    各三角形頂点の組み合わせに対応する三角形の面積をそれぞれ算出し、すべての三角形頂点の組み合わせに対応する三角形面積の和を2で割って、凸四角形の面積を得、前記凸四角形の面積を対応するカラーブロックの組み合わせの分散指標とする
    ことを特徴とする請求項10に記載のポータブル端末。
  12. レンズ範囲内の画像におけるバーコードラベルの数量が2つより大きいと、各バーコードラベルから、分散指標最大の場合の4つのカラーブロックを特定する前記ステップとして、さらに、
    特定された4つの所定位置点が凹四角形を構成した場合、前記凹四角形の4つの頂点から順列組合せ法により、それぞれ3つの点を抽出して異なる三角形頂点の組み合わせを構成し、各三角形頂点の組み合わせに対応する三角形の面積をそれぞれ算出し、三角形の面積が最大となる場合に対応する三角形頂点の組み合わせを特定し、三角形の面積の最大値を前記凹四角形に対応するカラーブロックの組み合わせの分散指標とする
    ことを特徴とする請求項10又は11に記載のポータブル端末。
  13. 各三角形頂点の組み合わせに対応する三角形の面積をそれぞれ算出する前記ステップとして、
    ある三角形頂点の組み合わせに対応する三角形の面積を算出する際、予め記憶されている三角形頂点の組み合わせと三角形面積との関連データの全てに亘って、前記三角形頂点の組み合わせとマッチングした三角形頂点の組み合わせが予め記憶されているか否かを分析し、
    前記三角形頂点の組み合わせとマッチングした三角形頂点の組み合わせが予め記憶されている場合、マッチングした三角形頂点の組み合わせに対応する三角形の面積値を検索し、見つかった面積値を前記三角形頂点の組み合わせに対応する三角形の面積とし、
    前記三角形頂点の組み合わせとマッチングした三角形頂点の組み合わせが予め記憶されていない場合、前記三角形頂点の組み合わせにおける各頂点のワールド座標系の座標に基づき、前記三角形頂点の組み合わせに対応する三角形の各辺の長さを特定し、特定された辺の長さに基づき、前記三角形頂点の組み合わせに対応する三角形の面積を算出し、後続の三角形面積の検索に備えて、前記三角形頂点の組み合わせと算出された三角形面積とを関連データとして生成させて保存する
    ことを特徴とする請求項12に記載のポータブル端末。
  14. 前記選択されたカラーブロックの所定数量は、4つであり、
    前記所定の座標算出ルールとして、選択された4つのカラーブロックに対応する4つの画素座標系の座標及び4つのワールド座標系の座標に基づき、さらに、前記ポータブル端末に予め記憶されているカメラ内部パラメータに基づき、カメラ外部パラメータに属する回転行列及び並進行列を算出し、さらに、前記回転行列及び並進行列により変換することで、前記ポータブル端末のカメラのワールド座標系における座標を得て前記ポータブル端末のワールド座標系における座標とする
    ことを特徴とする請求項8又は9に記載のポータブル端末。
  15. コンピュータ実行可能コマンドが搭載された記憶媒体であって、前記記憶媒体は、1つ又は複数のプロセッサにより実行されることで、
    ユーザから発信された室内ナビゲーションコマンドを受信すると、カメラを制御してレンズ範囲内の画像を取得し、レンズ範囲内の画像における室内の所定位置に予め設置されたバーコードラベルのバーコードに対してデータ解析を行うことで、レンズ範囲内の画像における各バーコードラベルの認識情報を取得し、所定のカラーブロック選択ルールに従って、レンズ範囲内の画像における少なくとも2つのバーコードラベルから所定数量のカラーブロックを選択する動作と、
    レンズ範囲内の画像における選択された各カラーブロックの位置に基づき、各カラーブロックに対応する画素座標系の座標を算出し、
    予め設定されたバーコードラベルの認識情報とカラーブロックのワールド座標系の座標との関連データにより、選択された各カラーブロックの所属したバーコードラベルに基づき、各カラーブロックに対応するワールド座標系の座標を算出する動作と、
    選択された各カラーブロックに対応する画素座標系の座標及びワールド座標系の座標に基づき、所定の座標算出ルールに従って、ポータブル端末のワールド座標系における座標を算出することにより、ポータブル端末の位置を得る動作と、を実現することができ、
    前記バーコードラベルは、ラベル基体と、バーコードと、2つのカラーブロックとを含み、
    前記バーコード及び2つのカラーブロックは、前記ラベル基体に設けられ、且つ前記2つのカラーブロックは、前記バーコードの両端に位置し、
    前記バーコードには、それが所属したバーコードラベルの認識情報が内蔵されており、
    前記選択されたカラーブロックの所定数量は、4つであり、
    前記所定のカラーブロック選択ルールとして、レンズ範囲内の画像にバーコードラベルが2つのみある場合、レンズ範囲内の画像における2つのバーコードラベルから、それぞれ2つのカラーブロックを選択し、レンズ範囲内の画像におけるバーコードラベルが2つより大きいと、レンズに最も近接した2つのバーコードラベルをロックし、ロックされた2つのバーコードラベルから、それぞれ2つのカラーブロックを選択する
    ことを特徴とするコンピュータ実行可能コマンドが搭載された記憶媒体。
  16. コンピュータ実行可能コマンドが搭載された記憶媒体であって、前記記憶媒体は、1つ又は複数のプロセッサにより実行されることで、
    ユーザから発信された室内ナビゲーションコマンドを受信すると、カメラを制御してレンズ範囲内の画像を取得し、レンズ範囲内の画像における室内の所定位置に予め設置されたバーコードラベルのバーコードに対してデータ解析を行うことで、レンズ範囲内の画像における各バーコードラベルの認識情報を取得し、所定のカラーブロック選択ルールに従って、レンズ範囲内の画像における少なくとも2つのバーコードラベルから所定数量のカラーブロックを選択する動作と、
    レンズ範囲内の画像における選択された各カラーブロックの位置に基づき、各カラーブロックに対応する画素座標系の座標を算出し、
    予め設定されたバーコードラベルの認識情報とカラーブロックのワールド座標系の座標との関連データにより、選択された各カラーブロックの所属したバーコードラベルに基づき、各カラーブロックに対応するワールド座標系の座標を算出する動作と、
    選択された各カラーブロックに対応する画素座標系の座標及びワールド座標系の座標に基づき、所定の座標算出ルールに従って、ポータブル端末のワールド座標系における座標を算出することにより、ポータブル端末の位置を得る動作と、を実現することができ、
    前記バーコードラベルは、ラベル基体と、バーコードと、2つの、カラーブロックの組み合わせとを含み、
    前記バーコード及び2つの、カラーブロックの組み合わせは、前記ラベル基体に設けられ、且つ前記2つの、カラーブロックの組み合わせは、前記バーコードの両端に位置し、
    前記カラーブロックの組み合わせは、色を異にする複数のカラーブロックを含み、
    前記バーコードには、それが所属したバーコードラベルの認識情報が内蔵されており、
    前記選択されたカラーブロックの所定数量は、4つであり、
    前記所定のカラーブロック選択ルールとして、レンズ範囲内の画像にバーコードラベルが2つのみある場合、レンズ範囲内の画像における2つのバーコードラベルからそれぞれ、所属したラベル基体の最も外側に位置する2つのカラーブロックを選択し、レンズ範囲内の画像におけるバーコードラベルの数量が2つより大きいと、各バーコードラベルから、分散指標最大の場合の4つのカラーブロックを特定する
    ことを特徴とするコンピュータ実行可能コマンドが搭載された記憶媒体。
JP2018527723A 2016-06-22 2017-06-21 ポータブル端末による室内ナビゲーション方法、ポータブル端末及び記憶媒体 Active JP6653759B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
CN201610460576.5A CN106197417B (zh) 2016-06-22 2016-06-22 手持终端的室内导航方法及手持终端
CN201610460576.5 2016-06-22
PCT/CN2017/089419 WO2017219992A1 (zh) 2016-06-22 2017-06-21 手持终端的室内导航方法、手持终端及存储介质

Publications (2)

Publication Number Publication Date
JP2019504300A JP2019504300A (ja) 2019-02-14
JP6653759B2 true JP6653759B2 (ja) 2020-02-26

Family

ID=57461811

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2018527723A Active JP6653759B2 (ja) 2016-06-22 2017-06-21 ポータブル端末による室内ナビゲーション方法、ポータブル端末及び記憶媒体

Country Status (8)

Country Link
US (1) US10317217B2 (ja)
EP (1) EP3382339B1 (ja)
JP (1) JP6653759B2 (ja)
KR (1) KR102120966B1 (ja)
CN (1) CN106197417B (ja)
AU (1) AU2017282889B2 (ja)
SG (1) SG11201808814PA (ja)
WO (1) WO2017219992A1 (ja)

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106197417B (zh) 2016-06-22 2017-11-10 平安科技(深圳)有限公司 手持终端的室内导航方法及手持终端
CN107481287A (zh) * 2017-07-13 2017-12-15 中国科学院空间应用工程与技术中心 一种基于多标识的物体定位定姿方法及系统
CN108801257B (zh) * 2018-04-04 2021-05-11 东南大学 一种用于室内自动泊车的定位方法
DE102018217734A1 (de) * 2018-10-17 2020-04-23 Robert Bosch Gmbh System von künstlichen Landmarken in einer Umgebung zur Verwendung für eine sensorgestützte Lokalisierung von mobilen Plattformen
CN109540144A (zh) * 2018-11-29 2019-03-29 北京久其软件股份有限公司 一种室内定位方法及装置
CN110176036B (zh) * 2019-05-28 2023-03-03 中南林业科技大学 一种移动车平面内定位的方法及系统
CN111340077B (zh) * 2020-02-18 2024-04-12 平安科技(深圳)有限公司 基于注意力机制的视差图获取方法和装置
CN112784942B (zh) * 2020-12-29 2022-08-23 浙江大学 一种用于大规模场景下定位导航的特殊色块编码方法

Family Cites Families (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7480567B2 (en) * 2004-09-24 2009-01-20 Nokia Corporation Displaying a map having a close known location
JP2009123130A (ja) * 2007-11-19 2009-06-04 Toshiba Corp カラーバーコードシート、カラーバーコード読取装置、カラーバーコード読取端末、製造システム、カラーバーコード読取プログラム、カラーバーコード読取方法
TWI391632B (zh) * 2008-11-27 2013-04-01 Mstar Semiconductor Inc 利用識別標籤之定位導航系統與應用於其上之定位導航方法
JP2011013075A (ja) * 2009-07-01 2011-01-20 Toyota Infotechnology Center Co Ltd 車両位置推定システム
GB2484316A (en) * 2010-10-06 2012-04-11 St Microelectronics Res & Dev Self navigation of mobile devices
CN102135429B (zh) * 2010-12-29 2012-06-13 东南大学 一种基于视觉的机器人室内定位导航方法
US8862395B2 (en) * 2011-01-31 2014-10-14 Raytheon Company Coded marker navigation system and method
CN102735235B (zh) * 2012-06-07 2014-12-24 无锡普智联科高新技术有限公司 基于二维码的室内移动机器人定位系统
CN102944236B (zh) * 2012-11-20 2015-03-18 无锡普智联科高新技术有限公司 基于多个二维码读码器的移动机器人定位系统及方法
CN103868517A (zh) * 2012-12-10 2014-06-18 深圳富泰宏精密工业有限公司 室内定位系统及方法
CN103123682B (zh) * 2013-01-17 2015-09-16 无锡普智联科高新技术有限公司 基于规则图形码复合标签的移动机器人定位系统及方法
US20140236475A1 (en) * 2013-02-19 2014-08-21 Texas Instruments Incorporated Methods and systems for navigation in indoor environments
CN103533644A (zh) * 2013-10-21 2014-01-22 镇江三鑫科技信息有限公司 基于二维码的室内定位方法
CN104573777A (zh) * 2013-10-23 2015-04-29 上海铁勋智能识别系统有限公司 以色彩作为信息源的智能标签
US9207677B2 (en) * 2014-01-02 2015-12-08 Automotive Research & Testing Center Vehicle positioning method and its system
CN104019810A (zh) * 2014-06-25 2014-09-03 重庆广建装饰股份有限公司 基于商场板材的扫描定位导航方法
JP2016136099A (ja) * 2015-01-23 2016-07-28 サトーホールディングス株式会社 測位システム及び測位方法
US20160345137A1 (en) * 2015-05-21 2016-11-24 Toshiba America Business Solutions, Inc. Indoor navigation systems and methods
CN105222774B (zh) * 2015-10-22 2019-04-16 Oppo广东移动通信有限公司 一种室内定位方法及用户终端
CN105424031A (zh) * 2015-11-24 2016-03-23 深圳市亿通科技有限公司 一种室内导航系统及方法
CN106197417B (zh) * 2016-06-22 2017-11-10 平安科技(深圳)有限公司 手持终端的室内导航方法及手持终端

Also Published As

Publication number Publication date
EP3382339A4 (en) 2019-02-20
JP2019504300A (ja) 2019-02-14
US10317217B2 (en) 2019-06-11
KR102120966B1 (ko) 2020-06-10
KR20190019893A (ko) 2019-02-27
CN106197417A (zh) 2016-12-07
AU2017282889B2 (en) 2019-10-24
EP3382339B1 (en) 2020-10-14
US20190072394A1 (en) 2019-03-07
WO2017219992A1 (zh) 2017-12-28
SG11201808814PA (en) 2018-11-29
EP3382339A1 (en) 2018-10-03
CN106197417B (zh) 2017-11-10
AU2017282889A1 (en) 2018-10-11

Similar Documents

Publication Publication Date Title
JP6653759B2 (ja) ポータブル端末による室内ナビゲーション方法、ポータブル端末及び記憶媒体
CN107328420B (zh) 定位方法和装置
Hile et al. Positioning and orientation in indoor environments using camera phones
US20210078173A1 (en) System and method of controlling obstacle avoidance of robot, robot and storage medium
CN108692720A (zh) 定位方法、定位服务器及定位系统
CN111380510B (zh) 重定位方法及装置、机器人
KR101638173B1 (ko) 캘리브레이션을 위한 자동 피처 탐지용 기구물 및 그 탐지 방법
TWI661210B (zh) 座標系統制定方法、裝置及資料結構產品
TW201346216A (zh) 虛擬尺
CN111340890B (zh) 相机外参标定方法、装置、设备和可读存储介质
CN108022264A (zh) 相机位姿确定方法及设备
CN110096152B (zh) 身体部位的空间定位方法、装置、设备及存储介质
JP7214803B2 (ja) 建築物の測位方法、装置、電子デバイス、記憶媒体、プログラム、及び端末デバイス
JP2021103168A (ja) 拡張現実装置及び位置決め方法
WO2020040277A1 (ja) 複合現実システム、プログラム、携帯端末装置、及び方法
CN113760131B (zh) 投影触控处理方法、装置及计算机可读存储介质
WO2022088613A1 (zh) 一种机器人的定位方法及装置、设备、存储介质
CN110490065A (zh) 人脸识别方法及装置、存储介质、计算机设备
CN113483661B (zh) 一种点云数据获取方法、装置、设备及存储介质
US11195020B1 (en) Systems and methods for maintaining virtual spaces
CN111176445A (zh) 交互装置的识别方法、终端设备及可读存储介质
KR20210020536A (ko) 벽면 포인팅 기반 실내 구조 정보를 생성하는 휴대용 단말기 및 그 동작 방법
Kim et al. Implementation of QR Code Recognition Technology Using Smartphone Camera for Indoor Positioning. Energies 2021, 14, 2759
CN114234979B (zh) 机器人室内定位方法、装置、介质及电子设备
CN109887026B (zh) 多视角定位跟踪方法、装置、设备及计算机可读存储介质

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20180528

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20180528

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20190620

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20190703

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20190718

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20200107

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20200128

R150 Certificate of patent or registration of utility model

Ref document number: 6653759

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250