JP6110962B2 - 距離又は位置の決定 - Google Patents

距離又は位置の決定 Download PDF

Info

Publication number
JP6110962B2
JP6110962B2 JP2015563046A JP2015563046A JP6110962B2 JP 6110962 B2 JP6110962 B2 JP 6110962B2 JP 2015563046 A JP2015563046 A JP 2015563046A JP 2015563046 A JP2015563046 A JP 2015563046A JP 6110962 B2 JP6110962 B2 JP 6110962B2
Authority
JP
Japan
Prior art keywords
light source
camera
light
image
encoded
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2015563046A
Other languages
English (en)
Other versions
JP2016534321A (ja
Inventor
コーエン ヨハンナ ガイゥラウメ ホルトマン
コーエン ヨハンナ ガイゥラウメ ホルトマン
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Signify Holding BV
Original Assignee
Signify Holding BV
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Signify Holding BV filed Critical Signify Holding BV
Publication of JP2016534321A publication Critical patent/JP2016534321A/ja
Application granted granted Critical
Publication of JP6110962B2 publication Critical patent/JP6110962B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S5/00Position-fixing by co-ordinating two or more direction or position line determinations; Position-fixing by co-ordinating two or more distance determinations
    • G01S5/16Position-fixing by co-ordinating two or more direction or position line determinations; Position-fixing by co-ordinating two or more distance determinations using electromagnetic waves other than radio waves
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/20Instruments for performing navigational calculations
    • G01C21/206Instruments for performing navigational calculations specially adapted for indoor navigation
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S1/00Beacons or beacon systems transmitting signals having a characteristic or characteristics capable of being detected by non-directional receivers and defining directions, positions, or position lines fixed relatively to the beacon transmitters; Receivers co-operating therewith
    • G01S1/70Beacons or beacon systems transmitting signals having a characteristic or characteristics capable of being detected by non-directional receivers and defining directions, positions, or position lines fixed relatively to the beacon transmitters; Receivers co-operating therewith using electromagnetic waves other than radio waves
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S11/00Systems for determining distance or velocity not using reflection or reradiation
    • G01S11/12Systems for determining distance or velocity not using reflection or reradiation using electromagnetic waves other than radio waves
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S5/00Position-fixing by co-ordinating two or more direction or position line determinations; Position-fixing by co-ordinating two or more distance determinations
    • G01S5/0009Transmission of position information to remote stations
    • HELECTRICITY
    • H05ELECTRIC TECHNIQUES NOT OTHERWISE PROVIDED FOR
    • H05BELECTRIC HEATING; ELECTRIC LIGHT SOURCES NOT OTHERWISE PROVIDED FOR; CIRCUIT ARRANGEMENTS FOR ELECTRIC LIGHT SOURCES, IN GENERAL
    • H05B47/00Circuit arrangements for operating light sources in general, i.e. where the type of light source is not relevant
    • H05B47/10Controlling the light source
    • H05B47/105Controlling the light source in response to determined parameters
    • H05B47/115Controlling the light source in response to determined parameters by determining the presence or movement of objects or living beings
    • H05B47/125Controlling the light source in response to determined parameters by determining the presence or movement of objects or living beings by using cameras
    • HELECTRICITY
    • H05ELECTRIC TECHNIQUES NOT OTHERWISE PROVIDED FOR
    • H05BELECTRIC HEATING; ELECTRIC LIGHT SOURCES NOT OTHERWISE PROVIDED FOR; CIRCUIT ARRANGEMENTS FOR ELECTRIC LIGHT SOURCES, IN GENERAL
    • H05B47/00Circuit arrangements for operating light sources in general, i.e. where the type of light source is not relevant
    • H05B47/10Controlling the light source
    • H05B47/165Controlling the light source following a pre-assigned programmed sequence; Logic control [LC]
    • HELECTRICITY
    • H05ELECTRIC TECHNIQUES NOT OTHERWISE PROVIDED FOR
    • H05BELECTRIC HEATING; ELECTRIC LIGHT SOURCES NOT OTHERWISE PROVIDED FOR; CIRCUIT ARRANGEMENTS FOR ELECTRIC LIGHT SOURCES, IN GENERAL
    • H05B47/00Circuit arrangements for operating light sources in general, i.e. where the type of light source is not relevant
    • H05B47/10Controlling the light source
    • H05B47/175Controlling the light source by remote control
    • H05B47/19Controlling the light source by remote control via wireless transmission
    • HELECTRICITY
    • H05ELECTRIC TECHNIQUES NOT OTHERWISE PROVIDED FOR
    • H05BELECTRIC HEATING; ELECTRIC LIGHT SOURCES NOT OTHERWISE PROVIDED FOR; CIRCUIT ARRANGEMENTS FOR ELECTRIC LIGHT SOURCES, IN GENERAL
    • H05B47/00Circuit arrangements for operating light sources in general, i.e. where the type of light source is not relevant
    • H05B47/10Controlling the light source
    • H05B47/175Controlling the light source by remote control
    • H05B47/196Controlling the light source by remote control characterised by user interface arrangements
    • H05B47/1965Controlling the light source by remote control characterised by user interface arrangements using handheld communication devices
    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02BCLIMATE CHANGE MITIGATION TECHNOLOGIES RELATED TO BUILDINGS, e.g. HOUSING, HOUSE APPLIANCES OR RELATED END-USER APPLICATIONS
    • Y02B20/00Energy efficient lighting technologies, e.g. halogen lamps or gas discharge lamps
    • Y02B20/40Control techniques providing energy savings, e.g. smart controller or presence detection

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • General Physics & Mathematics (AREA)
  • Electromagnetism (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Automation & Control Theory (AREA)
  • Length Measuring Devices By Optical Means (AREA)
  • Circuit Arrangement For Electric Light Sources In General (AREA)
  • Measurement Of Optical Distance (AREA)
  • Studio Devices (AREA)

Description

本開示は、光源に対するカメラの距離又は位置を、前記カメラによってキャプチャされるその光源の画像に基づいて決定することに関する。実施例においては、これは、前記カメラの位置を決定するために、前記光源の地理的な位置に関する情報と組み合わされ得る。
携帯電話又はタブレットなどのデバイスがその位置を決定するための方法は幾つかある。従来技術は、GPS(Global Positioning System)などの衛星利用測位システム、又はデバイスとセルラーネットワークの複数の基地局との間で通信される信号に基づく三辺測量の使用を含む。
WO 2013/016439には、他の技術が記載されている。これによれば、所与の位置にある複数の光源が、各々、その光源から発せられる光に変調された符号化光信号の形態の各々の識別子をブロードキャストする。次いで、携帯電話などのデバイスが、その内蔵カメラを用いて、このような光源からの光に符号化された識別子を読み取り、この識別子は、光源の座標を調べるために用いられ得る。従って、デバイスは、デバイスが、大雑把に言って、この光源の座標の近くにあることを決定することができる。カメラの視野内に複数の光源が現れ、それらの全ての識別子が既知である場合には、カメラのより細かい位置を決定し、それによって、デバイスのより細かい位置を決定するために、或る種の三角測量が実施され得る。
例えば、屋内で用いられ、上向きである場合に、及び/又は電話もしくはタブレットのようなデバイスに内蔵される一般的なカメラは限られた視野しか持たないだろうことから、多くの場合、カメラは、単一の光源しか見ることができないかもしれない。このような状況においては、これは、光源間の三角測量が実施されっることができないことを意味する。必ずしも、視野内に複数の異なる光源があることをあてにしない他の技術を提供することは望ましいだろう。
本願明細書で開示されるように、これは、光源によって発せられる符号化光信号を用いて、前記光源の物理的なサイズ及び/又は形状についての情報を取得することによって、達成され得る。その場合、前記光源が、前記符号化光に基づいて取得されるようなその実際の寸法と比べて、カメラによってキャプチャされた画像においてはどのように見えるのかに基づいて、前記光源に対する前記カメラの距離と、場合によっては、向きとを決定するために、射影計算が実施され得る。
従って、本願明細書に開示されている或る態様によれば、カメラによってキャプチャされた画像データであって、光源の画像を有する画像データを受信するための入力部を持つデバイスが、提供される。前記デバイスは、前記光源から受信される光に変調された符号化光信号を検出するための符号化光検出モジュールを有する。前記符号化光検出モジュールは、その光源からの前記符号化光信号に基づいて前記光源の1つ以上の物理的寸法を取得するよう構成される。前記デバイスは、更に、幾何学的射影計算を実施して、取得された前記1つ以上の物理的寸法と、前記光源の画像における1つ以上の見掛け寸法を比較することによって、前記光源からの前記カメラの距離を決定するよう構成される画像分析モジュールを有する。
随意に、複数の光源が用いられ得るが、前記技術は、前記視野内に複数の光源があることをあてにせず、1つ以上の光源から供給される任意の数の光に基づいて距離情報を決定することができる。
実施例においては、光源の前記1つ以上の物理的寸法は、その光源によって発せられる光に明示的に符号化されてもよく、その場合には、前記取得は、前記1つ以上の物理的寸法を、直接、前記符号化光信号から読み取ることを含む。他の例においては、前記符号化光信号は、前記光源の識別子を有する。この場合には、前記取得は、前記識別子を読み取り、次いで、これを用いて、前記デバイスがアクセスできるネットワークを介してアクセス可能なデータベースなどのデータストアから対応する前記光源の前記1つ以上の物理的寸法を調べることを含む。
他の実施例においては、前記デバイスは、前記カメラの向きを決定するよう構成され得る。向きは、適切な基準フレームを基準として前記カメラが面している方向、好ましくは、前記カメラが前記光源に面している方向の任意の尺度を指す。前記方向は、例えば、適切な方向基準フレームにおける1つの角度、2つの角度又は単位ベクトルによって、表され得る。適切な方向基準フレームの一例は、正のZ軸が上方を向いており、正のX軸が地平線上の北方を向いている3D座標系である。適切な方向基準フレームの別の例は、ランプ又はランプハウジングの幾何学的中心を、(0,0,0)原点座標とみなし、前記ランプ又はランプハウジングの外側の2つの所定の物理的標識を、例えば、(1,0,0)単位ベクトル及び(0,1,0)単位ベクトルが指すポイントとみなす3D座標系である。距離は、座標系における前記カメラと前記光源との間の空間の大きさの尺度である。実施例においては、向き及び距離が、前記カメラの位置の尺度を与え、例えば、これは、(方向)基準フレームにおける固定されたポイントに対する、前記光源又は何らかの他の基準ポイント若しくはフレームに変換されたものに対する、ベクトル又は座標によって表され得る。従って、前記画像分析モジュールは、決定された前記距離及び向きを共に用いて、当該光源に対する前記カメラの位置を決定するよう構成され得る。例えば、前記光源に対する位置は、前記ランプが位置(0,0,0)にあり、メートル単位であり、負のZ軸が下方を向いており、正のX軸が地平線上の北方を向いている3D(x,y,z)座標系における座標として決定され得る。
更に他の実施例においては、前記デバイスが、地図又は地球における前記光源の絶対位置の情報も持つ場合に、前記デバイスは、前記光源の絶対位置に関する情報と、前記光源に対する前記カメラの位置を組み合わせることによって前記カメラの絶対位置も決定し得る。この決定は、例えば、前記ランプの外形に基づいている方向基準フレームが、地図又は地球の北/南/東/西/上/下の基準フレームに対してどのような向きになっているかの情報も必要とし得る。
前記向きが用いられる場合、上述のように、これは、前記光源に対する向きであってもよく、実施例においては、前記幾何学的射影計算において決定されてもよい。前記光源が、例えば、前記光源が取り付けられるべきである天井などの表面の平面において対称な、対称形状を持つことは、あり得る。前記形状は、例えば、回転対称性(回転対称の位数が2以上である)、又は鏡面対称性(線対称性)を持ち得る。これは、射影に基づく前記向きの計算に曖昧性をもたらす。例えば、正方形は、4つの異なる角度から同じに見える。それ故、実施例においては、前記光源によって発せられる光に、前記対称性を壊すように、照明効果、好ましくは、高い周波数で前記光に変調された非対称符号化光信号のような人間の目に知覚できない照明効果が、導入され得る。他の例においては、前記向きにおける曖昧性を解消するために用いられる方法は、地図又は地球に対する前記カメラの視点方向の絶対的な向きを決定するものであってもよく、これは、例えば、前記デバイスの磁力計によって決定され得る。
更に他の実施例においては、前記画像データは、他の物体の画像を更に有してもよく、前記画像分析モジュールは、前記幾何学的射影計算に前記他の物体の画像も含めるよう構成されてもよい。
好ましいアプリケーションにおいては、前記デバイスは、前記カメラを有し、前記カメラは、前記デバイス内に収容されている、若しくは前記デバイス上に物理的に取り付けられている、又はさもなければ、実質的に、前記デバイスと同じ位置に配置されている、若しくは前記デバイスと一緒に移動するように取り付けられている。前記デバイスは、例えば、携帯電話又はタブレットなどのモバイル端末であり得る。このような例においては、前記デバイスの位置又は場所は、実質的に、前記カメラの位置又は場所であるとみなされ得る。しかしながら、前記デバイスが、前記カメラから分離されており、例えば、ワイヤ、無線リンク又はネットワークによって接続されること、及び前記カメラの向きを遠隔決定することが望まれることは、排除されない。
本願明細書に開示されている他の態様によれば、本願明細書に開示されている前記デバイスの動作を実施するための対応する方法及び/又はコンピュータプログラム製品が提供され得る。
本願明細書に開示されている実施例のより理解のために、及びそれらがどのように実施され得るかを示すために、一例として、添付図面に対する参照がなされる。
少なくとも1つの照明器具を有する部屋などの空間を概略的に図示する。 符号化光伝送を用いる照明器具の概略的なブロック図である。 照明器具の画像をキャプチャするためのカメラを備えるデバイスの概略的なブロック図である。 天井に取り付けられた照明器具の画像であって、前記画像において見えるような前記照明器具の射影歪み形状の概略図が重ねられた画像を示す。 部屋などの空間に取り付けられた照明器具の斜視図を概略的に図示する。 図5の照明器具の概略的な上からの(又は下からの)眺めを示す。 対称性破壊セクションを備える光源を概略的に図示する。 天井に取り付けられた照明器具の画像であって、図7のものと同様の対称性破壊セクションの概略図が重ねられた画像を示す。 対称性破壊セクションを備える別の光源を概略的に図示する。 対称性破壊セクションを備える更に別の光源を概略的に図示する。 対称性破壊セクションを作成するための代替手段を備える別の光源を概略的に図示する。 対称性破壊セクションを作成するための別の代替手段を備える別の光源を概略的に図示する。
以下は、カメラを備えるデバイスが、符号化光検出と幾何学的な分析の組み合わせに基づいてその位置を検出することができる技術を記載している。符号化光に基づく位置測定にとりわけ有利である符号化光対応照明器具も記載されている。前記技術は、符号化光を復号して光源の識別子(ID)を取得すること、光源に関連する物理的寸法を取得すること、及び幾何学的射影計算を用いて、カメラ画像における光源の外観からカメラの位置を決定することを含む。好ましい実施例においては、符号化光が、人間の目にとって対称的な外観を保ちながら、光源をカメラにとって非対称に見せるために用いられる。光源が符号化光を非対称なように発する間、光源は、外観上、人間のユーザにとって対称的であるので、これは、ユーザの照明経験を損なわずに、位置標識としてのその有用性を高め得る。実施例においては、以下に開示されている教示は、カメラの視野内に、単一の、対称的な外観を備える符号化光源しかない場合にも、適用できる。
図1は、本願明細書に開示されている実施例が用いられ得る空間又は環境5の例を示している。空間5は、例えば、オフィス、家、学校、病院、ミュージアム若しくは他の屋内空間の1つ以上の部屋及び/若しくは通路、又は公園、道路、スタジアムなどのような屋外空間、又は見晴らし台若しくは車両の内部などの別の空間を含み得る。空間5には、1つ以上の照明器具の形態の1つ以上の照明装置4を有する照明システムが取り付けられる。説明の目的のために、3つの照明器具4i、4ii及び4iiiが示されているが、他の個数の照明器具が存在していてもよいことは理解されるだろう。照明器具4は、集中制御下で実現されてもよく、又は別々のスタンドアローンのユニットとして実現されてもよい。空間5には、ユーザ端末6、好ましくは、スマートフォン又はタブレットなどのモバイルデバイスも存在する。
図2は、1つ以上の照明器具4の1つ、幾つか又は全てを実現するために用いれ得るような照明器具のブロック図を示している。照明器具4は、LED、LEDのアレイ又は蛍光灯などの発光素子12を1つ以上含む光源12を有する。照明器具4は、光源12に結合されるドライバ10、及びドライバ10に結合される制御装置8も有する。制御装置8は、所望の光出力を発するよう光源12を駆動するためにドライバ10に信号を出力するよう構成される。制御装置8は、1つ以上の処理ユニットを有するプロセッサにおいて実行されるよう構成され、1つ又は複数のコンピュータ可読記憶媒体に記憶されるコードの形態で実現されてもよい。他の例においては、制御装置8の幾つか又は全てが、専用ハードウェア回路又はFPGAなどの再構成可能な回路で実現されることは、排除されない。制御装置8は、照明器具4において局所的に実現されてもよく、若しくは1つ以上の他の照明器具4と共用され得る中央制御装置において実現されてもよく、又はこれらの組み合わせであってもよい。一般に、構成要素8、10及び12は、同じハウジングに組み込まれてもよく、又は組み込まれなくてもよい。
制御装置8は、符号化光成分で変調されるよう光源12によって発せられる光を制御するよう構成される。符号化光は、照明器具によって発せられる可視光に信号が埋め込まれる技術を指す。従って、前記光は、部屋などのターゲット環境を照明するための可視照明寄与(一般的に、光の主目的)と、及び前記環境に情報を供給するための埋め込み信号との両方を有する。これをなすため、光は、1つ又は複数の或る変調周波数、一般に、変調が人間の視覚には知覚できない十分高い周波数で、変調される。変調は、例えば、正弦波、矩形波又は他の波形の形態をとり得る。一般に、変調周波数は、変調の単一の周波数又は基本周波数、即ち、波形が繰り返す期間の頻度を指す。最も単純な事例の幾つかにおいては、信号は、所与の照明器具からの光に変調される単一の調子を含み得る。他の事例においては、より複雑なデータを含む信号が光に埋め込まれ得る。例えば、周波数キーイングを用いると、所与の照明器具は、2つ(以上)の異なる変調周波数で発光し、異なる変調周波数間のスイッチングによってデータビット(又はより広くは、シンボル)を送信するよう動作可能である。実施例においては、同じ空間5内の複数の照明器具4の各々が、各々の照明器具の識別子(ID)の役割を果たす異なる各々の符号化光成分で変調された光を発するよう構成されることができ、故に、照明器具4であって、前記照明器具4から光が来た照明器具4は、IDに基づいて識別され得る。IDは、少なくとも、或る空間5内の、例えば、或る部屋又は建物内の照明器具の間では、ユニークである。符号化光成分が単一の調子である場合には、異なる照明器具4は、IDの役割を果たす異なる各々の変調周波数を持つ光を発するよう構成され得る。他の例においては、IDは、例えば、周波数キーイングを用いて、データに符号化され得る。更に他の実施例においては、代わりの又は付加的なデータが光に符号化され得る。
図3は、モバイルデバイス6のブロック図を示している。デバイス6は、二次元画像キャプチャ素子を持つカメラ14と、カメラ14に結合される符号化光検出モジュール15とを有する。符号化光検出モジュール15は、画像キャプチャ素子によってキャプチャされた信号を処理し、画像がキャプチャされた光の中の符号化光成分を検出するよう構成される。デバイス6は、カメラ14に結合される画像分析モジュール16であって、そのカメラ14によってキャプチャされた光源の画像に基づいて照明器具4iのうちの1つの光源12に対するカメラ14の位置を決定するよう構成される画像分析モジュール16も有する。更に、デバイスは、画像分析モジュール16に結合される位置決定モジュール17であって、画像分析モジュールによって決定された位置と光源4iの位置を組み合わせて、カメラ14の絶対位置を決定するよう構成される位置決定モジュール17を含み得る。これは、地球の表面に対する絶対的な地理的な位置、又は街の地図などの地図若しくは建物の設計図における絶対位置であり得る。カメラ14が、(例えば可撓性ケーブルによってただ取り付けられているのとは対照的に)デバイス6と一緒に移動するように、デバイスと同じケース内に収容される、又はそのケース上に物理的に取り付けられる場合には、カメラ14の位置は、デバイス6の位置と解釈され得る。
符号化光検出モジュール15、画像分析モジュール16及び/又は位置決定モジュール17は、1つ以上の処理ユニットを有するプロセッサにおいて実行されるよう構成され、1つ又は複数のコンピュータ可読記憶媒体に記憶されるコードの形態で実現されてもよい。他の例においては、これらの構成要素の幾つか又は全てが、専用ハードウェア回路又はFPGAなどの再構成可能な回路で実現されることは、排除されない。一般に、構成要素14、15、16及び/又は17は、同じハウジングに組み込まれてもよく、又は組み込まれなくてもよい。符号化光検出モジュール15が、カメラ14とは異なる、符号化光を感知する検出器、例えば、モバイルデバイス6が利用可能な第2のカメラ、又はモバイルデバイス6が利用可能なフォトダイオードに(一意的に又は付加的に)結合されることも、排除されず、これは、以下において符号化光を検出する他の方法として用いられ得る。
1つ以上の照明器具4は、空間5内へ光を発し、それによって、その環境の少なくとも一部を照明するよう構成される。モバイルデバイス6のユーザは、デバイスのカメラ16を、照明器具4のうちの1つ、例えば、例として4iと標記されている照明器具の光源12の方に向けることができる。従って、カメラ14は、光源12の画像をキャプチャすることができる。本願明細書に記載されているような光源12は、1つ又は複数の発光素子を含む照明器具4(例えば4i)の可視部分を指す。これは、或る形状、例えば、正方形、矩形又は円形をとるだろう。これは、例えば、単一の露出した発光素子の形状(例えば、蛍光灯の形状)、発光素子のアレイ(例えば、LEDのアレイ)の形状又は拡散材料であって、前記拡散材料の後ろに1つ以上の発光素子が収容される拡散材料の形状であり得る。カメラ14によって、或る距離離れたところから、一般的には斜めに、見られる場合には、画像キャプチャ素子の二次元平面に投影される光源12の形状(そのサイズ及び/又は相対的比率)は、射影作用により歪んで見える。例えば、光源は、天井に取り付けられた場合には、下から見られ得る(例えば、図4参照)。
画像分析モジュール16は、この射影歪み形状を用いて、幾何学的射影計算に基づいて、光源12からのカメラ14の距離を決定することができる。画像分析モジュール16は、光源12に対するカメラ14の向きを(例えば、カメラの視野の中心軸のベクトル又は二次元若しくは三次元角度として)決定するために、射影歪み形状に関して幾何学的射影計算を実施することもできる。カメラ14の位置(例えば、床及び/若しくは天井の平面における二次元位置、又は三次元位置)を与えるために、距離及び向きの組み合わせが用いられ得る実施例においては、これは、デバイス6自体の位置として解釈され得る。正方形、矩形及び円形などの幾何学的形状の射影歪み外観を分析するための適切な計算の詳細は、当業者には既知であるだろう。
しかしながら、この計算を実施するためには、画像分析モジュール16は、光源12の1つ以上の実際の寸法に関する幾らかの情報を、実際の寸法と、光源12のキャプチャ画像においてそれらが現れるような寸法を比較するために、必要とするだろう。本願明細書の開示によれば、この情報は、カメラ14によって見られている照明器具4iの光源12からの光に埋め込まれた符号化光信号に基づいて取得され得る。
実施例においては、これは、各々の光源12からの光に埋め込まれた照明器具4(例えば、4i)のIDに基づいてなされ得る。この場合には、IDは、対応する光源寸法に関する情報に対してIDをマップしているルックアップテーブル又はデータベースを有する適切なデータストアにおいて各々の光源12の1つ以上の必要とされる寸法を調べるために用いられ得る。データストアは、例えば、デバイス6自体の中のローカルな記憶装置内に予め記憶されていてもよく、又はローカル・ネットワーク若しくはインターネットのようなワイド・エリア・ネットワークなどのネットワークにおいて実施されてもよい。デバイス6の符号化光検出モジュール15は、光に符号化されたIDを検出するためにカメラによってキャプチャされた光サンプルを処理し、次いで、ローカル無線接続(例えば、Wi-Fi若しくはBluetooth)又はセルラー無線接続(例えば、3GPP)などの適切なネットワークインターフェースを用いてデータストアにアクセスする。従って、符号化光検出モジュール15は、データストアにIDを送り、返される対応する光源寸法に関する情報を受信し、射影計算における使用のために画像分析モジュール16にこの情報を渡すことができる。
代わりの又は付加的な実施例においては、制御装置8は、明示的に各々の照明器具4iの光源12によって発せられる光に関連光源12の1つ以上の寸法に関する情報を符号化するよう構成され得る。この場合には、符号化光検出モジュール15は、関連光源12によって発せられた光から、直接、前記情報を取り出し、射影計算における使用のために画像分析モジュール16にこの情報を渡すことができる。
いずれの場合にも、デバイス6は、有利なことに、カメラが見掛け射影歪み寸法を取得するために見ている同じ対象の同じ画像に基づいて光源12の実際の寸法を取得する。
光源12の1つ以上の寸法に関する情報は、その光源12からのカメラ14の距離を決定するのに十分なものであり得る。例えば、前記情報は、前記光源12が円形であることを示すもの、及びその半径、直径又は円周を示すものを含み得る。これは、画像分析モジュール16が光源12からの距離を決定することを可能にするだろう。同様に、光源12が正方形である場合には、前記距離は、形状が正方形であることを示すもの、及び正方形の辺を示すものから、決定されることができ、又は光源12が矩形である場合には、前記距離は、形状が矩形若しくは長方形であることを示すもの、及び2つの辺、若しくは1つの辺及び辺の比を示すものから、決定されることができる。画像分析モジュール16は、特定の環境のために予め設計されている場合には、前記形状が、例えば、円形若しくは正方形であるとみなすよう予め設定されることができ、又は射影歪み形状から形状のタイプを推定するよう構成されることができ、これらの場合には、画像分析モジュール16は、必要最小限として、例えば、半径又はエッジの単一の測定値しか供給される必要がない。
しかしながら、多くの光源の形状は対称性を持つだろうことに注意されたい。例えば、前記形状は、回転対称性、即ち、少なくとも2である回転対称の位数を持ち得る。回転対称の位数は、形状が、或る軸のまわりを全360度回転される場合に、それ自体と一致する若しくはそれ自体を繰り返す回数、又はその軸のまわりの全360度について等しく見られる回数である。1という位数は、回転対称性を表さない。これは、光源12が、実際に回転することができなければならないことを意味するものではなく、単に、前記形状が、回転される場合にこの特性を持つこと、又は異なる角度から等しく見られることを意味することにも注意されたい。光源の形状は、更に又は代わりに、(鏡映対称又は線対称とも呼ばれる)鏡面対称性を持っていてもよい。即ち、前記形状は、1つ以上の対称軸に関して鏡映される又は反転される場合に、それ自体と同一であるだろう(この場合も先と同様に、これは、必ずしも、光源が、実際に、物理的に反転されなければならないことを意味するものではなく、単に、前記形状が、反転される場合にこの特性を持つことを意味することに注意されたい)。一般的なアプリケーションにおいては、光源12は、天井又はことによると壁などの表面に取り付けられ、前記対称性は、この表面の平面における対称性である。光源に対するカメラ14の向きを知ることが望ましい場合には、このような対称性は、前記計算に曖昧性をもたらすだろう。
これを説明すると、図4に示されているような矩形の照明器具が、そのIDが埋め込まれている符号化光を発する場合に、図4に示されているような視点を持つ符号化光検出器は、それがどの照明器具の近くにあるかを(IDから)決定することができるだろう。符号化光がその光源の長さに沿って実質的に一様に発せられているとすれば、符号化光検出器に関する限り、前記照明器具は、180度の回転対称性を持つだろう。同様に、正方形の照明器具は、90度の回転対称性を持つだろう、又は円形の照明器具は、あらゆる角度から同じに見えるだろう。従って、前記検出器は、この情報に基づいて、それがどの照明器具の近くにあるか、及び場合によっては、それが前記照明器具からどれくらい遠くにあるのかを「知る」ことはできるが、それがどの方向を向いているのかを知ることはないだろう。一般に、光源の外形は、対称の外観を持つことから、光源の外形がこのように見えるだろう候補位置が部屋の中に複数存在する。これは、90度の回転対称の場合について、図4、5及び6において概略的に図示されている。図4の画像データ及び光源12の既知の寸法を与えられると、検出器は、それが光源を見ているあり得る位置の数を、図5(斜視図)及び図6(上からの眺め)においてA、B、C及びDによって示されている、部屋内の、光源12に対して4つの位置(又は向き)に限定することができる。鏡映対称光源の場合は、一般に、例えば、図5における位置A及びBのような、曖昧性を解消されることができない2つの位置が存在するだろう。
それ故、更なる変更のない場合は、符号化光検出器は、画像からその向きを知るためにその視野内にこのような照明器具を少なくとも2つ持つ必要があるだろう、又はさもなければ、向きは、他の手段によって取得されなければならないだろう。
これに対処するため、本開示は、オフ時には対称であるが、オン時には非対称に光を発する光源を提供する。これを達成するため、光源は、対称性を壊すために異なるように光を発する異なるセクションに分けられ得る。好ましくは、非対称性は、カメラ14には感知できるが、人間の視覚には知覚できないこれは、符号化光の非対称分布を備える符号化光対応照明器具として実施され得る。
図8は、(画像に重ねられている内側の矩形線によって概略的に示されている)内側のセクション内から発せられる光が、照明器具によって発せられる光の残りの部分と識別可能である、符号化光対応照明器具を図示している。
例えば、2つ以上の管を備える照明器具においては、これらの管は互いに異なる符号化光を発するよう構成され得る、又はこれらの管のうちの1つだけが符号化光を発する。例えば下記のように、数多くの他の実施例があり得る。従って、符号化光検出モジュール15は、この情報を画像分析モジュール16に渡すことができ、従って、画像分析モジュール16は、照明器具4iのうちの1つしかその視野内にない場合でも、対称性がないために、幾何学的射影計算においてカメラの位置を明確に決定することができる。
上向きのスマートフォンのタイプのカメラによってキャプチャされるような図4及び8のランプの画像を考える。両方の画像において、視野内には、単一の(オンに切り換えられている)光源しか見えない。これらの光源は、符号化光の形態でIDを発する。位置決定は、以下のように進行する。
画像分析モジュール16は、画像を分析して、光源12の位置を特定する。更に、符号化光検出モジュール15は、光源12によって発せられた符号化光を復号して、光源のIDを取得する。符号化光検出モジュール15は、IDを用いて、光源12(の可視部分)の形状、及び随意に、建物における光源の位置を含み得る幾何学的データを取得する。他の実施例においては、幾何学的データは、直接、符号化光に符号化される。いずれにしても、符号化光検出モジュール15は、画像分析モジュール16に幾何学的データを渡す。画像分析モジュール16は、画像において形状を認識する。外形は、例えば、エッジ検出で認識されることができる(例えば、図8に示されている画像に重ねられている外側の線参照)。
外形の既知のサイズを使用し、それが画像において見えるような射影歪み形状とそれを照合することによって、光源に対する距離及び角度が決定され得る。一般に、光源の外形は対称の外観を持つことから、光源の外形がこのように見えるだろう候補位置が、部屋の中に複数存在する。ここでは、前記外形は、2つの対称軸を持ち、部屋の中に、4つのあり得る位置A、B、C、Dをもたらす(図5及び6参照)。
これらのあり得る位置の間の曖昧性を解消するため、画像分析モジュール16は、光源が、対称性を壊す符号化光生成手段を備えているという事実を用いる。例えば、図7(光源の底面図)に示されているように、光源の発光部は、2つのゾーン又はセクション1及び2に分けられる。セクション1は、符号化光を発する一方、セクション2は、符号化光を発さない、又は別の符号化光符号、若しくは同じ符号ではあるが、2つのセクションが識別され得るようにして符号化された符号を発する。識別するため、1つの符号化光放射セクションの位置又は形状が決定される(例えば、図8に示されている画像に重ねられた内側の線参照)。これは、決定された他の幾何学的側面と比較される。最終結果は、光源12に対するカメラの位置が明確に決定されることができ、それ故、部屋(及びひいては、建物)におけるデバイスの位置が明確に決定されることができるというものである。
図9及び10は、円形発光開口部を備え、それ故、回転対称性を持つ光源における非対称符号化光の実現のための他のオプションを示している。図9は、より広い円形光源の中心からオフセットされた、即ち、異なる中心を持つ内側円形セクション1を概略的に図示している。第2セクション2は、セクション1によって占められていない円形光源エリアの残りの部分である。図10においては、セクション1は、円の「一切れ」又は楔状部であり、セクション2は、円の残りの部分である。図7の例と同様に、2つのセクション1、2のうちの一方は、符号化光を発する一方、他方は、符号化光を発さない、又は2つのセクションは、異なるように符号化光を発する。
図11は、別の例を示している。ここでは、光拡散材料が取り去られており、小さな円18として示されている個々のLED素子を備えるLED照明器具の下側が照明される。LEDは、異なる非対称セクションに分けられる。ゾーン1内のLEDは、符号化光で駆動され得る一方、ゾーン2内の残りのLEDは、「通常の」光又は異なるように符号化された光で駆動され得る。
別の例においては、図12が、レトロフィット符号化光発光体(小さな正方形)19を備える蛍光灯照明器具の下側を示している。前記発光体を非対称位置に配置することによって、これは、非対称符号化光出力を実現する別の方法を提供する。
カメラ6の距離及び向きが決定されたら、位置決定モジュール17は、この情報を用いて、カメラ16又はデバイス6の位置推定を微調整し得る。例えば、位置決定モジュールは、見られている照明器具4iの位置を取得することによって、デバイスの絶対位置の大まかな推定を得るよう構成されてもよい。これは、例えば、照明器具4iのIDを、その照明器具の光源12によって発せられた符号化光から検出し、照明器具座標に対してIDをマップしているデータストアにおいて前記照明器具のIDを検索することによってなされることができ、又は前記座標は、その照明器具の光源によって発せられる符号化光に、直接、符号化され得る。その場合、照明器具4iに対するデバイス6の位置は、デバイス6の絶対位置を得るために、例えば、ベクトルを付加して、照明器具の絶対位置と組み合わされ得る。
他の例においては、図5に示されているような向きにおける曖昧性を解消するために用いられる方法は、地図又は地球に対するカメラの視点方向の絶対的な向きを決定するものであってもよく、前記絶対的な向きは、例えば、デバイスの磁力計によって決定され得る。画像データの幾何学的分析が、光源に対する向きのあり得る候補単位ベクトルを、即ち、カメラが光源に面している方向の候補を、4つ与えると仮定する。カメラの視点方向の絶対的な向きは、同じ座標系における単位ベクトルVとして表され得る。曖昧性を解消するため、4つの候補は、Vと比べられ得る。(大まかに)カメラの視点方向Vと反対方向を指している候補が、カメラが光源に面している実際の向きを表している候補である。広い視野角を持つカメラをサポートするために有用であり得る改善として、カメラの見ている中心軸を表す視点方向Vが、まず、カメラ画像における光源の位置を決定し、この位置がカメラ画像の中心からどのようにオフセットされているかに基づいて幾何学的計算をなすことによって、視点方向W、カメラのレンズから直接光源の方を指すベクトルに補正される。次いで、Wが、候補と比較される。
このような技術は、例えば、位置に基づく広告、又は人間若しくはロボットによる屋内ナビゲーションなどの位置測定システムにおいて用途を見出し得る。
上で提示されている実施例はほんの一例として記載されていることは理解されるだろう。
一般に、照明器具からの距離の決定と、照明器具に対する向きの決定とは、互いと独立して用いられてもよく、又は一緒に用いられてもよい。更に、前記情報は、最終的に、カメラ16又はデバイス6の絶対位置を決定するために用いられる必要はない。例えば、単に、カメラ16が光源に対してどれくらい近くにあるかを知ること、例えば、単に、デバイス6がターゲットスポットのどれくらい近くにあるかの「ホット/コールド」推定を与えること、又はカメラにおいて測定された強度及び光源からの距離を与えられて光源12の光出力レベルを測定することは、有用であり得る。
別の例においては、距離は、光源12のキャプチャ画像及び符号化光に基づいて決定され得るが、向きは、光源12を基準として向きを決定する代わりに、デバイス6に組み込まれた磁力計などの何らかの他の絶対的な手段によって、決定され得る。例えば、幾つかの実施例においては、向きの測定値は、用いられてもよいが、必ずしも、光源を基準として測定されない。例えば、幾つかの実施例においては、ポータブルデバイスがどの照明器具に最も近いかを知ることは、通路又は建物のうちの、デバイス(及びそれ故、そのユーザ)が存在するおおよそのゾーンを与えることができ、デバイスのコンパスは、デバイスが地図を基準として向きを調整されている又は面している方向を与えるために用いられ得る。デバイス(例えば、スマートフォン又はタブレット)の画面においては、ユーザに、ゾーンに関して前記ユーザのおおよその位置を示す強調表示ゾーン又は誤差円を備え、且つデバイスが地図を基準としてどちらに向きを調整されているかを示す矢印を備える地図が提示され得る。
更に別の例においては、光源が、既に、物理的に非対称形状のものである、又はさもなければ、本質的に、外観において裸眼に対して非対称である場合には、位置分析は、独特の、非対称に形づくられた又は配置された符号化光セクションの使用を要求する必要はない。
他の実施例においては、分析は、幾何学的射影計算を更に正確にするために、画像内に見える他の物体も用いてもよい。例えば、それは、その計算において、天井の他の物体(例えば、可視エッジを備える天井パネル)の幾何学的特徴を用い得る。
請求項に記載の発明を実施する当業者は、図面、明細及び添付の請求項の研究から、開示されている実施例に対する他の変形を、理解し、達成し得る。請求項において、「有する」という用語は、他の要素又はステップを除外せず、単数形表記は、複数の存在を除外しない。請求項において列挙されている幾つかのアイテムの機能を単一のプロセッサ又は他のユニットが実現してもよい。特定の手段が、相互に異なる従属請求項において引用されているという単なる事実は、これらの手段の組み合わせが有利になるように使用されることができないと示すものではない。コンピュータプログラムは、他のハードウェアと共に又はそれの一部として供給される光記憶媒体又は固体媒体などの適切な媒体に記憶/分散されてもよいが、インターネット又は他の有線若しくは無線電気通信システムなどを介して、他の形態で分散されてもよい。請求項におけるいかなる参照符号も、範囲を限定するものとして解釈されてはならない。

Claims (15)

  1. カメラによってキャプチャされた画像データであって、光源の画像を有する画像データを受信するための入力部と、
    前記光源からの光に変調された符号化光信号を検出するための符号化光検出モジュールであって、前記光源からの前記符号化光信号に基づいて前記光源の1つ以上の物理的寸法を取得するよう構成される符号化光検出モジュールと、
    幾何学的射影計算を実施して、取得された前記1つ以上の物理的寸法と、前記光源の画像における1つ以上の見掛け寸法を比較することによって、前記光源からの前記カメラの距離を決定するよう構成される画像分析モジュールとを有するデバイス。
  2. 前記1つ以上の物理的寸法が、前記光源から前記符号化光信号で伝達され、前記符号化光検出モジュールが、前記1つ以上の物理的寸法を、直接、前記符号化光信号から取得するよう構成される請求項1に記載のデバイス。
  3. 前記符号化光信号が、前記光源の識別子を有し、前記符号化光検出モジュールが、データストアにおいて前記1つ以上の物理的寸法を調べるよう前記識別子を用いて前記1つ以上の物理的寸法を取得するよう構成される請求項1に記載のデバイス。
  4. 前記カメラの向きを決定するよう構成され、前記距離及び前記向きが、一緒に、前記光源に対する前記カメラの位置を与える請求項1乃至3のいずれか一項に記載のデバイス。
  5. 前記画像分析モジュールが、前記幾何学的射影計算の一部として、前記光源に対する前記カメラの向きを決定するよう構成される請求項4に記載のデバイス。
  6. 前記光源が、対称性を持つ形状のものであるが、前記対称性を壊す照明効果を持つ光を発し、前記画像分析モジュールが、前記照明効果に基づいて前記向きにおける曖昧性を解消するよう構成される請求項4又は5に記載のデバイス。
  7. 前記照明効果が、人間の視覚には知覚できず、前記カメラには感知でき、前記光が、人間に対しては前記対称性の外観を持ち、前記照明効果が、前記カメラによって検出される場合に、前記対称性を壊す請求項6に記載のデバイス。
  8. 前記照明効果が、前記対称性を壊すための符号化光信号の使用を含む請求項6又は7に記載のデバイス。
  9. 前記カメラの視点方向の絶対的な向きを決定するよう構成され、前記カメラの視点方向の絶対的な向き及び前記距離が、前記カメラの位置を決定するために用いられる請求項4に記載のデバイス。
  10. 前記光源に対する前記デバイスの向きにおける曖昧性を解消するために用いられる、前記デバイスの前記カメラの視点方向の絶対的な向きを決定するよう構成される磁力計を有する請求項1に記載のデバイス。
  11. 前記光源の地理的な位置を取得し、前記光源に対する前記カメラの位置と組み合わされた前記光源の地理的な位置に基づいて前記カメラの地理的な位置を決定するよう構成される位置決定モジュールを有する請求項4乃至10のいずれか一項に記載のデバイス。
  12. 前記画像データが、単一の光源の画像を有し、前記画像分析モジュールが、前記幾何学的射影計算を実施して、前記単一の光源の前記取得された1つ以上の物理的寸法と、前記単一の光源の画像における1つ以上の見掛け寸法を比較することによって、前記光源からの前記カメラの距離を決定するよう構成される請求項1乃至11のいずれか一項に記載のデバイス。
  13. 前記画像データが、他の物体の画像を更に有し、前記画像分析モジュールが、前記幾何学的射影計算に前記他の物体の画像も含めるよう構成される請求項1乃至12のいずれか一項に記載のデバイス。
  14. 前記デバイスが前記カメラを有する請求項1乃至13のいずれか一項に記載のデバイス。
  15. コンピュータ可読記憶媒体において実施されるコンピュータプログラムであって、プロセッサにおいて実行されるときに、
    カメラによってキャプチャされた画像データであって、光源の画像を有する画像データを受信する動作と、
    前記光源からの光に変調された符号化光信号を検出する動作と、
    前記光源からの前記符号化光信号に基づいて前記光源の1つ以上の物理的寸法を取得する動作と、
    幾何学的射影計算を実施して、取得された前記1つ以上の物理的寸法と、前記光源の画像における1つ以上の見掛け寸法を比較することによって、前記光源からの前記カメラの距離を決定する動作とを実施するように構成されるコンピュータプログラム。
JP2015563046A 2013-07-04 2014-06-20 距離又は位置の決定 Active JP6110962B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
EP13175088.7 2013-07-04
EP13175088 2013-07-04
PCT/IB2014/062478 WO2015001444A1 (en) 2013-07-04 2014-06-20 Distance or position determination

Publications (2)

Publication Number Publication Date
JP2016534321A JP2016534321A (ja) 2016-11-04
JP6110962B2 true JP6110962B2 (ja) 2017-04-05

Family

ID=48740951

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2015563046A Active JP6110962B2 (ja) 2013-07-04 2014-06-20 距離又は位置の決定

Country Status (8)

Country Link
US (1) US10768271B2 (ja)
EP (1) EP2994720B1 (ja)
JP (1) JP6110962B2 (ja)
CN (1) CN105358938B (ja)
ES (1) ES2608662T3 (ja)
MX (1) MX349197B (ja)
RU (1) RU2670238C2 (ja)
WO (1) WO2015001444A1 (ja)

Families Citing this family (57)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
RU2670238C2 (ru) * 2013-07-04 2018-10-19 Филипс Лайтинг Холдинг Б.В. Определение расстояния или положения
US9621266B2 (en) * 2014-03-25 2017-04-11 Osram Sylvania Inc. Techniques for raster line alignment in light-based communication
US9317747B2 (en) 2014-05-06 2016-04-19 Qualcomm Incorporated Determining an orientation of a mobile device
JP2018533775A (ja) 2015-07-17 2018-11-15 コーニンクレッカ フィリップス エヌ ヴェKoninklijke Philips N.V. 被検体に関してモバイルデバイスの位置を決定するためのデバイス及び方法
CA3080452C (en) 2015-08-05 2024-01-02 Lutron Technology Company Llc Load control system responsive to the location of an occupant and/or mobile device
US11817900B2 (en) 2016-11-29 2023-11-14 Signify Holding B.V. Visible light communication detecting and/or decoding
US10369988B2 (en) 2017-01-13 2019-08-06 Ford Global Technologies, Llc Autonomous parking of vehicles inperpendicular parking spots
US10191140B2 (en) * 2017-06-01 2019-01-29 Osram Sylvania Inc. Luminaire identification and positioning by constellation
US10683034B2 (en) 2017-06-06 2020-06-16 Ford Global Technologies, Llc Vehicle remote parking systems and methods
US10775781B2 (en) 2017-06-16 2020-09-15 Ford Global Technologies, Llc Interface verification for vehicle remote park-assist
US10234868B2 (en) 2017-06-16 2019-03-19 Ford Global Technologies, Llc Mobile device initiation of vehicle remote-parking
US10585430B2 (en) 2017-06-16 2020-03-10 Ford Global Technologies, Llc Remote park-assist authentication for vehicles
EP3655793A1 (en) * 2017-07-19 2020-05-27 Signify Holding B.V. A system and method for providing spatial information of an object to a device
US10495467B2 (en) * 2017-07-28 2019-12-03 Qualcomm Incorporated Positioning with interleaved VLC signals
EP3679438B1 (en) * 2017-09-07 2021-01-13 Signify Holding B.V. Indoor positioning system for mobile objects
US10580304B2 (en) 2017-10-02 2020-03-03 Ford Global Technologies, Llc Accelerometer-based external sound monitoring for voice controlled autonomous parking
US10281921B2 (en) 2017-10-02 2019-05-07 Ford Global Technologies, Llc Autonomous parking of vehicles in perpendicular parking spots
US10627811B2 (en) 2017-11-07 2020-04-21 Ford Global Technologies, Llc Audio alerts for remote park-assist tethering
US10336320B2 (en) 2017-11-22 2019-07-02 Ford Global Technologies, Llc Monitoring of communication for vehicle remote park-assist
US10578676B2 (en) 2017-11-28 2020-03-03 Ford Global Technologies, Llc Vehicle monitoring of mobile device state-of-charge
KR101999457B1 (ko) * 2017-12-13 2019-07-11 국민대학교산학협력단 광학 카메라 통신을 이용하는 위치 추정 방법 및 장치
KR101993063B1 (ko) * 2017-12-13 2019-06-26 국민대학교산학협력단 광학 카메라 통신을 이용하는 광원 검출 방법 및 장치
US11148661B2 (en) 2018-01-02 2021-10-19 Ford Global Technologies, Llc Mobile device tethering for a remote parking assist system of a vehicle
US10737690B2 (en) 2018-01-02 2020-08-11 Ford Global Technologies, Llc Mobile device tethering for a remote parking assist system of a vehicle
US10585431B2 (en) 2018-01-02 2020-03-10 Ford Global Technologies, Llc Mobile device tethering for a remote parking assist system of a vehicle
US10688918B2 (en) 2018-01-02 2020-06-23 Ford Global Technologies, Llc Mobile device tethering for a remote parking assist system of a vehicle
US10974717B2 (en) 2018-01-02 2021-04-13 Ford Global Technologies, I.LC Mobile device tethering for a remote parking assist system of a vehicle
US10583830B2 (en) 2018-01-02 2020-03-10 Ford Global Technologies, Llc Mobile device tethering for a remote parking assist system of a vehicle
US10814864B2 (en) 2018-01-02 2020-10-27 Ford Global Technologies, Llc Mobile device tethering for a remote parking assist system of a vehicle
US10684773B2 (en) 2018-01-03 2020-06-16 Ford Global Technologies, Llc Mobile device interface for trailer backup-assist
US10747218B2 (en) 2018-01-12 2020-08-18 Ford Global Technologies, Llc Mobile device tethering for remote parking assist
US10917748B2 (en) 2018-01-25 2021-02-09 Ford Global Technologies, Llc Mobile device tethering for vehicle systems based on variable time-of-flight and dead reckoning
US10684627B2 (en) 2018-02-06 2020-06-16 Ford Global Technologies, Llc Accelerometer-based external sound monitoring for position aware autonomous parking
US11188070B2 (en) 2018-02-19 2021-11-30 Ford Global Technologies, Llc Mitigating key fob unavailability for remote parking assist systems
US10507868B2 (en) 2018-02-22 2019-12-17 Ford Global Technologies, Llc Tire pressure monitoring for vehicle park-assist
US10732622B2 (en) 2018-04-05 2020-08-04 Ford Global Technologies, Llc Advanced user interaction features for remote park assist
US10759417B2 (en) 2018-04-09 2020-09-01 Ford Global Technologies, Llc Input signal management for vehicle park-assist
US10793144B2 (en) 2018-04-09 2020-10-06 Ford Global Technologies, Llc Vehicle remote park-assist communication counters
US10683004B2 (en) 2018-04-09 2020-06-16 Ford Global Technologies, Llc Input signal management for vehicle park-assist
US10493981B2 (en) 2018-04-09 2019-12-03 Ford Global Technologies, Llc Input signal management for vehicle park-assist
US10232673B1 (en) 2018-06-01 2019-03-19 Ford Global Technologies, Llc Tire pressure monitoring with vehicle park-assist
US10384605B1 (en) 2018-09-04 2019-08-20 Ford Global Technologies, Llc Methods and apparatus to facilitate pedestrian detection during remote-controlled maneuvers
US10717432B2 (en) 2018-09-13 2020-07-21 Ford Global Technologies, Llc Park-assist based on vehicle door open positions
US10967851B2 (en) 2018-09-24 2021-04-06 Ford Global Technologies, Llc Vehicle system and method for setting variable virtual boundary
US10529233B1 (en) 2018-09-24 2020-01-07 Ford Global Technologies Llc Vehicle and method for detecting a parking space via a drone
US10908603B2 (en) 2018-10-08 2021-02-02 Ford Global Technologies, Llc Methods and apparatus to facilitate remote-controlled maneuvers
US10628687B1 (en) 2018-10-12 2020-04-21 Ford Global Technologies, Llc Parking spot identification for vehicle park-assist
US11097723B2 (en) 2018-10-17 2021-08-24 Ford Global Technologies, Llc User interfaces for vehicle remote park assist
US11137754B2 (en) 2018-10-24 2021-10-05 Ford Global Technologies, Llc Intermittent delay mitigation for remote vehicle operation
US11789442B2 (en) 2019-02-07 2023-10-17 Ford Global Technologies, Llc Anomalous input detection
KR102162715B1 (ko) * 2019-03-12 2020-10-07 국민대학교산학협력단 가시광 통신을 위한 수신 장치, 및 이를 이용한 가시광 통신 방법
US11195344B2 (en) 2019-03-15 2021-12-07 Ford Global Technologies, Llc High phone BLE or CPU burden detection and notification
US11169517B2 (en) 2019-04-01 2021-11-09 Ford Global Technologies, Llc Initiation of vehicle remote park-assist with key fob
US11275368B2 (en) 2019-04-01 2022-03-15 Ford Global Technologies, Llc Key fobs for vehicle remote park-assist
CN110440807A (zh) * 2019-08-13 2019-11-12 Oppo(重庆)智能科技有限公司 室内导航方法及装置、存储介质和电子设备
DE102020124688A1 (de) * 2019-09-27 2021-04-01 Electronic Theatre Controls, Inc. Systeme und verfahren zur standortbestimmung von leuchten
KR20240041053A (ko) * 2022-09-22 2024-03-29 주식회사 다비오 경로 안내 단말, 경로 안내 시스템 및 경로 안내 방법

Family Cites Families (24)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
AU2003275606A1 (en) * 2002-10-24 2004-05-13 Global Com, Inc. Illumination light communication device
KR20060130715A (ko) * 2004-03-03 2006-12-19 닛본 덴끼 가부시끼가이샤 측위 시스템, 측위 방법, 및 그 프로그램
CN101772712A (zh) * 2007-08-01 2010-07-07 皇家飞利浦电子股份有限公司 用于确定构造物中对象的位置的方法
US7969297B2 (en) * 2008-05-14 2011-06-28 Sony Ericsson Mobile Communications Ab System and method for determining positioning information via modulated light
US8417122B2 (en) * 2009-08-03 2013-04-09 Electronics And Telecommunications Research Institute Apparatus for visible light communication indicating communication quality using RGB color mixing and method thereof
US8577539B1 (en) * 2010-01-27 2013-11-05 The United States Of America As Represented By The Secretary Of The Air Force Coded aperture aided navigation and geolocation systems
US20110267485A1 (en) * 2010-04-30 2011-11-03 Kane Paul J Range measurement using a coded aperture
JP5591090B2 (ja) * 2010-12-13 2014-09-17 キヤノン株式会社 画像処理装置およびその方法
US8411258B2 (en) * 2010-12-22 2013-04-02 Intel Corporation Systems and methods for determining position using light sources
US20120270564A1 (en) * 2011-04-19 2012-10-25 Qualcomm Incorporated Methods and apparatuses for use in a mobile device to detect signaling apertures within an environment
CN102215068A (zh) * 2011-06-03 2011-10-12 江南大学 基于可见光通信的无线自动导览系统
US8432438B2 (en) * 2011-07-26 2013-04-30 ByteLight, Inc. Device for dimming a beacon light source used in a light based positioning system
US8248467B1 (en) * 2011-07-26 2012-08-21 ByteLight, Inc. Light positioning system using digital pulse recognition
US8994799B2 (en) * 2011-07-26 2015-03-31 ByteLight, Inc. Method and system for determining the position of a device in a light based positioning system using locally stored maps
US8964016B2 (en) * 2011-07-26 2015-02-24 ByteLight, Inc. Content delivery based on a light positioning system
EP3119164B8 (en) 2011-07-26 2019-12-11 ABL IP Holding LLC Self identifying modulated light source
US9111869B2 (en) * 2011-07-29 2015-08-18 Semtech Corporation Glass/ceramics replacement of epoxy for high temperature hermetically sealed non-axial electronic packages
JP2013120623A (ja) * 2011-12-06 2013-06-17 Panasonic Corp 照明システム
US9108571B2 (en) * 2011-12-12 2015-08-18 Google Inc. Method, system, and computer program product for image capture positioning using a pattern of invisible light
CN102749072B (zh) * 2012-06-15 2014-11-05 易程科技股份有限公司 室内定位方法、装置及系统
CN102901512B (zh) * 2012-11-05 2016-12-21 珠海横琴华策光通信科技有限公司 导航装置及系统
US9644973B2 (en) * 2013-03-28 2017-05-09 Google Inc. Indoor location signalling via light fittings
RU2670238C2 (ru) * 2013-07-04 2018-10-19 Филипс Лайтинг Холдинг Б.В. Определение расстояния или положения
US9621266B2 (en) * 2014-03-25 2017-04-11 Osram Sylvania Inc. Techniques for raster line alignment in light-based communication

Also Published As

Publication number Publication date
JP2016534321A (ja) 2016-11-04
ES2608662T3 (es) 2017-04-12
RU2670238C2 (ru) 2018-10-19
EP2994720B1 (en) 2016-10-26
US20160139244A1 (en) 2016-05-19
CN105358938A (zh) 2016-02-24
EP2994720A1 (en) 2016-03-16
US10768271B2 (en) 2020-09-08
WO2015001444A1 (en) 2015-01-08
CN105358938B (zh) 2018-01-09
RU2016103409A (ru) 2017-08-10
MX349197B (es) 2017-07-18

Similar Documents

Publication Publication Date Title
JP6110962B2 (ja) 距離又は位置の決定
US9885775B2 (en) Determining orientation
US10306419B2 (en) Device locating using angle of arrival measurements
US6865347B2 (en) Optically-based location system and method for determining a location at a structure
Taylor et al. Angular diversity approach to indoor positioning using visible light
US9883351B2 (en) Indoor positioning device and indoor positioning method
WO2014025556A1 (en) Location mapped by the frequency of the light emitted by an artificial light source
Shahjalal et al. An implementation approach and performance analysis of image sensor based multilateral indoor localization and navigation system
CN106568420B (zh) 一种基于室内可见光的定位方法及系统
US20190280769A1 (en) Lamp with coded light functionality
US10299355B2 (en) Intelligent gating mechanism
US9819414B2 (en) Lighting device and visible light communication system
US11055867B2 (en) Automatic light position detection system
US11268804B2 (en) Automatic light position detection system
JP2017525172A (ja) 符号化光の検出
US20220066407A1 (en) Light fixture of building automation system
WO2022135306A1 (en) A positioning system based on an image capturing module within a receiver
WO2020037330A2 (en) Positioning system and method using lamp fixture indicator
TW201623998A (zh) 室內定位系統

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20160728

A975 Report on accelerated examination

Free format text: JAPANESE INTERMEDIATE CODE: A971005

Effective date: 20160824

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20160907

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20161202

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20170210

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20170310

R150 Certificate of patent or registration of utility model

Ref document number: 6110962

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

S531 Written request for registration of change of domicile

Free format text: JAPANESE INTERMEDIATE CODE: R313531

S533 Written request for registration of change of name

Free format text: JAPANESE INTERMEDIATE CODE: R313533

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250