JP2022537248A - ラインアレイを用いた物体の検出 - Google Patents

ラインアレイを用いた物体の検出 Download PDF

Info

Publication number
JP2022537248A
JP2022537248A JP2021564849A JP2021564849A JP2022537248A JP 2022537248 A JP2022537248 A JP 2022537248A JP 2021564849 A JP2021564849 A JP 2021564849A JP 2021564849 A JP2021564849 A JP 2021564849A JP 2022537248 A JP2022537248 A JP 2022537248A
Authority
JP
Japan
Prior art keywords
light
cleaning device
light source
robotic cleaning
reflected
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2021564849A
Other languages
English (en)
Other versions
JP7528404B2 (ja
Inventor
フォルスベルグ、ペッテル
Original Assignee
アクチエボラゲット エレクトロルックス
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by アクチエボラゲット エレクトロルックス filed Critical アクチエボラゲット エレクトロルックス
Publication of JP2022537248A publication Critical patent/JP2022537248A/ja
Application granted granted Critical
Publication of JP7528404B2 publication Critical patent/JP7528404B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S17/00Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
    • G01S17/88Lidar systems specially adapted for specific applications
    • G01S17/93Lidar systems specially adapted for specific applications for anti-collision purposes
    • G01S17/931Lidar systems specially adapted for specific applications for anti-collision purposes of land vehicles
    • AHUMAN NECESSITIES
    • A47FURNITURE; DOMESTIC ARTICLES OR APPLIANCES; COFFEE MILLS; SPICE MILLS; SUCTION CLEANERS IN GENERAL
    • A47LDOMESTIC WASHING OR CLEANING; SUCTION CLEANERS IN GENERAL
    • A47L11/00Machines for cleaning floors, carpets, furniture, walls, or wall coverings
    • A47L11/40Parts or details of machines not provided for in groups A47L11/02 - A47L11/38, or not restricted to one of these groups, e.g. handles, arrangements of switches, skirts, buffers, levers
    • A47L11/4011Regulation of the cleaning machine by electric means; Control systems and remote control systems therefor
    • AHUMAN NECESSITIES
    • A47FURNITURE; DOMESTIC ARTICLES OR APPLIANCES; COFFEE MILLS; SPICE MILLS; SUCTION CLEANERS IN GENERAL
    • A47LDOMESTIC WASHING OR CLEANING; SUCTION CLEANERS IN GENERAL
    • A47L9/00Details or accessories of suction cleaners, e.g. mechanical means for controlling the suction or for effecting pulsating action; Storing devices specially adapted to suction cleaners or parts thereof; Carrying-vehicles specially adapted for suction cleaners
    • A47L9/28Installation of the electric equipment, e.g. adaptation or attachment to the suction cleaner; Controlling suction cleaners by electric means
    • A47L9/2805Parameters or conditions being sensed
    • AHUMAN NECESSITIES
    • A47FURNITURE; DOMESTIC ARTICLES OR APPLIANCES; COFFEE MILLS; SPICE MILLS; SUCTION CLEANERS IN GENERAL
    • A47LDOMESTIC WASHING OR CLEANING; SUCTION CLEANERS IN GENERAL
    • A47L9/00Details or accessories of suction cleaners, e.g. mechanical means for controlling the suction or for effecting pulsating action; Storing devices specially adapted to suction cleaners or parts thereof; Carrying-vehicles specially adapted for suction cleaners
    • A47L9/28Installation of the electric equipment, e.g. adaptation or attachment to the suction cleaner; Controlling suction cleaners by electric means
    • A47L9/2836Installation of the electric equipment, e.g. adaptation or attachment to the suction cleaner; Controlling suction cleaners by electric means characterised by the parts which are controlled
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S17/00Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
    • G01S17/02Systems using the reflection of electromagnetic waves other than radio waves
    • G01S17/06Systems determining position data of a target
    • G01S17/08Systems determining position data of a target for measuring distance only
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S17/00Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
    • G01S17/88Lidar systems specially adapted for specific applications
    • G01S17/89Lidar systems specially adapted for specific applications for mapping or imaging
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S7/00Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
    • G01S7/48Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S17/00
    • G01S7/481Constructional features, e.g. arrangements of optical elements
    • G01S7/4814Constructional features, e.g. arrangements of optical elements of transmitters alone
    • G01S7/4815Constructional features, e.g. arrangements of optical elements of transmitters alone using multiple transmitters
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/02Control of position or course in two dimensions
    • G05D1/021Control of position or course in two dimensions specially adapted to land vehicles
    • G05D1/0231Control of position or course in two dimensions specially adapted to land vehicles using optical position detecting means
    • G05D1/0238Control of position or course in two dimensions specially adapted to land vehicles using optical position detecting means using obstacle or wall sensors
    • G05D1/024Control of position or course in two dimensions specially adapted to land vehicles using optical position detecting means using obstacle or wall sensors in combination with a laser
    • AHUMAN NECESSITIES
    • A47FURNITURE; DOMESTIC ARTICLES OR APPLIANCES; COFFEE MILLS; SPICE MILLS; SUCTION CLEANERS IN GENERAL
    • A47LDOMESTIC WASHING OR CLEANING; SUCTION CLEANERS IN GENERAL
    • A47L2201/00Robotic cleaning machines, i.e. with automatic control of the travelling movement or the cleaning operation
    • A47L2201/04Automatic control of the travelling movement; Automatic obstacle detection

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Remote Sensing (AREA)
  • Electromagnetism (AREA)
  • General Physics & Mathematics (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Mechanical Engineering (AREA)
  • Optics & Photonics (AREA)
  • Aviation & Aerospace Engineering (AREA)
  • Automation & Control Theory (AREA)
  • Control Of Position, Course, Altitude, Or Attitude Of Moving Bodies (AREA)
  • Electric Vacuum Cleaner (AREA)
  • Optical Radar Systems And Details Thereof (AREA)

Abstract

本発明は、ロボット清掃デバイス(100)、及びロボット清掃デバイス(100)における、ロボット清掃デバイス(100)が清掃対象表面上で移動するとともに物体を検出する方法に関する。一態様では、ロボット清掃デバイス(100)であって、それが清掃対象表面上で移動するとともに物体を検出するように構成された、ロボット清掃デバイス(100)が提供される。ロボット清掃デバイス(100)は、ロボット清掃デバイス(100)の前方に近距離広角光ビームを生成するように構成された第1の光源(102)と、ロボット清掃デバイス(100)の前方に長距離水平狭角光ビームを生成するように構成された第2の光源(103)と、光源(102、103)のうちの1つ以上からの反射光を検出し、前記光が反射された、照明された物体を検出するように構成されたアレイセンサ(101)と、を備える。

Description

本発明は、ロボット清掃デバイス、及びロボット清掃デバイスにおける、ロボット清掃デバイスが清掃対象表面上で移動するとともに物体を検出する方法に関する。
多くの技術分野において、あり得る障害物と衝突することなく空間を自由に動き回ることができるよう、自律的挙動を有するロボットを用いることが望まれる。
当技術分野においては、掃除機を、清掃対象表面を横切って移動させるためのモータの形態の駆動手段を装備した、ロボット真空掃除機が知られている。ロボット真空掃除機は、ロボット真空掃除機が、例えば、床の形態の表面を自由に動き回り、清掃することができるよう、自律的挙動を生じさせるための、マイクロプロセッサの形態の知能、及び進路誘導手段をさらに装備する。それゆえ、これらの従来技術のロボット真空掃除機は、部屋を、家具、ペット、壁、扉等などの、部屋内に配置された障害物と衝突することなく、多かれ少なかれ自律的に横切って移動し、真空掃除する能力を有する。
いくつかの従来技術のロボット真空掃除機は、部屋を走行し、障害物を検出するために、飛行時間(time-of-flight、TOF)カメラなどの高度な3Dセンサを用いる。しかし、3Dセンサに関する一般的問題は、それらが高価であることである。
本発明の目的は、当技術分野におけるこの問題を解決するか、又は少なくとも緩和し、ロボット清掃デバイスが清掃対象表面を走行することを可能にする代替的な方法を提供することである。
この目的は、本発明の第1の態様において、ロボット清掃デバイスであって、それが清掃対象表面上で移動するとともに物体を検出するように構成された、ロボット清掃デバイスによって達成される。ロボット清掃デバイスは、ロボット清掃デバイスの前方に近距離広角光ビームを生成するように構成された第1の光源と、ロボット清掃デバイスの前方に長距離水平狭角光ビームを生成するように構成された第2の光源と、光源のうちの1つ以上からの反射光を、前記光が反射された、照明された物体を検出するために検出するように構成されたアレイセンサと、を備える。
この目的は、本発明の第2の態様において、ロボット清掃デバイスの、それが清掃対象表面上で移動するとともに物体を検出する方法によって達成される。本方法は、第1の光源を、ロボット清掃デバイスの前方に近距離広角光ビームを生成するように制御し、アレイセンサ上で、第1の光源からの反射光を、前記光が反射された、照明された物体を検出するために検出することと、第2の光源を、ロボット清掃デバイスの前方に長距離水平狭角光ビームを生成するように制御し、アレイセンサ上で、第2の光源からの反射光を、前記光が反射された、照明された物体を検出するために検出することと、を含む。
実施形態に係るロボット真空掃除機では、ロボット清掃デバイスの前方に近距離広角光ビームを生成するように構成された、例えば、発光ダイオード(light-emitting diode、LED)によって具体化された、第1の光源が、衝突を回避するべく任意の障害物を検出するために主に利用される。
例えば、レーザによって具体化された、第2の光源は、ロボット清掃デバイスの前方に、例えば、同時位置決め地図作成(simultaneous localization and mapping、SLAM)を利用した進路誘導のために用いられるべき反射詳細情報が取得され得る長距離水平狭角光ビームを生成するように構成されている。
有利に、2つの光源を用いることで、比較的低い分解能のラインアレイセンサを用いるが、依然として、物体検出及び進路誘導をロボット清掃デバイスのために可能にすることが可能である。
一実施形態では、ロボット清掃デバイスは、ロボット清掃デバイスの前方の表面(例えば、床)に向けて近距離水平狭角光ビームを生成するように構成された第3の光源を備える。第3の光源はレーザの形態で具体化され得、例えば、家具などの、近距離物体、さらにまた、接近する壁、又は例えば、下の階への階段室の形態の棚部(一般的に「断崖検出」と称される)を検出するために有利に利用される。
一実施形態では、ロボット清掃デバイスは、光源を、1度に1つの光源ずつ、光を放射するように制御し、それぞれの光源から放射され、アレイセンサ上へ反射されている光の飛行時間を計算し、計算された飛行時間、及びアレイセンサ上の反射光の位置に基づいて、光が反射された物体の位置を決定するように構成されたコントローラを備える。
一実施形態では、光源は、60~120°、より特定的には、85~95°、さらにより特定的には、90°の水平放射角度をもって光を放射するように構成されている。
一実施形態では、第1の光源は、65~75°、より特定的には、70°の鉛直放射角度をもって光を放射するように構成されている。
一実施形態では、第2の光源は、0.1~1.5°、より特定的には、1°の鉛直放射角度をもって光を放射するように構成されている。
一実施形態では、第3の光源は、0.1~1.5°、より特定的には、1°の鉛直放射角度をもって光を放射するように構成されている。
以下において、本発明の好ましい実施形態が説明される。
概して、請求項において使用される全ての用語は、本明細書において別途明示的に定義されない限り、当技術分野におけるそれらの通常の意味に従って解釈されるべきである。「a/an/the element,apparatus,component,means,step,etc.(要素、装置、構成要素、手段、ステップなど)」への言及は全て、別途明示的に断りのない限り、要素、装置、構成要素、手段、ステップなどの少なくとも1つの例に言及するものとしてオープンに解釈されるべきである。本明細書において開示される任意の方法のステップは、明示的に断りのない限り、開示されている正確な順序で遂行される必要はない。
次に、添付の図面を参照して本発明を例として説明する。
図1aは、一実施形態に係る、ロボット清掃デバイスが移動する表面上の物体の検出の側面図を示す。 図1bは、一実施形態に係る、図1aのロボット清掃デバイスの3つの上面図を示す。 図1cは、一実施形態に係るロボット清掃デバイスのさらなる側面図を示す。 図2は、一実施形態に係るロボット清掃デバイスの正面図を示す。 図3は、一実施形態に係る、物体を検出する方法のフローチャートを示す。 図4は、ロボット清掃デバイスが移動する表面上の物体の検出の変形例の側面図を示す。
次に、以下において、本発明の特定の実施形態が示された添付の図面を参照して、本発明をより完全に説明する。しかし、本発明は多くの異なる形態で具体化することができ、本明細書において説明されている実施形態に限定されるように解釈されるべきではない。むしろ、これらの実施形態は、本開示が徹底的で完全になり、本発明の範囲を当業者に十分に伝えることになるよう、例として提供されている。本記載全体を通じて同様の番号は同様の要素を指す。
本発明は、ロボット清掃デバイス、又は換言すれば、表面を清掃するための自動自己推進式機械、例えば、ロボット真空掃除機、ロボットスイーパ、又はロボット床洗浄機に関する。本発明に係るロボット清掃デバイスは、商用電源駆動式でコードを有するか、電池駆動式であるか、又は任意の他の種類の好適なエネルギー源、例えば、太陽エネルギーを用いることができる。
図1aは、本発明の一実施形態に係る、ロボット清掃デバイスが移動する表面上の物体の検出の側面図を示す。
それゆえ、ロボット清掃デバイス100は、椅子120の形態の障害物が壁140の前方のラグ130上に配置された床110の上で移動する。それゆえ、ロボット清掃デバイス100は、椅子120を、壁140と同様に、検出し、衝突を回避するためにそれを避けて走行することができ、場合によっては、床110を効果的に清掃するために、及び進路誘導のために、壁140づたいに進むことができなければならない。さらに、例えば、ラグ130の繊維がブラシロールに絡まることを回避するべくロボット100のブラシロール(図示せず)の回転速度を制御するため、又はラグ130の周辺に沿って清掃するため、又はラグ130が、後の機会に、例えば、床を最初に清掃した後に、清掃されるべきであると決定するために、ラグ130を検出することもできることが有利になり得る。これは、例えば、敷居を横断する際にも有用である。
上述されたように、例えば、例として、320x340画素のサイズを有する画素アレイを装備したTOFカメラの形態の高度な3Dセンサが利用される、従来技術のロボット掃除機が存在する。このような従来技術のロボット清掃デバイスは、通例、ロボットの周囲を照明するレーザ光源を装備しており、この場合、TOFカメラは、遭遇した物体から反射された光を検出し、かくして、放射されたレーザ光の往復時間を測定することによってロボットからのそれらの距離を決定する。
それゆえ、画素ごとにアレイの水平及び鉛直方向に沿って反射光を検出することに加えて、TOFカメラは、画素ごとにTOF測定結果から奥行き情報をさらに導出し、その周囲状況の3D表現を作成する。しかし、このようなカメラは高価である。
一実施形態に係るロボット清掃デバイス100は、その代わりに、例えば、1x30画素を有するラインアレイセンサ101、すなわち、単列アレイセンサなどの、はるかにより小さいセンサアレイを装備している。このようなラインアレイセンサははるかにより安価であるが、周囲状況に関して与えられる情報が不可避的に減少することにもなる。
例えば、2x30画素、又はさらに、3x30画素を有するマルチラインアレイセンサが用いられることが企図され得る。例えば、1x16画素のアレイなどの、なおいっそう小さいラインアレイセンサが用いられてもよい。
例えば、ラインアレイが水平に装着されている場合には、単一の画素列のみが存在することになり、これは、例えば、320x340画素を含むアレイと比べて、鉛直方向の分解能を大幅に制限する。しかし、図1aにおいて見ることができるように、実施形態に係るロボット清掃デバイス100は複数の光源を装備している。
ロボット真空掃除機100の主本体の正面側の上部区分に、ロボット清掃デバイス100の前方に近距離広角光ビームを生成するように構成された第1の光源102が配置されている。第1の光源は、例えば、発光ダイオード(LED)によって具体化され得る。第1の光源は、主に、衝突を回避するべく任意の障害物を検出するために利用される。
図1b(ロボット真空掃除機100の3つの上面図を例示目的のために示す)及び図1c(ロボット真空掃除機100のさらなる側面図を示す)を参照して示される一実施形態では、第1の光源102の水平放射角度α1は、90°前後、例えば、範囲85~95°などの、範囲60~120°にあり、その一方で、第1の光源102の鉛直放射角度α2は、70°前後、例えば、範囲65~75°にある。
通例、第1の光源102によって生成される近距離広角光ビームは、反射光の検出時にきめの細かい情報を全くもたらさず、むしろ、物体が掃除機100の前方に存在するか否かに関する粗いタイプの情報を提供することになる。
さらに、ロボット真空掃除機100は、ロボット清掃デバイス100の前方に長距離水平狭角光ビームを生成するように構成された第2の光源103を装備している。それゆえ、第2の光源103は、水平面内に広がるが、鉛直方向に狭い、光の「スライス」を生成することになる。第2の光源は、例えば、レーザによって具体化され得る。
一実施形態では、第2の光源103の水平放射角度β1は、90°前後、例えば、範囲85~95°などの、範囲60~120°にあり、その一方で、第2の光源103の鉛直放射角度β2は、1°前後、例えば、範囲0.1~1.5°にある。
第2の光源103は、通例、そのビームが、ロボット100の視点から多かれ少なかれ真っ直ぐ前方に向けられるように装着されている。第2の光源103は、例えば、同時位置決め地図作成(SLAM)を利用した進路誘導のために用いられるべき反射詳細情報が取得され得る光を放射するレーザであり得る。長距離狭角の第2の光源103を用いることで、任意の検出された物体の詳細が反射光から導出され得、これが、これらの反射が進路誘導のために用いられることを可能にする。
任意選択的に、ロボット清掃デバイス100の前方の床120に向けて近距離水平狭角光ビームを生成するように構成された第3の光源104が主本体の正面側に装着されている。第3の光源104はレーザの形態で具体化され得、例えば、家具などの、近距離物体、さらにまた、接近する壁、又は例えば、下の階への階段室の形態の棚部(一般的に「断崖検出」と称される)を検出するために利用される。この場合も先と同様に、これらの反射から導出される情報は、第1の光源102を用いて提供されるものよりも詳細である。
一実施形態では、第3の光源104の水平放射角度γ1は、90°前後、例えば、範囲85~95°などの、範囲60~120°にあり、その一方で、第3の光源104の鉛直放射角度γ2は、1°前後、例えば、範囲0.1~1.5°にある。
光源のうちの1つ以上は、それぞれの光源のビームを光学的に制御するための光学素子を装備し得ることが理解される。
上述されたように、各光源のビームはロボット清掃デバイス100の前方の任意の物体に当たり、アレイの水平及び鉛直方向に沿って反射光を検出し、周囲状況の2D表現を達成する能力を有する、ラインアレイセンサ101に向かって後方反射することになる。
さらに、それぞれの光源によって放射されている光ビームの飛行時間を測定することによって、ロボット清掃デバイスに対する物体の位置を決定することが可能であり、これにより、周囲状況の3D表現を提供する奥行き情報を追加的に達成する。
図2は、上述されたラインアレイセンサ101、第1の光源102、第2の光源103、及び第3の光源104を示す、本発明の一実施形態における図1a~1cのロボット清掃デバイス100の正面図を示す。図2において、全ての3つの光源はセンサ101の鉛直中心線に沿って配置されている。しかし、多くの異なる場所が光源のために企図され得る。
図2にさらに示されているのは、駆動車輪105、106、床120の上のロボット清掃デバイスの移動などの、ロボット清掃デバイス100の行動を制御するマイクロプロセッサなどのコントローラ107である。コントローラ107は、ロボット清掃デバイス100の近傍の画像を記録するためのラインアレイセンサ101に動作可能に結合されている。
さらに、コントローラ107は、光源の光放射を制御し、ラインアレイセンサ101上への反射ビームの飛行時間を計算するために光源102、103、104に動作可能に結合されている。それゆえ、コントローラ107は、ビームがラインアレイセンサ101上のどこで反射されたのか(すなわち、x及びy位置)を、計算された飛行時間(すなわち、z位置)と組み合わせて分析することによって、遭遇した物体の位置データを導出する能力を有する。任意の動作データは、通例、コントローラ107によって、コンピュータプログラム109に含まれるコンピュータ実行可能命令によって定義されたロボット100の制御を遂行するために実行されるコンピュータプログラム109と共に、メモリ108内に記憶される。前記位置データを導出する際には、アレイセンサに対する光源の配置及び角度が考慮されることが留意される。
それゆえ、コントローラ107は、ラインアレイセンサ101を、画像を取り込んで記録するように制御する。コントローラ107は、ロボット清掃デバイス100が清掃対象表面を横切って移動している間に、放射された光ビームが反射された、検出された物体を表現する画像から特徴点を抽出することによって、及びロボット清掃デバイス100からこれらの物体までの距離を測定することによって、画像から、ロボット清掃デバイス100が動作している周囲状況の表現又はレイアウトを作成する。それゆえ、コントローラは、記録された画像の検出された物体から清掃対象表面に対するロボット清掃デバイス100の位置データを導出し、導出された位置データから周囲状況の3D表現を生成し、駆動モータを、生成された3D表現と、生成された3D表現を考慮することによって清掃対象表面が自律的に進路誘導され得るよう、ロボット清掃デバイス100に供給された進路誘導情報とに従って、ロボット清掃デバイス100を、清掃対象表面を横切って移動させるように制御する。導出された位置データはロボット清掃デバイスの進路誘導のための基礎の役割を果たすことになるため、位置付けが正しいことが重要である。さもなければ、ロボットデバイスは、その周囲状況の、誤誘導を招く「地図」に従って走行することになる。
それゆえ、ラインアレイセンサ101及びコントローラ107によって記録された画像から生成された3D表現は、ロボット清掃デバイスが避けて走行しなければならない、壁、フロアランプ、テーブル脚、及びロボット清掃デバイス100が横断しなければならない、ラグ、じゅうたん、上り段などの形態の障害物の検出を促進する。それゆえ、ロボット清掃デバイス100は、動作/清掃によってその環境又は周囲状況について学習するように構成されている。
一実施形態では、各光源102、103、104の光の放射は、コントローラ107によって、ラインアレイセンサ101が1度に3つのセンサのうちの1つからの反射光のみを検出するように制御される。
例えば、図3のフローチャートに、一実施形態に係る物体を検出する方法が示されている。
この例示的な実施形態では、コントローラ107は、ステップS101において、第1の光源102を、光ビームを放射するように制御し、椅子120に当たってラインアレイセンサ101上へ後方反射されている第1の光源102の光ビームを表現するデータを導出する。これは、例えば、30msの期間にわたって遂行される。それゆえ、コントローラ107は、かくして、ロボット清掃デバイス100からの第1の計算された距離に配置された物体内に、すなわち、椅子120が存在すると結論を下す。
その後、ステップS102において、コントローラ107は、第2の光源103を、光ビームを放射するように制御し、壁140に当たってラインアレイセンサ101上へ後方反射されている第2の光源103の光ビームを表現するデータを導出する。この場合も先と同様に、これは、例えば、30msの期間にわたって遂行される。それゆえ、コントローラ107は、かくして、ロボット清掃デバイス100からの第2の計算された距離に配置された壁140の形態の物体内に存在すると結論を下す。
その後、ステップS103において、ロボット清掃デバイスがラグ140に接近した際に、コントローラ107は、第3の光源104を、光ビームを放射するように制御し、ラグ130に当たってラインアレイセンサ101上へ後方反射されている第3の光源104の光ビームを表現するデータを導出する。この場合も先と同様に、これは、例えば、30msの期間にわたって遂行される。それゆえ、コントローラ107は、かくして、ロボット清掃デバイス100からの第3の計算された距離に配置されたラグ130の形態の物体内に存在すると結論を下す。
その後、本方法は、ロボット清掃デバイス100が床110上で移動するとともに、ステップS101において再び最初から開始し得る。
有利に、図3を参照して説明されるように2つの(又はさらに、3つの)光源を交互に用いることで、比較的低い分解能のラインアレイセンサ101を用いるが、依然として、物体検出及び進路誘導をロボット清掃デバイス100のために可能にすることが可能である。
期間は、異なる光源102、103、104のために異なってもよく、それらは、必ずしも、図3において説明された順序で制御されないことが留意される。例えば、ラグ130に接近すると、その特定の期間におけるラグ130の検出が、壁140を検出することよりも重要であるため、第3の光源104は、他の2つのうちのいずれかが、光を再び放射するように制御される前に、比較的長い時間にわたって光を放射するように制御される。
図2をさらに参照すると、1つ以上のマイクロプロセッサの形態で具体化されたコントローラ/処理ユニット107は、ランダムアクセスメモリ(Random Access Memory、RAM)、フラッシュメモリ、又はハードディスクドライブなどの、マイクロプロセッサに関連付けられた好適な記憶媒体108にダウンロードされたコンピュータプログラム109を実行するように構成されている。コントローラ107は、コンピュータ実行可能命令を含む適切なコンピュータプログラム109が記憶媒体108にダウンロードされ、コントローラ107によって実行されたときに、本発明の実施形態に係る方法を実施するように構成されている。記憶媒体108はまた、コンピュータプログラム109を含むコンピュータプログラム製品であってもよい。代替的に、コンピュータプログラム109は、デジタル多用途ディスク(digital versatile disc、DVD)、コンパクトディスク(compact disc、CD)、又はメモリスティックなどの、好適なコンピュータプログラム製品を用いて記憶媒体108へ転送されてもよい。さらなる代替例として、コンピュータプログラム109は有線又は無線ネットワークを通じて記憶媒体108にダウンロードされてもよい。コントローラ107は、代替的に、デジタル信号プロセッサ(digital signal processor、DSP)、特定用途向け集積回路(application specific integrated circuit、ASIC)、フィールドプログラマブルゲートアレイ(field-programmable gate array、FPGA)、複合プログラマブル論理デバイス(complex programmable logic device、CPLD)などの形態で具体化されてもよい。
図4は、LEDなどの、第4の光源111が利用される、図1a~1cのロボット清掃デバイス100の変形例を示す。任意選択的な第3の光源104は図4に示されていない。
第1の光源102と同様に、第4の光源111は、ロボット清掃デバイス100の前方に近距離広角光ビームを生成するように構成されている。第4の光源111の水平放射角度は、90°前後、例えば、範囲85~95°などの、範囲60~120°にあり得、その一方で、第4の光源111の鉛直放射角度は、70°前後、例えば、範囲65~75°にあり得る。
第4の光源111は、鉛直分解能を増大させるために、鉛直方向に放射された光が、第1の光源102から放射された光と(少なくとも部分的に)重なるよう、ロボット清掃デバイス100の正面側に配置されている。また、物体を検出するため、又は物体を経時的に追跡するために、受信信号の強度を利用することも可能である。
本発明は主に以上において数個の実施形態を参照して説明された。しかし、当業者によって容易に理解されるように、以上に開示されているもの以外の実施形態も、添付の特許請求項によって定義されるとおりの本発明の範囲内で同等に可能である。

Claims (14)

  1. ロボット清掃デバイスであって、それが清掃対象の表面の上で移動するとともに物体を検出するように構成された、ロボット清掃デバイスにおいて、前記ロボット清掃デバイスが、
    前記ロボット清掃デバイスの前方に近距離広角光ビームを生成するように構成された第1の光源と、
    前記ロボット清掃デバイスの前方に長距離水平狭角光ビームを生成するように構成された第2の光源と、
    前記光源のうちの1つ以上からの反射光を、前記反射光が反射された、照明された物体を検出するために検出するように構成されたアレイセンサと、
    を備える、ロボット清掃デバイス。
  2. 前記ロボット清掃デバイスの前方に前記表面に向けて近距離水平狭角光ビームを生成するように構成された第3の光源をさらに備える、請求項1に記載のロボット清掃デバイス。
  3. 前記光源を、1度に1つの光源ずつ、光を放射するように制御し、前記それぞれの光源から放射され、前記アレイセンサ上へ反射されている前記光の飛行時間を計算し、前記計算された飛行時間、及び前記アレイセンサ上の前記反射光の位置に基づいて、前記光が反射された物体の位置を決定するように構成されたコントローラをさらに備える、請求項1又は2に記載のロボット清掃デバイス。
  4. 前記光源が、60~120°、より特定的には、85~95°、さらにより特定的には、90°の水平放射角度をもって光を放射するように構成されている、請求項1~3のいずれか1項に記載のロボット清掃デバイス。
  5. 前記第1の光源が、65~75°、より特定的には、70°の鉛直放射角度をもって光を放射するように構成されている、請求項1~4のいずれか1項に記載のロボット清掃デバイス。
  6. 前記第2の光源が、0.1~1.5°、より特定的には、1°の鉛直放射角度をもって光を放射するように構成されている、請求項1~5のいずれか1項に記載のロボット清掃デバイス。
  7. 前記第3の光源が、0.1~1.5°、より特定的には、1°の鉛直放射角度をもって光を放射するように構成されている、請求項2~4のいずれか1項に記載のロボット清掃デバイス。
  8. 前記第1の光源が発光ダイオードを含み、
    前記第2の光源がレーザを含み、
    前記第3の光源がレーザを含む、請求項2~4および7のいずれか1項に記載のロボット清掃デバイス。
  9. 前記アレイセンサがラインアレイセンサを含む、請求項1~8のいずれか1項に記載のロボット清掃デバイス。
  10. ロボット清掃デバイスの、それが清掃対象表面上で移動するとともに物体を検出する方法であって、前記ロボット清掃デバイスが、
    第1の光源を、前記ロボット清掃デバイスの前方に近距離広角光ビームを生成するように制御し、アレイセンサ上で、前記第1の光源からの反射光を、前記反射光が反射された、照明された物体を検出するために検出することと、
    第2の光源を、前記ロボット清掃デバイスの前方に長距離水平狭角光ビームを生成するように制御し、アレイセンサ上で、前記第2の光源からの反射光を、前記反射光が反射された、照明された物体を検出するために検出することと、
    を含む、方法。
  11. 第3の光源を、前記ロボット清掃デバイスの前方に長距離水平狭角光ビームを生成するように制御し、アレイセンサ上で、前記第3の光源からの反射光を、前記反射光が反射された、照明された物体を検出するために検出することをさらに含む、請求項10に記載の方法。
  12. 前記第1の光源、前記第2の光源、および前記第3の光源を、1度に1つの光源ずつ、光を放射するように制御し、前記第1の光源、前記第2の光源、および前記第3の光源のそれぞれから放射され、前記アレイセンサ上へ反射されている前記光の飛行時間を計算し、前記計算された飛行時間、及び前記アレイセンサ上の前記反射光の位置に基づいて、前記光が反射された物体の位置を決定することをさらに含む、請求項10又は11に記載の方法。
  13. コンピュータ実行可能命令が、デバイス内に含まれるコントローラ上で実行されたときに、前記デバイスに、請求項10~12のいずれか1項に記載の方法を遂行させるための前記コンピュータ実行可能命令を含むコンピュータプログラム。
  14. コンピュータ可読媒体を含むコンピュータプログラム製品であって、前記コンピュータ可読媒体が、その上に組み込まれた請求項13に記載のコンピュータプログラムを有する、コンピュータプログラム製品。
JP2021564849A 2019-05-09 2019-05-09 ラインアレイを用いた物体の検出 Active JP7528404B2 (ja)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/EP2019/061900 WO2020224782A1 (en) 2019-05-09 2019-05-09 Detecting objects using a line array

Publications (2)

Publication Number Publication Date
JP2022537248A true JP2022537248A (ja) 2022-08-25
JP7528404B2 JP7528404B2 (ja) 2024-08-06

Family

ID=66554352

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2021564849A Active JP7528404B2 (ja) 2019-05-09 2019-05-09 ラインアレイを用いた物体の検出

Country Status (6)

Country Link
US (1) US20220299650A1 (ja)
EP (1) EP3966653A1 (ja)
JP (1) JP7528404B2 (ja)
KR (1) KR20220007622A (ja)
CN (1) CN113841098A (ja)
WO (1) WO2020224782A1 (ja)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11960008B2 (en) * 2018-05-17 2024-04-16 Cmos Sensor, Inc. Method and system for pseudo 3D mapping in robotic applications
WO2020243901A1 (en) * 2019-06-04 2020-12-10 Texas Instruments Incorporated An optical time of flight sensor for navigation systems in robotic applications
CN118161087A (zh) * 2020-11-20 2024-06-11 余姚舜宇智能光学技术有限公司 用于扫地机器人的tof光学系统和扫地机器人
CN115399681B (zh) * 2022-09-19 2024-04-05 上海集成电路制造创新中心有限公司 传感器、机器人和扫地机

Citations (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH01163806A (ja) * 1987-12-21 1989-06-28 Shinichi Yuda 移動ロボットにおける路面環境検知装置
WO1993003399A1 (en) * 1991-08-07 1993-02-18 Aktiebolaget Electrolux Obstacle detecting assembly
JPH05242398A (ja) * 1992-02-29 1993-09-21 Nec Aerospace Syst Ltd 移動体の衝突防止装置
JPH07248824A (ja) * 1994-03-11 1995-09-26 Matsushita Electric Ind Co Ltd 搬送装置
JPH07301672A (ja) * 1994-05-02 1995-11-14 Nissan Motor Co Ltd 車間距離レーダ装置
JP2005157689A (ja) * 2003-11-25 2005-06-16 Matsushita Electric Works Ltd 自律移動車両
JP2007193538A (ja) * 2006-01-18 2007-08-02 Sharp Corp 自走式移動体
JP2009509220A (ja) * 2005-09-02 2009-03-05 ニート ロボティックス,インコーポレイティド 多機能ロボット装置
JP2010170315A (ja) * 2009-01-22 2010-08-05 Panasonic Electric Works Co Ltd 自律移動装置
US20160306358A1 (en) * 2015-04-16 2016-10-20 Samsung Electronics Co., Ltd Cleaning robot and method of controlling the same
JP2017040594A (ja) * 2015-08-20 2017-02-23 株式会社Zmp 距離センサー及びそれを用いた搬送用ロボット
JP2017122634A (ja) * 2016-01-07 2017-07-13 シャープ株式会社 検知装置および移動体
US20170332862A1 (en) * 2016-05-17 2017-11-23 Lg Electronics Inc. Mobile robot and method of controlling the same

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4248532A (en) * 1978-12-26 1981-02-03 Nosler John C Electro-optical distance-measuring system
US6532404B2 (en) * 1997-11-27 2003-03-11 Colens Andre Mobile robots and their control system
CN101375781B (zh) * 2008-09-28 2011-11-30 泰怡凯电器(苏州)有限公司 地面处理系统及地面处理装置与充电座的对接方法
JP6138420B2 (ja) * 2012-04-06 2017-05-31 シャープ株式会社 発光装置および車両用前照灯
US10342400B2 (en) * 2016-05-20 2019-07-09 Lg Electronics Inc. Autonomous cleaner
US10575696B2 (en) * 2016-07-13 2020-03-03 Irobot Corporation Autonomous robot auto-docking and energy management systems and methods

Patent Citations (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH01163806A (ja) * 1987-12-21 1989-06-28 Shinichi Yuda 移動ロボットにおける路面環境検知装置
WO1993003399A1 (en) * 1991-08-07 1993-02-18 Aktiebolaget Electrolux Obstacle detecting assembly
JPH05242398A (ja) * 1992-02-29 1993-09-21 Nec Aerospace Syst Ltd 移動体の衝突防止装置
JPH07248824A (ja) * 1994-03-11 1995-09-26 Matsushita Electric Ind Co Ltd 搬送装置
JPH07301672A (ja) * 1994-05-02 1995-11-14 Nissan Motor Co Ltd 車間距離レーダ装置
JP2005157689A (ja) * 2003-11-25 2005-06-16 Matsushita Electric Works Ltd 自律移動車両
JP2009509220A (ja) * 2005-09-02 2009-03-05 ニート ロボティックス,インコーポレイティド 多機能ロボット装置
JP2007193538A (ja) * 2006-01-18 2007-08-02 Sharp Corp 自走式移動体
JP2010170315A (ja) * 2009-01-22 2010-08-05 Panasonic Electric Works Co Ltd 自律移動装置
US20160306358A1 (en) * 2015-04-16 2016-10-20 Samsung Electronics Co., Ltd Cleaning robot and method of controlling the same
JP2017040594A (ja) * 2015-08-20 2017-02-23 株式会社Zmp 距離センサー及びそれを用いた搬送用ロボット
JP2017122634A (ja) * 2016-01-07 2017-07-13 シャープ株式会社 検知装置および移動体
US20170332862A1 (en) * 2016-05-17 2017-11-23 Lg Electronics Inc. Mobile robot and method of controlling the same

Also Published As

Publication number Publication date
JP7528404B2 (ja) 2024-08-06
EP3966653A1 (en) 2022-03-16
KR20220007622A (ko) 2022-01-18
CN113841098A (zh) 2021-12-24
WO2020224782A1 (en) 2020-11-12
US20220299650A1 (en) 2022-09-22

Similar Documents

Publication Publication Date Title
US9946263B2 (en) Prioritizing cleaning areas
JP7528404B2 (ja) ラインアレイを用いた物体の検出
KR102099495B1 (ko) 로봇 청소 장치가 장애물에 올라가는 것의 감지
JP6532530B2 (ja) ロボット掃除機の掃除方法
US10877484B2 (en) Using laser sensor for floor type detection
US10617271B2 (en) Robotic cleaning device and method for landmark recognition
KR102588486B1 (ko) 로봇 청소 장치 및 로봇 청소 장치에서의 절벽 검출 실시 방법
US10534367B2 (en) Experience-based roadmap for a robotic cleaning device
JP2017501472A (ja) 周縁記録機能を備えるロボット掃除機
JP7243967B2 (ja) ロボット清掃デバイスの前方の表面のレベル差を検出する方法
US20190246852A1 (en) Robotic cleaning device and a method of controlling movement of the robotic cleaning device
WO2024008279A1 (en) Robotic cleaning device using optical sensor for navigation

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20220421

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20230228

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20230228

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20230524

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20230801

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20231023

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20240116

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20240514

A911 Transfer to examiner for re-examination before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A911

Effective date: 20240523

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20240625

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20240628

R150 Certificate of patent or registration of utility model

Ref document number: 7528404

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150