TWI758368B - 包含可調整焦距成像感測器的距離感測器 - Google Patents
包含可調整焦距成像感測器的距離感測器 Download PDFInfo
- Publication number
- TWI758368B TWI758368B TW106142945A TW106142945A TWI758368B TW I758368 B TWI758368 B TW I758368B TW 106142945 A TW106142945 A TW 106142945A TW 106142945 A TW106142945 A TW 106142945A TW I758368 B TWI758368 B TW I758368B
- Authority
- TW
- Taiwan
- Prior art keywords
- distance
- reference pattern
- pattern
- image
- projection point
- Prior art date
Links
Images
Classifications
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
- G01C3/00—Measuring distances in line of sight; Optical rangefinders
- G01C3/02—Details
- G01C3/06—Use of electric means to obtain final indication
- G01C3/08—Use of electric radiation detectors
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/50—Depth or shape recovery
- G06T7/55—Depth or shape recovery from multiple images
- G06T7/571—Depth or shape recovery from multiple images from focus
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01B—MEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
- G01B11/00—Measuring arrangements characterised by the use of optical techniques
- G01B11/02—Measuring arrangements characterised by the use of optical techniques for measuring length, width or thickness
- G01B11/026—Measuring arrangements characterised by the use of optical techniques for measuring length, width or thickness by measuring distance between sensor and object
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01B—MEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
- G01B11/00—Measuring arrangements characterised by the use of optical techniques
- G01B11/22—Measuring arrangements characterised by the use of optical techniques for measuring depth
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S17/00—Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
- G01S17/02—Systems using the reflection of electromagnetic waves other than radio waves
- G01S17/06—Systems determining position data of a target
- G01S17/46—Indirect determination of position data
- G01S17/48—Active triangulation systems, i.e. using the transmission and reflection of electromagnetic waves other than radio waves
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S7/00—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
- G01S7/48—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S17/00
- G01S7/481—Constructional features, e.g. arrangements of optical elements
- G01S7/4814—Constructional features, e.g. arrangements of optical elements of transmitters alone
- G01S7/4815—Constructional features, e.g. arrangements of optical elements of transmitters alone using multiple transmitters
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/50—Depth or shape recovery
- G06T7/521—Depth or shape recovery from laser ranging, e.g. using interferometry; from the projection of structured light
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/50—Depth or shape recovery
- G06T7/55—Depth or shape recovery from multiple images
- G06T7/564—Depth or shape recovery from multiple images from contours
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/70—Determining position or orientation of objects or cameras
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/10—Image acquisition
- G06V10/12—Details of acquisition arrangements; Constructional details thereof
- G06V10/14—Optical characteristics of the device performing the acquisition or on the illumination arrangements
- G06V10/145—Illumination specially adapted for pattern recognition, e.g. using gratings
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/50—Context or environment of the image
- G06V20/56—Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
- G06V20/58—Recognition of moving objects or obstacles, e.g. vehicles or pedestrians; Recognition of traffic objects, e.g. traffic signs, traffic lights or roads
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/56—Cameras or camera modules comprising electronic image sensors; Control thereof provided with illuminating means
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S17/00—Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
- G01S17/88—Lidar systems specially adapted for specific applications
- G01S17/93—Lidar systems specially adapted for specific applications for anti-collision purposes
- G01S17/931—Lidar systems specially adapted for specific applications for anti-collision purposes of land vehicles
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10004—Still image; Photographic image
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10141—Special mode during image acquisition
- G06T2207/10148—Varying focus
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30248—Vehicle exterior or interior
- G06T2207/30252—Vehicle exterior; Vicinity of vehicle
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Electromagnetism (AREA)
- Multimedia (AREA)
- Radar, Positioning & Navigation (AREA)
- Remote Sensing (AREA)
- Computer Networks & Wireless Communication (AREA)
- Artificial Intelligence (AREA)
- Optics & Photonics (AREA)
- Signal Processing (AREA)
- Measurement Of Optical Distance (AREA)
- Length Measuring Devices By Optical Means (AREA)
Abstract
在一個具體實施例中,一種計算對物件之距離的方法,包含:同時啟動距離感測器的第一投射點與第二投射點,以協同將參考圖案投射入視野中;啟動距離感測器的第三投射點,以將量測圖案投射入視野中;擷取視野的影像,其中物件、參考圖案、與量測圖案係可見於影像中;基於影像中的量測圖案的外觀,計算從距離感測器至物件的距離;基於影像中的參考圖案的外觀,偵測距離感測器的鏡頭的移動;以及基於所偵測到的移動,調整所計算的距離。
Description
對相關申請案的交互參照:本申請案主張對於申請於2016年12月7日的美國臨時專利申請案第62/430,998號的優先權,在此併入此臨時申請案全文以作為參考。
本揭示內容大抵相關於電腦視覺系統,且更特定而言,相關於量測對物件或空間中一點的距離。
無人載具(諸如機器人載具與無人機)通常仰賴電腦視覺系統,以進行障礙物偵測並在周圍環境中導航。相應地,這些電腦視覺系統通常仰賴從周圍環境獲取視覺資料的各種感測器,電腦視覺系統處理這些視覺資料以取得關於周圍環境的資訊。例如,經由一或更多個成像感測器所獲取的資料,可用於判定從載具至特定物件或周圍環境中一點的距離。
在一個具體實施例中,一種計算對物件之距離的方法,包含:同時啟動距離感測器的第一投射點與第二投射點,以協同將參考圖案投射入視野中;啟動距離感測器的第三投射點,以將量測圖案投射入視野中;擷取視野的影像,其中物件、參考圖案、與量測圖案係可見於影像中;基於影像中的量測圖案的外觀,計算從距離感測器至物件的距離;基於影像中的參考圖案的外觀,偵測距離感測器的鏡頭的移動;以及基於所偵測到的移動,調整所計算的距離。
在另一種具體實施例中,一種電腦可讀取儲存裝置,電腦可讀取儲存裝置儲存複數個指令,複數個指令在由處理器執行時使得處理器執行用於計算對物件的距離的作業。作業包含:同時啟動距離感測器的第一投射點與第二投射點,以協同將參考圖案投射入視野中;啟動距離感測器的第三投射點,以將量測圖案投射入視野中;擷取視野的影像,其中物件、參考圖案、與量測圖案係可見於影像中;基於影像中的量測圖案的外觀,計算從距離感測器至物件的距離;基於影像中的參考圖案的外觀,偵測距離感測器的鏡頭的移動;以及基於所偵測到的移動,調整所計算的距離。
在另一範例中,一種設備,包含:成像感測器,包含可移動的鏡頭;第一投射點與第二投射點,以協同將參考圖案投射入視野中,其中第一投射點與第二投射點相對於成像感測器的各別位置為固定的;第三投射點,以將量測圖案投射入視野中,其中第三投射點相對於成像感測器的位置為固定的;以及電路系統,以基於成像感測器擷取到的視野的影像中的量測圖案的外觀,計算從設備至視野中的物件的距離,以基於影像中的參考圖案的外觀偵測鏡頭的移動,並基於所偵測到的移動調整所計算出的距離。
在一個具體實施例中,本揭示內容相關於距離感測器。在無人載具中可使用距離感測器,以幫助電腦視覺系統判定從載具到特定物件或周圍環境中一點的距離。例如,距離感測器可將一或更多個光束投射到物件或點上,且隨後根據飛行時間(time of flight; TOF)、對反射光的分析(例如光學雷達(lidar))、或其他手段來計算距離。然而此類型的習知距離感測器傾向為笨重的,且因此可不適合用在小型載具中。再者,感測器可太昂貴而難以生產,且傾向為具有受限的視野。例如,即使使用多個習知成像感測器的設置,提供的視野仍小於360度。距離感測器亦可用於其他應用,包含三維(3D)成像、個人與商業用載具攝影機系統、保全系統等等。然而,這些應用之每一者可需要不同類型的影像資料(例如廣視野、遠距離、小尺寸等等);因此,可使用鏡頭移位(lens shift)與影像放大(image magnification)以擷取給定應用所需的影像類型。
一些距離感測器利用簡單三角定位演算法以使影像的位置直接相關於距離,並從而計算出對相關聯於影像的物件的距離。此類型的一些感測器可使用二維攝影機作為三維攝影機。因此,此種系統在成本與尺寸上具有優點。然而,對於採用光束投射的主動三角定位系統,成像感測器(例如攝影機)通常被配置為不具有縮放能力的固定鏡頭、固定對焦系統。固定對焦在試圖擷取遠方影像時可引入模糊,且由於無法縮放,可難以擷取移動物件的清晰影像。另一方面,若鏡頭可調整縮放並變焦,則任何非期望的鏡頭移動(例如移位或偏向)可影響三角定位的精確度。
本揭示內容的範例提供了對於用於小型距離感測器的光學配置的改進,小型距離感測器諸如申請於2015年10月22日的美國專利申請案第14/920,246號中所揭示的距離感測器的任一者,在此併入此美國申請案全文以作為參考。一或更多個光源投射複數個光束,複數個光束在投射至物件上時協同形成量測圖案(例如複數個平行線)。兩或更多個光源投射複數個光束,複數個光束在投射至物件上時協同形成參考圖案(例如亦是複數個平行線)。量測圖案與參考圖案可被同時從相同光源或不同光源投射。一或更多個成像感測器隨後擷取物件二維影像、量測圖案、以及參考圖案,並基於影像中物件上量測圖案與參考圖案的外觀,來偵測距離感測器的成像感測器鏡頭的移動(例如移位、偏向等等)。隨後可對三角定位式物件距離量測進行補償,以處理鏡頭的移動。
在本揭示內容的背景內容內,「光束」或「投射光束」代表由所揭示的距離感測器的光源發出的光的形式。「線」或「圖案」代表在光源發出的光束投射在表面或物件上時,在此表面或物件上產生的影像。
例如,第1A圖與第1B圖圖示說明可用於產生本揭示內容的光學配置的距離感測器100的一種範例。特定而言,第1A圖圖示說明距離感測器100的截面圖,而第1B圖圖示說明第1A圖的距離感測器100的俯視圖。距離感測器100可例如被裝設至無人載具。
如第1A圖圖示說明,距離感測器100包含設置在小型外殼102內的複數個部件。在一個範例中,部件包含複數個光源1081
-108n
(在此集中稱為「光源108」或個別稱為「光源108」),這些光源設置為圍繞包含廣角鏡頭112的成像感測器110。在一個範例中,複數個光源108包含偶數個光源。例如在第1B圖繪製的範例中,複數個光源108包含四個光源108。在一個範例中,部件被設置為沿著中央軸A-A'實質對稱。例如在一個範例中,中央軸A-A'重合於成像感測器110的光軸(例如鏡頭單元的中心),且光源108由相同的間距彼此隔開(例如每三十度、每九十度等等)位於圍繞成像感測器110的環中,如第1B圖圖示說明。
在一個範例中,光源108之每一者為發出複數個光束的雷射光源,其中複數個光束可將複數個連續線或點線(或其他標示,諸如交叉號、破折號等等)投射至一表面上,複數個光束係投射至此表面上。因此,每一光源108可被視為距離感測器100的投射點,亦即距離感測器100上的一點,複數個光源從此點投射進視野。對此,每一投射點可包含各自的繞射光學元件1141
-114n
(此後集中稱為繞射光學元件114",或個別稱為「繞射光學元件114」),這些繞射光學元件將光源108發出的單一光束分成複數個光束。複數個光束的每一個別光束,可相應投射點或線至表面上,其中複數個光束被設置為使得對應的點協同形成一系列的平行線。這些線可由點形成,使得他們協同形成矩形點矩陣。或者,線可為連續的,或由破折號、交叉號等等形成。
每一光源108的投射方向可相對於成像感測器110固定。在一個範例中,每一光源108經配置以投射複數個光束,複數個光束在一表面上形成不同的視覺圖案。例如,光源1081
可投射點圖案,而光源1082
可圖示破折號或交叉號的圖案,諸如此類。在進一步的範例中,複數個光源108的至少一個光源108可經配置以改變此光源所投射的圖案。此外,光源108之一或更多者投射的光的強度可改變。例如,光源1081
可投射具有第一強度的光,而光源1082
可投射具有不同的第二強度的光,諸如此類。或者,每一光源108可能夠投射強度可在一些範圍內改變的光。
從每一光源108發出的光的波長,已知對於人類視覺而言是相當安全的(例如紅外線)。在進一步的範例中,每一光源108可包含電路系統以調整光源輸出的強度。在進一步的範例中,每一光源108可發出脈衝光,以減輕環境光對於影像擷取的效應。
在一個範例中,複數個光源108被定位在成像感測器110的主點(亦即光軸A-A'與成像平面交會的點)的「後方」,相對於複數個光源108發出的光的傳播方向,如第1A圖圖示。在一個範例中,複數個光源108的至少一個光源108可從距離感測器100取下。
如上文所論述的,可沿著中央軸A-A'在複數個光源108中央處定位成像感測器110。在一個範例中,成像感測器110為影像擷取裝置,諸如靜態攝影機或視訊攝影機。在一個特定範例中,影像擷取裝置包含紅、綠、藍紅外線(RGB-IR)感測器。亦如上文所論述的,成像感測器110包含產生半球形視野的廣角鏡頭112,諸如魚眼鏡頭。在一個範例中,鏡頭112包含任何類型的透鏡,除了中心投射或自由曲面光學透鏡以外。在一個範例中,成像感測器110包含用於計算距離感測器100對物件或點的距離的電路系統。在另一範例中,成像感測器包含網路介面,網路介面用於將所擷取的影像透過網路通訊傳輸至處理器,其中處理器計算從距離感測器100至物件或點的距離,且隨後將計算出的距離通訊傳輸回距離感測器100。
在另一範例中,距離感測器100可採用單一光源108,單一光源108採用繞射光學元件,以將光源108的光束分成第一複數個光束。第一複數個光束之每一者隨後被進一步分成第二複數個光束(例如藉由繞射光學元件114),如上文所論述的,第二複數個光束從距離感測器100的每一投射點發出。此範例被進一步詳細論述於美國專利申請案第14/920,246號中。
因此在一個範例中,距離感測器100使用一或更多個光源及(或)一或更多個繞射光學元件以產生複數個投射點,從複數個投射點發出複數個投射光束,其中複數個投射光束產生的複數個線(例如可包含點或破折號的圖案),可被定向為在他們所投射的表面上平行於彼此。因此,距離感測器100投射至表面上的圖案,可包含複數個平行線,其中每一線包含連續線或點、破折號、交叉號等等的線。隨後可根據視野中複數個平行線的外觀(例如藉由點的位置(在由點形成線時)),計算從距離感測器100到物件的距離(例如申請於2015年10月22日的美國專利申請案第14/920,246號所說明的)。例如,可透過形成平行線的點的橫向移動,來偵測對物件的距離,因為即使距離改變,線仍總是保持為線性的。亦可直接計算物件的大小與尺寸。
如將於下文進一步論述的,可使用不同的平行線圖案以量測距離以及補償鏡頭移動。例如,可使用第一及(或)第二參考圖案以偵測鏡頭移動。對於鏡頭移動的知識,隨後可被應用,以調整基於量測圖案的影像所作成(例如經由三角定位)的距離量測。
在光源108之每一者投射具有不同圖案(例如點、交叉號、破折號等等)的複數個線時,成像感測器110中的電路系統可輕易判定所擷取影像中的線是由哪個光源108所產生的。這可協助計算距離,此將更詳細論述於下文。在一個範例中,可結合光源108之每一者所投射的圖案,來使用不同的距離計算技術。
第2圖圖示說明第1A圖與第1B圖的距離感測器100的部分的俯視圖。特定而言,第2圖圖示說明相對於要偵測的物件200的鏡頭移位與影像放大的概念。
如圖示說明,成像感測器110與光源108具有固定的位置。然而,鏡頭112具有可移動式位置,使得鏡頭112可被調整以進行對焦和縮放。因此,儘管距離感測器100可具有相對於正量測距離的物件200的固定位置,但鏡頭112相對於物件200的位置可改變,而此可影響用於計算距離的三角定位技術的精確度。
例如,鏡頭112可移位,亦即在相對於成像感測器110光軸的橫向或正交方向中移動。在第2圖中,移位前的初始光軸圖示於A-A',而移位後的新光軸圖示於B-B'。
鏡頭112亦可在平行於成像感測器110光軸的方向中移動,例如用於影像放大(縮放)。在此情況中,成像感測器光軸的位置不改變(例如維持為A-A'),但鏡頭112至物件200的距離改變。
可由兩或更多個光源108投射參考圖案到物件200上,其中每一光源108投射各別的參考光束2061
或206n
(此後協同稱為「參考光束206」或個別稱為「參考光束206」)。參考圖案包含至少一個參考點204(例如點、破折號、線等等),在此處參考光束206收斂或交會,此將於下文更詳細論述。在一個範例中,參考圖案的參考軸202對齊(例如共線於)成像感測器110的光軸A-A'。
第3A圖更詳細圖示說明鏡頭移位。特定而言,第3A圖圖示說明在鏡頭至物件306之距離並未改變時的鏡頭移位。在第3A圖中,鏡頭112的初始位置被指示為300,而鏡頭112移位後(或新的)位置被指示為302。初始位置300與新位置302之間的移位或橫向差異,可被給定為s。
參考符號304指示投射至物件306上的參考光束,在物件306上產生點(例如點、交叉號、破折號等等)影像PR
,此後稱為「參考點」。如圖示說明,參考光束304被從鏡頭112的初始位置300投射自(並透過)鏡頭112的前節點Nf
。在此情況中,前節點Nf
作為距離感測器100的校正位置,以進行三角定位。在鏡頭112移位至新位置302時,鏡頭112的前節點移動至Nf
'。鏡頭112的後節點從Nr
移動至Nr
'。相關聯於參考光束304的方向與參考點PR
為固定的。
在鏡頭112位於初始位置300時,成像感測器110上的參考點PR
的影像被指示為QR
。然而,在鏡頭112移位至新位置302時,成像感測器110上的參考點PR
的影像移動至QR
'。在此情況中,參考點PR
的移動距離s'可被計算為: s’ = s+s(b/a) (方程式1) 其中b代表影像距離(亦即從影像感測器110上的參考點PR
的影像QR
'到鏡頭112的後節點Nr
'的距離),且a代表物件距離(亦即從物件306到鏡頭112的後節點Nr
'的距離)。通常而言,比例b/a非常小,使得移位s大約等於移動距離s'。
在一個範例中,點影像P0
、P1
、與P2
形成投射至物件306上的圖案的部分以進行距離量測;因此點影像P0
、P1
、與P2
在本文中可稱為「量測點」。成像感測器110上的量測點的對應影像,分別由Q0
、Q1
、與Q2
指示。在鏡頭112移位至新位置302時,成像感測器110上的量測點的影像分別移動至Q0
'、Q1
'、與Q2
'。在此情況中,量測點P0
、P1
、與P2
的移動距離s'大約等於移位s。
因此,可採用具有任何對於物件306之距離的參考光束304,來判定鏡頭112的移位s。在移位為s時,在任何對於物件306的距離之下,任何量測點P0
、P1
、與P2
的影像的移動值(如由成像感測器110所擷取的)為s'。
第3B圖更詳細圖示影像放大。應注意到,影像放大與影像距離成比例關係(亦即從影像感測器上的圖案點的影像到鏡頭後節點的距離)。特定而言,第3B圖圖示說明在不具有鏡頭移位下的影像放大。因此,鏡頭112可移向或移離物件306(亦即在平行於成像感測器110光軸的方向中),但不橫向移動(亦即在正交於成像感測器110光軸的方向中,如第3A圖圖示說明的)。
在第3B圖中,鏡頭112的初始位置被指示為308,而鏡頭112的新位置(或放大位置)被指示為310。參考符號304指示投射至物件306上的參考光束,在物件306上產生點(例如點、交叉號、破折號等等)影像PR
,此後稱為「參考點」。如圖示說明,參考光束304被從鏡頭112的初始位置308投射自(並透過)鏡頭112的前節點Nf
。在此情況中,前節點Nf
作為距離感測器100的校正位置,以進行三角定位。在鏡頭112移至新位置310時,鏡頭112的前節點移動至Nf
'。鏡頭112的後節點從Nr
移動至Nr
'。相關聯於參考光束304的方向與參考點PR
為固定的(亦即參考點PR
不相對於物件306移動,即使影像距離可改變)。
在鏡頭112位於初始位置308時,成像感測器110上的參考點的影像被指示為QR
。如前述,物件306上的參考點PR
的影像位置,不隨著影像距離改變而移動。然而,在鏡頭112移位至新位置310且影像距離改變時(例如由於縮放或變焦),成像感測器110上的參考點的影像移動至QR
'。
在進一步的範例中,使用複數個(亦即至少兩個)參考光束以偵測並補償鏡頭移位與影像放大。在此情況中,至少可使用距離感測器的第一與第二投射點,以至少將第一與第二參考光束,分別投射至要量測距離的物件上。
例如,第4A圖圖示說明第一範例,其中可使用兩個參考光束來偵測影像放大及(或)鏡頭移位。在此情況中,可藉由偵測對應於兩參考光束的所擷取影像的距離變異,來獲得變異比例k。
特定而言,將第一參考光束400與第二參考光束402投射,以在物件404上產生第一參考點PR
與第二參考點PSR
。影像感測器上的第一參考點PR
與第二參考點PSR
的影像位置,分別由QR
與QSR
指示;影像感測器上的第一參考點PR
與第二參考點PSR
的影像的新位置,分別由QR
'與QSR
'指示。點P與P0
分別指示第一量測光束406與第二量測光束408分別在物件404上形成的第一參考點與第二參考點。
在此情況中,可依下式獲得變異比例k: k = (khSR
+ khR
)/(hSR
* hR
) (方程式2) 其中khSR
與khR
為已知的。
第4B圖圖示一範例,其中使用第4A圖的第一與第二參考光束400與402來偵測同時發生的影像放大與鏡頭移位。在此情況中,必需知道第一與第二參考光束400與402的絕對位置(亦即據以執行三角定位校正的鏡頭移位前初始位置),以計算移位s與變異比例k兩者。在此情況中,絕對位置被界定為對於成像感測器光軸A-A'的位置,其中光軸A-A'被進一步界定為參考點影像不隨著物件距離變異或影像距離變異移動的點。
所必需被知道的絕對位置精確度,可隨著條件改變。然而在一些範例中,可採用校正手段,校正手段能夠偵測第一參考光束400、第二參考光束402、以及光軸的位置。校正手段可進一步設置並儲存所偵測到的位置。這些位置的偵測、設置、與儲存,可連同三角定位校正來執行。
儘管已針對使用參考「光束」偵測鏡頭移位與物件距離變異來論述前述範例,本揭示內容的進一步範例可使用由複數個光束產生的參考「圖案」以偵測鏡頭移位與物件距離變異。在此情況中,距離感測器的至少兩個投射點同時投射複數個光束,複數個光束可從他們所被發出的投射點扇形擴散。複數個光束的每一光束可投射一點到物件上。複數個光束投射的點,可在物件上協同形成複數個線(例如連續線,或一系列的點、破折號、交叉號等等所組成的線)。由從單一投射點發出的複數個光束,以及由複數個光束投射至物件上的點所圍繞的空間,形成了投射平面,投射平面可包含距離感測器的鏡頭的前節點。每一投射平面可包含距離感測器的光軸。
例如,第5A圖圖示說明來自第一投射點502與第二投射點504的範例主要參考圖案500的投射。如圖示說明,第一投射點502與第二投射點504之每一者投射複數個光束,複數個光束扇形擴散而分別形成第一投射平面506與第二投射平面508。
如圖示說明,第一投射平面506與第二投射平面508沿著線C-C'交會,線C-C'透過成像感測器512的前節點510。因為第一投射點502與第二投射點504的位置相對於成像感測器512為固定的,線C-C'(第一投射平面506與第二投射平面508沿著線C-C'交會)的位置相對於成像感測器512亦為固定的。因此,線C-C'可視為「參考光束」,參考光束實際上可藉由擷取參考圖案500的影像來認知到。
因為第一投射平面506與第二投射平面508透過成像感測器512的光軸,第一投射平面506與第二投射平面508產生的主要參考圖案500可視為「主要」參考圖案。線C-C'可類似地視為「主要」參考軸。
第5B圖圖示說明來自第一投射點502與第二投射點504的範例次要參考圖案514的投射。在此情況中,第一投射點502與第二投射點504之每一者投射複數個光束,複數個光束扇形擴散而分別形成第三投射平面516與第四投射平面518。
如圖示說明,第三投射平面516與第四投射平面518以預定角度沿著線D-D'交會。因為第一投射點502與第二投射點504的位置相對於成像感測器512為固定的,線D-D'(第三投射平面516與第四投射平面518沿著線D-D'交會)的位置相對於成像感測器512亦為固定的。因此,線D-D'可視為「參考光束」,參考光束實際上可藉由擷取參考圖案514的影像來認知到。
因為第三投射平面516與第四投射平面518並未透過成像感測器512的光軸,第三投射平面516與第四投射平面518產生的參考圖案514可視為「次要」參考圖案。線D-D'可類似地視為「次要」參考軸。
在相同平面的主要參考圖案500與次要參考圖案514彼此平行。在主要參考圖案500與次要參考圖案514之間成像感測器512擷取到的影像距離,相對於物件距離變異為固定的。
第6A圖圖示說明可由本揭示內容的距離感測器投射至物件上的範例投射圖案600。如圖示說明,量測圖案600包含矩形點矩陣。然而在其他範例中,點的每一行或每一列可被形成為連續線。如前述,由至少兩個投射點產生量測圖案600,此兩個投射點的位置圍繞成像感測器且相對於成像感測器鏡頭的前節點處於相同高度(沿著成像感測器光軸的方向),此兩個投射點同時發出複數個光束。
在第6A圖與第6B圖圖示說明的範例中(圖示說明在量測圖案600內(或疊加於其上的)同時投射的主要與次要參考圖案的範例),主要參考圖案包含垂直定向的中央點線602,而次要參考圖案包含一組垂直定向的點線604,點線604從中央線602橫向朝外間隔放置(並平行於中央線602)。量測圖案600、主要參考圖案、與次要參考圖案被從複數個投射點606投射至半球形視野內(例如「虛擬球體」),複數個投射點606可包含對應於各別光源608的繞射光學元件。
更特定而言,在球形座標中,主要參考圖案對應於φ=C的線(其中C為固定的任意值),且更特定而言對應於φ=0 (亦即C=0)的線,其中φ為量測圖案600的旋轉角度。因此,主要與次要參考圖案與投射他們的投射點一起產生平面,且被投射至物件上的結果圖案形成一線。
可由仰角θ = +θa至–θa,進一步界定主要參考圖案(其中θ為任意值,且主要參考圖案位於θa至θb的預定範圍中)。可由仰角θ = +θb至–θb,進一步界定次要參考圖案(其中θ為任意值,且次要參考圖案位於θc至θd的預定範圍中)。次要參考圖案的旋轉角度φ可被界定為φ=Δφ(其中φ為預定值)。
相對的,量測圖案600對應於θ=0的線(且更特定而言,量測圖案600的水平定向中心線610對應於θ=0),其中θ為量測圖案600的仰角。
第7圖圖示說明第6A圖與第6B圖的主要參考圖案與次要參考圖案的投射的第一範例側視圖。如圖示說明,包含主要參考圖案(由光束702投射)與次要參考圖案(由光束704投射)的參考圖案的投射點的位置,被定位為與鏡頭706的前節點Nf
重合。因此,在鏡頭706對物件的任意距離之下,參考圖案的線的所擷取的影像佔用相同位置。
因此,藉由如第8圖圖示說明的設置複數個投射點(第8圖圖示說明主要參考圖案800與兩個次要參考圖案802的重疊)(主要參考圖案800與兩個次要參考圖案802被類似地配置但設置於不同的各別位置處),各別中心線804、806、與808與成像感測器鏡頭812光軸的交叉點,在鏡頭812對物件之任意距離下為固定的,主要參考圖案800與次要參考圖案804投射在此物件上。
在一個範例中,主要參考圖案800經配置以為使得他的交叉點可被輕易認知。然而,由於點影像的條件,可假定主要參考圖案800的一些部分可變得無法偵測(取決於物件條件,諸如不正常的反射條件、障礙物的存在等等)。因此,隨著時間,距離感測器偵測主要參考圖案800的能力的精確度可隨著時間改變。
因此在一個範例中,可採取安全措施以提升認知主要參考圖案800交叉點的精確度。例如,主要參考圖案800中的投射線數量可被提升(例如提升至四個或更多個),及(或)投射線的長度可被提升。在進一步的範例中,可使用選擇手段以選擇主要參考圖案800的最有效部分以及最有效計算手段,基於主要參考圖案800的所選部分。在又進一步的範例中,可使用控制手段以基於圖案條件的分析及(或)三角定位結果,控制主要參考圖案800的投射與影像擷取(例如發射時間、發射強度、曝光時間、影像減去方式等等)。
第9圖圖示說明範例量測圖案900,範例量測圖案900具有主要參考圖案902以及同時投射的次要參考圖案904。如圖示說明,量測圖案900具有相當簡單的形狀,由直線的規則圖案組成(其中在此情況中由一系列的點組成每一線)。因此,可甚至根據量測圖案900的部分視圖,輕易假定整體量測圖案900的形狀。
然而,由疊加於量測圖案900上的主要參考圖案902與次要參考圖案904協同組成的參考圖案,可干涉量測圖案900的功能,若量測圖案900與主要與次要參考圖案902與904係從距離感測器的相同投射點投射。因此在一個範例中,參考圖案可被拆成複數個區段9061
-906m
(此後協同稱為「區段906」或個別稱為「區段906」)。
本揭示內容的進一步範例,提供縮放的三維距離感測器。對於遠距離,所投射的點影像的移動值是小的。然而,藉由縮放放大(亦即減少鏡頭至物件的距離),點影像的移動值增加,且距離敏感度提升。
對於量測遠距離,隨著鏡頭亮度降低,返回光(亦即被物件反射並返回成像感測器的光)的強度亦降低。因此,光源發出的光的強度可被增加。另一方面,提升發出光的強度可引入一些缺點,諸如功率消耗提升、生命期降低、且安全性降低。
因此,可利用控制手段,以與縮放功能同步。控制手段可選擇特定投射圖案、調整光源強度、調整發射時間及(或)光源脈衝區間、與調整成像感測器的擷取功能(例如快門速度、曝光時序等等)。
此外,影像模糊可隨著焦點調整而改變,且亦可影響距離量測的精確度。隨著距離感測器縮放放大(亦即影像放大率提升),影像模糊的效應可變得更為嚴重。因為距離感測器需要量測廣泛範圍中的距離,任何自動對焦系統在任意時間都應對焦在完整範圍的距離上。因此可採用具有循環圖案的變焦系統,其中循環圖案隨著影像放大/縮放值改變。
本揭示內容的進一步範例,可補償鏡頭與其他成像光學元件的像差,像差隨著鏡頭移動而變化。在一個範例中,此係由採用一程序來完成,此程序儲存經校正補償值,並使用對應於所量測的距離的經校正補償值來調整三維量測結果。
第10圖圖示說明一種用於計算從感測器至物件或空間中一點的距離的方法1000的流程圖。在一個具體實施例中,方法1000可由整合在成像感測器(諸如第1A圖至第1B圖中圖示說明的成像感測器110)中的處理器執行,或可由如圖示說明於第11圖中並於下文論述的一般用途計算裝置執行。
方法1000開始於步驟1002。在步驟1004中,距離感測器的第一投射點與第二投射點被同時啟動,以各自投射第一與第二複數個光束。第一與第二複數個光束協同將參考圖案投射入一視野。如前述,參考圖案可包含主要參考圖案與次要參考圖案,其中主要參考圖案包含第一線,且次要參考圖案包含定向為平行於第一線的第二與第三線。例如,第一線可被定向為平行於距離感測器的成像感測器的光軸,而第二線與第三線被定向於相對於第一線的平面的一角度。
第一、第二、與第三線之任意者,可被形成為一系列的點(例如點、破折號、交叉號等等)。第一、第二、與第三線可各自形成第一、第二、與第三平面,具有成像感測器的固定點(例如成像感測器鏡頭的前節點)。
如前述,主要參考圖案的旋轉角度在球形座標中可為零,而主要參考圖案的仰角可落入球形座標中的預定範圍內。同時,次要參考圖案的旋轉角度在球形座標中可為固定值,而次要參考圖案的仰角可落入球形座標中的預定範圍內。
在步驟1006中,距離感測器的第三投射點被啟動,以投射第三複數個光束。第三複數個光束將量測圖案投射入視野中。在一個範例中,第一及(或)第二投射點所投射的第一及(或)第二複數個光束,可與第三複數個光束合作,以形成參考圖案。如前述,量測圖案可包含複數個平行線,其中複數個平行線的每一線被形成為一系列的點(例如點、破折號、交叉號等等)。因此在一個範例中,量測圖案可包含矩形點矩陣。在一個範例中,參考圖案的第一、第二、與第三線被定向為平行於(但疊加於)量測圖案的複數個平行線。
如前述,量測圖案的旋轉角度可落入球形座標中的預定範圍內,且量測圖案的仰角可為球形座標中的固定值。
在步驟1008中,擷取視野的影像(例如藉由成像感測器),其中第一、第二、與第三投射點的位置相對於成像感測器的位置固定。物件、參考圖案、以及量測圖案可見於影像中。成像感測器可包含對焦功能及(或)焦長改變功能。因此,成像感測器的鏡頭可為可移動的。
在步驟1010中,基於影像中的量測圖案的外觀,來計算距離感測器至物件的距離。在一個範例中,使用三角定位演算法計算距離。
在步驟1012中,基於影像中參考圖案的外觀,來偵測成像感測器的鏡頭的移動。例如,基於相對於成像感測器的固定點(例如成像感測器鏡頭的前節點)的參考圖案的固定方向的外觀,可判定鏡頭已相對於成像感測器光軸方向橫向移位,或者鏡頭已移近或移離物件。移動係相對於鏡頭的初始(例如經校正的)位置。
例如,可藉由偵測主要參考圖案與次要參考圖案的交叉點的初始位置,來偵測鏡頭的移動。可相對於鏡頭的預定(例如經校正的)位置儲存初始圖案。隨後可偵測交叉點的當前位置,並可計算初始點與當前點之間的差異以尋找鏡頭的移動量。在進一步的範例中,亦可偵測第一參考圖案與第二參考圖案之間的初始距離與當前距離,且初始距離與當前距離之間的差異可指示鏡頭移動量。
在步驟1014中,基於在步驟1012中偵測到的移動,調整在步驟1010中計算出的距離。因此,可調整距離計算,以補償鏡頭移動(移位、縮放、偏向等等)。
方法1000隨後結束在步驟1016。
第11圖繪製適合用於執行本文所述功能中的一般用途電腦的高階方塊圖。如第11圖繪製,系統1100包含一或更多個硬體處理器元件1102(例如中央處理單元(CPU)、微處理器、或多核心處理器)、記憶體1104(例如隨機存取記憶體(RAM)及(或)唯讀記憶體(ROM))、用於計算距離的模組1105、以及各種輸入輸出裝置1106(例如儲存裝置,包含但不限於磁帶機、磁碟機、硬碟機或光碟機、接收器、發送器、鏡頭與光學元件、輸出埠、輸入埠以及使用者輸入裝置(諸如鍵盤、小鍵盤、滑鼠、麥克風等等))。儘管僅圖示一個處理器元件,但應注意到一般用途電腦可利用複數個處理器元件。再者,儘管圖式中僅圖示一個一般用途電腦,若對於特定說明性範例而言前述方法被實施於分散式或平行式(亦即前述方法的步驟或整體方法被跨於多個或平行的一般用途電腦而實施),則此圖式的一般用途電腦意為代表這些多個一般用途電腦之每一者。再者,可利用一或更多個硬體處理器以支援虛擬化或共享式計算環境。虛擬化計算環境可支援代表電腦、伺服器、或其他計算裝置的一或更多個虛擬機器。在此種虛擬化虛擬機器中,可虛擬化或邏輯地呈現硬體部件(諸如硬體處理器與電腦可讀取儲存裝置)。
應注意到,可由軟體及(或)軟體與硬體之組合實施本揭示內容,例如使用特定應用積體電路(ASIC)、可編程式邏輯陣列(PLA)(包含場效可編程式閘陣列(FPGA))、或部署在硬體裝置上的狀態機、一般用途電腦或任何其他均等硬體,例如,屬於前述方法的電腦可讀取指令可用於配置硬體處理器以執行前述方法的步驟、功能及(或)作業。在一個具體實施例中,對於用於計算距離的本模組或處理1105的指令與資料(例如包含電腦可執行指令的軟體程式),可被載入記憶體1104並由硬體處理器元件1102執行,以實施上文連同範例方法1000所論述的步驟、功能或作業。再者,在硬體處理器執行指令以執行「作業」時,此可包含直接執行作業的硬體處理器及(或)協助、指導、或協作另一硬體裝置或部件(例如共同處理器等等)以執行作業的硬體處理器。
執行相關於前述方法的電腦可讀取(或軟體)指令的處理器,可被感知為可編程式處理器或專屬處理器。因此,本揭示內容的用於計算距離的本模組1105(包含相關聯的資料結構),可被儲存在有形的或實體的(廣稱為非暫態性的)電腦可讀取儲存裝置或媒體,例如揮發性記憶體、非揮發性記憶體、ROM記憶體、RAM記憶體、磁碟機或光碟機、裝置或卡匣等等。更特定而言,電腦可讀取儲存裝置可包含提供儲存資訊的能力的任何實體裝置,資訊諸如由處理器或計算裝置(諸如電腦或應用程式伺服器)存取的資料及(或)指令。
儘管上文已說明了各種具體實施例,應瞭解到,僅為示例目的而呈現這些具體實施例而不作為限制。因此,較佳具體實施例的寬度與範圍應不受限於前述示例性具體實施例之任意者,而是僅應根據下列申請專利範圍與均等範圍來界定。
100‧‧‧距離感測器102‧‧‧小型外殼1081-108n‧‧‧光源110‧‧‧成像感測器112‧‧‧鏡頭1141-114n‧‧‧繞射光學元件200‧‧‧表面202‧‧‧參考軸204‧‧‧視野2061-206n300‧‧‧初始位置302‧‧‧新位置304‧‧‧參考光束306‧‧‧物件308‧‧‧初始位置310‧‧‧新位置400‧‧‧第一參考光束402‧‧‧第二參考光束404‧‧‧物件406‧‧‧第一量測光束408‧‧‧第二量測光束502‧‧‧第一投射點504‧‧‧第二投射點506‧‧‧第一投射平面508‧‧‧第二投射平面510‧‧‧前節點512‧‧‧成像感測器514‧‧‧次要參考圖案516‧‧‧第三投射平面518‧‧‧第四投射平面600‧‧‧投射圖案602‧‧‧中央點線604‧‧‧點線606‧‧‧投射點608‧‧‧光源610‧‧‧中心線702‧‧‧光束704‧‧‧光束706‧‧‧鏡頭800‧‧‧主要參考圖案802‧‧‧次要參考圖案804‧‧‧中心線806‧‧‧中心線808‧‧‧中心線812‧‧‧鏡頭900‧‧‧量測圖案902‧‧‧主要參考圖案904‧‧‧次要參考圖案9061-906m‧‧‧區段1000‧‧‧方法1002-1016‧‧‧步驟1100‧‧‧系統1102‧‧‧硬體處理器元件1104‧‧‧記憶體1105‧‧‧用於計算距離的模組1106‧‧‧輸入輸出裝置
連同附加圖式閱讀下文的詳細說明時,將可更輕易瞭解本揭示內容的教示內容,在圖式中:
第1A圖圖示說明一種距離感測器的具體實施例,此距離感測器可用於產生本揭示內容的光學配置;
第1B圖圖示說明第1A圖距離感測器的俯視圖;
第2圖圖示說明第1A圖與第1B圖的距離感測器的部分的俯視圖;
第3A圖更詳細圖示說明鏡頭移位;
第3B圖更詳細圖示影像放大;
第4A圖圖示說明第一範例,其中可使用兩個參考光束來偵測影像放大及(或)鏡頭移位;
第4B圖圖示一主範例,其中使用第4A圖的第一與第二參考光束來偵測同時發生的影像放大與鏡頭移位;
第5A圖圖示說明來自第一投射點與第二投射點的範例主要參考圖案的投射;
第5B圖圖示說明來自第一投射點與第二投射點的範例次要參考圖案的投射;
第6A圖與第6B圖圖示說明同時投射的主要與次要參考圖案;
第7圖圖示說明第6A圖與第6圖的主要參考圖案與次要參考圖案的投射的第一範例側視圖;
第8圖圖示說明在不同位置的所投射點的多個矩形矩陣的重疊;
第9圖圖示說明範例量測圖案,範例量測圖案具有主要參考圖案以及同時投射的次要參考圖案;
第10圖圖示說明一種用於計算從感測器至物件或空間中一點的距離的方法的流程圖;以及
第11圖繪製適合用於執行本文所述功能中的一般用途電腦的高階方塊圖。
為了協助瞭解,已儘可能使用相同的元件符號標定圖式中共有的相同元件。
國內寄存資訊 (請依寄存機構、日期、號碼順序註記) 無
國外寄存資訊 (請依寄存國家、機構、日期、號碼順序註記) 無
600‧‧‧投射圖案
602‧‧‧中央點線
604‧‧‧點線
606‧‧‧投射點
608‧‧‧光源
610‧‧‧中心線
Claims (21)
- 一種用於計算對一物件之一距離的方法,該方法包含以下步驟:同時啟動一距離感測器的一第一投射點與一第二投射點,以協同將一參考圖案投射入一視野中;啟動該距離感測器的一第三投射點,以將一量測圖案投射入該視野中;擷取該視野的一影像,其中該物件、該參考圖案、與該量測圖案係可見於該影像中;基於該影像中的該量測圖案的一外觀,計算從該距離感測器至該物件的一距離;基於該影像中的該參考圖案的一外觀,偵測該距離感測器的一鏡頭的一移動;以及基於所偵測到的該移動,調整所計算的該距離。
- 如請求項1所述之方法,其中該參考圖案包含一第一線、一第二線、與一第三線,該第一線、該第二線、與該第三線被定位為彼此平行。
- 如請求項2所述之方法,其中該第一線、該第二線、與該第三線之每一者係由各別的一系列點形成。
- 如請求項1所述之方法,其中基於該參考圖案的一固定方向,相對於用於擷取該影像的一成像感 測器的一固定點,偵測該移動。
- 如請求項4所述之方法,其中該第一線、該第二線、與該第三線之每一者與該成像感測器的該固定點形成一平面。
- 如請求項4所述之方法,其中該成像感測器的該固定點包含該鏡頭的一前節點。
- 如請求項4所述之方法,其中該第一線、該第二線、與該第三線之每一者形成一平面,該平面包含該成像感測器的一光軸。
- 如請求項2所述之方法,其中該第一線包含一主要參考圖案,且該第二線與第三線協同包含一次要參考圖案,其中該主要參考圖案定向為平行於該距離感測器的一成像感測器的一光軸,且其中該次要參考圖案定向於相對於該主要參考圖案的一平面的一角度。
- 如請求項8所述之方法,其中該主要參考圖案的一旋轉角度在球形座標中為零,且該主要參考圖案的一仰角可落入球形座標中的一預定範圍內。
- 如請求項9所述之方法,其中該次要參考圖案的一旋轉角度在該球形座標中可為一固定值,且該次要參考圖案的一仰角落入該球形座標中的一預定範圍內。
- 如請求項10所述之方法,其中該量測圖案的一旋轉角度落入該球形座標中的一預定範圍內,且該量測圖案的一仰角為該球形座標中的一固定值。
- 如請求項8所述之方法,其中該偵測之步驟包含以下步驟:偵測該主要參考圖案與該次要參考圖案的一交叉點的一初始位置;儲存該初始位置為相關於該鏡頭的一預定位置;偵測該交叉點的一當前位置;以及計算該初始位置與該當前位置之間的一差異,以尋找該移動的一量。
- 如請求項12所述之方法,該方法進一步包含以下步驟:偵測該第一參考圖案與該第二參考圖案之間的一初始距離;儲存該初始距離為相關於該鏡頭的該預定位置;偵測該第一參考圖案與該第二參考圖案之間的一當前距離;以及計算該初始距離與該當前距離之間的一差異,以尋找該移動的一量。
- 如請求項1所述之方法,其中該第一投射點與該第二投射點之至少一者與該第三投射點合作, 以投射該量測圖案。
- 如請求項1所述之方法,其中該移動為在正交於該距離感測器的一成像感測器的一光軸的一方向中的一移位。
- 如請求項1所述之方法,其中該移動為在平行於該距離感測器的一成像感測器的一光軸的一方向中。
- 如請求項1所述之方法,其中該第一投射點、該第二投射點、與該第三投射點的各別位置,係固定在執行該擷取的一成像感測器的周圍。
- 如請求項1所述之方法,其中該成像感測器包含一對焦功能。
- 如請求項1所述之方法,其中該成像感測器包含一焦長改變功能。
- 一種電腦可讀取儲存裝置,該電腦可讀取儲存裝置儲存複數個指令,該複數個指令在由一處理器執行時使得該處理器執行用於計算對一物件的一距離的作業,該等作業包含:同時啟動一距離感測器的一第一投射點與一第二投射點,以協同將一參考圖案投射入一視野中;啟動該距離感測器的一第三投射點,以將一量測圖案投射入該視野中; 擷取該視野的一影像,其中該物件、該參考圖案、與該量測圖案係可見於該影像中;基於該影像中的該量測圖案的一外觀,計算從該距離感測器至該物件的一距離;基於該影像中的該參考圖案的一外觀,偵測該距離感測器的一鏡頭的一移動;以及基於所偵測到的該移動,調整所計算的該距離。
- 一種用於計算對一物件的一距離的距離感測器,包含:一成像感測器,該成像感測器包含可移動的一鏡頭;一第一投射點與一第二投射點,以協同將一參考圖案投射入一視野中,其中該第一投射點與該第二投射點相對於該成像感測器的各別位置為固定的;一第三投射點,以將一量測圖案投射入該視野中,其中該第三投射點相對於該成像感測器的一位置為固定的;以及電路系統,以基於該成像感測器擷取到的該視野的一影像中的該量測圖案的一外觀,計算從該設備至該視野中的該物件的一距離,以基於該影像中的該參考圖案的一外觀偵測該鏡頭的一移動,並基於所偵測到的該移動調整所計算出的該距離。
Applications Claiming Priority (7)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US201662430998P | 2016-12-07 | 2016-12-07 | |
US62/430,998 | 2016-12-07 | ||
WOPCT/US17/64681 | 2017-12-05 | ||
PCT/US2017/064681 WO2018106671A2 (en) | 2016-12-07 | 2017-12-05 | Distance sensor including adjustable focus imaging sensor |
US15/832,085 US10337860B2 (en) | 2016-12-07 | 2017-12-05 | Distance sensor including adjustable focus imaging sensor |
US15/832,085 | 2017-12-05 | ||
??PCT/US17/64681 | 2017-12-05 |
Publications (2)
Publication Number | Publication Date |
---|---|
TW201830049A TW201830049A (zh) | 2018-08-16 |
TWI758368B true TWI758368B (zh) | 2022-03-21 |
Family
ID=62243302
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
TW106142945A TWI758368B (zh) | 2016-12-07 | 2017-12-07 | 包含可調整焦距成像感測器的距離感測器 |
Country Status (7)
Country | Link |
---|---|
US (2) | US10337860B2 (zh) |
EP (2) | EP3552180B1 (zh) |
JP (3) | JP2020501156A (zh) |
KR (2) | KR102595391B1 (zh) |
CN (2) | CN110178156B (zh) |
TW (1) | TWI758368B (zh) |
WO (2) | WO2018106670A1 (zh) |
Families Citing this family (24)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2020501156A (ja) | 2016-12-07 | 2020-01-16 | マジック アイ インコーポレイテッド | 平行パターンを投射する距離センサ |
CN111164459B (zh) * | 2017-09-28 | 2024-10-11 | 索尼半导体解决方案公司 | 设备和方法 |
JP2020537242A (ja) | 2017-10-08 | 2020-12-17 | マジック アイ インコーポレイテッド | 複数の可動センサを含むセンサシステムの校正 |
KR20200054326A (ko) | 2017-10-08 | 2020-05-19 | 매직 아이 인코포레이티드 | 경도 그리드 패턴을 사용한 거리 측정 |
CN114827573A (zh) | 2018-03-20 | 2022-07-29 | 魔眼公司 | 调整相机曝光以用于三维深度感测和二维成像 |
WO2019182881A1 (en) | 2018-03-20 | 2019-09-26 | Magik Eye Inc. | Distance measurement using projection patterns of varying densities |
JP7292315B2 (ja) | 2018-06-06 | 2023-06-16 | マジック アイ インコーポレイテッド | 高密度投影パターンを使用した距離測定 |
US11911918B2 (en) * | 2018-06-11 | 2024-02-27 | Panasonic Intellectual Property Management Co., Ltd. | Distance-measuring system and distance-measuring method |
US11475584B2 (en) | 2018-08-07 | 2022-10-18 | Magik Eye Inc. | Baffles for three-dimensional sensors having spherical fields of view |
TWI690719B (zh) * | 2018-11-02 | 2020-04-11 | 大陸商光寶電子(廣州)有限公司 | 誤差校正系統及其方法 |
JP7565282B2 (ja) | 2019-01-20 | 2024-10-10 | マジック アイ インコーポレイテッド | 複数個の通過域を有するバンドパスフィルタを備える三次元センサ |
WO2020197813A1 (en) | 2019-03-25 | 2020-10-01 | Magik Eye Inc. | Distance measurement using high density projection patterns |
TWI703400B (zh) * | 2019-04-01 | 2020-09-01 | 中強光電股份有限公司 | 焦距校正方法及投影裝置 |
EP3970362A4 (en) | 2019-05-12 | 2023-06-21 | Magik Eye Inc. | MAPPING THREE-DIMENSIONAL DEPTH MAP DATA TO TWO-DIMENSIONAL IMAGERY |
CN110297251A (zh) * | 2019-06-27 | 2019-10-01 | 杭州一隅千象科技有限公司 | 多台tof实现的大幅面空间覆盖的方法及系统 |
KR102432531B1 (ko) * | 2019-10-23 | 2022-08-18 | 세메스 주식회사 | 액적 검사 모듈 및 액적 검사 방법 |
CN114730010B (zh) | 2019-12-01 | 2024-05-31 | 魔眼公司 | 利用飞行时间信息增强基于三角测量的三维距离测量 |
EP4094181A4 (en) | 2019-12-29 | 2024-04-03 | Magik Eye Inc. | ASSIGNMENT OF THREE-DIMENSIONAL COORDINATES TO TWO-DIMENSIONAL FEATURE POINTS |
CN113124778B (zh) * | 2019-12-30 | 2023-05-16 | 财团法人工业技术研究院 | 轮廓测量系统和轮廓测量方法 |
EP4097681A4 (en) | 2020-01-05 | 2024-05-15 | Magik Eye Inc. | TRANSFER OF THE COORDINATE SYSTEM OF A THREE-DIMENSIONAL CAMERA TO THE IMPACT POINT OF A TWO-DIMENSIONAL CAMERA |
WO2021212297A1 (en) * | 2020-04-21 | 2021-10-28 | Beijing Voyager Technology Co., Ltd. | Systems and methods for distance measurement |
TWI786802B (zh) * | 2021-09-02 | 2022-12-11 | 財團法人中興工程顧問社 | 三維透地雷達的影像解析輔助系統 |
US11360198B1 (en) * | 2021-09-27 | 2022-06-14 | Aeva, Inc. | Optical alignment for beam correction |
CN115047433B (zh) * | 2022-08-16 | 2022-11-01 | 杭州宇称电子技术有限公司 | 用于tof距离量测系统光学自动化调整方法及其应用 |
Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20160327385A1 (en) * | 2015-05-10 | 2016-11-10 | Magik Eye Inc. | Distance sensor |
Family Cites Families (146)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPS59109273A (ja) | 1982-12-15 | 1984-06-23 | Matsushita Electric Ind Co Ltd | 回転塗布装置用ノズル |
JP2504944B2 (ja) * | 1986-02-13 | 1996-06-05 | キヤノン株式会社 | 3次元情報処理方法 |
US4914460A (en) | 1987-05-29 | 1990-04-03 | Harbor Branch Oceanographic Institution Inc. | Apparatus and methods of determining distance and orientation |
US4954962A (en) | 1988-09-06 | 1990-09-04 | Transitions Research Corporation | Visual navigation and obstacle avoidance structured light system |
JPH045112A (ja) | 1990-04-23 | 1992-01-09 | Sumitomo Rubber Ind Ltd | 低転がり抵抗タイヤ |
US5061062A (en) * | 1990-07-02 | 1991-10-29 | General Electric Company | Focus spot size controller for a variable depth range camera |
JP3141681B2 (ja) * | 1994-04-27 | 2001-03-05 | キヤノン株式会社 | 防振機能を有した光学系 |
JPH08555A (ja) | 1994-06-16 | 1996-01-09 | Fuji Photo Optical Co Ltd | 内視鏡の照明装置 |
US5699444A (en) | 1995-03-31 | 1997-12-16 | Synthonics Incorporated | Methods and apparatus for using image data to determine camera location and orientation |
JP3328111B2 (ja) | 1995-08-23 | 2002-09-24 | 日本電気株式会社 | 空間距離測定方法及び空間距離測定装置 |
US6038415A (en) | 1997-07-18 | 2000-03-14 | Minolta Co., Ltd. | Image forming apparatus and image-carrier cartridge device which is employed in the same |
EP0898245B1 (en) | 1997-08-05 | 2004-04-14 | Canon Kabushiki Kaisha | Image processing method and apparatus |
US5980454A (en) | 1997-12-01 | 1999-11-09 | Endonetics, Inc. | Endoscopic imaging system employing diffractive optical elements |
US5870136A (en) | 1997-12-05 | 1999-02-09 | The University Of North Carolina At Chapel Hill | Dynamic generation of imperceptible structured light for tracking and acquisition of three dimensional scene geometry and surface characteristics in interactive three dimensional computer graphics applications |
US7673803B2 (en) | 1998-03-24 | 2010-03-09 | Metrologic Instruments, Inc. | Planar laser illumination and imaging (PLIIM) based engine |
AUPP299498A0 (en) | 1998-04-15 | 1998-05-07 | Commonwealth Scientific And Industrial Research Organisation | Method of tracking and sensing position of objects |
US7193645B1 (en) | 2000-07-27 | 2007-03-20 | Pvi Virtual Media Services, Llc | Video system and method of operating a video system |
JP2002056348A (ja) | 2000-08-07 | 2002-02-20 | Tohken Co Ltd | オートフォーカス機能を有する手持ち式読取装置及びオートフォーカス方法、並び距離計測方法 |
US6937350B2 (en) | 2001-06-29 | 2005-08-30 | Massachusetts Institute Of Technology | Apparatus and methods for optically monitoring thickness |
US7940299B2 (en) | 2001-08-09 | 2011-05-10 | Technest Holdings, Inc. | Method and apparatus for an omni-directional video surveillance system |
JP3975892B2 (ja) * | 2002-05-02 | 2007-09-12 | 富士ゼロックス株式会社 | 位置計測システム |
US20040041996A1 (en) | 2002-08-28 | 2004-03-04 | Fuji Xerox Co., Ltd. | Range finder and method |
GB2395261A (en) | 2002-11-11 | 2004-05-19 | Qinetiq Ltd | Ranging apparatus |
TWI247104B (en) | 2003-02-26 | 2006-01-11 | Hon Hai Prec Ind Co Ltd | A measuring method for pattern of light guide plate |
DE10308383A1 (de) * | 2003-02-27 | 2004-09-16 | Storz Endoskop Produktions Gmbh | Verfahren und optisches System zur Vermessung der Topographie eines Meßobjekts |
JP2005114847A (ja) | 2003-10-03 | 2005-04-28 | Mejiro Precision:Kk | 投影露光装置 |
WO2005076198A1 (en) | 2004-02-09 | 2005-08-18 | Cheol-Gwon Kang | Device for measuring 3d shape using irregular pattern and method for the same |
JP4372643B2 (ja) | 2004-08-24 | 2009-11-25 | 住友大阪セメント株式会社 | 動き検出装置 |
US7191056B2 (en) | 2005-01-04 | 2007-03-13 | The Boeing Company | Precision landmark-aided navigation |
JP2006313116A (ja) | 2005-05-09 | 2006-11-16 | Nec Viewtechnology Ltd | 距離傾斜角度検出装置および該検出装置を備えたプロジェクタ |
JP4644540B2 (ja) * | 2005-06-28 | 2011-03-02 | 富士通株式会社 | 撮像装置 |
US20070091174A1 (en) | 2005-09-30 | 2007-04-26 | Topcon Corporation | Projection device for three-dimensional measurement, and three-dimensional measurement system |
JP4760391B2 (ja) | 2006-01-13 | 2011-08-31 | カシオ計算機株式会社 | 測距装置及び測距方法 |
JP4799216B2 (ja) | 2006-03-03 | 2011-10-26 | 富士通株式会社 | 距離測定機能を有する撮像装置 |
US7375803B1 (en) | 2006-05-18 | 2008-05-20 | Canesta, Inc. | RGBZ (red, green, blue, z-depth) filter system usable with sensor systems, including sensor systems with synthetic mirror enhanced three-dimensional imaging |
JP4889373B2 (ja) | 2006-05-24 | 2012-03-07 | ローランドディー.ジー.株式会社 | 3次元形状測定方法およびその装置 |
US8471892B2 (en) | 2006-11-23 | 2013-06-25 | Z. Jason Geng | Wide field-of-view reflector and method of designing and making same |
JP2010048553A (ja) * | 2006-12-19 | 2010-03-04 | Panasonic Corp | 複眼測距装置の検査方法およびそれに用いるチャート |
TWI320480B (en) | 2007-04-23 | 2010-02-11 | Univ Nat Formosa | One diffraction 6 degree of freedom optoelectronic measurement system |
US8282485B1 (en) | 2008-06-04 | 2012-10-09 | Zhang Evan Y W | Constant and shadowless light source |
WO2010006081A1 (en) | 2008-07-08 | 2010-01-14 | Chiaro Technologies, Inc. | Multiple channel locating |
US8334900B2 (en) | 2008-07-21 | 2012-12-18 | The Hong Kong University Of Science And Technology | Apparatus and method of optical imaging for medical diagnosis |
JP2010091855A (ja) | 2008-10-09 | 2010-04-22 | Denso Corp | レーザビーム照射装置 |
JP5251419B2 (ja) | 2008-10-22 | 2013-07-31 | 日産自動車株式会社 | 距離計測装置および距離計測方法 |
CN101794065A (zh) | 2009-02-02 | 2010-08-04 | 中强光电股份有限公司 | 投影显示系统 |
US20100223706A1 (en) | 2009-03-03 | 2010-09-09 | Illinois Tool Works Inc. | Welding helmet audio communication systems and methods with bone conduction transducers |
JP5484098B2 (ja) | 2009-03-18 | 2014-05-07 | 三菱電機株式会社 | 投写光学系及び画像表示装置 |
JP4991787B2 (ja) | 2009-04-24 | 2012-08-01 | パナソニック株式会社 | 反射型光電センサ |
GB0921461D0 (en) | 2009-12-08 | 2010-01-20 | Qinetiq Ltd | Range based sensing |
US8320621B2 (en) | 2009-12-21 | 2012-11-27 | Microsoft Corporation | Depth projector system with integrated VCSEL array |
US20110188054A1 (en) | 2010-02-02 | 2011-08-04 | Primesense Ltd | Integrated photonics module for optical projection |
JP5499985B2 (ja) | 2010-08-09 | 2014-05-21 | ソニー株式会社 | 表示装置組立体 |
US8964189B2 (en) | 2010-08-19 | 2015-02-24 | Canon Kabushiki Kaisha | Three-dimensional measurement apparatus, method for three-dimensional measurement, and computer program |
JP5163713B2 (ja) | 2010-08-24 | 2013-03-13 | カシオ計算機株式会社 | 距離画像センサ及び距離画像生成装置並びに距離画像データ取得方法及び距離画像生成方法 |
US8830637B2 (en) | 2010-08-31 | 2014-09-09 | Texas Instruments Incorporated | Methods and apparatus to clamp overvoltages for alternating current systems |
US20120056982A1 (en) | 2010-09-08 | 2012-03-08 | Microsoft Corporation | Depth camera based on structured light and stereo vision |
US8593535B2 (en) | 2010-09-10 | 2013-11-26 | Apple Inc. | Relative positioning of devices based on captured images of tags |
EP2433716A1 (en) | 2010-09-22 | 2012-03-28 | Hexagon Technology Center GmbH | Surface spraying device with a nozzle control mechanism and a corresponding method |
JP5595211B2 (ja) | 2010-10-12 | 2014-09-24 | キヤノン株式会社 | 三次元形状測定装置、三次元形状測定方法及びコンピュータプログラム |
TWI428558B (zh) * | 2010-11-10 | 2014-03-01 | Pixart Imaging Inc | 測距方法、測距系統與其處理軟體 |
JP5815940B2 (ja) | 2010-12-15 | 2015-11-17 | キヤノン株式会社 | 距離計測装置、距離計測方法、およびプログラム |
US9888225B2 (en) | 2011-02-04 | 2018-02-06 | Koninklijke Philips N.V. | Method of recording an image and obtaining 3D information from the image, camera system |
JP5746529B2 (ja) | 2011-03-16 | 2015-07-08 | キヤノン株式会社 | 三次元距離計測装置、三次元距離計測方法、およびプログラム |
EP2685811B1 (en) | 2011-03-17 | 2016-03-02 | Mirobot Ltd. | System and method for three dimensional teat modeling for use with a milking system |
JP2014122789A (ja) | 2011-04-08 | 2014-07-03 | Sanyo Electric Co Ltd | 情報取得装置、投射装置および物体検出装置 |
US8655094B2 (en) * | 2011-05-11 | 2014-02-18 | The United States Of America As Represented By The Administrator Of The National Aeronautics And Space Administration | Photogrammetry system and method for determining relative motion between two bodies |
JP5830270B2 (ja) | 2011-05-24 | 2015-12-09 | オリンパス株式会社 | 内視鏡装置および計測方法 |
CA2835306C (en) | 2011-06-07 | 2016-11-15 | Creaform Inc. | Sensor positioning for 3d scanning |
KR101974651B1 (ko) | 2011-06-22 | 2019-05-02 | 성균관대학교산학협력단 | 경계선 상속을 통하여 계층적으로 직교화된 구조광을 디코딩하는 방법 및 이를 이용하는 3차원 거리 영상 측정 시스템 |
US10054430B2 (en) | 2011-08-09 | 2018-08-21 | Apple Inc. | Overlapping pattern projector |
JP2014238259A (ja) | 2011-09-28 | 2014-12-18 | 三洋電機株式会社 | 情報取得装置および物体検出装置 |
KR101605224B1 (ko) | 2011-10-05 | 2016-03-22 | 한국전자통신연구원 | 패턴 광을 이용한 깊이 정보 획득 장치 및 방법 |
DE102012108567B4 (de) | 2011-10-05 | 2017-04-27 | Electronics And Telecommunications Research Institute | Verfahren zum Erlangen von Tiefeninformationen unter Verwendung eines Lichtmusters |
TW201329509A (zh) | 2012-01-10 | 2013-07-16 | Walsin Lihwa Corp | 立體掃瞄裝置及其立體掃瞄方法 |
US9986208B2 (en) | 2012-01-27 | 2018-05-29 | Qualcomm Incorporated | System and method for determining location of a device using opposing cameras |
CN104254768A (zh) | 2012-01-31 | 2014-12-31 | 3M创新有限公司 | 用于测量表面的三维结构的方法和设备 |
EP2821748B1 (en) | 2012-03-01 | 2019-07-31 | Nissan Motor Co., Ltd | Range finding device and range finding method |
KR101630558B1 (ko) | 2012-03-28 | 2016-06-14 | 후지쯔 가부시끼가이샤 | 촬상 장치 |
US9590122B2 (en) | 2012-05-18 | 2017-03-07 | Siemens Healthcare Diagnostics Inc. | Fish eye lens analyzer |
US8699005B2 (en) * | 2012-05-27 | 2014-04-15 | Planitar Inc | Indoor surveying apparatus |
DK2872030T3 (en) | 2012-07-10 | 2017-03-06 | Wavelight Gmbh | METHOD AND APPARATUS FOR DETERMINING THE OPTICAL ABERRATIONS OF AN EYE |
US20140016113A1 (en) | 2012-07-13 | 2014-01-16 | Microsoft Corporation | Distance sensor using structured light |
JP2014020978A (ja) | 2012-07-20 | 2014-02-03 | Fujitsu Ltd | 照射装置、距離測定装置、照射装置のキャリブレーションプログラム及びキャリブレーション方法 |
US8576390B1 (en) * | 2012-07-31 | 2013-11-05 | Cognex Corporation | System and method for determining and controlling focal distance in a vision system camera |
EP2696590B1 (en) * | 2012-08-06 | 2014-09-24 | Axis AB | Image sensor positioning apparatus and method |
JP2014044113A (ja) | 2012-08-27 | 2014-03-13 | Sanyo Electric Co Ltd | 情報取得装置および物体検出装置 |
US9741184B2 (en) | 2012-10-14 | 2017-08-22 | Neonode Inc. | Door handle with optical proximity sensors |
CN104884862B (zh) | 2012-10-24 | 2019-11-19 | 视瑞尔技术公司 | 照明设备 |
US9285893B2 (en) | 2012-11-08 | 2016-03-15 | Leap Motion, Inc. | Object detection and tracking with variable-field illumination devices |
JP6241793B2 (ja) | 2012-12-20 | 2017-12-06 | パナソニックIpマネジメント株式会社 | 3次元測定装置および3次元測定方法 |
US10466359B2 (en) | 2013-01-01 | 2019-11-05 | Inuitive Ltd. | Method and system for light patterning and imaging |
US9691163B2 (en) | 2013-01-07 | 2017-06-27 | Wexenergy Innovations Llc | System and method of measuring distances related to an object utilizing ancillary objects |
US8768559B1 (en) | 2013-01-22 | 2014-07-01 | Qunomic Virtual Technology, LLC | Line projection system |
US9142019B2 (en) | 2013-02-28 | 2015-09-22 | Google Technology Holdings LLC | System for 2D/3D spatial feature processing |
US10105149B2 (en) | 2013-03-15 | 2018-10-23 | Board Of Regents Of The University Of Nebraska | On-board tool tracking system and methods of computer assisted surgery |
US9364167B2 (en) | 2013-03-15 | 2016-06-14 | Lx Medical Corporation | Tissue imaging and image guidance in luminal anatomic structures and body cavities |
US20140320605A1 (en) | 2013-04-25 | 2014-10-30 | Philip Martin Johnson | Compound structured light projection system for 3-D surface profiling |
KR102088280B1 (ko) * | 2013-07-16 | 2020-04-14 | 엘지이노텍 주식회사 | 깊이 정보 추출 장치 및 방법 |
JP6211876B2 (ja) * | 2013-10-01 | 2017-10-11 | 株式会社トプコン | 測定方法及び測定装置 |
CN103559735B (zh) | 2013-11-05 | 2017-03-01 | 重庆安钻理科技股份有限公司 | 一种三维重建方法及系统 |
WO2015103595A1 (en) | 2014-01-06 | 2015-07-09 | Eyelock, Inc. | Methods and apparatus for repetitive iris recognition |
GB2522248A (en) | 2014-01-20 | 2015-07-22 | Promethean Ltd | Interactive system |
KR102166691B1 (ko) | 2014-02-27 | 2020-10-16 | 엘지전자 주식회사 | 객체의 3차원 형상을 산출하는 장치 및 방법 |
US9526427B2 (en) | 2014-03-21 | 2016-12-27 | Hypermed Imaging, Inc. | Compact light sensors with symmetrical lighting |
US9307231B2 (en) | 2014-04-08 | 2016-04-05 | Lucasfilm Entertainment Company Ltd. | Calibration target for video processing |
WO2015166915A1 (ja) * | 2014-04-30 | 2015-11-05 | シナノケンシ株式会社 | 計測装置 |
JP5829306B2 (ja) | 2014-05-12 | 2015-12-09 | ファナック株式会社 | レンジセンサの配置位置評価装置 |
US10207193B2 (en) | 2014-05-21 | 2019-02-19 | Universal City Studios Llc | Optical tracking system for automation of amusement park elements |
US9699393B2 (en) | 2014-06-26 | 2017-07-04 | Semiconductor Components Industries, Llc | Imaging systems for infrared and visible imaging with patterned infrared cutoff filters |
KR20160020323A (ko) | 2014-08-13 | 2016-02-23 | 옥은호 | 평행 적외선 투사기와 카메라 모듈로 구성되는 거리 측정 센서 |
JP6370177B2 (ja) | 2014-09-05 | 2018-08-08 | 株式会社Screenホールディングス | 検査装置および検査方法 |
JP6648147B2 (ja) * | 2014-10-24 | 2020-02-14 | マジック アイ インコーポレイテッド | 距離センサ |
EP3167430A4 (en) | 2014-11-04 | 2017-08-16 | SZ DJI Technology Co., Ltd. | Camera calibration |
US20160128553A1 (en) | 2014-11-07 | 2016-05-12 | Zheng Jason Geng | Intra- Abdominal Lightfield 3D Endoscope and Method of Making the Same |
EP3229668A4 (en) | 2014-12-08 | 2018-07-11 | Luis Daniel Munoz | Device, system and methods for assessing tissue structures, pathology, and healing |
KR102369792B1 (ko) | 2015-03-05 | 2022-03-03 | 한화테크윈 주식회사 | 촬영 장치 및 촬영 방법 |
JP6484072B2 (ja) | 2015-03-10 | 2019-03-13 | アルプスアルパイン株式会社 | 物体検出装置 |
JP6340477B2 (ja) | 2015-03-26 | 2018-06-06 | 富士フイルム株式会社 | 距離画像取得装置及び距離画像取得方法 |
WO2016157593A1 (ja) | 2015-03-27 | 2016-10-06 | 富士フイルム株式会社 | 距離画像取得装置及び距離画像取得方法 |
US10215557B2 (en) | 2015-03-30 | 2019-02-26 | Fujifilm Corporation | Distance image acquisition apparatus and distance image acquisition method |
US9694498B2 (en) | 2015-03-30 | 2017-07-04 | X Development Llc | Imager for detecting visual light and projected patterns |
US10488192B2 (en) | 2015-05-10 | 2019-11-26 | Magik Eye Inc. | Distance sensor projecting parallel patterns |
WO2016194018A1 (ja) | 2015-05-29 | 2016-12-08 | オリンパス株式会社 | 照明装置及び計測装置 |
KR20170005649A (ko) | 2015-07-06 | 2017-01-16 | 엘지전자 주식회사 | 3차원 깊이 카메라 모듈 및 이를 구비하는 이동 단말기 |
DE102015115011A1 (de) | 2015-09-08 | 2017-03-09 | Valeo Schalter Und Sensoren Gmbh | Laserscanner für Kraftfahrzeuge |
US10176554B2 (en) | 2015-10-05 | 2019-01-08 | Google Llc | Camera calibration using synthetic images |
JP6597150B2 (ja) | 2015-10-09 | 2019-10-30 | 富士通株式会社 | 距離測定装置、距離測定方法、距離測定プログラムおよびテーブルの作成方法 |
FR3042610B1 (fr) | 2015-10-14 | 2018-09-07 | Quantificare | Dispositif et procede pour reconstruire en trois dimensions la tete et le corps |
DE112015007146T5 (de) | 2015-11-25 | 2018-08-02 | Mitsubishi Electric Corporation | Vorrichtung und verfahren zur dreidimensionalen bildmessung |
KR20170094968A (ko) | 2016-02-12 | 2017-08-22 | 엘지이노텍 주식회사 | 피사체 거리 측정 부재, 이를 갖는 카메라 모듈 |
US11030775B2 (en) | 2016-03-17 | 2021-06-08 | Flir Systems, Inc. | Minimal user input video analytics systems and methods |
CN113727000A (zh) | 2016-05-27 | 2021-11-30 | 松下知识产权经营株式会社 | 摄像系统 |
US9686539B1 (en) | 2016-06-12 | 2017-06-20 | Apple Inc. | Camera pair calibration using non-standard calibration objects |
JP2020501156A (ja) | 2016-12-07 | 2020-01-16 | マジック アイ インコーポレイテッド | 平行パターンを投射する距離センサ |
US20180227566A1 (en) | 2017-02-06 | 2018-08-09 | Microsoft Technology Licensing, Llc | Variable field of view and directional sensors for mobile machine vision applications |
US11025887B2 (en) | 2017-02-27 | 2021-06-01 | Sony Corporation | Field calibration of stereo cameras with a projector |
US10769914B2 (en) | 2017-06-07 | 2020-09-08 | Amazon Technologies, Inc. | Informative image data generation using audio/video recording and communication devices |
JP2020537242A (ja) | 2017-10-08 | 2020-12-17 | マジック アイ インコーポレイテッド | 複数の可動センサを含むセンサシステムの校正 |
KR20200054326A (ko) | 2017-10-08 | 2020-05-19 | 매직 아이 인코포레이티드 | 경도 그리드 패턴을 사용한 거리 측정 |
US10679076B2 (en) | 2017-10-22 | 2020-06-09 | Magik Eye Inc. | Adjusting the projection system of a distance sensor to optimize a beam layout |
WO2019182881A1 (en) | 2018-03-20 | 2019-09-26 | Magik Eye Inc. | Distance measurement using projection patterns of varying densities |
CN114827573A (zh) | 2018-03-20 | 2022-07-29 | 魔眼公司 | 调整相机曝光以用于三维深度感测和二维成像 |
JP7292315B2 (ja) | 2018-06-06 | 2023-06-16 | マジック アイ インコーポレイテッド | 高密度投影パターンを使用した距離測定 |
US11475584B2 (en) | 2018-08-07 | 2022-10-18 | Magik Eye Inc. | Baffles for three-dimensional sensors having spherical fields of view |
WO2020117785A1 (en) | 2018-12-08 | 2020-06-11 | Magik Eye Inc. | Vertical cavity surface emitting laser-based projector |
JP7565282B2 (ja) | 2019-01-20 | 2024-10-10 | マジック アイ インコーポレイテッド | 複数個の通過域を有するバンドパスフィルタを備える三次元センサ |
-
2017
- 2017-12-05 JP JP2019530764A patent/JP2020501156A/ja active Pending
- 2017-12-05 WO PCT/US2017/064680 patent/WO2018106670A1/en unknown
- 2017-12-05 EP EP17877506.0A patent/EP3552180B1/en active Active
- 2017-12-05 CN CN201780075861.8A patent/CN110178156B/zh active Active
- 2017-12-05 CN CN201780075906.1A patent/CN110234955B/zh active Active
- 2017-12-05 US US15/832,085 patent/US10337860B2/en active Active
- 2017-12-05 KR KR1020197019486A patent/KR102595391B1/ko active IP Right Grant
- 2017-12-05 KR KR1020197019478A patent/KR102543275B1/ko active IP Right Grant
- 2017-12-05 WO PCT/US2017/064681 patent/WO2018106671A2/en unknown
- 2017-12-05 EP EP17877786.8A patent/EP3551965A4/en active Pending
- 2017-12-05 JP JP2019530738A patent/JP7133554B2/ja active Active
- 2017-12-07 TW TW106142945A patent/TWI758368B/zh active
-
2019
- 2019-07-02 US US16/460,685 patent/US11002537B2/en active Active
-
2022
- 2022-01-28 JP JP2022011648A patent/JP2022050708A/ja active Pending
Patent Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20160327385A1 (en) * | 2015-05-10 | 2016-11-10 | Magik Eye Inc. | Distance sensor |
Also Published As
Publication number | Publication date |
---|---|
KR102543275B1 (ko) | 2023-06-16 |
US10337860B2 (en) | 2019-07-02 |
CN110178156B (zh) | 2023-11-14 |
US20180156609A1 (en) | 2018-06-07 |
CN110234955B (zh) | 2022-03-29 |
EP3552180B1 (en) | 2022-01-26 |
WO2018106671A9 (en) | 2018-07-19 |
KR20190085150A (ko) | 2019-07-17 |
WO2018106671A3 (en) | 2018-08-16 |
WO2018106670A1 (en) | 2018-06-14 |
CN110234955A (zh) | 2019-09-13 |
US20200003556A1 (en) | 2020-01-02 |
WO2018106671A2 (en) | 2018-06-14 |
JP2020501155A (ja) | 2020-01-16 |
EP3552180A2 (en) | 2019-10-16 |
TW201830049A (zh) | 2018-08-16 |
EP3551965A4 (en) | 2020-08-05 |
JP7133554B2 (ja) | 2022-09-08 |
JP2020501156A (ja) | 2020-01-16 |
KR102595391B1 (ko) | 2023-10-31 |
US11002537B2 (en) | 2021-05-11 |
JP2022050708A (ja) | 2022-03-30 |
KR20190085151A (ko) | 2019-07-17 |
EP3552180A4 (en) | 2020-07-29 |
EP3551965A1 (en) | 2019-10-16 |
CN110178156A (zh) | 2019-08-27 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
TWI758368B (zh) | 包含可調整焦距成像感測器的距離感測器 | |
CN107850420B (zh) | 距离传感器 | |
CN107407553B (zh) | 距离传感器 | |
US10488192B2 (en) | Distance sensor projecting parallel patterns | |
KR102288574B1 (ko) | 깊이 정보 결정을 위한 다중 이미터 조명 | |
US10867407B2 (en) | System and methods for extrinsic calibration of cameras and diffractive optical elements | |
US8860930B2 (en) | Three dimensional surface mapping system using optical flow | |
KR20080111474A (ko) | 스페클 패턴을 이용한 3차원 센싱 | |
US20170186167A1 (en) | Stereodepth camera using vcsel projector with controlled projection lens | |
TWI672481B (zh) | 結構光投影機及三維影像感測模組 | |
CN109945840B (zh) | 三维影像摄取方法及系统 | |
TWI758367B (zh) | 投射平行圖案的距離感應器 | |
Chendeb et al. | Calibration of a moving zoom-lens camera for augmented reality applications | |
US10670877B1 (en) | Method of precisely comparing and positioning speckle patterns | |
KR20190136592A (ko) | 다수 조명을 이용한 3차원 데이터 획득 방법 및 장치 |