CN111693254B - 车载镜头偏移检测方法与车载镜头偏移检测系统 - Google Patents

车载镜头偏移检测方法与车载镜头偏移检测系统 Download PDF

Info

Publication number
CN111693254B
CN111693254B CN201910292857.8A CN201910292857A CN111693254B CN 111693254 B CN111693254 B CN 111693254B CN 201910292857 A CN201910292857 A CN 201910292857A CN 111693254 B CN111693254 B CN 111693254B
Authority
CN
China
Prior art keywords
image
preset
characteristic point
feature
point
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201910292857.8A
Other languages
English (en)
Other versions
CN111693254A (zh
Inventor
翁正声
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Wistron Corp
Original Assignee
Wistron Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Wistron Corp filed Critical Wistron Corp
Publication of CN111693254A publication Critical patent/CN111693254A/zh
Application granted granted Critical
Publication of CN111693254B publication Critical patent/CN111693254B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01M—TESTING STATIC OR DYNAMIC BALANCE OF MACHINES OR STRUCTURES; TESTING OF STRUCTURES OR APPARATUS, NOT OTHERWISE PROVIDED FOR
    • G01M11/00—Testing of optical apparatus; Testing structures by optical methods not otherwise provided for
    • G01M11/02—Testing optical properties
    • G01M11/0221—Testing optical properties by determining the optical axis or position of lenses
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R1/00—Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/02—Rear-view mirror arrangements
    • B60R1/08—Rear-view mirror arrangements involving special optical features, e.g. avoiding blind spots, e.g. convex mirrors; Side-by-side associations of rear-view and other mirrors
    • B60R1/081—Rear-view mirror arrangements involving special optical features, e.g. avoiding blind spots, e.g. convex mirrors; Side-by-side associations of rear-view and other mirrors avoiding blind spots, e.g. by using a side-by-side association of mirrors
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R1/00—Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/12—Mirror assemblies combined with other articles, e.g. clocks
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R1/00—Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/20—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/22—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle
    • B60R1/23—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view
    • B60R1/26—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view to the rear of the vehicle
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R11/00—Arrangements for holding or mounting articles, not otherwise provided for
    • B60R11/02—Arrangements for holding or mounting articles, not otherwise provided for for radio sets, television sets, telephones, or the like; Arrangement of controls thereof
    • B60R11/0229—Arrangements for holding or mounting articles, not otherwise provided for for radio sets, television sets, telephones, or the like; Arrangement of controls thereof for displays, e.g. cathodic tubes
    • B60R11/0235—Arrangements for holding or mounting articles, not otherwise provided for for radio sets, television sets, telephones, or the like; Arrangement of controls thereof for displays, e.g. cathodic tubes of flat type, e.g. LCD
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R11/00—Arrangements for holding or mounting articles, not otherwise provided for
    • B60R11/04—Mounting of cameras operative during drive; Arrangement of controls thereof relative to the vehicle
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01M—TESTING STATIC OR DYNAMIC BALANCE OF MACHINES OR STRUCTURES; TESTING OF STRUCTURES OR APPARATUS, NOT OTHERWISE PROVIDED FOR
    • G01M11/00—Testing of optical apparatus; Testing structures by optical methods not otherwise provided for
    • G01M11/02—Testing optical properties
    • G01M11/0207—Details of measuring devices
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01M—TESTING STATIC OR DYNAMIC BALANCE OF MACHINES OR STRUCTURES; TESTING OF STRUCTURES OR APPARATUS, NOT OTHERWISE PROVIDED FOR
    • G01M11/00—Testing of optical apparatus; Testing structures by optical methods not otherwise provided for
    • G01M11/02—Testing optical properties
    • G01M11/0242—Testing optical properties by measuring geometrical properties or aberrations
    • G01M11/0257—Testing optical properties by measuring geometrical properties or aberrations by analyzing the image formed by the object to be tested
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00—Image enhancement or restoration
    • G06T5/50—Image enhancement or restoration using two or more images, e.g. averaging or subtraction
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/10—Segmentation; Edge detection
    • G06T7/11—Region-based segmentation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/10—Segmentation; Edge detection
    • G06T7/174—Segmentation; Edge detection involving the use of two or more images
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/70—Determining position or orientation of objects or cameras
    • G06T7/73—Determining position or orientation of objects or cameras using feature-based methods
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/80—Analysis of captured images to determine intrinsic or extrinsic camera parameters, i.e. camera calibration
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/80—Analysis of captured images to determine intrinsic or extrinsic camera parameters, i.e. camera calibration
    • G06T7/85—Stereo camera calibration
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/40—Extraction of image or video features
    • G06V10/44—Local feature extraction by analysis of parts of the pattern, e.g. by detecting edges, contours, loops, corners, strokes or intersections; Connectivity analysis, e.g. of connected components
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/50—Context or environment of the image
    • G06V20/56—Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/50—Context or environment of the image
    • G06V20/56—Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
    • G06V20/58—Recognition of moving objects or obstacles, e.g. vehicles or pedestrians; Recognition of traffic objects, e.g. traffic signs, traffic lights or roads
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/698—Control of cameras or camera modules for achieving an enlarged field of view, e.g. panoramic image capture
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/90—Arrangement of cameras or camera modules, e.g. multiple cameras in TV studios or sports stadiums
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R1/00—Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/12—Mirror assemblies combined with other articles, e.g. clocks
    • B60R2001/1215—Mirror assemblies combined with other articles, e.g. clocks with information displays
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/10—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of camera system used
    • B60R2300/105—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of camera system used using multiple cameras
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/30—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing
    • B60R2300/303—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing using joined images, e.g. multiple camera images
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/30—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing
    • B60R2300/304—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing using merged images, e.g. merging camera image with stored images
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/40—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the details of the power supply or the coupling to vehicle components
    • B60R2300/402—Image calibration
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/80—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement
    • B60R2300/802—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement for monitoring and displaying vehicle exterior blind spot views
    • B60R2300/8026—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement for monitoring and displaying vehicle exterior blind spot views in addition to a rear-view mirror system
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/80—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement
    • B60R2300/8066—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement for monitoring rearward traffic
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10016—Video; Image sequence
    • G06T2207/10021—Stereoscopic video; Stereoscopic image sequence
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/20—Special algorithmic details
    • G06T2207/20212—Image combination
    • G06T2207/20221—Image fusion; Image merging
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30248—Vehicle exterior or interior
    • G06T2207/30252—Vehicle exterior; Vicinity of vehicle
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30248—Vehicle exterior or interior
    • G06T2207/30252—Vehicle exterior; Vicinity of vehicle
    • G06T2207/30261—Obstacle

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Mechanical Engineering (AREA)
  • Analytical Chemistry (AREA)
  • Chemical & Material Sciences (AREA)
  • Signal Processing (AREA)
  • Geometry (AREA)
  • Image Processing (AREA)
  • Studio Devices (AREA)
  • Image Analysis (AREA)
  • Closed-Circuit Television Systems (AREA)

Abstract

一种车载镜头偏移检测方法与车载镜头偏移检测系统。第一图像撷取装置与第二图像撷取装置设置于一车辆上，所述方法包括：利用第一图像撷取装置撷取第一图像，以及利用第二图像撷取装置撷取第二图像；依据多个第一预设位置从第一图像取得多个第一特征点，以及依据多个第二预设位置从第二图像取得多个第二特征点；比对第一特征点的特征值与第二特征点的特征值，而判断第一特征点是否吻合第二特征点；以及反应于第一特征点不吻合第二特征点，执行校正警示操作，可以低运算量即时检测出设置于车辆上的车载镜头是否发生偏移，从而提高行车安全。

Description

车载镜头偏移检测方法与车载镜头偏移检测系统
技术领域
本发明是有关于一种车载镜头偏移检测方法与车载镜头偏移检测系统，且特别是有关于一种基于图像处理技术的车载镜头偏移检测方法与系统。
背景技术
驾驶车辆时，车内后视镜为驾驶者观察后方交通状况的一种重要工具。由于是利用反光镜的原理将后端图像反映至驾驶者的眼中，在后方车辆开启大灯时，可能产生视线不明或眩光的问题。此外，驾驶也可能因为车内物件的阻挡或气候环境因素而无法通过后视镜清楚观察后方交通状况。因此，近来有人提出以电子后视镜(e-mirror)取代传统后视镜的构想。现行的电子后视镜是于后视镜中设置显示模组，使后视镜能藉由显示模组显示由图像撷取装置所撷取的路况画面。
电子后视镜相较于传统不具显示模组的后视镜可具有更广的视野。原因在于，电子后视镜的显示图像可以是基于对多张图像进行图像拼接而产生，而这些图像是分别由设置于不同位置的多个镜头撷取而得，因而可以消除传统后视镜的盲区。然而，当用以撷取图像的镜头发生位移或旋转时，进行图像拼接而产生的图像可能有扭曲或变形的情况，而驾驶将可能因为电子后视镜显示扭曲或变形的图像内容而造成行车危险。
发明内容
有鉴于此，本发明提供一种车载镜头偏移检测方法与偏移检测系统，其可用以检测车载镜头是否偏移而提高行车安全。
本发明提出一种车载镜头偏移检测方法，其中第一图像撷取装置与第二图像撷取装置设置于一车辆上，所述方法包括：利用第一图像撷取装置撷取第一图像，以及利用第二图像撷取装置撷取第二图像；依据多个第一预设位置从第一图像取得多个第一特征点，以及依据多个第二预设位置从第二图像取得多个第二特征点；比对第一特征点的特征值与第二特征点的特征值，而判断第一特征点是否吻合第二特征点；以及反应于第一特征点不吻合第二特征点，执行校正警示操作。
从另一观点来看，本发明提出一种车载镜头偏移检测系统，设置于一车辆上，并包括：第一图像撷取装置、第二图像撷取装置、储存电路，以及一处理器。储存电路储存多个模组。处理器耦接储存电路、第一图像撷取装置，以及第二图像撷取装置，并存取上述模组以执行下列步骤：利用第一图像撷取装置撷取第一图像，以及利用第二图像撷取装置撷取第二图像；依据多个第一预设位置从第一图像取得多个第一特征点，以及依据多个第二预设位置从第二图像取得多个第二特征点；比对第一特征点的特征值与第二特征点的特征值，而判断第一特征点是否吻合第二特征点；以及反应于第一特征点不吻合第二特征点，执行校正警示操作。
基于上述，本发明实施例可以低运算量即时检测出设置于车辆上的车载镜头是否发生偏移，从而提高行车安全。除此之外，本发明实施例的偏移检测方法与系统更可于车载镜头已发生偏移时执行对应的校正警示操作，避免电子后视镜显示扭曲或变形的图像。
为让本发明的上述特征和优点能更明显易懂，下文特举实施例，并配合所附图式作详细说明如下。
附图说明
图1是依照本发明一实施例所绘示的车载镜头偏移检测系统的示意图。
图2为依照本发明所绘示的一种应用情景的范例示意图。
图3为依照本发明所绘示的一种应用情景的范例示意图。
图4是依照本发明一实施例所绘示的车载镜头偏移检测方法的流程图。
图5是依照本发明一实施例所绘示的车载镜头偏移检测方法的流程图。
图6为依照本发明一实施例所绘示的第一图像与第二图像的示意图。
图7是依照本发明实施例所绘示的取得第一预设位置与第二预设位置的方法的流程图。
图8为依照本发明一实施例所绘示的校正画面的示意图。
图9为依照本发明一实施例所绘示的第一图像与第二图像的示意图。
附图标号：
100：车载镜头偏移检测系统
101：第一图像撷取装置
102：第二图像撷取装置
103：储存电路
104：处理器
105：显示装置
106：第三图像撷取装置
C1：车辆
Img-B：后视图像
Img-L：左侧图像
Img-R：右侧图像
P4～P6：第一特征点
P1～P3：第二特征点
S401～S406、S501～S509、S701～S703：步骤
Q1～Q3：第一标记点
Q4～Q6：第二标记点
X1～X3：第一预设位置
X4～X6：第二预设位置
B1：第一图像区块
B2：第二图像区块
M1～M3：校正点
具体实施方式
本发明的部份实施例接下来将会配合附图来详细描述，以下的描述所引用的元件符号，当不同附图出现相同的元件符号将视为相同或相似的元件。这些实施例只是本发明的一部份，并未揭示所有本发明的可实施方式。更确切的说，这些实施例只是本发明的专利申请范围中的车载镜头偏移检测方法与系统的范例。
图1是依照本发明一实施例所绘示的车载镜头偏移检测系统的示意图。请参照图1，车载镜头偏移检测系统100适于设置于一车辆上，并包括第一图像撷取装置101、第二图像撷取装置102、第三图像撷取装置106、储存电路103、处理器104，以及显示装置105。
第一图像撷取装置101、第二图像撷取装置102与第三图像撷取装置106设置于车辆上，例如是具有车载镜头、电荷耦合元件(Charge Coupled Device，CCD)或互补型金属氧化物半导体(Complementary Metal-Oxide Semiconductor，CMOS)元件的图像感测器，用以撷取车辆四周的图像。需说明的是，第一图像撷取装置101的拍摄视角与第二图像撷取装置102的拍摄视角有部份重叠，因而可撷取或是拼接重复的场景内容。于另一实施例中，第一图像撷取装置101的拍摄视角与第三图像撷取装置106的拍摄视角有部份重叠，因而可撷取或是拼接重复的场景内容。此外，车辆上图像撷取装置的数量可视实际应用而变更，在此并不设限。
图2为依照本发明所绘示的一种应用情景的范例示意图。请参照图2，第一图像撷取装置101可以设置于车辆C1的后方，以朝车辆后方撷取后视图像。第二图像撷取装置102可以设置于车辆C1的左侧后视镜上，以朝车辆左侧撷取左侧图像。第一图像撷取装置101所撷取的后视图像与第二图像撷取装置102所撷取的左侧图像至少一部分重叠。相似的，第三图像撷取装置106可以设置于车辆C1的右侧后视镜上，以朝车辆右侧撷取右侧图像。第一图像撷取装置101所撷取的后视图像与第三图像撷取装置106所撷取的右侧图像至少一部分重叠。需说明的是，为清楚说明本发明，后续实施例将以图2的配置为例进行说明，但本发明并不以此为限。
储存电路103例如是任意型式的固定式或可移动式随机存取存储器(RandomAccess Memory，RAM)、只读存储器(Read-Only Memory，ROM)、快闪存储器(Flash memory)、硬盘或其他类似装置或这些装置的组合，而可用以记录多个程序码或模组。
处理器104耦接于储存电路103、第一图像撷取装置101、第二图像撷取装置102、第三图像撷取装置106，以及显示装置105，并可为一般用途处理器、特殊用途处理器、传统的处理器、数字信号处理器、多个微处理器(microprocessor)、一个或多个结合数字信号处理器核心的微处理器、控制器、微控制器、特殊应用集成电路(Application SpecificIntegrated Circuit，ASIC)、现场可编程门阵列(Field Programmable Gate Array，FPGA)、任何其他种类的集成电路、状态机、基于进阶精简指令集机器(Advanced RISCMachine，ARM)的处理器以及类似品。在本发明的实施例中，处理器104可载入储存电路103中所记录的程序码或模组以执行本发明提出的车载镜头偏移检测方法，后续将搭配流程图作进一步说明。
显示装置105例如是液晶显示器(Liquid Crystal Display，LCD)、发光二极管(Light-Emitting Diode，LED)显示器或其他种类的显示器，用以显示画面给车辆的驾驶，在此并不设限。
值得一提的是，于一实施例中，显示装置105可以与一镜体实施为电子后视镜。当显示装置105的背光模组开启时，电子后视镜可依据第一图像撷取装置101、第二图像撷取装置102与第三图像撷取装置106撷取的图像内容显示路况画面。当显示装置105的背光模组关闭时，电子后视镜可作为一般传统后视镜。
于一实施例中，处理器104可对第一图像撷取装置101、第二图像撷取装置102与第三图像撷取装置106所撷取的图像进行图像拼接功能而产生可视范围更大的缝合图像，并控制电子后视镜显示此缝合图像，以消除传统后视镜的盲区。图3为依照本发明所绘示的一种应用情景的范例示意图。请参照图3，第一图像撷取装置101可撷取车辆后方的后视图像Img-B，第二图像撷取装置102可撷取车辆左侧的左侧图像Img-L，而第三图像撷取装置106可撷取车辆右侧的右侧图像Img-R。处理器104可对后视图像Img-B、左侧图像Img-L、右侧图像Img-R执行图像拼接功能而产生缝合图像Img-S。需说明的是，由于电子后视镜需要即时的反应路况，因而进行图像拼接功能所需的拼接参数(像是图像映射转换矩阵等等)是基于预设的镜头位置而产生并储存。藉此，处理器104可利用预先储存的拼接参数来执行图像拼接功能，而不需要耗费庞大的计算量与运算时间。然而，倘若第一图像撷取装置101、第二图像撷取装置102与第三图像撷取装置106的镜头位置发生偏移，图像拼接功能所产生的缝合图像将有扭曲或变形的情况。因此，本发明的车载镜头偏移检测方法与系统可即时的检测车载镜头是否发生偏移，并据以执行校正警示操作，而避免驾驶通过电子后视镜看到扭曲或变形的图像而发生误判。
图4是依照本发明一实施例所绘示的车载镜头偏移检测方法的流程图。请参照图4，本实施例的方式适用于上述实施例中的车载镜头偏移检测系统100，以下即搭配车载镜头偏移检测系统100中的各项元件说明本实施例的车载镜头偏移检测方法的详细步骤。
于步骤S401，处理器104利用第一图像撷取装置101撷取第一图像(即后视图像)，以及利用第二图像撷取装置102撷取第二图像(即左侧图像)。于步骤S402，处理器104依据多个第一预设位置从第一图像取得多个第一特征点，以及依据多个第二预设位置从第二图像取得多个第二特征点。具体而言，此些第一预设位置与此些第二预设位置为预先储存多个的像素坐标信息。此外，此些第一特征点与第二特征点分别为由相邻的多个像素点构成的像素集合区块。举例而言，第一特征点与第二特征点可以分别为半径为9个像素的像素集合区块。然而，第一特征点与第二特征点的数量、尺寸与形状可视实际应用而设计，本发明对此并不限制。换言之，处理器104可依据预先储存多个的像素坐标信息分别从第一图像与第二图像上撷取出多个像素集合区块。于另一实施例中，第一特征点于第一图像中的第一预设位置与第二特征点于第二图像中的第二预设位置落在第一图像撷取装置101与第二图像撷取装置102的拍摄视角重叠区域中。基此，可预先于两图像的重叠区域中选出多个特征点，以藉由选出来的多个特征点定义出第一图像中的第一预设位置和第二图像中的第二预设位置。
接着，于步骤S403，处理器104比对第一特征点的特征值与第二特征点的特征值，而判断第一特征点是否吻合第二特征点。具体而言，处理器104可执行图像处理技术中的特征撷取(feature extraction)与特征匹配(feature matching)，并判断这些第一特征点的特征值是否分别与对应的第二特征点的特征值相同。倘若这些第一特征点的特征值分别与对应的第二特征点的特征值相同，处理器104判断此些第一特征点吻合此些第二特征点。相反的，倘若这些第一特征点其中之一的特征值并未与任何第二特征点的特征值相同，处理器104判断此些第一特征点不吻合此些第二特征点。
若步骤S403判断为是，于步骤S405，反应于第一特征点吻合第二特征点，处理器104对第一图像与第二图像执行图像拼接功能而产生缝合图像。于步骤S406，通过显示装置105显示缝合图像。
若步骤S403判断为否，于步骤S404，反应于第一特征点不吻合第二特征点，处理器104执行校正警示操作。于一实施例中，所述的校正警示操作可包括启动例如提示文字、声响与灯光的其一或其组合的警示，以通知驾驶车载镜头已经发生偏移。举例而言，当处理器104判断第一特征点不吻合第二特征点，处理器104可启动LED灯来通知驾驶。此外，于一实施例中，所述的校正警示操作可包括对车载镜头发生偏移的状况进行校正，以排除车载镜头发生偏移产生的不良影响。另外，于一实施例中，当显示装置105与一镜体实施为电子后视镜时，所述的校正警示操作可包括关闭显示装置105的背光模组，而使电子后视镜可作为一般传统后视镜，从而避免电子后视镜显示有扭曲或变形的缝合图像。
可知的，上述实施例是以左侧镜头所撷取的左侧图像与后侧镜头所撷取的后视图像为例进行说明，然而，处理器104也可针对右侧镜头所撷取的右侧图像与后侧镜头所撷取的后视图像执行相同的流程。基此，处理器104可在判断左侧镜头与右侧镜头皆未发生偏移之后，将右侧图像、左侧图像与后视图像进行图像拼接而获取缝合图像，以控制电子后视镜显示未有扭曲或变形的缝合图像。
需注意的是，步骤S403的判断可能因为场景因素而存在误判。因此，于本发明的一实施例中，基于不吻合次数的容错机制可避免车载镜头偏移检测系统100发出不必要的警示。以下将列举实施例以说明。
图5是依照本发明一实施例所绘示的车载镜头偏移检测方法的流程图。请参照图5，本实施例的方式适用于上述实施例中的车载镜头偏移检测系统100，以下即搭配车载镜头偏移检测系统100中的各项元件说明本实施例的车载镜头偏移检测方法的详细步骤。
于步骤S501，处理器104利用第一图像撷取装置101撷取第一图像，以及利用第二图像撷取装置102撷取第二图像。于步骤S502，处理器104依据多个第一预设位置从第一图像取得多个第一特征点，以及依据多个第二预设位置从第二图像取得多个第二特征点。于步骤S503，处理器104比对第一特征点的特征值与第二特征点的特征值，而判断第一特征点是否吻合第二特征点。上述步骤S501～步骤S503的实施细节可参照步骤S401～步骤S403。举例而言，图6为依照本发明一实施例所绘示的第一图像与第二图像的示意图。请参照图6，处理器104可依据预先储存多个的像素坐标信息而从第一图像Img-B上取得三个第一特征点P4～P6，并从第二图像Img-L上取得三个第二特征点P1～P3。接着，处理器140对第一特征点P4～P6与第二特征点P1～P3执行特征撷取与特征匹配。然后，于此范例中，由于第一特征点P4的特征值相同于对应的第二特征点P1，第一特征点P5的特征值相同于对应的第二特征点P2，且第一特征点P6的特征值相同于对应的第二特征点P3，因此处理器104可判断第一特征点P4～P6吻合第二特征点P1～P3。
回到图5的流程，若第一特征点不吻合第二特征点，于步骤S504，处理器104判断不吻合次数是否大于门槛值。若不吻合次数不大于门槛值，于步骤S506，处理器104累计不吻合次数。若不吻合次数大于门槛值，于步骤S505，处理器104执行校正警示操作。具体而言，于车辆的移动期间，处理器104例如可定时(例如每隔1秒钟)判断第一特征点是否吻合第二特征点。然而，处理器104可能因为场景因素(像是场景特征不足或场景特征重复性高等等)而产生误判。因此，于本实施例中，在不吻合次数累积至大于门槛值的情况下，处理器104才执行校正警示操作，以避免驾驶被不必要的警示打扰。上述门槛值可依据实际需求而设置，本发明对此并不限制。
若第一特征点吻合第二特征点，于步骤S507，处理器104降低不吻合次数。具体而言，随着行车期间场景的变化，在车载镜头尚未偏移的情况下，处理器104发生误判的现象可能只短暂出现数次。因此，处理器104可在判断第一特征点吻合第二特征点之后，降低因为前几次误判而累计产生的不吻合次数。上述降低不吻合次数的方式可包括将不吻合次数减去一预设值。接着，于步骤S508，处理器104对第一图像与第二图像执行图像拼接功能而产生缝合图像。于步骤S509，通过显示装置105显示缝合图像。
需说明的是，于前述实施例中，处理器104是依据预先储存的第一预设位置与第二预设位置来取得用以判断车载镜头是否已经偏移的第一特征点与第二特征点。以下将列举一实施例以说明如何取得第一预设位置与第二预设位置。图7是依照本发明实施例所绘示的取得第一预设位置与第二预设位置的方法的流程图。请参照图7，本实施例的方式适用于上述实施例中的车载镜头偏移检测系统100，以下即搭配车载镜头偏移检测系统100中的各项元件说明本实施例的取得第一预设位置与第二预设位置的详细步骤。具体而言，在车载镜头偏移检测系统100执行图4或图5所示的流程之前，车载镜头偏移检测系统100可先执行图7的流程而取得第一预设位置与第二预设位置并据以储存。
于步骤S701，处理器104利用第一图像撷取装置101撷取第三图像(即后视图像)，以及利用第二图像撷取装置102撷取第四图像(即左视图像)。于步骤S702，处理器104于第三图像与第四图像之间的重叠区域内设置多个第一预设特征点而取得第三图像上的第一预设位置。可以知道的是，用以判断车载镜头是否已经偏移的第一特征点与第二特征点应当对应至相同的场景内容，因而这些第一预设特征点的第一预设位置必须位于第三图像中第三图像与第四图像之间的重叠区域内。于本实施例中，步骤S702可分为子步骤S7021～S7022而实施。
于子步骤S7021，处理器104将第一预设特征点其中之一设置于重叠区域内的接合区域。上述接合区域例如为进行图像拼接功能时左侧图像与后视图像的接合线区域。于子步骤S7022，处理器104依据分布形状与第一预设特征点其中之一的第一预设位置取得其他的第一预设特征点的第一预设位置。例如以分布形状为边长为60个像素的正三角形为例，在设置完第一个预设特征点之后，处理器104将以此第一个第一预设特征点作为一正三角形的顶点而向下寻找另外两个第一预设特征点，从而获取另外两个个第一预设特征点的第一预设位置。然而，上述分布形状不并局限于正三角形，也可以为其他规则或不规则的形状，可视实际应用与需求而设计。
在取得第一预设位置之后，于步骤S703，处理器104利用第一预设特征点执行特征撷取与特征匹配而于第四图像上搜寻多个第二预设特征点，以获取第二预设特征点的第二预设位置。具体而言，处理器104可于第四图像上搜寻到与第一预设特征点具备相同特征值的多个第二预设特征点。值得一提的是，由于第一预设特征点其中之一位于接合区域是已知的，因此处理器104可于第四图像上的接合区域中搜寻第一个第二预设特征点。此外，由于第一预设特征点的分布形状是已知的，因而搜寻其他第二预设特征点的搜寻范围可依据分布形状而决定，从而降低运算量与减少匹配错误的现象。
可知的，上述产生第一预设位置与第二预设位置的实施例是以左侧镜头所撷取的左侧图像与后侧镜头所撷取的后视图像为例进行说明，然而，处理器104也可针对右侧镜头所撷取的右侧图像与后侧镜头所撷取的后视图像执行相同的流程。如此，第一预设位置与第二预设位置可以是储存于储存电路103中的像素坐标信息。另外，于另一实施例中，每个第一预设位置与每个第二预设位置之间的对应关系可进一步储存于储存电路103中，使处理器104后续执行图4或图5所示的流程时可先依据像素坐标信息取得多个第一特征点以及多个的二特征点，并可依据已储存的对应关系比对多个第一特征点的特征值与对应的多个第二特征点的特征值。
以下将对校正警示操作进行更详细的说明。
于一实施例中，当处理器104判定第一特征点不吻合第二特征点，处理器104可执行校正警示操作而控制显示装置105显示校正画面，致使驾驶可以依据校正画面提供的提示信息来手动校正车载镜头的镜头方向。更具体而言，当处理器104判定第一特征点不吻合第二特征点，处理器104可控制原本显示缝合图像的显示装置105切换为显示校正画面，此校正画面可同时显示第一图像撷取装置101与第二图像撷取装置102撷取的两张图像，并且此两张图像上分别标记有多个标记点，以供驾驶根据校正画面中的这些标记点调整镜头方向。图8为依照本发明一实施例所绘示的校正画面的示意图。请参照图8，基于预先储存的多个第一预设位置与多个第二预设位置，处理器104可于第一图像Img-B上的第一预设位置上标示多个第一标记点Q1～Q3，并于第二图像Img-L上的第二预设位置上标示多个第二标记点Q4～Q6。接着，通过显示装置105同时显示包括第一标记点Q1～Q3的第一图像Img-B与包括第二标记点Q4～Q6的第二图像Img-L。藉此，驾驶可调整第二图像撷取装置102的镜头方向，使第二标记点Q4～Q6对应的场景内容分别相同于第一标记点Q1～Q3对应的场景内容，以消除左侧车载镜头的偏移状况。
于一实施例中，当处理器104判定第一特征点不吻合第二特征点，处理器104可执行校正警示操作而自动调整车载镜头的镜头方向。更具体而言，当处理器104判定第一特征点不吻合第二特征点，处理器104可利用图像分析技术判断车载镜头的偏移状况，并据以控制电动机械马达来自动调整镜头方向。图9为依照本发明一实施例所绘示的第一图像与第二图像的示意图。请参照图9，处理器104可取得第一预设位置X1～X3所形成的第一图像区块B1的第一图像内容。接着，处理器104可于第二图像Img-L上搜寻具有相似于第一图像内容的第二图像内容的第二图像区块B2，以获取形成第二图像区块B2的多个校正点M1～M3。处理器104可依据校正点M1～M3的位置与第二预设位置X4～X6之间的偏移量控制电动机械马达调整第二图像撷取装置102的镜头方向。上述偏移量可包括水平偏移量、垂直偏移量与旋转偏移量。
于一实施例中，当处理器104判定第一特征点不吻合第二特征点，处理器104可执行校正警示操作而调整图像拼贴功能的设定参数。更具体而言，当处理器104判定第一特征点不吻合第二特征点，处理器104可利用图像分析技术判断车载镜头的偏移状况，并据以调整图像拼贴功能的设定参数。相似于图9的说明，处理器104可取得校正点M1～M3的位置与第二预设位置X4～X6之间的偏移量。接着，处理器104可依据此偏移量调整图像拼接功能的设定参数，此设定参数可用以从第二图像撷取部份图像来执行图像拼接功能。详细而言，处理器104一般采用实际撷取的第一图像与第二图像的部份内容进行图像拼接功能。换言之，处理器104即依据特定的设定参数从第二图像内容撷取部份图像来进行图像拼接功能。因此，当处理器104计算出偏移量之后，处理器104可调整第二图像的内容撷取位置，以在不调整镜头方向的情况下弥补镜头方向产生偏移的不良影响。举例而言，假设第二图像的尺寸为1280*720，处理器104原本是从像素位置(110,110)自第二图像撷取出640*370大小的部份图像进行图像拼接功能。在依据偏移量调整图像拼接功能的设定参数之后，处理器104例如可改为从像素位置(90,110)自第二图像撷取出640*370大小的部份图像进行图像拼接功能。
综上所述，本发明实施例可低运算量即时地检测出车载镜头是否发生偏移，以提高行车安全。当车载镜头已经偏移，本发明实施例可警示驾驶并让驾驶可依据校正画面来调整车载镜头的镜头方向。此外，当车载镜头已经偏移，本发明实施例可依据撷取图像内容，来自动调整车载镜头的镜头方向或调整图像拼接功能的设定参数。基此，本发明实施例可避免电子后视镜显示扭曲或变形的缝合图像。
虽然本发明已以实施例揭露如上，然其并非用以限定本发明，任何本领域技术人员，在不脱离本发明的精神和范围内，当可作些许的更动与润饰，故本发明的保护范围当视权利要求所界定者为准。

Claims (20)

1.一种车载镜头偏移检测方法，其特征在于，一第一图像撷取装置与一第二图像撷取装置设置于一车辆上，所述方法包括：
利用所述第一图像撷取装置撷取一第一图像，以及利用所述第二图像撷取装置撷取一第二图像；
依据多个第一预设位置从所述第一图像取得多个第一特征点，以及依据多个第二预设位置从所述第二图像取得多个第二特征点，所述多个第一预设位置与所述多个第二预设位置为预先储存多个的像素坐标信息，所述多个第一特征点与第二特征点分别为由相邻的多个像素点构成的像素集合区块；
比对所述第一特征点的特征值与所述第二特征点的特征值，而判断所述第一特征点是否吻合所述第二特征点；以及
反应于所述第一特征点不吻合所述第二特征点，执行一校正警示操作；
若所述多个第一特征点其中之一的特征值并未与任何第二特征点的特征值相同，判定为所述第一特征点不吻合所述第二特征点。
2.根据权利要求1所述的方法，其特征在于，一显示装置设置于所述车辆内，所述方法更包括：
对所述第一图像与所述第二图像执行一图像拼接功能而产生一缝合图像；以及
通过所述显示装置显示所述缝合图像。
3.根据权利要求1所述的方法，其特征在于，反应于所述第一特征点不吻合所述第二特征点，执行所述校正警示操作的步骤包括：
判断一不吻合次数是否大于一门槛值；
若所述不吻合次数不大于所述门槛值，累计所述不吻合次数；以及
若所述不吻合次数大于所述门槛值，执行所述校正警示操作。
4.根据权利要求3所述的方法，其特征在于，所述方法更包括：
若所述第一特征点吻合所述第二特征点，降低所述不吻合次数。
5.根据权利要求1所述的方法，其特征在于，包括一显示装置的一电子后视镜设置于所述车辆内，而执行所述校正警示操作的步骤包括：
关闭所述显示装置的背光模组。
6.根据权利要求1所述的方法，其特征在于，一显示装置设置于所述车辆内，而执行所述校正警示操作的步骤包括：
于所述第一图像上的所述第一预设位置上标示多个第一标记点，并于所述第二图像上的所述第二预设位置上标示多个第二标记点；以及
通过所述显示装置同时显示包括所述第一标记点的所述第一图像与包括所述第二标记点的所述第二图像。
7.根据权利要求1所述的方法，其特征在于，执行所述校正警示操作的步骤包括：
取得所述第一预设位置所形成的一第一图像区块的第一图像内容；
于所述第二图像上搜寻具有相似于所述第一图像内容的第二图像内容的一第二图像区块，以获取形成所述第二图像区块的多个校正点；以及
依据所述校正点的位置与所述第二预设位置之间的偏移量调整所述第二图像撷取装置的镜头方向。
8.根据权利要求1所述的方法，其特征在于，执行所述校正警示操作的步骤包括：
取得所述第一预设位置所形成的一第一图像区块的第一图像内容；
于所述第二图像上搜寻具有相似于所述第一图像内容的第二图像内容的一第二图像区块，以获取形成所述第二图像区块的多个校正点；
取得所述校正点的位置与所述第二预设位置之间的偏移量；以及
依据所述偏移量调整一图像拼接功能的设定参数，其中所述设定参数用以从所述第二图像撷取部份图像来执行图像拼接功能。
9.根据权利要求1所述的方法，其特征在于，所述方法更包括：
利用所述第一图像撷取装置撷取一第三图像，以及利用所述第二图像撷取装置撷取一第四图像；
于所述第三图像与所述第四图像之间的重叠区域内设置多个第一预设特征点而取得所述第三图像上的所述第一预设位置；以及
利用所述第一预设特征点执行特征撷取与特征匹配而于所述第四图像上搜寻多个第二预设特征点，以获取所述第二预设特征点的所述第二预设位置。
10.根据权利要求9所述的方法，其特征在于，于所述第三图像与所述第四图像之间的重叠区域内设置所述第一预设特征点而取得所述第三图像上的所述第一预设位置的步骤包括：
将所述第一预设特征点其中之一设置于所述重叠区域内的一接合区域；以及
依据一分布形状与所述第一预设特征点其中之一对应的所述第一预设位置其中之一取得其他的所述第一预设位置。
11.一种车载镜头偏移检测系统，其特征在于，设置于一车辆上，所述系统包括：
一第一图像撷取装置；
一第二图像撷取装置；
一储存电路，储存多个模组；以及
一处理器，耦接所述储存电路、所述第一图像撷取装置，以及所述第二图像撷取装置，存取所述模组以执行下列步骤：
利用所述第一图像撷取装置撷取一第一图像，以及利用所述第二图像撷取装置撷取一第二图像；
依据多个第一预设位置从所述第一图像取得多个第一特征点，以及依据多个第二预设位置从所述第二图像取得多个第二特征点，所述多个第一预设位置与所述多个第二预设位置为预先储存多个的像素坐标信息，所述多个第一特征点与第二特征点分别为由相邻的多个像素点构成的像素集合区块；
比对所述第一特征点的特征值与所述第二特征点的特征值，而判断所述第一特征点是否吻合所述第二特征点；以及
反应于所述第一特征点不吻合所述第二特征点，执行一校正警示操作；
若所述多个第一特征点其中之一的特征值并未与任何第二特征点的特征值相同，判定为所述第一特征点不吻合所述第二特征点。
12.根据权利要求11所述的系统，其特征在于，所述系统更包括一显示装置，所述处理器更经配置以：
对所述第一图像与所述第二图像执行一图像拼接功能而产生一缝合图像，其中所述显示装置显示所述缝合图像。
13.根据权利要求11所述的系统，其特征在于，所述处理器更经配置以：
若所述第一特征点不吻合所述第二特征点，判断一不吻合次数是否大于一门槛值；
若所述不吻合次数不大于所述门槛值，累计所述不吻合次数；以及
若所述不吻合次数大于所述门槛值，执行所述校正警示操作。
14.根据权利要求13所述的系统，其特征在于，所述处理器更经配置以：
若所述第一特征点吻合所述第二特征点，降低所述不吻合次数。
15.根据权利要求11所述的系统，其特征在于，所述系统更包括设置于所述车辆内的电子后视镜，所述电子后视包括一显示装置，而所述处理器更经配置以：
反应于所述第一特征点不吻合所述第二特征点，关闭所述显示装置的背光模组。
16.根据权利要求11所述的系统，其特征在于，所述系统更包括一显示装置，所述处理器更经配置以：
于所述第一图像上的所述第一预设位置上标示多个第一标记点，并于所述第二图像上的所述第二预设位置上标示多个第二标记点；以及
利用所述显示装置同时显示包括所述第一标记点的所述第一图像与包括所述第二标记点的所述第二图像。
17.根据权利要求11所述的系统，其特征在于，所述处理器更经配置以：
取得所述第一预设位置所形成的一第一图像区块的第一图像内容；
于所述第二图像上搜寻具有相似于所述第一图像内容的第二图像内容的一第二图像区块，以获取形成所述第二图像区块的多个校正点；以及
依据所述校正点的位置与所述第二预设位置之间的偏移量调整所述第二图像撷取装置的镜头方向。
18.根据权利要求11所述的系统，其特征在于，所述处理器更经配置以：
取得所述第一预设位置所形成的一第一图像区块的第一图像内容；
于所述第二图像上搜寻具有相似于所述第一图像内容的第二图像内容的一第二图像区块，以获取形成所述第二图像区块的多个校正点；
取得所述校正点的位置与所述第二预设位置之间的偏移量；以及
依据所述偏移量调整一图像拼接功能的设定参数，其中所述设定参数用以从所述第二图像撷取部份图像来执行图像拼接功能。
19.根据权利要求11所述的系统，其特征在于，所述处理器更经配置以：
利用所述第一图像撷取装置撷取一第三图像，以及利用所述第二图像撷取装置撷取一第四图像；
于所述第三图像与所述第四图像之间的重叠区域内设置多个第一预设特征点而取得所述第三图像上的所述第一预设位置；以及
利用所述第一预设特征点执行一特征撷取与一特征匹配而于所述第四图像上搜寻多个第二预设特征点，以获取所述第二预设特征点的所述第二预设位置。
20.根据权利要求19所述的系统，其特征在于，所述处理器更经配置以：
将所述第一预设特征点其中之一设置于所述重叠区域内的一接合区域；以及
依据一分布形状与所述第一预设特征点其中之一对应的所述第一预设位置其中之一取得其他的所述第一预设位置。
CN201910292857.8A 2019-03-12 2019-04-12 车载镜头偏移检测方法与车载镜头偏移检测系统 Active CN111693254B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
TW108108233A TWI705011B (zh) 2019-03-12 2019-03-12 車載鏡頭偏移檢測方法與車載鏡頭偏移檢測系統
TW108108233 2019-03-12

Publications (2)

Publication Number Publication Date
CN111693254A CN111693254A (zh) 2020-09-22
CN111693254B true CN111693254B (zh) 2022-09-20

Family

ID=72423880

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910292857.8A Active CN111693254B (zh) 2019-03-12 2019-04-12 车载镜头偏移检测方法与车载镜头偏移检测系统

Country Status (3)

Country Link
US (1) US11450028B2 (zh)
CN (1) CN111693254B (zh)
TW (1) TWI705011B (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN116977411B (zh) * 2022-12-01 2024-03-19 开立生物医疗科技(武汉)有限公司 内镜移动速度估计方法及装置、电子设备及存储介质
CN117036490B (zh) * 2023-10-10 2024-01-19 长沙能川信息科技有限公司 摄像机预置位偏移检测方法、装置、计算机设备与介质

Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008131177A (ja) * 2006-11-17 2008-06-05 Aisin Seiki Co Ltd 車載カメラの校正装置、校正方法、並びにこの校正方法を用いた車両の生産方法
CN101202905A (zh) * 2006-12-11 2008-06-18 财团法人工业技术研究院 影像调整校正方法及使用所述方法的车辆安全警示系统
CN101408423A (zh) * 2007-10-09 2009-04-15 财团法人工业技术研究院 影像撷取装置角度侦测方法及其车辆碰撞警示系统
JP2009085651A (ja) * 2007-09-28 2009-04-23 Hitachi Ltd 画像処理システム
CN101540046A (zh) * 2009-04-10 2009-09-23 凌阳电通科技股份有限公司 基于图像特征的全景图拼接方法和装置
JP2009267602A (ja) * 2008-04-23 2009-11-12 Alpine Electronics Inc 車両周辺監視装置およびこれに適用されるカメラ取り付け位置・姿勢情報の設定修正方法
CN102970460A (zh) * 2011-08-31 2013-03-13 帷丰科技有限公司 调校车用影像装置的方法及其系统
JP2014074632A (ja) * 2012-10-03 2014-04-24 Isuzu Motors Ltd 車載ステレオカメラの校正装置及び校正方法
CN104869384A (zh) * 2014-02-25 2015-08-26 华晶科技股份有限公司 电子装置及其校正方法
TW201611606A (zh) * 2014-09-05 2016-03-16 宏達國際電子股份有限公司 影像擷取方法及電子裝置
CN108401133A (zh) * 2017-02-07 2018-08-14 中升兴业股份有限公司 环景影像的影像缝合方法

Family Cites Families (28)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007038773A (ja) * 2005-08-02 2007-02-15 Auto Network Gijutsu Kenkyusho:Kk 車載カメラ点検装置
US7949486B2 (en) * 2005-10-28 2011-05-24 Hi-Key Limited Method and apparatus for calibrating an image capturing device, and a method and apparatus for outputting image frames from sequentially captured image frames with compensation for image capture device offset
JP4937030B2 (ja) * 2007-07-24 2012-05-23 ルネサスエレクトロニクス株式会社 車両用画像処理装置
JP5112131B2 (ja) * 2008-03-25 2013-01-09 アルパイン株式会社 車両用異常検出装置
JP4636346B2 (ja) * 2009-03-31 2011-02-23 アイシン精機株式会社 車載カメラの校正装置、方法、及びプログラム
JP4690476B2 (ja) * 2009-03-31 2011-06-01 アイシン精機株式会社 車載カメラの校正装置
JP5588812B2 (ja) * 2010-09-30 2014-09-10 日立オートモティブシステムズ株式会社 画像処理装置及びそれを用いた撮像装置
JP5081313B2 (ja) * 2011-04-06 2012-11-28 アイシン精機株式会社 車載カメラの校正装置
CN202573989U (zh) * 2012-01-04 2012-12-05 辉创电子股份有限公司 环车鸟瞰装置
JP6019646B2 (ja) * 2012-03-21 2016-11-02 株式会社リコー 位置ずれ検出装置、車両及び位置ずれ検出方法
JP5905846B2 (ja) * 2013-03-29 2016-04-20 株式会社日本自動車部品総合研究所 横断判定装置およびプログラム
JP6024581B2 (ja) * 2013-04-15 2016-11-16 株式会社デンソー 車両用画像処理装置
JP6035620B2 (ja) * 2013-07-29 2016-11-30 株式会社日立製作所 車載ステレオカメラシステム及びそのキャリブレーション方法
TWI511081B (zh) * 2014-01-28 2015-12-01 Altek Semiconductor Corp 影像擷取裝置及其影像形變校正方法
JP2016053748A (ja) * 2014-09-02 2016-04-14 株式会社デンソー 運転支援装置および運転支援方法
CN112923937B (zh) * 2015-02-10 2022-03-15 御眼视觉技术有限公司 沿着路段自主地导航自主车辆的系统、自主车辆及方法
JP6471522B2 (ja) * 2015-02-10 2019-02-20 株式会社デンソー カメラパラメータ調整装置
US20160307048A1 (en) * 2015-04-17 2016-10-20 General Electric Company Simulating camera node output for parking policy management system
WO2017056484A1 (ja) * 2015-09-28 2017-04-06 京セラ株式会社 画像処理装置、ステレオカメラ装置、車両及び画像処理方法
US20170155889A1 (en) * 2015-11-30 2017-06-01 Altek Semiconductor Corp. Image capturing device, depth information generation method and auto-calibration method thereof
DE102016104731A1 (de) * 2016-03-15 2017-09-21 Connaught Electronics Ltd. Verfahren zum Detektieren eines Rolling-Shutter-Effekts in Bildern eines Umgebungsbereichs eines Kraftfahrzeugs, Rechenvorrichtung, Fahrerassistenzsystem sowie Kraftfahrzeug
TWI607911B (zh) * 2016-04-28 2017-12-11 H P B Optoelectronic Co Ltd Vehicle safety protection system and method
TWI584051B (zh) * 2016-05-18 2017-05-21 Sarmo Tech Inc Three - dimensional environment system of vehicle and its method
JPWO2018008631A1 (ja) * 2016-07-06 2019-04-25 パナソニックＩｐマネジメント株式会社 電子ミラー装置
CN106449513B (zh) 2016-11-11 2023-04-21 华南理工大学 一种防过热csp荧光膜片模压装置及方法
US10504241B2 (en) * 2016-12-19 2019-12-10 Magna Electronics Inc. Vehicle camera calibration system
GB2559760B (en) * 2017-02-16 2019-08-28 Jaguar Land Rover Ltd Apparatus and method for displaying information
CN107424181A (zh) * 2017-04-12 2017-12-01 湖南源信光电科技股份有限公司 一种改进的图像拼接关键帧快速提取方法

Patent Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008131177A (ja) * 2006-11-17 2008-06-05 Aisin Seiki Co Ltd 車載カメラの校正装置、校正方法、並びにこの校正方法を用いた車両の生産方法
CN101202905A (zh) * 2006-12-11 2008-06-18 财团法人工业技术研究院 影像调整校正方法及使用所述方法的车辆安全警示系统
JP2009085651A (ja) * 2007-09-28 2009-04-23 Hitachi Ltd 画像処理システム
CN101408423A (zh) * 2007-10-09 2009-04-15 财团法人工业技术研究院 影像撷取装置角度侦测方法及其车辆碰撞警示系统
JP2009267602A (ja) * 2008-04-23 2009-11-12 Alpine Electronics Inc 車両周辺監視装置およびこれに適用されるカメラ取り付け位置・姿勢情報の設定修正方法
CN101540046A (zh) * 2009-04-10 2009-09-23 凌阳电通科技股份有限公司 基于图像特征的全景图拼接方法和装置
CN102970460A (zh) * 2011-08-31 2013-03-13 帷丰科技有限公司 调校车用影像装置的方法及其系统
JP2014074632A (ja) * 2012-10-03 2014-04-24 Isuzu Motors Ltd 車載ステレオカメラの校正装置及び校正方法
CN104869384A (zh) * 2014-02-25 2015-08-26 华晶科技股份有限公司 电子装置及其校正方法
TW201611606A (zh) * 2014-09-05 2016-03-16 宏達國際電子股份有限公司 影像擷取方法及電子裝置
CN108401133A (zh) * 2017-02-07 2018-08-14 中升兴业股份有限公司 环景影像的影像缝合方法

Also Published As

Publication number Publication date
CN111693254A (zh) 2020-09-22
TW202033389A (zh) 2020-09-16
US20200294268A1 (en) 2020-09-17
TWI705011B (zh) 2020-09-21
US11450028B2 (en) 2022-09-20

Similar Documents

Publication Publication Date Title
US20220284629A1 (en) System and method of calibrating an optical sensor mounted on board of a vehicle
CN110178369B (zh) 摄像装置、摄像系统以及显示系统
US20190349571A1 (en) Distortion correction for vehicle surround view camera projections
KR102365501B1 (ko) 이미지 센서의 외재적 파라미터를 교정하기 위한 방법 및 장치
US10185152B2 (en) Vehicle display device
EP2881927A1 (en) Warning device for vehicle and outside mirror device for vehicle
US11055541B2 (en) Vehicle lane marking and other object detection using side fisheye cameras and three-fold de-warping
CN111693254B (zh) 车载镜头偏移检测方法与车载镜头偏移检测系统
US20200039435A1 (en) Onboard camera system for eliminating a-pillar blind areas of a mobile vehicle and image processing method thereof
JP5175230B2 (ja) カメラの自動キャリブレーション装置及び自動キャリブレーション方法
US20160180179A1 (en) Vehicle periphery monitoring apparatus and program
US9330319B2 (en) Apparatus for compensating camera image and operating method thereof
JP2007147608A (ja) 自動車による前面要素の特徴の評価方法。
JP2023528940A (ja) 自律車両のセンサの位置または向きを検証するための装置
US20190308562A1 (en) On-vehicle display control device, on-vehicle display control system, on-vehicle display control method, and non-transitory storage medium
US20190204835A1 (en) Image processing apparatus and method for vehicle
JP6424449B2 (ja) 後方状況表示装置、後方状況表示方法
KR102611759B1 (ko) 차량의 어라운드 뷰 영상의 보정 장치 및 그 제어 방법
JP2018113622A (ja) 画像処理装置、画像処理システム、及び、画像処理方法
JP6958485B2 (ja) 物体検知装置
JP6690315B2 (ja) 車両用表示制御装置、車両用表示システム、車両用表示制御方法およびプログラム
JP6690311B2 (ja) 車両用表示制御装置、車両用表示システム、車両用表示制御方法およびプログラム
KR20160123411A (ko) 차량용 카메라 장치, 및 그의 캘리브레이션 시스템과 방법
CN115063488B (zh) 一种数字外后视镜系统划线标定方法和系统
US20240179407A1 (en) Focus-of-expansion locating device

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant