CN116184364B - 一种iToF相机的多机干扰检测与去除方法及装置 - Google Patents

一种iToF相机的多机干扰检测与去除方法及装置 Download PDF

Info

Publication number
CN116184364B
CN116184364B CN202310466111.0A CN202310466111A CN116184364B CN 116184364 B CN116184364 B CN 116184364B CN 202310466111 A CN202310466111 A CN 202310466111A CN 116184364 B CN116184364 B CN 116184364B
Authority
CN
China
Prior art keywords
value
phase
current frame
frame image
packet
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202310466111.0A
Other languages
English (en)
Other versions
CN116184364A (zh
Inventor
王昆
胡波
李宗德
高晓可
柯颖
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Xingchen Technology Co ltd
Original Assignee
Shanghai Jieming Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shanghai Jieming Technology Co ltd filed Critical Shanghai Jieming Technology Co ltd
Priority to CN202310466111.0A priority Critical patent/CN116184364B/zh
Publication of CN116184364A publication Critical patent/CN116184364A/zh
Application granted granted Critical
Publication of CN116184364B publication Critical patent/CN116184364B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S7/00—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
    • G01S7/48—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S17/00
    • G01S7/495—Counter-measures or counter-counter-measures using electronic or electro-optical means
    • Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
    • Y02D30/00—Reducing energy consumption in communication networks
    • Y02D30/70—Reducing energy consumption in communication networks in wireless communication networks

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Noise Elimination (AREA)
  • Studio Devices (AREA)

Abstract

本发明涉及一种iToF相机的多机干扰检测与去除方法及装置。本发明通过检测包尾的调制原始数据的数据包平均值信息，以包尾的数据包平均值来检测判断是否存在多机干扰，减少了硬件的成本以及避免积分时间的改变带来的影响；进一步结合当前帧图像中多个像素点的相位随机变化，来检测是否存在多机干扰，提高了检测的准确性。当检测到存在多机干扰，通过随机延时后，重新触发相机，不需要额外的硬件去配置，减少系统的成本。

Description

一种iToF相机的多机干扰检测与去除方法及装置
技术领域
本发明涉及ToF测距技术领域，尤其涉及一种iToF相机的多机干扰检测与去除方法及装置。
背景技术
双目测距、结构光与飞行时间（Time-of-Flight，简称ToF）是当今三大主流3D成像技术，其中，ToF由于其原理简单、结构简单稳定、测量距离远等优势，已逐渐应用于手势识别、3D建模、无人驾驶及机器视觉等领域。间接飞行时间（indirect Time-of-Flight，简称iToF）相机通过发射光和反射光的相位延时来计算目标物的真实深度，在3D测距中具有广泛的应用。
请参阅图1，其为iToF成像原理示意图。具体的，iToF相机通过调制模块（Modulation）11控制发光模块12主动发射连续调制的光脉冲作为发射光13；发射光13发射到目标物19表面，经目标物19反射后形成的反射光14被图像传感器（Sensor）的感光像素阵列（Pxiel Array）15捕获；通过计算发射光13和反射光14的相移（Phase Shift）来获取目标物19的深度。发光模块12，可以采用VCSEL、红外发射器（IR Emitter）或LED等。
真实场景中由于可能存在多个iToF相机同时工作，则不同相机发射的光脉冲之间有可能会发生干扰，多机干扰会导致测距存在较大偏差。如图2所示，相机TOF1与相机TOF2发射的光脉冲之间发生干扰。近年来，对于多机干扰，行业内也提出了一些解决方案，例如通过展频、增加外部感测环境光等方法，但从成本以及效果还是存在较多的问题。
中国专利申请公开文献CN109613517A公开了一种ToF+Lidar多机抗干扰工作方法。该方法通过检测ToF相机四相位数据，当干扰存在的时候，四相位数据无法满足0度和180度之和以及90度和270度之和为常数这一约束条件，则会被认为存在信号干扰。该方法可以较好的改善静止画面中外部干扰的影响，但真实环境中，由于场景可能存在不断变化以及随着积分时间的变化，常数值可能也会不断的变化，对于干扰的排除带来了较大的挑战。
因此，如何在不增加额外硬件成本的基础上有效对多机干扰进行去除，是当前亟待解决的技术问题。
发明内容
本发明的目的在于提供一种iToF相机的多机干扰检测与去除方法及装置，通过自动曝光的统计信息来对多机干扰进行检测和去除，减少硬件成本以及避免积分时间改变带来的影响。
为实现上述目的，本发明提供了一种iToF相机的多机干扰检测与去除方法，包括如下步骤：获取当前帧图像的四个相位下每一相位的调制原始数据的数据包平均值；检测所述四个相位中是否存在任意两相位的调制原始数据的数据包平均值的差值绝对值大于第一预设阈值，若存在任意两相位的调制原始数据的数据包平均值的差值绝对值大于第一预设阈值，则判定存在多机干扰；以及当存在多机干扰时，所述iToF相机的图像传感器停止曝光并进行随机延时后再次启动曝光，以去除多机干扰。
在一些实施例中，所述方法进一步包括：若任意两相位的调制原始数据的数据包平均值的差值绝对值均小于或等于所述第一预设阈值，则进一步执行以下步骤：检测当前帧图像中预设数量的像素点中是否存在超过目标数量的像素点发生相位随机变化，若存在超过目标数量的像素点发生相位随机变化，则判定存在多机干扰。
为实现上述目的，本发明还提供了一种iToF相机的多机干扰检测与去除装置，包括：获取模块，用于获取当前帧图像的四个相位下每一相位的调制原始数据的数据包平均值；检测模块，用于检测所述四个相位中是否存在任意两相位的调制原始数据的数据包平均值的差值绝对值大于第一预设阈值，若存在任意两相位的调制原始数据的数据包平均值的差值绝对值大于第一预设阈值，则判定存在多机干扰；以及去除模块，用于当存在多机干扰时，所述iToF相机的图像传感器停止曝光并进行随机延时后再次启动曝光，以去除多机干扰。
在一些实施例中，所述检测模块进一步用于在任意两相位的调制原始数据的数据包平均值的差值绝对值均小于或等于所述第一预设阈值时，检测当前帧图像中预设数量的像素点中是否存在目标数量的像素点发生相位随机变化，若存在目标数量的像素点发生相位随机变化，则判定存在多机干扰。
本发明通过检测包尾的调制原始数据的数据包平均值信息，以包尾的数据包平均值来检测判断是否存在多机干扰，减少了硬件的成本以及避免积分时间的改变带来的影响；进一步结合当前帧图像中多个像素点的相位随机变化，来检测是否存在多机干扰，提高了检测的准确性。当检测到存在多机干扰，通过随机延时后，重新触发相机，不需要额外的硬件去配置，减少系统的成本。
附图说明
为了更清楚地说明本发明实施例中的技术方案，下面将对实施例描述中所需要使用的附图作简要介绍。显而易见地，下面描述中的附图仅是本发明的一些实施例，对于本领域的普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其它的附图。
图1为iToF成像原理示意图；
图2为多机干扰示意图；
图3为本发明提供的iToF相机的多机干扰检测与去除方法步骤示意图；
图4为本发明一实施例提供的四相位法解调深度示意图；
图5为本发明一实施例提供的包尾布局示意图；
图6为本发明一实施例提供的光脉冲碰撞后偏移示意图；
图7为本发明一实施例提供的检测像素点相位随机变化的示意图；
图8为本发明一实施例提供的随机延时干扰去除示意图；
图9为本发明一实施例提供的多机干扰检测与去除方法流程图；
图10为本发明提供的iToF相机的多机干扰检测与去除装置的结构框图。
具体实施方式
下面将结合附图，对本发明实施例中的技术方案进行清楚、完整地描述。显然，所描述的实施例仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域技术人员在没有作出创造性劳动前提下所获得的所有其它实施例，都属于本发明保护的范围。
本发明一实施例提供了一种iToF相机的多机干扰检测与去除方法。
请一并参阅图3~图8，其中，图3为本发明提供的iToF相机的多机干扰检测与去除方法步骤示意图，图4为本发明一实施例提供的四相位法解调深度示意图，图5为本发明一实施例提供的包尾布局示意图，图6为本发明一实施例提供的光脉冲碰撞后偏移示意图，图7为本发明一实施例提供的检测像素点相位随机变化的示意图，图8为本发明一实施例提供的随机延时干扰去除示意图。
如图3所示，本实施例所述iToF相机的多机干扰检测与去除方法，包括如下步骤：S1、获取当前帧图像的四个相位下每一相位的调制原始数据的数据包平均值；S2、检测所述四个相位中是否存在任意两相位的调制原始数据的数据包平均值的差值绝对值大于第一预设阈值，若存在任意两相位的调制原始数据的数据包平均值的差值绝对值大于第一预设阈值，则判定存在多机干扰；以及S3、当存在多机干扰时，所述iToF相机的图像传感器停止曝光并进行随机延时后再次启动曝光，以去除多机干扰。
关于步骤S1、获取当前帧图像的四个相位下每一相位的调制原始数据的数据包平均值。
具体来说，iToF相机通常分为连续调制和脉冲调制，对于连续调制iToF相机，像素通常是由两个数据包（2tap）组成，计算被测物体的深度通过四相位去求解。
如图4所示，通常间接飞行时间通过四相位法解调深度。采用四相位法计算深度图像的相位的计算公式为：
phase=arctan[（Q3-Q4）/（Q1-Q2）]
其中，Q1为相位延时（Phase Delay）为0°时的测量相位，Q2为相位延时为90°时的测量相位，Q3为相位延时为180°时的测量相位，Q4为相位延时为270°时的测量相位。
随着被测物体距离的改变，需要曝光时间不断改变才能更好的探测物体。通常自动曝光（Automatic Exposure，简称AE）需要通过统计图像的所有像素的数据包平均值。对于由两个数据包（例如tapA和tapB）组成的像素，需要通过所有像素的tapA+tapB的平均统计信息，才能更好的去调节不同的积分时间。
在一些实施例中，当前帧图像的每一像素由两个数据包组成，所述数据包平均值进一步通过以下步骤获取：1）获取当前帧图像中每一像素的两个数据包的数据包和值；2）对当前帧图像中所有像素的数据包和值求和后除以当前帧图像的像素个数，获取当前帧图像的数据包平均值。所述方法还包括：将该数据包平均值放置于当前帧图像的包尾中。可以通过硬件（例如感光器件）进行每帧图像的调制原始数据的数据包平均值的自动计算，并直接输出至该帧图像的包尾中。包尾布局示意图如图5所示。
关于步骤S2、检测所述四个相位中是否存在任意两相位的调制原始数据的数据包平均值的差值绝对值大于第一预设阈值，若存在任意两相位的调制原始数据的数据包平均值的差值绝对值大于第一预设阈值，则判定存在多机干扰。
如图6所示，两个相机TOF1、TOF2的光脉冲发生碰撞，则一相机的像素会接收到另一个相机的光脉冲，光脉冲发生偏移（shift）。光脉冲偏移会导致四个相位的调制原始数据中至少有一个相位的调制原始数据的数据包平均值发生变化，且随着时间的推移，光脉冲也在不断的前移，受影响的数据包平均值会先变大后慢慢变小。
当处于复杂场景下，由于积分时间以及其它运动物体的引入，调制原始数据0度和180度之和以及90度和270度之和不为常数。通过检测整张画面中所有像素的tapA+tapB的数据包平均值，两两相减，当超过第一预设阈值才判定为存在多机干扰可能。
即，当多机干扰时，至少存在一组数据包平均值的差值绝对值abs_diff1大于第一预设阈值Thr1：
abs_diff1（quadm-quadn）>Thr1
其中，quadm、quadn分别为四个相位中某两相位的调制原始数据的数据包平均值，Thr1为用户设定的第一预设阈值。若检测到存在任意两相位的调制原始数据的数据包平均值的差值绝对值abs_diff1大于第一预设阈值Thr1，则判定存在多机干扰。
在一些实施例中，所述第一预设阈值Thr1为一预设亮度阈值，且所述第一预设阈值Thr1随平均亮度（Mean Amplitude）的增加而减小。平均亮度越高，噪声越小，第一预设阈值Thr1就可以设定的越小。在一些实施例中，第一预设阈值Thr1默认为100。
利用自动曝光的统计信息，只需要通过检测包尾的调制原始数据的数据包平均值信息，以包尾的数据包平均值来检测判断是否存在多机干扰，减少了硬件的成本以及避免积分时间的改变带来的影响。
在一些实施例中，所述方法进一步包括：若任意两相位的调制原始数据的数据包平均值的差值绝对值均小于或等于所述第一预设阈值，则进一步执行以下步骤：检测当前帧图像中预设数量的像素点中是否存在超过目标数量的像素点发生相位随机变化，若存在超过目标数量的像素点发生相位随机变化，则判定存在多机干扰。具体来说，存在有一种情况，当四个相位的调制原始数据同时都受到干扰，则四个相位的调制原始数据的数据包平均值都同时发生变化，四个数据包平均值变化呈现单调递增或单调递减，则四个相位会呈现随机变化；此时可能会造成任意两相位的调制原始数据的数据包平均值的差值绝对值均小于或等于所述第一预设阈值，则需要进一步检测像素点相位随机变化以确定是否存在多机干扰。
接上述实施例，所述的检测当前帧图像中预设数量的像素点中是否存在超过目标数量的像素点发生相位随机变化的步骤进一步包括：分别获取预设数量的像素点的当前相位与前一相位相减后的相位变化绝对值；获取所有相位变化绝对值中大于第二预设阈值的计数值；若所述计数值大于所述目标数量，则存在超过目标数量的像素点发生相位随机变化。具体的，根所述预设数量可以为5个，所述目标数量可以为3个，所述第二预设阈值为一预设相位阈值。
请参阅图7，其为本发明一实施例提供的检测像素点相位随机变化的示意图。图7示出了检测当前帧图像中5个像素点Point0~Point4中是否存在超过3个像素点发生相位随机变化，以检测是否存在多机干扰。具体的，1）对每一像素点Point0~Point4，计算其当前相位（Current Phase）P-Cur与前一相位（Previous Phase）P-Pre相减后的相位变化绝对值abs_diff2；2）对每一相位变化绝对值abs_diff2，将其与第二预设阈值Thr2进行比较，若abs_diff2>Thr2，则计数值加1（Cnt++），否则计数值不变；3）在5个像素点的相位变化绝对值abs_diff2均与第二预设阈值Thr2比较后，判断获取的计数值是否大于3，若Cnt>3，则存在超过3个像素点发生相位随机变化，即判定存在多机干扰。其中，所述第二预设阈值Thr2为进行相位比较所设定的相位阈值。
在一些实施例中，可以进一步检测是否存在连续三张图像中，每张图像的5个像素点中存在超过3个像素点发生相位随机变化，从而判定检测到存在多机干扰，以进一步提高检测的准确性。
以包尾的统计的调制原始数据的数据包平均值以及当前帧图像中多个像素点的相位随机变化，来检测是否存在多机干扰，提高了检测的准确性，且减少了硬件的成本以及避免积分时间的改变带来的影响。
关于步骤S3、当存在多机干扰时，所述iToF相机的图像传感器停止曝光并进行随机延时后再次启动曝光，以去除多机干扰。
具体来说，当检测到干扰后，即两个光脉冲发生碰撞，则图像传感器需要停止曝光，加上一定的随机延时（Random Delay）时间，则两个光脉冲碰撞的几率就大大降低了，再次启动曝光，则可以去除多机干扰，如图8所示。
利用自动曝光的统计信息，只需要通过检测包尾的调制原始数据的数据包平均值信息，以包尾的数据包平均值来检测判断是否存在多机干扰，减少了硬件的成本以及避免积分时间的改变带来的影响；当检测到存在多机干扰，通过随机延时后，重新触发（Trigger）相机，不需要额外的硬件去配置，减少系统的成本。也可以采用外部硬件（例如感光器件），在曝光之前检测是否存在多机干扰，若存在多机干扰，直接通过硬件随机延时，以降低光脉冲的碰撞。
在一些实施例中，在获取所述数据包平均值之前，所述方法进一步包括：1）设定寄存器的配置ID，并将配置ID值放置于包尾中；2）检测当前帧图像的包尾ID值和所述配置ID值是否一致；3）若包尾ID值和所述配置ID值一致，则当前帧图像有效并进行获取所述数据包平均值的操作，否则丢弃当前帧图像。包尾ID值指包尾中存储的配置ID值。通常情况下，飞行时间整个数据通路有较多的缓存，这样就可能会有几帧的干扰数据缓存在缓存器（buffer）中。通过设定寄存器的配置ID（Config ID），并将配置ID值也同样打包放置到包尾中，每一帧检测包尾ID值和寄存器的配置ID值是否一致，来判断当前帧是否有效，当不一致时，则会将当前帧直接丢掉，以提高多机干扰检测效率。
接上述实施例，当设定了寄存器的配置ID时，所述的图像传感器停止曝光并进行随机延时后再次启动曝光的步骤进一步包括：在图像传感器停止曝光后，将当前配置ID值取反并设定为寄存器的配置ID，之后进行随机延时。由于图像传感器传输的数据有缓存，为防止缓存的数据是受到干扰的数据，本发明进一步通过设定配置ID，从包尾中去检查，以保证拿到的用于进行检测的数据是最新的数据。
以下结合图9对本发明iToF相机的多机干扰检测与去除方法的流程做进一步解释说明。本实施例具体的流程为：S91、检测当前帧图像的包尾ID值和寄存器的配置ID值是否一致，若包尾ID值和所述配置ID值一致，则当前帧图像有效并继续进行获取所述数据包平均值的操作，否则丢弃当前帧图像；S92、分别获取0度、90度、180度、270度相位的调制原始数据的数据包平均值：quad0_（A+B Mean）、quad1_（A+B Mean）、quad2_（A+B Mean）、quad3_（A+B Mean），并两两相减，获取相应的差值绝对值abs_diff1；S93、对每一差值绝对值abs_diff1，将其与第一预设亮度阈值Thr1进行比较，若abs_diff1>Thr1，则判定存在多机干扰，执行步骤S95，否则执行步骤S94；S94、检测当前帧图像中5个像素点中是否存在超过3个像素点发生相位随机变化（具体参考图7所示），若存在超过3个像素点发生相位随机变化，则判定存在多机干扰，执行步骤S95，否则判定多相机的光脉冲发射正常、不存在多机干扰；S95、iToF相机的图像传感器停止曝光；S96、将当前配置ID值取反并设定为寄存器的配置ID；S97、进行随机延时；S98、再次启动曝光。在一些实施例中，还可以根据平均亮度（MeanAmplitude）调节所述第一预设阈值Thr1获取调节后的亮度阈值Gain，并将差值绝对值abs_diff1与调节后的亮度阈值Gain进行比较。平均亮度越高，噪声越小，调节后的亮度阈值越小。
根据以上内容可以看出，本发明只需要通过检测包尾的调制原始数据的数据包平均值信息，以包尾的数据包平均值来检测判断是否存在多机干扰，减少了硬件的成本以及避免积分时间的改变带来的影响；进一步结合当前帧图像中多个像素点的相位随机变化，来检测是否存在多机干扰，提高了检测的准确性。当检测到存在多机干扰，通过随机延时后，重新触发相机，不需要额外的硬件去配置，减少系统的成本。
基于同一发明构思，本发明还提供了一种iToF相机的多机干扰检测与去除装置。所提供的iToF相机的多机干扰检测与去除装置可以采用如图3~图9所示的iToF相机的多机干扰检测与去除方法完成对iToF相机的多机干扰检测与去除。
请参阅图10，其为本发明一实施例提供的iToF相机的多机干扰检测与去除装置的结构框图。如图10所示，所述iToF相机的多机干扰检测与去除装置包括：获取模块101、检测模块102以及去除模块103。
具体来说，获取模块101用于获取当前帧图像的四个相位下每一相位的调制原始数据的数据包平均值；检测模块102用于检测所述四个相位中是否存在任意两相位的调制原始数据的数据包平均值的差值绝对值大于第一预设阈值，若存在任意两相位的调制原始数据的数据包平均值的差值绝对值大于第一预设阈值，则判定存在多机干扰；去除模块103用于当存在多机干扰时，所述iToF相机的图像传感器停止曝光并进行随机延时后再次启动曝光，以去除多机干扰。
在一些实施例中，所述检测模块102进一步用于在任意两相位的调制原始数据的数据包平均值的差值绝对值均小于或等于所述第一预设阈值时，检测当前帧图像中预设数量的像素点中是否存在目标数量的像素点发生相位随机变化，若存在目标数量的像素点发生相位随机变化，则判定存在多机干扰。
各模块的工作方式可参考图3~图9所示的iToF相机的多机干扰检测与去除方法中相应步骤的描述，此处不再赘述。
基于同一发明构思，本发明还提供了一种电子设备，包括存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机可执行程序；所述处理器执行所述计算机可执行程序时实现如图3~图9所示的iToF相机的多机干扰检测与去除方法的步骤。
在本发明构思的领域中是可以根据执行所描述的一个或多个功能的模块来描述和说明实施例。这些模块（本文也可以称为单元等）可以由模拟和/或数字电路物理地实现，例如逻辑门、集成电路、微处理器、微控制器、存储器电路、无源电子元件、有源电子元件、光学组件、硬连线电路等，并且可以可选地由固件和/或软件来驱动。电路例如可以在一个或更多个半导体芯片中实施。构成模块的电路可以由专用硬件实现，或者由处理器（例如，一个或更多个编程的微处理器和相关电路）实现，或者由执行模块的一些功能的专用硬件和执行模块的其它功能的处理器的组合来实现。在不脱离本发明构思的范围的情况下，可以将实施例的每个模块物理地分成两个或更多个交互且分立的模块。同样地，在不脱离本发明构思的范围的情况下，可以将实施例的模块物理地组合成更复杂的模块。
通常，可以至少部分地从上下文中的用法理解术语。例如，在本文中所使用的术语“一个或多个”至少部分取决于上下文，可以用于以单数意义描述特征、结构或特性，或可以用于以复数意义描述特征、结构或特征的组合。另外，术语“基于”可以被理解为不一定旨在表达一组排他性的因素，而是可以替代地，同样至少部分地取决于上下文，允许存在不一定明确描述的其它因素。
需要说明的是，本发明的文件中涉及的术语“包括”和“具有”以及它们的变形，意图在于覆盖不排他的包含。术语“第一”、“第二”等是用于区别类似的对象，而不必用于描述特定的顺序或先后次序，除非上下文有明确指示，应该理解这样使用的数据在适当情况下可以互换。另外，在不冲突的情况下，本发明中的实施例及实施例中的特征可以相互组合。此外，在以上说明中，省略了对公知组件和技术的描述，以避免不必要地混淆本发明的概念。上述各个实施例中，每个实施例重点说明的都是与其它实施例的不同之处，各个实施例之间相同/相似的部分互相参见即可。
以上所述仅是本发明的优选实施方式，应当指出，对于本技术领域的普通技术人员，在不脱离本发明原理的前提下，还可以做出若干改进和润饰，这些改进和润饰也应视为本发明的保护范围。

Claims (8)

1.一种iToF相机的多机干扰检测与去除方法，其特征在于，包括如下步骤：获取当前帧图像的四个相位下每一相位的调制原始数据的数据包平均值，所述四个相位分别为0 度相位、90 度相位、180 度相位、270 度相位；检测所述四个相位中是否存在任意两相位的调制原始数据的数据包平均值的差值绝对值大于第一预设阈值，若存在任意两相位的调制原始数据的数据包平均值的差值绝对值大于第一预设阈值，则判定存在多机干扰；若任意两相位的调制原始数据的数据包平均值的差值绝对值均小于或等于所述第一预设阈值，则进一步检测当前帧图像中预设数量的像素点中是否存在超过目标数量的像素点发生相位随机变化，若存在超过目标数量的像素点发生相位随机变化，则判定存在多机干扰；以及当存在多机干扰时，所述iToF相机的图像传感器停止曝光并进行随机延时后再次启动曝光，以去除多机干扰。
2.根据权利要求1所述的方法，其特征在于，当前帧图像的每一像素由两个数据包组成，所述数据包平均值进一步通过以下步骤获取：获取当前帧图像中每一像素的两个数据包的数据包和值；对当前帧图像中所有像素的数据包和值求和后除以当前帧图像的像素个数，获取当前帧图像的数据包平均值，并将该数据包平均值放置于当前帧图像的包尾中。
3.根据权利要求1所述的方法，其特征在于，所述第一预设阈值为一预设亮度阈值、并随平均亮度的增加而减小。
4.根据权利要求1所述的方法，其特征在于，所述的检测当前帧图像中预设数量的像素点中是否存在超过目标数量的像素点发生相位随机变化的步骤进一步包括：分别获取预设数量的像素点的当前相位与前一相位相减后的相位变化绝对值；获取所有相位变化绝对值中大于第二预设阈值的计数值；若所述计数值大于所述目标数量，则存在超过目标数量的像素点发生相位随机变化。
5.根据权利要求4所述的方法，其特征在于，所述预设数量为5个，所述目标数量为3个，所述第二预设阈值为一预设相位阈值。
6.根据权利要求1所述的方法，其特征在于，在获取所述数据包平均值之前，所述方法进一步包括：设定寄存器的配置ID，并将配置ID值放置于包尾中；检测当前帧图像的包尾ID值和所述配置ID值是否一致；若包尾ID值和所述配置ID值一致，则当前帧图像有效并进行获取所述数据包平均值的操作，否则丢弃当前帧图像。
7.根据权利要求6所述的方法，其特征在于，所述的图像传感器停止曝光并进行随机延时后再次启动曝光的步骤进一步包括：在图像传感器停止曝光后，将当前配置ID值取反并设定为寄存器的配置ID，之后进行随机延时。
8. 一种iToF相机的多机干扰检测与去除装置，其特征在于，包括：获取模块，用于获取当前帧图像的四个相位下每一相位的调制原始数据的数据包平均值，所述四个相位分别为0 度相位、90 度相位、180 度相位、270 度相位；检测模块，用于检测所述四个相位中是否存在任意两相位的调制原始数据的数据包平均值的差值绝对值大于第一预设阈值，若存在任意两相位的调制原始数据的数据包平均值的差值绝对值大于第一预设阈值，则判定存在多机干扰；所述检测模块进一步用于在任意两相位的调制原始数据的数据包平均值的差值绝对值均小于或等于所述第一预设阈值时，检测当前帧图像中预设数量的像素点中是否存在目标数量的像素点发生相位随机变化，若存在目标数量的像素点发生相位随机变化，则判定存在多机干扰；以及去除模块，用于当存在多机干扰时，所述iToF相机的图像传感器停止曝光并进行随机延时后再次启动曝光，以去除多机干扰。
CN202310466111.0A 2023-04-27 2023-04-27 一种iToF相机的多机干扰检测与去除方法及装置 Active CN116184364B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202310466111.0A CN116184364B (zh) 2023-04-27 2023-04-27 一种iToF相机的多机干扰检测与去除方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202310466111.0A CN116184364B (zh) 2023-04-27 2023-04-27 一种iToF相机的多机干扰检测与去除方法及装置

Publications (2)

Publication Number Publication Date
CN116184364A CN116184364A (zh) 2023-05-30
CN116184364B true CN116184364B (zh) 2023-07-07

Family

ID=86452630

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202310466111.0A Active CN116184364B (zh) 2023-04-27 2023-04-27 一种iToF相机的多机干扰检测与去除方法及装置

Country Status (1)

Country Link
CN (1) CN116184364B (zh)

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2011132584A1 (ja) * 2010-04-23 2011-10-27 浜松ホトニクス株式会社 膜電位変化検出装置および膜電位変化検出方法
WO2019033777A1 (zh) * 2017-08-18 2019-02-21 深圳市道通智能航空技术有限公司 一种提升3d图像深度信息的方法、装置及无人机
CN115825978A (zh) * 2022-10-21 2023-03-21 福建杰木科技有限公司 iToF相机的温度影响测距的补偿方法以及系统、电子设备

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9857469B2 (en) * 2010-10-22 2018-01-02 Heptagon Micro Optics Pte. Ltd. System and method for multi TOF camera operation using phase hopping
US10215856B1 (en) * 2017-11-27 2019-02-26 Microsoft Technology Licensing, Llc Time of flight camera
CN108802746B (zh) * 2017-11-30 2024-02-13 北醒（北京）光子科技有限公司 一种抗干扰的测距方法及装置
CN109613517B (zh) * 2018-12-12 2021-01-15 北醒（北京）光子科技有限公司 一种TOF Lidar多机抗干扰工作方法
US11474249B2 (en) * 2019-08-29 2022-10-18 Wisconsin Alumni Reseach Foundation Systems, methods, and media for stochastic exposure coding that mitigates multi-camera interference in continuous wave time-of-flight imaging
CN110636183B (zh) * 2019-09-27 2021-11-30 浙江光珀智能科技有限公司 一种抗干扰方法、系统及存储介质
WO2021256290A1 (ja) * 2020-06-19 2021-12-23 ソニーセミコンダクタソリューションズ株式会社 撮像装置
CN111830489B (zh) * 2020-07-22 2023-03-24 浙江光珀智能科技有限公司 一种多台tof相机抗干扰方法及系统
CN114422656A (zh) * 2020-10-12 2022-04-29 华为技术有限公司 图像处理方法和装置
CN115047436A (zh) * 2022-08-16 2022-09-13 武汉极动智能科技有限公司 抗干扰方法、装置、系统及存储介质
CN115599163A (zh) * 2022-10-21 2023-01-13 福建杰木科技有限公司（Cn） iToF相机去混叠方法、系统以及电子设备

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2011132584A1 (ja) * 2010-04-23 2011-10-27 浜松ホトニクス株式会社 膜電位変化検出装置および膜電位変化検出方法
WO2019033777A1 (zh) * 2017-08-18 2019-02-21 深圳市道通智能航空技术有限公司 一种提升3d图像深度信息的方法、装置及无人机
CN115825978A (zh) * 2022-10-21 2023-03-21 福建杰木科技有限公司 iToF相机的温度影响测距的补偿方法以及系统、电子设备

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
飞行时间法三维成像摄像机数据处理方法研究;潘华东;王其聪;谢斌;许世芳;刘济林;;浙江大学学报(工学版)(06);1049-1056 *

Also Published As

Publication number Publication date
CN116184364A (zh) 2023-05-30

Similar Documents

Publication Publication Date Title
CN107424186B (zh) 深度信息测量方法及装置
TWI743471B (zh) 第一光子相關飛行時間感測器
US11694350B2 (en) Time-of-flight depth measurement using modulation frequency adjustment
TWI745678B (zh) 相關的飛行時間感測器
US20150144790A1 (en) Video and 3d time-of-flight image sensors
US9978148B2 (en) Motion sensor apparatus having a plurality of light sources
US10473461B2 (en) Motion-sensor device having multiple light sources
US20140347553A1 (en) Imaging devices with light sources for reduced shadow, controllers and methods
US10732285B2 (en) Multi-phase active light depth system
WO2018110183A1 (ja) 撮像制御装置、撮像制御方法、プログラムおよび記録媒体
CN114270803B (zh) 相位检测自动聚焦(pdaf)传感器
US20200191966A1 (en) Electronic device with improved work surface adaptability
CN109804271B (zh) 功率控制方法、测距模块及电子装置
WO2020066236A1 (ja) 奥行取得装置、奥行取得方法およびプログラム
CN116184364B (zh) 一种iToF相机的多机干扰检测与去除方法及装置
US20210325514A1 (en) Time of flight apparatus and method
WO2019050024A1 (ja) 距離測定方法および距離測定装置
US8391698B2 (en) Systems and methods of generating Z-buffers for an image capture device of a camera
US20200092452A1 (en) Image generating method and electronic apparatus
US20050253958A1 (en) Integrated image capturing device
WO2020087486A1 (zh) 深度图像处理方法、深度图像处理装置和电子装置
TWI863966B (zh) 確定光脈衝在光脈衝源與光感測器陣列的畫素之間的行進時間的系統及方法
CN118891890A (zh) 图像传感器和数据结构
CN117741682B (zh) 距离检测方法、测距系统、电子设备及可读存储介质
US20240420289A1 (en) Image signal processor and noise removal method

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
TR01 Transfer of patent right

Effective date of registration: 20241104

Address after: No. 942, Tonglong 2nd Road, Torch High tech Zone (Xiang'an) Industrial Zone, Xiamen City, Fujian Province 361115, China 423-49

Patentee after: Xingchen Technology Co.,Ltd.

Country or region after: China

Address before: Room 308 and Room 309, No. 268 Xiangke Road, China (Shanghai) Pilot Free Trade Zone, Pudong New Area, Shanghai, 201210

Patentee before: Shanghai Jieming Technology Co.,Ltd.

Country or region before: China

TR01 Transfer of patent right