CN112633305A - 关键点标注方法及相关设备 - Google Patents

关键点标注方法及相关设备 Download PDF

Info

Publication number
CN112633305A
CN112633305A CN201910906487.2A CN201910906487A CN112633305A CN 112633305 A CN112633305 A CN 112633305A CN 201910906487 A CN201910906487 A CN 201910906487A CN 112633305 A CN112633305 A CN 112633305A
Authority
CN
China
Prior art keywords
positions
key points
image
selecting
target
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201910906487.2A
Other languages
English (en)
Inventor
邢倬
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shenzhen Intellifusion Technologies Co Ltd
Original Assignee
Shenzhen Intellifusion Technologies Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenzhen Intellifusion Technologies Co Ltd filed Critical Shenzhen Intellifusion Technologies Co Ltd
Priority to CN201910906487.2A priority Critical patent/CN112633305A/zh
Publication of CN112633305A publication Critical patent/CN112633305A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00—Pattern recognition
    • G06F18/20—Analysing
    • G06F18/21—Design or setup of recognition systems or techniques; Extraction of features in feature space; Blind source separation
    • G06F18/214—Generating training patterns; Bootstrap methods, e.g. bagging or boosting
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Data Mining & Analysis (AREA)
  • General Physics & Mathematics (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Evolutionary Biology (AREA)
  • Evolutionary Computation (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • General Engineering & Computer Science (AREA)
  • Artificial Intelligence (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Human Computer Interaction (AREA)
  • Multimedia (AREA)
  • Image Analysis (AREA)

Abstract

本申请公开了一种关键点标注方法，应用于电子设备，方法包括：选取包括N个第一目标的第一图像，所述N为正整数；选取第一模板图像，所述第一模板图像包括K个第一关键点，所述K为正整数；在所述第一图像上框选所述N个第一目标中的其中一个第一目标，所述其中一个第一目标的类型与所述第一模板图像的类型匹配；根据所述K个第一关键点对所述其中一个第一目标进行关键点标注。采用本申请实施例可提升关键点标注的效率。

Description

关键点标注方法及相关设备
技术领域
本申请涉及图像处理技术领域，尤其涉及一种关键点标注方法及相关设备。
背景技术
关键点标注是标注人员按照算法人员的要求，找到图像中的关键点，并对其坐标进行记录和存储，实现对具有图像特征识别功能的AI模型的训练。目前采用的关键点标注法主要是顺序标注法和索引标注法，该两种标注法均需要标注人员对关键点一一进行标注，效率较低。
发明内容
本申请实施例提供一种关键点标注方法及相关设备，用于提升关键点标注的效率。
第一方面，本申请实施例提供一种关键点标注方法，应用于电子设备，方法包括：
选取包括N个第一目标的第一图像，所述N为正整数；
选取第一模板图像，所述第一模板图像包括第二目标的K个第一关键点，所述K为正整数；
在所述第一图像上框选所述N个第一目标中的其中一个第一目标，所述其中一个第一目标的类型与所述第二目标的类型匹配；
根据所述K个第一关键点对所述其中一个第一目标进行关键点标注。
第二方面，本申请实施例提供一种关键点标注装置，应用于电子设备，该装置包括：
第一选取单元，用于选取包括N个第一目标的第一图像，所述N为正整数；
第二选取单元，用于选取第一模板图像，所述第一模板图像包括第二目标的K个第一关键点，所述K为正整数；
框选单元，用于在所述第一图像上框选所述N个第一目标中的其中一个第一目标，所述其中一个第一目标的类型与所述第二目标的类型匹配；
标注单元，用于根据所述K个第一关键点对所述其中一个第一目标进行关键点标注。
第三方面，本申请实施例提供一种电子设备，包括处理器、存储器、通信接口以及一个或多个程序，其中，上述一个或多个程序被存储在上述存储器中，并且被配置由上述处理器执行，上述程序包括用于执行本申请实施例第一方面所述的方法中的步骤的指令。
第四方面，本申请实施例提供了一种计算机可读存储介质，其中，上述计算机可读存储介质存储用于电子数据交换的计算机程序，其中，上述计算机程序使得计算机执行如本申请实施例第一方面所述的方法中所描述的部分或全部步骤。
第五方面，本申请实施例提供了一种计算机程序产品，其中，上述计算机程序产品包括存储了计算机程序的非瞬时性计算机可读存储介质，上述计算机程序可操作来使计算机执行如本申请实施例第一方面所述的方法中所描述的部分或全部步骤。
可以看出，在本申请实施例中，首先选取第一图像与第一模板图像，然后根据第一模板图像在第一图像上框选其中一个第一目标，最后根据关键点模板中多个第一关键点对该其中一个第一目标进行关键点标注，可降低人工参与关键点标注所需的时间，提升了关键点标注的效率。
本申请的这些方面或其他方面在以下实施例的描述中会更加简明易懂。
附图说明
为了更清楚地说明本申请实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1是本申请实施例提供的一种电子设备的结构示意图；
图2是本申请实施例提供的一种关键点标注方法的流程示意图；
图3是本申请实施例提供的另一种关键点标注方法的流程示意图；
图4本申请实施例提供的一种电子设备的结构示意图；
图5本申请实施例提供的一种第一目标跟踪装置的结构示意图。
具体实施方式
为了使本技术领域的人员更好地理解本申请方案，下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本申请一部分的实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都应当属于本申请保护的范围。
以下分别进行详细说明。
本申请的说明书和权利要求书及所述附图中的术语“第一”、“第二”、“第三”和“第四”等是用于区别不同对象，而不是用于描述特定顺序。此外，术语“包括”和“具有”以及它们任何变形，意图在于覆盖不排他的包含。例如包含了一系列步骤或单元的过程、方法、系统、产品或设备没有限定于已列出的步骤或单元，而是可选地还包括没有列出的步骤或单元，或可选地还包括对于这些过程、方法、产品或设备固有的其它步骤或单元。
在本文中提及“实施例”意味着，结合实施例描述的特定特征、结构或特性可以包含在本申请的至少一个实施例中。在说明书中的各个位置出现该短语并不一定均是指相同的实施例，也不是与其它实施例互斥的独立的或备选的实施例。本领域技术人员显式地和隐式地理解的是，本文所描述的实施例可以与其它实施例相结合。
以下，对本申请中的部分用语进行解释说明，以便于本领域技术人员理解。
电子设备可以包括各种具有无线通信功能的手持设备、车载设备、可穿戴设备、计算设备或连接到无线调制解调器的其他处理设备，以及各种形式的用户设备(UserEquipment，UE)，移动台(Mobile Station，MS)，终端设备(terminal device)等等。
如图1所示，图1是本申请实施例提供的一种电子设备的结构示意图。该电子设备包括处理器、存储器、显示屏、随机存取存储器(Random Access Memory，RAM)、摄像头。其中，存储器、显示屏、RAM和摄像头均与处理器连接。
进一步地，电子设备还包括信号通信接口、信号处理器、扬声器、麦克风和传感器，信号处理器、扬声器、麦克风和传感器均与处理器连接，通信接口与信号处理器连接。
其中，显示屏可以是液晶显示器(Liquid Crystal Display，LCD)、有机或无机发光二极管(Organic Light-Emitting Diode，OLED)、有源矩阵有机发光二极体面板(ActiveMatrix/Organic Light Emitting Diode，AMOLED)等。
其中，该摄像头可以是普通摄像头、也可以是红外摄像，在此不作限定。该摄像头可以是前置摄像头或后置摄像头，在此不作限定。
其中，传感器包括以下至少一种：光感传感器、陀螺仪、红外接近传感器、指纹传感器、压力传感器等等。其中，光感传感器，也称为环境光传感器，用于检测环境光亮度。光线传感器可以包括光敏元件和模数转换器。其中，光敏元件用于将采集的光信号转换为电信号，模数转换器用于将上述电信号转换为数字信号。可选的，光线传感器还可以包括信号放大器，信号放大器可以将光敏元件转换的电信号进行放大后输出至模数转换器。上述光敏元件可以包括光电二极管、光电三极管、光敏电阻、硅光电池中的至少一种。
其中，处理器是电子设备的控制中心，利用各种接口和线路连接整个电子设备的各个部分，通过运行或执行存储在存储器内的软体程序和/或模块，以及调用存储在存储器内的数据，执行电子设备的各种功能和处理数据，从而对电子设备进行整体监控。
其中，处理器可集成应用处理器和调制解调处理器，其中，应用处理器主要处理操作系统、用户界面和应用程序等，调制解调处理器主要处理无线通信。可以理解的是，上述调制解调处理器也可以不集成到处理器中。
其中，存储器用于存储软体程序和/或模块，处理器通过运行存储在存储器的软件程序和/或模块，从而执行电子设备的各种功能应用以及数据处理。存储器可主要包括存储程序区和存储数据区，其中，存储程序区可存储操作系统、至少一个功能所需的软体程序等；存储数据区可存储根据电子设备的使用所创建的数据等。此外，存储器可以包括高速随机存取存储器，还可以包括非易失性存储器，例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。
下面对本申请实施例进行详细介绍。
如图2所示，本申请实施例提供一种关键点标注方法，应用于上述电子设备，具体包括以下步骤：
步骤201：选取包括N个第一目标的第一图像，所述N为正整数；
其中，假如第一图像为人脸图像，该第一目标例如有眼睛、鼻子、耳朵、嘴巴等等。假如第一图像为人体图像，该第一目标例如有手部、手掌、腿部、脚掌、头部等等。
可选地，所述选取包括N个第一目标的第一图像，包括：显示图像选择界面，所述图像选择界面显示有多张图像；在检测到针对所述图像选择界面的第一选择操作的情况下，选取所述第一选择操作所选择的第一图像。
举例来说，假设在图像选择界面上显示有3个图像，如图像1、图像2和图像3，如果用户通过鼠标或手动触摸触控屏选中了图像1，第一图像为图像1。
可选地，所述方法还包括：电子设备确定第一图像的分辨率大于或等于第一阈值。
可选地，所述方法还包括：若第一图像的分辨率小于第一阈值，则电子设备对所述第一图像进行图像，处理后的第一图像的分辨率大于或等于第一阈值。其中，第一阈值可以为230像素/英尺、250像素/英尺、300像素/英尺、330像素/英尺或是其他值。
步骤202：选取第一模板图像，所述第一模板图像包括第二目标的K个第一关键点，所述K为正整数。
其中，假如第一图像为人脸图像，第一模板图像例如有眼睛模板图像、鼻子模板图像、耳朵模板图像、嘴巴模板图像等等。假如第一图像为人体图像，第一模板图像例如有手部模板图像、手掌模板图像、腿部模板图像、脚掌模板图像、头部模板图像等等。
不同的第一模板图像对应的第二目标是不同的。不同的第一模板图像对应的第一关键点的数量可以是相同的也可以是不同的，在此不作限定。不同的第一模板图像的高度或宽度可以是相同的也可以是不同的，在此不作限定。
其中，所述K个第一关键点用于表示所述第一模板图像中第二目标的不同位置的点。举例来说，若第二目标是眼睛，K个第一关键点用于表示眼睛轮廓的不同点。又举例来说，若第二目标是嘴巴，K个第一关键点用于表示嘴巴轮廓的不同点。
可选地，所述选取第一模板图像，包括：显示模板选择界面，所述模板选择界面显示有多张模板图像；在检测到针对所述模板选择界面的第二选择操作的情况下，选取所述的人选择操作所选择的第一模板图像。
举例来说，假设在模板选择界面上显示有3个模板图像，如模板图像a1、模板图像a2和模板图像a3，用户通过鼠标或手动触摸触控屏选中了模板图像a1，第一模板图像为模板图像a1。
步骤203：在所述第一图像上框选所述N个第一目标中的其中一个第一目标，所述其中一个第一目标的类型与所述第二目标的类型匹配。
其中，该其中一个第一目标的类型与第二目标的类型匹配，即该两个目标的类型相同。如第二目标为眼睛，那么第一目标也为眼睛。又如，第二目标为嘴巴，那么第一目标也为嘴巴。
可选地，所述在所述第一图像上框选所述N个第一目标中的其中一个第一目标，包括：显示框选界面，所述框选界面显示有所述第一图像、框选项和指针；在检测到针对所述框选项的选取操作的情况下，将所述指针的作用切换为框选；在检测到所述指针在所述第一图像上的框选操作的情况下，框选所述框选操作所框选的其中一个第一目标。
可选地，所述在所述第一图像上框选所述N个第一目标中的其中一个第一目标，包括：解析所述第一图像，得到所述N个第一目标的类型；确定与所述第二目标的类型匹配的其中一个第一目标；框选所述其中一个第一目标。
步骤204：根据所述K个第一关键点对所述其中一个第一目标进行关键点标注。
在本申请的一实施例中，所述K个第一关键点对应K个第一位置，每个所述第一位置用于表示其对应的所述第一关键点在所述第一模板图像中的位置；所述根据所述K个第一关键点对所述其中一个第一目标进行关键点标注，包括：
根据所述K个第一位置确定K个第二位置，所述K个第二位置对应K个第二关键点，所述其中一个第一目标包括所述K个第二关键点，所述K个第一位置与所述K个第二位置一一对应，每个所述第二位置用于表示其对应的所述第二关键点在所述第一图像中的位置；根据所述K个第二位置对所述K个第二关键点进行标注。
其中，K个第一关键点与K个第一位置一一对应，K个第二位置与K个第二个关键点一一对应。
在本申请的一实现方式中，所述其中一个第一目标被第一框框选，所述根据所述K个第一位置确定K个第二位置，包括：
从所述K个第一位置中选取M个第一位置，所述M大于或等于4；
基于所述第一模板图像的尺寸信息、所述第一框的尺寸信息和所述M个第一位置，分别确定所述M个第一位置对应的M个第二位置；
基于所述M个第一位置、所述M个第二位置和W个第一位置，分别确定所述W个第一位置对应的W个第二位置，所述W个第一位置和所述M个第一位置构成所述K个第一位置，所述W个第二位置和所述M个第二位置构成所述K个第二位置。
其中，M个第一位置与M个第二位置一一对应，所述W个第一位置与W个第二位置一一对应。
其中，所述M个第一位置包括第一位置X1、第一位置X2、第一位置X3和第一位置X4，所述X1对应的横坐标值小于所述K个第一位置中除所述X1之外的第一位置对应的横坐标值，所述X2对应的横坐标值大于所述K个第一位置中除所述X2之外的第一位置对应的横坐标值，所述X3对应的纵坐标值小于所述K个第一位置中除所述X3之外的第一位置对应的纵坐标值，所述X4对应的纵坐标值大于所述K个第一位置中除所述X4之外的第一位置对应的纵坐标值。
其中，所述M个第二位置包括第二位置Y1、第二位置Y2、第二位置Y3和第二位置Y4，所述Y1对应的横坐标值小于所述K个第二位置中除所述Y1之外的第二位置对应的横坐标值，所述Y2对应的横坐标值大于所述K个第二位置中除所述Y2之外的第二位置对应的横坐标值；所述Y3对应的纵坐标值小于所述K个第二位置中除所述Y3之外的第二位置对应的纵坐标值，所述Y4对应的纵坐标值大于所述K个第二位置中除所述Y4之外的第二位置对应的纵坐标值。
具体地，基于第一公式、所述第一模板图像的尺寸信息、所述第一框的尺寸信息和所述M个第一位置，分别确定所述M个第一位置对应的M个第二位置。
其中，所述第一模板图像的尺寸信息包括所述第一模板图像的第一高度和所述第一模板图像的第一宽度，所述第一框的尺寸信息包括所述第一框的第二高度和所述第一框的第二宽度。
其中，第一公式为：(A1/A2)＝(B1/B2)；在确定第二位置的横坐标值时，所述第一公式中的所述A1和所述A2均为宽度，所述B1和所述B2均为横坐标值，所述A1和所述B1关联的图像相同，所述A2和所述B2关联的图像相同；在确定第二位置的纵坐标值时，所述第一公式中的所述A1和所述A2均为高度，所述B1和所述B2均为纵坐标值，所述A1和所述B1关联的图像相同，所述A2和所述B2关联的图像相同。
举例来说，假设第一高度为100px，第一宽度为80px，第二高度为90px，第二宽度为80px，某个第一位置的坐标为(50px，40px)，那么可根据第一公式，第一高度，第二高度及该某个第一位置对应的纵坐标值，计算得到该某个第一位置对应的第二位置对应的纵坐标值为40px，以及可根据第一公式，第一宽度，第二宽度及第一位置对应的横坐标的值50px，计算得到该某个第一位置对应的第二位置对应的横坐标值为45px，由此可确定该某个第一位置对应的第二位置的坐标为(45px，40px)。
具体地，基于第二公式、所述M个第一位置、所述M个第二位置和W个第一位置，分别确定所述W个第一位置对应的W个第二位置。
其中，第二公式为：q＝min2+(p-min1)*(max2-min2)/(max1-min1)，在确定第二位置的横坐标值时，所述第二公式中的min1为最小的横坐标值，max1为最大的横坐标值，q为第二位置对应的横坐标值，p为其中一个第一位置对应的横坐标值；在确定第二位置的纵坐标值时，所述第二公式中的min1为最小的纵坐标值，max1为最大的纵坐标值，q为第二位置对应的纵坐标值，p为其中一个第一位置对应的纵坐标值。
举例来说，假设第一模板图像中存在5个关键点，对应的第一位置分别为(20px，30px)，(40px，32px)，(30px，50px)，(25px，20px)及(46px，35px)，其中，第一位置(20px，30px)对应的最小的横坐标值为20px，第一位置(25px，20px)对应的最小的纵坐标值为20px，第一位置(46px，35px)对应的最大的横坐标值为46px，第一位置(30px，50px)对应的最大的纵坐标值为50px。第一目标区域中存在5个关键点，其中的4个关键点对应的第二位置分别为(10px，15px)，(15px，25px)，(12px，10px)及(23px，17px)，其中，第二位置(10px，15px)对应的最小的横坐标值10px，第二位置(12px，10px)关联最小的纵坐标值10px，第二位置(23px，17px)关联最大的横坐标值23px，第二位置(15px，25px)关联最大的纵坐标值25px，因此，通过第一位置对应的最小的横坐标值，第二位置对应的最小的横坐标值，通过第一位置对应的最大的横坐标值，第二位置对应的最大的横坐标值及第一位置(40px，32px)对应的横坐标值40px，可以确定第一位置(40px，32px)对应的第二坐标对应的横坐标值为20px；通过第一位置对应的最小的纵坐标值，第二位置对应的最小的纵坐标值，通过第一位置对应的最大的纵坐标值，第二位置对应的最大的纵坐标值及第一位置(40px，32px)对应的纵坐标值32px，可以确定第一位置(40px，32px)对应的第二坐标对应的横坐标值为16px，最终确定第一位置(40px，32px)对应的第二位置为(20，16)。
可以看出，在本申请实施例中，首先选取第一图像与第一模板图像，然后根据第一模板图像在第一图像上框选其中一个第一目标，最后根据关键点模板中多个第一关键点对该其中一个第一目标进行关键点标注，可降低人工参与关键点标注所需的时间，提升了关键点标注的效率。
在本申请的一实施例中，使用第一框框选所述其中一个第一目标，所述根据所述K个第二位置对所述K个第二关键点进行标注之后，所述方法还包括：
调整所述第一框的尺寸和/或位置，调整后的所述第一框框选所述其中一个第一目标；
基于调整后的所述第一框的尺寸和/或位置，确定所述K个第二关键点对应的K个第三位置；
根据所述K个第三位置对所述K个第二关键点进行标注。
其中，调整第一框的尺寸可通过调整所述第一框的第二高度和/或第二宽度，所述第二高度和/或所述第二宽度可增大或缩小。
其中，调整所述第一框的位置可相对于在第一图像中的位置进行向左平移、向右上平移、向左下平移或向下平移等其他移动方式。
其中，所述K个第三位置通过K个第一位置确定，该确定方法与通过K个第一位置确定K个第二位置的方法相同。
可选地，对于任意一种第一模板图像，都可调整所述第一框的尺寸和/或位置。
可选地，对于复杂的第一模板图像，若第一关键点的个数大于或等于第一数值，可通过调整所述第一框的尺寸和/或位置，确定所述K个第二关键点对应的K个第三位置，所述第一数值为定值(在不同情况下可以不同)。
可以看出，在本申请实施例中，通过调整第一框的尺寸和/或位置对第二关键点进行标注，可提高第二关键点标注的准确率。
在本申请的一实施例中，根据所述K个第一关键点对所述K个第二关键点进行标注之后，所述方法还包括：
调整所述K个第二关键点的位置，得到K个第四位置；
根据所述K个第四位置对所述K个第二关键点进行标注。
其中，调整所述K个第二关键点的位置通过调整所述K个第二关键点中至少一个第二关键点的位置对应的横坐标的值和/或纵坐标的值，所述横坐标的值和/或所述纵坐标的值可以增大或降低。
可选地，对于简单的第一模板图像，若第一关键点的个数小于第一数值，可通过调整所述第二关键点的位置，确定K个第四位置。
可以看出，在本申请实施例中，通过调整第二关键点的位置对第二关键点进行标注，可降低标注所需的时间，提高第二关键点标注的效率。
与所述图2所示的实施例一致的，请参阅图3，图3是本申请实施例提供的另一种关键点标注方法的流程示意图，应用于上述电子设备，具体包括以下步骤：
步骤301：选取包括N个第一目标的第一图像。
步骤302：选取第一模板图像，所述第一模板图像包括第二目标的K个第一关键点。
步骤303：使用第一框在所述第一图像上框选N个第一目标中的其中一个目标。
步骤304：从所述K个第一位置中选取M个第一位置，所述M大于或等于4。
步骤305：基于所述第一模板图像的尺寸信息、所述第一框的尺寸信息和所述M个第一位置，分别确定所述M个第一位置对应的M个第二位置。
步骤306：基于所述M个第一位置、所述M个第二位置和W个第一位置，分别确定所述W个第一位置对应的W个第二位置，所述W个第一位置和所述M个第一位置构成所述K个第一位置，所述W个第二位置和所述M个第二位置构成所述K个第二位置。
步骤307：根据所述K个第二位置对所述K个第二关键点进行标注。执行完步骤307之后，可以执行步骤308或执行步骤311。
步骤308：调整所述第一框的尺寸和/或位置，调整后的所述第一框框选所述其中一个第一目标。执行完步骤308执行步骤309到步骤310。
步骤309：基于调整后的所述第一框的尺寸和/或位置，确定所述K个第二关键点对应的K个第三位置。
步骤310：根据所述K个第三位置对所述K个第二关键点进行标注。
步骤311：调整所述K个第二关键点的位置，得到K个第四位置。
步骤312：根据所述K个第四位置对所述K个第二关键点进行标注。
需要说明的是，本实施例的具体实现过程可参见上述方法实施例所述的具体实现过程，在此不再叙述。
与上述图2和图3所示的实施例一致的，请参阅图4，图4是本申请实施例提供的一种电子设备的结构示意图，如图所示，该电子设备包括处理器、存储器、通信接口以及一个或多个程序，其中，上述一个或多个程序被存储在上述存储器中，并且被配置由上述处理器执行，上述程序包括用于执行以下步骤的指令：
选取包括N个第一目标的第一图像，所述N为正整数；
选取第一模板图像，所述第一模板图像包括第二目标的K个第一关键点，所述K为正整数；
在所述第一图像上框选所述N个第一目标中的其中一个第一目标，所述其中一个第一目标的类型与所述第二目标的类型匹配；
根据所述K个第一关键点对所述其中一个第一目标进行关键点标注。
在本申请的一实现方式中，在根据所述K个第一关键点对应K个第一位置，每个所述第一位置用于表示其对应的所述第一关键点在所述第一模板图像中的位置；所述根据所述K个第一关键点对所述其中一个第一目标进行关键点标注方面，上述程序具体用于执行以下步骤指令：
根据所述K个第一位置确定K个第二位置，所述K个第二位置对应K个第二关键点，所述其中一个第一目标包括所述K个第二关键点，所述K个第一位置与所述K个第二位置一一对应，每个所述第二位置用于表示其对应的所述第二关键点在所述第一图像中的位置；
根据所述K个第二位置对所述K个第二关键点进行标注。
在本申请一实现方式中，在使用第一框框选所述其中一个第一目标，所述根据所述K个第一位置确定K个第二位置方面，上述程序具体用于执行以下步骤指令：
从所述K个第一位置中选取M个第一位置，所述M大于或等于4；
基于所述第一模板图像的尺寸信息、所述第一框的尺寸信息和所述M个第一位置，分别确定所述M个第一位置对应的M个第二位置；
基于所述M个第一位置、所述M个第二位置和W个第一位置，分别确定所述W个第一位置对应的W个第二位置，所述W个第一位置和所述M个第一位置构成所述K个第一位置，所述W个第二位置和所述M个第二位置构成所述K个第二位置。
在本申请的一实现方式中，所述M个第一位置包括第一位置X1、第一位置X2、第一位置X3和第一位置X4，所述X1对应的横坐标值小于所述K个第一位置中除所述X1之外的第一位置对应的横坐标值，所述X2对应的横坐标值大于所述K个第一位置中除所述X2之外的第一位置对应的横坐标值，所述X3对应的纵坐标值小于所述K个第一位置中除所述X3之外的第一位置对应的纵坐标值，所述X4对应的纵坐标值大于所述K个第一位置中除所述X4之外的第一位置对应的纵坐标值。在本申请的一实现方式中，所述M个第二位置包括第二位置Y1、第二位置Y2、第二位置Y3和第二位置Y4，所述Y1对应的横坐标值小于所述K个第二位置中除所述Y1之外的第二位置对应的横坐标值，所述Y2对应的横坐标值大于所述K个第二位置中除所述Y2之外的第二位置对应的横坐标值；所述Y3对应的纵坐标值小于所述K个第二位置中除所述Y3之外的第二位置对应的纵坐标值，所述Y4对应的纵坐标值大于所述K个第二位置中除所述Y4之外的第二位置对应的纵坐标值。
在本申请的一实现方式中，在根据所述K个第二位置对所述K个第二关键点进行标注之后，上述程序具体用于执行以下步骤指令：
基于调整后的所述第一框的尺寸和/或位置，确定所述K个第二关键点对应的K个第三位置；
根据所述K个第三位置对所述K个第二关键点进行标注。
在本申请的一实现方式中，在根据所述K个第二位置对所述K个第二关键点进行标注之后，上述程序具体还用于执行以下步骤指令：
调整所述K个第二关键点的位置，得到K个第四位置；
根据所述K个第四位置对所述K个第二关键点进行标注。
需要说明的是，本实施例的具体实现过程可参见上述方法实施例所述的具体实现过程，在此不再叙述。
请参阅图5，图5是本申请实施例提供的一种关键点标注装置，应用于电子设备，该装置包括：
第一选取单元501，用于选取包括N个第一目标的第一图像，所述N为正整数；
第二选取单元502，用于选取第一模板图像，所述第一模板图像包括第二目标的K个第一关键点，所述K为正整数；
框选单元503，用于在所述第一图像上框选所述N个第一目标中的其中一个第一目标，所述其中一个第一目标的类型与所述第二目标的类型匹配；
标注单元504，用于根据所述K个第一关键点对所述其中一个第一目标进行关键点标注。
在申请的一实现方式中，在根据所述K个第一关键点对所述K个第二关键点进行标注，所述标注单元504具体用于：
根据所述K个第一位置确定K个第二位置，所述K个第二位置对应K个第二关键点，所述其中一个第一目标包括所述K个第二关键点，所述K个第一位置与所述K个第二位置一一对应，每个所述第二位置用于表示其对应的所述第二关键点在所述第一图像中的位置；
根据所述K个第二位置对所述K个第二关键点进行标注。
在申请的一实现方式中，使用第一框框选所述其中一个第一目标，所述根据K个第一位置确定K个第二位置，所述标注单元504具体用于：
从所述K个第一位置中选取M个第一位置，所述M大于或等于4；
基于所述第一模板图像的尺寸信息、所述第一框的尺寸信息和所述M个第一位置，分别确定所述M个第一位置对应的M个第二位置；
基于所述M个第一位置、所述M个第二位置和W个第一位置，分别确定所述W个第一位置对应的W个第二位置，所述W个第一位置和所述M个第一位置构成所述K个第一位置，所述W个第二位置和所述M个第二位置构成所述K个第二位置。
在申请的一实现方式中，所述M个第一位置包括第一位置X1、第一位置X2、第一位置X3和第一位置X4，所述X1对应的横坐标值小于所述K个第一位置中除所述X1之外的第一位置对应的横坐标值，所述X2对应的横坐标值大于所述K个第一位置中除所述X2之外的第一位置对应的横坐标值，所述X3对应的纵坐标值小于所述K个第一位置中除所述X3之外的第一位置对应的纵坐标值，所述X4对应的纵坐标值大于所述K个第一位置中除所述X4之外的第一位置对应的纵坐标值。
在申请的一实现方式中，所述M个第二位置包括第二位置Y1、第二位置Y2、第二位置Y3和第二位置Y4，所述Y1对应的横坐标值小于所述K个第二位置中除所述Y1之外的第二位置对应的横坐标值，所述Y2对应的横坐标值大于所述K个第二位置中除所述Y2之外的第二位置对应的横坐标值；所述Y3对应的纵坐标值小于所述K个第二位置中除所述Y3之外的第二位置对应的纵坐标值，所述Y4对应的纵坐标值大于所述K个第二位置中除所述Y4之外的第二位置对应的纵坐标值。
在申请的一实现方式中，所述根据所述K个第一关键点对所述K个第二关键点进行标注之后，所述框选单元503具体用于：
调整所述第一框的尺寸和/或位置，调整后的所述第一框框选所述其中一个第一目标；
在申请的一实现方式中，所述根据所述K个第一关键点对所述K个第二关键点进行标注之后，所述标注单元504具体用于：
基于调整后的所述第一框的尺寸和/或位置，确定所述K个第二关键点对应的K个第三位置；
根据所述K个第三位置对所述K个第二关键点进行标注。
在申请的一实现方式中，所述根据所述K个第一关键点对所述K个第二关键点进行标注之后，所述框选单元503具体用于：
调整所述K个第二关键点的位置，得到K个第四位置；
根据所述K个第四位置对所述K个第二关键点进行标注。
需要说明的是，第一选取单元501、第二选取单元502、框选单元503及标注单元504可通过处理器实现。
本申请实施例还提供了一种计算机可读存储介质，其中，所述计算机可读存储介质存储用于电子数据交换的计算机程序，其中，所述计算机程序使得计算机执行如上述方法实施例中电子设备所描述的部分或全部步骤。
本申请实施例还提供了一种计算机程序产品，其中，所述计算机程序产品包括存储了计算机程序的非瞬时性计算机可读存储介质，所述计算机程序可操作来使计算机执行如上述方法中电子设备所描述的部分或全部步骤。该计算机程序产品可以为一个软件安装包。
本申请实施例所描述的方法或者算法的步骤可以以硬件的方式来实现，也可以是由处理器执行软件指令的方式来实现。软件指令可以由相应的软件模块组成，软件模块可以被存放于随机存取存储器(Random Access Memory，RAM)、闪存、只读存储器(Read OnlyMemory，ROM)、可擦除可编程只读存储器(Erasable Programmable ROM，EPROM)、电可擦可编程只读存储器(Electrically EPROM，EEPROM)、寄存器、硬盘、移动硬盘、只读光盘(CD-ROM)或者本领域熟知的任何其它形式的存储介质中。一种示例性的存储介质耦合至处理器，从而使处理器能够从该存储介质读取信息，且可向该存储介质写入信息。当然，存储介质也可以是处理器的组成部分。处理器和存储介质可以位于ASIC中。另外，该ASIC可以位于接入网设备、第一目标网络设备或核心网设备中。当然，处理器和存储介质也可以作为分立组件存在于接入网设备、第一目标网络设备或核心网设备中。
本领域技术人员应该可以意识到，在上述一个或多个示例中，本申请实施例所描述的功能可以全部或部分地通过软件、硬件、固件或者其任意组合来实现。当使用软件实现时，可以全部或部分地以计算机程序产品的形式实现。所述计算机程序产品包括一个或多个计算机指令。在计算机上加载和执行所述计算机程序指令时，全部或部分地产生按照本申请实施例所述的流程或功能。所述计算机可以是通用计算机、专用计算机、计算机网络、或者其他可编程装置。所述计算机指令可以存储在计算机可读存储介质中，或者从一个计算机可读存储介质向另一个计算机可读存储介质传输，例如，所述计算机指令可以从一个网站站点、计算机、服务器或数据中心通过有线(例如同轴电缆、光纤、数字用户线(DigitalSubscriber Line，DSL))或无线(例如红外、无线、微波等)方式向另一个网站站点、计算机、服务器或数据中心进行传输。所述计算机可读存储介质可以是计算机能够存取的任何可用介质或者是包含一个或多个可用介质集成的服务器、数据中心等数据存储设备。所述可用介质可以是磁性介质(例如，软盘、硬盘、磁带)、光介质(例如，数字视频光盘(DigitalVideo Disc，DVD))、或者半导体介质(例如，固态硬盘(Solid State Disk，SSD))等。
以上所述的具体实施方式，对本申请实施例的目的、技术方案和有益效果进行了进一步详细说明，所应理解的是，以上所述仅为本申请实施例的具体实施方式而已，并不用于限定本申请实施例的保护范围，凡在本申请实施例的技术方案的基础之上，所做的任何修改、等同替换、改进等，均应包括在本申请实施例的保护范围之内。

Claims (10)

1.一种关键点标注方法，其特征在于，应用于电子设备，所述方法包括：
选取包括N个第一目标的第一图像，所述N为正整数；
选取第一模板图像，所述第一模板图像包括第二目标的K个第一关键点，所述K为正整数；
在所述第一图像上框选所述N个第一目标中的其中一个第一目标，所述其中一个第一目标的类型与所述第二目标的类型匹配；
根据所述K个第一关键点对所述其中一个第一目标进行关键点标注。
2.根据权利要求1所述的方法，其特征在于，所述K个第一关键点对应K个第一位置，每个所述第一位置用于表示其对应的所述第一关键点在所述第一模板图像中的位置；所述根据所述K个第一关键点对所述其中一个第一目标进行关键点标注，包括：
根据所述K个第一位置确定K个第二位置，所述K个第二位置对应K个第二关键点，所述其中一个第一目标包括所述K个第二关键点，所述K个第一位置与所述K个第二位置一一对应，每个所述第二位置用于表示其对应的所述第二关键点在所述第一图像中的位置；
根据所述K个第二位置对所述K个第二关键点进行标注。
3.根据权利要求2所述的方法，其特征在于，所述其中一个第一目标被第一框框选，所述根据所述K个第一位置确定K个第二位置，包括：
从所述K个第一位置中选取M个第一位置，所述M大于或等于4；
基于所述第一模板图像的尺寸信息、所述第一框的尺寸信息和所述M个第一位置，分别确定所述M个第一位置对应的M个第二位置；
基于所述M个第一位置、所述M个第二位置和W个第一位置，分别确定所述W个第一位置对应的W个第二位置，所述W个第一位置和所述M个第一位置构成所述K个第一位置，所述W个第二位置和所述M个第二位置构成所述K个第二位置。
4.根据权利要求3所述的方法，其特征在于，所述根据所述K个第二位置对所述K个第二关键点进行标注之后，所述方法还包括：
调整所述第一框的尺寸和/或位置，调整后的所述第一框框选所述其中一个第一目标；
基于调整后的所述第一框的尺寸和/或位置，确定所述K个第二关键点对应的K个第三位置；
根据所述K个第三位置对所述K个第二关键点进行标注。
5.根据权利要求3所述的方法，其特征在于，所述根据所述K个第二位置对所述K个第二关键点进行标注之后，所述方法还包括：
调整所述K个第二关键点的位置，得到K个第四位置；
根据所述K个第四位置对所述K个第二关键点进行标注。
6.一种关键点标注装置，其特征在于，应用于电子设备，所述装置包括：
第一选取单元，用于选取包括N个第一目标的第一图像，所述N为正整数；
第二选取单元，用于选取第一模板图像，所述第一模板图像包括第二目标的K个第一关键点，所述K为正整数；
框选单元，用于在所述第一图像上框选所述N个第一目标中的其中一个第一目标，所述其中一个第一目标的类型与所述第二目标的类型匹配；
标注单元，用于根据所述K个第一关键点对所述其中一个第一目标进行关键点标注。
7.根据权利要求6所述的装置，其特征在于，所述K个第一关键点对应K个第一位置，每个所述第一位置用于表示其对应的所述第一关键点在所述第一模板图像中的位置；在根据所述K个第一关键点对所述其中一个第一目标进行关键点标注方面，所述标注单元具体用于：
根据所述K个第一位置确定K个第二位置，所述K个第二位置对应K个第二关键点，所述其中一个第一目标包括所述K个第二关键点，所述K个第一位置与所述K个第二位置一一对应，每个所述第二位置用于表示其对应的所述第二关键点在所述第一图像中的位置；
根据所述K个第二位置对所述K个第二关键点进行标注。
8.根据权利要求7所述的装置，其特征在于，所述其中一个第一目标被第一框框选，在根据所述K个第一位置确定K个第二位置方面，所述标注单元具体用于：
从所述K个第一位置中选取M个第一位置，所述M大于或等于4；
基于所述第一模板图像的尺寸信息、所述第一框的尺寸信息和所述M个第一位置，分别确定所述M个第一位置对应的M个第二位置；
基于所述M个第一位置、所述M个第二位置和W个第一位置，分别确定所述W个第一位置对应的W个第二位置，所述W个第一位置和所述M个第一位置构成所述K个第一位置，所述W个第二位置和所述M个第二位置构成所述K个第二位置。
9.一种电子设备，其特征在于，所述电子设备包括处理器、存储器、通信接口，以及一个或多个程序，所述一个或多个程序被存储在所述存储器中，并且被配置由所述处理器执行，所述程序包括用于执行如权利要求1-7任一项所述的方法中的步骤的指令。
10.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质存储有计算机程序，其中，所述计算机程序被处理执行如权利要求1-7任意一项所述的方法。
CN201910906487.2A 2019-09-24 2019-09-24 关键点标注方法及相关设备 Pending CN112633305A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910906487.2A CN112633305A (zh) 2019-09-24 2019-09-24 关键点标注方法及相关设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910906487.2A CN112633305A (zh) 2019-09-24 2019-09-24 关键点标注方法及相关设备

Publications (1)

Publication Number Publication Date
CN112633305A true CN112633305A (zh) 2021-04-09

Family

ID=75282951

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910906487.2A Pending CN112633305A (zh) 2019-09-24 2019-09-24 关键点标注方法及相关设备

Country Status (1)

Country Link
CN (1) CN112633305A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113421319A (zh) * 2021-06-30 2021-09-21 重庆小雨点小额贷款有限公司 一种图像处理方法、装置以及计算机设备

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113421319A (zh) * 2021-06-30 2021-09-21 重庆小雨点小额贷款有限公司 一种图像处理方法、装置以及计算机设备

Similar Documents

Publication Publication Date Title
CN110913132B (zh) 对象跟踪方法及电子设备
CN112506340B (zh) 设备控制方法、装置、电子设备及存储介质
CN109684980B (zh) 自动阅卷方法及装置
CN110908558B (zh) 一种图像显示方法及电子设备
CN109240577B (zh) 一种截屏方法及终端
CN108965835B (zh) 一种图像处理方法、图像处理装置及终端设备
CN109068116B (zh) 基于补光的图像处理方法、装置、移动终端和存储介质
WO2016006728A1 (ko) 화상을 이용해 3차원 정보를 처리하는 전자 장치 및 방법
KR20220092937A (ko) 화면 표시의 제어 방법 및 전자기기
CN109558000B (zh) 一种人机交互方法及电子设备
CN111212242B (zh) 曝光方法和电子设备
CN109495616B (zh) 一种拍照方法及终端设备
CN112686169A (zh) 手势识别控制方法、装置、电子设备及存储介质
CN112367559B (zh) 视频展示方法、装置、电子设备、服务器及存储介质
WO2021104266A1 (zh) 对象显示方法及电子设备
JP2021531589A (ja) 目標対象の動作認識方法、装置及び電子機器
KR20220157485A (ko) 검출 결과 출력 방법, 전자 장치 및 매체
WO2017078283A1 (ko) 사용자의 위치를 결정하는 전자 장치 및 그 제어 방법
CN111783197A (zh) 三维建筑模型的构建方法及相关设备
CN114299056A (zh) 图像的瑕疵点的识别方法、瑕疵图像识别模型训练方法
CN112633305A (zh) 关键点标注方法及相关设备
CN110636222B (zh) 拍照控制方法、装置、终端设备及存储介质
CN110222576B (zh) 拳击动作识别方法、装置和电子设备
CN112188115A (zh) 一种图像处理方法、电子设备及存储介质
CN107219968B (zh) 一种画图方法、系统，移动终端及可读存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination