CN110837575B - 视频图像的传输特征信息的生成方法和装置 - Google Patents

视频图像的传输特征信息的生成方法和装置 Download PDF

Info

Publication number
CN110837575B
CN110837575B CN201911056476.6A CN201911056476A CN110837575B CN 110837575 B CN110837575 B CN 110837575B CN 201911056476 A CN201911056476 A CN 201911056476A CN 110837575 B CN110837575 B CN 110837575B
Authority
CN
China
Prior art keywords
index list
code
row
point
bits
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201911056476.6A
Other languages
English (en)
Other versions
CN110837575A (zh
Inventor
杨克敏
陈杰
欧燕雄
方阳
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangzhou Cubesili Information Technology Co Ltd
Original Assignee
Guangzhou Cubesili Information Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangzhou Cubesili Information Technology Co Ltd filed Critical Guangzhou Cubesili Information Technology Co Ltd
Priority to CN201911056476.6A priority Critical patent/CN110837575B/zh
Publication of CN110837575A publication Critical patent/CN110837575A/zh
Application granted granted Critical
Publication of CN110837575B publication Critical patent/CN110837575B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/70—Information retrieval; Database structures therefor; File system structures therefor of video data
    • G06F16/71—Indexing; Data structures therefor; Storage structures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/70—Information retrieval; Database structures therefor; File system structures therefor of video data
    • G06F16/78—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/783—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/21—Server components or server architectures
    • H04N21/218—Source of audio or video content, e.g. local disk arrays
    • H04N21/2187—Live feed
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/478—Supplemental services, e.g. displaying phone caller identification, shopping application
    • H04N21/4788—Supplemental services, e.g. displaying phone caller identification, shopping application communicating with other users, e.g. chatting

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • Library & Information Science (AREA)
  • Data Mining & Analysis (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Signal Processing (AREA)
  • Software Systems (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

本申请实施例提供的视频图像的传输特征信息的生成方法、装置、设备和存储介质，涉及图像处理技术领域，该方法通过从视频图像中识别出的目标对象的关键点，筛选出需要传输的目标关键点，调用预先配置的目标对象的关键点索引表，其中，关键点索引表包括行索引列表和点索引列表，点索引列表的每个码位分别对应一个关键点，点索引列表的每一行对应行索引列表的一个码位；将目标关键点匹配到关键点索引表中，确定行索引列表各个码位的码值和点索引列表各个码位的码值，生成传输特征信息。本技术方案能够节省目标对象的关键点的索引消耗，压缩了数据量，有利于后续数据处理和传输。

Description

视频图像的传输特征信息的生成方法和装置
技术领域
本申请涉及图像处理技术领域，具体而言，本申请涉及一种视频图像的传输特征信息的生成方法，还涉及一种计算机设备和存储介质。
背景技术
随着网络技术发展，实时视频交流如网络直播、视频聊天室等成为一种越来越流行的娱乐方式。
在直播过程中，主播的视频图像需要从采集端传输到播放端，而传输的数据中除了视频数据外，往往还包括一些对主播视频识别并处理得到的目标对象，比如脸部轮廓、人体轮廓和手势等的传输特征信息。以脸部轮廓为例，若使用三元组标识脸部轮廓中的关键点，由于脸部轮廓的关键点较多，每一个轮廓点具有唯一的索引值，随着轮廓点的增加，需要传输的索引数据越大，使得目标对应的传输特征信息的数据量大，影响后续的网络传输效率。
发明内容
本申请的目的旨在至少解决上述技术缺陷之一，特别是数据量大影响传输效率的问题。
第一方面，本申请实施例提供一种视频图像的传输特征信息的生成方法，包括以下步骤：
获取视频图像中识别的目标对象的关键点，并从所述关键点中筛选出需要传输的目标关键点；
调用预先配置的所述目标对象对应的关键点索引表；其中，所述关键点索引表包括行索引列表和点索引列表，所述点索引列表的每个码位分别对应一个关键点，所述点索引列表的每一行对应行索引列表的一个码位；
将所述目标关键点匹配到关键点索引表中，确定所述行索引列表各个码位的码值和点索引列表各个码位的码值；
根据所述行索引列表各个码位的码值和点索引列表各个码位的码值生成传输特征信息。
在一实施例中，视频图像的特征信息传输的生成方法还包括：
确定所述目标对象的关键点数量；
根据所述关键点数量构建行索引列表和点索引列表；其中，所述点索引列表包括码位数量相同的多行列表，每行的一个码位分别对应一个关键点；所述行索引列表包括与点索引列表的行数一致的码位，每个码位对应指示该行是否存在目标关键点；
根据所述行索引列表和点索引列表形成所述目标对象对应的关键点索引表。
在一实施例中，所述将所述目标关键点匹配到关键点索引表中，确定所述行索引列表各个码位的码值和点索引列表各个码位的码值的步骤包括：
根据所述目标关键点的索引值确定所述目标关键点在所述点索引列表中对应的码位，将该码位的码值置“1”，所述点索引列表的其余码位的码值置“0”；
确定所述目标关键点在所述行索引列表中对应的码位，将该码位的码值置“1”，所述行索引列表的其余码位的码值置“0”。
在一实施例中，所述根据所述行索引列表各个码位的码值和点索引列表各个码位的码值生成传输特征信息的步骤包括：
根据所述行索引列表各个码位的码值，提取出码位的码值为“1”对应的所述点索引列表的行；
根据所述行索引列表的信息以及提取出的点索引列表的行的信息，生成目标对象的传输特征信息。
在一实施例中，所述点索引列表的每一行为一个字节；所述行索引列表包括至少一个字节。
在一实施例中，视频图像的传输特征信息的生成方法还包括：
识别所述视频图像的分辨率，根据所述分辨率确定表示所述目标关键点的最小位数；
按照所述最小位数表示所述目标关键点。
在一实施例中，所述识别所述视频图像的分辨率，根据所述分辨率确定表示所述目标关键点的最小位数的步骤包括：
识别所述视频图像的横向分辨率，根据所述横向分辨率确定用于表示所述目标关键点的横坐标的第一最小位数；
识别所述视频图像的纵向分辨率，根据所述纵向分辨率确定用于表示所述目标关键点的纵坐标的第二最小位数；
其中，所述目标关键点的最小位数包括第一最小位数和第二最小位数。
第二方面，本申请实施例提供一种视频图像的传输特征信息的生成装置，包括：
目标关键点筛选模块，用于获取视频图像中识别的目标对象的关键点，并从所述关键点中筛选出需要传输的目标关键点；
特征索引表调用模块，用于调用预先配置的所述目标对象对应的关键点索引表；其中，所述关键点索引表包括行索引列表和点索引列表，所述点索引列表的每个码位分别对应一个关键点，所述点索引列表的每一行对应索引列表的一个码位；
目标关键点匹配模块，用于将所述目标关键点匹配到关键点索引表中，确定所述行索引列表各个码位的码值和点索引列表各个码位的码值；
传输特征信息生成模块，用于根据所述行索引列表各个码位的码值和点索引列表各个码位的码值生成传输特征信息。
第三方面，本申请实施例提供一种计算机设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，所述处理器执行所述程序时实现如第一方面任一实施例所述的视频图像的传输特征信息的生成方法的步骤。
第四方面，本申请实施例提供一种包含计算机可执行指令的存储介质，所述计算机可执行指令在由计算机处理器执行时用于执行如第一方面任一实施例所述视频图像的传输特征信息的生成方法的步骤。
上述实施例提供的视频图像的传输特征信息的生成方法、装置、设备和存储介质，通过从视频图像图像中识别出的目标对象的关键点，筛选出需要传输的目标关键点，调用预先配置的目标对象的关键点索引表，其中，关键点索引表包括行索引列表和点索引列表，点索引列表的每个码位分别对应一个关键点，点索引列表的每一行对应行索引列表的一个码位；将目标关键点匹配到关键点索引表中，确定行索引列表各个码位的码值和点索引列表各个码位的码值，生成传输特征信息，以节省目标对象的关键点的索引消耗，压缩了数据量，有利于后续数据处理和传输。
本申请附加的方面和优点将在下面的描述中部分给出，这些将从下面的描述中变得明显，或通过本申请的实践了解到。
附图说明
本申请上述的和/或附加的方面和优点从下面结合附图对实施例的描述中将变得明显和容易理解，其中：
图1是一实施例提供的视频图像的传输特征信息的生成方法的流程图；
图2是一实施例提供的关键点索引表的示意图；
图3是一实施例提供的脸部轮廓的关键点索引表的示意图；
图4是一实施例提供的传输特征信息的数据格式示意图；
图5是一实施例提供的关键点索引表的构建方法流程图；
图6是一实施例提供的视频图像的传输特征信息的生成装置的结构示意图。
具体实施方式
下面详细描述本申请的实施例，所述实施例的示例在附图中示出，其中自始至终相同或类似的标号表示相同或类似的元件或具有相同或类似功能的元件。下面通过参考附图描述的实施例是示例性的，仅用于解释本申请，而不能解释为对本申请的限制。
本技术领域技术人员可以理解，除非特意声明，这里使用的单数形式“一”、“一个”、“所述”和“该”也可包括复数形式。应该进一步理解的是，本申请的说明书中使用的措辞“包括”是指存在所述特征、整数、步骤、操作、元件和/或组件，但是并不排除存在或添加一个或多个其他特征、整数、步骤、操作、元件、组件和/或它们的组。
本技术领域技术人员可以理解，除非另外定义，这里使用的所有术语(包括技术术语和科学术语)，具有与本申请所属领域中的普通技术人员的一般理解相同的意义。还应该理解的是，诸如通用字典中定义的那些术语，应该被理解为具有与现有技术的上下文中的意义一致的意义，并且除非像这里一样被特定定义，否则不会用理想化或过于正式的含义来解释。
图1是一实施例提供的视频图像的传输特征信息的生成方法的流程图，该视频图像的传输特征信息的生成方法可由计算机设备来执行。本实施例以主播端为例进行说明。需要说明的是，本申请提供的视频图像的传输特征信息的生成方法可以应用于实时的直播视频图像的传输，也可以应用于非实时的视频图像的传输，还可以是其他普通图像的传输。下面以直播视频图像为例对本技术方案进行说明。
如图1所示，该视频图像的传输特征信息的生成方法可以包括以下步骤：
S110、获取视频图像中识别的目标对象的关键点，并从所述关键点中筛选出需要传输的目标关键点。
在实施例中，目标对象可以为脸部轮廓、背景分割、人体轮廓、手势和人体骨骼等。目标对象包括若干关键点，根据这些关键点可以重新构建目标对象。比如，脸部轮廓包括106个关键点，每个关键点对应人脸的部位；人体轮廓包括59个关键点，每个关键点对应人身体各部位的边缘；手势包括多种手势类型，包括两个关键点，根据关键点的坐标值确定手势的类型；人体骨骼包括22个关键点，每个关键点对应人体骨骼关节点。其中，上述提及的关键点的坐标值表示其在视频图像中的位置。
下面以目标对象为脸部轮廓为例，对本实施例进行详细说明。
主播端获取直播视频，从直播视频中提取直播视频图像，对直播视频图像进行处理得到脸部轮廓，并对其进行提取关键点处理。在本实施例中，脸部轮廓包括106个关键点。
在实施例中，为每个关键点设置唯一的索引值，如第一个关键点的索引值为1，第二个关键点的索引值为2，第三个关键点的索引值为3……第106个关键点的索引值为106。在这些关键点中筛选出需要传输的关键点作为目标关键点，如将索引值33、42、43、46、49、52、61、72、73、75、76、82、83、84、87、90和102这17个关键点作为目标关键点。
S120、调用预先配置的所述目标对象对应的关键点索引表。
其中，所述关键点索引表包括行索引列表和点索引列表，所述点索引列表的每个码位分别对应一个关键点，所述点索引列表的每一行对应行索引列表的一个码位。
图2是一实施例提供的关键点索引表的示意图，如图2所示点索引列表包括若干行，如m行，每一行可以包括若干个码位，如n个码位，图2所示的点索引列表共有m(n+1)+n个码位。
在点索引列表中，每个码位分别对应一个关键点，每个关键点按照其索引值的大小按顺序对应点索引列表中的一个码位。
继续参考图2，与点索引列表的行数相对应的，行索引列表包括若干个码位，在实施例中，行索引列表的码位的数量大于或等于点索引列表的行数，如点索引列表的行数为m，则行索引列表的码位至少为m位。
在行索引列表中，点索引列表的每一行对应行索引列表的一个码位。如，点索引列表中的第一行对应行索引列表的第一个码位(即序号为“0”所对应的码位)，点索引列表的第二行对应行索引列表的第二个码位(即序号为“1”所对应的码位)。
图3是一实施例提供的脸部轮廓的关键点索引表的示意图，如图3所示，在脸部轮廓的点索引列表中，每一行为一个字节，即每一行包括8个码位，每个码位的取值为“0”或“1”；其中，“1”表示该码位所对应的关键点为目标关键点，需要进行传输，“0”表示该码位所对应的关键点不需要进行传输。行索引列表包括若干字节，每一字节包括8个码位，一般的，行索引列表的码位的数量为8的整数倍，每个码位的取值为“0”或“1”，其中，“1”表示点索引列表的该行需要传输，“0”表示点索引列表的该行不需要进行传输。
脸部轮廓的点索引列表包括14个字节，每个字节为一行，每字节包括8个码位，每个码位分别对应一个关键点，每个关键点按照其索引值的大小按顺序对应点索引列表中的一个码位，如第1个关键点对应第一行左边起的第一个码位，第2个关键点对应的第一行左边起的第二个码位，第9个关键点对应第二行左边起的第一个码位，以此类推，将这106个关键点与点索引列表中的码位逐一对应起来。
继续参考图3，脸部轮廓的行索引列表包括2字节，每字节包括8个码位，共16个码位，前14个码位分别与脸部轮廓的点索引列表的14行一一对应，最后两个码位直接置“0”。
S130、将所述目标关键点匹配到关键点索引表中，确定所述行索引列表各个码位的码值和点索引列表各个码位的码值。
在实施例中，可以将点索引列表的码位设置不同的码值以标识出哪些码位对应的关键点需要进行传输，将行索引列表的码位设置不同的码值，如“1”或“0”，以标识出哪些点索引列表的哪些行需要进行传输。
可选的，在点索引列表中，根据目标关键点的索引值确定所述目标关键点在所述点索引列表中对应的码位，将该码位的码值置“1”，点索引列表的其余码位的码值置“0”。
下面的实施例以码值为“1”表示需要进行传输的目标点或需要传输的行，码值为“0”表示不需要进行传输为例，对本方案进行示例性说明。
如图3所示，在图3中所示的点索引列表中，码值为“1”的码位所对应的目标关键点分别为索引值为第33、42、43、46、49、52、61、72、73、75、76、82、83、84、87、90和102这17个关键点。
在行索引列表中，根据目标关键点在点索引列表所在行的位置，确定目标关键点在行索引列表中对应的码位，将该码位的码值置“1”，行索引列表的其余码位的码值置“0”。
如图3所示，索引值为17的关键点位于点索引列表中的第5行，则将行索引列表中的第5个码位的码值置“1”，索引值为42和43的关键点位于点索引列表中的第6行，则将行索引列表中的第6个码位的码值置“1”，以此类推，将目标关键点位于点索引列表中的行位置对应在行索引列表的码位的码值置“1”，其余没有关键点所对应的行索引列表的码位的码值置“0”。
S140、根据所述行索引列表各个码位的码值和点索引列表各个码位的码值生成传输特征信息。
根据行索引列表中各个码位的码值，可以确定点索引列表中哪些行需要传输，根据点索引列表各个码位的码值，可以确定哪个关键点需要进行传输。如行索引列表中码位的码值为“1”所对应的点索引列表的行为需要进行传输的行，点索引列表中码位的码值为“1”所对应的关键点为需要进行传输的目标关键点。
具体的，该步骤可以包括以下子步骤：
S1401、根据所述行索引列表各个码位的码值，提取出码位的码值为“1”对应的所述点索引列表的行。
参考图3，行索引列表的各个码位的码值分别为：0000111101111000，行索引表的第5、6、7、8、10、11、12和13个码位的码值为“1”，则相对应的，点索引列表的第5、6、7、8、10、11、12和13行需要进行传输。
确定点索引表中需要传输的行后，根据该行中各码位的码值，确定需要传输的关键点，即目标关键点。如该行中某一码位的码值为“1”，则该行的该码值为“1”的码位对应的关键点为需要进行传输的目标关键点，其余码位的码值为“0”。
S1402、根据所述行索引列表的信息以及提取出的点索引列表的行的信息，生成目标对象的传输特征信息。
对行索引列表和行索引表中码位的码值为“1”对应的点索引列表的行进行存储，生成目标对象的传输特征信息。根据传输特征信息可以确定哪些关键点是需要进行传输的，即确定需要传输的目标关键点。图4是一实施例提供的传输特征信息的数据格式示意图，如图4所示，对传输特征信息进行封装时，先存储行索引列表，再存储行索引表中码位的码值为“1”对应的点索引列表的行，最后依次存储目标关键点的坐标，生成视频图像的目标对象的传输特征信息。
相对于三元组表示关键点，每个关键点可以标识为(i,x,y)，其中，i表示关键点的索引，如第1个关键点，x和y表示关键点的横坐标和纵坐标。由于i占7个位，若按照脸部轮廓为例，则通过三元组来表示17个目标关键点，则其索引消耗为7×17＝119位，需要15B来表示，然而在本方案中，17个目标关键点的索引消耗为2B+8B＝10B，明显小于三元组索引方式的消耗，其中2B为行索引表的索引消耗，8B为点索引表中需要传输的8行的索引消耗，当需要传输的目标关键点越多时，本方案相对于三元组索引的方案，其节省索引消耗越明显。
本实施例提供的视频图像的传输特征信息的生成方法，通过从视频图像中识别出的目标对象的关键点，筛选出需要传输的目标关键点，调用预先配置的目标对象的关键点索引表，其中，关键点索引表包括行索引列表和点索引列表，点索引列表的每个码位分别对应一个关键点，点索引列表的每一行对应行索引列表的一个码位；将目标关键点匹配到关键点索引表中，确定行索引列表各个码位的码值和点索引列表各个码位的码值，生成传输特征信息，以节省目标对象的关键点的索引消耗，压缩了数据量，有利于后续数据处理和传输。
图5是一实施例提供的关键点索引表的构建方法流程图，如图5所示，在一实施例中，视频图像的特征信息传输的生成方法，还可以包括以下步骤：
S210、确定所述目标对象的关键点数量。
由于不同的目标对象，其所对应的关键点的数量不同，例如，脸部轮廓的关键点数量可以为106个，人体轮廓的关键点数量可以为59个。
S220、根据所述关键点数量构建行索引列表和点索引列表。
其中，所述点索引列表包括码位数量相同的多行列表，每行的一个码位分别对应一个关键点；所述行索引列表包括与点索引列表的行数一致的码位，每个码位对应指示该行是否存在目标关键点。
在实施例中，点索引表的每一行为一个字节，每个字节包括8个码位。以图所示的脸部轮廓的点索引列表为例，该点索引列表为14个字节建立的表格，每个字节为一行，共14行，每行包括8个码位。每个码位分别对应一个关键点，每个关键按照顺序依次逐一对应点索引列表的码位。
在行索引列表中，点索引列表的每一行逐一对象行索引列表的码位，行索引列表中码位的码值用于指示点索引列表的该行是否存在目标关键点，如码值为“1”则指示点索引列表的该行存在目标关键点，该行需要进行传输，码值为“0”则指示点索引列表的该行不存在目标关键点，该行不需要进行传输。
S230、根据所述行索引列表和点索引列表形成所述目标对象对应的关键点索引表。
将点索引列表的每个码位依次与目标对象的关键点对应起来，若没有关键点与码位对象，则将该码位的码值直接置“0”；将行索引列表的每个码位依次与点索引列表的每一行对应起来，若没有行与码位对象，则将行索引列表中的该码位的码值直接置“0”，将点索引列表和行索引列表整合起来，形成目标对象对应的关键点索引表。
本实施例提供的视频图像的传输特征信息的生成方法，通过建立目标对象的点索引列表和行索引列表，将点索引列表的每个码位与关键点逐一对应起来，将点索引列表的每一行与行索引列表的每个码位对象起来，当需要将某关键点进行传输时，只需要将该关键点对应的码位置“1”，便于根据业务需要灵活选择需要传输的关键点，提高了业务处理效率，同时通过关键点索引表能够减少关键点的索引数据量，压缩了目标对象的传输特征信息的整体数据量，有利于后续的数据处理和传输。
在一实施例中，视频图像的传输特征信息的生成方法还可以包括以下步骤：
S310、识别所述视频图像的分辨率，根据所述分辨率确定表示所述目标关键点的最小位数。
分辨率是用于度量图像内数据量多少的一个参数，通常表示成ppi(每英寸像素Pixel per inch)。例如，视频分辨率为320×180，是指该视频在横向和纵向上的有效像素。根据视频图像的分辨率确定每一帧视频图像每一行的有效像素点的数量和每一列的有效像素点的数量。根据每一行和每一列的有效像素点的数据量确定表示位数。
具体的，该步骤可以包括以下子步骤：
S3101、识别所述视频图像的横向分辨率，根据所述横向分辨率确定用于表示所述目标关键点的横坐标的第一最小位数。
在实施例中，根据视频的横向分辨率选择合适的位数表示目标关键点的坐标值。比如视频分辨率为1280×720，此时横向分辨率为1280，由于1280介于2的10次方和2的11次方之间，此时能够表示1280种横坐标值的最小位数为11位，则将表示目标关键点横坐标的第一最小位数确定为11位。
S3202、识别所述视频图像的纵向分辨率，根据所述纵向分辨率确定用于表示所述目标关键点的纵坐标的第二最小位数；
同理，基于上述例子，视频分辨率为1280×720，此时纵向分辨率为720，由于720介于2的9次方和2的10次方之间，此时能够表示1280种纵坐标值的最小位数为10位，则将表示目标关键点纵坐标的第二最小位数确定为10位。
S320、按照所述最小位数表示所述目标关键点。
在实施例中，目标关键点的最小位数可以包括第一最小位数和第二最小位数。将表示目标关键点横坐标值的第一最小位数和纵坐标值的第二最小位数相加，得到表示目标关键点坐标值的最小位数。
基于上述的例子，表示目标关键点的横坐标的第一最小位数为11位，纵坐标的第二最小位数为10位，则表示目标关键点的最小位数为21位。
又比如，视频分辨率为400×600，则表示目标关键点的第一最小位数为9位，第二最小位数为10位，最小位数为第一最小位数和第二最小位数之和，为19位。
本实施例提供的视频图像的传输特征信息的生成方法，通过识别视频分辨率确定表示目标关键点坐标值的最小位数，用最小位数来表示目标关键点的坐标值，使表述坐标值的位紧凑，以节省存储空间，以便存储空间的浪费。
下面对视频图像的传输特征信息的生成装置的相关实施例进行详细阐述。
图6是一实施例提供的视频图像的传输特征信息的生成装置的结构示意图，该视频图像的传输特征信息的生成装置应用于计算机设备，如主播端。如图6所示，该视频图像的传输特征信息的生成装置可以包括：目标关键点筛选模块110、特征索引表调用模块120、目标关键点匹配模块130和传输特征信息生成模块140。
其中，目标关键点筛选模块110，用于获取视频图像中识别的目标对象的关键点，并从所述关键点中筛选出需要传输的目标关键点；
特征索引表调用模块120，用于调用预先配置的所述目标对象对应的关键点索引表；其中，所述关键点索引表包括行索引列表和点索引列表，所述点索引列表的每个码位分别对应一个关键点，所述点索引列表的每一行对应索引列表的一个码位；
目标关键点匹配模块130，用于将所述目标关键点匹配到关键点索引表中，确定所述行索引列表各个码位的码值和点索引列表各个码位的码值；
传输特征信息生成模块140，用于根据所述行索引列表各个码位的码值和点索引列表各个码位的码值生成传输特征信息。
本实施例提供的视频图像的传输特征信息的生成装置，通过目标关键点筛选模块从视频图像中识别出的目标对象的关键点，筛选出需要传输的目标关键点，特征索引表调用模块调用预先配置的目标对象的关键点索引表，其中，关键点索引表包括行索引列表和点索引列表，点索引列表的每个码位分别对应一个关键点，点索引列表的每一行对应行索引列表的一个码位；目标关键点匹配模块将目标关键点匹配到关键点索引表中，传输特征信息生成模块确定行索引列表各个码位的码值和点索引列表各个码位的码值，生成传输特征信息，以节省目标对象的关键点的索引消耗，压缩了数据量，有利于后续数据处理和传输。
在一实施例中，视频图像的传输特征信息的生成装置还包括：关键点索引表构建模块；
其中，关键点索引表形成模块包括关键点数量确定单元、索引列表构建单元和关键点索引表形成单元；
其中，关键点数量确定单元，用于确定所述目标对象的关键点数量；索引列表构建单元，用于根据所述关键点数量构建行索引列表和点索引列表；其中，所述点索引列表包括码位数量相同的多行列表，每行的一个码位分别对应一个关键点；所述行索引列表包括与点索引列表的行数一致的码位，每个码位对应指示该行是否存在目标关键点；关键点索引表形成单元，用于根据所述行索引列表和点索引列表形成所述目标对象对应的关键点索引表。
在一实施例中，目标关键点匹配模块130包括：点索引码值确定单元和行索引码值确定单元；
其中，点索引码值确定单元，用于根据所述目标关键点的索引值确定所述目标关键点在所述点索引列表中对应的码位，将该码位的码值置“1”，所述点索引列表的其余码位的码值置“0”；
行索引码值确定单元，用于确定所述目标关键点在所述行索引列表中对应的码位，将该码位的码值置“1”，所述行索引列表的其余码位的码值置“0”。
在一实施例中，传输特征信息生成模块140包括：信息提取单元和传输特征信息生成单元；
其中，信息提取单元，用于根据所述行索引列表各个码位的码值，提取出码位的码值为“1”对应的所述点索引列表的行；
传输特征信息生成单元，用于根据所述行索引列表的信息以及提取出的点索引列表的行的信息，生成目标对象的传输特征信息。
在一实施例中，所述点索引列表的每一行为一个字节；所述行索引列表包括至少一个字节。
在一实施例中，视频图像的传输特征信息的生成装置还包括：目标关键点表示模块，用于识别所述视频图像的分辨率，根据所述分辨率确定表示所述目标关键点的最小位数；按照所述最小位数表示所述目标关键点。
在一实施例中，目标关键点表示模块包括：第一最小位数确定单元和第二最小位数确定单元；
第一最小位数确定单元，用于识别所述视频图像的横向分辨率，根据所述横向分辨率确定用于表示所述目标关键点的横坐标的第一最小位数；
第二最小位数确定单元，用于识别所述视频图像的纵向分辨率，根据所述纵向分辨率确定用于表示所述目标关键点的纵坐标的第二最小位数；
其中，所述目标关键点的最小位数包括第一最小位数和第二最小位数。
上述提供的视频图像的传输特征信息的生成装置可用于执行上述任意实施例提供的视频图像的特征信息传输的生成方法，具备相应的功能和有益效果。
本申请实施例还提供一种计算机设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，所述处理器执行所述程序时，实现如上述任一实施例中的视频图像的传输特征信息的生成方法。
可选的，该计算机设备可以为移动终端、平板电脑、计算机电脑或服务器等。上述提供的计算机设备执行上述任一实施例提供的视频图像的传输特征信息的生成方法时，具有相应的功能和有益效果。
本申请实施例还提供一种包含计算机可执行指令的存储介质，所述计算机可执行指令在由计算机处理器执行时用于执行一种视频图像的传输特征信息的生成方法，包括：
获取视频图像中识别的目标对象的关键点，并从所述关键点中筛选出需要传输的目标关键点；
调用预先配置的所述目标对象对应的关键点索引表；其中，所述关键点索引表包括行索引列表和点索引列表，所述点索引列表的每个码位分别对应一个关键点，所述点索引列表的每一行对应行索引列表的一个码位；
将所述目标关键点匹配到关键点索引表中，确定所述行索引列表各个码位的码值和点索引列表各个码位的码值；
根据所述行索引列表各个码位的码值和点索引列表各个码位的码值生成传输特征信息。
当然，本申请实施例所提供的一种包含计算机可执行指令的存储介质,其计算机可执行指令不限于如上所述的视频图像的传输特征信息的生成方法操作，还可以执行本申请任意实施例所提供的视频图像的传输特征信息的生成方法中的相关操作，且具备相应的功能和有益效果。
通过以上关于实施方式的描述，所属领域的技术人员可以清楚地了解到，本申请可借助软件及必需的通用硬件来实现，当然也可以通过硬件实现，但很多情况下前者是更佳的实施方式。基于这样的理解，本申请的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品可以存储在计算机可读存储介质中，如计算机的软盘、只读存储器(Read-Only Memory,ROM)、随机存取存储器(RandomAccess Memory,RAM)、闪存(FLASH)、硬盘或光盘等，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本申请任意实施例所述的视频图像的传输特征信息的生成方法。
应该理解的是，虽然附图的流程图中的各个步骤按照箭头的指示依次显示，但是这些步骤并不是必然按照箭头指示的顺序依次执行。除非本文中有明确的说明，这些步骤的执行并没有严格的顺序限制，其可以以其他的顺序执行。而且，附图的流程图中的至少一部分步骤可以包括多个子步骤或者多个阶段，这些子步骤或者阶段并不必然是在同一时刻执行完成，而是可以在不同的时刻执行，其执行顺序也不必然是依次进行，而是可以与其他步骤或者其他步骤的子步骤或者阶段的至少一部分轮流或者交替地执行。以上所述仅是本申请的部分实施方式，应当指出，对于本技术领域的普通技术人员来说，在不脱离本申请原理的前提下，还可以做出若干改进和润饰，这些改进和润饰也应视为本申请的保护范围。

Claims (10)

1.一种视频图像的传输特征信息的生成方法，其特征在于，包括以下步骤：
获取视频图像中识别的目标对象的关键点，并从所述关键点中筛选出需要传输的目标关键点；
调用预先配置的所述目标对象对应的关键点索引表；其中，所述关键点索引表包括行索引列表和点索引列表，所述点索引列表的每个码位分别对应一个关键点，所述点索引列表的每一行对应行索引列表的一个码位；
将所述目标关键点匹配到关键点索引表中，确定所述行索引列表各个码位的码值和点索引列表各个码位的码值；
根据所述行索引列表各个码位的码值和点索引列表各个码位的码值生成传输特征信息。
2.根据权利要求1所述的视频图像的传输特征信息的生成方法，其特征在于，还包括：
确定所述目标对象的关键点数量；
根据所述关键点数量构建行索引列表和点索引列表；其中，所述点索引列表包括码位数量相同的多行列表，每行的一个码位分别对应一个关键点；所述行索引列表包括与点索引列表的行数一致的码位，每个码位对应指示该行是否存在目标关键点；
根据所述行索引列表和点索引列表形成所述目标对象对应的关键点索引表。
3.根据权利要求1所述的视频图像的传输特征信息的生成方法，其特征在于，所述将所述目标关键点匹配到关键点索引表中，确定所述行索引列表各个码位的码值和点索引列表各个码位的码值的步骤包括：
根据所述目标关键点的索引值确定所述目标关键点在所述点索引列表中对应的码位，将该码位的码值置“1”，所述点索引列表的其余码位的码值置“0”；
确定所述目标关键点在所述行索引列表中对应的码位，将该码位的码值置“1”，所述行索引列表的其余码位的码值置“0”。
4.根据权利要求3所述的视频图像的传输特征信息的生成方法，其特征在于，所述根据所述行索引列表各个码位的码值和点索引列表各个码位的码值生成传输特征信息的步骤包括：
根据所述行索引列表各个码位的码值，提取出码位的码值为“1”对应的所述点索引列表的行；
根据所述行索引列表的信息以及提取出的点索引列表的行的信息，生成目标对象的传输特征信息。
5.根据权利要求1至4任一项所述的视频图像的传输特征信息的生成方法，其特征在于，所述点索引列表的每一行为一个字节；所述行索引列表包括至少一个字节。
6.根据权利要求1所述的视频图像的传输特征信息的生成方法，其特征在于，还包括：
识别所述视频图像的分辨率，根据所述分辨率确定表示所述目标关键点的最小位数；
按照所述最小位数表示所述目标关键点。
7.根据权利要求6所述的视频图像的传输特征信息的生成方法，其特征在于，所述识别所述视频图像的分辨率，根据所述分辨率确定表示所述目标关键点的最小位数的步骤包括：
识别所述视频图像的横向分辨率，根据所述横向分辨率确定用于表示所述目标关键点的横坐标的第一最小位数；
识别所述视频图像的纵向分辨率，根据所述纵向分辨率确定用于表示所述目标关键点的纵坐标的第二最小位数；
其中，所述目标关键点的最小位数包括第一最小位数和第二最小位数。
8.一种视频图像的传输特征信息的生成装置，其特征在于，包括：
目标关键点筛选模块，用于获取视频图像中识别的目标对象的关键点，并从所述关键点中筛选出需要传输的目标关键点；
特征索引表调用模块，用于调用预先配置的所述目标对象对应的关键点索引表；其中，所述关键点索引表包括行索引列表和点索引列表，所述点索引列表的每个码位分别对应一个关键点，所述点索引列表的每一行对应索引列表的一个码位；
目标关键点匹配模块，用于将所述目标关键点匹配到关键点索引表中，确定所述行索引列表各个码位的码值和点索引列表各个码位的码值；
传输特征信息生成模块，用于根据所述行索引列表各个码位的码值和点索引列表各个码位的码值生成传输特征信息。
9.一种计算机设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，其特征在于，所述处理器执行所述程序时实现如权利要求1-7任一项所述的视频图像的传输特征信息的生成方法的步骤。
10.一种包含计算机可执行指令的存储介质，其特征在于，所述计算机可执行指令在由计算机处理器执行时用于执行如权利要求1-7任一项所述视频图像的传输特征信息的生成方法的步骤。
CN201911056476.6A 2019-10-31 2019-10-31 视频图像的传输特征信息的生成方法和装置 Active CN110837575B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201911056476.6A CN110837575B (zh) 2019-10-31 2019-10-31 视频图像的传输特征信息的生成方法和装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201911056476.6A CN110837575B (zh) 2019-10-31 2019-10-31 视频图像的传输特征信息的生成方法和装置

Publications (2)

Publication Number Publication Date
CN110837575A CN110837575A (zh) 2020-02-25
CN110837575B true CN110837575B (zh) 2023-02-24

Family

ID=69575842

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201911056476.6A Active CN110837575B (zh) 2019-10-31 2019-10-31 视频图像的传输特征信息的生成方法和装置

Country Status (1)

Country Link
CN (1) CN110837575B (zh)

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20120090101A (ko) * 2010-12-23 2012-08-17 한국전자통신연구원 디지털 비디오 고속 정합 시스템
CN103455631A (zh) * 2013-09-22 2013-12-18 广州中国科学院软件应用技术研究所 一种数据处理方法、装置及系统
CN110019874B (zh) * 2017-12-29 2021-09-24 阿里巴巴（中国）有限公司 索引文件的生成方法、装置及系统
CN110147330B (zh) * 2019-05-23 2023-09-01 深圳市创维软件有限公司 一种字模数据的缓存方法、装置、设备和存储介质

Also Published As

Publication number Publication date
CN110837575A (zh) 2020-02-25

Similar Documents

Publication Publication Date Title
CN105744292A (zh) 一种视频数据的处理方法及装置
CN116188808B (zh) 图像特征提取方法和系统、存储介质及电子设备
CN114339305B (zh) 一种虚拟桌面图像处理方法及相关装置
CN110853063B (zh) 图像分割信息的处理方法、装置、设备和存储介质
CN111353965B (zh) 图像修复方法、装置、终端及存储介质
CN110837575B (zh) 视频图像的传输特征信息的生成方法和装置
CN108924624B (zh) 信息处理方法和装置
CN110536087A (zh) 电子设备及其运动轨迹照片合成方法、装置和嵌入式装置
CN110853056B (zh) 图像分割信息的生成方法、装置、设备和存储介质
CN117911444A (zh) 一种基于边缘处理的抠图方法及系统
CN111179158A (zh) 图像处理方法、装置、电子设备及介质
CN111866514B (zh) 一种压缩视频、解压视频的方法和装置
CN115576513A (zh) 目标图像的显示方法、显示装置、电子设备和存储介质
CN110856033A (zh) 一种对象显示方法、装置、终端及存储介质
CN114630193A (zh) 短视频中的画面优化方法及系统
CN113191210A (zh) 一种图像处理方法、装置及设备
CN111476101A (zh) 视频镜头切换检测方法及装置、计算机可读存储介质
CN117176979B (zh) 多源异构视频的内容帧提取方法、装置、设备及存储介质
CN115065865B (zh) 一种视频合成方法、装置、电子设备及存储介质
CN110620961A (zh) 视频水印添加方法、装置以及视频编辑终端
CN109218845B (zh) 优化弹幕显示效果的方法、存储介质、电子设备及系统
CN113473150B (zh) 一种图像处理方法、装置以及计算机可读存储装置
CN107146269B (zh) 一种图像填充方法及系统
CN111462148A (zh) 提取前景图像的方法、系统、电子设备及存储介质
CN115826917A (zh) 一种芯片计算单元复用方法、装置、电子设备及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
TA01 Transfer of patent application right
TA01 Transfer of patent application right

Effective date of registration: 20210114

Address after: 511442 3108, 79 Wanbo 2nd Road, Nancun Town, Panyu District, Guangzhou City, Guangdong Province

Applicant after: GUANGZHOU CUBESILI INFORMATION TECHNOLOGY Co.,Ltd.

Address before: 511442 29 floor, block B-1, Wanda Plaza, Huambo business district, Panyu District, Guangzhou, Guangdong.

Applicant before: GUANGZHOU HUADUO NETWORK TECHNOLOGY Co.,Ltd.

GR01 Patent grant
GR01 Patent grant