CN108174270A - 数据处理方法、装置、存储介质及电子设备 - Google Patents

数据处理方法、装置、存储介质及电子设备 Download PDF

Info

Publication number
CN108174270A
CN108174270A CN201711461503.9A CN201711461503A CN108174270A CN 108174270 A CN108174270 A CN 108174270A CN 201711461503 A CN201711461503 A CN 201711461503A CN 108174270 A CN108174270 A CN 108174270A
Authority
CN
China
Prior art keywords
portrait
picture frame
frame
personage
label
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201711461503.9A
Other languages
English (en)
Other versions
CN108174270B (zh
Inventor
陈岩
刘耀勇
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangdong Oppo Mobile Telecommunications Corp Ltd
Original Assignee
Guangdong Oppo Mobile Telecommunications Corp Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangdong Oppo Mobile Telecommunications Corp Ltd filed Critical Guangdong Oppo Mobile Telecommunications Corp Ltd
Priority to CN201711461503.9A priority Critical patent/CN108174270B/zh
Publication of CN108174270A publication Critical patent/CN108174270A/zh
Application granted granted Critical
Publication of CN108174270B publication Critical patent/CN108174270B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/40Scenes; Scene-specific elements in video content
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/40Scenes; Scene-specific elements in video content
    • G06V20/46Extracting features or characteristics from the video content, e.g. video fingerprints, representative shots or key frames
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/161Detection; Localisation; Normalisation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/172Classification, e.g. identification
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • H04N21/4316Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations for displaying supplemental content in a region of the screen, e.g. an advertisement in a separate window
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/44008Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics in the video stream
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81Monomedia components thereof
    • H04N21/8126Monomedia components thereof involving additional data, e.g. news, sports, stocks, weather forecasts
    • H04N21/8133Monomedia components thereof involving additional data, e.g. news, sports, stocks, weather forecasts specifically related to the content, e.g. biography of the actors in a movie, detailed information about an article seen in a video program
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/178Human faces, e.g. facial parts, sketches or expressions estimating age from face image; using age information for improving recognition

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Health & Medical Sciences (AREA)
  • Health & Medical Sciences (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Human Computer Interaction (AREA)
  • Marketing (AREA)
  • Business, Economics & Management (AREA)
  • Television Signal Processing For Recording (AREA)

Abstract

本申请公开了一种数据处理方法、装置、存储介质及电子设备,其中方法包括:获取视频文件;识别所述视频文件多个图像帧中的人像,获得所述人像的人物信息;标记所述人像所在的图像帧,将被标记的所述图像帧与所述人像的人物信息进行关联;当播放所述视频文件并检测到所述标记时,显示所述人像的人物信息。本申请实施例可以快速识别电子设备上的显示内容,并在该人像出现时显示该人像对应的人物信息,可以让用户在观影过程中及时了解出场人物的角色信息。

Description

数据处理方法、装置、存储介质及电子设备
技术领域
本申请涉及电子技术领域,具体涉及一种数据处理方法、装置、存储介质及电子设备。
背景技术
随着互联网的发展,互联网上的内容服务也越来越多。而在现实生活中,用户常常有播放视频内容服务的需求。
在播放视频内容的过程中,剧中往往会有很多人物角色出场,少则数个,多则数十个。若用户对这些人物不了解的话,在人物登场时可能会因为不熟悉角色而造成观影障碍,影响观看效果。因此,在该视频内容的简介中往往需要展出该视频中最主要的角色信息,但该信息一般只包含人物的真人姓名、角色姓名等信息,不能与视频中的角色对应,使得这些信息在用户的观影过程中对用户了解角色的帮助较小。
发明内容
本申请实施例提供一种数据处理方法、装置、存储介质及电子设备,可以快速识别电子设备上的显示内容并生成相应的提示信息。
本申请实施例提供一种数据处理方法,应用于电子设备,所述方法包括:
获取视频文件;
识别所述视频文件多个图像帧中的人像,获得所述人像的人物信息;
标记所述人像所在的图像帧,将被标记的所述图像帧与所述人像的人物信息进行关联;
当播放所述视频文件并检测到所述标记时,显示所述人像的人物信息。
本申请实施例还提供的一种数据处理装置,包括:
文件获取模块,用于获取视频文件;
识别模块,用于识别所述视频文件多个图像帧中的人像,获得所述人像的人物信息;
标记模块,用于标记所述人像所在的图像帧,将被标记的所述图像帧与所述人像的人物信息进行关联;以及
显示模块,用于当播放所述视频文件并检测到所述标记时,显示所述人像的人物信息。
本申请实施例还提供一种存储介质,所述存储介质存储多条指令,所述多条指令适于在计算机上运行时,使得所述计算机执行如上所述的数据处理方法。
本申请实施例还提供一种电子设备,包括处理器和存储器,所述存储器存储多条指令,所述处理器通过加载所述存储器中的指令用于执行如上所述的数据处理方法。
本申请实施例提供的一种数据处理方法,所述方法通过识别视频文件多个图像帧中的人像,获得人像的人物信息,并标记人像所在的图像帧,将被标记的图像帧与人像的人物信息进行关联,当播放视频文件并检测到标记时,显示人像的人物信息。本申请实施例可以快速识别电子设备上的显示内容,并在该人像出现时显示该人像对应的人物信息,可以让用户在观影过程中及时了解出场人物的角色信息。
附图说明
下面结合附图,通过对本申请的具体实施方式详细描述,将使本申请的技术方案及其它有益效果显而易见。
图1为本申请实施例提供的数据处理方法的实现流程图。
图2为本申请实施例提供的数据处理方法的第二实现流程图。
图3为本申请实施例提供的显示人物信息的实现流程图。
图4为本申请实施例提供的数据处理方法的第一应用场景图。
图5为本申请实施例提供的数据处理方法的第二应用场景图。
图6为本申请实施例提供的数据处理装置的结构示意图。
图7为本申请实施例提供的数据处理装置的另一结构示意图。
图8为本申请实施例提供的显示模块的结构示意图。
图9为本申请实施例提供的电子设备的结构示意图。
图10为本申请实施例提供的电子设备的另一结构示意图。
具体实施方式
请参照图式,其中相同的组件符号代表相同的组件,本申请的原理是以实施在一适当的运算环境中来举例说明。以下的说明是基于所例示的本申请具体实施例,其不应被视为限制本申请未在此详述的其它具体实施例。
本文所使用的术语“模块”可为在该运算系统上执行的软件对象。本文所述的不同组件、模块、引擎及服务可为在该运算系统上的实施对象。而本文所述的装置及方法可以以软件的方式进行实施,当然也可在硬件上进行实施,均在本申请保护范围之内。
在本文中提及“实施例”意味着,结合实施例描述的特定特征、结构或特性可以包含在本申请的至少一个实施例中。在说明书中的各个位置出现该短语并不一定均是指相同的实施例,也不是与其它实施例互斥的独立的或备选的实施例。本领域技术人员显式地和隐式地理解的是,本文所描述的实施例可以与其它实施例相结合。
本申请实施例中的电子设备,可以包括移动电话(或称为“蜂窝”电话,如智能手机)或者具有无线通信模块的计算机,例如,平板电脑,还可以是便携式、袖珍式、手持式的车载计算机,它们与无线接入网交换语言和/或数据。例如,个人通信业务(PersonalCommunication Service,PCS)电话、无绳电话、会话发起协议(Session InitiationProtocol,SIP)话机、无线本地环路(Wireless Local Loop,WLL)站、个人数字助理(Personal Digital Assistant,PDA)等设备,在此不作限定。
当该方法应用在电子设备时,其中,该数据处理方法可运行在电子设备的操作系统中,可包括但不限于Windows操作系统、Mac OS操作系统、Android操作系统、IOS操作系统、Symbian(塞班)操作系统、Windows Phone操作系统等等,本申请实施例不做限定。
参见图1,图中示出了本申请实施例提供的数据处理方法的实现流程。
该流程可以应用在电子设备中,包括以下步骤:
101、获取视频文件。
其中,视频文件的格式可以是现有技术中采用的格式。该视频文件由若干帧图像帧构成,每一图像帧均为一幅图像。该多个图像帧,指的是视频文件中的每一帧图像帧,或者是所提取出的两帧或两帧以上的图像帧,本申请实施例对其具体数量不作限定。
在一些实施例中,获取视频文件,可以是用户通过预设的应用程序对该视频文件进行加载,也可以是从网络上对该视频文件进行下载获取,具体实现方式可以根据实际情况而进行设定。
102、识别视频文件多个图像帧中的人像,获得人像的人物信息。
在一些实施例中,识别视频文件多个图像帧中的人像,可以先将视频文件的数据进行预读取,以获得图像帧中的图像信息。如将视频文件中每一帧图像帧进行获取,或者在视频文件中每间隔预设的播放时长获取图像帧,又或者通过其他特定的形式将视频文件中的图像帧进行提取。
在一些实施例中,对于人像识别,可以采用现有的人像识别技术,将从视频文件提取出来的图像帧中的人像进行识别。
在人像识别过程中,可以结合预设的人像特征数据库来实现。具体的,可以将已知的多个演员的人像特征进行存储,以在人像识别中能将该图像帧中所出现的人像与人像特征数据库中的人像特征进行匹配,从而获得该图像帧中所出现的人像对应的是什么人物。
然后,在识别出该人物后,可以在人像特征数据库中获取与该人物对应的人物信息。也可以在电子设备连接网络后,在网络中获取该人物的人物信息。具体的人物信息获取方式可以根据实际情况而进行设定。
在一些实施例中,该人物信息可以是演员的真实信息,如真实的姓名、年龄、经历等,也可以是演员在该剧中的剧情信息,如剧中所演角色的姓名、年龄、经历等。
103、标记所述人像所在的图像帧,将被标记的图像帧与人像的人物信息进行关联。
其中,标记人像所在的图像帧,其目的在于使该标记后的图像帧区别一般的图像帧,可以标记某一帧图像帧,或者是多帧图像帧,具体可以根据实际需求而定。
在一些实施例中,标记人像所在的图像帧可以是在图像帧的属性信息中对信息进行修改,如增加、替换或者删除特定信息,以使视频文件的播放应用程序或者其他第三方程序能够识别到该改动,从而识别出该图像帧为被标记后的图像帧。
标记人像所在的图像帧还可以是通过将该图像帧的帧位置进行记录,生成被标记图像帧的位置列表,从而在播放过程中根据该位置列表获知该图像帧是否被标记。
当然,除了上述实现方式,还可以采用其他方式对图像帧进行标记,本申请对该标记方式不作限定。
在一些实施例中,将被标记的图像帧与人像的人物信息进行关联,可以该图像帧的标记过程中加入与人物信息相关的特定的属性参数,或者是将图像帧与人像的人物信息建立映射关系。
可以理解的,上述关联方式仅用于示例,具体的关联方式可以根据实际情况而进行设定。
104、当播放视频文件并检测到标记时,显示人像的人物信息。
其中,播放视频文件时,会按照图像帧的顺序依次读取图像帧,以按一定帧率将该图像帧进行显示形成连续图像。
在一些实施例中,检测标记,可以在读取图像帧的过程中,从该图像帧的属性信息、被标记图像帧的位置列表中检测是否存在与标记相关的信息,若存在,则可以确定该图像帧已经被标记。
当然,除了上述方式,检测标记的方法可以根据对图像帧的标记方式进行调整。
在一些实施例中,显示人像的人物信息可以在图像帧的预设位置对人物信息进行显示。
具体的,可以将人物信息显示在靠近图像帧的四周位置处,如上部、下部、左部或右部。还可以根据人像所在的位置,将该人像对应的人物信息显示在人像所在的位置附近,以方便用户将人像与人物信息进行联系。
在一些实施例中,显示人像的人物信息,可以在预设时长内连续显示,以方便用户的观看。
在一些实施例中,显示人像的人物信息,可以在该人像对应的人物出现的预设时长内只显示一次,或者显示多次,具体显示次数及显示时机可以根据实际情况而定。
由此可知,本申请实施例中的数据处理方法,通过识别视频文件多个图像帧中的人像,获得人像的人物信息,并标记人像所在的图像帧,将被标记的图像帧与人像的人物信息进行关联,当播放视频文件并检测到标记时,显示人像的人物信息。本申请实施例可以快速识别电子设备上的显示内容,并在该人像出现时显示该人像对应的人物信息,可以让用户在观影过程中及时了解出场人物的角色信息。
参见图2,图中示出了本申请实施例提供的数据处理方法的另一实现流程。
在该数据处理方法中,包括以下实现步骤:
201、获取视频文件。
其中,视频文件的格式可以是现有技术中采用的格式。该视频文件由若干帧图像帧构成,每一图像帧均为一幅图像。该多个图像帧,指的是视频文件中的每一帧图像帧,或者是所提取出的两帧或两帧以上的图像帧,本申请实施例对其具体数量不作限定。
在一些实施例中,获取视频文件,可以是用户通过预设的应用程序对该视频文件进行加载,也可以是从网络上对该视频文件进行下载获取,具体实现方式可以根据实际情况而进行设定。
202、识别视频文件多个图像帧中的人像,获得人像的人物信息。
在一些实施例中,识别视频文件多个图像帧中的人像,可以先将视频文件的数据进行预读取,以获得图像帧中的图像信息。如将视频文件中每一帧图像帧进行获取,或者在视频文件中每间隔预设的播放时长获取图像帧,又或者通过其他特定的形式将视频文件中的图像帧进行提取。
在一些实施例中,对于人像识别,可以采用现有的人像识别技术,将从视频文件提取出来的图像帧中的人像进行识别。
在人像识别过程中,可以结合预设的人像特征数据库来实现。具体的,可以将已知的多个演员的人像特征进行存储,以在人像识别中能将该图像帧中所出现的人像与人像特征数据库中的人像特征进行匹配,从而获得该图像帧中所出现的人像对应的是什么人物。
然后,在识别出该人物后,可以在人像特征数据库中获取与该人物对应的人物信息。也可以在电子设备连接网络后,在网络中获取该人物的人物信息。具体的人物信息获取方式可以根据实际情况而进行设定。
在一些实施例中,该人物信息可以是演员的真实信息,如真实的姓名、年龄、经历等,也可以是演员在该剧中的剧情信息,如剧中所演角色的姓名、年龄、经历等。
203、将多个图像帧中的人像进行归类,所述归类包括将同一人物的人像归为一类。
其中,在归类之前,需要对图像帧进行人像识别。当识别完图像帧中各个人像对应的人物以后,可以将多个图像帧中的同一人像归为一类。
当然,在归类的过程中,还可以根据其他标准将多个图像帧中的人像进行归类,例如根据演员的性质进行归类(如男女主角、情节中不同势力方等),或者根据演员的出场顺序将演员出场时的图像帧进行归类。具体归类方式可以根据实际需要进行设定。
204、确定预设时长内同一人物的人像出现时的多个目标图像帧。
其中,目标图像帧为出现该同一人物的人像的图像帧。预设时长可以是人为设定的某段时间,例如是10分钟内或者其他时间段内。还可以是按剧情划分的某片段的播放时间内。
因为同一人物在某一片段里可能并不是连续出现在全部图像帧中,因此,在一些实施例中,可以先将预设时长内同一人物的人像出现时的多个目标图像帧进行获取,再在这些目标图像帧中进行标记,如此可以减少电子设备的数据处理量,提高数据处理速度。
在一些实施例中,可以根据以下方式对预设时长内同一人物的人像出现时的多个目标图像帧进行确定:
将预设时长内所述同一人物的人像第一次出现时的图像帧作为起始帧;将预设时长内所述同一人物的人像最后一次出现的图像帧作为结束帧;将起始帧与结束帧之间出现同一人物的人像的多个图像帧确定为所述多个目标图像帧。
例如,当某一场景中某帧的前10秒内该人物的人像均未出现,但下一秒钟则出现该人物的人像,且后续的多个图像帧中均出现该人物的人像,可以将该图像帧作为起始帧。
同理,当某一场景中某帧的前10秒内该人物的人像均有出现,但下一秒钟该人物的人像未出现,且后续的多个图像帧中均未出现该人物的人像,可以将该图像帧作为结束帧。
然后,将起始帧以及结束帧之间出现该人物的人像的多个图像帧确定为目标图像帧。当然,可以对起始帧以及结束帧之间未出现该人物的图像帧不作处理。
在该实施例中,只从该特定人物出场时的多个图像帧中对目标图像帧进行获取,可以进一步减少电子设备的数据运算量,大大提高图像处理速度。
205、标记多个目标图像帧内同一人物的人像所在的图像帧,将被标记的图像帧与人像的人物信息进行关联。
其中,标记人像所在的图像帧,其目的在于使该标记后的图像帧区别一般的图像帧,可以标记某一帧图像帧,或者是多帧图像帧,具体可以根据实际需求而定。
在一些实施例中,标记时可以在预设时长内只标记该同一人物的人像一次,例如在15分钟内,只标记同一人物的人像出场时的第一帧图像帧,或者是对该人物出场时的多个或所有图像帧进行标记。
当然,该时间也可以根据剧情需要进行设定,例如以场景为单位对同一人物的人像出场时的图像帧进行标记。
在一些实施例中,为了能够让用户可以提前了解该人物出场前的剧情,提高用户的观看体验,可以按预设方式标记在同一人物的人像出场之前的某特定一个或多个图像帧。例如,将离该人物出场10秒钟之前的图像帧进行标记,以使用户可以从该人物出场10秒钟之前的图像帧处开始播放视频,并让用户了解该人物出场前10秒钟内的剧情。
在一些实施例中,标记同一人物的人像所在的图像帧可以是在图像帧的属性信息中对信息进行修改,如增加、替换或者删除特定信息,以使视频文件的播放应用程序或者其他第三方程序能够识别到该改动,从而识别出该图像帧为被标记后的图像帧。
标记同一人物的人像所在的图像帧还可以是通过将该图像帧的帧位置进行记录,生成被标记图像帧的位置列表,从而在播放过程中根据该位置列表获知该图像帧是否被标记。
当然,除了上述实现方式,还可以采用其他方式对图像帧进行标记,本申请对该标记方式不作限定。
在一些实施例中,将被标记的图像帧与人像的人物信息进行关联,可以该图像帧的标记过程中加入与人物信息相关的特定的属性参数,或者是将图像帧与人像的人物信息建立映射关系。
可以理解的,上述关联方式仅用于示例,具体的关联方式可以根据实际情况而进行设定。
206、当播放视频文件并检测到标记时,显示人像的人物信息。
其中,播放视频文件时,会按照图像帧的顺序依次读取图像帧,以按一定帧率将该图像帧进行显示形成连续图像。
在一些实施例中,检测标记,可以在读取图像帧的过程中,从该图像帧的属性信息、被标记图像帧的位置列表中检测是否存在与标记相关的信息,若存在,则可以确定该图像帧已经被标记。
当然,除了上述方式,检测标记的方法可以根据对图像帧的标记方式进行调整。
在一些实施例中,显示人像的人物信息可以在图像帧的预设位置对人物信息进行显示。
具体的,可以将人物信息显示在靠近图像帧的四周位置处,如上部、下部、左部或右部。还可以根据人像所在的位置,将该人像对应的人物信息显示在人像所在的位置附近,以方便用户将人像与人物信息进行联系。
在一些实施例中,显示人像的人物信息,可以在预设时长内连续显示,以方便用户的观看。
在一些实施例中,显示人像的人物信息,可以在该人像对应的人物出现的预设时长内只显示一次,或者显示多次,具体显示次数及显示时机可以根据实际情况而定。
由此可知,本申请实施例中的实现步骤可以将多个图像帧中同一人物的人像进行归类,并根据对不同人物的人像进行标记,可以实现用户可按所选取的不同人物显示不同人物对应的人物信息,使得用户可以快速了解不同人物的角色信息。
图3示出了本申请实施例提供的显示人物信息的实现流程。
其中,标记人像所在的图像帧,包括标记同一人物的人像所在的图像帧。为了避免赘述,对于如何标记同一人物的人像所在的图像帧,可以参考图2中对此内容所描述的实施例。
在一些实施例中,该标记同一人物的人像所在的图像帧,具体可以是:标记所述多个图像帧内所述同一人物的人像第一次出现时的图像帧。
其中,该第一次出现时的图像帧,可以理解为预设时间内第一次识别到该人像的一个或多个图像帧,或者是该第一次识别到该人像的图像帧前后预设帧数内的其他一个或多个图像帧。
参考图4,图中示出了该数据处理方法的应用场景,包括多个图像帧,其中第一个图像帧包含人物名为“人物甲”的人物人像。若该人像为第一次出现,且在该图像帧后面的预设时长或预设帧数内还有多个相对连续的、具有“人物甲”的人物人像的图像帧,可以将该帧图像帧标记为被标记的图像帧。
在一些实施例中,当确定同一人物的人像第一次出现时的图像帧后,为了能够让用户可以提前了解该人物出场前的剧情,提高用户的观看体验,可以按预设方式标记在同一人物的人像出场之前的某特定一个或多个图像帧。例如,将离该人物出场10秒钟之前的图像帧进行标记,以使用户可以从该人物出场10秒钟之前的图像帧处开始播放视频,并让用户了解该人物出场前10秒钟内的剧情。
如图3所示,显示人物信息的实现流程可以包括以下步骤:
301、获取多个图像帧内同一人物的人像第一次出现时的图像帧。
其中,该第一次出现时的图像帧,可以理解为预设时间内第一次识别到该人像的一个或多个图像帧,或者是该第一次识别到该人像的图像帧前后预设帧数内的其他一个或多个图像帧。
在一些实施例中,该同一人物的人像第一次出现时的图像帧可以通过检测是否是被标记的图像帧来进行确定,当确定该图像帧是同一人物的人像第一次出现时的图像帧后,即可对该图像帧进行获取。
在一些实施例中,获取同一人物的人像第一次出现时的图像帧,可以在播放过程中的预读取阶段对该图像帧进行获取,使得在显示该图像帧之前对其进行处理。
如图4所示,在该应用场景中,包括同一人物的人像的多个图像帧,其中所出现的第一个图像帧即可定义为同一人物的人像第一次出现时的图像帧。
302、确定图像帧中人像所在的位置,将人像所在的位置与所述人像的人物信息进行关联。
在一些实施例中,对于图像帧中人像所在的位置,可以通过人脸识别技术进行确定,具体所用的人脸识别技术可以采用现有技术实现。
当通过人脸识别技术识别出图像帧中人像所在的位置后,其中,该位置指的是人像所在的大概位置,如根据人脸的范围将边缘处作为人像所在的位置,或者根据人脸的范围将人脸的中心点作为人像所在的位置,具体用于定位的人像所在的位置可以根据实际情况而定。
参见图4,例如,通过人脸识别技术识别出该图像帧中“人物甲”的人脸位置,并可以将上述虚线框的位置作为人像所在的位置,从而确定图像帧中人像所在的位置。
在一些实施例中,将人像所在的位置与所述人像的人物信息进行关联,可以该图像帧的标记过程中加入与人物信息相关的特定的属性参数,或者是将图像帧与人像的人物信息建立映射关系。
可以理解的,上述关联方式仅用于示例,具体的关联方式可以根据实际情况而进行设定。
303、对人像所在的位置进行标记。
在一些实施例中,可以将该人像所在的位置转换成该图像帧中人像所在的显示坐标点或显示坐标范围,然后将该人像所在的显示坐标点或显示坐标范围添加入该图像帧的显示信息中,以形成标记。例如,图4中被标记的是图像帧。
或者是将该图像帧与标记映射表进行关联,该标记映射表记录有不同图像帧对应的不同人像所在的显示坐标点或显示坐标范围。当检测到该图像帧位于该标记映射表中时,即可从该标记映射表中发现该图像帧已被标记,且可以从中获取该图像帧对应的人像所在的显示坐标点或显示坐标范围。例如,在图4中可以标记该虚线框,以作为人像所在的位置的标记。
304、根据标记,在标记对应的在人像所在的位置附近显示人像的人物信息。
其中,所述人像所在的位置附近,可以理解为人像所在的位置的四周,或者具体来讲在人像所在的位置四周的预设范围内。当然,根据人像所在的位置的不同,其位置也可能不同。例如当该人像所在的位置具体为人脸所形成的区域位置,则所述人像所在的位置附近即为人脸所形成的区域位置附近。
在一些实施例中,在人像所在的位置附近显示人像的人物信息,可以在需要显示信息之前,先检测标记,若检测到标记则通过人像识别确定人像所在的位置,然后在人像所在的位置附近选定一个信息展示起始点,接着获取该人像的人物信息,并将该人像的人物信息在该信息展示点处进行展示。
在一些实施例中,在人像所在的位置附近显示人像的人物信息,还可以是在标记该人像对应的图像帧的过程中,根据人像所在的显示坐标点或显示坐标范围确定人像所在的位置,并在该人像所在的位置附近选定一个信息展示起始点进行标记,获取该人像的人物信息,将该人像的人物信息与该信息展示起始点进行关联,已完成对其标记。然后在显示信息之前,根据该标记获取该人像所在的显示坐标点或显示坐标范围,确定该人像所在的位置及其信息展示起始点,以使得在播放过程中当检测到该图像帧的标记时,即可将人像的人物信息在该信息展示起始点处进行显示。
例如,如图5所示,若检测到该同一人物的人像第一次出现时的图像帧为被标记的图像帧,则可以通过该标记,获得该标记对应的人像所在的位置,在播放过程中当检测到在该人像所在的位置附近显示人物信息“人物甲”,如此可以让用户及时获知该人像对应的人物信息。
在一些实施例中,显示人像的人物信息,具体可以为在人像所在的位置附近对人像的人物信息持续显示预设时长。
其中,预设时长可以是1秒或其他具体时长,以方便用户能在这预设时长内查看清楚该人物对应的人物信息是什么,保证其提示作用。
当然,具体的显示方式,如显示的持续时长、字体及其大小或者具体的位置等,均可以根据实际情况而定,本申请在此不作限定。
由此可知,在图3所示的本申请实施例中,获取多个图像帧内同一人物的人像第一次出现时的图像帧,确定图像帧中人像所在的位置,将人像所在的位置与所述人像的人物信息进行关联,对人像所在的位置进行标记,并显示信息的时候在人像所在的位置附近显示人像的人物信息,从而避免多个同一人物的人像所在的图像帧被重复多次标记,并有利于在播放过程中迅速定位到人像所在的位置,提高系统在显示人物信息时的反应速度。
参见图6,图中示出了本申请实施例提供的数据处理装置的结构,包括文件获取模块401、识别模块402、标记模块403以及显示模块404。
文件获取模块401,用于获取视频文件。
其中,视频文件的格式可以是现有技术中采用的格式。该视频文件由若干帧图像帧构成,每一图像帧均为一幅图像。该多个图像帧,指的是视频文件中的每一帧图像帧,或者是所提取出的两帧或两帧以上的图像帧,本申请实施例对其具体数量不作限定。
在一些实施例中,获取视频文件,可以是用户通过预设的应用程序对该视频文件进行加载,也可以是从网络上对该视频文件进行下载获取,具体实现方式可以根据实际情况而进行设定。
识别模块402,用于识别视频文件多个图像帧中的人像,获得人像的人物信息。
在一些实施例中,识别视频文件多个图像帧中的人像,可以先将视频文件的数据进行预读取,以获得图像帧中的图像信息。如将视频文件中每一帧图像帧进行获取,或者在视频文件中每间隔预设的播放时长获取图像帧,又或者通过其他特定的形式将视频文件中的图像帧进行提取。
在一些实施例中,对于人像识别,可以采用现有的人像识别技术,将从视频文件提取出来的图像帧中的人像进行识别。
在人像识别过程中,可以结合预设的人像特征数据库来实现。具体的,可以将已知的多个演员的人像特征进行存储,以在人像识别中能将该图像帧中所出现的人像与人像特征数据库中的人像特征进行匹配,从而获得该图像帧中所出现的人像对应的是什么人物。
然后,在识别出该人物后,可以在人像特征数据库中获取与该人物对应的人物信息。也可以在电子设备连接网络后,在网络中获取该人物的人物信息。具体的人物信息获取方式可以根据实际情况而进行设定。
在一些实施例中,该人物信息可以是演员的真实信息,如真实的姓名、年龄、经历等,也可以是演员在该剧中的剧情信息,如剧中所演角色的姓名、年龄、经历等。
标记模块403,用于标记所述人像所在的图像帧,将被标记的图像帧与人像的人物信息进行关联。
其中,标记人像所在的图像帧,其目的在于使该标记后的图像帧区别一般的图像帧,可以标记某一帧图像帧,或者是多帧图像帧,具体可以根据实际需求而定。
在一些实施例中,标记人像所在的图像帧可以是在图像帧的属性信息中对信息进行修改,如增加、替换或者删除特定信息,以使视频文件的播放应用程序或者其他第三方程序能够识别到该改动,从而识别出该图像帧为被标记后的图像帧。
标记人像所在的图像帧还可以是通过将该图像帧的帧位置进行记录,生成被标记图像帧的位置列表,从而在播放过程中根据该位置列表获知该图像帧是否被标记。
当然,除了上述实现方式,还可以采用其他方式对图像帧进行标记,本申请对该标记方式不作限定。
在一些实施例中,将被标记的图像帧与人像的人物信息进行关联,可以该图像帧的标记过程中加入与人物信息相关的特定的属性参数,或者是将图像帧与人像的人物信息建立映射关系。
可以理解的,上述关联方式仅用于示例,具体的关联方式可以根据实际情况而进行设定。
显示模块404,用于当播放视频文件并检测到标记时,显示人像的人物信息。
其中,播放视频文件时,会按照图像帧的顺序依次读取图像帧,以按一定帧率将该图像帧进行显示形成连续图像。
在一些实施例中,检测标记,可以在读取图像帧的过程中,从该图像帧的属性信息、被标记图像帧的位置列表中检测是否存在与标记相关的信息,若存在,则可以确定该图像帧已经被标记。
当然,除了上述方式,检测标记的方法可以根据对图像帧的标记方式进行调整。
在一些实施例中,显示人像的人物信息可以在图像帧的预设位置对人物信息进行显示。
具体的,可以将人物信息显示在靠近图像帧的四周位置处,如上部、下部、左部或右部。还可以根据人像所在的位置,将该人像对应的人物信息显示在人像所在的位置附近,以方便用户将人像与人物信息进行联系。
在一些实施例中,显示人像的人物信息,可以在预设时长内连续显示,以方便用户的观看。
在一些实施例中,显示人像的人物信息,可以在该人像对应的人物出现的预设时长内只显示一次,或者显示多次,具体显示次数及显示时机可以根据实际情况而定。
由此可知,本申请实施例中的数据处理装置,通过识别视频文件多个图像帧中的人像,获得人像的人物信息,并标记人像所在的图像帧,将被标记的图像帧与人像的人物信息进行关联,当播放视频文件并检测到标记时,显示人像的人物信息。本申请实施例可以快速识别电子设备上的显示内容,并在该人像出现时显示该人像对应的人物信息,可以让用户在观影过程中及时了解出场人物的角色信息。
参见图7,图中示出了本申请实施例提供的数据处理装置的另一结构,包括文件获取模块401识别模块402、标记模块403以及显示模块404,其中,标记模块403包括归类子模块4031以及标记子模块4032。
文件获取模块401,用于获取视频文件。
其中,视频文件的格式可以是现有技术中采用的格式。该视频文件由若干帧图像帧构成,每一图像帧均为一幅图像。该多个图像帧,指的是视频文件中的每一帧图像帧,或者是所提取出的两帧或两帧以上的图像帧,本申请实施例对其具体数量不作限定。
在一些实施例中,获取视频文件,可以是用户通过预设的应用程序对该视频文件进行加载,也可以是从网络上对该视频文件进行下载获取,具体实现方式可以根据实际情况而进行设定。
其中,视频文件的格式可以是现有技术中采用的格式。该视频文件由若干帧图像帧构成,每一图像帧均为一幅图像。该多个图像帧,指的是视频文件中的每一帧图像帧,或者是所提取出的两帧或两帧以上的图像帧,本申请实施例对其具体数量不作限定。
识别模块402,用于识别视频文件多个图像帧中的人像,获得人像的人物信息。
在一些实施例中,识别视频文件多个图像帧中的人像,可以先将视频文件的数据进行预读取,以获得图像帧中的图像信息。如将视频文件中每一帧图像帧进行获取,或者在视频文件中每间隔预设的播放时长获取图像帧,又或者通过其他特定的形式将视频文件中的图像帧进行提取。
在一些实施例中,对于人像识别,可以采用现有的人像识别技术,将从视频文件提取出来的图像帧中的人像进行识别。
在人像识别过程中,可以结合预设的人像特征数据库来实现。具体的,可以将已知的多个演员的人像特征进行存储,以在人像识别中能将该图像帧中所出现的人像与人像特征数据库中的人像特征进行匹配,从而获得该图像帧中所出现的人像对应的是什么人物。
然后,在识别出该人物后,可以在人像特征数据库中获取与该人物对应的人物信息。也可以在电子设备连接网络后,在网络中获取该人物的人物信息。具体的人物信息获取方式可以根据实际情况而进行设定。
在一些实施例中,该人物信息可以是演员的真实信息,如真实的姓名、年龄、经历等,也可以是演员在该剧中的剧情信息,如剧中所演角色的姓名、年龄、经历等。
所述标记模块403包括归类子模块4031以及标记子模块4032。
所述归类子模块4031,用于将多个图像帧中的人像进行归类,所述归类包括将同一人物的人像归为一类。
其中,在归类之前,需要对图像帧进行人像识别。当识别完图像帧中各个人像对应的人物以后,可以将多个图像帧中的同一人像归为一类。
当然,在归类的过程中,还可以根据其他标准将多个图像帧中的人像进行归类,例如根据演员的性质进行归类(如男女主角、情节中不同势力方等),或者根据演员的出场顺序将演员出场时的图像帧进行归类。具体归类方式可以根据实际需要进行设定。
所述标记子模块4032,用于标记同一人物的人像所在的图像帧。
其中,所述标记子模块4032具体用于:确定预设时长内同一人物的人像出现时的多个目标图像帧;标记多个目标图像帧内同一人物的人像所在的图像帧。
其中,目标图像帧为出现该同一人物的人像的图像帧。预设时长可以是人为设定的某段时间,例如是10分钟内或者其他时间段内。还可以是按剧情划分的某片段的播放时间内。
因为同一人物在某一片段里可能并不是连续出现在全部图像帧中,因此,在一些实施例中,可以先将预设时长内同一人物的人像出现时的多个目标图像帧进行获取,再在这些目标图像帧中进行标记,如此可以减少电子设备的数据处理量,提高数据处理速度。
在一些实施例中,可以根据以下方式对预设时长内同一人物的人像出现时的多个目标图像帧进行确定:
将预设时长内所述同一人物的人像第一次出现时的图像帧作为起始帧;将预设时长内所述同一人物的人像最后一次出现的图像帧作为结束帧;将起始帧与结束帧之间出现同一人物的人像的多个图像帧确定为所述多个目标图像帧。
同理,当某一场景中某帧的前10秒内该人物的人像均有出现,但下一秒钟该人物的人像未出现,且后续的多个图像帧中均未出现该人物的人像,可以将该图像帧作为结束帧。
然后,将起始帧以及结束帧之间出现该人物的人像的多个图像帧确定为目标图像帧。当然,可以对起始帧以及结束帧之间未出现该人物的图像帧不作处理。
在该实施例中,只从该特定人物出场时的多个图像帧中对目标图像帧进行获取,可以进一步减少电子设备的数据运算量,大大提高图像处理速度。
其中,标记人像所在的图像帧,其目的在于使该标记后的图像帧区别一般的图像帧,可以标记某一帧图像帧,或者是多帧图像帧,具体可以根据实际需求而定。
在一些实施例中,标记时可以在预设时长内只标记该同一人物的人像一次。当然,该时间也可以根据剧情需要进行设定,例如以场景为单位对同一人物的人像出场时的图像帧进行标记。
在一些实施例中,为了能够让用户可以提前了解该人物出场前的剧情,提高用户的观看体验,可以按预设方式标记在同一人物的人像出场之前的某特定一个或多个图像帧。例如,将离该人物出场10秒钟之前的图像帧进行标记,以使用户可以从该人物出场10秒钟之前的图像帧处开始播放视频,并让用户了解该人物出场前10秒钟内的剧情。
在一些实施例中,标记同一人物的人像所在的图像帧可以是在图像帧的属性信息中对信息进行修改,如增加、替换或者删除特定信息,以使视频文件的播放应用程序或者其他第三方程序能够识别到该改动,从而识别出该图像帧为被标记后的图像帧。
标记同一人物的人像所在的图像帧还可以是通过将该图像帧的帧位置进行记录,生成被标记图像帧的位置列表,从而在播放过程中根据该位置列表获知该图像帧是否被标记。
当然,除了上述实现方式,还可以采用其他方式对图像帧进行标记,本申请对该标记方式不作限定。
所述标记模块403,具体用于标记多个目标图像帧内同一人物的人像所在的图像帧,将被标记的图像帧与人像的人物信息进行关联。
其中,标记人像所在的图像帧,其目的在于使该标记后的图像帧区别一般的图像帧,可以标记某一帧图像帧,或者是多帧图像帧,具体可以根据实际需求而定。
在一些实施例中,标记时可以在预设时长内只标记该同一人物的人像一次,例如在15分钟内,只标记同一人物的人像出场时的第一帧图像帧,或者是对该人物出场时的多个或所有图像帧进行标记。
当然,该时间也可以根据剧情需要进行设定,例如以场景为单位对同一人物的人像出场时的图像帧进行标记。
在一些实施例中,为了能够让用户可以提前了解该人物出场前的剧情,提高用户的观看体验,可以按预设方式标记在同一人物的人像出场之前的某特定一个或多个图像帧。例如,将离该人物出场10秒钟之前的图像帧进行标记,以使用户可以从该人物出场10秒钟之前的图像帧处开始播放视频,并让用户了解该人物出场前10秒钟内的剧情。
在一些实施例中,标记同一人物的人像所在的图像帧可以是在图像帧的属性信息中对信息进行修改,如增加、替换或者删除特定信息,以使视频文件的播放应用程序或者其他第三方程序能够识别到该改动,从而识别出该图像帧为被标记后的图像帧。
标记同一人物的人像所在的图像帧还可以是通过将该图像帧的帧位置进行记录,生成被标记图像帧的位置列表,从而在播放过程中根据该位置列表获知该图像帧是否被标记。
当然,除了上述实现方式,还可以采用其他方式对图像帧进行标记,本申请对该标记方式不作限定。
在一些实施例中,将被标记的图像帧与人像的人物信息进行关联,可以该图像帧的标记过程中加入与人物信息相关的特定的属性参数,或者是将图像帧与人像的人物信息建立映射关系。
可以理解的,上述关联方式仅用于示例,具体的关联方式可以根据实际情况而进行设定。
显示模块404,用于当播放视频文件并检测到标记时,显示人像的人物信息。
其中,播放视频文件时,会按照图像帧的顺序依次读取图像帧,以按一定帧率将该图像帧进行显示形成连续图像。
在一些实施例中,检测标记,可以在读取图像帧的过程中,从该图像帧的属性信息、被标记图像帧的位置列表中检测是否存在与标记相关的信息,若存在,则可以确定该图像帧已经被标记。
当然,除了上述方式,检测标记的方法可以根据对图像帧的标记方式进行调整。
在一些实施例中,显示人像的人物信息可以在图像帧的预设位置对人物信息进行显示。
具体的,可以将人物信息显示在靠近图像帧的四周位置处,如上部、下部、左部或右部。还可以根据人像所在的位置,将该人像对应的人物信息显示在人像所在的位置附近,以方便用户将人像与人物信息进行联系。
在一些实施例中,显示人像的人物信息,可以在预设时长内连续显示,以方便用户的观看。
在一些实施例中,显示人像的人物信息,可以在该人像对应的人物出现的预设时长内只显示一次,或者显示多次,具体显示次数及显示时机可以根据实际情况而定。
由此可知,本申请实施例中的数据处理装置的结构可以将多个图像帧中同一人物的人像进行归类,并根据对不同人物的人像进行标记,可以实现用户可按所选取的不同人物显示不同人物对应的人物信息,使得用户可以快速了解不同人物的角色信息。
在一些实施例中,标记人像所在的图像帧,包括标记同一人物的人像所在的图像帧。为了避免赘述,对于如何标记同一人物的人像所在的图像帧,可以参考图7中对此内容所描述的实施例。
在一些实施例中,该标记同一人物的人像所在的图像帧,具体可以是:标记所述多个图像帧内所述同一人物的人像第一次出现时的图像帧。
其中,该第一次出现时的图像帧,可以理解为预设时间内第一次识别到该人像的一个或多个图像帧,或者是该第一次识别到该人像的图像帧前后预设帧数内的其他一个或多个图像帧。
在一些实施例中,标记模块403,可以具体用于:
获取多个图像帧内同一人物的人像第一次出现时的图像帧;
确定图像帧中人像所在的位置,将人像所在的位置与所述人像的人物信息进行关联;
对人像所在的位置进行标记。
其中,该第一次出现时的图像帧,可以理解为预设时间内第一次识别到该人像的一个或多个图像帧,或者是该第一次识别到该人像的图像帧前后预设帧数内的其他一个或多个图像帧。
在一些实施例中,该同一人物的人像第一次出现时的图像帧可以通过检测是否是被标记的图像帧来进行确定,当确定该图像帧是同一人物的人像第一次出现时的图像帧后,即可对该图像帧进行获取。
在一些实施例中,获取同一人物的人像第一次出现时的图像帧,可以在播放过程中的预读取阶段对该图像帧进行获取,使得在显示该图像帧之前对其进行处理。
在一些实施例中,对于图像帧中人像所在的位置,可以通过人脸识别技术进行确定,具体所用的人脸识别技术可以采用现有技术实现。
当通过人脸识别技术识别出图像帧中人像所在的位置后,其中,该位置指的是人像所在的大概位置,如根据人脸的范围将边缘处作为人像所在的位置,或者根据人脸的范围将人脸的中心点作为人像所在的位置,具体用于定位的人像所在的位置可以根据实际情况而定。
在一些实施例中,将人像所在的位置与所述人像的人物信息进行关联,可以该图像帧的标记过程中加入与人物信息相关的特定的属性参数,或者是将图像帧与人像的人物信息建立映射关系。
可以理解的,上述关联方式仅用于示例,具体的关联方式可以根据实际情况而进行设定。
在一些实施例中,可以将该人像所在的位置转换成该图像帧中人像所在的显示坐标点或显示坐标范围,然后将该人像所在的显示坐标点或显示坐标范围添加入该图像帧的显示信息中,以形成标记。
或者是将该图像帧与标记映射表进行关联,该标记映射表记录有不同图像帧对应的不同人像所在的显示坐标点或显示坐标范围。当检测到该图像帧位于该标记映射表中时,即可从该标记映射表中发现该图像帧已被标记,且可以从中获取该图像帧对应的人像所在的显示坐标点或显示坐标范围。
所述显示模块404,具体用于:根据标记,在标记对应的在人像所在的位置附近显示人像的人物信息。
其中,所述人像所在的位置附近,可以理解为人像所在的位置的四周,或者具体来讲在人像所在的位置四周的预设范围内。当然,根据人像所在的位置的不同,其位置也可能不同。例如当该人像所在的位置具体为人脸所形成的区域位置,则所述人像所在的位置附近即为人脸所形成的区域位置附近。
在一些实施例中,在人像所在的位置附近显示人像的人物信息,可以在需要显示信息之前,先检测标记,若检测到标记则通过人像识别确定人像所在的位置,然后在人像所在的位置附近选定一个信息展示起始点,接着获取该人像的人物信息,并将该人像的人物信息在该信息展示点处进行展示。
在一些实施例中,在人像所在的位置附近显示人像的人物信息,还可以是在标记该人像对应的图像帧的过程中,根据人像所在的显示坐标点或显示坐标范围确定人像所在的位置,并在该人像所在的位置附近选定一个信息展示起始点进行标记,获取该人像的人物信息,将该人像的人物信息与该信息展示起始点进行关联,已完成对其标记。然后在显示信息之前,根据该标记获取该人像所在的显示坐标点或显示坐标范围,确定该人像所在的位置及其信息展示起始点,以使得在播放过程中当检测到该图像帧的标记时,即可将人像的人物信息在该信息展示起始点处进行显示。
如图8所示,在一些实施例中,显示模块404,具体可以包括:
显示子单元4041,用于在人像所在的位置附近对人像的人物信息持续显示预设时长。
其中,预设时长可以是1秒或其他具体时长,以方便用户能在这预设时长内查看清楚该人物对应的人物信息是什么,保证其提示作用。
当然,具体的显示方式,如显示的持续时长、字体及其大小或者具体的位置等,均可以根据实际情况而定,本申请在此不作限定。
由此可知,在本申请实施例中,该数据处理装置获取多个图像帧内同一人物的人像第一次出现时的图像帧,确定图像帧中人像所在的位置,将人像所在的位置与所述人像的人物信息进行关联,对人像所在的位置进行标记,并显示信息的时候在人像所在的位置附近显示人像的人物信息,从而避免多个同一人物的人像所在的图像帧被重复多次标记,并有利于在播放过程中迅速定位到人像所在的位置,提高系统在显示人物信息时的反应速度。
本申请实施例中,所述数据处理装置与上文实施例中的一种数据处理方法属于同一构思,在所述数据处理装置上可以运行所述数据处理方法实施例中提供的任一方法,其具体实现过程详见所述数据处理方法实施例,并可以采用任意结合形成本申请的可选实施例,此处不再赘述。
本申请实施例还提供一种电子设备,该电子设备可以是智能手机、平板电脑、台式电脑、笔记本、掌上电脑等设备。请参阅图9,电子设备500包括处理器501以及存储器502。其中,处理器501与存储器502电性连接。
所述处理器500是电子设备500的控制中心,利用各种接口和线路连接整个电子设备的各个部分,通过运行或加载存储在存储器502内的应用程序,以及调用存储在存储器502内的数据,执行电子设备500的各种功能并处理数据,从而对电子设备500进行整体监控。
所述存储器502可用于存储软件程序以及模块,处理器501通过运行存储在存储器502的软件程序以及模块,从而执行各种功能应用以及数据处理。存储器502可主要包括存储程序区和存储数据区,其中,存储程序区可存储操作系统、至少一个功能所需的应用程序(比如声音播放功能、图像播放功能等)等;存储数据区可存储根据服务器的使用所创建的数据等。此外,存储器502可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。相应地,存储器502还可以包括存储器控制器,以提供处理器501对存储器502的访问。
在本申请实施例中,电子设备500中的处理器501会按照如下的步骤,将一个或一个以上的应用程序的进程对应的指令加载到存储器502中,并由处理器501运行存储在存储器502中的应用程序,从而实现各种功能,如下:
获取视频文件;识别所述视频文件多个图像帧中的人像,获得所述人像的人物信息;标记所述人像所在的图像帧,将被标记的所述图像帧与所述人像的人物信息进行关联;当播放所述视频文件并检测到所述标记时,显示所述人像的人物信息。
在某些实施方式中,所述处理器501还可以用于:
将所述多个图像帧中的人像进行归类,所述归类包括将同一人物的人像归为一类;标记所述同一人物的人像所在的图像帧。
在某些实施方式中,所述处理器501还可以用于:
确定预设时长内同一人物的人像出现时的多个目标图像帧;标记所述多个目标图像帧内同一人物的人像所在的图像帧,其中所述同一人物的人像只标记一次。
在某些实施方式中,所述处理器501还可以用于:
标记所述多个图像帧内所述同一人物的人像第一次出现时的图像帧。
在某些实施方式中,所述处理器501还可以用于:
获取所述多个图像帧内所述同一人物的人像第一次出现时的图像帧;确定所述图像帧中所述人像所在的位置,将所述人像所在的位置与所述人像的人物信息进行关联;对所述人像所在的位置进行标记;根据所述标记,在所述标记对应的所述人像所在的位置附近显示所述人像的人物信息。
在某些实施方式中,所述处理器501还可以用于:
在所述人像所在的位置附近对所述人像的人物信息持续显示预设时长。
本申请实施例提供的电子设备,通过识别视频文件多个图像帧中的人像,获得人像的人物信息,并标记人像所在的图像帧,将被标记的图像帧与人像的人物信息进行关联,当播放视频文件并检测到标记时,显示人像的人物信息。本申请实施例可以快速识别电子设备上的显示内容,并在该人像出现时显示该人像对应的人物信息,可以让用户在观影过程中及时了解出场人物的角色信息。
请一并参阅图10,在某些实施方式中,电子设备500还可以包括:显示器503、射频电路504、音频电路505、无线保真模块506以及电源507。其中,其中,显示器503、射频电路504、音频电路505、无线保真模块506以及电源507分别与处理器501电性连接。
所述显示器503可以用于显示由用户输入的信息或提供给用户的信息以及各种图形用户接口,这些图形用户接口可以由图形、文本、图标、视频和其任意组合来构成。显示器503可以包括显示面板,在某些实施方式中,可以采用液晶显示器(LCD,Liquid CrystalDisplay)、或者有机发光二极管(OLED,Organic Light-Emitting Diode)等形式来配置显示面板。
所述射频电路504可以用于收发射频信号,以通过无线通信与网络设备或其他电子设备建立无线通讯,与网络设备或其他电子设备之间收发信号。
所述音频电路505可以用于通过扬声器、传声器提供用户与电子设备之间的音频接口。
所述无线保真模块506可以用于短距离无线传输,可以帮助用户收发电子邮件、浏览网站和访问流式媒体等,它为用户提供了无线的宽带互联网访问。
所述电源507可以用于给电子设备500的各个部件供电。在一些实施例中,电源507可以通过电源管理系统与处理器501逻辑相连,从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。
尽管图10中未示出,电子设备500还可以包括摄像头、蓝牙模块等,在此不再赘述。
本申请实施例还提供一种存储介质,所述存储介质存储多条指令,所述多条指令适于由处理器加载以执行上述实施例中的数据处理方法,比如:获取视频文件;识别所述视频文件多个图像帧中的人像,获得所述人像的人物信息;标记所述人像所在的图像帧,将被标记的所述图像帧与所述人像的人物信息进行关联;当播放所述视频文件并检测到所述标记时,显示所述人像的人物信息。
需要说明的是,本领域普通技术人员可以理解上述实施例的各种方法中的全部或部分步骤是可以通过程序来指令相关的硬件来完成,该程序可以存储于计算机可读的介质中,该介质可以包括但不限于:只读存储器(ROM,Read Only Memory)、随机存取存储器(RAM,Random Access Memory)、磁盘或光盘等。
以上对本申请实施例所提供的数据处理方法、装置、存储介质及电子设备进行了详细介绍,本文中应用了具体个例对本申请的原理及实施方式进行了阐述,以上实施例的说明只是用于帮助理解本申请的方法及其核心思想;同时,对于本领域的技术人员,依据本申请的思想,在具体实施方式及应用范围上均会有改变之处,综上所述,本说明书内容不应理解为对本申请的限制。

Claims (14)

1.一种数据处理方法,应用于电子设备,其特征在于,所述方法包括:
获取视频文件;
识别所述视频文件多个图像帧中的人像,获得所述人像的人物信息;
标记所述人像所在的图像帧,将被标记的所述图像帧与所述人像的人物信息进行关联;
当播放所述视频文件并检测到所述标记时,显示所述人像的人物信息。
2.如权利要求1所述的数据处理方法,其特征在于,所述标记所述人像所在的图像帧,包括:
将所述多个图像帧中的人像进行归类,所述归类包括将同一人物的人像归为一类;
标记所述同一人物的人像所在的图像帧。
3.如权利要求2所述的数据处理方法,其特征在于,所述标记所述同一人物的人像所在的图像帧,包括:
确定预设时长内同一人物的人像出现时的多个目标图像帧;
标记所述多个目标图像帧内同一人物的人像所在的图像帧,其中所述同一人物的人像只标记一次。
4.如权利要求2-3任意一项所述的数据处理方法,其特征在于,所述标记所述同一人物的人像所在的图像帧,包括:
标记所述多个图像帧内所述同一人物的人像第一次出现时的图像帧。
5.如权利要求4所述的数据处理方法,其特征在于,所述标记所述多个图像帧内所述同一人物的人像第一次出现时的图像帧,包括:
获取所述多个图像帧内所述同一人物的人像第一次出现时的图像帧;
确定所述图像帧中所述人像所在的位置,将所述人像所在的位置与所述人像的人物信息进行关联;
对所述人像所在的位置进行标记;
所述显示所述人像的人物信息,包括:
根据所述标记,在所述标记对应的所述人像所在的位置附近显示所述人像的人物信息。
6.如权利要求1所述的数据处理方法,其特征在于,所述显示所述人像的人物信息,包括:
在所述人像所在的位置附近对所述人像的人物信息持续显示预设时长。
7.一种数据处理装置,应用于电子设备,其特征在于,所述装置包括:
文件获取模块,用于获取视频文件;
识别模块,用于识别所述视频文件多个图像帧中的人像,获得所述人像的人物信息;
标记模块,用于标记所述人像所在的图像帧,将被标记的所述图像帧与所述人像的人物信息进行关联;以及
显示模块,用于当播放所述视频文件并检测到所述标记时,显示所述人像的人物信息。
8.如权利要求7所述的数据处理装置,其特征在于,所述标记模块,包括:
归类子模块,用于将所述多个图像帧中的人像进行归类,所述归类包括将同一人物的人像归为一类;以及
标记子模块,用于标记所述同一人物的人像所在的图像帧。
9.如权利要求8所述的数据处理装置,其特征在于,所述标记子模块,具体用于:
确定预设时长内同一人物的人像出现时的多个目标图像帧;
标记所述多个目标图像帧内同一人物的人像所在的图像帧,其中所述同一人物的人像只标记一次。
10.如权利要求8-9任意一项所述的数据处理装置,其特征在于,所述标记子模块,具体用于:
标记所述多个图像帧内所述同一人物的人像第一次出现时的图像帧。
11.如权利要求10所述的数据处理装置,其特征在于,所述标记子模块,具体用于:
获取所述多个图像帧内所述同一人物的人像第一次出现时的图像帧;
确定所述图像帧中所述人像所在的位置,将所述人像所在的位置与所述人像的人物信息进行关联;
对所述人像所在的位置进行标记;
所述显示模块,具体用于:
根据所述标记,在所述标记对应的所述人像所在的位置附近显示所述人像的人物信息。
12.如权利要求7所述的数据处理装置,其特征在于,所述显示模块,包括:
显示子模块,用于在所述人像所在的位置附近对所述人像的人物信息持续显示预设时长。
13.一种存储介质,其特征在于,所述存储介质存储多条指令,所述多条指令适于在计算机上运行时,使得所述计算机执行如权利要求1至6任意一项所述的数据处理方法。
14.一种电子设备,其特征在于,包括处理器和存储器,所述存储器存储多条指令,所述处理器通过加载所述存储器中的指令用于执行如权利要求1至6任意一项所述的数据处理方法。
CN201711461503.9A 2017-12-28 2017-12-28 数据处理方法、装置、存储介质及电子设备 Active CN108174270B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201711461503.9A CN108174270B (zh) 2017-12-28 2017-12-28 数据处理方法、装置、存储介质及电子设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201711461503.9A CN108174270B (zh) 2017-12-28 2017-12-28 数据处理方法、装置、存储介质及电子设备

Publications (2)

Publication Number Publication Date
CN108174270A true CN108174270A (zh) 2018-06-15
CN108174270B CN108174270B (zh) 2020-12-01

Family

ID=62519221

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201711461503.9A Active CN108174270B (zh) 2017-12-28 2017-12-28 数据处理方法、装置、存储介质及电子设备

Country Status (1)

Country Link
CN (1) CN108174270B (zh)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110392310A (zh) * 2019-07-29 2019-10-29 北京奇艺世纪科技有限公司 一种视频识别信息的显示方法及相关设备
CN110837580A (zh) * 2019-10-30 2020-02-25 平安科技(深圳)有限公司 一种行人图片标注方法、装置、存储介质和智能设备
CN111901633A (zh) * 2020-07-30 2020-11-06 腾讯科技(深圳)有限公司 视频的播放处理方法、装置、电子设备及存储介质
CN116761019A (zh) * 2023-08-24 2023-09-15 瀚博半导体(上海)有限公司 视频处理方法、系统、计算机设备及计算机可读存储介质

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102160084A (zh) * 2008-03-06 2011-08-17 阿明·梅尔勒 用于分割、分类视频对象并拍卖交互式视频对象的权利的自动过程
CN104185086A (zh) * 2014-03-28 2014-12-03 无锡天脉聚源传媒科技有限公司 一种提供视频信息的方法和装置
CN105052155A (zh) * 2013-03-20 2015-11-11 谷歌公司 内插视频标签
CN105282573A (zh) * 2014-07-24 2016-01-27 腾讯科技(北京)有限公司 一种嵌入式信息处理方法、客户端及服务器
US20160088341A1 (en) * 2013-09-04 2016-03-24 Panasonic Intellectual Property Management Co., Ltd. Video reception device, video recognition method, and additional information display system
CN106851395A (zh) * 2015-12-04 2017-06-13 中国电信股份有限公司 视频播放方法和播放器

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102160084A (zh) * 2008-03-06 2011-08-17 阿明·梅尔勒 用于分割、分类视频对象并拍卖交互式视频对象的权利的自动过程
CN105052155A (zh) * 2013-03-20 2015-11-11 谷歌公司 内插视频标签
US20160088341A1 (en) * 2013-09-04 2016-03-24 Panasonic Intellectual Property Management Co., Ltd. Video reception device, video recognition method, and additional information display system
CN104185086A (zh) * 2014-03-28 2014-12-03 无锡天脉聚源传媒科技有限公司 一种提供视频信息的方法和装置
CN105282573A (zh) * 2014-07-24 2016-01-27 腾讯科技(北京)有限公司 一种嵌入式信息处理方法、客户端及服务器
CN106851395A (zh) * 2015-12-04 2017-06-13 中国电信股份有限公司 视频播放方法和播放器

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110392310A (zh) * 2019-07-29 2019-10-29 北京奇艺世纪科技有限公司 一种视频识别信息的显示方法及相关设备
CN110392310B (zh) * 2019-07-29 2022-06-03 北京奇艺世纪科技有限公司 一种视频识别信息的显示方法及相关设备
CN110837580A (zh) * 2019-10-30 2020-02-25 平安科技(深圳)有限公司 一种行人图片标注方法、装置、存储介质和智能设备
WO2021082692A1 (zh) * 2019-10-30 2021-05-06 平安科技(深圳)有限公司 一种行人图片标注方法、装置、存储介质和智能设备
CN111901633A (zh) * 2020-07-30 2020-11-06 腾讯科技(深圳)有限公司 视频的播放处理方法、装置、电子设备及存储介质
CN111901633B (zh) * 2020-07-30 2021-12-17 腾讯科技(深圳)有限公司 视频的播放处理方法、装置、电子设备及存储介质
CN116761019A (zh) * 2023-08-24 2023-09-15 瀚博半导体(上海)有限公司 视频处理方法、系统、计算机设备及计算机可读存储介质

Also Published As

Publication number Publication date
CN108174270B (zh) 2020-12-01

Similar Documents

Publication Publication Date Title
US20150380058A1 (en) Method, device, terminal, and system for audio recording and playing
US10673790B2 (en) Method and terminal for displaying instant messaging message
CN108174270A (zh) 数据处理方法、装置、存储介质及电子设备
CN107885826B (zh) 多媒体文件播放方法、装置、存储介质及电子设备
CN107885483B (zh) 音频信息的校验方法、装置、存储介质及电子设备
CN108228776B (zh) 数据处理方法、装置、存储介质及电子设备
CN107885823B (zh) 音频信息的播放方法、装置、存储介质及电子设备
CN108628985B (zh) 一种相册的处理方法及移动终端
US20170064352A1 (en) Method and system for collecting statistics on streaming media data, and related apparatus
CN112269853B (zh) 检索处理方法、装置及存储介质
WO2019105457A1 (zh) 图像处理方法、计算机设备和计算机可读存储介质
CN105609121A (zh) 多媒体播放进度控制方法及装置
CN111339737B (zh) 实体链接方法、装置、设备及存储介质
CN112001312A (zh) 文档拼接方法、设备及存储介质
CN108255940A (zh) 一种跨语言搜索方法和装置、一种用于跨语言搜索的装置
CN103257997A (zh) 为视频及其他媒体内容启用复制和粘贴功能
CN113039513B (zh) 一种输入法候选内容的推荐方法及电子设备
CN110929137B (zh) 文章推荐方法、装置、设备及存储介质
CN108156380A (zh) 图像获取方法、装置、存储介质及电子设备
CN113220848A (zh) 用于人机交互的自动问答方法、装置和智能设备
CN104681049B (zh) 提示信息的显示方法及装置
CN112740148A (zh) 一种向输入框中输入信息的方法及电子设备
CN108537149A (zh) 图像处理方法、装置、存储介质及电子设备
US11243668B2 (en) User interactive method and apparatus for controlling presentation of multimedia data on terminals
CN111586329A (zh) 一种信息显示方法、装置及电子设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
CB02 Change of applicant information
CB02 Change of applicant information

Address after: Changan town in Guangdong province Dongguan 523860 usha Beach Road No. 18

Applicant after: GUANGDONG OPPO MOBILE TELECOMMUNICATIONS Corp.,Ltd.

Address before: Changan town in Guangdong province Dongguan 523860 usha Beach Road No. 18

Applicant before: GUANGDONG OPPO MOBILE TELECOMMUNICATIONS Corp.,Ltd.

GR01 Patent grant
GR01 Patent grant