CN112423062B - 视频人物信息显示方法、装置、终端设备及存储介质 - Google Patents
视频人物信息显示方法、装置、终端设备及存储介质 Download PDFInfo
- Publication number
- CN112423062B CN112423062B CN202011200473.8A CN202011200473A CN112423062B CN 112423062 B CN112423062 B CN 112423062B CN 202011200473 A CN202011200473 A CN 202011200473A CN 112423062 B CN112423062 B CN 112423062B
- Authority
- CN
- China
- Prior art keywords
- target
- video
- person
- target person
- character
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 70
- 238000005516 engineering process Methods 0.000 claims description 5
- 238000000605 extraction Methods 0.000 claims description 2
- 238000004891 communication Methods 0.000 description 12
- 238000012545 processing Methods 0.000 description 10
- 238000010586 diagram Methods 0.000 description 7
- 101100110009 Caenorhabditis elegans asd-2 gene Proteins 0.000 description 5
- 230000003321 amplification Effects 0.000 description 4
- 238000003199 nucleic acid amplification method Methods 0.000 description 4
- 230000002093 peripheral effect Effects 0.000 description 4
- 238000013473 artificial intelligence Methods 0.000 description 2
- 230000005540 biological transmission Effects 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 235000004936 Bromus mango Nutrition 0.000 description 1
- 240000007228 Mangifera indica Species 0.000 description 1
- 235000014826 Mangifera indica Nutrition 0.000 description 1
- 235000009184 Spondias indica Nutrition 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000004590 computer program Methods 0.000 description 1
- 230000000593 degrading effect Effects 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 230000001788 irregular Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 239000000463 material Substances 0.000 description 1
- 230000005055 memory storage Effects 0.000 description 1
- 238000010295 mobile communication Methods 0.000 description 1
- 238000012806 monitoring device Methods 0.000 description 1
- 238000009877 rendering Methods 0.000 description 1
- 238000012163 sequencing technique Methods 0.000 description 1
- 238000000638 solvent extraction Methods 0.000 description 1
- 238000012549 training Methods 0.000 description 1
- 238000005406 washing Methods 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/47—End-user applications
- H04N21/485—End-user interface for client configuration
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/41—Structure of client; Structure of client peripherals
- H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
- H04N21/42203—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS] sound input device, e.g. microphone
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/41—Structure of client; Structure of client peripherals
- H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
- H04N21/42204—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Human Computer Interaction (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明公开一种视频人物信息显示方法,所述视频人物信息显示方法包括以下步骤:从目标视频文件中,确定满足预设条件的目标人物;搜索目标人物,以得到目标人物介绍;从目标视频文件的视频帧中,提取目标人物对应的部分,作为目标人物图像;显示目标人物图像和目标人物介绍,以使用户了解到视频文件中的人物,提升用户体验。本发明还公开了一种视频人物信息显示装置、终端设备及存储介质,使用户可以了解到视频文件中的人物,提升用户体验。
Description
技术领域
本发明涉及终端技术领域,特别涉及一种视频人物信息显示方法、装置、终端设备及存储介质。
背景技术
视频是用户学习、工作、娱乐等的重要传输媒介。例如,用户可以通过观看视频学习做菜、健身、追星等。
但是,在用户观看视频之前或观看视频的过程中,通常会出现对视频中出现的人不了解的情况,从而降低了用户体验。
发明内容
本发明的主要目的是提供一种视频人物信息显示方法、装置、终端设备及存储介质,旨在解决现有终端设备不够智能,用户无法了解视频中出现的人物,降低了用户体验的技术问题。
为实现上述目的,本发明提出一种视频人物信息显示方法,应用于终端设备,所述视频人物信息显示方法包括以下步骤:
从目标视频文件中,确定满足预设条件的目标人物;
搜索所述目标人物,以得到目标人物介绍;
从所述目标视频文件的视频帧中,提取所述目标人物对应的部分,作为目标人物图像;
显示所述目标人物图像和所述目标人物介绍。
可选的,所述目标视频文件为处于播放状态的视频文件,所述从目标视频文件中,确定满足预设条件的目标人物的步骤包括:
在所述目标视频文件的播放过程中,接收人物搜索指令;
基于所述人物搜索指令,将所述目标视频文件当前显示的视频帧中,包括的人物作为目标人物;
所述从所述目标视频文件的视频帧中,提取所述目标人物对应的部分,作为目标人物图像的步骤包括:
从所述当前显示的视频帧中,提取所述目标人物对应的部分作为目标人物图像。
可选的,所述从目标视频文件中,确定满足预设条件的目标人物的步骤包括:
统计所述目标视频文件中,各人物的出现次数;
基于所述目标视频文件中各人物的出现次数,将出现次数最多的x个人物作为目标人物,所述x为大于等于1的整数。
可选的,所述从目标视频文件中,确定满足预设条件的目标人物的步骤包括:
基于预设划分规则将所述目标视频文件划分为m个视频段,所述m为大于1的整数;
统计各所述视频段中,出现的人物个数以及人物视频帧张数,所述人物视频帧为包括至少两个人物的视频帧;
从各所述视频段中,选择人物视频帧张数最大的n个视频段,作为目标视频段,所述n为大于等于1的整数;
从n个所述目标视频段中,获取y张视频帧,所述y基于所述终端设备播放器的播放频率,以及各所述视频段出现的人物个数最大值确定;
从所述y张视频帧中,查找人物个数最多的视频帧作为目标视频帧;
将所述目标视频帧中包括的人物,作为目标人物。
可选的,所述从所述目标视频文件的视频帧中,提取所述目标人物对应的部分,作为目标人物图像的步骤包括:
从所述目标视频帧中,分别提取各人物对应的部分;
将所述各人物对应的部分进行放大,以作为目标人物图像。
可选的,所述目标人物为人脸图像;
所述搜索所述目标人物,以得到目标人物介绍的步骤包括:
基于人脸识别技术,搜索所述目标人物,以得到目标人物介绍。
可选的,所述目标视频文件为处于显示状态的视频文件,所述显示所述目标人物图像和所述目标人物介绍的步骤包括:
将所述目标人物图像和所述目标人物介绍,显示在所述目标视频文件对应的显示区域中。
此外,为实现上述目的,本发明还提出一种视频人物信息显示装置,应用于终端设备,所述视频人物信息显示装置包括:
确定模块,用于从目标视频文件中,确定满足预设条件的目标人物;
搜索模块,用于搜索所述目标人物,以得到目标人物介绍;
提取模块,用于从所述目标视频文件的视频帧中,提取所述目标人物对应的部分,作为目标人物图像;
显示模块,用于显示所述目标人物图像和所述目标人物介绍。
此外,为实现上述目的,本发明还提出一种终端设备,所述终端设备包括:存储器、处理器及存储在所述存储器上并在所述处理器上运行视频人物信息显示程序,所述视频人物信息显示程序被所述处理器执行时实现上述任一项所述的视频人物信息显示方法的步骤。
此外,为实现上述目的,本发明还提出一种存储介质,其特征在于,所述存储介质上存储有视频人物信息显示程序,所述视频人物信息显示程序被处理器执行时实现上述任一项所述的视频人物信息显示方法的步骤。
本发明技术方案通过采用一种视频人物信息显示方法,所述视频人物信息显示方法包括以下步骤:从目标视频文件中,确定满足预设条件的目标人物;搜索目标人物,以得到目标人物介绍;从目标视频文件的视频帧中,提取目标人物对应的部分,作为目标人物图像;显示目标人物图像和目标人物介绍,这样,可以使用户了解到视频文件中的人物,提升用户体验,并且,人物图像是从视频文件中提取出来的,可以使用户更加直观的了解到该人物介绍对应于视频文件中的哪一人物,避免由于视频中出现的人物图像与相关介绍中的人物图像差异较大,导致用户不好辨别、理解错误的情况。
附图说明
为了更清楚地说明本发明实施例的技术方案,下面将对实施例中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图示出的结构获得其他的附图。
图1为本发明实施例方案涉及的硬件运行环境的终端设备结构示意图;
图2为本发明第一实施例的视频人物信息显示方法的流程示意图;
图3为本发明第六实施例的一种界面显示示意图;
图4为本发明第六实施例的一种视频选择界面的示意图;
图5为本发明第六实施例的一种视频播放界面的示意图;
图6为本发明视频人物信息显示装置的模块示意图。
本发明目的的实现、功能特点及优点将结合实施例,参照附图做进一步说明。
具体实施方式
应当理解,此处所描述的具体实施例仅仅用以解释本发明,并不用于限定本发明。
参照图1,图1为本发明实施例方案涉及的硬件运行环境的终端设备结构示意图。
终端设备可以是移动电话、智能电话、笔记本电脑、数字广播接收器、个人数字助理(PDA)、平板电脑(PAD)等用户设备(User Equipment,UE)、手持设备、车载设备、可穿戴设备、计算设备、智能家居设备(例如智能电视、冰箱、洗衣机、空调、抽油烟机等)、监控设备或连接到无线调制解调器的其它处理设备、移动台(Mobile station,MS)等,终端设备台可以是控制面板灯智能家居设备。设备可能被称为用户终端、便携式终端、台式终端等。
通常,终端设备包括:至少一个处理器301、存储器302以及存储在所述存储器上并可在所述处理器上运行的视频人物信息显示程序,所述视频人物信息显示程序配置为实现如下任一实施例所述的视频人物信息显示方法的步骤。
处理器301可以包括一个或多个处理核心,比如4核心处理器、8核心处理器等。处理器301可以采用DSP(Digital Signal Processing,数字信号处理)、FPGA(Field-Programmable Gate Array,现场可编程门阵列)、PLA(Programmable Logic Array,可编程逻辑阵列)中的至少一种硬件形式来实现。处理器301也可以包括主处理器和协处理器,主处理器是用于对在唤醒状态下的数据进行处理的处理器,也称CPU(CentralProcessingUnit,中央处理器);协处理器是用于对在待机状态下的数据进行处理的低功耗处理器。在一些实施例中,处理器301可以在集成有GPU(Graphics Processing Unit,图像处理器),GPU用于负责显示屏所需要显示的内容的渲染和绘制。处理器301还可以包括AI(Artificial Intelligence,人工智能)处理器,该AI处理器用于处理有关视频人物信息显示方法操作,使得视频人物信息显示方法模型可以自主训练学习,提高效率和准确度。
存储器302可以包括一个或多个计算机可读存储介质,该计算机可读存储介质可以是非暂态的。存储器302还可包括高速随机存取存储器,以及非易失性存储器,比如一个或多个磁盘存储设备、闪存存储设备。在一些实施例中,存储器302中的非暂态的计算机可读存储介质用于存储至少一个指令,该至少一个指令用于被处理器301所执行以实现本申请中方法实施例提供的视频人物信息显示方法。
在一些实施例中,终端还可选包括有:通信接口303和至少一个外围设备。处理器301、存储器302和通信接口303之间可以通过总线或信号线相连。各个外围设备可以通过总线、信号线或电路板与通信接口303相连。具体地,外围设备包括:射频电路304、显示屏305和电源306中的至少一种。
通信接口303可被用于将I/O(Input/Output,输入/输出)相关的至少一个外围设备连接到处理器301和存储器302。在一些实施例中,处理器301、存储器302和通信接口303被集成在同一芯片或电路板上;在一些其他实施例中,处理器301、存储器302和通信接口303中的任意一个或两个可以在单独的芯片或电路板上实现,本实施例对此不加以限定。
射频电路304用于接收和发射RF(Radio Frequency,射频)信号,也称电磁信号。射频电路304通过电磁信号与通信网络以及其他通信设备进行通信。射频电路304将电信号转换为电磁信号进行发送,或者,将接收到的电磁信号转换为电信号。可选地,射频电路304包括:天线系统、RF收发器、一个或多个放大器、调谐器、振荡器、数字信号处理器、编解码芯片组、用户身份模块卡等等。射频电路304可以通过至少一种无线通信协议来与其它终端进行通信。该无线通信协议包括但不限于:城域网、各代移动通信网络(2G、3G、4G及5G)、无线局域网和/或WIFI(Wireless Fidelity,无线保真)网络。在一些实施例中,射频电路304还可以包括NFC(Near Field Communication,近距离无线通信)有关的电路,本申请对此不加以限定。
显示屏305用于显示UI(User Interface,用户界面)。该UI可以包括图形、文本、图标、视频及其它们的任意组合。当显示屏305是触摸显示屏时,显示屏305还具有采集在显示屏305的表面或表面上方的触摸信号的能力。该触摸信号可以作为控制信号输入至处理器301进行处理。此时,显示屏305还可以用于提供虚拟按钮和/或虚拟键盘,也称软按钮和/或软键盘。在一些实施例中,显示屏305可以为一个,电子设备的前面板;在另一些实施例中,显示屏305可以为至少两个,分别设置在电子设备的不同表面或呈折叠设计;在再一些实施例中,显示屏305可以是柔性显示屏,设置在电子设备的弯曲表面上或折叠面上。甚至,显示屏305还可以设置成非矩形的不规则图形,也即异形屏。显示屏305可以采用LCD(LiquidCrystal Display,液晶显示屏)、OLED(Organic Light-Emitting Diode,有机发光二极管)等材质制备。
电源306用于为电子设备中的各个组件进行供电。电源306可以是交流电、直流电、一次性电池或可充电电池。当电源306包括可充电电池时,该可充电电池可以支持有线充电或无线充电。该可充电电池还可以用于支持快充技术。本领域技术人员可以理解,图1中示出的结构并不构成对终端设备的限定,可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置。
此外,本发明实施例还提出一种存储介质,所述存储介质上存储有视频人物信息显示程序,所述视频人物信息显示程序被处理器执行时实现如下文任一实施例所述的视频人物信息显示方法的步骤。因此,这里将不再进行赘述。另外,对采用相同方法的有益效果描述,也不再进行赘述。对于本申请所涉及的计算机可读存储介质实施例中未披露的技术细节,请参照本申请方法实施例的描述。确定为示例,程序指令可被部署为在一个计算设备上执行,或者在位于一个地点的多个计算设备上执行,又或者,在分布在多个地点且通过通信网络互连的多个计算设备上执行。
本领域普通技术人员可以理解实现下文任一实施例方法中的全部或部分流程,是可以通过计算机程序来指令相关的硬件来完成,所述第一视频人物信息显示程序或第二视频人物信息显示程序可存储于一计算机可读取存储介质中,该程序在执行时,可包括如下述各方法的实施例的流程。其中,上述的存储介质可为磁碟、光盘、只读存储记忆体(Read-Only Memory,ROM)或随机存储记忆体(Random AccessMemory,RAM)等。
基于上述硬件结构,提出本发明视频人物信息显示方法的实施例。
参照图2,图2为本发明视频人物信息显示方法的第一实施例的流程示意图,本实施例所提供的视频人物信息显示方法应用于终端设备,所述视频人物信息显示方法包括以下步骤:
步骤S10:从目标视频文件中,确定满足预设条件的目标人物。
本实施例中,目标视频文件可以是终端设备上的任意视频文件。例如,目标视频文件可以是当前正在播放的视频文件,即处于播放状态的视频文件。目标视频文件可以是视频选择界面上显示的,供用户选择的待播放视频文件,应当理解的是,在打开一个视频类应用程序(例如,腾讯视频、爱奇艺视频、优酷视频、芒果TV等)或者视频播放网站时,通常会显示视频选择界面(也称为视频推荐界面),视频选择界面上会显示各种视频,以供用户选择,目标视频文件包括该视频选择界面上显示的待播放视频文件。目标视频文件还可以是根据用户下发的指令确定的视频文件。
本实施例中,预设条件可以根据实际需要设置。
例如,预设条件可以是:将在目标视频文件中出现次数最多的x个人物作为目标人物,其中,x为大于等于1的整数,x的具体取值可以根据实际需要灵活设置,例如,可以设置为3个、5个、6个等。也就是说,根据目标视频文件中,各人物的出现次数,选择出现次数排名前x的人物作为目标人物,其中,出现次数越多,排名越靠前,例如,假设x为2,目标视频文件中,人物1出现5次,人物2出现3次,人物3出现8次,根据出现次数,将人物1和人物3作为目标人物。应当理解的是,目标视频文件中,某一人物的出现次数,为目标视频文件中包括该人物的视频帧的张数,例如,假设目标视频文件包括5张视频帧,其中,第一、三、五张视频帧中包括人物4,第二、四张视频帧中不包括人物4,则人物4在目标视频文件中出现的次数为3。
又如,预设条件可以是:将目标视频文件中,人物个数最多的一张视频帧中的人物作为目标人物,例如,假设目标视频文件包括3张视频帧,第一张视频帧中包括2个人,第二张视频帧中包括3个人,第三张视频帧中包括4个人,则将第三张视频帧中包括的这4个人作为目标人物。
需要说明的是,本实施例中,预设条件包括但不限于上述两种方式。
本实施例中,在从目标视频文件中,确定目标人物时,可以基于人脸来区分不同的人物,因此,确定出的目标人物为人脸图像。
步骤S20:搜索目标人物,以得到目标人物介绍。
本实施例中,确定目标人物后,搜索目标人物,以得到目标人物介绍。由于目标人物为人脸图像,因此,可以基于人脸识别技术,搜索目标人物,以得到目标人物介绍。
目标人物介绍包括但不限于:该目标人物的名称、出生日期、工作履历等。若目标人物为明星或者网红,目标人物介绍还可以包括:该目标人物的代表作品等。
步骤S30:从目标视频文件的视频帧中,提取目标人物对应的部分,作为目标人物图像。
在搜索到目标人物的简介后,从目标视频文件的视频帧中,查找到包括该目标人物的视频帧,从该视频帧中,提取目标人物对应的部分,作为目标人物图像。也就是说,从包括该目标人物的视频帧中,抠取目标人物对应的部分,将该部分作为目标人物图像。其中,可以只抠取目标人物的人脸部分;或者,可以抠取视频帧中,目标人物对应的所有部分(包括目标人物的人脸、身体等)。
步骤S40:显示目标人物图像和目标人物介绍。
本实施例中,在获得目标人物图像和目标人物介绍后,显示目标人物图像和目标人物介绍。
其中,可以将目标人物图像和目标人物介绍显示在显示屏的任意位置;或者,考虑到显示屏的中央为用户比较关注的区域,为了方便用户观看,将目标人物图像和目标人物介绍显示在显示屏的中央。需要说明的是,本实施例中,显示目标人物图像和目标人物介绍的方式包括但不限于上述两种示例。
本实施例中,在显示目标人物图像和目标人物介绍时,可以生成透明图层,将透明图层叠加显示在显示屏当前的显示界面上,其中,透明图层上包括目标人物图像和目标人物介绍,对于透明图层的透明度,其可以根据实际需要灵活设置,例如,可以设置为20%、10%等。这样,不仅可以使用户观看到目标人物图像和目标人物介绍,还可以将目标人物图像和目标人物介绍与显示屏显示的内容进行区分。
本实施例提供一种视频人物信息显示方法,包括以下步骤:从目标视频文件中,确定满足预设条件的目标人物;搜索目标人物,以得到目标人物介绍;从目标视频文件的视频帧中,提取目标人物对应的部分,作为目标人物图像;显示目标人物图像和目标人物介绍,这样,可以使用户了解到视频文件中的人物,提升用户体验,并且,人物图像是从视频文件中提取出来的,可以使用户更加直观的了解到该人物介绍对应于视频文件中的哪一人物,避免由于视频中出现的人物图像与相关介绍中的人物图像由于造型不同等原因,导致差异较大,使得用户不好辨别、理解错误的情况。
基于第一实施例,提出本发明视频人物信息显示方法的第二实施例。本实施例中,目标视频文件为处于播放状态的视频文件,也即,当前正在播放的视频文件,预设条件为:在目标视频文件的播放过程中,将接收到人物搜索指令时,目标视频文件当前显示的视频帧中,包括的人物作为目标人物。
其中,步骤S10包括:
步骤S111:在目标视频文件的播放过程中,接收人物搜索指令。
在视频文件播放的过程中,接收用户通过语音、触摸屏等用户输入接口下发的人物搜索指令,例如,播放目标视频文件的过程中,用户可以说出“这个人是谁”,终端设备采集到该条语音,将其转化为语音控制指令,并判定出该语音控制指令为人物搜索指令。
步骤S112:基于人物搜索指令,将目标视频文件当前显示的视频帧中,包括的人物作为目标人物。
在接收到人物搜索指令时,提取显示屏上当前显示的目标视频文件的视频帧,并将该视频帧中包括的人物作为目标人物。
可选的,在步骤S111之后,还可以先暂停播放视频,以使方便用户查看目标人物介绍。在接收到播放指令时,再继续播放视频。
本实施例提供的视频人物信息显示方法,在视频播放过程中,接收到人物搜索指令时,将当前显示的视频帧中的人物作为目标人物,搜索目标人物以得到目标人物介绍,并提取目标人物图像,显示目标人物图像和目标人物介绍,使得用户观看视频的过程中,可以了解到人物介绍。
基于第二实施例,提出本发明视频人物信息显示方法的第三实施例。步骤S30包括:从当前显示的视频帧中,提取目标人物对应的部分作为目标人物图像。
也就是说,从步骤S112中确定的当前显示的视频帧中,提取目标人物对应的部分作为目标人物图像。
本实施例提供的视频人物信息显示方法,在视频播放过程中,接收到人物搜索指令时,将当前显示的视频帧中的人物作为目标人物,搜索目标人物以得到目标人物介绍,并从当前显示的视频帧中提取目标人物图像,显示目标人物图像和目标人物介绍,由于目标人物图像是从当前显示的视频帧中提取出来的,可以使用户更佳直观的了解到该人物介绍对应于当前显示的视频帧中的哪一人物,提升用户体验。
基于第一实施例,提出本发明视频人物信息显示方法的第四实施例。本实施例中,步骤S10包括:
步骤S121:基于预设划分规则将目标视频文件划分为m个视频段。
预设划分规则可以根据实际需要灵活设置。例如,预设划分规则可以是:根据场景划分,将相同的场景划分为一个视频段,也就是说,m的大小与目标视频文件包括的场景的多少有关。或者,预设划分规则可以是:将目标视频文件划分为m个视频段,每个视频段的时长相等,其中,m为大于1的整数,例如,可以设置为100、200等;例如,假设m为5,目标视频文件的总时长为100分钟,则每个视频段的时长为20分钟。
步骤S122:统计各视频段中,出现的人物个数以及人物视频帧张数。
其中,人物视频帧为包括至少两个人物的视频帧,例如,假设某一视频帧只包括1个人物,则该视频帧不是人物视频帧,假设某一视频帧包括2个人物,则该视频帧是人物视频帧。
也就是说,将目标视频文件划分为m个视频段后,统计各视频段中,出现的人物个数以及人物视频帧张数。
为了更好的理解,这里以一个示例进行说明:假设某一目标视频文件按照预设划分规则被划分为2个视频段,第一个视频段包括4张视频帧,第一张视频帧中包括人物1、人物2、人物3,第二张视频帧中包括人物1、人物3,第三张视频帧中包括人物3,第四张视频帧中包括人物1、人物3;第二个视频段包括2张视频帧,第一张视频帧包括人物3、人物4,第二张视频帧包括人物3。则第一个视频段中,出现的人物个数为3个(分别为人物1、2、3),人物视频帧的张数为3;第二个视频段中,出现的人物个数为2个(分别为人物3、4),人物视频帧张数为1。
步骤S123:从各视频段中,选择人物视频帧张数最大的n个视频段,作为目标视频段。
其中,n为大于1的整数,n的取值可以根据实际需要灵活设置,可以设置为1、2、3等。
承接上例,假设n为1,由于第一个视频段中人物视频帧的张数是最大的,因此,将第一个视频段作为目标视频段。
步骤S124:从n个目标视频段中,获取y张视频帧。
其中,y根据终端设备播放器的播放频率(即,播放器1秒内播放的视频帧的张数),以及各视频段出现的人物个数最大值确定,y=播放频率/各视频段中、出现的人物个数最大值。
本实施例中,可以从n个目标视频段中,随机获取y张视频帧。
承接上例,第一个视频段和第二个视频段中,出现的人物个数最大值为3,假设播放器的播放频率为6,则y=6/3=2,从第一个视频段中获取2张视频帧。
步骤S125:从y张视频帧中,查找人物个数最多的视频帧作为目标视频帧。
承接上例,假设从第一个视频段中获取的2张视频帧分别为第一张视频帧、第二张视频帧,由于第一张视频帧包括3个人,第二张视频帧包括2个人,因此,第一张视频帧为目标视频帧。
步骤S126:将目标视频帧中包括的人物,作为目标人物。
承接上例,将人物1、2、3作为目标人物。
本实施例提供的视频人物信息显示方法,先将目标视频文件划分为m个视频段,分别统计各视频段中出现的人物个数以及人物视频帧张数,这样,可以提高统计效率,其中,m为大于1的整数,人物视频帧为包括至少两个人物的视频帧;然后,从各视频段中,选择人物视频帧张数最大的n个视频段,作为目标视频段,从n个目标视频段中,获取y张视频帧,并从y张视频帧中,查找人物个数最多的一帧作为目标视频帧,其中,y根据终端设备播放器的播放频率以及各视频段出现的人物个数最大值确定;这样,可以降低数据处理量,提升处理效率。
基于第四实施例,提出本发明视频人物信息显示方法的第五实施例。
本实施例中,步骤S30包括:
步骤301:从目标视频帧中,分别提取各人物对应的部分。
也就是说,从步骤S125中确定的目标视频帧中,分别提取各人物对应的部分。
承接上例,目标视频帧为第一个视频段的第一张视频帧,从第一张视频帧中提取人物1、人物2、人物3对应的部分。
步骤302:将各人物对应的部分进行放大,以作为目标人物图像。
由于目标视频帧中包括的人物数量可能较多,因此,将提取的各人物对应的部分进行放大,以作为目标人物图像。
其中,放大的倍数可以根据预先设置的放大倍数确定。或者,放大倍数可以根据目标视频帧中包括的人物个数确定,人物个数越多,放大倍数越大;或者,放大倍数可以根据y确定,y越大,放大倍数越大,y越小,放大倍数越小。
本实施例提供的视频人物信息显示方法,从目标视频帧中,提取各人物对应的部分并放大后,作为目标人物图像,从而可以方便用户观看。
基于第一实施例,提出本发明视频人物信息显示方法的第六实施例。本实施例中,预设条件为:将在目标视频文件中出现次数最多的x个人物作为目标人物。
步骤S10包括:
步骤S131:统计目标视频文件中,各人物的出现次数。
本实施例中,统计目标视频文件中,不同人物的出现次数。
为了更好的理解,这里以一个示例进行说明:假设目标视频文件中,一共出现了3个人,人物1出现了5次,人物2出现了4次,人物3出现了3次。
步骤S132:基于目标视频文件中各人物的出现次数,将出现次数最多的x个人物作为目标人物。
其中,x为大于1的整数。
承接上例,假设x为2,由于人物1、人物2的出现次数排在前两位,则人物1、人物2为目标人物。
本实施例提供的视频人物信息显示方法,通过统计目标视频文件中,各人物的出现次数,将出现次数最多的x个人物作为目标人物,然后,搜索目标人物以得到目标人物介绍,从视频帧中提取目标人物图像,显示目标人物介绍和目标人物图像,以使用户无需观看目标视频文件,即可知晓该目标视频文件中相关的人物,从而使用户可以根据自身兴趣选择对应的视频观看,提升用户体验。
基于第一实施例,提出本发明视频人物信息显示方法的第七实施例。本实施例中,目标视频文件为处于显示状态的视频文件,处于显示状态的视频文件包括但不限于:处于播放状态的视频文件(由于目标视频文件正在显示屏上播放,因此,目标视频文件处于显示状态,其中,播放状态包括全屏播放状态和非全屏播放状态),视频选择界面上显示的、供用户选择的待播放视频文件。
步骤S40包括:将目标人物图像和目标人物介绍,显示在目标视频文件对应的显示区域中。
由于目标视频文件为处于显示状态的视频文件,因此,其在显示屏上有对应的显示区域,将目标人物图像和目标人物介绍,显示在目标视频文件对应的显示区域中,以使用户知晓该目标视频文件对应的人物信息。
其中,将目标人物图像和目标人物介绍,显示在目标视频文件对应的显示区域的方式可以根据实际需要灵活设置。
例如,可以将目标人物图像和目标人物介绍显示在目标视频文件对应的显示区域上的任意位置。
或者,可以按照“田”字格的形式,将目标视频文件对应的显示区域划分为面积相等的四个子显示区域,在一个子显示区域显示一个目标人物对应的图像和介绍。例如,参见图3所示,假设目标视频文件为当前处于全屏播放状态的视频文件,将目标视频文件对应的显示区域301划分为四个面积相等的子显示区域302,一个子显示区域302显示一个目标人物对应的图像和介绍。当目标人物的个数大于4时,则可以先在4个子显示区域中,显示4个目标人物的图像和介绍,再依次显示下一个目标人物对应的图像和介绍,例如,假设按照顺时针方向,将四个子显示区域分别记为第一、第二、第三、第四子显示区域,当目标人物个数大于4时,先在第一、第二、第三、第四子显示区域分别显示第一、第二、第三、第四目标人物对应的图像和介绍,再在第一、第二、第三、第四子显示区域分别显示第二、第三、第四、第五目标人物对应的图像和介绍,然后在第一、第二、第三、第四子显示区域分别显示第三、第四、第五、第六目标人物对应的图像和介绍,按照此规律循环,直到所有目标人物显示完毕。
或者,可以将目标人物图像和目标人物介绍显示在目标视频文件对应的显示区域上的预设区域,对于预设区域,其可以根据实际需要灵活设置,其中,可以设置为目标视频文件对应的显示区域的左上方、四个角、中间区域等。当目标人物的个数较多,大于预设区域的个数,可以依次显示目标人物图像和目标人物介绍,例如,假设预设区域为目标视频文件对应的显示区域的左上方,在目标视频文件对应的显示区域的左上方显示第一目标人物图像和第一目标人物介绍一定时长后,再在目标视频文件对应的显示区域的左上方显示第二目标人物图像和第二目标人物介绍,直到所有的目标人物对应的图像和介绍显示完毕。为了更好的理解,此处以两个示例进行说明。
示例一:
假设目标视频文件为视频选择界面上显示的,供用户选择的待播放视频文件,预设区域为目标视频文件对应的显示区域的左上方。参见图4所示,视频选择界面401上显示有4个推荐视频,每一个推荐视频有对应的显示区域402,显示区域402用于显示该视频对应的海报(图4中未示出),显示区域402下方显示该视频的名称和相关介绍,目标人物图像和目标人物介绍显示在显示区域402的左上方。
示例二:
假设目标视频文件为当前处于全屏播放状态的视频文件,目标人物为在目标视频文件的播放过程中,将接收到人物搜索指令时,目标视频文件当前显示的视频帧中,包括的人物;预设区域为目标视频文件对应的显示区域的四个角。在接收到人物搜索指令时,显示屏当前显示的视频帧如图5所示,包括4个目标人物,将这四个目标人物的图像和介绍分别显示在显示屏的四个角上。
本实施例提供的视频人物信息显示方法,当目标视频文件为处于显示状态的视频文件时,将目标人物图像和目标人物介绍显示在目标视频文件对应的显示区域中,以使用户知晓显示的目标人物图像和目标人物介绍,对应于哪一目标视频文件。
基于第一实施例,提出本发明视频人物信息显示方法的第七实施例。当目标视频文件为视频选择界面上的视频文件时,步骤S20之后,视频人物信息显示方法还包括:
步骤S50:获取人物关注表。
人物关注表中包括不同的人物以及不同人物对应的关注值,其中,关注值越高,表明用户对其关注度较高。人物关注表可以由用户自行设置,例如,用户可以根据自己的喜好,设置比较关注的明星,以及各明星对应的关注值。或者,可以获取历史播放记录,对历史播放记录进行分析,以得到用户比较关注的人物以及各人物的关注值,从而建立人物关注表,例如,假设在最近一周中,用户观看明星1相关视频的时长为100分钟,观看明星2相关视频的时长为80分钟,观看明星3相关视频的时长为50分钟,则明星1的关注值>明星2的关注值>明星3的关注值。
步骤S60:根据人物关注表,以及各目标视频文件对应的目标人物,对各目标视频文件进行排序。
从人物关注表中查找是否有与目标人物匹配的人物,若有,根据该人物对应的关注值,对目标视频文件进行排序,关注值越高,排序越靠前。例如,假设人物关注表包括明星1、明星2、明星3,明星1的关注值>明星2的关注值>明星3的关注值;目标视频文件有3个,第一个目标视频文件对应的目标人物为明星1,第二个目标视频文件对应的目标人物为明星4、明星5,第三个目标视频文件对应的目标人物为明星2,因此,各目标视频文件的先后顺序依次为:第一个目标视频文件、第三个目标视频文件、第二个目标视频文件。
本实施例提供的视频人物信息显示方法,基于人物关注表中各人物的关注值,以及各目标视频文件对应的目标人物,对各目标视频文件进行排序,从而使得排序方式与用户关注度匹配,提升用户体验。
本实施例中,在前述视频人物信息显示方法实施例的基础上,提供一种视频人物信息显示装置,应用于终端设备,参照图6,图6为本发明视频人物信息显示装置的模块示意图,所述视频人物信息显示装置包括:
确定模块10,用于从目标视频文件中,确定满足预设条件的目标人物。
搜索模块11,用于搜索目标人物,以得到目标人物介绍。
提取模块12,用于从目标视频文件的视频帧中,提取目标人物对应的部分,作为目标人物图像。
显示模块13,用于显示目标人物图像和目标人物介绍。
需要说明的是,视频人物信息显示装置还可选的包括有对应的模块,以实施上述视频人物信息显示方法的其他步骤。
需要说明的是,在本文中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者系统不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者系统所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括该要素的过程、方法、物品或者系统中还存在另外的相同要素。
上述本发明实施例序号仅仅为了描述,不代表实施例的优劣。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在如上所述的一个存储介质(如ROM/RAM、磁碟、光盘)中,包括若干指令用以使得一台终端设备(可以是手机,计算机,服务器,空调器,或者网络设备等)执行本发明各个实施例所述的方法。
以上所述仅为本发明的可选实施例,并非因此限制本发明的专利范围,凡是在本发明的发明构思下,利用本发明说明书及附图内容所作的等效结构变换,或直接/间接运用在其他相关的技术领域均包括在本发明的专利保护范围内。
Claims (7)
1.一种视频人物信息显示方法,其特征在于,应用于终端设备,所述视频人物信息显示方法包括以下步骤:
从目标视频文件中,确定满足预设条件的目标人物;
搜索所述目标人物,以得到目标人物介绍;
从所述目标视频文件的视频帧中,提取所述目标人物对应的部分,作为目标人物图像;
显示所述目标人物图像和所述目标人物介绍;
其中,从目标视频文件中,确定满足预设条件的目标人物的步骤包括:
基于预设划分规则将所述目标视频文件划分为m个视频段,所述m为大于1的整数;
统计各所述视频段中,出现的人物个数以及人物视频帧张数,所述人物视频帧为包括至少两个人物的视频帧;
从各所述视频段中,选择人物视频帧张数最大的n个视频段,作为目标视频段,所述n为大于等于1的整数;
从n个所述目标视频段中,获取y张视频帧,所述y基于所述终端设备播放器的播放频率,以及各所述视频段出现的人物个数最大值确定;
从所述y张视频帧中,查找人物个数最多的视频帧作为目标视频帧;
将所述目标视频帧中包括的人物,作为目标人物。
2.如权利要求1所述的视频人物信息显示方法,其特征在于,所述从所述目标视频文件的视频帧中,提取所述目标人物对应的部分,作为目标人物图像的步骤包括:
从所述目标视频帧中,分别提取各人物对应的部分;
将所述各人物对应的部分进行放大,以作为目标人物图像。
3.如权利要求1所述的视频人物信息显示方法,其特征在于,所述目标人物为人脸图像;
所述搜索所述目标人物,以得到目标人物介绍的步骤包括:
基于人脸识别技术,搜索所述目标人物,以得到目标人物介绍。
4.如权利要求1-3任一项所述的视频人物信息显示方法,其特征在于,所述目标视频文件为处于显示状态的视频文件,所述显示所述目标人物图像和所述目标人物介绍的步骤包括:
将所述目标人物图像和所述目标人物介绍,显示在所述目标视频文件对应的显示区域中。
5.一种视频人物信息显示装置,其特征在于,应用于终端设备,所述视频人物信息显示装置包括:
确定模块,用于从目标视频文件中,确定满足预设条件的目标人物;
搜索模块,用于搜索所述目标人物,以得到目标人物介绍;
提取模块,用于从所述目标视频文件的视频帧中,提取所述目标人物对应的部分,作为目标人物图像;
显示模块,用于显示所述目标人物图像和所述目标人物介绍;
所述确定模块还用于,基于预设划分规则将所述目标视频文件划分为m个视频段,所述m为大于1的整数;统计各所述视频段中,出现的人物个数以及人物视频帧张数,所述人物视频帧为包括至少两个人物的视频帧;从各所述视频段中,选择人物视频帧张数最大的n个视频段,作为目标视频段,所述n为大于等于1的整数;从n个所述目标视频段中,获取y张视频帧,所述y基于所述终端设备播放器的播放频率,以及各所述视频段出现的人物个数最大值确定;从所述y张视频帧中,查找人物个数最多的视频帧作为目标视频帧;将所述目标视频帧中包括的人物,作为目标人物。
6.一种终端设备,其特征在于,所述终端设备包括:存储器、处理器及存储在所述存储器上并在所述处理器上运行视频人物信息显示程序,所述视频人物信息显示程序被所述处理器执行时实现如权利要求1至4任一项所述的视频人物信息显示方法的步骤。
7.一种存储介质,其特征在于,所述存储介质上存储有视频人物信息显示程序,所述视频人物信息显示程序被处理器执行时实现如权利要求1至4任一项所述的视频人物信息显示方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202011200473.8A CN112423062B (zh) | 2020-10-30 | 2020-10-30 | 视频人物信息显示方法、装置、终端设备及存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202011200473.8A CN112423062B (zh) | 2020-10-30 | 2020-10-30 | 视频人物信息显示方法、装置、终端设备及存储介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN112423062A CN112423062A (zh) | 2021-02-26 |
CN112423062B true CN112423062B (zh) | 2023-11-10 |
Family
ID=74827259
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202011200473.8A Active CN112423062B (zh) | 2020-10-30 | 2020-10-30 | 视频人物信息显示方法、装置、终端设备及存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN112423062B (zh) |
Citations (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103442252A (zh) * | 2013-08-21 | 2013-12-11 | 宇龙计算机通信科技(深圳)有限公司 | 视频处理方法及装置 |
CN105323634A (zh) * | 2014-06-27 | 2016-02-10 | Tcl集团股份有限公司 | 一种视频的缩略图生成方法及系统 |
CN107105340A (zh) * | 2017-03-21 | 2017-08-29 | 百度在线网络技术(北京)有限公司 | 基于人工智能的视频中显示人物信息方法、装置和系统 |
CN107832724A (zh) * | 2017-11-17 | 2018-03-23 | 北京奇虎科技有限公司 | 从视频文件中提取人物关键帧的方法及装置 |
CN108255922A (zh) * | 2017-11-06 | 2018-07-06 | 优视科技有限公司 | 视频识别方法、设备、客户端装置、电子设备及服务器 |
CN108268666A (zh) * | 2018-02-26 | 2018-07-10 | 北京奇艺世纪科技有限公司 | 一种搜索方法和装置 |
CN108401176A (zh) * | 2018-02-06 | 2018-08-14 | 北京奇虎科技有限公司 | 一种实现视频人物标注的方法和装置 |
CN109348275A (zh) * | 2018-10-30 | 2019-02-15 | 百度在线网络技术(北京)有限公司 | 视频处理方法和装置 |
CN109993025A (zh) * | 2017-12-29 | 2019-07-09 | 中移(杭州)信息技术有限公司 | 一种关键帧提取方法及设备 |
CN110225387A (zh) * | 2019-05-20 | 2019-09-10 | 北京奇艺世纪科技有限公司 | 一种信息搜索方法、装置及电子设备 |
CN110225367A (zh) * | 2019-06-27 | 2019-09-10 | 北京奇艺世纪科技有限公司 | 一种视频中对象信息的显示、识别方法及装置 |
WO2020048275A1 (zh) * | 2018-09-03 | 2020-03-12 | 聚好看科技股份有限公司 | 信息显示方法及装置 |
Family Cites Families (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103365854A (zh) * | 2012-03-28 | 2013-10-23 | 鸿富锦精密工业(深圳)有限公司 | 视频文件检索系统及检索方法 |
CN105868260A (zh) * | 2015-12-30 | 2016-08-17 | 乐视网信息技术(北京)股份有限公司 | 视频搜索的方法及装置 |
JP6573346B1 (ja) * | 2018-09-20 | 2019-09-11 | パナソニック株式会社 | 人物検索システムおよび人物検索方法 |
-
2020
- 2020-10-30 CN CN202011200473.8A patent/CN112423062B/zh active Active
Patent Citations (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103442252A (zh) * | 2013-08-21 | 2013-12-11 | 宇龙计算机通信科技(深圳)有限公司 | 视频处理方法及装置 |
CN105323634A (zh) * | 2014-06-27 | 2016-02-10 | Tcl集团股份有限公司 | 一种视频的缩略图生成方法及系统 |
CN107105340A (zh) * | 2017-03-21 | 2017-08-29 | 百度在线网络技术(北京)有限公司 | 基于人工智能的视频中显示人物信息方法、装置和系统 |
CN108255922A (zh) * | 2017-11-06 | 2018-07-06 | 优视科技有限公司 | 视频识别方法、设备、客户端装置、电子设备及服务器 |
CN107832724A (zh) * | 2017-11-17 | 2018-03-23 | 北京奇虎科技有限公司 | 从视频文件中提取人物关键帧的方法及装置 |
CN109993025A (zh) * | 2017-12-29 | 2019-07-09 | 中移(杭州)信息技术有限公司 | 一种关键帧提取方法及设备 |
CN108401176A (zh) * | 2018-02-06 | 2018-08-14 | 北京奇虎科技有限公司 | 一种实现视频人物标注的方法和装置 |
CN108268666A (zh) * | 2018-02-26 | 2018-07-10 | 北京奇艺世纪科技有限公司 | 一种搜索方法和装置 |
WO2020048275A1 (zh) * | 2018-09-03 | 2020-03-12 | 聚好看科技股份有限公司 | 信息显示方法及装置 |
CN109348275A (zh) * | 2018-10-30 | 2019-02-15 | 百度在线网络技术(北京)有限公司 | 视频处理方法和装置 |
CN110225387A (zh) * | 2019-05-20 | 2019-09-10 | 北京奇艺世纪科技有限公司 | 一种信息搜索方法、装置及电子设备 |
CN110225367A (zh) * | 2019-06-27 | 2019-09-10 | 北京奇艺世纪科技有限公司 | 一种视频中对象信息的显示、识别方法及装置 |
Also Published As
Publication number | Publication date |
---|---|
CN112423062A (zh) | 2021-02-26 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US9779527B2 (en) | Method, terminal device and storage medium for processing image | |
CN104239535B (zh) | 一种为文字配图的方法、服务器、终端及系统 | |
CN110020140B (zh) | 推荐内容显示方法、装置及系统 | |
US10200763B2 (en) | Video-based interaction method, terminal, server and system | |
CN109684980B (zh) | 自动阅卷方法及装置 | |
CN103999032A (zh) | 显示元素中所包括的感兴趣的区域的兴趣度分数 | |
CN109547644A (zh) | 一种信息显示方法及终端 | |
CN110162653B (zh) | 一种图文排序推荐方法及终端设备 | |
CN112565863B (zh) | 视频播放方法、装置、终端设备及计算机可读存储介质 | |
CN108628985B (zh) | 一种相册的处理方法及移动终端 | |
CN108989869A (zh) | 视频画面播放方法、装置、设备及计算机可读存储介质 | |
CN110099296A (zh) | 一种信息显示方法及终端设备 | |
CN112506904B (zh) | 数据质量评估方法、装置、终端设备以及存储介质 | |
CN104156406A (zh) | 应用程序内嵌页面显示方法及装置 | |
WO2023185431A1 (zh) | 卡片的显示方法、装置、电子设备、存储介质和程序产品 | |
CN104571778B (zh) | 锁屏画面设置方法及装置 | |
CN107728877B (zh) | 一种应用推荐方法及移动终端 | |
CN107396193A (zh) | 视频播放的方法和装置 | |
WO2024183434A1 (zh) | 基于文本生成图片的方法及模型训练方法、装置、设备及存储介质 | |
CN109947321A (zh) | 界面显示方法、可穿戴设备及计算机可读存储介质 | |
CN112423062B (zh) | 视频人物信息显示方法、装置、终端设备及存储介质 | |
CN112989198A (zh) | 推送内容的确定方法、装置、设备及计算机可读存储介质 | |
CN114780181B (zh) | 资源显示方法、装置、计算机设备及介质 | |
CN112423060B (zh) | 视频图像截取方法、系统、装置、终端设备及存储介质 | |
CN116233495A (zh) | 节目资源的推荐方法、装置、节目管理引擎以及存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |