CN111462868A - 医学影像管理方法、装置和存储介质 - Google Patents

医学影像管理方法、装置和存储介质 Download PDF

Info

Publication number
CN111462868A
CN111462868A CN202010272215.4A CN202010272215A CN111462868A CN 111462868 A CN111462868 A CN 111462868A CN 202010272215 A CN202010272215 A CN 202010272215A CN 111462868 A CN111462868 A CN 111462868A
Authority
CN
China
Prior art keywords
frame rate
image
image stream
preorder
stream
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202010272215.4A
Other languages
English (en)
Other versions
CN111462868B (zh
Inventor
翟亚亚
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Wuhan United Imaging Healthcare Co Ltd
Original Assignee
Wuhan United Imaging Healthcare Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Wuhan United Imaging Healthcare Co Ltd filed Critical Wuhan United Imaging Healthcare Co Ltd
Priority to CN202010272215.4A priority Critical patent/CN111462868B/zh
Publication of CN111462868A publication Critical patent/CN111462868A/zh
Application granted granted Critical
Publication of CN111462868B publication Critical patent/CN111462868B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H30/00ICT specially adapted for the handling or processing of medical images
    • G16H30/20ICT specially adapted for the handling or processing of medical images for handling medical images, e.g. DICOM, HL7 or PACS
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs
    • H04N21/2343Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H04N21/234381Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements by altering the temporal resolution, e.g. decreasing the frame rate by frame skipping
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs
    • H04N21/4402Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • H04N21/440281Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display by altering the temporal resolution, e.g. by frame skipping

Landscapes

  • Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Radiology & Medical Imaging (AREA)
  • Epidemiology (AREA)
  • General Health & Medical Sciences (AREA)
  • Medical Informatics (AREA)
  • Primary Health Care (AREA)
  • Public Health (AREA)
  • Measuring And Recording Apparatus For Diagnosis (AREA)

Abstract

本申请涉及一种医学影像管理方法、装置和存储介质。所述方法包括:接收医学成像设备产生的影像流;根据在接收当前影像流之前接收的前序影像流的帧率,确定当前影像流的合成帧率;根据合成帧率将影像流中的各连续影像进行影像合成,得到视频文件;将视频文件转换成DICOM文件后进行归档。采用本方法能够提高管理效率。

Description

医学影像管理方法、装置和存储介质
技术领域
本申请涉及医学成像技术领域,特别是涉及一种医学影像管理方法、装置和存储介质。
背景技术
随着医学成像技术的发展,出现了DICOM(Digital Imaging and Communicationsin Medicine,医学数字成像和通信)标准。通过DICOM文件能够满足临床需要的可用于数据交换的医学图像格式。但是,目前还是少部分医学成像设备由于不提供DICOM模块,例如内窥镜设备,只能通过采集卡接口采集医学影像后进行归档管理。
然而,为了便于统一管理,现有大部分医学影像均是归档于PACS(PictureArchiving and Communication Systems,影像归档和通信系统)服务器。而通过采集卡接口采集的数据多为AVI(Audio Video Interleaved,音频视频交错格式)格式,其压缩比不高并且只能额外归档于FTP(File Transfer Protocol Server,文件存储和访问服务)服务器进行管理,导致管理资源占用过多,降低管理效率。
发明内容
基于此,有必要针对上述技术问题,提供一种能够管理效率的医学影像管理方法、装置和存储介质。
一种医学影像管理方法,其特征在于,所述方法包括:
接收医学成像设备产生的影像流;
根据在接收当前所述影像流之前接收的前序影像流的帧率,确定当前所述影像流的合成帧率;
根据所述合成帧率将所述影像流中的各连续影像进行影像合成,得到视频文件;
将所述视频文件转换成DICOM文件后进行归档。
在其中一个实施例中,所述根据在接收当前所述影像流之前接收的前序影像流的帧率,确定当前所述影像流的合成帧率,包括:
当当前所述影像流不是接收的第一段影像流时,获取在接收当前所述影像流之前接收的前序影像流的帧率;
将各所述前序影像流的帧率进行平均值计算,得到的平均帧率作为当前所述影像流的合成帧率;
当当前所述影像流为接收的第一段影像流时,获取预设初始帧率作为当前所述影像流的合成帧率。
在其中一个实施例中,所述将各所述前序影像流的帧率进行平均值计算,得到的平均帧率作为当前所述影像流的合成帧率,包括:
当当前所述影像流对应的前序影像流的数量不大于阈值时,将各所述前序影像流的帧率进行平均值计算,得到的平均帧率作为当前所述影像流的合成帧率;
当当前所述影像流对应的前序影像流的数量大于阈值时,根据接收时间从各所述前序影像流中筛选与当前所述影像流距离最近的前序影像流,得到数量与所述阈值相等的筛选影像流;
将各所述筛选影像流的帧率进行平均值计算,得到的平均帧率作为当前所述影像流的合成帧率。
在其中一个实施例中,所述当当前所述影像流对应的前序影像流的数量不大于阈值时,将各所述前序影像流的帧率进行平均值计算,得到的平均帧率作为所述影像流的合成帧率,包括:
当当前所述影像流对应的前序影像流的数量不大于阈值时,判断所述影像流对应的上一个前序影像流的帧率是否满足预设帧率范围;
当不满足预设帧率范围时,去除所述影像流对应的上一个前序影像流,得到剩余前序影像流;
将各所述剩余前序影像流的帧率进行平均值计算,得到的平均帧率作为所述影像流的合成帧率;
当满足预设帧率范围时,将各所述前序影像流的帧率进行平均值计算,得到的平均帧率作为所述影像流的合成帧率;
当当前所述影像流对应的前序影像流的数量大于阈值时,根据接收时间从各所述前序影像流中筛选与当前所述影像流距离最近的前序影像流,得到数量与所述阈值相等的筛选影像流,包括:
当当前所述影像流对应的前序影像流的数量大于阈值时,判断所述影像流对应的上一个前序影像流的帧率是否满足预设帧率范围;
当满足预设帧率范围时,根据接收时间从各所述前序影像流中筛选与当前所述影像流距离最近的前序影像流,得到数量与所述阈值相等的筛选影像流;
当不满足预设帧率范围时,去除当前所述影像流对应的上一个前序影像流,得到剩余前序影像流;
根据接收时间从各所述剩余影像流中筛选与当前所述影像流距离最近的前序影像流,得到数量与所述阈值相等的筛选影像流。
在其中一个实施例中,所述获取在接收当前所述影像流之前接收的前序影像流的帧率,包括:
确定所述前序影像流的采集时长和所述前序影像流中连续影像的帧数;
根据所述采集时长和所述帧数计算所述前序影像流的帧率。
在其中一个实施例中,获取所述预设初始帧率,包括:
确定所述影像流对应的医学成像设备的采集帧率;
将所述影像流对应的医学成像设备的采集帧率作为预设初始帧率。
在其中一个实施例中,所述根据所述合成帧率将所述影像流中的各连续影像进行影像合成,得到视频文件,包括:
基于所述合成帧率和H.264编码压缩规则,将所述影像流中的各连续影像进行影像合成得到视频文件。
在其中一个实施例中,所述将所述视频文件转换成DICOM文件后进行归档,包括:
获取所述影像流对应用户的检查信息;
根据DICOM编码规范将对应用户的所述检查信息和所述视频文件转换为DICOM文件。
一种医学影像管理装置,所述装置包括:
接收模块,用于接收医学成像设备产生的影像流;
确定模块,用于根据在接收当前所述影像流之前接收的前序影像流的帧率,确定当前所述影像流的合成帧率;
合成模块,用于根据所述合成帧率将所述影像流中的各连续影像进行影像合成,得到视频文件;
转换模块,用于将所述视频文件转换成DICOM文件后进行归档。
一种计算机设备,包括存储器和处理器,所述存储器存储有计算机程序,所述处理器执行所述计算机程序时实现上述任一项所述医学影像管理方法的步骤。
一种计算机可读存储介质,其上存储有计算机程序,所述计算机程序被处理器执行时实现上述任一项所述医学影像管理方法的步骤。
上述医学影像管理方法、装置和存储介质,在接收到医学成像设备产生的影像流之后,根据在接收当前影像流之前接收的前序影像流的帧率,确定当前影像流的合成帧率,进而根据合成帧率将影像流中的各连续影像进行影像合成,得到对应的视频文件并将视频文件转换成DICOM文件后进行归档。该方法实现将影像流转换成DICOM文件后归档,便于将影像流归档于PACS服务器管理,减少占用的管理资源,提高管理效率。
附图说明
图1为一个实施例中医学影像管理方法的应用环境图;
图2为一个实施例中医学影像管理方法的流程示意图;
图3为一个实施例中将各前序影像流的帧率进行平均值计算,得到的平均帧率作为当前影像流的合成帧率步骤的流程示意图;
图4为一个实施例中医学影像管理装置的结构框图;
图5为一个实施例中计算机设备的内部结构图。
具体实施方式
为了使本申请的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本申请进行进一步详细说明。应当理解,此处描述的具体实施例仅仅用以解释本申请,并不用于限定本申请。
本申请提供的医学影像管理方法,可以应用于如图1所示的应用环境中。其中,医学成像设备102通过网络与计算机设备104进行通信。计算机设备104接收医学成像设备102产生的影像流;计算机设备104根据在接收当前影像流之前接收的前序影像流的帧率,确定当前影像流的合成帧率;计算机设备104根据合成帧率将影像流中的各连续影像进行影像合成,得到视频文件;计算机设备104将视频文件转换成DICOM文件后进行归档。其中,计算机设备104可以是终端或服务器,终端可以但不限于是各种个人计算机、笔记本电脑、智能手机、平板电脑和便携式可穿戴设备,服务器可以用独立的服务器或者是多个服务器组成的服务器集群来实现。
在一个实施例中,如图2所示,提供了一种医学影像管理方法,以该方法应用于图1中的计算机设备为例进行说明,包括以下步骤:
步骤S202,接收医学成像设备产生的影像流。
其中,医学成像设备是一种通过扫描能够将人体内部结构成像显示出来的设备,典型的医学成像设备包括X射线设备、计算机断层成像设备、超声成像设备、热成像设备和内窥镜设备等。影像流是指医学成像设备在扫描成像过程中产生的连续影像数据,可以理解为,影像流中包括多帧连续的影像数据。由于本实施例的目的在于将医学成像设备产生的影像流转换成DICOM文件。因此,在本实施例中,医学成像设备优选不包括DICOM模块的设备,例如内窥镜设备。
具体地,当医学成像设备接收到扫描成像指令后,医学成像设备会根据扫描成像指令对应的扫描协议对人体结构进行扫描,从而产生对应的影像流并传输给计算机设备。此时,计算机设备从医学成像设备接收到医学成像设备所产生的影像流。
步骤S204,根据在接收当前影像流之前接收的前序影像流的帧率,确定当前影像流的合成帧率。
其中,当前影像流是指计算机设备当前从医学成像设备接收到的影像,前序影像流则是计算机设备接收到当前影像流之前所接收到的影像流。例如,计算机设备共接收到第一段影像流、第二段影像流和第三段影像流。当第一段影像流为当前影像流,即当前从医学影像设备接收到的影像流是第一段影像流时,前序影像流为空。而当第二段影像流为当前影像流时,第一段影像流是前序影像流,同理,当第三段影像流为当前影像流时,第一段影像流和第二段影像流都是前序影像流。帧率是以帧为单位的图像连续出现在显示器上的频率,合成帧率是指将影像流中各连续影像合成视频文件所用到的帧率。可以理解为,根据该合成帧率合成得到视频文件后,该合成帧率就是该视频文件中的各图像出现在显示器上的频率。
具体地,由于当前接收的影像流可能是计算机设备从医学影像设备处接收到的第一段影像流。所以,在计算机设备根据前序影像流的帧率确定当前接收到的影像流的合成帧率时,应当先判断当前接收的影像流是否为接收到的第一段影像流。当接收的影像流是第一段影像流时,由于第一段影像流的前序影像流为空,所以计算机设备获取预设初始帧率作为当前接收的影像流的合成帧率。预设初始帧率可以预先配置存储在计算机设备。而当接收的影像流不是第一段影像流时,则根据当前接收的影像流对应的各前序影像流的帧率确定合成帧率。
在一个实施例中,当接收的影像流不是第一段影像流时,获取当前接收的影像流对应的各前序影像流的帧率。将各前序影像流的帧率进行平均值计算,得到各前序影像流的平均帧率。将得到的平均帧率作为当前接收到的影像流的合成帧率。
在本实施例中,由于不同厂家、不同型号的医学成像设备采集影像流的帧率不一致,而通过将前序影像流的平均帧率作为当前影像流的合成帧率,后续根据合成帧率进行影像合成时,能够降低影像流所合成的视频文件的播放速率与医学成像设备的原始播放速率的误差,保证生成的视频文件的播放速度与原始设备近似。
步骤S206,根据合成帧率将影像流中的各连续影像进行影像合成,得到视频文件。
其中,视频文件包括MP4(MPEG-4Part 14,一种使用MPEG-4的多媒体电脑档案格式)、AVI(Audio Video Interleaved,音频视频交错格式)、RMVB(RealMedia VariableBitrate,RealMedia可变比特率)等格式。
具体地,当计算机设备确定当前接收的影像流的合成帧率之后,根据预设的编码和压缩规则将影像流中连续影像合成得到视频文件。影像合成的工具可以采用ffmpeg,通过接口将预设的编码和压缩规则、合成帧率等作为参数传入ffmpeg,由ffmpeg根据该些参数完成影像合成。
在一个实施例中,为了提高压缩率,以及便于直接播放浏览,本实施例优选H.264编码压缩规则生成MP4格式的文件。因此,当将合成帧率和H.264编码压缩规则作为参数传入ffmpeg完成影像流的影像合成时,同时指定ffmpeg根据H.264编码压缩规则将影像流合成格式为MP4的视频文件。
在本实施例中,通过H.264编码压缩规则合成MP4格式的视频文件,不仅能够支持不同播放器进行播放,还由于压缩算法使得生成的视频文件更小,进一步节约管理资源。
步骤S208,将视频文件转换成DICOM文件后进行归档。
具体地,当计算机设备通过影像合成得到影像流对应的视频文件后,根据DICOM编码规范将视频文件转换成DICOM文件。当将视频文件转换成DICOM文件之后,计算机设备即可通过网络与PACS服务器通信,将得到的DICOM文件传输给PACS服务器进行归档管理。
在一个实施例中,步骤S208,包括:获取影像流对应用户的检查信息;根据DICOM编码规范将对应用户的检查信息和视频文件转换为DICOM文件。
具体地,将视频文件转换成DICOM文件时,由于DICOM规范的文件通常还包括患者的检查信息。因此,计算机设备还需从医学成像设备进一步获取影像流对应的用户的检查信息。或者,也可以直接接收工作人员上传的检查用户的检查信息。然后,计算机设备依据DICOM编码规范,根据用户的检查信息和视频文件创建DICOM文件通用的tag值,得到视频文件对应的DICOM文件。例如,以视频文件为MP4格式为例,根据DICOM规范,创建tag值为00080060的表示MP4,创建tag值为7FE0 0010的表示MP4文件流。
上述医学影像管理方法、装置和存储介质,在接收到医学成像设备产生的影像流之后,根据在接收当前影像流之前接收的前序影像流的帧率,确定当前影像流的合成帧率,进而根据合成帧率将影像流中的各连续影像进行影像合成,得到对应的视频文件并将视频文件转换成DICOM文件后进行归档。该方法实现将影像流转换成DICOM文件后归档,便于将影像流归档于PACS服务器管理,减少占用的管理资源,提高管理效率。
在一个实施例中,如图3所示,将各前序影像流的帧率进行平均值计算,得到的平均帧率作为当前影像流的合成帧率,包括:
步骤S302,判断当前影像流对应的各前序影像流的数量是否大于阈值。
步骤S304,当当前影像流对应的前序影像流的数量不大于阈值时,将各前序影像流的帧率进行平均值计算,得到的平均帧率作为当前影像流的合成帧率。
步骤S306,当当前影像流对应的前序影像流的数量大于阈值时,根据接收时间从各前序影像流中筛选与当前影像流距离最近的前序影像流,得到数量与阈值相等的筛选影像流。
步骤S308,将各筛选影像流的帧率进行平均值计算,得到的平均帧率作为当前所述影像流的合成帧率。
具体地,在计算机设备根据阈值计算当前影像流的合成帧率时,首先判断当前影像流对应的各前序影像流的数量是否大于阈值。其中,阈值根据实际情况进行配置,本实施例优选5段。即,当前序影像流的数量不大于(小于等于)5段时,计算该些前序影像流的平均帧率,得到当前影像流的合成帧率。
而当前序影像流的数量大于5段时,根据接收时间从中筛选时间距离最近的前序影像流。筛选出的前序影像流的数量等于阈值,即筛选5段时间距离最近的前序影像流作为筛选影像流。然后,计算筛选影像流的平均帧率,得到当前影像流的合成帧率。例如,当前影像流为第7段影像流,即筛选获取第2段-第6段这5段前序影像流作为筛选影像流。
本实施例中,通过设定阈值,在前序影像流的数量超过阈值时选取时间距离最近的前序影像流计算合成帧率,确保当前影像流的合成帧率更符合医学成像设备实际采集产生该影像流时的帧率,进一步降低速率误差。
在一个实施例中,步骤S304,包括:当当前影像流对应的前序影像流的数量不大于阈值时,判断影像流对应的上一个前序影像流的帧率是否满足预设帧率范围;当不满足预设帧率范围时,去除影像流对应的上一个前序影像流,得到剩余前序影像流;将各剩余前序影像流的帧率进行平均值计算,得到的平均帧率作为所述影像流的合成帧率;当满足预设帧率范围时,将各前序影像流的帧率进行平均值计算,得到的平均帧率作为所述影像流的合成帧率;
具体地,在计算机设备确定当前影像流对应的前序影像流的数量不大于阈值时,进一步判断对应的上一个前序影像流的帧率是否满足预设帧率范围。例如,当当前影像流为第7段影像流时,判断第6段影像流的帧率是否满足预设帧率范围。预设帧率范围根据实际情况设定,假设预设帧率范围为预设帧率的正负误差2之内,则当预设帧率为25时,帧率只有大于等于23且小于等于27时,表示满足预设帧率范围。反之,当帧率小于23或大于27时,表示不满足预设帧率范围。
当确定对应的上一个前序影像流的帧率满足预设帧率范围时,即可计算数量不大于阈值的所有前序影像流的平均帧率,得到合成帧率。而当确定对应的上一个前序影像流的帧率不满足预设范围时,将不满足的上一个前序影像流删除,得到剩余前序影像流。计算剩余前序影像流的平均帧率,得到合成帧率。例如,当前影像流时第4段影像流,那么前序影像流包括第1段-第3段的影像流。当第3段影像流的帧率满足预设帧率范围时,计算第1段-第3段影像流的平均帧率。当第3段影像流的帧率不满足预设帧率范围时,删除第3段,计算第1段和第2段的平均帧率。
在一个实施例中,步骤S306,包括:当当前影像流对应的前序影像流的数量大于阈值时,判断影像流对应的上一个前序影像流的帧率是否满足预设帧率范围;当满足预设帧率范围时,根据接收时间从各前序影像流中筛选与当前影像流距离最近的前序影像流,得到数量与阈值相等的筛选影像流;当不满足预设帧率范围时,去除当前所述影像流对应的上一个前序影像流,得到剩余前序影像流;根据接收时间从各剩余影像流中筛选与当前影像流距离最近的前序影像流,得到数量与阈值相等的筛选影像流。
具体地,在计算机设备确定当前影像流对应的前序影像流的数量大于阈值时,进一步判断对应的上一个前序影像流的帧率是否满足预设帧率范围。
当确定对应的上一个前序影像流的帧率满足预设帧率范围时,即可从数量大于阈值的各前序影像流中筛选选择接收时间与当前影像流距离最近的且与阈值数量相同的前序影像流,得到筛选影像流。而当确定对应的上一个前序影像流的帧率不满足预设帧率范围时,即可从数量大于阈值的各前序影像流中删除对应的上一个前序影像流,得到剩余影像流。然后,从剩余影像流中筛选选择接收时间与当前影像流距离最近的且与阈值数量相同的前序影像流,得到筛选影像流。
在本实施例中,通过预设帧率范围过滤帧率误差较大的前序影像流,进一步降低根据合成帧率生成的视频文件和原始设备的播放速率的误差。
在一个实施例中,获取各前序影像流的帧率,包括:确定前序影像流的采集时长和前序影像流中连续影像的帧数;根据采集时长和帧数计算前序影像流的帧率。
具体地,影像流的帧率与采集时长和所采集的帧数相关。因此,获取采集该影像流的采集时长和该影像流包括的连续影像的帧数确定该影像流的帧率。
计算公式如下:
A=B/C
其中,A表示影像流的帧率,B表示影像流的采集时长,C表示影像流包括的帧数。
在一个实施例中,预设初始帧率的获取包括:确定影像流对应的医学成像设备的采集帧率;将影像流对应的医学成像设备的采集帧率作为预设初始帧率。
具体地,由于第1段影像流的前序影像流为空,所以第1段影像流无法根据前序影像流的帧率计算出能够生成与原始设备播放速率近似的视频文件的合成帧率。因此,为了确保第1段影像流生成的视频文件能够与对应的医学成像设备的播放速率近似,将影像流对应的医学成像设备的采集帧率作为该医学成像设备产生的第1段影像流的合成帧率。即,将影像流对应的医学成像设备的采集帧率作为预设初始帧率。
另外,可以预先建立各医学成像设备和各采集帧率的对应关系表,该对应关系表中存储各个医学成像设备以及关联存储各医学成像设备对应的采集帧率。当需要获取第1段影像流的合成帧率(预设初始帧率)时,通过获取该对应关系表,从该对应关系表中查询获取医学成像设备的采集帧率作为第1段影像流的合成帧率(预设初始帧率)。
应该理解的是,虽然图2-3的流程图中的各个步骤按照箭头的指示依次显示,但是这些步骤并不是必然按照箭头指示的顺序依次执行。除非本文中有明确的说明,这些步骤的执行并没有严格的顺序限制,这些步骤可以以其它的顺序执行。而且,图2-3中的至少一部分步骤可以包括多个步骤或者多个阶段,这些步骤或者阶段并不必然是在同一时刻执行完成,而是可以在不同的时刻执行,这些步骤或者阶段的执行顺序也不必然是依次进行,而是可以与其它步骤或者其它步骤中的步骤或者阶段的至少一部分轮流或者交替地执行。
在一个实施例中,如图4所示,提供了一种医学影像管理装置,包括:接收模块402、确定模块404、合成模块406和转换模块408,其中:
接收模块402,用于接收医学成像设备产生的影像流。
确定模块404,用于根据在接收当前影像流之前接收的前序影像流的帧率,确定当前影像流的合成帧率。
合成模块406,用于根据合成帧率将影像流中的各连续影像进行影像合成,得到视频文件。
转换模块408,用于将视频文件转换成DICOM文件后进行归档。
在一个实施例中,确定模块404,还用于当当前影像流不是接收的第一段影像流时,获取在接收当前影像流之前接收的前序影像流的帧率;将各前序影像流的帧率进行平均值计算,得到的平均帧率作为当前影像流的合成帧率;当当前影像流为接收的第一段影像流时,获取预设初始帧率作为当前影像流的合成帧率。
在一个实施例中,确定模块404,还用于当当前影像流对应的前序影像流的数量不大于阈值时,将各前序影像流的帧率进行平均值计算,得到的平均帧率作为当前影像流的合成帧率;当当前影像流对应的前序影像流的数量大于阈值时,根据接收时间从各前序影像流中筛选与当前影像流距离最近的前序影像流,得到数量与阈值相等的筛选影像流;将各筛选影像流的帧率进行平均值计算,得到的平均帧率作为当前影像流的合成帧率。
在一个实施例中,确定模块404,还用于当当前影像流对应的前序影像流的数量不大于阈值时,判断影像流对应的上一个前序影像流的帧率是否满足预设帧率范围;当不满足预设帧率范围时,去除影像流对应的上一个前序影像流,得到剩余前序影像流;将各剩余前序影像流的帧率进行平均值计算,得到的平均帧率作为影像流的合成帧率;当满足预设帧率范围时,将各前序影像流的帧率进行平均值计算,得到的平均帧率作为影像流的合成帧率。
在一个实施例中,确定模块404,还用于当当前影像流对应的前序影像流的数量大于阈值时,判断影像流对应的上一个前序影像流的帧率是否满足预设帧率范围;当满足预设帧率范围时,根据接收时间从各前序影像流中筛选与当前影像流距离最近的前序影像流,得到数量与阈值相等的筛选影像流;当不满足预设帧率范围时,去除当前影像流对应的上一个前序影像流,得到剩余前序影像流;根据接收时间从各剩余影像流中筛选与当前影像流距离最近的前序影像流,得到数量与阈值相等的筛选影像流。
在一个实施例中,确定模块404,还用于确定前序影像流的采集时长和前序影像流中连续影像的帧数;根据采集时长和帧数计算所述前序影像流的帧率。
在一个实施例中,确定模块404,还用于确定影像流对应的医学成像设备的采集帧率;将影像流对应的医学成像设备的采集帧率作为预设初始帧率。
在一个实施例中,合成模块406,还用于基于合成帧率和H.264编码压缩规则,将影像流中的各连续影像进行影像合成得到视频文件。
在一个实施例中,转换模块408,还用于获取影像流对应用户的检查信息;根据DICOM编码规范将对应用户的检查信息和视频文件转换为DICOM文件。
关于医学影像管理装置的具体限定可以参见上文中对于医学影像管理方法的限定,在此不再赘述。上述医学影像管理装置中的各个模块可全部或部分通过软件、硬件及其组合来实现。上述各模块可以硬件形式内嵌于或独立于计算机设备中的处理器中,也可以以软件形式存储于计算机设备中的存储器中,以便于处理器调用执行以上各个模块对应的操作。
在一个实施例中,提供了一种计算机设备,该计算机设备可以是服务器,其内部结构图可以如图5所示。该计算机设备包括通过系统总线连接的处理器、存储器和网络接口。其中,该计算机设备的处理器用于提供计算和控制能力。该计算机设备的存储器包括非易失性存储介质、内存储器。该非易失性存储介质存储有操作系统、计算机程序和数据库。该内存储器为非易失性存储介质中的操作系统和计算机程序的运行提供环境。该计算机设备的数据库用于存储影像流、配置的阈值、预设帧率范围等数据。该计算机设备的网络接口用于与外部的终端通过网络连接通信。该计算机程序被处理器执行时以实现一种医学影像管理方法。
本领域技术人员可以理解,图5中示出的结构,仅仅是与本申请方案相关的部分结构的框图,并不构成对本申请方案所应用于其上的计算机设备的限定,具体的计算机设备可以包括比图中所示更多或更少的部件,或者组合某些部件,或者具有不同的部件布置。
在一个实施例中,提供了一种计算机设备,包括存储器和处理器,存储器中存储有计算机程序,该处理器执行计算机程序时实现以下步骤:
接收医学成像设备产生的影像流;
根据在接收当前影像流之前接收的前序影像流的帧率,确定当前影像流的合成帧率;
根据合成帧率将影像流中的各连续影像进行影像合成,得到视频文件;
将视频文件转换成DICOM文件后进行归档。
在一个实施例中,处理器执行计算机程序时还实现以下步骤:当当前影像流不是接收的第一段影像流时,获取在接收当前影像流之前接收的前序影像流的帧率;将各前序影像流的帧率进行平均值计算,得到的平均帧率作为当前影像流的合成帧率;当当前影像流为接收的第一段影像流时,获取预设初始帧率作为当前影像流的合成帧率。
在一个实施例中,处理器执行计算机程序时还实现以下步骤:当当前影像流对应的前序影像流的数量不大于阈值时,将各前序影像流的帧率进行平均值计算,得到的平均帧率作为当前影像流的合成帧率;当当前影像流对应的前序影像流的数量大于阈值时,根据接收时间从各前序影像流中筛选与当前影像流距离最近的前序影像流,得到数量与阈值相等的筛选影像流;将各筛选影像流的帧率进行平均值计算,得到的平均帧率作为当前影像流的合成帧率。
在一个实施例中,处理器执行计算机程序时还实现以下步骤:当当前影像流对应的前序影像流的数量不大于阈值时,判断影像流对应的上一个前序影像流的帧率是否满足预设帧率范围;当不满足预设帧率范围时,去除影像流对应的上一个前序影像流,得到剩余前序影像流;将各剩余前序影像流的帧率进行平均值计算,得到的平均帧率作为影像流的合成帧率;当满足预设帧率范围时,将各前序影像流的帧率进行平均值计算,得到的平均帧率作为影像流的合成帧率。
在一个实施例中,处理器执行计算机程序时还实现以下步骤:当当前影像流对应的前序影像流的数量大于阈值时,判断影像流对应的上一个前序影像流的帧率是否满足预设帧率范围;当满足预设帧率范围时,根据接收时间从各前序影像流中筛选与当前影像流距离最近的前序影像流,得到数量与阈值相等的筛选影像流;当不满足预设帧率范围时,去除当前影像流对应的上一个前序影像流,得到剩余前序影像流;根据接收时间从各剩余影像流中筛选与当前影像流距离最近的前序影像流,得到数量与阈值相等的筛选影像流。
在一个实施例中,处理器执行计算机程序时还实现以下步骤:确定前序影像流的采集时长和前序影像流中连续影像的帧数;根据采集时长和帧数计算前序影像流的帧率。
在一个实施例中,处理器执行计算机程序时还实现以下步骤:确定影像流对应的医学成像设备的采集帧率;将影像流对应的医学成像设备的采集帧率作为预设初始帧率。
在一个实施例中,处理器执行计算机程序时还实现以下步骤:基于合成帧率和H.264编码压缩规则,将影像流中的各连续影像进行影像合成得到视频文件。
在一个实施例中,处理器执行计算机程序时还实现以下步骤:获取影像流对应用户的检查信息;根据DICOM编码规范将对应用户的检查信息和视频文件转换为DICOM文件。
在一个实施例中,提供了一种计算机可读存储介质,其上存储有计算机程序,计算机程序被处理器执行时实现以下步骤:
接收医学成像设备产生的影像流;
根据在接收当前影像流之前接收的前序影像流的帧率,确定当前影像流的合成帧率;
根据合成帧率将影像流中的各连续影像进行影像合成,得到视频文件;
将视频文件转换成DICOM文件后进行归档。
在一个实施例中,计算机程序被处理器执行时还实现以下步骤:当当前影像流不是接收的第一段影像流时,获取在接收当前影像流之前接收的前序影像流的帧率;将各前序影像流的帧率进行平均值计算,得到的平均帧率作为当前影像流的合成帧率;当当前影像流为接收的第一段影像流时,获取预设初始帧率作为当前影像流的合成帧率。
在一个实施例中,计算机程序被处理器执行时还实现以下步骤:当当前影像流对应的前序影像流的数量不大于阈值时,将各前序影像流的帧率进行平均值计算,得到的平均帧率作为当前影像流的合成帧率;当当前影像流对应的前序影像流的数量大于阈值时,根据接收时间从各前序影像流中筛选与当前影像流距离最近的前序影像流,得到数量与阈值相等的筛选影像流;将各筛选影像流的帧率进行平均值计算,得到的平均帧率作为当前影像流的合成帧率。
在一个实施例中,计算机程序被处理器执行时还实现以下步骤:当当前影像流对应的前序影像流的数量不大于阈值时,判断影像流对应的上一个前序影像流的帧率是否满足预设帧率范围;当不满足预设帧率范围时,去除影像流对应的上一个前序影像流,得到剩余前序影像流;将各剩余前序影像流的帧率进行平均值计算,得到的平均帧率作为影像流的合成帧率;当满足预设帧率范围时,将各前序影像流的帧率进行平均值计算,得到的平均帧率作为影像流的合成帧率。
在一个实施例中,计算机程序被处理器执行时还实现以下步骤:当当前影像流对应的前序影像流的数量大于阈值时,判断影像流对应的上一个前序影像流的帧率是否满足预设帧率范围;当满足预设帧率范围时,根据接收时间从各前序影像流中筛选与当前影像流距离最近的前序影像流,得到数量与阈值相等的筛选影像流;当不满足预设帧率范围时,去除当前影像流对应的上一个前序影像流,得到剩余前序影像流;根据接收时间从各剩余影像流中筛选与当前影像流距离最近的前序影像流,得到数量与阈值相等的筛选影像流。
在一个实施例中,计算机程序被处理器执行时还实现以下步骤:确定前序影像流的采集时长和前序影像流中连续影像的帧数;根据采集时长和帧数计算所述前序影像流的帧率。
在一个实施例中,计算机程序被处理器执行时还实现以下步骤:确定影像流对应的医学成像设备的采集帧率;将影像流对应的医学成像设备的采集帧率作为预设初始帧率。
在一个实施例中,计算机程序被处理器执行时还实现以下步骤:基于合成帧率和H.264编码压缩规则,将影像流中的各连续影像进行影像合成得到视频文件。
在一个实施例中,计算机程序被处理器执行时还实现以下步骤:获取影像流对应用户的检查信息;根据DICOM编码规范将对应用户的检查信息和视频文件转换为DICOM文件。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程,是可以通过计算机程序来指令相关的硬件来完成,所述的计算机程序可存储于一非易失性计算机可读取存储介质中,该计算机程序在执行时,可包括如上述各方法的实施例的流程。其中,本申请所提供的各实施例中所使用的对存储器、存储、数据库或其它介质的任何引用,均可包括非易失性和易失性存储器中的至少一种。非易失性存储器可包括只读存储器(Read-Only Memory,ROM)、磁带、软盘、闪存或光存储器等。易失性存储器可包括随机存取存储器(Random Access Memory,RAM)或外部高速缓冲存储器。作为说明而非局限,RAM可以是多种形式,比如静态随机存取存储器(Static Random Access Memory,SRAM)或动态随机存取存储器(Dynamic Random Access Memory,DRAM)等。
以上实施例的各技术特征可以进行任意的组合,为使描述简洁,未对上述实施例中的各个技术特征所有可能的组合都进行描述,然而,只要这些技术特征的组合不存在矛盾,都应当认为是本说明书记载的范围。
以上所述实施例仅表达了本申请的几种实施方式,其描述较为具体和详细,但并不能因此而理解为对发明专利范围的限制。应当指出的是,对于本领域的普通技术人员来说,在不脱离本申请构思的前提下,还可以做出若干变形和改进,这些都属于本申请的保护范围。因此,本申请专利的保护范围应以所附权利要求为准。

Claims (10)

1.一种医学影像管理方法,其特征在于,所述方法包括:
接收医学成像设备产生的影像流;
根据在接收当前所述影像流之前接收的前序影像流的帧率,确定当前所述影像流的合成帧率;
根据所述合成帧率将所述影像流中的各连续影像进行影像合成,得到视频文件;
将所述视频文件转换成DICOM文件后进行归档。
2.根据权利要求1所述的方法,其特征在于,所述根据在接收当前所述影像流之前接收的前序影像流的帧率,确定当前所述影像流的合成帧率,包括:
当当前所述影像流不是接收的第一段影像流时,获取在接收当前所述影像流之前接收的前序影像流的帧率;
将各所述前序影像流的帧率进行平均值计算,得到的平均帧率作为当前所述影像流的合成帧率;
当当前所述影像流为接收的第一段影像流时,获取预设初始帧率作为当前所述影像流的合成帧率。
3.根据权利要求2所述的方法,其特征在于,所述将各所述前序影像流的帧率进行平均值计算,得到的平均帧率作为当前所述影像流的合成帧率,包括:
当当前所述影像流对应的前序影像流的数量不大于阈值时,将各所述前序影像流的帧率进行平均值计算,得到的平均帧率作为当前所述影像流的合成帧率;
当当前所述影像流对应的前序影像流的数量大于阈值时,根据接收时间从各所述前序影像流中筛选与当前所述影像流距离最近的前序影像流,得到数量与所述阈值相等的筛选影像流;
将各所述筛选影像流的帧率进行平均值计算,得到的平均帧率作为当前所述影像流的合成帧率。
4.根据权利要求2所述的方法,其特征在于,所述当当前所述影像流对应的前序影像流的数量不大于阈值时,将各所述前序影像流的帧率进行平均值计算,得到的平均帧率作为所述影像流的合成帧率,包括:
当当前所述影像流对应的前序影像流的数量不大于阈值时,判断所述影像流对应的上一个前序影像流的帧率是否满足预设帧率范围;当不满足预设帧率范围时,去除所述影像流对应的上一个前序影像流,得到剩余前序影像流;
将各所述剩余前序影像流的帧率进行平均值计算,得到的平均帧率作为所述影像流的合成帧率;
当满足预设帧率范围时,将各所述前序影像流的帧率进行平均值计算,得到的平均帧率作为所述影像流的合成帧率;
当当前所述影像流对应的前序影像流的数量大于阈值时,根据接收时间从各所述前序影像流中筛选与当前所述影像流距离最近的前序影像流,得到数量与所述阈值相等的筛选影像流,包括:当当前所述影像流对应的前序影像流的数量大于阈值时,判断所述影像流对应的上一个前序影像流的帧率是否满足预设帧率范围;
当满足预设帧率范围时,根据接收时间从各所述前序影像流中筛选与当前所述影像流距离最近的前序影像流,得到数量与所述阈值相等的筛选影像流;
当不满足预设帧率范围时,去除当前所述影像流对应的上一个前序影像流,得到剩余前序影像流;
根据接收时间从各所述剩余影像流中筛选与当前所述影像流距离最近的前序影像流,得到数量与所述阈值相等的筛选影像流。
5.根据权利要求2所述的方法,其特征在于,所述获取在接收当前所述影像流之前接收的前序影像流的帧率,包括:
确定所述前序影像流的采集时长和所述前序影像流中连续影像的帧数;
根据所述采集时长和所述帧数计算所述前序影像流的帧率。
6.根据权利要求2所述的方法,其特征在于,获取所述预设初始帧率,包括:
确定所述影像流对应的医学成像设备的采集帧率;
将所述影像流对应的医学成像设备的采集帧率作为预设初始帧率。
7.根据权利要求1所述的方法,其特征在于,所述根据所述合成帧率将所述影像流中的各连续影像进行影像合成,得到视频文件,包括:
基于所述合成帧率和H.264编码压缩规则,将所述影像流中的各连续影像进行影像合成得到视频文件。
8.根据权利要求1所述的方法,其特征在于,所述将所述视频文件转换成DICOM文件后进行归档,包括:
获取所述影像流对应用户的检查信息;
根据DICOM编码规范将对应用户的所述检查信息和所述视频文件转换为DICOM文件。
9.一种医学影像管理装置,其特征在于,所述装置包括:
接收模块,用于接收医学成像设备产生的影像流;
确定模块,用于根据在接收当前所述影像流之前接收的前序影像流的帧率,确定当前所述影像流的合成帧率;
合成模块,用于根据所述合成帧率将所述影像流中的各连续影像进行影像合成,得到视频文件;
转换模块,用于将所述视频文件转换成DICOM文件后进行归档。
10.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现权利要求1至8中任一项所述的方法的步骤。
CN202010272215.4A 2020-04-09 2020-04-09 医学影像管理方法、装置和存储介质 Active CN111462868B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010272215.4A CN111462868B (zh) 2020-04-09 2020-04-09 医学影像管理方法、装置和存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010272215.4A CN111462868B (zh) 2020-04-09 2020-04-09 医学影像管理方法、装置和存储介质

Publications (2)

Publication Number Publication Date
CN111462868A true CN111462868A (zh) 2020-07-28
CN111462868B CN111462868B (zh) 2023-05-30

Family

ID=71681228

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010272215.4A Active CN111462868B (zh) 2020-04-09 2020-04-09 医学影像管理方法、装置和存储介质

Country Status (1)

Country Link
CN (1) CN111462868B (zh)

Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6937770B1 (en) * 2000-12-28 2005-08-30 Emc Corporation Adaptive bit rate control for rate reduction of MPEG coded video
CN1822182A (zh) * 2004-11-27 2006-08-23 麦克多诺医学产品股份有限公司 在数字记录介质上记录医学图像数据的系统和方法
US20100080476A1 (en) * 2008-10-01 2010-04-01 Elahe Khorasani Methods and systems for proxy medical image compression and transmission
CN102547248A (zh) * 2012-02-03 2012-07-04 深圳锐取信息技术股份有限公司 多路实时监控单视频文件录制方法
TW201322743A (zh) * 2011-11-18 2013-06-01 Onlive Inc 用於控制視訊串流之圖形使用者介面,系統及方法
TW201501069A (zh) * 2013-06-20 2015-01-01 Imar Technology Co Ltd 遠距醫療即時通訊平台與資訊傳送系統
CN105264892A (zh) * 2013-06-07 2016-01-20 苹果公司 针对高帧率和可变帧率捕获来调整视频压缩
CN106603543A (zh) * 2016-12-22 2017-04-26 努比亚技术有限公司 校正流媒体音视频同步的方法及装置
CN108366225A (zh) * 2018-01-26 2018-08-03 蓝网科技股份有限公司 基于多通道内窥镜影像采集的方法、装置、设备及存储介质
CN109640168A (zh) * 2018-11-27 2019-04-16 Oppo广东移动通信有限公司 视频处理方法、装置、电子设备和计算机可读介质
CN109803175A (zh) * 2019-03-12 2019-05-24 京东方科技集团股份有限公司 视频处理方法及装置、设备、存储介质
CN110400625A (zh) * 2019-07-08 2019-11-01 武汉联影医疗科技有限公司 医学影像格式转换方法、装置、设备和存储介质

Patent Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6937770B1 (en) * 2000-12-28 2005-08-30 Emc Corporation Adaptive bit rate control for rate reduction of MPEG coded video
CN1822182A (zh) * 2004-11-27 2006-08-23 麦克多诺医学产品股份有限公司 在数字记录介质上记录医学图像数据的系统和方法
US20100080476A1 (en) * 2008-10-01 2010-04-01 Elahe Khorasani Methods and systems for proxy medical image compression and transmission
TW201322743A (zh) * 2011-11-18 2013-06-01 Onlive Inc 用於控制視訊串流之圖形使用者介面,系統及方法
CN102547248A (zh) * 2012-02-03 2012-07-04 深圳锐取信息技术股份有限公司 多路实时监控单视频文件录制方法
CN105264892A (zh) * 2013-06-07 2016-01-20 苹果公司 针对高帧率和可变帧率捕获来调整视频压缩
TW201501069A (zh) * 2013-06-20 2015-01-01 Imar Technology Co Ltd 遠距醫療即時通訊平台與資訊傳送系統
CN106603543A (zh) * 2016-12-22 2017-04-26 努比亚技术有限公司 校正流媒体音视频同步的方法及装置
CN108366225A (zh) * 2018-01-26 2018-08-03 蓝网科技股份有限公司 基于多通道内窥镜影像采集的方法、装置、设备及存储介质
CN109640168A (zh) * 2018-11-27 2019-04-16 Oppo广东移动通信有限公司 视频处理方法、装置、电子设备和计算机可读介质
CN109803175A (zh) * 2019-03-12 2019-05-24 京东方科技集团股份有限公司 视频处理方法及装置、设备、存储介质
CN110400625A (zh) * 2019-07-08 2019-11-01 武汉联影医疗科技有限公司 医学影像格式转换方法、装置、设备和存储介质

Also Published As

Publication number Publication date
CN111462868B (zh) 2023-05-30

Similar Documents

Publication Publication Date Title
US8488887B2 (en) Method of determining an image distribution for a light field data structure
CN102111612A (zh) 接收装置、接收方法和程序
JP2000138934A (ja) ファイルサイズが制限されたjpeg符号化装置、方法および記録媒体
US7613348B2 (en) Medical imaging system having an apparatus for compressing image data
CN104243886B (zh) 一种基于插件技术的高速图像解析及视频生成方法
US20050084172A1 (en) Data compression device of digital recording sytem and controlling method thereof
US20170206318A1 (en) Medical system and medical device
KR101551915B1 (ko) 영상압축방법 및 영상압축장치
CN110400625B (zh) 医学影像格式转换方法、装置、设备和存储介质
JP2000148886A (ja) 医用データ処理方法、その装置および医用データ処理システム
US20060239572A1 (en) Encoding device and method, decoding device and method, and program
JP2008244957A (ja) 動画圧縮装置およびその動作制御方法
CN111462868B (zh) 医学影像管理方法、装置和存储介质
JP2000116606A (ja) 医療画像処理方法、医療画像伝送方法、医療画像処理装置、医療画像送信装置、および医療画像伝送装置
JP3859989B2 (ja) 画像マッチング方法およびその方法を利用可能な画像処理方法と装置
WO2020175176A1 (ja) 情報処理装置および方法、並びに、再生装置および方法
EP2704046A2 (en) Server device, client device, medical image processing system, and medical image porcessing method
CN115086730B (zh) 签约视频生成方法、系统、计算机设备及介质
JP2006304163A (ja) 静止画生成システム
JP4739443B2 (ja) デジタルイメージを処理するための方法及び装置
US11856203B1 (en) Neural face video compression using multiple views
CN109670056A (zh) 一种360度旋转图像的生成和读取方法
CN114040137B (zh) 一种以dicom格式记录的手术记录系统及数据处理方法
KR20230044626A (ko) 의료영상을 roi별로 이벤트 레코딩하는 방법
JP2020202573A (ja) 画像圧縮パラメータ決定装置、画像伝送システム、方法およびプログラム

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant