CN114630124B - 一种神经内窥镜备份方法及系统 - Google Patents
一种神经内窥镜备份方法及系统 Download PDFInfo
- Publication number
- CN114630124B CN114630124B CN202210239260.9A CN202210239260A CN114630124B CN 114630124 B CN114630124 B CN 114630124B CN 202210239260 A CN202210239260 A CN 202210239260A CN 114630124 B CN114630124 B CN 114630124B
- Authority
- CN
- China
- Prior art keywords
- frame
- idr
- video
- gop
- image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 30
- 230000001537 neural effect Effects 0.000 title claims abstract description 7
- 102100037812 Medium-wave-sensitive opsin 1 Human genes 0.000 claims abstract description 63
- 210000000944 nerve tissue Anatomy 0.000 claims abstract description 32
- 230000005540 biological transmission Effects 0.000 claims description 9
- 210000001519 tissue Anatomy 0.000 claims description 4
- 230000006835 compression Effects 0.000 claims description 3
- 238000007906 compression Methods 0.000 claims description 3
- 238000003709 image segmentation Methods 0.000 claims description 3
- 230000011218 segmentation Effects 0.000 claims description 3
- 210000005036 nerve Anatomy 0.000 description 8
- 238000004590 computer program Methods 0.000 description 4
- 230000018109 developmental process Effects 0.000 description 3
- 238000010586 diagram Methods 0.000 description 3
- 238000003384 imaging method Methods 0.000 description 3
- 238000004458 analytical method Methods 0.000 description 2
- 230000008014 freezing Effects 0.000 description 2
- 238000007710 freezing Methods 0.000 description 2
- 238000001514 detection method Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 239000000835 fiber Substances 0.000 description 1
- 238000005286 illumination Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 239000013307 optical fiber Substances 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/177—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a group of pictures [GOP]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/0002—Inspection of images, e.g. flaw detection
- G06T7/0012—Biomedical image inspection
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
- H04N19/172—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a picture, frame or field
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/42—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation
- H04N19/423—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation characterised by memory arrangements
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/85—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/50—Constructional details
- H04N23/555—Constructional details for picking-up images in sites, inaccessible due to their dimensions or hazardous conditions, e.g. endoscopes or borescopes
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30004—Biomedical image processing
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Health & Medical Sciences (AREA)
- General Health & Medical Sciences (AREA)
- Medical Informatics (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Radiology & Medical Imaging (AREA)
- Quality & Reliability (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Endoscopes (AREA)
Abstract
本发明提供了一种神经内窥镜备份方法及系统，扫描视频，判断用户操作对应的视频帧的类型，若所述视频帧为I或P帧，在所述视频帧紧邻的下一个B帧中记录用户操作；若所述视频帧为B帧，则在所述视频帧中记录用户操作；将不含有神经组织图像的GOP放入第一GOP集合，将其他GOP放入第二GOP集合，对所述第一GOP集合的GOP进行压缩，将第二GOP集合和压缩后的第一GOP集合发送到备份服务器。本发明对H264编码视频进一步压缩，而且将医生的操作编码进视频帧，提高了备份效率，减少了备份占用空间，而且同时备份了医生对视频的操作。
Description
技术领域
本申请涉及数据备份领域，尤其涉及神经内窥镜的数据备份。
背景技术
神经内窥镜是内窥镜的一种，早在20世纪初期就有医生将内窥镜应用到神经外科中，受限于当时技术的发展，神经内窥镜的前期发展缓慢，现在神经内窥镜已经是微创神经手术中必不可少的设备。神经内窥镜分为硬质神经内窥镜和软质神经内窥镜，硬质内窥镜管径较大，进入体腔困难，对患者造成的伤害也比较大，软质神经内窥镜可以很好的弯曲，尤其是纤维神经内窥镜的出现，不仅体积进一步缩小，而且成像更为清晰，视野更好。现在的电子神经内窥镜是采用CCD或者CMOS成像单元结合照明光纤，采集神经组织的图像，经过图像工作站的图像处理后实时显示在显示器上，成像质量可达到1080P，而且医生可以放大、缩小、冻结图像，这些都是原来的神经内窥镜无法比拟的。
数字化医院是医院发展的重要方向，目前很多医院都有医学影像存档系统，将CT、X光、MRI等设备产生的数字化医学图像进行存档，电子神经内窥镜也会产生很多视频，将神经内窥镜产生的视频、图像进行存档也是十分有必要的，不仅可以方便以后查阅神经内窥镜进行观察、手术的过程，还对以后的大数据分析、医学分析都有重要意义。
然而，神经内窥镜产生的数据量比较大，如果视频全部存储需要较多的存储设备，而且现有的存档、备份方法并不支持记录医生对视频的操作，例如冻结操作、放大操作等，这些操作反应了在使用神经内窥镜时医生的关注点，将这些操作进行备份也是十分有必要的。
发明内容
为了减少备份的数据量以及将医生对神经内窥镜视频的操作内容备份，一方面，本发明一种神经内窥镜备份方法，所述方法包括以下步骤：
S1，在与神经内窥镜相连的图像工作站中存储通过神经内窥镜获取的视频，并记录用户操作与视频帧的对应关系；
S2，接到备份指令时，扫描所述视频，判断用户操作对应的视频帧的类型，若所述视频帧为I或P帧，在所述视频帧紧邻的下一个B帧中记录用户操作；若所述视频帧为B帧，则在所述视频帧中记录用户操作；将处理后的视频作为待备份视频数据；
S3，获取所述待备份视频数据的所有IDR帧；第一个线程从所有IDR帧的第一个IDR帧开始，判断IDR帧图像是否是内窥镜的神经组织图像，若是，则IDR帧作为第一关键IDR帧；第二线程从所有IDR帧的最后一个IDR帧开始，判断IDR帧图像是否是内窥镜的神经组织图像，若是，则IDR帧作为第二关键IDR帧；
S4，将第一关键IDR帧之前的所有GOP和第二关键IDR帧之后的所有GOP作为第一GOP集合，将第一关键IDR帧和第二关键IDR帧之间的所有GOP作为第二GOP集合，对所述第一GOP集合的GOP进行压缩，将第二GOP集合和压缩后的第一GOP集合发送到备份服务器。
优选地，所述若所述视频帧为I或P帧，在所述视频帧紧邻的下一个B帧中记录用户操作；若所述视频帧为B帧，则在所述视频帧中记录用户操作，具体为：
设置标识位，所述标识位用于标识用户操作是当前B帧还是前一I帧或P帧，将所述标识位和所述用户操作进行编码，若所述视频帧为I帧或P帧，用所述编码替换与I帧或P帧紧邻的下一个B帧的第一个像素值，若所述视频帧为B帧，则用所述编码替换所述视频帧的第一个像素值。
优选地，所述对所述第一GOP集合的GOP进行压缩，具体为：对于第一GOP集合中的任一GOP，将GOP中P帧编码为B帧，将非IDR帧的I帧编码为P帧。
优选地，所述将第二GOP集合和压缩后的第一GOP集合发送到备份服务器，具体为：判断网络状况，若网络状况良好，优先发送第二GOP集合，否则优先发送压缩后的第一GOP集合；在发送第二GOP集合时，发送次序为IDR帧、非IDR的I帧、P帧、B帧。
优选地，所述判断IDR帧图像是否是内窥镜的神经组织图像，具体为：
判断IDR帧图像与模板图像的相似度，若相似度大于第一阈值，则IDR帧图像是内窥镜的神经组织图像，否则，不是内窥镜的神经组织图像；或者，
通过图像分割识别IDR帧图像是否包含神经组织，若包含，则IDR帧图像是内窥镜的神经组织图像，否则，不是内窥镜的神经组织图像。
另一方面，本发明提供了一种神经内窥镜备份系统，所述系统包括以下模块：
第一存储模块，用于在与神经内窥镜相连的图像工作站中存储通过神经内窥镜获取的视频，并记录用户操作与视频帧的对应关系；
用户操作编码模块，用于接到备份指令时，扫描所述视频，判断用户操作对应的视频帧的类型，若所述视频帧为I或P帧，在所述视频帧紧邻的下一个B帧中记录用户操作；若所述视频帧为B帧，则在所述视频帧中记录用户操作；将处理后的视频作为待备份视频数据；
视频分割模块，用于获取所述待备份视频数据的所有IDR帧；第一个线程从所有IDR帧的第一个IDR帧开始，判断IDR帧图像是否是内窥镜的神经组织图像，若是，则IDR帧作为第一关键IDR帧；第二线程从所有IDR帧的最后一个IDR帧开始，判断IDR帧图像是否是内窥镜的神经组织图像，若是，则IDR帧作为第二关键IDR帧；
压缩与发送模块，将第一关键IDR帧之前的所有GOP和第二关键IDR帧之后的所有GOP作为第一GOP集合，将第一关键IDR帧和第二关键IDR帧之间的所有GOP作为第二GOP集合，对所述第一GOP集合的GOP进行压缩，将第二GOP集合和压缩后的第一GOP集合发送到备份服务器。
优选地，所述若所述视频帧为I或P帧，在所述视频帧紧邻的下一个B帧中记录用户操作；若所述视频帧为B帧，则在所述视频帧中记录用户操作，具体为：
设置标识位，所述标识位用于标识用户操作是当前B帧还是前一I帧或P帧，将所述标识位和所述用户操作进行编码，若所述视频帧为I帧或P帧，用所述编码替换与I帧或P帧紧邻的下一个B帧的第一个像素值，若所述视频帧为B帧，则用所述编码替换所述视频帧的第一个像素值。
优选地，所述对所述第一GOP集合的GOP进行压缩，具体为：对于第一GOP集合中的任一GOP，将GOP中P帧编码为B帧，将非IDR帧的I帧编码为P帧。
优选地，所述将第二GOP集合和压缩后的第一GOP集合发送到备份服务器，具体为：判断网络状况，若网络状况良好，优先发送第二GOP集合，否则优先发送压缩后的第一GOP集合；在发送第二GOP集合时，发送次序为IDR帧、非IDR的I帧、P帧、B帧。
此外，本发明还提供了一种计算机可读存储介质，其上存储有计算机程序，该程序被处理器执行时实现如上所述的方法。
针对现有的神经内窥镜视频的备份中，备份数据量大以及无法将医生对视频的操作备份的问题，本发明提供了一种神经内窥镜备份方法及系统，将经过H264压缩后的视频进一步压缩，具体是判断神经内窥镜是否在进行神经组织检测，如果不是，则降低GOP的I帧和P帧，并且将用户操作编码进对其他视频帧无影响的B帧中。本发明进一步减小了备份数据的大小，而且能够将备份视频和备份医生的操作融合，提高了备份效率。
附图说明
为了更清楚地说明本发明具体实施方式或现有技术中的技术方案，下面将对具体实施方式或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图是本发明的一些实施方式，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1为第一实施例的流程图；
图2为GOP示意图；
图3为本发明结构示意图。
具体实施方式
在本文中，诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来，而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
实施例一
如图1所示，本发明一种神经内窥镜备份方法，所述方法包括以下步骤：
S1，在与神经内窥镜相连的图像工作站中存储通过神经内窥镜获取的视频，并记录用户操作与视频帧的对应关系；
在与神经内窥镜相连的图像工作站中存储电子神经内窥镜采集的视频信息，同时将医生对视频的操作也存储到所述图像工作站中。医生的操作包括但不限于放大、缩小、冻结、回放等。图像工作站主要用于对神经内窥镜中CMOS或CCD采集的视频图像进行处理，例如去噪、增强、H264编码等，同时在图像工作站中有存储器，存储有视频信息和医生的操作，也即用户操作。用户操作与视频帧的对应关系是指当进行操作时，显示器当前显示的图像帧，例如在第3521帧，医生点击冻结操作，则会建立冻结操作与第3521帧的对应关系。在一个具体实施例中，用户操作和视频帧的对应关系是以键值对的方式存储。
S2，接到备份指令时，扫描所述视频，判断用户操作对应的视频帧的类型，若所述视频帧为I或P帧，在所述视频帧紧邻的下一个B帧中记录用户操作；若所述视频帧为B帧，则在所述视频帧中记录用户操作；将处理后的视频作为待备份视频数据；
经过H264编码的视频包括IDR帧、I帧、P帧、B帧，其中IDR帧是一个GOP(Group ofPictures)的开始，如图2所示，一个GOP包括至少一个IDR帧，IDR帧是I帧的一种，IDR帧肯定是I帧，但I帧不一定是IDR帧。I帧(Intra-coded Picture)是帧内编码帧，P(Predictive-coded Picture)帧和B帧是帧间编码帧，P帧表示当前帧与前一个I帧或P帧的差别，通常P帧只有I帧的一半大小，B帧(Bidirectionally Predicted Picture)是以前面的I或P帧和后面的P帧为参考帧，通常B帧只有I帧的四分之一大小。
由于I帧、P帧都会对B帧有影响，而且I帧、P帧错误会引发其他帧错误，因此，本发明中将用户操作编码后存储到B帧中。
仍以上面为例，若第3521帧为I帧或P帧，第3522帧为B帧，则会将用户操作编码到第3522帧。若第3521帧为B帧，则直接将用户操作编码到底3521帧。
S3，获取所述待备份视频数据的所有IDR帧；第一个线程从所有IDR帧的第一个IDR帧开始，判断IDR帧图像是否是内窥镜的神经组织图像，若是，则IDR帧作为第一关键IDR帧；第二线程从所有IDR帧的最后一个IDR帧开始，判断IDR帧图像是否是内窥镜的神经组织图像，若是，则IDR帧作为第二关键IDR帧；
IDR帧是一个GOP的开始，随着场景的切换会生成不同的GOP，而且IDR帧是帧内编码，判断IDR帧是否有内窥镜的神经组织图像即可判断当前场景是否在用神经内窥镜观察神经组织。
在开启神经内窥镜后，到观察到神经组织，这个过程的图像更多是周围环境图像，同样地，当观察完神经组织到关闭神经内窥镜，这个过程的视频图像更多也是周围环境图像，本发明将视频分为三段，第一段是开始，第二段是利用神经内窥镜观察神经组织的过程，第三段是观察完神经组织到关闭神经内窥镜的过程。虽然第一段和第三段在使用神经内窥镜的过程不重要，但是其有助于记录利用神经内窥镜的全过程，而且有助于记录神经内窥镜进入到、撤离出神经组织的整个过程，将第一段和第三段备份也是有必要的。
S4，将第一关键IDR帧之前的所有GOP和第二关键IDR帧之后的所有GOP作为第一GOP集合，将第一关键IDR帧和第二关键IDR帧之间的所有GOP作为第二GOP集合，对所述第一GOP集合的GOP进行压缩，将第二GOP集合和压缩后的第一GOP集合发送到备份服务器。
第一段和第三段，也即第一GOP集合的视频和病人关系不大，因此，本发明进一步对第一GOP集合的视频进行压缩，减少备份的数据量。
在一个具体实施例中，所述若所述视频帧为I或P帧，在所述视频帧紧邻的下一个B帧中记录用户操作；若所述视频帧为B帧，则在所述视频帧中记录用户操作，具体为：
设置标识位，所述标识位用于标识用户操作是当前B帧还是前一I帧或P帧，将所述标识位和所述用户操作进行编码，若所述视频帧为I帧或P帧，用所述编码替换与I帧或P帧紧邻的下一个B帧的第一个像素值，若所述视频帧为B帧，则用所述编码替换所述视频帧的第一个像素值。
例如标识位00表示用户操作的是当前B帧，01表示用户操作对应的是当前B帧的前一I帧，10表示用户操作对应的是当前B帧的前一P帧，用户操作类型中冻结用00表示，缩放用01表示，放大用10表示，用户操作参数用三个比特为表示，01表示放大2倍，按照上述编码后，001001表示用户对当前的B帧放大了2倍。当然也可以添加其他标识位，本发明对此不作具体限定，例如当前第一个像素是否有用户操作。
在利用备份数据解码视频时，提取具有用户操作的B帧的第一个像素，然后按照编码规则解码即可，对于有用户操作的B帧的第一个像素可以通过图像处理方式估算出第一个像素的像素值，所述图像处理方式包括但不限于图像的膨胀。
由于B帧是I帧、P帧、B帧中占用空间最小的帧，在一个具体实施例中，所述对所述第一GOP集合的GOP进行压缩，具体为：对于第一GOP集合中的任一GOP，将GOP中P帧编码为B帧，将非IDR帧的I帧编码为P帧。
在GOP中，I帧是关键，如果没有I帧将无法播放视频，也就达不到备份的效果，在一个具体实施例中，所述将第二GOP集合和压缩后的第一GOP集合发送到备份服务器，具体为：判断网络状况，若网络状况良好，优先发送第二GOP集合，否则优先发送压缩后的第一GOP集合；在发送第二GOP集合时，发送次序为IDR帧、非IDR的I帧、P帧、B帧。
优选地，所述判断IDR帧图像是否是内窥镜的神经组织图像，具体为：
判断IDR帧图像与模板图像的相似度，若相似度大于第一阈值，则IDR帧图像是内窥镜的神经组织图像，否则，不是内窥镜的神经组织图像；或者，
通过图像分割识别IDR帧图像是否包含神经组织，若包含，则IDR帧图像是内窥镜的神经组织图像，否则，不是内窥镜的神经组织图像。
实施例二
本发明提供了一种神经内窥镜备份系统，所述系统包括以下模块：
第一存储模块，用于在与神经内窥镜相连的图像工作站中存储通过神经内窥镜获取的视频，并记录用户操作与视频帧的对应关系；
用户操作编码模块，用于接到备份指令时，扫描所述视频，判断用户操作对应的视频帧的类型，若所述视频帧为I或P帧，在所述视频帧紧邻的下一个B帧中记录用户操作；若所述视频帧为B帧，则在所述视频帧中记录用户操作；将处理后的视频作为待备份视频数据；
视频分割模块，用于获取所述待备份视频数据的所有IDR帧；第一个线程从所有IDR帧的第一个IDR帧开始，判断IDR帧图像是否是内窥镜的神经组织图像，若是，则IDR帧作为第一关键IDR帧；第二线程从所有IDR帧的最后一个IDR帧开始，判断IDR帧图像是否是内窥镜的神经组织图像，若是，则IDR帧作为第二关键IDR帧；
压缩与发送模块，将第一关键IDR帧之前的所有GOP和第二关键IDR帧之后的所有GOP作为第一GOP集合，将第一关键IDR帧和第二关键IDR帧之间的所有GOP作为第二GOP集合，对所述第一GOP集合的GOP进行压缩，将第二GOP集合和压缩后的第一GOP集合发送到备份服务器。
优选地，所述若所述视频帧为I或P帧，在所述视频帧紧邻的下一个B帧中记录用户操作；若所述视频帧为B帧，则在所述视频帧中记录用户操作，具体为：
设置标识位，所述标识位用于标识用户操作是当前B帧还是前一I帧或P帧，将所述标识位和所述用户操作进行编码，若所述视频帧为I帧或P帧，用所述编码替换与I帧或P帧紧邻的下一个B帧的第一个像素值，若所述视频帧为B帧，则用所述编码替换所述视频帧的第一个像素值。
优选地，所述对所述第一GOP集合的GOP进行压缩，具体为：对于第一GOP集合中的任一GOP，将GOP中P帧编码为B帧，将非IDR帧的I帧编码为P帧。
优选地，所述将第二GOP集合和压缩后的第一GOP集合发送到备份服务器，具体为：判断网络状况，若网络状况良好，优先发送第二GOP集合，否则优先发送压缩后的第一GOP集合；在发送第二GOP集合时，发送次序为IDR帧、非IDR的I帧、P帧、B帧。
图3示出了本发明的一个具体实施例的结构图，神经内窥镜备份系统包括电子神经内窥镜、图像工作站、显示器、备份服务器。在本发明中，在图像工作站存储有经过H264编码的原始的神经内窥镜采集的视频和医生对应的操作，在备份服务器存储了经过进一步压缩和将用户操作编码到B帧的视频，只需要备份服务器的视频即可还原神经内窥镜采集的视频和医生在使用神经内窥镜过程中对图像的操作。
实施例三
本发明还提供了一种计算机可读存储介质，其上存储有计算机程序，该程序被处理器执行时实现如上所述的方法。
以上所描述的装置实施例仅仅是示意性的，可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。本领域普通技术人员在不付出创造性的劳动的情况下，即可以理解并实施。
通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到各实施方式可借助加必需的通用硬件平台的方式来实现，当然也可以通过硬件和软件结合的方式来实现。基于这样的理解，上述技术方案本质上或者说对现有技术做出贡献的部分可以以计算机产品的形式体现出来，本发明可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
最后说明的是：以上实施例仅用以说明本发明的技术方案，而非对其限制；尽管参照前述实施例对本发明进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围。
Claims (10)
1.一种神经内窥镜备份方法，其特征在于，所述方法包括以下步骤：
S1，在与神经内窥镜相连的图像工作站中存储通过神经内窥镜获取的视频，并记录用户操作与视频帧的对应关系；所述用户操作是指对视频的操作；
S2，接到备份指令时，扫描所述视频，判断用户操作对应的视频帧的类型，若所述视频帧为I或P帧，在所述视频帧紧邻的下一个B帧中记录用户操作；若所述视频帧为B帧，则在所述视频帧中记录用户操作；将处理后的视频作为待备份视频数据；
S3，获取所述待备份视频数据的所有IDR帧；第一个线程从所有IDR帧的第一个IDR帧开始，判断IDR帧图像是否是内窥镜的神经组织图像，若是，则IDR帧作为第一关键IDR帧；第二线程从所有IDR帧的最后一个IDR帧开始，判断IDR帧图像是否是内窥镜的神经组织图像，若是，则IDR帧作为第二关键IDR帧；
S4，将第一关键IDR帧之前的所有GOP和第二关键IDR帧之后的所有GOP作为第一GOP集合，将第一关键IDR帧和第二关键IDR帧之间的所有GOP作为第二GOP集合，对所述第一GOP集合的GOP进行压缩，将第二GOP集合和压缩后的第一GOP集合发送到备份服务器。
2.如权利要求1所述的方法，其特征在于，所述若所述视频帧为I或P帧，在所述视频帧紧邻的下一个B帧中记录用户操作；若所述视频帧为B帧，则在所述视频帧中记录用户操作，具体为：
设置标识位，所述标识位用于标识用户操作是当前B帧还是前一I帧或P帧，将所述标识位和所述用户操作进行编码，若所述视频帧为I帧或P帧，用所述编码替换与I帧或P帧紧邻的下一个B帧的第一个像素值，若所述视频帧为B帧，则用所述编码替换所述视频帧的第一个像素值。
3.如权利要求1所述的方法，其特征在于，所述对所述第一GOP集合的GOP进行压缩，具体为：对于第一GOP集合中的任一GOP，将GOP中P帧编码为B帧，将非IDR帧的I帧编码为P帧。
4.如权利要求1-3任一项所述的方法，其特征在于，所述将第二GOP集合和压缩后的第一GOP集合发送到备份服务器，具体为：判断网络状况，若网络状况良好，优先发送第二GOP集合，否则优先发送压缩后的第一GOP集合；在发送第二GOP集合时，发送次序为IDR帧、非IDR的I帧、P帧、B帧。
5.如权利要求1-3任一项所述的方法，其特征在于，所述判断IDR帧图像是否是内窥镜的神经组织图像，具体为：
判断IDR帧图像与模板图像的相似度，若相似度大于第一阈值，则IDR帧图像是内窥镜的神经组织图像，否则，不是内窥镜的神经组织图像；或者，
通过图像分割识别IDR帧图像是否包含神经组织，若包含，则IDR帧图像是内窥镜的神经组织图像，否则，不是内窥镜的神经组织图像。
6.一种神经内窥镜备份系统，其特征在于，所述系统包括以下模块：
第一存储模块，用于在与神经内窥镜相连的图像工作站中存储通过神经内窥镜获取的视频，并记录用户操作与视频帧的对应关系；所述用户操作是指对视频的操作；
用户操作编码模块，用于接到备份指令时，扫描所述视频，判断用户操作对应的视频帧的类型，若所述视频帧为I或P帧，在所述视频帧紧邻的下一个B帧中记录用户操作；若所述视频帧为B帧，则在所述视频帧中记录用户操作；将处理后的视频作为待备份视频数据；
视频分割模块，用于获取所述待备份视频数据的所有IDR帧；第一个线程从所有IDR帧的第一个IDR帧开始，判断IDR帧图像是否是内窥镜的神经组织图像，若是，则IDR帧作为第一关键IDR帧；第二线程从所有IDR帧的最后一个IDR帧开始，判断IDR帧图像是否是内窥镜的神经组织图像，若是，则IDR帧作为第二关键IDR帧；
压缩与发送模块，将第一关键IDR帧之前的所有GOP和第二关键IDR帧之后的所有GOP作为第一GOP集合，将第一关键IDR帧和第二关键IDR帧之间的所有GOP作为第二GOP集合，对所述第一GOP集合的GOP进行压缩，将第二GOP集合和压缩后的第一GOP集合发送到备份服务器。
7.如权利要求6所述的系统，其特征在于，所述若所述视频帧为I或P帧，在所述视频帧紧邻的下一个B帧中记录用户操作；若所述视频帧为B帧，则在所述视频帧中记录用户操作，具体为：
设置标识位，所述标识位用于标识用户操作是当前B帧还是前一I帧或P帧，将所述标识位和所述用户操作进行编码，若所述视频帧为I帧或P帧，用所述编码替换与I帧或P帧紧邻的下一个B帧的第一个像素值，若所述视频帧为B帧，则用所述编码替换所述视频帧的第一个像素值。
8.如权利要求6所述的系统，其特征在于，所述对所述第一GOP集合的GOP进行压缩，具体为：对于第一GOP集合中的任一GOP，将GOP中P帧编码为B帧，将非IDR帧的I帧编码为P帧。
9.如权利要求6-8任一项所述的系统，其特征在于，所述将第二GOP集合和压缩后的第一GOP集合发送到备份服务器，具体为：判断网络状况，若网络状况良好，优先发送第二GOP集合，否则优先发送压缩后的第一GOP集合；在发送第二GOP集合时，发送次序为IDR帧、非IDR的I帧、P帧、B帧。
10.一种非易失性计算机存储介质，所述非易失性计算机存储介质中存储有指令，当其在处理器上运行时，使得处理器执行如权利要求1-5任一项所述方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202210239260.9A CN114630124B (zh) | 2022-03-11 | 2022-03-11 | 一种神经内窥镜备份方法及系统 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202210239260.9A CN114630124B (zh) | 2022-03-11 | 2022-03-11 | 一种神经内窥镜备份方法及系统 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN114630124A CN114630124A (zh) | 2022-06-14 |
| CN114630124B true CN114630124B (zh) | 2024-03-22 |
Family
ID=81901926
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202210239260.9A Active CN114630124B (zh) | 2022-03-11 | 2022-03-11 | 一种神经内窥镜备份方法及系统 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN114630124B (zh) |
Families Citing this family (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN115811610B (zh) * | 2023-01-13 | 2023-05-05 | 安徽医科大学 | 一种适用于无线内窥镜的图传方法及系统 |
Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2017093996A (ja) * | 2015-11-27 | 2017-06-01 | オリンパス株式会社 | 内視鏡システム及びその表示方法 |
| CN109213668A (zh) * | 2018-10-24 | 2019-01-15 | 北京赢销通软件技术有限公司 | 操作记录方法、装置及终端 |
| CN110519640A (zh) * | 2019-08-14 | 2019-11-29 | 北京达佳互联信息技术有限公司 | 视频处理方法、编码器、cdn服务器、解码器、设备及介质 |
| WO2020097888A1 (zh) * | 2018-11-15 | 2020-05-22 | 深圳市欢太科技有限公司 | 视频处理方法、装置、电子设备及计算机可读存储介质 |
| US10778991B1 (en) * | 2018-09-25 | 2020-09-15 | Amazon Technologies, Inc. | Adaptive group of pictures (GOP) encoding |
| CN112465698A (zh) * | 2019-09-06 | 2021-03-09 | 华为技术有限公司 | 一种图像处理方法和装置 |
Family Cites Families (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20090119706A1 (en) * | 2005-12-16 | 2009-05-07 | Stepframe Media, Inc. | Generation and Delivery of Stepped-Frame Content Via MPEG Transport Streams |
| WO2015114901A1 (ja) * | 2014-01-30 | 2015-08-06 | オリンパス株式会社 | 医療用動画記録再生システム及び医療用動画記録再生装置 |
| US10397590B2 (en) * | 2016-12-05 | 2019-08-27 | Nice-Systems Ltd. | System and method for enabling seek in a video recording |
-
2022
- 2022-03-11 CN CN202210239260.9A patent/CN114630124B/zh active Active
Patent Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2017093996A (ja) * | 2015-11-27 | 2017-06-01 | オリンパス株式会社 | 内視鏡システム及びその表示方法 |
| US10778991B1 (en) * | 2018-09-25 | 2020-09-15 | Amazon Technologies, Inc. | Adaptive group of pictures (GOP) encoding |
| CN109213668A (zh) * | 2018-10-24 | 2019-01-15 | 北京赢销通软件技术有限公司 | 操作记录方法、装置及终端 |
| WO2020097888A1 (zh) * | 2018-11-15 | 2020-05-22 | 深圳市欢太科技有限公司 | 视频处理方法、装置、电子设备及计算机可读存储介质 |
| CN110519640A (zh) * | 2019-08-14 | 2019-11-29 | 北京达佳互联信息技术有限公司 | 视频处理方法、编码器、cdn服务器、解码器、设备及介质 |
| CN112465698A (zh) * | 2019-09-06 | 2021-03-09 | 华为技术有限公司 | 一种图像处理方法和装置 |
Non-Patent Citations (1)
| Title |
|---|
| 用于视频质量包层评估模型的帧类型检测方法;苏洪磊;李兵兵;杨付正;;华南理工大学学报(自然科学版);20130915(第09期);第34-39页 * |
Also Published As
| Publication number | Publication date |
|---|---|
| CN114630124A (zh) | 2022-06-14 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP3244629B2 (ja) | シーン変化点検出方法 | |
| JP4312246B2 (ja) | 動画像データ編集装置、動画像データ再生装置、動画像データ編集方法及び動画像データ再生方法 | |
| US6842540B1 (en) | Surveillance system | |
| CN114630124B (zh) | 一种神经内窥镜备份方法及系统 | |
| CN112786163B (zh) | 一种超声图像处理显示方法、系统及存储介质 | |
| US20110150420A1 (en) | Method and device for storing medical data, method and device for viewing medical data, corresponding computer program products, signals and data medium | |
| US8233728B2 (en) | Embedded image quality stamps | |
| US6496716B1 (en) | Method and apparatus for stabilization of angiography images | |
| US20160171639A1 (en) | Chaotic watermarking for a digital image | |
| US20150172681A1 (en) | Medical image compression system and method using visually lossless compression | |
| Münzer et al. | Domain-specific video compression for long-term archiving of endoscopic surgery videos | |
| Iakovidis et al. | Efficient homography-based video visualization for wireless capsule endoscopy | |
| CN109155059B (zh) | 通过双通道时域降噪的改善的图像质量 | |
| JP2000148886A (ja) | 医用データ処理方法、その装置および医用データ処理システム | |
| CN110400625B (zh) | 医学影像格式转换方法、装置、设备和存储介质 | |
| Arif et al. | Auto-shape lossless compression of pharynx and esophagus fluoroscopic images | |
| DE102012200417B4 (de) | Bilddatenaufzeichnungsvorrichtung | |
| US20100014627A1 (en) | Method and apparatus for ct image compression | |
| Bassignani et al. | Review of technology: planning for the development of telesonography | |
| US20230007213A1 (en) | Image recording system, image recording method, and recording medium | |
| Choong et al. | Cost-effective handling of digital medical images in the telemedicine environment | |
| CN112766066A (zh) | 一种动态视频流和静态图像处理显示方法、系统 | |
| WO2009108124A1 (en) | A method of recording quality images | |
| JP2009047873A (ja) | 画像表示方法及び装置、並びに画像表示プログラム | |
| Megibow et al. | Computed tomography diagnosis utilizing compressed image data: an ROC analysis using acute appendicitis as a model |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |