CN113920039A - 图像处理系统及胶囊内窥镜 - Google Patents

图像处理系统及胶囊内窥镜 Download PDF

Info

Publication number
CN113920039A
CN113920039A CN202111123268.0A CN202111123268A CN113920039A CN 113920039 A CN113920039 A CN 113920039A CN 202111123268 A CN202111123268 A CN 202111123268A CN 113920039 A CN113920039 A CN 113920039A
Authority
CN
China
Prior art keywords
image
matrix
image matrix
biological characteristic
rgb
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202111123268.0A
Other languages
English (en)
Inventor
夏波
王建平
阚述贤
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shenzhen Jifu Medical Technology Co ltd
Original Assignee
Shenzhen Jifu Medical Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenzhen Jifu Medical Technology Co ltd filed Critical Shenzhen Jifu Medical Technology Co ltd
Priority to CN202111123268.0A priority Critical patent/CN113920039A/zh
Publication of CN113920039A publication Critical patent/CN113920039A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00—Image enhancement or restoration
    • G06T5/50—Image enhancement or restoration using two or more images, e.g. averaging or subtraction
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00002—Operational features of endoscopes
    • A61B1/00004—Operational features of endoscopes characterised by electronic signal processing
    • A61B1/00009—Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/04—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances
    • A61B1/041—Capsule endoscopes for imaging
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00—Image enhancement or restoration
    • G06T5/20—Image enhancement or restoration using local operators
    • G06T5/30—Erosion or dilatation, e.g. thinning
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/50—Constructional details
    • H04N23/555—Constructional details for picking-up images in sites, inaccessible due to their dimensions or hazardous conditions, e.g. endoscopes or borescopes
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/64—Circuits for processing colour signals
    • H04N9/646—Circuits for processing colour signals for image enhancement, e.g. vertical detail restoration, cross-colour elimination, contour correction, chrominance trapping filters
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10068—Endoscopic image
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/20—Special algorithmic details
    • G06T2207/20212—Image combination
    • G06T2207/20221—Image fusion; Image merging
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30004—Biomedical image processing
    • G06T2207/30028—Colon; Small intestine
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30004—Biomedical image processing
    • G06T2207/30092—Stomach; Gastric

Landscapes

  • Engineering & Computer Science (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Signal Processing (AREA)
  • Health & Medical Sciences (AREA)
  • Multimedia (AREA)
  • Physics & Mathematics (AREA)
  • Surgery (AREA)
  • Radiology & Medical Imaging (AREA)
  • Medical Informatics (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Optics & Photonics (AREA)
  • Pathology (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Biomedical Technology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Biophysics (AREA)
  • Molecular Biology (AREA)
  • Animal Behavior & Ethology (AREA)
  • General Health & Medical Sciences (AREA)
  • Public Health (AREA)
  • Veterinary Medicine (AREA)
  • Endoscopes (AREA)
  • Image Processing (AREA)

Abstract

本发明公开一种图像处理系统，包括胶囊内窥镜和终端设备，该胶囊内窥镜的图像采集模块采集目标区域的图像数据，得到RGB图像矩阵S；该胶囊内窥镜的图像处理模块提取该矩阵S中每个像素点的生物特征信息，生成生物特征图像矩阵M，分别对该矩阵S和该矩阵M进行压缩处理，得到压缩后的RGB图像矩阵S′和压缩后的生物特征图像矩阵M′；该终端设备分别对该矩阵S′和该矩阵M′进行解压缩处理，得到解压后的RGB图像矩阵S″和解压后的生物特征图像矩阵M″，并对该矩阵S″和该矩阵M″进行增强融合处理，得到RGB特征融合图像Starget，防止目标区域的图像数据中的重要的生物特征信息经压缩和传输而丢失，有利于病灶的识别和诊断，提高了胶囊内窥镜的检测结果的准确性。

Description

图像处理系统及胶囊内窥镜
技术领域
本发明涉及医疗器械技术领域，尤其涉及一种图像处理系统及胶囊内窥镜。
背景技术
胶囊内窥镜采集的原始图像数据传输到体外的过程中因受到射频传输带宽和电池电量的限制，在传输之前，原始图像数据需经高倍压缩之后，再通过射频模块传输到体外，之后，经终端设备解压缩及色彩增强处理来还原原始图像数据，得到还原后的图像数据。经过上述处理，还原后的图像数据与原始图像数据相比，清晰度降低，图像失真，尤其是重要的生物特征信息丢失，从而影响病灶的识别和诊断，进而影响胶囊内窥镜的检测结果的准确性。
发明内容
为了解决现有技术中存在的上述至少一个技术问题，本发明实施例提供一种图像处理系统及胶囊内窥镜，实现了对传输到体外的胶囊内窥镜拍摄的图像数据的增强处理，防止了体内目标区域的图像数据中的重要的生物特征信息经压缩和传输而丢失，传输到体外的图像数据经增强处理后有利于病灶的识别和诊断，进而提高了胶囊内窥镜的检测结果的准确性。
本发明实施例提供一种图像处理系统，包括胶囊内窥镜和终端设备，所述胶囊内窥镜包括图像采集模块和图像处理模块，所述图像采集模块采集目标区域的图像数据，得到所述RGB图像矩阵S；
所述图像处理模块提取所述RGB图像矩阵S中每个像素点RGBij的生物特征信息，生成生物特征图像矩阵M，其中i∈(1，M)，j∈(1，N)，M和N分别为正整数；
所述图像处理模块分别对所述RGB图像矩阵S和所述生物特征图像矩阵M进行压缩处理，得到压缩后的RGB图像矩阵S′和压缩后的生物特征图像矩阵M′；
所述终端设备分别对所述压缩后的RGB图像矩阵S′和所述压缩后的生物特征图像矩阵M′进行解压缩处理，得到解压后的RGB图像矩阵S″和解压后的生物特征图像矩阵M″；
所述终端设备对所述解压后的RGB图像矩阵S″和所述解压后的生物特征图像矩阵M″进行增强融合处理，得到RGB特征融合图像Starget。
在一些实施例中，所述图像处理模块提取所述RGB图像矩阵S中每个像素点RGBij的生物特征信息，生成生物特征图像矩阵M包括：
所述图像处理模块对所述RGB图像矩阵S中每个像素点RGBij采用生物特征指数公式，得到每个所述像素点的生物特征数值，并生成初始生物特征图像矩阵M1；
所述图像处理模块对所述初始生物特征图像矩阵M1执行腐蚀运算，当迭代N次，生物特征形态消失时，得到腐蚀后的图像矩阵M2；
所述图像处理模块对所述初始生物特征图像矩阵M1和所述腐蚀后的图像矩阵M2进行异或运算，得到所述生物特征图像矩阵M。
在一些实施例中，所述图像处理模块对所述初始生物特征图像矩阵M1执行腐蚀运算，当迭代N次，生物特征形态消失时，得到腐蚀后的图像矩阵M2之前还包括：
所述图像处理模块过滤所述初始生物特征图像矩阵M1中偏离均值超过第一预设阈值的元素，得到过滤后的初始生物特征图像矩阵M1′。
在一些实施例中，所述图像处理模块对所述初始生物特征图像矩阵M1执行腐蚀运算，当迭代N次，生物特征形态消失时，得到腐蚀后的图像矩阵M2之前还包括：
所述图像处理模块对所述初始生物特征图像矩阵M1进行二值化处理，得到二值化后的初始生物特征图像矩阵M1″。
在一些实施例中，所述图像处理模块分别对所述RGB图像矩阵S和所述生物特征图像矩阵M进行压缩处理，得到压缩后的RGB图像矩阵S′和压缩后的生物特征图像矩阵M′包括：
所述图像处理模块对所述RGB图像矩阵S进行有损压缩处理，得到所述压缩后的RGB图像矩阵S′；
所述图像处理模块对所述生物特征图像矩阵M进行无损压缩处理，得到所述压缩后的生物特征图像矩阵M′。
在一些实施例中，所述图像处理模块对所述生物特征图像矩阵M进行无损压缩处理，得到所述压缩后的生物特征图像矩阵M′包括：
所述图像处理模块对所述生物特征图像矩阵M进行降维处理，得到所述压缩后的生物特征图像矩阵M′，所述压缩后的生物特征图像矩阵M′包括S子矩阵S*，V子矩阵V*和D子矩阵D*。
在一些实施例中，所述胶囊内窥镜还包括射频模块，所述终端设备分别对所述压缩后的RGB图像矩阵S′和所述压缩后的生物特征图像矩阵M′进行解压缩处理，得到解压后的RGB图像矩阵S″和解压后的生物特征图像矩阵M″之前还包括：所述图像处理模块将所述压缩后的RGB图像矩阵S′、所述S子矩阵S*、所述V子矩阵V*和所述D子矩阵D*合成数据包；
所述射频模块将所述数据包发送到体外；
所述终端设备接收所述数据包。
在一些实施例中，所述终端设备分别对所述压缩后的RGB图像矩阵S′和所述压缩后的生物特征图像矩阵M′进行解压缩处理，得到解压后的RGB图像矩阵S″和解压后的生物特征图像矩阵M″包括：
所述终端设备对所述压缩后的RGB图像矩阵S′进行解压缩处理，得到所述解压后的RGB图像矩阵S″；
所述终端设备对所述S子矩阵S*，所述V子矩阵V*和所述D子矩阵D*进行矩阵乘法运算，得到所述解压后的生物特征图像矩阵M″。
在一些实施例中，所述终端设备对所述解压后的RGB图像矩阵S″和所述解压后的生物特征图像矩阵M″进行增强融合处理，得到RGB特征融合图像Starget包括：所述终端设备将所述解压后的RGB图像S″转换为HSV图像N″，获取所述HSV图像N″中Hchannel、Schannel、Vchannel通道数据，得到H通道数据H″、S通道数据S″、V通道数据V″；
所述终端设备对所述V通道数据V″和所述解压后的生物特征图像矩阵M″进行增强融合处理，得到增强融合后的矩阵Venhance；
所述终端设备将所述H通道数据H″、所述S通道数据S″和所述矩阵Venhance转换到RGB颜色空间，得到所述RGB特征融合图像Starget。
本发明实施例提供一种胶囊内窥镜，包括图像采集模块、图像处理模块和射频模块，
所述图像采集模块采集目标区域的图像数据，得到所述RGB图像矩阵S；
所述图像处理模块提取所述RGB图像矩阵S中每个像素点RGBij的生物特征信息，生成生物特征图像矩阵M，其中i∈(1，M)，j∈(1，N)，M和N分别为正整数；
所述图像处理模块分别对所述RGB图像矩阵S和所述生物特征图像矩阵M进行压缩处理，得到压缩后的RGB图像矩阵S′和压缩后的生物特征图像矩阵M′；
所述射频模块将所述压缩后的RGB图像矩阵S′和所述压缩后的生物特征图像矩阵M′发送到体外，以使终端设备分别对所述压缩后的RGB图像矩阵S′和所述压缩后的生物特征图像矩阵M′进行解压缩处理，得到解压后的RGB图像矩阵S″和解压后的生物特征图像矩阵M″，以及使所述终端设备对所述解压后的RGB图像矩阵S″和所述解压后的生物特征图像矩阵M″进行增强融合处理，得到RGB特征融合图像Starget。
在一些实施例中，所述图像处理模块提取所述RGB图像矩阵S中每个像素点RGBij的生物特征信息，生成生物特征图像矩阵M包括：
所述图像处理模块对所述RGB图像矩阵S中每个像素点RGBij采用生物特征指数公式，得到每个所述像素点的生物特征数值，并生成初始生物特征图像矩阵M1；
所述图像处理模块对所述初始生物特征图像矩阵M1执行腐蚀运算，当迭代N次，生物特征形态消失时，得到腐蚀后的图像矩阵M2；
所述图像处理模块对所述初始生物特征图像矩阵M1和所述腐蚀后的图像矩阵M2进行异或运算，得到所述生物特征图像矩阵M。
在一些实施例中，所述图像处理模块对所述生物特征图像矩阵M进行压缩处理，得到压缩后的生物特征图像矩阵M′包括：
所述图像处理模块对所述生物特征图像矩阵M进行降维处理，得到所述压缩后的生物特征图像矩阵M′，所述压缩后的生物特征图像矩阵M′包括S子矩阵S*，V子矩阵V*和D子矩阵D*。
本发明实施例提供的一种图像处理系统，包括胶囊内窥镜和终端设备，所述胶囊内窥镜包括图像采集模块和图像处理模块，所述图像采集模块采集目标区域的图像数据，得到所述RGB图像矩阵S；所述图像处理模块提取所述RGB图像矩阵S中每个像素点RGBij的生物特征信息，生成生物特征图像矩阵M，其中i∈(1，M)，j∈(1，N)，M和N分别为正整数；所述图像处理模块分别对所述RGB图像矩阵S和所述生物特征图像矩阵M进行压缩处理，得到压缩后的RGB图像矩阵S′和压缩后的生物特征图像矩阵M′；所述终端设备分别对所述压缩后的RGB图像矩阵S′和所述压缩后的生物特征图像矩阵M′进行解压缩处理，得到解压后的RGB图像矩阵S″和解压后的生物特征图像矩阵M″；所述终端设备对所述解压后的RGB图像矩阵S″和所述解压后的生物特征图像矩阵M″进行增强融合处理，得到RGB特征融合图像Starget，实现了对传输到体外的图像数据的增强处理，防止了目标区域的图像数据中的重要的生物特征信息经压缩和传输而丢失，传输到体外的图像数据经增强处理后有利于病灶的识别和诊断，进而提高了胶囊内窥镜的检测结果的准确性。
附图说明
附图是用来提供对本发明实施例的进一步理解，并且构成说明书的一部分，与下面的具体实施方式一起用于解释本发明实施例，但并不构成对本发明实施例的限制。
图1为本发明实施例提供的一种图像处理系统的示意图；
图2为本发明实施例提供的另一种图像处理系统中的胶囊内窥镜的示意图。在附图中：
胶囊内窥镜1、终端设备2。
具体实施方式
为了使本发明的目的、技术方案及优点更加清楚明白，以下结合附图及实施例，对本发明进行进一步详细说明。应当理解，此处所描述的具体实施例仅仅用以解释本发明，并不用于限定本发明。
如图1所示，本发明实施例提供一种图像处理系统，包括胶囊内窥镜1和终端设备2，所述胶囊内窥镜1包括图像采集模块和图像处理模块，所述图像采集模块采集目标区域的图像数据，得到所述RGB图像矩阵S；所述图像处理模块提取所述RGB图像矩阵S中每个像素点RGBij的生物特征信息，生成生物特征图像矩阵M，其中i∈(1，M)，j∈(1，N)，M和N分别为正整数；所述图像处理模块分别对所述RGB图像矩阵S和所述生物特征图像矩阵M进行压缩处理，得到压缩后的RGB图像矩阵S′和压缩后的生物特征图像矩阵M′；所述终端设备2分别对所述压缩后的RGB图像矩阵S′和所述压缩后的生物特征图像矩阵M′进行解压缩处理，得到解压后的RGB图像矩阵S″和解压后的生物特征图像矩阵M″；所述终端设备2对所述解压后的RGB图像矩阵S″和所述解压后的生物特征图像矩阵M″进行增强融合处理，得到RGB特征融合图像Starget。
具体地，所述图像处理系统包括胶囊内窥镜1和终端设备2，所述终端设备2可以是但不限于各种智能手机、平板电脑、笔记本电脑、台式计算机等。所述胶囊内窥镜1包括图像采集模块和图像处理模块。所述受检者吞服胶囊内窥镜1，所述胶囊内窥镜1在受检者的消化道内采集图像数据，可以采集食道、胃部、小肠、大肠等的图像数据。所述胶囊内窥镜1的照明模块可以是RGB彩色LED灯，经硬件管脚控制输出RED、GREEN和BLUE占比相同的白色光源照射于受检者的目标区域，该目标区域可以是胃部的24部位中的任意一部位，胶囊内窥镜1的图像采集模块采集该目标区域的图像数据，该图像采集模块可以是CMOS(Complementary Metal-Oxide-Semiconductor)摄像头，图像处理模块对所述图像数据进行校准，得到M*N分辨率的RGB图像矩阵
Figure BDA0003277797160000061
M和N分别为正整数，其中校准可以包括BPF(Bayer Pattern Filter，掩膜阵列)、BLC(Black Level Correction，暗电流校准)、LSC(Lens Shading Correction，镜头暗角校准)、BPC(Bad PointCorrection，坏点校准)、AE(Auto Exprosure，自动曝光)、DNR(Digital Noise Reduction，降噪)、EE(Edge Enhance，增强)、Demosaic(去马赛克)、AWB(Auto White Balance，自动白平衡)、CCM(Color Correction Matix，色彩校正矩阵)、GC(Gamma Correction，非线性映射)、Gamma(非线性映射)中一个或者多个算法。
所述图像处理模块提取所述RGB图像矩阵S中每个像素点RGBij的生物特征信息，生成生物特征图像矩阵M，其中i∈(1，M)，j∈(1，N)，M和N分别为正整数，其中生物特征信息，比如可以是血管特征信息。所述图像处理模块分别对所述RGB图像矩阵S和所述生物特征图像矩阵M进行压缩处理，得到压缩后的RGB图像矩阵S′和压缩后的生物特征图像矩阵M′。
所述终端设备2分别对所述压缩后的RGB图像矩阵S′和所述压缩后的生物特征图像矩阵M′进行解压缩处理，得到解压后的RGB图像矩阵S″和解压后的生物特征图像矩阵M″。所述终端设备2对所述解压后的RGB图像矩阵S″和所述解压后的生物特征图像矩阵M″进行增强融合处理，得到RGB特征融合图像Starget。
本发明实施例提供的一种图像处理系统，胶囊内窥镜1采集目标区域的图像数据，通过胶囊内窥镜1的图像处理模块以及终端设备2对所述图像数据进行处理，得到RGB特征融合图像Starget，实现了对传输到体外的图像数据的增强处理，防止了目标区域的图像数据中的重要的生物特征信息经压缩和传输而丢失，传输到体外的图像数据经增强处理后有利于病灶的识别和诊断，进而提高了胶囊内窥镜1的检测结果的准确性。
在一些实施例中，所述图像处理模块提取所述RGB图像矩阵S中每个像素点RGBij的生物特征信息，生成生物特征图像矩阵M包括：所述图像处理模块对所述RGB图像矩阵S中每个像素点RGBij采用生物特征指数公式，得到每个所述像素点的生物特征数值，并生成初始生物特征图像矩阵M1；所述图像处理模块对所述初始生物特征图像矩阵M1执行腐蚀运算，当迭代N次，生物特征形态消失时，得到腐蚀后的图像矩阵M2；所述图像处理模块对所述初始生物特征图像矩阵M1和所述腐蚀后的图像矩阵M2进行异或运算，得到所述生物特征图像矩阵M。
具体地，本发明实施例中生物特征信息以血管特征为例，则生物特征指数公式如下：
Figure BDA0003277797160000071
其中，IHbij为血红蛋白吸收指数，Rij为像素点的Red值，Gij为像素点的Green值。
对所述RGB图像矩阵S中像素点RGBij应用上述生物特征指数公式进行遍历运算，依次得到每个像素点的IHbij值，并生成所述初始生物特征图像矩阵
Figure BDA0003277797160000081
所述图像处理模块对所述初始生物特征图像矩阵M1执行腐蚀运算，当迭代N次，生物特征形态消失时，得到腐蚀后的图像矩阵M2。具体地，所述图像处理模块对所述初始生物特征图像矩阵M1执行预设邻域的尺寸大小的腐蚀运算，该预设邻域可以根据需要设定，比如可以是3*3的邻域，n次迭代直到初始生物特征图像M1被腐蚀完全消失。统计每次迭代消失像素点量Pdie_n，得到点云W[log(n)，log(Pdie_n)]，并在空间坐标系中标记。以所述点云的初始点为极坐标的原点，将该点云转换到极坐标系ρ-θ,统计极角度的方差，获取方差小于某个阈值下的点集W*，使得W*分布具有某个一致的方向，并记录此时的迭代数Ndie，此时的映射关系满足线性，并可以在空间坐标系中拟合为直线。
在映射图中，随着n增大，血管形态不断被腐蚀，且与消失像素点的对数成线性关系。在上述极坐标统计的时刻Ndie，其中Ndie为人体内血管形态迭代消失的总次数，当这种线性关系被破坏，即表明此时血管形态被腐蚀完全，得到腐蚀后的图像矩阵M2。可以理解的是Ndie＝N。
对所述初始生物特征图像矩阵M1和所述腐蚀后的图像矩阵M2按行列坐标做矩阵元素异或运算，分割出血管形态特征图像矩阵M。
在一些实施例中，所述图像处理模块对所述初始生物特征图像矩阵M1执行腐蚀运算，当迭代N次，生物特征形态消失时，得到腐蚀后的图像矩阵M2之前还包括：所述图像处理模块过滤所述初始生物特征图像矩阵M1中偏离均值超过第一预设阈值的元素，得到过滤后的初始生物特征图像矩阵M1′。
具体地，所述图像处理模块对所述初始生物特征图像矩阵M1中的所有值按照如下公式做平均值统计，得到mean(M1)：
Figure BDA0003277797160000082
遍历所述初始生物特征图像矩阵M1中每个元素，使用条件阈值算法，过滤掉偏离均值mean(M)超过第一预设阈值的元素，该第一预设阈值可以根据需要进行设定，被过滤的元素的位置用0替代，得到过滤后的初始生物特征图像矩阵M1′，
Figure BDA0003277797160000091
过滤掉偏离均值的元素，可以提升图像增强效果。在一些实施例中，所述图像处理模块对所述初始生物特征图像矩阵M1执行腐蚀运算，当迭代N次，生物特征形态消失时，得到腐蚀后的图像矩阵M2之前还包括：所述图像处理模块对所述初始生物特征图像矩阵M1进行二值化处理，得到二值化后的初始生物特征图像矩阵M1″，
Figure BDA0003277797160000092
在一些实施例中，所述图像处理模块分别对所述RGB图像矩阵S和所述生物特征图像矩阵M进行压缩处理，得到压缩后的RGB图像矩阵S′和压缩后的生物特征图像矩阵M′包括：所述图像处理模块对所述RGB图像矩阵S进行有损压缩处理，得到所述压缩后的RGB图像矩阵S′；所述图像处理模块对所述生物特征图像矩阵M进行无损压缩处理，得到所述压缩后的生物特征图像矩阵M′。有损压缩可以是进行jpeg压缩，无损压缩可以是奇异值分解(Singular Value Decomposition，以下简称SVD)。
在一些实施例中，所述图像处理模块对所述生物特征图像矩阵M进行无损压缩处理，得到所述压缩后的生物特征图像矩阵M′包括：所述图像处理模块对所述生物特征图像矩阵M进行降维处理，得到所述压缩后的生物特征图像矩阵M′，所述压缩后的生物特征图像矩阵M′包括S子矩阵S*，V子矩阵V*和D子矩阵D*。具体地，对所述生物特征图像矩阵M进行SVD分解，生成高度压缩的S子矩阵S*，V子矩阵V*和D子矩阵D*。
在一些实施例中，所述胶囊内窥镜1还包括射频模块，所述终端设备2分别对所述压缩后的RGB图像矩阵S′和所述压缩后的生物特征图像矩阵M′进行解压缩处理，得到解压后的RGB图像矩阵S″和解压后的生物特征图像矩阵M″之前还包括：所述图像处理模块将所述压缩后的RGB图像矩阵S′、所述S子矩阵S*、所述V子矩阵V*和所述D子矩阵D*合成数据包；所述射频模块将所述数据包发送到体外；所述终端设备2接收所述数据包。
在一些实施例中，所述终端设备2分别对所述压缩后的RGB图像矩阵S′和所述压缩后的生物特征图像矩阵M′进行解压缩处理，得到解压后的RGB图像矩阵S″和解压后的生物特征图像矩阵M″包括：所述终端设备2对所述压缩后的RGB图像矩阵S′进行解压缩处理，得到所述解压后的RGB图像矩阵S″；所述终端设备2对所述S子矩阵S*，所述V子矩阵V*和所述D子矩阵D*进行矩阵乘法运算，得到所述解压后的生物特征图像矩阵M″。
具体地，所述终端设备2可以通过decodeJPEG对所述压缩后的RGB图像矩阵S′进行解压缩处理，得到所述解压后的RGB图像矩阵S″。所述终端设备2通过SVD算法对所述S子矩阵S*，所述V子矩阵V*和所述D子矩阵D*进行矩阵乘法运算，得到所述解压后的生物特征图像矩阵M″，可以理解的是，所述解压后的生物特征图像矩阵M″与所述生物特征图像矩阵M相同。
在一些实施例中，所述终端设备2对所述解压后的RGB图像矩阵S″和所述解压后的生物特征图像矩阵M″进行增强融合处理，得到RGB特征融合图像Starget包括：所述终端设备2将所述解压后的RGB图像S″转换为HSV图像N″，获取所述HSV图像N″中Hchannel、Schannel、Vchannel通道数据，得到H通道数据H″、S通道数据S″、V通道数据V″；所述终端设备2对所述V通道数据V″和所述解压后的生物特征图像矩阵M″进行增强融合处理，得到增强融合后的矩阵Venhance；所述终端设备2将所述H通道数据H″、所述S通道数据S″和所述矩阵Venhance转换到RGB颜色空间，得到所述RGB特征融合图像Starget。
具体地，基于HSV-RGB的相互转换运算，将所述解压后的RGB图像S″转换到HSV空间得到HSV图像N″，获取所述HSV图像N″中Hchannel、Schannel、Vchannel通道数据，得到H通道数据H″、S通道数据S″、V通道数据V″。按照如下公式对所述V通道数据V″和所述解压后的生物特征图像矩阵M″进行增强融合处理，得到增强融合后的矩阵Venhance：
Venhance(i,j)＝δ1V″(i,j)+δ2M″(i,j)，
其中，δ1为所述V通道数据V″的融合系数，δ2为所述解压后的生物特征图像矩阵M″的融合系数，且δ1+δ2＝1。
可以理解的是
Figure BDA0003277797160000111
基于HSV-RGB的相互转换运算，所述终端设备2将所述H通道数据H″、所述S通道数据S″和所述矩阵Venhance转换到RGB颜色空间，得到所述RGB特征融合图像Starget。
本发明实施例提供的一种图像处理系统，包括胶囊内窥镜1和终端设备2，所述胶囊内窥镜1采集目标区域的图像数据，提取出所述图像数据中的生物特征图像并进行无损压缩和传输到体外，对所述目标区域的图像数据进行压缩和传输到体外，在体外，所述终端设备2对接收的以上两者的压缩图像进行解压缩及融合处理，得到RGB特征融合图像Starget，该RGB特征融合图像Starget包含生物特征信息，有助于医护人员对病灶的识别和诊断，进而提高了胶囊内窥镜1的检测结果的准确性；同时保证了数据从体内到体外传输的高压缩率和实时性。
如图2所示，本发明实施例提供一种胶囊内窥镜1，包括图像采集模块、图像处理模块和射频模块，所述图像采集模块采集目标区域的图像数据，得到所述RGB图像矩阵S；
所述图像处理模块提取所述RGB图像矩阵S中每个像素点RGBij的生物特征信息，生成生物特征图像矩阵M，其中i∈(1，M)，j∈(1，N)，M和N分别为正整数；所述图像处理模块分别对所述RGB图像矩阵S和所述生物特征图像矩阵M进行压缩处理，得到压缩后的RGB图像矩阵S′和压缩后的生物特征图像矩阵M′；所述射频模块将所述压缩后的RGB图像矩阵S′和所述压缩后的生物特征图像矩阵M′发送到体外，以使终端设备2分别对所述压缩后的RGB图像矩阵S′和所述压缩后的生物特征图像矩阵M′进行解压缩处理，得到解压后的RGB图像矩阵S″和解压后的生物特征图像矩阵M″，以及使所述终端设备2对所述解压后的RGB图像矩阵S″和所述解压后的生物特征图像矩阵M″进行增强融合处理，得到RGB特征融合图像Starget。
在一些实施例中，所述图像处理模块提取所述RGB图像矩阵S中每个像素点RGBij的生物特征信息，生成生物特征图像矩阵M包括：所述图像处理模块对所述RGB图像矩阵S中每个像素点RGBij采用生物特征指数公式，得到每个所述像素点的生物特征数值，并生成初始生物特征图像矩阵M1；所述图像处理模块对所述初始生物特征图像矩阵M1执行腐蚀运算，当迭代N次，生物特征形态消失时，得到腐蚀后的图像矩阵M2；所述图像处理模块对所述初始生物特征图像矩阵M1和所述腐蚀后的图像矩阵M2进行异或运算，得到所述生物特征图像矩阵M。
在一些实施例中，所述图像处理模块对所述生物特征图像矩阵M进行压缩处理，得到压缩后的生物特征图像矩阵M′包括：所述图像处理模块对所述生物特征图像矩阵M进行降维处理，得到所述压缩后的生物特征图像矩阵M′，所述压缩后的生物特征图像矩阵M′包括S子矩阵S*，V子矩阵V*和D子矩阵D*。
所述胶囊内窥镜1的各个功能模块以及终端设备2如何实现上述功能，请详见上述图像处理系统的实施例的描述，在此不再赘述。
本发明实施例提供一种胶囊内窥镜1，所述胶囊内窥镜1采集目标区域的图像数据，提取出所述图像数据中的生物特征图像并进行无损压缩和传输到体外，对所述目标区域的图像数据进行压缩和传输到体外，以使所述终端设备2对接收的以上两者的压缩图像进行解压缩及融合处理，得到RGB特征融合图像Starget，该RGB特征融合图像Starget包含生物特征信息，有助于医护人员对病灶的识别和诊断，进而提高了胶囊内窥镜1的检测结果的准确性；同时保证了数据从体内到体外传输的高压缩率和实时性。
本领域普通技术人员可以理解实现上述实施例的全部或部分步骤可以通过硬件来完成，也可以通过程序来指令相关的硬件来完成，所述的程序可以存储于一种计算机可以存储介质中，上述提到的存储介质可以是只读存储器，磁盘或光盘等。以上结合附图详细描述了本发明实施例的可选实施方式，但是，本发明实施例并不限于上述实施方式中的具体细节，在本发明实施例的技术构思范围内，可以对本发明实施例的技术方案进行多种简单变型，这些简单变型均属于本发明实施例的保护范围。
另外需要说明的是，在上述具体实施方式中所描述的各个具体技术特征，在不矛盾的情况下，可以通过任何合适的方式进行组合。为了避免不必要的重复，本发明实施例对各种可能的组合方式不再另行说明。
此外，本发明实施例的各种不同的实施方式之间也可以进行任意组合，只要其不违背本发明实施例的思想，其同样应当视为本发明实施例所公开的内容。

Claims (12)

1.一种图像处理系统，其特征在于，包括胶囊内窥镜和终端设备，所述胶囊内窥镜包括图像采集模块和图像处理模块，
所述图像采集模块采集目标区域的图像数据，得到所述RGB图像矩阵S；
所述图像处理模块提取所述RGB图像矩阵S中每个像素点RGBij的生物特征信息，生成生物特征图像矩阵M，其中i∈(1，M)，j∈(1，N)，M和N分别为正整数；
所述图像处理模块分别对所述RGB图像矩阵S和所述生物特征图像矩阵M进行压缩处理，得到压缩后的RGB图像矩阵S′和压缩后的生物特征图像矩阵M′；
所述终端设备分别对所述压缩后的RGB图像矩阵S′和所述压缩后的生物特征图像矩阵M′进行解压缩处理，得到解压后的RGB图像矩阵S″和解压后的生物特征图像矩阵M″；
所述终端设备对所述解压后的RGB图像矩阵S″和所述解压后的生物特征图像矩阵M″进行增强融合处理，得到RGB特征融合图像Starget。
2.根据权利要求1所述的图像处理系统，其特征在于，所述图像处理模块提取所述RGB图像矩阵S中每个像素点RGBij的生物特征信息，生成生物特征图像矩阵M包括：
所述图像处理模块对所述RGB图像矩阵S中每个像素点RGBij采用生物特征指数公式，得到每个所述像素点的生物特征数值，并生成初始生物特征图像矩阵M1；
所述图像处理模块对所述初始生物特征图像矩阵M1执行腐蚀运算，当迭代N次，生物特征形态消失时，得到腐蚀后的图像矩阵M2；
所述图像处理模块对所述初始生物特征图像矩阵M1和所述腐蚀后的图像矩阵M2进行异或运算，得到所述生物特征图像矩阵M。
3.根据权利要求2所述的图像处理系统，其特征在于，所述图像处理模块对所述初始生物特征图像矩阵M1执行腐蚀运算，当迭代N次，生物特征形态消失时，得到腐蚀后的图像矩阵M2之前还包括：
所述图像处理模块过滤所述初始生物特征图像矩阵M1中偏离均值超过第一预设阈值的元素，得到过滤后的初始生物特征图像矩阵M1′。
4.根据权利要求2所述的图像处理系统，其特征在于，所述图像处理模块对所述初始生物特征图像矩阵M1执行腐蚀运算，当迭代N次，生物特征形态消失时，得到腐蚀后的图像矩阵M2之前还包括：
所述图像处理模块对所述初始生物特征图像矩阵M1进行二值化处理，得到二值化后的初始生物特征图像矩阵M1″。
5.根据权利要求1所述的图像处理系统，其特征在于，所述图像处理模块分别对所述RGB图像矩阵S和所述生物特征图像矩阵M进行压缩处理，得到压缩后的RGB图像矩阵S′和压缩后的生物特征图像矩阵M′包括：
所述图像处理模块对所述RGB图像矩阵S进行有损压缩处理，得到所述压缩后的RGB图像矩阵S′；
所述图像处理模块对所述生物特征图像矩阵M进行无损压缩处理，得到所述压缩后的生物特征图像矩阵M′。
6.根据权利要求5所述的图像处理系统，其特征在于，所述图像处理模块对所述生物特征图像矩阵M进行无损压缩处理，得到所述压缩后的生物特征图像矩阵M′包括：
所述图像处理模块对所述生物特征图像矩阵M进行降维处理，得到所述压缩后的生物特征图像矩阵M′，所述压缩后的生物特征图像矩阵M′包括S子矩阵S*，V子矩阵V*和D子矩阵D*。
7.根据权利要求6所述的图像处理系统，其特征在于，所述胶囊内窥镜还包括射频模块，所述终端设备分别对所述压缩后的RGB图像矩阵S′和所述压缩后的生物特征图像矩阵M′进行解压缩处理，得到解压后的RGB图像矩阵S″和解压后的生物特征图像矩阵M″之前还包括：
所述图像处理模块将所述压缩后的RGB图像矩阵S′、所述S子矩阵S*、所述V子矩阵V*和所述D子矩阵D*合成数据包；
所述射频模块将所述数据包发送到体外；
所述终端设备接收所述数据包。
8.根据权利要求6所述的图像处理系统，其特征在于，所述终端设备分别对所述压缩后的RGB图像矩阵S′和所述压缩后的生物特征图像矩阵M′进行解压缩处理，得到解压后的RGB图像矩阵S″和解压后的生物特征图像矩阵M″包括：
所述终端设备对所述压缩后的RGB图像矩阵S′进行解压缩处理，得到所述解压后的RGB图像矩阵S″；
所述终端设备对所述S子矩阵S*，所述V子矩阵V*和所述D子矩阵D*进行矩阵乘法运算，得到所述解压后的生物特征图像矩阵M″。
9.根据权利要求8所述的图像处理系统，其特征在于，所述终端设备对所述解压后的RGB图像矩阵S″和所述解压后的生物特征图像矩阵M″进行增强融合处理，得到RGB特征融合图像Starget包括：
所述终端设备将所述解压后的RGB图像S″转换为HSV图像N″，获取所述HSV图像N″中Hchannel、Schannel、Vchannel通道数据，得到H通道数据H″、S通道数据S″、V通道数据V″；
所述终端设备对所述V通道数据V″和所述解压后的生物特征图像矩阵M″进行增强融合处理，得到增强融合后的矩阵Venhance；
所述终端设备将所述H通道数据H″、所述S通道数据S″和所述矩阵Venhance转换到RGB颜色空间，得到所述RGB特征融合图像Starget。
10.一种胶囊内窥镜，其特征在于，包括图像采集模块、图像处理模块和射频模块，
所述图像采集模块采集目标区域的图像数据，得到所述RGB图像矩阵S；
所述图像处理模块提取所述RGB图像矩阵S中每个像素点RGBij的生物特征信息，生成生物特征图像矩阵M，其中i∈(1，M)，j∈(1，N)，M和N分别为正整数；
所述图像处理模块分别对所述RGB图像矩阵S和所述生物特征图像矩阵M进行压缩处理，得到压缩后的RGB图像矩阵S′和压缩后的生物特征图像矩阵M′；
所述射频模块将所述压缩后的RGB图像矩阵S′和所述压缩后的生物特征图像矩阵M′发送到体外，以使终端设备分别对所述压缩后的RGB图像矩阵S′和所述压缩后的生物特征图像矩阵M′进行解压缩处理，得到解压后的RGB图像矩阵S″和解压后的生物特征图像矩阵M″，以及使所述终端设备对所述解压后的RGB图像矩阵S″和所述解压后的生物特征图像矩阵M″进行增强融合处理，得到RGB特征融合图像Starget。
11.根据权利要求10所述的胶囊内窥镜，其特征在于，所述图像处理模块提取所述RGB图像矩阵S中每个像素点RGBij的生物特征信息，生成生物特征图像矩阵M包括：
所述图像处理模块对所述RGB图像矩阵S中每个像素点RGBij采用生物特征指数公式，得到每个所述像素点的生物特征数值，并生成初始生物特征图像矩阵M1；
所述图像处理模块对所述初始生物特征图像矩阵M1执行腐蚀运算，当迭代N次，生物特征形态消失时，得到腐蚀后的图像矩阵M2；
所述图像处理模块对所述初始生物特征图像矩阵M1和所述腐蚀后的图像矩阵M2进行异或运算，得到所述生物特征图像矩阵M。
12.根据权利要求10所述的胶囊内窥镜，其特征在于，所述图像处理模块对所述生物特征图像矩阵M进行压缩处理，得到压缩后的生物特征图像矩阵M′包括：所述图像处理模块对所述生物特征图像矩阵M进行降维处理，得到所述压缩后的生物特征图像矩阵M′，所述压缩后的生物特征图像矩阵M′包括S子矩阵S*，V子矩阵V*和D子矩阵D*。
CN202111123268.0A 2021-09-24 2021-09-24 图像处理系统及胶囊内窥镜 Pending CN113920039A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202111123268.0A CN113920039A (zh) 2021-09-24 2021-09-24 图像处理系统及胶囊内窥镜

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202111123268.0A CN113920039A (zh) 2021-09-24 2021-09-24 图像处理系统及胶囊内窥镜

Publications (1)

Publication Number Publication Date
CN113920039A true CN113920039A (zh) 2022-01-11

Family

ID=79235749

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202111123268.0A Pending CN113920039A (zh) 2021-09-24 2021-09-24 图像处理系统及胶囊内窥镜

Country Status (1)

Country Link
CN (1) CN113920039A (zh)

Similar Documents

Publication Publication Date Title
Turcza et al. Hardware-efficient low-power image processing system for wireless capsule endoscopy
CN113920041A (zh) 图像处理系统及胶囊内窥镜
CN112532855B (zh) 一种图像处理方法和装置
EP3644599B1 (en) Video processing method and apparatus, electronic device, and storage medium
KR102144577B1 (ko) 최적의 감마보정 기반 저조도 영상 보정방법
CN1586082A (zh) 使用数据压缩的诊断器件
CA3153067C (en) Picture-detecting method and apparatus
US8249368B2 (en) Image processing device
KR102666666B1 (ko) 이미지 부호화 장치 및 이미지 복호화 장치
CN107317967B (zh) 图像处理方法、装置、移动终端及计算机可读存储介质
CN110738655A (zh) 影像报告生成方法、装置、终端及存储介质
Turcza et al. Near-lossless energy-efficient image compression algorithm for wireless capsule endoscopy
US20210390658A1 (en) Image processing apparatus and method
CN111163268A (zh) 一种图像处理方法、装置以及计算机存储介质
CN110855889A (zh) 图像处理方法、装置、图像处理设备及存储介质
CN113096022B (zh) 图像虚化处理方法、装置、存储介质与电子设备
US9860456B1 (en) Bayer-clear image fusion for dual camera
CN113920042B (zh) 图像处理系统及胶囊内窥镜
KR20200056709A (ko) 3차원 영상을 렌더링하는 방법, 상기 방법을 사용하는 영상처리장치, 상기 영상처리장치와 연동하는 촬영장치, 상기 촬영장치의 촬영방법, 및 3차원 영상을 렌더링하는 시스템
WO2019138772A1 (ja) 画像処理装置、プロセッサ装置、画像処理方法、及びプログラム
CN113920039A (zh) 图像处理系统及胶囊内窥镜
CN113470127A (zh) 基于星载云检测的光学图像有效压缩方法
Wu et al. Low-complexity video compression for capsule endoscope based on compressed sensing theory
US20020063899A1 (en) Imaging device connected to processor-based system using high-bandwidth bus
CN112233024A (zh) 基于差异特征色彩映射的中长波双波段红外图像融合方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination