WO2018096771A1 - 撮像システム及び撮像装置 - Google Patents

撮像システム及び撮像装置 Download PDF

Info

Publication number
WO2018096771A1
WO2018096771A1 PCT/JP2017/033718 JP2017033718W WO2018096771A1 WO 2018096771 A1 WO2018096771 A1 WO 2018096771A1 JP 2017033718 W JP2017033718 W JP 2017033718W WO 2018096771 A1 WO2018096771 A1 WO 2018096771A1
Authority
WO
WIPO (PCT)
Prior art keywords
data
image
storage unit
uncompressed data
uncompressed
Prior art date
Application number
PCT/JP2017/033718
Other languages
English (en)
French (fr)
Inventor
白石　裕
智樹 岩崎
山崎　健二
橋本　進
恭輔 水野
洋介 久重路
Original Assignee
オリンパス株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by オリンパス株式会社 filed Critical オリンパス株式会社
Priority to JP2018507740A priority Critical patent/JP6366877B1/ja
Publication of WO2018096771A1 publication Critical patent/WO2018096771A1/ja
Priority to US16/419,088 priority patent/US10694080B2/en

Links

Images

Classifications

    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00002—Operational features of endoscopes
    • A61B1/00004—Operational features of endoscopes characterised by electronic signal processing
    • A61B1/00009—Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope
    • A61B1/000095—Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope for image enhancement
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00002—Operational features of endoscopes
    • A61B1/00011—Operational features of endoscopes characterised by signal transmission
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00002—Operational features of endoscopes
    • A61B1/0002—Operational features of endoscopes provided with data storages
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00064—Constructional details of the endoscope body
    • A61B1/00105—Constructional details of the endoscope body characterised by modular construction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/90—Arrangement of cameras or camera modules, e.g. multiple cameras in TV studios or sports stadiums
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/60—Noise processing, e.g. detecting, correcting, reducing or removing noise
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/60—Noise processing, e.g. detecting, correcting, reducing or removing noise
    • H04N25/63—Noise processing, e.g. detecting, correcting, reducing or removing noise applied to dark current
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/60—Noise processing, e.g. detecting, correcting, reducing or removing noise
    • H04N25/68—Noise processing, e.g. detecting, correcting, reducing or removing noise applied to defects
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/183—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a single remote source
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/04—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances
    • A61B1/045—Control thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression

Definitions

  • the present invention relates to an imaging system and an imaging apparatus.
  • an endoscope system is used to observe an organ of a subject such as a patient.
  • An endoscope system is an endoscope that is an imaging device that is inserted into a body of a subject and images the inside of the subject and outputs a video signal, and a processor that performs predetermined image processing on the video signal output by the endoscope And comprising.
  • Patent Document 1 discloses a configuration in which scope identification information is transferred from a ROM of an endoscope to a CPU of a processor device.
  • the present invention has been made in view of the above, and provides an imaging system and an imaging apparatus that can suppress an increase in data transfer time even if a data volume transferred from the imaging apparatus to a processor increases. For the purpose.
  • an imaging system in an imaging apparatus including an imaging element, and is used for correcting an image captured by the imaging element.
  • a storage unit that stores compressed data obtained by compressing the data capacity of one uncompressed data;
  • a decompression circuit that reads the compressed data from the storage unit and restores the compressed data to the first uncompressed data;
  • an image correction unit that corrects an image captured by the image sensor using the first uncompressed data restored by the restoration circuit.
  • the storage unit stores second uncompressed data different from the first uncompressed data used for correcting an image captured by the imaging element.
  • a decompression selection circuit for reading the compressed data and the second uncompressed data from the storage unit and selectively outputting the compressed data to the decompression circuit.
  • the image correction unit uses the first uncompressed data restored by the restoration circuit and the second uncompressed data read from the storage unit. Then, the image picked up by the image pickup device is corrected.
  • the compressed data may be the first uncompressed data using a relative value or a difference value calculated from a value corresponding to each pixel of the first uncompressed data.
  • the data is compressed data, and the restoration circuit restores the compressed data to an absolute value corresponding to each pixel.
  • the first uncompressed data is a parameter used when different correction is performed for each pixel on all pixels of an image captured by the imaging element. It is characterized by.
  • the first uncompressed data is a parameter for correcting variation in sensitivity of each pixel of the imaging element.
  • an imaging device includes a storage unit that stores compressed data obtained by compressing the data capacity of first uncompressed data used for correcting an image captured by an imaging device, and the imaging device includes: A transfer control circuit that determines a type of the connected processor and controls transfer of the compressed data to the processor.
  • the present invention it is possible to realize an imaging system and an imaging apparatus that can suppress an increase in data transfer time even if the data capacity transferred from the imaging apparatus to the processor increases.
  • FIG. 1 is a schematic diagram showing a configuration of an endoscope system according to an embodiment of the present invention.
  • FIG. 2 is a diagram for explaining data stored in the storage unit illustrated in FIG. 1.
  • FIG. 3 is a schematic diagram showing a configuration of an endoscope system according to Modification 1 of the embodiment of the present invention.
  • FIG. 4 is a schematic diagram illustrating a configuration of an endoscope system according to Modification 2 of the embodiment of the present invention.
  • Embodiments of an imaging system and an imaging apparatus according to the present invention will be described below with reference to the drawings. Note that the present invention is not limited to these embodiments. In the following embodiments, an endoscope system and an endoscope will be described as examples. However, the present invention can be applied to an imaging system and an imaging apparatus in general.
  • FIG. 1 is a schematic diagram showing a configuration of an endoscope system according to an embodiment of the present invention.
  • an endoscope system 1 as an imaging system according to an embodiment includes an endoscope 2 as an imaging device, a processor 3, a light source unit 4, and a display unit 5.
  • the endoscope 2 images a subject to be observed by inserting a flexible tip into the body cavity of the subject and outputs a video signal.
  • the endoscope 2 stores an imaging element 21 that images a subject and outputs a video signal, a control unit 22 that drives the imaging element 21 in accordance with the control of the processor 3, identification information of the endoscope 2, and the like. And a storage unit 23.
  • the image pickup device 21 includes, for example, a CCD (Charge Coupled Device) image sensor or a CMOS (Complementary Metal Oxide Semiconductor) image sensor.
  • the image sensor 21 receives light collected by an objective optical system (not shown), photoelectrically converts it into an electrical signal, and outputs a digital video signal subjected to predetermined signal processing.
  • the control unit 22 is a general-purpose processor such as a CPU (Central Processing Unit), or various arithmetic circuits such as ASIC (Application Specific Integrated Circuit) or FPGA (Field Programmable Gate Array) that perform specific functions such as a specific processor.
  • the control unit 22 controls the image sensor 21 according to a signal for controlling the imaging of the image sensor 21 output from the processor 3.
  • the control unit 22 includes a transfer control circuit 221 that determines the type of the processor 3 to which the endoscope 2 is connected, and controls transfer of compressed data to the processor 3 described later. Specifically, the transfer control circuit 221 transfers the compressed data to the processor 3 when the processor 3 to which the endoscope 2 is connected is a model that can perform image processing using the compressed data.
  • the control unit 22 may be configured by a dedicated device in which an FPGA is combined with a CPU, and a built-in watchdog timer is mounted on the dedicated device in order to detect an abnormality of a program in the device.
  • a double monitoring configuration may be adopted by using a watchdog timer monitoring IC outside the dedicated device. Specifically, the reset monitoring time in the watchdog timer monitoring IC provided outside is set longer than the reset / restart time in the built-in watchdog timer.
  • the storage unit 23 is realized using a ROM (Read Only Memory), a RAM (Random Access Memory), or the like.
  • the storage unit 23 is provided in the endoscope 2 including the image sensor 21.
  • the storage unit 23 stores identification information of the endoscope 2 and data used for correcting an image captured by the image sensor 21.
  • FIG. 2 is a diagram for explaining the data stored in the storage unit shown in FIG.
  • the storage unit 23 stores data A and data B as uncompressed data (second data) among data A, B, and C1 that are uncompressed data used for correcting an image captured by the image sensor 21. (Uncompressed data).
  • the storage unit 23 stores data C2 that is compressed data obtained by compressing the data capacity of the data C1 that is uncompressed data (first uncompressed data).
  • the data compression format is not particularly limited, but the data capacity can be compressed by storing the relative value or difference value calculated from the value corresponding to each pixel of the data C1 in the storage unit 23 as the data C2. it can. Further, data obtained by compressing data C1 by Huffman coding may be stored in the storage unit 23 as data C2.
  • Non-compressed data are parameters used for white defect correction and black defect correction, for example.
  • Data C1 which is uncompressed data, is a parameter used when different correction is performed for each pixel on all pixels of the image captured by the image sensor 21.
  • the data C ⁇ b> 1 is a parameter for correcting variations in sensitivity of each pixel of the image sensor 21 due to the color filter of the Bayer array of the image sensor 21 and the sensitivity of each pixel of the image sensor 21. It should be noted that the parameters are different for each pixel, and the total data capacity can be efficiently compressed by compressing data C1, which is data having a large data capacity as shown in FIG.
  • the processor 3 shown in FIG. 1 performs predetermined image processing on the video signal output from the endoscope 2 and outputs an image signal, and comprehensively controls the operation of the entire endoscope system 1.
  • the processor 3 includes a control unit 31 that controls the operation of the entire endoscope system 1, a storage unit 32 that stores a video signal output from the endoscope 2, and a predetermined image in the video signal output from the endoscope 2. And an image processing unit 33 that performs processing.
  • the control unit 31 includes a general-purpose processor such as a CPU, or a dedicated processor such as various arithmetic circuits that execute specific functions such as an ASIC and an FPGA.
  • the control unit 31 performs drive control of each component, input / output control of information with respect to each component, and the like. Further, the control unit 31 controls imaging of the imaging device 21 of the endoscope 2.
  • the storage unit 32 stores various programs including an operation program for executing the operation method of the endoscope system 1.
  • the operation program can be stored in a computer-readable storage medium such as a hard disk, a flash memory, a CD-ROM, a DVD-ROM, or a flexible disk and widely distributed.
  • the various programs described above can also be obtained by downloading via a communication network.
  • the communication network here is realized by, for example, an existing public line network, a LAN (Local Area Network), a WAN (Wide Area Network) or the like, and may be wired or wireless.
  • the storage unit 32 having the above configuration is realized using a ROM in which various programs and the like are installed in advance, and a RAM that stores calculation parameters and data of each process.
  • the image processing unit 33 is configured by a general-purpose processor such as a CPU, or a dedicated processor such as various arithmetic circuits that execute specific functions such as an ASIC or FPGA.
  • the image processing unit 33 performs image processing such as synchronization processing, white balance (WB) adjustment processing, gain adjustment processing, gamma correction processing, and digital analog (D / A) conversion processing on the digital video signal. Convert to image signal and output.
  • WB white balance
  • D / A digital analog
  • the image processing unit 33 includes a restoration selection circuit 331, a restoration circuit 332, and an image correction unit 333.
  • the restoration selection circuit 331 reads the data C2 that is compressed data and the data A and data B that are non-compressed data from the storage unit 23, and selectively outputs the data C2 that is compressed data to the restoration circuit 332.
  • the restoration circuit 332 reads the data C2 that is the compressed data from the storage unit 23 via the restoration selection circuit 331, and restores the data C2 that is the compressed data to the data C1 that is the uncompressed data. Specifically, the restoration circuit 332 restores, for example, compressed data that is a relative value or a difference value calculated from a value corresponding to each pixel to an absolute value corresponding to each pixel.
  • the image correction unit 333 corrects the image captured by the image sensor 21 using the data C1 that is uncompressed data restored by the restoration circuit 332. Specifically, the image correction unit 333 uses the data C ⁇ b> 1 that is a parameter for correcting variations in sensitivity of each pixel of the image sensor 21 due to the sensitivity of each pixel of the image sensor 21, and uses the data C ⁇ b> 1. Corrects the captured image. In addition, the image correction unit 333 uses the data A and data B, which are uncompressed data read from the storage unit 23, to perform white and black defect correction on the image captured by the image sensor 21.
  • the light source unit 4 is a light source that generates illumination light or excitation light emitted from the distal end of the endoscope 2.
  • the light source unit 4 outputs illumination light or excitation light according to a control signal from the control unit 31.
  • the light source unit 4 includes, for example, a white LED (Light Emitting Diode) that outputs white illumination light.
  • the light source unit 4 may include a special observation light source that outputs special observation light.
  • the display unit 5 has a function of receiving and displaying an image signal generated by the processor 3 from the processor 3 via a video cable.
  • the display unit 5 includes a display such as a liquid crystal or an organic EL (Electro Luminescence).
  • FIG. 3 is a schematic diagram showing a configuration of an endoscope system according to Modification 1 of the embodiment of the present invention.
  • the image processing unit 33A of the processor 3A does not have a restoration selection circuit.
  • the intermediate device 6A disposed between the endoscope 2 and the processor 3A has a restoration selection circuit 61A.
  • the processor may not have the restoration selection circuit.
  • FIG. 4 is a schematic diagram illustrating a configuration of an endoscope system according to Modification 2 of the embodiment of the present invention.
  • the image processing unit 33B of the processor 3B does not have a restoration selection circuit and a restoration circuit.
  • the intermediate device 6B disposed between the endoscope 2 and the processor 3B includes a restoration selection circuit 61B and a restoration circuit 62B.
  • the processor may not have the restoration selection circuit and the restoration circuit.
  • an endoscope system to which an endoscope with a flexible insertion portion is applied as an imaging system has been described.
  • an endoscope to which an endoscope with a rigid insertion portion is applied is applied.
  • a mirror system may be used.
  • the imaging device is not limited to an endoscope provided with an imaging element at the distal end of the insertion section, and may be configured to connect an eyepiece camera head of an optical endoscope such as a fiberscope or an optical scope.
  • the imaging system is not limited to a medical endoscope system, and may be applied to an industrial endoscope system.

Abstract

撮像システムは、撮像素子を備える撮像装置内に設けられており、前記撮像素子が撮像した画像の補正に用いる第１の非圧縮データのデータ容量を圧縮した圧縮データを記憶している記憶部と、前記記憶部から前記圧縮データを読み出し、前記圧縮データを前記第１の非圧縮データに復元する復元回路と、前記復元回路が復元した前記第１の非圧縮データを用いて、前記撮像素子が撮像した画像を補正する画像補正部と、を備える。これにより、撮像装置からプロセッサへ転送するデータ容量が増大してもデータ転送時間が増大することを抑制することができる撮像システムを提供する。

Description

撮像システム及び撮像装置
　本発明は、撮像システム及び撮像装置に関する。
　従来、医療分野においては、患者等の被検体の臓器を観察する際に内視鏡システムが用いられている。内視鏡システムは、被検体の体内に挿入され被検体内を撮像して映像信号を出力する撮像装置である内視鏡と、内視鏡が出力した映像信号に所定の画像処理を行うプロセッサと、を備える。
　内視鏡システムでは、内視鏡をプロセッサに接続すると、内視鏡固有の情報を内視鏡からプロセッサに転送する。例えば、特許文献１には、内視鏡のＲＯＭからプロセッサ装置のＣＰＵにスコープ識別情報を転送する構成が開示されている。
特開２００９－２１３７４２号公報
　ところで、内視鏡が撮像した画像の補正に用いるデータを内視鏡からプロセッサに転送する場合がある。近年、内視鏡システムの高画質化に伴い、内視鏡が撮像した画像の補正に用いるデータのデータ容量も増大している。その結果、内視鏡からプロセッサに転送するデータ容量が増大し、内視鏡からプロセッサへのデータ転送にかかる時間（データ転送時間）が増大してしまう。データ転送時間が増大すると、転送期間中は内視鏡を用いた観察を行うことができないので、転送するデータ容量が増大してもデータ転送時間が増大することを抑制することが求められている。
　本発明は、上記に鑑みてなされたものであって、撮像装置からプロセッサへ転送するデータ容量が増大してもデータ転送時間が増大することを抑制することができる撮像システム及び撮像装置を提供することを目的とする。
　上述した課題を解決し、目的を達成するために、本発明の一態様に係る撮像システムは、撮像素子を備える撮像装置内に設けられており、前記撮像素子が撮像した画像の補正に用いる第１の非圧縮データのデータ容量を圧縮した圧縮データを記憶している記憶部と、前記記憶部から前記圧縮データを読み出し、前記圧縮データを前記第１の非圧縮データに復元する復元回路と、前記復元回路が復元した前記第１の非圧縮データを用いて、前記撮像素子が撮像した画像を補正する画像補正部と、を備えることを特徴とする。
　また、本発明の一態様に係る撮像システムは、前記記憶部は、前記撮像素子が撮像した画像の補正に用いる前記第１の非圧縮データとは異なる第２の非圧縮データを記憶しており、前記記憶部から前記圧縮データと前記第２の非圧縮データとを読み出し、前記圧縮データを選択的に前記復元回路に出力する復元選択回路を備えることを特徴とする。
　また、本発明の一態様に係る撮像システムは、前記画像補正部は、前記復元回路が復元した前記第１の非圧縮データと、前記記憶部から読み出した前記第２の非圧縮データとを用いて、前記撮像素子が撮像した画像を補正することを特徴とする。
　また、本発明の一態様に係る撮像システムは、前記圧縮データは、前記第１の非圧縮データの各画素に対応する値から算出した相対値又は差分値を用いて、前記第１の非圧縮データを圧縮したデータであり、前記復元回路は、前記圧縮データを各画素に対応する絶対値に復元することを特徴とする。
　また、本発明の一態様に係る撮像システムは、前記第１の非圧縮データは、前記撮像素子が撮像した画像の全画素に対して画素毎にそれぞれ異なる補正を行う場合に用いるパラメータであることを特徴とする。
　また、本発明の一態様に係る撮像システムは、前記第１の非圧縮データは、前記撮像素子の画素毎の感度のばらつきをそれぞれ補正するためのパラメータであることを特徴とする。
　また、本発明の一態様に係る撮像装置は、撮像素子が撮像した画像の補正に用いる第１の非圧縮データのデータ容量を圧縮した圧縮データを記憶している記憶部と、当該撮像装置が接続されたプロセッサの種別を判定し、前記圧縮データの前記プロセッサへの転送を制御する転送制御回路と、を備えることを特徴とする。
　本発明によれば、撮像装置からプロセッサへ転送するデータ容量が増大してもデータ転送時間が増大することを抑制することができる撮像システム及び撮像装置を実現することができる。
図１は、本発明の実施の形態に係る内視鏡システムの構成を示す模式図である。 図２は、図１に示す記憶部に記憶されているデータを説明するための図である。 図３は、本発明の実施の形態の変形例１に係る内視鏡システムの構成を示す模式図である。 図４は、本発明の実施の形態の変形例２に係る内視鏡システムの構成を示す模式図である。
　以下に、図面を参照して本発明に係る撮像システム及び撮像装置の実施の形態を説明する。なお、これらの実施の形態により本発明が限定されるものではない。以下の実施の形態においては、内視鏡システム及び内視鏡を例示して説明するが、本発明は、撮像システム及び撮像装置一般に適用することができる。
　また、図面の記載において、同一又は対応する要素には適宜同一の符号を付している。また、図面は模式的なものであり、各要素の寸法の関係、各要素の比率などは、現実と異なる場合があることに留意する必要がある。図面の相互間においても、互いの寸法の関係や比率が異なる部分が含まれている場合がある。
（実施の形態）
　図１は、本発明の実施の形態に係る内視鏡システムの構成を示す模式図である。図１に示すように、実施の形態に係る撮像システムとしての内視鏡システム１は、撮像装置としての内視鏡２と、プロセッサ３と、光源部４と、表示部５と、を備える。
　〔内視鏡の構成〕
　内視鏡２は、被検体の体腔内に軟性の先端部を挿入することによって観察対象である被検体を撮像して映像信号を出力する。内視鏡２は、被検体を撮像して映像信号を出力する撮像素子２１と、プロセッサ３の制御に応じて撮像素子２１を駆動させる制御部２２と、内視鏡２の識別情報等を記憶する記憶部２３と、を備える。
　撮像素子２１は、例えばＣＣＤ（Ｃｈａｒｇｅ　Ｃｏｕｐｌｅｄ　Ｄｅｖｉｃｅ）イメージセンサやＣＭＯＳ（Ｃｏｍｐｌｅｍｅｎｔａｒｙ　Ｍｅｔａｌ　Ｏｘｉｄｅ　Ｓｅｍｉｃｏｎｄｕｃｔｏｒ）イメージセンサで構成される。撮像素子２１は、不図示の対物光学系が集光した光を受光して電気信号に光電変換して所定の信号処理を施したデジタルの映像信号を出力する。
　制御部２２は、ＣＰＵ（Ｃｅｎｔｒａｌ　Ｐｒｏｃｅｓｓｉｎｇ　Ｕｎｉｔ）等の汎用プロセッサ、又はＡＳＩＣ（Ａｐｐｌｉｃａｔｉｏｎ　Ｓｐｅｃｉｆｉｃ　Ｉｎｔｅｇｒａｔｅｄ　Ｃｉｒｃｕｉｔ）やＦＰＧＡ（Ｆｉｅｌｄ　Ｐｒｏｇｒａｍｍａｂｌｅ　Ｇａｔｅ　Ａｒｒａｙ）等の特定の機能を実行する各種演算回路等の専用プロセッサによって構成される。制御部２２は、プロセッサ３から出力された撮像素子２１の撮像を制御する信号に応じて撮像素子２１を制御する。制御部２２は、内視鏡２が接続されたプロセッサ３の種別を判定し、後述する圧縮データのプロセッサ３への転送を制御する転送制御回路２２１を有する。具体的には、転送制御回路２２１は、内視鏡２が接続されたプロセッサ３が、圧縮データを用いて画像処理を行うことができる機種である場合には、プロセッサ３に圧縮データを転送し、内視鏡２が接続されたプロセッサ３が、圧縮データを用いて画像処理を行うことができない機種である場合には、プロセッサ３に圧縮データを転送しない。なお、制御部２２は、ＣＰＵにＦＰＧＡを組み合わせた専用デバイスで構成されてもよく、本デバイス内におけるプログラムの異常検知を行うために専用デバイスに対して内蔵型のウォッチドックタイマを搭載し、プログラムの暴走を監視する際に、専用デバイスの外部にウォッチドックタイマ監視用のＩＣを用いて２重の監視構成をとってもよい。具体的には、外部に設けられたウォッチドックタイマ監視用のＩＣにおけるリセット監視時間は、内蔵型のウォッチドックタイマにおけるリセット・再起動時間よりも長く設定する構成をとる。
　記憶部２３は、ＲＯＭ（Ｒｅａｄ　Ｏｎｌｙ　Ｍｅｍｏｒｙ）、ＲＡＭ（Ｒａｎｄｏｍ　Ａｃｃｅｓｓ　Ｍｅｍｏｒｙ）等を用いて実現される。記憶部２３は、撮像素子２１を備える内視鏡２内に設けられている。記憶部２３は、内視鏡２の識別情報を記憶するとともに、撮像素子２１が撮像した画像の補正に用いるデータを記憶している。
　図２は、図１に示す記憶部に記憶されているデータを説明するための図である。図２に示すように、記憶部２３は、撮像素子２１が撮像した画像の補正に用いる非圧縮データであるデータＡ、Ｂ、Ｃ１のうち、データＡ及びデータＢを非圧縮データ（第２の非圧縮データ）として記憶している。さらに、記憶部２３は、非圧縮データ（第１の非圧縮データ）であるデータＣ１のデータ容量を圧縮した圧縮データであるデータＣ２を記憶している。なお、データ圧縮の形式は、特に限定されないが、データＣ１の各画素に対応する値から算出した相対値又は差分値をデータＣ２として記憶部２３に記憶させることにより、データ容量を圧縮することができる。また、データＣ１をハフマン符号化により圧縮したデータをデータＣ２として記憶部２３に記憶させてもよい。
　非圧縮データ（データＡ及びデータＢ）は、例えば白傷補正や黒傷補正に用いるパラメータである。
　非圧縮データであるデータＣ１は、撮像素子２１が撮像した画像の全画素に対して画素毎にそれぞれ異なる補正を行う場合に用いるパラメータである。具体的には、データＣ１は、撮像素子２１のベイヤー配列のカラーフィルタや撮像素子２１の各画素の感度に起因する撮像素子２１の画素毎の感度のばらつきをそれぞれ補正するためのパラメータである。なお、画素毎に異なるパラメータであり、図２に示すようにデータ容量が大きいデータであるデータＣ１を圧縮することにより、全データ容量を効率的に圧縮することができる。
　〔プロセッサの構成〕
　図１に示すプロセッサ３は、内視鏡２が出力した映像信号に所定の画像処理を施して画像信号を出力するとともに、内視鏡システム１全体の動作を統括的に制御する。プロセッサ３は、内視鏡システム１全体の動作を制御する制御部３１と、内視鏡２が出力した映像信号を記憶する記憶部３２と、内視鏡２が出力した映像信号に所定の画像処理を施す画像処理部３３と、を備える。
　制御部３１は、ＣＰＵ等の汎用プロセッサ、又はＡＳＩＣやＦＰＧＡ等の特定の機能を実行する各種演算回路等の専用プロセッサによって構成される。制御部３１は、各構成部の駆動制御、及び各構成部に対する情報の入出力制御などを行う。また、制御部３１は、内視鏡２の撮像素子２１の撮像を制御する。
　記憶部３２は、内視鏡システム１の作動方法を実行するための作動プログラムを含む各種プログラムを記憶する。作動プログラムは、ハードディスク、フラッシュメモリ、ＣＤ－ＲＯＭ、ＤＶＤ－ＲＯＭ、フレキシブルディスク等のコンピュータ読み取り可能な記憶媒体に記憶して広く流通させることも可能である。なお、上述した各種プログラムは、通信ネットワークを介してダウンロードすることによって取得することも可能である。ここでいう通信ネットワークは、例えば既存の公衆回線網、ＬＡＮ（Ｌｏｃａｌ　Ａｒｅａ　Ｎｅｔｗｏｒｋ）、ＷＡＮ（Ｗｉｄｅ　Ａｒｅａ　Ｎｅｔｗｏｒｋ）等によって実現されるものであり、有線、無線を問わない。
　以上の構成を有する記憶部３２は、各種プログラム等が予めインストールされたＲＯＭ、及び各処理の演算パラメータやデータ等を記憶するＲＡＭ等を用いて実現される。
　画像処理部３３は、ＣＰＵ等の汎用プロセッサ、又はＡＳＩＣやＦＰＧＡ等の特定の機能を実行する各種演算回路等の専用プロセッサによって構成される。画像処理部３３は、デジタルの映像信号に対して、同時化処理、ホワイトバランス（ＷＢ）調整処理、ゲイン調整処理、ガンマ補正処理、デジタルアナログ（Ｄ／Ａ）変換処理等の画像処理を行って画像信号に変換して出力する。
　画像処理部３３は、復元選択回路３３１と、復元回路３３２と、画像補正部３３３と、を有する。
　復元選択回路３３１は、記憶部２３から圧縮データであるデータＣ２と非圧縮データであるデータＡ及びデータＢとを読み出し、圧縮データであるデータＣ２を選択的に復元回路３３２に出力する。
　復元回路３３２は、記憶部２３から復元選択回路３３１を介して圧縮データであるデータＣ２を読み出し、圧縮データであるデータＣ２を非圧縮データであるデータＣ１に復元する。具体的には、復元回路３３２は、例えば各画素に対応する値から算出した相対値又は差分値である圧縮データを、各画素に対応する絶対値に復元する。
　画像補正部３３３は、復元回路３３２が復元した非圧縮データであるデータＣ１を用いて、撮像素子２１が撮像した画像を補正する。具体的には、画像補正部３３３は、撮像素子２１の各画素の感度に起因する撮像素子２１の画素毎の感度のばらつきをそれぞれ補正するためのパラメータであるデータＣ１を用いて、撮像素子２１が撮像した画像を補正する。また、画像補正部３３３は、記憶部２３から読み出した非圧縮データであるデータＡ及びデータＢを用いて、撮像素子２１が撮像した画像に白傷補正や黒傷補正を施す。
　〔その他の構成〕
　光源部４は、内視鏡２の先端から出射する照明光又は励起光を発生する光源である。光源部４は、制御部３１からの制御信号に応じて照明光又は励起光を出力する。光源部４は、例えば、白色照明光を出力する白色ＬＥＤ（Ｌｉｇｈｔ　Ｅｍｉｔｔｉｎｇ　Ｄｉｏｄｅ）を備える。光源部４は、特殊観察光を出力する特殊観察光源を備えていてもよい。
　表示部５は、映像ケーブルを介してプロセッサ３が生成した画像信号をプロセッサ３から受信して表示する機能を有する。表示部５は、液晶、有機ＥＬ（Ｅｌｅｃｔｒｏ　Ｌｕｍｉｎｅｓｃｅｎｃｅ）等の表示ディスプレイを有する。
　以上説明したように、本実施の形態に係る内視鏡システム１では、データＣ１が圧縮されているため、内視鏡２からプロセッサ３へ転送するデータのデータ容量の増大を抑制することができ、内視鏡２からプロセッサ３へのデータ転送時間の増大を抑制することができる。
（変形例１）
　図３は、本発明の実施の形態の変形例１に係る内視鏡システムの構成を示す模式図である。図３に示すように、内視鏡システム１Ａにおいて、プロセッサ３Ａの画像処理部３３Ａは、復元選択回路を有しない。一方、内視鏡２とプロセッサ３Ａとの間に配置された中間装置６Ａは、復元選択回路６１Ａを有する。このように、プロセッサが復元選択回路を有しない構成であってもよい。
（変形例２）
　図４は、本発明の実施の形態の変形例２に係る内視鏡システムの構成を示す模式図である。図４に示すように、内視鏡システム１Ｂにおいて、プロセッサ３Ｂの画像処理部３３Ｂは、復元選択回路及び復元回路を有しない。一方、内視鏡２とプロセッサ３Ｂとの間に配置された中間装置６Ｂは、復元選択回路６１Ｂ及び復元回路６２Ｂを有する。このように、プロセッサが復元選択回路及び復元回路を有しない構成であってもよい。
　なお、実施の形態では、一部のデータ（データＣ１）のみを圧縮する構成を説明したが、全ての非圧縮データを圧縮して記憶部２３に記憶させてもよい。その場合、復元選択回路は不要となり、復元回路が記憶部２３から読み出した全ての圧縮データを非圧縮データに復元する。
　また、実施の形態では、撮像システムとして、挿入部が軟性である内視鏡が適用される内視鏡システムについて説明したが、もちろん、挿入部が硬性である内視鏡が適用される内視鏡システムでもよい。また、撮像装置として、挿入部先端に撮像素子を設けた内視鏡に限らず、ファイバースコープや光学視管などの光学式内視鏡の接眼部カメラヘッドを接続する構成であってもよい。さらに、撮像システムとして、医療用の内視鏡システムに限らず、工業用の内視鏡システムに適用してもよい。
　さらなる効果や変形例は、当業者によって容易に導き出すことができる。よって、本発明のより広範な態様は、以上のように表しかつ記述した特定の詳細及び代表的な実施の形態に限定されるものではない。従って、添付のクレーム及びその均等物によって定義される総括的な発明の概念の精神又は範囲から逸脱することなく、様々な変更が可能である。
　１、１Ａ、１Ｂ　内視鏡システム
　２　内視鏡
　３、３Ａ、３Ｂ　プロセッサ
　４　光源部
　５　表示部
　６Ａ、６Ｂ　中間装置
　２１　撮像素子
　２２、３１　制御部
　２３、３２　記憶部
　３３、３３Ａ、３３Ｂ　画像処理部
　６１Ａ、６１Ｂ、３３１　復元選択回路
　６２Ｂ、３３２　復元回路
　２２１　転送制御回路
　３３３　画像補正部

Claims (7)

  1. 　撮像素子を備える撮像装置内に設けられており、前記撮像素子が撮像した画像の補正に用いる第１の非圧縮データのデータ容量を圧縮した圧縮データを記憶している記憶部と、
    　前記記憶部から前記圧縮データを読み出し、前記圧縮データを前記第１の非圧縮データに復元する復元回路と、
    　前記復元回路が復元した前記第１の非圧縮データを用いて、前記撮像素子が撮像した画像を補正する画像補正部と、
    　を備えることを特徴とする撮像システム。
  2. 　前記記憶部は、前記撮像素子が撮像した画像の補正に用いる前記第１の非圧縮データとは異なる第２の非圧縮データを記憶しており、
    　前記記憶部から前記圧縮データと前記第２の非圧縮データとを読み出し、前記圧縮データを選択的に前記復元回路に出力する復元選択回路を備えることを特徴とする請求項１に記載の撮像システム。
  3. 　前記画像補正部は、前記復元回路が復元した前記第１の非圧縮データと、前記記憶部から読み出した前記第２の非圧縮データとを用いて、前記撮像素子が撮像した画像を補正することを特徴とする請求項２に記載の撮像システム。
  4. 　前記圧縮データは、前記第１の非圧縮データの各画素に対応する値から算出した相対値又は差分値を用いて、前記第１の非圧縮データを圧縮したデータであり、
    　前記復元回路は、前記圧縮データを各画素に対応する絶対値に復元することを特徴とする請求項１～３のいずれか１つに記載の撮像システム。
  5. 　前記第１の非圧縮データは、前記撮像素子が撮像した画像の全画素に対して画素毎にそれぞれ異なる補正を行う場合に用いるパラメータであることを特徴とする請求項１～４のいずれか１つに記載の撮像システム。
  6. 　前記第１の非圧縮データは、前記撮像素子の画素毎の感度のばらつきをそれぞれ補正するためのパラメータであることを特徴とする請求項１～５のいずれか１つに記載の撮像システム。
  7. 　撮像素子が撮像した画像の補正に用いる第１の非圧縮データのデータ容量を圧縮した圧縮データを記憶している記憶部と、
    　当該撮像装置が接続されたプロセッサの種別を判定し、前記圧縮データの前記プロセッサへの転送を制御する転送制御回路と、
    　を備えることを特徴とする撮像装置。
PCT/JP2017/033718 2016-11-25 2017-09-19 撮像システム及び撮像装置 WO2018096771A1 (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2018507740A JP6366877B1 (ja) 2016-11-25 2017-09-19 内視鏡システム
US16/419,088 US10694080B2 (en) 2016-11-25 2019-05-22 Endoscope system

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2016228649 2016-11-25
JP2016-228649 2016-11-25

Related Child Applications (1)

Application Number Title Priority Date Filing Date
US16/419,088 Continuation US10694080B2 (en) 2016-11-25 2019-05-22 Endoscope system

Publications (1)

Publication Number Publication Date
WO2018096771A1 true WO2018096771A1 (ja) 2018-05-31

Family

ID=62195265

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2017/033718 WO2018096771A1 (ja) 2016-11-25 2017-09-19 撮像システム及び撮像装置

Country Status (3)

Country Link
US (1) US10694080B2 (ja)
JP (1) JP6366877B1 (ja)
WO (1) WO2018096771A1 (ja)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2021023680A (ja) * 2019-08-07 2021-02-22 ソニー・オリンパスメディカルソリューションズ株式会社 信号処理デバイス

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2013078591A (ja) * 2012-11-21 2013-05-02 Toshiba Corp 撮像装置、撮像装置の作動方法及び内視鏡装置
WO2013061819A1 (ja) * 2011-10-27 2013-05-02 オリンパスメディカルシステムズ株式会社 内視鏡システム

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4009560B2 (ja) * 2003-06-19 2007-11-14 オリンパス株式会社 内視鏡装置及び信号処理装置
JP2009213742A (ja) 2008-03-12 2009-09-24 Fujinon Corp 内視鏡用光源装置
JP5079576B2 (ja) * 2008-04-02 2012-11-21 富士フイルム株式会社 電子内視鏡システム
JP5449816B2 (ja) * 2009-03-26 2014-03-19 オリンパス株式会社 画像処理装置、画像処理プログラムおよび画像処理装置の作動方法
JP6423172B2 (ja) * 2014-05-22 2018-11-14 オリンパス株式会社 無線内視鏡システム、表示装置、及びプログラム
JP2018019191A (ja) * 2016-07-27 2018-02-01 ソニーセミコンダクタソリューションズ株式会社 固体撮像素子、撮像装置、および、固体撮像素子の制御方法
JP7012549B2 (ja) * 2018-02-07 2022-01-28 オリンパス株式会社 内視鏡装置、内視鏡装置の制御方法、内視鏡装置の制御プログラム、および記録媒体

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2013061819A1 (ja) * 2011-10-27 2013-05-02 オリンパスメディカルシステムズ株式会社 内視鏡システム
JP2013078591A (ja) * 2012-11-21 2013-05-02 Toshiba Corp 撮像装置、撮像装置の作動方法及び内視鏡装置

Also Published As

Publication number Publication date
US20190273846A1 (en) 2019-09-05
JP6366877B1 (ja) 2018-08-01
JPWO2018096771A1 (ja) 2018-11-29
US10694080B2 (en) 2020-06-23

Similar Documents

Publication Publication Date Title
JP4869149B2 (ja) 画像データ圧縮装置、画像データ圧縮方法およびプログラム
JP6109456B1 (ja) 画像処理装置および撮像システム
JP6378846B2 (ja) 画像処理装置
US8823832B2 (en) Imaging apparatus
JP5963990B2 (ja) 医療用システム、その画像処理設定方法、及び画像処理装置
JP5221722B2 (ja) 撮像装置及び内視鏡装置
JP6366877B1 (ja) 内視鏡システム
JP6337228B2 (ja) 内視鏡
JP2009225851A (ja) 内視鏡のプロセッサ装置
US10841550B2 (en) Imaging apparatus and method of calculating white balance gain
US9895047B2 (en) Image pickup apparatus
JP2010130289A (ja) 固体撮像装置、半導体集積回路および欠陥画素補正方法
JP6242552B1 (ja) 画像処理装置
JP6790111B2 (ja) 内視鏡装置
JP2013062713A (ja) 撮像装置および撮像システム
JP2008219738A (ja) 撮像装置
KR102138331B1 (ko) 영상 처리 장치, 영상 처리 방법, 및 촬영 장치
WO2017130752A1 (ja) 撮像装置及び処理装置
JP4498253B2 (ja) 画像処理装置
US20200322564A1 (en) Image processing apparatus and image processing method
JP2020145606A (ja) 撮像装置およびその制御方法
WO2017145813A1 (ja) 撮像システム、撮像装置および処理装置
JP2010273189A (ja) 撮像装置
JP2019154628A (ja) 内視鏡、内視鏡システム、温度検出方法およびプログラム
JP2017028549A (ja) 撮像装置及び撮像方法

Legal Events

Date Code Title Description
ENP Entry into the national phase

Ref document number: 2018507740

Country of ref document: JP

Kind code of ref document: A

121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 17873581

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 17873581

Country of ref document: EP

Kind code of ref document: A1