JP7081501B2 - 制御装置、制御システム、および制御方法 - Google Patents

制御装置、制御システム、および制御方法 Download PDF

Info

Publication number
JP7081501B2
JP7081501B2 JP2018560325A JP2018560325A JP7081501B2 JP 7081501 B2 JP7081501 B2 JP 7081501B2 JP 2018560325 A JP2018560325 A JP 2018560325A JP 2018560325 A JP2018560325 A JP 2018560325A JP 7081501 B2 JP7081501 B2 JP 7081501B2
Authority
JP
Japan
Prior art keywords
ratio
bit assignment
imaging
unit
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2018560325A
Other languages
English (en)
Other versions
JPWO2018128010A1 (ja
Inventor
健太 山口
大介 菊地
寿一 白木
真人 山根
憲治 池田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Sony Group Corp
Original Assignee
Sony Corp
Sony Group Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp, Sony Group Corp filed Critical Sony Corp
Publication of JPWO2018128010A1 publication Critical patent/JPWO2018128010A1/ja
Application granted granted Critical
Publication of JP7081501B2 publication Critical patent/JP7081501B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00002—Operational features of endoscopes
    • A61B1/00004—Operational features of endoscopes characterised by electronic signal processing
    • A61B1/00009—Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope
    • A61B1/000095—Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope for image enhancement
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/04—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances
    • A61B1/045—Control thereof
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/06—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements
    • A61B1/0638—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements providing two or more wavelengths
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/06—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements
    • A61B1/0655—Control therefor
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B23/00—Telescopes, e.g. binoculars; Periscopes; Instruments for viewing the inside of hollow bodies; Viewfinders; Optical aiming or sighting devices
    • G02B23/24—Instruments or systems for viewing the inside of hollow bodies, e.g. fibrescopes
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/56—Cameras or camera modules comprising electronic image sensors; Control thereof provided with illuminating means
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/66—Remote control of cameras or camera parts, e.g. by remote control devices
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70—Circuitry for compensating brightness variation in the scene
    • H04N23/71—Circuitry for evaluating the brightness variation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70—Circuitry for compensating brightness variation in the scene
    • H04N23/74—Circuitry for compensating brightness variation in the scene by influencing the scene brightness using illuminating means
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80—Camera processing pipelines; Components thereof
    • H04N23/84—Camera processing pipelines; Components thereof for processing colour signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/64—Circuits for processing colour signals
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/04—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances
    • A61B1/043—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances for fluorescence imaging
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/50—Constructional details
    • H04N23/555—Constructional details for picking-up images in sites, inaccessible due to their dimensions or hazardous conditions, e.g. endoscopes or borescopes

Landscapes

  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Surgery (AREA)
  • Physics & Mathematics (AREA)
  • Signal Processing (AREA)
  • Optics & Photonics (AREA)
  • Multimedia (AREA)
  • Biomedical Technology (AREA)
  • General Health & Medical Sciences (AREA)
  • Radiology & Medical Imaging (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Biophysics (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Medical Informatics (AREA)
  • Molecular Biology (AREA)
  • Animal Behavior & Ethology (AREA)
  • Pathology (AREA)
  • Public Health (AREA)
  • Veterinary Medicine (AREA)
  • Astronomy & Astrophysics (AREA)
  • General Physics & Mathematics (AREA)
  • Endoscopes (AREA)
  • Instruments For Viewing The Inside Of Hollow Bodies (AREA)
  • Studio Devices (AREA)

Description

本開示は、制御装置、制御システム、および制御方法に関する。
近年、撮像された生体画像に対し画像処理を施す種々の装置が普及している。また、処理後の生体画像の伝送に係る技術も多く提案されている。例えば、特許文献１には、出力装置との通信状況に基づいて、生体画像の伝送に係る伝送量を制限する技術が開示されている。
国際公開第２０１３／０６９６９１号
しかし、特許文献１に記載の技術は、伝送量を低下させることで通信状況を改善、または維持することを可能とする技術である。このため、特許文献１に記載の技術では、生体画像の画質を高く保つことが困難である。また、生体画像の撮像は、種々の撮像条件のもとで行われるが、生体画像の一般的な伝送規格は、上記のような撮像条件や出力装置の特性に適しているとは言い難い。
そこで、本開示では、撮像条件や出力装置の特性に適した生体画像の伝送を実現することが可能な、新規かつ改良された制御装置、制御システム、および制御方法を提案する。
本開示によれば、撮像条件に基づいて、生体画像の伝送に係るビットアサインの第１の比率を算出する比率計算部と、前記第１の比率に基づいて、前記ビットアサインを決定するビットアサイン決定部と、を備える、制御装置が提供される。
また、本開示によれば、対象物を撮像する撮像部、を備える、撮像装置と、前記対象物に係る撮像条件に基づいて、生体画像の伝送に係るビットアサインの第１の比率を算出する比率計算部、前記第１の比率に基づいて、前記ビットアサインを決定するビットアサイン決定部、前記撮像部による撮像画像と前記ビットアサインに基づく画像処理を行い、前記生体画像を生成する画像処理部、を備える、制御装置と、前記ビットアサインに基づいて、前記生体画像に係る出力を行う出力部、を備える出力装置と、を含む、制御システムが提供される。
また、本開示によれば、プロセッサが、撮像条件に基づいて、生体画像の伝送に係るビットアサインに係る第１の比率を算出することと、前記第１の比率に基づいて、前記ビットアサインを決定することと、を含む、制御方法が提供される。
以上説明したように本開示によれば、撮像条件や出力装置の特性に適した生体画像の伝送を実現することが可能となる。
なお、上記の効果は必ずしも限定的なものではなく、上記の効果とともに、または上記の効果に代えて、本明細書に示されたいずれかの効果、または本明細書から把握され得る他の効果が奏されてもよい。
本開示の一実施形態に係る制御装置によるビットアサインの変換について説明するための図である。 同実施形態に係る制御システムの基本構成を示す図である。 同実施形態に係る制御システムが内視鏡システムとして実現される場合の構成例を示す図である。 同実施形態に係る光源装置の機能ブロック図である。 同実施形態に係る撮像装置の機能ブロック図である。 同実施形態に係る制御装置の機能ブロック図である。 同実施形態に係る出力装置の機能ブロック図である。 同実施形態に係るＲまたはＢに係る成分を使用しない場合の色空間における１平面での色分布を示す図である。 同実施形態に係るある伝送規格ＸとモニターＹとの色域の関係について説明するための図である。 同実施形態の通常光観察に係るビットアサインの具体例について説明するための図である。 同実施形態の狭帯域光観察に係るビットアサインの具体例について説明するための図である。 同実施形態の蛍光観察に係るビットアサインの具体例について説明するための図である。 同実施形態に係る制御装置の動作の流れを示すフローチャートである。 本開示の制御装置に係るハードウェア構成例である。
以下に添付図面を参照しながら、本開示の好適な実施の形態について詳細に説明する。なお、本明細書及び図面において、実質的に同一の機能構成を有する構成要素については、同一の符号を付することにより重複説明を省略する。
なお、説明は以下の順序で行うものとする。
１．実施形態
１．１．実施形態の概要
１．２．制御システム１０００の構成例
１．３．光源装置１０の機能構成例
１．４．撮像装置２０の機能構成例
１．５．制御装置３０の機能構成例
１．６．出力装置４０
１．７．ビットアサインの詳細
１．８．制御装置３０の動作の流れ
２．ハードウェア構成例
３．まとめ
＜１．実施形態＞
＜＜１．１．実施形態の概要＞＞
近年、種々の手術手技や病理診断、科学的な検証実験などにおいて、生体画像の撮像が広く行われている。また、上記のような生体画像を撮像、出力する様々なシステムが提案されている。例えば、一般的な内視鏡システムにおいて、撮像装置により撮像されたＲＡＷ信号は、信号処理装置（Ｃａｍｅｒａ Ｃｏｎｔｒｏｌ Ｕｎｉｔ：ＣＣＵ）により現像処理、高画質処理などが施され、出力装置へと伝送される。
一方、生体画像の撮像は、白色光を用いる通常光観察（Ｗｈｉｔｅ Ｌｉｇｈｔ Ｉｍａｇｉｎｇ：ＷＬＩ）の他、種々の撮像条件のもと行われる。上記のような撮像条件には、例えば、狭帯域光観察（Ｎａｒｒｏｗ Ｂａｎｄ Ｉｍａｇｉｎｇ：ＮＢＩ）や蛍光観察（Ａｕｔｏ Ｆｌｕｏｒｅｓｃｅｎｃｅ Ｉｍａｇｉｎｇ：ＡＦＩ）、赤外光観察（Ｉｎｆｒａ－Ｒｅｄ Ｉｍａｇｉｎｇ：ＩＲＩ）などの特殊光観察が挙げられる。
しかし、例えば、４Ｋ解像度の一般的な伝送規格である３Ｇ－ＳＧＩでは、ＲＧＢまたはＹＣＣによる３ｃｈの信号がそれぞれ１０ビットまたは１２ビットで伝送される。このため、特定の色情報を利用しない特殊光観察においても、通常光観察の場合と同一の伝送規格が用いられることから、伝送される信号の一部に不要な信号が生じることとなる。すなわち、出力装置が、特殊光観察により撮像された生体画像を出力する場合、伝送された信号のすべてを活用可能な通常光観察と比べ、利用できる情報量が劣るため、伝送された信号の情報に対し十分な画質を実現することが困難である。
また、通常光観察により撮像された生体画像の伝送においても、例えば、広く用いられるＩＴＵ－Ｒ ＢＴ．７０９やＩＴＵ－Ｒ ＢＴ．２０２０などの規格では、通常用途の映像に係る伝送が想定されている。このため、生体画像を出力する出力装置が規格よりも広い色域を有する場合であっても、性能を十分に活用することが困難である。
本実施形態に係る制御装置、制御システムおよび制御方法は、上記の点に着目して発想されたものであり、撮像条件や出力装置の特性に対応した生体画像の伝送を実現することが可能である。このために、本実施形態に係る制御装置、制御システムおよび制御方法は、撮像条件や出力特性に基づいて生体画像の伝送に係るビットアサインを決定すること、を特徴の一つとする。
図１は、本実施形態に係る制御装置３０によるビットアサインの変換について説明するための図である。図１の上段には、撮像装置２０から伝送される生体画像のビットアサイン例が示されている。ここで、ビットＢｒ、ビットＢｇ、ビットＢｂは、それぞれ赤（Ｒ）、緑（Ｇ）、青（Ｂ）の信号に対応するビットを示している。すなわち、撮像装置２０により撮像された生体画像は、ＲＧＢの３ｃｈがそれぞれ１０ビットの状態で制御装置３０に伝送される。
この際、本実施形態に係る制御装置３０は、生体画像の撮像条件に基づいてビットアサインを変換し、当該生体画像を出力装置４０に転送することができる。
例えば、狭帯域光観察では、緑および青の波長の光により撮像が行われるため、出力装置４０では赤に係る色情報は不要となる。このため、生体画像が狭帯域光観察により撮像される場合、制御装置３０は、本来、Ｒに割り当てられるビットをＧおよびＢに分配したビットアサイン変換を行ってよい。図１の中段には、生体画像が狭帯域光観察により撮像される場合に制御装置３０が行うビットアサイン変換の例が示されている。図１に示すように、制御装置３０は、Ｇに対応するビットＢｇおよびＢに対応するビットＢｂがそれぞれ１５ビットとなるようにビットアサインを決定してもよい。制御装置３０が有する上記の機能によれば、出力装置４０が、撮像条件に適した高画質な生体画像を出力することが可能となる。
また、本実施形態に係る制御装置３０は、出力装置４０の出力特性に基づいてビットアサインを変換し、当該生体画像を出力装置４０に転送することもできる。
例えば、出力装置４０が規格よりもＲに広い色域を有する場合、制御装置３０は、Ｒに割り当てるビットをＧまたはＢよりも多く設定してもよい。図１の下段には、出力装置４０がＲに広い色域を有する場合に制御装置３０が行うビットアサインの例が示されている。図１に示すように、制御装置３０は、例えば、ビットＢｒ、ビットＢｇ、ビットＢｂがそれぞれ１４ビット、８ビット、８ビットとなるようにビットアサインを決定してもよい。制御装置３０が有する上記の機能によれば、出力装置４０の特性に応じた高画質な生体画像を提供することが可能となる。
以上、本実施形態に係る制御装置３０によるビットアサイン変換の概要について説明した。上述したとおり、本実施形態に係る制御装置３０は、生体画像の撮像条件や出力装置４０の出力特性に応じたビットアサインを決定することができる。本実施形態に係る制御装置３０が有する上記の特徴によれば、撮像条件や出力特性に適した高画質の生体画像を提供することが可能となる。
＜＜１．２．制御システム１０００の構成例＞＞
次に、本実施形態に係る制御システム１０００の基本構成について説明する。図２は、本実施形態に係る制御システム１０００の基本構成を示す図である。図２を参照すると、本実施形態に係る制御システム１０００は、光源装置１０、撮像装置２０、制御装置３０、および出力装置４０を備える。また、上記の各装置は、有線や無線ネットワークを介して、互いに情報通信が行えるように接続される。
（光源装置１０）
本実施形態に係る光源装置１０は、例えば、ＬＥＤ（ｌｉｇｈｔ ｅｍｉｔｔｉｎｇ ｄｉｏｄｅ）などを含む種々の光源から構成される。また、本実施形態に係る光源装置１０は、撮像装置２０による術部などの対象物の撮像において、照射光を供給する機能を有する。なお、本実施形態に係る光源装置１０は、撮像モードに係る情報を撮像装置２０や制御装置３０に送信する機能を有する。ここで、上記の撮像モードとは、通常光観察モード、狭帯域光観察モード、蛍光観察モード、赤外光観察モードなどを含む。
（撮像装置２０）
本実施形態に係る撮像装置２０は、生体画像を撮像するための撮像センサを含んで構成される。本実施形態に係る撮像装置２０は、撮像した生体画像に係るＲＡＷ信号をカメラケーブルや無線通信を介して制御装置３０に送信する。ここで、本実施形態に係る生体画像とは、臨床、医学、および実験用に生物学的見地から取得される画像（Ｂｉｏｌｏｇｉｃａｌ Ｉｍａｇｉｎｇ）を広く含み、撮像対象は人間に限定されない。また、本実施形態に係る撮像装置２０は、上記の撮像モードに係る情報を制御装置３０に送信してもよい。
（制御装置３０）
本実施形態に係る制御装置３０は、撮像装置２０により撮像された生体画像に対する種々の処理を行う信号処理装置である。制御装置３０は、例えば、伝送されたＲＡＷ信号に対する現像処理や高画質化処理を行う。
また、本実施形態に係る制御装置３０は、生体画像の撮像条件や出力装置４０に出力特性に基づいて、生体画像の伝送に係るビットアサインを決定する機能を有する。本実施形態に係る制御装置３０が有する上記の機能については、別途詳細に説明する。また、制御装置３０は、決定したビットアサインに基づいて生体画像を出力装置４０に伝送する。この際、本実施形態に係る制御装置３０は、決定したビットアサインに係る情報を生体画像と共に出力装置４０に送信してよい。
（出力装置４０）
本実施形態に係る出力装置４０は、伝送された生体画像を出力する機能を有する種々の装置により実現され得る。本実施形態に係る出力装置４０は、例えば、各種の表示装置や印刷装置などであってもよい。本実施形態に係る出力装置４０は、制御装置３０から伝送される生体画像を、当該生体画像と共に伝送されるビットアサインに係る情報に基づいて出力することができる。また、出力装置４０は、制御装置３０に対し、色域やガンマカーブなどの出力特性を送信してもよい。
以上、本実施形態に係る制御システムの基本構成について説明した。なお、図２を用いて説明した上記の基本構成はあくまで一例であり、本実施形態に係る制御システムの基本構成は係る例に限定されない。本実施形態に係る制御システムは、上記に示した以外の構成を含んでもよいし、上記に示した各装置が有する機能は、複数台の装置に分散して実現されてもよい。
続いて、本実施形態に係る制御システム１０００が内視鏡システムとして実現される場合の構成例について説明する。図３は、本実施形態に係る制御システム１０００が内視鏡システムとして実現される場合の構成例を示す図である。図３には、術者（図示しない）が、制御システムを用いて、患者ベッド７２上の患者７０に手術を行う際の様子が示されている。図３に示すように、本実施形態に係る制御システム１０００は、撮像装置２０とその他の術具、および手術に用いられる各種の装置が搭載されたカート５８から構成される。
内視鏡手術では、腹壁を切って開腹する代わりに、トロッカ６８ａ～６８ｄと呼ばれる筒状の開孔器具が腹壁に複数穿刺される。そして、トロッカ６８ａ～６８ｄから、内視鏡（腹腔鏡）などの撮像装置２０や、その他の術具が患者７０の体腔内に挿入される。図示する例では、その他の術具として、気腹チューブ６２、エネルギー処置具６４および鉗子６６が、患者７０の体腔内に挿入されている。
なお、エネルギー処置具６４は、高周波電流や超音波振動により、組織の切開及び剥離、又は血管の封止等を行う処置具である。また、本実施形態に係る処置具用装置５０は、組織の焼灼、切開又は血管の封止などのためのエネルギー処置具６４の駆動を制御する。このために、本実施形態に係る処置具用装置５０は、エネルギー処置具６４に高周波電流を出力する高周波出力装置であってよい。
また、本実施形態に係る気腹装置５２は、撮像装置２０の画角の確保、および術者の作業空間の確保するために、気腹チューブ６２を介して体腔内にガスを送り込み、患者７０の体腔を膨らませる装置である。ただし、図示する術具はあくまで一例であり、その他の術具としては、例えば攝子、レトラクタ等、一般的に内視鏡下手術において用いられる各種の術具が用いられてよい。
また、撮像装置２０によって撮像された患者７０の体腔内の生体画像は、出力装置４０により出力される。術者は、出力装置４０により出力される生体画像をリアルタイムで確認しながら、エネルギー処置具６４や鉗子６６を用いて、例えば患部を切除するなどの処置を行うことができる。なお、図示は省略しているが、撮像装置２０、気腹チューブ６２、エネルギー処置具６４および鉗子６６は、手術中に、術者、助手、スコピストまたは種々のロボットなどにより支持されてよい。また、制御装置３０や処置具用装置５０などは、術者や助手などによるフットスイッチ６０の操作に基づいて制御されてもよい。
また、本実施形態に係るレコーダ５４は、手術に関する各種の情報を記録可能な装置である。レコーダ５４は、例えば、患者７０のバイタルサインなどを記録することができる。
以上、本実施形態に係る制御システム１０００が内視鏡システムとして実現される場合を例に説明した。なお、図３を用いて説明した上記の構成はあくまで一例であり、本実施形態に係る制御システムの構成は係る例に限定されない。また、本実施形態に係る制御システムは、内視鏡システムに限定されない。本実施形態に係る制御システムは、生体画像を撮像、出力する種々のシステムに適用され得る。
＜＜１．３．光源装置１０の機能構成例＞＞
次に、本実施形態に係る光源装置１０の機能構成例について説明する。図４は、本実施形態に係る光源装置１０の機能ブロック図である。図４を参照すると、本実施形態に係る光源装置１０は、照射部１１０、照射制御部１２０、および通信部１３０を備える。
（照射部１１０）
照射部１１０は、撮像装置２０による対象物の撮像において、当該対象物に光を照射する機能を有する。本実施形態に係る照射部１１０は、照射制御部１２０による制御に基づき、撮像モードに応じた光源を用いて対象物に光を照射してよい。
（照射制御部１２０）
照射制御部１２０は、術者などのユーザによる入力操作に基づいて、照射部１１０に撮像モードに応じた光の照射を行わせる機能を有する。照射制御部１２０は、例えば、狭帯域光観察においては、照射部１１０に、緑および青の波長による照射を行わせてよい。
（通信部１３０）
通信部１３０は、撮像モードに係る情報を撮像装置２０や制御装置３０に送信する機能を有する。この際、通信部１３０は、上記の撮像モードに係る情報を撮像装置２０と制御装置３０との両方に送信してもよいし、いずれか一方に送信してもよい。撮像モードに係る情報の送信先は、制御システム１０００の仕様や運用などに応じて適宜設計され得る。また、通信部１３０は、例えば、撮像装置２０や制御装置３０との通信が確立されたことに基づいて、撮像モードに係る情報を動的に送信することができる。
以上、本実施形態に係る光源装置１０の機能構成例について説明した。なお、図４を用いた説明した上記の構成はあくまで一例であり、本実施形態に係る光源装置１０の機能構成は係る例に限定されない。光源装置１０は、例えば、ユーザによる入力操作を受け付ける入力部などをさらに備えてもよい。本実施形態に係る光源装置１０の機能構成は、柔軟に変形され得る。
＜＜１．４．撮像装置２０の機能構成例＞＞
次に、本実施形態に係る撮像装置２０の機能構成例について説明する。図５は、本実施形態に係る撮像装置２０の機能ブロック図である。図５を参照すると、本実施形態に係る撮像装置２０は、撮像部２１０、撮像制御部２２０、および通信部２３０を備える。
（撮像部２１０）
撮像部２１０は、対象物の生体画像を撮像する機能を有する。このために、本実施形態に係る撮像部２１０は、例えば、ＣＣＤ（Ｃｈａｒｇｅ Ｃｏｕｐｌｅｄ Ｄｅｖｉｃｅ）やＣＭＯＳ（Ｃｏｍｐｌｅｍｅｎｔａｒｙ ＭＯＳ）などの撮像素子を含んで構成される。
（撮像制御部２２０）
撮像制御部２２０は、撮像部２１０による生体画像の撮像を制御する機能を有する。撮像制御部２２０は、例えば、術者などのユーザによる入力操作に基づいて、撮像部２１０の制御を行ってよい。
（通信部２３０）
通信部２３０は、撮像部２１０により取得された対象物に係るＲＡＷ信号を制御装置３０に伝送する機能を有する。また、本実施形態に係る通信部２３０は、光源装置１０から受信した撮像モードに係る情報を、上記のＲＡＷ信号とともに制御装置３０に送信してもよい。この際、通信部２３０は、制御装置３０との通信が確立されたことに基づいて、撮像モードに係る情報を動的に送信することができる。
以上、本実施形態に係る撮像装置２０の機能構成例について説明した。なお、図５を用いて説明した上記の構成はあくまで一例であり、本実施形態に係る撮像装置２０の機能構成は係る例に限定されない。撮像装置２０は、例えば、ユーザによる入力操作を受け付ける入力部などをさらに備えてもよい。本実施形態に係る撮像装置２０の機能構成は、柔軟に変形され得る。
＜＜１．５．制御装置３０の機能構成例＞＞
（制御装置３０）
次に、本実施形態に係る制御装置３０の機能構成例について説明する。図６は、本実施形態に係る制御装置３０の機能ブロック図である。図６を参照すると、本実施形態に係る制御装置３０は、比率計算部３１０、ビットアサイン決定部３２０、画像処理部３３０、および通信部３４０を備える。
（比率計算部３１０）
比率計算部３１０は、撮像条件に基づいて、生体画像の伝送に係るビットアサインの第１の比率を算出する機能を有する。ここで、本実施形態に係る撮像条件には、上述した撮像モードの外、撮像目的が含まれてよい。上記の撮像目的とは、例えば、手術内容や生体画像の使用用途など、撮像に用いられる光の特性を特定し得る種々の情報が含まれ得る。この際、本実施形態に係る比率計算部３１０は、上記の撮像目的に基づいて撮像モードを推定することができる。
なお、本実施形態に係る比率計算部３１０は、光源装置１０や撮像装置２０から動的に送信される撮像条件や、術者や助手などのユーザにより入力される撮像条件に基づいて、上記の第１の比率を算出してよい。本実施形態に係る比率計算部３１０が有する上記の機能によれば、生体画像の撮像条件に適したビットアサインの比率を算出することが可能となる。
また、本実施形態に係る比率計算部３１０は、生体画像を出力する出力装置４０の出力特性に基づいて、上記のビットアサインに係る第２の比率を算出する機能を有する。ここで、本実施形態に係る出力特性には、出力装置４０が対応する階調や色域、輝度（ｎｉｔ）、ガンマ値などの情報が含まれてよい。また、本実施形態に係る出力特性には、例えば、出力装置４０がモノクロモニタである、などの出力装置４０に関する種々の情報が含まれ得る。
なお、本実施形態に係る比率計算部３１０は、出力装置４０から動的に送信される撮像条件や、術者や助手などのユーザにより入力される出力特性に基づいて、上記の第２の比率を算出してよい。本実施形態に係る比率計算部３１０が有する上記の機能によれば、出力装置４０の出力特性に適したビットアサインの比率を算出することが可能となる。
（ビットアサイン決定部３２０）
ビットアサイン決定部３２０は、比率計算部３１０が算出する第１の比率や第２の比率に基づいて、生体画像の伝送に係るビットアサインを決定する機能を有する。この際、本実施形態に係るビットアサイン決定部３２０は、第１の比率または第２の比率のみに基づいてビットアサインを決定してもよいし、第１の比率と第２の比率との両方に基づいてビットアサインを決定してもよい。
また、本実施形態に係るビットアサイン決定部３２０は、第１の比率と第２の比率との積に基づいて、生体画像の伝送に係るビットアサインを決定することもできる。本実施形態に係る比率計算部３１０およびビットアサイン決定部３２０の機能詳細については別途説明する。
（画像処理部３３０）
画像処理部３３０は、ビットアサイン決定部３２０が決定したビットアサインに基づいて生体画像に係る画像処理を行う機能を有する。具体的には、本実施形態に係る画像処理部３３０は、撮像装置２０から伝送されるＲＡＷ信号を上記のビットアサインに変更する機能を有する。本実施形態に係る画像処理部３３０が有する上記の機能によれば、限られた帯域を有効に活用することができ、伝送規格の制限による画質の劣化を防ぐことが可能となる。
また、本実施形態に係る画像処理部３３０は、出力装置４０のガンマ値に基づいて、生体画像に係る画像処理を行ってもよい。より具体的には、本実施形態に係る画像処理部３３０は、予め取得した出力装置４０のガンマ値に基づくガンマ圧縮を行うことができる。ここで、上記のガンマ圧縮とは、出力装置４０のガンマ値に対する補正（逆ガンマ）であってよい。本実施形態に係る画像処理部３３０が有する上記の機能によれば、予め出力装置４０のガンマ値に適した信号の伝送を実現することが可能となる。
（通信部３４０）
通信部３４０は、画像処理部３３０により処理された生体画像、およびビットアサイン決定部により決定されたビットアサインに係る情報を出力装置４０に伝送する機能を有する。また、本実施形態に係る通信部３４０は、接続される光源装置１０または撮像装置２０から撮像条件に係る情報を受信してよい。また、本実施形態に係る通信部３４０は、接続される出力装置４０から色域やガンマ値などの出力特性に係る情報を受信する。
以上、本実施形態に係る制御装置３０の機能構成例について説明した。なお、図６を用いて説明した上記の構成はあくまで一例であり、本実施形態に係る制御装置３０の機能構成は係る例に限定されない。制御装置３０が有する上記の機能は、複数の装置に分散して実現されてもよい。例えば、比率計算部３１０およびビットアサイン決定部３２０と、画像処理部３３０とは、それぞれ別途の装置の機能として実現することも可能である。また、制御装置３０は、図６を用いて説明した上記以外の構成をさらに備えてもよい。本実施形態に係る制御装置３０の機能構成は、柔軟に変形され得る。
＜＜１．６．出力装置４０＞＞
次に、本実施形態に係る出力装置４０の機能構成例について説明する。図７は、本実施形態に係る出力装置４０の機能ブロック図である。図７を参照すると、本実施形態に係る出力装置４０は、出力部４１０、出力制御部４２０、および通信部４３０を備える。
（出力部４１０）
出力部４１０は、出力制御部４２０による制御に基づいて、生体画像を出力する機能を有する。このために、本実施形態に係る出力部４１０は、液晶ディスプレイ（ＬＣＤ：Ｌｉｑｕｉｄ Ｃｒｙｓｔａｌ Ｄｉｓｐｌａｙ）装置やＯＬＥＤ（Ｏｒｇａｎｉｃ Ｌｉｇｈｔ Ｅｍｉｔｔｉｎｇ Ｄｉｏｄｅ）装置などの表示デバイスを含んで実現され得る。また、本実施形態に係る出力部４１０は、種々の印刷デバイスを含んで構成されてもよい。
（出力制御部４２０）
出力制御部４２０は、出力部４１０に生体画像の出力を行わせる機能を有する。この際、本実施形態に係る出力制御部４２０は、上記の生体画像と共に伝送されるビットアサインに係る情報に基づいて、出力部４１０に適正な階調や色域による出力を行わせることができる。
（通信部４３０）
通信部４３０は、制御装置３０との情報通信を行う機能を有する。具体的には、本実施形態に係る通信部４３０は、制御装置３０から生体画像やビットアサインに係る情報を受信する。また、本実施形態に係る通信部４３０は、制御装置３０に出力特性に係る情報を送信する。この際、通信部４３０は、制御装置３０との通信が確立されたことに基づいて、出力特性に係る情報を動的に制御装置３０に送信することができる。
以上、本実施形態に係る出力装置４０の機能構成例について説明した。なお、図７を用いて説明した上記の構成はあくまで一例であり、本実施形態に係る出力装置４０の機能構成は係る例に限定されない。本実施形態に係る出力装置４０の機能構成は、柔軟に変形され得る。
＜＜１．７．ビットアサインの詳細＞＞
次に、本実施形態に係るビットアサインの詳細について具体例を挙げながら説明する。
（第１の比率の算出）
まず、本実施形態に係る第１の比率の算出について詳細に説明する。上述したとおり、本実施形態に係る比率計算部３１０は、撮像モードなどを含む撮像条件に基づいて、生体画像の伝送に係るビットアサインの第１の比率を算出することができる。例えば、内視鏡観察などにおける生体画像の撮像では、治療や観察などの目的応じて出力すべき色域が限定される場合が多い。このため、上記のような生体画像を伝送する場合、必ずしもビット表現が３ｃｈ均等に制限されなくてもよい。
図８は、ＲまたはＢに係る成分を使用しない場合の色空間における１平面での色分布を示す図である。図８に示すように、ＲまたはＢに係る成分を使用しない場合、色空間上の座標は２次元で表現することが可能である。このため、ある平面上において、色空間上の座標は、図８に示す実線Ｌ１のような１次式で表すことができる。例えば、狭帯域光観察では、色情報のうちＲに係る成分を使用しないため、本実施形態に係る比率計算部３１０は、ＧやＢに係る成分の比率を高めることで信号の量子化精度を向上させることができる。
また、例えば、蛍光観察において撮像された生体画像を伝送する場合、色情報は出力に用いられないため、帯域すべてを輝度成分に割り当てることが望ましい。この際、本実施形態に係る比率計算部３１０は、輝度成分に多く偏りを持たせた第１の比率を算出することができる。
なお、この際、本実施形態に係る比率計算部３１０は、光源装置１０や撮像装置２０から動的に送信される撮像モードの情報に基づいて第１の比率を算出してもよいし、術者などのユーザにより入力、設定される撮像モードの情報に基づいて第１の比率を算出してもよい。
また、上述したとおり、本実施形態に係る比率計算部３１０は、手術内容や生体画像の使用用途などの撮像目的に基づいて撮像モードを推定し、第１の比率を算出してもよい。比率計算部３１０は、例えば、術者などのユーザにより入力、設定される撮像目的や外部装置から送信される撮像目的に基づいて撮像モードを推定することができる。一例としては、本実施形態に係る比率計算部３１０は、手術内容が、がんなどの早期病変の観察であることに基づいて、撮像モードが狭帯域光観察モードであることを推定してもよい。
また、比率計算部３１０は、撮像された生体画像が最終的に重畳加工されることに基づいて、各生体画像の特性に応じた第１の比率を算出することも可能である。この場合、比率計算部３１０は、例えば、術者などのユーザにより入力される使用用途に基づいて第１の比率を算出してもよい。
また、比率計算部３１０は、撮像装置２０から取得した色差や、信号成分の最小値、最大値などの情報に基づいて、第１の比率を算出することも可能である。比率計算部３１０は、例えば、上記のような情報から不要と推定される信号成分を取り除くことで、より重要な情報に焦点を当てた第１の比率を算出してよい。
（第２の比率の算出）
次に、本実施形態に係る第１の比率の算出について詳細に説明する。本実施形態に係る比率計算部３１０は、出力装置４０の出力特性に基づいて、生体画像の伝送に係るビットアサインの第２の比率を算出することができる。例えば、内視鏡システムなどで用いられる医療用モニターは、一般のモニターと比較して高い色再現性や色域を有する場合が多い。しかし、実際には、上述したような伝送規格に係る制限のため、性能を十分に活用できない場合も見受けられる。
図９は、ある伝送規格ＸとモニターＹとの色域の関係について説明するための図である。図９には、伝送規格Ｘがサポートする色域Ｃ１と、モニターＹが表現可能な色域Ｃ２とが示されている。ここで、図９に示すように、モニターＹが表現できるＲの色域が規格ＸのＲの色域よりも広い場合であっても、モニターＹ側で規格Ｘが識別されるため、規格Ｘ以上の色域はモニターＹでは表現されない。また、モニターによっては、モニター側で信号のスケーリングを行うことも想定されるが、この場合はコントラスト分解能が低下することとなる。
このため、本実施形態に係る比率計算部３１０は、出力装置４０が表現可能な色域と伝送規格がサポートする色域とに基づいて、生体画像の伝送に係る第２の比率を算出してよい。具体的には、図９に示す一例の場合、本実施形態に係る比率計算部３１０は、Ｒに係る比率を高めることで、出力装置４０の特性に応じた色域をカバーすることができる。
この際、本実施形態に係る比率計算部３１０は、出力装置４０から動的に送信される色域の情報に基づいて第２の比率を算出してもよいし、術者などのユーザにより入力、設定される出力装置４０の情報に基づいて、出力装置４０の色域に基づく第２の比率を算出してもよい。
（通常光観察に係るビットアサインの具体例）
次に、撮像モードが通常光観察モードである場合におけるビットアサインの具体例について述べる。図１０は、通常光観察に係るビットアサインの具体例について説明するための図である。
通常光観察では、光源装置１０から照射される白色光により生体画像の撮像が行われるため、出力装置４０では、赤、緑、青のすべての色情報を用いた出力が行われる。このため、本実施形態に係る比率計算部３１０は、撮像モードが通常光観察モードである場合、図１０に示すように、赤、緑、青に係る信号成分が均等となるように、第１の比率を算出してよい。具体的には、本実施形態に係る比率計算部３１０は、Ｒ：Ｇ：Ｂ＝１．０：１．０：１．０、となるように第１の比率を算出することができる。
一方、本実施形態に係る比率計算部３１０は、通常光観察の場合であっても、出力装置４０の色域に応じた第２の比率を算出することができる。例えば、伝送規格がサポートする色域および出力装置４０が表現可能な色域が、それぞれ図９に示す色域Ｃ１および色域Ｃ２である場合、比率計算部３１０は、Ｒに係る比率を高めた第２の比率を算出してよい。比率計算部３１０は、例えば、図１０に示すように、第２の比率を、Ｒ：Ｇ：Ｂ＝１．２：０．９：０．９、としてもよい。
この際、本実施形態に係るビットアサイン決定部３２０は、比率計算部３１０が算出した第１の比率および第２の比率に基づいて、生体画像の伝送に係るビットアサインを決定することができる。ビットアサイン決定部３２０は、例えば、第１の比率と第２の比率との積に基づいて、上記のビットアサインを決定してもよい。
また、この際、本実施形態に係るビットアサイン決定部３２０は、撮像装置２０から伝送されるＲＧＢに基づくビットアサインを、ＹＣｂＣｒに基づくビットアサインに変換してもよい。ビットアサイン決定部３２０は、予め設定された伝送規格ごとの変換式に基づいて上記の変換を行ってもよい。図１０に示す一例の場合、本実施形態に係るビットアサイン決定部３２０は、第１の比率、第２の比率、および上記の変換式に基づいて、ビットアサインを、Ｙ：Ｃｂ：Ｃｒ＝０．９：０．９：１．２、と決定している。ここで、図１０におけるビットＢｙは、輝度（Ｙ）信号に対応するビットを示し、ビットＢｃｂは、青の色差（Ｃｂ）信号に対応するビットを示している。また、図１０におけるビットＢｃｒは、赤の色差（Ｃｒ）信号に対応するビットを示している。
（狭帯域光観察に係るビットアサインの具体例）
次に、撮像モードが狭帯域光観察モードである場合におけるビットアサインの具体例について述べる。図１１は、狭帯域光観察に係るビットアサインの具体例について説明するための図である。
上述したとおり、狭帯域光観察では、光源装置１０から照射される緑および青の波長の光により生体画像の撮像が行われるため、出力装置４０では、赤に係る色情報が不要となる。このため、本実施形態に係る比率計算部３１０は、撮像モードが狭帯域光観察モードである場合、撮像時の照射光に係る色情報の信号成分の比率が増加するように第１の比率を算出してよい。具体的には、本実施形態に係る比率計算部３１０は、Ｒ：Ｇ：Ｂ＝０．０：１．５：１．５、となるように第１の比率を算出することができる。
また、本実施形態に係る比率計算部３１０は、狭帯域光観察の場合であっても、出力装置４０の色域に応じた第２の比率を算出してよい。図１１に示す一例の場合、比率計算部３１０は、図１０を用いて説明した場合と同様に、第２の比率を、Ｒ：Ｇ：Ｂ＝１．２：０．９：０．９、としてもよい。
また、本実施形態に係るビットアサイン決定部３２０は、通常光観察の場合と同様に、上記のように算出された第１の比率および第２の比率に基づいて、生体画像の伝送に係るビットアサインを決定する。図１１に示す一例の場合、本実施形態に係るビットアサイン決定部３２０は、第１の比率、第２の比率に基づいて、ビットアサインを、Ｙ：Ｃｂ：Ｃｒ＝１．５：１．５：０．０、と決定している。
（蛍光観察に係るビットアサインの具体例）
次に、撮像モードが蛍光観察モードである場合におけるビットアサインの具体例について述べる。図１２は、蛍光観察に係るビットアサインの具体例について説明するための図である。
上述したとおり、蛍光観察において撮像された生体画像を伝送する場合、出力装置４０による出力では色情報が用いられないため、帯域すべてを輝度成分に割り当てることが望ましい。このため、本実施形態に係る比率計算部３１０は、撮像モードが蛍光観察モードである場合、輝度情報に係る信号成分の比率が増加するように第１の比率を算出してよい。具体的には、本実施形態に係る比率計算部３１０は、Ｒ：Ｇ：Ｂ＝３．０：０．０：０．０、となるように第１の比率を算出することができる。なお、蛍光観察では、Ｒ＝Ｇ＝Ｂ、となるため、３．０とするのは、Ｒ、Ｇ、Ｂのいずれでもよい。
また、本実施形態に係る比率計算部３１０は、蛍光観察の場合であっても、出力装置４０の色域に応じた第２の比率を算出してよい。図１２に示す一例の場合、比率計算部３１０は、図１０を用いて説明した場合と同様に、第２の比率を、Ｒ：Ｇ：Ｂ＝１．２：０．９：０．９、としてもよい。
また、本実施形態に係るビットアサイン決定部３２０は、通常光観察や狭帯域の場合と同様に、上記のように算出された第１の比率および第２の比率に基づいて、生体画像の伝送に係るビットアサインを決定する。図１２に示す一例の場合、本実施形態に係るビットアサイン決定部３２０は、第１の比率、第２の比率に基づいて、ビットアサインを、Ｙ：Ｃｂ：Ｃｒ＝３．０：０．０：０．０、と決定している。
＜＜１．８．制御装置３０の動作の流れ＞＞
次に、本実施形態に係る制御装置３０の動作の流れについて詳細に説明する。図１３は、本実施形態に係る制御装置３０の動作の流れを示すフローチャートである。
図１３を参照すると、まず、制御装置３０の比率計算部３１０は、撮像モードの認識を行う（Ｓ１１０１）。この際、比率計算部３１０は、光源装置１０や撮像装置２０から動的に送信される情報に基づいて撮像モードを認識してもよいし、術者などのユーザが入力、設定する撮像目的にも基づいて撮像モードを推定してもよい。
ここで、比率計算部３１０が撮像モードを認識できない場合（Ｓ１１０１：ＮＯ）、制御装置３０は、ビットアサインの決定に係る処理（Ｓ１１０２～Ｓ１１０５）をスキップする。
一方、比率計算部３１０が撮像モードを認識した場合（Ｓ１１０１：ＹＥＳ）、続いて、比率計算部３１０は、ステップＳ１１０１で認識した撮像モードに基づいて、ビットアサインに係る第１の比率を算出する（Ｓ１１０２）。
続いて、比率計算部３１０は、出力装置４０の出力特性を認識する（Ｓ１１０３）。この際、比率計算部３１０は、出力装置４０から動的に送信される情報に基づいて色域などの出力特性を認識してもよいし、術者などのユーザが入力、設定する情報にも基づいて出力装置４０の出力特性を認識してもよい。
ここで、比率計算部３１０が出力装置４０の出力特性を認識できない場合（Ｓ１１０３：ＮＯ）、制御装置３０は、第２の比率の算出に係る処理（Ｓ１１０４）をスキップする。
一方、比率計算部３１０が出力装置４０の出力特性を認識した場合（Ｓ１１０３：ＹＥＳ）、続いて、比率計算部３１０は、ステップＳ１１０３で認識した出力特性に基づいて、ビットアサインに係る第２の比率を算出する（Ｓ１１０４）。
次に、ビットアサイン決定部３２０は、ステップＳ１１０２において算出された第１の比率とステップＳ１１０４において算出された第２の比率とに基づいて、生体画像の伝送に係るビットアサインを決定する（Ｓ１１０５）。なお、この際、ステップＳ１１０４において第２の比率が算出されていない場合においては、ビットアサイン決定部３２０は、第１の比率のみに基づいて、上記のビットアサインを決定してもよい。
次に、画像処理部３３０は、ステップＳ１１０４で決定されたビットアサインに基づいて、生体画像に係る画像処理を行う（Ｓ１１０６）。また、画像処理部３３０は、ステップＳ１１０３で認識されたガンマ値に基づくガンマ圧縮などを行ってもよい。
次に、通信部３４０は、ステップＳ１１０６において処理された生体画像とステップＳ１１０５において決定されたビットアサインに係る情報とを出力装置４０に伝送する（Ｓ１１０７）。本実施形態に係る出力装置４０は、ステップＳ１１０６で伝送される生体画像とビットアサインに係る情報とに基づいて、撮像モードや出力特性に応じた生体画像を出力することができる。
＜２．ハードウェア構成例＞
次に、本開示に係る制御装置３０のハードウェア構成例について説明する。図１４は、本開示に係る制御装置３０のハードウェア構成例を示すブロック図である。図１４を参照すると、制御装置３０は、ＦＰＧＡボード８１００、ＣＰＵ８２００、ＧＰＵボード８３００、メモリ８４００、ＩＯコントローラ８５００、記録媒体８６００、およびインタフェース８７００を備える。また、ＦＰＧＡボード８１００、ＣＰＵ８２００、ＧＰＵボード８３００、およびＩＯコントローラ８５００は、バス８８００により接続される。
（ＦＰＧＡボード８１００）
ＦＰＧＡボード８１００は、例えば、ＦＰＧＡ８１１０、撮像装置２０から入力画像信号が入力される入力インタフェース８１２０、出力装置４０に出力画像信号を出力する出力インタフェース８１３０などを含んで構成される。また、ＦＰＧＡ８１１０は、ＰＣＩｅインタフェース８１１１によりバス８８００と接続する。
（ＣＰＵ８２００）
ＣＰＵ８２００は、プロセッサ８２１０を含んで構成され、例えば、演算処理装置又は制御装置として機能する。ＣＰＵ８２００は、例えば、メモリ８４００に格納されるデータの読み出しや書き込みを制御してよい。また、ＣＰＵ８２００は、ＧＰＵボード８３００の処理能力や処理内容に応じてメモリ８４００に記憶される画像データの分割を行ってもよい。この場合、ＣＰＵ８２００には、分割した画像データに対するＧＰＵボード８３００の処理結果が入力される。
（ＧＰＵボード８３００）
ＧＰＵボード８３００は、例えば、関連するソフトウェアなどの各種ソフトウェアを実行し、種々の処理を行う。ＧＰＵボード８３００は、ＧＰＵ（Ｇｒａｐｈｉｃｓ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）８３１０およびＤＲＡＭ（Ｄｙｎａｍｉｃ Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）８３２０を含んで構成される。また、ＧＰＵ８３１２は、バスと接続するＰＣＩｅインタフェース８３１１とコア８３１２とを含む。なお、図１４では、制御装置３０が２枚のＧＰＵボード８３００ａおよび８３００ｂを備える場合の一例を示しているが、制御装置３０は、３枚以上のＧＰＵ８３００を備えてもよい。一方、ＣＰＵ８２００がＧＰＵ８３１２と同等の機能を有する場合には、制御装置３０は、ＧＰＵボード８３００を備えなくてもよい。
（メモリ８４００）
メモリ８４００には、例えば、撮像装置２０からの入力画像信号に対応するデータや、出力装置４０への出力画像信号に対応するデータなど、種々のデータが記憶される。また、メモリ８４００には、各種のプログラムや演算に用いるデータ等が格納される。
（ＩＯコントローラ８５００）
ＩＯコントローラ８５００は、例えば、ＣＰＵ８２００と、記録媒体８６００およびインタフェース８７００との間の信号伝達を制御する機能を有する。
（記録媒体８６００）
記録媒体８６００は、記憶部として機能し、画像データや各種アプリケーションなど様々なデータを記録する。記録媒体８６００としては、例えば、ソリッドステートドライブなどが挙げられる。また、記録媒体８６００は、制御装置３０から着脱可能であってもよい。
（インタフェース８７００）
インタフェース８７００としては、例えば、ＵＳＢ（Ｕｎｉｖｅｒｓａｌ Ｓｅｒｉａｌ Ｂｕｓ）端子および処理回路や、ＬＡＮ（Ｌｏｃａｌ Ａｒｅａ Ｎｅｔｗｏｒｋ）端子および送受信回路などが挙げられる。
以上、本開示に係る制御装置３０のハードウェア構成例について説明した。なお、図１４を用いて説明した上記の構成はあくまで一例であり、構成要素の一部は省略されてもよい。また、制御装置３０は、上記で示した以外の構成要素をさらに備えてもよい。
＜３．まとめ＞
以上説明したように、本開示に係る制御装置３０は、生体画像の撮像条件に基づき、生体画像の伝送に係るビットアサインの第１の比率を算出することができる。また、本開示に係る制御装置３０は、出力装置４０の出力特性に基づいて、上記のビットアサインに係る第２の比率を算出することができる。また、本開示に係る制御装置３０は、上記の第１の比率および第２の比率に基づいて、生体画像の伝送に係るビットアサインを決定することができる。係る構成によれば、撮像条件や出力装置の特性に適した生体画像の伝送を実現することが可能となる。
以上、添付図面を参照しながら本開示の好適な実施形態について詳細に説明したが、本開示の技術的範囲はかかる例に限定されない。本開示の技術分野における通常の知識を有する者であれば、請求の範囲に記載された技術的思想の範疇内において、各種の変更例または修正例に想到し得ることは明らかであり、これらについても、当然に本開示の技術的範囲に属するものと了解される。
また、本明細書の制御装置３０の処理における各ステップは、必ずしもフローチャートとして記載された順序に沿って時系列に処理する必要はない。例えば、制御装置３０の処理における各ステップは、フローチャートとして記載した順序と異なる順序で処理されても、並列的に処理されてもよい。
また、本明細書に記載された効果は、あくまで説明的または例示的なものであって限定的ではない。つまり、本開示に係る技術は、上記の効果とともに、または上記の効果に代えて、本明細書の記載から当業者には明らかな他の効果を奏しうる。
なお、以下のような構成も本開示の技術的範囲に属する。
（１）
撮像条件に基づいて、生体画像の伝送に係るビットアサインの第１の比率を算出する比率計算部と、
前記第１の比率に基づいて、前記ビットアサインを決定するビットアサイン決定部と、
を備える、
制御装置。
（２）
前記撮像条件は、撮像モードを含む、
前記（１）に記載の制御装置。
（３）
前記撮像モードは、通常光観察モード、狭帯域光観察モード、蛍光観察モードを含む、
前記（２）に記載の制御装置。
（４）
前記撮像条件は、撮像目的を含み、
前記比率計算部は、前記撮像目的に基づいて前記撮像モードを推定する、
前記（２）または（３）に記載の制御装置。
（５）
前記比率計算部は、前記撮像モードが狭帯域光観察モードである場合、撮像時の照射光に係る色情報の信号成分の比率が増加するように前記第１の比率を算出する、
前記（２）～（４）のいずれかに記載の制御装置。
（６）
前記比率計算部は、前記撮像モードが蛍光観察モードである場合、輝度情報に係る信号成分の比率が増加するように前記第１の比率を算出する、
前記（２）～（５）のいずれかに記載の制御装置。
（７）
前記比率計算部は、前記生体画像を出力する出力装置の出力特性に基づいて、前記ビットアサインに係る第２の比率を算出し、
前記ビットアサイン決定部は、前記第２の比率にさらに基づいて、前記ビットアサインを決定する、
前記（１）～（６）のいずれかに記載の制御装置。
（８）
前記出力特性は、色域を含み、
前記比率計算部は、前記色域に基づいて前記第２の比率を算出する、
前記（７）に記載の制御装置。
（９）
前記比率計算部は、前記生体画像の伝送に係る伝送規格の色域にさらに基づいて、前期第２の比率を算出する、
前記（８）に記載の制御装置。
（１０）
前記ビットアサイン決定部は、前記第１の比率と前記第２の比率との積に基づいて、前記ビットアサインを決定する、
前記（７）～（９）のいずれかに記載の制御装置。
（１１）
前記ビットアサインに基づいて前記生体画像に係る画像処理を行う画像処理部、
をさらに備える、
前記（１）～（１０）のいずれかに記載の制御装置。
（１２）
前記画像処理部は、前記生体画像を出力する出力装置のガンマ値にさらに基づいて、前記生体画像に係る画像処理を行う、
前記（１１）に記載の制御装置。
（１３）
前記生体画像および前記ビットアサインに係る情報を伝送する通信部、
をさらに備える、
前記（１）～（１２）のいずれかに記載の制御装置。
（１４）
前記通信部は、接続される光源装置または撮像装置から前記撮像条件に係る情報を受信する、
前記（１３）に記載の制御装置。
（１５）
前記通信部は、接続される出力装置から当該出力装置に係る出力特性に係る情報を受信する、
前記（１３）または（１４）に記載の制御装置。
（１６）
対象物を撮像する撮像部、
を備える、撮像装置と、
前記対象物に係る撮像条件に基づいて、生体画像の伝送に係るビットアサインの第１の比率を算出する比率計算部、
前記第１の比率に基づいて、前記ビットアサインを決定するビットアサイン決定部、
前記撮像部による撮像画像と前記ビットアサインに基づく画像処理を行い、前記生体画像を生成する画像処理部、
を備える、制御装置と、
前記ビットアサインに基づいて、前記生体画像に係る出力を行う出力部、
を備える出力装置と、
を含む、
制御システム。
（１７）
前記撮像部による前記対象物の撮像において、前記対象物に光を照射する照射部、
を備える、光源装置、
をさらに含む、
前記（１６）に記載の制御システム。
（１８）
前記撮像条件は、前記対象物の撮像に係る撮像モードを含み、
前記制御装置は、
前記撮像装置または前記光源装置から前記撮像モードに係る情報を受信する通信部、
をさらに備え、
前記比率計算部は、前記撮像モードに基づいて、前記第１の比率を算出する、
前記（１７）に記載の制御システム。
（１９）
前記通信部は、前記出力装置の出力特性に係る情報を受信し、
前記比率計算部は、前記出力特性に基づいて、前記ビットアサインに係る第２の比率を算出し、
前記ビットアサイン決定部は、前記第２の比率にさらに基づいて、前記ビットアサインを決定する、
前記（１８）に記載の制御システム。
（２０）
プロセッサが、撮像条件に基づいて、生体画像の伝送に係るビットアサインに係る第１の比率を算出することと、
前記第１の比率に基づいて、前記ビットアサインを決定することと、
を含む、
制御方法。
（２１）
コンピュータを、
撮像条件に基づいて、生体画像の伝送に係るビットアサインの第１の比率を算出する比率計算部と、
前記第１の比率に基づいて、前記ビットアサインを決定するビットアサイン決定部と、
を備える、
制御装置、
として機能させるためのプログラム。
１０ 光源装置
１１０ 照射部
１２０ 照射制御部
１３０ 通信部
２０ 撮像装置
２１０ 撮像部
２２０ 撮像制御部
２３０ 通信部
３０ 制御装置
３１０ 比率計算部
３２０ ビットアサイン決定部
３３０ 画像処理部
３４０ 通信部
４０ 出力装置
４１０ 出力部
４２０ 出力制御部
４３０ 通信部
１０００ 制御システム

Claims (20)

  1. 撮像条件に基づいて、生体画像の伝送に係るビットアサインの第１の比率を算出する比率計算部と、
    前記第１の比率に基づいて、前記ビットアサインを決定するビットアサイン決定部と、
    を備え、
    前記比率計算部は、前記生体画像を出力する出力装置の出力特性に基づいて、前記ビットアサインに係る第２の比率を算出し、
    前記ビットアサイン決定部は、前記第２の比率にさらに基づいて、前記ビットアサインを決定する、
    制御装置。
  2. 前記出力特性は、色域を含み、
    前記比率計算部は、前記色域に基づいて前記第２の比率を算出する、
    請求項１に記載の制御装置。
  3. 前記比率計算部は、前記生体画像の伝送に係る伝送規格の色域にさらに基づいて、前記第２の比率を算出する、
    請求項２に記載の制御装置。
  4. 前記ビットアサイン決定部は、前記第１の比率と前記第２の比率との積に基づいて、前記ビットアサインを決定する、
    請求項１から３のいずれか一項に記載の制御装置。
  5. 前記生体画像および前記ビットアサインに係る情報を伝送する通信部、
    をさらに備える、
    請求項１から４のいずれか一項に記載の制御装置。
  6. 前記通信部は、接続される出力装置から当該出力装置に係る出力特性に係る情報を受信する、
    請求項５に記載の制御装置。
  7. 撮像条件に基づいて、生体画像の伝送に係るビットアサインの第１の比率を算出する比率計算部と、
    前記第１の比率に基づいて、前記ビットアサインを決定するビットアサイン決定部と、
    前記生体画像および前記ビットアサインに係る情報を伝送する通信部と、
    を備え、
    前記通信部は、接続される出力装置から当該出力装置に係る出力特性に係る情報を受信する、
    制御装置。
  8. 前記通信部は、接続される光源装置または撮像装置から前記撮像条件に係る情報を受信する、
    請求項５から７のいずれか一項に記載の制御装置。
  9. 前記撮像条件は、撮像モードを含む、
    請求項１から８のいずれか一項に記載の制御装置。
  10. 前記撮像モードは、通常光観察モード、狭帯域光観察モード、蛍光観察モードを含む、
    請求項９に記載の制御装置。
  11. 前記撮像条件は、撮像目的を含み、
    前記比率計算部は、前記撮像目的に基づいて前記撮像モードを推定する、
    請求項９または１０に記載の制御装置。
  12. 前記比率計算部は、前記撮像モードが狭帯域光観察モードである場合、撮像時の照射光に係る色情報の信号成分の比率が増加するように前記第１の比率を算出する、
    請求項９から１１のいずれか一項に記載の制御装置。
  13. 前記比率計算部は、前記撮像モードが蛍光観察モードである場合、輝度情報に係る信号成分の比率が増加するように前記第１の比率を算出する、
    請求項９から１２のいずれか一項に記載の制御装置。
  14. 前記ビットアサインに基づいて前記生体画像に係る画像処理を行う画像処理部、
    をさらに備える、
    請求項１から１３のいずれか一項に記載の制御装置。
  15. 前記画像処理部は、前記生体画像を出力する出力装置のガンマ値にさらに基づいて、前記生体画像に係る画像処理を行う、
    請求項１４に記載の制御装置。
  16. 対象物を撮像する撮像部、
    を備える、撮像装置と、
    前記対象物に係る撮像条件に基づいて、生体画像の伝送に係るビットアサインの第１の比率を算出する比率計算部、
    前記第１の比率に基づいて、前記ビットアサインを決定するビットアサイン決定部、
    前記撮像部による撮像画像と前記ビットアサインに基づく画像処理を行い、前記生体画像を生成する画像処理部、
    を備える、制御装置と、
    前記ビットアサインに基づいて、前記生体画像に係る出力を行う出力部、
    を備える出力装置と、
    を含み、
    前記比率計算部は、前記生体画像を出力する前記出力装置の出力特性に基づいて、前記ビットアサインに係る第２の比率を算出し、
    前記ビットアサイン決定部は、前記第２の比率にさらに基づいて、前記ビットアサインを決定する、
    制御システム。
  17. 対象物を撮像する撮像部、
    を備える、撮像装置と、
    前記対象物に係る撮像条件に基づいて、生体画像の伝送に係るビットアサインの第１の比率を算出する比率計算部、
    前記第１の比率に基づいて、前記ビットアサインを決定するビットアサイン決定部、
    前記生体画像および前記ビットアサインに係る情報を伝送する通信部、
    前記撮像部による撮像画像と前記ビットアサインに基づく画像処理を行い、前記生体画像を生成する画像処理部、
    を備える、制御装置と、
    前記ビットアサインに基づいて、前記生体画像に係る出力を行う出力部、
    を備える出力装置と、
    を含み、
    前記通信部は、接続される前記出力装置から当該出力装置に係る出力特性に係る情報を受信する、
    制御システム。
  18. 対象物を撮像する撮像部、
    を備える、撮像装置と、
    前記対象物に係る撮像条件に基づいて、生体画像の伝送に係るビットアサインの第１の比率を算出する比率計算部、
    前記第１の比率に基づいて、前記ビットアサインを決定するビットアサイン決定部、
    前記撮像部による撮像画像と前記ビットアサインに基づく画像処理を行い、前記生体画像を生成する画像処理部、
    を備える、制御装置と、
    前記ビットアサインに基づいて、前記生体画像に係る出力を行う出力部、
    を備える、出力装置と、
    前記撮像部による前記対象物の撮像において、前記対象物に光を照射する照射部、
    を備える、光源装置と、
    を含み、
    前記撮像条件は、前記対象物の撮像に係る撮像モードを含み、
    前記制御装置は、
    前記撮像装置または前記光源装置から前記撮像モードに係る情報を受信する通信部、
    をさらに備え、
    前記比率計算部は、前記撮像モードに基づいて、前記第１の比率を算出し、
    前記通信部は、前記出力装置の出力特性に係る情報を受信し、
    前記比率計算部は、前記出力特性に基づいて、前記ビットアサインに係る第２の比率を算出し、
    前記ビットアサイン決定部は、前記第２の比率にさらに基づいて、前記ビットアサインを決定する、
    制御システム。
  19. プロセッサが、撮像条件に基づいて、生体画像の伝送に係るビットアサインに係る第１の比率を算出することと、
    前記生体画像を出力する出力装置の出力特性に基づいて、前記ビットアサインに係る第２の比率を算出することと、
    前記第１の比率および前記第２の比率に基づいて、前記ビットアサインを決定することと、
    を含む、
    制御方法。
  20. プロセッサが、撮像条件に基づいて、生体画像の伝送に係るビットアサインに係る第１の比率を算出することと、
    前記第１の比率に基づいて、前記ビットアサインを決定することと、
    前記生体画像および前記ビットアサインに係る情報を伝送することと、
    接続される出力装置から当該出力装置に係る出力特性に係る情報を受信することと、
    を含む、
    制御方法。
JP2018560325A 2017-01-06 2017-11-15 制御装置、制御システム、および制御方法 Active JP7081501B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2017000879 2017-01-06
JP2017000879 2017-01-06
PCT/JP2017/041097 WO2018128010A1 (ja) 2017-01-06 2017-11-15 制御装置、制御システム、および制御方法

Publications (2)

Publication Number Publication Date
JPWO2018128010A1 JPWO2018128010A1 (ja) 2019-11-21
JP7081501B2 true JP7081501B2 (ja) 2022-06-07

Family

ID=62791032

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2018560325A Active JP7081501B2 (ja) 2017-01-06 2017-11-15 制御装置、制御システム、および制御方法

Country Status (3)

Country Link
US (1) US11245884B2 (ja)
JP (1) JP7081501B2 (ja)
WO (1) WO2018128010A1 (ja)

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2015037565A (ja) 2014-09-12 2015-02-26 富士フイルム株式会社 内視鏡システム及びその駆動方法
JP2016152920A (ja) 2016-03-01 2016-08-25 富士フイルム株式会社 内視鏡システム及びその駆動方法

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3137191B2 (ja) * 1989-04-06 2001-02-19 オリンパス光学工業株式会社 画像処理装置
US5331551A (en) * 1989-10-02 1994-07-19 Olympus Optical Co., Ltd. Endoscope image recording system for compressing and recording endoscope image data
US5703622A (en) * 1995-01-30 1997-12-30 International Business Machines Corporation Method for identifying video pixel data format in a mixed format data stream
US7158178B1 (en) * 1999-12-14 2007-01-02 Intel Corporation Method of converting a sub-sampled color image
JP2002064697A (ja) * 2000-08-15 2002-02-28 Fuji Film Microdevices Co Ltd 画像処理装置及び画像処理方法
US7109995B2 (en) * 2003-10-23 2006-09-19 Zoran Corporation Cascade of video processing entities and a method for processing video
US20050259729A1 (en) * 2004-05-21 2005-11-24 Shijun Sun Video coding with quality scalability
WO2013069691A1 (ja) 2011-11-11 2013-05-16 オリンパスメディカルシステムズ株式会社 色信号伝送装置、無線映像伝送システム及び送信装置
WO2015174146A1 (ja) * 2014-05-14 2015-11-19 オリンパス株式会社 撮像システム
JP6611494B2 (ja) * 2015-07-08 2019-11-27 キヤノン株式会社 画像表示装置及びその制御方法
WO2017074016A1 (ko) * 2015-10-26 2017-05-04 삼성전자 주식회사 컬러 컴포넌트의 동적 범위를 이용한 영상 처리 방법 및 그 장치
JP6214841B1 (ja) * 2016-06-20 2017-10-18 オリンパス株式会社 被検体内導入装置、送信方法及びプログラム
JP6337228B2 (ja) * 2016-06-29 2018-06-06 オリンパス株式会社 内視鏡

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2015037565A (ja) 2014-09-12 2015-02-26 富士フイルム株式会社 内視鏡システム及びその駆動方法
JP2016152920A (ja) 2016-03-01 2016-08-25 富士フイルム株式会社 内視鏡システム及びその駆動方法

Also Published As

Publication number Publication date
US11245884B2 (en) 2022-02-08
JPWO2018128010A1 (ja) 2019-11-21
US20190356890A1 (en) 2019-11-21
WO2018128010A1 (ja) 2018-07-12

Similar Documents

Publication Publication Date Title
US11672516B2 (en) Control apparatus, control method, and control system
US11045079B2 (en) Endoscope device, image processing apparatus, image processing method, and program
EP1690497B1 (en) Ultrasonographic device
KR102028780B1 (ko) 영상 내시경 시스템
US10362928B2 (en) Image processing apparatus and image processing method
US11004197B2 (en) Medical image processing apparatus, medical image processing method, and program
EP3300650B1 (en) Medical observation device and medical observation method
JPWO2018163644A1 (ja) 情報処理装置、支援システム及び情報処理方法
US20180307933A1 (en) Image processing apparatus, image processing method, and computer readable recording medium
US20170046836A1 (en) Real-time endoscopic image enhancement
US10010245B2 (en) Endoscope system, processor device, and method for operating endoscope system
JP6839773B2 (ja) 内視鏡システム、内視鏡システムの作動方法及びプロセッサ
JP7137629B2 (ja) 医用画像処理装置、プロセッサ装置、医用画像処理装置の作動方法、及びプログラム
CN109863755A (zh) 信号处理设备、方法和程序
JP5972312B2 (ja) 医用画像処理装置及びその作動方法
JP2015192839A (ja) 医用画像処理装置及びその作動方法
US20240315562A1 (en) Medical imaging systems and methods
JP6807869B2 (ja) 画像処理装置、画像処理方法およびプログラム
JP7122328B2 (ja) 画像処理装置、プロセッサ装置、画像処理方法、及びプログラム
JP7081501B2 (ja) 制御装置、制御システム、および制御方法
US10863149B2 (en) Image processing apparatus, image processing method, and computer readable recording medium
WO2018173605A1 (ja) 手術用制御装置、制御方法、手術システム、およびプログラム
WO2021095446A1 (ja) 情報表示システムおよび情報表示方法
JP7140113B2 (ja) 内視鏡
CN112488925A (zh) 用于减少图像中的烟雾的系统和方法

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20201012

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20211109

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20211228

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20220426

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20220509

R151 Written notification of patent or utility model registration

Ref document number: 7081501

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151