JP2021194299A - 超音波診断装置、超音波診断装置の制御方法、及び、超音波診断装置の制御プログラム - Google Patents

Abstract

【課題】ユーザにとって、より利便性の高い表示画像を生成し得る超音波診断装置を提供すること。【解決手段】超音波の送受信を行う超音波プローブ２と、被検体を撮影するカメラ３と、超音波プローブ２から取得した受信信号に基づいて、被検体の超音波画像を生成する超音波画像生成部１２と、カメラ３から取得したカメラ画像と、超音波画像生成部１２から取得した超音波画像と、を含む表示画像を生成する表示画像生成部１４と、当該超音波診断装置の動作モードに応じて、表示画像内に配置するカメラ画像の表示スタイルを決定する制御部１８と、を備える超音波診断装置。【選択図】図２

Description

本開示は、超音波診断装置、超音波診断装置の制御方法、及び、超音波診断装置の制御プログラムに関する。

従来、超音波を被検体内部に送信し、その超音波エコーを受信して解析することにより、被検体内の断層画像を生成する超音波診断装置が知られている。超音波診断装置は、超音波をスキャンすることにより、２次元又は３次元の超音波画像をリアルタイムで取得することができる。そして、超音波診断装置にて超音波画像を時間的に連続して生成することで、被検体の生体部分を動画観察することが可能である。

近年、この種の超音波診断装置においては、モニタに映す表示画像から超音波プローブの位置や被検体の動作等の状況を認識し得るようにするため、カメラにて、超音波プローブと被検体の双方を撮影し、カメラ画像を、超音波画像に付帯させた表示画像をモニタに表示するものも構想されている。

例えば、特許文献１には、超音波診断装置にカメラを接続し、検査中のカメラ画像を超音波画像と同時に表示し、又は保存する技術が開示されている。加えて、特許文献１には、その際のカメラ画像の内容解析やプローブ位置情報を活用することにより、検査部位を判断したり、検査対象へのカメラズーミングを実施したりする技術が開示されている。

特開２００９−２０７８００号公報

ところで、この種の超音波診断装置において、超音波画像と共に表示するカメラ画像は、例えば、（１）検査者が超音波検査中にモニタ内で超音波プローブの位置と超音波画像の両方を確認する用途、（２）検査者が患者にモニタを見せながら、身体の動きと生体内部の動きの連動性を説明する用途、（３）表示画像を超音波検査の記録として用いる場合のボディマーク（被検体の検査対象部位を示すマーク）としての用途、（４）再診時等に超音波プローブの当て方を再現するための用途等、種々の用途が想定されている。

この点、超音波画像と共に表示するカメラ画像の表示スタイル（例えば、正像表示又は鏡像表示）は、超音波診断装置の利用シーンに応じて異なる設定とされるのが好ましい。

そこで、本開示は、ユーザにとって、より利便性の高い画像表示を提供し得る超音波診断装置、超音波診断装置の制御方法、及び超音波診断装置の制御プログラムを提供することを目的とする。

前述した課題を解決する主たる本開示は、
超音波の送受信を行う超音波プローブと、
被検体を撮影するカメラと、
前記超音波プローブから取得した受信信号に基づいて、前記被検体の超音波画像を生成する超音波画像生成部と、
前記カメラから取得したカメラ画像と、前記超音波画像生成部から取得した超音波画像と、を含む表示画像を生成する表示画像生成部と、
当該超音波診断装置の動作モードに応じて、前記表示画像内に配置する前記カメラ画像の表示スタイルを決定する制御部と、
を備える超音波診断装置である。

又、他の局面では、
超音波の送受信を行う超音波プローブから取得した受信信号に基づいて、被検体の超音波画像を生成し、
被検体を撮影するカメラから取得したカメラ画像と、前記超音波画像と、を含む表示画像を生成し、
当該超音波診断装置の動作モードに応じて、前記表示画像内に配置する前記カメラ画像の表示スタイルを決定する、
超音波診断装置の制御方法である。

又、他の局面では、
コンピュータに、
超音波の送受信を行う超音波プローブから取得した受信信号に基づいて、被検体の超音波画像を生成する処理と、
被検体を撮影するカメラから取得したカメラ画像と、前記超音波画像と、を含む表示画像を生成する処理と、
当該超音波診断装置の動作モードに応じて、前記表示画像内に配置する前記カメラ画像の表示スタイルを決定する処理と、
を実行させる超音波診断装置の制御プログラムである。

本開示に係る超音波診断装置によれば、ユーザにとって、より利便性の高い画像表示を提供することが可能である。

超音波診断装置の外観の一例を示す図 超音波診断装置の全体構成の一例を示す図 超音波診断装置を用いた超音波検査の状況の一例を示す図 表示画像生成部が生成する表示画像の一例を示す図（カメラ画像：鏡像表示） 表示画像生成部が生成する表示画像の一例を示す図（カメラ画像：正像表示） 超音波診断装置の動作フローの一例を示す図 プローブマーク設定機能について、説明する図 アノテーション設定機能について、説明する図 変形例２に係る超音波診断装置の構成を示す図 変形例３に係る超音波診断装置の構成を示す図

以下に添付図面を参照しながら、本開示の好適な実施形態について詳細に説明する。尚、本明細書及び図面において、実質的に同一の機能を有する構成要素については、同一の符号を付することにより重複説明を省略する。

［超音波診断装置の全体構成について］
以下、図１〜図３を参照して、本発明の一実施形態に係る超音波診断装置の構成について説明する。

図１は、超音波診断装置Ａの外観の一例を示す図である。図２は、超音波診断装置Ａの全体構成の一例を示す図である。

図３は、超音波診断装置Ａを用いた超音波検査の状況の一例を示す図である。尚、図３では、Ｐ１が検査者（即ち、ユーザ）であり、Ｐ２が患者（即ち、被検体）を表す。

超音波診断装置Ａは、超音波診断装置本体１、超音波プローブ２、及び、カメラ３を備える。超音波プローブ２及びカメラ３は、それぞれ、ケーブルＣ１、Ｃ２を介して超音波診断装置本体１と接続されている。

超音波プローブ２は、超音波ビーム（ここでは、１〜３０ＭＨｚ程度）を被検体内に対して送信するとともに、送信した超音波ビームのうち被検体内で反射された超音波エコーを受信して電気信号に変換する音響センサとして機能する。

超音波プローブ２は、例えば、アレー状に配設された振動子列（例えば、圧電振動子列）と、当該振動子列の各振動子の駆動状態のオンオフを個別に又はブロック単位で切替制御するためのチャンネル切替部（例えば、マルチプレクサ）を含んで構成される。超音波プローブ２の各振動子は、超音波診断装置本体１（送受信部１１）で発生された電圧パルスを超音波ビームに変換して被検体内へ送信し、被検体内で反射した超音波エコーを受信して電気信号（以下、「受信信号」と称する）に変換し、超音波診断装置本体１（送受信部１１）へ出力する。そして、超音波プローブ２の駆動対象の振動子が、走査方向に沿って順に切り替えられることにより、被検体内の超音波走査が実行される。

カメラ３は、例えば、光学カメラのような一般的な可視カメラであり、自身の有する撮像素子が生成した画像信号をＡＤ変換して、カメラ画像に係る画像データ（以下、「カメラ画像」と略称する）を生成する。そして、カメラ３は、カメラ画像を連続的に生成して、時系列に並んだカメラ画像を超音波診断装置本体１に対して出力する。

カメラ３は、被検体及び超音波プローブ２を撮影し得るように、被検体の周囲の適宜な位置に配置される。カメラ３の配置位置は、カメラ画像から被検体への超音波プローブ２の押し当て状態（例えば、超音波プローブ２の位置や姿勢）を把握し得るような位置であるのが好ましい。

超音波診断装置本体１は、送受信部１１、超音波画像生成部１２、カメラ画像取得部１３、表示画像生成部１４、画像出力部１５、操作入力部１６、記憶部１７、及び、制御部１８を備えている。

送受信部１１は、超音波プローブ２の各振動子に対して、超音波の送受信を行わせる駆動回路である。送受信部１１は、超音波プローブ２の各振動子に対して駆動信号たる電圧パルスを送出すると共に、超音波プローブ２の各振動子で生成された超音波エコーに係る電気信号を受信処理する。

超音波画像生成部１２は、送受信部１１から取得した受信信号に対して、所定の信号処理（対数圧縮、及び検波等）を施して、超音波画像に係る画像データ（以下、「超音波画像」と略称する）を生成する。

超音波画像生成部１２は、例えば、超音波プローブ２が深度方向に向けてパルス状の超音波ビームを送信した際に、その後に検出される超音波エコーの信号強度（Intensity）を順次ラインメモリに蓄積する。そして、超音波画像生成部１２は、超音波プローブ２からの超音波ビームが被検体内を走査するに応じて、各走査位置での超音波エコーの信号強度を各別のラインメモリに順次蓄積し、フレーム単位となる二次元データを生成する。そして、超音波画像生成部１２は、被検体の内部の各位置で検出される超音波エコーの信号強度を輝度値に変換することによって、超音波画像を生成する。

超音波画像生成部１２は、超音波プローブ２の走査速度に応じたフレームレートで、時間的に連続して超音波画像を生成する。

カメラ画像取得部１３は、カメラ３からカメラ画像を順次取得する。カメラ画像取得部１３は、例えば、カメラ３がカメラ画像を生成するフレームレートの間隔で、カメラ３からカメラ画像を順次取得する。

表示画像生成部１４は、超音波画像生成部１２から超音波画像を取得すると共に、カメラ画像取得部１３からカメラ画像を取得して、超音波画像とカメラ画像とが配置された表示画像を生成する。そして、表示画像生成部１４は、生成した表示画像のデータを画像出力部１５に送出する。

表示画像生成部１４は、超音波診断装置Ａの動作モードがライブモードの場合、超音波画像生成部１２により生成されたリアルタイムの超音波画像と、カメラ画像取得部１３により取得されたリアルタイムのカメラ画像とを配置した表示画像を順次生成し、画像出力部１５に表示させる表示画像を順次更新する。

尚、この際、表示画像生成部１４は、超音波画像に付与されたタイムスタンプの時刻とカメラ画像に付与されたタイムスタンプの時刻とに基づいて、超音波画像が生成されたタイミングとカメラ画像が生成されたタイミングとの時間的な対応関係を特定し、同一又は近接するタイミングに生成された超音波画像とカメラ画像とを含む表示画像を生成してもよい。この場合、超音波画像には、超音波画像生成部１２にて生成された際にタイムスタンプが付与され、カメラ画像には、カメラ画像取得部１３にて取得された際にタイムスタンプが付与される構成とすればよい。

又、表示画像生成部１４は、超音波診断装置Ａの動作モードが静止画再生モード又は動画再生モードの場合、記憶部１７に格納された静止画データＤ１又は動画データＤ２を読み出して表示画像を生成する。

尚、表示画像生成部１４は、制御部１８から静止画保存指令を受けた場合、当該静止画保存指令を受けたタイミングで自身のフレームバッファに保持された１フレーム分の表示画像のデータを、静止画データＤ１として記憶部１７に格納する。又、表示画像生成部１４は、制御部１８から動画保存指令を受けた場合、自身が順次生成する表示画像のデータを、動画データＤ２として記憶部１７に格納する。

表示画像生成部１４は、例えば、例えば、ＤＳＰ（Digital Signal Processor）で構成されたデジタル演算回路によって実現される。但し、表示画像生成部１４の機能の一部又は全部は、ＣＰＵ（Central Processing Unit）がプログラムに従って演算処理することによって実現されてもよいし、専用のハードウェア回路（例えば、ＡＳＩＣやＦＰＧＡ）によって実現されてもよい。

画像出力部１５は、例えば、液晶ディスプレイ又はＣＲＴモニタ等であって、表示画像生成部１４に生成された表示画像を表示する。

操作入力部１６は、ユーザが入力操作を行うためのユーザインターフェイスであり、例えば、押しボタンスイッチ、キーボード、又はマウス等で構成される。操作入力部１６は、ユーザが行った入力操作を操作信号に変換し、制御部１８に送出する。

尚、操作入力部１６を介して、ユーザは、超音波診断装置Ａに実行すべき動作モードを指令し得るようになっている。

記憶部１７は、例えば、ＨＤＤ（Hard Disk Drive）、ＳＳＤ（Solid State Drive）、又は、フラッシュメモリ等の補助記憶装置である。記憶部１７には、例えば、表示画像を生成するための画像フォーマットデータ（図示せず）、及び、表示画像生成部１４に生成された表示画像の画像データ等が格納される。本実施形態に係る記憶部１７には、動画データ（動画形式の表示画像の画像データを表す。以下同じ）Ｄ２、及び、静止画データ（静止画形式の表示画像の画像データを表す。以下同じ）Ｄ１が格納される。

制御部１８は、超音波診断装置Ａの動作モードに応じて、表示画像内に配置するカメラ画像の表示スタイルが切り替えられるように表示画像生成部１４を制御する（詳細は後述）。尚、制御部１８は、操作入力部１６からの操作信号を取得して、当該操作信号に基づいて、超音波診断装置Ａの各部の動作を統括制御する機能も有する。

尚、制御部１８は、例えば、ＣＰＵ（Central Processing Unit）、ＲＯＭ（Read Only Memory）、及び、ＲＡＭ（Random Access Memory）等を含んで構成されているマイコンである。

［カメラ画像の表示スタイル制御について］
表示画像生成部１４は、表示画像内に配置するカメラ画像の表示スタイルを変更可能に構成されている。具体的には、表示画像生成部１４は、制御部１８から受信する超音波診断装置Ａの動作モードに係る制御指令に基づいて、表示画像内に配置するカメラ画像の表示スタイルを変更する。

又、この際、表示画像生成部１４は、好ましくは、現時点で表示画像内に配置されるカメラ画像の表示スタイルの態様を示す説明画像（図４、図５の画像Ｒ３を参照）を、表示画像内に付加する。これによって、ユーザに対して、現時点で表示されるカメラ画像の表示スタイルを誤りなく認識させることができる。

図４、図５は、表示画像生成部１４が生成する表示画像の一例を示す図である。図４の表示画像と図５の表示画像とは、同一タイミングで生成された表示画像であって、図４では、カメラ画像が鏡像表示された状態を表し、図５では、カメラ画像が正像表示された状態を表している。尚、図４、図５のＲａｌｌは表示画像全体、Ｒ１は超音波画像、Ｒ２はカメラ画像、Ｒ３は説明画像を表す。

ここで、表示画像生成部１４が切り替えるカメラ画像の表示スタイルとは、典型的には、図４及び図５に示すように、鏡像表示（即ち、左右反転表示）又は正像表示（即ち、左右非反転表示）に係る表示スタイルであり、表示画像生成部１４は、制御部１８からの制御指令に基づいて、撮影により得られたカメラ画像を正像表示とするか、又は、撮影により得られたカメラ画像を鏡像表示とするかを切り替える。かかる制御を行うのは、超音波診断装置Ａの利用シーンに応じて、カメラ画像が鏡像表示された方がユーザにとって利便性が高いか、カメラ画像が正像表示された方がユーザにとって利便性が高いか、が異なるためである。

カメラ画像の表示スタイルを決定する際の基準となる超音波診断装置Ａの動作モードとしては、例えば、ライブモード、フリーズモード、動画再生モード、及び、静止画再生モードが挙げられる。

ライブモードとは、超音波プローブ２に超音波の送受信を実行させて、被検体の断層像を撮影している動作モードである。尚、ライブモードにおいては、超音波診断装置Ａは、被検体の超音波画像及びカメラ画像を含む表示画像をリアルタイムで更新する。

フリーズモードとは、ライブモード中にユーザに入力されたフリーズ指令を契機として、超音波プローブ２における超音波の送受信を停止させたモードである。尚、フリーズモードにおいては、ライブモード時の最後に生成された表示画像が、表示画像生成部１４のフレームバッファに保持され、表示画像生成部１４は、表示画像の更新を停止する。

静止画再生モードとは、表示画像生成部１４が、記憶部１７から過去の超音波検査時に生成された表示画像の静止画データＤ１を読み出し、画像出力部１５にて表示させるモードである。超音波画像の静止画の記録は、例えば、フリーズモード中にユーザに入力された静止画保存指令に基づいて実行され、このときに表示画像生成部１４に生成された一枚の表示画像の画像データが、静止画データＤ１として記憶部１７に記憶される。

動画再生モードとは、表示画像生成部１４が、記憶部１７から過去の超音波検査時に生成された表示画像の動画データＤ２を読み出し、画像出力部１５にて動画再生させるモードである。超音波画像の動画記録は、例えば、ライブモード中にユーザに入力された動画保存指令に基づいて実行され、このときに表示画像生成部１４に生成された時系列の表示画像の画像データが、動画データＤ２として記憶部１７に記憶される。

表示画像生成部１４は、具体的には、以下のように、表示画像内に配置するカメラ画像の表示スタイルを変更する。

表示画像生成部１４は、超音波診断装置Ａの動作モードがライブモードの場合、表示画像内に配置するカメラ画像を鏡像表示とする。又、表示画像生成部１４は、超音波診断装置Ａの動作モードがフリーズモードの場合、表示画像内に配置するカメラ画像を正像表示とする。又、表示画像生成部１４は、超音波診断装置Ａの動作モードが静止画再生モードの場合、表示画像内に配置するカメラ画像を正像表示とする。又、表示画像生成部１４は、超音波診断装置Ａの動作モードが動画再生モードの場合、表示画像内に配置するカメラ画像を鏡像表示とする。

超音波診断装置Ａの動作モードがライブモードの場合、一般に、ユーザは、画像出力部１５に映る表示画像を視認しながら、超音波プローブ２を移動させている状況と言える。このとき、超音波診断装置本体１は、一般に、ユーザから見て、被検体の反対側又は横側に配置されるため（図３を参照）、カメラ画像が鏡像表示されなければ、カメラ画像を視認した際に超音波プローブ２の移動方向がユーザの意図している方向と逆方向となっているように見えてしまうおそれがある。換言すると、このとき、カメラ画像を鏡像表示させることによって、ユーザは、鏡を視認しながら、超音波プローブ２を移動させているような感覚を得るため、画像出力部１５に映る表示画像（即ち、カメラ画像）を視認しながら、直感的に超音波プローブ２を移動させることができる。

又、超音波診断装置Ａの動画再生モードは、一般に、過去に行われた超音波検査を再現する用途で使用される。動画再生モードにおいては、超音波診断装置Ａがライブモードで動作している場合と同様に、超音波診断装置本体１が、ユーザから見て、被検体の反対側又は横側に配置された状態で、ユーザは、画像出力部１５に映る表示画像（カメラ画像）を視認しながら、超音波プローブ２を移動させることになる。従って、超音波診断装置Ａが動画再生モードで動作している際にも、超音波診断装置Ａがライブモードで動作している場合と同様に、画像出力部１５には、鏡像反転したカメラ画像が表示されるのが好ましい。

一方、超音波診断装置Ａの動作モードがフリーズモードの場合や静止画再生モードの場合には、一般に、ユーザは、超音波プローブ２の移動操作を行っておらず、画像出力部１５に映る表示画像を視認して、客観的に、超音波プローブ２の被検体への押し当て位置、及び超音波プローブ２の姿勢等を観察している状況と言える。このとき、カメラ画像が鏡像表示されてしまうと、表示画像内に映るカメラ画像を視認したユーザは、超音波プローブ２が被検体に押し当てられている位置を、左右反転して認識してしまうおそれがある。かかる観点から、超音波診断装置Ａの動作モードがフリーズモードの場合や静止画再生モードの場合には、表示画像内に映るカメラ画像は、正像表示されるのが好ましい。

かかる観点から、表示画像生成部１４は、超音波診断装置Ａの動作モードに応じて、カメラ画像を表示画像に配置する際の表示スタイルを、鏡像表示と、正像表示とで切り替える。

表示画像生成部１４による表示画像の生成処理は、公知の手法と同様である。表示画像生成部１４は、例えば、表示画像の画像フォーマットデータに対して、超音波画像生成部１２から取得した超音波画像を埋め込むと共に、カメラ画像取得部１３から取得したカメラ画像を埋め込むことで、表示画像を生成する。そして、表示画像生成部１４は、カメラ画像を表示画像に埋め込む際には、超音波診断装置Ａの動作モードに応じて、当該カメラ画像を、鏡像表示とするか、正像表示とするか、を切り替える。

又、表示画像生成部１４は、静止画の保存指令があった場合には、表示画像の画像フォーマットデータに対して、正像表示に設定したカメラ画像と超音波画像とを埋め込んだ表示画像を、静止画データＤ１として記憶部１７に格納する。一方、表示画像生成部１４は、動画の保存指令があった場合には、表示画像の画像フォーマットデータに対して、鏡像表示に設定したカメラ画像と超音波画像とを埋め込んだ表示画像を、動画データＤ２として記憶部１７に格納する。これによって、表示画像生成部１４は、静止画再生モードでは、カメラ画像を正像表示とした表示画像を画像出力し、動画再生モードでは、カメラ画像を鏡像表示とした表示画像を画像出力する。

尚、表示画像生成部１４が表示画像内にカメラ画像を配置する処理は、表示画像の画像フォーマットデータの所定位置にカメラ画像を埋め込むものであってもよいし、表示画像の画像フォーマットデータとは無関係に適宜な位置にカメラ画像を重畳表示したり、並べて表示したりするものであってもよい。尚、この点は、表示画像生成部１４が表示画像内に超音波画像を配置する処理についても、同様である。

（超音波診断装置の動作）
図６は、超音波診断装置Ａの動作フローの一例を示す図である。図６に示す各ステップは、例えば、超音波診断装置Ａの制御部１８がコンピュータプログラムに従って実行するものである。

超音波診断プログラムを実行した際、制御部１８は、まず、測定条件及び表示設定等の設定データ（図示せず）の読み出しを行い、各種処理における変数として当該設定データを設定する（ステップＳ１）。

次に、制御部１８は、表示画像生成部１４に、表示画像の初期画面の生成を行わせ、画像出力部１５に表示させる（ステップＳ２）。

次に、制御部１８は、カメラ３に撮影を開始させ、カメラ画像取得部１３にカメラ３で生成されるカメラ画像を順次取得させる（ステップＳ３）。

次に、制御部１８は、超音波プローブ２に超音波の送受信を開始させて、超音波画像生成部１２にて超音波画像の生成を開始させる（ステップＳ４）。

次に、制御部１８は、表示画像生成部１４に対して、表示画像の画像フォーマットデータに対して、超音波画像生成部１２から取得した超音波画像を埋め込ませると共に、カメラ画像取得部１３から取得したカメラ画像を埋め込ませた表示画像の生成処理を開始させる（ステップＳ５）。又、制御部１８は、画像出力部１５に表示指令信号を出力し、表示画像生成部１４で生成された表示画像を表示させる。尚、このとき、表示画像生成部１４に生成される表示画像は、カメラ画像が鏡像表示となったライブモードの表示画像である。

次に、制御部１８は、操作入力部１６への入力操作があったか否かを判定し（ステップＳ６）、操作入力部１６への入力操作を待ち受ける（ステップＳ６：ＮＯ）。そして、制御部１８は、操作入力部１６への入力操作が行われた場合（ステップＳ６：ＹＥＳ）、操作信号の内容に基づいて条件分岐して、フリーズ操作、フリーズ解除操作、静止画保存操作、静止画再生操作、動画保存開始操作、動画保存終了操作、及び動画再生操作それぞれに対応する処理を実行する（ステップＳ７〜Ｓ１３）。

尚、このステップＳ６では、制御部１８は、フリーズ操作、フリーズ解除操作、静止画保存操作、静止画再生操作、動画保存開始操作、動画保存終了操作、及び動画再生操作それぞれを行うために、各別に設けられた操作入力部１６の操作ボタンのいずれかが押下されたかを判定する。そして、いずれかの操作ボタンが押下された場合には、例えば、識別可能な操作信号としてレジスタに格納され、当該レジスタを介して制御部１８に入力される。

ここで、操作入力部１６への入力操作がなされた場合のフリーズ操作、フリーズ解除操作、静止画保存操作、静止画再生操作、動画保存開始操作、動画保存終了操作、及び動画再生操作それぞれに対応する処理について説明する（ステップＳ７〜Ｓ１３）。

フリーズ解除操作がなされた場合、制御部１８は、フリーズ操作でフリーズモードにした超音波プローブ２による撮像動作を再開する。又、このとき、制御部１８は、表示画像生成部１４に、カメラ画像が鏡像表示となったライブモードの表示画像を生成させる（ステップＳ７）。

フリーズ操作がなされた場合、制御部１８は、送受信部１１に超音波プローブ２による撮像動作を停止させる。又、このとき、制御部１８は、表示画像生成部１４に、カメラ画像が正像表示となったフリーズモードの表示画像を生成させる（ステップＳ８）。尚、このとき、表示画像生成部１４のフレームバッファには、ライブモード中に最後に生成された超音波画像が保持され、画像出力部１５は、当該超音波画像の静止画を表示する。

静止画保存操作がなされた場合、制御部１８は、表示画像生成部１４に対して保存指示信号を出力して、保存対象としての１フレーム分の超音波画像を生成させる。表示画像生成部１４は、例えば、静止画保存操作が行われたときの１フレームの画像データをＪＰＥＧ形式にエンコードすることによって、保存対象の静止画データＤ１を生成し、記憶部１７に記憶させる。尚、このとき、表示画像生成部１４は、カメラ画像が正像表示された表示画像を静止画データＤ１として記憶部１７に保存する（ステップＳ９）。

静止画再生操作がなされた場合、制御部１８は、送受信部１１に超音波プローブ２による撮像動作を停止させる。又、このとき、制御部１８は、表示画像生成部１４に、記憶部１７から、ユーザに選択された静止画データＤ１の読み出しを実行させ、画像出力部１５に静止画データＤ１として記憶された表示画像を表示させる。尚、静止画データＤ１は、カメラ画像が正像表示された表示画像として保存されているため、この静止画再生モードで、表示画像生成部１４が画像出力部１５に出力する表示画像も、カメラ画像が正像表示された状態となる（ステップＳ１０）。

動画記録開始操作がなされた場合、制御部１８は、表示画像生成部１４に対して、保存対象としての動画データの生成を開始させる。表示画像生成部１４は、例えば、連続する複数のフレームの画像データをＭＰＥＧ形式にエンコードすることによって、保存対象の動画データＤ２を生成し、記憶部１７に記憶させる。尚、このとき、表示画像生成部１４は、カメラ画像が鏡像表示された表示画像を動画データＤ２として記憶部１７に保存する（ステップＳ１１）。

動画保存終了操作がなされた場合、制御部１８は、表示画像生成部１４に対して、動画記録開始操作で開始した動画データの記録を停止させる（ステップＳ１２）。

動画再生操作がなされた場合、制御部１８は、送受信部１１に超音波プローブ２による撮像動作を停止させる。又、このとき、制御部１８は、表示画像生成部１４に、記憶部１７から、ユーザに選択された動画データＤ２の読み出しを実行させ、画像出力部１５に動画データＤ２として記憶された表示画像を順次表示させる。尚、動画データＤ２は、カメラ画像が鏡像表示された表示画像として保存されているため、この動画再生モードで、表示画像生成部１４が画像出力部１５に出力する表示画像も、カメラ画像が鏡像表示された状態となる（ステップＳ１３）。

制御部１８は、操作入力部１６への入力操作が行われた場合（ステップＳ６：ＹＥＳ）、これらの入力操作に対応する処理ステップＳ７〜Ｓ１３を実行した後、再度、ステップＳ６に戻って、上記と同様の処理を継続する。

［効果］
以上のように、本実施形態に係る超音波診断装置Ａによれば、当該超音波診断装置Ａの動作モード（例えば、ライブモード、フリーズモード、動画再生モード、又は、静止画再生モード）に応じて、表示画像内に配置するカメラ画像の表示スタイル（例えば、正像表示又は鏡像表示）を切り替えて、画像出力することが可能である。

これによって、ユーザにとって、より利便性の高い画像表示を提供することが可能である。

（変形例１）
上記実施形態では、超音波診断装置Ａの動作モードがライブモードの場合、表示画像内に配置されるカメラ画像を、常時、鏡像表示とする態様を示した。この点、本変形例１では、超音波診断装置Ａの動作モードがライブモードの際であっても、ユーザによるアノテーションの入力操作が行われた場合、又は、ユーザによるプローブマークを設定するための入力操作が行われた場合には、表示画像生成部１４が、カメラ画像を鏡像表示から正像表示に切り替える点で、上記実施形態に係る超音波診断装置と相違する。

図７は、プローブマーク設定機能について、説明する図である。図８は、アノテーション設定機能について、説明する図である。

表示画像内に配置されたカメラ画像は、検査対象部位を示すボディマークとして機能し得る。しかしながら、カメラ３の撮影位置によっては、カメラ画像内において超音波プローブ２の位置が視認しづらい場合がある。例えば、図７、図８では、カメラ３と被検体との距離が遠く、カメラ画像内における超音波プローブ２の位置が視認しづらい状況となっている。

本変形例１に係る表示画像生成部１４は、このような場合にも、カメラ画像内における超音波プローブ２の位置を識別し得るように、ユーザの入力操作により、表示画像のカメラ画像上の所望の位置にプローブマーク（図７のＲ２ａを参照）を付与し得る構成となっている。又、本変形例１に係る表示画像生成部１４は、ユーザの入力操作により、表示画像内にテキストアノテーション（図８のＲ４を参照）を付与し得る構成となっている。尚、当該構成は、特に、表示画像を超音波検査の記録として用いる場合に有用である。

但し、ユーザによるアノテーションの入力操作が行われている場合や、ユーザによるボディマークを設定するための入力操作が行われている場合には、ユーザが、画像出力部１５に映る表示画像を視認しながら、超音波プローブ２を移動させている状況というよりも、ユーザが、画像出力部１５に映る表示画像を注視している状況に近いと言える。かかる観点から、本変形例１に係る表示画像生成部１４は、このような場合には、超音波診断装置Ａの動作モードがライブモードであっても、カメラ画像を鏡像表示から正像表示に切り替える。

以上のように、変形例１に係る超音波診断装置Ａによれば、当該超音波診断装置Ａの動作モードに加えて、ユーザの入力操作情報も参照して、表示画像内に配置するカメラ画像の表示スタイルを制御するため、ユーザにとってより利便性の高い表示画像を生成することが可能である。

（変形例２）
図９は、変形例２に係る超音波診断装置Ａの構成を示す図である。

上記実施形態では、表示画像生成部１４は、静止画データＤ１（又は動画データＤ２）を記憶部１７に格納する際、超音波画像とカメラ画像とを含む一枚絵の表示画像として格納する態様を示した。この点、本変形例２では、表示画像生成部１４が、静止画データＤ１を記憶部１７に格納する際、超音波画像データＤ１ａとカメラ画像データＤ１ｂとを別個に格納し、動画データＤ２を記憶部１７に保存する際、超音波画像データＤ２ａとカメラ画像データＤ２ｂとを別個に格納する点で、上記実施形態に係る超音波診断装置Ａと相違する。

本変形例２に係る表示画像生成部１４は、例えば、ユーザからの静止画保存指令又は動画保存指令を受けた場合、表示画像そのものを格納するのではなく、表示画像を構成する超音波画像とカメラ画像とを別個に格納する。尚、超音波画像データＤ１ａとカメラ画像データＤ１ｂ、及び、超音波画像データＤ２ａとカメラ画像データＤ２ｂとは、例えば、それぞれに付されたタイムスタンプの時刻情報やその他の識別情報により関連付けられる。

但し、本変形例２においては、静止画データＤ１及び動画データＤ２として記憶されるカメラ画像データＤ１ｂ、Ｄ２ｂは、例えば、カメラ画像取得部１３に取得されたカメラ画像そのもの（即ち、正像表示状態のカメラ画像）となる。そのため、本変形例２に係る表示画像生成部１４は、カメラ画像データＤ１ｂ、Ｄ２ｂからカメラ画像を読み出し、表示画像の画像フォーマットデータに対して、当該カメラ画像を配置する際に、正像表示とするか、鏡像表示とするか、を切り替えることになる。

具体的には、本変形例２に係る表示画像生成部１４は、画像出力部１５に静止画再生モードの表示画像を表示させる際には、記憶部１７から超音波画像データＤ１ａとカメラ画像データＤ１ｂとを取得し、これらに基づいて、カメラ画像が正像表示された状態の表示画像を生成する。又、同様に、本変形例２に係る表示画像生成部１４は、画像出力部１５に動画再生モードの表示画像を表示させる際には、記憶部１７から超音波画像データＤ２ａとカメラ画像データＤ２ｂとを取得し、これらに基づいて、カメラ画像が鏡像表示された状態の表示画像を生成する。

以上のように、変形例２に係る超音波診断装置Ａの構成によっても、上記実施形態に係る超音波診断装置Ａと同様に、超音波診断装置Ａの動作モードに応じて、表示画像内に配置するカメラ画像の表示スタイルを切り替えることが可能である。

（変形例３）
図１０は、変形例３に係る超音波診断装置Ａの構成を示す図である。

上記実施形態では、表示画像生成部１４は、静止画データＤ１と動画データＤ２とを別個に記憶部１７に保存する態様を示した。この点、本変形例３に係る表示画像生成部１４は、静止画と動画を区別することなく、共通の表示画像に係る画像データＤ３として記憶部１７に保存する点で、上記実施形態に係る超音波診断装置Ａと相違する。

本変形例３に係る表示画像生成部１４は、例えば、超音波検査が開始してから終了するまでの一連の時系列の表示画像に係る画像データＤ３を記憶部１７に記憶する。そして、本変形例３に係る表示画像生成部１４は、例えば、ユーザからの指令内容に基づいて、当該画像データＤ３を読み出す際に、静止画として読み出すか、動画として読み出すかを変更する。

但し、この場合、表示画像に係る画像データＤ３を記憶部１７に記憶する際、表示画像内に配置されるカメラ画像の表示スタイルは、常に同一となる（例えば、鏡像表示）。そのため、本変形例３に係る表示画像生成部１４は、記憶部１７から画像データＤ３を読み出す際に、静止画として読み出す場合（静止画再生モード）には、表示画像内に配置されたカメラ画像を切り出して、正像表示に変更して、画像出力部１５に画像出力させる。又、本変形例３に係る表示画像生成部１４は、記憶部１７から画像データＤ３を読み出す際に、動画として読み出す場合（動画再生モード）には、記憶部１７に記憶された際の表示画像そのままの状態で画像出力部１５に画像出力させる。

以上のように、変形例３に係る超音波診断装置Ａの構成によっても、上記実施形態に係る超音波診断装置Ａと同様に、超音波診断装置Ａの動作モードに応じて、表示画像内に配置するカメラ画像の表示スタイルを切り替えることが可能である。

（その他の実施形態）
本発明は、上記実施形態に限らず、種々に変形態様が考えられる。

例えば、上記実施形態では、表示画像生成部１４が変更するカメラ画像の表示スタイルの一例として、正像表示及び鏡像表示に係る表示スタイルを示した。しかしながら、表示画像生成部１４が変更するカメラ画像の表示スタイルとしては、その他、白黒表示及びカラー表示に係る表示スタイルや、大画面表示及び縮小画面表示に係る表示スタイルであってもよい。

以上、本発明の具体例を詳細に説明したが、これらは例示にすぎず、請求の範囲を限定するものではない。請求の範囲に記載の技術には、以上に例示した具体例を様々に変形、変更したものが含まれる。

本開示に係る超音波診断装置によれば、ユーザにとって、より利便性の高い画像表示を提供することが可能である。

Ａ 超音波診断装置
１ 超音波診断装置本体
１１ 送受信部
１２ 超音波画像生成部
１３ カメラ画像取得部
１４ 表示画像生成部
１５ 画像出力部
１６ 操作入力部
１７ 記憶部
１８ 制御部
２ 超音波プローブ
３ カメラ
Ｄ１ 静止画データ
Ｄ２ 動画データ
Ｄ１ａ、Ｄ２ａ 超音波画像データ
Ｄ１ｂ、Ｄ２ｂ カメラ画像データ
Ｄ３ 画像データ

Claims (12)

1. 超音波の送受信を行う超音波プローブと、
   被検体を撮影するカメラと、
   前記超音波プローブから取得した受信信号に基づいて、前記被検体の超音波画像を生成する超音波画像生成部と、
   前記カメラから取得したカメラ画像と、前記超音波画像生成部から取得した超音波画像と、を含む表示画像を生成する表示画像生成部と、
   当該超音波診断装置の動作モードに応じて、前記表示画像内に配置する前記カメラ画像の表示スタイルを決定する制御部と、
   を備える超音波診断装置。
2. 前記表示画像生成部は、前記制御部からの指令に応じて、前記表示画像内に配置する前記カメラ画像の正像表示又は鏡像表示に係る表示スタイルを変更する、
   請求項１に記載の超音波診断装置。
3. 前記表示画像生成部は、前記超音波診断装置の動作モードがライブモードの場合、前記カメラ画像を鏡像表示とする、
   請求項２に記載の超音波診断装置。
4. 前記表示画像生成部は、前記超音波診断装置の動作モードがライブモードのときに、ユーザによるアノテーションの入力操作が行われた場合、前記カメラ画像を鏡像表示から正像表示に切り替える、
   請求項３に記載の超音波診断装置。
5. 前記表示画像生成部は、前記超音波診断装置の動作モードがライブモードのときに、ユーザによるボディマークを設定するための入力操作が行われた場合、前記カメラ画像を鏡像表示から正像表示に切り替える、
   請求項３又は４に記載の超音波診断装置。
6. 前記表示画像生成部は、前記超音波診断装置の動作モードがフリーズモードの場合、前記カメラ画像を正像表示とする、
   請求項２乃至５のいずれか一項に記載の超音波診断装置。
7. 前記表示画像生成部は、前記超音波診断装置の動作モードが動画再生モードの場合、前記カメラ画像を鏡像表示とする、
   請求項２乃至６のいずれか一項に記載の超音波診断装置。
8. 前記表示画像生成部は、前記超音波診断装置の動作モードが静止画再生モードの場合、前記カメラ画像を正像表示とする、
   請求項２乃至７のいずれか一項に記載の超音波診断装置。
9. 前記表示画像内に配置される前記カメラ画像の前記表示スタイルは、前記超音波診断装置の動作モードと関連付けて、予めユーザが設定可能となっている、
   請求項１乃至８のいずれか一項に記載の超音波診断装置。
10. 前記表示画像生成部は、前記表示画像内に配置される前記カメラ画像の前記表示スタイルの態様を示す説明画像を、前記表示画像内に付加する、
    請求項１乃至９のいずれか一項に記載の超音波診断装置。
11. 超音波の送受信を行う超音波プローブから取得した受信信号に基づいて、被検体の超音波画像を生成し、
    被検体を撮影するカメラから取得したカメラ画像と、前記超音波画像と、を含む表示画像を生成し、
    当該超音波診断装置の動作モードに応じて、前記表示画像内に配置する前記カメラ画像の表示スタイルを決定する、
    超音波診断装置の制御方法。
12. コンピュータに、
    超音波の送受信を行う超音波プローブから取得した受信信号に基づいて、被検体の超音波画像を生成する処理と、
    被検体を撮影するカメラから取得したカメラ画像と、前記超音波画像と、を含む表示画像を生成する処理と、
    当該超音波診断装置の動作モードに応じて、前記表示画像内に配置する前記カメラ画像の表示スタイルを決定する処理と、
    を実行させる超音波診断装置の制御プログラム。

Images