JP7193080B2 - Information processing device, system, information processing method, and program - Google Patents
Information processing device, system, information processing method, and program Download PDFInfo
- Publication number
- JP7193080B2 JP7193080B2 JP2018220174A JP2018220174A JP7193080B2 JP 7193080 B2 JP7193080 B2 JP 7193080B2 JP 2018220174 A JP2018220174 A JP 2018220174A JP 2018220174 A JP2018220174 A JP 2018220174A JP 7193080 B2 JP7193080 B2 JP 7193080B2
- Authority
- JP
- Japan
- Prior art keywords
- display
- information processing
- information
- patient
- electronic stethoscope
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Description
本発明は、情報処理装置、システム、情報処理方法、およびプログラムに関する。 The present invention relates to an information processing device, system, information processing method, and program.
遠隔医療における診察では、医師による患者とのビデオ通話による問診が主に行われ、問診内容から診断が下されることが多い。ここで、電子聴診器を用いることで、遠隔診察における聴診が可能となり、診断精度の向上が期待できる。 In telemedicine examinations, doctors mainly conduct medical interviews with patients via video calls, and diagnoses are often made based on the contents of the interviews. Here, by using an electronic stethoscope, auscultation in remote medical examination becomes possible, and an improvement in diagnosis accuracy can be expected.
特許文献１には、電話回線等の狭帯域の伝送路を用いて聴診器の音を伝送する遠隔聴診装置に関する技術が開示されている。特許文献１の技術では、聴診器で得られた電気信号を濾波器や符号化器等を介して出力することが記載されている。そうすることで、異なる周波数の聴診音を切り替えて送受信可能である。
特許文献２には、聴診器を用いる使用者に対して、聴診器を当てるべき位置をガイダンスする装置が記載されている。医師は、生体音を再生させて視聴することにより、患者の診断を行うことができる。特許文献２の技術では、たとえば、所定の条件を満たす場合に生体音の再測定が行われるように、ガイダンスが行われる。そうすることにより、医師が複数回分の生体音を再生可能となり医師の診断精度が高められる。
遠隔診察の問診では、医師は患者の表情や顔色、患部等を良く観察する必要がある。一方、聴診を行う場合、医師は患者のどの位置を聴診しているかを正しく把握する必要がある。このように、問診時と聴診時で医師が特に必要とする情報は異なる。 In interviews during remote medical examination, the doctor needs to carefully observe the patient's facial expression, complexion, affected area, and the like. On the other hand, when performing auscultation, the doctor needs to correctly grasp which position of the patient is being auscultated. In this way, the information that the doctor particularly needs differs between the interview and the auscultation.
本発明が解決しようとする課題としては、遠隔診察における機器の利便性を向上させることが一例として挙げられる。 One example of the problem to be solved by the present invention is to improve the convenience of equipment in remote diagnosis.
請求項１に記載の発明は、
患者を聴診するための電子聴診器の状態を示す状態情報を取得する取得部と、
前記状態情報に基づき、医師が見るべき第１表示部の表示内容を制御する第１表示制御部とを備える情報処理装置である。
The invention according to
an acquisition unit for acquiring status information indicating the status of an electronic stethoscope for auscultating a patient;
The information processing apparatus includes a first display control unit that controls display content of the first display unit to be viewed by a doctor based on the state information.
請求項１０に記載の発明は、
請求項１から９のいずれか一項に記載の情報処理装置と
前記電子聴診器とを備えるシステムである。
The invention according to
A system comprising: the information processing apparatus according to any one of
請求項１１に記載の発明は、
患者を聴診するための電子聴診器の状態を示す状態情報を取得する取得ステップと、
前記状態情報に基づき、医師が見るべき第１表示部の表示内容を制御する第１表示制御ステップとを含む情報処理方法である。
The invention according to claim 11,
an obtaining step of obtaining status information indicative of a status of an electronic stethoscope for auscultating a patient;
and a first display control step of controlling the display content of the first display unit to be viewed by a doctor based on the state information.
請求項１２に記載の発明は、
請求項１１に記載の情報処理方法の各ステップをコンピュータに実行させるプログラムである。
The invention according to claim 12,
A program that causes a computer to execute each step of the information processing method according to claim 11.
以下、本発明の実施の形態について、図面を用いて説明する。尚、すべての図面において、同様な構成要素には同様の符号を付し、適宜説明を省略する。 BEST MODE FOR CARRYING OUT THE INVENTION Hereinafter, embodiments of the present invention will be described with reference to the drawings. In addition, in all the drawings, the same constituent elements are denoted by the same reference numerals, and the description thereof will be omitted as appropriate.
以下に示す説明において、情報処理装置１０の各構成要素は、特に説明する場合を除き、ハードウエア単位の構成ではなく、機能単位のブロックを示している。情報処理装置１０の各構成要素は、任意のコンピュータのＣＰＵ、メモリ、メモリにロードされたプログラム、そのプログラムを格納するハードディスクなどの記憶メディア、ネットワーク接続用インタフェースを中心にハードウエアとソフトウエアの任意の組合せによって実現される。そして、その実現方法、装置には様々な変形例がある。
In the following description, each component of the
（実施形態）
図１は、実施形態に係る情報処理装置１０の構成を例示する図である。本実施形態に係る情報処理装置１０は、取得部１１０および第１表示制御部１３０を備える。取得部１１０は、患者を聴診するための電子聴診器５２０の状態を示す状態情報を取得する。第１表示制御部１３０は、状態情報に基づき、医師が見るべき第１表示部５１０の表示内容を制御する。
(embodiment)
FIG. 1 is a diagram illustrating the configuration of an
本実施形態に係るシステム２０は、情報処理装置１０および電子聴診器５２０を備える。本実施形態に係るシステム２０は、遠隔診察に用いられるシステムである。
A
電子聴診器５２０は患者の聴診に用いられる。電子聴診器５２０では患者の生体音が検出され、電気信号に変換される。そして生体音の音波波形を示す音データが通信ネットワークを通じて医師側端末に送信される。医師は、医師側端末で音データを再生等させることにより、患者の生体音を確認することができる。
The
また、患者側で用いられる端末にはカメラが接続されており、医師は患者の様子を見て確認することができる。医師は、問診時にはたとえば患者の顔や患部を良く観察することが好ましい。一方、聴診時には、医師は、患者のどの位置に電子聴診器５２０があてられているかを正しく把握することが好ましい。
In addition, a camera is connected to the terminal used by the patient, so that the doctor can see and confirm the condition of the patient. It is preferable for the doctor to carefully observe, for example, the patient's face and the affected area when interviewing the patient. On the other hand, during auscultation, it is preferable for the doctor to correctly grasp where the
本実施形態に係る情報処理装置１０によれば、電子聴診器５２０の状態情報に基づいて、医師が診るべき第１表示部５１０の表示内容を第１表示制御部１３０が切り替える。たとえば電子聴診器５２０が音を検出可能な状態であるとき、第１表示部５１０の表示モードが聴診に適した聴診モードとなり、電子聴診器５２０が音を検出可能な状態にないとき、第１表示部５１０の表示モードが問診に適した問診モードとなる。
According to the
図２は、実施形態に係る情報処理方法を例示するフローチャートである。本情報処理方法は、取得ステップＳ１１０と第１表示制御ステップＳ１３０とを含む。取得ステップＳ１１０では、患者を聴診するための電子聴診器５２０の状態を示す状態情報が取得される。第１表示制御ステップＳ１３０では、状態情報に基づき、医師が見るべき第１表示部５１０の表示内容が制御される。本実施形態に係る情報処理方法は、情報処理装置１０により実現可能である。
FIG. 2 is a flowchart illustrating an information processing method according to the embodiment. This information processing method includes an acquisition step S110 and a first display control step S130. In an obtaining step S110, status information indicating the status of the
以上、本実施形態によれば、第１表示制御部１３０が、状態情報に基づき、医師が見るべき第１表示部５１０の表示内容を制御する。したがって、遠隔診察における機器操作が簡単化され、利便性が向上する。また、医師が適切な情報を容易に得られるため、診断精度が向上する。
As described above, according to the present embodiment, the first
（実施例１）
図３は、実施例１に係る情報処理装置１０およびシステム２０の構成を例示する図である。実施例１に係る情報処理装置１０およびシステム２０は、それぞれ実施形態に係る情報処理装置１０およびシステム２０の構成を有する。
(Example 1)
FIG. 3 is a diagram illustrating configurations of the
図４は、実施例１に係る医師側端末５１、患者側端末５２、およびサーバ５５の使用環境を例示する図である。医師側端末５１、患者側端末５２、およびサーバ５５は通信ネットワーク５００を介して互いに接続されている。たとえば医師側端末５１、患者側端末５２、およびサーバ５５の協働により、遠隔診察が実現される。
FIG. 4 is a diagram illustrating usage environments of the doctor-
情報処理装置１０は、医師側端末５１、患者側端末５２、およびサーバ５５のいずれかにより実現される。すなわち、医師側端末５１、患者側端末５２、およびサーバ５５の少なくともいずれかは、その機能構成部として、情報処理装置１０の機能構成部である取得部１１０、および第１表示制御部１３０を含む。取得部１１０による情報の取得、および第１表示制御部１３０による電子聴診器５２０の制御の少なくとも一方は、通信ネットワーク５００を介して行われても良い。なお、遠隔診察はサーバ５５を用いず、医師側端末５１および患者側端末５２により実現されても良い。
The
医師側端末５１、患者側端末５２、およびサーバ５５の各機能構成部は、たとえば各機能構成部を実現するハードウエアとソフトウエアとの組み合わせ（例：電子回路とそれを制御するプログラムの組み合わせなど）で実現される。
Each functional component of the
図５は、医師側端末５１のハードウエア構成の一例を示す図である。医師側端末５１は計算機１０００を用いて実現される。計算機１０００は任意の計算機である。例えば計算機１０００は、SoC（System On Chip）、Personal Computer（PC）、サーバマシン、タブレット端末、又はスマートフォンなどである。計算機１０００は、医師側端末５１を実現するために設計された専用の計算機であってもよいし、汎用の計算機であってもよい。
FIG. 5 is a diagram showing an example of the hardware configuration of the doctor-
計算機１０００は、バス１０２０、プロセッサ１０４０、メモリ１０６０、ストレージデバイス１０８０、入出力インタフェース１１００、及びネットワークインタフェース１１２０を有する。バス１０２０は、プロセッサ１０４０、メモリ１０６０、ストレージデバイス１０８０、入出力インタフェース１１００、及びネットワークインタフェース１１２０が、相互にデータを送受信するためのデータ伝送路である。ただし、プロセッサ１０４０などを互いに接続する方法は、バス接続に限定されない。プロセッサ１０４０は、CPU（Central Processing Unit）、GPU（Graphics Processing Unit）、又は FPGA（Field-Programmable Gate Array）などの種々のプロセッサである。メモリ１０６０は、RAM（Random Access Memory）などを用いて実現される主記憶装置である。ストレージデバイス１０８０は、ハードディスク、SSD（Solid State Drive）、メモリカード、又は ROM（Read Only Memory）などを用いて実現される補助記憶装置である。
入出力インタフェース１１００は、計算機１０００と入出力デバイスとを接続するためのインタフェースである。例えば入出力インタフェース１１００には、第１表示部５１０、カメラ５１２、音出力部５１３、マイク５１４、および入力装置５１６が接続されている。入力装置５１６はたとえばキーボードやマウス等である。なお、入出力インタフェース１１００には第１表示部５１０と入力装置５１６を兼ねたタッチパネルが接続されていても良い。
The input/
ネットワークインタフェース１１２０は、計算機１０００を通信ネットワーク５００に接続するためのインタフェースである。この通信ネットワーク５００は、例えば LAN（Local Area Network）や WAN（Wide Area Network）である。ネットワークインタフェース１１２０がネットワークに接続する方法は、無線接続であってもよいし、有線接続であってもよい。
A
ストレージデバイス１０８０は、医師側端末５１の各機能構成部を実現するプログラムモジュールを記憶している。プロセッサ１０４０は、これら各プログラムモジュールをメモリ１０６０に読み出して実行することで、各プログラムモジュールに対応する機能を実現する。
The
図６は、患者側端末５２のハードウエア構成の一例を示す図である。患者側端末５２は計算機２０００を用いて実現される。計算機２０００は任意の計算機である。この計算機２０００は、バス２０２０、プロセッサ２０４０、メモリ２０６０、ストレージデバイス２０８０、入出力インタフェース２１００、及びネットワークインタフェース２１２０を有する。これらは、図５に示したバス１０２０、プロセッサ１０４０、メモリ１０６０、ストレージデバイス１０８０、入出力インタフェース１１００、及びネットワークインタフェース１１２０と同様である。ただし、入出力インタフェース２１００には、電子聴診器５２０、第２表示部５２１、カメラ５２２、音出力部５２３、マイク５２４、および入力装置５２６が接続されている。なお、入出力インタフェース２１００には第２表示部５２１と入力装置５２６を兼ねたタッチパネルが接続されていても良い。
FIG. 6 is a diagram showing an example of the hardware configuration of the
図７は、サーバ５５のハードウエア構成の一例を示す図である。サーバ５５は計算機５０００を用いて実現される。計算機５０００は任意の計算機である。この計算機５０００は、バス５０２０、プロセッサ５０４０、メモリ５０６０、ストレージデバイス５０８０、入出力インタフェース５１００、及びネットワークインタフェース５１２０を有する。これらは、図５に示したバス１０２０、プロセッサ１０４０、メモリ１０６０、ストレージデバイス１０８０、入出力インタフェース１１００、及びネットワークインタフェース１１２０と同様である。ただし、入出力インタフェース５１００には、ディスプレイ、スピーカー等の出力装置５５１、およびマイク、キーボード、マウス等の入力装置５５３が接続されている。
FIG. 7 is a diagram showing an example of the hardware configuration of the
医師側端末５１は第１表示部５１０、カメラ５１２、音出力部５１３およびマイク５１４を備える。医師側端末５１は主に医師に用いられる。第１表示部５１０は医師が見るべきディスプレイである。カメラ５１２は、医師の様子、中でも主に医師の顔を撮影するウェブカメラ等の撮影装置である。音出力部５１３は、電子聴診器５２０で取得された生体音や、患者側端末５２のマイク５２４で取得された患者の声等を音として出力する装置であり、たとえばスピーカー、ヘッドホンまたはイヤホンである。マイク５１４は、医師の声を取得する。医師は、音出力部５１３およびマイク５１４を用いて患者側端末５２を用いる患者および補助者と会話ができる。
The doctor-
患者側端末５２は、電子聴診器５２０、第２表示部５２１、カメラ５２２、音出力部５２３、およびマイク５２４を備える。患者側端末５２は主に、患者または補助者に用いられる。補助者は診察を補助する者であり、たとえば介護者、看護者、他の医師等が挙げられる。電子聴診器５２０は、患者の生体音を取得するための聴診器である。第２表示部５２１は、患者が見るべきディスプレイである。カメラ５２２は、患者の様子を撮影するウェブカメラ等の撮影装置である。音出力部５２３は、医師側端末５１のマイク５１４で取得された医師の声等を音として出力する装置であり、たとえばスピーカー、ヘッドホンまたはイヤホンである。マイク５２４は患者の声等を取得する。患者および補助者は、音出力部５２３およびマイク５２４を用いて医師側端末５１を用いる医師と会話ができる。
The patient-
電子聴診器５２０について以下に詳しく説明する。電子聴診器５２０は聴診において患者の生体音を検出する。電子聴診器５２０は生体音を電気信号に変換するセンサを備える。そして、電子聴診器５２０からは生体音を示す音データが出力される。センサはたとえば、マイクロフォンまたは振動センサである。マイクロフォンは生体音に起因した空気の振動を電気信号に変換する。この電気信号の信号レベル値は、空気の振動の音圧を示す。一方、振動センサは、生体音に起因した媒質（例えば、対象者の体表）の振動を電気信号に変換する。この電気信号の信号レベル値は、媒質の振動変位を示す。たとえば、振動センサがダイヤフラムを備える場合、媒質の振動がダイヤフラムに伝達され、ダイヤフラムの振動が電気信号に変換される。なお、電気信号はアナログ信号であっても良いしデジタル信号であっても良い。また、電子聴診器５２０はセンサに加え、電気信号を処理する回路等を含んで構成される。電気信号を処理する回路としてはたとえばＡ／Ｄ変換回路およびフィルタ回路が挙げられる。ただし、電気信号の処理は情報処理装置１０で行われても良い。
取得部１１０は音データを取得する。音データは電気信号を示すデータであり、電子聴診器５２０で得られた電気信号の信号レベル値を時系列で示すデータである。すなわち、音データは音波の波形を表す。
電子聴診器５２０はさらに状態情報を出力し、その状態情報を取得部１１０が取得する。状態情報は、電子聴診器５２０が測定可能な状態であるか否かを示す情報を含む。
The
電子聴診器５２０の使用方法の例について説明する。電子聴診器５２０のユーザ（たとえば患者または補助者）は、生体音の測定に先立ち電子聴診器５２０の電源をオンにする。そうすることで電子聴診器５２０が測定のスタンバイ状態となる。その上で、ユーザは電子聴診器５２０の検出部（たとえばチェストピース）を患者の体にあてる。電子聴診器５２０の検出部には、圧力センサが備えられており、検出部が患者の体に当てられたことを検出できる。この圧力センサは測定スイッチを構成しており、圧力センサが圧力を検知している間、電子聴診器５２０で生体音が測定される。検出部が患者の体から離れると測定が停止する。また、ユーザが電子聴診器５２０の電源をオフにすることで、電子聴診器５２０の動作が終了する。
An example of how to use the
なお、電源のオンとオフの切り替えは、電子聴診器５２０の本体に設けられた電源スイッチにより行えるほか、患者側端末５２の計算機２０００に対する所定の切り替え操作によって行えても良い。また、圧力センサとは別途操作可能なスイッチが、測定スイッチとしてさらに電子聴診器５２０に設けられていても良い。
The power can be switched on and off by a power switch provided on the main body of the
状態情報はたとえば、電子聴診器５２０の電源がオンであるかオフであるかを示す情報と、電子聴診器５２０が測定中であるか否かを示す情報との少なくともいずれかを含む。電源のオンとオフはたとえば上記した電源スイッチで切り替えられる。また、電子聴診器５２０が測定中であるか否かはたとえば上記した測定スイッチにより切り替えられる。
The status information includes, for example, information indicating whether
第１表示制御部１３０はたとえば電子聴診器５２０が測定中となったときに聴診中と判定し、表示モードを聴診モードとする。ただし、第１表示制御部１３０は、電子聴診器５２０の電源がオンになったときに聴診準備中と判定し、表示モードを聴診モードとしても良い。また、第１表示制御部１３０はたとえば電子聴診器５２０が測定中でなくなったときに聴診中でないと判定し、表示モードを問診モードとする。ただし、第１表示制御部１３０は、電子聴診器５２０の電源がオフになったときに聴診が終了したと判定し、表示モードを問診モードとしても良い。なお、各モードについては詳しく後述する。
For example, when the
状態情報はたとえば電子聴診器５２０の状態を示すデジタル信号を含んでも良い。たとえばデジタル信号がローレベルおよびハイレベルのうち一方であるとき、電子聴診器５２０が測定可能な状態であることを示し、他方であるとき、電子聴診器５２０が測定可能な状態でないことを示す。ただし、デジタル信号に加えてまたは代えて、状態情報は、電子聴診器５２０の状態が切り替わった時に出力される信号やコマンドを含んでも良い。この信号やコマンドは、たとえば、電子聴診器５２０が測定可能な状態になったことを示す情報、または、測定可能な状態でなくなったことを示す情報である。第１表示制御部１３０は、取得部１１０が新たな信号またはコマンドを取得しない限り、それまでの状態が継続していると判定できる。なお、測定可能な状態とは、電子聴診器５２０が測定中である状態または電子聴診器５２０の電源がオンである状態の少なくとも一方である。
Status information may include, for example, digital signals indicating the status of
また、音データが状態情報を兼ねても良い。たとえば情報処理装置１０において音データの波形に特定のパターンが含まれる場合に、第１表示制御部１３０は電子聴診器５２０が測定中であると判定できる。特定のパターンとはたとえば呼吸音や心音に相当するパターンである。音データの波形に特定のパターンが含まれるか否かはたとえば予め記憶部等に保持された参照パターンとのパターンマッチングにより判定される。なお、記憶部はストレージデバイス１０８０、ストレージデバイス２０８０、およびストレージデバイス５０８０の少なくともいずれかである。
Also, the sound data may serve as the state information. For example, when the waveform of the sound data in the
図８は、実施例１に係る情報処理装置１０の動作を例示するフローチャートである。第１表示制御部１３０は状態情報に基づいて問診モードと聴診モードとを切り替える。第１表示制御ステップＳ１３０は、ステップＳ１３１、ステップＳ１３３，およびステップＳ１３４を含む。以下に詳しく説明する。
FIG. 8 is a flowchart illustrating the operation of the
取得部１１０は電子聴診器５２０から状態情報を常時受け付ける（取得ステップＳ１１０）。そして、ステップＳ１３１において第１表示制御部１３０は、状態情報に基づいて上記したように、聴診中または聴診準備中であるか否かを判定する。この判定は予め定められた間隔（たとえば１秒ごと）に行われる。次いで、ステップＳ１３１において聴診中または聴診準備中であると判定された場合（ステップＳ１３１のＹｅｓ）、第１表示制御部１３０は第１表示部５１０の表示を聴診モードにする（ステップＳ１３３）。一方、ステップＳ１３１において聴診中または聴診準備中でないと判定された場合（ステップＳ１３１のＮｏ）、第１表示制御部１３０は第１表示部５１０の表示を問診モードにする（ステップＳ１３４）。ステップＳ１３３およびステップＳ１３４に次いで、第１表示制御部１３０はステップＳ１３５を行う。ステップＳ１３５では、診察が継続しているか否かが判定される。具体的にはたとえば医師側端末５１および患者側端末５２の少なくとも一方に対し終了の操作が行われた場合に診察が終了したと判定され、それ以外の場合に診察が継続していると判定される。診察が継続している場合（ステップＳ１３５のＮｏ）、状態情報の受け付け（ステップＳ１１０）および電子聴診器５２０の判定（ステップＳ１３１）が繰り返し行われる。こうすることにより、問診中と聴診中とで第１表示部５１０の表示内容が適切に切り替えられる。一方、診察が終了する場合（ステップＳ１３５のＹｅｓ）、情報処理装置１０の処理が終了する。
図９は問診モードにおける第１表示部５１０の表示内容を例示する図である。本図の例では、第１表示部５１０には患者の顔の画像が大きく表示されている。この画像はカメラ５２２により得られた画像であり、すなわちカメラ５２２は患者の顔に向かってズームされている。なお、問診モードにおいて、カメラ５２２は患者の患部に向かってズームされ、第１表示部５１０には患者の患部の画像が大きく表示されても良い。第１表示部５１０のこのような表示内容により、医師は患者の顔色や表情、患部の状況等を確認して診断の助けとすることができる。また、本図の例では第１表示部５１０に医師の顔の画像も表示されている。この画像はカメラ５１２により撮影された画像であり、患者側端末５２の第２表示部５２１にも同時に表示される。第１表示部５１０に医師の顔の画像が表示されることにより、医師はカメラ５１２で取得され、患者側端末５２で表示される画像を確認できる。
FIG. 9 is a diagram exemplifying display contents of the
図１０は、聴診モードにおける第１表示部５１０の表示内容の第１例を示す図である。本図の例では、患者の顔を大きく写した画像の代わりに、患者の胸部の全体を含む画像が表示されている。また、図９と同様、第１表示部５１０には医師の顔の画像も表示されている。くわえて、上記した通り、取得部１１０は聴診で得られた生体音を示す音データをさらに取得する。そして取得された音データは音出力部５１３から出力される。第１表示部５１０に患者の胸部の全体を含む画像が表示されることにより、医師は患者の体のどの位置の生体音が取得されているかを正確に把握しながら聴診をすることができ、正確な診断が行える。また、必要に応じて電子聴診器５２０のユーザに、聴診の位置等をアドバイスできる。
FIG. 10 is a diagram showing a first example of display contents of the
上記したように、第１表示部５１０の表示内容は少なくとも一時的に患者を含む画像を含む。ここで第１表示制御部１３０は、取得部１１０で取得された状態情報に基づき、画像を取得するためのカメラ５２２の画角および方向の少なくとも一方を制御する。具体的にはカメラ５２２の画角および方向の少なくとも一方は第１表示制御部１３０からの制御信号により制御される。第１表示制御部１３０は、問診モードにおいては患者の顔や患部を見やすくし、聴診モードにおいては患者の体のどの位置が聴診されているかを把握しやすくするよう、制御を行う。すなわち第１表示制御部１３０は、聴診モードにおけるカメラ５２２の画角を問診モードにおけるカメラ５２２の画角よりも広くする。また、第１表示制御部１３０は、聴診モードにおいてカメラ５２２の方向を患者の体に向ける。このようにカメラ５２２の画角および方向の少なくとも一方が制御されることにより、一つのカメラ５２２のみを用いる場合でも画像の切り替えが可能である。
As described above, the display content of the
制御信号はカメラ５２２の画角および方向を示す信号である。各モードでの画角および方向を示す情報は、予め第１表示制御部１３０からアクセス可能な記憶部（たとえばストレージデバイス１０８０、ストレージデバイス２０８０、およびストレージデバイス５０８０のいずれか）に保持されており、第１表示制御部１３０はそれを読み出して制御に用いることができる。また、患者側端末５２または医師側端末５１のユーザは、診察に先立ち、各モードでの画角および方向を設定することができる。そして、設定された画角および方向を示す情報が記憶部に保持される。
The control signal is a signal indicating the angle of view and direction of
なお、問診モードと聴診モードとは、上記したように状態情報に基づき切り替えられる他、ユーザが各端末に対して切り替え操作を行うことにより切り替えることもできる。 The inquiry mode and the auscultation mode can be switched based on the state information as described above, and can also be switched by the user performing a switching operation on each terminal.
図３の例において、情報処理装置１０は解析部１５０をさらに備える。解析部１５０は、取得部１１０が取得した音データを解析する。そして、第１表示制御部１３０は、状態情報に基づき、第１表示部５１０に電子聴診器５２０から取得した音データおよび音データの解析結果の少なくとも一方を表示するタイミングを制御する。第１表示制御部１３０は、たとえば第１表示部５１０の表示が聴診モードに切り替わった時に、音データおよび音データの解析結果の少なくとも一方を、第１表示部５１０に表示させても良い。また、第１表示制御部１３０は、たとえば第１表示部５１０の表示が聴診モードに切り替わってから、予め定められた時間が経過した時点で音データおよび音データの解析結果の少なくとも一方を、第１表示部５１０に表示させても良い。
In the example of FIG. 3 , the
図１１は聴診モードにおける第１表示部５１０の表示内容の第２例を示す図である。本図の例において第１表示部５１０の表示内容には、聴診されている患者の画像および医師の顔の画像に加え、聴診位置を示すマップおよび音データの解析結果が含まれる。
FIG. 11 is a diagram showing a second example of display contents of the
図１２は、聴診位置の指定または表示を行うマップを例示する図である。たとえば電子聴診器５２０のユーザは、各位置の聴診に先立ち、電子聴診器５２０をあてる位置を患者側端末５２に入力する。たとえば患者側端末５２の第２表示部５２１には、本図のような体の形を示す図（マップ）と、聴診の候補となる位置を示すマークが合わせて示される。そして、患者側端末５２のユーザは、聴診を行う対象の位置を、マウス等の入力装置５２６を用いて選択し、患者側端末５２に入力する。患者側端末５２はその入力を受け付ける。入力された位置は第２表示部５２１に表示されるマップにおいて、たとえば色等により識別可能に表示される。このような聴診位置を示すマップと、聴診中の患者の画像と合わせて確認することにより、医師は聴診位置を正確に把握することができる。また、電子聴診器５２０で得られた音データに位置を示す情報が関連づけられ、解析等に用いられる。
FIG. 12 is a diagram illustrating a map for designating or displaying auscultation positions. For example, the user of the
図１１の例において第１表示部５１０には、音データの解析結果として呼吸数および各音成分の強度が表示されている。解析部１５０はたとえば取得された音データの振幅の大きさに基づいて呼吸の周期を算出し、１分あたりの呼吸数を算出する。
In the example of FIG. 11, the
また、解析部１５０は、たとえば取得された音データの波形に対してパターンマッチングを行うことで各音成分の強度を導出する。音成分としてはたとえば正常肺胞呼吸音、類鼾音、笛声音、捻髪音、水泡音等が挙げられる。パターンマッチングのための複数の参照波形データはあらかじめ解析部１５０からアクセス可能な記憶部（たとえばストレージデバイス１０８０、ストレージデバイス２０８０、またはストレージデバイス５０８０）に保持されており、解析部１５０はそれを読み出して取得する。各参照波形データは、各音成分に関連付けられている。そして、解析部１５０は取得部１１０で取得された音データと各参照波形データとのパターンマッチングを行い、各参照波形データとの類似度を算出する。そして、算出された類似度を、各成分の強度とする。
Also, the
ただし、解析部１５０は以下の様な方法で各音成分の強度を導出しても良い。解析部１５０からアクセス可能な記憶部には予め、複数の参照情報が保持されている。各参照情報は、特定の音成分に関連づけられており、その音成分の発生時期および周波数特性を含む情報である。たとえば、捻髪音は呼吸のうち吸気相において比較的高めの周波数帯に現れる。一方、水泡音は吸気相および呼気相の両方において比較的低めの周波数帯に現れる。そこで、発生時期ごとかつ周波数特性ごとのパラメータを含む参照情報を用いることで、より精度良く各音成分の強度を導出できる。
However, the
参照情報は、たとえばパラメータとして、高周波数帯（７５０Ｈｚ～４ｋＨｚ）の呼気相数値、高周波数帯の吸気相数値、低周波数帯（０Ｈｚ～７５０Ｈｚ）の呼気相数値、および低周波数帯の吸気相数値の４つの数値を含む。ここで各数値は音成分の出現確率に対応する。そして、解析部１５０は、音データに基づき高周波数帯の呼気相のパワー、高周波数帯の吸気相のパワー、低周波数帯の呼気相のパワー、および低周波数帯の吸気相のパワーを算出する。これらのパワーのバランスが、参照情報のパラメータのバランスに近いほど、その音成分が含まれる確率が高いと言える。したがって、解析部１５０は、参照情報に含まれるパラメータと、算出したパワーとを用いて尤度（一致度合い）を算出し、算出された尤度を各成分の強度とする。なお、解析部１５０の解析方法はこれらの例に限定されない。
For example, the reference information includes, as parameters, an expiratory phase value in a high frequency band (750 Hz to 4 kHz), an inspiratory phase value in a high frequency band, an expiratory phase value in a low frequency band (0 Hz to 750 Hz), and an inspiratory phase value in a low frequency band. contains four numbers of Here, each numerical value corresponds to the appearance probability of a sound component. Then, the
そして、第１表示制御部１３０は、上記したようなタイミングで、音データの解析結果を第１表示部５１０に表示させる。医師は第１表示部５１０に表示された解析結果を参考にして、診断を行うことができる。
Then, the first
なお、本実施例に係る情報処理装置１０は必ずしも解析部１５０を備えていなくても良い。
Note that the
図３の例において、情報処理装置１０は検知部１６０をさらに備える。検知部１６０は、電子聴診器５２０で取得された音データに基づき、患者の異常を検知する。具体的には検知部１６０は、解析部１５０の解析結果に基づき患者の異常を検知することができる。すなわち、解析部１５０で導出された各成分の強度が、予め定められた基準値を上回る場合、検知部１６０は患者に異常があると判定する（すなわち異常を検知する）。基準値は成分毎に独立に定められ、検知部１６０からアクセス可能な記憶部（たとえばストレージデバイス１０８０、ストレージデバイス２０８０、またはストレージデバイス５０８０）に保持されている。また、検知部１６０は、解析部１５０で導出された呼吸数が予め定められた回数を上回る場合、検知部１６０は患者に異常があると判定する（すなわち異常を検知する）。
In the example of FIG. 3 , the
図１３は聴診モードにおける第１表示部５１０の表示内容の第３例を示す図である。本図は、検知部１６０が異常を検知した場合の表示内容を示している。第１表示制御部１３０は、検知部１６０が異常を検知した時に、第１表示部５１０に異常が検知された旨の表示をさせる。
FIG. 13 is a diagram showing a third example of display contents of the
なお、本実施例に係る情報処理装置１０は必ずしも検知部１６０を備えていなくても良い。
Note that the
また、問診モードにおいて、第１表示部５１０にはさらに過去の聴診結果や診断結果等が、医師側端末５１に対する操作に応じて表示されても良い。
Further, in the inquiry mode, past auscultation results, diagnosis results, and the like may be further displayed on the
以上、本実施例によれば、実施形態と同様、第１表示制御部１３０が、状態情報に基づき、医師が見るべき第１表示部５１０の表示内容を制御する。したがって、遠隔診察における機器操作が簡単化され、利便性が向上する。また、医師が適切な情報を容易に得られるため、診断精度が向上する。
As described above, according to the present embodiment, the first
（実施例２）
図１４は、実施例２に係る情報処理装置１０およびシステム２０の構成を例示する図である。本実施例に係る情報処理装置１０およびシステム２０は、以下に説明する点を除いて実施例１に係る情報処理装置１０およびシステム２０とそれぞれ同じである。
(Example 2)
FIG. 14 is a diagram illustrating configurations of the
本実施例において第１表示部５１０の表示内容は少なくとも一時的に患者を含む画像を含む。そして、取得部１１０は、複数のカメラ５２２から患者を含む画像を取得可能である。すなわち、計算機２０００の入出力インタフェース２１００には複数のカメラ５２２が接続されている。そして、第１表示制御部１３０は、状態情報に基づき、複数のカメラ５２２から、第１表示部５１０に表示させる画像を取得するためのカメラ５２２を選択する。以下に詳しく説明する。
In this embodiment, the display content of the
本実施例に係る問診モードでの第１表示部５１０の表示内容は図９で例示される。また、本実施例に係る聴診モードでの第１表示部５１０の表示内容は図１０、図１１、および図１３で例示される。
FIG. 9 exemplifies display contents of the
本実施例において複数のカメラ５２２は互いに異なる範囲を撮影するように設けられている。たとえば複数のカメラ５２２のうち一つのカメラ５２２である第１のカメラ５２２は、他のカメラ５２２よりも患者の顔を大きく撮影するように設置されている。また、複数のカメラ５２２のうち一つのカメラ５２２である第２のカメラ５２２は、他のカメラ５２２よりも患者の患部を大きく撮影するように設置されていてもよい。問診モードでは、第１のカメラ５２２や第２のカメラ５２２のカメラ５２２の画像が第１表示部５１０の表示内容に含まれる。なお、複数のカメラ５２２に第１のカメラ５２２と第２のカメラ５２２の両方が含まれる場合、問診モードにおいて医師側端末５１に対する操作に応じてこれらのカメラ５２２の画像が切り替え可能である。ただし、第１のカメラ５２２による画像と第２のカメラ５２２による画像の両方が同時に表示されても良い。
In this embodiment, a plurality of
一方、複数のカメラ５２２には、患者の胸部の全体を撮影する用に設置された第３のカメラ５２２が含まれる。そして聴診モードにおいて第１表示部５１０の表示内容には、この第３のカメラ５２２で取得された画像が含まれる。
On the other hand, the plurality of
第１表示制御部１３０は実施例１と同様、状態情報に基づいて問診モードと聴診モードとを切り替える。その結果、複数のカメラ５２２で得られる画像のうち第１表示部５１０で表示される画像が、状態情報に基づいて切り替えられる。したがって、画像の切り替えが瞬時に行える。
As in the first embodiment, the first
以上、本実施例によれば、実施形態と同様、第１表示制御部１３０が、状態情報に基づき、医師が見るべき第１表示部５１０の表示内容を制御する。したがって、遠隔診察における機器操作が簡単化され、利便性が向上する。また、医師が適切な情報を容易に得られるため、診断精度が向上する。
As described above, according to the present embodiment, the first
（実施例３）
図１５は、実施例３に係る情報処理装置１０およびシステム２０の構成を例示する図である。本実施形態に係る情報処理装置１０およびシステム２０は第２表示制御部１７０をさらに備える点を除いて実施例１および実施例２の少なくともいずれかに係る情報処理装置１０およびシステム２０とそれぞれ同じである。第２表示制御部１７０は、状態情報に基づき、患者が見るべき第２表示部５２１の表示内容を制御する。以下に詳しく説明する。
(Example 3)
FIG. 15 is a diagram illustrating configurations of the
図１６は問診モードにおける第２表示部５２１の表示内容を例示する図である。本図の例において、第２表示部５２１には医師側端末５１のカメラ５１２で取得された医師の顔の画像が大きく表示されている。第２表示部５２１のこのような表示内容により、患者や補助者は医師の表情等を見ながら安心して問診を受けられる。また、本図の例では第２表示部５２１に患者の顔の画像も表示されている。この画像はカメラ５２２により撮影された画像であり、医師側端末５１の第１表示部５１０にも同時に表示される。電子聴診器５２０に患者の顔の画像が表示されることにより、患者や補助者はカメラ５２２により撮影され、医師側端末５１で表示される画像を確認できる。
FIG. 16 is a diagram exemplifying display contents of the
図１７は、聴診モードにおける第２表示部５２１の表示内容を例示する図である。本図の例では、第２表示部５２１の表示内容には医師の顔の画像に加え、第１表示部５１０に同時に表示される患者の画像、音データの解析結果、および、聴診位置を示すマップが含まれる。
FIG. 17 is a diagram illustrating display contents of the
第２表示制御部１７０は、第１表示制御部１３０が第１表示部５１０の表示モードを切り替えるのと同様に、状態情報に基づいて第２表示部５２１における問診モードと聴診モードとの切り替えを行う。たとえば第２表示部５２１における問診モードと聴診モードとの切り替えは、第１表示部５１０における問診モードと聴診モードとの切り替えと同時に行うことができる。
The second
また、第２表示制御部１７０は、状態情報に基づき第２表示部５２１に電子聴診器５２０の使用に関するガイド情報を表示させるタイミングを制御してもよい。第２表示部５２１はたとえば第２表示部５２１の表示内容を聴診モードに切り替えた直後に、ガイド情報の表示を開始することができる。なお、ガイド情報は上記したようなカメラ５１２やカメラ５２２で得られる画像等と合わせて第２表示部５２１に表示される。
Further, the second
図１８は、実施例３に係る情報処理装置１０の使用方法を例示するフローチャートである。本図を参照し、情報処理装置１０の動作について説明する。問診モードから聴診モードに切り替わると、医師側端末５１の第１表示部５１０には図１２のようなマップが表示される。そして、医師は、患者が聴診すべき位置をマップ上で指定する（ステップＳ２１０）。医師側端末５１がその指定を受け付けると、患者側端末５２の第２表示部５２１において図１２のようなマップが表示され、そのマップ上において医師側端末５１で指定された位置が明示される（ステップＳ２２０）。位置の明示はたとえば、マップにおいて指定された位置のマークの色が変わる等して行われる。
FIG. 18 is a flowchart illustrating a usage method of the
電子聴診器５２０のユーザは、第２表示部５２１を確認し、指定された位置を電子聴診器５２０で聴診する（ステップＳ２３０）。そしてその位置の聴診が完了すると、ユーザは完了した旨の入力を患者側端末５２に対して行う（ステップＳ２４０）。すると、医師側端末５１の第１表示部５１０に指定位置の聴診が完了した旨が表示される（ステップＳ２５０）。このようなステップＳ２１０からステップＳ２５０を必要に応じて繰り返すことにより、聴診が容易に行える。また、医師側と患者側とで適切なコミュニケーションを図りつつ、スムーズな診察が行われる。また、電子聴診器５２０で得られた音データに対して、その際の指定位置を示す情報が関連づけられる。そうすることにより、データの管理と解析が容易となる。
The user of the
上記のステップＳ２１０からステップＳ２５０において第１表示部５１０および第２表示部５２１に表示されるマップ等がガイド情報に相当する。ここで、第２表示部５２１に表示されるガイド情報はたとえば上記のように医師側端末５１におけるリアルタイムの誘導操作に基づくものとすることができる。また、ガイド情報には電子聴診器５２０の操作方法が含まれても良い。その場合、第２表示部５２１は特に、状態情報に基づき、電子聴診器５２０の電源がオンになったときにガイド情報を表示させることが好ましい。
The maps and the like displayed on the
以上、本実施例によれば、実施形態と同様、第１表示制御部１３０が、状態情報に基づき、医師が見るべき第１表示部５１０の表示内容を制御する。したがって、遠隔診察における機器操作が簡単化され、利便性が向上する。また、医師が適切な情報を容易に得られるため、診断精度が向上する。
As described above, according to the present embodiment, the first
くわえて、本実施例によれば、第２表示制御部１７０は、状態情報に基づき、患者が見るべき第２表示部５２１の表示内容を制御する。したがって、よりスムーズに遠隔診察が行われる。
In addition, according to this embodiment, the second
以上、図面を参照して本発明の実施形態について述べたが、これらは本発明の例示であり、上記以外の様々な構成を採用することもできる。たとえば、上述の説明で用いたシーケンス図やフローチャートでは、複数の工程（処理）が順番に記載されているが、各実施形態で実行される工程の実行順序は、その記載の順番に制限されない。各実施形態では、図示される工程の順番を内容的に支障のない範囲で変更することができる。また、上述の各実施形態は、内容が相反しない範囲で組み合わせることができる。 Although the embodiments of the present invention have been described above with reference to the drawings, these are examples of the present invention, and various configurations other than those described above can also be adopted. For example, in the sequence diagrams and flowcharts used in the above description, a plurality of steps (processes) are described in order, but the execution order of the steps executed in each embodiment is not limited to the order of description. In each embodiment, the order of the illustrated steps can be changed within a range that does not interfere with the content. Moreover, each of the above-described embodiments can be combined as long as the contents do not contradict each other.
以下、参考形態の例を付記する。
１－１． 患者を聴診するための電子聴診器の状態を示す状態情報を取得する取得部と、
前記状態情報に基づき、医師が見るべき第１表示部の表示内容を制御する第１表示制御部とを備える情報処理装置。
１－２． １－１．に記載の情報処理装置において、
前記第１表示部の表示内容は少なくとも一時的に前記患者を含む画像を含み、
前記第１表示制御部は、前記状態情報に基づき、前記画像を取得するためのカメラの画角および方向の少なくとも一方を制御する情報処理装置。
１－３． １－１．に記載の情報処理装置において、
前記第１表示部の表示内容は少なくとも一時的に前記患者を含む画像を含み、
前記第１表示制御部は、前記状態情報に基づき、複数のカメラから前記画像を取得するための前記カメラを選択する情報処理装置。
１－４． １－１．から１－３．のいずれか一つに記載の情報処理装置において、
前記第１表示制御部は、前記状態情報に基づき、前記第１表示部に前記電子聴診器から取得した音データおよび前記音データの解析結果の少なくとも一方を表示するタイミングを制御する情報処理装置。
１－５． １－１．から１－４．のいずれか一つに記載の情報処理装置において、
前記状態情報は、前記電子聴診器が測定可能な状態であるか否かを示す情報を含む情報処理装置。
１－６． １－５．に記載の情報処理装置において、
前記状態情報は、前記電子聴診器の電源がオンであるかオフであるかを示す情報と、前記電子聴診器が測定中であるか否かを示す情報との少なくともいずれかを含む情報処理装置。
１－７． １－１．から１－６．のいずれか一つに記載の情報処理装置において、
前記状態情報に基づき、前記患者が見るべき第２表示部の表示内容を制御する第２表示制御部をさらに備える情報処理装置。
１－８． １－７．に記載の情報処理装置において、
前記第２表示制御部は、前記状態情報に基づき前記第２表示部に前記電子聴診器の使用に関するガイド情報を表示させるタイミングを制御する情報処理装置。
１－９． １－１．から１－８．のいずれか一つに記載の情報処理装置において、
前記電子聴診器で取得された音データに基づき、前記患者の異常を検知する検知部をさらに備え、
前記第１表示制御部は、前記検知部が前記異常を検知した時に、前記第１表示部に前記異常が検知された旨の表示をさせる情報処理装置。
２－１． １－１．から１－９．のいずれか一つに記載の情報処理装置と
前記電子聴診器とを備えるシステム。
３－１． 患者を聴診するための電子聴診器の状態を示す状態情報を取得する取得ステップと、
前記状態情報に基づき、医師が見るべき第１表示部の表示内容を制御する第１表示制御ステップとを含む情報処理方法。
３－２． ３－１．に記載の情報処理方法において、
前記第１表示部の表示内容は少なくとも一時的に前記患者を含む画像を含み、
前記第１表示制御ステップでは、前記状態情報に基づき、前記画像を取得するためのカメラの画角および方向の少なくとも一方を制御する情報処理方法。
３－３． ３－１．に記載の情報処理方法において、
前記第１表示部の表示内容は少なくとも一時的に前記患者を含む画像を含み、
前記第１表示制御ステップでは、前記状態情報に基づき、複数のカメラから前記画像を取得するための前記カメラを選択する情報処理方法。
３－４． ３－１．から３－３．のいずれか一つに記載の情報処理方法において、
前記第１表示制御ステップでは、前記状態情報に基づき、前記第１表示部に前記電子聴診器から取得した音データおよび前記音データの解析結果の少なくとも一方を表示するタイミングを制御する情報処理方法。
３－５． ３－１．から３－４．のいずれか一つに記載の情報処理方法において、
前記状態情報は、前記電子聴診器が測定可能な状態であるか否かを示す情報を含む情報処理方法。
３－６． ３－５．に記載の情報処理方法において、
前記状態情報は、前記電子聴診器の電源がオンであるかオフであるかを示す情報と、前記電子聴診器が測定中であるか否かを示す情報との少なくともいずれかを含む情報処理方法。
３－７． ３－１．から３－６．のいずれか一つに記載の情報処理方法において、
前記状態情報に基づき、前記患者が見るべき第２表示部の表示内容を制御する第２表示制御ステップをさらに含む情報処理方法。
３－８． ３－７．に記載の情報処理方法において、
前記第２表示制御ステップでは、前記状態情報に基づき前記第２表示部に前記電子聴診器の使用に関するガイド情報を表示させるタイミングを制御する情報処理方法。
３－９． ３－１．から３－８．のいずれか一つに記載の情報処理方法において、
前記電子聴診器で取得された音データに基づき、前記患者の異常を検知する検知ステップをさらに含み、
前記第１表示制御ステップでは、前記検知ステップで前記異常が検知された時に、前記第１表示部に前記異常が検知された旨の表示をさせる情報処理方法。
４－１． ３－１．から３－９．のいずれか一つに記載の情報処理方法の各ステップをコンピュータに実行させるプログラム。
Examples of reference forms are added below.
1-1. an acquisition unit for acquiring status information indicating the status of an electronic stethoscope for auscultating a patient;
An information processing apparatus comprising: a first display control unit that controls display content of the first display unit to be viewed by a doctor based on the state information.
1-2. 1-1. In the information processing device according to
the display content of the first display unit at least temporarily includes an image including the patient;
The first display control unit is an information processing device that controls at least one of an angle of view and a direction of a camera for acquiring the image based on the state information.
1-3. 1-1. In the information processing device according to
the display content of the first display unit at least temporarily includes an image including the patient;
The information processing device, wherein the first display control unit selects the camera for acquiring the image from a plurality of cameras based on the state information.
1-4. 1-1. to 1-3. In the information processing device according to any one of
The first display control unit controls timing for displaying at least one of sound data obtained from the electronic stethoscope and an analysis result of the sound data on the first display unit based on the state information.
1-5. 1-1. to 1-4. In the information processing device according to any one of
The information processing apparatus, wherein the state information includes information indicating whether the electronic stethoscope is in a measurable state.
1-6. 1-5. In the information processing device according to
The information processing apparatus, wherein the state information includes at least one of information indicating whether the power of the electronic stethoscope is on or off and information indicating whether the electronic stethoscope is being measured. .
1-7. 1-1. to 1-6. In the information processing device according to any one of
The information processing apparatus further comprising a second display control section that controls display content of the second display section to be viewed by the patient based on the state information.
1-8. 1-7. In the information processing device according to
The second display control unit is an information processing device that controls timing for displaying guide information regarding use of the electronic stethoscope on the second display unit based on the state information.
1-9. 1-1. to 1-8. In the information processing device according to any one of
further comprising a detection unit that detects an abnormality of the patient based on sound data acquired by the electronic stethoscope;
The first display control unit causes the first display unit to display that the abnormality has been detected when the detection unit detects the abnormality.
2-1. 1-1. to 1-9. and the electronic stethoscope.
3-1. an obtaining step of obtaining status information indicative of a status of an electronic stethoscope for auscultating a patient;
and a first display control step of controlling the display content of the first display unit to be viewed by a doctor based on the state information.
3-2. 3-1. In the information processing method described in
the display content of the first display unit at least temporarily includes an image including the patient;
In the information processing method, in the first display control step, at least one of an angle of view and a direction of a camera for acquiring the image is controlled based on the state information.
3-3. 3-1. In the information processing method described in
the display content of the first display unit at least temporarily includes an image including the patient;
In the information processing method, in the first display control step, the camera for acquiring the image from a plurality of cameras is selected based on the state information.
3-4. 3-1. to 3-3. In the information processing method according to any one of
In the first display control step, the information processing method controls timing for displaying at least one of sound data obtained from the electronic stethoscope and an analysis result of the sound data on the first display unit based on the state information.
3-5. 3-1. to 3-4. In the information processing method according to any one of
The information processing method, wherein the state information includes information indicating whether the electronic stethoscope is in a measurable state.
3-6. 3-5. In the information processing method described in
The information processing method, wherein the state information includes at least one of information indicating whether the power of the electronic stethoscope is on or off and information indicating whether the electronic stethoscope is being measured. .
3-7. 3-1. to 3-6. In the information processing method according to any one of
The information processing method further comprising a second display control step of controlling display content of the second display unit to be viewed by the patient based on the state information.
3-8. 3-7. In the information processing method described in
In the second display control step, the information processing method controls timing for displaying guide information regarding use of the electronic stethoscope on the second display unit based on the state information.
3-9. 3-1. to 3-8. In the information processing method according to any one of
further comprising a detection step of detecting an abnormality in the patient based on the sound data acquired by the electronic stethoscope;
In the first display control step, when the abnormality is detected in the detection step, the information processing method causes the first display unit to display that the abnormality has been detected.
4-1. 3-1. to 3-9. A program that causes a computer to execute each step of the information processing method according to any one of .
１０ 情報処理装置
２０ システム
５１ 医師側端末
５２ 患者側端末
５５ サーバ
１１０ 取得部
１３０ 第１表示制御部
１５０ 解析部
１６０ 検知部
１７０ 第２表示制御部
５００ 通信ネットワーク
５１０ 第１表示部
５１２，５２２ カメラ
５１３，５２３ 音出力部
５１４，５２４ マイク
５１６，５２６，５５３ 入力装置
５２０ 電子聴診器
５２１ 第２表示部
５５１ 出力装置
１０００，２０００，５０００ 計算機
10
Claims (11)
前記状態情報に基づき、第１表示部の表示内容を制御する第１表示制御部とを備え、
前記第１表示制御部は、前記状態情報に含まれる測定可能な状態であるか否かを示す情報に応じて表示モードの切り替えを行うことを特徴とする情報処理装置。 an acquisition unit for acquiring status information indicating the status of an electronic stethoscope for auscultating a patient;
A first display control unit that controls display content of the first display unit based on the state information ,
The information processing apparatus , wherein the first display control unit switches the display mode in accordance with information included in the state information and indicating whether or not the apparatus is in a measurable state .
前記第１表示部の表示内容は少なくとも一時的に前記患者を含む画像を含み、
前記第１表示制御部は、前記状態情報に基づき、前記画像を取得するためのカメラの画角および方向の少なくとも一方を制御する情報処理装置。 In the information processing device according to claim 1,
the display content of the first display unit at least temporarily includes an image including the patient;
The first display control unit is an information processing device that controls at least one of an angle of view and a direction of a camera for acquiring the image based on the state information.
前記第１表示部の表示内容は少なくとも一時的に前記患者を含む画像を含み、
前記第１表示制御部は、前記状態情報に基づき、複数のカメラから前記画像を取得するための前記カメラを選択する情報処理装置。 In the information processing device according to claim 1,
the display content of the first display unit at least temporarily includes an image including the patient;
The information processing device, wherein the first display control unit selects the camera for acquiring the image from a plurality of cameras based on the state information.
前記第１表示制御部は、前記状態情報に基づき、前記第１表示部に前記電子聴診器から取得した音データおよび前記音データの解析結果の少なくとも一方を表示するタイミングを制御する情報処理装置。 In the information processing device according to any one of claims 1 to 3,
The first display control unit controls timing for displaying at least one of sound data obtained from the electronic stethoscope and an analysis result of the sound data on the first display unit based on the state information.
前記状態情報は、前記電子聴診器の電源がオンであるかオフであるかを示す情報と、前記電子聴診器が測定中であるか否かを示す情報との少なくともいずれかを含む情報処理装置。 In the information processing device according to any one of claims 1 to 4 ,
The information processing apparatus, wherein the state information includes at least one of information indicating whether the power of the electronic stethoscope is on or off and information indicating whether the electronic stethoscope is being measured. .
前記状態情報に基づき、前記第１表示部とは異なる第２表示部の表示内容を制御する第２表示制御部をさらに備える情報処理装置。 In the information processing device according to any one of claims 1 to 5 ,
The information processing apparatus further comprising a second display control section that controls display content of a second display section different from the first display section based on the state information.
前記第２表示制御部は、前記状態情報に基づき前記第２表示部に前記電子聴診器の使用に関するガイド情報を表示させるタイミングを制御する情報処理装置。 In the information processing device according to claim 6 ,
The second display control unit is an information processing device that controls timing for displaying guide information regarding use of the electronic stethoscope on the second display unit based on the state information.
前記電子聴診器で取得された音データに基づき、前記患者の異常を検知する検知部をさらに備え、
前記第１表示制御部は、前記検知部が前記異常を検知した時に、前記第１表示部に前記異常が検知された旨の表示をさせる情報処理装置。 In the information processing device according to any one of claims 1 to 7 ,
further comprising a detection unit that detects an abnormality of the patient based on sound data acquired by the electronic stethoscope;
The first display control unit causes the first display unit to display that the abnormality has been detected when the detection unit detects the abnormality.
前記電子聴診器とを備えるシステム。 A system comprising: the information processing apparatus according to any one of claims 1 to 8 ; and the electronic stethoscope.
前記状態情報に基づき、第１表示部の表示内容を制御する第１表示制御ステップとを含み、
前記第１表示制御ステップでは、前記状態情報に含まれる測定可能な状態であるか否かを示す情報に応じて表示モードの切り替えを行うことを特徴とする情報処理方法。 an obtaining step of obtaining status information indicative of a status of an electronic stethoscope for auscultating a patient;
a first display control step of controlling display content of the first display unit based on the state information ;
The information processing method , wherein in the first display control step, the display mode is switched according to information indicating whether or not the measurement is possible, which is included in the state information .
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2018220174A JP7193080B2 (en) | 2018-11-26 | 2018-11-26 | Information processing device, system, information processing method, and program |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2018220174A JP7193080B2 (en) | 2018-11-26 | 2018-11-26 | Information processing device, system, information processing method, and program |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2020081364A JP2020081364A (en) | 2020-06-04 |
| JP7193080B2 true JP7193080B2 (en) | 2022-12-20 |
Family
ID=70904852
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2018220174A Active JP7193080B2 (en) | 2018-11-26 | 2018-11-26 | Information processing device, system, information processing method, and program |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP7193080B2 (en) |
Families Citing this family (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| TW202329883A (en) * | 2022-01-21 | 2023-08-01 | 日商積水化學工業股份有限公司 | Information processing system, detection device, server device, information processing device, control method, and program |
Citations (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2006042962A (en) | 2004-08-02 | 2006-02-16 | Matsushita Electric Ind Co Ltd | Portable terminal equipment, interactive medical examination system using portable terminal equipment and medical examination data communication method |
| JP2013119014A (en) | 2011-12-08 | 2013-06-17 | Sharp Corp | Information terminal device, remote measurement system, method for controlling the information terminal device, control program and recording medium |
| JP2013123493A (en) | 2011-12-13 | 2013-06-24 | Sharp Corp | Information processing apparatus, stethoscope, control method for information processing apparatus, control program, and recording medium |
| JP2014030625A (en) | 2012-08-03 | 2014-02-20 | Sharp Corp | Information processing apparatus, information processing method, control program, and recording medium |
| JP2015524678A (en) | 2012-06-05 | 2015-08-27 | スリーエム イノベイティブ プロパティズ カンパニー | Electronic stethoscope system for telemedicine applications |
| US20170112439A1 (en) | 2015-10-22 | 2017-04-27 | Tyto Care Ltd. | System, method and computer program product for physiological monitoring |
| JP2018152086A (en) | 2012-06-27 | 2018-09-27 | バウチャー、ライアン | Device, method and system for obtaining medical diagnostic information and provision of telemedicine service |
-
2018
- 2018-11-26 JP JP2018220174A patent/JP7193080B2/en active Active
Patent Citations (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2006042962A (en) | 2004-08-02 | 2006-02-16 | Matsushita Electric Ind Co Ltd | Portable terminal equipment, interactive medical examination system using portable terminal equipment and medical examination data communication method |
| JP2013119014A (en) | 2011-12-08 | 2013-06-17 | Sharp Corp | Information terminal device, remote measurement system, method for controlling the information terminal device, control program and recording medium |
| JP2013123493A (en) | 2011-12-13 | 2013-06-24 | Sharp Corp | Information processing apparatus, stethoscope, control method for information processing apparatus, control program, and recording medium |
| JP2015524678A (en) | 2012-06-05 | 2015-08-27 | スリーエム イノベイティブ プロパティズ カンパニー | Electronic stethoscope system for telemedicine applications |
| JP2018152086A (en) | 2012-06-27 | 2018-09-27 | バウチャー、ライアン | Device, method and system for obtaining medical diagnostic information and provision of telemedicine service |
| JP2014030625A (en) | 2012-08-03 | 2014-02-20 | Sharp Corp | Information processing apparatus, information processing method, control program, and recording medium |
| US20170112439A1 (en) | 2015-10-22 | 2017-04-27 | Tyto Care Ltd. | System, method and computer program product for physiological monitoring |
Also Published As
| Publication number | Publication date |
|---|---|
| JP2020081364A (en) | 2020-06-04 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US5360005A (en) | Medical diagnosis device for sensing cardiac activity and blood flow | |
| TW480168B (en) | Multi-modal cardiac diagnostic decision support system | |
| WO2013089072A1 (en) | Information management device, information management method, information management system, stethoscope, information management program, measurement system, control program and recording medium | |
| US20150374328A1 (en) | Systems, methods and devices for remote fetal and maternal health monitoring | |
| JP5038620B2 (en) | Motor function testing device | |
| JP6382174B2 (en) | Biological information monitor, biological information measuring system, and program | |
| KR20140001816A (en) | Integrated, hand-held apparatus and associated method for acquiring diagnostic and prognostic information from a patient at the bedside or at some other patient location | |
| JPWO2013089073A1 (en) | Information analysis apparatus, electronic stethoscope, information analysis method, measurement system, control program, and recording medium | |
| JP2013123494A (en) | Information analyzer, information analysis method, control program, and recording medium | |
| US20050033144A1 (en) | Biological-sound data processing system, program, and recording medium | |
| JP3970697B2 (en) | Biological information processing device | |
| JP2020022696A (en) | Biological information measurement device, biological information system | |
| JPWO2015170772A1 (en) | Circulating respiratory function measuring device | |
| KR101407049B1 (en) | An apparatus and method of extracting body signals from signals including noise signals and detected by a stethoscope | |
| US20190150756A1 (en) | Signal synchronization device, as well as stethoscope, auscultation information output system and symptom diagnosis system capable of signal synchronization | |
| JP7193080B2 (en) | Information processing device, system, information processing method, and program | |
| US7513871B2 (en) | Blood flow analysis system | |
| JP6108525B2 (en) | Blood pressure measurement device | |
| JP6385789B2 (en) | Biological information measuring device, biological information display method, and program | |
| JP2017051594A (en) | Biological information measurement system, biological information monitor, and ultrasonic measurement device | |
| JP2014004018A (en) | Information processor, information processing method, control program and recording medium | |
| Rao et al. | Tabla: An acoustic device designed for low cost pneumonia detection | |
| JP2018158273A (en) | Biological information monitor, biological information measurement system, and program | |
| KR102242479B1 (en) | Digital Breathing Stethoscope Method Using Skin Image | |
| WO2020090763A1 (en) | Processing device, system, processing method, and program |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20181207 |
|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20211020 |
|
| A711 | Notification of change in applicant |
Free format text: JAPANESE INTERMEDIATE CODE: A711 Effective date: 20220607 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A821 Effective date: 20220607 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20220825 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20220906 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20221104 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20221115 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20221130 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 7193080 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |