WO2016006284A1

WO2016006284A1 - 画像再生制御装置および画像再生制御方法

Info

Publication number: WO2016006284A1
Application number: PCT/JP2015/059361
Authority: WO
Inventors: 律郎西村
Original assignee: Olympus Corp
Current assignee: Olympus Corp
Priority date: 2014-07-09
Filing date: 2015-03-26
Publication date: 2016-01-14
Anticipated expiration: 2017-01-09

Abstract

　本発明にかかる画像再生制御装置１０は、表示装置２０の表示画面に、一連の画像を順次再生させる表示制御部１６と、一連の画像の再生中に、当該画像再生制御装置１０の操作者が目で表示画面を見ているか否かを検出する瞬き検出部１４と、を備え、表示制御部１６は、瞬き検出部１４が、操作者が目で表示画面を見ていないと検出した場合に、一連の画像の再生位置を、少なくとも操作者が目で表示画面を見なくなったと推定される時点まで戻して表示装置２０に一連の画像を再々生させる。

Description

画像再生制御装置および画像再生制御方法

　本発明は、接続する表示装置に画像を再生させる画像再生制御装置および画像再生制御方法に関する。

　内視鏡の分野においては、患者等の被検体の消化管内に導入可能な大きさに形成されたカプセル型内視鏡の開発が進められている。カプセル型内視鏡は、カプセル型筐体の内部に撮像機能及び無線通信機能を備えた装置であり、被検体の口から飲み込まれた後、蠕動運動等によって消化管内を移動しながら被検体の臓器内部を順次撮像して画像データを取得し、被検体外部の受信装置に無線送信する。受信装置は、カプセル型内視鏡から送信された画像データを順次、受信するとともに、可搬型の記録媒体に順次、記録させる。画像表示装置は、記録媒体に記録された画像データを取り込み、所定の画像処理を施した後に、取り込んだ画像データに対応する体内画像を１フレームずつ切り替えて再生（コマ再生）する。操作者である医師等は、画像表示装置によって再生された体内画像を確認することで、被検体を診断する。

　近年では、画像の見落としを防ぐために、医師等に対する視線検出の結果をもとに、見落とした可能性がある画像を判別して、画像の見落としを報知するとともに、見落とした可能性がある画像の識別番号を報知する診断支援方法が提案されている（たとえば、特許文献１参照）。

特開２０１０－３５７５６号公報

　特許文献１記載の方法では、医師等は、見落とした画像を再度再生させるために、この見落とした画像を全画像の中から選択し、改めて再生を指示するという操作を行わなければならない。しかしながら、再生対象の画像がカプセル型内視鏡によって撮像された画像である場合、膨大な枚数の画像の中から見落とした画像を選択し、再度再生を指示するという煩雑な操作が、医師等の大きな負担となっていた。

　本発明は、上記に鑑みてなされたものであって、再生画像の見落とし防止と、操作者の操作負担の軽減とを可能とした画像再生制御装置および画像再生制御方法を提供することを目的とする。

　上述した課題を解決し、目的を達成するために、本発明にかかる画像再生制御装置は、接続する表示装置に画像を再生させる画像再生制御装置であって、前記表示装置の表示画面に、一連の画像を順次再生させる表示制御部と、当該画像再生制御装置の操作者が目で前記表示画面を見ているか否かを検出する検出部と、を備え、前記表示制御部は、前記一連の画像の再生中に、前記検出部が、前記操作者が目で前記表示画面を見ていないと検出した場合に、前記一連の画像の再生位置を、少なくとも前記操作者が目で前記表示画面を見なくなったと推定される時点まで戻して前記表示装置に前記一連の画像を再々生させることを特徴とする。

　また、本発明にかかる画像再生制御装置は、前記検出部は、前記操作者の瞬きの終了時間を検出する瞬き検出部であり、前記表示制御部は、前記検出部が検出した瞬きの終了時間から、少なくとも、一回の瞬きに要する時間に対応する所定の時間分、前記一連の画像の再生位置を戻して再々生させることを特徴とする。

　また、本発明にかかる画像再生制御装置は、前記表示制御部は、前記一回の瞬きに要する時間に対応する所定の時間と、前記一連の画像の再生処理におけるフレームレートとをもとに、前記所定の時間の間に前記表示装置で再生された画像のフレーム数を求め、前記検出部が検出した瞬きの終了時間から、少なくとも前記求めたフレーム数分、再生位置を戻して再々生させることを特徴とする。

　また、本発明にかかる画像再生制御装置は、前記表示制御部は、前記検出部が検出した瞬きの終了時間から、前記一回の瞬きに要する時間に対応する所定の時間よりも長い一定の時間分、再生位置を戻して前記一連の画像を再々生させることを特徴とする。

　また、本発明にかかる画像再生制御装置は、前記検出部は、前記操作者が目で前記表示画面を見なくなった状態の開始時間と終了時間とを検出し、前記表示制御部は、少なくとも前記検出部が検出した前記操作者が目で前記表示画面を見なくなった状態の開始時間まで、前記一連の画像の再生位置を戻して再々生させることを特徴とする。

　また、本発明にかかる画像再生制御装置は、前記検出部は、前記操作者の瞬きの開始時間と終了時間とを検出する瞬き検出部であり、前記表示制御部は、前記検出部が検出した瞬きの開始時間と終了時間との間の期間と、前記一連の画像の再生処理におけるフレームレートとをもとに、前記操作者の目が瞬きを行っていた間に前記表示装置で再生された画像のフレーム数を求め、前記検出部が検出した終了時間から、少なくとも前記求めたフレーム数分、再生位置を戻して前記一連の画像を再々生させることを特徴とする。

　また、本発明にかかる画像再生制御装置は、前記表示制御部は、前記表示装置で再生されている画像が、前記少なくとも操作者が目で表示画面を見なくなったと推定される時点まで再生位置を戻して再々生された画像であることを報知する報知情報を含ませた画面で前記表示装置に前記一連の画像を再々生させることを特徴とする。

　また、本発明にかかる画像再生制御装置は、前記一連の画像は、カプセル型内視鏡によって撮像された画像であって、前記表示制御部は、前記表示装置に、前記カプセル型内視鏡によって撮像された画像を再生させることを特徴とする。

　また、本発明にかかる画像再生制御方法は、接続する表示装置に画像を再生させる画像再生制御装置が行う画像再生制御方法であって、前記表示装置の表示画面に、一連の画像を順次再生させる画像再生ステップと、前記一連の画像の再生中に、当該画像再生制御装置の操作者が目で前記表示画面を見ているか否かを検出する検出ステップと、前記検出ステップにおいて、前記操作者が目で前記表示画面を見ていないと検出された場合に、前記一連の画像の再生位置を、少なくとも前記操作者が目で前記表示画面を見なくなったと推定される時点まで戻して前記表示装置に前記一連の画像を再々生させる画像再々生ステップと、を含むことを特徴とする。

　本発明によれば、操作者が目で表示画面を見ていないと検出された場合に、一連の画像の再生位置を、少なくとも操作者が目で表示画面を見なくなったと推定される時点まで戻して表示装置に一連の画像を自動的に再々生させるため、再生画像の見落とし防止と、操作者の操作負担の軽減との双方の実現が可能になる。

図１は、本発明の実施の形態１にかかるカプセル型内視鏡システムの概略構成を示す模式図である。図２は、図１に示す画像再生制御装置の構成を模式的に示すブロック図である。図３は、図１に示す画像再生制御装置における画像再生処理の処理手順を示すフローチャートである。図４は、図３に示す戻り位置設定処理を説明するための図である。図５は、実施の形態１における表示装置の表示画面の一例を示す図である。図６は、実施の形態１における表示装置の表示画面の他の例を示す図である。図７は、実施の形態２にかかる画像再生制御装置の構成を示すブロック図である。図８は、図７に示す画像再生制御装置における画像再生処理の処理手順を示すフローチャートである。図９は、図８に示す戻り位置設定処理を説明するための図である。図１０は、実施の形態２にかかる画像再生制御装置の他の構成を示すブロック図である。

　以下の説明では、本発明を実施するための形態（以下、「実施の形態」という）として、カプセル型内視鏡によって撮像された画像を表示装置に再生させる画像再生制御装置について説明する。また、この実施の形態により、この発明が限定されるものではない。さらに、図面の記載において、同一部分には同一の符号を付している。

（実施の形態１）
　図１は、本発明の実施の形態１におけるカプセル型内視鏡システムの概略構成を示す模式図である。図１に示すように、実施の形態１におけるカプセル型内視鏡システム１は、カプセル型内視鏡２、受信アンテナユニット３、受信装置４、クレードル５、画像再生制御装置１０、および、表示装置２０を備える。

　カプセル型内視鏡２は、被検体Ｈ内に導入された後、臓器の蠕動運動等によって被検体Ｈの消化管内を移動しつつ、生体部位（食道、胃、小腸、及び大腸等）を所定の周期（例えば０．５秒周期）で順次撮像して画像データを取得し、無線信号に重畳して送信する。受信アンテナユニット３は、カプセル型内視鏡２から送信された無線信号を、被検体Ｈに装着された複数の受信アンテナ３ａ～３ｈを介して受信する。受信装置４は、受信アンテナユニット３を介して受信した画像データに所定の信号処理を施し、メモリ（不図示）に記録する。画像再生制御装置１０は、ワークステーションを用いて構成され、カプセル型内視鏡２が取得した画像データを、クレードル５を介して、受信装置４のメモリから取り込み、該画像データを用いて被検体Ｈ内の画像を作成する。画像再生制御装置１０は、作成した被検体Ｈ内の画像を、記憶装置（不図示）に記憶させるほか、画像再生制御装置１０に接続する液晶ディスプレイ等の表示装置２０に再生させる。また、表示装置２０には、表示装置２０の表示画面に向かい合って、画像再生制御装置１０の操作を行う操作者の顔を撮像する撮像装置１４ａが取り付けられており、撮像装置１４ａが撮像した操作者の顔が映る画像は、画像再生制御装置１０に出力される。なお、画像再生制御装置１０はワークステーションに限らず、ラップトップＰＣやタブレット端末などのモバイル機器や、メガネ型や時計型などのウェアラブル端末などで構成されていてもよい。

　図２は、図１に示す画像再生制御装置１０の構成を示すブロック図である。図２においては、説明のために、画像再生制御装置１０が接続する表示装置２０および記憶装置３０についても示している。記憶装置３０は、画像群Ｇｇを格納するフォルダＦａを複数記憶する。画像群Ｇｇは、カプセル型内視鏡２によって撮像された画像であって、時系列に連続する一連の画像によって構成される。

　図２に示すように、画像再生制御装置１０は、入力部１１、データ送受信部１２、制御部１３、瞬き検出部１４、画像処理部１５、表示制御部１６、出力部１８、および、記憶部１９を有する。

　入力部１１は、例えばキーボードやマウス、タッチパネル、各種スイッチ等の入力デバイスによって実現される。入力部１１は、操作者の操作に応じた情報や命令の入力を受け付ける。

　データ送受信部１２は、記憶媒体、又は有線ＬＡＮや無線ＬＡＮ等の通信回線と接続可能なインタフェースである。たとえば、データ送受信部１２は、制御部１３の制御に基づいて記憶装置３０に接続し、記憶装置３０が記憶するカプセル型内視鏡２によって撮像された画像群Ｇｇの画像データを受信する。

　制御部１３は、ＣＰＵ等のハードウェアによって実現され、記憶部１９に記憶された各種プログラムを読み込むことにより、入力部１１を介して入力された信号や、データ送受信部１２から入力された画像データ等に基づいて、画像再生制御装置１０を構成する各部への指示やデータの転送等を行い、画像再生制御装置１０全体の動作を統括的に制御する。

　瞬き検出部１４は、瞼の動きや瞳の動き、焦点位置の変化など、目の動きを検出する検出部の１つであり、画像再生制御装置１０の操作者が目で表示装置２０の表示画面を見ているか否かを検出する。具体的には、瞬き検出部１４は、操作者の瞬きの終了時間を検出して、検出結果を制御部１３に出力する。

　瞬き検出部１４は、撮像装置１４ａが撮像した操作者の顔の画像を処理して目の瞬きの有無を検出し、目の瞬きを検出した場合には、目の瞬きの終了時間を示す瞬き検出信号を出力する。瞬き検出部１４は、たとえば、撮像装置１４ａによって撮像された画像から目が映る領域を抽出し、標準の目の型との間でパターンマッチングを行うことによって、目の瞬きの有無を検出する。あるいは、瞬き検出部１４は、撮像装置１４ａによって撮像された画像のうちの目が映る領域に対して、複数の横方向ラインの濃淡データを取得し、濃淡データの二値化によって白（白目）の部分と黒（黒目）の部分とを分離し、黒の部分の有無や黒の部分の大きさをもとに目の瞬きの有無を検出する。

　画像処理部１５は、データ送受信部１２が受信した画像群Ｇｇの画像データに対して、オプティカルブラック減算処理、ゲイン調整処理、画像データの同時化処理、ガンマ補正処理、ホワイトバランス（ＷＢ）調整処理、カラーマトリクス演算処理、色再現処理およびエッジ強調処理等の画像処理を行う。

　表示制御部１６は、画像処理部１５が処理した画像群の画像データ、あるいは、記憶装置３０から受信した画像群の画像データから、表示装置２０に表示させるための各表示用画像データを生成する。表示制御部１６は、表示用画像データを、デジタル信号からアナログ信号に変換し、変換したアナログ信号の画像データをハイビジョン方式等のフォーマットに変更後、表示装置２０へ出力する。表示制御部１６は、これによって、表示装置の表示画面に、一連の画像を時系列に沿って順次再生させる。なお、一連の画像を撮像したときのカプセル型内視鏡２の位置に基づいて、一連の画像を並べ替えて順次再生してもよい。

　表示制御部１６は、瞬き検出部１４が、操作者が目で表示画面を見ていないと検出した場合に、表示装置２０に表示されている一連の画像に対する再生位置を、少なくとも操作者が目で表示画面を見なくなったと推定される時点まで戻して、表示装置２０に一連の画像を再々生させる。表示制御部１６は、瞬き検出部１４が、操作者が目で表示画面を見ていないと検出した場合に、一連の画像の再生位置の戻り位置を設定する戻り位置設定部１７を備える。

　出力部１８は、スピーカーやプリンタ等を用いて実現され、制御部１３の制御にしたがい、カプセル型内視鏡２が撮像した画像データの再生処理に関する情報を出力する。

　記憶部１９は、揮発性メモリや不揮発性メモリを用いて実現され、画像再生制御装置１０を動作させるための各種プログラムを記憶する。記憶部１９は、画像再生制御装置１０の処理中の情報を一時的に記憶する。記憶部１９は、画像再生制御装置１０の外部から装着されるメモリカード等を用いて構成されてもよい。

　図３は、図１に示す画像再生制御装置１０における画像再生処理の処理手順を示すフローチャートである。再生対象の画像群の画像データとともに、画像再生の開始を指示する情報が入力されると（ステップＳ１）、表示制御部１６は、再生対象の画像データに対する表示用画像データを生成し、表示装置２０の表示画面に再生させる再生処理（ステップＳ２）を行う。

　瞬き検出部１４は、制御部１３の制御のもと、画像再生制御装置１０の操作者の目の瞬きを検出する瞬き検出処理を行い（ステップＳ３）、画像再生制御装置１０の操作者が目で表示装置２０の表示画面を見ているか否かを検出する。瞬き検出部１４は、操作者の目の瞬きを検出した場合には、目の瞬きの終了時間を示す瞬き検出信号を、制御部１３を介して、表示制御部１６に出力する。

　表示制御部１６は、瞬き検出信号の入力の有無をもとに、瞬き検出部１４が、画像再生制御装置１０の操作者の目の瞬きを検出したか否かを判断する（ステップＳ４）。

　表示制御部１６は、瞬き検出部１４が、画像再生制御装置１０の操作者の目の瞬きを検出したと判断した場合には（ステップＳ４：Ｙｅｓ）、戻り位置設定部１７が、入力された瞬き検出信号をもとに、画像群の再生位置の戻り位置を設定する戻り位置設定処理を行う（ステップＳ５）。戻り位置設定部１７は、画像群の再生位置の戻り位置を、少なくとも操作者が目で表示画面を見なくなったと推定される時点に設定する。

　図４は、図３に示す戻り位置設定処理を説明するための図である。図４の（１）は、瞬き検出部１４による瞬き検出処理に関するタイミングチャートである。図４の（２）は、現に表示装置２０に再生されている画像の画像群における再生位置を示すタイムバーＢの模式図である。

　瞬き検出部１４は、操作者の目の瞬きを検出した場合には、目の瞬きの終了時間ｔａを示す瞬き検出信号Ｓａを、制御部１３を介して表示制御部１６に出力する。表示制御部１６では、戻り位置設定部１７は、入力された瞬き検出信号Ｓａに含まれる瞬きの終了時間ｔａに対応する再生位置Ｄａから、矢印Ｙｂのように、一回の瞬きに要する時間に対応する所定の時間Ｔｂ分戻した位置Ｄｂに再生位置を戻すように、戻り位置を設定する。人間の瞬きの時間は、０．１０～０．１５（秒）程度であるため、戻り位置設定部１７は、入力された瞬き検出信号に含まれる瞬きの終了時間に対応する再生位置Ｄａから、０．１５（秒）分、再生位置を戻す。もちろん、戻り位置設定部１７は、矢印Ｙｃに示すように、再生位置Ｄａから、一回の瞬きに要する時間よりも十分に長い一定の時間Ｔｃ（＞Ｔｂ）分戻した位置Ｄｃに再生位置を戻すように設定してもよい。

　また、戻り位置設定部１７は、一回の瞬きに要する時間に対応する所定の時間と、画像群の再生処理におけるフレームレートとをもとに、一回の瞬きに要する時間に対応する所定の時間の間に表示装置２０で再生された画像のフレーム数を求め、瞬き検出部１４が検出した瞬きの終了時間から、少なくとも、求めたフレーム数分、再生位置を戻す。たとえば、人間の瞬きの時間を０．１０（秒）と仮定し、画像群の再生処理におけるフレームレートをＦ（フレーム／秒）とした場合には、下記の（１）式を用いて、再生位置を戻すフレーム数Ｊを演算する。
Ｊ＝Ｆ×０．１０　　　　　　　　　　　　　　　　　・・・（１）

　たとえば、画像群の再生処理におけるフレームレートＦが６０（フレーム／秒）である場合には、（１）式によって再生位置を戻すフレーム数が６フレームと求められるため、戻り位置設定部１７は、６フレーム以上、再生位置を戻す。

　表示制御部１６は、戻り位置設定部１７が設定した位置まで、画像群の再生位置を戻して、表示装置２０に画像群の画像を再度再生させる再々生処理を行う（ステップＳ６）。この場合、表示制御部１６は、再々生させる画像とともに、表示装置２０の表示画面に再生されている画像が、少なくとも操作者が目で表示画面を見なくなったと推定される時点まで再生位置を戻して再々生された画像であることを報知する報知情報を含ませた画面で、表示装置２０に画像群を再々生させる。

　図５は、再々生画像表示時における表示装置２０の表示画面の一例を示す図である。図５に示すように、表示装置２０の表示画面には、カプセル型内視鏡画像再生用の再生メニューＭが表示されている。再生メニューＭにおいて、左側上部には領域Ｒａが設けられ、左側下部においては領域Ｒｂが設けられ、下部には領域Ｒｃが設けられ、右側には領域Ｒｄが設けられる。領域Ｒａには、被検体（患者）情報（たとえば名前、ＩＤ、生年月日等）が表示され、領域Ｒｂには、画像表示を制御するためのアイコン画像が表示され、領域Ｒｃには、現に再生されている画像の画像群全体における位置を示すスライダーＢｎを有するタイムバーＢが表示され、領域Ｒｄには、カプセル型内視鏡２によって撮像された画像Ｇが再生される。表示制御部１６は、再々生時には、この領域Ｒｄに表示される画像Ｇを、再生時とは異なる色、または、再生時とは異なる太さの枠Ｗで囲うことによって、再生されている画像が、少なくとも操作者が目で表示画面を見なくなったと推定される時点まで再生位置を戻して再々生された画像であることを示す。

　また、図６に示すように、表示制御部１６は、この領域Ｒｄに表示される画像Ｇの近傍または周縁に、再生されている画像が、少なくとも操作者が目で表示画面を見なくなったと推定される時点まで再生位置を戻して再々生された画像であることを示すアイコン画像Ａを表示させてもよい。また、表示制御部１６は、領域ＲｃのタイムバーＢにおける再々生区間に対応する部分を、拡大表示させてもよく、他とは異なる色を付して表示させてもよい。

　表示制御部１６は、表示装置２０に再々生させた画像が、再々生対象の画像の最終の画像であるか否かを判断する（ステップＳ７）。表示制御部１６は、表示装置２０に再々生させた画像が、再々生対象の画像の最終の画像でないと判断した場合には（ステップＳ７：Ｎｏ）、ステップＳ６に戻り、画像の再々生処理を継続する。一方、表示制御部１６は、表示装置２０に再々生させた画像が、再々生対象の画像の最終の画像であると判断した場合には（ステップＳ７：Ｙｅｓ）、ステップＳ２に戻り、画像群における次の画像データに対する画像再生処理を行う。すなわち、表示制御部１６は、瞬き検出部１４が検出した瞬きの終了時間に再生されていた画像の次の画像データに対して、通常の画像再生処理を行う。

　また、表示制御部１６は、瞬き検出部１４が画像再生制御装置１０の操作者の目の瞬きを検出していないと判断した場合には（ステップＳ４：Ｎｏ）、再生した画像が、再生を指示された画像群の最終画像である否かを判断する（ステップＳ８）。表示制御部１６は、再生した画像が、再生を指示された画像群の最終画像でないと判断した場合には（ステップＳ８：Ｎｏ）、ステップＳ２に戻り、画像群における次の画像データに対する画像再生処理を行う。また、表示制御部１６は、再生した画像が、再生を指示された画像群の最終画像であると判断した場合には（ステップＳ８：Ｙｅｓ）、この画像群に対する再生処理を終了する。

　人の瞬きの時間は、０．１０～０．１５（秒）であるため、１０～１５（フレーム／秒）以上のフレームレートで画像がコマ再生される場合には、瞬きをしている間に１フレーム以上の画像を見落とす可能性がある。そこで、実施の形態１では、表示制御部１６は、瞬き検出部１４が操作者の目の瞬きを検出した場合、瞬き検出部１４が検出した瞬きの終了時間から、少なくとも、一回の瞬きに要する時間に対応する所定の時間分、画像群における再生位置を戻して表示装置２０に画像群を再度再生させる。

　このため、実施の形態１によれば、操作者が瞬きによって再生画像を見落とした場合であっても、自動的に、瞬き前の画像まで戻って画像が再々生されるため、再生画像の見落としを防止できるとともに、操作者の操作負担を格段に軽減することが可能になる。特に、瞬きは、無自覚な生理反応であるため、操作者が、自身の瞬きに気づいて、瞬きによって見逃した画像まで再生位置を戻すこと自体が難しいが、実施の形態１によれば、瞬きによって操作者が無自覚に見逃した画像があっても、自動的に、瞬き前の画像まで再生位置を戻すことができるため、再生画像の見落としを確実に防止することができる。

　また、再々生処理の場合には、枠Ｗやアイコン画像Ａを表示させて、再々生画像であることを報知するため、操作者は、現に再生されている画像が、見逃したおそれがある画像であることを認識することができる。

（実施の形態２）
　次に、実施の形態２について説明する。図７は、実施の形態２にかかる画像再生制御装置の構成を示すブロック図である。

　図７に示すように、実施の形態２にかかる画像再生制御装置２１０は、画像再生制御装置１０と比して、制御部１３、瞬き検出部１４および表示制御部１６に代えて、制御部１３と同様の機能を有する制御部２１３、瞬き検出部２１４および表示制御部２１６を備える。

　瞬き検出部２１４は、瞬きによって操作者が目で表示画面を見なくなった状態の開始時間と終了時間とを検出し、目の瞬きを検出した場合には、目の瞬きの開始時間と終了時間とを示す瞬き検出信号を出力する。

　表示制御部２１６は、少なくとも瞬き検出部２１４が検出した操作者が目で表示画面を見なくなった状態の開始時間、すなわち瞬きの開始時間まで、一連の画像の再生位置を戻す。表示制御部２１６は、画像群の再生位置の戻り位置を、瞬きの開始時間に設定する戻り位置設定部２１７を有する。

　図８は、図７に示す画像再生制御装置における画像再生処理の処理手順を示すフローチャートである。ステップＳ１１およびステップＳ１２は、図３に示すステップＳ１およびステップＳ２である。

　瞬き検出部２１４は、制御部２１３の制御のもと、画像再生制御装置２１０の操作者の目の瞬きの有無を検出する瞬き検出処理を行う（ステップＳ１３）。瞬き検出部２１４は、操作者の目の瞬きを検出した場合には目の瞬きの開始時間と終了時間とを示す瞬き検出信号を、制御部２１３を介して、表示制御部２１６に出力する。ステップＳ１４は、図３に示すステップＳ４である。

　表示制御部２１６は、瞬き検出部２１４が画像再生制御装置２１０の操作者の目の瞬きを検出したと判断した場合には（ステップＳ１４：Ｙｅｓ）、戻り位置設定部２１７が、入力された瞬き検出信号をもとに、画像群の再生位置の戻り位置を設定する戻り位置設定処理を行う（ステップＳ１５）。戻り位置設定部２１７は、画像群の再生位置の戻り位置を、瞬きの開始時間に対応する位置に設定する。

　図９は、図８に示す戻り位置設定処理を説明するための図である。図９の（１）は、瞬き検出部２１４による瞬き検出処理に関するタイミングチャートである。図９の（２）は、現に表示装置２０に表示されている画像の画像群における再生位置を示すタイムバーＢの模式図である。

　瞬き検出部２１４は、操作者の目の瞬きを検出した場合には、目の瞬きの開始時間ｔｄと終了時間ｔｅとを示す瞬き検出信号Ｓｄ，Ｓｅを、制御部２１３を介して、表示制御部２１６に出力する。表示制御部２１６では、戻り位置設定部２１７は、入力された瞬き検出信号Ｓｄ，Ｓｅに含まれる瞬きの終了時間ｔｅに対応する再生位置Ｄｅから、矢印Ｙｄのように、瞬きの開始時間ｔｄに対応する位置Ｄｄに再生位置を戻すように戻り位置を設定する。ステップＳ１６は、図３に示すステップＳ６である。この結果、表示装置２０では、瞬きがあった時間Ｔｅ（図８参照）の間に再生されていた画像が、再度再生される。

　また、戻り位置設定部２１７は、瞬き検出部２１４が検出した瞬きの開始時間と終了時間との期間と、画像群の再生処理におけるフレームレートとをもとに、操作者の目が瞬きを行っていた間に表示装置２０で再生された画像のフレーム数を求め、瞬き検出部２１４が検出した終了時間から、少なくとも、求めたフレーム数分、再生位置を戻すように戻り位置を設定してもよい。たとえば、瞬き検出部２１４が検出した瞬きの開始時間と終了時間との間の時間がＥ（秒）である場合には、画像群の再生処理におけるフレームレートＦ（フレーム／秒）と、時間Ｅから、下記の（２）式を用いて、再生位置を戻すフレーム数Ｊを演算する。
Ｊ＝Ｆ×Ｅ　　　　　　　　　　　　　　　　　　　　・・・（２）

　なお、ステップＳ１７およびステップＳ１８は、図３に示すステップＳ７およびステップＳ８である。

　この実施の形態２によれば、瞬き検出部２１４が検出した瞬きの終了時間に対応する再生位置から、少なくとも瞬きの開始時間に対応する位置まで画像群の再生位置を戻して、表示装置に画像群を自動的に再々生させるため、実施の形態１と同様に、再生画像の見落としと、操作者の操作負担の軽減との双方を実現することができる。また、しばらく目を閉じていたなど、瞬きよりも長い時間画面を見ていなかった場合でも、目を閉じた時間に対応する位置まで画像群の再生位置を戻して、表示装置に画像群を自動的に再々生させるため、実施の形態１と同様に、再生画像の見落としと、操作者の操作負担の軽減との双方を実現することができる。

　なお、本実施の形態２では、瞬き検出部２１４を備えた例を説明したが、もちろん、図１０に示す画像再生制御装置２１０Ａのように、操作者の視線の向きを検出する視線検出部２１４Ａ（前述した検出部の１つ）によって、操作者が目で表示画面を見ているか否かを検出してもよい。視線検出部２１４Ａは、撮像装置１４ａが撮像した操作者の顔の画像を処理して、操作者の視線の向きを検出する。視線検出部２１４Ａは、操作者の視線が表示画面に再生されている画像に向いているかを検出し、表示制御部２１６は、表示画面に再生されている画像に操作者の視線が向いていないことを視線検出部２１４Ａが検出した場合には、表示画面に再生されている画像に操作者の視線が向かなくなった時点まで再生位置を戻して、画像群を再々生してもよい。また、視線検出部２１４Ａに、さらに操作者の焦点が検出できる機構を設け、操作者が表示画面に再生されている画像に焦点を合わせているかを検出して、表示画面に再生されている画像に操作者の焦点が合っていない場合には、焦点が合わなくなった時点まで再生位置を戻して、画像群を再々生してもよい。

　さらに、画像再生制御装置１０は瞬き検出部１４と視線検出部２１４Ａの両方を備えていてもよく、これらの検出結果を組み合わせて操作者が目で表示画面を見ているか否かを検出してもよい。

　また、本実施の形態１，２にかかる画像再生制御装置１０，２１０，２１０Ａで実行される各処理に対する実行プログラムは、インストール可能な形式又は実行可能な形式のファイルでＣＤ－ＲＯＭ、フレキシブルディスク、ＣＤ－Ｒ、ＤＶＤ等のコンピュータで読み取り可能な記録媒体に記録して提供するように構成してもよく、インターネット等のネットワークに接続されたコンピュータ上に格納し、ネットワーク経由でダウンロードさせることにより提供するように構成してもよい。また、インターネット等のネットワーク経由で提供または配布するように構成してもよい。

　１　カプセル型内視鏡システム
　２　カプセル型内視鏡
　３　受信アンテナユニット
　３ａ～３ｈ　受信アンテナ
　４　受信装置
　５　クレードル
　１０，２１０，２１０Ａ　画像再生制御装置
　１１　入力部
　１２　データ送受信部
　１３，２１３　制御部
　１４，２１４　瞬き検出部
　１５　画像処理部
　１６，２１６　表示制御部
　１７，２１７　戻り位置設定部
　１８　出力部
　１９　記憶部
２０　表示装置
３０　記憶装置
　２１４Ａ　視線検出部
　Ｈ　被検体

Claims

　接続する表示装置に画像を再生させる画像再生制御装置であって、
　前記表示装置の表示画面に、一連の画像を順次再生させる表示制御部と、
　当該画像再生制御装置の操作者が目で前記表示画面を見ているか否かを検出する検出部と、
　を備え、
　前記表示制御部は、前記一連の画像の再生中に、前記検出部が、前記操作者が目で前記表示画面を見ていないと検出した場合に、前記一連の画像の再生位置を、少なくとも前記操作者が目で前記表示画面を見なくなったと推定される時点まで戻して前記表示装置に前記一連の画像を再々生させることを特徴とする画像再生制御装置。
　前記検出部は、前記操作者の瞬きの終了時間を検出する瞬き検出部であり、
　前記表示制御部は、前記検出部が検出した瞬きの終了時間から、少なくとも、一回の瞬きに要する時間に対応する所定の時間分、再生位置を戻して前記一連の画像を再々生させることを特徴とする請求項１に記載の画像再生制御装置。
　前記表示制御部は、前記一回の瞬きに要する時間に対応する所定の時間と、前記一連の画像の再生処理におけるフレームレートとをもとに、前記所定の時間の間に前記表示装置で再生された画像のフレーム数を求め、前記検出部が検出した瞬きの終了時間から、少なくとも前記求めたフレーム数分、再生位置を戻して前記一連の画像を再々生させることを特徴とする請求項２に記載の画像再生制御装置。
　前記表示制御部は、前記検出部が検出した瞬きの終了時間から、前記一回の瞬きに要する時間に対応する所定の時間よりも長い一定の時間分、再生位置を戻して前記一連の画像を再々生させることを特徴とする請求項２に記載の画像再生制御装置。
　前記検出部は、前記操作者が目で前記表示画面を見なくなった状態の開始時間と終了時間とを検出し、
　前記表示制御部は、少なくとも前記検出部が検出した前記操作者が目で前記表示画面を見なくなった状態の開始時間まで、再生位置を戻して前記一連の画像を再々生させることを特徴とする請求項１に記載の画像再生制御装置。
　前記検出部は、前記操作者の瞬きの開始時間と終了時間とを検出する瞬き検出部であり、
　前記表示制御部は、前記検出部が検出した瞬きの開始時間と終了時間との間の期間と、前記一連の画像の再生処理におけるフレームレートとをもとに、前記操作者の目が瞬きを行っていた間に前記表示装置で再生された画像のフレーム数を求め、前記検出部が検出した終了時間から、少なくとも前記求めたフレーム数分、再生位置を戻して前記一連の画像を再々生させることを特徴とする請求項５に記載の画像再生制御装置。
　前記表示制御部は、前記表示装置で再生されている画像が、前記少なくとも操作者が目で表示画面を見なくなったと推定される時点まで再生位置を戻して再々生された画像であることを報知する報知情報を含ませた画面で前記表示装置に前記一連の画像を再々生させることを特徴とする請求項１に記載の画像再生制御装置。
　前記一連の画像は、カプセル型内視鏡によって撮像された画像であって、
　前記表示制御部は、前記表示装置に、前記カプセル型内視鏡によって撮像された画像を順次再生させることを特徴とする請求項１に記載の画像再生制御装置。
　接続する表示装置に画像を再生させる画像再生制御装置が行う画像再生制御方法であって、
　前記表示装置の表示画面に、一連の画像を順次再生させる画像再生ステップと、
　前記一連の画像の再生中に、当該画像再生制御装置の操作者が目で前記表示画面を見ているか否かを検出する検出ステップと、
　前記検出ステップにおいて、前記操作者が目で前記表示画面を見ていないと検出された場合に、前記一連の画像の再生位置を、少なくとも前記操作者が目で前記表示画面を見なくなったと推定される時点まで戻して前記表示装置に前記一連の画像を再々生させる画像再々生ステップと、
　を含むことを特徴とする画像再生制御方法。