JP6939170B2 - 画像表示装置、プログラム及び制御方法 - Google Patents

画像表示装置、プログラム及び制御方法 Download PDF

Info

Publication number
JP6939170B2
JP6939170B2 JP2017139930A JP2017139930A JP6939170B2 JP 6939170 B2 JP6939170 B2 JP 6939170B2 JP 2017139930 A JP2017139930 A JP 2017139930A JP 2017139930 A JP2017139930 A JP 2017139930A JP 6939170 B2 JP6939170 B2 JP 6939170B2
Authority
JP
Japan
Prior art keywords
image
display device
displayed
image display
display
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2017139930A
Other languages
English (en)
Other versions
JP2019017316A (ja
Inventor
智紀 赤井
智紀 赤井
晶 佐波
晶 佐波
勇司 都築
勇司 都築
累 齋藤
累 齋藤
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Dai Nippon Printing Co Ltd
Original Assignee
Dai Nippon Printing Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Dai Nippon Printing Co Ltd filed Critical Dai Nippon Printing Co Ltd
Priority to JP2017139930A priority Critical patent/JP6939170B2/ja
Publication of JP2019017316A publication Critical patent/JP2019017316A/ja
Application granted granted Critical
Publication of JP6939170B2 publication Critical patent/JP6939170B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Description

本発明は、受精卵などの対象物の画像を表示する技術に関する。
不妊治療分野では、治療率や患者のQOL(Quality Of Life)の観点から、胚の着床率を予測し、移植対象の胚を選別することが行われている。従来、胚を非侵襲的に評価する手法として、顕微鏡による形態観察と、その際の形態から発育状況を判定することが行われてきた。
近年、タイムラプス装置の普及により、上記に加えて経時的な変化をも捉えることが可能となっており、大量の画像を用いて、複数の発育予測指標を解析し、発育を予測することも可能となってきた。このような大量の画像を胚培養士が観察し、細胞品質評価をするため、使い勝手の良い画像の閲覧システムが求められている。特許文献1には、複数のウェルが設けられた培養容器の存在を検出した場合に、培養容器の設置方向及びウェルの位置を推定結果に基づいて、占有率が高いウェルを表示する技術が開示されている。
特許第6007182号公報
タイムラプス装置では、通常、1枚の容器には同一患者の受精卵が複数のウェルにそれぞれ収められ、同時に複数枚の容器を収容・観察することが可能である。ここで、胚培養士が受精卵の画像を観察して形態学的に品質を評価する際には、通常、複数枚の容器から特定の患者を選び、さらに、当該容器の中の複数の受精卵の各々に対し、画像を表示させて品質評価をする必要がある。そして、胚培養士は、品質評価した結果を元に、その後の受精卵の処置(移植・凍結・培養中止など)を決め、適当なタイミングで、タイムラプス装置から培養容器を取り出して、当該受精卵に対して決めた操作を実行する。このような場合に、処置を決めた特定の受精卵が、1枚の培養容器内でどのウェルに入っているかが直感的に分かりやすい画像の閲覧システムが求められる。
本発明は、処置の対象となる対象物の配置を直感的に把握することが可能な画像表示装置を提供することを主な目的とする。
本発明の1つの観点では、画像表示装置は、対象物を収容するための複数の収容箇所を夫々個別に撮影した複数の撮影画像を取得する取得部と、前記複数の撮影画像の各々により表される収容箇所が前記複数の収容箇所の実際の配置と同一の配置となるように前記複数の撮影画像を並べた一覧画像を生成し当該一覧画像を前記複数の撮影画像のいずれか一つを個別に表示した個別画像と共に表示部に表示させる表示制御部と、を備える。なお、一覧画像を「個別画像と共に表示部を表示させる」とは、一覧画像と個別画像とを同一ウィンドウに表示させる態様の他、一覧画像と個別画像とを別ウィンドウにより表示する態様も含む。また、一覧画像と個別画像とを別ウィンドウにより表示する場合、別ウィンドウで表示した個別画像が、一覧画像のウィンドウの上に被さって、結果的に、一覧画像が一時的に隠れる態様であってもよい。好ましくは、一覧画像と個別画像とは、重なることなく同一ウィンドウに表示されるとよい。なお、「複数の収容箇所」は、容器に設けられてもよく、プレートなどの平板状の物に設けられてもよい。
上記画像表示装置の一態様では、前記表示制御部は、前記一覧画像を、少なくとも前記個別画像を表示している間では、前記表示部に表示された画面上に常時表示する。ここで、「常時表示する」とは、一覧画像と個別画像とを別ウィンドウにより表示する場合に、別ウィンドウで表示した個別画像が、一覧画像のウィンドウの上に被さって、一覧画像が隠れて(即ち個別画像の背面に)表示される態様も含む。
上記画像表示装置の他の一態様では、前記表示制御部は、前記個別画像と同一の受精卵を表す前記一覧画像内の撮影画像を強調して前記表示部に表示させる。
上記画像表示装置の他の一態様では、前記表示制御部は、前記個別画像を、前記一覧画像を構成する撮影画像よりも大きく前記表示部に表示させる。
上記画像表示装置の他の一態様では、画像表示装置は、前記一覧画像として表示された複数の撮影画像から1つの撮影画像を選択する入力を受け付ける入力受付部をさらに備え、前記表示制御部は、前記入力により選択された撮影画像を前記個別画像として前記表示部に表示させる。
上記画像表示装置の他の一態様では、前記入力受付部は、撮影対象となる複数の収容箇所撮影時に載置されたインキュベータ又はチャンバの少なくともいずれかを指定する入力をさらに受け付け、前記取得部は、前記入力により指定されたインキュベータ又はチャンバに撮影時に載置された複数の収容箇所を撮影した複数の撮影画像を取得する。
上記画像表示装置の他の一態様では、前記収容箇所は、凹部であり、前記表示制御部は、前記凹部の配置を特定し、特定した配置に基づき前記複数の撮影画像を並べた一覧画像を、前記表示部に表示させる。
上記画像表示装置の他の一態様では、前記表示制御部は、前記一覧画像として表示する撮影画像の各々に、当該撮影画像に表示された対象物の特徴量、判別結果、又は処理ステータスの情報を重ねて表示させる。
上記画像表示装置の他の一態様では、前記表示制御部は、前記特徴量の情報として、時系列での特徴量の変化を表すグラフを前記表示部に表示させる。
上記画像表示装置の他の一態様では、前記表示制御部は、前記判別結果又は処理ステータスの情報を、当該判別結果又は当該処理ステータスに応じて色分けして前記表示部に表示させる。
上記画像表示装置の他の一態様では、前記表示制御部は、前記個別画像として、時系列により撮影された撮影画像に基づく動画像を、前記表示部に表示させる。
上記画像表示装置の他の一態様では、前記表示制御部は、前記一覧画像を前記個別画像と共に表示するための表示情報を、前記表示部を有する表示装置に送信する。
本発明の他の観点では、プログラムは、請求項1〜12のいずれか一項に記載の画像表示装置としてコンピュータを機能させる。
本発明のさらに別の観点では、画像表示装置が実行する制御方法であって、対象物を収容するための複数の収容箇所を夫々個別に撮影した複数の撮影画像を取得する取得工程と、前記複数の撮影画像の各々により表される収容箇所が前記複数の収容箇所の実際の配置と同一の配置となるように前記複数の撮影画像を並べた一覧画像を生成し当該一覧画像を前記複数の撮影画像のいずれか一つを個別に表示した個別画像と共に表示部に表示させる表示制御工程と、を有する。
本発明に係る画像表示装置によれば、対象物が収容される収容箇所の撮影画像を収容箇所の配置と同一の配置により並べた一覧画像を、一覧画像内の撮影画像のいずれか一つを個別に表示した個別画像と共に表示部に表示させ、個別画像に表示された収容箇所の配置を好適にユーザに把握させることができる。
実施形態に係る受精卵の画像表示システムの構成を示す。 培養容器及び受精卵の撮影画像の例を示す。 受精卵の撮影方法を説明する図である。 25個のウェルが配置された培養容器を対象とした画像閲覧画面の表示例である。 8個のウェルが配置された培養容器を対象とした画像閲覧画面の表示例である。 画像閲覧画面の表示処理のフローチャートである。 一覧画像の各撮影画像上に、撮影対象の受精卵の特徴量、判定結果又は処理ステータスの情報を重ねて表示する表示例を示す。 画像閲覧画面における患者情報表示欄の全患者表示ボタンが選択されたときの画像閲覧画面の表示例である。
以下、本発明の好適な実施形態について説明する。
[システム構成]
図1は、実施形態に係る受精卵の画像表示システムの構成を示す。図示のように、画像表示システム100は、大別して、1または複数の撮影装置50と、記憶装置55と、画像表示装置60とを備える。
撮影装置50は、インキュベータ9を有し、インキュベータ9に設けられた図示しないチャンバ(室)に載置された培養容器10内の受精卵の画像を撮影し、記憶する。各培養容器10内には複数の受精卵が載置されており、撮影装置50は受精卵を識別するための識別情報、例えば、受精卵が収容されているウェルの識別情報などと対応付けて撮影画像を記憶装置55に送信する。ウェルは、本発明の「凹部」の一例である。具体的には、撮影画像50は、予め培養容器10内の各ウェル位置に対応したXY座標を記録しており、そのXY座標情報から、各ウェルを識別してもよいし、撮影開始時などに、各ウェル位置に対応付けるXY座標を微調整して、個別にウェル位置として座標登録をしてもよい。
撮影装置50は、照明装置51と、カメラ52と、制御部53と、通信部54とを備える。照明装置51は、撮影のために培養容器10内の受精卵を上方から照明する。照明装置51は、点光源であっても面光源であっても、複数の点光源、面光源であってもよい。照明装置51による照明は、制御部53により制御される。
カメラ52は、培養容器10の下方に移動可能に配置され、照明装置51により照明された状態の受精卵を撮影する。カメラ52は図示しないアクチュエータなどにより移動する。アクチュエータによるカメラ52の移動、及び、カメラ52による撮影は、制御部53により制御される。カメラ52は、同じ培養容器10内の複数の受精卵を、異なる時刻で撮影する。また、インキュベータ9内に複数の培養容器10が載置されている場合、カメラ52は、制御部53によるアクチュエータの制御に基づき、それぞれの培養容器10内の各受精卵を撮影可能な位置に移動して撮影を行う。カメラ52により撮影された受精卵は、本発明の「対象物」の一例である。なお、同じ培養容器10内の複数の受精卵を撮影する場合、カメラ52が移動する代わりに培養容器10が移動する構造でもよく、カメラ52と培養容器10のいずれも移動せずに培養容器10内の受精卵全体を撮影する構造であってもよい。
制御部53は、照明装置51による照明、カメラ52の移動及びカメラ52による撮影を制御する。また、制御部53は、カメラ52から撮影画像を取得した場合、通信部54を制御することで、撮影画像を記憶装置55に送信する。
記憶装置55は、図示しない制御部、記憶部、通信部などを有し、各撮影装置50から送信される撮影画像を受信し、受信した撮影画像を記憶する。この場合、例えば、記憶装置55は、撮影装置50に設けられたインキュベータ9ごとにフォルダを設け、撮影画像を対応するフォルダに対応付けて記憶する。なお、記憶装置55は、上述のフォルダに対してチャンバごとのサブフォルダをさらに設け、撮影画像をチャンバごとに分類して記憶してもよい。また、記憶装置55は、画像表示装置60から撮影画像の取得要求を受信した場合に、当該取得要求により指定された撮影画像を画像表示装置60へ送信する。
画像表示装置60は、PC(Personal Computer)などにより構成され、胚培養士などのユーザが指定した受精卵の撮影画像を所定の表示画面(「画像閲覧画面」とも呼ぶ。)に表示する。画像表示装置60は、主に、通信部61と、入力部62と、記憶部63と、表示部64と、制御部65とを備える。
通信部61は、制御部65の制御に基づき、記憶装置55から撮影画像を受信する。入力部62は、キーボード、マウス、回転操作が可能なホイールデバイス、タッチパネル、音声入力装置などであり、表示すべき撮影画像を指定する入力信号などを生成して制御部65へ供給する。記憶部63は、制御部65が実行するプログラム及びプログラムの実行に必要な情報を記憶する。例えば、記憶部63は、画像閲覧画面の表示処理に必要なプログラムを記憶する。表示部64は、制御部65の制御に基づき、画像閲覧画面を表示する。制御部65は、画像表示装置60の全体の制御を行う。制御部65は、本発明の「取得部」、「表示制御部」、「入力受付部」の一例である。また、制御部65は、本発明のプログラムを実行する「コンピュータ」の一例である。
[撮影画像]
図2は、培養容器10及び受精卵の撮影画像の例を示す。培養容器10は円形の容器であり、中央部に収容部11が形成されている。収容部11内には、複数(図2の例では5×5=25個)のウェル12が形成されている。ウェル12は受精卵を収容するための窪みであり、1つのウェル12に1つの受精卵が収容される。図2(A)に示すように、収容部11は培養液13で満たされている。
図2(B)には、1つのウェル12の部分の撮影画像20が示されている。ウェル12内に受精卵が収容されている場合、撮影画像20は、ウェル12と、ウェル12内にある受精卵30とを含む。撮影装置50は、同一の受精卵(即ち、同一のウェル12)についての撮影画像を所定時間間隔で複数生成し、記憶する。なお、撮影装置50は、ウェル12毎に画像を撮影するものとする。
図3は、受精卵の撮影方法を説明する図である。図3(A)は、1つの培養容器10内の収容部11を上方から見た図である。収容部11には、横方向(X方向)と縦方向(Y方向)に5個ずつ、合計25個のウェル12が形成されている。以下、X方向の位置を「1」〜「5」で示し、Y方向の位置を「A」〜「E」で示すことにすると、図3(A)の左上のウェル12は、位置「A1」のウェル(以下、「ウェルA1」とも記す。)となる。図3(A)の例では、ウェルA1〜C3までの13個のウェル12に受精卵30が収容されている。なお、培養容器10に形成されるウェル12の配置は、図3(A)に示す配置に限らず、異なる数のウェル12が培養容器10に所定の配置により形成されていてもよい。
受精卵の撮影時には、例えばチャンバごとに設けられた照明装置51が予め決められた固定位置に配置され、カメラ52が移動して各ウェル12内の受精卵を撮影する。例えば、カメラ52は、まずウェルA1を撮影し、次にX方向に移動してウェルA2を撮影し、さらにX方向に移動してウェルA3を撮影し、という具合に各ウェル12を撮影する。X方向に移動してウェルA1〜A5の撮影が終わると、カメラ52はY方向に移動して、ウェルB1〜B5の撮影を行う。こうして、カメラ52はX方向及びY方向に移動しつつ、受精卵が収容されている全てのウェル12の撮影を行う。
撮影装置50はカメラ52を培養容器10の上下方向(Z方向)にも移動することができる。撮影装置50は、カメラ52をZ方向に移動することにより、受精卵に対するカメラ52の焦点位置を調整し、1つのウェル12内の受精卵を異なる焦点位置で撮影することができる。図3(B)は、受精卵に対するカメラ52の焦点位置の例を示す。図3(B)において、位置「M」は受精卵の略中心を通る面内のカメラ52の焦点位置を示し、撮影画像としてはZ方向の位置Mで受精卵をスライスした画像が得られる。位置「H」は受精卵の上部よりを通る面内のカメラ52の焦点位置を示し、撮影画像としてはZ方向の位置Hで受精卵をスライスした画像が得られる。位置「L」は受精卵の下部よりを通る面内のカメラ52の焦点位置を示し、撮影画像としてはZ方向の位置Lで受精卵をスライスした画像が得られる。この例では、撮影装置50は、各ウェル12内の受精卵を「H」、「M」、「L」の3つの焦点位置(スライス面)で撮影した画像を生成する。
撮影装置50の制御部53は、カメラ52による撮影画像に対して、上記のようにX方向、Y方向、Z方向の位置情報に基づくファイル名を付加して記憶部54に記憶する。例えば、ある容器IDを有する培養容器10について、ウェルA1の受精卵を、Z方向のMの焦点位置で時刻t1に撮影した場合、制御部53はその画像に、
「容器ID−ウェル位置−焦点位置−撮影時刻」、
というファイル名、例えば、「容器ID−A1−M−t1」などのファイル名を付与して記憶部54に記憶する。これにより、記憶部54に記憶された多数の撮影画像をファイル名に基づいて識別することができる。
同様に、制御部53は、上述のファイル名に、撮影対象となった培養容器10上でのウェル12の配置に関する識別情報をさらに付与して記憶部54に記憶してもよい。例えば、制御部53は、ウェル12が25個配置されている培養容器10の受精卵を撮影した撮影画像のファイル名に、当該培養容器10内のウェル12の配列の識別情報(例えば「25」の文字)を、容器ID等と同様に付加するとよい。ウェル12の配列の識別情報は、後述する画像閲覧画面の表示処理において好適に用いられる。同様に、制御部53は、撮影対象となった培養容器10が載置されたチャンバを特定する情報を、撮影画像のファイル名に付与して記憶部54に記憶してもよい。チャンバ位置は、カメラ52のXY座標位置で判別することができるため、制御部53は、例えば、カメラ52のXY座標位置から特定されるチャンバの番号を撮影画像のファイル名に付与してもよい。
画像表示装置60は、記憶装置55とデータ通信を行い、上述の規則に基づき決定されたファイル名等を参照することで、後述する画像閲覧画面の表示に必要な撮影画像を取得し、画像閲覧画面の表示を行う。そして、画像表示装置60のユーザである胚培養士は、画像閲覧画面に表示させた受精卵の撮影画像に基づき、形態観察及び品質評価などを行う。そして、胚培養士は、上述の品質評価の結果に基づき、受精卵の処置(移植、凍結、培養中止など)を決定し、当該受精卵に対して決定した処理を実行する。そして、本実施形態では、後述するように、画像表示装置60は、処置を決めた特定の受精卵が、培養容器10内のどのウェル12に入っているかを胚培養士が直感的に把握しやすいように、画像閲覧画面上において受精卵の撮影画像を表示する。
[画像閲覧画面の表示]
(1)概要説明
図4は、画像表示装置60が表示する画像閲覧画面の表示例である。図4に示すように、画像表示装置60は、画像閲覧画面上に、培養容器指定欄70と、患者情報表示欄71と、容器情報表示欄72と、一覧画像表示欄73と、個別画像表示欄74と、操作説明表示欄75とを設けている。
培養容器指定欄70は、撮影画像を表示させる対象となる培養容器10が収容されたインキュベータを指定するための複数のインキュベータ指定ボタン78と、撮影画像を表示させる対象となる培養容器10が収容されたチャンバを指定するための複数のチャンバ指定ボタン79とを含む。
この例では、画像表示装置60は、培養容器指定欄70上に、No.1からNo.4までの識別番号が付された4つのインキュベータ指定ボタン78を表示すると共に、1番から9番までの識別番号が付された9つのチャンバ指定ボタン79を表示している。そして、画像表示装置60は、ユーザ入力により選択されたNo.1のインキュベータ指定ボタン78に対し、赤枠f1を付して強調表示する共に、ユーザ入力により選択された1番のチャンバ指定ボタン78に対し、赤枠f2を付して強調表示している。この場合、画像表示装置60は、後述する一覧画像表示欄73及び個別画像表示欄74に、No.1に対応するインキュベータの1番のチャンバで保管された培養容器10内の受精卵の撮影画像を表示する。
また、画像表示装置60は、各インキュベータ指定ボタン78を、対応するインキュベータの状態によって色分け表示している。ここでは、画像表示装置60は、カメラ52により培養容器10の撮影中であるインキュベータに対応するNo.1のインキュベータ指定ボタン78を緑色に着色して表示し、撮影が終了して培養容器10が既に取り出された状態のインキュベータに対応するNo.2のインキュベータ指定ボタン78を青色に着色して表示している。なお、画像表示装置60は、これらの緑と青の色分けを、例えば、各インキュベータに対応するフォルダ内の最も新しい撮影画像の撮影日時と現在日時とを比較することで判定してもよく、撮影終了の有無を示すフラグの存否等に基づき判定してもよい。また、画像表示装置60は、存在を確認できないインキュベータに対応するNo.3及びNo.4のインキュベータ指定ボタン78を、背景色と同一であって選択できない非アクティブ状態にして表示する。例えば、画像表示装置60は、インキュベータ指定ボタン78に対応するインキュベータのフォルダが記憶装置55において確認できない場合、当該インキュベータの存在を確認できないと判定する。
また、画像表示装置60は、各チャンバ指定ボタン79に、対応するチャンバの情報を表示させている。ここでは、画像表示装置60は、チャンバ指定ボタン79に、対応するチャンバの番号に加えて、当該チャンバに収容された培養容器10に対応する患者情報(ここでは、氏名及び患者ID)を表示させている。なお、チャンバ指定ボタン79に表示する患者情報は、氏名、患者IDの他、治療開始日などの患者のステータスを含んでもよい。この場合、画像表示装置60は、例えば、赤枠f1が付されたインキュベータ指定ボタン78に対応するインキュベータの番号及び各チャンバ指定ボタン79に対応するチャンバの番号に基づき、記憶装置55又は記憶部63等に記憶された患者情報のデータベース(「患者情報DB」とも呼ぶ。)を参照することで、各チャンバ指定ボタン79の表示に必要な患者情報を取得する。患者情報DBの詳細については、図8を参照して後述する。
患者情報表示欄71には、画像表示装置60は、培養容器指定欄70において指定されたチャンバに収容された培養容器10に対応する患者の氏名及び患者ID(PID)を表示する。また、画像表示装置60は、患者情報表示欄71に、患者情報DBに記録された全患者の情報を表示するための全患者表示ボタン87を設けている。容器情報表示欄72には、画像表示装置60は、培養容器指定欄70において指定されたチャンバに収容された培養容器10の容器IDを表示する。一般的に、同一の培養容器10には同一の患者の受精卵が収容される。なお、容器IDは、培養容器10に貼り付けたバーコードシールやICタグにより付与することができる。
一覧画像表示欄73には、画像表示装置60は、培養容器指定欄70において指定されたチャンバに収容された培養容器10の各ウェル12の撮影画像を各ウェル12の配置に従い並べて表示した画像(「一覧画像Image List(以下「IL」)」とも呼ぶ。)を表示する。一覧画像ILは、同一の培養容器10の各ウェル12内の受精卵の撮影画像から構成され、これらの撮影画像の配置は、培養容器10内での対応するウェル12の配置と等しい。ここで、画像表示装置60は、例えば、表示対象となる培養容器10の各ウェル12に対応する時系列の撮影画像群のうち、記憶装置55に記憶されている最新の(即ち最も撮影時刻が遅い)撮影画像をウェル12ごとに記憶装置55から取得することで、一覧画像ILを生成する。この場合、画像表示装置60は、一定時間間隔により、一覧画像ILを更新するとよい。他の例では、画像表示装置60は、表示対象となる培養容器10の各ウェル12に対応する時系列の撮影画像群のうち、記憶装置55に記憶されている最も撮影時刻が早い初期の撮影画像をウェル12ごとに記憶装置55から取得することで、一覧画像ILを生成してもよい。
また、画像表示装置60は、各撮影画像に対応するウェル12のX方向の位置(1〜5)及びY方向の位置(A〜E)を、一覧画像ILにおいて明示している。これにより、観察者である胚培養士は、一覧画像IL内の各撮影画像に対応するウェル12の識別番号を容易に把握することができる。
さらに、一覧画像IL内の各撮影画像は、それぞれ選択可能であり、画像表示装置60は、ユーザ入力により選択された一覧画像ILの撮影画像を、個別画像表示欄74において個別に表示する。なお、上述のユーザ入力による選択は、マウスによるクリック操作、マウスオーバー、表示部64にタッチパネルが積層されている場合のタッチ操作などの任意の操作に基づく選択であってもよい。図4の例では、ウェルA1に対応する一覧画像IL内の撮影画像がユーザ入力により選択されていることから、画像表示装置60は、当該撮影画像に対して赤枠f3を付して強調表示する。この場合、画像表示装置60は、赤枠f3により強調表示されたウェルA1の撮影画像を個別画像表示欄74上に表示させる。本実施形態では、画像表示装置60は、個別画像表示欄74上に、対象となるウェル12の受精卵の撮影画像を撮影時刻に従い時系列に切り替えた動画を表示する。ここで、個別画像表示欄74に表示される撮影画像の表示サイズは、胚培養士が細胞の品質評価を実行できるように、一覧画像ILに含まれる撮影画像の表示サイズよりも十分に大きい。なお、個別画像表示欄74に表示される撮影画像は、本発明における「個別画像」の一例である。
このように、画像表示装置60は、個別画像表示欄74に撮影画像を表示する際には一覧画像ILを一覧画像表示欄73に常時表示し、かつ、個別画像表示欄74に表示される撮影画像と一覧画像IL内の撮影画像との対応を示す赤枠f3を一覧画像IL上に表示させる。これにより、観察者である胚培養士は、個別画像表示欄74に表示される撮影画像に基づき品質評価を行う受精卵と、その受精卵が収容されているウェル12の箇所が直感的に把握しやすい。なお、画像表示装置60は、赤枠f1〜f3による縁取り効果により選択されたボタン又は画像を強調する代わりに、選択されたボタン又は画像を任意の方法により強調表示してもよい。
操作説明表示欄75には、画像表示装置60は、個別画像表示欄74上で再生する動画に対するキーボード又は/及びマウスによる操作方法の概要を表示する。
また、画像表示装置60は、上述した各欄70〜75以外の画像閲覧画面の領域に、個別画像表示欄74上で表示させる受精卵の撮影画像の撮影時刻を示す時間制御バー80と、受精卵をスライスする位置(Z方向の位置)を指定するスライス制御バー81と、表示倍率制御バー82と、エクスポートボタン83と、輝度制御バー84と、コントラスト制御バー85と、再生制御ボタン86とを設けている。時間制御バー80、スライス制御バー81、表示倍率制御バー82、輝度制御バー84及びコントラスト制御バー85の各カーソル位置は、マウス操作などのユーザ入力により調整自在となっている。
画像表示装置60は、時間制御バー80のカーソル位置を、個別画像表示欄74での動画の再生時において、表示対象となる撮影時刻の遷移に従い右へ移動させる。また、画像表示装置60は、時間制御バー80のカーソル位置を変更するユーザ入力を受け付けた場合、変更後のカーソル位置に対応する撮影時刻を基準とした撮影画像の動画又は静止画像を個別画像表示欄74に表示する。スライス制御バー81は、カーソルの移動により、個別画像表示欄74上で表示させる受精卵の撮影画像のZ位置を段階的に指定可能となっている。例えば図3(B)の例に基づき位置「H」、「M」、「L」の各Z位置で撮影が行われた受精卵の撮影画像を対象とする場合、スライス制御バー81において、位置「H」、「M」、「L」のいずれかを指定することが可能となっている。画像表示装置60は、スライス制御バー81により指定されたZ位置で撮影された受精卵の撮影画像を、一覧画像表示欄73及び個別画像表示欄74において表示する。
表示倍率制御バー82、輝度制御バー84、コントラスト制御バー85は、それぞれ、個別画像表示欄74上に表示させる撮影画像の倍率、輝度、コントラストをカーソル移動により指定可能となっている。画像表示装置60は、表示倍率制御バー82、輝度制御バー84、コントラスト制御バー85のカーソル位置に対応する表示倍率、輝度、コントラストになるように、一覧画像表示欄73及び個別画像表示欄74に表示される撮影画像を調整する。また、エクスポートボタン83は、個別画像表示欄74において表示対象となっている撮影画像をエクスポートする際の出力形式(動画形式又は静止画像形式)を指定するボタンである。画像表示装置60は、ユーザ入力によりいずれかのエクスポートボタン83が選択された場合、例えば、選択されたエクスポートボタン83に対応する出力形式により撮影画像を記憶部63の所定のフォルダ内に出力する。再生制御ボタン86は、個別画像表示欄74上で表示させる受精卵の撮影画像を撮影開始時刻の撮影画像へ切り替えるボタン、動画の再生を開始するボタン、個別画像表示欄74上で表示させる受精卵の撮影画像を撮影終了時刻の撮影画像へ切り替えるボタンから構成されている。画像表示装置60は、ユーザ入力によりいずれかの再生制御ボタン86が選択された場合、選択された再生制御ボタン86に対応する機能を実行するように、個別画像表示欄74に表示する撮影画像の表示制御を行う。
図5は、培養容器指定欄70において8個のウェル12が配置された培養容器10に対応するチャンバが選択された場合の画像閲覧画面の表示例である。この例では、1番のインキュベータに設けられた2番のチャンバに対応するチャンバ指定ボタン78が選択されたことにより、8個のウェル12が配置された培養容器10の受精卵の撮影画像が表示対象となっている。
この場合、画像表示装置60は、例えば、記憶装置55から一覧画像表示欄73の一覧画像ILの表示に必要な撮影画像を取得後、これらの撮影画像のファイル名などを参照することで、対象のチャンバに保管された培養容器10のウェル12の配置の種類を認識する。ここでは、画像表示装置60は、8個のウェル12が配置された培養容器10が対象のチャンバに保管されたと判断し、当該培養容器10と同一の配置により撮影画像を並べた一覧画像ILを生成する。そして、画像表示装置60は、対象となる8個のウェル12が配置された培養容器10の各ウェル12の受精卵の撮影画像を、対応する各ウェル12の配置に従い並べて表示した一覧画像ILを一覧画像表示欄73に表示する。この場合、一覧画像ILは、同一の培養容器10の各ウェル12に対応する撮影画像から構成され、各ウェル12に対応する撮影画像の配置は、培養容器10における各ウェル12の配置と等しい。また、この例では、一覧画像IL内の各撮影画像に対応するウェル12の識別番号をユーザが容易に把握できるように、画像表示装置60は、各ウェル12の識別番号A〜Hを、一覧画像ILにおいて明示している。
このように、画像表示装置60は、表示対象となる培養容器10のウェル12の配置を認識し、一覧画像表示欄73に表示させる一覧画像ILの配置を、対象となる培養容器10におけるウェル12の配置と等しくする。これにより、画像表示装置60は、個別画像表示欄74に表示中の受精卵が収容されているウェル12の位置を直感的に把握しやすくすることができる。なお、画像表示装置60は、表示対象となる培養容器10のウェル12の配置を自動で認識する代わりに、当該配置に関するユーザ入力を受け付けることで、表示対象となる培養容器10のウェル12の配置を認識してもよい。
(2)処理フロー
図6は、画像閲覧画面の表示処理のフローチャートである。この処理は、主として画像表示装置60により行われる。実際には、画像表示装置60を構成するコンピュータが予め用意されたプログラムを実行することにより行われる。なお、前提として、撮影装置50により、1または複数の培養容器10内の受精卵について複数の撮影画像が生成され、記憶装置55に記憶されているものとする。
まず、画像表示装置60は、画像閲覧画面の起動を指示するユーザ入力を検知した場合、記憶装置55に記憶されている撮影画像のフォルダ等を参照することで、画像閲覧画面において表示対象となるインキュベータの状態を特定する(ステップS11)。これにより、画像表示装置60は、画像閲覧画面において表示すべきインキュベータ指定ボタン78の色分け等を決定する。次に、画像表示装置60は、画像閲覧画面を表示し、表示対象となる培養容器10を特定するためのインキュベータ及びチャンバを指定する入力を、培養容器指定欄70において受け付ける(ステップS12)。次に、画像表示装置60は、培養容器指定欄70上のインキュベータ指定ボタン78及びチャンバ指定ボタン79により指定されたインキュベータ及びチャンバに対応する培養容器10のウェル12の配置を自動により又はユーザ入力に基づき認識する(ステップS13)。
そして、画像表示装置60は、ステップS13で認識したウェル12の配置に基づき、一覧画像表示欄73上に対象となる培養容器10と同一配置により撮影画像が並べられた一覧画像ILを表示すると共に、一覧画像ILにおいてユーザが指定した任意の撮影画像の動画を個別画像表示欄74上に表示する(ステップS14)。その後、画像表示装置60は、画像閲覧画面に設けられた各操作用インターフェースに対するユーザ入力に基づき、一覧画像表示欄73又は/及び個別画像表示欄74等の表示を更新する(ステップS15)。
(3)他の表示例
好適には、画像表示装置60は、所定のユーザ入力を検知した場合に、一覧画像ILの各撮影画像上に、当該撮影画像に対応する受精卵の特徴量、判別結果又は処理ステータスのいずれかに関する情報を重ねて表示するとよい。
図7(A)は、一覧画像表示欄73上に表示させる一覧画像ILの各撮影画像上に、撮影対象の受精卵の特徴量に関する情報を重ねて表示する第1表示例を示す。
第1表示例では、画像表示装置60は、一覧画像ILの各撮影画像上に、当該撮影画像に示された受精卵に存在する前核の数の時間変化を示すグラフを重畳表示させている。ここで、グラフのX軸は、記憶装置55に対象の受精卵の撮影画像が記録された撮影期間中における時間(t)を表し、グラフのY軸は、撮影画像から視認できる前核の数(PN)を示している。なお、画像表示装置60は、前核の数の情報を、ユーザ入力を受け付けることで取得する。この態様によれば、画像表示装置60は、一覧画像ILの各撮影画像により表された受精卵の撮影期間中における前核の数の時間推移をユーザである胚培養士に把握させることができる。
図7(B)は、一覧画像表示欄73上に表示させる一覧画像ILの各撮影画像上に、撮影対象の受精の正常又は異常を示す判別結果の情報を重ねて表示した第2表示例を示す。
第2表示例では、画像表示装置60は、一覧画像ILの各撮影画像上に、当該撮影画像に示された受精卵に存在する前核の数を胚培養士による手動入力により判別し、その判別結果に応じて色分けして表示している。図7(B)では、前核の数が正常値である2となる受精卵の撮影画像には、「正常」と示した白色のウィンドウを表示している。また、画像表示装置60は、前核の数が正常でない1又は3となる受精卵の撮影画像には、「PN=1」又は「PN=3」と示したウェインドウを、赤色などの目立つ着色により表示している。
図7(C)は、一覧画像表示欄73上に表示させる一覧画像ILの各撮影画像上に、撮影対象の受精卵に対する処理ステータスの情報を重ねて表示した第3表示例を示す。第3表示例では、画像表示装置60は、胚培養士による手動入力により前核の数を取得する場合において、一覧画像ILの各撮影画像上に手動入力の有無に関する情報を処理ステータスの情報として表示している。具体的には、画像表示装置60は、手動入力におけるそれぞれの処理ステータスを示す「入力済」、「入力途中」、「未入力」のいずれかを示したウィンドウを、撮影画像上に色分けして表示している。
また、画像表示装置60は、ユーザ入力に基づき、上述の特徴量、判別結果又は処理ステータスのいずれの情報を一覧画像ILの各撮影画像に重畳表示させるか決定してもよい。この場合、例えば、画像表示装置60は、上述のユーザ入力を受け付けるインターフェース(例えばラジオボタンやプルダウンメニュー等)を画像閲覧画面上に表示させ、一覧画像ILの各撮影画像に重畳表示させる情報をユーザに選択させる。これにより、画像表示装置60は、ユーザが必要な情報を好適に一覧画像ILの各撮影画像に重畳表示させることができる。
図8は、図4の画像閲覧画面における患者情報表示欄71の全患者表示ボタン87が選択されたときの画像閲覧画面の表示例である。
図8の例では、個別画像表示欄74、操作説明表示欄75等に代えて、全患者情報リスト90を表示するための領域が設けられている。ここで、画像表示装置60は、全患者表示ボタン87が選択された場合に、記憶装置55又は画像表示装置60の記憶部63内に記憶された患者情報DBを参照し、当該患者情報DBに記録された情報の一部又は全部を全患者情報リスト90として一覧表示させている。ここでは、全患者情報リスト90は、患者IDを示す「PID1」、「PID2」、患者名を示す「Name」、対象の患者の受精卵の撮影が行われた日時を表す「Date」、対象の患者の受精卵の培養容器10が収容されたチャンバの番号を示す「Chamber」、対象の患者の受精卵の培養容器10が収容されたインキュベータの番号を示す「Device」の各項目を有する。画像表示装置60は、全患者情報リスト90を表示することで、受精卵の撮影対象となった患者の一覧情報を好適にユーザに確認させることができる。
[変形例]
次に、上記の画像表示システムの変形例について説明する。以下の変形例は、適宜組み合わせて実施することができる。
(変形例1)
上記の画像表示システムでは、培養容器10に複数のウェル12が形成され、受精卵は各ウェル12に収容されているが、培養容器10にウェルが形成されていることは必須ではない。即ち、ウェルが形成されていない容器を使用する場合でも、同一の容器内に、受精卵を収容可能な複数の収容箇所がある場合には本発明を適用することが可能である。
(変形例2)
上記の実施例では、カメラ52をX方向及びY方向に移動して1つのウェル12又は1つの受精卵毎に1枚の撮影画像を生成しているが、本発明の適用はこれには限られない。他の例では、複数のウェル又は受精卵を1視野内で1枚の全体画像として撮影し、画像処理により全体画像をウェル毎又は受精卵毎の画像に分割することにより、ウェル又は受精卵毎の撮影画像を生成することとしてもよい。なお、撮影範囲が広すぎると、一般的には解像度が落ちるため、画像の精細さの観点では、ウェル毎に個別に撮影することが望ましい。一方で、ウェル毎に個別に撮影するよりも、全体画像を撮影する方が撮影にかかる時間が短く、カメラ52のX方向及びY方向の移動も少なくて済むため、撮影の簡略化、装置の簡素化の観点では、全体画像を撮影する方がよい。
(変形例3)
上記の実施例では、1つのウェルに1つの受精卵が収容されているが、その代わりに、1つのウェルに複数(例えば2つ)の受精卵を収容してもよい。また、ウェルが形成されていない培養容器10を使用する場合でも、複数の受精卵を1つのグループとして容器に収容してもよい。なお、1つのウェルに1つの受精卵を収容する方が、個別管理の観点ではより好ましい。
(変形例4)
図1に示される画像表示システム100の構成は一例であり、本発明を適用可能な構成は、図1に示す構成に限られない。
例えば、画像表示装置60は、記憶装置55又は図示しないサーバ装置が生成した表示情報に基づき画像閲覧画面を表示してもよい。この場合、記憶装置55又はサーバ装置は、実施形態で画像表示装置60が行った画像閲覧画面の表示処理(例えば図6のフローチャートの処理)を実行することで、画像閲覧画面の表示情報を生成し、生成した表示情報を画像表示装置60に送信する。そして、画像表示装置60は、受信した表示情報に基づき、画像閲覧画面を表示する。また、画像表示装置60は、画像閲覧画面上でのユーザ入力に対応する入力情報を、上述の記憶装置55又はサーバ装置へ送信することで、当該入力情報が示す入力内容を反映した画像閲覧画面の表示情報を受信する。この態様によっても、画像表示装置60は、図4又は図5に示されるような画像閲覧画面を好適に表示することができる。なお、この態様では、上述の記憶装置55又はサーバ装置は、本発明における「画像表示装置」として機能し、画像表示装置60は、本発明における「表示装置」として機能する。また、記憶装置55又はサーバ装置のCPUなどは、本発明におけるプログラムを実行する「コンピュータ」として機能する。
他の例では、記憶装置55に記憶される撮影画像は、撮影装置50又は画像表示装置60のいずれかの記憶部に記憶されていてもよい。この場合であっても、画像表示装置60は、撮影装置50又は記憶部63から撮影画像を取得することで、好適に画像閲覧画面を表示することができる。
(変形例5)
上記の実施形態では、撮影装置50は、撮影画像に対して患者ID、ウェル位置、カメラの焦点位置、撮影時刻などを示す属性情報をファイル名などに付加して記憶装置55に送信しているが、その際に、CRCコード、チェックサムデータなどを付加してもよい。これにより、撮影後に撮影画像のデータが改変されたり、誤ってファイル名が変更されたりして撮影画像の取り違えなどが生じることを防止することが可能となる。
(変形例6)
同一の培養容器10から生成される同一患者の受精卵画像グループを識別する方法として、画像の撮影時刻から判定してもよい。
一般に、ウェル12間のカメラ52の移動は短時間であるが、培養容器10間のカメラ52の移動は長時間を要する。言い換えると、培養容器I内のウェル12を観察する際の移動距離は小さいため、撮影間隔が短いが、培養容器Iから培養容器IIに移動するときには移動距離が長くなり、撮影間隔が長くなる。よって、画像表示装置60は、撮影時刻の間隔が所定時間未満となる撮影画像のグループを、同一の培養容器10から生成される同一患者の受精卵画像グループとみなすとよい。この態様によっても、画像表示装置60は、同一の培養容器10から生成される同一患者の受精卵画像グループを好適に識別することができる。
(変形例7)
実施形態での説明においては、収容箇所である複数のウェル12に受精卵が複数個(例えば図3(A)では13個)収容されていたが、1つの収容箇所にのみ受精卵が収容されている場合であっても、本発明を適用することが可能である。この場合であっても、例えば、画像表示装置60は、受精卵が収容されたウェル12を撮影した画像を個別画像表示欄74に個別表示すると共に、一覧画像表示欄73に一覧画像ILを表示させることで、受精卵が収容されたウェル12の配置等を好適にユーザに把握させることができる。
10 培養容器
12 ウェル
20 撮影画像
30 受精卵
50 撮影装置
51 照明
52 カメラ
53 制御部
54 通信部
55 記憶装置
60 画像表示装置

Claims (14)

  1. 対象物を収容するための複数の収容箇所を夫々個別に撮影した複数の撮影画像を取得する取得部と、
    前記複数の撮影画像の各々により表される収容箇所が前記複数の収容箇所の実際の配置と同一の配置となるように前記複数の撮影画像を並べた一覧画像を生成し当該一覧画像を前記複数の撮影画像のいずれか一つを個別に表示した個別画像と共に表示部に表示させる表示制御部と、
    を備えることを特徴とする画像表示装置。
  2. 前記表示制御部は、前記一覧画像を、少なくとも前記個別画像を表示している間では、前記表示部に表示された画面上に常時表示することを特徴とする請求項1に記載の画像表示装置。
  3. 前記表示制御部は、前記個別画像と同一の受精卵を表す前記一覧画像内の撮影画像を強調して前記表示部に表示させることを特徴とする請求項1または2に記載の画像表示装置。
  4. 前記表示制御部は、前記個別画像を、前記一覧画像を構成する撮影画像よりも大きく前記表示部に表示させることを特徴とする請求項1〜3のいずれか一項に記載の画像表示装置。
  5. 前記一覧画像として表示された複数の撮影画像から1つの撮影画像を選択する入力を受け付ける入力受付部をさらに備え、
    前記表示制御部は、前記入力により選択された撮影画像を前記個別画像として前記表示部に表示させることを特徴とする請求項1〜4のいずれか一項に記載の画像表示装置。
  6. 前記入力受付部は、撮影対象となる複数の収容箇所が撮影時に載置されたインキュベータ又はチャンバの少なくともいずれかを指定する入力をさらに受け付け、
    前記取得部は、前記入力により指定されたインキュベータ又はチャンバに撮影時に載置された複数の収容箇所を撮影した複数の撮影画像を取得することを特徴とする請求項5に記載の画像表示装置。
  7. 前記収容箇所は、凹部であり、
    前記表示制御部は、前記凹部の配置を特定し、特定した配置に基づき前記複数の撮影画像を並べた一覧画像を、前記表示部に表示させることを特徴とする請求項1〜6のいずれか一項に記載の画像表示装置。
  8. 前記表示制御部は、前記一覧画像として表示する撮影画像の各々に、当該撮影画像に表示された対象物の特徴量、判別結果、又は処理ステータスの情報を重ねて表示させることを特徴とする請求項1〜7のいずれか一項に記載の画像表示装置。
  9. 前記表示制御部は、前記特徴量の情報として、時系列での特徴量の変化を表すグラフを前記表示部に表示させることを特徴とする請求項8に記載の画像表示装置。
  10. 前記表示制御部は、前記判別結果又は処理ステータスの情報を、当該判別結果又は当該処理ステータスに応じて色分けして前記表示部に表示させることを特徴とする請求項8に記載の画像表示装置。
  11. 前記表示制御部は、前記個別画像として、時系列により撮影された撮影画像に基づく動画像を、前記表示部に表示させることを特徴とする請求項1〜10のいずれか一項に記載の画像表示装置。
  12. 前記表示制御部は、前記一覧画像を前記個別画像と共に表示するための表示情報を、前記表示部を有する表示装置に送信することを特徴とする請求項1〜11のいずれか一項に記載の画像表示装置。
  13. 請求項1〜12のいずれか一項に記載の画像表示装置としてコンピュータを機能させることを特徴とするプログラム。
  14. 画像表示装置が実行する制御方法であって、
    対象物を収容するための複数の収容箇所を夫々個別に撮影した複数の撮影画像を取得する取得工程と、
    前記複数の撮影画像の各々により表される収容箇所が前記複数の収容箇所の実際の配置と同一の配置となるように前記複数の撮影画像を並べた一覧画像を生成し当該一覧画像を前記複数の撮影画像のいずれか一つを個別に表示した個別画像と共に表示部に表示させる表示制御工程と、
    を有することを特徴とする制御方法。
JP2017139930A 2017-07-19 2017-07-19 画像表示装置、プログラム及び制御方法 Active JP6939170B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2017139930A JP6939170B2 (ja) 2017-07-19 2017-07-19 画像表示装置、プログラム及び制御方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2017139930A JP6939170B2 (ja) 2017-07-19 2017-07-19 画像表示装置、プログラム及び制御方法

Publications (2)

Publication Number Publication Date
JP2019017316A JP2019017316A (ja) 2019-02-07
JP6939170B2 true JP6939170B2 (ja) 2021-09-22

Family

ID=65352453

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2017139930A Active JP6939170B2 (ja) 2017-07-19 2017-07-19 画像表示装置、プログラム及び制御方法

Country Status (1)

Country Link
JP (1) JP6939170B2 (ja)

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20050270370A1 (en) * 2002-09-06 2005-12-08 Celestar Lexico-Sciences, Inc. Microscope image processing system, microscope image processing method, program, and recording medium
EP1804107B1 (en) * 2004-09-22 2018-10-24 Nikon Corporation Microscope system and image processing method
DK2621344T3 (da) * 2010-09-27 2024-03-18 Ares Trading Sa Apparat, fremgangsmåde og system til automatisk billeddannelse og evaluering af embryoner, oocytter og stamceller
JP2013109119A (ja) * 2011-11-21 2013-06-06 Nikon Corp 顕微鏡制御装置およびプログラム

Also Published As

Publication number Publication date
JP2019017316A (ja) 2019-02-07

Similar Documents

Publication Publication Date Title
JP5446868B2 (ja) プログラム、コンピュータおよび培養状態解析方法
CN104981798B (zh) 生物标志表达的选择和显示
CN110431463A (zh) 组织样本的组织学检查系统
US20120134571A1 (en) Cell classification method, image processing program and image processing device using the method, and method for producing cell aggregation
JP2021040324A (ja) 情報処理装置、制御方法、及びプログラム
JP5672700B2 (ja) 細胞観察装置およびプログラム
US20160147939A1 (en) Efficient management of visible light still images and/or video
CN103654696A (zh) 诊断支持设备和诊断支持方法
JP5516108B2 (ja) 観察装置、観察方法、及びプログラム
CN110741334B (zh) 显示控制设备、显示控制方法和显示控制程序
US11854178B2 (en) Photography session assistant
JP2010086221A (ja) 画像編集方法および装置、ならびに画像編集方法を実行させるプログラムを記録したコンピュータに読取可能な記録媒体
JP6946807B2 (ja) 画像表示装置、プログラム及び制御方法
JP6939170B2 (ja) 画像表示装置、プログラム及び制御方法
CN105122037A (zh) 图像处理系统、图像处理设备、程序、存储介质和图像处理方法
US8010549B2 (en) Method for automatic sequential imaging of selected computer produced dialog boxes with fields for optional entry of data to aid visual retrieval
JP6996145B2 (ja) 画像表示装置、プログラム及び制御方法
CN106030576A (zh) 细胞观察信息处理系统、细胞观察信息处理方法、细胞观察信息处理程序、细胞观察信息处理系统具有的记录部、细胞观察信息处理系统具有的装置
JP2019017319A (ja) 画像表示装置、プログラム及び制御方法
JP2018061440A (ja) 受精判定システム
JP7432319B2 (ja) 浮遊懸濁培養状態監視装置、浮遊懸濁培養状態監視システム、コンピュータプログラム及び浮遊懸濁培養状態監視方法
US20090245642A1 (en) Image selecting apparatus and image selecting method
WO2021235519A1 (ja) 画像解析方法、観察システム及び画像解析プログラム
JP2016090234A (ja) 画像処理装置、画像処理プログラム及び画像処理方法
US11194145B2 (en) Image reproducing device and observation system for selecting images using tag information attached in accordance with information that operation is performed on sample and input when at least one of images is acquired

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20200526

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20210322

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20210330

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20210526

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20210803

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20210816

R150 Certificate of patent or registration of utility model

Ref document number: 6939170

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150