JPWO2022176941A5 - 口腔内カメラシステム、歯牙識別方法、制御方法及びプログラム - Google Patents

Claims (15)

1. ユーザの口腔内の歯牙を撮影することで画像データを生成する撮影部と、
   多軸加速度センサの出力に基づき前記撮影部の姿勢を検出する姿勢検出部と、
   検出した前記姿勢に基づき、歯列を区分することで定義される前記口腔内の複数の領域のうち前記撮影部が撮影している領域を検出する領域検出部と、
   前記画像データと、検出された前記領域とに基づき、歯牙の種類及び位置の複数の候補から、使用する候補を絞り込み、絞り込んだ候補と前記画像データとに基づき、前記歯牙の種類及び位置を識別する識別部と、を備える
   口腔内カメラシステム。
2. 前記領域検出部は、前記領域の検出において、少なくとも上顎の領域か、下顎の領域かを検出する
   請求項１記載の口腔内カメラシステム。
3. 前記複数の領域は、前記上顎の領域に含まれる複数の領域と、前記下顎の領域に含まれる複数の領域とを含む
   請求項２記載の口腔内カメラシステム。
4. 前記領域検出部は、さらに、検出した前記姿勢に基づき、撮影方向を検出し、
   前記識別部は、前記画像データと、検出された前記領域及び前記撮影方向とに基づき前記歯牙の種類及び位置を識別する
   請求項１～３のいずれか１項に記載の口腔内カメラシステム。
5. 前記識別部は、
   前記画像データを用いて、歯牙の種類及び位置の複数の候補の各々に対して評価値を算出し、
   検出した前記領域に応じて前記評価値を補正し、
   補正された前記評価値を用いて、前記画像データで示される前記歯牙の種類及び位置を識別する
   請求項１～４のいずれか１項に記載の口腔内カメラシステム。
6. 前記識別部は、ニューラルネットワークを含み、前記画像データと、検出された前記領域とを入力とし、前記歯牙の種類及び位置を出力する推定モデルを用いて、前記歯牙の種類及び位置を識別する
   請求項１～４のいずれか１項に記載の口腔内カメラシステム。
7. 前記識別部は、
   前記画像データから歯間位置を検出し、
   検出された歯間位置に基づき、各々が一つの歯牙を示す歯牙画像を生成し、
   前記歯牙画像と、検出された前記領域とに基づき前記歯牙画像で示される歯牙の種類及び位置を識別する
   請求項１～６のいずれか１項に記載の口腔内カメラシステム。
8. 前記口腔内カメラシステムは、さらに、前記ユーザの性別、年齢層及び人種の少なくとも一つを示すユーザ情報を取得するユーザ情報取得部を含み、
   前記識別部は、前記ユーザ情報と、前記画像データと、検出された前記領域とに基づき前記歯牙の種類及び位置を識別する
   請求項１～７のいずれか１項に記載の口腔内カメラシステム。
9. 前記撮影部の所定の姿勢である初期姿勢を取得し、
   前記領域検出部は、検出した前記姿勢を前記初期姿勢を用いて補正し、補正された前記姿勢に基づき、前記複数の領域のうち前記撮影部が撮影している領域を検出する
   請求項１～８のいずれか１項に記載の口腔内カメラシステム。
10. 前記所定の姿勢は、ユーザの姿勢と前記撮影部の姿勢とが予め定められた関係となる前記撮影部の姿勢である
    請求項９記載の口腔内カメラシステム。
11. 前記撮影部は、ハンドル部と、画像データを生成する撮像素子を含むヘッド部と、前記ハンドル部と前記ヘッド部とを接続するネック部とを含み、
    前記所定の姿勢は、前記ユーザの前額面と前記撮影部の撮像面とが平行であり、かつ、前記撮像面における平面視において前記ユーザの垂直軸と前記ハンドル部から前記ヘッド部に向かう方向とが一致又は直交する状態である
    請求項１０記載の口腔内カメラシステム。
12. 前記撮影部は、ハンドル部と、画像データを生成する撮像素子を含むヘッド部と、前記ハンドル部と前記ヘッド部とを接続するネック部とを含み、
    前記所定の姿勢は、予め定められた歯牙と前記撮影部の撮像面とを平行に正対させ、かつ、前記撮像面における平面視において前記ハンドル部から前記ヘッド部に向かう方向と前記予め定められた歯牙の高さ方向とが一致又は直交する状態である
    請求項９記載の口腔内カメラシステム。
13. 撮影部が、ユーザの口腔内の歯牙を撮影することで画像データを生成し、
    多軸加速度センサの出力に基づいて前記撮影部の姿勢を検出し、検出した前記姿勢に基づき、歯列を区分することで定義される前記口腔内の複数の領域のうち前記撮影部が撮影している領域を検出し、
    前記画像データと、検出された前記領域とに基づき、歯牙の種類及び位置の複数の候補から、使用する候補を絞り込み、絞り込んだ候補と前記画像データとに基づき、前記画像データで示される前記歯牙の種類及び位置を識別する
    歯牙識別方法。
14. １または複数のプロセッサと、表示部とを有する口腔内カメラシステムの制御方法であって、
    前記１または複数のプロセッサは、
    口腔内カメラがユーザの口腔内の歯牙を撮影することで生成された画像データを取得し、
    前記口腔内カメラの姿勢に基づいて歯列を区分することで定義される前記口腔内の複数の領域から前記口腔内カメラが撮影している領域を検出し、
    前記画像データと、検出された前記領域とに基づき、歯牙の種類及び位置の複数の候補から、使用する候補を絞り込み、
    絞り込んだ候補と前記画像データとに基づき、前記画像データで示される前記歯牙の種類及び位置を識別し、
    前記表示部は、前記歯牙の種類及び位置に関する情報を表示する
    制御方法。
15. 請求項１４に記載の制御方法をコンピュータに実行させるためのプログラム。