JP2020087440A5 - - Google Patents

Claims (20)

1. 画像検出人工知能（ＡＩ）エンジンを訓練するための訓練データの効率的な収集を容易にするためのコンピュータ実装方法であって、
   シーン内に配置された物理的物体の３次元（３Ｄ）モデルを取得することと、
   前記３Ｄモデルに基づいて、前記物理的物体に対応する仮想物体を生成することと、
   拡張現実（ＡＲ）カメラを構成することであって、
   前記ＡＲカメラの視野内で、前記物理的物体の上に前記仮想物体を自動的に重ね合わせ、
   前記シーン内の前記物理的物体を含む物理的画像、及び前記物理的物体上に重ね合わせられた前記仮想物体を含む対応するＡＲ画像を捕捉し、
   前記ＡＲ画像に基づいて前記物理的画像のアノテーションを自動的に作成する、
   ように前記ＡＲカメラを構成することと、を含む、コンピュータ実装方法。
2. 前記物理的画像の前記アノテーションを作成することが、前記物理的画像の画素レベルのラベルを作成することを含む、請求項１に記載のコンピュータ実装方法。
3. 前記物理的画像の前記アノテーションが、前記ＡＲ画像内の画素のラベルを前記物理的画像内の画素にリンクさせる画素マスクを含み、前記ＡＲ画像内の前記画素の前記ラベルが、前記３Ｄモデルに基づいて作成される、請求項２に記載のコンピュータ実装方法。
4. 前記３Ｄモデルが、
   前記物理的物体と関連付けられたコンピュータ支援設計（ＣＡＤ）モデル、又は
   ３Ｄスキャン技術を使用して生成された前記物理的物体の３Ｄモデルを含む、請求項１に記載のコンピュータ実装方法。
5. 前記ＡＲカメラが、前記ＡＲカメラの前記視野内で、前記仮想物体を前記物理的物体に自動的に位置合わせするように、特徴分析技術を適用することで、前記仮想物体を前記物理的物体上に自動的に重ね合わせるように構成される、請求項１に記載のコンピュータ実装方法。
6. 撮像条件を変更して、更新されたＡＲカメラ視野を作成することと、
   前記更新されたＡＲカメラ視野内で、前記仮想物体を前記物理的物体に再位置合わせすることと、
   追加の物理的画像及び追加の対応するＡＲ画像を捕捉することと、
   前記ＡＲ画像に基づいて前記追加の物理的画像にアノテーションすることと、を更に含む、請求項１に記載のコンピュータ実装方法。
7. 前記仮想物体を前記物理的物体に再位置合わせすることが、
   前記ＡＲカメラの姿勢を追跡することと、
   前記ＡＲカメラの前記追跡された姿勢に基づいて、前記更新されたカメラ視野内の前記物理的物体の姿勢を計算することと、
   前記更新されたカメラ視野内の前記物理的物体の前記計算された姿勢に基づいて前記仮想物体の姿勢を調整することと、を含む、請求項６に記載のコンピュータ実装方法。
8. 前記撮像条件を変更することが、
   前記カメラと前記物理的物体との間の距離を変更することと、
   前記カメラの角度を変更することと、
   照明条件を変更することと、
   前記シーン内の背景を変更することと、
   前記物理的物体の表面的外観を変更することと、
   前記物理的物体の姿勢を変更することと、
   前記物理的物体内の２つの構成要素間の相対位置を変更することと、
   閉塞物体を追加又は除去することと、のうちの１つ以上を含む、請求項６に記載のコンピュータ実装方法。
9. 訓練データ集に、前記物理的画像及び前記対応するアノテーションを記憶することと、
   前記訓練データ集に基づいて、前記物理的物体を識別するように畳み込みニューラルネットワークを訓練することと、を更に含む、請求項１に記載のコンピュータ実装方法。
10. 前記ＡＲカメラが、スマートグラスの一部である、請求項１に記載のコンピュータ実装方法。
11. 画像検出人工知能（ＡＩ）エンジンを訓練するための訓練データの効率的な収集を容易にするためのコンピュータシステムであって、
    プロセッサと、
    前記プロセッサによって実行されると、前記プロセッサに方法を実行させる命令を記憶する記憶デバイスと、を含み、前記方法が、
    シーン内に配置された物理的物体の３次元（３Ｄ）モデルを取得することと、
    前記３Ｄモデルに基づいて、前記物理的物体に対応する仮想物体を生成することと、
    拡張現実（ＡＲ）カメラを構成することであって、
    前記ＡＲカメラの視野内で、前記物理的物体の上に前記仮想物体を自動的に重ね合わせ、
    前記シーン内の前記物理的物体を含む物理的画像、及び前記物理的物体上に重ね合わせられた前記仮想物体を含む対応するＡＲ画像を捕捉し、
    前記ＡＲ画像に基づいて前記物理的画像のアノテーションを自動的に作成する、
    ように前記ＡＲカメラを構成することと、を含む、コンピュータシステム。
12. 前記物理的画像の前記アノテーションを作成することが、前記物理的画像の画素レベルのラベルを作成することを含む、請求項１１に記載のコンピュータシステム。
13. 前記物理的画像の前記アノテーションが、前記ＡＲ画像内の画素のラベルを前記物理的画像内の画素にリンクさせる画素マスクを含み、前記ＡＲ画像内の前記画素の前記ラベルが、前記３Ｄモデルに基づいて作成される、請求項１２に記載のコンピュータシステム。
14. 前記３Ｄモデルが、
    前記物理的物体と関連付けられたコンピュータ支援設計（ＣＡＤ）モデル、又は
    ３Ｄスキャン技術を使用して生成された前記物理的物体の３Ｄモデルを含む、請求項１に記載のコンピュータ実装方法。
15. 前記ＡＲカメラが、前記ＡＲカメラの前記視野内で、前記仮想物体を前記物理的物体に自動的に位置合わせするように、特徴分析技術を適用することで、前記仮想物体を前記物理的物体上に自動的に重ね合わせるように構成される、請求項１１に記載のコンピュータシステム。
16. 前記方法が、
    撮像条件を変更して、更新されたＡＲカメラ視野を作成することと、
    前記更新されたＡＲカメラ視野内で、前記仮想物体を前記物理的物体に再位置合わせすることと、
    追加の物理的画像及び追加の対応するＡＲ画像を捕捉することと、
    前記ＡＲ画像に基づいて前記追加の物理的画像にアノテーションすることと、を更に含む、請求項１１に記載のコンピュータシステム。
17. 前記仮想物体を前記物理的物体に再位置合わせすることが、
    前記ＡＲカメラの姿勢を追跡することと、
    前記ＡＲカメラの前記追跡された姿勢に基づいて、前記更新されたカメラ視野内の前記物理的物体の姿勢を計算することと、
    前記更新されたカメラ視野内の前記物理的物体の前記計算された姿勢に基づいて前記仮想物体の姿勢を調整することと、を含む、請求項１６に記載のコンピュータシステム。
18. 前記撮像条件を変更することが、
    前記カメラと前記物理的物体との間の距離を変更することと、
    前記カメラの角度を変更することと、
    照明条件を変更することと、
    前記シーン内の背景を変更することと、
    前記物理的物体の表面的外観を変更することと、
    前記物理的物体の姿勢を変更することと、
    前記物理的物体内の２つの構成要素間の相対位置を変更することと、
    閉塞物体を追加又は除去することと、のうちの１つ以上を含む、請求項１６に記載のコンピュータシステム。
19. 前記方法が、
    訓練データ集に、前記物理的画像及び前記対応するアノテーションを記憶することと、
    前記訓練データ集に基づいて、前記物理的物体を識別するように畳み込みニューラルネットワークを訓練することと、を更に含む、請求項１１に記載のコンピュータシステム。
20. 前記ＡＲカメラが、スマートグラスの一部である、請求項１１に記載のコンピュータシステム。