JPWO2022034646A5 - - Google Patents

Download PDF

Info

Publication number
JPWO2022034646A5
JPWO2022034646A5 JP2022542531A JP2022542531A JPWO2022034646A5 JP WO2022034646 A5 JPWO2022034646 A5 JP WO2022034646A5 JP 2022542531 A JP2022542531 A JP 2022542531A JP 2022542531 A JP2022542531 A JP 2022542531A JP WO2022034646 A5 JPWO2022034646 A5 JP WO2022034646A5
Authority
JP
Japan
Prior art keywords
reflected light
image
display
workpiece
camera
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2022542531A
Other languages
English (en)
Other versions
JP7479480B2 (ja
JPWO2022034646A1 (ja
Filing date
Publication date
Application filed filed Critical
Priority claimed from PCT/JP2020/030652 external-priority patent/WO2022034646A1/ja
Publication of JPWO2022034646A1 publication Critical patent/JPWO2022034646A1/ja
Publication of JPWO2022034646A5 publication Critical patent/JPWO2022034646A5/ja
Application granted granted Critical
Publication of JP7479480B2 publication Critical patent/JP7479480B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Description

本開示の一態様に係る表示制御装置は、加工シミュレーションによって加工された仮想の加工物の画像を表示部に表示させる表示制御装置であって、前記加工物の形状を示す形状データを取得する形状データ取得部と、前記加工物の材質を示す材質情報を取得する材質情報取得部と、前記加工物に仮想の光源によって光を照射するときの照明条件を取得する照明条件取得部と、前記表示部における前記画像の表示範囲を決定する仮想のカメラの位置を示すカメラ位置情報を取得する位置情報取得部と、前記表示部の表示面から観察者の眼の位置までの距離と前記表示面に対する前記観察者の視線の方向とを含む観察状態情報を取得する観察状態取得部と、前記カメラから見た前記加工物の前記画像を生成し前記表示部に提供する表示画像生成部とを有し、前記表示画像生成部は、前記形状データ、前記照明条件、前記材質情報、前記カメラ位置情報、及び前記観察状態情報に基づいて、前記光源によって前記加工物の加工面の各位置に照射された光の反射光である第1の反射光のうちの、前記各位置から前記観察者の眼に向かう反射光である第2の反射光を算出し、前記カメラから見た前記加工物の前記画像に前記第2の反射光を付加し、生成される前記画像に応じて前記第1の反射光のうちの1次反射光を前記第2の反射光として前記画像に付加する処理又は前記第1の反射光のうちの前記1次反射光及び2次反射光を前記第2の反射光として前記画像に付加する処理のいずれかを行うことを特徴とする
本開示の他の態様に係る表示制御方法は、加工シミュレーションによって加工された仮想の加工物の画像を表示部に表示させる表示制御装置が実行する表示制御方法であって、前記加工物の形状を示す形状データを取得するステップと、前記加工物に仮想の光源によって光を照射するときの照明条件を取得するステップと、前記加工物の材質を示す材質情報を取得するステップと、前記表示部における前記画像の表示範囲を決定する仮想のカメラの位置を示すカメラ位置情報を取得するステップと、前記表示部の表示面から観察者の眼の位置までの距離と前記表示面に対する前記観察者の視線の方向とを含む観察状態情報を取得するステップと、前記カメラから見た前記加工物の前記画像を生成し前記表示部に提供するステップとを有し、前記表示部に前記画像を提供するステップでは、前記形状データ、前記照明条件、前記材質情報、前記カメラ位置情報、及び前記観察状態情報に基づいて、前記光源によって前記加工物の加工面の各位置に照射された光の反射光である第1の反射光のうちの、前記各位置から前記観察者の眼に向かう反射光である第2の反射光算出、前記カメラから見た前記加工物の前記画像に前記第2の反射光付加し、生成される前記画像に応じて前記第1の反射光のうちの1次反射光を前記第2の反射光として前記画像に付加する処理又は前記第1の反射光のうちの前記1次反射光及び2次反射光を前記第2の反射光として前記画像に付加する処理のいずれかを行うことを特徴とする

Claims (11)

  1. シミュレーション上の加工物の画像を表示部に表示させる表示制御装置であって、
    前記加工物の形状を示す形状データを取得する形状データ取得部と、
    前記加工物に仮想の光源によって光を照射するときの照明条件を取得する照明条件取得部と、
    前記加工物の材質を示す材質情報を取得する材質情報取得部と、
    前記表示部における前記画像の表示範囲を決定する仮想の視点位置を示す位置情報を取得する位置情報取得部と、
    前記仮想の視点位置から見た前記加工物の前記画像を生成し前記表示部に提供する表示画像生成部と
    を有し、
    前記表示画像生成部は、前記形状データ、前記照明条件、前記材質情報、及び前記位置情報に基づいて、前記光源によって前記加工物の加工面の各位置に照射された光の反射光である第1の反射光のうちの、前記各位置から前記仮想の視点位置に向かう反射光である第2の反射光を算出し、前記仮想の視点位置から見た前記加工物の前記画像に前記第2の反射光を付加し、生成される前記画像に応じて前記第1の反射光のうちの1次反射光を前記第2の反射光として前記画像に付加する処理又は前記第1の反射光のうちの前記1次反射光及び2次反射光を前記第2の反射光として前記画像に付加する処理のいずれかを行う
    表示制御装置。
  2. シミュレーション上の加工物の画像を表示部に表示させる表示制御装置であって、
    前記加工物に仮想の光源によって光を照射するときの照明条件を取得する照明条件取得部と、
    前記表示部における前記画像の表示範囲を決定する仮想の視点位置を示す位置情報を取得する位置情報取得部と、
    前記仮想の視点位置から見た前記加工物の前記画像を生成し前記表示部に提供する表示画像生成部と
    を有し、
    前記表示画像生成部は、前記照明条件及び前記位置情報に基づいて、前記光源によって前記加工物の加工面の各位置に照射された光の反射光である第1の反射光のうちの、前記各位置から前記仮想の視点位置に向かう反射光である第2の反射光を算出し、前記仮想の視点位置から見た前記加工物の前記画像に前記第2の反射光を付加し、生成される前記画像に応じて前記第1の反射光のうちの1次反射光を前記第2の反射光として前記画像に付加する処理又は前記第1の反射光のうちの前記1次反射光及び2次反射光を前記第2の反射光として前記画像に付加する処理のいずれかを行う
    表示制御装置。
  3. 前記表示部の表示面から観察者の視点位置までの距離と前記表示面に対する前記観察者の観察の方向との少なくとも一方を含む観察状態を示す観察状態情報を取得する観察状態取得部を有し、
    前記表示画像生成部は、さらに前記観察状態情報に基づいて前記第2の反射光を算出する
    請求項1又は2に記載の表示制御装置。
  4. 加工シミュレーションによって加工された仮想の加工物の画像を表示部に表示させる表示制御装置であって、
    前記加工物の形状を示す形状データを取得する形状データ取得部と、
    前記加工物に仮想の光源によって光を照射するときの照明条件を取得する照明条件取得部と、
    前記加工物の材質を示す材質情報を取得する材質情報取得部と、
    前記表示部における前記画像の表示範囲を決定する仮想のカメラの位置を示すカメラ位置情報を取得するカメラ位置情報取得部と、
    前記表示部の表示面から観察者の眼の位置までの距離と前記表示面に対する前記観察者の視線の方向との少なくとも一方を含む観察状態を示す観察状態情報を取得する観察状態取得部と、
    前記カメラから見た前記加工物の前記画像を生成し前記表示部に提供する表示画像生成部と
    を有し、
    前記表示画像生成部は、前記形状データ、前記照明条件、前記材質情報、前記カメラ位置情報、及び前記観察状態情報に基づいて、前記光源によって前記加工物の加工面の各位置に照射された光の反射光である第1の反射光のうちの、前記各位置から前記観察者の眼に向かう反射光である第2の反射光を算出し、前記カメラから見た前記加工物の前記画像に前記第2の反射光を付加し、生成される前記画像に応じて前記第1の反射光のうちの1次反射光を前記第2の反射光として前記画像に付加する処理又は前記第1の反射光のうちの前記1次反射光及び2次反射光を前記第2の反射光として前記画像に付加する処理のいずれかを行う
    表示制御装置。
  5. 前記表示画像生成部は、前記観察状態の変化に応じて、前記第2の反射光の強度を変更する
    請求項に記載の表示制御装置。
  6. 前記表示部における前記画像の縮尺を示す縮尺情報を取得する縮尺情報取得部を更に有し、
    前記表示画像生成部は、前記形状データ、前記照明条件、前記材質情報、前記カメラ位置情報、前記観察状態情報及び前記縮尺情報に基づいて、前記第2の反射光を算出し、前記カメラから見た前記加工物の前記画像に前記第2の反射光を付加する
    請求項又はに記載の表示制御装置。
  7. 前記表示画像生成部は、
    前記縮尺が第1の縮尺であるときに、前記第1の反射光のうちの1次反射光を前記第2の反射光として前記画像に付加し、
    前記縮尺が第1の縮尺より大きい第2の縮尺であるときに、前記第1の反射光のうちの前記1次反射光及び2次反射光を前記第2の反射光として前記画像に付加する
    請求項に記載の表示制御装置。
  8. 前記カメラ位置情報取得部は、前記観察者によって操作される入力装置を介して前記カメラ位置情報を取得する
    請求項からのいずれか1項に記載の表示制御装置。
  9. 請求項1からのいずれか1項に記載の表示制御装置と、
    前記表示部と
    を有する加工シミュレーション装置。
  10. 加工シミュレーションによって加工された仮想の加工物の画像を表示部に表示させる表示制御装置が実行する表示制御方法であって、
    前記加工物の形状を示す形状データを取得するステップと、
    前記加工物に仮想の光源によって光を照射するときの照明条件を取得するステップと、
    前記加工物の材質を示す材質情報を取得するステップと、
    前記表示部における前記画像の表示範囲を決定する仮想のカメラの位置を示すカメラ位置情報を取得するステップと、
    前記表示部の表示面から観察者の眼の位置までの距離と前記表示面に対する前記観察者の視線の方向とを含む観察状態情報を取得するステップと、
    前記カメラから見た前記加工物の前記画像を生成し前記表示部に提供するステップと
    を有し、
    前記表示部に前記画像を提供するステップでは、前記形状データ、前記照明条件、前記材質情報、前記カメラ位置情報、及び前記観察状態情報に基づいて、前記光源によって前記加工物の加工面の各位置に照射された光の反射光である第1の反射光のうちの、前記各位置から前記観察者の眼に向かう反射光である第2の反射光算出、前記カメラから見た前記加工物の前記画像に前記第2の反射光付加し、生成される前記画像に応じて前記第1の反射光のうちの1次反射光を前記第2の反射光として前記画像に付加する処理又は前記第1の反射光のうちの前記1次反射光及び2次反射光を前記第2の反射光として前記画像に付加する処理のいずれかを行う
    表示制御方法。
  11. 加工シミュレーションによって加工された仮想の加工物の画像を表示部に表示させるコンピュータに、
    前記加工物の形状を示す形状データを取得するステップと、
    前記加工物に仮想の光源によって光を照射するときの照明条件を取得するステップと、
    前記加工物の材質を示す材質情報を取得するステップと、
    前記表示部における前記画像の表示範囲を決定する仮想のカメラの位置を示すカメラ位置情報を取得するステップと、
    前記表示部の表示面から観察者の眼の位置までの距離と前記表示面に対する前記観察者の視線の方向との少なくとも一方を含む観察状態を示す観察状態情報を取得するステップと、
    前記カメラから見た前記加工物の前記画像を生成し前記表示部に提供するステップと
    を行わせるプログラムであって、
    前記表示部に前記画像を提供するステップでは、前記形状データ、前記照明条件、前記材質情報、前記カメラ位置情報、及び前記観察状態情報に基づいて、前記光源によって前記加工物の加工面の各位置に照射された光の反射光である第1の反射光のうちの、前記各位置から前記観察者の眼に向かう反射光である第2の反射光算出、前記カメラから見た前記加工物の前記画像に前記第2の反射光付加し、生成される前記画像に応じて前記第1の反射光のうちの1次反射光を前記第2の反射光として前記画像に付加する処理又は前記第1の反射光のうちの前記1次反射光及び2次反射光を前記第2の反射光として前記画像に付加する処理のいずれかを行う
    プログラム。
JP2022542531A 2020-08-12 2020-08-12 表示制御装置、加工シミュレーション装置、表示制御方法及びプログラム Active JP7479480B2 (ja)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/JP2020/030652 WO2022034646A1 (ja) 2020-08-12 2020-08-12 表示制御装置、加工シミュレーション装置、表示制御方法及びプログラム

Publications (3)

Publication Number Publication Date
JPWO2022034646A1 JPWO2022034646A1 (ja) 2022-02-17
JPWO2022034646A5 true JPWO2022034646A5 (ja) 2022-12-21
JP7479480B2 JP7479480B2 (ja) 2024-05-08

Family

ID=80247777

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2022542531A Active JP7479480B2 (ja) 2020-08-12 2020-08-12 表示制御装置、加工シミュレーション装置、表示制御方法及びプログラム

Country Status (4)

Country Link
JP (1) JP7479480B2 (ja)
CN (1) CN116034399A (ja)
DE (1) DE112020007505T5 (ja)
WO (1) WO2022034646A1 (ja)

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2016203770A1 (ja) * 2015-06-17 2016-12-22 凸版印刷株式会社 画像処理システム、方法、及びプログラム
JP6610065B2 (ja) 2015-07-31 2019-11-27 凸版印刷株式会社 化粧材シミュレーションシステム、方法、及びプログラム
JP6762003B2 (ja) * 2016-02-29 2020-09-30 国立大学法人神戸大学 物体表面修正方法およびワークの加工方法

Similar Documents

Publication Publication Date Title
Lampen et al. Combining simulation and augmented reality methods for enhanced worker assistance in manual assembly
JP2016162142A5 (ja) 画像処理装置、画像処理方法、及びプログラム
JP2021082329A (ja) 視標追跡システム
CN105051631B (zh) 工件的加工面评价方法、控制装置以及工作机械
JP6210023B2 (ja) 視線検出支援装置および視線検出支援方法
US20120290122A1 (en) Predictive control and virtual display system for a numerically controlled machine tool
JP2009053147A (ja) 3次元計測方法および3次元計測装置
CN109414167A (zh) 视线检测装置、视线检测方法以及计算机程序
US9733463B2 (en) Surgery system
CN111033573B (zh) 信息处理装置、系统、图像处理方法及存储介质
EP2949285A1 (en) Surgical microscope
JP2018032198A5 (ja)
JP6789310B2 (ja) 移動追尾及びシミュレーション用の装置並びに方法
JP6638354B2 (ja) 視線検出装置及び視線検出方法
JP2017016577A5 (ja)
JP2009069954A (ja) 作業支援装置
JP2017156170A (ja) 物体表面修正方法およびワークの加工方法
US20220155881A1 (en) Sensing movement of a hand-held controller
JPWO2022034646A5 (ja)
EP3956866A1 (en) Methods and systems for handling virtual 3d object surface interaction
JP2020038734A (ja) 視線検出装置及び視線検出方法
EP4145387A1 (en) Device, method, and program for detecting line of sight
JP6958507B2 (ja) 視線検出装置、視線検出方法及び視線検出プログラム
WO2016139706A1 (ja) 照明評価装置及び照明評価方法
WO2018147236A1 (ja) 物体表面の評価方法、評価装置および該評価方法を用いたワークの加工方法および工作機械