JP2016205974A - 測定システムおよびユーザインタフェース装置 - Google Patents
測定システムおよびユーザインタフェース装置 Download PDFInfo
- Publication number
- JP2016205974A JP2016205974A JP2015087086A JP2015087086A JP2016205974A JP 2016205974 A JP2016205974 A JP 2016205974A JP 2015087086 A JP2015087086 A JP 2015087086A JP 2015087086 A JP2015087086 A JP 2015087086A JP 2016205974 A JP2016205974 A JP 2016205974A
- Authority
- JP
- Japan
- Prior art keywords
- unit
- image
- measurement
- display
- user
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Landscapes
- Length Measuring Devices With Unspecified Measuring Means (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
【解決手段】測定システム1Aは、測定対象物を測定する測定機Mと、ユーザによる指示に基づき測定機を制御する測定機制御部40と、実3次元空間での所定の対象物の3次元座標を検出する3次元センサ部SRと、実3次元空間におけるボタン設定領域と、ボタン設定領域とコマンドとの対応付けを設定するコマンド設定部101と、3次元センサ部によって検出した3次元座標から動体を検出する動体検出部102と、動体検出部で検出した動体の3次元座標がボタン設定領域内に位置した際にボタン設定領域と対応付けされたコマンドを実行するコマンド実行部103と、を備えた。
【選択図】図1
Description
図1(a)および(b)は、第1実施形態に係る測定システムを例示する構成図である。
本実施形態に係る測定システム1Aは、コンピュータ100と、コンピュータ100によって制御される測定機Mおよび3Dセンサ(3次元センサ)SRを備える。コンピュータ100は、CPU(Central Processing Unit)10、記憶部20、演算部30、測定機制御部40、表示制御部50、3Dセンサ入力部70および位置・距離・姿勢認識部75を有する。さらに、コンピュータ100にはプロジェクタPRが接続されていてもよい。この場合、コンピュータ100は、投影図形生成部80およびプロジェクタ出力部85を有する。
3DセンサSRは、実3次元空間の物体の位置を検出する。図2に示す例では、例えば、測定機M、測定機Mのユーザ800、プロジェクタPRから投射された像を映し出すスクリーンSL、ホワイトボードWBなどが実3次元空間に配置される。3DセンサSRは、これらの位置を検出する。
図3(a)には、ホワイトボードWBに設定されたボタン設定領域B1〜B4が表される。ボタン設定領域B1〜B4は、ホワイトボードWBの面に適宜書き込まれている。ここでは、ホワイトボードWBの面に4つの矩形が書き込まれている。
図4に示す例では、プロジェクタPRによって映し出された画像をボタン設定領域B6としている。例えば、測定ヘッド501にプロジェクタPRが設けられている場合、測定ヘッド501をスクリーンSLとは異なる方向に向ける。これにより、プロジェクタPRからボタン設定領域B6の画像が出力される。図4に示す例では、プロジェクタPRから出力されたボタン設定領域B6の画像が床FLに映し出されている。
図6は、第2実施形態に係る測定システムを例示する構成図である。
本実施形態に係る測定システム1Bは、コンピュータ100と、コンピュータ100によって制御される測定機Mおよび3DセンサSRを備える。コンピュータ100は、CPU10、記憶部20、演算部30、測定機制御部40、表示制御部50、3Dセンサ入力部70および位置・距離・姿勢認識部75を有する。さらに、コンピュータ100は、3D映像入出力部51、3Dカメラ制御部52、立体映像生成部53、ヘッドマウントディスプレイ出力部54、コントロール生成部55、ヘッドホンマイク入出力部61、音声入出力部62、操作盤入出力部65およびコントロール入力認識部76を有する。コンピュータ100には、操作盤CT、ヘッドホンマイクHPM、ヘッドマウントディスプレイHDおよび3DカメラCMが接続される。
操作盤入出力部65は、操作盤CTに対する情報の入出力を行うインタフェース部分である。ユーザ800は操作盤CTを用いて測定機Mをコントロールすることができる。
ヘッドマウントディスプレイHDは、ユーザ800の頭部に装着される。ユーザ800は、ヘッドマウントディスプレイHDに映し出される3次元映像を参照することができる。このヘッドマウントディスプレイHDには3DカメラCMが取り付けられる。すなわち、ヘッドマウントディスプレイHDは、3DカメラCMと一体に設けられる。
図8に示すように、ユーザ800はヘッドマウントディスプレイHDを装着する。また、3DセンサSRは、実3次元空間のユーザ800や測定機Mなどの物体の位置を検出する。ヘッドマウントディスプレイHDに設けられた3DカメラCMは、実3次元空間の3D映像を取得する。
図12(a)および(b)は、第3実施形態に係る測定システムを例示する構成図である。
本実施形態に係る測定システム1Cは、コンピュータ100と、コンピュータ100によって制御される測定機M、3DセンサSRおよびヘッドマウントディスプレイHDを備える。コンピュータ100は、CPU10、記憶部20、演算部30、測定機制御部40、表示制御部50、3Dセンサ入力部70および位置・距離・姿勢認識部75を有する。さらに、コンピュータ100は、立体映像生成部53、ヘッドマウントディスプレイ出力部54、ヘッドホンマイク入出力部61、音声入出力部62および操作盤入出力部65を有する。コンピュータ100には、操作盤CTおよびヘッドホンマイクHPMが接続される。
図13に示すように、ユーザ800は、ヘッドマウントディスプレイHDおよびヘッドホンマイクHPMを装着する。3DセンサSRは、実3次元空間のユーザ800や測定機Mなどの物体の位置を検出する。
図17に示す例において、測定システム1Cは、ネットワークNを介して測定機制御部40と接続される遠隔制御部90をさらに備える。遠隔制御部90は、測定機Mから離れた位置にいるユーザ800から指示されたコマンドを、ネットワークNを介して測定機制御部40に送る処理を行う。
図18は、第4実施形態に係る測定システムを例示する構成図である。
本実施形態に係る測定システム1Dは、コンピュータ100と、コンピュータ100によって制御される測定機Mおよび3DセンサSRを備える。コンピュータ100は、CPU10、記憶部20、演算部30、測定機制御部40、表示制御部50、3Dセンサ入力部70および位置・距離・姿勢認識部75を有する。さらに、コンピュータ100は、3D映像入出力部51、3Dカメラ制御部52、立体映像生成部53、撮影映像合成部531、ヘッドマウントディスプレイ出力部54、ヘッドホンマイク入出力部61、音声入出力部62、音響再生部621、操作盤入出力部65およびヘルパー生成部95を有する。コンピュータ100には、操作盤CT、ヘッドホンマイクHPM、ヘッドマウントディスプレイHDおよび3DカメラCMが接続される。
図19には、ユーザ800に技術的な支援を行う例が示される。
図19に示すように、ユーザ800はヘッドマウントディスプレイHDを装着する。また、3DセンサSRは、実3次元空間のユーザ800や測定機Mなどの物体の位置を検出する。ヘッドマウントディスプレイHDに設けられた3DカメラCMは、実3次元空間の3D映像を取得する。
ヘルパー表示の動作はヘルパー生成部95によって行われる。ヘルパー生成部95は、ユーザ800によってヘルパーの呼出を行った場合や、何らかのエラーが発生した場合に動作を開始する。
図25には、測定機Mの操作手順をガイダンスするヘルパーの表示例が示される。
先ず、ユーザ800は、ヘルパーの呼出を行う。例えば、ユーザ800は「OK Mitutoyo.」と音声で問いかけを行う。これに応答してヘルパーが表示される。ヘッドマウントディスプレイHDの3次元空間内には実際の測定機Mの映像IMGが表示されるとともに、その近傍にヘルパーの画像(ヘルパー画像HG)が表示される。
先ず、ユーザ800は、例えば「OK Mitutoyo.」と音声で問いかけることで、ヘルパーの呼出を行う。これに応答してヘルパー画像HGが表示される。ヘルパー画像HGは、表示とともに、例えば「Hello」と画像表示と音声とで応答を行う。
先ず、ユーザ800は、例えば「OK Mitutoyo.」と音声で問いかけることで、ヘルパーの呼出を行う。これに応答してヘルパー画像HGが表示される。ヘルパー画像HGは、表示とともに、例えば「Hello」と画像表示と音声とで応答を行う。
測定機Mによる測定において何らかのエラーが発生した場合、自動的にヘルパー画像HGが表示される。ヘルパー画像HGは、例えば「Error occurred.」のように応答してエラーの発生を知らせる。
図29は、第5実施形態に係る測定システムを例示する構成図である。
本実施形態に係る測定システム1Eは、ユーザ側制御装置であるコンピュータ100Aと、支援者側制御装置であるコンピュータ100Bとが互いにネットワークを介して接続された構成を備える。
図30に示すように、ユーザ800は、ヘッドマウントディスプレイHD1およびヘッドホンマイクHPM1を装着する。3DセンサSR1は、ユーザ側の実3次元空間におけるユーザ800や測定機M、ワークWなどの物体の位置を検出する。また、ヘッドマウントディスプレイHD1に設けられた3DカメラCMは、測定機MやワークWなどの3D映像を取り込む。ユーザ側の測定機Mの情報、3DセンサSR1で検出した情報、3DカメラCMで取得した情報、ヘッドホンマイクHPM1で取得した情報などは、通信制御部101AからネットワークNを介して支援者側へ送信される。
図31は、第6実施形態に係る測定システムを例示する構成図である。
図31に示すように、本実施形態に係る測定システム1Fは、コンピュータ100と、コンピュータ100と無線通信を介して接続される表示装置300とを備える。コンピュータ100には、測定機M、操作盤CT、カメラC1、ディスプレイD、キーボードKおよびマウスMSが接続される。コンピュータ100は、CPU10、記憶部20、特徴点生成部35、測定結果合成設定部36、測定機制御部40、表示制御部50、入出力制御部60、操作盤入出力部65および通信制御部101Aを有する。
先ず、ステップS201に示すように、カメラC2によってワークの映像を取得する。次に、ステップS202に示すように、特徴点を抽出済みか否かの判断を行う。抽出済みでない場合には、ステップS203に示す特徴点の抽出を行う。カメラC2で取得したワークの映像から特徴点を抽出した後は、ステップS204に示すように特徴点の追跡を行う。特徴点の抽出および追跡は、特徴点抽出・追跡部350の処理によって行われる。
図33に表した例では、表示装置300として携帯端末が用いられる。携帯端末にはカメラC2とディスプレイパネルDPが設けられる。このカメラC2でワークWを撮影すると、ワークWの映像IMGがディスプレイパネルDPに表示される。
図34(a)には、カメラC2によって撮影したワークWの映像IMGが示される。また、図34(b)には、映像IMGから抽出および追跡される特徴点が示される。ここでは特徴点が丸印で示されている。図34(c)には、映像IMGに測定結果を合成表示した例が示される。ここでは、事前に設定された測定結果が特徴点の位置に合成表示される。
図35は、第6実施形態に係る測定システムを例示する構成図である。
図35に示すように、本実施形態に係る測定システム1Gは、コンピュータ100と、コンピュータ100と無線通信を介して接続される表示装置300とを備える。コンピュータ100には、測定機M、操作盤CT、カメラC1、ディスプレイD、キーボードKおよびマウスMSが接続される。コンピュータ100は、CPU10、記憶部20、マーカ認識登録部38、マーカ測定結果対応設定部39、測定機制御部40、表示制御部50、入出力制御部60、操作盤入出力部65および通信制御部101Aを有する。
先ず、ステップS301に示すように、カメラC1でマーカの映像を取得する。次に、ステップS302に示すようにマーカの映像の認識を行う。例えば、撮影された特定の形のマーカや、特定の図形、写真などを認識して、これにマーカ固有の識別情報を付与し、登録する処理を行う。この処理は、マーカ認識登録部38によって行われる。
先ず、ステップS401に示すように、コンピュータ100の記憶部20から無線通信を介してマーカ設定情報を受信する。次に、ステップS402に示すように、カメラC2で撮影したマーカの映像を取得する。次いで、ステップS403に示すように、取得したマーカの映像からマーカ固有の識別情報の認識を行う。この処理は、マーカ認識部380によって行われる。
図38には、携帯端末へ合成表示を行った例が表される。この例では、表示装置300として携帯端末が用いられる。また、用紙PPには、複数のマーカMK1〜MK5が設けられている。
先ず、図39には、合成表示する前の表示例が表される。先の例と同様に、用紙PPには複数のマーカMK1〜MK5が設けられている。また、この例では、メガネ型の表示装置300が用いられる。
10,10A,10B,310…CPU
20,20A,20B,320…記憶部
30,30A,30B…演算部
35…特徴点生成部
36…測定結果合成設定部
38…マーカ認識登録部
39…マーカ測定結果対応設定部
40…測定機制御部
50,50A,50B…表示制御部
51,51A…映像入出力部
52…3Dカメラ制御部
52A…カメラ制御部
53,53A,53B…立体映像生成部
54,54A,54B…ヘッドマウントディスプレイ出力部
55…コントロール生成部
60…入出力制御部
61,61A,61B…ヘッドホンマイク入出力部
62,62A,62B…音声入出力部
65…操作盤入出力部
70,70A,70B…3Dセンサ入力部
75,75A,75B…姿勢認識部
76…コントロール入力認識部
80…投影図形生成部
85…プロジェクタ出力部
90…遠隔制御部
95…ヘルパー生成部
100,100a,100B…コンピュータ
101…コマンド設定部
101A,101B,301…通信制御部
102…動体検出部
103…コマンド実行部
104…測定動作記憶部
201…画像記憶部
300…表示装置
350…追跡部
360…入出力部
370…測定結果合成部
380…マーカ認識部
390…マーカ測定結果合成部
501…測定ヘッド
501G…測定ヘッド画像
531,531A…撮影映像合成部
621,621A,621B…音響再生部
800…ユーザ
801…手
802…足
900…支援者
B1〜B7…ボタン設定領域
BG…ボタン画像
C1,C2,CM1…カメラ
CM…3Dカメラ
CM1…カメラ
CP1〜CP4…特徴点
D,D1,D2…ディスプレイ
D−IMG,IMG…映像
DP…ディスプレイパネル
FL…床
G,G1〜G7…画像
HD,HD1,HD2…ヘッドマウントディスプレイ
HG,HG1…ヘルパー画像
HPM,HPM1,HPM2…ヘッドホンマイク
K,K1,K2…キーボード
M,M1,M2…測定機
MG…測定機画像
MK1〜MK5…マーカ
MS,MS1,MS2…マウス
N…ネットワーク
P1〜P4…偶部
PC−G…画像
PC−IMG…映像
PP…用紙
PR…プロジェクタ
SR,SR1,SR2…3Dセンサ
W…ワーク
WB…ホワイトボード
WG…ワーク画像
YG…ユーザ画像
Claims (28)
- 測定対象物を測定する測定機と、
ユーザによる指示に基づき前記測定機を制御する測定機制御部と、
実3次元空間での所定の対象物の3次元座標を検出する3次元センサ部と、
前記実3次元空間におけるボタン設定領域と、前記ボタン設定領域とコマンドとの対応付けを設定するコマンド設定部と、
前記3次元センサ部によって検出した3次元座標から動体を検出する動体検出部と、
前記動体検出部で検出した前記動体の前記3次元座標が前記ボタン設定領域内に位置した際に前記ボタン設定領域と対応付けされた前記コマンドを実行するコマンド実行部と、
を備えたことを特徴とする測定システム。 - 前記測定機は前記測定対象物の3次元座標を取得する測定ヘッドと、前記測定ヘッドに設けられ映像を投影する映像出力部と、を有し、
前記映像出力部は、前記コマンド設定部で設定された前記ボタン設定領域の映像を出力することを特徴とする請求項1記載の測定システム。 - 前記動体検出部は、前記測定ヘッドの動作を検出し、
前記コマンド実行部は、前記動体検出部で検出した前記測定ヘッドの前記3次元座標に応じて前記コマンドを実行することを特徴とする請求項2記載の測定システム。 - 前記動体検出部は、前記ユーザの手および足の少なくともいずれかの動作を検出し、
前記コマンド実行部は、前記動体検出部で検出した前記ユーザの手および足の少なくともいずれかの前記3次元座標に応じて前記コマンドを実行することを特徴とする請求項1〜3のいずれか1項に記載の測定システム。 - 前記コマンド実行部は、前記動体検出部で検出した前記動体の前記3次元座標が前記ボタン設定領域内に一定時間止まっている場合には第1コマンドを実行し、前記動体の前記3次元座標が前記ボタン設定領域内に沿って移動している場合には第2コマンドを実行することを特徴とする請求項1〜4のいずれか1項に記載の測定システム。
- 前記実3次元空間における3次元映像を取得する3次元撮像部と、
前記3次元撮像部で取得した前記3次元映像を表示する表示部と、
前記実3次元空間の前記3次元映像と前記ボタン設定領域に対応した画像とを合成して前記表示部に表示させる表示制御部と、
をさらに備えたことを特徴とする請求項1〜5のいずれか1項に記載の測定システム。 - 前記コマンド実行部は、前記動体検出部で検出した前記ユーザの手の形に応じて複数の前記コマンドのうちいずれかを選択して実行することを特徴とする請求項1〜6のいずれか1項に記載の測定システム。
- 測定対象物を測定する測定機と、
ユーザによる指示に基づき前記測定機を制御する測定機制御部と、
実3次元空間での所定の対象物の3次元座標を検出する3次元センサ部と、
前記3次元センサ部によって検出した3次元座標から前記ユーザの動作を検出する動体検出部と、
前記測定機の画像を仮想3次元空間内に表示する表示部と、
前記表示部で表示される前記仮想3次元空間内の前記測定機の画像の表示位置を、前記動体検出部で検出した前記ユーザの動作に合わせて移動させる表示制御部と、
を備えたことを特徴とする測定システム。 - 前記表示部に表示される前記仮想3次元空間内で前記ユーザによって移動された前記測定機の画像の表示位置に沿って測定動作を記録する測定動作記憶部をさらに備えたことを特徴とする請求項8記載の測定システム。
- 前記測定機制御部は、前記測定動作記憶部に記憶された前記測定動作に基づき前記測定機を制御することを特徴とする請求項9記載の測定システム。
- 前記測定機のCAD画像を記憶する画像記憶部をさらに備え、
前記表示部は、前記画像記憶部に記憶された前記CAD画像を前記仮想3次元空間内に表示することを特徴とする請求項8〜10のいずれか1項に記載の測定システム。 - 前記実3次元空間における前記測定機の映像を取得する撮像部をさらに備え、
前記表示制御部は、前記撮像部で取得した前記測定機の映像を前記表示部の前記仮想3次元空間内に表示させることを特徴とする請求項8〜11のいずれか1項に記載の測定システム。 - 前記表示制御部は、予め設定された測定動作に合わせて前記表示部の前記仮想3次元空間内に表示された前記測定機の映像を移動させることを特徴とする請求項8〜12のいずれか1項に記載の測定システム。
- 前記表示制御部は、前記測定対象物の映像と測定結果とを合成して前記表示部の前記仮想3次元空間内に表示させることを特徴とする請求項8〜13のいずれか1項に記載の測定システム。
- ネットワークを介して前記測定機制御部と接続される遠隔制御部をさらに備え、
前記遠隔制御部は、前記表示部に表示される前記仮想3次元空間内で前記ユーザによって指定された測定動作に基づき前記ネットワークを介して前記測定機制御部にコマンドを送信することを特徴とする請求項8〜14のいずれか1項に記載の測定システム。 - 測定対象物を測定する測定機と、
ユーザによる指示に基づき前記測定機を制御する測定機制御部と、
実3次元空間における前記測定機の映像を取得する撮像部と、
前記測定機に関する画像を記憶する画像記憶部と、
前記実3次元空間での表示を行う表示部と、
前記撮像部で取得した前記測定機の映像と、前記画像記憶部に記憶された前記画像とを前記実3次元空間内で合成して前記表示部に表示させる表示制御部と、
を備えたことを特徴とする測定システム。 - 前記表示制御部は、前記撮像部で取得した前記測定機の映像に、所定の測定手順を表す画像を合成することを特徴とする請求項16記載の測定システム。
- 前記表示制御部は、前記撮像部で取得した前記測定機の映像に、所定の異常に対応した画像を合成することを特徴とする請求項16または17に記載の測定システム。
- 前記表示制御部は、前記撮像部で取得した前記測定機の映像に、所定のガイダンスに対応した画像を合成することを特徴とする請求項16〜18のいずれか1項に記載の測定システム。
- 測定対象物を測定する測定機と接続されたユーザ側制御装置と、
前記ユーザ側制御装置とネットワークを介して接続された支援者側制御装置と、
を備えた測定システムであって、
前記ユーザ側制御装置は、
ユーザによる指示に基づき前記測定機を制御する測定機制御部と、
実3次元空間での所定の対象物の3次元座標を検出する第1の3次元センサ部と、
前記第1の3次元センサ部によって検出した3次元座標から動体を検出する第1動体検出部と、
前記実3次元空間における3次元映像を取得する3次元撮像部と、
前記3次元撮像部で取得した前記3次元映像を表示する第1表示部と、
前記3次元映像と前記支援者側制御装置から送られた画像とを合成して前記第1表示部に表示させる第1表示制御部と、を備え、
前記支援者側制御装置は、
実3次元空間での支援者の3次元座標を検出する第2の3次元センサ部と、
前記第2の3次元センサ部によって検出した3次元座標から前記支援者の動作を検出する第2動体検出部と、
前記3次元撮像部で取得した前記3次元映像に基づく画像を仮想3次元空間に表示する第2表示部と、
前記仮想3次元空間の3次元座標に合わせて前記ユーザ側制御装置から送られた情報に基づく画像を前記第2表示部に表示させる第2表示制御部と、
前記第2動体検出部で検出した前記支援者の動作に関する画像を前記ネットワークを介して前記ユーザ側制御装置へ送る動作情報送信部と、を備えたことを特徴とする測定システム。 - 前記第1表示制御部は、前記支援者側制御装置から送られた画像に基づき支援者に対応した支援者側画像を前記第1表示部に表示させ、
前記第2表示制御部は、前記ユーザ側制御装置から送られた画像に基づきユーザに対応したユーザ側画像を前記第2表示部に表示させることを特徴とする請求項20記載の測定システム。 - 測定対象物を測定する測定機と、
前記測定機による測定結果を記憶する測定結果記憶部と、
前記測定対象物の映像を取得する撮像部と、
前記撮像部で取得した映像から特徴点を抽出する特徴点抽出部と、
前記撮像部で取得した前記映像または前記特徴点抽出部で抽出した前記特徴点から得られる前記測定対象物の画像を表示する表示部と、
前記特徴点抽出部で抽出した前記特徴点に基づいて前記測定対象物の所定の位置に対応した前記測定結果を前記測定結果記憶部から読み出す測定結果読み出し部と、
前記測定結果読み出し部で読み出した前記測定結果を前記測定対象物の前記映像または前記画像に合成して前記表示部に表示させる表示制御部と、
を備えたことを特徴とする測定システム。 - 前記表示制御部は、前記撮像部で取得した前記測定対象物の映像の撮像角度に対応して前記測定結果を前記映像または前記画像に合成することを特徴とする請求項22記載の測定システム。
- 測定対象物を測定する測定機と、
前記測定機による測定結果を記憶する測定結果記憶部と、
マーカの映像を取得する撮像部と、
前記撮像部で取得した前記マーカの映像から前記マーカを認識するマーカ認識部と、
前記マーカ認識部で認識した前記マーカと対応する前記測定結果を前記測定結果記憶部から読み出す測定結果読み出し部と、
前記撮像部で前記マーカの映像を取得している間、前記測定結果読み出し部で読み出した前記測定結果を表示部に表示させる表示制御部と、
を備えたことを特徴とする測定システム。 - 前記撮像部は、前記マーカが付された背景の映像を取得し、
前記表示制御部は、前記背景の映像に前記マーカと対応する前記測定結果を合成して前記表示部に表示させることを特徴とする請求項24記載の測定システム。 - 実3次元空間での所定の対象物の3次元座標を検出する3次元センサ部と、
前記実3次元空間におけるボタン設定領域と、前記ボタン設定領域とコマンドとの対応付けを設定するコマンド設定部と、
前記3次元センサ部によって検出した3次元座標から動体を検出する動体検出部と、
前記動体検出部で検出した前記動体の前記3次元座標が前記ボタン設定領域内に位置した際に前記ボタン設定領域と対応付けされた前記コマンドを実行するコマンド実行部と、
前記実3次元空間における3次元映像を取得する3次元撮像部と、
前記3次元撮像部で取得した前記3次元映像を表示する表示部と、
前記3次元映像と前記ボタン設定領域に対応した画像とを合成して前記表示部に表示させる表示制御部と、
を備え、
前記コマンド実行部は、前記動体検出部で検出したユーザの手の形に応じて複数の前記コマンドのうちいずれかを選択して実行することを特徴とするユーザインタフェース装置。 - 測定対象物の映像を取得する撮像部と、
前記撮像部で取得した映像から特徴点を抽出する特徴点抽出部と、
前記撮像部で取得した前記映像または前記特徴点抽出部で抽出した前記特徴点から得られる前記測定対象物の画像を表示する表示部と、
前記特徴点抽出部で抽出した前記特徴点に基づいて前記測定対象物の所定の位置に対応した寸法の情報を取得する寸法取得部と、
前記寸法取得部で取得した前記寸法の情報を前記測定対象物の前記映像または前記画像に合成して前記表示部に表示させる表示制御部と、
を備えたことを特徴とするユーザインタフェース装置。 - マーカが付された背景の映像を取得する撮像部と、
前記撮像部で取得した前記マーカの映像から前記マーカを認識するマーカ認識部と、
前記マーカ認識部で認識した前記マーカと対応する測定結果を取得する測定結果取得部と、
前記撮像部で前記マーカの映像を取得している間、前記測定結果取得部で取得した前記測定結果を前記背景の映像に合成して表示部に表示させる表示制御部と、
を備えたことを特徴とするユーザインタフェース装置。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2015087086A JP6653526B2 (ja) | 2015-04-21 | 2015-04-21 | 測定システムおよびユーザインタフェース装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2015087086A JP6653526B2 (ja) | 2015-04-21 | 2015-04-21 | 測定システムおよびユーザインタフェース装置 |
Related Child Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019161126A Division JP6837109B2 (ja) | 2019-09-04 | 2019-09-04 | 制御システム |
JP2019161127A Division JP6862515B2 (ja) | 2019-09-04 | 2019-09-04 | 測定システム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2016205974A true JP2016205974A (ja) | 2016-12-08 |
JP6653526B2 JP6653526B2 (ja) | 2020-02-26 |
Family
ID=57487014
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2015087086A Active JP6653526B2 (ja) | 2015-04-21 | 2015-04-21 | 測定システムおよびユーザインタフェース装置 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6653526B2 (ja) |
Cited By (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2018200278A (ja) * | 2017-05-29 | 2018-12-20 | 株式会社ミツトヨ | 位置計測装置の操作方法 |
JP2019101886A (ja) * | 2017-12-06 | 2019-06-24 | 富士ゼロックス株式会社 | 表示装置及びプログラム |
JP2019178513A (ja) * | 2018-03-30 | 2019-10-17 | 株式会社Lixil | 吐水制御装置、吐水制御システム、及び吐水制御方法 |
JP2019211487A (ja) * | 2019-09-04 | 2019-12-12 | 株式会社ミツトヨ | 測定システム |
CN110779460A (zh) * | 2018-07-31 | 2020-02-11 | 株式会社三丰 | 离线指导装置、测量控制装置和存储介质 |
CN111077805A (zh) * | 2018-10-22 | 2020-04-28 | 株式会社三丰 | 测量程序选择辅助设备和测量控制设备 |
JP2020067448A (ja) * | 2018-10-22 | 2020-04-30 | 株式会社ミツトヨ | 測定プログラム選択補助装置および測定制御装置 |
JP2020123284A (ja) * | 2019-01-31 | 2020-08-13 | 三菱重工機械システム株式会社 | 検査支援装置及び方法 |
CN111698496A (zh) * | 2019-03-11 | 2020-09-22 | 株式会社三丰 | 测定结果显示装置及存储介质 |
JP2021043135A (ja) * | 2019-09-13 | 2021-03-18 | 株式会社東芝 | 放射線量分布表示システムおよび放射線量分布表示方法 |
CN113631325A (zh) * | 2019-03-29 | 2021-11-09 | 株式会社Ihi | 远程操作装置 |
WO2022201433A1 (ja) * | 2021-03-25 | 2022-09-29 | 京セラ株式会社 | ウェアラブル端末装置、プログラムおよび表示方法 |
JP2022154270A (ja) * | 2021-03-30 | 2022-10-13 | 住友金属鉱山株式会社 | 処理支援装置およびプログラム |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2004213673A (ja) * | 2002-12-30 | 2004-07-29 | Abb Res Ltd | 強化現実システム及び方法 |
JP2013517508A (ja) * | 2010-01-20 | 2013-05-16 | ファロ テクノロジーズ インコーポレーテッド | 多機能座標測定機 |
US20150049186A1 (en) * | 2011-12-06 | 2015-02-19 | Hexagon Technology Center Gmbh | Coordinate measuring machine having a camera |
-
2015
- 2015-04-21 JP JP2015087086A patent/JP6653526B2/ja active Active
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2004213673A (ja) * | 2002-12-30 | 2004-07-29 | Abb Res Ltd | 強化現実システム及び方法 |
JP2013517508A (ja) * | 2010-01-20 | 2013-05-16 | ファロ テクノロジーズ インコーポレーテッド | 多機能座標測定機 |
US20150049186A1 (en) * | 2011-12-06 | 2015-02-19 | Hexagon Technology Center Gmbh | Coordinate measuring machine having a camera |
Cited By (19)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2018200278A (ja) * | 2017-05-29 | 2018-12-20 | 株式会社ミツトヨ | 位置計測装置の操作方法 |
JP2019101886A (ja) * | 2017-12-06 | 2019-06-24 | 富士ゼロックス株式会社 | 表示装置及びプログラム |
JP7172030B2 (ja) | 2017-12-06 | 2022-11-16 | 富士フイルムビジネスイノベーション株式会社 | 表示装置及びプログラム |
JP2019178513A (ja) * | 2018-03-30 | 2019-10-17 | 株式会社Lixil | 吐水制御装置、吐水制御システム、及び吐水制御方法 |
JP7206057B2 (ja) | 2018-03-30 | 2023-01-17 | 株式会社Lixil | 吐水制御装置、及び吐水制御システム |
CN110779460B (zh) * | 2018-07-31 | 2022-10-04 | 株式会社三丰 | 离线指导装置、测量控制装置和存储介质 |
CN110779460A (zh) * | 2018-07-31 | 2020-02-11 | 株式会社三丰 | 离线指导装置、测量控制装置和存储介质 |
US11630436B2 (en) | 2018-10-22 | 2023-04-18 | Mitutoyo Corporation | Measurement program selection assisting apparatus and measurement control apparatus |
JP7221792B2 (ja) | 2018-10-22 | 2023-02-14 | 株式会社ミツトヨ | 測定プログラム選択補助装置および測定制御装置 |
CN111077805A (zh) * | 2018-10-22 | 2020-04-28 | 株式会社三丰 | 测量程序选择辅助设备和测量控制设备 |
JP2020067448A (ja) * | 2018-10-22 | 2020-04-30 | 株式会社ミツトヨ | 測定プログラム選択補助装置および測定制御装置 |
JP2020123284A (ja) * | 2019-01-31 | 2020-08-13 | 三菱重工機械システム株式会社 | 検査支援装置及び方法 |
CN111698496A (zh) * | 2019-03-11 | 2020-09-22 | 株式会社三丰 | 测定结果显示装置及存储介质 |
CN113631325A (zh) * | 2019-03-29 | 2021-11-09 | 株式会社Ihi | 远程操作装置 |
JP2019211487A (ja) * | 2019-09-04 | 2019-12-12 | 株式会社ミツトヨ | 測定システム |
JP2021043135A (ja) * | 2019-09-13 | 2021-03-18 | 株式会社東芝 | 放射線量分布表示システムおよび放射線量分布表示方法 |
JP7293057B2 (ja) | 2019-09-13 | 2023-06-19 | 株式会社東芝 | 放射線量分布表示システムおよび放射線量分布表示方法 |
WO2022201433A1 (ja) * | 2021-03-25 | 2022-09-29 | 京セラ株式会社 | ウェアラブル端末装置、プログラムおよび表示方法 |
JP2022154270A (ja) * | 2021-03-30 | 2022-10-13 | 住友金属鉱山株式会社 | 処理支援装置およびプログラム |
Also Published As
Publication number | Publication date |
---|---|
JP6653526B2 (ja) | 2020-02-26 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6653526B2 (ja) | 測定システムおよびユーザインタフェース装置 | |
US20190370544A1 (en) | Object Initiated Communication | |
US10076840B2 (en) | Information processing apparatus, information processing method, and program | |
JP4434890B2 (ja) | 画像合成方法及び装置 | |
JP6723738B2 (ja) | 情報処理装置、情報処理方法及びプログラム | |
JP2022153509A (ja) | 測定支援システム | |
CN111655184A (zh) | 用于放置手术端口的引导 | |
JP4085918B2 (ja) | 3次元モデル処理装置、および3次元モデル処理方法、並びにコンピュータ・プログラム | |
JP4834424B2 (ja) | 情報処理装置、情報処理方法、及びプログラム | |
US9928665B2 (en) | Method and system for editing scene in three-dimensional space | |
CN107077169A (zh) | 扩增现实中的空间交互 | |
CA3088004A1 (en) | Guidance for positioning a patient and surgical robot | |
CN109584374A (zh) | 用于使用可移动引导标记来提供交互导航辅助的方法、装置和计算机可读存储介质 | |
JP6348732B2 (ja) | 情報処理システム、情報処理装置、情報処理プログラム、および情報処理方法 | |
JP2021081757A (ja) | 情報処理装置、情報処理方法、および、プログラム | |
JP2010257081A (ja) | 画像処理方法及び画像処理装置 | |
JP5831151B2 (ja) | 制御処理プログラム、画像表示装置、および画像表示方法 | |
JP2005174021A (ja) | 情報提示方法及び装置 | |
JP7129839B2 (ja) | 訓練装置、訓練システム、訓練方法、及びプログラム | |
US20190355281A1 (en) | Learning support system and recording medium | |
JP6625266B1 (ja) | ロボット制御装置 | |
JP6837109B2 (ja) | 制御システム | |
CN115731349A (zh) | 户型图的展示方法、装置、电子设备及存储介质 | |
JP6793382B1 (ja) | 撮影装置、情報処理装置、方法およびプログラム | |
JP2021039567A (ja) | 作業支援システム及びプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20180306 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20190111 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20190122 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20190313 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20190820 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20190904 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20200107 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20200128 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6653526 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |