JP6656571B1 - 翻訳された病院内の案内板を表示する、プログラム、方法および装置 - Google Patents

Abstract

【課題】見やすくてわかりやすい、翻訳された病院内の案内板を表示する。【解決手段】記憶装置には、予め特徴点解析がされた、第１言語でテキストが記載された第１案内板ＧＢ１のマーカー画像の特徴点データと、第１案内板ＧＢ１の表面と同等の形状の案内板表面を有する第２案内板ＧＢ２の３次元モデルからなる置換モデルであって、テキストを第１言語と異なる第２言語で置き換えて記載した置換モデルのデータと、が記憶させてある。そして、装置１は、カメラＣＭによって取得した映像から、特徴点解析をして特徴点データに対応するマーカー画像を検出し、マーカー画像の、映像内における位置、サイズおよび向きを取得する。そして、装置１は、置換モデルのデータを読み出し、映像に、取得した位置、サイズおよび向きを指定して置換モデルを重ね合わせ、映像内の第１案内板ＧＢ１に第２案内板ＧＢ２をはめ込んだ出力映像をディスプレイＤＳＰに表示させる。【選択図】図１

Description

本発明は、翻訳された病院内の案内板を表示する、プログラム、方法および装置に関する。

近年、日本に訪れる外国人の増大に伴い、外国人への情報提供の重要性が高まっている。例えば、日本の医療サービスの質の高さが外国人に注目されており、健康診断や治療を受けるために日本へ訪れる外国人が増えている。

そのため、病院内の案内板に記載された言語が日本語だけであると、外国人にとっては、情報を取得しにくいという問題がある。このため、従来、画像からテキストを特定して、そのテキストを異なる言語に翻訳して表示する装置が知られている。

特表２０１６−５３５３３５号公報

しかしながら、従来の装置では、実際の案内板に対して、テキストが不自然に浮いた状態であったりして、実際の案内板との違いが大きく、わかりにくいという問題がある。
また、抽出したテキストを機械翻訳して表示するため、誤訳が多いという問題がある。特に、病院内のような、医療関係の専門用語が表示されている場合には、誤訳が多く、実用的ではないという問題がある。

そこで、本発明は、見やすくてわかりやすい、翻訳された病院内の案内板を表示することができる、プログラム、方法および装置を提供することを目的とする。

前記した課題を解決する本発明は、翻訳された病院内の案内板を表示するプログラムであって、予め特徴点解析がされた、第１言語でテキストが記載された第１案内板のマーカー画像の特徴点データと、第１案内板の表面と同等の形状の案内板表面を有する第２案内板の３次元モデルからなる置換モデルであって、テキストを第１言語と異なる第２言語で置き換えて記載した置換モデルのデータと、が記憶装置に予め記憶させてあり、コンピュータに、カメラによって取得した映像から、特徴点解析をして特徴点データに対応するマーカー画像を検出し、マーカー画像の、映像内における位置、サイズおよび向きを取得するステップと、置換モデルのデータを読み出し、映像に、取得した位置、サイズおよび向きを指定して置換モデルを重ね合わせ、映像内の第１案内板に第２案内板をはめ込んだ出力映像をディスプレイに表示させるステップと、を実行させることを特徴とする。

このようなプログラムによれば、予め記憶してある特徴点データに対応する特徴点を有する第１案内板のマーカー画像をカメラで取得した映像から検出し、映像内におけるマーカー画像の位置、サイズおよび向きを取得し、翻訳済みの第２案内板を、この映像内に重ね合わせる。このとき、第２案内板は、第１案内板と同等の形状の案内板表面を有しており、映像に第２案内板を重ね合わせるときに、映像から取得した第１案内板の位置、サイズおよび向きを指定してぴったりと重ね合わせるので、映像内において、まさに第１案内板が第２案内板に置き換わったように見えるので、ユーザは、実際に見ている第１案内板を見ているかのように映像内の第２案内板を見ることができる。すなわち、見やすくてわかりやすい翻訳された病院内の案内板を表示することができる。

前記したプログラムにおいて、置換モデルは、案内板表面のテキスト部分以外の絵柄が、第１案内板と同じ絵柄となっていることが望ましい。

このように、翻訳された第２案内板の、テキスト以外の部分の絵柄が第１案内板と同じ絵柄であることで、実際に目の前に存在する第１案内板と、映像内の第２案内板の違いが小さく、映像内の第２案内板がより見やすくてわかりやすいものとなる。

前記したプログラムにおいては、第２言語として異なる複数の言語で置き換えた複数の置換モデルのデータが記憶装置に記憶されており、ユーザに、第２言語を選択させるステップをさらに実行させ、出力映像をディスプレイに表示させるステップにおいて、選択された第２言語に対応した置換モデルを映像に重ね合わせることが望ましい。

このように、第２言語として、異なる複数の言語を用意し、ユーザに第２言語を選択させることで、いろいろな言語圏のユーザに、わかりやすい案内板を提供することができる。

前記したプログラムにおいては、マーカー画像の特徴点データに対応させて、第１案内板が配置された位置を表示範囲内に含む病院内の案内地図のデータが、記憶装置に予め記憶させてあり、出力映像内に、案内地図を表示させるアイコンを表示させるステップと、アイコンが選択されると、案内地図のデータを読み出し、案内地図をディスプレイに表示させるステップと、を実行させることができる。

このようなプログラムによれば、出力映像内に表示されたアイコンをユーザが選択することで、その第１案内板の位置に対応した案内地図を表示させることができる。

前記したプログラムにおいては、案内地図をディスプレイに表示させるステップにおいて、案内地図に、第１案内板が配置された位置を示すマークを表示することが望ましい。

このようなプログラムによれば、案内地図を見たユーザが、現在地を知ることができる。

前記した課題を解決する本発明は、方法の発明として提供することができる。すなわち、本発明は、翻訳された病院内の案内板を表示する方法であって、予め特徴点解析がされた、第１言語でテキストが記載された第１案内板のマーカー画像の特徴点データと、第１案内板の表面と同等の形状の案内板表面を有する第２案内板の３次元モデルからなる置換モデルであって、テキストを第１言語と異なる第２言語で置き換えて記載した置換モデルのデータと、が記憶装置に予め記憶させてあり、カメラによって取得した映像から、特徴点解析をして特徴点データに対応するマーカー画像を検出し、マーカー画像の、映像内における位置、サイズおよび向きを取得するステップと、置換モデルのデータを読み出し、映像に、取得した位置、サイズおよび向きを指定して置換モデルを重ね合わせ、映像内の第１案内板に第２案内板をはめ込んだ出力映像をディスプレイに表示させるステップと、を有することができる。

前記した課題を解決する本発明は、装置の発明として提供することができる。すなわち、本発明は、翻訳された病院内の案内板を表示する装置であって、予め特徴点解析がされた、第１言語でテキストが記載された第１案内板のマーカー画像の特徴点データと、第１案内板の表面と同等の形状の案内板表面を有する第２案内板の３次元モデルからなる置換モデルであって、テキストを第１言語と異なる第２言語で置き換えて記載した置換モデルのデータと、が記憶装置に予め記憶させてあり、カメラによって取得した映像から、特徴点解析をして特徴点データに対応するマーカー画像を検出し、マーカー画像の、映像内における位置、サイズおよび向きを取得するステップと、置換モデルのデータを読み出し、映像に、取得した位置、サイズおよび向きを指定して置換モデルを重ね合わせ、映像内の第１案内板に第２案内板をはめ込んだ出力映像をディスプレイに表示させるステップと、を実行することができる。

本発明の翻訳された病院内の案内板を表示する、プログラム、方法および装置によれば、外国人に、見やすくてわかりやすい案内板を提供することができる。

実施形態に係る装置の概要を説明する図である。 実施形態に係る装置のハードウェアのブロック構成図である。 第１案内板の画像の例である。 第１案内板から特徴点を抽出したときの、特徴点を示した画像の例である。 記憶装置に記憶しているデータを説明する図である。 プログラムが実行する処理の一例を示すフローチャートである。 言語の選択画面の一例である。 翻訳前の第１案内板の映像の一例である。 第２案内板を映像に重ね合わせた映像の一例である。 案内地図の画像の一例である。

次に、本発明の実施形態について、適宜図面を参照しながら詳細に説明する。
図１に示すように、実施形態に係る病院内の案内板を表示する装置１は、タブレットコンピュータやスマートフォンなどの携帯端末にコンピュータプログラム（アプリ）を実行させてなるものである。装置１は、ディスプレイＤＳＰと、カメラＣＭとを有してなり、病院内の壁等に掲示された第１言語でテキストが記載された第１案内板ＧＢ１をカメラＣＭで撮影すると、ディスプレイＤＳＰ内に、第１案内板ＧＢ１のテキストを翻訳した第２案内板ＧＢ２が第１案内板ＧＢ１に置き換わって見えるようにする装置である。

図２に示すように、装置１は、カメラＣＭおよびディスプレイＤＳＰの他に、ＣＰＵ（Central Processing Unit）からなる処理部１０と、通信部１１と、記憶装置１９とを備えている。本発明の実施のためには、通信部１１は必ずしも必要ではないが、本発明のプログラムがダウンロード形態により提供される場合、プログラムをダウンロードしてインストールするために、インターネットに接続可能であることが望ましい。

処理部１０は、カメラＣＭ、ディスプレイＤＳＰ、通信部１１および記憶装置１９とデータの授受が可能に接続され、これらの制御をすることが可能となっている。
記憶装置１９には、本発明の翻訳された病院内の案内板を表示するプログラムが記憶されている。記憶装置１９には、このプログラムの実行のため、予め特徴点解析がされた、病院内の各第１案内板ＧＢ１の画像（マーカー画像）の特徴点データと、第２案内板ＧＢ２の３次元モデルからなる置換モデルであって、テキストを第１言語と異なる第２言語で置き換えて記載した置換モデルのデータとが記憶されている。

なお、本明細書において、特徴点データに対応した第１案内板ＧＢ１の画像をマーカー画像と呼ぶ。第２案内板ＧＢ２の３次元モデルは、対応する第１案内板ＧＢ１の表面と同等の形状の案内板表面を有している。すなわち、映像内における第１案内板ＧＢ１の画像に第２案内板ＧＢ２の置換モデルを重ね合わせたときに、見た目にぴったりと重なる程度に同等の表面形状となるように３次元モデルを作成してある。第２案内板ＧＢ２の３次元モデルは、実際の第１案内板ＧＢ１の表面と全く同一の表面形状を有することが望ましい。

第２案内板ＧＢ２の置換モデルは、案内板表面のテキスト部分以外の絵柄が、第１案内板ＧＢ１と同じ絵柄となっていることが望ましく、本実施形態では、同じとなっている。例えば、図１の例でいえば、「１階」の下の線や、矢印の形状などを、第１案内板ＧＢ１と同じとする。

３次元モデルは、第１案内板ＧＢ１と同等の表面形状を有している限り、案内板の表示面以外の裏側の形状は、ディスプレイＤＳＰには表示されないので、任意である。すなわち、３次元モデルは、厚みの無い形状であってもよいし、肉厚であってもよい。そして、肉厚である場合や、裏側の表面モデルがある場合に、案内板の表示面の裏側に不要な形状を有していてもよい。

特徴点データは、例えば、図３に示すような第１案内板ＧＢ１の画像に対し、画像内の特徴的な点（例えば、画像内の角などのエッジ部分など）を予め検出しておき、この点の集合として構成されている。特徴点の検出は、公知のｖｕｆｏｒｉａ（登録商標）等の計算エンジンにより実行することができる。例えば、図３の画像で特徴点を検出すると、図４の「＋」印のように検出することができる。

図５に示すように、特徴点データは、第１案内板ＧＢ１ごとに一つ生成され、記憶装置１９に記憶されている。１つの第１案内板ＧＢ１に対応する１つの特徴点データに対しては、第２言語として異なる複数の言語で置き換えた複数の置換モデルのデータが記憶装置１９に記憶されている。

例えば、病院の１階廊下の第１案内板ＧＢ１の特徴点データ００１に対応して、ベトナム語で記載した第２案内板ＧＢ２の置換モデルデータ、タイ語で記載した第２案内板ＧＢ２の置換モデルデータ、・・・、中国語で記載した第２案内板ＧＢ２の置換モデルデータなどの複数の置換モデルデータが記憶されている。
他の場所にある第１案内板ＧＢ１、例えば、１階ロビーの第１案内板ＧＢ１の特徴点データ００２や、６階病棟の第１案内板ＧＢ１の特徴点データ０５５に対しても、それぞれ、複数の異なる言語で記載した複数の置換モデルデータが記憶されている。

また、記憶装置１９には、各第１案内板ＧＢ１に対応して、案内地図が記憶されている。具体的には、マーカー画像の特徴点データに対応させて、第１案内板ＧＢ１が配置された位置を表示範囲内に含む病院内の案内地図のデータが記憶装置１９に記憶されている。例えば、特徴点データ００１に対応して案内地図データ００１、特徴点データ００２に対応して案内地図データ００２、・・・特徴点データ０５５に対応して案内地図データ０５５が記憶されている。各案内地図には、第１案内板ＧＢ１が配置された位置を示すマークが含まれている。

次に、図６のフローチャートを参照して、処理部１０による処理、すなわち、翻訳された案内板の表示方法およびプログラムの説明をする。

処理部１０は、プログラムが起動されると、まず、図７に示すような、第２言語の選択画面を表示し、ユーザに言語を選択させる（Ｓ１０）。言語の表示画面には、例えば、翻訳後の言語である第２言語を示す「Vietnamese」（ベトナム語）、「Thai」（タイ語）などの選択可能なボタンのアイコンを表示する。

処理部１０は、ユーザのアイコン選択により第２言語が選択されると、選択された第２言語を特定する情報を記憶装置１９に記憶させる。

そして、処理部１０は、カメラＣＭから映像を取得し（Ｓ２１）、取得した映像を特徴点解析して（Ｓ２２）、記憶装置１９に記憶している特徴点データに対応するマーカー画像の検出を試み、マーカー画像が検出されたかを判定する（Ｓ２３）。すなわち、取得した映像から検出した特徴点の集合の中に、記憶装置１９に予め記憶してあるマーカー画像に対応する特徴点データの集合に近い部分があれば、マーカー画像があるものと検出する。このマーカー画像の検出も、公知のｖｕｆｏｒｉａ（登録商標）等の計算エンジンにより実行することができる。

処理部１０は、記憶装置１９に記憶している特徴点データに対応するマーカー画像が検出されなかったと判定した場合（Ｓ２３，Ｎｏ）、カメラＣＭから取得した映像をそのままディスプレイＤＳＰに表示し（Ｓ２５）、ステップＳ５０に進む。

処理部１０は、記憶装置１９に記憶している特徴点データに対応するマーカー画像が検出されたと判定した場合（Ｓ２３，Ｙｅｓ）、計算エンジンから、マーカー画像の、映像内における位置、サイズおよび向きを取得し（Ｓ３１）、選択された第２言語に対応した第２案内板ＧＢ２の置換モデルデータを読み出す。そして、カメラＣＭから取得した映像に、取得したマーカー画像の位置、サイズおよび向きを指定して、置換モデルを重ね合わせる（Ｓ３２）。置換モデルは、３次元モデルであるので、第１案内板ＧＢ１を斜めから見たときに、ディスプレイＤＳＰ内で第１案内板ＧＢ１が斜めに歪んでいた場合には、向きを指定することで、第１案内板ＧＢ１と同じように歪んだ第２案内板ＧＢ２が表示される。これにより、映像内の第１案内板ＧＢ１に、ぴったりと第２案内板ＧＢ２をはめ込んだ出力映像を表示させる。例えば、図８は、第２案内板ＧＢ２を重ね合わせていない、第１案内板ＧＢ１の映像である。これに対し、図９は、映像内の第１案内板ＧＢ１に第２案内板ＧＢ２を重ね合わせてはめ込んだ出力映像である。出力映像においては、第１案内板ＧＢ１と同じ位置、サイズおよび向きで第２案内板ＧＢ２が表示されるため、ユーザは、違和感なく見ることができ、案内板の内容も把握しやすい。

また、処理部１０は、出力映像内に案内地図を表示させるためのアイコンを表示させる（Ｓ３３）。図９の出力映像における右下の「Ｍａｐ」の文字がそのアイコンである。処理部１０は、アイコンが選択されたか否かを判定し（Ｓ４１）、選択されていないと判定した場合には（Ｓ４１，Ｎｏ）、案内地図を表示せずに、ステップＳ５０に進む。処理部１０は、アイコンが選択されたと判定した場合（Ｓ４１，Ｙｅｓ）、案内地図のデータを記憶装置１９から読み出し、案内地図をディスプレイＤＳＰに表示させる（Ｓ４２）。

案内地図は、例えば図１０に示す画像であり、符号Ｐで示した赤丸によって、ユーザの現在地（第１案内板ＧＢ１が配置された位置）を示している。フローチャートでは省略するが、処理部１０は、案内地図の右下に、案内地図を閉じる指示をするアイコンＣを表示する。そして、アイコンＣが選択されるまで待機し、アイコンＣが選択されると案内地図を閉じる。

そして、ステップＳ５０において、処理部１０は、ユーザによりプログラムの終了（バックグラウンドでの実行を含むものとする）が指示されたかを判定し、終了が指示されていれば（Ｓ５０，Ｙｅｓ）、処理を終了し、終了が指示されていなければ（Ｓ５０，Ｎｏ）、ステップＳ２１からの処理を繰り返す。

以上のように、本発明の病院内の案内板を表示する装置１（プログラムまたは方法）によれば、予め記憶してある特徴点データに対応する特徴点を有する第１案内板ＧＢ１のマーカー画像をカメラＣＭで取得した映像から検出し、映像内におけるマーカー画像の位置、サイズおよび向きを取得し、翻訳済みの第２案内板ＧＢ２を、この映像内に重ね合わせる。このとき、第２案内板ＧＢ２は、第１案内板ＧＢ１と同等の形状の案内板表面を有しており、映像に第２案内板ＧＢ２を重ね合わせるときに、映像から取得した第１案内板ＧＢ１の位置、サイズおよび向きを指定してぴったりと重ね合わせるので、映像内において、まさに第１案内板ＧＢ１が第２案内板ＧＢ２に置き換わったように見える。このため、ユーザは、実際に見ている第１案内板ＧＢ１を見ているかのように映像内の第２案内板ＧＢ２を見ることができる。すなわち、見やすくてわかりやすい翻訳された案内板を表示することができる。また、病院内に表示される用語は、専門用語が含まれており、現在の自動翻訳ソフトでは適切な翻訳が難しいが、本実施形態では、予め翻訳された第２案内板ＧＢ２の置換モデルデータを記憶装置１９に記憶させてあるので、適切な翻訳を表示することができる。

また、翻訳された第２案内板ＧＢ２の、テキスト以外の部分の絵柄が第１案内板ＧＢ１と同じ絵柄であることで、実際に目の前に存在する第１案内板ＧＢ１と、映像内の第２案内板ＧＢ２の違いが小さく、映像内の第２案内板ＧＢ２がより見やすくてわかりやすいものとなる。

また、第２言語として、異なる複数の言語を用意し、ユーザに第２言語を選択させることで、いろいろな言語圏のユーザに、わかりやすい案内板を提供することができる。

さらに、出力映像内に表示された案内地図を表示させるアイコンをユーザが選択することで、その第１案内板ＧＢ１の位置に対応した案内地図を表示させることができる。また、案内地図に、第１案内板ＧＢ１の位置が表示されているので、案内地図を見たユーザが、現在地を知ることができる。
特に、病院の建物内においては、通常の地図ソフトを利用しても、ＧＰＳを利用して現在地を示すことができないし、複数フロアがある場合には、地図ソフトでは適切なフロアを表示することができないため、本実施形態のような、予め記憶させておいた案内地図を表示することで、適切な案内をすることができる。

以上に本発明の一実施形態について説明したが、本発明は、前記した実施形態に限定されることなく、適宜変形して実施することができる。
例えば、前記実施形態においては、案内地図の画像データに第１案内板ＧＢ１の位置を示すマークを含めていたが、同じフロアの第１案内板ＧＢ１の特徴点データに対しては、１つの案内地図を対応して記憶させておき、第１案内板ＧＢ１の位置（案内地図における座標）を特徴点データに対応させて記憶させておいてもよい。そして、案内地図を表示させるときに、案内地図に重ね合わせて、現在位置を示すマークを第１案内板ＧＢ１の特徴点データに対応して記憶している座標を指定して表示させてもよい。このようにすれば案内地図の画像データを記憶するための容量を節約できる。

また、記憶装置１９は、携帯端末である装置１内にあるものとして説明したが、記憶装置１９を、ネットワークを介してアクセス可能な他の装置（サーバー）に配置してもよい。

前記実施形態においては、第１案内板ＧＢ１の表示面が平面形状の場合を図示したが、例えば、円柱形状の柱に掲示される案内板など、立体的な第１案内板ＧＢ１がある場合には、第２案内板ＧＢ２を、第１案内板ＧＢ１と同様の円柱の表面形状を有するように作成し、記憶させておけば、立体的な第１案内板ＧＢ１を立体的な第２案内板ＧＢ２で置き換えることもできる。

また、本明細書に記載した各実施形態および各変形例で説明した各要素は、適宜組み合わせて実施することが可能である。

１ 装置
１０ 処理部
１１ 通信部
１９ 記憶装置
Ｃ アイコン
ＣＭ カメラ
ＤＳＰ ディスプレイ
ＧＢ１ 第１案内板
ＧＢ２ 第２案内板

Claims (7)

1. 翻訳された病院内の案内板を表示するプログラムであって、
   予め特徴点解析がされた、第１言語でテキストが記載された第１案内板のマーカー画像の特徴点データと、前記第１案内板の表面と同等の形状の案内板表面を有する第２案内板の３次元モデルからなる置換モデルであって、前記テキストを前記第１言語と異なる第２言語で置き換えて記載した置換モデルのデータと、前記マーカー画像の特徴点データに対応させて、前記第１案内板が配置された位置を表示範囲内に含む病院内の案内地図のデータと、が記憶装置に予め記憶させてあり、
   コンピュータに、
   カメラによって取得した映像から、特徴点解析をして前記特徴点データに対応する前記マーカー画像を検出し、前記マーカー画像の、前記映像内における位置、サイズおよび向きを取得するステップと、
   前記置換モデルのデータを読み出し、前記映像に、取得した前記位置、前記サイズ、および、前記向きを指定して前記置換モデルを重ね合わせ、前記映像内の前記第１案内板に前記第２案内板をはめ込んだ出力映像をディスプレイに表示させるステップと、
   前記出力映像内に、前記案内地図を表示させるアイコンを表示させるステップと、
   前記案内地図を表示させるアイコンが選択されると、前記案内地図のデータを読み出し、前記第１案内板が配置された位置を表示範囲内に含む前記案内地図をディスプレイに表示させるステップと、
   を実行させることを特徴とする翻訳された病院内の案内板を表示するプログラム。
2. 前記置換モデルは、前記案内板表面のテキスト部分以外の絵柄が、前記第１案内板と同じ絵柄となっていることを特徴とする請求項１に記載のプログラム。
3. 前記第２言語として異なる複数の言語で置き換えた複数の置換モデルのデータが前記記憶装置に記憶されており、
   ユーザに、前記第２言語を選択させるステップをさらに実行させ、
   出力映像をディスプレイに表示させるステップにおいて、前記選択された第２言語に対応した置換モデルを前記映像に重ね合わせることを特徴とする請求項１または請求項２に記載のプログラム。
4. 前記案内地図をディスプレイに表示させるステップにおいて、前記案内地図に、前記第１案内板が配置された位置を示すマークを表示することを特徴とする請求項１から請求項３のいずれか１項に記載のプログラム。
5. 前記案内地図を表示する場合に、前記案内地図を閉じる指示をするアイコンを表示するステップと、
   前記案内地図を閉じる指示をするアイコンが選択されると、表示していた前記案内地図を閉じ、前記映像内の前記第１案内板に前記第２案内板をはめ込んだ出力映像をディスプレイに表示させた状態に戻るステップと、を実行させることを特徴とする請求項１から請求項４のいずれか１項に記載のプログラム。
6. 翻訳された病院内の案内板を表示する方法であって、
   予め特徴点解析がされた、第１言語でテキストが記載された第１案内板のマーカー画像の特徴点データと、前記第１案内板の表面と同等の形状の案内板表面を有する第２案内板の３次元モデルからなる置換モデルであって、前記テキストを前記第１言語と異なる第２言語で置き換えて記載した置換モデルのデータと、前記マーカー画像の特徴点データに対応させて、前記第１案内板が配置された位置を表示範囲内に含む病院内の案内地図のデータと、が記憶装置に予め記憶させてあり、
   カメラによって取得した映像から、特徴点解析をして前記特徴点データに対応する前記マーカー画像を検出し、前記マーカー画像の、前記映像内における位置、サイズおよび向きを取得するステップと、
   前記置換モデルのデータを読み出し、前記映像に、取得した前記位置、前記サイズ、および、前記向きを指定して前記置換モデルを重ね合わせ、前記映像内の前記第１案内板に前記第２案内板をはめ込んだ出力映像をディスプレイに表示させるステップと、
   前記出力映像内に、前記案内地図を表示させるアイコンを表示させるステップと、
   前記案内地図を表示させるアイコンが選択されると、前記案内地図のデータを読み出し、前記第１案内板が配置された位置を表示範囲内に含む前記案内地図をディスプレイに表示させるステップと、
   を有することを特徴とする翻訳された病院内の案内板を表示する方法。
7. 翻訳された病院内の案内板を表示する装置であって、
   予め特徴点解析がされた、第１言語でテキストが記載された第１案内板のマーカー画像の特徴点データと、前記第１案内板の表面と同等の形状の案内板表面を有する第２案内板の３次元モデルからなる置換モデルであって、前記テキストを前記第１言語と異なる第２言語で置き換えて記載した置換モデルのデータと、前記マーカー画像の特徴点データに対応させて、前記第１案内板が配置された位置を表示範囲内に含む病院内の案内地図のデータと、が記憶装置に予め記憶させてあり、
   カメラによって取得した映像から、特徴点解析をして前記特徴点データに対応する前記マーカー画像を検出し、前記マーカー画像の、前記映像内における位置、サイズおよび向きを取得するステップと、
   前記置換モデルのデータを読み出し、前記映像に、取得した前記位置、前記サイズ、および、前記向きを指定して前記置換モデルを重ね合わせ、前記映像内の前記第１案内板に前記第２案内板をはめ込んだ出力映像をディスプレイに表示させるステップと、
   前記出力映像内に、前記案内地図を表示させるアイコンを表示させるステップと、
   前記案内地図を表示させるアイコンが選択されると、前記案内地図のデータを読み出し、前記第１案内板が配置された位置を表示範囲内に含む前記案内地図をディスプレイに表示させるステップと、
   を実行することを特徴とする翻訳された病院内の案内板を表示する装置。