JP2018112925A - 大規模商業施設用多言語情報システム - Google Patents

Abstract

【課題】スマホ携帯端末にて外国人旅行客にコードEX（二次元コード）（登録商標）を媒体として、多言語情報を映像、音声及び字幕スーパーテロップにて提供することによって、外国人のみならず視覚障がい者及び聴覚障害者にも情報が伝達可能とする、大規模商業施設用多言語情報システム。【解決手段】多言語情報システムを提供するソフトウェアをコードEXに記録して紙媒体に印字し、多言語合成音声と映像情報及び多言語テキスト情報と英語版自動翻訳ソフトウェアを予めインターネットVPN上のサーバー部にタグ付けして保管しておき、外国人旅行客は印字されたコードEXをスマホのカメラで撮像することで、必要とする多言語情報の国語を選択でき、ソフトウェアにより自動的にスマホより音声、画像、テロップ出力可能な外国人旅行者向け大規模商業施設用多言語情報システム。【選択図】図１

Description

本発明は、多言語音声情報とテキスト情報が映像と共に出力可能な外国人旅行者向けバリアフリーの大規模商業施設用多言語情報システムに関する。

２０１６年の統計によると日本国外から日本国内へ訪れる外国人旅行者の人数は、年々増加しており、年間２０００万人を超えて増加傾向にある。しかし、外国人旅行者は日本語が理解できず、また日本人も外国語の能力が十分にできず、説明ができないことが多々あり、２０１０年の東京オリンピック・パラリンピックを迎えるに当たり、大規模商業施設での多言語情報提供が急務となっている。

その解決方法として音声による対象物の説明を携帯電話にダウンロードすることができるアクセス先のために、そのアドレスのバーコードが言語毎に添付されたものが知られている（特許文献１参照。）。特許文献１に記載されたガイドブックの利用者は、音声による対象物の説明を希望する言語のバーコードから携帯電話でアドレスを読み取った後、読み取ったアドレスに携帯電話でアクセスすることによって、希望の言語の音声による対象物の説明を携帯電話にダウンロードして聞くことができる。

しかしながら、特許文献１に記載されたガイドブックにおいては、各対象物に対して言語毎にバーコードが添付されているので、利用者が複数の展示品に対して音声による説明を聞きたい場合、利用者が複数のバーコードの中から希望する言語のバーコードを選ぶという操作を対象物毎に毎回行わなければならない。

また、通信環境の悪い場所では、この方法は困難を伴い、双方向通信の費用負担もかかるという欠点がある。

また、特許文献２に記載されている情報提供システムには、改善策として二次元コードを使用して無線通信タグを特定して簡易に情報管理サーバーにアクセスが可能な仕組みを提案している。

しかし、この提案でも簡易に情報管理サーバーにアクセスが可能な仕組みの提案のみであり、多言語の情報取得まで踏み込んでおらず、実際の運用には実用面及び技術的に安易なものと言わざるを得ない。

特開２００６−２０３８３６号公報 特開２０１４−４４６４２号公報 特開２０１５−１１４６８０号公報 特開２０１５−１１４５５９号公報

上記のような複雑な操作で、高価な特殊な読み取り装置及び通信環境による不都合が生じる可能性が高いシステムでは無く、一般的な市場に流通している携帯電話のスマートフォン（スマホ）を読み取り装置及び表示装置として用いた、外国人旅行者向けバリアフリーの大規模商業施設用多言語情報システムを提供することを目的とする。

近年の技術革新、特に光学的なセンサー技術および情報処理のプロセッサー技術が旧来
の二次元コードの概念を一掃した。例えば、特許文献３および特許文献４に記載された高
密度二次元コード(コードEX)は高密度に情報を記録できるのみならず、多言語音声情報も記録する事が可能となった。

また、前記高密度二次元コード(コードEX)は、ヘッダー構造を暗号化することにより、用途ごとに記号の読み取り操作の制御が可能となったので、大規模商業施設ごとに異なった読み取り制御管理が可能となったので、地域ごとの大規模商業施設用多言語情報システムの適用が可能となった。

本発明にかかる外国人旅行者向けバリアフリーの大規模商業施設用多言語情報システムによれば、多言語による多言語情報の提供が高密度二次元コード(コードEX)により、インターネットVPN（仮想プライベートネットワーク）に(コードEX)のヘッダー構造を暗号化したセキュリティーを付加した状態で通信することが可能となり、多言語での音声出力及び字幕テロップ表示が可能となったので、視覚障がい者への「音声案内」及び聴覚障害者への「字幕テロップ案内」も多言語で可能となり、外国人旅行者向けバリアフリーの大規模商業施設用多言語情報システムを提供できる。

本発明にかかるシステム構成図 本発明にかかるサーバー部の構成図 英語選択後のフロー

請求項に係わる発明について、その実施の形態を図面１、図２と図３を参照しながら説明する。

外国人旅行者に複数の二次元コード（コードEX）を撮像させるような複雑な操作を避け、単純に1個のコードEXを撮像することで、大規模商業施設の案内を画像/映像と組み合わせて、多言語の音声情報と字幕テロップにより、外国人旅行者向けバリアフリーの大規模商業施設用多言語情報システムを提供する。

まず、図２の如く大規模商業施設に限定したインターネットVPNのサーバー９に提供する画像/映像ファイル１a、２a、３a、４a、を記録保管する。

同時に、記録保管された画像/映像ファイル１a、２a、３a、４a、に対応する、多言語画像/映像説明文のテキストファイル１T，２T，３T，４T、をインターネットVPNのサーバー９に記録保管する。

なお、各画像/映像に対応する説明文は図２の如く予め4か国語にタグ付され、例えば１Tの説明文には日本語は「J」、英語は「E」、中国語は「C」、韓国語は「K」とし、１TJ(１の画面の日本語説明)、１TC(１の画面の中国語説明)、１TK(１の画面の韓国語説明)、１TE(１の画面の英語説明及びその他３０か国言語用翻訳英語文書)、として画像/映像と同期するようにしておく。

また、多言語合成音声もインターネットVPNのサーバー９に記録保管する。本サーバーに記録される言語は、図２の如く日本語Japanese（J）、中国語Chinese（C）、韓国語Korean（K）、と英語English（E）の4か国語と自動翻訳対象言語の３０か国の合成音声とする。

また、英語版多言語自動翻訳ソフトウェア５TもインターネットVPNのサーバー９に内蔵させておき、外国人旅行者が英語を選択した場合、図３の如く英文を自動翻訳させて、希望する３０か国言語に変換する。

日本語から多言語への自動翻訳ソフトも存在するが、日本語の特殊性・特異性により自動翻訳による訳文の完成度は７０％程度であり、まだ使用に耐える性能には達していないが、英語版の自動翻訳ソフト５T、例えば「PowerTranslator」では多言語対応しており、訳文の多言語の完成度は９０％を超えている。

このような、英語版自動翻訳ソフト５Tを使用することにより、図２に内蔵されている３０か国言語も音声情報の提供が可能となる。

次に、外国人旅行者は大規模商業施設内にてコードEXの多言語システムアプリ２をダウンロードして、インストールする。

大規模商業施設案内のパンフレット６には、二次元コード情報記録部３に記録されたコードEXの多言語システムアプリ２を二次元コードデータ出力部４より出力されたコードEX５が右隅に印字しておく。

外国人旅行客は、任意の場所で大規模商業施設案内のパンフレット６に印字されたコードEX５を１のスマホで撮像する５。

コードEX５がスマホ１で認識されると、音がして合成音声の種類を示す国旗がスマホ１の画面７のように表示される。

外国人旅行客は、スマホ１の画面に表示された言語の希望する国旗に指でタッチすると、インターネットVPN（仮想プライベートネットワーク）８に自動的に接続される。

インターネットVPN（仮想プライベートネットワーク）８には、インターネットVPN（仮想プライベートネットワーク）上のサーバー部９が設置されている。

インターネットVPN（仮想プライベートネットワーク）上のサーバー部９には、図２の如くの情報が格納されている。

インターネットVPN（仮想プライベートネットワーク）８に自動的に接続されると、スマホ画面１に大規模商業施設のショッフ゜シ゛ャンル（例えば、ファッション、グッズ、レストラン、フードコート、サービス、アミューズメント等）の選択画面が表示１０される。

レストランを選択すると表示１１となり、レストランの種類が表示されるので希望するレストラン、例えば寿司を選択すると、表示１２の寿司屋の場所が示され、入り口の画像が出て、寿司の紹介テキストが最初に選択した言語にて音声にて出力される。

外国人旅行客が英語を選択した場合は、図３の如くのフローとなり、本システムでは３４か国語の情報が音声、画像、字幕テロップでの情報提供が可能となる。

この発明によれば、高密度二次元コード(コードEX)を活用した、「コード・EX多言語システム・アプリ」の外国人旅行者向けバリアフリーの大規模商業施設用多言語情報システムは、単純な操作で画像/映像と連動して多言語音声情報及び字幕テロップ情報も出力が可能となり、安価で効率的に３０か国以上の多言語で、視覚障がい者には音声情報、聴覚障害者には字幕テロップ情報も提供できる、外国人旅行者向けバリアフリーの大規模商業施設用多言語情報システムが可能となった。

１ スマホ（スマートフォン）
２ コードEXの多言語システムアプリ
３ 二次元コード コードEXの情報記録部
４ 二次元コード コードEXのデータ出力部
５ コードEX
６ コードEXが印字された大規模商業施設案内パンフレット
７ 合成音声の言語を示す国旗が4個スマホの画面に表示される
８ インターネットVPN（仮想プライベートネットワーク）
９ インターネットVPN（仮想プライベートネットワーク）上のサーバー部
１０ スマホ画面１に大規模商業施設のショッフ゜シ゛ャンル（例えば、ファッション、グッズ、レストラン、フードコート、サービス、アミューズメント等）の選択画面
１１ スマホ画面１に、選択されたジャンルの種類が表示される。
１２ スマホ画面１に、選択されたジャンルの詳細画面が表示される。
１a サーバーに保管された映像１
２a サーバーに保管された映像２
３a サーバーに保管された映像３
４a サーバーに保管された映像４
１T サーバーに保管された映像１の4か国語の説明テキスト
２T サーバーに保管された映像２の4か国語の説明テキスト
３T サーバーに保管された映像３の4か国語の説明テキスト
４T サーバーに保管された映像４の4か国語の説明テキスト
５T 多言語自動翻訳ソフトウェア（英語版）

Claims (4)

1. 多言語合成音声と映像情報及びその関連する多言語テキスト情報を管理する記録管理部と、
   前記記録管理部に記録された情報を二次元コードに変換して記録する二次元コード情報記録部と、
   前記二次元コード情報記録部により記録された情報をデータとして二次元コードとして出力するデータ出力部と、
   前記データ出力部より出力されて印字された二次元コードのデータを光学的な手段で読み取るデータ読み取り部と、
   前記多言語合成音声と映像情報及びその関連する多言語テキスト情報と英語版多言語自動翻訳ソフトウェアを保管するインターネットVPN（仮想プライベートネットワーク）上のサーバー部と、
   前期合成音声と映像情報及び多言語テキスト情報を同期させて出力することを可能とするタグ付け部と、
   前記サーバー部に記録された情報を自動的に関連付けて情報出力するソフトウェア部と、
   前記サーバー部より合成音声と映像情報及び多言語テキスト情報をダウンロードして表示する携帯端末部と、
   前記情報をデータに基づいて音声変換して音声出力する合成音声格納部と連動してテキスト変換して字幕スーパーとして表示する表示部と、
   前記保管記録部により記憶された情報に基づいて端末機器より音声とテキストを映像情報とを同期して情報を出力できる機能と、を有することを特徴とする、大規模商業施設用多言語情報システム。
2. 前記情報データとして出力された二次元コードは、二次元コードのヘッダ構造を暗号化してバリアフリーの多言語情報システムのみに限定した仕様構成として、セキュリティー鍵及び暗号化にも対応することを特徴とする、請求項１の大規模商業施設用多言語情報システム。
3. 前記情報データとして記録された二次元コードの記録の蓄積、読み取り、音声出力、情報送信およびテキストとしての字幕スーパー表示をスマートフォンにて行うことを特徴とする、請求項１の大規模商業施設用多言語情報システム。
4. 前記サーバー部より合成音声と映像情報及び多言語テキスト情報のデジタルサイネイージ表示方式で行うことを特徴とする、請求項１の大規模商業施設用多言語情報システム。