JP2009070229A

JP2009070229A - Automatic transaction device

Info

Publication number: JP2009070229A
Application number: JP2007239267A
Authority: JP
Inventors: Tsukasa Obara; 司小原
Original assignee: Oki Electric Industry Co Ltd
Current assignee: Oki Electric Industry Co Ltd
Priority date: 2007-09-14
Filing date: 2007-09-14
Publication date: 2009-04-02

Abstract

<P>PROBLEM TO BE SOLVED: To provide a means for acquiring voice information for specifying a user's native language in conducting transaction by an automatic teller machine. <P>SOLUTION: The automatic teller machine 1 which automatically performs a transaction with a user comprises a means for acquiring image information of the user; a means for selecting a plurality of languages that are candidates of the user's native language from personal features of image information; a means for arranging the plurality of selected languages in the descending order of the probability of the user's native language to assign a priority order; and a means for reporting voice acquisition guide messages by the languages successively from the top of the priority order. <P>COPYRIGHT: (C)2009,JPO&INPIT

Description

本発明は、金融機関の店舗に設置された現金自動預払機等の利用者との取引を自動で行う自動取引装置に関する。 The present invention relates to an automatic transaction apparatus that automatically performs a transaction with a user such as an automatic teller machine installed in a store of a financial institution.

従来の現金自動預払機においては、利用者との取引を行う場合に、初期画面として操作表示部の画面に表示する取引選択画面に、日本語による取引選択ボタンと、他の外国語による操作案内の言語選択ボタンとを表示し、言語選択ボタンが押下された場合に、選択された言語による取引選択画面等を表示して取引を行い、外国人利用者との取引の円滑化を図っている（例えば、特許文献１参照。）。 In conventional automatic teller machines, when performing transactions with users, the transaction selection screen displayed on the screen of the operation display section as the initial screen, transaction selection buttons in Japanese, and operation guidance in other foreign languages The language selection button is displayed, and when the language selection button is pressed, the transaction selection screen, etc. in the selected language is displayed to conduct transactions, thereby facilitating transactions with foreign users. (For example, refer to Patent Document 1).

このような、操作表示部の画面に表示する取引選択画面に言語選択ボタンを表示するようにすると、画面の大きさの制約により、表示できる言語選択ボタンの数が限られ（特許文献１の例では、３つ）、外国人労働者や外国からの留学生が増加し、その国籍が多様化している現状に対応することができず、言語選択ボタンに含まれていない母国語を用いる外国人利用者の利便性を著しく低下させるという問題が生ずる。 If the language selection button is displayed on the transaction selection screen displayed on the screen of the operation display unit, the number of language selection buttons that can be displayed is limited due to the size of the screen (example of Patent Document 1). 3), the use of foreigners who cannot use the native language that is not included in the language selection buttons, as the number of foreign workers and foreign students is increasing and their nationalities are diversified. There arises a problem that the convenience of the user is significantly reduced.

このため、外国人利用者の母国語を、利用者の選択によらずに特定する方法が必要になる。
このような母国語の特定方法として、電話による外国語音声サービスの場合に、そのサービスの利用者が、案内サービス装置に電話を接続すると、最初に英語で、所望する言語の国番号の音声入力を促すガイダンスが流され、利用者が音声で国番号を入力すると、案内サービス装置が音声認識部により国番号を認識し、その国番号を基に母国語を特定して外国語音声サービスを行っているものがある（例えば、特許文献２参照。）。 For this reason, a method for specifying the native language of the foreign user regardless of the user's selection is required.
As a method for specifying the native language, in the case of a foreign language voice service by telephone, when the user of the service connects the telephone to the guidance service device, the voice input of the country code of the desired language is first performed in English. When the user inputs the country code by voice, the guidance service device recognizes the country code by the voice recognition unit, specifies the native language based on the country code, and provides the foreign language voice service. (For example, refer to Patent Document 2).

また、車載ナビゲーション装置において、目的地等の利用者の音声による入力を、利用者が音声入力により選択した地域テンプレートの音声認識辞書を検索して認識すると共に、その地域言語での音声案内を行っているものもある（例えば、特許文献３参照。）。
特開平６−２８２７２６号公報（主に第４頁段落００２２、第５頁段落００３２−００３３、第４図）特開２００３−１５２９７０号公報（主に第３頁段落００１４−第４頁段落００１６、第２図）特開２００５−２２７３６９号公報（主に第７頁段落００３６−第８頁段落００４１、第３−６図） In addition, in the in-vehicle navigation device, the user's voice input such as the destination is recognized by searching the voice recognition dictionary of the regional template selected by the user by voice input, and voice guidance is performed in the local language. (For example, refer to Patent Document 3).
JP-A-6-282726 (mainly page 4 paragraph 0022, page 5 paragraphs 0032-0033, FIG. 4) Japanese Patent Laid-Open No. 2003-152970 (mainly third page paragraph 0014-fourth page paragraph 0016, FIG. 2) JP-A-2005-227369 (mainly, page 7 paragraph 0036 to page 8 paragraph 0041, FIG. 3-6)

しかしながら、上述した特許文献１の現金自動預払機に、特許文献２または特許文献３の音声認識を適用しようとすると、特許文献２または特許文献３においては、利用者が国番号または地域名等を音声で入力しているため、通常、無言で取引を行う現金自動預払機においては、利用者の発話を促すことが難しく、その音声情報を取得することが困難になるという問題がある。 However, when applying the speech recognition of Patent Document 2 or Patent Document 3 to the automatic teller machine of Patent Document 1 described above, in Patent Document 2 or Patent Document 3, the user specifies a country code or a region name. Since it is input by voice, in an automatic teller machine that normally conducts transactions silently, it is difficult to prompt the user to speak, and it is difficult to acquire the voice information.

このため、特許文献２のように、比較的認知度が高い英語を用いて利用者の発話を促すと、英語を理解できない外国人利用者は戸惑うばかりで、取引を行うことができず、利用者の滞留時間が長くなって、現金処理装置の稼動効率が低下するという問題がある。
本発明は、上記の問題点を解決するためになされたもので、自動取引装置による取引時に、利用者の母国語を特定するための音声情報を取得する手段を提供することを目的とする。 For this reason, as in Patent Document 2, if the user's utterance is urged using English with relatively high recognition, foreign users who cannot understand English are just confused and unable to conduct transactions. There is a problem that the residence time of the person becomes longer and the operating efficiency of the cash processing apparatus is lowered.
The present invention has been made to solve the above-described problems, and an object of the present invention is to provide a means for acquiring voice information for specifying a user's native language at the time of transaction by an automatic transaction apparatus.

本発明は、上記課題を解決するために、利用者との取引を自動で行う自動取引装置において、利用者の画像情報を取得する手段と、前記画像情報の人的特徴から、複数の言語を、利用者の母国語となる可能性の高い順に並べて、優先順位を付与する手段と、前記優先順位の最上位から順に、当該言語による音声取得誘導メッセージを報知する手段と、を備えることを特徴とする。 In order to solve the above problems, the present invention provides an automatic transaction apparatus that automatically performs a transaction with a user, and a plurality of languages based on means for acquiring image information of the user and human characteristics of the image information. Arranged in descending order of the possibility of becoming the user's native language, and means for assigning priorities, and means for informing voice acquisition guidance messages in the languages in order from the top of the priorities. And

これにより、本発明は、自動取引装置による取引時に、利用者の母国語の可能性がある言語を用いて利用者に発話を促すことができ、利用者の母国語を特定するための音声情報を容易に取得することができ、取得した利用者の音声情報を用いて、母国語の特定処理を迅速に収束させて、母国語による表示を用いた取引を行う自動取引装置の稼動効率を向上させることができるという効果が得られる。 As a result, the present invention can prompt the user to speak using a language that may be the user's native language at the time of the transaction by the automatic transaction apparatus, and the voice information for specifying the user's native language Can be easily acquired, and using the acquired user's voice information, the process of specifying the native language can be quickly converged to improve the operating efficiency of automatic transaction equipment that conducts transactions using the display in the native language. The effect that it can be made is acquired.

以下に、図面を参照して本発明による自動取引装置の実施例について説明する。 Embodiments of an automatic transaction apparatus according to the present invention will be described below with reference to the drawings.

図１は実施例１の現金自動預払機を示すブロック図、図２は実施例１の母国語特定処理を示すフローチャートである。
図１において、１は自動取引装置としての現金自動預払機であり、銀行や郵政公社等の金融機関の支店や郵便局、コンビニエンスストア等の店舗に設置され、利用者との間での取引処理を自動で行う。 FIG. 1 is a block diagram illustrating an automatic teller machine according to the first embodiment, and FIG. 2 is a flowchart illustrating native language specifying processing according to the first embodiment.
In FIG. 1, 1 is an automatic teller machine as an automatic transaction apparatus, which is installed in a branch of a financial institution such as a bank or a postal public corporation, a post office, a convenience store, etc., and performs transaction processing with a user. Is performed automatically.

２は金融機関のセンタに設置された上位装置としてのホストコンピュータであり、店舗に設置されている現金自動預払機１と専用回線や電話回線等の通信回線３を介して接続しており、口座開設者である利用者を個別に識別するための顧客ＩＤに対応させて利用者の口座の金融機関名、店番号、口座番号等の口座情報やその暗証番号、口座残高等の顧客情報を保有して利用者の口座を管理する。 Reference numeral 2 denotes a host computer as a host device installed in the center of a financial institution, which is connected to an automatic teller machine 1 installed in a store via a communication line 3 such as a dedicated line or a telephone line, Account information such as the financial institution name, store number, and account number of the user's account and the customer information such as the PIN number and account balance are stored in correspondence with the customer ID for individually identifying the user who is the founder. And manage user accounts.

５は現金自動預払機１の主制御部であり、通信回線３を介してホストコンピュータ２と接続しており、現金自動預払機１内の各部を制御して取引処理や母国語特定処理等を実行すると共にデータ通信等も制御する。
６は記憶部であり、主制御部５が実行するプログラムやそれに用いる各種のデータおよび主制御部５による処理結果等が格納される。 Reference numeral 5 denotes a main control unit of the automatic teller machine 1, which is connected to the host computer 2 through the communication line 3, and controls each part in the automatic teller machine 1 to perform transaction processing, native language identification processing, and the like. It executes and controls data communication and the like.
A storage unit 6 stores a program executed by the main control unit 5, various data used for the program, processing results by the main control unit 5, and the like.

７は操作表示部であり、現金自動預払機１の前面に設けられ、ＣＲＴやＬＣＤ等の表示画面とタッチパネル等の入力手段との組合せで構成されており、表示画面に取引選択画面や各種の入力画面、利用者の処置を促す誘導画面等を表示する他、入力手段により利用者からの入力を受付ける。
８はカード取扱部であり、挿入された利用者のキャッシュカード等の取引カードの磁気ストライプやＩＣチップ等に記録されている顧客ＩＤや金融機関名、支店名、口座番号等の利用者の口座情報等のカード情報を読み書きする機能を有する他、明細票等に取引内容等を印刷するレシート印刷機能等を有している。 7 is an operation display unit, which is provided on the front face of the automatic teller machine 1 and is composed of a combination of a display screen such as a CRT or LCD and an input means such as a touch panel. In addition to displaying an input screen, a guidance screen for prompting the user's treatment, etc., the input means accepts input from the user.
Reference numeral 8 denotes a card handling unit, which is a customer account such as a customer ID, a financial institution name, a branch name, and an account number recorded on a magnetic stripe or IC chip of a transaction card such as an inserted user's cash card. In addition to having a function of reading and writing card information such as information, it has a receipt printing function for printing transaction contents and the like on a statement slip.

９は通帳取扱部であり、挿入された利用者の通帳の磁気ストライプやＩＣチップ等に記録されている通帳情報を読み書きする機能を有すると共に取引内容等を利用者の通帳に記帳する機能を有している。
１０は入出金部であり、入金取引時等に利用者が投入した現金を受入れ、これを鑑別および計数して収納庫に収納し、出金取引時等に収納庫から利用者に支払う現金を繰出し、これを計数して利用者に引渡す機能を有している。 9 is a bankbook handling unit that has the function of reading and writing the bankbook information recorded in the magnetic stripe of the inserted user's bankbook, IC chip, etc., and the function of recording the transaction contents in the user's bankbook. is doing.
Reference numeral 10 denotes a deposit / withdrawal unit that accepts cash input by the user at the time of deposit transaction, etc., identifies and counts it, stores it in the storage, and cash to be paid to the user from the storage at the time of withdrawal transaction, etc. It has a function of feeding out, counting this, and delivering it to the user.

１２は画像情報取得部であり、現金自動預払機１の前面に利用者と対向して設置され、ＣＣＤ（ＣｈａｒｇｅＣｏｕｐｌｅｄＤｅｖｉｃｅ）等の複数の画素により利用者の顔等の画像を撮影するカメラを備えている。
１３は音声情報取得部であり、マイクとスピーカを有し、制御部５が生成した音声データをスピーカにより音声に変換して外部に報知し、マイクによりに顧客の音声を集音する機能を備えている。 An image information acquisition unit 12 is installed on the front face of the automatic teller machine 1 so as to face the user, and has a camera that captures an image of the user's face and the like using a plurality of pixels such as a CCD (Charge Coupled Device). I have.
An audio information acquisition unit 13 has a microphone and a speaker, and has a function of converting audio data generated by the control unit 5 into audio by the speaker and notifying the outside, and collecting the customer's audio using the microphone. ing.

１５は表示情報データベースであり、言語別に、それぞれの言語で記載された取引選択画面等の取引画面や、誘導画面等の画面情報を格納している。
上記の現金自動預払機１の記憶部６には、現金自動預払機１の設置場所の公用語である設置場所言語、音声情報から認識した言語を利用者の母国語と推定するときの類似判定値が予め格納される他、取引中に表示する各画面の表示言語を格納する表示言語格納エリア、優先順位Ｎｐの順序をカウントするための優先順位カウントエリアが予め確保されている。 A display information database 15 stores transaction information such as a transaction selection screen described in each language and screen information such as a guidance screen for each language.
In the storage unit 6 of the automatic teller machine 1, similarity determination when estimating the language recognized from the installation location language and voice information as the official language of the installation location of the automatic teller machine 1 as the user's native language In addition to storing values in advance, a display language storage area for storing the display language of each screen displayed during the transaction and a priority order count area for counting the order of the priority order Np are secured in advance.

本実施例の現金自動預払機１の設置場所は日本国であり、記憶部６には設置場所言語として、日本国の公用語（以下、日本語という。）が格納されている。
また、記憶部６には、表示言語格納エリアに格納された表示言語で表示した取引選択画面等の取引画面を用いて、利用者が選択した取引の入力を受付け、これを基にホストコンピュータ２と交信して利用者との取引を自動で行う機能等を有する取引処理プログラムに、利用者の画像情報を基に、その人的特徴から人種系統を推測して利用者の母国語の候補となる言語を複数選定し、利用者の音声情報を取得して、その言語的特徴から母国語を推定する機能を有する母国語特定処理プログラム等が追加された業務処理実行プログラムが予め格納されており、主制御部５が実行する業務処理実行プログラムのステップにより本実施例の現金自動預払機１のハードウェアとしての各機能手段が形成される。 The installation location of the automatic teller machine 1 according to the present embodiment is Japan, and the storage unit 6 stores Japanese official language (hereinafter referred to as Japanese) as the installation location language.
The storage unit 6 accepts an input of a transaction selected by the user using a transaction screen such as a transaction selection screen displayed in the display language stored in the display language storage area, and based on this, the host computer 2 Candidates of the user's native language based on the personal characteristics of the transaction processing program that has the function of automatically communicating with the user by communicating with A business processing execution program to which a native language identification processing program having a function of estimating the native language from the linguistic characteristics is added is stored in advance. Each function means as hardware of the automatic teller machine 1 of this embodiment is formed by the steps of the business process execution program executed by the main control unit 5.

以下に、図２に示すフローチャートを用い、Ｓで示すステップに従って本実施例の母国語特定処理について説明する。
なお、以下の説明においては、設置場所言語、本実施例では日本語をよく読解できない外国人である外国人利用者との取引について説明するが、外国に設置した場合も同様である。この場合に、設置場所言語は当該国の公用語が記憶部６に格納され、日本人等が外国人利用者となる。 Hereinafter, the native language specifying process according to the present embodiment will be described in accordance with the steps indicated by S using the flowchart shown in FIG.
In the following description, transactions with foreign users, who are foreigners who cannot read Japanese well in the installation location language, in this embodiment, will be described. In this case, the official language of the country concerned is stored in the storage unit 6 as the installation location language, and Japanese and the like are foreign users.

金融機関の店舗の係員が、始業時等に現金自動預払機１へ電源を投入すると、現金自動預払機１の記憶部６に格納されている業務処理実行プログラムが自動的に起動される。
Ｓ１、業務処理実行プログラムが起動すると、主制御部５は画像情報取得部１２のカメラが利用者を認識するのを待つ来店待ち状態での待機を開始し、画像情報取得部１２から利用者認識信号を受信して利用者の来店を認識したときに、記憶部６に格納されている設置場所言語（日本語）を読出し、その言語を表示言語として記憶部６の表示言語格納エリアに格納してステップＳ２へ移行する。 When a staff member at a financial institution turns on the automatic teller machine 1 at the start of business or the like, the business process execution program stored in the storage unit 6 of the automatic teller machine 1 is automatically activated.
S1, when the business process execution program is started, the main control unit 5 starts waiting in a store waiting state waiting for the camera of the image information acquisition unit 12 to recognize the user, and the user recognition from the image information acquisition unit 12 When receiving the signal and recognizing the visit of the user, the installation location language (Japanese) stored in the storage unit 6 is read and stored in the display language storage area of the storage unit 6 as the display language. To step S2.

Ｓ２、主制御部５は、記憶部６の表示言語格納エリアに格納されている表示言語（本ステップでは日本語）を読出し、その表示言語を基に表示情報データベース１５から表示言語（日本語）による図３に示す取引選択画面の画面情報を読出し、これを操作表示部７の表示画面に表示する。
取引選択画面には、取引選択ボタンの押下を促す旨の文言と出金取引のための「お引き出し」ボタン、入金取引のための「お預け入れ」ボタン、振込取引のための「お振り込み」ボタン、通帳に未記入の取引データ等を記帳する通帳記帳取引のための「通帳記帳」ボタン、口座残高を照会する残高照会取引のための「残高照会」ボタン等の日本語で表示された取引選択ボタンが表示される。 S2, the main control unit 5 reads the display language (Japanese in this step) stored in the display language storage area of the storage unit 6, and displays the display language (Japanese) from the display information database 15 based on the display language. The screen information on the transaction selection screen shown in FIG. 3 is read out and displayed on the display screen of the operation display unit 7.
On the transaction selection screen, a message prompting you to press the transaction selection button, a “draw” button for withdrawal transactions, a “deposit” button for deposit transactions, and a “transfer” button for transfer transactions Transaction selections displayed in Japanese, such as a "passbook entry" button for a passbook entry transaction to enter transaction data that has not been entered in the passbook, a "balance inquiry" button for a balance inquiry transaction to inquire about the account balance A button is displayed.

Ｓ３、日本語の取引選択画面を表示した主制御部５は、画像情報取得部１２のカメラにより、現金自動預払機１の前に立つ利用者が、その顔や身体の特徴を明確に表したアングルになったことを認識したときに、その利用者の画像を撮影し、この画像情報を記憶部６に一時保存する。
Ｓ４、主制御部５は、利用者の取引選択ボタンの押下を待って待機しており、取引選択ボタンが押下されたことを、タッチパネルからの出力信号等により認識したときは、その利用者との間での取引の開始を判定してステップＳ１８へ移行する。 S3, the main control unit 5 displaying the transaction selection screen in Japanese, the user standing in front of the automatic teller machine 1 clearly shows the features of the face and body by the camera of the image information acquisition unit 12. When the angle is recognized, the user's image is taken, and this image information is temporarily stored in the storage unit 6.
S4, the main control unit 5 waits for the user to press the transaction selection button, and when it is recognized by the output signal from the touch panel that the transaction selection button has been pressed, The start of the transaction is determined, and the process proceeds to step S18.

取引選択ボタンが押下されない場合は、ステップＳ５へ移行する。
本実施例では、利用者は、日本語の画面から入力を行うことが困難な外国人利用者であり、その外国人利用者が日本語の取引選択ボタンを押下しない場合について説明する。
Ｓ５、主制御部５は、その時計機能により、上記ステップＳ２で取引選択画面を表示したときからの経過時間を計測しながら待機しており、経過時間が所定の待機時間に達しないときは、ステップＳ２へ戻って上記の待機を継続する。この場合に上記ステップＳ３における利用者の画像情報は、記憶部６に先に保存した画像情報より特徴が明確なアングルがあったときに更新される。 If the transaction selection button is not pressed, the process proceeds to step S5.
In this embodiment, a case will be described in which a user is a foreign user who is difficult to input from a Japanese screen and the foreign user does not press the Japanese transaction selection button.
S5, the main control unit 5 waits while measuring the elapsed time from when the transaction selection screen is displayed in step S2 by the clock function, and when the elapsed time does not reach the predetermined standby time, Returning to step S2, the above-mentioned standby is continued. In this case, the image information of the user in step S3 is updated when there is an angle whose feature is clearer than the image information previously stored in the storage unit 6.

経過時間が所定の待機時間以上になったときは、利用者の母国語の特定が必要と判定して、ステップＳ６へ移行する。
Ｓ６、利用者の母国語の特定が必要と判定した主制御部５は、記憶部６に一時保存した利用者の画像情報を読出し、その毛髪や肌、瞳等の色、眉の間隔等の顔の特徴、および背丈や肩幅、骨格等の身体の特徴等の人的特徴から、利用者の人種系統を推測して、その系統の外国人が母国語として用いる候補となる言語を複数選定する。 When the elapsed time is equal to or longer than the predetermined waiting time, it is determined that it is necessary to specify the user's native language, and the process proceeds to step S6.
S6, the main control unit 5 having determined that it is necessary to specify the user's native language, reads out the user's image information temporarily stored in the storage unit 6, such as the color of the hair, skin, pupils, the eyebrow interval, etc. Inferring the race lineage of the user from facial features and human characteristics such as height, shoulder width, and skeletal characteristics, select multiple languages that can be used as foreign languages by foreigners of that lineage To do.

そして、選定された複数の候補となる言語を、母国語となる可能性の高い順に並べて優先順位Ｎｐを付与する。
例えば、人種系統をヨーロッパ系の白人と推測した場合は、その人的特徴から推測される最も可能性の高い出身国の公用語、例えばイタリアの公用語を第１優先とし、その出身国の人が、出身国（本国）以外で多く居住する居住国、例えばアメリカの公用語を第２優先とし、第１優先の国でないとしたならば、人的特徴から推測される次の可能性の出身国の公用語を第３優先とし、その居住国（上位の優先順位Ｎｐの居住国と重複する場合は省略）の公用語を第４優先とする等により、優先順位Ｎｐを付与する。 Then, the plurality of selected candidate languages are arranged in the order of the high possibility of becoming the native language, and the priority order Np is given.
For example, if the race line is inferred to be a white Caucasian, the most probable official language of the country of origin, for example, the Italian official language, will be the first priority. If a person has a country of residence outside the country of origin (home country), for example, the official language of the United States as the second priority and is not the first priority country, the following possibilities may be inferred from human characteristics: The priority Np is given by setting the official language of the country of origin as the third priority and setting the official language of the country of residence (omitted when overlapping with the country of residence of the higher priority Np) as the fourth priority.

Ｓ７、複数の候補となる言語に優先順位Ｎｐを付与した主制御部５は、優先順位Ｎｐを上位から順に認識するために、記憶部６の優先順位カウントエリアの優先順位Ｎｐの初期化（Ｎｐ＝０）を行う。
Ｓ８、主制御部５は、優先順位カウントエリアの優先順位Ｎｐに「１」を加えて、優先順位Ｎｐを認識する。本ステップでは優先順位Ｎｐ＝１、つまり第１優先と認識する。 S7, the main control unit 5 having given the priority Np to a plurality of candidate languages initializes the priority Np (Np) of the priority count area of the storage unit 6 in order to recognize the priority Np in order from the top. = 0).
S8, the main control unit 5 recognizes the priority Np by adding “1” to the priority Np of the priority count area. In this step, the priority order Np = 1, that is, the first priority is recognized.

Ｓ９、優先順位Ｎｐを認識した主制御部５は、認識した優先順位Ｎｐの言語を基に、表示情報データベース１５から、その優先順位Ｎｐの言語による利用者の発話を促す誘導文言、例えば「母国語で挨拶してください。」と操作文言、例えば「母国語なら確認ボタンを押してください。」および確認ボタン等を表示した音声取得誘導画面の画面情報を読出し、これを操作表示部７の表示画面に表示する一方、画像情報取得部１２のカメラにより利用者の画像を観察しながら、音声取得誘導画面の誘導文言を音声データに変換した利用者の発話を促す音声取得誘導メッセージを、優先順位Ｎｐの言語により音声情報取得部１３のスピーカから報知する。 S9, the main control unit 5 that has recognized the priority Np, from the display information database 15 based on the recognized language of the priority Np, for example, a guidance word prompting the user to speak in the language of the priority Np Say hello in your language. ”Read the screen information of the voice acquisition guidance screen that displays the operation wording, for example,“ Please press the confirmation button if it is your native language ”and the confirmation button, etc., and display this information on the display screen of the operation display unit 7 On the other hand, while observing the user's image with the camera of the image information acquisition unit 12, a voice acquisition guidance message that prompts the user to speak by converting the guidance word on the voice acquisition guidance screen into voice data is displayed in the priority order Np. Is notified from the speaker of the voice information acquisition unit 13 in the language.

Ｓ１０、主制御部５は、利用者が、表示された音声取得誘導画面の確認ボタンを押下したことを認識した場合は、利用者が表示された言語による操作文言を読解したことにより優先順位Ｎｐの言語を取引に用いることが可能な利用者の母国語と特定してステップＳ１７へ移行する。確認ボタンが押下されない場合はステップＳ１１へ移行する。
Ｓ１１、主制御部５は、音声取得誘導画面に表示された誘導文言、または報知された音声取得誘導メッセージに応答した利用者の発話や呟き等を、音声情報取得部１３のマイクにより集音した場合は、利用者の音声情報を取得したことを認識してステップＳ１２へ移行する。 S10, when the main control unit 5 recognizes that the user has pressed the confirmation button on the displayed voice acquisition guidance screen, the priority order Np is determined by reading the operation language in the displayed language. The language is identified as the user's native language that can be used for the transaction, and the process proceeds to step S17. If the confirmation button is not pressed, the process proceeds to step S11.
S11, the main control unit 5 collects the utterance wording displayed on the voice acquisition guidance screen or the user's utterance or whispering in response to the notified voice acquisition guidance message by the microphone of the voice information acquisition unit 13 In that case, it is recognized that the voice information of the user has been acquired, and the process proceeds to step S12.

また、主制御部５は、画像情報取得部１２による画像の観察により、利用者の表情に戸惑いが見られる場合、ステップＳ９で音声取得誘導メッセージを報知した後の経過時間が、所定の取得待ち時間（例えば、５秒）以上の場合は、優先順位Ｎｐの言語が利用者の母国語ではないことを判定してステップＳ８へ戻り、次の優先順位Ｎｐの言語による利用者の音声情報の取得を継続する。 When the user's facial expression is confused by the image information acquisition unit 12 observing the image, the main control unit 5 waits for a predetermined acquisition time after informing the voice acquisition guidance message in step S9. If it is longer than the time (for example, 5 seconds), it is determined that the language of the priority order Np is not the user's native language, and the process returns to step S8 to acquire the user's voice information in the next priority order Np language. Continue.

Ｓ１２、音声情報を取得した主制御部５は、取得した音声情報からそのイントネーションおよび子音や母音の発音や並び方等の言語的特徴から、その言語的特徴に該当する複数の言語を抽出し、抽出した各言語を用いて、利用者の発話内容、および／若しくは呟き内容を文字列に変換し、その変換時に文字列に変換できた単語の数と、文全体の単語数（意味のある単語に変換できなかった単語を含む。）との割合を算出して、音声情報の言語とその音声情報を基に抽出した各言語とのそれぞれの類似度を求めてステップＳ１３へ移行する。 S12, the main control unit 5 that acquired the voice information extracts a plurality of languages corresponding to the linguistic feature from the acquired voice information from the intonation and linguistic features such as pronunciation and arrangement of consonants and vowels, and extracts them Using each language, the user's utterance content and / or whispering content is converted into a character string, and the number of words that can be converted into a character string at the time of conversion and the number of words in the entire sentence ( And the ratio between the language of the speech information and each language extracted based on the speech information is obtained, and the process proceeds to step S13.

Ｓ１３、類似度を算出した主制御部５は、類似度の最も高い言語を認識すると共に、記憶部６に格納されている類似判定値（例えば、０．７）を読出し、認識した言語の類似度が、類似判定値以上の場合に、その言語を利用者の母国語と推定してステップＳ１４へ移行する。
認識した類似度が、類似判定値未満の場合は、音声情報を基に抽出した言語とその類似度とを記憶部６に一時保存してステップＳ１６へ移行する。 S13, the main control unit 5 having calculated the similarity recognizes the language having the highest similarity, reads the similarity determination value (for example, 0.7) stored in the storage unit 6, and resembles the recognized language If the degree is equal to or greater than the similarity determination value, the language is estimated as the user's native language and the process proceeds to step S14.
If the recognized similarity is less than the similarity determination value, the language extracted based on the speech information and the similarity are temporarily stored in the storage unit 6 and the process proceeds to step S16.

Ｓ１４、音声情報を基に利用者の母国語を推定した主制御部５は、推定した母国語を基に、表示情報データベース１５から、その母国語による、当該母国語および母国語による取引を開始する旨の文言、確認操作の操作方法の文言、および表示された母国語が正しいことを示すための図形（本実施例では「○」）で表示した確認ボタン、表示された母国語が正しくないことを示すための図形（本実施例では「×」）で表示した取消ボタン等を表示した図４に示す母国語確認画面の画面情報を読出し、これを操作表示部７の表示画面に表示する。 S14, the main control unit 5 that has estimated the user's native language based on the voice information starts the transaction in the native language and the native language from the display information database 15 based on the estimated native language. The confirmation message displayed in the figure (“○” in this example) to indicate that the displayed native language is correct, and the displayed native language is incorrect. The native language confirmation screen screen information shown in FIG. 4 displaying the cancel button or the like displayed as a graphic (“×” in this embodiment) is displayed and displayed on the display screen of the operation display unit 7. .

利用者は、母国語の正否を表す図形で表示された確認ボタンまたは取消ボタンを押下する。
Ｓ１５、母国語確認画面を表示した主制御部５は、確認ボタンが押下されたときは、表示した言語を利用者の母国語と特定してステップＳ１７へ移行する。
取消ボタンが押下された場合は、音声情報を基に抽出した言語（母国語確認画面に表示した言語を除く。）とその類似度を記憶部６に一時保存してステップＳ１６へ移行する。 The user presses a confirmation button or a cancel button displayed with a graphic representing whether the native language is correct or not.
S15. When the confirmation button is pressed, the main control unit 5 displaying the native language confirmation screen identifies the displayed language as the user's native language and proceeds to step S17.
If the cancel button is pressed, the language extracted based on the voice information (excluding the language displayed on the native language confirmation screen) and its similarity are temporarily stored in the storage unit 6 and the process proceeds to step S16.

Ｓ１６、音声情報を基に抽出した言語が、利用者の母国語ではないことを認識した主制御部５は、記憶部６に一時保存した音声情報を基に抽出した言語とその類似度を読出し、これらの言語を音声情報の言語に対する類似度が高い順に並べて優先順位Ｎｐを変更し、ステップＳ７へ戻って、変更した優先順位Ｎｐに基づいた母国語の特定を継続する。
Ｓ１７、優先順位Ｎｐの言語を利用者の母国語と特定した、または音声情報を基に利用者の母国語を特定した主制御部５は、特定した母国語を記憶部６の表示言語格納エリアに格納する。 S16, Recognizing that the language extracted based on the speech information is not the user's native language, the main control unit 5 reads out the language extracted based on the speech information temporarily stored in the storage unit 6 and its similarity These languages are arranged in descending order of similarity to the language of the speech information, the priority order Np is changed, the process returns to step S7, and identification of the native language based on the changed priority order Np is continued.
In S17, the main control unit 5 that has specified the language of the priority Np as the user's native language, or has specified the user's native language based on the voice information, displays the specified native language in the display language storage area of the storage unit 6. To store.

そして、主制御部５は、ステップＳ２へ戻り、表示言語を特定した母国語に変更した図３に示す取引選択画面等を表示しながら上記の作動を継続し、ステップＳ４において、母国語で表示された取引選択画面から、利用者が所望の取引選択ボタンを押下したことを認識したときに、取引の開始を判定してステップＳ１８へ移行する。
Ｓ１８、取引の開始を判定した主制御部５は、記憶部６の表示言語格納エリアの表示言語（日本語または特定した母国語）で表示した取引画面等を用いて、取引処理プログラムにより選択された取引の取引処理を実行する。この場合の取引処理の作動は、通常の場合と同様であるのでその説明を省略する。 Then, the main control unit 5 returns to step S2 and continues the above operation while displaying the transaction selection screen shown in FIG. 3 in which the display language is changed to the specified native language, and is displayed in the native language in step S4. When it is recognized from the transaction selection screen that the user has pressed the desired transaction selection button, the start of the transaction is determined and the process proceeds to step S18.
S18, the main control unit 5 that has determined the start of the transaction is selected by the transaction processing program using a transaction screen or the like displayed in the display language (Japanese or specified native language) in the display language storage area of the storage unit 6. Execute the transaction processing of the transaction. Since the operation of the transaction process in this case is the same as in the normal case, the description thereof is omitted.

選択された取引処理の実行を終えた主制御部５は、その取引処理を終了させ、ステップＳ１へ戻って、新たな利用者の来店待ち状態で待機する。
このように、本実施例では、利用者の画像情報を用いて、その母国語の候補となる言語を複数選定し、それらの言語を可能性の高い順に並べて優先順位Ｎｐを付与し、最上位から順に音声取得誘導メッセージを報知し、取得した音声情報から母国語を推定して、その正否を利用者に確認し、推定した母国語が正しくない場合に、優先順位Ｎｐを音声情報の言語に対して類似度が高い順に並べて変更するので、現金自動預払機１による取引時に、画像情報を基に選定した利用者の母国語の可能性がある言語を用いて利用者に発話を促すことができ、利用者の母国語を特定するための音声情報を容易に取得することができると共に、取得した利用者の音声情報を用いて、母国語特定処理を迅速に収束させることができ、母国語による表示を用いた取引を行う現金自動預払機１の稼動効率を向上させることができる。 The main control unit 5 that has finished executing the selected transaction process ends the transaction process, returns to step S1, and waits in a waiting state for a new user to visit the store.
In this way, in this embodiment, using the user's image information, a plurality of languages that are candidates for the native language are selected, the languages are arranged in the order of possibility, and a priority Np is assigned. The voice acquisition guidance message is notified in order, the native language is estimated from the acquired voice information, and the correctness is confirmed with the user. If the estimated native language is not correct, the priority Np is set as the language of the voice information. On the other hand, since they are arranged and changed in descending order of similarity, the user is encouraged to speak using a language that may be the native language of the user selected based on the image information at the time of transaction by the automatic teller machine 1. It is possible to easily acquire voice information for specifying the user's native language, and to quickly converge the native language specifying process using the acquired user's voice information. Using display by It is possible to improve the operating efficiency of the automated teller machine 1 to perform the pull.

また、音声では報知しない操作文言を、音声取得誘導画面に表示するようにしたことによって、外国人利用者が読解可能な言語を認識することができ、少なくとも取引に支障のない言語を利用者の母国語と特定して、母国語特定処理を迅速に収束させることができる。
更に、母国語の正否の確認を、正否を表す図形で表示したボタンを用いて行うので、表示した母国語が間違っていた場合や、利用者が誤って音声取得誘導画面の確認ボタンを押下した場合においても、利用者は戸惑うことなく、母国語の正否の入力を正確、かつ迅速に行うことができる。 In addition, by displaying the operation text that is not notified by voice on the voice acquisition guidance screen, it is possible to recognize a language that foreign users can read, and at least to select a language that does not hinder the transaction. By identifying the native language, the native language identification process can be quickly converged.
In addition, since the correctness of the native language is confirmed using a button displayed with a graphic indicating whether it is correct or not, if the displayed native language is incorrect or the user accidentally pressed the confirmation button on the voice acquisition guidance screen Even in this case, the user can input the correct / incorrect of the native language accurately and promptly without being confused.

以上説明したように、本実施例では、利用者の画像情報の人的特徴から、利用者の母国語の候補となる複数の言語を選定し、その複数の言語を、利用者の母国語となる可能性の高い順に並べて優先順位を付与して、優先順位の最上位から順に、当該言語による音声取得誘導メッセージを報知するようにしたことによって、現金自動預払機による取引時に、利用者の母国語の可能性がある言語を用いて利用者に発話を促すことができ、利用者の母国語を特定するための音声情報を容易に取得することができる。 As described above, in this embodiment, a plurality of languages that are candidates for the user's native language are selected from the human characteristics of the user's image information, and the plurality of languages are defined as the user's native language. In order from the highest priority, the priority is given and the voice acquisition guidance messages in the language are notified in order from the highest priority. The user can be prompted to speak using a language that may be a national language, and voice information for specifying the user's native language can be easily acquired.

また、音声取得誘導メッセージに応答した利用者の音声情報を取得し、その音声情報の言語的特徴から利用者の母国語を推定して、推定した母国語の正否を確認し、推定した母国語が正しくない場合に、優先順位を音声情報の言語に対して類似度が高い順に並べて変更するようにしたことによって、取得した利用者の音声情報を用いて、母国語の特定処理を迅速に収束させることができ、母国語による表示を用いた取引を行う現金自動預払機の稼動効率を向上させることができる。 Also, the user's voice information in response to the voice acquisition guidance message is acquired, the user's native language is estimated from the linguistic characteristics of the voice information, the correctness of the estimated native language is confirmed, and the estimated native language If the language is not correct, the priority order is changed in order of similarity to the language of the speech information, and the native language identification processing is quickly converged using the acquired speech information of the user. It is possible to improve the operating efficiency of the automatic teller machine that performs transactions using the display in the native language.

図５は実施例２の現金自動預払機を示すブロック図、図６は実施例１のサービス提供処理を示すフローチャートである。
なお、上記実施例１と同様の部分は、同一の符号を付してその説明を省略する。
２１は印刷部であり、操作表示部７の表示画面に表示された母国語による地域情報等のサービス情報をハードコピー等により印刷する機能を有するプリンタを備えている。 FIG. 5 is a block diagram illustrating an automatic teller machine according to the second embodiment, and FIG. 6 is a flowchart illustrating service providing processing according to the first embodiment.
In addition, the same part as the said Example 1 attaches | subjects the same code | symbol, and abbreviate | omits the description.
Reference numeral 21 denotes a printing unit which includes a printer having a function of printing service information such as region information in the native language displayed on the display screen of the operation display unit 7 by hard copy or the like.

なお、このサービス情報の印刷は、カード取扱部８のレシート印刷機能を用いて印刷するようにしてもよい。
２３はサービス情報データベースであり、交通機関の経路やその発車時刻、所要時間、運賃等に関する経路情報、特定の地域の名所情報や宿情報、店情報等に関する地域情報、目的地までの地図や指定場所からの相対的な位置等に関する場所情報、ツアー情報やチケット情報等に関する娯楽情報等からなるサービス情報を格納している。 The service information may be printed using the receipt printing function of the card handling unit 8.
23 is a service information database, which includes route information on transportation routes, departure time, required time, fare, etc., local information on sights and inn information of specific areas, store information, etc., maps to destinations and designation Stored is service information including location information relating to a relative position from the location, entertainment information relating to tour information, ticket information, and the like.

なお、これらのサービス情報は、常に最新の情報に更新される。
上記の現金自動預払機１の記憶部６には、上記実施例１と同様の、取引処理プログラムおよび母国語特定処理プログラム等に加えて、利用者の要求に応じて、特定した母国語等の表示言語で、サービス情報データベース２３のサービス情報を基に、道案内およびチケットの予約とその代金支払等のサービスを提供するサービス提供処理を行う機能等を有するアプリケーションプログラムを有する業務処理実行プログラムが予め格納されており、主制御部５が実行する業務処理実行プログラムのステップにより本実施例の現金自動預払機１のハードウェアとしての各機能手段が形成される。 Note that the service information is always updated to the latest information.
In the storage unit 6 of the automatic teller machine 1 described above, in addition to the transaction processing program and the native language specifying processing program, etc., similar to the first embodiment, the specified native language, etc. according to the user's request A business process execution program having an application program having a function of performing a service providing process for providing services such as route guidance and ticket reservation and payment based on the service information in the service information database 23 in a display language is previously provided. Each function means as hardware of the automatic teller machine 1 of this embodiment is formed by the steps of the business process execution program stored and executed by the main control unit 5.

また、記憶部６には、上記実施例１と同様に、設置場所言語、類似判定値が予め格納される他、表示言語格納エリア、優先順位カウントエリアが確保されている。
以下に、図６に示すフローチャートを用い、ＳＡで示すステップに従って本実施例のサービス提供処理について説明する。
なお、本実施例の母国語特定処理の作動は、上記実施例１の作動と同様であるのでその説明を省略する。 Further, as in the first embodiment, the storage location language and the similarity determination value are stored in the storage unit 6 in advance, and a display language storage area and a priority order count area are secured.
The service providing process according to the present embodiment will be described below according to the steps indicated by SA using the flowchart shown in FIG.
The operation of the native language specifying process of this embodiment is the same as the operation of the first embodiment, and a description thereof will be omitted.

この場合に、ステップＳ２において表示される日本語の取引選択画面は、図３に代えて図７に示す、道案内のサービス提供のための「道案内」ボタン、チケットを予約しその代金を支払うサービス提供のための「チケット購入」ボタン等の日本語で表示されたサービス選択ボタンが追加された取引選択画面が用いられる。
本実施例では、上記実施例１の母国語特定処理のステップＳ４において、図７に示す各ボタンの表示を特定した母国語とした取引選択画面を表示したときに、外国人利用者が「道案内」ボタンを押下し、ステップＳ１８において、そのサービス提供処理が実行される場合について説明する。 In this case, the transaction selection screen in Japanese displayed in step S2 reserves and pays for a "way guide" button and ticket for providing a route guidance service shown in FIG. 7 instead of FIG. A transaction selection screen to which a service selection button displayed in Japanese such as a “ticket purchase” button for providing a service is added is used.
In the present embodiment, in step S4 of the native language specifying process of the first embodiment, when the transaction selection screen with the native language specifying the display of each button shown in FIG. A case where the “guidance” button is pressed and the service providing process is executed in step S18 will be described.

このため、記憶部６の表示言語格納エリアには、特定した母国語が格納されている。
ＳＡ１、外国人利用者が押下したサービス選択ボタンをタッチパネルからの出力信号等により道案内と認識した主制御部５は、認識した道案内のサービス提供処理を実行するために、ステップＳＡ２へ移行する。
ＳＡ２、外国人利用者の選択したサービスを道案内と認識した認識した主制御部５は、記憶部６の表示言語格納エリアに格納されている表示言語（特定した母国語）を読出し、その表示言語を基に表示情報データベース１５から表示言語による図８に示す道案内のサービス情報選択画面の画面情報を読出し、これを操作表示部７の表示画面に表示する。 For this reason, the specified native language is stored in the display language storage area of the storage unit 6.
SA1, the main control unit 5 that recognizes the service selection button pressed by the foreign user as the route guidance by the output signal from the touch panel, etc., proceeds to Step SA2 in order to execute the recognized route guidance service providing process. .
SA2, the recognized main control unit 5 recognizing the service selected by the foreign user as a route guide reads the display language (specified native language) stored in the display language storage area of the storage unit 6 and displays it. Based on the language, the screen information of the service information selection screen for the route guidance shown in FIG. 8 in the display language is read from the display information database 15 and displayed on the display screen of the operation display unit 7.

道案内のサービス情報選択画面には、情報選択ボタンの押下を促す旨の文言、および現金自動預払機１の設置場所である現在地の地域情報の情報提供を受けるための「現在地情報」ボタン、目的地の地域情報等の情報提供を受けるための「目的地情報」ボタン、ホテル等の宿を予約しその代金を支払うサービスの情報提供を受けるための「予約」ボタン等情報選択ボタンが、特定した母国語で表示される。 On the service information selection screen for directions, there is a message prompting the user to press the information selection button, and a “current location information” button for receiving information on the location information of the current location where the automatic teller machine 1 is installed. Information selection buttons such as “Destination Information” button for receiving information such as local area information, “Reservation” button for receiving information on services for booking hotels and paying for it, etc. have been identified Displayed in your native language.

外国人利用者は、所望の情報選択ボタンを押下する。
ＳＡ３、主制御部５は、情報選択ボタンの押下を待って待機しており、「現在地情報」ボタンの押下を認識したときに、ステップＳＡ４へ移行する。その他の場合はステップＳＡ５へ移行する。
ＳＡ４、「現在地情報」ボタンの押下を認識した主制御部５は、サービス情報データベース２３を検索して、現在地の地域情報を読出し、これを記憶部６の表示言語格納エリアの表示言語に翻訳し、読出した地域情報と確認ボタン等を特定した母国語で表示した地域情報画面を操作表示部７の表示画面に表示する。 The foreign user presses a desired information selection button.
SA3, the main control unit 5 waits for the information selection button to be pressed, and moves to step SA4 when it recognizes that the “current location information” button has been pressed. In other cases, the process proceeds to step SA5.
SA 4, the main control unit 5 that has recognized that the “current location information” button has been pressed, searches the service information database 23, reads the current location area information, and translates it into the display language in the display language storage area of the storage unit 6. Then, the read area information and the area information screen displayed in the native language specifying the confirmation button and the like are displayed on the display screen of the operation display unit 7.

外国人利用者は、表示された内容を確認して確認ボタンを押下し、主制御部５は、確認ボタンの押下を認識したときに、ステップＳＡ１０へ移行する。
ＳＡ５、主制御部５は、情報選択ボタンの押下を待って待機しており、「目的地情報」ボタンの押下を認識したときに、ステップＳＡ６へ移行する。その他の場合はステップＳＡ７へ移行する。 The foreign user confirms the displayed content and presses the confirmation button. When the main control unit 5 recognizes that the confirmation button has been pressed, the process proceeds to step SA10.
SA5, the main control unit 5 waits for the information selection button to be pressed, and moves to step SA6 when it recognizes that the “destination information” button has been pressed. In other cases, the process proceeds to step SA7.

ＳＡ６、「目的地情報」ボタンの押下を認識した主制御部５は、表示言語を基に表示情報データベース１５から表示言語による目的地入力画面の画面情報を読出し、これを操作表示部７の表示画面に表示し、外国人利用者はプルダウンメニュー等により所望の目的地を入力する。
目的地を認識した主制御部５は、表示言語を基に表示情報データベース１５から表示言語による目的地情報選択画面の画面情報を読出し、場所情報、経路情報、地域情報の選択ボタンを表示した目的地情報選択画面を操作表示部７の表示画面に表示する。 SA 6, the main control unit 5 that has recognized the pressing of the “destination information” button reads the screen information of the destination input screen in the display language from the display information database 15 based on the display language, and displays this on the display of the operation display unit 7. The foreign user inputs a desired destination using a pull-down menu or the like.
The main control unit 5 that has recognized the destination reads the screen information of the destination information selection screen in the display language from the display information database 15 based on the display language, and displays the destination information, route information, and region information selection buttons. The ground information selection screen is displayed on the display screen of the operation display unit 7.

外国人利用者は、所望の選択ボタン、例えば場所情報の選択ボタンを押下する。
場所情報の選択ボタンの押下を認識した主制御部５は、サービス情報データベース２３を検索して、目的地までの場所情報を読出して表示言語に翻訳し、読出した目的地までの地図や指定場所からの相対的な位置等の場所情報と確認ボタン等を特定した母国語で表示した場所情報画面を操作表示部７の表示画面に表示する。 The foreign user presses a desired selection button, for example, a place information selection button.
Recognizing that the location information selection button has been pressed, the main control unit 5 searches the service information database 23, reads the location information up to the destination, translates it into the display language, and displays the map and the designated location up to the readout destination. The location information screen displaying the location information such as the relative position from and the native language in which the confirmation button is specified is displayed on the display screen of the operation display unit 7.

外国人利用者は、表示された内容を確認して確認ボタンを押下し、主制御部５は、確認ボタンの押下を認識したときに、ステップＳＡ１０へ移行する。
ＳＡ７、主制御部５は、情報選択ボタンの押下を待って待機しており、「予約」ボタンの押下を認識したときに、ステップＳＡ８へ移行する。その他の場合はステップＳＡ２へ戻り、サービス情報表示画面を表示しながら、ステップＳＡ３、ＳＡ５、ＳＡ７の待機を継続する。 The foreign user confirms the displayed content and presses the confirmation button. When the main control unit 5 recognizes that the confirmation button has been pressed, the process proceeds to step SA10.
SA7, the main control unit 5 waits for the information selection button to be pressed, and moves to step SA8 when it recognizes that the “reservation” button has been pressed. In other cases, the process returns to step SA2, and the standby of steps SA3, SA5, and SA7 is continued while displaying the service information display screen.

ＳＡ８、「予約」ボタンの押下を認識した主制御部５は、表示言語を基に表示情報データベース１５から表示言語による目的地入力画面の画面情報を読出し、これを操作表示部７の表示画面に表示し、外国人利用者はプルダウンメニュー等により所望の目的地を入力する。
目的地を認識した主制御部５は、サービス情報データベース２３を検索して、目的地の地域情報から宿情報や店情報を、娯楽情報から目的地を出発場所とするツアー情報や目的地に存在する劇場等のチケット情報を読出して表示言語に翻訳すると共に、その中から外国人利用者に特化した情報、例えば表示言語を母国語とする経営者が経営する宿や店、表示言語に対応している宿や店、ツアー等の情報を抽出し、これに言語対応マーク（例えば◎や赤色表示）を付与し、これらの予約情報とそれぞれの選択ボタンを特定した母国語で表示した予約情報画面を操作表示部７の表示画面に表示する。 SA 8, the main control unit 5 that has recognized the pressing of the “reservation” button reads the screen information of the destination input screen in the display language from the display information database 15 based on the display language, and displays this on the display screen of the operation display unit 7. The foreign user inputs a desired destination using a pull-down menu or the like.
Recognizing the destination, the main control unit 5 searches the service information database 23 and presents the hotel information and the shop information from the destination area information, and the tour information and the destination from the entertainment information as the departure place. Reads and translates ticket information for theaters etc. into display language, and also supports information specialized for foreign users, for example, inns, shops and display languages managed by managers whose native language is the display language Reservation information that is extracted in the native language that extracts information such as lodgings, shops, tours, etc., and adds language support marks (for example, ◎ or red display), and identifies these reservation information and each selection button The screen is displayed on the display screen of the operation display unit 7.

外国人利用者は、所望の予約情報を選択して、例えば所望の宿の選択ボタンを押下する。
宿の選択ボタンの押下を認識した主制御部５は、その予約情報の詳細（宿泊可能日、空き部屋数や広さ、ランク等）と宿泊予定日、日数、人数、部屋のランク等の入力欄等を特定した母国語で表示した予約入力画面を表示し、外国人利用者が宿泊予定日等を入力すると、主制御部５はこれを基に宿泊代金を算出し、この代金と確認ボタン、取消ボタンを特定した母国語で表示した代金支払画面を表示し、外国人利用者が確認ボタンをすると、これを認識した主制御部５は、取引カードまたは現金による振込取引処理を実行し、代金支払取引が終了すると、印刷部２１により、「代済み」の証明印を捺印した当該宿の予約券を発行する。 The foreign user selects desired reservation information and presses a selection button for a desired hotel, for example.
Recognizing that the hotel selection button has been pressed, the main control unit 5 inputs details of the reservation information (accommodation date, number of available rooms, size, rank, etc.), planned stay date, number of days, number of people, room rank, etc. When the reservation input screen is displayed in the native language specifying the fields, etc., and the foreign user enters the expected stay date, etc., the main control unit 5 calculates the accommodation price based on this, and this price and confirmation button When the foreign user clicks the confirmation button, the main control unit 5 that recognizes this displays the payment transaction screen displayed in the native language in which the cancel button is specified, and executes a transaction transaction process using a transaction card or cash, When the price payment transaction is completed, the printing unit 21 issues a reservation ticket for the inn with the “sent” certificate stamped.

主制御部５は、外国人利用者の予約券の受取りを認識したときに、ステップＳＡ１０へ移行する。
ＳＡ１０、主制御部５は、表示情報データベース１５から表示言語による印刷要否指示画面の画面情報を読出し、表示した情報を印刷するときの「印刷」ボタン、表示した情報を印刷しないときの「取消」ボタン等を表示した印刷要否指示画面を操作表示部７の表示画面に表示し、外国人利用者は、表示した情報を印刷するときは「印刷」ボタンを、表示した情報を印刷しないときは「取消」ボタンを押下する。 When the main control unit 5 recognizes receipt of the reservation ticket of the foreign user, the main control unit 5 proceeds to Step SA10.
SA 10, the main control unit 5 reads the screen information of the print necessity instruction screen in the display language from the display information database 15, “Print” button when printing the displayed information, “Cancel” when not printing the displayed information The “Needs to print” instruction screen is displayed on the display screen of the operation display unit 7, and a foreign user prints the displayed information by pressing the “Print” button, and does not print the displayed information. Press the “Cancel” button.

主制御部５は、「印刷」ボタンの押下を認識したときは、表示情報の印刷が必要と判定してステップＳＡ１１へ移行する。
「取消」ボタンの押下を認識した場合は、サービス提供処理を終了させ、実施例１のステップＳ１へ戻って、新たな利用者の来店待ち状態で待機する。
ＳＡ１１、表示情報の印刷が必要と判定した主制御部５は、印刷部２１により、道案内のサービス情報選択画面から選択された情報選択ボタンにより表示したサービス情報の表示画面のハードコピーを作成して排出する。 When the main control unit 5 recognizes that the “print” button has been pressed, it determines that display information needs to be printed, and proceeds to step SA11.
If it is recognized that the “Cancel” button has been pressed, the service providing process is terminated, the process returns to Step S1 of the first embodiment, and waits for a new user to wait for a visit.
In step SA11, the main control unit 5 that has determined that the display information needs to be printed creates a hard copy of the service information display screen displayed by the information selection button selected from the service information selection screen for the route guidance. To discharge.

この場合に、選択された情報選択ボタンが「予約」ボタンのときは、予約された宿等への地図等が印刷される。
主制御部５は、外国人利用者の受取りを認識したときに、サービス提供処理を終了させ、実施例１のステップＳ１へ戻って、新たな利用者の来店待ち状態で待機する。
以上説明したように、本実施例では、推定した母国語が正しい場合に、その母国語によるサービスを提供するので、母国語が通じない国へ行った旅行者や留学生、出張者等の外国人利用者が、見知らぬ土地で、現地の人に目的地への道順を尋ねることや、電話でホテルの予約等を行うことおよびその代金の支払うこと等を、現地の言葉での会話や、現地の知識の習得等の事前の準備をすることなく、現金自動預払機を用いて外国人利用者の母国語で行うことができ、外国人利用者の不安感を払拭して、その利便性を向上させることができる。 In this case, when the selected information selection button is a “reservation” button, a map or the like to the reserved accommodation is printed.
When the main control unit 5 recognizes the receipt of the foreign user, the main control unit 5 ends the service providing process, returns to step S1 of the first embodiment, and waits in a waiting state for a new user.
As explained above, in this embodiment, when the estimated native language is correct, a service in the native language is provided, so foreigners such as travelers, international students, business travelers, etc. who went to countries where the native language is not understood Users can ask local people for directions to their destinations, make hotel reservations over the phone and pay for the charges, etc. It can be done in the native language of a foreign user using an automated teller machine without prior knowledge acquisition, etc., eliminating the anxiety of the foreign user and improving its convenience Can be made.

また、予約情報等のサービス情報を表示するときに、外国人利用者に特化した情報に言語対応マークを付与して表示するので、外国人利用者は、安心して利用することができる宿等を容易に選択することができる。
なお、上記各実施例においては、画像情報と音声情報を基にして外国人利用者の母国語を推定するとして説明したが、これらを基に利用者の年齢および性別を推定するようにしてもよい。この場合に、予め年齢層や性別に対応させた取引モードを設定しておき、推定した年齢、性別に応じて取引モードを切替えるようにすれば、高齢者のニーズに沿った取引や、個人に対応したサービスを提供することができ、よりグローバルな環境に適応できるシステムを構築することができる他、推定した年齢や性別を店舗の設置場所や時間帯の別に集計しておけば、把握した客層に応じて店舗毎の時間帯毎に、提供するサービスや広告を変更して客層に対応したサービスを提供することができる。 In addition, when displaying service information such as reservation information, information specific to foreign users is displayed with a language mark so that foreign users can use it with peace of mind. Can be easily selected.
In each of the above embodiments, the foreign language user's native language is estimated based on image information and audio information. However, the user's age and gender may be estimated based on these information. Good. In this case, if a transaction mode corresponding to the age group and gender is set in advance, and the transaction mode is switched according to the estimated age and gender, the transaction according to the needs of the elderly and individuals In addition to being able to provide a compatible service and building a system that can adapt to a more global environment, the estimated age and gender can be aggregated according to the location and time of the store and the customer base understood Accordingly, it is possible to provide services corresponding to the customer base by changing the services and advertisements provided for each time zone of each store.

この場合に、パーソナルコンピュータ等の情報端末に、年齢および性別の推定処理を適用すれば、年齢および性別に応じた情報表示の切替えを行うことができる。
また、上記各実施例においては、画像情報の人的特徴から利用者の母国語の候補となる複数の言語を選定するとして説明したが、現金自動預払機の設置場所に応じて、複数の言語、例えば５〜１０言語を予め設定しておき、設定された全ての言語について、画像情報の人的特徴から可能性の高い順に優先順位を付与するようにしてもよい。このようにすれば表示情報データベースの容量を削減することが可能になる。 In this case, if age and sex estimation processing is applied to an information terminal such as a personal computer, information display can be switched according to age and sex.
Further, in each of the above embodiments, it has been described that a plurality of languages that are candidates for the user's native language are selected from the human characteristics of the image information, but depending on the location of the automatic teller machine, a plurality of languages For example, 5 to 10 languages may be set in advance, and priority may be assigned to all the set languages in descending order of possibility from the human characteristics of the image information. In this way, the capacity of the display information database can be reduced.

更に、上記各実施例においては、利用者の母国語特定処理を適用する自動取引装置は現金自動預払機であるとして説明したが、自動取引装置は前記に限らず、空港等の外国人利用者が到着する場所に設置する案内情報端末等に本発明の母国語特定処理を適用しても同様の効果を得ることができる。 Furthermore, in each said Example, although demonstrated that the automatic transaction apparatus which applies a user's native language specific process was an automatic teller machine, an automatic transaction apparatus is not restricted to the above, Foreign users, such as an airport The same effect can be obtained even if the native language specifying process of the present invention is applied to a guidance information terminal or the like installed at a place where the character arrives.

実施例１の現金自動預払機を示すブロック図The block diagram which shows the automatic teller machine of Example 1 実施例１の母国語特定処理を示すフローチャートThe flowchart which shows the native language specific process of Example 1 実施例１の日本語の取引選択画面の表示例を示す説明図Explanatory drawing which shows the example of a display of the Japanese transaction selection screen of Example 1. 実施例１の母国語確認画面の表示例を示す説明図Explanatory drawing which shows the example of a display of the native language confirmation screen of Example 1. 実施例２の現金自動預払機を示すブロック図The block diagram which shows the automatic teller machine of Example 2 実施例２のサービス提供処理を示すフローチャートFlowchart illustrating service providing processing according to the second embodiment. 実施例２の日本語の取引選択画面の表示例を示す説明図Explanatory drawing which shows the example of a display of the Japanese transaction selection screen of Example 2. 実施例２の道案内のサービス情報選択画面の表示例を示す説明図Explanatory drawing which shows the example of a display of the service information selection screen of the route guidance of Example 2.

Explanation of symbols

１現金自動預払機
２ホストコンピュータ
３通信回線
５主制御部
６記憶部
７操作表示部
８カード取扱部
９通帳取扱部
１０入出金部
１２画像情報取得部
１３音声情報取得部
１５表示情報データベース
２１印刷部
２３サービス情報データベース DESCRIPTION OF SYMBOLS 1 Cash dispenser 2 Host computer 3 Communication line 5 Main control part 6 Memory | storage part 7 Operation display part 8 Card handling part 9 Passbook handling part 10 Deposit / withdrawal part 12 Image information acquisition part 13 Voice information acquisition part 15 Display information database 21 Print Part 23 Service Information Database

Claims

In an automatic transaction device that automatically performs transactions with users,
Means for obtaining user image information;
From the human characteristics of the image information, a plurality of languages are arranged in descending order of the possibility of becoming the user's native language, and a priority is given;
An automatic transaction apparatus comprising: means for informing voice acquisition guidance messages in the language in order from the highest priority.

In an automatic transaction device that automatically performs transactions with users,
Means for obtaining user image information;
Means for selecting a plurality of languages that are candidates for the user's native language from the human characteristics of the image information;
Arranging the plurality of selected languages in order of high possibility of becoming a user's native language, and assigning priority;
An automatic transaction apparatus comprising: means for informing voice acquisition guidance messages in the language in order from the highest priority.

In claim 1 or claim 2,
Means for acquiring voice information of the user in response to the voice acquisition guidance message;
Means for estimating the user's native language from the voice information;
Means for confirming the correctness of the estimated native language;
An automatic transaction apparatus comprising: means for changing the order of priority in descending order of similarity to the language of the voice information when the native language is not correct.

In claim 3,
An automatic transaction apparatus comprising means for performing a transaction in the native language when the native language is correct.

In claim 3,
An automatic transaction apparatus comprising means for providing a service in the native language when the native language is correct.