JP6243071B1 - Communication content translation processing method, communication content translation processing program, and recording medium - Google Patents

Communication content translation processing method, communication content translation processing program, and recording medium Download PDF

Info

Publication number
JP6243071B1
JP6243071B1 JP2017073698A JP2017073698A JP6243071B1 JP 6243071 B1 JP6243071 B1 JP 6243071B1 JP 2017073698 A JP2017073698 A JP 2017073698A JP 2017073698 A JP2017073698 A JP 2017073698A JP 6243071 B1 JP6243071 B1 JP 6243071B1
Authority
JP
Japan
Prior art keywords
data
language
translation
basic
voice
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2017073698A
Other languages
Japanese (ja)
Other versions
JP2018180590A (en
Inventor
旋造 田代
旋造 田代
Original Assignee
旋造 田代
旋造 田代
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 旋造 田代, 旋造 田代 filed Critical 旋造 田代
Priority to JP2017073698A priority Critical patent/JP6243071B1/en
Application granted granted Critical
Publication of JP6243071B1 publication Critical patent/JP6243071B1/en
Priority to PCT/JP2018/014317 priority patent/WO2018186416A1/en
Publication of JP2018180590A publication Critical patent/JP2018180590A/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F13/00Interconnection of, or transfer of information or other signals between, memories, input/output devices or central processing units
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16Sound input; Sound output
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L13/00Speech synthesis; Text to speech systems
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M11/00Telephonic communication systems specially adapted for combination with other electrical systems

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Multimedia (AREA)
  • Computational Linguistics (AREA)
  • General Engineering & Computer Science (AREA)
  • Acoustics & Sound (AREA)
  • General Physics & Mathematics (AREA)
  • Signal Processing (AREA)
  • General Health & Medical Sciences (AREA)
  • Telephonic Communication Services (AREA)
  • Information Transfer Between Computers (AREA)
  • Telephone Function (AREA)
  • Machine Translation (AREA)

Abstract

【課題】翻訳のバリエーションを多機能化し得て汎用性を向上することができる通信内容翻訳処理方法を提供すること。【解決手段】基本言語と他言語との相互翻訳を実行する翻訳アプリケーションを予めインストールした記憶手段を有する通信端末を用い、基本言語による音声データ又はテキストデータの少なくとも何れか一方の入力を発信基準データとして受け付け、翻訳アプリケーションを起動させて、受け付けた発信基準データを他言語の音声データ及びテキストデータに翻訳して発信データを生成し、翻訳した発信データを電気通信回線を通じて発信し、他言語による音声データ又はテキストデータを電気通信回線を通じて受信基準データとして受信し、翻訳アプリケーションを起動させて受信した受信基準データを基本言語による音声データ及びテキストデータに翻訳して受信データを生成し、翻訳した受信データを出力手段を介して出力する。【選択図】図4Provided is a communication content translation processing method capable of making a variation of translation multifunctional and improving versatility. SOLUTION: Using a communication terminal having a storage means preinstalled with a translation application for performing mutual translation between a basic language and another language, at least one of speech data and text data in the basic language is input as transmission reference data , Start the translation application, translate the received transmission reference data into voice data and text data in other languages, generate transmission data, send the translated transmission data through the telecommunication line, Receives data or text data as reception standard data through a telecommunication line, starts a translation application, translates the received standard data into speech data and text data in a basic language, generates reception data, and translates the received data Is output via the output means. [Selection] Figure 4

Description

本発明は、電気通信回線を通じて相互通信している際に、基本言語と他言語とで相互翻訳するための通信内容翻訳処理方法、通信内容翻訳処理プログラム、及び、記録媒体に関する。   The present invention relates to a communication content translation processing method, a communication content translation processing program, and a recording medium for performing mutual translation between a basic language and another language during mutual communication through an electric communication line.

従来、電話回線を通じた通話(会話)や、インターネット回線を通じたチャット或はE−Mailによる往復書簡など、電気通信回線を通じて相互通信している際に双方の言語が異なっている場合に、内容の理解のために翻訳する各種翻訳機能が周知である。   Conventionally, when two languages are different when communicating with each other through a telecommunication line, such as a call (conversation) through a telephone line, a chat through an internet line, or a round-trip letter by E-Mail. Various translation functions for translating for understanding are well known.

この際、対面した相互会話の場合、一方が翻訳機を持参していれば、互いの言語が異なりかつ相手方の言語に対する語学力を有していなくても会話を成立させ、コミュニケーションをとることが可能である。   In this case, in the case of face-to-face conversations, if one of them has a translator, it is possible to establish a conversation and communicate even if they do not have language skills for the other party's language. Is possible.

一方、受信から返信までに時間的な余裕があり、その間に翻訳を行うことができるE−Mail等とは異なり、通話やチャット(各種SNSのタイムライン等を含む)などのように、即時性を有する相互通信では、発信側における基本言語から他言語への翻訳と、受信時における他言語から基本言語への翻訳、の2通りを実現する必要がある。   On the other hand, unlike E-Mail etc., where there is a time lag between receiving and replying, and translation can be performed during that time, such as calls and chats (including timelines of various SNSs), etc. It is necessary to realize two kinds of communication, that is, translation from a basic language to another language on the transmission side and translation from another language to the basic language at the time of reception.

そこで、相互に翻訳機(翻訳機能)を有していなくても、一方側で発信時の他言語化と受信時の基本言語化とを実現するために、音声を聞き取ってテキストデータ化したうえで翻訳後のテキストデータを生成し、そのテキストデータをさらに音声に読み上げることにより、リアルタイムに近い通話を可能とした技術が知られている(例えば、特許文献1参照、)。   Therefore, even if they do not have a translator (translation function), they can listen to the voice and convert it into text data in order to realize a different language when sending and a basic language when receiving. A technique is known in which translated text data is generated and the text data is further read aloud to enable near real-time communication (see, for example, Patent Document 1).

特表2005−513619号公報JP 2005-513619 A

しかしながら、特許文献1に開示の翻訳機は、音声通話時における聞き取りと読み上げとを実現する同時通訳の範疇に過ぎず、汎用性が低いという問題が生じていた。   However, the translator disclosed in Patent Document 1 is merely a category of simultaneous interpretation that realizes listening and reading at the time of a voice call, and has a problem of low versatility.

本発明は、翻訳のバリエーションを多機能化し得て汎用性を向上することができる通信内容翻訳処理方法、通信内容翻訳処理プログラム、及び、記録媒体を提供することを目的とする。   SUMMARY OF THE INVENTION An object of the present invention is to provide a communication content translation processing method, a communication content translation processing program, and a recording medium that can increase the versatility by making the translation variations multifunctional.

上記目的を達成するため、請求項1記載の発明にあっては、基本言語と他言語との相互翻訳を実行する翻訳アプリケーションを予めインストールした記憶手段を有する1つの通信端末に実行させるステップとして、前記基本言語による音声データ又はテキストデータの少なくとも何れか一方の入力を入力手段を介して発信基準データとして受け付ける通信内容受付ステップと、前記翻訳アプリケーションを起動させて、前記通信内容受付ステップで受け付けた前記発信基準データを前記他言語の音声データ及びテキストデータに翻訳して発信データを生成する他言語化翻訳ステップと、前記他言語化翻訳ステップで翻訳した前記発信データを電気通信回線を通じて発信手段により発信する発信ステップと、前記他言語による音声データ又はテキストデータを前記電気通信回線を通じて受信手段により受信基準データとして受信する受信ステップと、前記翻訳アプリケーションを起動させて前記受信ステップで受信した前記受信基準データを前記基本言語による音声データ及びテキストデータに翻訳して受信データを生成する基本言語化翻訳ステップと、前記基本言語化翻訳ステップで翻訳した前記受信データを出力手段を介して出力する通信内容出力ステップと、を備えるものである。 In order to achieve the above object, in the invention described in claim 1 , as a step of causing a single communication terminal having a storage unit, in which a translation application for performing mutual translation between a basic language and another language is installed, to be executed , The communication content accepting step of accepting at least one input of voice data or text data in the basic language as transmission reference data via the input means, and the translation application accepting the activation of the translation application and accepting in the communication content accepting step Translating the transmission reference data into voice data and text data in another language to generate transmission data, and transmitting the transmission data translated in the other language translation step by a transmission means through an electric communication line And transmitting the voice data or text in the other language. A receiving step for receiving a list data as reception reference data by the receiving means through the telecommunication line, and translating the reception reference data received in the receiving step by starting the translation application into speech data and text data in the basic language A basic language translation step for generating received data, and a communication content output step for outputting the received data translated in the basic language translation step through an output means.

請求項2記載の発明にあっては、前記他言語化翻訳ステップを実行させる前に、前記記憶手段に予め登録した通信相手先の登録名を含むアドレスデータに基づいて翻訳対象となる前記他言語を特定する他言語特定ステップと、を備えるものである。   In the invention of claim 2, before executing the other language translation step, the other language to be translated based on address data including a registered name of a communication partner registered in advance in the storage means And a different language specifying step for specifying.

請求項3記載の発明にあっては、前記入力手段により受け付けた前記発信基準データが前記基本言語による音声データである場合に、前記記憶手段に予めインストールした聞き取りアプリケーションを起動させて、前記他言語によるテキストデータからなる前記発信データを生成するための前記基本言語による基本テキストデータを生成する基本テキストデータ生成ステップと、を備えるものである。   In the invention according to claim 3, when the transmission reference data received by the input means is voice data in the basic language, the listening application installed in advance in the storage means is activated to execute the other language. A basic text data generating step for generating basic text data in the basic language for generating the outgoing data composed of text data according to the above.

請求項4記載の発明にあっては、前記入力手段により受け付けた前記発信基準データが前記基本言語によるテキストデータである場合に、前記記憶手段に予めインストールした読み上げアプリケーションを起動させて、前記他言語による音声データからなる前記発信データを生成するための前記基本言語による基本音声データを生成する基本音声データ生成ステップと、を備えるものである。   In the invention according to claim 4, when the transmission reference data received by the input means is text data in the basic language, a reading application installed in advance in the storage means is started and the other language is started. A basic voice data generation step of generating basic voice data in the basic language for generating the outgoing data composed of voice data according to.

請求項5記載の発明にあっては、前記入力手段により受け付けた前記発信基準データが前記基本言語によるテキストデータである場合に、前記他言語化翻訳ステップで翻訳した前記他言語の音声データによる前記発信データに加えて前記入力手段により受け付けた前記基本言語によるテキストデータを前記発信手段により発信する発信ステップと、を備えるものである。   In the invention according to claim 5, when the transmission reference data received by the input means is text data in the basic language, the speech data in the other language translated in the other language translation step A transmission step of transmitting text data in the basic language received by the input means in addition to the transmission data by the transmission means.

請求項6記載の発明にあっては、前記入力手段が前記基本言語による音声データを受け付けてから前記他言語化翻訳ステップで翻訳した前記他言語による前記発信データを前記発信手段により発信するまでの期間は前記受信手段による受信をキャンセルする割り込みキャンセルステップと、を備えるものである。   In the invention according to claim 6, from when the input means accepts the voice data in the basic language until the outgoing data in the other language translated in the different language translation step is sent by the outgoing means. The period includes an interrupt canceling step for canceling reception by the receiving means.

請求項7記載の発明にあっては、請求項1乃至請求項6の何れか1項に記載の通信内容翻訳処理方法を通信端末の演算手段に実行させる、ものである。   In the invention according to claim 7, the communication content translation processing method according to any one of claims 1 to 6 is executed by the computing means of the communication terminal.

請求項8記載の発明にあっては、請求項1乃至請求項6の何れか1項に記載の通信内容翻訳処理方法を通信端末の演算手段に実行させる通信内容翻訳処理プログラムを記録した記録媒体である。   The invention according to claim 8 is a recording medium on which a communication content translation processing program for causing a computing means of a communication terminal to execute the communication content translation processing method according to any one of claims 1 to 6 is recorded. It is.

本発明によれば、基本言語による音声入力又はテキスト入力に対して、他言語化した後の音声データ及びテキストデータの両方を生成すると同時に、その両データを相手方に送信することができると共に、他言語による音声データ又はテキストデータの受信に対して、基本言語化した後の音声データ及びテキストデータの両方を生成すると同時に、その両データを音声及びテキストとして出力することができる。   According to the present invention, in response to voice input or text input in a basic language, both voice data and text data after being converted to another language can be generated, and at the same time, both data can be transmitted to the other party. In response to reception of speech data or text data in a language, both speech data and text data after being converted into a basic language can be generated, and at the same time, both data can be output as speech and text.

これにより、目の不自由な人や耳の不自由な人であっても、他言語による相互通信を両立させることが可能となる。また、目や耳が不自由でなくても、テキストデータを相互で有することができ、通話メモの代わりや、契約等の大事な通話時における通話内容の誤認等を抑制することが可能となる。   As a result, it is possible to achieve mutual communication in other languages even for visually handicapped people or hearing-impaired people. Moreover, even if the eyes and ears are not inconvenient, it is possible to have text data mutually, and it is possible to suppress misrecognition of the contents of a call instead of a call memo or during an important call such as a contract. .

したがって、一方側にのみ翻訳機能を有している状態であるにもかかわらず、音声及びテキストの両方のデータを有効利用することができ、翻訳のバリエーションを多機能化し得て汎用性を向上することができる。   Therefore, even if it has a translation function only on one side, both voice and text data can be used effectively, and translation variations can be made multifunctional to improve versatility. be able to.

また、他言語化翻訳ステップを実行させる前に、記憶手段に予め登録した通信相手先の登録名を含むアドレスデータに基づいて翻訳対象となる他言語を特定する他言語特定ステップを備えることにより、予め発信先或は受信元を特定するためのアドレスデータに含まれる電話番号やメールアドレス(ドメイン名)等を利用して他言語の選択・指定をすることなく、通信関係を成立させる前に国又は言語を特定して翻訳機能を有効化させることができる。   In addition, before executing the other language translation step, by providing another language identification step for identifying another language to be translated based on the address data including the registered name of the communication partner registered in advance in the storage means, Before establishing a communication relationship without selecting / designating another language using a telephone number or e-mail address (domain name) included in the address data for specifying the destination or receiver in advance, Alternatively, the language can be specified to enable the translation function.

また、入力手段により受け付けた発信基準データが基本言語による音声データである場合に、記憶手段に予めインストールした聞き取りアプリケーションを起動させて、他言語によるテキストデータからなる発信データを生成するための基本言語による基本テキストデータを生成する基本テキストデータ生成ステップを備えることにより、翻訳元となる基本言語のテキストデータを有効利用することができる。   In addition, when the transmission reference data received by the input means is voice data in a basic language, a basic language for generating transmission data composed of text data in another language by starting a listening application installed in advance in the storage means By providing the basic text data generation step for generating the basic text data according to the above, it is possible to effectively use the text data of the basic language as the translation source.

また、入力手段により受け付けた発信基準データが基本言語によるテキストデータである場合に、記憶手段に予めインストールした読み上げアプリケーションを起動させて、他言語による音声データからなる発信データを生成するための基本言語による基本音声データを生成する基本音声データ生成ステップを備えることにより、翻訳元となる基本言語のテキストデータを有効利用することができる。   In addition, when the transmission reference data received by the input means is text data in a basic language, a basic language for generating a transmission data composed of voice data in another language by starting a reading application installed in the storage means in advance. By providing the basic speech data generation step for generating the basic speech data according to the above, it is possible to effectively use the text data of the basic language as the translation source.

また、入力手段により受け付けた発信基準データが基本言語によるテキストデータである場合に、他言語化翻訳ステップで翻訳した他言語の音声データによる発信データに加えて入力手段により受け付けた基本言語によるテキストデータを発信手段により発信する発信ステップを備えることにより、翻訳元となる基本言語のテキストデータを誤訳やメモ等の代わりとして有効利用することができる。   In addition, when the transmission reference data received by the input means is text data in the basic language, the text data in the basic language received by the input means in addition to the transmission data by the speech data of other languages translated in the other language translation step By providing a sending step for sending the message by the sending means, the text data of the basic language as the translation source can be effectively used as a substitute for mistranslation or memo.

また、入力手段が基本言語による音声データを受け付けてから他言語化翻訳ステップで翻訳した他言語による発信データを発信手段により発信するまでの期間は受信手段による受信をキャンセルする割り込みキャンセルステップを備えることにより、意図的な発話完了まで相手方の音声入力を拒否することができ、会話の混濁(重なり)を抑制することができる。   In addition, an interrupt canceling step for canceling reception by the receiving means is provided during a period from when the input means accepts the voice data in the basic language to when the sending means sends the outgoing data in another language translated in the other language translation step. Thus, the voice input of the other party can be rejected until the intentional utterance is completed, and the turbidity (overlapping) of the conversation can be suppressed.

また、本発明の通信内容翻訳処理プログラムによれば、上述した通信内容翻訳処理方法を通信端末の演算手段に実行させることができる。   Further, according to the communication content translation processing program of the present invention, the communication content translation processing method described above can be executed by the computing means of the communication terminal.

本発明の記録媒体によれば、上述した通信内容翻訳処理方法を通信端末の演算手段に実行させるための通信内容翻訳処理プログラムを容易に利用することができる。   According to the recording medium of the present invention, it is possible to easily use a communication content translation processing program for causing the calculation means of the communication terminal to execute the communication content translation processing method described above.

本発明の一実施の形態に係る通信内容翻訳処理方法、通信内容翻訳処理プログラム、及び、記録媒体に係るシステム適用例を示し、(A)は通信端末に翻訳アプリケーションをインストールする一例の説明図、(B)は通信端末の要部のブロック構成図である。The communication content translation processing method according to an embodiment of the present invention, the communication content translation processing program, and a system application example related to a recording medium are shown, (A) is an explanatory diagram of an example of installing a translation application on a communication terminal, (B) is a block diagram of the main part of the communication terminal. チャット方式によるテキストデータの同時通訳例を示す説明図である。It is explanatory drawing which shows the example of simultaneous interpretation of the text data by a chat system. 基本言語による音声入力に基づく他言語化後の音声データとテキストデータとの利用例の説明図である。It is explanatory drawing of the usage example of the speech data and text data after other languages based on the speech input by a basic language. (A)は基本言語によるテキスト入力に基づく他言語化後の音声データとテキストデータとの利用例の説明図、(B)は他言語による音声入力に基づく基本言語化後の音声データとテキストデータとの利用例の説明図である。(A) is an explanatory diagram of an example of using voice data and text data after other languages based on text input in a basic language, and (B) is voice data and text data after being converted into a basic language based on voice input in another language. It is explanatory drawing of the usage example. 本発明の一実施の形態に係る制御部が実行する翻訳ルーチンの一例のフロー図である。It is a flowchart of an example of the translation routine which the control part which concerns on one embodiment of this invention performs.

次に、本発明に係る一実施の形態について図面を参照して説明する。なお、以下の説明において、例えば、図1(A)に示す通信端末1における上下左右表裏等の方向は、一般的な使用状態である図示の状態を基準として、紙面の上下左右表裏等と同じものとして説明する。   Next, an embodiment according to the present invention will be described with reference to the drawings. In the following description, for example, the directions of the top, bottom, left, and right sides of the communication terminal 1 shown in FIG. 1A are the same as the top, bottom, left, right, and back sides of the page with reference to the state shown in FIG. It will be explained as a thing.

図1(A)に示すように、通信端末1は、各種通信方式の電気通信回線NTを通じた電話機能による通話を実現するための音声入力部2及び音声出力部3と、表示機能を実現するための表示部4と、後述する通信内容翻訳処理方法を実現するための通信内容翻訳処理プログラムを含む通信端末1としての機能全般に関するプログラムを記憶した記憶部5と、記憶部5に記憶したプログラムにしたがって通信端末1の各種機能を処理する制御部(CPU)6と、を備える。   As shown in FIG. 1A, the communication terminal 1 realizes a voice input unit 2 and a voice output unit 3 for realizing a telephone call by a telephone function through various communication methods of the telecommunication line NT, and a display function. Display unit 4, a storage unit 5 that stores a program related to overall functions as communication terminal 1 including a communication content translation processing program for realizing a communication content translation processing method to be described later, and a program stored in storage unit 5 And a control unit (CPU) 6 that processes various functions of the communication terminal 1.

なお、図1(A)に示した通信端末1は、スマートフォンであるが、タブレット端末やパーソナルコンピュータ等、コンピュータ機能を有していて、音声データによる通話機能に加え、テキストデータによるチャット機能・E−Mail機能・SNS(Social Networking Service)機能等を利用することができる端末であれば特に限定されるものではない。   Note that the communication terminal 1 shown in FIG. 1A is a smartphone, but has a computer function such as a tablet terminal or a personal computer. In addition to the voice data call function, the text data chat function E -It will not be specifically limited if it is a terminal which can utilize a Mail function, a SNS (Social Networking Service) function, etc.

なお、各種通信方式には、主として無線による、電話通信回線方式、インターネット接続回線方式、赤外線やBluetooth(登録商標)等の近距離無線通信方式、等を含ませることができる。   Note that various communication methods can include mainly a telephone communication line method, an internet connection line method, a short-range wireless communication method such as infrared or Bluetooth (registered trademark), and the like.

音声入力部2は、通信端末1の下方に設けた内蔵マイク(マイクロフォン)からの音声入力を許容する。また、音声入力部2は、例えば、通信端末1の周面に設けたプタグやコネクタ(図示せず)等への接続、或は、Bluetooth(登録商標)等の近距離無線通信接続、による外部マイクからの音声入力を含ませることができる。   The voice input unit 2 allows voice input from a built-in microphone (microphone) provided below the communication terminal 1. The voice input unit 2 is connected to a tag, a connector (not shown) or the like provided on the peripheral surface of the communication terminal 1 or a short-distance wireless communication connection such as Bluetooth (registered trademark). Voice input from a microphone can be included.

音声出力部3は、通信端末1の上方に設けた内蔵スピーカからの音声出力を許容する。また、音声出力部3は、例えば、通信端末1の周面に設けたプタグやコネクタ(図示せず)等への接続、或は、Bluetooth(登録商標)等の近距離無線通信接続、による外部スピーカからの音声出力を含ませることができる。   The audio output unit 3 allows audio output from a built-in speaker provided above the communication terminal 1. The audio output unit 3 is connected to a tag, a connector (not shown) or the like provided on the peripheral surface of the communication terminal 1 or a short-distance wireless communication connection such as Bluetooth (registered trademark). Audio output from the speaker can be included.

表示部4は、カラー液晶パネル等を用いた画像表示に加え、タッチパネル方式を用いた各種操作を許容することができる。なお、ユーザによる各種操作には、表示部4を用いた所謂タッチ操作に加え、通信端末1の周面或は表面等に設けたスイッチ7による操作を含ませることができる。   The display unit 4 can allow various operations using a touch panel system in addition to image display using a color liquid crystal panel or the like. Various operations by the user can include operations by a switch 7 provided on the peripheral surface or the surface of the communication terminal 1 in addition to the so-called touch operation using the display unit 4.

したがって、以下の説明では、表示部4の表示機能に特化した説明の場合は表示部4として説明するとともに、特に限定しないタッチパネル操作及びスイッチ操作以外の操作全般は、図1(B)に示すように、制御部6に操作信号(命令信号)を出力する操作部8による操作として総称して説明する。   Therefore, in the following description, in the case of the description specialized for the display function of the display unit 4, it will be described as the display unit 4, and all operations other than the touch panel operation and the switch operation that are not particularly limited are shown in FIG. As described above, the operation by the operation unit 8 that outputs the operation signal (command signal) to the control unit 6 will be generically described.

表示部4には、例えば、電話機能を実行するための電話アイコンAP1、E−Mail機能を実行するためのE−MailアイコンAP2、チャット機能を実行するためのチャットアイコンAP3といった各種機能アイコンが表示される。   The display unit 4 displays various function icons such as a telephone icon AP1 for executing a telephone function, an E-Mail icon AP2 for executing an E-Mail function, and a chat icon AP3 for executing a chat function. Is done.

記憶部5は、所謂ROM(Read only memory)やRAM(Random access memory)であり、制御部6とでコンピュータ機能を実現する。   The storage unit 5 is a so-called ROM (Read Only Memory) or RAM (Random Access Memory), and realizes a computer function with the control unit 6.

また、記憶部5には、一次記憶等の利用形態に応じたデータの保管場所として、内部ストレージの他、各種メディアを用いた着脱可能な外部ストレージ、インターネット接続によるクラウドCを含むオンラインストレージ、等を含ませることができる。   In addition, the storage unit 5 stores internal data, removable external storage using various media, online storage including cloud C by Internet connection, etc. as a storage location for data according to the usage form such as primary storage, etc. Can be included.

また、記憶部5には、例えば、電気通信回線(インターネット接続回線)NTを通じてダウンロードした翻訳アプリケーション(以下、アプリケーションを単に「アプリ」とも称する)の実行プログラム(以下、「翻訳ドライバ」と称する場合もある)を予め記憶している。   In addition, the storage unit 5 may be referred to as an execution program (hereinafter referred to as “translation driver”) of a translation application (hereinafter simply referred to as “application”) downloaded through a telecommunication line (Internet connection line) NT, for example. Is stored in advance.

また、記憶部5には、電話機能による発呼や着呼の際に表示部4に相手先の氏名等を表示させるためのアドレス情報(アドレス帳)をテーブル方式で記憶している。   Further, the storage unit 5 stores address information (address book) for displaying the name of the other party on the display unit 4 when a call is made or received by the telephone function in a table system.

このアドレス情報には、相手先を特定するための氏名の他、電話機能であれば相手先の電話番号、インターネット接続によるE−Mail機能であれば相手先のE−Mailアドレス(ドメイン名を含む)、コミュニティ型会員制のサービスであるSNS機能であればサービス提供元への会員登録情報(個人情報保護のもとでの適正な会員公開データ)を含ませることができる。   In this address information, in addition to the name for specifying the other party, the telephone number of the other party in the case of a telephone function, and the E-Mail address (including the domain name of the other party in the case of an E-Mail function by Internet connection) ), An SNS function that is a community-based membership system service can include member registration information (appropriate member public data under personal information protection) with the service provider.

これらの個人情報は、適正かつ各機能を利用する際の必須の情報であり、かつ、国や言語を特定することができる情報となっている。   Such personal information is appropriate and indispensable information when using each function, and is information that can specify a country and a language.

図1(B)に示すように、通信端末1の制御部6は、例えば、内蔵アンテナ(図示せず)によって無線電波を受信した際の受信データを受信インターフェース(I/F)9から受信する。同様に、制御部6は、内蔵アンテナによって無線電波を送信する際の送信データを送信インターフェース(I/F)10に送信する。   As shown in FIG. 1B, the control unit 6 of the communication terminal 1 receives, from the reception interface (I / F) 9, reception data when a radio wave is received by a built-in antenna (not shown), for example. . Similarly, the control unit 6 transmits transmission data when transmitting a radio wave by the built-in antenna to the transmission interface (I / F) 10.

制御部6は、翻訳ドライバを用いた通信内容翻訳処理のための、音声認識部11、音声生成部12、文字認識部13、文字生成部14、を制御するとともに音声データ又はテキストデータを送受信する。   The control unit 6 controls the voice recognition unit 11, the voice generation unit 12, the character recognition unit 13, and the character generation unit 14 for communication content translation processing using a translation driver, and transmits / receives voice data or text data. .

音声認識部11には、音声入力部2にユーザが入力した音声に基づく音声データ、或は、受信インターフェース9を介して受信した音声データが入力される。音声認識部11は、その音声データを解析する読み取り機能を有する。   The voice recognition unit 11 receives voice data based on the voice input by the user to the voice input unit 2 or voice data received via the reception interface 9. The voice recognition unit 11 has a reading function for analyzing the voice data.

音声生成部12は、音声出力部3から出力する音声データ、或は、送信インターフェース10から送信する音声データを、音声認識部11から出力した音声データ又は文字認識部13から出力したテキストデータに基づいて生成する。音声生成部12は、その生成した音声データを音声出力部3から出力する読み上げ機能を有する。   The voice generation unit 12 uses voice data output from the voice output unit 3 or voice data transmitted from the transmission interface 10 based on voice data output from the voice recognition unit 11 or text data output from the character recognition unit 13. To generate. The voice generation unit 12 has a reading function for outputting the generated voice data from the voice output unit 3.

文字認識部13には、表示部4にユーザがタッチ入力した文字入力に基づくテキストデータ、或は、受信インターフェース9を介して受信したテキストデータが入力される。文字認識部13は、そのテキストデータの文字データコードを認識する。   Text data based on character input touched by the user on the display unit 4 or text data received via the reception interface 9 is input to the character recognition unit 13. The character recognition unit 13 recognizes the character data code of the text data.

文字生成部14は、表示部4に表示するテキストデータ、或は、送信インターフェース10から送信するテキストデータを、音声認識部11から出力した音声データ又は文字認識部13から出力したテキストデータに基づいて文字データコードを生成する。   The character generation unit 14 generates text data to be displayed on the display unit 4 or text data to be transmitted from the transmission interface 10 based on voice data output from the speech recognition unit 11 or text data output from the character recognition unit 13. Generate a character data code.

このような基本構成において、制御部6は、記憶部5に記憶したオペレーティングシステムで設定した言語(例えば、日本語)をユーザが通常利用する基本言語とし、翻訳ドライバにより記憶部5に記憶したアドレス情報の個人情報に含まれる通信相手が使用する言語(例えば、英語)を翻訳対象とする他言語とする。   In such a basic configuration, the control unit 6 sets the language (for example, Japanese) set by the operating system stored in the storage unit 5 as a basic language that is normally used by the user, and stores the address stored in the storage unit 5 by the translation driver. The language (for example, English) used by the communication partner included in the personal information of the information is set as another language to be translated.

なお、他言語は1つの言語に限定されず、翻訳ドライバの種類に応じた言語とすることができる。したがって、翻訳ドライバは記憶部5に記憶した一つ以上を利用することができる。   The other language is not limited to one language, and can be a language according to the type of translation driver. Therefore, the translation driver can use one or more stored in the storage unit 5.

図2に示すように、制御部6は、ユーザが通信端末1の表示部4に表示しているチャットアイコンAP3を選択した場合、チャット機能を立ち上げて表示部4にチャット画面を表示させる。   As illustrated in FIG. 2, when the user selects the chat icon AP3 displayed on the display unit 4 of the communication terminal 1, the control unit 6 activates the chat function and causes the display unit 4 to display a chat screen.

この際、相手先はチャット機能に付随している相手先選択画面から相手先を選択すれば、基本言語を使用する相手なのか他言語を使用する相手なのかは自動で識別することができる。これにより、制御部6は、相手先が他言語を使用するユーザである場合、その対応した使用言語の他言語への翻訳機能を実行する。   At this time, if the other party selects the other party from the other party selection screen associated with the chat function, it is possible to automatically identify whether the other party uses the basic language or the other language. Thereby, when the other party is a user who uses another language, the control unit 6 executes a function of translating the corresponding used language into another language.

以下の説明において、相手先が利用する通信端末21も、音声入力部22及び音声出力部23と、表示機能を実現するための表示部24と、を含むスマートフォンである。この際、通信端末21に翻訳アプリケーションはインストールされていないものとする。   In the following description, the communication terminal 21 used by the other party is also a smartphone including a voice input unit 22 and a voice output unit 23 and a display unit 24 for realizing a display function. At this time, it is assumed that no translation application is installed in the communication terminal 21.

また、以下の説明においては、説明の便宜上、音声や文字等の言葉上の入出力に関しては『○○』で表記し、画面表示上の入出力に関しては[○○]で表記し、データ処理上の入出力に関しては<○○>で表記する。   Also, in the following explanation, for convenience of explanation, input / output on words such as voice and characters is indicated by “XX”, input / output on screen display is indicated by [XX], and data processing The above input / output is indicated by <XX>.

また、テキストデータは文字コード化したものであるため、以下の説明では、単なる「コード」或は「文字コード」とも称する。また、音声データ又はテキストデータを単に「音声」又は「テキスト」(又は表示用に変換した「文字」)とも称する。   Further, since the text data is a character code, it is also referred to as a simple “code” or “character code” in the following description. The voice data or text data is also simply referred to as “voice” or “text” (or “character” converted for display).

ここで、ユーザは、表示部4の画面下に表示した文字入力パッドを参照してタッチ操作を行い、例えば、『調子どお?』と入力すると、表示部4の画面右上に枠付きで文字[調子どお?]を表示させる。なお、この際の文字コードのデータ処理は公知の処理を利用している。   Here, the user refers to the character input pad displayed at the bottom of the screen of the display unit 4 and performs a touch operation, for example, “Tone? ”Is entered in the upper right of the screen of the display unit 4 with a frame [a tone? ] Is displayed. The character code data processing at this time uses known processing.

一方、制御部6は、文字認識部13により入力した文字コードを認識させ、認識した文字コードから翻訳ドライバを用いて、他言語の文字コード(例えば、<How have you been>)を生成する。制御部6は、生成した文字コード<How have you been>を、送信インターフェース10を介して相手先の通信端末21に送信する。   On the other hand, the control unit 6 recognizes the character code input by the character recognition unit 13, and generates a character code (for example, <How have you been>) in another language from the recognized character code using a translation driver. The control unit 6 transmits the generated character code <How have you been> to the communication terminal 21 of the other party via the transmission interface 10.

相手先の通信端末21(の制御部)は、受信した文字コード<How have you been>に基づいて、チャット方式で表示部24の画面左上側に文字[How have you been]を表示する。   Based on the received character code <How have you been>, the communication terminal 21 (the control unit) of the other party displays the character [How have you been] on the upper left side of the screen of the display unit 24 in the chat method.

これを受けて、相手先は、返事となる文字『so and so』を入力すると、相手先が所有する通信端末21の表示部24の画面右上に文字[so and so]が表示されるともに、文字コード<so and so>が送信される。   In response to this, when the other party inputs the reply characters “so and so”, the letters “so and so” are displayed on the upper right of the display unit 24 of the communication terminal 21 owned by the other party. The character code <so and so> is transmitted.

文字コード<so and so>を受信した通信端末1の制御部6は、文字コード<so and so>を文字認識部13で認識させた後、文字生成部14で翻訳化した文字コード<まぁまぁ>を生成する。さらに、制御部6は、表示部4の画面左上に文字[まぁまぁ]を表示させる。   The control unit 6 of the communication terminal 1 that has received the character code <so and so> causes the character recognition unit 13 to recognize the character code <so and so>, and then translates the character code <maamaa>. > Is generated. Further, the control unit 6 displays a character [maama] on the upper left of the screen of the display unit 4.

このように、通信端末1と通信端末21との間で、テキストデータ−テキストデータの相互通信に関し、相手先の使用言語が他言語であって、相手先の通信端末21に翻訳アプリケーションがインストールされていない場合であっても、コミュニケーションを容易に確立することができる。   As described above, with respect to the mutual communication between the text data and the text data between the communication terminal 1 and the communication terminal 21, the language used by the partner is another language, and the translation application is installed in the partner communication terminal 21. Even if not, communication can be easily established.

このような基本的な翻訳機能を可能とする制御部6は、上記に加え、自身の通信端末1を用いた基本言語による音声又は文字の何れか一方の入力だけで、他言語に翻訳した音声出力並びに文字表記を相手先の通信端末21に実現させることができる。   In addition to the above, the control unit 6 that enables such a basic translation function includes a speech translated into another language by simply inputting either speech or characters in the basic language using its own communication terminal 1. Output and character notation can be realized in the communication terminal 21 of the other party.

また、制御部6は、相手先が通信端末21を用いた他言語による音声又は文字の何れか一方の入力だけで、基本言語に翻訳した音声出力並びに文字表記を自身の通信端末1に実現させることができる。   In addition, the control unit 6 causes the communication terminal 1 to realize the voice output and the character notation translated into the basic language only by inputting either one of speech or characters in another language using the communication terminal 21 by the other party. be able to.

以下、通信端末1における音声入力の場合(図3参照)及び通信端末1における文字入力の場合(図4参照)の一例を説明する。ここで、通信端末1は、音声付きチャットアプリ又は文字表示付き電話アプリを用いるものとする。なお、通常の電話アプリ(電話アイコンAP1)に文字出力機能付き翻訳をモード的に追加プログラムしてもよい。   Hereinafter, an example of the case of voice input in the communication terminal 1 (see FIG. 3) and the case of character input in the communication terminal 1 (see FIG. 4) will be described. Here, the communication terminal 1 uses a chat application with voice or a telephone application with character display. Note that a translation with a character output function may be additionally programmed in a mode to a normal telephone application (phone icon AP1).

同様に、通常のチャットアプリ(チャットアイコンAP3)に音声機能付き翻訳をモード的に追加プログラムしてもよい。また、制御部6は、ユーザがこれらのアプリケーションを立ち上げて相手先を指定すると、そのアドレスデータに記憶した情報に基づいて翻訳をする旨を決定しているものとする。   Similarly, a translation with a voice function may be additionally programmed in a mode in a normal chat application (chat icon AP3). Further, it is assumed that when the user starts up these applications and designates a partner, the control unit 6 determines to translate based on information stored in the address data.

図3に示すように、制御部6は、ユーザが音声入力部2に向けて『調子どお』と音声入力すると、音声認識部11にその音声を読み取らせて音声<調子どお>を生成する。   As shown in FIG. 3, when the user inputs “tone” to the voice input unit 2, the control unit 6 causes the voice recognition unit 11 to read the voice and generate a voice <tone>. To do.

次に、制御部6は、読み取った音声<調子どお>に基づいて、文字生成部14により文字<調子どお>を生成させて表示部4に文字[調子どお]を表示させるとともに、翻訳した文字<How have you been>を生成させて表示部4に文字[How have you been]を表示させる。また、制御部6は、生成した文字<How have you been>に基づいて、音声生成部12により音声<How have you been>を生成させる。   Next, the control unit 6 causes the character generation unit 14 to generate a character <tone> on the basis of the read voice <tone> and causes the display unit 4 to display the character [tone]. The translated character <How have you been> is generated and the character [How have you been] is displayed on the display unit 4. Further, the control unit 6 causes the voice generation unit 12 to generate a voice <How have you been> based on the generated character <How have you been>.

これにより、制御部6は、生成した、文字<調子どお>、文字<How have you been>、音声<How have you been>、の3つのデータを重畳して送信インターフェース10から通信端末21に向けて送信する。   Thereby, the control unit 6 superimposes the generated three data, the character <tone>, the character <How have you been>, and the voice <How have you been>, from the transmission interface 10 to the communication terminal 21. Send to.

通信端末21は、受信したデータに基づいて、翻訳前の文字[調子どお]と翻訳後の文字[How have you been]を表示部24に表示させるとともに、音声『How have you been』を音声出力部23から出力させる。   Based on the received data, the communication terminal 21 displays the pre-translation characters [Tone Doo] and the post-translation characters [How have you been] on the display unit 24 and the voice “How have you been”. Output from the output unit 23.

このように、通信端末21では、翻訳アプリをインストールしていなくても、文字<調子どお>、文字<How have you been>、音声<How have you been>、の3つのデータを取得することができる。   As described above, the communication terminal 21 can acquire three data of the character <Tone Doo>, the character <How have you been>, and the voice <How have you been> even if the translation application is not installed. Can do.

一方、通信端末21のユーザは、音声『How have you been』に対して、音声入力部22に『so and so』と音声入力すると、その音声<so and so>を通信端末1に向けて送信する。   On the other hand, when the user of the communication terminal 21 inputs “so and so” to the voice input unit 22 in response to the voice “How have you been”, the voice <so and so> is transmitted to the communication terminal 1. To do.

通信端末1の制御部6は、受信インターフェース9で音声<so and so>を受信させると、音声認識部11により音声<so and so>を認識させる。   When the reception unit 9 receives the voice <so and so>, the control unit 6 of the communication terminal 1 causes the voice recognition unit 11 to recognize the voice <so and so>.

これにより、制御部6は、文字生成部14により文字<so and so>を生成させて表示部4に文字[so and so]を表示させるとともに、翻訳した文字<まぁまぁ>を生成させて表示部4に文字[まぁまぁ]を表示させる。また、制御部6は、生成した文字<まぁまぁ>に基づいて、音声生成部12により音声<まぁまぁ>を生成させ、音声出力部3から音訳した音声『まぁまぁ』を出力させる。   Thereby, the control unit 6 causes the character generation unit 14 to generate the characters <so and so> and causes the display unit 4 to display the characters [so and so], and also generates and displays the translated characters <maamaa>. The character “maamaa” is displayed in part 4. Further, the control unit 6 causes the voice generation unit 12 to generate a voice <maamaa> based on the generated character <maaama>, and causes the voice output unit 3 to output the transliterated voice “maaamaa”.

このように、通信端末21では、文字<so and so>、文字<so and so>、音声<まぁまぁ>、の3つのデータを生成し、それぞれ表示部4及び音声出力部3に展開してユーザに認識させることができる。   As described above, the communication terminal 21 generates three data of the characters <so and so>, the characters <so and so>, and the voice <maama>, and expands them on the display unit 4 and the audio output unit 3, respectively. The user can be made aware.

図4に示すように、制御部6は、ユーザが表示部4に表示した文字入力パッドを用いて『調子どお』と文字入力すると、文字認識部13にその文字コードを認識させる。   As shown in FIG. 4, when the user inputs a character “tone” using the character input pad displayed on the display unit 4, the control unit 6 causes the character recognition unit 13 to recognize the character code.

次に、制御部6は、文字<調子どお>に基づいて、文字生成部14により文字<調子どお>を生成させて表示部4に文字[調子どお]を表示させるとともに、翻訳した文字<How have you been>を生成させて表示部4に文字[How have you been]を表示させる。   Next, based on the character <tone>, the control unit 6 causes the character generator 14 to generate the character <tone> and display the character [tone] on the display unit 4 and translate it. The character <How have you been> is generated and the character [How have you been] is displayed on the display unit 4.

また、制御部6は、生成した文字<How have you been>に基づいて、音声生成部12により音声<How have you been>を生成させる。   Further, the control unit 6 causes the voice generation unit 12 to generate a voice <How have you been> based on the generated character <How have you been>.

これにより、制御部6は、生成した、文字<調子どお>、文字<How have you been>、音声<How have you been>、の3つのデータを重畳して送信インターフェース10から通信端末21に向けて送信する。   Thereby, the control unit 6 superimposes the generated three data, the character <tone>, the character <How have you been>, and the voice <How have you been>, from the transmission interface 10 to the communication terminal 21. Send to.

通信端末21は、受信したデータに基づいて、翻訳前の文字[調子どお]と翻訳後の文字[How have you been]を表示部24に表示させるとともに、音声『How have you been』を音声出力部23から出力させる。   Based on the received data, the communication terminal 21 displays the pre-translation characters [Tone Doo] and the post-translation characters [How have you been] on the display unit 24 and the voice “How have you been”. Output from the output unit 23.

このように、通信端末21では、翻訳アプリをインストールしていなくても、文字<調子どお>、文字<How have you been>、音声<How have you been>、の3つのデータを取得することができる。   As described above, the communication terminal 21 can acquire three data of the character <Tone Doo>, the character <How have you been>, and the voice <How have you been> even if the translation application is not installed. Can do.

一方、通信端末21のユーザは、音声『How have you been』に対して、音声入力部22に『so and so』と音声入力(又は文字『so and so』と入力)すると、その音声<so and so>(又は文字<so and so>)を通信端末1に向けて送信する。   On the other hand, when the user of the communication terminal 21 inputs “so and so” and voice (or “so and so”) to the voice input unit 22 in response to the voice “How have you been”, the voice <so and so> (or characters <so and so>) are transmitted to the communication terminal 1.

通信端末1の制御部6は、受信インターフェース9で音声<so and so>(又は文字<so and so>)を受信させると、音声認識部11により音声<so and so>(又は文字認識部13により文字<so and so>)を認識させる。   When the reception unit 9 receives the voice <so and so> (or the character <so and so>), the control unit 6 of the communication terminal 1 causes the voice recognition unit 11 to generate the voice <so and so> (or the character recognition unit 13). To recognize the characters <so and so>).

これにより、制御部6は、文字生成部14により文字<so and so>を生成させて表示部4に文字[so and so]を表示させるとともに、翻訳した文字<まぁまぁ>を生成させて表示部4に文字[まぁまぁ]を表示させる。   Thereby, the control unit 6 causes the character generation unit 14 to generate the characters <so and so> and causes the display unit 4 to display the characters [so and so], and also generates and displays the translated characters <maamaa>. The character “maamaa” is displayed in part 4.

また、制御部6は、生成した文字<まぁまぁ>に基づいて、音声生成部12により音声<まぁまぁ>を生成させ、音声出力部3から翻訳した音声『まぁまぁ』を出力させる。   Further, the control unit 6 causes the voice generation unit 12 to generate a voice <maamaa> based on the generated character <maaama>, and causes the voice output unit 3 to output the translated voice “maaamaa”.

このように、通信端末21では、文字<so and so>、文字<so and so>、音声<まぁまぁ>、の3つのデータを生成し、それぞれ表示部4及び音声出力部3に展開してユーザに認識させることができる。   As described above, the communication terminal 21 generates three data of the characters <so and so>, the characters <so and so>, and the voice <maama>, and expands them on the display unit 4 and the audio output unit 3, respectively. The user can be made aware.

次に、制御部6で実行する具体的なルーチンを図5のフロー図に基づいて説明する。   Next, a specific routine executed by the control unit 6 will be described based on the flowchart of FIG.

上述したように、通信端末1は、記憶部5に基本言語と他言語との相互翻訳を実行する翻訳アプリケーションを予めインストールしているとともに、アドレス帳を記憶している。   As described above, the communication terminal 1 preinstalls a translation application that performs mutual translation between the basic language and another language in the storage unit 5 and stores an address book.

(ステップS1)
ステップS1において、制御部6は、ユーザーによる操作部8の操作による通信アプリケーションの指定を受けて、その通信アプリケーションに対応したアドレス帳を記憶部5から参照し、表示部4にアドレス帳を表示させ、ステップS2へと移行する。
(Step S1)
In step S <b> 1, the control unit 6 receives the designation of the communication application by the operation of the operation unit 8 by the user, refers to the address book corresponding to the communication application from the storage unit 5, and causes the display unit 4 to display the address book. The process proceeds to step S2.

(ステップS2)
ステップS2において、制御部6は、ユーザの操作により発呼先(通信相手)の指定操作があったか否かの判定をする。制御部6は、発呼先の指定があったと判定した場合には(Yes)ステップS3へと移行する。
(Step S2)
In step S2, the control unit 6 determines whether or not a call destination (communication partner) designation operation has been performed by a user operation. When it is determined that the call destination has been designated (Yes), the control unit 6 proceeds to step S3.

一方、制御部6は、発呼先の指定があったと判定しなかった場合(No)には、発呼先の指定があるまで(又は他のアプリケーション等の操作があるまで)引き続きこのルーチンを監視する。そして、制御部6は、指定した発呼先との通信(ここでは電話機能)を確立させる。   On the other hand, if the control unit 6 does not determine that the call destination has been specified (No), the control unit 6 continues this routine until the call destination is specified (or until another application is operated). Monitor. Then, the control unit 6 establishes communication (here, a telephone function) with the designated call destination.

(ステップS3)
ステップS3において、制御部6は、ユーザが指定した発呼先により、発呼先を特定するとともに発呼先に対応したアドレス情報を解析し、ステップS4へと移行する。
(Step S3)
In step S3, the control unit 6 specifies the call destination based on the call destination designated by the user, analyzes the address information corresponding to the call destination, and proceeds to step S4.

(ステップS4:他言語特定ステップ)
ステップS4において、制御部6は、解析したアドレス情報に基づいて、通信相手が使用する言語が基本言語であるか他言語であるかを含め国又は言語を特定し、ステップS5へと移行する。
(Step S4: Step for identifying other languages)
In step S4, the control unit 6 specifies the country or language including whether the language used by the communication partner is a basic language or another language based on the analyzed address information, and proceeds to step S5.

なお、以下の説明では、このステップS4にて通信相手が使用する言語が他言語である旨を特定したものとして説明する。   In the following description, it is assumed that the language used by the communication partner in step S4 is specified as another language.

(ステップS5:通信内容受付ステップ)
ステップS5において、制御部6は、基本言語による音声データ又はテキストデータの少なくとも何れか一方の入力を入力手段としての音声入力部2又は表示部4を介して発信基準データとして受け付け、ステップS6へと移行する。
(Step S5: Communication content reception step)
In step S5, the control unit 6 accepts at least one input of voice data or text data in the basic language as transmission reference data via the voice input unit 2 or the display unit 4 as input means, and the process proceeds to step S6. Transition.

(ステップS6:他言語化翻訳ステップ)
ステップS6において、制御部6は、翻訳アプリケーションを起動させて、ステップS5で受け付けた発信基準データを他言語の音声データ及びテキストデータに翻訳して発信データを生成し、ステップS7へと移行する。
(Step S6: Translation into other languages)
In step S6, the control unit 6 activates the translation application, translates the transmission reference data received in step S5 into voice data and text data in other languages, generates transmission data, and proceeds to step S7.

なお、上記ステップS5において、音声入力部2からの音声入力であった場合、制御部6は、音声入力部2で受け付けた発信基準データである基本言語による音声データとして認識し、記憶部5に予めインストールした聞き取りアプリケーションを起動させる。   If the voice input from the voice input unit 2 is input in step S5, the control unit 6 recognizes the voice data in the basic language, which is the transmission reference data received by the voice input unit 2, and stores it in the storage unit 5. Start the listening application installed in advance.

そして、このステップS6において、制御部6は、他言語によるテキストデータからなる発信データを生成するための基本言語による基本テキストデータを生成する基本テキストデータ生成ステップを実行することとなる。   And in this step S6, the control part 6 will perform the basic text data production | generation step which produces | generates the basic text data by the basic language for producing | generating the transmission data which consists of text data by another language.

一方、上記ステップS5において、表示部4からの文字入力であった場合、制御部6は、表示部4から受け付けた発信基準データである基本言語によるテキストデータとして認識し、記憶部5に予めインストールした読み上げアプリケーションを起動させる。   On the other hand, if the character input is from the display unit 4 in step S5, the control unit 6 recognizes the text data in the basic language, which is the transmission reference data received from the display unit 4, and is installed in the storage unit 5 in advance. Start the reading application.

そして、このステップS6において、制御部6は、他言語による音声データからなる発信データを生成するための基本言語による基本音声データを生成する基本音声データ生成ステップを実行することとなる。   And in this step S6, the control part 6 will perform the basic audio | voice data production | generation step which produces | generates the basic audio | voice data by the basic language for producing | generating the transmission data which consist of audio | voice data by another language.

(ステップS7:発信ステップ)
ステップS7において、制御部6は、ステップS6で翻訳した発信データを電気通信回線を通じて発信手段としての送信インターフェース10から発信し、ステップS8へと移行する。
(Step S7: Transmission step)
In step S7, the control unit 6 transmits the transmission data translated in step S6 from the transmission interface 10 as a transmission means through the telecommunication line, and proceeds to step S8.

なお、制御部6は、このステップS7において、表示部4により受け付けた発信基準データが基本言語によるテキストデータである場合に、翻訳した他言語の音声データによる発信データに加えて基本言語によるテキストデータを重畳して発信してもよい。   In addition, in step S7, when the transmission reference data received by the display unit 4 is text data in the basic language, the control unit 6 adds the text data in the basic language in addition to the transmission data in the speech data in the other languages that have been translated. May be transmitted in a superimposed manner.

なお、ユーザは、ステップS2において相手先との通信状態(通話状態)が確立しているため、ステップS3〜ステップS7の発信が完了するまで(言葉を言い尽くすか相手先がデータを受信するまで)スイッチ7を押下して相手からの割り込みができないようにするキャンセルステップを実行(受け付け)してもよい。これにより、音声の混濁(翻訳の混濁)を抑制することができる。   In addition, since the communication state (call state) with the other party is established in step S2, the user completes the transmission in step S3 to step S7 (until the word is exhausted or the other party receives data). ) A cancel step may be executed (accepted) to depress the switch 7 and prevent interruption from the other party. As a result, voice turbidity (translation turbidity) can be suppressed.

(ステップS8)
次に、制御部6は、相手先からの受信があったか否かを判定する。なお、制御部6は、引き続きステップS5のルーチンによりユーザからの通信内容を割り込みとして受け付けることも可能である。制御部6は、相手先から受信があったと判定した場合(Yes)には、ステップS9へと移行する。
(Step S8)
Next, the control unit 6 determines whether or not there is reception from the other party. In addition, the control part 6 can also receive the communication content from a user as interruption by the routine of step S5 continuously. If it is determined that there is a reception from the other party (Yes), the control unit 6 proceeds to step S9.

一方、制御部6は、相手先から受信があったと判定しなかった場合(No)には、引き続きこのルーチン若しくはステップS5の割り込みを監視する。   On the other hand, if the control unit 6 does not determine that there is a reception from the other party (No), the control unit 6 continues to monitor this routine or the interruption in step S5.

(ステップS9:受信ステップ)
ステップS9において、制御部6は、通信相手からの他言語による音声データ又はテキストデータを電気通信回線を通じて受信手段としての受信インターフェース9により受信基準データとして受信し、ステップS10へと移行する。
(Step S9: Reception step)
In step S9, the control unit 6 receives voice data or text data in another language from the communication partner as reception reference data by the reception interface 9 as a reception unit through the telecommunication line, and proceeds to step S10.

(ステップS10)
ステップS10において、制御部6は、受信データがテキストデータであるのか音声データであるのかを特定し、ステップS11へと移行する。
(Step S10)
In step S10, the control unit 6 specifies whether the received data is text data or voice data, and proceeds to step S11.

(ステップS11)
ステップS11において、制御部6は、受信データに基づいて、出力方式、すなわち、文字解析を実行するのか音声解析を実行するのかを決定し、ステップS12へと移行する。
(Step S11)
In step S11, the control unit 6 determines an output method, that is, whether to perform character analysis or voice analysis, based on the received data, and proceeds to step S12.

(ステップS12:基本言語化翻訳ステップ)
ステップS12において、制御部6は、翻訳アプリケーションを起動させてステップS9で受信した受信基準データを基本言語による音声データ及びテキストデータに翻訳して受信データを生成し、ステップS13へと移行する。
(Step S12: Basic verbalization translation step)
In step S12, the control unit 6 activates the translation application, translates the reception reference data received in step S9 into speech data and text data in a basic language, generates reception data, and proceeds to step S13.

(ステップS13:通信内容出力ステップ)
ステップS13において、制御部6は、ステップS12で翻訳した受信データを出力手段としての音声出力部3及び表示部4を介して音声出力並びに文字出力してこのルーチンを終了する。なお、制御部6は、以降、通信(通話)が終了するまで上記ルーチンを繰り返す。
(Step S13: Communication content output step)
In step S13, the control unit 6 outputs the received data translated in step S12 through the audio output unit 3 and the display unit 4 as output means and outputs the characters and ends this routine. The control unit 6 thereafter repeats the above routine until the communication (call) is completed.

このように、本実施の形態に係る通信内容翻訳処理方法、通信内容翻訳処理プログラム、及び、記録媒体は、通信端末1に入力した音声又は文字の何れか一方に対して、通信相手の通信端末21に翻訳した音声と文字とを出力させることができる。   As described above, the communication content translation processing method, the communication content translation processing program, and the recording medium according to the present embodiment can communicate with one of the voice and characters input to the communication terminal 1. The speech and characters translated into 21 can be output.

また、通信相手の通信端末から音声又は文字の何れか一方の送信に対して、通信端末1に翻訳した音声と文字とを出力させることができる。   In addition, in response to transmission of either voice or text from the communication partner communication terminal, the translated voice and text can be output to the communication terminal 1.

ここで、通信端末1及び通信端末21の基本言語である翻訳前の文字を互いに送受信することもできる。   Here, the character before translation which is the basic language of the communication terminal 1 and the communication terminal 21 can also be transmitted / received mutually.

また、以上既に述べた以外にも、上記実施の形態による手法を適宜組み合わせて利用しても良い。   In addition to the above, the methods according to the above embodiments may be used in appropriate combination.

その他、本発明は、その趣旨を逸脱しない範囲内において、種々の変更が加えられて実施されるものである。   In addition, the present invention can be implemented with various modifications without departing from the spirit of the present invention.

以上説明したように、本発明に係る通信内容翻訳処理方法、通信内容翻訳処理プログラム、及び、記録媒体は、翻訳のバリエーションを多機能化し得て汎用性を向上することができるという効果を有し、電気通信回線を通じて相互通信している際に、基本言語と他言語とで相互翻訳するための通信内容翻訳処理方法、通信内容翻訳処理プログラム、及び、記録媒体全般に有用である。   As described above, the communication content translation processing method, the communication content translation processing program, and the recording medium according to the present invention have the effect that the variations in translation can be made multifunctional and versatility can be improved. This is useful for a communication content translation processing method, a communication content translation processing program, and a recording medium in general for mutual translation between a basic language and another language during mutual communication through a telecommunication line.

1 通信端末
2 音声入力部
3 音声出力部
4 表示部
5 記憶部
6 制御部
7 スイッチ
8 操作部
9 受信インターフェース
10 送信インターフェース
11 音声認識部
12 音声生成部
13 文字認識部
14 文字生成部
21 通信端末
22 音声入力部
23 音声出力部
24 表示部
AP1 電話アイコン
AP2 E−Mailアイコン
AP3 チャットアイコン
C クラウド
NT 電気通信回線
DESCRIPTION OF SYMBOLS 1 Communication terminal 2 Voice input part 3 Voice output part 4 Display part 5 Memory | storage part 6 Control part 7 Switch 8 Operation part 9 Reception interface 10 Transmission interface 11 Voice recognition part 12 Voice generation part 13 Character recognition part 14 Character generation part 21 Communication terminal 22 Voice input part 23 Voice output part 24 Display part AP1 Telephone icon AP2 E-Mail icon AP3 Chat icon C Cloud NT Telecommunication line

Claims (8)

基本言語と他言語との相互翻訳を実行する翻訳アプリケーションを予めインストールした記憶手段を有する1つの通信端末に実行させるステップとして
前記基本言語による音声データ又はテキストデータの少なくとも何れか一方の入力を入力手段を介して発信基準データとして受け付ける通信内容受付ステップと、
前記翻訳アプリケーションを起動させて、前記通信内容受付ステップで受け付けた前記発信基準データを前記他言語の音声データ及びテキストデータに翻訳して発信データを生成する他言語化翻訳ステップと、
前記他言語化翻訳ステップで翻訳した前記発信データを電気通信回線を通じて発信手段により発信する発信ステップと、
前記他言語による音声データ又はテキストデータを前記電気通信回線を通じて受信手段により受信基準データとして受信する受信ステップと、
前記翻訳アプリケーションを起動させて前記受信ステップで受信した前記受信基準データを前記基本言語による音声データ及びテキストデータに翻訳して受信データを生成する基本言語化翻訳ステップと、
前記基本言語化翻訳ステップで翻訳した前記受信データを出力手段を介して出力する通信内容出力ステップと、
を備えることを特徴とする通信内容翻訳処理方法。
As a step of causing a single communication terminal having a storage means preinstalled with a translation application that performs mutual translation between a basic language and another language,
A communication content receiving step for receiving at least one of voice data or text data in the basic language as outgoing reference data via an input means;
A foreign language translation step of starting the translation application, translating the outgoing call reference data received in the communication content receiving step into voice data and text data of the other language, and generating outgoing data;
A transmission step of transmitting the transmission data translated in the other language translation step by a transmission means through a telecommunication line;
Receiving the voice data or text data in the other language as reception reference data by the receiving means through the telecommunication line;
A basic languageized translation step of starting the translation application and translating the reception reference data received in the reception step into speech data and text data in the basic language to generate reception data;
A communication content output step for outputting the received data translated in the basic language translation step through an output means;
A communication content translation processing method characterized by comprising:
前記他言語化翻訳ステップを実行させる前に、前記記憶手段に予め登録した通信相手先の登録名を含むアドレスデータに基づいて翻訳対象となる前記他言語を特定する他言語特定ステップと、
を備えることを特徴とする請求項1に記載の通信内容翻訳処理方法。
Before executing the other language translation step, another language specifying step for specifying the other language to be translated based on address data including a registered name of a communication partner registered in advance in the storage unit;
The communication content translation processing method according to claim 1, further comprising:
前記入力手段により受け付けた前記発信基準データが前記基本言語による音声データである場合に、前記記憶手段に予めインストールした聞き取りアプリケーションを起動させて、前記他言語によるテキストデータからなる前記発信データを生成するための前記基本言語による基本テキストデータを生成する基本テキストデータ生成ステップと、
を備えることを特徴とする請求項1又は請求項2に記載の通信内容翻訳処理方法。
When the transmission reference data received by the input unit is voice data in the basic language, the listening application installed in advance in the storage unit is activated to generate the transmission data including text data in the other language Generating basic text data in the basic language for generating basic text data;
The communication content translation processing method according to claim 1, further comprising:
前記入力手段により受け付けた前記発信基準データが前記基本言語によるテキストデータである場合に、前記記憶手段に予めインストールした読み上げアプリケーションを起動させて、前記他言語による音声データからなる前記発信データを生成するための前記基本言語による基本音声データを生成する基本音声データ生成ステップと、
を備えることを特徴とする請求項1又は請求項2に記載の通信内容翻訳処理方法。
When the transmission reference data received by the input unit is text data in the basic language, a reading application installed in advance in the storage unit is activated to generate the transmission data including voice data in the other language Generating basic voice data in the basic language for generating basic voice data;
The communication content translation processing method according to claim 1, further comprising:
前記入力手段により受け付けた前記発信基準データが前記基本言語によるテキストデータである場合に、前記他言語化翻訳ステップで翻訳した前記他言語の音声データによる前記発信データに加えて前記入力手段により受け付けた前記基本言語によるテキストデータを前記発信手段により発信する発信ステップと、
を備えることを特徴とする請求項4に記載の通信内容翻訳処理方法。
When the transmission reference data received by the input means is text data in the basic language, it is received by the input means in addition to the transmission data by the voice data of the other language translated in the other language translation step. A sending step of sending the text data in the basic language by the sending means;
The communication content translation processing method according to claim 4, further comprising:
前記入力手段が前記基本言語による音声データを受け付けてから前記他言語化翻訳ステップで翻訳した前記他言語による前記発信データを前記発信手段により発信するまでの期間は前記受信手段による受信をキャンセルする割り込みキャンセルステップと、
を備えることを特徴とする請求項1乃至請求項5の何れか1項に記載の通信内容翻訳処理方法。
An interrupt for canceling reception by the receiving means during a period from when the input means accepts the speech data in the basic language to when the sending means in the other language is transmitted by the sending means. Cancellation step,
The communication content translation processing method according to any one of claims 1 to 5, further comprising:
請求項1乃至請求項6の何れか1項に記載の通信内容翻訳処理方法を通信端末の演算手段に実行させる通信内容翻訳処理プログラム。   A communication content translation processing program for causing a calculation means of a communication terminal to execute the communication content translation processing method according to any one of claims 1 to 6. 請求項1乃至請求項6の何れか1項に記載の通信内容翻訳処理方法を通信端末の演算手段に実行させる通信内容翻訳処理プログラムを記録した記録媒体。
The recording medium which recorded the communication content translation processing program which makes the calculating means of a communication terminal perform the communication content translation processing method of any one of Claims 1 thru | or 6.
JP2017073698A 2017-04-03 2017-04-03 Communication content translation processing method, communication content translation processing program, and recording medium Active JP6243071B1 (en)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2017073698A JP6243071B1 (en) 2017-04-03 2017-04-03 Communication content translation processing method, communication content translation processing program, and recording medium
PCT/JP2018/014317 WO2018186416A1 (en) 2017-04-03 2018-04-03 Translation processing method, translation processing program, and recording medium

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2017073698A JP6243071B1 (en) 2017-04-03 2017-04-03 Communication content translation processing method, communication content translation processing program, and recording medium

Publications (2)

Publication Number Publication Date
JP6243071B1 true JP6243071B1 (en) 2017-12-06
JP2018180590A JP2018180590A (en) 2018-11-15

Family

ID=60570344

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2017073698A Active JP6243071B1 (en) 2017-04-03 2017-04-03 Communication content translation processing method, communication content translation processing program, and recording medium

Country Status (2)

Country Link
JP (1) JP6243071B1 (en)
WO (1) WO2018186416A1 (en)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6927177B2 (en) 2018-09-26 2021-08-25 信越化学工業株式会社 Phase shift photomask blank and phase shift photomask
US11776286B2 (en) 2020-02-11 2023-10-03 NextVPU (Shanghai) Co., Ltd. Image text broadcasting
CN110991455B (en) * 2020-02-11 2023-05-05 上海肇观电子科技有限公司 Image text broadcasting method and equipment, electronic circuit and storage medium thereof
DE102021130318A1 (en) * 2021-01-05 2022-07-07 Electronics And Telecommunications Research Institute System, user terminal and method for providing an automatic interpretation service based on speaker separation
KR102584436B1 (en) * 2021-01-05 2023-10-05 한국전자통신연구원 System, user device and method for providing automatic interpretation service based on speaker separation
CN113726750B (en) * 2021-08-18 2023-06-30 中国联合网络通信集团有限公司 Voice real-time translation method, device and storage medium

Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001265700A (en) * 2000-03-16 2001-09-28 Matsushita Electric Ind Co Ltd Portable communication terminal equipment
JP2003188948A (en) * 2001-12-19 2003-07-04 Nec Corp Portable terminal device
JP2005202884A (en) * 2004-01-19 2005-07-28 Toshiba Corp Transmission device, reception device, relay device, and transmission/reception system
JP2011118690A (en) * 2009-12-03 2011-06-16 Fujitsu Toshiba Mobile Communications Ltd Translating device
JP2013131196A (en) * 2011-12-21 2013-07-04 Nhn Corp Message service provision system and method
JP2013140584A (en) * 2011-12-28 2013-07-18 Kakao Corp Method to support multi-lingual translation for message included in chat window
US20140242955A1 (en) * 2013-02-22 2014-08-28 Samsung Electronics Co., Ltd Method and system for supporting a translation-based communication service and terminal supporting the service
JP2015100073A (en) * 2013-11-20 2015-05-28 エヌ・ティ・ティ・コミュニケーションズ株式会社 Communication apparatus, terminal, communication system, communication method, and communication program
US20160034447A1 (en) * 2014-07-31 2016-02-04 Samsung Electronics Co., Ltd. Method, apparatus, and system for providing translated content
JP5998298B1 (en) * 2016-01-13 2016-09-28 株式会社リクルートライフスタイル Speech translation device, speech translation method, and speech translation program
JP2017049624A (en) * 2015-08-31 2017-03-09 株式会社Wing of Freedom Translation system and server

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4118470B2 (en) * 1999-08-30 2008-07-16 富士通株式会社 E-mail device, e-mail transmission method and recording medium
US8660244B2 (en) * 2006-02-17 2014-02-25 Microsoft Corporation Machine translation instant messaging applications
JP6293449B2 (en) * 2013-10-10 2018-03-14 みずほ情報総研株式会社 Communication support system, communication support method, and communication support program
WO2016006354A1 (en) * 2014-07-08 2016-01-14 Necソリューションイノベータ株式会社 Information processing device, and translation-data provision method

Patent Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001265700A (en) * 2000-03-16 2001-09-28 Matsushita Electric Ind Co Ltd Portable communication terminal equipment
JP2003188948A (en) * 2001-12-19 2003-07-04 Nec Corp Portable terminal device
JP2005202884A (en) * 2004-01-19 2005-07-28 Toshiba Corp Transmission device, reception device, relay device, and transmission/reception system
JP2011118690A (en) * 2009-12-03 2011-06-16 Fujitsu Toshiba Mobile Communications Ltd Translating device
JP2013131196A (en) * 2011-12-21 2013-07-04 Nhn Corp Message service provision system and method
JP2013140584A (en) * 2011-12-28 2013-07-18 Kakao Corp Method to support multi-lingual translation for message included in chat window
US20140242955A1 (en) * 2013-02-22 2014-08-28 Samsung Electronics Co., Ltd Method and system for supporting a translation-based communication service and terminal supporting the service
JP2015100073A (en) * 2013-11-20 2015-05-28 エヌ・ティ・ティ・コミュニケーションズ株式会社 Communication apparatus, terminal, communication system, communication method, and communication program
US20160034447A1 (en) * 2014-07-31 2016-02-04 Samsung Electronics Co., Ltd. Method, apparatus, and system for providing translated content
JP2017049624A (en) * 2015-08-31 2017-03-09 株式会社Wing of Freedom Translation system and server
JP5998298B1 (en) * 2016-01-13 2016-09-28 株式会社リクルートライフスタイル Speech translation device, speech translation method, and speech translation program

Also Published As

Publication number Publication date
JP2018180590A (en) 2018-11-15
WO2018186416A1 (en) 2018-10-11

Similar Documents

Publication Publication Date Title
JP6243071B1 (en) Communication content translation processing method, communication content translation processing program, and recording medium
EP2955941B1 (en) Method for sharing terminal location and terminal device
JP2009527811A (en) Machine translation in instant messaging applications
US20210082315A1 (en) Automated real time interpreter service
US20160062987A1 (en) Language independent customer communications
US11282523B2 (en) Voice assistant management
US20120215521A1 (en) Software Application Method to Translate an Incoming Message, an Outgoing Message, or an User Input Text
WO2019196645A1 (en) Conversational information processing method, device, mobile terminal, and storage medium
JP5856708B1 (en) Translation system and server
WO2020250750A1 (en) Safety confirmation system and safety confirmation method
KR20130015472A (en) Display apparatus, control method and server thereof
CN103003874A (en) Provisioning text services based on assignment of language attributes to contact entry
Lee Role-space in VRS and VRI
JP2016091195A (en) Information transmission/reception program and system
JP2020119043A (en) Voice translation system and voice translation method
CN112565058B (en) Message processing method, device, terminal and storage medium
WO2019059185A1 (en) Information processing device, information processing system, information processing method, and program
JP7462995B1 (en) Information processing system, information processing method, and program
KR20190072177A (en) User terminal device and method for providing chat rooms list
JP7205962B1 (en) System for automatic dialogue
JP6867061B1 (en) Assist device and program
US20210021548A1 (en) Text messaging electronic device and server computer for registering context
JP7271942B2 (en) Bot system program, artificial intelligence speaker system program
KR20220121171A (en) Method and system for providing chatbot service available in multiple messengers
KR20160082000A (en) User terminal for supporting translation function

Legal Events

Date Code Title Description
TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20171101

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20171108

R150 Certificate of patent or registration of utility model

Ref document number: 6243071

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

S531 Written request for registration of change of domicile

Free format text: JAPANESE INTERMEDIATE CODE: R313531

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250