JPH0965424A - Automatic translation system using radio portable terminal equipment - Google Patents

Automatic translation system using radio portable terminal equipment

Info

Publication number
JPH0965424A
JPH0965424A JP21155595A JP21155595A JPH0965424A JP H0965424 A JPH0965424 A JP H0965424A JP 21155595 A JP21155595 A JP 21155595A JP 21155595 A JP21155595 A JP 21155595A JP H0965424 A JPH0965424 A JP H0965424A
Authority
JP
Grant status
Application
Patent type
Prior art keywords
information
terminal
portable
equipment
station
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP21155595A
Other languages
Japanese (ja)
Other versions
JP3473204B2 (en )
Inventor
Toshiyuki Aritsuka
Nobuo Hataoka
Yoshinori Oketa
俊之 在塚
▲吉▼紀 桶田
信夫 畑岡
Original Assignee
Hitachi Ltd
株式会社日立製作所
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date

Links

Abstract

PROBLEM TO BE SOLVED: To receive the translation service of a language used freely by arranging an automatic translation device at a radio or wired base station and connecting a portable terminal equipment to the base station through a radio or wired channel.
SOLUTION: Portable terminal equipments 101-104 are connected to a base station 100 through radio channels 105-108. The portable terminal equipment 101 converts voice information received from a microphone into a digital signal, recognizes the voice signal, and adds the recognized result to the information as character code information as a code identify a kind of language and sends the resulting information to the base station. The base station 100 translates the received voice recognition result into other language and sends the translated result through a radio channel to a portable terminal equipment. The information sent from the base station is sent to a portable terminal equipment 102 in terms of translation character code information 106 being the result of translation to a multi-language, voice multiplex information 107 is sent to a portable terminal equipment 103, or finger language image information 108 is sent to a portable terminal equipment 104 with display device as various forms.
COPYRIGHT: (C)1997,JPO

Description

【発明の詳細な説明】 DETAILED DESCRIPTION OF THE INVENTION

【0001】 [0001]

【産業上の利用分野】少なくとも携帯端末と、基地局で構成される新しい通信ネットワ−クサ−ビスに係り、特に言語翻訳機能が付いて、簡便に各言語の翻訳結果を利用できるシステム構成、及び装置に関する。 BACKGROUND OF THE INVENTION and at least a mobile terminal, a new communication networks constituted by the base station - grasses - relates to bis, especially with a language translation feature, easily system configuration can utilize the translation result for each language, and apparatus on.

【0002】 [0002]

【従来の技術】従来の国際会議場や、歌舞伎場での翻訳サ−ビスの方式は、各言語に対して専用の通訳者が介在し、翻訳結果を利用者に伝えるという方式であった。 Conventional International Conference Center and, translated at the Kabuki field - bis scheme, dedicated interpreters is interposed for each language, was a system that transmits the translation result to the user . また、サ−ビスの構成は、講演者や、役者の発声内容を専用の通訳者が、直接耳で聞いて、翻訳の結果をマイクを用いて、有線あるいは無線で利用者のイアホ−ンなどを介して伝える構成となっていた。 In addition, the difference - bis configuration, and speakers, interpreters dedicated the speech content of the actors, to hear directly in the ear, the result of translation by using a microphone, Iaho the user's wired or wireless - emissions such as It had been configured to communicate via the. この結果、専用の通訳者が用意できる重要な国際会議や、人気のある歌舞伎など以外の場合では、残念ながら、言語の翻訳サ−ビスは不可能であるという問題があった。 As a result, dedicated interpreters important international conferences and which can be prepared, and in the case of other than such as Kabuki is a popular, unfortunately, the language of the translation service - bis there has been a problem that it is impossible. また、従来のシステム構成上、利用者のイアホ−ンは固定であり、サ−ビスが行なわれている限られた場所の、限られた位置でしか翻訳サ−ビスを受けられないという問題があった。 Further, the conventional system configuration, the user Iaho - down is fixed, service - place screws have a limited being performed, only the translation in a limited location service - is a problem that not receive bis there were. さらに、専用で、かつ専門の通訳者が介在するということから、サ−ビス自体が高価となるという問題があった。 Furthermore, a dedicated and from the fact that professional interpreters is interposed, service - a problem that screws itself becomes expensive.

【0003】 [0003]

【発明が解決しようとする課題】本発明の目的は、上記従来の問題を解決して、いつでも、どこでも、誰にでも、そして安価な翻訳サ−ビスが利用できるシステム構成と方式、及び装置構成を提供することにある。 The object of the invention is to try to resolve an object of the present invention is to solve the conventional problems described above, anytime, anywhere, to anyone, and low-cost translation service - the system configuration and system screws can be used, and the device configuration It is to provide a.

【0004】 [0004]

【課題を解決するための手段】上記目的を達成するために、本発明では、無線、あるいは有線基地局に自動翻訳装置を配置し、安価で、かつ簡便な携帯端末装置を基地局と無線、あるいは有線にて連結した構成の翻訳システムを提案し、利用者がいつでも、どこでも自由に、利用したい国の言語の翻訳結果のサ−ビスを受けることを可能としている。 To achieve the above object, according to the solution to ## in the present invention, wireless, or automatic translation device arranged wired base station, inexpensive, and simple portable terminal device with a base station wirelessly, or proposed a translation system of construction which is connected by wire, even the user anytime, anywhere freely, the country of the language of the translation result you want to use service - is it possible to receive a screw.

【0005】 [0005]

【作用】携帯端末と基地局で構成されるシステムおいて、携帯端末での音声を取り込むマイク機能は利用者の発声した音声を収音するために作用し、音声をデジタル信号へ変換するA/D変換機能は収音した音声を信号処理するために作用し、音声を認識する音声認識機能は発声された言語を他の言語に翻訳するために、発声した音声を言語表記に変換するために作用し、音声認識結果を無線あるいは、有線にて基地局へ送信する機能は携帯端末から入力された情報を基地局へ送信するために作用し、基地局での携帯端末からの信号を受信する機能は携帯端末で入手し、処理した情報を受け取るために作用し、音声認識結果を他の言語へ翻訳する機能は発声された言語を自動的に翻訳するために作用し、翻訳された結果の情報を携帯端末へ送 [Action] Keep system including a mobile terminal and a base station, a microphone function of taking the voice on mobile devices acts to pick up speech uttered by the user, converts the voice into a digital signal A / D conversion function acts to audio signal processing picked up, in order to translate the language voice recognition function of recognizing speech uttered in another language, to convert the speech uttered in language notation acts, or wireless speech recognition result, the ability to transmit by wire to the base station is operable to transmit the information input from the mobile terminal to the base station, receives a signal from the mobile terminal at the base station feature available on mobile devices, and acts to receive the processed information, the ability to translate the speech recognition result to other languages ​​acts to automatically translate the language spoken, translated results send the information to the portable terminal する機能翻訳結果を他の端末の利用者が受け取ることができるために作用する。 Acting functions translation result that in order to be able to receive the user of the other terminal.

【0006】また、自動翻訳機能付き無線携帯端末及びシステムにおいて、基地局に置かれた音声認識機能を持つ音声認識サ−バは、複数の携帯端末から入力された複数の音声を同時、あるいは逐次に処理を行ない、携帯端末ではできない高度な音声認識処理を、相対的に安価に実行するために作用する。 [0006] In the automatic translation function wireless portable terminals and systems, speech recognition service with a voice recognition function placed in the base station - Bas, a plurality of voice input from a plurality of mobile terminals simultaneously or sequentially, It performs processing, advanced speech recognition processing can not be a mobile terminal, operative to relatively inexpensively performed.

【0007】携帯端末からの送信信号に言語の種類を識別する符号を付ける手段は、多国語翻訳システムおいて、入力された音声が何の言語かを用意に判定できるようにするために作用する。 [0007] means for a sign identifying the type of language to the transmission signal from the mobile device, keep multilingual translation system operative to voice input to be able to determine the available what language .

【0008】また、基地局から送信される情報を音声多重、あるいは手話画像、または音声多重と手話画像を送信する手段は、複数の言語の翻訳結果を同時に複数の利用者に送るために作用し、さらに手話画像は手話者が健聴者が話したこと場を手話で理解できるようにするために作用する。 Further, it means for transmitting sound multiplex information transmitted from the base station, or sign language video, or audio multiplexed and sign language image acts to send a plurality of language translation results simultaneously to a plurality of users further sign language image acts in order to be able to understand sign language that field signer has spoken hearing person.

【0009】この際、基地局から送信される情報である音声多重、手話画像に対応して、送信情報に音声言語の識別、あるいは手話画像の識別情報を付加する手段は、 [0009] At this time, the sound multiplex is information transmitted from the base station, in response to sign language image, means for adding identification information of the identification of the spoken language or sign language image transmission information,
携帯端末側で利用したい言語、あるいは手話を前もって選択できるようにするために作用する。 Language you want to use the portable terminal, or acts in order to be able to preselect the sign language.

【0010】一方、基地局から送信される情報を受信する携帯端末の機能として存在する音声多重信号を受信する機能は、基地局から送信される音声多重信号を利用者が確実に受信するために作用し、受信した情報を音声として出力する機能は利用者が翻訳結果を音声で聞き取ることができるために作用する。 On the other hand, it functions to receive audio multiplexed signal present as a function of the mobile terminal receiving the information transmitted from the base station, a sound multiplex signal transmitted from the base station to the user to reliably receive act, function of outputting the received information as sound acts to a user can hear the translation result by voice.

【0011】また、基地局から送信される情報を受信する携帯端末の機能として存在する手話画像を受信し、受信した画像を表示する機能は手話利用者が同時の本発明の翻訳システムを利用することができるように作用する。 Further, receiving a sign language image existing as a function of the mobile terminal receiving the information transmitted from the base station, a function of displaying the received image is sign language user uses a translation system of simultaneous invention to act so that it can.

【0012】この際、基地局から送信される情報を受信する携帯端末におけて、音声を受信する機能、あるいは手話画像を受信する機能の一つを前もって設定できる構成とする手段や、音声多重信号を受信する機能として、 [0012] At this time, and means to be put in a mobile terminal that receives information transmitted from the base station, function to receive audio, or preset one function of receiving sign language image configuration, sound multiplex as a function of receiving a signal,
言語の種類を選別して受信できるチャネルセレクタ機能を具備することは、基地局から送信されて来る複数の言語での翻訳結果や、手話画像の中から、利用者が前もって必要な内容を指定するために作用したり、その場で自由に選択できるために作用する。 Be provided with a channel selector function capable of receiving by selecting the type of language, the translation result and in several languages ​​transmitted from the base station, from among the sign language video, specifies the prerequisite content users or acting for, to act in order to be selected freely on the spot.

【0013】 [0013]

【実施例】以下、実施例を詳細に説明する。 EXAMPLES In the following, a description will be given of an embodiment in detail. 図1は、本発明の骨子である自動翻訳機能付き携帯端末及びシステムの概念図を示す。 Figure 1 shows a conceptual diagram of an automatic translation function-equipped mobile terminal and system is the gist of the present invention. 携帯端末101〜104は、お互いが基地局100に無線、あるいは場合によっては有線にて接続される。 The mobile terminal 101 to 104, another wireless base station 100, or in some cases are connected by wire. このネットワ−ク構成において、携帯端末101は音声を取り込めるマイク機能が備わっており、マイクから入力された音声情報は無線105を介して基地局100に送信され、基地局では音声認識機能と自動翻訳機能により、受信した音声の内容を他の言語へ翻訳し、翻訳した結果を携帯端末へ無線で送信する。 The networks - in click configuration, the portable terminal 101 is equipped with a microphone function capture audio, voice information inputted from the microphone is transmitted to the base station 100 via the radio 105, voice recognition and automatic translation in base station function allows to translate the contents of the voice received into another language, wirelessly transmitting the result of the translation to the portable terminal. この結果、本発明の携帯端末システムを利用して、いつでも、どこでも、誰でも自由に、他の言語を母国語の言語へ翻訳した結果を受け取ることができ、他の言語による会話や情報サ−ビスを理解できるようになる。 As a result, by using a mobile terminal system of the present invention, anytime, anywhere, by anyone, as a result of the translation of the other language native language to the language you can receive, conversation in another language and information service - It will be able to understand the screws. 基地局から送信される情報は、多国語への翻訳結果を翻訳文字コ−ド情報106で送信した情報や、音声多重情報107、あるいは手話画像情報108など多種の形態が考えられる。 Information transmitted from the base station, the translation result to the multi-language translation character code - information and transmitted in de information 106, various forms are conceivable, such as audio multiplex information 107 or sign language image information 108,. このような多種の形態で送信される情報を、使用者は必要な言語の音声や、手話画像を選択して受け取り、各個人の携帯端末に出力、あるいは表示して翻訳結果のサ−ビスを受け取ることになる。 Information such transmitted in various forms, the user language and audio necessary, receive select a sign language video, Sa output to each individual mobile device, or view and translation result - bis It will receive. この際、発信元である携帯端末101では、 At this time, the portable terminal 101 is the source,
通常のマイク機能だけの場合もあり、また携帯端末で入力された音声を分析して、認識し、基地局へ送信する情報は音声ではなく、認識した結果の文字コ−ド情報となる場合もある。 May only normal microphone function, also analyzes the speech input in a mobile terminal, recognizing, information to be transmitted to the base station is not a speech recognition result of the character code - may be de Information is there. 携帯端末としては、電話付きの携帯端末、画像表示機能のあるディスプレイ付きの形態などが考えられる。 The mobile terminal, telephone with a portable terminal, such as a display with a form of the image display function can be considered. 図2は、基地局100で行なわれる翻訳処理の例を示す図である。 Figure 2 is a diagram illustrating an example of a translation process performed by the base station 100. 例えば、日本語の情報が入力された場合、英語や他の言語への翻訳が実行されて、その翻訳結果の文字コ−ド情報、さらに音声や手話画像に変換された情報が生成され、基地局から各携帯端末へ翻訳結果の情報が発信される。 For example, if the Japanese information is entered and executed translation into English and other languages, the translation result character code - de information, more information converted into audio and sign language video is generated, the base information of the translation result is transmitted to each mobile terminal from the station. 各携帯端末では必要な言語の情報を選択して、表示・出力して翻訳結果を利用することになる。 Each in a portable terminal to select the information in the required language, will use the translation result to display and output. 第2図に示されるように、翻訳結果は英語やドイツ語など多種の言語翻訳が同時に処理され、生成される。 As shown in FIG. 2, the translation result is language translation of a wide such as English and German are processed at the same time, is generated. また、言語翻訳情報は、少なくとも翻訳文字情報10 In addition, language translation information, at least the translation character information 10
6、翻訳言語音声情報107、さらに翻訳言語の手話画像情報108の3つの形態がある。 6, the translation language speech information 107, there are further three forms of translation language sign language image information 108.

【0014】図3は、携帯端末101の構成の一実施例を示すブロック図である。 [0014] Figure 3 is a block diagram showing an embodiment of a configuration of the mobile terminal 101. 携帯端末から入力された音声情報1010は、まず音声入力部1011にてアナログ信号がデジタル信号へと変換される。 Audio information 1010 input from the mobile terminal, an analog signal is converted into a digital signal first in the voice input unit 1011. 音声入力部1011の構成は、アナログ信号にサンプリング処理を施してデジタル信号へと変換する際の折り返し雑音の混入を避けるために実行される、低域通過フィルタ(LPF)処理10111と、アナログ信号をデジタル信号へと変換するA/D変換1011 Configuration of a voice input unit 1011 is performed in order to avoid contamination of the aliasing noise when converted into a digital signal by performing sampling processing to an analog signal, a low pass filter (LPF) processing 10111, the analog signal a / D converter 1011 for converting into a digital signal
2からなっている。 It consists of 2. その後、デジタル信号は、送信部101 Thereafter, the digital signal is transmitting unit 101
2から基地局へ、携帯端末送信信号105として送信される。 From 2 to the base station, and transmitted as a mobile terminal transmission signal 105. あるいは、携帯端末装置に音声認識分1002が搭載されている構成では、音声認識が実行され、認識結果のコ−ド情報が基地局へ送信されることになる。 Alternatively, in the configuration in which the speech recognition component 1002 to the portable terminal apparatus is mounted, speech recognition is performed, the recognition result co - would de information is transmitted to the base station.

【0015】図4は、基地局100の構成の一実施例を示すブロック図である。 [0015] Figure 4 is a block diagram showing an embodiment of a configuration of the base station 100. 基地局100の構成は、携帯端末送信信号105を受信機1001にて受信し、音声認識がまだ施されていない場合は、音声認識部1002にて音声信号から音声認識結果の文字・単語列情報が生成され、次に言語翻訳部1003にて元言語の翻訳処理が実行され、翻訳言語情報が生成される。 Configuration of the base station 100 receives the mobile terminal transmission signal 105 at receiver 1001, if the speech recognition does not yet subjected character-word string information of the speech recognition result from the speech signal by the speech recognition unit 1002 There is produced, the translation process of the source language by the language translation unit 1003 then is executed, translated language information is generated. 翻訳言語情報は、さらに音声/手話画像変換部1004にて翻訳言語音声情報107と、翻訳言語に対応する手話画像情報108に変換される。 Translation language information is further converted and the translation language voice information 107 by voice / sign language image conversion unit 1004, a sign language image information 108 corresponding to the translated language. この結果、 As a result,
翻訳言語情報は音声翻訳文字情報106も加えて3種の情報形態が存在し、いずれも送信機1005から各携帯端末へ送信されることになる。 Translation Language information three forms of information in addition also speech translation text information 106 is present, both to be transmitted from the transmitter 1005 to the portable terminal.

【0016】図5は、音声認識部1002の詳細の一実施例を示すブロック図である。 [0016] Figure 5 is a block diagram showing an embodiment of details of speech recognition section 1002. 入力音声1010は、まず音声分析部10021にて分析されて、音声の特徴を表すパラメ− Input speech 1010, is first analyzed by speech analysis unit 10021, parameter representing the characteristics of the speech -
タが抽出される。 Data is extracted. 音声分析の代表な方式として、線形予測分析(Linear Predictive Coding)方式があり、代表的な音声のパラメ−タとしては、線形予測分析から抽出されるLPCケプストラムなどがある。 Representative schemes of speech analysis, there is a linear prediction analysis (Linear Predictive Coding) method, parameters representative voice - The data, and the like LPC cepstrum extracted from the linear prediction analysis. 線形分析方式に関しては、文献「音声情報処理の基礎」、斎藤収三、中田和男著(オ−ム社)を参照すれば、容易に実現できる。 For the linear analysis method, the literature "Fundamentals of Speech Processing", Saito Osamusan, Author Kazuo Nakata - Referring to (e beam Inc.) can be easily realized. 分析されて求められた音声のパラメ−タを基に、H Analyzed by the speech obtained parameters - data on the basis of, H
MM(Hidden Markov Models)マッチング部10022では、既に標準パタ−ンとして算出されて格納されている音の素を表わすVQ(Vector Quantization)コ−ドブック10024と、音節や単語など認識の基本となるパタ− In MM (Hidden Markov Models) matching unit 10022, already standard pattern - VQ (Vector Quantization) representing the original sound stored is calculated as emissions co - the codebook 10024, the basis for recognition such as syllables and words pattern -
ンなどが音の素でどう繋がっているかを表わしたHMM HMM that such emissions are expressed whether the connected if the original sound
ネットワ−クモデル10025との対応関係を算出することで、入力音声の認識が実行される。 Networks - by calculating the correspondence between the Kumoderu 10025, recognition of the input speech is performed. この結果、認識単語候補列が複数求められ、言語処理部10023にて単語列としての文の内容が決定される。 As a result, recognized word candidate string is found more, the content of sentence as a word sequence is determined by the language processing unit 10023. この際、言語の統語規則、意味規則を表した言語情報10026を参照して、言語処理が実行される。 At this time, syntactic rules of the language, with reference to the language information 10026 showing the semantics, the language processing is executed. この結果、文を構成している単語列コ−ド10027が出力される。 As a result, the word constitute a statement Liezi - de 10027 is output. 通常、単語列コ−ド10027 Normally, the word Liezi - de 10027
は、可能性のある複数の候補を含んだ形式である、単語、あるいは文節ラティスの形で出力される。 Is a format that includes a plurality of potential candidates is output word or in the form of clause lattice.

【0017】図6は、音声翻訳部1003の詳細の一実施例を示すブロック図である。 [0017] FIG. 6 is a block diagram showing an embodiment of details of speech translation unit 1003. 原言語の音声を認識して得られた単語列コ−ド10027を入力として、まず原言語解析部 10031にて、原言語の統語(構文)解析と、意味解析が行なわれ、言語変換部10032にて、意味構造を表現する構造に変換される。 Words obtained by recognizing speech of the source language Liezi - the de 10027 as input, at first the source language analysis unit 10031, and syntactic (syntax) analysis of the source language, semantic analysis is performed, the language conversion unit 10032 at, is converted to structure representing a semantic structure. この際に、辞書、統語文法、言語意味情報に関する知識ベ−スで構成された原言語情報10 In this case, dictionary, syntactic grammar, knowledge base about the language semantic information - original language information is configured vinegar 10
034が、解析と変換処理の知識デ−タとして使われる。 034 is, knowledge data of the analysis and the conversion process - is used as the data.
次に、翻訳言語生成部10033にて、翻訳された言語が生成される。 Next, in the translation language generation unit 10033, translated language is generated. この際、翻訳言語の言語情報10035が利用される。 In this case, the language information 10035 is the use of the translation language. その結果、翻訳言語の出力文10036が、出力される。 As a result, the output statement 10036 of the translation language is output.

【0018】図7は、音声/手話画像変換部1004の一実施例の詳細を示すブロック図である。 [0018] FIG. 7 is a block diagram showing details of one embodiment of the audio / sign language image converting unit 1004. 文字単語列コ−ド Letter word Liezi - de
10036を入力として、音声変換部ではまず言語解析が言語解析部10041にて実行される。 As inputs 10036, first, the language analysis is performed by the language analysis unit 10041 in speech conversion unit. ここでは、文字単語列を入力としたが、場合によっては、言語変換部10032から直接入力された、文字単語列に変換される前の言語意味を表現した言語変換情報であることも可能である。 Although referred to here as the input character word string, in some cases, is input directly from the language conversion unit 10032, can also be a language conversion information representing the language meaning before being converted into a character string of words . 次に、規則音声合成部10042の韻律情報付与部100421において、音の声質、高さを規定する基本周波数(ピッチ) Then, the prosodic information adding unit 100421 rule speech synthesis unit 10042, the sound voice fundamental frequency defining a height (pitch)
と、アクセントなどの韻律情報が付与される。 If, prosodic information such as accent is given. 音に依存した韻律情報は、規則合成用情報10044から読み込まれて利用される。 Prosody-dependent information sound is used is read from the rule synthesizing information 10044. その後、音声片結合変換部100422にて、 Then, by voice piece coupling conversion unit 100422,
音声の素片が規則合成用情報10044から読み込まれた音素片と結合ル−ルを基に、結合され、音声情報が生成される。 Coupling Le phonemic piece audio segment is read from the rule synthesizing information 10044 - based on Le is coupled, the audio information is generated. 結果は、D/A10034において、D/A変換処理を施されて、翻訳された言語の音声情報107として出力される。 Results in D / A10034, is subjected to D / A conversion, it is outputted as the audio information 107 of the translated language.

【0019】一方、手話画像変換部では、文字単語列10 [0019] On the other hand, in sign language image conversion unit, a character string of words 10
036を入力として、手話生成部10045の手話片結合部1004 As input 036, sign language sign language generator 10045 piece coupling portion 1004
7において、手話合成用情報10047から読み込まれた手話の画像素片と、変換ル−ルとを利用して、手話片の結合部が行なわれ、手話調整部100452での調整を経て、手話画像が決定される。 In 7, the image segment of sign language read from the sign language synthesis information 10047, converted Le - through using the Le, coupling portion of the sign language piece is performed, the adjustment in the sign language adjuster 100 452, sign language images There are determined. 結果は、手話CG生成部10046にて、3次元の手話CGとして表現され、最終的に翻訳言語の手話画像情報108が出力される。 Results at sign language CG generating unit 10046, is expressed as a three-dimensional sign language CG, sign language image data 108 ultimately translated language is output.

【0020】本処理では、音声/手話変換を行なわずに、入力の文字単語列コ-ドをそのままスル−で通して、翻訳文字情報106を出力することもある。 [0020] In the present process, without audio / sign language conversion, input of a character word Liezi - the de directly - through at sometimes outputs the translated text information 106.

【0021】図8は、受信機1001、送信機1005の一実施例の詳細を示すブロック図である。 [0021] Figure 8, the receiver 1001 is a block diagram showing details of one embodiment of the transmitter 1005. 受信機1001では送信信号(電波)を入力として、電波受信部10011にて送信信号の受信がなされ、電波からコ-ド/音声情報への変換が、コ-ド/音声変換部10012にて実行される。 In the receiver 1001 transmits signal (radio wave) as an input, reception of the transmission signal is performed by the radio receiver 10011, from a radio wave co - Conversion to de / audio information, co - executed by de / voice conversion unit 10012 It is. 変換に際しては、変換テ−ブル10013が利用される。 Upon conversion, the conversion Te - Bulle 10013 is used. 結果は、文字コ−ド列か音声情報である。 The results, character code - is a de string or voice information.

【0022】一方、送信機1005では、文字コ−ド列か音声情報を入力として、コ-ド/音声情報から電波への変換部10051にて、入力信号の変換が実行され、電波送信部1 On the other hand, the transmitter 1005, character code - as input de string or audio information, co - at conversion unit 10051 from de / audio information to the radio wave, converts the input signal is performed, radio wave transmitter 1
0052にて、電波の送信が実行され、送信信号(電波)が出力される。 At 0052, transmission of radio waves is performed, the transmission signal (radio wave) is output. この際、受信機における処理と同様に、変換テ−ブル10053が使用される。 At this time, similarly to the processing in the receiver, converted Te - Bulle 10053 is used.

【0023】図9は、音声多重情報セレクタ機能付き携帯端末の概念図を示すブロック図である。 FIG. 9 is a block diagram showing a conceptual view of a portable terminal with audio multiplex information selector function. 携帯端末103 Mobile terminal 103
は、少なくとも文字情報を表示する文字表示部と、音声多重情報を選択するセレクタ機能を有している。 Includes a character display unit for displaying at least character information, a selector function of selecting the sound multiplex information. また、 Also,
場合によってはマイクロホンやスピ−カ、イアホンジャックを装備していることもある。 In some cases, microphones and spin - mosquitoes, sometimes equipped with an earphone jack. 音声多重情報を選択するセレクタにより、使用者が必要とする言語で音声翻訳のサ−ビスを利用することが可能となっている。 The selector for selecting audio multiplexed information, service speech translation in a language that the user needs - it is possible to utilize bis.

【0024】図10は、手話画像表示機能付き携帯端末の概念図を示す図である。 FIG. 10 is a diagram showing a conceptual view of a portable terminal with sign language image display function. 図10に示すように、手話が3次元のCGにて実現され、身体の上半身が手話表示画面に表示される。 As shown in FIG. 10, sign language is realized in 3-dimensional CG, upper body of the body is displayed on the sign language display screen. さらに、手話に対応して、文字情報も表示される。 In addition, in response to the sign language, also character information is displayed.

【0025】図11は、本発明の一つである原言語と翻訳言語コ−ド付き表現の一実施例を示す概念図である。 FIG. 11 is a is one source language translation language co of the present invention - is a conceptual diagram showing an embodiment with de representation.
例えば、原言語が日本語である場合は、言語の表示コ− For example, if the original language is Japanese, the language of the display co -
ドに、日本語であることを示す特別なコ−ドが付加されている表現となっている。 The soil, the special co-indicate that it is a Japanese - has become a representation that de has been added. 実施例では、「+81」が日本語であることを示す特別コ−ドとなっている。 In an embodiment, the special co-indicates that the "+ 81" is the Japanese - has become a de. また、 Also,
翻訳された言語の表現として、実施例では各言語のメモリの先頭に、言語の種類を表す言語コ−ドが付加されている。 As a representation of interpreted languages, in the embodiment the head of the memory of each language, the language co indicating the type of language - de is added. 例えば、英語であるときは「+44」、ドイツ語である場合は「+49」となっている。 For example, when it is English is "+44", If you are a German "+49". さらに、手話言語の情報であることを示す手話言語コ−ド「+00」が付加されていることを特徴としている。 Furthermore, sign languages ​​co indicating the information of the sign language - is characterized by being added de "+00".

【0026】 [0026]

【発明の効果】本発明の結果、従来の翻訳サ−ビスでは不可能であった、いつでも、どこでも、誰にでも、そして安価な翻訳サ−ビスが利用できる翻訳サ−ビスのシステム構成と方式、及び装置構成を提供することが可能となり、ユ−ザにとって使い勝手が良い翻訳サ−ビスが供給できる効果がある。 The results of the present invention, the prior art of translation service - which was impossible with screws, anytime, anywhere, to anyone, and low-cost translation service - bis is available translated - bis system configuration and method , and it is possible to provide a device structure, Yu - bis there is an effect that can be supplied - good usability translated to tHE.

【0027】 [0027]

【図面の簡単な説明】 BRIEF DESCRIPTION OF THE DRAWINGS

【図1】本発明の概要を示す自動翻訳機能付き携帯端末及びシステムの概念図。 Conceptual view of a mobile terminal and system with automated translation showing an outline of the present invention; FIG.

【図2】本発明の概要を示す基地局での翻訳結果を示す説明図。 FIG. 2 is an explanatory diagram showing a translation result of the base station showing the outline of the present invention.

【図3】携帯端末の構成の一実施例。 An embodiment of Figure 3 of a mobile terminal configuration.

【図4】基地局の構成の一実施例。 An embodiment of Figure 4 of the base station configuration.

【図5】音声認識部の一実施例。 [5] One embodiment of the speech recognizer.

【図6】言語翻訳部の一実施例。 [6] One embodiment of the language translation unit.

【図7】音声/手話画像変換部の一実施例。 [7] One embodiment of the audio / sign language image conversion unit.

【図8】受信機・送信機の一実施例。 8 an embodiment of a receiver-transmitter.

【図9】音声多重情報セレクタ機能付き携帯端末の概念図。 FIG. 9 is a conceptual view of a mobile terminal with audio multiplex information selector function.

【図10】手話画像表示機能付き携帯端末の概念図。 FIG. 10 is a conceptual diagram of a mobile terminal with a sign language image display function.

【図11】原言語と翻訳言語コ−ド付き表現の一実施例。 [11] original language and translation language co - an embodiment of the prescription representation.

【符号の説明】 DESCRIPTION OF SYMBOLS

100…基地局、101〜104…携帯端末装置、10 100 ... base stations, 101 to 104 ... the mobile terminal device, 10
5…音声情報、106…翻訳文字情報、107…音声多重情報、108…手話画像情報、1001…受信部、1 5 ... audio information, 106 ... translated character information, 107 ... sound multiplex information, 108 ... sign language image data, 1001 ... receiving unit, 1
002…音声認識部、1003…言語翻訳部、1004 002 ... voice recognition unit, 1003 ... language translation unit, 1004
…音声/手話画像変換部、1005…送信部、1011 ... voice / sign language image conversion unit, 1005 ... the transmission unit, 1011
…音声入力部、1012…送信部。 ... audio input portion, 1012 ... the transmission unit.

───────────────────────────────────────────────────── フロントページの続き (51)Int.Cl. 6識別記号 庁内整理番号 FI 技術表示箇所 H04Q 7/04 D ────────────────────────────────────────────────── ─── front page continued (51) Int.Cl. 6 in identification symbol Agency Docket No. FI art display portion H04Q 7/04 D

Claims (8)

    【特許請求の範囲】 [The claims]
  1. 【請求項1】携帯端末と基地局で構成される自動翻訳システムおいて、少なくとも上記携帯端末は、音声を取り込むマイク機能と、音声をデジタル信号へ変換するA/ 1. A keep automatic translation system including a mobile terminal and a base station, at least the mobile terminal converts the microphone function of taking the voice, the voice into a digital signal A /
    D変換機能、音声を認識する音声認識機能、音声認識結果を無線あるいは、有線にて上記基地局へ送信する機能を有し、 上記基地局は携帯端末からの信号を受信する機能、音声認識結果を他の言語へ翻訳する機能、翻訳された結果の情報を携帯端末へ送信する機能を有することを特徴とした無線携帯端末を用いた自動翻訳システム。 D conversion function, to recognize speech voice recognition function, or wireless speech recognition result has a function to transmit to said base station via a wire, the base station function for receiving signals from the mobile terminal, the speech recognition result automatic translation system using a function or translated into another language, the wireless mobile terminal is characterized by having a function of transmitting the information of the translated result to the portable terminal.
  2. 【請求項2】上記音声認識機能を持つ音声認識サ−バを基地局に置くことを特徴とした請求項1記載の無線携帯端末を用いた自動翻訳システム。 Automatic translation system using a wireless portable terminal according to claim 1 which is characterized by placing the bar on the base station - wherein speech recognition support with the voice recognition function.
  3. 【請求項3】上記携帯端末からの送信信号に言語の種類を識別する符号を付けたことを特徴とした請求項1又は2記載の無線携帯端末を用いた自動翻訳システム。 3. An automatic translation system using a wireless portable terminal according to claim 1 or 2 wherein the wherein the, labeled identifying language type to transmit signals from the mobile terminal.
  4. 【請求項4】上記基地局から送信される情報は音声多重情報、あるいは手話画像情報、または音声多重情報と手話画像情報の両方を送信することを特徴とした請求項1 Wherein information transmitted from the base station audio multiplex information or sign language image information or claim 1 that has been characterized to transmit both audio multiplexed information and sign language image data,
    から3のいずれかに記載の無線携帯端末を用いた自動翻訳システム。 Automatic translation system using a wireless portable terminal according to any one of 3.
  5. 【請求項5】上記音声多重情報、上記手話画像情報のそれぞれに対応して、音声言語の識別、あるいは手話画像の識別情報が付加されていることを特徴とした請求項4 Wherein said sound multiplex information, corresponding to each of the sign language image information, according to claim 4 in which identification of the spoken language, or the identification information of the sign language images characterized in that it is added
    記載の無線携帯端末を用いた自動翻訳システム。 Automatic translation system using a wireless mobile terminal according.
  6. 【請求項6】複数種類の言語を多重化した音声多重信号から言語の種類を選別して受信できるチャネルセレクタ機能を有し、この選別されて受信した信号に対応した言語の音声を出力する機能を持つことを特徴とした無線携帯端末装置。 6. have a channel selector function a plurality of types of languages ​​can be received by selecting a type of language from multiplexed audio multiplex signal, function of outputting the audio language that corresponds to the signal received is the selected wireless portable terminal device characterized by having a.
  7. 【請求項7】音声を取り込むマイク機能と、音声をデジタル信号へ変換するA/D変換機能、音声を認識する音声認識機能、音声認識結果を伝送路に出力する機能を有し、 上記音声認識結果に対応する他言語への翻訳情報を該伝送路より受信する機能を有し、上記翻訳情報として、音声多重情報、あるいは手話画像情報、または音声多重情報と手話画像情報の両方を受信することを特徴とする自動翻訳機能付き無線携帯端末。 A 7. A microphone function to capture audio, A / D conversion function for converting speech into digital signals, recognizes the speech voice recognition function, a function of outputting a speech recognition result to the transmission line, the voice recognition corresponds to the result of the translation information into other languages ​​have a function of receiving from said transmission path, as the translation information, receiving both voice multiplex information or sign language image data, or audio multiplexed information and sign language image data, automated translation with wireless mobile terminal and said.
  8. 【請求項8】音声を取り込むマイク機能と、音声をデジタル信号へ変換するA/D変換機能、音声を認識する音声認識機能、音声認識結果を伝送路に出力する機能を有し、 上記音声認識結果に対応する他言語への翻訳情報を該伝送路より受信する機能を有し、該受信機能は、音声、あるいは手話画像を受信する機能のいずれかを前もって設定できることを特徴とした自動翻訳機能付き無線携帯端末装置。 A 8. A microphone function to capture audio, A / D conversion function for converting speech into digital signals, recognizes the speech voice recognition function, a function of outputting a speech recognition result to the transmission line, the voice recognition a corresponding to the result of the translation information into other languages ​​a function of receiving from said transmission line, said receiving function, automatic translation functions, characterized in that it pre-set one of the functions of receiving a voice or sign language video, wireless mobile terminal device attached.
JP21155595A 1995-08-21 1995-08-21 Translation apparatus and the mobile terminal device Expired - Lifetime JP3473204B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP21155595A JP3473204B2 (en) 1995-08-21 1995-08-21 Translation apparatus and the mobile terminal device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP21155595A JP3473204B2 (en) 1995-08-21 1995-08-21 Translation apparatus and the mobile terminal device

Publications (2)

Publication Number Publication Date
JPH0965424A true true JPH0965424A (en) 1997-03-07
JP3473204B2 JP3473204B2 (en) 2003-12-02

Family

ID=16607753

Family Applications (1)

Application Number Title Priority Date Filing Date
JP21155595A Expired - Lifetime JP3473204B2 (en) 1995-08-21 1995-08-21 Translation apparatus and the mobile terminal device

Country Status (1)

Country Link
JP (1) JP3473204B2 (en)

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2001029725A1 (en) * 1999-10-18 2001-04-26 Costello Jan M Obtaining retail price information from a computer via telephone in different languages
EP1148695A2 (en) * 2000-04-21 2001-10-24 Nec Corporation Mobile terminal with an automatic translation function
WO2002030097A1 (en) * 2000-10-04 2002-04-11 Yozan Inc. Telephone device and translation telephone device
US6789093B2 (en) 2000-10-17 2004-09-07 Hitachi, Ltd. Method and apparatus for language translation using registered databases
US7117223B2 (en) 2001-08-09 2006-10-03 Hitachi, Ltd. Method of interpretation service for voice on the phone
US7130801B2 (en) 2000-10-17 2006-10-31 Hitachi, Ltd. Method for speech interpretation service and speech interpretation server
US7139696B2 (en) * 2000-07-05 2006-11-21 Iis Inc. Method for performing multilingual translation through a communication network and a communication system and information recording medium for the same method
JP2009212801A (en) * 2008-03-04 2009-09-17 Hitachi Communication Technologies Ltd Sound transmission system and program
JP2013046358A (en) * 2011-08-26 2013-03-04 Nippon Hoso Kyokai <Nhk> Content reproduction apparatus and content reproduction program

Cited By (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6301566B1 (en) * 1999-10-18 2001-10-09 Jan M. Costello Device and method for obtaining retail price information in different languages from a computer via telephone
WO2001029725A1 (en) * 1999-10-18 2001-04-26 Costello Jan M Obtaining retail price information from a computer via telephone in different languages
EP1148695A3 (en) * 2000-04-21 2004-02-25 Nec Corporation Mobile terminal with an automatic translation function
EP1148695A2 (en) * 2000-04-21 2001-10-24 Nec Corporation Mobile terminal with an automatic translation function
US6907256B2 (en) 2000-04-21 2005-06-14 Nec Corporation Mobile terminal with an automatic translation function
US7139696B2 (en) * 2000-07-05 2006-11-21 Iis Inc. Method for performing multilingual translation through a communication network and a communication system and information recording medium for the same method
WO2002030097A1 (en) * 2000-10-04 2002-04-11 Yozan Inc. Telephone device and translation telephone device
US6789093B2 (en) 2000-10-17 2004-09-07 Hitachi, Ltd. Method and apparatus for language translation using registered databases
US7130801B2 (en) 2000-10-17 2006-10-31 Hitachi, Ltd. Method for speech interpretation service and speech interpretation server
US7467085B2 (en) 2000-10-17 2008-12-16 Hitachi, Ltd. Method and apparatus for language translation using registered databases
US7117223B2 (en) 2001-08-09 2006-10-03 Hitachi, Ltd. Method of interpretation service for voice on the phone
JP2009212801A (en) * 2008-03-04 2009-09-17 Hitachi Communication Technologies Ltd Sound transmission system and program
JP2013046358A (en) * 2011-08-26 2013-03-04 Nippon Hoso Kyokai <Nhk> Content reproduction apparatus and content reproduction program

Also Published As

Publication number Publication date Type
JP3473204B2 (en) 2003-12-02 grant

Similar Documents

Publication Publication Date Title
US4473904A (en) Speech information transmission method and system
US6240392B1 (en) Communication device and method for deaf and mute persons
US5924068A (en) Electronic news reception apparatus that selectively retains sections and searches by keyword or index for text to speech conversion
US20020103646A1 (en) Method and apparatus for performing text-to-speech conversion in a client/server environment
US5839109A (en) Speech recognition apparatus capable of recognizing signals of sounds other than spoken words and displaying the same for viewing
US20030130852A1 (en) Headset with radio communication function for speech processing system using speech recognition
US20090198497A1 (en) Method and apparatus for speech synthesis of text message
US6934366B2 (en) Relay for personal interpreter
Rabiner Applications of voice processing to telecommunications
US6119086A (en) Speech coding via speech recognition and synthesis based on pre-enrolled phonetic tokens
US20060069567A1 (en) Methods, systems, and products for translating text to speech
US4424415A (en) Formant tracker
US5752230A (en) Method and apparatus for identifying names with a speech recognition program
US6161091A (en) Speech recognition-synthesis based encoding/decoding method, and speech encoding/decoding system
US7013273B2 (en) Speech recognition based captioning system
US5911129A (en) Audio font used for capture and rendering
US6701162B1 (en) Portable electronic telecommunication device having capabilities for the hearing-impaired
US6393403B1 (en) Mobile communication devices having speech recognition functionality
US6246672B1 (en) Singlecast interactive radio system
US6081780A (en) TTS and prosody based authoring system
US5815196A (en) Videophone with continuous speech-to-subtitles translation
US20030009342A1 (en) Software that converts text-to-speech in any language and shows related multimedia
US20060206335A1 (en) Method for remote control of an audio device
US4707858A (en) Utilizing word-to-digital conversion
US20100057461A1 (en) Method and system for creating or updating entries in a speech recognition lexicon

Legal Events

Date Code Title Description
FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20070919

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20080919

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20080919

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20090919

Year of fee payment: 6

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20090919

Year of fee payment: 6

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100919

Year of fee payment: 7

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100919

Year of fee payment: 7

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110919

Year of fee payment: 8

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120919

Year of fee payment: 9

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120919

Year of fee payment: 9

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130919

Year of fee payment: 10

EXPY Cancellation because of completion of term