JP2006295468A - Mobile communication terminal device - Google Patents

Mobile communication terminal device Download PDF

Info

Publication number
JP2006295468A
JP2006295468A JP2005112247A JP2005112247A JP2006295468A JP 2006295468 A JP2006295468 A JP 2006295468A JP 2005112247 A JP2005112247 A JP 2005112247A JP 2005112247 A JP2005112247 A JP 2005112247A JP 2006295468 A JP2006295468 A JP 2006295468A
Authority
JP
Japan
Prior art keywords
voice
user
communication terminal
unit
call
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
JP2005112247A
Other languages
Japanese (ja)
Inventor
Seiji Otsuka
誠次 大塚
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Holdings Corp
Original Assignee
Matsushita Electric Industrial Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Matsushita Electric Industrial Co Ltd filed Critical Matsushita Electric Industrial Co Ltd
Priority to JP2005112247A priority Critical patent/JP2006295468A/en
Publication of JP2006295468A publication Critical patent/JP2006295468A/en
Withdrawn legal-status Critical Current

Links

Images

Abstract

<P>PROBLEM TO BE SOLVED: To enable a user of a mobile communication terminal to flexibly and easily make a response to a termination call made by an originator (communication partner) without using a voice when the mobile communication terminal receives the termination call under a condition that the user of the mobile communication terminal is incapable of making a call-accepted response in a voice, and to enable the user of the mobile communication terminal to keep conversation with the communication partner even when a user on a call termination side is incapable of hearing the communication partner's voice. <P>SOLUTION: A voice synthesizing unit 106 and/or a voice identification unit 108 is provided in the mobile telephone terminal 100, a response message formed by the input of characters through a key control unit 104 is converted into audio data through a voice synthesizing unit 106, and the audio data can be transmitted from a radio communication unit 110. The audio signals of a communication partner are converted into character information through the audio identification unit 108, the character information can be displayed on a display unit 102, so that a conversation can be maintained silently. <P>COPYRIGHT: (C)2007,JPO&INPIT

Description

本発明は、無音応答機能(または、音声無しの会話を実現する機能)をもつ携帯通信端末装置に関する。   The present invention relates to a portable communication terminal device having a silent response function (or a function of realizing conversation without voice).

携帯通信端末(携帯電話端末等)に着信があったとき、そのユーザが、着呼応答できない状況下にあるために、すぐに応答できない場合がある(例えば、ユーザが電車に乗車中にである場合など)。   When a mobile communication terminal (such as a mobile phone terminal) receives an incoming call, the user may not be able to answer immediately because the user is unable to answer the incoming call (for example, the user is on a train) Case).

この場合には、応答しない、電話を切る、あるいは、ユーザが応答可能な場所に移動する(例えば、次の駅で降りる)、のいずれかの方法が採られる。   In this case, any method of not answering, hanging up, or moving to a place where the user can respond (for example, getting off at the next station) is adopted.

しかし、場所を変えられない場合は、電話に応答しないか、電話を切る以外に手はなく、発信者との通信はできない。この点にかんがみて、従来、携帯通信端末に、いわゆる無音応答機能を付加する提案がなされている(特許文献1参照)。   However, if the location cannot be changed, there is no hand other than answering the call or hanging up, and communication with the caller is not possible. In view of this point, conventionally, a proposal has been made to add a so-called silent response function to a mobile communication terminal (see Patent Document 1).

特許文献1に記載される無音応答機能は、「着信があったときに、発信者IDを基にして、その特定の発信者に関連付けられたメッセージのリストを自動的に携帯通信端末上に表示し、ユーザが、そのメッセージリストの中から1つを選択すると、その発信者に対してそのメッセージが自動的に流れ、これによって、無音で(つまり、ユーザが声を発することなく)発信者に応答することができる」というものである。
特開2001−168977号公報
The silent response function described in Patent Document 1 is “when a call is received, a list of messages associated with the specific caller is automatically displayed on the mobile communication terminal based on the caller ID. However, when the user selects one from the message list, the message automatically flows to the caller, thereby silently (ie, without the user speaking) I can respond. "
JP 2001-168977 A

上記の従来技術では、発信者への応答内容を事前に想定し、画面表示用メッセージの登録ならびに発信者への応答メッセージの録音を事前に行っておく必要がある。   In the above prior art, it is necessary to register the screen display message and record the response message to the caller in advance, assuming the response content to the caller in advance.

つまり、発信者に対して送信できるのは、定型のメッセージのみであり、想定外のやりとりが発生した場合には、臨機応変に応答を行うことができない。   That is, only a fixed message can be transmitted to the sender, and when an unexpected exchange occurs, a response cannot be made flexibly.

また、上記の従来技術で可能なのは、定型メッセージによる着信応答のみである。したがって、例えば、着信側の携帯通信端末のユーザが通話音声を聞き取れないような場合(周囲の騒音が大きい場合、あるいは、そのユーザが難聴者の場合等)には、何ら、有効な会話を成立させることができない。   In addition, the above-described conventional technique can only accept an incoming call response using a fixed message. Therefore, for example, when the user of the mobile communication terminal on the receiving side cannot hear the call voice (when the ambient noise is high, or when the user is a deaf person, etc.), an effective conversation is established. I can't let you.

本発明は、このような考察に基づいてなされたものであり、音声による着呼応答が不可な状況下において携帯通信端末に着信があった場合に、その携帯通信端末のユーザが、音声を発することなく発信者(通話相手)との間で、臨機応変かつ容易に着信に対する応答を行うことを可能とし、また、着信側のユーザが通話相手の音声を聞き取れない場合であっても、通話相手と有効な会話ができるようにすることを目的とする。   The present invention has been made based on such considerations, and when a mobile communication terminal receives an incoming call in a situation where an incoming call response by voice is impossible, the user of the mobile communication terminal emits a voice. The caller (calling party) can respond to the incoming call flexibly and easily, and even if the user on the receiving side cannot hear the voice of the other party, The purpose is to enable effective conversations with.

本発明の携帯通信端末装置は、キー操作部から入力された送信メッセージとしての文字情報を音声情報に変換する音声合成部、または、通話相手先から送られてきた音声情報を文字情報に変換する音声認識部、の少なくとも一つと、前記音声合成部から出力される音声情報を前記通話相手先に無線送信すること、または、通話相手先から無線通信により送られてくる音声情報を受信して前記音声認識部に供給すること、の少なくとも一つを実施可能な無線通信部と、前記キー操作部から入力された送信メッセージとしての文字情報の表示、または、前記音声認識部によって前記通話相手方からの音声情報を変換して得られる文字情報の表示、の少なくとも一つが可能な表示部と、を有する。   The mobile communication terminal device of the present invention converts voice information sent from a key operation unit into voice information, or converts voice information sent from a call partner into text information. At least one of a voice recognition unit and the voice information output from the voice synthesis unit is wirelessly transmitted to the call partner, or the voice information transmitted from the call partner by wireless communication is received and A wireless communication unit capable of performing at least one of supplying to the voice recognition unit, display of character information as a transmission message input from the key operation unit, or from the other party of the call by the voice recognition unit A display unit capable of displaying at least one of character information obtained by converting voice information.

携帯通信端末には、文字を入力する機能や、文字を表示できるディスプレイ(表示部)をもつものが多い。この点に着目し、携帯通信端末がもつ文字入力ならびに文字表示機能を発展させ、通話相手への着信応答メッセージを文字入力し、その文字による応答メッセージを音声に変換して相手方に送信したり(音声合成機能)、あるいは、通話相手からの受話音声を文字に変換してディスプレイ(表示部)上に表示することを可能とし(音声認識機能)、着信側の携帯通信端末のユーザが、音声を発することなく、自由かつ即座に、通話相手に応答をすることができるようにしたものである。すなわち、着信側のユーザが発信者への応答を行う際に、その場で応答したい内容を文字入力する機能、入力した内容を表示部にて確認しつつ音声形式にエンコードする機能(音声合成機能)、およびエンコードしたデータを発信者への応答メッセージとして即時送信する無線通信機能を実現することによって、音声による応答が困難な状況下において着信があった場合でも、状況に応じて臨機応変に(つまり、事前に想定される応答メッセージに限定されることなく)発信者との無音でのやりとりを行うことが可能となる。   Many portable communication terminals have a function of inputting characters and a display (display unit) that can display characters. Focusing on this point, the character input and character display function of the mobile communication terminal has been developed, the incoming response message to the call partner is input, the response message by the character is converted into voice and sent to the other party ( (Speech synthesis function) or received voice from the other party can be converted into characters and displayed on the display (display unit) (speech recognition function). It is possible to respond to the other party freely and immediately without making a call. In other words, when the user on the receiving side responds to the caller, the function to input the contents that the user wants to respond on the spot, the function to encode the contents to the voice format while confirming the input contents on the display (voice synthesis function) ), And the wireless communication function that immediately transmits the encoded data as a response message to the caller, even if there is an incoming call in a situation where it is difficult to respond by voice, In other words, it is possible to perform a silent exchange with the caller (not limited to a response message assumed in advance).

また、逆の状況として、着信側のユーザは発声が可能であるが、発信者の音声を聞き取ることができない場合も想定される。この状況に対応するために、発信者からの音声信号を受信する無線通信機能、受信した音声を認識して文字に変換する音声認識機能、認識した音声を画面上に文字で表示する機能を実現する。これによって、「発信者の音声が聞き取ることができない場合」でも、画面上に表示される文言を確認することにより、音声を聞き取ることなく発信者の発声内容を確認することが可能となる。この機能によれば、難聴者が、携帯通信端末を使用して相手と自由に通話をすることも可能となる。   Further, as a reverse situation, it may be assumed that the user on the receiving side can speak but cannot hear the caller's voice. To cope with this situation, a wireless communication function that receives the voice signal from the caller, a voice recognition function that recognizes the received voice and converts it into text, and a function that displays the recognized voice on the screen as characters To do. As a result, even when “the caller's voice cannot be heard”, it is possible to check the content of the caller's utterance without listening to the voice by checking the wording displayed on the screen. According to this function, it becomes possible for the hearing impaired person to freely talk with the other party using the mobile communication terminal.

また、自分の音声発生も不可であり、発信者の音声を聞き取ることもできない場合も想定される。この場合には、上記機能を組み合わせて使用し、文字による会話を成立させて、発信者と臨機応変かつ円滑に情報のやりとりを行うことが可能となる。また、本発明に必要な上記機能は全て、着信側の携帯通信端末のユーザが自機を操作することによって自由に利用することができるものであるため、発信者(通話相手)の通信機器を何ら制限することがなく、通話相手に負担を強いることもない。   Also, it is assumed that the user's voice cannot be generated and the caller's voice cannot be heard. In this case, a combination of the above functions can be used to establish a text conversation, so that information can be exchanged flexibly and smoothly with the caller. In addition, since all the functions necessary for the present invention can be freely used by the user of the mobile communication terminal on the receiving side by operating his / her own device, the communication device of the caller (calling party) can be used. There are no restrictions and there is no burden on the other party.

また、本発明の携帯通信端末装置の一態様は、前記音声合成部を有する携帯通信端末装置であって、前記通話相手先からの着信に応答して、前記キー操作部から送信メッセージとしての文字情報を入力しているときに前記通話相手先が終話した場合、その入力された文字情報を、前記通話相手先に、電子メールとして送信することが可能である。   Further, one aspect of the mobile communication terminal device of the present invention is a mobile communication terminal device having the voice synthesizer, wherein a character as a transmission message is sent from the key operation unit in response to an incoming call from the call partner. When the call partner ends when the information is being input, the input character information can be transmitted to the call partner as an e-mail.

着信があった場合に、文字による応答メッセージを作成中に、発信者(通話相手)が終話する場合があり得る。このままでは、発信者(通話相手)は、着信側の機器のユーザの状況を何ら理解することなく終話したことになり、コミュニケーションが全くとれないことになり、また、せっかく作成した文字による応答メッセージも無駄となってしまう。そこで、別途電子メールの作成処理を行うことなく、その作成された応答メッセージを、そのまま電子メールとして送信できる機能を設けたものである。これにより、終話した通話相手に、着信側のユーザからの情報を、迅速かつ効率的に伝えることができる。   When there is an incoming call, the caller (calling party) may end the call while creating a response message with text. If this is the case, the caller (calling party) will end the conversation without understanding what the user of the receiving device is, and will not be able to communicate at all. Is also wasted. Therefore, a function is provided in which the created response message can be sent as an e-mail as it is without performing a separate e-mail creation process. As a result, the information from the user on the incoming call side can be quickly and efficiently transmitted to the other party on the call.

また、本発明の携帯通信端末装置の他の態様は、前記音声合成部を有する携帯通信端末装置であって、前記通話相手先からの着信に応答して、前記キー操作部から送信メッセージとしての文字情報を入力している最中に、応答メッセージの作成中であることを示す情報を、前記通話相手先に送信する。   According to another aspect of the mobile communication terminal device of the present invention, the mobile communication terminal device includes the voice synthesizer. The key operation unit responds to an incoming call from the call partner as a transmission message. While the character information is being input, information indicating that a response message is being created is transmitted to the call partner.

応答メッセージ準備中(文字の入力中ならびに音声形式へのエンコード中等)には、発信者を待たせることになるため、この間、予め携帯電話端末内に記憶している合成メッセージや応答保留メロディ等を発信者に送出し、着信側のユーザが、現在、応答メッセージを作成中であることを発信者に伝えることを可能とするものである。これにより、発信者(通話相手)は、着信者側の状況を理解でき、応答メッセージが送られてくるのを安心して待つことができる。   While preparing a response message (during character input and encoding into a voice format, etc.), the caller will be kept waiting. During this time, a synthesized message, response hold melodies, etc. stored in the mobile phone terminal in advance will be displayed. The message is sent to the caller, so that the user on the receiving side can tell the caller that a response message is currently being created. As a result, the caller (call partner) can understand the situation on the callee side and can wait for the response message to be sent with peace of mind.

また、本発明の携帯通信端末装置の他の態様は、その携帯通信端末装置のユーザが、前記音声合成部の使用/不使用または前記音声認識部の使用/不使用を、選択的に切り替えることが可能である。   According to another aspect of the mobile communication terminal device of the present invention, a user of the mobile communication terminal device selectively switches use / non-use of the speech synthesis unit or use / non-use of the speech recognition unit. Is possible.

着信時には、音声による応答が困難な状況であったが、その後、状況が変化して、音声による応答が可能となる場合もあり得る。そこで、上記の無音応答機能(音声無しの会話実現機能)を使用して会話するか、通常どおり、音声によって会話するか、をユーザ自ら、選択して切り替えることを可能としたものである。着信応答メッセージを文字入力して発信者(通話相手)に送信したが、その後に、音声による応答(会話)が可能となった場合等には、すぐに通常の音声会話に切り替えることにより、臨機応変の対応ができ、携帯通信端末の利便性が向上する。   At the time of an incoming call, it was difficult to respond by voice. However, the situation may change after that, and it may be possible to respond by voice. Therefore, the user can select and switch between the conversation using the silent response function (conversation realizing function without voice) or the conversation using voice as usual. When an incoming response message is entered and sent to the caller (calling party), but it becomes possible to respond by voice (conversation) after that, the voice response is immediately switched to normal voice conversation. It is possible to respond to changes and improve the convenience of mobile communication terminals.

本発明によれば、携帯通信端末において、利便性の高い無音応答機能(文字入力による応答メッセージの送信)、文字通話機能(相手音声の文字による表示)、これらの双方を使用することによる音声無しの会話機能(着信側の機器で、文字のみで会話を成立させる機能)を実現することができる。   According to the present invention, in a mobile communication terminal, a highly convenient silent response function (transmission of response message by character input), a text call function (display by text of the other party's voice), and no voice by using both of them The conversation function (function to establish a conversation with only characters on the receiving device) can be realized.

これによって、着信側のユーザは、音声を発することなく文字によって情報を送信することができ、また、発信者から送信されてきた音声情報を文字情報として読み取ることができる。   As a result, the user on the receiving side can transmit information by characters without making a voice, and can read the voice information transmitted from the caller as character information.

したがって、着信側の携帯通信端末のユーザは、まったく音声を発することなく(かつ、音声を耳で聞くことなく)、文字のみで、即座に、自由に通話相手と会話することが可能となり、また、発信者と臨機応変かつ円滑に情報の交換を行うことが可能となる。   Therefore, the user of the mobile communication terminal on the receiving side can talk freely and freely with the other party without using any voice (and listening to the voice with his / her ears). It is possible to exchange information flexibly and smoothly with the sender.

また、上記の無音応答機能(ならびに、音声無しの会話機能)は、着信側の携帯通信端末のユーザが自機を操作することによって自由に利用することができるものであり、したがって、発信者(通話相手)の通信機器を何ら制限することがなく、通話相手に負担を強いることがない。   The silent response function (and the conversation function without voice) can be freely used by the user of the mobile communication terminal on the receiving side by operating his / her own device. There is no restriction on the communication device of the other party, and there is no burden on the other party.

また、文字による応答メッセージの作成中に終話が生じた場合でも、その応答メッセージを、別途の電子メールの作成処理を行うことなく、そのまま電子メールとして送信できる機能を設けることにより、終話した通話相手に、着信側のユーザからの情報を、迅速かつ効率的に伝えることが可能となる。   In addition, even if the end of a conversation occurs during the creation of a response message using text, the end of the conversation is provided by providing a function that allows the response message to be sent as an e-mail as it is without having to create a separate e-mail. It is possible to quickly and efficiently convey information from the user on the called side to the other party.

また、応答メッセージ準備中の期間において、予め記憶されている合成メッセージや応答保留メロディ等を、着信側の携帯通信端末から発信者側の機器に向けて送出することによって、発信者(通話相手)は、着信者側の状況を理解でき、応答メッセージが送られてくるのを安心して待つことができる。   In addition, during a period during which the response message is being prepared, a caller (calling partner) is sent by sending a pre-stored composite message, response hold melody, or the like from the mobile communication terminal on the receiving side to the device on the calling side. Can understand the situation of the called party and can wait for the response message to be sent.

上記の無音応答機能(音声無しの会話実現機能)を使用して会話するか、通常どおり、音声によって会話するか等、をユーザ自らが、選択して切り替えるようにすることによって、臨機応変の対応ができ、携帯通信端末の使い勝手が向上する。   The user can select and switch between the above-mentioned silent response function (conversation without voice function) or the normal voice conversation. This improves the usability of the mobile communication terminal.

本発明によって、音声による着呼応答が不可な状況下において携帯通信端末に着信があった場合に、その携帯通信端末のユーザが、音声を発することなく発信者(通話相手)との間で、臨機応変かつ容易に着信に対する応答を行うことが可能となり、また、着信側のユーザが通話相手の音声を聞き取れない場合であっても、通話相手と有効な会話ができるようになる。   According to the present invention, when there is an incoming call to a mobile communication terminal under a situation where an incoming call response by voice is impossible, the user of the mobile communication terminal does not make a sound with a caller (calling partner), It is possible to respond to incoming calls flexibly and easily, and even when the user on the receiving side cannot hear the voice of the other party, an effective conversation with the other party can be performed.

本発明によって、携帯通信端末装置(携帯電話端末、通信機能をもつPDA、無線通信機能をもつ携帯可能なパーソナルコンピュータ等)の高機能化を図り、付加価値を高めることができる。   According to the present invention, it is possible to increase the functionality and enhance the added value of a mobile communication terminal device (a mobile phone terminal, a PDA having a communication function, a portable personal computer having a wireless communication function, etc.).

次に、本発明の実施形態について、図面を参照して説明する。
(第1の実施形態)
Next, embodiments of the present invention will be described with reference to the drawings.
(First embodiment)

図1は、本発明の携帯通信端末装置(ここでは、携帯電話端末とする)の基本的構成を説明するためのブロック図である。   FIG. 1 is a block diagram for explaining a basic configuration of a mobile communication terminal device (here, a mobile phone terminal) according to the present invention.

図示されるように、携帯電話端末100のユーザは、無線基地局200を介して通話相手先の通信機器300のユーザと会話する。   As shown in the figure, the user of the mobile phone terminal 100 has a conversation with the user of the communication device 300 that is the communication partner via the radio base station 200.

この携帯電話端末100は、表示部(液晶ディスプレイ)102と、キー操作部(文字入力が可能なキーボード)104と、音声合成部(文字音声変換部)106と、音声認識部(音声文字変換部)108と、無線通信部110と、アンテナ112と、を有し、この構成によって、着信時の無音応答、ならびに、音声無しの通話相手との会話を実現する   The mobile phone terminal 100 includes a display unit (liquid crystal display) 102, a key operation unit (keyboard capable of inputting characters) 104, a voice synthesis unit (character-speech conversion unit) 106, and a voice recognition unit (speech-to-character conversion unit). ) 108, a wireless communication unit 110, and an antenna 112, and this configuration realizes a silent response at the time of incoming call and a conversation with the other party without voice.

音声合成部106と音声認識部108に関しては、必ずしも、双方ともが備わっている必要はなく、少なくともいずれか一方が備わっていればよい。   Both the speech synthesis unit 106 and the speech recognition unit 108 do not necessarily need to be provided, and it is sufficient that at least one of them is provided.

相手先の通信機器300から携帯電話端末100に着信があった場合、携帯電話端末100のユーザが音声を発することができない状況下の場合には、そのユーザは、文字入力を用いた無音応答動作を選択することができる。   When there is an incoming call from the communication device 300 of the other party to the mobile phone terminal 100, in a situation where the user of the mobile phone terminal 100 cannot make a voice, the user performs a silent response operation using character input. Can be selected.

すなわち、そのユーザは、キー操作部(キーボード)104を介して、応答メッセージを自由に作成する。作成された応答メッセージは、表示部(液晶ディスプレイ)102に表示され、ユーザが、その表示により作成した応答メッセージを確認する。   That is, the user freely creates a response message via the key operation unit (keyboard) 104. The created response message is displayed on the display unit (liquid crystal display) 102, and the user confirms the created response message.

そして、その応答メッセージの送信が選択されると、応答メッセージの文字情報(文字データ)が音声合成部(文字音声変換部106)に入力され、文字情報を音声形式のデータ(音声データ)にエンコードする。   When transmission of the response message is selected, the character information (character data) of the response message is input to the speech synthesizer (character-to-speech conversion unit 106), and the character information is encoded into speech format data (speech data). To do.

その音声データは、無線通信部110を介して、相手先の通信機器300に対して送信される。   The audio data is transmitted to the communication device 300 of the other party via the wireless communication unit 110.

また、携帯電話端末100のユーザが、通話相手(相手先の通信機器300のユーザ)からの通話音声を聞き取れない状況下にある(あるいは難聴者である)場合には、そのユーザは、通話音声を文字で表示するモードを選択することができる。   In addition, when the user of the mobile phone terminal 100 is in a situation where the call voice from the other party (the user of the communication device 300 of the other party) cannot be heard (or is a deaf person), the user Can be selected as a character display mode.

このモードが選択された場合には、無線通信部110を介して受信された通話音声は、音声認識部(音声文字変換部)において、文字情報(文字データ)にエンコードされ、その文字情報が、表示部(液晶ディスプレイ)102上に表示される。よって、携帯電話端末100のユーザは、その文字により、通話相手からの送信メッセージを認識することができる。   When this mode is selected, the call voice received via the wireless communication unit 110 is encoded into character information (character data) in the voice recognition unit (speech character conversion unit). It is displayed on the display unit (liquid crystal display) 102. Therefore, the user of the mobile phone terminal 100 can recognize a transmission message from the other party using the characters.

上記の2つの機能(文字による無音応答機能、ならびに、受信音声の文字による表示機能)の双方を使用することによって、携帯電話端末100のユーザは、音声を全く発することなく、相手先と会話することができる。   By using both of the above two functions (silent response function by characters and display function by characters of received voice), the user of the mobile phone terminal 100 has a conversation with the other party without producing any voice. be able to.

このように、本発明によれば、利便性の高い無音応答機能、ならびに、音声無しの会話機能を実現することができる。   Thus, according to the present invention, it is possible to realize a highly convenient silent response function and a conversation function without voice.

これによって、着信側のユーザは、音声を発することなく文字によって情報を送信することができ、また、発信者から送信されてきた音声情報を文字情報として読み取ることができる。したがって、着信側の携帯通信端末のユーザは、まったく音声を発することなく(かつ、音声を耳で聞くことなく)、文字のみで、即座に、自由に通話相手と会話することが可能となり、また、発信者と臨機応変かつ円滑に情報の交換を行うことが可能となる。   As a result, the user on the receiving side can transmit information by characters without making a voice, and can read the voice information transmitted from the caller as character information. Therefore, the user of the mobile communication terminal on the receiving side can talk freely and freely with the other party without using any voice (and listening to the voice with his / her ears). It is possible to exchange information flexibly and smoothly with the sender.

また、上記の無音応答機能(ならびに、音声無しの会話機能)は、着信側の携帯通信端末のユーザが自機を操作することによって自由に利用することができるものであり、したがって、発信者(通話相手)の通信機器を何ら制限することがなく、通話相手に負担を強いることがない。
(第2の実施形態)
The silent response function (and the conversation function without voice) can be freely used by the user of the mobile communication terminal on the receiving side by operating his / her own device. There is no restriction on the communication device of the other party, and there is no burden on the other party.
(Second Embodiment)

図2は、音声合成部のみをもつ携帯電話端末の具体的構成を示すブロック図である。図2において、図1と共通する部分には、同じ参照符号を付してある。   FIG. 2 is a block diagram showing a specific configuration of a mobile phone terminal having only a speech synthesizer. In FIG. 2, the same reference numerals are given to portions common to FIG. 1.

図示されるように、携帯電話端末100は、キーボード104と、音声合成部106と、アンテナ112と、無線通信部120と、音声コーデック122と、携帯電話端末100の全体の動作を統括的に制御する制御部126と、応答メッセージ作成中に、相手方に、現在応答メッセージ作成中であることを知らせるための合成メッセージあるいは合成メロディを送信する合成メッセージ・メロディ制御部128と、キーボード104から入力された文字情報(文字データ)を制御部126に供給する入力部130と、を有する。   As shown in the figure, the mobile phone terminal 100 controls the overall operation of the keyboard 104, the voice synthesis unit 106, the antenna 112, the wireless communication unit 120, the voice codec 122, and the mobile phone terminal 100. Input from the keyboard 104, a composite message / melody control unit 128 that transmits a composite message or composite melody for notifying the other party that a response message is currently being created, And an input unit 130 that supplies character information (character data) to the control unit 126.

図3は、携帯電話端末のユーザの機器操作と、携帯電話端末の動作と、無線通信の状態と、の相互関係の一例を時系列的に示す図である。   FIG. 3 is a diagram showing, in time series, an example of the interrelationship between the device operation of the user of the mobile phone terminal, the operation of the mobile phone terminal, and the state of wireless communication.

図3において、S401〜S404は、携帯電話端末100の主要な表示画面の形成処理を示す。また、A〜Fは、時点(時間軸上におけるタイミング)を示す。このA〜Fは、図4に示される各表示画面の表示時点(表示タイミング)に対応している。   In FIG. 3, S401 to S404 indicate main display screen forming processes of the mobile phone terminal 100. A to F indicate time points (timing on the time axis). A to F correspond to the display time points (display timings) of the display screens shown in FIG.

図示されるように、時点Aでは、携帯電話端末100は、待ち受け状態にある。そして、音声着信があると、携帯電話端末100は、表示部(図2では不図示、図1の参照符号102)に着信表示をして、着信をユーザに通知する(S400)。   As shown in the figure, at the time A, the mobile phone terminal 100 is in a standby state. When there is an incoming voice call, the cellular phone terminal 100 displays the incoming call on the display unit (not shown in FIG. 2, reference numeral 102 in FIG. 1) and notifies the user of the incoming call (S400).

ユーザが、その着信に応答すると、携帯電話端末100は、通話中である旨を示す通話中表示を行う(S401:時点B)。   When the user responds to the incoming call, the cellular phone terminal 100 displays a busy message indicating that the call is in progress (S401: time point B).

そして、文字入力モード(無音応答モード)が選択され、応答文言が入力されると、携帯電話端末100は、応答文言表示を行う(S402:時点C)。   When the character input mode (silent response mode) is selected and a response message is input, the mobile phone terminal 100 displays a response message (S402: time point C).

そして、送信が選択されると、応答メッセージの音声形式のデータへのエンコード(音声合成)が行われる(S403:時点D)。   When transmission is selected, the response message is encoded (voice synthesis) into voice format data (S403: time point D).

続いて、その音声形式のデータ(音声データ)の無線通信網(エアー)への送信処理がなされ(時点E)、無線通信部120と、アンテナ112を経由して、相手先に送信される。   Subsequently, transmission processing of the voice format data (voice data) to the wireless communication network (air) is performed (time E), and the data is transmitted to the other party via the wireless communication unit 120 and the antenna 112.

そして、携帯電話端末の表示部(図1の参照符号102)における表示は、通話中表示に切り替わる(S404)。   Then, the display on the display unit (reference numeral 102 in FIG. 1) of the mobile phone terminal is switched to a busy display (S404).

図4は、図3中の各時点(各タイミング)に対応した、携帯電話端末における表示画面の例を示す図である。図4中の、A〜Fは各々、図3に示される各手順の実行時点(実行タイミング)に対応している。   FIG. 4 is a diagram showing an example of a display screen on the mobile phone terminal corresponding to each time point (each timing) in FIG. Each of A to F in FIG. 4 corresponds to the execution time (execution timing) of each procedure shown in FIG.

図示されるように、時点Aでは待ち受け画面となっており、時点Bにおける通話中画面では、通話相手の名前(発呼者である山田太郎)が表示される。時点Cの応答文言表示画面では、「会議中なので、後で、折り返し電話します」という応答メッセージが表示される。   As shown in the figure, the screen is a standby screen at the time point A, and the name of the other party (Taro Yamada who is the caller) is displayed on the in-call screen at the time point B. On the response message display screen at the time point C, a response message “Since we are in a conference, I will call you back later” is displayed.

応答メッセージの作成期間中は、相手を待たせることになるため、相手先に、合成メッセージや保留メロディ等を送出して、現在、応答メッセージ作成中であることを通知する。これにより、その通話相手は、応答メッセージの着信を安心して(つまり、応答がないのを不安に思うことなく)待つことが可能である。   Since the other party is kept waiting during the response message creation period, a composite message, a hold melody, or the like is sent to the other party to notify that the response message is currently being created. As a result, the other party can wait for the incoming response message (that is, without worrying that there is no response).

時点Dの音声合成画面では、「変換中です。しばらくお待ち下さい。」という表示がなされる。この間、相手先への、合成メッセージや保留メロディ等の送出が継続される。この最中に、音声合成の中止が選択されると、通話中画面(時点Bの画面)に戻る。   On the speech synthesis screen at time D, a message “Conversion is in progress. Please wait.” Is displayed. During this time, transmission of the composite message, the hold melody, etc. to the other party is continued. During this time, if the speech synthesis is canceled, the screen returns to the in-call screen (time B screen).

音声合成が完了すると、時点Eの送信画面となる。この送信画面では、「送信中です。しばらくお待ち下さい。」と表示される。   When the speech synthesis is completed, the transmission screen at time E is displayed. On this transmission screen, “Sending. Please wait.” Is displayed.

送信が完了すると、時点Fの通話中画面となる。この状態では、再度、無音応答を行うことができ、また、通常の音声応答を行うこともできる。   When the transmission is completed, the in-call screen at time F is displayed. In this state, a silent response can be performed again, and a normal voice response can also be performed.

このように、本実施形態では、携帯電話端末に着信があった場合に、その携帯電話端末のユーザは、音声を発することなく、自由な文字入力による臨機応変な応答(自由度の高い無音応答)を行うことができ、これにより、携帯電話端末の利便性が向上する。
(第3の実施形態)
As described above, in this embodiment, when a mobile phone terminal receives an incoming call, the user of the mobile phone terminal does not make a voice and responds flexibly to a free character input (a silent response with a high degree of freedom). This improves the convenience of the mobile phone terminal.
(Third embodiment)

本実施形態では、携帯電話端末上で作成した応答メールを、そのまま電子メールとして送信する機能を、さらに設ける。   In the present embodiment, there is further provided a function of transmitting a response mail created on the mobile phone terminal as an e-mail as it is.

すなわち、着信があり、着信側のユーザが、文字による応答メッセージを作成している最中に、発信者(通話相手)が終話する場合があり得る。このままでは、発信者(通話相手)は、着信側のユーザの状況を何ら理解することなく終話したことになり、コミュニケーションが全くとれないことになる。また、せっかく作成した文字による応答メッセージも無駄となってしまう。   That is, there is a case where the caller (calling party) ends the call while there is an incoming call and the user on the called side is creating a response message with text. If this is the case, the caller (calling partner) will end the conversation without understanding the situation of the user on the receiving side, and will not be able to communicate at all. In addition, a response message using characters created with great effort is also wasted.

そこで、別途電子メールの作成処理を行うことなく、その作成された応答メッセージを、そのまま電子メールとして送信できる機能を設けたものである。これにより、終話した通話相手に、着信側のユーザからの情報を、迅速かつ効率的に伝えることができる。   Therefore, a function is provided in which the created response message can be sent as an e-mail as it is without performing a separate e-mail creation process. As a result, the information from the user on the incoming call side can be quickly and efficiently transmitted to the other party on the call.

図5は、携帯電話端末のユーザの機器操作と、携帯電話端末の動作と、無線通信の状態と、の相互関係の他の例を時系列的に示す図である。   FIG. 5 is a diagram showing another example of the interrelationship between the device operation of the user of the mobile phone terminal, the operation of the mobile phone terminal, and the state of wireless communication in time series.

図5において、時点Cに至るまでの手順(動作)は、図3に示す手順(動作)と同じであり、図5の場合、それ以降の手順(動作)が異なる。   In FIG. 5, the procedure (operation) up to time point C is the same as the procedure (operation) shown in FIG. 3, and the subsequent procedure (operation) is different in FIG.

すなわち、図5において、時点Cの直後に、相手が終話(回線の切断)を行う。すると、携帯電話端末100の表示部(液晶ディスプレイ)102には、応答メッセージの作成を継続するか否かの確認画面が表示される(S405:時点D)。   That is, in FIG. 5, immediately after time point C, the other party ends the call (line disconnection). Then, on the display unit (liquid crystal display) 102 of the mobile phone terminal 100, a confirmation screen as to whether or not to continue creating the response message is displayed (S405: time point D).

ユーザが、応答メッセージの作成の継続(YES(はい))を選択すると、自動的に電子メール作成画面に移行する(S406:時点E)。   When the user selects to continue creating the response message (YES), the screen automatically shifts to the e-mail creation screen (S406: time point E).

図6は、図5中の各時点(各タイミング)に対応した、携帯電話端末における表示画面の例を示す図である。図6中の、A〜Eは各々、図5に示される各手順の実行時点(実行タイミング)に対応している。   FIG. 6 is a diagram showing an example of a display screen on the mobile phone terminal corresponding to each time point (each timing) in FIG. In FIG. 6, A to E each correspond to the execution time (execution timing) of each procedure shown in FIG.

時点Aの待ち受け画面、時点Bの通話中画面、時点Cの応答文言表示画は、図4と同じである。   The standby screen at time point A, the in-call screen at time point B, and the response message display screen at time point C are the same as in FIG.

図示されるように、時点Dの確認画面では、「切断されました。メールを作成しますか?」という問いかけの文言が表示される。ここで、ユーザが「NO(いいえ)」を選択すると、待ち受け画面に戻り、「YES(はい)」を選択すると、時点Eのメール作成画面に移行する。   As shown in the drawing, on the confirmation screen at the time point D, a message for asking “You have been disconnected. Do you want to create a mail?” Is displayed. Here, if the user selects “NO (No)”, the screen returns to the standby screen, and if “YES (Yes)” is selected, the screen shifts to a mail creation screen at time point E.

時点Eのメール作成画面では、通話相手(終話した相手)のメールアドレスが、自動的に宛先に設定され、かつ、作成中であった応答メッセージの内容が、自動的に本文に設定される。それ以降は、通常のメール作成と同様に、本文編集等を行うことが可能となる。そして、メール本文の完成後、ユーザが送信を選択すると、電子メールが相手先に送信される。
(第4実施形態)
On the E-mail creation screen at time E, the mail address of the other party (the other party who ended the call) is automatically set as the destination, and the content of the response message being created is automatically set in the text. . After that, text editing and the like can be performed as in normal mail creation. When the user selects transmission after completion of the mail text, the electronic mail is transmitted to the other party.
(Fourth embodiment)

本実施形態では、携帯電話端末が、音声認識部のみを有している場合について説明する。本実施形態の携帯電話端末では、通話相手からの音声を文字に変換して表示部(液晶ディスプレイ)上に表示する。したがって、ユーザは、文字によって、相手の音声を読み取ることができる。   In the present embodiment, a case where the mobile phone terminal has only a voice recognition unit will be described. In the mobile phone terminal of this embodiment, the voice from the other party is converted into characters and displayed on the display unit (liquid crystal display). Therefore, the user can read the other party's voice by characters.

図7は、音声認識部のみをもつ携帯電話端末の具体的構成を示すブロック図である。図7において、図2と共通する部分には、同じ参照符号を付してある。   FIG. 7 is a block diagram showing a specific configuration of a mobile phone terminal having only a voice recognition unit. In FIG. 7, parts that are the same as those in FIG. 2 are given the same reference numerals.

図7の基本的な構成は、図2と同じであるが、図7では、音声合成部(106)の代わりに音声認識部108が設けられ、入力部(130)の代わりに出力部132が設けられ、また、合成メッセージ・メロディ制御部128が削除されている点で異なる。   The basic configuration of FIG. 7 is the same as that of FIG. 2, but in FIG. 7, a speech recognition unit 108 is provided instead of the speech synthesis unit (106), and an output unit 132 is provided instead of the input unit (130). It is different in that the composite message / melody control unit 128 is deleted.

図8は、携帯電話端末のユーザの機器操作と、携帯電話端末の動作と、無線通信の状態と、の相互関係のさらに他の例を時系列的に示す図である。   FIG. 8 is a diagram showing still another example of the interrelationship between the device operation of the user of the mobile phone terminal, the operation of the mobile phone terminal, and the state of wireless communication in time series.

図8において、時点Bに至るまでの手順(動作)は、図3に示す手順(動作)と同じであり、図8の場合、それ以降の手順(動作)が異なる。   In FIG. 8, the procedure (operation) up to time point B is the same as the procedure (operation) shown in FIG. 3, and the subsequent procedure (operation) is different in FIG.

すなわち、図8において、時点Bの直後に、ユーザが、通話相手からの音声の文字表示を選択する(つまり、モードの切替選択を行う)。すると、無線通信部110により受信された通話相手の音声信号は、音声認識部108に供給され、音声認識による文字情報への変換がなされる(S407)。   That is, in FIG. 8, immediately after time point B, the user selects the character display of the voice from the other party (that is, performs mode switching selection). Then, the other party's voice signal received by the wireless communication unit 110 is supplied to the voice recognition unit 108 and converted into character information by voice recognition (S407).

そして、相手音声の文字による表示画面が、表示部(液晶ディスプレイ)102上に表示される(S408:時点C)。   Then, a display screen using characters of the other party's voice is displayed on the display unit (liquid crystal display) 102 (S408: time point C).

図9は、図8中の各時点(各タイミング)に対応した、携帯電話端末における表示画面の例を示す図である。図9中の、A〜Cは各々、図8に示される各手順の実行時点(実行タイミング)に対応している。   FIG. 9 is a diagram showing an example of a display screen on the mobile phone terminal corresponding to each time point (each timing) in FIG. A to C in FIG. 9 respectively correspond to the execution time (execution timing) of each procedure shown in FIG.

図9において、着信があると、待ち受け画面(時点A)から通話中画面(時点B)に移行する。この時点Bでは、相手音声ならびに自分音声は、共に、音声信号として送受信される。   In FIG. 9, when there is an incoming call, a transition is made from the standby screen (time point A) to the in-call screen (time point B). At this point B, both the partner voice and the own voice are transmitted and received as voice signals.

また、ユーザが、通話相手からの音声の文字表示を選択する(つまり、モードの切替選択を行う)と、相手音声表示画面(時点C)に移行する。相手音声表示画面では、「明日の会議の予定ですが、時間を変更させて下さい。」という表示がなされる。   Further, when the user selects the character display of the voice from the other party (that is, performs the mode switching selection), the other party voice display screen (time point C) is displayed. On the other party's voice display screen, the message “Tomorrow's meeting is scheduled, but please change the time.” Is displayed.

この画面の状態では、相手音声ならびに自分音声は共に、音声信号として送受信されるのであるが、受信された相手音声は、スピーカから出力されるのではなく、文字にて画面に表示される。   In the state of this screen, both the other party's voice and one's own voice are transmitted and received as voice signals, but the received other party's voice is not output from the speaker but is displayed on the screen as characters.

これにより、例えば、音声を聞きづらい状況下であっても、携帯電話端末100のユーザは、通話相手からのメッセージを知ることができる。携帯電話端末100のユーザが難聴者である場合も同様である。
(第5の実施形態)
Thereby, for example, even in a situation where it is difficult to hear the voice, the user of the mobile phone terminal 100 can know the message from the other party. The same applies when the user of the mobile phone terminal 100 is a hearing-impaired person.
(Fifth embodiment)

図10は、音声合成部および音声認識部の双方を有する携帯電話端末の具体的な構成を示すブロック図である。図10に示される携帯電話端末の構成は、図2と図7に示される各構成を合わせたものである。図10において、図2および図7と共通する部分には、同じ参照符号を付してある。   FIG. 10 is a block diagram showing a specific configuration of a mobile phone terminal having both a voice synthesis unit and a voice recognition unit. The configuration of the mobile phone terminal shown in FIG. 10 is a combination of the configurations shown in FIGS. 2 and 7. 10, parts that are the same as those in FIGS. 2 and 7 are given the same reference numerals.

図示されるように、図10の携帯電話端末100は、音声合成部106および音声認識部108の双方を備えており、いずれか一方を選択的に使用して、「無音応答」や「文字による相手からのメッセージの文字による確認」を実現し、あるいは、それらの双方を使用して「音声無しの会話」を実現することができる。   As shown in the figure, the mobile phone terminal 100 of FIG. 10 includes both a voice synthesizer 106 and a voice recognizer 108, and selectively uses one of them to perform “silent response” or “character-based”. “Confirmation by text of message from the other party” can be realized, or both of them can be used to realize “voiceless conversation”.

図10の携帯電話端末100によれば、音声による応答が困難な状況下において着信があった場合でも、状況に応じて臨機応変に発信者との無音でのやりとりを行うことが可能となる。   According to the mobile phone terminal 100 of FIG. 10, even when an incoming call is received under a situation where it is difficult to respond by voice, it is possible to exchange silently with the caller according to the situation.

また、逆の状況として、着信側(携帯電話端末100)のユーザは発声が可能であるが、発信者の音声を聞き取ることができない場合も想定され、この場合には、相手からの音声メッセージを画面上に表示させて視覚によって確認する。この機能を用いると、難聴者が、携帯通信端末を使用して相手と自由に通話をすることも可能となる。   Further, as a reverse situation, it is assumed that the user on the receiving side (mobile phone terminal 100) can utter, but cannot hear the caller's voice. Display on the screen and check visually. If this function is used, a hearing-impaired person can also talk freely with the other party using a portable communication terminal.

また、自分の音声発生も不可であり、発信者の音声を聞き取ることもできない場合も想定される。この場合には、上記の諸機能を組み合わせて使用することによって、発信者と臨機応変かつ円滑にやりとりを行うことが可能となる。   Also, it is assumed that the user's voice cannot be generated and the caller's voice cannot be heard. In this case, it becomes possible to communicate with the sender flexibly and smoothly by using the above functions in combination.

また、本発明に必要な上記機能は全て、着信側の携帯通信端末のユーザが自機を操作することによって自由に利用することができるものであるため、発信者(通話相手)の通信機器を何ら制限することがなく、通話相手に負担を強いることもないという利点がある。   In addition, since all the functions necessary for the present invention can be freely used by the user of the mobile communication terminal on the receiving side by operating his / her own device, the communication device of the caller (calling party) can be used. There is an advantage that there is no restriction and there is no burden on the other party.

図11は、携帯電話端末のユーザの機器操作と、携帯電話端末の動作と、無線通信の状態と、の相互関係のさらに他の例を時系列的に示す図である。   FIG. 11 is a diagram showing still another example of the interrelationship among the device operation of the user of the mobile phone terminal, the operation of the mobile phone terminal, and the state of wireless communication in time series.

この図11においては、「無音応答」や「文字による相手からのメッセージの文字による確認」の双方を使用して、「音声無しの会話」を実現する例が示されている。   FIG. 11 shows an example of realizing “a conversation without voice” using both “silent response” and “confirmation by text of a message from the other party”.

図示されるように、時点Aでは、携帯電話端末100は、待ち受け画面になっている。この状態にて音声着信があると、着信表示がなされ(S400)、携帯電話端末100のユーザが着信応答動作を行うと、通話中表示に切り替わる(S401:時点B)。   As shown in the figure, at the time A, the mobile phone terminal 100 is in a standby screen. When there is an incoming voice call in this state, an incoming call display is made (S400), and when the user of the mobile phone terminal 100 performs an incoming call response operation, the call display is switched (S401: time point B).

ここで、携帯電話端末100のユーザが、相手音声の文字表示モードを選択すると(すなわち、モードの切り替えを選択すると)、通話相手の音声は、音声認識部108によって認識されて文字情報に変換される(S407)。そして、文字通話画面となる(S409:時点C)。   Here, when the user of the mobile phone terminal 100 selects the character display mode of the other party's voice (that is, when switching the mode is selected), the voice of the other party is recognized by the voice recognition unit 108 and converted into character information. (S407). Then, a character call screen is displayed (S409: time point C).

次に、携帯電話端末100のユーザが、文字入力モード(すなわち、無音応答モード)を選択して、応答メッセージを入力すると、応答文言の文字による表示がなされる(S410:時点D)。   Next, when the user of the mobile phone terminal 100 selects the character input mode (that is, the silent response mode) and inputs a response message, the response message is displayed in characters (S410: time point D).

続いて、携帯電話端末のユーザによって、応答メッセージの送信が選択されると、音声合成部106によって、応答メッセージの音声形式のデータへの合成が実施される(S410:時点E)。   Subsequently, when transmission of the response message is selected by the user of the mobile phone terminal, the voice synthesis unit 106 synthesizes the response message into voice format data (S410: time point E).

そして、音声信号がエアーに送信され(時点F)、再び、文字通話画面となる(時点G)。   Then, the voice signal is transmitted to the air (time point F), and the character call screen is displayed again (time point G).

図12は、図11中の各時点(各タイミング)に対応した、携帯電話端末における表示画面の例を示す図である。図12中の、A〜Gは各々、図11に示される各手順の実行時点(実行タイミング)に対応している。   FIG. 12 is a diagram showing an example of a display screen on the mobile phone terminal corresponding to each time point (each timing) in FIG. Each of A to G in FIG. 12 corresponds to the execution time point (execution timing) of each procedure shown in FIG.

時点Aでは、携帯電話端末100の表示部(液晶ディスプレイ)102は、待ち受け画面になっており、時点Bでは、通話中画面となっている。この状態で、相手音声を文字により表示するモードが選択されると(つまり、モードの切り替えが選択されると)、文字通話画面となる(時点C)。   At the time point A, the display unit (liquid crystal display) 102 of the mobile phone terminal 100 is a standby screen, and at the time point B, it is a busy screen. In this state, when a mode for displaying the other party's voice in characters is selected (that is, when mode switching is selected), a character call screen is displayed (time point C).

文字通話画面では、「明日の会議の予定ですが、時間を変更させて下さい」という通話相手のメッセージが表示される。この状態で、再び、モードの切り替えを行うと、時点Bの通話中画面に戻る。   On the text call screen, the message of the other party is displayed as “Tomorrow's meeting is scheduled, but please change the time”. If the mode is switched again in this state, the screen during the call at time point B is restored.

また、時点Cの文字通話画面の状態で、携帯電話端末100のユーザが、文字入力モード(無音応答モード)を選択し、応答メッセージをキー操作部(キーボード)104から入力すると、応答文言表示画面(時点D)に移行する。この状態では、通話相手に、合成メッセージや保留メロディーを送出し、応答メッセージを作成中であることを通知する。   When the user of the mobile phone terminal 100 selects the character input mode (silent response mode) in the state of the character call screen at time C and inputs a response message from the key operation unit (keyboard) 104, the response message display screen Move to (time point D). In this state, a synthetic message or a hold melody is sent to the calling party to notify that a response message is being created.

図12の文字通話画面(時点D)では、「今会議中なので、後で折り返し電話します」という応答メッセージが表示されている。   In the character call screen (time point D) in FIG. 12, a response message “Since we are in a conference now, I will call you back later” is displayed.

この状態で、携帯電話端末100のユーザが尾送信選択を行うと、音声合成画面(時点E)に移行する。この音声合成画面(時点E)の状態では、音声合成部106による音声合成処理がなされており、この間、表示部102の下側には、「変換中です。しばらくお待ち下さい。」という、携帯電話端末100のユーザに対するメッセージが表示される。   In this state, when the user of the mobile phone terminal 100 performs tail transmission selection, the speech synthesis screen (time E) is displayed. In the state of this speech synthesis screen (time E), speech synthesis processing is performed by the speech synthesizer 106. During this time, a mobile phone saying “Conversion is in progress. A message for the user of terminal 100 is displayed.

この状態において、携帯電話端末100のユーザが中止を選択すると、時点Cの文字通話画面に戻り、中止が選択されなければ、送信画面(時点E)に移行する。   In this state, if the user of the mobile phone terminal 100 selects cancel, the screen returns to the character call screen at time C, and if cancel is not selected, the screen shifts to the transmission screen (time E).

この送信画面(時点E)では、表示部102の下側に、「送信中です。しばらくお待ち下さい。」というメッセージが表示される。   In this transmission screen (time E), a message “Transmission is in progress. Please wait” is displayed below the display unit 102.

そして、送信が完了すると、文字通話画面に戻る(時点G)。   When the transmission is completed, the screen returns to the character call screen (time point G).

このように、携帯電話端末100のユーザは、音声を全く発することなく、また、相手の音声を聞き取ることなく、文字のみによって、臨機応変に相手と会話をすることができる。したがって、応答困難な状況下で着信があっても、適切な対応を迅速にとり、必要な情報の交換(意思の疎通の確保)を行うことができる。   As described above, the user of the mobile phone terminal 100 can talk with the other party flexibly by using only the characters without producing any voice or listening to the other party's voice. Therefore, even if there is an incoming call in a situation where it is difficult to respond, it is possible to promptly take an appropriate response and exchange necessary information (ensuring communication).

また、この機能を使用すれば、難聴者でも、他人の力を頼ることなく、自身のキー操作のみで、通話相手と文字によって会話することができる。この際、通話相手には、音声情報を送信されるため、通話相手は、健常者と通話するのと同様の感覚で、難聴者と会話をすることができる。   Also, if this function is used, even a deaf person can talk with the other party by means of characters only by operating their own keys without relying on the power of others. At this time, since voice information is transmitted to the other party, the other party can talk with the hearing impaired person in the same manner as when talking to a healthy person.

以上説明したように、本発明によれば、携帯通信端末において、利便性の高い無音応答機能(ならびに、音声無しの会話機能)を実現することができる。これによって、着信側のユーザは、音声を発することなく文字によって情報を送信することができ、また、発信者から送信されてきた音声情報を文字情報として読み取ることができる。したがって、着信側の携帯通信端末のユーザは、まったく音声を発することなく(かつ、音声を耳で聞くことなく)、文字のみで、即座に、自由に通話相手と会話することが可能となり、また、発信者と臨機応変かつ円滑に情報の交換を行うことが可能となる。   As described above, according to the present invention, a highly convenient silent response function (and a conversation function without voice) can be realized in the mobile communication terminal. As a result, the user on the receiving side can transmit information by characters without making a voice, and can read the voice information transmitted from the caller as character information. Therefore, the user of the mobile communication terminal on the receiving side can talk freely and freely with the other party without using any voice (and listening to the voice with his / her ears). It is possible to exchange information flexibly and smoothly with the sender.

また、上記の無音応答機能(ならびに、音声無しの会話機能)は、着信側の携帯通信端末のユーザが自機を操作することによって自由に利用することができるものであり、したがって、発信者(通話相手)の通信機器を何ら制限することがなく、通話相手に負担を強いることがない。   The silent response function (and the conversation function without voice) can be freely used by the user of the mobile communication terminal on the receiving side by operating his / her own device. There is no restriction on the communication device of the other party, and there is no burden on the other party.

また、文字による応答メッセージの作成中に終話が生じた場合でも、その応答メッセージを、別途の電子メールの作成処理を行うことなく、そのまま電子メールとして送信できる機能を設けることにより、終話した通話相手に、着信側のユーザからの情報を、迅速かつ効率的に伝えることが可能となる。   In addition, even if the end of a conversation occurs during the creation of a response message using text, the end of the conversation is provided by providing a function that allows the response message to be sent as an e-mail as it is without having to create a separate e-mail. It is possible to quickly and efficiently convey information from the user on the called side to the other party.

また、応答メッセージ準備中の期間において、予め記憶されている合成メッセージや応答保留メロディ等を、着信側の携帯通信端末から発信者側の機器に向けて送出することによって、発信者(通話相手)は、着信者側の状況を理解でき、応答メッセージが送られてくるのを安心して待つことができる。   In addition, during a period during which the response message is being prepared, a caller (calling partner) is sent by sending a pre-stored composite message, response hold melody, or the like from the mobile communication terminal on the receiving side to the device on the calling side. Can understand the situation of the called party and can wait for the response message to be sent.

上記の無音応答機能(音声無しの会話実現機能)を使用して会話するか、通常どおり、音声によって会話するか、をユーザ自らが選択して切り替えることを可能とすることにより、通話相手に負担をかけることなく、臨機応変の対応ができ、携帯通信端末の使い勝手が向上する。   Burden on the other party by enabling the user to select and switch between the above-mentioned silent response function (conversation without voice function) or normal voice conversation It is possible to adapt to the situation without spending time and improve the usability of the mobile communication terminal.

本発明によって、音声による着呼応答が不可な状況下において携帯通信端末に着信があった場合に、その携帯通信端末のユーザが、音声を発することなく発信者(通話相手)との間で、臨機応変かつ容易に着信に対する応答を行うことが可能となり、また、着信側のユーザが通話相手の音声を聞き取れない場合であっても、通話相手と有効な会話ができるようになる。   According to the present invention, when there is an incoming call to a mobile communication terminal under a situation where an incoming call response by voice is impossible, the user of the mobile communication terminal does not make a sound with a caller (calling partner), It is possible to respond to incoming calls flexibly and easily, and even when the user on the receiving side cannot hear the voice of the other party, an effective conversation with the other party can be performed.

本発明によれば、携帯通信端末装置(携帯電話端末、通信機能をもつPDA、無線通信機能をもつ携帯可能なパーソナルコンピュータ等)の高機能化を図り、付加価値を高めることができる。   According to the present invention, it is possible to enhance the functionality of a mobile communication terminal device (a mobile phone terminal, a PDA having a communication function, a portable personal computer having a wireless communication function, etc.) and increase added value.

本発明は、無音応答、ならびに、音声無しの通話相手との会話を実現するという効果を奏し、したがって、携帯電話端末や通信機能をもつPDA(パーソナルデジタルアシスタンス)等の携帯通信端末装置に利用することができる。   INDUSTRIAL APPLICABILITY The present invention has an effect of realizing a silent response and a conversation with a call partner without a voice, and is therefore used for a mobile communication terminal device such as a mobile phone terminal or a PDA (personal digital assistance) having a communication function. be able to.

本発明の携帯通信端末装置(携帯電話端末)の基本的構成を説明するためのブロック図The block diagram for demonstrating the basic composition of the mobile communication terminal device (mobile telephone terminal) of this invention 音声合成部のみをもつ携帯電話端末の具体的構成を示すブロック図Block diagram showing a specific configuration of a mobile phone terminal having only a speech synthesis unit 携帯電話端末のユーザの機器操作と、携帯電話端末の動作と、無線通信の状態と、の相互関係の一例を時系列的に示す図The figure which shows an example of the correlation of the apparatus operation of the user of a mobile telephone terminal, the operation | movement of a mobile telephone terminal, and the state of radio | wireless communication in time series. 図3中の各時点(各タイミング)に対応した、携帯電話端末における表示画面の例を示す図The figure which shows the example of the display screen in a mobile telephone terminal corresponding to each time (each timing) in FIG. 携帯電話端末のユーザの機器操作と、携帯電話端末の動作と、無線通信の状態と、の相互関係の他の例を時系列的に示す図The figure which shows the other example of correlation of the apparatus operation of the user of a mobile telephone terminal, the operation | movement of a mobile telephone terminal, and the state of radio | wireless communication in time series. 図5中の各時点(各タイミング)に対応した、携帯電話端末における表示画面の例を示す図The figure which shows the example of the display screen in a mobile telephone terminal corresponding to each time (each timing) in FIG. 音声認識部のみをもつ携帯電話端末の具体的構成を示すブロック図Block diagram showing a specific configuration of a mobile phone terminal having only a voice recognition unit 携帯電話端末のユーザの機器操作と、携帯電話端末の動作と、無線通信の状態と、の相互関係のさらに他の例を時系列的に示す図The figure which shows the further another example of the correlation of the apparatus operation of the user of a mobile telephone terminal, the operation | movement of a mobile telephone terminal, and the state of radio | wireless communication in time series. 図8中の各時点(各タイミング)に対応した、携帯電話端末における表示画面の例を示す図The figure which shows the example of the display screen in a mobile telephone terminal corresponding to each time (each timing) in FIG. 音声合成部および音声認識部の双方を有する携帯電話端末の具体的な構成を示すブロック図A block diagram showing a specific configuration of a mobile phone terminal having both a speech synthesis unit and a speech recognition unit 携帯電話端末のユーザの機器操作と、携帯電話端末の動作と、無線通信の状態と、の相互関係のさらに他の例を時系列的に示す図The figure which shows the further another example of the correlation of the apparatus operation of the user of a mobile telephone terminal, the operation | movement of a mobile telephone terminal, and the state of radio | wireless communication in time series. 図11中の各時点(各タイミング)に対応した、携帯電話端末における表示画面の例を示す図The figure which shows the example of the display screen in a mobile telephone terminal corresponding to each time (each timing) in FIG.

符号の説明Explanation of symbols

100 携帯電話端末
102 表示部(液晶ディスプレイ)
104 キー操作部(キーボード)
106 音声合成部(文字音声変換部)
108 音声認識部(音声文字変換部)
110 無線通信部
112 アンテナ
120 無線通信部
122 コーデック(音声コーデック)
124 スピーカ
126 制御部
128 合成メッセージ・メロディ制御部
130 入力部
132 出力部
200 無線基地局
300 通話相手の通信機器
100 mobile phone terminal 102 display unit (liquid crystal display)
104 Key operation unit (keyboard)
106 Speech synthesis unit (text-to-speech conversion unit)
108 Speech recognition unit (spoken character conversion unit)
110 wireless communication unit 112 antenna 120 wireless communication unit 122 codec (voice codec)
124 Speaker 126 Control Unit 128 Composite Message / Melody Control Unit 130 Input Unit 132 Output Unit 200 Wireless Base Station 300 Communication Device of Calling Party

Claims (4)

キー操作部から入力された送信メッセージとしての文字情報を音声情報に変換する音声合成部、または、通話相手先から送られてきた音声情報を文字情報に変換する音声認識部、の少なくとも一つと、
前記音声合成部から出力される音声情報を前記通話相手先に無線送信すること、または、通話相手先から無線通信により送られてくる音声情報を受信して前記音声認識部に供給すること、の少なくとも一つを実施可能な無線通信部と、
前記キー操作部から入力された送信メッセージとしての文字情報の表示、または、前記音声認識部によって前記通話相手方からの音声情報を変換して得られる文字情報の表示、
の少なくとも一つが可能な表示部と、
を有することを特徴とする携帯通信端末装置。
At least one of a voice synthesizer that converts character information as a transmission message input from the key operation unit into voice information, or a voice recognition unit that converts voice information sent from a call partner into character information;
Wirelessly transmitting voice information output from the voice synthesizing unit to the call partner, or receiving voice information transmitted from the call partner by wireless communication and supplying the voice information to the voice recognition unit; A wireless communication unit capable of performing at least one;
Display of character information as a transmission message input from the key operation unit, or display of character information obtained by converting voice information from the other party by the voice recognition unit,
A display unit capable of at least one of
A portable communication terminal device comprising:
請求項1記載の、前記音声合成部を有する携帯通信端末装置であって、
前記通話相手先からの着信に応答して、前記キー操作部から送信メッセージとしての文字情報を入力しているときに前記通話相手先が終話した場合、その入力された文字情報を、前記通話相手先に、電子メールとして送信することが可能であることを特徴とする携帯通信端末装置。
A mobile communication terminal device having the voice synthesis unit according to claim 1,
In response to an incoming call from the call partner, when the call partner ends when character information as a transmission message is input from the key operation unit, the input character information is used as the call information. A portable communication terminal device capable of being transmitted as an e-mail to a partner.
請求項1記載の、前記音声合成部を有する携帯通信端末装置であって、
前記通話相手先からの着信に応答して、前記キー操作部から送信メッセージとしての文字情報を入力している最中に、応答メッセージの作成中であることを示す情報を、前記通話相手先に送信することを特徴とする携帯通信端末装置。
A mobile communication terminal device having the voice synthesis unit according to claim 1,
In response to an incoming call from the call partner, information indicating that a response message is being created is input to the call partner while character information as a transmission message is being input from the key operation unit. A mobile communication terminal device characterized by transmitting.
請求項1記載の携帯通信端末装置であって、
その携帯通信端末装置のユーザが、前記音声合成部の使用/不使用または前記音声認識部の使用/不使用を、選択的に切り替えることが可能であることを特徴とする携帯通信端末装置。
The mobile communication terminal device according to claim 1,
A mobile communication terminal apparatus, wherein a user of the mobile communication terminal apparatus can selectively switch between use / non-use of the voice synthesis unit and use / non-use of the voice recognition unit.
JP2005112247A 2005-04-08 2005-04-08 Mobile communication terminal device Withdrawn JP2006295468A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2005112247A JP2006295468A (en) 2005-04-08 2005-04-08 Mobile communication terminal device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2005112247A JP2006295468A (en) 2005-04-08 2005-04-08 Mobile communication terminal device

Publications (1)

Publication Number Publication Date
JP2006295468A true JP2006295468A (en) 2006-10-26

Family

ID=37415567

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2005112247A Withdrawn JP2006295468A (en) 2005-04-08 2005-04-08 Mobile communication terminal device

Country Status (1)

Country Link
JP (1) JP2006295468A (en)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010211587A (en) * 2009-03-11 2010-09-24 Fujitsu Ltd Information processor
JP2012044524A (en) * 2010-08-20 2012-03-01 Nakayo Telecommun Inc Communication terminal and two-way communication method
JP2019161260A (en) * 2018-03-07 2019-09-19 株式会社Nttドコモ Communication control system

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010211587A (en) * 2009-03-11 2010-09-24 Fujitsu Ltd Information processor
US8364768B2 (en) 2009-03-11 2013-01-29 Fujitsu Limited Information processing apparatus implementing editing message
US9160691B2 (en) 2009-03-11 2015-10-13 Fujitsu Limited Information processing apparatus implementing response to editing message
JP2012044524A (en) * 2010-08-20 2012-03-01 Nakayo Telecommun Inc Communication terminal and two-way communication method
JP2019161260A (en) * 2018-03-07 2019-09-19 株式会社Nttドコモ Communication control system

Similar Documents

Publication Publication Date Title
JP2008099330A (en) Information processor, and portable telephone set
US8229086B2 (en) Apparatus, system and method for providing silently selectable audible communication
JP2005303365A (en) Transmitting/receiving method of portable tv telephone and portable tv telephone terminal
CN102057655A (en) A wireless headset with voice announcement means
JP2007235810A (en) Mobile phone system, and mobile phone unit
US20050049879A1 (en) Communication device capable of interworking between voice communications and text communications
JP2006295468A (en) Mobile communication terminal device
KR20090081170A (en) Wireless headset with character message outputting function and method for outputting character message
JP2002118689A (en) Function of automatically reproducing voice in response to calling party at other end in transmission through cellular phone
JP2013026779A (en) Communication terminal and communication method
JP3660942B2 (en) What to do when there is an external call to a mobile phone and a mobile phone carried by an individual during a meeting or business talk
KR100298317B1 (en) Communication method for portable phone
JP2003188948A (en) Portable terminal device
JP2007096486A (en) Mobile communication system selection method and mobile communication terminal used for the same
JP2003110732A (en) Originating terminal, terminating terminal, mediate server and message output method
JP2005039750A (en) Mobile communication terminal device and response hold message transmitting program
JP2004229213A (en) Portable communication terminal
JP2004179884A (en) Apparatus and system for communication with telephone call function
JP2015231083A (en) Voice synthesis call system, communication terminal, and voice synthesis call method
JP2001168959A (en) Telephone system
JP2007179305A (en) Message converting server and system, and information processor
JP4064216B2 (en) Mobile phone terminal
KR200234151Y1 (en) telephone for the deaf
JP2000216875A (en) Telephone system and voice response method
JP2005045658A (en) Cellular phone unit and its calling method

Legal Events

Date Code Title Description
RD02 Notification of acceptance of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7422

Effective date: 20071113

RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7424

Effective date: 20071120

A300 Application deemed to be withdrawn because no request for examination was validly filed

Free format text: JAPANESE INTERMEDIATE CODE: A300

Effective date: 20080701