JP3678694B2 - Interactive terminal device, call control method thereof, and program thereof - Google Patents

Interactive terminal device, call control method thereof, and program thereof Download PDF

Info

Publication number
JP3678694B2
JP3678694B2 JP2001337524A JP2001337524A JP3678694B2 JP 3678694 B2 JP3678694 B2 JP 3678694B2 JP 2001337524 A JP2001337524 A JP 2001337524A JP 2001337524 A JP2001337524 A JP 2001337524A JP 3678694 B2 JP3678694 B2 JP 3678694B2
Authority
JP
Japan
Prior art keywords
voice
speaker
bone conduction
microphone
voice signal
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2001337524A
Other languages
Japanese (ja)
Other versions
JP2003143253A (en
Inventor
義治 小松
Original Assignee
Necビューテクノロジー株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Necビューテクノロジー株式会社 filed Critical Necビューテクノロジー株式会社
Priority to JP2001337524A priority Critical patent/JP3678694B2/en
Publication of JP2003143253A publication Critical patent/JP2003143253A/en
Application granted granted Critical
Publication of JP3678694B2 publication Critical patent/JP3678694B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Description

【0001】
【発明の属する技術分野】
本発明は、骨伝導マイク、骨伝導スピーカを備えた対話型端末装置、およびその通話制御方法、およびそのプログラムに関する。
【0002】
【従来の技術】
従来から、骨伝導を利用した受話器等は、聴覚障害者や高齢者等に利用されている。骨伝導を利用した端末は、相手方端末から電気信号に変換されて送信されてきた音声を振動に変換する。骨伝導を利用した端末の利用者が当該端末のスピーカ(振動部)を自身の頭蓋骨にあてると、当該頭蓋骨を通じて蝸牛に振動が伝わる。したがって、仮に外耳に障害がある場合でもその患部を通らずに音声を脳に伝達することができる。
【0003】
【発明が解決しようとする課題】
ところで、近年、携帯電話機が爆発的に普及し、いついかなる状況下においても圏外でない限り通話することが可能となった。したがって、繁華街の喧騒の中でも通話することが可能であるが、従来の携帯電話機等の対話型端末装置は、人込みの中などの周りが騒がしい場合、話者自身が相手方の音声を聞き取りにくいばかりか、それに対抗すべく大音量で発声してしまうため、周りにも迷惑であった。また、通話相手方も騒音が混在した音声を受話することになり、聞き取りにくかった。
【0004】
本発明は、上記事情に鑑みなされたものであり、周辺騒音に強く、聞き取り易い通話環境を実現する対話型端末装置、その通話制御方法、およびそのプログラムを提供することを目的とする。
【0005】
また、本発明は、ユーザが通話環境を考慮して骨伝導マイク、骨伝導スピーカを使用するモードと、ノーマルマイク、ノーマルスピーカを使用するモードとを選択可能にしたことにより、使い勝手のよい対話型端末装置、その通話制御方法、およびそのプログラムを提供することを目的とする。
【0006】
【課題を解決するための手段】
かかる目的を達成するために、請求項1記載の発明は、話者の頭蓋骨から音声振動をピックアップし、送話音声信号に変換する骨伝導マイクと、ネットワークに送話音声信号を送出し、ネットワークから受話音声信号を受信する無線手段と、無線手段により受信した受話音声信号を音声振動に変換し、話者の頭蓋骨に伝導する骨伝導スピーカと、話者の周辺音声を採取するノーマルマイクと、ノーマルマイクにより採取された周辺音声を位相反転する位相反転回路と、位相反転回路により位相反転された周辺音声を騒音中和音声として出力するノーマルスピーカと、を有することを特徴とし、骨伝導マイクから出力される送話音声信号から、骨伝導スピーカにより伝導される受話音声信号を減算する信号減算回路をさらに有し、無線手段は、信号減算回路により減算された送話音声信号を送出することを特徴とし、無線手段により受信した受話音声を話者のスイッチング操作により、骨伝導スピーカに出力するか、ノーマルスピーカに出力するかを切り替える入出力切替手段をさらに有することを特徴としている。
【0007】
請求項2記載の発明は、請求項1記載の発明において、入出力切替手段は、話者のスイッチング操作により、骨伝導マイクによりピックアップした送話音声信号、およびノーマルマイクにより採取した周辺音声と話者音声とを含む送話音声信号のいずれを、無線手段を介してネットワークに送出するかを切り替えることを特徴としている。
【0008】
請求項3記載の発明は、骨伝導マイクにより話者の頭蓋骨から音声振動をピックアップし、送話音声信号に変換して、ネットワークに送出する送話工程と、ネットワークから受話音声信号を受信して、音声振動に変換し、音声振動を骨伝導スピーカにより話者の頭蓋骨に伝導する受話工程と、を有する対話型端末装置の通話制御方法であって、ノーマルマイクにより話者の周辺音声を採取する周辺音声採取工程と、周辺音声採取工程により採取された周辺音声を位相反転する位相反転工程と、位相反転工程により位相反転された周辺音声をノーマルスピーカから騒音中和音声として出力する騒音中和音声出力工程と、を有することを特徴とし、骨伝導マイクから出力される送話音声信号から、骨伝導スピーカにより伝導される受話音声信号を減算する信号減算工程をさらに有し、送話工程は、信号減算工程により減算された送話音声信号を送出することを特徴とし、受話工程により受信した受話音声を話者のスイッチング操作により、骨伝導スピーカに出力するか、ノーマルスピーカに出力するかを切り替える入力切替工程をさらに有することを特徴としている。
【0009】
請求項4記載の発明は、請求項3に記載の発明において、話者のスイッチング操作により、骨伝導マイクによりピックアップした送話音声信号、およびノーマルマイクにより採取した周辺音声と話者音声とを含む送話音声信号のいずれを、送話工程によりネットワークに送出するかを切り替える出力切替工程をさらに有することを特徴としている。
【0010】
請求項5記載の発明は、骨伝導マイクにより話者の頭蓋骨から音声振動をピックアップし、送話音声信号に変換して、ネットワークに送出する送話処理と、ネットワークから受話音声信号を受信して、音声振動に変換し、音声振動を骨伝導スピーカにより話者の頭蓋骨に伝導する受話処理と、をコンピュータに実行させる対話型端末装置の通話制御プログラムであって、ノーマルマイクにより話者の周辺音声を採取する周辺音声採取処理と、周辺音声採取処理により採取された周辺音声を位相反転する位相反転処理と、位相反転処理により位相反転された周辺音声をノーマルスピーカから騒音中和音声として出力する騒音中和音声出力処理と、をコンピュータに実行させることを特徴とし、骨伝導マイクから出力される送話音声信号から、骨伝導スピーカにより伝導される受話音声信号を減算する信号減算処理をさらにコンピュータに実行させ、送話処理は、信号減算処理により減算された送話音声信号を送出することを特徴とし、受話処理により受信した受話音声を話者のスイッチング操作により、骨伝導スピーカに出力するか、ノーマルスピーカに出力するかを切り替える入力切替処理をさらにコンピュータに実行させることを特徴としている。
【0011】
請求項6記載の発明は、請求項5記載の発明において、話者のスイッチング操作により、骨伝導マイクによりピックアップした送話音声信号、およびノーマルマイクにより採取した周辺音声と話者音声とを含む送話音声信号のいずれを、送話処理によりネットワークに送出するかを切り替える出力切替処理をさらにコンピュータに実行させることを特徴としている。
【0018】
【発明の実施の形態】
以下、本発明の実施の形態を添付図面を参照しながら詳細に説明する。
【0019】
図1は、本発明の実施の形態における対話型端末装置の構成を示すブロック図である。当該対話型端末装置は、骨伝導マイク10、骨伝導スピーカ20、信号減算回路30、位相反転回路40、入出力切り替え器50、無線機60、ノーマルマイク70、およびノーマルスピーカ80を備える。
【0020】
対話型端末装置は、携帯電話機、PHS、または通信手段を備えるPDA等である。また、これら以外にもトランシーバやコンピュータ等の情報入出力端末としてのヘッドパーツや、それらが組み込まれたヘルメット等双方向対応機器にも適用可能である。
【0021】
骨伝導マイク10は、話者の頭蓋骨から音声振動をピックアップし、ピックアップした音声振動を電気的な送話音声信号に変換する。そして、当該送話音声信号を信号減算回路30に出力する。骨伝導スピーカ20は、入出力切り替え器50からの受話音声信号を音声振動に変換し、話者の頭蓋骨に当該音声振動を伝達する。同時に、入出力切り替え器50からの受話音声信号を信号減算回路30に出力する。骨伝導マイク10および骨伝導スピーカ20の筐体上の配置は、頭蓋骨に接触可能な位置であれば、どこでもよい。
【0022】
信号減算回路30は、骨伝導マイク10から入力された送話音声信号から骨伝導スピーカ20から入力された受話音声信号を減算する。これは、骨伝導スピーカ20から発せられた音声振動が骨伝導マイク10に再入力され、当該音声振動と話者の頭蓋骨からの音声振動とが干渉増幅してハウリングを起こすのを防ぐ処理である。信号減算回路30は、減算処理後の送話音声信号を入出力切り替え器50に出力する。
【0023】
ノーマルマイク70は、従来から一般的に使用されているマイクであり、本発明において、特に周辺音声(雑音)を集音するために機能する。ノーマルマイク70は、集音した音声信号を位相反転回路40および入出力切り替え器50に出力する。
【0024】
位相反転回路40は、ノーマルマイク70から入力された音声信号の位相を反転する。反転した音声信号をノーマルスピーカ80に出力する。また、図1中に矢印の記載はないが、骨伝導スピーカ20に反転した音声信号を出力してもよい。その場合、骨伝導スピーカ20は、当該位相反転回路40から入力された音声信号と受話音声信号とを合成出力する。
【0025】
入出力切り替え回路50は、信号減算回路30から入力される送話音声信号とノーマルマイク70から入力される送話音声信号とをユーザの指示により選択的に切り替えて、無線機60に出力する。また、無線機60から入力された受話音声信号を骨伝導スピーカ20に出力するか、ノーマルスピーカ80に出力するかを切り替え制御する。
【0026】
無線機60は、入出力切り替え器50から入力された送話音声信号を無線電話網を介してアクセスポイントに送信し、無線電話網から受信した受話音声信号を入出力切り替え器50に出力する。
【0027】
ノーマルスピーカ80は、位相反転回路40から入力された周辺音声を反転した騒音中和音声を出力する。または、入出力切り替え器50から入力された受話音声信号を出力する。
【0028】
次に、本発明の実施の形態における対話型端末装置の動作(通話制御方法)について説明する。図2は、本発明の実施の形態における対話型端末装置の動作を説明するためのフローチャートである。
【0029】
まず、ユーザは、周辺環境を考慮して話者音声のみを相手方に送信するか、周辺音声も含めた音声を相手方に送信するかを選択する(ステップS1)。話者音声のみを送信したい場合は骨伝導マイク10をONする(ステップS1/Y)。その場合、入出力切り替え器50は、骨伝導マイク10からピックアップした音声のみを選択し、ノーマルマイク70から集音した音声は無視する。無線機60は、話者音声のみを送信する(ステップS2)。
【0030】
ユーザが周辺音声も含めた音声を送信した場合は骨伝導マイク10をOFFする(ステップS1/N)。その場合、入出力切り替え器50は、ノーマルマイク70から集音した音声を選択し、無線機60は、ノーマルマイク70からの音声信号を送信する(ステップS3)。
【0031】
次に、ユーザは、相手方から受信した音声信号を骨伝導スピーカ20に出力するか、ノーマルスピーカ80に出力するかを選択する(ステップS4)。骨伝導スピーカ20に出力させたい場合は、骨伝導スピーカ20をONする(ステップS4/Y)。その場合、入出力切り替え器50は、受信音声を骨伝導スピーカ20に出力する(ステップS5)。そして、ノーマルマイク70から集音した周辺音声を位相反転させた音声を騒音中和音声として、ノーマルスピーカ80から出力する(ステップS6)。
【0032】
ユーザが受信音声をノーマルスピーカ80に出力させたい場合は、骨伝導スピーカ20をOFFする(ステップS4/N)。その場合、入出力切り替え器50は、受信音声をノーマルスピーカ80に出力する(ステップS7)。
【0033】
次に、本発明の実施の形態における対話型端末装置の動作(通話制御方法)の具体的な実施例を説明する。話者Aと話者Bとの間で対話型通信を行う場合であって、話者Aを当方として本発明の周辺騒音に強い対話型端末装置を利用しているものと想定して説明する。話者Bは、従来の端末装置でも本発明のものでもよい。
【0034】
話者Aは、繁華街の雑踏の中からの通話で、話者Aの周辺は他者の話し声や車の騒音などで騒がしい。ここで、従来の端末装置であれば話者Aの会話内容と共にそれらの騒音もマイクにより集録されてしまい、話者Bにはその内容が伝わりにくい。この点、本発明の端末装置であれば、話者Aの頭蓋骨部の伝導音声のみを集録して話者Bに伝えるため内容がはっきりと伝えられる。
【0035】
また、従来の端末装置では雑踏の中で相手方の音声が聞き取りにくくなる。この点、本発明の端末装置であれば、骨振動スピーカ20を利用して話者Aの頭蓋骨に直に音声を伝達することで聞き取り易くなる。この際、骨振動スピーカ20以外に従来のノーマルマイク70とノーマルスピーカ80を搭載し、周辺音声を集音して位相反転した音声をノーマルスピーカ80から流すことで、耳から入る雑音を中和すると、更に明瞭な聞き取りができる。
【0036】
本発明の骨振動マイク10の利用により周辺音声が伝達できないというデメリットが発生する恐れがある。この解決手段として従来のノーマルマイク70と骨振動マイク10の双方を容易に切り替えることを可能とするユーザスイッチング機能を設けた。
【0037】
なお、本発明の通話制御方法をプログラムを実行することにより実現可能である。当該プログラムは、半導体IC記録媒体、光記録媒体、磁気記録媒体、または光磁気記録媒体に記録されて提供される。または、プログラムサーバからFTP(ファイル転送プロトコル)により、装置にダウンロードされて提供される。
【0038】
なお、上述した実施の形態は、本発明の好適な実施の形態の一例を示すものであり、本発明はそれに限定されることなく、その要旨を逸脱しない範囲内において、種々変形実施が可能である。
【0039】
【発明の効果】
以上の説明から明らかなように、骨振動マイクおよび骨振動スピーカを有することで周辺騒音を気にせずに音声情報を明瞭に伝達でき、さらに相手からの音声情報も聞き取り易い。
【0040】
また、ユーザが通話環境を考慮して骨伝導マイク、骨伝導スピーカを使用するモードと、ノーマルマイク、ノーマルスピーカを使用するモードとを選択可能にしたことにより、使い勝手がよい。
【0041】
また、骨振動スピーカにより頭蓋骨を振動伝達して音声を伝えるため難聴などの障害を持つ場合でも聞き取り易い。
【0042】
さらに、携帯電話などの対話型端末装置において、耳周辺にスピーカ、口周辺にマイクを配置しないといけないという制限を排除できるため、装置のデザインや形状の自由度が格段に増すという特徴も兼ね備える。
【図面の簡単な説明】
【図1】本発明の実施の形態における対話型端末装置の構成を示すブロック図である。
【図2】本発明の実施の形態における対話型端末装置の動作を説明するためのフローチャートである。
【符号の説明】
10 骨伝導マイク
20 骨伝導スピーカ
30 信号減算回路
40 位相反転回路
50 入出力切り替え器
60 無線機
70 ノーマルマイク
80 ノーマルスピーカ
[0001]
BACKGROUND OF THE INVENTION
The present invention relates to a bone conduction microphone, an interactive terminal device including a bone conduction speaker, a call control method thereof, and a program thereof.
[0002]
[Prior art]
Conventionally, a handset using bone conduction has been used by a hearing impaired person, an elderly person, and the like. A terminal using bone conduction converts the sound transmitted from the counterpart terminal into an electrical signal and converted into vibration. When a user of a terminal using bone conduction applies a speaker (vibration unit) of the terminal to his / her skull, vibration is transmitted to the cochlea through the skull. Therefore, even if the outer ear has a disorder, the voice can be transmitted to the brain without passing through the affected part.
[0003]
[Problems to be solved by the invention]
By the way, in recent years, mobile phones have exploded in popularity, and it has become possible to talk on the phone as long as they are not out of service area under any circumstances. Therefore, it is possible to make a call even in the bustle of busy streets. However, in the case of a conventional interactive terminal device such as a mobile phone, it is difficult for the speaker himself to hear the other party's voice when the surroundings are crowded. Not only that, it was loud enough to compete with it, so it was annoying to others. In addition, it was difficult for the other party to hear the voice mixed with noise.
[0004]
The present invention has been made in view of the above circumstances, and an object of the present invention is to provide an interactive terminal device, a call control method thereof, and a program thereof that realize a call environment that is resistant to ambient noise and easy to hear.
[0005]
In addition, the present invention allows the user to select a mode in which a bone conduction microphone and a bone conduction speaker are used in consideration of a call environment, and a mode in which a normal microphone and a normal speaker are used. It is an object to provide a terminal device, a call control method thereof, and a program thereof.
[0006]
[Means for Solving the Problems]
To achieve this object, the invention according to claim 1 picks up voice vibration from the skull of the speaker and converts it into a transmission voice signal, and transmits the transmission voice signal to the network. A wireless means for receiving the received voice signal from the radio, a bone conduction speaker that converts the received voice signal received by the wireless means into a voice vibration and is conducted to the skull of the speaker, and a normal microphone that collects the voice around the speaker, A bone conduction microphone comprising: a phase inversion circuit that inverts the phase of peripheral sound collected by a normal microphone; and a normal speaker that outputs the peripheral sound phase-inverted by the phase inversion circuit as noise neutralized speech Further comprising a signal subtracting circuit for subtracting the received voice signal conducted by the bone conduction speaker from the transmitted voice signal output from the wireless means, The transmission voice signal subtracted by the signal subtraction circuit is transmitted, and the reception voice received by the wireless means is switched to output to the bone conduction speaker or the normal speaker by the switching operation of the speaker. It further has an input / output switching means.
[0007]
According to a second aspect of the present invention, in the first aspect of the present invention, the input / output switching means is configured such that, by the speaker's switching operation, the transmission voice signal picked up by the bone conduction microphone and the surrounding voice and the voice collected by the normal microphone. One of the transmission voice signals including the person voice is switched to be transmitted to the network through the wireless means.
[0008]
According to the third aspect of the present invention, the voice vibration is picked up from the skull of the speaker by the bone conduction microphone, converted into the transmitted voice signal, and sent to the network, and the received voice signal is received from the network. A communication control method for an interactive terminal device that converts voice vibration into voice vibration and conducts voice vibration to the speaker's skull through a bone conduction speaker, and picks up the voice around the speaker with a normal microphone Peripheral voice sampling process, phase inversion process for phase inversion of peripheral voice collected in the peripheral voice sampling process, and noise neutralized voice for outputting the peripheral voice phase-inverted by the phase inversion process as noise neutralized voice from the normal speaker characterized by and an output step, a transmission voice signal output from the bone conduction microphone, a receiving voice signal that is conducted by the bone conduction speaker A signal subtracting step for calculating, and the transmitting step is characterized in that the transmitted voice signal subtracted by the signal subtracting step is transmitted, and the received voice received in the receiving step is converted into a bone by the switching operation of the speaker. It further has an input switching step for switching between output to a conduction speaker and output to a normal speaker.
[0009]
The invention described in claim 4 includes the transmission voice signal picked up by the bone conduction microphone and the surrounding voice and the speaker voice collected by the normal microphone by the switching operation of the speaker in the invention of claim 3. It further has an output switching step for switching which one of the transmission voice signals is transmitted to the network by the transmission step.
[0010]
According to the fifth aspect of the present invention, the voice vibration is picked up from the skull of the speaker by the bone conduction microphone, converted into the transmission voice signal, and transmitted to the network, and the reception voice signal is received from the network. , A conversation control program for an interactive terminal device that causes a computer to perform voice receiving processing for converting voice vibration to a speaker's skull through a bone conduction speaker and transmitting the voice vibration to a speaker's skull. Noise that outputs ambient sound as noise neutralized speech from normal speakers, phase inversion processing for phase inversion of ambient audio collected by ambient audio sampling processing, and phase inversion by phase inversion processing characterized in that to execute a neutralization audio output process, to a computer, from the transmitted voice signal output from the bone conduction microphone, the bone The computer further executes signal subtraction processing for subtracting the reception voice signal conducted by the conductive speaker, and the transmission processing is characterized by transmitting the transmission voice signal subtracted by the signal subtraction processing, and received by the reception processing. It is characterized in that the computer further executes an input switching process for switching whether the received voice is output to the bone conduction speaker or the normal speaker by the switching operation of the speaker.
[0011]
According to a sixth aspect of the present invention, in the fifth aspect of the present invention, the transmission voice signal picked up by the bone conduction microphone and the surrounding voice and the speaker voice collected by the normal microphone by the speaker switching operation are transmitted. It is characterized in that the computer further executes an output switching process for switching which of the voice signals is transmitted to the network by the transmission process.
[0018]
DETAILED DESCRIPTION OF THE INVENTION
Hereinafter, embodiments of the present invention will be described in detail with reference to the accompanying drawings.
[0019]
FIG. 1 is a block diagram showing a configuration of an interactive terminal device according to an embodiment of the present invention. The interactive terminal device includes a bone conduction microphone 10, a bone conduction speaker 20, a signal subtraction circuit 30, a phase inversion circuit 40, an input / output switch 50, a radio 60, a normal microphone 70, and a normal speaker 80.
[0020]
The interactive terminal device is a mobile phone, a PHS, or a PDA equipped with communication means. In addition to these, the present invention can also be applied to bidirectional parts such as head parts as information input / output terminals such as transceivers and computers, and helmets incorporating them.
[0021]
The bone conduction microphone 10 picks up the voice vibration from the skull of the speaker and converts the picked-up voice vibration into an electric transmission voice signal. Then, the transmission voice signal is output to the signal subtraction circuit 30. The bone conduction speaker 20 converts the received voice signal from the input / output switch 50 into voice vibration and transmits the voice vibration to the skull of the speaker. At the same time, the received voice signal from the input / output switch 50 is output to the signal subtraction circuit 30. The arrangement of the bone conduction microphone 10 and the bone conduction speaker 20 on the housing may be anywhere as long as it can contact the skull.
[0022]
The signal subtraction circuit 30 subtracts the reception voice signal input from the bone conduction speaker 20 from the transmission voice signal input from the bone conduction microphone 10. This is a process for preventing the sound vibration generated from the bone conduction speaker 20 from being re-input to the bone conduction microphone 10 and causing the sound vibration and the sound vibration from the speaker's skull to interfere and amplify howling. . The signal subtraction circuit 30 outputs the transmission voice signal after the subtraction processing to the input / output switch 50.
[0023]
The normal microphone 70 is a microphone that has been generally used in the past, and functions particularly in the present invention to collect ambient sound (noise). The normal microphone 70 outputs the collected audio signal to the phase inversion circuit 40 and the input / output switch 50.
[0024]
The phase inversion circuit 40 inverts the phase of the audio signal input from the normal microphone 70. The inverted audio signal is output to the normal speaker 80. In addition, although an arrow is not shown in FIG. 1, an inverted audio signal may be output to the bone conduction speaker 20. In that case, the bone conduction speaker 20 synthesizes and outputs the audio signal input from the phase inverting circuit 40 and the received audio signal.
[0025]
The input / output switching circuit 50 selectively switches between the transmission voice signal input from the signal subtraction circuit 30 and the transmission voice signal input from the normal microphone 70 according to a user instruction, and outputs the signal to the radio device 60. Further, switching control is performed to switch whether the received voice signal input from the radio device 60 is output to the bone conduction speaker 20 or the normal speaker 80.
[0026]
The radio 60 transmits the transmission voice signal input from the input / output switch 50 to the access point via the radio telephone network, and outputs the received voice signal received from the radio telephone network to the input / output switch 50.
[0027]
The normal speaker 80 outputs a noise neutralized sound obtained by inverting the surrounding sound input from the phase inverting circuit 40. Alternatively, the received voice signal input from the input / output switch 50 is output.
[0028]
Next, the operation (call control method) of the interactive terminal device in the embodiment of the present invention will be described. FIG. 2 is a flowchart for explaining the operation of the interactive terminal device according to the embodiment of the present invention.
[0029]
First, the user selects whether to transmit only the speaker voice to the other party in consideration of the surrounding environment or to transmit the voice including the surrounding voice to the other party (step S1). When it is desired to transmit only the speaker voice, the bone conduction microphone 10 is turned on (step S1 / Y). In that case, the input / output switch 50 selects only the sound picked up from the bone conduction microphone 10 and ignores the sound collected from the normal microphone 70. The radio device 60 transmits only the speaker voice (step S2).
[0030]
When the user transmits sound including peripheral sound, the bone conduction microphone 10 is turned off (step S1 / N). In that case, the input / output switch 50 selects the sound collected from the normal microphone 70, and the radio 60 transmits the sound signal from the normal microphone 70 (step S3).
[0031]
Next, the user selects whether to output the audio signal received from the other party to the bone conduction speaker 20 or the normal speaker 80 (step S4). When it is desired to output to the bone conduction speaker 20, the bone conduction speaker 20 is turned on (step S4 / Y). In that case, the input / output switch 50 outputs the received voice to the bone conduction speaker 20 (step S5). Then, the sound obtained by inverting the phase of the surrounding sound collected from the normal microphone 70 is output from the normal speaker 80 as noise neutralized sound (step S6).
[0032]
When the user wants to output the received voice to the normal speaker 80, the bone conduction speaker 20 is turned off (step S4 / N). In that case, the input / output switch 50 outputs the received voice to the normal speaker 80 (step S7).
[0033]
Next, specific examples of the operation (call control method) of the interactive terminal device according to the embodiment of the present invention will be described. Explanation will be made assuming that interactive communication is performed between the speaker A and the speaker B, and that the speaker A is used as an interactive terminal device resistant to ambient noise according to the present invention. . The speaker B may be a conventional terminal device or the present invention.
[0034]
Talker A is talking from a busy street, and the area around Talker A is noisy due to the voice of others and the noise of the car. Here, in the case of a conventional terminal device, the conversation contents of the speaker A and the noises thereof are also collected by the microphone, and the contents are hardly transmitted to the speaker B. In this respect, since the terminal device of the present invention collects only the conduction voice of the skull part of the speaker A and transmits it to the speaker B, the contents are clearly transmitted.
[0035]
Moreover, in the conventional terminal device, it becomes difficult to hear the other party's voice in a crowd. In this regard, the terminal device of the present invention is easy to hear by transmitting the voice directly to the skull of the speaker A using the bone vibration speaker 20. At this time, in addition to the bone vibration speaker 20, the conventional normal microphone 70 and the normal speaker 80 are mounted, and the noise that enters from the ear is neutralized by collecting the surrounding sound and flowing the phase-inverted sound from the normal speaker 80. , You can hear more clearly.
[0036]
The use of the bone vibration microphone 10 of the present invention may cause a demerit that peripheral sounds cannot be transmitted. As a means for solving this problem, a user switching function is provided which enables easy switching between the conventional normal microphone 70 and the bone vibration microphone 10.
[0037]
The call control method of the present invention can be realized by executing a program. The program is provided by being recorded on a semiconductor IC recording medium, an optical recording medium, a magnetic recording medium, or a magneto-optical recording medium. Alternatively, it is downloaded from the program server to the apparatus by FTP (File Transfer Protocol) and provided.
[0038]
The above-described embodiment shows an example of a preferred embodiment of the present invention, and the present invention is not limited thereto, and various modifications can be made without departing from the scope of the invention. is there.
[0039]
【The invention's effect】
As is clear from the above description, by having the bone vibration microphone and the bone vibration speaker, the voice information can be clearly transmitted without worrying about the surrounding noise, and the voice information from the other party can be easily heard.
[0040]
In addition, the user can select a mode in which the bone conduction microphone and the bone conduction speaker are used and a mode in which the normal microphone and the normal speaker are used in consideration of the call environment.
[0041]
Further, since the bone vibration speaker transmits the sound by vibrating the skull, it is easy to hear even if there is a disorder such as hearing loss.
[0042]
Furthermore, in an interactive terminal device such as a mobile phone, the restriction that a speaker must be placed around the ear and a microphone around the mouth can be eliminated, so that the degree of freedom of design and shape of the device is greatly increased.
[Brief description of the drawings]
FIG. 1 is a block diagram showing a configuration of an interactive terminal device according to an embodiment of the present invention.
FIG. 2 is a flowchart for explaining the operation of the interactive terminal device in the embodiment of the present invention.
[Explanation of symbols]
DESCRIPTION OF SYMBOLS 10 Bone conduction microphone 20 Bone conduction speaker 30 Signal subtraction circuit 40 Phase inversion circuit 50 Input / output switching device 60 Radio | wireless machine 70 Normal microphone 80 Normal speaker

Claims (6)

話者の頭蓋骨から音声振動をピックアップし、送話音声信号に変換する骨伝導マイクと、
ネットワークに前記送話音声信号を送出し、前記ネットワークから受話音声信号を受信する無線手段と、
前記無線手段により受信した受話音声信号を音声振動に変換し、前記話者の頭蓋骨に伝導する骨伝導スピーカと、
前記話者の周辺音声を採取するノーマルマイクと、
前記ノーマルマイクにより採取された周辺音声を位相反転する位相反転回路と、
前記位相反転回路により位相反転された周辺音声を騒音中和音声として出力するノーマルスピーカと、
を有することを特徴とする対話型端末装置において、
前記骨伝導マイクから出力される送話音声信号から、前記骨伝導スピーカにより伝導される受話音声信号を減算する信号減算回路をさらに有し、
前記無線手段は、前記信号減算回路により減算された送話音声信号を送出することを特徴とし、
前記無線手段により受信した受話音声を前記話者のスイッチング操作により、前記骨伝導スピーカに出力するか、前記ノーマルスピーカに出力するかを切り替える入出力切替手段をさらに有することを特徴とする対話型端末装置。
A bone conduction microphone that picks up the voice vibration from the skull of the speaker and converts it into a transmitted voice signal;
Wireless means for transmitting the transmitted voice signal to a network and receiving the received voice signal from the network;
A bone conduction speaker that converts a received voice signal received by the wireless means into voice vibration and conducts to the skull of the speaker;
A normal microphone for collecting the voice around the speaker;
A phase inversion circuit that inverts the phase of ambient audio collected by the normal microphone;
A normal speaker that outputs the ambient voice that has been phase-reversed by the phase inverting circuit as noise neutralized voice;
In an interactive terminal device characterized by comprising :
A signal subtracting circuit for subtracting a received voice signal conducted by the bone conduction speaker from a transmitted voice signal output from the bone conduction microphone;
The wireless means is characterized by transmitting a transmission voice signal subtracted by the signal subtraction circuit,
An interactive terminal further comprising input / output switching means for switching whether the received voice received by the wireless means is output to the bone conduction speaker or the normal speaker by a switching operation of the speaker. apparatus.
前記入出力切替手段は、前記話者のスイッチング操作により、前記骨伝導マイクによりピックアップした送話音声信号、および前記ノーマルマイクにより採取した前記周辺音声と話者音声とを含む送話音声信号のいずれを、前記無線手段を介して前記ネットワークに送出するかを切り替えることを特徴とする請求項記載の対話型端末装置。The input / output switching means includes any one of a transmission voice signal picked up by the bone conduction microphone and a transmission voice signal including the peripheral voice and the speaker voice collected by the normal microphone by the switching operation of the speaker. the interactive terminal apparatus according to claim 1, wherein via the wireless unit and switches or transmit to the network. 骨伝導マイクにより話者の頭蓋骨から音声振動をピックアップし、送話音声信号に変換して、ネットワークに送出する送話工程と、
前記ネットワークから受話音声信号を受信して、音声振動に変換し、該音声振動を骨伝導スピーカにより前記話者の頭蓋骨に伝導する受話工程と、を有する対話型端末装置の通話制御方法であって、
ノーマルマイクにより前記話者の周辺音声を採取する周辺音声採取工程と、
前記周辺音声採取工程により採取された周辺音声を位相反転する位相反転工程と、
前記位相反転工程により位相反転された周辺音声をノーマルスピーカから騒音中和音声として出力する騒音中和音声出力工程と、
を有することを特徴とし、
前記骨伝導マイクから出力される送話音声信号から、前記骨伝導スピーカにより伝導される受話音声信号を減算する信号減算工程をさらに有し、
前記送話工程は、前記信号減算工程により減算された送話音声信号を送出することを特徴とし、
前記受話工程により受信した受話音声を前記話者のスイッチング操作により、前記骨伝導スピーカに出力するか、前記ノーマルスピーカに出力するかを切り替える入力切替工程をさらに有することを特徴とする対話型端末装置の通話制御方法。
A voice transmission process in which voice vibration is picked up from a skull of a speaker by a bone conduction microphone, converted into a voice signal, and sent to a network;
Receiving a received voice signal from the network, converting the voice vibration into a voice vibration, and conducting the voice vibration to the skull of the speaker through a bone conduction speaker. ,
Surrounding voice sampling step of collecting the surrounding voice of the speaker with a normal microphone;
A phase reversal step for phase reversal of the peripheral sound collected by the peripheral sound collection step;
A noise neutralization voice output step of outputting the ambient voice phase-inverted by the phase inversion step as a noise neutralization voice from a normal speaker;
It characterized by having,
A signal subtracting step of subtracting the received voice signal conducted by the bone conduction speaker from the voice signal outputted from the bone conduction microphone;
The transmission step is characterized by sending the transmission voice signal subtracted by the signal subtraction step,
An interactive terminal device further comprising an input switching step of switching whether the received voice received in the receiving step is output to the bone conduction speaker or the normal speaker by a switching operation of the speaker. Call control method.
前記話者のスイッチング操作により、前記骨伝導マイクによりピックアップした送話音声信号、および前記ノーマルマイクにより採取した前記周辺音声と話者音声とを含む送話音声信号のいずれを、前記送話工程により前記ネットワークに送出するかを切り替える出力切替工程をさらに有することを特徴とする請求項に記載の対話型端末装置の通話制御方法。Any one of the transmission voice signal picked up by the bone conduction microphone by the switching operation of the speaker and the transmission voice signal including the peripheral voice and the speaker voice sampled by the normal microphone by the transmission step. 4. The call control method for an interactive terminal device according to claim 3 , further comprising an output switching step of switching whether to transmit to the network. 骨伝導マイクにより話者の頭蓋骨から音声振動をピックアップし、送話音声信号に変換して、ネットワークに送出する送話処理と、
前記ネットワークから受話音声信号を受信して、音声振動に変換し、該音声振動を骨伝導スピーカにより前記話者の頭蓋骨に伝導する受話処理と、をコンピュータに実行させる対話型端末装置の通話制御プログラムであって、
ノーマルマイクにより前記話者の周辺音声を採取する周辺音声採取処理と、
前記周辺音声採取処理により採取された周辺音声を位相反転する位相反転処理と、
前記位相反転処理により位相反転された周辺音声をノーマルスピーカから騒音中和音声として出力する騒音中和音声出力処理と、
をコンピュータに実行させることを特徴とし、
前記骨伝導マイクから出力される送話音声信号から、前記骨伝導スピーカにより伝導される受話音声信号を減算する信号減算処理をさらにコンピュータに実行させ、
前記送話処理は、前記信号減算処理により減算された送話音声信号を送出することを特徴とし、
前記受話処理により受信した受話音声を前記話者のスイッチング操作により、前記骨伝導スピーカに出力するか、前記ノーマルスピーカに出力するかを切り替える入力切替処理をさらにコンピュータに実行させることを特徴とする対話型端末装置の通話制御プログラム。
The voice transmission from the skull of the speaker by the bone conduction microphone, picking up the voice vibration, converting it into a voice signal, and sending it to the network,
A communication control program for an interactive terminal device that receives a received voice signal from the network, converts the voice vibration into voice vibration, and conducts the voice vibration to the skull of the speaker through a bone conduction speaker. Because
Peripheral voice sampling processing for sampling the speaker's peripheral voice with a normal microphone;
A phase reversal process for reversing the phase of the peripheral sound collected by the peripheral sound collection process;
Noise neutralization voice output processing for outputting the ambient voice phase-inverted by the phase inversion processing as noise neutralization voice from a normal speaker;
To run on a computer ,
Causing the computer to further perform a signal subtraction process for subtracting the received voice signal conducted by the bone conduction speaker from the transmitted voice signal output from the bone conduction microphone;
The transmission process is characterized by sending a transmission voice signal subtracted by the signal subtraction process,
A dialogue characterized by causing the computer to further execute an input switching process for switching whether the received voice received by the reception process is output to the bone conduction speaker or the normal speaker by a switching operation of the speaker. Control program for type terminal device.
前記話者のスイッチング操作により、前記骨伝導マイクによりピックアップした送話音声信号、および前記ノーマルマイクにより採取した前記周辺音声と話者音声とを含む送話音声信号のいずれを、前記送話処理により前記ネットワークに送出するかを切り替える出力切替処理をさらにコンピュータに実行させることを特徴とする請求項に記載の対話型端末装置の通話制御プログラム。Any of the transmission voice signal picked up by the bone conduction microphone by the switching operation of the speaker and the transmission voice signal including the peripheral voice and the speaker voice collected by the normal microphone are transmitted by the transmission process. 6. The conversation control program for an interactive terminal device according to claim 5 , further causing a computer to execute an output switching process for switching whether to send to the network.
JP2001337524A 2001-11-02 2001-11-02 Interactive terminal device, call control method thereof, and program thereof Expired - Fee Related JP3678694B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2001337524A JP3678694B2 (en) 2001-11-02 2001-11-02 Interactive terminal device, call control method thereof, and program thereof

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2001337524A JP3678694B2 (en) 2001-11-02 2001-11-02 Interactive terminal device, call control method thereof, and program thereof

Publications (2)

Publication Number Publication Date
JP2003143253A JP2003143253A (en) 2003-05-16
JP3678694B2 true JP3678694B2 (en) 2005-08-03

Family

ID=19152145

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2001337524A Expired - Fee Related JP3678694B2 (en) 2001-11-02 2001-11-02 Interactive terminal device, call control method thereof, and program thereof

Country Status (1)

Country Link
JP (1) JP3678694B2 (en)

Families Citing this family (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7447630B2 (en) * 2003-11-26 2008-11-04 Microsoft Corporation Method and apparatus for multi-sensory speech enhancement
US7499686B2 (en) * 2004-02-24 2009-03-03 Microsoft Corporation Method and apparatus for multi-sensory speech enhancement on a mobile device
JP5052107B2 (en) * 2006-11-24 2012-10-17 日本電信電話株式会社 Voice reproduction device and voice reproduction method
US9313306B2 (en) 2010-12-27 2016-04-12 Rohm Co., Ltd. Mobile telephone cartilage conduction unit for making contact with the ear cartilage
JP5911248B2 (en) * 2011-09-22 2016-04-27 株式会社ファインウェル mobile phone
CN103053147B (en) 2010-12-27 2017-03-22 罗姆股份有限公司 Transmitter/receiver Unit And Receiver Unit
JP5783352B2 (en) 2011-02-25 2015-09-24 株式会社ファインウェル Conversation system, conversation system ring, mobile phone ring, ring-type mobile phone, and voice listening method
JP2013005212A (en) * 2011-06-16 2013-01-07 Kddi Corp Portable terminal device
CN104247453B (en) 2012-01-20 2018-06-05 罗姆股份有限公司 Mobile phone
JP5738797B2 (en) * 2012-04-23 2015-06-24 京セラ株式会社 Portable terminal device, program, and sound output control method
JP6099320B2 (en) * 2012-05-01 2017-03-22 京セラ株式会社 Electronic device, control method, and control program
US9998836B2 (en) 2012-05-01 2018-06-12 Kyocera Corporation Electronic device, control method, and control program
JP5995519B2 (en) * 2012-05-14 2016-09-21 京セラ株式会社 Electronics
KR101644261B1 (en) 2012-06-29 2016-07-29 로무 가부시키가이샤 Stereo earphone
KR101877652B1 (en) 2013-08-23 2018-07-12 로무 가부시키가이샤 Portable telephone
US9705548B2 (en) 2013-10-24 2017-07-11 Rohm Co., Ltd. Wristband-type handset and wristband-type alerting device
JP6551919B2 (en) 2014-08-20 2019-07-31 株式会社ファインウェル Watch system, watch detection device and watch notification device
EP3236669A4 (en) 2014-12-18 2018-10-03 Rohm Co., Ltd. Cartilage conduction hearing device using electromagnetic-type vibration unit, and electromagnetic-type vibration unit
JP6125561B2 (en) * 2015-04-22 2017-05-10 京セラ株式会社 Portable terminal device, program, and sound output control method
EP3323567B1 (en) 2015-07-15 2020-02-12 FINEWELL Co., Ltd. Robot and robot system
JP6551929B2 (en) 2015-09-16 2019-07-31 株式会社ファインウェル Watch with earpiece function
US10778824B2 (en) 2016-01-19 2020-09-15 Finewell Co., Ltd. Pen-type handset
JP2020053948A (en) 2018-09-28 2020-04-02 株式会社ファインウェル Hearing device

Also Published As

Publication number Publication date
JP2003143253A (en) 2003-05-16

Similar Documents

Publication Publication Date Title
JP3678694B2 (en) Interactive terminal device, call control method thereof, and program thereof
AU676997B2 (en) Unidirectional ear microphone and method
US5280524A (en) Bone conductive ear microphone and method
US8472641B2 (en) Ambient noise cancellation for voice communications device
CN102164327A (en) A headset system with microphone for ambient sounds
JPH1198590A (en) Earphone system
JP2003111175A (en) Speech transmission and receiving system
JP5213584B2 (en) Call system
JP4027009B2 (en) Handset
JPH10126466A (en) Portable telephone set
JP3291920B2 (en) Call system
JP3568875B2 (en) Portable wireless telephone
KR20030069471A (en) Sound input/output device and microphone-integrated earphone employing the same
JP3096034U (en) Earphone microphone for control signal transmission
KR101131498B1 (en) Wireless communication terminal and secret call method thereof
KR200252660Y1 (en) Earmic with flip
JP3095040B2 (en) Mobile phone
JP3073415U (en) Mobile phone intercom
JP3072131U (en) Portable audio player for mobile phones
JP4068550B2 (en) Portable wireless phone
JP3034658U (en) Phone volume control
JP2528757B2 (en) Mobile phone
JP3093168U (en) Handheld device and PDA cover
KR200228932Y1 (en) Apparatus for transmitting and receiving voice of mobile phone
KR20010110983A (en) High quality voice communication device

Legal Events

Date Code Title Description
A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20041222

A131 Notification of reasons for refusal

Effective date: 20050125

Free format text: JAPANESE INTERMEDIATE CODE: A131

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20050322

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20050426

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20050510

R150 Certificate of patent (=grant) or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

S531 Written request for registration of change of domicile

Free format text: JAPANESE INTERMEDIATE CODE: R313531

S533 Written request for registration of change of name

Free format text: JAPANESE INTERMEDIATE CODE: R313533

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

FPAY Renewal fee payment (prs date is renewal date of database)

Free format text: PAYMENT UNTIL: 20090520

Year of fee payment: 4

LAPS Cancellation because of no payment of annual fees