JP4166134B2 - 乳児あやし支援処理方法、および乳児あやし支援処理システム用データ管理装置 - Google Patents

Description

本発明は、乳児の育児支援技術にかかり、さらに詳しくは、音声データを用いて乳児をあやす行為を支援する処理方法、および乳児あやし支援処理システムで使用するデータ管理装置に関する。

むずかったり泣き出した乳児をあやす場合に、乳児を抱き上げる、声を掛ける、好きなおもちゃを見せる、好きな音を聞かせるなどの乳児が望むであろうことを経験から類推して行っている。

しかし、できる限り早く乳児を泣き止ませたり、機嫌を良くしたりするというような一定の効果を得られるように、常に乳児をあやすことは容易ではない。

一般的に、乳児をあやすのに最適な者は、母親、父親など、その乳児にとって一番身近な存在の者（以下、単に「母親」とする）であると考えられている。例えば、乳児が慣れ親しんだ環境の下で母親がやさしく乳児に呼びかける行為は、効果が高い対応であると考えられている。

したがって、予め母親の呼びかけの声や顔の画像などのデータを保存しておき、乳児をあやす必要が生じた場合に、保存しておいた母親の声データや画像データを再生して乳児に聞かせることにより、効果的に乳児をあやすことができると考えられる。

従来、利用者から識別情報を受信して、その識別情報に対応する画像データや音声データを利用者に提供する画像サービスシステムがあり、このようなシステムを、乳児をあやすための母親の声データや画像データの保存に利用することができる（例えば、特許文献１参照）。
特開２００２−５６０７９号公報

前記のように、母親の乳児への呼びかけは、乳児をあやすための対応として最適なものの一つであるとしても、常に効果的であるとは限らない。

例えば、母親がイライラしたり不安だったりしてストレスの高い精神状態のもとで乳児をあやす場合、旅行中や外出中など普段の乳児の生活環境と異なるような緊張した状況下であやす場合に、あやす側の大人の不安や緊張があやされる側の乳児に伝わってしまうことにより、乳児の機嫌が良くなるまで時間がかかったり、かえって乳児が興奮したりして逆効果となってしまうことが多いことは、経験上よく知られている。

したがって、母親が乳児に直接呼びかける代わりに、前記の画像サービスシステムを用いて保管しておいた母親の声や画像を用いるとしても、保管された声データに照れや焦りなどの自然でない状態を感じさせる気配がある場合には、乳児は不自然な気配を敏感に察知するため、効果的にあやすことができない。

本発明の目的は、母親が自然な状態で発話した呼びかけの声、乳児の好きな物の音など、乳児をあやす行為に適すると考えられる音声データを保管し、ユーザの要求に応じて保管しておいた音声データを提供することにより、どのような状況において乳児をあやす場合でも、一定の効果を得るように乳児をあやす行為を支援する処理方法、または前記処理方法を実現するための乳児あやし支援処理システム用のデータ管理装置を提供することである。

上記の問題を解決し目的を達成するため、本発明は、乳児をあやすために用いる乳児への呼びかけ声の音声データをデータ記憶手段に保管して、乳児をあやす行為を支援する処理方法であって、ユーザ端末を識別するユーザ情報および乳児への呼びかけ声の音声データを入力し、前記音声データの発話の状態を周波数の特性として示す韻律情報を取得し、乳児への呼びかけ声に適する韻律情報上の特性を示した適性度範囲を備えて、前記適性度範囲をもとに、前記音声データの韻律情報が前記適性度範囲にあるか否かを判定し、前記韻律情報が前記適性度範囲内である音声データを、前記ユーザ情報と対応させて前記データ記憶手段に格納し、前記ユーザ端末から利用要求を受け付けた場合に、前記ユーザ端末のユーザ情報に対応する前記音声データを出力することを特徴とする。

本発明では、ユーザが使用するユーザ端末から、ユーザ端末を識別するユーザ情報および乳児へ呼びかける母親の声の音声データを入力すると、この音声データを構成する要素ごとの特性を示す韻律情報を取得する。さらに、予め、例えばリラックスした状態で発話された母親の呼びかけの声のように、乳児への呼びかけ声に適した音声データの韻律情報上の特性を示した適性度範囲を備えておき、この適性度範囲をもとに、入力された音声データの韻律情報が適性度範囲にあるか否かを判定する。

そして、韻律情報が適性度範囲内であれば、この音声データを、ユーザ情報と対応させてデータ記憶手段に格納する。なお、適性度範囲内でないと判定された音声データは廃棄される。

その後、ユーザ端末から利用要求を受け付けた場合に、ユーザ端末のユーザ情報に対応する音声データを要求元のユーザ端末へ出力する。ユーザは、ユーザ端末から出力される呼びかけ声を乳児に聞かせることにより乳児をあやすことができる。

または、本発明の処理方法では、さらに、ユーザ情報および音声データを入力する場合に、さらに画像データを入力する。そして、音声データおよび画像データを複合して複合データ作成し、この複合データをユーザ情報と対応させてデータ記憶手段に格納する。

その後、ユーザ端末から利用要求を受け付けた場合に、ユーザ端末のユーザ情報に対応する複合データを要求元のユーザ端末へ出力する。

これにより、ユーザは、ユーザ端末から出力される呼びかけ声を乳児に聞かせ、同時に乳児のお気に入りの画像を見せることにより乳児をあやすことができる。

または、本発明の処理方法では、さらに、ユーザ情報とともに、音声データの出力を繰り返す回数および複数の音声データの出力の順序を定める再生条件を入力する。そして、ユーザ端末から利用要求を受け付けた場合に、ユーザ端末のユーザ情報に対応する再生条件に従って音声データを要求元のユーザ端末へ出力する。

これにより、ユーザは、複数の音声データが登録されている場合に、任意の出力順序および繰返回数を指定して、呼びかけ声を乳児に聞かせることにより乳児をあやすことができる。

または、本発明の処理方法では、さらに、ユーザ情報とともに、ユーザ連絡先を取得し、ユーザ端末から利用要求を受け付けた場合に、所定の期間内の利用要求回数および音声データの出力時間を求める。そして、利用要求回数が所定の回数を超えたときは、利用状況メッセージを作成して、ユーザ連絡先にこの利用状況メッセージを送信する。

例えば、乳児をあやすためのユーザ端末（例えば、父親の携帯電話）と異なるユーザ連絡先（母親の携帯電話の番号）を登録しておいた場合に、一定の時間内に父親が乳児をあやす回数が多くなったときには、母親の元へ利用状況メッセージが通知されるため、母親が外出中であっても、乳児の状況を知ることができる。

本発明によれば、データ管理センタは、ユーザ端末から、ユーザごとに乳児の母親の声や乳児の好きな音などの音声データを受信し、受信した声データから取得した韻律情報をもとに、その声データが、乳児をあやす際の呼びかけに適した声であるかどうかを判定し、適性があると判定した声データのみを保管する。

これにより、ユーザは、母親が不在であって不慣れな者が乳児をあやさなければならない場合や、母親が緊張や不安などストレスの高い状況におかれているにもかかわらず乳児をあやさなければならない場合でも、前もって保管された自然な状態で発話された母親の呼びかけの声を乳児に聞かせることができるため、乳児をあやすために効果的と考えられる行為を実現できるように支援することができる。

特に、ユーザ端末が携帯可能な端末である場合には、乳児が不安になりやすい外出中などでも、母親の声データを保管するデータ管理センタと通信するだけで、簡単に、母親の呼びかけの声を乳児に聞かせることができるため、特に大きな効果を期待することができる。

なお、本発明は、乳児をあやすという行為において、母親の代替となるものではなく、乳児をあやすための手段の一つとして、コンピュータおよび通信手段を利用した処理方法および処理システムを提供することにより、あやす行為を支援するものである。

以下、本発明を実施するための最良の形態を、図を用いて説明する。

図１に、本発明にかかる乳児あやし支援処理システムの構成例を示す。乳児あやし支援処理システムは、データ管理センタ１およびユーザ端末２から構成される。

データ管理センタ１は、ユーザ端末２から送信された音声データ３１が声データｖである場合に、その声データｖが乳児をあやす際の呼びかけの声としての適性を備えるか否かを声データｖの韻律情報を用いて判定し、所定の適性度を備える声データｖと、ユーザが登録した画像データ３３とを複合して生成した複合データ３４を保管し、ユーザの要求に応じて該当する複合データ３４をユーザ端末２へ送信するサーバコンピュータである。

ユーザ端末２は、録音もしくは入力した音声データ３１、および録画もしくは入力した画像データ３３をデータ管理センタ１へ送信し、またはデータ管理センタ１に保管された複合データ３４を受信する端末である。ユーザ端末２として、携帯電話、ＰＨＳ（Ｐｅｒｓｏｎａｌ Ｈａｎｄｙｐｈｏｎｅ Ｓｙｓｔｅｍ）端末、携帯情報端末などがある。

データ管理センタ１およびユーザ端末２は、携帯電話網、ＰＨＳ網、インターネットなどのネットワーク４を通じて相互にデータの送受信を行う。

データ管理センタ１は、データ管理手段１０、音声データ取得手段１１、韻律情報取得手段１２、適性度判定手段１３、データ複合手段１４、画像データ取得手段１５、ユーザ管理手段１６、およびデータ送信手段１７から構成され、データ情報３０、音声データ３１、適性度判定基準３２、画像データ３３、複合データ３４、ユーザ情報３５、および利用ログ情報３６を記憶する記憶部を備える。

データ管理手段１０は、ユーザ端末２から送信された音声データ３１、画像データ３３、およびデータ複合手段１４で複合された複合データ３４を、データ情報３０により管理する手段である。

データ情報３０は、ユーザごとに、音声データ３１の種別、パターン、識別情報、ならびに音声データ３１に対応する画像データ３３の識別情報、声の音声データ３１の韻律情報、適性度判定結果（適性度情報）、およびデータ同士の繋ぎ合わせに関する情報からなる。

データの種別は、受信した音声データ３１が人間の声であるか（種別＝１）、声以外の音であるか（種別２）を示す情報である。なお、音声データ３１のうち、種別＝１の人間の声のデータを「声データｖ」、種別＝２の声以外の音源のデータを「音データｓ」とする。

データのパターンは、音声データ３１の内容の種別を示す情報であり、例えば、母親の声（ＡＡＡＡ）、おもちゃの音（ＢＢＢＢ）、動物の鳴き声（ＣＣＣＣ）、遊園地の音（ＤＤＤＤ）などの所定のパターンが用意される。

音声データ取得手段１１は、ユーザ端末２から送信された音声データ３１を取得する手段である。

韻律情報取得手段１２は、音声データ３１中の声データｖを周波数に変換し、韻律情報を取得する手段である。

韻律情報は、音声の個人的相違を示す情報のひとつであり、発話者の音声の後天的特徴、すなわちアクセント、イントネーション、リズム、ポーズなどによる発話状態の違いを表す大局的特徴（韻律）を周波数の成分の特性として示す情報である。

韻律情報の各要素は、一般的に、以下の範囲の値をとる。

アクセント： ３５０〜５００ＫＨｚ、
イントネーション： ４００〜８００ＫＨｚ、
リズム： １００〜５００ｍｓ、
ポーズ： １００〜５００ｍｓ。

なお、発話者の先天的特徴、すなわち声帯の形や長さなど音声器官の違いは、基本となる周波数（基本周波数）の高さに表れるとされ、通常、以下の範囲の値をとる。

基本周波数の平均的高さ： ４００〜８００ＫＨｚ。

韻律情報取得手段１２は、声データｖの各フレーズごとに周波数分析を行って基本周波数を取得し、また、アクセント、イントネーション、リズム、ポーズなどの韻律情報を取得する。

適性度判定手段１３は、適性度判定基準３２をもとに、声データｖが乳児をあやす際の呼びかけの声としての適性度を備えるか否かを判定する手段である。

適性度判定基準３２は、緊張、興奮、不安などがない自然な状態で発話された声データの韻律情報から呼びかけに適した声の特性の範囲を統計的・経験的に求めた基準である。予め、韻律情報の各要素ごとに、適性度を備える範囲を示す適性しきい値を定めておく。

データ複合手段１４は、音声データ（声データｖ／音データｓ）３１と、画像データ３３とを複合処理して複合データ３４を生成し、さらに、複合データ３４同士を繋ぎ合わせる手段である。

画像データ取得手段１５は、ユーザ端末２から送信された画像データ３３を取得する手段である。

ユーザ管理手段１６は、ユーザ情報３５および利用ログ情報３６を管理し、一定の期間内に所定の回数以上で利用要求があった場合に、所定の連絡先へ利用状況メッセージを送信する手段である。

ユーザ情報３５は、ユーザＩＤやパスワードなどのユーザ認証情報、ユーザ端末２の識別情報（携帯電話番号）、利用状況メッセージの送信先（通知先メールアドレス）などからなる。

利用ログ情報３６は、ユーザ端末２がデータ管理センタ１で保管された種々のデータを受信した利用時間または利用回数などからなる。

データ送信手段１７は、データ管理センタ１で保管されている複合データ３４をユーザ端末２に送信する手段である。

本形態では、ユーザ端末２は、携帯電話であって、音声入力手段２１、音声出力手段２２、画像入力手段２３、および画像出力手段２４から構成される。

音声入力手段２１は、声や音を録音し、音声データ３１を外部から入力し、またはキー入力を行う手段である。音声出力手段２２は、音声データ３１または複合データ３４の音声を出力する手段である。

画像入力手段２３は、画像を撮影し、または画像データ３３を外部から入力する手段である。画像出力手段２４は、画像データ３３または複合データ３４の画像を出力する手段である。

図２を用いて、本発明の処理の流れの概要を説明する。

データ送信処理（ステップＳ１）：
ユーザ端末２では、データ管理センタ１の利用登録をしたユーザ（母親）は、乳児をあやす時に使う呼びかけの声、おもちゃの音、動物の鳴き声などを録音するか、音声データ３１を入力する。呼びかけの声を「声データｖ１」と、おもちゃの音を「音データｓ１」と、動物の鳴き声を「音データｓ２」と、別のおもちゃの音を「音データｓ３」とする。

また、呼びかけとともに表示させたい母親の顔や動物の顔などを録画するか、画像データ３３を入力する。母親の顔を「画像データｐ１」とし、動物の顔を「画像データｐ２」とする。

録音した音声データ（声データｖ１、音データｓ１、ｓ２、ｓ３）３１および画像データ（画像データｐ１、ｐ２）３３をデータ管理センタ１へネットワーク４を通じて送信する。

データ登録処理（ステップＳ２）：
データ管理センタ１では、ユーザ端末２からのデータを受信・格納する。声データｖが複数のフレーズに区切られている場合には、区切りでデータを分割し、フレーズごとに格納する。そして、ユーザごとのデータ情報３０に、送信番号、データＩＤ、種別、パターンなどを登録する。なお、データＩＤは、各フレーズごと付与される。

適性度判定処理（ステップＳ３）：
受信・格納した音声データ３１が声データｖ１であれば、声データｖを周波数に変換して基本周波数の平均的高さを求め、周波数分析して、アクセント、イントネーション、リズム、ポーズなどの韻律情報を取得し、データ情報３０に登録する。

さらに、適性度判定基準３２を参照して、取得した韻律情報をもとに声データｖ１が適性度を備えるか否かを判定し、判定結果（適性度）をデータ情報３０に登録する。また、ユーザ端末２へ適性度を送信する。

再生条件指定処理（ステップＳ４）：
ユーザ端末２では、データ管理センタ１から受信した適性度を表示する。ユーザが、表示された適性度をもとにデータの登録の可否、再生の順序、繰返回数などの再生条件を指定すると、指定された再生条件をデータ管理センタ１へ送信する。

再生条件登録処理（ステップＳ５）：
データ管理センタ１では、ユーザ端末２から再生条件を受信し、登録不可と指定された音声データ３１を廃棄し、再生順序や繰返回数をデータ情報３０に登録する。

データ複合処理（ステップＳ６）：
次に、再生順序に従って、音声データ３１と、対応する画像データ３３とを複合処理して複合データ３４を生成する。例えば、母親の声（声データｖ１）と母親の顔（画像データｐ１）との複合データｃ１、おもちゃの音（音データｓ１）と動物の顔（画像データｐ２）との複合データｃ２、動物の鳴き声（音データｓ２）と動物の顔（画像データｐ２）との複合データｃ３などを生成する。

そして、複合データｃ１、ｃ２、ｃ３の繋ぎ合わせパターンを生成して、データ情報３０に登録する。例えば、「母親の声、おもちゃの音、母親の声、および動物の鳴き声」の繋ぎ合わせパターン（複合データｃ１、ｃ２、ｃ１、ｃ３の順番の組み合わせ）、母親の声のない「おもちゃの音および動物の鳴き声」の繋ぎ合わせパターン（複合データｃ２、ｃ３の順番の組み合わせ）などを登録する。

利用要求処理（ステップＳ７）：
その後、ユーザが登録したデータを用いて乳児をあやしたい場合に、ユーザは、ユーザ端末２から利用要求をデータ管理センタ１へ送信する。

データ送信・利用状況管理処理（ステップＳ８）：
データ管理センタ１では、ユーザ端末２から利用要求を受信して、保管している複合データ３４の一覧をユーザ端末２へ送信する。ユーザがデータ一覧をみて指定したデータをデータ管理センタ１へ通知する。

データ管理センタ１は、指定された複合データ３４を抽出し、繰返回数に従って再生した音声と画像をユーザ端末２へ送信する。さらに、利用時間、利用回数などの利用ログ情報３６を取得し、利用が所定の回数または頻度を超えた場合に、ユーザ情報３５の連絡先メールアドレスに、利用状況を通知する。

データ受信処理（ステップＳ９）：
一方、ユーザ端末２では、受信した音声および画像を乳児に聞かせたり見せたりする。ユーザは、再生された母親の呼びかけの声を乳児に聞かせ、また、母親の顔の画像をみせることにより、リラックスした母親の呼びかけの声や乳児のお気に入りの音などを使って、効果的に乳児をあやすことができる。

以下に、図２に示す各処理の内容をさらに詳しく説明する。

図３に、データ送信処理（ステップＳ１）の詳細処理フローを示し、図４に、ユーザ端末２で表示される画面の例を示す。

ユーザ端末２は、予め与えられた認証情報（ユーザＩＤ、パスワードなど）により、データ管理センタ１のアクセス認証を受けると、図４（Ａ）に示す画面を表示し、入力される音声が、母親の声であるか、その他の音であるかを判断する（ステップＳ１０）。

図４（Ａ）の画面において、ユーザが「母親の声」を選択した場合には、声データの送信と判断して、図４（Ｂ）に示す画面を表示する。そして、音声入力手段２１によって、母親の呼びかけの声を録音するか、または呼びかけの声データｖを入力する（ステップＳ１１）。

図４（Ｂ）の画面のように、ユーザは、複数のフレーズを録音する場合に、フレーズを１つずつ録音し、フレーズの区切りに音声入力手段２１の「＊」キーを押し、すべてのフレーズの録音または入力が終了したら、「＃」キーを押す。

音声データ３１は、複数のフレーズを録音した場合に、以下のような構成になる。

声データｖ１＝
「○○ちゃんいいこだね、＊（区切り）、
○○ちゃんかわいいね、＊（区切り）、
○○ちゃんこっち見て、＃（終了）。」
なお、同じフレーズを複数回繰り返して録音した場合に、以下のような構成になる。

声データｖ２＝
「○○ちゃんかわいいね、＊（区切り）、
○○ちゃんかわいいね、＊（区切り）、
○○ちゃんかわいいね、＃（終了）。」
また、図４（Ａ）の画面でユーザが「その他」を選択した場合には、音データの送信と判断して、図４（Ｃ）の画面を表示し、音声入力手段２１によって、乳児の好きな音を録音するか、またはその音データｓを入力する（ステップＳ１２）。

そして、入力した音声データ（声データｖ／音データｓ）３１をデータ管理センタ１へ送信する（ステップＳ１３）。

続いて、図４（Ｄ）に示す画面を表示し、画像データ３３を送信するかどうかを判定する（ステップＳ１４）。図４（Ｄ）の画面でユーザが「画像送信」を選択した場合には、図４（Ｅ）に示す画面を表示し、画像入力手段２３により母親の顔を撮影し、または母親の顔の画像データｐ１を入力し（ステップＳ１５）、画像データ３３をデータ管理センタ１へ送信する（ステップＳ１６）。

図４（Ｄ）の画面でユーザが「終了」を選択した場合には、図４（Ｅ）に示す画面を表示し、データ登録の処理を続けるか否かを判定する（ステップＳ１７）。

図４（Ｅ）の画面でユーザ「継続」を選択した場合には、ステップＳ１０の処理へ戻り処理を繰り返す。一方、図４（Ｅ）の画面でユーザが「終了」を選択した場合は、処理を終了する。

その後、ユーザ端末２から送信したデータがデータ管理センタ１において受信されると、ユーザ端末２に、ユーザの認証情報、送信されたデータのパターンが返され、図４（Ｆ）に示す画面が表示される。

図５に、データ登録処理（ステップＳ２）および適性度判定処理（ステップＳ３）の詳細処理フローを示す。

データ管理センタ１では、音声データ取得手段１１および画像データ取得手段１５により、ユーザ端末２から送信された音声データ（声データｖ／音データｓ）３１および画像データ３３を受信し（ステップＳ２０）、所定の記憶部に格納する（ステップＳ２１）。声データｖに複数のフレーズが含まれていれば、区切りで分割したフレーズごとに記憶部へ格納する。

また、データ管理手段１０は、格納されたデータ単位にデータＩＤを付与し、音声データ３１のパターン、データ種別を判断してデータ情報３０に登録する（ステップＳ２２）。

図６に、データ情報３０の例を示す。データ情報３０では、ユーザごとに用意される。データ情報３０のデータエントリとして、データパターン、データ種別、音声データ３１のデータＩＤ、対応する画像データ（音声データ３１に続いて送信された画像）３３のデータＩＤが登録される。

データ管理手段１０が、声データｖをフレーズごと切り出した場合には、声データｖ１の各フレーズには以下のようなデータＩＤが付与される。

声データｖ１：
第１フレーズ「○○ちゃんいいこだね」＝声データｖ11、
第２フレーズ「○○ちゃんかわいいね」＝声データｖ12、
第３フレーズ「○○ちゃんこっち見て」＝声データｖ13。

ユーザ端末２から、声データｖ１に続いて音データｓ１、音データｓ２が受信されている場合は、データ管理手段１０は、声データｖ１と同様に、所定の情報をデータ情報３０に登録する。音データｓ１に続いて画像データｐ２が送信されていれば、画像データｐ２を音データｓ１に対応付けて登録する。

さらに、声データｖ１を受信していれば（ステップＳ２３）、韻律情報取得手段１２は、声データｖ１から韻律情報を取得する（ステップＳ２４）。

具体的には、韻律情報取得手段１２は、まず、声データｖ１のフレーズごとに、データを周波数に変換し、基本周波数の平均的な高さを求めて、ユーザの音声の先天的特徴に関する情報を取得する。さらに、周波数分析を行って、アクセント、イントネーション、リズム、ポーズなどの要素について周波数の成分（スペクトル特徴）を抽出し、成分値（韻律情報）を求める。

韻律情報取得手段１２は、図７に示すように、取得した基本周波数の平均的な高さ（基本周波数）、アクセント、イントネーション、リズム、ポーズの周波数成分の値をデータ情報３０に登録する。

さらに、適性度判定手段１３は、所定の適性度判定基準（適性しきい値、適性度レベル）３２を用いて、韻律情報をもとにその声データｖ１の各フレーズの適性度が、どのレベルであるかを判定する（ステップＳ２５）。

具体的には、適性度判定手段１３は、声データｖ１の各フレーズについて、基本周波数、アクセント、イントネーションについて周波数成分の最大値を取得し、最大値を適性しきい値と比較する。そして、最大値が、適性しきい値を中心とする所定の値の幅内（例えば、差分が１０％以内）であれば、「適性度Ｂ（やや適性）」と判定する。また、最大値が、その範囲より下回っていれば「適性度Ａ（適性）」と判定し、その範囲より上回っていれば、「適性度Ｃ（不適切）」と判定する。

図８に、韻律情報のアクセントに対する３つのフレーズの周波数スペクトルの特徴の比較を示す。

３つのフレーズの声データｖ１（ｖ11、ｖ12、ｖ13）の各周波数成分の強さを比較すると、第１フレーズ（声データｖ11）の成分の最大値は、所定の適性しきい値を超えている。これは、第１フレーズが、不安、興奮、緊張などのストレスが高い状態において発話されたものであって、乳児をあやすための呼びかけには適さないことを示す。

一方、第２フレーズ（声データｖ12）および第３フレーズ（声データｖ13）それぞれの周波数の成分の最大値は適性しきい値と同じであるか、下回っている。これは、これらのフレーズが、自然な状態で発話されたものであって、乳児をあやすための呼びかけに適していることを示す。

適性度判定手段１３は、声データｖ１の各フレーズを判定し、第１フレーズ（声データｖ11）、第２フレーズ（声データｖ12）、および第３フレーズ（声データｖ13）のそれぞれの適性度に、「Ｃ」、「Ａ」、および「Ｂ」を付与してデータ情報３０に登録する。

そして、声データｖ１の判定結果をユーザ端末２へ送信する（ステップＳ２６）。

図９に、再生条件設定処理（ステップＳ４）の詳細処理フローを示し、図１０に、表示画面の例を示す。

ユーザ端末２では、データ管理センタ１から送信された判定結果を受信し（ステップＳ４０）、図１０（Ａ）に示す画面で判定結果を表示する（ステップＳ４１）。図１０（Ａ）の画面には、声データｖ１の各フレーズの適性度が表示されるため、ユーザは、自分が送信した声データのどのフレーズが、呼びかけの声として適しているかどうかを知ることができる。

また、データ管理センタ１で再生された声データｖ１を受信し、図１０（Ｂ）に示す画面を表示する（ステップＳ４２）。ユーザは、データ管理センタ１で保管された声データｖ１の音を聞いて、実際の聞こえ方を確かめることができる。

続いて、図１０（Ｂ）の画面により、再度データを登録するか、または現在データ管理センタ１に登録されているデータの再生条件を指定するかどうかを判定する（ステップＳ４３）。

図１０（Ｂ）の画面でユーザが「条件指定」を選択した場合には（ステップＳ４３）、図１０（Ｃ）の画面において、保管された声データｖ１のフレーズの再生順序、および繰返回数を指定し（ステップＳ４４）、指定された再生条件をデータ管理センタ１へ送信する（ステップＳ４５）。

図１０（Ｃ）の画面で、再生順序が、第１フレーズ＝順番（０）、第２フレーズ＝順番（２）、第３のフレーズ＝順番（１）と指定され、繰返回数（３）と指定されたとする。声データｖ１の第３フレーズ、第２フレーズの順で再生し、第１フレーズは登録しない旨の再生条件が設定されたことを意味する。

また、ステップＳ４３の処理において、図１０（Ｂ）の画面でユーザが「再登録」を選択した場合には、ステップＳ１０（図３）の処理へ戻る。

図１１に、再生条件登録処理（ステップＳ５）およびデータ複合処理（ステップＳ６）の詳細処理フローを示す。

データ管理センタ１では、ユーザ端末２から再生条件を受信し（ステップＳ５０）、データ管理手段１０は、順番（０）が指定されたフレーズがあれば（ステップＳ５１）、該当する声データｖ１の第１フレーズ（声データｖ11）を削除する（ステップＳ５２）。また、再生順序、繰返回数をデータ情報３０に登録する（ステップＳ５３）。

図１２に、再生条件登録後のデータ情報３０の例を示す。図１２のデータ情報３０では、ユーザ端末２から受信した再生条件に従って、第１フレーズ（声データｖ11）のレコードが削除されている。

次に、データ複合手段１４は、音声データ（声データｖ／音データｓ）３１と対応する画像データ３３とを複合処理して複合データ３４を生成し、所定の記憶部に格納する（ステップＳ５４）。

ここで、以下のような複合データ３４が生成され、格納される。

複合データｃ１：声データｖ13＋画像データｐ１（母親の声と母親の顔）、
複合データｃ２：音データｓ１＋画像データｐ２（おもちゃの音と動物の顔）、
複合データｃ３：声データｖ12＋画像データｐ１（母親の声と母親の顔）、
複合データｃ４：音データｓ２＋画像データｐ２（動物の鳴き声と動物の顔）、
複合データｃ５：音データｓ３＋画像データｐ２（別のおもちゃの音と動物の顔）。

また、データ複合手段１４は、複合データ３４の繋ぎ合わせパターンを生成して、データ情報３０に登録する（ステップＳ５５）。

図１３に、複合データ３４の繋ぎ合わせの例を示す。データ複合手段１４は、以下のような繋ぎ合わせパターンを作成する。

繋ぎ合わせパターン：複合データｃ２＋複合データｃ４＋複合データｃ５
繋ぎ合わせパターン：複合データｃ１＋複合データｃ２＋複合データｃ３＋複合データｃ４
このような繋ぎ合わせパターンによるデータ出力を行うことにより、乳児に、母親の呼びかけの声と乳児の好きな音とを交互に聞かせたり、乳児の好きな音だけを聞かせたりすることができる。

図１４に、利用要求処理（ステップＳ７）およびデータ受信処理（ステップＳ９）の詳細処理フローを示す。

ユーザ端末２は、利用要求を送信し、予め与えられた認証情報（ユーザＩＤ、パスワードなど）によりデータ管理センタ１のアクセス認証を受けると、登録されたデータの一覧が表示されて、受信するデータの指定をデータ管理センタ１へ送信する（ステップＳ７０）。

その後、データ管理センタ１から指定した複合データ３４を受信し（ステップＳ７１）、音声出力手段２２、画像出力手段２４により、それぞれデータ（音と画像）を出力する（ステップＳ７２）。

別データを受信する場合には（ステップＳ７３）、ステップＳ７０の処理へ戻る。さらに、利用終了が指示されるまで（ステップＳ７４）、ステップＳ７２のデータ（音と画像）の出力を続ける。

図１５に、データ送信、利用状況管理処理（ステップＳ８）の詳細処理フローを示す。

データ管理センタ１では、ユーザ端末２から利用要求を受信すると（ステップＳ８０）、データ送信手段１７は、ユーザの登録データの一覧をユーザ端末２へ送信する（ステップＳ８１）。その後、指定された複合データ３４を抽出し（ステップＳ８２）、抽出したデータの繰返回数に応じて再生したデータをユーザ端末２へ送信する（ステップＳ８３）。

さらに、ユーザ管理手段１６は、利用時間、利用回数をカウントして、利用ログ情報３６に登録する（ステップＳ８４）。

図１６（Ａ）に利用ログ情報３６の例を示す。利用ログ情報３６は、ユーザごとのデータ利用履歴であって、ユーザＩＤ、利用開始から利用終了までの時間を積算した利用時間、および所定時間内における利用要求の合計回数である利用回数からなる。

そして、一定時間内の利用要求の合計回数が所定回数以上であれば（ステップＳ８５）、ユーザ情報３５に登録された通知先メールアドレスに、利用状況メッセージを送信する（ステップＳ８６）。

図１６（Ｂ）にユーザ情報３５の例を示す。ユーザ情報３５は、ユーザＩＤ、パスワードなどの認証情報、ユーザ端末２の識別情報である携帯電話番号、利用状況メッセージの送信先である通知先メールアドレスからなる。

ユーザ管理手段１６は、例えば、「１時間の利用回数が１０回を超えています」のような利用状況を通知する。

さらに、別データの利用要求があれば（ステップＳ８７）、ステップＳ８２の処理へ戻り、別データの利用要求がなければ処理を終了する。

本発明は、具体的に、以下のような状況で使用できる。

１） 外出中、旅行中など、乳児が普段の生活環境と異なる環境で長時間過ごす場合に、乳児がいつも遊んでいるおもちゃが傍になく、母親も周囲に気を使い早くなだめようとして却って冷静さを欠いているようなときに、データ管理センタ１に接続し、母親の声や乳児の好きな音が含まれた登録データを乳児に聞かせて、リラックスできる環境を作り出すための支援ツールとして使用できる。

２） 母親が一時的に不在の場合に、乳児になれていない者があやすときに、登録データを乳児に聞かせて、母親が乳児をなだめるような効果を得るための支援ツールとして使用できる。

なお、母親が比較的長期に不在である場合には、母親の呼びかけの声を聞かせることは、かえって乳児の不安感を呼び起こすことになるため、母親の声を含まない乳児の好きな音だけの登録データを乳児に聞かせるようにする。

３） 遊園地や動物園などの外出先で乳児が気に入った音や動物の鳴き声などを録音してデータ管理センタ１に登録しておき、普段の生活において、お気に入りの音が含まれる登録データをおもちゃ代わりに聞かせて、乳児を遊ばせるツールとして使用できる。

４） なお、ユーザは、乳児の成長に従ってその時々に乳児が気に入った音や画像を何度でも登録することができる。データ管理センタ１において保存されるデータは、乳児ごとに時系列的に記録され、乳児ごとの成長記録として利用することが可能となる。また、データ管理センタ１において保存される多数の登録データのパターンなどのデータを統計処理することにより、育児研究分野での資料として利用することが可能となる。

このように、本発明は、乳児をあやすための支援ツールとしてだけでなく、乳児とのコミュニケーション支援ツールとしての効果も奏することができる。

以上、本発明をその実施の形態により説明したが、本発明はその主旨の範囲において種々の変形が可能であることは当然である。

例えば、本形態において、データ管理センタ１では、ユーザ端末２から送信された音声データ３１の声データｖをいったん保管し、適性度判定手段１３において適性度を満たさないと判定された後、ユーザの指示によって削除するものとして説明した。

しかし、適性度を満たさない声データｖは、ユーザの指示を待たずに、データ管理センタ１側で直ちに廃棄するようにしてもよい。

その場合に、ユーザ端末２から送信された声データｖがすべて適性度を満たさないと判定された場合には、適性度の範囲にもっとも近い声データを一つ選択して、その声データｖのみを保管・登録するようにしてもよい。

または、適性度の範囲にもっとも近い声データが適性の範囲となるように、データの変換処理を行い、変換された声データを保管するようにしてもよい。

また、データ送信手段１７は、ユーザ端末２から利用要求があった場合に、指定された複合データ３４を再生して、音および映像を送信するものとして説明した。しかし、データ送信手段１７は、利用要求で指定された複合データ３４のファイルをユーザ端末２に送信し、ユーザ端末２では一時記憶部を備えて、ダウンロードした複合データ３４を一時的に保管し、音声出力手段２２または画像出力手段２４により再生するようにしてもよい。

また、データ送信手段１７は、ユーザから要求された複合データ３４を送信するものとして説明したが、データ送信手段１７は、保管されている音声データ３１の一覧を表示させて、該当する音声データ３１を送信するようにしてもよい。

また、本発明は、コンピュータにより読み取られ実行される処理プログラムとして実施することができる。本発明を実現する処理プログラムは、コンピュータが読み取り可能な、可搬媒体メモリ、半導体メモリ、ハードディスクなどの適当な記録媒体に格納することができ、これらの記録媒体に記録して提供され、または、通信インタフェースを介して種々の通信網を利用した送受信により提供されるものである。

本発明の形態および実施例の特徴を列記すると以下のとおりである。

（付記１） 乳児をあやすために用いる乳児への呼びかけ声の音声データをデータ記憶手段に保管して、乳児をあやす行為を支援する処理方法であって、
ユーザ端末を識別するユーザ情報および乳児への呼びかけ声の音声データを入力し、
前記音声データの発話の状態を周波数の特性として示す韻律情報を取得し、
乳児への呼びかけ声に適する韻律情報上の特性を示した適性度範囲を備えて、前記適性度範囲をもとに、前記音声データの韻律情報が前記適性度範囲にあるか否かを判定し、
前記韻律情報が前記適性度範囲内である音声データを、前記ユーザ情報と対応させて前記データ記憶手段に格納し、
前記ユーザ端末から利用要求を受け付けた場合に、前記ユーザ端末のユーザ情報に対応する前記音声データを出力する
ことを特徴とする乳児あやし支援処理方法。

（付記２） 前記付記１記載の乳児あやし支援処理方法において、
前記韻律情報は、少なくともアクセントおよびイントネーションに関する周波数の特定を示す情報を含むものである
ことを特徴とする乳児あやし支援処理方法。

（付記３） 前記付記１記載の乳児あやし支援処理方法において、
前記ユーザ情報および前記音声データを入力する場合に、さらに画像データを入力し、
前記音声データおよび前記画像データを複合して複合データ作成し、前記複合データを前記ユーザ情報と対応させて前記データ記憶手段に格納し、
前記ユーザ端末から利用要求を受け付けた場合に、前記ユーザ端末のユーザ情報に対応する前記複合データを出力する
ことを特徴とする乳児あやし支援処理方法。

（付記４） 前記付記１記載の乳児あやし支援処理方法において、
前記ユーザ情報とともに、前記音声データの出力を繰り返す回数および複数の音声データの出力の順序を定める再生条件を入力し、
前記ユーザ端末から利用要求を受け付けた場合に、前記ユーザ端末のユーザ情報に対応する前記再生条件に従って前記音声データを出力する
ことを特徴とする乳児あやし支援処理方法。

（付記５） 前記付記１記載の乳児あやし支援処理方法において、
前記ユーザ情報とともに、ユーザ連絡先を取得し、
前記ユーザ端末から利用要求を受け付けた場合に、所定の期間内の前記利用要求の回数および前記音声データの出力時間を求め、
前記利用要求の回数が所定の回数を超えたときは、利用状況メッセージを作成し、前記ユーザ連絡先に前記利用状況メッセージを送信する
ことを特徴とする乳児あやし支援処理方法。

（付記６） 乳児をあやすために用いる乳児への呼びかけ声の音声データをデータ記憶手段に保管して、乳児をあやす行為を支援する乳児あやし支援処理システムで用いるデータ管理装置であって、
ユーザ端末を識別するユーザ情報および乳児への呼びかけ声の音声データを入力する手段と、
前記音声データの発話の状態を周波数の特性として示す韻律情報を取得する手段と、
乳児への呼びかけ声に適する韻律情報上の特性を示した適性度範囲を備えて、前記適性度範囲をもとに、前記音声データの韻律情報が前記適性度範囲にあるか否かを判定する手段と、
前記韻律情報が前記適性度範囲内である音声データを、前記ユーザ情報と対応させて前記データ記憶手段に格納する手段と、
前記ユーザ端末から利用要求を受け付けた場合に、前記ユーザ端末のユーザ情報に対応する前記音声データを出力する手段とを備える
ことを特徴とする乳児あやし支援処理システム用データ管理装置。

（付記７） 乳児をあやすために用いる乳児への呼びかけ声の音声データをデータ記憶手段に保管して、乳児をあやす行為を支援する乳児あやし支援処理を、コンピュータに実行させるためのプログラムであって、
ユーザ端末を識別するユーザ情報および乳児への呼びかけ声の音声データを入力する処理と、
前記音声データの発話の状態を周波数の特性として示す韻律情報を取得する処理と、
乳児への呼びかけ声に適する韻律情報上の特性を示した適性度範囲を備えて、前記適性度範囲をもとに、前記音声データの韻律情報が前記適性度範囲にあるか否かを判定する処理と、
前記韻律情報が前記適性度範囲内である音声データを、前記ユーザ情報と対応させて前記データ記憶手段に格納する処理と、
前記ユーザ端末から利用要求を受け付けた場合に、前記ユーザ端末のユーザ情報に対応する前記音声データを出力する処理とを、
コンピュータに実行させるための乳児あやし支援処理プログラム。

（付記８） 乳児をあやすために用いる乳児への呼びかけ声の音声データをデータ記憶手段に保管して、乳児をあやす行為を支援する乳児あやし支援処理を、コンピュータに実行させるためのプログラムを記録した記録媒体であって、
ユーザ端末を識別するユーザ情報および乳児への呼びかけ声の音声データを入力する処理と、
前記音声データの発話の状態を周波数の特性として示す韻律情報を取得する処理と、
乳児への呼びかけ声に適する韻律情報上の特性を示した適性度範囲を備えて、前記適性度範囲をもとに、前記音声データの韻律情報が前記適性度範囲にあるか否かを判定する処理と、
前記韻律情報が前記適性度範囲内である音声データを、前記ユーザ情報と対応させて前記データ記憶手段に格納する処理と、
前記ユーザ端末から利用要求を受け付けた場合に、前記ユーザ端末のユーザ情報に対応する前記音声データを出力する処理とを、
コンピュータに実行させるための乳児あやし支援処理プログラムを記録した記録媒体。

乳児あやし支援処理システムの構成例を示す図 本発明の処理の流れの概要を説明するための図 データ送信処理の詳細処理フローを示す図 ユーザ端末で表示される画面の例を示す図 データ登録処理および適性度判定処理の詳細処理フローを示す図 データ情報の例を示す図 韻律情報が追加されたデータ情報の例を示す図 韻律情報のある要素に対する３つのフレーズの周波数スペクトルの特徴の比較を示す図 再生条件設定処理の詳細処理フローを示す図 ユーザ端末で表示される画面の例を示す図 再生条件登録処理およびデータ複合処理の詳細処理フローを示す図 再生条件登録後のデータ情報の例を示す図 複合データの繋ぎ合わせの例を示す図 利用要求処理およびデータ受信処理の詳細処理フローを示す図 データ送信処理および利用状況管理処理の詳細処理フローを示す図 利用ログ情報およびユーザ情報の例を示す図

符号の説明

１ データ管理センタ
１０ データ管理手段
１１ 音声データ取得手段
１２ 韻律情報取得手段
１３ 適性度判定手段
１４ データ複合手段
１５ 画像データ取得手段
１６ ユーザ管理手段
１７ データ送信手段
２ ユーザ端末
２１ 音声入力手段
２２ 音声出力手段
２３ 画像入力手段
２４ 画像出力手段
３０ データ情報
３１ 音声データ
３２ 適性度判定基準
３３ 画像データ
３４ 複合データ
３５ ユーザ情報
３６ 利用ログ情報

Claims (5)

1. 乳児をあやすために用いる乳児への呼びかけ声の音声データをデータ記憶手段に保管して、乳児をあやす行為を支援する処理方法であって、
   ユーザ端末を識別するユーザ情報および乳児への呼びかけ声の音声データを入力し、
   前記音声データの発話の状態を周波数の特性として示す韻律情報を取得し、
   乳児への呼びかけ声に適する韻律情報上の特性を示した適性度範囲を備えて、前記適性度範囲をもとに、前記音声データの韻律情報が前記適性度範囲にあるか否かを判定し、
   前記韻律情報が前記適性度範囲内である音声データを、前記ユーザ情報と対応させて前記データ記憶手段に格納し、
   前記ユーザ端末から利用要求を受け付けた場合に、前記ユーザ端末のユーザ情報に対応する前記音声データを出力する
   ことを特徴とする乳児あやし支援処理方法。
2. 請求項１記載の乳児あやし支援処理方法において、
   前記ユーザ情報および前記音声データを入力する場合に、さらに画像データを入力し、
   前記音声データおよび前記画像データを複合して複合データ作成し、前記複合データを前記ユーザ情報と対応させて前記データ記憶手段に格納し、
   前記ユーザ端末から利用要求を受け付けた場合に、前記ユーザ端末のユーザ情報に対応する前記複合データを出力する
   ことを特徴とする乳児あやし支援処理方法。
3. 請求項１記載の乳児あやし支援処理方法において、
   前記ユーザ情報とともに、前記音声データの出力を繰り返す回数および複数の音声データの出力の順序を定める再生条件を入力し、
   前記ユーザ端末から利用要求を受け付けた場合に、前記ユーザ端末のユーザ情報に対応する前記再生条件に従って前記音声データを出力する
   ことを特徴とする乳児あやし支援処理方法。
4. 請求項１記載の乳児あやし支援処理方法において、
   前記ユーザ情報とともに、ユーザ連絡先を取得し、
   前記ユーザ端末から利用要求を受け付けた場合に、所定の期間内の前記利用要求の回数および前記音声データの出力時間を求め、
   前記利用要求の回数が所定の回数を超えたときは、利用状況メッセージを作成し、前記ユーザ連絡先に前記利用状況メッセージを送信する
   ことを特徴とする乳児あやし支援処理方法。
5. 乳児をあやすために用いる乳児への呼びかけ声の音声データをデータ記憶手段に保管して、乳児をあやす行為を支援する乳児あやし支援処理システムで用いるデータ管理装置であって、
   ユーザ端末を識別するユーザ情報および乳児への呼びかけ声の音声データを入力する手段と、
   前記音声データの発話の状態を周波数の特性として示す韻律情報を取得する手段と、
   乳児への呼びかけ声に適する韻律情報上の特性を示した適性度範囲を備えて、前記適性度範囲をもとに、前記音声データの韻律情報が前記適性度範囲にあるか否かを判定する手段と、
   前記韻律情報が前記適性度範囲内である音声データを、前記ユーザ情報と対応させて前記データ記憶手段に格納する手段と、
   前記ユーザ端末から利用要求を受け付けた場合に、前記ユーザ端末のユーザ情報に対応する前記音声データを出力する手段とを備える
   ことを特徴とする乳児あやし支援処理システム用データ管理装置。

Images