JP2008529403A

JP2008529403A - 移動通信網における３ｄキャラクターを利用したニュース情報を提供する方法及びシステム

Info

Publication number: JP2008529403A
Application number: JP2007553050A
Authority: JP
Inventors: インソンファン; ジョンミンキム; フージョンキム; ウォンヒーソル
Original assignee: SK Telecom Co Ltd
Current assignee: SK Telecom Co Ltd
Priority date: 2005-02-15
Filing date: 2006-02-15
Publication date: 2008-07-31
Anticipated expiration: 2026-02-15
Also published as: CN101120348B; CN101120348A; KR100706967B1; US20090125312A1; WO2006088313A1; US7912725B2; JP4489121B2; KR20060091435A

Abstract

本発明は、移動通信網における３Ｄキャラクターを利用したニュース情報を提供する方法及びシステムに関するものである。本発明は、ニュース情報提供サーバから３Ｄキャラクターを利用したニュース情報を提供する方法であって、（ａ）リアルタイムに伝えられるニュース情報を音声に変換して音声情報を生成し、音声情報の内容を分析する段階と、（ｂ）（ａ）段階で分析した音声情報の内容に相応する口形態データと顔表情データを抽出する段階と、（ｃ）口形態データと上記顔表情データを３Ｄキャラクターに適用し、３Ｄキャラクターと背景イメージ及び／または背景音楽を合成した３Ｄキャラクターデータを生成する段階と、（ｄ）音声情報と３Ｄキャラクターデータを同期化させて、３Ｄキャラクターニュースを生成する段階と、（ｅ）３Ｄキャラクターニュースをストリーミング方式により移動通信端末機へ転送する段階と、を含むことを特徴とする３Ｄキャラクターを利用したニュース情報を提供する方法及びシステムを提供する。本発明によれば、３Ｄキャラクターにより進行されるニュース情報を提供して実際にＴＶアナウンサーが放送を進行するようなニュースサービスを移動通信サービスに提供できる効果がある。

Description

本発明は、移動通信網における３Ｄキャラクターを利用したニュース情報を提供する方法及びシステムに関し、より詳しくは、リアルタイムに伝えられるニュース情報を音声に変換した音声情報の内容を分析して音声情報の内容に相応する口形態データと顔表情データを抽出して３Ｄキャラクターに適用し、３Ｄキャラクターに背景イメージ及び／または背景音楽を合成した３Ｄキャラクターデータを生成し、音声情報と同期化させて、３Ｄキャラクターニュースを生成しストリーミング方式により移動通信端末機へ転送する移動通信網における３Ｄキャラクターを利用したニュース情報を提供する方法及びシステムに関する。

ＴＣＰ／ＩＰ（Transmission Control Protocol / Internet Protocol）を基盤とするインターネット（Internet）が確立されることにより、オンライン連結が可能な所であればどこでも自分のコンピュータを利用してインターネットに接続して各種情報を検索するか、または文字、音声、イメージ（Image）、動映像などを含む各種データをリアルタイムに転送できるシステム開発が急速になされている。また、移動通信技術の発達により無線通信網を通じて移動性に基盤したインターネットサービスを利用できる無線インターネットサービスが活性化している。

したがって、移動通信システムで提供するサービスは、音声サービスだけでなく、サーキット（Circuit）データ、パケット（Packet）データなどのようなデータを転送するマルチメディア通信サービスに発展しており、モバイル（Mobile）ＰＣ、ＰＤＡ（Personal Digital Assistant）、モバイルフォンなどのような移動通信端末機の性能向上のためのハードウェア及びソフトウェアの開発がなされている。

これによって、最近には、移動通信端末機が既存の個人用コンピュータに取って代わっており、高速の無線通信が可能な移動通信端末機を利用してニュース提供サービス、音楽ファイルダウンロードサービス、ゲームサービス、銀行（株式）業務サービスなどのような、多様な種類のコンテンツを移動通信網を通じて提供されることができる。ここで、ニュース提供サービスは、移動通信端末機の使用者がモバイル用に加工されたニュース情報を提供されることができるサービスである。

しかしながら、移動通信端末機を利用して提供される既存のニュース提供サービスは、一連の自動文字や音声メッセージ形態のニュース情報がサーバ側に既に格納された状態で、移動通信端末機の使用者はこれをダウンロードして視聴するか、空中波放送用ニュースをそのまま伝達する段階に止まっている。したがって、移動通信端末機の使用者は、ニュース情報をサーバ側から一方的に提供されるので、自分が希望するニュース情報のみを抽出して利用し難く、自分が必要としないとか関心がない情報まで不要に提供されなければならないという問題点がある。

また、文字または音声メッセージ形態で提供されるニュース提供サービスは、実際、ＴＶアナウンサーが放送をするような現場感を与えないという問題点があり、空中波放送用ニュースをそのまま提供するニュース提供サービスは、単純にオーディオ信号とビデオ信号のみをサービスするため、サービスが単調であるので、使用者の多様な情報選択の趣向を充足させることができないという問題点がある。

本発明は、前述の問題点を解決するために案出したものであって、リアルタイムに伝えられるニュース情報を音声に変換した音声情報の内容を分析して音声情報の内容に相応する口形態データと顔表情データを抽出して３Ｄキャラクターに適用し、３Ｄキャラクターに背景イメージ及び／または背景音楽を合成した３Ｄキャラクターデータを生成し、音声情報と同期化させて、３Ｄキャラクターニュースを生成してストリーミング方式により移動通信端末機へ転送する移動通信網における３Ｄキャラクターを利用したニュース情報を提供する方法及びシステムを提供することを目的とする。

また、本発明は、移動通信端末機に３Ｄキャラクターニュースサービスを提供する途中に、ニュース情報提供サーバに接続した他の移動通信端末機にも接続時点であるニュースの中間部分から３Ｄキャラクターニュースサービスを提供することを目的とする。

また、本発明は、モバイル放送サーバを利用して移動通信サービス加入者自身が製作したニュース情報を３Ｄキャラクターニュースとして提供することを目的とする。

本発明の第１の目的によれば、移動通信網を通じてニュース情報提供サーバに接続した移動通信端末機に上記ニュース情報提供サーバから３Ｄ（3-dimension）キャラクターを利用したニュース情報を提供する方法であって、（ａ）リアルタイムに伝えられるニュース情報を音声に変換して音声情報を生成し、上記音声情報の内容を分析する段階と、（ｂ）上記（ａ）段階で分析した上記音声情報の内容に相応する口形態データと顔表情データを抽出する段階と、（ｃ）上記口形態データと上記顔表情データを上記３Ｄキャラクターに適用し、上記３Ｄキャラクターと背景イメージ及び／または背景音楽を合成した３Ｄキャラクターデータを生成する段階と、（ｄ）上記音声情報と上記３Ｄキャラクターデータを同期化させて、３Ｄキャラクターニュースを生成する段階と、（ｅ）上記３Ｄキャラクターニュースをストリーミング方式により上記移動通信端末機へ転送する段階と、を含むことを特徴とする３Ｄキャラクターを利用したニュース情報を提供する方法を提供する。

本発明の第２目的によれば、移動通信網、及びニュース情報提供サーバを含む移動通信システムにおいて、第１移動通信端末機へ３Ｄ（3-dimension）キャラクターニュースを提供する途中に、上記ニュース情報提供サーバに接続した第２移動通信端末機へ上記３Ｄキャラクターニュースを提供する方法であって、（ａ）上記ニュース情報提供サーバに接続した上記第２移動通信端末機のニュース情報要請を受けて、上記３Ｄキャラクターニュースを上記第２移動通信端末機に提供するように同期化させるためのストリーミングフォーマットデータを生成する段階と、（ｂ）上記ストリーミングフォーマットデータに含まれたシンクマーク（Sync Mark）を基準時点に選択して、３Ｄキャラクター、背景イメージ及び／または背景音楽を合成した３Ｄキャラクターデータと音声情報を同期化させた上記３Ｄキャラクターニュースを生成する段階と、（ｃ）上記基準時点から上記３Ｄキャラクターニュースをストリーミング方式により上記第２移動通信端末機へ転送する段階と、を含むことを特徴とする３Ｄキャラクターを利用したニュース情報を提供する方法を提供する。

本発明の第３目的によれば、移動通信網を通じて接続した移動通信端末機に３Ｄキャラクターにより進行されるニュースサービスを提供するシステムのニュース情報提供サーバであって、テキストデータ、または音声データで構成されたニュース情報をリアルタイムに伝達されて提供するニュース情報提供部と、上記テキストデータで構成された上記ニュース情報を音声データに変換する音声情報変換部と、上記ニュース情報提供部、または上記音声情報変換部から上記ニュース情報を構成する音声情報を伝達され、上記音声情報の内容を分析する音声分析部と、上記音声分析部で分析した上記音声情報の内容に相応する口形態データを抽出するリップシンク処理部と、上記音声分析部で分析した上記音声情報の内容に相応する顔表情データを抽出するアニメーション処理部と、上記音声分析部から伝達された上記音声情報を音声符号化過程を経て変換させるコデック部と、３Ｄキャラクター、背景イメージ及び背景音楽を格納するメモリと、上記口形態データと上記顔表情データを上記３Ｄキャラクターに適用し、上記３Ｄキャラクターと上記背景イメージ及び／または背景音楽を合成した３Ｄキャラクターデータを生成し、上記コデック部から出力された上記音声情報と上記３Ｄキャラクターデータを同期化させて、３Ｄキャラクターニュースを生成する３Ｄキャラクター同期化部と、上記３Ｄキャラクターニュースをストリーミング方式により上記移動通信端末機へ転送するストリーミングサービス部と、上記３Ｄキャラクターニュースを生成して上記移動通信端末機を転送するように、上記ニュース情報提供サーバの動作を制御する制御部と、を含むことを特徴とする３Ｄキャラクターを利用したニュース情報を提供するニュース情報提供サーバを提供する。

本発明は、移動通信網を通じて場所及び時間に関わらず、希望するニュース情報を提供することができ、３Ｄキャラクターにより進行されるニュース情報を提供して実際ＴＶアナウンサーが放送を進行するようなニュースサービスを移動通信サービスとして提供できる効果がある。

また、本発明は、３Ｄキャラクターニュースサービスの進行の途中に接続する他の移動通信端末機にも接続時点であるニュースの中間部分から３Ｄキャラクターニュースサービスを提供することができ、移動通信サービス加入者自身が製作したニュース情報を３Ｄキャラクターニュースとして提供できる効果がある。

以下、本発明の好ましい実施形態を添付した図面を参照しつつ詳細に説明する。まず、各図面の構成要素への参照符号の付加において、同一な構成要素に対しては、たとえ他の図面上に表示されてもできる限り同一な符号が与えられていることに留意しなければならない。また、本発明の説明において、関連した公知構成または機能に対する具体的な説明が本発明の要旨を曖昧にすることができると判断される場合にはその詳細な説明は省略する。

図１は、本発明の好ましい実施形態による移動通信網における３Ｄキャラクターを利用したニュース情報を提供するシステムを示す構成図である。

図１に示すように、本発明の好ましい実施形態による移動通信網における３Ｄキャラクターを利用したニュース情報を提供するシステムは、移動通信端末機１００、移動通信網１１０、及びニュース情報提供サーバ１２０などを含むことができる。

本発明の好ましい実施形態による移動通信端末機１００は、移動通信網１１０を経由して相手方と無線通信により電話通話を遂行するだけでなく、備えられた情報検索機能を利用して、無線インターネットに接続して希望する情報を検索できる端末機である。移動通信端末機１００には、無線インターネット関連アプリケーションを駆動させる無線インターネットプラットフォームが搭載されており、無線インターネットに接続するための無線インターネット接続用ブラウザーが内蔵されている。

ここで、無線インターネットプラットフォームは、ＷＩＰＩ（Wireless Internet Platform for Interoperability）、ＳＫテレコム（SK Telecom）において、ＷＩＰＩを基盤にして製作されたＷＩ−ＴＯＰ（Wireless Internet-Terminal Open Platform）、Ｊ２ＭＥ（Java 2 Micro Edition）などを含むことができる。無線インターネット接続用ブラウザーは、無線アプリケーションプロトコル（ＷＡＰ：Wireless Application Protocol）に基盤したＷＡＰブラウザーだけでなく、ＨＴＴＰプロトコルを使用するＨＴＭＬに基盤したＭＩＥ（Microsoft Internet Explorer）、ハンドヘルドデバイストランスポートプロトコル（ＨＤＴＰ：Handheld Device Transport Protocol）、ＮＴＴＤＯＣＯＭＯ社のｉ−ＭｏｄｅまたはＳＫテレコム社の‘ＮＡＴＥ’などを利用することができる。

本発明の好ましい実施形態による移動通信端末機１００は、移動通信網１１０を通じてニュース情報提供サーバ１２０に接続して希望するニュース情報を選択して要請することができ、ニュース情報提供サーバ１２０からリアルタイムに放送される３Ｄキャラクターニュースを受信して視聴することになる。このために、移動通信端末機１００には３Ｄキャラクターニュースを視聴するためのソフトウェアが搭載されており、無線インターネットプラットフォームの種類によって該当プラットフォームで駆動できるように製作されたソフトウェアを利用することができる。

本発明の好ましい実施形態による移動通信端末機１００は、ＰＤＡ（Personal Digital Assistant）、セルラーフォン、ＰＣＳ（Personal Communication Service）フォン、ハンドヘルドＰＣ（Hand-Held PC）、ＧＳＭ（Global System for Mobile）フォン、ＷＣＤＭＡ（Wideband CDMA）フォン、ＣＤＭＡ−２０００フォン、及びＭＢＳ（Mobile Broadband System）フォン等、各種無線通信端末機を含むことができる。ここで、ＭＢＳフォンは、現在論議されている第４世代のシステムで使われる移動通信端末機をいう。

本発明の好ましい実施形態による移動通信網１１０は、音声信号及びデータ信号を含む無線信号を送受信する役割をし、基地局転送器、基地局制御器、移動通信交換局、ＰＤＳＮ（Packet Data Serving Node）などを含んで構成されることができる。

基地局転送器は、移動通信端末機１００と基地局制御器との間で、有無線変換、無線信号の送受信などを遂行し、移動通信端末機１００と直接的に連結される網終端（Endpoint）装置である。基地局制御器は、基地局転送器を制御し、移動通信端末機１００に対する無線チャンネル割り当て及び解除、移動通信端末機１００及び基地局転送機の送信出力制御、ソフトハンドオフ（Soft Handoff）及びハードハンドオフ（Hard Handoff）決定、トランスコーディング（Transcoding）及びボーコーディング（Vocoding）、無線接続網に対する運用及びメインテナンス機能などを遂行する。

移動通信交換局は、多数の電子式交換器を具備して、基本及び付加サービス処理、加入者の着信及び発信呼処理、位置登録手順及びハンドオフ手順処理、他網との連動機能などを遂行する。ＰＤＳＮは無線データをパケットデータにサービスできるようにセッションを管理し、パケットデータのルーティング処理機能を遂行し、移動通信網１１０とパケットデータ網を連結する。

本発明の好ましい実施形態による移動通信網１１０は、ＩＳ（Interim Standard）−９５網、ＧＳＭ網、ＣＤＭＡ２０００１Ｘ網、ＣＤＭＡ２０００３Ｘ網、ＣＤＭＡ２０００ＥＶ−ＤＯ（Evolution-Data only）網、ＷＣＤＭＡ網、ＷｉＢｒｏ（Wireless Broadband Internet）網などの多様な移動通信システムによる無線接続網を含むことができる。

本発明の好ましい実施形態によるニュース情報提供サーバ１２０は、外部のニュースコンテンツサーバ（図示せず）からリアルタイムに提供されるニュース情報を利用した３Ｄキャラクターニュースを生成して、リアルタイムに３Ｄキャラクターニュースを移動通信網１１０を通じて伝播する。このために、ニュース情報提供サーバ１２０は、提供されたニュース情報を音声に変換した音声情報の内容を分析して、音声情報の内容に相応する口形態データ及び顔表情データを抽出して３Ｄキャラクターに適用し、３Ｄキャラクターと背景イメージ及び／または背景音楽を合成した３Ｄキャラクターデータと音声情報を同期化させて３Ｄキャラクターニュースを生成し、生成した３Ｄキャラクターニュースをストリーミング方式により移動通信端末機１００に提供する。ニュース情報提供サーバ１２０の内部構成については、図２に詳細に説明する。

ここで、ニュース情報提供サーバ１２０は、ネットワークサーバで具現されることができる。ネットワークサーバとは、通常的に、私設イントラネット、またはインターネットのようなコンピューターネットワークを通じて他のネットワークサーバと通信可能な下位装置と連結されて作業遂行要請を受付けて、それに対する作業を遂行して遂行結果を提供するコンピュータシステム及びコンピュータソフトウェア（ネットワークサーバプログラム）を意味するものである。しかしながら、このようなネットワークサーバプログラムの他にも、ネットワークサーバ上で動作する一連の応用プログラムと、場合によっては内部に構築されている各種データベースとを含む広い概念に理解されるべきである。このようなネットワークサーバは、ＤＯＳ、ウィンドウズ（Windows）、リナックス（Linux）、ユニックス（UNIX）、またはマッキントッシュ（Macintosh）などの運営体制によって多様に提供されていているネットワークサーバプログラムを利用して具現されることができる。

図２は、本発明の好ましい実施形態によるニュース情報提供サーバの内部構成を示す構成図である。

図２に示すように、本発明の好ましい実施形態によるニュース情報提供サーバ１２０は、ニュース情報提供部２００、音声情報変換部２０５、音声分析部２１０、コデック部２１５、リップシンク処理部２２０、アニメーション処理部２２５、メモリ２３０、３Ｄキャラクター同期化部２３５、ストリーミングサービス部２４０、ストリーミングフォーマット生成部２４５、及び制御部２５０などを含むことができる。

ニュース情報提供部２００は、外部のニュースコンテンツサーバからテキストデータ、または音声データで構成された多数のニュース情報をリアルタイムに伝達されて音声情報変換部２０５及び／または音声分析部２１０に提供する。

音声情報変換部２０５は、ニュース情報提供部２００からテキストデータで構成されたニュース情報を伝達されて音声データに変換した音声情報を生成する。音声情報変換部２３５は、ＴＴＳ（Text To Speech）技術を利用してテキストデータを音声に変換することになり、このために入力受けたテキスト文書の文法的構造を分析して人が読むような韻律を生成し、生成された韻律によって音素の基本単位を集めて合成音を生成することができる。

音声分析部２１０は、ニュース情報提供部２００、または音声情報変換部２０５からニュース情報を構成する音声情報を伝達されて音声情報の内容を分析する。例えば、音声分析部２１０は伝達された音声情報の音の強弱と高低などを分析して、音声分析部２１０のデータベース（図示せず）に格納された音声資料と比較することによって、音声に含まれた言語的な意味を決定することができる。

コデック部２１５は、音声分析部２１０から伝達された音声情報の音質を向上させるために、音声情報を音声符号化過程を経て変換させる。このために、コデックス方式は、ＥＶＲＣ（Enhanced Variable Rate Coder）、ＩＭＢＥ（Improved Multi Band Excitation）、ＤｏＤ−ＣＥＬＰ（Department of Defense Code Excited Linear Prediction）、ＶＳＥＬＰ（Vector Sum Excited Linear Prediction）、ＱＣＥＬＰ（Qualcomm Code Excited Linear Prediction）、ＬＤ−ＣＥＬＰ（Low Delay CELP）、ＡＤＰＣＭ（Adaptive Differential Pulse Code Modulation）、Ａ−ｌａｗ，ｕ−ｌａｗなどの多様なコデック方式を適用することができる。

リップシンク処理部２２０は、アナウンサーがニュースの内容を読むような３Ｄキャラクターの口形態を具現するために、音声分析部２１０で分析した音声情報の内容に相応する口形態データを抽出する。アニメーション処理部２２５は、３Ｄキャラクターの顔表情に変化が与えられるように、音声分析部２１０で分析した音声情報の内容に相応する顔表情データを抽出する。即ち、アニメーション処理部２２５は、音声分析部２１０で分析した音声情報の内容によって、喜び、驚き、悲しみなどの感情を表現するための３Ｄキャラクターの目、口、眉毛、鼻、顔筋肉などの顔表情データを抽出することができる。メモリ２３０は、本発明の３Ｄキャラクターニュースサービスを提供するための多数の３Ｄキャラクター、背景イメージ、及び背景音楽などを格納し、ハードディスク、フラッシュメモリ、ＲＡＭなど、各種データ格納装置により具現されることができる。

３Ｄキャラクター同期化部２３５は、リップシンク処理部２２０及びアニメーション処理部２２５から口形態データ及び顔表情データを伝達されて、コデック部２１５から音声情報を伝達されて、メモリ２３０から３Ｄキャラクター、背景イメージ及び背景音楽を伝達される。３Ｄキャラクター同期化部２３５は、口形態データと顔表情データを３Ｄキャラクターに適用し、３Ｄキャラクターと背景イメージ及び／または背景音楽を合成した３Ｄキャラクターデータを生成し、音声情報に合わせて３Ｄキャラクターが動作できるように３Ｄキャラクターデータと音声情報を同期化させて３Ｄキャラクターニュースを生成する。

ストリーミングサービス部２４０は、３Ｄキャラクター同期化部２３５で生成した３Ｄキャラクターニュースをリアルタイムに転送できるように、ストリーミング方式により３Ｄキャラクターニュースを移動通信網１１０を通じて移動通信端末機１００へ転送する。

ストリーミングフォーマット生成部２４５は、移動通信端末機１０２に３Ｄキャラクターニュースを提供する途中に、他の移動通信端末機１０４がニュース情報提供サーバ１２０に接続してサービスを要請すれば、移動通信端末機１０２にサービスされている３Ｄキャラクターニュースを他の移動通信端末機１０４にも提供するためのストリーミングフォーマットデータを生成して３Ｄキャラクター同期化部２３５に伝達する。ここで、ストリーミングフォーマットデータは、他の移動通信端末機１０４のサービス要請時点から、例えば、１〜３秒のように、周期的に発生するシンクマーク（Sync Mark）を含み、シンクマークを基準にして３Ｄキャラクターニュースの同期化を要請する。その結果、３Ｄキャラクター同期化部２３５では、ストリーミングフォーマットデータのシンクマークを基準にして３Ｄキャラクターデータと音声情報を同期化させることになり、他の移動通信端末機１０４は、３Ｄキャラクターニュースが提供されている中間にニュース情報提供サーバ１２０に接続してもシンクマークを基準時点にして、基準時点からの３Ｄキャラクターニュースを提供されることができることになる。

制御部２５０は、前述したニュース情報提供サーバ１２０の構成要素を全般的に管理し制御し、リアルタイムに伝達されたニュース情報を利用した３Ｄキャラクターニュースを生成して移動通信網１１０を通じて移動通信端末機１０２へ転送するように制御する。また、制御部２５０は、他の移動通信端末機１０４のニュース情報要請を受ければ、ストリーミングフォーマット生成部２４５でストリーミングフォーマットデータを生成して接続時点からの３Ｄキャラクターニュースを提供するように制御する。

図３は、本発明の好ましい実施形態によるニュース情報提供サーバで３Ｄキャラクターを利用したニュース情報を提供する方法を示す順序図である。

本発明のニュース情報提供サーバ１２０は、外部のニュースコンテンツサーバからリアルタイムにニュース情報を提供されて３Ｄキャラクターニュースを生成し、移動通信網１１０を通じてニュース情報提供サーバ１２０に接続した移動通信端末機１００に３Ｄキャラクターニュースをリアルタイムに提供することになる。ニュース情報提供サーバ１２０が３Ｄキャラクターニュースを提供する詳細な過程は、下記の通りである。

図３に示すように、ニュース情報提供サーバ１２０のニュース情報提供部２００は、外部のニュースコンテンツサーバからリアルタイムにテキストデータまたは音声データで構成された多数のニュース情報を提供される（Ｓ３００）。ニュース情報提供サーバ１２０は、提供されたニュース情報がテキストデータであるか、または音声データであるかを判断することになる（Ｓ３０２）。ニュース情報がテキストデータである場合には、音声情報変換部２０５でニュース情報を音声情報に変換した後、音声分析部２１０に伝達することになり（Ｓ３０６）、ニュース情報が音声データである場合には音声変換過程なしに直ちに音声分析部２１０に伝えられる。

音声分析部２１０では、伝達された音声情報の内容を分析してリップシンク処理部２２０及びアニメーション処理部２２５に伝達し、リップシンク処理部２２０とアニメーション処理部２２５は、音声情報の内容に相応する口形態データと、目、口、眉毛などの顔表情を表す顔表情データを抽出することになる。３Ｄキャラクターを表現するための口形態データと顔表情データを抽出すれば、ニュース情報提供サーバ１２０のメモリ２３０に格納されている３Ｄキャラクター、背景イメージ、背景音楽などを利用して、口形態データ及び顔表情データを３Ｄキャラクターに適用し、３Ｄキャラクターと背景イメージ及び／または背景音楽を合成した３Ｄキャラクターデータを生成することになる（Ｓ３０６）。また、音声分析部２１０の音楽情報は、コデック部２１５にも伝えられて、コデック部２１５では音声情報の音質向上のために音声情報を音声符号化過程を経て変換させる。

３Ｄキャラクターデータと音声情報は、３Ｄキャラクター同期化部２３５に伝えられて、音声情報に合せて３Ｄキャラクターが動作できるように、３Ｄキャラクターデータと音声情報を同期化させて３Ｄキャラクターニュースを生成することになる（Ｓ３０８）。ニュース情報を提供されてリアルタイムに生成された３Ｄキャラクターニュースは、ストリーミングサービス部２４０を通じてストリーミング方式により移動通信網１１０を通じて伝播されて、移動通信端末機１００の使用者は、希望する３Ｄキャラクターニュースを選択して視聴することになる（Ｓ３１０）。

一方、本発明のニュース情報提供サーバ１２０は、移動通信網１１０を通じて接続した移動通信端末機１００に本発明の３Ｄキャラクターニュースサービスを提供するためのメニュー画面を提供することができ、メニュー画面はニュース選択メニューと画面設定メニューを含むことができる。ニュース選択メニューは、政治、経済、社会、演芸、スポーツなどのように、カテゴリー別に区分されており、移動通信端末機１００の使用者は、希望するニュース情報を選択し、リアルタイムに生成されて放送される３Ｄキャラクターニュースを受信して視聴することになる。

画面設定メニューは、３Ｄキャラクターニュースを生成するために使用する３Ｄキャラクター、背景イメージ及び背景音楽を選択できるようにして、移動通信端末機１００の使用者の趣向に合う３Ｄキャラクターニュースサービスを提供できるようにする。即ち、本発明の３Ｄキャラクターニュースを視聴する前に、画面設定メニューで３Ｄキャラクター、背景イメージ及び背景音楽を設定しておけば、選択したニュース情報を自分が設定した３Ｄキャラクターにより進行される３Ｄキャラクターニュースとして提供されることができる。

図４は、本発明の好ましい実施形態によるニュース情報提供サーバから３Ｄキャラクターニュースを提供する途中に、ニュース情報提供サーバに接続した他の移動通信端末機に３Ｄキャラクターニュースを提供する方法を示す順序図である。

図４に示すように、ニュース情報提供サーバ１２０は、リアルタイムにニュース情報を提供されて３Ｄキャラクターニュースを生成し、移動通信網１１０を通じて伝播して、移動通信端末機１０２から３Ｄキャラクターニュースを受信して視聴することになる（Ｓ４００）。ニュース情報提供サーバ１２０から３Ｄキャラクターニュースをリアルタイムに提供する途中に、他の移動通信端末機１０４でもニュース情報提供サーバ１２０に接続してニュース情報を要請することができる（Ｓ４０２）。この場合、ニュース情報提供サーバ１２０の制御部２５０は、移動通信網１１０を通じて他の移動通信端末機１０４の接続要請信号を受信することになり、ストリーミングフォーマット生成部２４５は、制御部２５０の制御によって放送中である３Ｄキャラクターニュースを他の移動通信端末機１０４に提供するように同期化させるためのストリーミングフォーマットデータを生成して３Ｄキャラクター同期化部２３５に伝達する（Ｓ４０４）。

３Ｄキャラクター同期化部２３５では、ストリーミングフォーマットデータに含まれたシンクマークの中の１つを基準時点に選択して３Ｄキャラクターデータと音声情報を同期化させる（Ｓ４０６）。同期化された３Ｄキャラクターニュースは、ストリーミングサービス部２４０を通じて他の移動通信端末機１０４にリアルタイム転送されて、他の移動通信端末機１０４は、基準時点からの３Ｄキャラクターニュースを聴取することになる（Ｓ４０８）。したがって、３Ｄキャラクターニュースがリアルタイムにサービスされている中に、ニュース情報提供サーバ１２０に接続した他の移動通信端末機１０４は、自分がサービスを要請した時点であるニュースの中間部分から３Ｄキャラクターニュースを提供されることができるようになる。

図５は、本発明の好ましい実施形態によるモバイル放送サーバを利用して３Ｄキャラクターニュース情報を提供するシステムを示す構成図である。

図５の３Ｄキャラクターニュース情報を提供するシステムは、移動通信端末機１００、移動通信網１１０、ニュース情報提供サーバ１２０及びモバイル放送サーバ５００などを含むことができ、図１の構成要素と同一な機能を遂行する構成要素に対する説明は省略する。

モバイル放送サーバ５００は、個人ニュース情報を３Ｄキャラクターニュースに生成して移動通信端末機１００に提供できるように、個人ニュース情報を入力されてニュース情報提供サーバ１２０に伝達する。ここで、個人ニュース情報は、移動通信網１１０を通じて移動通信端末機１００から入力されるか、有線通信網１１０を通じてデスクトップコンピュータ、ノートブックコンピュータなどの各種端末機から入力された各種情報を含むことができる。

また、モバイル放送サーバ５００は、ニュース情報提供サーバ１２０のニュース情報提供部２００からニュース情報を伝達されて内容を変更するか、追加する等の加工処理を遂行した第２ニュース情報を生成することができ、生成した第２ニュース情報を３Ｄキャラクターニュースサービスに提供できるように、ニュース情報提供サーバ１２０のニュース情報提供部２００へ転送することができる。

したがって、モバイル放送サーバ５００を利用して移動通信サービス事業者側で提供するニュース情報だけでなく、移動通信サービス加入者自身が製作したニュース情報を３Ｄキャラクターニュースに生成して提供できることになる。

以上の説明は、本発明を例示的に説明したことに過ぎないものであって、本発明が属する技術分野で通常の知識を有する者であれば、本発明の本質的な特性から外れない範囲で多様な変形が可能である。したがって、本明細書に開示された実施形態は本発明を限定するためのものでなく、説明するためのものであり、このような実施形態により本発明の思想と範囲が限るのではない。本発明の範囲は下記の請求範囲により解されなければならなくて、それと同等な範囲内にある全ての技術は本発明の権利範囲に含まれることと解されているべきである。

本発明の好ましい実施形態による移動通信網における３Ｄキャラクターを利用したニュース情報を提供するシステムを示す構成図である。本発明の好ましい実施形態によるニュース情報提供サーバの内部構成を示す構成図である。本発明の好ましい実施形態によるニュース情報提供サーバから３Ｄキャラクターを利用したニュース情報を提供する方法を示す順序図である。本発明の好ましい実施形態によるニュース情報提供サーバから３Ｄキャラクターニュースを提供する途中に、ニュース情報提供サーバに接続した他の移動通信端末機に３Ｄキャラクターニュースを提供する方法を示す順序図である。本発明の好ましい実施形態によるモバイル放送サーバを利用して３Ｄキャラクターニュース情報を提供するシステムを示す構成図である。

Claims

移動通信網を通じてニュース情報提供サーバに接続した移動通信端末機に前記ニュース情報提供サーバから３Ｄ（3-dimension）キャラクターを利用したニュース情報を提供する方法であって、
（ａ）リアルタイムに伝えられるニュース情報を音声に変換して音声情報を生成し、前記音声情報の内容を分析する段階と、
（ｂ）前記（ａ）段階で分析した前記音声情報の内容に相応する口形態データと顔表情データを抽出する段階と、
（ｃ）前記口形態データと前記顔表情データを前記３Ｄキャラクターに適用し、前記３Ｄキャラクターと背景イメージ及び／または背景音楽を合成した３Ｄキャラクターデータを生成する段階と、
（ｄ）前記音声情報と前記３Ｄキャラクターデータを同期化させて、３Ｄキャラクターニュースを生成する段階と、
（ｅ）前記３Ｄキャラクターニュースをストリーミング方式により前記移動通信端末機へ転送する段階と、
を含むことを特徴とする３Ｄキャラクターを利用したニュース情報を提供する方法。
前記（ａ）段階は、
前記ニュース情報を音声に変換して生成した前記音声情報の内容を分析し、かつ前記ニュース情報が音声データで構成された場合には、音声変換過程を経ないで前記ニュース情報の内容を分析することを特徴とする請求項１に記載の３Ｄキャラクターを利用したニュース情報を提供する方法。
前記方法は、前記（ａ）段階の以前に、
前記移動通信端末機に画面設定メニューを提供して、前記３Ｄキャラクターニュースを生成するために使用する前記３Ｄキャラクター、前記背景イメージ及び前記背景音楽を選択する選択信号を入力される段階を更に含むことを特徴とする請求項１に記載の３Ｄキャラクターを利用したニュース情報を提供する方法。
前記（ｃ）段階は、
前記音声情報を音声符号化過程を経て変換させる段階を含むことを特徴とする請求項１に記載の３Ｄキャラクターを利用したニュース情報を提供する方法。
移動通信網を通じてニュース情報提供サーバに接続した第１移動通信端末機へ３Ｄ（3-dimension）キャラクターニュースを提供する途中に、前記ニュース情報提供サーバに接続した第２移動通信端末機へ前記ニュース情報提供サーバから前記３Ｄキャラクターニュースを提供する方法であって、
（ａ）前記ニュース情報提供サーバに接続した前記第２移動通信端末機のニュース情報要請を受けて、前記３Ｄキャラクターニュースを前記第２移動通信端末機に提供するように同期化させるためのストリーミングフォーマットデータを生成する段階と、
（ｂ）前記ストリーミングフォーマットデータに含まれたシンクマーク（Sync Mark）を基準時点に選択して、３Ｄキャラクター、背景イメージ及び／または背景音楽を合成した３Ｄキャラクターデータと音声情報を同期化させた前記３Ｄキャラクターニュースを生成する段階と、
（ｃ）前記基準時点から前記３Ｄキャラクターニュースをストリーミング方式により前記第２移動通信端末機へ転送する段階と、
を含むことを特徴とする３Ｄキャラクターを利用したニュース情報を提供する方法。
前記（ｂ）段階は、
前記第２移動通信端末機の前記ニュース情報要請を受けた時点から周期的に発生する前記シンクマークの中の１つを前記基準時点に選択することを特徴とする請求項５に記載の３Ｄキャラクターを利用したニュース情報を提供する方法。
移動通信網を通じて接続した移動通信端末機に３Ｄ（3-dimension）キャラクターにより進行されるニュースサービスを提供するシステムのニュース情報提供サーバであって、
テキストデータ、または音声データで構成されたニュース情報をリアルタイムに伝達されて提供するニュース情報提供部と、
前記テキストデータで構成された前記ニュース情報を音声データに変換する音声情報変換部と、
前記ニュース情報提供部、または前記音声情報変換部から前記ニュース情報を構成する音声情報を伝達されて、前記音声情報の内容を分析する音声分析部と、
前記音声分析部で分析した前記音声情報の内容に相応する口形態データを抽出するリップシンク処理部と、
前記音声分析部で分析した前記音声情報の内容に相応する顔表情データを抽出するアニメーション処理部と、
前記音声分析部から伝達された前記音声情報を音声符号化過程を経て変換させるコデック部と、
３Ｄキャラクター、背景イメージ及び背景音楽を格納するメモリと、
前記口形態データと前記顔表情データを前記３Ｄキャラクターに適用し、前記３Ｄキャラクターと前記背景イメージ及び／または背景音楽を合成した３Ｄキャラクターデータを生成し、前記コデック部から出力された前記音声情報と前記３Ｄキャラクターデータを同期化させて、３Ｄキャラクターニュースを生成する３Ｄキャラクター同期化部と、
前記３Ｄキャラクターニュースをストリーミング方式により前記移動通信端末機へ転送するストリーミングサービス部と、
前記３Ｄキャラクターニュースを生成して前記移動通信端末機を転送するように前記ニュース情報提供サーバの動作を制御する制御部と、
を含むことを特徴とする３Ｄキャラクターを利用したニュース情報を提供するニュース情報提供サーバ。
前記移動通信端末機に前記３Ｄキャラクターニュースを提供する途中に、第２移動通信端末機のニュース情報要請を受ければ、前記３Ｄキャラクターニュースを前記第２移動通信端末機に提供するように同期化させるためのストリーミングフォーマットデータを生成して、前記３Ｄキャラクター同期化部に伝達するストリーミングフォーマット生成部と、
を更に含むことを特徴とする請求項７に記載の３Ｄキャラクターを利用したニュース情報を提供するニュース情報提供サーバ。
前記３Ｄキャラクター同期化部は、前記ストリーミングフォーマットデータに含まれたシンクマーク（Sync Mark）を基準時点に選択して、前記３Ｄキャラクターデータと前記音声情報を同期化させた前記３Ｄキャラクターニュースを生成することを特徴とする請求項８に記載の３Ｄキャラクターを利用したニュース情報を提供するニュース情報提供サーバ。
前記３Ｄキャラクター同期化部は、前記第２移動通信端末機の前記ニュース情報要請を受けた時点から周期的に発生する前記シンクマークの中の１つを前記基準時点に選択することを特徴とする請求項９に記載の３Ｄキャラクターを利用したニュース情報を提供するニュース情報提供サーバ。
前記システムは、
個人ニュース情報から前記３Ｄキャラクターニュースを生成して、前記移動通信端末機に提供するように前記個人ニュース情報を入力されて前記ニュース情報提供サーバに伝達するモバイル放送サーバを更に含むことを特徴とする請求項７に記載の３Ｄキャラクターを利用したニュース情報を提供するシステム。
前記モバイル放送サーバは、前記ニュース情報提供サーバから前記ニュース情報が伝達され、伝達された前記ニュース情報を加工して第２ニュース情報を生成し、前記第２ニュース情報を前記ニュース情報提供サーバに伝達することを特徴とする請求項１１に記載の３Ｄキャラクターを利用したニュース情報を提供するシステム。
前記顔表情データは、前記音声情報の内容に従う前記３Ｄキャラクターの感情を表現するための目、口、眉毛、鼻、及び顔筋肉データを含むことを特徴とする請求項７に記載の３Ｄキャラクターを利用したニュース情報を提供するニュース情報提供サーバ。