JP4148690B2 - Data transmission method, data reproduction method, and data reproduction apparatus - Google Patents

Data transmission method, data reproduction method, and data reproduction apparatus Download PDF

Info

Publication number
JP4148690B2
JP4148690B2 JP2002076490A JP2002076490A JP4148690B2 JP 4148690 B2 JP4148690 B2 JP 4148690B2 JP 2002076490 A JP2002076490 A JP 2002076490A JP 2002076490 A JP2002076490 A JP 2002076490A JP 4148690 B2 JP4148690 B2 JP 4148690B2
Authority
JP
Japan
Prior art keywords
data
reproduction
main
link table
file
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2002076490A
Other languages
Japanese (ja)
Other versions
JP2003271492A (en
Inventor
一正 大西
敏昭 日置
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sanyo Electric Co Ltd
Original Assignee
Sanyo Electric Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sanyo Electric Co Ltd filed Critical Sanyo Electric Co Ltd
Priority to JP2002076490A priority Critical patent/JP4148690B2/en
Publication of JP2003271492A publication Critical patent/JP2003271492A/en
Application granted granted Critical
Publication of JP4148690B2 publication Critical patent/JP4148690B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Landscapes

  • Mobile Radio Communication Systems (AREA)
  • Information Transfer Between Computers (AREA)
  • Reverberation, Karaoke And Other Acoustics (AREA)
  • Communication Control (AREA)

Description

【0001】
【発明の属する技術分野】
本発明は、データ送信方法、データ再生方法およびデータ再生装置に関し、特に、コンテンツの配信システム等のデータ送受信システムに用いて好適なものである。
【0002】
【従来の技術】
インターネットや携帯電話網の整備・普及に伴い、音楽や映像等のコンテンツを配信する配信サーバが種々構築されている。ユーザは、たとえば自己の携帯端末装置から所定の配信サーバにアクセスし、所望の音楽コンテンツデータを自己の携帯端末装置にダウンロードすることができる。これにより、好みの楽曲を自己の携帯端末装置にて再生聴取するができるようになる。
【0003】
上記サーバから配信される配信データは、通常、音楽コンテンツ等の主データのほか、これにリンクされる歌詞等の付加データ(リンクデータを含む)、および主データと付加データの種類や容量等を規定する制御データから構成される。携帯端末装置は、かかる配信データのうち、制御データとリンクデータを参照することによって、主データと付加データの属性や、付加データの再生タイミング等を判別する。これにより、主データの再生と付加データのリンク再生とを実行する。
【0004】
上記サーバからのデータ配信は、携帯端末装置からの配信要求を受信することによって行われる。ここで、データ配信時のデータフォーマットは、配信サーバ側で任意に設定できる。かかる配信には、一般に料金が課されていることが多いため、データ配信は、通常、重要なデータから順番に行われる。すなわち、音楽コンテンツ等の主データから順番に配信されるのが通常である。
【0005】
このようにして配信されたデータは、携帯端末装置側のメモリに順次ダウンロードされる。そして、全てのデータのダウンロードが終了した後、ユーザから再生要求が入力されると、まずメモリからリンクデータが読み出され、これがワークRAM等に格納される。しかる後、主データの読み出し再生が実行され、これと並行して、リンクデータに従って付加データの再生が実行される。これにより、主データと付加データの同期再生が実現される。
【0006】
【発明が解決しようとする課題】
上記の場合、ユーザからの再生要求の入力は、データダウンロードの完了を待って行われるものとしたが、ユーザによっては、データの再生を、ダウンロードの完了を待たずに即座に行いたい場合もあり得る。
【0007】
しかしながら、データの配信が、上記のように、主データから順番になされる場合には、主データの再生のみはダウンロード中であっても一応可能となるが、付加データの再生は、主データにリンクして行われるものであるから、付加データおよびそのリンクデータが送信されなければなされ得ない。ところが、主データの容量は付加データの容量に比べ、格段に大きいので、付加データが受信されるまでには、かなりの時間が掛かる。したがって、主データのみならず付加データをリンクさせて再生したい場合には、実質的に、ダウンロード中の再生は不可能となり、上記と同様、全てのデータのダウンロードが終了したタイミングと同程度のタイミングからしか再生できないことになる。
【0008】
そこで、本発明は、かかる問題を解消し、データダウンロード中であっても主データと付加データの再生を速やかに行い得るデータ送信方法、データ再生方法およびデータ再生装置を提供するものである。
【0009】
【課題を解決するための手段】
上記課題に鑑み、本発明は以下の特徴を有する。
【0015】
請求項1の発明は、主データと、前記主データにリンクされた付加データと、前記主データと前記付加データのリンク付けを管理するリンクテーブルと、前記主データ、付加データおよび前記リンクテーブルの伝送順序を規定する制御データとを含むファイルデータとを受信して再生するデータ再生方法であって、受信した前記制御データを参照して、制御データ、リンクテーブル、付加データ、主データの伝送順序を判別する伝送順序判別ステップと、判別された前記伝送順序が制御データ、リンクテーブル、付加データ、主データの順である場合に前記主データの受信が開始されたかを判別する受信タイミング判別ステップと、前記主データの受信開始に応じて当該主データの再生と前記リンクテーブルを参照しながら、前記主データと同期した再生を行う、前記付加データのリンク再生を開始する再生開始ステップとを有し、上記各ステップの処理を、記憶手段に対する前記ファイルデータのダウンロードと並行して実行することを特徴とする。
【0016】
請求項2の発明は、主データと、前記主データにリンクされた付加データと、前記主データと前記付加データのリンク付けを管理するリンクテーブルと、前記主データ、付加データおよび前記リンクテーブルの伝送順序を規定する制御データとを含むファイルデータとを受信して再生するデータ再生装置であって、受信したファイルデータを順次記憶する記憶手段と、受信した前記制御データを参照して、制御データ、リンクテーブル、付加データ、主データの伝送順序を判別する伝送順序判別手段と、判別された伝送順序が制御データ、リンクテーブル、付加データ、主データの順である場合に前記主データの受信が開始されたかを判別する受信タイミング判別手段と、前記主データの受信開始に応じて当該主データと前記リンクテーブルを参照しながら、前記主データと同期した再生を行う、前記付加データのリンク再生処理とを開始する再生処理手段とを有することを特徴とする。
【0017】
本発明の特徴は、以下に示す実施の形態の説明により更に明らかとなろう。
【0021】
ただし、以下の実施の形態は、あくまでも、本発明の一つの実施形態であって、本発明ないし各構成要件の用語の意義は、以下の実施の形態に記載されたものに制限されるものではない。
【0022】
【発明の実施の形態】
以下、本発明の実施の形態につき図面を参照して説明する。
【0023】
まず、図1に実施の形態に係るデータ配信装置に構成を示す。なお、かかるデータ配信装置は、音楽コンテンツとこれにリンクされた歌詞テキストデータとをデータ再生端末に配信するものである。
【0024】
データ配信装置100は、送受信部101と、リンク作成部102と、スクランブル部103と、入出力部104と、コントローラ105と、音楽コンテンツデータベース106と、ファイル記憶107とから構成されている。
【0025】
送受信部101は、アンテナを介してデータ再生端末からの信号を受信し、またはデータ再生端末に対してファイルデータを送信する。リンク作成部102は、音楽コンテンツの再生時間軸に対するテキストブロックの再生開始タイミングを規定するリンクテーブルを生成する。なお、かかるリンクテーブルの作成方法については追って詳述する。
【0026】
スクランブル部103は、キー情報に従ってコンテンツデータを暗号化する。入出力部104は、キーボードやマウス等のキー操作部104aと液晶モニタ等のディスプレイ104bおよびスピーカを有する。コントローラ105は、プログラムメモリを内蔵し、当該プログラムメモリに記憶された制御プログラムに従って各部を制御する。
【0027】
音楽コンテンツデータベース106は、音楽コンテンツをファイルに区分して記憶している。ファイル記憶部107は、音楽コンテンツに対しテキストデータをリンク付けして生成されたファイルデータを記憶する。かかるファイルデータは、音楽コンテンツとテキストデータの他、リンク作成部102で生成された当該テキストデータのリンクテーブル、およびコントローラ105で生成された後述する制御データを含む。
【0028】
次に、かかるデータ配信装置100の動作について説明する。まず、音楽コンテンツに対し歌詞テキストデータをリンク付けしてリンクテーブルを生成する際の動作について説明する。
【0029】
所定の音楽コンテンツに対して歌詞テキストをリンク付けする場合、ユーザは、まず当該歌詞テキストを、キー操作部104aから入力する。かかるテキストは、ブロック毎(たとえば歌詞フレーズ毎)に区分された状態で、順次ディスプレイ104bに表示される。
【0030】
歌詞テキストの入力が終了すると、ユーザは、当該歌詞テキストに対応した音楽コンテンツの再生指令をキー操作部104aから入力する。かかる再生指令に応じて、当該音楽コンテンツが音楽コンテンツデータベース106から読み出され、入出力部104によって再生出力される。
【0031】
音楽再生が開始されると、ユーザは、再生音楽を聞きながら、キー操作部104aを操作して、音楽コンテンツに対するテキストブロックのリンク付けを行う。すなわち、テキストブロックを再生出力させたいタイミングで当該テキストブロックを指定する。これにより、当該テキストブロックが音楽再生時間軸上の当該再生時刻にリンク付けされる。かかるリンク付けは、リンク作成部102にて行われる。リンク作成部102は、かかるリンク付け、すなわち各テキストブロックの再生時間軸上の再生時刻をテーブル上に順次ストアする。これにより、リンクテーブルを生成する。
【0032】
図2を参照して、上記テキストブロックのリンク付けについて説明する。図中、t1、t2、…、tnは、音楽コンテンツの再生開始からの経過時間である。ブロック1、ブロック2、…、ブロックnは、上記各テキストブロックである。音楽コンテンツが再生出力された後、時刻t1にてブロック1を上記の通り指定すると、再生時間軸上における当該ブロック1の再生出力時刻がt1にセットされる。同様にして、ブロック2、ブロック3、…、ブロックnを順次指定すると、各ブロックの再生出力時刻がt2、t3、…、tnにセットされる。そして、各ブロックとその開始時刻がリンクテーブル上に対応付けられる。しかして、リンクテーブルが生成される。
【0033】
このようにして、全音楽コンテンツに対するリンク付けが終了すると、次に、制御データの生成が行われる。かかる制御データの生成は、ユーザからの情報入力に応じて、コントローラ105にて行われる。なお、制御データの内容については、追って説明する。
【0034】
以上の如くして、制御データとリンクテーブルの生成がなされると、当該制御データと、音楽コンテンツ、テキストデータ、およびリンク作成部102にて作成されたリンクテーブルが1つのファイルに格納され、ファイル記憶部107に蓄積される。この際、音楽コンテンツは、スクランブル部103にて暗号化される。暗号化に用いられた暗号キーは制御データの中に含められる。
【0035】
図3に、当該ファイルデータの構成を示す。制御データは、当該ファイルに含まれているデータの内容や配信順序等を規定する。このうち、「パケットの種類」とは、当該ファイルに含まれるデータの種類である。同図の場合、制御データ、リンクテーブル、テキストデータおよび音楽コンテンツの4つのパケットがファイルに含まれている。「パケットの順序」とは、ファイルの先頭からどのような順番で各パケットが配列されているかを示すものである。「パケットの容量」とは、各パケットのデータ容量である。
【0036】
上記コントローラ105は、各パケットの内容に応じて図3の制御データを生成する。また、各パケットが同図に示す順番で配列されるように、「パケットの順序」を規定する。しかして、制御データが生成された後、各パケットが同図に示す順番で配列されて、上記の如く、ファイル記憶部107に記憶される。
【0037】
しかる後、データ再生端末からファイルデータの配信要求があると、コントローラ105は、ファイル記憶部107から当該ファイルデータを読み出し、ファイルの先頭から順番に各データをデータ再生端末に送信する。これにより、データ再生端末には、制御データ、リンクテーブル、テキストデータ、音楽コンテンツの順番で、データが到達する。
【0038】
に、実施の形態に係るデータ再生端末の構成を示す。
【0039】
データ再生端末200は、送受信部201と、キー操作部202と、復号キー格納部203と、復号部204と、DA変換部(以下、DA変換部とも記す)205と、コントローラ206と、メモリ207と、メモリカードインタフェース208と、メモリカード209と、ディプレイドライバ210と、ディスプレイ211とから構成されている。
【0040】
送受信部201は、アンテナを介してデータ配信装置に対して配信要求を送信し、またはデータ配信装置からの信号を受信する。キー操作部202は、タッチキーやタッチパネルによって構成され、ユーザからの操作指令をコントローラ206に供給する。復号キー格納部203は、再生対象のファイルデータに付された暗号キーを格納する。復号部204は、復号キー格納部203に格納された暗号キーを用いて音楽コンテンツを復号する。DA変換部205は復号された音楽コンテンツをアナログ音声信号に変換し、これをスピーカに出力する。
【0041】
コントローラ206は、プログラムメモリを内蔵し、当該プログラムメモリに記憶された制御プログラムに従って各部を制御する。メモリ207はコントローラ206のワーク領域として機能し、コントローラ206からの指示に従って、制御データやリンクテーブル等のデータを一時記憶する。メモリカードインタフェース208は、メモリカード209とデータバスとの間のデータ授受を制御する。メモリカード209は、データ配信装置から配信されたデータをファイル毎に区分して蓄積する。ディスプレイドライバ210はコントローラ206からの指令に応じてディスプレイ211を駆動する。ディスプレイ211は、ディスプレイドライバ210の制御に応じてテキスト等を表示する。
【0042】
次に、かかるデータ再生端末200の動作について説明する。
【0043】
まず、配信サーバからファイルデータの配信を受ける場合の動作について説明する。ファイルデータの配信を受ける場合、ユーザは、キー操作部202を介して、当該ファイルデータの配信要求を入力する。かかる配信要求は、所定の送信パケットに格納されて、送受信部201からデータ配信装置に送信される。かかる配信要求に受けたデータ配信装置は、ファイル記憶部から当該ファイルデータを読み出し、これを所定の送信パケットに格納してデータ再生端末に送信する。かかる送信パケットを受信した送受信部201は、これをコントローラ206に転送する。コントローラ206は、かかる送信パケットからファイルデータを取り出し、これをメモリカードインタフェース208に順次転送する。しかして、当該ファイルデータがメモリカード209に順次ダウンロードされる。
【0044】
次に、メモリカード209にダウンロードされたファイルデータの再生動作について説明する。所定のファイルデータの再生を行う場合、ユーザは、キー操作部202を介して、当該ファイルデータの再生指令を入力する。かかる再生指令を受けて、コントローラ206は、当該ファイルデータの制御データとリンクテーブルをメモリカード208から読み出し、これをメモリ207に格納する。同時に、制御データ内の暗号キーを復号キー格納部203に格納する。
【0045】
しかる後、当該ファイルデータの音楽コンテンツをメモリカード209から読み出し、これを順次復号部204に転送する。復号部204は、転送された音楽コンテンツを復号キー格納部203内の暗号キーを用いて復号し、これをDA変換部205に送る。DA変換部205はこれをアナログ音声信号に変換し、これをスピーカに供給する。これにより、音楽コンテンツに応じた音楽がスピーカから出力される。
【0046】
かかる音楽コンテンツの再生と並行してコントローラ206はメモリカード206からテキストデータを読み出し、これをメモリ207に順次格納する。そして、かかるテキストデータをリンクテーブルに規定されたタイミングで再生し、画像データを生成する。そして、生成した画像データをディスプレイドライバ210に順次転送する。
【0047】
かかる画像データを受けたディスプレイドライバ210は、これを保持すると共に、当該画像データに応じてディスプレイ211を駆動する。これにより、音楽再生に同期したテキスト(歌詞など)がディスプレイ上に表示される。
【0048】
次に、ファイルデータをダウンロードしながら当該ファイルデータの再生を行う場合の動作について、図5のフローチャートを参照して説明する。
【0049】
上記ダウンロード動作によってファイルデータが受信されると(ステップS101)、かかるファイルデータは、上記ダウンロード動作に従って、メモリカード209に順次ダウンロードされる(ステップS108)。また、かかるダウンロードされたファイルデータ中の制御データがメモリカードから読み出されてメモリ207に記憶され、コントローラ206によって参照される(ステップS102)。そして、当該制御データに基づいて、当該ファイルデータが同時再生(ダウンロードと並行した再生)可能か否かが判別される(ステップS103)。かかる判別は、上記図3に示す「パケット順序」を参照して行われる。すなわち、「パケット順序」が図3に示す順序(リンクテーブル→テキストデータ→音楽コンテンツ)になっているか、あるいは、テキストデータ→リンクテーブル→音楽コンテンツになっている場合に、同時再生可能と判別される。
【0050】
なお、上記図1に示すデータ配信装置101からのファイルデータは、「パケット順序」がリンクテーブル→テキストデータ→音楽コンテンツとなっているので、当該データ配信装置101からファイルデータを受信する場合には、ステップS103において、同時再生可能と判別される。
【0051】
しかして、同時再生可能と判別されると、リンクテーブルがメモリカード209から読み出され、メモリ207に格納される(ステップS104)。これと並行して、コントローラ206は受信したファイルデータの先頭からの容量を監視し、当該容量が、制御データ中の「パケット容量」で規定された制御データ、リンクテーブル、テキストデータの合計容量に達したか否かを判別する。そして、当該容量に達したタイミングで、音楽コンテンツのダウンロードが開始されたと判別する(ステップS105)。
【0052】
しかして、音楽コンテンツのダウンロードが開始されると、メモリカード209から音楽コンテンツとテキストデータが順番に読み出され、上記の通常の再生動作と同様にして、音楽コンテンツの再生とテキストデータのリンク再生が行われる(ステップS106)。かかる再生は、メモリカード209に記憶された音楽コンテンツが終了するまで行われる(ステップS107)。しかして、メモリカード209に対するファイルデータのダウンロードと、音楽コンテンツおよびテキストデータのリンク再生とが並行して実行される。
【0053】
なお、ステップ103にて、同時再生が可能でないと判別された場合には、ステップS109によるデータダウンロードのみが実行される。そして、データダウンロードの終了が判別されると(ステップS109)、リンクテーブルがメモリカード209から読み出され(ステップS110)、上記音楽コンテンツおよびテキストデータのリンク再生が実行される(ステップS106)。
【0054】
以上の通り、図4のデータ再生装置によれば、ファイルデータの配列順序によって同時再生が可能か否かを判別し、同時再生可能であれば音楽コンテンツのダウンロード時から再生を開始し、同時再生が可能でなければファイルデータのダウンロード完了時に再生を開始する。従って、同時再生指令を入力することで、ファイルデータの再生、すなわち音声の出力と歌詞テキストの表示を、より迅速に開始することができる。
【0055】
この際、図1のデータ配信装置によれば、ファイルデータの配列が制御データ→リンクテーブル→テキストデータ→音楽コンテンツとなっているので、かかるファイルデータを上記データ再生装置にて受信した場合には、当該ファイルデータの同時再生が可能となる。したがって、図1のデータ配信装置は、図4のデータ再生装置と相俟って、より迅速なリンク再生の開始を実現できる。
【0056】
ところで、上記図4のデータ再生装置は、ファイルデータの配列順序が上記の如くなっていなければ、同時再生を実現できない。他方、上記図1のデータ配信装置は自己でファイルデータを構成する場合には上記順番でファイルデータを構成できるが、たとえば、他のデータ配信装置が構成したファイルデータを自己に取り込むような場合には、ファイルデータの配列順序を保証し得ない。かかる場合には、ファイルデータの配信時に、ファイルデータの配列順序を確認し、各パケットが上記の順番となっていない場合には、これを上記順番に再構成してデータ配信を行うのが好ましい。これにより、上記図4のデータ再生装置によって、ユーザからの要求に応じて、常に、同時再生を実行することができるようになる。
【0057】
図6に、かかる場合における上記図1のデータ配信装置の処理手順を示す。
【0058】
データ配信要求を受信すると、コントローラ105は、当該配信要求のあったファイルデータの制御データを参照し(ステップS201)、当該ファイルデータの配列順序が、制御データ→リンクテーブル→テキストデータ→音楽コンテンツとなっているかを判別する(ステップS202)。そして、かかる順序になっていない場合、各パケットの配列を制御データ→リンクテーブル→テキストデータ→音楽コンテンツに変更する(ステップS203)と共に、制御データの「パケット順序」をかかる順序に変更する(ステップS204)。そして、上記順序となるように各パケットを送信ファイルに格納し、これをデータ再生装置に送信する。
【0059】
他方、ステップS202にて、当該ファイルデータの配列が制御データ→リンクテーブル→テキストデータ→音楽コンテンツとなっていると判別された場合には、当該ファイルデータをそのまま送信する。
【0060】
かかる送信時の処理により、データ再生装置は、常に同時再生が可能な順序でファイルデータを受信することができるようになる。
【0061】
なお、上記送信時の処理は、データ再生端末側で同時再生を行わない場合には不要となる。したがって、上記処理を常に行わず、データ再生端末から同時再生要求があった場合のみ、上記処理を行うようにしても良い。かかる同時再生要求は、データ再生端末からのダウンロード要求に含められる。
【0062】
図7に、かかる場合の処理手順を示す。なお、同図中、ステップS303〜S307は、上記図6におけるステップS201〜S205と同様である。データ再生装置から配信要求があると、コントローラ105は、当該配信要求を分析し(ステップS301)、当該配信要求が同時再生をも要求するものかを判別する(ステップS302)。そして、同時再生を要求するものである場合には、上記と同様、ファイルの配列順序と制御データとを再構成した後、ファイルデータを送信する(ステップS303〜S308)。他方、同時再生を要求するものではない場合には、当該ファイルデータをそのまま送信する(ステップS30)。
【0063】
かかる送信時の処理により、データ送信装置は、同時再生の要求時には必ず同時再生が可能な順序でファイルデータを送信し、それ以外の場合には、特に処理を施すことなく、ファイルデータをそのまま送信するようになる。これにより、処理の効率化を図りながら、同時再生を実現できるようになる。
【0064】
以上本発明に係る種々の実施形態について説明したが、本発明は、かかる実施形態に限定されるものではなく、他に種々の変更が可能であることは言うまでもない。たとえば上記実施の形態では、制御データに「パケットの順序」を含め、これにより同時再生が可能か否かを判別するようにしたが、たとえば単に同時再生が可能かどうかのフラグを制御データに含めておき、これにより同時再生が可能か否かを判別するようにすることもできる。
【0065】
その他、本発明の実施の形態は、本発明の技術的思想の範囲内において、適宜、種々の変更が可能である。
【0066】
【発明の効果】
以上、本発明によれば、ファイルデータが、制御データ、付加データ、主データの順番で送信されるので、主データの受信タイミングにて、制御データおよび付加データを用いたリンク再生が可能となり、よって、データダウンロードと当該ダウンロードデータのリンク再生を並行して行うことができる。これにより、ユーザは、ダウンロード完了を待たずとも、より迅速に、再生出力を得ることができる。
【図面の簡単な説明】
【図1】 実施の形態に係るデータ送信装置の構成を示す図
【図2】 実施の形態に係るリンクテーブルの再生方法を説明するための図
【図3】 実施の形態に係るファイルデータの構成を示す図
【図4】 実施の形態に係るデータ再生装置の構成を示す図
【図5】 実施の形態に係るデータ再生装置の処理動作の流れを示す図
【図6】 実施の形態に係るデータ送信装置の処理動作の流れを示す図
【図7】 実施の形態に係るデータ送信装置の処理動作の流れを示す図
【符号の説明】
206 コントローラ
208 メモリカードインタフェース
209 メモリカード
[0001]
BACKGROUND OF THE INVENTION
The present invention relates to a data transmission method, a data reproduction method, and a data reproduction device, and is particularly suitable for use in a data transmission / reception system such as a content distribution system.
[0002]
[Prior art]
With the development and popularization of the Internet and mobile phone networks, various distribution servers for distributing contents such as music and video have been constructed. For example, a user can access a predetermined distribution server from his / her mobile terminal device and download desired music content data to his / her mobile terminal device. As a result, it becomes possible to reproduce and listen to a favorite music piece on its own mobile terminal device.
[0003]
The distribution data distributed from the server usually includes main data such as music contents, additional data such as lyrics linked to the data (including link data), and types and capacities of the main data and additional data. Consists of control data to be defined. The mobile terminal device determines the attributes of the main data and the additional data, the reproduction timing of the additional data, and the like by referring to the control data and the link data among the distribution data. As a result, reproduction of main data and link reproduction of additional data are executed.
[0004]
Data distribution from the server is performed by receiving a distribution request from the mobile terminal device. Here, the data format at the time of data distribution can be arbitrarily set on the distribution server side. In general, a fee is charged for such distribution. Therefore, data distribution is usually performed in order from important data. That is, it is usually distributed in order from the main data such as music content.
[0005]
The data distributed in this way is sequentially downloaded to the memory on the mobile terminal device side. Then, after the download of all the data is completed, when a reproduction request is input from the user, the link data is first read from the memory and stored in the work RAM or the like. Thereafter, the main data is read and reproduced, and in parallel with this, the additional data is reproduced according to the link data. Thereby, synchronous reproduction of main data and additional data is realized.
[0006]
[Problems to be solved by the invention]
In the above case, the input of the playback request from the user is made after the completion of the data download. However, depending on the user, there is a case where the user wants to immediately play the data without waiting for the completion of the download. obtain.
[0007]
However, when the data is distributed in order from the main data as described above, only the reproduction of the main data is possible even during downloading, but the reproduction of the additional data is performed on the main data. Since it is performed by linking, additional data and the link data cannot be transmitted unless they are transmitted. However, since the capacity of the main data is much larger than the capacity of the additional data, it takes a considerable time until the additional data is received. Therefore , if it is desired to link and reproduce additional data as well as the main data, it is practically impossible to reproduce during downloading, and the same timing as when all data has been downloaded, as described above. You can only play from.
[0008]
Therefore, the present invention provides a data transmission method, a data reproduction method, and a data reproduction device that can solve such problems and can quickly reproduce main data and additional data even during data download.
[0009]
[Means for Solving the Problems]
In view of the above problems, the present invention has the following features.
[0015]
The invention of claim 1 includes main data, additional data linked to the main data, a link table for managing the link between the main data and the additional data, the main data, the additional data, and the link table. A data reproduction method for receiving and reproducing file data including control data defining a transmission order, wherein the transmission order of control data, link table, additional data, and main data is referred to the received control data A transmission order determining step for determining the main data, and a reception timing determining step for determining whether reception of the main data is started when the determined transmission order is control data, link table, additional data, and main data. , While referring to the reproduction of the main data and the link table in response to the start of reception of the main data, Performing playback synchronized, and a playback start step for starting a link reproduction of the additional data, the processing of each step, and executes in parallel with downloading the file data to the storage unit.
[0016]
According to a second aspect of the present invention, there is provided main data, additional data linked to the main data, a link table for managing a link between the main data and the additional data, the main data, the additional data, and the link table. A data reproducing apparatus for receiving and reproducing file data including control data defining a transmission order, wherein storage data for sequentially storing the received file data, and the control data with reference to the received control data A transmission order discriminating means for discriminating the transmission order of the link table, the additional data, and the main data; and when the determined transmission order is the order of the control data, the link table, the additional data, and the main data, the main data is received. and reception timing determining means for determining whether started, the link table with the main data in accordance with the start of reception of the main data With reference, to reproduce in synchronism with the main data, and having a reproduction processing means for initiating a link playback processing of the additional data.
[0017]
The features of the present invention will become more apparent from the following description of embodiments.
[0021]
However, the following embodiment is merely one embodiment of the present invention, and the meaning of the term of the present invention or each constituent element is not limited to that described in the following embodiment. Absent.
[0022]
DETAILED DESCRIPTION OF THE INVENTION
Embodiments of the present invention will be described below with reference to the drawings.
[0023]
First, FIG. 1 shows a configuration of a data distribution apparatus according to the embodiment. The data distribution apparatus distributes music content and lyrics text data linked to the music content to a data reproduction terminal.
[0024]
The data distribution apparatus 100 includes a transmission / reception unit 101, a link creation unit 102, a scramble unit 103, an input / output unit 104, a controller 105, a music content database 106, and a file storage unit 107.
[0025]
The transmission / reception unit 101 receives a signal from the data reproduction terminal via the antenna, or transmits file data to the data reproduction terminal. The link creation unit 102 generates a link table that defines the playback start timing of the text block with respect to the playback time axis of the music content. A method for creating such a link table will be described in detail later.
[0026]
The scramble unit 103 encrypts the content data according to the key information. The input / output unit 104 includes a key operation unit 104a such as a keyboard and a mouse, a display 104b such as a liquid crystal monitor, and a speaker. The controller 105 has a built-in program memory and controls each unit according to a control program stored in the program memory.
[0027]
The music content database 106 stores music content divided into files. The file storage unit 107 stores file data generated by linking text data to music content. Such file data includes music content and text data, a link table of the text data generated by the link creation unit 102, and control data described later generated by the controller 105.
[0028]
Next, the operation of the data distribution apparatus 100 will be described. First, the operation when linking lyrics text data to music content and generating a link table will be described.
[0029]
When linking lyric text to predetermined music content, the user first inputs the lyric text from the key operation unit 104a. Such text is sequentially displayed on the display 104b in a state of being divided into blocks (for example, for each lyric phrase).
[0030]
When the input of the lyric text is completed, the user inputs a music content reproduction command corresponding to the lyric text from the key operation unit 104a. In response to the reproduction command, the music content is read from the music content database 106 and reproduced / output by the input / output unit 104.
[0031]
When music reproduction is started, the user operates the key operation unit 104a while listening to the reproduced music to link the text block to the music content. That is, the text block is designated at the timing when the text block is to be reproduced and output. As a result, the text block is linked to the playback time on the music playback time axis. Such linking is performed by the link creation unit 102. The link creation unit 102 sequentially stores the link time, that is, the playback time on the playback time axis of each text block on the table. Thereby, a link table is generated.
[0032]
With reference to FIG. 2, the linking of the text blocks will be described. In the figure, t1, t2,..., Tn are elapsed times from the start of music content reproduction. Block 1, block 2,..., Block n are the above text blocks. If the block 1 is designated as described above at time t1 after the music content is reproduced and output, the reproduction output time of the block 1 on the reproduction time axis is set to t1. Similarly, when block 2, block 3,..., Block n are sequentially specified, the reproduction output time of each block is set to t2, t3,. Each block and its start time are associated on the link table. Thus, a link table is generated.
[0033]
In this way, when the linking with respect to all the music contents is completed, control data is then generated. Generation of such control data is performed by the controller 105 in response to information input from the user. The contents of the control data will be described later.
[0034]
As described above, when the control data and the link table are generated, the control data, the music content, the text data, and the link table created by the link creating unit 102 are stored in one file. Accumulated in the storage unit 107. At this time, the music content is encrypted by the scramble unit 103. The encryption key used for encryption is included in the control data.
[0035]
FIG. 3 shows the configuration of the file data. The control data defines the contents of data included in the file, the distribution order, and the like. Among these, the “packet type” is the type of data included in the file. In the case of the figure, the file includes four packets of control data, link table, text data, and music content. The “packet order” indicates in what order the packets are arranged from the top of the file. The “packet capacity” is the data capacity of each packet.
[0036]
The controller 105 generates the control data of FIG. 3 according to the contents of each packet. Further, the “packet order” is defined so that the packets are arranged in the order shown in FIG. Thus, after the control data is generated, the packets are arranged in the order shown in the figure and stored in the file storage unit 107 as described above.
[0037]
Thereafter, when there is a file data distribution request from the data reproduction terminal, the controller 105 reads the file data from the file storage unit 107 and transmits each data to the data reproduction terminal in order from the top of the file. Thereby, data arrives at the data reproduction terminal in the order of control data, link table, text data, and music content.
[0038]
FIG. 4 shows the configuration of the data reproduction terminal according to the embodiment.
[0039]
The data reproduction terminal 200 includes a transmission / reception unit 201, a key operation unit 202, a decryption key storage unit 203, a decryption unit 204, a D / A conversion unit (hereinafter also referred to as a DA conversion unit) 205, a controller 206, A memory 207, a memory card interface 208, a memory card 209, a display driver 210, and a display 211 are included.
[0040]
The transmission / reception unit 201 transmits a distribution request to the data distribution apparatus via the antenna or receives a signal from the data distribution apparatus. The key operation unit 202 includes a touch key and a touch panel, and supplies an operation command from the user to the controller 206. The decryption key storage unit 203 stores the encryption key attached to the file data to be reproduced. The decryption unit 204 decrypts the music content using the encryption key stored in the decryption key storage unit 203. The DA conversion unit 205 converts the decrypted music content into an analog audio signal and outputs it to a speaker.
[0041]
The controller 206 has a built-in program memory and controls each unit according to a control program stored in the program memory. The memory 207 functions as a work area of the controller 206, and temporarily stores data such as control data and a link table in accordance with an instruction from the controller 206. The memory card interface 208 controls data exchange between the memory card 209 and the data bus. The memory card 209 stores the data distributed from the data distribution device by classifying the data for each file. The display driver 210 drives the display 211 in response to a command from the controller 206. The display 211 displays text or the like according to the control of the display driver 210.
[0042]
Next, the operation of the data reproduction terminal 200 will be described.
[0043]
First, the operation when receiving file data distribution from the distribution server will be described. When receiving file data distribution, the user inputs a file data distribution request via the key operation unit 202. The distribution request is stored in a predetermined transmission packet and transmitted from the transmission / reception unit 201 to the data distribution apparatus. The data distribution apparatus that receives the distribution request reads the file data from the file storage unit, stores it in a predetermined transmission packet, and transmits it to the data reproduction terminal. The transmission / reception unit 201 that has received the transmission packet transfers it to the controller 206. The controller 206 extracts file data from the transmission packet and sequentially transfers it to the memory card interface 208. Accordingly, the file data is sequentially downloaded to the memory card 209.
[0044]
Next, the reproduction operation of file data downloaded to the memory card 209 will be described. When reproducing predetermined file data, the user inputs a reproduction command for the file data via the key operation unit 202. In response to the reproduction command, the controller 206 reads the control data and link table of the file data from the memory card 208 and stores them in the memory 207. At the same time, the encryption key in the control data is stored in the decryption key storage unit 203.
[0045]
Thereafter, the music content of the file data is read from the memory card 209 and sequentially transferred to the decoding unit 204. The decryption unit 204 decrypts the transferred music content using the encryption key in the decryption key storage unit 203 and sends it to the DA conversion unit 205. The DA converter 205 converts this into an analog audio signal and supplies it to the speaker. Thereby, the music according to a music content is output from a speaker.
[0046]
In parallel with the reproduction of the music content, the controller 206 reads the text data from the memory card 206 and sequentially stores it in the memory 207. Then, the text data is reproduced at a timing specified in the link table to generate image data. The generated image data is sequentially transferred to the display driver 210.
[0047]
The display driver 210 that has received the image data holds the image data and drives the display 211 according to the image data. As a result, text (such as lyrics) synchronized with music playback is displayed on the display.
[0048]
Next, an operation when reproducing the file data while downloading the file data will be described with reference to the flowchart of FIG.
[0049]
When file data is received by the download operation (step S101), the file data is sequentially downloaded to the memory card 209 according to the download operation (step S108). Further, the control data in the downloaded file data is read from the memory card, stored in the memory 207, and referred to by the controller 206 (step S102). Then, based on the control data, it is determined whether or not the file data can be reproduced simultaneously (reproduction in parallel with download) (step S103). Such a determination is made with reference to the “packet order” shown in FIG. That is, if the “packet order” is the order shown in FIG. 3 (link table → text data → music content) or text data → link table → music content, it is determined that simultaneous playback is possible. The
[0050]
The file data from the data distribution apparatus 101 shown in FIG. 1 has a “packet order” of link table → text data → music content, so when receiving file data from the data distribution apparatus 101 In step S103, it is determined that simultaneous playback is possible.
[0051]
If it is determined that simultaneous playback is possible, the link table is read from the memory card 209 and stored in the memory 207 (step S104). In parallel with this, the controller 206 monitors the capacity of the received file data from the beginning, and this capacity is the total capacity of the control data, link table, and text data specified by “packet capacity” in the control data. It is determined whether or not it has been reached. Then, it is determined that the download of the music content is started at the timing when the capacity is reached (step S105).
[0052]
When the download of the music content is started, the music content and the text data are sequentially read out from the memory card 209, and the music content is reproduced and the text data is linked and reproduced in the same manner as the normal reproduction operation. Is performed (step S106). Such reproduction is performed until the music content stored in the memory card 209 is completed (step S107). Accordingly, downloading of the file data to the memory card 209 and linked playback of the music content and text data are executed in parallel.
[0053]
If it is determined in step 103 that simultaneous playback is not possible, only data download in step S109 is executed. When the end of data download is determined (step S109), the link table is read from the memory card 209 (step S110), and the music content and the text data are linked and reproduced (step S106).
[0054]
As described above, according to the data reproduction apparatus of FIG. 4, it is determined whether or not simultaneous reproduction is possible according to the arrangement order of the file data. If simultaneous reproduction is possible, reproduction is started from the time of downloading the music content and simultaneous reproduction is performed. If download is not possible, playback starts when file data download is complete. Accordingly, by inputting the simultaneous reproduction command, it is possible to start the reproduction of the file data, that is, the output of the sound and the display of the lyric text more quickly.
[0055]
At this time, according to the data distribution apparatus of FIG. 1, since the arrangement of the file data is control data → link table → text data → music content, when such file data is received by the data reproduction apparatus, The file data can be reproduced simultaneously. Therefore, the data distribution apparatus of FIG. 1 can realize a quicker start of link reproduction in combination with the data reproduction apparatus of FIG.
[0056]
Incidentally, the data reproducing apparatus of FIG. 4 cannot realize simultaneous reproduction unless the arrangement order of the file data is as described above. On the other hand, when the data distribution apparatus of FIG. 1 configures file data by itself, the file data can be configured in the above order. For example, when the file data configured by another data distribution apparatus is taken in by itself. Cannot guarantee the arrangement order of file data. In such a case, it is preferable to check the arrangement order of the file data at the time of distributing the file data, and when each packet is not in the above-mentioned order, it is reconfigured in the above-mentioned order to perform the data distribution. . As a result, the data reproduction apparatus shown in FIG. 4 can always perform simultaneous reproduction in response to a request from the user.
[0057]
FIG. 6 shows a processing procedure of the data distribution apparatus of FIG. 1 in such a case.
[0058]
When receiving the data distribution request, the controller 105 refers to the control data of the file data requested to be distributed (step S201), and the arrangement order of the file data is control data → link table → text data → music content. It is determined whether or not (step S202). If the order is not in this order, the arrangement of each packet is changed from control data → link table → text data → music content (step S203), and the “packet order” of the control data is changed to the order (step S203). S204). Then, each packet is stored in the transmission file so as to be in the above order, and is transmitted to the data reproducing apparatus.
[0059]
On the other hand, if it is determined in step S202 that the arrangement of the file data is control data → link table → text data → music content, the file data is transmitted as it is.
[0060]
By such processing at the time of transmission, the data reproduction apparatus can always receive file data in an order that allows simultaneous reproduction.
[0061]
Note that the above transmission process is not required when simultaneous reproduction is not performed on the data reproduction terminal side. Therefore, the above process may not be always performed, and the above process may be performed only when there is a simultaneous reproduction request from the data reproduction terminal. Such a simultaneous reproduction request is included in a download request from the data reproduction terminal.
[0062]
FIG. 7 shows a processing procedure in such a case. In the figure, steps S303 to S307 are the same as steps S201 to S205 in FIG. When there is a distribution request from the data reproducing apparatus, the controller 105 analyzes the distribution request (step S301), and determines whether the distribution request also requests simultaneous reproduction (step S302). If simultaneous playback is requested, the file data is transmitted after the file arrangement order and the control data are reconstructed as described above (steps S303 to S308). On the other hand, if the simultaneous reproduction is not requested, the file data is transmitted as it is (step S30 8 ).
[0063]
With this transmission processing, the data transmission device always transmits file data in the order in which simultaneous playback is possible when simultaneous playback is requested, and otherwise transmits the file data as it is without any particular processing. To come. As a result, simultaneous reproduction can be realized while improving processing efficiency.
[0064]
Although various embodiments according to the present invention have been described above, the present invention is not limited to such embodiments, and it goes without saying that other various modifications are possible. For example, in the above embodiment, the “packet order” is included in the control data, and thereby it is determined whether or not simultaneous playback is possible. For example, a flag indicating whether or not simultaneous playback is possible is included in the control data. In addition, it is possible to determine whether or not simultaneous reproduction is possible.
[0065]
In addition, the embodiments of the present invention can be variously modified as appropriate within the scope of the technical idea of the present invention.
[0066]
【The invention's effect】
As described above, according to the present invention, since file data is transmitted in the order of control data, additional data, and main data, link playback using the control data and additional data becomes possible at the reception timing of the main data. Therefore, data download and link reproduction of the download data can be performed in parallel. Thereby, the user can obtain the reproduction output more quickly without waiting for the download to be completed.
[Brief description of the drawings]
FIG. 1 is a diagram illustrating a configuration of a data transmission device according to an embodiment. FIG. 2 is a diagram for explaining a link table reproduction method according to the embodiment. FIG. 3 is a configuration of file data according to the embodiment. FIG. 4 is a diagram showing a configuration of a data reproduction device according to the embodiment. FIG. 5 is a diagram showing a flow of processing operations of the data reproduction device according to the embodiment. FIG. 6 is a diagram showing data according to the embodiment. FIG. 7 is a diagram showing a flow of processing operation of the transmission apparatus. FIG. 7 is a diagram showing a flow of processing operation of the data transmission apparatus according to the embodiment.
206 Controller 208 Memory card interface 209 Memory card

Claims (2)

主データと、前記主データにリンクされた付加データと、前記主データと前記付加データのリンク付けを管理するリンクテーブルと、前記主データ、付加データおよび前記リンクテーブルの伝送順序を規定する制御データとを含むファイルデータとを受信して再生するデータ再生方法であって、
受信した前記制御データを参照して、制御データ、リンクテーブル、付加データ、主データの伝送順序を判別する伝送順序判別ステップと、
判別された前記伝送順序が制御データ、リンクテーブル、付加データ、主データの順である場合に前記主データの受信が開始されたかを判別する受信タイミング判別ステップと、
前記主データの受信開始に応じて当該主データの再生と前記リンクテーブルを参照しながら、前記主データと同期した再生を行う、前記付加データのリンク再生を開始する再生開始ステップとを有し、
上記各ステップの処理を、記憶手段に対する前記ファイルデータのダウンロードと並行して実行する、
ことを特徴とするデータ再生方法。
Main data, additional data linked to the main data, a link table that manages the linking of the main data and the additional data, and control data that defines the transmission order of the main data, the additional data, and the link table A data reproduction method for receiving and reproducing file data including
A transmission order determination step for determining the transmission order of control data, link table, additional data, and main data with reference to the received control data;
A reception timing determination step of determining whether reception of the main data is started when the determined transmission order is control data, link table, additional data, and main data;
A reproduction start step for starting linked reproduction of the additional data, performing reproduction synchronized with the main data while referring to the reproduction of the main data and the link table in response to the start of reception of the main data,
The processing of each step is performed in parallel with the download of the file data to the storage means,
A data reproduction method characterized by the above.
主データと、前記主データにリンクされた付加データと、前記主データと前記付加データのリンク付けを管理するリンクテーブルと、前記主データ、付加データおよび前記リンクテーブルの伝送順序を規定する制御データとを含むファイルデータとを受信して再生するデータ再生装置であって、
受信した前記ファイルデータを順次記憶する記憶手段と、
受信した前記制御データを参照して、制御データ、リンクテーブル、付加データ、主データの伝送順序を判別する伝送順序判別手段と、
判別された前記伝送順序が制御データ、付加データ、リンクテーブル、主データの順である場合に前記主データの受信が開始されたかを判別する受信タイミング判別手段と、
前記主データの受信開始に応じて当該主データの再生処理と前記リンクテーブルを参照しながら、前記主データと同期した再生を行う、前記付加データのリンク再生処理とを開始する再生処理手段とを有する、
ことを特徴とするデータ再生装置。
Main data, additional data linked to the main data, a link table that manages the linking of the main data and the additional data, and control data that defines the transmission order of the main data, the additional data, and the link table A data reproducing device that receives and reproduces file data including:
Storage means for sequentially storing the received file data;
A transmission order determining means for determining the transmission order of the control data, the link table, the additional data, and the main data with reference to the received control data;
A reception timing determination means for determining whether reception of the main data is started when the determined transmission order is control data, additional data, link table, main data;
Reproduction processing means for starting link reproduction processing of the additional data, performing reproduction synchronized with the main data while referring to the reproduction processing of the main data and the link table in response to the start of reception of the main data; Have
A data reproducing apparatus characterized by that.
JP2002076490A 2002-03-19 2002-03-19 Data transmission method, data reproduction method, and data reproduction apparatus Expired - Fee Related JP4148690B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2002076490A JP4148690B2 (en) 2002-03-19 2002-03-19 Data transmission method, data reproduction method, and data reproduction apparatus

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2002076490A JP4148690B2 (en) 2002-03-19 2002-03-19 Data transmission method, data reproduction method, and data reproduction apparatus

Publications (2)

Publication Number Publication Date
JP2003271492A JP2003271492A (en) 2003-09-26
JP4148690B2 true JP4148690B2 (en) 2008-09-10

Family

ID=29205246

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2002076490A Expired - Fee Related JP4148690B2 (en) 2002-03-19 2002-03-19 Data transmission method, data reproduction method, and data reproduction apparatus

Country Status (1)

Country Link
JP (1) JP4148690B2 (en)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111782418B (en) * 2020-06-23 2024-04-09 京东科技控股股份有限公司 Data attribution method, device, electronic equipment and computer readable medium

Also Published As

Publication number Publication date
JP2003271492A (en) 2003-09-26

Similar Documents

Publication Publication Date Title
US8201262B2 (en) Contents distribution system, contents distribution method, terminal apparatus, and recording medium on which program thereof is recorded
EP2172867A1 (en) Network av content reproduction terminal, server, and system
JP3861413B2 (en) Information distribution system, information processing terminal device, portable terminal device
JP2002091863A (en) Information providing method
JP4932119B2 (en) Data stream adaptation server
JP2004118256A (en) Contents distribution apparatus and program
JP4148690B2 (en) Data transmission method, data reproduction method, and data reproduction apparatus
JPH10333769A (en) Multi-media data distribution system and multi-media data reproduction terminal
JP2005157893A (en) Contents distribution system and method, contents distribution apparatus and method, contents processing apparatus and method, recording medium and program
JP2003263175A (en) Contents distribution system
KR100449543B1 (en) KARAOKE apparatus using mobile terminal and method for controlling play within therein
JP2005195836A (en) On-vehicle apparatus and distribution system
JP2002073051A (en) Data reproduction terminal
JP4706691B2 (en) Distribution system, audio device, and reception control method
JP2006031478A (en) Content reproduction terminal and content distribution system
JP2007193630A (en) Content transmission/reception system and content transmission/reception method
JP4266151B2 (en) Distribution system, audio device, and continuous playback method
JP4150580B2 (en) Distribution system, playback device, and content playback method
JP4150573B2 (en) Distribution system, audio device, and reception control method
JP2007047928A (en) Content delivery system
JP4114344B2 (en) Karaoke data playback device
JP5009650B2 (en) Synthesizer, synthesis system, synthesis method and program
JP2008182319A (en) Stream data reproduction system and reproducing method, and portable terminal device
JP5135624B2 (en) Recording medium, program, and media data reproduction system
JP2009110399A (en) Communication system and communication terminal

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20050204

RD01 Notification of change of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7421

Effective date: 20051227

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20070928

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20080129

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20080325

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20080415

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20080425

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20080527

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20080624

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110704

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110704

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120704

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130704

Year of fee payment: 5

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313113

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

LAPS Cancellation because of no payment of annual fees