JPWO2008105188A1 - 再生装置、再生方法、システムlsi - Google Patents
再生装置、再生方法、システムlsi Download PDFInfo
- Publication number
- JPWO2008105188A1 JPWO2008105188A1 JP2009501145A JP2009501145A JPWO2008105188A1 JP WO2008105188 A1 JPWO2008105188 A1 JP WO2008105188A1 JP 2009501145 A JP2009501145 A JP 2009501145A JP 2009501145 A JP2009501145 A JP 2009501145A JP WO2008105188 A1 JPWO2008105188 A1 JP WO2008105188A1
- Authority
- JP
- Japan
- Prior art keywords
- playback
- application
- speed
- key
- user
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims description 141
- 230000011664 signaling Effects 0.000 claims description 24
- 230000008569 process Effects 0.000 description 100
- 238000012545 processing Methods 0.000 description 69
- 230000002452 interceptive effect Effects 0.000 description 58
- 238000010586 diagram Methods 0.000 description 54
- 230000006870 function Effects 0.000 description 41
- 230000006872 improvement Effects 0.000 description 36
- 239000000047 product Substances 0.000 description 34
- 230000008859 change Effects 0.000 description 20
- 238000003860 storage Methods 0.000 description 20
- 230000000295 complement effect Effects 0.000 description 14
- 230000001172 regenerating effect Effects 0.000 description 14
- 230000001360 synchronised effect Effects 0.000 description 12
- 238000005259 measurement Methods 0.000 description 11
- 230000004913 activation Effects 0.000 description 10
- 239000003086 colorant Substances 0.000 description 10
- 238000013461 design Methods 0.000 description 10
- 230000004044 response Effects 0.000 description 10
- 238000005516 engineering process Methods 0.000 description 8
- 230000001965 increasing effect Effects 0.000 description 8
- 230000033001 locomotion Effects 0.000 description 8
- 239000011159 matrix material Substances 0.000 description 8
- 230000005540 biological transmission Effects 0.000 description 6
- 238000012790 confirmation Methods 0.000 description 6
- 238000004519 manufacturing process Methods 0.000 description 6
- 230000008520 organization Effects 0.000 description 6
- 230000004043 responsiveness Effects 0.000 description 6
- 230000002159 abnormal effect Effects 0.000 description 4
- 230000012447 hatching Effects 0.000 description 4
- 238000002156 mixing Methods 0.000 description 4
- 230000004048 modification Effects 0.000 description 4
- 238000012986 modification Methods 0.000 description 4
- 230000002093 peripheral effect Effects 0.000 description 4
- 230000002085 persistent effect Effects 0.000 description 4
- 238000000926 separation method Methods 0.000 description 4
- 239000000758 substrate Substances 0.000 description 4
- 238000006243 chemical reaction Methods 0.000 description 3
- 125000002066 L-histidyl group Chemical group [H]N1C([H])=NC(C([H])([H])[C@](C(=O)[*])([H])N([H])[H])=C1[H] 0.000 description 2
- 206010053615 Thermal burn Diseases 0.000 description 2
- 230000009471 action Effects 0.000 description 2
- 230000033228 biological regulation Effects 0.000 description 2
- 238000004891 communication Methods 0.000 description 2
- 239000002131 composite material Substances 0.000 description 2
- 238000005520 cutting process Methods 0.000 description 2
- 230000003247 decreasing effect Effects 0.000 description 2
- 230000018109 developmental process Effects 0.000 description 2
- 230000002708 enhancing effect Effects 0.000 description 2
- 238000001914 filtration Methods 0.000 description 2
- 230000010354 integration Effects 0.000 description 2
- NUHSROFQTUXZQQ-UHFFFAOYSA-N isopentenyl diphosphate Chemical compound CC(=C)CCO[P@](O)(=O)OP(O)(O)=O NUHSROFQTUXZQQ-UHFFFAOYSA-N 0.000 description 2
- 230000007246 mechanism Effects 0.000 description 2
- 238000003825 pressing Methods 0.000 description 2
- 230000008929 regeneration Effects 0.000 description 2
- 238000011069 regeneration method Methods 0.000 description 2
- 238000009877 rendering Methods 0.000 description 2
- 239000011347 resin Substances 0.000 description 2
- 229920005989 resin Polymers 0.000 description 2
- 239000004065 semiconductor Substances 0.000 description 2
- 230000005477 standard model Effects 0.000 description 2
- 239000013589 supplement Substances 0.000 description 2
- 230000001502 supplementing effect Effects 0.000 description 2
- 230000004083 survival effect Effects 0.000 description 2
- 230000002194 synthesizing effect Effects 0.000 description 2
- 230000001960 triggered effect Effects 0.000 description 2
- 230000000694 effects Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/76—Television signal recording
- H04N5/78—Television signal recording using magnetic recording
- H04N5/782—Television signal recording using magnetic recording on tape
- H04N5/783—Adaptations for reproducing at a rate different from the recording rate
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q30/00—Commerce
- G06Q30/06—Buying, selling or leasing transactions
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B20/00—Signal processing not specific to the method of recording or reproducing; Circuits therefor
- G11B20/10—Digital recording or reproducing
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
- G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
- G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
- G11B27/102—Programmed access in sequence to addressed parts of tracks of operating record carriers
- G11B27/105—Programmed access in sequence to addressed parts of tracks of operating record carriers of operating discs
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
- G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
- G11B27/34—Indicating arrangements
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B20/00—Signal processing not specific to the method of recording or reproducing; Circuits therefor
- G11B20/10—Digital recording or reproducing
- G11B2020/10935—Digital recording or reproducing wherein a time constraint must be met
- G11B2020/10944—Real-time recording or reproducing, e.g. for ensuring seamless playback of AV data
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B2220/00—Record carriers by type
- G11B2220/20—Disc-shaped record carriers
- G11B2220/21—Disc-shaped record carriers characterised in that the disc is of read-only, rewritable, or recordable type
- G11B2220/213—Read-only discs
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B2220/00—Record carriers by type
- G11B2220/20—Disc-shaped record carriers
- G11B2220/25—Disc-shaped record carriers characterised in that the disc is based on a specific recording technology
- G11B2220/2537—Optical discs
- G11B2220/2541—Blu-ray discs; Blue laser DVR discs
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/76—Television signal recording
- H04N5/84—Television signal recording using optical recording
- H04N5/85—Television signal recording using optical recording on discs or drums
Landscapes
- Engineering & Computer Science (AREA)
- Business, Economics & Management (AREA)
- Finance (AREA)
- Signal Processing (AREA)
- Accounting & Taxation (AREA)
- Marketing (AREA)
- Development Economics (AREA)
- Economics (AREA)
- Multimedia (AREA)
- Strategic Management (AREA)
- Physics & Mathematics (AREA)
- General Business, Economics & Management (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Signal Processing For Digital Recording And Reproducing (AREA)
- Indexing, Searching, Synchronizing, And The Amount Of Synchronization Travel Of Record Carriers (AREA)
- Signal Processing Not Specific To The Method Of Recording And Reproducing (AREA)
- Television Signal Processing For Recording (AREA)
Abstract
Description
AV再生との連動を意図したインタラクティブアプリケーションには、映画の本編中の映像や音声と同期したゲームを実現するものや、映画の本編の再生中に電話回線・インターネット等で外部サーバと接続することにより、オンラインショッピングを実現するものがある。インタラクティブアプリケーションを、実行の対象として選ぶことで、再生装置の付加価値は一段と高まる。
再生装置における操作性を高める技術として、以下の特許文献1、2に記載された文献公知発明が存在する。
以上のように再生装置は、ユーザに対する配慮に乏しいアプリケーションをも実行の対象から排除しないので、再生装置の製造開発を行うメーカーは、アプリケーションの実行にあたって、アプリケーション側のGUIの作りの巧拙に起因するトラブルに巻き込まれる立場にたたされているといえる。
このように、たとえアプリケーションにおけるGUIの作りが、ユーザに対する配慮を欠いたものであっても、アプリケーション側のGUIの巧拙を、アプリケーションのプラットフォームたる再生装置側から補完するので、アプリケーション側のGUIの巧拙に左右されない、安定したユーザ操作を実現することができる。
再生装置は、ユーザによるセットアップ設定を受け付けるセットアップ手段を備え、前記再生速度レベルは、通常の速度レベルより低い速度レベル、及び、AV再生をポーズさせる速度レベルを含む。
前記実行手段は、再生手段が、予め定められた速度レベルで再生を行ったとしても、アプリケーションの実行速度を維持する。
4.以下の発明特定事項を加え、再生装置を更に具体的な構成にすることができる。
前記再生装置は、タイマと、前記タイマを管理するタイマ管理部を備え、前記タイマ管理部は、前記タイマを用いて、ユーザからの操作入力を受け取ってからの経過時間を計測し、計測した経過時間が所定時間になると、タイムアウトの通知を行い、制御手段による所定の速度レベルでのAV再生は、前記タイマ管理部からのタイムアウト通知により解除される。
前記再生装置は、プレーヤ状態レジスタを備え、プレーヤ状態レジスタは、現在の再生時点に関するパラメータを格納しており、前記再生装置は、受付手段がユーザ操作を受け付けた際、プレーヤ状態レジスタにおけるパラメータを参照することで、その受け付け時点における再生装置の状態が、AV再生中であるか否かの判定を行う状態判定手段を備え、制御手段が所定の速度レベルでのAV再生を再生手段に命じるのは、状態判定手段がAV再生中であると判定した場合のみである。
前記アプリケーションは、イベントリスナを備え、イベントリスナには、複数のキーイベントのうち、速度制御の対象となるものが予め登録されており、予め定められた速度レベルでのAV再生は、受付手段が受け付けたキーイベントが速度制御の対象となるものとして、予め登録されている場合のみなされる。
前記実行手段は、記録媒体に記録されたクラスファイルからインスタンスを生成することで、アプリケーションの実行を行い、前記記録媒体には、再生速度指示プログラムのクラスファイルが記録されており、予め定められた速度レベルでのAV再生とは、再生速度指示プログラムにより指示される速度にて、再生を行うことである。
アプリケーションの操作性を高めるため都合が良い速度レベルを、再生速度指示プログラムは指示するので、アプリケーションの作り手は、どの速度レベルでの再生が望ましいかを、再生装置に対して予め指定しておくことができる。
再生手段によるAV再生の対象は、記録媒体に記録されたデジタルストリームであり、前記デジタルストリームは速度制御情報を有しており、予め定められた速度レベルとは、速度制御情報にて規定された速度レベルである。
11.以下の発明特定事項を加え、再生装置を更に具体的な構成にすることができる。
また本発明の構成要素たる制御手段は、このユーザイベントマネージャに対する追加モジュールとして、再生装置に実装することができるので、BD-J Terminalの標準モデルに対して大幅な改変を加えることなく、当該標準モデルにモジュール追加を施す形で、実現することができる。本発明の実装は、このような、モジュール追加という形態で、実現されるので、再生装置の製造開発を行うメーカーは、かかる速度機能を、容易に自社の製品に取り入れることが可能になる。
前記記録媒体には、動作モードオブジェクトが記録されており、動作モードオブジェクトは、タイトルの再生が開始された際、どのような動作モードで、タイトルにおける動的な制御を実現するかを規定するテーブルであり、アプリケーション管理テーブルと、当該タイトルにおいて有効となるキーを指定するキーインタレストテーブルとを含み、前記アプリケーションマネージャは、タイトルの再生が開始された際、そのタイトルに対応付けた動作モードオブジェクトから、アプリケーション管理テーブルを受け取り、このアプリケーション管理テーブルに基づき、アプリケーションシグナリングを実現するものであり、前記ユーザイベントマネージャは、タイトルの再生が開始された際、そのタイトルに対応付けた動作モードオブジェクトから、キーインタレストテーブルを受け取り、ユーザにて操作されたキーが、キーインタレストテーブルにおいて、有効とされているキーであるか否かの判定を行い、前記前記アプリケーションに送信されるキーイベントは、キーインタレストテーブルにおいて有効とされているキーに対応するキーイベントである。
13.以下の発明特定事項を加え、再生装置を更に具体的な構成にすることができる。
プレイリスト情報に従って再生されるようなAVストリームの再生時間を長くすることで、このAVストリームと同期するようなアプリケーションの動作期間を長くする。こうした、AVストリームの再生時間の調整を介して、間接的にAVストリームの操作性の改善を図るので、一般的なBD-ROM再生装置において、簡易にアプリケーションの操作性補完を実現することができる。
2 再生制御エンジン
3 BD-Jモジュール
4 Java(TM)仮想マシン
5 ヒープメモリ
6 アプリケーションキャッシュ
7 クラスローダ
8 アプリケーションマネージャ
9 ユーザオペレーションマネージャ
11 動作状態判定部
12 再生速度指示部
13 制御情報設定部
14 タイマ管理部
図1(a)は、本実施の形態に用いる記録媒体の一例であるBD-ROM100の構成を示した図である。BD-ROMにはAVデータ、アプリケーションプログラムが記録されている。
第2段目は、螺旋状の記録領域を横方向に引き伸ばして描いている。この第2段目において、記録領域は、内周のリード・インと外周のリード・アウトの間に論理データを記録できる論理アドレス空間を有している。リード・インの内側にはBCA(Burst Cutting Area)と呼ばれるドライブでしか読み出せない特別な領域がある。この領域はアプリケーションから読み出せないため、例えば著作権保護技術などに利用されることがよくある。
第3段目は、記録領域のディレクトリ及びファイル構造を示す。BD-ROMにおけるディレクトリ及びファイル構造は、ルートディレクトリ(ROOT)直下にBDMVディレクトリが置かれ、その配下にSTREAMディレクトリ、MPLSディレクトリ、JARディレクトリ、BDJOディレクトリが存在する。
AVストリームについて説明する。AVストリームは、デジタル化された動画像、字幕、音声を時分割多重することで得られる、MPEG2-TS形式のトランスポートストリームであり、STREAMディレクトリに配置されている。
プレイリスト情報は、AVストリームの再生時間軸のうち、In_Timeとなる時点と、Out_Timeとなる時点の組みを1つ以上定義することにより、論理的な再生区間や再生経路を定義する情報である。プレイリスト情報は、AVストリームに多重化されているエレメンタリストリームのうち、どれの再生を有効とするかを規定するストリーム番号テーブルを有しており、AVストリーム内のエレメンタリストリームのうち、どれの再生を許可し、どれの再生を許可しないかを規定する役割をもつ。Java(TM)アプリケーションが、このプレイリスト情報を再生するJMFプレーヤインスタンスの生成をJava(TM)仮想マシンに命じることで、AV再生を開始させることができる。JMFプレーヤインスタンスとは、JMFプレーヤクラスを基にして仮想マシンのヒープメモリ上に生成される実際のデータのことである。
<BD-ROMの構成その3.Index.bdmv>
Index.bdmvについて説明する。図1(b)は、Index.bdmvの内部構成を示す図である。Index.bdmvとは、AVストリームと、プレイリスト情報とを含む再生単位であるタイトルに対して、動作モードオブジェクトを対応付けるテーブルである。動作モードオブジェクトとは、Index.bdmvに基づき、タイトルの再生を行う際、そのタイトルにおける動的な制御を、どのような動作モードで規定する情報である。動作モードオブジェクトには、コマンドインタラプタを主体とする動的制御を規定する動作モードオブジェクト(Movieオブジェクト)と、Java(TM)仮想マシンを主体とした動的制御を規定する動作モードオブジェクト(BD-Jオブジェクトと呼ばれる)とがある。
『Title_object_type』は、"該当するタイトルに関付けられている動作モードオブジェクトが、MovieオブジェクトであるかBD-Jオブジェクトであるかを示す。
このようなIndex.bdmvにより、タイトルと、動作モードオブジェクトとの対応が図られることになる。
<BD-ROMの構成その4.XXXXX.JAR>
XXXXX.JAR(「XXX」は可変、拡張子「JAR」は固定)は、Java(TM)アーカイブファイルである。Java(TM)アーカイブファイルは、ZIPファイルの形式を、Java(TM)に特化したものであり、市販されているZIP展開ソフトウェアにより中身を確認することができる。ここで「XXXXX」は可変、拡張子「JAR」は固定である(以下JARファイルと称する)。JARファイルは複数のファイルをディレクトリ構造の形で格納している。一つのJARファイルは一つ以上のクラスファイル、JARファイルの属性を示すメタファイル、画像などのデータが格納されている。基本的に一つのJARファイルに一つのJava(TM)アプリケーションが格納されており、Java(TM)アプリケーションはJava(TM)仮想マシン上で実行することができる。
図2(a)は、JARファイルの中のファイル構造の一例を示す図である。JARファイルのファイル構造は、ルートディレクトリの配下に、「インタラクティブアプリケーションについてのクラスファイル」、「オンラインショッピングアプリケーションについてのクラスファイル」が存在するというものである。このクラスファイルにて定義されるJava(TM)アプリケーションは、Xletインターフェイスを通じて制御されるJava(TM) Xletである。Xletインターフェイスは、"loaded","paused"、"active","destroyed"といった4つの状態をもつ。本明細書でいうアプリケーションとは、こうしてBD-ROM等の記録媒体に記録されているクラスファイルについてのインスタンスのことをいう。
ZZZZZ.BDJO(「ZZZZZ」は可変、拡張子「BDJO」は固定)は、上述したBD-Jオブジェクトを格納したファイルである。図2(b)は、BD-Jオブジェクトの内部構成を示す図である。本図の左側に示すように、BD-Jオブジェクトは、アプリケーション管理テーブルと、KeyInterestテーブルとを含む。
上述したようなAVストリーム、Index.bdmv、JARファイル、BD-Jオブジェクトは、ファイル構造、ディレクトリ構造に従ってBD-ROMに記録されているので、再生装置は、ファイルオープンのためのシステムコールを行うことで、これらをメモリに読み出すことができる。
以上が、再生装置が前提としている記録媒体についての説明である。
続いて、再生装置が対象としているアプリケーションについて説明する。
上述したようにアプリケーションは、タイトルという単位でシグナリングがなされる。このタイトルは、プレイリスト、AVストリームといった再生単位を含むものであり、相応の時間長をもつものなので、このタイトルという単位でシグナリングを行っている限り、アプリケーションの動作区間が短くなり過ぎることはない。
図3は、本実施形態に係る再生装置が実行対象としているインタラクティブアプリケーション、オンラインショッピングアプリケーションのGUI仕様を示す図である。
「インタラクティブアプリケーション」は、映像中の複数の選択対象の中から1つを選択するという、映像操作の機能を具備したアプリケーションプログラムであり、GUIとしてポインタp1の表示を行う。このポインタは、ユーザによるリモコンの方向キー操作によって移動するものであり、動画像中の特定の対象物(ここでは、女性ゴルファーの人物像)を選択することができる。
図4は、再生装置が想定しているアプリケーションの動作仕様を示す図である。第1段目は、アプリケーションによるGUI仕様であり、第2段目は、オンラインショッピングアプリケーションが実行される期間、第3段目は、インタラクティブアプリケーションが実行される期間を示す。
一方、AV画面において、所望の人物像(ここでは、女性ゴルファーの人物像)がフレームインして、この人物像に対する確定操作がなされた場合、オンラインショッピングアプリケーションが起動される。このオンラインショッピングアプリケーションは、人物像と、購入画面p2とを合成した合成画像を表示に供し、その人物に関連した商品の細目を提示し、その関連商品を購入する操作を受け付ける。
(再生装置)
次に、本発明にかかる再生装置の実施形態について説明する。この再生装置は、リモコンを通じて操作される。
BD-ROMドライブ101は、図1(a)に示すような内部構成を有するBD-ROMのローディング/イジェクトを行い、BD-ROMに対するアクセスを実行する。
(HDドライブ102)
HDドライブ102は、BD-ROMにて供給されるクラスファイルと、同等のクラスファイルを格納しておくことができるハードディスクドライブである。
メモリカードドライブ103は、BD-ROMにて供給されるクラスファイルと、同等のクラスファイルが書き込まれた半導体メモリカードを、装填することができるドライブ装置である。
スイッチ104は、BD-ROMドライブ101、HDD102、メモリカードドライブ103から読み出されたクラスファイル、AVストリームを、選択的にストリームデコーダ105、RAM108に出力する。
ストリームデコーダ105は、BD-ROM100に記録されているAVストリームを、ビデオストリーム、オーディオストリームに分離する。
(AVデコーダ106)
AVデコーダ106は、ストリームデコーダ105にてデコードされたストリームから分離抽出されたビデオデータと、オーディオデータとを同期をとりながら復号し、復号したビデオデータをディスプレイに出力し、復号したオーディオデータをスピーカーに出力する。またAVデコーダ106は、ビデオデータにおけるフレームの出力を所定数だけ繰り返すことでスロー再生を実現する。例えば、通常再生の1/2の再生速度での再生が命じられ、第1フレームに相当するビデオデータ、第2フレームに相当するビデオデータ、....、第15フレームに相当するビデオデータを順次AVデコーダ106が受け取ったとすると、AVデコーダ106は、各フレームに相当するビデオデータを、重複して出力する。具体的には、第1フレームに相当する復号したビデオデータ、第1フレームに相当する復号したビデオデータ、第2フレームに相当する復号したビデオデータ、第2フレームに相当する復号したビデオデータ、...第15フレームに相当する復号したビデオデータ、第15フレームに相当する復号したビデオデータを1秒間に出力する。同じフレームのビデオデータが、2回重複して出力されるので、AVストリームが2倍の時間をかけて再生されることになる。その結果、通常再生の1/2の速度でスロー再生することが可能になる。
ビデオフレームバッファ107は、AVデコーダ106のデコードにより得られた非圧縮のフレーム画像を格納する。本実施形態では、1秒間におけるビデオフレームバッファの更新頻度を、1秒間に30回とする。これは、1秒間に30フレームに相当するAVストリームを、AVデコーダ106からビデオフレームバッファに出力し、そして、アプリケーションが描画した30フレームに相当するグラフィクスを、1秒間に、グラフィックスフレームバッファ111に出力することを意味する。
(RAM108)
RAM108は、CPU110がデータ処理を行うにあたって、必要なデータが格納される。
ROM109には、インタプリタ、ネィティブライブラリ、クラスラィブラリ等、再生装置に予め組み込まれている組込みプログラムが格納される。
(CPU110)
CPU110は、組込みプログラム用ROM9に格納されたネィティブコードを実行する。
グラフィクスフレームバッファ111は、CPU110が対話的な制御を実行する際、GUI描画に用いられる。このグラフィクスフレームバッファ111で実現されるグラフィクス描画には、アプリケーションによるGUI表示、セットアップ時におけるメニュー表示がある。アプリケーションにより描画される購入画面p2、ポインタp1といったグラフィクスは、GUIの1つなので、このグラフィクスフレームバッファ111に描画される。グラフィクスフレームバッファ111上のグラフィクスは、グラフィクス管理のための数値にて管理されており、この数値に対応するグラフィックスデータの画像は、画面上に一定時間だけ表されることになる。一方、その一定時間のあいだ、アプリケーションの側では、新たなグラフィクスの生成がなされている。一定時間が経過すれば、グラフィクスフレームバッファ111の格納内容は、新たに生成されたグラフィックスデータを用いて上書きされることになる。かかる上書きにおいて、グラフィクス管理のための数値は更新される。こういった動作、つまり、“アプリケーションによるグラフィクスの生成”、“生成されたグラフィクスの更新”、“グラフィクスの上書き”、“グラフィクス管理のための数値の更新”という一連の動作の繰り返しにより、アプリケーションによるGUI表示は、AV再生のフレーム進行に伴って、変化することになる。また単位時間(例えば一秒間など)における上述の一連の動作の繰り返しの回数(以後アプリケーションの実行速度と称す)を変えることにより、グラフィックスバッファ111の格納内容が単位時間あたりに更新されるタイミングの数を増減させることが可能となる。これにより結果として、入力に対するアプリケーションによるグラフィックスデータ(GUI表示)の応答性を高くしたり、低くしたりすることが可能となる。このグラフィクスフレームバッファ111の格納内容は、ビデオフレームバッファ107の格納内容と合成して出力されるので、ディスプレイには、グラフィックスフレームバッファ111に書き込まれたデータに対応するグラフィックス画像と、ビデオフレームバッファ107に書き込まれたAVストリームに対応する再生画像とを重ね合わせたものが表示される。
操作受付部112は、リモコンや再生装置のフロントパネルといった入力機器に対してなされたユーザ操作を検知して、通知する。この通知は、これらの入力機器に対応するデバイスドライバ内の割込みハンドラが発生する割込みに従い、UOPを生成することでなされる。UOPとは、リモコンやフロントパネルに設けられたキーマトッリクスによるキー押下を検知した際、発生するイベント(UOPイベント)であり、押下されたキーに対応したキーコードを含んでいる。具体的には、リモコンやフロントパネルに対応するデバイスドライバの割込みハンドルが、キーマトリックスに対するキーセンスでキー押下を検出した際、そのキー押下に基づき割込み信号を発生することで、UOPイベントは、生成される。
ネットワークインターフェイス113は、ネットワーク接続のためのプロトコルスタックを実行するものであり、ネットワーク上のサーバコンピュータが具備しているドライブを、ネットワークドライブとして、再生装置に認識させる。そして、ネットワークドライブからデータをダウンロードしたり、データをアップロードすることができる。このネットワークインターフェイス113を通じて、外部のサーバと、データ通信することができるので、オンラインショッピングアプリケーションの実行時においては、アプリケーションを構成するバイトコードに従って、ネットワークインターフェイス113を介して、ネットワーク上の決済サーバと、電子的な決済処理を行ことができる。
図5の再生装置は、Java(TM)2Micro_Edition(J2ME) Personal Basis Profile(PBP 1.0)と、Globally Executable MHP specification(GEM1.0.2)for package media targetsとをフル実装することで構成されるJava(TM)プラットフォームであり、図6のようなレイヤモデルをを有する。
i)BD-ROM Resident System Software
BD-ROM再生装置に組み込まれ、常駐ソフトウェアとして動作するもののレイヤであり、ユーザイベントマネージャ9を含む。
BD-Jモジュール3と呼ばれ、アプリケーションの実行環境となるレイヤであり、Javaプラットフォーム(BD-Jモジュールと呼ばれる)に該当する。
iii)BD-ROM Player Model
BD-ROMプレーヤとしての機能を実現するソフトウェアのレイヤであり、再生エンジン1、再生制御エンジン2を含む。
再生エンジン1は、AV再生機能を実行する。再生装置のAV再生機能とは、DVDプレーヤ、CDプレーヤから踏襲した伝統的な機能群であり、再生開始(Play)、再生停止(Stop)、一時停止(Pause On)、一時停止の解除(Pause Off)、Still機能の解除(still off)、速度指定付きの早送り(Forward Play(speed))、速度指定付きの巻戻し(Backward Play(speed))、音声切り換え(Audio Change)、副映像切り換え(Subtitle Change)、アングル切り換え(Angle Change)といった機能である。
再生制御エンジン2は、プレイリストの再生機能(i)、再生装置における状態取得/設定機能(ii)といった諸機能を実行する。プレイリストの再生機能とは、再生エンジン1のAV再生機能のうち、再生開始や再生停止を、プレイリストに従って行うことをいう。また再生制御エンジン2は、再生装置の状態を示すプレーヤ状態レジスタ2a、メーカーやユーザによる再生装置の設定を示すプレーヤ設定レジスタ2bを含み、これらプレーヤ状態レジスタ2aにおけるプレーヤ状態情報、プレーヤ設定情報2bにおけるプレーヤ設定情報に基づき、再生装置における状態取得/設定機能を実行する。特徴的なのは、プレーヤ設定レジスタ2bに、「速度自動制御」、「速度レベル」という設定内容があり、プレーヤ設定レジスタ2bにおける速度自動制御がONに設定されていると、プレーヤ設定レジスタ2bにおける速度レベルでの再生が実現される点である。
BD-Jモジュール3は、再生装置におけるプラットフォームであり、Java(TM)仮想マシン4、ヒープメモリ5、アプリケーションキャッシュ6、クラスローダ7、アプリケーションマネージャ8を備える。
Java(TM)仮想マシン4はインタプリタであり、ヒープメモリ5に格納されたアプリケーションを構成するバイトコードを、CPU110が解読可能なネィティブコードに変換して、CPU110に供する。こうすることで、バイトコード状態のアプリケーションをCPU110に実行させる。
ヒープメモリ5は、クラスファイルのインスタンスである、バイトコード状態のアプリケーションが格納されるメモリである。
(アプリケーションキャッシュ6)
アプリケーションキャッシュ6は、アプリケーションが格納されるキャッシュメモリである。
クラスローダ7は、アプリケーションのクラスファイルをBD-ROM100から読み出して、バイトコードに変換する。かかる変換を経て得られたバイトコードは、ヒープメモリ55に格納される。こうすることで、ヒープメモリ55には、バイトコード状態のアプリケーションが得られることになり、Java(TM)仮想マシン4による実行に供される。
アプリケーションマネージャ8は、再生装置において再生対象となるタイトルの切り替わりが発生した場合、BD-ROM100からアプリケーションプログラムを読み出してアプリケーションキャッシュ6に格納する。そして、各アプリケーションについての制御コードを参照し、制御コードがAutoStart(自動起動)であるなら、アプリケーションのうち自動起動すべきものをJava(TM)Java(TM)仮想マシン44に実行させる。この変換は、クラスローダ7に指示をだすことでなされる。
一方、他のアプリケーションからの呼出や、ユーザからの起動要求を待って起動するアプリケーションプログラムについてはアプリケーションキャッシュ6にキャッシュされた状態で、他のアプリケーションからの呼出しを待つ。上述したようなオンラインショッピングアプリケーションは、ユーザからの起動要求と、他のアプリケーションからの呼出しとを待って起動すべきものなので、当該オンラインショッピングアプリケーションがアプリケーションキャッシュ6に格納され、ユーザからの起動要求及び他のアプリケーションからの呼出しを待っている状態において、リモコンの方向キーが押下されると、オンラインショッピングアプリケーションは、実行可能なコードに変換されてヒープメモリ5に格納されることになる。Java(TM)仮想マシン4は、ヒープメモリ5に記憶されたコードを解釈実行することにより、アプリケーションプログラムを実行する。
ユーザイベントマネージャ9は、UOPイベントが発生した際、そのUOPイベントに対応するキーイベント(アプリケーションが受け取ることができるイベント)を発生させるかどうかを判定して、発生させるべきと判定した場合、キーイベントをアプリケーションに出力する。BD-JオブジェクトのKeyInterestテーブルには、キー毎に、キーイベントを発生させるかどうかが規定されているので、キーイベントを発生させるかどうかの判断は、BD-JオブジェクトのKeyInterestテーブルにおけるエントリーの記載を基準とする。図中の矢印☆1,2,3,5は、このレイヤモデルにおいて、特徴的な処理の流れを模式的に示している。上述したように、アプリケーションへのキーイベントの発生及び送信は、UOPイベントが発生した際なされる(☆5)。ユーザイベントマネージャ9の特徴的な処理とは、このキーイベントの送信に先立ち、発生したキーイベントを再生制御エンジン2に送信することであり(☆1)、このキーイベントの送信を契機として、プレーヤ設定レジスタ2bに格納されている、速度自動制御及び速度レベルに基づき、再生制御がなされる。この再生制御の結果、アクセス装置6のスロー再生、又は、一時停止(ポーズ)がなされることになる。以上が、再生装置におけるソフトウェアのレイヤモデルである。
本図における各ソフトウェア要素の動作は以下の通りとなる。インタラクティブアプリケーションは、複数の選択対象の中から1つ選択することにより、再生中の映像等を操作するものなので、AV画面には、ポインタp1の表示が現れる。ユーザがリモコンの方向キーを押下して、このポインタp1表示で購入したい品物の選択を行い、購入したい品物にカーソルを合わせてリモコンのENTERキーが押下されると、クラスローダ7は、アプリケーションキャッシュ6に格納したオンラインショッピングアプリケーションのアプリケーションプログラムを実行可能なバイトコードに変換して、ヒープメモリ5に記憶する。Java(TM)仮想マシン4がヒープメモリ5に記憶したコードを実行すれば、オンラインショッピングアプリケーションのアプリケーションプログラムが起動し、ディスプレイに購入画面p2が現れ、ユーザは所定の手続きを行うと、品物を購入することができる。
アプリケーションEASYモードが導入されているので、再生装置内のプレーヤ状態レジスタ2aは、かかるアプリケーションEASYモードの設定を受け付けるようになっている。
(プレーヤ状態レジスタ2a)
プレーヤ状態レジスタ2aは、再生装置上のコンテンツの再生状況を示すものであり、BD-ROM100に記録されたコンテンツの再生状況の変化に応じて動的に変化する。ここで、コンテンツの再生状況は、カレントタイトル番号、カレントチャプタ番号、カレントアングル番号、カレントオーディオ番号といったパラメータにて特定される。プレーヤ状態レジスタ2aにおけるプレーヤ状態情報は、こうしたパラメータを個別に管理している。図8(a)は、プレーヤ状態レジスタ2aにおけるプレーヤ状態情報の内部構成を示す図である。プレーヤ状態レジスタ2aにおけるプレーヤ状態情報は、「カレントタイトル番号」、「カレントチャプタ番号」、「カレントアングル番号」、「カレントオーディオ番号」から構成される。
「カレントチャプタ番号」は、カレントタイトルで表されるタイトル内で定義されたチャプタ番号であって、有効なチャプタ番号(1以上の数値)が設定されることで、現在再生されているチャプターがどれであるかを示す。逆に再生中でないときは無効値(例えば、0)を表す。
「カレントオーディオ番号」も、カレントアングル同様、有効な音声番号(1以上の有効な数値)が設定されることで、現在選択されているオーディオがどれであるかを示す。逆に、コンテンツが再生中でないときは無効値(例えば、0)で表される。
次に、プレーヤ設定レジスタ2bに格納されている情報(プレーヤ設定情報)について説明する。プレーヤ設定情報は、再生状態によって、動的に変化するものではなく、予め対象となるBD-ROM100のコンテンツをどのように再生させたいのかというユーザの意図を保持しておくものである。プレーヤ設定情報における一部の情報は、ユーザからの入力によって、その値を変えることが可能である。図8(b)は、プレーヤ設定情報の内部構成を示す図である。本図に示すように、プレーヤ設定情報は、「Regionコード」、「音声言語」、「字幕言語」、「速度自動制御」、「速度レベル」を含む。
「音声言語」は、音声言語のデフォルト設定を表す情報である。
「字幕言語」は、字幕言語のデフォルト設定を表す情報である。プレーヤ設定レジスタ2bおける以上の情報要素は、BD-ROMの再生装置が一般的に具備しているものである。以下の2つは、再生装置のために、新たに導入されたものである。
アプリケーションEASYモードの導入のため、プレーヤ設定レジスタ2bが改良されているので、再生装置は、セットアップの表示時において、かかるアプリケーションEASYモードの設定を受け付けるようになっている。
レベル設定メニューmn3は、“0”から“5”までの速度のそれぞれに対応する6つのボタン部材を含む。これらのボタン部材のどれかを確定することにより、プレーヤ設定レジスタ2bにおけるレベルを設定することができる。
アプリケーションEASYモードを実現するため、再生装置における再生制御エンジン2の内部には、図10に示すような機能的な構成要素が設けられている。図10は、再生制御エンジン2における機能的な構成要素を示す図である。本図に示すように、再生制御エンジン2は、動作状態判定部11、再生速度指示部12、制御情報設定部13、タイマ管理部14から構成される。
動作状態判定部11は、キーイベントが発生した際、再生装置の状態がAV再生中であるかどうか、発生したキーイベントがアプリケーションを操作するためのキーイベントであるかどうかの判定を行う。そしてAV再生中であり、発生したキーイベントがアプリケーションを操作するキーイベントであるなら、再生速度指示部12へ、受け取ったキーイベントを通知する。
再生速度指示部12は、グラフィクスフレームバッファ111がキーイベントの通知を受けると、プレーヤ設定レジスタ2bに設定される情報を参照して、ここに設定されている速度レベルでAV再生を行うよう、再生エンジン1を制御する。ここで、通常再生の半分にまで、再生速度を下げる場合を例にして説明する。例えば再生速度を通常再生の半分にする場合、1秒当たりに表示される30フレームのAVデータのうち、15フレーム分に相当するAVデータを分離抽出するようにストリームデコーダ105を制御する。また、タイマ管理部14に対して、タイマでの計時を開始させる。
制御情報設定部13は、AVストリームの再生速度の自動制御機能のON/OFFや自動制御される再生速度の情報をプレーヤ設定レジスタ2bに格納する。例えばAV再生がなされていない状態で、リモコンのメニューキーが押下され、アプリケーションEASYモードを設定するためのモード設定メニューmn2が選択された場合、図9のアプリケーションEASYモードを設定するためのモード設定メニューmn2を表示する。このモード設定メニューmn2が表示された状態で、リモコンの方向キーが操作され、モード設定メニューmn2における速度自動制御で“設定される”が設定され、レベル設定メニューmn3における速度レベル設定で“1”が選択されたものとする。そうしてリモコンのENTERキーが押下されれば、制御情報設定部13は、モード設定メニューmn2で設定された情報(この例ではON)、レベル設定メニューで設定された速度レベル(この例では速度レベルが1)を読み込む。その結果、プレーヤ設定レジスタ2bに記憶されるプレーヤ設定情報の再生速度自動制御がONに設定されて、AVストリームの自動制御が許可される。一方、プレーヤ設定レジスタ2bにおける速度レベルが“1”に設定される。
タイマ管理部14は、再生装置が備えるタイマを管理する。ユーザからアプリケーションの操作入力を操作受付部112にて受け付けた際、このタイマでの計時を開始させる。そしてタイマが所定時間(例えば30秒)の計時を完了すれば、タイムアウトの通知を行う。具体的には、再生速度指示部12からタイマの計測開始を指示するメッセージを受け取ると、タイマでの計時を開始して、所定時間(この例では30秒)が経過すると、再生速度指示部12にタイムアウトのメッセージを通知する。
ステップS14は、受け取ったキーイベントがアプリケーションの操作に関するキー(例えば方向キーまたはENTERキーなど)であるかどうかを判定する判定ステップであり、本ステップがYesであれば、再生速度指示部12に受け取ったキーイベントを通知した上で(ステップS15)、メインフロ−チャ−トにリターンする。ステップS14において、受け取ったキーイベントがアプリケーションの操作に関するキーでないと判定した場合は、受け取ったキーイベントを廃棄(ステップS16)し、メインフロ−チャ−トにリターンする。
図13は、再生速度指示処理の処理手順を示すフローチャートである。
受け取ったメッセージが動作状態判定部11からのキーイベントの通知である場合、プレーヤ設定情報を取得して(ステップS22)、ステップS23に移行する。ステップS23は、プレーヤ設定レジスタ2bにおけるプレーヤ設定情報では、自動速度制御が許可されているかどうか(つまり、ONまたはOFFのいずれであるのか)の判定である。ステップS23がYesなら、ステップS24〜ステップS26の処理を実行する。自動速度制御が許可されておらず(OFF)、ステップS23がNoなら、ステップS24〜ステップS26の処理をスキップする。
例えば、速度レベル“1”が通常再生に比べ非常に遅く、速度レベル“5”はやや遅いなどのように再生速度を5段階で調節することができる。
続いて、ステップS21においてタイムアウト通知を受信した場合について説明する。このタイムアウト通知は、タイマ管理部14からの最後のキー入力から所定時間(この例では30秒)が経過したことを示すものである。受け取ったメッセージがタイマ管理部14からのタイムアウト通知であれば、再生エンジン1に通常速度で再生するよう指示して(ステップS29)、メインルーチンにリターンする。
本フローチャートは、3つの判定ステップを含み、これらの判定ステップの判定結果の組合せで、実行すべき処理が切り替わる構成になっている。
ステップS31は、キーイベントの種類がセットアップキーかどうかの判定であり、ステップS32は、セットアップメニューの表示中かどうかの判定である。ステップS33は、キーイベントの種類が、ENTERキー又は方向キーであるかの判定である。
つまり、ディスプレイにアプリケーションEASYモードを設定するためのモード設定メニューmn2が表示されていれば、発生したキーイベントが、アプリケーションEASYモードを設定するためのモード設定メニューmn2を操作するものかどうか、又は、アプリケーションEASYモードを設定するためのモード設定メニューmn2における設定を、プレーヤ設定レジスタ2bに格納させるものなのかどうかがこのステップS33にて判定されることになる。
ステップS32がYes、ステップS33で“キーイベントの種類=方向キー”と判定されれば、セットアップメニューにおけるフォーカス状態を、方向キーイベントに示される方向に移動する(ステップS37)。その後、メインルーチンにリターンする。
ステップS32がNoであれば、ステップS38においてキーイベントを廃棄した上でメインルーチンにリターンする。
第1実施形態では、制御情報設定部13を、再生装置に組込まれた組込み型のプログラムとして説明した。本実施形態は、この制御情報設定部13をBD-ROM100から供給する改良に関する。
イベントリスナ15は、キーイベント予約情報を保持している。キーイベント予約情報とは、アプリケーションが受付可能なキーイベントのうち、再生速度の変更を併せて行うものはどれであるかを示す情報であり、再生速度の変更を併せて行うキーイベントを操作受付部112から受け取ると、受け取ったキーイベントに対応する処理をアプリケーションに実行させるとともに、再生速度の制御を再生速度指示アプリケーション12aへ指示する。逆に、速度変更が不要なキーイベントを受け取ると、受け取ったキーイベントに対応する処理をアプリケーションを実行させ、再生速度指示アプリケーション12aへの指示は行わない。
再生速度指示アプリケーション12aは、受け取った再生速度の制御の指示を受け取ると、指示に従い再生速度を制御するように再生エンジン1へ指示する。再生速度指示アプリケーション12aは、BD-ROM100のクラスファイルからBD-Jモジュール3に供給され、BD-Jモジュール3上で動作するので、再生速度指示アプリケーション12aは、再生制御エンジン2内のプレーヤ状態レジスタ2aからカレントタイトル番号、カレントチャプター番号を読み出し、再生制御エンジン2のプレーヤ設定レジスタ2bから速度自動制御、速度レベルを読み出す。また再生制御エンジン2内のタイマ管理部14に対して計時開始を指示し、タイマ管理部14からタイムアウトの通知を受ける。
ステップS1は、ユーザによるリモコンからの操作入力を受信待ちステップである。操作入力があれば、ステップS1がYesとなってステップS2に移行する。ステップS2は、受信した操作入力が再生制御要求(再生、一時停止など)であるかどうかの判定である。ステップS2がYesであれば、ユーザから要求された再生速度での再生を指示して(ステップS3)、ステップS4に移行する。
ステップS4においてストリームデコーダ105は、入力されたストリームをデコードしてビデオデータ、オーディオデータに分離し、AVデコーダ106に出力する。ステップS5においてアプリケーションプログラムは、必要に応じてグラフィックス画像を生成する。それと共にAVデコーダ106は、ビデオデータとオーディオデータとを同期をとりながら復号する。オーディオデータの復号音声はスピーカーに、ビデオデータの復号映像はディスプレイにそれぞれ出力される。
ステップS51は、アプリケーションによるキーイベントの通知待ちであり、もしキーイベントが通知されれば、イベントリスナに、キーイベントを解析させる(ステップS52)。ステップS53は、キーイベントが速度制御の対象としてキーイベント予約情報に登録されているかどうかの判定であり、ステップS53がNo(未登録)であるなら、ステップS54をスキップしてステップS55に移行する。
次に、AVストリーム再生中にユーザがインタラクティブなアプリケーションプログラムを操作した場合の例について説明する。
以上のように本実施形態によれば、イベントリスナ15を有したアプリケーションと、再生速度指示アプリケーション12aとを作成し、そのクラスファイルをBD-ROM100に記録しておくことで、操作入力に応じて、アプリケーションプログラムを起動できるようになる。こうすることで、ユーザが特定のキーを押下したとき等、AVストリーム作成者側が意図するアプリケーションプログラムを意図したタイミングにおいて、意図する再生速度でAVストリームを再生することができる。
第2実施形態は、速度制御のためのアプリケーションを記録媒体から供給する改良であったが、本実施形態は、速度制御のための情報を、AVストリームの内部に組み込んでおく改良に関する。図20は、速度制御のための情報が組み込まれたAVストリームを示す図である。本図の上側には、BD-ROMにおいてYYYYY.M2TSというファイル名で格納されているAVストリームが配置されている。このAVストリームには、ハッチング部に示すように、ストリームテーブル情報が組込まれている。引き出し線y51は、ストリームテーブル情報の構成をクローズアップしている。引き出し線h1に示すようにストリームテーブル情報は、「セクション制御情報」、「ストリーム制御情報」からなる。
引出線y53は、「ストリーム制御情報」の内部構成をクローズアップしている。引出線に示すように、ストリーム制御情報は、ストリーム種別(図中では“2”)、プログラム種別(図中では“150”)、速度制御情報の数(図中では“1”)、速度制御情報からなる。引出線y54は、速度制御情報の内部構成をクローズアップしている。引出線に示すように、速度制御情報は、開始時間情報(図中では、“2:24:43.09”)、終了時間情報(図中では“2:34:43.09”)、速度情報(図中では“5”)に設定されている。
図21は、第1実施形態に示した再生装置の内部構成のうち、本実施形態の改良に深く係る部分(ストリームデコーダ105、再生制御エンジン2、制御情報設定部13)を描いた図である。
ストリームデコーダ105は、AVストリームからストリーム制御情報を分離して、制御情報設定部13に引き渡す。
制御情報設定部13は、ストリームデコーダ105から引き渡されたストリーム制御情報内の速度制御情報を、速度レベルとしてプレーヤ設定レジスタ2bに書き込む。
図22は、第3実施形態におけるメインフローの処理手順を示すフローチャートである。
(第4実施形態)
本実施形態は、第1実施形態〜第3実施形態に述べたAV再生をどのように実現するかを述べる実施形態である。図23は、第4実施形態に係る動作モードオブジェクト(BD-Jオブジェクト)の内部構成を示す図である。本図は、図2(b)をベースとして作図されており、このベースとなる構成と比較して、BD-JオブジェクトにAccessbleプレイリストテーブルが存在する点が異なる。Accessbleプレイリストテーブルとは、アプリケーションの生存区間において、各アプリケーション実行と同時に行うべき再生制御を示すテーブルである。アプリケーションの動作というのは不安定であり、起動の失敗や異常終了がありうる。そこで起動失敗、異常終了があった場合のFail Safe機構として、本実施形態ではアプリケーションの生存区間毎に、Accessbleプレイリストテーブルを設けている。Accessbleプレイリストテーブルは、あるアプリケーションの生存区間が開始した際、これと同時に行うべき再生制御を規定する情報である。この再生制御とは、プレイリスト情報に基づくAVストリーム再生であり、プレイリスト情報による再生制御を再生エンジン1に実行させることで、アプリケーション実行と、プレイリスト再生とが同時になされることになる。
以上、本願の出願時点において、出願人が知り得る最良の実施形態について説明したが、以下に示す技術的トピックについては、更なる改良や変更実施を加えることができる。各実施形態に示した通り実施するか、これらの改良・変更を施すか否かは、何れも任意的であり、実施する者の主観によることは留意されたい。
各実施形態では、BD-ROMにおけるタイトルを生存区間としてアプリケーションシグナリングをアプリケーションマネージャ8に実現させたが、オーディオストリームをスロー再生にすることで、その生存区間が長くなるものであれば、タイトル以外の再生単位でアプリケーションシグナリングを実現してもよい。例えば、デジタル放送規格におけるサービスを生存区間としてアプリケーションシグナリングを実現してもよい。また、プレイリストやチャプターという単位でもアプリケーションシグナリングを実現してもよい。
プレーヤ設定レジスタにおけるプレーヤ情報テーブルの形式は、第1実施形態に示した形式のデータに限定される必要は無く、記録媒体に記録されたAVストリーム再生に関する情報を、プレーヤ設定レジスタに格納できる形式のデータであればどのような形式であってもよい。
(AV再生中状態の判定基準)
AV再生中状態とは、早送り等の特殊再生をしている状態を含むとしてもよい。この場合、再生速度指示処理中の中で、タイマ管理部からタイムアウトが通知されれば、特殊再生に戻るような動作を行ってもよい。
本実施の形態においては、速度レベルを0〜5までの6段階としたものを例に説明をしたが、これ限られず、何段階にしてもよい。
ま本実施の形態においては、速度レベルが“0”の場合を一時停止としたが、これに限られず、例えば速度レベルが“5”である場合を一時停止としてもよい。つまり、設定可能な速度レベルのうちのいずれかの速度レベルが一時停止となるように対応付けられていれば良い。
図5に示したハードウェアの構成要素のうち、ストリームデコーダ105、AVデコーダ106、RAM108、ROM109、CPU110、操作受付部112のみを1つのシステムLSIとして構成してもよい。このROM109の中には、図10に示したソフトウェア要素のうち、再生エンジン1、再生制御エンジン2内の動作状態判定部11、再生速度指示部12が存在する。図24は、ストリームデコーダ105、AVデコーダ106、RAM108、ROM109、CPU110、操作受付部112を組込んだシステムLSIを模式的に示す図である。
ここでパッケージの種別に着目するとシステムLSIには、QFP(クッド フラッド アレイ)、PGA(ピン グリッド アレイ)という種別がある。QFPは、パッケージの四側面にピンが取り付けられたシステムLSIである。PGAは、底面全体に、多くのピンが取り付けられたシステムLSIである。
かかるシステムLSIは、再生装置は勿論のこと、TVやゲーム、パソコン、ワンセグ携帯等、映像再生を扱う様々な機器に組込みが可能であり、本発明の用途を多いに広げることができる。図25は、再生装置に対する、システムLSIの組み込み方を示す図である。
Uniphierアーキテクチャに準拠したシステムLSIは、以下の回路ブロックから構成される。
・データ並列プロセッサDPP
これは、複数の要素プロセッサが同一動作するSIMD型プロセッサであり、各要素プロセッサに内蔵されている演算器を、1つの命令で同時動作させることで、ピクチャを構成する複数画素に対するデコード処理の並列化を図る。
これは、命令RAM、命令キャッシュ、データRAM、データキャッシュからなる「Local Memory Contoroller」、命令フェッチ部、デコーダ、実行ユニット、レジスタファイルからなる「Processing Unit部」、複数アプリケーションの並列実行をProcessing Unit部に行わせる「Virtual Multi Processor Unit部」で構成される。
これは、ARMコア、外部バスインターフェイス(Bus Control Unit:BCU)、DMAコントローラ、タイマー、ベクタ割込コントローラといった周辺回路、UART、GPIO(General Purpose Input Output)、同期シリアルインターフェイスなどの周辺インターフェイスで構成される。先に述べたコントローラは、このCPUブロックとしてシステムLSIに実装される。
これは、USBインターフェイスやATA Packetインターフェイスを介して、外部バス上に接続されたドライブ装置、ハードディスクドライブ装置、SDメモリカードドライブ装置とのデータ入出力を行う。
・AVI/Oブロック
これは、オーディオ入出力、ビデオ入出力、OSDコントローラで構成され、テレビ、AVアンプとのデータ入出力を行う。
これは、外部バスを介して接続されたSD-RAMの読み書きを実現するブロックであり、各ブロック間の内部接続を制御する内部バス接続部、システムLSI外部に接続されたSD-RAMとのデータ転送を行うアクセス制御部、各ブロックからのSD-RAMのアクセス要求を調整するアクセススケジュール部からなる。
そうして、各構成要素を具現化してゆけば、回路素子やIC,LSI間を接続するバスやその周辺回路、外部とのインターフェイス等を規定する。更には、接続線、電源ライン、グランドライン、クロック信号線等も規定してゆく。この規定にあたって、LSIのスペックを考慮して各構成要素の動作タイミングを調整したり、各構成要素に必要なバンド幅を保証する等の調整を加えながら、回路図を完成させてゆく。
こうして実装設計が行われ、基板上のレイアウトが確定すれば、実装設計結果をCAMデータに変換して、NC工作機械等の設備に出力する。NC工作機械は、このCAMデータを基に、SoC実装やSiP実装を行う。SoC(System on chip)実装とは、1チップ上に複数の回路を焼き付ける技術である。SiP(System in Package)実装とは、複数チップを樹脂等で1パッケージにする技術である。以上の過程を経て、本発明に係るシステムLSIは、各実施形態に示した再生装置の内部構成図を基に作ることができる。
FPGAを用いてシステムLSIを実現した場合は、多数のロジックエレメントが格子状に配置されており、LUT(Look Up Table)に記載されている入出力の組合せに基づき、縦・横の配線をつなぐことにより、各実施形態に示したハードウェア構成を実現することができる。LUTは、SRAMに記憶されており、かかるSRAMの内容は、電源断により消滅するので、かかるFPGAの利用時には、コンフィグ情報の定義により、各実施形態に示したハードウェア構成を実現するLUTを、SRAMに書き込むませる必要がある。
HDD102、メモリカードドライブ103は、Java(TM) IO Packageからのメソッドを用いることにより、アクセスすることができるローカルストレージであってもよい。HDD102、メモリカードドライブ103をローカルストレージとして構成することにより、HDD102、メモリカードドライブ103は、いわゆるバーチャルパッケージを構成することになる。
ディスクルート証明書とは、このBD-ROMを作成した作成者が、ルート認証局から配布を受けたルート証明書を、BD-ROMに割り当てたものである。ディスクルート証明書はたとえばX.509の形式で符号されている。X.509の仕様は国際電信電話諮問委員会より発行されており、CCITT Recommendation X.509 (1988), "The Directory - Authentication Framework"に記載されている。
またBD-ROM、ローカルストレージの記録内容は、Advancend Access Content System(AACS)にて暗号化され、署名情報が付されて、利用権限が、パーミッションファイルに規定されているのが望ましい。
(TM).ioのexits()メソッドの用例を以下に示す。
例:
new java(TM).io.File("/Persistent/1/1/streams/0.m2ts").exists();
(アプリケーションキャッシュ6への格納)
各実施形態で説明した動作モードオブジェクトであるBD-Jオブジェクトに、キャッシュ管理情報を含ませておき、このキャッシュ管理情報に基づき、アプリケーションキャッシュ6への格納を行わせるのが望ましい。キャッシュ管理情報は、BD-Jオブジェクトに対応するタイトルがカレントタイトルになった際、当該タイトルにおけるAV再生が開始されるまでに、どのアプリケーションを構成するファイルを、アプリケーションキャッシュ6に読み込むべきかを示すものである。
またキャッシュ管理情報は、その内部にアプリケーションのそれぞれに対応付けられたエントリーを含む。各エントリーは、対応するアプリケーションをアプリケーションキャッシュ6に読み込ませる旨を再生装置に指示する情報であり、所定の順位が付与されている。BD-Jモジュール3は、その付与された順位がもっとも高いエントリーに対応するアプリケーションを最初にアプリケーションキャッシュ6に読み込み、それ以降、順位が高い順に、残りのエントリーに対応するアプリケーションを、順次アプリケーションキャッシュ6に読み込む。
ユーザイベントマネージャ9は、ユーザ操作に応じてイベントが発生した場合、当該イベントがKeyInterestテーブルにおいて有効とされているか否かを判定して、判定結果が肯定的であるなら、キーイベントをアプリケーションに出力した。ここで、ユーザ操作にて発生したイベントがKeyInterestテーブルに登録されていなかった場合、そのイベントに対応するオペレーションを、再生制御エンジン2に処理させてもよい。
各実施形態で述べたGUI画面は、OSD(On Screen Display)イメージデータ、Look Up Tebleから構成するのが望ましい。ここでOSDイメージデータとは、所定ビットのコードが各画素に割り当てられており、それらの所定ビットのコードの設定により画像内容を表現したデータである。この所定ビットのビット長の長さは、画素を描画する際の色数を表す、例えば、この所定ビットが1ビットなら、2色を用いてOSDイメージデータの各画素は着色されることになり、所定ビットが2ビットなら4色を用いて、所定ビットが4ビットなら16色を用いてOSDイメージデータの各画素は着色されることになる。
マークアップ情報における個々のアイテム情報は、GUI画面における個々の選択アイテムに対応するものである。具体的にいうと、対応する選択アイテムにフォーカスが存在する状態において、リモコンに存在する各キーが押下された場合、どの選択アイテムにフォーカスを移動させるかを示す『フォーカス移動先情報』と、対応する選択アイテムがノーマル状態及びフォーカス状態になった際、かかる選択アイテムを、どのような輝度及び色彩のLUTを用いて表示するかを示す『パレット情報』と、対応する選択アイテムの確定時において、再生装置に実行させるべき『コマンド』とからなる。
AV再生との連動を意図したインタラクティブアプリケーションには、映画の本編中の映像や音声と同期したゲームを実現するものや、映画の本編の再生中に電話回線・インターネット等で外部サーバと接続することにより、オンラインショッピングを実現するものがある。インタラクティブアプリケーションを、実行の対象として選ぶことで、再生装置の付加価値は一段と高まる。
再生装置における操作性を高める技術として、以下の特許文献1、2に記載された文献公知発明が存在する。
以上のように再生装置は、ユーザに対する配慮に乏しいアプリケーションをも実行の対象から排除しないので、再生装置の製造開発を行うメーカーは、アプリケーションの実行にあたって、アプリケーション側のGUIの作りの巧拙に起因するトラブルに巻き込まれる立場にたたされているといえる。
所定の再生速度でAV再生をする再生手段と、
ユーザ操作を受け付ける受付手段と、
制御手段と、を備え、
前記制御手段は、前記再生手段によるAV再生中に、前記受付手段がユーザによる操作を受け付けた場合、前記所定の再生速度を、予め定められた速度レベルに対応する速度に変更し、前記受付手段で受け付けたユーザ操作に応じたキーイベントを、前記アプリケーションに出力し、
前記予め定められた速度レベルは、通常の速度レベルより遅い速度レベル、または、AV再生をポーズさせる速度レベルであることを特徴としている。
このように、たとえアプリケーションにおけるGUIの作りが、ユーザに対する配慮を欠いたものであっても、アプリケーション側のGUIの巧拙を、アプリケーションのプラットフォームたる再生装置側から補完するので、アプリケーション側のGUIの巧拙に左右されない、安定したユーザ操作を実現することができる。
アプリケーションの操作性を補完するという機能は、通常の速度レベルより低い速度レベル、及び、AV再生をポーズさせる速度レベルを、ユーザがセットアップ時にまたは再生装置に予め設定することで実現されることになる。ある一定の速度レベルで、AV再生を行わせるという機能は、BD-ROM再生装置が一般的に具備しているものなので、アプリケーションの操作性の補完のための再生装置に対する改良は極僅かなものとなる。
前記実行手段は、再生手段が、予め定められた速度レベルで再生を行ったとしても、アプリケーションの実行速度を維持する。
AV再生がスローにされたとしても、実行手段は、AV再生と同様のスローな動作を行うことはない。通常の動作速度にて、アプリケーションを実行する。こうすることで、ユーザからの入力に対する応答性を高くすることができる。
前記セットアップ手段は、セットアップ操作の受け付け時において、0(ゼロ)から、Nまでの数値入力を受け付け、通常の速度レベルより低い速度レベルとは、1からNまでの数値によって表現され、AV再生をポーズさせる速度レベルとは、0の数値によって表現され、前記速度レベルは、速度レベルに対応する数値を再入力することで、変更可能となる。
5.以下の発明特定事項を加え、再生装置を更に具体的な構成にすることができる。
6.以下の発明特定事項を加え、再生装置を更に具体的な構成にすることができる。
7.以下の発明特定事項を加え、再生装置を更に具体的な構成にすることができる。
イベントリスナには、複数のキーイベントのうち、速度制御の対象となるものが予め登録されているので、例えば、リモコンの特別なキーが押された場合に、所望のアプリケーションを起動しつつも、所定の速度レベルでのAV再生を実現するという、連携動作が可能になる。特別キーを押下するというワンアクションで、アプリケーション起動と、所定の速度レベルでのAV再生とを同時に実行することができるので、アプリケーションの使い勝手が更に高まる。
前記実行手段は、記録媒体に記録されたクラスファイルからインスタンスを生成することで、アプリケーションの実行を行い、前記記録媒体には、再生速度指示プログラムのクラスファイルが記録されており、予め定められた速度レベルでのAV再生とは、再生速度指示プログラムにより指示される速度にて、再生を行うことである。
9.10.以下の発明特定事項を加え、再生装置を更に具体的な構成にすることができる。
速度制御情報は、開始時間及び終了時間を示し、予め定められた速度レベルでのAV再生を再生手段に命じるのは、再生装置の状態がAV再生中であって、現在の再生時点が、速度制御情報に示される開始時間に到達した時点以降であり、前記再生手段が、予め定められた速度レベルでのAV再生の終了を再生手段に命じるのは、再生装置の状態がAV再生中であって、現在の再生時点が、速度制御情報に示される終了時間に到達した時点以降である。
11.以下の発明特定事項を加え、再生装置を更に具体的な構成にすることができる。
前記AV再生の対象は、記録媒体に記録されたタイトルであり、前記記録媒体には、アプリケーションについてのクラスファイルが記録されていて、前記実行手段は、仮想マシンのプラットフォームであり、ヒープメモリと、クラスローダと、アプリケーションマネージャとを含み、前記アプリケーションマネージャは、プラットフォーム上でタイトルバウンダリのアプリケーションシグナリングを実行するものであり、記録媒体における何れかのタイトルの再生が開始されれば、記録媒体に存在するクラスファイルのうち、当該タイトルを生存区間とするもののインスタンスをヒープメモリ上に生成するようクラスローダに命じることで、前記アプリケーションを実行可能な状態とし、前記受付手段は、ユーザイベントマネージャを含み、前記ユーザイベントマネージャは、ユーザによってなされた操作のうち、タイトルにおいて有効とされているものに対応するキーイベントを生成して、実行可能な状態にあるアプリケーションに送信するものであり、前記制御手段による所定の速度レベルでのAV再生の指示はユーザによって操作がなされてから、キーイベントが送信されるまでの期間内になされる。
また本発明の構成要素たる制御手段は、このユーザイベントマネージャに対する追加モジュールとして、再生装置に実装することができるので、BD-J Terminalの標準モデルに対して大幅な改変を加えることなく、当該標準モデルにモジュール追加を施す形で、実現することができる。本発明の実装は、このような、モジュール追加という形態で、実現されるので、再生装置の製造開発を行うメーカーは、かかる速度機能を、容易に自社の製品に取り入れることが可能になる。
前記記録媒体には、動作モードオブジェクトが記録されており、動作モードオブジェクトは、タイトルの再生が開始された際、どのような動作モードで、タイトルにおける動的な制御を実現するかを規定するテーブルであり、アプリケーション管理テーブルと、当該タイトルにおいて有効となるキーを指定するキーインタレストテーブルとを含み、前記アプリケーションマネージャは、タイトルの再生が開始された際、そのタイトルに対応付けた動作モードオブジェクトから、アプリケーション管理テーブルを受け取り、このアプリケーション管理テーブルに基づき、アプリケーションシグナリングを実現するものであり、前記ユーザイベントマネージャは、タイトルの再生が開始された際、そのタイトルに対応付けた動作モードオブジェクトから、キーインタレストテーブルを受け取り、ユーザにて操作されたキーが、キーインタレストテーブルにおいて、有効とされているキーであるか否かの判定を行い、前記前記アプリケーションに送信されるキーイベントは、キーインタレストテーブルにおいて有効とされているキーに対応するキーイベントである。
13.以下の発明特定事項を加え、再生装置を更に具体的な構成にすることができる。
図1(a)は、本実施の形態に用いる記録媒体の一例であるBD-ROM100の構成を示した図である。BD-ROMにはAVデータ、アプリケーションプログラムが記録されている。
第2段目は、螺旋状の記録領域を横方向に引き伸ばして描いている。この第2段目において、記録領域は、内周のリード・インと外周のリード・アウトの間に論理データを記録できる論理アドレス空間を有している。リード・インの内側にはBCA(Burst Cutting Area)と呼ばれるドライブでしか読み出せない特別な領域がある。この領域はアプリケーションから読み出せないため、例えば著作権保護技術などに利用されることがよくある。
第3段目は、記録領域のディレクトリ及びファイル構造を示す。BD-ROMにおけるディレクトリ及びファイル構造は、ルートディレクトリ(ROOT)直下にBDMVディレクトリが置かれ、その配下にSTREAMディレクトリ、MPLSディレクトリ、JARディレクトリ、BDJOディレクトリが存在する。
AVストリームについて説明する。AVストリームは、デジタル化された動画像、字幕、音声を時分割多重することで得られる、MPEG2-TS形式のトランスポートストリームであり、STREAMディレクトリに配置されている。
<BD-ROMの構成その2.プレイリスト情報>
プレイリスト情報は、AVストリームの再生時間軸のうち、In_Timeとなる時点と、Out_Timeとなる時点の組みを1つ以上定義することにより、論理的な再生区間や再生経路を定義する情報である。プレイリスト情報は、AVストリームに多重化されているエレメンタリストリームのうち、どれの再生を有効とするかを規定するストリーム番号テーブルを有しており、AVストリーム内のエレメンタリストリームのうち、どれの再生を許可し、どれの再生を許可しないかを規定する役割をもつ。Java(登録商標)アプリケーションが、このプレイリスト情報を再生するJMFプレーヤインスタンスの生成をJava(登録商標)仮想マシンに命じることで、AV再生を開始させることができる。JMFプレーヤインスタンスとは、JMFプレーヤクラスを基にして仮想マシンのヒープメモリ上に生成される実際のデータのことである。
<BD-ROMの構成その3.Index.bdmv>
Index.bdmvについて説明する。図1(b)は、Index.bdmvの内部構成を示す図である。Index.bdmvとは、AVストリームと、プレイリスト情報とを含む再生単位であるタイトルに対して、動作モードオブジェクトを対応付けるテーブルである。動作モードオブジェクトとは、Index.bdmvに基づき、タイトルの再生を行う際、そのタイトルにおける動的な制御を、どのような動作モードで行うかを規定する情報である。動作モードオブジェクトには、コマンドインタラプタを主体とする動的制御を規定する動作モードオブジェクト(Movieオブジェクト)と、Java(登録商標)仮想マシンを主体とした動的制御を規定する動作モードオブジェクト(BD-Jオブジェクトと呼ばれる)とがある。
『Title_object_type』は、該当するタイトルに関付けられている動作モードオブジェクトが、MovieオブジェクトであるかBD-Jオブジェクトであるかを示す。
このようなIndex.bdmvにより、タイトルと、動作モードオブジェクトとの対応が図られることになる。
<BD-ROMの構成その4.XXXXX.JAR>
XXXXX.JAR(「XXX」は可変、拡張子「JAR」は固定)は、Java(登録商標)アーカイブファイルである。Java(登録商標)アーカイブファイルは、ZIPファイルの形式を、Java(登録商標)に特化したものであり、市販されているZIP展開ソフトウェアにより中身を確認することができる。ここで「XXXXX」は可変、拡張子「JAR」は固定である(以下JARファイルと称する)。JARファイルは複数のファイルをディレクトリ構造の形で格納している。一つのJARファイルは一つ以上のクラスファイル、JARファイルの属性を示すメタファイル、画像などのデータが格納されている。基本的に一つのJARファイルに一つのJava(登録商標)アプリケーションが格納されており、Java(登録商標)アプリケーションはJava(登録商標)仮想マシン上で実行することができる。
ZZZZZ.BDJO(「ZZZZZ」は可変、拡張子「BDJO」は固定)は、上述したBD-Jオブジェクトを格納したファイルである。図2(b)は、BD-Jオブジェクトの内部構成を示す図である。本図の左側に示すように、BD-Jオブジェクトは、アプリケーション管理テーブルと、KeyInterestテーブルとを含む。
上述したようなAVストリーム、Index.bdmv、JARファイル、BD-Jオブジェクトは、ファイル構造、ディレクトリ構造に従ってBD-ROMに記録されているので、再生装置は、ファイルオープンのためのシステムコールを行うことで、これらをメモリに読み出すことができる。
以上が、再生装置が前提としている記録媒体についての説明である。
続いて、再生装置が対象としているアプリケーションについて説明する。
上述したようにアプリケーションは、タイトルという単位でシグナリングがなされる。このタイトルは、プレイリスト、AVストリームといった再生単位を含むものであり、相応の時間長をもつものなので、このタイトルという単位でシグナリングを行っている限り、アプリケーションの動作区間が短くなり過ぎることはない。
図3は、本実施形態に係る再生装置が実行対象としているインタラクティブアプリケーション、オンラインショッピングアプリケーションのGUI仕様を示す図である。
「インタラクティブアプリケーション」は、映像中の複数の選択対象の中から1つを選択するという、映像操作の機能を具備したアプリケーションプログラムであり、GUIとしてポインタp1の表示を行う。このポインタは、ユーザによるリモコンの方向キー操作によって移動するものであり、動画像中の特定の対象物(ここでは、女性ゴルファーの人物像)を選択することができる。
図4は、再生装置が想定しているアプリケーションの動作仕様を示す図である。第1段目は、アプリケーションによるGUI仕様であり、第2段目は、オンラインショッピングアプリケーションが実行される期間、第3段目は、インタラクティブアプリケーションが実行される期間を示す。
一方、AV画面において、所望の人物像(ここでは、女性ゴルファーの人物像)がフレームインして、この人物像に対する確定操作がなされた場合、オンラインショッピングアプリケーションが起動される。このオンラインショッピングアプリケーションは、人物像と、購入画面p2とを合成した合成画像を表示に供し、その人物に関連した商品の細目を提示し、その関連商品を購入する操作を受け付ける。
(再生装置)
次に、本発明にかかる再生装置の実施形態について説明する。この再生装置は、リモコンを通じて操作される。
BD-ROMドライブ101は、図1(a)に示すような内部構成を有するBD-ROMのローディング/イジェクトを行い、BD-ROMに対するアクセスを実行する。
(HDドライブ102)
HDドライブ102は、BD-ROMにて供給されるクラスファイルと、同等のクラスファイルを格納しておくことができるハードディスクドライブである。
メモリカードドライブ103は、BD-ROMにて供給されるクラスファイルと、同等のクラスファイルが書き込まれた半導体メモリカードを、装填することができるドライブ装置である。
(スイッチ104)
スイッチ104は、BD-ROMドライブ101、HDD102、メモリカードドライブ103から読み出されたクラスファイル、AVストリームを、選択的にストリームデコーダ105、RAM108に出力する。
ストリームデコーダ105は、BD-ROM100に記録されているAVストリームを、ビデオストリーム、オーディオストリームに分離する。
(AVデコーダ106)
AVデコーダ106は、ストリームデコーダ105にてデコードされたストリームから分離抽出されたビデオデータと、オーディオデータとを同期をとりながら復号し、復号したビデオデータをディスプレイに出力し、復号したオーディオデータをスピーカーに出力する。またAVデコーダ106は、ビデオデータにおけるフレームの出力を所定数だけ繰り返すことでスロー再生を実現する。例えば、通常再生の1/2の再生速度での再生が命じられ、第1フレームに相当するビデオデータ、第2フレームに相当するビデオデータ、....、第15フレームに相当するビデオデータを順次AVデコーダ106が受け取ったとすると、AVデコーダ106は、各フレームに相当するビデオデータを、重複して出力する。具体的には、第1フレームに相当する復号したビデオデータ、第1フレームに相当する復号したビデオデータ、第2フレームに相当する復号したビデオデータ、第2フレームに相当する復号したビデオデータ、...第15フレームに相当する復号したビデオデータ、第15フレームに相当する復号したビデオデータを1秒間に出力する。同じフレームのビデオデータが、2回重複して出力されるので、AVストリームが2倍の時間をかけて再生されることになる。その結果、通常再生の1/2の速度でスロー再生することが可能になる。
ビデオフレームバッファ107は、AVデコーダ106のデコードにより得られた非圧縮のフレーム画像を格納する。本実施形態では、1秒間におけるビデオフレームバッファの更新頻度を、1秒間に30回とする。これは、1秒間に30フレームに相当するAVストリームを、AVデコーダ106からビデオフレームバッファに出力し、そして、アプリケーションが描画した30フレームに相当するグラフィクスを、1秒間に、グラフィックスフレームバッファ111に出力することを意味する。
(RAM108)
RAM108は、CPU110がデータ処理を行うにあたって、必要なデータが格納される。
ROM109には、インタプリタ、ネィティブライブラリ、クラスラィブラリ等、再生装置に予め組み込まれている組込みプログラムが格納される。
(CPU110)
CPU110は、組込みプログラム用ROM109に格納されたネィティブコードを実行する。
グラフィクスフレームバッファ111は、CPU110が対話的な制御を実行する際、GUI描画に用いられる。このグラフィクスフレームバッファ111で実現されるグラフィクス描画には、アプリケーションによるGUI表示、セットアップ時におけるメニュー表示がある。アプリケーションにより描画される購入画面p2、ポインタp1といったグラフィクスは、GUIの1つなので、このグラフィクスフレームバッファ111に描画される。グラフィクスフレームバッファ111上のグラフィクスは、グラフィクス管理のための数値にて管理されており、この数値に対応するグラフィックスデータの画像は、画面上に一定時間だけ表されることになる。一方、その一定時間のあいだ、アプリケーションの側では、新たなグラフィクスの生成がなされている。一定時間が経過すれば、グラフィクスフレームバッファ111の格納内容は、新たに生成されたグラフィックスデータを用いて上書きされることになる。かかる上書きにおいて、グラフィクス管理のための数値は更新される。こういった動作、つまり、“アプリケーションによるグラフィクスの生成”、“生成されたグラフィクスの更新”、“グラフィクスの上書き”、“グラフィクス管理のための数値の更新”という一連の動作の繰り返しにより、アプリケーションによるGUI表示は、AV再生のフレーム進行に伴って、変化することになる。また単位時間(例えば一秒間など)における上述の一連の動作の繰り返しの回数(以後アプリケーションの実行速度と称す)を変えることにより、グラフィックスバッファ111の格納内容が単位時間あたりに更新されるタイミングの数を増減させることが可能となる。これにより結果として、入力に対するアプリケーションによるグラフィックスデータ(GUI表示)の応答性を高くしたり、低くしたりすることが可能となる。このグラフィクスフレームバッファ111の格納内容は、ビデオフレームバッファ107の格納内容と合成して出力されるので、ディスプレイには、グラフィックスフレームバッファ111に書き込まれたデータに対応するグラフィックス画像と、ビデオフレームバッファ107に書き込まれたAVストリームに対応する再生画像とを重ね合わせたものが表示される。
操作受付部112は、リモコンや再生装置のフロントパネルといった入力機器に対してなされたユーザ操作を検知して、通知する。この通知は、これらの入力機器に対応するデバイスドライバ内の割込みハンドラが発生する割込みに従い、UOPを生成することでなされる。UOPとは、リモコンやフロントパネルに設けられたキーマトッリクスによるキー押下を検知した際、発生するイベント(UOPイベント)であり、押下されたキーに対応したキーコードを含んでいる。具体的には、リモコンやフロントパネルに対応するデバイスドライバの割込みハンドルが、キーマトリックスに対するキーセンスでキー押下を検出した際、そのキー押下に基づき割込み信号を発生することで、UOPイベントは、生成される。
ネットワークインターフェイス113は、ネットワーク接続のためのプロトコルスタックを実行するものであり、ネットワーク上のサーバコンピュータが具備しているドライブを、ネットワークドライブとして、再生装置に認識させる。そして、ネットワークドライブからデータをダウンロードしたり、データをアップロードすることができる。このネットワークインターフェイス113を通じて、外部のサーバと、データ通信することができるので、オンラインショッピングアプリケーションの実行時においては、アプリケーションを構成するバイトコードに従って、ネットワークインターフェイス113を介して、ネットワーク上の決済サーバと、電子的な決済処理を行ことができる。
図5の再生装置は、Java(登録商標)2Micro_Edition(J2ME) Personal Basis Profile(PBP 1.0)と、GloballyExecutable MHP specification(GEM1.0.2)for package media targetsとをフル実装することで構成されるJava(登録商標)プラットフォームであり、図6のようなレイヤモデルをを有する。
i)BD-ROM Resident System Software
BD-ROM再生装置に組み込まれ、常駐ソフトウェアとして動作するもののレイヤであり、ユーザイベントマネージャ9を含む。
ii)BD-J Application Enviroment
BD-Jモジュール3と呼ばれ、アプリケーションの実行環境となるレイヤであり、Java(登録商標)プラットフォーム(BD-Jモジュールと呼ばれる)に該当する。
iii)BD-ROM Player Model
BD-ROMプレーヤとしての機能を実現するソフトウェアのレイヤであり、再生エンジン1、再生制御エンジン2を含む。
再生エンジン1は、AV再生機能を実行する。再生装置のAV再生機能とは、DVDプレーヤ、CDプレーヤから踏襲した伝統的な機能群であり、再生開始(Play)、再生停止(Stop)、一時停止(PauseOn)、一時停止の解除(Pause Off)、Still機能の解除(still off)、速度指定付きの早送り(Forward Play(speed))、速度指定付きの巻戻し(BackwardPlay(speed))、音声切り換え(Audio Change)、副映像切り換え(Subtitle Change)、アングル切り換え(AngleChange)といった機能である。
再生制御エンジン2は、プレイリストの再生機能(i)、再生装置における状態取得/設定機能(ii)といった諸機能を実行する。プレイリストの再生機能とは、再生エンジン1のAV再生機能のうち、再生開始や再生停止を、プレイリストに従って行うことをいう。また再生制御エンジン2は、再生装置の状態を示すプレーヤ状態レジスタ2a、メーカーやユーザによる再生装置の設定を示すプレーヤ設定レジスタ2bを含み、これらプレーヤ状態レジスタ2aにおけるプレーヤ状態情報、プレーヤ設定情報2bにおけるプレーヤ設定情報に基づき、再生装置における状態取得/設定機能を実行する。特徴的なのは、プレーヤ設定レジスタ2bに、「速度自動制御」、「速度レベル」という設定内容があり、プレーヤ設定レジスタ2bにおける速度自動制御がONに設定されていると、プレーヤ設定レジスタ2bにおける速度レベルでの再生が実現される点である。
BD-Jモジュール3は、再生装置におけるプラットフォームであり、Java(登録商標)仮想マシン4、ヒープメモリ5、アプリケーションキャッシュ6、クラスローダ7、アプリケーションマネージャ8を備える。
(Java(登録商標)仮想マシン4)
Java(登録商標)仮想マシン4はインタプリタであり、ヒープメモリ5に格納されたアプリケーションを構成するバイトコードを、CPU110が解読可能なネィティブコードに変換して、CPU110に供する。こうすることで、バイトコード状態のアプリケーションをCPU110に実行させる。
ヒープメモリ5は、クラスファイルのインスタンスである、バイトコード状態のアプリケーションが格納されるメモリである。
(アプリケーションキャッシュ6)
アプリケーションキャッシュ6は、アプリケーションが格納されるキャッシュメモリである。
クラスローダ7は、アプリケーションのクラスファイルをBD-ROM100から読み出して、バイトコードに変換する。かかる変換を経て得られたバイトコードは、ヒープメモリ5に格納される。こうすることで、ヒープメモリ5には、バイトコード状態のアプリケーションが得られることになり、Java(登録商標)仮想マシン4による実行に供される。
アプリケーションマネージャ8は、再生装置において再生対象となるタイトルの切り替わりが発生した場合、BD-ROM100からアプリケーションプログラムを読み出してアプリケーションキャッシュ6に格納する。そして、各アプリケーションについての制御コードを参照し、制御コードがAutoStart(自動起動)であるなら、アプリケーションのうち自動起動すべきものをJava(登録商標)仮想マシン44に実行させる。この実行は、クラスローダ7に指示をだすことでなされる。
一方、他のアプリケーションからの呼出や、ユーザからの起動要求を待って起動するアプリケーションプログラムについてはアプリケーションキャッシュ6にキャッシュされた状態で、他のアプリケーションからの呼出しを待つ。上述したようなオンラインショッピングアプリケーションは、ユーザからの起動要求と、他のアプリケーションからの呼出しとを待って起動すべきものなので、当該オンラインショッピングアプリケーションがアプリケーションキャッシュ6に格納され、ユーザからの起動要求及び他のアプリケーションからの呼出しを待っている状態において、リモコンの方向キーが押下されると、オンラインショッピングアプリケーションは、実行可能なコードに変換されてヒープメモリ5に格納されることになる。Java(登録商標)仮想マシン4は、ヒープメモリ5に記憶されたコードを解釈実行することにより、アプリケーションプログラムを実行する。
ユーザイベントマネージャ9は、UOPイベントが発生した際、そのUOPイベントに対応するキーイベント(アプリケーションが受け取ることができるイベント)を発生させるかどうかを判定して、発生させるべきと判定した場合、キーイベントをアプリケーションに出力する。BD-JオブジェクトのKeyInterestテーブルには、キー毎に、キーイベントを発生させるかどうかが規定されているので、キーイベントを発生させるかどうかの判断は、BD-JオブジェクトのKeyInterestテーブルにおけるエントリーの記載を基準とする。図中の矢印☆1,2,3,5は、このレイヤモデルにおいて、特徴的な処理の流れを模式的に示している。上述したように、アプリケーションへのキーイベントの発生及び送信は、UOPイベントが発生した際なされる(☆5)。ユーザイベントマネージャ9の特徴的な処理とは、このキーイベントの送信に先立ち、発生したキーイベントを再生制御エンジン2に送信することであり(☆1)、このキーイベントの送信を契機として、プレーヤ設定レジスタ2bに格納されている、速度自動制御及び速度レベルに基づき、再生制御がなされる。この再生制御の結果、スロー再生、又は、一時停止(ポーズ)がなされることになる。以上が、再生装置におけるソフトウェアのレイヤモデルである。
本図における各ソフトウェア要素の動作は以下の通りとなる。インタラクティブアプリケーションは、複数の選択対象の中から1つ選択することにより、再生中の映像等を操作するものなので、AV画面には、ポインタp1の表示が現れる。ユーザがリモコンの方向キーを押下して、このポインタp1表示で購入したい品物の選択を行い、購入したい品物にカーソルを合わせてリモコンのENTERキーが押下されると、クラスローダ7は、アプリケーションキャッシュ6に格納したオンラインショッピングアプリケーションのアプリケーションプログラムを実行可能なバイトコードに変換して、ヒープメモリ5に記憶する。Java(登録商標)仮想マシン4がヒープメモリ5に記憶したコードを実行すれば、オンラインショッピングアプリケーションのアプリケーションプログラムが起動し、ディスプレイに購入画面p2が現れ、ユーザは所定の手続きを行うと、品物を購入することができる。
アプリケーションEASYモードが導入されているので、再生装置内のプレーヤ状態レジスタ2aは、かかるアプリケーションEASYモードの設定を受け付けるようになっている。
(プレーヤ状態レジスタ2a)
プレーヤ状態レジスタ2aは、再生装置上のコンテンツの再生状況を示すものであり、BD-ROM100に記録されたコンテンツの再生状況の変化に応じて動的に変化する。ここで、コンテンツの再生状況は、カレントタイトル番号、カレントチャプタ番号、カレントアングル番号、カレントオーディオ番号といったパラメータにて特定される。プレーヤ状態レジスタ2aにおけるプレーヤ状態情報は、こうしたパラメータを個別に管理している。図8(a)は、プレーヤ状態レジスタ2aにおけるプレーヤ状態情報の内部構成を示す図である。プレーヤ状態レジスタ2aにおけるプレーヤ状態情報は、「カレントタイトル番号」、「カレントチャプタ番号」、「カレントアングル番号」、「カレントオーディオ番号」から構成される。
「カレントチャプタ番号」は、カレントタイトルで表されるタイトル内で定義されたチャプタ番号であって、有効なチャプタ番号(1以上の数値)が設定されることで、現在再生されているチャプターがどれであるかを示す。逆に再生中でないときは無効値(例えば、0)を表す。
「カレントオーディオ番号」も、カレントアングル同様、有効な音声番号(1以上の有効な数値)が設定されることで、現在選択されているオーディオがどれであるかを示す。逆に、コンテンツが再生中でないときは無効値(例えば、0)で表される。
次に、プレーヤ設定レジスタ2bに格納されている情報(プレーヤ設定情報)について説明する。プレーヤ設定情報は、再生状態によって、動的に変化するものではなく、予め対象となるBD-ROM100のコンテンツをどのように再生させたいのかというユーザの意図を保持しておくものである。プレーヤ設定情報における一部の情報は、ユーザからの入力によって、その値を変えることが可能である。図8(b)は、プレーヤ設定情報の内部構成を示す図である。本図に示すように、プレーヤ設定情報は、「Regionコード」、「音声言語」、「字幕言語」、「速度自動制御」、「速度レベル」を含む。
「音声言語」は、音声言語のデフォルト設定を表す情報である。
「字幕言語」は、字幕言語のデフォルト設定を表す情報である。プレーヤ設定レジスタ2bおける以上の情報要素は、BD-ROMの再生装置が一般的に具備しているものである。以下の2つは、再生装置のために、新たに導入されたものである。
アプリケーションEASYモードの導入のため、プレーヤ設定レジスタ2bが改良されているので、再生装置は、セットアップの表示時において、かかるアプリケーションEASYモードの設定を受け付けるようになっている。
レベル設定メニューmn3は、“0”から“5”までの速度のそれぞれに対応する6つのボタン部材を含む。これらのボタン部材のどれかを確定することにより、プレーヤ設定レジスタ2bにおけるレベルを設定することができる。
アプリケーションEASYモードを実現するため、再生装置における再生制御エンジン2の内部には、図10に示すような機能的な構成要素が設けられている。図10は、再生制御エンジン2における機能的な構成要素を示す図である。本図に示すように、再生制御エンジン2は、動作状態判定部11、再生速度指示部12、制御情報設定部13、タイマ管理部14から構成される。
動作状態判定部11は、キーイベントが発生した際、再生装置の状態がAV再生中であるかどうか、発生したキーイベントがアプリケーションを操作するためのキーイベントであるかどうかの判定を行う。そしてAV再生中であり、発生したキーイベントがアプリケーションを操作するキーイベントであるなら、再生速度指示部12へ、受け取ったキーイベントを通知する。
再生速度指示部12は、グラフィクスフレームバッファ111がキーイベントの通知を受けると、プレーヤ設定レジスタ2bに設定される情報を参照して、ここに設定されている速度レベルでAV再生を行うよう、再生エンジン1を制御する。ここで、通常再生の半分にまで、再生速度を下げる場合を例にして説明する。例えば再生速度を通常再生の半分にする場合、1秒当たりに表示される30フレームのAVデータのうち、15フレーム分に相当するAVデータを分離抽出するようにストリームデコーダ105を制御する。また、タイマ管理部14に対して、タイマでの計時を開始させる。
制御情報設定部13は、AVストリームの再生速度の自動制御機能のON/OFFや自動制御される再生速度の情報をプレーヤ設定レジスタ2bに格納する。例えばAV再生がなされていない状態で、リモコンのメニューキーが押下され、アプリケーションEASYモードを設定するためのモード設定メニューmn2が選択された場合、図9のアプリケーションEASYモードを設定するためのモード設定メニューmn2を表示する。このモード設定メニューmn2が表示された状態で、リモコンの方向キーが操作され、モード設定メニューmn2における速度自動制御で“設定される”が設定され、レベル設定メニューmn3における速度レベル設定で“1”が選択されたものとする。そうしてリモコンのENTERキーが押下されれば、制御情報設定部13は、モード設定メニューmn2で設定された情報(この例ではON)、レベル設定メニューで設定された速度レベル(この例では速度レベルが1)を読み込む。その結果、プレーヤ設定レジスタ2bに記憶されるプレーヤ設定情報の再生速度自動制御がONに設定されて、AVストリームの自動制御が許可される。一方、プレーヤ設定レジスタ2bにおける速度レベルが“1”に設定される。
タイマ管理部14は、再生装置が備えるタイマを管理する。ユーザからアプリケーションの操作入力を操作受付部112にて受け付けた際、このタイマでの計時を開始させる。そしてタイマが所定時間(例えば30秒)の計時を完了すれば、タイムアウトの通知を行う。具体的には、再生速度指示部12からタイマの計測開始を指示するメッセージを受け取ると、タイマでの計時を開始して、所定時間(この例では30秒)が経過すると、再生速度指示部12にタイムアウトのメッセージを通知する。
ステップS14は、受け取ったキーイベントがアプリケーションの操作に関するキー(例えば方向キーまたはENTERキーなど)であるかどうかを判定する判定ステップであり、本ステップがYesであれば、再生速度指示部12に受け取ったキーイベントを通知した上で(ステップS15)、メインフロ−チャ−トにリターンする。ステップS14において、受け取ったキーイベントがアプリケーションの操作に関するキーでないと判定した場合は、受け取ったキーイベントを廃棄(ステップS16)し、メインフロ−チャ−トにリターンする。
図13は、再生速度指示処理の処理手順を示すフローチャートである。
ステップS21は、動作状態判定部11からのメッセージが、動作状態判定部11からのキーイベントの通知であるか、タイムアウト通知であるか否かの判定である。
例えば、速度レベル“1”が通常再生に比べ非常に遅く、速度レベル“5”はやや遅いなどのように再生速度を5段階で調節することができる。
続いて、ステップS21においてタイムアウト通知を受信した場合について説明する。このタイムアウト通知は、タイマ管理部14からの最後のキー入力から所定時間(この例では30秒)が経過したことを示すものである。受け取ったメッセージがタイマ管理部14からのタイムアウト通知であれば、再生エンジン1に通常速度で再生するよう指示して(ステップS29)、メインルーチンにリターンする。
本フローチャートは、3つの判定ステップを含み、これらの判定ステップの判定結果の組合せで、実行すべき処理が切り替わる構成になっている。
ステップS31は、キーイベントの種類がセットアップキーかどうかの判定であり、ステップS32は、セットアップメニューの表示中かどうかの判定である。ステップS33は、キーイベントの種類が、ENTERキー又は方向キーであるかの判定である。
つまり、ディスプレイにアプリケーションEASYモードを設定するためのモード設定メニューmn2が表示されていれば、発生したキーイベントが、アプリケーションEASYモードを設定するためのモード設定メニューmn2を操作するものかどうか、又は、アプリケーションEASYモードを設定するためのモード設定メニューmn2における設定を、プレーヤ設定レジスタ2bに格納させるものなのかどうかがこのステップS33にて判定されることになる。
ステップS32がYes、ステップS33で“キーイベントの種類=方向キー”と判定されれば、セットアップメニューにおけるフォーカス状態を、方向キーイベントに示される方向に移動する(ステップS37)。その後、メインルーチンにリターンする。
ステップS32がNoであれば、ステップS38においてキーイベントを廃棄した上でメインルーチンにリターンする。
第1実施形態では、制御情報設定部13を、再生装置に組込まれた組込み型のプログラムとして説明した。本実施形態は、この制御情報設定部13をBD-ROM100から供給する改良に関する。
本実施形態において、説明の題材にとりあげるアプリケーションの仕様について説明する。図15(a)は、インタラクティブアプリケーションにおけるGUI仕様を示す図である。インタラクティブアプリケーションは、方向キーの押下時には、方向キーに対応するキーイベントに対応する処理を実行するものである。このキーイベント処理により、ディスプレイ内の映像フレーム中にポインタp1が表示され、映像フレームに表示されている映像の中から選択可能な映像が選択される。こういった、ポインタp1を用いた映像の操作が可能になる。そして、このポインタp1を用いて映像フレーム中の物体像をクリックすることができる。本図では、物体像としてF1マシンが描かれている。このF1マシンがクリックされることで、情報画面p3がポップアップ表示される。この情報画面は、映像フレーム中の物体像のうち、クリックされた部位の解説を示す。本図の場合、F1マシンのタイヤ部位がクリックされたので、F1マシンのスペックとして、その部位の細目が表示される。この例では、タイヤのメーカ名(Stonebridge)が表示される。
イベントリスナ15は、キーイベント予約情報を保持している。キーイベント予約情報とは、アプリケーションが受付可能なキーイベントのうち、再生速度の変更を併せて行うものはどれであるかを示す情報であり、再生速度の変更を併せて行うキーイベントを操作受付部112から受け取ると、受け取ったキーイベントに対応する処理をアプリケーションに実行させるとともに、再生速度の制御を再生速度指示アプリケーション12aへ指示する。逆に、速度変更が不要なキーイベントを受け取ると、受け取ったキーイベントに対応する処理をアプリケーションを実行させ、再生速度指示アプリケーション12aへの指示は行わない。
再生速度指示アプリケーション12aは、受け取った再生速度の制御の指示を受け取ると、指示に従い再生速度を制御するように再生エンジン1へ指示する。再生速度指示アプリケーション12aは、BD-ROM100のクラスファイルからBD-Jモジュール3に供給され、BD-Jモジュール3上で動作するので、再生速度指示アプリケーション12aは、再生制御エンジン2内のプレーヤ状態レジスタ2aからカレントタイトル番号、カレントチャプター番号を読み出し、再生制御エンジン2のプレーヤ設定レジスタ2bから速度自動制御、速度レベルを読み出す。また再生制御エンジン2内のタイマ管理部14に対して計時開始を指示し、タイマ管理部14からタイムアウトの通知を受ける。
ステップS1は、ユーザによるリモコンからの操作入力を受信待ちステップである。操作入力があれば、ステップS1がYesとなってステップS2に移行する。ステップS2は、受信した操作入力が再生制御要求(再生、一時停止など)であるかどうかの判定である。ステップS2がYesであれば、ユーザから要求された再生速度での再生を指示して(ステップS3)、ステップS4に移行する。
ステップS4においてストリームデコーダ105は、入力されたストリームをデコードしてビデオデータ、オーディオデータに分離し、AVデコーダ106に出力する。ステップS5においてアプリケーションプログラムは、必要に応じてグラフィックス画像を生成する。それと共にAVデコーダ106は、ビデオデータとオーディオデータとを同期をとりながら復号する。オーディオデータの復号音声はスピーカーに、ビデオデータの復号映像はディスプレイにそれぞれ出力される。
ステップS51は、アプリケーションによるキーイベントの通知待ちであり、もしキーイベントが通知されれば、イベントリスナに、キーイベントを解析させる(ステップS52)。ステップS53は、キーイベントが速度制御の対象としてキーイベント予約情報に登録されているかどうかの判定であり、ステップS53がNo(未登録)であるなら、ステップS54をスキップしてステップS55に移行する。
次に、AVストリーム再生中にユーザがインタラクティブなアプリケーションプログラムを操作した場合の例について説明する。
以上のように本実施形態によれば、イベントリスナ15を有したアプリケーションと、再生速度指示アプリケーション12aとを作成し、そのクラスファイルをBD-ROM100に記録しておくことで、操作入力に応じて、アプリケーションプログラムを起動できるようになる。こうすることで、ユーザが特定のキーを押下したとき等、AVストリーム作成者側が意図するアプリケーションプログラムを意図したタイミングにおいて、意図する再生速度でAVストリームを再生することができる。
第2実施形態は、速度制御のためのアプリケーションを記録媒体から供給する改良であったが、本実施形態は、速度制御のための情報を、AVストリームの内部に組み込んでおく改良に関する。図20は、速度制御のための情報が組み込まれたAVストリームを示す図である。本図の上側には、BD-ROMにおいてYYYYY.M2TSというファイル名で格納されているAVストリームが配置されている。このAVストリームには、ハッチング部に示すように、ストリームテーブル情報が組込まれている。引き出し線y51は、ストリームテーブル情報の構成をクローズアップしている。ストリームテーブル情報は、「セクション制御情報」、「ストリーム制御情報」からなる。
引出線y53は、「ストリーム制御情報」の内部構成をクローズアップしている。引出線に示すように、ストリーム制御情報は、ストリーム種別(図中では“2”)、プログラム種別(図中では“150”)、速度制御情報の数(図中では“1”)、速度制御情報からなる。引出線y54は、速度制御情報の内部構成をクローズアップしている。引出線に示すように、速度制御情報は、開始時間情報(図中では、“2:24:43.09”)、終了時間情報(図中では“2:34:43.09”)、速度情報(図中では“5”)に設定されている。
図21は、第1実施形態に示した再生装置の内部構成のうち、本実施形態の改良に深く係る部分(ストリームデコーダ105、再生制御エンジン2、制御情報設定部13)を描いた図である。
ストリームデコーダ105は、AVストリームからストリーム制御情報を分離して、制御情報設定部13に引き渡す。
制御情報設定部13は、ストリームデコーダ105から引き渡されたストリーム制御情報内の速度制御情報を、速度レベルとしてプレーヤ設定レジスタ2bに書き込む。
図22は、第3実施形態におけるメインフローの処理手順を示すフローチャートである。
(第4実施形態)
本実施形態は、第1実施形態〜第3実施形態に述べたAV再生をどのように実現するかを述べる実施形態である。図23は、第4実施形態に係る動作モードオブジェクト(BD-Jオブジェクト)の内部構成を示す図である。本図は、図2(b)をベースとして作図されており、このベースとなる構成と比較して、BD-JオブジェクトにAccessibleプレイリストテーブルが存在する点が異なる。Accessibleプレイリストテーブルとは、アプリケーションの生存区間において、各アプリケーション実行と同時に行うべき再生制御を示すテーブルである。アプリケーションの動作というのは不安定であり、起動の失敗や異常終了がありうる。そこで起動失敗、異常終了があった場合のFailSafe機構として、本実施形態ではアプリケーションの生存区間毎に、Accessibleプレイリストテーブルを設けている。この再生制御とは、プレイリスト情報に基づくAVストリーム再生であり、プレイリスト情報による再生制御を再生エンジン1に実行させることで、アプリケーション実行と、プレイリスト再生とが同時になされることになる。
以上、本願の出願時点において、出願人が知り得る最良の実施形態について説明したが、以下に示す技術的トピックについては、更なる改良や変更実施を加えることができる。各実施形態に示した通り実施するか、これらの改良・変更を施すか否かは、何れも任意的であり、実施する者の主観によることは留意されたい。
各実施形態では、BD-ROMにおけるタイトルを生存区間としてアプリケーションシグナリングをアプリケーションマネージャ8に実現させたが、オーディオストリームをスロー再生にすることで、その生存区間が長くなるものであれば、タイトル以外の再生単位でアプリケーションシグナリングを実現してもよい。例えば、デジタル放送規格におけるサービスを生存区間としてアプリケーションシグナリングを実現してもよい。また、プレイリストやチャプターという単位でもアプリケーションシグナリングを実現してもよい。
プレーヤ設定レジスタにおけるプレーヤ情報テーブルの形式は、第1実施形態に示した形式のデータに限定される必要は無く、記録媒体に記録されたAVストリーム再生に関する情報を、プレーヤ設定レジスタに格納できる形式のデータであればどのような形式であってもよい。
(AV再生中状態の判定基準)
AV再生中状態とは、早送り等の特殊再生をしている状態を含むとしてもよい。この場合、再生速度指示処理中の中で、タイマ管理部からタイムアウトが通知されれば、特殊再生に戻るような動作を行ってもよい。
本実施の形態においては、速度レベルを0〜5までの6段階としたものを例に説明をしたが、これ限られず、何段階にしてもよい。
ま本実施の形態においては、速度レベルが“0”の場合を一時停止としたが、これに限られず、例えば速度レベルが“5”である場合を一時停止としてもよい。つまり、設定可能な速度レベルのうちのいずれかの速度レベルが一時停止となるように対応付けられていれば良い。
図5に示したハードウェアの構成要素のうち、ストリームデコーダ105、AVデコーダ106、RAM108、ROM109、CPU110、操作受付部112のみを1つのシステムLSIとして構成してもよい。このROM109の中には、図10に示したソフトウェア要素のうち、再生エンジン1、再生制御エンジン2内の動作状態判定部11、再生速度指示部12が存在する。図24は、ストリームデコーダ105、AVデコーダ106、RAM108、ROM109、CPU110、操作受付部112を組込んだシステムLSIを模式的に示す図である。
システムLSIとは、高密度基板上にベアチップを実装し、パッケージングしたものをいう。複数個のベアチップを高密度基板上に実装し、パッケージングすることにより、あたかも1つのLSIのような外形構造を複数個のベアチップに持たせたものも、システムLSIに含まれる(このようなシステムLSIは、マルチチップモジュールと呼ばれる。)。
これらのピンは、他の回路とのインターフェイスとしての役割を担っている。システムLSIにおけるピンには、こうしたインターフェイスの役割が存在するので、システムLSIにおけるこれらのピンに、他の回路を接続することにより、システムLSIは、再生装置の中核としての役割を果たす。
上述したようなシステムLSIは、再生装置の機能を実現するものなので、システムLSIは、Uniphierアーキテクチャに準拠させるのが望ましい。
・データ並列プロセッサDPP
これは、複数の要素プロセッサが同一動作するSIMD型プロセッサであり、各要素プロセッサに内蔵されている演算器を、1つの命令で同時動作させることで、ピクチャを構成する複数画素に対するデコード処理の並列化を図る。
これは、命令RAM、命令キャッシュ、データRAM、データキャッシュからなる「Local Memory Contoroller」、命令フェッチ部、デコーダ、実行ユニット、レジスタファイルからなる「ProcessingUnit部」、複数アプリケーションの並列実行をProcessing Unit部に行わせる「Virtual Multi Processor Unit部」で構成される。
これは、ARMコア、外部バスインターフェイス(Bus Control Unit:BCU)、DMAコントローラ、タイマー、ベクタ割込コントローラといった周辺回路、UART、GPIO(GeneralPurpose Input Output)、同期シリアルインターフェイスなどの周辺インターフェイスで構成される。先に述べたCPU110は、このCPUブロックとしてシステムLSIに実装される。
これは、USBインターフェイスやATA Packetインターフェイスを介して、外部バス上に接続されたドライブ装置、ハードディスクドライブ装置、SDメモリカードドライブ装置とのデータ入出力を行う。
・AVI/Oブロック
これは、オーディオ入出力、ビデオ入出力、OSDコントローラで構成され、テレビ、AVアンプとのデータ入出力を行う。
これは、外部バスを介して接続されたSD-RAMの読み書きを実現するブロックであり、各ブロック間の内部接続を制御する内部バス接続部、システムLSI外部に接続されたSD-RAMとのデータ転送を行うアクセス制御部、各ブロックからのSD-RAMのアクセス要求を調整するアクセススケジュール部からなる。
そうして、各構成要素を具現化してゆけば、回路素子やIC,LSI間を接続するバスやその周辺回路、外部とのインターフェイス等を規定する。更には、接続線、電源ライン、グランドライン、クロック信号線等も規定してゆく。この規定にあたって、LSIのスペックを考慮して各構成要素の動作タイミングを調整したり、各構成要素に必要なバンド幅を保証する等の調整を加えながら、回路図を完成させてゆく。
こうして実装設計が行われ、基板上のレイアウトが確定すれば、実装設計結果をCAMデータに変換して、NC工作機械等の設備に出力する。NC工作機械は、このCAMデータを基に、SoC実装やSiP実装を行う。SoC(Systemon chip)実装とは、1チップ上に複数の回路を焼き付ける技術である。SiP(System in Package)実装とは、複数チップを樹脂等で1パッケージにする技術である。以上の過程を経て、本発明に係るシステムLSIは、各実施形態に示した再生装置の内部構成図を基に作ることができる。
FPGAを用いてシステムLSIを実現した場合は、多数のロジックエレメントが格子状に配置されており、LUT(Look Up Table)に記載されている入出力の組合せに基づき、縦・横の配線をつなぐことにより、各実施形態に示したハードウェア構成を実現することができる。LUTは、SRAMに記憶されており、かかるSRAMの内容は、電源断により消滅するので、かかるFPGAの利用時には、コンフィグ情報の定義により、各実施形態に示したハードウェア構成を実現するLUTを、SRAMに書き込むませる必要がある。
HDD102、メモリカードドライブ103は、Java(登録商標) IO Packageからのメソッドを用いることにより、アクセスすることができるローカルストレージであってもよい。HDD102、メモリカードドライブ103をローカルストレージとして構成することにより、HDD102、メモリカードドライブ103は、いわゆるバーチャルパッケージを構成することになる。
ディスクルート証明書とは、このBD-ROMを作成した作成者が、ルート認証局から配布を受けたルート証明書を、BD-ROMに割り当てたものである。ディスクルート証明書はたとえばX.509の形式で符号されている。X.509の仕様は国際電信電話諮問委員会より発行されており、CCITTRecommendation X.509 (1988), "The Directory - Authentication Framework“に記載されている。
そして、BD-ROMにおけるディスクルート証明書に対応するディレクトリから、ローカルストレージルートを用いてクラスファイルを読み出し、このクラスファイルに基づきクラスオブジェクトを生成して、Java(登録商標)仮想マシン4による実行に供するのが望ましい。
またBD-ROM、ローカルストレージの記録内容は、Advancend Access Content System(AACS)にて暗号化され、署名情報が付されて、利用権限が、パーミッションファイルに規定されているのが望ましい。
(TM).ioのexits()メソッドの用例を以下に示す。
例:
new java(登録商標).io.File(“/Persistent/1/1/streams/0.m2ts“).exists();
(アプリケーションキャッシュ6への格納)
各実施形態で説明した動作モードオブジェクトであるBD-Jオブジェクトに、キャッシュ管理情報を含ませておき、このキャッシュ管理情報に基づき、アプリケーションキャッシュ6への格納を行わせるのが望ましい。キャッシュ管理情報は、BD-Jオブジェクトに対応するタイトルがカレントタイトルになった際、当該タイトルにおけるAV再生が開始されるまでに、どのアプリケーションを構成するファイルを、アプリケーションキャッシュ6に読み込むべきかを示すものである。
またキャッシュ管理情報は、その内部にアプリケーションのそれぞれに対応付けられたエントリーを含む。各エントリーは、対応するアプリケーションをアプリケーションキャッシュ6に読み込ませる旨を再生装置に指示する情報であり、所定の順位が付与されている。BD-Jモジュール3は、その付与された順位がもっとも高いエントリーに対応するアプリケーションを最初にアプリケーションキャッシュ6に読み込み、それ以降、順位が高い順に、残りのエントリーに対応するアプリケーションを、順次アプリケーションキャッシュ6に読み込む。
ユーザイベントマネージャ9は、ユーザ操作に応じてイベントが発生した場合、当該イベントがKeyInterestテーブルにおいて有効とされているか否かを判定して、判定結果が肯定的であるなら、キーイベントをアプリケーションに出力した。ここで、ユーザ操作にて発生したイベントがKeyInterestテーブルに登録されていなかった場合、そのイベントに対応するオペレーションを、再生制御エンジン2に処理させてもよい。
各実施形態で述べたGUI画面は、OSD(On Screen Display)イメージデータ、Look Up Tebleから構成するのが望ましい。ここでOSDイメージデータとは、所定ビットのコードが各画素に割り当てられており、それらの所定ビットのコードの設定により画像内容を表現したデータである。この所定ビットのビット長の長さは、画素を描画する際の色数を表す、例えば、この所定ビットが1ビットなら、2色を用いてOSDイメージデータの各画素は着色されることになり、所定ビットが2ビットなら4色を用いて、所定ビットが4ビットなら16色を用いてOSDイメージデータの各画素は着色されることになる。
マークアップ情報における個々のアイテム情報は、GUI画面における個々の選択アイテムに対応するものである。具体的にいうと、対応する選択アイテムにフォーカスが存在する状態において、リモコンに存在する各キーが押下された場合、どの選択アイテムにフォーカスを移動させるかを示す『フォーカス移動先情報』と、対応する選択アイテムがノーマル状態及びフォーカス状態になった際、かかる選択アイテムを、どのような輝度及び色彩のLUTを用いて表示するかを示す『パレット情報』と、対応する選択アイテムの確定時において、再生装置に実行させるべき『コマンド』とからなる。
2 再生制御エンジン
3 BD-Jモジュール
4 Java(登録商標)仮想マシン
5 ヒープメモリ
6 アプリケーションキャッシュ
7 クラスローダ
8 アプリケーションマネージャ
9 ユーザオペレーションマネージャ
11 動作状態判定部
12 再生速度指示部
13 制御情報設定部
14 タイマ管理部
Claims (15)
- 再生装置であって、
アプリケーションを実行する実行手段と、
再生手段と、
ユーザ操作を受け付ける受付手段と、
制御手段とを備え、
前記制御手段は、
再生手段によるAV再生中に、受付手段がユーザによる操作を受け付けた場合、予め定められた速度レベルでのAV再生を再生手段に命じた上で、ユーザ操作に応じたキーイベントを、アプリケーションに出力する
ことを特徴とする再生装置。 - 再生装置は、ユーザによるセットアップ設定を受け付けるセットアップ手段を備え、
前記再生速度レベルは、
通常の速度レベルより低い速度レベル、及び、AV再生をポーズさせる速度レベルを含む
ことを特徴とする請求項1記載の再生装置。 - 前記実行手段は、再生手段が、予め定められた速度レベルで再生を行ったとしても、アプリケーションの実行速度を維持する
ことを特徴とする請求項1記載の再生装置。 - 前記セットアップ手段は、セットアップ操作の受け付け時において、0(ゼロ)から、Nまでの数値入力を受け付け、
通常の速度レベルより低い速度レベルとは、1からNまでの数値によって表現され、
AV再生をポーズさせる速度レベルとは、0の数値によって表現され、
前記速度レベルは、速度レベルに対応する数値を再入力することで、変更可能となる、請求項3記載の再生装置。 - 前記再生装置は、
タイマと、前記タイマを管理するタイマ管理部を備え、
前記タイマ管理部は、前記タイマを用いて、ユーザからの操作入力を受け取ってからの経過時間を計測し、計測した経過時間が所定時間になると、タイムアウトの通知を行い、
制御手段による所定の速度レベルでのAV再生は、前記タイマ管理部からのタイムアウト通知により解除される
請求項3記載の再生装置。 - 再生装置は、プレーヤ状態レジスタを備え、
プレーヤ状態レジスタは、現在の再生時点に関するパラメータを格納しており、
前記再生装置は、受付手段がユーザ操作を受け付けた際、プレーヤ状態レジスタにおけるパラメータを参照することで、その受け付け時点における再生装置の状態が、AV再生中であるか否かの判定を行う状態判定手段を備え、
制御手段が所定の速度レベルでのAV再生を再生手段に命じるのは、状態判定手段がAV再生中であると判定した場合のみである
ことを特徴とする請求項3記載の再生装置。 - 前記アプリケーションは、イベントリスナを備え、
イベントリスナには、複数のキーイベントのうち、速度制御の対象となるものが予め登録されており、
予め定められた速度レベルでのAV再生は、
受付手段が受け付けたキーイベントが速度制御の対象となるものとして、予め登録されている場合のみなされる
請求項3記載の再生装置。 - 前記実行手段は、記録媒体に記録されたクラスファイルからインスタンスを生成することで、アプリケーションの実行を行い、
前記記録媒体には、再生速度指示プログラムのクラスファイルが記録されており、
予め定められた速度レベルでのAV再生とは、
再生速度指示プログラムにより指示される速度にて、再生を行うことである
請求項3記載の再生装置。 - 再生手段によるAV再生の対象は、記録媒体に記録されたデジタルストリームであり、
前記デジタルストリームは速度制御情報を有しており、
予め定められた速度レベルとは、
速度制御情報にて規定された速度レベルである
ことを特徴とする請求項3記載の再生装置。 - 速度制御情報は、開始時間及び終了時間を示し、
予め定められた速度レベルでのAV再生を再生手段に命じるのは、
再生装置の状態がAV再生中であって、現在の再生時点が、速度制御情報に示される開始時間に到達した時点以降であり、
前記再生手段が、予め定められた速度レベルでのAV再生の終了を再生手段に命じるのは、
再生装置の状態がAV再生中であって、現在の再生時点が、速度制御情報に示される終了時間に到達した時点以降である
ことを特徴とする請求項9記載の再生装置。 - 前記AV再生の対象は、記録媒体に記録されたタイトルであり、
前記記録媒体には、アプリケーションについてのクラスファイルが記録されていて、
前記実行手段は、仮想マシンのプラットフォームであり、ヒープメモリと、クラスローダと、アプリケーションマネージャとを含み、
前記アプリケーションマネージャは、プラットフォーム上でタイトルバウンダリのアプリケーションシグナリングを実行するものであり、記録媒体における何れかのタイトルの再生が開始されれば、記録媒体に存在するクラスファイルのうち、当該タイトルを生存区間とするもののインスタンスをヒープメモリ上に生成するようクラスローダに命じることで、前記アプリケーションを実行可能な状態とし、
前記受付手段は、ユーザイベントマネージャを含み、
前記ユーザイベントマネージャは、ユーザによってなされた操作のうち、タイトルにおいて有効とされているものに対応するキーイベントを生成して、実行可能な状態にあるアプリケーションに送信するものであり、
前記制御手段による所定の速度レベルでのAV再生の指示は
ユーザによって操作がなされてから、キーイベントが送信されるまでの期間内になされる
ことを特徴とする請求項3記載の再生装置。 - 前記記録媒体には、動作モードオブジェクトが記録されており、
動作モードオブジェクトは、タイトルの再生が開始された際、どのような動作モードで、タイトルにおける動的な制御を実現するかを規定するテーブルであり、アプリケーション管理テーブルと、当該タイトルにおいて有効となるキーを指定するキーインタレストテーブルとを含み、
前記アプリケーションマネージャは、
タイトルの再生が開始された際、そのタイトルに対応付けた動作モードオブジェクトから、アプリケーション管理テーブルを受け取り、このアプリケーション管理テーブルに基づき、アプリケーションシグナリングを実現するものであり、
前記ユーザイベントマネージャは、
タイトルの再生が開始された際、そのタイトルに対応付けた動作モードオブジェクトから、キーインタレストテーブルを受け取り、ユーザにて操作されたキーが、キーインタレストテーブルにおいて、有効とされているキーであるか否かの判定を行い、
前記前記アプリケーションに送信されるキーイベントは、キーインタレストテーブルにおいて有効とされているキーに対応するキーイベントである
ことを特徴とする請求項11記載の再生装置。 - 前記記録媒体には、AVストリームを参照したプレイリスト情報が記録されており、
前記動作モードオブジェクトは、
タイトルの再生が命じられた際、自動的に開始すべきプレイリストを指示するアクセスブルプレイリスト情報を含み、
再生手段によるAV再生は、動作モードオブジェクトにおけるアクセスブルプレイリスト情報にて指示されたプレイリスト情報に基づいてAVストリームを再生することでなされ、
前記所定の速度レベルが、通常の再生速度よりも低い速度を意味するものである場合、AVストリームの再生時間長が長くなり、それに伴いタイトルの時間長も長くなる
ことを特徴とする請求項12記載の再生装置。 - システムLSIであって、
アプリケーションを実行する実行手段と、
再生手段と、
ユーザ操作を受け付ける受付手段と、
制御手段とを備え、
前記制御手段は、
再生手段によるAV再生中に、受付手段がユーザによる操作を受け付けた場合、予め定められた速度レベルでのAV再生を再生手段に命じた上で、ユーザ操作に応じたキーイベントを、アプリケーションに出力する
ことを特徴とするシステムLSI。 - 再生方法であって、
アプリケーションを実行する実行ステップと、
再生ステップと、
ユーザ操作を受け付ける受付ステップと、
制御ステップとを備え、
前記制御ステップは、
再生ステップによるAV再生中に、受付ステップがユーザによる操作を受け付けた場合、予め定められた速度レベルでのAV再生を再生ステップに命じた上で、ユーザ操作に応じたキーイベントを、アプリケーションに出力する
ことを特徴とする再生方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2009501145A JP5065373B2 (ja) | 2007-02-28 | 2008-01-11 | 再生装置、再生方法、システムlsi |
Applications Claiming Priority (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2007049914 | 2007-02-28 | ||
JP2007049914 | 2007-02-28 | ||
PCT/JP2008/050233 WO2008105188A1 (ja) | 2007-02-28 | 2008-01-11 | 再生装置、再生方法、システムlsi |
JP2009501145A JP5065373B2 (ja) | 2007-02-28 | 2008-01-11 | 再生装置、再生方法、システムlsi |
Publications (2)
Publication Number | Publication Date |
---|---|
JPWO2008105188A1 true JPWO2008105188A1 (ja) | 2010-06-03 |
JP5065373B2 JP5065373B2 (ja) | 2012-10-31 |
Family
ID=39721029
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2009501145A Expired - Fee Related JP5065373B2 (ja) | 2007-02-28 | 2008-01-11 | 再生装置、再生方法、システムlsi |
Country Status (5)
Country | Link |
---|---|
US (1) | US8155501B2 (ja) |
EP (1) | EP2051253A4 (ja) |
JP (1) | JP5065373B2 (ja) |
CN (1) | CN101542622A (ja) |
WO (1) | WO2008105188A1 (ja) |
Families Citing this family (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2010226278A (ja) * | 2009-03-23 | 2010-10-07 | Panasonic Corp | 記録装置、方法、プログラム、及び媒体 |
KR20110025123A (ko) * | 2009-09-02 | 2011-03-09 | 삼성전자주식회사 | 비디오 영상 배속 재생 방법 및 장치 |
US9336826B2 (en) * | 2009-10-15 | 2016-05-10 | Sony Corporation | Method for facilitating online interactions initiated using optical disc players |
US8909029B2 (en) * | 2010-10-13 | 2014-12-09 | Sony Corporation | Capturing playback key events in BD players |
US8990303B2 (en) * | 2013-01-31 | 2015-03-24 | Paramount Pictures Corporation | System and method for interactive remote movie watching, scheduling, and social connection |
EP3035872B1 (en) | 2013-08-21 | 2018-03-07 | Laboratoires Bodycad Inc. | Bone resection guide and method of manufacture |
KR102460069B1 (ko) * | 2015-09-30 | 2022-10-28 | 삼성전자주식회사 | 보안 인증 장치 및 보안 인증 방법 |
CN106911953A (zh) | 2016-06-02 | 2017-06-30 | 阿里巴巴集团控股有限公司 | 一种视频播放控制方法、装置及视频播放系统 |
CN106980579B (zh) | 2016-09-30 | 2020-08-14 | 阿里巴巴集团控股有限公司 | 一种图片加载方法及装置 |
EP3904158A4 (en) * | 2018-12-26 | 2022-10-12 | Pioneer Corporation | DISPLAY CONTROL DEVICE, OPERATION DETECTION DEVICE, DISPLAY CONTROL METHOD AND DISPLAY CONTROL PROGRAM |
CN113597756A (zh) * | 2019-03-26 | 2021-11-02 | 索尼集团公司 | 信息处理终端、信息处理方法和程序 |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2001245024A (ja) * | 2000-02-29 | 2001-09-07 | Toshiba Corp | 携帯情報機器及びその制御方法 |
JP2007110388A (ja) * | 2005-10-13 | 2007-04-26 | Funai Electric Co Ltd | 連係動作プログラム及び接続機器 |
Family Cites Families (17)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6292625B1 (en) * | 1996-09-30 | 2001-09-18 | Matsushita Electric Industrial Co., Ltd. | Recording/reproducing method suitable for recording/reproducing AV data on/from disc, recorder and reproducer for the method, information recording disc and information processing system |
JP2000332709A (ja) * | 1999-05-18 | 2000-11-30 | Sony Corp | マルチメディア情報再生装置、及びマルチメディア情報再生方法 |
JP2002101088A (ja) | 2000-09-22 | 2002-04-05 | Toshiba Corp | 有料放送受信システム及びその方法 |
JP2002223408A (ja) | 2001-01-29 | 2002-08-09 | Maspro Denkoh Corp | 再生装置 |
JP2003134472A (ja) | 2001-10-24 | 2003-05-09 | Matsushita Electric Ind Co Ltd | 映像処理装置 |
US7286749B2 (en) * | 2002-04-16 | 2007-10-23 | Canon Kabushiki Kaisha | Moving image playback apparatus, moving image playback method, and computer program thereof with determining of first voice period which represents a human utterance period and second voice period other than the first voice period |
DE602004008923T2 (de) * | 2003-07-11 | 2008-01-17 | Matsushita Electric Industrial Co., Ltd., Kadoma | Aufzeichnungsmedium und -verfahren, wiedergabegerät und -verfahren, und computerlesbares programm |
DK1665769T3 (da) * | 2003-09-12 | 2014-06-30 | Opentv Inc | Fremgangsmåde og system til styring af optagelse og afspilning af interaktive applikationer |
JP2005347797A (ja) * | 2004-05-31 | 2005-12-15 | Orion Denki Kk | 再生装置若しくは記録再生装置、又は、再生装置若しくは記録再生装置を内蔵した映像表示装置 |
CA2572306A1 (en) * | 2004-07-02 | 2006-02-09 | Nielsen Media Research, Inc. | Methods and apparatus for identifying viewing information associated with a digital media device |
JP2006060752A (ja) | 2004-08-24 | 2006-03-02 | Fujitsu Ten Ltd | 再生装置 |
JP4727342B2 (ja) * | 2004-09-15 | 2011-07-20 | ソニー株式会社 | 画像処理装置、画像処理方法、画像処理プログラム及びプログラム格納媒体 |
US20060120698A1 (en) * | 2004-11-04 | 2006-06-08 | Funai Electric Co., Ltd. | Recorder, reproducing device and editor |
JP4479468B2 (ja) | 2004-11-04 | 2010-06-09 | 船井電機株式会社 | 再生装置 |
CA2609967A1 (en) | 2005-05-31 | 2006-12-07 | Matsushita Electric Industrial Co. Ltd. | Recording and reproduction apparatus and recording and reproduction method |
JP2007018623A (ja) | 2005-07-08 | 2007-01-25 | Matsushita Electric Ind Co Ltd | 情報記録媒体、およびその再生装置、再生方法。 |
JP2007322754A (ja) * | 2006-06-01 | 2007-12-13 | Kawai Musical Instr Mfg Co Ltd | キー入力練習装置及びキー入力練習用コンピュータプログラム |
-
2008
- 2008-01-11 CN CNA2008800005328A patent/CN101542622A/zh active Pending
- 2008-01-11 US US12/376,353 patent/US8155501B2/en not_active Expired - Fee Related
- 2008-01-11 WO PCT/JP2008/050233 patent/WO2008105188A1/ja active Application Filing
- 2008-01-11 JP JP2009501145A patent/JP5065373B2/ja not_active Expired - Fee Related
- 2008-01-11 EP EP08703097A patent/EP2051253A4/en not_active Withdrawn
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2001245024A (ja) * | 2000-02-29 | 2001-09-07 | Toshiba Corp | 携帯情報機器及びその制御方法 |
JP2007110388A (ja) * | 2005-10-13 | 2007-04-26 | Funai Electric Co Ltd | 連係動作プログラム及び接続機器 |
Also Published As
Publication number | Publication date |
---|---|
US8155501B2 (en) | 2012-04-10 |
EP2051253A4 (en) | 2010-12-29 |
WO2008105188A1 (ja) | 2008-09-04 |
EP2051253A1 (en) | 2009-04-22 |
CN101542622A (zh) | 2009-09-23 |
US20100034510A1 (en) | 2010-02-11 |
JP5065373B2 (ja) | 2012-10-31 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5065373B2 (ja) | 再生装置、再生方法、システムlsi | |
JP4442564B2 (ja) | 再生装置、再生方法、再生プログラムおよび記録媒体 | |
JP5406044B2 (ja) | 個別販売に用いられる記録媒体、記録装置、再生装置、それらの方法 | |
KR100999743B1 (ko) | 재생장치 | |
JP4241731B2 (ja) | 再生装置、再生方法、再生プログラムおよび記録媒体 | |
KR101237160B1 (ko) | 재생 장치 및 기록 매체 | |
US8200062B2 (en) | Playback apparatus, program, and playback method | |
WO2006059654A1 (ja) | 記録媒体、再生装置、プログラム、再生方法、集積回路 | |
KR100636253B1 (ko) | 재생 방법 | |
WO2005024828A1 (ja) | 再生装置、システム集積回路、プログラム、再生方法、及び、情報記録媒体 | |
JP4880765B2 (ja) | グラフィック情報を管理するデータ構造を有する記録媒体、記録/再生方法、および装置 | |
CN102446524B (zh) | 信息处理设备和信息处理方法 | |
KR101092451B1 (ko) | 그래픽 정보를 관리하기 위한 데이터 구조를 갖는 기록매체와 기록 및 재생 방법 | |
JP4855372B2 (ja) | 再生装置、データ再生方法、制御プログラムおよび記録媒体 | |
US20090022482A1 (en) | Optical disc reproducing apparatus |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20101220 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20120313 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20120510 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20120605 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20120621 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20120717 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20120809 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 5065373 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20150817 Year of fee payment: 3 |
|
LAPS | Cancellation because of no payment of annual fees |