JPH1031663A - 時間事象指定機能を使用したマルチメディア・アプリケーション開発シーケンス・エディタのための方法およびシステム - Google Patents
時間事象指定機能を使用したマルチメディア・アプリケーション開発シーケンス・エディタのための方法およびシステムInfo
- Publication number
- JPH1031663A JPH1031663A JP6821497A JP6821497A JPH1031663A JP H1031663 A JPH1031663 A JP H1031663A JP 6821497 A JP6821497 A JP 6821497A JP 6821497 A JP6821497 A JP 6821497A JP H1031663 A JPH1031663 A JP H1031663A
- Authority
- JP
- Japan
- Prior art keywords
- event
- time
- unique
- generating
- tool
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Classifications
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
- G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
- G11B27/34—Indicating arrangements
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/40—Information retrieval; Database structures therefor; File system structures therefor of multimedia data, e.g. slideshows comprising image and additional audio data
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
- G11B27/02—Editing, e.g. varying the order of information signals recorded on, or reproduced from, record carriers
- G11B27/031—Electronic editing of digitised analogue information signals, e.g. audio or video signals
- G11B27/034—Electronic editing of digitised analogue information signals, e.g. audio or video signals on discs
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Theoretical Computer Science (AREA)
- Data Mining & Analysis (AREA)
- Databases & Information Systems (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Television Signal Processing For Recording (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
- Processing Or Creating Images (AREA)
Abstract
ディア・タイトルのための任意の部品によって起こされ
る任意の事象と同期した特定の時間に、特定の部品のた
めの固有事象を発生させることができる。 【解決手段】 任意の事象の特定の部品を視覚的に指定
し、固有事象を発生させるために特定の時間に特定の部
品上に時間事象指定機能を配置する。固有事象は、開発
者によって直接操作可能なグラフィカル表現として表示
される。さらに、事象指定機能によって所定の繰り返し
間隔で固有事象を開始させることができる。
Description
ータ・ソフトウェアに関し、具体的には使いやすいシー
ケンス・エディタを使用したマルチメディア・タイトル
のために特定の時間に固有事象を発生させる方法および
システムに係わる。
テムに関連して使用される用語であって、時間ベースの
データの1つまたは複数のファイルの処理、すなわち作
成、編集、表示、同期化などを行うソフトウェアを指
す。マルチメディア・コンピュータ・システムは、テキ
スト、グラフィックス、ビデオ、イメージ、アニメーシ
ョン、音声などを様々に組み合わせた様々な材料を表示
するように設計されている。マルチメディア・システム
は一般に、パーソナル・コンピュータ、CD−ROMド
ライブ、ソフトウェア・エディタなどを含むハードウェ
アとソフトウェアの組合せから成る。マルチメディア・
プレゼンテーション用のデータは一般に、磁気ディスク
・ドライブ、ROMコンパクト・ディスク・プレイヤ、
ビデオ・テープ装置などのハードウェア記憶装置に記憶
される。
用するアプリケーション開発者は、エンド・ユーザがマ
ルチメディア・プレゼンテーションの表示と、様々なコ
ントロールの操作を行うことができるようにするプログ
ラムを作成することができる。
者が直面する最も困難な問題の1つは、時間と事象の同
期化である。たとえば、開発者は音声とビデオ・プレゼ
ンテーションとを同期させ、時間の経過につれて現れた
り消えたりするイメージを提供することができなければ
ならない。多くの複雑な現実の例では、2つ以上のマル
チメディア・アイテムが、事象、「相対時間」関係(す
なわちBの前にA、Bの後にA、Bと同時にA)、およ
び「絶対時間」のうちの1つまたは複数のものに基づい
て同期することが望ましい。
は、マクロメディア社の「ディレクター(Direct
or)」である。ディレクターは、フレーム・ベースの
メタファについて時間を指定する。ディレクターではス
コアを使用して、ムービー(またはタイトル)内でいつ
事象を発生させるかを指定する。スコアは、アニメーシ
ョンのセルと、音声またはビデオの再生を開始する標識
とを保持する一連のフレームである。ディレクターでは
事象が線形に指定される。フレームは、手動で前のフレ
ームに戻るようにソフトウェア・コードが作成されてい
ない限り、順序正しく順序づけられる。フレームは、次
々に順次に現れる。たとえばアニメーションを作成する
には、開発者はアニメーション内の各セルをスコア内の
フレームと手動で関連づけなければならない。ものごと
を相対的に発生させる便利な方法はない。2つのアニメ
ーションを同時に発生させる場合、対応するフレームを
1つずつ手動で指定しなければならない。時間ツールを
使用してビデオの再生を指定することができるが、ビデ
オの再生中は他のもの(すなわちアニメーション、他の
ビデオなど)を何も処理することができない。ラップの
ためのポイント・アンド・クリック機構がなく、ラップ
を引き起こすためのコードを作成しなければならない。
いう他の製品は、ビデオ編集製品である。この製品に
は、クリップ(すなわちビデオ、スキャン・イメージ、
QuickTime、ムービー、音声)を操作してムー
ビーを作成するコンストラクション・ウインドウ(C
W)と呼ばれる機能がある。CWはチャネルとタイムラ
インとタイムライ上の目盛りのスケールを調整する時間
単位セレクタとを有する。いくつかのビデオおよびイメ
ージをチャネルに入れ、手動で(すなわちドラッグし
て)絶対時間および他のいくつかの媒体と位置合わせす
る。相対時間または事象時間という概念はなく、位置合
わせ支援同時発生ツールもない。ムービーの作成のため
のラップという概念はない。
uthor(IA))は、時間ベースの媒体、論理、デ
ータベースなどを含むアプリケーションの作成を可能に
するマルチメディア・オーサリング・ツールである。I
Aはフローチャートのメタファを使用してアプリケーシ
ョンを指定する。媒体の再生、データベース・アクセ
ス、比較、割当てなどを表すアイコンをパレットから取
り出して、フローチャートに結びつける。そうすると、
アプリケーション内の処理が、フローチャートに定義さ
れた階層構造を流れる。処理を視覚的に同期させるエデ
ィタはない。同期化は、検査論理と、事象に応答する対
応論理とによって行われる。
間、相対時間、および絶対時間に関してマルチメディア
部品の同期化を簡単に視覚的に実現し、特定の時間に特
定の部品のための固有事象の発生を可能にする方法が必
要である。
明は、コンピュータ・システム上でマルチメディア・タ
イトルのために特定の時間に特定の部品のための固有事
象を発生させる方法および装置を含む。本発明によっ
て、追加コードを作成する必要なしに、特定の選定され
た時間にすでに処理中の事象に追加の事象を挿入するこ
とができる。
システム上でユーザ・インタフェース・ツールが、マル
チメディア・タイトルの任意の部品によって起こされる
任意の事象と同期した特定の時間に特定の部品のための
固有事象を発生させる。基礎事象の基礎部品を視覚的に
構築する。次に、所望の特定の時間に固有事象の開始を
生成するために、その特定の時間に基礎部品上に時間事
象指定機能を配置する。この指定機能は、ユーザによる
直接操作が可能な事象のグラフィカル表現を含む。さら
に、指定機能は固有事象を所定の繰り返し間隔で発生さ
せることができる。
の時間に開始するために前もって構築された事象を他の
事象に付加することができることである。
で本発明が動作するタイプのシステムの一般的アーキテ
クチャ18が示されている。アーキテクチャ18は、以
下に示す構成要素の少なくともいくつか(および場合に
よってはその他の追加構成要素)を含む様々な構成要素
を相互接続する役割を果たすメイン・バス12を含む。
すなわち、CPU 14、浮動小数点ユニット16、バ
ス・コントローラ28、ビデオRAM22、ダイナミッ
クRAM24、スタティックRAM26、ディジタル信
号プロセッサ29、内部ハード・ディスク30、(たと
えばSCSIポート34を介して接続された)外部記憶
装置32、(たとえばイーサネット・ネットワーク38
で通信し、SCSIポート34を介して接続された)外
部ネットワーク装置36、表示装置40(CRTな
ど)、プリンタ42、キーボード46、およびポインテ
ィング・デバイス48(マウス、トラック・ボールな
ど)などの構成要素である。実働コンピュータ・システ
ムにおけるこれらの各構成要素の相互接続と機能は、当
技術分野で周知である。しかし、以下では特定の構成要
素の機能と意味について適宜詳述する。
ェクト指向ソフトウェア設計と一般に呼ばれるソフトウ
ェア・プログラミング環境(アップル・コンピューター
のScriptXなど)を用いて説明するが、本発明の
機能はそのような環境には限定されないことがわかるで
あろう。しかし、本発明のプログラムが動作する1つの
可能な環境の補助として、オブジェクト指向プログラミ
ング環境の特定の該当する詳細を説明する。
は、言語の基本データ構造体はオブジェクトであり、オ
ブジェクトはデータとアクションの両方の指定を含むプ
ログラミング要素である。データは、オブジェクト内に
含まれるインスタンス変数と呼ばれるローカル変数で指
定される。アクション、すなわちメソッドは、これらの
変数に対して作用するサブプログラムである。メソッド
は、1つのオブジェクトからそのオブジェクト自体また
は他のオブジェクトに送られるメッセージによって呼び
出される。
ブジェクト構成体がある。「クラス」は変数とメソッド
の組であり、オブジェクト・タイプのテンプレートと考
えることができる。「インスタンス(またはオブジェク
ト)」は、クラスを特定のランタイム・インスタンスに
したものである。オブジェクトには、そのクラスに定義
されている変数を格納することができる。各インスタン
スは、それらの変数のそのインスタンス独自のバージョ
ンを有する。オブジェクトにメッセージが送られると、
オブジェクトはそのオブジェクトのクラスに定義されて
いるメソッドを調べてメッセージをどのように実行する
かを決定する。
ラスは、階層内のスーパー・クラスと呼ばれるより高い
クラスからすべての変数とメソッドを継承する。継承す
るクラスをスーパー・クラスのサブクラスまたは子クラ
スと呼ぶ。継承クラスは、スーパー・クラスから継承さ
れた変数およびメソッドを、継承クラス内に定義されて
いるかのように使用することができる。サブクラスに複
数のスーパー・クラスがある場合は、各スーパー・クラ
スからすべての変数およびメソッドが継承される。これ
をしばしば複数継承と呼ぶ。
種類ある。第1のタイプは、クラス変数であり、その記
憶は定義するクラスのすべてのインスタンスによって共
有される。クラス変数は一般にクラスとインスタンスの
間の調整に使用される。第2のタイプは、インスタンス
変数であり、特定の各インスタンスに固有の変数であ
る。各インスタンスの各インスタンス変数に別々の記憶
域が割り振られる。
ージが送られたときに実行されるアクションが指定され
る。メッセージがオブジェクトに送られると、メッセー
ジ名がそのオブジェクトのために定義されているメソッ
ド名と照合される。実際に実行されるメソッドは、その
オブジェクトのクラス階層の最下層に定義されているメ
ッセージと同じ名前を持つメソッドである。
る。メッセージが送られると、そのメッセージのメソッ
ドを探し出す前に実際のすべてのパラメータが完全に評
価される。メソッドはメッセージ内の実際のパラメータ
に対応する仮パラメータと、一時変数とを有する。一時
変数は、メッセージを実行するときに作成することがで
き、メソッドが実行されている間、そのメソッドの範囲
内でのみ使用可能である。
をおくることによって実行され、そのオブジェクトがオ
ブジェクトのクラス内またはクラス階層内のメソッドを
呼び出す。多くの場合、メソッドは他のオブジェクトに
メッセージを送り、他のメソッドを呼び出す。一般に、
各メソッドは送り側に結果を返す。多くの言語、特にオ
ブジェクト指向言語の中心には、メッセージの解釈と評
価を行い、メソッドが他のメソッドを呼び出す場合に返
す場所を追跡するプログラム・セグメントがある。
多くのプログラム言語を使用して実現することができ
る。オブジェクト指向環境の一般的な例としては、C+
+環境、Smalltalk環境、およびScript
X環境がある。
ム・コードは、典型的には内部ハード・ディスク30な
どのメモリに記憶され、そこから開発者がコードにアク
セスすることができる。配布のために、このソフトウェ
ア・プログラム・コードは、データ処理システムと共に
使用するようにディスケットまたはCD−ROMなどの
様々な周知の媒体のいずれかの媒体上に実現すること
も、そのような他のシステムのユーザが使用するように
何らかのタイプのネットワークで他のコンピュータ・シ
ステムに配布することもできる。ソフトウェア・コード
を媒体上に実現したりソフトウェア・コードを配布した
りするこのような技法および方法は公知であり、本明細
書では詳述しない。
いし図17を参照しながら説明する。前述のように、マ
ルチメディアを組み込んだアプリケーションの作成者が
直面する最も困難な問題の1つは、時間と事象の同期化
の問題である。その一例は、アプリケーションが以下の
タイプの処理を必要とする場合である。1)押しボタン
を押すとアニメーションが再生される、2)アニメーシ
ョンの進行中に1つの音声も再生する、3)アニメーシ
ョンと音声の同時終了時に、ビデオが再生され、その後
半が前半の2倍の速度で再生される、4)前記1〜3と
は独立して、押しボタンを押した10秒後にイメージが
現れ、画面を横切って移動しながら20秒間継続して表
示された後、消える、5)ビデオが開始してすぐに終了
押しボタンが表示画面上に現れる。
必要とする現実の世界の一例は、自動車サービス・セン
ターの研修生向けのコンピュータ・ベースのトレーニン
グ・アプリケーション(マルチメディア・タイトル30
0)である。研修生はコンピュータ上の任意の部品であ
る押しボタン302をクリックして、前もって選択した
自動車部品の組立方法に関する情報を表示する。任意の
事象、すなわち押しボタンのクリックによって、互いに
接続された自動車部品のサブコンポーネントを示して研
修生が構成部品がどのように組み立てられるかを学習す
るようになっているアニメーション部品シーケンス30
6から始まる時間同期化された処理304のシーケンス
がトリガされる。このアニメーションと同時に実行され
る音声再生機能(音声部品308)は、組立工程が行わ
れる様子の口頭説明である。このアニメーションと音声
が完了すると、全体像を示すためと研修生の背景知識を
完全にするために組立て済み自動車部品の360度の外
観を示すビデオ(ビデオ部品310)が再生される。時
間上の制約により、ビデオの後半は前半の2倍の速度で
再生される。上記の処理とは独立して、イメージ(イメ
ージ部品312)がアニメーションの再生に入って10
秒間表示され、ムービーが20秒間画面を横切る。この
イメージは研修生を励ます歓迎メッセージである。やは
り上記の処理とは独立して、ビデオの再生後すぐに、画
面の最下部に終了押しボタン(押しボタン部品314)
が現れ、研修生は理解を深めるのにビデオは不要である
とみなした場合にビデオを終了させることができる。
発明によるシーケンス・エディタを提供する。このシー
ケンス・エディタは、ユーザが相対時間と絶対時間と事
象時間とを使いやすい方式で相互に同期させることがで
きるようにする機構である。この解決策は、同期させる
アイテム(アニメーション、ビデオ、音声、イメージな
ど)をユーザが前もって特定し、選択していることを前
提とする。同期させるこれらのタイプのアイテムを選択
することができるようにするいくつかのツールがあり、
詳しい説明は不要である。
法は事象から始まる。事象は予測不能であり、ランダム
に発生することが多い。事象はユーザ対話またはその他
の非同期活動によって発生させることができる。事象の
例としては、押しボタンのクリック、ビデオ再生の完
了、ある絶対時間への到達、エラー条件の発生がある。
事象は、プログラム作成者によって定義され、何らかの
物の何らかの発生の通知である。シーケンス・エディタ
は、その時間ベースの指定を事象によって編成する。言
い換えると、ユーザは時間ベースの処理のシーケンスを
開始する事象を指定する。以下の例では、事象は押しボ
タンのクリック(選択)であり、時間ベースの処理はア
ニメーションと媒体関連の再生である。
ィタ画面60が示されている。タイトル・バー62のす
ぐ下にツールバー64がある。ツールバー64には、同
時開始ツール66、同時終了ツール68、同時発生ツー
ル70、および接合ツール72を含む複数の便宜ツール
がある。
るようにして選択した部品を正確に同時に開始させるこ
とができる。同様に、同時終了ツール68を使用する
と、部品を正確に同時に終了させることができる。同時
発生ツール70によって、部品を正確に同時に開始さ
せ、終了させることができ、接合ツール72によって1
つの部品を他の部品の終了時にただちに開始させること
ができる。これらのツールの使用法については、以下で
詳述する。ツールバー64の下には、部品スタータ74
と事象スタータ76がある。スクロール矢印78および
80をそれぞれクリックすることによって、適切な任意
の部品と適切な任意の事象を選択するためのドロップ・
ダウン・ボックスが表示される。
び76の下に、ズーマ82とタイムライン84がある。
ズーマ82によってタイムライン84上の各目盛り間隔
の時間値を設定することができる。スライダ86を移動
させることによって、目盛り間隔設定値を選択すること
ができる。図2に示すように、この目盛り間隔設定値は
0.5秒である。したがって、タイムライン84の各目
盛り間隔は0.5秒を表す。
るための複数の調整可能なドラッグ・アンド・ドロップ
・ツールがある。再生スペーサ88によって、開発者は
時間ベースの媒体部品(すなわち処理)を再生する時間
の長さを示すことができる。隠蔽スペーサ90を使用し
て、普通なら表示されることになる部品を隠す。移動ス
ペーサ92は、再生または表示を続けながらオブジェク
トを経路に従って移動させる。速度スペーサ96は、ス
ペーサの時間の長さの間、媒体が再生される速度を変更
する。
る。時間事象指定機能98は、以下で詳述するように、
特定の時点で発生させる事象を指定する。定期的時間事
象指定機能94は、特定の時点とその後間隔を置いて発
生させる事象を指定する。
る場面上の部品の準備場所として使用される。シーケン
ス・エディタ画面60に示すように、ブルペン100に
は場面1の部品が格納されている。
能チャネル102、104、106、108、および1
10がある。各表示可能チャネル102〜110には、
サムネイル領域112、114、116、118、およ
び120が対応している。サムネイル領域は、シーケン
ス・エディタによって同期化する部品を配置するために
使用される。表示可能チャネルは、該当するサムネイル
領域内の部品が表示または再生される期間を指定するた
めに使用される。
使用して、アプリケーション開発者が作成するマルチメ
ディア・アプリケーションの現実の例について説明す
る。この例は、押しボタンを押してアニメーション(自
動車部品のサブコンポーネントを互いに接続する様子を
示すアニメーション)を再生するものである。アニメー
ションの進行中、1つの音声(組立工程がどのように行
われるかという口頭説明と音楽)も再生される。このア
ニメーションと音声の終了と同時に、ビデオ(全体像を
示すためと研修生の背景知識を完全にするための完成部
品の360度の外観)が再生される。ビデオの後半は、
前半の2倍の速度で再生される。それとは独立して、押
しボタンを押した後10秒後にイメージが現れ、そのま
ま表示され続けて20秒間画面を横切って移動した後、
消える(歓迎メッセージ)。ビデオの開始後まもなく、
表示画面上に終了ボタンが表示される(研修生が不要と
みなした場合にビデオを終了させることができるように
する)。
2秒間の間隔を設定している。したがって、タイムライ
ン84上の各目盛りマークは2秒を示し、それより大き
な各目盛りマーク120は10秒を、最も大きな各目盛
りマーク122は20秒を示すことになる。また開発者
は、ブルペン100からアニメーション部品124をド
ラッグし、サムネイル領域112にドロップしている。
アニメーション部品124をサムネイル領域112に入
れると、表示可能チャネル102(図2参照)が表示ブ
ロック103に変更され、アニメーション部品124を
タイムライン84の全長にわたって表示することができ
ることが示される。
再生領域131が示すように、再生ツール88が表示ブ
ロック103にドラッグされ、ドロップされている。サ
イズ・ハンドル132をドラッグしてタイムライン84
上の100秒の目盛りマーク134の下に揃えることに
よって、アニメーション再生機能が押しボタンをクリッ
クした瞬間から100秒の絶対時間が経過するまで再生
されることがわかる。
声再生機能部品140がドラッグされ、サムネイル領域
114にドロップされている。アニメーション再生機能
124を参照しながら前述したように、音声再生機能1
40をサムネイル領域114にドロップすると、表示可
能ブロック105が表示可能チャネル104(図2)に
入れられる。表示可能ブロック105は、タイムライン
84の全長にわたって延びている。非可視タイム・ベー
ス媒体部品(すなわち音声)の場合、表示可能とはその
部品が再生可能であることを意味する。
再生領域143が示すように、再生ツール88が表示可
能ブロック105にドラッグされ、ドロップされてい
る。1つの音声は有限期間のあいだ再生されるため、音
声再生機能部品140は約30秒間の概算存続期間を有
することがわかる。以下で詳述するように、この例では
音声をアニメーションと終始同時に発生させることを意
図している。本発明はそのような同期化をいくつかの単
純なステップによって可能にする。
デオ再生機能部品150がドラッグされ、サムネイル領
域116にドロップされている。前と同様に、表示可能
チャネル106(図2)が、タイムライン84全長にわ
たって表示ブロック107を示すように変更されてい
る。再生アイコン152と再生領域153が示すよう
に、再生ツール88が表示ブロック107(図8)にド
ラッグされ、ドロップされている。音声再生機能部品1
40の音声部分の場合のように、ビデオ再生機能部品は
有限の長さを有し、したがって再生領域153として図
示されている指定された時間のあいだ再生される。
0からイメージ1部品160を選択してサムネイル領域
118にドロップしている。表示可能チャネル108が
タイムライン84全長にわたって表示ブロック109に
変更される。
ションと音声が同時に開始し、停止した。本発明を使用
することによって、開発者はこれが簡単に行われるよう
にすることができる。図10を参照すると、まずアニメ
ーション再生機能の再生領域131を選択し、次に音声
再生機能の再生領域143を選択し、次に同時発生ツー
ル70を選択することによって、アニメーション再生機
能部品と音声再生機能部品とが同時に開始し、停止す
る。音声の長さは約30秒しかなかったため、音声はア
ニメーションの100秒間の長さに達するまで繰り返し
再生されなければならないのは明らかである。
ョンが終了すると直ちにビデオが開始されることになっ
ている。したがって、開発者はまずアニメーション再生
機能再生領域131を選択し、次にビデオ再生機能再生
領域153を選択し、最後に接合ツール72を選択す
る。このようにすることによって、開発者は簡単かつ迅
速に、アニメーションの終結と同時にビデオが開始され
るようにしたことになる。
の重要な実施態様が含まれる。これらのツールによっ
て、1)絶対時間、2)相対時間、および3)事象駆動
時間の3つのタイプの時間位置合わせの自動実現が可能
になる。背景知識として、絶対時間(aT)、相対時間
(rT)、および事象駆動時間(eT)について詳述す
ればわかりやすいであろう。絶対時間(aT)とは、固
定した始点を有する時間である。絶対時間は最初はいず
れかの相対時間(rT)またはいずれかの事象駆動時点
(eT)からのオフセットとして指定することができる
が、aTは本明細書ではタイムライン上の目盛りマーク
を基準にして明示的に指定する。特定の時間シーケンス
を仮定すれば、aTは他の部品とは独立して宣言され
る。相対時間(rT)は他の何らかの1つの部品(また
は複数の部品)を基準とした始点(または終点あるいは
その両方)を有する時間である。相対時間(rT)は、
他の何らかのオカレンスの開始または終了を基準として
明示的に指定され、その特定の値は未知であるかまたは
宣言されない。事象駆動時間(eT)は、何らかの事象
のオカレンスによって定義される始点を有し、その事象
は時間と何らかの関係を有していてもいなくてもよい。
事象は押しボタンの選択によるユーザ対話またはエラー
条件の場合がある。無限の数の事象タイプがある。eT
と同期させる部品の指定の後に、その時間が発生する時
点を判断することはできない。その時間はその事象が発
生したときに発生する。本明細書では、「適切な部品動
作を開始する」とは、部品を時間ベースの媒体部品のタ
イプにとって適切な仕方で、たとえば表示または再生さ
せることを意味する。適切な部品動作は、開発者が希望
する任意の動作を含むことができるものと理解された
い。
ールを使用した音声とアニメーションの同期は、アニメ
ーションを基準にした音声の開始rTと終了rTの両方
の指定の実現である。接合ツールを使用したビデオとア
ニメーションの同期は、アニメーションの終了時間を基
準としたビデオの開始rTの指定の実現である。
ン上の30秒の絶対時間マークでのイメージの消去の同
期は、タイムライン上の絶対時間を基準としたイメージ
消去の開始aTの指定の実現である。この指定は、隠蔽
ブロック開始時間を30秒の目盛りマークに明示的にド
ラッグすることによって実現される。
の処理のシーケンス全体の開始は、部品スタータ・ドロ
ップ・ダウン・リストおよび事象スタータ・ドロップ・
ダウン・リストによって指定された、押しボタン部品の
クリックされた事象の選択という未知の時間に始まる。
1部品160を同期させる必要がある。この例では、イ
メージ1部品160はアニメーションの開始から10秒
後に現れ、画面を横切って移動しながら20秒間表示さ
れた状態を維持してから消える必要がある。したがっ
て、隠蔽アイコン180と隠蔽領域181によって示さ
れているように、開発者は隠蔽スペーサ90をドラッグ
して表示ブロック109にドロップする。便宜上、図の
例は10秒という所定の値の隠蔽領域幅を有する。した
がって、隠蔽アイコン180によって、イメージ1部品
160はアニメーションの開始後必要な10秒間、隠蔽
されることになる。隠蔽アイコン182によって示され
ているように、開発者は次に他の隠蔽スペーサ90をグ
ラブして表示ブロック109上にドロップする。次に、
サイズ・ハンドル184をグラブし、ラップ・コラル1
86までドラッグすることによって、隠蔽領域183が
示すように、イメージ1部品160は20秒間表示され
た後で消え、再表示されないようになる。本発明ではラ
ップ・コラルは無限大とみなすことができる。ラップ・
コラルを使用することによって、開発者は表示ブロック
または再生ブロックの終了時間を「フック」することが
でき、したがってそのブロックを無限大まで継続させる
ことができる。
修生に対する歓迎メッセージであるイメージを、表示さ
れている20秒の間左から右に画面を横切って直線に移
動させる必要がある。これを行うために、アイコン21
0と領域211(図14)が示すように、開発者はツー
ルのパレットから移動スペーサ92を選択し、表示可能
ブロック109上にドロップすることになる。この時、
表示可能ブロック109(図12)は、10秒の絶対時
間から30秒の絶対時間までの領域211として示され
ている。当然、このシーケンスはクリックされた事象の
事象時間を基準としている。移動スペーサ領域211の
開始(左縁)を10秒の絶対時間にドラッグする。移動
スペーサ領域211(サイズ・ハンドル)の終了時間
(右縁)を30秒の絶対時間までドラッグする。これで
この移動スペーサ領域211は、その時間の進行中(す
なわちaT10からaT30まで)、このイメージが表
示されるだけでなく、何らかの経路に従って移動するこ
とを示している。アニメーションおよびコンピュータ・
グラフィックスの技術分野の知識を有する者には、この
ような経路を定義する多くの周知の機構がある。たとえ
ばマクロメディア社の「ディレクター」の場合は、その
手引き書の113ページと114ページで、そのツール
のユーザがイメージの移動の経路を指定することができ
る指定技法について説明している。本明細書には移動指
定技法における新規性の請求項はない。その結果とし
て、移動スペーサ・アイコンをイメージの表示可能ブロ
ック上に配置した後はそのアイコンを「ダブル・クリッ
クする」ことによって、ユーザは画面上を横切って移動
するイメージの移動経路を指定することができるものと
みなす。本発明における独自性は、いったん経路を指定
した後は、本発明のシーケンス・エディタが、移動スペ
ーサが占有している時間の長さと画面を横切る移動とを
同期させる使いやすい機構を提供していることである。
90が示すように、開発者は時間事象指定機能98をビ
デオ再生領域153にドラッグし、ドロップする。次
に、その上に時間事象指定機能アイコン190(任意の
固有事象)を正しく配置することによって、開発者は所
望の時間に別の固有事象をトリガすることができる。次
にこの固有事象は、別のシーケンスを発生させるか、ま
たはこの現実の例のように他の何らかの処理に押しボタ
ンを表示させて、それによって希望する場合にビデオを
終了させることができるようにする。
3の事象指定機能が図示されている。図16を参照しな
がら前述したように、マルチメディア・タイトル300
を作成する。開発者は、固有の任意の事象324によっ
て新しい任意のシーケンス320または新しい任意の部
品322を生成する(すなわち特定の時間に事象指定機
能に遭遇する)ことを希望している。したがって、前述
のようにして事象指定機能によって固有事象の生成が可
能になる。
度の2倍の速度で再生させたい場合がある。これは、カ
リキュラムに課された時間要件のために必要となること
がある。これを行うために、アイコン220と領域22
2が示すように、開発者はツールのパレットから速度ス
ペーサ96(図15参照)を選択してビデオ再生領域1
53上にドロップする。通常のドラッグ技法とサイズ・
ハンドルを使用して、ビデオ再生領域153の後半を占
めるように領域222を調整する。本発明の一部ではな
いが、開発者は次に、たとえば速度スペーサ・アイコン
220をダブル・クリックすることができ、開発者に必
要な速度を問い合わせるダイアログ・ボックスが表示さ
れるようにすることもできる。これでビデオの後半が新
しい速度で再生されることになる。
イトル開発者のためにこれまでになかった使い易さを提
供する。開発者には、使い易いビジュアル・インタフェ
ース・タイプのアプリケーションで、同期化されたマル
チメディア・タイトルを作成するのに必要なすべてのツ
ールが与えられる。開発者に高い柔軟性を与えることが
できる絶対時間、相対時間、または事象時間あるいはそ
れらの組合せを使用して、事象と部品を同期させること
ができる。本明細書で教示されているように、シーケン
ス・エディタは、開発者が、従来利用可能であったデー
タ・フローまたはユーザ・インタフェースの視野ではな
く、マルチメディア・タイトルの時間構造の視野からマ
ルチメディア・タイトルを見ることができるようにす
る。
施例に関して説明したが、当業者なら様々な変更および
修正が思いつくであろうし、本発明はそのような変更お
よび修正も特許請求の範囲に入るものとして含むことを
意図している。
の事項を開示する。
チメディア・タイトルのための任意の部品によって起こ
された任意の事象と同期した特定の時間に特定の部品の
ための固有事象を発生させるユーザ・インタフェース・
ツールであって、特定の部品を視覚的に指定する手段
と、固有事象を発生するために特定の時間に特定の部品
上に配置する時間事象指定機能とを含むツール。 (2)特定の部品を視覚的に指定する前記手段が、その
時間構造によって複数の部品の一覧関係視覚レイアウト
を可能にするユーザ・インタフェースを含むことを特徴
とする、上記(1)に記載のツール。 (3)前記指定機能が、固有事象を所定の繰り返し間隔
で発生させる手段をさらに含むことを特徴とする、上記
(1)に記載のツール。 (4)前記時間事象指定機能が、ユーザによって直接操
作可能なグラフィカル表現をさらに含むことを特徴とす
る、上記(1)に記載のツール。 (5)コンピュータ・システム上で、マルチメディア・
タイトルのための任意の部品によって起こされた任意の
事象と同期した特定の時間に特定の部品のための固有事
象を発生させる方法であって、特定の部品を視覚的に指
定するステップと、固有事象を発生させるために特定の
時間に特定の部品上に時間指定機能を配置するステップ
とを含む方法。 (6)特定の部品を視覚的に指定する前記ステップが、
その時間構造によって複数の部品の一覧関係視覚レイア
ウトを可能にするユーザ・インタフェースを提供するス
テップを含むことを特徴とする、上記(5)に記載の固
有事象を発生させる方法。 (7)特定の部品上に時間事象指定機能を配置する前記
ステップが、固有事象を所定の繰り返し間隔で発生させ
るステップをさらに含むことを特徴とする、上記(5)
に記載の固有事象を発生させる方法。 (8)特定の部品上に時間事象指定機能を配置する前記
ステップが、前記時間事象指定機能のグラフィカル表現
を直接操作するステップをさらに含むことを特徴とす
る、上記(5)に記載の固有事象を発生させる方法。 (9)コンピュータ・システム上でマルチメディア・タ
イトルのための任意の部品によって起こされた任意の事
象と同期した特定の時間に特定の部品のための固有事象
を発生させるコンピュータ可読媒体上に記録されたコン
ピュータ・プログラム製品であって、特定の部品を視覚
的に指定する手段と、固有事象を発生するために特定の
時間に特定の部品上に配置する時間事象指定機能とを含
む製品。 (10)特定の部品を視覚的に指定する前記手段が、そ
の時間構造によって複数の部品の一覧関係視覚レイアウ
トを可能にするユーザ・インタフェースを含むことを特
徴とする、上記(9)に記載のコンピュータ可読媒体上
に記録されたコンピュータ・プログラム製品。 (11)前記指定機能が、固有事象を所定の繰り返し間
隔で発生させる手段をさらに含むことを特徴とする、上
記(9)に記載のコンピュータ可読媒体上に記録された
コンピュータ・プログラム製品。 (12)前記時間事象指定機能が、ユーザによって直接
操作可能なグラフィカル表現をさらに含むことを特徴と
する、上記(9)に記載のコンピュータ可読媒体上に記
録されたコンピュータ・プログラム製品。
ュータ・システムの一般的コンピュータ・アーキテクチ
ャを示す図である。
ある。
る。
る。
ある。
ある。
た様子を示す図である。
ある。
る。
使用とを示す略図である。
Claims (12)
- 【請求項1】コンピュータ・システム上で、マルチメデ
ィア・タイトルのための任意の部品によって起こされた
任意の事象と同期した特定の時間に特定の部品のための
固有事象を発生させるユーザ・インタフェース・ツール
であって、 特定の部品を視覚的に指定する手段と、 固有事象を発生するために特定の時間に特定の部品上に
配置する時間事象指定機能とを含むツール。 - 【請求項2】特定の部品を視覚的に指定する前記手段
が、 その時間構造によって複数の部品の一覧関係視覚レイア
ウトを可能にするユーザ・インタフェースを含むことを
特徴とする、請求項1に記載のツール。 - 【請求項3】前記指定機能が、固有事象を所定の繰り返
し間隔で発生させる手段をさらに含むことを特徴とす
る、請求項1に記載のツール。 - 【請求項4】前記時間事象指定機能が、ユーザによって
直接操作可能なグラフィカル表現をさらに含むことを特
徴とする、請求項1に記載のツール。 - 【請求項5】コンピュータ・システム上で、マルチメデ
ィア・タイトルのための任意の部品によって起こされた
任意の事象と同期した特定の時間に特定の部品のための
固有事象を発生させる方法であって、 特定の部品を視覚的に指定するステップと、 固有事象を発生させるために特定の時間に特定の部品上
に時間指定機能を配置するステップとを含む方法。 - 【請求項6】特定の部品を視覚的に指定する前記ステッ
プが、 その時間構造によって複数の部品の一覧関係視覚レイア
ウトを可能にするユーザ・インタフェースを提供するス
テップを含むことを特徴とする、請求項5に記載の固有
事象を発生させる方法。 - 【請求項7】特定の部品上に時間事象指定機能を配置す
る前記ステップが、 固有事象を所定の繰り返し間隔で発生させるステップを
さらに含むことを特徴とする、請求項5に記載の固有事
象を発生させる方法。 - 【請求項8】特定の部品上に時間事象指定機能を配置す
る前記ステップが、 前記時間事象指定機能のグラフィカル表現を直接操作す
るステップをさらに含むことを特徴とする、請求項5に
記載の固有事象を発生させる方法。 - 【請求項9】コンピュータ・システム上でマルチメディ
ア・タイトルのための任意の部品によって起こされた任
意の事象と同期した特定の時間に特定の部品のための固
有事象を発生させるコンピュータ可読媒体上に記録され
たコンピュータ・プログラム製品であって、 特定の部品を視覚的に指定する手段と、 固有事象を発生するために特定の時間に特定の部品上に
配置する時間事象指定機能とを含む製品。 - 【請求項10】特定の部品を視覚的に指定する前記手段
が、 その時間構造によって複数の部品の一覧関係視覚レイア
ウトを可能にするユーザ・インタフェースを含むことを
特徴とする、請求項9に記載のコンピュータ可読媒体上
に記録されたコンピュータ・プログラム製品。 - 【請求項11】前記指定機能が、 固有事象を所定の繰り返し間隔で発生させる手段をさら
に含むことを特徴とする、請求項9に記載のコンピュー
タ可読媒体上に記録されたコンピュータ・プログラム製
品。 - 【請求項12】前記時間事象指定機能が、 ユーザによって直接操作可能なグラフィカル表現をさら
に含むことを特徴とする、請求項9に記載のコンピュー
タ可読媒体上に記録されたコンピュータ・プログラム製
品。
Applications Claiming Priority (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| US08/622,906 US5758093A (en) | 1996-03-29 | 1996-03-29 | Method and system for a multimedia application development sequence editor using time event specifiers |
| US08/622906 | 1996-03-29 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JPH1031663A true JPH1031663A (ja) | 1998-02-03 |
| JP4064489B2 JP4064489B2 (ja) | 2008-03-19 |
Family
ID=24495989
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP06821497A Expired - Fee Related JP4064489B2 (ja) | 1996-03-29 | 1997-03-21 | 時間事象指定機能を使用したマルチメディア・アプリケーション開発シーケンス・エディタのための方法およびシステム |
Country Status (2)
| Country | Link |
|---|---|
| US (1) | US5758093A (ja) |
| JP (1) | JP4064489B2 (ja) |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2001125925A (ja) * | 1999-10-29 | 2001-05-11 | Jisedai Joho Hoso System Kenkyusho:Kk | 構造表示方法およびその方法をコンピュータに実行させるプログラムを記録したコンピュータ読み取り可能な記録媒体 |
| US7398002B2 (en) | 2001-06-28 | 2008-07-08 | Corel Tw Corp. | Video editing method and device for editing a video project |
Families Citing this family (38)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US5930501A (en) * | 1996-09-20 | 1999-07-27 | Neil; John M. | Pictorial user interface for establishing time of day and geographical or environmental context on a computer display or other monitor |
| US6111567A (en) * | 1997-04-03 | 2000-08-29 | Microsoft Corporation | Seamless multimedia branching |
| US6031529A (en) * | 1997-04-11 | 2000-02-29 | Avid Technology Inc. | Graphics design software user interface |
| US7284187B1 (en) * | 1997-05-30 | 2007-10-16 | Aol Llc, A Delaware Limited Liability Company | Encapsulated document and format system |
| US6091427A (en) * | 1997-07-18 | 2000-07-18 | International Business Machines Corp. | Method and system for a true-scale motion path editor using time segments, duration and synchronization |
| US6069623A (en) * | 1997-09-19 | 2000-05-30 | International Business Machines Corporation | Method and system for the dynamic customization of graphical user interface elements |
| US6400378B1 (en) * | 1997-09-26 | 2002-06-04 | Sony Corporation | Home movie maker |
| US6317760B1 (en) | 1998-01-14 | 2001-11-13 | Microsoft Corporation | Extensible ordered information within a web page |
| US6266053B1 (en) * | 1998-04-03 | 2001-07-24 | Synapix, Inc. | Time inheritance scene graph for representation of media content |
| US8220017B1 (en) * | 1998-04-30 | 2012-07-10 | International Business Machines Corporation | System and method for programmatic generation of continuous media presentations |
| JP2000099441A (ja) * | 1998-09-25 | 2000-04-07 | Fujitsu Ltd | 情報を調整して提示する情報提示装置および方法 |
| US6320600B1 (en) | 1998-12-15 | 2001-11-20 | Cornell Research Foundation, Inc. | Web-based video-editing method and system using a high-performance multimedia software library |
| US8046688B2 (en) * | 2001-06-15 | 2011-10-25 | Sony Corporation | System for and method of adjusting tempo to match audio events to video events or other audio events in a recorded signal |
| US6904561B1 (en) * | 2001-07-19 | 2005-06-07 | Microsoft Corp. | Integrated timeline and logically-related list view |
| US20030023641A1 (en) * | 2001-07-27 | 2003-01-30 | Gorman William Phillip | Web page authoring tool |
| US6806879B2 (en) * | 2001-10-17 | 2004-10-19 | Avid Technology, Inc. | Manipulation of motion data in an animation editing system |
| US7503059B1 (en) * | 2001-12-28 | 2009-03-10 | Rothschild Trust Holdings, Llc | Method of enhancing media content and a media enhancement system |
| US7711774B1 (en) | 2001-11-20 | 2010-05-04 | Reagan Inventions Llc | Interactive, multi-user media delivery system |
| US8909729B2 (en) * | 2001-11-20 | 2014-12-09 | Portulim Foundation Llc | System and method for sharing digital media content |
| US8504652B2 (en) * | 2006-04-10 | 2013-08-06 | Portulim Foundation Llc | Method and system for selectively supplying media content to a user and media storage device for use therein |
| US20070022465A1 (en) * | 2001-11-20 | 2007-01-25 | Rothschild Trust Holdings, Llc | System and method for marking digital media content |
| US8122466B2 (en) * | 2001-11-20 | 2012-02-21 | Portulim Foundation Llc | System and method for updating digital media content |
| US20040205480A1 (en) * | 2001-12-21 | 2004-10-14 | G.E. Information Services, Inc. | Auto-expiring picture internet control |
| CA2457602A1 (en) * | 2003-02-19 | 2004-08-19 | Impatica Inc. | Method of synchronizing streams of real time data |
| US7512886B1 (en) | 2004-04-15 | 2009-03-31 | Magix Ag | System and method of automatically aligning video scenes with an audio track |
| US20080141180A1 (en) * | 2005-04-07 | 2008-06-12 | Iofy Corporation | Apparatus and Method for Utilizing an Information Unit to Provide Navigation Features on a Device |
| US8078740B2 (en) | 2005-06-03 | 2011-12-13 | Microsoft Corporation | Running internet applications with low rights |
| US8185737B2 (en) | 2006-06-23 | 2012-05-22 | Microsoft Corporation | Communication across domains |
| US20090327896A1 (en) * | 2008-06-27 | 2009-12-31 | Microsoft Corporation | Dynamic media augmentation for presentations |
| US8626322B2 (en) * | 2008-12-30 | 2014-01-07 | Apple Inc. | Multimedia display based on audio and visual complexity |
| US8621357B2 (en) * | 2008-12-30 | 2013-12-31 | Apple Inc. | Light table for editing digital media |
| US8832555B2 (en) * | 2008-12-30 | 2014-09-09 | Apple Inc. | Framework for slideshow object |
| US8443285B2 (en) | 2010-08-24 | 2013-05-14 | Apple Inc. | Visual presentation composition |
| US9753619B2 (en) * | 2013-03-08 | 2017-09-05 | Thomas Creative Group Productions, Llc | Interactive presentation system |
| US10191722B1 (en) | 2017-10-23 | 2019-01-29 | Microsoft Technology Licensing, Llc | Event synchronization for development computing system |
| JP2022152630A (ja) * | 2021-03-29 | 2022-10-12 | パナソニックIpマネジメント株式会社 | オンライン映像配信支援方法およびオンライン映像配信支援装置 |
| US11860931B1 (en) * | 2022-07-11 | 2024-01-02 | Truist Bank | Graphical user interface with insight hub and insight carousel |
| US12231715B2 (en) * | 2023-05-08 | 2025-02-18 | Apple Inc. | Video editing and key-framing animations using accessory on a touch device |
Family Cites Families (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2861619B2 (ja) * | 1991-07-12 | 1999-02-24 | 松下電器産業株式会社 | 情報提示装置及び提示情報作成装置 |
| US5596696A (en) * | 1993-05-10 | 1997-01-21 | Object Technology Licensing Corp. | Method and apparatus for synchronizing graphical presentations |
-
1996
- 1996-03-29 US US08/622,906 patent/US5758093A/en not_active Expired - Lifetime
-
1997
- 1997-03-21 JP JP06821497A patent/JP4064489B2/ja not_active Expired - Fee Related
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2001125925A (ja) * | 1999-10-29 | 2001-05-11 | Jisedai Joho Hoso System Kenkyusho:Kk | 構造表示方法およびその方法をコンピュータに実行させるプログラムを記録したコンピュータ読み取り可能な記録媒体 |
| US7398002B2 (en) | 2001-06-28 | 2008-07-08 | Corel Tw Corp. | Video editing method and device for editing a video project |
Also Published As
| Publication number | Publication date |
|---|---|
| JP4064489B2 (ja) | 2008-03-19 |
| US5758093A (en) | 1998-05-26 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP4064489B2 (ja) | 時間事象指定機能を使用したマルチメディア・アプリケーション開発シーケンス・エディタのための方法およびシステム | |
| JP3378759B2 (ja) | スペーサ・ツールを使用したマルチメディア・アプリケーション開発シーケンス・エディタのための方法およびシステム | |
| JPH1031662A (ja) | 同期ツールを使用したマルチメディア・アプリケーション開発シーケンス・エディタのための方法およびシステム | |
| US5889519A (en) | Method and system for a multimedia application development sequence editor using a wrap corral | |
| EP0695446B1 (en) | Multimedia synchronization system | |
| US5640560A (en) | CD-ROM content repurposing | |
| US5751281A (en) | Apparatus and method for storing a movie within a movie | |
| US5596696A (en) | Method and apparatus for synchronizing graphical presentations | |
| US5537529A (en) | Apparatus and method for creating versions of computer models and creating communications incorporating created versions therefrom | |
| US8271962B2 (en) | Scripted interactive screen media | |
| JP3943635B2 (ja) | コンピュータ制御型ディスプレイシステムにおいてセッションの再生ポイントを制御する方法 | |
| US9110688B2 (en) | System and method for representation of object animation within presentations of software application programs | |
| US5655144A (en) | Audio synchronization system | |
| JP3751314B2 (ja) | 時間ベースのスクリプトシーケンスを巻き戻すための方法および装置 | |
| US20050071736A1 (en) | Comprehensive and intuitive media collection and management tool | |
| US20050069225A1 (en) | Binding interactive multichannel digital document system and authoring tool | |
| JPH09179709A (ja) | コンピュータ制御型ディスプレイシステム | |
| JPH09179712A (ja) | 共同作業を表現する一時的データの獲得及び再生のためのシステム | |
| JPH09179710A (ja) | コンピュータ制御型ディスプレイシステム | |
| US10269388B2 (en) | Clip-specific asset configuration | |
| JPH1031661A (ja) | マルチメディア・アプリケーション開発シーケンス・エディタのための方法およびシステム | |
| Marshall et al. | Introduction to multimedia | |
| JP4068915B2 (ja) | 映像データ編集装置及び編集方法 | |
| JP4084065B2 (ja) | 番組紹介ホームページの自動生成方法 | |
| JPH08166987A (ja) | シナリオ編集装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20070326 |
|
| A602 | Written permission of extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A602 Effective date: 20070329 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20070522 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20071113 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20071129 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20071129 |
|
| RD14 | Notification of resignation of power of sub attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7434 Effective date: 20071226 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20071227 |
|
| R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110111 Year of fee payment: 3 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120111 Year of fee payment: 4 |
|
| LAPS | Cancellation because of no payment of annual fees |