JP2002057981A - データストリームにアクセスするインタフェース、データストリームへのアクセス用検索の形成方法、データストリームアクセス方法及びノートからビデオにアクセスするためのデバイス - Google Patents
データストリームにアクセスするインタフェース、データストリームへのアクセス用検索の形成方法、データストリームアクセス方法及びノートからビデオにアクセスするためのデバイスInfo
- Publication number
- JP2002057981A JP2002057981A JP2001115802A JP2001115802A JP2002057981A JP 2002057981 A JP2002057981 A JP 2002057981A JP 2001115802 A JP2001115802 A JP 2001115802A JP 2001115802 A JP2001115802 A JP 2001115802A JP 2002057981 A JP2002057981 A JP 2002057981A
- Authority
- JP
- Japan
- Prior art keywords
- video
- data stream
- glyph
- code
- note
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 36
- 230000007246 mechanism Effects 0.000 claims abstract description 33
- 230000000694 effects Effects 0.000 description 7
- 230000008569 process Effects 0.000 description 7
- 238000012545 processing Methods 0.000 description 6
- 239000000463 material Substances 0.000 description 5
- 230000008859 change Effects 0.000 description 4
- 238000010586 diagram Methods 0.000 description 4
- 230000006870 function Effects 0.000 description 4
- 238000001514 detection method Methods 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 3
- 230000010354 integration Effects 0.000 description 3
- 230000002452 interceptive effect Effects 0.000 description 3
- 239000003550 marker Substances 0.000 description 3
- 230000001360 synchronised effect Effects 0.000 description 3
- 238000004891 communication Methods 0.000 description 2
- 230000006835 compression Effects 0.000 description 2
- 238000007906 compression Methods 0.000 description 2
- 238000013461 design Methods 0.000 description 2
- 238000013507 mapping Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 238000007639 printing Methods 0.000 description 2
- 238000012552 review Methods 0.000 description 2
- 235000005979 Citrus limon Nutrition 0.000 description 1
- 244000131522 Citrus pyriformis Species 0.000 description 1
- 206010013710 Drug interaction Diseases 0.000 description 1
- 241000320516 Eothenomys eva Species 0.000 description 1
- 102100036738 Guanine nucleotide-binding protein subunit alpha-11 Human genes 0.000 description 1
- 101100283445 Homo sapiens GNA11 gene Proteins 0.000 description 1
- 101000631695 Homo sapiens Succinate dehydrogenase assembly factor 3, mitochondrial Proteins 0.000 description 1
- 102100028996 Succinate dehydrogenase assembly factor 3, mitochondrial Human genes 0.000 description 1
- 241000656145 Thyrsites atun Species 0.000 description 1
- 241001255741 Vanna Species 0.000 description 1
- 230000001413 cellular effect Effects 0.000 description 1
- 238000004590 computer program Methods 0.000 description 1
- 238000013480 data collection Methods 0.000 description 1
- 239000000284 extract Substances 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 238000012856 packing Methods 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 230000008439 repair process Effects 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 230000000717 retained effect Effects 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/76—Television signal recording
- H04N5/91—Television signal processing therefor
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
- G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
- G11B27/11—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information not detectable on the record carrier
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
- G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
- G11B27/34—Indicating arrangements
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B2220/00—Record carriers by type
- G11B2220/80—Indexing information stored in optical or magnetic or other strip attached to cassette or disc, e.g. barcodes attached to a recording medium
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N9/00—Details of colour television systems
- H04N9/79—Processing of colour television signals in connection with recording
- H04N9/80—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
- H04N9/82—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only
- H04N9/8205—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N9/00—Details of colour television systems
- H04N9/79—Processing of colour television signals in connection with recording
- H04N9/80—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
- H04N9/82—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only
- H04N9/8205—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal
- H04N9/8227—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal the additional signal being at least another television signal
Abstract
(57)【要約】
【課題】 ノート作成中に監視されるビデオ又は他のデ
ータストリームの重要部分を単純且つ正確な検索メカニ
ズムで提供する。 【解決手段】 録画したビデオは、ビデオから導出さ
れたプリントしたノート又はサマリーからアクセスされ
る。録画したビデオを分析することによってサマリーが
自動的に形成され、デジタルインク及びビデオでノート
を作成するデバイスのユーザによって注釈が付けられ
る。ノート及びサマリーは、録画したビデオへの時間ベ
ースの索引又はオフセットを提供するデータグリフと共
にプリントされる。索引又はオフセットは、プリントア
ウトのグリフを走査することによって検索される。グリ
フ情報は多くの方法でプリントアウトに埋め込まれるこ
とができる。アクセスしたビデオはノート作成デバイス
又はウェブブラウザタイプのデバイスのサマリーインタ
フェースで再生される。
ータストリームの重要部分を単純且つ正確な検索メカニ
ズムで提供する。 【解決手段】 録画したビデオは、ビデオから導出さ
れたプリントしたノート又はサマリーからアクセスされ
る。録画したビデオを分析することによってサマリーが
自動的に形成され、デジタルインク及びビデオでノート
を作成するデバイスのユーザによって注釈が付けられ
る。ノート及びサマリーは、録画したビデオへの時間ベ
ースの索引又はオフセットを提供するデータグリフと共
にプリントされる。索引又はオフセットは、プリントア
ウトのグリフを走査することによって検索される。グリ
フ情報は多くの方法でプリントアウトに埋め込まれるこ
とができる。アクセスしたビデオはノート作成デバイス
又はウェブブラウザタイプのデバイスのサマリーインタ
フェースで再生される。
Description
【０００１】
【発明の属する技術分野】本発明は、ビデオ又は他の記
録媒体のある位置へのアクセス及びこの位置の検出に関
する。本発明は、より具体的には、記録媒体内の位置
を、その位置に関する参照マーカーを使用して参照する
ことに関する。参照マーカーとしては、ノート、媒体自
体の一部分又はその位置に関する他のアイテムを利用で
きる。また、本発明は、参照マーカーを記録媒体の対応
する位置に関連付けるグリフ符号化の使用にも関する。
録媒体のある位置へのアクセス及びこの位置の検出に関
する。本発明は、より具体的には、記録媒体内の位置
を、その位置に関する参照マーカーを使用して参照する
ことに関する。参照マーカーとしては、ノート、媒体自
体の一部分又はその位置に関する他のアイテムを利用で
きる。また、本発明は、参照マーカーを記録媒体の対応
する位置に関連付けるグリフ符号化の使用にも関する。
【０００２】
【従来の技術】マルチメディアノート作成システムは一
般にミーティング中の音声及びビデオを取得し、取得し
た資料からスライドを形成する（例えば、ライブボード
(LiveBoard)で実行されるシステムであるチボリ(Tivol
i), Moran, T.P., Palen, L., Harrison, S., Chiu,
P., Kimber, D., Minneman, S., vanMelle, W., and Ze
llweger, P. による"I'll get that off the audio": a
case of study of salvaging multimedia meeting rec
ords. Proceedings of CHI '97 CM, New York, pp.202-
209を参照のこと)。チボリは、プレゼンテーションミー
ティングよりもワーキングミーティングをサポートする
ように設計されている。音声に索引付けされるチボリの
インクストロークは、チボリスライド上の準備した資料
と共に、ミーティングのグループノートになる。ラップ
トップを使用する参加者は、タイプしたテキストのコメ
ントをチボリのスライド上に「発信」してよい。
般にミーティング中の音声及びビデオを取得し、取得し
た資料からスライドを形成する（例えば、ライブボード
(LiveBoard)で実行されるシステムであるチボリ(Tivol
i), Moran, T.P., Palen, L., Harrison, S., Chiu,
P., Kimber, D., Minneman, S., vanMelle, W., and Ze
llweger, P. による"I'll get that off the audio": a
case of study of salvaging multimedia meeting rec
ords. Proceedings of CHI '97 CM, New York, pp.202-
209を参照のこと)。チボリは、プレゼンテーションミー
ティングよりもワーキングミーティングをサポートする
ように設計されている。音声に索引付けされるチボリの
インクストロークは、チボリスライド上の準備した資料
と共に、ミーティングのグループノートになる。ラップ
トップを使用する参加者は、タイプしたテキストのコメ
ントをチボリのスライド上に「発信」してよい。
【０００３】類似する例のクラスルーム2000 (Classroo
m 2000)では、プレゼンテーションスライドの画像及び
音声は取得されるが、ビデオは使用されない（Abowd,
G.D.,Atkeson, C.G., Brotherton, J., Enqvist, T., G
ulley, P., and LeMon, J. Investigating the captur
e, integration and access problem of ubiquitous co
mputing in an educational setting, Proceedings of
the CHI '98 Conference. ACM, New York, pp. 440-44
7; 及びAbowd, G.D., Atkeson, C.G., Feinstein, A.,
Hmelo, C., Kooper, R., Long, S., Sawhney, N., and
Tani, M., Teaching and learning as multimedia auth
oring: the classroom 2000 project, Proceedings of
the ACM Multimedia 796 Conference. ACM, New York,
pp. 187-198を参照のこと）。さらに、クラスルーム200
0では、発表者が標準図形形式のスライドを準備する努
力が求められる。スライドはライブボードに表示され、
スライドがプレロードされたPDA装置を用いてノート作
成が行われる。これらのノートは、ライブボードの前で
講義した教授によって注釈が付けられた音声及びスライ
ドに後日同期される。
m 2000)では、プレゼンテーションスライドの画像及び
音声は取得されるが、ビデオは使用されない（Abowd,
G.D.,Atkeson, C.G., Brotherton, J., Enqvist, T., G
ulley, P., and LeMon, J. Investigating the captur
e, integration and access problem of ubiquitous co
mputing in an educational setting, Proceedings of
the CHI '98 Conference. ACM, New York, pp. 440-44
7; 及びAbowd, G.D., Atkeson, C.G., Feinstein, A.,
Hmelo, C., Kooper, R., Long, S., Sawhney, N., and
Tani, M., Teaching and learning as multimedia auth
oring: the classroom 2000 project, Proceedings of
the ACM Multimedia 796 Conference. ACM, New York,
pp. 187-198を参照のこと）。さらに、クラスルーム200
0では、発表者が標準図形形式のスライドを準備する努
力が求められる。スライドはライブボードに表示され、
スライドがプレロードされたPDA装置を用いてノート作
成が行われる。これらのノートは、ライブボードの前で
講義した教授によって注釈が付けられた音声及びスライ
ドに後日同期される。
【０００４】また別の例では、フォーラム(Forum)（Isa
acs, E.A., Morris, T., and Rodriguez, T.K. A forum
for supporting interactive presentations to distr
ibuted audiences. Proceedings of CSCW '94. ACM, Ne
w York, pp. 405-416を参照のこと)は、分散したプレゼ
ンテーションの手段としてビデオを使用するシステムで
ある。プレゼンテーション中、発言者を含む全員がワー
クステーションの前に座っている。特定の形式でスライ
ドを準備しなければならない。テキスト及びマウスで描
いたマークによってスライドに注釈を付けることもでき
るが、ビデオ画像には注釈を付けることができない。
acs, E.A., Morris, T., and Rodriguez, T.K. A forum
for supporting interactive presentations to distr
ibuted audiences. Proceedings of CSCW '94. ACM, Ne
w York, pp. 405-416を参照のこと)は、分散したプレゼ
ンテーションの手段としてビデオを使用するシステムで
ある。プレゼンテーション中、発言者を含む全員がワー
クステーションの前に座っている。特定の形式でスライ
ドを準備しなければならない。テキスト及びマウスで描
いたマークによってスライドに注釈を付けることもでき
るが、ビデオ画像には注釈を付けることができない。
【０００５】別の例では、ストリームス(STREAMS)（Cru
z, G., and Hill, R. Capturing and playing multimed
ia events with STREAMS. Proceedings of the ACM Mul
timedia '94 Conference. ACM, New York, pp. 193-200
を参照のこと）は、室内カメラからのビデオを使用する
プレゼンテーション取得のためのシステムである。これ
らのカメラはディスプレイ上の任意のプレゼンテーショ
ン内容を取得するためにも使用する。この方法は、室内
の活動がディスプレイを不明瞭にするという問題があ
る。テキストのコメントを付加することによってリビュ
ー中に取得したビデオストリームに注釈をつけることは
できるが、プレゼンテーション中のノート作成はサポー
トされない。これらのどのシステムも、カメラからのラ
イブ画像とプレゼンテーション資料をノートへ対話式に
統合させることができない。
z, G., and Hill, R. Capturing and playing multimed
ia events with STREAMS. Proceedings of the ACM Mul
timedia '94 Conference. ACM, New York, pp. 193-200
を参照のこと）は、室内カメラからのビデオを使用する
プレゼンテーション取得のためのシステムである。これ
らのカメラはディスプレイ上の任意のプレゼンテーショ
ン内容を取得するためにも使用する。この方法は、室内
の活動がディスプレイを不明瞭にするという問題があ
る。テキストのコメントを付加することによってリビュ
ー中に取得したビデオストリームに注釈をつけることは
できるが、プレゼンテーション中のノート作成はサポー
トされない。これらのどのシステムも、カメラからのラ
イブ画像とプレゼンテーション資料をノートへ対話式に
統合させることができない。
【０００６】さらに、スタンドアローンインク及び音声
ノート作成システムが幾つか知られている。例えば、FX
PAL Dynomite（Wilcox, L.D., Schilit, B.N., and Saw
hney, N. Dynomite: A Dynamically Organized Ink and
Audio Notebook. Proceedings of CHI '97. ACM, New
York, pp. 186-193を参照のこと); 及び音声録音に紙を
使用するオーディオノートブック(Audio Notebook)（St
ifelman, L. The Audio Notebook: Paper and Pen Inte
raction with Structured Speech. Ph.D. Thesis. MIT,
1997を参照のこと）が挙げられる。ファイロチャット
(Filochat)（Whittaker, S., Hyland, P., and Wiley,
M. Filochat: handwritten notes provide access to r
ecorded conversations. Proceedings of CHI '94. AC
M, New York, pp. 271-276を参照のこと)は、音声が手
書きのノートで索引付けされる、ペンタブレットを伴う
PCコンピュータである。また、ノータイム(NoTime)（La
mming, M., and Newman, W. Activity-based informati
on technology in support of personal memory. Techn
ical Report EPC-1991-103, Rank Xerox, EuroPARC,199
1）は、ユーザのインクストロークを録音した音声又は
ビデオに合わせるように設計された。
ノート作成システムが幾つか知られている。例えば、FX
PAL Dynomite（Wilcox, L.D., Schilit, B.N., and Saw
hney, N. Dynomite: A Dynamically Organized Ink and
Audio Notebook. Proceedings of CHI '97. ACM, New
York, pp. 186-193を参照のこと); 及び音声録音に紙を
使用するオーディオノートブック(Audio Notebook)（St
ifelman, L. The Audio Notebook: Paper and Pen Inte
raction with Structured Speech. Ph.D. Thesis. MIT,
1997を参照のこと）が挙げられる。ファイロチャット
(Filochat)（Whittaker, S., Hyland, P., and Wiley,
M. Filochat: handwritten notes provide access to r
ecorded conversations. Proceedings of CHI '94. AC
M, New York, pp. 271-276を参照のこと)は、音声が手
書きのノートで索引付けされる、ペンタブレットを伴う
PCコンピュータである。また、ノータイム(NoTime)（La
mming, M., and Newman, W. Activity-based informati
on technology in support of personal memory. Techn
ical Report EPC-1991-103, Rank Xerox, EuroPARC,199
1）は、ユーザのインクストロークを録音した音声又は
ビデオに合わせるように設計された。
【０００７】ビデオ注釈システムも知られている。マー
キー(Marquee)（Weber, K., and Poon, A. Marquee: a
tool for real-time video logging. Proceedings of C
HI '94. ACM, New York, pp. 58-64を参照のこと)は、
ビデオテープを見ながら注釈を付けるペンベースのシス
テムである。マーキーのより新しいバージョンは、Wher
eWereWeマルチメディアシステムからのデジタルビデオ
ストリームにタイムスタンプを付けるという修正がなさ
れている(Minneman, S., Harrison, S., Jassen, B., K
urtenbach, G., Moran, T., Smith, I., and van Mell
e, B. A confederation of tools for capturing and a
ccessing collaborative activity. Proceedings of th
e ACM Multimedia '95 Conference. ACM, New York, p
p. 523-534を参照のこと)。ヴァナ(Vanna)（Harrison,
B., Baecker, R.M. Designing video annotation and a
nalysis systems, Graphics Interface '92. Morgan-Ka
ufmann, pp. 157-166を参照のこと)及びEVA(MacKay, W.
E. EVA: An experimental video annotator for symbol
ic analysis of video data, SIGCHI Bulletin, 21(2),
68-71. 1989. ACM Pressを参照のこと）は、テキスト
ベースのシステムである。ビデオノーター(VideoNoter)
(Trigg, R. Computer support for transcribing recor
ded activity, SIGCHI Bulletin, 21(2), 68-71. 1989.
ACM Pressを参照のこと）は、アクティビティ（ビデ
オ、数字、ホワイトボードの図、テキスト）の異なるス
トリームを表示し、これらを同期させるが、音声からテ
キストを転記したりホワイトボードから図を抽出したり
するために後生成を要する。これらのシステムは、デジ
タルビデオではなくビデオテープの使用に基づいた設計
によって限定される。これらのどのシステムもビデオ画
像のノートへの対話式統合ができない。シャープザウル
ス(Sharp Zaurus) (Zaurus Operation Manual. SharpCo
rporation, 1996)は商品であり、デジタルカメラが付い
たPDAである。デジタル写真を撮影し、手書きのノート
にリンクさせることができる。
キー(Marquee)（Weber, K., and Poon, A. Marquee: a
tool for real-time video logging. Proceedings of C
HI '94. ACM, New York, pp. 58-64を参照のこと)は、
ビデオテープを見ながら注釈を付けるペンベースのシス
テムである。マーキーのより新しいバージョンは、Wher
eWereWeマルチメディアシステムからのデジタルビデオ
ストリームにタイムスタンプを付けるという修正がなさ
れている(Minneman, S., Harrison, S., Jassen, B., K
urtenbach, G., Moran, T., Smith, I., and van Mell
e, B. A confederation of tools for capturing and a
ccessing collaborative activity. Proceedings of th
e ACM Multimedia '95 Conference. ACM, New York, p
p. 523-534を参照のこと)。ヴァナ(Vanna)（Harrison,
B., Baecker, R.M. Designing video annotation and a
nalysis systems, Graphics Interface '92. Morgan-Ka
ufmann, pp. 157-166を参照のこと)及びEVA(MacKay, W.
E. EVA: An experimental video annotator for symbol
ic analysis of video data, SIGCHI Bulletin, 21(2),
68-71. 1989. ACM Pressを参照のこと）は、テキスト
ベースのシステムである。ビデオノーター(VideoNoter)
(Trigg, R. Computer support for transcribing recor
ded activity, SIGCHI Bulletin, 21(2), 68-71. 1989.
ACM Pressを参照のこと）は、アクティビティ（ビデ
オ、数字、ホワイトボードの図、テキスト）の異なるス
トリームを表示し、これらを同期させるが、音声からテ
キストを転記したりホワイトボードから図を抽出したり
するために後生成を要する。これらのシステムは、デジ
タルビデオではなくビデオテープの使用に基づいた設計
によって限定される。これらのどのシステムもビデオ画
像のノートへの対話式統合ができない。シャープザウル
ス(Sharp Zaurus) (Zaurus Operation Manual. SharpCo
rporation, 1996)は商品であり、デジタルカメラが付い
たPDAである。デジタル写真を撮影し、手書きのノート
にリンクさせることができる。
【０００８】
【発明が解決しようとする課題】さらに、多くのシステ
ムがビデオ再生メカニズムを含む。図１は、ビデオディ
スプレイ領域１０２を含む従来のビデオ再生装置１００
を例示する。タイムライン１０５は、表示されているビ
デオの現在の位置を示し、再生１１５、巻き戻し１２
０、早送り１２５、コマ戻し１３０、コマ送り１３５等
を含む標準ＶＣＲコントロールが設けられることでユー
ザがビデオをナビゲートできる。しかし、ビデオ内の特
定の位置を検出する場合、特にノート又はビデオに関連
する他のアイテムを参照してビデオ内の特定の位置を検
出する際に問題が生じる。
ムがビデオ再生メカニズムを含む。図１は、ビデオディ
スプレイ領域１０２を含む従来のビデオ再生装置１００
を例示する。タイムライン１０５は、表示されているビ
デオの現在の位置を示し、再生１１５、巻き戻し１２
０、早送り１２５、コマ戻し１３０、コマ送り１３５等
を含む標準ＶＣＲコントロールが設けられることでユー
ザがビデオをナビゲートできる。しかし、ビデオ内の特
定の位置を検出する場合、特にノート又はビデオに関連
する他のアイテムを参照してビデオ内の特定の位置を検
出する際に問題が生じる。
【０００９】
【課題を解決するための手段】ノート作成中に監視され
るビデオ又は他のデータストリームの重要部分が単純且
つ正確な検索メカニズムで提供されるならば、ノート作
成システムは再生しやすさが増し利用しやすくなること
を、発明者は認識した。簡単にいうと、本発明は、ノー
ト作成セッション（ミーティング、プレゼンテーション
又は他の活動）の最中にユーザがキーフレームを選択し
たり注釈を付けることができるマルチメディアノート作
成システムを提供する。各キーフレーム及び／又は注釈
が取得され、ノート作成セッションのビデオ又はノート
作成に関連する他のデータストリームの位置に索引付け
される。取得したキーフレーム及び注釈は符号化したグ
リフと共に紙にプリントされ、プリントされたシート
は、ターゲットキーフレーム又は注釈に関連するグリフ
コードを走査し、ターゲットキーフレーム又は注釈によ
って索引付けされたビデオ又はデータストリームの重要
な部分を参照することによってビデオの重要な部分にア
クセスするために使用される。
るビデオ又は他のデータストリームの重要部分が単純且
つ正確な検索メカニズムで提供されるならば、ノート作
成システムは再生しやすさが増し利用しやすくなること
を、発明者は認識した。簡単にいうと、本発明は、ノー
ト作成セッション（ミーティング、プレゼンテーション
又は他の活動）の最中にユーザがキーフレームを選択し
たり注釈を付けることができるマルチメディアノート作
成システムを提供する。各キーフレーム及び／又は注釈
が取得され、ノート作成セッションのビデオ又はノート
作成に関連する他のデータストリームの位置に索引付け
される。取得したキーフレーム及び注釈は符号化したグ
リフと共に紙にプリントされ、プリントされたシート
は、ターゲットキーフレーム又は注釈に関連するグリフ
コードを走査し、ターゲットキーフレーム又は注釈によ
って索引付けされたビデオ又はデータストリームの重要
な部分を参照することによってビデオの重要な部分にア
クセスするために使用される。
【００１０】これらの及び他の目的は、デジタルビデオ
及びインクでノートを作成するシステム（ノートルック
ともいう）によって達成される。本発明は、以下に限定
しないが以下のうちの何れかを含む多くの方法で具体化
され得る。
及びインクでノートを作成するシステム（ノートルック
ともいう）によって達成される。本発明は、以下に限定
しないが以下のうちの何れかを含む多くの方法で具体化
され得る。
【００１１】データストリームの少なくとも一部分に対
応する少なくとも一つのオブジェクト及びオブジェクト
に対応するデータストリームの一部分を特定する各オブ
ジェクトに関連するコードを含む出力を含む、データス
トリームにアクセスするためのインタフェースである。
応する少なくとも一つのオブジェクト及びオブジェクト
に対応するデータストリームの一部分を特定する各オブ
ジェクトに関連するコードを含む出力を含む、データス
トリームにアクセスするためのインタフェースである。
【００１２】データストリームに関連する少なくとも一
つのオブジェクトを特定し、関連する各オブジェクトに
対応するデータストリームのオフセットを決定し、各オ
フセット及び対応する関連オブジェクトを特定する索引
を形成する、データストリームへのアクセス用の索引を
形成する方法である。
つのオブジェクトを特定し、関連する各オブジェクトに
対応するデータストリームのオフセットを決定し、各オ
フセット及び対応する関連オブジェクトを特定する索引
を形成する、データストリームへのアクセス用の索引を
形成する方法である。
【００１３】データストリームに対応するオブジェクト
を走査し、走査したオブジェクトに基づいてデータスト
リームのオフセットを決定し、決定したオフセットに対
応するデータストリームの一部分にアクセスする、デー
タストリームアクセス方法である。
を走査し、走査したオブジェクトに基づいてデータスト
リームのオフセットを決定し、決定したオフセットに対
応するデータストリームの一部分にアクセスする、デー
タストリームアクセス方法である。
【００１４】ビデオ索引に埋め込まれたグリフコードを
走査するように構成された走査デバイスと、走査したグ
リフコードを読み取り、グリフコードに基づいてビデオ
の一部分にアクセスするように構成された演算デバイス
と、検索したビデオ部分を出力するように構成されたデ
ィスプレイメカニズムと、を含む、ノートからビデオに
アクセスするデバイスである。
走査するように構成された走査デバイスと、走査したグ
リフコードを読み取り、グリフコードに基づいてビデオ
の一部分にアクセスするように構成された演算デバイス
と、検索したビデオ部分を出力するように構成されたデ
ィスプレイメカニズムと、を含む、ノートからビデオに
アクセスするデバイスである。
【００１５】また、本発明は、ノート作成デバイスへの
複数のデータストリームの入力が、後に参照するために
取得した部分又はフレームを有し、ユーザが取得した任
意のデータストリーム（このようなデータストリーム
は、ペンベース入力、ビデオ入力、複数のビデオ入力、
データストリーム、ホワイトボード入力などを含む任意
のユーザ入力を含む）に関連する注釈を付けることがで
きる方法も含む。この方法は、注釈を付けるか又はデー
タストリームの入力のうちの一つからフレームを選択
し、注釈又は選択を格納して索引付けし、格納した選択
又は注釈を特定するグリフを符号化し、付加することを
含む。
複数のデータストリームの入力が、後に参照するために
取得した部分又はフレームを有し、ユーザが取得した任
意のデータストリーム（このようなデータストリーム
は、ペンベース入力、ビデオ入力、複数のビデオ入力、
データストリーム、ホワイトボード入力などを含む任意
のユーザ入力を含む）に関連する注釈を付けることがで
きる方法も含む。この方法は、注釈を付けるか又はデー
タストリームの入力のうちの一つからフレームを選択
し、注釈又は選択を格納して索引付けし、格納した選択
又は注釈を特定するグリフを符号化し、付加することを
含む。
【００１６】プレゼンテーション又はデータ収集の最中
に行った複数の選択及び／又は注釈に対してステップが
繰り返される。注釈、選択及び付加したデータグリフは
紙にプリントアウトされるか選択のための他の電子媒体
に配されて保存した選択又は注釈の再生を始めるか又は
注釈若しくは選択及び関連するグリフに関連するポイン
トでデータストリームを再生する。データグリフを走査
するためにスキャナを利用してもよく、グリフから走査
されたデータはビデオを特定し検索するために利用さ
れ、付加された（又は他の）デバイスは、走査したグリ
フに関連する選択及び／又は注釈によって特定されたデ
ータストリームの位置からビデオ又は他のデータストリ
ームの再生を開始する。
に行った複数の選択及び／又は注釈に対してステップが
繰り返される。注釈、選択及び付加したデータグリフは
紙にプリントアウトされるか選択のための他の電子媒体
に配されて保存した選択又は注釈の再生を始めるか又は
注釈若しくは選択及び関連するグリフに関連するポイン
トでデータストリームを再生する。データグリフを走査
するためにスキャナを利用してもよく、グリフから走査
されたデータはビデオを特定し検索するために利用さ
れ、付加された（又は他の）デバイスは、走査したグリ
フに関連する選択及び／又は注釈によって特定されたデ
ータストリームの位置からビデオ又は他のデータストリ
ームの再生を開始する。
【００１７】本発明を自動的に実施することができ、こ
れによってデータストリームが取得され、キーフレーム
又は他のデータ選択を特定することによって自動的に要
約され、このキーフレーム又は他のデータ選択は抽出さ
れ、選択が抽出されたデータストリームの位置を特定す
るグリフが埋め込まれる。ユーザによって手作業で付け
られた注釈及び／又は行われた選択を参照するグリフ
は、別個に形成されてもよいし、選択したキーフレーム
の出力に含まれていてもよい。
れによってデータストリームが取得され、キーフレーム
又は他のデータ選択を特定することによって自動的に要
約され、このキーフレーム又は他のデータ選択は抽出さ
れ、選択が抽出されたデータストリームの位置を特定す
るグリフが埋め込まれる。ユーザによって手作業で付け
られた注釈及び／又は行われた選択を参照するグリフ
は、別個に形成されてもよいし、選択したキーフレーム
の出力に含まれていてもよい。
【００１８】本発明は、ネットワーク、例えばデバイス
が注釈又はノート作成のためにダウンロード又はブロー
ドキャストビデオストリームを取得するインターネット
で実施され得る。本発明の出力、例えば選択及び関連す
るグリフを有する紙出力はユーザによって走査され、グ
リフはhttp又はサーバーへの他のネットワーク関連アド
レスを特定し、サーバーは走査したグリフによって示さ
れた位置からビデオを再生し、ＰＣ、パームデバイス、
ウェブテレビベース又は他のディスプレイメカニズムに
出力する。
が注釈又はノート作成のためにダウンロード又はブロー
ドキャストビデオストリームを取得するインターネット
で実施され得る。本発明の出力、例えば選択及び関連す
るグリフを有する紙出力はユーザによって走査され、グ
リフはhttp又はサーバーへの他のネットワーク関連アド
レスを特定し、サーバーは走査したグリフによって示さ
れた位置からビデオを再生し、ＰＣ、パームデバイス、
ウェブテレビベース又は他のディスプレイメカニズムに
出力する。
【００１９】注釈又はプリントページの画像に関連する
ブロックグリフを含む本発明の出力の種々の実施の形態
が説明され、グリフのアドレスカーペットが注釈付きタ
イムラインに関連して提供され、時間にマッピングされ
たＸ−Ｙ位置を有する二次元アドレスカーペットは、任
意のデバイスの検索インタフェース又はウェブブラウザ
タイプのプロダクトのサマリーインタフェースに類似す
るビデオアクセスへの選択したアクセスを提供する。
ブロックグリフを含む本発明の出力の種々の実施の形態
が説明され、グリフのアドレスカーペットが注釈付きタ
イムラインに関連して提供され、時間にマッピングされ
たＸ−Ｙ位置を有する二次元アドレスカーペットは、任
意のデバイスの検索インタフェース又はウェブブラウザ
タイプのプロダクトのサマリーインタフェースに類似す
るビデオアクセスへの選択したアクセスを提供する。
【００２０】
【発明の実施の形態】以下の詳細な説明を参照し、添付
図面に関連して考慮することによって本発明をより理解
するにつれて、本発明のより完全な価値及び本発明の利
点の多くを容易に得ることができるであろう。
図面に関連して考慮することによって本発明をより理解
するにつれて、本発明のより完全な価値及び本発明の利
点の多くを容易に得ることができるであろう。
【００２１】同一参照番号が同一又は対応する部分を示
す図面を再び参照すると、具体的には図２を参照する
と、ノート作成アプリケーション２１０を実行するペン
ベースのコンピュータ２００が例示されている。ノート
作成アプリケーションは、画像を書き込み、取得し、注
釈を付けるための紙のノートのページに似たメイン領域
２１５を含む。アクティブビデオを見るための小さなビ
デオウィンドウ２２０がある。アクティブビデオはアク
ティブチャンネルから得られ、ユーザはチャンネルを変
更して他のビデオストリームを見たり、別のタイプのデ
ータストリームをユーザ又はアプリケーションに表示す
ることができる。ノート作成アプリケーションは、ビデ
オウィンドウに示されているフレームを取得し、取得し
たフレーム（例えば、２２５）をメイン領域のマージン
に配置したり、フレームを大きな背景画像としてセット
で取得するための設備を含む。ユーザのペンデバイス２
３０の「インク」ストロークも取得される。サムネイ
ル、背景画像及びインクストロークにはタイムスタンプ
が付けられ、ビデオ又は他のデータストリームの索引を
提供するために利用される。
す図面を再び参照すると、具体的には図２を参照する
と、ノート作成アプリケーション２１０を実行するペン
ベースのコンピュータ２００が例示されている。ノート
作成アプリケーションは、画像を書き込み、取得し、注
釈を付けるための紙のノートのページに似たメイン領域
２１５を含む。アクティブビデオを見るための小さなビ
デオウィンドウ２２０がある。アクティブビデオはアク
ティブチャンネルから得られ、ユーザはチャンネルを変
更して他のビデオストリームを見たり、別のタイプのデ
ータストリームをユーザ又はアプリケーションに表示す
ることができる。ノート作成アプリケーションは、ビデ
オウィンドウに示されているフレームを取得し、取得し
たフレーム（例えば、２２５）をメイン領域のマージン
に配置したり、フレームを大きな背景画像としてセット
で取得するための設備を含む。ユーザのペンデバイス２
３０の「インク」ストロークも取得される。サムネイ
ル、背景画像及びインクストロークにはタイムスタンプ
が付けられ、ビデオ又は他のデータストリームの索引を
提供するために利用される。
【００２２】アクティブビデオは、あらゆるソースを介
してノート作成アプリケーションに出力されることがで
きる。ビデオソースは、種々の方法で、例えば室内カメ
ラ又はドキュメントカメラから、リアプロジェクター、
テレビ、オーバーヘッドスライドのドキュメントカメ
ラ、ＶＣＲ又は任意のビデオストリームへのタップか
ら、又はペンコンピュータに装着された小さなポータブ
ルカメラから、又は任意の他のタイプのデータ入力デバ
イスから取得することができる。多数のビデオ又は他の
データソースがノート作成システムに出力される。
してノート作成アプリケーションに出力されることがで
きる。ビデオソースは、種々の方法で、例えば室内カメ
ラ又はドキュメントカメラから、リアプロジェクター、
テレビ、オーバーヘッドスライドのドキュメントカメ
ラ、ＶＣＲ又は任意のビデオストリームへのタップか
ら、又はペンコンピュータに装着された小さなポータブ
ルカメラから、又は任意の他のタイプのデータ入力デバ
イスから取得することができる。多数のビデオ又は他の
データソースがノート作成システムに出力される。
【００２３】図３及び４は、ビデオウィンドウ３２０及
びビデオコントロール３１０を含むノート作成システム
のスクリーンショット３００を例示する。ビデオウィン
ドウの隣にはビデオと対話するための三つのボタンがあ
る。即ち、一番上のボタン（チャンネルチェンジャーボ
タン３２２）はチャンネルを変更し、中間のボタン３２
４はサムネイル（例えば、サムネイル３７０）をノート
ページ領域３１５のマージンに撮影し、一番下のボタン
３２６は、大きな画像３９０（即ち、注釈に利用するか
或いは見るために拡大したかもしれない画像）をノート
ページ領域３８０に撮影する。
びビデオコントロール３１０を含むノート作成システム
のスクリーンショット３００を例示する。ビデオウィン
ドウの隣にはビデオと対話するための三つのボタンがあ
る。即ち、一番上のボタン（チャンネルチェンジャーボ
タン３２２）はチャンネルを変更し、中間のボタン３２
４はサムネイル（例えば、サムネイル３７０）をノート
ページ領域３１５のマージンに撮影し、一番下のボタン
３２６は、大きな画像３９０（即ち、注釈に利用するか
或いは見るために拡大したかもしれない画像）をノート
ページ領域３８０に撮影する。
【００２４】ビデオウィンドウ３２０のさらに左側はＶ
ＣＲ型コントロール３６０のセットである。タイムライ
ン３５０は、再生されているビデオの現在の時間位置を
示すポインタ３５５を有する。また、ポインタは、ノー
ト作成セッションの最中に取得されている多数のデータ
ストリーム（例えば、ビデオ入力、ホワイトボード入力
及びユーザからのペンベース入力の各々）の時間位置も
示す。また、タイムラインは、ブラウジング及びリビュ
ーを容易にするために索引付け情報も表示する。ノート
作成デバイスの正確な構造は任意の形態であってよく、
本明細書中に説明したものとは異なるメカニズム又は別
の制御メカニズムを用いてもよい。
ＣＲ型コントロール３６０のセットである。タイムライ
ン３５０は、再生されているビデオの現在の時間位置を
示すポインタ３５５を有する。また、ポインタは、ノー
ト作成セッションの最中に取得されている多数のデータ
ストリーム（例えば、ビデオ入力、ホワイトボード入力
及びユーザからのペンベース入力の各々）の時間位置も
示す。また、タイムラインは、ブラウジング及びリビュ
ーを容易にするために索引付け情報も表示する。ノート
作成デバイスの正確な構造は任意の形態であってよく、
本明細書中に説明したものとは異なるメカニズム又は別
の制御メカニズムを用いてもよい。
【００２５】このシステムによって、ユーザはデジタル
化されサーバに格納されている（又は局所的に格納され
ているか又はテープ、ＣＤ等のような他のデバイスに格
納されている）ビデオを見ながらペンベースのコンピュ
ータでノートを取ることができる。ノートにはタイムス
タンプが付けられ、ビデオに同期される。さらに、ユー
ザは、ビデオからの静止画像を、マージンのサムネイル
として又はノートページのフルサイズの画像として、ノ
ートに撮影することができる。これらの画像にもタイム
スタンプが付けられ、またビデオに同期されているた
め、索引の役目も果たす。
化されサーバに格納されている（又は局所的に格納され
ているか又はテープ、ＣＤ等のような他のデバイスに格
納されている）ビデオを見ながらペンベースのコンピュ
ータでノートを取ることができる。ノートにはタイムス
タンプが付けられ、ビデオに同期される。さらに、ユー
ザは、ビデオからの静止画像を、マージンのサムネイル
として又はノートページのフルサイズの画像として、ノ
ートに撮影することができる。これらの画像にもタイム
スタンプが付けられ、またビデオに同期されているた
め、索引の役目も果たす。
【００２６】ノート作成セッションの後、録画したビデ
オを再生するためにノート作成システムを使用すること
ができる。標準ＶＣＲコントロール、例えば早送り又は
巻き戻しによって再生位置を制御することができる。さ
らに、ペンストローク及びノートの静止画像によって形
成された索引を使用してビデオの特定の部分にアクセス
することができる。ユーザは所望の索引オブジェクトを
選択し、再生ボタンを押す（又は例えばダブルクリック
(Double Click)等のような他の再生メカニズムを用い
る）。ビデオ再生時間を示すために注釈付きタイムライ
ンも利用できる（図1を参照）。
オを再生するためにノート作成システムを使用すること
ができる。標準ＶＣＲコントロール、例えば早送り又は
巻き戻しによって再生位置を制御することができる。さ
らに、ペンストローク及びノートの静止画像によって形
成された索引を使用してビデオの特定の部分にアクセス
することができる。ユーザは所望の索引オブジェクトを
選択し、再生ボタンを押す（又は例えばダブルクリック
(Double Click)等のような他の再生メカニズムを用い
る）。ビデオ再生時間を示すために注釈付きタイムライ
ンも利用できる（図1を参照）。
【００２７】上記のノート作成システムは、FX Palo Al
to Laboratoryで開発したノートルック(NoteLook)シス
テムについて簡単に説明している。本発明を適用する画
像、スナップ、注釈などを取得するためにノートルック
及び他のノート作成システムを利用することができる。
本発明を適用するために、ビデオ、音声、マルチメディ
ア及び他のデータタイプに対する取得、注釈、強調又は
他の処理をサポートする多くの他のタイプのデバイスを
利用することができる。必要なのは、任意のタイプのデ
ータストリームを取得できるデバイス及び本発明の方法
及び／又は処理を適用するための（デバイスに含まれる
か又はアクセス可能な）設備のみである。
to Laboratoryで開発したノートルック(NoteLook)シス
テムについて簡単に説明している。本発明を適用する画
像、スナップ、注釈などを取得するためにノートルック
及び他のノート作成システムを利用することができる。
本発明を適用するために、ビデオ、音声、マルチメディ
ア及び他のデータタイプに対する取得、注釈、強調又は
他の処理をサポートする多くの他のタイプのデバイスを
利用することができる。必要なのは、任意のタイプのデ
ータストリームを取得できるデバイス及び本発明の方法
及び／又は処理を適用するための（デバイスに含まれる
か又はアクセス可能な）設備のみである。
【００２８】帯域幅を節約するためにフレームレート圧
縮を利用するのが好ましい。自動変更検出（例えば、ス
ライド変更検出）を利用してもよく、メディアストリー
ムにおける変更のみがノート作成デバイスに送られる。
或いは、メディアストリームにおけるマテリアルの秒当
たりのフレームレート圧縮を減少させることもできる
（即ち、30fpsのビデオショットを１又は２fpsに減少さ
せてもよい）。これによってノートルックのクライアン
トでのディスプレイにジッターが現れるかもしれない
が、ノート作成デバイスでの完全なビデオはノート作成
処理においては必須ではなく、実際、ノート作成者がビ
デオに出席している状況では（ノート作成者は何が行わ
れているかを見聞きできるため）必要ない。ノート作成
デバイスは、ビデオ／データストリームを格納してもよ
いし、ビデオ／データストリームは別のサーバーに取得
又は維持されてもよい。
縮を利用するのが好ましい。自動変更検出（例えば、ス
ライド変更検出）を利用してもよく、メディアストリー
ムにおける変更のみがノート作成デバイスに送られる。
或いは、メディアストリームにおけるマテリアルの秒当
たりのフレームレート圧縮を減少させることもできる
（即ち、30fpsのビデオショットを１又は２fpsに減少さ
せてもよい）。これによってノートルックのクライアン
トでのディスプレイにジッターが現れるかもしれない
が、ノート作成デバイスでの完全なビデオはノート作成
処理においては必須ではなく、実際、ノート作成者がビ
デオに出席している状況では（ノート作成者は何が行わ
れているかを見聞きできるため）必要ない。ノート作成
デバイスは、ビデオ／データストリームを格納してもよ
いし、ビデオ／データストリームは別のサーバーに取得
又は維持されてもよい。
【００２９】ノート作成システムは、室内カメラ及びプ
ロジェクターからのビデオをワイヤード又はワイヤレス
ネットワークを介してノートルックコンピュータに伝送
できる会議室の設定で特に有用である。このようなノー
ト作成デバイスを会議室で利用することは簡単に想像で
きるが、ユーザが室外で使用するためのデバイスを個々
に所有することはあまり想像できない。したがって、会
議室外でノート及び録画したビデオにアクセスするため
の別の手段をユーザに与えることが重要である。このた
めの最も簡単な方法の一つは、ユーザにノートのプリン
トアウトを配布することである。しかし、これだけでは
録画したビデオへのアクセスは与えられない。
ロジェクターからのビデオをワイヤード又はワイヤレス
ネットワークを介してノートルックコンピュータに伝送
できる会議室の設定で特に有用である。このようなノー
ト作成デバイスを会議室で利用することは簡単に想像で
きるが、ユーザが室外で使用するためのデバイスを個々
に所有することはあまり想像できない。したがって、会
議室外でノート及び録画したビデオにアクセスするため
の別の手段をユーザに与えることが重要である。このた
めの最も簡単な方法の一つは、ユーザにノートのプリン
トアウトを配布することである。しかし、これだけでは
録画したビデオへのアクセスは与えられない。
【００３０】本発明は、ノート、注釈、クリップ、スナ
ップショット（集合的にノートと称する）のデータグリ
フを、ノート作成セッションの最中に利用したビデオデ
ータストリームへのアクセスを提供する他のプリントア
ウト又は他の出力に埋め込む。グリフはビデオの時間の
オフセットを提供するため、ビデオの特定の部分にアク
セスすることができる。さらに、グリフはこれらのノー
トに関連する録画したビデオの位置を符号化することが
できる。
ップショット（集合的にノートと称する）のデータグリ
フを、ノート作成セッションの最中に利用したビデオデ
ータストリームへのアクセスを提供する他のプリントア
ウト又は他の出力に埋め込む。グリフはビデオの時間の
オフセットを提供するため、ビデオの特定の部分にアク
セスすることができる。さらに、グリフはこれらのノー
トに関連する録画したビデオの位置を符号化することが
できる。
【００３１】紙からビデオへのアクセスを提供するため
にグリフを使用できる別のアプリケーションはビデオサ
マリーである。プリントに適したビデオサマリーの一つ
のタイプは、1999年3月12日に出願した出願番号第09/27
6,529号の"AUTOMATIC VIDEOSUMMARIZATION USING A MEA
SURE OF SHOT IMPORTANCE AND A FRAME-PACKING METHO
D"というタイトルのUchihashiによる(全て参照として本
明細書中に援用される）漫画形式のサマリーである。こ
こで、ビデオは自動的に分析され、サイズ変更可能なキ
ーフレームがサマリーとして選択される。図４は、ビデ
オサマリーの例を示す。大きなキーフレームはビデオの
より重要な部分に対応する。ビデオへのアクセスを提供
するウェブページにサマリーを配置することができる。
キーフレームが選択されると、ビデオはそのフレームか
ら再生を開始する。
にグリフを使用できる別のアプリケーションはビデオサ
マリーである。プリントに適したビデオサマリーの一つ
のタイプは、1999年3月12日に出願した出願番号第09/27
6,529号の"AUTOMATIC VIDEOSUMMARIZATION USING A MEA
SURE OF SHOT IMPORTANCE AND A FRAME-PACKING METHO
D"というタイトルのUchihashiによる(全て参照として本
明細書中に援用される）漫画形式のサマリーである。こ
こで、ビデオは自動的に分析され、サイズ変更可能なキ
ーフレームがサマリーとして選択される。図４は、ビデ
オサマリーの例を示す。大きなキーフレームはビデオの
より重要な部分に対応する。ビデオへのアクセスを提供
するウェブページにサマリーを配置することができる。
キーフレームが選択されると、ビデオはそのフレームか
ら再生を開始する。
【００３２】ある実施の形態では、サマリーは埋め込ま
れたグリフと共にプリントされる。これによって、ウェ
ブ上のコンピュータインタフェースを介してではなく、
紙からビデオへのアクセスが可能となる。ユーザはハン
ドスキャナを使用してプリントしたビデオサマリーの選
択した部分に埋め込まれたグリフを走査することができ
る。スキャナはウェブテレビ(WebTV)のようなデバイス
又は通常のPCに接続され、これらは走査したグリフによ
って索引付けされたビデオ／データストリーム部分にア
クセスする。
れたグリフと共にプリントされる。これによって、ウェ
ブ上のコンピュータインタフェースを介してではなく、
紙からビデオへのアクセスが可能となる。ユーザはハン
ドスキャナを使用してプリントしたビデオサマリーの選
択した部分に埋め込まれたグリフを走査することができ
る。スキャナはウェブテレビ(WebTV)のようなデバイス
又は通常のPCに接続され、これらは走査したグリフによ
って索引付けされたビデオ／データストリーム部分にア
クセスする。
【００３３】プリントされたノート又はビデオサマリー
に埋め込まれたデータグリフによって、ユーザはビデオ
にインタフェースできる。ビデオは、ビデオの位置、ビ
デオのセグメント、少なくとも一つのマルチメディアの
セット又は他のデータストリームを参照する埋め込まれ
たグリフを有するビデオから取得したノート又は画像を
選択することによってアクセスされる。
に埋め込まれたデータグリフによって、ユーザはビデオ
にインタフェースできる。ビデオは、ビデオの位置、ビ
デオのセグメント、少なくとも一つのマルチメディアの
セット又は他のデータストリームを参照する埋め込まれ
たグリフを有するビデオから取得したノート又は画像を
選択することによってアクセスされる。
【００３４】図５は本発明のデバイスを例示する。取得
デバイス４００は、音声、ビデオ、ホワイトボード又は
他のデータ入力の何れでもよい少なくとも一つの入力デ
ータストリーム４１０を含む。ユーザ入力４２０は、任
意のデータ入力ストリーム４１０の部分を特定し、入力
ストリーム又はユーザがノートを取った他のイベントに
関連する注釈を付ける及び／又はノートを取るために利
用される。
デバイス４００は、音声、ビデオ、ホワイトボード又は
他のデータ入力の何れでもよい少なくとも一つの入力デ
ータストリーム４１０を含む。ユーザ入力４２０は、任
意のデータ入力ストリーム４１０の部分を特定し、入力
ストリーム又はユーザがノートを取った他のイベントに
関連する注釈を付ける及び／又はノートを取るために利
用される。
【００３５】取得デバイス４００は取得／注釈メカニズ
ム４２５を含み、このメカニズムは、入力データストリ
ーム４１０のユーザ選択部分及びユーザが付けた注釈又
はユーザがとったノートを取得し、これらのユーザ選択
部分、注釈及び／又はノートにＩＤ、索引又は入力デー
タストリームにおける位置を特定するタイムスタンプを
付け、これらを格納デバイス４３０に格納する。取得デ
バイス４００は、入力データストリームを格納のために
格納デバイス４３０に送るためのチャンネルも含む。
（或いは、入力データストリームを独立的に格納デバイ
ス４３０に出力してもよいし、単にサーバーで保持して
もよい。）
ム４２５を含み、このメカニズムは、入力データストリ
ーム４１０のユーザ選択部分及びユーザが付けた注釈又
はユーザがとったノートを取得し、これらのユーザ選択
部分、注釈及び／又はノートにＩＤ、索引又は入力デー
タストリームにおける位置を特定するタイムスタンプを
付け、これらを格納デバイス４３０に格納する。取得デ
バイス４００は、入力データストリームを格納のために
格納デバイス４３０に送るためのチャンネルも含む。
（或いは、入力データストリームを独立的に格納デバイ
ス４３０に出力してもよいし、単にサーバーで保持して
もよい。）
【００３６】サマリーメカニズム４４０は取得したスナ
ップショット、注釈、ノートを検索し、これらを出力に
適した形式にフォーマッティングする。さらに、サマリ
ーデバイス４４０は、独立した要約化及び一つ以上の入
力データストリーム４１０のキーフレーム選択を提供し
得る。出力は、パーソナルコンピュータ４５０のブラウ
ザデバイスのようなウェブディスプレイ用にフォーマッ
トされるか、ハードコピー形式（紙）４５５にプリント
アウトされるか、電子形式（例えば、フロッピー（登録
商標）ディスク）４６０に格納される。出力は、他のウ
ェブベースの製品、例えばウェブテレビ等を含む他のタ
イプの出力デバイスに出力されてもよい。
ップショット、注釈、ノートを検索し、これらを出力に
適した形式にフォーマッティングする。さらに、サマリ
ーデバイス４４０は、独立した要約化及び一つ以上の入
力データストリーム４１０のキーフレーム選択を提供し
得る。出力は、パーソナルコンピュータ４５０のブラウ
ザデバイスのようなウェブディスプレイ用にフォーマッ
トされるか、ハードコピー形式（紙）４５５にプリント
アウトされるか、電子形式（例えば、フロッピー（登録
商標）ディスク）４６０に格納される。出力は、他のウ
ェブベースの製品、例えばウェブテレビ等を含む他のタ
イプの出力デバイスに出力されてもよい。
【００３７】図６は本発明の処理を例示する。ステップ
５００では、ノート作成システムがスタートする。ノー
ト作成システムは、上記に示した特徴のうちの一つ以上
を含むか又はユーザによってコメントされ、注釈が付け
られ、選択されたデータストリームを受け取る任意のタ
イプのデバイスである。ステップ５１０でノート作成シ
ステムのユーザは、注釈を付けるか又はノート作成シス
テムに出力されるデータ部分を選択する。ステップ５２
０で、付けた注釈又は行った選択を保存し、選択及び／
又は注釈の検索ができるように索引付けし、ノート作成
システムに出力されるデータストリームの少なくとも一
つの位置を特定する。ノート作成システムには出力され
ないがノート作成システムに関連して再生されるデータ
ストリームを参照して注釈を付けることもできる。
５００では、ノート作成システムがスタートする。ノー
ト作成システムは、上記に示した特徴のうちの一つ以上
を含むか又はユーザによってコメントされ、注釈が付け
られ、選択されたデータストリームを受け取る任意のタ
イプのデバイスである。ステップ５１０でノート作成シ
ステムのユーザは、注釈を付けるか又はノート作成シス
テムに出力されるデータ部分を選択する。ステップ５２
０で、付けた注釈又は行った選択を保存し、選択及び／
又は注釈の検索ができるように索引付けし、ノート作成
システムに出力されるデータストリームの少なくとも一
つの位置を特定する。ノート作成システムには出力され
ないがノート作成システムに関連して再生されるデータ
ストリームを参照して注釈を付けることもできる。
【００３８】ステップ５３０で、注釈又は選択のいずれ
か及び特定の一つ或いは複数のデータストリームの位置
を特定する情報と共にグリフが埋め込まれ、グリフが選
択又は注釈に付加される（又は参照として維持され
る）。ステップ５４０で、注釈／選択処理及びグリフ付
加が繰り返される。
か及び特定の一つ或いは複数のデータストリームの位置
を特定する情報と共にグリフが埋め込まれ、グリフが選
択又は注釈に付加される（又は参照として維持され
る）。ステップ５４０で、注釈／選択処理及びグリフ付
加が繰り返される。
【００３９】当業者に理解されるように、本発明の開示
に基づいて、図６のフローチャートの多くの異なるバリ
エーションを本発明を実施するために実行してもよい。
例えば、選択及び注釈の各々をバッチ形式で符号化する
前に、ループで選択及び注釈を全て行い、格納してもよ
い。処理は、アーキテクチャ及びプログラミング技術に
応じてパラレル又はシリアルに実行することができる。
重要なのは、注釈が付けられ選択が行われ、グリフが注
釈及び／又は選択の各々に関連付けられることであり、
グリフは、注釈及び／又は選択に対応するデータストリ
ームの一部分を特定する情報を含むか該情報を指示す
る。
に基づいて、図６のフローチャートの多くの異なるバリ
エーションを本発明を実施するために実行してもよい。
例えば、選択及び注釈の各々をバッチ形式で符号化する
前に、ループで選択及び注釈を全て行い、格納してもよ
い。処理は、アーキテクチャ及びプログラミング技術に
応じてパラレル又はシリアルに実行することができる。
重要なのは、注釈が付けられ選択が行われ、グリフが注
釈及び／又は選択の各々に関連付けられることであり、
グリフは、注釈及び／又は選択に対応するデータストリ
ームの一部分を特定する情報を含むか該情報を指示す
る。
【００４０】グリフは、（特定のノートセットに対応す
る）サーバ上の関連するビデオの位置の情報又はそのビ
デオの時間のオフセットを含んでもよいし、他のタイプ
の写真、ビデオ、音声、文書又はデータのポインタを含
んでもよい。選択が行われるとき又は注釈が付けられる
ときに表示されているビデオにリンクするために、又は
そのとき注釈が付けられているかコメントされている文
書にグリフをリンクさせるためにグリフを使用するのが
最も理にかなっている。或いは、ユーザは（ポップアッ
プウィンドウ又はノート作成デバイスによって提供され
る他のメカニズムによって）ビデオの位置を手作業で特
定する。
る）サーバ上の関連するビデオの位置の情報又はそのビ
デオの時間のオフセットを含んでもよいし、他のタイプ
の写真、ビデオ、音声、文書又はデータのポインタを含
んでもよい。選択が行われるとき又は注釈が付けられる
ときに表示されているビデオにリンクするために、又は
そのとき注釈が付けられているかコメントされている文
書にグリフをリンクさせるためにグリフを使用するのが
最も理にかなっている。或いは、ユーザは（ポップアッ
プウィンドウ又はノート作成デバイスによって提供され
る他のメカニズムによって）ビデオの位置を手作業で特
定する。
【００４１】走査デバイス（例えば、ハンドヘルドスキ
ャナ）を使用して紙のノートに出力すると、ユーザは紙
のノートの画像領域を走査し、これによって所望の選択
を指定する。走査画像のグリフによって適切な情報が与
えられ、特定の時間のオフセットでビデオの再生を開始
する。
ャナ）を使用して紙のノートに出力すると、ユーザは紙
のノートの画像領域を走査し、これによって所望の選択
を指定する。走査画像のグリフによって適切な情報が与
えられ、特定の時間のオフセットでビデオの再生を開始
する。
【００４２】グリフの種々の実施の形態が本発明で利用
される。一つの実施の形態では、プリントアウト又は他
の出力の各索引付きオブジェクトに対してブロックグリ
フを使用する。図７の例には、ノート作成デバイスのペ
ージ上に、サムネイル（スナップ）６１０に関連するグ
リフ６１５及びインクストローク（インクストローク６
２０、６３０及びグリフ６２５、６３５）の各グループ
が示されている。オブジェクト（サムネイル及びインク
ストローク）を、図６の処理又はこれと同等の処理によ
って索引付けし、各グリフに付加する。他のタイプのオ
ブジェクトも同様に索引付けされてもよく、背景画像を
含む画像又はデータを含むグリフが付加されてもよい。
される。一つの実施の形態では、プリントアウト又は他
の出力の各索引付きオブジェクトに対してブロックグリ
フを使用する。図７の例には、ノート作成デバイスのペ
ージ上に、サムネイル（スナップ）６１０に関連するグ
リフ６１５及びインクストローク（インクストローク６
２０、６３０及びグリフ６２５、６３５）の各グループ
が示されている。オブジェクト（サムネイル及びインク
ストローク）を、図６の処理又はこれと同等の処理によ
って索引付けし、各グリフに付加する。他のタイプのオ
ブジェクトも同様に索引付けされてもよく、背景画像を
含む画像又はデータを含むグリフが付加されてもよい。
【００４３】ある実施の形態では、オブジェクトに関連
するビデオ（又は他のマルチメディア／データストリー
ム）の位置は、ノートページ上の付加されたグリフで符
号化される。或いは、グリフは、以下に説明するように
ビデオ及びオフセットを特定する表へのエントリーポイ
ントを提供してもよい。
するビデオ（又は他のマルチメディア／データストリー
ム）の位置は、ノートページ上の付加されたグリフで符
号化される。或いは、グリフは、以下に説明するように
ビデオ及びオフセットを特定する表へのエントリーポイ
ントを提供してもよい。
【００４４】インクストローク自体は関連するインクス
トロークのグループを表す。各ペンストロークはビデオ
に索引付けられるのではなく、本発明はペンストローク
のグループを索引付けする。ペンストロークをグループ
化する多くの方法を利用することができ、これらの方法
は本発明の範囲内である。例えば、構文構造によるグル
ープ化（例えば文字認識及び文法の規則を使用して完全
な文又はパラグラフをグループ化する）、単語認識によ
るグループ化（単語をグループ化する）又は時間による
グループ化が挙げられる。しかし、ペンストロークは時
間によってグループ化されるのが好ましいため、グルー
プのストローク間の時間差が小さい。したがって、索引
付け解像度のいかなるロスの重要性も減少される。１秒
間隔がペンストロークをグループ化するのに最もよいこ
とが本発明者によって判定された。しかしながら、本発
明はこれに限定されない。
トロークのグループを表す。各ペンストロークはビデオ
に索引付けられるのではなく、本発明はペンストローク
のグループを索引付けする。ペンストロークをグループ
化する多くの方法を利用することができ、これらの方法
は本発明の範囲内である。例えば、構文構造によるグル
ープ化（例えば文字認識及び文法の規則を使用して完全
な文又はパラグラフをグループ化する）、単語認識によ
るグループ化（単語をグループ化する）又は時間による
グループ化が挙げられる。しかし、ペンストロークは時
間によってグループ化されるのが好ましいため、グルー
プのストローク間の時間差が小さい。したがって、索引
付け解像度のいかなるロスの重要性も減少される。１秒
間隔がペンストロークをグループ化するのに最もよいこ
とが本発明者によって判定された。しかしながら、本発
明はこれに限定されない。
【００４５】このデザインは、ビデオサマリー又は選
択、注釈及びビデオサマリーの任意の組み合わせにも通
用する。ビデオサマリーの場合、ブロックグリフはサマ
リーの各キーフレームに関連する。
択、注釈及びビデオサマリーの任意の組み合わせにも通
用する。ビデオサマリーの場合、ブロックグリフはサマ
リーの各キーフレームに関連する。
【００４６】図８は、ビデオを要約しグリフを埋め込む
本発明の一つの実施の形態の処理のフローチャートであ
る。ステップ７００でビデオを要約する。ビデオは、ノ
ート作成デバイスに入力されたビデオストリームであっ
てもよいし、会議、ミーティング、活動又は他のイベン
トに関連して個々に録画した任意のビデオストリームで
あってもよい。ビデオは、例えば音声データストリーム
のように、要約処理が施されたオブジェクトである必要
はなく、他のタイプのプロダクトを要約し索引付けして
もよい。視覚画像で通常表されるプロダクト以外のプロ
ダクト（例えば、音声）の場合は、アイコン、グラフ又
はプロダクトを特定する他の表示が含まれていてもよ
い。
本発明の一つの実施の形態の処理のフローチャートであ
る。ステップ７００でビデオを要約する。ビデオは、ノ
ート作成デバイスに入力されたビデオストリームであっ
てもよいし、会議、ミーティング、活動又は他のイベン
トに関連して個々に録画した任意のビデオストリームで
あってもよい。ビデオは、例えば音声データストリーム
のように、要約処理が施されたオブジェクトである必要
はなく、他のタイプのプロダクトを要約し索引付けして
もよい。視覚画像で通常表されるプロダクト以外のプロ
ダクト（例えば、音声）の場合は、アイコン、グラフ又
はプロダクトを特定する他の表示が含まれていてもよ
い。
【００４７】ステップ７１０で要約したビデオからキー
フレームを選択する。任意の選択アルゴリズムを利用す
ることができ、及び／又は外部基準のセットを適用して
キーフレームを選択することもできる。ステップ７２０
でキーフレームをビデオ又は他のデータストリームに索
引付けし、索引付き位置を符号化するグリフに関連付け
る。他のデータは、ビデオ又はデータストリーム、htt
p、ftp又は下位のデータストリームがアクセスできる他
のアドレスの特定を含むグリフに符号化することもでき
る。或いは、下位のデータストリームがアクセスできる
表エントリーを参照するロケーター番号又は他の識別子
でグリフを符号化してもよい（即ち、ステップ７２０は
参照表の構築を含んでもよい）。
フレームを選択する。任意の選択アルゴリズムを利用す
ることができ、及び／又は外部基準のセットを適用して
キーフレームを選択することもできる。ステップ７２０
でキーフレームをビデオ又は他のデータストリームに索
引付けし、索引付き位置を符号化するグリフに関連付け
る。他のデータは、ビデオ又はデータストリーム、htt
p、ftp又は下位のデータストリームがアクセスできる他
のアドレスの特定を含むグリフに符号化することもでき
る。或いは、下位のデータストリームがアクセスできる
表エントリーを参照するロケーター番号又は他の識別子
でグリフを符号化してもよい（即ち、ステップ７２０は
参照表の構築を含んでもよい）。
【００４８】或いは、自動的に取得され（例えば、変更
検出基準を使用して）特定のノートに形成された重要な
ビデオショット（例えば、ホワイトボードデータストリ
ームのスライド変更）を自動的に決定するために、自動
索引付けを利用することもできる。このような自動索引
付き資料を、図９の例えばサマリーに示されるスライド
変更８１０及び２５：００の対応するタイムラインスナ
ップショット８６０のように、タイムラインにリンクさ
せてもよい。
検出基準を使用して）特定のノートに形成された重要な
ビデオショット（例えば、ホワイトボードデータストリ
ームのスライド変更）を自動的に決定するために、自動
索引付けを利用することもできる。このような自動索引
付き資料を、図９の例えばサマリーに示されるスライド
変更８１０及び２５：００の対応するタイムラインスナ
ップショット８６０のように、タイムラインにリンクさ
せてもよい。
【００４９】ステップ７３０では、他の注釈又は選択も
索引付けされ、対応するグリフが提供される。ステップ
７４０では、出力（例えば、紙）が生成され、この出力
からグリフによって索引付けされたビデオ及び／又はデ
ータストリームを参照したり呼び出したりする。
索引付けされ、対応するグリフが提供される。ステップ
７４０では、出力（例えば、紙）が生成され、この出力
からグリフによって索引付けされたビデオ及び／又はデ
ータストリームを参照したり呼び出したりする。
【００５０】他の実施の形態では、埋め込まれたデータ
グリフがグリフアドレスカーペットの形式で提供され
る。例えば、グリフアドレスカーペットは、プリントさ
れたノートページ又はサマリーの下の水平なタイムライ
ンに配置される。図９は、グリフアドレスカーペット８
２０及び関連するタイムライン８４０を有するビデオサ
マリー８００を例示する。タイムライン８４０は水平位
置を時間にマッピングするために使用され、グリフアド
レスカーペット８２０の対応する位置に線形又は非線形
に符号化されてビデオにおいて索引付けされているた
め、ユーザはその時間に（ノートからの）索引オブジェ
クト又は（サマリーからの）キーフレームがあるか否か
に関わらず、ビデオの任意のポイントにアクセスするこ
とができる。
グリフがグリフアドレスカーペットの形式で提供され
る。例えば、グリフアドレスカーペットは、プリントさ
れたノートページ又はサマリーの下の水平なタイムライ
ンに配置される。図９は、グリフアドレスカーペット８
２０及び関連するタイムライン８４０を有するビデオサ
マリー８００を例示する。タイムライン８４０は水平位
置を時間にマッピングするために使用され、グリフアド
レスカーペット８２０の対応する位置に線形又は非線形
に符号化されてビデオにおいて索引付けされているた
め、ユーザはその時間に（ノートからの）索引オブジェ
クト又は（サマリーからの）キーフレームがあるか否か
に関わらず、ビデオの任意のポイントにアクセスするこ
とができる。
【００５１】強調として、ナビゲーションを助けるため
に、（ビデオサマリー又はノートからの）任意のオブジ
ェクトをタイムライン上の適切な位置に表示してもよ
い。図９には種々のサマリーオブジェクト（キーフレー
ム）８６０が示され、ビデオのサマリーオブジェクトの
位置に対応するグリフアドレスカーペット８２０の符号
化された索引に対応する位置に配置されている。
に、（ビデオサマリー又はノートからの）任意のオブジ
ェクトをタイムライン上の適切な位置に表示してもよ
い。図９には種々のサマリーオブジェクト（キーフレー
ム）８６０が示され、ビデオのサマリーオブジェクトの
位置に対応するグリフアドレスカーペット８２０の符号
化された索引に対応する位置に配置されている。
【００５２】データグリフカーペットの配置は、ユーザ
がキーフレームオブジェクトとタイムラインとの関連を
知覚できるようにタイムラインに関連付けさえすればよ
いため、タイムライン上のオブジェクト又は位置が走査
されるとそのタイムライン上のオブジェクト又は位置に
対応するグリフコードも走査される。したがって、グリ
フアドレスカーペット８２０の位置は図９に示すように
タイムラインより上であってもよいし、タイムラインの
下でもよいし、タイムラインと統合されていてもよい。
がキーフレームオブジェクトとタイムラインとの関連を
知覚できるようにタイムラインに関連付けさえすればよ
いため、タイムライン上のオブジェクト又は位置が走査
されるとそのタイムライン上のオブジェクト又は位置に
対応するグリフコードも走査される。したがって、グリ
フアドレスカーペット８２０の位置は図９に示すように
タイムラインより上であってもよいし、タイムラインの
下でもよいし、タイムラインと統合されていてもよい。
【００５３】線形又は非線形タイムスケールを表示する
ために、タイムライン又はグリフアドレスカーペットに
注釈及び／又は着色が施されてもよい。同一の又は離散
的な（個別の又は異なる）タイムスケールで多数のビデ
オ（又は他のデータ）チャンネルにアクセスするため
に、多数のパラレルアドレスカーペットストリップを使
用することができる。多数のビデオチャンネルが記録さ
れ撮影されるノートルックのようなノート作成デバイス
を利用する場合、これは有用である。ビデオの長いタイ
ムスケールに分散した選択を与えるために、多数のスト
リップを使用することもできる。
ために、タイムライン又はグリフアドレスカーペットに
注釈及び／又は着色が施されてもよい。同一の又は離散
的な（個別の又は異なる）タイムスケールで多数のビデ
オ（又は他のデータ）チャンネルにアクセスするため
に、多数のパラレルアドレスカーペットストリップを使
用することができる。多数のビデオチャンネルが記録さ
れ撮影されるノートルックのようなノート作成デバイス
を利用する場合、これは有用である。ビデオの長いタイ
ムスケールに分散した選択を与えるために、多数のスト
リップを使用することもできる。
【００５４】分散した選択によって、ビデオ又は他のデ
ータストリームの部分が選択され、移動され、他のファ
イルに付加される。例えば、グリフデータカーペットと
共に実行するビデオタイムラインでは、タイムライン
（及び埋め込まれたグリフ）の部分が選択されてもよ
い。これらの選択はドラッグされ、他のアプリケーショ
ンにドロップされ、別個のファイルとして格納され、再
生されることができ、任意の機能が実行される。これら
の機能は、その機能を実行するために構成されたアプリ
ケーションを表すアイコンに選択をドロップするか又は
例えばポップアップウィンドウ（例えば右クリックポッ
プアップウィンドウ）からさらに選択することによって
開始する。機能又はアプリケーションは、選択によって
表されるビデオクリップで動作する。
ータストリームの部分が選択され、移動され、他のファ
イルに付加される。例えば、グリフデータカーペットと
共に実行するビデオタイムラインでは、タイムライン
（及び埋め込まれたグリフ）の部分が選択されてもよ
い。これらの選択はドラッグされ、他のアプリケーショ
ンにドロップされ、別個のファイルとして格納され、再
生されることができ、任意の機能が実行される。これら
の機能は、その機能を実行するために構成されたアプリ
ケーションを表すアイコンに選択をドロップするか又は
例えばポップアップウィンドウ（例えば右クリックポッ
プアップウィンドウ）からさらに選択することによって
開始する。機能又はアプリケーションは、選択によって
表されるビデオクリップで動作する。
【００５５】タイムラインのアドレスカーペット（又は
本明細書中に説明した他の実施の形態）の場合、アドレ
スカーペット上の水平位置をビデオに関連する時間にマ
ッピングするために、表又は他の機能的マッピングを利
用できる。この表は紙の上のグリフコードとして格納さ
れ、このグリフコードは走査され演算メカニズムに読み
取られる。該演算メカニズムは、連続的に走査されたグ
リフカーペットの任意の部分を読み取られた表に対して
参照して走査したグリフカーペットの部分に対応するビ
デオの索引を決定する。或いは、表をサーバー（例え
ば、デジタル化されたビデオ又は他のデータも維持する
サーバ）に格納してもよい。ビデオの位置は、別のブロ
ックグリフによって提供されることができる。
本明細書中に説明した他の実施の形態）の場合、アドレ
スカーペット上の水平位置をビデオに関連する時間にマ
ッピングするために、表又は他の機能的マッピングを利
用できる。この表は紙の上のグリフコードとして格納さ
れ、このグリフコードは走査され演算メカニズムに読み
取られる。該演算メカニズムは、連続的に走査されたグ
リフカーペットの任意の部分を読み取られた表に対して
参照して走査したグリフカーペットの部分に対応するビ
デオの索引を決定する。或いは、表をサーバー（例え
ば、デジタル化されたビデオ又は他のデータも維持する
サーバ）に格納してもよい。ビデオの位置は、別のブロ
ックグリフによって提供されることができる。
【００５６】他の解決策は、ビデオ位置の分散したラベ
ルをタイムラインのアドレスカーペットに統合すること
である。例えば、ビデオ名（ＩＤ）及びビデオの時間
（位置又は索引）をタイムライン又は他のグリフに符号
化してもよい。
ルをタイムラインのアドレスカーペットに統合すること
である。例えば、ビデオ名（ＩＤ）及びビデオの時間
（位置又は索引）をタイムライン又は他のグリフに符号
化してもよい。
【００５７】別の実施の形態では、グリフ情報は二次元
アドレスカーペットに埋め込まれる。図１０は、二次元
アドレスカーペット９００の一つの実施の形態を例示す
る。グリフアドレスカーペット位置は１グリフの精度で
選択され、この精度は一般的にページ上で約１／１６イ
ンチであり、現在の電子コンピュータディスプレイの解
像度と同等である。新しい、又は改良したグリフタイプ
の技術を使用する他の解像度を利用してもよい。本発明
の最初の実施の形態はノート及び埋め込みグリフとの紙
インタフェース（プリントアウト）を使用するが、他の
実施の形態はあらゆるタイプの出力を利用してよい。例
えば、ユーザによって走査されるノート及びグリフ符号
化を表示するのに十分な解像度を有するコンピュータデ
ィスプレイがある。
アドレスカーペットに埋め込まれる。図１０は、二次元
アドレスカーペット９００の一つの実施の形態を例示す
る。グリフアドレスカーペット位置は１グリフの精度で
選択され、この精度は一般的にページ上で約１／１６イ
ンチであり、現在の電子コンピュータディスプレイの解
像度と同等である。新しい、又は改良したグリフタイプ
の技術を使用する他の解像度を利用してもよい。本発明
の最初の実施の形態はノート及び埋め込みグリフとの紙
インタフェース（プリントアウト）を使用するが、他の
実施の形態はあらゆるタイプの出力を利用してよい。例
えば、ユーザによって走査されるノート及びグリフ符号
化を表示するのに十分な解像度を有するコンピュータデ
ィスプレイがある。
【００５８】幾つかの実施の形態では、表が形成され、
ノートオブジェクト（ストローク、スナップ）の近隣の
二次元カーペットのＸ−Ｙ位置をビデオの時間にマッピ
ングする。表１は、ノートオブジェクトのＸ−Ｙ位置の
マッピングの例示的な表を示す。
ノートオブジェクト（ストローク、スナップ）の近隣の
二次元カーペットのＸ−Ｙ位置をビデオの時間にマッピ
ングする。表１は、ノートオブジェクトのＸ−Ｙ位置の
マッピングの例示的な表を示す。
【表１】 各Ｘ−Ｙ位置はスナップ、インクストローク又は他のオ
ブジェクトに対応する。ノート又は他のオブジェクトに
対応するビデオにアクセスする選択メカニズムは、走査
された二次元グリフの位置に最も近いノート又はオブジ
ェクトを決定する。
ブジェクトに対応する。ノート又は他のオブジェクトに
対応するビデオにアクセスする選択メカニズムは、走査
された二次元グリフの位置に最も近いノート又はオブジ
ェクトを決定する。
【００５９】或いは、表はより分かりやすく、オブジェ
クトに関連するビデオ位置にアクセスするための完全な
範囲（二次元カーペット上の領域）を画定するかもしれ
ない。例えば、スナップ９１０に関連するビデオは、ボ
ックス９１５によって示されるように（０，０）〜
（２，０）と（０，５．５）〜（２，５．５）の範囲か
らアクセスされ得る。インクストローク９２０に関連す
るビデオは、９２５で示される境界内のグリフを走査す
ることによってアクセスされ、またインクストローク９
３０に関連するビデオは９３５で示される境界のグリフ
を走査することによってアクセスされ得る。境界のサイ
ズ及び形状は、アクセスされるオブジェクトに関する領
域を分割する任意の方法によって演算されることができ
る。
クトに関連するビデオ位置にアクセスするための完全な
範囲（二次元カーペット上の領域）を画定するかもしれ
ない。例えば、スナップ９１０に関連するビデオは、ボ
ックス９１５によって示されるように（０，０）〜
（２，０）と（０，５．５）〜（２，５．５）の範囲か
らアクセスされ得る。インクストローク９２０に関連す
るビデオは、９２５で示される境界内のグリフを走査す
ることによってアクセスされ、またインクストローク９
３０に関連するビデオは９３５で示される境界のグリフ
を走査することによってアクセスされ得る。境界のサイ
ズ及び形状は、アクセスされるオブジェクトに関する領
域を分割する任意の方法によって演算されることができ
る。
【００６０】タイムラインの場合と同様に、グリフコー
ドをビデオ又は他のデータストリームの索引に関連させ
た表は、紙の上のグリフコードとして格納されるか又は
デジタル化されたビデオと共にサーバーに格納されるよ
うな他の構造として格納されることができる。或いは、
ビデオにアクセスするために必要な全ての情報と共にグ
リフ自体が符号化される。
ドをビデオ又は他のデータストリームの索引に関連させ
た表は、紙の上のグリフコードとして格納されるか又は
デジタル化されたビデオと共にサーバーに格納されるよ
うな他の構造として格納されることができる。或いは、
ビデオにアクセスするために必要な全ての情報と共にグ
リフ自体が符号化される。
【００６１】他の表では、ビデオストリーム及び索引
（又はビデオのオフセット）をＸ−Ｙ位置によって参照
する代わりに、グリフに埋め込まれたコードが走査デバ
イスによって読み取られ、ビデオ及びビデオのオフセッ
ト又は索引を参照するために使用される。
（又はビデオのオフセット）をＸ−Ｙ位置によって参照
する代わりに、グリフに埋め込まれたコードが走査デバ
イスによって読み取られ、ビデオ及びビデオのオフセッ
ト又は索引を参照するために使用される。
【００６２】ビデオの位置を、拡張アドレス分散ラベル
として、又はインターリーブもしくはインターレース・
データコードとして、アドレスコードに埋め込むことが
できる。例えば、グリフに埋め込まれたデータ、例えば
ビデオＩＤ及び位置は、埋め込まれたグリフコードの他
の部分で符号化されてもよい。或いは、グリフコードの
データを暗号化又は符号化する他の方法を利用してもよ
く、この方法は、ヘヒト(Hecht)による"Parallel Propa
gating Embedded Binary Sequences For Parameterizin
g Two Dimensional Image Domain Code Patterns in Tw
o DimensionalSpace"というタイトルの米国特許第5,82
5,933号（全体として参照によって本明細書中に援用す
る）に開示したような技術を含む。二次元アドレスカー
ペットのアプリケーションはビデオサマリーのアプリケ
ーションに同様に適用される。
として、又はインターリーブもしくはインターレース・
データコードとして、アドレスコードに埋め込むことが
できる。例えば、グリフに埋め込まれたデータ、例えば
ビデオＩＤ及び位置は、埋め込まれたグリフコードの他
の部分で符号化されてもよい。或いは、グリフコードの
データを暗号化又は符号化する他の方法を利用してもよ
く、この方法は、ヘヒト(Hecht)による"Parallel Propa
gating Embedded Binary Sequences For Parameterizin
g Two Dimensional Image Domain Code Patterns in Tw
o DimensionalSpace"というタイトルの米国特許第5,82
5,933号（全体として参照によって本明細書中に援用す
る）に開示したような技術を含む。二次元アドレスカー
ペットのアプリケーションはビデオサマリーのアプリケ
ーションに同様に適用される。
【００６３】図１１は、本発明をネットワーク環境で適
用するためのハードウェアの一つの実施の形態を例示す
る。演算デバイス１０００は、ノート作成セッション中
に取得又は再生されるビデオ及び／又はデータストリー
ムを維持する格納デバイス１０１０を含む。サーバープ
ログラム１０２０は、ブラウザ又は他のタイプのデバイ
スからの要求に応じて取得した任意のデータストリーム
の部分を出力するように構成されている。演算デバイス
１０００及びサーバプログラム１０２０はそれぞれネッ
トワーク１０３０（例えば、インターネット）に接続さ
れている。ユーザは、周辺走査メカニズム１０６０及び
ディスプレイデバイス１０５５を伴う演算メカニズム１
０５０を有する。演算メカニズム１０５０は、（１０４
０を介して）ネットワーク１０３０に接続する標準パー
ソナルコンピュータ又はウェブテレビベースのデバイス
である。一般的な実施の形態では、ネットワーク１０３
０への接続１０４０は通信会社１０３５によって実行さ
れ、このような接続はワイヤード又はワイヤレス接続の
何れでもよい。
用するためのハードウェアの一つの実施の形態を例示す
る。演算デバイス１０００は、ノート作成セッション中
に取得又は再生されるビデオ及び／又はデータストリー
ムを維持する格納デバイス１０１０を含む。サーバープ
ログラム１０２０は、ブラウザ又は他のタイプのデバイ
スからの要求に応じて取得した任意のデータストリーム
の部分を出力するように構成されている。演算デバイス
１０００及びサーバプログラム１０２０はそれぞれネッ
トワーク１０３０（例えば、インターネット）に接続さ
れている。ユーザは、周辺走査メカニズム１０６０及び
ディスプレイデバイス１０５５を伴う演算メカニズム１
０５０を有する。演算メカニズム１０５０は、（１０４
０を介して）ネットワーク１０３０に接続する標準パー
ソナルコンピュータ又はウェブテレビベースのデバイス
である。一般的な実施の形態では、ネットワーク１０３
０への接続１０４０は通信会社１０３５によって実行さ
れ、このような接続はワイヤード又はワイヤレス接続の
何れでもよい。
【００６４】本発明の１０７０からの出力は、種々のス
ナップ又はノート及び対応するグリフを含む。走査デバ
イスメカニズム１０６０を利用するユーザは、特定のノ
ート／スナップに関連するグリフを選択し、そのグリフ
を走査する。演算メカニズム１０５０は走査したグリフ
コードを読み取り、適切なメッセージをフォーマッティ
ングし、このメッセージはネットワーク１０３０に送ら
れサーバプログラム１０２０で受け取られる。サーバプ
ログラムは、走査したグリフに対応する、格納デバイス
１０１０に格納されたデータストリームの関連部分にア
クセスする。アクセス部分はネットワーク１０３０を介
して演算メカニズム１０５０に伝送され、ディスプレイ
デバイス１０５５（コンピュータースクリーン又は標準
テレビセット）に表示される。
ナップ又はノート及び対応するグリフを含む。走査デバ
イスメカニズム１０６０を利用するユーザは、特定のノ
ート／スナップに関連するグリフを選択し、そのグリフ
を走査する。演算メカニズム１０５０は走査したグリフ
コードを読み取り、適切なメッセージをフォーマッティ
ングし、このメッセージはネットワーク１０３０に送ら
れサーバプログラム１０２０で受け取られる。サーバプ
ログラムは、走査したグリフに対応する、格納デバイス
１０１０に格納されたデータストリームの関連部分にア
クセスする。アクセス部分はネットワーク１０３０を介
して演算メカニズム１０５０に伝送され、ディスプレイ
デバイス１０５５（コンピュータースクリーン又は標準
テレビセット）に表示される。
【００６５】演算メカニズム１０００、サーバープログ
ラム１０２０及び格納デバイス１０１０は、演算メカニ
ズム１０００と同じ演算メカニズムに配置されていても
よいし、ネットワーク１０３０又は他のデバイスを介し
て接続される異なる演算メカニズムに保持されていても
よい。サーバー、演算メカニズム及びネットワーク１０
３０の接続は、ワイヤード又は衛星、マイクロウェー
ブ、セルラー又は他のシステムを含むワイヤレス通信シ
ステムの何れでもよい。
ラム１０２０及び格納デバイス１０１０は、演算メカニ
ズム１０００と同じ演算メカニズムに配置されていても
よいし、ネットワーク１０３０又は他のデバイスを介し
て接続される異なる演算メカニズムに保持されていても
よい。サーバー、演算メカニズム及びネットワーク１０
３０の接続は、ワイヤード又は衛星、マイクロウェー
ブ、セルラー又は他のシステムを含むワイヤレス通信シ
ステムの何れでもよい。
【００６６】演算メカニズム１０５０及びディスプレイ
デバイス１０５５は、モバイル演算デバイス及びディス
プレイメカニズム、例えばラップトップコンピュータ、
パームタイプコンピュータ又はグリフコードを入力する
ためのスキャナ若しくは他のメカニズムを含む任意の電
子デバイスの形態を取ってもよい。演算デバイス１０５
０及びディスプレイ１０５５は、車両例えば自動車、配
達もしくは修理バンのダッシュボード又はホテルのロビ
ー、会議室に隣接するホール又はシステムを利用できる
あらゆる場所に備えられてよい。
デバイス１０５５は、モバイル演算デバイス及びディス
プレイメカニズム、例えばラップトップコンピュータ、
パームタイプコンピュータ又はグリフコードを入力する
ためのスキャナ若しくは他のメカニズムを含む任意の電
子デバイスの形態を取ってもよい。演算デバイス１０５
０及びディスプレイ１０５５は、車両例えば自動車、配
達もしくは修理バンのダッシュボード又はホテルのロビ
ー、会議室に隣接するホール又はシステムを利用できる
あらゆる場所に備えられてよい。
【００６７】ある実施の形態では、走査デバイスメカニ
ズム１０６０がテレビ及び／又はウェブテレビデバイス
の遠隔制御に統合されている。したがって、ユーザは、
プリントされたサマリー又は記事、広告又は本発明によ
って埋め込まれたグリフを有する任意のタイプの媒体を
有することができ、スキャナを利用してプリントされた
サマリー、記事等に関連するビデオ又は他のデータにア
クセスする。
ズム１０６０がテレビ及び／又はウェブテレビデバイス
の遠隔制御に統合されている。したがって、ユーザは、
プリントされたサマリー又は記事、広告又は本発明によ
って埋め込まれたグリフを有する任意のタイプの媒体を
有することができ、スキャナを利用してプリントされた
サマリー、記事等に関連するビデオ又は他のデータにア
クセスする。
【００６８】本発明は、グリフ技術を利用してプリント
したノート及びサマリーからビデオにアクセスする。さ
らに、本発明は、表及び直接的な符号化を含む、ビデオ
位置及び時間のオフセットをグリフに符号化する特定の
技術を含む。
したノート及びサマリーからビデオにアクセスする。さ
らに、本発明は、表及び直接的な符号化を含む、ビデオ
位置及び時間のオフセットをグリフに符号化する特定の
技術を含む。
【００６９】本発明は、グリフを使用して電子ノート作
成デバイス（例えば、ノートルック)から取得したノー
トのプリントアウトからビデオへのアクセスを提供し、
以下を含む。 ・ブロックグリフをノートページの手書きストローク及
び画像に関連付ける。 ・グリフアドレスカーペットを使用してビデオのタイム
ラインを形成し、これによって紙のタイムラインからの
ビデオアクセスを提供する。 ・ノートページにわたって二次元アドレスカーペットを
使用し、これによって索引オブジェクトからビデオにア
クセスするペンベースの走査デバイスのようなスキャナ
によって動作する紙インタフェースを提供する。紙イン
タフェースは図９のような出力をグリフカーペットペー
ジにプリントすることによって生成される。
成デバイス（例えば、ノートルック)から取得したノー
トのプリントアウトからビデオへのアクセスを提供し、
以下を含む。 ・ブロックグリフをノートページの手書きストローク及
び画像に関連付ける。 ・グリフアドレスカーペットを使用してビデオのタイム
ラインを形成し、これによって紙のタイムラインからの
ビデオアクセスを提供する。 ・ノートページにわたって二次元アドレスカーペットを
使用し、これによって索引オブジェクトからビデオにア
クセスするペンベースの走査デバイスのようなスキャナ
によって動作する紙インタフェースを提供する。紙イン
タフェースは図９のような出力をグリフカーペットペー
ジにプリントすることによって生成される。
【００７０】プリントした漫画ビデオサマリーの場合
は、図４に例示するように、 ・グリフアドレスカーペットを使用してビデオのタイム
ラインを形成し、これによってウェブのタイムラインか
らのビデオアクセスに類似する紙からのビデオアクセス
を提供する。 ・サマリーページにわたって二次元アドレスカーペット
を使用し、これによってキーフレームからビデオにアク
セスするウェブインタフェースに類似する紙インタフェ
ースを提供する。
は、図４に例示するように、 ・グリフアドレスカーペットを使用してビデオのタイム
ラインを形成し、これによってウェブのタイムラインか
らのビデオアクセスに類似する紙からのビデオアクセス
を提供する。 ・サマリーページにわたって二次元アドレスカーペット
を使用し、これによってキーフレームからビデオにアク
セスするウェブインタフェースに類似する紙インタフェ
ースを提供する。
【００７１】また、本発明はサーバー上のビデオの位置
及びビデオの時間のオフセットを特定する技術も提供す
る。これらによってビデオソース及び時間のオフセット
が同じグリフに符号化されるため、ビデオソースを特定
するのに別個の走査が必要ない。本発明は、以下を含
む。 ・ビデオのソース及び時間位置を特定するためのグリフ
カーペットアドレスにおける分散ラベルの使用。 ・ソース及び時間位置を特定するためのアドレスカーペ
ットにおけるインターレースコードの使用
及びビデオの時間のオフセットを特定する技術も提供す
る。これらによってビデオソース及び時間のオフセット
が同じグリフに符号化されるため、ビデオソースを特定
するのに別個の走査が必要ない。本発明は、以下を含
む。 ・ビデオのソース及び時間位置を特定するためのグリフ
カーペットアドレスにおける分散ラベルの使用。 ・ソース及び時間位置を特定するためのアドレスカーペ
ットにおけるインターレースコードの使用
【００７２】実験結果によって、ユーザはタイムライン
とオブジェクトベースのアクセスとの組み合わせを好む
ことが分かった。さらに、ビデオにアクセスするために
紙を使用することが受容され、ビデオサマリーにも同様
に有用であることが分かった。手書きのノートセグメン
ト及びビデオフレームプリントからのアドレスをロバス
ト復号することで、ノートルックのノートページのオー
バープリントがグリフカーペットページで行われてき
た。
とオブジェクトベースのアクセスとの組み合わせを好む
ことが分かった。さらに、ビデオにアクセスするために
紙を使用することが受容され、ビデオサマリーにも同様
に有用であることが分かった。手書きのノートセグメン
ト及びビデオフレームプリントからのアドレスをロバス
ト復号することで、ノートルックのノートページのオー
バープリントがグリフカーペットページで行われてき
た。
【００７３】コンピュータ技術者には明らかであるよう
に、従来の汎用又は専用デジタルコンピュータ又は本開
示の教示によってプログラミングしたマイクロプロセッ
サを使用して、本発明を容易に実行してよい。
に、従来の汎用又は専用デジタルコンピュータ又は本開
示の教示によってプログラミングしたマイクロプロセッ
サを使用して、本発明を容易に実行してよい。
【００７４】ソフトウェア技術者に明らかであるよう
に、本開示の教示に基づいて、適切なソフトウェアコー
ディングを熟練のプログラマーによって簡単に準備する
ことができる。当業者に明らかであるように、アプリケ
ーション特定集積回路を準備することによって、又は従
来の構成回路の適切なネットワークの相互接続によっ
て、本発明を実施してもよい。
に、本開示の教示に基づいて、適切なソフトウェアコー
ディングを熟練のプログラマーによって簡単に準備する
ことができる。当業者に明らかであるように、アプリケ
ーション特定集積回路を準備することによって、又は従
来の構成回路の適切なネットワークの相互接続によっ
て、本発明を実施してもよい。
【００７５】本発明は、本発明の処理の何れかを実行す
るためにコンピュータをプログラミングするのに使用で
きるインストラクションを格納した単数又は複数の記憶
媒体であるコンピュータプログラム製品を含む。記憶媒
体としては、以下に限定しないが、フロッピーディス
ク、光ディスク、ＤＶＤ、ＣＤ−ＲＯＭ、マイクロドラ
イブ及び光磁気ディスクを含む任意のタイプのディス
ク、ＲＯＭ、ＲＡＭ、ＥＰＲＯＭ、ＥＥＰＲＯＭ、ＤＲ
ＡＭ、ＶＲＡＭ、フラッシュメモリデバイス、磁気又は
光カード、（分子メモリＩＣを含む）ナノシステム又は
インストラクション及び／又はデータの格納に適した任
意のタイプの媒体若しくはデバイスを含む。
るためにコンピュータをプログラミングするのに使用で
きるインストラクションを格納した単数又は複数の記憶
媒体であるコンピュータプログラム製品を含む。記憶媒
体としては、以下に限定しないが、フロッピーディス
ク、光ディスク、ＤＶＤ、ＣＤ−ＲＯＭ、マイクロドラ
イブ及び光磁気ディスクを含む任意のタイプのディス
ク、ＲＯＭ、ＲＡＭ、ＥＰＲＯＭ、ＥＥＰＲＯＭ、ＤＲ
ＡＭ、ＶＲＡＭ、フラッシュメモリデバイス、磁気又は
光カード、（分子メモリＩＣを含む）ナノシステム又は
インストラクション及び／又はデータの格納に適した任
意のタイプの媒体若しくはデバイスを含む。
【００７６】単数又は複数のコンピュータ読取可能媒体
のうちの一つの格納されて、本発明は、汎用／専用コン
ピュータのハードウェア又はマイクロプロセッサを制御
するソフトウェア及びコンピュータ又はマイクロプロセ
ッサが人間のユーザ又は本発明の結果を利用する他のメ
カニズムと対話できるソフトウェアを含む。このような
ソフトウェアとしては、以下に限定しないが、デバイス
ドライバ、オペレーティングシステム、及びユーザアプ
リケーションを含む。最終的に、このようなコンピュー
タ読取可能媒体は上記のように本発明を実行するソフト
ウェアを含む。
のうちの一つの格納されて、本発明は、汎用／専用コン
ピュータのハードウェア又はマイクロプロセッサを制御
するソフトウェア及びコンピュータ又はマイクロプロセ
ッサが人間のユーザ又は本発明の結果を利用する他のメ
カニズムと対話できるソフトウェアを含む。このような
ソフトウェアとしては、以下に限定しないが、デバイス
ドライバ、オペレーティングシステム、及びユーザアプ
リケーションを含む。最終的に、このようなコンピュー
タ読取可能媒体は上記のように本発明を実行するソフト
ウェアを含む。
【００７７】汎用／専用コンピュータ又はマイクロプロ
セッサのプログラミング（ソフトウェア）に含まれるの
は、本発明の教示を実施するソフトウェアモジュールで
あり、以下に限定しないが、メディアストリームの取得
及び注釈付け、重要なノート作成イベントのタイムライ
ンの生成、静止フレームのメディアストリームのポイン
ト又はセグメントへのリンク及びこれを表示するグリフ
コードへのリンク、スライド変更の認識、キーフレーム
の要約、フレーム、インクストローク、及び他のデータ
をグリフ位置に相関させる表の作成、本発明の処理によ
る結果の通信である。
セッサのプログラミング（ソフトウェア）に含まれるの
は、本発明の教示を実施するソフトウェアモジュールで
あり、以下に限定しないが、メディアストリームの取得
及び注釈付け、重要なノート作成イベントのタイムライ
ンの生成、静止フレームのメディアストリームのポイン
ト又はセグメントへのリンク及びこれを表示するグリフ
コードへのリンク、スライド変更の認識、キーフレーム
の要約、フレーム、インクストローク、及び他のデータ
をグリフ位置に相関させる表の作成、本発明の処理によ
る結果の通信である。
【００７８】本発明の多数の変更及びバリエーションが
上記の教示によって可能であることは明らかである。し
たがって、本発明の請求の範囲内で、本明細書に具体的
に述べた以外の方法で本発明を実施できることが理解さ
れるであろう。
上記の教示によって可能であることは明らかである。し
たがって、本発明の請求の範囲内で、本明細書に具体的
に述べた以外の方法で本発明を実施できることが理解さ
れるであろう。
【図１】従来のビデオ再生デバイスのスクリーンショッ
トを示す図である。
トを示す図である。
【図２】ペンベースのコンピュータで実行するノート作
成アプリケーションを示す図である。
成アプリケーションを示す図である。
【図３】ビデオ、ホワイトボード入力及びユーザ注釈領
域を有するノート作成アプリケーションのスクリーンシ
ョットを示す図である。
域を有するノート作成アプリケーションのスクリーンシ
ョットを示す図である。
【図４】本発明の漫画ビデオサマリーの例を示す図であ
る。
る。
【図５】本発明のビデオサマリーを生成するための注釈
／データセグメント取得デバイス及び情報の流れの一つ
の実施の形態のブロック図である。
／データセグメント取得デバイス及び情報の流れの一つ
の実施の形態のブロック図である。
【図６】本発明の選択及び注釈の取得及び索引付けの処
理を説明するフローチャートである。
理を説明するフローチャートである。
【図７】本発明のグリフ付き注釈及び索引付きビデオセ
グメントの例示的な出力を示す図である。
グメントの例示的な出力を示す図である。
【図８】ビデオを要約しグリフを埋め込む本発明の処理
を説明するフローチャートである。
を説明するフローチャートである。
【図９】マルチメディアデータストリームのポイントに
アクセスするためにタイムラインが付加され、関連する
データグリフカーペットを有する（ビデオ及びホワイト
ボードスナップを含む）キーフレームサマリーを例示す
る図である。
アクセスするためにタイムラインが付加され、関連する
データグリフカーペットを有する（ビデオ及びホワイト
ボードスナップを含む）キーフレームサマリーを例示す
る図である。
【図１０】選択したキーフレーム及びノート作成システ
ムで取得した注釈の多数のポイントをマルチメディアデ
ータストリームにマッピングする例示的なデータカーペ
ットを例示する図である。
ムで取得した注釈の多数のポイントをマルチメディアデ
ータストリームにマッピングする例示的なデータカーペ
ットを例示する図である。
【図１１】本発明を使用してネットワーク接続デバイス
でビデオストリームのポイントにアクセスするために利
用されるハードウェア構造のブロック図である。
でビデオストリームのポイントにアクセスするために利
用されるハードウェア構造のブロック図である。
３５０、８４０ タイムライン ６１５、６２５、６３５ グリフ ８００ ビデオサマリー ８２０ グリフアドレスカーペット ９００ 二次元アドレスカーペット
───────────────────────────────────────────────────── フロントページの続き (72)発明者 篠岡 信 日本国 194−0211 東京都 町田市 相 原町 307−19 (72)発明者 宮崎 淳 日本国 251−0027 神奈川県 藤沢市 鵠沼 桜が岡 ３−11−７ (72)発明者 デイビッド エル．ヘクト アメリカ合衆国 94303 カリフォルニア 州 パロ アルト バーバラ ドライブ 2001 (72)発明者 エル．ノア フローレス アメリカ合衆国 94062 カリフォルニア 州 ウッドサイド スカイライン ブルバ ード 17907 Ｆターム(参考） 5C018 AB01 FA04 5C053 FA14 FA22 FA29 GA11 GB06 GB21 HA29 HA30 JA21 JA24 LA06 LA07 LA20 5D110 AA04 DA02 DA04 DB02 DC01 DC11 DD01 DE01
Claims (28)
- 【請求項１】 データストリームの少なくとも一部分に
対応する少なくとも一つのオブジェクトと、 前記オブジェクトに対応する前記データストリームの一
部分を特定する各オブジェクトに関連するコードと、 を含む出力、を含む、 データストリームにアクセスするインタフェース。 - 【請求項２】 前記コードが対応する各オブジェクトに
埋め込まれる請求項１に記載のインタフェース。 - 【請求項３】 前記出力が、前記コードの各々を前記デ
ータストリームのオフセットに相関させる表をさらに含
む請求項１に記載のインタフェース。 - 【請求項４】 前記出力がプリントアウトである請求項
１に記載のインタフェース。 - 【請求項５】 前記データストリームがビデオである請
求項１に記載のインタフェース。 - 【請求項６】 前記コードがデータグリフである請求項
１に記載のインタフェース。 - 【請求項７】 前記表がデータグリフである請求項３に
記載のインタフェース。 - 【請求項８】 前記コードの各々がデータグリフカーペ
ットを含み、 前記オブジェクトは、前記データグリフカーペットの対
応するコードに対応する位置に配置される、 請求項１に記載のインタフェース。 - 【請求項９】 前記データグリフカーペットのコード
が、前記データストリームの適切なオフセットも表すタ
イムライン上のポイントに対応するように、前記データ
グリフカーペットが前記タイムラインに関連して配置さ
れる請求項８に記載のインタフェース。 - 【請求項１０】 データストリームに関連する少なくと
も一つのオブジェクトを特定するステップと、 関連する各オブジェクトに対応する前記データストリー
ムのオフセットを決定するステップと、 各オフセット及び対応する関連オブジェクトを特定する
索引を形成するステップと、 を有するデータストリームへのアクセス用索引の形成方
法。 - 【請求項１１】 対応する前記オフセットを特定するコ
ードに関連する特定した前記オブジェクトの各々を出力
するステップをさらに含む請求項１０に記載の方法。 - 【請求項１２】 前記データストリームが、ビデオ又は
マルチメディアデータファイルである請求項１０に記載
の方法。 - 【請求項１３】 前記オブジェクトが、前記データスト
リームのキーフレーム、前記データストリームの選択し
たフレーム及び前記データストリームを参照して付けら
れたユーザ注釈のうちの少なくとも一つである請求項１
０に記載の方法。 - 【請求項１４】 関連するデジタルインクストロークの
セットをユーザ注釈としてグループ化するステップをさ
らに含む請求項１３に記載の方法。 - 【請求項１５】 前記グループ化するステップが、デジ
タルインクストロークのセットへのグループ化をさらに
含み、任意の一つのグループの各デジタルインクストロ
ークが、所定の時間間隔内でユーザによって形成され
る、請求項１３に記載の方法。 - 【請求項１６】 データストリームに対応するオブジェ
クトを走査するステップと、 走査した前記オブジェクトに基づいて前記データストリ
ームのオフセットを決定するステップと、 決定した前記オフセットに対応する前記データストリー
ムの一部分にアクセスするステップと、 を有するデータストリームアクセス方法。 - 【請求項１７】 前記決定するステップが、 走査した前記オブジェクトに関連するコードを読み取る
ステップと、 関連する前記コードをオフセットに相関させる表から該
オフセットにアクセスするステップと、 を含む請求項１６に記載の方法。 - 【請求項１８】 前記アクセスするステップが、 前記コードに対応する前記データストリームの一部分に
対する要求を遠隔コンピュータに送出するステップと、 前記データストリームの前記部分を受信するステップ
と、 を含む請求項１６に記載の方法。 - 【請求項１９】 前記要求が、http、ftp又は他のイン
ターネット関連要求タイプのうちの一つを含み、 前記遠隔コンピュータがインターネットに接続され、少
なくとも前記データストリームの少なくとも前記部分へ
のアクセスを有する、請求項１８に記載の方法。 - 【請求項２０】 前記要求が、前記オブジェクトに関連
して読み取られた前記コードを含み、 前記遠隔コンピュータが、前記コードを前記データスト
リームの対応する部分に相関させる表にアクセスする、 請求項１８に記載の方法。 - 【請求項２１】 前記受信ステップが、ストリーミング
ビデオの受信を含む請求項１６に記載の方法。 - 【請求項２２】 ビデオ索引に埋め込まれたグリフコー
ドを走査するように構成された走査デバイスと、 走査した前記グリフコードを読み取り、該グリフコード
に基づいて前記ビデオの一部分にアクセスするように構
成された演算デバイスと、 検索した前記ビデオの部分を出力するように構成された
ディスプレイメカニズムと、を含むノートからビデオに
アクセスするためのデバイス。 - 【請求項２３】 前記演算デバイスが、ワイヤード又は
ワイヤレスネットワークの何れかに接続できるネットワ
ーク接続を含み、 前記演算メカニズムが、前記ビデオの前記部分を遠隔デ
バイスから前記ネットワーク接続を介して要求できるよ
うに構成されている、 請求項２２に記載のデバイス。 - 【請求項２４】 前記演算メカニズムが、前記グリフコ
ードを前記ビデオのオフセットに相関させる表を含む請
求項２３に記載のデバイス。 - 【請求項２５】 前記演算メカニズムが、前記走査デバ
イスによって前記表を読み取るように構成される請求項
２４に記載のデバイス。 - 【請求項２６】 前記演算デバイスが、パームタイプコ
ンピュータ及びワイヤレスネットワーク接続を含む請求
項２２に記載のデバイス。 - 【請求項２７】 前記走査デバイスが、補助装置の遠隔
制御に統合される請求項２２に記載のデバイス。 - 【請求項２８】 前記補助装置が、コンピュータ、テレ
ビ及びウェブテレビデバイスのうちの一つである請求項
２７に記載のデバイス。
Applications Claiming Priority (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| US548685 | 2000-04-13 | ||
| US09/548,685 US7647555B1 (en) | 2000-04-13 | 2000-04-13 | System and method for video access from notes or summaries |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JP2002057981A true JP2002057981A (ja) | 2002-02-22 |
Family
ID=24189943
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2001115802A Pending JP2002057981A (ja) | 2000-04-13 | 2001-04-13 | データストリームにアクセスするインタフェース、データストリームへのアクセス用検索の形成方法、データストリームアクセス方法及びノートからビデオにアクセスするためのデバイス |
Country Status (2)
| Country | Link |
|---|---|
| US (1) | US7647555B1 (ja) |
| JP (1) | JP2002057981A (ja) |
Cited By (11)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2004080769A (ja) * | 2002-07-30 | 2004-03-11 | Fuji Xerox Co Ltd | マルチメディア又はビデオストリームの注釈の共同インデックスをフィルタリングして、見るための方法、システム、ユーザインタフェース、及び実行させるためのプログラム |
| JP2004240968A (ja) * | 2003-01-31 | 2004-08-26 | Ricoh Co Ltd | 増やされるメモ書類の生成 |
| JP2005260513A (ja) * | 2004-03-10 | 2005-09-22 | Fuji Xerox Co Ltd | コンテンツ処理システム及びコンテンツ処理方法、並びにコンピュータ・プログラム |
| JP2006251378A (ja) * | 2005-03-10 | 2006-09-21 | Fuji Xerox Co Ltd | 情報記録装置及び情報処理システム |
| JP2007006473A (ja) * | 2005-06-20 | 2007-01-11 | Ricoh Co Ltd | ディジタル情報を注釈するためのシステム、方法及び該方法を実行させる命令を記憶する記憶媒体 |
| JP2007150552A (ja) * | 2005-11-25 | 2007-06-14 | Fujitsu Ltd | 同期電子コンテンツ管理プログラム、同期電子コンテンツ管理装置及び同期電子コンテンツ管理方法 |
| US7350140B2 (en) | 2003-03-13 | 2008-03-25 | Fuji Xerox Co., Ltd. | User-data relating apparatus with respect to continuous data |
| JP2009105901A (ja) * | 2002-06-19 | 2009-05-14 | Microsoft Corp | ビデオ合成を表示するための方法 |
| WO2009105303A1 (en) * | 2008-02-20 | 2009-08-27 | Microsoft Corporation | Techniques to automatically identify participants for a multimedia conference event |
| US7793212B2 (en) | 2002-12-20 | 2010-09-07 | International Business Machines Corporation | System and method for annotating multi-modal characteristics in multimedia documents |
| US8380866B2 (en) | 2009-03-20 | 2013-02-19 | Ricoh Company, Ltd. | Techniques for facilitating annotations |
Families Citing this family (45)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US6789109B2 (en) * | 2001-02-22 | 2004-09-07 | Sony Corporation | Collaborative computer-based production system including annotation, versioning and remote interaction |
| US7540011B2 (en) * | 2001-06-11 | 2009-05-26 | Arrowsight, Inc. | Caching graphical interface for displaying video and ancillary data from a saved video |
| JP3707407B2 (ja) * | 2001-08-28 | 2005-10-19 | セイコーエプソン株式会社 | パスワードを投写するプロジェクタ |
| US7861169B2 (en) * | 2001-11-19 | 2010-12-28 | Ricoh Co. Ltd. | Multimedia print driver dialog interfaces |
| US7747655B2 (en) * | 2001-11-19 | 2010-06-29 | Ricoh Co. Ltd. | Printable representations for time-based media |
| US7293071B2 (en) * | 2002-05-27 | 2007-11-06 | Seiko Epson Corporation | Image data transmission system, process and program, image data output device and image display device |
| JP2004287160A (ja) * | 2003-03-24 | 2004-10-14 | Seiko Epson Corp | 画像表示システム、プロジェクタ、画像表示方法、プロジェクタ制御方法、画像表示プログラムおよびプロジェクタ制御プログラム |
| US7864352B2 (en) * | 2003-09-25 | 2011-01-04 | Ricoh Co. Ltd. | Printer with multimedia server |
| JP2005108230A (ja) * | 2003-09-25 | 2005-04-21 | Ricoh Co Ltd | オーディオ／ビデオコンテンツ認識・処理機能内蔵印刷システム |
| US8077341B2 (en) * | 2003-09-25 | 2011-12-13 | Ricoh Co., Ltd. | Printer with audio or video receiver, recorder, and real-time content-based processing logic |
| JP2005208823A (ja) * | 2004-01-21 | 2005-08-04 | Seiko Epson Corp | プロジェクタのネットワークシステム |
| US8274666B2 (en) * | 2004-03-30 | 2012-09-25 | Ricoh Co., Ltd. | Projector/printer for displaying or printing of documents |
| JP5040341B2 (ja) | 2006-04-04 | 2012-10-03 | セイコーエプソン株式会社 | プロジェクタシステム |
| JP2007334470A (ja) * | 2006-06-13 | 2007-12-27 | Fuji Xerox Co Ltd | 電子付箋に係る情報処理装置及びプログラム |
| US20080059961A1 (en) * | 2006-08-31 | 2008-03-06 | Microsoft Corporation | Output of Help Elements that Correspond to Selectable Portions of Content |
| US8196042B2 (en) | 2008-01-21 | 2012-06-05 | Microsoft Corporation | Self-revelation aids for interfaces |
| US8140973B2 (en) * | 2008-01-23 | 2012-03-20 | Microsoft Corporation | Annotating and sharing content |
| US8639032B1 (en) * | 2008-08-29 | 2014-01-28 | Freedom Scientific, Inc. | Whiteboard archiving and presentation method |
| US8769589B2 (en) * | 2009-03-31 | 2014-07-01 | At&T Intellectual Property I, L.P. | System and method to create a media content summary based on viewer annotations |
| US8897603B2 (en) * | 2009-08-20 | 2014-11-25 | Nikon Corporation | Image processing apparatus that selects a plurality of video frames and creates an image based on a plurality of images extracted and selected from the frames |
| US8881012B2 (en) * | 2009-11-17 | 2014-11-04 | LHS Productions, Inc. | Video storage and retrieval system and method |
| US8773490B2 (en) * | 2010-05-28 | 2014-07-08 | Avaya Inc. | Systems, methods, and media for identifying and selecting data images in a video stream |
| US20120072845A1 (en) * | 2010-09-21 | 2012-03-22 | Avaya Inc. | System and method for classifying live media tags into types |
| US9208222B2 (en) | 2010-11-26 | 2015-12-08 | Htc Corporation | Note management methods and systems |
| US20130334300A1 (en) | 2011-01-03 | 2013-12-19 | Curt Evans | Text-synchronized media utilization and manipulation based on an embedded barcode |
| US9473449B2 (en) * | 2011-02-10 | 2016-10-18 | Jeffrey J. Ausfeld | Multi-platform collaboration appliance |
| US9923982B2 (en) * | 2011-06-24 | 2018-03-20 | Avaya Inc. | Method for visualizing temporal data |
| KR101897774B1 (ko) * | 2012-05-21 | 2018-09-12 | 엘지전자 주식회사 | 녹음된 음성의 탐색을 용이하게 하는 방법 및 이를 구현한 전자기기 |
| GB2503888A (en) * | 2012-07-10 | 2014-01-15 | Wirewax Ltd | Expandable video playback timeline that includes the location of tag content. |
| US8793582B2 (en) * | 2012-08-22 | 2014-07-29 | Mobitv, Inc. | Personalized timeline presentation |
| US10558729B2 (en) | 2012-11-30 | 2020-02-11 | Microsoft Technology Licensing, Llc | Enhanced collection environments |
| EP3162079B1 (en) * | 2014-06-30 | 2020-12-23 | Greeneden U.S. Holdings II, LLC | System and method for recording agent interactions |
| US9703771B2 (en) | 2015-03-01 | 2017-07-11 | Microsoft Technology Licensing, Llc | Automatic capture of information from audio data and computer operating context |
| US9899038B2 (en) | 2016-06-30 | 2018-02-20 | Karen Elaine Khaleghi | Electronic notebook system |
| US10970476B2 (en) * | 2017-05-17 | 2021-04-06 | Microsoft Technology Licensing, Llc | Augmenting digital ink strokes |
| CN109726367B (zh) * | 2017-10-27 | 2022-06-10 | 腾讯科技（北京）有限公司 | 一种批注展示的方法及相关装置 |
| US10909378B2 (en) | 2017-11-07 | 2021-02-02 | Comcast Cable Communications, Llc | Processing content based on natural language queries |
| US11321880B2 (en) * | 2017-12-22 | 2022-05-03 | Sony Corporation | Information processor, information processing method, and program for specifying an important region of an operation target in a moving image |
| US10235998B1 (en) | 2018-02-28 | 2019-03-19 | Karen Elaine Khaleghi | Health monitoring system and appliance |
| US10681402B2 (en) | 2018-10-09 | 2020-06-09 | International Business Machines Corporation | Providing relevant and authentic channel content to users based on user persona and interest |
| US10559307B1 (en) | 2019-02-13 | 2020-02-11 | Karen Elaine Khaleghi | Impaired operator detection and interlock apparatus |
| US10735191B1 (en) | 2019-07-25 | 2020-08-04 | The Notebook, Llc | Apparatus and methods for secure distributed communications and data access |
| US11042698B2 (en) | 2019-08-22 | 2021-06-22 | Paul Bannister | System and method of contextually converting a media file into an electronic document |
| CN112788264A (zh) * | 2019-11-07 | 2021-05-11 | 文昌科技有限公司 | 一种录音录像搜索系统及其方法 |
| CN111556371A (zh) * | 2020-05-20 | 2020-08-18 | 维沃移动通信有限公司 | 笔记记录方法及电子设备 |
Family Cites Families (23)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US5142576A (en) * | 1989-02-07 | 1992-08-25 | Market Data Corporation | System for securely providing restricted video information |
| US7171016B1 (en) * | 1993-11-18 | 2007-01-30 | Digimarc Corporation | Method for monitoring internet dissemination of image, video and/or audio files |
| US6449377B1 (en) * | 1995-05-08 | 2002-09-10 | Digimarc Corporation | Methods and systems for watermark processing of line art images |
| US6760463B2 (en) * | 1995-05-08 | 2004-07-06 | Digimarc Corporation | Watermarking methods and media |
| US6829368B2 (en) * | 2000-01-26 | 2004-12-07 | Digimarc Corporation | Establishing and interacting with on-line media collections using identifiers in media signals |
| US6411725B1 (en) * | 1995-07-27 | 2002-06-25 | Digimarc Corporation | Watermark enabled video objects |
| JP3532332B2 (ja) * | 1995-11-10 | 2004-05-31 | パイオニア株式会社 | 画像情報再生装置 |
| US6098882A (en) * | 1996-03-01 | 2000-08-08 | Cobblestone Software, Inc. | Variable formatting of digital data into a pattern |
| US6333750B1 (en) * | 1997-03-12 | 2001-12-25 | Cybex Computer Products Corporation | Multi-sourced video distribution hub |
| US6036086A (en) * | 1997-03-28 | 2000-03-14 | Lucent Technologies Inc. | Apparatus and method for initiating a telephone transaction using a scanner |
| US6665835B1 (en) * | 1997-12-23 | 2003-12-16 | Verizon Laboratories, Inc. | Real time media journaler with a timing event coordinator |
| GB9800900D0 (en) * | 1998-01-17 | 1998-03-11 | Philips Electronics Nv | Graphic image generation and coding |
| US6665490B2 (en) * | 1998-04-01 | 2003-12-16 | Xerox Corporation | Obtaining and using data associating annotating activities with portions of recordings |
| US6785289B1 (en) * | 1998-06-05 | 2004-08-31 | Sarnoff Corporation | Method and apparatus for aligning sub-stream splice points in an information stream |
| US6956593B1 (en) * | 1998-09-15 | 2005-10-18 | Microsoft Corporation | User interface for creating, viewing and temporally positioning annotations for media content |
| WO2000016541A1 (en) * | 1998-09-15 | 2000-03-23 | Microsoft Corporation | Annotation creation and notification via electronic mail |
| EP1032203A3 (en) * | 1999-02-26 | 2002-11-06 | Sony Corporation | Data transmitting apparatus and method thereof, recording apparatus, and recording and reproducing apparatus |
| US6452615B1 (en) * | 1999-03-24 | 2002-09-17 | Fuji Xerox Co., Ltd. | System and apparatus for notetaking with digital video and ink |
| US6938029B1 (en) * | 1999-03-31 | 2005-08-30 | Allan Y. Tien | System and method for indexing recordings of observed and assessed phenomena using pre-defined measurement items |
| US6512522B1 (en) * | 1999-04-15 | 2003-01-28 | Avid Technology, Inc. | Animation of three-dimensional characters along a path for motion video sequences |
| US7725812B1 (en) * | 2000-03-31 | 2010-05-25 | Avid Technology, Inc. | Authoring system for combining temporal and nontemporal digital media |
| AU2001284628A1 (en) * | 2001-08-31 | 2003-03-10 | Kent Ridge Digital Labs | Time-based media navigation system |
| US20040040041A1 (en) * | 2002-08-22 | 2004-02-26 | Microsoft Corporation | Interactive applications for stored video playback |
-
2000
- 2000-04-13 US US09/548,685 patent/US7647555B1/en not_active Expired - Fee Related
-
2001
- 2001-04-13 JP JP2001115802A patent/JP2002057981A/ja active Pending
Cited By (15)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2009105901A (ja) * | 2002-06-19 | 2009-05-14 | Microsoft Corp | ビデオ合成を表示するための方法 |
| JP2004080769A (ja) * | 2002-07-30 | 2004-03-11 | Fuji Xerox Co Ltd | マルチメディア又はビデオストリームの注釈の共同インデックスをフィルタリングして、見るための方法、システム、ユーザインタフェース、及び実行させるためのプログラム |
| US7793212B2 (en) | 2002-12-20 | 2010-09-07 | International Business Machines Corporation | System and method for annotating multi-modal characteristics in multimedia documents |
| JP2004240968A (ja) * | 2003-01-31 | 2004-08-26 | Ricoh Co Ltd | 増やされるメモ書類の生成 |
| JP4560299B2 (ja) * | 2003-01-31 | 2010-10-13 | 株式会社リコー | 増やされるメモ書類の生成 |
| US7350140B2 (en) | 2003-03-13 | 2008-03-25 | Fuji Xerox Co., Ltd. | User-data relating apparatus with respect to continuous data |
| JP2005260513A (ja) * | 2004-03-10 | 2005-09-22 | Fuji Xerox Co Ltd | コンテンツ処理システム及びコンテンツ処理方法、並びにコンピュータ・プログラム |
| JP4686990B2 (ja) * | 2004-03-10 | 2011-05-25 | 富士ゼロックス株式会社 | コンテンツ処理システム及びコンテンツ処理方法、並びにコンピュータ・プログラム |
| JP2006251378A (ja) * | 2005-03-10 | 2006-09-21 | Fuji Xerox Co Ltd | 情報記録装置及び情報処理システム |
| JP4715246B2 (ja) * | 2005-03-10 | 2011-07-06 | 富士ゼロックス株式会社 | 情報記録装置及び情報処理システム |
| JP2007006473A (ja) * | 2005-06-20 | 2007-01-11 | Ricoh Co Ltd | ディジタル情報を注釈するためのシステム、方法及び該方法を実行させる命令を記憶する記憶媒体 |
| US8805929B2 (en) | 2005-06-20 | 2014-08-12 | Ricoh Company, Ltd. | Event-driven annotation techniques |
| JP2007150552A (ja) * | 2005-11-25 | 2007-06-14 | Fujitsu Ltd | 同期電子コンテンツ管理プログラム、同期電子コンテンツ管理装置及び同期電子コンテンツ管理方法 |
| WO2009105303A1 (en) * | 2008-02-20 | 2009-08-27 | Microsoft Corporation | Techniques to automatically identify participants for a multimedia conference event |
| US8380866B2 (en) | 2009-03-20 | 2013-02-19 | Ricoh Company, Ltd. | Techniques for facilitating annotations |
Also Published As
| Publication number | Publication date |
|---|---|
| US7647555B1 (en) | 2010-01-12 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US7647555B1 (en) | System and method for video access from notes or summaries | |
| JP4171157B2 (ja) | ノート作成システム、ノート作成方法及びノート作成システムの動作方法 | |
| US7111009B1 (en) | Interactive playlist generation using annotations | |
| US7861169B2 (en) | Multimedia print driver dialog interfaces | |
| US6484156B1 (en) | Accessing annotations across multiple target media streams | |
| JP4833573B2 (ja) | 複合的な電子表現物を作成する方法、装置及びデータ処理システム | |
| JP4453392B2 (ja) | ライブのおよび記録されたマルチメディアドキュメントをブックマークするシステムと方法 | |
| US6976229B1 (en) | Method and apparatus for storytelling with digital photographs | |
| US7672864B2 (en) | Generating and displaying level-of-interest values | |
| US7506262B2 (en) | User interface for creating viewing and temporally positioning annotations for media content | |
| US5592607A (en) | Interactive method and system for producing address-correlated information using user-specified address zones | |
| US5564005A (en) | Interactive system for producing, storing and retrieving information correlated with a recording of an event | |
| US20060277457A1 (en) | Method and apparatus for integrating video into web logging | |
| JP2005092879A (ja) | プレゼンテーションの間にキャプチャされた情報を該プレゼンテーション用の紙文書配布物を用いてアクセスする手法 | |
| CN101657814A (zh) | 为媒体资产管理指定精确帧图像的系统和方法 | |
| JP2004080750A (ja) | ホワイトボードおよび音声のキャプチャのためのシステムおよび方法 | |
| JP2010120371A (ja) | 動画コンテンツを含むドキュメントを閲覧及び印刷するための情報出力方法、装置及びプログラム | |
| US20050080818A1 (en) | Active images | |
| JP2004112372A (ja) | 画像処理システム | |
| JP2006031492A (ja) | 情報管理方法および情報管理装置 | |
| Ziewer | Navigational indices and full text search by automated analyses of screen recorded data | |
| EP1526442B1 (en) | Printer driver user interface for multimedia data | |
| KR101328270B1 (ko) | 스마트 ｔｖ의 비디오 어노테이션 및 증강 방법 및 그 시스템 | |
| JP4250983B2 (ja) | 連続データへのユーザデータ関連付け装置 | |
| Wallick et al. | Marker and chalkboard regions |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20040909 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20070308 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20070320 |
|
| A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20070427 |
|
| A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20070626 |