JP5257132B2 - Information synchronization apparatus, information synchronization method, information synchronization program, and recording medium - Google Patents

Information synchronization apparatus, information synchronization method, information synchronization program, and recording medium Download PDF

Info

Publication number
JP5257132B2
JP5257132B2 JP2009040028A JP2009040028A JP5257132B2 JP 5257132 B2 JP5257132 B2 JP 5257132B2 JP 2009040028 A JP2009040028 A JP 2009040028A JP 2009040028 A JP2009040028 A JP 2009040028A JP 5257132 B2 JP5257132 B2 JP 5257132B2
Authority
JP
Japan
Prior art keywords
information
output
time
recording
display
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2009040028A
Other languages
Japanese (ja)
Other versions
JP2010199760A (en
Inventor
慶二 大村
クリストフ スーリエ
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Ricoh Co Ltd
Original Assignee
Ricoh Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Ricoh Co Ltd filed Critical Ricoh Co Ltd
Priority to JP2009040028A priority Critical patent/JP5257132B2/en
Publication of JP2010199760A publication Critical patent/JP2010199760A/en
Application granted granted Critical
Publication of JP5257132B2 publication Critical patent/JP5257132B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Description

本発明は、情報同期装置、情報同期方法、情報同期プログラム及び記録媒体に関し、詳細には、映像、音声、画像、文字列等の情報を表示等の出力処理する装置と映像、音声、画像等の情報を収録する装置とが非接続の状態で出力及び収録された情報を同期させる情報同期装置、情報同期方法、情報同期プログラム及び記録媒体に関する。   The present invention relates to an information synchronization apparatus, an information synchronization method, an information synchronization program, and a recording medium, and more specifically, an apparatus that performs output processing such as display of information such as video, audio, images, and character strings, and video, audio, images, etc. The present invention relates to an information synchronization apparatus, an information synchronization method, an information synchronization program, and a recording medium that synchronize information output and recorded in an unconnected state with an apparatus that records the information.

映像、音声、画像、文字列等の情報のうち少なくとも1つの情報を出力する情報出力装置(例えば、コンピュータと該コンピュータの出力情報を表示出力するプロジェクター)で出力された情報と、映像、音声、画像、文字列等のうち少なくとも1つの情報を収録する収録装置で収録された収録情報とを同期させた同期情報を情報同期装置で生成する場合、該情報出力装置と収録装置及び情報同期装置をケーブル等で物理的に接続し、両情報の同期を取って同期情報を生成している。   Information output by an information output device (for example, a computer and a projector for displaying and outputting the output information of the computer), video, audio, When generating synchronization information that is synchronized with recording information recorded by a recording device that records at least one piece of information such as an image or a character string, the information output device, the recording device, and the information synchronization device are It is physically connected by a cable or the like, and synchronization information is generated by synchronizing both pieces of information.

例えば、プロジェクター等の表示装置を利用した講演等のプレゼンテーションにおいては、話者(プレゼンター)が操作に応じて予め作成されて格納されているプレゼンテーションファイルをプレゼンテーション実施装置(パーソナルコンピュータ等)で実行して、映像、音声等のマルチメディア情報からなるプレゼンテーション情報をプロジェクター等で表示させ、この話者及び出力装置から出力される映像、音声等のプレゼンテーション情報をデジタルカメラ等の収録装置で録画・記録する。そして、プレゼンテーション実施装置及び収録装置に、コンテンツ生成装置を接続し、コンテンツ生成装置で、プレゼンテーション実施装置のプレゼンテーション情報と収録装置に記録された収録情報を同期させて合成して記録ファイル(同期情報)を生成する(特許文献1参照)。   For example, in a presentation such as a lecture using a display device such as a projector, a speaker (presenter) executes a presentation file created and stored in advance according to an operation on a presentation execution device (such as a personal computer). Presentation information including multimedia information such as video and audio is displayed by a projector or the like, and presentation information such as video and audio output from the speaker and the output device is recorded and recorded by a recording device such as a digital camera. Then, the content generation device is connected to the presentation execution device and the recording device, and the content generation device synchronizes and combines the presentation information of the presentation execution device and the recording information recorded in the recording device to record files (synchronization information). Is generated (see Patent Document 1).

しかしながら、上記従来技術にあっては、プレゼンテーション実施装置、収録装置及びコンテンツ生成装置を接続し、コンテンツ生成装置で、プレゼンテーション実施装置のプレゼンテーション情報と収録装置に収録された収録情報を同期させて合成して記録ファイル(コンテンツ)を生成しているため、これらの複数の装置をプレゼンテーション会場等で接続してセットする必要があり、同期情報を生成するための作業性が悪いという問題があった。   However, in the above prior art, the presentation execution device, the recording device, and the content generation device are connected, and the content generation device synchronizes the presentation information of the presentation execution device and the recording information recorded in the recording device. Since a recording file (content) is generated, it is necessary to connect and set these devices at a presentation venue or the like, and there is a problem that workability for generating synchronization information is poor.

そこで、本発明は、表示情報を含む出力情報の出力後に、該出力情報を記録した出力情報と該出力情報を収録手段で収録した収録情報との同期を適切に取ることのできる情報同期装置、情報同期方法、情報同期プログラム及び記録媒体を提供することを目的としている。   Therefore, the present invention provides an information synchronization apparatus capable of appropriately synchronizing the output information recorded with the output information and the recorded information recorded with the recording means after the output of the output information including the display information, An object is to provide an information synchronization method, an information synchronization program, and a recording medium.

本発明は、上記目的を達成するために、出力指示操作等の操作に応じて、音声情報、表示情報等のような複数種類の情報のうち少なくとも表示情報を出力情報として情報出力手段から出力し、該操作内容をメタ情報として取得するとともに、該情報出力手段が該出力情報を出力する時間情報を出力時間情報として取得して、該メタ情報及び該出力情報を該出力時間情報に関連付けて出力関連情報として出力関連情報記憶手段に記憶する。前記出力時間情報を所定レイアウトに基づいて表示情報に変換して前記出力情報の表示情報に組み込んで前記情報出力手段に出力させ、この情報出力手段で出力される表示情報を含む前記出力情報を所定の収録手段で取り込んで記憶手段に収録情報として収録して、この記憶手段の収録情報を取り込んで、該収録情報に組み込まれている前記出力時間表示情報を出力時間解析手段で解析して前記出力時間を取得する。そして、情報同期手段が、前記出力関連情報記憶手段の記憶する前記出力関連情報の前記出力時間情報と前記メタ情報に基づいて前記出力情報の出力時間と前記出力時間解析手段の取得した前記出力時間とを同期させることを特徴としている。   In order to achieve the above object, the present invention outputs at least display information from a plurality of types of information such as audio information and display information as output information from the information output means in response to an operation such as an output instruction operation. The operation contents are acquired as meta information, and the information output means acquires time information for outputting the output information as output time information, and outputs the meta information and the output information in association with the output time information. It is stored in the output related information storage means as related information. The output time information is converted into display information based on a predetermined layout, incorporated into the display information of the output information and output to the information output means, and the output information including the display information output by the information output means is determined in advance. The recording means is recorded as recording information in the storage means, the recording information of the storage means is acquired, the output time display information incorporated in the recording information is analyzed by the output time analysis means, and the output is performed. Get time. Then, the information synchronization means outputs the output time of the output information and the output time obtained by the output time analysis means based on the output time information and the meta information of the output related information stored in the output related information storage means. It is characterized by synchronizing with.

また、本発明は、前記情報同期手段の同期結果に基づいて前記出力関連情報記憶手段の前記出力情報と前記収録手段が収録した前記収録情報を同期させた合成情報を生成することを特徴としてもよい。   The present invention may also be characterized in that, based on a synchronization result of the information synchronization means, synthetic information is generated by synchronizing the output information of the output related information storage means and the recording information recorded by the recording means. Good.

さらに、本発明は、前記収録手段が、前記表示情報を含む前記出力情報を一時記憶手段に一時保管して、計時手段から該出力情報を取り込んだ取り込み時間情報を取得して取り込み時間表示情報に変換して該出力情報に該取り込み時間表示情報を付加し、この出力情報を収録した収録情報に付加されている前記取り込み時間表示情報を解析して前記取り込み時間を取得し、前記取り込み時間及び前記出力関連情報記憶手段の記憶する前記出力時間情報に基づいて前記出力情報の出力時間と前記収録手段が収録した前記収録情報の前記出力時間とを同期させることを特徴としてもよい。   Further, according to the present invention, the recording unit temporarily stores the output information including the display information in a temporary storage unit, acquires the capture time information that captures the output information from the time measuring unit, and obtains the capture time display information. Converting and adding the capture time display information to the output information, analyzing the capture time display information added to the recording information recording the output information, obtaining the capture time, and acquiring the capture time and the capture time The output time of the output information and the output time of the recording information recorded by the recording unit may be synchronized based on the output time information stored in the output related information storage unit.

本発明によれば、情報出力手段から表示情報を含む出力情報を出力するとともに収録手段によって該出力情報を取り込んで記憶手段に記憶する際に、情報出力手段と収録手段を物理的に接続することなく、該情報出力手段による出力情報の出力後に、該出力情報を記録した出力情報と収録手段の収録した収録情報の同期を適切に取ることができる。   According to the present invention, when the output information including the display information is output from the information output means and the output information is captured by the recording means and stored in the storage means, the information output means and the recording means are physically connected. Rather, after the output information is output by the information output means, the output information recording the output information and the recording information recorded by the recording means can be appropriately synchronized.

本発明の一実施例を適用した情報同期システムのシステム構成及び処理流れを示す図。The figure which shows the system configuration | structure and process flow of an information synchronization system to which one Example of this invention is applied. コンピュータの要部ブロック構成図。The principal part block block diagram of a computer. 映像装置の記録ファイル記録処理機構部のブロック構成図。The block diagram of the recording file recording processing mechanism part of a video device. プレゼンテーション実施時のコンピュータの機能ブロック構成図。The functional block block diagram of the computer at the time of presentation implementation. 内部時間表示時のコンピュータの機能ブロック構成図。The functional block block diagram of the computer at the time of internal time display. 情報同期・コンテンツ生成時のコンピュータの機能ブロック構成図。The functional block block diagram of the computer at the time of information synchronization and content production | generation. 映像装置による記録ファイル記録処理を示すフローチャート。The flowchart which shows the recording file recording process by a video device. コンピュータによるプレゼンテーション内容収録処理を示すフローチャート。The flowchart which shows the presentation content recording process by a computer. コンピュータによる内部時間表示処理を示すフローチャート。The flowchart which shows the internal time display process by a computer. コンピュータによる情報同期・コンテンツ生成処理を示すフローチャート。The flowchart which shows the information synchronization and content production | generation process by a computer.

以下、本発明の好適な実施例を添付図面に基づいて詳細に説明する。なお、以下に述べる実施例は、本発明の好適な実施例であるので、技術的に好ましい種々の限定が付されているが、本発明の範囲は、以下の説明によって不当に限定されるものではなく、また、本実施の形態で説明される構成の全てが本発明の必須の構成要件ではない。   Hereinafter, preferred embodiments of the present invention will be described in detail with reference to the accompanying drawings. In addition, since the Example described below is a suitable Example of this invention, various technically preferable restrictions are attached | subjected, However, The range of this invention is unduly limited by the following description. However, not all the configurations described in the present embodiment are essential constituent elements of the present invention.

図1〜図10は、本発明の情報同期装置、情報同期方法、情報同期プログラム及び記録媒体の一実施例を示す図であり、図1は、本発明の情報同期装置、情報同期方法、情報同期プログラム及び記録媒体の一実施例を適用した情報同期システム(情報同期装置)1のシステム構成及び処理流れを示す図である。   1 to 10 are diagrams showing an embodiment of an information synchronization apparatus, information synchronization method, information synchronization program, and recording medium of the present invention. FIG. 1 is an information synchronization apparatus, information synchronization method, and information of the present invention. 1 is a diagram showing a system configuration and a processing flow of an information synchronization system (information synchronization apparatus) 1 to which an embodiment of a synchronization program and a recording medium is applied.

図1において、情報同期システム1は、映像装置10及びコンピュータ100を備えており、コンピュータ100は、プレゼンテーション実施装置及び情報同期装置として機能する。   In FIG. 1, an information synchronization system 1 includes a video apparatus 10 and a computer 100, and the computer 100 functions as a presentation execution apparatus and an information synchronization apparatus.

コンピュータ100は、通常のハードウェア構成のパーソナルコンピュータが用いられ、CPU(Central Processing Unit )101、メモリ102、表示部103、外部記憶部104、I/F(インターフェイス)105及び入力部106等を備えていて、各部は、バス107により接続されている。   The computer 100 is a personal computer having a normal hardware configuration, and includes a CPU (Central Processing Unit) 101, a memory 102, a display unit 103, an external storage unit 104, an I / F (interface) 105, an input unit 106, and the like. Each part is connected by a bus 107.

メモリ(出力関連情報記憶手段)102は、ROM(Read Only Memory)、RAM(Random Access Memory)、ハードディスク(HDD)等で構成され、OS(Operating System)、各種アプリケーションソフトウェア及び必要な情報を格納している。   The memory (output related information storage means) 102 is composed of a ROM (Read Only Memory), a RAM (Random Access Memory), a hard disk (HDD), etc., and stores an OS (Operating System), various application software, and necessary information. ing.

CPU(メタ情報取得手段、出力時間情報取得手段、出力時間表示制御手段、出力時間解析手段、情報同期手段)101は、メモリ102内のプログラムに基づいて、各種動作処理を行うとともに、プレゼンテーションプログラムに基づいてプレゼンテーション実施装置としての機能を実行するとともに、情報同期プログラムに基づいて映像装置10の記録したマルチメディア情報とコンピュータ100の生成するプレゼンテーション情報の同期を取って合成した記録情報(マルチメディアコンテンツ)を生成する情報同期方法を実行する。   A CPU (meta information acquisition means, output time information acquisition means, output time display control means, output time analysis means, information synchronization means) 101 performs various operation processes based on a program in the memory 102 and also converts it into a presentation program. Based on the information synchronization program, the multimedia information recorded by the video device 10 and the presentation information generated by the computer 100 are synchronized and combined (multimedia content). Execute the information synchronization method to generate.

すなわち、コンピュータ100は、ROM、EEPROM(Electrically Erasable and Programmable Read Only Memory )、EPROM、フラッシュメモリ、フレキシブルディスク、CD−ROM(Compact Disc Read Only Memory )、CD−RW(Compact Disc Rewritable )、DVD(Digital Video Disk)、SD(Secure Digital)カード、MO(Magneto-Optical Disc)等のコンピュータ100が読み取り可能な記録媒体に記録されている本発明の情報同期方法を実行する情報同期プログラムを読み込んでメモリ102に導入することで、後述する情報同期方法を実行する情報同期装置及びプレゼンテーション実施装置として構築されている。この情報同期プログラムは、アセンブラ、C、C++、C#、Java(登録商標)等のレガシープログラミング言語やオブジェクト指向ブログラミング言語等で記述されたコンピュータ実行可能なプログラムであり、上記記録媒体に格納して頒布することができる。   That is, the computer 100 includes a ROM, an EEPROM (Electrically Erasable and Programmable Read Only Memory), an EPROM, a flash memory, a flexible disk, a CD-ROM (Compact Disc Read Only Memory), a CD-RW (Compact Disc Rewritable), and a DVD (Digital). An information synchronization program for executing the information synchronization method of the present invention recorded on a computer 100 readable recording medium such as a video disk (SD), a secure digital (SD) card, or a magneto-optical disc (MO) is read into the memory 102. In this case, it is constructed as an information synchronization apparatus and a presentation execution apparatus that execute an information synchronization method to be described later. This information synchronization program is a computer-executable program written in a legacy programming language such as assembler, C, C ++, C #, Java (registered trademark) or an object-oriented programming language, and is stored in the recording medium. Can be distributed.

表示部(情報出力手段)103は、CPU101の制御下で各種映像(情報)の表示及び音声の出力を行い、特に、プレゼンテーションで使用される映像の表示、音声の出力を行う。   A display unit (information output unit) 103 displays various video (information) and outputs audio under the control of the CPU 101, and particularly displays video and audio used in a presentation.

外部記憶部104は、ハードディスク、USBメモリ等のメモリであり、プレゼンテーションに使用されるプレゼンテーション情報等が記憶される。   The external storage unit 104 is a memory such as a hard disk or a USB memory, and stores presentation information used for the presentation.

I/F105は、着脱可能なメモリ、入力端末、出力端末等の各種デバイスが接続される。   The I / F 105 is connected to various devices such as a removable memory, an input terminal, and an output terminal.

入力部(操作手段)106は、キーボード、マウス等の入力デバイスであり、コンピュータ100に各種動作指示を行わせる命令等が入力される。   The input unit (operation unit) 106 is an input device such as a keyboard and a mouse, and inputs commands for causing the computer 100 to perform various operation instructions.

映像装置(収録手段)10は、映像・音声等のマルチメディア情報を収録する機能を有する装置であり、例えば、DV(Digital Video)カメラ等が用いられる。映像装置10は、プレゼンテーション実施時に、話者(プレゼンター)とプレゼンテーション実施装置としてのコンピュータ100が表示するプレゼンテーション内容のプレゼンテーション映像や音声等のプレゼンテーションマルチメディア情報を収録するとともに、内部時計の計時時刻を同時に収録する。   The video device (recording means) 10 is a device having a function of recording multimedia information such as video / audio, and for example, a DV (Digital Video) camera or the like is used. The video apparatus 10 records presentation multimedia information such as presentation video and audio of the presentation contents displayed by the speaker (presenter) and the computer 100 as the presentation execution apparatus at the time of presentation, and simultaneously measures the time of the internal clock. Record.

すなわち、映像装置10は、図3に示すように、入力部11、記録ファイル記録処理部12及び記憶部13を備えているとともに、図示しないが、映像装置10としての基本動作を実行する各部(例えば、映像処理部、音声処理部、記憶処理部等)を備え、特に、現在時間を計時する時計機構部(時計手段)を備えている。入力部11は、映像装置10の収録対象の映像、音声等を取り込む部分であり、レンズ、マイク等である。   That is, as shown in FIG. 3, the video device 10 includes an input unit 11, a recording file recording processing unit 12, and a storage unit 13, and although not shown, each unit (not shown) that executes basic operations as the video device 10 ( For example, a video processing unit, an audio processing unit, a storage processing unit, etc.) are provided, and in particular, a clock mechanism unit (clock unit) for measuring the current time is provided. The input unit 11 is a part that captures video, audio, and the like to be recorded by the video apparatus 10, and is a lens, a microphone, or the like.

記録ファイル記録処理部12は、イメージ化制御部21、内部時間情報取得部22、一次記憶部(一時記憶手段)23、記憶制御部24及び記録ファイル情報取得部25等を備えており、イメージ化制御部21に入力部11が取り込んだ収録情報が入力される。イメージ化制御部(取り込み時間付加手段)21は、入力部11から入力される収録情報を一次記憶部23に保存し、内部時間情報取得部22は、内部の時計機構から現在時間(内部時間)を取得してイメージ化制御部21に渡す。イメージ化制御部21は、内部時間情報取得部22の取得した内部時間を映像化、例えば、数字化等して、一次記憶部23に保存した収録情報に付加し、映像化した内部時間を付加した収録情報を記憶制御部24に渡す。   The recording file recording processing unit 12 includes an imaging control unit 21, an internal time information acquisition unit 22, a primary storage unit (temporary storage unit) 23, a storage control unit 24, a recording file information acquisition unit 25, and the like. The recording information captured by the input unit 11 is input to the control unit 21. The imaging control unit (capture time adding means) 21 stores the recording information input from the input unit 11 in the primary storage unit 23, and the internal time information acquisition unit 22 receives the current time (internal time) from the internal clock mechanism. And passed to the imaging control unit 21. The imaging control unit 21 visualizes the internal time acquired by the internal time information acquisition unit 22, for example, digitizes it, adds it to the recording information stored in the primary storage unit 23, and adds the visualized internal time. The recorded information is passed to the storage control unit 24.

記憶ファイル情報取得部25は、イメージ化制御部21及び入力部11から入力されて図示しない情報処理部で処理された収録対象の映像、音声等の情報を取得し、記憶制御部24は、記録ファイル情報取得部25の取得した情報とイメージ化制御部21から渡される収録情報を記憶部(記憶手段)13に記憶する。この記憶部13は、ハードディスク、着脱可能なメモリ(USBメモリ、メモリカード等)あるいはネットワークを介して接続されている外部記憶デバイスである。   The storage file information acquisition unit 25 acquires information such as video and audio to be recorded, which is input from the imaging control unit 21 and the input unit 11 and processed by the information processing unit (not shown), and the storage control unit 24 records The information acquired by the file information acquisition unit 25 and the recording information passed from the imaging control unit 21 are stored in the storage unit (storage unit) 13. The storage unit 13 is a hard disk, a removable memory (USB memory, memory card, etc.) or an external storage device connected via a network.

すなわち、映像装置10は、図1に示すように、プレゼンテーション時、収録対象物である話者(プレゼンター)等の収録とプレゼンテーション実施装置としてのコンピュータ100が表示するプレゼンテーション内容(コンピュータ画像)の収録を行って、上記映像装置10内の内部時間を付加した状態で記憶部13に記録して、その後、情報同期装置1としてのコンピュータ100に収録情報(映像記録情報)を出力する(ステップS101〜S105)。   That is, as shown in FIG. 1, the video apparatus 10 records a speaker (presenter) as a recording target and a presentation content (computer image) displayed by the computer 100 as a presentation execution apparatus during the presentation. And recording in the storage unit 13 with the internal time in the video device 10 added, and then outputting recording information (video recording information) to the computer 100 as the information synchronization device 1 (steps S101 to S105). ).

そして、コンピュータ100は、図1に示すように、話者によりプレゼンテーション(図1では、プレゼンと記載されている。)が開始指示されると、プレゼンテーションの表示情報等の出力内容を再現可能なレベルで記録し、プレゼンテーションが終了すると、プレゼンテーションの出力内容(出力情報)の記録を終了するプレゼンテーション内容(プレゼンテーション情報)の記録(ステップS201、S202)、コンピュータ内の内部時間の映像化した内部時間情報表示出力(ステップS203、S204)、プレゼンテーション終了後の映像装置10からの収録情報(映像記録情報)の入手(ステップS205)、収録情報とプレゼンテーション情報の同期(ステップS206)及び同期させた収録情報とプレゼンテーション情報を合成したコンテンツの作成を行う(ステップS207)。   Then, as shown in FIG. 1, the computer 100 can reproduce the output contents such as display information of the presentation when the speaker gives a presentation start (presented in FIG. 1). When the presentation is finished, the presentation contents (output information) are recorded, the presentation contents (presentation information) are recorded (steps S201 and S202), and the internal time information is displayed as an image of the internal time in the computer. Output (steps S203 and S204), acquisition of recording information (video recording information) from the video apparatus 10 after the presentation (step S205), synchronization of recording information and presentation information (step S206), and synchronized recording information and presentation information The creation of the synthesized content (step S207).

コンピュータ100は、プレゼンテーション実施時には、プレゼンテーションプログラムによって、図4に示すような機能構成部を構築して、プレゼンテーションを実施する。すなわち、コンピュータ100は、プレゼンテーション実施時には、メタ情報制御機構部110が構築され、メタ情報制御部機構部110は、メタ情報記憶部111、メタ情報取得部112、表示制御部113及び表示ファイル情報取得部114等を備えている。   At the time of presentation, the computer 100 constructs a functional component as shown in FIG. 4 by the presentation program and performs the presentation. That is, in the computer 100, the meta information control mechanism unit 110 is constructed at the time of presentation, and the meta information control unit mechanism unit 110 includes the meta information storage unit 111, the meta information acquisition unit 112, the display control unit 113, and the display file information acquisition. Part 114 and the like.

メタ情報取得部(メタ情報取得手段)112は、話者が入力部(操作手段)106で操作する操作状況をメタ情報として取得し、メタ情報記憶部111は、メタ情報取得部112の取得したメタ情報をタイムカウンタに併せて記録する。   The meta information acquisition unit (meta information acquisition unit) 112 acquires, as meta information, the operation status that the speaker operates with the input unit (operation unit) 106, and the meta information storage unit 111 acquires the meta information acquisition unit 112. Meta information is recorded together with the time counter.

表示ファイル情報取得部114は、プレゼンテーション実行用ファイルとして予めコンピュータ100に格納されている実行ファイル情報(プレゼンテーション情報)を表示情報に変換したプレゼンテーション情報を取得し、表示制御部113は、表示ファイル情報取得部114の取得したプレゼンテーション情報を表示部103に表示させ、また、該プレゼンテーション情報とメタ情報記憶部111の記憶したメタ情報をタイムカウンタに併せてメモリ102に出力関連情報として記録する。   The display file information acquisition unit 114 acquires presentation information obtained by converting execution file information (presentation information) stored in advance in the computer 100 as a presentation execution file into display information, and the display control unit 113 acquires display file information. The presentation information acquired by the unit 114 is displayed on the display unit 103, and the presentation information and the meta information stored in the meta information storage unit 111 are recorded in the memory 102 as output related information together with the time counter.

また、コンピュータ100は、プレゼンテーション実行時、図5に示すように、内部時間表示機構部120を構築して、コンピュータ100内の内部時間を表示部103に表示する。すなわち、コンピュータ100は、プレゼンテーション実行時に、内部時間表示機構部120が構築され、内部時間表示機構部120は、再生制御部121、内部時間情報取得部122、レイアウト制御部123、レイアウト情報取得部124、時間情報置換ルール情報取得部125、表示制御部126及び表示ファイル情報取得部127を備えている。   Further, as shown in FIG. 5, the computer 100 constructs the internal time display mechanism unit 120 and displays the internal time in the computer 100 on the display unit 103 when the presentation is executed. That is, in the computer 100, the internal time display mechanism unit 120 is constructed at the time of presentation, and the internal time display mechanism unit 120 includes the reproduction control unit 121, the internal time information acquisition unit 122, the layout control unit 123, and the layout information acquisition unit 124. , A time information replacement rule information acquisition unit 125, a display control unit 126, and a display file information acquisition unit 127.

内部時間情報取得部122は、コンピュータ100が備えている内部時計(時計手段)の計時時間(内部時間)の情報を取得し、再生制御部121は、入力部106での操作またはプレゼンテーション終了後自動的に、内部時間情報取得部122の取得した内部時間情報を取得してレイアウト制御部123に渡す。   The internal time information acquisition unit 122 acquires time keeping information (internal time) information of an internal clock (clock means) provided in the computer 100, and the reproduction control unit 121 automatically operates after the operation at the input unit 106 or the end of the presentation. Specifically, the internal time information acquired by the internal time information acquisition unit 122 is acquired and passed to the layout control unit 123.

レイアウト情報取得部124は、予め設定されている内部時間情報を映像化して表示するためのレイアウト情報を取得し、時間情報置換ルール情報取得部125は、内部時間情報を動的な情報に置換する置換ルール情報を取得する。レイアウト制御部(出力時間表示制御手段)123は、再生制御部121から渡される内部時間情報を、レイアウト情報取得部124の取得したレイアウト情報と時間情報置換ルール情報取得部125の取得した置換ルールに基づいて該レイアウトに置換して、表示制御部126に渡す。   The layout information acquisition unit 124 acquires layout information for visualizing and displaying preset internal time information, and the time information replacement rule information acquisition unit 125 replaces the internal time information with dynamic information. Get replacement rule information. The layout control unit (output time display control means) 123 converts the internal time information passed from the reproduction control unit 121 into the layout information acquired by the layout information acquisition unit 124 and the replacement rule acquired by the time information replacement rule information acquisition unit 125. Based on the layout, the data is transferred to the display control unit 126.

表示ファイル情報取得部127は、レイアウト化された内部時間情報を表示するための表示情報を取得し、表示制御部126は、表示ファイル情報取得部127の取得した表示情報に基づいて、レイアウト制御部123から渡された内部時間情報のレイアウト情報を表示情報に変換して表示部103に表示させる。このとき、表示制御部126は、コンピュータ100の表示部103で表示できる色調やサイズに合わせてレイアウトを変化する。   The display file information acquisition unit 127 acquires display information for displaying the layout internal time information, and the display control unit 126 is based on the display information acquired by the display file information acquisition unit 127. The layout information of the internal time information passed from 123 is converted into display information and displayed on the display unit 103. At this time, the display control unit 126 changes the layout according to the color tone and size that can be displayed on the display unit 103 of the computer 100.

そして、コンピュータ100は、情報同期を行ってコンテンツを生成するときには、図6に示すように、情報同期・コンテンツ生成機構部130を構築して、映像装置10で記録された収録情報(映像記録情報)とプレゼンテーション情報とを同期させたコンテンツを生成する。   When the computer 100 generates content by performing information synchronization, as shown in FIG. 6, the computer 100 constructs an information synchronization / content generation mechanism unit 130 to record information (video recording information) recorded by the video device 10. ) And the presentation information are generated.

すなわち、コンピュータ100は、情報同期・コンテンツ生成を行う場合、情報同期・コンテンツ生成機構部130が構築され、情報同期・コンテンツ生成機構部130は、記憶制御部131、記録ファイル情報取得部132、画像認識部133、レイアウト情報取得部134、時間情報取得部135、時間情報置換ルール情報取得部136、同期制御部137、同期情報取得部138、コンテンツ制御部139、表示ファイル情報取得部140及びメタ情報取得部141を備えている。   That is, when the computer 100 performs information synchronization / content generation, the information synchronization / content generation mechanism unit 130 is constructed. The information synchronization / content generation mechanism unit 130 includes the storage control unit 131, the recording file information acquisition unit 132, the image Recognition unit 133, layout information acquisition unit 134, time information acquisition unit 135, time information replacement rule information acquisition unit 136, synchronization control unit 137, synchronization information acquisition unit 138, content control unit 139, display file information acquisition unit 140, and meta information An acquisition unit 141 is provided.

記録ファイル情報取得部(収録情報取り込み手段)132は、I/F105に接続された着脱可能なメモリ(USBメモリ、メモリカード等)や映像装置10のハードディスク等の記憶手段から、映像装置10で収録されて記録されている収録情報を取得し、記憶制御部131は、入力部106からの操作に基づいて記録ファイル情報取得部132に該収録情報を取得させて、内部のメモリ102または外部記憶部104に記憶し、また、画像認識部133に渡す。   A recording file information acquisition unit (recording information fetching means) 132 is recorded by the video device 10 from storage means such as a removable memory (USB memory, memory card, etc.) connected to the I / F 105 or a hard disk of the video device 10. The recording control unit 131 acquires the recorded information, and the storage control unit 131 causes the recording file information acquisition unit 132 to acquire the recording information on the basis of an operation from the input unit 106, so that the internal memory 102 or the external storage unit The image data is stored in the image recognition unit 104 and transferred to the image recognition unit 133.

レイアウト情報取得部134は、図5の内部時間表示機構部120で構築されるレイアウト情報取得部124と同様であり、予め設定されている内部時間情報を映像化して表示するためのレイアウト情報を取得する。画像認識部133は、記憶制御部131から送られてきた収録情報を、1フレームずつの画像情報として分析し、レイアウト情報取得部134の取得したレイアウト情報に基づいて、該レイアウト情報に類似している画像情報を抽出する。画像認識部133は、この内部時間のレイアウト情報に類似している画像を抽出する際に、収録情報には、上述のように、映像装置10の内部時計情報の映像化情報も記録されているため、該映像装置10の内部時間情報に基づいて、該内部時計の映像化情報が記録された映像装置10の内部時間も同時に算出して、時間情報取得部135に出力する。   The layout information acquisition unit 134 is the same as the layout information acquisition unit 124 constructed by the internal time display mechanism unit 120 of FIG. 5, and acquires layout information for visualizing and displaying preset internal time information. To do. The image recognition unit 133 analyzes the recorded information sent from the storage control unit 131 as image information for each frame, and based on the layout information acquired by the layout information acquisition unit 134, is similar to the layout information. Extract image information. When the image recognizing unit 133 extracts an image similar to the layout information of the internal time, as described above, the imaging information of the internal clock information of the video device 10 is also recorded in the recording information. Therefore, based on the internal time information of the video device 10, the internal time of the video device 10 in which the visualization information of the internal clock is recorded is also calculated and output to the time information acquisition unit 135.

時間情報置換ルール情報取得部136は、図5の内部時間表示機構部120の時間情報置換ルール情報取得部125と同様であり、内部時間情報を動的な情報に置換する置換ルール情報を取得する。時間情報取得部135は、時間情報置換ルール情報取得部136の取得した置換ルール情報に基づいて、画像認識部133の認識した内部時間の画像情報(内部時間情報)を取得して、同期制御部137に渡す。   The time information replacement rule information acquisition unit 136 is the same as the time information replacement rule information acquisition unit 125 of the internal time display mechanism unit 120 in FIG. 5, and acquires replacement rule information that replaces the internal time information with dynamic information. . The time information acquisition unit 135 acquires image information (internal time information) of the internal time recognized by the image recognition unit 133 based on the replacement rule information acquired by the time information replacement rule information acquisition unit 136, and the synchronization control unit Pass to 137.

同期情報取得部138は、映像装置10の記録した収録情報とコンピュータ100の生成したプレゼンテーション情報との同期を取るための同期情報として、時間情報取得部135から渡された収録情報に記録されているコンピュータ100の内部時間情報とメタ情報を取得したときの内部時間とを取得し、同期制御部137は、収録情報に記録されたコンピュータ100の内部時間情報とメタ情報を取得した時間の絶対時間を同期させる。すなわち、同期制御部137は、コンピュータ100の内部時間と映像装置10の内部時間の差を算出して同期時間情報を求めてコンテンツ制作部139に渡す。   The synchronization information acquisition unit 138 is recorded in the recording information passed from the time information acquisition unit 135 as synchronization information for synchronizing the recording information recorded by the video apparatus 10 and the presentation information generated by the computer 100. The internal time information of the computer 100 and the internal time when the meta information is acquired are acquired, and the synchronization control unit 137 obtains the absolute time of the time when the internal time information of the computer 100 and the meta information recorded in the recorded information are acquired. Synchronize. That is, the synchronization control unit 137 calculates the difference between the internal time of the computer 100 and the internal time of the video apparatus 10 to obtain the synchronous time information and passes it to the content production unit 139.

表示ファイル情報取得部140及びメタ情報取得部141は、図4のメタ情報制御機構部110の表示ファイル情報取得部114及びメタ情報取得部112と同様であり、表示ファイル情報取得部140は、プレゼンテーション時にコンピュータ100で生成したプレゼンテーション情報を取得して記録しておいたプレゼンテーション情報を取得し、また、メタ情報取得部141は、話者が入力部106で操作する操作状況をメタ情報として取得して記録しておいたメタ情報を取得する。   The display file information acquisition unit 140 and the meta information acquisition unit 141 are the same as the display file information acquisition unit 114 and the meta information acquisition unit 112 of the meta information control mechanism unit 110 in FIG. Sometimes, the presentation information generated by the computer 100 is acquired and recorded, and the meta information acquisition unit 141 acquires the operation status operated by the speaker with the input unit 106 as meta information. Get the recorded meta information.

コンテンツ制御部139は、記憶制御部131で記憶させた収録情報と、メタ情報取得部141を介して取得されたメタ情報と表示ファイル情報取得部140を介して取得されたプレゼンテーション情報とを同期制御部137から送られてきた映像装置10の内部時間とコンピュータ100の内部時間との時間差を調整することで同期させて、同期後に収録情報とプレゼンテーション情報(表示ファイル情報)とを組み合わせたマルチメディアコンテンツを生成し、マルチメディアコンテンツとして、同一表示画面内に収録情報とプレゼンで表示させた内容を表示部103に表示、または、入力部106の操作に応じて表示する。   The content control unit 139 synchronously controls the recording information stored in the storage control unit 131, the meta information acquired via the meta information acquisition unit 141, and the presentation information acquired via the display file information acquisition unit 140. Multimedia content that is synchronized by adjusting the time difference between the internal time of the video apparatus 10 sent from the unit 137 and the internal time of the computer 100, and combines the recorded information and presentation information (display file information) after synchronization And the recorded information and the contents displayed in the presentation on the same display screen are displayed on the display unit 103 or displayed according to the operation of the input unit 106 as multimedia contents.

次に、本実施例の作用を説明する。本実施例の情報同期システム1は、プレゼンテーション時に、プレゼンテーション実施装置としてのコンピュータ100とプレゼンテーションの状況を撮影する映像装置10とを接続することなく、プレゼンテーションの終了後に、映像装置10の収録した収録情報を、情報同期装置としてのコンピュータ100に取り込んで、収録情報とコンピュータ100でプレゼンテーション時に出力したプレゼンテーション情報との同期を取ってコンテンツを生成する。   Next, the operation of this embodiment will be described. The information synchronization system 1 of the present embodiment records information recorded by the video apparatus 10 after the presentation is completed without connecting the computer 100 as the presentation execution apparatus and the video apparatus 10 that captures the status of the presentation during the presentation. Is recorded in a computer 100 as an information synchronizer, and the content is generated by synchronizing the recorded information with the presentation information output at the time of presentation by the computer 100.

すなわち、プレゼンテーション時、図1に示したように、映像装置10は、プレゼンテーションの状況を撮影して収録対象物の収録を行うとともに(ステップS101、S102)、コンピュータ100の出力するマルチメディア情報を収録する(ステップS103、S104)。この映像装置10は、収録時に、図7に示すように、操作部で収録開始の指示操作が行われると、図3に示したイメージ化制御部21が、入力部11から入力される収録情報を一次記憶部23に保存し、内部時間情報取得部22の取得した内部時間を映像化して、一次記憶部23に保存した収録情報に付加して、映像化した内部時間を付加した収録情報を記憶制御部24に渡す(ステップS301)。   That is, at the time of presentation, as shown in FIG. 1, the video apparatus 10 records the recording target object by photographing the situation of the presentation (steps S101 and S102) and records the multimedia information output from the computer 100. (Steps S103 and S104). As shown in FIG. 7, when the video apparatus 10 is instructed to start recording by the operation unit as shown in FIG. 7, the imaging control unit 21 shown in FIG. 3 records information input from the input unit 11. Is stored in the primary storage unit 23, the internal time acquired by the internal time information acquisition unit 22 is visualized, added to the recording information stored in the primary storage unit 23, and the recorded information with the internal time visualized is added. The data is transferred to the storage control unit 24 (step S301).

記憶制御部24は、記録ファイル情報取得部25の取得した情報とイメージ化制御部21から渡される収録情報を記憶部13に記憶する(ステップS302)。   The storage control unit 24 stores the information acquired by the recording file information acquisition unit 25 and the recording information passed from the imaging control unit 21 in the storage unit 13 (step S302).

一方、コンピュータ100は、プレゼンテーション時、話者がコンピュータ100に対して行う操作をメタ情報を取得して、コンピュータ100がプレゼンテーションにおいて表示等の出力するプレゼンテーション情報とともに記録する。すなわち、コンピュータ100は、プレゼンテーション時、プレゼンテーションが開始されると、タイムカウンタを動作させ、話者がコンピュータ100のキーボード、マウス等の入力部106からプレゼンテーション情報の表示切り替え等の各種操作を行うと、メタ情報取得部112が、該操作をメタ情報として取得して、表示制御部113に渡す(ステップS401)。   On the other hand, at the time of presentation, the computer 100 acquires meta information for an operation performed by the speaker on the computer 100 and records it together with presentation information that the computer 100 outputs such as display in the presentation. That is, when a presentation starts, the computer 100 operates a time counter, and when a speaker performs various operations such as display switching of presentation information from the input unit 106 such as a keyboard and a mouse of the computer 100, The meta information acquisition unit 112 acquires the operation as meta information and passes it to the display control unit 113 (step S401).

表示制御部113は、表示ファイル情報取得部114の取得した実行ファイル情報を表示部103に表示させ、また、該実行ファイル情報とメタ情報記憶部111の記憶したメタ情報をタイムカウンタに併せて記録する(ステップS402)。   The display control unit 113 displays the execution file information acquired by the display file information acquisition unit 114 on the display unit 103, and records the execution file information and the meta information stored in the meta information storage unit 111 together with the time counter. (Step S402).

そして、コンピュータ100は、プレゼンテーション時、図9に示すように、プレゼンテーション情報に併せて内部時間を映像化して表示して、この映像化されたコンピュータ100の内部時間を、映像装置10で収録対象物として収録する。すなわち、コンピュータ100は、プレゼンテーション時、再生制御部121が、入力部106での操作またはプレゼンテーション終了後自動的に、内部時間情報取得部122の取得したコンピュータ100の内部時間情報を取得してレイアウト制御部123に渡す(ステップS501)。   Then, as shown in FIG. 9, the computer 100 visualizes and displays the internal time together with the presentation information at the time of presentation, and the video device 10 displays the internal time of the imaged computer 100 as an object to be recorded. As recorded. That is, in the presentation, the presentation control unit 121 automatically acquires the internal time information of the computer 100 acquired by the internal time information acquisition unit 122 and performs layout control at the time of presentation. To the unit 123 (step S501).

レイアウト制御部124は、再生制御部121から渡される内部時間情報を、レイアウト情報取得部124の取得したレイアウト情報と時間情報置換ルール情報取得部125の取得した置換ルールに基づいて該レイアウトに置換して、表示制御部126に渡す(ステップS502)。   The layout control unit 124 replaces the internal time information passed from the reproduction control unit 121 with the layout based on the layout information acquired by the layout information acquisition unit 124 and the replacement rule acquired by the time information replacement rule information acquisition unit 125. Then, the data is transferred to the display control unit 126 (step S502).

表示制御部126は、表示ファイル情報取得部127の取得した表示情報に基づいて、レイアウト制御部123から渡された内部時間情報のレイアウト情報を表示情報に変換して表示部103に表示させる(ステップS503)。   Based on the display information acquired by the display file information acquisition unit 127, the display control unit 126 converts the layout information of the internal time information passed from the layout control unit 123 into display information and causes the display unit 103 to display the display information (Step 103). S503).

そして、コンピュータ100は、プレゼンテーションが終了して、映像装置100の収録した収録情報を記憶するメモリがI/F105に接続されたり、該収録情報をハードディスク等に記憶している映像装置100が接続されると、記憶制御部131が、入力部106からの操作に基づいて記録ファイル情報取得部132に該収録情報を取得させて、内部のメモリ102または外部記憶部104に記憶し、また、画像認識部133に渡す(ステップS601)。   The computer 100 is connected to the I / F 105 or the video device 100 storing the recorded information in a hard disk or the like after the presentation is finished and storing the recorded information recorded by the video device 100. Then, the storage control unit 131 causes the recording file information acquisition unit 132 to acquire the recording information based on an operation from the input unit 106, stores the recording information in the internal memory 102 or the external storage unit 104, and performs image recognition. To the unit 133 (step S601).

画像認識部133は、記憶制御部131から送られてきた収録情報を、1フレームずつの画像情報として分析し、レイアウト情報取得部134の取得したレイアウト情報に基づいて、該レイアウト情報に類似している画像情報(画像部位)を抽出する(ステップS602)。画像認識部133は、この内部時間のレイアウト情報に類似している画像を抽出する際に、収録情報には、上述のように、映像装置10の内部時計情報の映像も記録されているため、該映像装置10の内部時間情報に基づいて、該画像情報が記録された映像装置10の内部時間も同時に算出して、時間情報取得部135に出力する。   The image recognition unit 133 analyzes the recorded information sent from the storage control unit 131 as image information for each frame, and based on the layout information acquired by the layout information acquisition unit 134, is similar to the layout information. Existing image information (image part) is extracted (step S602). When the image recognizing unit 133 extracts an image similar to the layout information of the internal time, the recorded information includes the video of the internal clock information of the video device 10 as described above. Based on the internal time information of the video apparatus 10, the internal time of the video apparatus 10 in which the image information is recorded is also calculated and output to the time information acquisition unit 135.

時間情報取得部135は、時間情報置換ルール情報取得部136の取得した置換ルール情報に基づいて、画像認識部133の認識した画像部位から内部時間の画像情報(内部時間情報)を取得して、同期制御部137に渡す(ステップS603)。   Based on the replacement rule information acquired by the time information replacement rule information acquisition unit 136, the time information acquisition unit 135 acquires image information (internal time information) of the internal time from the image part recognized by the image recognition unit 133, The data is transferred to the synchronization control unit 137 (step S603).

同期制御部(合成情報生成手段)137は、収録情報に記録されたコンピュータ100の内部時間情報とメタ情報を取得した時間の絶対時間を同期させ(ステップS604)、コンテンツ制御部139は、記憶制御部131で記憶された収録情報と、メタ情報取得部141を介して取得されたメタ情報と表示ファイル情報取得部140を介して取得されたプレゼンテーション情報とを同期制御部137から送られてきた映像装置10の内部時間とコンピュータ100の内部時間との時間差を調整することで同期させて、同期後に収録情報とプレゼンテーション情報とを組み合わせたコンテンツ(合成情報)を生成し、該コンテンツを、収録情報とプレゼンで表示させた内容とともに表示部103の同一表示画面内に表示、または、入力部106の操作に応じて表示する(ステップS605)。   The synchronization control unit (composite information generation unit) 137 synchronizes the internal time information of the computer 100 recorded in the recorded information and the absolute time of the time when the meta information is acquired (step S604), and the content control unit 139 performs storage control. Video sent from the synchronization control unit 137 including the recording information stored in the unit 131, the meta information acquired via the meta information acquisition unit 141, and the presentation information acquired via the display file information acquisition unit 140 By adjusting the time difference between the internal time of the apparatus 10 and the internal time of the computer 100, the content is synchronized by adjusting the time difference between the recording time and the presentation information after the synchronization. Displayed on the same display screen of the display unit 103 together with the contents displayed in the presentation, or the input unit 10 Displaying in response to the operation (step S605).

このように、本実施例の情報同期システム1は、コンピュータ100が、入力部11での出力指示操作等の操作に応じて、音声情報、表示情報等の複数種類のプレゼンテーション情報を出力情報として表示部103から出力し、該操作内容をメタ情報として取得するとともに、該出力情報を出力する時間情報を出力時間情報として取得して、該メタ情報及び該出力情報を該出力時間情報に関連付けて出力関連情報として記憶部(出力関連情報記憶手段)102に記憶する。コンピュータ100は、出力時間情報を所定レイアウトに基づいて表示情報に変換して出力情報の表示情報に組み込んで表示部103に出力させ、この出力される表示情報を含む出力情報を映像装置10で取り込んで記憶部(記憶手段)13に収録情報として収録して、この記憶部13の収録情報をコンピュータ100で取り込んで、該収録情報に組み込まれている出力時間表示情報を解析して出力時間を取得する。そして、コンピュータ100は、記憶部102の記憶する前記出力関連情報の前記出力時間情報と前記メタ情報に基づいて前記出力情報の出力時間と解析して取得した前記出力時間とを同期させている。   As described above, in the information synchronization system 1 according to the present embodiment, the computer 100 displays a plurality of types of presentation information such as audio information and display information as output information in response to an operation such as an output instruction operation using the input unit 11. And outputting the operation content as meta information, obtaining time information for outputting the output information as output time information, and outputting the meta information and the output information in association with the output time information. It is stored in the storage unit (output related information storage means) 102 as related information. The computer 100 converts the output time information into display information based on a predetermined layout, incorporates it into the display information of the output information, outputs it to the display unit 103, and captures the output information including the output display information with the video device 10. Is recorded in the storage unit (storage means) 13 as recording information, the recording information in the storage unit 13 is captured by the computer 100, and the output time display information incorporated in the recording information is analyzed to obtain the output time. To do. Then, the computer 100 synchronizes the output time information of the output related information stored in the storage unit 102 and the output time of the output information based on the meta information and the output time obtained by analysis.

したがって、コンピュータ100の表示部103から表示情報を含む出力情報(プレゼンテーション情報)を出力するとともに、映像装置10によって該出力情報を取り込んで記憶部13に記憶する際に、コンピュータ100と映像装置10を物理的に接続することなく、コンピュータ100による出力情報の出力後に、該出力情報を記録した出力情報と映像装置10の収録した収録情報の同期を適切に取ることができ、作業性を向上させることができる。   Therefore, when the output information (presentation information) including display information is output from the display unit 103 of the computer 100 and the output information is captured by the video device 10 and stored in the storage unit 13, the computer 100 and the video device 10 are connected. The output information recorded by the computer 100 can be properly synchronized with the recorded information recorded by the video apparatus 10 after the output information is output by the computer 100 without being physically connected, thereby improving workability. Can do.

また、本実施例の情報同期システム1は、前記同期結果に基づいて記憶部102の前記出力情報と映像装置10が収録して記憶部13に記憶した収録情報を同期させたコンテンツ(合成情報)を生成している。   Further, the information synchronization system 1 of the present embodiment is a content (composite information) in which the output information of the storage unit 102 and the recording information recorded by the video device 10 and stored in the storage unit 13 are synchronized based on the synchronization result. Is generated.

したがって、プレゼンテーションで出力したプレゼンテーション情報と該プレゼンテーションを映像装置10で撮影した映像である収録情報を同期させたプレゼンテーションコンテンツを作成することができ、作業性を向上させつつコンテンツを容易に作成することができる。   Therefore, it is possible to create presentation content that synchronizes the presentation information output in the presentation and the recorded information that is the video captured by the video device 10, and it is possible to easily create the content while improving workability. it can.

さらに、本実施例の情報同期システム1は、収録手段として、映像装置10を用いている。   Furthermore, the information synchronization system 1 of the present embodiment uses a video device 10 as recording means.

したがって、安価かつ容易に、プレゼンテーション情報等の出力情報と映像装置10で収録した収録情報を同期させることでき、また、コンテンツを作成することができる。   Therefore, the output information such as presentation information and the recorded information recorded by the video apparatus 10 can be synchronized with each other at low cost and contents can be created.

また、本実施例の情報同期システム1は、映像装置10は、収録した収録情報を一次記憶部23に保管し、内部時間情報を取り込んで、該内部時間情報表示情報に変換して収録情報に付加し、コンピュータ100が、収録情報に付加されている内部時間情報を解析して映像装置10による収録時間を取得し、出力情報を記録した出力情報と映像装置10の収録した収録情報の同期を取って、コンテンツを生成している。   Further, in the information synchronization system 1 of the present embodiment, the video apparatus 10 stores the recorded recording information in the primary storage unit 23, takes in the internal time information, converts it into the internal time information display information, and converts it into the recorded information. In addition, the computer 100 analyzes the internal time information added to the recording information to acquire the recording time by the video device 10, and synchronizes the output information in which the output information is recorded with the recording information recorded in the video device 10. Take and generate content.

したがって、より一層正確に出力情報を記録した出力情報と映像装置10の収録した収録情報の同期を取ることができ、より一層正確に同期させたコンテンツを生成することができる。   Therefore, it is possible to synchronize the output information in which the output information is recorded more accurately and the recorded information recorded in the video apparatus 10, and it is possible to generate synchronized content more accurately.

以上、本発明者によってなされた発明を好適な実施例に基づき具体的に説明したが、本発明は上記実施例で説明したものに限定されるものではなく、その要旨を逸脱しない範囲で種々変更可能であることはいうまでもない。   The invention made by the present inventor has been specifically described based on the preferred embodiments. However, the present invention is not limited to that described in the above embodiments, and various modifications can be made without departing from the scope of the invention. It goes without saying that it is possible.

本発明は、プレゼンテーションの撮影映像を撮影する映像装置とプレゼンテーション情報を出力するプレゼンテーション実施装置を接続することなく、映像装置の収録した収録情報とプレゼンテーション情報を同期させてコンテンツを生成する等のように、物理的接続されていない装置の情報を同期させる情報同期装置、情報同期方法、情報同期プログラム及び記録媒体に利用することができる。   The present invention generates content by synchronizing recording information recorded in a video device and presentation information without connecting a video device that captures a video of a presentation and a presentation execution device that outputs presentation information. The present invention can be used for an information synchronization device, an information synchronization method, an information synchronization program, and a recording medium that synchronize information of devices that are not physically connected.

1 情報同期システム
10 映像装置
11 入力部
12 記録ファイル記録処理部
13 記憶部
21 イメージ化制御部
22 内部時間情報取得部
23 一次記憶部
24 記憶制御部
25 記録ファイル情報取得部
100 コンピュータ
101 CPU
102 メモリ
103 表示部
104 外部記憶部
105 I/F
106 入力部
107 バス
110 メタ情報制御機構部
111 メタ情報記憶部
112 メタ情報取得部
113 表示制御部
114 表示ファイル情報取得部
120 内部時間表示機構部
121 再生制御部
122 内部時間情報取得部
123 レイアウト制御部
124 レイアウト情報取得部
125 時間情報置換ルール情報取得部
126 表示制御部
127 表示ファイル情報取得部
130 情報同期・コンテンツ生成機構部
131 記憶制御部
132 記録ファイル情報取得部
133 画像認識部
134 レイアウト情報取得部
135 時間情報取得部
136 時間情報置換ルール情報取得部
137 同期制御部
138 同期情報取得部
139 コンテンツ制御部
140 表示ファイル情報取得部
141 メタ情報取得部
DESCRIPTION OF SYMBOLS 1 Information synchronization system 10 Video apparatus 11 Input part 12 Recording file recording process part 13 Storage part 21 Imaging control part 22 Internal time information acquisition part 23 Primary storage part 24 Storage control part 25 Recording file information acquisition part 100 Computer 101 CPU
102 Memory 103 Display 104 External Storage 105 I / F
106 Input section 107 Bus 110 Meta information control mechanism section 111 Meta information storage section 112 Meta information acquisition section 113 Display control section 114 Display file information acquisition section 120 Internal time display mechanism section 121 Playback control section 122 Internal time information acquisition section 123 Layout control Unit 124 layout information acquisition unit 125 time information replacement rule information acquisition unit 126 display control unit 127 display file information acquisition unit 130 information synchronization / content generation mechanism unit 131 storage control unit 132 recording file information acquisition unit 133 image recognition unit 134 layout information acquisition Unit 135 time information acquisition unit 136 time information replacement rule information acquisition unit 137 synchronization control unit 138 synchronization information acquisition unit 139 content control unit 140 display file information acquisition unit 141 meta information acquisition unit

特開2005−252574号公報JP 2005-252574 A

Claims (7)

音声情報、表示情報等の複数種類の情報のうち少なくとも表示情報を出力情報として出力する情報出力手段と、
前記情報出力手段による出力情報の出力指示操作等の操作が行われる操作手段と、
前記操作手段による操作内容をメタ情報として取得するメタ情報取得手段と、
時刻を計時する時計手段から前記情報出力手段が前記出力情報を出力する時間情報を出力時間情報として取得する出力時間情報取得手段と、
前記メタ情報取得手段の取得した前記メタ情報及び前記出力情報を前記出力時間情報取得手段の取得する前記出力時間情報に関連付けて出力関連情報として記憶する出力関連情報記憶手段と、
前記出力時間情報取得手段の取得した前記出力時間情報を所定レイアウトに基づいて表示情報に変換して前記出力情報の表示情報に組み込んで前記情報出力手段に出力させる出力時間表示制御手段と、
前記情報出力手段で出力される表示情報を含む前記出力情報を取り込んで記憶手段に収録情報として収録する収録手段と、
前記記憶手段の前記収録情報を取り込む収録情報取り込み手段と、
前記収録情報取り込み手段の取り込んだ前記収録情報に組み込まれている前記出力時間表示情報を解析して前記出力時間を取得する出力時間解析手段と、
前記出力関連情報記憶手段の記憶する前記出力関連情報の前記出力時間情報と前記メタ情報に基づいて前記出力情報の出力時間と前記出力時間解析手段の解析した前記収録情報の前記出力時間とを同期させる情報同期手段と、
を備えていることを特徴とする情報同期装置。
Information output means for outputting at least display information as output information among a plurality of types of information such as audio information and display information;
An operation means for performing an operation such as an output instruction operation of output information by the information output means;
Meta information acquisition means for acquiring operation information by the operation means as meta information;
Output time information acquisition means for acquiring, as output time information, time information at which the information output means outputs the output information from a clock means for measuring time;
Output related information storage means for storing the meta information acquired by the meta information acquisition means and the output information as output related information in association with the output time information acquired by the output time information acquisition means;
Output time display control means for converting the output time information acquired by the output time information acquisition means into display information based on a predetermined layout and incorporating the output information into the display information of the output information to be output to the information output means;
Recording means for capturing the output information including the display information output by the information output means and recording the recording information as recording information;
Recording information capturing means for capturing the recording information of the storage means;
Output time analysis means for analyzing the output time display information incorporated in the recording information captured by the recording information capturing means and acquiring the output time;
The output time information of the output related information stored in the output related information storage means and the output time of the output information based on the meta information are synchronized with the output time of the recording information analyzed by the output time analysis means. Information synchronization means,
An information synchronization apparatus comprising:
前記情報同期装置は、前記情報同期手段の同期結果に基づいて前記出力関連情報記憶手段の前記出力情報と前記出力時間解析手段の解析した前記収録情報の前記出力時間を同期させた合成情報を生成する合成情報生成手段を備えていることを特徴とする請求項1記載の情報同期装置。   The information synchronizer generates composite information in which the output information of the output related information storage means and the output time of the recorded information analyzed by the output time analysis means are synchronized based on a synchronization result of the information synchronization means The information synchronizer according to claim 1, further comprising synthesis information generating means for performing the processing. 前記収録手段は、前記表示情報を含む前記出力情報を撮像する撮像手段であることを特徴とする請求項1または請求項2記載の情報同期装置。   3. The information synchronization apparatus according to claim 1, wherein the recording unit is an imaging unit that captures the output information including the display information. 前記収録手段は、前記表示情報を含む前記出力情報を一時保管する一時記憶手段と、時刻を計時する計時手段から該出力情報を取り込んだ取り込み時間情報を取得して取り込み時間表示情報に変換して該出力情報に該取り込み時間表示情報を付加する取り込み時間付加手段を備え、前記出力時間解析手段は、前記収録情報に付加されている前記取り込み時間表示情報を解析して前記取り込み時間を取得し、前記情報同期手段は、前記取り込み時間及び前記出力関連情報記憶手段の記憶する前記出力時間情報に基づいて前記出力情報の出力時間と前記出力時間解析手段の解析した前記収録情報の前記出力時間とを同期させることを特徴とする請求項1から請求項3のいずれかに記載の情報同期装置。   The recording means acquires temporary time storage means for temporarily storing the output information including the display information and acquisition time information acquired from the output information from a time measuring means for measuring time, and converts the acquired acquisition time information into acquisition time display information. Incorporating capture time display means for adding the capture time display information to the output information, the output time analysis means analyzes the capture time display information added to the recording information to acquire the capture time, The information synchronization means includes the output time of the output information and the output time of the recorded information analyzed by the output time analysis means based on the capture time and the output time information stored in the output related information storage means. The information synchronization apparatus according to any one of claims 1 to 3, wherein synchronization is performed. 音声情報、表示情報等の複数種類の情報のうち少なくとも表示情報を出力情報として出力する情報出力処理ステップと、
前記情報出力処理ステップによる出力情報の出力指示操作等の操作内容をメタ情報として取得するメタ情報取得処理ステップと、
時刻を計時する時計手段から前記情報出力処理ステップにおいて前記出力情報を出力する時間情報を出力時間情報として取得する出力時間情報取得処理ステップと、
前記メタ情報取得処理ステップで取得した前記メタ情報及び前記出力情報を前記出力時間情報取得処理ステップで取得する前記出力時間情報に関連付けて出力関連情報として出力関連情報記憶手段に記憶する出力関連情報記憶処理ステップと、
前記出力時間情報取得処理ステップで取得された前記出力時間情報を所定レイアウトに基づいて表示情報に変換して前記出力情報の表示情報に組み込んで前記情報出力処理ステップで出力させる出力時間表示制御処理ステップと、
前記情報出力処理ステップで出力される表示情報を含む前記出力情報が所定の収録手段で収録されて収録情報として取り込まれている記憶手段の該収録情報を取り込む収録情報取り込み処理ステップと、
前記収録情報取り込み処理ステップで取り込まれた前記収録情報に組み込まれている前記出力時間表示情報を解析して前記出力時間を取得する出力時間解析処理ステップと、
前記出力関連情報記憶手段の記憶する前記出力関連情報の前記出力時間情報と前記メタ情報に基づいて前記出力情報の出力時間と前記出力時間解析処理ステップで解析された前記収録情報の前記出力時間とを同期させる情報同期処理ステップと、
を有していることを特徴とする情報同期方法。
Information output processing step for outputting at least display information as output information among a plurality of types of information such as audio information and display information; and
Meta information acquisition processing step of acquiring operation information such as an output instruction operation of output information by the information output processing step as meta information;
An output time information acquisition processing step for acquiring time information for outputting the output information as output time information in the information output processing step from a clock means for measuring time;
Output related information storage for storing the meta information and the output information acquired in the meta information acquisition processing step in the output related information storage means as output related information in association with the output time information acquired in the output time information acquisition processing step. Processing steps;
Output time display control processing step of converting the output time information acquired in the output time information acquisition processing step into display information based on a predetermined layout and incorporating it into the display information of the output information and outputting in the information output processing step When,
A recording information capture processing step for capturing the recording information of the storage means in which the output information including the display information output in the information output processing step is recorded by the predetermined recording means and captured as recording information;
An output time analysis processing step of acquiring the output time by analyzing the output time display information incorporated in the recording information captured in the recording information capture processing step;
The output time of the output information based on the output time information of the output related information stored in the output related information storage means and the meta information, and the output time of the recorded information analyzed in the output time analysis processing step Information synchronization processing step for synchronizing
An information synchronization method characterized by comprising:
コンピュータに、
音声情報、表示情報等の複数種類の情報のうち少なくとも表示情報を出力情報として出力する情報出力処理と、
前記情報出力処理による出力情報の出力指示操作等の操作内容をメタ情報として取得するメタ情報取得処理と、
時刻を計時する時計手段から前記情報出力処理において前記出力情報を出力する時間情報を出力時間情報として取得する出力時間情報取得処理と、
前記メタ情報取得処理で取得した前記メタ情報及び前記出力情報を前記出力時間情報取得処理で取得する前記出力時間情報に関連付けて出力関連情報として出力関連情報記憶手段に記憶する出力関連情報記憶処理と、
前記出力時間情報取得処理で取得された前記出力時間情報を所定レイアウトに基づいて表示情報に変換して前記出力情報の表示情報に組み込んで前記情報出力処理で出力させる出力時間表示制御処理と、
前記情報出力処理で出力される表示情報を含む前記出力情報が所定の収録手段で収録されて収録情報として取り込まれている記憶手段の該収録情報を取り込む収録情報取り込み処理と、
前記収録情報取り込み処理で取り込まれた前記収録情報に組み込まれている前記出力時間表示情報を解析して前記出力時間を取得する出力時間解析処理と、
前記出力関連情報記憶手段の記憶する前記出力関連情報の前記出力時間情報と前記メタ情報に基づいて前記出力情報の出力時間と前記出力時間解析処理で解析された前記収録情報の前記出力時間とを同期させる情報同期処理と、
を実行させることを特徴とする情報同期プログラム。
On the computer,
Information output processing for outputting at least display information as output information among a plurality of types of information such as audio information and display information; and
Meta information acquisition processing for acquiring operation information such as output instruction operation of output information by the information output processing as meta information;
Output time information acquisition processing for acquiring time information for outputting the output information as output time information in the information output processing from clock means for measuring time;
An output related information storage process for storing the meta information and the output information acquired in the meta information acquisition process in an output related information storage unit as output related information in association with the output time information acquired in the output time information acquisition process; ,
An output time display control process in which the output time information acquired in the output time information acquisition process is converted into display information based on a predetermined layout and incorporated in the display information of the output information and output in the information output process;
A recording information capturing process for capturing the recording information of the storage unit in which the output information including the display information output in the information output process is captured by a predetermined recording unit and captured as recording information;
An output time analysis process for obtaining the output time by analyzing the output time display information incorporated in the recorded information captured in the recorded information capture process;
The output time information of the output related information stored in the output related information storage means and the output time of the output information based on the meta information and the output time of the recorded information analyzed in the output time analysis process Information synchronization processing to synchronize,
An information synchronization program characterized by causing
請求項6記載の情報同期プログラムを記録したことを特徴とするコンピュータが読み取り可能な記録媒体。   A computer-readable recording medium on which the information synchronization program according to claim 6 is recorded.
JP2009040028A 2009-02-23 2009-02-23 Information synchronization apparatus, information synchronization method, information synchronization program, and recording medium Expired - Fee Related JP5257132B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2009040028A JP5257132B2 (en) 2009-02-23 2009-02-23 Information synchronization apparatus, information synchronization method, information synchronization program, and recording medium

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2009040028A JP5257132B2 (en) 2009-02-23 2009-02-23 Information synchronization apparatus, information synchronization method, information synchronization program, and recording medium

Publications (2)

Publication Number Publication Date
JP2010199760A JP2010199760A (en) 2010-09-09
JP5257132B2 true JP5257132B2 (en) 2013-08-07

Family

ID=42824054

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2009040028A Expired - Fee Related JP5257132B2 (en) 2009-02-23 2009-02-23 Information synchronization apparatus, information synchronization method, information synchronization program, and recording medium

Country Status (1)

Country Link
JP (1) JP5257132B2 (en)

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH08172597A (en) * 1994-12-19 1996-07-02 Matsushita Electric Ind Co Ltd Av synchronization detector
JP3637937B2 (en) * 1996-08-12 2005-04-13 富士ゼロックス株式会社 Information reproducing apparatus and information reproducing method
JP4080904B2 (en) * 2003-01-31 2008-04-23 株式会社リコー Information editing device, information editing program
JP2005252574A (en) * 2004-03-03 2005-09-15 Ricoh Co Ltd Device and method for creating multimedia content, program for making computer execute method, and multimedia content creating system
JP2007052565A (en) * 2005-08-16 2007-03-01 Fuji Xerox Co Ltd Information processing system and information processing method
JP4680283B2 (en) * 2008-07-08 2011-05-11 富士通株式会社 Image association apparatus, image association method, and image association program

Also Published As

Publication number Publication date
JP2010199760A (en) 2010-09-09

Similar Documents

Publication Publication Date Title
WO2014003237A1 (en) Image extraction and synthesis apparatus, and method for same
JP2008271157A (en) Sound enhancement device and control program
US8615154B2 (en) Video-audio processing apparatus and video-audio processing method
KR100934471B1 (en) Image Production Apparatus and Method Using Chroma Key
KR100395883B1 (en) Realtime lecture recording system and method for recording a files thereof
KR101850285B1 (en) Device and method for generating video script, and video producing system and method based on video script, computer program media
JP6399764B2 (en) Projection apparatus, image processing apparatus, control method therefor, and program
JP6055964B2 (en) Video production system and video production method
JP5257132B2 (en) Information synchronization apparatus, information synchronization method, information synchronization program, and recording medium
JP2011097229A (en) Apparatus and program for processing photography data
KR20100079877A (en) Method and system for creating captioning based on network
JP2015026258A (en) Document generation device
JP6802264B2 (en) Display device, output device, and information display method
JP2008090526A (en) Conference information storage device, system, conference information display device, and program
JP5729056B2 (en) Image processing apparatus and image processing method
JP5901450B2 (en) Electronic manual creation device, electronic manual browsing device, and electronic manual creation browsing system
JP2015002533A (en) Information processing apparatus, information processing method, and program
CN116506673B (en) Audio-video recording and detecting equipment data synchronous linkage and sound control searching method
JP6977847B2 (en) Image management device, image management method and program
JP2019096950A5 (en)
JP7288491B2 (en) Information processing device and control method
JP2013254381A (en) Information processing device, information processing method, and information processing program
JP2015022659A (en) Image processor and image processing method, program and storage medium
JP5987621B2 (en) Image projection system, information processing apparatus, and program
JP2014109467A (en) Information processing unit, information processing method, and program

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20120126

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A821

Effective date: 20120203

RD02 Notification of acceptance of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7422

Effective date: 20120203

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20120706

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20130312

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20130326

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20130408

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20160502

Year of fee payment: 3

R151 Written notification of patent or utility model registration

Ref document number: 5257132

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151

LAPS Cancellation because of no payment of annual fees