JP4792819B2 - Remote editing method and remote editing system - Google Patents
Remote editing method and remote editing system Download PDFInfo
- Publication number
- JP4792819B2 JP4792819B2 JP2005163598A JP2005163598A JP4792819B2 JP 4792819 B2 JP4792819 B2 JP 4792819B2 JP 2005163598 A JP2005163598 A JP 2005163598A JP 2005163598 A JP2005163598 A JP 2005163598A JP 4792819 B2 JP4792819 B2 JP 4792819B2
- Authority
- JP
- Japan
- Prior art keywords
- editing
- content data
- remote
- server
- terminal
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Landscapes
- Television Signal Processing For Recording (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
Description
本発明は、AVデータ等を編集するための遠隔編集方法及び遠隔編集システムに関する。 The present invention relates to a remote editing method and the remote editing system for editing AV data or the like.
特許文献1には、コンサート会場等で収録された映像や楽音等のAVデータに対して遠隔地のスタジオから編集作業を施し、視聴者の各端末に配信する技術が開示されている。最終的に視聴者に配信される映像や楽音等のデータは高品質であることが望ましいが、編集段階では、送受信されるデータは必ずしも高品質である必要はなく、必要十分な程度にデータ量を低減して通信回線の利用効率を向上させることが望ましい。 Patent Document 1 discloses a technique of performing editing work from a remote studio on AV data such as video and music recorded at a concert venue and distributing it to each terminal of a viewer. It is desirable that the data such as video and music to be finally delivered to the viewers should be of high quality. However, at the editing stage, the data to be transmitted and received does not necessarily have to be of high quality. It is desirable to improve the utilization efficiency of the communication line by reducing.
本発明は、通信回線の利用効率が向上する遠隔編集方法及び遠隔編集システムを提供することを目的とする。 The present invention aims to utilization of the communication line to provide remote editing method and the remote editing systems improved.
(1)上記目的を達成するための遠隔編集方法は、編集サーバがオリジナルコンテンツデータを入力する段階と、前記編集サーバが前記オリジナルコンテンツデータのコピーを不可逆圧縮して圧縮コンテンツデータを生成する段階と、前記編集サーバが前記圧縮コンテンツデータを遠隔編集端末に送信する段階と、前記遠隔編集端末が前記編集サーバから受信した前記圧縮コンテンツデータを用いて前記オリジナルコンテンツデータの編集パラメータを設定する段階と、前記遠隔編集端末が前記編集パラメータを前記編集サーバに送信する段階と、前記編集サーバが前記遠隔編集端末から受信した複数の前記編集パラメータを用いて前記オリジナルコンテンツデータから各編集パラメータに対応する複数の編集済コンテンツデータを生成する段階と、前記編集サーバが前記編集済コンテンツデータを出力する段階と、前記編集サーバが複数の前記編集済コンテンツデータのコピーを不可逆圧縮して複数の試聴用圧縮コンテンツデータを生成する段階と、前記編集サーバが複数の前記試聴用圧縮コンテンツデータを複数の視聴者端末に送信する段階と、複数の前記視聴者端末が、複数の前記試聴用圧縮コンテンツデータのうち視聴者が選択した前記試聴用圧縮コンテンツデータの識別子を前記編集サーバに送信する段階と、前記編集サーバが前記視聴者端末から受信した前記識別子を用いて、前記識別子に対応する前記試聴用圧縮コンテンツデータ毎にその前記試聴用圧縮コンテンツデータを選択した視聴者数をカウントする段階と、を含む。
オリジナルコンテンツデータのコピーを不可逆圧縮した圧縮コンテンツデータを編集サーバから遠隔編集端末に送信することにより、編集サーバから遠隔編集端末に送信されるデータ量を低減することができる。圧縮コンテンツデータを用いて設定されたオリジナルコンテンツデータの編集パラメータを遠隔編集端末から編集サーバに送信することにより、遠隔編集端末から編集サーバに送信されるデータ量を低減することができる。編集サーバが遠隔編集端末から受信した編集パラメータを用いてオリジナルコンテンツデータから編集済コンテンツデータを生成することにより、編集サーバは高品質の編集済コンテンツデータを出力することができる。
(1) A remote editing method for achieving the above object includes a step in which an editing server inputs original content data, and a step in which the editing server irreversibly compresses a copy of the original content data to generate compressed content data. The editing server sending the compressed content data to a remote editing terminal; and the remote editing terminal setting editing parameters of the original content data using the compressed content data received from the editing server; The remote editing terminal transmits the editing parameters to the editing server, and the editing server uses a plurality of editing parameters received from the remote editing terminal, and a plurality of corresponding editing parameters from the original content data. Generate edited content data A stage, the editing server outputting the edited content data, the editing server irreversibly compressing a plurality of copies of the edited content data, and generating a plurality of auditioned compressed content data; An editing server transmitting a plurality of the compressed content data for trial listening to a plurality of viewer terminals; and the compression for trial listening selected by the viewer from the plurality of compressed content data for trial listening by the plurality of viewer terminals. Transmitting the content data identifier to the editing server, and using the identifier received from the viewer terminal by the editing server, the compressed content for trial listening for each of the compressed content data for trial listening corresponding to the identifier Counting the number of viewers who have selected the data.
By transmitting compressed content data obtained by irreversibly compressing a copy of original content data from the editing server to the remote editing terminal, the amount of data transmitted from the editing server to the remote editing terminal can be reduced. By transmitting the editing parameters of the original content data set using the compressed content data from the remote editing terminal to the editing server, the amount of data transmitted from the remote editing terminal to the editing server can be reduced. The editing server generates the edited content data from the original content data using the editing parameters received from the remote editing terminal, so that the editing server can output the high-quality edited content data.
(2)前記圧縮コンテンツデータを送信する段階では、前記編集サーバが複数の前記遠隔編集端末に前記圧縮コンテンツデータを送信してもよい。前記編集パラメータを設定する段階では、複数の前記遠隔編集端末がそれぞれ同一の前記オリジナルコンテンツデータの互いに異なるセクションに前記編集パラメータを設定してもよい。前記編集済コンテンツデータを生成する段階では、前記編集サーバが複数の前記遠隔編集端末から受信した前記編集パラメータを用いて1つの前記オリジナルコンテンツデータから1つの前記編集済コンテンツデータを生成してもよい。
複数の遠隔編集端末が編集サーバから受信した同一の圧縮コンテンツデータの互いに異なるセクションに編集パラメータを設定し、複数の遠隔編集端末から編集サーバが受信した編集パラメータを用いて1つのオリジナルコンテンツデータから1つの編集済コンテンツデータを生成することにより、オリジナルコンテンツデータの編集作業を複数の遠隔編集端末で平行して進めることができる。
(2) In the step of transmitting the compressed content data, the editing server may transmit the compressed content data to a plurality of the remote editing terminals. In the step of setting the editing parameters, the plurality of remote editing terminals may set the editing parameters in different sections of the same original content data. In the step of generating the edited content data, the editing server may generate one edited content data from one original content data using the editing parameters received from the plurality of remote editing terminals. .
Editing parameters are set in different sections of the same compressed content data received by the plurality of remote editing terminals from the editing server, and one original content data is set using the editing parameters received by the editing server from the plurality of remote editing terminals. By generating one edited content data, the editing operation of the original content data can be performed in parallel by a plurality of remote editing terminals.
(3)前記圧縮コンテンツデータを送信する段階では、前記編集サーバが複数の前記遠隔編集端末に前記圧縮コンテンツデータを送信してもよい。前記編集パラメータを設定する段階では、複数の前記遠隔編集端末がそれぞれ同一の前記オリジナルコンテンツデータに前記編集パラメータを設定してもよい。前記編集済コンテンツデータを生成する段階では、前記編集サーバが複数の前記遠隔編集端末から受信した前記編集パラメータ毎に1つのオリジナルコンテンツデータから互いに異なる複数の前記編集済コンテンツデータを生成してもよい。前記編集済コンテンツデータを出力する段階では、前記編集パラメータ毎に前記編集済コンテンツデータを出力してもよい。
複数の遠隔編集端末が編集サーバから受信した同一の圧縮コンテンツデータに編集パラメータを設定し、複数の遠隔編集端末から編集サーバが受信した編集パラメータ毎に1つのオリジナルコンテンツデータから互いに異なる複数の編集済コンテンツデータを生成することにより、サーバは1つのオリジナルコンテンツデータから編集パラメータ毎に互いに異なる編集済コンテンツデータを出力することができる。
(3) In the step of transmitting the compressed content data, the editing server may transmit the compressed content data to a plurality of the remote editing terminals. In the step of setting the editing parameter, the plurality of remote editing terminals may set the editing parameter to the same original content data. In the step of generating the edited content data, the editing server may generate a plurality of different edited content data from one original content data for each of the editing parameters received from the plurality of remote editing terminals. . In the step of outputting the edited content data, the edited content data may be output for each editing parameter.
A plurality of remote editing terminals set editing parameters for the same compressed content data received from the editing server, and a plurality of edited data different from one original content data for each editing parameter received by the editing server from the plurality of remote editing terminals. By generating the content data, the server can output different edited content data for each editing parameter from one original content data.
(4)前記オリジナルコンテンツデータは、時間属性を有する複数チャネルのデータを有してもよい。前記編集パラメータは、複数の前記チャネルのデータの合成に用いるパラメータであってもよい。 (4) The original content data may include data of a plurality of channels having a time attribute. The editing parameter may be a parameter used for combining data of a plurality of the channels.
(5)上記目的を達成する遠隔編集システムは、編集サーバと遠隔編集端末と視聴者端末とを備え、前記編集サーバは、オリジナルコンテンツデータを入力する手段と、前記オリジナルコンテンツデータのコピーを不可逆圧縮して圧縮コンテンツデータを生成する手段と、前記圧縮コンテンツデータを前記遠隔編集端末に送信する手段と、前記遠隔編集端末から受信した複数の編集パラメータを用いて前記オリジナルコンテンツデータから各編集パラメータに対応する複数の編集済コンテンツデータを生成する手段と、前記編集済コンテンツデータを出力する手段と、複数の前記編集済コンテンツデータのコピーを不可逆圧縮して複数の試聴用圧縮コンテンツデータを生成する手段と、複数の前記試聴用圧縮コンテンツデータを複数の前記視聴者端末に送信する手段と、前記視聴者端末から受信した識別子を用いて、前記識別子に対応する前記試聴用圧縮コンテンツデータ毎にその前記試聴用圧縮コンテンツデータを選択した視聴者数をカウントする手段と、を備え、前記遠隔編集端末は、前記編集サーバから受信した前記圧縮コンテンツを用いて前記オリジナルコンテンツデータの編集パラメータを設定する手段と、前記編集パラメータを前記編集サーバに送信する手段と、を備え、前記視聴者端末は、複数の前記試聴用圧縮コンテンツデータのうち視聴者が選択した前記試聴用圧縮コンテンツデータの識別子を前記編集サーバに送信する手段を備える。
オリジナルコンテンツデータのコピーを不可逆圧縮した圧縮コンテンツデータを編集サーバから遠隔編集端末に送信することにより、編集サーバから遠隔編集端末に送信されるデータ量を低減することができる。圧縮コンテンツデータを用いて設定されたオリジナルコンテンツデータの編集パラメータを遠隔編集端末から編集サーバに送信することにより、遠隔編集端末から編集サーバに送信されるデータ量を低減することができる。編集サーバが遠隔編集端末から受信した編集パラメータを用いてオリジナルコンテンツデータから編集済コンテンツデータを生成することにより、サーバは高品質の編集済コンテンツデータを出力することができる。
(5) A remote editing system that achieves the above object includes an editing server, a remote editing terminal, and a viewer terminal, wherein the editing server inputs means for inputting original content data, and irreversibly compresses a copy of the original content data. A means for generating compressed content data, a means for transmitting the compressed content data to the remote editing terminal, and a plurality of editing parameters received from the remote editing terminal , corresponding to each editing parameter from the original content data Means for generating a plurality of edited content data, means for outputting the edited content data, and means for irreversibly compressing a plurality of copies of the edited content data to generate a plurality of compressed content data for trial listening A plurality of the compressed content data for trial listening Means for transmitting to the viewer terminal, and means for counting the number of viewers who have selected the compressed content data for trial listening for each compressed content data for trial listening corresponding to the identifier, using the identifier received from the viewer terminal And the remote editing terminal includes means for setting editing parameters of the original content data using the compressed content received from the editing server, and means for transmitting the editing parameters to the editing server. The viewer terminal includes means for transmitting, to the editing server, an identifier of the compressed content data for trial listening selected by the viewer from the plurality of compressed content data for trial listening.
By transmitting compressed content data obtained by irreversibly compressing a copy of original content data from the editing server to the remote editing terminal, the amount of data transmitted from the editing server to the remote editing terminal can be reduced. By transmitting the editing parameters of the original content data set using the compressed content data from the remote editing terminal to the editing server, the amount of data transmitted from the remote editing terminal to the editing server can be reduced. When the editing server generates edited content data from the original content data using the editing parameters received from the remote editing terminal, the server can output high-quality edited content data.
(6)上記目的を達成する編集サーバは、オリジナルコンテンツデータを入力する手段と、前記オリジナルコンテンツデータのコピーを不可逆圧縮して圧縮コンテンツデータを生成する手段と、前記圧縮コンテンツデータを遠隔編集端末に送信する手段と、前記遠隔編集端末から受信した編集パラメータを用いて、送信元の前記遠隔編集端末に送信した前記圧縮コンテンツデータに対応する前記オリジナルコンテンツデータから編集済コンテンツデータを生成する手段と、前記編集済コンテンツデータを出力する手段と、を備える。
オリジナルコンテンツデータのコピーを不可逆圧縮した圧縮コンテンツデータを編集サーバから遠隔編集端末に送信することにより、編集サーバから遠隔編集端末に送信されるデータ量を低減することができる。編集サーバが遠隔編集端末から受信した編集パラメータを用いてオリジナルコンテンツデータから編集済コンテンツデータを生成することにより、遠隔編集端末から編集サーバに送信されるデータ量を低減することができ、サーバは高品質の編集済コンテンツデータを出力することができる。
(6) An editing server that achieves the above object includes means for inputting original content data, means for irreversibly compressing a copy of the original content data to generate compressed content data, and sending the compressed content data to a remote editing terminal. Means for transmitting, means for generating edited content data from the original content data corresponding to the compressed content data transmitted to the remote editing terminal of the transmission source, using the editing parameters received from the remote editing terminal; Means for outputting the edited content data.
By transmitting compressed content data obtained by irreversibly compressing a copy of original content data from the editing server to the remote editing terminal, the amount of data transmitted from the editing server to the remote editing terminal can be reduced. By generating edited content data from the original content data using the editing parameters received from the remote editing terminal by the editing server, the amount of data transmitted from the remote editing terminal to the editing server can be reduced. Quality edited content data can be output.
(7)上記目的を達成する遠隔編集端末は、オリジナルコンテンツデータのコピーを不可逆圧縮した圧縮コンテンツデータを編集サーバから受信する手段と、前記圧縮コンテンツデータを用いて、前記オリジナルコンテンツデータの編集パラメータを設定する手段と、前記編集パラメータを前記編集サーバに送信する手段と、を備える。
圧縮コンテンツデータを用いて設定されたオリジナルコンテンツデータの編集パラメータを遠隔編集端末から編集サーバに送信することにより、編集サーバから遠隔編集端末に送信されるデータ量と、遠隔編集端末から編集サーバに送信されるデータ量とを低減することができる。
(7) A remote editing terminal that achieves the above-described object uses a means for receiving, from the editing server, compressed content data obtained by irreversibly compressing a copy of original content data, and using the compressed content data, editing parameters for the original content data Means for setting, and means for transmitting the editing parameters to the editing server.
By sending the editing parameters of the original content data set using the compressed content data from the remote editing terminal to the editing server, the amount of data transmitted from the editing server to the remote editing terminal and the remote editing terminal to the editing server The amount of data to be reduced can be reduced.
尚、本発明に備わる複数の手段の各機能は、構成自体で機能が特定されるハードウェア資源、プログラムにより機能が特定されるハードウェア資源、又はそれらの組み合わせにより実現される。また、これら複数の手段の各機能は、各々が物理的に互いに独立したハードウェア資源で実現されるものに限定されない。
また、本発明は、プログラムの発明としても、そのプログラムを記録した記録媒体の発明としても特定することができる。
The functions of the plurality of means provided in the present invention are realized by hardware resources whose functions are specified by the configuration itself, hardware resources whose functions are specified by a program, or a combination thereof. The functions of the plurality of means are not limited to those realized by hardware resources that are physically independent of each other.
Further, the present invention can be specified as an invention of a program as well as an invention of a recording medium on which the program is recorded.
以下、複数の実施例に基づいて本発明の実施の形態を説明する。各実施例において同一の符号が付された構成要素は、その符号が付された他の実施例の構成要素と対応する。
(第一実施例)
Embodiments of the present invention will be described below based on a plurality of examples. In each of the embodiments, the component having the same reference sign corresponds to the component of the other embodiment having the reference sign.
(First Example)
(1)構成
図1は本発明の第一実施例による遠隔編集システム5の全体構成を示す模式図である。遠隔編集システム5は、例えばスタジオ等で録音されたオリジナルの楽音データを遠隔地にいる編集作業者が編集する環境を実現するコンピュータシステムであって、インターネット等の通信ネットワーク4を介して相互に通信可能に接続されている編集サーバ1と遠隔編集端末2で構成される。視聴者端末3は、通信ネットワーク4を介して、遠隔編集システム5の編集サーバ1と相互に通信可能に接続される。
(1) Configuration FIG. 1 is a schematic diagram showing the overall configuration of a
図2は編集サーバ1のハードウェア構成を示すブロック図である。編集サーバ1は編集プログラムを実行することによりAV信号処理、デコード、エンコード等を実行するコンピュータである。HDD(Hard Disk Device)10には編集プログラムが格納されている。編集プログラムは遠隔地の図示しない別のサーバから通信ネットワーク4を経由してHDD10に格納することもできる。HDD10に格納されているプログラムやデータはCPU17によって読み出され、RAM15に転送される。CPU17は、ROM16やHDD10に格納されている各種のプログラムを実行して編集サーバ1の各部を制御する。ROM16は、起動プログラムを格納している不揮発性メモリである。RAM15は、プログラムや処理対象データ等が一時的に格納される揮発性メモリである。通信部18は、通信ネットワーク4を経由して接続された遠隔編集端末2や視聴者端末3等とのデータの送受信処理を制御する。外部ストレージインターフェース12は、図示しないリムーバブルメモリ等の外部記録媒体に接続される。外部記録媒体に格納されたデータは外部ストレージインターフェース12によって編集サーバ1に入力され、編集サーバ1内のデータは外部ストレージインターフェース12によって外部記録媒体に出力される。
FIG. 2 is a block diagram showing a hardware configuration of the editing server 1. The editing server 1 is a computer that executes AV signal processing, decoding, encoding, and the like by executing an editing program. An HDD (Hard Disk Device) 10 stores an editing program. The editing program can also be stored in the
図3は遠隔編集端末2のハードウェア構成を示すブロック図である。遠隔編集端末2は遠隔編集プログラムを実行することにより遠隔編集処理に必要なAV信号処理、デコード等を実行するコンピュータである。CPU33は、ROM32やHDD20に格納されているプログラムを実行して遠隔編集端末2の各部を制御する。ROM32は、起動プログラムを格納している不揮発性メモリである。HDD20には遠隔編集プログラムが格納されている。遠隔編集プログラムは遠隔地の図示しない別のサーバから通信ネットワーク4を経由してHDD20に格納することもできる。RAM31は、各種のプログラムや処理対象データが一時的に格納される揮発性メモリである。通信部26は、通信ネットワーク4を経由して接続された編集サーバ1等とのデータの送受信処理を制御する。LCD等のディスプレイ28は表示コントローラ27によって制御され、遠隔編集のための操作画面を表示する。操作部30はキーボードやマウス等によって構成される。サウンドコントローラ24は、D/A変換器やアンプ等を備え、音声信号をスピーカ25に出力する。
FIG. 3 is a block diagram showing a hardware configuration of the
(2)作動
図4は第一実施例の遠隔編集の処理の流れを示すシーケンス図である。
はじめに編集サーバ1は、スタジオ等で録音されたオリジナルコンテンツデータとしてのオリジナル楽音データを入力し、HDD10に格納する(ステップS100)。具体的には、CPU17は図示しないリムーバブルメモリやハードディスクに格納されているオリジナル楽音データを外部ストレージインターフェース12から入力し、HDD10に格納する。編集サーバ1はオリジナル楽音データを、録音によって入力してもよいし、通信ネットワーク4を経由して入力してもよい。このとき、外部ストレージインターフェース12、図示しないマイク、通信部18等は「オリジナルコンテンツデータを入力する手段」として機能する。オリジナル楽音データは、例えばボーカル、ギター等のトラック毎の高ビットレートのPCMデータで構成される。
(2) Operation FIG. 4 is a sequence diagram showing a flow of remote editing processing according to the first embodiment.
First, the editing server 1 inputs original musical sound data as original content data recorded in a studio or the like and stores it in the HDD 10 (step S100). Specifically, the
ステップS102では、編集サーバ1は、HDD10に格納されているオリジナル楽音データのコピーを生成し、コピーされたオリジナル楽音データの各トラックを不可逆圧縮し、圧縮コンテンツデータとして低ビットレートの圧縮楽音データを生成する。具体的には例えばCPU17はHDD10からRAM15に読み込んだオリジナル楽音データのコピーをMP3形式に変換する。このときCPU17は「圧縮コンテンツデータを生成する手段」として機能する。尚、専用のDSPでオリジナル楽音データを圧縮してもよい。不可逆圧縮形式はWMA形式やAAC形式等であってもよい。圧縮後のビットレートは任意であるが例えば128kbps、64kbpsとする。
In step S102, the editing server 1 generates a copy of the original musical tone data stored in the
ステップS104では、編集サーバ1は、生成した圧縮楽音データを遠隔編集端末2に送信する。具体的には例えば、遠隔編集端末2から送信される圧縮楽音データの送信要求に応じてCPU17は通信部18を介して遠隔編集端末2に圧縮楽音データを送信する。このとき、編集サーバ1のCPU17及び通信部18は「圧縮コンテンツデータを遠隔編集端末に送信する手段」として機能し、遠隔編集端末2のCPU33及び通信部26は「圧縮コンテンツデータを編集サーバから受信する手段」として機能する。オリジナル楽音データのコピーを不可逆圧縮した圧縮楽音データを編集サーバ1から遠隔編集端末2に送信することにより、編集サーバ1から遠隔編集端末2に送信されるデータ量を低減することができる。
In step S <b> 104, the editing server 1 transmits the generated compressed musical tone data to the
編集サーバ1から圧縮楽音データを受信した遠隔編集端末2は、遠隔編集アプリケーションを実行してオリジナル楽音データの編集パラメータを設定する(ステップS106)。具体的には例えば、CPU33が圧縮楽音データをデコードしてPCM形式の楽音データを生成し、ディスプレイ28に図5(A)に示すような編集操作画面100を表示する。編集操作画面100には、編集作業者の指示を遠隔編集端末2に入力するためのアイコンや楽音データの波形などが表示される。例えば、編集作業者がマウスやキーボードを用いて編集したい区間を波形表示領域106から選択することにより、編集対象区間を設定する指示が遠隔編集端末2に入力される。また例えば、編集作業者がエフェクトメニュー108からリバーブ、ピッチ補正、タイムストレッチ、ディレイ等の項目を選択すると、遠隔編集端末2は各項目毎に詳細な設定指示を入力するための詳細設定ウィンドウを表示する。また例えば編集作業者がパンコントロールスライダ102やボリュームコントロールスライダ104等のアイコンを操作すると、遠隔編集端末2はトラック毎の音像の定位位置やトラック毎のボリュームの設定指示を入力する。CPU33は、入力された設定指示に応じて、オリジナル楽音データの編集パラメータを設定する。このとき、CPU33は、「編集パラメータを設定する手段」として機能する。編集パラメータは、エフェクトメニュー108の項目に対応する編集項目、波形表示領域106の選択区間に対応する編集区間の開始時間と終了時間、編集項目毎の内容(例えば音像定位位置)を示す値を有する。編集パラメータは、トラック毎に設定することも、全体に対して設定することもできる。トラック毎に設定される編集パラメータは、トラック毎の編集処理に用いられ、全体に設定される編集パラメータは、ミキシング処理以後の編集処理に用いられる。例えば図5(B)の112に示す編集パラメータ「pitch(0:00:01.00,0:00:05.00,+2);」は、トラック1について曲先頭から1秒目の位置から5秒目までの区間の音程を+2レベル補正することを意味する。編集作業者が再生アイコン110をマウスでクリックすると、CPU33は編集パラメータに対応するオーディオ信号処理を低ビットレートの楽音データに対して施し、その結果生成されるデータをサウンドコントローラ24に出力し、サウンドコントローラ24がそのデータに基づいてスピーカ25を駆動する。したがって、編集サーバ1が編集パラメータに基づいてオリジナル楽音データを編集すると得られる楽音を、編集作業者は低い音質で事前に確認することができる。
The
ステップS108では、遠隔編集端末2は、上述のように設定した編集パラメータを編集サーバ1に送信する。具体的には遠隔編集端末2の通信部26から通信ネットワーク4を介して編集サーバ1の通信部18に編集パラメータが送信される。このときCPU33及び通信部26は「編集パラメータを編集サーバに送信する手段」として機能する。編集パラメータのデータサイズは楽音データのデータサイズに比べて極めて小さいため、編集パラメータを遠隔編集端末2から編集サーバ1に送信することにより、遠隔編集端末2から編集サーバ1に送信されるデータ量を低減することができる。
In step S108, the
ステップS110では、編集サーバ1は、遠隔編集端末2から受信した編集パラメータを用いて、高ビットレートのオリジナル楽音データに対する編集処理を実行し、高品質の編集済み楽音データを生成する。具体的にはCPU17はHDD10から読み込んでRAM15に格納した高ビットレートのオリジナル楽音データに対し、編集パラメータに対応するオーディオ信号処理を実行し、例えばLR2チャンネルPCM形式の編集済楽音データを生成する。トラック毎に設定されている編集パラメータはトラック毎のオーディオ信号処理に用いられ、全体に設定されている編集パラメータはミキシング処理後のオーディオ信号処理に用いられる。例えば、開始時間と終了時間で指定されているトラックのある区間に対してタイムストレッチが設定されている場合、ピッチ(音高)を変えずにその区間の再生期間が指定されている再生期間に変化するように、その区間の波形を変形させる処理をCPU17が実行する。また例えば、トラックのある区間に対してパンが設定されている場合、ミキシング処理時にLRチャネルにディレイ処理を実行する。このとき、CPU17は「編集済みコンテンツデータを生成する手段」として機能する。尚、このような編集処理はDSP等の専用回路によって実行してもよい。遠隔編集端末2から受信した編集パラメータを用いてオリジナル楽音データから編集済み楽音データを生成することにより、編集サーバ1は高品質の編集済み楽音データを出力できる。
In step S110, the editing server 1 uses the editing parameters received from the
ステップS112では、編集サーバ1は、編集済み楽音データを通信ネットワーク4を介して視聴者端末3に送信したり、図示しないサウンドシステムを経由してスピーカに転送したり、CD等のリムーバブルメモリに書き込む等して出力する。具体的には例えば、CPU17及び通信部18が視聴者端末3から送信される視聴要求に応じて編集済み楽音データを通信回線に送出する。このとき、通信部18、外部ストレージインターフェース12、図示しないサウンドシステム及びスピーカ等は「編集済みコンテンツデータを出力する手段」として機能する。
In step S112, the editing server 1 transmits the edited musical sound data to the viewer terminal 3 via the communication network 4, transfers it to a speaker via a sound system (not shown), or writes it to a removable memory such as a CD. Equally output. Specifically, for example, the
(第二実施例)
第二実施例では、編集サーバ1と複数の遠隔編集端末2間で一つの楽音データを並行して編集する実施形態を説明する。図6は本発明の第二実施例に係る遠隔編集の処理の流れを示すシーケンス図である。以下の説明では、図6に示すように、遠隔編集端末2A、2Bで一つのオリジナル楽音データに対する編集パラメータを設定する実施形態を説明する。
はじめに編集サーバ1はHDD10等に格納されているオリジナル楽音データのコピーを不可逆圧縮し圧縮楽音データを生成する(ステップS200)。具体的には例えば、LR2チャンネルを有する高ビットレートのオリジナル楽音データのコピーを低ビットレートの圧縮楽音データを生成するMP3形式に変換する。
(Second embodiment)
In the second embodiment, an embodiment in which one musical tone data is edited in parallel between the editing server 1 and a plurality of
First, the editing server 1 irreversibly compresses a copy of the original musical tone data stored in the
ステップS202では、編集サーバ1は、圧縮楽音データを遠隔編集端末2Aに送信する。具体的には例えば、CPU17は、遠隔編集端末2Aからの送信要求に応じて、圧縮楽音データを通信部18を介して遠隔編集端末2Aに送信する。
In step S202, the editing server 1 transmits the compressed musical tone data to the
ステップS204では、編集サーバ1はステップS202と同様に、圧縮楽音データを遠隔編集端末2Bに送信する。
In step S204, the editing server 1 transmits the compressed musical sound data to the
ステップS206では、遠隔編集端末2Aは、遠隔編集アプリケーションを実行してオリジナル楽音データの特定のセクションに編集パラメータを設定する。具体的には、編集サーバ1から受信した圧縮楽音データを遠隔編集プログラムを実行しているCPU33がデコードしてPCM形式の楽音データを生成し、編集操作画面100をディスプレイ28に表示する。CPU33は、編集作業者によって入力されたボリュームやピッチ補正等の設定指示に応じて、オリジナル楽音データの特定のセクションに編集パラメータを設定する。特定のセクションとは、例えば、曲の前半と後半や、歌声のトラックと伴奏のトラック等を意味する。
In step S206, the
ステップS210では、遠隔編集端末2BもステップS206と同様にオリジナル楽音データの特定のセクションに編集パラメータを設定する。
In step S210, the
ステップS208では、遠隔編集端末2Aは設定した編集パラメータを編集サーバ1に送信する。
In step S208, the
ステップS212では、遠隔編集端末2BもステップS208と同様に、設定した編集パラメータを編集サーバ1に送信する。
In step S212, the
ステップS214では、編集サーバ1は、遠隔編集端末2Aから受信した特定のセクションの編集パラメータと遠隔編集端末2Bから受信した特定のセクションの編集パラメータとを用いて、オリジナル楽音データから編集済み楽音データを生成する。具体的には、CPU17は、HDD10からRAM15にオリジナル楽音データを読み込み、遠隔編集端末2Aから編集パラメータを受信したセクションのオリジナル楽音データに対しては遠隔編集端末2Aから受信した編集パラメータを用いてオーディオ信号処理を実行し、遠隔編集端末2Bから編集パラメータを受信したセクションのオリジナル楽音データに対しては遠隔編集端末2Bから受信した編集パラメータを用いてオーディオ信号処理を実行し、1つのPCM形式の編集済み楽音データを生成する。
In step S214, the editing server 1 uses the editing parameters of the specific section received from the
以上のように、複数の遠隔編集端末2が同一の楽音データの互いに異なるセクションに編集パラメータを設定し、編集サーバ1が複数の遠隔編集端末2から受信した編集パラメータを用いて1つのオリジナル楽音データから1つの編集済楽音データを生成することにより、オリジナル楽音データの編集作業を複数の遠隔編集端末で平行して進めることができる。また編集サーバ1が受信済みの編集パラメータとともに圧縮コンテンツデータを遠隔編集端末2に送信することによって、編集パラメータを使いまわすことができ、編集作業の効率が向上する。
As described above, a plurality of
(第三実施例)
第三実施例では、編集サーバ1と複数の遠隔編集端末2間で一つのオリジナル楽音データから互いに異なる複数の編集済み楽音データを生成する実施形態について説明する。
図7は本発明の第三実施例に係る遠隔編集の処理の流れを示すシーケンス図である。以下の説明では、図7に示すように、2台の遠隔編集端末2A、2Bで一つのオリジナル楽音データに対する編集パラメータを設定する実施形態を説明する。
はじめに、編集サーバ1はオリジナル楽音データから圧縮楽音データを生成し、1つの圧縮楽音データを遠隔編集端末2A及び2Bに送信する(ステップS300、302)。
(Third embodiment)
In the third embodiment, an embodiment will be described in which a plurality of pieces of edited musical tone data different from one original musical tone data are generated between the editing server 1 and a plurality of
FIG. 7 is a sequence diagram showing a flow of remote editing processing according to the third embodiment of the present invention. In the following description, as shown in FIG. 7, an embodiment in which editing parameters for one original musical tone data are set by two
First, the editing server 1 generates compressed musical tone data from the original musical tone data, and transmits one compressed musical tone data to the
ステップS304では、遠隔編集端末2Aは、受信した圧縮楽音データを用いてオリジナル楽音データの全体にわたって編集パラメータAを設定し、編集サーバ1に送信する。
In step S304, the
ステップS306では、遠隔編集端末2BはステップS304と同様に、受信した圧縮楽音データを用いてオリジナル楽音データの全体にわたって編集パラメータBを設定し、編集サーバ1に送信する。
In step S306, as in step S304, the
ステップS308では、編集サーバ1は、遠隔編集端末2Aから受信した編集パラメータAを用いてオリジナル楽音データから編集済み楽音データAを、遠隔編集端末2Bから受信した編集パラメータBを用いてオリジナル楽音データから編集済み楽音データBを、それぞれ生成する。
In step S308, the editing server 1 uses the editing parameter A received from the
このように、複数の遠隔編集端末2が編集サーバ1から受信した同一の圧縮楽音データを用いて編集パラメータを設定し、複数の遠隔編集端末2から編集サーバ1が受信した編集パラメータ毎に1つのオリジナル楽音データから互いに異なる複数の編集済楽音データを生成することにより、編集サーバ1は1つのオリジナル楽音データから編集パラメータ毎に互いに異なる複数の編集済楽音データを出力することができる。
In this way, editing parameters are set using the same compressed musical tone data received by the plurality of
さらに、上述のようにして生成された複数の編集済み楽音データに対して、どの編集パラメータによるアレンジに人気があるかを競うオーサリングコンテスト等を以下のように実施してもよい。
ステップS310では、編集サーバ1は、編集済み楽音データAのコピー及び編集済み楽音データBのコピーをそれぞれ圧縮して試聴用圧縮楽音データA及び試聴用圧縮楽音データBを生成する。
Further, an authoring contest for competing with which editing parameter is popular for the plurality of edited musical tone data generated as described above may be performed as follows.
In step S310, the editing server 1 compresses the copy of the edited musical tone data A and the copy of the edited musical tone data B, respectively, to generate compressed musical tone data A for trial listening and compressed musical tone data B for trial listening.
ステップS312及びステップS314では、編集サーバ1は、試聴用圧縮楽音データA及び試聴用圧縮データBを、視聴者端末3Aと視聴者端末3Bに送信する。高品質の編集済み楽音データを再び不可逆圧縮して試聴用圧縮楽音データを生成し視聴者端末3に送信することにより、編集サーバ1から複数の視聴者端末3に送信されるデータ量を低減することができる。 In steps S312 and S314, the editing server 1 transmits the trial listening compressed music data A and the trial listening compressed data B to the viewer terminal 3A and the viewer terminal 3B. The amount of data transmitted from the editing server 1 to the plurality of viewer terminals 3 is reduced by irreversibly compressing the high-quality edited musical tone data again to generate compressed musical tone data for trial listening and transmitting it to the viewer terminal 3. be able to.
ステップS316及びステップS318では、視聴者は試聴用圧縮楽音データAと試聴用圧縮楽音データBとを聴き比べ、どちらが好みであるか投票する。具体的には例えば、視聴者端末3A及び視聴者端末3Bは、視聴者が選択した楽音データの識別子を編集サーバ1に送信する。 In step S316 and step S318, the viewer listens to the compressed musical sound data A for trial listening and the compressed musical sound data B for trial listening, and votes which is preferred. Specifically, for example, the viewer terminal 3 </ b> A and the viewer terminal 3 </ b> B transmit the musical sound data identifier selected by the viewer to the editing server 1.
ステップS320では、編集サーバ1は、投票結果を集計する。具体的には、CPU17は、複数の視聴者端末3から受信した識別子を用いて、識別子に対応する楽音データ毎にその楽音データを選択した視聴者数をカウントする。
In step S320, the editing server 1 totals the voting results. Specifically, the
上述の第一実施例から第三実施例では、時間属性を有する複数チャネルのデータを有するコンテンツデータとしてトラック毎のPCMデータを有する楽音データを例に本発明を説明したが、本発明は遠隔動画編集にも適用できる。 In the first to third embodiments described above, the present invention has been described by taking, as an example, musical sound data having PCM data for each track as content data having data of a plurality of channels having time attributes. It can also be applied to editing.
1:編集サーバ、2:遠隔編集端末、3:視聴者端末、4:通信ネットワーク、5:遠隔編集システム、10:HDD、12:外部ストレージインターフェース(入力手段、出力手段)、17:CPU(生成手段)、18:通信部(入力手段、送信手段、出力手段)、26:通信部(受信手段、送信手段)、33:CPU(設定手段)、100:編集操作画面
1: editing server, 2: remote editing terminal, 3: viewer terminal, 4: communication network, 5: remote editing system, 10: HDD, 12: external storage interface (input means, output means), 17: CPU (generation) Means), 18: communication section (input means, transmission means, output means), 26: communication section (reception means, transmission means), 33: CPU (setting means), 100: editing operation screen
Claims (5)
前記編集サーバが前記オリジナルコンテンツデータのコピーを不可逆圧縮して圧縮コンテンツデータを生成する段階と、
前記編集サーバが前記圧縮コンテンツデータを遠隔編集端末に送信する段階と、
前記遠隔編集端末が前記編集サーバから受信した前記圧縮コンテンツデータを用いて前記オリジナルコンテンツデータの編集パラメータを設定する段階と、
前記遠隔編集端末が前記編集パラメータを前記編集サーバに送信する段階と、
前記編集サーバが前記遠隔編集端末から受信した複数の前記編集パラメータを用いて前記オリジナルコンテンツデータから各編集パラメータに対応する複数の編集済コンテンツデータを生成する段階と、
前記編集サーバが前記編集済コンテンツデータを出力する段階と、
前記編集サーバが複数の前記編集済コンテンツデータのコピーを不可逆圧縮して複数の試聴用圧縮コンテンツデータを生成する段階と、
前記編集サーバが複数の前記試聴用圧縮コンテンツデータを複数の視聴者端末に送信する段階と、
複数の前記視聴者端末が、複数の前記試聴用圧縮コンテンツデータのうち視聴者が選択した前記試聴用圧縮コンテンツデータの識別子を前記編集サーバに送信する段階と、
前記編集サーバが前記視聴者端末から受信した前記識別子を用いて、前記識別子に対応する前記試聴用圧縮コンテンツデータ毎にその前記試聴用圧縮コンテンツデータを選択した視聴者数をカウントする段階と、
を含む遠隔編集方法。 The editing server enters the original content data;
The editing server irreversibly compresses a copy of the original content data to generate compressed content data;
The editing server sending the compressed content data to a remote editing terminal;
Setting the editing parameters of the original content data using the compressed content data received by the remote editing terminal from the editing server;
The remote editing terminal sending the editing parameters to the editing server;
Generating a plurality of edited content data corresponding to each editing parameter from the original content data using the plurality of editing parameters received from the remote editing terminal by the editing server;
The editing server outputting the edited content data;
The editing server irreversibly compresses a plurality of copies of the edited content data to generate a plurality of auditioned compressed content data;
The editing server transmitting a plurality of compressed content data for trial listening to a plurality of viewer terminals;
A plurality of the viewer terminals transmitting the identifier of the compressed content data for trial listening selected by the viewer from the plurality of compressed content data for trial listening to the editing server;
Using the identifier received from the viewer terminal by the editing server, counting the number of viewers who have selected the compressed content data for trial listening for each compressed content data for trial listening corresponding to the identifier;
Remote editing method including.
前記編集パラメータを設定する段階では、複数の前記遠隔編集端末がそれぞれ同一の前記オリジナルコンテンツデータの互いに異なるセクションに前記編集パラメータを設定し、
前記編集済コンテンツデータを生成する段階では、前記編集サーバが複数の前記遠隔編集端末から受信した前記編集パラメータを用いて1つの前記オリジナルコンテンツデータから1つの前記編集済コンテンツデータを生成する請求項1に記載の遠隔編集方法。 In the step of transmitting the compressed content data, the editing server transmits the compressed content data to a plurality of the remote editing terminals,
In the step of setting the editing parameter, the plurality of remote editing terminals respectively set the editing parameter in different sections of the same original content data,
The step of generating the edited content data, wherein the editing server generates one edited content data from one original content data using the editing parameters received from a plurality of remote editing terminals. The remote editing method described in 1.
前記編集パラメータを設定する段階では、複数の前記遠隔編集端末がそれぞれ同一の前記オリジナルコンテンツデータに前記編集パラメータを設定し、
前記編集済コンテンツデータを生成する段階では、前記編集サーバが複数の前記遠隔編集端末から受信した前記編集パラメータ毎に1つの前記オリジナルコンテンツデータから互いに異なる複数の前記編集済コンテンツデータを生成し、
前記編集済コンテンツデータを出力する段階では、前記編集パラメータ毎に前記編集済コンテンツデータを出力する請求項1に記載の遠隔編集方法。 In the step of transmitting the compressed content data, the editing server transmits the compressed content data to a plurality of the remote editing terminals,
In the step of setting the editing parameter, the plurality of remote editing terminals respectively set the editing parameter to the same original content data,
In the step of generating the edited content data, the editing server generates a plurality of different edited content data from one original content data for each of the editing parameters received from the plurality of remote editing terminals,
The remote editing method according to claim 1, wherein in the step of outputting the edited content data, the edited content data is output for each editing parameter.
前記編集パラメータは、複数の前記チャネルのデータの合成に用いるパラメータである請求項1〜3のいずれか一項に記載の遠隔編集方法。 The original content data includes data of a plurality of channels having a time attribute,
The remote editing method according to any one of claims 1 to 3, wherein the editing parameter is a parameter used for combining data of the plurality of channels.
前記編集サーバは、
オリジナルコンテンツデータを入力する手段と、
前記オリジナルコンテンツデータのコピーを不可逆圧縮して圧縮コンテンツデータを生成する手段と、
前記圧縮コンテンツデータを前記遠隔編集端末に送信する手段と、
前記遠隔編集端末から受信した複数の編集パラメータを用いて前記オリジナルコンテンツデータから各編集パラメータに対応する複数の編集済コンテンツデータを生成する手段と、
前記編集済コンテンツデータを出力する手段と、
複数の前記編集済コンテンツデータのコピーを不可逆圧縮して複数の試聴用圧縮コンテンツデータを生成する手段と、
複数の前記試聴用圧縮コンテンツデータを複数の前記視聴者端末に送信する手段と、
前記視聴者端末から受信した識別子を用いて、前記識別子に対応する前記試聴用圧縮コンテンツデータ毎にその前記試聴用圧縮コンテンツデータを選択した視聴者数をカウントする手段と、を備え、
前記遠隔編集端末は、
前記編集サーバから受信した前記圧縮コンテンツを用いて前記オリジナルコンテンツデータの編集パラメータを設定する手段と、
前記編集パラメータを前記編集サーバに送信する手段と、を備え、
前記視聴者端末は、
複数の前記試聴用圧縮コンテンツデータのうち視聴者が選択した前記試聴用圧縮コンテンツデータの識別子を前記編集サーバに送信する手段を備える遠隔編集システム。 A remote editing system comprising an editing server, a remote editing terminal, and a viewer terminal,
The editing server
Means for inputting original content data;
Means for irreversibly compressing a copy of the original content data to generate compressed content data;
Means for transmitting the compressed content data to the remote editing terminal;
Means for generating a plurality of edited content data corresponding to each editing parameter from the original content data using a plurality of editing parameters received from the remote editing terminal;
Means for outputting the edited content data;
Means for irreversibly compressing a plurality of copies of the edited content data to generate a plurality of auditioned compressed content data;
Means for transmitting a plurality of compressed content data for trial listening to the plurality of viewer terminals;
Means for counting the number of viewers who have selected the compressed content data for trial listening for each compressed content data for trial listening corresponding to the identifier, using the identifier received from the viewer terminal;
The remote editing terminal is
Means for setting editing parameters of the original content data using the compressed content received from the editing server;
Means for transmitting the editing parameters to the editing server,
The viewer terminal is
A remote editing system comprising: means for transmitting an identifier of the compressed content data for trial listening selected by a viewer among the plurality of compressed content data for trial listening to the editing server.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2005163598A JP4792819B2 (en) | 2005-06-03 | 2005-06-03 | Remote editing method and remote editing system |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2005163598A JP4792819B2 (en) | 2005-06-03 | 2005-06-03 | Remote editing method and remote editing system |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2006340130A JP2006340130A (en) | 2006-12-14 |
JP4792819B2 true JP4792819B2 (en) | 2011-10-12 |
Family
ID=37560258
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2005163598A Expired - Fee Related JP4792819B2 (en) | 2005-06-03 | 2005-06-03 | Remote editing method and remote editing system |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP4792819B2 (en) |
Family Cites Families (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP3237161B2 (en) * | 1992-01-16 | 2001-12-10 | ヤマハ株式会社 | Automatic performance device |
JP3900384B2 (en) * | 1997-04-06 | 2007-04-04 | ソニー株式会社 | Video signal processing apparatus and video signal processing method |
JPH11126461A (en) * | 1997-10-22 | 1999-05-11 | Sony Corp | Video editing device and its backup quality guarantee method, and information taking-in quality guarantee method |
-
2005
- 2005-06-03 JP JP2005163598A patent/JP4792819B2/en not_active Expired - Fee Related
Also Published As
Publication number | Publication date |
---|---|
JP2006340130A (en) | 2006-12-14 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6484605B2 (en) | Automatic multi-channel music mix from multiple audio stems | |
US20110066438A1 (en) | Contextual voiceover | |
US20140064519A1 (en) | Distributed, self-scaling, network-based architecture for sound reinforcement, mixing, and monitoring | |
JP6010176B2 (en) | Audio signal decoding method and apparatus | |
JP2009535988A (en) | System and method for processing data signals | |
JPH1152966A (en) | Music playing system | |
US20210247953A1 (en) | System and Method for Manipulating and Transmitting Live Media | |
JP4792819B2 (en) | Remote editing method and remote editing system | |
JP5533503B2 (en) | COMMUNICATION DEVICE, COMMUNICATION METHOD, AND COMMUNICATION PROGRAM | |
JP2009031357A (en) | Music piece distribution system, music piece editing device, music piece playback device, music piece storage device, and program | |
CN100550130C (en) | Be used to distribute and be used to reset the content distributing server and the terminal of content frame of music | |
CN115268828A (en) | Audio playing method, electronic equipment and readable storage medium | |
JP2022139888A (en) | Information processing equipment | |
JP5454530B2 (en) | Karaoke equipment | |
KR101562041B1 (en) | Method for Producing Media Content of Duet Mode, Media Content Producing Device Used Therein | |
KR100703923B1 (en) | Stereo sound optimization device and method for multimedia equipment | |
JP5440677B2 (en) | Music distribution system, music editing apparatus and program | |
JP6819236B2 (en) | Sound processing equipment, sound processing methods, and programs | |
JP6834398B2 (en) | Sound processing equipment, sound processing methods, and programs | |
CN113990355A (en) | Audio program metadata and generation method, electronic device and storage medium | |
JP2021069064A (en) | Voice edition output controller for generating special performance effect, voice edition output control method for generating special performance effect, and program | |
JP2004093975A (en) | Communication terminal and program | |
JP5510435B2 (en) | Karaoke device and program | |
WO2020208811A1 (en) | Reproduction control device, program, and reproduction control method | |
CN114121036A (en) | Audio track unique identification metadata and generation method, electronic device and storage medium |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20080421 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20110111 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20110118 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20110322 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20110411 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20110510 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20110628 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20110711 |
|
R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20140805 Year of fee payment: 3 |
|
LAPS | Cancellation because of no payment of annual fees |