JPH09107523A - Video storage/conversion method and device therefor - Google Patents

Video storage/conversion method and device therefor

Info

Publication number
JPH09107523A
JPH09107523A JP7261170A JP26117095A JPH09107523A JP H09107523 A JPH09107523 A JP H09107523A JP 7261170 A JP7261170 A JP 7261170A JP 26117095 A JP26117095 A JP 26117095A JP H09107523 A JPH09107523 A JP H09107523A
Authority
JP
Japan
Prior art keywords
data
transmission
media
video
communication
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP7261170A
Other languages
Japanese (ja)
Inventor
裕子 ▲高▼橋
Hiroko Takahashi
Masato Kawahara
正人 河原
Kenji Akiyama
健二 秋山
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nippon Telegraph and Telephone Corp
Original Assignee
Nippon Telegraph and Telephone Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nippon Telegraph and Telephone Corp filed Critical Nippon Telegraph and Telephone Corp
Priority to JP7261170A priority Critical patent/JPH09107523A/en
Publication of JPH09107523A publication Critical patent/JPH09107523A/en
Pending legal-status Critical Current

Links

Landscapes

  • Television Signal Processing For Recording (AREA)
  • Details Of Television Systems (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

PROBLEM TO BE SOLVED: To improve the operability at a receiver side by improving a length of image reproduction time due to disturbance of a video image at start of transmission or delay in synchronization establishment to realize pause or slow reproduction in the device receiving and storing communication data including a video image and sending the data again in response to a transmission request. SOLUTION: A medium conversion processing section 1-7 eliminates undesired data being start of stored data in a reception medium storage section 1-5 and adds data for synchronization locking before the stored data. The processing is conducted without using a hardware. Thus, quick re-locking of synchronization lost by data storage is attained by a receiver side. The transmission data generated in this way are stored in a transmission medium storage section 1-9. Pause or slow reproduction is obtained from the processing result of timing able to stop a video image and realized by inserting fill bits at transmission.

Description

【発明の詳細な説明】Detailed Description of the Invention

【0001】[0001]

【発明の属する技術分野】本発明は、画像通信におい
て、通信用プロトコルで圧縮符号化して送信された映像
や音声などのデータを蓄積し、それを必要に応じて再送
信する場合に、再送信されたデータのうち特に映像の再
生開始時や蓄積データのつなぎ部分の映像の乱れを低減
し、また、一時停止などの映像操作を行うことができる
ように、映像再生を円滑に、かつインタラクティブに行
えるようにする映像蓄積変換方法とその装置に関するも
のである。
BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to re-transmission in the case of storing data such as video and audio compressed and encoded by a communication protocol and transmitted in image communication, and re-transmitting the data when necessary. Smoothly and interactively play back the recorded data, especially when starting playback of the video or reducing the distortion of the video at the connection part of the accumulated data and performing video operations such as pause. The present invention relates to a video storage conversion method and an apparatus for the same.

【0002】[0002]

【従来の技術】従来より、マルチメディアにおける画像
通信等では、リアルタイム通信用に圧縮符号化、および
多重化して送信された通信用データを受信して蓄積し、
これを再び送信する場合が想定されている。ところで、
リアルタイム通信用に加工されたデータは蓄積/再生用
でないため、受信データを受信結果のまま蓄積して新た
に送信する場合、データ量が多い映像データでは蓄積単
位のつなぎ部分でのデータエラーに起因した映像の乱れ
が生じたり、同期確立までに時間がかかったりしてい
た。これをなくすためには、予めデータの符号化の区切
りまで解析できるハードウェアまでを用意した上で蓄積
を行う方法がある。
2. Description of the Related Art Conventionally, in image communication and the like in multimedia, communication data transmitted by compression encoding and multiplexing for real time communication is received and accumulated,
It is envisaged that this will be sent again. by the way,
The data processed for real-time communication is not for storage / playback, so if the received data is stored as it is and the data is newly transmitted, the video data with a large amount of data will result in a data error in the connection part of the storage unit. Distortion of the image was generated, and it took time to establish synchronization. In order to eliminate this, there is a method in which even hardware capable of analyzing even data delimiters is prepared in advance and then stored.

【0003】[0003]

【発明が解決しようとする課題】しかしながら、リアル
タイム通信用データを受信して蓄積し、これを再び送信
する場合に、映像の乱れが生じたり、同期確立までに時
間がかかったりする問題を解決するために、予めデータ
の符号化の区切りまで解析できるハードウェアまでを用
意した上で蓄積を行う上記従来の方法では、ハードウェ
アの規模が大きくなってしまうといった問題があった。
However, when the data for real-time communication is received, accumulated, and retransmitted, the problem that the image is disturbed and it takes time to establish the synchronization is solved. Therefore, in the above-described conventional method in which the hardware capable of analyzing even the division of data encoding is prepared in advance and the data is accumulated, there is a problem that the scale of the hardware becomes large.

【0004】本発明は、上記の問題を解決するためにな
されたものであり、通信用時系列変換された映像データ
を含む音声、映像等のデータを蓄積し再び送信する場合
において、映像データを再生するために送信する時の始
めに発生する映像の乱れや同期確立の遅れによる画面再
生時間の長さを改善して、受信側が送信要求してから要
求達成までの時間を短縮し、操作性を向上させることを
目的とする。また、本発明のもう1つの目的は、一時停
止やスロー再生を実現することにより操作のインタラク
ティブ性をもたせて、操作性を向上させることにある。
The present invention has been made to solve the above-mentioned problems, and when data such as voice and video including time-series converted video data for communication is stored and transmitted again, the video data is The length of the screen playback time due to the disturbance of the video that occurs at the beginning of transmission for playback and the delay in synchronization establishment is improved, and the time from the request to the transmission on the receiving side until the request is achieved is shortened. The purpose is to improve. Another object of the present invention is to improve the operability by providing the interactivity of the operation by realizing the pause and the slow reproduction.

【0005】[0005]

【課題を解決するための手段】上記映像の乱れを改善す
るという目的を達成するため本発明の方法では、リアル
タイム通信用に圧縮符号化、および多重化して送信され
た通信データを受信して蓄積し、これを送信データとし
て再び送信する場合において、受信した通信データをメ
ディア別に分離する段階と、前記分離された各メディア
データを蓄積する段階と、前記蓄積された各メディアデ
ータを読み出して当該通信の符号化方式に特有なデータ
の区切りを解析する段階と、前記解析されたデータの区
切りの中から各メディアデータの先頭部分の除去すべき
不要なデータ範囲を最適に判断する段階と、前記最適に
判断された不要なデータ範囲のデータを除去する段階
と、前記不要なデータ範囲のデータを除去された各メデ
ィアデータを送信データに変換して蓄積する段階と、を
有することを特徴とする映像蓄積変換方法を手段とす
る。
SUMMARY OF THE INVENTION In order to achieve the above object of improving image distortion, the method of the present invention receives and stores communication data which is compression-encoded and multiplexed for real-time communication. Then, in the case of retransmitting this as transmission data, the step of separating the received communication data by media, the step of accumulating each of the separated media data, and the reading of the accumulated media data and the communication Analyzing the data delimiters peculiar to the encoding method, optimally determining an unnecessary data range to be removed from the head part of each media data from the analyzed data delimiters, and The step of removing the data of the unnecessary data range determined by the above, and the transmission data of each media data from which the data of the unnecessary data range is removed. And means for picture recording conversion method characterized by comprising the steps of: storing converted to data, the.

【0006】また、上記画面再生時間の長さを改善する
という目的を達成するため本発明の方法では、上述の送
信データに変換して蓄積する段階において、該送信デー
タの前に同期引き込み用データを追加して蓄積すること
を特徴とする映像蓄積変換方法を手段とする。
Further, in order to achieve the object of improving the length of the screen reproduction time, in the method of the present invention, in the step of converting and storing the transmission data, the synchronization pull-in data is added before the transmission data. Is added and accumulated as a means.

【0007】あるいは、上述の送信データに変換して蓄
積する段階において、同期引き込みが終了し、ピクチャ
引き込み終了後の送信データとして、映像のつなぎに相
当するデフォルトの映像を予め定めておき、送信データ
を前記デフォルトの映像との差として変換し蓄積するこ
とを特徴とする映像蓄積変換方法を手段とする。
Alternatively, in the stage of converting and accumulating the transmission data as described above, a default video corresponding to the connection of the video is determined in advance as the transmission data after the synchronization pull-in ends and the picture pull-in ends. Is converted and stored as a difference from the default image and stored.

【0008】上記映像の乱れを改善するという目的を達
成するため本発明の装置では、リアルタイム通信用に圧
縮符号化、および多重化して送信された通信データを受
信して蓄積し、これを送信データとして再び送信する装
置において、通信データを受信する手段と、前記受信し
た通信データをメディア別に分離する手段と、前記分離
された各メディアデータに対して当該通信の符号化方式
に特有なデータの区切りを解析し、前記解析されたデー
タの区切りの中から各メディアデータの先頭部分の除去
すべき不要なデータ範囲を最適に判断し、前記最適に判
断された不要なデータ範囲のデータを除去し送信データ
に変換して蓄積する手段と、前記送信データに変換され
て蓄積された各メディアデータを多重化する手段と、前
記多重化された送信データを送信する手段と、を有する
ことを特徴とする映像蓄積変換装置を手段とする。
In order to achieve the above object of improving the image distortion, the apparatus of the present invention receives and accumulates communication data which is compression-encoded and multiplexed for real-time communication, and stores the received communication data. In the device for transmitting again as a means, means for receiving communication data, means for separating the received communication data by media, and data delimiter specific to the communication encoding method for each of the separated media data. The optimum data of the unnecessary data range to be removed at the beginning of each media data from the analyzed data divisions, and the data of the optimum data of the unnecessary data range is removed and transmitted. Means for converting the data into data and storing the data; means for multiplexing the media data converted into the transmission data and stored; Means for transmitting data, and means for video storage conversion device characterized by having a.

【0009】また、上記画面再生時間の長さを改善する
という目的を達成するため本発明の装置では、上述のデ
ータ変換処理部が、不要なデータ範囲のデータを除去し
送信データに変換する際に、映像のメディアデータの前
に同期引き込み用データとして、フィルビットデータま
たは差分ゼロ情報または一様な画面情報を追加する処理
を行うことを特徴とする映像蓄積変換装置を手段とす
る。
Further, in order to achieve the object of improving the length of the screen reproduction time, in the device of the present invention, when the above-mentioned data conversion processing unit removes data in an unnecessary data range and converts it into transmission data. In addition, a means for adding and storing fill bit data, zero difference information, or uniform screen information as sync pull-in data before video media data is used as means.

【0010】あるいは、上述のデータ変換処理部が、送
信データに変換する処理を施す際に、受信データ中の誤
り訂正符号を用いて誤り訂正を行うことを特徴とする映
像蓄積変換装置を手段とする。
Alternatively, when the above-mentioned data conversion processing unit performs a process of converting to transmission data, error correction is performed using an error correction code in the reception data, and a video storage conversion device is provided as means. To do.

【0011】また、送信する映像の一時停止を実現して
操作性を向上させるという目的を達成するため本発明の
方法では、上述の映像蓄積変換装置において、送信デー
タを送信する際に、蓄積した送信データに置き換えてデ
ータの区切りの中の画像データ部分に任意の数のフィル
ビットデータを挿入することを特徴とする映像蓄積変換
方法を手段とする。
Further, in order to achieve the purpose of improving the operability by realizing the temporary stop of the video to be transmitted, in the method of the present invention, the above-mentioned video storage conversion device stores the transmission data when transmitting the transmission data. An image storage conversion method is characterized in that it replaces transmission data and inserts an arbitrary number of fill bit data in an image data portion in a data division.

【0012】さらに、送信する映像のスロー再生を実現
して操作性を向上させるという目的を達成するため本発
明の方法では、上述の映像蓄積変換装置において、送信
データを送信する際に、蓄積した送信データに置き換え
てデータの区切りの中の画像データ部分に比較的短い期
間だけフィルビットデータを挿入することを繰り返し行
うことを特徴とする映像蓄積変換方法を手段とする。
Further, in order to achieve the object of improving the operability by realizing slow reproduction of the image to be transmitted, in the method of the present invention, the above-mentioned image storage conversion device stores the transmission data when transmitting the transmission data. An image storage / conversion method is characterized in that replacement of transmission data and insertion of fill bit data in an image data portion in a data segment for a relatively short period are repeated.

【0013】ここで、本発明の原理を図6、図7に示
す。
The principle of the present invention is shown in FIGS. 6 and 7.

【0014】図6は、データ蓄積変換処理の原理を示す
フローである。
FIG. 6 is a flow showing the principle of data storage conversion processing.

【0015】まず、データ読み込み処理6−1では、受
信データをそのまま蓄積したデータ蓄積部の音声、映像
などの各メディアデータを読み込む。次に、データ解析
処理6−2では、各メディアに対し、各時系列データの
区切りを解析する。次に、最適除去判断処理6−3で
は、データ解析処理6−2の結果を受けた各時系列デー
タのデータの区切りの中から、除去する不要データの範
囲を最適に判断する。この場合、各メディアの必要条件
(例えば除去するデータ量を最低にする)を満たし、か
つ各メディアの同期を必要に応じてとることを判断の基
準とするのが好適である。次に、ノイズ除去処理6−4
では、最適除去判断処理6−3の結果を受け、各メディ
アのノイズ(不要データ)の除去を実行する。次に、デ
ータ蓄積処理6−5では、データ蓄積部へノイズ除去処
理6−4の結果を書き込み蓄積する。
First, in the data reading process 6-1, each media data such as audio and video in the data storage unit in which the received data is stored as it is is read. Next, in the data analysis process 6-2, the break of each time series data is analyzed for each medium. Next, in the optimum removal determination process 6-3, the range of unnecessary data to be removed is optimally determined from the data delimiters of each time series data that has received the result of the data analysis process 6-2. In this case, it is preferable that the criterion for the determination is to meet the necessary conditions for each medium (for example, to minimize the amount of data to be removed) and to synchronize each medium as needed. Next, noise removal processing 6-4
Then, in response to the result of the optimum removal determination processing 6-3, noise (unnecessary data) of each medium is removed. Next, in the data storage processing 6-5, the result of the noise removal processing 6-4 is written and stored in the data storage unit.

【0016】図7は、図6のフローを実行する装置の概
略構成図である。
FIG. 7 is a schematic block diagram of an apparatus for executing the flow of FIG.

【0017】通信データ受信部7−1は、ネットワーク
からの通信データを受信する。受信データ分離部7−2
は多重化して送信された通信データの音声、映像、およ
びデータをそれぞれのメディア毎に分離する。データ蓄
積変換部7−3は、受信データ分離部7−2により分離
された音声、映像、データなどの各メディアを時系列デ
ータとしてそのまま、それぞれ蓄積し、その後、それら
を読み出してデータ解析処理、最適除去判断処理、およ
びノイズ除去処理を施し送信データに変換して蓄積す
る。送信データ多重部7−4は、データ蓄積変換部7−
3に蓄積されている映像、音声、データなどそれぞれの
メディアの送信データを要求に応じて送信するために多
重化する。通信データ送信部7−5は、送信データ多重
部7−4で多重化されたデータをネットワークへ送信す
る。
The communication data receiving section 7-1 receives communication data from the network. Received data separation unit 7-2
Separates the audio, video, and data of the multiplexed and transmitted communication data for each media. The data storage conversion unit 7-3 stores each medium such as voice, video, and data separated by the reception data separation unit 7-2 as time-series data as they are, and then reads them out to perform a data analysis process. Optimal removal determination processing and noise removal processing are performed and converted into transmission data and stored. The transmission data multiplexing unit 7-4 includes a data storage conversion unit 7-
The transmission data of the respective media such as video, audio, and data stored in 3 are multiplexed for transmission in response to a request. The communication data transmitter 7-5 transmits the data multiplexed by the transmission data multiplexer 7-4 to the network.

【0018】本発明による映像蓄積変換方法及びその装
置では、受信したままの蓄積データの始めの部分の不要
なデータを除去することにより、その映像データの再生
時に受信側で始めに発生する映像の乱れをなくす。ま
た、同期引き込み用のデータを蓄積データの前に追加す
る処理を、通信データの蓄積後にハードウェアを利用せ
ずに行うことにより、通信データの蓄積で失われた同期
の迅速な再引き込みを受信側で行うことができるように
して、同期確立の遅れ、および映像の生成に必要な時間
を短縮する。また、実際に送信したい蓄積データの開始
を予知できるようにダミーデータを追加することによ
り、受信側での操作性を向上させる。さらには、映像を
停止させることが可能なタイミングを、そのタイミング
が明確となった前記の加工結果から得て、データとして
無視されるフィルビットデータを挿入することにより、
一時停止やスロー再生を実現する。以上により、蓄積さ
れた映像を必要に応じて呼び出す装置において、反応速
度を早めること、一時停止などのインタラクティブ性を
持たせることにより、結果的に操作性を向上させる。
In the video storage conversion method and apparatus according to the present invention, unnecessary data at the beginning of the stored data that has been received is removed, so that the video generated first on the receiving side when the video data is reproduced. Eliminate the disorder. In addition, by performing the process of adding the data for synchronization pull-in before the accumulated data without using hardware after the accumulation of communication data, the quick re-pull-in of synchronization lost by the accumulation of communication data can be received. By doing so, the delay in synchronization establishment and the time required for video generation are reduced. In addition, the operability on the receiving side is improved by adding dummy data so that the start of the accumulated data to be actually transmitted can be predicted. Furthermore, the timing at which the image can be stopped is obtained from the above-described processing result in which the timing is clear, and by inserting fill bit data that is ignored as data,
Achieve pause and slow playback. As described above, the operability is improved as a result by increasing the reaction speed and providing interactivity such as temporary stop in the device that calls up the accumulated video as needed.

【0019】[0019]

【発明の実施の形態】以下、図面を用い、本発明の実施
の形態を詳しく説明する。
BEST MODE FOR CARRYING OUT THE INVENTION Embodiments of the present invention will be described in detail below with reference to the drawings.

【0020】《実施の形態例1》図1は、本発明の第1
の実施の形態例による映像蓄積変換装置を示す構成図で
ある。
<< Embodiment 1 >> FIG. 1 shows a first embodiment of the present invention.
2 is a configuration diagram showing a video storage conversion device according to the embodiment example of FIG.

【0021】通信データ送受信部1−1は、ネットワー
クからの通信データを受信、送信する。受信データ分離
部1−2は、同期をとるために多重化して送信された音
声、映像、およびデータなどの異なるメディアを分離す
る。
The communication data transmitting / receiving section 1-1 receives and transmits communication data from the network. The reception data separation unit 1-2 separates different media such as audio, video, and data that are multiplexed and transmitted for synchronization.

【0022】データ蓄積変換部1−3は、それぞれの分
離されたメディアについて蓄積を行い、必要に応じて変
換処理、およびメディアの同期を保つ処理を行う。この
データ蓄積変換部1−3の中で、受信メディア蓄積部1
−5は、通信データ送受信部1−1で受信され受信デー
タ分離部1−2により分離された音声、映像、データな
どを時系列データとしてそのまま蓄積する。受信データ
蓄積部(1〜n)1−6は、受信メディア蓄積部1−5
の中で映像、音声、データなどをそれぞれ蓄積する。メ
ディア変換処理部1−7は、時系列データがそのまま蓄
積された各受信データ蓄積部1−6内の映像、音声、デ
ータなどを変換して、送信用の蓄積データを作成する。
その変換の処理とは、図6で示した、データ解析処理6
−2、最適除去判断処理6−3、およびノイズ除去処理
6−4を施し送信データに変換する処理である。データ
変換処理部(1〜n)1−8は、メディア変換処理部1
−7の中で映像、音声、データなどそれぞれについてそ
の変換処理を行う。送信メディア蓄積部1−9は、各デ
ータ変換処理部1−8にて変換された映像、音声、デー
タなどを蓄積しておく。送信データ蓄積部(1〜n)1
−10は、その変換された映像、音声、データなどを送
信メディア蓄積部1−9内でそれぞれ蓄積する。変換制
御部1−11は、メディア変換処理部1−7による変換
処理により、受信メディア蓄積部1−5内のデータを送
信メディア蓄積部1−9へ変換後に移動させ、これら全
体の制御を行う。
The data storage / conversion unit 1-3 accumulates each separated medium, and performs conversion processing and processing for maintaining synchronization of the media as necessary. In the data storage conversion unit 1-3, the reception media storage unit 1
-5 stores the audio, video, data, etc. received by the communication data transmitting / receiving unit 1-1 and separated by the received data separating unit 1-2 as time-series data as they are. The reception data storage units (1 to n) 1-6 are reception media storage units 1-5.
Video, audio, data, etc. are stored in each. The media conversion processing unit 1-7 converts the video, audio, data, etc. in each reception data storage unit 1-6 in which the time-series data is stored as it is, and creates storage data for transmission.
The conversion process is the data analysis process 6 shown in FIG.
-2, optimal removal determination processing 6-3, and noise removal processing 6-4 are performed to convert into transmission data. The data conversion processing units (1 to n) 1-8 are the media conversion processing units 1
In -7, conversion processing is performed for each of video, audio, data, etc. The transmission media storage unit 1-9 stores the video, audio, data, etc. converted by each data conversion processing unit 1-8. Transmission data storage unit (1 to n) 1
-10 stores the converted video, audio, data, etc. in the transmission media storage unit 1-9. The conversion control unit 1-11 moves the data in the reception media storage unit 1-5 to the transmission media storage unit 1-9 after conversion by the conversion process by the media conversion processing unit 1-7, and performs overall control thereof. .

【0023】送信データ多重部1−4は、送信データ蓄
積部(1〜n)1−9に蓄積されている映像、音声、デ
ータなどのそれぞれのメディアを受信側の要求に応じて
通信データ送受信部1−1を介して送信するために多重
化する。
The transmission data multiplexing unit 1-4 transmits / receives communication data to / from each medium such as video, audio and data stored in the transmission data storage units (1 to n) 1-9 according to a request from the receiving side. Multiplexed for transmission via section 1-1.

【0024】本実施の形態例では、適用するネットワー
クとしてLAN、ISDNなどを想定している。
In this embodiment, a LAN, ISDN, etc. are assumed as the applicable network.

【0025】データ蓄積変換部1−3では、図6に示し
たデータ解析処理6−2、最適除去判断処理6−3、お
よびノイズ除去処理6−4を行うが、このうち映像の解
析と最適除去処理(ノイズ除去処理)の最適除去判断に
ついて詳しく説明する。説明には、ISDNのマルチメ
ディア通信の標準であるITU−T勧告準拠のH.32
0端末を例として用いる。H.320端末では、H.3
21マルチメディア多重分離後、映像はH.261形式
となるので、H.261を例にして蓄積データの変換処
理について説明する。
The data storage conversion unit 1-3 performs the data analysis process 6-2, the optimum removal determination process 6-3, and the noise removal process 6-4 shown in FIG. The optimum removal determination of the removal process (noise removal process) will be described in detail. In the explanation, H.264 based on the ITU-T recommendation, which is a standard for ISDN multimedia communication. 32
0 terminal is used as an example. H. In the H.320 terminal, H.320 is used. 3
21 After multimedia demultiplexing, the video is H.264. H.261 format, so that The conversion processing of the accumulated data will be described with reference to FIG.

【0026】H.320端末では通信の成立までに端末
能力交換と同期確立を行う必要があるため、実際の通信
パス確立には時間がかかる。その後、データは受信デー
タ分離部1−2で分離される。この中の映像データが
H.261形式であり、2種類の独立した単位で同期が
確立されている必要がある。その1つが、データ通信の
誤り訂正を目的にデータの内容とは独立に等間隔で挿入
されるマルチフレーム同期(以下、BCHマルチフレー
ム同期と記述)である。もう1つが、映像の単位となる
ピクチャ構造である。PSC(ピクチャ スタート コ
ード)で始まるこの単位は、可変長である。
H. Since 320 terminals need to exchange terminal capabilities and establish synchronization before communication is established, it takes time to establish an actual communication path. After that, the data is separated by the received data separating unit 1-2. The video data in this is H.264. 261 format, and synchronization must be established in two types of independent units. One of them is multi-frame synchronization (hereinafter referred to as BCH multi-frame synchronization) which is inserted at equal intervals independently of the content of data for the purpose of error correction of data communication. The other is a picture structure that is a unit of video. This unit starting with PSC (Picture Start Code) has a variable length.

【0027】受信したデータをそのまま蓄積してそれを
送信するデータ蓄積装置において、ある単位のデータの
再生を開始した時や終了する時、映像が乱れたり新しい
画面の生成が遅くなるのは、同期の確立が遅れるためで
ある。
In a data storage device that stores received data as it is and transmits it, when the reproduction of a certain unit of data is started or ended, the image is disturbed and the generation of a new screen is delayed because of the synchronization. This is because the establishment of

【0028】まず、BCHマルチフレーム同期が確立す
るには、一定の時間がかかり(勧告では、映像の通信レ
ートが46.4kbpsの時で0.75秒以内に同期の
再確立ができるように規定されている。)、BCHマル
チフレーム同期が確立した後で、PSCが見つからない
限りPSCの検出を行う必要がある。さらに映像データ
再生開始時には画像生成が遅れるが、この大きな原因
は、普通全面画イントラ構造のピクチャはデータ量が多
く、通信終了に時間がかかるためである。H.261形
式の映像では、そのピクチャ構造単独で1映像が再生で
きる全画面イントラ構造と、単独では映像を再生できな
いが差分から映像を再現するインター構造がある。
First, it takes a certain amount of time for BCH multi-frame synchronization to be established (the recommendation stipulates that synchronization can be reestablished within 0.75 seconds when the video communication rate is 46.4 kbps). However, after the BCH multiframe synchronization is established, it is necessary to detect the PSC unless the PSC is found. Further, the image generation is delayed at the time of starting the reproduction of the video data, and the main reason for this is that a picture having a full-screen intra structure usually has a large amount of data and it takes a long time to complete the communication. H. In the H.261 format video, there are a full-screen intra structure in which one picture can be played back by its picture structure alone, and an inter structure in which the video cannot be played alone but the video is reproduced from the difference.

【0029】受信側で送信された映像データの再生を行
わせるためには、全画面イントラ構造のピクチャを始め
に送る必要がある。逆にPSCを検出するためには、頻
繁にPSCが検出されること、すなわちデータ量が少な
いピクチャ構造のデータを送信することが望ましい。実
際、イントラ構造のピクチャを送信するには、映像の通
信レートが68.6kbpsの場合、論理的な最低で約
0.3秒、平均1秒程度かかる。
In order to reproduce the video data transmitted on the receiving side, it is necessary to send the picture of the full screen intra structure first. On the contrary, in order to detect the PSC, it is desirable that the PSC is detected frequently, that is, it is desirable to transmit data having a picture structure with a small amount of data. In fact, transmitting an intra-structure picture takes a logical minimum of about 0.3 seconds and an average of about 1 second when the video communication rate is 68.6 kbps.

【0030】受信側では、H.261のフレーム同期の
確立後にピクチャ構造のスタートを認識するので、完全
な同期の確立までには、BCHマルチフレーム同期の確
立時間とイントラ構造の送信時間以上の時間が必要とな
ってしまうことになる。逆に言えば、蓄積されたデータ
を、再生後の同期確立手順と画面再生手順に従って予め
変換しておけば、映像の再生時に受信側では画面の生成
時間を短縮できることになる。
On the receiving side, H.264 Since the start of the picture structure is recognized after the establishment of the frame synchronization of H.261, it takes more time than the establishment time of the BCH multi-frame synchronization and the transmission time of the intra structure to establish the complete synchronization. . Conversely, if the stored data is converted in advance in accordance with the synchronization establishment procedure after the reproduction and the screen reproduction procedure, the generation time of the screen can be shortened on the receiving side when the video is reproduced.

【0031】なお、BCHマルチフレーム同期をはずさ
ずに蓄積送信する(送信時にBCHマルチフレームをリ
アルタイムに生成する)方法も考えられるが、この場合
BCHマルチフレーム部分を処理するハードウェアが必
要となる。この場合でも、PSCの整合性がとれない場
合はPSC検出を行うので、一定の時間を要することに
なる。さらに、PSC検出までハードウェア的に行う方
法も考えられるが、この場合、ハードウェアの規模はさ
らに大きくなる。
A method of storing and transmitting without losing BCH multi-frame synchronization (generating a BCH multi-frame in real time at the time of transmission) can be considered, but in this case, hardware for processing the BCH multi-frame portion is required. Even in this case, since PSC detection is performed when PSC consistency cannot be obtained, a certain amount of time is required. Further, a method of performing PSC detection by hardware is also conceivable, but in this case, the scale of hardware is further increased.

【0032】画面の生成時間短縮方法を、H.261を
例に図2を用いて説明する。目的は、受信端末にいかに
早くイントラ構造のPSCの同期を確立させた状態で受
信させるかということである。本方法は3つの手法の組
み合わせから成る。1つ目はBCHマルチフレーム同期
をできるだけ早く回復させること、2つ目はできるだけ
早くPSCの引き込みを行わせること、そして3つ目は
実際に送信するデータを解析して、受信端末が目的の映
像から優先的に受信するような調整をすることである。
A method for reducing the screen generation time is described in H.264. 261 will be described as an example with reference to FIG. The purpose is to make the receiving terminal receive the PSC with the intra structure in a state where the synchronization is established. The method consists of a combination of three approaches. The first is to recover the BCH multi-frame synchronization as soon as possible, the second is to cause the PSC to be pulled in as soon as possible, and the third is to analyze the data that is actually transmitted, so that the receiving terminal can obtain the target image. It is necessary to make adjustments so that signals are received preferentially from.

【0033】まず、BCHマルチフレーム同期ビットの
確立を図るため、標準で定められた同期の再引き込みに
必要な分のダミーデータを用意する。例えば、フレーム
同期ビット2−2(1ビット)、ファイル識別子2−3
(1ビット)、画像データまたはフィルビット2−4
(492ビット)、誤り訂正符号2−5(18ビット)
から構成される512ビットのフレームパターンの単位
2−1およびこれが8個連続したマルチフレーム構造2
−6で、フレーム同期パターン2−7を512ビットご
とに含むデータを3回転繰り返したものをダミーデータ
とする。
First, in order to establish the BCH multi-frame synchronization bit, dummy data necessary for re-pulling in synchronization defined by the standard is prepared. For example, frame synchronization bit 2-2 (1 bit), file identifier 2-3
(1 bit), image data or fill bit 2-4
(492 bits), error correction code 2-5 (18 bits)
A 512-bit frame pattern unit 2-1 composed of
At -6, the data including the frame synchronization pattern 2-7 every 512 bits is repeated three times to be dummy data.

【0034】この場合、ダミーデータは、512(デー
タ長)*8(マルチフレームの構成単位)*3(フレー
ム同期再生確立条件)の長さを持つ。ダミーとして挿入
するデータは、すべてフィルビットからなるフィルビッ
トデータ、インター構造である差分ゼロ情報、データ量
が少ないイントラ構造画面(ブルーバックなど)などが
考えられる。これをはじめに送信すれば、BCHマルチ
フレーム同期が迅速に確立される。
In this case, the dummy data has a length of 512 (data length) * 8 (structural unit of multiframe) * 3 (frame synchronization reproduction establishment condition). The data to be inserted as a dummy may be fill bit data consisting of all fill bits, zero difference information having an inter structure, an intra structure screen (blue back, etc.) having a small amount of data, and the like. If this is transmitted first, BCH multiframe synchronization is quickly established.

【0035】BCHマルチフレーム同期確立後のデータ
内容を図3、4を用いて説明する。上記BCHマルチフ
レーム同期確立後は、ピクチャ構造を送信することにな
る。ピクチャ構造3−1は、ピクチャスタートコード
(PSC)3−2で始まり、可変長の映像データ3−3
と併せて映像の単位構造となる。ピクチャ構造のPSC
引き込みをできるだけ短時間で終了させるため、始めは
短い映像データからなるデータを用いる。例えば、イン
トラ構造でありながらデータ量が少ないブルーバックの
ような単一色画面や、インター構造でよい場合は差分ゼ
ロのデータを送信することにすればよい。これはPSC
引き込みの手順によってどの方法が最適かを選ぶことに
なる。これを、受信側で映像の生成準備が完了する回数
分、例えば2回繰り返す。
The data contents after the establishment of BCH multi-frame synchronization will be described with reference to FIGS. After the BCH multi-frame synchronization is established, the picture structure will be transmitted. The picture structure 3-1 starts with a picture start code (PSC) 3-2 and has variable length video data 3-3.
Together with this, it becomes the unit structure of the image. Picture structure PSC
In order to finish the pull-in in the shortest possible time, data consisting of short video data is used at the beginning. For example, a single color screen such as a blue background having an intra structure and a small amount of data may be transmitted, or data having a difference of zero may be transmitted when an inter structure is sufficient. This is PSC
Depending on the pull-in procedure, you will choose which method is best. This is repeated as many times as the number of times the preparation for image generation is completed on the receiving side, for example, twice.

【0036】以上の準備終了後、全画面イントラ構造の
所望の映像ピクチャを送信するため、不要なデータの除
去を行う。この場合、蓄積されているデータのうち、イ
ントラ構造のピクチャ構造データ以前の部分は破棄す
る。このように実際のデータ前にダミーデータを挿入し
たデータを蓄積し不要データを除去しておくことで、蓄
積映像の受信時の画面生成を高速化することができる。
After the above preparation is completed, unnecessary data is removed in order to transmit a desired video picture having the full-screen intra structure. In this case, of the accumulated data, the part before the picture structure data of the intra structure is discarded. As described above, by accumulating the data in which the dummy data is inserted before the actual data and removing the unnecessary data, it is possible to speed up the screen generation at the time of receiving the accumulated video.

【0037】なお、音声については映像と同期をとる必
要から、映像にダミーを挿入した分に相当して音声を遅
らせる処理を行うこととする。
Since it is necessary to synchronize the audio with the video, a process for delaying the audio is performed corresponding to the amount of dummy inserted in the video.

【0038】音声データも蓄積単位はあるが、その単位
は映像のピクチャ単位に比べて小さく、また、機械的に
決定できる。映像とのずれがないように合わせられなく
ても、ずれが最少となる位置から音声データをスタート
させることは可能である。このように、各メディア間の
同期も最大限確保する。
The audio data also has a storage unit, but the unit is smaller than the picture unit of video and can be determined mechanically. It is possible to start the audio data from the position where the deviation is minimized, even if they are not adjusted so that there is no deviation from the video. In this way, the synchronization between the media is also secured to the maximum.

【0039】図4は、メディア変換処理部1−7で行わ
れる変換処理6−2〜6−4の処理のうち映像の加工結
果を時系列(または蓄積順)に示した図である。蓄積映
像データ4−15は、変換処理前の時系列順に蓄積され
た映像データのうち、フレーム同期部分を取り去ったも
ので、PSCを含むピクチャ構造になっているとする。
これを変換したものが、送信用データ4−1である。図
に示すように送信データの順序4−2は、左から右、上
から下方向に時系列(または蓄積順)で示してある。送
信データ開始位置4−5は、データの送信を始める場合
の先頭である。フレーム構造4−3、およびフレーム構
造が8単位集まったマルチフレーム構造4−4は、図2
で示したとおり、H.261フレーム構造で規定されて
いる形式である。もし同期がはずれているなら、フレー
ム同期確立4−7には3回のマルチフレーム構造の繰り
返しを行う。フレーム同期確立用データ4−6は、3回
のマルチフレーム構造終了まで続く。フレーム同期確立
用データは、フィルビット、差分ゼロ情報(インター構
造)、またはブルーバックのような一様な画面(イント
ラ構造)などが考えられる。なお、同期はずれがない場
合には、これまでの処理は不要となる。
FIG. 4 is a diagram showing, in time series (or storage order), the image processing results of the conversion processes 6-2 to 6-4 performed by the media conversion processing unit 1-7. The accumulated video data 4-15 is obtained by removing the frame synchronization part from the video data accumulated in chronological order before conversion processing, and has a picture structure including PSC.
The converted data is the transmission data 4-1. As shown in the figure, the order 4-2 of transmission data is shown in time series (or accumulation order) from left to right and from top to bottom. The transmission data start position 4-5 is the head when data transmission is started. The frame structure 4-3 and the multi-frame structure 4-4 in which eight frame structures are collected are shown in FIG.
As shown in FIG. This is the format specified by the H.261 frame structure. If the synchronization is lost, the multi-frame structure is repeated three times for the frame synchronization establishment 4-7. The data 4-6 for establishing frame synchronization continues until the end of the multi-frame structure three times. The frame synchronization establishment data may be a fill bit, zero difference information (inter structure), or a uniform screen such as blue back (intra structure). If there is no loss of synchronism, the processing up to this point is unnecessary.

【0040】その後はピクチャ引き込み用データ4−8
をピクチャ引き込み完了4−9まで続ける。データ内容
は、できるだけ短いがPSCを含むイントラ画面が望ま
しい。その後、蓄積データ開始4−10より、蓄積映像
データ4−15を続ける。
After that, the picture pull-in data 4-8
Is continued until the picture pull-in completion 4-9. Although the data content is as short as possible, an intra screen including PSC is desirable. Thereafter, the accumulated video data 4-15 is continued from the accumulated data start 4-10.

【0041】詳細図4−11は、フレーム構造の中のデ
ータがPSC4−12をはさんだ構造を示すものであ
る。ダミーデータ4−13は蓄積されていた映像データ
とは無関係な内容である。
Details FIG. 4-11 shows a structure in which the data in the frame structure sandwiches the PSC 4-12. The dummy data 4-13 has contents unrelated to the accumulated video data.

【0042】以上の例では、フィルビット(フレーム同
期確立まで)、差分ゼロ、ブルーバックのようなデータ
がそれにあたる。映像データ4−14には、もとのデー
タである蓄積映像データ4−15を挿入する。但し、ダ
ミーデータに続けるため、BCHマルチフレーム同期の
継続と、ピクチャ構造の区切りが整合性を保つように正
しく加工する。
In the above example, data such as fill bit (up to establishment of frame synchronization), difference zero, and blue back correspond to it. The accumulated video data 4-15, which is the original data, is inserted into the video data 4-14. However, since the dummy data is continued, the BCH multi-frame synchronization is properly processed so that the boundary of the picture structure is consistent.

【0043】《実施の形態例2》別の具体的な本発明の
第2の実施の形態例を説明する。
<< Second Embodiment >> Another specific second embodiment of the present invention will be described.

【0044】蓄積映像データを挿入するまでのフレーム
同期、およびPSC引き込みまでの準備は、上記方法と
同じとする。異なるのは、映像のつなぎに相当するデフ
ォルトの映像(ブルーバックのように全画面イントラ構
造であってもデータ量が少ないもの)を予め定めておく
ことである。PSC引き込み終了後のデータは、全画面
イントラのデフォルト画面を送信し、実際に送信したい
映像はその後、デフォルトとの差としてインター形式に
変換し、蓄積しておく。以上の変換を行った映像を蓄積
しておくと、始めはデフォルトの映像が再生されること
になるが、反応速度としては相当な高速化が期待でき
る。
The frame synchronization until the stored video data is inserted and the preparation until the PSC pull-in are the same as the above method. What is different is that a default image corresponding to the connection of images (a small amount of data even with a full-screen intra structure such as blue background) is set in advance. As for the data after the PSC pull-in is completed, the default screen of the full screen intra is transmitted, and the image to be actually transmitted is then converted into the inter format as a difference from the default and stored. If the video that has undergone the above conversion is stored, the default video will be played back at first, but a considerably high reaction speed can be expected.

【0045】さらに、フレーム同期単位で区分けされて
いる蓄積データについて、BCH誤り訂正符号を用いて
修正できるデータの誤りを予め修正して蓄積することに
より、同期確立を確実に実現できる。
Further, with respect to the accumulated data segmented by the frame synchronization unit, the error of the data which can be corrected by using the BCH error correction code is corrected in advance and accumulated, so that the synchronization can be surely realized.

【0046】《実施の形態例3》図5を用いて、本発明
の第3の実施の形態例として上記と同じ原理を利用し、
BCHマルチフレーム同期を含んだデータを蓄積した
H.261映像の一時停止、スロー再生および再スター
トの方法を説明する。
<< Embodiment 3 >> Using FIG. 5, the same principle as described above is used as a third embodiment of the present invention.
H.264 which has accumulated data including BCH multi-frame synchronization. A method of temporarily stopping, slow-playing, and restarting the H.261 image will be described.

【0047】蓄積データ自身にBCHフレームが含まれ
ない場合は、H.221フレーム生成時に任意の場所で
フィルビットを挿入させれば一時停止、および再スター
トが実現できる。しかし、映像データ内にBCHフレー
ムも一括して蓄積されている場合には、一時停止はBC
Hマルチフレーム同期を確立した状態のまま行わなけれ
ばならない。このためには、いったん蓄積した映像デー
タ内のBCHマルチフレーム同期の単位が何処かを計算
しておけば良い。実際には、実施の形態例2で示した方
法ではBCHマルチフレームがどこにあるかは単純な計
算から求めることができる。
If the accumulated data itself does not include a BCH frame, H.264 If a fill bit is inserted at an arbitrary position when the 221 frame is generated, the pause and the restart can be realized. However, if BCH frames are also collectively stored in the video data, the pause is BC
H multi-frame synchronization must be established. For this purpose, it suffices to calculate where the unit of BCH multi-frame synchronization in the once accumulated video data is. In practice, with the method shown in the second embodiment, where the BCH multiframe is can be obtained by simple calculation.

【0048】図5において、送信データの順序5−1
は、蓄積されたデータの送信順序を示す。図4の方法で
は、送信データ開始位置5−2から、512ビット単位
でフレーム構造5−3の単位が、また8×512=40
96ビット単位でマルチフレーム構造5−4の区切りが
現われる。従ってこの区切り部分に2−1のようなフレ
ームパターンの単位の中の画像データ2−4部分にフィ
ルビットを挿入したパターン8個からなるBCHマルチ
フレームのフィルビットデータをフィルビットデータ挿
入可能位置5−5に、任意の数挿入する。これにより、
BCHフレーム同期を確立したまま、フィルビットを挿
入でき、さらに再開時にフレームが乱れることがない。
受信側では、挿入されたフィルビットはデータとして無
視されるため、新たな画像が送信されるまで、前の画像
が保持されるため、一時停止あるいはスロー再生が実現
される。
In FIG. 5, the order of transmission data 5-1
Indicates the transmission order of the accumulated data. In the method of FIG. 4, the unit of the frame structure 5-3 is 512 bits, and the unit of the frame structure 5-3 is 8 × 512 = 40 from the transmission data start position 5-2.
The division of the multi-frame structure 5-4 appears in units of 96 bits. Therefore, the fill bit data of the BCH multi-frame consisting of 8 patterns in which fill bits are inserted in the image data 2-4 portion in the frame pattern unit such as 2-1 in this delimiter portion can be filled in the fill bit data position 5 Insert any number at -5. This allows
The fill bit can be inserted while the BCH frame synchronization is established, and the frame is not disturbed when restarting.
Since the inserted fill bit is ignored as data on the receiving side, the previous image is held until a new image is transmitted, so that pause or slow playback is realized.

【0049】この方法を装置で実現する場合、映像の送
信用バッファが4096ビットの倍数にすれば、送信用
バッファの一時的置き換えで一時停止および再開が、バ
ッファのサイズ単位に相当する時間で実現できる。バッ
ファサイズが十分小さければ、短時間の一時停止を繰り
返すことが可能であり、スロー再生も実行できる。バッ
ファサイズを4096ビットの倍数にできない場合は、
バッファサイズと4096との最小公倍数ができるだけ
小さくなるようにバッファサイズ設定する。一時停止の
位置は、バッファのBCHマルチフレーム単位の所と
し、残りの部分をフィルビットデータで置き換える。再
開は、上記最小公倍数の倍数回のバッファ送信のタイミ
ングにて可能である。スロー再生は、バッファ内のBC
Hマルチフレームの間にフィルビットデータを任意の比
率で挿入することにより実現できる。図1で説明する
と、このフィルビットデータの挿入はデータ蓄積変換部
1−3と送信データ多重部1−4間で、送信側あるいは
受信側からの送信要求に従い、図略の送受信制御手段か
らの指令によって行われる。
When this method is implemented by an apparatus, if the video transmission buffer is a multiple of 4096 bits, temporary suspension and resumption by temporary replacement of the transmission buffer can be realized in a time corresponding to a buffer size unit. it can. If the buffer size is sufficiently small, it is possible to repeat the pause for a short time and execute slow playback. If the buffer size cannot be a multiple of 4096 bits,
The buffer size is set so that the least common multiple of the buffer size and 4096 is as small as possible. The position of the temporary stop is set to the BCH multiframe unit of the buffer, and the remaining part is replaced with fill bit data. Resuming is possible at the timing of buffer transmission a multiple of the above least common multiple. Slow playback, BC in the buffer
This can be realized by inserting fill bit data between H multiframes at an arbitrary ratio. Explaining with reference to FIG. 1, the insertion of the fill bit data is performed by the transmission / reception control means (not shown) between the data storage conversion unit 1-3 and the transmission data multiplexing unit 1-4 according to a transmission request from the transmission side or the reception side. It is done by order.

【0050】なお、フィルビットの長さについての制限
は勧告に規定がないため、フィルビットを連続して受け
取ると、エラーと解釈してしまう端末もある。この場合
はBCHフレーム単位で非常に低速度なスロー再生を行
うことにより、ほぼ映像の停止が実現できる。または、
データ内容を差分ゼロのインター構造とフィルビットデ
ータに置き換える方法もある。但しこの場合、一時停止
の再開時に、インター構造データの送信中であれば一時
停止中止のタイミングが少し遅れるという操作性の低下
が起こる。
Since there is no stipulation in the recommendation regarding the limit of the length of the fill bit, some terminals may interpret it as an error if the fill bits are continuously received. In this case, the video can be almost stopped by performing slow playback at a very low speed in BCH frame units. Or
There is also a method of replacing the data content with an inter structure of zero difference and fill bit data. However, in this case, at the time of resuming the temporary stop, if the inter structure data is being transmitted, the timing of stopping the temporary stop is slightly delayed, which deteriorates the operability.

【0051】BCHマルチフレームのスタート単位が1
箇所特定できれば、その他のBCHマルチフレームのス
タート位置は4096ビット単位で出現する。従ってB
CHマルチフレームの特定は、ハードウェアにて行えな
い場合にも、ソフトウェアにて蓄積データを解析し、マ
ルチフレーム同期パターンを1箇所検出すればすべての
BCHマルチフレームのスタート位置が求められる。従
って本実施の形態例は、BCHマルチフレームの位置を
1箇所特定すれば同じ作用が得られる。
The start unit of BCH multiframe is 1
If the location can be identified, the start positions of other BCH multiframes appear in units of 4096 bits. Therefore B
Even if the CH multi-frame cannot be specified by hardware, the start position of all BCH multi-frames can be obtained by analyzing the accumulated data by software and detecting one multi-frame synchronization pattern. Therefore, in this embodiment, the same effect can be obtained by specifying one BCH multiframe position.

【0052】[0052]

【発明の効果】以上のように本発明は、通信データを蓄
積し、再送信を行う装置において、そのまま蓄積された
データのうち映像について再び送信する場合に適切な形
式の送信データに変換して蓄積する方法と、それを実現
する装置を提供することができ、受信側はその蓄積デー
タを受信する時に、映像の始めの映像の乱れを削減し、
反応速度を早める効果があり、受信側での操作性を向上
させることができる。
INDUSTRIAL APPLICABILITY As described above, according to the present invention, in a device that stores communication data and retransmits it, the data stored in the device is converted into a transmission data of an appropriate format when the image is retransmitted. It is possible to provide a method of storing and a device that realizes the method, and the receiving side reduces the distortion of the image at the beginning of the image when receiving the accumulated data,
This has the effect of accelerating the reaction speed, and can improve the operability on the receiving side.

【0053】また、一時停止が可能なタイミングを結果
として得ることができるため、蓄積映像の一時停止やス
ロー再生を実現することができ、受信側での操作性を向
上させることができる。
Further, since the timing at which the pause can be performed can be obtained as a result, the pause or slow reproduction of the stored video can be realized, and the operability on the receiving side can be improved.

【図面の簡単な説明】[Brief description of the drawings]

【図1】本発明の第1の実施の形態例を示す装置の構成
図である。
FIG. 1 is a configuration diagram of an apparatus showing a first embodiment of the present invention.

【図2】本発明を適用する例を示すため、H.261フ
レーム構造を説明する図である。
2 shows an example of applying the present invention to H.264. It is a figure explaining a 261 frame structure.

【図3】本発明を適用する例として、H.261フレー
ムの基礎となるピクチャ構造を説明する図である。
FIG. 3 illustrates an example of applying the present invention to H.264. It is a figure explaining the picture structure used as the basis of 261 frames.

【図4】上記第1の実施の形態例による映像変換方法の
具体的例を説明する図である。
FIG. 4 is a diagram illustrating a specific example of a video conversion method according to the first embodiment.

【図5】本発明の第3の実施の形態例による、一時停止
とスロー再生の原理を説明する図である。
FIG. 5 is a diagram illustrating a principle of pause and slow playback according to a third embodiment of the present invention.

【図6】本発明の原理を説明するデータ蓄積変換処理フ
ローである。
FIG. 6 is a data storage conversion processing flow for explaining the principle of the present invention.

【図7】本発明の原理を説明するデータ蓄積変換処理フ
ローを実行する装置例の概略構成図である。
FIG. 7 is a schematic configuration diagram of an example of a device that executes a data storage conversion processing flow for explaining the principle of the present invention.

【符号の説明】[Explanation of symbols]

1−1…通信データ送受信部 1−2…受信データ分離部 1−3…データ蓄積変換部 1−4…送信データ多重部 1−5…受信メディア蓄積部 1−6…受信データ蓄積部(1〜n) 1−7…メディア変換処理部 1−8…データ変換処理部(1〜n) 1−9…送信メディア蓄積部 1−10…送信データ蓄積部(1〜n) 1−11…変換制御部 2−1…フレームパターンの単位(512ビット) 2−2…フレーム同期ビット(1ビット) 2−3…ファイル識別子(1ビット) 2−4…画像データまたはフイルビット(492ビッ
ト) 2−5…誤り訂正符号(18ビット) 2−6…マルチフレーム構造(512×8ビット) 2−7…フレーム同期パターン 3−1…ピクチャ構造 3−2…PSC(ピクチャ スタート コード:20ビ
ット) 3−3…映像データ(データ長可変) 4−1…送信用データ 4−2…送信データの順序 4−3…フレーム構造 4−4…マルチフレーム構造 4−5…送信データ開始位置 4−6…フレーム同期確立用データ 4−7…フレーム同期確立 4−8…ピクチャ引き込み用データ 4−9…ピクチャ引き込み完了 4−10…蓄積データ開始 4−12…PSC 4−13…ダミー映像データ 4−14…映像データ 4−15…蓄積映像データ 5−1…送信データの順序 5−2…送信データ開始位置 5−3…フレーム構造 5−4…マルチフレーム構造 5−5…フィルビットデータ挿入可能位置
1-1 ... Communication data transmitting / receiving unit 1-2 ... Reception data separating unit 1-3 ... Data storage converting unit 1-4 ... Transmission data multiplexing unit 1-5 ... Reception media storage unit 1-6 ... Reception data storage unit (1 ~ N) 1-7 ... Media conversion processing unit 1-8 ... Data conversion processing unit (1 to n) 1-9 ... Transmission media storage unit 1-10 ... Transmission data storage unit (1 to n) 1-11 ... Conversion Control unit 2-1 ... Frame pattern unit (512 bits) 2-2 ... Frame synchronization bit (1 bit) 2-3 ... File identifier (1 bit) 2-4 ... Image data or fill bit (492 bits) 2-5 ... error correction code (18 bits) 2-6 ... multi-frame structure (512 x 8 bits) 2-7 ... frame synchronization pattern 3-1 ... picture structure 3-2 ... PSC (picture start code: 20 bits) 3 3 ... Video data (variable data length) 4-1 ... Transmission data 4-2 ... Order of transmission data 4-3 ... Frame structure 4-4 ... Multi-frame structure 4-5 ... Transmission data start position 4-6 ... Frame Data for establishing synchronization 4-7 ... Frame synchronization establishment 4-8 ... Data for picture pull-in 4-9 ... Completion of picture pull-in 4-10 ... Start of accumulated data 4-12 ... PSC 4-13 ... Dummy video data 4-14 ... Video Data 4-15 ... Stored video data 5-1 ... Order of transmission data 5-2 ... Transmission data start position 5-3 ... Frame structure 5-4 ... Multi-frame structure 5-5 ... Fill bit data insertable position

Claims (10)

【特許請求の範囲】[Claims] 【請求項1】 リアルタイム通信用に圧縮符号化、およ
び多重化して送信された通信データを受信して蓄積し、
これを送信データとして再び送信する場合において、 受信した通信データをメディア別に分離する段階と、 前記分離された各メディアデータを蓄積する段階と、 前記蓄積された各メディアデータを読み出して当該通信
の符号化方式に特有なデータの区切りを解析する段階
と、 前記解析されたデータの区切りの中から各メディアデー
タの先頭部分の除去すべき不要なデータ範囲を最適に判
断する段階と、 前記最適に判断された不要なデータ範囲のデータを除去
する段階と、 前記不要なデータ範囲のデータを除去された各メディア
データを送信データに変換して蓄積する段階と、 を有することを特徴とする映像蓄積変換方法。
1. Received and accumulated communication data that is compression-encoded and multiplexed for real-time communication and transmitted,
In the case of retransmitting this as transmission data, separating the received communication data by media, accumulating each of the separated media data, and reading each of the accumulated media data to code the communication. A step of analyzing a data delimiter peculiar to an encoding method; a step of optimally determining an unnecessary data range to be removed from the head part of each media data from the analyzed data demarcation; And a step of removing the unnecessary data in the unnecessary data range, and a step of converting each media data from which the unnecessary data range has been removed into transmission data and storing the transmission data. Method.
【請求項2】 各メディアデータの先頭部分の除去すべ
き不要なデータ範囲を最適に判断する段階では、 各メディアの必要条件を満たし、かつ各メディアの必要
に応じて同期をとることを前記判断の基準とすることを
特徴とする請求項1記載の映像蓄積変換方法。
2. In the step of optimally determining an unnecessary data range to be removed from the head portion of each media data, it is determined that the requirements of each media are satisfied and that synchronization is established according to the needs of each media. The image storage conversion method according to claim 1, wherein
【請求項3】 送信データに変換して蓄積する段階で
は、該送信データの前に同期引き込み用データを追加し
て蓄積することを特徴とする請求項1または請求項2記
載の映像蓄積変換方法。
3. The video storage conversion method according to claim 1, wherein in the step of converting and storing the transmission data, the synchronization pull-in data is added and stored before the transmission data. .
【請求項4】 送信データに変換して蓄積する段階で
は、 同期引き込みが終了し、ピクチャ引き込み終了後の送信
データとして、映像のつなぎに相当するデフォルトの映
像を予め定めておき、送信データを前記デフォルトの映
像との差として変換し蓄積することを特徴とする請求項
1記載の映像蓄積変換方法。
4. In the step of converting and storing the transmission data, the synchronization pull-in is completed, and a default video corresponding to the connection of the video is previously defined as the transmission data after the picture pull-in is finished, 2. The video storage conversion method according to claim 1, wherein the video is converted and stored as a difference from a default video.
【請求項5】 リアルタイム通信用に圧縮符号化、およ
び多重化して送信された通信データを受信して蓄積し、
これを送信データとして再び送信する装置において、 通信データを受信する手段と、 前記受信した通信データをメディア別に分離する手段
と、 前記分離された各メディアデータに対して当該通信の符
号化方式に特有なデータの区切りを解析し、前記解析さ
れたデータの区切りの中から各メディアデータの先頭部
分の除去すべき不要なデータ範囲を最適に判断し、前記
最適に判断された不要なデータ範囲のデータを除去し送
信データに変換して蓄積する手段と、 前記送信データに変換されて蓄積された各メディアデー
タを多重化する手段と、 前記多重化された送信データを送信する手段と、 を有することを特徴とする映像蓄積変換装置。
5. Received and stored communication data which is compression-encoded and multiplexed for real-time communication and transmitted,
In a device that retransmits this as transmission data, a unit that receives communication data, a unit that separates the received communication data by media, and a specific encoding method for the communication for each of the separated media data. The data of the unnecessary data range that has been optimally determined by analyzing the delimiter of various data, and optimally determining the unnecessary data range to be removed from the head portion of each media data from the analyzed data delimiters. And a unit for converting each of the media data converted into the transmission data and accumulated, and a unit for transmitting the multiplexed transmission data. Video storage and conversion device characterized by.
【請求項6】 送信データに変換して蓄積する手段は、 分離された各メディアデータを蓄積する受信データ蓄積
部と、 前記受信データ蓄積部に蓄積された各メディアデータを
読み出して当該通信の符号化方式に特有なデータの区切
りを解析する処理、前記解析されたデータの区切りの中
から各メディアデータの先頭部分の除去すべき不要なデ
ータ範囲を最適に判断する処理、前記最適に判断された
不要なデータ範囲のデータを除去し送信データに変換す
る処理、および各メディア間の同期を最大限確保する処
理を施すデータ変換処理部と、 前記データ変換処理部で処理の施された各メディアデー
タを蓄積する送信データ蓄積部と、 を有することを特徴とする請求項5記載の映像蓄積変換
装置。
6. The means for converting into transmission data and storing the received data, a receiving data storage unit for storing the separated media data, and a code for the communication by reading the media data stored in the reception data storage unit. Processing for analyzing data delimiters peculiar to the encoding method, processing for optimally determining an unnecessary data range to be removed from the head portion of each media data among the analyzed data demarcations, the optimal determination A data conversion processing unit that performs a process of removing data in an unnecessary data range and converting it to transmission data, and a process of ensuring maximum synchronization between media, and media data processed by the data conversion process unit The video storage conversion device according to claim 5, further comprising: a transmission data storage unit that stores the.
【請求項7】 データ変換処理部は、 不要なデータ範囲のデータを除去し送信データに変換す
る際に、映像のメディアデータの前に同期引き込み用デ
ータとして、フィルビットデータまたは差分ゼロ情報ま
たは一様な画面情報を追加する処理を行うことを特徴と
する請求項6記載の映像蓄積変換装置。
7. The data conversion processing unit, when removing data in an unnecessary data range and converting the data into transmission data, fill bit data, zero difference information, or a single piece of data as sync pull-in data before video media data. 7. The video storage conversion device according to claim 6, wherein processing for adding such screen information is performed.
【請求項8】 データ変換処理部は、 送信データに変換する処理を施す際に、受信データ中の
誤り訂正符号を用いて誤り訂正を行うことを特徴とする
請求項6記載の映像蓄積変換装置。
8. The video storage conversion device according to claim 6, wherein the data conversion processing unit performs error correction using an error correction code in the received data when performing the process of converting to the transmission data. .
【請求項9】 送信データを送信する際に、蓄積した送
信データに置き換えてデータの区切りの中の画像データ
部分に任意の数のフィルビットデータを挿入することを
特徴とする請求項1記載の映像蓄積変換方法。
9. The method according to claim 1, wherein when transmitting the transmission data, the transmission data is replaced with the accumulated transmission data, and an arbitrary number of fill bit data is inserted in an image data portion in a data delimiter. Video storage conversion method.
【請求項10】 送信データを送信する際に、蓄積した
送信データに置き換えてデータの区切りの中の画像デー
タ部分に比較的短い期間だけフィルビットデータを挿入
することを繰り返し行うことを特徴とする請求項1記載
の映像蓄積変換方法。
10. When transmitting transmission data, it is repeated to replace the accumulated transmission data and insert fill bit data into an image data portion in a data delimiter for a relatively short period of time. The image storage conversion method according to claim 1.
JP7261170A 1995-10-09 1995-10-09 Video storage/conversion method and device therefor Pending JPH09107523A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP7261170A JPH09107523A (en) 1995-10-09 1995-10-09 Video storage/conversion method and device therefor

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP7261170A JPH09107523A (en) 1995-10-09 1995-10-09 Video storage/conversion method and device therefor

Publications (1)

Publication Number Publication Date
JPH09107523A true JPH09107523A (en) 1997-04-22

Family

ID=17358103

Family Applications (1)

Application Number Title Priority Date Filing Date
JP7261170A Pending JPH09107523A (en) 1995-10-09 1995-10-09 Video storage/conversion method and device therefor

Country Status (1)

Country Link
JP (1) JPH09107523A (en)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6147694A (en) * 1997-06-25 2000-11-14 Nec Corporation Slow motion replay system having simple structure
JP2010268293A (en) * 2009-05-15 2010-11-25 Hitachi Ltd Communications apparatus and communication processing method
JP2014045394A (en) * 2012-08-28 2014-03-13 Onkyo Corp Data transmission apparatus and data transmission program

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6147694A (en) * 1997-06-25 2000-11-14 Nec Corporation Slow motion replay system having simple structure
JP2010268293A (en) * 2009-05-15 2010-11-25 Hitachi Ltd Communications apparatus and communication processing method
JP2014045394A (en) * 2012-08-28 2014-03-13 Onkyo Corp Data transmission apparatus and data transmission program

Similar Documents

Publication Publication Date Title
EP1024664B1 (en) Image-information storage regenerating device
US7130618B2 (en) Method, apparatus, and system for transmitting moving image data
US7321585B2 (en) Data communication apparatus and data communication method
JP3468115B2 (en) Data switching device
US6195393B1 (en) HDTV video frame synchronizer that provides clean digital video without variable delay
US20060161676A1 (en) Apparatus for IP streaming capable of smoothing multimedia stream
JP2008061010A (en) Video and audio transmitter
JPH09107523A (en) Video storage/conversion method and device therefor
JP4192766B2 (en) Receiving apparatus and method, recording medium, and program
JPH1141193A (en) Data packet re-multiplexing method and re-multiplexer
JPH1093841A (en) Video synchronizing signal correction device
JP3944845B2 (en) Information processing apparatus and method, recording medium, and program
JP2001211078A (en) Method and device for data transmission
JP3169767B2 (en) Stored image data reproduction control method and multimedia information storage and exchange system using the same
JPH0514763A (en) Picture packet communication system
JP3860674B2 (en) Multiplex communication device, multiple communication method, and medium on which multiple communication program is recorded
JPH099215A (en) Data multiplex method, data transmission method, multiplex data decoding method and multiplex data decoder
JPH08140054A (en) Audio signal and video signal synchronous reproduction method
JP4306096B2 (en) Data transmission method, data transmission device, data reception method, and data reception device
JPH09214909A (en) Digital transmitter and digital camera system
JP3671969B2 (en) Data multiplexing method and multiple data decoding method
JPH11346348A (en) Video/audio synchronization method and video/audio multiplexer
JP2001197130A (en) Method and device for transmitting data
JP2001054073A (en) Video signal receiver
JP2605435B2 (en) PCM transmission device, PCM reception device, digital audio interface format data transmission device, and digital audio interface format data reception device