JP2016146571A - Error correction function verification device - Google Patents

Error correction function verification device Download PDF

Info

Publication number
JP2016146571A
JP2016146571A JP2015023056A JP2015023056A JP2016146571A JP 2016146571 A JP2016146571 A JP 2016146571A JP 2015023056 A JP2015023056 A JP 2015023056A JP 2015023056 A JP2015023056 A JP 2015023056A JP 2016146571 A JP2016146571 A JP 2016146571A
Authority
JP
Japan
Prior art keywords
video
error correction
decoded video
frame
error
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2015023056A
Other languages
Japanese (ja)
Inventor
知伸 吉野
Tomonobu Yoshino
知伸 吉野
佳隆 木谷
Yoshitaka Kitani
佳隆 木谷
勝 本庄
Masaru Honjo
勝 本庄
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
KDDI Corp
Original Assignee
KDDI Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by KDDI Corp filed Critical KDDI Corp
Priority to JP2015023056A priority Critical patent/JP2016146571A/en
Publication of JP2016146571A publication Critical patent/JP2016146571A/en
Pending legal-status Critical Current

Links

Images

Abstract

PROBLEM TO BE SOLVED: To appropriately verify the error correction function of a video receiver, while achieving a suppressed processing load and a reduced verification cost.SOLUTION: An error correction function verification device 1 includes a packet loss detection unit 20, a decoded video error detection unit 40 and an FEC performance determination unit 50. The packet loss detection unit 20 detects whether or not a packet loss which occurred in a test stream can be restored by a video receiver 200. The decoded video error detection unit 40 detects a point in the test stream in which the packet loss which the video receiver 200 has failed to restore occurred. The FEC performance determination unit 50 determines whether or not the error correction function works as expected, on the basis of the detection result of the packet loss detection unit 20 and the decoded video error detection unit 40.SELECTED DRAWING: Figure 1

Description

本発明は、誤り訂正機能検証装置に関する。   The present invention relates to an error correction function verification device.

コンシューマ向け映像配信サービスでは、IP回線といった通信回線を経由した映像配信が行われる。一般に、公衆のIP回線では、完全な品質保証は困難であり、パケットロスが不可避である。このパケットロスに対応するために、映像受信装置に誤り訂正機能(例えば、非特許文献1参照)を設ける場合がある。この場合、ある程度のパケットロスに関しては、映像受信装置で訂正して、映像を復元することが可能である。このため、高品質な映像配信サービスを実現するためには、映像受信装置において誤り訂正機能を正しく実現することが重要である。   In the consumer video distribution service, video distribution via a communication line such as an IP line is performed. Generally, with a public IP line, complete quality assurance is difficult and packet loss is unavoidable. In order to cope with this packet loss, an error correction function (for example, see Non-Patent Document 1) may be provided in the video reception apparatus. In this case, a certain amount of packet loss can be corrected by the video receiving apparatus to restore the video. For this reason, in order to realize a high-quality video distribution service, it is important to correctly realize the error correction function in the video reception device.

映像受信装置の誤り訂正機能として、非特許文献1には、FEC(Forward Error Correction)が示されている。また、非特許文献2には、映像受信装置の開発工程において誤り訂正機能を検証する手法が示されている。非特許文献2に示されている手法では、ネットワークエミュレータといった構成を用いてパケットロスを適宜制御した映像ストリームを生成し、この映像ストリームを映像受信装置で復元できたか否かを判定して、映像受信装置の誤り訂正機能を検証する。   Non-Patent Document 1 discloses FEC (Forward Error Correction) as an error correction function of a video receiver. Non-Patent Document 2 discloses a method for verifying an error correction function in a video receiving device development process. In the technique disclosed in Non-Patent Document 2, a video stream in which packet loss is appropriately controlled using a configuration such as a network emulator is generated, and it is determined whether or not the video stream can be restored by the video receiving device. Verify the error correction function of the receiving device.

“Content Delivery Error Recovery for IPTV service,” ITU-T H.701“Content Delivery Error Recovery for IPTV service,” ITU-T H.701 “Conformance Testing Specification for H.701,” ITU-T HSTP.CONF-H701“Conformance Testing Specification for H.701,” ITU-T HSTP.CONF-H701

非特許文献2に示されている手法では、映像受信装置で復元できたか否かを示す情報を、履歴として残す必要がある。このため、開発過程における映像受信装置の動作確認を長時間に亘って行う場合には、長時間に亘る上述の情報を履歴として残す必要があり、履歴情報のデータ量が膨大になり、検証コストが増大してしまう。また、履歴を残す処理や、残した履歴を確認するための処理など、誤り訂正機能を検証するための機能を新たに映像受信装置に追加する必要があるため、検証コストがさらに増大してしまう。さらに、履歴を残す処理が、映像受信装置における処理負荷の増大に繋がり、映像受信装置で行われるデコード処理といった他のリアルタイム処理に悪影響を及ぼすおそれもある。   In the technique disclosed in Non-Patent Document 2, it is necessary to leave information indicating whether or not the video receiving apparatus has been restored as a history. For this reason, when the operation check of the video receiving apparatus in the development process is performed for a long time, it is necessary to leave the above-mentioned information for a long time as a history, and the data amount of the history information becomes enormous, and the verification cost Will increase. In addition, it is necessary to newly add a function for verifying the error correction function, such as a process for leaving a history or a process for confirming the remaining history, to further increase the verification cost. . Furthermore, the process of leaving a history leads to an increase in processing load on the video receiving apparatus, and there is a possibility that other real-time processing such as decoding processing performed on the video receiving apparatus may be adversely affected.

そこで、パケットロスを適宜制御した映像ストリームを映像受信装置に入力し、この映像受信装置から出力されたデコード映像をディスプレイに表示させて目視で確認して、映像受信装置の誤り訂正機能を検証する、という手法が考えられる。しかし、この手法では、開発過程における映像受信装置の動作確認を行う時間が長くなるに従って、検証コストが増大するとともに、目視で確認する検査者の集中力の低下に伴う検証ミスが発生してしまう可能性が高くなってしまう。   Therefore, a video stream in which packet loss is appropriately controlled is input to the video receiving device, and the decoded video output from the video receiving device is displayed on the display and visually confirmed to verify the error correction function of the video receiving device. The method of, can be considered. However, with this method, as the time for checking the operation of the image receiving device in the development process becomes longer, the verification cost increases and a verification error occurs due to a decrease in the concentration of the inspector who visually confirms. The possibility becomes high.

また、近年、映像の高解像度化や高フレームレート化が進んでいる。しかし、映像の解像度が高くなるに従って、ビットレートが高くなってパケット数が増加するので、上述の非特許文献2に示されている手法では、履歴情報のデータ量の増加による検証コストの増大の問題が、顕著になってしまう。また、映像の解像度やフレームレートが高くなるに従って、パケットロスによる品質低下の影響が映像全体に対して小さくなるので、上述の目視で確認する手法では、検証ミスが発生してしまう可能性がさらに高くなってしまう。   In recent years, higher resolution and higher frame rate of video have been promoted. However, as the video resolution increases, the bit rate increases and the number of packets increases. Therefore, in the method described in Non-Patent Document 2 described above, the verification cost increases due to an increase in the data amount of history information. The problem becomes noticeable. In addition, as the video resolution and frame rate increase, the effect of quality degradation due to packet loss becomes smaller on the entire video, so the above-mentioned visual confirmation method may further cause a verification error. It will be high.

そこで、本発明は、上述の課題に鑑みてなされたものであり、処理負荷の抑制と、検証コストの低減と、を実現しつつ、映像受信装置の誤り訂正機能を適切に検証することを目的とする。   Therefore, the present invention has been made in view of the above-described problems, and an object thereof is to appropriately verify the error correction function of a video reception device while realizing reduction in processing load and reduction in verification cost. And

本発明は、上記の課題を解決するために、以下の事項を提案している。
(1) 本発明は、映像受信装置(例えば、図1の映像受信装置200に相当)の誤り訂正機能を検証する誤り訂正機能検証装置(例えば、図1の誤り訂正機能検証装置1に相当)であって、前記映像受信装置に入力されるテストストリームをキャプチャして、当該テストストリームのカウンタ情報を取得するカウンタ計測手段(例えば、図1のカウンタ計測部10に相当)と、前記カウンタ計測手段により取得されたカウンタ情報に基づいて、前記映像受信装置に入力されるテストストリームにおけるパケットロスを検知し、検知したパケットロスの発生している箇所を前記映像受信装置が復元可能であるか否かを検出するパケットロス検出手段(例えば、図1のパケットロス検出部20に相当)と、前記映像受信装置が入力されたテストストリームをデコードして得られたデコード映像を、誤り訂正デコード映像として記憶する出力映像記憶手段(例えば、図1の出力映像メモリ30に相当)と、前記出力映像記憶手段に記憶されている誤り訂正デコード映像と、パケットロスの発生していない前記テストストリームをデコードして得られたロスレスデコード映像と、を比較して、前記映像受信装置に入力されたテストストリームのうち、パケットロスに対して当該映像受信装置では復元できなかった箇所を検出するデコード映像エラー検出手段(例えば、図1のデコード映像エラー検出部40に相当)と、前記パケットロス検出手段による検出結果と、前記デコード映像エラー検出手段による検出結果と、に基づいて、前記誤り訂正機能が期待通りに動作しているか否かを判定する誤り訂正性能判定手段(例えば、図1のFEC性能判定部50に相当)と、を備えることを特徴とする誤り訂正機能検証装置を提案している。
The present invention proposes the following matters in order to solve the above problems.
(1) The present invention is an error correction function verification device (for example, equivalent to the error correction function verification device 1 in FIG. 1) for verifying an error correction function of a video reception device (for example, the video reception device 200 in FIG. 1). A counter measurement unit (e.g., corresponding to the counter measurement unit 10 in FIG. 1) that captures a test stream input to the video reception device and obtains counter information of the test stream; and the counter measurement unit Whether or not the video reception device can restore the detected location of the packet loss detected in the test stream input to the video reception device based on the counter information acquired by the A packet loss detecting means (for example, corresponding to the packet loss detecting unit 20 in FIG. 1), and a test channel to which the video receiving apparatus is input. Output video storage means (for example, corresponding to the output video memory 30 in FIG. 1) for storing the decoded video obtained by decoding the stream as an error correction decoded video, and the error correction stored in the output video storage means The decoded video is compared with the lossless decoded video obtained by decoding the test stream in which no packet loss has occurred, and the test stream input to the video receiving device is subjected to packet loss. Decoded video error detection means (for example, corresponding to the decoded video error detection unit 40 in FIG. 1), a detection result by the packet loss detection means, and the decoded video error detection means for detecting a portion that could not be restored by the video reception device And whether the error correction function is operating as expected based on the detection result Error correction performance determining means (e.g., corresponding to FEC performance determination unit 50 of FIG. 1) that has proposed an error correction function verification device characterized by comprising a, a.

この発明によれば、カウンタ計測手段により、映像受信装置に入力されるテストストリームをキャプチャして、テストストリームのカウンタ情報を取得することとした。また、パケットロス検出手段により、カウンタ計測手段により取得されたカウンタ情報に基づいて、映像受信装置に入力されるテストストリームにおけるパケットロスを検知し、検知したパケットロスの発生している箇所を映像受信装置が復元可能であるか否かを検出することとした。このため、映像受信装置に入力されるテストストリームのうちパケットロスの発生している箇所について、期待通りに誤り訂正機能が動作していれば理論的には復元可能であるか否かが分かる。   According to the present invention, the counter measurement means captures the test stream input to the video receiving apparatus and acquires the counter information of the test stream. In addition, the packet loss detection unit detects packet loss in the test stream input to the video reception device based on the counter information acquired by the counter measurement unit, and receives the video where the detected packet loss has occurred. It was decided whether or not the device could be restored. For this reason, if the error correction function is operating as expected in the part where the packet loss has occurred in the test stream input to the video receiving device, it can be theoretically restored.

また、この発明によれば、出力映像記憶手段により、映像受信装置が入力されたテストストリームをデコードして得られたデコード映像を、誤り訂正デコード映像として記憶することとした。また、デコード映像エラー検出手段により、出力映像記憶手段に記憶されている誤り訂正デコード映像と、パケットロスの発生していないテストストリームをデコードして得られたロスレスデコード映像と、を比較して、映像受信装置に入力されたテストストリームのうち、パケットロスに対して映像受信装置では復元できなかった箇所を検出することとした。このため、映像受信装置に入力されたテストストリームにおいて、映像受信装置が実際には復元できなかったパケットロスの発生している箇所が分かる。   According to the invention, the output video storage means stores the decoded video obtained by decoding the test stream input by the video receiver as an error correction decoded video. Further, the decoded video error detection means compares the error correction decoded video stored in the output video storage means with the lossless decoded video obtained by decoding the test stream in which no packet loss occurs, In the test stream input to the video reception device, a portion that could not be restored by the video reception device due to packet loss was detected. For this reason, in the test stream input to the video reception device, it is possible to know the location where the packet loss that the video reception device could not actually restore has occurred.

さらに、この発明によれば、誤り訂正性能判定手段により、パケットロス検出手段による検出結果と、デコード映像エラー検出手段による検出結果と、に基づいて、誤り訂正機能が期待通りに動作しているか否かを判定することとした。このため、期待通りに誤り訂正機能が動作していれば理論的には復元可能なパケットロスの発生している箇所であるか否かと、映像受信装置が実際には復元できなかったパケットロスの発生している箇所と、を照らし合わせて、誤り訂正機能が期待通りに動作しているか否かを判定することができる。   Further, according to the present invention, whether or not the error correction function is operating as expected based on the detection result by the packet loss detection unit and the detection result by the decoded video error detection unit by the error correction performance determination unit. It was decided to judge. For this reason, if the error correction function is operating as expected, it is theoretically possible to determine whether or not there is a packet loss that can be recovered, and whether the packet loss that the video receiver cannot actually recover It is possible to determine whether or not the error correction function is operating as expected by comparing the generated location.

以上によれば、誤り訂正機能検証装置において、すなわち映像受信装置の外部において、映像受信装置の誤り訂正機能を検証することができる。このため、映像受信装置に機能を新たに追加する必要がないとともに、検査者による目視の確認が不要であるので、検証コストを低減することができる。また、検査者による目視の確認が不要であるので、検証ミスが発生してしまう可能性を低減することができ、映像受信装置の誤り訂正機能を適切に検証することができる。さらに、映像受信装置の誤り訂正機能を検証するための処理を、映像受信装置の外部で行うことになるので、映像受信装置における処理負荷を抑制することができる。   According to the above, it is possible to verify the error correction function of the video reception device in the error correction function verification device, that is, outside the video reception device. For this reason, it is not necessary to add a new function to the video receiving apparatus, and visual confirmation by the inspector is unnecessary, so that the verification cost can be reduced. Further, since visual inspection by the inspector is unnecessary, the possibility of a verification error occurring can be reduced, and the error correction function of the video reception device can be verified appropriately. Furthermore, since the process for verifying the error correction function of the video receiving apparatus is performed outside the video receiving apparatus, the processing load on the video receiving apparatus can be suppressed.

(2) この発明によれば、(1)の誤り訂正機能検証装置について、各フレームを識別するための識別情報を、画像として各フレームの画像に描画して、前記テストストリームを生成することを特徴とする誤り訂正機能検証装置を提案している。   (2) According to the present invention, the error correction function verification device of (1) generates the test stream by drawing identification information for identifying each frame as an image on the image of each frame. We have proposed an error correction function verification device.

この発明によれば、(1)の誤り訂正機能検証装置において、各フレームを識別するための識別情報を、画像として各フレームの画像に描画して、テストストリームを生成することとした。このため、誤り訂正デコード映像に描画されている識別情報と、ロスレスデコード映像に描画されている識別情報と、を比較すれば、同一の識別情報が描画されている誤り訂正デコード映像のフレームとロスレスデコード映像のフレームとを検出することができる。したがって、デコード映像エラー検出手段により、同一の識別情報が描画されている誤り訂正デコード映像のフレームとロスレスデコード映像のフレームとを、比較することができる。   According to the present invention, in the error correction function verification device of (1), the identification information for identifying each frame is drawn on the image of each frame as an image to generate a test stream. Therefore, if the identification information drawn on the error correction decoded video is compared with the identification information drawn on the lossless decoded video, the frame of the error correction decoded video on which the same identification information is drawn and the lossless Decoded video frames can be detected. Therefore, the decoded video error detection means can compare the frame of the error-corrected decoded video on which the same identification information is drawn with the frame of the lossless decoded video.

(3) この発明によれば、(2)の誤り訂正機能検証装置について、前記識別情報として、通し番号と、各フレームの時刻情報と、のうちいずれかを用いることを特徴とする誤り訂正機能検証装置を提案している。   (3) According to the present invention, in the error correction function verification device of (2), any one of a serial number and time information of each frame is used as the identification information. A device is proposed.

この発明によれば、(2)の誤り訂正機能検証装置において、識別情報として、通し番号や、各フレームの時刻情報を用いることができる。   According to the present invention, in the error correction function verification device of (2), the serial number and the time information of each frame can be used as the identification information.

(4) この発明によれば、(1)から(3)のいずれかの誤り訂正機能検証装置について、前記カウンタ計測手段は、前記テストストリームのカウンタ情報として、RTPパケットのヘッダに記載されているRTPカウンタを用いることを特徴とする誤り訂正機能検証装置を提案している。   (4) According to this invention, in the error correction function verification device according to any one of (1) to (3), the counter measurement means is described in the header of the RTP packet as counter information of the test stream. An error correction function verification apparatus using an RTP counter is proposed.

この発明によれば、(1)から(3)のいずれかの誤り訂正機能検証装置において、カウンタ計測手段により、テストストリームのカウンタ情報として、RTPパケットのヘッダに記載されているRTPカウンタを用いることができる。   According to the present invention, in the error correction function verification device of any one of (1) to (3), the counter measurement means uses the RTP counter described in the header of the RTP packet as the counter information of the test stream. Can do.

(5) この発明によれば、(1)から(4)のいずれかの誤り訂正機能検証装置について、前記デコード映像エラー検出手段は、前記出力映像記憶手段に記憶されている誤り訂正デコード映像の画素値をフレームごとに求めるとともに、前記ロスレスデコード映像の画素値をフレームごとに求め、前記誤り訂正デコード映像の各フレームの画素値と、前記ロスレスデコード映像のうち当該誤り訂正デコード映像のフレームに対応するフレームの画素値と、を比較して、前記映像受信装置に入力されたテストストリームのうち、パケットロスに対して当該映像受信装置では復元できなかった箇所を検出することを特徴とする誤り訂正機能検証装置を提案している。   (5) According to this invention, in the error correction function verification device according to any one of (1) to (4), the decoded video error detection means is configured to store the error correction decoded video stored in the output video storage means. The pixel value is obtained for each frame, the pixel value of the lossless decoded video is obtained for each frame, and the pixel value of each frame of the error-corrected decoded video and the error-corrected decoded video frame of the lossless decoded video are supported. The error correction is characterized in that a pixel value of a frame to be compared is compared, and a portion of the test stream input to the video reception device that cannot be restored by the video reception device due to packet loss is detected. A function verification device is proposed.

この発明によれば、(1)から(4)のいずれかの誤り訂正機能検証装置において、デコード映像エラー検出手段により、出力映像記憶手段に記憶されている誤り訂正デコード映像の画素値をフレームごとに求めるとともに、ロスレスデコード映像の画素値をフレームごとに求めることとした。また、デコード映像エラー検出手段により、誤り訂正デコード映像の各フレームの画素値と、ロスレスデコード映像のうち誤り訂正デコード映像のフレームに対応するフレームの画素値と、を比較して、映像受信装置に入力されたテストストリームのうち、パケットロスに対して映像受信装置では復元できなかった箇所を検出することとした。このため、誤り訂正デコード映像の画素値と、ロスレスデコード映像の画素値と、をフレームごとに比較して、映像受信装置に入力されたテストストリームにおいて、映像受信装置が復元できなかったパケットロスの発生している箇所を検出することができる。   According to this invention, in the error correction function verification device according to any one of (1) to (4), the decoded video error detection unit converts the pixel value of the error correction decoded video stored in the output video storage unit for each frame. In addition, the pixel value of the lossless decoded video is obtained for each frame. The decoded video error detection means compares the pixel value of each frame of the error-corrected decoded video with the pixel value of the frame corresponding to the frame of the error-corrected decoded video among the lossless decoded video, and In the input test stream, a portion that could not be restored by the video reception device due to packet loss was detected. For this reason, the pixel value of the error correction decoded video and the pixel value of the lossless decoded video are compared for each frame, and in the test stream input to the video receiving device, the packet loss that the video receiving device cannot restore is The occurring location can be detected.

(6) この発明によれば、(1)から(4)のいずれかの誤り訂正機能検証装置について、パケットロスの発生していない前記テストストリームについて解像度を縮小して、縮小テストストリームを生成する縮小ストリーム生成手段(例えば、図4の縮小ストリーム生成部80に相当)を備え、前記デコード映像エラー検出手段は、前記ロスレスデコード映像の代わりに、前記縮小ストリーム生成手段により生成された前記縮小テストストリームをデコードして得られた縮小ロスレスデコード映像を用いることを特徴とする誤り訂正機能検証装置を提案している。   (6) According to the present invention, the error correction function verification device according to any one of (1) to (4) generates a reduced test stream by reducing the resolution of the test stream in which no packet loss has occurred. A reduced stream generation unit (e.g., corresponding to the reduced stream generation unit 80 in FIG. 4), and the decoded video error detection unit is configured to generate the reduced test stream generated by the reduced stream generation unit instead of the lossless decoded video. Has proposed an error correction function verification device characterized by using reduced lossless decoded video obtained by decoding.

この発明によれば、(1)から(4)のいずれかの誤り訂正機能検証装置において、縮小ストリーム生成手段により、パケットロスの発生していないテストストリームについて解像度を縮小して、縮小テストストリームを生成することとした。また、デコード映像エラー検出手段により、ロスレスデコード映像の代わりに、縮小ストリーム生成手段により生成された縮小テストストリームをデコードして得られた縮小ロスレスデコード映像を用いることとした。このため、デコード映像エラー検出手段は、出力映像記憶手段に記憶されている誤り訂正デコード映像と、ロスレスデコード映像の代わりに縮小ロスレスデコード映像と、を比較することになる。したがって、誤り訂正デコード映像と比較する映像の解像度が下がるので、デコード映像エラー検出手段における処理負荷を抑制することができる。   According to the present invention, in the error correction function verification device of any one of (1) to (4), the reduced stream generation means reduces the resolution of a test stream in which no packet loss has occurred, and generates a reduced test stream. It was decided to generate. In addition, the reduced lossless decoded video obtained by decoding the reduced test stream generated by the reduced stream generating means is used instead of the lossless decoded video by the decoded video error detecting means. Therefore, the decoded video error detection unit compares the error correction decoded video stored in the output video storage unit with the reduced lossless decoded video instead of the lossless decoded video. Therefore, since the resolution of the video to be compared with the error correction decoded video is lowered, the processing load on the decoded video error detecting means can be suppressed.

(7) この発明によれば、(6)の誤り訂正機能検証装置について、前記デコード映像エラー検出手段は、前記出力映像記憶手段に記憶されている誤り訂正デコード映像の特徴量をフレームごとに求めるとともに、前記縮小ロスレスデコード映像の特徴量をフレームごとに求め、前記誤り訂正デコード映像の各フレームの特徴量と、前記縮小ロスレスデコード映像のうち当該誤り訂正デコード映像のフレームに対応するフレームの特徴量と、を比較して、前記映像受信装置に入力されたテストストリームのうち、パケットロスに対して当該映像受信装置では復元できなかった箇所を検出することを特徴とする誤り訂正機能検証装置を提案している。   (7) According to the present invention, in the error correction function verification device of (6), the decoded video error detection means obtains the feature quantity of the error correction decoded video stored in the output video storage means for each frame. In addition, a feature amount of the reduced lossless decoded video is obtained for each frame, a feature amount of each frame of the error correction decoded video, and a feature amount of a frame corresponding to the frame of the error corrected decoded video among the reduced lossless decoded video And an error correction function verification device that detects a portion of the test stream input to the video reception device that could not be restored by the video reception device due to packet loss. doing.

この発明によれば、(6)の誤り訂正機能検証装置において、デコード映像エラー検出手段により、出力映像記憶手段に記憶されている誤り訂正デコード映像の特徴量をフレームごとに求めるとともに、縮小ロスレスデコード映像の特徴量をフレームごとに求めることとした。また、デコード映像エラー検出手段により、誤り訂正デコード映像の各フレームの特徴量と、縮小ロスレスデコード映像のうち誤り訂正デコード映像のフレームに対応するフレームの特徴量と、を比較して、映像受信装置に入力されたテストストリームのうち、パケットロスに対して映像受信装置では復元できなかった箇所を検出することとした。このため、フレームごとに、誤り訂正デコード映像の特徴量と、縮小ロスレスデコード映像の特徴量と、を比較して、映像受信装置に入力されたテストストリームにおいて、映像受信装置が復元できなかったパケットロスの発生している箇所を検出することができる。   According to the present invention, in the error correction function verification device of (6), the decoded video error detection means obtains the feature amount of the error correction decoded video stored in the output video storage means for each frame and reduces the lossless decoding. The feature amount of the video is determined for each frame. In addition, the decoded video error detection means compares the feature amount of each frame of the error-corrected decoded video with the feature amount of the frame corresponding to the frame of the error-corrected decoded video among the reduced lossless decoded video. In the test stream input to, a portion that could not be restored by the video reception device due to packet loss was detected. For this reason, for each frame, the feature amount of the error-corrected decoded video is compared with the feature amount of the reduced lossless decoded video, and the packet that the video receiver cannot restore in the test stream input to the video receiver. It is possible to detect the location where the loss occurs.

(8) この発明によれば、(7)の誤り訂正機能検証装置について、前記デコード映像エラー検出手段は、特徴量として、フレーム内の画素値の平均値を用いることを特徴とする誤り訂正機能検証装置を提案している。   (8) According to this invention, in the error correction function verification device according to (7), the decoded video error detection means uses an average value of pixel values in a frame as a feature quantity. A verification device is proposed.

この発明によれば、(7)の誤り訂正機能検証装置において、デコード映像エラー検出手段により、特徴量として、フレーム内の画素値の平均値を用いることができる。   According to the present invention, in the error correction function verification device of (7), the average value of the pixel values in the frame can be used as the feature amount by the decoded video error detection means.

(9) この発明によれば、(1)から(8)のいずれかの誤り訂正機能検証装置について、処理フレームについてのテストストリームが前記映像受信装置に入力されてから、当該処理フレームについての前記デコード映像エラー検出手段による検出が完了するまでの時間を検出する処理遅延検出手段(例えば、図3の処理遅延検出部70に相当)を備え、前記誤り訂正性能判定手段は、前記処理遅延検出手段により検出された時間に基づいて、前記パケットロス検出手段による検出結果が得られたフレームと、前記デコード映像エラー検出手段による検出結果が得られたフレームと、を一致させ、同一フレームについての前記パケットロス検出手段および前記デコード映像エラー検出手段による検出結果に基づいて、前記誤り訂正機能が期待通りに動作しているか否かを判定することを特徴とする誤り訂正機能検証装置を提案している。   (9) According to this invention, in the error correction function verification device of any one of (1) to (8), after a test stream for a processing frame is input to the video receiving device, the processing frame for the processing frame A processing delay detection unit (e.g., corresponding to the processing delay detection unit 70 in FIG. 3) for detecting a time until detection by the decoded video error detection unit is completed, and the error correction performance determination unit includes the processing delay detection unit; The frame from which the detection result by the packet loss detection means is obtained and the frame from which the detection result by the decoded video error detection means is matched based on the time detected by Based on the detection results of the loss detection means and the decoded video error detection means, the error correction function is It proposes an error correction function verification apparatus and judging whether or not work as.

この発明によれば、(1)から(8)のいずれかの誤り訂正機能検証装置において、処理遅延検出手段により、処理フレームについてのテストストリームが映像受信装置に入力されてから、処理フレームについてのデコード映像エラー検出手段による検出が完了するまでの時間を検出することとした。また、誤り訂正性能判定手段により、処理遅延検出手段により検出された時間に基づいて、パケットロス検出手段による検出結果が得られたフレームと、デコード映像エラー検出手段による検出結果が得られたフレームと、を一致させ、同一フレームについてのパケットロス検出手段およびデコード映像エラー検出手段による検出結果に基づいて、誤り訂正機能が期待通りに動作しているか否かを判定することとした。このため、誤り訂正機能検証装置に設けられた各構成や映像受信装置における処理時間の差異を考慮して、パケットロス検出手段およびデコード映像エラー検出手段による検出結果を、同一フレームに対するもの同士で照らし合わせることができる。   According to this invention, in the error correction function verification device according to any one of (1) to (8), after the test stream for the processing frame is input to the video reception device by the processing delay detection means, The time until the detection by the decoded video error detection means is completed is detected. Further, the error correction performance determining means, based on the time detected by the processing delay detecting means, the frame from which the detection result by the packet loss detecting means is obtained, and the frame from which the detection result by the decoded video error detecting means is obtained. , And based on the detection results of the packet loss detection means and the decoded video error detection means for the same frame, it is determined whether or not the error correction function is operating as expected. For this reason, the detection results of the packet loss detection means and the decoded video error detection means are compared with each other for the same frame in consideration of the difference in processing time in each configuration provided in the error correction function verification device and the video reception device. Can be matched.

(10) この発明によれば、(9)の誤り訂正機能検証装置について、前記処理遅延検出手段は、前記テストストリームに記載されているピクチャ順序に関する情報と、前記出力映像記憶手段に記憶されている誤り訂正デコード映像の各フレームから読み取ることができる識別情報と、のそれぞれをフレーム順に並べ、並べた前記ピクチャ順序に関する情報のうちn番目の情報(ただし、nは、n≧1を満たす任意の整数)と、並べた前記識別情報のうちn番目の識別情報と、を対応付けて、nフレーム目についてのテストストリームと、前記出力映像記憶手段に記憶されているnフレーム目の誤り訂正デコード映像と、を同期させることを特徴とする誤り訂正機能検証装置を提案している。   (10) According to this invention, in the error correction function verification device of (9), the processing delay detection means is stored in the output video storage means and the information related to the picture order described in the test stream. The identification information that can be read from each frame of the error-corrected decoded video, and the n-th information among the information relating to the picture order arranged in the order of the frames (where n is an arbitrary value satisfying n ≧ 1) Integer) and the nth identification information among the arranged identification information, the test stream for the nth frame, and the error correction decoded video of the nth frame stored in the output video storage means And an error correction function verifying device characterized by synchronizing these with each other.

この発明によれば、(9)の誤り訂正機能検証装置において、処理遅延検出手段により、テストストリームに記載されているピクチャ順序に関する情報と、出力映像記憶手段に記憶されている誤り訂正デコード映像の各フレームから読み取ることができる識別情報と、のそれぞれをフレーム順に並べることとした。また、処理遅延検出手段により、並べたピクチャ順序に関する情報のうちn番目の情報と、並べた識別情報のうちn番目の識別情報と、を対応付けて、nフレーム目についてのテストストリームと、出力映像記憶手段に記憶されているnフレーム目の誤り訂正デコード映像と、を同期させることとした。このため、処理遅延検出手段により、処理フレームについてのテストストリームが映像受信装置に入力されてから、この処理フレームについてのデコード映像エラー検出手段による検出が完了するまでの時間を、適切に検出することができる。   According to the present invention, in the error correction function verification device of (9), the processing delay detection means causes the information related to the picture order described in the test stream and the error correction decoded video stored in the output video storage means to Each of the identification information that can be read from each frame is arranged in the order of the frames. Further, the processing delay detection means associates the nth information in the information about the arranged picture order with the nth identification information in the arranged identification information, and outputs a test stream for the nth frame, and an output The error correction decoded video of the nth frame stored in the video storage means is synchronized. For this reason, the processing delay detection unit appropriately detects the time from when the test stream for the processing frame is input to the video receiving apparatus until the detection by the decoded video error detection unit for the processing frame is completed. Can do.

(11) この発明によれば、(1)から(10)のいずれかの誤り訂正機能検証装置について、前記誤り訂正性能判定手段は、前記パケットロス検出手段により復元可能であると検出された箇所について、前記デコード映像エラー検出手段により前記映像受信装置では復元できなかった箇所であるとは検出されなかった場合に、当該箇所について前記誤り訂正機能が期待通りに動作していると判定するとともに、前記パケットロス検出手段により復元不可能であると検出された箇所について、前記デコード映像エラー検出手段により前記映像受信装置では復元できなかった箇所であると検出された場合に、当該箇所について前記誤り訂正機能が期待通りに動作していると判定することを特徴とする誤り訂正機能検証装置を提案している。   (11) According to this invention, in the error correction function verification device according to any one of (1) to (10), the location where the error correction performance determination means is detected as recoverable by the packet loss detection means When the decoded video error detection means does not detect that the video receiving device cannot restore the location, it is determined that the error correction function is operating as expected for the location. When the portion detected as unrecoverable by the packet loss detection means is detected by the decoded video error detection means as a portion that could not be restored by the video receiver, the error correction is performed for the portion. An error correction function verification apparatus characterized by determining that a function is operating as expected has been proposed.

この発明によれば、(1)から(10)のいずれかの誤り訂正機能検証装置において、誤り訂正性能判定手段により、パケットロス検出手段により復元可能であると検出された箇所について、デコード映像エラー検出手段により映像受信装置では復元できなかった箇所ではないと検出された場合に、この箇所について誤り訂正機能が期待通りに動作していると判定することができる。また、誤り訂正性能判定手段により、パケットロス検出手段により復元不可能であると検出された箇所について、デコード映像エラー検出手段により映像受信装置では復元できなかった箇所であると検出された場合に、この箇所について誤り訂正機能が期待通りに動作していると判定することができる。   According to the present invention, in the error correction function verification device according to any one of (1) to (10), a decoded video error is detected for a portion detected by the error correction performance determination unit as recoverable by the packet loss detection unit. When it is detected by the detection means that the location cannot be restored by the video reception device, it can be determined that the error correction function is operating as expected for this location. Further, when it is detected by the error correction performance determination means that it is impossible to restore by the packet loss detection means, it is detected by the decoded video error detection means that the video reception device cannot restore, It can be determined that the error correction function is operating as expected at this location.

本発明によれば、処理負荷の抑制と、検証コストの低減と、を実現しつつ、映像受信装置の誤り訂正機能を適切に検証することができる。   According to the present invention, it is possible to appropriately verify the error correction function of the video reception device while realizing reduction in processing load and reduction in verification cost.

本発明の第1実施形態に係る誤り訂正機能検証システムのブロック図である。1 is a block diagram of an error correction function verification system according to a first embodiment of the present invention. テスト映像の一例を示す図である。It is a figure which shows an example of a test image | video. 本発明の第2実施形態に係る誤り訂正機能検証システムのブロック図である。It is a block diagram of the error correction function verification system which concerns on 2nd Embodiment of this invention. 本発明の第3実施形態に係る誤り訂正機能検証システムのブロック図である。It is a block diagram of the error correction function verification system which concerns on 3rd Embodiment of this invention.

以下、本発明の実施の形態について図面を参照しながら説明する。なお、以下の実施形態における構成要素は適宜、既存の構成要素などとの置き換えが可能であり、また、他の既存の構成要素との組合せを含む様々なバリエーションが可能である。したがって、以下の実施形態の記載をもって、特許請求の範囲に記載された発明の内容を限定するものではない。   Hereinafter, embodiments of the present invention will be described with reference to the drawings. Note that the constituent elements in the following embodiments can be appropriately replaced with existing constituent elements, and various variations including combinations with other existing constituent elements are possible. Accordingly, the description of the following embodiments does not limit the contents of the invention described in the claims.

<第1実施形態>
[誤り訂正機能検証システムAAの構成および動作]
図1は、本発明の第1実施形態に係る誤り訂正機能検証システムAAのブロック図である。誤り訂正機能検証システムAAは、映像送出装置100、映像受信装置200、ネットワーク300、および誤り訂正機能検証装置1を備える。
<First Embodiment>
[Configuration and operation of error correction function verification system AA]
FIG. 1 is a block diagram of an error correction function verification system AA according to the first embodiment of the present invention. The error correction function verification system AA includes a video transmission device 100, a video reception device 200, a network 300, and an error correction function verification device 1.

[映像送出装置100の動作]
映像送出装置100は、ネットワーク300を介して映像受信装置200に接続されており、予め定められたネットワークプロトコルにしたがって、テストストリームをネットワーク300に送出する。テストストリームは、MPEG2−TSといったプロトコルに準拠したファイルになっているものとする。また、予め定められたネットワークプロトコルとしては、TS over RTPといったプロトコルを適用することができる。
[Operation of Video Sending Device 100]
The video transmission device 100 is connected to the video reception device 200 via the network 300 and transmits a test stream to the network 300 according to a predetermined network protocol. It is assumed that the test stream is a file conforming to a protocol such as MPEG2-TS. Further, as a predetermined network protocol, a protocol such as TS over RTP can be applied.

テストストリームは、映像圧縮技術によりテスト映像を圧縮することによって映像送出装置100の外部で生成され、映像送出装置100に入力される。なお、テスト映像を構成する各フレームの画像には、各フレームをユニークに識別するための情報である識別情報が、画像として描画されているものとする。識別情報としては、例えば、通し番号や、テスト映像の各フレームの時刻情報(タイムコード)を用いることができる。   The test stream is generated outside the video transmission device 100 by compressing the test video using a video compression technique, and is input to the video transmission device 100. It is assumed that identification information, which is information for uniquely identifying each frame, is drawn as an image on each frame image constituting the test video. As the identification information, for example, a serial number or time information (time code) of each frame of the test video can be used.

図2は、テスト映像を構成する各フレームの画像を示す図である。図2では、識別情報として、通し番号を用いた場合を示している。テスト映像の1フレーム目の画像には、「1」の数字が描画され、テスト映像の2フレーム目の画像には、「2」の数字が描画され、テスト映像の3フレーム目の画像には、「3」の数字が描画されている。   FIG. 2 is a diagram showing an image of each frame constituting the test video. FIG. 2 shows a case where a serial number is used as identification information. The number “1” is drawn on the first frame image of the test video, the number “2” is drawn on the second frame image of the test video, and the third frame image of the test video is displayed. , "3" is drawn.

[映像受信装置200の動作]
図1に戻って、映像受信装置200は、映像送出装置100から送出されたテストストリームを受信し、このテストストリームをデコードして、デコード映像として出力する。映像受信装置200には、誤り訂正機能が実装されており、映像受信装置200は、受信したテストストリームにパケットロスが発生している場合に、必要に応じて誤り訂正を行う。
[Operation of Video Reception Device 200]
Returning to FIG. 1, the video receiving apparatus 200 receives the test stream sent from the video sending apparatus 100, decodes the test stream, and outputs it as a decoded video. The video reception device 200 is equipped with an error correction function, and the video reception device 200 performs error correction as necessary when packet loss occurs in the received test stream.

[誤り訂正機能検証装置1の構成および動作]
誤り訂正機能検証装置1は、映像受信装置200に実装されている誤り訂正(FEC)機能を検証する。この誤り訂正機能検証装置1は、カウンタ計測部10、パケットロス検出部20、出力映像メモリ30、デコード映像エラー検出部40、およびFEC性能判定部50を備える。
[Configuration and operation of error correction function verification apparatus 1]
The error correction function verification device 1 verifies an error correction (FEC) function installed in the video reception device 200. The error correction function verification apparatus 1 includes a counter measurement unit 10, a packet loss detection unit 20, an output video memory 30, a decoded video error detection unit 40, and an FEC performance determination unit 50.

カウンタ計測部10は、映像受信装置200に入力されるテストストリーム、すなわちパケットロスが発生している可能性のあるテストストリームを入力とする。このカウンタ計測部10は、映像受信装置200に入力されるテストストリームのパケットをキャプチャして、パケットに記載されているテストストリームのカウンタ情報を取得し、取得したテストストリームのカウンタ情報を出力する。   The counter measurement unit 10 receives a test stream input to the video receiving apparatus 200, that is, a test stream that may have a packet loss. The counter measurement unit 10 captures a test stream packet input to the video reception device 200, acquires test stream counter information described in the packet, and outputs the acquired test stream counter information.

なお、テストストリームのカウンタ情報は、有限なビット長で表現される。このため、テストストリームのカウンタ情報は、一般的には一定の周期で巡回する。したがって、本実施形態では、テストストリームのカウンタ情報として、巡回周期が十分に長いものを用いる必要がある。なお、テストストリームのカウンタ情報としては、例えば、RTPパケットのヘッダに記載されているRTPカウンタを用いることができる。   Note that the counter information of the test stream is expressed by a finite bit length. For this reason, the counter information of the test stream generally circulates at a constant cycle. Therefore, in this embodiment, it is necessary to use the test stream counter information having a sufficiently long cyclic cycle. As the test stream counter information, for example, an RTP counter described in the header of the RTP packet can be used.

パケットロス検出部20は、カウンタ計測部10から出力されたテストストリームのカウンタ情報を入力とする。このパケットロス検出部20は、カウンタ計測部10から出力されたテストストリームのカウンタ情報に基づいて、映像受信装置200に入力されるテストストリームにおけるパケットロスを検知し、検知したパケットロスの発生しているフレームを映像受信装置200が復元可能であるか否かを検出する。   The packet loss detection unit 20 receives the counter information of the test stream output from the counter measurement unit 10 as an input. The packet loss detection unit 20 detects packet loss in the test stream input to the video reception device 200 based on the test stream counter information output from the counter measurement unit 10, and generates the detected packet loss. It is detected whether or not the video receiving apparatus 200 can restore the existing frame.

具体的には、パケットロス検出部20は、まず、カウンタ計測部10から出力されたテストストリームのカウンタ情報に基づいて、映像受信装置200に入力されるテストストリームにおけるパケットロスを検知する。なお、パケットロスの検知については、カウンタ計測部10から出力されたテストストリームのカウンタ情報の値が不適切に飛んでいる場合に、パケットロスが発生していると判断する。また、以降では、パケットロスが発生しているパケットの直前のパケットのことを、直前パケットと呼ぶこととする。   Specifically, the packet loss detection unit 20 first detects a packet loss in the test stream input to the video reception device 200 based on the test stream counter information output from the counter measurement unit 10. As for packet loss detection, it is determined that packet loss has occurred when the value of the counter information of the test stream output from the counter measurement unit 10 is inappropriately skipped. Hereinafter, a packet immediately before a packet in which a packet loss has occurred is referred to as a previous packet.

パケットロス検出部20は、次に、直前パケットにおけるテストストリームのカウント情報に基づいて、テストストリームのどのフレームでパケットロスが発生しているのかを特定する。具体的なカウンタ情報として、例えば映像ストリームのSlice HeaderにおけるPicture Order Count(POC)を用いて、パケットロスの発生しているフレームを特定することができる。POCを用いる場合、テストストリームのうち隣り合うPOC同士の間でパケットロスが発生していないかを判定し、例えばPOC=1とPOC=2との間でテストストリームにパケットロスが発生していれば、POC=1のフレームにパケットロスが発生していると判断する。   Next, the packet loss detection unit 20 specifies in which frame of the test stream the packet loss has occurred, based on the test stream count information in the immediately preceding packet. As specific counter information, for example, a picture order count (POC) in a slice header of a video stream can be used to identify a frame in which a packet loss has occurred. When using POC, it is determined whether packet loss has occurred between adjacent POCs in the test stream. For example, packet loss has occurred in the test stream between POC = 1 and POC = 2. For example, it is determined that a packet loss has occurred in the frame of POC = 1.

パケットロス検出部20は、次に、検知したパケットロスが、映像受信装置200に実装されている誤り訂正機能の性能の範囲内であるか否かを判定する。具体的には、パケットロス検出部20は、映像受信装置200に実装されている誤り訂正機能の性能を予め認識しており、予め定められた時間内におけるパケットロス数が、認識している性能で訂正可能なパケットロス数の上限以下であるか否かを判定する。上限以下であると判定した場合には、検知したパケットロスは、映像受信装置200に実装されている誤り訂正機能の性能の範囲内であり、検知したパケットロスの発生しているフレームを映像受信装置200が復元可能であるということになる。一方、上限より多いと判定した場合には、検知したパケットロスは、映像受信装置200に実装されている誤り訂正機能の性能の範囲を超えており、検知したパケットロスの発生しているフレームを映像受信装置200が復元不可能であるということになる。   Next, the packet loss detection unit 20 determines whether or not the detected packet loss is within the range of the performance of the error correction function installed in the video reception device 200. Specifically, the packet loss detection unit 20 recognizes in advance the performance of the error correction function implemented in the video receiving device 200, and the number of packet losses within a predetermined time recognizes the performance. It is determined whether or not the number is less than the upper limit of the number of packet losses that can be corrected by. If it is determined that the packet loss is less than or equal to the upper limit, the detected packet loss is within the range of the performance of the error correction function implemented in the video receiving apparatus 200, and the frame in which the detected packet loss has occurred is received by video reception. This means that the device 200 can be restored. On the other hand, if it is determined that there is more than the upper limit, the detected packet loss exceeds the range of the performance of the error correction function implemented in the video receiving device 200, and the frame in which the detected packet loss has occurred is detected. This means that the video receiving device 200 cannot be restored.

パケットロス検出部20は、次に、パケットロスが発生していると特定したフレームごとに、フレームのカウンタ情報と、映像受信装置200が復元可能なパケットロスであるか否かを示す情報と、を紐付けてリストを生成し、生成したリストを出力する。   Next, the packet loss detection unit 20 performs frame counter information, information indicating whether or not the video receiving device 200 can recover the packet loss, for each frame identified as having undergone packet loss, Generate a list by linking and output the generated list.

出力映像メモリ30は、映像受信装置200から出力されたデコード映像を入力とする。この出力映像メモリ30は、入力されたデコード映像をキャプチャして蓄積するとともに、蓄積したデコード映像を適宜出力する。   The output video memory 30 receives the decoded video output from the video receiving device 200. The output video memory 30 captures and stores the input decoded video and outputs the stored decoded video as appropriate.

デコード映像エラー検出部40は、出力映像メモリ30から出力されたデコード映像(以降、便宜上、誤り訂正デコード映像と呼ぶこととする)を入力とするとともに、映像送出装置100からネットワーク300に送出される前のテストストリーム、すなわちパケットロスの発生していないテストストリームを予め保持している。このデコード映像エラー検出部40は、誤り訂正デコード映像と、予め保持しているパケットロスの発生していないテストストリームをデコードして得られたデコード映像(以降、便宜上、ロスレスデコード映像と呼ぶこととする)と、を比較して、映像受信装置200に入力されたテストストリームのうち、パケットロスに対して映像受信装置200では復元できなかったフレームを検出する。   The decoded video error detection unit 40 receives the decoded video output from the output video memory 30 (hereinafter referred to as an error-corrected decoded video for convenience) and sends it to the network 300 from the video transmission device 100. A previous test stream, that is, a test stream in which no packet loss has occurred is held in advance. The decoded video error detection unit 40 decodes the error-corrected decoded video and a decoded video obtained by decoding a test stream that has been stored in advance and has no packet loss (hereinafter referred to as lossless decoded video for convenience). In the test stream input to the video receiving device 200, a frame that cannot be restored by the video receiving device 200 due to packet loss is detected.

パケットロスに対して映像受信装置200では復元できなくなる原因としては、以下の2つが考えられる。1つ目の原因は、発生しているパケットロスが、映像受信装置200の誤り訂正機能の性能を超えているということである。2つ目の原因は、発生しているパケットロスは、映像受信装置200の誤り訂正機能の性能の範囲内であるが、映像受信装置200の誤り訂正機能が正常に動作していない、すなわち映像受信装置200の誤り訂正機能が期待通り(設計通り)に動作していないということである。このため、パケットロスに対して映像受信装置200では復元できなかったフレームについて、パケットロスに関することが原因で映像受信装置200では復元できなかったフレームと表現することもできる。   There are two possible causes for the packet loss that cannot be restored by the video reception device 200 due to packet loss. The first cause is that the generated packet loss exceeds the performance of the error correction function of the video reception device 200. The second cause is that the generated packet loss is within the range of the performance of the error correction function of the video reception device 200, but the error correction function of the video reception device 200 is not operating normally. The error correction function of the receiving apparatus 200 is not operating as expected (as designed). For this reason, a frame that cannot be restored by the video receiving apparatus 200 with respect to packet loss can also be expressed as a frame that cannot be restored by the video receiving apparatus 200 due to packet loss.

デコード映像エラー検出部40は、具体的には、まず、予め保持しているパケットロスの発生していないテストストリームをデコードして、ロスレスデコード映像を生成する。これによれば、デコード映像エラー検出部40で生成されるロスレスデコード映像には、パケットロスに起因する映像劣化が発生していないことになる。   Specifically, the decoded video error detection unit 40 first decodes a test stream that has been stored in advance and has no packet loss, and generates a lossless decoded video. According to this, in the lossless decoded video generated by the decoded video error detection unit 40, video deterioration due to packet loss does not occur.

デコード映像エラー検出部40は、次に、誤り訂正デコード映像に描画されている識別情報と、ロスレスデコード映像に描画されている識別情報と、を比較して、同一の識別情報が描画されている誤り訂正デコード映像のフレームとロスレスデコード映像のフレームとを検出する。   Next, the decoded video error detection unit 40 compares the identification information drawn on the error correction decoded video with the identification information drawn on the lossless decoded video, and the same identification information is drawn. Error correction decoded video frames and lossless decoded video frames are detected.

デコード映像エラー検出部40は、次に、誤り訂正デコード映像の画素値をフレームごとに算出するとともに、ロスレスデコード映像の画素値の平均値をフレームごとに算出し、同一の識別情報が描画されていると検出したフレーム同士の画素値の平均値の差分を算出する。   Next, the decoded video error detection unit 40 calculates the pixel value of the error-corrected decoded video for each frame, calculates the average value of the pixel values of the lossless decoded video for each frame, and the same identification information is drawn. The difference of the average value of the pixel values between the detected frames is calculated.

デコード映像エラー検出部40は、次に、算出した画素値の差分が閾値(例えば、「0」)以下であるフレームについては、パケットロスに起因する映像劣化(ノイズなど)が生じていない、すなわち映像受信装置200で復元できた、と判定する。一方、算出した画素値の差分が閾値より大きいフレームについては、パケットロスに起因する映像劣化が生じている、すなわち映像受信装置200では復元できなかった、と判定する。   Next, the decoded video error detection unit 40 does not cause video degradation (noise or the like) due to packet loss for frames in which the difference between the calculated pixel values is less than or equal to a threshold value (for example, “0”). It is determined that the video receiving apparatus 200 has been restored. On the other hand, for a frame in which the difference between the calculated pixel values is larger than the threshold, it is determined that video degradation due to packet loss has occurred, that is, the video receiver 200 could not restore.

デコード映像エラー検出部40は、次に、パケットロスに起因する映像劣化が生じていると判定した誤り訂正デコード映像のフレーム、すなわち映像受信装置200では復元できなかったと判定した誤り訂正デコード映像のフレームを示す情報のリストを生成し、生成したリストを出力する。   Next, the decoded video error detection unit 40 determines the frame of the error-corrected decoded video that has been determined to have deteriorated due to packet loss, that is, the frame of the error-corrected decoded video that has been determined to be unrecoverable by the video receiving device 200. Is generated, and the generated list is output.

FEC性能判定部50は、パケットロス検出部20から出力されたリストと、デコード映像エラー検出部40から出力されたリストと、を入力とする。このFEC性能判定部50は、パケットロス検出部20およびデコード映像エラー検出部40から出力されたリストに基づいて、映像受信装置200の誤り訂正機能が期待通りに動作しているか否かを判定する。FEC性能判定部50について、以下に詳述する。   The FEC performance determination unit 50 receives the list output from the packet loss detection unit 20 and the list output from the decoded video error detection unit 40 as inputs. The FEC performance determination unit 50 determines whether or not the error correction function of the video reception device 200 is operating as expected based on the lists output from the packet loss detection unit 20 and the decoded video error detection unit 40. . The FEC performance determination unit 50 will be described in detail below.

まず、映像受信装置200の誤り訂正機能が期待通りに動作している場合について、以下に説明する。この場合、期待通りに誤り訂正機能が動作していれば復元可能なフレームについては、映像受信装置200が復元できるはずである。また、期待通りに誤り訂正機能が動作していれば復元不可能なフレームについては、映像受信装置200が復元できないはずである。すなわち、映像受信装置200の誤り訂正機能が期待通りに動作している場合には、映像受信装置200は、復元可能なはずのフレームについては復元でき、復元不可能なはずのフレームについては復元できないことになる。   First, a case where the error correction function of the video reception device 200 operates as expected will be described below. In this case, if the error correction function is operating as expected, the video receiving apparatus 200 should be able to restore frames that can be restored. Further, if the error correction function is operating as expected, the video receiving apparatus 200 should not be able to restore frames that cannot be restored. That is, when the error correction function of the video reception device 200 is operating as expected, the video reception device 200 can restore frames that should be recoverable and cannot restore frames that should not be recoverable. It will be.

次に、映像受信装置200の誤り訂正機能が期待通りに動作していない場合について、以下に説明する。この場合、期待通りに誤り訂正機能が動作していれば復元可能なフレームについて、映像受信装置200が復元できないケースが起こり得る。また、期待通りに誤り訂正機能が動作していれば復元不可能なフレームについて、映像受信装置200が復元できてしまうケースが起こり得る。すなわち、映像受信装置200の誤り訂正機能が期待通りに動作していない場合には、映像受信装置200は、復元可能なはずのフレームを復元できなかったり、復元不可能なはずのフレームを復元できてしまったりするケースが起こり得る。   Next, a case where the error correction function of the video reception device 200 is not operating as expected will be described below. In this case, there may be a case where the video receiving apparatus 200 cannot restore a frame that can be restored if the error correction function is operating as expected. In addition, there may be a case where the video receiving apparatus 200 can restore a frame that cannot be restored if the error correction function is operating as expected. That is, when the error correction function of the video receiving apparatus 200 is not operating as expected, the video receiving apparatus 200 cannot restore a frame that should be recoverable or can restore a frame that should not be recoverable. There is a possibility that it will be lost.

そこで、FEC性能判定部50は、まず、パケットロス検出部20から出力されたリストから、フレームごとに、期待通りに誤り訂正機能が動作していれば理論的には復元可能か否かを認識する。また、FEC性能判定部50は、デコード映像エラー検出部40から出力されたリストから、フレームごとに、映像受信装置200が実際に復元できたか否かを認識する。   Therefore, the FEC performance determination unit 50 first recognizes from the list output from the packet loss detection unit 20 whether or not it can be theoretically restored if the error correction function operates as expected for each frame. To do. In addition, the FEC performance determination unit 50 recognizes from the list output from the decoded video error detection unit 40 whether or not the video reception device 200 has actually been restored for each frame.

FEC性能判定部50は、次に、フレームごとに、理論的には復元可能か否かの認識結果と、映像受信装置200が実際に復元できたか否かの認識結果と、を比較して、映像受信装置200の誤り訂正機能が期待通りに動作しているか否かを判定する。   Next, for each frame, the FEC performance determination unit 50 compares the recognition result as to whether or not the restoration is theoretically possible with the recognition result as to whether or not the video reception device 200 has actually been restored. It is determined whether or not the error correction function of the video reception device 200 is operating as expected.

以上の誤り訂正機能検証装置1によれば、以下の効果を奏することができる。   According to the error correction function verification apparatus 1 described above, the following effects can be obtained.

誤り訂正機能検証装置1は、映像受信装置200の外部において、映像受信装置200の誤り訂正機能を検証することができる。このため、映像受信装置200に機能を新たに追加する必要がないとともに、検査者による目視の確認が不要であるので、検証コストを低減することができる。また、検査者による目視の確認が不要であるので、検証ミスが発生してしまう可能性を低減することができ、映像受信装置200の誤り訂正機能を適切に検証することができる。さらに、映像受信装置200の誤り訂正機能を検証するための処理を、映像受信装置200の外部で行うことになるので、映像受信装置200における処理負荷を抑制することができる。   The error correction function verification device 1 can verify the error correction function of the video reception device 200 outside the video reception device 200. For this reason, it is not necessary to add a new function to the video receiving apparatus 200, and visual confirmation by an inspector is unnecessary, so that the verification cost can be reduced. In addition, since visual inspection by the inspector is unnecessary, the possibility of a verification error occurring can be reduced, and the error correction function of the video reception device 200 can be verified appropriately. Furthermore, since the process for verifying the error correction function of the video receiving apparatus 200 is performed outside the video receiving apparatus 200, the processing load on the video receiving apparatus 200 can be suppressed.

また、誤り訂正機能検証装置1では、テスト映像を構成する各フレームの画像に、各フレームをユニークに識別するための情報である識別情報が、画像として描画されている。このため、デコード映像エラー検出部40により、同一の識別情報が描画されている誤り訂正デコード映像のフレームとロスレスデコード映像のフレームとを、比較することができる。   In the error correction function verification apparatus 1, identification information, which is information for uniquely identifying each frame, is drawn as an image on each frame image constituting the test video. Therefore, the decoded video error detection unit 40 can compare the frame of the error correction decoded video on which the same identification information is drawn with the frame of the lossless decoded video.

また、誤り訂正機能検証装置1は、テスト映像を構成する各フレームの画像に、識別情報として、通し番号や、テスト映像の各フレームの時刻情報を用いることができる。   In addition, the error correction function verification apparatus 1 can use a serial number or time information of each frame of the test video as identification information for each frame image constituting the test video.

また、誤り訂正機能検証装置1は、カウンタ計測部10において、テストストリームのカウンタ情報として、RTPパケットのヘッダに記載されているRTPカウンタを用いることができる。   Further, the error correction function verification apparatus 1 can use the RTP counter described in the header of the RTP packet as the counter information of the test stream in the counter measurement unit 10.

また、誤り訂正機能検証装置1は、デコード映像エラー検出部40により、同一の識別情報が描画されていると検出したフレームごとに、誤り訂正デコード映像の画素値と、ロスレスデコード映像の画素値と、を比較して、映像受信装置200に入力されたテストストリームにおいて、映像受信装置200が復元できなかったパケットロスの発生しているフレームを検出することができる。   In addition, the error correction function verification device 1 determines the pixel value of the error correction decoded video, the pixel value of the lossless decoded video, and the pixel value of the lossless decoded video for each frame detected by the decoded video error detection unit 40 that the same identification information is drawn. In the test stream input to the video receiving apparatus 200, it is possible to detect a frame in which a packet loss has occurred that the video receiving apparatus 200 cannot restore.

<第2実施形態>
[誤り訂正機能検証システムBBの構成および動作]
図3は、本発明の第2実施形態に係る誤り訂正機能検証システムBBのブロック図である。誤り訂正機能検証システムBBは、図1に示した本発明の第1実施形態に係る誤り訂正機能検証システムAAとは、誤り訂正機能検証装置1の代わりに誤り訂正機能検証装置1Aを備える点で異なる。なお、誤り訂正機能検証システムBBにおいて、誤り訂正機能検証システムAAと同一構成要件については、同一符号を付し、その説明を省略する。
Second Embodiment
[Configuration and operation of error correction function verification system BB]
FIG. 3 is a block diagram of an error correction function verification system BB according to the second embodiment of the present invention. The error correction function verification system BB is different from the error correction function verification system AA according to the first embodiment of the present invention shown in FIG. 1 in that an error correction function verification apparatus 1A is provided instead of the error correction function verification apparatus 1. Different. In the error correction function verification system BB, the same components as those in the error correction function verification system AA are denoted by the same reference numerals, and the description thereof is omitted.

[誤り訂正機能検証装置1Aの構成および動作]
誤り訂正機能検証装置1Aは、誤り訂正機能検証装置1と同様に、映像受信装置200に実装されている誤り訂正機能を検証する。この誤り訂正機能検証装置1Aは、誤り訂正機能検証装置1とは、映像デコード部60および処理遅延検出部70を備える点と、デコード映像エラー検出部40の代わりにデコード映像エラー検出部40Aを備える点と、FEC性能判定部50の代わりにFEC性能判定部50Aを備える点と、で異なる。
[Configuration and operation of error correction function verification apparatus 1A]
Similar to the error correction function verification apparatus 1, the error correction function verification apparatus 1 </ b> A verifies the error correction function installed in the video reception apparatus 200. This error correction function verification device 1A is different from the error correction function verification device 1 in that it includes a video decoding unit 60 and a processing delay detection unit 70, and includes a decoded video error detection unit 40A instead of the decoded video error detection unit 40. This is different from the above point in that an FEC performance determination unit 50A is provided instead of the FEC performance determination unit 50.

映像デコード部60は、映像受信装置200に入力されるテストストリーム、すなわちパケットロスが発生している可能性のあるテストストリームを入力とする。この映像デコード部60は、映像受信装置200に入力されるテストストリームのデコード処理にかかる処理時間を、処理フレームごとに求める。   The video decoding unit 60 receives a test stream input to the video receiving apparatus 200, that is, a test stream in which packet loss may occur. The video decoding unit 60 obtains a processing time required for decoding a test stream input to the video receiving device 200 for each processing frame.

具体的には、映像デコード部60は、まず、映像受信装置200に入力されるテストストリームをデコードして、デコード映像を取得する。   Specifically, the video decoding unit 60 first decodes a test stream input to the video receiving device 200 to obtain a decoded video.

映像デコード部60は、次に、取得したデコード映像の各フレームに該当するカウンタ情報を取得し、上述のテストストリームのデコード処理を開始してから終了するまでの処理時間を、取得したカウンタ情報に基づいて求める。なお、テストストリームにパケットロスが発生していた場合には、映像デコード部60は、誤り訂正の処理を行わず、次のGOP(Group of Picture)まで処理をスキップするなどして、デコード可能なフレームについてのみデコード処理を行う。   Next, the video decoding unit 60 acquires counter information corresponding to each frame of the acquired decoded video, and sets the processing time from the start to the end of the above-described test stream decoding processing as the acquired counter information. Ask based. If a packet loss has occurred in the test stream, the video decoding unit 60 can perform decoding by skipping processing to the next GOP (Group of Picture) without performing error correction processing. Only the frame is decoded.

映像デコード部60は、次に、取得したデコード映像と、上述の処理時間を表すカウンタ情報と、を出力する。   Next, the video decoding unit 60 outputs the acquired decoded video and the counter information indicating the above processing time.

デコード映像エラー検出部40Aは、出力映像メモリ30から出力された誤り訂正デコード映像を入力とするとともに、映像送出装置100からネットワーク300に送出される前のテストストリーム、すなわちパケットロスの発生していないテストストリームを予め保持している。このデコード映像エラー検出部40Aは、デコード映像エラー検出部40と同様に、映像受信装置200では復元できなかったと判定した誤り訂正デコード映像のフレームを示す情報のリストを生成し、生成したリストを出力する。さらに、デコード映像エラー検出部40Aは、入力された誤り訂正デコード映像のうち上述の判定の完了したフレームの映像を、上述の判定が完了したタイミングで逐次出力する。   The decoded video error detection unit 40A receives the error-corrected decoded video output from the output video memory 30, and a test stream before being sent from the video sending device 100 to the network 300, that is, no packet loss has occurred. A test stream is stored in advance. Similar to the decoded video error detection unit 40, the decoded video error detection unit 40A generates a list of information indicating frames of error-corrected decoded video determined to be unrecoverable by the video reception device 200, and outputs the generated list To do. Furthermore, the decoded video error detection unit 40A sequentially outputs the video of the frame for which the above determination has been completed among the input error correction decoded video at the timing at which the above determination has been completed.

処理遅延検出部70は、映像デコード部60から出力されたデコード映像および処理時間を表すカウンタ情報と、デコード映像エラー検出部40Aから出力された誤り訂正デコード映像と、を入力とする。この処理遅延検出部70は、処理遅延検出部70における処理フレームについてのテストストリームが映像受信装置200に入力されてから、この処理フレームについてのデコード映像エラー検出部40Aからの出力が完了するまでの時間を検出する。   The processing delay detection unit 70 receives the decoded video output from the video decoding unit 60 and counter information representing the processing time, and the error correction decoded video output from the decoded video error detection unit 40A. This processing delay detection unit 70 is from when the test stream for the processing frame in the processing delay detection unit 70 is input to the video receiving device 200 until the output from the decoded video error detection unit 40A for this processing frame is completed. Detect time.

具体的には、処理遅延検出部70は、まず、映像デコード部60から出力されたデコード映像と、デコード映像エラー検出部40Aから出力された誤り訂正デコード映像と、の間でフレームマッチングを行い、これらデコード映像と誤り訂正デコード映像との間で一致するフレームを探索する。   Specifically, the processing delay detection unit 70 first performs frame matching between the decoded video output from the video decoding unit 60 and the error correction decoded video output from the decoded video error detection unit 40A. A search is made for a matching frame between the decoded video and the error correction decoded video.

上述のフレームマッチングでは、処理遅延検出部70は、まず、映像デコード部60から出力されたデコード映像から、テストストリームに記載されているピクチャ順序に関する情報(例えばPOCなど)を取得する。次に、デコード映像エラー検出部40Aから出力された誤り訂正デコード映像の各フレームから、各フレームを識別するための識別情報を取得する。次に、ピクチャ順序に関する情報と、識別情報と、のそれぞれをフレーム順に並べ、並べたピクチャ順序に関する情報のうちn番目の情報(ただし、nは、n≧1を満たす任意の整数)と、並べた識別情報のうちn番目の識別情報と、を対応付けて、nフレーム目についてのテストストリームと、nフレーム目の誤り訂正デコード映像と、を同期させる。これによれば、デコード映像と誤り訂正デコード映像との間で一致するフレームが、探索されることになる。   In the frame matching described above, the processing delay detection unit 70 first acquires information (for example, POC) related to the picture order described in the test stream from the decoded video output from the video decoding unit 60. Next, identification information for identifying each frame is acquired from each frame of the error-corrected decoded video output from the decoded video error detection unit 40A. Next, information relating to the picture order and identification information are arranged in the order of frames, and the nth information (where n is an arbitrary integer satisfying n ≧ 1) among the information relating to the arranged picture order, The nth identification information among the identification information is associated with each other, and the test stream for the nth frame and the error correction decoded video for the nth frame are synchronized. According to this, a matching frame between the decoded video and the error correction decoded video is searched.

処理遅延検出部70は、次に、一致するフレームが見つかれば、それぞれのフレームが処理遅延検出部70に入力された時間差を、カウンタの単位で取得する。例えば、映像デコード部60から出力されたデコード映像の第1のフレームと、誤り訂正デコード映像の第2のフレームと、が一致する場合について、以下に説明する。この場合、処理遅延検出部70は、映像デコード部60から出力されたデコード映像の第1のフレームが入力されてから、誤り訂正デコード映像の第2のフレームが入力されるまでの時間差を、第1のフレームに該当するカウンタ情報と、第2のフレームに該当するカウンタ情報と、に基づいて求め、上述の時間差を表すカウンタ情報を取得する。   Next, when a matching frame is found, the processing delay detection unit 70 acquires a time difference in which each frame is input to the processing delay detection unit 70 in units of counters. For example, a case where the first frame of the decoded video output from the video decoding unit 60 matches the second frame of the error correction decoded video will be described below. In this case, the processing delay detection unit 70 calculates a time difference from the input of the first frame of the decoded video output from the video decoding unit 60 to the input of the second frame of the error correction decoded video. Obtained based on the counter information corresponding to one frame and the counter information corresponding to the second frame, the counter information representing the above time difference is acquired.

処理遅延検出部70は、次に、取得した時間差を表すカウンタ情報に、映像デコード部60から出力された処理時間を表すカウンタ情報を加算し、加算結果をエラー検出処理時間として出力する。これによれば、処理遅延検出部70における処理フレームごとに、この処理フレームについてのテストストリームが映像受信装置200に入力されてから、この処理フレームについてのデコード映像エラー検出部40Aからの出力が完了するまでの時間が、エラー検出処理時間として処理遅延検出部70から出力されることになる。   Next, the processing delay detection unit 70 adds the counter information indicating the processing time output from the video decoding unit 60 to the acquired counter information indicating the time difference, and outputs the addition result as an error detection processing time. According to this, for each processing frame in the processing delay detection unit 70, a test stream for this processing frame is input to the video receiving apparatus 200, and then the output from the decoded video error detection unit 40A for this processing frame is completed. The time until this is output from the processing delay detection unit 70 as the error detection processing time.

FEC性能判定部50Aは、パケットロス検出部20から出力されたリストと、デコード映像エラー検出部40Aから出力されたリストと、処理遅延検出部70から出力されたエラー検出処理時間と、を入力とする。このFEC性能判定部50Aは、FEC性能判定部50と同様に、映像受信装置200の誤り訂正機能が期待通りに動作しているか否かを判定する。ただし、FEC性能判定部50Aは、判定の際にエラー検出処理時間を考慮するという点で、FEC性能判定部50とは異なる。FEC性能判定部50Aが判定の際にエラー検出処理時間を考慮することについて、以下に詳述する。   The FEC performance determination unit 50A receives the list output from the packet loss detection unit 20, the list output from the decoded video error detection unit 40A, and the error detection processing time output from the processing delay detection unit 70. To do. Similar to the FEC performance determination unit 50, the FEC performance determination unit 50A determines whether or not the error correction function of the video reception device 200 is operating as expected. However, the FEC performance determination unit 50A is different from the FEC performance determination unit 50 in that the error detection processing time is taken into consideration in the determination. The fact that the FEC performance determination unit 50A considers the error detection processing time in the determination will be described in detail below.

本発明の第1実施形態では考慮しなかったが、映像受信装置200や、誤り訂正機能検証装置1Aに設けられた各構成では、信号が入力されてから信号を出力するまでの間で処理時間が発生する。さらに、カウンタ計測部10での処理時間や、パケットロス検出部20での処理時間と比べると、映像受信装置200でのデコードや誤り訂正による処理時間は、長くなる。このため、期待通りに誤り訂正機能が動作していれば理論的には復元可能なフレームなのか否かを認識するためのリストがパケットロス検出部20からFEC性能判定部50Aに入力されるタイミングと、映像受信装置200が実際に復元できたフレームであるか否かを認識するためのリストがデコード映像エラー検出部40からFEC性能判定部50Aに入力されるタイミングと、に時間差の生じる可能性がある。これによれば、FEC性能判定部50Aにおいて、期待通りに誤り訂正機能が動作していれば理論的には復元可能か否かを認識したフレームと、映像受信装置200が実際に復元できたか否かを認識したフレームと、にずれが生じてしまうおそれがある。   Although not considered in the first embodiment of the present invention, in each configuration provided in the video reception device 200 and the error correction function verification device 1A, the processing time from when a signal is input to when the signal is output is shown. Occurs. Furthermore, compared with the processing time in the counter measurement unit 10 and the processing time in the packet loss detection unit 20, the processing time for decoding and error correction in the video reception device 200 becomes longer. For this reason, when the error correction function is operating as expected, the timing at which a list for recognizing whether the frame is theoretically recoverable is input from the packet loss detection unit 20 to the FEC performance determination unit 50A. There is a possibility that there is a time difference between the timing at which the list for recognizing whether or not the video receiving apparatus 200 can actually restore the frame is input from the decoded video error detection unit 40 to the FEC performance determination unit 50A. There is. According to this, in the FEC performance determination unit 50A, if the error correction function is operating as expected, it is theoretically possible to restore the frame and whether or not the video reception device 200 has actually been restored. There is a risk that a difference between the frame and the recognized frame may occur.

そこで、FEC性能判定部50Aは、期待通りに誤り訂正機能が動作していれば理論的には復元可能か否かを認識したフレームと、映像受信装置200が実際に復元できたか否かを認識したフレームと、を処理遅延検出部70から出力されたエラー検出処理時間を用いて一致させた上で、上述の判定を行う。   Therefore, the FEC performance determination unit 50A recognizes whether or not the frame can be theoretically restored if the error correction function is operating as expected, and whether or not the video reception device 200 has actually been restored. The above-described determination is performed after matching the frame with the error detection processing time output from the processing delay detection unit 70.

以上の誤り訂正機能検証装置1Aによれば、誤り訂正機能検証装置1が奏することのできる上述の効果に加えて、以下の効果を奏することができる。   According to the error correction function verification apparatus 1A described above, in addition to the above-described effects that can be achieved by the error correction function verification apparatus 1, the following effects can be achieved.

誤り訂正機能検証装置1Aは、誤り訂正機能検証装置1に設けられた各構成や映像受信装置200における処理時間の差異を考慮して、期待通りに誤り訂正機能が動作していれば理論的には復元可能なフレームなのか否かの情報と、映像受信装置200が実際に復元できたフレームであるか否かの情報と、を同一フレームに対するもの同士で照らし合わせることができる。   The error correction function verification device 1A theoretically takes into account the difference in processing time between the components provided in the error correction function verification device 1 and the video reception device 200, as long as the error correction function is operating as expected. The information on whether or not it is a frame that can be restored and the information on whether or not the frame can be actually restored by the video receiving apparatus 200 can be compared with each other for the same frame.

<第3実施形態>
[誤り訂正機能検証システムCCの構成および動作]
図4は、本発明の第3実施形態に係る誤り訂正機能検証システムCCのブロック図である。誤り訂正機能検証システムCCは、図3に示した本発明の第2実施形態に係る誤り訂正機能検証システムBBとは、誤り訂正機能検証装置1Aの代わりに誤り訂正機能検証装置1Bを備える点で異なる。なお、誤り訂正機能検証システムCCにおいて、誤り訂正機能検証システムAAや誤り訂正機能検証システムBBと同一構成要件については、同一符号を付し、その説明を省略する。
<Third Embodiment>
[Configuration and operation of error correction function verification system CC]
FIG. 4 is a block diagram of an error correction function verification system CC according to the third embodiment of the present invention. The error correction function verification system CC is different from the error correction function verification system BB according to the second embodiment of the present invention shown in FIG. 3 in that an error correction function verification apparatus 1B is provided instead of the error correction function verification apparatus 1A. Different. In the error correction function verification system CC, the same components as those in the error correction function verification system AA and the error correction function verification system BB are denoted by the same reference numerals, and the description thereof is omitted.

[誤り訂正機能検証装置1Bの構成および動作]
誤り訂正機能検証装置1Bは、誤り訂正機能検証装置1、1Aと同様に、映像受信装置200に実装されている誤り訂正機能を検証する。この誤り訂正機能検証装置1Bは、誤り訂正機能検証装置1Aとは、縮小ストリーム生成部80を備える点と、デコード映像エラー検出部40Aの代わりにデコード映像エラー検出部40Bを備える点と、で異なる。
[Configuration and operation of error correction function verification apparatus 1B]
Similar to the error correction function verification apparatuses 1 and 1A, the error correction function verification apparatus 1B verifies the error correction function installed in the video reception apparatus 200. This error correction function verification device 1B differs from the error correction function verification device 1A in that it includes a reduced stream generation unit 80 and a decoding video error detection unit 40B instead of the decoded video error detection unit 40A. .

縮小ストリーム生成部80は、映像送出装置100からネットワーク300に送出される前のテストストリーム、すなわちパケットロスの発生していないテストストリームを予め保持している。この縮小ストリーム生成部80は、パケットロスの発生していないテストストリームについて解像度を縮小して、縮小テストストリームを生成する。具体的には、縮小ストリーム生成部80は、パケットロスの発生していないテストストリームをデコードした後に解像度の縮小処理を行い、その後、エンコードして、縮小テストストリームとして出力する。   The reduced stream generation unit 80 holds in advance a test stream before being transmitted from the video transmission apparatus 100 to the network 300, that is, a test stream in which no packet loss has occurred. The reduced stream generation unit 80 reduces the resolution of a test stream in which no packet loss has occurred, and generates a reduced test stream. Specifically, the reduced stream generation unit 80 performs resolution reduction processing after decoding a test stream in which no packet loss occurs, and then encodes and outputs the result as a reduced test stream.

デコード映像エラー検出部40Bは、出力映像メモリ30から出力された誤り訂正デコード映像と、縮小ストリーム生成部80から出力された縮小テストストリームと、を入力とする。このデコード映像エラー検出部40Bは、デコード映像エラー検出部40、40Aと同様に、映像受信装置200では復元できなかったと判定した誤り訂正デコード映像のフレームを示す情報のリストを生成し、生成したリストを出力する。また、デコード映像エラー検出部40Bは、デコード映像エラー検出部40Aと同様に、入力された誤り訂正デコード映像のうち上述の判定の完了したフレームの映像を、上述の判定が完了したタイミングで逐次出力する。ただし、デコード映像エラー検出部40Bは、デコード映像エラー検出部40、40Aとは、上述のリストを生成する際に、パケットロスの発生していないテストストリームの代わりに縮小テストストリームを用いるという点で異なる。デコード映像エラー検出部40Bが縮小テストストリームを用いて上述のリストを生成することについて、以下に詳述する。   The decoded video error detector 40B receives the error-corrected decoded video output from the output video memory 30 and the reduced test stream output from the reduced stream generator 80. Similar to the decoded video error detection units 40 and 40A, the decoded video error detection unit 40B generates a list of information indicating frames of error-corrected decoded video determined to be unrecoverable by the video reception device 200, and the generated list Is output. Similarly to the decoded video error detection unit 40A, the decoded video error detection unit 40B sequentially outputs the video of the frame for which the above determination is completed among the input error correction decoded video at the timing when the above determination is completed. To do. However, the decoded video error detection unit 40B is different from the decoded video error detection units 40 and 40A in that a reduced test stream is used instead of a test stream in which no packet loss occurs when the above list is generated. Different. The following describes in detail how the decoded video error detection unit 40B generates the above list using the reduced test stream.

デコード映像エラー検出部40Bは、まず、縮小テストストリームをデコードして、縮小ロスレスデコード映像を生成する。これによれば、デコード映像エラー検出部40Bで生成される縮小ロスレスデコード映像には、パケットロスに起因する映像劣化が発生していないことになる。   The decoded video error detection unit 40B first decodes the reduced test stream to generate a reduced lossless decoded video. According to this, video degradation due to packet loss does not occur in the reduced lossless decoded video generated by the decoded video error detection unit 40B.

デコード映像エラー検出部40Bは、次に、誤り訂正デコード映像に描画されている識別情報と、縮小ロスレスデコード映像に描画されている識別情報と、を比較して、同一の識別情報が描画されている誤り訂正デコード映像のフレームと縮小ロスレスデコード映像のフレームとを検出する。   Next, the decoded video error detection unit 40B compares the identification information drawn in the error correction decoded video with the identification information drawn in the reduced lossless decoded video, and the same identification information is drawn. The error-corrected decoded video frame and the reduced lossless decoded video frame are detected.

デコード映像エラー検出部40Bは、次に、誤り訂正デコード映像の特徴量をフレームごとに算出するとともに、縮小ロスレスデコード映像の特徴量をフレームごとに算出し、同一の識別情報が描画されていると検出したフレーム同士の特徴量の差分を算出する。なお、特徴量としては、例えば画素値の平均値や分散値を用いることができる。   Next, the decoded video error detection unit 40B calculates the feature amount of the error-corrected decoded video for each frame, calculates the feature amount of the reduced lossless decoded video for each frame, and the same identification information is drawn. The difference in the feature amount between the detected frames is calculated. As the feature amount, for example, an average value or a variance value of pixel values can be used.

デコード映像エラー検出部40Bは、次に、算出した特徴量の差分が閾値以下であるフレームについては、パケットロスに起因する映像劣化(ノイズなど)が生じていない、すなわち映像受信装置200で復元できた、と判定する。一方、算出した特徴量の差分が閾値より大きいフレームについては、パケットロスに起因する映像劣化が生じている、すなわち映像受信装置200では復元できなかった、と判定する。   Next, the decoded video error detection unit 40B does not cause video degradation (noise or the like) due to packet loss for frames whose calculated feature difference is equal to or less than the threshold value, that is, can be restored by the video receiving device 200. It is determined that On the other hand, for a frame in which the difference between the calculated feature amounts is larger than the threshold, it is determined that video degradation due to packet loss has occurred, that is, the video reception device 200 could not restore.

デコード映像エラー検出部40Bは、次に、パケットロスに起因する映像劣化が生じていると判定した誤り訂正デコード映像のフレーム、すなわち映像受信装置200では復元できなかったと判定した誤り訂正デコード映像のフレームを示す情報のリストを生成し、生成したリストを出力する。   Next, the decoded video error detection unit 40B determines the frame of the error-corrected decoded video that has been determined to have undergone video degradation due to packet loss, that is, the frame of the error-corrected decoded video that has been determined to be unrecoverable by the video receiver 200 Is generated, and the generated list is output.

以上の誤り訂正機能検証装置1Bによれば、誤り訂正機能検証装置1Aが奏することのできる上述の効果に加えて、以下の効果を奏することができる。   According to the error correction function verification apparatus 1B described above, in addition to the above-described effects that the error correction function verification apparatus 1A can achieve, the following effects can be achieved.

誤り訂正機能検証装置1Bは、デコード映像エラー検出部40Bは、出力映像メモリ30に記憶されている誤り訂正デコード映像と、ロスレスデコード映像よりも解像度の低い縮小ロスレスデコード映像と、を比較する。このため、誤り訂正デコード映像と比較する映像の解像度が下がるので、デコード映像エラー検出部40Bにおける処理負荷を抑制することができる。   In the error correction function verification device 1B, the decoded video error detection unit 40B compares the error correction decoded video stored in the output video memory 30 with the reduced lossless decoded video having a resolution lower than that of the lossless decoded video. For this reason, since the resolution of the video to be compared with the error correction decoded video is lowered, the processing load on the decoded video error detection unit 40B can be suppressed.

なお、本発明の誤り訂正機能検証装置1、1A、1Bの処理を、コンピュータ読み取り可能な非一時的な記録媒体に記録し、この記録媒体に記録されたプログラムを誤り訂正機能検証装置1、1A、1Bに読み込ませ、実行することによって、本発明を実現できる。   The processing of the error correction function verification device 1, 1A, 1B of the present invention is recorded on a computer-readable non-transitory recording medium, and the program recorded on this recording medium is stored in the error correction function verification device 1, 1A. 1B can be read and executed to implement the present invention.

ここで、上述の記録媒体には、例えば、EPROMやフラッシュメモリといった不揮発性のメモリ、ハードディスクといった磁気ディスク、CD−ROMなどを適用できる。また、この記録媒体に記録されたプログラムの読み込みおよび実行は、誤り訂正機能検証装置1、1A、1Bに設けられたプロセッサによって行われる。   Here, for example, a nonvolatile memory such as an EPROM or a flash memory, a magnetic disk such as a hard disk, a CD-ROM, or the like can be applied to the above-described recording medium. Further, reading and execution of the program recorded on the recording medium is performed by a processor provided in the error correction function verification device 1, 1A, 1B.

また、上述のプログラムは、このプログラムを記憶装置などに格納した誤り訂正機能検証装置1、1A、1Bから、伝送媒体を介して、あるいは、伝送媒体中の伝送波により他のコンピュータシステムに伝送されてもよい。ここで、プログラムを伝送する「伝送媒体」は、インターネットなどのネットワーク(通信網)や電話回線などの通信回線(通信線)のように情報を伝送する機能を有する媒体のことをいう。   The above-described program is transmitted from the error correction function verification apparatus 1, 1A, 1B storing the program in a storage device or the like to another computer system via a transmission medium or by a transmission wave in the transmission medium. May be. Here, the “transmission medium” for transmitting the program refers to a medium having a function of transmitting information, such as a network (communication network) such as the Internet or a communication line (communication line) such as a telephone line.

また、上述のプログラムは、上述の機能の一部を実現するためのものであってもよい。さらに、上述の機能を誤り訂正機能検証装置1、1A、1Bにすでに記録されているプログラムとの組合せで実現できるもの、いわゆる差分ファイル(差分プログラム)であってもよい。   Further, the above-described program may be for realizing a part of the above-described function. Furthermore, what can implement | achieve the above-mentioned function in combination with the program already recorded on the error correction function verification apparatus 1, 1A, 1B, what is called a difference file (difference program) may be sufficient.

以上、この発明の実施形態につき、図面を参照して詳述してきたが、具体的な構成はこの実施形態に限られるものではなく、この発明の要旨を逸脱しない範囲の設計なども含まれる。   The embodiment of the present invention has been described in detail with reference to the drawings. However, the specific configuration is not limited to this embodiment, and includes a design that does not depart from the gist of the present invention.

AA、BB、CC・・・誤り訂正機能検証システム
1、1A、1B・・・誤り訂正機能検証装置
10・・・カウンタ計測部
20・・・パケットロス検出部
30・・・出力映像メモリ
40、40A、40B・・・デコード映像エラー検出部
50、50A・・・FEC性能判定部
60・・・映像デコード部
70・・・処理遅延検出部
80・・・縮小ストリーム生成部
100・・・映像送出装置
200・・・映像受信装置
300・・・ネットワーク
AA, BB, CC ... error correction function verification system 1, 1A, 1B ... error correction function verification device 10 ... counter measurement unit 20 ... packet loss detection unit 30 ... output video memory 40, 40A, 40B ... Decoded video error detection unit 50, 50A ... FEC performance determination unit 60 ... Video decoding unit 70 ... Processing delay detection unit 80 ... Reduced stream generation unit 100 ... Video transmission Device 200 ... Video receiving device 300 ... Network

Claims (11)

映像受信装置の誤り訂正機能を検証する誤り訂正機能検証装置であって、
前記映像受信装置に入力されるテストストリームをキャプチャして、当該テストストリームのカウンタ情報を取得するカウンタ計測手段と、
前記カウンタ計測手段により取得されたカウンタ情報に基づいて、前記映像受信装置に入力されるテストストリームにおけるパケットロスを検知し、検知したパケットロスの発生している箇所を前記映像受信装置が復元可能であるか否かを検出するパケットロス検出手段と、
前記映像受信装置が入力されたテストストリームをデコードして得られたデコード映像を、誤り訂正デコード映像として記憶する出力映像記憶手段と、
前記出力映像記憶手段に記憶されている誤り訂正デコード映像と、パケットロスの発生していない前記テストストリームをデコードして得られたロスレスデコード映像と、を比較して、前記映像受信装置に入力されたテストストリームのうち、パケットロスに対して当該映像受信装置では復元できなかった箇所を検出するデコード映像エラー検出手段と、
前記パケットロス検出手段による検出結果と、前記デコード映像エラー検出手段による検出結果と、に基づいて、前記誤り訂正機能が期待通りに動作しているか否かを判定する誤り訂正性能判定手段と、を備えることを特徴とする誤り訂正機能検証装置。
An error correction function verification device for verifying an error correction function of a video reception device,
Counter measurement means for capturing a test stream input to the video receiver and obtaining counter information of the test stream;
Based on the counter information acquired by the counter measurement means, the packet loss can be detected in the test stream input to the video reception device, and the video reception device can restore the location where the detected packet loss has occurred. Packet loss detection means for detecting whether or not there is,
Output video storage means for storing the decoded video obtained by decoding the test stream input by the video receiver as an error-corrected decoded video;
The error correction decoded video stored in the output video storage means and the lossless decoded video obtained by decoding the test stream without packet loss are compared and input to the video receiving device. Decoded video error detection means for detecting a portion of the test stream that could not be restored by the video reception device for packet loss,
Error correction performance determination means for determining whether or not the error correction function is operating as expected based on the detection result by the packet loss detection means and the detection result by the decoded video error detection means; An error correction function verification device comprising:
各フレームを識別するための識別情報を、画像として各フレームの画像に描画して、前記テストストリームを生成することを特徴とする請求項1に記載の誤り訂正機能検証装置。   2. The error correction function verification device according to claim 1, wherein the test stream is generated by drawing identification information for identifying each frame as an image on an image of each frame. 前記識別情報として、通し番号と、各フレームの時刻情報と、のうちいずれかを用いることを特徴とする請求項2に記載の誤り訂正機能検証装置。   The error correction function verification apparatus according to claim 2, wherein any one of a serial number and time information of each frame is used as the identification information. 前記カウンタ計測手段は、前記テストストリームのカウンタ情報として、RTPパケットのヘッダに記載されているRTPカウンタを用いることを特徴とする請求項1から3のいずれかに記載の誤り訂正機能検証装置。   4. The error correction function verification device according to claim 1, wherein the counter measurement unit uses an RTP counter described in a header of an RTP packet as counter information of the test stream. 前記デコード映像エラー検出手段は、
前記出力映像記憶手段に記憶されている誤り訂正デコード映像の画素値をフレームごとに求めるとともに、前記ロスレスデコード映像の画素値をフレームごとに求め、
前記誤り訂正デコード映像の各フレームの画素値と、前記ロスレスデコード映像のうち当該誤り訂正デコード映像のフレームに対応するフレームの画素値と、を比較して、前記映像受信装置に入力されたテストストリームのうち、パケットロスに対して当該映像受信装置では復元できなかった箇所を検出することを特徴とする請求項1から4のいずれかに記載の誤り訂正機能検証装置。
The decoded video error detection means includes
The pixel value of the error correction decoded video stored in the output video storage means is determined for each frame, and the pixel value of the lossless decoded video is determined for each frame,
The test stream input to the video receiver by comparing the pixel value of each frame of the error-corrected decoded video with the pixel value of the frame corresponding to the frame of the error-corrected decoded video of the lossless decoded video 5. The error correction function verification device according to claim 1, wherein a portion that cannot be restored by the video reception device is detected for packet loss.
パケットロスの発生していない前記テストストリームについて解像度を縮小して、縮小テストストリームを生成する縮小ストリーム生成手段を備え、
前記デコード映像エラー検出手段は、前記ロスレスデコード映像の代わりに、前記縮小ストリーム生成手段により生成された前記縮小テストストリームをデコードして得られた縮小ロスレスデコード映像を用いることを特徴とする請求項1から4のいずれかに記載の誤り訂正機能検証装置。
A reduced stream generating means for reducing the resolution of the test stream in which no packet loss occurs and generating a reduced test stream;
2. The decoded video error detecting unit uses a reduced lossless decoded video obtained by decoding the reduced test stream generated by the reduced stream generating unit, instead of the lossless decoded video. To 4. The error correction function verification device according to any one of 4 to 4.
前記デコード映像エラー検出手段は、
前記出力映像記憶手段に記憶されている誤り訂正デコード映像の特徴量をフレームごとに求めるとともに、前記縮小ロスレスデコード映像の特徴量をフレームごとに求め、
前記誤り訂正デコード映像の各フレームの特徴量と、前記縮小ロスレスデコード映像のうち当該誤り訂正デコード映像のフレームに対応するフレームの特徴量と、を比較して、前記映像受信装置に入力されたテストストリームのうち、パケットロスに対して当該映像受信装置では復元できなかった箇所を検出することを特徴とする請求項6に記載の誤り訂正機能検証装置。
The decoded video error detection means includes
Obtaining the feature quantity of the error-corrected decoded video stored in the output video storage means for each frame, and obtaining the feature quantity of the reduced lossless decoded video for each frame;
The feature amount of each frame of the error-corrected decoded video is compared with the feature amount of the frame corresponding to the frame of the error-corrected decoded video in the reduced lossless decoded video, and the test input to the video receiving device The error correction function verification device according to claim 6, wherein a portion of the stream that cannot be restored by the video reception device due to packet loss is detected.
前記デコード映像エラー検出手段は、特徴量として、フレーム内の画素値の平均値を用いることを特徴とする請求項7に記載の誤り訂正機能検証装置。   8. The error correction function verification apparatus according to claim 7, wherein the decoded video error detection unit uses an average value of pixel values in a frame as a feature amount. 処理フレームについてのテストストリームが前記映像受信装置に入力されてから、当該処理フレームについての前記デコード映像エラー検出手段による検出が完了するまでの時間を検出する処理遅延検出手段を備え、
前記誤り訂正性能判定手段は、前記処理遅延検出手段により検出された時間に基づいて、前記パケットロス検出手段による検出結果が得られたフレームと、前記デコード映像エラー検出手段による検出結果が得られたフレームと、を一致させ、同一フレームについての前記パケットロス検出手段および前記デコード映像エラー検出手段による検出結果に基づいて、前記誤り訂正機能が期待通りに動作しているか否かを判定することを特徴とする請求項1から8のいずれかに記載の誤り訂正機能検証装置。
A processing delay detection unit for detecting a time from when a test stream for a processing frame is input to the video reception device until detection by the decoded video error detection unit for the processing frame is completed;
The error correction performance determination means has obtained the detection result by the packet loss detection means and the detection result by the decoded video error detection means based on the time detected by the processing delay detection means. And determining whether or not the error correction function is operating as expected based on the detection results of the packet loss detection means and the decoded video error detection means for the same frame. The error correction function verification device according to claim 1.
前記処理遅延検出手段は、
前記テストストリームに記載されているピクチャ順序に関する情報と、前記出力映像記憶手段に記憶されている誤り訂正デコード映像の各フレームから読み取ることができる識別情報と、のそれぞれをフレーム順に並べ、
並べた前記ピクチャ順序に関する情報のうちn番目の情報(ただし、nは、n≧1を満たす任意の整数)と、並べた前記識別情報のうちn番目の識別情報と、を対応付けて、nフレーム目についてのテストストリームと、前記出力映像記憶手段に記憶されているnフレーム目の誤り訂正デコード映像と、を同期させることを特徴とする請求項9に記載の誤り訂正機能検証装置。
The processing delay detection means includes
Each of the information related to the picture order described in the test stream and the identification information that can be read from each frame of the error correction decoded video stored in the output video storage means are arranged in the order of the frames,
The n-th information (where n is an arbitrary integer satisfying n ≧ 1) in the information relating to the arranged picture order is associated with the n-th identification information in the arranged identification information, and n 10. The error correction function verification apparatus according to claim 9, wherein a test stream for the frame and an error correction decoded video of the nth frame stored in the output video storage means are synchronized.
前記誤り訂正性能判定手段は、
前記パケットロス検出手段により復元可能であると検出された箇所について、前記デコード映像エラー検出手段により前記映像受信装置では復元できなかった箇所ではないと検出された場合に、当該箇所について前記誤り訂正機能が期待通りに動作していると判定するとともに、
前記パケットロス検出手段により復元不可能であると検出された箇所について、前記デコード映像エラー検出手段により前記映像受信装置では復元できなかった箇所であると検出された場合に、当該箇所について前記誤り訂正機能が期待通りに動作していると判定することを特徴とする請求項1から10のいずれかに記載の誤り訂正機能検証装置。
The error correction performance determination means includes
When the portion detected as recoverable by the packet loss detection means is detected by the decoded video error detection means as not being a portion that could not be restored by the video reception device, the error correction function for the location is detected. Is working as expected,
When the portion detected as unrecoverable by the packet loss detection means is detected by the decoded video error detection means as a portion that could not be restored by the video receiver, the error correction is performed for the portion. The error correction function verification apparatus according to claim 1, wherein the function is determined to be operating as expected.
JP2015023056A 2015-02-09 2015-02-09 Error correction function verification device Pending JP2016146571A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2015023056A JP2016146571A (en) 2015-02-09 2015-02-09 Error correction function verification device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2015023056A JP2016146571A (en) 2015-02-09 2015-02-09 Error correction function verification device

Publications (1)

Publication Number Publication Date
JP2016146571A true JP2016146571A (en) 2016-08-12

Family

ID=56686493

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2015023056A Pending JP2016146571A (en) 2015-02-09 2015-02-09 Error correction function verification device

Country Status (1)

Country Link
JP (1) JP2016146571A (en)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108965934A (en) * 2017-05-27 2018-12-07 华为技术有限公司 A kind of fault detection method, monitoring device and the network equipment
CN114285472A (en) * 2021-12-20 2022-04-05 北京邮电大学 UPSOOK modulation method with forward error correction based on mobile phone camera

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108965934A (en) * 2017-05-27 2018-12-07 华为技术有限公司 A kind of fault detection method, monitoring device and the network equipment
US11968422B2 (en) 2017-05-27 2024-04-23 Huawei Technologies Co., Ltd. Video stream fault detection
CN114285472A (en) * 2021-12-20 2022-04-05 北京邮电大学 UPSOOK modulation method with forward error correction based on mobile phone camera

Similar Documents

Publication Publication Date Title
KR102025757B1 (en) method and apparatus for transmitting and receiving data and medium thereof
JP5970724B2 (en) Method and apparatus for obtaining video encoding compression quality
WO2013108566A1 (en) Video reception terminal, home gateway device, quality management system, and quality deterioration isolation system
US10306239B2 (en) Methods, source device, target device and analyser for managing video coding
JP6743192B2 (en) Video service quality evaluation method and apparatus
JP5099371B2 (en) Image quality evaluation method, image quality evaluation apparatus, and image quality evaluation program
EP2622819B1 (en) Determining loss of ip packets
US20150326884A1 (en) Error Detection and Mitigation in Video Channels
JP2016146571A (en) Error correction function verification device
US20150189331A1 (en) Image data communication method and image data communication device
KR102392888B1 (en) Method and Apparatus for Improving Packet Loss Recovery
KR101760018B1 (en) Image data communication method and image data communication device
US9484040B2 (en) Audio decoding method and associated apparatus
CN110601971B (en) Data transmission method and device, electronic equipment and storage medium
KR20170072788A (en) Apparatus and method for estimating packet loss based on machine learning
JP2013013003A (en) Data processing device, data processing method and data processing program
JP2015082842A (en) Closed caption inspection system and method
KR102350570B1 (en) Set-Top Box for Measuring Frame Loss in a Video Stream and Method for Operating Same
JP5939884B2 (en) Error correction coding device
JP5474896B2 (en) Video error detection technology using CRC parity code
US20080095243A1 (en) H.264 decoding method and device for detection of NAL-unit error
CN112825562A (en) Video frame compensation method and device and video processing chip
JP2016119557A (en) Video transmission device and program
JP2011019127A (en) Image quality evaluation device, image quality evaluation method, and program for them
JP5538762B2 (en) Information processing apparatus and information processing method