KR20150081924A - 양안식 3차원 영상의 에러 처리 장치 및 방법 - Google Patents

양안식 3차원 영상의 에러 처리 장치 및 방법 Download PDF

Info

Publication number
KR20150081924A
KR20150081924A KR1020140001916A KR20140001916A KR20150081924A KR 20150081924 A KR20150081924 A KR 20150081924A KR 1020140001916 A KR1020140001916 A KR 1020140001916A KR 20140001916 A KR20140001916 A KR 20140001916A KR 20150081924 A KR20150081924 A KR 20150081924A
Authority
KR
South Korea
Prior art keywords
image
error
output
dimensional
occurred
Prior art date
Application number
KR1020140001916A
Other languages
English (en)
Inventor
이주영
김성훈
최진수
김진웅
Original Assignee
한국전자통신연구원
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 한국전자통신연구원 filed Critical 한국전자통신연구원
Priority to KR1020140001916A priority Critical patent/KR20150081924A/ko
Publication of KR20150081924A publication Critical patent/KR20150081924A/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/144—Processing image signals for flicker reduction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/158—Switching image signals

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)

Abstract

3차원 영상의 에러를 처리하는 장치 및 방법이 개시된다.
3차원 영상의 에러 처리 장치는 좌 영상 및 우 영상을 수신하는 단계; 좌 영상 및 우 영상의 에러 발생 여부를 판단하는 단계; 및 에러가 발생한 것으로 판단된 좌 영상 및 우 영상을 에러가 발생하지 않은 것으로 판단되지 않은 좌 영상 및 우 영상으로 교체하여 출력하는 단계를 포함할 수 있다.

Description

양안식 3차원 영상의 에러 처리 장치 및 방법{APPARATUS AND METHOD FOR PROCESSING AN ERROR OF STEREOSCOPIC 3D VIDEO}
본 발명은 양안식 3차원 영상의 에러 처리 장치 및 방법에 관한 것으로, 보다 상세하게는 양안식 3차원 영상의 에러 여부를 판단하고, 에러가 발생한 영상을 처리하여 출력하는 장치 및 방법에 관한 것이다.
양안식 3차원 영상은 좌 영상과 우 영상으로 구성된다. 따라서, 양안식 3차원 TV 방송 서비스를 제공할 경우, 방송 시스템은 두 개의 영상을 송출해야 한다. 그리고, 양안식 3D 방송은 송출하는 영상의 개수가 두 배로 증가함에 따라 종래의 2차원 방송에 비해 에러가 발생할 확률도 두 배로 증가할 수 있다. 더구나, 양안식 3D 방송은 좌 영상과 우 영상 중 하나에 에러가 발생할 경우, 좌우 비대칭 영상이 발생하여 2차원 방송보다 시각 피로도가 현저히 높아질 수 있다.
따라서, 좌우 비대칭 영상의 발생을 방지할 수 있는 방법이 요청되고 있다.
본 발명은 좌 영상 또는 우 영상의 에러로 인한 비대칭 영상이 발생하여 양안식 3차원 영상을 시청하는 사용자의 피로도 증가를 방지하는 장치 및 방법을 제공할 수 있다.
본 발명의 일실시예에 따른 3차원 영상의 에러 처리 방법은 좌 영상 및 우 영상을 수신하는 단계; 좌 영상 및 우 영상의 에러 발생 여부를 판단하는 단계; 및 에러가 발생한 것으로 판단된 좌 영상 및 우 영상을 에러가 발생하지 않은 것으로 판단되지 않은 좌 영상 및 우 영상으로 교체하여 출력하는 단계를 포함할 수 있다.
본 발명의 일실시예에 의하면, 좌 영상과 우 영상에 에러가 발생하였는지 여부에 따라 좌 영상 및 우 영상을 처리하여 출력함으로써, 비대칭 영상의 발생을 방지할 수 있다.
도 1은 본 발명의 일실시예에 따른 3차원 영상의 에러 처리 장치를 나타내는 도면이다.
도 2는 본 발명의 일실시예에 따른 3차원 영상의 에러 처리 과정의 제1 실시예이다.
도 3은 본 발명의 일실시예에 따른 3차원 영상의 에러 처리 과정의 제2 실시예이다.
도 4는 본 발명의 일실시예에 따른 3차원 영상의 에러 처리 과정의 제3 실시예이다.
도 5는 본 발명의 일실시예에 따른 3차원 영상의 에러 처리 방법을 도시한 플로우차트이다.
이하, 본 발명의 실시예를 첨부된 도면을 참조하여 상세하게 설명한다. 본 발명의 일실시예에 따른 3차원 영상의 에러 처리 방법은 3차원 영상의 에러 처리 장치에 의해 수행될 수 있다.
도 1은 본 발명의 일실시예에 따른 3차원 영상의 에러 처리 장치를 나타내는 도면이다.
도 1을 참고하면, 본 발명의 일실시예에 따른 3차원 영상의 에러 처리 장치(100)는 영상 수신부(110), 에러 판단부(120) 및 영상 출력부(130)를 포함할 수 있다.
영상 수신부(110)는 3차원 영상을 재현하기 위한 좌 영상 및 우 영상을 수신할 수 있다.
이때, 영상 수신부(110)는 동일한 네트워크 망을 통하여 좌 영상과 우 영상을 수신할 수 있다. 예를 들어, 영상 수신부(110)는 IP(Internet Protocol) 네트워크 망, 지상파 방송망, 위성 방송망, 케이블 방송망, IPTV(Internet Protocol Television) 방송망, NRT(Non - Real Time) 방송망, 모바일 방송망 중 하나를 통하여 좌 영상과 우 영상을 수신할 수 있다. 이때, 좌 영상과 우 영상은 지상파 방송망의 동일한 물리주파수 내에서 하나의 MPEG-2 TS 스트림으로 다중화되어 전송될 수 있다.
또한, 영상 수신부(110)는 서로 다른 네트워크 망을 통하여 좌 영상과 우 영상을 각각 수신할 수도 있다. 예를 들어, 영상 수신부(110)는 지상파 방송망을 통하여 좌 영상을 수신하고, 모바일 방송망 또는 IP 네트워크 망을 통하여 우 영상을 수신할 수도 있다.
에러 판단부(120)는 영상 수신부(110)가 수신한 좌 영상 및 우 영상의 에러 발생 여부를 판단할 수 있다. 이때, 에러 판단부(120)는 좌 영상 및 우 영상의 물리 계층, 트랜스 포트 계층, 및 어플리케이션 계층 중 적어도 하나에 에러가 발생하였는지 여부를 판단할 수 있다.
좌 영상 및 우 영상의 물리 계층에는 블록 부호 (block code) 및 트렐리스 부호 (Trellis code)를 이용하여 에러 정정을 위한 에러 정정 부호가 삽입될 수 있다. 예를 들어, 해밍(Hamming) 부호, BCH(block control header) 부호, 리드 뮬러(Reed-Muller) 부호, 리드 솔로몬(Reed-Solomon) 부호 중 하나가 블록 부호로 이용될 수 있다. 또한, 길쌈부호 (Convolutional code)가 트렐리스 부호로 이용될 수 있다. 이때, 각 부호 별로 에러 복구 방식은 상이할 수 있다. 또한, 좌 영상 및 우 영상의 부호율에 따라 에러 정정 부호로 복구 가능한 비트의 비율이 달라질 수 있다.
이때, 에러 판단부(120)는 좌 영상 및 우 영상의 물리 계층에 삽입된 에러 정정 부호를 이용하여 좌 영상과 우 영상의 물리 계층 에러를 복구할 수 있다. 즉, 에러 판단부(120)는 좌 영상, 또는 우 영상에서 에러 정정 부호를 이용하여 복구 가능한 개수의 비트에 에러가 발생한 경우, 좌 영상, 또는 우 영상에서 에러가 발생한 것으로 판단하지 않을 수 있다. 그리고, 에러 판단부(120)는 좌 영상, 또는 우 영상 중에서 에러 정정 부호로 복구 가능한 비트의 개수 이상의 에러가 발생한 경우, 해당 영상에 물리 계층의 에러가 발생한 것으로 판단할 수 있다.
에러 판단부(120)는 좌 영상 및 우 영상의 트랜스 포트 계층에서 패킷 손실 에러, 또는 CRC(Cyclic Redundancy Checks) 에러가 발생하였는지 여부를 판단할 수 있다.
이때, 에러 판단부(120)는 좌 영상 및 우 영상을 포함하는 패킷들의 패킷 시퀀스 번호의 연속성을 확인하여 패킷 손실 여부를 검증할 수 있다. 또한, 에러 판단부(120)는 패킷 규격에 따라 패킷 시퀀스 번호와는 다른 정보를 이용하여 패킷 손실 여부를 검증할 수도 있다. 예를 들어, 에러 판단부(120)는 TS(Transport Stream) 헤더의 "Continuity Counter" 필드 값의 연속성을 검증하여 MPEG-2 TS 패킷의 패킷 손실 여부를 판단할 수 있다. 또한, 에러 판단부(120)는 MMT(MPEG Media Transport) 패킷 헤더의 "packet_sequence_number"를 이용하여 MMT의 패킷 손실 여부를 판단할 수도 있다.
또한, 에러 판단부(120)는 패킷 레벨의 CRC 에러를 이용하여 수신한 패킷의 페이로드 부분에 전송 에러가 없는지를 체크할 수도 있다. 예를 들어, MPEG-2(moving pictures exports group-2) 시스템의 PES(Packetized Elementary Stream)의 경우 PES 헤더를 통해 직전에 전송된 패킷 내 페이로드에 대한 CRC 정보를 전송할 수 있다. 이때, 에러 판단부(120)는 수신한 CRC 정보를 이용하여 직전에 전송된 패킷 내 페이로드 부분에 전송 에러가 없는지를 체크할 수도 있다.
에러 판단부(120)는 손실되거나 에러가 발생한 데이터에 대한 재전송이 불가능하여 정상적인 영상의 출력이 불가능한 경우, 해당 영상에 트랜스포트 계층의 에러가 발생한 것으로 판단할 수 있다.
좌 영상 및 우 영상의 어플리케이션 계층에는 좌 영상 및 우 영상을 전송하는 스트림의 강인성을 높이기 위한 에러 정정 부호가 포함될 수 있다.
예를 들어, 좌 영상 및 우 영상이 MMT를 이용하여 전송되는 경우, 좌 영상 및 우 영상의 어플리케이션 계층에는 AL-FEC (Application Layer forward error correction) 부호를 이용하여 RS(Reed?olomon error correction) 부호, S-LDPC(Structured Low-density parity-check codes)부호, RaptorQ LA(Layer-Aware RaptorQ) 부호, LDGM(low density generator matrix) 부호, 및 SMPTE FEC(forward error correction) 부호 중 적어도 하나가 에러 정정 부호로 포함될 수 있다. 또한, 좌 영상 및 우 영상이 FLUTE과 같은 파일 전송 프로토콜로 전송되는 경우, 좌 영상 및 우 영상의 어플리케이션 계층에는 다양한 FEC 알고리즘을 적용할 수 있는 FEC Block 규격의 에러 정정 부호가 포함될 수 있다.
이때, 에러 판단부(120)는 좌 영상 및 우 영상의 어플리케이션 계층에 삽입된 에러 정정 부호를 이용하여 좌 영상과 우 영상의 어플리케이션 계층 에러를 복구할 수 있다. 그리고, 좌 영상, 또는 우 영상 중에서 에러 정정 부호로 복구 가능한 비트의 개수 이상의 에러가 발생한 경우, 해당 영상에 에러가 발생한 것으로 판단할 수 있다.
즉, 에러 판단부(120)는 좌 영상, 또는 우 영상에서 에러 정정 부호를 이용하여 복구 가능한 수중의 에러가 발생한 경우, 좌 영상, 또는 우 영상에서 에러가 발생한 것으로 판단하지 않을 수 있다. 그리고, 에러 판단부(120)는 좌 영상, 또는 우 영상 중에서 에러 정정 부호로 복구할 수 없는 수준의 에러가 발생한 경우, 해당 영상에 어플리케이션 계층의 에러가 발생한 것으로 판단할 수 있다.
영상 출력부(130)는 에러 판단부(120)에서 에러가 발생한 것으로 판단된 좌 영상 및 우 영상을 에러가 발생하지 않은 것으로 판단되지 않은 좌 영상 및 우 영상으로 교체하여 출력할 수 있다.
에러 판단부(120)가 좌 영상과 우 영상에서 모두 에러가 발생하지 않았다고 판단한 경우, 영상 출력부(130)는 영상 수신부(110)가 수신한 좌 영상과 우 영상을 변화 없이 출력하여 3차원 영상을 재현할 수 있다.
에러 판단부(120)가 좌 영상과 우 영상 중 하나에서 에러가 발생했다고 판단한 경우, 영상 출력부(130)는 좌 영상과 우 영상에서 모두 에러가 발생하지 않은 구간 중에서 가장 최근에 출력한 좌 영상과 우 영상을 검색할 수 있다. 그리고, 영상 출력부(130)는 에러가 발생했다고 판단한 좌 영상 및 우 영상을 검색한 좌 영상과 우 영상으로 교체하여 출력할 수 있다.
또한, 영상 출력부(130)는 좌 영상과 우 영상 중에서 에러가 발생한 영상을 에러가 발생하지 않은 좌 영상 및 우 영상으로 교체하여 출력할 수 있다. 예를 들어, 좌 영상에서 에러가 발생한 경우, 영상 출력부(130)는 좌 영상을 우 영상으로 교체하여 출력할 수 있다.
그리고, 영상 출력부(130)는 좌 영상과 우 영상 중에서 에러가 발생하지 않은 좌 영상 또는 우 영상을 2D 영상으로 출력할 수도 있다.
에러 판단부(120)가 좌 영상과 우 영상에서 모두 에러가 발생했다고 판단한 경우, 영상 출력부(130)는 좌 영상과 우 영상에서 에러가 발생하지 않은 구간 중에서 가장 최근에 출력한 좌 영상과 우 영상을 검색할 수 있다. 그리고, 영상 출력부(130)는 에러가 발생했다고 판단한 좌 영상 및 우 영상을 검색한 좌 영상과 우 영상으로 교체하여 출력할 수 있다.
도 2는 본 발명의 일실시예에 따른 3차원 영상의 에러 처리 과정의 제1 실시예이다.
도 2는 좌 영상과 우 영상 중 우 영상의 일부에서 에러가 발생한 경우, 3차원 영상의 에러 처리 장치(100)가 출력하는 영상의 일례이다.
3차원 영상의 에러 처리 장치(100)가 수신한 좌 영상(210)와 우 영상(220)에 에러가 발생한 우 영상(221)이 포함될 수 있다.
이때, 3차원 영상의 에러 처리 장치(100)는 케이스 1(case 1), 케이스 2(case 2) 및 케이스 3(case 3) 중 하나의 방법으로 영상을 출력할 수 있다.
케이스 1에서 3차원 영상의 에러 처리 장치(100)는 에러가 발생한 우 영상(221) 이전의 좌 영상과 우 영상 중에서 가장 최근에 수신한 좌 영상 L1과 우 영상 R1을 검색할 수 있다. 그리고, 3차원 영상의 에러 처리 장치(100)는 케이스 1에 도시된 바와 같이 에러가 발생한 우 영상(221)이 출력될 구간(230)을 좌 영상 L1과 우 영상 R1으로 교체하여 출력함으로써, 에러가 발생한 우 영상(221)에 의한 좌우 비대칭 영상이 발생하는 것을 방지할 수 있다.
케이스 2와 케이스 3에서 3차원 영상의 에러 처리 장치(100)는 에러가 발생한 우 영상(221)이 출력될 구간을 2차원 영상으로 전환하여 출력하고, 에러가 발생하지 않은 좌 영상 L5와 우 영상 R5는 다시 3차원 영상으로 전환하여 출력할 수 있다. 이때, 케이스 2는 좌 영상과 우 영상을 동일한 영상으로 출력함으로써, 3차원 영상과 2차원 영상간의 변화를 매끄럽게 처리하는 실시예일 수 있다. 또한, 케이스 3은 영상 출력 모드를 3차원 영상과 2차원 영상으로 변화시켜 처리하는 실시예일 수 있다.
케이스 2에서 3차원 영상의 에러 처리 장치(100)는 에러가 발생한 우 영상(221)에 대응하며 에러가 발생하지 않은 좌 영상(211)를 식별할 수 있다. 그리고, 3차원 영상의 에러 처리 장치(100)는 케이스 2에 도시된 바와 같이 에러가 발생한 우 영상(221)인 R2 내지 R4를 에러가 발생하지 않은 좌 영상(211)인 L2 내지 L4 로 교체하여 출력함으로써, 3차원 영상과 2차원 영상간의 변화를 매끄럽게 처리할 수 있다.
케이스 3에서 3차원 영상의 에러 처리 장치(100)는 에러가 발생한 우 영상(221)에 대응하며 에러가 발생하지 않은 좌 영상(211)를 식별할 수 있다. 그리고, 3차원 영상의 에러 처리 장치(100)는 케이스 3에 도시된 바와 같이 에러가 발생한 우 영상(221)이 출력될 구간(240)에서 영상 출력 모드를 2차원 영상 출력 모드로 전환하고, 에러가 발생하지 않은 좌 영상(211)인 L2 내지 좌 영상 L4을 2차원 영상으로 출력할 수 있다. 또한, 에러가 발생하지 않은 좌 영상 L5와 우 영상 R5을 수신한 경우, 3차원 영상의 에러 처리 장치(100)는 영상 출력 모드를 3차원 영상 출력 모드로 전환하고, 수신한 좌 영상 L5와 우 영상 R5을 출력할 수 있다.
도 3은 본 발명의 일실시예에 따른 3차원 영상의 에러 처리 과정의 제2 실시예이다.
도 3은 좌 영상과 우 영상에서 모두 에러가 발생한 경우, 3차원 영상의 에러 처리 장치(100)가 출력하는 영상의 일례이다.
3차원 영상의 에러 처리 장치(100)가 수신한 좌 영상(210)와 우 영상(220) 중 일부 구간(300)에서 에러가 발생할 수 있다.
이때, 3차원 영상의 에러 처리 장치(100)는 3차원 영상의 에러 처리 장치(100)는 구간(300) 이전의 좌 영상과 우 영상 중에서 가장 최근에 수신한 좌 영상 L1과 우 영상 R1을 검색할 수 있다. 그리고, 3차원 영상의 에러 처리 장치(100)는 케이스 1에 도시된 바와 같이 에러가 발생한 구간(300)을 검색한 좌 영상 L1과 우 영상 R1으로 교체하여 출력함으로써, 에러가 발생한 구간(300)에서 일그러진 영상을 출력하는 것을 방지할 수 있다.
도 4는 본 발명의 일실시예에 따른 3차원 영상의 에러 처리 과정의 제3 실시예이다.
도 4는 좌 영상과 우 영상 중 하나의 영상에서 에러가 발생한 한쪽 영상 에러 구간과 좌 영상과 우 영상에서 모두 에러가 발생하는 양쪽 영상 에러 구간이 연속되는 경우, 3차원 영상의 에러 처리 장치(100)가 출력하는 영상의 일례이다.
3차원 영상의 에러 처리 장치(100)가 수신한 좌 영상(410)와 우 영상(420)에 에러가 발생한 우 영상(421)과 에러가 발생한 좌 영상(411)이 포함될 수 있다.
이때, 3차원 영상의 에러 처리 장치(100)는 케이스 1(case 1), 케이스 2(case 2) 및 케이스 3(case 3) 중 하나의 방법으로 영상을 출력할 수 있다.
케이스 1에서 3차원 영상의 에러 처리 장치(100)는 에러가 발생한 우 영상 (421) 이전의 좌 영상과 우 영상 중에서 가장 최근에 수신한 좌 영상 L1과 우 영상 R1을 검색할 수 있다. 그리고, 3차원 영상의 에러 처리 장치(100)는 케이스 1에 도시된 바와 같이 에러가 발생한 우 영상(421)이 출력될 구간(430)을 좌 영상 L1과 우 영상 R1으로 교체하여 출력함으로써, 에러가 발생한 우 영상(421)에 의한 좌우 비대칭 영상이 발생하는 것을 방지할 수 있다.
케이스 2와 케이스 3에서 3차원 영상의 에러 처리 장치(100)는 에러가 발생한 우 영상(421)이 출력될 구간을 2차원 영상으로 전환하여 출력하고, 에러가 발생하지 않은 좌 영상 L5와 우 영상 R5는 다시 3차원 영상으로 전환하여 출력할 수 있다. 이때, 케이스 2는 좌 영상과 우 영상을 동일한 영상으로 출력함으로써, 3차원 영상과 2차원 영상간의 변화를 매끄럽게 처리하는 실시예일 수 있다. 또한, 케이스 3은 영상 출력 모드를 3차원 영상과 2차원 영상으로 변화하여 처리하는 실시예일 수 있다.
케이스 2에서 3차원 영상의 에러 처리 장치(100)는 에러가 발생한 우 영상 (421) 중에서 대응하는 좌 영상(410)에 에러가 발생하지 않은 우 영상(422)과 대응하는 좌 영상(410)에서도 에러가 발생한 우 영상(423)을 구분할 수 있다.
다음으로, 3차원 영상의 에러 처리 장치(100)는 케이스 2에 도시된 바와 같이 우 영상(422)인 R2 내지 R3을 우 영상(422)에 대응하는 좌 영상(410)인 L2 내지 L3으로 교체하여 출력할 수 있다.
그리고, 우 영상(423)은 우 영상(423)에 대응하는 좌 영상이 에러가 발생한 좌 영상(411)이므로, 좌 영상으로 우 영상(423)을 교체할 수 없다.
따라서, 3차원 영상의 에러 처리 장치(100)는 케이스 2에 도시된 바와 같이 에러가 발생하지 않은 좌 영상 중 가장 최근에 출력한 좌 영상 L3으로 에러가 발생한 좌 영상(411)가 출력될 구간(431)을 교체할 수 있다. 또한, 3차원 영상의 에러 처리 장치(100)는 좌 영상 L3으로 우 영상(423)을 교체할 수도 있다.
케이스 3에서 3차원 영상의 에러 처리 장치(100)는 에러가 발생한 우 영상 (421) 중에서 대응하는 좌 영상(410)에 에러가 발생하지 않은 우 영상(422)과 대응하는 좌 영상(410)에서도 에러가 발생한 우 영상(423)을 구분할 수 있다.
그리고, 3차원 영상의 에러 처리 장치(100)는 케이스 3에 도시된 바와 같이 영상 출력 모드를 2차원 영상 출력 모드로 전환하고, 우 영상(422)이 출력될 구간(440)에서 우 영상(422)에 대응하는 좌 영상인 L2 내지 L3을 2차원 영상으로 출력할 수 있다.
또한, 에러가 발생한 좌 영상(411)과 우 영상(423)이 출력될 구간(441)은 좌 영상과 우 영상에서 모두 에러가 발생하였으므로, 좌 영상 및 우 영상을 서로 교체할 수 없다. 따라서, 3차원 영상의 에러 처리 장치(100)는 케이스 3에 도시된 바와 같이 에러가 발생하지 않은 좌 영상 중 가장 최근에 출력한 좌 영상 L3으로 에러가 발생한 좌 영상(411)과 우 영상(423)이 출력될 구간(441)을 교체할 수 있다.
마지막으로 에러가 발생하지 않은 좌 영상 L5와 우 영상 R5을 수신한 경우, 3차원 영상의 에러 처리 장치(100)는 영상 출력 모드를 3차원 영상 출력 모드로 전환하고, 수신한 좌 영상 L5와 우 영상 R5을 출력할 수 있다.
좌 영상과 우 영상 중 한 쪽 영상에 에러 구간이 존재하는 실시예와 좌 영상과 우 영상에 모두 에러 공간이 존재하는 실시예 및 한쪽 영상 에러 구간과 양쪽 영상 에러 구간이 연속되는 실시예는 도 2, 도 3, 및 도 4에 도시된 실시예 이외에도 다양하게 발생할 수 있다..
좌 영상과 우 영상 중 한 쪽 영상에 에러 구간이 존재하는 경우, 3차원 영상의 에러 처리 장치(100)는 가장 최근에 정상적으로 수신한 좌우 영상을 대체 3차원 영상으로 출력하거나, 에러 구간에서 정상적으로 수신한 반대 편 영상을 2차원 영상(2차원 출력 모드 또는 좌우 동일하게 반대편 영상 출력)으로 출력할 수 있다. 또한, 좌 영상과 우 영상에 모두 에러 공간이 존재하는 경우, 3차원 영상의 에러 처리 장치(100)는 가장 최근에 정상적으로 수신한 좌우영상을 대체 3차원 영상으로 출력하거나, 또는 가장 최근에 정상적으로 수신한 어느 한 쪽 영상을 2차원 영상(2차원 출력 모드 또는 좌우 동일하게 반대편 영상 출력)으로 출력할 수 있다.
그리고, 한쪽 영상 에러 구간과 양쪽 영상 에러 구간이 연속되는 경우, 3차원 영상의 에러 처리 장치(100)는 첫 번째 에러 구간에서 출력한 대체 출력 영상에 따라 다음 에러 구간에서 출력할 대체 출력 영상을 선택할 수 있다. 구체적으로, 3차원 영상의 에러 처리 장치(100)는 첫 번째 에러 구간에서 출력한 대체 출력 영상보다 시간 정보가 빠르지 않은 영상 중에서 에러 구간에서 출력할 대체 출력 영상을 선택함으로써, 출력하는 영상이 시간적으로 역행하는 것을 방지할 수 있다.
예를 들어 한쪽 영상 에러 구간, 양쪽 영상 에러 구간, 한쪽 영상 에러 구간이 이어지는 경우, 3차원 영상의 에러 처리 장치(100)는 처음의 한쪽 영상 에러 구간에서 정상적으로 수신한 반대 편 영상을 대체 영상으로 출력할 수 있다. 이때, 양쪽 영상 에러 구간에서 가장 최근에 정상적으로 수신한 양쪽 영상을 3차원으로 선택하면, 선택된 영상이 처음의 한쪽 영상 에러 구간에서 출력한 대체 영상보다 먼저 출력된 영상일 수 있다. 즉, 도 4의 실시예에서 우 영상(422)인 R2 내지 R3을 우 영상(422)에 대응하는 좌 영상(410)인 L2 내지 L3으로 교체하여 출력한 다음. 좌 영상 L4와 우 영상 R4를 가장 최근에 정상적으로 수신한 양쪽 영상으로 출력하면, 좌영상 L 1과 우 영상 R1이 출력될 수 있다. 이때, 좌영상 L 1과 우 영상 R1은 좌 영상 L2 내지 L3 보다 먼저 출력된 영상이므로, 출력된 영상은 시간적으로 역행할 수 있다.
따라서, 첫 번째 에러 구간인 한쪽 영상 에러 구간에서 정상적으로 수신한 반대 편 영상을 대체 영상으로 출력한 경우, 3차원 영상의 에러 처리 장치(100)는 양쪽 영상 에러 구간에서 가장 최근에 정상적으로 수신한 양쪽 영상을 3차원으로 선택하지 않고, 정상적으로 수신한 반대 편 영상을 대체 영상으로 출력할 수 있다. 즉, 3차원 영상의 에러 처리 장치(100)는 에러 구간이 연속되는 경우, 이전 에러 구간에서 대체 영상으로 선택한 영상이 출력된 시간보다 먼저 출력된 영상은 현재 에러 구간의 대체 영상으로 선택하지 않음으로써, 대체 영상으로 출력된 영상의 이전 영상이 대체 영상의 다음에 출력되지 않도록 할 수 있다.
도 5는 본 발명의 일실시예에 따른 3차원 영상의 에러 처리 방법을 도시한 플로우차트이다.
단계(510)에서 영상 수신부(110)는 3차원 영상을 재현하기 위한 좌 영상 및 우 영상을 수신할 수 있다.
이때, 영상 수신부(110)는 동일한 네트워크 망을 통하여 좌 영상과 우 영상을 수신할 수 있다. 또한, 영상 수신부(110)는 서로 다른 네트워크 망을 통하여 좌 영상과 우 영상을 각각 수신할 수도 있다.
단계(520)에서 에러 판단부(120)는 단계(510)에서 수신한 좌 영상 및 우 영상의 에러 발생 여부를 판단할 수 있다. 이때, 에러 판단부(120)는 좌 영상 및 우 영상의 물리 계층, 트랜스 포트 계층, 및 어플리케이션 계층 중 적어도 하나에 에러가 발생하였는지 여부를 판단할 수 있다.
이때, 에러 판단부(120)는 좌 영상 및 우 영상의 물리 계층에 삽입된 에러 정정 부호를 이용하여 좌 영상과 우 영상의 물리 계층 에러를 복구할 수 있다. 즉, 에러 판단부(120)는 좌 영상, 또는 우 영상에서 에러 정정 부호를 이용하여 복구 가능한 개수의 비트에 에러가 발생한 경우, 좌 영상, 또는 우 영상에서 에러가 발생한 것으로 판단하지 않을 수 있다. 그리고, 에러 판단부(120)는 좌 영상, 또는 우 영상 중에서 에러 정정 부호로 복구 가능한 비트의 개수 이상의 에러가 발생한 경우, 해당 영상에 물리 계층의 에러가 발생한 것으로 판단할 수 있다.
또한, 에러 판단부(120)는 좌 영상 및 우 영상의 트랜스 포트 계층에서 패킷 손실 에러, 또는 CRC(Cyclic Redundancy Checks) 에러가 발생하였는지 여부를 판단할 수 있다. 에러 판단부(120)는 손실되거나 에러가 발생한 데이터에 대한 재전송이 불가능하여 정상적인 영상의 출력이 불가능한 경우, 해당 영상에 트랜스포트 계층의 에러가 발생한 것으로 판단할 수 있다.
또한, 에러 판단부(120)는 좌 영상 및 우 영상의 어플리케이션 계층에 삽입된 에러 정정 부호를 이용하여 좌 영상과 우 영상의 어플리케이션 계층 에러를 복구할 수 있다. 그리고, 좌 영상, 또는 우 영상 중에서 에러 정정 부호로 복구 가능한 비트의 개수 이상의 에러가 발생한 경우, 해당 영상에 에러가 발생한 것으로 판단할 수 있다. 즉, 에러 판단부(120)는 좌 영상, 또는 우 영상에서 에러 정정 부호를 이용하여 복구 가능한 수중의 에러가 발생한 경우, 좌 영상, 또는 우 영상에서 에러가 발생한 것으로 판단하지 않을 수 있다. 그리고, 에러 판단부(120)는 좌 영상, 또는 우 영상 중에서 에러 정정 부호로 복구할 수 없는 수준의 에러가 발생한 경우, 해당 영상에 어플리케이션 계층의 에러가 발생한 것으로 판단할 수 있다.
단계(530)에서 영상 출력부(130)는 단계(520)에서 에러가 발생한 것으로 판단된 좌 영상 및 우 영상을 에러가 발생하지 않은 것으로 판단되지 않은 좌 영상 및 우 영상으로 교체하여 출력할 수 있다.
단계(520)에서 좌 영상과 우 영상에서 모두 에러가 발생하지 않았다고 판단한 경우, 영상 출력부(130)는 영상 수신부(110)가 수신한 좌 영상과 우 영상을 변화 없이 출력하여 3차원 영상을 재현할 수 있다.
단계(520)에서 좌 영상과 우 영상 중 하나에서 에러가 발생했다고 판단한 경우, 영상 출력부(130)는 좌 영상과 우 영상에서 모두 에러가 발생하지 않은 구간 중에서 가장 최근에 출력한 좌 영상과 우 영상을 검색할 수 있다. 그리고, 영상 출력부(130)는 에러가 발생했다고 판단한 좌 영상 및 우 영상을 검색한 좌 영상과 우 영상으로 교체하여 출력할 수 있다.
또한, 영상 출력부(130)는 좌 영상과 우 영상 중에서 에러가 발생한 영상을 에러가 발생하지 않은 좌 영상 및 우 영상으로 교체하여 출력할 수 있다. 예를 들어, 좌 영상에서 에러가 발생한 경우, 영상 출력부(130)는 좌 영상을 우 영상으로 교체하여 출력할 수 있다.
그리고, 영상 출력부(130)는 좌 영상과 우 영상 중에서 에러가 발생하지 않은 좌 영상 또는 우 영상을 2D 영상으로 출력할 수도 있다.
단계(520)에서 좌 영상과 우 영상에서 모두 에러가 발생했다고 판단한 경우, 영상 출력부(130)는 좌 영상과 우 영상에서 에러가 발생하지 않은 구간 중에서 가장 최근에 출력한 좌 영상과 우 영상을 검색할 수 있다. 그리고, 영상 출력부(130)는 에러가 발생했다고 판단한 좌 영상 및 우 영상을 검색한 좌 영상과 우 영상으로 교체하여 출력할 수 있다.
본 발명은 좌 영상과 우 영상에 에러가 발생하였는지 여부에 따라 좌 영상 및 우 영상을 처리하여 출력함으로써, 비대칭 영상의 발생을 방지할 수 있다. 그리고, 본 발명은 비대칭 영상의 발생을 방지함으로써, 양안식 3차원 영상을 시청하는 시청자의 피로도를 최소화할 수 있다.
이상과 같이 본 발명은 비록 한정된 실시예와 도면에 의해 설명되었으나, 본 발명은 상기의 실시예에 한정되는 것은 아니며, 본 발명이 속하는 분야에서 통상의 지식을 가진 자라면 이러한 기재로부터 다양한 수정 및 변형이 가능하다.
그러므로, 본 발명의 범위는 설명된 실시예에 국한되어 정해져서는 아니 되며, 후술하는 특허청구범위뿐 아니라 이 특허청구범위와 균등한 것들에 의해 정해져야 한다.
100: 3차원 영상의 에러 처리 장치
110: 영상 수신부
120: 에러 판단부
130: 영상 출력부

Claims (1)

  1. 좌 영상 및 우 영상을 수신하는 단계;
    좌 영상 및 우 영상의 에러 발생 여부를 판단하는 단계; 및
    에러가 발생한 좌 영상 또는 우 영상을 에러가 발생하지 않은 영상으로 교체하여 출력하는 단계
    를 포함하는 3차원 영상의 에러 처리 방법.
KR1020140001916A 2014-01-07 2014-01-07 양안식 3차원 영상의 에러 처리 장치 및 방법 KR20150081924A (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020140001916A KR20150081924A (ko) 2014-01-07 2014-01-07 양안식 3차원 영상의 에러 처리 장치 및 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020140001916A KR20150081924A (ko) 2014-01-07 2014-01-07 양안식 3차원 영상의 에러 처리 장치 및 방법

Publications (1)

Publication Number Publication Date
KR20150081924A true KR20150081924A (ko) 2015-07-15

Family

ID=53793626

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020140001916A KR20150081924A (ko) 2014-01-07 2014-01-07 양안식 3차원 영상의 에러 처리 장치 및 방법

Country Status (1)

Country Link
KR (1) KR20150081924A (ko)

Similar Documents

Publication Publication Date Title
US10361810B2 (en) Data packet transmission/reception apparatus and method
KR100771631B1 (ko) 방송 시스템 및 방송 시스템에서 데이터를 처리하는 방법
US11277647B2 (en) Forward error correction using source blocks with symbols from at least two datastreams with synchronized start symbol identifiers among the datastreams
US20160352465A1 (en) Apparatus and method for transmitting and receiving forward error correction packet
JP6511472B2 (ja) ブロードキャスティング及び／又は通信システムにおけるパケットの生成及び復元のための方法及び装置
Martini et al. Proportional unequal error protection for MPEG-4 video transmission
JP5030641B2 (ja) デジタル放送データ配信システム及びその方法
KR101227507B1 (ko) 디지털 방송 신호 송신 시스템 및 송신 방법
KR20150081924A (ko) 양안식 3차원 영상의 에러 처리 장치 및 방법
KR100916702B1 (ko) 전송 스트림 패킷의 채널 디코딩 장치 및 그 방법
US20160088255A1 (en) Signal receiving apparatus and method of controlling the same
KR101706950B1 (ko) 3ｄ 방송 신호 송수신 방법 및 송수신 장치
CN1656691B (zh) 使用前向消除校正的同步丢失弹性数字通信系统
EP3185576A1 (en) On-demand repair mode for a staggercast stream
KR20070119913A (ko) 디지털 방송 시스템 및 처리 방법
Husberg Distributed Repair of Digital Broadcasts

Legal Events

Date Code Title Description
WITN Withdrawal due to no request for examination