KR20060066314A - 영상 전화 단말기의 대체 영상 처리 장치 및 방법 - Google Patents

영상 전화 단말기의 대체 영상 처리 장치 및 방법 Download PDF

Info

Publication number
KR20060066314A
KR20060066314A KR1020040104873A KR20040104873A KR20060066314A KR 20060066314 A KR20060066314 A KR 20060066314A KR 1020040104873 A KR1020040104873 A KR 1020040104873A KR 20040104873 A KR20040104873 A KR 20040104873A KR 20060066314 A KR20060066314 A KR 20060066314A
Authority
KR
South Korea
Prior art keywords
video
file
stream
mpeg
video stream
Prior art date
Application number
KR1020040104873A
Other languages
English (en)
Inventor
김성진
윤도현
조용설
이승일
장민철
Original Assignee
엘지전자 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 엘지전자 주식회사 filed Critical 엘지전자 주식회사
Priority to KR1020040104873A priority Critical patent/KR20060066314A/ko
Publication of KR20060066314A publication Critical patent/KR20060066314A/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/4402—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • H04N21/440218—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display by transcoding between formats or standards, e.g. from MPEG-2 to MPEG-4
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/14—Systems for two-way working
    • H04N7/141—Systems for two-way working between two video terminals, e.g. videophone
    • H04N7/147—Communication arrangements, e.g. identifying the communication as a video-communication, intermediate storage of the signals

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

본 발명은 영상 전화 단말기에 있어서, 특히 이종의 대체 영상 포맷을 미리 준비하여 압축 방식의 차이에 의한 단말기 상호간의 영상 전화가 가능토록 한 것으로, 본 발명에 따른 영상 전화 단말기의 대체 영상 처리 방법은, 영상 전화를 위해 상대방 영상 전화 단말기와 접속되며, 상기 접속된 상대방 영상 전화 단말기에서 지원되는 코덱을 인지하고, 사용자가 대체 영상 설정시, 미리 저장된 대체 영상 파일로부터 상기 인지된 상대방 영상 전화 단말기가 지원하는 코덱의 비트 스트림을 읽어 상대방 영상 단말기로 전송하여 대체 영상 통화를 수행함으로써, 상대방 단말기와 지원하는 코덱이 다르더라도 대체 영상 통화가 가능토록 함에 있다.
영상 전화, 단말기, 대체 영상, 트랜스코더

Description

영상 전화 단말기의 대체 영상 처리 장치 및 방법{PROCESSING APPARATUS AND METHOD FOR SUBSTITUTION PICTURE OF PICTURE PHONE}
도 1은 종래 영상 전화 시스템 구성도.
도 2는 본 발명 실시 예에 따른 영상 전호 시스템을 나타낸 구성도.
도 3은 본 발명에 따른 트랜스코더의 블록 구성도.
도 4는 일반적인 엠펙4 파일 포맷의 개략 구성도.
도 5는 본 발명 실시 예에 따른 대체영상 스트림을 포함하는 엠펙4의 개략 구성도.
도 6은 본 발명 실시 예에 따른 엠펙4 파일 스트림을 H.263의 대체 영상으로 사용할 때의 변환 예를 나타낸 구성도.
도 7은 본 발명 실시 예에 따른 H.263 파일 스트림을 엠펙 4의 대체 영상으로 사용할 때의 대략적인 구성도.
도 8은 본 발명 실시 예에 따른 영상 전화 단말기의 대체 영상 처리 방법을 나타낸 도면.
<도면의 주요부분에 대한 부호의 설명>
10,20...영상 전화 단말기 11...카메라
12...영상 압축부 13...송신단
21...수신단 22...영상 복호부
23...화면 표시부 30,60,70...트랜스코더
31...비디오 디코더 32...비디오 인코더
60,70...대체영상 변환부 61...엠펙4 디코더
62...H.263 인코더 63,73...엠펙4 파일 생성부
71...H.263 디코더 72...엠펙 4 인코더
본 발명은 영상 전화 단말기에 있어서, 특히 이종의 대체 영상 포맷을 미리 준비하여 압축 방식의 차이에 의한 단말기 상호간의 영상 전화가 가능토록 한 영상 전화 단말기의 대체 영상 처리 장치 및 처리 방법에 관한 것이다.
최근 들어 영상 압축/복원 기술과 영상 전송 기술의 발달로 인해, 상대방의 얼굴을 보면서 통화할 수 있는 영상 전화 기술이 급격하게 발달되고 있다. 예들 들면, IMT-2000, UMTS 단말기 등이 좋은 예라고 할 수 있다.
도 1은 종래 영상 전화 시스템의 개략 구성도이다.
도 1을 참조하면, 제 1영상 전화 단말기(10)는 송신측이고, 제 2영상 전화 단말기(20)는 수신측이라고 하여 설명하면, 제 1영상 전화 단말기(10)는 카메라(11)를 통해 입력받은 영상을 특정의 영상 압축부(12)로 압축시키고, 그 압 축된 영상을 송신단(13)을 통해서 수신측 제 2영상 전화 단말기(20)로 전송한다.
상기 제 2영상 전화 단말기(20)는 수신단(21)으로 수신된 데이터를 수신하고 영상 복호부(22)를 통해 압축된 영상 데이터를 복호화한 후, 화면 표시부(23)에 표시하여 준다.
이러한 방식으로 제 2영상 전화 단말기(20)도 영상을 제 1영상 전화 단말기(10)에 전송함으로써, 두 개의 단말기의 사용자는 서로 영상을 보면서 전화 통화를 할 수 있게 된다.
이와 같은 영상 전화에서 자신의 상황을 전송하고 싶지 않는 경우가 발생될 수 있다. 예를 들면 개인적인 용무를 보거나 자신의 위치를 나타내고 싶지 않는 경우 등이 있을 수 있다.
이를 위해 자신의 화면을 상대방에게 전송하지 않고 싶은 상황을 대비하여 프라이버시(Privacy) 모드나 대체 영상 방식 등이 개발되고 있다. 즉, 단말기에 미리 저장된 정지 영상 한 장을 상대방에게 전송하거나, 선택한 동영상의 비트 스트림(bit stream)을 상대방에게 전송하여 대체 영상이 표시되도록 한다.
이와 같이, 일반적인 영상 전화에서 사용되는 프라이버시 모드나 대체 영상들은 카메라를 통해 캡쳐된 데이터를 압축해서 보내는 대신 한 장의 정지 영상이나 미리 정해진 파일 포맷의 동영상들을 수신측 단말기로 전송하게 된다. 이렇게 함으로써 사용자 본인의 화면을 대체하는 영상을 전송하게 된다.
그러나, 상기와 같이 대체 영상으로 선택된 정지 영상이나 동영상 비트 스트림을 영상 전화의 프라이버시나 대체 영상으로 사용하려고 할 때, 상기에서 선택된 정지 영상이나 동영상이 상대방 영상 전화에서 사용하지 않는 영상 압축 포맷인 경우 자신이 보내고 싶은 영상 비트 스트림을 보낼 수 없게 되는 문제가 있다. 또 보낼 수 있다고 할지라도 상대방 단말기가 볼 수 없는 문제가 있다.
본 발명의 제 1목적은 영상 전화 수행시 사용할 대체 영상을 미리 만들어 놓을 수 있도록 함에 있다.
본 발명의 제 2목적은 영상 전화 수행시 대체 영상으로 저장된 파일에서 현재 사용하도록 결정된 코덱의 비트 스트림을 뽑아서 전송할 수 있도록 함에 있다.
본 발명의 제 3목적은 영상 전화 단말기에서 이종의 대체 영상 포맷을 미리 생성 및 저장하고, 대체 영상 설정시 수신측 단말기의 코덱 스트림으로 전송함으로써, 서로 다른 압축 방식을 사용하는 단말기 상호간에 영상 전화가 가능토록 함에 있다.
본 발명의 제 4목적은 단말기가 사용하는 압축 방식으로 압축된 영상 스트림과 다른 압축 포맷으로 압축된 영상 스트림을 각각 생성하고 이를 하나의 전송 파일 포맷으로 묶어 대체 영상 파일로 생성함으로써, 영상 전화 접속시 상대방 단말기에 지원되는 대체 영상이 전송될 수 있도록 함으로써, 수신측 단말기의 압축 코덱에 맞는 대체 영상을 이용하여 영상 통화가 가능토록 함에 있다.
본 발명의 제 5목적은 영상 전화를 접속하기 전, 압축 영상으로의 트랜스 코딩을 수행한 후 원 압축 영상 스트림과 트랜스코딩된 영상 스트림을 표준 파일 포 맷으로 묶어 대체 영상 파일로 생성하고 저장하여, 수신측 단말기와 영상 전화 접속시 상기 대체 영상 파일로부터 수신측 단말기의 코덱 스트림을 추출하여 전송할 수 있도록 함에 있다.
상기한 목적 달성을 위한 본 발명에 따른 영상 전화 단말기의 대체 영상 처리 방법은,
영상 전화를 위해 상대방 영상 전화 단말기와 접속되는 단계;
상기 접속된 상대방 영상 전화 단말기에서 지원되는 코덱을 인지하는 단계;
대체 영상 설정시, 미리 저장된 대체 영상 파일로부터 상기 인지된 상대방 영상 전화 단말기에 해당하는 코덱의 비트 스트림을 읽어 상대방 영상 단말기로 전송하는 단계를 포함하는 것을 특징으로 한다.
바람직하게, 상기 대체 영상 파일에는 적어도 2개 이상의 압축 코덱을 지원하기 위한 압축 영상 스트림이 각각 저장되어 있는 것을 특징으로 한다.
바람직하게, 상기 대체 영상 파일은 각 단말기에 지원되는 원 압축 영상 스트림 및 이의 트랜스코딩된 영상 스트림, 그리고 헤더 정보를 포함하는 것을 특징으로 한다.
바람직하게, 상기 대체 영상 파일은 영상 전화 단말기의 표준 파일 포맷 형태로 저장되어 있는 것을 특징으로 한다.
바람직하게, 상기 대체 영상 파일은 엠펙 4 파일 포맷으로 이루어진 것을 특징으로 한다.
바람직하게, 상기 원 압축 영상 스트림은 MPEG 4 포맷이며, 상기 트랜스코딩된 영상 스트림은 H.26L 포맷인 것을 특징으로 한다.
바람직하게, 상기 원 압축 영상 스트림은 H.26L 포맷이고, 상기 트랜스코딩된 영상 스트림은 MPEG 4 포맷인 것을 특징으로 한다.
본 발명 실시 예에 따른 영상 전화 단말기의 대체 영상 처리 장치는,
영상의 압축 및 복호화를 위한 영상 압축 및 복호 수단과; 적어도 2개 이상의 영상 압축 코덱을 지원할 수 있도록 원 압축 영상 스트림을 이종의 압축 포맷에 해당하는 영상 스트림으로 트랜스코딩하는 트랜스코더와; 원 압축 영상 스트림 및 상기 트랜스코더에 의해 트랜스코딩된 영상 스트림을 포함하는 대체 영상 압축 포맷 파일을 생성하는 대체 영상 파일 생성 수단과; 상기 대체 영상 압축 포맷 파일이 저장된 메모리와; 영상 전화 중 사용자가 대체 영상 설정시, 상대방 영상 전화 단말기의 코덱에 해당하는 대체 영상 스트림을 상기 대체 영상 압축 포맷 파일로부터 추출하여 상대방 영상 전화 단말기로 전송하는 송수신 수단을 포함하는 것을 특징으로 한다.
바람직하게, 상기 트랜스 코더는 상기 원 압축 영상 스트림을 디코딩하는 디코더와, 상기 디코딩된 원 압축 스트림을 이종의 압축 방식으로 인코딩하는 인코더를 포함하는 것을 특징으로 한다.
바람직하게, 상기 파일 생성수단은 엠펙 4 파일 포맷으로 대체 영상 압축 포맷 파일을 생성하고, 상기 엠펙 4 파일 포맷의 비디오 데이터 트랙에 원 압축 영상 스트림을 구성하고, 상기 엠펙 4파일 포맷의 오디오 데이터 트랙에 상기 트랜스코 딩된 영상 스트림을 구성하며, 상기 구성된 두 개의 영상 스트림 정보를 해당 트랙에 각각 삽입해 주는 것을 특징으로 한다.
바람직하게, 상기 원 압축 영상 스트림은 MPEG 4 포맷이며, 상기 트랜스코딩된 영상 스트림은 H.26L 포맷인 것을 특징으로 한다.
바람직하게, 상기 원 압축 영상 스트림은 H.26L 포맷이고, 상기 트랜스코딩된 영상 스트림은 MPEG 4 포맷인 것을 특징으로 한다.
이하 첨부된 도면을 참조하여 설명하면 다음과 같다.
도 2를 참조하면, 송신측 영상 전화 단말기(10) 및 수신측 영상 전화 단말기(20)로 구성되며, 송신측 영상 전화 단말기(10)는 카메라(11), 영상 압축부(12), 송신단(12), 트랜스코더(30)를 포함하며, 수신측 영상 전화 단말기(20)는 수신단(21), 영상 복호부(22), 화면 표시부(23)를 포함하게 된다.
여기서, 트랜스 코더(30)는 송신측 영상 전화 단말기(10)로부터 원 대체 영상의 압축 영상 스트림에 대해 디코딩하는 디코더를 갖는 제 1코덱과, 상기 디코딩된 영상 스트림을 다른 포맷으로 인코딩하는 인코더를 갖는 제 2코덱을 포함한다.
그리고, 상기 트랜스코더(30)에 의해 최종 인코딩된 영상 스트림과 원 대체 영상의 압축 영상 스트림을 묶어 하나의 전송 포맷 압축 파일로 생성하는 파일 생성수단(File maker)을 포함하게 된다.
본 발명에 따른 영상 전화 단말기의 대체 영상 처리 장치에 대하여 첨부된 도면을 참조하여 설명하면 다음과 같다.
도 2를 참조하면, 영상 전화 단말기(10)는 영상 전화로 통화 중 자신의 얼굴 을 보여주지 않고 미리 설정해 놓은 대체 영상(정지영상, 동영상 포함)을 전송하게 된다. 이때, 대체 영상으로는 영상 전화의 표준 방식에 따라 압축 전송 방식 예를 들면, H.261, H.263, H.264(H.26L), 엠펙 4(MPEG4) 압축 포맷의 영상을 사용하고 있다. 그러나, 이러한 영상 전화에서 사용하는 압축 전송 방식이 미리 정해져 있기 때문에 이 방식에서 맞지 않는 영상은 영상 전화의 대체 영상으로 사용할 수 없다.
여기서, 영상 전화 표준으로 사용되는 비디오 코덱의 종류는 H.261, H.263, MPEG-4, H.264 등이 있으며, 현재 대부분의 영상 전화는 H.263 또는 MPEG-4(엠펙 4)를 사용하고 있다. 그리고 최근에는 H.264가 개발 및 출시되고 있다. 본 발명은 이러한 코덱의 사용에 제한을 받지 않도록 미리 준비된 각 코덱의 대체 영상 중에서 선택하여 사용할 수 있게 된다.
또한, 본 발명은 수신측 영상 전화 단말기에서 대체 영상 또는 프라이버시 모드와 같은 정보를 전혀 모르더라도, 주어진 표준(H.323, 3G-324M, SIP 등)을 만족하도록 본 발명의 대체 영상을 적용할 수 있다.
본 발명에서는 영상 전화 단말기에서 지원하는 모든 코덱에 대해 여러 가지의 대체 영상 스트림으로 각각 만들어 놓게 된다. 예를 들면, 대체 영상을 H.263과 엠펙 4 영상 스트림으로 모두 만들어 놓게 된다.
영상 전화 단말기(10)(20)에는 이종의 대체 영상 포맷을 지원할 수 있도록 영상 압축부(11) 및 영상 복호부(22)뿐만 아니라, 영상의 압축 포맷 변환을 위한 트랜스 코더(30)를 더 포함하게 된다. 여기서, 트랜스 코더(30)는 영상 전화 단말기의 송신단 또는 영상 압축부 등에 구비될 수도 있다.
상기 트랜스 코더(30)는 대체 영상으로 사용하고자 하는 영상 스트림을 트랜스코딩하여 이종의 압축 포맷으로 변환하게 된다. 여기서, 트랜스코딩이란 이종의 영상 압축기 사이에 비디오의 송/수신되는 경우에 영상을 선택적으로 인코딩 및 디코딩하여 사용하게 된다.
즉, 트랜스코더(30)라는 압축 포맷 변경부를 거쳐 수신단(21)과 같은 압축 포맷으로 영상 포맷으로 미리 변환하여 놓게 된다. 예를 들면, H.263 영상 스트림을 MPEG 4 영상 스트림으로 변환하거나, MPEG 4 영상 스트림을 H.263 영상 스트림으로 변환해 주게 된다.
이에 따라 송신측 영상 전화 단말기(10)에서는 지원하는 모든 코덱(CODEC)에 대해 각각의 영상 스트림으로 대체 영상을 만들어 놓고, 실제 영상 전화 접속시 상대방 영상 전화 단말기(20)가 사용하는 코덱의 영상 스트림을 대체 영상 설정시 보내게 된다.
만약, 영상 전화 중 대체 영상이 설정되면, 여러 가지의 압축 방식으로 미리 저장되어 있는 영상 스트림 중 상대방 영상 전화 단말기가 지원하는 코덱의 영상 스트림을 전송해 주면 된다.
이때, 영상 전화 접속을 통해서 상대방 영상 전화 단말기의 영상 압축 방식이 H.26L인지, 엠펙 4인지, 아니면 다른 압축 방식을 사용하는지를 알 수 있게 된다. 여기서, 상대방 영상 전화 단말기의 압축 방식의 인지 방법은, 영상 전화 표준으로 사용되는 H.324(PSTN), H.323, SIP(VoIP), 3G-324M(3G Mobile Network) 등의 spec. 에 mandatory로 지원해야 하는 압축 코덱, 옵션(optional)으로 지원할 수 있 는 압축 코덱, 상대방과의 capability 즉, 상대방 지원 코덱과 자신이 지원하는 코덱과의 호환성 여부 및 어떤 코덱으로 통신할 것인지에 대한 정보에 대한 교환 방법 등이 정의되어 있으므로, 상대방 단말기의 코덱을 알 수가 있게 된다.
여기서, 대체 영상을 만드는 위해서는 단말기가 지원하는 압축 방식으로 압축된 제 1대체 영상 스트림(또는 원 압축 영상 스트림)과, 상기 제 1대체 영상 스트림을 트랜스 코더(30)에 의해 트랜스코딩하여 제 2대체 영상 스트림(또는 트랜스 코딩된 영상 스트림)을 변환하여, 두 개의 대체 영상 스트림을 하나의 파일 포맷으로 묶어 저장해 놓게 된다.
이때, 수신측 영상 전화 단말기(20)는 송신측 영상 전화 단말기(10)로부터 전송된 대체 영상 스트림을 수신단(31)에서 수신하고, 영상 복호부(32)에서 자신의 코덱을 이용하여 복호화함으로써 화면 표시부(33)에 대체 영상이 표시된다.
도 3은 본 발명 실시 예에 따른 트랜스 코더(30)의 구성도이다.
도 3을 참조하면, 트랜스 코더는 비디오 디코더(31) 및 비디오 인코더(32)로 구성되며, 상기 비디오 디코더(31)는 제 1코덱(Codec1)의 영상 스트림(video stream)을 디코딩하며, 비디오 인코더(32)는 상기 디코딩된 제 1코덱의 영상 스트림을 제 2코덱(Codec2)의 영상 스트림으로 인코딩하게 된다. 여기서, 상기 비디오 디코더(31)는 제 1코덱의 일부 기능이며, 비디오 인코더는 제 2코덱의 일부 기능이다.
또, 다른 압축 방식으로 적용하고자 할 경우, 제 2코덱의 비디오 디코더가 제 2코덱의 영상스트림을 디코딩하고, 그 디코딩된 영상 스트림을 제 1코덱의 영상 스트림으로 인코딩할 수도 있다.
예를 들면, H.263의 비트 스트림을 MPEG4의 비트 스트림으로 수정하고 싶으면 트랜스코더의 비디오 디코더(31)를 H.263 디코더로 하고, 비디오 인코더(32)를 MPEG 인코더로 구성하면 MPEG 4 영상 스트림을 얻을 수 있다.
이와 같이, 영상 전화 단말기에서 압축 방식에 상관없이 대체 영상을 구성하기 위해서는 트랜스코더(30)를 이용하여 이종의 압축 방식으로 압축시킨 영상 스트림으로의 변환 작업을 반드시 진행하여야 한다.
한편, 서로 다른 압축 방식으로 압축된 영상 스트림을 이용하여 대체 영상 파일을 만들게 되는데, 대체 영상 파일로 만들기 위해 단말기가 지원하는 코덱의 영상 스트림과 트랜스코딩된 영상 스트림을 하나의 파일 예를 들면, 엠펙 4 파일 포맷으로 만들게 된다.
도 4는 일반적인 엠펙 4의 파일 포맷을 나타낸 구성도이다. 도 4에 도시된 바와 같이, 엠펙 4 파일 포맷(40)에는 처음에 헤더 정보(41)가 붙고, 그 다음으로 비디오 데이터 스트림(42) 및 오디오 데이터 스트림(43)이 삽입되며, 데이터 스트림 다음으로는 파일 정보로서 아톰 정보(44,45,46)가 삽입되는데, 아톰 정보 중에서 제일 먼저 삽입되는 것이 무브 아톰(44)인데, 이에는 파일의 기본적인 사항들에 관한 정보가 붙는다. 그리고, 비디오 트랙 아톰(ATOM)(45) 및 오디오 트랙 아톰(46)이 삽입되는데, 상기 비디오와 오디오 트랙 아톰(45)(46)에는 압축된 비디오와 오디오 스트림에 관련된 정보가 각각 붙게 된다. 따라서, 엠펙 4 파일 하나로, 오디오와 비디오가 결합되어 있는 오디오/비디오 스트림 파일을 저장하게 된 다.
본 발명은 영상 전화 사용시 미리 저장된 대체 영상 전송에 있다. 즉, 영상 전화 사용시 대체 영상의 특징은 음성, 즉 오디오는 전화 통화시 수신단과 송신단에서 주고받는 음성이 되므로, 전송 포맷에서의 오디오 트랙은 필요가 없다. 이에 따라 대체 영상 전송 포맷에서의 오디오 트랙이 존재하지 않는 파일 포맷을 송/수신하고자 한다.
예를 들면, 엠펙 4 파일의 오디오 트랙은 대체 영상 저장시 필요 없게 되므로, 그 오디오 트랙을 제거하고 트랜스코더를 통해 트랜스코딩된 이종의 영상 압축 스트림을 오디오 트랙 영역에 삽입하게 된다. 이에 대해 도 5를 참조하여 설명하기로 한다.
도 5는 본 발명 실시 예에 따른 대체 영상 스트림들로 구성된 엠펙 4 파일의 포맷도이다.
도 5를 참조하면, 엠펙 4 파일의 포맷(50)에는 헤더(51)와 그 헤더 다음으로 제 1비디오 스트림(52) 및 제 2비디오 스트림(53)이 삽입되고, 그 다음으로 무브 아톰(54), 그 다음으로 제 1비디오 트랙 아톰(55) 및 제 2비디오 트랙 아톰(56)이 삽입된다. 즉, 제 1 및 제 2비디오 트랙 아톰(55,56)은 기존의 오디오 트랙 아톰 대신에 삽입된 구성이다. 이에 따라 두 개의 스트림 즉, 원 압축 영상 스트림과 트랜스코딩된 영상 스트림을 각각의 트랙으로 따라 삽입하고 이를 하나의 엠펙 4 파일 포맷(50)으로 생성하여 대체 영상 파일로 저장하게 된다.
이에 따라, 영상 전화 접속시 영상 전화에서 사용되는 영상 압축 방식을 알 수 있고, 이때 대체 영상을 적용하게 되면 제 1비디오 트랙이나 제 2비디오 트랙 중에서 상대방 단말기가 지원하는 코덱 즉, 영상 전화 압축 방식에 맞는 대체 영상 스트림을 전송하여 사용할 수 있다.
이때, 수신측 단말기로 대체 영상을 전송할 때, 엠펙 4 파일 시스템에 2개의 스트림을 각각의 트랙에 따라 넣어서 하나의 파일로 생성되어 있으므로, 헤더 정보만 복호화하여 H.263 영상 스트림의 위치 또는 엠펙4 영상 스트림의 위치를 검출할 수 있게 된다.
만약, 실제 영상 전화를 할 때 엠펙 4를 사용하게 되었다면 미리 만들어진 대체 영상 파일에서 엠펙 4 스트림이 저장되어 있는 트랙 정보를 검출한 후, 상기 저장된 엠펙 4 스트림을 상대 단말기에게 실시간으로 전송하게 된다. 만약, 단말기에 장착된 카메라로부터 들어온 영상을 부호화한 스트림을 대체 영상으로 보낼 경우 단말기 상호간의 코덱이 맞지 않아 대체 영상 통화가 이루어지지 않게 된다.
도 6 및 도 7은 본 발명 실시 예에 따른 대체 영상 파일을 생성하는 블록 구성도이다.
도 6은 영상 전화 단말기의 영상 전화 압축 방식이 엠펙 4이고 대체 영상을 H.263으로 사용하는 경우로서, 트랜스 코더(60)는 엠펙 4 파일 스트림으로 압축된 대체 영상을 엠펙 4 디코더(61)로 디코딩하고, 다시 H.263 인코더(62)로 인코딩함으로써 H.263 파일 스트림이 생성된다. 그리고, 엠펙 4 파일 생성부(63)는 상기 엠펙 4 파일 스트림과 상기 H.263 파일 스트림을 갖는 선택적인 대체 영상 스트림으로서, 엠펙 4 파일 포맷의 대체 영상 파일을 생성된다. 이러한 대체 영상 파일은 메모리에 저장됨으로써, 모든 영상 전화 시스템에서 대체 영상을 사용하고자 할 경우 반복적으로 사용될 수 있다.
이에 따라 엠펙 4 방식으로 영상 전화가 접속된 상태에서, 사용자가 대체 영상을 설정하면 상기 대체 영상 파일에 있는 H.263 영상 스트림을 읽어 상대방 영상 전화 단말기로 전송하면 대체 영상을 이용한 영상 통화가 가능하게 된다.
이와 같이 본 발명에 따른 대체 영상 생성 방법은, 영상 전화 수행시 사용할 대체 영상 파일을 만들기 위해, 사용자로부터 특정 포맷을 갖는 대체 영상이 선택되면, 상기 선택된 대체 영상을 영상 전화 단말기가 지원하는 제 1압축 영상 스트림으로 인코딩하고, 상기 선택된 대체 영상을 영상 전화 단말기가 지원하는 제 2압축 영상 스트림으로 트랜스코딩하며, 상기 제 1압축 영상 스트림 및 제 2압축 영상 스트림을 엠펙 4파일 포맷으로 묶어 하나의 대체 영상 파일로 생성 및 저장하게 된다.
이러한 본 발명은 미리 대체 영상을 만들기 위한 트랜스코딩 예를 들면, H.263 또는 엠펙 4 코덱과 같은 파일 포맷에 제한을 받지 않고 모든 영상(정지 영상, 동영상 등)이 적용될 수 있다.
예를 들면, 현재 단말기가 지원하는 비디오 코덱이 엠펙 4와 H.263 두 가지가 있다면, 정지 영상(JPEG, JPG, BMP 등)을 대체 영상으로 만들 경우는 다음과 같다.
만약, 정지 영상이 JPEG 이미지이면, JPEG 이미지는 JPEG 디코더에 의해 디코딩되고, 디코딩된 영상은 H.263 인코더에 의해 인코딩된다. 그리고, JPEG 이미지 가 엠펙 4 인코더에 의해 인코딩된다. 이에 따라 상기 H.263에 의해 인코딩된 영상 스트림(즉, 제 2압축 영상 스트림)과 엠펙 4 인코더에 의해 인코딩된 영상 스트림(즉, 제 1압축 영상 스트림)이 엠펙 4파일 포맷으로 묶여져 대체 영상 파일로 생성된다.
만약, 동영상을 대체 영상으로 만들 경우, 먼저 동영상을 저장하기 위해 사용되는 포맷 예컨대, *.mpeg4와 *.3gp 등이 있다.
예들 들면, H.263 영상이나 AMR 오디오가 들어있는 *.mpeg4(MPEG-4 file format)으로 저장되어 있는 파일을 대체 영상으로 사용하고 싶다면,
MPEG-4 파일 포맷에서 H.263 비트 스트림만을 빼낸 다음 원 H.263 비트 스트림을 H.263 디코더로 디코딩하고, 그 디코딩된 스트림을 MPEG-4 인코더로 인코딩하게 된다. 이렇게 만들어진 상기 MPEG 인코딩된 스트림과 원 H.263 비트 스트림을 하나의 MPEG-4 파일 포맷으로 묶어서 하나의 대체 영상 파일을 만들게 된다.
여기서, MPEG-4 파일 포맷에서 H.263 비트 스트림은 MPEG-4 파일 포맷 파서(Parser)를 이용하여 비트 스트림만을 분리해 낸다.
그리고, H.264인 경우는 H.264 디코더-> MPEG-4 인코더로 인코딩하고, MPEG-4 인코더에 의해 인코딩된 스트림과 H.263인코더에 의해 인코딩된 스트림을 엠펙 4파일 포맷으로 묶어 하나의 대체 영상 파일을 만들어 주게 된다.
다른 예로서, 영상 전화 단말기가 H.263, H.264 두 개의 코덱을 지원한다고 가정하면, 정지 영상의 경우 JPEG file format(*.jpg) -> JPEG decoder -> H.263 encoder 로 인코딩되고, 상기 JPEG 이미지를 H.264 인코더로 인코딩한 후, H.263 인코더로 인코딩된 스트림과 H.264인코더로 인코딩된 스트림을 MPEG-4 file format(*.mp4)으로 묶어 하나의 대체 영상 파일로 만들어 주게 된다.
따라서, 본 발명은 영상 전화 단말기에서 지원하는 코덱으로의 트랜스코딩을 수행하는 것이며, 이종의 코덱에 대한 비트 스트림을 미리 준비하고자 하며, 대체 영상 설정시 자동으로 영상 전화 코덱에 맞는 비트 스트림이 전송되는 것이다.
또한, 현재 많이 사용되고 있는 file format 이 MPEG-4 file format 뿐만 아니라, 3gp(3GPP 표준 파일 포맷), k3g(국내 표준 파일 포맷) 등의 다른 file format 으로 만들어 둘 수도 있다.
도 7을 참조하면, 영상 전화 단말기의 영상 전화 압축 방식이 H.263이고 대체 영상을 엠펙 4로 사용하는 경우로서, 트랜스 코더(70)는 엠펙 4파일 스트림으로 압축된 대체 영상을 H.263 디코더(71)로 디코딩하고, 다시 엠펙 4 인코더(72)로 인코딩함으로써 엠펙 4 파일 스트림(MPEG4 File stream)이 생성되며, 엠펙 4 파일 생성부(MP4 file maker)(73)는 상기 H.263 파일 스트림과 상기 엠펙 4 파일 스트림을 포함하는 선택적인 대체 영상 비디오 스트림을 생성하게 되며, 이 선택적인 대체 영상 스트림 중 하나의 영상 스트림이 수신측 단말기로 전송된다.
여기서, 도 6 및 도 7을 참조하면, 트랜스 코더(60,70)는 H.263 인코더/디코더와 엠펙 4 인코더/디코더를 포함하는 구성이며, 하나의 영상에 대해 엠펙 4(H.263) 영상 스트림과 트랜스코딩된 H.263(트랜스코딩된 엠펙 4) 영상 스트림이 송/수신 전송 포맷에 해당하는 파일로 생성된 후 이를 저장하고, 필요시 대체 영상 파일로 사용할 수도 있다.
도 8은 본 발명의 영상 전화 단말기에서의 대체 영상 처리 방법을 나타낸 플로우 챠트이다.
도 8을 참조하면, 송신측 영상 전화 단말기가 영상 전화에 접속되면(S31), 단말기 내에서는 영상 전화 접속 방식에 따른 수신측 단말기의 영상 압축 방식을 인식하게 된다(S33). 예를 들면, 수신측 영상 전화 단말기의 코덱이 엠펙 4인지, H.26L인지를 인지할 수 있게 된다.
이후, 사용자가 대체 영상을 설정하면, 송신측 영상 전화 단말기는 미리 저장된 대체 영상 파일로부터 수신측 단말기의 코덱 스트림을 추출하게 되며(S37), 수신측으로 전송하여 대체 영상으로 설정하게 된다(S35).
다른 실시 예로서, 대체 영상을 기본으로 설정할 경우 수신측 단말기와의 접속과 동시에 수신측 단말기의 지원 코덱에 해당하는 대체 영상 스트림을 전송하여, 대체 영상을 이용한 영상 통화가 가능하게 된다. 이에 따라, 송신측 및 수신측 영상 전화 단말기는 이종의 영상 압축 방식이 포함된 파일을 송/수신하게 되는 전송 시스템이 될 수도 있다.
이제까지 본 발명에 대하여 그 바람직한 실시 예를 중심으로 살펴보았으며, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자는 본 발명의 본질적 기술 범위 내에서 상기 본 발명의 상세한 설명과 다른 형태의 실시 예들을 구현할 수 있을 것이다. 여기서 본 발명의 본질적 기술범위는 특허청구범위에 나타나 있으며, 그와 동등한 범위 내에 있는 모든 차이점은 본 발명에 포함된 것으로 해석되어야 할 것이다.
상술한 바와 같이 본 발명에 따른 영상 전화 단말기의 대체 영상 처리 장치 및 방법에 의하면, 영상 전화 단말기에서 지원 가능한 모든 코덱에 대해 적어도 두 개 이상의 대체 영상 스트림을 만들어 놓고 실제 영상 전화 접속시 상대방 단말기가 지원하는 코덱 스트림으로 전송할 수 있도록 함으로써, 영상 전화에서 사용되는 영상 압축 방식에 적용할 수 없는 파일을 대체 영상으로 적용 가능하게 되고, 단말기 사용자가 사용할 수 있는 대체 영상 선택의 폭이 넓어지게 되며, 다양한 종류의 비디오 압축 포맷을 사용할 수 있는 효과가 있다.

Claims (13)

  1. 영상 전화를 위해 상대방 영상 전화 단말기와 접속되는 단계;
    상기 접속된 상대방 영상 전화 단말기에서 지원되는 코덱을 인지하는 단계;
    대체 영상 설정시, 미리 저장된 대체 영상 파일로부터 상기 인지된 상대방 영상 전화 단말기에 해당하는 코덱의 비트 스트림을 추출한 후 상대방 영상 전화 단말기로 전송하는 단계를 포함하는 것을 특징으로 하는 영상 전화 단말기의 대체 영상 처리 방법.
  2. 제 1항에 있어서,
    상기 대체 영상 파일에는 적어도 2개 이상의 압축 코덱을 지원하기 위한 압축 영상 스트림이 각각 저장되어 있는 것을 특징으로 하는 영상 전화 단말기의 대체 영상 처리 방법.
  3. 제 2항에 있어서,
    상기 대체 영상 파일은 각 단말기에 지원되는 원 압축 영상 스트림 및 이의 트랜스코딩된 영상 스트림, 그리고 헤더 정보를 포함하는 것을 특징으로 하는 영상 전화 단말기의 대체 영상 처리 방법.
  4. 제 1항에 있어서,
    상기 대체 영상 파일은 영상 전화 단말기의 표준 파일 포맷 형태로 저장되어 있는 것을 특징으로 하는 영상 전화 단말기의 대체 영상 처리 방법.
  5. 제 4항에 있어서,
    상기 대체 영상 파일은 엠펙 4 파일 포맷으로 이루어진 것을 특징으로 하는 영상 전화 단말기의 대체 영상 처리 방법.
  6. 제 3항에 있어서,
    상기 원 압축 영상 스트림은 MPEG 4 파일 스트림이며, 상기 트랜스코딩된 영상 스트림은 H.263 파일 스트림인 것을 특징으로 하는 영상 전화 단말기의 대체 영상 처리 방법.
  7. 제 3항에 있어서,
    상기 원 압축 영상 스트림은 H.263 파일 스트림이고, 상기 트랜스코딩된 영상 스트림은 MPEG 4 파일 스트림인 것을 특징으로 하는 영상 전화 단말기의 대체 영상 처리 방법.
  8. 영상 전화 수행시 사용할 대체 영상 파일을 만들기 위해, 사용자로부터 특정 포맷을 갖는 대체 영상이 선택되는 단계;
    상기 대체 영상이 선택되면 상기 선택된 대체 영상을 영상 전화 단말기가 지 원하는 제 1압축 영상 스트림으로 인코딩하고, 상기 선택된 대체 영상을 영상 전화 단말기가 지원하는 제 2압축 영상 스트림으로 트랜스코딩하는 단계;
    상기 제 1압축 영상 스트림 및 제 2압축 영상 스트림을 엠펙 4파일 포맷으로 묶어 하나의 대체 영상 파일로 생성 및 저장하는 단계를 포함하는 것을 특징으로 하는 영상 전화 단말기의 대체 영상 생성 방법.
  9. 영상의 압축 및 복호화를 위한 영상 압축 및 복호 수단과;
    영상 전화시, 적어도 2개 이상의 영상 압축 코덱을 지원할 수 있도록 원 압축 영상 스트림을 이종의 압축 포맷에 해당하는 영상 스트림으로 트랜스코딩하는 트랜스코더와;
    원 압축 영상 스트림 및 상기 트랜스코더에 의해 트랜스코딩된 영상 스트림을 포함하는 대체 영상 압축 포맷 파일을 생성하는 대체 영상 파일 생성 수단과;
    상기 대체 영상 압축 포맷 파일이 저장된 메모리와;
    영상 전화 중 사용자가 대체 영상 설정시, 상대방 영상 전화 단말기의 코덱에 해당하는 대체 영상 스트림을 상기 대체 영상 압축 포맷 파일로부터 읽어들여 상대방 영상 전화 단말기로 전송하는 송수신 수단을 포함하는 것을 특징으로 하는 영상 전화 단말기의 대체 영상 처리 장치.
  10. 제 9항에 있어서,
    상기 트랜스 코더는 상기 원 압축 영상 스트림을 디코딩하는 디코더와, 상기 디코딩된 원 압축 스트림을 이종의 압축 방식으로 인코딩하는 인코더를 포함하는 것을 특징으로 하는 영상 전화 단말기의 대체 영상 처리 장치.
  11. 제 9항에 있어서,
    상기 대체 영상 파일 생성수단은 엠펙 4 파일 포맷으로 대체 영상 압축 포맷 파일을 생성하고, 상기 엠펙 4 파일 포맷의 비디오 데이터 트랙에 원 압축 영상 스트림을 구성하고, 오디오 데이터 트랙에 상기 트랜스코딩된 영상 스트림을 구성하며, 상기 구성된 두 개의 영상 스트림 정보를 해당 트랙에 각각 삽입해 주는 것을 특징으로 하는 영상 전화 단말기의 대체 영상 처리 장치.
  12. 제 9항 또는 제 10항에 있어서,
    상기 원 압축 영상 스트림은 MPEG 4 파일 스트림이며, 상기 트랜스코딩된 영상 스트림은 H.263 파일 스트림인 것을 특징으로 하는 영상 전화 단말기의 대체 영상 처리 장치.
  13. 제 9항 또는 제 10항에 있어서,
    상기 원 압축 영상 스트림은 H.263 파일 스트림이고, 상기 트랜스코딩된 영상 스트림은 MPEG 4 파일 스트림인 것을 특징으로 하는 영상 전화 단말기의 대체 영상 처리 장치.
KR1020040104873A 2004-12-13 2004-12-13 영상 전화 단말기의 대체 영상 처리 장치 및 방법 KR20060066314A (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020040104873A KR20060066314A (ko) 2004-12-13 2004-12-13 영상 전화 단말기의 대체 영상 처리 장치 및 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020040104873A KR20060066314A (ko) 2004-12-13 2004-12-13 영상 전화 단말기의 대체 영상 처리 장치 및 방법

Publications (1)

Publication Number Publication Date
KR20060066314A true KR20060066314A (ko) 2006-06-16

Family

ID=37161171

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020040104873A KR20060066314A (ko) 2004-12-13 2004-12-13 영상 전화 단말기의 대체 영상 처리 장치 및 방법

Country Status (1)

Country Link
KR (1) KR20060066314A (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2008048009A1 (en) * 2006-10-18 2008-04-24 Humax Co., Ltd. Device and method for encoding/decoding bit-stream

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2008048009A1 (en) * 2006-10-18 2008-04-24 Humax Co., Ltd. Device and method for encoding/decoding bit-stream

Similar Documents

Publication Publication Date Title
KR100566253B1 (ko) 휴대단말기의 영상표시 장치 및 방법
KR101421587B1 (ko) 무선 영상 전화 단말간의 선호 영상 규격을 결정하는 방법및 장치
KR100827802B1 (ko) 휴대 단말기의 화상 통화 장치 및 화상 통화 송수신방법
US20080125104A1 (en) Apparatus and method for sharing video telephony screen in mobile communication terminal
USRE47345E1 (en) Apparatus and method for converting control information
JP2005033664A (ja) 通信装置及びその動作制御方法
KR20100123771A (ko) 게이트웨이 장치와 통신 방법
JPWO2009013958A1 (ja) マルチメディア提供サービス
US20110074909A1 (en) Video telephony
KR100678035B1 (ko) 휴대단말기의 촬영자 식별장치 및 방법
KR20060066314A (ko) 영상 전화 단말기의 대체 영상 처리 장치 및 방법
JPWO2009013957A1 (ja) マルチメディア通信システム、マルチメディア通信装置及び端末
JPWO2009013959A1 (ja) マルチメディア通信システム、マルチメディア通信装置及び端末
KR20080047683A (ko) 휴대용 단말기에서 스트리밍 서비스 전송 방법 및 장치
KR100574858B1 (ko) 영상전화단말에서 부가 정보 전송 방법 및 장치
JPWO2009013956A1 (ja) マルチメディア提供サービス
CN100574413C (zh) 可视电话终端机的替代影像处理装置及其方法
WO2012155761A1 (zh) 一种可视电话动态相框实现方法及移动终端
CN116248969B (zh) 一种多网系融合的视频传输系统及方法
KR100464029B1 (ko) 화상휴대단말기의 동영상과 문자 동시 표시 장치 및 방법
JP4175232B2 (ja) テレビ電話システム及びテレビ電話装置
JP2005057362A (ja) 音声及び画像の送受信記録システム
KR20040071457A (ko) 최소 자원 및 대역폭을 사용해 정보를 전송하는 원격억세스 서비스 시스템 및 그 정보 전송 방법
JP2004023644A (ja) 動画像符号化復号化装置
WO2001043443A1 (en) Video encoding/transmitting device, video receiving/decoding device, video transmitting/receiving device, and video transmitting system

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E601 Decision to refuse application