KR20080102668A - 화상 통화 송수신 방법 및 이를 이용하는 화상 통화 장치 - Google Patents

화상 통화 송수신 방법 및 이를 이용하는 화상 통화 장치 Download PDF

Info

Publication number
KR20080102668A
KR20080102668A KR1020070049387A KR20070049387A KR20080102668A KR 20080102668 A KR20080102668 A KR 20080102668A KR 1020070049387 A KR1020070049387 A KR 1020070049387A KR 20070049387 A KR20070049387 A KR 20070049387A KR 20080102668 A KR20080102668 A KR 20080102668A
Authority
KR
South Korea
Prior art keywords
data
video call
image
video
filtered
Prior art date
Application number
KR1020070049387A
Other languages
English (en)
Inventor
최강선
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to KR1020070049387A priority Critical patent/KR20080102668A/ko
Priority to US12/123,675 priority patent/US20080291262A1/en
Publication of KR20080102668A publication Critical patent/KR20080102668A/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M11/00—Telephonic communication systems specially adapted for combination with other electrical systems
    • H04M11/06—Simultaneous speech and data transmission, e.g. telegraphic transmission over the same conductors
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724—User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/14—Systems for two-way working
    • H04N7/141—Systems for two-way working between two video terminals, e.g. videophone
    • H04N7/148—Interfacing a video terminal to a particular transmission medium, e.g. ISDN

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Human Computer Interaction (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

본 발명은 화상 통화 송수신 방법 및 이를 이용하는 화상 통화 장치에 관한 것이다.
본 발명의 화상 통화 송수신 방법 및 이를 이용하는 화상 통화 장치는 수집된 영상의 일정 영역을 필터로 필터링하여 일정 영역의 데이터 크기를 감소시키는 한편, 타 영역에 대한 인코딩 시 추가 비트를 할당하여, 영상의 해상도를 부분적으로 다르게 인코딩할 수 있다. 이에 따라, 사용자의 시각이 주로 인지하는 중앙영역의 해상도는 높이고, 주변 영역은 낮춤으로써, 보다 개선된 화질을 제공할 수 있다.
휴대폰, 이동통신 단말기, 영상 통화, 카메라

Description

화상 통화 송수신 방법 및 이를 이용하는 화상 통화 장치{METHOD FOR TRANSMITTING AND RECEIVING VIDEO CALL, APPARATUS OF VIDEO CALL USING THE SAME}
도 1은 본 발명의 실시 예에 따른 화상 통화 시스템의 구성을 개략적으로 나타낸 도면,
도 2는 본 발명의 실시 예에 따른 이동통신 단말기의 구조를 개략적으로 나타내는 블록도.
도 3은 본 발명의 실시 예에 따른 필터 영역을 개략적으로 나타내는 도면.
도 4a 내지 도 4c는 본 발명의 실시 예에 따른 필터가 적용된 영상을 나타낸 화면 예시도,
도 5는 본 발명의 실시 예에 따른 화상 통화 방법을 나타낸 순서도.
본 발명은 화상 통화 송수신 방법 및 이를 이용하는 화상 통화 장치에 관한 것으로, 보다 상세하게는 사용자가 집중하지 않는 영상의 일정 부분을 필터링하여 화질을 열화시켜 담고 있는 정보를 줄임으로써, 전송에 주어진 대역폭을 사용함에 있어 사용자가 집중하는 부분에 대해 상대적으로 더 많은 정보를 전송하도록 하여 화질을 개선할 수 있는 화상 통화 송수신 방법 및 이를 이용하는 화상 통화 장치에 관한 것이다.
이동통신 단말기는 급속한 기술 발전을 통해 초기의 단순한 음성 통화 및 단문메시지 전송 기능에서 영상 통화, 전자수첩기능, 인터넷 기능 등과 같이 다양한 기능을 구비하게 되었다. 그리고 상기 이동통신 단말기는 최근에 이르러서 디지털 카메라 기능이 추가로 구비되어가고 있는 추세이다. 이에 따라, 상기 이동통신 단말기는 원하는 동영상 또는 정지 영상을 손쉽게 촬영하여 저장하고, 이를 배경화면으로 사용할 수 있는 기능이 사용자들에게 제공되고 있다
상술한 카메라 기능을 가지는 이동통신 단말기들은 수집된 촬영 영상을 기반으로 화상 통화를 수행할 수 있다. 그런데, 현재 화상 통화를 위해 할당된 주파수 대역폭은 매우 협소하여 많은 양의 데이터를 실시간으로 전송하기에는 부족한 실정이다. 이에 따라, 상술한 조건에서 적은 양의 데이터 즉, 화질이 낮은 데이터를 전송해야 하기 때문에, 현재의 화상 통화 시 화질은 매우 낮은 실정이다. 이에 따라, 현재의 상황에서 화질을 개선할 수 있는 방법의 개발이 절실히 필요한 실정이다.
따라서 본 발명의 목적은 전술된 바와 같은 종래 기술의 문제점을 해결하기 위한 것으로, 화상 통화 시, 송수신되는 데이터의 크기 및 양을 감소시킬 수 있으며, 화상의 화질을 개선할 수 있는 화상 통화 송수신 방법 및 이를 이용하는 화상 통화 장치를 제공함에 있다.
상기 목적을 달성하기 위한 본 발명에 따른 화상 통화 송신 방법은, 영상을 수집하는 과정; 상기 영상의 일정 영역을 필터링하는 과정; 상기 일정 영역이 필터링 된 영상을 인코딩 하는 과정; 및 상기 인코딩 된 화상 데이터를 포함하는 화상 통화 데이터를 송신하는 과정;을 포함하는 것을 특징으로 한다.
상기 목적을 달성하기 위한 본 발명에 따른 화상 통화 수신 방법은, 화상 통화 방법에 있어서, 일정 영역이 필터링 된 화상 데이터, 오디오 데이터 및 제어 신호가 먹싱된 화상 통화 데이터를 수신하는 과정; 상기 화상 통화 데이터를 디먹싱하여 각 신호를 분리하는 과정; 및 상기 화상 데이터 및 상기 오디오 데이터를 상기 제어 신호에 따라 재생하는 과정을 포함하는 것을 특징으로 한다.
상기 목적을 달성하기 위한 본 발명에 따른 화상 통화 송수신 방법은, 화상 통화 방법에 있어서, 영상을 수집하는 과정; 상기 수집된 영상의 일정 영역을 필터링하는 과정; 상기 일정 영역이 필터링 된 영상을 인코딩 하는 과정; 상기 인코딩 된 제1 화상 데이터를 포함하는 제1 화상 통화 데이터를 송신하는 과정; 외부로부터 일정 영역이 필터링 된 제2 화상 데이터를 포함하는 제2 화상 통화 데이터를 수신하는 과정; 및 상기 제2 화상 데이터를 재생하는 과정을 포함하는 것을 특징으로 한다.
또한, 상기 목적을 달성하기 위한 본 발명에 따른 화상 통화 장치는, 영상을 수집하는 카메라; 상기 수집된 영상을 필터링하는 필터; 상기 필터링 된 영상 또는 상기 수집된 영상을 처리하여 화상 데이터를 생성하고, 상기 제1 화상 데이터 와 제어 신호 및 오디오 데이터를 포함하는 제1 화상 통화 데이터를 생성하는 제어부; 상기 제어부에 제어에 따라 상기 제1 화상 통화 데이터를 외부로 전송하고, 외부로부터 제2 화상 통화 데이터를 수신하는 무선주파수부; 및 상기 제2 화상 통화 데이터에 포함된 제2 화상 데이터를 표시하고, 상기 제1 화상 데이터 및 상기 수집된 영상 중 어느 하나를 표시하는 표시부;를 포함하는 것을 특징으로 한다.
이하, 본 발명의 실시 예를 첨부된 도면에 의거하여 상세히 설명한다.
실시 예를 설명함에 있어서 본 발명이 속하는 기술 분야에 익히 알려져 있고 본 발명과 직접적으로 관련이 없는 기술 내용에 대해서는 설명을 생략한다. 또한, 실질적으로 동일한 구성과 기능을 가진 구성 요소들에 대해서는 상세한 설명을 생략하도록 한다.
마찬가지의 이유로 첨부 도면에 있어서 일부 구성요소는 과장되거나 생략되거나 또는 개략적으로 도시되었으며, 각 구성요소의 크기는 실제 크기를 전적으로 반영하는 것이 아니다. 따라서 본 발명은 첨부한 도면에 그려진 상대적인 크기나 간격에 의해 제한되어지지 않는다.
본 발명의 상세한 설명에 앞서, 이하에서는 본 발명의 실시 예에 따른 기능을 수행하는 호상 통화 장치를, 이동통신 단말기로서 설명하지만, 본 발명이 이에 한정되는 것은 아니다. 즉, 본 발명의 실시 예에 따른 상기 단말기는 화상 통화가 가능한 모듈을 장착한 단말기로서, 바람직하게는 화상 통화 서비스 이용이 가능한 이동통신 단말기, 이동 전화기, 유/무선 전화기, 개인 정보 단말기(PDA, Personal Digital Assistant), 스마트 폰(Smart Phone), 노트북(Notebook) 및 퍼스널 컴퓨터(Personal Computer), 3G 단말기 예를 들면, WCDMA(Wideband Code Division Multiple Access) 방식의 단말기 및 와이브로와 같은 휴대인터넷 단말기, IMT-2000(International Mobile Telecommunication 2000) 단말기, GSM/GPRS(Global System For Mobile Communication/General Packet Radio Service), UMTS(Universal Mobile Telecommunication Service) 단말기 등과 같은 모든 정보통신기기 및 멀티미디어 기기와, 그에 대한 응용에도 적용될 수 있음은 자명할 것이다.
도 1은 본 발명의 실시 예에 따른 화상 통화 장치를 이용한 화상 통화 시스템을 개략적으로 나타내는 블록도이다.
상기 도 1을 참조하면, 본 실시 예에 따른 화상 통화 시스템은 적어도 두개의 이동통신 단말기들(100a, 100b) 및 이동 통신망(50)을 포함하여 구성된다.
상기 이동 통신망(50)은 상기 이동통신 단말기들(100a, 100b) 사이에서 송수신되는 화상 통화 데이터를 중계하는 역할을 수행한다. 이러한 이동 통신망(50)은 상기 이동통신 단말기들(100a, 100b)과 통신채널을 형성하는 기지국과, 기지국을 제어하는 기지국 제어기, 기지국 제어기를 제어하며, 통화 호를 스위칭하는 교환기 및 각 이동통신 단말기들(100a, 100b)의 과금을 책정하는 빌링부 등을 포함할 수 있다. 특히, 본 발명의 이동 통신망(50)은 이동통신 단말기들(100a, 100b) 간에 송수신되는 일부 영역이 필터링 된 화상 데이터를 포함하는 화상 통화 데이터를 중계한다.
상기 이동통신 단말기들(100a, 100b)은 H.324M 시스템과 같은 화상 통화를 지원하는 모듈을 포함한다. 그리고 상기 이동통신 단말기들(100a, 100b)은 화상 통화 호 연결 시 서로 간의 단말기 특성에 따른 비디오 화질과 전송 프레임 속도를 협상한다. 이후, 상기 이동통신 단말기들(100a, 100b)은 상기 협상된 비디오 화질과 전송 프레임 속도에 따라 화상 통화를 수행한다. 상기 협상된 비디오 화질 및 전송 프레임 속도는 별도의 화상 통화 재설정 과정이 없는 한 화상 통화 종료까지 유지될 수 있다. 이때, 상기 이동통신 단말기들(100a, 100b)은 수집된 영상의 일부 영역을 필터링하여 고주파수 성분을 제거한다. 이에 따라, 상기 이동통신 단말기들(100a, 100b)은 수집된 영상 중 일부 영역에 대한 인코딩 시 데이터양을 저감할 수 있다. 또한, 상기 이동통신 단말기들(100a, 100b)은 영상 중 필터링 된 일부 영역과 필터링 되지 않은 영역의 상대적 시각 차이로 인하여, 필터링 되지 않은 영역이 필터링 된 영역보다 높은 해상도를 가지는 것과 같은 효과를 제공할 수 있다. 한편, 상기 이동통신 단말기들(100a, 100b)은 필터링 되지 않은 영역에 대한 이진화 작업 예를 들면 인코딩 작업을 수행하되, 더 많은 추가 비트를 할당하여, 높은 해상도의 데이터양을 인코딩 하도록 제어할 수 있다. 이러한, 본 발명의 이동통신 단말기들(100a, 100b)은 상기 협상된 비디오 화질 및 전송 프레임 속도 내에서, 사용자의 인지도가 상대적으로 낮은 일부 영역 예를 들면 테두리 영역을 저 해상도로 인코딩하며, 사용자의 인지도 상대적으로 높은 일부 영역 예를 들면, 화상의 중앙 부분을 고 해상도로 인코딩 할 수 있다. 결과적으로, 본 발명의 이동통신 단말기들(100a, 100b)은 협상된 화상 통화 규격 내에서, 보다 나은 화상으로 화상 통화를 수행할 수 있다. 이를 보다 상세히 설명하면, 상기 이동통신 단말기 들()은 화상 통화 호 셋팅 시 통화 품질 즉, 비디오 화질과 프레임 전송 속도 등을 협상하게 된다. 이에 따라, 상기 이동통신 단말기들()의 제어부는 상기 카메라가 수집하는 영상을 인코딩 할 경우, 고정된 비트수를 할당하게 된다. 이때, 상기 이동통신 단말기들()은 상기 영상 중 필터링 된 영역에 대하여 인코딩하게 되면, 고주파수 성분에 제거되기 때문에 저주파 성분 또는 이진화 예를 들면 DCT할 경우 "0"이 되는 성분이 많아지게 되어 상기 필터링 된 영역에 대하여 압축률을 높일 수 있다. 이는, 상기 필터링 된 영역 인코딩 시 더 적은 비트를 할당할 수 있는 것을 의미한다. 따라서 상기 이동통신 단말기들()은 상기 필터링 되기 이전의 영역에 할당되어야 하는 비트수를 줄일 수 있으며, 이전영역과 대비하여 여분의 비트를 상기 필터링 되지 않은 영역에 할당할 수 있다. 결과적으로, 상기 이동통신 단말기들()은 필터링 효과를 사용하기 이전과 비교할 때, 상기 필터링 되지 않은 영역에 대하여 더 높은 해상도를 가지도록 인코딩 할 수 있게 된다.
상술한 본 발명의 이동통신 단말기들(100a, 100b)의 각 구성에 대하여 도 2를 참조하여 보다 상세히 살펴보기로 한다. 상기 도 2에 도시된 이동통신 단말기는 상술한 이동통신 단말기들(100a, 100b) 중 어느 하나로, 화상 통화 시, 데이터의 송신 및 수신 기능을 모두 수행할 수 있다.
상기 도 2를 참조하면, 본 발명의 이동통신 단말기들(100a, 100b)은 무선주파수부(110), 카메라(120), 필터(130), 제어부(160), 표시부(150), 메모리(170), 키입력부(140) 및 오디오 처리부(180)를 포함할 수 있다.
상기 무선주파수부(110)는 상기 제어부(160)의 제어에 따라 화상 통화 데이 터를 송신 및 수신한다. 상기 무선 주파수부(110)는 송신되는 신호의 주파수를 상승변환 및 증폭하는 무선 주파수 송신부와, 수신되는 신호를 저잡음 증폭하고 주파수를 하강 변환하는 무선 주파수 수신부 등을 포함할 수 있다.
특히, 본 발명의 무선 주파수부(110)는 제어부(160) 제어에 따라 화상 통화 호 셋업을 위한 신호를 송신 및 수신한다. 그리고 상기 무선 주파수부(110)는 상기 이동통신 단말기들(100a, 100b)의 화상 통화 특성 즉, 통화 가능한 비디오 화질 및 전송 프레임 속도 등에 관련한 데이터를 송신 및 수신한다. 예를 들어, 상기 이동통신 단말기들(100a, 100b) 중 제1 이동통신 단말기(100a)의 전송 프레임 속도가 56kbps이고, 상기 제2 이동통신 단말기(100b)의 전송 프레임 속도가 64kbps인 경우, 상기 이동통신 단말기들(100a, 100b)은 56kbps로 화상 통화하는 것이 바람직하다. 상기, 비디오 화질 및 전송 프레임 속도 등과 관련한 데이터는 상기 이동통신 단말기들(100a, 100b)의 프로파일에 포함될 수 있다. 이에 따라, 상기 이동통신 단말기들()은 상기 프로파일의 송수신을 통하여, 각 이동통신 단말기들(100a, 100b)의 화상 통화 특성을 판단할 수 있다.
상기 카메라(120)는 화상 통화를 위한 영상을 수집한다. 이러한 카메라(120)는 렌즈를 통해 촬상되는 영상을 촬영하며, 촬영된 광 신호를 전기적 신호로 변환하는 카메라 센서(도시되지 않음)와, 카메라 센서로부터 촬영되는 아날로그 영상신호를 디지털 데이터로 변환하는 신호처리부(도시되지 않음)를 구비한다. 여기서 카메라 센서는 CCD(Charge Coupled Device) 센서가 적용될 수 있고, 신호처리부는 DSP(Digital Signal Processor)로 구현될 수 있으나, 이에 한정되는 것은 아 니다. 본 발명의 카메라(120)는 수집된 영상을 필터(130)에 전달한다. 그리고 상기 카메라(120)는 상기 카메라(120)는 상기 수집된 영상을 프리뷰 형태 등으로 상기 표시부(150)에 필터(130)를 거치지 않고 전달할 수 있다.
상기 필터(130)는 상기 카메라(120)가 촬영하여 수집한 영상의 일부 영역을 필터링한다. 이를 위하여, 상기 필터(130)는 저역 통과 필터(Low Pass Filter)로 구현될 수 있다. 본 발명의 필터(130)는 상기 카메라(120)가 수집한 영상의 일부 영역 예를 들면, 테두리 영역을 저역 통과 필터로 필터링하여, 테두리 영역에 분포한 고주파수 성분을 제거한다. 이에 따라, 상기 카메라(120)가 수집한 영상의 테두리 영역의 해상도는 감소된다. 상기 필터링 된 테두리 영역은 인코딩 하는 경우, 고주파 성분이 제거되어 인코딩할 경우 데이터양이 필터링 하기 이전과 비교하여 대폭적으로 감소한다. 상기 필터(130)의 필터 영역에 대하여 도 3을 참조하여 보다 상세히 후술하기로 한다.
상기 제어부(160)는 상기 필터(130)에 의해 필터링 된 영상을 영상처리한 후, 화상 통화 규격에 맞도록 변형하여 화상 데이터를 생성한다. 이렇게 생성된 상기 화상 데이터는 상기 제어부(160)의 제어에 따라 오디오 데이터 및 제어 신호와 함께 상기 무선주파수부(110)를 통하여 외부에 전송된다. 이를 위하여 상기 제어부(160)는 상기 필터링 된 영상을 영상 처리하기 위한 영상 코덱 예를 들면, H.263을 포함하며, 상기 화상 데이터 생성을 위해 상기 H.263 영상 코덱을 포함하는 H.324M(161)을 포함할 수 있다. 이하, 본 발명의 영상 처리를 위한 영상 코덱을 H.263으로, 대표하여 설명하기로 한다.
상기 H.263(162)은 카메라(120)에서 출력되는 영상신호를 프레임 단위로 처리하여 화상 데이터로 변환하고, 상기 화상 데이터를 표시부(150)의 표시 특성 및 크기에 알맞게 변형하여 출력한다. 이때, 상기 H.263(162)은 화상 데이터를 압축할 수 있다. 즉, 상기 H.263(162)은 표시부(150)에 표시되는 화상 데이터를 기 설정된 방식으로 압축하거나 압축된 화상 데이터를 원래의 화상 데이터로 복원하는 기능을 수행한다. 상기, H.263(162)은 JPEG, Wavelet, mpeg2, mpeg4 및 H.264 등으로 대체될 수 있다. 상기 H.263(162)은 상기 카메라(120)가 수집한 영상을 변환할 때, 필터(130)에 의해 전 처리된 영상을 변환할 수 도 있다. 즉, 상기 필터(130)가 상기 카메라(120)와 상기 H.263(162) 사이에 배치된 경우, 상기 H.263은 상기 필터(130)가 전 처리한 영상을 변환한다.
상기 H.324M(161)은 상기 H.263(162)이 생성한 화상 데이터를 기타 데이터들과 함께 먹싱(Muxing)하여 화상 통화 데이터를 생성하고, 상기 화상 통화 데이터를 상기 무선주파수부(110)에 전달한다. 이를 위하여, 상기 H.324M(161)은 상기 오디오 처리부(180)가 수집한 오디오 데이터를 인코딩하기 위한 오디오 코덱 예를 들면, AMR(164)을 포함할 수 있다. 상기 H.324M(161)은 화상 통화 시, 상기 화상 데이터와 상기 오디오 데이터의 싱크 및 제어를 위한 제어 신호를 생성하는 H.245(166)를 포함할 수 있다. 상기 H.324M(161)은 상기 H.263(162)으로부터의 화상 데이터, 상기 AMR(164)로부터의 오디오 데이터, 상기 H.245(166)로부터의 제어 신호를 수신하여 상기 무선주파수부(110)에 전달하는 H.223(168)을 포함할 수 있다. 즉, 상기 H.223(168)은 상기 화상 데이터, 상기 오디오 데이터 및 상기 제어 신호를 먹싱함으로써 화상 통화 데이터를 생성하고, 상기 화상 통화 데이터를 상기 무선주파수부(110)에 전달한다.
상기 키입력부(140)는 숫자 또는 문자 정보를 입력받고 각종 기능들을 설정하기 위한 다수의 입력키 및 기능키들을 포함한다. 상기 기능키들은 특정 기능을 수행하도록 설정된 방향키, 사이드 키 및 단축키 등을 포함할 수 있다. 또한 상기 키입력부(140)는 사용자 설정 및 이동통신 단말기들(100a, 100b)의 기능 제어와 관련하여 입력되는 키 신호를 생성하여 상기 제어부(160)로 전달한다.
특히, 상기 키입력부(140)는 본 발명의 실시 예에 따라 화상 통화 호 형성을 위한 키입력신호, 화상 통화 시, 필터 옵션을 이용할지에 대한 옵션 키입력신호, 화상 통화 종료를 위한 종료 키입력신호 등을 생성하여 상기 제어부(160)로 전달한다.
상기 오디오 처리부(180)는 상기 화상 통화 시 송수신 되는 오디오 데이터를 재생하기 위한 스피커(SPK)와, 화상 통화 시 사용자의 음성 또는 기타 오디오 신호를 수집하기 위한 마이크(MIC)를 포함한다.
상기 표시부(150)는 카메라(120)가 수집한 영상을 영상 처리한 후 프리뷰 영상으로 표시할 수 있다. 여기서 표시부(150)는 LCD(Liquid Crystal Display)가 적용될 수 있으며, 이 경우 표시부(150)는 LCD 제어부, 데이터를 저장할 수 있는 메모리 및 LCD 표시소자 등을 구비할 수 있다. 상기 LCD를 터치스크린 방식으로 구현하는 경우, 표시부(150) 화면은 입력부로 동작될 수 있다.
특히, 본 발명의 표시부(150)는 화상 통화 시, 사용자의 카메라를 통해 수집 되고 전 처리 및 영상 처리된 화상 데이터와, 상대측 단말기가 전송한 화상 데이터를 모두 표시할 수 있다. 예를 들어, 화상 통화를 수행하는 제1 이동통신 단말기(100a)와 제2 이동통신 단말기(100b)기를 가정하면, 제1 이동통신 단말기(100a)의 표시부(150)는 단말기에 장착된 카메라(120)가 수집하여 영상 처리한 화상 데이터를 표시하는 제1 화면과, 제2 이동통신 단말기(100b)가 전송한 화상 데이터를 표시하는 제2 화면을 포함한다. 이때, 상기 제1 화면 및 제2 화면은 동일 평면상에 화면을 분할하여 표시될 수 있으며, 제1 화면상에 제2 화면이 오버랩 되어 표시될 수 도 있다. 한편, 상기 표시부(150)에 표시되는 화면 중 제1 화면 및 제2 화면은 모두 필터링 된 화상 데이터를 재생할 수 있다. 또한, 상기 표시부(150)에 표시되는 화면 중 제1 화면 및 제2 화면은 어느 하나의 화면만이 필터링 된 화상 데이터를 재생할 수 도 있다. 이에 대하여 보다 상세히 설명하면, 제1 이동통신 단말기(100a)는 카메라(120)가 수집한 영상을 필터링하기 이전에 상기 영상을 표시부(150)에 제1 화면으로 표시할 수 있다. 그리고 상기 제1 이동통신 단말기(100a)는 상기 카메라(120)가 수집한 영상을 필터링한 이후, H.263(162)을 이용하여 인코딩 하여 상기 제2 이동통신 단말기(100b)에 전송할 수 있다. 이와 동일하게, 상기 제2 이동통신 단말기(100b)는 제2 화면을 카메라가 수집한 영상 그대로 표시부에 표시하되, 상기 제1 이동통신 단말기(100a)로 전송하는 화상 데이터는 필터(130)를 이용하여 필터링한 이후, 인코딩 하여 전송할 수 있다. 이에 따라, 상기 제1 이동통신 단말기(100a)의 표시부(150) 상에 표시되는 제2 화면은 필터링 된 화상 데이터가 표시될 수 있다. 한편, 상술한 제1 화면 및 제2 화면이 표시되기 위하여, 상 기 필터(130)는 상기 제어부(160)의 H.263(162)의 하부에 배치될 수 있다. 이때, 상기 H.263(162)은 상기 카메라(120)로부터 전달되는 영상을 표시부(150)에 전송되는 영상과 전송을 위한 영상을 각각 처리하여 전달하는 것이 바람직하다. 또 한편, 상기 제1 화면 및 제2 화면은 상기 필터(130)에 의행 필터링 된 영상을 각각 표시할 수 있다. 상기 제1 화면 및 제2 화면에 각각 표시될 수 있는 화면에 대하여 도 4a 내지 도 4c를 참조하여 보다 상세히 설명하기로 한다.
상기 메모리(170)는 본 발명의 실시 예에 따른 기능 동작에 필요한 응용 프로그램을 비롯하여, 화상 통화에 필요한 응용 프로그램, 카메라(120) 동작을 위한 응용 프로그램, 사용자 데이터 등을 저장한다. 그리고 상기 메모리(170)는 화상 통화 시 송수신 되는 화상 통화 데이터에 대하여 지정된 크기만큼 버퍼링하는 기능을 담당할 수 있다. 이러한 상기 메모리(170)는 크게 프로그램 영역과 데이터 영역을 포함할 수 있다.
상기 프로그램 영역은 이동통신 단말기들(100a, 100b)을 부팅시키는 운영체제(OS, Operating System), 화상 통화를 위한 카메라(120) 조작 및 오디오 수집을 위한 응용 프로그램, 이동통신 단말기들(100a, 100b)의 기타 옵션(options) 기능 예컨대, 소리 재생 기능, 이미지 또는 동영상 재생 기능 등에 필요한 응용 프로그램 등을 저장한다. 상기 이동통신 단말기들(100a, 100b)은 사용자 요청에 상응하여 상기한 각 기능을 활성화하는 경우, 상기 제어부(160)의 제어 하에 해당 응용 프로그램들을 이용하여 각 기능을 제공하게 된다.
상기 데이터 영역은 이동통신 단말기들(100a, 100b)의 사용에 따라 발생하는 데이터가 저장되는 영역으로서, 화상 통화 시, 사용자가 녹화한 데이터, 카메라(120)가 수집한 영상 중 사용자가 저장하고자하는 데이터, 상기 이동통신 단말기들(100a, 100b)이 제공하는 다양한 옵션 기능과 관련한 사용자 데이터들 예컨대, 앞서 설명한 동영상과, 폰 북 데이터와, 오디오 데이터 및 해당 컨텐츠 또는 사용자 데이터들에 대응하는 정보들 등을 저장할 수 있다.
이상에서 설명한 바와 같이, 본 발명의 실시 예에 따른 이동통신 단말기 즉, 화상 통화 장치는 카메라(120)가 수집한 영상의 일정 영역 예를 들면 테두리 영역을 저역 통과 필터로 필터링하여 고주파수 성분을 제거한다. 이에 따라, 본 발명의 화상 통화 장치는 송수신할 화상 통화 데이터 중 화상 데이터의 일정 영역에 대한 인코딩 시 데이터양을 감소시킬 수 있다. 또한 본 발명의 화상 통화 장치는 화상 데이터의 데이터양이 감소된 영역 대신에 다른 화상 데이터 영역에 더 많은 추가 비트수를 할당하여 인코딩 함으로써, 상기 화상 데이터의 일정 영역에 대한 해상도를 보다 높게 설정하여 화상 통화를 수행할 수 있다. 이를 보다 상세히 설명하면, 카메라(120)가 수집한 영상에 대하여 동일한 화상 통화 시 비디오 화질이 적용될 경우, 하나의 영상을 인코딩하기 위한 비트 수는 모든 영상에 대하여 동일하게 적용될 수 있다. 이때, 본 발명은 일정 영역에 대하여 필터링을 수행하게 됨으로, 필터링하기 이전의 화면에 비하여 필터링 된 영역에 대한 인코딩 시, 상대적으로 더 적은 비트 수를 할당하여 인코딩할 수 있다. 따라서, 본 발명의 제어부(160)는 비트 수가 고정된 경우, 필터링 되지 않은 일정 영역에 할당될 비트 수가 필터링 영역을 포함하지 않은 영상에 비하여 더 많이 할당할 수 있다. 결과적 으로, 본 발명의 제어부(160)는 필터링 되지 않은 영역에 대하여 추가 비트를 할당하여 인코딩을 수행하게 됨으로 더 높은 해상도를 가지도록 상기 일정 영역을 인코딩 할 수 있게 된다.
도 3은 본 발명의 실시 예에 따른 화질 개선 방법을 설명하기 위한 필터(130)의 필터링 영역에 대하여 개략적으로 나타낸 도면이다.
상기 도 3을 참조하면, 본 발명의 필터(130)는 카메라(120) 수집 영상의 테두리 영역을 필터링한다. 이때, 상기 필터(130)는 저역 통과 필터로서, 수집 영상의 테두리 영역에 배치된 고주파수 성분을 제거한다. 여기서, 상기 필터(130)는 영상의 테두리 영역을 필터링하되, 중앙에 위치한 객체를 제외한 배경을 필터링하는 것이 바람직하다. 이를 위하여, 본 발명의 제어부(160)는 필터(130)의 크기를 조절할 수 있다. 즉, 상기 제어부(160)는 카메라(120)가 영상을 수집하면, 히스토그램 등을 이용하여 영상에 포함된 객체와 배경을 결정하는 경계영역을 추출할 수 있다. 상기 제어부(160)는 이러한 경계영역을 기반으로 하여, 필터링할 테두리 영역의 크기를 결정할 수 있으며, 이에 따라, 상기 필터(130)의 크기가 조절될 수 있다. 한편, 화상 통화 시, 프레임 전송 속도 또는 비디오 화질이 고정되는 특성을 고려하여, 상기 필터(130)의 크기는 일정하게 고정되어 사용될 수 도 있다.
한편, 상기 필터(130)에 의해 필터링 되는 영역은 주파수 변환에 사용되는 블록의 경계를 따라 구성되는 것이 바람직하다. 예를 들어, H.263, MPEG4 등의 영상 코덱은 Luma의 MacroBlock이 16 pixel 크기를 가지는 특성이 있다. 이에 따라, 본 발명의 필터(130)는 16의 배수 좌표를 기준으로 필터링 영역을 결정하는 것이 바람직하다. 따라서 상기 도 3에 가로 세로 줄에 의해 구분된 하나의 영역은 16 픽셀의 크기를 가지는 것이 바람직하다.
도 4a 내지 도 4c는 본 발명의 표시부(150) 상에 표시되는 제1 화면 및 제2 화면의 일예를 나타낸 화면 예시도이다.
상기 도 4a는 카메라(120)를 이용하여 최초로 수집한 영상에 해당할 수 있다. 도시된 바와 같이, 카메라(120)를 이용하여 수집한 영상은 전체적으로 해상도가 고르며, 비교적 높은 편이다. 즉, 상기 도 4a에 도시된 영상은 사람의 윤곽 즉, 이목구비 등이 뚜렷하고 선명하게 나타나고 있으며, 사람의 윤곽을 제외한 주변 배경 또한 전체적으로 뚜렷하고 선명하게 나타나고 있다.
상기 도 4b에 도시된 화면 예시도는 상기 도 4a에 도시된 영상을 화상 통화를 위한 규격에 따라, 압축 및 인코딩하게 되면 화면이다. 상기 도 4b에 도시된 바와 같이 상기 화상 통화 용 화면은 전체적으로 해상도 낮은 것을 알 수 있다. 즉, 화상 통화 용 화면에서 사람은 윤곽이나 이목구비 등의 경계 영역이 주변과 불분명하게 흩어져 있다. 또한, 상기 화상 통화 용 화면에서 배경은 전체적으로 형체를 나타낼 뿐, 사물을 구분하게 하는 정확한 경계영역에 대한 식별이 모호한 상태이다.
상기 도 4c는 도 4a의 영상 중 필터(130)에 의해 필터링 되는 영역을 나타낸 화면 예시도이다. 상기 도 4c를 살펴보면, 카메라(120)가 수집한 영상 중 필터(130)로 구획된 내부 영역의 해상도는 외부 영역의 해상도와 차이가 발생함을 알 수 있다. 다시 말하여, 필터(130)에 의해 필터링 된 영역인 외부 영역은 화면의 해상도가 낮아, 사물들 간의 경계 영역이 불분명하여 물체 구분이 모호한 상태이다. 이와는 다르게, 필터(130)에 의해 필터링 되지 않는 내부 영역은 카메라(120) 수집 영상의 해상도를 보존하고 있어, 처음 수집 영상과 같이, 사람의 윤곽 및 형태의 구분이 뚜렷하고 선명함을 알 수 있다.
즉, 도 4a 내지 도 4c에 도시된 화면 예시도에서와 같이 카메라(120)가 수집한 영상의 일부 영역은 고 해상도를 유지하고, 나머지 영역은 저 해상도로 재생됨으로써, 화상 통화 시 정해진 전송 프레임의 속도나 비디오 화질의 규격을 만족하면서도 화상 통화에 유리한 화질을 유지할 수 있다.
다음으로, 이상과 같은 구성을 갖는 이동통신 단말기들을 통해 수행되는 본 발명의 화상 통화 방법에 대하여 실시 예를 들어 설명한다. 이하의 설명으로부터, 전술한 이동통신 단말기에 대한 구성도 더욱 명료해질 것이다.
도 5는 본 발명의 실시 예에 따른 화상 통화 방법을 개략적으로 나타내는 순서도이다.
상기 도 5를 참조하면, 본 발명의 실시 예에 따른 화상 통화 방법은 먼저, 제어부(160)는 키입력부(140) 또는 외부로부터 화상 통화 요청 발생 여부를 확인한다(S101). 즉, 상기 제어부(160)는 단말기 사용자가 타 단말기와 화상 통화를 위하여 해당 키입력신호를 생성하는 것을 검출하고, 상기 제어부(160)는 상기 키입력신호에 따라, 화상 통화를 위한 신호 송수신을 수행한다. 즉, 상기 제어부(160)는 키입력부(140)에 의해 화상 통화 요청에 해당하는 키입력신호가 발생하면, 상대측 전화번호를 기반으로 화상 통화를 위한 통화 호 요청을 수행한다. 이때, 상기 제 어부(160)는 상기 상대측 단말기와 단말기의 화상 통화 특성을 정의하는 프로파일을 송신 및 수신함으로써, 화상 통화 연결을 위한 규격 예를 들면 비디오 화질 및 프레임 전송 속도 등을 협상한다. 한편, 상기 제어부(160)는 상대측 단말기로부터 화상 통화 요청을 수신한 경우, 상기 프로파일을 상기 상대측 단말기에 전송하고, 상대측 단말기의 프로파일을 제공 받아, 화상 통화를 위한 규격 협상을 수행할 수 있다. 상기 S101 단계에서 상기 제어부(160)는 상기 키입력부(140)의 입력 및 상기 외부로부터 입력되는 신호가 화상 통화 호 형성이 아닌 경우, S101 단계에서 입력되는 신호에 해당하는 해당 기능 예를 들면, 음성 통화 기능, 카메라 기능, 음원 재생 기능, 메시지 전송 기능 등을 수행할 수 있다.
상기 S101 단계에서, 화상 통화 호 형성에 해당하는 신호가 발생한 경우, 상기 제어부(160)는 화상 통화 시 필터(130)를 이용한 필터링 옵션 적용이 설정되었는지 여부를 확인한다(S103). 상기 필터(130)를 이용한 필터링 옵션 적용은 앞서 설명한 바와 같이, 저역 통과 필터를 이용하여 카메라(120)가 수집한 영상의 일정 영역을 필터링하는 기능을 활성화 하는 것이다. 상기 S103 단계에서, 필터링 옵션 적용이 설정되지 않은 경우, 상기 제어부(160)는 기본 화상 통화 기능을 수행한다(S104). 상기 기본 화상 통화 기능은 상기 필터(130)를 이용한 영상의 필터링 과정 없이 일반적인 영상의 압축 및 인코딩 후 송신 및 수신하는 과정을 포함하는 통화 기능이다.
상기 S103 단계에서, 필터링 옵션 적용이 설정되어 있는 경우, 상기 제어부(160)는 화상 통화를 위해 카메라(120)를 활성화하고, 활성화된 카메라(120)를 이용하여 영상을 수집한다(S105). 다음으로, 상기 제어부(160)는 상기 필터(130)를 이용하여 상기 카메라(120)가 수집한 영상을 전 처리 즉, 일정 영역을 필터링하여, 필터링 된 영상을 생성한다(S106). 상기 S106 단계에서, 상기 제어부(160)는 상기 필터(130) 즉, 저역 통과 필터를 이용하여 상기 카메라(120)가 수집한 영상의 일정 영역 예를 들면, 테두리 영역을 필터링한다. 이에 따라, 상기 필터링 된 영상의 테두리 영역에는 고주파 성분에 제거된다. 이때, 상기 필터(130)에 의해 필터링 되는 영역의 크기는 사용자 지정 및 제어부(160) 설정에 따라 변경될 수 있다. 그러나 화상 통화 시 미리 협상되는 화상 통화 규격으로 인하여, 상기 필터(130) 영역은 고정되어 사용되는 것이 바람직하다. 상기 필터링 과정은 필터링 되는 상기 영상의 테두리 영역을 저역 통과를 필터를 이용하여 필터링한다. 그리고 상기 테두리 영역은 상기 영상의 주파수 변환에 사용되는 블록의 경계를 따라 할당되는 것이 바람직하다. 상기 블록은 영상 코덱 즉, H.263, MPEG4 등에 따라 그 크기가 달라질 수 있다.
여기서, 상기 제어부(160)는 상기 카메라(120)가 수집한 영상을 상기 필터링 옵션 기능의 설정에 관계없이, 표시부(150)에 직접 전송하여, 표시하도록 제어할 수 있다. 이에 따라, 상기 표시부(150)는 상기 필터링 되기 이전의 카메라 수집 영상을 표시할 수 있다.
다음으로, 상기 제어부(160)는 상기 필터(130)를 이용하여 전 처리한 영상을 인코딩 및 압축하여 화상 데이터를 생성한다(S107). 이때, 상기 제어부(160)에 포함된 영상 코덱은 상기 전 처리 영상을 압축하게 됨으로, DCT(Discrete Cosine Transform) 및 모션 추정(Motion Estimation) 시에 고주파 성분이 일부 제거된 영상을 압축하게 된다. 이에 따라, 상기 영상 코덱은 상기 전 처리 영상을 보다 바르게 인코딩 할 수 있을 뿐만 아니라, 상기 필터(130)에 의해 구획된 내부 영역에 대하여 인코딩 시, 필터링 영역을 포함하지 않은 이전 영상에 비하여 추가 비트를 할당하여 더 높은 해상도를 가지도록 제어할 수 있다. 이를 보다 상세히 설명하면, 상기 영상 코덱은 고주파수 성분이 제거된 필터링 된 영역에 적은 수의 비트를 할당하여 인코딩이 가능하다. 이에 따라, 상기 영상 코덱은 하나의 영상을 인코딩하기 위해 고정된 비트 수를 할당해야 하는 경우, 필터링 되지 않은 영역에 필터링 영상을 포함하지 않은 영상과 대비하여 더 많은 수의 비트를 할당하여 인코딩 할 수 있다. 결과적으로, 상기 영상 코덱은 필터링 되지 않은 영역을 상대적으로 더 높은 해상도로 인코딩하게 된다.
다음으로, 상기 제어부(160)는 상기 영상 코덱이 인코딩 한 화상 데이터, 오디오 처리부(180)가 수집한 오디오 데이터 및 제어 신호를 먹싱하여 화상 통화 데이터를 생성한다(S108). 상기 제어부(160)는 H.324M을 이용하여 상기 화상 데이터, 오디오 데이터 및 제어 신호를 먹싱할 수 있다. 이후, 상기 제어부(160)는 상기 화상 통화 데이터를 무선주파수부(110)를 이용하여 상대측 단말기로 전송할 수 있다(S109).
한편, 본 발명의 실시 예에 따른 화상 통화 방법에서는 필터링 된 화상 데이터를 생성하여 전송하는 송신 과정에 대하여 예로 하여 설명하였으나, 이에 한정되는 것은 아니다. 즉, 본 발명의 화상 통화 방법은 외부로부터 화상 통화 데이터 를 수신하고, 수신된 화상 통화 데이터를 디먹싱(Demuxing) 및 디코딩 하는 과정을 수행한 후, 표시부(150) 및 오디오 처리부(180)에 의해 재생 처리될 수 있다. 이에 따라, 상기 표시부(150)에 표시되는 영상은 사용자 단말기의 카메라(120)가 수집한 영상을 표시하는 제1 화면 및 상기 상대측 단말기가 전송한 화상 통화 데이터를 재생한 제2 화면을 포함할 수 있다. 여기서, 상기 제1 화면은 필터(130)에 의해 필터링 된 화면 또는 필터링 되지 않은 카메라(120)가 수집한 영상 그대로의 화면이 될 수 있다.
한편, 본 발명의 화상 통화 방법은 수집된 영상의 움직임 변화량에 따라 상기 필터(130)에 의해 필터링되는 영역의 크기를 결정할 수 있다. 이를 도 6을 참조하여 보다 상세히 살펴보기로 한다.
도 6은 본 발명의 다른 실시 예에 따른 화상 통화 방법을 나타낸 순서도이다.
상기 도 6을 참조하면, 본 발명의 화상 통화 방법은 먼저, 제어부(160)는 키입력부(140) 또는 타 단말기로부터의 화상 통화 요청 신호의 발생 여부를 확인한다(S201). 이를 보다 상세히 설명하면, 상기 제어부(160)는 단말기 사용자가 키입력부(140)를 이용하여 화상 통화를 위한 키입력신호를 생성하는 것을 검출한다. 그리고 상기 제어부(160)는 상기 키입력신호에 따라, 화상 통화를 위한 신호 송수신을 수행한다. 즉, 상기 제어부(160)는 화상 통화를 위한 통신채널 형성을 위해 무선주파수부(110)를 제어한다. 이때, 상기 제어부(160)는 상기 상대측 단말기와 화상 통화 특성을 정의하는 프로파일을 송신 및 수신함으로써, 화상 통화 연결을 위한 규격 예를 들면 비디오 화질 및 프레임 전송 속도 등을 협상한다. 또한, 상기 제어부(160)는 상대측 단말기로부터 화상 통화 요청을 수신한 경우, 상기 프로파일을 상기 상대측 단말기에 전송하고, 상대측 단말기의 프로파일을 제공 받아, 화상 통화를 위한 규격 협상을 수행할 수 있다. 한편, 상기 S201 단계에서 상기 제어부(160)는 상기 키입력부(140)의 입력 및 상기 타 단말기로부터 입력되는 신호가 화상 통화 호 형성을 위한 신호가 아닌 경우, S203 단계에서 입력되는 신호에 해당하는 해당 기능 예를 들면, 음성 통화 기능, 카메라 기능, 음원 재생 기능, 메시지 전송 기능 등을 수행할 수 있다.
상기 S201 단계에서, 상기 제어부(160)는 화상 통화 호 형성에 따른 신호가 입력되면, 카메라(120)를 활성화 시켜, 영상을 수집한다. 이때, 상기 제어부(160)는 S205 단계에서와 같이 수집된 영상의 데이터 변화량을 측정한다. 상기 S205 단계에서 영상 데이터 변화량 측정은 다양한 방법을 실시될 수 있다. 예를 들어, 영상 데이터 변화량은 수집된 영상의 일정 영역에 대한 화소값 변화를 검출할 수 있다. 이를 보다 상세히 설명하면, 상기 제어부(160)는 수집된 영상 중 미리 설정된 영역의 픽셀 값들을 저장하고, 다음 영상이 수집되면, 새로 수집한 영상의 동일 영역의 픽셀 값들을 검출하고, 이전에 저장된 픽셀 값과 비교함으로써, 영상 데이터 변화량을 측정할 수 있다. 또한, 상기 제어부(160)는 코덱에 포함된 모션 평가부(Motion Estimation)를 이용하여 상기 영상 데이터 변화량을 측정할 수 있다. 다시 말하여, 상기 제어부(160)는 상기 모션 평가부가 모션 벡터값을 기준으로 움직임 평가를 수행한 결과를 이용하여 현재 수집된 영상의 영상 데이터 변화량을 측 정할 수 있다. 카메라(120)가 수집하는 영상은 연속되어지기 때문에, 현재 영상의 데이터 변화량을 기준으로 다음에 수집되는 영상의 데이터 변화량을 결정하는 것은 효과적이다.
다음으로, 상기 제어부(160)는 상기 S207단계에서 상기 변화량이 기 설정된 설정치보다 큰지 여부를 판단한다. 상기 설정치는 영상 데이터 변화량을 측정하는 방법 및 화상 통화 규격에 따라 달라질 수 있다. 상기 S207 단계에서 변화량이 상기 설정치보다 작은 경우 제어부(160)는 S209 단계에서 기본 화상 통화를 수행한다. 여기서, 기본 화상 통화는 상기 필터(130)를 이용한 영상 전처리 과정을 수행하지 않고, 수집된 카메라(120) 영상을 전처리 과정 없이 인코딩하여 송수신하는 통화를 의미할 수 있다.
한편, 상기 제어부(160)는 상기 변화량이 상기 설정치보다 큰 경우, S211 단계에서 상기 필터(130)에 의해 필터링될 필터 사이즈를 결정한다. 상기 필터 사이즈는 고정될 수 있으며, 이에 따라 상기 제어부(160)는 상기 변화량이 설정치보다 클 경우 고정된 필터 사이즈를 적용하고, 작을 경우 고정된 필터 사이즈를 미적용할 수 있다. 또한, 상기 제어부(160)는 상기 설정치보다 큰 변화량에 대하여 단계적으로 각 값을 구분하고, 구분된 변화량 값에 대응하는 필터 사이즈를 각각 할당하여 필터(130)에 의한 전처리 과정을 수행할 수 도 있다.
다음으로, 상기 제어부(160)는 상기 S211 단계에서 결정된 필터 사이즈를 기반으로 S213 단계에서 상기 영상을 전처리한다. 상기 영상 전처리 과정은 상기 카메라(120)가 수집한 영상의 테두리 영역을 저대역 필터를 이용하여 필터링하는 과정을 포함한다. 이후, 상기 제어부(160)는 상기 전처리된 영상을 S215 단계에서 인코딩하고, 인코딩된 화상 통화 데이터를 S217 단계에서 무선주파수부(110)를 이용하여 타 단말기에 전송할 수 있다.
상술한 바와 같이, 본 발명의 다른 실시 예에 따른 화상 통화 방법은 영상의 데이터 변화량이 없는 경우, 필터를 미적용하여 송수신되는 영상의 해상도를 일정하게 유지하며, 영상의 데이터 변화량이 일정 값 이상인 경우, 설정된 필터 사이즈에 따라 상기 영상을 전처리함으로써, 화상 통화 시 보다 효율적인 데이터 송수신이 가능하다.
또한, 본 명세서와 도면을 통해 본 발명의 바람직한 실시 예들에 대하여 설명하였으며, 비록 특정 용어들이 사용되었으나, 이는 단지 본 발명의 기술 내용을 쉽게 설명하고 발명의 이해를 돕기 위한 일반적인 의미에서 사용된 것일 뿐, 본 발명의 범위를 한정하고자 하는 것은 아니다. 여기에 개시된 실시 예 외에도 본 발명의 기술적 사상에 바탕을 둔 다른 변형 예들이 실시 가능하다는 것은 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에게 자명한 것이다.
이상에서 살펴본 바와 같이 본 발명에 따른 화질 개선 방법, 이를 이용한 화상 통화 장치 및 방법은, 카메라가 수집한 영상을 외부로 전송하기 이전에 필터를 이용하여 전 처리를 수행함으로써, 전송되는 데이터의 양을 저감시킬 수 있을 뿐만 아니라, 영상의 특정 영역에 대한 고해상도를 유지할 수 있도록 비트 할당이 가능하다.

Claims (31)

  1. 화상 통화 방법에 있어서,
    영상을 수집하는 과정;
    상기 영상의 일정 영역을 필터링하는 과정;
    상기 일정 영역이 필터링 된 영상을 인코딩 하는 과정; 및
    상기 인코딩 된 화상 데이터를 포함하는 화상 통화 데이터를 송신하는 과정;을 포함하는 것을 특징으로 하는 화상 통화 송신 방법.
  2. 제 1 항에 있어서,
    상기 필터링 과정은
    상기 영상의 테두리 영역을 필터링하는 것을 특징으로 하는 화상 통화 송신 방법.
  3. 제 2 항에 있어서,
    상기 필터링 과정은
    상기 영상의 테두리 영역을 저역 통과 필터를 이용하여 필터링하는 것을 특징으로 하는 화상 통화 송신 방법.
  4. 제 3 항에 있어서,
    상기 테두리 영역은
    상기 영상의 주파수 변환에 사용되는 블록의 경계를 따라 할당되는 것을 특징으로 하는 화상 통화 송신 방법.
  5. 제 1 항에 있어서,
    상기 화상 통화 데이터의 전송 속도 및 데이터 크기를 포함하는 화상 통화 규격이 화상 통화 기간 중 고정된 것을 특징으로 하는 화상 통화 송신 방법.
  6. 제 5 항에 있어서,
    상기 인코딩 과정은
    하나의 영상을 인코딩하기 위해 할당해야할 비트수가 고정된 경우,
    상기 필터링 된 일정 영역에 대하여 인코딩 시 필터링 되기 이전에 할당해야 할 비트 수보다 작은 비트 수를 할당하는 과정,
    상기 할당 과정에 따라 남게 되는 여분의 추가 비트를 상기 필터링 되지 않은 영역에 할당하여 인코딩 하는 과정을 포함하는 것을 특징으로 하는 화상 통화 송신 방법.
  7. 제 1 항에 있어서,
    상기 수집된 영상을 표시하는 과정, 또는
    상기 일정 영역이 필터링 된 영상을 표시하는 과정을 더 포함하는 것을 특 징으로 하는 화상 통화 송신 방법.
  8. 제 1 항에 있어서,
    상기 수집된 영상의 데이터 변화량을 검출하는 과정;
    상기 데이터 변화량과 기 설정된 설정값을 비교하여 상기 필터의 적용여부를 결정하는 과정을 더 포함하는 것을 특징으로 하는 화상 통화 송신 방법.
  9. 제 8 항에 있어서,
    상기 필터링 과정은
    상기 영상에 대한 데이터 변화량에 따라 저역 통과 필터의 크기를 조정하는 것을 특징으로 하는 화상 통화 송신 방법.
  10. 화상 통화 방법에 있어서,
    일정 영역이 필터링 된 화상 데이터, 오디오 데이터 및 제어 신호가 먹싱된 화상 통화 데이터를 수신하는 과정;
    상기 화상 통화 데이터를 디먹싱하여 각 신호를 분리하는 과정; 및
    상기 화상 데이터 및 상기 오디오 데이터를 상기 제어 신호에 따라 재생하는 과정을 포함하는 것을 특징으로 하는 화상 통화 수신 방법.
  11. 제 10 항에 있어서,
    상기 재생 과정은
    상기 화상 통화 데이터의 전송 속도 및 데이터 크기를 포함하는 화상 통화 규격이 고정됨에 따라, 상기 화상 데이터를 인코딩 하기 위해 할당되는 비트 수가 고정되면,
    상기 화상 데이터의 필터링 된 일정 영역에 대하여 디코딩 시 필터링 되기 이전에 할당해야 할 비트 수보다 적은 비트 수를 할당하는 과정; 및
    상기 할당 과정에 따라 남게 되는 여분의 추가 비트를 상기 필터링 되지 않은 영역에 할당하여 디코딩하는 과정을 포함하는 것을 특징으로 하는 화상 통화 수신 방법.
  12. 제 10 항에 있어서,
    상기 재생 과정은
    상기 영상의 테두리 영역이 필터링 된 화상 데이터를 표시하는 과정을 포함하는 것을 특징으로 하는 화상 통화 수신 방법.
  13. 제 12 항에 있어서,
    상기 영상의 테두리 영역은
    저역 통과 필터에 의해 필터링 된 것을 특징으로 하는 화상 통화 수신 방법.
  14. 제 13 항에 있어서,
    상기 테두리 영역은
    상기 영상의 주파수 변환에 사용되는 블록의 경계를 따라 크기가 결정되는 것을 특징으로 하는 화상 통화 수신 방법.
  15. 화상 통화 방법에 있어서,
    영상을 수집하는 과정;
    상기 수집된 영상의 일정 영역을 필터링하는 과정;
    상기 일정 영역이 필터링 된 영상을 인코딩 하는 과정;
    상기 인코딩 된 제1 화상 데이터를 포함하는 제1 화상 통화 데이터를 송신하는 과정;
    외부로부터 일정 영역이 필터링 된 제2 화상 데이터를 포함하는 제2 화상 통화 데이터를 수신하는 과정; 및
    상기 제2 화상 데이터를 재생하는 과정을 포함하는 것을 특징으로 하는 화상 통화 송수신 방법.
  16. 제 15 항에 있어서,
    상기 제1 화상 데이터 또는 상기 수집된 영상을 표시하는 과정을 포함하는 것을 특징으로 하는 화상 통화 송수신 방법.
  17. 제 16 항에 있어서,
    상기 제1 화상 데이터 또는 상기 수집된 영상은 상기 제2 화상 데이터와 동일화면 상에 표시되는 것을 특징으로 하는 화상 통화 송수신 방법.
  18. 제 17 항에 있어서,
    상기 제1 화상 데이터 및 상기 제2 화상 데이터는 테두리 영역이 필터링 된 영상인 것을 특징으로 하는 화상 통화 송수신 방법.
  19. 제 18 항에 있어서,
    상기 테두리 영역은
    상기 영상의 주파수 변환에 사용되는 블록의 경계를 따라 크기가 결정되는 것을 특징으로 하는 화상 통화 송수신 방법.
  20. 제 15 항에 있어서,
    상기 제1 및 제2 화상 통화 데이터의 전송 속도 및 데이터 크기를 포함하는 화상 통화 규격이 고정된 것을 특징으로 하는 화상 통화 송수신 방법.
  21. 제 20 항에 있어서,
    상기 인코딩 과정은
    인코딩하기 위한 비트 할당 수가 고정된 경우,
    상기 인코딩 과정에서 상기 필터링 된 일정 영역에 대하여 필터링 되기 이전에 할당해야 할 비트 수보다 적은 비트 수를 할당하는 과정,
    상기 할당 과정에 따라 남게 되는 여분의 추가 비트를 상기 필터링 되지 않은 영역에 할당하여 인코딩 하는 과정을 포함하는 것을 특징으로 하는 화상 통화 송수신 방법.
  22. 제 15 항에 있어서,
    상기 수집된 영상의 데이터 변화량을 검출하는 과정;
    상기 데이터 변화량과 기 설정된 설정값을 비교하여 상기 필터의 적용여부를 결정하는 과정을 더 포함하는 것을 특징으로 하는 화상 통화 송신 방법.
  23. 제 22 항에 있어서,
    상기 필터링 과정은
    상기 영상에 대한 데이터 변화량에 따라 저역 통과 필터의 크기를 조정하는 것을 특징으로 하는 화상 통화 송신 방법.
  24. 화상 통화 장치에 있어서,
    영상을 수집하는 카메라;
    상기 수집된 영상을 필터링하는 필터;
    상기 필터링 된 영상 또는 상기 수집된 영상을 처리하여 화상 데이터를 생성 하고, 상기 제1 화상 데이터와 제어 신호 및 오디오 데이터를 포함하는 제1 화상 통화 데이터를 생성하는 제어부;
    상기 제어부에 제어에 따라 상기 제1 화상 통화 데이터를 외부로 전송하고, 외부로부터 제2 화상 통화 데이터를 수신하는 무선주파수부; 및
    상기 제2 화상 통화 데이터에 포함된 제2 화상 데이터를 표시하고, 상기 제1 화상 데이터 및 상기 수집된 영상 중 어느 하나를 표시하는 표시부;를 포함하는 것을 특징으로 하는 화상 통화 장치.
  25. 제 24 항에 있어서,
    상기 화상 통화 호 형성을 위한 키입력신호를 생성하는 키입력부; 및
    상기 오디오 데이터를 수집 및 재생하는 오디오 처리부;를 더 포함하는 것을 특징으로 하는 화상 통화 장치.
  26. 제 22 항에 있어서,
    상기 필터는
    상기 영상의 테두리 영역을 필터링 하는 저역 통과 필터 인 것을 특징으로 하는 화상 통화 장치.
  27. 제 26 항에 있어서,
    상기 테두리 영역은
    상기 영상의 주파수 변환에 사용되는 블록의 경계를 따라 크기가 결정되는 것을 특징으로 하는 화상 통화 장치.
  28. 제 24 항에 있어서,
    상기 제어부는
    상기 제1 화상 통화 데이터 및 제2 화상 통화 데이터의 전송 속도 및 데이터 크기를 고정된 화상 통화 규격에 따라 송수신하는 것을 특징으로 하는 화상 통화 장치.
  29. 제 28 항에 있어서,
    상기 제어부는
    하나의 영상을 인코딩하기 위해 할당해야할 비트수가 고정된 경우, 상기 필터링 된 일정 영역에 대하여 인코딩 시 필터링 되기 이전에 할당해야 할 비트 수보다 작은 비트 수를 할당하고, 상기 필터링 된 일정 영역에 대한 인코딩 수행에 따라 남게 되는 여분의 추가 비트를 상기 필터링 되지 않은 영역에 할당하여 인코딩 하는 과정을 포함하는 것을 특징으로 하는 화상 통화 장치.
  30. 제 24 항에 있어서,
    상기 제어부는
    상기 수집된 영상의 데이터 변화량을 검출하고, 상기 데이터 변화량과 기 설정된 설정값을 비교하여 상기 필터의 적용여부를 결정하는 것을 특징으로 하는 화상 통화 장치.
  31. 제 30 항에 있어서,
    상기 필터는
    상기 영상에 대한 데이터 변화량에 따라 저역 통과 필터의 크기를 조정하는 것을 특징으로 하는 화상 통화 장치.
KR1020070049387A 2007-05-21 2007-05-21 화상 통화 송수신 방법 및 이를 이용하는 화상 통화 장치 KR20080102668A (ko)

Priority Applications (2)

Application Number Priority Date Filing Date Title
KR1020070049387A KR20080102668A (ko) 2007-05-21 2007-05-21 화상 통화 송수신 방법 및 이를 이용하는 화상 통화 장치
US12/123,675 US20080291262A1 (en) 2007-05-21 2008-05-20 Visual communication method and appratus

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020070049387A KR20080102668A (ko) 2007-05-21 2007-05-21 화상 통화 송수신 방법 및 이를 이용하는 화상 통화 장치

Publications (1)

Publication Number Publication Date
KR20080102668A true KR20080102668A (ko) 2008-11-26

Family

ID=40072003

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020070049387A KR20080102668A (ko) 2007-05-21 2007-05-21 화상 통화 송수신 방법 및 이를 이용하는 화상 통화 장치

Country Status (2)

Country Link
US (1) US20080291262A1 (ko)
KR (1) KR20080102668A (ko)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102340647A (zh) * 2010-07-20 2012-02-01 上海闻泰电子科技有限公司 手机双向视频的实现方法
US8896652B2 (en) * 2011-02-28 2014-11-25 Soryn Technologies Llc System and method for real-time video communications
JP7349863B2 (ja) * 2019-09-26 2023-09-25 池上通信機株式会社 映像処理方法、映像処理装置、及びプログラム
CN110636294B (zh) * 2019-09-27 2024-04-09 腾讯科技（深圳）有限公司 视频解码方法及装置，视频编码方法及装置

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6252989B1 (en) * 1997-01-07 2001-06-26 Board Of The Regents, The University Of Texas System Foveated image coding system and method for image bandwidth reduction
US6496607B1 (en) * 1998-06-26 2002-12-17 Sarnoff Corporation Method and apparatus for region-based allocation of processing resources and control of input image formation
US20020075382A1 (en) * 2000-12-01 2002-06-20 Yoram Cohen Method and apparatus for implementing a thin-client videophone in a cable television network
US7027655B2 (en) * 2001-03-29 2006-04-11 Electronics For Imaging, Inc. Digital image compression with spatially varying quality levels determined by identifying areas of interest
US7446795B2 (en) * 2004-12-03 2008-11-04 Motorola Inc Push to video service mode selection using device settings
US8787445B2 (en) * 2007-03-15 2014-07-22 Nvidia Corporation Allocation of available bits to represent different portions of video frames captured in a sequence

Also Published As

Publication number Publication date
US20080291262A1 (en) 2008-11-27

Similar Documents

Publication Publication Date Title
RU2653314C2 (ru) Способ и устройство сжатия изображений и сервер
WO2020097888A1 (zh) 视频处理方法、装置、电子设备及计算机可读存储介质
KR101421587B1 (ko) 무선 영상 전화 단말간의 선호 영상 규격을 결정하는 방법및 장치
CN104322065A (zh) 终端和视频图像压缩方法
WO2008060031A1 (en) Portable device having image overlay function and method of overlaying image in portable device
WO2009051857A2 (en) System and method for video coding using variable compression and object motion tracking
CN105163059A (zh) 一种基于智能家居设备的视频通话方法及视频通话系统
CN104378635A (zh) 基于麦克风阵列辅助的视频感兴趣区域的编码方法
KR20080102668A (ko) 화상 통화 송수신 방법 및 이를 이용하는 화상 통화 장치
KR20140088924A (ko) 이미지 데이터 표시장치 및 방법
JP2001218179A (ja) ビデオ画像送信方法、ビデオ画像処理方法、ビデオカメラ操作方法、及び画像処理回路
CN110865782A (zh) 数据传输方法、装置及设备
CN113099233A (zh) 视频编码方法、装置、视频编码设备及存储介质
EP1747674A1 (en) Image compression for transmission over mobile networks
CN110602440A (zh) 一种音视频数据流的传输方法、装置及终端
JP2000059772A (ja) 映像表示方式
KR100601475B1 (ko) 이미지 복잡도에 따라 가변적 양자화 크기를 갖는 이미지압축 장치 및 그 방법
JPH1051770A (ja) 画像符号化システム及び方法、及び画像分割システム
JP2006094420A (ja) 画像処理装置及び画像処理方法
CN116129308A (zh) 一种视频质量增强方法、装置、电子设备及存储介质
US20080106639A1 (en) Video enhancement Internet media experience in converting high definition formats to video formats
EP3497929A1 (en) Image compression based on semantic relevance
US8140955B2 (en) Image communication portable terminal and method for carrying out image communication using the same
CN115623213A (zh) 视频编码方法、装置、系统和电子设备
CN100591113C (zh) 图像处理装置

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E601 Decision to refuse application