KR101396832B1 - 휴대 단말기의 화상 회의 방법 및 장치 - Google Patents

휴대 단말기의 화상 회의 방법 및 장치 Download PDF

Info

Publication number
KR101396832B1
KR101396832B1 KR1020070131045A KR20070131045A KR101396832B1 KR 101396832 B1 KR101396832 B1 KR 101396832B1 KR 1020070131045 A KR1020070131045 A KR 1020070131045A KR 20070131045 A KR20070131045 A KR 20070131045A KR 101396832 B1 KR101396832 B1 KR 101396832B1
Authority
KR
South Korea
Prior art keywords
signal
image signal
video
video signal
image
Prior art date
Application number
KR1020070131045A
Other languages
English (en)
Other versions
KR20090063608A (ko
Inventor
최지환
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to KR1020070131045A priority Critical patent/KR101396832B1/ko
Priority to US12/332,862 priority patent/US8373740B2/en
Publication of KR20090063608A publication Critical patent/KR20090063608A/ko
Application granted granted Critical
Publication of KR101396832B1 publication Critical patent/KR101396832B1/ko

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04BTRANSMISSION
    • H04B1/00Details of transmission systems, not covered by a single one of groups H04B3/00 - H04B13/00; Details of transmission systems not characterised by the medium used for transmission
    • H04B1/38Transceivers, i.e. devices in which transmitter and receiver form a structural unit and in which at least one part is used for functions of transmitting and receiving
    • H04B1/40Circuits
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/14Systems for two-way working
    • H04N7/141Systems for two-way working between two video terminals, e.g. videophone
    • H04N7/147Communication arrangements, e.g. identifying the communication as a video-communication, intermediate storage of the signals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/14Systems for two-way working
    • H04N7/141Systems for two-way working between two video terminals, e.g. videophone
    • H04N7/148Interfacing a video terminal to a particular transmission medium, e.g. ISDN
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/14Systems for two-way working
    • H04N7/15Conference systems
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M2250/00Details of telephonic subscriber devices
    • H04M2250/62Details of telephonic subscriber devices user interface aspects of conference calls
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/14Systems for two-way working
    • H04N7/141Systems for two-way working between two video terminals, e.g. videophone
    • H04N7/142Constructional details of the terminal equipment, e.g. arrangements of the camera and the display
    • H04N2007/145Handheld terminals

Abstract

본 발명은 휴대 단말기의 화상 회의 방법 및 장치에 관한 것으로, 이러한 본 발명은, 다수의 사용자가 수행하는 휴대 단말기의 화상 회의 방법에 있어서, 상기 다수의 사용자의 음성 및 영상 신호를 가지는 화상 신호를 수신하는 과정과, 상기 화상 신호에 의거하여 현재 발언자의 화상 신호를 선택하는 과정과, 상기 선택한 화상 신호의 영상 신호의 모든 프레임을 디코딩하고 이외의 영상 신호의 프레임은 선택적으로 디코딩하는 과정과, 상기 디코딩한 영상 신호를 재생하는 과정을 포함하는 것을 특징으로 하는 휴대 단말기의 화상 회의 방법 및 이를 위한 장치를 제공한다.
화상 회의, 프레임

Description

휴대 단말기의 화상 회의 방법 및 장치{A Method for performing a video conference in a portable terminal and an apparatus thereof}
본 발명은 휴대 단말기의 화상 회의 방법 및 장치에 관한 것으로, 특히, 현재 발언하고 있는 화자에 집중하여 재생하기 위한 휴대 단말기의 화상 회의 방법 및 장치에 관한 것이다.
일반적으로 화상 단말기는 비디오 및 오디오 채널을 통해 영상과 음성을 주고받으며 화상 통화를 수행하기 위한 것이다. 화상 통화는 카메라가 부착된 화상 단말기를 통해 상대방을 보면서 통화하기 위한 방식으로, 교환기를 이용한 회선교환 방식과 올-아이피(All-IP)망을 이용한 패킷 교환 방식으로 분류할 수 있다. 이러한 화상 통화는 ITU(InternationalTelecommunication Union)에서 정의하는 국제 표준인 H.323 또는 H.324M 프로토콜을 이동통신 시스템에 구현해야 한다. H.323은 패킷 데이터망인 IP(Internet Protocol)망에서 화상전화 서비스 제공을 가능하게 하는 시스템 프로토콜이고, H.324는 공중망을 기준으로 개발된 시스템 프로토콜이며, H.324M(Mobile)은 H.324를 이동통신용으로 개량한 것이다.
이러한 화상 통화용 휴대 단말기를 이용하여 화상 회의를 수행하는 경우, 수 신되는 화상 신호는 회의 참가자 모두의 음성 및 영상 신호를 수신하게 된다.
휴대 단말기는 휴대 목적으로 이용되는 단말기이므로, 그 크기의 제약을 가진다. 이러한 이유로 휴대 단말기는 자원(CPU, 메모리 등)의 한계를 가질 수 밖에 없다. 따라서 상술한 바와 같이 다수의 회의 참가자의 음성 및 영상 신호를 재생하는 것은 그 자원의 한계를 가질 수 있다.
따라서 상술한 바와 같은 종래의 문제점을 감안한 본 발명의 목적은 화상 통화 단말기를 이용하여 다자간에 이루어지는 화상 회의 시, 다수의 화상 신호 중 현재의 발언자에 집중하여 재생하는 휴대 단말기의 화상 회의 방법 및 장치를 제공함에 있다. 또한, 본 발명의 다른 목적은 휴대 단말기의 한정적인 자원을 효율적으로 사용하기 위한 휴대 단말기의 화상 회의 방법 및 장치를 제공함에 있다.
상술한 바와 같은 목적을 달성하기 위한 본 발명의 바람직한 실시 예에 따른 휴대 단말기의 휴대 단말기의 화상 회의 방법은, 다수의 사용자가 수행하는 휴대 단말기의 화상 회의 방법에 있어서, 상기 다수의 사용자의 음성 및 영상 신호를 가지는 화상 신호를 수신하는 과정과, 상기 화상 신호에 의거하여 현재 발언자의 화상 신호를 선택하는 과정과, 상기 선택한 화상 신호의 영상 신호의 모든 프레임을 디코딩하고 이외의 영상 신호의 프레임은 선택적으로 디코딩하는 과정과, 상기 디코딩한 영상 신호를 재생하는 과정을 포함하여 이루어진다.
상기 선택하는 과정은, 상기 화상 신호 중 음성 신호의 음량이 가장 높은 화상 신호를 선택하는 것을 특징으로 한다.
상기 선택하는 과정은, 상기 화상 신호의 음성 및 영상 신호 중 어느 하나 이상을 기준으로 하며, 상기 기준의 비트 율이 가장 높은 화상 신호를 선택하는 것을 특징으로 한다.
상기 선택하는 과정은, 상기 화상 신호를 처리하기 위한 상기 휴대 단말기 자원의 사용량이 가장 큰 화상 신호를 선택하는 것을 특징으로 한다. 이때, 상기 자원의 사용량은, 상기 화상 신호를 처리하기 위한 메모리 사용량 및 제어부 사용량 중 어느 하나 이상을 포함하는 것을 특징으로 한다.
상기 선택적으로 디코딩하는 과정은, I 프레임만 디코딩하거나, 디코딩하지 않는 것이 바람직하다.
상술한 바와 같은 목적을 달성하기 위한 본 발명의 바람직한 실시 예에 따른 휴대 단말기의 휴대 단말기의 화상 회의 장치는, 다수의 사용자가 수행하는 휴대 단말기의 화상 회의 장치에 있어서, 상기 다수의 사용자의 음성 및 영상 신호를 가지는 화상 신호를 수신하는 무선 통신부; 상기 화상 신호에 의거하여 현재 발언자의 화상 신호를 선택하며, 상기 선택한 화상 신호의 영상 신호의 모든 프레임을 디코딩하고 이외의 영상 신호는 선택적으로 디코딩하는 제어부; 및 상기 디코딩한 영상 신호를 재생하는 표시부를 포함하여 구성된다.
상기 제어부는 상기 이외의 영상 신호의 I 프레임만 디코딩하거나, 디코딩하지 않는 것이 바람직하다.
상기 제어부는 상기 화상 신호 중 음성 신호의 음량이 가장 높은 화상 신호를 상기 현재 발언자의 화상 신호로 선택하는 것을 특징으로 한다.
상기 제어부는 상기 화상 신호의 음성 및 영상 신호 중 어느 하나 이상을 기준으로 하여, 상기 기준의 비트 율이 가장 높은 화상 신호를 상기 현재 발언자의 화상 신호로 선택하는 것을 특징으로 한다.
상기 제어부는 상기 화상 신호를 처리하기 위한 상기 휴대 단말기 자원의 사용량이 가장 큰 화상 신호를 상기 현재 발언자의 화상 신호로 선택하는 것을 특징으로 한다. 이때, 상기 자원의 사용량은, 상기 화상 신호를 처리하기 위한 메모리 사용량 및 제어부 사용량 중 어느 하나 이상인 것을 특징으로 한다.
본 발명에 따르면, 화상 회의에서 발언하고 있는 화자를 선택하여 재생함으로써 발언하지 않는 사용자들을 발언자의 발언 내용에 집중하게 할 수 있다. 또한, 휴대 단말기의 한정적이 자원을 절약할 수 있다. 따라서, 휴대 단말기 사용을 늘리는 이점이 있다.
이하, 본 발명에 따른 바람직한 실시 예를 첨부한 도면을 참조하여 상세히 설명한다. 하기의 설명에서는 본 발명에 따른 동작을 이해하는데 필요한 부분만이 설명되며 그 이외 부분의 설명은 본 발명의 요지를 흩트리지 않도록 생략될 것이라는 것을 유의하여야 한다.
본 발명의 상세한 설명에 앞서, 설명의 편의를 위해 본 발명의 실시 예에 따른 화상 통화가 가능한 휴대 단말기를 휴대 단말기로 명명하며, 이동통신 단말기로 예로 하여 설명하지만, 본 발명이 이에 한정되는 것은 아니다. 즉, 본 발명의 실시 예에 따른 상기 휴대 단말기는 사용자에게 화상 통화 기능을 제공하기 위한 단말기로서, 바람직하게는 화상 통화가 가능한 이동통신 단말기, 이동 전화기, 개인 정보 단말기(PDA, Personal Digital Assistant), 스마트 폰(Smart Phone), IMT- 2000(International Mobile Telecommunication 2000) 단말기, UMTS(Universal Mobile Telecommunication Service) 단말기, 노트북(Notebook) 및 퍼스널 컴퓨터(Personal Computer) 등과 같은 모든 정보통신기기 및 멀티미디어 기기와, 그에 대한 응용에도 적용될 수 있음은 자명할 것이다.
상술한 바와 같은 본 발명의 실시 예에 따른 휴대 단말기의 개략적인 구성을 살펴보기로 한다. 도 1은 본 발명의 실시 예에 따른 휴대 단말기의 개략적인 구성을 도시한 도면이다.
도 1을 참조하면, 본 발명의 실시 예에 따른 화상 단말기는 무선통신부(110), 오디오처리부(120), 입력부(130), 표시부(140), 카메라부(150), 저장부(160), 및 제어부(170)로 이루어진다.
무선통신부(110)는 화상 통화를 위한 무선 송수신 기능을 담당한다. 이러한 기능을 위하여 무선통신부(110)는 송신되는 화상 통화용 비트 스트림(bit stream)의 주파수를 상승 변환 및 증폭하는 무선 주파수(RF, Radio Frequency) 송신부와, 수신되는 화상 통화용 비트 스트림을 저잡음 증폭하고 주파수를 하강 변환하는 무선 주파수 수신부 등을 포함할 수 있다.
오디오처리부(120)는 제어부(170)에서 출력되는 오디오 스트림(Audio Stream)을 재생하거나 또는 마이크(MIC)로부터 수신되는 음성/음향 등의 아날로그 신호를 디지털 신호로 변환하여 제어부(170)에 전송하는 기능을 수행한다.
입력부(130)는 숫자 또는 문자 정보를 입력받고 다양한 기능을 설정하기 위한 다수의 입력키 및 기능키를 포함한다. 그리고 입력부(130)는 사용자 설정 및 휴 대 단말기의 기능 제어와 관련하여 입력되는 키 신호를 제어부(170)로 전달한다.
표시부(140)는 카메라부(150)에서 출력되는 영상을 화면으로 표시하거나, 제어부(170)로 부터 수신한 비디오 스트림을 화면으로 표시한다. 표시부(140)는 휴대 단말기의 메뉴, 사용자가 입력한 사용자 데이터, 기능 설정 정보 및 사용자에게 다양한 정보를 시각적으로 제공한다. 표시부(140)는 액정표시장치(LCD, Liquid Crystal Display)로 형성될 수 있다. 만일 액정표시장치가 터치스크린(Touch Screen) 형태로 형성되면, 표시부(140)는 입력부(130)의 기능의 일부 또는 전부를 수행할 수 있다.
카메라부(150)는 휴대 단말기의 카메라 기능을 제공하기 위한 것이다. 카메라부(150)는 카메라 모듈(미도시), 신호처리장치(미도시) 및 영상처리장치(미도시)를 구비한다. 카메라 모듈은 피사체를 촬영하며, 촬영된 피사체인, 광학적 화상 신호를 전기적 화상 신호로 변환하는 카메라 센서를 구비한다. 여기서 카메라 센서는 CCD센서를 사용함이 바람직하다. 신호처리장치는 카메라로부터 출력되는 아날로그 화상 신호를 디지털 화상 신호로 변환한다. 여기서 신호처리장치는 DSP(Digital Signal Processor)로 구현함이 바람직하다. 영상처리장치는 신호처리장치에서 출력되는 화상 신호를 표시하기 위한 화면 화상 신호를 발생하는 기능을 수행한다. 영상처리장치는 제어부(170)의 제어에 따라 수신되는 화상 신호를 표시부(140)의 규격에 맞춰 화면 화상 신호로 출력한다.
저장부(160)는 본 발명의 실시 예에 따른 기능 동작에 필요한 응용 프로그램 및 이에 따른 데이터를 저장한다. 저장부(160)는 응용 프로그램 실행 중에 발생하 는 데이터를 일시 저장하는 하나 이상의 버퍼(buffer)를 포함할 수 있다. 저장부(160)는 프로그램 영역 및 데이터 영역을 포함할 수 있다. 프로그램 영역은 휴대 단말기를 부팅(booting)시키는 운영체제(OS, Operating System), 휴대 단말기의 기타 옵션(options) 기능 필요한 응용 프로그램 등을 저장한다. 데이터 영역은 휴대 단말기 사용에 따라 발생하는 사용자 데이터가 저장되는 영역이다.
제어부(170)는 휴대 단말기의 전반적인 동작 및 휴대 단말기의 내부 블록들 간 신호 흐름을 제어한다. 즉, 제어부(170)는 오디오처리부(120), 입력부(130), 표시부(140), 카메라부(150) 및 저장부(160) 등의 각 구성 간의 신호 흐름을 제어한다.
제어부(170)는 코덱(CODEC), 모뎀(MODEM) 및 먹스/디먹스(MUX/DEMUX)를 구비할 수 있다. 코덱은 송신하는 영상 및 음성 신호를 포함하는 화상 신호를 인코딩(Encoding)하고, 수신되는 영상 및 음성 신호를 포함하는 인코딩된 화상 신호를 디코딩(Decoding)한다. 특히, 제어부(170)는 코덱을 제어하여 수신되는 음성 신호의 음량, 영상 및 음성 신호 중 어느 하나 이상의 비트율(bit rate)에 따라, 수신되는 화상 신호의 영상 신호의 디코딩 방법을 달리한다. 그리고, 제어부(170)는 수신되는 화상 신호를 재생하기 위한 자원의 사용량에 따라 수신되는 화상 신호의 영상 신호를 디코딩 방법을 달리한다. 예컨대, 제어부(170)는 영상 신호의 I, B, P 프레임 모두를 디코딩하거나, I 프레임만 디코딩할 수 있다.
먹스/디먹스는 인코딩된 영상 및 음성 신호 등을 다중화하며, 영상 및 음성 신호 등이 다중화된 수신 신호들을 역다중화한다. 모뎀은 다중화된 화상 신호를 변 조(Modulation)하여 출력하고, 무선통신부(110)가 수신한 변조된 화상 신호를 복조(Demodulation)한다. 코덱(CODEC), 모뎀(MODEM) 및 먹스/디먹스(MUX/DEMUX)는 무선통신부(110)에 포함될 수 있으며, 필요에 따라 무선 통신부(110)와 제어부(170) 사이에 독립 모듈로 구성할 수 있다.
제어부(170)는 본 발명의 실시 예에 따라 휴대 단말기의 적절한 동작을 위한 종단간의 시그날링(Signaling)을 제공한다. 즉, 화상 호 연결을 위한 메시지 등을 제어 채널을 통해 전송하고, 논리 채널을 열고 표현하기 위한 메시지를 제공한다.
또한 도시되진 않았으나, 본 발명의 실시 예에 따른 휴대 단말기는 메모리 카드와 같은 외부 저장 매체를 삽입하여 데이터 저장을 가능토록 하는 저장매체 삽입부, 외부 디지털 기기와의 데이터 교환을 위한 연결 단자, 충전용 단자를 구비할 수 있다. 또한, 휴대 단말기는 디지털 방송을 수신하기 위한 방송 신호 수신 모듈, 디지털 음원 재생을 위한 MP3 모듈 등의 부가 기능을 갖는 유닛들을 선택적으로 더 포함하여 구성될 수 있다.
디지털 기기의 컨버전스(convergence) 추세에 따라 휴대 기기의 변형이 매우 다양하여 모두 열거할 수는 없으나, 상기 언급된 유닛들과 동등한 수준의 유닛이 본 발명에 따른 휴대 단말기에 추가로 더 포함되어 구성될 수 있다는 것은 본 기술 분야의 통상의 지식을 가진 자라면 쉽게 이해할 수 있을 것이다.
다음으로, 상술한 바와 같은 구성을 가지는 휴대 단말기를 이용한 화상 회의 방법에 대해서 설명하기로 한다. 설명에 앞서, 화상 회의의 참가자는 본 발명의 실시 예에 따른 휴대 단말기 사용자를 포함하여 4명이라고 가정한다. 각 참가자를 구 분하기 위하여, 제1 내지 제4 사용자로 구분하기로 한다. 여기서, 제1 사용자는 본 발명의 실시 예에 따른 휴대 단말기 사용자라고 가정한다. 또한, 본 발명의 실시 예에 따른 화상 신호는 비트 스트림(bit stream)이며, 영상 신호 및 음성 신호를 포함한다. 영상 신호는 카메라부를 통해 촬영한 영상을 말하며, 음성 신호는 마이크를 통해 입력되는 신호를 말한다. 각 사용자의 단말기들은 이러한 영상 신호 및 음성 신호를 포함하는 화상 신호를 송수신한다.
특히, 영상 신호는 다수개의 프레임(frame)으로 구성되며, 이러한 다수개의 프레임을 소정 시간에 표시함으로써 비디오 화면을 구성하게 된다. 이러한 프레임은 인코딩시 I(Infra), P(Previous 또는 Predicted) 및 B(Bidirectional) 프레임의 3가지 종류로 구성된다. 프레임의 순서는 일 예로 I, B, B, P, B, B, P, (B, B,) I, B, B, P .... 순으로 이루어진다. I 프레임은 카메라부(150)가 촬영한 소스 영상으로부터 직접 인코딩한 프레임이며, 3 종류의 프레임 중 용량이 가장 크다. P 프레임은 그 P 프레임 이전의 I 프레임에서 화면이 변한 상태의 정보를 가지며, I 프레임보다 용량이 작다. B 프레임은 그 B 프레임 전후의 I, 및 P 프레임의 정보를 바탕으로 그 화면의 변량의 정보를 가지며, 3 종류의 프레임 중 용량이 가장 작다.
본 발명은 화상 회의 중 현재 발언하는 사용자에 집중하여 영상 신호를 재생하고 휴대 단말기의 한정적 자원을 절약하기 위하여, 현재 발언자의 영상 신호는 상기 I, B, P 프레임을 모두 디코딩(이하, "풀 디코딩"이라 칭함)하여 재생하며, 다른 사용자의 영상 신호는 I 프레임만 디코딩하여 재생하거나, 재생하지 않는 방법을 사용한다.
또한, 발언하지 않는 상대방들이 현재 발언자에 집중할 수 있도록 화면을 구성하도록 한다. 도 2a 및 도 2b는 본 발명의 실시 예에 따른 화상 회의 방법을 설명하기 위한 화면 예이다.
이를 참조하면, 도면 부호, 10, 20, 30, 및 40은 차례로 각각 제1, 제2, 제3 및 제4 사용자의 화면을 나타낸다. 여기서, 제1 사용자는 본 발명의 실시 예에 따른 휴대 단말기 사용자이며, 제2 사용자가 현재 발언하는 경우를 가정하였다.
이때, 제2 사용자의 화면(20)은 풀 디코딩되어 재생되는 화면이며 제3 사용자의 화면(30)은 I 프레임만 디코딩되어 재생되는 화면이다. 제4 사용자의 화면(40)은 디코딩되지 않는 화면이다.
도 2a와 같이, 각 사용자의 화면을 동일 비율로 표시할 수 있으나, 도 2b에 도시된 바와 같이, 풀 디코딩되는 화면을 가장 크게 표시하고 나머지 화면을 작게 구성할 수 있다.
그러면, 본 발명의 일 실시 예에 따른 화상 회의 방법을 설명하기로 한다. 도 3은 본 발명의 일 실시 예에 따른 휴대 단말기의 화상 회의 방법을 설명하기 위한 흐름도이다.
도 3을 참조하면, 제어부(170)는 S301 단계에서 무선 통신부(110)를 통해 각 사용자에 대응하는 다수의 화상 신호를 수신한다.
다음으로, 제어부(170)는 S303 단계에서 각 사용자에 대응하는 음성 신호의 음량을 측정한다.
상기 측정 결과, 제어부(170)는 S305 단계에서 수신 되는 음성 신호의 음량 에 따라 영상 신호를 어떤 방식으로 디코딩할 것인지 판단한다. 이를 위하여, 제1 및 제2 임계치(TH_upper, TH_lower)를 설정한다. 여기서, 제1 임계치(TH_upper)는 제2 임계치(TH_lower) 보다 높은 음량이며, 수신되는 음성 신호의 음량을 E라 했을 때, 음량 E는 다음의 <수식 1>을 만족하는 3가지 음량(E)을 가질 수 있다.
Figure 112007090109831-pat00001
즉, 음성 신호의 음량(E)은 제1 임계치 이상(E
Figure 112007090109831-pat00002
TH_upper)이거나, 제1 임계치 미만 제2 임계치 이상(TH_upper > E
Figure 112007090109831-pat00003
TH_lower)이거나, 제2 임계치 미만(TH_lower > E)인 경우가 될 수 있다.
따라서 S305 단계의 판단 결과, 음성 신호의 음량(E)이 기 설정된 제1 임계치 이상(E
Figure 112007090109831-pat00004
TH_upper)인 경우, 제어부(170)는 S307 단계에서 해당 사용자의 영상 신호의 모든 프레임을 디코딩한다. 즉, I, B, P 프레임을 모두 디코딩하는 것을 말한다.
한편, S305 단계의 판단 결과, 음성 신호의 음량(E)이 기 설정된 제1 임계치 미만이고 제2 임계치 이상(TH_upper > E
Figure 112007090109831-pat00005
TH_lower)이면, 제어부(170)는 S309 단계에서 해당 사용자의 영상 신호의 I 프레임만 디코딩한다.
또한, S305 단계의 판단 결과, 음성 신호의 음량(E)이 기 설정된 제2 임계치 미만(TH_lower > E)인 경우, 제어부(170)는 S309 단계에서 해당 사용자의 영상 신호를 디코딩하지 않는다.
이는, 화상 회의에서 화자에 집중하여 디코딩함으로써, 효율적으로 자원을 활용하기 위한 것이다. 즉, 화상 회의 시 모든 사용자가 동시에 말을 하는 경우는 드물고, 발언권을 가진 사용자가 말을 하는 경우가 대부분이다. 모든 사용자는 현재 발언권을 가지고 발언하는 사용자에 관심이 집중 되며, 발언권을 가진 사용자의 음량이 높을 것으로 기대되므로, 음량이 높은 사용자의 영상 신호를 풀 디코딩하며, 그 외의 사용자의 영상 신호는 I 프레임만 디코딩하거나, 디코딩하지 않는 방법을 사용한다. 따라서 휴대 단말기의 한정된 자원을 절약할 수 있다.
디코딩 후, 제어부(170)는 S213 단계에서 상기 디코딩한 영상 신호 및 음성 신호를 재생한다. 이때, 음성 신호는 오디오 처리부(120)를 통해 스피커(SPK)로 출력되며, 영상 신호는 표시부(140)에 표시된다. 이러한 영상 신호가 재생되는 화면의 예를 도 3a 및 도 3b에 도시하였다.
여기서, 도면 부호, 10, 20, 30, 및 40은 차례로 각각 제1, 제2, 제3 및 제4 사용자의 화면을 나타낸다. 또한, 제2 사용자의 음량(E)은 제1 임계치 이상(E ?? TH_upper)이며, 제3 사용자의 음량(E)은 제1 임계치 미만 제2 임계치 이상(TH_upper > E
Figure 112007090109831-pat00006
TH_lower)이고, 제4 사용자의 음량(E)은 제2 임계치 미만(TH_lower > E)인 경우를 가정하였다.
따라서 제2 사용자의 화면(20)은 풀 디코딩되어 재생되는 화면이며, 완전한 동영상으로 표시된다. 반면, 제3 사용자의 화면(30)은 I 프레임만 디코딩되어 재생 되는 화면이 된다. 한편, 제4 사용자의 화면(40)은 디코딩되지 않으므로 재생되지 않는다. 이때, 제4 사용자의 화면(40)은 기 저장된 정지 영상으로 대체할 수 있다. 또한, 본 발명의 실시 예에 따른 휴대 단말기 사용자의 화면인 제1 사용자의 화면(10)은 사용자의 선택에 따라 켜거나 끌 수 있다.
상술한 방법으로 화상 회의 진행 중, 제어부(170)는 S315 단계에서 화상 회의가 종료되는지 판단한다. 상기 판단 결과 종료되지 않으면, 제어부(170)는 S303 단계로 진행하여 수신되는 각 사용자에 대응하는 화상 신호 중 음성 신호의 음량(E)을 측정한다. 이는, 어느 일 사용자의 발언이 끝나고, 다른 사용자의 발언이 시작되면 해당 사용자의 영상 신호를 풀 디코딩하기 위한 것이다. 한편, 제어부(170)는 화상 회의가 종료됨을 감지하면 프로세스를 종료한다.
본 발명은 상기와 같은 음량에 크기에 따른 선택적 디코딩 방법 외에 영상 또는 음성 신호의 비트 율(bit rate)에 따라 상기와 같은 방법을 적용할 수 있다.
가변 비트 율을 적용하는 통신 방법의 경우에 있어서, 현재 발언하는 사용자는 음량이 높을 뿐 아니라 음성 신호의 비트 율도 높을 것으로 기대되며, 회의 시 자신의 의사를 표현하기 위한 행동이 있는 경우, 그 사용자의 영상 신호의 비트 율도 높을 것으로 기대된다.
본 발명은 이러한 비트 율에 따른 디코딩 방법을 제안한다. 도 4는 본 발명의 다른 실시 예에 따른 휴대 단말기의 화상 회의 방법을 설명하기 위한 흐름도이다.
도 4를 참조하면, 제어부(170)는 S401 단계에서 무선 통신부(110)를 통해 각 사용자에 대응하는 다수의 화상 신호를 수신한다. 다음으로, 제어부(170)는 S403 단계에서 각 사용자에 대응하는 음성 신호의 비트 율을 측정한다.
상기 측정 결과, 제어부(170)는 S405 단계에서 수신 되는 음성 신호의 비트 율에 따라 영상 신호를 어떤 방식으로 디코딩할 것인지 판단한다. 이를 위하여, 제1 및 제2 임계치(TH_upper, TH_lower)를 설정한다. 여기서, 제1 임계치(TH_upper)는 제2 임계치(TH_lower) 보다 높은 비트 율이며, 수신되는 음성 신호의 비트 율을 B라 했을 때, 비트 율 B는 다음의 <수학식 2>을 만족하는 3가지 비트 율(B)을 가질 수 있다.
Figure 112007090109831-pat00007
즉, 음성 신호의 비트 율(B)은 제1 임계치 이상(B
Figure 112007090109831-pat00008
TH_upper)이거나, 제1 임계치 미만 제2 임계치 이상(TH_upper > B
Figure 112007090109831-pat00009
TH_lower)이거나, 제2 임계치 미만(TH_lower > B)인 경우가 될 수 있다.
따라서 S405 단계의 판단 결과, 음성 신호의 비트 율(B)이 기 설정된 제1 임계치 이상(B
Figure 112007090109831-pat00010
TH_upper)인 경우, 제어부(170)는 S407 단계에서 해당 사용자의 영상 신호의 모든 프레임을 디코딩한다.
한편, S405 단계의 판단 결과, 음성 신호의 비트 율(B)이 기 설정된 제1 임 계치 미만이고 제2 임계치 이상(TH_upper > B
Figure 112007090109831-pat00011
TH_lower)이면, 제어부(170)는 S409 단계에서 해당 사용자의 영상 신호의 I 프레임만 디코딩한다.
또한, S405 단계의 판단 결과, 음성 신호의 비트 율(B)이 기 설정된 제2 임계치 미만(TH_lower > B)인 경우, 제어부(170)는 S409 단계에서 해당 사용자의 영상 신호를 디코딩하지 않는다.
디코딩 후, 제어부(170)는 S413 단계에서 상기 디코딩한 영상 신호 및 음성 신호를 재생한다. 이때, 음성 신호는 오디오처리부(120)를 통해 스피커(SPK)로 출력되며, 영상 신호는 표시부(140)에 표시된다. 이러한 영상 신호가 재생되는 화면의 예를 도 3a 및 도 3b에 도시하였다.
여기서, 도면 부호, 10, 20, 30, 및 40은 차례로 각각 제1, 제2, 제3 및 제4 사용자의 화면을 나타낸다. 또한, 제2 사용자의 비트 율(B)은 제1 임계치 이상(B
Figure 112007090109831-pat00012
TH_upper)이며, 제3 사용자의 비트 율(B)은 제1 임계치 미만 제2 임계치 이상(TH_upper > B
Figure 112007090109831-pat00013
TH_lower)이고, 제4 사용자의 비트 율(B)은 제2 임계치 미만(TH_lower > B)인 경우를 가정하였다.
따라서 제2 사용자의 화면(20)은 풀 디코딩되어 재생되는 화면이며, 완전한 동영상으로 표시된다. 반면, 제3 사용자의 화면(30)은 I 프레임만 디코딩되어 재생되는 화면이 된다. 한편, 제4 사용자의 화면(40)은 디코딩되지 않으므로 재생되지 않는다.
상술한 방법으로 화상 회의 진행 중, 제어부(170)는 S415 단계에서 화상 회 의가 종료되는지 감지한다. 감지 결과 종료되지 않으면, 제어부(170)는 S403 단계로 진행하여 수신되는 각 사용자에 대응하는 화상 신호 중 음성 신호의 비트 율(B)을 측정한다. 이는, 어느 일 사용자의 발언이 끝나고, 다른 사용자의 발언이 시작되면 해당 사용자의 영상 신호를 풀 디코딩하기 위한 것이다. 한편, 제어부(170)는 화상 회의가 종료되면 프로세스를 종료한다. 지금까지 수신되는 음성 신호의 비트 율에 따라 영상 신호를 선택적으로 디코딩하는 방법을 설명하였다. 이와 같은 방법은 영상 신호의 비트 율에 따라 영상 신호를 선택적으로 디코딩하는 방법에 같이 적용할 수 있다.
현재 발언하는 사용자의 화상 신호는 그 화상 신호를 처리하기 위한 휴대 단말기의 자원을 많이 사용할 것으로 기대된다. 여기서, 자원은 디코딩 등을 위한 메모리 사용량 및 제어부 사용량을 의미한다. 따라서 본 발명은 이러한 휴대 단말기의 자원에 따른 디코딩 방법을 제안한다. 도 5는 본 발명의 다른 실시 예에 따른 휴대 단말기의 화상 회의 방법을 설명하기 위한 흐름도이다.
도 5를 참조하면, 제어부(170)는 S501 단계에서 무선 통신부(110)를 통해 각 사용자에 대응하는 다수의 화상 신호를 수신한다. 다음으로, 제어부(170)는 S503 단계에서 각 사용자에 대응하는 화상 신호를 처리하기 위한 자원 사용량을 측정한다.
상기 측정 결과, 제어부(170)는 S505 단계에서 자원 사용량에 따라 영상 신호를 어떤 방식으로 디코딩할 것인지 판단한다. 이를 위하여, 제1 및 제2 임계치(TH_upper, TH_lower)를 설정한다. 여기서, 제1 임계치(TH_upper)는 제2 임계 치(TH_lower) 보다 높은 자원의 사용량을 나타내며, 음성 신호 및 영상 신호, 즉 화상 신호를 처리하기 위한 자원의 사용량을 R 이라 했을 때, 자원 사용량(R)은 다음의 <수학식 3>을 만족하는 3가지 자원 사용량(R)을 가질 수 있다.
Figure 112007090109831-pat00014
즉, 자원 사용량(R)은 제1 임계치 이상(R
Figure 112007090109831-pat00015
TH_upper)이거나, 제1 임계치 미만 제2 임계치 이상(TH_upper > R
Figure 112007090109831-pat00016
TH_lower)이거나, 제2 임계치 미만(TH_lower > R)인 경우가 될 수 있다.
따라서 S505 단계의 판단 결과, 해당 사용자의 화상 신호를 처리하기 위한 자원 사용량(R)이 기 설정된 제1 임계치 이상(R
Figure 112007090109831-pat00017
TH_upper)인 경우, 제어부(170)는 S507 단계에서 해당 사용자의 영상 신호의 모든 프레임을 디코딩한다.
한편, S505 단계의 판단 결과, 자원 사용량(R)이 기 설정된 제1 임계치 미만이고 제2 임계치 이상(TH_upper > R
Figure 112007090109831-pat00018
TH_lower)이면, 제어부(170)는 S509 단계에서 해당 사용자의 영상 신호의 I 프레임만 디코딩한다.
또한, S505 단계의 판단 결과, 자원 사용량(R)이 기 설정된 제2 임계치 미만(TH_lower > R)인 경우, 제어부(170)는 S509 단계에서 해당 사용자의 영상 신호를 디코딩하지 않는다.
디코딩 후, 제어부(170)는 S513 단계에서 상기 디코딩한 영상 신호 및 음성 신호를 재생한다. 이때, 음성 신호는 오디오처리부(120)를 통해 스피커(SPK)로 출력되며, 영상 신호는 표시부(140)에 표시된다. 이러한 영상 신호가 재생되는 화면의 예를 도 3a 및 도 3b에 표시하였다.
여기서, 도면 부호, 10, 20, 30, 및 40은 차례로 각각 제1, 제2, 제3 및 제4 사용자의 화면을 나타낸다. 또한, 제2 사용자의 화상 신호를 처리하기 위한 자원 사용량(R)은 제1 임계치 이상(R
Figure 112007090109831-pat00019
TH_upper)이며, 제3 사용자의 화상 신호를 처리하기 위한 자원 사용량(R)은 제1 임계치 미만 제2 임계치 이상(TH_upper > R
Figure 112007090109831-pat00020
TH_lower)이고, 제4 사용자의 화상 신호를 처리하기 위한 자원 사용량(R)은 제2 임계치 미만(TH_lower > R)인 경우를 가정하였다.
따라서 제2 사용자의 화면(20)은 풀 디코딩되어 재생되는 화면이며, 완전한 동영상으로 표시된다. 반면, 제3 사용자의 화면(30)은 I 프레임만 디코딩되어 재생되는 화면이 된다. 한편, 제4 사용자의 화면(40)은 디코딩되지 않으므로 재생되지 않는다.
상술한 방법으로 화상 회의 진행 중, 제어부(170)는 S515 단계에서 화상 회의가 종료되는지 감지한다. 감지 결과 종료되지 않으면, 제어부(170)는 S503 단계로 진행하여 수신되는 각 사용자에 대응하는 화상 신호를 처리하기 위한 자원의 사용량을 측정한다. 이는, 어느 일 사용자의 발언이 끝나고, 다른 사용자의 발언이 시작되면 해당 사용자의 영상 신호를 풀 디코딩하기 위한 것이다. 한편, 제어 부(170)는 화상 회의가 종료되면 프로세스를 종료한다.
이상에서 살펴본 바와 같이, 본 발명의 상세한 설명에서는 구체적인 실시 예에 관하여 설명하였으나, 본 발명의 범위에서 벗어나지 않는 한도 내에서 여러 가지 변형이 가능함은 물론이다. 그러므로 본 발명의 범위는 설명된 실시 예에 국한되어 정해져서는 안 되며, 후술하는 특허청구범위뿐만 아니라 이 특허청구의 범위와 균등한 것들에 의해 정해져야 한다.
도 1은 본 발명의 실시 예에 따른 휴대 단말기의 걔략적인 구성을 도시한 도면.
도 2a 및 도 2b는 본 발명의 실시 예에 따른 화상 회의 방법을 설명하기 위한 화면 예.
도 3은 본 발명의 일 실시 예에 따른 휴대 단말기의 화상 회의 방법을 설명하기 위한 흐름도.
도 4는 본 발명의 다른 실시 예에 따른 휴대 단말기의 화상 회의 방법을 설명하기 위한 흐름도.
도 5는 본 발명의 다른 실시 예에 따른 휴대 단말기의 화상 회의 방법을 설명하기 위한 흐름도.

Claims (12)

  1. 다수의 사용자가 수행하는 휴대 단말기의 화상 회의 방법에 있어서,
    상기 다수의 사용자의 음성 및 영상 신호를 가지는 화상 신호를 수신하는 과정과,
    상기 화상 신호에 의거하여 현재 발언자의 화상 신호를 선택하는 과정과,
    상기 선택한 화상 신호의 영상 신호의 모든 프레임을 디코딩하고 이외의 영상 신호의 프레임은 선택적으로 디코딩하는 과정과,
    상기 디코딩한 영상 신호를 재생하는 과정을 포함하는 것을 특징으로 하는 휴대 단말기의 화상 회의 방법.
  2. 청구항 1에 있어서,
    상기 선택하는 과정은,
    상기 화상 신호 중 음성 신호의 음량이 가장 높은 화상 신호를 선택하는 것을 특징으로 하는 휴대 단말기의 화상 회의 방법.
  3. 청구항 1에 있어서,
    상기 선택하는 과정은,
    상기 화상 신호의 음성 및 영상 신호 중 어느 하나 이상을 기준으로 하며,
    상기 기준의 비트 율이 가장 높은 화상 신호를 선택하는 것을 특징으로 하는 휴대 단말기의 화상 회의 방법.
  4. 청구항 1에 있어서,
    상기 선택하는 과정은,
    상기 화상 신호를 처리하기 위한 상기 휴대 단말기 자원의 사용량이 가장 큰 화상 신호를 선택하는 것을 특징으로 하는 휴대 단말기의 화상 회의 방법.
  5. 청구항 4에 있어서,
    상기 자원의 사용량은,
    상기 화상 신호를 처리하기 위한 메모리 사용량 및 제어부 사용량 중 어느 하나 이상을 포함하는 것을 특징으로 하는 휴대 단말기의 화상 회의 방법.
  6. 청구항 1에 있어서,
    상기 디코딩하는 과정은,
    상기 선택한 화상 신호의 영상 신호의 모든 프레임을 디코딩하고 상기 이외의 영상 신호의 프레임에서 I 프레임만을 디코딩하는 과정; 및
    상기 선택한 화상 신호의 영상 신호의 모든 프레임을 디코딩하는 과정 중에서,
    하나를 포함하는 것을 특징으로 하는 휴대 단말기의 화상 회의 방법.
  7. 다수의 사용자가 수행하는 휴대 단말기의 화상 회의 장치에 있어서,
    상기 다수의 사용자의 음성 및 영상 신호를 가지는 화상 신호를 수신하는 무선 통신부;
    상기 화상 신호에 의거하여 현재 발언자의 화상 신호를 선택하며, 상기 선택한 화상 신호의 영상 신호의 모든 프레임을 디코딩하고 이외의 영상 신호는 선택적으로 디코딩하는 제어부; 및
    상기 디코딩한 영상 신호를 재생하는 표시부를 포함하는 것을 특징으로 하는 휴대 단말기의 화상 회의 장치.
  8. 청구항 7에 있어서,
    상기 제어부는
    상기 화상 신호 중 음성 신호의 음량이 가장 높은 화상 신호를
    상기 현재 발언자의 화상 신호로 선택하는 것을 특징으로 하는 휴대 단말기의 화상 회의 장치.
  9. 청구항 7에 있어서,
    상기 제어부는
    상기 화상 신호의 음성 및 영상 신호 중 어느 하나 이상을 기준으로 하여,
    상기 기준의 비트 율이 가장 높은 화상 신호를
    상기 현재 발언자의 화상 신호로 선택하는 것을 특징으로 하는 휴대 단말기의 화상 회의 장치.
  10. 청구항 7에 있어서,
    상기 제어부는
    상기 화상 신호를 처리하기 위한 상기 휴대 단말기 자원의 사용량이 가장 큰 화상 신호를
    상기 현재 발언자의 화상 신호로 선택하는 것을 특징으로 하는 휴대 단말기의 화상 회의 장치.
  11. 청구항 10에 있어서,
    상기 자원의 사용량은,
    상기 화상 신호를 처리하기 위한 메모리 사용량 및 제어부 사용량 중 어느 하나 이상인 것을 특징으로 하는 휴대 단말기의 화상 회의 장치.
  12. 청구항 7에 있어서,
    상기 제어부는,
    상기 선택한 화상 신호의 영상 신호의 모든 프레임을 디코딩하고 상기 이외의 영상 신호의 프레임에서 I 프레임만을 디코딩하거나,
    상기 선택한 화상 신호의 영상 신호의 모든 프레임을 디코딩하는 것을 특징으로 하는 휴대 단말기의 화상 회의 장치.
KR1020070131045A 2007-12-14 2007-12-14 휴대 단말기의 화상 회의 방법 및 장치 KR101396832B1 (ko)

Priority Applications (2)

Application Number Priority Date Filing Date Title
KR1020070131045A KR101396832B1 (ko) 2007-12-14 2007-12-14 휴대 단말기의 화상 회의 방법 및 장치
US12/332,862 US8373740B2 (en) 2007-12-14 2008-12-11 Method and apparatus for video conferencing in mobile terminal

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020070131045A KR101396832B1 (ko) 2007-12-14 2007-12-14 휴대 단말기의 화상 회의 방법 및 장치

Publications (2)

Publication Number Publication Date
KR20090063608A KR20090063608A (ko) 2009-06-18
KR101396832B1 true KR101396832B1 (ko) 2014-05-21

Family

ID=40753230

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020070131045A KR101396832B1 (ko) 2007-12-14 2007-12-14 휴대 단말기의 화상 회의 방법 및 장치

Country Status (2)

Country Link
US (1) US8373740B2 (ko)
KR (1) KR101396832B1 (ko)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101867768B (zh) * 2010-05-31 2012-02-08 杭州华三通信技术有限公司 一种视频会议会场画面控制方法及其装置
US9536294B2 (en) * 2012-12-03 2017-01-03 Home Box Office, Inc. Package essence analysis kit
US9921796B2 (en) * 2015-04-24 2018-03-20 Kyocera Corporation Sharing of input information superimposed on images
US9800831B2 (en) 2015-06-18 2017-10-24 Jie Diao Conveying attention information in virtual conference
CN109413359B (zh) * 2017-08-16 2020-07-28 华为技术有限公司 摄像跟踪方法、装置及设备
KR20220031520A (ko) 2020-09-04 2022-03-11 한국전자통신연구원 온라인 팬미팅 서비스 장치 및 이를 이용한 방법

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20050097307A (ko) * 2004-04-01 2005-10-07 주식회사 팬택앤큐리텔 다자간 화상통화시의 동적 화면표시 제어 장치 및 그 방법

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20020093531A1 (en) * 2001-01-17 2002-07-18 John Barile Adaptive display for video conferences
US7180535B2 (en) * 2004-12-16 2007-02-20 Nokia Corporation Method, hub system and terminal equipment for videoconferencing
KR100735415B1 (ko) 2005-09-01 2007-07-04 삼성전자주식회사 휴대단말기의 다자간 화상통화수행방법
KR100800815B1 (ko) * 2006-11-21 2008-02-01 삼성전자주식회사 디지털 방송을 수신하는 이동 단말기 및 방법

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20050097307A (ko) * 2004-04-01 2005-10-07 주식회사 팬택앤큐리텔 다자간 화상통화시의 동적 화면표시 제어 장치 및 그 방법

Also Published As

Publication number Publication date
US8373740B2 (en) 2013-02-12
KR20090063608A (ko) 2009-06-18
US20090154571A1 (en) 2009-06-18

Similar Documents

Publication Publication Date Title
US10674002B2 (en) Apparatus and method for controlling built-in microphone of portable terminal
US20050208962A1 (en) Mobile phone, multimedia chatting system and method thereof
KR100827802B1 (ko) 휴대 단말기의 화상 통화 장치 및 화상 통화 송수신방법
KR100606060B1 (ko) 휴대단말기의 데이터를 외부장치로 출력하는 장치 및 방법
KR100799670B1 (ko) 휴대단말을 이용한 방송수신 중 화면분할 방법 및 장치
US7508413B2 (en) Video conference data transmission device and data transmission method adapted for small display of mobile terminals
EP1773054A2 (en) Method for performing video communication service and mobile communication terminal therefor
KR101396832B1 (ko) 휴대 단말기의 화상 회의 방법 및 장치
US8274545B2 (en) Apparatus and method for casting video data and audio data to web during video telephony in mobile communication terminal
KR100780801B1 (ko) 휴대 단말기의 통화 제어 시스템 및 방법
TW201442484A (zh) 具自動點播模組之通訊裝置及其方法
US8781138B2 (en) Method for outputting background sound and mobile communication terminal using the same
JP2001309086A (ja) マルチメディア通信端末装置、回線制御装置、マルチメディア通信方法
US20070195962A1 (en) Apparatus and method for outputting audio data using wireless terminal
KR100868356B1 (ko) 화상 통신 망을 이용한 광고 송수신 방법 및 화상 단말기의광고 수신 방법
KR101036144B1 (ko) 이동통신 단말기에서 화상통화시 링백톤을 출력하기 위한방법
KR20080047683A (ko) 휴대용 단말기에서 스트리밍 서비스 전송 방법 및 장치
KR20090010385A (ko) 화상 통신 단말의 화상 통화 녹화 방법 및 장치
KR100830534B1 (ko) 화상 통화 단말기의 목록 운용 장치 및 방법
KR100856253B1 (ko) 휴대 단말기의 화상 통화 서비스 수행 방법
KR20070082782A (ko) 화상통신 단말기 및 화상통신 단말기에서 화상통신 방법
KR20090097319A (ko) 대체 영상을 이용한 휴대 단말기의 화상 통화 방법 및 장치
TWI387301B (zh) 顯示多方視頻通話之方法
WO2012155761A1 (zh) 一种可视电话动态相框实现方法及移动终端
KR100617564B1 (ko) 이동단말기의 화상통화를 이용한 멀티미디어 데이터 전송방법

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20170427

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20180427

Year of fee payment: 5