KR20100050694A - Method for transmitting and receiving of video telephony - Google Patents

Method for transmitting and receiving of video telephony Download PDF

Info

Publication number
KR20100050694A
KR20100050694A KR1020080109710A KR20080109710A KR20100050694A KR 20100050694 A KR20100050694 A KR 20100050694A KR 1020080109710 A KR1020080109710 A KR 1020080109710A KR 20080109710 A KR20080109710 A KR 20080109710A KR 20100050694 A KR20100050694 A KR 20100050694A
Authority
KR
South Korea
Prior art keywords
video call
transmission frame
frame rate
network state
state
Prior art date
Application number
KR1020080109710A
Other languages
Korean (ko)
Inventor
권재환
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to KR1020080109710A priority Critical patent/KR20100050694A/en
Publication of KR20100050694A publication Critical patent/KR20100050694A/en

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/14—Systems for two-way working
    • H04N7/141—Systems for two-way working between two video terminals, e.g. videophone
    • H04N7/147—Communication arrangements, e.g. identifying the communication as a video-communication, intermediate storage of the signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L5/00—Arrangements affording multiple use of the transmission path
    • H04L5/14—Two-way operation using the same type of signal, i.e. duplex
    • H04L5/1438—Negotiation of transmission parameters prior to communication
    • H04L5/1446—Negotiation of transmission parameters prior to communication of transmission speed
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/14—Systems for two-way working
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W72/00—Local resource management
    • H04W72/50—Allocation or scheduling criteria for wireless resources
    • H04W72/54—Allocation or scheduling criteria for wireless resources based on quality criteria
    • H04W72/542—Allocation or scheduling criteria for wireless resources based on quality criteria using measured or perceived quality

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Quality & Reliability (AREA)
  • Multimedia (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Mobile Radio Communication Systems (AREA)

Abstract

PURPOSE: A method for transmitting and receiving a video call is provided to enable continuous video call communication by controlling video prime count transmitted and received based on profile information. CONSTITUTION: A video call transmission/reception device negotiates a call condition for video call between mobile terminals(S109), and performs a video call depending on the call condition(S111). The video call transmission/reception device judges a network state during the video call(S115), and changes a transmission frame speed depending on the network state(S117,S119). The video call transmission/reception device performs a video call based on the changed transmission frame speed(S111).

Description

화상 통화 송수신 방법 및 장치{Method For Transmitting and Receiving of Video Telephony}Method and device for transmitting and receiving video calls {Method For Transmitting and Receiving of Video Telephony}

본 발명은 화상 통화 송수신 방법 및 장치에 관한 것으로, 특히 화상 통화 시 협상 과정에서 송수신되는 프로파일 정보를 기반으로 송수신되는 화상의 프레임 수를 조절하여 끊김없는 화상 통화를 수행할 수 있도록 하는 화상 통화 송수신 방법 및 장치에 관한 것이다.The present invention relates to a method and apparatus for transmitting and receiving a video call, and in particular, a video call transmitting and receiving method for allowing a seamless video call to be performed by adjusting the number of frames of a video transmitted and received based on profile information transmitted and received during a negotiation. And to an apparatus.

이동통신 단말기는 급속한 기술 발전을 통해 초기의 단순한 음성 통화 및 단문메시지 전송 기능에서 영상 통화, 전자수첩기능, 인터넷 기능 등과 같이 다양한 기능을 구비하게 되었다. 그리고 상기 이동통신 단말기는 최근에 이르러서 디지털 카메라 기능이 추가로 구비되어가고 있는 추세이다. 이에 따라, 상기 이동통신 단말기는 원하는 동영상 또는 정지 영상을 손쉽게 촬영하여 저장하고, 이를 기반으로 하는 영상 전송 기능이 사용자들에게 제공되고 있다 Mobile communication terminals have been equipped with various functions such as video call, electronic organizer function, internet function, etc. in the initial simple voice call and short message transmission function. In recent years, the mobile communication terminal has been increasingly equipped with a digital camera function. Accordingly, the mobile communication terminal easily captures and stores a desired video or still image, and an image transmission function based on the same is provided to users.

상술한 카메라 기능을 가지는 이동통신 단말기들은 수집된 촬영 영상을 기반으로 화상 통화를 수행할 수 있다. 그런데, 종래 화상 통화는 최초 이동통신 단말기들 간에 이루어지는 협상 과정에서 결정된 전송 환경에 의하여 화상 통화를 수행 한다. 이에 따라, 종래 화상 통화는 네트웍 상황이 화상 통화에 적절하게 적용되지 못하여, 효율적인 화상 통화를 수행할 수 있는 문제점이 있다.Mobile communication terminals having the above-described camera function may perform a video call based on the collected captured image. However, the conventional video call performs the video call by the transmission environment determined during the negotiation process between the first mobile communication terminal. Accordingly, the conventional video call has a problem that the network situation is not properly applied to the video call, so that an efficient video call can be performed.

따라서 본 발명의 목적은 전술된 바와 같은 종래 기술의 문제점을 해결하기 위한 것으로, 네트웍 상태에 따른 적절하고 효율적인 화상 통화를 수행할 수 있는 화상 통화 송수신 방법 및 장치를 제공함에 있다.Accordingly, an object of the present invention is to solve the problems of the prior art as described above, and to provide a video call transmission and reception method and apparatus capable of performing an appropriate and efficient video call according to network conditions.

상기 목적을 달성하기 위한 본 발명에 따른 화상 통화 송수신 방법은, 이동통신 단말기들 간에 화상통화를 위한 통화 조건을 협상하는 과정; 상기 통화 조건에 따라 화상 통화를 수행하는 과정; 상기 화상 통화 중 네트웍 상태를 판단하는 과정; 상기 네트웍 상태에 따라 전송 프레임 속도를 변경하는 과정; 상기 변경된 전송 프레임 속도를 기반으로 화상 통화를 수행하는 과정;을 포함하는 것을 특징으로 한다.A video call transmission and reception method according to the present invention for achieving the above object comprises the steps of negotiating a call condition for a video call between the mobile communication terminal; Performing a video call according to the call condition; Determining a network state during the video call; Changing a transmission frame rate according to the network state; And performing a video call based on the changed transmission frame rate.

상기 목적을 달성하기 위한 본 발명에 따른 화상 통화 송수신 장치는, 영상을 수집하는 카메라; 오디오 데이터를 수집하는 오디오 처리부; 화상통화를 위한 통화 조건에 해당하는 프로파일 정보를 송수신하는 무선주파수부; 상기 통화 조건에 따라 화상 통화를 수행하며, 상기 화상 통화 중 네트웍 상태를 판단하고, 상기 네트웍 상태에 따라 전송 프레임 속도를 변경한 후, 상기 변경된 전송 프레임 속도를 기반으로 화상 통화를 수행하도록 제어하는 제어부;를 포함하는 것을 특징으로 한다.In order to achieve the above object, a video call transmitting and receiving apparatus according to the present invention includes a camera for collecting an image; An audio processor for collecting audio data; A radio frequency unit for transmitting and receiving profile information corresponding to a call condition for a video call; A control unit for performing a video call according to the call condition, determining a network state of the video call, changing a transmission frame rate according to the network state, and controlling to perform a video call based on the changed transmission frame rate It characterized by including.

상술한 바와 같은 본 발명의 실시 예에 따른 화상 통화 송수신 방법 및 장치에 따르면, 네트웍 상태에 따라 보다 효율적이며 적응적인 화상 통화를 수행할 수 있다.According to the video call transmission and reception method and apparatus according to the embodiment of the present invention as described above, it is possible to perform a more efficient and adaptive video call according to the network state.

이하, 본 발명의 실시 예를 첨부된 도면에 의거하여 상세히 설명한다. Hereinafter, exemplary embodiments of the present invention will be described in detail with reference to the accompanying drawings.

실시 예를 설명함에 있어서 본 발명이 속하는 기술분야에 익히 알려져 있고 본 발명과 직접적으로 관련이 없는 기술 내용에 대해서는 설명을 생략한다. 또한, 실질적으로 동일한 구성과 기능을 가진 구성 요소들에 대해서는 상세한 설명을 생략하도록 한다.In describing the embodiments, descriptions of technical contents that are well known in the art to which the present invention pertains and are not directly related to the present invention will be omitted. In addition, detailed description of components having substantially the same configuration and function will be omitted.

마찬가지의 이유로 첨부 도면에 있어서 일부 구성요소는 과장되거나 생략되거나 또는 개략적으로 도시되었으며, 각 구성요소의 크기는 실제 크기를 전적으로 반영하는 것이 아니다. 따라서 본 발명은 첨부한 도면에 그려진 상대적인 크기나 간격에 의해 제한되어지지 않는다.For the same reason, some components in the accompanying drawings are exaggerated, omitted, or schematically illustrated, and the size of each component does not entirely reflect the actual size. Therefore, the present invention is not limited by the relative size or spacing drawn in the accompanying drawings.

이하 본 발명의 실시 예에 따른 화상 통화 방법 및 장치는 카메라가 수집한 영상의 프레임 수를 네트웍 상황에 따라 다르게 설정하여, 네트웍 상황이 좋은 상황에서는 보다 고화질의 영상을 기반으로 화상 통화를 수행하고, 네트웍 상황이 좋지 않은 상황에서는 저화질의 영상을 기반으로 화상 통화를 수행할 수 있도록 하는 방법 및 장치에 관한 설명이다.Hereinafter, a video call method and apparatus according to an embodiment of the present invention set the number of frames of images collected by a camera according to a network situation, and perform a video call based on a higher quality video in a good network situation. In a bad network situation, a description will be given of a method and apparatus for performing a video call based on low quality video.

본 발명의 상세한 설명에 앞서, 이하에서는 본 발명의 실시 예에 따른 기능을 수행하는 화상 통화 장치를, 이동통신 단말기로서 설명하지만, 본 발명이 이에 한정되는 것은 아니다. 즉, 본 발명의 실시 예에 따른 상기 단말기는 화상 통화가 가능한 모듈을 장착한 단말기로서, 바람직하게는 화상 통화 서비스 이용이 가능한 이동통신 단말기, 이동 전화기, 유/무선 전화기, 개인 정보 단말기(PDA, Personal Digital Assistant), 스마트 폰(Smart Phone), 노트북(Notebook) 및 퍼스널 컴퓨터(Personal Computer), 3G 단말기 예를 들면, WCDMA(Wideband Code Division Multiple Access) 방식의 단말기 및 와이브로와 같은 휴대 인터넷 단말기, GSM/GPRS(Global System For Mobile Communication/General Packet Radio Service), UMTS(Universal Mobile Telecommunication Service) 단말기 등과 같은 모든 정보통신기기 및 멀티미디어 기기와, 그에 대한 응용에도 적용될 수 있음은 자명할 것이다. Prior to the detailed description of the present invention, hereinafter, a video call apparatus performing a function according to an embodiment of the present invention will be described as a mobile communication terminal, but the present invention is not limited thereto. That is, the terminal according to an embodiment of the present invention is a terminal equipped with a video call module, preferably a mobile communication terminal capable of using a video call service, a mobile phone, a wired / wireless phone, a personal information terminal (PDA) Personal Digital Assistants, Smart Phones, Notebooks and Personal Computers, 3G Terminals, for example, Wideband Code Division Multiple Access (WCDMA) and Portable Internet Terminals such as WiBro, GSM It will be apparent that the present invention can be applied to all information communication and multimedia devices such as Global System For Mobile Communication / General Packet Radio Service (GPRS) and Universal Mobile Telecommunication Service (UMTS) terminals, and applications thereof.

도 1은 본 발명의 실시 예에 따른 화상 통화 장치를 이용한 화상 통화 시스템을 개략적으로 나타내는 블록도이다.1 is a block diagram schematically illustrating a video call system using a video call device according to an exemplary embodiment of the present invention.

상기 도 1을 참조하면, 본 실시 예에 따른 화상 통화 시스템은 적어도 두개의 이동통신 단말기들(100, 200) 및 이동통신망(300)을 포함하여 구성된다. Referring to FIG. 1, the video call system according to the present embodiment includes at least two mobile communication terminals 100 and 200 and a mobile communication network 300.

상기 이동통신망(300)은 상기 이동통신 단말기들(100, 200) 사이에서 송수신되는 화상 통화 데이터를 중계하는 역할을 수행한다. 이러한 이동 통신망(150)은 상기 이동통신 단말기들(100, 200)과 통신채널을 형성하는 기지국과, 기지국을 제어하는 기지국 제어기, 기지국 제어기를 제어하며, 통화 호를 스위칭하는 교환기 및 각 이동통신 단말기들(100, 200)의 과금을 책정하는 빌링부 등을 포함할 수 있다. 특히, 본 발명의 이동 통신망(150)은 이동통신 단말기들(100, 200) 간에 화상 통화 조건을 결정하는 프로파일 정보를 중계할 수 있다.The mobile communication network 300 relays video call data transmitted and received between the mobile communication terminals 100 and 200. The mobile communication network 150 includes a base station for forming a communication channel with the mobile communication terminals 100 and 200, a base station controller for controlling a base station, a base station controller for controlling a call, and a switch for switching a call. Billing unit for setting the charge of the field (100, 200) and the like. In particular, the mobile communication network 150 of the present invention may relay profile information for determining a video call condition between the mobile communication terminals 100 and 200.

상기 이동통신 단말기들(100, 200)은 H.324M 시스템과 같은 화상 통화를 지원하는 모듈을 포함한다. 그리고 상기 이동통신 단말기들(100, 200)은 화상 통화 호 연결 시 서로 간의 단말기 특성에 따른 비디오 화질과 전송 프레임 속도를 협상을 위한 프로파일 정보를 송수신 한다. 이후, 상기 이동통신 단말기들(100, 200)은 상기 협상된 비디오 화질과 전송 프레임 속도에 따라 화상 통화를 수행한다. 상기 협상된 비디오 화질 및 전송 프레임 속도는 네트웍 상태에 따라 재협상 과정을 거치면서 변경될 수 있다. 즉, 이동통신 단말기들(100, 200)은 협상된 비디오 화질과 전송 프레임 속도를 기반으로 화상 통화를 수행하다가 송수신되는 전송 프레임 속도를 기반으로 네트웍 상태를 판단한다. 그리고 이동통신 단말기들(100, 200)은 네트웍 상태가 양호한 제1 상태, 보통의 제2 상태 및 나쁜 제3 상태 중 어느 하나의 상태로 판단되면, 상호 간에 협상 과정을 재 수행하여 새로운 전송 프레임 속도 정보를 포함하는 프로파일 정보를 생성하도록 지시하거나, 전송 프레임 속도 변경을 위한 알림 메시지를 송수신 하도록 제어하여, 그에 따라 화상 통화를 수행한다. 예를 들어, 이동통신 단말기들(100, 200)은 20 FPS(Frame Per Sec)로 전송 프레임 속도를 협상한 이후, 네트웍 상태가 좋지 않은 것으로 판단하면, 재협상을 수행하거나 재협상에 준하는 전송 프레임 속도 조절을 위한 메시지를 송수신하여 FPS를 20 미만 예를 들면 10 FPS로 낮춘다. 이후, 이동통신 단말기들(100, 200)은 조절된 10 FPS를 기반으로 화상통화를 수행하도록 제어한다.The mobile communication terminals 100 and 200 include a module that supports a video call such as the H.324M system. The mobile communication terminals 100 and 200 transmit and receive profile information for negotiating video quality and transmission frame rate according to characteristics of terminals when connecting a video call. Thereafter, the mobile communication terminals 100 and 200 perform a video call according to the negotiated video quality and transmission frame rate. The negotiated video quality and transmission frame rate may be changed while undergoing a renegotiation process according to network conditions. That is, the mobile communication terminals 100 and 200 determine a network state based on the transmission frame rate transmitted and received while performing a video call based on the negotiated video quality and the transmission frame rate. When the mobile communication terminals 100 and 200 determine that the network state is any one of a good first state, a normal second state, and a bad third state, the mobile communication terminals 100 and 200 re-negotiate each other to perform a new transmission frame rate. Instructs to generate profile information including the information, or controls to transmit and receive a notification message for changing the transmission frame rate, thereby performing a video call. For example, after the mobile communication terminals 100 and 200 negotiate a transmission frame rate at 20 frames per second (FPS), and determine that the network state is not good, the mobile communication terminals 100 and 200 perform renegotiation or adjust transmission frame rates according to renegotiation. Sends and receives a message for lowering the FPS to less than 20, for example 10 FPS. Thereafter, the mobile communication terminals 100 and 200 control to perform a video call based on the adjusted 10 FPS.

상술한 본 발명의 이동통신 단말기들(100, 200)의 각 구성에 대하여 도 2를 참조하여 보다 상세히 살펴보기로 한다. 상기 도 2에 도시된 이동통신 단말기는 상술한 이동통신 단말기들(100, 200) 중 어느 하나로, 화상 통화 시, 데이터의 송신 및 수신 기능을 모두 수행할 수 있다.Each configuration of the above-described mobile communication terminals 100 and 200 will be described in more detail with reference to FIG. 2. The mobile communication terminal illustrated in FIG. 2 may be one of the mobile communication terminals 100 and 200 described above, and may perform both data transmission and reception functions during a video call.

상기 도 2를 참조하면, 본 발명의 이동통신 단말기들(100, 200)은 무선주파수부(110), 입력부(120), 오디오 처리부(130), 카메라(140), 표시부(150), 제어부(160), 저장부(170)를 포함할 수 있다.Referring to FIG. 2, the mobile communication terminals 100 and 200 of the present invention may include a radio frequency unit 110, an input unit 120, an audio processor 130, a camera 140, a display unit 150, and a controller ( 160, the storage unit 170 may be included.

상기 무선주파수부(110)는 상기 제어부(160)의 제어에 따라 화상 통화 데이터를 송신 및 수신한다. 상기 무선주파수부(110)는 송신되는 신호의 주파수를 상승변환 및 증폭하는 무선 주파수 송신부와, 수신되는 신호를 저잡음 증폭하고 주파수를 하강 변환하는 무선 주파수 수신부 등을 포함할 수 있다.The radio frequency unit 110 transmits and receives video call data under the control of the controller 160. The radio frequency unit 110 may include a radio frequency transmitter for upconverting and amplifying a frequency of a transmitted signal, and a radio frequency receiver for low noise amplifying and downconverting a received signal.

특히, 본 발명의 무선주파수부(110)는 제어부(160) 제어에 따라 현재 협상된 비디오 화질 및 전송 프레임 속도를 기반으로 화상 통화 데이터를 송신 및 수신한다. 그리고 상기 무선주파수부(110)는 네트웍 상황의 변화에 따라 상기 이동통신 단말기들(100, 200)의 화상 통화 특성 즉, 통화 가능한 비디오 화질 및 전송 프레임 속도 등의 재협상을 위한 프로파일 정보를 송신 및 수신하거나, 재협상에 준하는 프로파일 정보 변경 요청 메시지를 송수신 한다. 상기, 비디오 화질 및 전송 프레임 속도 등과 관련한 데이터는 상기 이동통신 단말기들(100, 200)의 프로파일 정보에 포함될 수 있다. 이에 따라, 상기 이동통신 단말기들(100, 200)은 상기 프 로파일 정보의 송수신을 통하여, 각 이동통신 단말기들(100, 200)의 화상 통화 특성을 판단할 수 있다. 예를 들어, 네트웍 상태가 양호한 것으로 예측되며, 상기 이동통신 단말기들(100, 200) 중 제1 이동통신 단말기(100)의 전송 프레임 속도가 20 FPS이고, 상기 제2 이동통신 단말기(200)의 전송 프레임 속도도 20 FPS인 경우, 상기 이동통신 단말기들(100, 200)은 20 FPS로 화상 통화하는 것이 바람직하다. 이후, 전송 프레임 속도 20 FPS는 네트웍 상태에 따라 변경될 수 있다. In particular, the radio frequency unit 110 of the present invention transmits and receives video call data based on the currently negotiated video quality and transmission frame rate under the control of the controller 160. In addition, the RF unit 110 transmits and receives profile information for renegotiation such as video call characteristics of the mobile communication terminals 100 and 200, that is, video quality and transmission frame rate of the mobile communication terminals 100 and 200 according to a change in network conditions. Or, it sends and receives a profile information change request message corresponding to renegotiation. The data related to the video quality and the transmission frame rate may be included in profile information of the mobile communication terminals 100 and 200. Accordingly, the mobile communication terminals 100 and 200 may determine the video call characteristics of the mobile communication terminals 100 and 200 by transmitting and receiving the profile information. For example, it is predicted that the network condition is good, the transmission frame rate of the first mobile communication terminal 100 of the mobile communication terminal (100, 200) is 20 FPS, the second mobile communication terminal 200 of When the transmission frame rate is also 20 FPS, the mobile communication terminals 100 and 200 preferably make a video call at 20 FPS. Then, the transmission frame rate 20 FPS may be changed according to the network state.

상기 입력부(120)는 숫자 또는 문자 정보를 입력받고 각종 기능들을 설정하기 위한 다수의 입력키 및 기능키들을 포함한다. 상기 기능키들은 특정 기능을 수행하도록 설정된 방향키, 사이드 키 및 단축키 등을 포함할 수 있다. 또한 상기 입력부(120)는 사용자 설정 및 이동통신 단말기들(100, 200)의 기능 제어와 관련하여 입력되는 키 신호를 생성하여 상기 제어부(160)로 전달한다.The input unit 120 includes a plurality of input keys and function keys for receiving numeric or character information and setting various functions. The function keys may include a direction key, a side key, and an accelerator key set for performing a specific function. In addition, the input unit 120 generates a key signal input in connection with user setting and function control of the mobile communication terminals 100 and 200 and transmits the generated key signal to the controller 160.

특히, 상기 입력부(120)는 본 발명의 실시 예에 따라 상대방 이동통신 단말기 번호 입력에 해당하는 신호, 입력된 번호를 기반으로 화상 통화 호 형성을 위한 입력신호, 화상 통화 종료 입력신호 등을 이동통신 단말기 사용자 입력에 따라 생성하여 상기 제어부(160)로 전달한다.In particular, the input unit 120 performs a mobile communication based on a signal corresponding to a counterpart mobile communication terminal number input, an input signal for forming a video call call, a video call end input signal, etc. based on the input number according to an embodiment of the present invention. It is generated according to a terminal user input and transferred to the controller 160.

상기 오디오 처리부(130)는 상기 화상 통화 시 송수신 되는 오디오 데이터를 재생하기 위한 스피커(SPK)와, 화상 통화 시 사용자의 음성 또는 기타 오디오 신호를 수집하기 위한 마이크(MIC)를 포함한다. 마이크(MIC)를 통해 수집되는 오디오 신호를 제어부(160)를 거치면서 카메라(140)가 수집한 영상과 동기화되고 무선주파수부(110)를 통하여 상대방 이동통신 단말기에 전송될 수 있다.The audio processor 130 includes a speaker SPK for playing audio data transmitted and received during the video call, and a microphone MIC for collecting a user's voice or other audio signal during the video call. The audio signal collected through the microphone (MIC) may be synchronized with the image collected by the camera 140 while passing through the control unit 160 and may be transmitted to the counterpart mobile communication terminal through the radio frequency unit 110.

상기 카메라(140)는 화상 통화를 위한 영상을 수집한다. 이러한 카메라(140)는 렌즈를 통해 촬상되는 영상을 촬영하며, 촬영된 광 신호를 전기적 신호로 변환하는 카메라 센서(도시되지 않음)와, 카메라 센서로부터 촬영되는 아날로그 영상신호를 디지털 데이터로 변환하는 신호처리부(도시되지 않음)를 구비한다. 여기서 카메라 센서는 CCD(Charge Coupled Device) 센서가 적용될 수 있고, 신호처리부는 DSP(Digital Signal Processor)로 구현될 수 있으나, 이에 한정되는 것은 아니다. 본 발명의 카메라(140)는 수집된 영상을 제어부(160)에 전달한다. 그리고 상기 카메라(140)는 상기 수집된 영상을 프리뷰 형태 등으로 상기 표시부(150)에 전달할 수 있다.The camera 140 collects an image for a video call. The camera 140 captures an image captured by a lens, a camera sensor (not shown) for converting the photographed optical signal into an electrical signal, and a signal for converting an analog image signal photographed from the camera sensor into digital data. A processing unit (not shown). Here, the camera sensor may be a charge coupled device (CCD) sensor, and the signal processor may be implemented as a digital signal processor (DSP), but is not limited thereto. The camera 140 of the present invention transmits the collected image to the controller 160. The camera 140 may transmit the collected image to the display unit 150 in a preview form.

상기 표시부(150)는 카메라(140)가 수집한 영상을 프리뷰 영상으로 표시할 수 있다. 여기서 표시부(150)는 LCD(Liquid Crystal Display)가 적용될 수 있으며, 이 경우 표시부(150)는 LCD 제어부, 데이터를 저장할 수 있는 메모리 및 LCD 표시소자 등을 구비할 수 있다. 상기 LCD를 터치스크린 방식으로 구현하는 경우, 표시부(150) 화면은 입력부로 동작될 수 있다. The display unit 150 may display an image collected by the camera 140 as a preview image. Herein, the liquid crystal display (LCD) may be applied to the display unit 150. In this case, the display unit 150 may include an LCD controller, a memory capable of storing data, and an LCD display device. When the LCD is implemented using a touch screen method, the screen of the display unit 150 may be operated as an input unit.

특히, 본 발명의 표시부(150)는 화상 통화 시, 결정된 전송 프레임 속도에 따라 출력되는 화상이 달라질 수 있다. 즉, 전송 프레임 속도가 20 FPS 일 때의 화상은 전송 프레임 속도가 10 FPS 일 때보다 고화질로 출력될 수 있다. 이에 따라, 상대방 이동통신 단말기의 카메라가 수집하여 전송한 영상은 자신의 이동통신 단말기의 카메라가 수집한 영상에 비하여 화질이 떨어질 수 있다.In particular, in the display unit 150 of the present invention, the output image may vary according to the determined transmission frame rate. That is, an image when the transmission frame rate is 20 FPS may be output in higher quality than when the transmission frame rate is 10 FPS. Accordingly, the image collected and transmitted by the camera of the other mobile communication terminal may have a lower quality than the image collected by the camera of the mobile communication terminal.

상기 저장부(170)는 본 발명의 실시 예에 따른 기능 동작에 필요한 응용 프 로그램을 비롯하여, 화상 통화에 필요한 응용 프로그램, 카메라(140) 동작을 위한 응용 프로그램, 사용자 데이터 등을 저장한다. 상기 저장부(170)는 화상 통화 시 송수신 되는 화상 통화 데이터에 대하여 지정된 크기만큼 버퍼링 하는 기능을 담당할 수 있다. 이러한 상기 저장부(170)는 크게 프로그램 영역과 데이터 영역을 포함할 수 있다.The storage unit 170 stores an application program for operating a function according to an embodiment of the present invention, an application program for a video call, an application program for operating the camera 140, user data, and the like. The storage unit 170 may be responsible for buffering the video call data transmitted / received during a video call by a predetermined size. The storage unit 170 may largely include a program area and a data area.

상기 프로그램 영역은 이동통신 단말기들(100, 200)을 부팅 시키는 운영체제(OS, Operating System), 화상 통화를 위한 카메라(140) 조작 및 오디오 수집을 위한 응용 프로그램, 이동통신 단말기들(100, 200)의 기타 옵션(options) 기능 예컨대, 소리 재생 기능, 이미지 또는 동영상 재생 기능 등에 필요한 응용 프로그램 등을 저장한다. 특히, 본 발명의 프로그램 영역은 프로파일 정보 기반 전송 프레임 속도 설정 프로그램을 저장할 수 있다. 상기 프로파일 정보 기반 전송 프레임 속도 설정 프로그램은 네트웍 상태에 따라 전송 프레임 속도를 변경함으로써, 화상 통화를 네트웍 상태에 따라 수행되도록 지원할 수 있는 설정이다. 상기 이동통신 단말기들(100, 200)은 사용자 요청에 상응하여 상기한 각 기능을 활성화하는 경우, 상기 제어부(160)의 제어 하에 해당 응용 프로그램들을 이용하여 각 기능을 제공하게 된다.The program area includes an operating system (OS) for booting the mobile communication terminals (100, 200), an operation program for operating a camera 140 for video calls and audio collection, and mobile communication terminals (100, 200). Other options (e.g., functions), for example, a sound playing function, an image or a video playing function, etc. necessary for storing the application program. In particular, the program area of the present invention may store a profile information based transmission frame rate setting program. The profile information-based transmission frame rate setting program is a setting that can support a video call to be performed according to the network state by changing the transmission frame rate according to the network state. When the mobile communication terminals 100 and 200 activate the respective functions in response to a user request, the mobile communication terminals 100 and 200 provide the respective functions by using corresponding application programs under the control of the controller 160.

상기 데이터 영역은 이동통신 단말기들(100, 200)의 사용에 따라 발생하는 데이터가 저장되는 영역으로서, 화상 통화 시, 사용자가 녹화한 데이터, 카메라(140)가 수집한 영상 중 사용자가 저장하고자 하는 데이터, 상기 이동통신 단말기들(100, 200)이 제공하는 다양한 옵션 기능과 관련한 사용자 데이터들 예컨대, 앞서 설명한 동영상과, 폰 북 데이터와, 오디오 데이터 및 해당 컨텐츠 또는 사용자 데이터들에 대응하는 정보들 등을 저장할 수 있다. 또한, 상기 데이터 영역은 상기 프로파일 정보 기반 전송 프레임 속도 설정을 저장하였다가, 상기 화상 통화 활성화 시, 제어부(160)의 제어에 따라 전송 프레임 속도를 조절하는데 이용될 수 있다.The data area is an area in which data generated according to the use of the mobile communication terminals 100 and 200 is stored, and the user wants to store data recorded by the user and images collected by the camera 140 during a video call. Data, user data related to various optional functions provided by the mobile communication terminals 100 and 200, for example, the above-described video, phone book data, audio data, information corresponding to the corresponding content or user data, and the like. Can be saved. The data area may be used to store the profile information based transmission frame rate setting and adjust the transmission frame rate under the control of the controller 160 when the video call is activated.

상기 제어부(160)는 상술한 각 구성에 전원 공급을 제어하며, 각 구성 간 신호 흐름을 제어하여 이동통신 단말기의 다양한 기능이 수행되도록 제어한다. 이러한 본 발명의 제어부(160)는 이동통신 단말기 사용자가 화상 통화를 수행하고자 하는 경우, 프로그램 영역에 저장된 화상 통화에 필요한 응용 프로그램 및 카메라 운용에 필요한 응용 프로그램을 활성화하도록 제어할 수 있다. 그리고 제어부(160)는 카메라(140)가 수집한 영상을 협상된 전송 프레임 속도에 맞도록 영상 처리한 후, 오디오 데이터 및 제어 신호와 함께 조합되어 화상 통화 데이터로 변환된다. 그리고 상기 화상 통화 데이터는 상기 제어부(160)의 제어에 따라 상기 무선주파수부(110)를 통하여 외부에 전송된다. The controller 160 controls power supply to the above-described components, and controls the signal flow between the components to perform various functions of the mobile communication terminal. When the mobile communication terminal user wants to perform a video call, the controller 160 of the present invention may control to activate an application program required for a video call stored in a program area and an application program required for operating a camera. The controller 160 processes the image collected by the camera 140 to meet the negotiated transmission frame rate, and then combines the image with the audio data and the control signal and converts the image into video call data. The video call data is transmitted to the outside through the radio frequency unit 110 under the control of the controller 160.

한편, 상기 제어부(160)는 화상 통화를 위하여 MPEG4 영상 코덱을 포함하는 H.324M을 포함할 수 있다. 상기 H.324M은 상기 MPEG4가 생성한 화상 데이터를 기타 데이터들과 함께 먹싱(Muxing)하여 화상 통화 데이터를 생성하고, 상기 화상 통화 데이터를 상기 무선주파수부(110)에 전달한다. 이를 위하여, 상기 H.324M은 상기 오디오 처리부(130)가 수집한 오디오 데이터를 인코딩하기 위한 오디오 코덱 예를 들면, AMR을 포함할 수 있다. 상기 H.324M은 화상 통화 시, 상기 화상 데이터 와 상기 오디오 데이터의 싱크 및 제어를 위한 제어 신호를 생성하는 H.245를 포함할 수 있다. 상기 H.324M은 상기 MPEG4 영상 코덱으로부터의 화상 데이터, 상기 AMR로부터의 오디오 데이터, 상기 H.245로부터의 제어 신호를 수신하여 상기 무선주파수부(110)에 전달하는 H.223을 포함할 수 있다.Meanwhile, the controller 160 may include H.324M including an MPEG4 video codec for a video call. The H.324M muxes the image data generated by the MPEG4 together with other data to generate video call data, and transmits the video call data to the radio frequency unit 110. To this end, the H.324M may include an audio codec, for example, AMR, for encoding the audio data collected by the audio processor 130. The H.324M may include H.245 generating a control signal for synchronizing and controlling the video data and the audio data during a video call. The H.324M may include H.223 that receives image data from the MPEG4 video codec, audio data from the AMR, and a control signal from the H.245 and transmits the received control signal to the radio frequency unit 110. .

이러한 제어부(160)는 프로파일 정보 기반 전송 프레임 속도 설정을 위하여 도 3에 도시된 바와 같이, 화상 통화 처리부(161), 영상 수집부(163), 프레임 처리부(165) 및 화상 통화 제어부(167)를 포함할 수 있다.As shown in FIG. 3, the controller 160 controls the video call processor 161, the video collector 163, the frame processor 165, and the video call controller 167 as shown in FIG. 3. It may include.

상기 화상 통화 처리부(161)는 무선주파수부(110)와 프레임 처리부(165) 및 오디오 처리부(130) 사이에 배치되어 무선주파수부(110)가 수신한 화상 통화 데이터를 먹싱 또는 디먹싱하는 역할을 수행한다. 즉, 화상 통화 처리부(161)는 무선주파수부(110)로부터 화상 통화 데이터를 수신하면, 화상 통화 데이터 포함된 오디오 데이터를 추출하여 오디오 처리부(130)에 전달할 수 있고, 오디오 처리부(130)가 수집한 오디오 데이터를 다른 데이터들 즉, 화상 데이터 및 제어 신호와 함께 처리하여 화상 통화 데이터를 생성할 수 있다. 또한 화상 통화 처리부(161)는 화상 통화 데이터로부터 화상 데이터를 추출하여 프레임 처리부(165)에 전달할 수 있고, 프레임 처리부(165)로부터 화상 데이터를 수신하여 앞서 설명한 바와 같이 화상 통화 데이터를 생성할 수 있다. 이러한 화상 통화 처리부(161)는 상술한 H.324M 기능을 수행할 수 있다.The video call processor 161 is disposed between the radio frequency unit 110, the frame processor 165, and the audio processor 130 to mux or demux the video call data received by the radio frequency unit 110. To perform. That is, when the video call processor 161 receives the video call data from the radio frequency unit 110, the video call processor 161 may extract audio data including the video call data and transmit the audio data to the audio processor 130, which is collected by the audio processor 130. One audio data may be processed together with other data, i.e., image data and control signals, to generate video call data. In addition, the video call processor 161 may extract the video data from the video call data and transmit the video data to the frame processor 165, and receive the video data from the frame processor 165 to generate the video call data as described above. . The video call processor 161 may perform the above-described H.324M function.

상기 영상 수집부(163)는 카메라(140)와 프레임 처리부(165) 사이에 배치되어 카메라(140)가 수집한 영상을 프레임 처리한다. 이때, 영상 수집부(163)는 사 용자가 입력하는 입력 신호에 대응하여 카메라의 초점을 변경하거나 줌인 줌 아웃 기능을 수행하도록 제어할 수 있으며, 사용자 요청에 따라 저장부(170)에 저장된 특정 영상을 카메라(140)가 수집한 영상을 대신하여 읽어 올 수 있다.The image collector 163 is disposed between the camera 140 and the frame processor 165 to frame the image collected by the camera 140. In this case, the image collecting unit 163 may control to change the focus of the camera or perform a zoom-in zoom-out function in response to an input signal input by the user, and the specific image stored in the storage unit 170 according to a user's request. The camera 140 may read in place of the image collected.

상기 프레임 처리부(165)는 화상 통화 제어부(167)의 제어에 따라 영상 수집부(163)가 수집한 영상의 프레임 수를 처리하고, 이를 화상 통화 처리부(161)에 전달한다. 한편, 프레임 처리부(165)는 영상 수집부(163)로부터 수신한 영상을 표시부(150)에 전달하여 프리뷰 형태로 출력하도록 지원한다. 특히, 프레임 처리부(165)는 화상 통화 제어부(167)의 제어에 따라 영상 수집부(163)가 수집한 영상의 시간당 전송할 프레임 수를 결정하고, 이를 기반으로 수집 영상의 프레임 변환을 수행한다. 예를 들면, 화상 통화 제어부(167)로부터 초당 20 프레임을 생성하도록 전달받은 경우, 프레임 처리부(165)는 영상 수집부(163)로부터 전달받은 영상으로부터 I(Intra) 프레임을 일정 간격으로 추출하며, 그 사이사이에 I 프레임으로부터 예측되는 P(Predicted) 프레임을 삽입하여 20 프레임을 생성한다. 즉, I 프레임이 4장 간격으로 설정되면, P 프레임은 I 프레임 사이에 3장씩 배치될 수 있다. 결과적으로 초당 I 프레임은 총 5장이 포함될 수 있다. 만약, 화상 통화 제어부(167)로부터 초당 10 프레임을 생성하도록 전달받은 경우, 프레임 처리부(165)는 P 프레임의 개수가 일정할 경우 영상 수집부(163)로부터 전달받은 영상으로부터 추출하는 I 프레임을 20 FPS(Frame Per Sec)일 때에 비하여 절반 정도 예를 들면 2.5장 정도 포함되도록 조정할 수 있다. The frame processor 165 processes the number of frames of the image collected by the video collector 163 under the control of the video call controller 167, and transfers the frame number to the video call processor 161. The frame processor 165 transmits the image received from the image collector 163 to the display unit 150 and outputs the image in preview form. In particular, the frame processor 165 determines the number of frames to be transmitted per time of the image collected by the image collector 163 under the control of the video call controller 167, and performs frame conversion of the collected image based on this. For example, when received from the video call controller 167 to generate 20 frames per second, the frame processor 165 extracts I (Intra) frames from the image received from the image collector 163 at regular intervals, In between, 20 frames are generated by inserting a P (Predicted) frame predicted from an I frame. That is, if the I frames are set at four intervals, three P frames may be arranged between the I frames. As a result, 5 frames per second can be included. If received from the video call controller 167 to generate 10 frames per second, the frame processor 165 receives 20 I frames extracted from the image received from the image collector 163 when the number of P frames is constant. Compared to the FPS (Frame Per Sec) can be adjusted to include about half, for example 2.5.

상기 화상 통화 제어부(167)는 저장부(170)에 저장된 프로파일 정보를 확인 하고, 그 중 전송 프레임 속도를 확인하여 프레임 처리부(165)를 제어한다. 한편, 화상 통화 제어부(167)는 프레임 처리부(165)를 통하여 수신되는 프레임의 수를 검사하고, 검사된 프레임 수를 기반으로 네트웍 상태를 판단한다. 예를 들면, 화상 통화 제어부(167)는 화상 통화 호 형성 시에 협상 되었던 전송 프레임 속도가 20 FPS인 경우, 초당 수신된 프레임의 개수가 전송 프레임 속도의 제1 일정 비율 예를 들면 70% 초과인 경우, 현재 네트웍 상태를 양호한 상태로 판단할 수 있다. 이와 유사하게 화상 통화 제어부(167)는 초당 수신된 프레임의 개수가 협상된 전송 프레임 속도의 제2 일정 비율 범위 예를 들면 70% 이하 30% 이상인 경우, 현재 네트웍 상태를 보통 상태로 판단할 수 있다. 그리고 화상 통화 제어부(167)는 초당 수신된 프레임의 개수가 협상된 전송 프레임 속도의 제3 일정 비율 예를 들면 30% 미만인 경우, 현재 네트웍 상태를 나쁜 상태로 판단할 수 있다. 이와 같이, 본 발명의 화상 통화 제어부(167)는 초당 수신된 프레임의 개수와 전송 프레임 속도 간의 일정 비율을 기준으로 네트웍 상태를 다양한 상태로 판단할 수 있다. 여기서, 화상 통화 제어부(167)는 네트웍 상태 판단을 위하여 전송 프레임의 개수를 검출하고 이를 기 결정된 전송 프레임 속도와 비교하는 것으로 설명하였으나, 수신되는 전송 프레임의 I 프레임 간 간격 평균값을 이용해서도 동일한 과정을 수행할 수 있다. 즉, I 프레임 간 간격이 FPS 변경에 따라 달라지는 경우, 본 발명의 화상 통화 제어부(167)는 I 프레임 간 평균값 계산을 통하여 현재 수신되는 프레임이 협상된 전송 프레임 속도에 비하여 얼마의 비율 차지하는지 판단할 수 도 있다.The video call controller 167 checks the profile information stored in the storage unit 170 and checks the transmission frame rate among them to control the frame processor 165. On the other hand, the video call controller 167 checks the number of frames received through the frame processor 165 and determines the network state based on the number of checked frames. For example, when the transmission frame rate negotiated when the video call is formed is 20 FPS, the number of frames received per second is greater than or equal to 70% of the first frame rate. In this case, the current network state can be determined as a good state. Similarly, the video call controller 167 may determine the current network state as a normal state when the number of frames received per second is within a second predetermined ratio range of, for example, 70% or less and 30% or more. . The video call controller 167 may determine the current network state as a bad state when the number of frames received per second is less than a third predetermined ratio, for example, 30% of the negotiated transmission frame rate. As such, the video call controller 167 of the present invention may determine the network state as various states based on a predetermined ratio between the number of frames received per second and the transmission frame rate. Here, the video call controller 167 detects the number of transmission frames and compares the number of transmission frames with a predetermined transmission frame rate in order to determine the network status. However, the same process is performed using the average value of the intervals between the I frames of the received transmission frames. Can be performed. That is, when the interval between I frames is changed according to the FPS change, the video call controller 167 of the present invention may determine how much the current received frame occupies the negotiated transmission frame rate by calculating the average value between I frames. Can also be.

이후, 화상 통화 제어부(167)는 각 네트웍 상태에 따라 전송 프레임 속도를 상대방 이동통신 단말기와 조절하기 위한 프로파일 정보 재협상 또는 그에 준하는 전송 프레임 속도 설정 변경을 위한 메시지 송수신을 수행할 수 있다. 이를 보다 상세히 설명하면, 화상 통화 제어부(167)는 네트웍 상태가 변경되어 전송 프레임 속도를 변경해야 하는 경우, 새로운 전송 프레임 속도를 설정하고 설정된 전송 프레임 속도 정보를 포함하는 프로파일 정보를 상대방 이동통신 단말기와 통화 조건 재협상 과정에서 송수신하고, 상대방 이동통신 단말기로부터 그에 대한 응신을 수신하면 프로파일 정보에 포함된 새로운 전송 프레임 속도 정보에 따라 기 설정된 전송 프레임 속도를 낮추거나 높임으로써 전송 프레임 속도를 조절한다. 이후, 화상 통화 제어부(167)는 저장부(170)에 기 저장된 프로파일 정보를 재협상된 전송 프레임 속도에 맞추어 갱신하도록 제어할 수 있다. 또한, 화상 통화 제어부(167)는 전송 프레임 속도 변경을 위하여 알림 메시지(Alert message)를 생성하고, 알림 메시지의 전송 프레임 속도 변경을 위해 할당된 비트 값을 조절하여 상대방 이동통신 단말기에 전송한다. 상대방 이동통신 단말기는 알림 메시지를 수신하고, 그에 따라 전송 프레임 속도 변경을 수행하면, 그에 대응하는 응답 메시지를 생성하여 알림 메시지를 전송한 이동통신 단말기에 전송한다. 여기서, 알림 메시지는 새로운 포맷으로 생성될 수 있으며, 이러한 알림 메시지 전송과 적용을 위하여 미리 규약을 설정할 수 있을 것이다. 예를 들어, 이 규약은 전송 프레임 속도 변경을 위하여 알림 메시지의 일정 비트를 플래그(Flag)로 할당하고, 플래그의 값이 "1" 또는 "0"인지 여부에 따라 기 설정된 FPS 만큼 증가하도록 설정할 수 있다. 즉, 이동통신 단말기는 상대방 이동통신 단말기로부터 플래그 값이 "1"인 알림 메시지를 수신하면, 전송 프레임 속도를 기 설정된 만큼 증가하도록 조정하고, 플래그 값이 "0"인 알림 메시지를 수신하면, 전송 프레임 속도를 기 설정된 만큼 감소하도록 조정할 수 있다.Thereafter, the video call controller 167 may perform message transmission / reception for renegotiating profile information for adjusting the transmission frame rate with the counterpart mobile communication terminal or changing the transmission frame rate setting corresponding thereto according to each network state. In more detail, when the network state is changed and the transmission frame rate needs to be changed, the video call controller 167 sets a new transmission frame rate and sends profile information including the set transmission frame rate information to the counterpart mobile communication terminal. When the call condition is transmitted and received during the renegotiation process and the response is received from the counterpart mobile communication terminal, the transmission frame rate is adjusted by lowering or increasing the preset transmission frame rate according to the new transmission frame rate information included in the profile information. Thereafter, the video call controller 167 may control to update the profile information previously stored in the storage unit 170 according to the renegotiated transmission frame rate. In addition, the video call controller 167 generates an alert message to change the transmission frame rate, adjusts a bit value assigned to change the transmission frame rate of the notification message, and transmits the same to the counterpart mobile communication terminal. When the counterpart mobile communication terminal receives the notification message and changes the transmission frame rate accordingly, the counterpart mobile communication terminal generates a response message corresponding to the notification message and transmits the response message to the mobile communication terminal. Here, the notification message may be generated in a new format, and the protocol may be set in advance for the transmission and application of the notification message. For example, this protocol can allocate a certain bit of the notification message as a flag to change the transmission frame rate, and set it to increase by a predetermined FPS depending on whether the flag value is "1" or "0". have. That is, when the mobile communication terminal receives the notification message with the flag value of "1" from the counterpart mobile communication terminal, the mobile communication terminal adjusts the transmission frame rate to increase by a predetermined amount, and when receiving the notification message with the flag value of "0", the transmission is performed. The frame rate can be adjusted to decrease by a preset amount.

이상에서 설명한 바와 같이, 본 발명의 실시 예에 따른 이동통신 단말기 즉, 화상 통화 장치는 카메라(140)가 수집한 영상을 협상 시 이루어졌던 전송 프레임 속도에 따라 전송하되, 네트웍 상태를 수신되는 프레임의 개수를 기준으로 판단하고, 그에 따라, 송수신되는 전송 프레임 속도를 조정할 수 있다. 이에 따라, 본 발명의 이동통신 단말기들은 네트웍 상태에 따라 보다 효율적이며 적응적인 화상 통화를 수행할 수 있다.As described above, the mobile communication terminal, that is, the video call device according to the embodiment of the present invention transmits the image collected by the camera 140 according to the transmission frame rate that was made during negotiation, but the network state of the frame received It is determined based on the number, and accordingly, the transmission frame rate transmitted and received can be adjusted. Accordingly, the mobile communication terminals of the present invention can perform a more efficient and adaptive video call according to the network state.

이상에서는 본 발명의 실시 예에 따른 화상 통화 장치 및 시스템의 구성을 개략적으로 살펴보았다. 이하에서는 본 발명의 실시 예에 따른 화상 통화 방법에 대하여 도면을 참조하여 보다 상세히 설명하기로 한다. 설명에 앞서, 이하의 설명에서 하나의 이동통신 단말기는 수신측 단말기 및 송신측 단말기의 동작을 모두 수행 가능하므로, 하나의 이동통신 단말기의 제어부를 기준으로 설명하기로 한다.In the above, the configuration of the video call apparatus and system according to the embodiment of the present invention has been described. Hereinafter, a video call method according to an embodiment of the present invention will be described in detail with reference to the accompanying drawings. Prior to the description, in the following description, since one mobile communication terminal can perform both operations of a receiving terminal and a transmitting terminal, the description will be made based on a control unit of one mobile communication terminal.

도 4는 본 발명의 실시 에에 따른 화상 통화 방법을 나타낸 순서도이다.4 is a flowchart illustrating a video call method according to an embodiment of the present invention.

상기 도 4를 참조하면, 본 발명의 실시 예에 따른 화상 통화 방법은 먼저, 이동통신 단말기에 전원이 공급되면, 공급된 전원을 이용하여 부팅을 수행하고 부팅이 완료되면 S101 단계에서 기 설정된 대기 화면을 표시부에 출력하도록 제어한다.Referring to FIG. 4, in the video call method according to an embodiment of the present invention, first, when power is supplied to a mobile communication terminal, booting is performed using the supplied power, and when the booting is completed, the standby screen preset in step S101. To output to the display.

다음으로, S103 단계에서 입력부로부터 입력신호가 발생하면, 제어부는 S105 단계에서 발생된 입력 신호가 화상 통화를 위한 입력 신호인지 여부를 확인한다. S105 단계에서 발생된 입력 신호가 화상 통화가 아닌 다른 기능인 경우, 제어부는 S107 단계에서 이동통신 단말기의 해당 기능 예를 들면, 음성 통화 기능, 파일 재생 기능, 메시지 서비스 기능 등을 수행하도록 제어할 수 있다.Next, when an input signal is generated from the input unit in step S103, the controller checks whether the input signal generated in step S105 is an input signal for a video call. If the input signal generated in step S105 is a function other than a video call, the controller may control to perform a corresponding function of the mobile communication terminal, for example, a voice call function, a file play function, a message service function, etc. in step S107. .

한편, S105 단계에서 발생된 입력 신호가 화상 통화를 위한 입력 신호 즉, 상대방 이동통신 단말기 번호 및 해당 번호 기반의 화상 통화 키 입력 신호인 경우, 제어부는 S109 단계에서 화상 통화를 위한 통화 조건을 협상한다. 이때, 제어부는 비디오 화질 및 전송 프레임 속도 등을 결정할 수 있다.On the other hand, if the input signal generated in step S105 is an input signal for a video call, that is, a counterpart mobile communication terminal number and the video call key input signal based on the number, the controller negotiates a call condition for the video call in step S109. . In this case, the controller may determine the video quality and the transmission frame rate.

이후, 제어부는 S111 단계에서 상대방 이동통신 단말기와 화상 통화 연결을 수행한다. 이를 위해, 제어부는 카메라를 활성화하여 영상을 수집하고, 오디오 처리부의 마이크로부터 입력되는 오디오 데이터를 수집한다. 그리고 제어부는 수집된 영상 및 오디오 데이터와 제어 신호를 포함하는 화상 통화 데이터를 생성하고, 이를 무선주파수부를 통하여 상대방 이동통신 단말기에 전송한다. 한편, 제어부는 카메라를 통하여 수집되는 영상을 표시부에 출력하도록 제어한다. 그리고 제어부는 무선주파수부를 통하여 상대방 이동통신 단말기로부터 수신된 화상 통화 데이터로부터 화상 데이터와 오디오 데이터를 추출하고, 추출된 화상 데이터는 표시부에 출력하도록 제어한다. 한편, 제어부는 오디오 데이터를 오디오 처리부의 스피커를 통하여 출력하도록 제어할 수 있다. 또한 화상 데이터 추출 과정에서 제어부는 수신되는 프레임의 개수를 확인한다. 즉, 제어부는 초당 수신되는 프레임의 개수인 FPS(Frame Per Sec)를 검사한다.Thereafter, the controller performs a video call connection with the counterpart mobile communication terminal in step S111. To this end, the controller collects an image by activating the camera and collects audio data input from the microphone of the audio processor. The controller generates video call data including the collected video and audio data and a control signal, and transmits the video call data to the counterpart mobile communication terminal through the radio frequency unit. The controller controls the display unit to output the image collected through the camera. The controller extracts image data and audio data from video call data received from the other party's mobile communication terminal through the radio frequency unit, and outputs the extracted image data to the display unit. The controller may control the audio data to be output through the speaker of the audio processor. In addition, the controller checks the number of received frames in the image data extraction process. That is, the controller checks the frame per sec (FPS) which is the number of frames received per second.

다음으로, 제어부는 S113 단계에서 화상 통화 종료 여부를 확인하고, 화상 통화를 유지할 경우, S115 단계로 분기하여 수신 FPS가 전송 프레임 속도에 비해 기 설정된 비율 이상인지 여부를 확인한다. 여기서, S113 단계는 화상 통화 흐름을 설명하기 위한 단계로서 생략되거나 다른 단계들 사이에 배치될 수 있다.Next, the controller checks whether the video call ends in step S113, and if the video call is maintained, branches to step S115 to check whether the received FPS is equal to or greater than a preset ratio relative to the transmission frame rate. Here, step S113 may be omitted as a step for explaining the video call flow or may be disposed between other steps.

한편, S115 단계에서 수신 FPS가 전송 프레임 속도에 비하여 기 설정된 비율 이상인 경우, 제어부는 S117 단계로 분기하여 FPS를 증가시키도록 제어한다. 그리고 S115 단계에서 수신 FPS가 기 설정된 비율 이하인 경우, 제어부는 S119 단계에서 통하여 FPS를 감소시키도록 제어한다.On the other hand, if the received FPS is greater than the preset ratio compared to the transmission frame rate in step S115, the controller branches to step S117 to control to increase the FPS. If the reception FPS is less than or equal to the preset ratio in step S115, the controller controls to reduce the FPS in step S119.

이를 보다 상세히 설명하면, 제어부는 수신 FPS가 기 설정된 비율 이상인 경우, 현재 네트웍 상태를 양호한 제1 상태로 판단한고, 전송 프레임 속도를 증가시키기 위한 과정을 수행한다. 이 과정은 상대방 이동통신 단말기와 화상 통화 조건 변경을 위한 절차로서, 기 설정된 전송 프레임 속도에 비하여 높은 전송 프레임 속도를 기재한 정보를 포함하는 프로파일 정보를 서로 송수신하여 전송 프레임 속도를 증가시키도록 하는 과정이 될 수 있다. 또한, 상기 과정은 전송 프레임 속도 증가를 위한 알림 메시지를 사전에 정의하고, 해당 알림 메시지의 일정 비트 값에 따라 전송 프레임 속도를 증가하도록 하는 과정이 될 수 있다.In more detail, when the reception FPS is greater than or equal to a preset ratio, the controller determines that the current network state is a good first state and performs a process for increasing a transmission frame rate. This process is a procedure for changing a video call condition with a counterpart mobile communication terminal, and is a process for increasing a transmission frame rate by transmitting and receiving profile information including information describing a high transmission frame rate relative to a preset transmission frame rate. This can be In addition, the process may be a process of defining a notification message for increasing the transmission frame rate in advance and increasing the transmission frame rate according to a predetermined bit value of the notification message.

한편, 수신 FPS가 기 설정된 비율 범위 이내인 경우, 제어부는 전송 프레임 속도를 유지하여 화상 통화를 수행하도록 제어한다. 그리고 수신 FPS가 기 설정된 비율 범위 미만인 경우, 제어부는 전송 프레임 속도를 감소시켜 화상 통화를 수행하도록 프로파일 정보 송수신 또는 그에 대응하는 알림 메시지를 송수신하여 전송 프레임 속도를 감소시키도록 제어한다.On the other hand, if the reception FPS is within the preset ratio range, the control unit controls to perform a video call by maintaining the transmission frame rate. When the reception FPS is less than the preset ratio range, the controller reduces the transmission frame rate to reduce the transmission frame rate by transmitting and receiving profile information or a corresponding notification message so as to perform a video call.

상술한 바와 같이, 본 발명의 실시 예에 따른 화상 통화 송수신 방법은 화상 통화 연결 시 결정되는 전송 프레임 속도를 네트웍 상태에 따라 변경하도록 제어함으로써, 보다 효율적이며 적응적인 화상 통화를 수행할 수 있도록 지원한다. 다시 말하여, 본 발명의 화상 통화 송수신 방법은 수신되는 프레임의 개수와 전송 프레임 속도를 비교하여 현재 네트웍 상태를 판단하고, 네트웍 상태에 따라, 수정된 전송 프레임 속도 정보를 포함하는 프로파일 정보를 기반으로 재협상을 수행하여 새로운 전송 프레임 속도 기반으로 화상 통화를 수행할 수 있다. 또한, 본 발명의 화상 통화 송수신 방법은 전송 프레임 속도 증가 또는 감소를 위한 알림 메시지를 송수신하고, 이에 따라 전송 프레임 속도를 변화시켜 화상 통화를 수행하도록 제어할 수 있다.As described above, the video call transmission / reception method according to an embodiment of the present invention supports a more efficient and adaptive video call by controlling the transmission frame rate determined when the video call is connected according to the network state. . In other words, the video call transmission / reception method of the present invention compares the number of received frames with the transmission frame rate to determine the current network state, and based on the profile information including the modified transmission frame rate information according to the network state. The renegotiation can be performed to make a video call based on the new transmission frame rate. In addition, the video call transmission / reception method of the present invention may transmit and receive a notification message for increasing or decreasing the transmission frame rate, and thereby controlling to perform the video call by changing the transmission frame rate.

한편, 본 명세서와 도면을 통해 본 발명의 바람직한 실시 예들에 대하여 설명하였으며, 비록 특정 용어들이 사용되었으나, 이는 단지 본 발명의 기술 내용을 쉽게 설명하고 발명의 이해를 돕기 위한 일반적인 의미에서 사용된 것일 뿐, 본 발명의 범위를 한정하고자 하는 것은 아니다. 여기에 개시된 실시 예 외에도 본 발명의 기술적 사상에 바탕을 둔 다른 변형 예들이 실시 가능하다는 것은 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 자명한 것이다. On the other hand, it has been described with respect to the preferred embodiments of the present invention through the specification and drawings, although specific terms are used, this is only used in a general sense to easily explain the technical details of the present invention and to help the understanding of the invention. It is not intended to limit the scope of the present invention. It will be apparent to those skilled in the art that other modifications based on the technical idea of the present invention can be carried out in addition to the embodiments disclosed herein.

도 1은 본 발명의 실시 예에 따른 화상 통화 시스템의 구성을 개략적으로 나타낸 도면,1 is a view schematically showing the configuration of a video call system according to an embodiment of the present invention;

도 2는 본 발명의 실시 예에 따른 이동통신 단말기의 구조를 개략적으로 나타내는 블록도,2 is a block diagram schematically showing the structure of a mobile communication terminal according to an embodiment of the present invention;

도 3은 본 발명의 제어부 구성을 보다 상세히 나타낸 도면,3 is a view showing in more detail the control unit configuration of the present invention,

도 4는 본 발명의 실시 예에 따른 화상 통화 방법을 설명하기 위한 순서도.4 is a flowchart illustrating a video call method according to an embodiment of the present invention.

Claims (12)

이동통신 단말기들 간에 화상통화를 위한 통화 조건을 협상하는 과정;Negotiating a call condition for a video call between mobile communication terminals; 상기 통화 조건에 따라 화상 통화를 수행하는 과정;Performing a video call according to the call condition; 상기 화상 통화 중 네트웍 상태를 판단하는 과정;Determining a network state during the video call; 상기 네트웍 상태에 따라 전송 프레임 속도를 변경하는 과정;Changing a transmission frame rate according to the network state; 상기 변경된 전송 프레임 속도를 기반으로 화상 통화를 수행하는 과정;을 포함하는 것을 특징으로 하는 화상 통화 송수신 방법.And performing a video call based on the changed transmission frame rate. 제1항에 있어서,The method of claim 1, 상기 네트웍 상태를 판단하는 과정은The process of determining the network state 현재 수신되는 전송 프레임의 초당 개수를 검출하는 과정;Detecting the number of transmission frames per second currently received; 상기 검출된 초당 프레임 개수와 상기 통화 조건 협상 시 결정된 전송 프레임 속도와의 비율에 따라 네트웍 상태를 판단하는 과정;을 포함하는 것을 특징으로 하는 화상 통화 송수신 방법.And determining a network state according to a ratio between the detected number of frames per second and the transmission frame rate determined at the call condition negotiation. 제2항에 있어서,The method of claim 2, 상기 초당 프레임 개수와 상기 전송 프레임 속도의 비율이 기 설정된 비율보다 높은 경우, 상기 네트웍 상태를 제1 상태로 판단하고, 상기 초당 프레임 개수와 상기 전송 프레임 속도의 비율이 기 설정된 비율 범위 이내인 경우, 상기 네트웍 상태를 제2 상태로 판단하며, 상기 초당 프레임 개수와 상기 전송 프레임 속도의 비율이 기 설정된 비율보다 낮은 경우, 상기 네트웍 상태를 제3 상태로 판단하는 과정;When the ratio of the number of frames per second and the transmission frame rate is higher than a preset ratio, the network state is determined as a first state, and when the ratio of the number of frames per second and the transmission frame rate is within a preset ratio range, Determining the network state as a second state, and when the ratio of the number of frames per second and the transmission frame rate is lower than a preset ratio, determining the network state as a third state; 상기 네트웍 상태가 제1 상태인 경우, 상기 전송 프레임 속도를 증가시키고, 상기 네트웍 상태가 제2 상태인 경우, 상기 전송 프레임 속도를 유지하며, 상기 네트웍 상태가 상기 제3 상태 인 경우, 상기 전송 프레임 속도를 감소시키는 과정;을 포함하는 것을 특징으로 하는 화상 통화 송수신 방법.When the network state is the first state, the transmission frame rate is increased, when the network state is the second state, the transmission frame rate is maintained, and when the network state is the third state, the transmission frame Reducing the speed; video call transmission and reception method comprising a. 제3항에 있어서,The method of claim 3, 상기 화상 통화를 수행하는 과정은The process of performing the video call 전송 프레임 속도를 증가, 유지 또는 감소시키기 위한 새로운 전송 프레임 속도 정보를 포함하는 프로파일 정보를 상대방 이동통신 단말기에 전송하는 과정;Transmitting profile information including new transmission frame rate information for increasing, maintaining or decreasing the transmission frame rate to the counterpart mobile communication terminal; 상기 프로파일 정보 기반으로 화상 통화를 위한 통화 조건 재협상을 수행하는 과정;Performing renegotiation of a call condition for a video call based on the profile information; 상기 통화 조건 재협상에 의해 결정된 새로운 전송 프레임 속도에 따라 화상 통화를 수행하는 과정;을 포함하는 것을 특징으로 하는 화상 통화 송수신 방법.And performing a video call according to the new transmission frame rate determined by the call condition renegotiation. 제4항에 있어서,The method of claim 4, wherein 상기 화상 통화를 수행하는 과정은The process of performing the video call 전송 프레임 속도를 증가 또는 감소시키기 위한 알림 메시지를 생성하는 과 정;Generating a notification message for increasing or decreasing a transmission frame rate; 상기 알림 메시지를 상대방 이동통신 단말기에 전송하는 과정;Transmitting the notification message to a counterpart mobile communication terminal; 상기 알림 메시지를 기반으로 전송 프레임 속도를 증가 또는 감소시키는 과정;Increasing or decreasing a transmission frame rate based on the notification message; 상기 증가 또는 감소된 전송 프레임 속도를 기반으로 화상 통화를 수행하는 과정;을 포함하는 것을 특징으로 하는 화상 통화 송수신 방법.And performing a video call based on the increased or decreased transmission frame rate. 영상을 수집하는 카메라;A camera collecting the image; 오디오 데이터를 수집하는 오디오 처리부;An audio processor for collecting audio data; 화상통화를 위한 통화 조건에 해당하는 프로파일 정보를 송수신하는 무선주파수부;A radio frequency unit for transmitting and receiving profile information corresponding to a call condition for a video call; 상기 통화 조건에 따라 화상 통화를 수행하며, 상기 화상 통화 중 네트웍 상태를 판단하고, 상기 네트웍 상태에 따라 전송 프레임 속도를 변경한 후, 상기 변경된 전송 프레임 속도를 기반으로 화상 통화를 수행하도록 제어하는 제어부;를 포함하는 것을 특징으로 하는 화상 통화 송수신 장치.A control unit for performing a video call according to the call condition, determining a network state of the video call, changing a transmission frame rate according to the network state, and controlling to perform a video call based on the changed transmission frame rate Video call transmitting and receiving apparatus comprising a. 제6항에 있어서,The method of claim 6, 상기 제어부는The control unit 상기 오디오 데이터와 상기 영상 및 제어 신호를 기반으로 화상 통화 데이터를 생성하여 전송하고, 수신된 화상 통화 데이터로부터 수신 오디오 데이터, 수신 영상 및 수신 제어 신호를 분류하는 화상 통화 처리부;A video call processor for generating and transmitting video call data based on the audio data and the video and control signals, and classifying the received audio data, the received video, and the received control signal from the received video call data; 상기 영상을 기 저장된 전송 프레임 속도에 비추어 프레임 변환하는 프레임 처리부;A frame processor configured to frame-convert the image based on a previously stored transmission frame rate; 상기 영상을 상기 프레임 처리부에 전달하는 영상 수집부;An image collecting unit which transmits the image to the frame processing unit; 기 저장된 전송 프레임 속도와 수신 영상의 프레임 수 비교에 따라 네트웍 상태를 판단하고, 네트웍 상태에 따라 전송 프레임 속도 변경을 제어하는 화상 통화 제어부;를 포함하는 것을 특징으로 하는 화상 통화 송수신 장치.And a video call controller for determining a network state according to a pre-stored transmission frame rate and a frame number of the received image, and controlling a change of the transmission frame rate according to the network state. 제7항에 있어서,The method of claim 7, wherein 기 화상 통화 제어부는Video call controller 상기 초당 프레임 개수와 상기 전송 프레임 속도의 비율이 기 설정된 비율보다 높은 경우, 상기 네트웍 상태를 제1 상태로 판단하고, 상기 초당 프레임 개수와 상기 전송 프레임 속도의 비율이 기 설정된 비율 범위 이내인 경우, 상기 네트웍 상태를 제2 상태로 판단하며, 상기 초당 프레임 개수와 상기 전송 프레임 속도의 비율이 기 설정된 비율보다 낮은 경우, 상기 네트웍 상태를 제3 상태로 판단하는 것을 특징으로 하는 화상 통화 송수신 장치.When the ratio of the number of frames per second and the transmission frame rate is higher than a preset ratio, the network state is determined as a first state, and when the ratio of the number of frames per second and the transmission frame rate is within a preset ratio range, And determine the network state as a second state, and when the ratio of the number of frames per second and the transmission frame rate is lower than a preset ratio, determine the network state as a third state. 제8항에 있어서,The method of claim 8, 상기 화상 통화 제어부는The video call control unit 상기 네트웍 상태가 제1 상태인 경우, 상기 전송 프레임 속도를 증가시키고, 상기 네트웍 상태가 제2 상태인 경우, 상기 전송 프레임 속도를 유지하며, 상기 네트웍 상태가 상기 제3 상태 인 경우, 상기 전송 프레임 속도를 감소시키는 것을 특징으로 하는 화상 통화 송수신 장치.When the network state is the first state, the transmission frame rate is increased, when the network state is the second state, the transmission frame rate is maintained, and when the network state is the third state, the transmission frame Video call transmission and reception apparatus, characterized in that for reducing the speed. 제9항에 있어서,10. The method of claim 9, 상기 화상 통화 제어부는The video call control unit 상기 전송 프레임 속도 증가 또는 감소를 위한 알림 메시지를 생성하고, 상기 알림 메시지를 상대방 이동통신 단말기와 송수신 하도록 제어하는 것을 특징으로 하는 화상 통화 송수신 장치.And generating a notification message for increasing or decreasing the transmission frame rate, and controlling the transmission and reception of the notification message with a counterpart mobile communication terminal. 제10항에 있어서,The method of claim 10, 상기 화상 통화 제어부는The video call control unit 상기 전송 프레임 속도 증가 또는 감소를 위한 새로운 전송 프레임 속도 정보를 정의하고, 상기 새로운 전송 프레임 속도 정보를 포함하는 프로파일 정보를 기반으로 상기 통화 조건을 재협상하도록 제어하는 것을 특징으로 하는 화상 통화 송수신 장치.And defining new transmission frame rate information for increasing or decreasing the transmission frame rate and renegotiating the call condition based on profile information including the new transmission frame rate information. 제11항에 있어서,The method of claim 11, 상기 프로파일 정보를 저장하고, 상기 새로운 전송 프레임 속도 정보에 의해 갱신되는 프로파일 정보를 저장하는 저장부;를 더 포함하는 것을 특징으로 하는 화 상 통화 송수신 장치.And a storage unit for storing the profile information and storing profile information updated by the new transmission frame rate information.
KR1020080109710A 2008-11-06 2008-11-06 Method for transmitting and receiving of video telephony KR20100050694A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020080109710A KR20100050694A (en) 2008-11-06 2008-11-06 Method for transmitting and receiving of video telephony

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020080109710A KR20100050694A (en) 2008-11-06 2008-11-06 Method for transmitting and receiving of video telephony

Publications (1)

Publication Number Publication Date
KR20100050694A true KR20100050694A (en) 2010-05-14

Family

ID=42276649

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020080109710A KR20100050694A (en) 2008-11-06 2008-11-06 Method for transmitting and receiving of video telephony

Country Status (1)

Country Link
KR (1) KR20100050694A (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20160086560A (en) * 2015-01-12 2016-07-20 에스케이텔레콤 주식회사 Recording medium recording program for method of providing augmented reality contents during video call service, and apparatus teherfor

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20160086560A (en) * 2015-01-12 2016-07-20 에스케이텔레콤 주식회사 Recording medium recording program for method of providing augmented reality contents during video call service, and apparatus teherfor

Similar Documents

Publication Publication Date Title
US10674002B2 (en) Apparatus and method for controlling built-in microphone of portable terminal
KR101066830B1 (en) Method For Transmitting and Receiving, and Apparatus using the same
EP1859621B1 (en) Communication terminals that vary a video stream based on how it is displayed
KR100784971B1 (en) Upgrade system and method using remote control between portable terminal
KR100678226B1 (en) Method for operating in mobile phone having detachable wireless display window
US20090061850A1 (en) Cordless phone system with data retrieving capability using wireless technology
EP1720328A1 (en) Apparatus and method for displaying information in Bluetooth communication mode of wireless terminal
JP7480267B2 (en) Service processing method, information transmission method and related device
US20070291107A1 (en) Apparatus and method for sending/receiving text message during video call in mobile terminal
CN101697579A (en) Terminal with videophone function and method for adjusting video images thereof
CN109890022B (en) Data transmission control method, mobile terminal and computer readable storage medium
US20060105816A1 (en) System and method for offering wireless internet services
KR101755433B1 (en) Method For Transmitting and Receiving of Video Telephony having function of adjusting Quality of resolution
US20100075650A1 (en) Method of changing status of instant message software
EP1732321A2 (en) Foldable wireless terminal for performing video communication and corresponding method
KR20100050694A (en) Method for transmitting and receiving of video telephony
JP2010016885A (en) Communication apparatus and method, communication system, and program recording medium
JP2003122339A (en) Mobile communication terminal
JP2004221738A (en) Video phone and video phone control method
EP1739930A1 (en) Method of performing a call in a wireless terminal
KR20080103762A (en) Portable device and method for connecting communication network of using thereof
KR100594007B1 (en) Method for power save in wireless telephone
KR20120004148A (en) Method for transmitting and receiving of video telephony having function of adjusting quality of resolution
KR20100116275A (en) Method and apparatus for output setting in portable terminal
KR20030097572A (en) Device and method for displaying data in mobile telephone having camera

Legal Events

Date Code Title Description
WITN Application deemed withdrawn, e.g. because no request for examination was filed or no examination fee was paid