KR20090014499A - A mobilecommunication terminal capable of image call and calling method thereof - Google Patents

A mobilecommunication terminal capable of image call and calling method thereof Download PDF

Info

Publication number
KR20090014499A
KR20090014499A KR1020070078497A KR20070078497A KR20090014499A KR 20090014499 A KR20090014499 A KR 20090014499A KR 1020070078497 A KR1020070078497 A KR 1020070078497A KR 20070078497 A KR20070078497 A KR 20070078497A KR 20090014499 A KR20090014499 A KR 20090014499A
Authority
KR
South Korea
Prior art keywords
image
display
counterpart
user
video call
Prior art date
Application number
KR1020070078497A
Other languages
Korean (ko)
Other versions
KR101370111B1 (en
Inventor
조윤호
Original Assignee
엘지전자 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 엘지전자 주식회사 filed Critical 엘지전자 주식회사
Priority to KR1020070078497A priority Critical patent/KR101370111B1/en
Publication of KR20090014499A publication Critical patent/KR20090014499A/en
Application granted granted Critical
Publication of KR101370111B1 publication Critical patent/KR101370111B1/en

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01RMEASURING ELECTRIC VARIABLES; MEASURING MAGNETIC VARIABLES
    • G01R31/00Arrangements for testing electric properties; Arrangements for locating electric faults; Arrangements for electrical testing characterised by what is being tested not provided for elsewhere
    • G01R31/36Arrangements for testing, measuring or monitoring the electrical condition of accumulators or electric batteries, e.g. capacity or state of charge [SoC]
    • G01R31/382Arrangements for monitoring battery or accumulator variables, e.g. SoC
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/14Systems for two-way working
    • H04N7/141Systems for two-way working between two video terminals, e.g. videophone
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M2201/00Electronic components, circuits, software, systems or apparatus used in telephone systems
    • H04M2201/50Telephonic communication in combination with video communication

Abstract

A mobile communication terminal capable of a video call and a calling method thereof are provided to interrupt transmission of a user image automatically or by user's selection or interrupt display of an image of a counterpart person when remaining voltage of a battery is lower than a reference voltage or video call enabling hours are shorter than set reference hours. A battery voltage measurement unit detects a remaining amount of a current battery(S213). A controller determines whether the remaining amount of the current battery measured in the battery voltage measurement unit is lower than the set reference voltage(S214). When the remaining amount of the current battery measured in the battery voltage measurement unit is lower than the set reference voltage, the controller informs a user of a message that the remaining amount of the current battery is lower than the set reference voltage through a display(S215). The user selects whether to interrupt transmission of a user image to a counterpart terminal through a communication module or whether to interrupt display of the image of the counterpart person(S216).

Description

화상 통화가 가능한 이동 통신 단말기 및 통화 방법{A MOBILECOMMUNICATION TERMINAL CAPABLE OF IMAGE CALL AND CALLING METHOD THEREOF}Mobile communication terminal and method of calling that can make video call {A MOBILECOMMUNICATION TERMINAL CAPABLE OF IMAGE CALL AND CALLING METHOD THEREOF}

본 발명은 화상 통화가 가능한 이동 통신 단말기와 그 통화 방법에 관한 것이다.The present invention relates to a mobile communication terminal capable of a video call and a call method thereof.

휴대폰은 이동 환경에서의 통신을 목적으로 개발된 장치이기 때문에 이동 환경에서의 안정적인 전원 공급은 매우 중요하다. 게다가 최근에는 휴대폰이 단순한 통화 기능을 벗어나 다양한 기능을 수행하게 됨에 따라 컬러 디스플레이, 장시간 파일의 재생 등을 위해 더 많은 전력을 필요로 하게 되었고 이에 따른 기기의 소비전력 최소화 및 전원 고전력화는 무엇보다 중요한 기술로 여겨지고 있다. Since a mobile phone is a device developed for communication in a mobile environment, stable power supply in a mobile environment is very important. In addition, in recent years, as mobile phones perform various functions beyond simple call functions, they need more power for color display and playback of files for a long time. Accordingly, minimizing power consumption and high power of the device are important. It is considered a technology.

화상 통화를 수행하는 경우 이동 통신 단말기에서 카메라의 작동, 촬영된 이미지 처리, 음성 처리 등으로 인해 해당 단말기 내 제어부 및 영상 통화 처리부에서 처리할 연산량이 많아 음성 통화를 하는 경우보다 상대적으로 배터리를 많이 소모하게 된다. 따라서 종래 기술은 화상 통화를 진행하다 배터리가 부족할 경우 경고음과 함께 폰이 오프(OFF)되어 통화를 지속할 수 없는 문제점이 있었다.When making a video call, the mobile communication terminal consumes more battery than when making a voice call due to a large amount of calculation to be processed by the control unit and the video call processing unit due to camera operation, captured image processing, and voice processing. Done. Therefore, the prior art has a problem that the phone is off with a warning sound when the battery is low while the video call is in progress can not continue the call.

게다가 종래 기술은 배터리 부족을 해결하기 위해 영상 통화에서 음성 통화 로 일률적으로 전환하기만 할 뿐, 영상 통화의 상대측을 배려하여 대체 영상을 상대측 단말로 전송하는 기술은 없었다. In addition, the prior art only has to switch uniformly from the video call to the voice call to solve the battery shortage, there is no technology for transmitting the alternative video to the other terminal in consideration of the other side of the video call.

또한 종래 기술은 단말기의 배터리 부족과는 무관하게 화상 통화 중에 사용자 영상을 상대측 단말로 전송하는 것을 차단하거나, 상대방 영상을 디스플레이에 표시하는 것을 차단할 수 없는 문제점이 있었다.In addition, the related art has a problem in that the transmission of the user image to the counterpart terminal or the display of the counterpart image on the display cannot be blocked regardless of a low battery of the terminal.

본 발명은 화상 통화 중 배터리 잔량과 배터리 잔량 전압과 그에 따른 화상 통화 가능 시간을 지속적으로 산출하여 배터리 잔량 전압이 기준 전압 이하이거나 화상 통화 가능 시간이 사용자가 설정한 기준 시간 이하인 경우, 자동적으로 또는 사용자의 선택에 의해 사용자 영상의 전송을 차단하거나 상대방 영상의 디스플레이에의 표시를 차단하여 전류 소모를 줄임으로써 통화를 지속적으로 제공하는데 목적이 있다.The present invention continuously calculates the remaining battery level, the remaining battery voltage and the corresponding video call time during a video call so that the battery remaining voltage is lower than the reference voltage or the video calling time is lower than the reference time set by the user. The purpose of the present invention is to continuously provide a call by reducing the current consumption by blocking transmission of a user image or blocking display of a counterpart image on the display by selection of.

이와 같은 목적을 달성하기 위한 본 발명은, 화상 통화 중에 배터리 잔량 전압을 측정하는 배터리 전압 측정부 또는 배터리 잔량 전압으로부터 화상 통화 가능 시간을 산출하는 통화 시간 계산부 그리고 배터리 잔량 전압이 기설정된 기준 전압 이하이거나 또는 화상 통화 가능 시간이 기설정된 기준 시간 이하인 경우 자동적으로 또는 사용자의 선택에 의해 사용자 영상의 전송을 차단하는 경우 대체 영상을 상대측 단말로 전송케 하거나, 상대방 영상의 표시를 차단하는 경우 정지 영상을 디스플레이에 표시케 하는 제어부를 포함하는 화상 통화가 가능한 이동 통신 단말기와 통화 방법을 제공한다.In order to achieve the above object, the present invention provides a battery voltage measuring unit for measuring a battery remaining voltage during a video call, a call time calculating unit for calculating a video call available time from a battery remaining voltage, and a battery remaining voltage having a predetermined reference voltage or less. Or when the video call time is less than or equal to the preset reference time, when the transmission of the user's video is automatically or selected by the user, the alternative video is transmitted to the other party's terminal or when the display of the other's video is blocked, the still picture is Provided is a mobile communication terminal capable of a video call and a call method including a control unit for displaying on a display.

또한 본 발명은, 배터리 잔량 전압과 기설정된 기준 전압을 비교하거나, 화상 통화 가능 시간과 기설정된 기준 시간과 비교하는 단계를 거치지 않고 사용자의 선택에 의해 사용자 영상의 전송을 차단하는 경우 대체 영상을 상대측 단말로 전송 케 하거나, 상대방 영상의 표시를 차단하는 경우 정지 영상을 디스플레이에 표시케 하는 제어부를 포함하는 화상 통화가 가능한 이동 통신 단말기와 통화 방법을 제공한다.In addition, the present invention, when comparing the remaining battery voltage and the predetermined reference voltage, or the transmission of the user image by the user's selection without the step of comparing the video call available time and the predetermined reference time, the opposite side of the counterpart Provided is a method for communicating with a mobile communication terminal capable of a video call including a control unit for transmitting to a terminal or blocking display of a counterpart image.

상기에서 설명한 본 발명에 따른 화상 통화가 가능한 이동 통신 단말기와 통화 방법의 효과를 설명하면 다음과 같다.The effects of the mobile communication terminal and the communication method capable of video calling according to the present invention described above are as follows.

첫째, 본 발명에 의하면, 화상 통화 중에 사용자 영상을 통신 모듈을 통해 상대측 단말로 전송하는 것을 차단하거나 상대방 영상을 디스플레이에 표시하는 것을 차단함으로써 배터리를 절약할 수 있다. 대신에 상대측 단말에는 대체 영상을 전송함으로써 갑작스러운 통화 모드 변경에 따른 당황함과 불편함을 줄일 수 있는 효과가 있다. First, according to the present invention, a battery can be saved by blocking transmission of a user image to a counterpart terminal through a communication module or blocking displaying of the counterpart image on a display during a video call. Instead, by transmitting a substitute video to the opposite terminal has the effect of reducing the embarrassment and inconvenience caused by the abrupt call mode change.

둘째, 본 발명에 의하면, 배터리 부족과는 무관하게 사용자의 통화 습관에 따라 통신 모듈을 통한 사용자 영상의 전송 또는 상대방 영상의 디스플레이에의 표시를 차단함으로써 사용자의 편의성을 도모할 수 있다. Second, according to the present invention, regardless of the low battery, the user's convenience can be achieved by blocking the transmission of the user's image through the communication module or the display of the counterpart's image according to the call habit of the user.

본 발명의 상술한 목적, 특징들 및 장점은 첨부된 도면과 관련한 다음의 상세한 설명을 통하여 더 분명해질 것이다. 이하 첨부된 도면을 참조하여 본 발명에 따른 바람직한 실시예들을 상세히 설명한다. 명세서 전체에 걸쳐서 동일한 참조번호들은 동일한 구성요소들을 나타낸다. 또한, 본 발명과 관련된 공지 기능 혹은 구 성에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우, 그 상세한 설명은 생략한다.The above objects, features and advantages of the present invention will become more apparent from the following detailed description taken in conjunction with the accompanying drawings. Hereinafter, exemplary embodiments of the present invention will be described in detail with reference to the accompanying drawings. Like numbers refer to like elements throughout. In addition, when it is determined that the detailed description of known functions or configurations related to the present invention may unnecessarily obscure the subject matter of the present invention, the detailed description thereof will be omitted.

도 1은 화상 통화가 가능한 이동 통신 단말기의 블록 구성도이다.1 is a block diagram of a mobile communication terminal capable of a video call.

본 발명을 구현하기 위한 화상 이동 통신 단말기는, 도 1에 도시된 바와 같이, 배터리 전압 측정부(110), 통화 시간 계산부(120), 영상 통화 처리부(130), 통신 모듈(150), 제어부(160), 입력부(170), 디스플레이(180), 저장부(190)를 포함한다. 이러한 각 구성 요소는 버스(bus)로 연결된다.As illustrated in FIG. 1, a video mobile communication terminal for implementing the present invention includes a battery voltage measuring unit 110, a call time calculating unit 120, a video call processing unit 130, a communication module 150, and a controller. 160, an input unit 170, a display 180, and a storage 190. Each of these components is connected by a bus.

배터리 전압 측정부(110)는 배터리의 잔량을 검출하여 배터리 잔량 데이터를 저장부(190)에 일시적으로 저장한다. The battery voltage measuring unit 110 detects a remaining battery level and temporarily stores the remaining battery data in the storage unit 190.

통화 시간 계산부(120)는 배터리 잔량 데이터를 이용해 화상 통화 가능 시간을 산출하여 저장부(190)에 일시적으로 저장한다. The talk time calculator 120 calculates a video call time using battery remaining data and temporarily stores the video call in the storage 190.

영상 통화 처리부(130)는 제어부(160)의 제어에 따라 영상 통화 모드 설정시 해당 단말기에 부착된 카메라(미도시)를 통해 촬영된 이미지 및 스피커(미도시)를 통해 수신된 음향을 처리하거나, 상대방으로부터 수신된 영상을 처리하여 디스플레이(180)로 출력하는 역할을 한다.The video call processor 130 processes an image received through a camera (not shown) attached to a corresponding terminal and a sound received through a speaker (not shown) when the video call mode is set under the control of the controller 160, It processes the image received from the counterpart and outputs it to the display 180.

통신 모듈(150)은 안테나(ANT)를 통해 기지국과 통신을 수행한다. 통신 모듈(150)은 저장부(190)에 저장된 대체 영상이나 정지 영상을 안테나(ANT)를 통해 상대측의 단말로 전송한다.The communication module 150 communicates with the base station through the antenna ANT. The communication module 150 transmits the substitute image or the still image stored in the storage 190 to the terminal of the counterpart through the antenna ANT.

제어부(160)는 이동 통신 단말기의 일반적인 동작 제어 및 입출력을 제어한 다. 제어부(160)는 배터리 전압 측정부(110)가 측정한 배터리 전압을 기설정된 기준 전압과 비교하여, 측정한 배터리 전압이 기설정된 기준 전압 이하인 경우 사용자 영상을 통신 모듈(150)을 통해 상대측 단말로 전송하는 것을 차단하거나 상대방 영상을 디스플레이에 표시하는 것을 차단한다. 또한 제어부(160)는 사용자 영상의 전송을 차단하는 경우 대체 영상을 상대측 단말로 전송케 하거나 상대방 영상의 표시를 차단하는 경우 정지 영상을 디스플레이(180)에 표시케 한다.The controller 160 controls general operation control and input / output of the mobile communication terminal. The controller 160 compares the battery voltage measured by the battery voltage measuring unit 110 with a preset reference voltage, and when the measured battery voltage is equal to or less than the preset reference voltage, the user image is transmitted to the counterpart terminal through the communication module 150. Block transmission or block the other party's video on the display. In addition, when the transmission of the user image is blocked, the controller 160 transmits the replacement image to the counterpart terminal or displays the still image on the display 180 when blocking the display of the counterpart image.

입력부(170)는 숫자키와 각종 기능키를 구비한다. 사용자는 배터리 잔량 전압과 비교되는 기준 전압, 화상 통화 가능 시간과 비교되는 기준 시간을 입력부(170)를 통해 임의대로 입력할 수 있다.The input unit 170 includes a numeric key and various function keys. The user may arbitrarily input the reference voltage compared with the remaining battery voltage and the reference time compared with the video call time through the input unit 170.

디스플레이(180)는 제어부(160)의 제어에 따라 이동 통신 단말기의 상태 및 동작 과정을 표시하고 제어부(160)의 전원제어에 의해 온/오프 된다. 디스플레이(180)는 배터리 전압 측정부(110)에 의해 측정된 배터리 잔량 전압과 사용자가 입력부(170)를 통해 설정한 기준 전압을 표시한다. 또한 디스플레이(180)는 통화 시간 계산부(120)에 의해 산출된 화상 통화 가능 시간과 사용자가 입력부(170)를 통해 설정한 기준 시간을 표시한다. The display 180 displays a state and an operation process of the mobile communication terminal under the control of the controller 160 and is turned on / off by power control of the controller 160. The display 180 displays the remaining battery voltage measured by the battery voltage measuring unit 110 and a reference voltage set by the user through the input unit 170. In addition, the display 180 displays the available video call time calculated by the talk time calculator 120 and a reference time set by the user through the input unit 170.

저장부(190)는 이동 통신 단말기의 전반적인 동작을 제어하는 소정의 프로그램이 저장된다. 저장부(190)는 사용자 영상의 전송을 차단하는 경우 상대측 단말로 전송할 대체 영상과 상대방 영상의 표시를 차단하는 경우 디스플레이(180)에 표시할 정지 영상을 저장한다. 또한 저장부(190)는 배터리의 전압에 따른 화상 통화 가능 시간 간의 상관관계에 대한 데이터와 사용자에 의해 설정된 기준 시간을 저장한 다.The storage 190 stores a predetermined program that controls the overall operation of the mobile communication terminal. The storage unit 190 stores a still image to be displayed on the display 180 when the display of the substitute image to be transmitted to the counterpart terminal and the display of the counterpart image when the transmission of the user image is blocked. In addition, the storage unit 190 stores data on the correlation between the available video call time according to the voltage of the battery and a reference time set by the user.

도 2는 본 발명의 실시예로서 화상 통화가 가능한 이동 통신 단말기의 통화 방법에 대한 흐름도이다.2 is a flowchart illustrating a call method of a mobile communication terminal capable of a video call according to an embodiment of the present invention.

도 2를 참조하면, 상대측 단말과 화상 통화 호가 연결되면 이동 통신 단말기는 고속의 패킷 데이터 서비스를 통해 영상 통화를 수행한다. 즉 사용자측 단말 내 제어부(160)는 영상 통화 모드 관련 소프트웨어 및 하드웨어적인 모듈을 활성화시켜 단말 내부 혹은 외부에 장착된 카메라 모듈(미도시)로 촬영된 이미지 및 스피커(미도시)를 통해 수신된 음성을 처리하거나 상대측 단말로부터 수신된 영상을 출력할 준비를 한다(S211).Referring to FIG. 2, when a counterpart terminal and a video call call are connected, the mobile communication terminal performs a video call through a high speed packet data service. That is, the controller 160 inside the user terminal activates the software and hardware module related to the video call mode so that the voice received through the image and the speaker (not shown) captured by a camera module (not shown) mounted inside or outside the terminal may be used. Process or prepare to output the image received from the opposite terminal (S211).

제어부(160)는 사용자측 단말과 상대측 단말 간의 영상 통화 호가 연결되면 영상 통화 처리부(130)를 제어하여 사용자측 단말의 카메라 모듈(미도시)로부터 획득된 사용자측 영상을 통신 모듈(150)을 통해 상대측 단말로 전송한다. 상대측 단말의 카메라로부터 획득되어 통신 모듈(150)을 통해 사용자측 단말로 전송된 상대측 영상을 사용자측 단말의 디스플레이(180)에 표시한다(S212).The controller 160 controls the video call processor 130 when the video call call between the user terminal and the counterpart terminal is connected to transfer the user side image obtained from the camera module (not shown) of the user terminal to the counterpart terminal through the communication module 150. send. The counterpart image obtained from the camera of the counterpart terminal and transmitted to the user terminal through the communication module 150 is displayed on the display 180 of the user terminal (S212).

배터리 전압 측정부(110)는 현재의 배터리의 잔량을 검출한다(S213). 제어부(160)는 배터리 전압 측정부(110)에서 산출한 배터리 잔량 전압을 기설정된 기준 전압 이하인지 판단한다(S214). The battery voltage measuring unit 110 detects the remaining amount of the current battery (S213). The controller 160 determines whether the remaining battery voltage calculated by the battery voltage measuring unit 110 is equal to or less than a predetermined reference voltage (S214).

만일 배터리 잔량 전압이 기설정된 기준 전압을 초과하는 경우(S214-NO), 제어부(160)는 배터리 전압 측정부(110)는 배터리 잔량 전압을 계속 측정한다.If the remaining battery voltage exceeds the preset reference voltage (S214-NO), the controller 160 continuously measures the battery remaining voltage.

배터리 잔량 전압이 기설정된 기준 전압 이하인 경우(S214-YES), 제어부(160)는 '배터리 잔량 전압이 기준 전압 이하'라는 내용의 메시지를 디스플레이(180)를 통해 사용자에게 알린다(S215). 이러한 메시지는 디스플레이(180)상에서 메시지창, 아이콘 또는 인디게이터 중에서 적어도 하나에 표시될 수 있다. If the remaining battery voltage is less than or equal to the predetermined reference voltage (S214 -YES), the controller 160 notifies the user of the message of the message that the remaining battery voltage is less than or equal to the reference voltage through the display 180 (S215). Such a message may be displayed on at least one of a message window, an icon, or an indicator on the display 180.

이때 사용자는 사용자 영상을 통신 모듈(150)을 통해 상대측 단말로 전송하는 것을 차단할 것인지, 상대방 영상을 디스플레이(180)에 표시하는 것을 차단할 것인지를 각각 또는 모두 선택할 수 있다(S216). In this case, the user may select whether to block the transmission of the user image to the counterpart terminal through the communication module 150 or to block the display of the counterpart image on the display 180 (S216).

사용자가 사용자 영상을 통신 모듈(150)을 통해 상대측 단말로 전송하는 것을 차단하는 것을 선택하는 경우(S217), 제어부(160)는 카메라를 비롯한 영상 통화 처리부(130)의 전원을 차단하거나, 아니면 대체 영상을 전송한다는 메시지와 함께 대체 영상을 상대측 단말로 전송할 수 있다(S219). When the user selects to block transmission of the user image to the counterpart terminal through the communication module 150 (S217), the controller 160 cuts off or replaces the power of the video call processor 130 including a camera. The replacement video may be transmitted to the counterpart terminal together with the message to transmit the video (S219).

대체 영상은 영상 통화 중 캡처/녹화한 사용자 영상이거나, 이전에 촬영 후 저장부(190)에 저장해둔 이미지 및 동영상일 수 있다. The substitute image may be a user image captured / recorded during a video call, or may be an image and a video previously stored in the storage 190 after capturing.

상대방에게 대체 영상이 전송된 후에는 카메라 및 디스플레이(180), 예를 들어 액정 표시 화면(LCD)이 오프되고, 음성만 인코딩하여 전류 소모를 줄일 수 있다. After the substitute image is transmitted to the other party, the camera and the display 180, for example, the liquid crystal display (LCD), may be turned off, and only the voice may be encoded to reduce current consumption.

사용자가 상대방 영상을 디스플레이(180)에 표시하는 것을 차단하는 것을 선택하는 경우(S218), 제어부(160)는 디스플레이(180)의 전원을 차단하거나, 아니면 정지 영상을 디스플레이(180)에 표시할 수 있다(S220). When the user selects to block the display of the counterpart image on the display 180 (S218), the controller 160 may turn off the power of the display 180 or display the still image on the display 180. There is (S220).

정지 영상은 영상 통화 중 캡처한 상대방의 이미지이거나 이전에 촬영 후 저 장부(190)에 저장해 둔 이미지일 수 있다.The still image may be an image of the counterpart captured during the video call or an image previously stored in the storage 190 after capturing.

본 발명의 다른 실시예로서, 배터리 잔량 전압이 기준 전압 이하인 경우 '배터리 잔량 전압이 기준 전압 이하'임을 디스플레이(180)의 메시지창, 아이콘, 인디게이터 영역 중에서 적어도 하나에 표시한 후에 사용자의 선택 명령 없이 자동적으로 사용자 영상의 전송을 차단하고 상대방에게 대체 영상을 전송할 수도 있고, 상대방 영상의 표시를 차단하고, 디스플레이(180)에 정지 영상을 표시할 수도 있다. 예를 들어 자동 차단 여부는 통화 전에 영상 통화의 환경 설정 메뉴에서 자동 차단 항목을 선택하여 설정하거나 해제할 수 있다. 상대방과 영상 통화가 연결된 상태에서도 자동 차단 메뉴에서 자동 차단 여부를 설정할 수 있다. According to another embodiment of the present invention, when the remaining battery voltage is less than the reference voltage, the battery remaining voltage is less than the reference voltage, after displaying in at least one of the message window, icon, indicator area of the display 180 without a user selection command The transmission of the user image may be automatically cut off, the substitute image may be transmitted to the counterpart, the display of the counterpart image may be blocked, and the still image may be displayed on the display 180. For example, whether or not to automatically block can be set or canceled by selecting the auto block item in the configuration menu of the video call before the call. You can set whether to automatically block in the auto block menu even when the video call is connected with the other party.

자동 차단을 설정한 경우에는 배터리 잔량 전압이 기설정된 기준 전압 이하이기만 하면 "사용자 영상의 전송 또는 상대방 영상의 표시를 자동 차단하겠습니다" 라는 메시지를 디스플레이(180)에 표시한 후 상대방에게 대체 영상을 전송하거나 디스플레이(180)에 정지 영상을 표시할 수 있다.When the auto shutoff is set, as long as the remaining battery voltage is lower than or equal to the preset reference voltage, a message "We will automatically cut off the transmission of the user's image or the display of the other's image" is displayed on the display 180, and the alternative image is transmitted to the other party. Alternatively, the still image may be displayed on the display 180.

본 발명의 또 다른 실시예로서, 배터리 전압 측정부(110)가 현재의 배터리의 잔량을 측정한 후에, 통화 시간 계산부(120)는 저장부(190)에 저장되어 있는 필요 송신 전력의 크기와 배터리 잔량의 관계 정보를 참조하여 배터리 잔량에 따른 화상 통화 가능 시간을 계산한다. 제어부(160)는 화상 통화 가능 시간을 디스플레이(180)로 출력하도록 제어한다.As another embodiment of the present invention, after the battery voltage measuring unit 110 measures the remaining amount of the current battery, the talk time calculating unit 120 and the amount of the required transmission power stored in the storage unit 190 The available video call time is calculated according to the battery level by referring to the relationship information of the battery level. The controller 160 controls the video call time to be output to the display 180.

화상 통화 가능 시간은 영상 통화를 수행할 때 단말기 내 화상 통화 모듈을 구동하기 위해 요구되는 최저 임계 전압을 고려하여 실험적으로 산출해야 한다. 따라서 배터리 잔량 전압이 최저 임계 전압 이하인 경우에는 화상 통화를 지속할 수 없으므로 배터리 잔량 전압이 최저 임계 전압 이상인 경우에 한해 화상 통화 가능 시간이 산출될 수 있다. The video call time can be experimentally calculated by considering the lowest threshold voltage required to drive the video call module in the terminal when performing a video call. Therefore, since the video call cannot be continued when the remaining battery voltage is lower than or equal to the minimum threshold voltage, the video call time can be calculated only when the remaining battery voltage is higher than or equal to the minimum threshold voltage.

제어부(160)는 통화 시간 계산부(120)에서 계산한 화상 통화 가능 시간을 기설정된 기준시간 이상인지 판단한다. The controller 160 determines whether the video call available time calculated by the call time calculator 120 is equal to or greater than a preset reference time.

여기서, 기준 시간은 통화 전후에 사용자가 임의로 설정한 화상 통화 시간을 말한다. 사용자는 자신의 통화 스타일에 맞게 기준 시간의 길이를 조절할 수 있다.Here, the reference time refers to a video call time set arbitrarily by the user before and after the call. The user can adjust the length of the reference time according to his call style.

기준 시간을 길게 설정할 경우 화상 통화를 지속할 수 있는 시간이 짧아지고 반대로 기준 시간을 짧게 설정할 경우 화상 통화를 지속할 수 있는 시간이 길어지게 된다. 이러한 기준 시간은 통화 전에 설정할 수도 있고, 화상 통화 중이라도 기설정된 기준 시간을 변경할 수 있다.The longer the reference time is, the shorter the duration of the video call becomes. On the contrary, the shorter the reference time is, the longer the duration of the video call is. The reference time may be set before the call or the preset reference time may be changed even during a video call.

기준 시간을 따로 설정하지 않은 경우에는 영상 통화 모듈을 구동하기 위해 요구되는 최저 임계 전압으로부터 산출되는 최저 기준 시간이 설정된다.If the reference time is not set separately, the lowest reference time calculated from the lowest threshold voltage required for driving the video call module is set.

화상 통화 가능 시간이 기설정된 기준시간 이하일 경우, 제어부(160)는 '화상 통화 가능 시간이 기준 시간 이하'라는 내용의 메시지를 디스플레이(180)를 통해 사용자에게 알린다. 이하, 단계는 도 2의 S216 이후의 단계와 동일하다.If the video call available time is less than or equal to the preset reference time, the controller 160 notifies the user of the message, 'The video call available time is less than or equal to the reference time' through the display 180. Hereinafter, the steps are the same as the steps after S216 in FIG. 2.

즉 사용자는 사용자 영상을 통신 모듈(150)을 통해 상대측 단말로 전송하는 것을 차단할 것인지, 상대방 영상을 디스플레이에 표시하는 것을 차단할 것인지를 선택할 수 있다. That is, the user may select whether to block transmission of the user image to the counterpart terminal through the communication module 150 or display of the counterpart image on the display.

사용자가 사용자 영상을 통신 모듈(150)을 통해 상대측 단말로 전송하는 것을 차단하는 것을 선택하는 경우, 대체 영상을 상대측 단말로 전송할 수 있다.When the user selects to block transmission of the user image to the opposite terminal through the communication module 150, the substitute image may be transmitted to the opposite terminal.

사용자가 상대방 영상을 디스플레이에 표시하는 것을 차단하는 것을 선택하는 경우(S218), 정지 영상을 디스플레이(180)에 표시할 수 있다. When the user selects to block displaying of the counterpart image on the display (S218), the still image may be displayed on the display 180.

도 3은 본 발명의 다른 실시예로서 화상 통화가 가능한 이동 통신 단말기의 통화 방법에 대한 흐름도이다. 3 is a flowchart illustrating a call method of a mobile communication terminal capable of making a video call according to another embodiment of the present invention.

본 발명의 또 다른 실시예로서 화상 통화 계속 중에 배터리 잔량 전압과 기설정된 기준 전압을 비교하거나, 화상 통화 가능 시간과 기설정된 기준시간과 비교하는 단계를 거치지 않고 사용자의 필요에 의해 사용자 영상을 통신 모듈(150)을 통해 상대측 단말로 전송하는 것을 차단하거나 상대방 영상을 디스플레이(180)에 표시하는 것을 차단할 수 있다. 즉 배터리 잔량 전압이 기설정된 기준 전압 이하이더라도, 혹은 화상 통화 가능 시간이 기설정된 기준시간 이하이더라도 사용자의 선택에 의해 사용자 영상의 전송을 차단하거나 상대방 영상의 표시를 차단할 수 있다.As another embodiment of the present invention, a video communication module may be connected to a communication module according to a user's need without comparing the remaining battery voltage with a preset reference voltage or comparing the video call possible time with a preset reference time. Blocking transmission to the counterpart terminal through 150 may be blocked from displaying the counterpart image on the display 180. That is, even if the remaining battery voltage is less than or equal to the predetermined reference voltage, or even if the video call time is less than or equal to the predetermined reference time, transmission of the user image may be blocked or display of the counterpart image may be blocked by user selection.

도 3을 참조하면, 상대측 단말과 영상 통화 호가 연결되면 이동 통신 단말기는 고속의 패킷 데이터 서비스를 통해 영상 통화를 수행한다. 즉 사용자측 단말 내 제어부(160)는 영상 통화 모드 관련 소프트웨어 및 하드웨어적인 모듈을 활성화시켜 단말 내부 혹은 외부에 장착된 카메라 모듈(미도시)로 촬영된 이미지 및 스피커(미도시)를 통해 수신된 음성을 처리하거나 상대측 단말로부터 수신된 영상을 출 력할 준비를 한다(S311).Referring to FIG. 3, when a video call is connected to a counterpart terminal, the mobile communication terminal performs a video call through a high speed packet data service. That is, the controller 160 inside the user terminal activates the software and hardware module related to the video call mode so that the voice received through the image and the speaker (not shown) captured by a camera module (not shown) mounted inside or outside the terminal may be used. Process or prepare to output the image received from the opposite terminal (S311).

제어부(160)는 영상 통화 처리부(130)를 제어하여 사용자측 단말과 상대측 단말 간의 영상 통화 호가 연결되면 사용자측 단말의 카메라 모듈(미도시)로부터 획득된 사용자측 영상을 통신 모듈(150)을 통해 상대측 단말로 전송한다. 상대측 단말의 카메라로부터 획득되어 통신 모듈(150)을 통해 사용자측 단말로 전송된 상대측 영상을 사용자측 단말의 디스플레이(180)에 표시한다(S312).The controller 160 controls the video call processor 130 to connect the user-side image obtained from the camera module (not shown) of the user terminal to the other terminal through the communication module 150 when the video call is connected between the user terminal and the other terminal. send. The counterpart image obtained from the camera of the counterpart terminal and transmitted to the user terminal through the communication module 150 is displayed on the display 180 of the user terminal (S312).

배터리 잔량 전압이 기설정된 기준 전압 이하인지 여부와는 상관없이, 사용자는 사용자 영상을 통신 모듈(150)을 통해 상대측 단말로 전송하는 것을 차단할 것인지, 상대방 영상을 디스플레이(180)에 표시하는 것을 차단할 것인지를 각각 선택할 수 있다(S313). Regardless of whether the remaining battery voltage is lower than or equal to the preset reference voltage, the user may block transmission of the user image to the counterpart terminal through the communication module 150 or display of the counterpart image on the display 180. Each can be selected (S313).

사용자가 사용자 영상을 통신 모듈(150)을 통해 상대측 단말로 전송하는 것을 차단하는 것을 선택하는 경우(S314), 제어부(160)는 카메라를 비롯한 영상 통화 처리부(130)의 전원을 차단하거나, 아니면 대체 영상을 전송한다는 메시지와 함께 대체 영상을 상대측 단말로 전송할 수 있다(S316). When the user selects to block transmission of the user image to the counterpart terminal through the communication module 150 (S314), the controller 160 cuts off or replaces the power of the video call processor 130 including a camera. The replacement video may be transmitted to the counterpart terminal together with the message to transmit the video (S316).

사용자가 상대방 영상을 디스플레이(180)에 표시하는 것을 차단하는 것을 선택하는 경우(S315), 제어부(160)는 디스플레이(180)의 전원을 차단하거나, 아니면 정지 영상을 디스플레이(180)에 표시할 수 있다(S317). When the user selects to block the display of the counterpart image on the display 180 (S315), the controller 160 may turn off the power of the display 180 or display the still image on the display 180. There is (S317).

이상에서 설명한 본 발명은 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에 있어 본 발명의 기술적 사상을 벗어나지 않는 범위 내에서 여러 가지 치환, 변형 및 변경이 가능하므로 전술한 실시예 및 첨부된 도면에 의해 한정되는 것 은 아니다.The present invention described above is capable of various substitutions, modifications, and changes within the scope without departing from the spirit of the present invention for those skilled in the art to which the present invention pertains, the foregoing embodiments and the accompanying drawings. It is not limited by.

도 1은 화상 통화가 가능한 이동 통신 단말기의 블록 구성도; 1 is a block diagram of a mobile communication terminal capable of a video call;

도 2는 본 발명의 실시예로서 화상 통화가 가능한 이동 통신 단말기의 통화 방법에 대한 흐름도;및2 is a flowchart illustrating a call method of a mobile communication terminal capable of a video call as an embodiment of the present invention; and

도 3은 본 발명의 다른 실시예로서 화상 통화가 가능한 이동 통신 단말기의 통화 방법에 대한 흐름도이다.3 is a flowchart illustrating a call method of a mobile communication terminal capable of making a video call according to another embodiment of the present invention.

Claims (11)

통신 모듈;Communication module; 디스플레이;display; 배터리 잔량 전압을 측정하는 배터리 전압 측정부; 및A battery voltage measuring unit measuring a battery remaining voltage; And 상기 배터리 잔량 전압이 기설정된 기준 전압 이하인 경우, 사용자 영상을 상기 통신 모듈을 통해 상대측 단말로 전송하는 것을 차단하거나, 상대방 영상을 상기 디스플레이에 표시하는 것을 차단하며, 상기 사용자 영상의 전송을 차단하는 경우 대체 영상을 상기 상대측 단말로 전송케 하거나, 상기 상대방 영상의 표시를 차단하는 경우 정지 영상을 상기 디스플레이에 표시케 하는 제어부; 를 포함하는 화상 통화가 가능한 이동 통신 단말기.When the battery residual voltage is less than a predetermined reference voltage, blocking the transmission of the user image to the counterpart terminal through the communication module, or blocking the display of the counterpart image on the display, and blocks the transmission of the user image A controller configured to transmit a substitute image to the counterpart terminal or to display a still image on the display when the display of the counterpart image is blocked; Mobile communication terminal capable of a video call comprising a. 제 1 항에 있어서,The method of claim 1, 상기 배터리 잔량 전압으로부터 화상 통화 가능 시간을 산출하는 통화 시간 계산부; 를 추가로 구비하고,A talk time calculator configured to calculate a video call time from the battery remaining voltage; Additionally provided, 상기 제어부는, 상기 화상 통화 가능 시간이 기설정된 기준 시간 이하인 경우, 상기 통신 모듈을 통해 상기 사용자 영상을 상기 상대측 단말로 전송하는 것을 차단하거나, 상기 상대방 영상을 상기 디스플레이에 표시하는 것을 차단하는 것을 특징으로 하는 화상 통화가 가능한 이동 통신 단말기. The controller may be configured to block transmission of the user image to the counterpart terminal through the communication module or block displaying of the counterpart image on the display when the video call available time is less than or equal to a preset reference time. A mobile communication terminal capable of a video call. 제 1 항 또는 제 2 항에 있어서,The method according to claim 1 or 2, 상기 디스플레이는, 상기 배터리 잔량 전압, 상기 화상 통화 가능 시간, 상기 배터리 잔량 전압이 상기 기준 전압 이하 또는 상기 화상 통화 가능 시간이 기설정된 기준 시간 이하임을 아이콘, 인디게이터, 메시지창 중에서 적어도 하나에 표시하는 것을 특징으로 하는 화상 통화가 가능한 이동 통신 단말기.The display may display at least one of an icon, an indicator, and a message window indicating that the battery remaining voltage, the video call available time, and the battery remaining voltage are below the reference voltage or the video call available time are below a preset reference time. A mobile communication terminal capable of a video call. 제 1 항에 있어서,The method of claim 1, 사용자의 선택 명령을 입력받는 입력부; 를 추가로 구비하고,An input unit for receiving a user's selection command; Additionally provided, 상기 제어부는, 상기 입력부를 통해 입력된 상기 사용자의 선택 명령에 따라 상기 배터리 잔량 전압이 상기 기준 전압 이하인 경우 상기 통신 모듈을 제어하여 상기 사용자 영상을 상기 상대측 단말로 전송하는 것을 차단하거나, 상기 상대방 영상을 상기 디스플레이에 표시하는 것을 차단하는 것을 특징으로 하는 화상 통화가 가능한 이동 통신 단말기.The controller may be configured to block transmission of the user image to the counterpart terminal by controlling the communication module when the battery residual voltage is less than or equal to the reference voltage according to the user's selection command input through the input unit, or the counterpart image. The mobile communication terminal capable of a video call, characterized by blocking the display on the display. 제 4 항에 있어서,The method of claim 4, wherein 상기 사용자 영상의 전송을 차단할 경우,When blocking the transmission of the user image, 상기 입력부를 통해 입력된 상기 사용자의 선택 명령에 따라 상기 대체 영상 을 상기 상대측 단말로 전송케 하거나, 상기 상대방 영상의 표시를 차단하는 경우 상기 정지영상을 상기 디스플레이에 표시케 하는 것을 특징으로 하는 화상 통화가 가능한 이동 통신 단말기.In response to the user's selection command input through the input unit to transmit the substitute image to the counterpart terminal, or if the display of the counterpart image is blocked, the still image is displayed on the display Capable mobile communication terminal. 디스플레이;display; 통신 모듈; 및Communication module; And 사용자 영상을 상기 통신 모듈을 통해 상대측 단말로 전송하는 것을 차단하거나, 상대방 영상을 상기 디스플레이에 표시하는 것을 차단하며, 상기 사용자 영상의 전송을 차단하는 경우 대체 영상을 상기 상대측 단말로 전송케 하거나 상기 상대방 영상의 표시를 차단하는 경우 정지 영상을 상기 디스플레이에 표시케 하는 제어부; 를 포함하는 화상 통화가 가능한 이동 통신 단말기.Blocking the transmission of the user image to the counterpart terminal through the communication module, blocking the display of the counterpart image on the display, and transmitting the replacement image to the counterpart terminal or blocking the transmission of the user image. A controller for displaying a still image on the display when the display of the image is blocked; Mobile communication terminal capable of a video call comprising a. 제 6 항에 있어서,The method of claim 6, 사용자의 선택 명령을 입력받는 입력부; 를 추가로 구비하고,An input unit for receiving a user's selection command; Additionally provided, 상기 사용자 영상의 전송을 차단하는 경우 상기 입력부를 통해 입력된 상기 사용자의 선택 명령에 따라 상기 통신 모듈을 제어하여 상기 대체 영상을 상기 상대측 단말로 전송하는 것을 특징으로 하는 화상 통화가 가능한 이동 통신 단말기.And when the transmission of the user image is blocked, controlling the communication module according to a user's selection command input through the input unit to transmit the substitute image to the counterpart terminal. 제 1 항, 제 2 항 또는 제 6 항 중 어느 한 항에 있어서,The method according to any one of claims 1, 2 or 6, 상기 통신 모듈은, 상기 대체 영상을 전송하는 경우 상기 대체 영상을 전송한다는 메시지를 상기 상대측 단말로 송신하는 것을 특징으로 하는 화상 통화가 가능한 이동 통신 단말기.The communication module, when transmitting the substitute video, a mobile communication terminal capable of a video call, characterized in that for transmitting the message to the counterpart terminal to transmit the substitute video. 제 1 항, 제 2 항 또는 제 6 항 중 어느 한 항에 있어서,The method according to any one of claims 1, 2 or 6, 상기 대체 영상은 화상 통화중에 상기 사용자 영상 또는 상기 상대방 영상을 캡처한 정지 영상 또는 녹화한 동영상이거나, 상기 사용자의 이동 통신 단말기에 기저장된 정지 영상 또는 동영상인 것을 특징으로 하는 화상 통화가 가능한 이동 통신 단말기.The substitute image is a still image or a recorded video captured with the user image or the counterpart image during a video call, or a still image or a video previously stored in the mobile communication terminal of the user. . 화상 통화 중에 통신 모듈을 통해 사용자 영상을 상대측 단말로 전송하는 단계;Transmitting a user image to a counterpart terminal through a communication module during a video call; 상대방 영상을 디스플레이에 표시하는 단계;Displaying the counterpart image on a display; 배터리 잔량 전압을 검출하는 단계;Detecting a battery remaining voltage; 상기 배터리 잔량 전압이 기준 전압 이하인 경우, 제어부가 상기 통신 모듈을 통해 상기 사용자 영상을 상대방에게 전송하는 것을 차단하거나, 상기 상대방 영상을 상기 디스플레이에 표시하는 것을 차단하는 단계; 및Blocking, by the controller, from transmitting the user image to the counterpart or displaying the counterpart image on the display when the battery residual voltage is less than or equal to a reference voltage; And 상기 사용자 영상의 전송을 차단하는 경우 상기 통신 모듈을 통해 대체 영상을 상기 상대측 단말로 전송하거나 상기 상대방 영상의 표시를 차단하는 경우 정지 영상을 상기 디스플레이에 표시하는 단계; 를 포함하는 화상 통화가 가능한 이동 통신 단말기의 통화 방법.Displaying a still image on the display when the replacement image is transmitted to the counterpart terminal or the display of the counterpart image is blocked through the communication module when the transmission of the user image is blocked; Call method of a mobile communication terminal capable of a video call comprising a. 화상 통화 중에 통신 모듈을 통해 사용자 영상을 상대측 단말로 전송하는 단계;Transmitting a user image to a counterpart terminal through a communication module during a video call; 상대방 영상을 디스플레이에 표시하는 단계;Displaying the counterpart image on a display; 제어부가 상기 사용자 영상을 상대방에게 상기 통신 모듈을 통해 전송하는 것을 차단하는 단계; 및Blocking a control unit from transmitting the user image to a counterpart through the communication module; And 상기 사용자 영상의 전송을 차단하는 경우 상기 통신 모듈을 통해 대체 영상을 상기 상대측 단말로 전송하거나 상기 상대방 영상의 표시를 차단하는 경우 정지 영상을 상기 디스플레이에 표시하는 단계; 를 포함하는 화상 통화가 가능한 이동 통신 단말기의 통화 방법.Displaying a still image on the display when the replacement image is transmitted to the counterpart terminal or the display of the counterpart image is blocked through the communication module when the transmission of the user image is blocked; Call method of a mobile communication terminal capable of a video call comprising a.
KR1020070078497A 2007-08-06 2007-08-06 A mobilecommunication terminal capable of image call and calling method thereof KR101370111B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020070078497A KR101370111B1 (en) 2007-08-06 2007-08-06 A mobilecommunication terminal capable of image call and calling method thereof

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020070078497A KR101370111B1 (en) 2007-08-06 2007-08-06 A mobilecommunication terminal capable of image call and calling method thereof

Publications (2)

Publication Number Publication Date
KR20090014499A true KR20090014499A (en) 2009-02-11
KR101370111B1 KR101370111B1 (en) 2014-03-04

Family

ID=40684410

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020070078497A KR101370111B1 (en) 2007-08-06 2007-08-06 A mobilecommunication terminal capable of image call and calling method thereof

Country Status (1)

Country Link
KR (1) KR101370111B1 (en)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101895807B1 (en) * 2017-08-21 2018-09-10 (주) 지니테크 Apparatus, system, and method for notifying emergency

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100315548B1 (en) * 1999-11-30 2001-11-29 윤종용 Power saving method of portable composite communication terminal
KR100442942B1 (en) * 2001-07-24 2004-08-04 엘지전자 주식회사 Method for saving battery reduce capacity by controlling power supply in call mode of image mobile phone

Also Published As

Publication number Publication date
KR101370111B1 (en) 2014-03-04

Similar Documents

Publication Publication Date Title
US20240098646A1 (en) Bandwidth part switching method and apparatus
EP3277057B1 (en) Light emission control method and device
US9105212B2 (en) Method for gradually adjusting screen brightness when switching operating system
US7194248B2 (en) Apparatus and method for performing power saving control of mobile terminal
US8384541B2 (en) Charging method for a mobile terminal
EP3361369B1 (en) Method and device for displaying time on mobile device
EP3832840A1 (en) Charging method and device, terminal device and storage medium
JP2003219024A (en) Information processing terminal
CN111243554B (en) Screen brightness adjusting method, screen brightness adjusting device and storage medium
US20220407330A1 (en) Charging control method and apparatus, electronic device and storage medium
CN112672389B (en) Network switching method
KR101370111B1 (en) A mobilecommunication terminal capable of image call and calling method thereof
CN111240456A (en) Power saving setting method, power saving setting device and computer storage medium
CN110879658A (en) Method and device for adjusting display brightness, electronic equipment and storage medium
KR100442942B1 (en) Method for saving battery reduce capacity by controlling power supply in call mode of image mobile phone
KR101082569B1 (en) Mobile communication terminal with low-power state situation conversation by telephone and its operating method
CN107528098B (en) Charging method and device
EP3648523A1 (en) System message transmission method and method, and system message reception method and device
CN111314232A (en) Application acceleration method, device and storage medium
KR20070081178A (en) Method for preventing power consumption in umts portable terminal
JP4032214B2 (en) Mobile phone and power supply control method
KR100993641B1 (en) Calling method in the battery consumption in a mobile communication terminal capable of image call
CN112752315B (en) Method for reducing terminal temperature, device for reducing terminal temperature and storage medium
CN110556895B (en) Charging method and device and electronic equipment
KR200306314Y1 (en) mobile telephone with image communication function

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20170124

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20180124

Year of fee payment: 5

LAPS Lapse due to unpaid annual fee