KR100798447B1 - Method for providing virtual action service in video call system and mobile communication terminal for the same - Google Patents
Method for providing virtual action service in video call system and mobile communication terminal for the same Download PDFInfo
- Publication number
- KR100798447B1 KR100798447B1 KR20070025652A KR20070025652A KR100798447B1 KR 100798447 B1 KR100798447 B1 KR 100798447B1 KR 20070025652 A KR20070025652 A KR 20070025652A KR 20070025652 A KR20070025652 A KR 20070025652A KR 100798447 B1 KR100798447 B1 KR 100798447B1
- Authority
- KR
- South Korea
- Prior art keywords
- terminal
- image
- pointer
- action
- video call
- Prior art date
Links
Images
Landscapes
- Telephonic Communication Services (AREA)
Abstract
Description
도 1은 화상 통화 시스템의 네트워크 구성도,1 is a network configuration diagram of a video call system,
도 2는 본 발명의 가상 액션 서비스 방법을 설명하기 위한 일 실시예도, Figure 2 is an embodiment for explaining a virtual action service method of the present invention,
도 3은 본 발명의 가상 액션 서비스 방법을 설명하기 위한 다른 실시예도,3 is another embodiment for explaining a virtual action service method of the present invention;
도 4는 본 발명의 일 실시예에 따르는 이동통신 단말기의 구성도,4 is a block diagram of a mobile communication terminal according to an embodiment of the present invention;
도 5는 본 발명의 일 실시예에 따르는 가상 액션 서비스 방법을 순차적으로 나타낸 흐름도,5 is a flowchart sequentially showing a virtual action service method according to an embodiment of the present invention;
도 6은 본 발명의 다른 실시예에 따르는 가상 액션 서비스 방법을 순차적으로 나타낸 흐름도이다. 6 is a flowchart sequentially illustrating a virtual action service method according to another embodiment of the present invention.
< 도면의 주요 부분에 대한 부호의 설명 ><Description of Symbols for Main Parts of Drawings>
100 : 이동통신 단말기 110 : 무선 송수신부100: mobile communication terminal 110: wireless transceiver
120 : 입력부 130 : 메모리120: input unit 130: memory
140 : 표시부 150 : 오디오부140: display unit 150: audio unit
160 : 카메라부 170 : 가상접촉 모듈160: camera unit 170: virtual contact module
171 : 자신영상 디스플레이부 172 : 포인터 처리부171: Self image display unit 172: Pointer processing unit
173 : 액션코드 전송부 174 : 영상 변형부173: action code transmission unit 174: image transformation unit
210 : 기지국(Node B) 220 : 기지국 제어기(RNC)210: base station (Node B) 220: base station controller (RNC)
230 : 교환기(MSC) 240 : 홈 위치 등록기(HLR)230: exchanger (MSC) 240: home position register (HLR)
본 발명은 화상 통화 시스템에서의 가상 액션 서비스 방법과 이를 위한 이동통신 단말기에 관한 것으로, 보다 자세하게는 화상 통화중 상대방의 얼굴을 만지거나 꼬집는 등의 가상의 행동이 가능하도록 하는 가상 액션 서비스 방법과 이를 위한 이동통신 단말기에 관한 것이다.The present invention relates to a virtual action service method in a video call system and a mobile communication terminal therefor. More specifically, the virtual action service method for enabling a virtual action such as touching or pinching a face of a counterpart during a video call is possible. It relates to a mobile communication terminal for.
도 1은 일반적인 화상 통화 시스템의 네트워크 구성도로서, 화상 통화 시스템은 이동통신 단말기(10, 10')와의 무선 구간 신호 처리를 위한 기지국(Node B, 21, 27)과 제어국(RNC, 22, 26), 화상 호 경로를 제공하는 교환기(MSC, 23, 25) 및 가입자 위치 정보, 부가 서비스 정보를 관리하는 홈 위치 등록기(HLR, 24)를 포함하여 구성된다.1 is a diagram illustrating a network configuration of a general video call system. The video call system includes a base station (Node B, 21, 27) and a control station (RNC, 22,) for wireless section signal processing with a mobile communication terminal (10, 10 '). 26), a switch (MSC) 23, 25 for providing a video call path and a home location register (HLR) 24 for managing subscriber location information and additional service information.
종래의 화상 통화 과정을 도 1을 참고하여 보면, 발신 단말기(O-MS, 10)로부터 화상 호가 시도되면, 기지국(Node B, 21), 제어국(RNC, 22)을 통해 교환기(MSC, 23)로 호 시도 메시지가 전송되며, 교환기(23)는 홈 위치 등록기(HLR, 24)를 통해 착신 단말기(T-MS, 10')로의 라우팅 정보를 획득하여 착신측 교환기(25)를 통해 착신 단말기(T-MS, 10')와 세션 설정을 수행한다.Referring to FIG. 1, when a video call is attempted from an originating terminal (O-MS) 10, a switch (MSC) 23 is transmitted through a base station Node B, 21 and a
이러한 과정에 따라 발신 단말기(O-MS, 10)와 착신 단말기(T-MS, 10')는 음성 및 화상 송수신을 통해 서로 상대방의 영상을 보면서 화상 통화를 수행할 수 있게 되지만, 이와 같은 기존의 화상 통화 방법에 의하면 단순히 상대방의 영상을 수동적으로 볼 수만 있을 뿐, 만지거나, 쓰다듬는 등의 행동을 할 수가 없어 생생한 느낌을 줄 수 없다는 단점이 있다.According to this process, the calling terminal (O-MS) 10 and the called terminal (T-MS, 10 ') can perform a video call while watching each other's video through voice and video transmission and reception. According to the video call method, the user can simply view the video of the other person passively, and can not touch or stroke, and can not give a vivid feeling.
따라서, 본 발명은 상기와 같은 종래 기술의 제반 단점과 문제점을 해결하기 위한 것으로, 화상 통화중 상대방의 얼굴이나 머리를 만지는 등의 행동을 하고 싶을 때 이를 가상으로 가능하게 해줌으로써, 보다 생생한 느낌이 들도록 함과 아울러 화상 통화의 흥미를 배가시키고, 이에 따라 화상 통화 서비스의 이용률 및 통화량을 증가시킬 수 있도록 하는 화상 통화 시스템에서의 가상 액션 서비스 방법과 이를 위한 이동통신 단말기를 제공함에 본 발명의 목적이 있다.Therefore, the present invention is to solve the above-mentioned disadvantages and problems of the prior art, by making it virtually possible when you want to act such as touching the other person's face or head during a video call, a more vivid feeling It is an object of the present invention to provide a virtual action service method in a video call system and a mobile communication terminal therefor that can increase the interest of a video call and thereby increase the usage rate and call volume of the video call service. have.
구체적으로, 본 발명은 화상 통화중 상대방 얼굴의 특정 위치를 지정하고 꼬집기, 잡아당기기, 쓰다듬기 등의 원하는 액션을 선택하면, 상대방 단말기가 자신의 얼굴에 상대방이 지정한 가상의 액션을 위한 손모양 이미지 및 가상의 액션에 의해 변형된 얼굴을 보여주도록 하는 화상 통화 시스템에서의 가상 액션 서비스 방 법과 이를 위한 이동통신 단말기를 제공함에 목적이 있다.In detail, the present invention designates a specific position of the other party's face during a video call and selects a desired action such as pinching, pulling, or stroking, and the other terminal displays a hand-shaped image for a virtual action designated by the other party on his / her face. And a virtual action service method in a video call system to show a face modified by a virtual action, and a mobile communication terminal for the same.
아울러, 본 발명은 선택된 가상 액션의 종류 코드와 좌표값만을 상대방 단말기로 전송함에 의해 가상의 액션이 실행되도록 함으로써, 별도의 추가적인 대역폭의 요구 없이, 적은 네트웍 비용으로 가상 액션이 가능하도록 함에 또 다른 목적이 있다. In addition, the present invention allows the virtual action to be executed by transmitting only the type code and the coordinate value of the selected virtual action to the counterpart terminal, thereby enabling a virtual action at a low network cost without requiring additional bandwidth. There is this.
상기 목적을 달성하기 위해 본 발명은 제2단말기와 화상 통화중인 제1단말기에서 가상 접촉을 위한 사용자 입력이 발생하면, 제1단말기의 화면에 표시되는 제2단말기 사용자의 영상에 접촉 위치를 표시하기 위한 포인터를 디스플레이하고, 사용자의 입력에 따라 포인터의 위치를 이동시키는 제1단계와; 제1단말기에서 사용자에 의해 액션 종류가 선택되면, 상기 제2단말기 사용자의 영상에 위치한 포인터 좌표와 상기 선택된 액션 종류에 따르는 액션 코드를 제2단말기로 전송하는 제2단계와; 상기 제2단말기가, 제2단말기 사용자의 영상에서 상기 포인터 좌표에 대응되는 지점의 영상을 상기 수신한 액션 코드에 대응되는 방식으로 변형시켜 화면에 표시하는 제3단계; 를 포함하는 화상 통화 시스템에서의 가상 액션 서비스 방법을 제공한다.In order to achieve the above object, the present invention is to display the contact location on the image of the second terminal user displayed on the screen of the first terminal when the user input for the virtual contact occurs in the first terminal in the video call with the second terminal A first step of displaying a pointer for moving the pointer according to a user input; If an action type is selected by the user in the first terminal, transmitting a pointer coordinate located in the image of the user of the second terminal and an action code according to the selected action type to the second terminal; A third step of the second terminal deforming the image of the point corresponding to the pointer coordinates in the image of the user of the second terminal in a manner corresponding to the received action code and displaying it on the screen; It provides a virtual action service method in a video call system comprising a.
또한, 상기 목적을 달성하기 위해 본 발명은 제2단말기와 화상 통화중인 제1단말기에서 가상 접촉을 위한 사용자 입력이 발생하고, 낙서하기 액션이 선택되면, 제1단말기의 화면에 표시되는 제2단말기 사용자의 영상에 낙서 위치를 표시하기 위한 낙서 포인터를 디스플레이하고, 사용자의 입력에 따라 포인터의 위치를 이동시키는 제1단계와; 제1단말기에서 상기 낙서 포인터의 위치 이동에 따라 실시간으로 낙서 포인터의 좌표와 해당 액션 종류에 따르는 액션 코드를 상기 제2단말기로 전송하는 제2단계와; 상기 제2단말기가, 상기 수신되는 액션 코드에 근거하여 제2단말기 사용자의 영상에서 상기 실시간 수신되는 포인터 좌표에 대응되는 이동 경로에 선을 그려 화면에 표시하는 제3단계; 를 포함하는 화상 통화 시스템에서의 가상 액션 서비스 방법을 제공한다.In addition, in order to achieve the above object, the present invention provides a second terminal displayed on the screen of the first terminal when a user input for virtual contact is generated in the first terminal in a video call with the second terminal, and a graffiti action is selected. Displaying a graffiti pointer for displaying a graffiti location on an image of a user and moving the location of the pointer according to a user input; A second step of transmitting, to the second terminal, an action code according to the coordinates of the doodle pointer and the corresponding action type in real time according to the position movement of the doodle pointer in the first terminal; A third step of the second terminal displaying a line on a moving path corresponding to the pointer coordinates received in real time in the image of the second terminal user based on the received action code; It provides a virtual action service method in a video call system comprising a.
그리고, 상기 목적을 달성하기 위해 본 발명은, 화상 통화중 통화 상대방과의 가상 액션이 가능하도록 하는 가상접촉 모듈을 포함하는 이동통신 단말기로서, 상기 가상접촉 모듈은, 화상 통화중 가상 접촉을 위한 사용자 입력이 발생하면, 화면에 표시되는 화상 통화 상대방 영상에 접촉 위치를 표시하기 위한 포인터를 디스플레이하고, 사용자의 입력에 따라 포인터의 위치를 이동시키는 포인터 처리부와; 사용자에 의해 액션 종류가 선택되면, 상기 상대방 영상에 위치한 포인터의 좌표와 상기 선택된 액션 종류에 따르는 액션 코드를 화상 통화중인 상대방 단말기로 전송하는 액션코드 전송부; 를 포함하는 이동통신 단말기를 제공한다.In order to achieve the above object, the present invention provides a mobile communication terminal including a virtual contact module that enables a virtual action with a call counterpart during a video call, wherein the virtual contact module is a user for a virtual contact during a video call. A pointer processing unit which displays a pointer for displaying a contact location on a video call counterpart image displayed on a screen when an input occurs, and moves the position of the pointer according to a user input; An action code transmitter for transmitting an action code according to the coordinates of the pointer located in the counterpart image and the selected action type to the counterpart terminal in the video call when the action type is selected by the user; It provides a mobile communication terminal comprising a.
또한, 상기 목적을 달성하기 위해 본 발명은, 화상 통화중 통화 상대방과의 가상 액션이 가능하도록 하는 가상접촉 모듈을 포함하는 이동통신 단말기로서, 상 기 가상접촉 모듈은, 화상 통화중 가상 접촉을 위한 사용자 입력이 발생하고, 낙서하기 액션이 선택되면, 화면에 표시되는 화상 통화 상대방 영상에 낙서 위치를 표시하기 위한 낙서 포인터를 디스플레이하고, 사용자의 입력에 따라 포인터의 위치를 이동시키는 포인터 처리부와; 상기 낙서 포인터의 위치 이동에 따라 실시간으로 낙서 포인터의 좌표와 해당 액션 종류에 따르는 액션 코드를 화상 통화중인 상대방 단말기로 전송하는 액션코드 전송부; 를 포함하는 이동통신 단말기를 제공한다.In addition, to achieve the above object, the present invention provides a mobile communication terminal including a virtual contact module to enable a virtual action with a call counterpart during a video call, wherein the virtual contact module is for a virtual contact during a video call. A pointer processing unit for displaying a graffiti pointer for displaying a graffiti position on a video call counterpart image displayed on a screen when a user input occurs and a graffiti action is selected, and moving the position of the pointer according to a user input; An action code transmission unit for transmitting an action code according to the coordinates of the doodle pointer and the corresponding action type to the counterpart terminal in the video call in real time according to the movement of the doodle pointer; It provides a mobile communication terminal comprising a.
본 발명의 상기 목적과 기술적 구성 및 그에 따른 작용 효과에 관한 자세한 사항은 본 발명의 명세서에 첨부된 도면에 의거한 이하 상세한 설명에 의해 보다 명확하게 이해될 것이다.Details of the above object and technical configuration of the present invention and the resulting effects thereof will be more clearly understood from the following detailed description based on the accompanying drawings.
먼저, 도 2는 본 발명의 가상 액션 서비스 방법을 설명하기 위한 일 실시예도이고, 도 3은 본 발명의 가상 액션 서비스 방법을 설명하기 위한 다른 실시예도이다.First, FIG. 2 is an embodiment diagram for explaining the virtual action service method of the present invention, and FIG. 3 is another embodiment diagram for explaining the virtual action service method of the present invention.
도시된 바와 같이, 본 발명은 제1단말기(100)와 제2단말기(100')가 무선 구간 신호 송수신을 위한 기지국(Node B, 210, 210') 및 제어국(RNC, 220, 220'), 화상 호 컨트롤을 위한 MSC 서버(MSV)와, 자원 관리 및 리소스 제어를 담당하는 미디어 게이트웨이(MGW)를 포함하며 화상 호 경로를 제공하는 교환기(MSC, 230, 230'), 가입자 위치 정보 및 부가 서비스 정보를 관리하는 홈 위치 등록기(240)를 포함하는 화상 통화 시스템을 이용하여 화상 통화를 수행하는 중 상대방의 얼굴 영상에 대해 가상 액션을 수행할 수 있도록 한 것이다.As shown, the present invention is a base station (Node B, 210, 210 ') and the control station (RNC, 220, 220') for the
본 발명에서 가상 액션(접촉)이라 함은, 화면 상에 보이는 상대방의 영상에서 특정 위치를 지정하고, 꼬집기, 누르기, 잡아당기기, 낙서하기 등의 액션 종류를 선택하면, 상대방 단말기에 표시되는 상대방 영상이 상기 선택된 액션에 의해 얼굴의 볼 부분이 특정 방향으로 늘어나거나, 머리카락이 움직이거나, 안색이 변하는 등으로 변형되어 표시되도록 하는 것을 말한다.In the present invention, the virtual action (contact) refers to a counterpart image displayed on the counterpart terminal when a specific position is designated in the counterpart's image displayed on the screen and an action type such as pinching, pressing, pulling, or graffiti is selected. By the selected action, the ball portion of the face is stretched in a specific direction, the hair is moved, or the complexion is changed to be displayed.
도 2의 실시예는, 가상 액션의 종류 중 낙서하기 액션이 선택된 경우로서, 제1단말기(100)의 사용자가 낙서하기를 선택함에 따라 낙서하기용 액션 포인터(펜, 연필 등의 포인팅 도구)가 제1단말기(100) 화면상에 디스플레이되며, 방향키 버튼이나 터치(터치 스크린인 경우)를 통해 포인터를 상대방 영상에서 이동시키면, 접촉 위치좌표(포인터 좌표) 및 액션 코드가 실시간으로 제2단말기(100')로 전송된다.In the embodiment of FIG. 2, when a doodle action is selected among the types of virtual actions, an action pointer (pointing tool such as a pen or a pencil) for doodle is selected as the user of the
그러면, 이를 수신한 제2단말기(100')는 자신의 영상에 액션 코드에 따라 포인팅 도구 이미지 파일을 삽입하고 자신의 영상을 변형시켜 표시하게 되며, 낙서하기 액션의 경우 포인터의 이동 경로를 따라 선이 그려지는 방식으로 영상이 변형되도록 하는 것이 바람직하다.Then, the
한편, 꼬집기, 누르기, 잡아당기기 등의 액션의 경우에는 액션의 종류를 한번 선택하면 해당 시점의 포인터 위치 좌표 및 액션 코드가 1회 전송되는 것이 바람직하나, 낙서하기 액션의 경우에는 포인터를 이동시키는 경로의 위치 좌표가 지속적으로 상대방 단말기로 전달되어, 상대방 단말기에서 포인터의 이동 경로를 따라 선이 그려지도록 하는 것이 바람직하다.On the other hand, in case of an action such as pinching, pressing, or pulling, once the action type is selected, the pointer position coordinate and the action code of the corresponding point of time are preferably transmitted once, but in the case of the graffiti action, the path for moving the pointer It is preferable that the position coordinate of is continuously transmitted to the counterpart terminal so that a line is drawn along the movement path of the pointer in the counterpart terminal.
도 3에는 가상 액션의 종류 중 꼬집기 액션이 선택된 경우로서, 제1단말기(100)의 사용자가 꼬집기 액션을 선택함에 따라 꼬집기용 액션 포인터(손 모양 이미지)가 화면상에 디스플레이되며, 방향키 버튼이나 터치(터치 스크린인 경우)를 통해 포인터를 상대방 영상의 특정 지점에 위치시킨 후 실행을 요청하면, 접촉 위치좌표(포인터 좌표) 및 액션 코드가 제2단말기(100')로 전송된다.3 illustrates a case where a pinch action is selected among the types of virtual actions. As a user of the
이를 수신한 제2단말기(100')는 자신의 영상에 액션 코드에 따라 포인팅 도구의 이미지 파일 중 손 모양의 이미지 파일을 삽입하고 자신의 영상을 변형시켜 표시하게 된다. 꼬집기 액션의 경우 얼굴이 일정 방향으로 늘어나면서 꼬집혀진 부분의 안색이 빨갛게 변하는 방식으로 영상이 변형될 수 있다.Upon receiving this, the
다음, 상기 도 2 및 도 3을 통해 설명한 본 발명의 가상 액션 서비스를 위한 이동통신 단말기의 구성을 도 4를 통해 설명하면 다음과 같다.Next, a configuration of the mobile communication terminal for the virtual action service of the present invention described with reference to FIGS. 2 and 3 will be described with reference to FIG. 4.
도 4에 도시된 바와 같이 본 발명의 이동통신 단말기(100)는 기지국과의 무선 신호 송수신을 위한 무선 송수신부(110), 사용자의 입력에 따라 대응하는 데이터를 출력하는 입력부(120)와, 각종 데이터를 저장하는 메모리(130)와, 상기 입력부(120)에서 발생되는 키 데이터 및 각종 정보 신호를 입력 받아 표시하는 표시부(140)와, 스피커와 마이크를 통해 입출력되는 음성 신호를 처리하는 오디오부(150), 화상 처리를 위한 카메라부(160)를 포함하여 구성되며, 본 발명의 가상 액션을 위한 가상접촉 모듈(160)을 더 포함한다.As shown in FIG. 4, the
상기 가상접촉 모듈(170)은 사용자의 요청에 따라, 또는 상대방 단말기로부 터의 요청에 의한 사용자 응답에 의해 구동되어, 화면에 액션 종류를 선택할 수 있도록 하는 메뉴 또는 아이콘 등을 출력하고, 사용자의 요청에 따라 상대방 영상을 변형시키거나, 상대방의 요청에 따라 자신의 영상을 변형시키는 동작을 수행하며, 이를 위해 자신영상 디스플레이부(171), 포인터 처리부(172), 액션코드 전송부(173), 영상 변형부(174)를 포함한다.The virtual contact module 170 is driven at the user's request or by the user's response to the request from the counterpart terminal, and outputs a menu or icon for selecting an action type on the screen, Modifying the other party's image according to the request, or modifying the own image according to the request of the other party, and for this purpose, the own
자신영상 디스플레이부(171)는 화상 통화중인 상대방 단말기로부터 포인터 좌표 및 액션 코드가 수신되면, 상대방 영상이 표시되는 화면을 분할하여 상대방 영상과 자신의 영상을 디스플레이하는 동작을 수행한다.When the pointer coordinates and the action code are received from the counterpart terminal in the video call, the own
만약, 화상 통화 시에 상대방의 영상과 자신의 영상이 모두 화면상에 표시되도록 구현된 단말기의 경우 자신영상 디스플레이부(171)는 생략될 수 있으며, 그렇지 않은 경우에는 가상접촉 모듈(170)이 구동됨에 따라 자신영상 디스플레이부(171)가 화면을 분할하여 자신의 영상을 디스플레이하여야 한다.If the terminal is implemented such that both the video of the counterpart and the video of the other are displayed on the screen during the video call, the own
포인터 처리부(172)는 화상 통화중 가상 접촉을 위한 사용자 입력이 발생하면, 화면에 표시되는 화상 통화 상대방 영상에 접촉 위치를 표시하기 위한 포인터를 디스플레이하고, 사용자의 입력에 따라 포인터의 위치를 이동시키는 동작을 수행하며, 특정 위치에서 액션 실행이 요청되면 현재 포인터의 위치 좌표를 액션코드 전송부(173)로 전달한다. 만약, 선택된 액션 종류가 낙서하기인 경우에는 이동되는 위치 좌표를 실시간으로 액션코드 전송부(173)로 전달하여야 한다.When a user input for virtual contact occurs during a video call, the
한편, 본 발명의 가상 액션은 상대방의 허용 하에 이루어질 수 있으며, 이를 위해 상기 포인터 처리부(172)는 가상 접촉을 위한 사용자 입력이 발생되면, 상대 방 단말기로 가상접촉 허용여부를 질의하는 메시지를 전송하고, 상대방 단말기로부터 수신되는 가상접촉 허용여부 응답 메시지에 근거하여, 가상접촉이 허용된 것으로 판단되면 포인터 디스플레이 및 포인터 위치 이동을 실행시킬 수 있다.Meanwhile, the virtual action of the present invention may be performed under the permission of the other party. To this end, when the user input for the virtual contact is generated, the
액션코드 전송부(173)는 사용자에 의해 액션 종류가 선택되면, 상기 상대방 영상에 위치한 포인터의 좌표와 상기 선택된 액션 종류에 따르는 액션 코드를 3G-324M의 데이터 논리 채널이나 컨트롤 논리 채널(제어 채널)을 통해 화상 통화중인 상대방 단말기로 전송한다.When the action type is selected by the user, the action
낙서하기 액션이 선택된 경우, 사용자가 낙서할 펜의 색상을 선택할 수 있도록 화면에 색상 팔레트를 표시할 수 있으며, 이 경우 액션코드 전송부(173)는 액션 코드 및 포인터 좌표와 함께 선택된 색상 정보(RGB 값)를 함께 전송하여 이를 수신한 단말기에서 선택된 색상의 선을 사용자 영상에 그릴 수 있도록 한다.When the Scribble action is selected, a color palette can be displayed on the screen so that the user can select the color of the pen to be scribble. In this case, the
영상 변형부(174)는 사용자가 선택한 지점의 영상을 선택한 액션에 따라 변형시키는 블록으로서, 액션코드 별 영상 변형 방법에 대한 정보 및 삽입할 포인팅 도구 이미지 파일 등을 저장하고 있으며, 포인터 좌표에 대응되는 지점을 결정하고, 결정된 지점에 상기 액션 코드에 대응되는 효과를 적용하여 영상을 변형시킴과 동시에, 상기 변형된 영상의 상기 포인터 좌표에 대응되는 지점에 손 모양의 또는 펜 모양 등의 포인팅 도구 이미지 파일을 삽입하여 화면에 표시한다.The
여기서, 상기 삽입되는 포인팅 도구 이미지 파일은 꼬집는 동작, 잡아당기는 동작 등에 대한 동영상일 수 있으며, 낙서하기 액션의 경우에는 포인팅 도구가 이동 경로를 따라 이동되도록 하는 것이 바람직하다.Here, the inserted pointing tool image file may be a video about a pinching operation, a pulling operation, or the like. In the case of the graffiti action, the pointing tool may be moved along a moving path.
액션 요청자 단말기에서 상기 영상 변형부(174)는 화면에 표시되는 상대방 영상에서 상기 포인터가 위치한 지점을 상기 사용자가 선택한 액션 종류에 따르는 액션 코드에 대응되는 방식으로 변형시켜 화면에 표시하며, 포인터 좌표 및 액션 코드를 수신한 단말기에서는 화면에 표시되는 자신의 영상에서 해당 포인터 좌표에 대응되는 지점의 영상을 상기 수신한 액션 코드에 대응되는 방식으로 변형시키는 동작을 수행하게 된다.In the action requester terminal, the
다음, 도 5 및 도 6은 본 발명의 일 실시예에 따르는 가상 액션 서비스 방법을 순차적으로 나타낸 흐름도로서, 도 5에는 꼬집기, 잡아당기기 등의 액션에 대한 실시예를, 도 6에는 낙서하기에 대한 실시예를 나타내었다.Next, FIGS. 5 and 6 are flowcharts sequentially illustrating a virtual action service method according to an embodiment of the present invention, in which FIG. 5 illustrates an embodiment of an action such as pinching and pulling, and FIG. An example is shown.
도 5에 도시된 바와 같이, 제1단말기와 제2단말기 간에 화상 호 경로가 설정되어 화상 통화가 수행되는 중(S401), 제1단말기의 사용자가 가상접촉 버튼을 누르거나 메뉴를 선택하는 등의 방법으로 가상접촉 모듈의 실행을 요청하면(S402), 제1단말기는 제2단말기로 가상접촉 허용여부를 질의하는 메시지를 전송하며(S403), 제2단말기의 사용자 입력에 따라, 제2단말기가 제1단말기로 가상접촉 허용여부 응답 메시지를 전송하면(S404), 제1단말기는 상기 가상접촉 허용여부 응답 메시지에 근거하여, 가상접촉이 허용된 것으로 판단되면 가상접촉 모듈(170)을 구동시킨 후(S405) 화면에 표시되는 상대방 영상에의 포인터 디스플레이 및 포인터 위치 이동을 실행한다(S406).As shown in FIG. 5, while a video call path is established between the first terminal and the second terminal (S401), a user of the first terminal presses a virtual contact button or selects a menu. When requesting the execution of the virtual contact module by the method (S402), the first terminal transmits a message inquiring whether to allow the virtual contact to the second terminal (S403), according to the user input of the second terminal, the second terminal When transmitting the virtual contact permission response message to the first terminal (S404), the first terminal based on the virtual contact permission response message, if it is determined that the virtual contact is allowed after driving the virtual contact module 170 (S405) The pointer display and the pointer position movement to the counterpart image displayed on the screen are executed (S406).
다음, 포인터가 특정 위치에 있는 상태에서 액션코드가 선택되면(S407), 제1 단말기는 포인터의 위치 좌표 및 액션코드를 제2단말기로 전송하며(S408), 이를 수신한 제2단말기는 화면에 표시되는 자신의 영상에 액션코드에 따라 지정된 포인팅 도구 이미지 파일을 삽입함과 아울러, 해당 액션코드에 대해 지정된 방식으로 자신의 영상을 변형하여 표시한다(S409). 만약, 화면에 자신의 영상이 표시되고 있지 않은 경우라면, 제2단말기는 우선 화면을 분할하여 상대방 영상과 자신의 영상을 모두 표시한 후에 영상의 변형을 실시하여야 한다.Next, when the action code is selected while the pointer is in a specific position (S407), the first terminal transmits the position coordinates and the action code of the pointer to the second terminal (S408), and the received second terminal is displayed on the screen. In addition to inserting the designated pointing tool image file according to the action code into the displayed own image, the image of the user is transformed and displayed in a manner specified for the corresponding action code (S409). If the user's image is not displayed on the screen, the second terminal first divides the screen to display both the counterpart image and its own image, and then transforms the image.
영상 변형을 예를 들어 설명하면, 꼬집기가 선택된 경우에는 해당 지점에 비틀기 효과를 적용하고, 꼬집힘에 의해 안색이 변한 것으로 보이도록 해당 지점의 얼굴 색상을 빨간색으로 수정함과 아울러, 제1단말기 사용자에 의해 꼬집히는 것으로 표시되도록 손 모양의 이미지 파일(동영상)을 삽입할 수 있다. 또한, 잡아당기기가 선택되었다면 해당 지점을 특정 방향으로 늘리는 효과를 적용하는 등의 방식으로 영상을 변형시킬 수 있다. 그리고, 누르기의 경우 지정 위치의 얼굴 부위를 화면의 중앙쪽으로 들어가지도록 영상을 변형하여 보여주며, 누르는 손모양의 동영상 삽입이 병행될 수 있고, 쓰다듬기의 경우 얼굴의 변형 없이 쓰다듬는 동작의 손모양 동영상 삽입만이 수행될 수 있다.For example, when the twist is selected, a twist effect is applied to the spot when the pinch is selected, and the face color of the spot is changed to red so that the complexion appears to be changed by the pinch. It is possible to insert a hand-shaped image file (video) to be displayed as pinched by. In addition, when the pull is selected, the image may be deformed by applying an effect of extending the corresponding point in a specific direction. And, in case of pressing, the image is transformed to show the face part of the designated position to enter the center of the screen, and the video of the pressing hand shape may be inserted in parallel, and in the case of stroking, the hand-shaped video of the stroking motion without deformation of the face Only insertion can be performed.
이때, 상기 제1단말기에서도 사용자가 상대방 영상이 어떻게 변형되는지를 확인할 수 있도록 하는 것이 바람직하며, 이를 위해 상기 제1단말기도 포인터 좌표 및 액션 코드를 상대방 단말기로 전송함과 동시에, 화면에 표시되는 제2단말기 사용자의 영상을 사용자가 선택한 액션 종류에 따라 변형시켜 화면에 표시한다(S409').In this case, the first terminal may also enable the user to check how the counterpart image is deformed. For this purpose, the first terminal also transmits the pointer coordinates and the action code to the counterpart terminal and is displayed on the screen. The image of the user of the second terminal is transformed according to the action type selected by the user and displayed on the screen (S409 ').
한편, 도면에서는 포인터 처리 과정(S405) 이후 액션코드 선택 과정(S406)이 수행되도록 하였으나, 액션코드가 먼저 선택된 후 포인터 동작이 수행될 수도 있다.Meanwhile, in the drawing, the action code selection process S406 is performed after the pointer process S405, but the action code may be selected first, and then the pointer operation may be performed.
다음, 도 6는 낙서하기 액션이 선택된 경우에 대한 실시예로서, 제1단말기와 제2단말기 간에 화상 호 경로가 설정되어 화상 통화가 수행되는 중(S501), 제1단말기의 사용자가 가상접촉 버튼을 누르거나 메뉴를 선택하는 등의 방법으로 가상접촉 모듈의 실행을 요청하면(S502), 제1단말기는 제2단말기로 가상접촉 허용여부를 질의하는 메시지를 전송한다(S503).Next, FIG. 6 illustrates an example in which a graffiti action is selected, wherein a video call path is established between a first terminal and a second terminal and a video call is performed (S501). When requesting the execution of the virtual contact module by pressing or selecting a menu (S502), the first terminal transmits a message for inquiring whether to allow virtual contact to the second terminal (S503).
그리고, 제2단말기의 사용자 입력에 따라, 제2단말기가 제1단말기로 가상접촉 허용여부 응답 메시지를 전송하면(S504), 제1단말기는 상기 가상접촉 허용여부 응답 메시지에 근거하여, 가상접촉이 허용된 것으로 판단되면 가상접촉 모듈을 구동시킨다(S505).In response to the user input of the second terminal, when the second terminal transmits a virtual contact permission response message to the first terminal (S504), the first terminal may be configured to perform virtual contact based on the virtual contact permission response message. If it is determined to be allowed to drive the virtual contact module (S505).
다음, 사용자로부터 낙서하기 액션코드가 선택되면(S506), 제1단말기는 상대방 영상에 낙서 포인터(펜, 연필 등의 필기도구)를 디스플레이하고, 사용자의 방향키 입력 등에 따라 포인터 위치 이동을 실행시키며(S507), 이와 동시에 지속적으로 낙서 포인터의 좌표 및 액션코드를 실시간으로 제2단말기에 전송한다(S508). 만약, 제1단말기 사용자에 의해 색상이 선택되었다면, 상기 제2단말기로 색상 정보가 추가 전송된다.Next, when the graffiti action code is selected from the user (S506), the first terminal displays a graffiti pointer (a writing tool such as a pen or a pencil) on the counterpart image, and executes the pointer position movement according to the user's direction key input (S506). At the same time, the coordinates and action code of the graffiti pointer are continuously transmitted to the second terminal in real time (S508). If the color is selected by the user of the first terminal, color information is additionally transmitted to the second terminal.
이에 따라, 제2단말기는 사용자 영상에서 상기 포인터 좌표에 대응되는 지점 을 결정하고, 결정된 지점에 상기 액션 코드에 대응되는 효과(낙서하기)를 적용하여 영상을 변형시킨다(S509). 낙서하기 액션의 경우, 상대방에 의해 자신의 얼굴에 낙서되는 것으로 보이도록 하는 것이므로, 제2단말기는 포인팅 도구 중 필기도구 모양의 이미지 파일을 포인터 좌표에 대응되는 지점에 삽입한 후, 실시간 수신되는 좌표에 따라 선을 그리는 방식으로 영상을 변형시킬 수 있다.Accordingly, the second terminal determines a point corresponding to the pointer coordinates in the user image, and deforms the image by applying an effect (doodle) corresponding to the action code to the determined point (S509). Since the graffiti action is to make the face appear to be graffitied by the other party, the second terminal inserts an image file shaped like a writing tool among the pointing tools at a point corresponding to the pointer coordinates, and then receives the coordinates received in real time. You can transform the image by drawing a line.
또한, 제1단말기에서도 포인터의 위치 이동에 따라 실시간으로 화면에 디스플레이된 상대방 영상에 대해 낙서에 의한 영상 변형을 실시한다(S509').In addition, the first terminal performs image transformation by graffiti on the counterpart image displayed on the screen in real time according to the movement of the pointer (S509 ').
본 발명이 속하는 기술분야의 당업자는 본 발명이 그 기술적 사상이나 필수적 특징을 변경하지 않고서 다른 구체적인 형태로 실시될 수 있으므로, 이상에서 기술한 실시예들은 모든 면에서 예시적인 것이며 한정적인 것이 아닌 것으로서 이해해야만 한다. 본 발명의 범위는 상기 상세한 설명보다는 후술하는 특허청구범위에 의하여 나타내어지며, 특허청구범위의 의미 및 범위 그리고 그 등가개념으로부터 도출되는 모든 변경 또는 변형된 형태가 본 발명의 범위에 포함되는 것으로 해석되어야 한다.As those skilled in the art to which the present invention pertains may implement the present invention in other specific forms without changing the technical spirit or essential features, the embodiments described above should be understood as illustrative and not restrictive in all aspects. Should be. The scope of the present invention is shown by the following claims rather than the detailed description, and all changes or modifications derived from the meaning and scope of the claims and their equivalents should be construed as being included in the scope of the present invention. do.
따라서, 본 발명의 화상 통화 시스템에서의 가상 액션 서비스 방법과 이를 위한 이동통신 단말기에 의하면, 화상 통화중 상대방의 얼굴이나 머리를 만지는 등의 행동을 하고 싶을 때 가상 접촉을 할 수 있으며, 이를 통해 보다 생생한 느낌으 로 상대방과 통화할 수 있다는 장점이 있다.Therefore, according to the virtual action service method and mobile communication terminal for the video call system of the present invention, when a user wants to perform an action such as touching the other's face or head during a video call, a virtual contact can be made. The advantage is that you can talk to the other party with a vivid feeling.
또한, 본 발명에 따르면 통화중 상대방 얼굴의 특정 위치를 지정하고 꼬집기, 잡아당기기, 쓰다듬기 등의 원하는 액션을 선택하면, 상대방 단말기에 꼬집혀지거나, 잡아당겨진 얼굴이 보여지기 때문에 화상 통화의 흥미가 배가되며, 이에 따라 화상 통화 서비스의 이용률 및 통화량을 증가시킬 수 있을 것으로 기대된다.In addition, according to the present invention, if a specific position of the other party's face is selected during a call and a desired action such as pinching, pulling, or stroking is selected, the other person's terminal is pinched or pulled, and thus the interest of the video call is increased. It is expected to increase the utilization rate and call volume of the video call service accordingly.
아울러, 본 발명에 따르면 액션 코드와 좌표값만을 상대방 단말기로 전송함에 의해 가상의 액션이 실행되기 때문에, 별도의 추가적인 대역폭의 요구 없이, 적은 네트웍 비용으로 가상 액션이 가능하다는 장점이 있다.In addition, according to the present invention, since the virtual action is executed by transmitting only the action code and the coordinate value to the counterpart terminal, the virtual action is possible at a low network cost without requiring additional bandwidth.
Claims (27)
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR20070025652A KR100798447B1 (en) | 2007-03-15 | 2007-03-15 | Method for providing virtual action service in video call system and mobile communication terminal for the same |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR20070025652A KR100798447B1 (en) | 2007-03-15 | 2007-03-15 | Method for providing virtual action service in video call system and mobile communication terminal for the same |
Publications (1)
Publication Number | Publication Date |
---|---|
KR100798447B1 true KR100798447B1 (en) | 2008-01-28 |
Family
ID=39219444
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR20070025652A KR100798447B1 (en) | 2007-03-15 | 2007-03-15 | Method for providing virtual action service in video call system and mobile communication terminal for the same |
Country Status (1)
Country | Link |
---|---|
KR (1) | KR100798447B1 (en) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103813127A (en) * | 2014-03-04 | 2014-05-21 | 腾讯科技(深圳)有限公司 | Video call method, terminal and system |
KR101561826B1 (en) * | 2008-06-11 | 2015-10-21 | 주식회사 팬택 | Cellular Phone And Data Input Method |
US9172906B2 (en) | 2008-06-11 | 2015-10-27 | Pantech Co., Ltd. | Mobile communication terminal and data input method |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20010067992A (en) * | 2001-04-13 | 2001-07-13 | 장민근 | Portable communication terminal capable of abstracting and inserting backgroud image and method thereof |
KR20040108065A (en) * | 2003-06-16 | 2004-12-23 | 김강석 | Apparatus for Providing Video Phone using Multimedia Contents Synthesis and Method Thereof |
KR20060022494A (en) * | 2004-09-07 | 2006-03-10 | 엘지전자 주식회사 | Video effect provide apparatus for mobile station at video telephony and the method of the same |
KR20070019849A (en) * | 2005-08-11 | 2007-02-15 | 삼성전자주식회사 | User input method and apparatus in mobile communication terminal |
-
2007
- 2007-03-15 KR KR20070025652A patent/KR100798447B1/en not_active IP Right Cessation
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20010067992A (en) * | 2001-04-13 | 2001-07-13 | 장민근 | Portable communication terminal capable of abstracting and inserting backgroud image and method thereof |
KR20040108065A (en) * | 2003-06-16 | 2004-12-23 | 김강석 | Apparatus for Providing Video Phone using Multimedia Contents Synthesis and Method Thereof |
KR20060022494A (en) * | 2004-09-07 | 2006-03-10 | 엘지전자 주식회사 | Video effect provide apparatus for mobile station at video telephony and the method of the same |
KR20070019849A (en) * | 2005-08-11 | 2007-02-15 | 삼성전자주식회사 | User input method and apparatus in mobile communication terminal |
Cited By (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR101561826B1 (en) * | 2008-06-11 | 2015-10-21 | 주식회사 팬택 | Cellular Phone And Data Input Method |
US9172906B2 (en) | 2008-06-11 | 2015-10-27 | Pantech Co., Ltd. | Mobile communication terminal and data input method |
US9965878B2 (en) | 2008-06-11 | 2018-05-08 | Apple Inc. | Mobile communication terminal and data input method |
US10325394B2 (en) | 2008-06-11 | 2019-06-18 | Apple Inc. | Mobile communication terminal and data input method |
CN103813127A (en) * | 2014-03-04 | 2014-05-21 | 腾讯科技(深圳)有限公司 | Video call method, terminal and system |
CN103813127B (en) * | 2014-03-04 | 2018-07-06 | 腾讯科技(深圳)有限公司 | A kind of video call method, terminal and system |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US8441514B2 (en) | Method and apparatus for transmitting and receiving data using mobile terminal | |
EP2002675B1 (en) | Method for controlling user interface menu and mobile terminal for providing application service using the same | |
US9531841B2 (en) | Communications method, client, and terminal | |
EP2262167A1 (en) | Method, device and system for realizing the electronic whiteboard in an audio/video conference | |
KR100681900B1 (en) | Service System and Method of Emotion Expressing Using Animation for Video Call and Mobile Communication Terminal therefor | |
CN102859480A (en) | Screen sharing | |
CN104184760A (en) | Information interaction method in communication process, client and server | |
JP2017504921A (en) | Instant messaging method, apparatus, program, and recording medium | |
EP1771002B1 (en) | Mobile video communication terminal | |
CN107333087A (en) | A kind of information sharing method and device based on video session | |
TW201249144A (en) | Sending and receiving method and terminal of instant communication base on manuscript original handwriting | |
WO2022028119A1 (en) | Screen sharing method, apparatus and device, and storage medium | |
CN106896920B (en) | Virtual reality system, virtual reality equipment, virtual reality control device and method | |
US20230138804A1 (en) | Enhanced video call method and system, and electronic device | |
CN103973542B (en) | A kind of voice information processing method and device | |
KR100798447B1 (en) | Method for providing virtual action service in video call system and mobile communication terminal for the same | |
WO2023016107A1 (en) | Remote interaction method, apparatus and system, and electronic device and storage medium | |
CN102364965A (en) | Refined display method of mobile phone communication information | |
JP3674993B2 (en) | Image display method for virtual conference system and terminal device for virtual conference | |
JP6451625B2 (en) | Communication terminal and communication method | |
US20230195403A1 (en) | Information processing method and electronic device | |
US20230325143A1 (en) | Method for Displaying Conference Shared Screen Content, Apparatus, and System | |
WO2019082366A1 (en) | Conference system | |
CN112966480A (en) | Teleconference annotation method and related equipment thereof | |
CN112565844A (en) | Video communication method and device and electronic equipment |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A201 | Request for examination | ||
E701 | Decision to grant or registration of patent right | ||
GRNT | Written decision to grant | ||
FPAY | Annual fee payment |
Payment date: 20130103 Year of fee payment: 6 |
|
FPAY | Annual fee payment |
Payment date: 20140116 Year of fee payment: 7 |
|
FPAY | Annual fee payment |
Payment date: 20150112 Year of fee payment: 8 |
|
LAPS | Lapse due to unpaid annual fee |