KR101531254B1 - User interface method of remote control for touchscreen mobile telephone - Google Patents

User interface method of remote control for touchscreen mobile telephone Download PDF

Info

Publication number
KR101531254B1
KR101531254B1 KR1020130151762A KR20130151762A KR101531254B1 KR 101531254 B1 KR101531254 B1 KR 101531254B1 KR 1020130151762 A KR1020130151762 A KR 1020130151762A KR 20130151762 A KR20130151762 A KR 20130151762A KR 101531254 B1 KR101531254 B1 KR 101531254B1
Authority
KR
South Korea
Prior art keywords
mobile communication
communication terminal
remote control
control
touch screen
Prior art date
Application number
KR1020130151762A
Other languages
Korean (ko)
Other versions
KR20150066346A (en
Inventor
서형수
Original Assignee
알서포트 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 알서포트 주식회사 filed Critical 알서포트 주식회사
Priority to KR1020130151762A priority Critical patent/KR101531254B1/en
Publication of KR20150066346A publication Critical patent/KR20150066346A/en
Application granted granted Critical
Publication of KR101531254B1 publication Critical patent/KR101531254B1/en

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • H04M1/72409User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality by interfacing with external accessories
    • H04M1/72415User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality by interfacing with external accessories for remote control of appliances
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04845Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range for image manipulation, e.g. dragging, rotation, expansion or change of colour
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M2250/00Details of telephonic subscriber devices
    • H04M2250/22Details of telephonic subscriber devices including a touch pad, a touch sensor or a touch detector

Abstract

본 발명은 이동통신망(51)의 이동국(移動局)으로서 터치스크린이 입출력장치로 적용된 이동통신단말기(10) 사이의 원격제어를 수행함에 있어서 제공되는 사용자 인터페이스(User Interface)에 관한 것으로, 이동통신단말기(10)에 탑재된 원격제어 프로그램이 이동통신단말기(10)의 터치스크린 화면에 다양한 객체(object)를 출력하고 사용자가 이를 터치(touch)하거나 드래그(drag)하는 등의 제스처(gesture)를 수행함에 따라 원격제어의 수락 요청, 원격제어의 수락, 원격제어 중 조작 입력 등의 처리가 수행될 수 있도록 한 것이다.
본 발명을 통하여, 제어측과 피제어측을 막론하고 이동통신단말기(10)의 터치스크린상에서 수행되는 직관적인 제스처를 통하여 원격제어를 요청 및 수락하고, 원격제어 중 필요한 다양한 조작을 수행할 수 있도록 함으로써 사용자 편의성을 크게 향상시킬 수 있을 뿐 아니라, 오조작을 방지할 수 있다.
The present invention relates to a user interface provided for performing remote control between mobile communication terminals 10 to which a touch screen is applied as an input / output device as a mobile station (mobile station) of a mobile communication network 51, A remote control program installed in the terminal 10 outputs various objects to the touch screen screen of the mobile communication terminal 10 and a gesture such as touching or dragging the object is displayed A request for acceptance of remote control, acceptance of remote control, operation input during remote control, and the like can be performed according to the performance.
Through the present invention, it is possible to request and accept remote control through an intuitive gesture performed on the touch screen of the mobile communication terminal 10 regardless of the control side and the controlled side, and to perform various operations required during remote control The user's convenience can be greatly improved and erroneous operation can be prevented.

Description

터치스크린 이동통신단말기의 원격제어 사용자 인터페이스 방법{USER INTERFACE METHOD OF REMOTE CONTROL FOR TOUCHSCREEN MOBILE TELEPHONE}TECHNICAL FIELD [0001] The present invention relates to a remote control user interface method for a touch screen mobile communication terminal,

본 발명은 이동통신망(51)의 이동국(移動局)으로서 터치스크린이 입출력장치로 적용된 이동통신단말기(10) 사이의 원격제어를 수행함에 있어서 제공되는 사용자 인터페이스(User Interface)에 관한 것으로, 이동통신단말기(10)에 탑재된 원격제어 프로그램이 이동통신단말기(10)의 터치스크린 화면에 다양한 객체(object)를 출력하고 사용자가 이를 터치(touch)하거나 드래그(drag)하는 등의 제스처(gesture)를 수행함에 따라 원격제어의 수락 요청, 원격제어의 수락, 원격제어 중 조작 입력 등의 처리가 수행될 수 있도록 한 것이다.
The present invention relates to a user interface provided for performing remote control between mobile communication terminals 10 to which a touch screen is applied as an input / output device as a mobile station (mobile station) of a mobile communication network 51, A remote control program installed in the terminal 10 outputs various objects to the touch screen screen of the mobile communication terminal 10 and a gesture such as touching or dragging the object is displayed A request for acceptance of remote control, acceptance of remote control, operation input during remote control, and the like can be performed according to the performance.

이동통신망(51)을 통한 데이터 처리속도의 비약적인 발전 및 무선랜(52)의 확산과 더불어 대용량 제어연산장치 및 기억장치는 물론 고해상도 터치스크린 입출력장치가 장착된 고기능 이동통신단말기(10)의 보급이 확대됨에 따라, 인터넷 접속 및 대용량 멀티미디어 정보의 처리 등 과거 데스크톱 컴퓨터를 이용하여 수행되던 작업이 이동통신단말기(10)를 통하여 수행되고 있다.The diffusion of the high-performance mobile communication terminal 10 equipped with the high-resolution touch-screen input / output device as well as the large-capacity control calculation device and the storage device, along with the breakthrough of the data processing speed through the mobile communication network 51 and the diffusion of the wireless LAN 52, As the mobile communication terminal 10 is enlarged, tasks that have been performed using a desktop computer such as Internet access and processing of large-capacity multimedia information have been performed.

소위 스마트폰(smart phone)으로 불리는 고기능 이동통신단말기(10)는 고성능 제어연산장치, 대용량 기억장치 및 고해상도 터치스크린이 채용되어 일반적인 데스크톱 컴퓨터에 필적하는 정보처리 용량 및 그래픽 사용자 인터페이스(GUI, Graphic User Interface)를 제공하고 있는 바, 음성통화 및 단문메시지서비스(SMS, Short Message Service)에 국한되었던 종래 이동통신단말기(10)의 기능을 탈피하여, 사실상 휴대형 컴퓨터의 역할을 수행하고 있으나, 이렇듯 이동통신단말기(10)의 사용 방식이 복잡해짐에 따라 새로운 통신환경에 익숙하지 않은 대다수 일반 사용자가 이동통신단말기(10)의 활용에 어려움을 느끼고 있을 뿐 아니라, 조작실수로 인한 오작동 및 데이터 손실, 과도한 통신료 부담 등의 피해를 입고 있는 실정이다.The high-performance mobile communication terminal 10, which is called a so-called smart phone, employs a high-performance control processor, a mass storage device, and a high-resolution touch screen to provide information processing capacity comparable to a general desktop computer, The mobile communication terminal 10 functions as a portable computer by removing the functions of the conventional mobile communication terminal 10 limited to voice communication and short message service (SMS). However, As the usage of the terminal 10 becomes complicated, a large number of ordinary users who are unfamiliar with the new communication environment feel difficulty in utilizing the mobile communication terminal 10, and in addition to the difficulty of malfunction and data loss due to an operation error, It is the fact that it is suffering such as burden.

이에, 고기능 이동통신단말기(10)를 가입자로 유치한 통신사, 이동통신단말기(10) 제조사, 유료 데이터 또는 응용프로그램 등을 배포하는 무선망(50) 연계 인터넷 정보제공업체 등이 사용자의 동의하에 이동통신단말기(10)를 원격제어함으로써, 고기능 이동통신단말기(10) 조작에 미숙한 일반 사용자의 인터넷 접속 및 데이터 송, 수신 방법을 안내하거나 원격조작할 뿐 아니라 작동 오류 및 고장에 대한 조치를 원격지에서 수행하고 있으며, 관련 종래기술로서 특허 제1066853호를 들 수 있다.Accordingly, a communication company that has attracted the high-performance mobile communication terminal 10 as a subscriber, a maker of the mobile communication terminal 10, an Internet information provider associated with a wireless network 50 that distributes paid data or application programs, By remotely controlling the terminal 10, it is possible to guide or remotely operate the Internet access and data transmission / reception method of a general user who is unfamiliar with the operation of the high-performance mobile communication terminal 10, And related art is disclosed in Japanese Patent No. 1066853.

즉, 인터넷과 연결된 특정 컴퓨터가 게이트웨이서버를 통하여 무선망(50)에 접속하여 이동통신단말기(10)를 원격제어 하는 것으로, 여기서 특정 컴퓨터란 전술한 바와 같이 원격제어 권한을 가진 통신사 상담원 등의 컴퓨터로서, 원격제어의 개시 전 원격제어의 경로가 되는 이동통신망(51) 또는 무선랜(52)의 운영 주체에 의하여 원격제어 권한이 부여될 뿐 아니라 복잡한 인증 및 피제어측 이동통신단말기(10b) 사용자의 동의 절차를 거치게 되므로 보안 확보에는 유리할 수 있으나, 일반 사용자에 의한 자유로운 원격제어 수행과는 거리가 있을 수 밖에 없다.That is, a specific computer connected to the Internet accesses the wireless network 50 through the gateway server to remotely control the mobile communication terminal 10. Here, the specific computer is a computer such as a communication agent consultant having remote control authority A remote control right is granted by the operator of the mobile communication network 51 or the wireless LAN 52 that is the path of the remote control before the start of the remote control and the user of the complex authentication and controlled mobile communication terminal 10b It is advantageous to secure the security, but it is far from the free remote control execution by the general user.

이에, 도 1에서와 같이, 이동통신단말기(10)간 원격제어를 통하여 원격제어를 수행함에 있어서 제어측 사용자의 자격 및 장소의 제약을 없애고, 가족 또는 친지간 원격제어 등 사용자의 다양한 요구에 부응할 수 있게 되었으며, 관련 종래기술로는 공개특허 제2011-109359호를 들 수 있다.
As shown in FIG. 1, in performing remote control through the remote control between the mobile communication terminals 10, restrictions on the qualifications and locations of the control-side users are eliminated, and various demands such as remote control between a family member or a relative are met And related related art is disclosed in Published Patent Application No. 2011-109359.

공개특허 제2011-109359호를 비롯한 종래의 이동통신단말기(10)간 원격제어는 제어측 또는 피제어측의 이동통신단말기(10) 중 일측의 이동통신단말기(10)가 원격제어를 제안 또는 요청하면 타측 이동통신단말기(10)가 이를 수락함으로써 개시되는데, 일단 원격제어를 시도하는 측의 이동통신단말기(10)가 상대방 이동통신단말기(10)에 접속되면, 이동통신단말기(10)의 화면에 원격제어의 허용 여부를 묻는 메시지가 출력되는 방식의 사용자 인터페이스가 적용되는 것이 일반적인 바, 보안 확보는 물론 사용자 편의성 측면에서 많은 문제점이 있었다.The remote control between the conventional mobile communication terminal 10 including the patent application publication No. 2011-109359 is based on the fact that the mobile communication terminal 10 on one side of the mobile communication terminal 10 on the control side or the controlled side proposes or requests remote control When the mobile communication terminal 10 on the side that attempts remote control is connected to the counterpart mobile communication terminal 10, it is displayed on the screen of the mobile communication terminal 10 A user interface in which a message asking whether or not the remote control is allowed is generally applied, and there have been many problems in terms of user security as well as security.

우선 원격제어를 수행하는 제어측 이동통신단말기(10a)의 조작에 있어서는 원격제어의 시도시 피제어측 이동통신단말기(10b)를 특정하기 위하여 해당 이동통신단말기(10)의 전화번호, 장치일련번호(Electronic Serial Number) 또는 맥어드레스(MAC address) 등의 접속정보를 입력하거나 자신의 이동통신단말기(10) 기억장치에 수록된 목록에서 피제어측 이동통신단말기(10b)를 선택하는 등의 복잡한 조작을 수행하여야 한다.In operation of the control-side mobile communication terminal 10a for performing remote control, in order to specify the controlled-side mobile communication terminal 10b in an attempt of remote control, the telephone number of the corresponding mobile communication terminal 10, the device serial number A complicated operation such as inputting access information such as an electronic serial number or a MAC address or selecting the controlled mobile communication terminal 10b from a list recorded in the storage device of the mobile communication terminal 10 Should be performed.

특히, 이동통신단말기(10)간 원격제어는 통신사 상담원 컴퓨터 등 특정 컴퓨터에 의한 이동통신단말기(10)의 원격제어가 아니라 일반 사용자의 이동통신단말기(10) 사이의 원격제어를 목적으로 하는 바, 가족이나 친지 사이의 원격제어를 상정할 수 있는데, 이 경우 원격제어의 시도 이전에 음성통화가 선행되거나 음성통화와 동반된 원격제어가 시도되는 것이 일반적이고, 따라서 통화를 중단 또는 보류한 상태에서 원격제어 프로그램을 실행하고 상대방의 접속정보를 입력하거나 목록을 조회하는 등의 조작을 수행하여야 하는 불편이 있을 수 밖에 없다.Particularly, the remote control between the mobile communication terminals 10 is intended for remote control between the mobile communication terminals 10 of a general user, rather than the remote control of the mobile communication terminal 10 by a specific computer such as a communication agent consultant computer, Remote control between a family member or a relative can be assumed. In this case, it is usual that a voice call is preceded or a remote control accompanied with a voice call is attempted prior to the remote control attempt. Therefore, It is inconvenient to execute an operation such as executing the control program and inputting the connection information of the other party or inquiring the list.

또한, 일단 원격제어가 개시되면 제어측 이동통신단말기(10a) 화면에는 피제어측 이동통신단말기(10b) 화면이 출력되는데 컴퓨터에 의한 원격제어와 달리 상대적으로 협소한 이동통신단말기(10) 화면상에 제어측 이동통신단말기(10a) 화면과 피제어측 이동통신단말기(10b) 화면을 모두 출력하기 어려우므로 피제어측 이동통신단말기(10b) 화면만을 출력하게 되며 따라서 제어측 이동통신단말기(10a) 사용자가 화면을 혼동할 우려가 상존하는 문제점이 있으며, 메뉴키(12), 홈키(11) 또는 백키(13) 등 이동통신단말기(10)에 물리적으로 장착되는 시스템키에 대한 원격제어를 통한 조작이 어려운 문제점이 있다.In addition, once the remote control is started, a screen of the controlled mobile communication terminal 10b is displayed on the screen of the control-side mobile communication terminal 10a. However, unlike the remote control by the computer, It is difficult to output both the screen of the control-side mobile communication terminal 10a and the screen of the controlled-side mobile communication terminal 10b, so that only the screen of the controlled-side mobile communication terminal 10b is output. There is a problem that the user may be confused with the screen and there is a problem in that the system key which is physically mounted on the mobile communication terminal 10 such as the menu key 12, the home key 11, This is a difficult problem.

한편, 원격제어의 대상이 되는 피제어측 이동통신단말기(10b)에서는 전술한 제어측 이동통신단말기(10a)에서와 같은 사용자 편의성 측면의 문제점 외에도 심각한 보안상 문제점 또한 발생된다.On the other hand, the controlled mobile communication terminal 10b, which is the object of remote control, has serious security problems in addition to the user-friendly problems as in the control-side mobile communication terminal 10a described above.

즉, 제어측 이동통신단말기(10a)의 일방적인 원격제어 수락 요청을 피제어측 이동통신단말기(10b) 사용자가 부지불식간에 수락하게 되면 그 즉시 원격제어가 개시되므로, 피제어측 이동통신단말기(10b) 사용자가 의도하지 않은 원격제어가 진행될 위험이 크고, 이로 인하여 개인정보가 유출되는 등의 심각한 문제가 발생될 수 있는 것이다.That is, when the user of the controlled mobile communication terminal 10b unwittingly accepts a unilateral remote control acceptance request of the control-side mobile communication terminal 10a, the remote control is immediately started, so that the controlled- ) There is a great risk that unintentional remote control will be performed by the user, which may lead to serious problems such as leakage of personal information.

특히, 고기능 이동통신단말기(10)의 경우 다양한 응용프로그램이 탑재되어 실행되고 지속적으로 무선망(50)을 통한 응용프로그램의 갱신(update)이 이루어지는 바, 응용프로그램의 갱신 수락을 요청하는 메시지가 이동통신단말기(10) 화면에 수시로 출력될 뿐 아니라, 대다수의 SNS(Social Network Service) 사용자 이동통신단말기(10)가 해당 SNS에 상시 접속상태를 유지하는 바, SNS를 통하여 수신된 다양한 메시지가 이동통신단말기(10) 화면에 수시로 출력되므로, 대다수 고기능 이동통신단말기(10) 사용자는 특별한 의심없이 습관적으로 확인 또는 수락을 선택하는 것이 일반적이며, 이러한 일반 사용자의 이동통신단말기(10) 이용습관을 악용하여 이동통신단말기(10)간 원격제어가 수행되는 경우 불특정 다수의 피제어측 이동통신단말기(10b) 사용자가 심각한 피해를 입을 수 있다.In particular, in the case of the high-performance mobile communication terminal 10, a variety of application programs are loaded and executed, and an application program is continuously updated via the wireless network 50. In this case, (Social Network Service) mobile communication terminal 10 maintains a constant connection state to the corresponding SNS as well as a plurality of SNS (Social Network Service) mobile terminals 10 are frequently displayed on the screen of the communication terminal 10, The user of most of the high-performance mobile communication terminal 10 habitually selects the confirmation or acceptance without any particular doubt. Since the habit of using the general user's mobile communication terminal 10 is abused When the remote control between the mobile communication terminals 10 is performed, an unspecified number of users of the controlled mobile communication terminal 10b are seriously damaged. The can.

이렇듯, 종래의 이동통신단말기(10)간 원격제어는 사용자 편의성은 물론 보안 확보에 있어서 심각한 문제점을 가지고 있는 바, 일반 사용자를 대상으로 제공되는 이동통신단말기(10)간 원격제어 서비스의 보급은 극히 부진한 실정이다.
As described above, the conventional remote control between the mobile communication terminals 10 has serious problems in ensuring security as well as user convenience, so that the spread of the remote control service between the mobile communication terminals 10 provided to the general users is very limited It is sluggish.

본 발명은 전술한 문제점을 감안하여 창안된 것으로, 이동통신단말기(10)간 원격제어가 진행되는 이동통신단말기(10)의 터치스크린에 사용자의 제스처(gesture)를 통한 조작이 가능한 아이콘 또는 버튼 등의 객체(object)를 구현함으로써, 사용자의 의사가 정확하게 반영된 원격제어를 간편하게 수행할 수 있도록 한 것이다.SUMMARY OF THE INVENTION The present invention has been made in view of the above-described problems, and it is an object of the present invention to provide a touch screen of a mobile communication terminal (10) So that the remote control accurately reflecting the intention of the user can be easily performed.

즉, 본 발명은 이동통신망(51)의 이동국(移動局)으로서 터치스크린이 입출력장치로 적용된 이동통신단말기(10) 사이의 원격제어를 수행함에 있어서 제공되는 사용자 인터페이스(User Interface) 방법에 있어서, 이동통신단말기(10)에 탑재된 원격제어 프로그램이 실행되는 단계와, 원격제어 프로그램이 이동통신단말기(10)의 터치스크린에 자기표시객체(21)와 상대표시객체(22)를 출력하는 단계와, 제어측 이동통신단말기(10a)의 상대표시객체(22)를 자기표시객체(21)로 드래그(drag)하는 제스처(gesture)가 입력되면 피제어측 이동통신단말기(10b)에 대한 제어측 이동통신단말기(10a)의 원격제어가 수행되는 단계로 이루어짐을 특징으로 하는 터치스크린 이동통신단말기의 원격제어 사용자 인터페이스 방법이자, 이동통신망(51)의 이동국(移動局)으로서 터치스크린이 입출력장치로 적용된 이동통신단말기(10) 사이의 원격제어를 수행함에 있어서 제공되는 사용자 인터페이스(User Interface) 방법에 있어서, 이동통신단말기(10)에 탑재된 원격제어 프로그램이 실행되는 단계와, 원격제어 프로그램이 이동통신단말기(10)의 터치스크린에 자기표시객체(21)와 상대표시객체(22)를 출력하는 단계와, 피제어측 이동통신단말기(10b)의 자기표시객체(21)를 상대표시객체(22)로 드래그(drag)하는 제스처(gesture)가 입력되면 피제어측 이동통신단말기(10b)에 대한 제어측 이동통신단말기(10a)의 원격제어가 수행되는 단계로 이루어짐을 특징으로 하는 터치스크린 이동통신단말기의 원격제어 사용자 인터페이스 방법이다.That is, the present invention provides a user interface method for performing remote control between mobile communication terminals 10 to which a touch screen is applied as an input / output device as a mobile station (mobile station) of a mobile communication network 51, A step in which a remote control program mounted on the mobile communication terminal 10 is executed and a step in which a remote control program outputs a self display object 21 and a relative display object 22 on a touch screen of the mobile communication terminal 10 , When a gesture for dragging the relative display object 22 of the control-side mobile communication terminal 10a to the self-display object 21 is input, the control- The remote control user interface method of the touch screen mobile communication terminal is characterized in that the remote control of the communication terminal (10a) is performed. The remote control user interface method of the touch screen mobile communication terminal A method of providing a user interface for performing remote control between a mobile communication terminal (10) applied as a power device, the method comprising: executing a remote control program installed in the mobile communication terminal (10) The program causing the mobile communication terminal 10 to display the self display object 21 and the relative display object 22 on the touch screen of the mobile communication terminal 10 and displaying the self display object 21 of the controlled mobile communication terminal 10b as a relative display When a gesture for dragging to the object 22 is inputted, remote control of the control-side mobile communication terminal 10a with respect to the controlled-side mobile communication terminal 10b is performed. And a remote control user interface method of the screen mobile communication terminal.

또한, 이동통신망(51)의 이동국(移動局)으로서 터치스크린이 입출력장치로 적용된 이동통신단말기(10) 사이의 원격제어를 수행함에 있어서 제공되는 사용자 인터페이스(User Interface) 방법에 있어서, 이동통신단말기(10)에 탑재된 원격제어 프로그램이 실행되고 피제어측 이동통신단말기(10b)에 대한 제어측 이동통신단말기(10a)의 원격제어가 개시되는 단계와, 원격제어 프로그램이 제어측 이동통신단말기(10a)의 터치스크린에 가상키객체(30)를 출력하는 단계와, 제어측 이동통신단말기(10a)의 가상키객체(30)를 터치(touch)하는 제스처(gesture)가 입력되면 피제어측 이동통신단말기(10b)의 시스템키 조작 명령이 전송되는 단계로 이루어짐을 특징으로 하는 터치스크린 이동통신단말기의 원격제어 사용자 인터페이스 방법이다.In addition, a user interface method for performing remote control between mobile communication terminals 10 to which a touch screen is applied as an input / output device as a mobile station (mobile station) of the mobile communication network 51, A step in which a remote control program mounted on the control-side mobile communication terminal 10b is executed and remote control of the control-side mobile communication terminal 10a with respect to the controlled-side mobile communication terminal 10b is started; The method comprising the steps of: outputting a virtual key object (30) to a touch screen of the control-side mobile communication terminal (10a); and receiving a gesture for touching the virtual key object (30) And transmitting a system key manipulation command of the communication terminal 10b to the remote control user interface of the touch screen mobile communication terminal.

또한, 이동통신망(51)의 이동국(移動局)으로서 터치스크린이 입출력장치로 적용된 이동통신단말기(10) 사이의 원격제어를 수행함에 있어서 제공되는 사용자 인터페이스(User Interface) 방법에 있어서, 이동통신단말기(10)에 탑재된 원격제어 프로그램이 실행되고 피제어측 이동통신단말기(10b)에 대한 제어측 이동통신단말기(10a)의 원격제어가 개시되는 단계와, 제어측 이동통신단말기(10a)의 원격제어 프로그램이 제어측 이동통신단말기(10a)의 터치스크린에 입력객체(40)를 출력하는 단계와, 제어측 이동통신단말기(10a)의 입력객체(40)를 터치(touch)하는 제스처(gesture)가 입력된 후 제어측 이동통신단말기(10a) 터치스크린의 접점 궤적 정보를 원격제어 프로그램이 피제어측 이동통신단말기(10b)로 전송하는 단계와, 전송된 궤적 정보를 피제어측 이동통신단말기(10b)의 원격제어 프로그램이 터치스크린으로 출력하는 단계로 이루어짐을 특징으로 하는 터치스크린 이동통신단말기의 원격제어 사용자 인터페이스 방법이자, 이동통신망(51)의 이동국(移動局)으로서 터치스크린이 입출력장치로 적용된 이동통신단말기(10) 사이의 원격제어를 수행함에 있어서 제공되는 사용자 인터페이스(User Interface) 방법에 있어서, 이동통신단말기(10)에 탑재된 원격제어 프로그램이 실행되고 피제어측 이동통신단말기(10b)에 대한 제어측 이동통신단말기(10a)의 원격제어가 개시되는 단계와, 피제어측 이동통신단말기(10b)의 원격제어 프로그램이 피제어측 이동통신단말기(10b)의 터치스크린에 입력객체(40)를 출력하는 단계와, 피제어측 이동통신단말기(10b)의 입력객체(40)를 터치(touch)하는 제스처(gesture)가 입력된 후 피제어측 이동통신단말기(10b) 터치스크린의 접점 궤적 정보를 원격제어 프로그램이 제어측 이동통신단말기(10a)로 전송하는 단계와, 전송된 궤적 정보를 제어측 이동통신단말기(10a)의 원격제어 프로그램이 터치스크린으로 출력하는 단계로 이루어짐을 특징으로 하는 터치스크린 이동통신단말기의 원격제어 사용자 인터페이스 방법이다.
In addition, a user interface method for performing remote control between mobile communication terminals 10 to which a touch screen is applied as an input / output device as a mobile station (mobile station) of the mobile communication network 51, A step of starting a remote control of the control-side mobile communication terminal 10a with respect to the controlled-side mobile communication terminal 10b by executing a remote control program mounted on the control-side mobile communication terminal 10a, The control program outputs the input object 40 to the touch screen of the control side mobile communication terminal 10a and the gesture that touches the input object 40 of the control side mobile communication terminal 10a. A step in which the remote control program transmits the contact sign information of the touch screen of the control-side mobile communication terminal 10a to the controlled-side mobile communication terminal 10b after the inputting of the sign information to the controlled mobile communication terminal 10b 10b The remote control user interface method of the touch screen mobile communication terminal according to the present invention is characterized in that a touch screen is applied as an input / output device as a mobile station of a mobile communication network (51) A user interface method for performing remote control between a mobile communication terminal (10), the method comprising: executing a remote control program installed in the mobile communication terminal (10) A step of starting remote control of the control-side mobile communication terminal 10a with respect to the control-side mobile communication terminal 10b; And a gesture for touching the input object 40 of the controlled mobile communication terminal 10b is inputted to the controlled mobile communication terminal 10b, The remote control program of the control-side mobile communication terminal (10a) transmits the contact sign information of the touch screen (10b) to the control-side mobile communication terminal (10a) The method comprising the steps of: (a) inputting a plurality of images;

본 발명을 통하여, 제어측과 피제어측을 막론하고 이동통신단말기(10)의 터치스크린상에서 수행되는 직관적인 제스처를 통하여 원격제어를 요청 및 수락하고, 원격제어 중 필요한 다양한 조작을 수행할 수 있도록 함으로써 사용자 편의성을 크게 향상시킬 수 있을 뿐 아니라, 오조작을 방지할 수 있다.Through the present invention, it is possible to request and accept remote control through an intuitive gesture performed on the touch screen of the mobile communication terminal 10 regardless of the control side and the controlled side, and to perform various operations required during remote control The user's convenience can be greatly improved and erroneous operation can be prevented.

또한, 원격제어의 개시 과정에서 피제어측 이동통신단말기(10b) 사용자의 의사에 반한 원격제어를 효과적으로 차단할 수 있다.
In addition, it is possible to effectively block the remote control against the intention of the user of the controlled mobile communication terminal 10b in the process of starting the remote control.

도 1은 이동통신단말기간 원격제어 방식 설명도
도 2는 자기표시객체 및 상대표시객체가 적용된 본 발명의 일 실시예 이동통신단말기 화면 예시도
도 3은 통화중 상태에서 본 발명이 수행되는 이동통신단말기 화면 예시도
도 4는 가상키객체가 적용된 본 발명의 일 실시예 이동통신단말기 화면 예시도
도 5는 제어측 이동통신단말기에 입력객체가 적용된 본 발명의 일 실시예 이동통신단말기 화면 예시도
도 6은 피제어측 이동통신단말기에 입력객체가 적용된 본 발명의 일 실시예 이동통신단말기 화면 예시도
1 is a diagram illustrating a remote control method during a mobile communication terminal;
2 is an exemplary screen view of a mobile communication terminal according to an embodiment of the present invention to which a magnetic display object and a relative display object are applied
3 is an exemplary screen view of a mobile communication terminal in which the present invention is performed in a busy state
4 is a view illustrating an example of a screen of a mobile communication terminal according to an embodiment of the present invention to which a virtual key object is applied
5 is a diagram illustrating an example of a screen of a mobile communication terminal according to an embodiment of the present invention in which an input object is applied to a control-side mobile communication terminal
6 is an exemplary screen view of a mobile communication terminal according to an embodiment of the present invention in which an input object is applied to a controlled mobile communication terminal

본 발명의 상세한 구성 및 수행과정을 첨부된 도면을 통하여 설명하면 다음과 같다.DETAILED DESCRIPTION OF THE PREFERRED EMBODIMENTS Hereinafter, exemplary embodiments of the present invention will be described in detail with reference to the accompanying drawings.

우선 도 2는 자기표시객체(21) 및 상대표시객체(22)가 적용된 본 발명 실시예의 제어측 이동통신단말기(10a) 터치스크린 및 피제어측 이동통신단말기(10b) 터치스크린을 도시한 것으로, 본 발명에서는 도시된 바와 같이, 이동통신단말기(10)의 터치스크린에 출력된 자기표시객체(21) 또는 상대표시객체(22)를 조작함으로써 이동통신단말기(10)간 통신로를 개설하고 원격제어를 진행하게 된다.2 shows a touch screen of a control-side mobile communication terminal 10a and a controlled-side mobile communication terminal 10b according to an embodiment of the present invention, to which a magnetic display object 21 and a relative display object 22 are applied, The communication path between the mobile communication terminals 10 is established by operating the magnetic display object 21 or the relative display object 22 output from the touch screen of the mobile communication terminal 10, .

이러한 본 발명은 이동통신단말기(10)에 탑재된 원격제어 프로그램이 실행되는 단계로 개시되는데, 여기서 원격제어 프로그램은 이동통신단말기(10)간 원격제어를 수행함에 있어서 제어신호 및 화면정보를 교환하는 프로그램으로서 이동통신단말기(10)의 운영체계하에서 실행되는 응용프로그램(application program) 또는 운영체계에 포함되는 프로그램 모듈 등 다양한 형식으로 이동통신단말기(10)에 탑재될 수 있다.The remote control program of the present invention initiates a remote control program installed in the mobile communication terminal 10, wherein the remote control program exchanges control signals and screen information in performing remote control between the mobile communication terminals 10 The program may be installed in the mobile communication terminal 10 in various formats such as an application program executed under the operating system of the mobile communication terminal 10 or a program module included in the operating system.

도 2에서는 이동통신단말기(10)의 터치스크린에 표시된 실행아이콘(15)을 사용자가 터치함으로써 원격제어 프로그램이 실행되고 있으며, 통화중 상태에서 원격제어가 실시되는 상황을 도시한 도 3에서와 같이, 이동통신단말기(10)의 통화중 화면 외곽부에 출력되는 호출객체(17a)를 터치함으로써 원격제어 프로그램을 실행시킬 수도 있다.In FIG. 2, the remote control program is being executed by the user touching the execution icon 15 displayed on the touch screen of the mobile communication terminal 10, , The remote control program can be executed by touching the paging object 17a output to the outside of the screen during communication of the mobile communication terminal 10. [

원격제어 프로그램이 실행되면, 원격제어 프로그램이 이동통신단말기(10)의 터치스크린에 자기표시객체(21)와 상대표시객체(22)를 출력하는 단계가 수행되는데, 자기표시객체(21)와 상대표시객체(22)는 각각 자신의 이동통신단말기(10)와 상대방의 이동통신단말기(10)를 표시하는 아이콘, 버튼 또는 아바타(avatar) 등의 객체로서, 해당 이동통신단말기(10)를 나타내는 문구, 전화번호 또는 이미지 등이 표시될 수도 있다.When the remote control program is executed, the remote control program outputs the self display object 21 and the relative display object 22 on the touch screen of the mobile communication terminal 10, The display object 22 is an object such as an icon, a button or an avatar for displaying the mobile communication terminal 10 of the mobile communication terminal 10 and the mobile communication terminal 10 of the other party, , A telephone number or an image may be displayed.

이동통신단말기(10)의 터치스크린에 자기표시객체(21) 및 상대표시객체(22)가 출력된 이후, 제어측 이동통신단말기(10a)의 상대표시객체(22)를 자기표시객체(21)로 드래그(drag)하는 제스처(gesture)가 입력되면 피제어측 이동통신단말기(10b)에 대한 제어측 이동통신단말기(10a)의 원격제어가 수행되는 단계 또는, 피제어측 이동통신단말기(10b)의 자기표시객체(21)를 상대표시객체(22)로 드래그(drag)하는 제스처(gesture)가 입력되면 피제어측 이동통신단말기(10b)에 대한 제어측 이동통신단말기(10a)의 원격제어가 수행되는 단계가 수행됨으로써, 실질적인 이동통신단말기(10)간 원격제어가 개시된다.The relative display object 22 of the control-side mobile communication terminal 10a is displayed on the magnetic display object 21 after the self-display object 21 and the relative display object 22 are output on the touch screen of the mobile communication terminal 10. [ Side mobile communication terminal 10b is controlled when the gesture for dragging the controlled mobile communication terminal 10b is input to the controlled mobile communication terminal 10b, When a gesture for dragging the magnetic display object 21 of the controlled mobile communication terminal 10b to the relative display object 22 is input, A step to be performed is performed, whereby remote control between the mobile communication terminals 10 is actually started.

즉, 제어측 이동통신단말기(10a)의 사용자는 자신의 이동통신단말기(10) 터치스크린의 상대표시객체(22)를 자기표시객체(21)로 드래그함으로써 원격제어를 시도하게 되는 것이고, 피제어측 이동통신단말기(10b)의 사용자는 자신의 이동통신단말기(10) 터치스크린의 자기표시객체(21)를 상대표시객체(22)로 드래그함으로써 원격제어를 요청 또는 수락하는 것이다.That is, the user of the control-side mobile communication terminal 10a attempts remote control by dragging the relative display object 22 of the mobile communication terminal 10's touch screen to the self-display object 21, The user of the side mobile communication terminal 10b requests or accepts the remote control by dragging the self display object 21 of the mobile communication terminal 10's touch screen to the relative display object 22. [

이렇듯, 터치스크린상 출력된 객체를 드래그하는 직관적인 제스처를 통하여 원격제어의 제안, 요청 또는 수락 등 원격제어의 개시에 수반되는 다양한 절차가 간편하게 수행될 수 있으며, 특히 피제어측 이동통신단말기(10b) 사용자의 경우 자기표시객체(21)를 상대표시객체(22)로 드래그하는 능동적인 조작을 수행하여야 하므로, 피제어측 이동통신단말기(10b) 사용자의 의사에 반하는 무단 원격제어를 효과적으로 차단할 수 있다.As described above, various procedures associated with the initiation of the remote control, such as proposal, request or acceptance of the remote control, can be easily performed through the intuitive gesture of dragging the object displayed on the touch screen. In particular, The user must perform an active operation of dragging the self display object 21 to the relative display object 22 so that the remote control against the intention of the user of the controlled mobile communication terminal 10b can be effectively blocked .

도 3은 전술한 바와 같이, 제어측 이동통신단말기(10a)와 피제어측 이동통신단말기(10b)가 통화중인 상태에서 본 발명을 통한 원격제어를 수행하는 상황을 도시한 것으로, 도시된 바와 같이, 각 이동통신단말기(10) 터치스크린에 표시되는 상대표시객체(22)에는 현재 통화중인 상대방의 전화번호 등의 식별정보를 원격제어 프로그램이 추출하여 표시할 수도 있다.3 illustrates a state in which the remote control through the present invention is performed while the control-side mobile communication terminal 10a and the controlled-side mobile communication terminal 10b are in a communication state, as shown in FIG. The remote control program may extract and display identification information such as the telephone number of the other party currently on the relative display object 22 displayed on the touch screen of each mobile communication terminal 10.

한편, 컴퓨터에 의한 원격제어와 달리 본 발명과 같은 이동통신단말기(10)간 원격제어에서는 협소한 이동통신단말기(10) 화면에 제어측 이동통신단말기(10a) 화면과 피제어측 이동통신단말기(10b) 화면을 모두 출력하기 어려우므로 피제어측 이동통신단말기(10b) 화면만을 출력하게 되며 따라서 제어측 이동통신단말기(10a) 사용자가 화면을 혼동할 우려가 있는 바, 본 발명에서는 도 2에서와 같이, 원격제어가 개시되면 화면구분객체(29)를 출력함으로써, 사용자의 화면 혼동을 방지할 수 있도록 하였다.On the other hand, in the remote control between the mobile communication terminals 10 according to the present invention, unlike the remote control by the computer, the screen of the control-side mobile communication terminal 10a and the controlled- The user of the control-side mobile communication terminal 10a is likely to confuse the screen. In this case, as shown in FIG. 2, Likewise, when the remote control is started, the screen classification object 29 is outputted to prevent the screen confusion of the user.

즉, 도 2의 우측 상단에서와 같이, 원격제어가 개시되고 피제어측 이동통신단말기(10b) 화면이 제어측 이동통신단말기(10a)로 전송되어 제어측 이동통신단말기(10a)의 원격제어 프로그램이 전송된 피제어측 이동통신단말기(10b) 화면을 제어측 이동통신단말기(10a)의 터치스크린으로 출력함에 있어서, 제어측 이동통신단말기(10a) 터치스크린 외곽에 출력 화면을 포위하는 외곽선 형태의 화면구분객체(29)를 출력함으로써, 제어측 이동통신단말기(10a) 사용자가 현재 출력되는 화면이 자신의 화면이 아니라 피제어측 이동통신단말기(10b) 화면임을 인지할 수 있도록 한 것이다.2, the remote control is started and the screen of the controlled mobile communication terminal 10b is transmitted to the control-side mobile communication terminal 10a and the remote control program of the control-side mobile communication terminal 10a Side mobile communication terminal 10a to the touch screen of the control-side mobile communication terminal 10a, the control-side mobile communication terminal 10a outputs the screen of the control-side mobile communication terminal 10b in the form of an outline The screen division object 29 is output to allow the user of the control-side mobile communication terminal 10a to recognize that the screen currently output is the screen of the controlled-side mobile communication terminal 10b rather than the screen thereof.

이렇듯 이동통신단말기(10)간 원격제어가 정상적으로 개시되면 피제어측 이동통신단말기(10b)의 터치스크린 화면이 제어측 이동통신단말기(10a)의 터치스크린에 가감 없이 표시되고, 제어측 이동통신단말기(10a) 사용자가 마치 자신의 이동통신단말기(10)를 조작하듯 터치스크린을 조작하면 피제어측 이동통신단말기(10b)가 제어측 이동통신단말기(10a) 사용자의 조작 의도대로 조작되지만, 터치스크린외 입력수단에 대한 조작 필요시 원격제어에 한계가 있을 수 밖에 없었다.When the remote control between the mobile communication terminals 10 is normally started, the touch screen image of the controlled mobile communication terminal 10b is displayed on the touch screen of the control mobile communication terminal 10a without any delay, When the user operates the touch screen as if the user operates the mobile communication terminal 10, the controlled mobile communication terminal 10b operates according to the intention of the user of the control-side mobile communication terminal 10a, When the operation of the external input means is required, there is a limit to the remote control.

즉, 터치스크린이 적용된 이동통신단말기(10)에는 터치스크린과 물리적으로 완전히 분리되거나, 터치스크린내 별도의 구획으로 설정되는 입력수단이 구성될 수 있는데, 그 예로써 홈키(home key)(11), 메뉴키(menu key)(12), 백키(back key)(13), 볼륨키(volume key) 및 락키(lock key) 등의 시스템키(system key)를 들 수 있으며, 이러한 시스템키는 터치스크린 기반 이동통신단말기(10)간 원격제어를 수행함에 있어서 다음과 같은 다양한 문제점을 야기할 수 있는 것이다.That is, the mobile communication terminal 10 to which the touch screen is applied may be constituted by an input means that is physically separated from the touch screen or is set as a separate segment in the touch screen. For example, a home key 11, A system key such as a menu key 12, a back key 13, a volume key and a lock key. The following various problems may be caused in performing remote control between the screen-based mobile communication terminals 10.

우선, 도 4에서와 같이, 제어측 이동통신단말기(10a)와 피제어측 이동통신단말기(10b)의 기종이 일치하지 않아 시스템키의 일대일 대응이 불가능한 경우에는 제어측 이동통신단말기(10a)의 시스템키를 조작하면 피제어측 이동통신단말기(10b)의 해당 시스템키가 조작되도록 하는 방식의 처리가 근본적으로 불가능하게 된다.4, when the types of the control-side mobile communication terminal 10a and the controlled-side mobile communication terminal 10b do not coincide with each other and one-to-one correspondence of the system keys is not possible, It is fundamentally impossible to operate the system key so that the corresponding system key of the controlled mobile communication terminal 10b is operated.

설령, 제어측 이동통신단말기(10a)와 피제어측 이동통신단말기(10b)가 동일한 기종이라 하여도, 원격제어의 진행중 프로그램 종료 또는 볼륨 조절 등을 위하여 제어측 이동통신단말기(10a) 사용자가 자신의 시스템키를 조작할 필요가 있을 경우, 해당 시스템키의 조작이 자신의 이동통신단말기(10)를 조작하기 위한 것인지 상대방의 이동통신단말기(10)를 조작하기 위한 것인지를 구분할 수 없는 심각한 문제점이 발생된다.Even if the control-side mobile communication terminal 10a and the controlled-side mobile communication terminal 10b are of the same model, the user of the control-side mobile communication terminal 10a can control the operation of the control- There is a serious problem that it is impossible to distinguish whether the operation of the corresponding system key is for operating the own mobile communication terminal 10 or for operating the other mobile communication terminal 10 .

이에 본 발명에서는 도 4에서와 같이, 제어측 이동통신단말기(10a) 터치스크린에 가상키객체(30)를 구현함으로써, 제어측 이동통신단말기(10a) 사용자가 피제어측 이동통신단말기(10b)의 시스템키를 자유롭고 정확하게 원격제어할 수 있도록 하였다.4, the virtual key object 30 is implemented on the touch screen of the control-side mobile communication terminal 10a, so that the user of the control-side mobile communication terminal 10a can access the controlled- So that the system keys can be freely and accurately remotely controlled.

즉, 이동통신단말기(10)에 탑재된 원격제어 프로그램이 실행되고 피제어측 이동통신단말기(10b)에 대한 제어측 이동통신단말기(10a)의 원격제어가 개시되면, 원격제어 프로그램이 제어측 이동통신단말기(10a)의 터치스크린에 가상키객체(30)를 출력하는 단계가 수행되고, 제어측 이동통신단말기(10a)의 가상키객체(30)를 터치(touch)하는 제스처(gesture)가 입력되면 피제어측 이동통신단말기(10b)의 시스템키 조작 명령이 전송되는 단계가 수행되는 것이다.That is, when the remote control program mounted on the mobile communication terminal 10 is executed and remote control of the control-side mobile communication terminal 10a with respect to the controlled mobile communication terminal 10b is started, A step of outputting the virtual key object 30 to the touch screen of the communication terminal 10a is performed and a gesture for touching the virtual key object 30 of the control- The system key operation command of the controlled mobile communication terminal 10b is transmitted.

도 4에 도시된 실시예에서는 원격제어가 개시되어 피제어측 이동통신단말기(10b) 화면이 제어측 이동통신단말기(10a)에 출력된 상태에서 제어측 이동통신단말기(10a) 사용자가 가상키객체(30)내 백키(back key) 영역을 터치하면, 피제어측 이동통신단말기(10b)의 백키(13)가 조작되는 상태를 예시하고 있다.In the embodiment shown in Fig. 4, when the remote control is started and the screen of the controlled mobile communication terminal 10b is outputted to the controlling mobile communication terminal 10a, The back key 13 of the controlled mobile communication terminal 10b is operated by touching the back key region of the controlled mobile communication terminal 10b.

또한, 도 4에 도시된 바와 같이, 가상키객체(30)내에는 다수의 시스템키를 나타내는 영역이 조합되는 바, 가상키객체(30)가 제어측 이동통신단말기(10a) 터치스크린에 상시 표시될 경우 화면이 과도하게 잠식될 수 있으므로, 도 4의 좌측 상단에서와 같이, 제어측 이동통신단말기(10a) 터치스크린에 일단 소형 호출객체(17b)를 표시한 후, 호출객체(17b)의 터치가 이루어지면 가상키객체(30)가 출력되도록 구성할 수도 있다.4, areas representing a plurality of system keys are combined in the virtual key object 30, and the virtual key object 30 is displayed on the touch screen of the control-side mobile communication terminal 10a at all times A small call object 17b is once displayed on the touch screen of the control-side mobile communication terminal 10a as shown at the upper left of FIG. 4, and then the touch of the call object 17b The virtual key object 30 may be output.

한편, 도 5 및 도 6은 이동통신단말기(10)간 원격제어를 수행함에 있어서, 터치스크린에 입력객체(40)를 출력하고, 입력객체(40)를 조작함으로써 터치스크린 화면에 선(線)을 작도하거나 작도된 이미지를 지우는 등의 입력을 수행할 수 있도록 한 것이다.5 and 6, when performing remote control between the mobile communication terminals 10, an input object 40 is output to the touch screen, and the input object 40 is manipulated, Or to erase the constructed image and so on.

우선, 도 5는 제어측 이동통신단말기(10a) 사용자에 의하여 작도된 이미지가 피제어측 이동통신단말기(10b) 터치스크린에 출력될 수 있도록 한 것으로, 이동통신단말기(10)에 탑재된 원격제어 프로그램이 실행되고 피제어측 이동통신단말기(10b)에 대한 제어측 이동통신단말기(10a)의 원격제어가 개시되는 단계와, 제어측 이동통신단말기(10a)의 원격제어 프로그램이 제어측 이동통신단말기(10a)의 터치스크린에 입력객체(40)를 출력하는 단계와, 제어측 이동통신단말기(10a)의 입력객체(40)를 터치(touch)하는 제스처(gesture)가 입력된 후 제어측 이동통신단말기(10a) 터치스크린의 접점 궤적 정보를 원격제어 프로그램이 피제어측 이동통신단말기(10b)로 전송하는 단계와, 전송된 궤적 정보를 피제어측 이동통신단말기(10b)의 원격제어 프로그램이 터치스크린으로 출력하는 단계를 거쳐 수행된다.5 is a block diagram illustrating a configuration of a mobile communication terminal according to an exemplary embodiment of the present invention. Referring to FIG. 5, an image created by a user of the control-side mobile communication terminal 10a may be output to a touch- The program is executed and remote control of the control-side mobile communication terminal 10a with respect to the controlled-side mobile communication terminal 10b is started; and when the remote control program of the control- A step of outputting an input object 40 to a touch screen of the control-side mobile communication terminal 10a and a step of inputting a gesture for touching the input object 40 of the control- A step in which the remote control program transmits the contact sign information of the touch screen of the terminal 10a to the controlled mobile communication terminal 10b and the step of transmitting the received sign information to a touch of the remote control program of the controlled mobile communication terminal 10b Output to screen . ≪ / RTI >

또한, 도 6은 피제어측 이동통신단말기(10b) 사용자에 의하여 작도된 이미지가 제어측 이동통신단말기(10a) 터치스크린에 출력될 수 있도록 한 것으로, 이동통신단말기(10)에 탑재된 원격제어 프로그램이 실행되고 피제어측 이동통신단말기(10b)에 대한 제어측 이동통신단말기(10a)의 원격제어가 개시되는 단계와, 피제어측 이동통신단말기(10b)의 원격제어 프로그램이 피제어측 이동통신단말기(10b)의 터치스크린에 입력객체(40)를 출력하는 단계와, 피제어측 이동통신단말기(10b)의 입력객체(40)를 터치(touch)하는 제스처(gesture)가 입력된 후 피제어측 이동통신단말기(10b) 터치스크린의 접점 궤적 정보를 원격제어 프로그램이 제어측 이동통신단말기(10a)로 전송하는 단계와, 전송된 궤적 정보를 제어측 이동통신단말기(10a)의 원격제어 프로그램이 터치스크린으로 출력하는 단계를 거쳐 수행된다.6 is a diagram showing an example of a configuration of the control-side mobile communication terminal 10a in which an image created by the user of the controlled-side mobile communication terminal 10b can be output to the touch- A step in which the program is executed and remote control of the control-side mobile communication terminal 10a with respect to the controlled-side mobile communication terminal 10b is started; and a step in which the remote control program of the controlled- A step of outputting the input object 40 to the touch screen of the communication terminal 10b and a step of inputting a gesture for touching the input object 40 of the controlled mobile communication terminal 10b, A step in which the remote control program transmits the contact sign information of the touch screen of the control side mobile communication terminal 10b to the control side mobile communication terminal 10a, With this touch screen And outputting.

즉, 도 5 및 도 6에 도시된 바와 같이, 이동통신단말기(10) 사용자가 입력객체(40)에 표시된 선그리기 영역을 터치한 후, 터치스크린에 접촉된 손가락을 이동하면, 원격제어 프로그램이 접점의 궤적 정보를 추출하여 상대방 이동통신단말기(10)의 원격제어 프로그램으로 전송하고, 궤적 정보를 수신한 원격제어 프로그램은 해당 궤적을 선(線) 형태로 터치스크린에 출력하는 것이다.5 and 6, when the user of the mobile communication terminal 10 touches the line drawing area displayed on the input object 40 and then moves the finger touching the touch screen, the remote control program The remote control program that extracts the locus information of the contact point and transmits the extracted locus information to the remote control program of the counterpart mobile communication terminal 10 and the remote control program that receives the locus information outputs the locus in the form of a line on the touch screen.

도 5 및 도 6에 도시된 실시예의 입력객체(40)에는 선그리기 영역 뿐 아니라, 지우기 영역 또한 설정되어 있는데, 사용자가 입력객체(40)의 지우기 영역을 터치한 후 터치스크린상 작도된 이미지를 터치하면 자신의 이동통신단말기(10) 및 상대방 이동통신단말기(10) 해당지점의 이미지가 소거되는 방식으로 운용될 수도 있다.In the input object 40 of the embodiment shown in FIGS. 5 and 6, not only a line drawing area but also a clearing area are set. When a user touches a clear area of the input object 40 and then displays an image formed on the touch screen The image of the corresponding point of the mobile communication terminal 10 and the counterpart mobile communication terminal 10 may be erased.

또한, 도 5 및 도 6에 도시된 바와 같이, 입력객체(40)내에는 선그리기 및 지우기 등 다양한 기능을 나타내는 영역이 조합되는 바, 입력객체(40)가 이동통신단말기(10) 터치스크린에 상시 표시될 경우 화면이 과도하게 잠식될 수 있으므로, 도 5 및 도 6의 좌측 도면에서와 같이, 이동통신단말기(10) 터치스크린에 일단 소형 호출객체(17c)를 표시한 후, 호출객체(17c)의 터치가 이루어지면 입력객체(40)가 출력되도록 구성할 수도 있다.5 and 6, areas representing various functions such as line drawing and erasing are combined in the input object 40, and the input object 40 is displayed on the touch screen of the mobile communication terminal 10 5 and 6, the call object 17c is displayed once on the touch screen of the mobile communication terminal 10, and then the call object 17c The input object 40 may be output.

이렇듯, 이동통신단말기(10)간 원격제어가 수행되는 과정에서 사용자가 터치스크린 화면상에 이미지를 작도하고 상대방이 이를 확인할 수 있도록 함으로써, 원격제어의 양측 당사자간 일층 원활한 의사소통이 가능하게 된다.
In this way, in the process of remote control between the mobile communication terminals 10, a user can construct an image on the touch screen screen and the other party can check it, thereby enabling smooth communication between the two parties of the remote control.

10 : 이동통신단말기
11 : 홈키
12 : 메뉴키
13 : 백키
15 : 실행아이콘
17 : 호출객체
21 : 자기표시객체
22 : 상대표시객체
29 : 화면구분객체
30 : 가상키객체
40 : 입력객체
50 : 무선망
51 : 이동통신망
52 : 무선랜
10: Mobile communication terminal
11: Home key
12: Menu key
13: Backkey
15: Run icon
17: Invocation object
21: magnetic display object
22: Relative display object
29: Screen segment object
30: Virtual key object
40: input object
50: wireless network
51: Mobile communication network
52: Wireless LAN

Claims (5)

이동통신망(51)의 이동국(移動局)으로서 터치스크린이 입출력장치로 적용된 이동통신단말기(10a,10b) 사이의 원격제어를 수행함에 있어서 제공되는 사용자 인터페이스(User Interface) 방법에 있어서,
이동통신단말기(10a,10b)에 탑재된 원격제어 프로그램이 실행되는 단계와;
원격제어 프로그램이 이동통신단말기(10a,10b)의 터치스크린에 자기표시객체(21)와 상대표시객체(22)를 각각 출력하는 단계와;
제어측 이동통신단말기(10a)의 상대표시객체(22)를 자기표시객체(21)로 드래그(drag)하고 피제어측 이동통신단말기(10b)의 자기표시객체(21)를 상대표시객체(22)로 드래그하는 제스처(gesture)가 입력되면, 제어측 이동통신단말기(10a)가 피제어측 이동통신단말기(10b)를 원격제어하거나, 또는 제어측 이동통신단말기(10a)의 자기표시객체(21)를 상대표시객체(22)로 드래그(drag)하고 피제어측 이동통신단말기(10b)의 상대표시객체(22)를 자기표시객체(21)로 드래그하는 제스처(gesture)가 입력되면, 피제어측 이동통신단말기(10b)가 제어측 이동통신단말기(10a)를 원격제어하는 단계로 이루어짐을 특징으로 하는 터치스크린 이동통신단말기의 원격제어 사용자 인터페이스 방법.
A user interface method for performing remote control between a mobile communication terminal (10a, 10b) to which a touch screen is applied as an input / output device as a mobile station (mobile station) of a mobile communication network (51)
Executing a remote control program installed in the mobile communication terminal (10a, 10b);
The remote control program outputting the self display object 21 and the relative display object 22 on the touch screen of the mobile communication terminals 10a and 10b;
The relative display object 22 of the control-side mobile communication terminal 10a is dragged to the magnetic display object 21 and the magnetic display object 21 of the controlled mobile communication terminal 10b is moved to the relative display object 22 The control-side mobile communication terminal 10a can control the controlled-side mobile communication terminal 10b remotely by controlling the controlled-side mobile communication terminal 10a or the self-indicating object 21a of the controlling-side mobile communication terminal 10a When a gesture for dragging the relative display object 22 of the controlled mobile communication terminal 10b to the relative display object 22 and dragging the relative display object 22 of the controlled mobile communication terminal 10b to the self display object 21 is input, Wherein the controlling of the control-side mobile communication terminal (10a) comprises remote-controlling the control-side mobile communication terminal (10a).
삭제delete 삭제delete 삭제delete 삭제delete
KR1020130151762A 2013-12-06 2013-12-06 User interface method of remote control for touchscreen mobile telephone KR101531254B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020130151762A KR101531254B1 (en) 2013-12-06 2013-12-06 User interface method of remote control for touchscreen mobile telephone

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020130151762A KR101531254B1 (en) 2013-12-06 2013-12-06 User interface method of remote control for touchscreen mobile telephone

Publications (2)

Publication Number Publication Date
KR20150066346A KR20150066346A (en) 2015-06-16
KR101531254B1 true KR101531254B1 (en) 2015-06-24

Family

ID=53514768

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020130151762A KR101531254B1 (en) 2013-12-06 2013-12-06 User interface method of remote control for touchscreen mobile telephone

Country Status (1)

Country Link
KR (1) KR101531254B1 (en)

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20100021007A (en) * 2007-06-29 2010-02-23 노키아 코포레이션 Unlocking a touch screen device
KR20120126472A (en) * 2011-05-11 2012-11-21 컨스핀 주식회사 Universal remote control device providing sharable customization, and operating method for the same
KR20130019260A (en) * 2011-08-16 2013-02-26 엘지전자 주식회사 Method for operating a mobile terminal
KR101245624B1 (en) * 2012-09-20 2013-04-17 알서포트 주식회사 Operating state display method of remote control for touchscreen mobile telephone

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20100021007A (en) * 2007-06-29 2010-02-23 노키아 코포레이션 Unlocking a touch screen device
KR20120126472A (en) * 2011-05-11 2012-11-21 컨스핀 주식회사 Universal remote control device providing sharable customization, and operating method for the same
KR20130019260A (en) * 2011-08-16 2013-02-26 엘지전자 주식회사 Method for operating a mobile terminal
KR101245624B1 (en) * 2012-09-20 2013-04-17 알서포트 주식회사 Operating state display method of remote control for touchscreen mobile telephone

Also Published As

Publication number Publication date
KR20150066346A (en) 2015-06-16

Similar Documents

Publication Publication Date Title
CN110673782B (en) Control method applied to screen projection scene and related equipment
AU2018421189B2 (en) Method for quickly opening application or application function, and terminal
EP2672762B1 (en) Connecting the highest priority Bluetooth device to a mobile terminal
KR101919788B1 (en) Mobile terminal and method for controlling thereof
US8610684B2 (en) System and method for controlling an electronic device having a touch-sensitive non-display area
CN106201491B (en) Mobile terminal and method and device for controlling remote assistance process of mobile terminal
WO2019227488A1 (en) Method for viewing information content, and terminal
KR20110131439A (en) Mobile terminal and method for controlling thereof
WO2018205168A1 (en) Method and device for inputting verification code
US9984232B2 (en) Method of operating security function and electronic device supporting the same
JP2013143137A (en) Management method of screen state of computer and mobile communication terminal for controlling touch screen type mobile communication terminal by computer
CN111078076A (en) Application program switching method and electronic equipment
EP2680532A1 (en) Method of communication between two devices
US9658770B2 (en) Method and apparatus for processing inputting of character
CN108153460B (en) Icon hiding method and terminal
KR101140418B1 (en) Screen image interception method for mobile telephone on the remote control using status bar alert message
US10063498B2 (en) Method and apparatus for sending and receiving messages
CN107230064A (en) The multiplexing method and device of virtual card
CN105242865A (en) Input processing method, input processing apparatus and mobile terminal comprising apparatus
KR101409790B1 (en) Remote control method between mobile telephone using program in mobile telephone
WO2016131181A1 (en) Fingerprint event processing method, apparatus, and terminal
KR101531254B1 (en) User interface method of remote control for touchscreen mobile telephone
JP5864390B2 (en) COMMUNICATION DEVICE, COMMUNICATION METHOD, AND COMMUNICATION PROGRAM
CN112600977B (en) Method and terminal for rapidly opening application or application function
CN105740694A (en) Mode switching method and terminal

Legal Events

Date Code Title Description
A201 Request for examination
A302 Request for accelerated examination
N231 Notification of change of applicant
E902 Notification of reason for refusal
AMND Amendment
E601 Decision to refuse application
X091 Application refused [patent]
AMND Amendment
E902 Notification of reason for refusal
AMND Amendment
E90F Notification of reason for final refusal
AMND Amendment
X701 Decision to grant (after re-examination)
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20190207

Year of fee payment: 5

FPAY Annual fee payment

Payment date: 20200114

Year of fee payment: 6