KR20130103363A - User terminal capable of sharing image and method for controlling the same - Google Patents

User terminal capable of sharing image and method for controlling the same Download PDF

Info

Publication number
KR20130103363A
KR20130103363A KR1020130020747A KR20130020747A KR20130103363A KR 20130103363 A KR20130103363 A KR 20130103363A KR 1020130020747 A KR1020130020747 A KR 1020130020747A KR 20130020747 A KR20130020747 A KR 20130020747A KR 20130103363 A KR20130103363 A KR 20130103363A
Authority
KR
South Korea
Prior art keywords
touch
image
user terminal
location
unit
Prior art date
Application number
KR1020130020747A
Other languages
Korean (ko)
Other versions
KR101337138B1 (en
Inventor
유창식
Original Assignee
한양대학교 산학협력단
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 한양대학교 산학협력단 filed Critical 한양대학교 산학협력단
Priority to US13/785,266 priority Critical patent/US20130244730A1/en
Publication of KR20130103363A publication Critical patent/KR20130103363A/en
Application granted granted Critical
Publication of KR101337138B1 publication Critical patent/KR101337138B1/en

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0416Control or interface arrangements specially adapted for digitisers
    • G06F3/0418Control or interface arrangements specially adapted for digitisers for error correction or compensation, e.g. based on parallax, calibration or alignment
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0412Digitisers structurally integrated in a display
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04842Selection of displayed objects or displayed text elements
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04845Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range for image manipulation, e.g. dragging, rotation, expansion or change of colour
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04BTRANSMISSION
    • H04B1/00Details of transmission systems, not covered by a single one of groups H04B3/00 - H04B13/00; Details of transmission systems not characterised by the medium used for transmission
    • H04B1/38Transceivers, i.e. devices in which transmitter and receiver form a structural unit and in which at least one part is used for functions of transmitting and receiving
    • H04B1/40Circuits

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

PURPOSE: A user terminal and a controlling method thereof are provided to enable the user terminal and other kinds of terminals to share an image. CONSTITUTION: When a touch unit touches a display unit or approaches to the display unit, a location image generating unit (1008) generates the location image corresponding to the location of the touch unit. A sensing unit (1006) senses either touch pressure or touch area of the touch unit. The location image is changed by either touch pressure or touch area of the touch unit which is sensed in the sensing unit. The location image is not indicated if either touch pressure or touch area is within a certain level range. [Reference numerals] (1000) Display unit; (1002) Image information generating unit; (1004) Image information transmitting unit; (1006) Sensing unit; (1008) Location image generating unit; (1010) Setting unit; (1012) Control unit

Description

이미지 공유가 가능한 사용자 단말기 및 이의 제어 방법 {User Terminal Capable of Sharing Image and Method for Controlling the Same}User Terminal Capable of Sharing Image and Method for Controlling the Same}

본 발명은 사용자 단말기 및 이의 제어 방법에 관한 것이다.The present invention relates to a user terminal and a control method thereof.

근래에 들어 스마트폰의 사용이 점차 증가하고 있으며, 이제 스마트폰은 누구나 소지하는 필수적인 개인용 장치가 되어가고 있다. 스마트폰은 통화 용도뿐만 아니라 게임, 정보 검색, 개인 정보 관리 등 다양한 용도로 사용되고 있으며, 다양한 어플리케이션이 제공되면서 스마트폰의 활용 용도는 점차 확장되고 있다. In recent years, the use of smart phones is gradually increasing, and now smart phones are becoming an essential personal device possessed by everyone. Smartphones are used not only for calling but also for various purposes such as game, information retrieval, and personal information management. As various applications are provided, the use of smart phones is gradually expanding.

CPU 및 저장 장치의 발달에 따라 스마트폰은 소형 컴퓨터와 같은 기능을 제공하나 그 디스플레이 사이즈의 한계로 인해 다양한 어플리케이션 프로그램을 사용하는 데에는 제약이 따른다. With the development of CPU and storage devices, smart phones provide the same functions as small computers, but due to the limitation of their display size, there are limitations on using various application programs.

예를 들어, 특정 게임은 큰 화면에서 플레이될 필요가 있으나, 스마트폰으로는 디스플레이 사이즈의 한계로 인해 해당 게임을 플레이하기 어려운 문제점이 있었다. For example, although a specific game needs to be played on a large screen, there is a problem that it is difficult to play the game due to the limitation of the display size with a smartphone.

또한, 스마트폰은 대부분 터치 인터페이스를 이용하여 인터페이싱이 이루어지나 디스플레이 사이즈 한계로 인해 인터페이스 실행 객체들이 촘촘히 배치되는 것이 일반적이며, 이와 같이 촘촘히 배치된 인터페이스 실행 객체들로 인해 잦은 터치 오류가 발생하는 문제점이 있었다.In addition, most smartphones are interfaced using a touch interface, but due to display size limitations, interface execution objects are generally closely arranged, and thus, frequent touch errors occur due to the closely arranged interface execution objects. there was.

본 발명은 사용자 단말기와 다른 종류의 단말기가 이미지를 공유할 수 있는 사용자 단말기 및 이를 위한 기록 매체를 제안한다. The present invention proposes a user terminal capable of sharing an image between a user terminal and another type of terminal, and a recording medium therefor.

또한, 본 발명은 터치 인터페이스의 터치 오류를 최소화할 수 있는 사용자 단말기 및 이를 위한 기록 매체를 제안한다. In addition, the present invention proposes a user terminal capable of minimizing a touch error of a touch interface and a recording medium therefor.

상기한 바와 같은 목적을 달성하기 위하여, 본 발명의 일 실시예에 따르면, 터치 수단이 디스플레이부를 터치하거나 상기 디스플레이부에 근접할 경우 상기 터치 수단의 위치에 상응하는 위치 이미지를 생성하는 위치 이미지 생성부; 및 상기 터치 수단의 터치 압력 및 터치 면적 중 적어도 하나를 감지하는 감지부를 포함하되, 상기 위치 이미지는 상기 감지부에서 감지하는 상기 터치 수단의 터치 압력 및 터치 면적 중 적어도 하나에 의해 변화되는 사용자 단말기가 제공된다. In order to achieve the above object, according to an embodiment of the present invention, a position image generating unit for generating a position image corresponding to the position of the touch means when the touch means touches the display or close to the display ; And a sensing unit configured to sense at least one of a touch pressure and a touch area of the touch unit, wherein the position image is changed by at least one of the touch pressure and the touch area of the touch unit detected by the sensing unit. Is provided.

상기 위치 이미지는 상기 터치 압력 및 터치 면적 중 적어도 하나가 소정 레벨 범주에 있을 경우 표시되지 않는다. The position image is not displayed when at least one of the touch pressure and the touch area is in a predetermined level category.

상기 터치 수단의 터치 압력 및 터치 면적 중 적어도 하나에 의해 상기 위치 이미지의 형태가 변화된다. The shape of the position image is changed by at least one of the touch pressure and the touch area of the touch means.

상기 사용자 단말기는 상기 터치 수단의 터치 압력 또는 터치 면적 중 적어도 하나를 나타내는 정보를 출력하는 정보 제공부를 더 포함할 수 있다. The user terminal may further include an information providing unit configured to output information indicating at least one of a touch pressure and a touch area of the touch unit.

상기 사용자 단말기는 상기 감지부의 터치 압력 및 터치 면적 중 적어도 하나를 감지하는 동작을 활성화시키거나 또는 비활성화시키는 설정부를 더 포함할 수 있다. The user terminal may further include a setting unit for activating or deactivating an operation of sensing at least one of a touch pressure and a touch area of the sensing unit.

본 발명의 다른 측면에 따르면, 디스플레이부; 및 터치 수단이 상기 디스플레이를 터치하거나 상기 디스플레이부에 근접할 경우 상기 터치 수단의 위치에 상응하는 위치 이미지를 생성하는 위치 이미지 생성부를 포함하되, 상기 위치 이미지가 미리 설정된 이벤트 실행개체 상에 표시될 경우 상기 위치 이미지의 형태는 변화되는 사용자 단말기가 제공된다. According to another aspect of the invention, the display unit; And a position image generator for generating a position image corresponding to the position of the touch means when the touch means touches the display or approaches the display, wherein the position image is displayed on a preset event executing object. The shape of the location image is provided with a user terminal that is changed.

본 발명의 또 다른 측면에 따르면, 디스플레이부; 및 터치 수단이 상기 디스플레이를 터치하거나 상기 디스플레이부에 근접할 경우 상기 터치 수단의 위치에 상응하는 위치 이미지를 생성하는 위치 이미지 생성부를 포함하되, 상기 위치 이미지가 미리 설정된 위치에 표시될 경우 상기 위치 이미지의 형태는 변화되는 사용자 단말기가 제공된다. According to another aspect of the invention, the display unit; And a location image generator for generating a location image corresponding to the location of the touch means when the touch means touches the display or approaches the display, wherein the location image when the location image is displayed at a preset location. The form of the provided user terminal is changed.

본 발명의 또 다른 측면에 따르면, 터치 수단이 디스플레이부를 터치할 경우 상기 터치 수단의 터치 압력 및 터치 면적 중 적어도 하나를 감지하는 단계(a); 및 상기 터치 수단이 상기 디스플레이부를 터치하거나 상기 디스플레이에 근접할 경우 상기 터치 수단의 위치에 상응하는 위치 이미지를 생성하는 단계(b)를 포함하되, 상기 위치 이미지는 상기 단계(a)에서 감지하는 터치 수단의 터치 압력 및 터치 면적 중 적어도 하나에 의해 변화되는 사용자 단말기 인터페이스 방법이 제공된다. According to another aspect of the invention, when the touch means touches the display unit (a) detecting at least one of the touch pressure and the touch area of the touch means; And (b) generating a position image corresponding to the position of the touch means when the touch means touches the display unit or approaches the display, wherein the position image is a touch detected in step (a). A user terminal interface method is provided which is varied by at least one of the touch pressure and the touch area of the means.

본 발명의 또 다른 측면에 따르면, 터치 수단이 디스플레이부를 터치하거나 터치 수단의 상기 디스플레이부로의 근접을 감지하는 단계(a); 상기 단계(a)에서 상기 터치 수단의 터치 또는 근접이 감지될 경우 상기 터치 수단의 위치에 상응하는 위치 이미지를 생성하는 단계(b)를 포함하되, 상기 위치 이미지가 미리 설정된 이벤트 실행개체 상에 표시될 경우 상기 위치 이미지의 형태는 변화되는 사용자 단말기 인터페이스 방법이 제공된다. According to another aspect of the invention, the method comprising the steps of (a) the touch means to touch the display unit or to sense the proximity of the touch means to the display unit; (B) generating a position image corresponding to the position of the touch means when the touch or proximity of the touch means is detected in the step (a), wherein the position image is displayed on a preset event executing object. When the shape of the location image is changed is provided a user terminal interface method.

본 발명의 또 다른 측면에 따르면, 터치 수단이 디스플레이부를 터치하거나 터치 수단의 상기 디스플레이부로의 근접을 감지하는 단계(a); 상기 단계(a)에서 상기 터치 수단의 터치 또는 근접이 감지될 경우 상기 터치 수단의 위치에 상응하는 위치 이미지를 생성하는 단계(b)를 포함하되, 상기 위치 이미지가 미리 설정된 위치에 표시될 경우 상기 위치 이미지의 형태는 변화되는 사용자 단말기 인터페이스 방법이 제공된다. According to another aspect of the invention, the method comprising the steps of (a) the touch means to touch the display unit or to sense the proximity of the touch means to the display unit; And (b) generating a position image corresponding to the position of the touch means when the touch or the proximity of the touch means is detected in the step (a), when the position image is displayed at a preset position. A user terminal interface method in which the shape of the location image is changed is provided.

본 발명의 또 다른 측면에 따르면, 상술한 방법들을 실행하기 위한 프로그램이 기록된 기록 매체가 제공된다. According to another aspect of the present invention, there is provided a recording medium on which a program for executing the above-described methods is recorded.

본 발명에 의하면, 사용자 단말기와 다른 종류의 단말기가 이미지를 공유할 수 있는 장점이 있다. According to the present invention, there is an advantage that the user terminal and the other type of terminal can share the image.

또한, 본 발명에 의하면, 터치 인터페이스의 터치 오류를 최소화할 수 있는 장점이 있다. In addition, according to the present invention, there is an advantage that can minimize the touch error of the touch interface.

도 1은 본 발명의 일 실시예에 따른 단말기간 이미지 공유 시스템의 개략적인 구성을 도시한 도면.
도 2는 본 발명의 일 실시예에 따른 이미지 공유를 위한 사용자 단말기와 수신 단말기의 동작을 도시한 순서도.
도 3은 본 발명의 다른 실시예에 따른 이미지 공유를 위한 사용자 단말기와 수신 단말기의 동작을 도시한 순서도.
도 4는 본 발명의 일 실시예에 따른 터치 수단의 위치 이미지의 일례를 도시한 도면.
도 5는 본 발명의 일 실시예에 따라 변화된 위치 이미지의 일례를 도시한 도면.
도 6은 본 발명의 일 실시예에 따른 터치 레벨에 따라 위치 이미지가 변화되는 일례를 도시한 도면.
도 7은 본 발명의 일 실시예에 따른 사용자 단말기(100)와 수신 단말기(102) 사이에 이미지 정보를 송수신하는 과정을 도시한 순서도.
도 8은 본 발명의 다른 실시예에 따른 사용자 단말기(100)와 수신 단말기(102) 사이에 이미지 정보를 송수신하는 과정을 도시한 순서도.
도 9는 본 발명의 또 다른 실시예에 따른 사용자 단말기(100)와 수신 단말기(102) 사이에 이미지 정보를 송수신하는 과정을 도시한 순서도.
도 10은 본 발명의 일 실시예에 따른 사용자 단말기의 모듈 구성을 도시한 블록도.
도 11은 본 발명의 다른 실시예에 따른 사용자 단말기의 모듈 구성을 도시한 블록도.
도 12는 본 발명의 또 다른 실시예에 따른 사용자 단말기의 모듈 구성을 도시한 블록도.
1 is a view showing a schematic configuration of an image sharing system between terminals according to an embodiment of the present invention.
2 is a flowchart illustrating operations of a user terminal and a receiving terminal for image sharing according to an embodiment of the present invention.
3 is a flowchart illustrating operations of a user terminal and a receiving terminal for image sharing according to another embodiment of the present invention.
4 is a view showing an example of the position image of the touch means according to an embodiment of the present invention.
5 illustrates an example of a changed position image according to an embodiment of the present invention.
6 is a diagram illustrating an example in which a position image is changed according to a touch level according to an embodiment of the present invention.
7 is a flowchart illustrating a process of transmitting and receiving image information between the user terminal 100 and the receiving terminal 102 according to an embodiment of the present invention.
8 is a flowchart illustrating a process of transmitting and receiving image information between the user terminal 100 and the receiving terminal 102 according to another embodiment of the present invention.
9 is a flowchart illustrating a process of transmitting and receiving image information between the user terminal 100 and the receiving terminal 102 according to another embodiment of the present invention.
10 is a block diagram showing a module configuration of a user terminal according to an embodiment of the present invention.
11 is a block diagram showing a module configuration of a user terminal according to another embodiment of the present invention.
12 is a block diagram showing a module configuration of a user terminal according to another embodiment of the present invention.

이하에서는 첨부된 도면들을 참조하여 본 발명의 실시예들을 자세히 설명하도록 한다. Hereinafter, embodiments of the present invention will be described in detail with reference to the accompanying drawings.

도 1은 본 발명의 일 실시예에 따른 단말기간 이미지 공유 시스템의 개략적인 구성을 도시한 도면이다. 1 is a diagram illustrating a schematic configuration of an image sharing system between terminals according to an exemplary embodiment of the present invention.

도 1을 참조하면, 본 발명의 일 실시예에 따른 단말기간 이미지 공유 시스템은 사용자 단말기(100) 및 수신 단말기(102)를 포함한다. Referring to FIG. 1, an image sharing system between terminals according to an exemplary embodiment of the present invention includes a user terminal 100 and a receiving terminal 102.

사용자 단말기(100)는 이미지를 제공하는 단말기이며, 일례로 스마트폰, 노트북, 넷북과 같이 어플리케이션 프로그램의 구동이 가능하고 다른 단말기들과 통신 가능하며 디스플레이부를 구비한 단말기이다. 바람직하게는, 사용자 단말기(100)는 터치 인터페이스를 제공하는 단말기일 수 있다. The user terminal 100 is a terminal that provides an image. For example, the user terminal 100 may drive an application program such as a smart phone, a notebook computer, a netbook, communicate with other terminals, and have a display unit. Preferably, the user terminal 100 may be a terminal that provides a touch interface.

수신 단말기(102)는 사용자가 직접 조작하지는 않으나 사용자 단말기(100)의 디스플레이부에 표시된 이미지를 공유하는 단말기이다. 바람직하게는 수신 단말기(102)는 사용자 단말기(100)에 비해 비교적 큰 디스플레이부를 가진 단말기일 수 있으며, 예를 들어 TV, 모니터 등과 같은 장치가 포함될 수 있다. The receiving terminal 102 is a terminal which is not directly manipulated by a user but shares an image displayed on a display unit of the user terminal 100. Preferably, the receiving terminal 102 may be a terminal having a relatively larger display unit than the user terminal 100, and may include, for example, a device such as a TV or a monitor.

사용자 단말기(100)와 수신 단말기(102)는 이미지 공유를 위해 서로 통신 가능한 통신 모듈을 구비하고 있다. 사용자 단말기(100)와 수신 단말기(102)는 다양한 방식으로 통신 가능하며, 일례로 사용자 단말기(100)와 수신 단말기(102)는 와이파이(Wi-Fi)를 이용하여 통신을 수행할 수 있다. 다른 예로, 사용자 단말기(100)와 수신 단말기(102)는 블루투스, NFC(Near Field Communiation)과 같은 근거리 통신 방식을 이용하여 통신을 수행할 수도 있을 것이다. 또 다른 예로 사용자 단말기(100)와 수신 단말기(102)는 무선 HDMI 방식에 의해 통신을 수행할 수도 있을 것이다. 사용자 단말기(100)와 수신 단말기(102) 중 적어도 하나가 내장 통신 모듈을 구비하고 있지 않을 경우 사용자 단말기(100) 또는 수신 단말기(102)와 연동 가능한 외부 장치를 이용하여 통신을 수행할 수도 있다는 점은 당업자에게 있어 자명할 것이다. The user terminal 100 and the receiving terminal 102 are provided with a communication module that can communicate with each other for image sharing. The user terminal 100 and the receiving terminal 102 may communicate in various ways. For example, the user terminal 100 and the receiving terminal 102 may perform communication using Wi-Fi. As another example, the user terminal 100 and the receiving terminal 102 may perform communication using a short-range communication scheme such as Bluetooth and Near Field Communication (NFC). As another example, the user terminal 100 and the receiving terminal 102 may communicate by using a wireless HDMI method. If at least one of the user terminal 100 and the receiving terminal 102 does not have a built-in communication module, communication may be performed using an external device that can interoperate with the user terminal 100 or the receiving terminal 102. Will be apparent to those skilled in the art.

또한, 사용자 단말기(100)와 수신 단말기(102)는 서버와 같이 통신 장치를 경유하여 통신을 수행할 수도 있을 것이다. In addition, the user terminal 100 and the receiving terminal 102 may communicate with each other via a communication device such as a server.

일차적으로, 본 발명의 실시예에 따르면, 사용자 단말기(100)의 디스플레이부에 표시되는 이미지가 수신 단말기(102)의 디스플레이부에 공유된다. 이를 위해, 사용자 단말기(100)는 통신 모듈을 이용하여 수신 단말기(102)에 사용자 단말기(100) 디스플레이부에 표시된 이미지 정보를 전송한다. 수신 단말기(102)의 통신 모듈은 사용자 단말기(100)로부터 전송되는 이미지 정보를 이용하여 수신 단말기의 디스플레이부에 사용자 단말기(100)와 동일한 이미지를 디스플레이한다. 이러한 일차적 기능을 통해 사용자는 사용자 단말기(100)의 디스플레이부가 아닌 다른 장치의 디스플레이부를 통해 사용자 단말기(100)에서 제공하는 이미지를 시청하는 것이 가능하다. First, according to an embodiment of the present invention, an image displayed on the display unit of the user terminal 100 is shared to the display unit of the receiving terminal 102. To this end, the user terminal 100 transmits the image information displayed on the display unit of the user terminal 100 to the receiving terminal 102 using the communication module. The communication module of the receiving terminal 102 displays the same image as the user terminal 100 on the display unit of the receiving terminal using the image information transmitted from the user terminal 100. Through this primary function, the user may view an image provided by the user terminal 100 through a display unit of another device other than the display unit of the user terminal 100.

예를 들어, 사용자 단말기(100)에서 동영상이 재생되고 있는 경우, 해당 동영상에 대한 정보가 수신 단말기(102)에 전송되어 수신 단말기(102)의 디스플레이부를 통해 해당 동영상을 시청하는 것이 가능하다. 사용자가 사용자 단말기(100)의 디스플레이부에 비해 큰 화면에서 동영상을 시청하고자 하는 경우 TV와 같은 장치를 수신 단말기(102)로 활용하여 TV를 통해 동영상을 시청하는 것이 가능하다. For example, when a video is being played in the user terminal 100, information about the video may be transmitted to the receiving terminal 102 to watch the video through the display unit of the receiving terminal 102. When a user wants to watch a video on a larger screen than the display unit of the user terminal 100, it is possible to use a device such as a TV as the receiving terminal 102 to watch the video through the TV.

이차적으로, 본 발명의 실시예에 따르면, 사용자 단말기(100)의 디스플레이부에 표시된 이미지뿐만 아니라 사용자 단말기(100)의 디스플레이부에 근접하거나 디스플레이부를 터치하는 터치 수단의 위치 정보가 사용자 단말기(100)와 수신 단말기(102) 사이에서 공유된다. 사용자 단말기(100)의 디스플레이부에 터치 수단을 근접시키거나 터치 동작을 수행할 때 터치 수단이 어떠한 영역에 위치하는지에 대한 정보가 사용자 단말기(100)와 수신 단말기(102) 사이에서 공유되는 것이다. 수신 단말기(102)는 공유된 터치 수단의 위치 정보를 이용하여 터치 수단의 위치에 상응하는 지점에 이미지(이하에서는, "위치 이미지"라 함)를 표시한다. 여기서, 터치 수단은 터치 펜, 손가락과 같이 터치 동작을 통해 단말기의 제어가 가능한 어떠한 종류의 수단도 포함할 수 있을 것이다. Secondly, according to an embodiment of the present invention, not only the image displayed on the display unit of the user terminal 100, but also the position information of the touch means that is close to or touches the display unit of the user terminal 100 may be displayed in the user terminal 100. And between the receiving terminal 102. When the touch means is approached to the display unit of the user terminal 100 or a touch operation is performed, information on which area the touch means is located is shared between the user terminal 100 and the receiving terminal 102. The receiving terminal 102 displays an image (hereinafter referred to as "position image") at a point corresponding to the position of the touch means using the location information of the shared touch means. Here, the touch means may include any kind of means capable of controlling the terminal through a touch operation such as a touch pen and a finger.

위치 이미지는 화살표의 마우스 포인터 형태, 원형의 음영 이미지 형태 등 다양한 형태를 가질 수 있으며, 이하에서는 위치 이미지에 관하여 상세히 설명한다. The location image may have various shapes such as a mouse pointer shape of an arrow and a shape of a circular shaded image. Hereinafter, the location image will be described in detail.

도 4는 본 발명의 일 실시예에 따른 터치 수단의 위치 이미지의 일례를 도시한 도면이다. 4 is a view showing an example of the position image of the touch means according to an embodiment of the present invention.

도 4를 참조하면, 사용자 단말기(100)의 디스플레이부에 근접 또는 터치된 터치 수단의 위치에 상응하는 지점에 원형의 음영 형태의 위치 이미지(400)가 표시되어 있다. Referring to FIG. 4, a circular shaded position image 400 is displayed at a point corresponding to the position of the touch means that is approached or touched on the display unit of the user terminal 100.

터치 수단의 위치 정보를 공유하는 기능은 사용자가 사용자 단말기(100)를 보지 않고 수신 단말기(102)를 보면서 사용자 단말기(100)를 조작하는 것을 가능하게 한다. 예를 들어, 사용자가 웹 브라우저를 이용하여 웹서핑을 할 경우, 수신 단말기(102)만을 보면서 터치 수단의 위치를 확인할 수 있으며, 위치 이미지를 이용하여 수신 단말기(102)를 보면서 웹문서로부터 원하는 항목을 선택할 수 있다. The function of sharing the location information of the touch means enables the user to operate the user terminal 100 while looking at the receiving terminal 102 without looking at the user terminal 100. For example, when a user surfs the web using a web browser, the user can check the position of the touch means while only looking at the receiving terminal 102, and a desired item from the web document while viewing the receiving terminal 102 using the location image. Can be selected.

웹문서로부터 특정 항목을 선택하는 조작뿐만 아니라 위치 이미지를 이용하여 다양한 조작이 가능하다. Various operations can be performed using the location image as well as the operation of selecting a specific item from the web document.

또 다른 예로 위치 이미지를 이용하여 수신 단말기(102)를 보면서 사용자 단말기(100)에서 실행되는 게임을 조작하는 것 역시 가능하다. 도 4에는 잘 알려진 앵그리 버드 게임의 화면이 표시되어 있으며, 사용자는 위치 이미지를 이용하여 게임의 특정 메뉴를 선택하거나 캐릭터를 조작하는 것이 가능하다. As another example, it is also possible to manipulate a game executed in the user terminal 100 while looking at the receiving terminal 102 using the location image. 4 is a screen of a well-known Angry Bird game is displayed, the user can select a specific menu of the game or manipulate the character using the location image.

사용자 단말기(100) 디스플레이부에 표시된 이미지 및 터치 수단의 위치 이미지가 수신 단말기(100)에 표시되는 본 발명의 기능은 사용자가 사용자 단말기(100)의 디스플레이부가 아닌 다른 단말기의 디스플레이부(100)를 이용하고자 할 때 유용하게 활용될 수 있을 것이다. The function of the present invention in which the image displayed on the display unit of the user terminal 100 and the position image of the touch means are displayed on the receiving terminal 100 is performed by the user. It can be useful when you want to use it.

사용자가 보다 큰 화면에서 게임을 플레이하고자 할 때 TV 또는 모니터와 같이 비교적 큰 사이즈의 디스플레이부를 갖춘 장치를 수신 단말기로 설정하여 TV 또는 모니터의 화면을 이용하여 게임 플레이가 가능한 것이다. 게임 이외에도 다양한 용도로 본 발명에서 제공되는 기능이 활용될 수 있다는 점은 당업자에게 있어 자명할 것이다. When a user wants to play a game on a larger screen, a device having a display unit of a relatively large size, such as a TV or a monitor, is set as a receiving terminal, and game play is possible using a screen of a TV or a monitor. It will be apparent to those skilled in the art that the functions provided in the present invention may be utilized for various purposes in addition to games.

한편, 사용자 단말기(100) 디스플레이부에 근접 또는 터치된 터치 수단의 위치 정보를 나태는 위치 이미지는 수신 단말기(102)뿐만 아니라 사용자 단말기(100)에도 표시될 수 있다. 특히, 사용자 디스플레이부에 근접한 터치 수단의 위치 정보를 나타내는 위치 이미지는 터치 오동작을 최소화하는데 유용하게 활용될 수 있다. Meanwhile, the location image indicating the location information of the touch means proximate or touched on the display unit of the user terminal 100 may be displayed on the user terminal 100 as well as the reception terminal 102. In particular, the location image representing the location information of the touch means close to the user display unit can be usefully used to minimize the touch malfunction.

본 발명의 일 실시예에 따르면, 터치 수단의 위치 이미지의 형태는 그 위치에 따라 변화될 수 있다. According to an embodiment of the present invention, the shape of the position image of the touch means may change according to its position.

예를 들어, 위치 이미지가 디스플레이되는 컨텐츠의 이벤트 실행 개체상에 위치할 경우 다른 형태로 표시될 수 있다. 도 5는 본 발명의 일 실시예에 따라 변화된 위치 이미지의 일례를 도시한 도면이다. For example, when the location image is located on the event execution object of the displayed content, the location image may be displayed in another form. 5 is a diagram illustrating an example of a changed position image according to an embodiment of the present invention.

도 5의 (A)를 참조하면, 위치 이미지가 이벤트 실행 개체 위에 위치하지 않을 때는 원형의 이미지(500a)로 표시되나, 도 5의 (B)를 참조하면, 위치 이미지가 게임 실행을 위한 이벤트 실행 개체인 "PLAY" 버튼 위에 위치할 때 기존의 원형 형태에서 손가락 형태 이미지(500b)로 변화된 것을 확인할 수 있다. Referring to FIG. 5A, when the location image is not positioned on the event execution object, the location image is displayed as a circular image 500a. Referring to FIG. 5B, the location image is an event execution for game execution. When positioned on the "PLAY" button that is an object, it can be seen that the finger-shaped image 500b has been changed from the existing circular shape.

사용자는 위치 이미지의 변화를 통해 현재 터치하려는 지점 또는 터치된 지점이 터치를 통해 소정의 제어 명령을 실행할 수 있는 지점이라는 점을 확인하는 것이 가능하다. The user can confirm that the point to be touched or the touched point is a point at which a predetermined control command can be executed through the touch by changing the position image.

물론, 이벤트 실행개체상에 위치 이미지가 존재할 때 그 형태가 변화되는 경우 이외에도 다양한 조건에 의해 위치 이미지의 형태가 변화될 수 있다는 점은 당업자에게 있어 자명할 것이며, 변화된 위치 이미지를 통해 사용자는 부가 정보를 제공받을 수 있게 된다. Of course, it will be apparent to those skilled in the art that the shape of the location image can be changed by various conditions in addition to the case where the location image is present on the event executing object. Can be provided.

위치 이미지의 위치 뿐만 아니라 터치 수단의 움직임에 따라 위치 이미지의 형태가 변화될 수도 있을 것이다. 터치 수단의 위치가 위치 이미지로 사용자 단말기(100) 또는 수신 단말기(102)의 디스플레이부에 표시된 후 사용자가 근접 또는 터치 상태를 유지하면서 터치 수단의 위치를 변경시킬 때 위치 이미지는 음영 이미지에서 손가락 이미지로 변화되는 것과 같이 변화가 이루어질 수 있다. In addition to the position of the position image, the shape of the position image may be changed according to the movement of the touch means. When the position of the touch means is displayed as a position image on the display of the user terminal 100 or the receiving terminal 102 and the user changes the position of the touch means while maintaining the proximity or touch state, the position image is a finger image in the shaded image. Changes can be made as such.

위치 이미지의 형태 변화를 위한 이미지 처리는 사용자 단말기(100)에서 이루어지는 것이 바람직하다. 그러나, 필요에 따라 수신 단말기(102)에서 위치 이미지 형태 변화를 위한 이미지 처리가 이루어질 수도 있을 것이다. Image processing for changing the shape of the position image is preferably performed in the user terminal 100. However, if necessary, image processing for changing the shape of the position image may be performed at the receiving terminal 102.

사용자 단말기(100)에서 위치 이미지를 표시할지 여부는 별도의 설정부를 통해 사용자에 의해 선택될 수 있다. 사용자 단말기(100)는 사용자 단말기에 위치 이미지를 표시할지 여부에 대한 인터페이스를 제공하며, 해당 인터페이스를 통해 사용자 단말기에서의 위치 이미지 표시에 대한 온/오프 설정이 가능한 것이다. Whether to display the location image in the user terminal 100 may be selected by the user through a separate setting unit. The user terminal 100 provides an interface for displaying a location image on the user terminal, and the on / off setting of the location image display on the user terminal is possible through the corresponding interface.

위에서는 예시를 위해 본 발명의 위치 이미지에 대해 설명하였으나, 위치 이미지의 표시 방식, 위치 이미지의 변화 형태 등을 당업자가 다양하게 변경 가능하다는 점은 자명하며, 앞서 설명한 예시가 본 발명의 범주를 한정하는 용도로 활용될 수는 없을 것이다. Although the position image of the present invention has been described above for illustrative purposes, it is obvious that a person skilled in the art can variously change the display method of the position image, a change form of the position image, etc., and the above-described examples limit the scope of the present invention. It may not be used for the purpose.

이하에서는 이미지 공유를 위해 본 발명의 사용자 단말기(100)와 수신 단말기(102) 사이에서 이루어지는 개략적인 동작에 대해 살펴보기로 한다. Hereinafter, a schematic operation performed between the user terminal 100 and the receiving terminal 102 of the present invention for sharing an image will be described.

도 2는 본 발명의 일 실시예에 따른 이미지 공유를 위한 사용자 단말기와 수신 단말기의 동작을 도시한 순서도이다. 2 is a flowchart illustrating operations of a user terminal and a receiving terminal for image sharing according to an embodiment of the present invention.

도 2를 참조하면, 우선 사용자 단말기(100)는 수신 단말기(102)에 이미지 공유를 요청한다(단계 200). Referring to FIG. 2, first, the user terminal 100 requests an image sharing from the receiving terminal 102 (step 200).

사용자 단말기(100)로부터 이미지 공유를 요청받은 수신 단말기(102)는 사용자 단말기(100)와 통신 가능한 상태로 모드를 변경하고(단계 202), 이미지 공유를 위한 모드 변경이 완료되었다는 정보를 사용자 단말기(100)에 송신한다(단계 204). The receiving terminal 102, which has been requested to share an image from the user terminal 100, changes the mode to a state in which communication with the user terminal 100 is possible (step 202), and informs the user terminal that the mode change for image sharing has been completed. 100) (step 204).

사용자 단말기(100)는 디스플레이부에 표시된 이미지 정보를 수신 단말기(102)에 전송하며(단계 206), 수신 단말기(102)는 수신된 이미지 정보에 상응하는 이미지를 자신의 디스플레이부에 디스플레이한다(단계 208). The user terminal 100 transmits the image information displayed on the display unit to the receiving terminal 102 (step 206), and the receiving terminal 102 displays an image corresponding to the received image information on its display unit (step 208).

사용자 단말기(100)는 터치 수단이 근접하는지 여부를 감지한다(단계 210). 터치 수단이 근접할 경우 근접한 터치 수단의 위치 정보를 수신 단말기(102)에 전송한다(단계 212). 여기서, 근접한 터치 수단의 위치 정보는 다양한 방식으로 수신 단말기에 전송될 수 있다. The user terminal 100 detects whether the touch means is close (step 210). If the touch means is close, the position information of the adjacent touch means is transmitted to the receiving terminal 102 (step 212). Here, the location information of the adjacent touch means may be transmitted to the receiving terminal in various ways.

본 발명의 일 실시예에 따르면, 사용자 단말기(100)에 위치 이미지가 표시될 경우, 위치 이미지가 반영된 사용자 단말기(100)의 디스플레이부 표시 이미지 자체가 터치 수단의 위치 정보가 될 수 있다. 위치 이미지가 사용자 단말기(100)에 표시되므로 디스플레이부의 표시 이미지 자체를 전송함으로써 터치 수단의 위치 정보를 제공하는 것이 가능하다. According to an embodiment of the present invention, when the location image is displayed on the user terminal 100, the display image itself of the user terminal 100 reflecting the location image may be location information of the touch means. Since the location image is displayed on the user terminal 100, it is possible to provide the location information of the touch means by transmitting the display image itself of the display unit.

사용자 단말기(100)에 표시되는 위치 이미지는 손가락과 같이 정교하지 못한 터치 수단이 이용될 때 터치 오류를 미리 방지하는데 유용하게 활용될 수 있다. The location image displayed on the user terminal 100 may be usefully used to prevent a touch error in advance when an elaborate touch means such as a finger is used.

본 발명의 다른 실시예에 따르면, 터치 수단의 위치 정보는 위치 이미지의 좌표 정보 및 형태 정보일 수 있다. 사용자 단말기(100)는 위치 이미지의 좌표 정보와 형태 정보를 출력하여 이를 수신 단말기(102)에 제공할 수 있다. 여기서, 위치 이미지의 좌표 정보는 사용자 단말기(100) 디스플레이부의 표시 이미지에서 위치 이미지가 표시되어야 할 지점의 픽셀 좌표일 수 있다. 물론, 픽셀 좌표 이외에도 위치 이미지 좌표 정보는 다양한 방식으로 제공될 수 있을 것이다. According to another embodiment of the present invention, the location information of the touch means may be coordinate information and shape information of the location image. The user terminal 100 may output coordinate information and shape information of the location image and provide the same to the receiving terminal 102. Here, the coordinate information of the location image may be pixel coordinates of a point where the location image is to be displayed in the display image of the display of the user terminal 100. Of course, in addition to the pixel coordinates, the position image coordinate information may be provided in various ways.

본 발명의 또 다른 실시예에 따르면, 사용자 단말기(100)에 별도로 위치 이미지가 표시되지 않는 경우, 현재 디스플레이부 표시 이미지에 위치 이미지를 합성하여 위치 이미지가 반영된 이미지를 별도로 생성하며, 이와 같이 생성되는 합성 이미지가 터치 수단의 위치 정보에 해당될 수 있을 것이다. According to another embodiment of the present invention, when the location image is not separately displayed on the user terminal 100, the location image is synthesized by synthesizing the location image on the display image of the current display unit and separately generated. The composite image may correspond to the location information of the touch means.

터치 수단의 위치 정보를 사용자 단말기(100)로부터 수신하면, 수신 단말기는 터치 수단의 위치에 상응하는 위치 이미지를 표시한다(단계 214). 위치 이미지가 반영된 사용자 단말기 디스플레이부의 표시 이미지 자체 또는 위치 이미지가 합성된 이미지에 대한 정보를 사용자 단말기로부터 수신하는 경우, 수신 단말기(102)는 해당 이미지를 디스플레이함으로써 위치 이미지를 표시할 수 있을 것이다. 위치 이미지의 좌표 및 형태 정보를 별도로 사용자 단말기(100)로부터 제공받는 경우, 수신 단말기(102)는 해당 좌표 위치에 위치 이미지를 생성하여 표시한다. When receiving the position information of the touch means from the user terminal 100, the receiving terminal displays a position image corresponding to the position of the touch means (step 214). When the display image itself or the display image of the user terminal display unit reflecting the location image is received from the user terminal, the receiving terminal 102 may display the location image by displaying the corresponding image. When the coordinate and shape information of the position image is separately provided from the user terminal 100, the receiving terminal 102 generates and displays the position image at the corresponding coordinate position.

도 3은 본 발명의 다른 실시예에 따른 이미지 공유를 위한 사용자 단말기와 수신 단말기의 동작을 도시한 순서도이다. 3 is a flowchart illustrating operations of a user terminal and a receiving terminal for image sharing according to another embodiment of the present invention.

도 3에 도시된 실시예는 도 2의 실시예와는 달리 터치 수단이 사용자 단말기(100)의 디스플레이부를 직접 터치할 경우 위치 이미지를 표시하는 실시예에 관한 것이다. Unlike the embodiment of FIG. 2, the embodiment illustrated in FIG. 3 relates to an embodiment of displaying a location image when the touch unit directly touches the display unit of the user terminal 100.

도 3에서, 터치 수단을 감지하는 동작 이외에는 도 2와 동일하므로 감지 동작에 관련된 부분만을 설명한다. In FIG. 3, only the parts related to the sensing operation will be described except for the operation of sensing the touch means.

사용자 단말기(100)는 터치 수단이 사용자 단말기(100)의 디스플레이부를 터치하는지 여부를 감지한다(단계 310). 터치 수단의 터치가 감지되면, 터치 수단의 터치 레벨을 감지한다(단계 312). 여기서 터치 레벨은 터치 수단의 터치 압력 및 터치 면적 중 적어도 하나를 의미한다. The user terminal 100 detects whether the touch means touches the display unit of the user terminal 100 (step 310). When the touch of the touch means is detected, the touch level of the touch means is detected (step 312). Here, the touch level means at least one of the touch pressure and the touch area of the touch means.

터치 수단의 터치 레벨이 감지되면, 감지된 터치 레벨에 상응하여 표시될 위치 이미지를 결정한다(단계 314). When the touch level of the touch means is detected, a position image to be displayed is determined according to the detected touch level (step 314).

본 발명의 일 실시예에 따르면, 감지된 터치 압력 및 터치 면적 중 적어도 하나가 미리 설정된 제1 레벨 등급에 속할 경우 터치가 감지되었음에도 불구하고 위치 이미지를 표시하지 않으며, 감지된 터치 압력 및 터치 면적 중 적어도 하나가 미리 설정된 제2 레벨 등급에 속할 경우 터치 지점에 상응하는 위치 이미지를 표시한다. According to an embodiment of the present invention, if at least one of the detected touch pressure and the touch area belongs to the preset first level grade, the touch screen does not display the location image even though the touch is detected, and among the detected touch pressure and the touch area. If at least one belongs to the second level level, the location image corresponding to the touch point is displayed.

예를 들어, 터치 압력 및 터치 면적 중 적어도 하나가 미리 설정된 임계치 이상일 경우 터치가 감지되었음에도 불구하고 위치 이미지를 표시하지 않으며, 미리 설정된 임계치 이하일 경우 터치 지점에 상응하는 위치 이미지가 표시되도록 동작하는 것이다. For example, when at least one of the touch pressure and the touch area is greater than or equal to the preset threshold, the touch panel does not display the location image even though the touch is detected. If the touch pressure or the touch area is less than the preset threshold, the location image corresponding to the touch point is displayed.

물론, 위치 이미지 변화를 위한 터치 레벨 등급은 더 세분화될 수도 있을 것이며, 각 터치 레벨 등급에 따라 위치 이미지를 변화시킬 수 있을 것이다. 일례로, 터치 레벨의 감도에 비례하거나 반비례하여 위치 이미지의 사이즈가 조절되도록 동작할 수도 있을 것이다. Of course, the touch level grade for changing the position image may be further subdivided, and the position image may be changed according to each touch level grade. For example, the size of the position image may be adjusted in proportion to or inversely proportional to the sensitivity of the touch level.

도 6은 본 발명의 일 실시예에 따른 터치 레벨에 따라 위치 이미지가 변화되는 일례를 도시한 도면이다. 6 is a diagram illustrating an example in which a location image is changed according to a touch level according to an embodiment of the present invention.

도 6을 참조하면, (a)는 터치 레벨(터치 압력 또는 터치 면적)이 제1 레벨 등급일 경우 수신 단말기에 표시되는 화면이며, (b)는 터치 레벨이 제1 레벨 등급보다 높은 제2 레벨 등급일 경우 수신 단말기에 표시되는 화면이다. 물론 사용자 단말기에도 사용자의 선택에 따라 동일한 화면이 표시될 수 있다는 점은 자명하다. Referring to FIG. 6, (a) is a screen displayed on the receiving terminal when the touch level (touch pressure or touch area) is a first level grade, and (b) is a second level where the touch level is higher than the first level grade. If the rating is the screen displayed on the receiving terminal. It is obvious that the same screen may be displayed on the user terminal according to the user's selection.

사용자가 비교적 약한 터치 압력(제1 레벨 등급에 해당)으로 사용자 단말기의 디스플레이부를 터치할 때 (a)와 같이 위치 이미지(600)가 표시될 수 있다. When the user touches the display unit of the user terminal with a relatively weak touch pressure (corresponding to the first level class), the location image 600 may be displayed as shown in (a).

그러나, 사용자가 터치 압력을 증가시켜 제2 레벨 등급에 해당되는 압력으로 사용자 단말기의 디스플레이부를 터치할 때 (b)와 같이 위치 이미지가 표시되지 않도록 동작할 수 있다. However, when the user touches the display of the user terminal at a pressure corresponding to the second level grade by increasing the touch pressure, the position image may not be displayed as shown in (b).

위에서 설명한 터치 레벨에 따른 위치 이미지의 변화는 예시를 위한 것이며, 예시된 실시예 이외에도 다양한 변형이 가능하다는 점은 당업자에게 있어 자명할 것이다. The change in the position image according to the touch level described above is for illustration, and it will be apparent to those skilled in the art that various modifications are possible in addition to the illustrated embodiment.

이하에서는 터치 수단의 근접 또는 터치 동작을 감지하는 방법에 대해 살펴보기로 한다. Hereinafter, a method of detecting a proximity or a touch operation of the touch means will be described.

본 발명의 일 실시예에 따르면, 정전 용량을 이용하여 터치 수단의 근접을 감지할 수 있다. 이 경우, 정전 용량 방식의 터치 패널이 사용되며, 사용자가 손가락 또는 터치 펜과 같은 터치 수단을 터치 패널로 근접시킬 경우 정전 용량의 변화를 감지하여 근접한 터치 수단의 위치를 감지하는 것이 가능하다. According to an embodiment of the present invention, the proximity of the touch means may be detected using the capacitance. In this case, a capacitive touch panel is used, and when a user moves a touch means such as a finger or a touch pen to the touch panel, it is possible to detect a position of the touch means by detecting a change in capacitance.

본 발명의 다른 실시예에 따르면, 초음파 방식이 사용될 수도 있다. 예를 들어, 터치 펜의 터치부로부터 발신된 적외선 및 초음파를 하나의 적외선 센서와 2개의 초음파 센서를 구비하는 리시버가 수신하여 터치 펜의 움직임 및 위치 정보를 감지하는 것이 가능하다. According to another embodiment of the present invention, an ultrasonic method may be used. For example, a receiver including one infrared sensor and two ultrasonic sensors may receive infrared and ultrasonic waves transmitted from the touch unit of the touch pen to detect movement and position information of the touch pen.

리시버가 터치 펜의 위치를 검출하는 방법을 살펴보면, 3개의 센서들은 각기 적외선의 전송 시간 및 초음파의 전송 시간을 측정하고, 전송 시간들을 거리로 환산하고, 환산된 거리들을 삼각 측량 등의 방법을 통해 터치 펜의 위치를 검출할 수 있다. Looking at how the receiver detects the position of the touch pen, each of the three sensors measures the transmission time of the infrared ray and the transmission time of the ultrasonic wave, converts the transmission times into distances, and converts the converted distances through triangulation. The position of the touch pen can be detected.

본 발명의 또 다른 실시예에 따르면, 전자기 유도 현상을 이용하여 터치 펜의 근접 또는 터치 펜의 터치 동작을 감지할 수 있다. 금속 코일을 구비한 터치 펜이 터치 패널로 근접하게 되면, 터치 팬과 터치 패널 사이에 전자기 유도 현상이 발생하며, 이러한 전자기 유도 현상에 의한 전자기장의 변형을 통해 터치 펜의 근접 여부를 감지하는 것이 가능하다. According to another embodiment of the present invention, the proximity of the touch pen or the touch operation of the touch pen may be sensed using the electromagnetic induction phenomenon. When the touch pen with the metal coil is brought close to the touch panel, an electromagnetic induction phenomenon occurs between the touch fan and the touch panel, and it is possible to detect the proximity of the touch pen through the deformation of the electromagnetic field caused by the electromagnetic induction phenomenon. Do.

물론 앞서 설명한 방법 이외에도 저항막 방식, 광을 이용항 방식등 다양한 감지 방식이 이용될 수 있다는 점은 당업자에게 있어 자명할 것이다.Of course, it will be apparent to those skilled in the art that various sensing methods, such as a resistive film method and a light using port method, may be used in addition to the above-described method.

이하에서는 사용자 단말기(100)와 수신 단말기(102)에 이미지 정보를 송수신하는 방법에 대해 상세히 살펴본다. Hereinafter, a method of transmitting and receiving image information between the user terminal 100 and the receiving terminal 102 will be described in detail.

도 7은 본 발명의 일 실시예에 따른 사용자 단말기(100)와 수신 단말기(102) 사이에 이미지 정보를 송수신하는 과정을 도시한 순서도이다. 7 is a flowchart illustrating a process of transmitting and receiving image information between the user terminal 100 and the receiving terminal 102 according to an embodiment of the present invention.

도 7을 참조하면, 사용자 단말기(100)는 디스플레이부에 표시된 이미지 정보를 수신 단말기(102)에 전송한다(단계 700). Referring to FIG. 7, the user terminal 100 transmits image information displayed on the display unit to the receiving terminal 102 (step 700).

수신 단말기(102)는 사용자 단말기(100)로부터 수신한 이미지 정보를 이용하여 디스플레이부에 이미지를 디스플레이하나(단계 702). 일례로, 사용자 단말기(100)는 HDMI(High Definition Multimedia Interface) 방식에 의해 이미지 정보를 송수신할 수 있다. HDMI 이외에도 다양한 멀티미디어 데이터 송수신 방법이 이용될 수 있을 것이다. The receiving terminal 102 displays an image on the display unit using the image information received from the user terminal 100 (step 702). For example, the user terminal 100 may transmit and receive image information by using a high definition multimedia interface (HDMI) method. In addition to HDMI, various multimedia data transmission / reception methods may be used.

사용자가 사용자 단말기(100) 디스플레이부에 터치 수단을 근접시키거나 터치할 경우 사용자 단말기(100)는 터치 수단의 위치에 상응하여 위치 이미지를 표시한다(단계 704). When the user approaches or touches the touch means on the display unit of the user terminal 100, the user terminal 100 displays the position image corresponding to the position of the touch means (step 704).

위치 이미지는 오버레이 방식으로 표시될 수도 있으며, 디스플레이부에 표시된 이미지와 미리 설정된 형태의 위치 이미지를 합성하여 표시될 수도 있다.The location image may be displayed in an overlay manner, or may be displayed by combining the image displayed on the display unit with a location image of a preset form.

사용자 단말기(100)는 위치 이미지가 표시된 현재 디스플레이 이미지에 대한 정보를 수신 단말기(102)에 전송한다(단계 706). 앞서 설명한 바와 같이, 위치 이미지는 오버레이 방식으로 사용자 단말기(100) 디스플레이부에 표시될 수 있으며, 이미지 합성에 의해 사용자 단말기(100) 디스플레이부에 표시될 수도 있을 것이다. 사용자 단말기(100)는 미리 설정된 방식으로 표시된 현재 디스플레이 이미지를 인코딩하여 수신 단말기(102)에 전송한다. The user terminal 100 transmits the information about the current display image in which the location image is displayed to the receiving terminal 102 (step 706). As described above, the location image may be displayed on the display unit of the user terminal 100 in an overlay manner, or may be displayed on the display unit of the user terminal 100 by image synthesis. The user terminal 100 encodes the current display image displayed in a preset manner and transmits the current display image to the receiving terminal 102.

수신 단말기(102)는 사용자 단말기(100)로부터 수신한 사용자 단말기(100)의 현재 디스플레이 이미지 정보를 수신하여, 위치 이미지가 반영된 이미지를 디스플레이한다(단계 708). The receiving terminal 102 receives the current display image information of the user terminal 100 received from the user terminal 100 and displays an image in which the position image is reflected (step 708).

도 7에 도시된 실시예에 의해 이미지 정보가 송수신될 경우 사용자 단말기(100)와 수신 단말기(102)는 항상 동일한 이미지를 각각의 디스플레이에 디스플레이하게 된다. When the image information is transmitted and received according to the embodiment shown in FIG. 7, the user terminal 100 and the receiving terminal 102 always display the same image on each display.

도 8은 본 발명의 다른 실시예에 따른 사용자 단말기(100)와 수신 단말기(102) 사이에 이미지 정보를 송수신하는 과정을 도시한 순서도이다. 8 is a flowchart illustrating a process of transmitting and receiving image information between the user terminal 100 and the receiving terminal 102 according to another embodiment of the present invention.

도 8을 참조하면, 사용자 단말기(100)는 디스플레이부에 표시된 이미지 정보를 수신 단말기(102)에 전송한다(단계 800). Referring to FIG. 8, the user terminal 100 transmits image information displayed on the display unit to the receiving terminal 102 (step 800).

수신 단말기(102)는 사용자 단말기(100)로부터 수신한 이미지 정보를 이용하여 디스플레이부에 이미지를 디스플레이하나(단계 802). The receiving terminal 102 displays the image on the display unit using the image information received from the user terminal 100 (step 802).

사용자가 사용자 단말기(100) 디스플레이부에 터치 수단을 근접시키거나 터치할 경우 사용자 단말기(100)는 터치 수단의 터치 또는 근접을 감지한다(단계 804). When the user approaches or touches the touch means on the display of the user terminal 100, the user terminal 100 detects the touch or proximity of the touch means (step 804).

터치 수단의 터치 또는 근접이 감지되면, 사용자 단말기는 터치 또는 근접이 감지된 터치 수단의 위치 정보를 산출한다(단계 806). 터치 수단의 위치 정보는 다양한 방식으로 산출될 수 있다. If the touch or proximity of the touch means is detected, the user terminal calculates the position information of the touch means from which the touch or proximity is detected (step 806). The location information of the touch means can be calculated in various ways.

일례로, 터치 수단의 위치 정보는 사용자 단말기(100)의 디스플레이부를 전체 좌표로 설정할 때 터치 수단의 상대적 위치를 터치 수단의 좌표로 설정할 수 있을 것이다. For example, the position information of the touch means may set the relative position of the touch means as the coordinates of the touch means when the display unit of the user terminal 100 is set to all coordinates.

또 다른 예로, 터치 수단의 좌표를 사용자 단말기 디스플레이부에 현재 표시된 이미지의 픽셀 좌표를 이용하여 설정할 수도 있을 것이다. 예를 들어, 터치 수단의 위치가 현재 표시된 이미지의 특정 픽셀과 대응될 때, 해당 픽셀의 좌표를 터치 수단의 좌표로 설정할 수도 있을 것이다. As another example, the coordinates of the touch means may be set using pixel coordinates of an image currently displayed on the user terminal display. For example, when the position of the touch means corresponds to a specific pixel of the currently displayed image, the coordinate of the pixel may be set as the coordinate of the touch means.

물론, 터치 수단의 좌표는 위에서 설명한 방식 이외에도 다양한 방식으로 산출할 수 있다는 점은 당업자에게 있어 자명할 것이다. Of course, it will be apparent to those skilled in the art that the coordinates of the touch means can be calculated in various ways in addition to those described above.

터치 수단의 위치 정보가 산출되면, 사용자 단말기는 터치 수단의 위치 정보를 수신 단말기(102)에 전송한다(단계 808). When the position information of the touch means is calculated, the user terminal transmits the position information of the touch means to the receiving terminal 102 (step 808).

일례로, 터치 수단의 위치 정보는 사용자 단말기에 표시된 이미지 정보를 전송할 때 해당 이미지 정보의 헤더 정보로 제공될 수 있다. For example, the location information of the touch means may be provided as header information of the corresponding image information when the image information displayed on the user terminal is transmitted.

또 다른 예로, 터치 수단의 위치 정보는 별도의 데이터 채널을 통해 수신 단말기(102)로 전송될 수도 있을 것이다. 데이터 채널을 통해 터치 수단의 위치 정보를 전송할 경우, 연결 설정 시 사용자 단말기(100)와 수신 단말기(102)는 이미지 채널(이미지 데이터를 전송하는 채널)과 제어 채널(위치 정보를 전송하는 채널)의 두 개의 채널을 설정(establish)을 설정하여야 한다. As another example, the location information of the touch means may be transmitted to the receiving terminal 102 through a separate data channel. When transmitting the location information of the touch means through the data channel, the user terminal 100 and the receiving terminal 102 is connected to the image channel (channel for transmitting the image data) and the control channel (channel for transmitting the position information) when establishing a connection. Two channels must be set up.

사용자 단말기(100)로부터 터치 수단의 위치 정보를 수신한 수신 단말기(102)는 터치 수단의 위치 정보를 이용하여 위치 이미지를 수신 단말기(102) 디스플레이부에 표시한다(단계 810). Receiving terminal 102 receiving the position information of the touch means from the user terminal 100 displays the position image on the display of the receiving terminal 102 using the position information of the touch means (step 810).

도 8에는 도시되어 있지 않으나, 수신 단말기(102)는 위치 이미지의 위치 정보뿐만 아니라 위치 이미지의 형태 정보를 함께 수신할 수도 있다. 앞서 설명한 바와 같이, 위치 이미지는 그 위치에 따라서 사이즈 또는 형태가 변경될 수 있으며, 이러한 위치 이미지의 형태 정보 역시 사용자 단말기를 통해 제공될 수 있을 것이다. 전술한 예와 같이, 위치 이미지가 특정 이벤트 실행 개체 위에 위치하게 될 경우 일반적인 위치 이미지와 다른 형태의 위치 이미지가 제공될 수 있으며,이러한 변화된 형태 정보 역시 터치 수단의 위치 정보와 함께 제공될 수 있는 것이다. Although not shown in FIG. 8, the reception terminal 102 may also receive the shape information of the location image as well as the location information of the location image. As described above, the location image may be changed in size or shape according to its location, and the shape information of the location image may also be provided through the user terminal. As described above, when the location image is positioned on a specific event execution object, a location image having a different form from that of the general location image may be provided, and the changed shape information may also be provided together with the location information of the touch means. .

도 9는 본 발명의 또 다른 실시예에 따른 사용자 단말기(100)와 수신 단말기(102) 사이에 이미지 정보를 송수신하는 과정을 도시한 순서도이다. 9 is a flowchart illustrating a process of transmitting and receiving image information between the user terminal 100 and the receiving terminal 102 according to another embodiment of the present invention.

도 9를 참조하면, 사용자 단말기(100)는 디스플레이부에 표시된 이미지 정보를 수신 단말기(102)에 전송한다(단계 900). Referring to FIG. 9, the user terminal 100 transmits image information displayed on the display unit to the receiving terminal 102 (operation 900).

수신 단말기(102)는 사용자 단말기(100)로부터 수신한 이미지 정보를 이용하여 디스플레이부에 이미지를 디스플레이한다(단계 902). The receiving terminal 102 displays the image on the display unit by using the image information received from the user terminal 100 (step 902).

사용자가 사용자 단말기(100) 디스플레이부에 터치 수단을 근접시키거나 터치할 경우 사용자 단말기(100)는 터치 수단의 근접 또는 터치를 감지한다(단계 904). When the user approaches or touches the touch means on the display unit of the user terminal 100, the user terminal 100 detects the proximity or touch of the touch means (step 904).

터치 수단의 터치 또는 근접이 감지되면, 터치 수단의 위치를 확인하고, 확인된 터치 수단에 위치 이미지가 반영된 이미지 정보를 생성한다(단계 906). 생성된 이미지 정보는 수신 단말기와 미리 약속된 방식으로 인코딩된 이미지 정보인 것이 바람직하다. When a touch or proximity of the touch means is detected, the position of the touch means is checked, and image information reflecting the position image is generated in the identified touch means (step 906). The generated image information is preferably image information encoded in a manner previously promised with the receiving terminal.

위치 이미지가 반영되도록 생성된 이미지 정보는 사용자 단말기에 디스플레이될 수도 있으며, 사용자 단말기 디스플레이에는 반영되지 않을 수도 있을 것이다. The image information generated to reflect the location image may be displayed on the user terminal, and may not be reflected on the user terminal display.

사용자 단말기(100)는 위치 이미지가 반영되도록 생성된 이미지 정보를 수신 단말기(102)에 전송한다(단계 908).The user terminal 100 transmits the image information generated to reflect the location image to the receiving terminal 102 (step 908).

수신 단말기(102)는 수신된 이미지 정보를 이용하여 위치 이미지가 반영된 이미지를 디스플레이에 디스플레이한다(단계 910). The receiving terminal 102 displays the image on which the position image is reflected on the display using the received image information (step 910).

이상에서는 위치 이미지에 대한 정보를 수신 단말기에 제공하는 방법에 대해 살펴보았으며, 위에서 설명한 실시예는 예시를 위한 것이고 예시된 실시예 이외에도 다양한 통신 방식을 이용하여 위치 이미지에 대한 정보를 제공할 수 있음은 당업자에게 있어 자명할 것이다. In the above, the method for providing the information on the location image to the receiving terminal has been described, and the above-described embodiment is for illustrative purposes, and in addition to the illustrated embodiment, the information on the location image may be provided using various communication methods. Will be apparent to those skilled in the art.

이하에서는 본 발명이 적용되는 사용자 단말기의 상세한 모듈 구성에 대해 설명한다. 본 발명이 적용되는 사용자 단말기는 소정의 어플리케이션을 설치한 후 이하에서 설명하는 바와 같이 동작할 수도 있으며, 이하에서 설명하는 동작을 실행할 수 있는 펌웨어가 단말기 제조 시에 설치될 수도 있을 것이다. Hereinafter, a detailed module configuration of a user terminal to which the present invention is applied will be described. The user terminal to which the present invention is applied may operate as described below after installing a predetermined application, and firmware capable of performing the operation described below may be installed at the time of manufacturing the terminal.

도 10은 본 발명의 일 실시예에 따른 사용자 단말기의 모듈 구성을 도시한 블록도이다. 10 is a block diagram illustrating a module configuration of a user terminal according to an embodiment of the present invention.

도 10을 참조하면, 본 발명의 일 실시예에 사용자 단말기는 디스플레이부(1000), 이미지 정보 생성부(1002), 이미지 정보 송신부(1004), 감지부(1006), 위치 이미지 생성부(1008), 설정부(1010) 및 제어부(1012)를 포함할 수 있다. Referring to FIG. 10, in an exemplary embodiment, the user terminal may include a display unit 1000, an image information generator 1002, an image information transmitter 1004, a detector 1006, and a position image generator 1008. It may include a setting unit 1010 and a control unit 1012.

디스플레이부(1000)는 사용자 단말기(100)의 동작에 따른 이미지를 디스플레이한다. 디스플레이부(1000)는 LCD 또는 LED와 같이 다양한 방식으로 이미지를 디스플레이하며, 터치 인터페이스를 제공한다. 디스플레이부는 사용자 인터페이스 화면, 어플리케이션 실행 화면 등 단말기 동작에 따른 다양한 화면을 디스플레이시킨다. The display unit 1000 displays an image according to the operation of the user terminal 100. The display unit 1000 displays an image in various ways, such as an LCD or an LED, and provides a touch interface. The display unit displays various screens according to the operation of the terminal, such as a user interface screen and an application execution screen.

이미지 정보 생성부(1002)는 디스플레이부(1000)에 디스플레이되는 이미지에 대한 정보를 생성한다. 이미지 정보 생성부(1002)는 미리 설정된 방식으로 인코딩된 이미지 정보를 생성하며, 공지된 다양한 인코딩 방식이 사용될 수 있다. The image information generator 1002 generates information about an image displayed on the display 1000. The image information generator 1002 generates image information encoded in a preset manner, and various known encoding schemes may be used.

이미지 정보 송신부(1004)는 이미지 정보 생성부(1002)에 의해 생성된 이미지 정보를 수신 단말기(102)에 전송한다. 전술한 바와 같이, Wi-Fi, 무선 HDMI 등 다양한 통신 방식에 의해 이미지 정보의 송신이 가능하다. 이미지 정보 송신부(1004)는 위치 이미지에 대한 정보의 송신 기능 역시 수행한다. The image information transmitter 1004 transmits the image information generated by the image information generator 1002 to the receiver terminal 102. As described above, image information can be transmitted by various communication methods such as Wi-Fi and wireless HDMI. The image information transmitter 1004 also performs a function of transmitting information about the position image.

감지부(1006)는손가락 또는 터치 펜 등과 같은 터치 수단을 감지하는 역할을 수행한다. 감지부(1006)는 터치 수단이 디스플레이부(1000)에 근접하는지 여부 및 디스플레이부(1000)에 터치가 이루어지는지 여부를 감지한다. The detector 1006 detects a touch means such as a finger or a touch pen. The sensing unit 1006 detects whether the touch means is close to the display unit 1000 and whether the touch is made to the display unit 1000.

본 발명의 바람직한 실시예에 따르면, 감지부(1006)는 터치 수단의 터치 상태를 감지하며, 구체적으로 터치 압력 및 터치 면적 중 적어도 하나를 감지한다. 앞서 설명한 바와 같이, 터치 압력 및 터치 면적에 대한 레벨이 미리 설정될 수 있으며, 감지부(1006)는 터치 압력 및 터치 면적 중 적어도 하나가 어떠한 레벨에 해당되는지를 감지한다. 일례로, 낮은 압력에 해당되는 제1 레벨 등급 및 높은 압력에 해당되는 제2 레벨 등급이 설정될 수 있으며, 감지부는 터치 압력이 제1 레벨 등급 및 제2 레벨 등급 중 어떠한 레벨 등급에 해당되는지를 감지할 수 있다. According to a preferred embodiment of the present invention, the sensing unit 1006 detects the touch state of the touch means, and specifically detects at least one of touch pressure and touch area. As described above, the levels for the touch pressure and the touch area may be set in advance, and the detector 1006 detects which level corresponds to at least one of the touch pressure and the touch area. For example, a first level grade corresponding to a low pressure and a second level grade corresponding to a high pressure may be set, and the sensing unit may determine which one of the first level grade and the second level grade corresponds to the touch pressure. It can be detected.

감지부(1006)에서 감지하는 터치 압력 및 터치 면적에 상응하여 사용자 단말기(100)는 터치 동작에 따른 실행 여부를 결정할 수 있다. 예를 들어, 터치 압력 및 터치 면적 중 적어도 하나가 낮은 레벨일 경우, 사용자 단말기(100)는 터치에 따른 실행을 수행하지 않고 높은 레벨일 경우 터치에 따른 실행을 수행할 수 있다. 즉, 이벤트 실행 객체에 대한 터치가 이루어지더라도 터치 압력 또는 터치 면적 중 적어도 하나가 미리 설정된 레벨 이상일 때 터치 동작이 이루어지도록 하는 것이다. The user terminal 100 may determine whether to execute the touch operation according to the touch pressure and the touch area detected by the detector 1006. For example, when at least one of the touch pressure and the touch area is at a low level, the user terminal 100 may perform the execution according to the touch at a high level without performing the execution according to the touch. That is, even if a touch is made on the event execution object, the touch operation is performed when at least one of the touch pressure or the touch area is equal to or greater than a preset level.

위치 이미지 생성부(1008)는 감지부(1006)에서 터치 수단의 근접 또는 터치가 감지될 경우 터치 수단의 위치에 상응하는 위치 이미지를 생성한다. The position image generating unit 1008 generates a position image corresponding to the position of the touch means when the sensing unit 1006 detects the proximity or the touch of the touch means.

앞서 설명한 바와 같이, 음영 이미지, 커서 포인터 이미지 등 다양한 형태로 위치 이미지가 생성될 수 있을 것이다. As described above, the position image may be generated in various forms such as a shaded image and a cursor pointer image.

본 발명의 일 실시예에 따르면, 미리 설정된 형태의 위치 이미지를 현재 표시된 이미지에 오버레이 방식으로 표시할 수도 있으며, 현재 표시된 이미지와의 합성을 통해 위치 이미지를 표시할 수도 있을 것이다. According to an embodiment of the present invention, the preset position image may be displayed on the currently displayed image in an overlay manner, or the position image may be displayed by combining with the currently displayed image.

감지부(1006)에서 감지되는 감지 레벨에 따라 위치 이미지 생성부(1008)에서 생성하는 위치 이미지가 변화될 수 있다. The position image generated by the position image generator 1008 may vary according to the sensing level detected by the detector 1006.

일례로, 터치 압력 또는 터치 면적이 낮은 레벨일 경우, 위치 이미지 생성부(1008)는 위치 이미지를 생성하여 표시하나, 터치 압력 또는 터치 면적이 높은 레벨일 경우에는 위치 이미지를 표시하지 않을 수 있다. For example, when the touch pressure or the touch area is at a low level, the location image generator 1008 generates and displays the location image, but may not display the location image when the touch pressure or the touch area is at a high level.

또 다른 예로, 터치 압력 또는 터치 면적이 낮은 레벨일 경우 위치 이미지 생성부(1008)는 작은 사이즈의 위치 이미지를 생성하나 터치 압력 또는 터치 면적이 높은 레벨일 경우 위치 이미지 생성부(1008)는 큰 사이즈의 위치 이미지를 생성할 수 있다. As another example, when the touch pressure or the touch area is at a low level, the location image generator 1008 generates a location image of a small size, but when the touch pressure or the touch area is at a high level, the location image generator 1008 is a large size. Can generate a location image of.

사용자가 터치 수단을 움직이면서 터치 상태를 지속할 경우 위치 이미지는 터치 궤적을 표시하는 이미지일 수 있으며, 이때 터치 압력 또는 터치 면적이 클 경우 굵은 궤적이 표시되고 터치 압력 또는 터치 면적이 작을 경우 얇은 궤적이 표시될 수 있을 것이다. When the user maintains the touch state while moving the touch means, the position image may be an image displaying a touch trace, wherein a thick trace is displayed when the touch pressure or the touch area is large, and a thin trace is displayed when the touch pressure or the touch area is small. It may be displayed.

또 다른 예로, 터치 압력 및 터치 면적이 낮은 레벨일 경우의 위치 이미지와 터치 압력 및 터치 면적이 높은 레벨일 경우의 위치 이미지가 서로 다른 형태를 가지도록 동작할 수도 있을 것이다. As another example, the position image when the touch pressure and the touch area are at a low level and the position image when the touch pressure and the touch area are at a high level may be operated to have different shapes.

앞서 설명한 바와 같이, 위치 이미지 생성부(1008)에서 생성하는 위치 이미지는 감지부의 감지 레벨뿐만 아니라 위치 이미지의 위치에 따라서도 서로 다른 형태를 가질 수 있다. 예를 들어, 위치 이미지가 이벤트 실행 개체 위에 표시되는 경우 위치 이미지의 형태는 통상적인 위치 이미지의 형태와 다를 수 있다. 위치 이미지가 이벤트 실행 객체 위에 존재하는 경우 이외에도 위치 이미지의 특정 위치가 특정 이벤트와 연관되는 경우 그 형태가 변경될 수 있을 것이다. As described above, the position image generated by the position image generator 1008 may have a different shape depending on the position of the position image as well as the sensing level of the sensing unit. For example, when the location image is displayed on the event execution object, the shape of the location image may be different from that of the general location image. In addition to the case where the location image exists on the event execution object, the shape may be changed when a specific location of the location image is associated with a specific event.

위치 이미지는 오버레이 형태로 표시될 수도 있고 현재 표시된 이미지에 미리 설정된 위치 이미지를 합성하여 표시될 수도 있을 것이다. The location image may be displayed in the form of an overlay or may be displayed by synthesizing a preset location image to the currently displayed image.

도 10에 도시된 실시예와 같이 위치 이미지 자체가 사용자 단말기에 표시되는 경우, 이미지 정보 생성부(1002)에서 현재 표시된 이미지에 대한 이미지 정보를 생성하는 것에 의해 위치 이미지에 대한 정보를 제공할 수 있다. When the location image itself is displayed on the user terminal as shown in the embodiment illustrated in FIG. 10, the image information generation unit 1002 may provide information about the location image by generating image information on the currently displayed image. .

설정부(1010)는 디스플레이에 표시된 이미지 및 위치 이미지의 공유를 위한 다양한 기능들에 대한 설정 인터페이스를 제공하는 기능을 한다. 예를 들어, 상기 감지부의 감지 레벨 등급 및 감지 레벨에 따른 위치 이미지 변화에 대한 설정 인터페이스를 제공하고 설정 정보를 저장하는 기능을 수행할 수 있다. 구체적으로, 설정부(1010)는 감지부에서(1006)에서 터치 여부만을 감지하고 터치 압력 및 면적에 대한 레벨을 감지하는 기능이 비활성화도록 설정을 변경할 수도 있다. The setting unit 1010 functions to provide a setting interface for various functions for sharing the image and the position image displayed on the display. For example, the sensing unit may provide a setting interface for changing the sensing image level and position image according to the sensing level, and store the setting information. In detail, the setting unit 1010 may change the setting so that the sensing unit 1006 detects only the touch or not and the function of detecting the level of the touch pressure and the area is deactivated.

제어부(1012)는 앞서 설명한 구성 요소들의 전반적인 동작을 제어하는 기능을 한다. The controller 1012 functions to control the overall operation of the above-described components.

도 11은 본 발명의 다른 실시예에 따른 사용자 단말기의 모듈 구성을 도시한 블록도이다. 11 is a block diagram showing a module configuration of a user terminal according to another embodiment of the present invention.

도 11을 참조하면, 본 발명의 다른 실시예에 사용자 단말기는 디스플레이부(1100), 이미지 정보 생성부(1102), 이미지 정보 송신부(1104), 감지부(1106), 위치 이미지 정보 생성부(1108), 설정부(1110), 제어부(1112) 및 위치 이미지 정보 송신부(1114)를 포함할 수 있다.Referring to FIG. 11, in another embodiment of the present invention, the user terminal may include a display unit 1100, an image information generator 1102, an image information transmitter 1104, a detector 1106, and a location image information generator 1108. ), A setting unit 1110, a control unit 1112, and a location image information transmitting unit 1114.

도 11에서, 도 10의 실시예와 중복되는 구성 요소에 대한 설명은 생략하기로 한다. In FIG. 11, descriptions of components overlapping with the exemplary embodiment of FIG. 10 will be omitted.

도 11은 도 10과는 달리 위치 이미지가 반영된 사용자 단말기의 현재 표시 이미지를 전송하지 않고 위치 이미지에 대한 정보를 독립적으로 전송하는 사용자 단말기에 대한 모듈 구성이다. Unlike FIG. 10, FIG. 11 is a module configuration of a user terminal that independently transmits information about a location image without transmitting a current display image of the user terminal reflecting the location image.

도 11의 사용자 단말기에서 위치 이미지 정보 생성부(1108)는 감지부(1106)에서 터치 수단의 터치 또는 근접이 감지될 경우 위치 이미지의 위치 정보 및 형태 정보를 생성한다. 위치 이미지의 형태 정보가 수신 단말기(102)와 미리 설정되어 있을 경우 위치 이미지의 위치 정보만을 생성할 수도 있을 것이다. In the user terminal of FIG. 11, the location image information generation unit 1108 generates location information and shape information of the location image when a touch or proximity of the touch means is detected by the detection unit 1106. If the shape information of the location image is set in advance with the receiving terminal 102, only the location information of the location image may be generated.

앞서 설명한 바와 같이, 위치 이미지의 위치 정보는 사용자 단말기(100)의 현재 표시된 화면에서 근접 또는 터치된 터치 수단의 좌표 정보일 수 있을 것이며, 해당 좌표 정보는 이미지 정보 송신부(1104)를 통해 수신 단말기(102)에 제공될 수 있다. 물론, 위치 이미지 정보만을 전송하는 별도의 모듈이 구비될 수도 있을 것이다. As described above, the location information of the location image may be coordinate information of the touch means that is approached or touched on the currently displayed screen of the user terminal 100, and the corresponding coordinate information may be received through the image information transmitter 1104. 102 may be provided. Of course, a separate module for transmitting only location image information may be provided.

위치 이미지 정보는 사용자 단말기(100) 디스플레이에 현재 표시된 이미지 정보를 전송하는 채널과는 다른 채널을 통해 제공될 수도 있으며, 같은 채널을 이용할 경우 이미지 정보의 헤더에 위치 이미지 정보가 포함될 수도 있을 것이다. The location image information may be provided through a channel different from a channel for transmitting image information currently displayed on the display of the user terminal 100, and when the same channel is used, the location image information may be included in the header of the image information.

도 12는 본 발명의 또 다른 실시예에 따른 사용자 단말기의 모듈 구성을 도시한 블록도이다. 12 is a block diagram showing the module configuration of a user terminal according to another embodiment of the present invention.

도 12를 참조하면, 본 발명의 또 다른 실시예에 따른 사용자 단말기는, 디스플레이부(1200), 이미지 정보 생성부(1202), 이미지 정보 송신부(1204), 감지부(1206), 위치 이미지 생성부(1208), 설정부(1210), 제어부(1212) 및 정보 제공부(1214)를 포함할 수 있다. Referring to FIG. 12, a user terminal according to another exemplary embodiment of the present invention may include a display unit 1200, an image information generator 1202, an image information transmitter 1204, a detector 1206, and a location image generator. 1208, a setting unit 1210, a control unit 1212, and an information providing unit 1214.

도 12에 도시된 사용자 단말기는 도 10의 사용자 단말기와 비교할 때 정보 제공부를 추가적으로 구비한다. The user terminal illustrated in FIG. 12 further includes an information providing unit as compared with the user terminal of FIG. 10.

정보 제공부(1214)는 사용자의 터치 또는 터치 수단의 근접에 응답하여 미리 설정된 정보를 출력하는 기능을 한다. 예를 들어, 정보 제공부(1214)는 터치 압력 및 터치 면적을 사용자가 인지하도록 하기 위한 정보를 출력할 수 있다. 구체적으로, 정보 제공부(1214)는 사용자가 강한 터치 압력으로 터치 동작을 수행하는지 약한 터치 압력으로 터치 동작을 수행하는지 여부에 대한 정보를 출력할 수 있으며, 넓은 터치 면적으로 터치 동작을 수행하는지 좁은 터치 면적으로 터치 동작을 수행하는지 여부에 대한 정보를 출력할 수 있다. The information providing unit 1214 functions to output preset information in response to a user's touch or proximity of the touch means. For example, the information provider 1214 may output information for allowing a user to recognize the touch pressure and the touch area. Specifically, the information providing unit 1214 may output information on whether the user performs a touch operation with a strong touch pressure or a touch operation with a weak touch pressure, and whether the user performs a touch operation with a wide touch area or not. Information on whether to perform a touch operation with a touch area may be output.

정보 제공부(1214)는 사용자의 청각, 촉각 또는 시각을 자극하는 형태로 정보를 출력할 수 있다. The information provider 1214 may output information in a form of stimulating the user's hearing, touch, or sight.

압력 정보 또는 면적 정보가 사용자의 촉각을 자극하는 형태로 제공되는 경우, 진동 모터를 이용하여 정보 제공이 이루어질 수 있을 것이다. 기 설정된 압력 또는 면적 이하로 터치가 이루어진 경우, 정보 제공부(1214)는 진동을 통해 이러한 사실을 사용자에게 제공할 수 있다. 또는 압력 정보 또는 면적 정보가 사용자의 청각을 자극하는 형태로 제공되는 경우, 정보 제공부는 사용자 단말기(100)의 스피커를 통해 이러한 사실을 사용자에게 제공할 수 있다. 또는 압력 정보 또는 면적 정보가 사용자의 시각을 자극하는 형태로 제공되는 경우, 정보 제공부는 사용자 단말기(100)의 발광 수단을 통해 이러한 사실을 사용자에게 제공할 수 있다. When the pressure information or the area information is provided in the form of stimulating the user's sense of touch, the information may be provided by using a vibration motor. When a touch is made at a predetermined pressure or area or less, the information provider 1214 may provide the user with the fact through vibration. Alternatively, when the pressure information or the area information is provided in a form that stimulates the user's hearing, the information providing unit may provide the fact to the user through the speaker of the user terminal 100. Alternatively, when the pressure information or the area information is provided in a form that stimulates the user's vision, the information providing unit may provide the fact to the user through light emitting means of the user terminal 100.

구체적으로, 미리 설정된 압력 또는 면적 이하로 터치된 상태에서, 터치 수단이 이동하는 동안, 정보 제공부(1214)는 연속적인 진동, 소리 또는 빛을 발생시킬 수 있다. 즉, 기 설정된 압력 또는 면적 이하의 상태로 최초 터치 수단의 터치가 인식된 경우에는 짧게 1회 진동(제 1 시간)이 발생되고, 추후 터치 수단이 이동하는 경우 연속적(제 2 시간)으로 진동이 발생될 수 있다. 여기서 제 2 시간은 제 1 시간보다 길 수 있다.In detail, while the touch means is moved under a predetermined pressure or area or less, the information provider 1214 may generate continuous vibration, sound, or light. That is, when a touch of the first touch means is recognized under a predetermined pressure or area, a short vibration (first time) is generated, and when the touch means moves later, vibration is continuously (second time). Can be generated. The second time may be longer than the first time.

또한, 정보 제공부(1214)는 소정 조건에 의해 위치 이미지가 변화될 때 다양한 형태로 위치 이미지 변화 정보를 제공할 수도 있다. In addition, the information providing unit 1214 may provide the position image change information in various forms when the position image is changed by a predetermined condition.

한편, 전술된 실시예의 구성 요소는 프로세스적인 관점에서 용이하게 파악될 수 있다. 즉, 각각의 구성 요소는 각각의 프로세스로 파악될 수 있다. On the other hand, the components of the above-described embodiment can be easily identified from a process point of view. That is, each component can be identified as a respective process.

또한 앞서 설명한 기술적 내용들은 다양한 컴퓨터 수단을 통하여 수행될 수 있는 프로그램 명령 형태로 구현되어 컴퓨터 판독 가능 매체에 기록될 수 있다. 상기 컴퓨터 판독 가능 매체는 프로그램 명령, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 상기 매체에 기록되는 프로그램 명령은 실시예들을 위하여 특별히 설계되고 구성된 것들이거나 컴퓨터 소프트웨어 당업자에게 공지되어 사용 가능한 것일 수도 있다. 컴퓨터 판독 가능 기록 매체의 예에는 하드 디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체(magnetic media), CD-ROM, DVD와 같은 광기록 매체(optical media), 플롭티컬 디스크(floptical disk)와 같은 자기-광 매체(magneto-optical media), 및 롬(ROM), 램(RAM), 플래시 메모리 등과 같은 프로그램 명령을 저장하고 수행하도록 특별히 구성된 하드웨어 장치가 포함된다. 프로그램 명령의 예에는 컴파일러에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용해서 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드를 포함한다. 하드웨어 장치는 실시예들의 동작을 수행하기 위해 하나 이상의 소프트웨어 모듈로서 작동하도록 구성될 수 있으며, 그 역도 마찬가지이다.In addition, the above-described technical features may be implemented in the form of program instructions that can be executed through various computer means and recorded in a computer-readable medium. The computer readable medium may include program instructions, data files, data structures, etc. alone or in combination. The program instructions recorded on the medium may be those specially designed and constructed for the embodiments or may be available to those skilled in the art of computer software. Examples of computer-readable recording media include magnetic media such as hard disks, floppy disks, and magnetic tape, optical media such as CD-ROMs, DVDs, and magnetic disks, such as floppy disks. Magneto-optical media, and hardware devices specifically configured to store and execute program instructions, such as ROM, RAM, flash memory, and the like. Examples of program instructions include not only machine code generated by a compiler, but also high-level language code that can be executed by a computer using an interpreter or the like. The hardware device may be configured to operate as one or more software modules to perform the operations of the embodiments, and vice versa.

Claims (18)

터치 수단이 디스플레이부를 터치하거나 상기 디스플레이부에 근접할 경우 상기 터치 수단의 위치에 상응하는 위치 이미지를 생성하는 위치 이미지 생성부; 및
상기 터치 수단의 터치 압력 및 터치 면적 중 적어도 하나를 감지하는 감지부를 포함하되,
상기 위치 이미지는 상기 감지부에서 감지하는 상기 터치 수단의 터치 압력 및 터치 면적 중 적어도 하나에 의해 변화되는 것을 특징으로 하는 사용자 단말기.
A position image generator for generating a position image corresponding to the position of the touch means when the touch means touches or approaches the display; And
A sensing unit for sensing at least one of the touch pressure and the touch area of the touch means,
And the position image is changed by at least one of a touch pressure and a touch area of the touch means detected by the sensing unit.
제1항에 있어서, 상기 위치 이미지는 상기 터치 압력 및 터치 면적 중 적어도 하나가 소정 레벨 범주에 있을 경우 표시되지 않는 것을 특징으로 하는 사용자 단말기. The user terminal of claim 1, wherein the location image is not displayed when at least one of the touch pressure and the touch area is in a predetermined level category. 제1항에 있어서, 상기 터치 수단의 터치 압력 및 터치 면적 중 적어도 하나에 의해 상기 위치 이미지의 형태가 변화되는 것을 특징으로 하는 사용자 단말기. The user terminal according to claim 1, wherein the shape of the position image is changed by at least one of a touch pressure and a touch area of the touch means. 제1항에 있어서, 상기 터치 수단의 터치 압력 및 터치 면적 중 적어도 하나에 의해 상기 위치 이미지의 사이즈가 변화되는 것을 특징으로 하는 사용자 단말기. The user terminal according to claim 1, wherein the size of the position image is changed by at least one of a touch pressure and a touch area of the touch means. 제2항에 있어서, 상기 터치 수단의 터치 압력 또는 터치 면적 중 적어도 하나를 나타내는 정보를 출력하는 정보 제공부를 더 포함하는 것을 특징으로 하는 사용자 단말기. The user terminal of claim 2, further comprising an information providing unit for outputting information indicating at least one of a touch pressure and a touch area of the touch unit. 제1항에 있어서, 상기 감지부의 감지 레벨 등급 및 감지 레벨에 따른 위치 이미지 변화에 대한 설정 인터페이스를 제공하고 설정 정보를 저장하는 설정부를 더 포함하는 것을 특징으로 하는 사용자 단말기. The user terminal of claim 1, further comprising a setting unit configured to provide a setting interface for changing the sensing level of the sensing unit and the position image according to the sensing level and to store setting information. 디스플레이부; 및
터치 수단이 상기 디스플레이를 터치하거나 상기 디스플레이부에 근접할 경우 상기 터치 수단의 위치에 상응하는 위치 이미지를 생성하는 위치 이미지 생성부를 포함하되,
상기 위치 이미지가 미리 설정된 이벤트 실행개체 상에 표시될 경우 상기 위치 이미지의 형태는 변화되는 것을 특징으로 하는 사용자 단말기.
A display unit; And
Including a position image generating unit for generating a position image corresponding to the position of the touch means when the touch means touches the display or close to the display,
And the shape of the location image is changed when the location image is displayed on a preset event executing object.
디스플레이부; 및
터치 수단이 상기 디스플레이를 터치하거나 상기 디스플레이부에 근접할 경우 상기 터치 수단의 위치에 상응하는 위치 이미지를 생성하는 위치 이미지 생성부를 포함하되,
상기 위치 이미지가 미리 설정된 위치에 표시될 경우 상기 위치 이미지의 형태는 변화되는 것을 특징으로 하는 사용자 단말기.
A display unit; And
Including a position image generating unit for generating a position image corresponding to the position of the touch means when the touch means touches the display or close to the display,
And the shape of the location image is changed when the location image is displayed at a preset location.
제7항 또는 제8항에 있어서, 상기 위치 이미지의 변화에 따른 정보를 제공하는 정보 제공부를 더 포함하는 것을 특징으로 하는 사용자 단말기.The user terminal of claim 7 or 8, further comprising an information providing unit which provides information according to the change of the position image. 터치 수단이 디스플레이부를 터치할 경우 상기 터치 수단의 터치 압력 및 터치 면적 중 적어도 하나를 감지하는 단계(a); 및
상기 터치 수단이 상기 디스플레이부를 터치하거나 상기 디스플레이에 근접할 경우 상기 터치 수단의 위치에 상응하는 위치 이미지를 생성하는 단계(b)를 포함하되,
상기 위치 이미지는 상기 단계(a)에서 감지하는 터치 수단의 터치 압력 및 터치 면적 중 적어도 하나에 의해 변화되는 것을 특징으로 하는 사용자 단말기 제어 방법.
Detecting a touch pressure and a touch area of the touch means when the touch means touches the display unit (a); And
(B) generating a position image corresponding to the position of the touch means when the touch means touches or approaches the display.
And the position image is changed by at least one of a touch pressure and a touch area of the touch means sensed in the step (a).
제10항에 있어서,
상기 위치 이미지는 상기 터치 압력 및 터치 면적 중 적어도 하나가 소정 레벨 범주에 있을 경우 표시되지 않는 것을 특징으로 하는 사용자 단말기 제어 방법.
The method of claim 10,
And the location image is not displayed when at least one of the touch pressure and the touch area is in a predetermined level category.
제10항에 있어서,
상기 터치 수단의 터치 압력 및 터치 면적 중 적어도 하나에 의해 상기 위치 이미지의 형태가 변화되는 것을 특징으로 하는 사용자 단말기 제어 방법.
The method of claim 10,
And the shape of the position image is changed by at least one of a touch pressure and a touch area of the touch means.
제10항에 있어서,
상기 터치 수단의 터치 압력 또는 터치 면적 중 적어도 하나를 나타내는 정보를 출력하는 단계를 더 포함하는 것을 특징으로 하는 사용자 단말기 제어 방법.
The method of claim 10,
And outputting information indicating at least one of a touch pressure and a touch area of the touch means.
제13항에 있어서,
상기 감지부의 터치 압력 및 터치 면적 중 적어도 하나를 감지하는 동작을 활성화시키거나 또는 비활성화시키는 설정 단계를 더 포함하는 것을 특징으로 하는 사용자 단말기.
The method of claim 13,
And a setting step of activating or deactivating an operation of sensing at least one of a touch pressure and a touch area of the sensing unit.
터치 수단이 디스플레이부를 터치하거나 터치 수단의 상기 디스플레이부로의 근접을 감지하는 단계(a);
상기 단계(a)에서 상기 터치 수단의 터치 또는 근접이 감지될 경우 상기 터치 수단의 위치에 상응하는 위치 이미지를 생성하는 단계(b)를 포함하되,
상기 위치 이미지가 미리 설정된 이벤트 실행개체 상에 표시될 경우 상기 위치 이미지의 형태는 변화되는 것을 특징으로 하는 사용자 단말기 제어 방법.
(A) the touch means touching the display unit or detecting proximity of the touch means to the display unit;
(B) generating a position image corresponding to the position of the touch means when the touch or proximity of the touch means is detected in the step (a),
And the shape of the location image is changed when the location image is displayed on a preset event executing object.
터치 수단이 디스플레이부를 터치하거나 터치 수단의 상기 디스플레이부로의 근접을 감지하는 단계(a);
상기 단계(a)에서 상기 터치 수단의 터치 또는 근접이 감지될 경우 상기 터치 수단의 위치에 상응하는 위치 이미지를 생성하는 단계(b)를 포함하되,
상기 위치 이미지가 미리 설정된 위치에 표시될 경우 상기 위치 이미지의 형태는 변화되는 것을 특징으로 하는 사용자 단말기 제어 방법.
(A) the touch means touching the display unit or detecting proximity of the touch means to the display unit;
(B) generating a position image corresponding to the position of the touch means when the touch or proximity of the touch means is detected in the step (a),
And the shape of the location image is changed when the location image is displayed at a preset location.
제16항에 있어서,
상기 위치 이미지의 변화에 따른 정보를 제공하는 단계를 더 포함하는 것을 특징으로 하는 사용자 단말기 제어 방법.
17. The method of claim 16,
And providing the information according to the change of the position image.
제10항 내지 제17항 중 어느 한 항의 방법을 실행하기 위한 프로그램이 기록된 기록 매체. A recording medium on which a program for executing the method of any one of claims 10 to 17 is recorded.
KR1020130020747A 2012-03-06 2013-02-26 User Terminal and Method for Controlling the Same KR101337138B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
US13/785,266 US20130244730A1 (en) 2012-03-06 2013-03-05 User terminal capable of sharing image and method for controlling the same

Applications Claiming Priority (12)

Application Number Priority Date Filing Date Title
KR1020120024092 2012-03-08
KR1020120024073 2012-03-08
KR20120024073 2012-03-08
KR20120024092 2012-03-08
KR20120032982 2012-03-30
KR20120033047 2012-03-30
KR1020120032982 2012-03-30
KR1020120033047 2012-03-30
KR20120043148 2012-04-25
KR1020120043148 2012-04-25
KR20120057996 2012-05-31
KR1020120057996 2012-05-31

Related Child Applications (1)

Application Number Title Priority Date Filing Date
KR1020130093324A Division KR101515912B1 (en) 2012-03-08 2013-08-06 User Terminal Capable of Sharing Image and Method for Controlling the Same

Publications (2)

Publication Number Publication Date
KR20130103363A true KR20130103363A (en) 2013-09-23
KR101337138B1 KR101337138B1 (en) 2013-12-05

Family

ID=49452730

Family Applications (2)

Application Number Title Priority Date Filing Date
KR1020130020747A KR101337138B1 (en) 2012-03-06 2013-02-26 User Terminal and Method for Controlling the Same
KR1020130093324A KR101515912B1 (en) 2012-03-08 2013-08-06 User Terminal Capable of Sharing Image and Method for Controlling the Same

Family Applications After (1)

Application Number Title Priority Date Filing Date
KR1020130093324A KR101515912B1 (en) 2012-03-08 2013-08-06 User Terminal Capable of Sharing Image and Method for Controlling the Same

Country Status (1)

Country Link
KR (2) KR101337138B1 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2016072635A1 (en) * 2014-11-03 2016-05-12 Samsung Electronics Co., Ltd. User terminal device and method for control thereof and system for providing contents

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20110067559A (en) * 2009-12-14 2011-06-22 삼성전자주식회사 Display device and control method thereof, display system and control method thereof
KR20110100121A (en) * 2010-03-03 2011-09-09 삼성전자주식회사 Method and apparatus for inputting character in mobile terminal

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2016072635A1 (en) * 2014-11-03 2016-05-12 Samsung Electronics Co., Ltd. User terminal device and method for control thereof and system for providing contents
US9766849B2 (en) 2014-11-03 2017-09-19 Samsung Electronics Co., Ltd. User terminal device and method for control thereof and system for providing contents
US10353656B2 (en) 2014-11-03 2019-07-16 Samsung Electronics Co., Ltd. User terminal device and method for control thereof and system for providing contents

Also Published As

Publication number Publication date
KR101515912B1 (en) 2015-05-04
KR101337138B1 (en) 2013-12-05
KR20130103463A (en) 2013-09-23

Similar Documents

Publication Publication Date Title
US20130241854A1 (en) Image sharing system and user terminal for the system
US10649552B2 (en) Input method and electronic device using pen input device
US9104239B2 (en) Display device and method for controlling gesture functions using different depth ranges
KR102284108B1 (en) Electronic apparatus and method for screen sharing with external display apparatus
KR102051418B1 (en) User interface controlling device and method for selecting object in image and image input device
KR102097452B1 (en) Electro device comprising projector and method for controlling thereof
US9880642B2 (en) Mouse function provision method and terminal implementing the same
CN107637076B (en) Electronic device and control method thereof
AU2013223015A1 (en) Method and apparatus for moving contents in terminal
KR20130034765A (en) Method and device for inputting of mobile terminal using a pen
KR101872272B1 (en) Method and apparatus for controlling of electronic device using a control device
AU2016224175A1 (en) Electronic device and control method thereof
US11209914B1 (en) Method and apparatus for detecting orientation of electronic device, and storage medium
US20130244730A1 (en) User terminal capable of sharing image and method for controlling the same
KR101384493B1 (en) System for interworking and controlling devices and user device used in the same
KR101337138B1 (en) User Terminal and Method for Controlling the Same
KR101151549B1 (en) System for interworking and controlling devices and user device used in the same
KR102125100B1 (en) Method for controlling wearable device and apparatus thereof
KR102160954B1 (en) User interface controlling device and method for selecting object in image and image input device
KR20140040346A (en) Mobile terminal capable of input processing using input classification and method thereof
JP2015158859A (en) Electronic equipment
KR20130129684A (en) System for interworking and controlling devices and user device used in the same
KR20130129693A (en) System for interworking and controlling devices and user device used in the same
KR20130101886A (en) System for interworking and controlling devices and reception device used in the same

Legal Events

Date Code Title Description
A201 Request for examination
A302 Request for accelerated examination
E902 Notification of reason for refusal
A107 Divisional application of patent
E90F Notification of reason for final refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20161004

Year of fee payment: 4

LAPS Lapse due to unpaid annual fee