KR101938362B1 - Method for operating multi-touch display for multiple users and multi-touch display performing the method - Google Patents

Method for operating multi-touch display for multiple users and multi-touch display performing the method Download PDF

Info

Publication number
KR101938362B1
KR101938362B1 KR1020160183226A KR20160183226A KR101938362B1 KR 101938362 B1 KR101938362 B1 KR 101938362B1 KR 1020160183226 A KR1020160183226 A KR 1020160183226A KR 20160183226 A KR20160183226 A KR 20160183226A KR 101938362 B1 KR101938362 B1 KR 101938362B1
Authority
KR
South Korea
Prior art keywords
touch
user
category
panel
display system
Prior art date
Application number
KR1020160183226A
Other languages
Korean (ko)
Other versions
KR20180079484A (en
Inventor
김인혁
김태형
김정한
Original Assignee
성균관대학교산학협력단
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 성균관대학교산학협력단 filed Critical 성균관대학교산학협력단
Priority to KR1020160183226A priority Critical patent/KR101938362B1/en
Publication of KR20180079484A publication Critical patent/KR20180079484A/en
Application granted granted Critical
Publication of KR101938362B1 publication Critical patent/KR101938362B1/en

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0416—Control or interface arrangements specially adapted for digitisers
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/26—Power supply means, e.g. regulation thereof
    • G06F1/32—Means for saving power
    • G06F1/3203—Power management, i.e. event-based initiation of a power-saving mode
    • G06F1/3206—Monitoring of events, devices or parameters that trigger a change in power modality
    • G06F1/3228—Monitoring task completion, e.g. by use of idle timers, stop commands or wait commands
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482—Interaction with lists of selectable items, e.g. menus
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04845—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range for image manipulation, e.g. dragging, rotation, expansion or change of colour
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/0486—Drag-and-drop
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/041—Indexing scheme relating to G06F3/041 - G06F3/045
    • G06F2203/04104—Multi-touch detection in digitiser, i.e. details about the simultaneous detection of a plurality of touching locations, e.g. multiple fingers or pen and finger

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

본 발명은 복수의 사용자를 위한 멀티 터치 디스플레이의 구동 방법 및 이러한 방법을 수행하는 멀티 터치 디스플레이에 관한 것이다. 멀티 터치 디스플레이의 구동 방법은 멀티 터치 디스플레이 시스템이 터치 패널을 통해 터치 기반의 복수의 입력 정보를 중첩된 시간 자원 상에서 수신하는 단계와 멀티 터치 디스플레이 시스템이 중첩된 시간 자원 상에서 복수의 입력 정보 각각에 따른 복수의 출력 정보 각각을 터치 패널 상에 출력하는 단계를 포함할 수 있되, 멀티 터치 디스플레이 시스템은 복수의 입력 정보에 따라 대기 모드 또는 사용 모드로 동작할 수 있다.The present invention relates to a method of driving a multi-touch display for a plurality of users and a multi-touch display performing such a method. A method of driving a multi-touch display includes: receiving a plurality of touch-based input information on a time resource over a touch panel through a multi-touch display system; and receiving a plurality of input information based on a plurality of input information And outputting a plurality of pieces of output information on the touch panel, wherein the multi-touch display system can operate in a standby mode or a use mode according to a plurality of input information.

Description

복수의 사용자를 위한 멀티 터치 디스플레이의 구동 방법 및 이러한 방법을 수행하는 멀티 터치 디스플레이{Method for operating multi-touch display for multiple users and multi-touch display performing the method}BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to a method of driving a multi-touch display for a plurality of users and a multi-

본 발명은 복수의 사용자를 위한 멀티 터치 디스플레이를 구동 방법 및 이러한 방법을 수행하는 멀티 터치 디스플레이에 관한 것이다. 보다 상세하게는 복수의 사용자에 의한 멀티 터치 입력 신호가 입력되는 경우, 복수의 사용자의 서로 다른 멀티 터치 입력 신호 정보를 기반으로 발생된 복수의 서로 다른 반응 정보 각각을 멀티 터치 디스플레이 상에서 복수의 사용자 각각에게 제공하기 위한 방법 및 장치에 관한 것이다.The present invention relates to a method for driving a multi-touch display for a plurality of users and a multi-touch display for performing such a method. More specifically, when a multi-touch input signal is input by a plurality of users, each of a plurality of different reaction information generated based on different multi-touch input signal information of a plurality of users is input to each of a plurality of users To a method and apparatus for providing the same.

많은 인터랙티브(interactive) 미디어 기업과 디자이너들이 멀티 터치 디스플레이(multi-touch display)(또는 멀티 터치 스크린(multi-touch screen))에 많은 관심을 보이고 있다. 멀티 터치 디스플레이는 사업적으로나 창의적 도구로써 높은 활용도를 가지기 때문이다. 하지만, 멀티 터치 디스플레이는 아직 다수의 기술적인 문제점을 가지고 있다. 예를 들어, 불완전한 하드웨어 인터페이스, 소프트웨어 인터페이스가 현재 멀티 터치 디스플레이가 가진 기술적인 문제점일 수 있다. Many interactive media companies and designers have shown much interest in multi-touch displays (or multi-touch screens). Multi-touch displays are highly utilized as business and creative tools. However, multi-touch displays still have a number of technical problems. For example, an incomplete hardware interface, a software interface, may be a technical problem with current multi-touch displays.

인터페이스는 광의로 컴퓨터와 사용자 또는 컴퓨터와 컴퓨터 간의 정보 이동 통로나 이를 규정하는 약속이다. 키보드, 마우스, 화상카메라, USB(universal serial bus), SATA(serial advanced technology attachment)와 같은 하드웨어 인터페이스에서부터 그래픽 카드의 실시간 렌더링을 위해 사용되는 소프트웨어 인터페이스, OS(operating system)를 구동하기 위해서 사용되는 갖가지 이벤트들, 그리고 더 나아가, 그래픽 유저 인터페이스까지 인터페이스는 모두 정보의 소통에 직접적으로 관여할 수 있다.An interface is broadly a promise or path of information transfer between a computer and a user or between a computer and a computer. Software interfaces used for real-time rendering of graphics cards, hardware interfaces such as keyboards, mice, video cameras, universal serial bus (USB), serial advanced technology attachment (SATA) Events, and furthermore, interfaces to the graphical user interface can all directly participate in the communication of information.

기존의 멀티 터치 스크린은 불완전한 인터페이스로 인해 복수의 입력 정보에 대한 적절한 반응을 보이지 못했다. 멀티 터치 스크린을 상용화함 있어 복수의 사용자 각각에 의해 발생된 복수의 입력 정보를 수신하고, 복수의 입력 정보에 따른 출력 정보를 복수의 사용자에게 정확하게 전달하기 위한 사용자 인터페이스의 구현이 중요하다.The conventional multi-touch screen does not respond appropriately to multiple input information due to incomplete interface. It is important to realize a user interface for receiving a plurality of input information generated by each of a plurality of users and accurately outputting output information corresponding to a plurality of input information to a plurality of users.

본 발명은 상술한 문제점을 모두 해결하는 것을 그 목적으로 한다.It is an object of the present invention to solve all the problems described above.

또한, 본 발명은, 멀티 터치 디스플레이에서 사용자들의 입력 신호에 따라 정확하게 동작을 수행하는 멀티 터치 디스플레이를 제공하는 것을 다른 목적으로 한다.It is another object of the present invention to provide a multi-touch display that accurately operates according to input signals of users in a multi-touch display.

또한, 본 발명은, 멀티 터치 디스플레이를 활용하는 복수의 사용자의 입력 신호에 따라 멀티 터치 디스플레이 상에서 효과적으로 복수의 사용자에게 정보를 제공하는 것을 다른 목적으로 한다.Another object of the present invention is to effectively provide information to a plurality of users on a multi-touch display according to input signals of a plurality of users utilizing a multi-touch display.

또한, 본 발명은, 복수의 사용자가 멀티 터치 디스플레이를 다른 사용자의 간섭이 없이 활용하는 것을 다른 목적으로 한다.It is another object of the present invention that a plurality of users utilize the multi-touch display without interference from other users.

상기 목적을 달성하기 위한 본 발명의 대표적인 구성은 다음과 같다.In order to accomplish the above object, a representative structure of the present invention is as follows.

본 발명의 일 태양에 따르면, 멀티 터치 디스플레이의 구동 방법은 멀티 터치 디스플레이 시스템이 터치 패널을 통해 터치 기반의 복수의 입력 정보를 중첩된 시간 자원 상에서 수신하는 단계와 상기 멀티 터치 디스플레이 시스템이 중첩된 시간 자원 상에서 상기 복수의 입력 정보 각각에 따른 복수의 출력 정보 각각을 상기 터치 패널 상에 출력하는 단계를 포함할 수 있되, 상기 멀티 터치 디스플레이 시스템은 상기 복수의 입력 정보에 따라 대기 모드 또는 사용 모드로 동작할 수 있다.According to an aspect of the present invention, a method of driving a multi-touch display includes receiving a plurality of touch-based input information on a superimposed time resource through a touch panel, And outputting a plurality of pieces of output information corresponding to each of the plurality of pieces of input information on the touch panel, wherein the multi-touch display system operates in a standby mode or a use mode according to the plurality of input information can do.

본 발명의 다른 태양에 따르면, 복수의 사용자를 위한 멀티 터치 디스플레이 시스템은 복수의 사용자에 의해 발생된 복수의 터치 신호를 중첩된 시간 자원 상에서 수신하는 터치 패널과 상기 터치 패널과 동작 가능하게(operatively) 연결되어 상기 복수의 터치 신호를 기반으로 생성된 복수의 입력 신호를 처리하는 프로세서를 포함할 수 있되, 상기 프로세서는 상기 복수의 입력 정보를 중첩된 시간 자원 상에서 수신하고, 중첩된 시간 자원 상에서 상기 복수의 입력 정보 각각에 따른 복수의 출력 정보 각각을 상기 터치 패널 상에 출력하도록 구현될 수 있되, 상기 프로세서는 상기 복수의 입력 정보에 따라 상기 멀티 터치 디스플레이 시스템을 대기 모드 또는 사용 모드로 동작시킬 수 있다.According to another aspect of the present invention, a multi-touch display system for a plurality of users includes a touch panel that receives a plurality of touch signals generated by a plurality of users on overlapping time resources, And a processor for processing a plurality of input signals generated based on the plurality of touch signals, wherein the processor is configured to receive the plurality of input information on overlapping time resources, The touch panel may be configured to output each of a plurality of pieces of output information corresponding to input information of the multi-touch display system to the touch panel, wherein the processor can operate the multi-touch display system in a standby mode or a use mode according to the plurality of input information .

본 발명에 의하면, 멀티 터치 디스플레이에서 사용자들의 입력 신호에 따라 정확하게 동작을 수행하는 멀티 터치 디스플레이가 제공될 수 있다.According to the present invention, a multi-touch display can be provided that accurately operates according to input signals of users in a multi-touch display.

또한, 멀티 터치 디스플레이를 활용하는 복수의 사용자의 입력 신호에 따라 멀티 터치 디스플레이 상에서 효과적으로 정보가 제공될 수 있다.Further, information can be effectively provided on the multi-touch display according to input signals of a plurality of users utilizing the multi-touch display.

이뿐만 아니라, 복수의 사용자가 멀티 터치 디스플레이를 다른 사용자의 간섭이 없이 활용할 수 있다.In addition, a plurality of users can utilize the multi-touch display without interference from other users.

도 1은 본 발명의 실시예에 따른 멀티 터치 디스플레이 시스템의 신호 처리를 나타낸 개념도이다.
도 2는 본 발명의 실시예에 따른 멀티 터치 디스플레이 시스템의 대기 모드를 나타낸 개념도이다.
도 3은 본 발명의 실시예에 따른 카테고리 패널의 위치를 결정하기 위한 가이드라인의 움직임 방법을 나타낸 개념도이다.
도 4는 본 발명의 실시예에 따른 멀티 터치 디스플레이 시스템의 제1 사용 모드를 나타낸 개념도이다.
도 5는 본 발명의 실시예에 따른 멀티 터치 디스플레이 시스템의 제1 사용 모드를 나타낸 개념도이다.
도 6은 본 발명의 실시예에 따른 멀티 터치 디스플레이 시스템의 제2 사용 모드를 나타낸 개념도이다.
도 7은 본 발명의 실시예에 따른 멀티 터치 디스플레이 시스템의 제2 사용 모드를 나타낸 개념도이다.
도 8은 본 발명의 실시예에 따른 멀티 터치 디스플레이 시스템을 나타낸 개념도이다.1 is a conceptual diagram illustrating signal processing in a multi-touch display system according to an embodiment of the present invention.
2 is a conceptual diagram illustrating a standby mode of a multi-touch display system according to an embodiment of the present invention.
3 is a conceptual diagram illustrating a method of moving a guide line for determining a position of a category panel according to an embodiment of the present invention.
4 is a conceptual diagram illustrating a first mode of use of a multi-touch display system according to an embodiment of the present invention.
5 is a conceptual diagram illustrating a first mode of use of a multi-touch display system according to an embodiment of the present invention.
6 is a conceptual diagram illustrating a second mode of use of the multi-touch display system according to the embodiment of the present invention.
7 is a conceptual diagram illustrating a second use mode of the multi-touch display system according to the embodiment of the present invention.
8 is a conceptual diagram illustrating a multi-touch display system according to an embodiment of the present invention.

후술하는 본 발명에 대한 상세한 설명은, 본 발명이 실시될 수 있는 특정 실시예를 예시로서 도시하는 첨부 도면을 참조한다. 이러한 실시예는 당업자가 본 발명을 실시할 수 있기에 충분하도록 상세히 설명된다. 본 발명의 다양한 실시예는 서로 다르지만 상호 배타적일 필요는 없음이 이해되어야 한다. 예를 들어, 본 명세서에 기재되어 있는 특정 형상, 구조 및 특성은 본 발명의 정신과 범위를 벗어나지 않으면서 일 실시예로부터 다른 실시예로 변경되어 구현될 수 있다. 또한, 각각의 실시예 내의 개별 구성요소의 위치 또는 배치도 본 발명의 정신과 범위를 벗어나지 않으면서 변경될 수 있음이 이해되어야 한다. 따라서, 후술하는 상세한 설명은 한정적인 의미로서 행하여 지는 것이 아니며, 본 발명의 범위는 특허청구범위의 청구항들이 청구하는 범위 및 그와 균등한 모든 범위를 포괄하는 것으로 받아들여져야 한다. 도면에서 유사한 참조부호는 여러 측면에 걸쳐서 동일하거나 유사한 구성요소를 나타낸다.The following detailed description of the invention refers to the accompanying drawings, which illustrate, by way of illustration, specific embodiments in which the invention may be practiced. These embodiments are described in sufficient detail to enable those skilled in the art to practice the invention. It should be understood that the various embodiments of the present invention are different, but need not be mutually exclusive. For example, the specific shapes, structures, and characteristics described herein may be implemented by changing from one embodiment to another without departing from the spirit and scope of the invention. It should also be understood that the location or arrangement of individual components within each embodiment may be varied without departing from the spirit and scope of the present invention. Therefore, the following detailed description is not to be taken in a limiting sense, and the scope of the present invention should be construed as encompassing the scope of the appended claims and all equivalents thereof. In the drawings, like reference numbers designate the same or similar components throughout the several views.

이하에서는, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자가 본 발명을 용이하게 실시할 수 있도록 하기 위하여, 본 발명의 여러 바람직한 실시예에 관하여 첨부된 도면을 참조하여 상세히 설명하기로 한다.Hereinafter, various embodiments of the present invention will be described in detail with reference to the accompanying drawings so that those skilled in the art can easily carry out the present invention.

이하, 본 발명의 실시예에서는 설명의 편의상 멀티 터치 디스플레이 시스템이 테이블 상에 구현되고, 복수의 사용자가 테이블의 주변에서 멀티 터치 디스플레이 시스템을 활용하는 것이 가정된다. 하지만, 멀티 터치 디스플레이 시스템이 구현되는 장소/구조 등에는 제약이 없고, 이러한 실시예 또한 본 발명의 권리 범위에 포함된다.Hereinafter, it is assumed that a multi-touch display system is implemented on a table and a plurality of users utilize the multi-touch display system in the vicinity of the table for convenience of explanation. However, there is no restriction on the place / structure where the multi-touch display system is implemented, and such embodiments are also included in the scope of the present invention.

도 1은 본 발명의 실시예에 따른 멀티 터치 디스플레이 시스템의 신호 처리를 나타낸 순서도이다.1 is a flowchart illustrating signal processing in a multi-touch display system according to an embodiment of the present invention.

도 1에서는 복수의 사용자의 입력 정보를 수신하고, 복수의 사용자의 입력 정보에 따른 출력 정보를 제공하는 멀티 터치 디스플레이 시스템이 개시된다.1, a multi-touch display system that receives input information of a plurality of users and provides output information according to input information of a plurality of users is disclosed.

멀티 터치 디스플레이 시스템은 복수의 사용자가 사용 가능한 터치 패널을 포함할 수 있다. 터치 패널은 하나의 일체형 패널 형태로 구현될 수도 있으나, 복수의 하위 터치 패널의 조합으로 구현될 수도 있다. 멀티 터치 디스플레이 시스템은 복수의 사용자에 의해 터치 패널 상에서 발생된 복수의 사용자 복수의 입력 정보에 대한 처리가 가능할 수 있다.The multi-touch display system may include a touch panel usable by a plurality of users. The touch panel may be implemented as a single integrated panel, or may be implemented as a combination of a plurality of lower touch panels. The multi-touch display system may be capable of processing a plurality of user input information generated on the touch panel by a plurality of users.

예를 들어, 멀티 터치 디스플레이 시스템은 터치 패널 상에서 다양한 UI(user interface)/UX(user experience)를 제공할 수 있다. 복수의 사용자는 UI/UX를 기반으로 터치 패널의 일정 영역 상에서 정보를 입력할 수 있다. 멀티 터치 디스플레이 시스템은 벽/테이블과 같은 구조에 구현될 수 있고, 복수의 사용자는 멀티 터치 디스플레이 시스템을 통해 원하는 정보를 획득할 수 있다.For example, a multi-touch display system can provide various UI (user interface) / UX (user experience) on a touch panel. A plurality of users can input information on a certain area of the touch panel based on UI / UX. The multi-touch display system can be implemented in a structure such as a wall / table, and a plurality of users can acquire desired information through the multi-touch display system.

도 1을 참조하면, 멀티 터치 디스플레이 시스템의 신호 처리 동작이 개시된다.Referring to FIG. 1, a signal processing operation of the multi-touch display system is started.

멀티 터치 디스플레이 시스템이 터치 패널 상에서 발생된 복수의 입력 정보를 수신한다(단계 S100).The multi-touch display system receives a plurality of input information generated on the touch panel (step S100).

예를 들어, 복수의 입력 정보는 복수의 사용자에 의해 동시에(중첩된 시간 자원 상에서) 발생될 수 있다. 복수의 입력 정보 각각은 터치(또는 터치 입력 신호)가 지시하는 구체적인 정보뿐만 아니라, 터치가 발생한 터치 패널 상의 위치, 터치가 발생한 시간 등에 대한 정보를 포함할 수 있다.For example, a plurality of input information may be generated simultaneously (over overlapping time resources) by a plurality of users. Each of the plurality of pieces of input information may include not only specific information indicated by a touch (or a touch input signal), but also information about a position on the touch panel where the touch occurs, a time at which the touch occurred, and the like.

멀티 터치 디스플레이 시스템이 복수의 입력 정보를 처리하여 복수의 입력 정보에 따른 출력 정보(또는 응답 신호)를 터치 패널 상에 동시에(또는 중첩된 시간 자원 상에서) 제공할 수 있다(단계 S110).The multi-touch display system processes a plurality of input information to provide output information (or response signals) corresponding to the plurality of input information simultaneously on the touch panel (or on overlapped time resources) (step S110).

멀티 터치 디스플레이 시스템은 다양한 처리 방식을 기반으로 복수의 입력 정보에 대해 처리하고, 처리 결과를 터치 패널 상에서 제공할 수 있다. 예를 들어, 멀티 터치 디스플레이 시스템은 복수의 입력 정보를 분산 처리하여 복수의 입력 정보에 대한 처리 결과를 동시에 터치 패널 상에서 제공할 수 있다.The multi-touch display system can process a plurality of pieces of input information based on various processing methods, and can provide the processing result on the touch panel. For example, the multi-touch display system can distribute a plurality of pieces of input information and simultaneously provide processing results for a plurality of pieces of input information on a touch panel.

구체적으로 복수의 입력 정보 각각은 복수의 프로세싱 단위 각각으로 입력될 수 있고, 복수의 프로세싱 단위 각각에서 복수의 입력 정보 각각이 동시에(또는 중첩된 시간 자원 상에서) 처리되어 출력 정보를 제공할 수 있다.Specifically, each of the plurality of input information may be input to each of the plurality of processing units, and each of the plurality of input information in each of the plurality of processing units may be processed simultaneously (or over overlapping time resources) to provide output information.

전술한 바와 같이 복수의 입력 정보 각각은 터치 입력 신호가 발생한 터치 패널 상의 위치에 대한 정보를 포함할 수 있다. 복수의 프로세싱 단위 각각은 복수의 입력 신호 각각에 포함된 위치 정보를 고려하여 입력 정보에 대한 응답인 출력 정보를 터치 패널 상의 특정 위치에 제공할 수 있다. 이러한 방식으로 다양한 위치 상에서 터치 신호를 발생시키는 복수의 사용자 각각의 위치를 고려하여 적절한 위치에서 복수의 사용자 각각에게 동시간대에 출력 신호를 제공할 수 있다.As described above, each of the plurality of input information may include information on a position on the touch panel where the touch input signal is generated. Each of the plurality of processing units may provide output information, which is a response to the input information, to a specific position on the touch panel in consideration of position information included in each of the plurality of input signals. In this way, it is possible to provide an output signal to each of a plurality of users at an appropriate position in consideration of the position of each of a plurality of users generating touch signals in various positions.

예를 들어, 터치 패널의 제1 위치에서 발생한 제1 입력 정보에 대한 응답으로 제1 출력 정보를 제1 위치에 기반하여 결정된 제1' 위치에 제공할 수 있다. 터치 패널의 제2 위치에서 발생한 제2 입력 정보에 대한 응답으로 제2 출력 정보를 제2 위치에 기반하여 결정된 제2' 위치에 제공할 수 있다.For example, in response to first input information occurring at a first location of the touch panel, first output information may be provided at a first location determined based on the first location. The second output information may be provided in the second position determined based on the second position in response to the second input information generated at the second position of the touch panel.

멀티 터치 디스플레이 시스템은 입력 정보를 기반으로 멀티 터치 디스플레이 시스템을 사용하는 사용자 정보를 결정하고, 사용자 정보를 기반으로 결정된 출력 정보를 터치 패널 상에서 제공할 수 있다. 사용자 정보는 멀티 터치 디스플레이 시스템을 사용하는 사용자의 수, 사용자의 터치 패널 상에서의 위치(또는 사용자의 중심 위치), 사용자의 관심 정보 등을 포함할 수 있다.The multi-touch display system determines user information using the multi-touch display system based on the input information, and provides the output information determined based on the user information on the touch panel. The user information may include the number of users using the multi-touch display system, the position of the user on the touch panel (or the center position of the user), the user's interest information, and the like.

이하, 본 발명의 실시예에서는 멀티 터치 디스플레이 시스템에 구현된 UI/UX 및 UI/UX를 기반으로 한 멀티 터치 디스플레이 시스템의 동작이 구체적으로 개시된다.Hereinafter, the operation of the UI / UX and UI / UX based multi-touch display system implemented in the multi-touch display system will be described in detail.

도 2는 본 발명의 실시예에 따른 멀티 터치 디스플레이 시스템의 대기 모드를 나타낸 개념도이다.2 is a conceptual diagram illustrating a standby mode of a multi-touch display system according to an embodiment of the present invention.

도 2에서는 사용자들에 의한 입력 정보(또는 터치 신호)가 발생하지 않은 경우 수행되는 멀티 터치 디스플레이 시스템의 대기 모드가 개시된다.In FIG. 2, a standby mode of the multi-touch display system is started when input information (or touch signal) by users is not generated.

도 2를 참조하면, 멀티 터치 디스플레이 시스템의 대기 모드는 사용자에 의한 터치 신호가 일정 시간 발생하지 않을 경우 수행될 수 있다. 대기 모드에서는 미리 설정된 화면이 출력될 수 있다.Referring to FIG. 2, the standby mode of the multi-touch display system may be performed when a touch signal by the user does not occur for a predetermined time. In the standby mode, a preset screen can be output.

예를 들어, 백화점에 설치된 멀티 터치 디스플레이인 경우, 대기 모드에서 사용자에게 제공 가능한 복수의 정보와 대응되는 복수의 카테고리 패널(또는 아이콘, 카드 메뉴)(250)이 출력될 수 있다. 쿠폰 정보, 세일 정보, 온라인 쇼핑 정보, 문화 센터에 대한 정보 각각이 서로 다른 카테고리 패널(250)로서 멀티 터치 디스플레이 상에서 사용자에게 제공 가능한 경우가 가정될 수 있다. 사용자는 카테고리 패널(250)을 선택하여 카테고리 패널과 관련된 정보를 획득할 수 있다. 사용자가 쿠폰 정보를 원하는 경우, 사용자는 복수의 카테고리 패널(250) 중 쿠폰 정보와 관련된 카테고리 패널(250)을 터치 한 후 일정한 위치로 드래그하는 터치 앤 드래그(touch and drag) 방식으로 이동시킬 수 있다. 사용자의 터치가 용이한 영역으로 이동된 카테고리 패널(250)은 사용자 정보창을 형성할 수 있다. 사용자 정보창 상에서 사용자에게 카테고리 패널(250)과 관련된 정보를 제공할 수 있다.For example, in the case of a multi-touch display installed in a department store, a plurality of category panels (or icons, card menus) 250 corresponding to a plurality of information that can be provided to a user in a standby mode may be output. It can be assumed that the coupon information, the sale information, the online shopping information, and the information on the cultural center can be provided to the user on the multi-touch display as different category panels 250. The user may select the category panel 250 to obtain information related to the category panel. If the user desires coupon information, the user can move the category panel 250 related to the coupon information among the plurality of category panels 250 by a touch and drag method of dragging the category panel 250 to a predetermined position . The category panel 250, which is moved to a user-friendly area, can form a user information window. The user may be provided with information related to the category panel 250 on the user information window.

이하, 본 발명의 실시예에서는 설명의 편의상 카테고리 패널(250)이 UX/UI로 사용되는 경우가 개시되나, 멀티 터치 디스플레이 시스템에서 카테고리 패널이 아닌 다양한 UX/UI가 활용될 수 있다.Hereinafter, the case where the category panel 250 is used as the UX / UI is disclosed in the embodiment of the present invention, but various UX / UIs other than the category panel may be utilized in the multi-touch display system.

대기 모드에서는 이러한 복수의 카테고리 패널(250)/복수의 카테고리 패널의 외곽에 위치한 가이드라인(210)이 배경 화면의 색상의 변화(또는 설정된 시간)에 따라 유기적으로 위치를 변경하면서 움직일 수 있다.In the standby mode, the plurality of category panels 250 / guide lines 210 located outside the plurality of category panels can be moved while changing their positions organically according to the color change (or set time) of the background screen.

이하, 대기 모드에서 복수의 카테고리 패널(250)의 움직임이 개시된다.Hereinafter, movement of the plurality of category panels 250 in the standby mode is started.

카테고리 패널(250)은 카테고리 패널(250)의 외곽에 설정된 가이드라인(guideline)(210, 220)을 기준으로 움직일 수 있다. 예를 들어, 가이드라인(210)은 가상의 선(또는 실제 선)으로서 직육면체를 구성하는 외곽선에 대응될 수 있다.The category panel 250 may move based on guidelines 210 and 220 set on the outside of the category panel 250. For example, the guideline 210 may correspond to an outline constituting a rectangular parallelepiped as a virtual line (or an actual line).

도 2의 상단을 참조하면, 직육면체의 제1면과 평행한 복수의 면 각각이 복수의 카테고리 패널 할당 위치 각각과 대응될 수 있다. 복수의 카테고리 패널 할당 위치 각각에 복수의 카테고리 패널(250) 각각이 위치할 수 있다. 복수의 카테고리 패널(250) 각각은 설정된 일정한 간격에 따라 제1면과 평행한 복수의 면 각각 상에 위치할 수 있다. 예를 들어, 제1 카테고리 패널은 가이드라인(210)에 의해 형성된 직육면체의 제1 면과 평행한 평행면1 상에 위치하고, 제2 카테고리 패널은 가이드라인(210)에 의해 형성된 직육면체의 제1 면과 평행한 평행면2에 위치하고, 제3 카테고리 패널은 가이드라인(210)에 의해 형성된 직육면체의 제1 면과 평행한 평행면3에 위치하고, 제4 카테고리 패널은 가이드라인(210)에 의해 형성된 직육면체의 제1 면과 평행한 평행면4에 위치할 수 있다. 평행면1 내지 평행면 4 각각은 복수의 카테고리 패널 할당 위치(260)와 대응될 수 있다. 복수의 카테고리 패널 할당 위치(260)에도 별도의 가이드라인이 형성될 수도 있다.2, each of a plurality of planes parallel to the first surface of the rectangular parallelepiped can correspond to each of a plurality of category panel assignment positions. Each of the plurality of category panels 250 may be located in each of the plurality of category panel assignment positions. Each of the plurality of category panels 250 may be positioned on each of a plurality of planes parallel to the first surface at a predetermined interval. For example, the first category panel is located on a parallel plane 1 parallel to the first plane of the rectangular parallelepiped formed by the guide line 210, and the second category panel is located on the first plane of the rectangular parallelepiped formed by the guide line 210 The third category panel is located on the parallel plane 3 parallel to the first face of the rectangular parallelepiped formed by the guide line 210 and the fourth category panel is located on the parallel first face of the first rectangular parallelepiped formed by the guide line 210 Plane 4 parallel to the plane. Each of the parallel faces 1 to 4 may correspond to a plurality of category panel assignment positions 260. A separate guideline may also be formed in the plurality of category panel assignment positions 260.

제1 카테고리 패널 내지 제4 카테고리 패널은 시간에 따라 위치를 변경할 수 있다. 예를 들어, 일정 시간 이후에 카테고리 패널(250)의 위치가 한 칸씩 이동하여 제1 카테고리 패널이 평행면2에 위치하고, 제2 카테고리 패널이 평행면3에 위치하고, 제3 카테고리 패널이 평행면4에 위치하고, 제4 카테고리 패널이 평행면1에 위치할 수 있다. 이러한 식으로 카테고리 패널은 평행면1 내지 평행면 4를 순환할 수 있다.The first category panel to the fourth category panel can change their position with time. For example, after a certain time, the position of the category panel 250 moves by one space such that the first category panel is located on the parallel plane 2, the second category panel is located on the parallel plane 3, the third category panel is located on the parallel plane 4, The fourth category panel may be located on the parallel plane 1. In this way, the category panel can circulate between the parallel faces 1 to 4.

도 2의 하단을 참조하면, 카테고리 패널(260)의 외곽에 설정된 가이드 라인(210)은 분할/변경되어 움직일 수 있고, 가이드 라인(210)의 움직임에 따라 카테고리 패널(260)의 위치 또한 이동될 수 있다. 2, the guideline 210 set on the outside of the category panel 260 can be divided / changed and moved, and the position of the category panel 260 is also moved according to the movement of the guideline 210 .

예를 들어, 가이드라인(210)이 하나의 직육면체를 구성할 수도 있으나, 변화되어 복수의 직육면체의 조합의 형상을 가질 수도 있다. 복수의 직육면체의 연결을 기반으로 하나의 다면체가 구현될 수 있고, 다면체 상의 선이 가이드 라인(210)을 형성할 수 있다. 가이드 라인(210)을 기준으로 복수의 카테고리 패널(250)이 위치할 수 있다.For example, the guide line 210 may constitute a rectangular parallelepiped, but may have a shape of a combination of a plurality of rectangular parallelepipeds. One polyhedron may be implemented based on the connection of a plurality of rectangular parallelepipeds, and a polyhedron may form the guide line 210. A plurality of category panels 250 may be positioned on the basis of the guide line 210.

예를 들어, 제2 직육면체와 제3 직육면체가 일정한 각도를 가지는 연결 구조를 통해 연결될 수 있다. 연결 구조(240)는 제2 직육면체의 일면(예를 들어, 아랫면)과 제3 직육면체의 일면(예를 들어, 윗면)을 연결하는 구조일 수 있다. 이때, 제2 직육면체의 일면과 제3 직육면체의 일면을 연결하는 연결 구조(240)는 직육면체가 아닌 6면체 형태일 수 있다.For example, the second rectangular parallelepiped and the third rectangular parallelepiped can be connected through a connection structure having a certain angle. The connection structure 240 may be a structure that connects one surface (e.g., lower surface) of the second rectangular parallelepiped and one surface (e.g., upper surface) of the third rectangular parallelepiped. At this time, the connecting structure 240 connecting one surface of the second rectangular parallelepiped and one surface of the third rectangular parallelepiped may be in the form of a hexahedron rather than a rectangular parallelepiped.

제2 직육면체 상에서는 제2 직육면체의 일면과 평행한 평행면1에 제1 카테고리 패널이 위치하고, 제2 직육면체의 일면과 평행한 평행면2에 제2 카테고리 패널이 위치할 수 있다. 제3 직육면체 상에서는 제3 직육면체의 일면과 평행한 평행면3에 제3 카테고리 패널이 위치하고, 제3 직육면체의 일면과 평행한 평행면4에 제2 카테고리 패널이 위치할 수 있다.On the second rectangular parallelepiped, the first category panel may be located on a parallel plane 1 parallel to one surface of the second rectangular parallelepiped, and the second category panel may be located on a parallel plane 2 parallel to one surface of the second rectangular parallelepiped. On the third rectangular parallelepiped, the third category panel is located on the parallel plane 3 parallel to one side of the third rectangular parallelepiped, and the second category panel is located on the parallel plane 4 parallel to one side of the third rectangular parallelopiped.

즉, 대기모드에서는 카테고리 패널(250)의 위치를 결정하는 가이드 라인(210)은 다양한 방식으로 시간의 흐름에 따라 변화될 수 있고, 가이드 라인(210)의 변화에 따라, 카테고리 패널(250)의 위치가 결정될 수 있다. 대기 모드에서는 복수의 사용자들을 위한 카테고리 패널(예를 들어, 카드 메뉴)(250)가 물 흐르듯이 돌고 있고,　복수의 사용자 각각이 필요한 카테고리 패널(250)을 자신의 앞의 터치 패널의 영역 상에 가지고 오면, 사용자 정보창이 생성될 수 있다. 사용자는 사용자 정보창 상에서 제공되는 컨텐츠를 활용할 수 있다.That is, in the idle mode, the guideline 210 for determining the position of the category panel 250 can be changed in a variety of ways over time, and according to the change in the guideline 210, The position can be determined. In the idle mode, a category panel (e.g., a card menu) 250 for a plurality of users is running around and a category panel 250, each of which requires a plurality of users, If so, a user information window can be created. The user can utilize the contents provided on the user information window.

도 3은 본 발명의 실시예에 따른 카테고리 패널의 위치를 결정하기 위한 가이드라인의 움직임 방법을 나타낸 개념도이다.3 is a conceptual diagram illustrating a method of moving a guide line for determining a position of a category panel according to an embodiment of the present invention.

도 3에서는 시간의 변화에 따른 가이드라인의 움직임이 보다 구체적으로 개시된다. In Fig. 3, the movement of the guideline according to the change of time is more specifically disclosed.

도 3을 참조하면, 가이드라인의 제1 상태(310)는 가이드라인이 하나의 직육면체를 형성하는 상태일 수 있다.Referring to FIG. 3, the first state 310 of the guideline may be a state in which the guideline forms a rectangular parallelepiped.

가이드라인의 제2 상태(320)는 가이드라인이 복수의 직육면체를 포함하고, 복수의 직육면체를 연결하는 연결 구조를 포함하는 형태일 수 있다. 제2 상태(320)에서 복수의 직육면체의 개수 및 연결 구조의 형상은 시간의 흐름에 따라 변화될 수 있다. The second state 320 of the guideline may be a form in which the guideline includes a plurality of rectangular parallelepipeds and includes a connection structure for connecting a plurality of rectangular parallelepipeds. In the second state 320, the number of the plurality of rectangular parallelepipeds and the shape of the connection structure can be changed according to the passage of time.

가이드라인은 제1 상태(310)에서 제1 설정 시간이 경과된 후, 제2 상태(320)로 변화될 수 있다. 제1 상태(310)에서 제2 상태(320)로의 변화는 시간의 흐름에 따라 수행될 수 있다. 가이드라인은 제2 상태(320)로의 변화 후 다시 제1 상태(310)로 변화될 수 있다. The guideline may change to the second state 320 after the first set time elapses in the first state 310. [ The change from the first state 310 to the second state 320 may be performed over time. The guideline may change back to the first state 310 after changing to the second state 320. [

예를 들어, 제1 상태(310)에서 직육면체가 제1 직육면체와 제2 직육면체로 분할되고, 제1 직육면체와 제2 직육면체를 연결하는 연결 구조의 형태(각도, 길이)가 시간의 흐름에 따라 변경되어 가이드 라인이 제1 상태(310)에서 제2 상태(320)로 변화될 수 있다. 또한, 제2 상태(320)에서도 제2 직육면체는 추가적으로 복수의 직육면체로 다시 분할될 수 있고, 복수의 직육면체를 연결하는 연결 구조의 형태(각도, 길이)가 시간의 흐름에 따라 변경될 수 있다. 제2 상태(320)에서 설정된 변화가 종료된 후, 가이드라인은 다시 제2 상태(320)에서 제1 상태(310)로 변화될 수 있다.For example, in the first state 310, the rectangular parallelepiped is divided into the first rectangular parallelepiped and the second rectangular parallelepiped, and the shape (angle, length) of the connecting structure connecting the first rectangular parallelepiped and the second rectangular parallelepiped is changed So that the guideline can be changed from the first state 310 to the second state 320. Also, in the second state 320, the second rectangular parallelepiped can be further divided into a plurality of rectangular parallelepipeds, and the shape (angle, length) of the connecting structure connecting the plurality of rectangular parallelepipeds can be changed according to the passage of time. After the set change in the second state 320 ends, the guideline may change from the second state 320 back to the first state 310 again.

이러한 가이드라인의 변화에 따라 직육면체의 평행면 상에 위치한 카테고리 패널의 위치도 함께 가이드라인을 따라서 변화될 수 있다. 가이드라인의 변화에 따라 복수의 카테고리 패널이 위치하는 복수의 패널 할당 위치 각각이 변화될 수 있다. 복수의 카테고리 패널 각각이 복수의 패널 할당 위치에 고정적으로 위치하는 것이 아니라, 복수의 카테고리 패널 각각이 위치한 복수의 패널 할당 위치가 설정된 시간에 따라 변화될 수 있다. 예를 들어, 제1 설정 시간 구간에 제1 카테고리 패널이 제1 패널 할당 위치에 위치하고, 제2 카테고리 패널이 제2 패널 할당 위치에 위치한 경우가 가정될 수 있다. 제1 설정 시간 구간에서 제2 설정 시간 구간으로의 시간의 변화에 따라 제1 카테고리 패널이 제2 패널 할당 위치에 위치하고, 제2 카테고리 패널이 제1 패널 할당 위치에 위치할 수 있다.The position of the category panel located on the parallel plane of the rectangular parallelepiped can be changed along with the guideline according to the change of the guideline. Each of the plurality of panel assignment positions where the plurality of category panels are located can be changed in accordance with the change of the guideline. Each of the plurality of category panels is not fixedly located at the plurality of panel allocation positions but a plurality of panel allocation positions at which the plurality of category panels are located may be changed according to the set time. For example, it can be assumed that the first category panel is located at the first panel allocation position and the second category panel is located at the second panel allocation position in the first set time period. The first category panel may be located at the second panel allocation position and the second category panel may be located at the first panel allocation position in accordance with the change of time from the first set time period to the second set time period.

가이드라인의 시간에 따른 변화와 카테고리 패널 각각이 위치한 복수의 패널 할당 위치의 변화는 독립적으로 수행될 수도 있고, 종속적으로 수행될 수도 있다. The change over time of the guideline and the change in the plurality of panel allocation positions where the category panels are located may be performed independently or depending on the change.

구체적으로 가이드 라인의 시간에 따른 변화가 발생하는 경우, 카테고리 패널의 패널 할당 위치의 시간에 따른 변화가 종속적인 관계를 가질 수도 있다. 예를 들어, 가이드 라인이 제1 형상에서 제2 형상으로 변화된 경우, 카테고리 패널의 패널 할당 위치가 그에 따라 변화될 수 있다. 반대로, 가이드 라인의 시간에 따른 변화와 무관하게 별도의 설정된 시간에 따라 카테고리 패널의 패널 할당 위치가 변화될 수도 있다.Specifically, when a change occurs in the guideline over time, the change over time of the panel assignment position of the category panel may have a dependent relationship. For example, when the guideline changes from the first shape to the second shape, the panel assignment position of the category panel can be changed accordingly. On the other hand, the panel allocation position of the category panel may be changed according to a separate set time irrespective of the change with time of the guideline.

또한, 본 발명의 실시예에 따르면, 터치 패널의 바탕화면의 색상은 시간에 따라 변할 수 있고, 가이드 라인의 변화는 바탕화면의 색상에 따라 변화될 수 있다.In addition, according to the embodiment of the present invention, the color of the desktop screen of the touch panel can be changed with time, and the change of the guide line can be changed according to the color of the desktop screen.

도 4는 본 발명의 실시예에 따른 멀티 터치 디스플레이 시스템의 제1 사용 모드를 나타낸 개념도이다.4 is a conceptual diagram illustrating a first mode of use of a multi-touch display system according to an embodiment of the present invention.

도 4에서는 사용자가 카테고리 패널을 선택하고, 선택된 카테고리 패널을 편리하게 활용하기 위한 멀티 터치 디스플레이 시스템의 제1 사용 모드가 개시된다.In FIG. 4, a first mode of use of a multi-touch display system for the user to select a category panel and to conveniently utilize the selected category panel is disclosed.

도 4를 참조하면, 멀티 터치 디스플레이 상에서 출력되는 카테고리 패널(400)이 사용자에 의한 터치를 기반으로 선택되고, 터치 후 드래그를 통해 특정한 위치로 이동될 수 있다. 카테고리 패널(400)은 사용자의 터치 앤 드래그(450)를 통해 특정한 위치에서 사용자 정보창으로 활용될 수 있다.Referring to FIG. 4, the category panel 400 displayed on the multi-touch display is selected based on a touch by a user, and can be moved to a specific position through a drag after the touch. The category panel 400 may be utilized as a user information window at a specific location through the user's touch and drag 450.

전술한 바와 같이 멀티 터치 디스플레이의 터치 패널 상에서 카테고리 패널(400)의 위치는 시간에 따라 변할 수 있고, 시간에 따라 변화하는 카테고리 패널(400)의 위치가 변화되는 경우, 멀티 터치 디스플레이 시스템은 변화되는 카테고리 패널(400)의 위치에 대한 정보를 지속적으로 업데이트하여 현재 카테고리 패널(400)의 위치에 대한 정보를 알 수 있다.As described above, the position of the category panel 400 on the touch panel of the multi-touch display may change with time, and when the position of the category panel 400 that changes with time is changed, Information about the position of the category panel 400 can be constantly updated so that information on the position of the current category panel 400 can be known.

카테고리 패널(400) 상의 터치 위치가 현재 카테고리 패널 영역에 포함되는 경우, 멀티 터치 디스플레이 시스템은 카테고리 패널(400)에 대한 선택을 위한 터치 신호의 발생으로 판단할 수 있다.When the touch position on the category panel 400 is included in the current category panel area, the multi-touch display system can determine that the touch signal for selection for the category panel 400 is generated.

카테고리 패널(400)에 대한 터치 신호의 발생이 탐지되는 경우, 멀티 터치 디스플레이 시스템은 카테고리 패널(400)의 선택을 알리기 위해 선택된 카테고리 패널(400)의 색깔 또는 이미지를 변형시킬 수도 있다. When the occurrence of a touch signal to the category panel 400 is detected, the multi-touch display system may modify the color or image of the selected category panel 400 to signal the selection of the category panel 400.

카테고리 패널(400)의 선택을 위한 터치 신호의 발생 이후, 설정 시간 이내에 드래그 신호가 터치 패널 상에서 발생하는 경우, 멀티 터치 디스플레이 시스템은 터치 신호를 기반으로 선택된 카테고리 패널(400)을 드래그 신호에 따라 이동시킬 수 있다.When a drag signal is generated on the touch panel within a predetermined time after the generation of the touch signal for selection of the category panel 400, the multi-touch display system moves the selected category panel 400 based on the touch signal, .

예를 들어, 드래그 신호가 제1 방향으로 발생하는 경우, 멀티 터치 디스플레이 시스템은 카테고리 패널(400)을 제1 방향으로 이동시킬 수 있다. For example, when a drag signal occurs in a first direction, the multi-touch display system may move the category panel 400 in a first direction.

위와 같은 방식으로 사용자는 원하는 정보를 포함하는 카테고리 패널(400)을 선택하고, 선택된 카테고리 패널(400)을 사용자의 주변으로(또는 가까이로) 이동시키고 생성된 사용자 정보창 상에서 필요한 정보를 확인하거나 추가적인 정보를 입력할 수 있다.In this manner, the user selects the category panel 400 containing the desired information, moves the selected category panel 400 to (or near) the user's perimeter, confirms necessary information on the created user information window, Can be input.

또한, 본 발명의 실시예에 따른 멀티 터치 디스플레이 시스템은 복수의 사용자에 의해 사용 가능하므로 사용자에 의해 선택된 카테고리 패널(400)이 드래그되는 경우, 다른 사용자에 의해서도 동일한 카테고리 패널(400)의 선택이 가능하도록 카테고리 패널(400)은 터치 패널 상의 메뉴 구조 상에 계속 위치할 수 있다. 즉, 사용자가 터치 앤 드래그 방식(450)으로 특정 카테고리 패널(400)을 선택하여 드래깅하는 경우, 선택된 특정 카테고리 패널(400)이 사용자 방향으로 이동하여 제공되는 것과 별도로 선택된 특정 카테고리 패널(400)은 UI/UX의 기본 선택 화면 상에 그대로 위치할 수 있다. 즉, 복수의 사용자가 터치 패널에 구현된 메뉴 상에서 동일한 카테고리 패널(400)을 터치 앤 드래그 방식(450)으로 이동시켜 카테고리 패널(400)을 통해 정보를 제공받을 수 있다.In addition, since the multi-touch display system according to the embodiment of the present invention can be used by a plurality of users, when the category panel 400 selected by the user is dragged, the same category panel 400 can be selected by other users The category panel 400 may remain on the menu structure on the touch panel. That is, when the user selects and dragges the specific category panel 400 by the touch and drag method 450, the specific category panel 400 selected separately from the selected specific category panel 400 is provided for moving in the user direction It can be located on the default selection screen of UI / UX. That is, a plurality of users can receive the information through the category panel 400 by moving the same category panel 400 on the menu implemented in the touch panel to the touch-and-drag method 450.

이뿐만 아니라, 멀티 터치 디스플레이 시스템은 사용자의 위치를 고려하여 선택된 카테고리 패널(400)의 제공 방향을 결정할 수 있다. 예를 들어, 테이블에 멀티 터치 디스플레이 시스템이 구현되는 경우, 터치 패널 상에서 카테고리 패널들(400)이 테이블의 제 1면 방향으로 위치할 수 있다. 즉, 카테고리 패널들(400)을 구성하는 이미지나, 글자가 테이블의 제 1 면 방향에서 정방향으로 읽히도록 카테고리 패널(400)이 위치할 수 있다.In addition, the multi-touch display system can determine the providing direction of the selected category panel 400 considering the position of the user. For example, when a multi-touch display system is implemented on a table, the category panels 400 on the touch panel may be positioned in the first surface direction of the table. That is, the category panel 400 may be positioned such that the images or characters constituting the category panels 400 are read in the forward direction from the first surface direction of the table.

만약, 사용자가 제1 면에 위치하여 터치 앤 드래그 방식(450)으로 카테고리 패널(400)을 이동시키는 경우, 카테고리 패널(400)의 방향은 변화시킬 필요가 없으므로 별도의 방향 변화 없이 이동될 수 있다. 또는, 사용자가 제1 면의 반대 방향인 제2 면에 위치하여 터치 앤 드래그 방식(450)으로 카테고리 패널을 이동시키는 경우, 카테고리 패널은 제2 면에 위치한 사용자에게 맞는 방향으로 방향을 180도 전환하여 이동될 수 있다. 즉, 멀티 터치 디스플레이 시스템은 드래그의 방향을 기반으로 카테고리 패널(400)의 방향의 전환 여부를 결정한 후 카테고리 패널(400)을 사용자에게 제공할 수 있다.If the user moves the category panel 400 in the touch-and-drag mode 450 by being positioned on the first side, the direction of the category panel 400 need not be changed and can be moved without any change in direction . Alternatively, if the user is located on a second side opposite to the first side and moves the category panel in a touch-and-drag manner 450, the category panel switches the direction 180 degrees in a direction that is appropriate for the user located on the second side . That is, the multi-touch display system can determine whether to change the direction of the category panel 400 based on the direction of the drag, and then provide the category panel 400 to the user.

도 5는 본 발명의 실시예에 따른 멀티 터치 디스플레이 시스템의 제1 사용 모드를 나타낸 개념도이다.5 is a conceptual diagram illustrating a first mode of use of a multi-touch display system according to an embodiment of the present invention.

도 5에서는 터치 앤드 드래그가 사용자에 의해 발생한 경우, 사용자가 카테고리 패널을 보다 용이하게 사용 가능한 위치로 이동시키기 위한 멀티 터치 디스플레이 시스템의 제1 사용 모드 동작이 개시된다.In FIG. 5, when the touch and drag is generated by the user, the first use mode operation of the multi-touch display system for moving the category panel to a usable position is started.

도 5를 참조하면, 사용자는 특정 위치에서 멀티 터치 디스플레이 시스템의 터치 패널을 사용할 수 있다.Referring to FIG. 5, a user can use a touch panel of a multi-touch display system at a specific position.

예를 들어, 멀티 터치 디스플레이 시스템이 테이블 상에 구현되는 경우, 테이블의 주변으로 복수의 사용자가 위치할 수 있다. 멀티 터치 디스플레이 시스템은 복수의 사용자 각각의 위치를 고려하여 사용자에게 제공되는 사용자 정보창의 위치를 결정할 수 있다. 즉, 멀티 터치 디스플레이 시스템은 사용자의 드래깅 방향뿐만 아니라 사용자의 중심 위치를 고려하여 사용자에게 제공되는 사용자 정보창의 위치를 결정할 수 있다. 사용자의 중심 위치는 터치 패널을 활용하는 사용자의 중앙 지점(예를 들어, 배꼽 위치)일 수 있다. For example, when a multi-touch display system is implemented on a table, a plurality of users can be located around the table. The multi-touch display system can determine the position of the user information window provided to the user in consideration of the position of each of the plurality of users. That is, the multi-touch display system can determine the position of the user information window provided to the user in consideration of the dragging direction of the user as well as the center position of the user. The center position of the user may be the central point of the user utilizing the touch panel (e.g., the navel position).

예를 들어, 사용자가 카테고리 패널에 대해 제1 방향(510)으로 드래깅을 한 경우에도 제1 방향(510)은 사용자의 중심 위치를 고려한 제1' 방향(520)으로 보정되고, 카테고리 패널을 기반으로 생성되는 사용자 정보창은 제1' 방향(520)으로 이동되어 출력될 수 있다.For example, even if the user dragged the category panel in the first direction 510, the first direction 510 is corrected to the first direction 520 considering the center position of the user, The user information window may be moved in the first direction 520 and output.

멀티 터치 디스플레이 시스템은 사용자 중심 위치를 결정하기 위해 다양한 방법을 사용할 수 있다.The multi-touch display system can use various methods to determine the user-centered position.

멀티 터치 디스플레이 시스템에서는 사용자 정보(예를 들어, 사용자의 수, 사용자의 중심 위치 등)를 획득하기 위한 추가적인 장치가 활용될 수 있다. 예를 들어, 멀티 터치 디스플레이 시스템을 이용하는 사용자 정보를 획득하기 위한 영상 촬상 장치가 부가적으로 활용될 수 있다. 영상 촬상 장치는 멀티 터치 디스플레이 시스템을 사용하는 사용자들의 이미지를 촬상할 수 있다. 영상 촬상 장치에 의해 촬상된 영상 정보는 멀티 터치 디스플레이 시스템으로 전송될 수 있다. 멀티 터치 디스플레이 시스템은 촬상된 영상 정보를 기반으로 사용자의 위치(또는 사용자 중심 위치), 사용자의 수 등과 같은 사용자 정보를 판단할 수 있다. 멀티 터치 디스플레이 시스템은 사용자 중심 위치를 고려하여 사용자의 드래깅 방향에 대한 보정을 수행할 수 있다.In a multi-touch display system, additional devices for obtaining user information (e.g., number of users, center position of the user, etc.) may be utilized. For example, an image capturing apparatus for acquiring user information using a multi-touch display system can be additionally utilized. The image capturing apparatus can capture images of users using the multi-touch display system. The image information captured by the image capturing apparatus can be transmitted to the multi-touch display system. The multi-touch display system can determine user information such as a user's location (or a user-centered location) and the number of users based on the captured image information. The multi-touch display system can perform correction for the dragging direction of the user in consideration of the user-centered position.

많은 사용자들이 팔을 사용하여 드래깅하는 경우, 팔의 구조 상 사용자의 중심 위치로 드래깅이 수행되기 보다는 사용자의 팔이 용이하게 이동하는 방향에 따라 드래깅이 수행될 수 있다. 예를 들어, 사용자가 오른손잡이이고 오른 팔을 사용하여 드래깅이 수행되는 경우, 사용자의 중심보다 조금 오른쪽으로 치우친 방향으로 드래깅이 수행될 수 있다.When a large number of users are dragged using an arm, dragging can be performed according to the direction in which the arm of the user is easily moved rather than the dragging to the center position of the user in the structure of the arm. For example, if the user is right-handed and the dragging is performed using the right arm, dragging may be performed in a direction slightly offset to the right of the user's center.

멀티 터치 디스플레이 시스템에서는 드래깅 방향뿐만 아니라 사용자 이미지 정보를 기반으로 획득된 사용자의 중심 위치를 추가적으로 고려하여 드래깅 방향을 일부 수정하여 사용자 정보창이 보다 사용자 중심에 위치하도록 사용자 정보창의 위치를 수정할 수 있다.In the multi-touch display system, it is possible to modify the position of the user information window such that the user information window is positioned more at the center of the user by modifying the dragging direction in addition to the dragging direction as well as the center position of the user acquired based on the user image information.

전술한 예와 같이 사용자가 오른손잡이이고 오른팔을 사용하여 드래깅이 수행되는 경우가 가정될 수 있다. 만약, 사용자의 중심보다 조금 오른쪽으로 치우친 방향으로 드래깅이 수행된다면, 멀티 터치 디스플레이 시스템은 드래깅 방향에 추가적으로 사용자 중심 위치에 대한 정보를 고려하여 보다 사용자의 중심으로 카테고리 패널의 이동 방향을 조정할 수 있다. 조정된 이동 방향으로 이동한 카테고리 패널은 사용자 정보창으로 변화될 수 있다. 이러한 사용자 정보창의 위치 조정을 기반으로 복수의 사용자가 사용하는 터치 패널의 공간에서 발생되는 사용자 간의 간섭도 감소시킬 수 있다.It can be assumed that the user is right-handed and the dragging is performed using the right arm as in the above-described example. If the dragging is performed in a direction slightly offset to the right of the center of the user, the multi-touch display system can further adjust the moving direction of the category panel to the center of the user in consideration of the information on the user centered position in addition to the dragging direction. The category panel moved in the adjusted moving direction can be changed to the user information window. It is possible to reduce the interference between users generated in the space of the touch panel used by a plurality of users based on the position adjustment of the user information window.

멀티 터치 디스플레이 시스템에서 사용자의 수, 사용자의 중심 위치를 판단하기 위한 추가적인 장치로서 영상 촬상 장치가 아닌 다른 장치가 활용될 수도 있다. 예를 들어, 멀티 터치 디스플레이 시스템 자체에서 사용자의 터치를 기반으로 사용자의 중심 위치가 판단될 수도 있다. 멀티 터치 디스플레이 시스템은 사용자의 터치에 대한 정보를 수집하여 사용자의 중심 위치를 결정할 수도 있다.As an additional device for determining the number of users and the center position of the user in the multi-touch display system, a device other than the image pickup device may be utilized. For example, the center position of the user may be determined based on the user's touch in the multi-touch display system itself. The multi-touch display system may collect information on the user's touch and determine the center position of the user.

구체적으로 터치면의 형태를 고려하여 오른손을 사용하는지 왼손을 사용하는지를 판단하고, 오른손의 위치 및 왼손의 위치를 기준으로 사용자의 중심 위치가 결정될 수 있다. 예를 들어, 사용자가 오른손잡이인 경우, 오른손의 손가락(예를 들어, 오른손 검지)를 이용하여 터치를 수행할 수 있다. 이러한 경우, 오른손의 손가락의 우측면으로 터치 패널을 터치할 가능성이 크다. 사용자가 왼손잡이인 경우, 왼손의 손가락(예를 들어, 왼손 검지)를 이용하여 터치를 수행할 수 있다. 이러한 경우, 왼손의 손가락의 좌측면으로 터치 패널을 터치할 가능성이 크다. 오른손 검지의 우측면과 왼손 검지의 좌측면이 형성하는 터치면은 서로 다른 형상을 가질 수 있다.Specifically, it is determined whether the right hand or the left hand is used in consideration of the shape of the touch surface, and the center position of the user can be determined based on the position of the right hand and the position of the left hand. For example, when the user is a right-handed person, a touch can be performed using a finger of the right hand (for example, a right-hand index finger). In such a case, there is a high possibility that the touch panel is touched to the right side of the finger of the right hand. If the user is left-handed, the touch can be performed using a finger of the left hand (for example, the left hand detection). In such a case, there is a high possibility that the touch panel is touched to the left side of the finger of the left hand. The touch surface formed by the right side surface of the right hand index finger and the left side surface of the left hand finger can have different shapes.

이러한 터치면에 대한 정보를 기반으로 사용자가 오른손을 사용하였는지 왼손을 사용하는지를 판단하고, 사용자의 중심 위치를 결정할 수 있다. 이후, 사용자의 입력이 보다 용이하도록 사용자 정보창의 위치가 사용자의 중심 위치를 고려하여 보정될 수 있다. Based on the information about the touch surface, it is possible to determine whether the user uses the right hand or the left hand and determine the center position of the user. Then, the position of the user information window can be corrected in consideration of the center position of the user so that the user's input is easier.

또한, 터치의 방향별 압력 정보를 기반으로 사용자의 중심 위치가 결정될 수도 있다. 사람의 몸의 중심에 가까울수록 누르는 압력이 더 클 수 있다. 이러한 터치의 방향별 압력 정보를 고려하여 사용자의 중심 위치를 결정할 수 있다. 이후, 사용자의 입력이 보다 용이하도록 사용자 정보창의 위치가 사용자의 중심 위치를 고려하여 보정될 수 있다. Further, the center position of the user may be determined based on the pressure information of each direction of the touch. The closer you are to the center of your body, the greater the pressure you press. The center position of the user can be determined in consideration of the pressure information per direction of the touch. Then, the position of the user information window can be corrected in consideration of the center position of the user so that the user's input is easier.

도 6은 본 발명의 실시예에 따른 멀티 터치 디스플레이 시스템의 제2 사용 모드를 나타낸 개념도이다.6 is a conceptual diagram illustrating a second mode of use of the multi-touch display system according to the embodiment of the present invention.

도 6에서는 사용자가 카테고리 패널을 선택하고, 선택된 카테고리 패널을 편리하게 활용하기 위한 멀티 터치 디스플레이 시스템의 제2 사용 모드가 개시된다.6, a second mode of use of the multi-touch display system for the user to select a category panel and to conveniently utilize the selected category panel is disclosed.

도 6을 참조하면, 제2 사용 모드에서는 사용자 별로 제공된 사용자 정보창의 크기가 조절될 수 있다. 사용자에 의해 선택된 카테고리 패널이 이동되어 사용자에게 정보를 제공하기 위한 사용자 정보창이 생성될 수 있다.Referring to FIG. 6, the size of the user information window provided for each user can be adjusted in the second usage mode. A category panel selected by the user is moved and a user information window for providing information to the user can be generated.

제2 사용 모드에서는 사용자 정보창의 크기가 터치 앤 드래그(touch and drag) 방식으로 조절될 수 있다.In the second mode of operation, the size of the user information window can be adjusted by a touch and drag method.

사용자 정보창 영역에서 설정된 외곽 영역이 터치되는 경우, 멀티 터치 디스플레이 시스템은 해당 터치 신호를 사용자 터치 패널의 크기를 변화시키고자 하는 터치 신호로서 인식할 수 있다. 터치 이후, 설정된 시간 이내에 사용자 정보창의 외곽이 드래그되는 경우, 사용자 정보창의 크기가 드래그 방향에 따라 변화될 수 있다. 예를 들어, 사용자 정보창 영역의 외부를 향하는 제1 방향으로 드래그 신호가 발생되는 경우, 사용자 정보창의 크기를 제1 방향으로 확대시킬 수 있다. 반대로, 사용자 정보창 영역의 내부를 향하는 제2 방향으로 드래그 신호가 발생되는 경우, 사용자 정보창의 크기를 제2 방향으로 축소시킬 수 있다.In the case where an outer area set in the user information window area is touched, the multi-touch display system can recognize the touch signal as a touch signal to change the size of the user touch panel. If the outline of the user information window is dragged within a set time after the touch, the size of the user information window may be changed according to the drag direction. For example, when the drag signal is generated in the first direction toward the outside of the user information window area, the size of the user information window can be enlarged in the first direction. On the contrary, when the drag signal is generated in the second direction toward the inside of the user information window area, the size of the user information window can be reduced to the second direction.

사용자 정보창이 사각형이고, 제1 방향 또는 제2 방향이 세로 또는 가로인 경우, 사용자 정보창이 세로 방향 또는 가로 방향으로만 축소 또는 확대될 수 있다. 또는 사용자 정보창이 사각형이고, 제1 방향 또는 제2 방향이 세로 또는 가로인 경우에도 비율을 고려하여 사용자 정보창의 크기 비율을 고려하여 세로뿐만 아니라 가로로도 사용자 정보창의 크기를 축소 또는 확대할 수 있다.If the user information window is rectangular and the first or second direction is vertical or horizontal, the user information window may be reduced or enlarged only in the vertical or horizontal direction. Or the user information window is rectangular and the first direction or the second direction is vertical or horizontal, the size of the user information window can be reduced or enlarged horizontally as well as vertically considering the size ratio of the user information window in consideration of the ratio .

사용자 정보창이 사각형이고, 제1 방향 또는 제2 방향이 사선 방향인 경우, 사용자 정보창이 사선 방향으로 축소 또는 확대될 수 있다. When the user information window is rectangular and the first direction or the second direction is oblique, the user information window may be reduced or enlarged in diagonal directions.

도 7은 본 발명의 실시예에 따른 멀티 터치 디스플레이 시스템의 제2 사용 모드를 나타낸 개념도이다.7 is a conceptual diagram illustrating a second use mode of the multi-touch display system according to the embodiment of the present invention.

도 7에서는 사용자 정보창의 크기를 조절하기 위한 터치 신호 및 드래그 신호가 발생된 경우, 멀티 터치 디스플레이 시스템을 사용하는 다른 사용자와의 간섭을 피하면서 사용자에게 정보를 제공하기 위한 방법이 개시된다.7 illustrates a method for providing information to a user while avoiding interference with another user using a multi-touch display system when a touch signal and a drag signal for controlling the size of a user information window are generated.

도 7을 참조하면, 도 5에서 전술한 바와 같이 멀티 터치 디스플레이 시스템에서 사용자의 수, 사용자의 중심 위치를 판단하기 위한 영상 촬상 장치가 활용될 수 있다. Referring to FIG. 7, an image capturing apparatus for determining the number of users and the center position of a user in the multi-touch display system may be utilized as described above with reference to FIG.

멀티 터치 디스플레이 시스템은 영상 촬상 장치에 의해 촬상된 사용자에 대한 영상 정보를 기반으로 사용자의 수 및 사용자의 중심 위치를 결정할 수 있다. 멀티 터치 디스플레이 시스템은 사용자의 수 및 사용자의 중심 위치에 대한 정보를 기반으로 멀티 터치 디스플레이 시스템을 활용하는 복수의 사용자 각각을 위한 한계 영역을 설정할 수 있다. The multi-touch display system can determine the number of users and the center position of the user based on the image information of the user captured by the image capturing apparatus. The multi-touch display system can set a limit area for each of a plurality of users utilizing the multi-touch display system based on information on the number of users and the center position of the user.

예를 들어, 영상 촬상 장치는 사용자1 내지 사용자10이 멀티 터치 디스플레이 시스템을 활용하는 영상을 촬상하여 멀티 터치 디스플레이 시스템으로 전송할 수 있다. 멀티 터치 디스플레이 시스템은 영상 정보를 기반으로 사용자의 수 및 사용자의 중심 위치를 판단할 수 있다. 이후, 멀티 터치 디스플레이 시스템은 사용자 1 내지 사용자 10 각각에게 터치 패널 상에서 활용 가능한 한계 영역(700)을 설정할 수 있다. 한계 영역(700)은 사용자 간의 밀집도에 따라 사용자 별로 다를 수 있다. 예를 들어, 사용자1, 사용자2, 사용자3 간의 간격이 사용자6 및 사용자 7 간의 간격보다 좁은 경우, 사용자1, 사용자2, 사용자3 각각의 한계 영역이 사용자6 및 사용자7 각각의 한계 영역(700)보다 좁게 설정될 수 있다. 사용자 간의 간격은 사용자 간의 중심 위치에 대한 정보를 기반으로 결정될 수 있다. 또한, 터치 패널을 사용하는 사용자가 적을수록 사용자에게 개별적으로 할당되는 한계 영역(700)은 넓어질 수 있다.For example, the image capturing apparatus can capture images using the multi-touch display system by the user 1 to the user 10 and transmit them to the multi-touch display system. The multi-touch display system can determine the number of users and the center position of the user based on the image information. After that, the multi-touch display system can set the limit area 700 available on the touch panel to each of the users 1 through 10. The marginal area 700 may vary from user to user depending on the density between users. For example, if the interval between user 1, user 2, and user 3 is narrower than the interval between user 6 and user 7, the limit area of each of user 1, user 2, ). ≪ / RTI > The interval between users can be determined based on information about the center position between users. In addition, the smaller the number of users using the touch panel, the wider the limit area 700 that is individually allocated to the user.

또한, 멀티 터치 디스플레이 시스템은 사용자에 의해 발생한 터치를 기반으로 사용자를 위한 한계 영역(700)을 설정할 수도 있다. 예를 들어, 사용자에 의해 터치 패널 상의 일정 영역 내에서 터치가 계속적으로 발생하는 경우, 터치에 대한 기록을 수집하여 터치 범위를 설정할 수 있다. 멀티 터치 디스플레이 시스템은 터치 범위를 고려하여 터치 패널 상에서 사용자의 한계 영역(700)을 설정할 수 있다.In addition, the multi-touch display system may set the limit area 700 for the user based on the touch generated by the user. For example, if the user continuously generates a touch within a predetermined area on the touch panel, the touch range can be set by collecting a record of the touch. The multi-touch display system can set the user's limit area 700 on the touch panel in consideration of the touch range.

도 8은 본 발명의 실시예에 따른 멀티 터치 디스플레이 시스템을 나타낸 개념도이다. 8 is a conceptual diagram illustrating a multi-touch display system according to an embodiment of the present invention.

도 8을 참조하면, 멀티 터치 디스플레이 시스템은 터치 패널(800) 및 프로세서(820)를 포함할 수 있다. Referring to FIG. 8, the multi-touch display system may include a touch panel 800 and a processor 820.

터치 패널(800)은 복수의 사용자에 의해 발생된 복수의 터치 신호를 중첩된 시간 자원 상에서 수신하도록 구현될 수 있다.The touch panel 800 may be configured to receive a plurality of touch signals generated by a plurality of users on overlapping time resources.

프로세서(820)는 상기 터치 패널과 동작 가능하게(operatively) 연결되어 상기 복수의 터치 신호를 기반으로 생성된 복수의 입력 신호를 처리하기 위해 구현될 수 있다.Processor 820 may be implemented to process a plurality of input signals operatively coupled to the touch panel and generated based on the plurality of touch signals.

프로세서(820)는 도 1 내지 도 7에서 전술한 멀티 터치 디스플레이 시스템의 동작을 수행하기 위해 구현될 수 있다. The processor 820 may be implemented to perform operations of the multi-touch display system described above with reference to Figs.

예를 들어, 프로세서(820)는 복수의 입력 정보를 중첩된 시간 자원 상에서 수신하고, 중첩된 시간 자원 상에서 복수의 입력 정보 각각에 따른 복수의 출력 정보 각각을 터치 패널(800) 상에 출력하도록 구현될 수 있다. For example, the processor 820 may receive a plurality of pieces of input information on overlapping time resources and output a plurality of pieces of output information corresponding to each of the plurality of pieces of input information on the overlapping time resources on the touch panel 800 .

또한, 프로세서(820)는 복수의 입력 정보에 따라 멀티 터치 디스플레이 시스템을 대기 모드 또는 사용 모드로 동작시킬 수 있다.In addition, the processor 820 may operate the multi-touch display system in a standby mode or a use mode according to a plurality of input information.

프로세서(820)는 터치 신호가 터치 패널 상에서 설정 시간 이상 발생되지 않을 경우, 멀티 터치 디스플레이 시스템을 대기 모드로 동작시킬 수 있다. 프로세서(820)는 대기 모드에서 터치 패널 상에 위치한 복수의 카테고리 패널을 가이드라인의 변화에 따라 이동시키고, 복수의 카테고리 패널 각각은 복수의 사용자에게 제공되는 복수의 메뉴 정보 각각과 대응되고, 가이드라인은 복수의 카테고리 패널의 움직임과 연동되어 변화되는 복수의 카테고리 패널의 외곽선일 수 있다. The processor 820 can operate the multi-touch display system in the standby mode when the touch signal is not generated on the touch panel for more than the set time. The processor 820 moves the plurality of category panels located on the touch panel in the standby mode according to the change of the guide line. Each of the plurality of category panels corresponds to each of a plurality of menu information provided to a plurality of users, May be an outline of a plurality of category panels that change in conjunction with movement of a plurality of category panels.

가이드라인은 제1 상태에서 제2 상태로 변화될 수 있다. 가이드라인은 제1 상태에서 제1 직육면체를 형성하고, 제1 직육면체의 일면과 평행한 면 상에 복수의 제1 카테고리 패널 할당 위치가 존재하고, 복수의 카테고리 패널 각각은 복수의 제1 카테고리 패널 할당 위치 각각에 위치할 수 있다.The guideline may change from the first state to the second state. The guideline forms a first rectangular parallelepiped in a first state, and a plurality of first category panel allocation positions exist on a plane parallel to one surface of the first rectangular parallelepiped, and each of the plurality of category panels includes a plurality of first category panel assignments ≪ / RTI > location.

또한, 가이드라인은 제2 상태에서 복수의 제2 직육면체 및 복수의 제2 직육면체 각각을 연결하는 적어도 하나의 연결 구조를 형성하고, 복수의 제2 직육면체의 일면에 평행한 면 상에 복수의 제2 카테고리 패널 할당 위치가 존재하고, 복수의 카테고리 패널은 복수의 제2 카테고리 패널 할당 위치 각각에 위치할 수 있다.Further, the guideline may include at least one connection structure for connecting the plurality of second rectangular parallelepipeds and the plurality of second rectangular parallelepipeds in the second state, and the plurality of second rectangular parallelepipeds may be formed on the plurality of second rectangular parallelepipeds, There is a category panel assignment position, and a plurality of category panels can be located in each of the plurality of second category panel assignment positions.

가이드라인은 터치 패널 상의 바탕화면 색상의 변화를 고려하여 제1 상태에서 상기 제2 상태로 변화될 수 있다. The guideline can be changed from the first state to the second state in consideration of the change of the background color on the touch panel.

또한, 프로세서(820)는 터치 신호가 터치 패널(820) 상에서 발생된 경우, 멀티 터치 디스플레이 시스템을 사용 모드로 동작시키고, 사용 모드는 제1 사용 모드 및 제2 사용 모드를 포함할 수 있다. 제1 사용 모드는 제1 터치 신호 및 제1 드래그 신호를 기반으로 복수의 카테고리 패널 중 하나의 카테고리 패널을 특정 위치로 이동시켜 사용자 정보창을 터치 패널(820) 상의 일부 영역에 활성화시킬 수 있다. 제2 사용 모드는 제2 터치 신호 및 제2 드래그 신호를 기반으로 사용자 정보창의 크기를 한계 영역 내에서 조정할 수 있다.In addition, when the touch signal is generated on the touch panel 820, the processor 820 operates the multi-touch display system in the use mode, and the use mode may include the first use mode and the second use mode. In the first use mode, the category panel of one of the plurality of category panels may be moved to a specific position based on the first touch signal and the first drag signal to activate the user information window on a partial area of the touch panel 820. The second usage mode may adjust the size of the user information window in the limit region based on the second touch signal and the second drag signal.

이상 설명된 본 발명에 따른 실시예는 다양한 컴퓨터 구성요소를 통하여 실행될 수 있는 프로그램 명령어의 형태로 구현되어 컴퓨터 판독 가능한 기록 매체에 기록될 수 있다. 상기 컴퓨터 판독 가능한 기록 매체는 프로그램 명령어, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 상기 컴퓨터 판독 가능한 기록 매체에 기록되는 프로그램 명령어는 본 발명을 위하여 특별히 설계되고 구성된 것이거나 컴퓨터 소프트웨어 분야의 당업자에게 공지되어 사용 가능한 것일 수 있다. 컴퓨터 판독 가능한 기록 매체의 예에는, 하드 디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체, CD-ROM 및 DVD와 같은 광기록 매체, 플롭티컬 디스크(floptical disk)와 같은 자기-광 매체(magneto-optical medium), 및 ROM, RAM, 플래시 메모리 등과 같은, 프로그램 명령어를 저장하고 실행하도록 특별히 구성된 하드웨어 장치가 포함된다. 프로그램 명령어의 예에는, 컴파일러에 의하여 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용하여 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드도 포함된다. 하드웨어 장치는 본 발명에 따른 처리를 수행하기 위하여 하나 이상의 소프트웨어 모듈로 변경될 수 있으며, 그 역도 마찬가지이다.The embodiments of the present invention described above can be implemented in the form of program instructions that can be executed through various computer components and recorded in a computer-readable recording medium. The computer-readable recording medium may include program commands, data files, data structures, and the like, alone or in combination. The program instructions recorded on the computer-readable recording medium may be those specifically designed and configured for the present invention or may be those known and used by those skilled in the computer software arts. Examples of computer-readable media include magnetic media such as hard disks, floppy disks and magnetic tape, optical recording media such as CD-ROM and DVD, magneto-optical media such as floptical disks, medium, and hardware devices specifically configured to store and execute program instructions, such as ROM, RAM, flash memory, and the like. Examples of program instructions include machine language code, such as those generated by a compiler, as well as high-level language code that can be executed by a computer using an interpreter or the like. The hardware device may be modified into one or more software modules for performing the processing according to the present invention, and vice versa.

이상에서 본 발명이 구체적인 구성요소 등과 같은 특정 사항과 한정된 실시예 및 도면에 의하여 설명되었으나, 이는 본 발명의 보다 전반적인 이해를 돕기 위하여 제공된 것일 뿐, 본 발명이 상기 실시예에 한정되는 것은 아니며, 본 발명이 속하는 기술분야에서 통상적인 지식을 가진 자라면 이러한 기재로부터 다양한 수정과 변경을 꾀할 수 있다.While the present invention has been particularly shown and described with reference to exemplary embodiments thereof, it is to be understood that the invention is not limited to the disclosed embodiments, but, on the contrary, Those skilled in the art will appreciate that various modifications and changes may be made thereto without departing from the scope of the present invention.

따라서, 본 발명의 사상은 상기 설명된 실시예에 국한되어 정해져서는 아니 되며, 후술하는 특허청구범위뿐만 아니라 이 특허청구범위와 균등한 또는 이로부터 등가적으로 변경된 모든 범위는 본 발명의 사상의 범주에 속한다고 할 것이다.Accordingly, the spirit of the present invention should not be construed as being limited to the above-described embodiments, and all ranges that are equivalent to or equivalent to the claims of the present invention as well as the claims .

Claims (11)

멀티 터치 디스플레이의 구동 방법은,
멀티 터치 디스플레이 시스템이 터치 패널을 통해 터치 기반의 복수의 입력 정보를 중첩된 시간 자원 상에서 수신하는 단계; 및
상기 멀티 터치 디스플레이 시스템이 중첩된 시간 자원 상에서 상기 복수의 입력 정보 각각에 따른 복수의 출력 정보 각각을 상기 터치 패널 상에 출력하는 단계를 포함하되,
상기 멀티 터치 디스플레이 시스템은 상기 복수의 입력 정보에 따라 대기 모드 또는 사용 모드로 동작하고,
상기 멀티 터치 디스플레이 시스템은 사용자의 상기 터치 패널 상의 드래그(drag) 방향을 기반으로 상기 터치 패널 상의 카테고리 패널의 방향의 전환 여부를 결정한 후 상기 카테고리 패널을 상기 사용자의 방향으로 출력하고,
상기 멀티 터치 디스플레이 시스템은 상기 사용자의 중심 방향을 고려하여 상기 드래그 방향을 상기 중심 방향으로 보정하고,
상기 중심 방향은 상기 사용자의 터치 정보를 수집하여 결정되는 것을 특징으로 하는 방법.A method of driving a multi-
A multi-touch display system, comprising: receiving a plurality of touch-based input information on a superimposed time resource through a touch panel; And
And outputting, on the touch panel, each of a plurality of pieces of output information corresponding to each of the plurality of pieces of input information on the overlapped time resources of the multi-touch display system,
Wherein the multi-touch display system operates in a standby mode or a use mode according to the plurality of input information,
Wherein the multi-touch display system determines whether to change the direction of the category panel on the touch panel based on a drag direction of the touch panel of the user, outputs the category panel in the direction of the user,
Wherein the multi-touch display system corrects the drag direction to the center direction in consideration of the center direction of the user,
Wherein the center direction is determined by collecting touch information of the user. 제1항에 있어서,
상기 멀티 터치 디스플레이 시스템은 영상 촬상 장치에 의해 촬상된 사용자에 대한 영상 정보를 기반으로 상기 터치 패널을 이용하는 적어도 하나의 사용자의 수 및 상기 적어도 하나의 사용자 각각의 중심을 결정하고,
상기 멀티 터치 디스플레이 시스템은 상기 적어도 하나의 사용자의 수 및 상기 적어도 하나의 사용자 각각의 중심에 대한 정보를 기반으로 상기 터치 패널 상에서 상기 적어도 하나의 사용자 각각의 한계 영역을 설정하는 것을 특징으로 하는 방법.The method according to claim 1,
Wherein the multi-touch display system determines the number of at least one user using the touch panel and the center of each of the at least one user based on image information about the user captured by the image capturing apparatus,
Wherein the multi-touch display system sets a limit area of each of the at least one user on the touch panel based on information about the number of the at least one user and the center of each of the at least one user. 제2항에 있어서,
터치 신호가 상기 터치 패널 상에서 설정 시간 이상 발생되지 않을 경우, 상기 멀티 터치 디스플레이 시스템은 상기 대기 모드로 동작하고,
상기 멀티 터치 디스플레이 시스템은 상기 대기 모드에서 상기 터치 패널 상에 위치한 복수의 카테고리 패널을 가이드라인의 변화에 따라 이동되도록 하고,
상기 복수의 카테고리 패널 각각은 복수의 사용자에게 제공되는 복수의 메뉴 정보 각각과 대응되고,
상기 가이드라인은 상기 복수의 카테고리 패널의 움직임과 연동되어 변화되는 상기 복수의 카테고리 패널의 외곽선이고,
상기 가이드라인은 제1 상태에서 제2 상태로 변화되고,
상기 가이드라인은 상기 제1 상태에서 제1 직육면체를 형성하고,
상기 제1 직육면체의 일면과 평행한 면 상에 복수의 제1 카테고리 패널 할당 위치가 존재하고,
상기 복수의 카테고리 패널 각각은 상기 복수의 제1 카테고리 패널 할당 위치 각각에 위치하고,
상기 가이드라인은 상기 제2 상태에서 복수의 제2 직육면체 및 상기 복수의 제2 직육면체 각각을 연결하는 적어도 하나의 연결 구조를 형성하고,
상기 복수의 제2 직육면체의 일면에 평행한 면 상에 복수의 제2 카테고리 패널 할당 위치가 존재하고,
상기 복수의 카테고리 패널은 상기 복수의 제2 카테고리 패널 할당 위치 각각에 위치하는 것을 특징으로 하는 방법.3. The method of claim 2,
When the touch signal is not generated on the touch panel for more than the set time, the multi-touch display system operates in the standby mode,
Wherein the multi-touch display system moves the plurality of category panels located on the touch panel in the standby mode according to the change of the guide line,
Wherein each of the plurality of category panels corresponds to each of a plurality of menu information provided to a plurality of users,
Wherein the guideline is an outline of the plurality of category panels changed in association with the movement of the plurality of category panels,
The guideline changes from a first state to a second state,
The guide line forms a first rectangular parallelepiped in the first state,
A plurality of first category panel allocation positions exist on a plane parallel to one surface of the first rectangular parallelepiped,
Wherein each of the plurality of category panels is located in each of the plurality of first category panel assignment positions,
Wherein the guide line forms at least one connection structure connecting the plurality of second rectangular parallelepipeds and the plurality of second rectangular parallelepipeds in the second state,
A plurality of second category panel allocation positions exist on a plane parallel to one surface of the plurality of second rectangular parallelepipeds,
Wherein the plurality of category panels are located in each of the plurality of second category panel assignment locations. 제3항에 있어서,
상기 가이드라인은 상기 터치 패널 상의 바탕화면 색상의 변화를 고려하여 상기 제1 상태에서 상기 제2 상태로 변화되는 것을 특징으로 하는 방법.The method of claim 3,
Wherein the guide line changes from the first state to the second state in consideration of a change in background color on the touch panel. 제4항에 있어서,
상기 터치 신호가 상기 터치 패널 상에서 발생된 경우, 상기 멀티 터치 디스플레이 시스템은 상기 사용 모드로 동작하고,
상기 사용 모드는 제1 사용 모드 및 제2 사용 모드를 포함하고,
상기 제1 사용 모드는 제1 터치 신호 및 제1 드래그 신호를 기반으로 상기 복수의 카테고리 패널 중 하나의 카테고리 패널을 특정 위치로 이동시켜 사용자 정보창을 상기 터치 패널 상의 일부 영역에 활성화시키고,
상기 제2 사용 모드는 제2 터치 신호 및 제2 드래그 신호를 기반으로 상기 사용자 정보창의 크기를 한계 영역 내에서 조정하는 것을 특징으로 하는 방법.5. The method of claim 4,
When the touch signal is generated on the touch panel, the multi-touch display system operates in the use mode,
Wherein the usage mode includes a first usage mode and a second usage mode,
Wherein the first use mode activates a category panel of one of the plurality of category panels to a specific position based on the first touch signal and the first drag signal to activate a user information window on a partial area on the touch panel,
Wherein the second usage mode adjusts the size of the user information window in the limit region based on the second touch signal and the second drag signal. 복수의 사용자를 위한 멀티 터치 디스플레이 시스템은,
복수의 사용자에 의해 발생된 복수의 터치 신호를 중첩된 시간 자원 상에서 수신하는 터치 패널; 및
상기 터치 패널과 동작 가능하게(operatively) 연결되어 상기 복수의 터치 신호를 기반으로 생성된 복수의 입력 신호를 처리하는 프로세서를 포함하되,
상기 프로세서는 상기 복수의 입력 정보를 중첩된 시간 자원 상에서 수신하고,
중첩된 시간 자원 상에서 상기 복수의 입력 정보 각각에 따른 복수의 출력 정보 각각을 상기 터치 패널 상에 출력하도록 구현되되,
상기 프로세서는 상기 복수의 입력 정보에 따라 상기 멀티 터치 디스플레이 시스템을 대기 모드 또는 사용 모드로 동작시키고,
상기 프로세서는 사용자의 상기 터치 패널 상의 드래그(drag) 방향을 기반으로 상기 터치 패널 상의 카테고리 패널의 방향의 전환 여부를 결정한 후 상기 카테고리 패널을 상기 사용자의 방향으로 출력하고,
상기 프로세서는 상기 사용자의 중심 방향을 고려하여 상기 드래그 방향을 상기 중심 방향으로 보정하고,
상기 중심 방향은 상기 사용자의 터치 정보를 수집하여 결정되는 것을 특징으로 하는 멀티 터치 디스플레이 시스템.A multi-touch display system for a plurality of users includes:
A touch panel that receives a plurality of touch signals generated by a plurality of users on an overlapped time resource; And
A processor operatively coupled to the touch panel to process a plurality of input signals generated based on the plurality of touch signals,
Wherein the processor receives the plurality of input information on a nested time resource,
And outputting a plurality of pieces of output information corresponding to each of the plurality of pieces of input information on the touch panel on the overlapped time resource,
The processor operates the multi-touch display system in a standby mode or a use mode according to the plurality of input information,
Wherein the processor determines whether to change the direction of the category panel on the touch panel based on a drag direction of the touch panel of the user, outputs the category panel in the direction of the user,
The processor corrects the drag direction to the center direction in consideration of the center direction of the user,
Wherein the center direction is determined by collecting touch information of the user. 제6항에 있어서,
상기 프로세서는 영상 촬상 장치에 의해 촬상된 사용자에 대한 영상 정보를 기반으로 상기 터치 패널을 이용하는 적어도 하나의 사용자의 수 및 상기 적어도 하나의 사용자 각각의 중심을 결정하고,
상기 프로세서는 상기 적어도 하나의 사용자의 수 및 상기 적어도 하나의 사용자 각각의 중심에 대한 정보를 기반으로 상기 터치 패널 상에서 상기 적어도 하나의 사용자 각각의 한계 영역을 설정하는 것을 특징으로 하는 멀티 터치 디스플레이 시스템.The method according to claim 6,
Wherein the processor determines the number of at least one user using the touch panel and the center of each of the at least one user based on image information for the user captured by the image capture device,
Wherein the processor sets a limit area of each of the at least one user on the touch panel based on information about the number of the at least one user and the center of each of the at least one user. 제7항에 있어서,
상기 프로세서는 터치 신호가 상기 터치 패널 상에서 설정 시간 이상 발생되지 않을 경우, 상기 멀티 터치 디스플레이 시스템을 상기 대기 모드로 동작시키고,
상기 프로세서는 상기 대기 모드에서 상기 터치 패널 상에 위치한 복수의 카테고리 패널을 가이드라인의 변화에 따라 이동시키고,
상기 복수의 카테고리 패널 각각은 복수의 사용자에게 제공되는 복수의 메뉴 정보 각각과 대응되고,
상기 가이드라인은 상기 복수의 카테고리 패널의 움직임과 연동되어 변화되는 상기 복수의 카테고리 패널의 외곽선이고,
상기 가이드라인은 제1 상태에서 제2 상태로 변화되고,
상기 가이드라인은 상기 제1 상태에서 제1 직육면체를 형성하고,
상기 제1 직육면체의 일면과 평행한 면 상에 복수의 제1 카테고리 패널 할당 위치가 존재하고,
상기 복수의 카테고리 패널 각각은 상기 복수의 제1 카테고리 패널 할당 위치 각각에 위치하고,
상기 가이드라인은 상기 제2 상태에서 복수의 제2 직육면체 및 상기 복수의 제2 직육면체 각각을 연결하는 적어도 하나의 연결 구조를 형성하고,
상기 복수의 제2 직육면체의 일면에 평행한 면 상에 복수의 제2 카테고리 패널 할당 위치가 존재하고,
상기 복수의 카테고리 패널은 상기 복수의 제2 카테고리 패널 할당 위치 각각에 위치하는 것을 특징으로 하는 멀티 터치 디스플레이 시스템. 8. The method of claim 7,
Wherein the processor is configured to operate the multi-touch display system in the standby mode when a touch signal is not generated on the touch panel for more than a preset time,
Wherein the processor moves the plurality of category panels located on the touch panel in the standby mode according to the change of the guide line,
Wherein each of the plurality of category panels corresponds to each of a plurality of menu information provided to a plurality of users,
Wherein the guideline is an outline of the plurality of category panels changed in association with the movement of the plurality of category panels,
The guideline changes from a first state to a second state,
The guide line forms a first rectangular parallelepiped in the first state,
A plurality of first category panel allocation positions exist on a plane parallel to one surface of the first rectangular parallelepiped,
Wherein each of the plurality of category panels is located in each of the plurality of first category panel assignment positions,
Wherein the guide line forms at least one connection structure connecting the plurality of second rectangular parallelepipeds and the plurality of second rectangular parallelepipeds in the second state,
A plurality of second category panel allocation positions exist on a plane parallel to one surface of the plurality of second rectangular parallelepipeds,
Wherein the plurality of category panels are located at each of the plurality of second category panel assignment positions. 제8항에 있어서,
상기 가이드라인은 상기 터치 패널 상의 바탕화면 색상의 변화를 고려하여 상기 제1 상태에서 상기 제2 상태로 변화되는 것을 특징으로 하는 멀티 터치 디스플레이 시스템.9. The method of claim 8,
Wherein the guide line changes from the first state to the second state in consideration of a change in background color on the touch panel. 제9항에 있어서,
상기 프로세서는 상기 터치 신호가 상기 터치 패널 상에서 발생된 경우, 상기 멀티 터치 디스플레이 시스템을 상기 사용 모드로 동작시키고,
상기 사용 모드는 제1 사용 모드 및 제2 사용 모드를 포함하고,
상기 제1 사용 모드는 제1 터치 신호 및 제1 드래그 신호를 기반으로 상기 복수의 카테고리 패널 중 하나의 카테고리 패널을 특정 위치로 이동시켜 사용자 정보창을 상기 터치 패널 상의 일부 영역에 활성화시키고,
상기 제2 사용 모드는 제2 터치 신호 및 제2 드래그 신호를 기반으로 상기 사용자 정보창의 크기를 한계 영역 내에서 조정하는 것을 특징으로 하는 멀티 터치 디스플레이 시스템.10. The method of claim 9,
Wherein the processor operates the multi-touch display system in the use mode when the touch signal is generated on the touch panel,
Wherein the usage mode includes a first usage mode and a second usage mode,
Wherein the first use mode activates a category panel of one of the plurality of category panels to a specific position based on the first touch signal and the first drag signal to activate a user information window on a partial area on the touch panel,
Wherein the second use mode adjusts the size of the user information window in the limit region based on the second touch signal and the second drag signal. 제1항 내지 제5항 중 어느 한 항에 따른 방법을 실행하기 위한 컴퓨터 프로그램을 기록한 컴퓨터 판독 가능한 기록 매체.A computer program for executing the method according to any one of claims 1 to 5.
KR1020160183226A 2016-12-30 2016-12-30 Method for operating multi-touch display for multiple users and multi-touch display performing the method KR101938362B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020160183226A KR101938362B1 (en) 2016-12-30 2016-12-30 Method for operating multi-touch display for multiple users and multi-touch display performing the method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020160183226A KR101938362B1 (en) 2016-12-30 2016-12-30 Method for operating multi-touch display for multiple users and multi-touch display performing the method

Publications (2)

Publication Number Publication Date
KR20180079484A KR20180079484A (en) 2018-07-11
KR101938362B1 true KR101938362B1 (en) 2019-01-15

Family

ID=62917405

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020160183226A KR101938362B1 (en) 2016-12-30 2016-12-30 Method for operating multi-touch display for multiple users and multi-touch display performing the method

Country Status (1)

Country Link
KR (1) KR101938362B1 (en)

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100931926B1 (en) * 2008-06-16 2009-12-15 주식회사 인프라웨어 Mobile communication terminal with moving menu icon ui

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100672325B1 (en) * 2005-04-27 2007-01-24 엘지전자 주식회사 Method for offer menu of directional interface using pointing device in mobile terminal
KR101012300B1 (en) * 2008-03-07 2011-02-08 삼성전자주식회사 User interface apparatus of mobile station having touch screen and method thereof
KR101413649B1 (en) * 2012-11-07 2014-07-09 (주)아바비젼 Touch table top display apparatus for multi-user
JP6559403B2 (en) * 2014-05-19 2019-08-14 シャープ株式会社 Content display device, content display method, and program

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100931926B1 (en) * 2008-06-16 2009-12-15 주식회사 인프라웨어 Mobile communication terminal with moving menu icon ui

Also Published As

Publication number Publication date
KR20180079484A (en) 2018-07-11

Similar Documents

Publication Publication Date Title
JP5750875B2 (en) Information processing apparatus, information processing method, and program
US9639186B2 (en) Multi-touch interface gestures for keyboard and/or mouse inputs
EP2495644B1 (en) Portable information terminal comprising two adjacent display screens
US9600090B2 (en) Multi-touch integrated desktop environment
US9524097B2 (en) Touchscreen gestures for selecting a graphical object
JP2016076275A (en) Man-machine interface based on gesture
US20120169623A1 (en) Multi-Touch Integrated Desktop Environment
US10379706B2 (en) Device for and method of changing size of display window on screen
JP2015515075A (en) 3D graphic user interface
KR102205283B1 (en) Electro device executing at least one application and method for controlling thereof
US20130155108A1 (en) Augmented Reality User Interaction Methods, Computing Devices, And Articles Of Manufacture
KR20160033547A (en) Apparatus and method for styling a content
US9262005B2 (en) Multi-touch integrated desktop environment
CN105247463B (en) The painting canvas environment of enhancing
US9612743B2 (en) Multi-touch integrated desktop environment
JP2009116727A (en) Image input display
KR101938362B1 (en) Method for operating multi-touch display for multiple users and multi-touch display performing the method
JP6768426B2 (en) Display control device, its control method, program, and storage medium
JP2016133978A (en) Information processor, information processing method and program
US10983686B2 (en) Display control apparatus equipped with touch panel, control method therefor, and storage medium storing control program therefor
JP6327834B2 (en) Operation display device, operation display method and program
JP7030527B2 (en) Electronic devices, information processing methods, programs and storage media
JP5841109B2 (en) User interface device and portable terminal device
CN110147169A (en) At least one display window distributing adjustment and touch-control automatic calibrating method and system
KR102163825B1 (en) Method for implementing user interface of user equipment and apparatus for using the method

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant