KR102167503B1 - User device with single input multiple processing function - Google Patents

User device with single input multiple processing function Download PDF

Info

Publication number
KR102167503B1
KR102167503B1 KR1020190099667A KR20190099667A KR102167503B1 KR 102167503 B1 KR102167503 B1 KR 102167503B1 KR 1020190099667 A KR1020190099667 A KR 1020190099667A KR 20190099667 A KR20190099667 A KR 20190099667A KR 102167503 B1 KR102167503 B1 KR 102167503B1
Authority
KR
South Korea
Prior art keywords
input
application
display
applications
main application
Prior art date
Application number
KR1020190099667A
Other languages
Korean (ko)
Inventor
김민성
Original Assignee
김민성
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 김민성 filed Critical 김민성
Priority to KR1020190099667A priority Critical patent/KR102167503B1/en
Application granted granted Critical
Publication of KR102167503B1 publication Critical patent/KR102167503B1/en

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0416—Control or interface arrangements specially adapted for digitisers
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46—Multiprogramming arrangements
    • G06F9/54—Interprogram communication
    • G06F9/542—Event management; Broadcasting; Multicasting; Notifications
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048—Indexing scheme relating to G06F3/048
    • G06F2203/04804—Transparency, e.g. transparent or translucent windows

Abstract

The present invention relates to a user terminal device having a single input multiple processing function capable of increasing the processing speed and efficiency of applications requiring similar input by receiving single input and processing a plurality of individual applications executed at the same time as receiving the same input. There is an effect of greatly improving convenience for input by reducing user application switching and repetitive input by executing the plurality of applications according to input provision through single input by providing the input to a displayed application and providing the same input to corresponding positions of the other sub-applications to which multiple input are to be applied, when a main application to be displayed for the plurality of applications executed in a user terminal with a touch screen interface and sub applications to which the multiple input are to be applied are selected, and touch input is provided based on the displayed main application.

Description

단일 입력 다중 처리 기능을 구비한 사용자 단말{User device with single input multiple processing function} User device with single input multiple processing function

본 발명은 단일 입력 다중 처리 기능을 구비한 사용자 단말에 관한 것으로, 특히 한 번의 입력을 수신하여 동시에 실행 중인 복수의 개별 어플리케이션들이 모두 동일 입력을 수신한 것으로 처리함으로써 유사한 입력이 필요한 어플리케이션들에 대한 작업 처리 속도와 효율을 높일 수 있도록 한 단일 입력 다중 처리 기능을 구비한 사용자 단말에 관한 것이다.The present invention relates to a user terminal having a single input multi-processing function, and in particular, a plurality of individual applications that receive a single input and are executing at the same time treat all of the same input as receiving the same input, thereby working on applications requiring similar input. The present invention relates to a user terminal having a single input multiple processing function to increase processing speed and efficiency.

멀티태스킹 기능을 지원하는 운영체제의 일반화에 의해, 하나의 사용자 단말에서 복수의 어플리케이션을 동시에 실행하는 것은 일상화 되었다. 하지만, 복수의 어플리케이션이 동시에 실행된다고 하더라도 사용자 입력은 이들 중 화면에 노출되거나 혹은 제어 포커스가 설정된 어플리케이션을 대상으로 하므로 한 번에 복수의 어플리케이션에 대해 사용자 입력을 동시에 제공할 수는 없다.With the generalization of operating systems supporting multitasking functions, it has become common practice to simultaneously execute multiple applications on a single user terminal. However, even if a plurality of applications are executed at the same time, the user input is exposed on the screen or targets the application in which the control focus is set, and thus the user input cannot be simultaneously provided for a plurality of applications.

특히, 사용자의 입력 편의를 위해서 도입된 터치스크린의 경우 화면에 노출된 어플리케이션을 그 입력 대상으로 하기 때문에 복수의 어플리케이션에 대해 입력을 제공하기 위해서는 화면에 노출되는 대상을 변경하면서 입력을 반복해야 한다. In particular, in the case of a touch screen introduced for user's input convenience, since an application exposed on the screen is an input target, in order to provide an input for a plurality of applications, the input must be repeated while changing the object exposed on the screen.

만일 비슷한 입력 요소 배치 구성을 가진 어플리케이션들이 존재한다고 하더라도 각 어플리케이션에 사용자 입력을 제공하기 위해서는 개별 어플리케이션을 선택하면서 반복적으로 동일한 내용을 입력해야 하므로 사용자의 입력 효율이 낮아지는 문제가 있다.Even if there are applications with similar input element arrangement configurations, in order to provide user input to each application, the same content must be repeatedly input while selecting an individual application, thereby reducing the user's input efficiency.

예를 들어, A라는 제조 브랜드(예를 들어, 의류, 신발, 가구, 생활 용품 등)의 가맹점이 B라는 판매 브랜드(예를 들어, 백화점, 아울렛, 공항 면세점 등)에 입점한 경우 상품 판매 시 해당 판매 정보를 A 브랜드의 판매 관리 어플리케이션에 입력(재고 및 주문 관리)함과 아울러 동일한 판매 정보를 B 브랜드의 판매 관리 어플리케이션에 입력(입점업체 판매 현황 관리)해야만 하므로 동일한 판매 정보를 중복하여 입력하는 과정이 필요하다. 나아가, 특정 식당에서 테이블에 대한 로컬 주문 정보 입력 어플리케이션과 식당 테이블에 대한 온라인 예약 정보를 수집하는 어플리케이션의 경우 비슷한 인터페이스를 통해 이루어지지만 각각 상이한 어플리케이션들을 이용하므로 중복 입력이 필요하다. 그 외에도 동일한 주소지에 복수의 상품을 배송하는 경우 각각의 상품에 대해서 동일한 주소지의 배송 상태 정보를 입력해야 하는 경우가 있다. 또한, 경쟁이 심한 티켓을 예매하기 위해 복수의 상이한 판매처 어플리케이션들을 동작시켜 예약을 시도할 경우 각 어플리케이션들을 이동하면서 예약 시도 버튼을 눌러야 할 수도 있고, 동일한 메시지를 복수의 상이한 메신저나 소셜 네트워크 서비스에 등록하고자 할 경우에도 반복적인 입력 작업이 필요할 수 있다. For example, when a merchant of a manufacturing brand A (for example, clothing, shoes, furniture, household goods, etc.) enters a sales brand named B (for example, a department store, outlet, airport duty free shop, etc.), Since the sales information must be entered into the sales management application of brand A (inventory and order management) and the same sales information must be entered into the sales management application of brand B (store sales status management), the same sales information is repeatedly entered. You need a process. Further, in the case of an application for inputting local order information for a table in a specific restaurant and an application for collecting online reservation information for a restaurant table, they are performed through a similar interface, but since each uses different applications, duplicate input is required. In addition, when a plurality of products are delivered to the same address, there is a case where it is necessary to input the delivery status information of the same address for each product. In addition, in order to reserve a highly competitive ticket, when a reservation is attempted by operating a plurality of different vendor applications, it may be necessary to press the reservation attempt button while moving each application, and the same message may be registered in a plurality of different messenger or social network services. Even if you want to, it may require repetitive input work.

따라서, 한 번의 터치 입력이나 사용자로부터 제공되는 입력 혹은 외부 입력을 복수의 어플리케이션들에 일괄적으로 제공하되, 터치스크린의 위치 기반 정보를 활용하여 지정된 항목에 대한 입력으로서 각각 제공되도록 하는 새로운 입력 방식에 대한 요구가 있으나, 정보의 임시 복사 및 붙여넣기, 혹은 투명도에 따라 중복 표시된 어플리케이션 중 어디에 입력을 제공할 것인지 결정하는 정도의 번거로운 방법이 사용될 뿐 상이한 어플리케이션들 간 단일 입력-다중 제공을 지원할 수 있는 명확한 방법은 제시되지 못한 상황이다. Therefore, a new input method that provides a single touch input, an input provided from the user, or an external input collectively to a plurality of applications, but provides each as an input for a specified item by utilizing the location-based information of the touch screen. There is a demand for it, but a cumbersome method such as temporary copying and pasting of information, or deciding which of the redundantly marked applications to provide input according to transparency is used, but a clear method that can support single input-multiple provision between different applications There is no way to come.

한국 공개특허 제10-2016-0017992호, [이동단말기 및 그 제어 방법]Korean Patent Application Publication No. 10-2016-0017992, [Mobile terminal and its control method] 한국 공개특허 제10-2014-0046968호, [이동 단말기 및 이동 단말기 제어 방법]Korean Patent Application Publication No. 10-2014-0046968, [Mobile terminal and mobile terminal control method]

전술한 문제점을 개선하기 위한 본 발명 실시예들의 목적은 터치스크린 인터페이스를 구비한 사용자 단말에 실행되는 복수의 어플리케이션들에 대해서 표시될 메인 어플리케이션과 다중 입력을 적용할 서브 어플리케이션들을 선택하고, 표시된 메인 어플리케이션을 기준으로 터치 입력을 제공하면 해당 표시된 어플리케이션에 해당 입력을 제공함과 아울러 다중 입력이 적용될 나머지 서브 어플리케이션들의 대응 위치에 동일한 입력을 제공하도록 함으로써 한 번의 입력을 통해 복수의 어플리케이션들에 각각 입력 제공에 따른 실행이 이루어지도록 하여 사용자 편의성을 개선할 수 있도록 한 단일 입력 다중 처리 기능을 구비한 사용자 단말을 제공하는 것이다.An object of the embodiments of the present invention for improving the above-described problem is to select a main application to be displayed and sub-applications to which multiple inputs are applied for a plurality of applications executed on a user terminal having a touch screen interface, and the displayed main application When a touch input is provided based on, the corresponding input is provided to the displayed application, and the same input is provided to the corresponding positions of the remaining sub-applications to which the multiple input is applied, thereby providing input to a plurality of applications through a single input. It is to provide a user terminal with a single input multi-processing function to improve user convenience by enabling execution.

본 발명의 다른 목적은 다중 입력을 지원할 어플리케이션들을 등록하고, 이들 중 메인 어플리케이션을 선택하며, 메인 어플리케이션에 대한 사용자 입력을 확인하여 대응되는 위치를 기준으로 등록된 서브 어플리케이션들에 동일한 입력을 모사하여 자동 제공하는 다중 입력 관리부를 구성하고, 해당 다중 입력 관리부의 설정 인터페이스를 용이하게 호출하여 디스플레이에 표시한 후 다중 입력을 지원할 어플리케이션들을 등록하거나 제외하고, 메인 어플리케이션을 선택하며, 필요에 따라 대응되는 입력 수단을 분석하여 매칭하는 작업을 시각적 확인을 기반으로 수행할 수 있도록 함으로써 사용자가 직관적이고 명확하게 다중 입력을 실행할 수 있도록 한 단일 입력 다중 처리 기능을 구비한 사용자 단말을 제공하는 것이다.Another object of the present invention is to register applications that will support multiple inputs, select a main application among them, check user input for the main application, and automatically simulate the same input to registered sub-applications based on the corresponding location. Configure the provided multi-input management unit, easily call the setting interface of the corresponding multi-input management unit, display it on the display, register or exclude applications that will support multiple inputs, select the main application, and input corresponding input means as needed It is to provide a user terminal with a single input multi-processing function that enables a user to intuitively and clearly execute multiple inputs by performing a matching task based on visual confirmation.

본 발명의 또 다른 목적은 사용자의 터치 입력이나 터치를 이용한 문자 입력과 같은 터치 기반의 입력은 물론이고 오디오나 비디오 혹은 단말에 연동되는 외부 입력 수단을 통한 입력을 복수 어플리케이션에 동시에 제공하되 그 입력이 적용될 대상을 위치 기반으로 선택하도록 함으로써 복수의 입력을 위치를 기반으로 동시에 진행할 수 있도록 한 단일 입력 다중 처리 기능을 구비한 사용자 단말을 제공하는 것이다.Another object of the present invention is to simultaneously provide input through audio, video, or external input means linked to a terminal, as well as touch-based input such as a user's touch input or text input using a touch, to a plurality of applications. It is to provide a user terminal with a single input multiprocessing function in which a plurality of inputs can be simultaneously processed based on a location by selecting an object to be applied based on a location.

상기와 같은 목적을 달성하기 위한 본 발명의 일 실시예에 따른 단일 입력 다중 처리 기능을 구비한 사용자 단말은 복수의 어플리케이션들을 멀티태스킹 방식으로 구동시키는 단말 운영부와, 터치스크린을 포함하는 사용자 입출력 인터페이스를 구비하는 단말 인터페이스부와, 단일 입력을 복수의 어플리케이션들에 위치를 기반으로 동시 제공하는 다중 입력 관리부를 포함하되, 다중 입력 관리부는, 사용자 입력을 통해 다중 입력을 수신할 중복 표시 어플리케이션 등록 정보 및 메인 어플리케이션 설정 정보를 수집하는 중복 표시 어플리케이션 관리부와, 중복 표시 어플리케이션 관리부를 통해 설정된 메인 어플리케이션을 디스플레이하는 디스플레이 관리부와, 디스플레이된 메인 어플리케이션에 대한 입력 정보를 수신하여 입력의 위치 정보와 입력의 종류 및 내용을 식별하는 입력 분석부와, 입력 분석부에서 식별된 입력의 위치 정보와 입력의 종류 및 내용을 기반으로 상기 메인 어플리케이션과 상기 등록된 중복 표시 어플리케이션들에 동일한 입력을 각각 제공하는 다중 입력 제공부를 포함한다.A user terminal having a single input multiprocessing function according to an embodiment of the present invention for achieving the above object includes a terminal operating unit for driving a plurality of applications in a multitasking manner, and a user input/output interface including a touch screen. It includes a terminal interface unit and a multi-input management unit that simultaneously provides a single input to a plurality of applications based on a location, wherein the multi-input management unit includes redundant display application registration information to receive multiple inputs through user input and main A redundant display application management unit that collects application setting information, a display management unit that displays a main application set through the redundant display application management unit, and input information about the displayed main application are received and the location information of the input and the type and content of the input are displayed. An input analysis unit that identifies, and a multi-input providing unit that provides the same input to the main application and the registered redundant display applications, respectively, based on location information of the input identified by the input analysis unit and the type and content of the input. .

일례로서, 디스플레이 관리부는 중복 표시 어플리케이션들의 표시 화면을 기 설정된 투명도로 메인 어플리케이션의 표시 화면에 중복하여 나타낼 수 있다.As an example, the display manager may overlap the display screen of the duplicate display applications on the display screen of the main application with a preset transparency.

일례로서, 디스플레이 관리부는 다중 입력 제공부에서 등록된 중복 표시 어플리케이션들에 동일한 입력을 각각 제공할 경우 각 중복 표시 어플리케이션들의 입력에 따른 실행 상태 화면을 기 설정된 시간 동안 순차적으로 전환 표시하거나 반투명 상태로 전환 표시할 수 있다.As an example, when the display management unit provides the same input to each of the redundant display applications registered in the multi-input provider, the execution status screen according to the input of each redundant display application is sequentially switched and displayed for a preset time or converted to a semi-transparent state. Can be displayed.

일례로서, 다중 입력 제공부는 메인 어플리케이션이 디스플레이된 화면에 중복 표시 어플리케이션 관리부에 등록된 중복 표시 어플리케이션들을 투명한 상태로 대응 배치한 것으로 간주하고 메인 어플리케이션이 디스플레이된 화면을 통해 터치입력으로 제공되는 사용자 입력을 대응 배치된 중복 표시어플리케이션들의 동일 위치에 동일 입력이 제공되는 것으로 모사하는 입력 정보를 제공할 수 있다.As an example, the multi-input providing unit regards the overlapping display applications registered in the application manager as being transparently arranged on the screen on which the main application is displayed, and provides a user input through the screen on which the main application is displayed. Input information that simulates that the same input is provided at the same location of the correspondingly arranged duplicate display applications may be provided.

일례로서, 다중 입력 제공부는 메인 어플리케이션의 입력 요소들과 등록된 중복 표시 어플리케이션들의 입력 요소들을 그 위치를 근거로 상호 매칭하되 동일한 종류의 입력 요소 중 가장 인접한 입력 요소를 동일 입력 요소로 매칭하여 입력을 동시에 제공할 수 있다. 또한, 메인 어플리케이션의 특정 입력 요소에 대해 등록된 중복 표시 어플리케이션들 중 적어도 하나의 중복 표시 어플리케이션의 대응 위치를 기준으로 기 설정된 범위에 동일한 종류의 입력 요소가 없는 경우 해당 중복 표시 어플리케이션에는 특정 입력 요소에 대한 사용자 입력을 제공하지 않을 수 있다.As an example, the multi-input providing unit matches the input elements of the main application and the input elements of the registered duplicate display applications based on their position, but matches the closest input element among the same type of input elements with the same input element to input the input. Can provide at the same time. In addition, if there is no input element of the same type in a preset range based on the corresponding position of at least one overlapping display application among the overlapping display applications registered for a specific input element of the main application, the corresponding overlapping display application is assigned to a specific input element. May not provide user input for

일례로서, 단말 인터페이스부는 터치스크린 외에 사용자의 오디오 입력이나 비디오 입력을 수신하기 위한 인터페이스, 물리적 코드나 태그를 인식하는 코드 수집 인터페이스, 외부 데이터를 수신하는 통신 인터페이스 중 적어도 하나를 포함하며, 입력 분석부는 터치스크린을 통한 제스쳐 입력, 문자 입력, 기 구성된 인터페이스를 이용한 오디오 입력, 비디오 입력, 코드 식별 정보 입력, 수신 데이터 입력 중 적어도 하나를 입력으로 식별하고, 다중 입력 제공부는 입력 분석부에서 식별된 입력의 입력의 종류 및 내용을 식별된 위치 정보에 대응되는 각 중복 표시 어플리케이션들의 입력 요소에 제공할 수 있다.As an example, the terminal interface unit includes at least one of an interface for receiving audio input or video input from a user in addition to a touch screen, a code collection interface for recognizing a physical code or tag, and a communication interface for receiving external data, and the input analysis unit At least one of gesture input, character input, audio input, video input, code identification information input, and received data input using a pre-configured interface is identified as an input, and the multiple input providing unit The type and content of the input may be provided to the input element of each redundant display application corresponding to the identified location information.

일례로서, 호출에 따라 등록된 중복 표시 어플리케이션 정보와 설정된 메인 어플리케이션 정보를 제공하고 이를 변경할 수 있는 인터페이스를 제공하고, 각 등록 중복 표시 어플리케이션의 현재 실행 화면을 제공하는 표시 내용 관리부를 더 포함하며, 입력 분석부는 사용자의 기 설정된 제스처 입력을 통해 표시 내용 관리부의 호출과 은닉을 구분할 수 있다.As an example, it further includes a display content management unit that provides registered duplicate display application information and set main application information according to a call, and provides an interface for changing them, and provides a current execution screen of each registered duplicate display application, and input The analysis unit may distinguish between calling and concealing the display content management unit through the user's preset gesture input.

일례로서, 등록된 중복 표시 어플리케이션들과 메인 어플리케이션의 표시 화면을 기준으로 각 입력 요소들을 구분하고, 위치와 입력 요소의 종류를 기반으로 단일 입력을 동시 수신할 입력 요소를 매칭하고, 사용자 입력에 따라 매칭된 입력 요소의 매칭 상태를 갱신하는 입력 요소 매칭부를 포함할 수 있다. 또한, 등록된 중복 표시 어플리케이션 정보와 설정된 메인 어플리케이션 정보를 축소된 각 어플리케이션의 화면으로 표시하고, 메인 어플리케이션의 입력 요소 선택 시 매칭된 중복 표시 어플리케이션들의 대응 입력 요소를 표시하며, 사용자 입력에 따라 입력 요소 매칭 상태를 상이하게 변경하는 표시 내용 관리부를 더 포함할 수 있다.As an example, each input element is classified based on the registered duplicate display applications and the display screen of the main application, and based on the location and type of the input element, the input element to receive a single input is matched, and according to the user input. It may include an input element matching unit to update the matching state of the matched input element. In addition, the registered duplicate display application information and the set main application information are displayed on the screen of each reduced application, and when the input element of the main application is selected, corresponding input elements of the matched duplicate display applications are displayed, and input elements according to user input It may further include a display content management unit for differently changing the matching state.

본 발명의 실시예에 따른 단일 입력 다중 처리 기능을 구비한 사용자 단말은 터치스크린 인터페이스를 구비한 사용자 단말에 실행되는 복수의 어플리케이션들에 대해서 표시될 메인 어플리케이션과 다중 입력을 적용할 서브 어플리케이션들을 선택하고, 표시된 메인 어플리케이션을 기준으로 터치 입력을 제공하면 해당 표시된 어플리케이션에 해당 입력을 제공함과 아울러 다중 입력이 적용될 나머지 서브 어플리케이션들의 대응 위치에 동일한 입력을 제공하도록 함으로써 한 번의 입력을 통해 복수의 어플리케이션들에 각각 입력 제공에 따른 실행이 이루어지도록 하여 사용자 어플리케이션 전환과 반복 입력을 줄여 입력에 대한 편의성을 크게 개선할 수 있는 효과가 있다.A user terminal having a single input multi-processing function according to an embodiment of the present invention selects a main application to be displayed and sub-applications to which multiple inputs are applied for a plurality of applications executed on a user terminal having a touch screen interface. , If a touch input is provided based on the displayed main application, the corresponding input is provided to the displayed application and the same input is provided to the corresponding positions of the remaining sub-applications to which the multiple input is applied. It is possible to greatly improve the convenience of input by reducing user application switching and repetitive input by allowing execution according to input provision.

또한, 본 발명의 실시예는 다중 입력을 지원할 어플리케이션들을 등록하고, 이들 중 메인 어플리케이션을 선택하는 다중 입력 관리부를 구성하고, 해당 다중 입력 관리부의 설정 인터페이스를 용이하게 호출하여 디스플레이에 표시한 후 다중 입력을 지원할 어플리케이션들을 등록하거나 제외하고, 메인 어플리케이션을 선택하며, 필요에 따라 대응되는 입력 수단을 분석하여 매칭하는 작업을 시각적 확인을 기반으로 수행할 수 있도록 함으로써 사용자가 직관적이고 명확하게 다중 입력을 활용할 수 있게 되는 효과가 있다.In addition, an embodiment of the present invention registers applications to support multiple inputs, configures a multi-input management unit to select a main application among them, and easily calls the setting interface of the multi-input management unit and displays it on the display. Users can intuitively and clearly utilize multiple inputs by registering or excluding applications to support the application, selecting the main application, and analyzing the corresponding input means as needed to perform matching tasks based on visual confirmation. There is an effect of being.

나아가, 사용자의 터치 입력이나 터치를 이용한 문자 입력과 같은 터치 기반의 입력은 물론이고 오디오나 비디오 혹은 단말에 연동되는 외부 입력 수단을 통한 입력을 복수 어플리케이션에 동시에 제공하되 그 입력이 적용될 대상을 위치 기반으로 선택하도록 함으로써 복수의 입력을 위치를 기반으로 동시에 진행할 수 있도록 하여 사용자 편의성을 높이고 생산성을 향상시킬 수 있는 효과가 있다.Furthermore, input through audio, video, or external input means linked to the terminal as well as touch-based input such as a user's touch input or text input using a touch is simultaneously provided to multiple applications, but the target to which the input is applied is based on location. By selecting to be selected, multiple inputs can be simultaneously performed based on the location, thereby enhancing user convenience and improving productivity.

도 1은 본 발명의 실시예에 따른 단일 입력 다중 처리 기능을 구비한 사용자 단말 구성을 보인 구성도이다.
도 2는 본 발명의 실시예에 따른 기본적인 동작 과정을 보인 순서도이다.
도 3 내지 6은 도 2에 도시된 본 발명의 실시예에 따른 동작 과정을 설명하기 위한 예시적 개념도이다.
도 7은 본 발명의 다른 실시예에 따른 중복 표시 어플리케이션들 간 입력 요소 매칭과 입력 종류의 확장을 설명하기 위한 예시도이다.
도 8은 본 발명의 다른 실시예에 따른 중복 표시 어플리케이션들과 메인 어플리케이션의 설정 화면 예시도이다.
도 9는 본 발명의 다른 실시예에 따른 입력 요소 매칭 과정을 보인 화면 예시도이다.
도 10은 본 발명의 다른 실시예에 따른 동작 과정을 보인 순서도이다.1 is a block diagram showing a configuration of a user terminal having a single input multiple processing function according to an embodiment of the present invention.
2 is a flow chart showing a basic operation process according to an embodiment of the present invention.
3 to 6 are exemplary conceptual diagrams for explaining an operation process according to the embodiment of the present invention shown in FIG. 2.
7 is an exemplary diagram for explaining matching of input elements and expansion of input types between redundant display applications according to another embodiment of the present invention.
8 is an exemplary diagram illustrating a setting screen of redundant display applications and a main application according to another embodiment of the present invention.
9 is an exemplary screen view showing an input element matching process according to another embodiment of the present invention.
10 is a flow chart showing an operation process according to another embodiment of the present invention.

상기한 바와 같은 본 발명을 첨부된 도면들과 실시예들을 통해 상세히 설명하도록 한다.The present invention as described above will be described in detail through the accompanying drawings and embodiments.

본 발명에서 사용되는 기술적 용어는 단지 특정한 실시예를 설명하기 위해 사용된 것으로, 본 발명을 한정하려는 의도가 아님을 유의해야 한다. 또한, 본 발명에서 사용되는 기술적 용어는 본 발명에서 특별히 다른 의미로 정의되지 않는 한, 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 의미로 해석되어야 하며, 과도하게 포괄적인 의미로 해석되거나, 과도하게 축소된 의미로 해석되지 않아야 한다. 또한, 본 발명에서 사용되는 기술적인 용어가 본 발명의 사상을 정확하게 표현하지 못하는 잘못된 기술적 용어일 때에는, 당업자가 올바르게 이해할 수 있는 기술적 용어로 대체되어 이해되어야 할 것이다. 또한, 본 발명에서 사용되는 일반적인 용어는 사전에 정의되어 있는 바에 따라, 또는 전후 문맥상에 따라 해석되어야 하며, 과도하게 축소된 의미로 해석되지 않아야 한다.It should be noted that the technical terms used in the present invention are used only to describe specific embodiments, and are not intended to limit the present invention. In addition, the technical terms used in the present invention should be interpreted as generally understood by those of ordinary skill in the technical field to which the present invention belongs, unless otherwise defined in the present invention, and is excessively comprehensive. It should not be construed as a human meaning or an excessively reduced meaning. In addition, when a technical term used in the present invention is an incorrect technical term that does not accurately express the spirit of the present invention, it should be replaced with a technical term that can be correctly understood by those skilled in the art. In addition, general terms used in the present invention should be interpreted as defined in the dictionary or according to the context before and after, and should not be interpreted as an excessively reduced meaning.

또한, 본 발명에서 사용되는 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한 복수의 표현을 포함한다. 본 발명에서, "구성된다" 또는 "포함한다" 등의 용어는 발명에 기재된 여러 구성 요소들, 또는 여러 단계를 반드시 모두 포함하는 것으로 해석되지 않아야 하며, 그 중 일부 구성 요소들 또는 일부 단계들은 포함되지 않을 수도 있고, 또는 추가적인 구성 요소 또는 단계들을 더 포함할 수 있는 것으로 해석되어야 한다.In addition, the singular expression used in the present invention includes a plurality of expressions unless the context clearly indicates otherwise. In the present invention, terms such as “consisting of” or “comprising” should not be construed as necessarily including all of the various elements or various steps described in the invention, and some of the elements or some steps are included. It should be construed that it may not be, or may further include additional components or steps.

또한, 본 발명에서 사용되는 제 1, 제 2 등과 같이 서수를 포함하는 용어는 구성 요소들을 설명하는데 사용될 수 있지만, 구성 요소들은 용어들에 의해 한정되어서는 안 된다. 용어들은 하나의 구성 요소를 다른 구성 요소로부터 구별하는 목적으로만 사용된다. 예를 들어, 본 발명의 권리 범위를 벗어나지 않으면서 제 1 구성 요소는 제 2 구성 요소로 명명될 수 있고, 유사하게 제 2 구성 요소도 제 1 구성 요소로 명명될 수 있다.In addition, terms including ordinal numbers such as first and second used in the present invention may be used to describe the constituent elements, but the constituent elements should not be limited by the terms. The terms are used only for the purpose of distinguishing one component from another. For example, without departing from the scope of the present invention, a first component may be referred to as a second component, and similarly, a second component may be referred to as a first component.

이하, 첨부된 도면을 참조하여 본 발명에 따른 바람직한 실시 예를 상세히 설명하되, 도면 부호에 관계없이 동일하거나 유사한 구성 요소는 동일한 참조 번호를 부여하고 이에 대한 중복되는 설명은 생략하기로 한다.Hereinafter, exemplary embodiments of the present invention will be described in detail with reference to the accompanying drawings, but the same or similar components are assigned the same reference numerals regardless of the reference numerals, and redundant descriptions thereof will be omitted.

또한, 본 발명을 설명함에 있어서 관련된 공지 기술에 대한 구체적인 설명이 본 발명의 요지를 흐릴 수 있다고 판단되는 경우 그 상세한 설명을 생략한다. 또한, 첨부된 도면은 본 발명의 사상을 쉽게 이해할 수 있도록 하기 위한 것일 뿐, 첨부된 도면에 의해 본 발명의 사상이 제한되는 것으로 해석되어서는 아니 됨을 유의해야 한다.In addition, in describing the present invention, when it is determined that a detailed description of a related known technology may obscure the subject matter of the present invention, a detailed description thereof will be omitted. In addition, it should be noted that the accompanying drawings are only for easily understanding the spirit of the present invention and should not be construed as limiting the spirit of the present invention by the accompanying drawings.

이후 설명되는 본 발명의 단일 입력 다중 처리 기능을 구비한 사용자 단말은 통신 기능을 구비한 스마트 폰(Smart Phone), 휴대 단말기(Portable Terminal), 이동 단말기(Mobile Terminal), 개인 정보 단말기(Personal Digital Assistant: PDA), PMP(Portable Multimedia Player) 단말기, 개인용 컴퓨터(Personal Computer), 노트북 컴퓨터, 슬레이트 PC(Slate PC), 태블릿 PC(Tablet PC), 울트라북(ultrabook) 등과 같은 다양한 사용자 단말을 포함할 수 있으며, 이러한 사용자 단말에 본 발명의 실시예에 따른 단일 입력 다중 처리 기능을 수행하는 소프트웨어 어플리케이션을 설치 또는 구성함으로서 본 발명의 기능을 제공할 수 있다.The user terminal having a single input multi-processing function of the present invention described below is a smart phone, portable terminal, mobile terminal, and personal digital assistant with a communication function. : PDA), PMP (Portable Multimedia Player) terminal, personal computer (Personal Computer), notebook computer, Slate PC (Slate PC), Tablet PC (Tablet PC), can include a variety of user terminals such as ultrabook (ultrabook). In addition, the functions of the present invention can be provided by installing or configuring a software application that performs a single input multiprocessing function according to an embodiment of the present invention in such a user terminal.

먼저, 도 1 내지 도 6을 통해 본 발명의 일 실시예에 따른 기본적인 동작 과정을 설명하고, 도 1의 구성을 이용하여 본 발명의 다른 실시예에 따른 동작을 도 7 내지 도 10을 참조하여 설명한다.First, a basic operation process according to an embodiment of the present invention will be described with reference to Figs. 1 to 6, and an operation according to another embodiment of the present invention will be described using the configuration of Fig. 1 with reference to Figs. do.

도 1은 본 발명의 시예에 따른 단일 입력 다중 처리 기능을 구비한 사용자 단말(100)의 구성을 보인 구성도이다.1 is a block diagram showing a configuration of a user terminal 100 having a single input multiple processing function according to an exemplary embodiment of the present invention.

도시된 바와 같이, 사용자 단말(100)은 복수의 어플리케이션들을 멀티태스킹 방식으로 구동시키는 단말 운영부(110)와, 터치스크린을 포함하는 사용자 입출력 인터페이스를 구비하는 단말 인터페이스부(120)와, 단일 입력을 복수의 어플리케이션들에 위치를 기반으로 동시 제공하는 다중 입력 관리부(130)를 포함한다. As shown, the user terminal 100 includes a terminal operating unit 110 for driving a plurality of applications in a multitasking manner, a terminal interface unit 120 having a user input/output interface including a touch screen, and a single input. It includes a multiple input management unit 130 that simultaneously provides a plurality of applications based on location.

물론, 사용자 단말(100)의 동작을 위해서 제어부나 저장부 및 전원부가 필요하며 이는 알려져 있는 구성이므로 구체적인 설명은 생략한다.Of course, a control unit, a storage unit, and a power supply unit are required for the operation of the user terminal 100, and since this is a known configuration, a detailed description will be omitted.

도시된 단말 운영부(110)는 복수의 어플리케이션을 실행하는 운영체제를 포함하고, 제어부와 저장부 및 전원부를 관리하며, 실질적으로 단말 인터페이스부(120) 및 다중 입력 관리부(130) 역시 통합적으로 제어하고 관리하는 기능을 수행한다.The illustrated terminal operation unit 110 includes an operating system for executing a plurality of applications, manages a control unit, a storage unit, and a power supply unit, and substantially controls and manages the terminal interface unit 120 and the multiple input management unit 130 in an integrated manner. Performs the function of

단말 인터페이스부(120)는 사용자 단말(100)에 대한 사용자 입력을 수신하고 다양한 내장 기능 모듈이나 외장 기능 모듈 혹은 외부 장치로부터 데이터를 수신하는 통신 모듈을 포함할 수 있는데, 사용자에게 정보를 제공하기 위한 디스플레이, 음향 제공, 광원 제공 등을 위한 출력 모듈 역시 포함할 수 있다. 예를 들어, 터치스크린 인터페이스(정전식, 압력식, 입력 펜 사용 방식 등), 사용자의 오디오 입력이나 비디오 입력을 수신하기 위한 인터페이스(마이크, 카메라 등), 물리적 코드나 태그를 인식하는 코드 수집 인터페이스(바코드 리더, QR코드 리더, 태그 리더, IC 카드 리더, 마그네틱 카드 리더 등), 외부 데이터를 수신하는 통신 인터페이스(유선 통신, 근거리 무선 통신, 광대역 무선 통신, 광통신, 음향 통신 등) 중 적어도 하나를 포함할 수 있다.The terminal interface unit 120 may include a communication module that receives a user input for the user terminal 100 and receives data from various built-in function modules, external function modules, or external devices, for providing information to the user. It may also include an output module for providing a display, sound and light source. For example, a touch screen interface (electrostatic, pressure, input pen usage, etc.), an interface to receive a user's audio or video input (microphone, camera, etc.), and a code collection interface that recognizes physical codes or tags. (Barcode reader, QR code reader, tag reader, IC card reader, magnetic card reader, etc.), and at least one of a communication interface that receives external data (wired communication, short-range wireless communication, broadband wireless communication, optical communication, acoustic communication, etc.) Can include.

이러한 기본적인 구성을 활용하되, 한번의 위치 기반 입력을 근거로 복수의 실행 어플리케이션들에 동일 입력을 각각 제공하는 다중 입력 관리부(130)는, 단말 인터페이스부(120)를 통한 사용자 입력을 통해 다중 입력을 수신할 중복 표시 어플리케이션 등록 정보 및 메인 어플리케이션 설정 정보를 수집하는 중복 표시 어플리케이션 관리부(131)와, 중복 표시 어플리케이션 관리부(131)를 통해 설정된 메인 어플리케이션을 디스플레이하는 디스플레이 관리부(133)와, 디스플레이된 메인 어플리케이션에 대한 입력 정보를 수신하여 입력의 위치 정보와 입력의 종류 및 내용을 식별하는 입력 분석부(134)와, 입력 분석부(134)에서 식별된 입력의 위치 정보와 입력의 종류 및 내용을 기반으로 메인 어플리케이션과 등록된 중복 표시 어플리케이션들에 동일한 입력을 각각 제공하는 다중 입력 제공부(135)를 포함한다. The multi-input management unit 130, which utilizes such a basic configuration, but provides the same input to a plurality of running applications, respectively, based on a single location-based input, allows multiple inputs through a user input through the terminal interface unit 120. A redundant display application management unit 131 that collects redundant display application registration information and main application setting information to be received, a display management unit 133 that displays the main application set through the redundant display application management unit 131, and the displayed main application Based on the location information of the input and the type and content of the input identified by the input analysis unit 134 and the input analysis unit 134 that receives input information for and identifies the location information of the input and the type and content of the input. It includes a multiple input providing unit 135 for providing the same input to the main application and the registered duplicate display applications, respectively.

중복 표시 어플리케이션 관리부(131)는 사용자가 단말 인터페이스부(120)를 통해 실행시킨 어플리케이션을 메인 어플리케이션으로 간주하고, 추가 실행시킨 어플리케이션을 단말 인터페이스부(120)를 통해 메인 어플리케이션이 표시된 위치에 대응시켜 배치하면 이러한 추가 실행 어플리케이션을 중복 표시 어플리케이션으로 등록할 수 있다. 디스플레이 관리부(133)는 등록된 중복 표시 어플리케이션의 투명도를 기 설정된 수준(예컨대 완전 투명)으로 변경할 수 있다. 물론, 다중 입력 관리부(130)에서 별도의 다중 입력 어플리케이션 등록이나 메인 어플리케이션 선택을 위한 설정 인터페이스를 제공할 수도 있는데, 이는 표시 내용 관리부(132)에서 처리하며 이후 좀 더 상세히 설명하도록 한다.The redundant display application management unit 131 regards the application executed by the user through the terminal interface unit 120 as the main application, and arranges the additionally executed application through the terminal interface unit 120 to correspond to the location where the main application is displayed. Then, such an additional execution application can be registered as a duplicate display application. The display manager 133 may change the transparency of the registered redundant display application to a preset level (eg, completely transparent). Of course, the multiple input management unit 130 may provide a setting interface for registering a separate multiple input application or selecting a main application, which is processed by the display content management unit 132 and will be described in more detail later.

입력 분석부(134)는 단말 인터페이스부(120)를 통한 사용자의 입력을 분석하여 해당 입력의 위치, 입력의 종류 및 내용을 식별하는데, 예를 들어 터치스크린을 통한 '탭'의 경우 터치된 화면 상의 위치와 짧은 시간 하나의 지점이 선택된 '탭'임을 식별할 수 있다. 다중 입력 제공부(135)는 이러한 입력 분석부(134)의 식별된 입력의 위치 정보와 입력의 종류 및 내용을 메인 어플리케이션과 등록된 중복 표시 어플리케이션들에게 각각 제공하는데, 특정 위치에 대한 '탭' 입력인 경우 메인 어플리케이션에 특정 위치 탭 입력을 제공하고, 투명하게 중복 표시된 어플리케이션들에 대해서 동일 위치의 탭 입력을 모사하여 각각 제공할 수 있다.The input analysis unit 134 analyzes the user's input through the terminal interface unit 120 to identify the location of the corresponding input, the type and content of the input. For example, in the case of a'tap' through a touch screen, the touched screen It can be identified that the location of the image and one point in a short time is the selected'tap'. The multiple input providing unit 135 provides the location information of the identified input of the input analysis unit 134 and the type and content of the input to the main application and the registered redundant display applications, respectively, and a'tap' for a specific location. In the case of input, a specific location tap input may be provided to the main application, and each of the applications that are transparently overlapped may be provided by simulating the tap input at the same location.

도 1에 도시된 표시 내용 관리부(132) 및 입력 요소 매칭부(136)는 이후 도 7 내지 도 10을 통해 설명하도록 한다.The display content management unit 132 and the input element matching unit 136 illustrated in FIG. 1 will be described later with reference to FIGS. 7 to 10.

앞서 설명한 본 발명 실시예에 따른 사용자 단말(100)의 기본적인 동작 과정은 도 2에 도시된 순서도로 나타낼 수 있다.The basic operation process of the user terminal 100 according to the embodiment of the present invention described above may be represented by a flowchart shown in FIG. 2.

도 2에 도시된 바와 같이, 사용자가 사용자 단말(100)의 단말 인터페이스부(120)를 통해 다중 입력 관리부(130)를 실행함으로서 다중 입력 기능이 활성화되도록 하는 단계와, 단말 인터페이스부(120)를 통해 다중 입력을 위한 복수의 어플리케이션들을 등록하고 메인 어플리케이션을 선택하는 단계(사용 방식에 따라서 메인 어플리케이션을 먼저 선택하고 중복 표시 어플리케이션들을 선택하여 등록할 수도 있음)와, 단말 인터페이스부(120)의 터치스크린을 통한 사용자의 터치 입력, 혹은 외부 입력 및 해당 외부 입력이 적용될 위치 지정을 위한 터치 입력을 수신하여 입력의 위치와 입력의 종류 및 내용을 식별한 후 이러한 입력을 등록된 중복 표시 어플리케이션 및 메인 어플리케이션에 각각 제공하는 단계 및 입력에 따라 등록된 중복 표시 어플리케이션 및 메인 어플리케이션을 동작시키는 단계를 포함한다.As shown in FIG. 2, the step of allowing a user to activate a multi-input function by executing the multi-input management unit 130 through the terminal interface unit 120 of the user terminal 100, and the terminal interface unit 120 Registering a plurality of applications for multiple input and selecting a main application through the method (depending on the usage method, the main application may be selected first and then duplicate display applications may be selected and registered), and the touch screen of the terminal interface unit 120 After receiving a user's touch input through a user's touch input or a touch input for specifying a location to which the external input and the corresponding external input will be applied, the location of the input and the type and content of the input are identified, and these inputs are transferred to the registered duplicate display application and main application And operating the registered redundant display application and main application according to each providing and input.

이를 위해서, 메인 어플리케이션과 중복 표시 어플리케이션은 그 입력 요소의 배치가 동일한 것이 바람직하다. 즉, 메인 어플리케이션에 표시된 하나 이상의 입력 요소에 대한 입력이 위치를 기반으로 제공되면, 동일한 화면 위치를 기반으로 중복 표시 어플리케이션의 대응 입력 요소에 입력을 제공하는 것이기 때문에 입력 요소들이 각각 동일한 위치에 존재해야 한 번의 입력을 동일하게 수신할 수 있다.To this end, it is preferable that the main application and the redundant display application have the same arrangement of input elements. In other words, if an input for one or more input elements displayed in the main application is provided based on a location, since input is provided to the corresponding input element of the redundant display application based on the same screen location, the input elements must each exist at the same location. You can receive the same input once.

도 3은 본 발명 실시예에 따른 다중 입력을 수신하기 위해 등록되는 어플리케이션들의 예로서, 도 3a는 식당의 테이블 주문 정보를 입력하는 어플리케이션이고, 도 3b는 해당 식당의 테이블에 대한 온라인 좌석 예약을 위한 어플리케이션으로서 해당 어플리케이션을 통해 입력된 내용은 온라인으로 제공될 수 있는데, 전용 어플리케이션일 수도 있고 브라우저를 통해 제공되는 웹 페이지 형태일 수도 있다.3 is an example of applications registered to receive multiple inputs according to an embodiment of the present invention. FIG. 3A is an application for inputting table order information for a restaurant, and FIG. 3B is for online seat reservation for a table of a corresponding restaurant. As an application, the content input through the application may be provided online, and may be a dedicated application or a web page provided through a browser.

도시된 바와 같이 각 입력 요소들이 동일하기 때문에 도 3a를 메인 어플리케이션으로 지정하고, 도 3b를 서브 어플리케이션에 해당하는 중복 표시 어플리케이션으로 등록한 후, 사용자가 표시되는 도 3a의 화면을 보면서 특정 테이블에 대한 손님의 점유를 특정 테이블을 터치하는 것으로 입력하면, 도 3b의 어플리케이션의 대응 위치에 존재하는 테이블 역시 터치되며 이 경우 해당 좌석이 점유되어 예약할 수 없게된다. 즉, 동일한 위치에 존재하는 동일한 입력 요소에 대해 한 번의 터치 선택을 각각 입력으로 제공하게 되며, 이 경우 각 어플리케이션은 서로 다른 동작을 할 수 있다(도 3a는 주문을 위한 손님의 좌석 지정, 도 3b는 예약 관리를 위한 점유 설정).As shown, since each input element is the same, after designating FIG. 3A as the main application and registering FIG. 3B as a redundant display application corresponding to the sub-application, the user is viewing the screen of FIG. When the occupancy of is input by touching a specific table, the table existing in the corresponding position of the application of FIG. 3B is also touched, and in this case, the corresponding seat is occupied and reservation cannot be made. That is, one touch selection is provided as an input for the same input element existing in the same location, and in this case, each application can perform different operations (Fig. 3A shows the customer's seat designation for ordering, Fig. 3B. Set the occupancy for reservation management).

도 4는 중복 표시 어플리케이션 관리부(131)의 동작 예에 따른 것으로서, 메인 어플리케이션을 실행하여 표시한 후 중복 표시 어플리케이션을 실행하여 동일 위치에 대응시킴으로서 중복 표시 어플리케이션의 투명도가 변경되면서 다중 입력 대상 어플리케이션으로 등록되는 방식을 보인 것이다. 4 shows an example of the operation of the redundant display application management unit 131. After executing the main application and displaying it, the redundant display application is executed to correspond to the same location, thereby changing the transparency of the redundant display application and registering it as a multiple input target application. It showed a way of becoming.

도시된 바와 같이 사용자 단말(100)의 디스플레이에 주문을 위한 어플리케이션 화면(210)을 표시하고 이를 메인 어플리케이션으로 지정한 후 중복 표시를 위한 좌석 예약 어플리케이션을 실행시킨 다음 그 배치를 메인 어플리케이션의 표시 화면(210)에 대응시키면 해당 중복 표시를 위한 좌석 예약 어플리케이션의 화면(220)이 투명해지면서 중복 표시 어플리케이션으로서 등록된다.As shown, the application screen 210 for ordering is displayed on the display of the user terminal 100, designated as the main application, and then the seat reservation application for redundant display is executed, and the arrangement is displayed on the display screen 210 of the main application. ), the screen 220 of the seat reservation application for the corresponding redundancy display becomes transparent and is registered as a redundant display application.

도 5는 본 발명의 실시예에 따른 메인 어플리케이션(210)과 등록된 중복 표시 어플리케이션들(220, 230)의 배치 방식과 단일 입력의 다중 제공에 대한 방식을 보인 것으로서, 도시된 바와 같이, 메인 어플리케이션(210)과 동일한 입력 요소의 화면 배치를 가지는 중복 표시 어플리케이션들(220, 230)이 투명하게 중첩 배치된 상태에서 사용자의 터치스크린 입력(211)이 동일 위치의 중복 표시 어플리케이션들(220, 230)의 입력 요소에 대한 터치스크린 입력(221, 231)으로 제공되는 방식을 보인 것이다. 5 is a diagram showing a method of arranging the main application 210 and the registered redundant display applications 220 and 230 according to an embodiment of the present invention and a method of providing multiple single inputs. As shown, the main application In a state in which the overlapping display applications 220 and 230 having the same screen arrangement as that of 210 are transparently overlapped and arranged, the user's touch screen input 211 is the overlapping display applications 220 and 230 at the same location. It shows a method of providing a touch screen input (221, 231) for the input element of.

한편, 구체적으로 도시되지는 않았지만, 이러한 중복 표시 어플리케이션들(220, 230)의 경우 투명하게 표시되므로 입력이 정상적으로 제공되었는지, 그에 따라 어떠한 화면으로 변경되었는지(입력 내용의 정상 전달 여부, 그에 따라 각각 실행된 화면의 상태)를 확인하기 어렵기 때문에 다중 입력을 제공한 후 그에 따라 변화되는 중복 표시 어플리케이션들의 화면을 일정 시간 표시해 주는 방식을 적용해 볼 수 있다. On the other hand, although not shown in detail, since the overlapping display applications 220 and 230 are displayed transparently, whether the input was normally provided and which screen was changed accordingly (whether the input contents were delivered normally, and executed accordingly. Since it is difficult to check the status of the displayed screen), it is possible to apply a method of providing multiple inputs and displaying the screens of redundant display applications that change accordingly for a certain period of time.

예컨대, 도 1에 도시된 디스플레이 관리부(133)가 다중 입력 제공부(135)에서 등록된 중복 표시 어플리케이션들에 동일한 입력을 각각 제공할 경우 각 중복 표시 어플리케이션들의 입력에 따른 실행 상태 화면을 기 설정된 시간 동안 순차적으로 전환 표시하거나 반투명 상태로 전환 표시함으로써 사용자가 투명한 상태로 중복 표시된 어플리케이션들의 입력에 따른 실행 상태 화면을 확인해 볼 수 있도록 할 수 있다.For example, when the display management unit 133 shown in FIG. 1 provides the same input to duplicate display applications registered in the multiple input providing unit 135, the execution status screen according to the input of each duplicate display application is displayed at a preset time. During sequential switching or displaying in a semi-transparent state, a user can check an execution state screen according to an input of duplicated applications in a transparent state.

한편, 이러한 방식이 적용될 수 있는 것은 위치를 기반으로 입력 정보를 중복 표시 어플리케이션들에게 모사하여 제공하는 것으로 단순 처리될 수 있기 때문이다. On the other hand, this method can be applied because it can be processed simply by providing input information to duplicate display applications based on the location.

하지만, 중복 표시되는 어플리케이션들의 입력 요소(터치 입력 버튼, 선택 입력 요소, 드래그 객체, 문자 입력 요소, 리스트 박스, 라디오 버튼, 스크롤 버튼, 달력이나 시간 선택 요소, 외부 데이터나 식별 정보 입력 요소, 오디오나 비디오 입력 요소 등)들의 배치가 완전이 동일하지 않은 경우도 존재할 수 있다. However, input elements (touch input button, selection input element, drag object, text input element, list box, radio button, scroll button, calendar or time selection element, external data or identification information input element, audio or The arrangement of video input elements, etc.) may not be completely identical.

도 6은 입력 요소들이 일부 존재하지 않는 화면을 가진 중복 표시 어플리케이션을 선택하는 경우의 예를 보인 것이다.6 shows an example of selecting a duplicate display application having a screen in which some input elements do not exist.

도 6a의 메인 어플리케이션(240)의 입력 요소들 중에서 일부를 결여한 도 6b의 중복 표시 어플리케이션(250)을 등록한 경우 메인 어플리케이션(240)의 일부 입력 요소(빗금 표시)는 중복 표시 어플리케이션(250)에 존재하지 않는다.When the redundant display application 250 of FIG. 6B, which lacks some of the input elements of the main application 240 of FIG. 6A, is registered, some input elements (hatched) of the main application 240 are added to the redundant display application 250. does not exist.

이 경우, 앞서 설명한 본 발명의 실시예의 경우 동일 위치에 입력을 모사하더라도 대응되는 입력 요소가 없는 중복 표시 어플리케이션(250)은 이러한 입력을 무시하는 것으로 문제 없이 처리될 수 있다. 다만, 반대의 경우 메인 어플리케이션에서 존재하지 않는 입력 요소에 대한 잘못된 입력이 해당 위치에 입력 요소를 가진 중복 표시 어플리케이션에서는 정상적인 입력으로 처리될 수 있다. 이는 메인 어플리케이션의 입력 요소 유무에 따라 다중 입력 제공부(135)의 동작 여부를 미리 설정하는 것으로 해결할 수 있다. In this case, in the embodiment of the present invention described above, even if the input is simulated at the same location, the redundant display application 250 without a corresponding input element can be processed without a problem by ignoring the input. However, in the opposite case, an incorrect input for an input element that does not exist in the main application may be processed as a normal input in a redundant display application having an input element at a corresponding position. This can be solved by presetting whether or not the multi-input providing unit 135 is operated according to the presence or absence of an input element of the main application.

하지만 메인 어플리케이션과 중복 표시 어플리케이션의 입력 요소 배치가 완전히 동일하지 않은 상태에서 일부 입력 요소이 결여되는 것이 아니라 비슷하지만 약간 다른 위치에 존재하는 경우나 이러한 상이한 배치들이 혼재하는 경우라면 이러한 동일 위치 기반 다중 입력으로는 활용에 한계가 있게 된다.However, when the input element arrangement of the main application and the redundant display application are not completely identical, some input elements are not lacking, but are similar but exist in slightly different positions, or if these different arrangements are mixed, the same position-based multiple input is used. Is limited in its use.

이를 해결하기 위하여 본 발명의 다른 실시예에서는 이러한 비슷하지만 다른 입력 요소들을 가지는 중복 표시 어플리케이션들과 메인 어플리케이션 간에도 효과적인 다중 입력 처리가 가능하도록 한다.In order to solve this problem, in another embodiment of the present invention, effective multiple input processing is possible between the main application and duplicate display applications having similar but different input elements.

예컨대 도 7에 도시된 바와 같이 도 7a의 메인 어플리케이션(260)과 도 7b의 중복 표시 어플리케이션(270)의 경우 각각 다양한 입력 요소들이 존재하는데 이들 중 일부는 대응되는 요소가 존재하지 않을 수 있고, 일부는 그 위치가 변경되어 있을 수 있다.For example, as shown in FIG. 7, in the case of the main application 260 of FIG. 7A and the redundant display application 270 of FIG. 7B, various input elements exist, some of which may not have corresponding elements, and some May have its location changed.

도시된 예에서, 메인 어플리케이션(260)의 빗금친 입력 요소들은 중복 표시 어플리케이션(270)에서는 존재하지 않는다. 또한, 메인 어플리케이션(260)의 일부 입력 요소(262)에 대응되는 입력 요소(272)는 그 위치가 다를 수 있다.In the illustrated example, hatched input elements of the main application 260 do not exist in the redundant display application 270. Also, the positions of the input elements 272 corresponding to some of the input elements 262 of the main application 260 may be different.

이 경우, 메인 어플리케이션(260)의 입력 요소와 중복 표시 어플리케이션(270)의 입력 요소를 매칭하기 위해서, 본 발명의 다른 실시예에 따른 다중 입력 관리부(130)는 입력 요소 매칭부(136)를 더 포함할 수 있다. In this case, in order to match the input element of the main application 260 with the input element of the redundant display application 270, the multiple input management unit 130 according to another embodiment of the present invention further includes an input element matching unit 136. Can include.

입력 요소 매칭부(136)는 등록된 중복 표시 어플리케이션들과 메인 어플리케이션의 표시 화면을 기준으로 각 입력 요소들을 구분하고, 위치와 입력 요소의 종류를 기반으로 단일 입력을 동시 수신할 입력 요소를 매칭할 수 있다. 즉, 메인 어플리케이션의 입력 요소를 기준으로 중복 표시 어플리케이션들의 입력 요소들을 확인하고 유사한 위치의 동일 종류 입력 요소를 상호 매칭하되, 완전히 동일한 위치에 존재하지 않더라도 일정 범위에 동일한 입력 요소가 존재할 경우 대응되는 것으로 자동 매칭하도록 할 수 있다. The input element matching unit 136 classifies each input element based on the registered duplicate display applications and the display screen of the main application, and matches the input element to simultaneously receive a single input based on the location and the type of the input element. I can. In other words, input elements of duplicate display applications are checked based on the input element of the main application, and input elements of the same type in similar positions are matched with each other, but if the same input elements exist in a certain range even if they do not exist in the exact same position, the corresponding It can be automatically matched.

예컨대 메인 어플리케이션(260)의 특정 입력 요소(262)에 대해서 위치는 상이하지만 동일한 종류의 입력 요소인 중복 표시 어플리케이션(270)의 입력 요소(272)를 대응되는 것으로 매칭할 수 있다. 물론, 인접한 동일 종류의 입력 요소를 우선 매칭하는 것으로 대응되는 입력 요소가 존재하지 않을 경우 해당 입력 요소(메인 어플리케이션(260)의 빗금친 입력 요소들)는 매칭 대상이 없는 것으로 설정될 수 있고, 이 경우 해당 입력 요소에 대한 입력이 있을 때 다중 입력 제공 과정을 생략할 수도 있다.For example, although the location of the specific input element 262 of the main application 260 is different, the input element 272 of the redundant display application 270, which is the same type of input element, may be matched with a corresponding one. Of course, by first matching adjacent input elements of the same type, if there is no corresponding input element, the corresponding input element (hatched input elements of the main application 260) may be set to have no matching target. In this case, when there is an input for the corresponding input element, the process of providing multiple inputs may be omitted.

한편, 도 7에 도시된 메인 어플리케이션(260)과 중복 표시 어플리케이션(270)의 화면 구성과 같이 입력 요소들의 차이가 많은 경우 매칭 상태를 확인하기 어렵고, 다중 입력이 수행되었을 때 중복 표시 어플리케이션의 정상적으로 동작했는 지 확인하기 어렵다. On the other hand, it is difficult to check the matching status when there are many differences between input elements, such as the screen configuration of the main application 260 and the redundant display application 270 shown in FIG. 7, and the redundant display application normally operates when multiple inputs are performed. It is difficult to check if it did.

따라서, 도 8에 예시된 바와 같이 사용자에게 명시적이고 직관적으로 중복 표시 어플리케이션들을 등록하고 이 중에서 메인 어플리케이션을 설정하며, 이를 용이하게 변경할 수 있고, 각 어플리케이션의 화면 상태를 미리 확인해 볼 수 있도록 하는 다중 입력 관리부(130) 설정용 화면 인터페이스를 더 적용할 수 있다. 나아가, 도 9와 같이 이러한 다중 입력 관리부(130) 설정용 화면 인터페이스를 이용하여 각 어플리케이션들의 입력 요소들 간 입력 요소 매칭부(136)에 의한 매칭 상태를 확인하고 이를 갱신하도록 할 수도 있다. Therefore, as illustrated in FIG. 8, multiple inputs that explicitly and intuitively register redundant display applications to the user and set the main application among them, can be easily changed, and check the screen state of each application in advance. A screen interface for setting the management unit 130 may be further applied. Further, as shown in FIG. 9, the matching state by the input element matching unit 136 between input elements of each application may be checked and updated using the screen interface for setting the multiple input management unit 130.

이를 위해서, 본 발명의 다른 실시예에 따른 다중 입력 관리부(130)는 도 1에 도시된 바와 같이 표시 내용 관리부(132)를 더 포함한다. To this end, the multiple input management unit 130 according to another embodiment of the present invention further includes a display content management unit 132 as shown in FIG. 1.

표시 내용 관리부(132)는 호출에 따라 등록된 중복 표시 어플리케이션 정보와 설정된 메인 어플리케이션 정보를 제공하고 이를 변경할 수 있는 인터페이스를 제공하며, 각 등록 중복 표시 어플리케이션의 현재 실행 화면을 작은 크기의 프리뷰 형태로 나타낼 수 있다. 이러한 표시 내용 관리부(132)의 사용을 위해서 입력 분석부(134)는 사용자의 기 설정된 제스처 입력을 통해 표시 내용 관리부(132)의 호출과 은닉을 구분할 수 있다. The display content management unit 132 provides information on the registered redundant display application and set main application information according to a call, and provides an interface to change it, and displays the current execution screen of each registered redundant display application in a small preview format. I can. In order to use the display content management unit 132, the input analysis unit 134 may distinguish between calling and hiding the display content management unit 132 through a preset gesture input by the user.

예를 들어, 도 8은 본 발명의 다른 실시예에 따른 표시 내용 관리부(132)에 의해 표시되는 중복 표시 어플리케이션들과 메인 어플리케이션의 설정 화면 예시도이다. For example, FIG. 8 is an exemplary diagram illustrating a setting screen of redundant display applications and a main application displayed by the display content management unit 132 according to another embodiment of the present invention.

도시된 바와 같이 메인 어플리케이션(270)에 표시되어 있는 화면 중 미리 설정된 제스쳐로서 측면에 일부 노출된 탭(310)을 내부로 드래그하는 사용자 입력을 입력 분석부(134)를 통해 확인하여 표시 내용 관리부(132)가 호출되며, 그에 따라 인터페이스 화면(320)이 나타날 수 있다. 해당 표시 내용 관리부(132)의 인터페이스 화면에는 메인 어플리케이션의 축소된 화면 이미지와 중복 표시 어플리케이션들의 축소된 화면 이미지가 나타날 수 있으며, 필요에 따라 중복 표시 어플리케이션을 추가할 수 있고, 표시된 복수의 중복 표시 어플리케이션들 중에서 선택하는 것으로 메인 어플리케이션을 전환할 수 있다. 이를 통해서 기준이 되는 메인 어플리케이션을 재 지정하거나 중복 표시 어플리케이션에 대한 다중 입력 결과를 확인해 볼 수 있다. 이러한 노출 탭(310)을 다시 측면으로 드래그할 경우 해당 표시 내용 관리부(132)가 은닉될 수 있다. As shown, the user input of dragging the tab 310 partially exposed on the side as a preset gesture among the screens displayed on the main application 270 to the inside is confirmed through the input analysis unit 134 and the display content management unit ( 132) is called, and the interface screen 320 may appear accordingly. On the interface screen of the corresponding display content management unit 132, a reduced screen image of the main application and a reduced screen image of the redundant display applications may be displayed, and a redundant display application may be added as necessary, and a plurality of displayed redundant display applications You can switch the main application by selecting from among them. Through this, it is possible to redesignate the main application as a reference or check the multiple input results for the duplicate display application. When the exposed tab 310 is dragged to the side again, the corresponding display content management unit 132 may be hidden.

물론, 도시된 예와 같은 드래그 형식의 제스쳐 외에 복수의 터치를 한 번에 입력한다거나, 미리 설정된 도형을 그리는 등의 다양한 표시 내용 관리부(132)의 호출 및 은닉 제스쳐가 사용될 수 있다.Of course, in addition to the drag-type gesture as shown in the illustrated example, a plurality of touches may be input at one time or a call and a hidden gesture of various display content management units 132 such as drawing a preset figure, etc. may be used.

한편, 표시 내용 관리부(132)의 인터페이스 화면에 표시되는 메인 어플리케이션의 화면과 중복 표시 어플리케이션의 화면을 활용하여 입력 요소 매칭부(136)에서 매칭한 입력 요소들 간의 매칭 내용을 확인해 볼 수도 있고, 필요에 따라 사용자가 매칭 상태를 갱신할 수도 있다.On the other hand, by using the screen of the main application displayed on the interface screen of the display content management unit 132 and the screen of the redundant display application, it is possible to check the matching content between the input elements matched by the input element matching unit 136, and is necessary. According to this, the user may update the matching status.

도 9는 앞서 도 8의 예시와 같이 표시 내용 관리부(132)가 호출되어 그 인터페이스 화면(320)이 나타났을 때 메인 어플리케이션의 특정 입력 요소(321)를 선택한 경우의 예로서, 도시된 도 9a와 같이 중복 표시 어플리케이션들의 입력 요소들 중에서 입력 요소 매칭부(136)에 의해 매칭된 입력 요소들이 표시(검은색)되어 매칭 상태를 직관적으로 확인할 수 있다. 9 is an example of a case in which a specific input element 321 of the main application is selected when the display content management unit 132 is called and the interface screen 320 is displayed as in the example of FIG. 8. Likewise, among the input elements of the redundant display applications, matched input elements by the input element matching unit 136 are displayed (black), so that the matching state can be intuitively checked.

만일, 이러한 매칭이 잘못된 경우 도 9b와 같이 중복 표시 어플리케이션들의 입력 요소들 중에서 대응되는 입력 요소를 선택하는 것으로 매칭 상태를 갱신할 수 있다.If such a match is incorrect, the matching state may be updated by selecting a corresponding input element among input elements of redundant display applications as shown in FIG. 9B.

이러한 방식으로 표시 내용 관리부(132)의 인터페이스 화면(320)을 통해 용이하게 중복 표시 어플리케이션 등록, 메인 어플리케이션 설정을 수행하며, 필요한 경우 중복 표시 어플리케이션의 제외, 메인 어플리케이션의 변경, 입력 요소들 간 매칭 상태 확인 및 갱신, 다중 입력에 따른 화면 상태 확인 등이 직관적으로 이루어질 수 있어 사용자의 다중 입력에 대한 편의성을 높일 수 있고, 그에 따라 생산성을 높일 수 있게 된다.In this way, through the interface screen 320 of the display content management unit 132, the duplicate display application is easily registered and the main application is set, and if necessary, the duplicate display application is excluded, the main application is changed, and the matching state between input elements. Since confirmation and update, screen status check according to multiple inputs, etc. can be made intuitively, the user's convenience for multiple inputs can be increased, and productivity can be increased accordingly.

한편, 도 7에 도시된 구성에서, 메인 어플리케이션(260)에 단순 터치 입력이 아닌 사용자 단말에 구성되는 외부 입력 수단으로서 바코드 리더(150)를 통해 코드가 인식되는 경우, 이러한 인식되는 코드 정보를 복수의 중복 표시 어플리케이션들에 다중 입력으로 제공할 수 있다.Meanwhile, in the configuration shown in FIG. 7, when a code is recognized through the barcode reader 150 as an external input means configured in the user terminal rather than a simple touch input to the main application 260, the recognized code information is It can be provided as multiple inputs to redundant display applications.

즉, 입력 분석부(134)는 터치스크린을 통한 제스쳐 입력, 문자 입력, 기 구성된 인터페이스를 이용한 오디오 입력, 비디오 입력, 코드 식별 정보 입력, 수신 데이터 입력 중 적어도 하나를 입력으로 식별하며, 다중 입력 제공부(135)는 입력 분석부(134)에서 식별된 입력의 입력의 종류 및 내용을 식별된 위치 정보에 대응되는 각 중복 표시 어플리케이션들의 입력 요소에 제공한다. That is, the input analysis unit 134 identifies as an input at least one of a gesture input through a touch screen, a character input, an audio input using a preconfigured interface, a video input, a code identification information input, and a received data input. Study 135 provides the type and content of the input of the input identified by the input analysis unit 134 to the input element of each redundant display application corresponding to the identified location information.

예를 들어, 메인 어플리케이션의 입력 요소에 대해서 사용자의 터치 입력 외에 오디오 입력, 비디오 입력, 코드 식별 정보 입력, 수신 데이터 입력 등이 입력으로서 제공되면 해당 입력 요소를 선택한 후 이러한 오디오 입력, 비디오 입력, 코드 식별 정보 입력, 수신 데이터 입력 등이 순차적으로 제공된 것으로 간주하여 다중 입력을 제공할 수 있다. For example, if audio input, video input, code identification information input, received data input, etc. are provided as inputs in addition to the user's touch input for the input element of the main application, select the corresponding input element and then these audio input, video input, code Multiple inputs may be provided by considering the input of identification information and input of received data as sequentially provided.

이를 통해서 여러 어플리케이션들을 순차적으로 선택하면서 동일한 오디오 입력, 비디오 입력, 코드 식별 정보 입력, 수신 데이터 입력 등을 반복해야 할 경우 대단히 유용하게 적용될 수 있다.This can be very usefully applied when multiple applications are sequentially selected and the same audio input, video input, code identification information input, and received data input must be repeated.

도 10은 본 발명의 다른 실시예에 따른 동작 과정을 보인 순서도이다. 도시된 바와 같이, 다중 입력 관리부의 기능을 실행시키고 단말 인터페이스부를 통해 소정의 설정된 제스쳐를 입력하는 것으로 설정화면, 즉 표시 내용 관리부의 인터페이스 화면을 호출한 후, 중복 표시 어플리케이션들을 등록하고 이들 중 메인 어플리케이션을 하나 선택한다. 또한, 메인 어플리케이션의 입력 요소들을 기준으로 입력 요소 매칭부가 중복 표시 어플리케이션들의 입력 요소들과 매칭한 내용을 확인하고, 필요한 경우 매칭 대상을 갱신할 수 있다. 10 is a flow chart showing an operation process according to another embodiment of the present invention. As shown, by executing the function of the multi-input management unit and inputting a predetermined gesture through the terminal interface unit, the setting screen, that is, the interface screen of the display content management unit, is called, and then the redundant display applications are registered and the main application among them Choose one. Also, based on the input elements of the main application, the input element matching unit may check the content matched with the input elements of the redundant display applications, and, if necessary, update the matching target.

이후 단말 인터페이스부를 통한 소정의 제스쳐로 해당 표시 내용 관리부의 인터페이스 화면을 은닉하면 메인 어플리케이션이 표시된 화면으로 복귀한다. 이 때, 실질적으로 메인 어플리케이션만 화면에 표시되지만 복수의 중복 표시 어플리케이션들 역시 실행 상태로서 화면에 투명하게 배치된 것으로 간주될 수 있다. Thereafter, when the interface screen of the corresponding display content management unit is hidden with a predetermined gesture through the terminal interface unit, the main application is returned to the displayed screen. In this case, substantially only the main application is displayed on the screen, but a plurality of redundant display applications may also be regarded as being transparently disposed on the screen as an execution state.

이와 같은 초기 설정이 이루어진 후 사용자가 단말 인터페이스부를 통해서 메인 어플리케이션의 입력 요소에 입력을 제공한다. After such initial setting is made, the user provides an input to the input element of the main application through the terminal interface.

해당 입력이 사용자의 터치스크린 조작과 같은 위치를 기반으로 하는 입력인 경우 수신 입력을 식별하여 등록된 중복 표시 어플리케이션의 매칭 위치에 각각 적용하여 각 개별 중복 표시 어플리케이션 및 메인 어플리케이션이 입력에 따른 대응 동작을 수행하도록 한다. 이러한 대응 동작의 수행은 해당 입력에 따른 각 어플리케이션들의 서로 같거나 다른 기능의 수행일 수 있고, 단순 포커스 전환일 수도 있다. When the corresponding input is an input based on the same location as the user's touch screen manipulation, the received input is identified and applied to the matching location of the registered duplicate display application, so that each individual redundant display application and the main application respond to the input. Do it. The execution of such a corresponding operation may be the execution of the same or different function of each application according to the corresponding input, or may be a simple focus change.

한편, 해당 입력이 사용자의 터치 스크린 조작에 따른 입력이 아닌 외부 입력(오디오 입력, 비디오 입력, 코드 식별 정보 입력, 수신 데이터 입력 등)인 경우 해당 외부 입력 정보를 수집하고, 사용자의 터치스크린 입력과 같은 위치를 기반으로 하는 입력에 따라 미리 지정된(포커스가 설정된) 입력 요소에 대한 실제 입력 정보로서 해당 외부 입력 정보를 각 중복 표시 어플리케이션 및 메인 어플리케이션에 제공하고, 각 어플리케이션이 대응 동작을 수행하도록 한다On the other hand, if the corresponding input is an external input (audio input, video input, code identification information input, received data input, etc.), not an input according to the user's touch screen manipulation, the corresponding external input information is collected, and the user's touch screen input and As actual input information for input elements previously designated (focus is set) according to input based on the same location, corresponding external input information is provided to each redundant display application and main application, and each application performs a corresponding action.

이러한 과정을 통해서 유사한 입력 요소의 화면 배치를 가지는 복수 어플리케이션들에 대한 입력 과정을 단순화할 수 있어 사용자의 편의성을 개선할 수 있고, 효율이나 생산성을 높일 수 있다.Through this process, it is possible to simplify an input process for a plurality of applications having a screen arrangement of similar input elements, thereby improving user convenience and enhancing efficiency and productivity.

실시예들에 따른 방법은 다양한 컴퓨터 수단을 통하여 수행될 수 있는 프로그램 명령 형태로 구현되어 컴퓨터 판독 가능 매체에 기록될 수 있다. 상기 컴퓨터 판독 가능 매체는 프로그램 명령, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 상기 매체에 기록되는 프로그램 명령은 실시예를 위하여 특별히 설계되고 구성된 것들이거나 컴퓨터 소프트웨어 당업자에게 공지되어 사용 가능한 것일 수도 있다. 컴퓨터 판독 가능 기록 매체의 예에는 물리적인 하드디스크(hard disk), SSD(Solid State Drive), 웹하드(web hard), 클라우드 저장소와 같은 대용량 데이터 저장 수단, 플로피 디스크 및 자기 테이프와 같은 자기 매체(magnetic media), CD-ROM, DVD와 같은 광기록 매체(optical media), 플롭티컬 디스크(floptical disk)와 같은 자기-광 매체(magneto-optical media), 및 롬(ROM), 램(RAM), 플래시 메모리 등과 같은 프로그램 명령을 저장하고 수행하도록 특별히 구성된 하드웨어 장치가 포함된다. 프로그램 명령의 예에는 컴파일러에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용해서 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드를 포함한다. 상기된 하드웨어 장치는 실시예의 동작을 수행하기 위해 하나 이상의 소프트웨어 모듈로서 작동하도록 구성될 수 있으며, 그 역도 마찬가지이다.The method according to the embodiments may be implemented in the form of program instructions that can be executed through various computer means and recorded in a computer-readable medium. The computer-readable medium may include program instructions, data files, data structures, and the like alone or in combination. The program instructions recorded on the medium may be specially designed and configured for the embodiment, or may be known and usable to those skilled in computer software. Examples of computer-readable recording media include physical hard disks, solid state drives (SSDs), web hard, large data storage means such as cloud storage, magnetic media such as floppy disks and magnetic tapes ( magnetic media, optical media such as CD-ROM, DVD, magneto-optical media such as floptical disk, and ROM, RAM, Hardware devices specially configured to store and execute program instructions such as flash memory and the like are included. Examples of the program instructions include not only machine language codes such as those produced by a compiler, but also high-level language codes that can be executed by a computer using an interpreter or the like. The hardware device described above may be configured to operate as one or more software modules to perform the operation of the embodiment, and vice versa.

이상에서는 본 발명에 따른 바람직한 실시예들에 대하여 도시하고 또한 설명하였다. 그러나 본 발명은 상술한 실시예에 한정되지 아니하며, 특허 청구의 범위에서 첨부하는 본 발명의 요지를 벗어남이 없이 당해 발명이 속하는 기술 분야에서 통상의 지식을 가진 자라면 누구든지 다양한 변형 실시가 가능할 것이다. In the above, preferred embodiments according to the present invention have been illustrated and described. However, the present invention is not limited to the above-described embodiments, and any person with ordinary knowledge in the technical field to which the present invention pertains without departing from the gist of the present invention appended in the claims will be able to implement various modifications. .

100: 사용자 단말 110: 단말 운영부
120: 단말 인터페이스부 130: 다중 입력 관리부
131: 중복 표시 어플리케이션 관리부 132: 표시 내용 관리부
133: 디스플레이 관리부 134: 입력 분석부
135: 다중 입력 제공부 136: 입력 요소 매칭부100: user terminal 110: terminal operation unit
120: terminal interface unit 130: multiple input management unit
131: redundant display application management unit 132: display content management unit
133: display management unit 134: input analysis unit
135: multiple input providing unit 136: input element matching unit

Claims (10)

복수의 어플리케이션들을 멀티태스킹 방식으로 구동시키는 단말 운영부와;
터치스크린을 포함하는 사용자 입출력 인터페이스를 구비하는 단말 인터페이스부와;
단일 입력을 복수의 어플리케이션들에 위치를 기반으로 동시 제공하는 다중 입력 관리부를 포함하되,
상기 다중 입력 관리부는,
사용자 입력을 통해 다중 입력을 수신할 중복 표시 어플리케이션 등록 정보 및 메인 어플리케이션 설정 정보를 수집하는 중복 표시 어플리케이션 관리부와;
상기 중복 표시 어플리케이션 관리부를 통해 설정된 메인 어플리케이션을 디스플레이하는 디스플레이 관리부와;
상기 디스플레이된 메인 어플리케이션에 대한 입력 정보를 수신하여 입력의 위치 정보와 입력의 종류 및 내용을 식별하는 입력 분석부와;
상기 입력 분석부에서 식별된 입력의 위치 정보와 입력의 종류 및 내용을 기반으로 상기 메인 어플리케이션과 상기 등록된 중복 표시 어플리케이션들에 동일한 입력을 각각 제공하는 다중 입력 제공부를 포함하며,
상기 다중 입력 제공부는,
상기 메인 어플리케이션이 디스플레이된 화면에 상기 중복 표시 어플리케이션 관리부에 등록된 중복 표시 어플리케이션들을 투명한 상태로 대응 배치한 것으로 간주하고 상기 메인 어플리케이션이 디스플레이된 화면을 통해 터치입력으로 제공되는 사용자 입력을 대응 배치된 중복 표시어플리케이션들의 동일 위치에 동일 입력이 제공되는 것으로 모사하는 입력 정보를 제공하는 것을 특징으로 하는 단일 입력 다중 처리 기능을 구비한 사용자 단말.
A terminal operating unit for driving a plurality of applications in a multitasking manner;
A terminal interface unit having a user input/output interface including a touch screen;
Including a multi-input management unit that simultaneously provides a single input to a plurality of applications based on location,
The multiple input management unit,
A redundant display application management unit for collecting redundant display application registration information and main application setting information to receive multiple inputs through a user input;
A display manager for displaying a main application set through the redundant display application manager;
An input analysis unit that receives input information on the displayed main application and identifies location information of the input and the type and content of the input;
A multi-input providing unit for providing the same input to the main application and the registered redundant display applications, respectively, based on the location information of the input identified by the input analysis unit and the type and content of the input,
The multiple input providing unit,
It is considered that the overlapping display applications registered in the redundant display application management unit are correspondingly arranged on the screen on which the main application is displayed, and the user input provided as a touch input through the screen on which the main application is displayed is correspondingly arranged. A user terminal with a single input multiple processing function, characterized in that it provides input information that simulates that the same input is provided at the same location of display applications.
 청구항 1에 있어서,
상기 디스플레이 관리부는 상기 중복 표시 어플리케이션들의 표시 화면을 기 설정된 투명도로 메인 어플리케이션의 표시 화면에 중복하여 나타내는 것을 특징으로 하는 단일 입력 다중 처리 기능을 구비한 사용자 단말.
The method according to claim 1,
Wherein the display management unit overlaps the display screens of the redundant display applications on the display screens of the main application with preset transparency.
 청구항 1에 있어서, 상기 디스플레이 관리부는 다중 입력 제공부에서 등록된 중복 표시 어플리케이션들에 동일한 입력을 각각 제공할 경우 각 중복 표시 어플리케이션들의 입력에 따른 실행 상태 화면을 기 설정된 시간 동안 순차적으로 전환 표시하거나 반투명 상태로 전환 표시하는 것을 특징으로 하는 단일 입력 다중 처리 기능을 구비한 사용자 단말.
The method according to claim 1, wherein the display management unit sequentially converts and displays the execution status screen according to the input of each redundant display application for a preset time when the same input is provided to each of the redundant display applications registered by the multiple input provider. A user terminal with a single input multi-processing function, characterized in that the conversion to the state is displayed.
 삭제delete 청구항 1에 있어서, 상기 다중 입력 제공부는 상기 메인 어플리케이션의 입력 요소들과 상기 등록된 중복 표시 어플리케이션들의 입력 요소들을 그 위치를 근거로 상호 매칭하되 동일한 종류의 입력 요소 중 가장 인접한 입력 요소를 동일 입력 요소로 매칭하여 입력을 동시에 제공하는 것을 특징으로 하는 단일 입력 다중 처리 기능을 구비한 사용자 단말.
The method according to claim 1, wherein the multi-input providing unit matches input elements of the main application and input elements of the registered duplicate display applications based on their positions, but the closest input element among the same type of input elements is the same input element. A user terminal with a single input multiple processing function, characterized in that the input is simultaneously provided by matching with.
 청구항 5에 있어서, 상기 메인 어플리케이션의 특정 입력 요소에 대해 상기 등록된 중복 표시 어플리케이션들 중 적어도 하나의 중복 표시 어플리케이션의 대응 위치를 기준으로 기 설정된 범위에 동일한 종류의 입력 요소가 없는 경우 해당 중복 표시 어플리케이션에는 상기 특정 입력 요소에 대한 사용자 입력을 제공하지 않는 것을 특징으로 하는 단일 입력 다중 처리 기능을 구비한 사용자 단말.
The redundant display application of claim 5, wherein when there is no input element of the same type in a preset range based on a corresponding position of at least one redundant display application among the registered redundant display applications for a specific input element of the main application A user terminal having a single input multi-processing function, characterized in that the user input for the specific input element is not provided.
 청구항 1에 있어서, 상기 단말 인터페이스부는 터치스크린 외에 사용자의 오디오 입력이나 비디오 입력을 수신하기 위한 인터페이스, 물리적 코드나 태그를 인식하는 코드 수집 인터페이스, 외부 데이터를 수신하는 통신 인터페이스 중 적어도 하나를 포함하며,
상기 입력 분석부는 터치스크린을 통한 제스쳐 입력, 문자 입력, 기 구성된 인터페이스를 이용한 오디오 입력, 비디오 입력, 코드 식별 정보 입력, 수신 데이터 입력 중 적어도 하나를 입력으로 식별하고, 상기 다중 입력 제공부는 상기 입력 분석부에서 식별된 입력의 입력의 종류 및 내용을 식별된 위치 정보에 대응되는 각 중복 표시 어플리케이션들의 입력 요소에 제공하는 것을 특징으로 하는 단일 입력 다중 처리 기능을 구비한 사용자 단말.
The method according to claim 1, wherein the terminal interface unit comprises at least one of an interface for receiving an audio input or a video input of a user, a code collection interface for recognizing a physical code or tag, and a communication interface for receiving external data, in addition to the touch screen,
The input analysis unit identifies as input at least one of a gesture input through a touch screen, a character input, an audio input using a preconfigured interface, a video input, a code identification information input, and a received data input, and the multiple input providing unit analyzes the input. A user terminal having a single input multiple processing function, characterized in that the type and content of the input of the input identified by the unit are provided to the input elements of each redundant display application corresponding to the identified location information.
 청구항 1에 있어서, 호출에 따라 등록된 중복 표시 어플리케이션 정보와 설정된 메인 어플리케이션 정보를 제공하고 이를 변경할 수 있는 인터페이스를 제공하고, 각 등록 중복 표시 어플리케이션의 현재 실행 화면을 제공하는 표시 내용 관리부를 더 포함하며, 상기 입력 분석부는 사용자의 기 설정된 제스처 입력을 통해 표시 내용 관리부의 호출과 은닉을 구분하는 것을 특징으로 하는 단일 입력 다중 처리 기능을 구비한 사용자 단말.
The method according to claim 1, further comprising a display content management unit that provides registered duplicate display application information and set main application information according to a call, and provides an interface for changing them, and provides a current execution screen of each registered duplicate display application, And the input analysis unit distinguishes between calling and hiding of the display content management unit through a preset gesture input of the user.
 청구항 1에 있어서, 상기 등록된 중복 표시 어플리케이션들과 메인 어플리케이션의 표시 화면을 기준으로 각 입력 요소들을 구분하고, 위치와 입력 요소의 종류를 기반으로 단일 입력을 동시 수신할 입력 요소를 매칭하고, 사용자 입력에 따라 매칭된 입력 요소의 매칭 상태를 갱신하는 입력 요소 매칭부를 포함하는 것을 특징으로 하는 단일 입력 다중 처리 기능을 구비한 사용자 단말.
The method according to claim 1, wherein each input element is classified based on the registered duplicate display applications and the display screen of the main application, and an input element to simultaneously receive a single input is matched based on a location and a type of the input element, and the user A user terminal having a single input multiple processing function, comprising: an input element matching unit for updating a matching state of the matched input element according to an input.
 청구항 9에 있어서, 상기 등록된 중복 표시 어플리케이션 정보와 설정된 메인 어플리케이션 정보를 축소된 각 어플리케이션의 화면으로 표시하고, 상기 메인 어플리케이션의 입력 요소 선택 시 매칭된 중복 표시 어플리케이션들의 대응 입력 요소를 표시하며, 사용자 입력에 따라 입력 요소 매칭 상태를 상이하게 변경하는 표시 내용 관리부를 더 포함하는 것을 특징으로 하는 단일 입력 다중 처리 기능을 구비한 사용자 단말.The method according to claim 9, wherein the registered duplicate display application information and the set main application information are displayed on a screen of each reduced application, and when an input element of the main application is selected, corresponding input elements of matched duplicate display applications are displayed, and the user A user terminal having a single input multi-processing function, further comprising a display content management unit for differently changing an input element matching state according to an input.
KR1020190099667A 2019-08-14 2019-08-14 User device with single input multiple processing function KR102167503B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020190099667A KR102167503B1 (en) 2019-08-14 2019-08-14 User device with single input multiple processing function

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020190099667A KR102167503B1 (en) 2019-08-14 2019-08-14 User device with single input multiple processing function

Publications (1)

Publication Number Publication Date
KR102167503B1 true KR102167503B1 (en) 2020-10-19

Family

ID=73042842

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020190099667A KR102167503B1 (en) 2019-08-14 2019-08-14 User device with single input multiple processing function

Country Status (1)

Country Link
KR (1) KR102167503B1 (en)

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20110049431A (en) * 2009-11-05 2011-05-12 주식회사 팬택 Terminal and method for providing see-through input
KR20120085015A (en) * 2011-01-21 2012-07-31 에스케이플래닛 주식회사 Locking management apparatus and method of terminal
KR20130054071A (en) * 2011-11-16 2013-05-24 삼성전자주식회사 Mobile apparatus for processing multiple applications and method thereof
KR20140046968A (en) 2012-10-11 2014-04-21 엘지전자 주식회사 Mobile terminal and method for controlling mobile terminal
KR20140133251A (en) * 2013-05-10 2014-11-19 중소기업은행 Computer apparatus for managing a plurality of applications and method
KR20160017992A (en) 2014-08-07 2016-02-17 엘지전자 주식회사 Mobile terminal and method for controlling the same
KR20170084964A (en) * 2016-01-13 2017-07-21 한국전자통신연구원 Apparatus for managing application using grouping and method using the same

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20110049431A (en) * 2009-11-05 2011-05-12 주식회사 팬택 Terminal and method for providing see-through input
KR20120085015A (en) * 2011-01-21 2012-07-31 에스케이플래닛 주식회사 Locking management apparatus and method of terminal
KR20130054071A (en) * 2011-11-16 2013-05-24 삼성전자주식회사 Mobile apparatus for processing multiple applications and method thereof
KR20140046968A (en) 2012-10-11 2014-04-21 엘지전자 주식회사 Mobile terminal and method for controlling mobile terminal
KR20140133251A (en) * 2013-05-10 2014-11-19 중소기업은행 Computer apparatus for managing a plurality of applications and method
KR20160017992A (en) 2014-08-07 2016-02-17 엘지전자 주식회사 Mobile terminal and method for controlling the same
KR20170084964A (en) * 2016-01-13 2017-07-21 한국전자통신연구원 Apparatus for managing application using grouping and method using the same

Similar Documents

Publication Publication Date Title
US11347721B2 (en) Digital processing systems and methods for automatic application of sub-board templates in collaborative work systems
CN106909297B (en) Data communication processing method and device, electronic equipment and touch display equipment
CN103154856B (en) For the environmental correclation dynamic range control of gesture identification
AU2012309051B2 (en) Role based user interface for limited display devices
CN106020613A (en) Operation method and mobile terminal for unread messages
CN107679832A (en) Task management method, device and server
CN107391134A (en) A kind of General Mobile application interactive interface automatically generates and dynamic mapping method and apparatus
US11561679B2 (en) Display control system, display control method, and program for page arrangement of information items
US10521248B2 (en) Electronic device and method thereof for managing applications
CN109359582A (en) Information search method, information search device and mobile terminal
US20130127745A1 (en) Method for Multiple Touch Control Virtual Objects and System thereof
KR102167503B1 (en) User device with single input multiple processing function
CN107870709A (en) The interactive tutorial of input options is supported at computing device
KR101640688B1 (en) A configuration system for apps on the smart device using the memo note and stickers
TW201207757A (en) Device and method for polymorphism button of the stock quoting software on a mobile apparatus
US20170098206A1 (en) Transactional user interface
EP3679460A1 (en) Human-computer interface comprising a token
Chakraborty et al. Duity: A Low-cost and Pervasive Finger-count Based Hand Gesture Recognition System for Low-literate and Novice Users
US11488236B2 (en) Symbol-assisted menu selection for transaction terminals
CN113268291B (en) Schedule processing method, device, equipment and storage medium
US10831261B2 (en) Cognitive display interface for augmenting display device content within a restricted access space based on user input
US11060871B2 (en) Proximity navigation
CN108428183A (en) User grouping management method, server and storage medium
WO2023217177A1 (en) Method for processing application window, and storage medium and intelligent interaction tablet computer
KR20170018518A (en) Method of displaying software input device of mobile device depending on attribute of data input cell within application user interface

Legal Events

Date Code Title Description
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant