KR20170078340A - User identification system for coordinate recognition of IR type input device - Google Patents

User identification system for coordinate recognition of IR type input device Download PDF

Info

Publication number
KR20170078340A
KR20170078340A KR1020150188748A KR20150188748A KR20170078340A KR 20170078340 A KR20170078340 A KR 20170078340A KR 1020150188748 A KR1020150188748 A KR 1020150188748A KR 20150188748 A KR20150188748 A KR 20150188748A KR 20170078340 A KR20170078340 A KR 20170078340A
Authority
KR
South Korea
Prior art keywords
infrared
user
input device
user identification
frame
Prior art date
Application number
KR1020150188748A
Other languages
Korean (ko)
Other versions
KR101981523B1 (en
Inventor
박홍식
윤태수
채일진
배경태
Original Assignee
동서대학교산학협력단
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 동서대학교산학협력단 filed Critical 동서대학교산학협력단
Priority to KR1020150188748A priority Critical patent/KR101981523B1/en
Publication of KR20170078340A publication Critical patent/KR20170078340A/en
Application granted granted Critical
Publication of KR101981523B1 publication Critical patent/KR101981523B1/en

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/002—Specific input/output arrangements not covered by G06F3/01 - G06F3/16
    • G06F3/005—Input arrangements through a video camera

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Position Input By Displaying (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

본 발명은 다자간 적외선 입력장치 위치 인식을 위한 사용자 식별 시스템에 관한 것이다. 본 발명은, 다수의 적외선 입력장치에 의해 바라보는 방향에 깜빡거리는 적외선 포인트(또는 패턴)를 표시하기 위해 구비되는 스크린; 상기 스크린에 대해서 초당 미리 설정된 수의 프레임 촬영을 수행하는 적외선 카메라; 및 상기 다수의 적외선 입력장치 및 상기 적외선 카메라와 데이터 및 신호 송수신을 수행하며, 각 적외선 입력장치에 의한 스크린상의 사용자별 적외선 포인트의 위치 인식을 위해 상기 적외선 카메라에서의 촬영 영상을 사용자 구분없이 모든 영상을 그대로 가져와서 초당 미리 설정된 수의 프레임 내에서 각 프레임별로 할당된 사용자 식별 코드를 인지하여 사용자를 식별하고, 식별된 사용자의 좌표를 분석하는 사용자 동기화 식별 처리 장치; 를 포함한다.
이에 의해, 사용자 인식을 위한 별도의 시스템 구축이 필요하지 않기 때문에 추가 시스템 구축에 대한 비용이 증가하지 않으면서도, 다자간 입력이 이루어지는 상태에서도, 사용자 식별 및 실시간 연산처리를 낮은 시스템 자원(system resource)으로 처리가 가능하며, 다수의 사용자가 참여하여도 원활한 구동을 수행할 수 있는 효과를 제공한다. The present invention relates to a user identification system for recognizing the position of a multi-infrared input device. The present invention relates to a screen provided for displaying an infrared point (or pattern) that blinks in a direction viewed by a plurality of infrared input devices; An infrared camera for performing a predetermined number of frame shots per second on the screen; And an infrared camera for transmitting and receiving data and signals to and from the plurality of infrared ray input devices and the infrared camera, and for capturing the position of an infrared ray point by a user on a screen by each infrared ray input device, A user synchronization identification processing unit for identifying a user by recognizing a user identification code assigned to each frame within a preset number of frames per second, and analyzing coordinates of the identified user; .
Accordingly, since it is not necessary to construct a separate system for user recognition, it is possible to reduce user identification and real-time operation processing to low system resources even in the case of multi-input input, And it is possible to perform smooth driving even when a large number of users participate.

Description

다자간 적외선 입력장치 위치 인식을 위한 사용자 식별 시스템{User identification system for coordinate recognition of IR type input device}[Technical Field] The present invention relates to a user identification system for recognizing a position of a multi-

본 발명은 다자간 적외선 입력장치 위치 인식을 위한 사용자 식별 시스템에 관한 것으로, 보다 구체적으로는, 다자간 적외선 입력장치를 스크린으로 적외선 포인트 조사시, 사용자 식별 및 사용자와 좌표 간 매칭을 빠르게 수행하여 전체 연산에 소요되는 시간을 대폭 감소시켜 다자간 적외선 입력장치를 사용하더라도 원활한 구동이 가능하도록 하기 위한 다자간 적외선 입력장치 위치 인식을 위한 사용자 식별 시스템에 관한 것이다.
The present invention relates to a user identification system for recognizing the position of a multipurpose infrared input device, and more particularly, it relates to a user identification system for recognizing a position of a multipurpose infrared input device, And more particularly, to a user identification system for recognizing the position of a multi-infrared input device to enable smooth driving even when using a multi-directional infrared input device.

종래의 기술에 따른 적외선 포인트 위치 인식 시스템은 적외선 입력장치를 이용한 스크린 위의 좌표를 구하기 위해 연산 장치가 스크린상의 적외선 포인트 좌표를 인지하여 사용자에 의해 적외선 입력장치가 바라보는 위치나 격발 포인트를 연산할 수 있다.The infrared point position recognition system according to the related art recognizes the coordinates of the infrared point on the screen in order to obtain coordinates on the screen using the infrared ray input device and calculates the position and the firing point of the infrared ray input device by the user .

보다 구체적으로, 연산 장치는 적외선 포인트 기능을 포함한 적외선 입력장치의 동작에 따라, 적외선 입력장치가 실시간으로 바라보는 방향(ray)과 스크린상에서 교차하는 위치에 깜빡거리는 적외선 포인트(또는 패턴)를 적외선 카메라를 통해서 인지한 후, 적외선 포인트의 위치를 연산하는 방식에 의한다. More specifically, in accordance with the operation of the infrared ray input apparatus including the infrared ray point function, the computing apparatus calculates an infrared ray point (or pattern) blinking at a position where the infrared ray input apparatus observes in real- And then calculates the position of the infrared ray point.

여기서 적외선 카메라는 적외선 입력장치와 분리되어 외장 형태로 구성되는 방식과 적외선 입력장치에 포함된 내장 형태를 가지기도 하지만, 시스템의 전반적인 동작 방식은 대동소이하다.In this case, the infrared camera has a built-in external form separate from the infrared input device and a built-in form included in the infrared input device, but the overall operation of the system is very small.

한편, 적외선 포인트 위치 인식 시스템상에서 데이터 연산을 처리하는 경우, 도 1과 같이 적외선 포인트(패턴) 감지 과정(S1), 좌표 도출 및 사용자 분석 과정(S2), 사용자와 좌표 매칭 과정(S3)의 크게 3단계의 연산 처리 과정을 거치게 된다. 즉, 적외선 포인트 위치 인식 시스템은 각 적외선 입력장치가 바라보는 방향과 스크린의 교차점에서 발생하는 적외선 포인트를 감지 한 후, 분석하여 사용자의 적외선 입력장치가 바라보는 적외선 포인트의 좌표 및 사용자를 식별한다. 이후 최종적으로 적외선 포인트 위치 인식 시스템은 사용자와 좌표를 매칭하여 좌표의 사용자 식별 값을 토대로 다양한 연산 처리에 적용시킬 수 있다.In the case of processing data operation on the infrared point position recognition system, as shown in FIG. 1, the infrared point (pattern) sensing process S1, the coordinate derivation and user analysis process S2, and the user and coordinate matching process S3 It is subjected to a three-step calculation process. That is, the infrared point position recognition system detects and analyzes the infrared point generated at the intersection of the direction of the infrared ray input device and the screen, and identifies the coordinates and the user of the infrared ray point viewed by the user's infrared ray input device. Finally, the infrared point position recognition system can be applied to various calculation processes based on the user identification value of the coordinates by matching the coordinates with the user.

그러나 기존 시스템은 사용자 식별, 좌표 인식, 사용자와 좌표 매칭의 총 3단계 연산을 통해서 최종 데이터를 산출하여 다중 사용자 간의 실시간 연산 처리시 연산이 복잡하여, 사용자의 수가 많은 경우 처리할 수 없는 문제점이 있다.However, the existing system has a problem that it is impossible to process the final data by calculating the final data through three steps of user identification, coordinate recognition, user and coordinate matching, .

즉, 적외선 포인트 위치 인식 시스템은 여러 명이 참여할 경우, 감지된 적외선 포인트가 누구의 것인지 식별할 수 없다는 단점이 있으며, 이를 해결하기 위해서 주로 적외선 포인트를 특정 패턴이나 색상을 구별하여 출력하는 방식 등을 사용하고 있으나, 사용자 식별에 따른 연산 처리가 추가로 발생하는 한계점이 있다.In other words, the infrared point position recognition system has a disadvantage in that it can not identify who is the detected infrared point when a plurality of people participate, and in order to solve this problem, a method of mainly outputting a specific pattern or color is used However, there is a limit in addition that arithmetic processing according to user identification occurs.

이에 따라, 해당 기술분야에 있어서는 전체 연산에 소요되는 단계를 줄여서 사용자 식별에 소요되는 시간을 대폭 감소시켜 다자간 적외선 입력장치를 사용하더라도 시스템 연산이 가능하도록 하기 위한 기술 개발이 요구되고 있다.
Accordingly, in the related art, it is required to reduce the number of steps required for the entire operation so that the time required for user identification is greatly reduced, so that a technology for enabling system operation even when using a multi-infrared input device is required.

대한민국 특허공개공보 공개번호 제10-2014-0104539호 "적외선 센서가 장착된 3차원 동작인식 입력장치"Korean Patent Laid-Open Publication No. 10-2014-0104539 entitled "Three-dimensional motion recognition input device equipped with infrared sensor" 대한민국 특허등록공보 등록번호 제10-1375056호 "적외선 펜의 좌표를 인식하는 터치스크린시스템"Korea Patent Registration No. 10-1375056 "Touch Screen System Recognizing Infrared Pen Coordinates" 대한민국 특허공개공보 공개번호 제10-2013-0017773호 "적외선 영상출력장치 및 이를 포함하는 적외선 영상출력 및 인식시스템"Korean Patent Laid-Open Publication No. 10-2013-0017773 entitled " Infrared Image Output Device and Infrared Image Output &

본 발명은 상기의 문제점을 해결하기 위한 것으로, 다자간 입력이 이루어지는 상태에서도, 사용자 식별 및 실시간 연산처리를 낮은 시스템 자원(system resource)으로 처리가 가능하여, 다수의 사용자가 참여하여도 원활한 구동을 보장하도록 하기 위한 다자간 적외선 입력장치 위치 인식을 위한 사용자 식별 시스템을 제공하기 위한 것이다.SUMMARY OF THE INVENTION The present invention has been made to solve the above-mentioned problems, and it is an object of the present invention to provide an information processing apparatus and method capable of processing user identification and real-time operation processing with low system resources even in a multi- The present invention provides a user identification system for recognizing a position of a multi-infrared input device.

또한, 본 발명은 시스템 리소스를 확보하면서도 사용자 인식을 위한 별도의 시스템 구축이 필요하지 않기 때문에 추가 시스템 구축에 대한 비용이 증가하지 않도록 하기 위한 다자간 적외선 입력장치 위치 인식을 위한 사용자 식별 시스템을 제공하기 위한 것이다.Further, the present invention provides a user identification system for recognizing the position of a multi-infrared input device in order to prevent the increase in the cost of constructing an additional system since it is not necessary to construct a separate system for user recognition while ensuring system resources will be.

그러나 본 발명의 목적들은 상기에 언급된 목적으로 제한되지 않으며, 언급되지 않은 또 다른 목적들은 아래의 기재로부터 당업자에게 명확하게 이해될 수 있을 것이다.
However, the objects of the present invention are not limited to the above-mentioned objects, and other objects not mentioned can be clearly understood by those skilled in the art from the following description.

상기의 목적을 달성하기 위해 본 발명의 실시예에 따른 다자간 적외선 입력장치 위치 인식을 위한 사용자 식별 시스템은, 다수의 적외선 입력장치에 의해 바라보는 방향에 깜빡거리는 적외선 포인트(또는 패턴)를 표시하기 위해 구비되는 스크린; 상기 스크린에 대해서 초당 미리 설정된 수의 프레임 촬영을 수행하는 적외선 카메라; 및 상기 다수의 적외선 입력장치 및 상기 적외선 카메라와 데이터 및 신호 송수신을 수행하며, 각 적외선 입력장치에 의한 스크린상의 사용자별 적외선 포인트의 위치 인식을 위해 상기 적외선 카메라에서의 촬영 영상을 사용자 구분없이 모든 영상을 그대로 가져와서 초당 미리 설정된 수의 프레임 내에서 각 프레임별로 할당된 사용자 식별 코드를 인지하여 사용자를 식별하고, 식별된 사용자의 좌표를 분석하는 사용자 동기화 식별 처리 장치; 를 포함한다.According to an embodiment of the present invention, there is provided a user identification system for recognizing the position of a multi-infra-red IR input device, the apparatus comprising: a plurality of IR input devices for displaying an infrared point (or pattern) A screen provided; An infrared camera for performing a predetermined number of frame shots per second on the screen; And an infrared camera for transmitting and receiving data and signals to and from the plurality of infrared ray input devices and the infrared camera, and for capturing the position of an infrared ray point by a user on a screen by each infrared ray input device, A user synchronization identification processing unit for identifying a user by recognizing a user identification code assigned to each frame within a preset number of frames per second, and analyzing coordinates of the identified user; .

이때, 상기 사용자 동기화 식별 처리 장치는, 상기 다수의 적외선 입력장치 및 상기 적외선 카메라와 데이터 및 신호를 송수신하며, 상기 적외선 카메라로부터 촬영 영상을 수신하는 I/O 인터페이스; 매 프레임마다 부여된 사용자 식별 코드와 매칭되는 식별된 코드를 갖는 사용자의 적외선 입력장치에 의한 적외선 포인트가 포함된 촬영 영상을 수신하여 각 사용자 식별 코드 정보가 포함된 적외선 포인트를 생성하는 적외선 포인트 감지 모듈; 및 각 사용자 식별 코드 정보가 포함된 적외선 포인트를 통해 사용자 식별 코드와 매칭되는 적외선 입력장치에 대한 좌표를 연산하여, 사용자 식별 코드와 매칭되는 사용자에 의한 것임을 저장부에 저장하거나, 상기 I/O 인터페이스를 통해 외부의 단말 또는 서버로 전송하는 좌표 도출 및 사용자 분석 모듈; 을 포함하는 것이 바람직하다.At this time, the user synchronization identification processing apparatus includes an I / O interface for transmitting and receiving data and signals to and from the plurality of IR input devices and the infrared camera, and receiving an image shot from the infrared camera; An infrared point detection module for receiving the photographed image including the infrared point by the user's infrared input device having the identified code matched with the user identification code assigned every frame and generating an infrared point including each user identification code information ; And an infrared ray point including the user identification code information, and stores the information in the storage unit that the infrared ray input device is a user matching the user identification code, A coordinate derivation and user analysis module that transmits the coordinates to an external terminal or a server through the user analysis module; .

또한, 상기 적외선 포인트 감지 모듈은, 각 적외선 입력장치를 사용하는 사용자수를 입력받아 상기 적외선 카메라의 성능에 해당하는 fps(frame per second)에 따라 초당 미리 설정된 프레임에 포함된 각 프레임을 각 사용자에 따라 할당하기 위한 사용자 식별 코드를 생성한 뒤 상기 저장부에 저장하는 사용자 식별 코드 삽입 생성 수단; 을 포함하는 것을 특징으로 한다.In addition, the infrared point detection module receives the number of users using the infrared ray input devices, receives each frame included in a preset frame per second according to fps (frame per second) corresponding to the performance of the infrared camera, A user identification code insertion generating means for generating a user identification code to be allocated to the user and storing the user identification code in the storage; And a control unit.

또한, 상기 적외선 포인트 감지 모듈은, 상기 적외선 카메라의 초당 미리 설정된 프레임의 개수에 따라 할당된 사용자 식별 코드를 각 적외선 입력장치로 지정한 뒤, 각 프레임에 지정된 사용자 식별 코드만을 처리하기 위해 상기 적외선 카메라로부터 촬영 영상을 입력받아 각 프레임으로 구분한 뒤, 하나의 단위에 해당하는 초당 프레임 집합으로 구분하는 기능을 수행하는 프레임 동기화 수단; 을 더 구비하는 것을 특징으로 한다.
In addition, the infrared point detection module may designate an assigned user identification code according to the number of preset frames per second of the infrared camera to each infrared input device, and then, to process only the user identification code assigned to each frame, Frame synchronization means for dividing the image into frames and dividing the frames into frames per second corresponding to one unit; And a control unit.

본 발명의 실시예에 따른 다자간 적외선 입력장치 위치 인식을 위한 사용자 식별 시스템은, 사용자 인식을 위한 별도의 시스템 구축이 필요하지 않기 때문에 추가 시스템 구축에 대한 비용이 증가하지 않으면서도, 다자간 입력이 이루어지는 상태에서도, 사용자 식별 및 실시간 연산처리를 낮은 시스템 자원(system resource)으로 처리가 가능하며, 다수의 사용자가 참여하여도 원활한 구동을 수행할 수 있는 효과를 제공한다.
The user identification system for recognizing the position of the multi-infrared ray input device according to the embodiment of the present invention does not require the construction of a separate system for recognizing the user, so that the cost for constructing the additional system is not increased, Real-time operation processing can be processed with a low system resource, and even when a large number of users participate, it is possible to perform smooth driving.

도 1은 종래의 기술에 따른 적외선 포인트 위치 인식 시스템상에서 데이터 연산을 처리하는 방식을 나타내는 흐름도.
도 2는 본 발명의 실시예에 따른 다자간 적외선 입력장치 위치 인식을 위한 사용자 식별 시스템을 나타내는 도면.
도 3은 도 2의 다자간 적외선 입력장치 위치 인식을 위한 사용자 식별 시스템 중 사용자 동기화 식별 처리 장치의 구성을 나타내는 블록도.
도 4는 도 3의 사용자 동기화 식별 처리 장치 중 적외선 포인트 감지 모듈의 구성을 나타내는 블록도.BRIEF DESCRIPTION OF THE DRAWINGS Figure 1 is a flow diagram illustrating a method of processing data operations on an infrared point location recognition system in accordance with the prior art.
2 is a diagram illustrating a user identification system for location recognition of a multi-infrared input device according to an embodiment of the present invention.
3 is a block diagram showing a configuration of a user synchronization identification processing apparatus among the user identification systems for recognizing the position of the multi-infrared ray input device in FIG.
FIG. 4 is a block diagram showing a configuration of an infrared point detection module of the user synchronization identification processing apparatus of FIG. 3; FIG.

이하, 본 발명의 바람직한 실시예의 상세한 설명은 첨부된 도면들을 참조하여 설명할 것이다. 하기에서 본 발명을 설명함에 있어서, 관련된 공지 기능 또는 구성에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우에는 그 상세한 설명을 생략할 것이다.DETAILED DESCRIPTION OF THE PREFERRED EMBODIMENTS Hereinafter, a detailed description of preferred embodiments of the present invention will be given with reference to the accompanying drawings. In the following description of the present invention, detailed description of known functions and configurations incorporated herein will be omitted when it may make the subject matter of the present invention rather unclear.

본 명세서에 있어서는 어느 하나의 구성요소가 다른 구성요소로 데이터 또는 신호를 '전송'하는 경우에는 구성요소는 다른 구성요소로 직접 상기 데이터 또는 신호를 전송할 수 있고, 적어도 하나의 또 다른 구성요소를 통하여 데이터 또는 신호를 다른 구성요소로 전송할 수 있음을 의미한다.
In the present specification, when any one element 'transmits' data or signals to another element, the element can transmit the data or signal directly to the other element, and through at least one other element Data or signal can be transmitted to another component.

도 2는 본 발명의 실시예에 따른 다자간 적외선 입력장치 위치 인식을 위한 사용자 식별 시스템을 나타내는 도면이다. 2 is a diagram illustrating a user identification system for recognizing a position of a multi-infrared input device according to an exemplary embodiment of the present invention.

도 1을 참조하면, 다자간 적외선 입력장치 위치 인식을 위한 사용자 식별 시스템은 스크린(110), 적외선 카메라(120), 다수의 적외선 입력장치(130) 및 사용자 동기화 식별 처리 장치(140)를 포함함으로써, 각각이 적외선 입력장치(130)를 갖는 여러 명이 참여하더라도 시스템 리소스 감소 및 성능 저하 없이 사용자 식별이 신속하게 가능하도록 프레임 동기화(Frame Synchronization) 방식을 활용한다. 1, a user identification system for recognizing a position of a multi-infra-red input device includes a screen 110, an infrared camera 120, a plurality of infrared input devices 130, and a user synchronization identification processing device 140, A frame synchronization scheme is utilized so that user identification can be quickly performed without decreasing system resources and deteriorating performance even if several persons having infrared input devices 130 participate.

스크린(110)은 다수의 적외선 입력장치(130)에 의해 바라보는 방향에 깜빡거리는 적외선 포인트(또는 패턴)를 표시하기 위해 구비된다. The screen 110 is provided to display an infrared point (or pattern) that blinks in a direction seen by a plurality of infrared input devices 130.

적외선 카메라(120)는 스크린(110)에 대해서 초당 미리 설정된 수의 프레임 촬영을 수행한다. 적외선 카메라(120)는 기존의 적외선 포인트 위치 인식 시스템에서 사용되는 일반적인 비전용 카메라와 동일하게 사용할 수 있으며, 일반적으로 적외선 입력장치(130)의 위치 인식을 위한 120fps(frame per second) 급의 적외선 저렴한 카메라가 사용된다. The infrared camera 120 performs a predetermined number of frame shots per second with respect to the screen 110. The infrared camera 120 may be used in the same manner as a general non-dedicated camera used in a conventional infrared point position recognition system. In general, the infrared camera 120 may be a 120 fps (frame per second) A camera is used.

적외선 카메라(120)는 120fps(frame per second) 급인 경우, 초당 120프레임 촬영이 가능하며, 이하에서는 설명의 편의를 위해 120fps인 것을 기준으로 설명하도록 한다. When the infrared camera 120 is 120 fps (frame per second), it is possible to take 120 frames per second. Hereinafter, the infrared camera 120 will be described with reference to 120 fps for convenience of explanation.

사용자 동기화 식별 처리 장치(140)는 다수의 적외선 입력장치(130)에 의한 적외선 포인트의 위치 인식을 위해 적외선 카메라(120)에서의 촬영 영상을 사용자 구분없이 모든 영상을 그대로 가져와서 분석 후 사용자 및 좌표를 식별한다. In order to recognize the position of the infrared ray point by the plurality of infrared ray input devices 130, the user synchronization identification processing unit 140 fetches all the images of the infrared ray camera 120 without discriminating the user, Lt; / RTI >

보다 구체적으로, 사용자 동기화 식별 처리 장치(140)는 다수의 적외선 입력장치(130) 및 적외선 카메라(120)와 데이터 및 신호 송수신을 수행하며, 각 적외선 입력장치(130)에 의한 스크린(110) 상의 사용자별 적외선 포인트의 위치 인식을 위해 적외선 카메라(120)로부터 촬영 영상을 그대로 가져와서 초당 미리 설정된 수의 프레임 내에서 각 프레임별로 할당된 사용자 식별 코드를 인지하여 사용자를 식별하고, 촬영 영상의 적외선 포인트를 이용해 식별된 사용자의 좌표를 분석한다.
More specifically, the user synchronization identification processing unit 140 performs data and signal transmission / reception with a plurality of infrared input devices 130 and an infrared camera 120, In order to recognize the position of the infrared point for each user, the captured image is directly taken from the infrared camera 120, the user is identified by recognizing the user identification code assigned to each frame within a predetermined number of frames per second, To analyze the coordinates of the identified user.

도 3은 도 2의 다자간 적외선 입력장치 위치 인식을 위한 사용자 식별 시스템 중 사용자 동기화 식별 처리 장치(140)의 구성을 나타내는 블록도이다. 도 3을 참조하면, 사용자 동기화 식별 처리 장치(140)는 I/O 인터페이스(141), 제어부(142) 및 저장부(143)를 포함하며, 제어부(142)는 적외선 포인트 감지 모듈(142a) 및 좌표 도출 및 사용자 분석 모듈(142b)을 구비한다.FIG. 3 is a block diagram showing the configuration of a user synchronization identification processing unit 140 among the user identification systems for recognizing the position of the multi-infrared IR input device of FIG. 3, the user synchronization identification processing unit 140 includes an I / O interface 141, a control unit 142, and a storage unit 143. The control unit 142 includes an infrared point detection module 142a, And a coordinate derivation and user analysis module 142b.

즉, I/O 인터페이스(141)는 다수의 적외선 입력장치(130) 및 적외선 카메라(120)와 데이터 및 신호를 송수신한다. That is, the I / O interface 141 transmits and receives data and signals to and from a plurality of infrared ray input devices 130 and an infrared camera 120.

I/O 인터페이스(141)는 적외선 카메라(120)로부터 촬영 영상을 수신한 뒤, 제어부(142)로 제공함에 따라, 제어부(142)의 적외선 포인트 감지 모듈(142a)은 촬영 영상에서 각 사용자 식별 코드 정보를 포함하는 적외선 포인트를 감지한다. The infrared point detection module 142a of the control unit 142 receives the user identification code from the photographed image and outputs it to the control unit 142. The infrared point detection module 142a of the control unit 142 receives the user identification code And detects an infrared point including information.

즉, 적외선 포인트 감지 모듈(142a)은 촬영 영상의 프레임마다 부여된 사용자 식별 코드와 매칭되는 적외선 입력장치(130)에 대한 온/오프(ON/OFF)를 제어할 수 있다. 적외선 포인트 감지 모듈(142a)은 적외선 입력장치(130)에 대한 온/오프(ON/OFF)의 제어를 통해 모든 프레임에서 참여하고 있는 모든 적외선 입력장치(130)에 의한 적외선 포인트 데이터를 일괄적으로 받아들이는 것이 아니라, 매 프레임마다 부여된 사용자 식별 코드와 매칭되는 식별된 코드를 갖는 사용자의 적외선 입력장치(130)에 대한 촬영 영상을 적외선 카메라(120)로부터 수신한다. That is, the infrared point detection module 142a can control ON / OFF of the infrared input device 130 matching the user identification code assigned to each frame of the photographed image. The infrared point detection module 142a controls the ON / OFF of the infrared input device 130 so that the infrared point data of all the infrared input devices 130 participating in all the frames are collectively From the infrared camera 120, a photographed image of a user's infrared input device 130 having an identified code matched with a user identification code assigned to each frame.

즉, 적외선 포인트 감지 모듈(142a)은 매 프레임마다 부여된 사용자 식별 코드와 매칭되는 식별된 코드를 갖는 사용자의 적외선 입력장치(130)에 의한 적외선 포인트가 포함된 촬영 영상을 수신하여 각 사용자 식별 코드 정보가 포함된 적외선 포인트를 생성한다. That is, the infrared point detection module 142a receives the photographed image including the infrared point by the user's infrared input device 130 having the identified code matched with the user identification code assigned to each frame, Create an infrared point with information.

이후, 좌표 도출 및 사용자 분석 모듈(142b)은 각 사용자 식별 코드 정보가 포함된 적외선 포인트를 통해 사용자 식별 코드와 매칭되는 적외선 입력장치(130)에 대한 좌표를 연산하여, 사용자 식별 코드와 매칭되는 사용자에 의한 것임을 저장부(143)에 저장하거나, I/O 인터페이스(141)를 통해 외부의 단말 또는 서버로 전송할 수 있다.
The coordinate derivation and user analysis module 142b calculates the coordinates of the infrared input device 130 matching the user identification code through the infrared point including the user identification code information, O interface 141 to the external terminal or the server via the I /

상술한 사용자 동기화 식별 처리 장치(140)는 종래의 적외선 포인트(패턴) 감지 과정(S1), 좌표 도출 및 사용자 분석 과정(S2), 사용자와 좌표 매칭 과정(S3)의 크게 3단계의 연산 처리 과정의 3단계의 과정을, 사용자 식별 코드와 매칭되는 적외선 포인트 감지 과정과, 사용자 분석 및 좌표 도출 과정의 2단계의 과정으로 처리 단계를 1단계 줄일 수 있는 효과를 제공한다.
The user synchronization identification processing apparatus 140 described above can be roughly divided into three steps of a conventional three-step process of detecting an infrared point (pattern) S1, a coordinate derivation and user analysis process S2, and a user and a coordinate matching process S3 , An infrared point detection process that matches the user identification code, and a user analysis and coordinate derivation process.

도 4는 도 3의 사용자 동기화 식별 처리 장치(140) 중 적외선 포인트 감지 모듈(142a)의 구성을 나타내는 블록도이다. FIG. 4 is a block diagram illustrating the configuration of the infrared point detection module 142a of the user synchronization identification processing apparatus 140 of FIG.

도 4를 참조하면, 도 3의 적외선 포인트 감지 모듈(142a)은 도 4와 같이 사용자 식별 코드 삽입 생성 수단(142a-1), 프레임 동기화 수단(142a-2), 사용자 식별 코드 추출 수단(142a-3) 및 적외선 입력장치 온/오프 제어 수단(142a-3)으로 구분될 수 있다.Referring to FIG. 4, the infrared point detection module 142a of FIG. 3 includes a user identification code insertion generation unit 142a-1, a frame synchronization unit 142a-2, a user identification code extraction unit 142a- 3) and an infrared input device on / off control means 142a-3.

즉, 사용자 식별 코드 삽입 생성 수단(142a-1)은 각 적외선 입력장치를 사용하는 사용자수를 입력받아 적외선 카메라(120)의 성능에 해당하는 fps(frame per second)에 따라 초당 미리 설정된 프레임에 포함된 각 프레임을 각 사용자에 따라 할당하기 위한 사용자 식별 코드를 생성한 뒤 저장부(143)에 저장한다. That is, the user identification code insertion / generation means 142a-1 receives the number of users using each infrared input device and stores the number of users using the infrared identification device in a preset frame per second according to fps (frame per second) corresponding to the performance of the infrared camera 120 And stores the generated user identification code in the storage unit 143. The user identification code is stored in the storage unit 143,

프레임 동기화 수단(142a-2)은 적외선 카메라(120)의 초당 미리 설정된 프레임의 개수에 따라 할당된 사용자 식별 코드를 각 적외선 입력장치(130)를 지정한 뒤, 각 프레임에 지정된 사용자 식별 코드만을 처리하기 위해 적외선 카메라(120)로부터 촬영 영상을 입력받아 각 프레임으로 구분한 뒤, 하나의 단위에 해당하는 초당 프레임 집합으로 구분하는 기능을 수행한다.The frame synchronizing means 142a-2 designates the user identification code assigned according to the number of preset frames per second of the infrared camera 120 to each infrared input device 130 and then processes only the user identification code assigned to each frame An infrared camera 120 receives the photographed image, divides the photographed image into frames, and divides the photographed image into frames per second corresponding to one unit.

사용자 식별 코드 추출 수단(142a-3)은 프레임 동기화 수단(142a-2)에 의해 구분된 각 초당 프레임 집합에서 각 프레임별 지정된 사용자 식별 코드를 삽입한 뒤, 각 프레임을 I/O 인터페이스(141)를 통해 외부의 단말 또는 서버로 전송할 수 있다.The user identification code extracting means 142a-3 inserts a user identification code designated for each frame in the frame aggregation per second divided by the frame synchronization means 142a-2, To an external terminal or a server via the Internet.

적외선 입력장치 온/오프 제어 수단(142a-3)은 사용자 식별 코드 삽입 생성 수단(142a-1)에 의해 생성된 사용자 식별 코드와 매칭되는 적외선 입력장치(130)에 대한 동작을 제어함으로써, 제어에 따라 모든 프레임에서 참여하고 있는 모든 적외선 입력장치(130)에 의한 적외선 포인트 데이터를 일괄적으로 받아들이는 것이 아니라, 매 프레임마다 부여된 사용자 식별 코드와 매칭되는 식별된 코드를 갖는 사용자의 적외선 입력장치(130)만이 실질적으로 동작할 수 있도록 한다. The infrared input device on / off control means 142a-3 controls the operation on the infrared input device 130, which matches the user identification code generated by the user identification code insertion generating means 142a-1, Accordingly, instead of collectively receiving the infrared point data by all the infrared input devices 130 participating in all the frames, the infrared input device 130 of the user having the identified code matched with the user identification code assigned every frame 130 can actually operate.

이에 따라, 사용자 식별 코드가 없는 상황에서는 적외선 입력장치(130)가 동작할 경우 어떤 상황에서라도 적외선 포인트 감지 모듈(142a)은 촬영 영상 데이터를 입력받지만, 사용자 식별 코드에 의해서 사용자 식별이 되지 않은 상황에서는 적외선 입력장치(130)를 통한 데이터 수신이 차단되어, 해당 프레임에서는 특정 사용자의 입력장치(130)의 촬영 영상 데이터만 수신하여 처리할 수 있다.
Accordingly, in a situation where the user identification code is absent, the infrared point detection module 142a receives the photographed image data under any circumstances when the infrared input device 130 operates, but in a situation where the user is not identified by the user identification code The data reception through the infrared input device 130 is interrupted and only the photographed image data of the specific user's input device 130 can be received and processed in the frame.

이상과 같이, 본 명세서와 도면에는 본 발명의 바람직한 실시예에 대하여 개시하였으며, 비록 특정 용어들이 사용되었으나, 이는 단지 본 발명의 기술 내용을 쉽게 설명하고 발명의 이해를 돕기 위한 일반적인 의미에서 사용된 것이지, 본 발명의 범위를 한정하고자 하는 것은 아니다. 여기에 개시된 실시예 외에도 본 발명의 기술적 사상에 바탕을 둔 다른 변형 예들이 실시 가능하다는 것은 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에게 자명한 것이다.
As described above, preferred embodiments of the present invention have been disclosed in the present specification and drawings, and although specific terms have been used, they have been used only in a general sense to easily describe the technical contents of the present invention and to facilitate understanding of the invention , And are not intended to limit the scope of the present invention. It is to be understood by those skilled in the art that other modifications based on the technical idea of the present invention are possible in addition to the embodiments disclosed herein.

110 : 스크린 120 : 적외선 카메라
130 : 적외선 입력장치
140 : 사용자 동기화 식별 처리 장치 141 : I/O 인터페이스
142 : 제어부 142a : 적외선 포인트 감지 모듈
142a-1 : 사용자 식별 코드 삽입 생성 수단
142a-2 : 프레임 동기화 수단
142a-3 : 사용자 식별 코드 추출 수단
142a-4 : 적외선 입력장치 온/오프 제어 수단
142b : 좌표 도출 및 사용자 분석 모듈 143 : 저장부110: Screen 120: Infrared camera
130: Infrared input device
140: user synchronization identification processing device 141: I / O interface
142: Control section 142a: Infrared point detection module
142a-1: a user identification code insertion generation means
142a-2: Frame synchronization means
142a-3: user identification code extracting means
142a-4: Infrared input device on / off control means
142b: Coordinate derivation and user analysis module 143:

Claims (4)

다수의 적외선 입력장치에 의해 바라보는 방향에 깜빡거리는 적외선 포인트(또는 패턴)를 표시하기 위해 구비되는 스크린;
상기 스크린에 대해서 초당 미리 설정된 수의 프레임 촬영을 수행하는 적외선 카메라; 및
상기 다수의 적외선 입력장치 및 상기 적외선 카메라와 데이터 및 신호 송수신을 수행하며, 각 적외선 입력장치에 의한 스크린상의 사용자별 적외선 포인트의 위치 인식을 위해 상기 적외선 카메라에서의 촬영 영상을 사용자 구분없이 모든 영상을 그대로 가져와서 초당 미리 설정된 수의 프레임 내에서 각 프레임별로 할당된 사용자 식별 코드를 인지하여 사용자를 식별하고, 식별된 사용자의 좌표를 분석하는 사용자 동기화 식별 처리 장치; 를 포함하는 것을 특징으로 하는 다자간 적외선 입력장치 위치 인식을 위한 사용자 식별 시스템.
A screen provided for displaying an infrared point (or pattern) that flickers in a direction viewed by a plurality of infrared input devices;
An infrared camera for performing a predetermined number of frame shots per second on the screen; And
The infrared ray input device transmits and receives data and signals to and from the plurality of infrared ray input devices and the infrared camera. In order to recognize the position of an infrared ray point by a user on the screen by each infrared ray input device, A user synchronization identification processing unit for identifying the user by recognizing a user identification code assigned to each frame within a preset number of frames per second and analyzing the coordinates of the identified user; And a user identification system for recognizing the position of the multi-infrared input device.
청구항 1에 있어서, 상기 사용자 동기화 식별 처리 장치는,
상기 다수의 적외선 입력장치 및 상기 적외선 카메라와 데이터 및 신호를 송수신하며, 상기 적외선 카메라로부터 촬영 영상을 수신하는 I/O 인터페이스;
매 프레임마다 부여된 사용자 식별 코드와 매칭되는 식별된 코드를 갖는 사용자의 적외선 입력장치에 의한 적외선 포인트가 포함된 촬영 영상을 수신하여 각 사용자 식별 코드 정보가 포함된 적외선 포인트를 생성하는 적외선 포인트 감지 모듈; 및
각 사용자 식별 코드 정보가 포함된 적외선 포인트를 통해 사용자 식별 코드와 매칭되는 적외선 입력장치에 대한 좌표를 연산하여, 사용자 식별 코드와 매칭되는 사용자에 의한 것임을 저장부에 저장하거나, 상기 I/O 인터페이스를 통해 외부의 단말 또는 서버로 전송하는 좌표 도출 및 사용자 분석 모듈; 을 포함하는 것을 특징으로 하는 다자간 적외선 입력장치 위치 인식을 위한 사용자 식별 시스템.
The apparatus according to claim 1,
An I / O interface for transmitting and receiving data and signals to and from the plurality of infrared ray input devices and the infrared ray camera, and receiving an image shot from the infrared ray camera;
An infrared point detection module for receiving the photographed image including the infrared point by the user's infrared input device having the identified code matched with the user identification code assigned every frame and generating an infrared point including each user identification code information ; And
The infrared-ray input device includes a plurality of infrared-ray input / output units, and the infrared-ray input / output unit is connected to the infrared-ray input device. A coordinate derivation and user analysis module for transmitting to a terminal or server through an external device; And a user identification system for recognizing the position of the multi-infrared input device.
청구항 2에 있어서, 상기 적외선 포인트 감지 모듈은,
각 적외선 입력장치를 사용하는 사용자수를 입력받아 상기 적외선 카메라의 성능에 해당하는 fps(frame per second)에 따라 초당 미리 설정된 프레임에 포함된 각 프레임을 각 사용자에 따라 할당하기 위한 사용자 식별 코드를 생성한 뒤 상기 저장부에 저장하는 사용자 식별 코드 삽입 생성 수단; 을 포함하는 것을 특징으로 하는 다자간 적외선 입력장치 위치 인식을 위한 사용자 식별 시스템.
The system of claim 2, wherein the infrared point detection module comprises:
Generates a user identification code for assigning each frame included in a preset frame per second according to fps (frame per second) corresponding to the performance of the infrared camera, receiving the number of users using each infrared input device A user identification code insertion generating means for storing the user identification code in the storage unit; And a user identification system for recognizing the position of the multi-infrared input device.
청구항 3에 있어서, 상기 적외선 포인트 감지 모듈은,
상기 적외선 카메라의 초당 미리 설정된 프레임의 개수에 따라 할당된 사용자 식별 코드를 각 적외선 입력장치로 지정한 뒤, 각 프레임에 지정된 사용자 식별 코드만을 처리하기 위해 상기 적외선 카메라로부터 촬영 영상을 입력받아 각 프레임으로 구분한 뒤, 하나의 단위에 해당하는 초당 프레임 집합으로 구분하는 기능을 수행하는 프레임 동기화 수단; 을 더 구비하는 것을 특징으로 하는 다자간 적외선 입력장치 위치 인식을 위한 사용자 식별 시스템.[Claim 4] The system of claim 3,
A user identification code assigned to each infrared ray input device in accordance with the number of preset frames per second of the infrared camera is input to each infrared ray input device, and the infrared ray camera receives an image shot from the infrared ray camera to process only the user identification code assigned to each frame, Frame synchronizing means for performing a function of dividing a frame into a set of frames per second corresponding to one unit; And a user identification system for recognizing the position of the multi-infrared ray input device.
KR1020150188748A 2015-12-29 2015-12-29 User identification system for coordinate recognition of IR type input device KR101981523B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020150188748A KR101981523B1 (en) 2015-12-29 2015-12-29 User identification system for coordinate recognition of IR type input device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020150188748A KR101981523B1 (en) 2015-12-29 2015-12-29 User identification system for coordinate recognition of IR type input device

Publications (2)

Publication Number Publication Date
KR20170078340A true KR20170078340A (en) 2017-07-07
KR101981523B1 KR101981523B1 (en) 2019-05-23

Family

ID=59353260

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020150188748A KR101981523B1 (en) 2015-12-29 2015-12-29 User identification system for coordinate recognition of IR type input device

Country Status (1)

Country Link
KR (1) KR101981523B1 (en)

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20100080060A (en) * 2008-12-31 2010-07-08 광주과학기술원 Multi-pointing system and for multi-party interactive collaboration and method thereof
KR20130017773A (en) 2011-08-12 2013-02-20 강민수 Ir display device, ir display and recognition system including the same
KR101375056B1 (en) 2012-02-14 2014-03-17 (주)아이타키온 Touch screen system for recognizing coordinates of infrared pen
KR20140104539A (en) 2013-02-18 2014-08-29 주식회사 시스플라워 The infrared sensor is equipped with a 3-dimensional motion recognition input devices

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20100080060A (en) * 2008-12-31 2010-07-08 광주과학기술원 Multi-pointing system and for multi-party interactive collaboration and method thereof
KR20130017773A (en) 2011-08-12 2013-02-20 강민수 Ir display device, ir display and recognition system including the same
KR101375056B1 (en) 2012-02-14 2014-03-17 (주)아이타키온 Touch screen system for recognizing coordinates of infrared pen
KR20140104539A (en) 2013-02-18 2014-08-29 주식회사 시스플라워 The infrared sensor is equipped with a 3-dimensional motion recognition input devices

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
J. Oh, W. Stuerzlinger, "Laser pointers as collaborative pointing devices", Graphics Interface 2002, pp. 141-149, 2002.* *
Vogt, F., Wong, J., Fels, S. and Cavens, D. Tracking multiple laser pointers for large screen interaction. Extended Abstracts of the ACM Symposium on User Interface Software and Technology (UIST2003), *

Also Published As

Publication number Publication date
KR101981523B1 (en) 2019-05-23

Similar Documents

Publication Publication Date Title
CN109461003B (en) Multi-view-angle-based multi-face scene face brushing payment risk prevention and control method and device
US11222239B2 (en) Information processing apparatus, information processing method, and non-transitory computer-readable storage medium
US9779308B2 (en) Video monitoring system
KR101603017B1 (en) Gesture recognition device and gesture recognition device control method
CN106170978B (en) Depth map generation device, method and non-transitory computer-readable medium
IL256885A (en) Apparatus and methods for facial recognition and video analytics to identify individuals in contextual video streams
EP3133592B1 (en) Display apparatus and controlling method thereof for the selection of clothes
EP2645205A2 (en) Client Device
JP6731097B2 (en) Human behavior analysis method, human behavior analysis device, device and computer-readable storage medium
EP3109794A1 (en) System, apparatus, method, and computer readable storage medium for extracting information
KR20120072009A (en) Interaction recognition apparatus for multiple user and method thereof
TWI489326B (en) Operating area determination method and system
CN111063079A (en) Binocular living body face detection method and device based on access control system
US9280209B2 (en) Method for generating 3D coordinates and mobile terminal for generating 3D coordinates
US20190191104A1 (en) Image processing system, image processing method, and program
US20170140215A1 (en) Gesture recognition method and virtual reality display output device
JP2018156408A (en) Image recognizing and capturing apparatus
JP2015118442A (en) Information processor, information processing method, and program
KR20120028248A (en) Device and method for controlling gesture
CN105892637A (en) Gesture identification method and virtual reality display output device
EP3206188A1 (en) Method and system for realizing motion-sensing control based on intelligent device, and intelligent device
CN106951077B (en) Prompting method and first electronic device
KR101414362B1 (en) Method and apparatus for space bezel interface using image recognition
KR20150086840A (en) Apparatus and control method for mobile device using multiple cameras
KR101981523B1 (en) User identification system for coordinate recognition of IR type input device

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E601 Decision to refuse application
J201 Request for trial against refusal decision
J301 Trial decision

Free format text: TRIAL NUMBER: 2017101004284; TRIAL DECISION FOR APPEAL AGAINST DECISION TO DECLINE REFUSAL REQUESTED 20170906

Effective date: 20190416

S901 Examination by remand of revocation
GRNO Decision to grant (after opposition)