KR20200000776A

KR20200000776A - Gesture user authentication method and computer program using Touch and Sliding

Info

Publication number: KR20200000776A
Application number: KR1020180073047A
Authority: KR
Inventors: 이명호
Original assignee: 주식회사 티슈
Priority date: 2018-06-25
Filing date: 2018-06-25
Publication date: 2020-01-03

Abstract

Disclosed is a user authentication method in which a password is set and input using touch and sliding gestures. According to the present invention, the user authentication method relates to a security technology of a device that uses the rhythmical sense and intuitive elements of a combination of touch and sliding to make it easy and fun for users to use and uses user gestures that exclude visual information as authentication information to completely block hacking and keylogging due to exposure by using user gestures that exclude visual information as authentication information. The user authentication method may comprise the steps of: setting a password input screen; setting a password input area; setting a touch password; and generating user authentication information using these pieces of information.

Description

Gesture user authentication method and computer program using Touch and Sliding}

본 발명은 사용자 인증 방법에 대한 것으로, 더 구체적으로는 터치와 슬라이딩 제스처를 이용하여 패스워드를 설정하고 입력하여 사용자 인증 처리를 수행하기 위한 방법 및 컴퓨터 프로그램에 대한 것이다.The present invention relates to a user authentication method, and more particularly, to a method and a computer program for performing a user authentication process by setting and inputting a password using a touch and a sliding gesture.

숫자나 문자를 패스워드로 사용하는 방법은 사용자가 패스워드를 기억하기 어려울 뿐만 아니라 특히 주위노출과 같은 해킹에 취약하고, 숫자나 문자의 사용 자체가 어렵다고 인식되기 때문에 이후 등장한 패턴 패스워드가 모바일에서 폭넓게 사용되기 시작하였다. 하지만, 액정에 생긴 패턴 자국에 의한 추측 해킹, 주위 노출에 의한 보안 취약성 때문에 금융·핀테크 등에 널리 사용되지 못하고 있다.The use of numbers and letters as passwords is not only difficult for users to remember passwords, but also vulnerable to hacking such as ambient exposure, and the use of numbers or letters is difficult. Started. However, due to speculative hacking caused by pattern marks on liquid crystals and security vulnerabilities due to ambient exposure, they are not widely used in financial and fintech.

새로운 보안 기술로 사진이나 그림을 이용한 그래픽 사용자 인증(GUA: Graphical User Authentication) 시스템이 연구되고 있지만 아직까지 보안성이 높고 사용하기도 편리한 기술이 개발되지 못해 활성화되고 있지 못한 상황이다.Graphical User Authentication (GUA) systems using photographs and pictures have been studied as new security technologies, but they have not been activated due to the development of technology that is highly secure and easy to use.

사진 이미지(Photographic Image)를 활용한 그래픽 패스워드의 구현이 어려운 근원적인 이유는, 사진 이미지의 구성 자체가 명확한 선으로 이루어지지 않고 정확한 경계 라인이 없는 부드러운 연결면으로 이어지면서 구현되어 있어 어느 특정한 한 점(point 또는 pixel)을 정확히 지정할 수가 없기 때문이다.The main reason why the graphic password is difficult to implement using a photo image is that the composition of the photo image itself is implemented by connecting to a smooth connection surface without a clear boundary line, rather than a clear line. This is because you cannot specify exactly (point or pixel).

도 1에서 볼 수 있듯이, 보통 일반적인 사진 이미지 하나를 표현하기 위해 300만 개 이상의 픽셀이 사용된다. 이처럼 사진에서는 300만 개 중의 어느 특정 포인트를 선정한 후, 그 포인트를 정확히 다시 재선정할 수가 없기 때문에 구현의 어려움이 있는 것이다.As can be seen in Figure 1, more than 3 million pixels are usually used to represent a single general photographic image. In this picture, it is difficult to implement because after selecting a specific point out of 3 million, the point cannot be reselected correctly.

이에 대한 대안으로 사진에 일정하게 구역을 나누고, 이 구역을 선택하여 패스워드를 설정하는 그리드 시스템(Grid System)을 이용한 방법이 제시되었다(도 2, a). 하지만 이 방법은 사진에서 선택하고자 하는 지점이 분할선 상에 위치(22)하거나, 한 곳의 분할 영역 내에 여러 개의 선택 지점이 위치하는(21) 등 사용상의 불편과 한계를 드러내고 있다.As an alternative to this, a method using a grid system for dividing a section constantly in a picture, selecting a section and setting a password has been proposed (FIG. 2, a). However, this method reveals inconveniences and limitations in use such as the point to be selected in the photograph is located 22 on the dividing line or the number of selection points 21 is placed in one divided area.

이를 극복하기 위해 개발된 터치 지점을 패스워드로 설정하는 방법은 사용자가 사진에서 관심 포인트(POI, Point Of Interest; 이미지 중 사용자가 관심을 갖는 부분 지점)로 설정할 수 있는 영역이 생각보다 적은 것이 최대의 약점이며, 또한 사진에 따라 터치 영역이 겹쳐져 관심 포인트를 제대로 설정하지 못하는 문제가 온전히 해결되지 못하고 있다(23).In order to overcome this problem, the method of setting a touch point as a password has a maximum number of areas that a user can set as a point of interest (POI) in the picture. It is a weak point, and the problem of not properly setting the point of interest due to overlapping touch areas according to the picture is not completely solved (23).

특히 사진에 드러나는 관심 포인트를 누구나 거의 동일하게 예측할 수 있기 때문에 추측 공격(Guessing Attack)에 취약하고 보안성이 낮다는 문제가 있다. 사진 패스워드를 연구·개발할 당시에는 선택 포인트가 픽셀 수 만큼 많기 때문에 10개의 숫자밖에 사용하지 못하는 숫자 패스워드(비밀번호)에 비해 보안성이 크게 향상될 것으로 예측했으나, 실제 사용시 사진에서 선택할 수 있는 위치(관심포인트)가 매우 제한적이었다는 것이 연구결과 밝혀졌고, 이는 쉬운 추측공격으로 이어질 수가 있는 것이다.In particular, since the point of interest that appears in the picture can be predicted almost identically, there is a problem that it is vulnerable to a guessing attack and has low security. When researching and developing a photo password, it was predicted that security would be greatly improved compared to a numeric password (password) that only uses 10 digits because the number of selection points was as large as the number of pixels. The study found that the point was very limited, which could lead to easy guessing attacks.

실제로 윈도10에 탑재된 (윈도8 이전에는 문자 패스워드로 인증) 사진을 이용한 사용자 인증 역시 패스워드 화면으로 선정한 사진상의 선택포인트를 제3자가 쉽게 예측했으며, 사진상의 선택 위치(관심포인트)가 생각만큼 다양하지 못하고 적어 추측공격에 취약하며, 특히 입력시 패스워드가 주위에 그대로 노출되는 약점을 극복하지 못하고 있다.In fact, user authentication using pictures installed in Windows 10 (authentication using a text password before Windows 8) also easily predicted the selection point on the picture selected as the password screen, and the selection point (point of interest) on the picture is as diverse as expected. It is vulnerable to guessing attacks because it is small, and in particular, it does not overcome the weakness of revealing the password as it is.

이에 따라 일반적으로 그래픽을 이용한 인증방법은 페이스북의 경우처럼 여러 개의 사진이나 캐릭터, 아이콘 등을 나열하고 그 중 하나 또는 여러 개를 선택하는 방법(도 3, a)으로 밖에는 사용하지 못하였다. 그러나 이러한 방법 역시 주위 노출과 추측 공격에 취약하다는 문제가 있다.Accordingly, in general, the authentication method using a graphic was used only as a method of arranging a plurality of pictures, characters, icons, etc. and selecting one or several of them (Fig. 3, a) as in the case of Facebook. However, this method also has a problem of being vulnerable to environmental exposure and speculative attacks.

최근에는 이 그리드 방식을 발전시킨, 노출과 키로깅(key logging)에 강하다는 드래그 앤 드롭(Drag & Drop)방식이 휴대폰 잠금해제나 핀테크의 사용자 인증에 채택되고 있다(도 3, b).Recently, the Drag & Drop method, which is strong in exposure and key logging, which has developed this grid method, has been adopted for unlocking a mobile phone or authenticating a user of FinTech (FIG. 3, b).

‘드래그 앤 드롭' 방식을 채용해 최근 출시한 블랙베리의 락 해제는 그리드에 나열된 특정 이미지를 선택한 후 이를 드래그하여 특정위치에 일치시키는 방식(31)으로, 사용이 번거롭고 어려우며 특히 차량 등 움직이는 곳이나 작은 화면에서는 사용이 힘들고, 즉각적으로 사용하기에도 불편하기 때문에 이 역시 사용자의 외면을 받고 있는 실정이다.The recent release of the 'Unlocked BlackBerry' using the 'drag and drop' method is to select a specific image listed in the grid and drag it to match a specific position (31), which is cumbersome and difficult to use. It is also difficult to use on a small screen and inconvenient to use immediately, which is also receiving the user's appearance.

현재까지의 이 모든 패스워드들은 숫자·문자를 터치하거나, 패턴을 슬라이딩하거나, 그래픽을 기반으로 터치 위치를 사용해 기설정된 설정값과의 진위를 비교·확인하는 방식으로, 이 모두가 시각에 의한 주위 노출에 취약하다는 공통점이 있다.All of these passwords, to date, are touched by numbers, letters, sliding patterns, or graphic-based touch locations to compare and verify the authenticity of a preset setting, all of which are visually exposed to the surroundings. Common to being vulnerable

한편, 개인의 건강정보, 활동정보 등을 실시간 측정·저장·활용하는 스마트워치, 스마트밴드 등의 웨어러블 기기 및 스마트 홈, 커넥티드 카(Connected car) 기술을 현실화시킨 IoT(Internet of Things)의 등장으로 이를 제어, 조정, 통제하는 디바이스 역할을 하는 휴대용 단말기의 락 해제 및 사용자 인증의 중요성이 커지고 있다.On the other hand, the emergence of wearable devices such as smart watches and smart bands that measure, store and utilize personal health information and activity information in real time, and the Internet of Things (IoT) that make smart home and connected car technologies a reality Therefore, the importance of unlocking and user authentication of a portable terminal, which serves as a device for controlling, adjusting, and controlling the information, is increasing.

또한, 일정한 공간에서만 사용했던 이전의 데스크톱 PC용 패스워드와 달리 휴대용 단말기에서 이루어지는 사용자 인증은, 언제 어디서나 아무 제약 없이 자주 사용하는 특성 때문에 즉각적인 사용과 간편한 사용자 인증, 이에 따른 주위노출 방지 등 안전성 확보와 보안 강화가 더욱 중요해질 수밖에 없다.In addition, unlike previous passwords for desktop PCs that were used only in a certain space, user authentication in portable devices is often used anywhere, anytime, without any restrictions. Reinforcement will become more important.

이에 따라 주위 노출에 대한 해킹 예방책으로 비밀번호 개수 늘리기, 숫자 문자 혼용 사용, 전송된 인증번호 입력 방식, 가상키보드 숫자배열 뒤섞기 등 노출과 해킹을 막기 위한 방법들이 속속 추가되고 있다. 하지만 “편리성이 높아지면 보안성이 떨어지고, 편리성이 떨어지면 보안성이 높아지는 것”은 보안체계에서는 당연한 논리로, 이는 제공자나 암호전문가들이 아무런 고민이나 연구 노력 없이 사용자에게 불편함을 떠넘기는 꼴이며, 선택권이 없는 사용자들은 할 수 없이 사용하는 수밖에 없는 것이다.Accordingly, methods to prevent exposure and hacking are being added one by one, such as increasing the number of passwords, using a mixed number of characters, inputting a transmitted authentication number, and shuffling of virtual keyboard numbers. However, "better convenience and less security, less convenience and more security" is the logical logic of the security system, which allows providers or cryptographers to pass on inconveniences to users without any worries or research efforts. , Users without choices have no choice but to use it.

때문에 패스워드 입력시의 편리성과 주위노출이 안되는 장점을 가진 생체인증이 모바일에서 각광을 받고 있지만, 유출될 경우 하나밖에 없어 교체할 수가 없는 개인의 고유한 신체정보이기 때문에 해킹시 1차적인 피해 이외에도 이를 이용한 위조, 신분세탁 등 2차범죄에 악용될 수 있어 더 큰 사회적 혼란과 피해가 오는 문제를 지니고 있으며, 실제로 미국의 공공기관에서 수백만 건의 지문정보가 해킹에 의해 유출되어 심각한 사회문제가 될 수 있음이 현실로 드러났다.Therefore, biometric authentication, which has the advantages of convenience in password input and ambient exposure, has been spotlighted on mobile, but it is only one of the personal damages that cannot be replaced because it is the only one leaked. It can be misused for secondary crimes such as counterfeiting and identity laundering, resulting in greater social confusion and damage.In fact, millions of fingerprints can be leaked by hacking from public institutions in the United States, which can be a serious social problem. This turned out to be reality.

이렇듯 현재 사용되고 있는 모든 패스워드들을 종합해보면, 눈으로 지각할 수 있는 숫자·문자·패턴·그래픽이미지를 매개로 사용한다는 점이며, 노출에 강하다는 지문·홍채 등 생체인증 역시 인간의 눈으로만 파악이 안될 뿐 이 역시 지문 문양, 홍채무늬 패턴 등 이미지 정보를 이용한다는 점은 동일하다. 때문에 이 역시 채집, 복제, 수정, 해킹에 의한 재사용 등이 얼마든지 가능하다는 추론이 성립되며, 이미 실리콘 위조 지문, 프린트한 일회용 콘텍트 렌즈에 의한 해킹이 성공한 바 있다.In summary, all current passwords are used by using numbers, letters, patterns, and graphic images that can be perceived by the eye. Not only that, it also uses image information such as fingerprint patterns and iris pattern. Therefore, it is inferred that this can be collected, duplicated, modified, and reused by hacking, and hacking by silicone fake fingerprints and printed disposable contact lenses has already been successful.

즉, 첨단기술이라 믿고 있는 생체인증도 시각 정보를 채집하거나 확인이 어려운 미세한 개체로 사용하는 것일 뿐 시각 정보의 진위로 사용자 인증을 판단하는 원리는 동일한 것이다.In other words, biometric authentication, which is believed to be an advanced technology, is also used as a fine object that is difficult to collect or verify visual information, and the principle of judging user authentication by authenticity of visual information is the same.

그렇기 때문에 인간의 눈은 물론 광학기계로도 (확대해도) 판단할 수 없도록 아예 사전에 시각 정보가 존재하지 않는다면 노출에 의한 해킹도, 이를 걱정할 필요도 없어진다. 하지만 눈에 띄지도 않고, 개체도 없으며, 시각적으로나 광학적으로도 확인할 수 없어 노출에 자유로운 무형(無形)의 정보를 이용한 패스워드는 아직까지도 개발되거나 사용되지 못하고 있다.Therefore, there is no need to worry about hacking by exposure, if there is no visual information beforehand so that it can not be judged by the human eye as well as by the optical machine. However, a password using intangible information that is free from exposure because it is not visible, there are no objects, and it cannot be confirmed visually or optically has not been developed or used yet.

본 발명은 상기와 같은 종래 기술의 문제점을 해소하기 위한 것으로, 복제하거나 채집할 수 있는 시각 정보가 없으며, 사용 후에는 채집할 수 없는 개체인 제스처를 이용하여 사용자 인증을 함으로써 노출에 의한 해킹을 사전에 원천 차단하여 노출 보안에 강하면서도 사용에 편리한 새로운 사용자 인증 방법을 제공하는 것을 목적으로 한다.The present invention is to solve the above problems of the prior art, there is no visual information that can be duplicated or collected, pre-hacking by exposure by user authentication using a gesture that is an object that cannot be collected after use It aims to provide a new user authentication method that is strong in exposure security and convenient to use by blocking source.

또한, 본 발명은 형체를 가지고 있지 않으며 동작 추측이 어려운 터치와 슬라이딩 제스처를 조합해 사용자 인증정보로 사용함으로써 패스워드의 보안성과 사용자의 편리성을 둘 다 만족시킬 수 있는 새로운 사용자 인증 방법을 제공하는 것을 목적으로 한다.In addition, the present invention is to provide a new user authentication method that can satisfy both the security of the password and the convenience of the user by using a combination of touch and sliding gestures that do not have a shape and difficult to guess motion as the user authentication information. The purpose.

또한, 본 발명은 터치 및 슬라이딩을 조합하여 사용할 때 자연스럽게 생성되는 음악적인 리드미컬한 요소와 그래픽 이미지가 갖는 디자인적이고 구성적인 요소, 감성적인 요소를 결합하여 사용하기 때문에 어렵고 딱딱한 느낌의 패스워드가 재밌어지고, 단말을 개성있게 꾸밀 수 있도록 하여 보안을 높이는 것과 함께 사용자 만족도와 단말기 활용성을 높이는 것을 목적으로 한다.In addition, the present invention uses a combination of musical rhythmic elements that are naturally generated when using a combination of touch and sliding, and design, constituent elements, and emotional elements of the graphic image, the password of the hard and hard feeling is fun, It aims to enhance the user satisfaction and terminal usability while increasing the security by personalizing the terminal.

상기와 같은 목적을 달성하기 위하여, 본 발명의 일 실시예에 따른 터치 및 슬라이딩을 이용한 제스처 사용자 인증 방법은, 사용자에 의해 선택된 이미지를 패스워드 입력화면으로 설정하는 이미지 설정 단계와; 패스워드 입력화면으로 설정된 이미지상에서 상기 사용자에 의해 선택된 영역을 패스워드 입력 영역으로 설정하는 입력 영역 설정 단계와; 상기 사용자로부터 상기 패스워드 입력 영역에서 입력받은 터치 및/또는 슬라이딩의 종류 및 입력 횟수, 터치 순서를 설정하는 터치 패스워드 설정 단계와; 상기 패스워드 입력화면, 상기 패스워드 입력 영역 및 상기 입력된 터치 패스워드를 조합하여 상기 사용자를 위한 인증 정보를 생성하는 인증 정보 생성 단계를 포함할 수 있다.In order to achieve the above object, a gesture user authentication method using touch and sliding according to an embodiment of the present invention, the image setting step of setting the image selected by the user as a password input screen; An input area setting step of setting an area selected by the user as a password input area on an image set as a password input screen; A touch password setting step of setting a type of touch and / or sliding, an input frequency, and a touch order received from the user in the password input area; And generating an authentication information for the user by combining the password input screen, the password input area, and the input touch password.

상기 터치 패스워드 설정 단계는, 상기 사용자에 의해 입력된 터치 및/또는 슬라이딩을 인식하고 터치와 슬라이딩을 구별, 판단하는 단계를 포함할 수 있다. 상기 사용자에 의해 터치 및/또는 슬라이딩이 입력되면, 이때 시작점과 종료점으로 이루어지는 벡터의 크기에 의해 터치와 슬라이딩을 판단하며, 벡터의 방향은 버려진다.The setting of the touch password may include recognizing a touch and / or sliding input by the user and distinguishing and determining the touch and the sliding. When touch and / or sliding are input by the user, the touch and the sliding are determined based on the size of the vector consisting of the start point and the end point, and the direction of the vector is discarded.

상기 터치 패스워드 설정 단계는, 상기 사용자에 의해 입력된 터치 및/또는 슬라이딩의 입력 순서와 각각의 입력 횟수를 조합하는 단계를 더 포함할 수 있다.The setting of the touch password may further include combining the input order of the touch and / or sliding input by the user and the number of times of each input.

상기 사용자 인증 방법은, 상기 패스워드 입력화면에 사용자에 의해 이미지가 설정될 경우 패스워드 입력화면의 이미지상에 복수의 패스워드 설정 영역을 표시하는 단계를 더 포함하고, 상기 패스워드 설정 영역 중 하나에 터치되거나 슬라이딩된 영역을 패스워드 입력 영역으로 결정하는 단계를 포함할 수 있다.The user authentication method may further include displaying a plurality of password setting areas on an image of a password input screen when an image is set by the user on the password input screen, and touching or sliding one of the password setting areas. And determining the designated area as a password input area.

상기 사용자 인증 방법은, 상기 패스워드 입력화면으로 설정된 이미지상에서의 터치 패스워드 입력 후, 무작위 위치에 무작위 슬라이딩이 요구되는 더미 이미지(Dummy Image; 위장 이미지)를 설정하는 단계를 더 포함할 수 있다.The user authentication method may further include setting a dummy image (dummy image) requiring random sliding at a random position after inputting a touch password on the image set as the password input screen.

본 발명의 다른 실시예에 따른 제스처를 이용한 터치 패스워드 사용자 인증 방법은, 사용자 단말에 표시되는 복수의 이미지 중에서 사용자에 의해 선택된 이미지가 패스워드 입력화면으로 설정된 이미지인지 판단하는 이미지 확인 단계와; 상기 선택된 이미지가 패스워드 입력화면이고 상기 사용자가 상기 선택된 이미지상에서 터치 패스워드를 입력하는 경우, 상기 입력된 터치 패스워드가 기설정된 패스워드 입력 영역에서 입력되었는지 판단하는 패스워드 입력 영역 확인 단계와; 상기 터치 패스워드가 기설정된 패스워드 입력 영역에서 입력된 경우, 상기 터치 패스워드의 횟수 및 순서, 조합이 기설정된 터치 패스워드와 동일한지를 판단하는 터치 패스워드 확인 단계와; 상기 터치 패스워드가 기설정된 터치 패스워드와 동일한 경우 사용자 인증이 성공한 것으로 판단하는 인증 처리 단계를 포함할 수 있다.In accordance with another aspect of the present invention, there is provided a touch password user authentication method comprising: an image checking step of determining whether an image selected by a user is an image set as a password input screen from among a plurality of images displayed on a user terminal; A password input area checking step of determining whether the input touch password is input in a preset password input area when the selected image is a password input screen and the user inputs a touch password on the selected image; A touch password checking step of determining whether the number, order, and combination of the touch passwords are the same as a preset touch password when the touch password is input in a preset password input area; If the touch password is the same as the preset touch password may include an authentication processing step of determining that the user authentication is successful.

상기 사용자 인증 방법은, 상기 사용자 단말에 표시된 복수의 이미지가 모두 선택되는 동안 사용자 인증정보에 설정된 패스워드 입력화면에서의 터치 패스워드의 입력이 완료되지 않는 경우, 터치 패스워드 입력이 금지되고 이미지 브라우징만 가능한 패스워드 잠금화면을 제공하는 단계를 더 포함할 수 있다.In the user authentication method, if the input of the touch password on the password input screen set in the user authentication information is not completed while the plurality of images displayed on the user terminal are all selected, the touch password input is prohibited and only the image browsing password is available. The method may further include providing a lock screen.

상기 사용자 인증 방법은, 기설정된 패스워드 잠금 해제 화면에 해당하는 이미지가 선택되고 해당 이미지상에서 기설정된 입력 영역에 패스워드 잠금 해제 방법이 입력되는 경우 패스워드 입력이 재개되도록 잠금 해제하는 단계를 더 포함할 수 있다.The user authentication method may further include unlocking the password input to be resumed when an image corresponding to a preset password unlocking screen is selected and a password unlocking method is input to a preset input area on the corresponding image. .

본 발명에 의하면, 외형적으로 드러나지 않는 요소를 사용하여 사용자 인증을 하기 때문에 휴대용 단말기의 보안 시스템이 갖고 있는 근본적인 문제인 노출에 의한 해킹을 완벽하게 차단하는 사용자 인증 방법을 제공할 수 있다.According to the present invention, since user authentication is performed using an element that does not appear externally, it is possible to provide a user authentication method that completely blocks hacking by exposure, which is a fundamental problem of the security system of the portable terminal.

또한, 본 발명에 의하면 사용자 인증시 입력화면이나 인증화면 자판에 집중하고, 일일이 찾아서 입력 위치를 정확히 터치해서 사용자 인증 정보를 입력해야 하는 불편이 없어진다. 입력화면이라면 아무 위치에서나 터치 패스워드를 대충 입력해도 되기 때문에 운전 등 화면에 집중할 수 없는 환경이나 시력이 안 좋은 경우, 화면을 보지 않고도 즉각적이고 직관적으로 사용자 인증을 할 수 있는 장점이 있다.In addition, according to the present invention, there is no inconvenience of having to focus on an input screen or an authentication screen keyboard during user authentication, find one by one, and accurately touch the input position to input user authentication information. If the input screen can be entered roughly anywhere in the touch password, it is an advantage that can be authenticated immediately and intuitively without looking at the screen if the environment or eyesight that can not focus on the screen, such as driving.

또한, 본 발명에 의하면 터치 패스워드 입력시 입력화면의 특정 영역을 선택하게 함으로써 2차 보안이 추가 설정되므로 보안성이 더욱 향상되며, 키로깅으로는 캡쳐하지 못하는 슬라이딩 모션을 사용하기 때문에 효과적으로 키로깅에 의한 해킹을 막을 수 있다.In addition, according to the present invention, the second security is additionally set by allowing a specific area of the input screen to be selected when the touch password is input, and thus the security is further improved. Hacking can be prevented.

또한, 본 발명에 의하면 더미 이미지를 사용함으로써 제3자는 어느 이미지에 패스워드가 설정되어 있는지를 더욱 예측하기 어렵도록 3차 보안이 설정되지만, 이 모든 보안장치들을 즉각적이고 직관적으로 사용할 수 있기 때문에 높은 보안성에도 불구하고 사용자의 편리성에는 지장을 주지 않는 장점이 있다.In addition, according to the present invention, the third security is set so that it is more difficult for a third party to predict which image has a password set by using a dummy image, but since all these security devices can be used immediately and intuitively, high security Despite the sex, there is an advantage that does not interfere with the convenience of the user.

또한, 본 발명에 의하면 사용자가 패스워드를 암기하고 복기할 필요없이 직관적으로 패스워드를 입력할 수 있으므로 어린이부터 노인, 거주 외국인 등 학력이나 국적, 지식격차 없이 패스워드를 사용할 수 있게 되며, 터치 패스워드 입력화면에 사진이나 그래픽 이미지를 사용할 경우 핸드폰 진입시의 첫화면을 이용하기 때문에 데코레이션 효과가 뛰어나며, 홍보나 광고매체로도 사용이 가능해진다.In addition, according to the present invention, the user can enter the password intuitively without having to memorize and replay the password, so that the user can use the password without any educational gap, nationality, or knowledge gap between children, senior citizens, and foreign residents. When using a picture or graphic image, the first screen is used when entering a mobile phone, so the decoration effect is excellent, and it can be used as a promotional or advertising medium.

도 1은 사진 이미지를 이루는 픽셀의 구조를 보기 위해 확대한 사진 이미지의 예이다.
도 2는 종래 기술에 따라 사진 이미지의 특정 영역을 선택하여 패스워드를 설정하는 방법을 설명하기 위한 도면이다.
도 3은 종래 기술에 따라 이미지 선택에 의해 패스워드 인증을 처리하는 방법을 설명하기 위한 도면이다.
도 4는 본 발명의 일 실시예에 따른 제스처 사용자 인증 방법에 의해 터치 패스워드를 설정하는 방법을 설명하기 위한 순서도이다.
도 5는 본 발명의 일 실시예에 따라 터치 패스워드를 이용해 패스워드 입력 영역을 설정하는 화면을 예시한 것이다.
도 6은 본 발명의 일 실시예에 따라 터치 패스워드에 사용된 터치 및 슬라이딩 제스처의 판단 방법을 설명하기 위한 도면이다.
도 7은 본 발명의 일 실시예에 따라 터치 및/또는 슬라이딩 제스처의 조합으로 이루어진 터치 패스워드의 예들을 도시한 것이다.
도 8과 도 9는 본 발명의 일 실시예에 따라 이미지를 이용해 터치 패스워드를 설정하는 화면을 예시한 것이다.
도 10은 본 발명의 일 실시예에 따른 제스처 사용자 인증 방법에 의해 터치 패스워드를 입력하는 방법을 설명하기 위한 순서도이다.
도 11은 본 발명의 일 실시예에 따라 단말 장치에서 터치 패스워드를 입력하는 화면을 예시한 것이다.
도 12는 터치 패스워드를 이용한 사용자 인증에 실패하는 경우의 화면을 예시한 것이다.
도 13은 본 발명의 일 실시예에 따른 더미 이미지를 설명하기 위한 도면이다.1 is an example of a photographic image enlarged to view a structure of pixels constituting the photographic image.
2 is a diagram for describing a method of setting a password by selecting a specific area of a photo image according to the related art.
3 is a view for explaining a method for processing password authentication by image selection according to the prior art.
4 is a flowchart illustrating a method of setting a touch password by a gesture user authentication method according to an embodiment of the present invention.
5 illustrates a screen for setting a password input area using a touch password according to an embodiment of the present invention.
FIG. 6 is a diagram for describing a method of determining a touch and a sliding gesture used in a touch password according to an embodiment of the present invention.
7 illustrates examples of a touch password made up of a combination of touch and / or sliding gestures in accordance with one embodiment of the present invention.
8 and 9 illustrate screens for setting a touch password using an image according to an embodiment of the present invention.
10 is a flowchart illustrating a method of inputting a touch password by a gesture user authentication method according to an embodiment of the present invention.
11 illustrates a screen for inputting a touch password in a terminal device according to an embodiment of the present invention.
12 illustrates a screen when a user authentication using a touch password fails.
13 is a view for explaining a dummy image according to an embodiment of the present invention.

본 명세서에서 사용되는 용어에 대해 간략히 설명하고, 본 발명에 대해 구체적으로 설명하기로 한다.Terms used herein will be briefly described and the present invention will be described in detail.

본 발명에서 사용되는 용어는 본 발명에서의 기능을 고려하면서 가능한 현재 널리 사용되는 일반적인 용어들을 선택하였으나, 이는 당 분야에 종사하는 기술자의 의도 또는 판례, 새로운 기술의 출현 등에 따라 달라질 수 있다. 또한, 특정한 경우는 출원인이 임의로 선정한 용어도 있으며, 이 경우 해당되는 발명의 설명 부분에서 상세히 그 의미를 기재할 것이다. 따라서 본 발명에서 사용되는 용어는 단순한 용어의 명칭이 아닌, 그 용어가 가지는 의미와 본 발명의 전반에 걸친 내용을 토대로 정의되어야 한다.The terms used in the present invention have been selected as widely used general terms as possible in consideration of the functions in the present invention, but this may vary according to the intention or precedent of the person skilled in the art, the emergence of new technologies and the like. In addition, in certain cases, there is also a term arbitrarily selected by the applicant, in which case the meaning will be described in detail in the description of the invention. Therefore, the terms used in the present invention should be defined based on the meanings of the terms and the contents throughout the present invention, rather than the names of the simple terms.

명세서 전체에서 어떤 부분이 어떤 구성요소를 "포함"한다고 할 때, 이는 특별히 반대되는 기재가 없는 한 다른 구성요소를 제외하는 것이 아니라 다른 구성요소를 더 포함할 수 있음을 의미한다. 또한, 명세서에 기재된 "...수단", "...부", "모듈" 등의 용어는 적어도 하나의 기능이나 동작을 처리하는 단위를 의미하며, 이는 하드웨어 또는 소프트웨어로 구현되거나 하드웨어와 소프트웨어의 결합으로 구현될 수 있다.When any part of the specification is to "include" any component, this means that it may further include other components, except to exclude other components unless otherwise stated. In addition, the terms "... means", "... unit", "module", etc. described in the specification mean a unit for processing at least one function or operation, which may be implemented in hardware or software, or hardware and software. It can be implemented as a combination of.

아래에서는 첨부한 도면을 참고하여 본 발명의 실시예에 대하여 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자가 용이하게 실시할 수 있도록 상세히 설명한다. 그러나 본 발명은 여러 가지 상이한 형태로 구현될 수 있으며 여기에서 설명하는 실시예에 한정되지 않는다. 그리고 도면에서 본 발명을 명확하게 설명하기 위해서 설명과 관계없는 부분은 생략하였으며, 명세서 전체를 통하여 유사한 부분에 대해서는 유사한 도면 부호를 붙였다.DETAILED DESCRIPTION Hereinafter, exemplary embodiments of the present invention will be described in detail with reference to the accompanying drawings so that those skilled in the art may easily implement the present invention. As those skilled in the art would realize, the described embodiments may be modified in various different ways, all without departing from the spirit or scope of the present invention. In the drawings, parts irrelevant to the description are omitted in order to clearly describe the present invention, and like reference numerals designate like parts throughout the specification.

본 발명에 따른 터치 및 슬라이딩을 이용한 제스처 사용자 인증 방법은 프로세서, 메모리 및 입출력 장치를 구비한 컴퓨팅 시스템에 의해 수행될 수 있다.The gesture user authentication method using touch and sliding according to the present invention may be performed by a computing system having a processor, a memory, and an input / output device.

예를 들어, 스마트폰, 스마트워치, 태블릿PC, 노트북컴퓨터, 데스크탑 등의 사용자 단말을 사용하기 위해 로그인하거나 잠금화면을 해제하는데 필요한 사용자 인증 절차 즉, 패스워드 설정 및 패스워드 입력 처리에 본 발명이 적용될 수 있다.For example, the present invention can be applied to a user authentication procedure required for logging in or releasing a lock screen for use of a user terminal such as a smartphone, smart watch, tablet PC, laptop computer, desktop, etc., that is, password setting and password input processing. have.

또한, 사용자 단말과 서버가 네트워크를 통해 연동하는 시스템에서 사용자 단말을 통해 서버에 접속하기 위한 사용자 인증 절차에도 본 발명이 적용될 수 있다.In addition, the present invention can be applied to a user authentication procedure for accessing a server through a user terminal in a system in which a user terminal and a server interwork with each other through a network.

이때, 네트워크는 인터넷망이나, 인트라넷, 이동통신망 등 알려진 다양한 형태의 유무선 통신망일 수 있다.In this case, the network may be a wired or wireless communication network of various types such as an internet network, an intranet, a mobile communication network, and the like.

특히, 네트워크를 통해 연결된 원격 단말은 사용자 인증 시스템과 통신하며 패스워드를 입력하기 위한 수단으로, 사용자 인증 시스템과 물리적으로 분리된 스마트폰, 타블렛PC, 노트북컴퓨터, 개인용 컴퓨터, 스마트TV, 게임기, 유무선 통신이 가능한 현관문의 디지털도어락, 네트워크에 연결된 현금자동입출금기(ATM), 무인금융자동화기기 및 키오스크(Kiosk), 민원서류발급기 등 자동화기기일 수 있다.In particular, a remote terminal connected through a network communicates with a user authentication system and enters a password. A smartphone, a tablet PC, a notebook computer, a personal computer, a smart TV, a game machine, and a wired / wireless communication are physically separated from the user authentication system. This may be a digital door lock of the front door, an ATM connected to the network, an automated financial teller machine and a kiosk, and an automated document issuer.

이외에도, 원격 단말은 유무선 통신이 가능한 스마트 냉장고 등 가전제품, 가스보일러, 전원스위치, 스피커와 같은 IoT(Internet of Things) 제품일 수 있다.In addition, the remote terminal may be an IoT (Internet of Things) product such as a home appliance, a gas boiler, a power switch, or a speaker such as a smart refrigerator capable of wired or wireless communication.

또는, 원격 단말은 무선 통신망에 연결되며, 블루투스(Bluetooth)나 지그비(Zigbee)와 같은 근거리 무선 통신 방식에 의해 각종 IoT 제품을 컨트롤하는 IoT 컨트롤러이거나 스마트 홈, 커넥티드 카(Connected Car) 시스템, 로봇 등을 제어하는 디바이스거나 스마트워치, 스마트밴드 등 웨어러블 제품일 수 있다.Alternatively, the remote terminal is connected to a wireless communication network and is an IoT controller that controls various IoT products by a short range wireless communication method such as Bluetooth or Zigbee, or a smart home, a connected car system, or a robot. Or a wearable product such as a smart watch or a smart band.

그 외에도, 이와 같은 다양한 IoT 제품과 연동되는 스마트폰이나 타블렛 컴퓨터 등의 모바일 디바이스의 형태일 수도 있다.In addition, the present invention may be in the form of a mobile device such as a smartphone or a tablet computer interoperating with various IoT products.

이외에도, 상기의 정의를 만족하는 것이라면 하드웨어의 형태에 제약을 두지 아니한다.In addition, if the above definition is satisfied, there is no restriction on the type of hardware.

도 4는 본 발명의 일 실시예에 따른 제스처 사용자 인증 방법에 의해 터치 패스워드를 설정하는 방법을 설명하기 위한 순서도이다.4 is a flowchart illustrating a method of setting a touch password by a gesture user authentication method according to an embodiment of the present invention.

본 발명에 따르면, 사용자는 단말에 저장된 이미지들 중 하나의 이미지를 패스워드 입력화면으로 선택하고, 선택된 이미지에 대해 패스워드 입력 영역과 그에 대응하는 터치 패스워드를 설정할 수 있다.According to the present invention, a user may select one of the images stored in the terminal as a password input screen, and set a password input area and a touch password corresponding thereto for the selected image.

도 4를 참조하면, 이미지 설정 단계 S40에서 사용자에 의해 선택된 이미지를 패스워드 입력화면으로 설정한다.Referring to FIG. 4, the image selected by the user is set as the password input screen in the image setting step S40.

사용자는 단말 장치의 사진 보관함에서 이미지들을 불러와 화면에 표시하고 이들 중 하나의 이미지를 패스워드 입력화면으로 사용할 수 있다. 패스워드 입력화면 외에 복수의 다른 이미지들을 불러와 함께 표시되게 할 수도 있으며, 이는 제3자가 이 이미지들 중 어느 것이 패스워드 입력화면으로 사용되는지 구분할 수가 없도록 하기 위함이다. 때문에 제3자에게는 사진 브라우징 화면이 사진을 열람하는 사진 앨범의 역할을 할 뿐이다.The user may retrieve images from the photo library of the terminal device and display them on the screen, and use one of these images as the password input screen. In addition to the password input screen, a plurality of other images may be called and displayed together, so that a third party cannot distinguish which of these images is used as the password input screen. Thus, for third parties, the photo browsing screen only acts as a photo album for browsing the photos.

또다른 예로써, 패스워드 입력화면에 사용되는 이미지는 사용자의 선택에 따라 미사용될 수도 있으며, 이 경우 단말기 시작의 첫화면이 터치 패스워드의 입력화면으로 사용될 것이다(도 5 (C)).As another example, the image used for the password input screen may be unused according to the user's selection. In this case, the first screen of the terminal start will be used as the input screen of the touch password (FIG. 5 (C)).

상기와 같이 사용자가 특정한 이미지를 선택하지 않을 경우, 이미지 대신 투명 레이어를 이용하여 이 레이어상에 패스워드 입력 영역 및 터치 패스워드를 설정할 수 있다. 사용자는 이 레이어에 패스워드를 설정하게 되지만, 투명 레이어는 시각적으로 존재감을 느낄 수 없고 또한 현재 사용하고 있는 바탕화면이나 초기화면이 그대로 투과되어 제공되기 때문에, 현재의 바탕화면에 터치 패스워드를 설정하는 것으로 인식하게 된다.When the user does not select a specific image as described above, a password input area and a touch password may be set on this layer by using a transparent layer instead of the image. The user sets a password for this layer, but since the transparent layer does not have a visual sense of presence and the current desktop or initial screen is transparent, the user can set a password for the current desktop. To be recognized.

이는 사용자의 취향을 고려한 조치로, 사용자에 따라서는 단말기 첫화면의 이미지 장식을 선호하지 않을 수도 있기 때문이다. 즉, 이미 구성되어 있는 사용자 핸드폰의 첫화면을 터스 패스워드 설정을 위해 다른 이미지로 굳이 바꿀 필요없이 익숙한 현재의 사용 화면에서 바로 터치 패스워드 사용이 가능해지는 것이다.This is because the user's taste is taken into consideration, and some users may not prefer the image decoration of the first screen of the terminal. That is, the user can use the touch password directly from the familiar current screen without having to change the first screen of the user's mobile phone, which is already configured, to another image.

패스워드 입력 영역 설정 단계 S42에서는, 패스워드 입력화면으로 설정된 이미지상에서 사용자에 의해 선택된 영역을 패스워드 입력 영역으로 설정한다.In the password input area setting step S42, the area selected by the user on the image set as the password input screen is set as the password input area.

이 패스워드 입력 영역은 화면 전체를 한 개의 입력 영역으로 사용할 수도 있지만, 패스워드 입력화면을 복수의 블록으로 분할한 모습을 제공하고, 사용자로 하여금 하나의 블록을 선택하도록 하고, 이 영역 안에서 터치 패스워드를 입력할 수 있도록 하여 보안을 더 강화할 수 있다.Although this password input area can use the entire screen as one input area, it provides a division of the password input screen into a plurality of blocks, allows the user to select one block, and inputs a touch password within this area. You can make it more secure.

이때, 블록 선택 방법은 영역 선택을 위한 사용자의 추가적인 조치가 필요 없으며, 단지 사용자가 터치 패스워드를 입력하고 싶은 블록 영역(위치)에 터치 패스워드를 입력하는 것으로 패스워드 입력 영역이 자동 설정된다.In this case, the block selection method does not require any further action by the user for selecting the area, and the password input area is automatically set by simply inputting the touch password in the block area (location) where the user wants to input the touch password.

도 5 (a)의 예를 보면, 상하 2개의 블록으로 나누어진 영역 중, 위쪽 블록 영역(A)에 터치 패스워드를 설정하였으므로 아래쪽 영역(B)은 터치 패스워드 입력 영역에서 제외된다. 때문에 아래쪽 영역에 터치 패스워드를 입력하면(55) 패스워드 입력 실패로, 사진 브라우징 기능만 작동하게 된다. 즉, 위쪽 블록에 터치 패스워드를 설정하기 위해 터치하는 순간, 상기 패스워드 입력화면의 위쪽 블록 영역 A가 터치 패스워드 입력 영역으로 자동 설정되는 것이다.Referring to the example of FIG. 5A, since the touch password is set in the upper block area A among the areas divided into two blocks, the lower area B is excluded from the touch password input area. Therefore, when the touch password is input in the lower area (55), the password input fails, and only the photo browsing function is operated. In other words, the upper block area A of the password input screen is automatically set as the touch password input area at the moment of touching the upper block to set the touch password.

도 5 (b)에서는 패스워드 입력화면이 4개의 영역으로 나누어져 표시된 것을 볼 수 있으며, 사용자에 의해 A 영역의 블록이 선택되었음을 알 수 있다.In FIG. 5 (b), it can be seen that the password input screen is divided into four areas, and the block of the A area is selected by the user.

이때, 이미지의 분할은 동일한 크기로, 직사각형 또는 정사각형 영역으로 분할할 필요는 없다. 즉, 사각형, 원형, 다각형 외에도 분할된 영역의 형상은 불규칙할 수 있으며, 그 크기와 개수 또한 제각각이어도 무방하다. 특히, AI나 기타 유사영역 선택 알고리즘을 이용하여 사용자가 선택한 터치 패스워드 입력 위치 영역을 소정의 이미지상 영역으로 자동으로 선택하여 분할할 수도 있다.At this time, the division of the image is the same size, it is not necessary to divide into a rectangular or square area. That is, the shape of the divided region may be irregular in addition to the rectangle, the circle, and the polygon, and the size and number may be different. In particular, an AI or other similar region selection algorithm may be used to automatically select and segment a touch password input location region selected by a user into a predetermined image region.

예컨대, 인물사진에서 눈을 선택한 경우 눈에 해당하는 범위의 영역으로 분할할 수 있을 것이다. 이 경우 눈에 해당하는 영역의 모양이 서로 다를 것이라는 점을 예상할 수 있으며, 사용자는 이미지상의 눈 영역 범위 내에서 터치 패스워드를 입력해야 한다. 이때 터치 패스워드 입력 영역의 크기는 사용자에 의해 확대·축소하여 설정할 수 있으나, 영역 범위가 작으면 터치 및/또는 슬라이딩 입력이 불편해지고 입력 오류 발생 확률이 커질 수 있다.For example, if an eye is selected in the portrait, it may be divided into an area corresponding to the eye. In this case, it can be expected that the shapes of the areas corresponding to the eyes will be different from each other, and the user must enter a touch password within the range of the eye areas on the image. In this case, the size of the touch password input area may be enlarged and reduced by the user, but when the area range is small, the touch and / or sliding input may be inconvenient and the probability of occurrence of an input error may increase.

또다른 예로써, 사용자가 원하는 이미지(51, 57)를 패스워드 입력화면으로 선택하면 해당 이미지를 N개의 영역으로 나누어 표시한 레이어가 생성되어 화면에 표시되지만, 도 5 (c)의 예에서는 사용자가 선택한 이미지가 없는 단말기의 첫 시작 화면(58)이 분할되어 있음을 알 수 있다. 이는 서두에서 밝혔듯이 단말기에 장식을 원치 않는 사용자를 고려한 장치이다. 즉, 1) 이미지나 2) 더미 이미지 사용, 3) 입력 영역 선택으로 보안과 데코레이션 효과는 향상되지만, 1), 2), 3)의 방식이 본 터치 패스워드의 근원적인 기술과 사용에 어떠한 영향을 미치는 것은 아니다.As another example, when the user selects the desired images 51 and 57 as the password input screen, a layer in which the image is divided into N areas is displayed and displayed on the screen. However, in the example of FIG. It can be seen that the first start screen 58 of the terminal having no selected image is divided. This is a device for users who do not want to decorate the terminal, as mentioned at the beginning. That is, 1) image or 2) dummy image use, 3) input area selection improves security and decoration effect, but how 1), 2), 3) method affects the basic technology and use of this touch password. It's not crazy.

한편, 사용자가 하나의 영역을 터치하면 해당 영역이 패스워드 입력 위치로 설정되어 그에 대한 정보가 저장되며, 사용자에 의한 터치 및/또는 슬라이딩이 터치 패스워드로 설정되어 저장된다.Meanwhile, when a user touches one area, the corresponding area is set as a password input position and information about the area is stored, and touch and / or sliding by the user is set as a touch password and stored.

도 5에 표시된 블록 영역은 터치 패스워드 입력 영역의 설정을 돕기 위한 장치로 영역 설정시에만 화면에 표시되며, 터치 패스워드 설정이 완료되면 화면상에 표출되지 않는다.The block area shown in FIG. 5 is a device for assisting in setting the touch password input area and is displayed on the screen only when the area is set, and is not displayed on the screen when the touch password setting is completed.

터치 패스워드 설정 단계 S44에서는, 사용자로부터 상기 패스워드 입력 영역에 터치 패스워드를 입력받는다. In the touch password setting step S44, a touch password is input to the password input area from the user.

블록 분할 방식으로 패스워드 입력 영역을 선택한 경우, 사용자는 자신이 선택한 블록에서 시작하는 터치 및/또는 슬라이딩 패스워드를 입력함으로써 터치 패스를 설정할 수 있다. 추후 터치 패스워드 입력시, 선택한 블록 영역 외의 영역에서 입력된 터치 패스워드는 실패 처리되지만, 슬라이딩의 시작지점은 입력 영역 내에서 시작되고 종료지점이 입력 영역 밖에서 종료된 경우 입력 성공으로 판단한다.When the password input area is selected by the block division method, the user may set the touch path by inputting a touch and / or sliding password starting from the block selected by the user. When the touch password is input later, the touch password input in an area other than the selected block area is failed. However, when the start point of the sliding starts in the input area and the end point ends outside the input area, it is determined that the input is successful.

인증 정보 생성 단계 S46에서는 설정된 패스워드 입력화면, 패스워드 입력 영역 및 터치 패스워드에 대한 정보를 조합하여 해당 사용자를 위한 인증 정보를 생성한다.In the authentication information generation step S46, authentication information for the corresponding user is generated by combining information on the set password input screen, the password input area and the touch password.

사용자 인증 정보에는 하나의 패스워드 입력화면과 그에 대응하는 패스워드 입력 영역 및 터치 패스워드에 대한 정보가 저장될 수 있다. 이때 패스워드 입력화면에 복수의 이미지 화면이 설정되었다면, 사용자는 복수의 이미지들 중에서 패스워드 입력화면을 선택한 후, 패스워드 입력 영역에 터치 패스워드를 입력함으로써 패스워드를 설정할 수 있다.The user authentication information may store information about one password input screen, a password input area corresponding to the password, and a touch password. In this case, if a plurality of image screens are set on the password input screen, the user may set a password by selecting a password input screen among the plurality of images and then inputting a touch password in the password input area.

한편, 사용자 단말에는 많은 수의 이미지가 저장되어 있을 수 있기 때문에 모든 이미지를 나열한 화면을 통해 패스워드를 입력하도록 하면 사용하기 불편할 수 있다. 따라서, 사용자가 패스워드 입력화면을 한 개 선택하고 나면, 패스워드 입력화면에 대응하는 이미지 이외의 이미지들을 소정 수 만큼 선정하여 사용자 인증 화면을 구성할 수 있다.On the other hand, since a large number of images may be stored in the user terminal, it may be inconvenient to use a password through a screen listing all the images. Therefore, after the user selects one password input screen, the user authentication screen may be configured by selecting a predetermined number of images other than the image corresponding to the password input screen.

예를 들어 사용자가 1개의 이미지를 패스워드 입력화면으로 선정한 후 5개의 다른 이미지(더미 이미지)를 임의로 선정하여, 사용자 단말의 잠금화면에 총 6개의 이미지를 배치할 수 있다. 이때 패스워드 입력화면으로 선택된 1개의 이미지는 5개의 이미지 중 임의의 위치에 삽입될 것이다.For example, a user may select one image as a password input screen, and then arbitrarily select five different images (dummy images), and place a total of six images on the lock screen of the user terminal. At this time, one image selected as the password input screen will be inserted at an arbitrary position among the five images.

여기에 사용된 N개의 이미지들의 순서는 사용자 의도대로, 혹은 사용시마다 동적으로 변경ㆍ재배치할 수도 있으며, 사용자는 이 6개의 이미지를 돌려보면서 패스워드를 입력할 수 있게 된다. 이 더미 이미지는 사용자의 선택에 따라 사용하거나 미사용할 수 있다.The order of the N images used here may be dynamically changed and re-arranged according to the user's intention or every use, and the user may enter a password while rotating the six images. This dummy image can be used or unused according to the user's choice.

이는 단말의 잠금화면의 구성을 사용자가 원하는 대로 설정할 수 있도록 하기 위한 장치로, 단말의 보안성을 강화하는 것 외에 데코레이션 기능을 확장해준다. 즉, 패스워드 입력화면에 대응하는 이미지 이외에 좋아하는 사진으로 단말기 진입시의 첫화면인 잠금화면을 구성함으로써 잠금 상태에서도 감상할 수 있는 사진 앨범의 기능을 겸하도록 할 수 있다.This is a device that allows the user to set the configuration of the lock screen of the terminal as desired, and extends the decoration function in addition to enhancing the security of the terminal. That is, by configuring a lock screen, which is the first screen when the terminal enters, with a favorite photo in addition to the image corresponding to the password input screen, it can also serve as a photo album function that can be enjoyed even in the locked state.

예를 들면, 좋아하는 아이돌 그룹의 멤버 7명의 사진을 핸드폰 첫시작 화면에 사진앨범처럼 일곱 개를 배치하고, 이중 한 명의 사진에 터치 패스워드를 설정·사용할 수 있다. 사용자 인증을 하는 경우에도 이 일곱 개의 사진 중에서 패스워드 설정 사진을 선택하여 이곳에 패스워드를 입력해야 하는 것이다.For example, you can place seven photos of your favorite idol group like a photo album on your mobile phone's home screen, and set and use a touch password on one of them. In case of user authentication, you must select a password setting picture among these seven pictures and enter the password here.

도 6의 예에서 터치 패스워드의 패턴 분석을 이용해 제스처의 종류를 판단하는 동작 구분의 특징을 좀 더 구체적으로 설명하자면, 사용자가 슬라이딩하기 위해 터치한 포인트의 좌표값(61)과 슬라이딩 동작 후 터치상태가 해제된 지점(62)의 좌표값을 이용하여 벡터를 구한다. 즉, 슬라이딩이 시작된 지점의 좌표값과 슬라이딩이 끝난 지점의 좌표값을 이용하여 벡터를 구하는 것이다.In the example of FIG. 6, the characteristics of the operation classification for determining the type of gesture using the pattern analysis of the touch password will be described in more detail. The coordinate value 61 of the point touched by the user for sliding and the touch state after the sliding operation are described. The vector is obtained using the coordinate values of the released point 62. That is, a vector is obtained using the coordinate values of the sliding start point and the coordinate values of the sliding end point.

슬라이딩이 시작된 지점의 좌표값과 슬라이딩이 끝난 지점의 좌표값은 각각 2차원 좌표계의 좌표일 수 있으며, x축과 y축을 기준으로, 슬라이딩이 시작된 지점의 좌표값에서 슬라이딩이 끝난 지점의 좌표값까지의 길이(B) - 즉, 벡터의 크기를 구할 수 있다.The coordinate value of the sliding start point and the coordinate value of the sliding end point may be the coordinates of the two-dimensional coordinate system, respectively, from the coordinate value of the sliding start point to the coordinate value of the sliding start point based on the x-axis and the y-axis. The length of (B)-that is, the size of the vector can be found.

여기서 벡터의 방향(63)은 무시되며, 벡터의 크기(A, B)로 터치와 슬라이딩 입력을 구분, 판단하게 된다.In this case, the direction 63 of the vector is ignored, and the touch and the sliding input are distinguished and determined based on the magnitudes of the vectors A and B.

일반적으로 슬라이딩을 할 경우, 습관과 환경에 따라 좌측이나 우측, 또는 상하 방향으로, 길게 혹은 짧게도 슬라이딩을 하게 되는데, 여기서 길거나 짧은 슬라이딩의 차이는 구별하지만 슬라이딩의 방향, 즉 터치 지점과 함께 터치 지점에서 출발한 각도(C)는 무시하며, 슬라이딩이냐 터치냐의 판단 구분이 터치 패스워드의 판단 요소로 작용하는 것이다. 따라서 패스워드 입력화면 정보와 함께 터치 패스워드가 시작되는 패스워드 입력 영역 정보와, 터치 패스워드가 사용자 인증정보에 포함되어 저장된다.In general, when sliding, depending on the habit and the environment, the sliding is to the left or right, or up and down direction, long or short, where the difference between the long and short sliding is distinguished, but the direction of sliding, that is, the touch point together with the touch point Ignoring the angle (C) starting from, the determination of sliding or touch acts as a determining factor of the touch password. Therefore, the password input area information in which the touch password is started together with the password input screen information and the touch password are stored in the user authentication information.

한편, 사용자가 터치 패스워드를 입력함으로써 사용자 인증을 요청하는 과정을 상세히 살펴보기로 한다.Meanwhile, a process of requesting user authentication by inputting a touch password will be described in detail.

도 6은 본 발명의 일 실시예에 따른 터치 패스워드의 터치 입력과 슬라이딩 입력의 판단 방법을 예시한 것이다.6 illustrates a method for determining a touch input and a sliding input of a touch password according to an embodiment of the present invention.

사용자는 패스워드 입력 영역에 터치 및/또는 슬라이딩 입력을 할 수 있다. 터치 및/또는 슬라이딩 입력이 있으면 사용자의 터치가 시작된 위치의 좌표(61)와 종료된 위치의 좌표(62)를 획득한다. 그리고 터치가 시작된 위치의 좌표와 종료된 위치의 좌표를 이용해 벡터를 구한 다음, 벡터의 크기가 제1 임계값 미만인 경우 터치 입력으로 판정하고, 제1 임계값 이상인 경우 슬라이딩 입력으로 판정한다.The user may touch and / or slide the password input area. If there is a touch and / or sliding input, the coordinate 61 of the position where the user's touch is started and the coordinate 62 of the end position are obtained. The vector is obtained using the coordinates of the position where the touch is started and the coordinates of the position where the touch is terminated. Then, when the size of the vector is less than the first threshold value, the vector is determined as a touch input.

여기서 종료점의 좌표는, 벡터의 크기로 터치 입력과 슬라이딩 입력을 판단하기 위한 것이므로, 시작점이 패스워드 입력 영역에서 시작되었다면 종료점의 좌표가 입력 영역 밖이라 하더라도 사용자 인증 결과에 영향을 주지 않는다.Here, since the coordinates of the end point are for determining the touch input and the sliding input by the size of the vector, if the start point is started in the password input area, even if the end point coordinates are outside the input area, it does not affect the user authentication result.

이후, 상기와 같이 터치 입력과 슬라이딩 입력을 판정하고, 각각의 입력 횟수와 순서를 조합한 후, 기저장된 사용자 인증정보를 비교한다.Thereafter, as described above, the touch input and the sliding input are determined, and the number and order of the respective inputs are combined, and the previously stored user authentication information is compared.

즉, 사용자 인증 정보에는 패스워드 입력 영역 정보 및 터치와 슬라이딩의 조합이 포함될 수 있다. That is, the user authentication information may include password input area information and a combination of touch and sliding.

도 7은 본 발명의 일 실시예에 따른 터치 및/또는 슬라이딩 입력과 횟수의 조합으로 이루어진 터치 패스워드를 예시한 것이다.7 illustrates a touch password consisting of a combination of a touch and / or sliding input and a number of times according to an embodiment of the present invention.

터치와 슬라이딩의 조합은 도 7의 예시와 같이 한 번 이상의 슬라이딩 입력과 한 번 이상의 단순 터치 입력의 조합으로 사용자 인증정보를 구성하는 것이 가능하다.In the combination of touch and sliding, user authentication information may be configured by a combination of one or more sliding inputs and one or more simple touch inputs as illustrated in FIG. 7.

또한, 한 번 이상의 슬라이딩 입력 및/또는 한 번 이상의 터치 입력의 조합으로 사용자 인증을 수행하도록 구현할 수도 있다.In addition, the present invention may be implemented to perform user authentication using a combination of one or more sliding inputs and / or one or more touch inputs.

예를 들면, 이미지(80)의 패스워드 입력 영역(A)에서 짧게 두 번 터치하고 길게 오른쪽으로 한 번 슬라이딩하여 사용자 인증 정보(a)를 구성할 수 있다. 이때의 터치 패스워드 인증정보는 ‘터치 2회 + 슬라이딩 1회’(터치 -> 터치 -> 슬라이딩)의 조합(도 7, D)으로 생성된다.For example, in the password input area A of the image 80, the user authentication information a may be configured by two short touches and one long slide to the right. At this time, the touch password authentication information is generated by a combination of 'touch twice + slide once' (touch-> touch-> sliding) (Fig. 7, D).

도 7을 참조하여 보완설명을 하자면, “터치 2회 + 슬라이딩 1회”의 조합이라 하더라도 터치와 슬라이딩의 순서에 따라, 1) 터치 -> 터치 -> 슬라이딩(D), 2) 슬라이딩 -> 터치 -> 터치(A), 3) 터치 -> 슬라이딩 -> 터치(B)의 3가지 다른 구성의 조합이 발생되기 때문에 터치 2회, 슬라이딩 1회를 동일하게 사용하더라도 순서가 다르다면 각각 다 다른 터치 패스워드가 되는 것이다.Referring to Figure 7, the complementary description, even if the combination of "touch twice + sliding once" according to the sequence of touch and sliding, 1) touch-> touch-> sliding (D), 2) sliding-> touch -> Touch (A), 3) Touch-> Sliding-> Since the combination of three different configurations occurs, touch (2) and touch (1), even if you use the same two times, if the order is different, each different touch It is a password.

사용자의 편의성에 의한 선택에 따라 슬라이딩이나 터치만 사용된 조합(도 7 F, G)으로도 사용이 가능하지만, 이 경우 편의성은 좋아지나 보안성이 저하될 수도 있다.Depending on the user's convenience, it is possible to use the combination using only sliding or touch (FIG. 7F, G), but in this case, the convenience may be improved but the security may be deteriorated.

특히, 단말 장치에 사용되는 여러 가지 제스처(Gesture) 중 유용성과 상징성, 활용성이 가장 높은 제스처가 터치와 슬라이딩이며, 상기와 같이 터치 패스워드는 터치 입력과 슬라이딩 입력의 횟수, 순서의 조합으로 만들어지는데, 이 터치와 슬라이딩의 조합이 만들어질 때, 터치와 슬라이딩 각각에 시간적 질서가 존재하여 자연스럽게 리듬(Rhythm)을 갖게 되며, 이는 터치 패스워드가 빨리 익숙해지게 하며 몸에 배어 터치 패스워드 입력 동작인 제스처 행동이 직관적이며 자연스럽고 빠르게 이루어진다. 패스워드 입력 시간이 늘어날수록 노출에 의한 해킹에 취약해진다는 조사 결과에 따르면, 이는 주위 노출을 막는 데에도 영향을 미치게 된다.In particular, among the various gestures used in the terminal device, gestures having the highest usability, symbolism, and utility are touch and sliding. As described above, the touch password is made of a combination of the number and order of the touch input and the sliding input. When this combination of touch and sliding is made, there is a temporal order in each of the touch and sliding, so that it naturally has a rhythm. Intuitive, natural and fast. Investigations have shown that the longer the password entry time, the more vulnerable to exposure hacking will be.

또한, 종래의 인증 방법들은 터치 입력 좌표를 기준으로 하여 가상 키보드상의 숫자나 문자 키, 패턴의 포인트, 그래픽 패스워드의 관심 포인트 등을 판단하고 기설정된 값과 일치하는지를 판정하는 반면에, 본 발명에서는 터치 입력 좌표값이 패스워드 인증 판단의 절대 기준이 되지 않기 때문에 시야 확보나 입력 지점 판독이 어려운 경우에 화면을 보지 않고도 단말기의 화면을 두드리듯 익숙한 동작으로 패스워드를 입력할 수 있게 되는 것이다.In addition, the conventional authentication methods determine the number or letter keys on the virtual keyboard, the point of the pattern, the point of interest of the graphic password and the like on the basis of the touch input coordinates, and determine whether they match the preset values. Since the input coordinate value is not an absolute criterion for determining password authentication, it is possible to input a password using a familiar operation as if tapping the screen of the terminal without looking at the screen when the field of view or the input point is difficult to read.

이처럼 시각정보를 원천적으로 사용하지 않기 때문에 종래의 기술들과 달리 주위 노출에 의한 해킹을 걱정할 필요도 없어진다.As such, since the visual information is not used at the source, there is no need to worry about hacking due to the surrounding exposure, unlike conventional technologies.

뿐만 아니라, 종래의 기술과 달리 입력지점의 좌표값으로 사용자 인증을 판단하지 않을뿐더러, 터치 패스워드의 횟수와 조합으로 사용자 인증을 하고, 슬라이딩 동작의 시작점과 종료점은 벡터의 크기를 판단하여 터치와 슬라이딩을 구별하는 데에만 사용하기 때문에 사용자는 좌우·상하 방향 심지어 사선 방향이나 포물선을 그리는 방식으로도 슬라이딩 입력을 할 수 있다.In addition, unlike the conventional technology, the user authentication is not determined by the coordinate value of the input point, and the user authentication is performed by the combination of the number and the number of touch passwords, and the start and end points of the sliding operation are determined by the size of the vector. Because it is used only to distinguish between them, the user can make sliding input in the horizontal direction, the vertical direction, the diagonal direction or the parabola drawing method.

이렇게 입력을 하여도 시작점과 종료점의 좌표만을 가지고서 벡터의 크기를 구하기 때문에, 시작점에서 종료점까지의 크기로 판정된 터치와 슬라이딩 각각의 횟수와 조합이 기저장된 사용자 인증정보 상의 터치 패스워드에 부합하는 이상 인증은 성공으로 판정된다.Since the size of the vector is obtained using only the coordinates of the start point and the end point even when the input is made, the number and combination of the touches and the slidings determined as the size from the start point to the end point correspond to the touch password on the stored user authentication information. Is determined to be success.

이와 같은 방식으로 판정하기 때문에, 사용자는 터치 입력 위치나 터치 지점에 상관없이 그저 터치와 슬라이딩의 횟수와 조합만을 기억하여 적당히 터치 패스워드를 입력하면 되는데, 슬라이딩 입력의 경우 길이나 방향이 매번 달라질 수 있고, 심지어 직선이 아닌 곡선, 지그재그 등 다양한 입력이 가능하며, 이에 따라 사용자 인증을 위한 사용자의 슬라이딩 입력의 모션은 매번 달라질 수 있다.In this way, the user only needs to remember the number and combination of touch and sliding, regardless of the touch input position or touch point, and inputs the touch password appropriately. In the case of sliding input, the length or direction may vary. Also, various inputs such as curves, zigzags, and the like, may be performed. Accordingly, the motion of the user's sliding input for user authentication may change every time.

또한, 좌표를 인식할 수 있도록 정확한 위치를 터치 입력하는 것이 아니라, 적당한 위치에 설정한 횟수만큼 터치 입력을 하면 되므로 터치 위치가 매번 제각각일 수도 있다.In addition, the touch position may be different each time since a touch input is performed a number of times set at an appropriate position, instead of touch inputting an exact position to recognize the coordinates.

이러한 방식은 보안성을 강화하는데 크게 기여한다. 또한, 사용자에 따라 슬라이딩이 직선이 아니고 포물선 형태의 완만한 곡선 형태를 띠는 경우가 많고, 슬라이딩 길이와 방향의 차이가 크기 때문에 상기의 판정 방식이 적용되면 슬라이딩의 입력 오류와 판단 오류가 없어져 사용자 편의성이 크게 좋아진다.This approach greatly contributes to enhanced security. In addition, according to the user, the sliding is not a straight line but has a gentle parabolic curve shape, and the difference in sliding length and direction is large, so that the input error and the determination error of sliding are eliminated when the above determination method is applied. Convenience is greatly improved.

도 8과 도 9는 본 발명의 일 실시예에 따라 이미지를 이용해 터치 패스워드를 설정하는 화면을 예시한 것이다.8 and 9 illustrate screens for setting a touch password using an image according to an embodiment of the present invention.

사용자는 복수의 이미지를 불러와 돌려보면서 패스워드를 설정할 패스워드 입력화면을 선택한다. 도 8의 예에서, 1개의 이미지(80)가 패스워드 입력화면으로 선택되어 패스워드가 설정되었고 4개의 이미지(81, 82, 83, 84)는 패스워드 설정이 없는 이미지이다.The user selects a password input screen for setting a password by loading and returning a plurality of images. In the example of FIG. 8, one image 80 is selected as the password input screen so that a password is set and four images 81, 82, 83, and 84 are images without password setting.

추후 사용자가 패스워드 입력을 위해 이미지들을 브라우징하다가 패스워드 설정이 있는 이미지(80)의 패스워드 입력 영역(A)에 터치 패스워드(a)를 입력하면 패스워드 입력 이미지와 입력 영역, 터치 패스워드를 분석하여 기설정된 패스워드와 동일한지 확인한 후 다음 동작을 수행(85)하지만, 패스워드 설정이 없는 이미지(81, 82, 83)를 터치하여 터치 패스워드를 입력하면 별도의 패스워드 확인 절차를 수행하지 않고 다음 이미지(84)를 불러와 보여줄 것이다.If a user browses the images for password input later and inputs the touch password (a) into the password input area (A) of the image 80 having the password setting, the user inputs the preset password by analyzing the password input image, the input area and the touch password. After confirming that it is the same as, perform the following operation (85), but touch the image (81, 82, 83) without a password setting and input the touch password to call up the next image (84) without performing a separate password confirmation procedure. And will show.

도 8의 예에서 사용자는 패스워드 입력화면으로 선택한 이미지(80)에서 A 영역을 두 번 터치하고 슬라이딩을 한 번 입력(a)하였으므로, 해당 이미지(80)에 대한 정보와 해당 이미지의 A 영역과 2회 터치, 1회 슬라이딩의 터치 패스워드가 사용자 인증 정보로 저장될 것이다.In the example of FIG. 8, since the user touches the A area twice in the image 80 selected as the password input screen and inputs the sliding once (a), the information about the image 80 and the A area of the image and 2 The touch password of one touch and one sliding will be stored as user authentication information.

도 9를 참조하면, 이미지들을 브라우징하다가 하나를 패스워드 입력화면으로 선택하면(a) 선택된 이미지를 복수의 영역으로 분할한 레이어가 이미지 위에 표시된다. 예시에서는 3개의 블록으로 분할된 패스워드 입력 영역을 확인할 수 있다. 이때 설정 완료 아이콘(예:E, Enter 아이콘)이 함께 표시될 수도 있다(b).Referring to FIG. 9, when browsing images and selecting one as a password input screen (a), a layer obtained by dividing the selected image into a plurality of areas is displayed on the image. In the example, the password input area divided into three blocks can be checked. In this case, a setting completion icon (eg, an E or an Enter icon) may be displayed together (b).

원하는 입력 영역에, 원하는 횟수만큼 터치 및/또는 슬라이딩하여 터치 패스워드를 입력한 후(b), 설정 완료 아이콘을 터치하면(c) 터치 패스워드 설정이 완료된다. 패스워드 설정 후에는 레이어 정보, 설정 완료 아이콘이 사라지고 원래의 이미지만 남게 된다(d).After inputting the touch password by touching and / or sliding the desired number of times in the desired input area (b), touching the setting complete icon (c), the touch password setting is completed. After setting the password, the layer information and the setting complete icon disappear and only the original image remains (d).

사용자가 패스워드를 입력할 때는 사진을 브라우징하다가 (d) 화면과 같이 해당 사진이 나오면, 기설정된 패스워드 입력 영역에서 터치 패스워드를 입력하게 되는데, 이때의 터치와 슬라이딩 입력이 일반적인 핸드폰 사용자의 모션과 차이가 없으며 사진 브라이징의 스와이핑 동작과 구별하기 어렵기 때문에 제3자가 볼 때는 자연스럽게 핸드폰을 사용하는 것처럼 보이게 된다.When the user enters a password, the user browses the photo and then enters the touch password in the preset password input area as shown on the screen (d). The touch and sliding inputs are different from those of general mobile phone users. It is difficult to distinguish from the swiping action of photo browsing, which makes it look natural to third parties.

도 9의 예에서, ‘하얀 원’으로 표시된 것이 터치를 1회 입력한 것이며, ‘화살표가 있는 아이콘’은 1회 슬라이딩하여 터치 패스워드를 설정한 것을 나타낸다. In the example of FIG. 9, the "white circle" indicates that the touch is input once, and the "icon with the arrow" indicates that the touch password is set by sliding once.

도 9 (b)의 예에서는 사진의 중간 영역이 패스워드 입력 영역으로 설정되었음을 알 수 있으며, 해당 사진 정보와 영역이 사용자 인증 정보로 저장된다. 또한, 이 영역 내에서 이루어진 터치 및/또는 슬라이딩이 터치 패스워드로 인증 정보에 저장된다.In the example of FIG. 9B, it can be seen that the middle region of the photo is set as the password input region, and the corresponding photo information and the region are stored as user authentication information. In addition, touches and / or slidings made within this area are stored in the authentication information as a touch password.

도 9 (e)의 예시는 영역 분할 없는 전체 화면에 상기와 동일한 방법으로 한 개의 터치와 한 개의 슬라이딩으로 패스워드를 설정한 것이다. 이때의 입력 영역 정보는 사용되지 않기 때문에 사진 정보와 터치 패스워드만 사용자 인증 정보로 저장된다. 만약 패스워드 입력 화면 이미지도 사용하지 않는다면, 이 정보 역시 사용자 인증정보에서 제외된다.In the example of FIG. 9E, the password is set on the entire screen without region division by one touch and one sliding in the same manner as described above. Since the input area information is not used at this time, only the picture information and the touch password are stored as the user authentication information. If no password input screen image is used, this information is also excluded from the user authentication information.

도 10은 본 발명의 일 실시예에 따른 사용자 인증 방법에 의해 터치 패스워드를 입력하는 방법을 설명하기 위한 순서도이다.10 is a flowchart illustrating a method of inputting a touch password by a user authentication method according to an embodiment of the present invention.

이미지 확인 단계 S100에서는, 사용자 단말에 표시되는 복수의 이미지 중에서 사용자에 의해 선택된 이미지가 패스워드 입력화면으로 설정된 이미지인지 판단한다. 패스워드 입력이 잠금 상태의 단말을 오픈하기 위한 것인 경우, 잠금화면에 복수의 이미지를 브라우징할 수 있는 사용자 인터페이스가 제공된다. 사용자는 여기서 이미지들을 돌려보다가 패스워드 입력화면이 나타나면 입력 영역에 터치 패스워드를 입력한다.In the image checking step S100, it is determined whether an image selected by the user is an image set as a password input screen among a plurality of images displayed on the user terminal. When the password input is for opening the locked terminal, a user interface for browsing a plurality of images on the lock screen is provided. The user rotates the images here and enters the touch password in the input area when the password input screen appears.

패스워드 입력 영역 판단 단계 S102에서는, 선택된 이미지가 패스워드 입력화면이고 사용자가 선택된 이미지에서 터치 패스워드를 입력하는 경우, 입력된 상기 터치 패스워드가 패스워드 입력 영역으로 설정된 영역 내에서 이루어졌는지를 판단한다. 이때, 패스워드 입력 영역이 설정되지 않은 경우(전체 이미지를 패스워드 입력 영역으로 사용하는 경우)라면, 입력화면 어느 곳이든지 터치 패스워드 입력이 다 가능하기 때문에 단계 S102를 생략하고 다음 단계로 진행한다.In the password input area determination step S102, when the selected image is a password input screen and the user inputs a touch password in the selected image, it is determined whether the input touch password is within an area set as the password input area. At this time, if the password input area is not set (when the entire image is used as the password input area), since touch password input is possible anywhere on the input screen, step S102 is omitted and the process proceeds to the next step.

터치 패스워드 확인 단계 S104에서는, 상기 터치 패스워드가 기설정된 패스워드 입력 영역에서 입력된 경우, 상기 패스워드가 패스워드 입력화면에 대해 기설정된 터치 패스워드와 동일한지 판단한다. 이때, 상기 입력된 터치 패스워드가 터치 입력인지 슬라이딩 입력인지를 판단하고, 각각의 입력 횟수, 터치와 슬라이딩의 입력 순서를 조합한 후 기 설정된 터치 패스워드와 비교·판단하게 된다.In the touch password confirmation step S104, when the touch password is input in the preset password input area, it is determined whether the password is the same as the touch password preset for the password input screen. At this time, it is determined whether the input touch password is a touch input or a sliding input, and the combination of the number of inputs, the input order of the touch and the sliding is compared, and the comparison is made with the preset touch password.

인증 처리 단계 S106에서는, 입력된 터치 패스워드가 기설정된 터치 패스워드와 동일한 경우 사용자 인증이 성공한 것으로 판단한다.In the authentication processing step S106, when the input touch password is the same as the preset touch password, it is determined that the user authentication is successful.

도 11은 본 발명의 일 실시예에 따라 단말 장치에서 터치 패스워드를 입력하는 화면을 예시한 것이다.11 illustrates a screen for inputting a touch password in a terminal device according to an embodiment of the present invention.

도 11의 예는 사용자 단말에 터치 패스워드를 입력하여 잠금 해제를 한 예로써, 잠금화면에서 사용자가 설정한 패스워드 입력화면에 대응하는 이미지를 선택하여 단말의 화면에 표시되도록 한 후, 패스워드 입력 영역에서 2회의 터치 입력과 오른쪽으로 1회의 슬라이딩을 하여 터치 패스워드를 입력하면(a), 단말의 인증 처리 모듈은 터치 및/또는 슬라이딩 입력 횟수, 순서, 입력 영역, 패스워드 입력화면 등을 사용자 인증 정보와 비교하여 인증 성공 여부를 판단한다. 인증에 성공하면 사용자 단말의 잠금이 해제되어 (b)와 같이 사용자 단말이 오픈된다.11 illustrates an example of releasing a lock by inputting a touch password into a user terminal. After selecting an image corresponding to a password input screen set by a user on a lock screen and displaying the image on the screen of the terminal, the password is entered in the password input area. When the touch password is input by two touch inputs and one sliding to the right (a), the authentication processing module of the terminal compares the number of touch and / or sliding inputs, order, input area, password input screen, etc. with user authentication information. To determine whether the authentication succeeded. If the authentication is successful, the user terminal is unlocked and the user terminal is opened as shown in (b).

도 11의 경우, 화면 전체를 패스워드 입력 영역으로 사용한 예시이며, “터치 1회 -> 슬라이딩 1회(오른쪽 방향) -> 터치 1회”의 터치 패스워드를 입력한 것으로, 이해를 돕기 위해 원과 화살표 아이콘(숫자는 입력 순서)을 표기했으나 실제 단말의 화면에는 아무것도 표시되지 않고 사진 이미지만 보여진다. 사용자는 이 이미지상에서 아무 위치에서나 터치 패스워드 입력을 하게 되는 것이다.In FIG. 11, the entire screen is used as a password input area, and a touch password of “1 touch-> 1 sliding (right direction)-> 1 touch” is inputted. Although an icon (number is input order) is displayed, nothing is displayed on the screen of the actual terminal and only a picture image is shown. The user will enter a touch password anywhere on this image.

종래의 패스워드 입력화면에는 비밀번호나 패턴 입력을 위한 버튼 등 사용자 인터페이스가 표시되거나 입력화면이 표시된다. 즉, 패스워드 입력키와 입력화면이 항상 노출되어 있고 누구에게나 동일한 모습의 화면이 제공되기 때문에 지문자국이나 손가락 위치만으로도 패스워드를 추측해 내는 등 제3자의 추측 공격이나 노출에 취약하다.In the conventional password input screen, a user interface such as a button for inputting a password or a pattern is displayed or an input screen is displayed. That is, since the password input key and the input screen are always exposed and the same screen is provided to everyone, it is vulnerable to a third party's guessing attack or exposure such as guessing a password using only fingerprint marks or finger positions.

반면 본 발명에 따른 사용자 입력 방법에서는 패스워드 설정시 이외에는 패스워드 입력을 위한 사용자 인터페이스가 표시되지 않는다. 즉, 일반적인 이미지 브라우징 화면과 동일한, 아무것도 표시되지 않은 화면에서 패스워드를 입력하게 되며 특히 사용자에 의해 입력화면 이미지와 입력 영역을 선택적으로 사용할 수는 있으나, 터치 패스워드 설정 및 입력에서 입력 위치값, 좌표 등을 사용자 인증 정보로 사용하지 않기 때문에 노출 공격을 원천 차단하게 된다.On the other hand, the user input method according to the present invention does not display a user interface for password input except when setting a password. In other words, the password is input on the screen where nothing is displayed, which is the same as the general image browsing screen. In particular, the input screen image and input area can be selectively used by the user. Because it does not use as the user authentication information, it prevents the exposure attack.

즉, 터치 입력시의 위치 좌표값은 터치와 슬라이딩을 구분하는 판단 자료로만 사용될 뿐 사용자 인증 정보로 저장되지 않는다.That is, the position coordinate value at the time of touch input is used only as a judgment data for distinguishing touch from sliding and is not stored as user authentication information.

도 12는 터치 패스워드를 이용한 사용자 인증에 실패하는 경우의 화면을 예시한 것이다.12 illustrates a screen when a user authentication using a touch password fails.

잠금화면에서 이미지를 브라우징하는 중에 패스워드 입력화면으로 설정된 이미지상에 기설정된 패스워드 입력 영역(A)이 아닌 다른 영역(B)에 터치 패스워드(120)를 입력하면 패스워드 불일치로 판단한 후 다음 이미지로 이동한다. 다음 이미지에서 임의의 위치에 슬라이딩(121)을 입력하면 그 다음 이미지로 넘어간다.While browsing the image on the lock screen, if the touch password 120 is input to an area B other than the preset password input area A on the image set as the password input screen, it is determined that the password is inconsistent, and the screen moves to the next image. . In the next image, if the sliding 121 is input at an arbitrary position, the display moves to the next image.

이와 같이 패스워드 입력화면으로 설정된 이미지에서 패스워드 입력 영역이나 터치 패스워드를 정확하게 입력하지 않는 경우, 계속하여 일반적인 이미지 브라우징이 되며, 이때 브라우징 가능한 이미지들을 모두 보고 나면 패스워드 입력 실패로 판단되어 자동으로 패스워드 잠금 상태가 된다.When the password input area or the touch password is not entered correctly in the image set as the password input screen as described above, normal image browsing continues. At this time, after viewing all the browseable images, the password lock state is automatically determined as the password input failure. do.

이 락(Lock) 상태에서는 특정 표시가 되지 않고 터치 패스워드 입력이 금지되지만, 사진 열람은 계속 할 수 있다. 때문에 단말이 락 상태가 된 것을 제3자는 알아챌 수가 없고, 여기에 어떠한 패스워드 입력을 다시 시도한다 하더라도 배치해 놓은 사진만 계속해서 열람하게 되는 것이다.In this locked state, the specific password is not displayed and the input of the touch password is prohibited, but the picture viewing can be continued. Therefore, the third party cannot recognize that the terminal has been locked, and even if the user attempts to input the password again, only the arranged pictures are continuously viewed.

패스워드 잠금 상태가 되었을 경우 락을 해제할 수 있는 락 해제 화면, 락 해제 위치 및 락 해제 방법은 패스워드 설정시 사용자에 의해 설정될 수 있다. 특정 사진의 특정 위치에서 특정 방법을 입력하는 경우 패스워드 잠금 상태가 해제되고 터치 패스워드를 다시 입력할 수 있는 상태가 되도록 설정할 수 있는 것이다.The lock release screen, the lock release position, and the lock release method that can release the lock when the password is locked may be set by the user when the password is set. When a specific method is input at a specific location of a specific picture, the password lock state is released and the touch password can be set again.

예를 들어, 특정 사진의 오른쪽 상단 부분, 또는 특정 사진의 특정 위치를 3번 연속 터치하거나 특정 위치를 길게 터치하면 패스워드 잠금 상태가 해제되도록 설정할 수 있다. 패스워드 잠금이 해제되면 사용자는 터치 패스워드 입력을 재개할 수 있다.For example, the password lock state may be set to be canceled when the upper right portion of a specific picture or a specific location of a specific picture is touched three times or a long touch of a specific location. Once the password is unlocked, the user can resume entering the touch password.

한편, 모든 이미지를 돌려 보는 한 회전이 끝나기 전에는 패스워드 입력이 가능하다. 즉, 사용자가 패스워드 입력화면에서 터치 패스워드 입력을 못하고 지나쳤을 때 다시 역순으로 이동하여 패스워드 입력화면으로 되돌아오는 경우 패스워드 입력 영역에서 터치 패스워드를 다시 입력할 수 있다.On the other hand, you can enter a password before the end of one rotation of all the images. That is, when the user fails to input the touch password on the password input screen and moves back in the reverse order to return to the password input screen, the touch password may be input again in the password input area.

상기의 패스워드 잠금 설정은 ‘1회전’이나 ‘2회전 이후’로 간편히 설정할 수도 있지만, 사용자에 의해 N개의 사진 이후, 혹은 특정사진 이후부터 잠금 설정이 작동하도록 할 수도 있다.The password lock setting may be simply set to '1 rotation' or 'after 2 rotations', but the user may enable the lock setting after N pictures or after a specific picture by the user.

도 13은 본 발명의 일 실시예에 따른 더미 이미지를 설명하기 위한 도면이다.13 is a view for explaining a dummy image according to an embodiment of the present invention.

본 발명의 일 실시예에 따르면, 하나의 패스워드 입력화면에 더하여 더미 이미지가 설정될 수 있다. 더미 이미지(Dummy Image)는 일종의 위장 이미지로서, 패스워드 입력화면으로 설정된 이미지에서 터치 패스워드를 입력한 후 무작위 위치에 무작위 터치가 요구되는 터치 위장 이미지(이하, 더미 이미지)의 수가 설정되고, 더미 이미지의 수에 대한 정보 역시 사용자 인증 정보에 포함될 수 있다.According to an embodiment of the present invention, a dummy image may be set in addition to one password input screen. Dummy image is a kind of camouflage image, the number of touch camouflage images (hereinafter referred to as dummy images) requiring a random touch at a random position after inputting a touch password from the image set as the password input screen is set, Information about the number may also be included in the user authentication information.

패스워드 설정시 몇 개의 이미지를 더미 이미지로 할 것인지 사용자에 의해 선택되거나, N개의 이미지가 더미 이미지로 자동 설정될 수 있다.When setting a password, the user may select how many images to make a dummy image, or N images may be automatically set as dummy images.

또한, 더미 이미지는 패스워드 입력화면에서 인증 성공 이후에 사용되지만, 입력화면 이전에도 입력화면을 위장하기 위해 사용될 수 있으며, 더미 이미지의 개수와 종류가 사용시마다 동적으로 변경되도록 하여 제3자가 더욱 알아차릴 수 없도록 할 수 있다.In addition, although the dummy image is used after authentication is successful in the password input screen, it can be used to disguise the input screen even before the input screen, and the number and type of the dummy images are changed dynamically each time they are used by a third party. Can not be.

복수의 더미 이미지가 패스워드 입력화면에 설정되어 있는 경우, 사용자는 이미지 브라우징을 하여 패스워드 입력화면을 찾고, 입력화면의 패스워드 입력 영역에서 터치 및/또는 슬라이딩하여 터치 패스워드를 입력한다. 이후 인증의 성공·실패와 관계없이 N개의 더미 이미지가 표출되게 되는데, 이때 무작위 위치에 무작위 터치나 슬라이딩을 한다. 이후 사용자 단말은 사용자에 의해 설정된 패스워드 입력화면에서 정확한 패스워드 입력 영역에 정확한 터치 패스워드가 입력되었다고 판단되는 경우, 사용자 인증이 성공하였을 경우의 후속 처리를 한다. 후속 처리는 사용자 단말의 잠금을 해제한다거나 사용자 인증의 목적인 특정 서비스의 이용을 허용하는 것 등을 의미한다.When a plurality of dummy images are set on the password input screen, the user browses the image to find the password input screen, and inputs the touch password by touching and / or sliding in the password input area of the input screen. Thereafter, N dummy images are displayed regardless of the success or failure of authentication. At this time, a random touch or sliding is performed at a random position. Thereafter, when it is determined that the correct touch password is input in the correct password input area on the password input screen set by the user, the user terminal performs subsequent processing when the user authentication succeeds. Subsequent processing means unlocking the user terminal or allowing the use of a particular service for the purpose of user authentication.

도 13을 참조하면, 패스워드 입력화면에서 터치 패스워드를 입력한 후 사용자 인증이 성공하더라도 바로 오픈 상태가 되는 것이 아니라 이후에 보여지는 N개의 더미 이미지상에서 임의의 위치를 슬라이딩하면 사용자 단말을 사용할 수 있는 오픈 상태가 된다. 즉, 터치 패스워드 입력이 성공한 후 관련이 없는 이미지를 표출하고, 여기에 터치를 한번 더 하도록 유도함으로써 제3자는 입력 장면을 지켜보더라도 어느 이미지에, 어느 위치에, 어떠한 터치 패스워드가 사용되었는지를 알 수가 없다.Referring to FIG. 13, even if user authentication is successful after inputting a touch password on a password input screen, the user terminal can be used by sliding an arbitrary position on the N dummy images shown later, rather than being opened immediately. It becomes a state. That is, after a successful touch password input, an unrelated image is displayed and a touch is induced again so that a third party can see which image, which location, and which touch password has been used even while watching the input scene. none.

이렇게 위장 이미지와 위장 터치를 사용함으로써 어떤 이미지가 패스워드 입력화면인지, 어디가 패스워드 입력 영역인지 제3자는 더욱 알아차리기 어렵게 된다.By using the camouflage image and the camouflage touch, it is harder for a third party to know which image is the password input screen and where the password input area is.

더미 이미지는 사용자의 선택에 따라 사용 또는 미사용되도록 설정될 수 있으며, 이때의 더미 이미지는 제품 이미지나 캐릭터, 연예인 사진 등을 이용한 홍보나 광고로도 사용할 수가 있기 때문에 락 장치로써 단말기의 첫화면을 장악하는 홍보매체로의 역할을 할 수도 있게 된다.The dummy image may be set to be used or unused according to a user's selection, and the dummy image may be used as a promotion or advertisement using a product image, a character, a celebrity photograph, etc., thereby securing the first screen of the terminal as a lock device. It can also serve as a promotional media.

도 13 (d)는 터치 패스워드가 스마트워치 등 웨어러블 제품에 적용된 예시로, 스마트워치 같은 착용 형태의 단말은 외형 자체가 작고 가볍게 만들어지는 특성 때문에 입력화면 역시 작아 잠금장치를 적용하기가 어려워진다. 이 작은 화면상에 10개나 되는 숫자를 띄울 수도 없을뿐더러 비밀번호를 일일이 입력하기도, 지문 인식장치를 부착하기도 어렵다. 현재 사용되는 회전식 바젤을 이용한다 해도 번거로울 수밖에 없고, 작은 화면 내에 또다른 터치 위치를 정확히 입력하는 것 자체가 불가능하다. 이처럼 디스플레이가 작아도 “톡톡톡” 치는 터치 입력이나 슬라이딩 입력은 가능하기 때문에 제스처의 조합으로 이루어진 터치 패스워드의 사용이 가능해지며, 외부 노출이 많이 되는 스마트워치의 경우, 사진 이미지 외에 캐릭터 등 장식적인 요소를 보안장치로 함께 활용할 수도 있으며 디지털 이미지로 표출되는 시계 자판 이미지를 그대로 사용할 수도 있다.13 (d) is an example in which a touch password is applied to a wearable product such as a smart watch, and a wearable terminal such as a smart watch is difficult to apply a lock device because the appearance itself is small and light. You can't have as many as 10 digits on this tiny screen, nor can you type your passwords or attach a fingerprint reader. Even if you use the rotating basel currently used, it is inconvenient, and it is impossible to input another touch position accurately in a small screen. Like this, even though the display is small, “knockknock” touch input or sliding input is possible, so it is possible to use the touch password made up of a combination of gestures. It can be used together as a device, or it can use the image of the clock keyboard displayed as a digital image.

한편, 도 13의 예에서는 패스워드 입력화면에 분할 영역이 표시되어 있지만 이는 이해를 돕기 위한 것으로, 실제 패스워드 입력 과정에서는 분할 상태가 보이지 않고 이미지만 보여지므로 제3자는 해당 이미지가 패스워드 입력화면인지 아닌지 여부를 알 수 없다.On the other hand, in the example of FIG. 13, the partition area is displayed on the password input screen, but this is for the sake of understanding. In the actual password input process, only the image is shown without the division state. Not known.

즉, 패스워드 설정이 완료되면, 잠금화면에 이미지들만 표시될 뿐 패스워드 설정에 관련된 버튼이나 어떠한 표시, 인터페이스 등이 전혀 표시되지 않기 때문에, 사진 앨범과 전혀 차이가 없으며 제3자는 사진 열람만 가능하다.That is, when the password setting is completed, only the images are displayed on the lock screen, and no buttons or any display or interface related to the password setting are displayed at all.

또한, 제3자가 패스워드 입력을 시도하더라도 이미지들을 한 번씩 돌려보고 제자리로 돌아올 때까지 사용자가 설정한 패스워드 입력화면을 찾아 정확한 입력 영역에 정확한 터치 패스워드를 입력하지 못하면, 패스워드 입력이 금지되는 패스워드 잠금(Lock) 설정이 된다. 패스워드 잠금 설정이 된 상태에서 “에러”나 “입력 실패” 등 어떠한 경고나 고지 표시가 없고, 화면상에서 사진 열람만 가능하게 되므로 패스워드 추측공격 시도까지도 완벽하게 차단하게 된다.In addition, even if a third party attempts to enter a password, if the user turns the image once and finds the password input screen set by the user until the user returns to the original position, if the correct touch password is not entered in the correct input area, the password lock is prohibited. Lock) setting. With the password lock set, there are no warnings or notices such as “error” or “input failure”, and only the picture can be viewed on the screen, preventing password guessing attempts perfectly.

본 발명의 일 실시예에 따른 방법은 다양한 컴퓨터 수단을 통하여 수행될 수 있는 프로그램 명령 형태로 구현되어 컴퓨터 판독 가능 매체에 기록될 수 있다. 상기 컴퓨터 판독 가능 매체는 프로그램 명령, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 상기 매체에 기록되는 프로그램 명령은 본 발명을 위하여 특별히 설계되고 구성된 것들이거나 컴퓨터 소프트웨어 당업자에게 공지되어 사용 가능한 것일 수도 있다. 컴퓨터 판독 가능 기록 매체의 예에는 하드 디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체(magnetic media), CD-ROM, DVD와 같은 광기록 매체(optical media), 플롭티컬 디스크(floptical disk)와 같은 자기-광 매체(magneto-optical media) 및 롬(ROM), 램(RAM), 플래시 메모리 등과 같은 프로그램 명령을 저장하고 수행하도록 특별히 구성된 하드웨어 장치가 포함된다. 프로그램 명령의 예에는 컴파일러에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용해서 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드를 포함한다.Method according to an embodiment of the present invention can be implemented in the form of program instructions that can be executed by various computer means may be recorded on a computer readable medium. The computer readable medium may include program instructions, data files, data structures, etc. alone or in combination. Program instructions recorded on the media may be those specially designed and constructed for the purposes of the present invention, or they may be of the kind well-known and available to those having skill in the computer software arts. Examples of computer readable recording media include magnetic media such as hard disks, floppy disks and magnetic tape, optical media such as CD-ROMs, DVDs, and magnetic disks such as floppy disks. Hardware devices specially configured to store and execute optical instructions and program instructions such as ROM, RAM, flash memory and the like. Examples of program instructions include not only machine code generated by a compiler, but also high-level language code that can be executed by a computer using an interpreter or the like.

이상에서 본 발명의 실시예에 대하여 상세하게 설명하였지만 본 발명의 권리범위는 이에 한정되는 것은 아니고 다음의 청구범위에서 정의하고 있는 본 발명의 기본 개념을 이용한 당업자의 여러 변형 및 개량 형태 또한 본 발명의 권리범위에 속한다.Although the embodiments of the present invention have been described in detail above, the scope of the present invention is not limited thereto, and various modifications and improvements of those skilled in the art using the basic concepts of the present invention defined in the following claims are also provided. It belongs to the scope of rights.

Claims

An image setting step of setting an image selected by the user as a password input screen;
An input area setting step of setting an area selected by the user as a password input area on an image set as a password input screen;
A touch password setting step of setting a type, a number of times, and a touch order of touches and / or slidings inputted from the user in the password input area;
And an authentication information generating step of generating authentication information for the user by combining the password input screen, the password input area and the input touch password.

The method of claim 1,
The input area setting step,
And setting an area selected by the user as a password input area among areas in which the image set as the password input screen is divided into a predetermined number. 2.

The method of claim 2,
The setting of the password input area may include:
And providing N password input areas divided into quadrangular, polygonal, circular, elliptical and irregular shapes on the image set as the input screen.

The method of claim 1,
The touch password setting step,
Recognizing the touch or sliding input by the user and distinguishing and determining the touch and the sliding by the size of the vector obtained by the coordinate values of the touch start and end points, gesture user authentication method using touch and sliding .

The method of claim 4, wherein
In the step of discriminating and determining the touch and the sliding by the size of the vector,
Obtaining a magnitude vector of a line connecting a start point and an end point of the touch or sliding input,
If the size of the vector is greater than or equal to the first threshold value, the gesture user authentication method using the touch and sliding, characterized in that it is determined as a sliding input.

The method of claim 1,
The touch password setting step,
And combining the input order of the touch and / or sliding input by the user and the number of times of each input.

The method of claim 1,
The authentication information generation step,
And configuring authentication information using a combination of one or more sliding inputs and one or more touch inputs, or one or more touch inputs and / or a combination of one or more sliding inputs. Gesture user authentication using sliding.

The method of claim 1,
The image setting step,
And gesture-using and sliding the image setting by the user.

The method of claim 1,
Setting a number of camouflage images (dummy images) requiring a random touch after inputting a touch password in the image set as the password input screen, and including information on the dummy image in the user authentication information; Gesture user authentication method using a touch and sliding.

A computer-readable recording medium for executing a gesture user authentication method using touch and sliding in a user terminal as claimed in claim 1.

An image checking step of determining whether an image selected by the user among the plurality of images displayed on the user terminal is an image set as a password input screen;
A password input area checking step of determining whether the input touch password is input in a password input area preset for the password input screen when the selected image is a password input screen and the user inputs a touch password on the selected image; ;
When the touch password is input in the preset password input area, a touch password confirmation step of determining whether the combination of the type, the number of times, and the order of the input touch and / or sliding is the same as the touch password preset for the password input screen. Wow;
And an authentication processing step of determining that the user authentication is successful when the touch password is the same as the preset touch password.

The method of claim 11,
If the touch password input is not completed in the password input area of the password input screen set in the user authentication information while all of the plurality of images displayed on the user terminal are selected, the password lock screen for which the input of the touch password is prohibited and only for image browsing is prohibited. Gesture user authentication method using the touch and sliding further comprising the step of providing.

The method of claim 11,
If an image corresponding to the preset password unlocking screen is selected and a password unlocking method is input at a preset input position on the image, unlocking the password so that the password input is resumed. Gesture User Authentication Method.

A computer-readable recording medium for executing a gesture user authentication method using a gesture user authentication method using touch and sliding in the user terminal of claim 11.