WO2015122614A1 - Image recognition-based login service providing method - Google Patents

Image recognition-based login service providing method Download PDF

Info

Publication number
WO2015122614A1
WO2015122614A1 PCT/KR2014/012137 KR2014012137W WO2015122614A1 WO 2015122614 A1 WO2015122614 A1 WO 2015122614A1 KR 2014012137 W KR2014012137 W KR 2014012137W WO 2015122614 A1 WO2015122614 A1 WO 2015122614A1
Authority
WO
WIPO (PCT)
Prior art keywords
password
image recognition
service providing
site
login service
Prior art date
Application number
PCT/KR2014/012137
Other languages
French (fr)
Korean (ko)
Inventor
송명빈
이경아
Original Assignee
송명빈
이경아
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 송명빈, 이경아 filed Critical 송명빈
Publication of WO2015122614A1 publication Critical patent/WO2015122614A1/en

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/30Authentication, i.e. establishing the identity or authorisation of security principals
    • G06F21/31User authentication
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2221/00Indexing scheme relating to security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F2221/21Indexing scheme relating to G06F21/00 and subgroups addressing additional information or applications relating to security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F2221/2115Third party

Definitions

  • the present invention relates to a method for providing an image recognition-based login service, and more particularly, to a method for automatically logging in at a site using an ID and password received from a user terminal.
  • the file management method is performed by a method of managing access to the database.
  • Korean Patent Registration No. 10-1158336 (published on June 22, 2012), which is a prior art, describes that operations of copying, moving, inquiring, and deleting personal information are performed only in accordance with the authority granted to each virtual space directory. Possible methods are disclosed.
  • the user's ID and password are automatically extracted by extracting and inputting coordinate values for inputting an ID and password of a site.
  • An image recognition-based login service providing method capable of logging in may be provided.
  • the technical problem to be achieved by the present embodiment is not limited to the technical problem as described above, and other technical problems may exist.
  • an embodiment of the present invention from the user terminal receives at least one site address provided by the at least one site providing server, the ID and password for logging into the site Mapping and storing an address, an ID, and a password; calling a site page having an address using the address of at least one received site; coordinates of the ID and password using image recognition from the called site page Extracting a value, and inputting an ID and a password at a location corresponding to the extracted ID coordinate value and the password coordinate value, respectively, to log in.
  • FIG. 1 is a block diagram illustrating an image recognition-based login service providing system according to an embodiment of the present invention.
  • FIG. 2 is a diagram illustrating an image recognition based login service providing server illustrated in FIG. 1.
  • FIG. 3 is a diagram illustrating an embodiment in which the file aging service illustrated in FIG. 1 is driven.
  • FIG. 4 is a diagram illustrating a process of transmitting and receiving data between components included in the image recognition-based login service providing system of FIG. 1 according to an exemplary embodiment of the present invention.
  • FIG. 5 is a flowchart illustrating an image recognition-based login service providing method according to an embodiment of the present invention.
  • the image recognition based login service providing system 1 may include a user terminal 100, an image recognition based login service providing apparatus 300, and at least one site server 400.
  • the image recognition-based login service providing system 1 of FIG. 1 is only an embodiment of the present invention, the present invention is not limitedly interpreted through FIG. 1.
  • each component of FIG. 1 is generally connected through a network 200.
  • the user terminal 100 and the image recognition-based login service providing server 300 may be connected through the network 200.
  • the image recognition-based login service providing server 300 may be connected to at least one site server 400 through the network 200.
  • the user terminal 100 may be connected to at least one site server 400 via the image recognition-based login service providing server 300.
  • the network 200 refers to a connection structure capable of exchanging information between each node, such as terminals and servers, an example of such a network 200, the Internet (LAN), Local Area Network (LAN) ), Wireless local area network (WLAN), wide area network (WAN), personal area network (PAN), 3G, 4G, LTE, Wi-Fi, and the like, but are not limited thereto.
  • the user terminal 100 disclosed in FIG. 1, the image recognition-based login service providing server 300, and the at least one site server 400 are not limited to those illustrated in FIG. 1.
  • the user terminal 100 may be a terminal that uploads or transmits content to a website, an application, a messenger, a cloud, a PC, and a mail.
  • the user terminal 100 may be an image recognition-based login service providing server 300, and may be a terminal that transmits an address (URL) of a site to which the user subscribes, an ID and a password for logging in to the site.
  • URL address
  • the user terminal 100 can log in through the image recognition-based login service providing server 300 even if the user terminal 100 does not access and input the ID and password to the site to which the user directly logs in. It may be a terminal.
  • the user terminal 100 may be a terminal that checks content uploaded to a site to which the user subscribes in a site provided by the image recognition-based login service providing server 300. Then, the user terminal 100, via the image recognition-based login service providing server 300, to check the content destruction time of the content uploaded to the site to which he subscribes, delete the uploaded content, or the content destruction time It may be a terminal for transmitting a control signal to increase or decrease the content, or to recover the content again.
  • the user terminal 100 may be implemented as a terminal that can access a server or a terminal in a remote place through the network 200.
  • the computer may include, for example, a laptop, a desktop, a laptop, and the like, on which a camera is mounted.
  • the user terminal 100 may be implemented as a terminal that can access a server or a terminal in a remote place through the network 200.
  • the user terminal 100 is, for example, a wireless communication device that ensures portability and mobility, and includes a personal communication system (PCS), a global system for mobile communications (GSM), a personal digital cellular (PDC), and a personal handyphone system (PHS).
  • PCS personal communication system
  • GSM global system for mobile communications
  • PDC personal digital cellular
  • PDA Personal Handyphone system
  • IMT International Mobile Telecommunication
  • CDMA Code Division Multiple Access
  • W-CDMA W-Code Division Multiple Access
  • WBRO Wireless Broadband Internet
  • smartphone All types of handheld based wireless communication devices such as smartphones, smartpads, tablet PCs, and the like may be included.
  • the image recognition-based login service providing server 300 may be a server that receives an address of at least one site, an ID and a password for logging in to the corresponding address from the user terminal 100. Through this, the image recognition-based login service providing server 300 may be a server that may access an address of at least one site and automatically log in to at least one site page using an ID and a password. In addition, the image-based login service providing server 300 receives a content upload event from the user terminal 100 via the at least one site server 400, the user of the content extinction time included in the received content upload event The server may be mapped and stored with the terminal 100.
  • the image recognition-based login service providing server 300 receives a content upload event from the user terminal 100 via at least one site server 400, and the content extinction time included in the received content upload event. It may be a server that maps and stores with the user terminal 100. Accordingly, the image recognition-based login service providing server 300 may include a web site, an application, a messenger, a cloud, a PC, and a mail server in which the uploaded content and the uploaded content are located in the user terminal 100. Can be mapped and stored. Then, the image recognition-based login service providing server 300 may transmit a content extinction scheduled message to the user terminal 100 when the content expiration time approaches.
  • the image recognition-based login service providing server 300 may enable a user of the user terminal 100 to check whether one content is stored in which site or in which terminal.
  • the image recognition-based login service providing server 300 allows the user of the user terminal 100 to set the lifespan of the content, and confirms whether or not to delete the content having reached the end of the lifespan of the server of the web site. You can help reduce junk data and protect your work.
  • the image recognition-based login service providing server 300 uses the ID and password of the user terminal 100 based on image recognition to access at least one site or at least one site providing server 400. Provide a method.
  • the image recognition-based login service providing server 300 may be implemented as a computer that can access a remote server or terminal through the network 200.
  • the computer may include, for example, a laptop, a desktop, a laptop, and the like, on which a camera is mounted.
  • the at least one site server 400 is at least one of a messenger service providing server, a social network service providing server, an internet service providing server, a text message service providing server, a cloud service providing server, and a mail service providing server. It may be.
  • the at least one site server 400 may be a server to which the user terminal 100 may access and upload or store content.
  • the at least one site server 400 may transmit a de-aging signal or content destruction signal to the image recognition-based login service providing server 300. Accordingly, the at least one site server 400 prevents the content from being destroyed when the de-aging signal is transmitted, and deletes the content from the at least one site server 400 when the content destruction signal is received. do.
  • the at least one site server 400 may be a server connected by the ID and password of the user terminal 100 from the image recognition-based login service providing server 300.
  • the at least one site server 400 may be implemented as a terminal that can access a server or a terminal in a remote location through the network 200.
  • the at least one site server 400 may be implemented as a computer that can access a server or a terminal at a remote location through the network 200.
  • the at least one site server 400 may be implemented as a terminal capable of accessing a server or a terminal at a remote location through the network 200.
  • FIG. 2 is a diagram illustrating an image recognition-based login service providing server illustrated in FIG. 1.
  • FIG. 3 is a diagram illustrating an embodiment in which the file aging service illustrated in FIG. 1 is driven.
  • the image recognition-based login service providing server 300 may include a storage 310, a caller 330, an extractor 350, an implementation 370, and a template storage 390. It may include.
  • An image recognition-based login service providing server 300 or another server (not shown) operating in conjunction with the image recognition-based login service providing server 300 according to an embodiment of the present invention is a file aging service application, program, or web page. If the user terminal 100 or at least one site server 400 is transmitted to the user terminal 100 or at least one site server 400, the user terminal 100 or at least one site server 400 may install or open an application, a program, a web page, or the like for a corresponding service. Can be. In addition, the file aging service program may be driven in the user terminal 100 or at least one site server 400 using a script executed in a web browser.
  • the web browser is a program that enables the use of the World Wide Web (WWW) service, and refers to a program that receives and displays hypertext described in HTML (hyper text mark-up language), for example, Netscape. , Explorer, chrome and the like.
  • an application means an application on a terminal, and includes, for example, an app running on a mobile terminal (smartphone). The app can be downloaded and installed from the mobile application market, a virtual marketplace for freely buying and selling mobile content.
  • the network 200 connection means that the user terminal 100, the image recognition-based login service providing server 300, and the at least one site server 400 are connected to each other so as to communicate with each other.
  • Generating means that the image recognition-based login service providing server 300 creates a communication object at a communication contact point for communication with a terminal connected to the network 200.
  • the image recognition-based login service providing server 300 may exchange data with each other through a communication object.
  • the storage unit 310 receives from the user terminal 100 at least one site address provided by the at least one site providing server 400, an ID and password for logging in to the site, and stores the address, ID and password. Can be mapped and stored. For example, assume that a user of the user terminal 100 has an ID B and a password C at a site A having an address (URL) A, and an ID E and a password F at a D site having an address D. . In this case, the storage unit 310 may store information about the user price as shown in Table 1 below.
  • the caller 330 may call a site page having an address using the received address of at least one site. For example, when www.xxxx.co.kr is an address of a site, a signal for accessing www.xxxx.co.kr may be output.
  • the extraction unit 350 may extract the coordinate values of the ID and password from the called site page by using image recognition.
  • the coordinate value of the location where the ID and password are input may be the coordinate value of the location where at least one text guiding input of the ID and password, extracted through image recognition, is located.
  • the coordinate value of the location for inputting the ID and password may be the coordinate value of the layout for inputting the image and the password, which are extracted through image recognition among at least one layout of the called site page.
  • the extractor 350 may extract coordinate values of the ID and password from the called site page by using image recognition, which converts an image of the called site page into at least one text. Can begin with. That is, referring to FIG. 3A, the main page of the portal site DAUM is shown. Using image recognition, texts such as DAUM, Kang Ho-dong commentary, Sohee withdrawal, Lee Seung Gi airport fashion, and women curling Haniljeon can be extracted. Here, the extractor 350 may compare the at least one converted text with previously stored text.
  • the pre-stored text includes the login state maintenance (A), IP security (B), ID OR email (C), password (D), Among the texts where the box for inputting ID and password can be located, such as registration (E), ID password search (F), and phone number login (G), text that indicates a space for inputting ID and password, namely ID, It can be text such as a password.
  • the extractor 350 may extract a coordinate value of a position of at least one text that matches the prestored text.
  • the previously stored text is an ID and a password
  • the converted at least one text is an ID OR email (C) or a password (D)
  • the value of the coordinates of the ID OR email (C) and the password (D) is We can extract (X, Y) and me (X ', Y').
  • the previously stored text may be at least one text for guiding input of an ID and a password.
  • the extractor 350 may extract the coordinate values of the ID and the password from the called site page by using image recognition, which may include at least one site page in the template storage unit 390. It may begin by overlaying at least one template by dividing into one layout. That is, referring to FIG. 3B, a main page of NAVER, which is a portal site, is illustrated. By using image recognition, the main page of NAVER may be partitioned into at least one layout, and accordingly, the main page of NAVER is at least one. Can be divided into templates T1 to T9. That is, in addition to NAVER, many portal sites have a constant layout, and at least one template divided into the layout always has a constant size and position.
  • the template storage unit 390 extracts a frame which is at least one template capable of recognizing an image by using the fact that the position or coordinate of at least one template is not changed, A method of extracting the coordinates of the template to the connected site (overlay) and extracting the coordinates of the desired template, that is, the template into which the ID and password are input is used. Accordingly, the template storage unit 390 may store the overlaid at least one template as a reference template for at least one site page.
  • the template storage unit 390 may map and store the coordinates of the input reference template to which the ID and password of the at least one template are input, and the address (URL) of the site page on which the at least one template is overlaid.
  • the template storage unit 390 may include coordinate values T51 (x1, y1) and T52 (x2) of the input reference template T5, which is a template in which an ID and a password are input among at least one template T1 to T9.
  • T56 (x6, y6)) can be stored.
  • the template storage unit 390 may store, for example, coordinate values for inputting an ID and a password as shown in Table 2 below.
  • the extractor 350 overlays the reference template on the called site page and stores the ID. And an input criterion template having a coordinate value at which a password is input, and an overlaid area of the called site page.
  • the extracted unit 350 may extract the coordinate values of the input reference template as the coordinate values of the ID and password when the identified overlaid area matches the input reference template.
  • the extractor 350 may extract coordinate values of the ID and password from the called site page by using image recognition, which is to download the program source of the called site page on a text basis. It can start from That is, referring to FIG. 3C, the main page of the portal site CYWORLD is illustrated.
  • the extractor 350 may check whether there is at least one text A or B guiding input of an ID and a password among the downloaded program sources.
  • the extractor 350 may check the location of the at least one text through a program source. Then, the extraction unit 350 may extract the position of the at least one text as the coordinate values (A, B) of the ID and password as a result of the verification.
  • the extractor 350 may extract coordinate values of the ID and password from the called site page by using image recognition, which is to capture a screen of the called site page. It can start from That is, referring to FIG. 3D, a main page of the portal site CYWORLD is illustrated. In order to obtain object information of the main page, a labeling operation may be performed. That is, the extraction unit 350 may perform labeling to obtain object information of the captured screen, and group objects G1 to G6 by the information unit through the implemented labeling. Then, the extractor 350 may extract a contour including at least one point of the grouped objects and check whether the extracted contour corresponds to the contour of the location where the ID and password are input. .
  • the extraction unit 350 if the contour of the position for inputting the ID and password and the extracted contour, the coordinates G41 (x, y), G42 (x1, y1) of the contour for inputting the ID and password )), You can extract the coordinates of the ID and password.
  • the contour of the location for inputting the ID and password may be a previously stored contour according to the location for inputting the ID and password for at least one site page.
  • the implementation unit 370 may log in by inputting an ID and a password at positions corresponding to the extracted ID coordinate value and the password coordinate value, respectively.
  • the implementation unit 370 transmits a click or touch signal to a location corresponding to the extracted ID coordinate value and the password coordinate value, respectively, and activates an ID input box or password input box activated in response to the transmitted click or touch signal.
  • a control signal for inputting an ID and a password mapped to the called site page, respectively, and transmitting a signal for clicking or touching the login button after the input of the ID and password is completed. Can be.
  • the at least one site providing server 400 may include a messenger service providing server, a social network service providing server, an internet service providing server, a text message service providing server, a cloud service providing server, and a mail service providing server.
  • the coordinate values of the ID and password may be coordinate values of an ID box and a password box for inputting the ID and password.
  • the extracted coordinate values may be adjusted to correspond to the screen size, the screen ratio, and the screen magnification of the fixed terminal or the mobile terminal.
  • FIG. 4 is a diagram illustrating a process of transmitting and receiving data between components included in the image recognition-based login service providing system of FIG. 1 according to an exemplary embodiment of the present invention.
  • FIG. 4 an example of a process of transmitting and receiving a signal according to an embodiment of the present application will be described with reference to FIG. 4, but the present disclosure is not limited to such an embodiment, and according to various embodiments described above with reference to FIG. 4. It is apparent to those skilled in the art that the process of transmitting and receiving illustrated data may be changed.
  • the user terminal 100 may transmit an address, an ID, and a password of at least one site to the image recognition-based login service providing server 300 (S4100).
  • the image recognition-based login service providing server 300 may map and store at least one site address, ID and password (S4200).
  • the image recognition-based login service providing server 300 may connect to the site using the site address to the at least one site providing server 400 (S4300).
  • the image recognition-based login service providing server 300 may call the site page. There is (S4500).
  • the image recognition-based login service providing server 300 extracts the coordinate values of the ID and password by using the image recognition (S4600), and places the ID and password in a position corresponding to the coordinate values of the extracted ID and password. Enter (S4700).
  • the image recognition-based login service providing server 300 attempts to log in to at least one site provided by the at least one site server 400 (S4800), and in the at least one site providing server 400, If the login is successful (S4900), and transmits the login success signal to the image recognition-based login service providing server 300 (S4930), if the login fails (S4900), the login failure to the image recognition-based login service providing server 300 The signal is transmitted (S4910).
  • the image recognition-based login service providing server 300 loops to return to the step (S4600) of extracting the coordinate values of the ID and password by using image recognition when the login fails, and if the login is successful, the login This event can be outputted (S4950).
  • steps S4100 to S4950 are merely an example, and is not limited thereto. That is, the order between the above-described steps (S4100 to S4950) may be interchanged, and some of the steps may be executed or deleted at the same time.
  • the image recognition-based login service providing server receives an address of at least one site provided by the at least one site providing server, an ID and password for logging into the site, and receives the address and the ID from the user terminal. And maps and stores the password (S5100).
  • the image recognition-based login service providing server calls a site page having an address using the received address of at least one site (S5200).
  • the image recognition-based login service providing server extracts the coordinate values of the ID and password from the called site page by using the image recognition (S5300), the ID and the position at the position corresponding to the extracted ID coordinate value and the password coordinate value. Each password is entered to log in (S5400).
  • the image recognition-based login service providing method may be implemented in the form of a recording medium including instructions executable by a computer, such as an application or a program module executed by a computer.
  • Computer readable media can be any available media that can be accessed by a computer and includes both volatile and nonvolatile media, removable and non-removable media.
  • Computer readable media may include both computer storage media and communication media.
  • Computer storage media includes both volatile and nonvolatile, removable and non-removable media implemented in any method or technology for storage of information such as computer readable instructions, data structures, program modules or other data.
  • Communication media typically includes computer readable instructions, data structures, program modules, or other data in a modulated data signal such as a carrier wave, or other transmission mechanism, and includes any information delivery media.
  • the image recognition-based login service providing method may be executed by an application basically installed in a terminal (which may include a program included in a platform or an operating system, which is basically installed in the terminal).
  • the application may be executed by an application (ie, a program) installed directly on the master terminal through an application providing server such as an application store server, an application, or a web server related to the corresponding service.
  • an application providing server such as an application store server, an application, or a web server related to the corresponding service.
  • the image recognition-based login service providing method is implemented as an application (that is, a program) that is basically installed in a terminal or directly installed by a user, and can be read by a computer such as a terminal. Can be recorded on a recording medium.

Abstract

An image recognition-based login service providing method is disclosed. The method comprises the steps of: receiving, from a user terminal, at least one site address provided from at least one site providing server, and an ID and a password for log-in to the site, and mapping and storing the address, the ID and the password; calling a site page having the address using the received at least one site address; extracting coordinates of the ID and the password from the called site page using image recognition; and logging in by respectively inputting the ID and password in locations corresponding to the extracted ID coordinate and password coordinate.

Description

이미지 인식 기반 로그인 서비스 제공 방법How to provide image recognition based login service
본 발명은 이미지 인식 기반 로그인 서비스 제공 방법에 관한 것으로, 사용자 단말로부터 수신한 아이디 및 패스워드를 이용하여 사이트에서 자동으로 로그인을 수행하는 방법에 관한 것이다.The present invention relates to a method for providing an image recognition-based login service, and more particularly, to a method for automatically logging in at a site using an ID and password received from a user terminal.
최근 개인정보유출의 피해가 극심해짐에 따라 다양한 보안 프로그램을 사용하고 있으며, 다양한 보안 프로그램이 개발되고 있는 추세이다. 또한, 개인정보나 저작권이 걸린 저작물을 공유할 경우, 정보 유출의 위험이 증가하므로 보안 프로그램의 중요도는 지속적으로 커지고 있다.Recently, as the damage of personal information leakage becomes severe, various security programs are used, and various security programs are being developed. In addition, when sharing personal information or copyrighted works, the risk of information leakage increases, so the importance of security programs continues to grow.
이때, 파일을 관리하는 방법은 데이터베이스의 접근을 관리하는 방법으로 이루어지고 있다. 파일을 관리하는 방법과 관련하여, 선행기술인 한국등록특허 제10-1158336호(2012.06.22 공고)에는, 개인정보의 복사, 이동, 조회 및 삭제의 조작이 가상공간 디렉터리별로 부여된 권한에 따라서만 가능한 방법이 개시되어 있다.At this time, the file management method is performed by a method of managing access to the database. Regarding a method of managing a file, Korean Patent Registration No. 10-1158336 (published on June 22, 2012), which is a prior art, describes that operations of copying, moving, inquiring, and deleting personal information are performed only in accordance with the authority granted to each virtual space directory. Possible methods are disclosed.
다만, 파일을 관리하는 서비스를 제공함에 있어서, 파일 자체를 삭제하지 않는 한, 데이터베이스가 해킹당하는 경우 해당 파일은 유출될 수 있으며, 저작권이 있는 파일을 공유할 때, 복사 및 저장이 쉬운 디지털 환경에서는 해당 파일이 저작권이 없는 사용자에 의해 재배포될 수 있는 가능성을 배제할 수 없다. 이때, 파일 자체를 삭제하기 위해서는 사용자의 아이디 및 패스워드로 파일이 업로드된 사이트에 접속해야 하는데, 이는 사용자가 직접 입력하지 않는 한 자동으로 이루어지지 않는다.However, in providing a file management service, unless the file itself is deleted, the file may be leaked if the database is hacked, and in a digital environment where copying and storing the copyrighted file are easy, The possibility that the file may be redistributed by unauthorized users cannot be excluded. At this time, in order to delete the file itself, it is necessary to access the site where the file is uploaded with the user's ID and password, which is not automatically performed unless the user directly inputs the file.
본 발명의 일 실시예는, 사용자가 사용자 단말을 이용하여 아이디 및 패스워드를 입력하여 로그인을 하지 않더라도, 사용자의 아이디 및 패스워드를 사이트의 아이디 및 패스워드를 입력하는 좌표값을 추출하여 입력함으로써, 자동으로 로그인을 수행할 수 있는 이미지 인식 기반 로그인 서비스 제공 방법을 제공할 수 있다. 다만, 본 실시예가 이루고자 하는 기술적 과제는 상기된 바와 같은 기술적 과제로 한정되지 않으며, 또 다른 기술적 과제들이 존재할 수 있다.In one embodiment of the present invention, even if a user does not log in by inputting an ID and password using a user terminal, the user's ID and password are automatically extracted by extracting and inputting coordinate values for inputting an ID and password of a site. An image recognition-based login service providing method capable of logging in may be provided. However, the technical problem to be achieved by the present embodiment is not limited to the technical problem as described above, and other technical problems may exist.
상술한 기술적 과제를 달성하기 위한 기술적 수단으로서, 본 발명의 일 실시예는, 사용자 단말로부터 적어도 하나의 사이트 제공 서버에서 제공하는 적어도 하나의 사이트의 주소와, 사이트에 로그인하기 위한 아이디 및 패스워드를 수신하고, 주소와 아이디 및 패스워드를 매핑하여 저장하는 단계, 수신된 적어도 하나의 사이트의 주소를 이용하여 주소를 가지는 사이트 페이지를 호출하는 단계, 호출된 사이트 페이지로부터 이미지 인식을 이용하여 아이디 및 패스워드의 좌표값을 추출하는 단계, 추출된 아이디 좌표값 및 패스워드 좌표값에 대응하는 위치에 아이디 및 패스워드를 각각 입력하여 로그인을 실시하는 단계를 포함한다.As a technical means for achieving the above-described technical problem, an embodiment of the present invention, from the user terminal receives at least one site address provided by the at least one site providing server, the ID and password for logging into the site Mapping and storing an address, an ID, and a password; calling a site page having an address using the address of at least one received site; coordinates of the ID and password using image recognition from the called site page Extracting a value, and inputting an ID and a password at a location corresponding to the extracted ID coordinate value and the password coordinate value, respectively, to log in.
전술한 본 발명의 과제 해결 수단 중 어느 하나에 의하면, 사용자의 아이디 및 패스워드를 이용하여 사용자 단말이 아닌 이미지 인식 기반 로그인 서비스 제공 서버에서 자동으로 로그인을 수행할 수 있다.According to any one of the problem solving means of the present invention described above, it is possible to automatically log in from the image recognition-based login service providing server, not the user terminal using the user's ID and password.
도 1은 본 발명의 일 실시예에 따른 이미지 인식 기반 로그인 서비스 제공 시스템을 설명하기 위한 구성도이다.1 is a block diagram illustrating an image recognition-based login service providing system according to an embodiment of the present invention.
도 2는 도 1에 도시된 이미지 인식 기반 로그인 서비스 제공 서버를 설명하기 위한 구성도이다.FIG. 2 is a diagram illustrating an image recognition based login service providing server illustrated in FIG. 1.
도 3은 도 1에 도시된 파일 에이징 서비스가 구동되는 일 실시예를 도시한 도면이다.FIG. 3 is a diagram illustrating an embodiment in which the file aging service illustrated in FIG. 1 is driven.
도 4는 본 발명의 일 실시예에 따른 도 1의 이미지 인식 기반 로그인 서비스 제공 시스템에 포함된 각 구성들 상호간에 데이터가 송수신되는 과정을 나타낸 도면이다.4 is a diagram illustrating a process of transmitting and receiving data between components included in the image recognition-based login service providing system of FIG. 1 according to an exemplary embodiment of the present invention.
도 5는 본 발명의 일 실시예에 따른 이미지 인식 기반 로그인 서비스 제공 방법을 설명하기 위한 동작 흐름도이다.5 is a flowchart illustrating an image recognition-based login service providing method according to an embodiment of the present invention.
아래에서는 첨부한 도면을 참조하여 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자가 용이하게 실시할 수 있도록 본 발명의 실시예를 상세히 설명한다. 그러나 본 발명은 여러 가지 상이한 형태로 구현될 수 있으며 여기에서 설명하는 실시예에 한정되지 않는다. 그리고 도면에서 본 발명을 명확하게 설명하기 위해서 설명과 관계없는 부분은 생략하였으며, 명세서 전체를 통하여 유사한 부분에 대해서는 유사한 도면 부호를 붙였다.DETAILED DESCRIPTION Hereinafter, exemplary embodiments of the present invention will be described in detail with reference to the accompanying drawings so that those skilled in the art may easily implement the present invention. As those skilled in the art would realize, the described embodiments may be modified in various different ways, all without departing from the spirit or scope of the present invention. In the drawings, parts irrelevant to the description are omitted in order to clearly describe the present invention, and like reference numerals designate like parts throughout the specification.
명세서 전체에서, 어떤 부분이 다른 부분과 "연결"되어 있다고 할 때, 이는 "직접적으로 연결"되어 있는 경우뿐 아니라, 그 중간에 다른 소자를 사이에 두고 "전기적으로 연결"되어 있는 경우도 포함한다. 또한 어떤 부분이 어떤 구성요소를 "포함"한다고 할 때, 이는 특별히 반대되는 기재가 없는 한 다른 구성요소를 제외하는 것이 아니라 다른 구성요소를 더 포함할 수 있는 것을 의미하며, 하나 또는 그 이상의 다른 특징이나 숫자, 단계, 동작, 구성요소, 부분품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.Throughout the specification, when a part is "connected" to another part, this includes not only "directly connected" but also "electrically connected" with another element in between. . In addition, when a part is said to "include" a certain component, which means that it may further include other components, except to exclude other components, unless specifically stated otherwise, one or more other features It is to be understood that the present disclosure does not exclude the possibility of the presence or the addition of numbers, steps, operations, components, parts, or combinations thereof.
이하 첨부된 도면을 참고하여 본 발명을 상세히 설명하기로 한다.Hereinafter, the present invention will be described in detail with reference to the accompanying drawings.
도 1은 본 발명의 일 실시예에 따른 이미지 인식 기반 로그인 서비스 제공 시스템을 설명하기 위한 구성도이다. 도 1을 참조하면, 이미지 인식 기반 로그인 서비스 제공 시스템(1)은, 사용자 단말(100), 이미지 인식 기반 로그인 서비스 제공 장치(300), 적어도 하나의 사이트 서버(400)를 포함할 수 있다. 다만, 이러한 도 1의 이미지 인식 기반 로그인 서비스 제공 시스템(1)은, 본 발명의 일 실시예에 불과하므로 도 1을 통해 본 발명이 한정 해석되는 것은 아니다.1 is a block diagram illustrating an image recognition-based login service providing system according to an embodiment of the present invention. Referring to FIG. 1, the image recognition based login service providing system 1 may include a user terminal 100, an image recognition based login service providing apparatus 300, and at least one site server 400. However, since the image recognition-based login service providing system 1 of FIG. 1 is only an embodiment of the present invention, the present invention is not limitedly interpreted through FIG. 1.
이때, 도 1의 각 구성요소들은 일반적으로 네트워크(network, 200)를 통해 연결된다. 예를 들어, 도 1에 도시된 바와 같이, 네트워크(200)를 통하여 사용자 단말(100)과 이미지 인식 기반 로그인 서비스 제공 서버(300)가 연결될 수 있다. 또한, 이미지 인식 기반 로그인 서비스 제공 서버(300)는 네트워크(200)를 통하여 적어도 하나의 사이트 서버(400)와 연결될 수 있다. 사용자 단말(100)은 이미지 인식 기반 로그인 서비스 제공 서버(300)를 경유하여 적어도 하나의 사이트 서버(400)와 연결될 수 있다.In this case, each component of FIG. 1 is generally connected through a network 200. For example, as shown in FIG. 1, the user terminal 100 and the image recognition-based login service providing server 300 may be connected through the network 200. In addition, the image recognition-based login service providing server 300 may be connected to at least one site server 400 through the network 200. The user terminal 100 may be connected to at least one site server 400 via the image recognition-based login service providing server 300.
여기서, 네트워크(200)는 단말들 및 서버들과 같은 각각의 노드 상호 간에 정보 교환이 가능한 연결 구조를 의미하는 것으로, 이러한 네트워크(200)의 일 예는, 인터넷(Internet), LAN(Local Area Network), Wireless LAN(Wireless Local Area Network), WAN(Wide Area Network), PAN(Personal Area Network), 3G, 4G, LTE, Wi-Fi 등이 포함되나 이에 한정되지는 않는다. 또한, 도 1에 개시된 사용자 단말(100), 이미지 인식 기반 로그인 서비스 제공 서버(300), 적어도 하나의 사이트 서버(400)는 도 1에 도시된 것들로 한정 해석되는 것은 아니다.Here, the network 200 refers to a connection structure capable of exchanging information between each node, such as terminals and servers, an example of such a network 200, the Internet (LAN), Local Area Network (LAN) ), Wireless local area network (WLAN), wide area network (WAN), personal area network (PAN), 3G, 4G, LTE, Wi-Fi, and the like, but are not limited thereto. In addition, the user terminal 100 disclosed in FIG. 1, the image recognition-based login service providing server 300, and the at least one site server 400 are not limited to those illustrated in FIG. 1.
사용자 단말(100)은, 웹 사이트, 애플리케이션, 메신저, 클라우드, PC, 메일에 콘텐츠를 업로드하거나 전송하는 단말일 수 있다. 이때, 사용자 단말(100)은, 이미지 인식 기반 로그인 서비스 제공 서버(300)로, 자신이 가입한 사이트의 주소(URL)와, 사이트에 로그인하기 위한 아이디 및 비밀번호를 전송하는 단말일 수 있다. 이를 통하여, 사용자 단말(100)은, 사용자 단말(100) 자신이 직접 로그인을 위하여 아이디 및 패스워드를 가입한 사이트에 접속하여 입력하지 않더라도, 이미지 인식 기반 로그인 서비스 제공 서버(300)를 통하여 로그인을 할 수 있는 단말일 수 있다. 또한, 사용자 단말(100)은, 이미지 인식 기반 로그인 서비스 제공 서버(300)에서 제공하는 사이트에서, 자신이 가입한 사이트에 업로드한 콘텐츠를 확인하는 단말일 수 있다. 그리고, 사용자 단말(100)은, 이미지 인식 기반 로그인 서비스 제공 서버(300)를 경유하여, 자신이 가입한 사이트에 업로드된 콘텐츠의 콘텐츠 소멸 시점을 확인하고, 업로드된 콘텐츠를 삭제하거나, 콘텐츠 소멸 시점을 증감시키거나, 콘텐츠를 다시 회복시키는 제어 신호를 전송하는 단말일 수 있다. 사용자 단말(100)은, 네트워크(200)를 통해 원격지의 서버나 단말에 접속할 수 있는 단말로 구현될 수 있다. 여기서, 컴퓨터는 예를 들어, 카메라가 탑재된 노트북, 데스크톱(Desktop), 랩톱(Laptop) 등을 포함할 수 있다. 또한, 사용자 단말(100)은 네트워크(200)를 통해 원격지의 서버나 단말에 접속할 수 있는 단말로 구현될 수 있다. 사용자 단말(100)은 예를 들어, 휴대성과 이동성이 보장되는 무선 통신 장치로서, PCS(Personal Communication System), GSM(Global System for Mobile communications), PDC(Personal Digital Cellular), PHS(Personal Handyphone System), PDA(Personal Digital Assistant), IMT(International Mobile Telecommunication)-2000, CDMA(Code Division Multiple Access)-2000, W-CDMA(W-Code Division Multiple Access), Wibro(Wireless Broadband Internet) 단말, 스마트폰(smartphone), 스마트 패드(smartpad), 타블렛 PC(Tablet PC) 등과 같은 모든 종류의 핸드헬드(Handheld) 기반의 무선 통신 장치를 포함할 수 있다.The user terminal 100 may be a terminal that uploads or transmits content to a website, an application, a messenger, a cloud, a PC, and a mail. In this case, the user terminal 100 may be an image recognition-based login service providing server 300, and may be a terminal that transmits an address (URL) of a site to which the user subscribes, an ID and a password for logging in to the site. Through this, the user terminal 100 can log in through the image recognition-based login service providing server 300 even if the user terminal 100 does not access and input the ID and password to the site to which the user directly logs in. It may be a terminal. In addition, the user terminal 100 may be a terminal that checks content uploaded to a site to which the user subscribes in a site provided by the image recognition-based login service providing server 300. Then, the user terminal 100, via the image recognition-based login service providing server 300, to check the content destruction time of the content uploaded to the site to which he subscribes, delete the uploaded content, or the content destruction time It may be a terminal for transmitting a control signal to increase or decrease the content, or to recover the content again. The user terminal 100 may be implemented as a terminal that can access a server or a terminal in a remote place through the network 200. Here, the computer may include, for example, a laptop, a desktop, a laptop, and the like, on which a camera is mounted. In addition, the user terminal 100 may be implemented as a terminal that can access a server or a terminal in a remote place through the network 200. The user terminal 100 is, for example, a wireless communication device that ensures portability and mobility, and includes a personal communication system (PCS), a global system for mobile communications (GSM), a personal digital cellular (PDC), and a personal handyphone system (PHS). , PDA (Personal Digital Assistant), International Mobile Telecommunication (IMT) -2000, Code Division Multiple Access (CDMA) -2000, W-Code Division Multiple Access (W-CDMA), Wireless Broadband Internet (WBRO) terminal, smartphone ( All types of handheld based wireless communication devices such as smartphones, smartpads, tablet PCs, and the like may be included.
이미지 인식 기반 로그인 서비스 제공 서버(300)는, 사용자 단말(100)로부터 적어도 하나의 사이트의 주소와, 해당 주소에 로그인하기 위한 아이디 및 패스워드를 수신하는 서버일 수 있다. 이를 통하여, 이미지 인식 기반 로그인 서비스 제공 서버(300)는, 적어도 하나의 사이트의 주소에 접속하고, 아이디 및 패스워드를 이용하여 적어도 하나의 사이트 페이지에 자동으로 로그인할 수 있는 서버일 수 있다. 또한, 이미지 기반 로그인 서비스 제공 서버(300)는, 적어도 하나의 사이트 서버(400)를 경유하여 사용자 단말(100)로부터 콘텐츠 업로드 이벤트를 수신하고, 수신된 콘텐츠 업로드 이벤트에 포함된 콘텐츠 소멸 시점을 사용자 단말(100)과 매핑하여 저장하는 서버일 수 있다. 이를 통하여, 이미지 인식 기반 로그인 서비스 제공 서버(300)는, 적어도 하나의 사이트 서버(400)를 경유하여 사용자 단말(100)로부터 콘텐츠 업로드 이벤트를 수신하고, 수신된 콘텐츠 업로드 이벤트에 포함된 콘텐츠 소멸 시점을 사용자 단말(100)과 매핑하여 저장하는 서버일 수 있다. 이에 따라, 이미지 인식 기반 로그인 서비스 제공 서버(300)는, 사용자 단말(100)에서 업로드한 콘텐츠와 업로드된 콘텐츠가 위치한 웹 사이트, 애플리케이션, 메신저, 클라우드, PC, 메일 서버를, 사용자 단말(100)과 매핑하여 저장할 수 있다. 그리고 나서, 이미지 인식 기반 로그인 서비스 제공 서버(300)는, 콘텐츠 소멸 시점에 다가오는 경우, 사용자 단말(100)로 콘텐츠 소멸 예정 메세지를 전송할 수 있다. 이때, 사용자 단말(100)로부터 소멸 치료 메세지가 응답 메세지로 전송된 경우, 콘텐츠의 디-에이징 신호(de-Aging Signal)를 출력하고, 콘텐츠 소멸 확인 메세지이면 적어도 하나의 사이트 또는 적어도 하나의 사이트 서버(400)로 콘텐츠의 소멸 신호를 전송하여 콘텐츠가 삭제되도록 할 수 있다. 따라서, 이미지 인식 기반 로그인 서비스 제공 서버(300)는, 사용자 단말(100)의 사용자로 하여금 어떠한 콘텐츠가 어느 사이트 또는 어느 단말에 저장되어 있는지의 여부를 하나의 사이트에서 확인할 수 있도록 할 수 있다. 또한, 이미지 인식 기반 로그인 서비스 제공 서버(300)는, 사용자 단말(100)의 사용자로 하여금 콘텐츠의 수명을 설정할 수 있도록 하고, 수명이 다한 콘텐츠를 삭제할 것인지의 여부를 확인함으로써, 웹 사이트의 서버의 정크 데이터(Junk Data)를 줄일 수 있도록 할 수 있고, 개인의 저작물에 대한 보호를 실시할 수 있다. 이를 위하여, 이미지 인식 기반 로그인 서비스 제공 서버(300)는, 적어도 하나의 사이트 또는 적어도 하나의 사이트 제공 서버(400)로 접속하기 위하여, 이미지 인식에 기반하여 사용자 단말(100)의 아이디 및 패스워드를 이용하는 방법을 제공한다. 이때, 이미지 인식 기반 로그인 서비스 제공 서버(300)는 네트워크(200)를 통하여 원격지의 서버나 단말에 접속할 수 있는 컴퓨터로 구현될 수 있다. 여기서, 컴퓨터는 예를 들어, 카메라가 탑재된 노트북, 데스크톱(Desktop), 랩톱(Laptop) 등을 포함할 수 있다.The image recognition-based login service providing server 300 may be a server that receives an address of at least one site, an ID and a password for logging in to the corresponding address from the user terminal 100. Through this, the image recognition-based login service providing server 300 may be a server that may access an address of at least one site and automatically log in to at least one site page using an ID and a password. In addition, the image-based login service providing server 300 receives a content upload event from the user terminal 100 via the at least one site server 400, the user of the content extinction time included in the received content upload event The server may be mapped and stored with the terminal 100. Through this, the image recognition-based login service providing server 300 receives a content upload event from the user terminal 100 via at least one site server 400, and the content extinction time included in the received content upload event. It may be a server that maps and stores with the user terminal 100. Accordingly, the image recognition-based login service providing server 300 may include a web site, an application, a messenger, a cloud, a PC, and a mail server in which the uploaded content and the uploaded content are located in the user terminal 100. Can be mapped and stored. Then, the image recognition-based login service providing server 300 may transmit a content extinction scheduled message to the user terminal 100 when the content expiration time approaches. In this case, when the extinction treatment message is transmitted from the user terminal 100 as a response message, a de-aging signal of the content is output, and if the content extinction confirmation message is present, at least one site or at least one site server. The content destruction signal may be transmitted to 400 so that the content may be deleted. Accordingly, the image recognition-based login service providing server 300 may enable a user of the user terminal 100 to check whether one content is stored in which site or in which terminal. In addition, the image recognition-based login service providing server 300 allows the user of the user terminal 100 to set the lifespan of the content, and confirms whether or not to delete the content having reached the end of the lifespan of the server of the web site. You can help reduce junk data and protect your work. To this end, the image recognition-based login service providing server 300 uses the ID and password of the user terminal 100 based on image recognition to access at least one site or at least one site providing server 400. Provide a method. At this time, the image recognition-based login service providing server 300 may be implemented as a computer that can access a remote server or terminal through the network 200. Here, the computer may include, for example, a laptop, a desktop, a laptop, and the like, on which a camera is mounted.
적어도 하나의 사이트 서버(400)는, 메신저 서비스 제공 서버, 소셜 네트워크 서비스(Social Network Service) 제공 서버, 인터넷 서비스 제공 서버, 문자 메세지 서비스 제공 서버, 클라우드 서비스 제공 서버, 메일 서비스 제공 서버 중 적어도 하나인 것일 수 있다. 적어도 하나의 사이트 서버(400)는 사용자 단말(100)이 접속하여 콘텐츠를 업로드하거나 저장할 수 있는 서버일 수 있다. 이때, 적어도 하나의 사이트 서버(400)는 이미지 인식 기반 로그인 서비스 제공 서버(300)로 디-에이징 신호 또는 콘텐츠 소멸 신호를 전송할 수 있다. 이에 따라, 적어도 하나의 사이트 서버(400)는, 디-에이징 신호를 전송받은 경우, 콘텐츠가 소멸되지 않도록 하고, 콘텐츠 소멸 신호를 전송받은 경우, 콘텐츠가 적어도 하나의 사이트 서버(400)에서 삭제되도록 한다. 또한, 적어도 하나의 사이트 서버(400)는, 이미지 인식 기반 로그인 서비스 제공 서버(300)에서 사용자 단말(100)의 아이디 및 패스워드로 접속하는 서버일 수 있다. 이때, 적어도 하나의 사이트 서버(400)는 네트워크(200)를 통해 원격지의 서버나 단말에 접속할 수 있는 단말로 구현될 수 있다. 적어도 하나의 사이트 서버(400)는 네트워크(200)를 통하여 원격지의 서버나 단말에 접속할 수 있는 컴퓨터로 구현될 수 있다. 또한, 적어도 하나의 사이트 서버(400)는 네트워크(200)를 통해 원격지의 서버나 단말에 접속할 수 있는 단말로 구현될 수 있다.The at least one site server 400 is at least one of a messenger service providing server, a social network service providing server, an internet service providing server, a text message service providing server, a cloud service providing server, and a mail service providing server. It may be. The at least one site server 400 may be a server to which the user terminal 100 may access and upload or store content. In this case, the at least one site server 400 may transmit a de-aging signal or content destruction signal to the image recognition-based login service providing server 300. Accordingly, the at least one site server 400 prevents the content from being destroyed when the de-aging signal is transmitted, and deletes the content from the at least one site server 400 when the content destruction signal is received. do. In addition, the at least one site server 400 may be a server connected by the ID and password of the user terminal 100 from the image recognition-based login service providing server 300. In this case, the at least one site server 400 may be implemented as a terminal that can access a server or a terminal in a remote location through the network 200. The at least one site server 400 may be implemented as a computer that can access a server or a terminal at a remote location through the network 200. In addition, the at least one site server 400 may be implemented as a terminal capable of accessing a server or a terminal at a remote location through the network 200.
도 2는 도 1에 도시된 이미지 인식 기반 로그인 서비스 제공 서버를 설명하기 위한 구성도이고, 도 3은 도 1에 도시된 파일 에이징 서비스가 구동되는 일 실시예를 도시한 도면이다.FIG. 2 is a diagram illustrating an image recognition-based login service providing server illustrated in FIG. 1. FIG. 3 is a diagram illustrating an embodiment in which the file aging service illustrated in FIG. 1 is driven.
도 2를 참조하여 설명하면, 이미지 인식 기반 로그인 서비스 제공 서버(300)는, 저장부(310), 호출부(330), 추출부(350), 실시부(370), 템플릿 저장부(390)를 포함할 수 있다.Referring to FIG. 2, the image recognition-based login service providing server 300 may include a storage 310, a caller 330, an extractor 350, an implementation 370, and a template storage 390. It may include.
본 발명의 일 실시예에 따른 이미지 인식 기반 로그인 서비스 제공 서버(300) 또는 이미지 인식 기반 로그인 서비스 제공 서버(300)와 연동되어 동작하는 다른 서버(미도시)가 파일 에이징 서비스 애플리케이션, 프로그램, 웹 페이지 등을 사용자 단말(100) 또는 적어도 하나의 사이트 서버(400)로 전송하면, 사용자 단말(100) 또는 적어도 하나의 사이트 서버(400)는 해당 서비스에 대한 애플리케이션, 프로그램, 웹 페이지 등을 설치하거나 열 수 있다. 또한, 웹 브라우저에 실행되는 스크립트를 이용하여 파일 에이징 서비스 프로그램이 사용자 단말(100) 또는 적어도 하나의 사이트 서버(400)에서 구동될 수도 있다. 여기서, 웹 브라우저는 웹(WWW: world wide web) 서비스를 이용할 수 있게 하는 프로그램으로 HTML(hyper text mark-up language)로 서술된 하이퍼 텍스트를 받아서 보여주는 프로그램을 의미하며, 예를 들어 넷스케이프(Netscape), 익스플로러(Explorer), 크롬(chrome) 등을 포함한다. 또한, 애플리케이션은 단말 상의 응용 프로그램(application)을 의미하며, 예를 들어, 모바일 단말(스마트폰)에서 실행되는 앱(app)을 포함한다. 앱(app)은 모바일 콘텐츠를 자유롭게 사고 파는 가상의 장터인 모바일 애플리케이션 마켓에서 다운로드 받아서 설치할 수 있다. An image recognition-based login service providing server 300 or another server (not shown) operating in conjunction with the image recognition-based login service providing server 300 according to an embodiment of the present invention is a file aging service application, program, or web page. If the user terminal 100 or at least one site server 400 is transmitted to the user terminal 100 or at least one site server 400, the user terminal 100 or at least one site server 400 may install or open an application, a program, a web page, or the like for a corresponding service. Can be. In addition, the file aging service program may be driven in the user terminal 100 or at least one site server 400 using a script executed in a web browser. Here, the web browser is a program that enables the use of the World Wide Web (WWW) service, and refers to a program that receives and displays hypertext described in HTML (hyper text mark-up language), for example, Netscape. , Explorer, chrome and the like. In addition, an application means an application on a terminal, and includes, for example, an app running on a mobile terminal (smartphone). The app can be downloaded and installed from the mobile application market, a virtual marketplace for freely buying and selling mobile content.
이때, 네트워크(200) 연결은 사용자 단말(100), 이미지 인식 기반 로그인 서비스 제공 서버(300), 적어도 하나의 사이트 서버(400)가 통신 가능하도록 서로 연결되는 것을 의미하며, 네트워크(200) 연결을 생성하는 것은 이미지 인식 기반 로그인 서비스 제공 서버(300)가 네트워크(200)로 연결되어 있는 단말과의 통신을 위해 통신 접점에 통신 객체를 생성하는 것을 의미한다. 이미지 인식 기반 로그인 서비스 제공 서버(300)는 통신 객체를 통해 서로 데이터를 교환할 수 있다.In this case, the network 200 connection means that the user terminal 100, the image recognition-based login service providing server 300, and the at least one site server 400 are connected to each other so as to communicate with each other. Generating means that the image recognition-based login service providing server 300 creates a communication object at a communication contact point for communication with a terminal connected to the network 200. The image recognition-based login service providing server 300 may exchange data with each other through a communication object.
저장부(310)는, 사용자 단말(100)로부터 적어도 하나의 사이트 제공 서버(400)에서 제공하는 적어도 하나의 사이트 주소와, 사이트에 로그인하기 위한 아이디 및 패스워드를 수신하고, 주소와 아이디 및 패스워드를 매핑하여 저장할 수 있다. 예를 들어, 사용자 단말(100)의 가 사용자가, 주소(URL)가 A인 A 사이트에 아이디 B와, 비밀번호 C를 가지고, 주소가 D인 D 사이트에 아이디 E와 비밀번호 F를 가지고 있다고 가정한다. 이러한 경우, 저장부(310)는, 아래의 표 1과 같이 사용자 가에 대한 정보를 저장할 수 있다.The storage unit 310 receives from the user terminal 100 at least one site address provided by the at least one site providing server 400, an ID and password for logging in to the site, and stores the address, ID and password. Can be mapped and stored. For example, assume that a user of the user terminal 100 has an ID B and a password C at a site A having an address (URL) A, and an ID E and a password F at a D site having an address D. . In this case, the storage unit 310 may store information about the user price as shown in Table 1 below.
표 1
가 사용자 사이트 A의 주소 아이디 패스워드
사이트 A A B C
사이트 D D E F
Table 1
Fall user Address of site A ID password
Site A A B C
Site d D E F
호출부(330)는, 수신된 적어도 하나의 사이트의 주소를 이용하여, 주소를 가지는 사이트 페이지를 호출할 수 있다. 예를 들어, www.xxxx.co.kr이 사이트의 주소인 경우, www.xxxx.co.kr에 접속하는 신호를 출력할 수 있다.The caller 330 may call a site page having an address using the received address of at least one site. For example, when www.xxxx.co.kr is an address of a site, a signal for accessing www.xxxx.co.kr may be output.
추출부(350)는, 호출된 사이트 페이지로부터 이미지 인식을 이용하여 아이디 및 패스워드의 좌표값을 추출할 수 있다. 이때, 아이디 및 패스워드를 입력하는 위치의 좌표값은, 이미지 인식을 통하여 추출된, 아이디 및 패스워드의 입력을 안내하는 적어도 하나의 텍스트가 위치한 위치의 좌표값일 수 있다. 또한, 아이디 및 패스워드를 입력하는 위치의 좌표값은, 호출된 사이트 페이지의 적어도 하나의 레이아웃 중에서, 이미지 인식을 통하여 추출된, 이미지 및 패스워드를 입력하는 레이아웃의 좌표값일 수 있다.The extraction unit 350 may extract the coordinate values of the ID and password from the called site page by using image recognition. In this case, the coordinate value of the location where the ID and password are input may be the coordinate value of the location where at least one text guiding input of the ID and password, extracted through image recognition, is located. The coordinate value of the location for inputting the ID and password may be the coordinate value of the layout for inputting the image and the password, which are extracted through image recognition among at least one layout of the called site page.
이때, 이미지 인식을 이용하여 좌표값을 추출하는 방법은, 적어도 4 가지일 수 있는데, 이를 도 2 및 도 3a 내지 도 3d를 참조하여 설명하기로 한다.In this case, there may be at least four methods of extracting coordinate values using image recognition, which will be described with reference to FIGS. 2 and 3A to 3D.
도 3a를 참조하면, 추출부(350)는, 호출된 사이트 페이지로부터 이미지 인식을 이용하여 아이디 및 패스워드의 좌표값을 추출할 수 있는데, 이는 호출된 사이트 페이지의 이미지를 적어도 하나의 텍스트로 변환하는 것으로부터 시작될 수 있다. 즉, 도 3a를 참조하면, 포털사이트인 DAUM의 메인 페이지가 도시되어 있는데, 이미지 인식을 이용하여, DAUM, 강호동 해설, 소희 탈퇴, 이승기 공항패션, 여자컬링 한일전 등과 같은 텍스트를 추출할 수 있다. 여기서, 추출부(350)는 변환된 적어도 하나의 텍스트와 기 저장된 텍스트를 비교할 수 있다. 즉, 추출부(350)는, 아이디 및 패스워드의 좌표값을 추출해내야 하므로, 기 저장된 텍스트는, 로그인 상태 유지(A), IP 보안(B), 아이디 OR 이메일(C), 비밀번호(D), 회원가입(E), 아이디 비밀번호 찾기(F), 폰번호 로그인(G)과 같이, 아이디 및 비밀번호를 입력하는 박스가 위치할만한 텍스트 중에서, 아이디 및 비밀번호를 입력하는 칸이라고 안내하는 텍스트, 즉 아이디, 비밀번호와 같은 텍스트일 수 있다. 또한, 추출부(350)는, 기 저장된 텍스트가 변환된 적어도 하나의 텍스트와 일치하는 경우, 기 저장된 텍스트와 일치하는 적어도 하나의 텍스트의 위치의 좌표값을 추출할 수 있다. 예를 들어, 기 저장된 텍스트가 아이디와 비밀번호이고, 변환된 적어도 하나의 텍스트가 아이디 OR 이메일(C), 비밀번호(D)인 경우, 아이디 OR 이메일(C)과 비밀번호(D)의 좌표값인 가(X,Y)과 나(X',Y')를 추출할 수 있다. 이때, 기 저장된 텍스트는, 아이디 및 패스워드의 입력을 안내하는 적어도 하나의 텍스트일 수 있다.Referring to FIG. 3A, the extractor 350 may extract coordinate values of the ID and password from the called site page by using image recognition, which converts an image of the called site page into at least one text. Can begin with. That is, referring to FIG. 3A, the main page of the portal site DAUM is shown. Using image recognition, texts such as DAUM, Kang Ho-dong commentary, Sohee withdrawal, Lee Seung Gi airport fashion, and women curling Haniljeon can be extracted. Here, the extractor 350 may compare the at least one converted text with previously stored text. That is, since the extraction unit 350 needs to extract the coordinate values of the ID and password, the pre-stored text includes the login state maintenance (A), IP security (B), ID OR email (C), password (D), Among the texts where the box for inputting ID and password can be located, such as registration (E), ID password search (F), and phone number login (G), text that indicates a space for inputting ID and password, namely ID, It can be text such as a password. In addition, when the prestored text matches the at least one converted text, the extractor 350 may extract a coordinate value of a position of at least one text that matches the prestored text. For example, if the previously stored text is an ID and a password, and the converted at least one text is an ID OR email (C) or a password (D), the value of the coordinates of the ID OR email (C) and the password (D) is We can extract (X, Y) and me (X ', Y'). In this case, the previously stored text may be at least one text for guiding input of an ID and a password.
도 3b를 참조하면, 추출부(350)는, 호출된 사이트 페이지로부터 이미지 인식을 이용하여 아이디 및 패스워드의 좌표값을 추출할 수 있는데, 이는 템플릿 저장부(390)에서 적어도 하나의 사이트 페이지를 적어도 하나의 레이아웃으로 구획하여 적어도 하나의 템플릿을 오버레이(Overlay)하는 것으로부터 시작될 수 있다. 즉, 도 3b를 참조하면, 포털사이트인 NAVER의 메인 페이지가 도시되어 있는데, 이미지 인식을 이용하여, NAVER의 메인 페이지를 적어도 하나의 레이아웃으로 구획할 수 있고, 이에 따라 NAVER의 메인 페이지는 적어도 하나의 템플릿(T1~T9)으로 분할될 수 있다. 즉, NAVER 이외에도 다수의 포털 사이트는, 일정한 레이아웃을 가지고 있고, 해당 레이아웃으로 구획되는 적어도 하나의 템플릿은 항상 일정한 크기와 위치를 가지고 있다. 또한, 적어도 하나의 템플릿 내에 삽입되는 광고 또는 컨텐츠만이 변경될 뿐, 적어도 하나의 템플릿의 위치나 좌표는 변경되지 않는다. 따라서, 본 발명의 일 실시예에 따른 템플릿 저장부(390)는 적어도 하나의 템플릿의 위치나 좌표가 변경되지 않는다는 점을 이용하여, 이미지를 인식할 수 있는 적어도 하나의 템플릿인 틀을 추출하고, 추출된 틀을 접속된 사이트에 대입(오버레이)시켜, 원하는 템플릿의 좌표, 즉 아이디 및 패스워드가 입력되는 템플릿의 좌표를 추출하는 방법을 이용한다. 이에 따라, 템플릿 저장부(390)는, 오버레이된 적어도 하나의 템플릿을 적어도 하나의 사이트 페이지에 대한 기준 템플릿으로 저장할 수 있다. 또한, 템플릿 저장부(390)는, 적어도 하나의 템플릿 중 아이디 및 비밀번호가 입력되는 입력 기준 템플릿의 좌표값과, 적어도 하나의 템플릿이 오버레이된 사이트 페이지의 주소(URL)를 매핑하여 저장할 수 있다. 예를 들어, 템플릿 저장부(390)는, 적어도 하나의 템플릿(T1~T9) 중에서 아이디 및 패스워드가 입력되는 템플릿인 입력 기준 템플릿(T5)의 좌표값(T51(x1,y1), T52(x2,y2), T53(x3,y3), T54(x4,y4))을 추출할 수 있고, 해당 좌표로 이루어지는 입력 기준 템플릿(T5) 중에서 아이디 및 패스워드가 입력되는 좌표값(T55(x5,y5), T56(x6,y6))을 저장할 수 있다. 템플릿 저장부(390)는 예를 들어, 아래 표 2와 같이 아이디 및 패스워드를 입력하는 좌표값을 저장할 수 있다.Referring to FIG. 3B, the extractor 350 may extract the coordinate values of the ID and the password from the called site page by using image recognition, which may include at least one site page in the template storage unit 390. It may begin by overlaying at least one template by dividing into one layout. That is, referring to FIG. 3B, a main page of NAVER, which is a portal site, is illustrated. By using image recognition, the main page of NAVER may be partitioned into at least one layout, and accordingly, the main page of NAVER is at least one. Can be divided into templates T1 to T9. That is, in addition to NAVER, many portal sites have a constant layout, and at least one template divided into the layout always has a constant size and position. In addition, only the advertisement or content inserted into the at least one template is changed, and the position or coordinates of the at least one template are not changed. Accordingly, the template storage unit 390 according to an embodiment of the present invention extracts a frame which is at least one template capable of recognizing an image by using the fact that the position or coordinate of at least one template is not changed, A method of extracting the coordinates of the template to the connected site (overlay) and extracting the coordinates of the desired template, that is, the template into which the ID and password are input is used. Accordingly, the template storage unit 390 may store the overlaid at least one template as a reference template for at least one site page. In addition, the template storage unit 390 may map and store the coordinates of the input reference template to which the ID and password of the at least one template are input, and the address (URL) of the site page on which the at least one template is overlaid. For example, the template storage unit 390 may include coordinate values T51 (x1, y1) and T52 (x2) of the input reference template T5, which is a template in which an ID and a password are input among at least one template T1 to T9. , y2), T53 (x3, y3), and T54 (x4, y4)), and coordinate values (T55 (x5, y5) in which an ID and password are input among the input reference templates T5 formed of the corresponding coordinates). , T56 (x6, y6)) can be stored. The template storage unit 390 may store, for example, coordinate values for inputting an ID and a password as shown in Table 2 below.
표 2
사이트 주소 아이디 좌표값 비밀번호 좌표값
사이트 A www.naver.com T55(x5,y5) T56(x6,y6)
TABLE 2
Website address ID coordinate value Password coordinate value
Site A www.naver.com T55 (x5, y5) T56 (x6, y6)
이렇게 템플릿 저장부(390)에서 적어도 하나의 사이트에 대한 기준 템플릿과, 아이디 및 패스워드가 입력되는 좌표값을 저장한 경우, 추출부(350)는, 호출된 사이트 페이지에 기준 템플릿을 오버레이시키고, 아이디 및 패스워드가 입력되는 좌표값을 가지는 입력 기준 템플릿과, 호출된 사이트 페이지의 오버레이된 영역을 확인할 수 있다. 또한, 추출부(350)는, 확인된 오버레이된 영역이, 입력 기준 템플릿과 일치하는 경우, 입력 기준 템플릿의 좌표값을 아이디 및 패스워드의 좌표값으로 추출할 수 있다.When the template storage unit 390 stores the reference template for at least one site and coordinate values for inputting an ID and a password, the extractor 350 overlays the reference template on the called site page and stores the ID. And an input criterion template having a coordinate value at which a password is input, and an overlaid area of the called site page. In addition, the extracted unit 350 may extract the coordinate values of the input reference template as the coordinate values of the ID and password when the identified overlaid area matches the input reference template.
도 3c를 참조하면, 추출부(350)는, 호출된 사이트 페이지로부터 이미지 인식을 이용하여 아이디 및 패스워드의 좌표값을 추출할 수 있는데, 이는 호출된 사이트 페이지의 프로그램 소스를 텍스트 기반으로 다운로드하는 것으로부터 시작될 수 있다. 즉, 도 3c를 참조하면, 포털사이트인 CYWORLD의 메인 페이지가 도시되어 있는데, 해당 메인 페이지의 프로그램 소스를 예를 들어, HTML 기반으로 다운로드하는 경우, 메인 페이지에 기재된 텍스트를 추출할 수 있다. 이에 따라, 추출부(350)는, 다운로드한 프로그램 소스 중 아이디 및 패스워드의 입력을 안내하는 적어도 하나의 텍스트(A,B)가 존재하는지의 여부를 확인할 수 있다. 또한, 추출부(350)는, 확인 결과 아이디 및 패스워드의 입력을 안내하는 적어도 하나의 텍스트가 존재하는 경우, 적어도 하나의 텍스트의 위치를 프로그램 소스를 통하여 확인할 수 있다. 그리고 나서, 추출부(350)는, 확인 결과 적어도 하나의 텍스트의 위치를 아이디 및 패스워드의 좌표값(A,B)으로 추출할 수 있다.Referring to FIG. 3C, the extractor 350 may extract coordinate values of the ID and password from the called site page by using image recognition, which is to download the program source of the called site page on a text basis. It can start from That is, referring to FIG. 3C, the main page of the portal site CYWORLD is illustrated. When downloading the program source of the main page, for example, based on HTML, the text described in the main page may be extracted. Accordingly, the extractor 350 may check whether there is at least one text A or B guiding input of an ID and a password among the downloaded program sources. In addition, when there is at least one text for guiding input of ID and password, the extractor 350 may check the location of the at least one text through a program source. Then, the extraction unit 350 may extract the position of the at least one text as the coordinate values (A, B) of the ID and password as a result of the verification.
도 3d를 참조하면, 추출부(350)는, 호출된 사이트 페이지로부터 이미지 인식을 이용하여 아이디 및 패스워드의 좌표값을 추출할 수 있는데, 이는 호출된 사이트 페이지의 화면을 캡쳐(Screen Capture)하는 것으로부터 시작될 수 있다. 즉, 도 3d를 참조하면, 포털사이트인 CYWORLD의 메인 페이지가 도시되어 있는데, 해당 메인 페이지의 객체 정보를 얻기 위해서는 라벨링 작업을 실시할 수 있다. 즉, 추출부(350)는 캡쳐된 화면의 객체 정보를 얻기 위하여 라벨링을 실시하고, 실시된 라벨링을 통하여 객체를 정보 단위로 그룹핑(G1~G6)할 수 있다. 그리고 나서, 추출부(350)는 그룹핑된 객체의 적어도 하나의 점을 포함하는 윤곽선(Contour)을 추출하고, 추출된 윤곽선과 아이디 및 패스워드를 입력하는 위치의 윤곽선과 일치하는지의 여부를 확인할 수 있다. 이때, 추출부(350)는, 아이디 및 패스워드를 입력하는 위치의 윤곽선과, 추출된 윤곽선이 일치하는 경우, 아이디 및 패스워드를 입력하는 윤곽선의 좌표(G41(x,y), G42(x1,y1))를 아이디 및 패스워드의 좌표값을 추출할 수 있다. 이때, 아이디 및 패스워드를 입력하는 위치의 윤곽선은, 적어도 하나의 사이트 페이지에 대해 아이디 및 패스워드를 입력하는 위치에 따라 기 저장된 윤곽선일 수 있다.Referring to FIG. 3D, the extractor 350 may extract coordinate values of the ID and password from the called site page by using image recognition, which is to capture a screen of the called site page. It can start from That is, referring to FIG. 3D, a main page of the portal site CYWORLD is illustrated. In order to obtain object information of the main page, a labeling operation may be performed. That is, the extraction unit 350 may perform labeling to obtain object information of the captured screen, and group objects G1 to G6 by the information unit through the implemented labeling. Then, the extractor 350 may extract a contour including at least one point of the grouped objects and check whether the extracted contour corresponds to the contour of the location where the ID and password are input. . At this time, the extraction unit 350, if the contour of the position for inputting the ID and password and the extracted contour, the coordinates G41 (x, y), G42 (x1, y1) of the contour for inputting the ID and password )), You can extract the coordinates of the ID and password. In this case, the contour of the location for inputting the ID and password may be a previously stored contour according to the location for inputting the ID and password for at least one site page.
다시 도 2로 돌아와서, 실시부(370)는, 추출된 아이디 좌표값 및 패스워드 좌표값에 대응하는 위치에 아이디 및 패스워드를 각각 입력하여 로그인을 실시할 수 있다. 이때, 실시부(370)는, 추출된 아이디 좌표값 및 패스워드 좌표값에 대응하는 위치에 각각 클릭 또는 터치 신호를 전송하고, 전송된 클릭 또는 터치 신호에 대응하여 활성화된 아이디 입력 박스 또는 패스워드 입력 박스에, 호출된 사이트 페이지에 매핑된 아이디 및 패스워드를 각각 입력하는 제어 신호를 전송하고, 아이디 및 패스워드의 입력이 완료된 후, 로그인 버튼을 클릭 또는 터치하는 신호를 전송하는 것을 수행함으로써, 로그인을 실시할 수 있다. 이때, 적어도 하나의 사이트 제공 서버(400)는, 메신저 서비스 제공 서버, 소셜 네트워크 서비스(Social Network Service) 제공 서버, 인터넷 서비스 제공 서버, 문자 메세지 서비스 제공 서버, 클라우드 서비스 제공 서버, 메일 서비스 제공 서버 중 적어도 하나일 수 있다. 그리고, 아이디 및 패스워드의 좌표값은, 아이디 및 패스워드를 입력하는 아이디 박스 및 패스워드 박스의 좌표값일 수 있다. 또한, 추출된 좌표값은, 고정 단말 또는 이동 단말의 화면 크기, 화면 비율 및 화면 배율에 대응하도록 조절될 수 있다.Returning to FIG. 2 again, the implementation unit 370 may log in by inputting an ID and a password at positions corresponding to the extracted ID coordinate value and the password coordinate value, respectively. In this case, the implementation unit 370 transmits a click or touch signal to a location corresponding to the extracted ID coordinate value and the password coordinate value, respectively, and activates an ID input box or password input box activated in response to the transmitted click or touch signal. To perform a login by transmitting a control signal for inputting an ID and a password mapped to the called site page, respectively, and transmitting a signal for clicking or touching the login button after the input of the ID and password is completed. Can be. In this case, the at least one site providing server 400 may include a messenger service providing server, a social network service providing server, an internet service providing server, a text message service providing server, a cloud service providing server, and a mail service providing server. There may be at least one. The coordinate values of the ID and password may be coordinate values of an ID box and a password box for inputting the ID and password. In addition, the extracted coordinate values may be adjusted to correspond to the screen size, the screen ratio, and the screen magnification of the fixed terminal or the mobile terminal.
이와 같은 도 2 및 3의 이미지 인식 기반 로그인 서비스 제공 방법에 대해서 설명되지 아니한 사항은 앞서 도 1을 통해 이미지 인식 기반 로그인 서비스 제공 방법에 대하여 설명된 내용과 동일하거나 설명된 내용으로부터 용이하게 유추 가능하므로 이하 설명을 생략하도록 한다. 2 and 3 that are not described with respect to the image recognition-based login service providing method can be easily inferred from the same or as described above with respect to the image recognition-based login service providing method through FIG. The description below will be omitted.
도 4는 본 발명의 일 실시예에 따른 도 1의 이미지 인식 기반 로그인 서비스 제공 시스템에 포함된 각 구성들 상호간에 데이터가 송수신되는 과정을 나타낸 도면이다. 이하, 도 4를 통해 본원의 일 실시예에 따라 신호가 송수신되는 과정의 일 예를 설명할 것이나, 이와 같은 실시예로 본원이 한정 해석되는 것은 아니며, 앞서 설명한 다양한 실시예들에 따라 도 4에 도시된 데이터가 송수신되는 과정이 변경될 수 있음은 기술분야에 속하는 당업자에게 자명하다.4 is a diagram illustrating a process of transmitting and receiving data between components included in the image recognition-based login service providing system of FIG. 1 according to an exemplary embodiment of the present invention. Hereinafter, an example of a process of transmitting and receiving a signal according to an embodiment of the present application will be described with reference to FIG. 4, but the present disclosure is not limited to such an embodiment, and according to various embodiments described above with reference to FIG. 4. It is apparent to those skilled in the art that the process of transmitting and receiving illustrated data may be changed.
도 4를 참조하면, 사용자 단말(100)은, 이미지 인식 기반 로그인 서비스 제공 서버(300)로 적어도 하나의 사이트의 주소와, 아이디 및 패스워드를 전송할 수 있다(S4100).Referring to FIG. 4, the user terminal 100 may transmit an address, an ID, and a password of at least one site to the image recognition-based login service providing server 300 (S4100).
그리고 나서, 이미지 인식 기반 로그인 서비스 제공 서버(300)는, 적어도 하나의 사이트의 주소와, 아이디 및 패스워드를 매핑하여 저장할 수 있다(S4200). 이때, 이미지 인식 기반 로그인 서비스 제공 서버(300)는, 적어도 하나의 사이트 제공 서버(400)에 사이트 주소를 이용하여 사이트에 연결할 수 있다(S4300). 이때, 적어도 하나의 사이트 제공 서버(400)가 사이트 페이지를 이미지 인식 기반 로그인 서비스 제공 서버(300)로 전송하면(S4400), 이미지 인식 기반 로그인 서비스 제공 서버(300)는, 사이트 페이지를 호출할 수 있다(S4500).Then, the image recognition-based login service providing server 300 may map and store at least one site address, ID and password (S4200). In this case, the image recognition-based login service providing server 300 may connect to the site using the site address to the at least one site providing server 400 (S4300). At this time, when at least one site providing server 400 transmits the site page to the image recognition-based login service providing server 300 (S4400), the image recognition-based login service providing server 300 may call the site page. There is (S4500).
여기서, 이미지 인식 기반 로그인 서비스 제공 서버(300)는, 이미지 인식을 이용하여 아이디 및 패스워드의 좌표값을 추출하고(S4600), 추출된 아이디 및 패스워드의 좌표값에 대응하는 위치에, 아이디 및 패스워드를 입력한다(S4700).Here, the image recognition-based login service providing server 300 extracts the coordinate values of the ID and password by using the image recognition (S4600), and places the ID and password in a position corresponding to the coordinate values of the extracted ID and password. Enter (S4700).
그리고 나서, 이미지 인식 기반 로그인 서비스 제공 서버(300)는, 적어도 하나의 사이트 서버(400)에서 제공하는 적어도 하나의 사이트에 로그인을 시도하고(S4800), 적어도 하나의 사이트 제공 서버(400)에서는, 로그인이 성공한 경우(S4900), 이미지 인식 기반 로그인 서비스 제공 서버(300)로 로그인 성공 신호를 전송하고(S4930), 로그인이 실패한 경우(S4900), 이미지 인식 기반 로그인 서비스 제공 서버(300)로 로그인 실패 신호를 전송한다(S4910).Then, the image recognition-based login service providing server 300 attempts to log in to at least one site provided by the at least one site server 400 (S4800), and in the at least one site providing server 400, If the login is successful (S4900), and transmits the login success signal to the image recognition-based login service providing server 300 (S4930), if the login fails (S4900), the login failure to the image recognition-based login service providing server 300 The signal is transmitted (S4910).
이때, 이미지 인식 기반 로그인 서비스 제공 서버(300)는, 로그인이 실패한 경우, 이미지 인식을 이용하여 아이디 및 패스워드의 좌표값을 추출하는 단계(S4600)로 복귀하도록 루프를 돌고, 로그인이 성공한 경우, 로그인이 완료되었다는 이벤트를 출력할 수 있다(S4950).At this time, the image recognition-based login service providing server 300 loops to return to the step (S4600) of extracting the coordinate values of the ID and password by using image recognition when the login fails, and if the login is successful, the login This event can be outputted (S4950).
이와 같은 도 4의 이미지 인식 기반 로그인 서비스 제공 방법에 대해서 설명되지 아니한 사항은 앞서 도 1 내지 3을 통해 이미지 인식 기반 로그인 서비스 제공 방법에 대하여 설명된 내용과 동일하거나 설명된 내용으로부터 용이하게 유추 가능하므로 이하 설명을 생략하도록 한다. Since the matters that are not described with respect to the image recognition-based login service providing method of FIG. 4 can be easily inferred from the same or described contents with respect to the image recognition-based login service providing method through FIGS. 1 to 3. The description below will be omitted.
상술한 단계들(S4100~S4950)간의 순서는 예시일 뿐, 이에 한정되지 않는다. 즉, 상술한 단계들(S4100~S4950)간의 순서는 상호 변동될 수 있으며, 이중 일부 단계들은 동시에 실행되거나 삭제될 수도 있다.The order between the above-described steps S4100 to S4950 is merely an example, and is not limited thereto. That is, the order between the above-described steps (S4100 to S4950) may be interchanged, and some of the steps may be executed or deleted at the same time.
도 5는 본 발명의 일 실시예에 따른 이미지 인식 기반 로그인 서비스 제공 방법을 설명하기 위한 동작 흐름도이다. 도 5를 참조하면, 이미지 인식 기반 로그인 서비스 제공 서버는, 사용자 단말로부터 적어도 하나의 사이트 제공 서버에서 제공하는 적어도 하나의 사이트의 주소와, 사이트에 로그인하기 위한 아이디 및 패스워드를 수신하고, 주소와 아이디 및 패스워드를 매핑하여 저장한다(S5100).5 is a flowchart illustrating an image recognition-based login service providing method according to an embodiment of the present invention. Referring to FIG. 5, the image recognition-based login service providing server receives an address of at least one site provided by the at least one site providing server, an ID and password for logging into the site, and receives the address and the ID from the user terminal. And maps and stores the password (S5100).
그리고 나서, 이미지 인식 기반 로그인 서비스 제공 서버는, 수신된 적어도 하나의 사이트의 주소를 이용하여 주소를 가지는 사이트 페이지를 호출한다(S5200).Then, the image recognition-based login service providing server calls a site page having an address using the received address of at least one site (S5200).
또한, 이미지 인식 기반 로그인 서비스 제공 서버는, 호출된 사이트 페이지로부터 이미지 인식을 이용하여 아이디 및 패스워드의 좌표값을 추출하고(S5300), 추출된 아이디 좌표값 및 패스워드 좌표값에 대응하는 위치에 아이디 및 패스워드를 각각 입력하여 로그인을 실시한다(S5400).In addition, the image recognition-based login service providing server extracts the coordinate values of the ID and password from the called site page by using the image recognition (S5300), the ID and the position at the position corresponding to the extracted ID coordinate value and the password coordinate value. Each password is entered to log in (S5400).
이와 같은 도 5의 이미지 인식 기반 로그인 서비스 제공 방법에 대해서 설명되지 아니한 사항은 앞서 도 1 내지 도 4를 통해 이미지 인식 기반 로그인 서비스 제공 방법에 대하여 설명된 내용과 동일하거나 설명된 내용으로부터 용이하게 유추 가능하므로 이하 설명을 생략하도록 한다.The matters not described with respect to the image recognition-based login service providing method of FIG. 5 may be easily inferred from the same or described contents with respect to the image recognition-based login service providing method through FIGS. 1 to 4. Therefore, the following description will be omitted.
도 5를 통해 설명된 일 실시예에 따른 이미지 인식 기반 로그인 서비스 제공 방법은, 컴퓨터에 의해 실행되는 애플리케이션이나 프로그램 모듈과 같은 컴퓨터에 의해 실행가능한 명령어를 포함하는 기록 매체의 형태로도 구현될 수 있다. 컴퓨터 판독 가능 매체는 컴퓨터에 의해 액세스될 수 있는 임의의 가용 매체일 수 있고, 휘발성 및 비휘발성 매체, 분리형 및 비분리형 매체를 모두 포함한다. 또한, 컴퓨터 판독가능 매체는 컴퓨터 저장 매체 및 통신 매체를 모두 포함할 수 있다. 컴퓨터 저장 매체는 컴퓨터 판독가능 명령어, 데이터 구조, 프로그램 모듈 또는 기타 데이터와 같은 정보의 저장을 위한 임의의 방법 또는 기술로 구현된 휘발성 및 비휘발성, 분리형 및 비분리형 매체를 모두 포함한다. 통신 매체는 전형적으로 컴퓨터 판독가능 명령어, 데이터 구조, 프로그램 모듈, 또는 반송파와 같은 변조된 데이터 신호의 기타 데이터, 또는 기타 전송 메커니즘을 포함하며, 임의의 정보 전달 매체를 포함한다.The image recognition-based login service providing method according to the exemplary embodiment described with reference to FIG. 5 may be implemented in the form of a recording medium including instructions executable by a computer, such as an application or a program module executed by a computer. . Computer readable media can be any available media that can be accessed by a computer and includes both volatile and nonvolatile media, removable and non-removable media. In addition, computer readable media may include both computer storage media and communication media. Computer storage media includes both volatile and nonvolatile, removable and non-removable media implemented in any method or technology for storage of information such as computer readable instructions, data structures, program modules or other data. Communication media typically includes computer readable instructions, data structures, program modules, or other data in a modulated data signal such as a carrier wave, or other transmission mechanism, and includes any information delivery media.
전술한 본 발명의 일 실시예에 따른 이미지 인식 기반 로그인 서비스 제공 방법은, 단말기에 기본적으로 설치된 애플리케이션(이는 단말기에 기본적으로 탑재된 플랫폼이나 운영체제 등에 포함된 프로그램을 포함할 수 있음)에 의해 실행될 수 있고, 사용자가 애플리케이션 스토어 서버, 애플리케이션 또는 해당 서비스와 관련된 웹 서버 등의 애플리케이션 제공 서버를 통해 마스터 단말기에 직접 설치한 애플리케이션(즉, 프로그램)에 의해 실행될 수도 있다. 이러한 의미에서, 전술한 본 발명의 일 실시예에 따른 이미지 인식 기반 로그인 서비스 제공 방법은 단말기에 기본적으로 설치되거나 사용자에 의해 직접 설치된 애플리케이션(즉, 프로그램)으로 구현되고 단말기에 등의 컴퓨터로 읽을 수 있는 기록매체에 기록될 수 있다.The image recognition-based login service providing method according to an embodiment of the present invention described above may be executed by an application basically installed in a terminal (which may include a program included in a platform or an operating system, which is basically installed in the terminal). In addition, the application may be executed by an application (ie, a program) installed directly on the master terminal through an application providing server such as an application store server, an application, or a web server related to the corresponding service. In this sense, the image recognition-based login service providing method according to an embodiment of the present invention described above is implemented as an application (that is, a program) that is basically installed in a terminal or directly installed by a user, and can be read by a computer such as a terminal. Can be recorded on a recording medium.
전술한 본 발명의 설명은 예시를 위한 것이며, 본 발명이 속하는 기술분야의 통상의 지식을 가진 자는 본 발명의 기술적 사상이나 필수적인 특징을 변경하지 않고서 다른 구체적인 형태로 쉽게 변형이 가능하다는 것을 이해할 수 있을 것이다. 그러므로 이상에서 기술한 실시예들은 모든 면에서 예시적인 것이며 한정적이 아닌 것으로 이해해야만 한다. 예를 들어, 단일형으로 설명되어 있는 각 구성 요소는 분산되어 실시될 수도 있으며, 마찬가지로 분산된 것으로 설명되어 있는 구성 요소들도 결합된 형태로 실시될 수 있다. The foregoing description of the present invention is intended for illustration, and it will be understood by those skilled in the art that the present invention may be easily modified in other specific forms without changing the technical spirit or essential features of the present invention. will be. Therefore, it should be understood that the embodiments described above are exemplary in all respects and not restrictive. For example, each component described as a single type may be implemented in a distributed manner, and similarly, components described as distributed may be implemented in a combined form.
본 발명의 범위는 상기 상세한 설명보다는 후술하는 특허청구범위에 의하여 나타내어지며, 특허청구범위의 의미 및 범위 그리고 그 균등 개념으로부터 도출되는 모든 변경 또는 변형된 형태가 본 발명의 범위에 포함되는 것으로 해석되어야 한다.The scope of the present invention is shown by the following claims rather than the above description, and all changes or modifications derived from the meaning and scope of the claims and their equivalents should be construed as being included in the scope of the present invention. do.

Claims (15)

  1. 이미지 인식 기반 로그인 서비스 제공 서버에서 실행되는 로그인 서비스 제공 방법에 있어서,In the login service providing method running on the image recognition-based login service providing server,
    사용자 단말로부터 적어도 하나의 사이트 제공 서버에서 제공하는 적어도 하나의 사이트의 주소와, 상기 사이트에 로그인하기 위한 아이디 및 패스워드를 수신하고, 상기 주소와 아이디 및 패스워드를 매핑하여 저장하는 단계;Receiving an address of at least one site provided by at least one site providing server from an user terminal, an ID and password for logging in to the site, and mapping and storing the address, ID and password;
    상기 수신된 적어도 하나의 사이트의 주소를 이용하여 상기 주소를 가지는 사이트 페이지를 호출하는 단계;Calling a site page with the address using the received at least one site address;
    상기 호출된 사이트 페이지로부터 이미지 인식을 이용하여 아이디 및 패스워드의 좌표값을 추출하는 단계;Extracting coordinate values of an ID and a password from the called site page using image recognition;
    상기 추출된 아이디 좌표값 및 패스워드 좌표값에 대응하는 위치에 상기 아이디 및 패스워드를 각각 입력하여 로그인을 실시하는 단계Logging in by inputting the ID and password at positions corresponding to the extracted ID coordinate value and password coordinate value, respectively;
    를 포함하는, 이미지 인식 기반 로그인 서비스 제공 방법.The image recognition-based login service providing method comprising a.
  2. 제 1 항에 있어서,The method of claim 1,
    상기 아이디 및 패스워드를 입력하는 위치의 좌표값은, 상기 이미지 인식을 통하여 추출된, 상기 아이디 및 패스워드의 입력을 안내하는 적어도 하나의 텍스트가 위치한 위치의 좌표값인 것인, 이미지 인식 기반 로그인 서비스 제공 방법.The coordinate value of the location where the ID and password are input is the coordinate value of the location where at least one text guiding input of the ID and password, extracted through the image recognition, is provided. Way.
  3. 제 1 항에 있어서,The method of claim 1,
    상기 아이디 및 패스워드를 입력하는 위치의 좌표값은, 상기 호출된 사이트 페이지의 적어도 하나의 레이아웃 중에서, 상기 이미지 인식을 통하여 추출된, 상기 이미지 및 패스워드를 입력하는 레이아웃의 좌표값인 것인, 이미지 인식 기반 로그인 서비스 제공 방법.The coordinate value of the position for inputting the ID and password is the coordinate value of the layout for inputting the image and password, extracted through the image recognition, from among at least one layout of the called site page. To provide an account-based login service.
  4. 제 1 항에 있어서,The method of claim 1,
    상기 호출된 사이트 페이지로부터 이미지 인식을 이용하여 아이디 및 패스워드의 좌표값을 추출하는 단계는,Extracting the coordinate values of the ID and password by using the image recognition from the called site page,
    상기 호출된 사이트 페이지의 이미지를 적어도 하나의 텍스트로 변환하고,Convert an image of the called site page into at least one text,
    상기 변환된 적어도 하나의 텍스트와 기 저장된 텍스트를 비교하고,Comparing the at least one converted text with previously stored text,
    상기 기 저장된 텍스트가 상기 변환된 적어도 하나의 텍스트와 일치하는 경우, 상기 기 저장된 텍스트와 일치하는 상기 적어도 하나의 텍스트의 위치의 좌표값 추출을 수행하는 것에 의해 실행되는 것인, 이미지 인식 기반 로그인 서비스 제공 방법.If the pre-stored text matches the converted at least one text, by performing coordinate value extraction of the position of the at least one text that matches the pre-stored text, image recognition based login service How to Provide.
  5. 제 4 항에 있어서,The method of claim 4, wherein
    상기 기 저장된 텍스트는, 상기 아이디 및 패스워드의 입력을 안내하는 적어도 하나의 텍스트인 것인, 이미지 인식 기반 로그인 서비스 제공 방법.The pre-stored text is at least one text to guide the input of the ID and password, image recognition-based login service providing method.
  6. 제 1 항에 있어서,The method of claim 1,
    적어도 하나의 사이트 페이지를 적어도 하나의 레이아웃으로 구획하여 적어도 하나의 템플릿을 오버레이(Overlay)하는 단계;Overlaying at least one template by dividing at least one site page into at least one layout;
    상기 오버레이된 적어도 하나의 템플릿을 상기 적어도 하나의 사이트 페이지에 대한 기준 템플릿으로 저장하는 단계;Storing the overlaid at least one template as a reference template for the at least one site page;
    상기 적어도 하나의 템플릿 중 상기 아이디 및 비밀번호가 입력되는 입력 기준 템플릿의 좌표값과, 상기 적어도 하나의 템플릿이 오버레이된 사이트 페이지의 주소(URL)를 매핑하여 저장하는 단계;Mapping and storing coordinate values of an input reference template to which the ID and password of the at least one template are input, and an address (URL) of a site page on which the at least one template is overlaid;
    를 더 포함하는 것인, 이미지 인식 기반 로그인 서비스 제공 방법.The image recognition-based login service providing method further comprising.
  7. 제 6 항에 있어서,The method of claim 6,
    상기 호출된 사이트 페이지로부터 이미지 인식을 이용하여 아이디 및 패스워드의 좌표값을 추출하는 단계는,Extracting the coordinate values of the ID and password by using the image recognition from the called site page,
    상기 호출된 사이트 페이지에 상기 기준 템플릿을 오버레이시키고,Overlay the criteria template on the called site page,
    상기 아이디 및 비밀번호가 입력되는 좌표값을 가지는 입력 기준 템플릿과, 상기 호출된 사이트 페이지의 오버레이된 영역을 확인하고,Checking an input criterion template having coordinate values into which the ID and password are input, and an overlayed area of the called site page,
    상기 확인된 오버레이된 영역이 상기 입력 기준 템플릿과 일치하는 경우, 상기 입력 기준 템플릿의 좌표값을 상기 아이디 및 패스워드의 좌표값으로 추출하는 것을 수행하는 것에 의해 실행되는 것인, 이미지 인식 기반 로그인 서비스 제공 방법.If the identified overlaid area matches the input criterion template, by performing extraction of the coordinate value of the input criterion template as the coordinate value of the ID and password. Way.
  8. 제 1 항에 있어서,The method of claim 1,
    상기 호출된 사이트 페이지로부터 이미지 인식을 이용하여 아이디 및 패스워드의 좌표값을 추출하는 단계는,Extracting the coordinate values of the ID and password by using the image recognition from the called site page,
    상기 호출된 사이트 페이지의 프로그램 소스를 텍스트 기반으로 다운로드하고,Download the program source of the called site page text-based,
    상기 다운로드한 프로그램 소스 중 상기 아이디 및 패스워드의 입력을 안내하는 적어도 하나의 텍스트가 존재하는지의 여부를 확인하고,Checking whether there is at least one text for guiding input of the ID and password among the downloaded program sources,
    상기 확인 결과 상기 아이디 및 패스워드의 입력을 안내하는 적어도 하나의 텍스트가 존재하는 경우, 상기 적어도 하나의 텍스트의 위치를 상기 프로그램 소스를 통하여 확인하고,If there is at least one text for guiding input of the ID and password as a result of the checking, the location of the at least one text is confirmed through the program source,
    상기 확인 결과 상기 적어도 하나의 텍스트의 위치를 상기 아이디 및 패스워드의 좌표값으로 추출하는 것을 수행하는 것에 의해 실행되는 것인, 이미지 인식 기반 로그인 서비스 제공 방법.And extracting the location of the at least one text as a coordinate value of the ID and password as a result of the checking.
  9. 제 1 항에 있어서,The method of claim 1,
    상기 호출된 사이트 페이지로부터 이미지 인식을 이용하여 아이디 및 패스워드의 좌표값을 추출하는 단계는,Extracting the coordinate values of the ID and password by using the image recognition from the called site page,
    상기 호출된 사이트 페이지의 화면을 캡쳐하고,Capture a screen shot of the called site page,
    상기 캡쳐된 화면의 객체 정보를 얻기 위하여 라벨링을 실시하고,Labeling to obtain object information of the captured screen;
    상기 실시된 라벨링을 통하여 상기 객체를 정보 단위로 그룹핑하고,The object is grouped into information units through the labeling,
    상기 그룹핑된 객체의 적어도 하나의 점을 포함하는 윤곽선(Contour)을 추출하고,Extract a contour including at least one point of the grouped objects,
    상기 추출된 윤곽선과 상기 아이디 및 패스워드를 입력하는 위치의 윤곽선과 일치하는지의 여부를 확인하고,Confirm whether or not the extracted contour matches the contour of a position for inputting the ID and password,
    상기 아이디 및 패스워드를 입력하는 위치의 윤곽선과 상기 추출된 윤곽선이 일치하는 경우, 상기 아이디 및 패스워드를 입력하는 윤곽선의 좌표를 상기 아이디 및 패스워드의 좌표값으로 추출하는 것을 수행하는 것에 의해 실행되는 것인, 이미지 인식 기반 로그인 서비스 제공 방법.If the contour of the location for inputting the ID and password coincides with the extracted contour, it is executed by extracting the coordinates of the contour for inputting the ID and password as coordinate values of the ID and password. To provide an image recognition-based login service.
  10. 제 9 항에 있어서,The method of claim 9,
    상기 아이디 및 패스워드를 입력하는 위치의 윤곽선은, 적어도 하나의 사이트 페이지에 대해 상기 아이디 및 패스워드를 입력하는 위치에 따라 기 저장된 윤곽선인 것인, 이미지 인식 기반 로그인 서비스 제공 방법.The contour of the location for inputting the ID and password is a previously stored contour according to the location for inputting the ID and password for at least one site page, image recognition-based login service providing method.
  11. 제 1 항에 있어서,The method of claim 1,
    상기 추출된 아이디 좌표값 및 패스워드 좌표값에 대응하는 위치에 상기 아이디 및 패스워드를 각각 입력하여 로그인을 실시하는 단계는,In the step of logging in by inputting the ID and password, respectively, at a location corresponding to the extracted ID coordinate value and password coordinate value,
    상기 추출된 아이디 좌표값 및 패스워드 좌표값에 대응하는 위치에 각각 클릭 또는 터치 신호를 전송하고,Transmitting a click or touch signal to a location corresponding to the extracted ID coordinate value and password coordinate value, respectively,
    상기 전송된 클릭 또는 터치 신호에 대응하여 활성화된 아이디 입력 박스 또는 패스워드 입력 박스에, 상기 호출된 사이트 페이지에 매핑된 아이디 및 패스워드를 각각 입력하는 제어 신호를 전송하고,Transmits a control signal for inputting an ID and a password mapped to the called site page to an ID input box or a password input box activated in response to the transmitted click or touch signal,
    상기 아이디 및 패스워드의 입력이 완료된 후, 로그인 버튼을 클릭 또는 터치하는 신호를 전송하는 것을 수행하는 것에 의해 실행되는 것인, 이미지 인식 기반 로그인 서비스 제공 방법.And after the input of the ID and password is completed, transmitting a signal of clicking or touching a login button.
  12. 제 1 항에 있어서,The method of claim 1,
    상기 아이디 및 패스워드의 좌표값은, 상기 아이디 및 패스워드를 입력하는 아이디 박스 및 패스워드 박스의 좌표값인 것인, 이미지 인식 기반 로그인 서비스 제공 방법.The coordinate values of the ID and password, the ID box and the password box for inputting the ID and password, the image recognition-based login service providing method.
  13. 제 1 항에 있어서,The method of claim 1,
    적어도 하나의 사이트 제공 서버는, 메신저 서비스 제공 서버, 소셜 네트워크 서비스(Social Network Service) 제공 서버, 인터넷 서비스 제공 서버, 문자 메세지 서비스 제공 서버, 클라우드 서비스 제공 서버, 메일 서비스 제공 서버 중 적어도 하나인 것인, 이미지 인식 기반 로그인 서비스 제공 방법.The at least one site providing server is at least one of a messenger service providing server, a social network service providing server, an internet service providing server, a text message service providing server, a cloud service providing server, and a mail service providing server. To provide an image recognition-based login service.
  14. 제 1 항에 있어서,The method of claim 1,
    상기 추출된 좌표값은, 고정 단말 또는 이동 단말의 화면 크기, 화면 비율 및 화면 배율에 대응하도록 조절되는 것인, 이미지 인식 기반 로그인 서비스 제공 방법.The extracted coordinate value is adjusted to correspond to the screen size, aspect ratio, and screen magnification of the fixed terminal or the mobile terminal, image recognition-based login service providing method.
  15. 로그인 서비스 제공 방법을 실행하는 이미지 기반 로그인 서비스 제공 서버와 연동하여 동작하는 애플리케이션을 제공하는 방법에 있어서,In the method for providing an application that operates in conjunction with the image-based login service providing server for executing the login service providing method,
    상기 이미지 기반 로그인 서비스 제공 서버는 청구항 1 내지 14 중 어느 하나에 기재된 방법을 실시하는 것을 특징을 하는 애플리케이션 제공 방법.The image-based login service providing server is an application providing method, characterized in that for implementing the method of any one of claims 1 to 14.
PCT/KR2014/012137 2014-02-13 2014-12-10 Image recognition-based login service providing method WO2015122614A1 (en)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR1020140016466A KR101451273B1 (en) 2014-02-13 2014-02-13 Method for providing login service based on image recognition
KR10-2014-0016466 2014-02-13

Publications (1)

Publication Number Publication Date
WO2015122614A1 true WO2015122614A1 (en) 2015-08-20

Family

ID=51997814

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/KR2014/012137 WO2015122614A1 (en) 2014-02-13 2014-12-10 Image recognition-based login service providing method

Country Status (2)

Country Link
KR (1) KR101451273B1 (en)
WO (1) WO2015122614A1 (en)

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20050086106A (en) * 2004-02-25 2005-08-30 권영길 Method of automatic log-in for web sites and method to hold the log-in information in common
KR20050111697A (en) * 2004-05-22 2005-11-28 엘지전자 주식회사 Mobile communication terminal for auto-login web-site and method using thereof
KR20080047730A (en) * 2006-11-27 2008-05-30 엘지전자 주식회사 Log-in method using a image-code, and terminal thereof
KR20110092896A (en) * 2010-02-10 2011-08-18 오의진 Method and system of providing auto-login service in web-site

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20050086106A (en) * 2004-02-25 2005-08-30 권영길 Method of automatic log-in for web sites and method to hold the log-in information in common
KR20050111697A (en) * 2004-05-22 2005-11-28 엘지전자 주식회사 Mobile communication terminal for auto-login web-site and method using thereof
KR20080047730A (en) * 2006-11-27 2008-05-30 엘지전자 주식회사 Log-in method using a image-code, and terminal thereof
KR20110092896A (en) * 2010-02-10 2011-08-18 오의진 Method and system of providing auto-login service in web-site

Also Published As

Publication number Publication date
KR101451273B1 (en) 2014-10-16

Similar Documents

Publication Publication Date Title
US8396939B2 (en) Content distribution management device, terminal, program, and content distribution system
US10992646B2 (en) Data transmission method and data transmission apparatus
CN105165069A (en) Method for accessing Wi-Fi hotspot device, Wi-Fi hotspot device, and user equipment
US20130262696A1 (en) Proxy server apparatus, client terminal apparatus, remote access system, transfer control method, access method, and recording medium
CN104869099A (en) Multi-network-account login method and system based on fingerprint account
US9749322B2 (en) Information sharing system and information sharing method
CN110266792B (en) Address translation method, address translation device, address translation equipment and computer-readable storage medium
CN106992975A (en) The recognition methods of malice network address and device
US20180032618A1 (en) System and methods for retrieving raw data from unpredictable data sources
US20150281212A1 (en) Method for providing confidential data-based login service
CN113312588A (en) Method, device, equipment and storage medium for managing operation authority of online document
KR101342407B1 (en) Method for providing intergrated authentication service based on single sign on
KR101128623B1 (en) System and Method for Collaborative Work of Document
KR101710824B1 (en) Method and system for third-party service platform login
US20140351933A1 (en) System and method for inspecting harmful information of mobile device
WO2015088244A1 (en) Method for providing file aging service
WO2015122614A1 (en) Image recognition-based login service providing method
KR101621002B1 (en) Method for providing log in service using image array
KR101768456B1 (en) Dispersion management platform of closed type social network service and management system using the same
US20140089464A1 (en) Computerized system and method for remote access to a computer program
US20170075880A1 (en) Translation for web services
CN110704498A (en) Data extraction method, device, equipment and computer readable storage medium
KR101592725B1 (en) Apparatus of image link applications in smart device
CN103369518A (en) Communication method and communication terminal
AU2017204137B2 (en) Data transmission method and data transmission apparatus

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 14882764

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 14882764

Country of ref document: EP

Kind code of ref document: A1