KR102208323B1 - Kiosk remote control system for the visually impaired using a smartphone - Google Patents

Kiosk remote control system for the visually impaired using a smartphone Download PDF

Info

Publication number
KR102208323B1
KR102208323B1 KR1020200107525A KR20200107525A KR102208323B1 KR 102208323 B1 KR102208323 B1 KR 102208323B1 KR 1020200107525 A KR1020200107525 A KR 1020200107525A KR 20200107525 A KR20200107525 A KR 20200107525A KR 102208323 B1 KR102208323 B1 KR 102208323B1
Authority
KR
South Korea
Prior art keywords
kiosk
smartphone
server
user
information
Prior art date
Application number
KR1020200107525A
Other languages
Korean (ko)
Inventor
백현민
정연술
정상연
정순철
송병석
Original Assignee
주식회사 샘물정보통신
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 샘물정보통신 filed Critical 주식회사 샘물정보통신
Priority to KR1020200107525A priority Critical patent/KR102208323B1/en
Application granted granted Critical
Publication of KR102208323B1 publication Critical patent/KR102208323B1/en

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72475User interfaces specially adapted for cordless or mobile telephones specially adapted for disabled users
    • H04M1/72481User interfaces specially adapted for cordless or mobile telephones specially adapted for disabled users for visually impaired users
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q20/00Payment architectures, schemes or protocols
    • G06Q20/08Payment architectures
    • G06Q20/18Payment architectures involving self-service terminals [SST], vending machines, kiosks or multimedia terminals
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09BEDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B21/00Teaching, or communicating with, the blind, deaf or mute
    • G09B21/001Teaching or communicating with blind persons
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L63/00Network architectures or network communication protocols for network security
    • H04L63/08Network architectures or network communication protocols for network security for authentication of entities
    • H04L63/083Network architectures or network communication protocols for network security for authentication of entities using passwords
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L63/00Network architectures or network communication protocols for network security
    • H04L63/10Network architectures or network communication protocols for network security for controlling access to devices or network resources
    • H04L63/107Network architectures or network communication protocols for network security for controlling access to devices or network resources wherein the security policies are location-dependent, e.g. entities privileges depend on current location or allowing specific operations only from locally connected terminals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/12Protocols specially adapted for proprietary or special-purpose networking environments, e.g. medical networks, sensor networks, networks in vehicles or remote metering networks
    • H04L67/125Protocols specially adapted for proprietary or special-purpose networking environments, e.g. medical networks, sensor networks, networks in vehicles or remote metering networks involving control of end-device applications over a network
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W4/00Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/02Services making use of location information

Abstract

The present invention relates to an unmanned remote control system for controlling a kiosk for a visually impaired person using a smartphone, in which a visually impaired person who has difficulty using an unmanned device such as a kiosk can conveniently control an unmanned device using a smartphone. In more detail, the smartphone possessed by the visually impaired person transmits a location to the server, the server automatically executes the driving of the remote application in the smartphone if a kiosk is located nearby, and the server checks whether a failure occurs and the type of failure to output a customized service to the visually impaired person by controlling to provide the customized service for each failure type by the kiosk when the failure authentication is performed through the smartphone, in the remote control system for a kiosk for the visually impaired person using a smartphone.

Description

스마트폰을 이용한 시각 장애인용 키오스크 제어 리모컨 시스템 {KIOSK REMOTE CONTROL SYSTEM FOR THE VISUALLY IMPAIRED USING A SMARTPHONE}Kiosk control remote control system for the visually impaired using a smartphone {KIOSK REMOTE CONTROL SYSTEM FOR THE VISUALLY IMPAIRED USING A SMARTPHONE}

본 발명은 키오스크와 같은 무인화 기기를 사용하기 어려운 시각장애인이 스마트폰을 이용하여 무인화기기를 편리하게 제어할 수 있는 스마트폰을 이용한 시각 장애인용 키오스크 제어 무인 리모컨 시스템에 관한 것으로, 보다 상세하게는 시각장애인이 소지한 스마트폰이 서버로 위치를 전송하고, 인접한 곳에 키오스크가 위치한 경우 서버가 스마트폰 내 리모트 어플리케이션의 구동을 자동으로 실행시키며, 스마트폰을 통해 장애 인증을 수행하면 이를 서버에서 장애 여부 및 유형을 확인하여 키오스크가 장애 유형별 맞춤 서비스를 제공하도록 제어하여 시각장애인에게 맞춤서비스를 출력할 수 있는 스마트폰을 이용한 시각 장애인용 키오스크 제어 리모컨 시스템에 관한 것이다.The present invention relates to a kiosk control unmanned remote control system for the visually impaired using a smartphone that enables a visually impaired person who is difficult to use an unmanned device such as a kiosk to conveniently control an unmanned device using a smartphone. A smartphone possessed by the handicapped transmits the location to the server, and if a kiosk is located in the vicinity, the server automatically runs the remote application in the smartphone, and if failure authentication is performed through the smartphone, the server determines whether or not there is a failure. The present invention relates to a kiosk control remote control system for the visually impaired using a smart phone capable of outputting customized services to the visually impaired by controlling the kiosk to provide customized services for each type of disability by checking the type.

일반적으로 키오스크(kiosk)는 공공장소에 설치되는 무인 정보단말기로, 교통정보, 경로 안내, 요금 카드 배포, 예약업무, 시설물 안내 등 각종 정보를 안내 및 제공할 수 있고, 작동이 어렵지 않기 때문에 보행자는 키오스크를 이용하여 본인에게 필요한 정보를 빠르고 간편하게 얻을 수 있다.In general, a kiosk is an unmanned information terminal installed in public places. It can guide and provide various information such as traffic information, route guidance, fare card distribution, reservation work, and facility guidance. You can quickly and easily obtain the information you need by using a kiosk.

그러나 키오스크는 공공장소 중 적절한 공간에 설치되는 것으로 별도의 설치공간이 안내되지 않고, 비장애인이 아닌 장애인은 사용이 어려울 우려가 존재한다.However, since the kiosk is installed in an appropriate space among public places, there is a concern that a separate installation space is not guided, and it is difficult for the disabled who are not non-disabled to use.

특히, 시각장애인의 경우 키오스크와 같은 무인정보단말기의 위치 파악이 어렵고, 시각장애인이 키오스크를 확인하더라도 처음 접해보는 경우 조작을 수행할 수 있는 컨트롤러의 위치 확인이 어려울 수 있으며, 최근에는 주로 터치스크린을 사용하여 정보의 안내 및 키오스크의 조작을 수행하기 때문에 기존의 시각장애인을 위한 점자 버튼 보다 더욱 조작이 어려울 우려가 존재한다.In particular, it is difficult to determine the location of an unmanned information terminal such as a kiosk in the case of the visually impaired, and even if a visually impaired person checks the kiosk, it may be difficult to determine the location of a controller that can perform operations when they first encounter it. Since information is guided and kiosks are operated by using them, there is a concern that it is more difficult to operate than the existing braille buttons for the visually impaired.

상술된 문제점을 해결하기 위한 선행기술로 등록특허공보 제10-1480326호에는 "장애인을 위한 키오스크 장치 및 그 화면 운영 방법"이 개시되어 있다.As a prior art for solving the above-described problem, Patent Publication No. 10-1480326 discloses "a kiosk device for the disabled and a method of operating a screen thereof".

그러나 상기 선행기술은 키오스크의 화면을 사용자의 키 높이에 따라 상하로 분할 운영함으로써 장애인이나 키가 작은 사용자도 이용할 수 있으나 키오스크의 위치 파악 및 조작이 어려운 시각장애인 사용자의 문제점을 해결할 수 없다.However, the prior art divides the screen of the kiosk up and down according to the height of the user, so that the handicapped or the user with a small height can use the kiosk, but it cannot solve the problem of the visually impaired user who is difficult to locate and operate the kiosk.

또한, 이러한 문제를 해결할 수 있는 키오스크 장치가 개발되더라도 기존에 설치된 키오스크 장치를 모두 교체해야하므로 막대한 비용이 발생될 것으로 예상된다.In addition, even if a kiosk device capable of solving such a problem is developed, it is expected that enormous costs will be incurred since all existing kiosk devices must be replaced.

따라서, 상술된 문제를 해결할 수 있고, 시각장애인과 같이 키오스크의 위치 파악 및 조작이 어려운 사용자도 용이하게 키오스크를 이용할 수 있는 기술의 개발이 필요한 실정이다.Accordingly, there is a need to develop a technology that can solve the above-described problem and can easily use the kiosk even for users who are difficult to locate and operate the kiosk such as the visually impaired.

한국 등록특허 제10-1480326호 "장애인을 위한 키오스크 장치 및 그 화면 운영 방법"Korean Patent Registration No. 10-1480326 "Kiosk device for the handicapped and its screen operation method"

본 발명은 상술한 문제점을 해결하기 위한 것으로, 공공장소에 설치된 키오스크에 시각장애인이 접근하면 스마트폰 내 어플리케이션이 자동으로 실행되어 키오스크 제어를 위한 장애인 인증을 시각장애인이 스마트폰을 통해 수행할 수 있고, 인증 완료시 시각장애인은 스마트폰을 통해 키오스크의 UI 등을 제어하여 키오스크에서 제공되는 서비스를 편리하게 이용할 수 있는 스마트폰을 이용한 시각 장애인용 키오스크 제어 리모컨 시스템을 제공하는 것을 본 발명의 목적으로 한다.The present invention is to solve the above-described problem, when a visually impaired person approaches a kiosk installed in a public place, an application in the smartphone is automatically executed so that the visually impaired person can perform authentication for the disabled person for kiosk control through the smartphone. It is an object of the present invention to provide a kiosk control remote control system for the visually impaired using a smart phone that allows the visually impaired to conveniently use the services provided by the kiosk by controlling the UI of the kiosk through a smart phone upon completion of authentication. .

또한, 어플리케이션을 통한 장애 인증시 시각장애인을 포함한 장애인의 장애유형에 따라 맞춤형 키오스크 UI를 제공할 수 있는 스마트폰을 이용한 시각 장애인용 키오스크 제어 리모컨 시스템을 제공하는 것을 본 발명의 목적으로 한다.In addition, it is an object of the present invention to provide a kiosk control remote control system for the visually impaired using a smart phone capable of providing a customized kiosk UI according to the type of disability of the disabled, including the visually impaired, when disability authentication through an application.

또한, 별도의 교체없이 기존의 키오스크 장치와 연동되어 장애인용 맞춤형 서비스를 제공할 수 있는 스마트폰을 이용한 시각 장애인용 키오스크 제어 리모컨 시스템을 제공하는 것을 본 발명의 목적으로 한다.In addition, it is an object of the present invention to provide a kiosk control remote control system for the visually impaired using a smartphone capable of providing customized services for the disabled by interlocking with an existing kiosk device without a separate replacement.

본 발명이 해결하고자 하는 과제들은 이상에서 언급된 과제로 제한되지 않으며, 언급되지 않은 또 다른 과제들은 아래의 기재로부터 통상의 기술자에게 명확하게 이해될 수 있을 것이다.The problems to be solved by the present invention are not limited to the problems mentioned above, and other problems that are not mentioned will be clearly understood by those skilled in the art from the following description.

상술한 문제점을 해결하기 위해 스마트폰, 서버 및 키오스크를 포함하여 구성되는 시스템에 있어서,In the system configured to include a smartphone, a server and a kiosk to solve the above problems,

스마트폰은 사용자의 이동에 따라 변화되는 위치를 실시간으로 서버로 전송하며, 상기 키오스크와 인접한 경우 리모트 어플리케이션이 자동 실행되어 사용자가 장애인임을 인증하는 인증용 정보를 상기 서버로 전송하고, 상기 서버는 상기 스마트폰의 위치를 매핑하고, 상기 키오스크와 일정 거리 이내로 인접한 경우 상기 리모트 어플리케이션을 자동으로 실행시키며, 상기 인증용 정보에 기반하여 기 등록된 장애인 회원인지 여부를 판단하고, 장애인 회원임이 확인되면 인증 완료 정보를 상기 스마트폰으로 전달하고, 상기 사용자의 장애 유형과 대응하여 서비스되는 기능 중 적어도 하나의 형태 또는 설정값을 변경하기 위한 맞춤 명령 정보를 생성하여 상기 키오스크에 전달하며, 상기 키오스크는 기 설정된 조건에 부합하는 상기 스마트폰에 상기 키오스크의 등록 정보가 포함된 무선 신호를 전달하고, 상기 서버로부터 수신되는 인증 완료 정보를 기반으로 사용자의 장애 유형에 대응되는 장애인 적용 동작을 수행한다.The smartphone transmits the location that changes according to the user's movement to the server in real time, and when adjacent to the kiosk, a remote application is automatically executed to transmit authentication information to the server to certify that the user is a disabled person, and the server Maps the location of the smartphone, automatically executes the remote application when it is close to the kiosk within a certain distance, determines whether or not a previously registered disabled member based on the authentication information, and completes authentication when it is confirmed that the disabled member is a disabled member. The information is transmitted to the smartphone, and customized command information for changing at least one type or setting value of the serviced functions corresponding to the user's disability type is generated and transmitted to the kiosk, and the kiosk is a preset condition A wireless signal including the registration information of the kiosk is transmitted to the smart phone corresponding to and, based on the authentication completion information received from the server, a disability application operation corresponding to the user's disability type is performed.

또한, 리모트 어플리케이션은 상기 키오스크로부터 수신되는 무선 신호에 대응하여 상기 리모트 어플리케이션을 자동 실행하고, 상기 리모트 어플리케이션을 통해 사용자가 상기 인증용 정보 입력시 이를 상기 서버로 전송하며, 상기 서버에서 송신되는 인증 완료 정보, 맞춤 명령 신호를 수신하는 어플리케이션 구동부 및 상기 서버로부터 맞춤 명령 신호를 수신함에 따라, 상기 맞춤 명령 신호에 대응하여 표시되는 상기 키오스크의 설정값을 변경하는 맞춤형 설정 변환부를 포함한다.In addition, the remote application automatically executes the remote application in response to a wireless signal received from the kiosk, transmits it to the server when the user inputs the authentication information through the remote application, and completes authentication transmitted from the server. And an application driving unit for receiving information and a custom command signal, and a custom setting converter configured to change a set value of the kiosk displayed in response to the custom command signal upon receiving a custom command signal from the server.

이때, 스마트폰은 GPS 기반으로 상기 스마트폰의 위치를 상기 서버에 실시간으로 전송하는 위치 감지부가 포함되며, 상기 서버는 상기 위치 감지부에서 전송된 상기 스마트폰의 위치에서 상기 키오스크가 기설정된 일정거리 이내로 접근시 상기 스마트폰으로 상기 키오스크의 위치를 안내함과 동시에 상기 어플리케이션 구동부를 통해 상기 리모트 어플리케이션의 구동을 실행시킬 수 있다.In this case, the smart phone includes a location detection unit that transmits the location of the smart phone to the server in real time based on GPS, and the server is a predetermined distance from the location of the smart phone transmitted from the location detection unit. When approaching within, the smart phone guides the location of the kiosk and simultaneously drives the remote application through the application driver.

또한, 맞춤형 설정 변환부는 상기 맞춤 명령 정보의 내용에 근거하여, 상기 키오스크에서 제공되는 경고알림을 상기 스마트폰으로도 출력하는 경고알림모듈과, 상기 맞춤 명령 정보의 내용에 근거하여, 상기 키오스크에서 출력되는 사운드를 텍스트화하고, 상기 키오스크에서 디스플레이되는 텍스트 사이즈의 조정을 수행하는 설정제어모듈 및 상기 맞춤 명령 정보의 내용에 근거하여, 상기 키오스크에서 제공될 시각 정보를 사운드 형식으로 변환하여 제공하고, 사운드 출력 설정값을 조정하는 출력제어모듈을 포함한다.In addition, the customized setting conversion unit outputs a warning notification module that outputs a warning notification provided from the kiosk to the smartphone based on the contents of the customized command information, and outputs from the kiosk based on the contents of the customized command information. Based on the content of the setting control module and the custom command information and a setting control module that converts the sound to text and adjusts the text size displayed in the kiosk, converts and provides the visual information to be provided in the kiosk into a sound format, and provides sound It includes an output control module that adjusts the output setting value.

또한, 키오스크는 상기 스마트폰이 수신할 수 있는 무선 통신 신호를 출력하는 호출기가 추가로 포함되며, 상기 무선 통신 신호는 상기 키오스크의 등록 정보를 포함하고, 상기 키오스크의 등록 정보는 키오스크의 설치 위치, 키오스크의 일련번호, 키오스크의 제공 서비스 분야 정보를 포함한다.In addition, the kiosk further includes a pager that outputs a wireless communication signal that the smartphone can receive, the wireless communication signal includes registration information of the kiosk, and the registration information of the kiosk is an installation location of the kiosk, It includes the kiosk's serial number and information on the service field provided by the kiosk.

또한, 서버는 장애인 사용자가 상기 리모트 어플리케이션을 통해 인증 서비스의 회원으로 등록되도록 지원하며, 등록된 장애인 사용자의 스마트폰으로 일련번호를 전송하고, 상기 사용자로부터 제공된 인증용 정보의 사용자의 장애 유무, 장애 정도, 장애 유형 정보를 확인하는 인증관리부 및 상기 인증관리부에서 확인된 사용자의 장애 정도 및 장애 유형 정보에 대응하여 상기 키오스크의 설정값을 변경하는 맞춤 명령 신호를 생성하는 맞춤서비스 관리부를 포함한다.In addition, the server supports the user with a disability to register as a member of the authentication service through the remote application, transmits a serial number to the smartphone of the registered user with a disability, and whether the user has a disability or failure of the authentication information provided from the user And an authentication management unit that checks the degree and failure type information, and a customized service management unit that generates a custom command signal for changing a setting value of the kiosk in response to the user's failure degree and failure type information checked by the authentication management unit.

이때, 서버는 사용자에 의해 이용될 상기 키오스크에 해당되며, 장애인인 사용자에게 적용될 수 있는 할인 혜택 정보 및 사용자별 할인 혜택을 적용한 이력을 관리하여 사용자에게 안내하는 결제 항목 관리부 및 사용자가 상기 스마트폰을 통해 입력한 내용 중 상기 키오스크에 대한 조작 명령을 추출하며, 추출된 조작 명령을 상기 키오스크에 전달하는 중계 지원부를 포함한다.At this time, the server corresponds to the kiosk to be used by the user, and manages the discount benefit information applicable to the disabled user and the history of applying the discount benefit for each user and guides the user to the payment item management unit And a relay support unit that extracts an operation command for the kiosk from among contents inputted through, and transmits the extracted operation command to the kiosk.

또한, 키오스크는 상기 서버로부터 수신되는 맞춤 명령 정보의 내용에 근거하여, 제공하고자 하는 정보를 사용자의 장애 유형에 맞게 변경하여 제공하는 맞춤서비스 제공부가 포함된다.In addition, the kiosk includes a customized service provider that changes and provides information to be provided according to the type of failure of the user, based on the contents of the customized command information received from the server.

위와 같은 구성을 통해 본 발명은 공공장소에 설치된 키오스크에 시각장애인이 접근하면 스마트폰 내 어플리케이션이 자동으로 실행되어 키오스크 제어를 위한 장애인 인증을 시각장애인이 스마트폰을 통해 수행할 수 있고, 인증 완료시 시각장애인은 스마트폰을 통해 키오스크의 UI 등을 제어하여 키오스크에서 제공되는 서비스를 편리하게 이용할 수 있는 효과를 보유한다.Through the above configuration, the present invention automatically executes an application in the smartphone when a visually impaired person approaches a kiosk installed in a public place, so that the visually impaired person can perform authentication through the smartphone for kiosk control. The visually impaired has the effect of being able to conveniently use the services provided by the kiosk by controlling the UI of the kiosk through a smartphone.

또한, 어플리케이션을 통한 장애 인증시 시각장애인을 포함한 장애인의 장애유형에 따라 맞춤형 키오스크 UI를 제공하고, 이를 통해 장애를 가진 사용자가 불편함 없이 키오스크를 사용할 수 있는 효과를 보유한다.In addition, a customized kiosk UI is provided according to the type of disability of the disabled, including the visually impaired, when disability authentication through the application, and through this, it has the effect that users with disabilities can use the kiosk without inconvenience.

또한, 별도의 교체없이 기존의 키오스크 장치와 연동되어 장애인용 맞춤형 서비스를 제공할 수 있어 설치비용 절감 등의 효과를 보유한다.In addition, it is possible to provide customized services for the disabled by interlocking with the existing kiosk device without a separate replacement, thus retaining the effect of reducing installation costs.

본 발명의 효과들은 이상에서 언급된 효과로 제한되지 않으며, 언급되지 않은 또 다른 효과들은 아래의 기재로부터 통상의 기술자에게 명확하게 이해될 수 있을 것이다.The effects of the present invention are not limited to the effects mentioned above, and other effects not mentioned will be clearly understood by those skilled in the art from the following description.

도 1은 본 발명에 따른 스마트폰을 이용한 시각 장애인용 키오스크 제어 리모컨 시스템의 구성을 개략적으로 나타낸 것이다.
도 2는 본 발명의 실시예에 따른 키오스크에서 맞춤 서비스 동작을 수행하는 과정을 나타낸 것이다.
도 3은 본 발명에 따른 스마트폰의 구성을 나타낸 것이다.
도 3a는 본 발명에 따른 맞춤형 설정 변환부의 구성을 나타낸 것이다.
도 4는 본 발명에 따른 서버의 구성을 나타낸 것이다.
도 5는 본 발명에 따른 키오스크의 구성을 나타낸 것이다.
도 6은 본 발명의 실시예에 따른 스마트폰을 이용한 장애 인증 과정을 나타낸 것이다.
도 7은 본 발명의 실시예에 따른 사용자 맞춤형 서비스 제공과정을 나타낸 것이다.
도 8은 본 발명의 실시예에 따른 장애 인증 및 맞춤형 서비스 지원 과정을 나타낸 것이다.
1 schematically shows the configuration of a kiosk control remote control system for the visually impaired using a smart phone according to the present invention.
2 shows a process of performing a customized service operation in a kiosk according to an embodiment of the present invention.
Figure 3 shows the configuration of a smart phone according to the present invention.
3A shows the configuration of a customized setting conversion unit according to the present invention.
4 shows the configuration of a server according to the present invention.
5 shows the configuration of a kiosk according to the present invention.
6 shows a failure authentication process using a smartphone according to an embodiment of the present invention.
7 shows a process of providing a customized service according to an embodiment of the present invention.
8 is a diagram illustrating a failure authentication and customized service support process according to an embodiment of the present invention.

본 발명은 다양한 변경을 가할 수 있고 여러 가지 실시예를 가질 수 있는 바, 특정 실시예들을 도면에 예시하고 상세하게 설명하고자 한다.In the present invention, various modifications may be made and various embodiments may be provided, and specific embodiments will be illustrated in the drawings and described in detail.

그러나, 이는 본 발명을 특정한 실시 형태에 대해 한정하려는 것이 아니며, 본 발명의 사상 및 기술 범위에 포함되는 모든 변경, 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다. 각 도면을 설명하면서 유사한 참조부호를 유사한 구성요소에 대해 사용하였다.However, this is not intended to limit the present invention to a specific embodiment, it is to be understood to include all changes, equivalents, and substitutes included in the spirit and scope of the present invention. In describing each drawing, similar reference numerals have been used for similar elements.

어떤 구성요소가 다른 구성요소에 "연결되어" 있다거나 "접속되어" 있다고 언급된 때에는, 그 다른 구성요소에 직접적으로 연결되어 있거나 또는 접속되어 있을 수도 있지만, 중간에 다른 구성요소가 존재할 수도 있다고 이해되어야 할 것이다. 반면에, 어떤 구성요소가 다른 구성요소에 "직접 연결되어" 있다거나 "직접 접속되어" 있다고 언급된 때에는, 중간에 다른 구성요소가 존재하지 않는 것으로 이해되어야 할 것이다.When a component is referred to as being "connected" or "connected" to another component, it is understood that it may be directly connected or connected to the other component, but other components may exist in the middle. Should be. On the other hand, when a component is referred to as being "directly connected" or "directly connected" to another component, it should be understood that there is no other component in the middle.

본 출원에서 사용한 용어는 단지 특정한 실시예를 설명하기 위해 사용된 것으로, 본 발명을 한정하려는 의도가 아니다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다. 본 출원에서, "포함하다" 또는 "가지다" 등의 용어는 명세서상에 기재된 특징, 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.The terms used in the present application are only used to describe specific embodiments, and are not intended to limit the present invention. Singular expressions include plural expressions unless the context clearly indicates otherwise. In the present application, terms such as "comprise" or "have" are intended to designate the presence of features, numbers, steps, actions, components, parts, or combinations thereof described in the specification, but one or more other features. It is to be understood that the presence or addition of elements or numbers, steps, actions, components, parts, or combinations thereof, does not preclude in advance.

이하, 첨부된 도면을 참조하여, 본 발명의 실시예들을 설명하기로 한다. 각 도면에 제시된 동일한 부호는 동일한 부재를 나타낸다. 본 발명을 설명함에 있어, 관련된 공지 기능 혹은 구성에 관한 구체적인 설명은 본 발명의 요지를 모호하지 않게 하기 위하여 생략한다.Hereinafter, embodiments of the present invention will be described with reference to the accompanying drawings. The same reference numerals in each drawing indicate the same members. In describing the present invention, detailed descriptions of related known functions or configurations are omitted in order not to obscure the subject matter of the present invention.

설명에 앞서, 본 발명에서 기재된 스마트폰(100)은 통상적으로 사용되는 무선 사용자 단말기로 상술된 스마트폰(100)으로 이용하는 것이 가장 바람직하나 반드시 이에 한정된 것은 아니며, 태블릿 PC, 웨어러블 디바이스 등과 같이 무선 통신과 어플리케이션 설치가 가능한 단말기로 대체할 수 있다. 또한, 본 발명에서는 시각장애인에게 정보를 제공할 수 있는 키오스크(300)로 기재하였으나 반드시 키오스크(300)에 한정된 것은 아니며, 다양한 종류의 무인화 기기(예, 무인 주차장의 자동 정산기, 레스토랑 내 자동주문기)로 장애인/비장애인에게 정보 및 서비스를 제공할 수 있는 무인 정보단말기들로 대체될 수 있다.Prior to the description, the smartphone 100 described in the present invention is a commonly used wireless user terminal, and is most preferably used as the above-described smartphone 100, but is not necessarily limited thereto, and wireless communication such as a tablet PC, a wearable device, etc. It can be replaced with a terminal that can install and application. In addition, in the present invention, although described as a kiosk 300 capable of providing information to the visually impaired, it is not necessarily limited to the kiosk 300, and various types of unmanned devices (e.g., automatic payment machines for unmanned parking lots, automatic order machines in restaurants) ) Can be replaced with unmanned information terminals that can provide information and services to the disabled/non-disabled.

도 1은 본 발명에 따른 스마트폰을 이용한 시각 장애인용 키오스크 제어 리모컨 시스템의 구성을 개략적으로 나타낸 것이며, 도 2는 본 발명의 실시예에 따른 키오스크에서 맞춤 서비스 동작을 수행하는 과정을 나타낸 것이고, 도 3은 본 발명에 따른 스마트폰의 구성을 나타낸 것이며, 도 3a는 본 발명에 따른 맞춤형 설정 변환부의 구성을 나타낸 것이고, 도 4는 본 발명에 따른 서버의 구성을 나타낸 것이며, 도 5는 본 발명에 따른 키오스크의 구성을 나타낸 것이고, 도 6은 본 발명의 실시예에 따른 스마트폰을 이용한 장애 인증 과정을 나타낸 것이며, 도 7은 본 발명의 실시예에 따른 사용자 맞춤형 서비스 제공과정을 나타낸 것이다.1 schematically shows the configuration of a kiosk control remote control system for the visually impaired using a smart phone according to the present invention, and FIG. 2 shows a process of performing a customized service operation in a kiosk according to an embodiment of the present invention. 3 shows the configuration of the smartphone according to the present invention, Figure 3a shows the configuration of the customized setting conversion unit according to the present invention, Figure 4 shows the configuration of the server according to the present invention, Figure 5 is A configuration of a kiosk is shown, and FIG. 6 shows a failure authentication process using a smartphone according to an embodiment of the present invention, and FIG. 7 shows a process of providing a customized service according to an embodiment of the present invention.

본 발명에 따른 스마트폰을 이용한 시각 장애인용 키오스크 제어 리모컨 시스템(1)은 시각장애인(이하, 사용자)이 소지하고 있는 스마트폰(100), 상기 스마트폰(100) 내 설치되는 리모트 어플리케이션(110)과 연동되는 서버(200), 상기 서버(200)를 통해 사용자 맞춤형 서비스를 제공할 수 있도록 제어되는 키오스크(300)로 구성된다.The remote control system 1 for controlling a kiosk for the visually impaired using a smart phone according to the present invention includes a smart phone 100 possessed by a visually impaired person (hereinafter, referred to as a user), and a remote application 110 installed in the smart phone 100 It consists of a server 200 interlocked with and a kiosk 300 controlled to provide a customized service through the server 200.

스마트폰(100)은 서버(200)와 연동되는 리모트 어플리케이션(110)이 설치되어 있으며, 사용자 주변에 위치한 키오스크(300)에 접근하면 리모트 어플리케이션(110)이 자동으로 수행되어 장애 인증 및 키오스크(300) 제어가 수행되도록 지원한다.The smart phone 100 has a remote application 110 interlocked with the server 200 installed, and when the user approaches the kiosk 300 located near the user, the remote application 110 is automatically executed to perform failure authentication and kiosk 300 ) Support to perform control.

이때, 스마트폰(100)은 GPS가 구동되도록 하여 사용자의 위치가 서버(200)로 전송되어 실시간으로 매핑될 수 있도록 하고, 이를 통해 사용자 근처에 위치한 키오스크(300)를 서버(200)가 확인하여 스마트폰(100) 내 리모트 어플리케이션(110)을 자동으로 실행시킬 수 있도록 한다.At this time, the smartphone 100 allows the GPS to be driven so that the user's location is transmitted to the server 200 so that it can be mapped in real time, and through this, the server 200 checks the kiosk 300 located near the user. The remote application 110 in the smartphone 100 can be automatically executed.

이러한 스마트폰(100)은 도 3과 같이 리모트 어플리케이션(110), 위치감지부(120), 단말기 통신부(130), 센서부(140), 오디오처리부(150), 카메라부(160)를 포함하여 구성할 수 있다.The smart phone 100 includes a remote application 110, a location detection unit 120, a terminal communication unit 130, a sensor unit 140, an audio processing unit 150, and a camera unit 160 as shown in FIG. 3. Configurable.

리모트 어플리케이션(110)은 서버(200)와 연결되어 키오스크(300)를 제어할 수 있는 것으로, 스마트폰(100)에 다운로드받아 후술된 위치감지부(120)를 통해 키오스크(300)가 사용자를 포함한 스마트폰(100) 근처에 있음을 감지하게 되면 자동으로 실행되어 장애 인증과, 인증 완료 후 키오스크(300)의 UI를 제어할 수 있도록 한다.The remote application 110 is connected to the server 200 to control the kiosk 300, and is downloaded to the smartphone 100 and the kiosk 300 including the user through the location detection unit 120 described below. When it detects that it is in the vicinity of the smartphone 100, it is automatically executed to perform fault authentication and control the UI of the kiosk 300 after authentication is completed.

이러한 리모트 어플리케이션(110)은 어플리케이션 구동부(111)와, 맞춤형 설정 변환부(112)를 포함할 수 있다.The remote application 110 may include an application driver 111 and a customized setting conversion unit 112.

먼저, 어플리케이션 구동부(111)는 서버(200)의 제어 하에 리모트 어플리케이션(110)을 실행시키고 상기 서버(200)로부터 수신된 명령신호에 대응하는 기능을 수행할 수 있다. 예를 들어 어플리케이션 구동부(111)는 사용자의 이동으로 인해 근접한 키오스크(300)로부터 전송되는 비콘신호를 수신함에 따라 푸시알림을 제공받을 수 있도록 리모트 어플리케이션(110)을 구동할 수 있다.First, the application driver 111 may execute the remote application 110 under the control of the server 200 and perform a function corresponding to the command signal received from the server 200. For example, the application driving unit 111 may drive the remote application 110 to receive a push notification when receiving a beacon signal transmitted from a nearby kiosk 300 due to a user's movement.

그 밖에도 어플리케이션 구동부(111)는 다양한 어플리케이션의 기능을 수행할 수 있는데, 예를 들어 리모트 어플리케이션(110)을 동작시켜서 서버(200)의 제어하에 원격으로 스마트폰(100)의 모니터링을 수행할 수 있다. 이때, 모니터링은 사용자가 주로 방문하는 위치 정보, 사용자가 주로 사용하는 기능 정보, 사용자가 장애인 인증을 요청한 횟수가 기준치 이상인 키오스크(300)의 위치 정보 등을 획득하는 동작을 포함할 수 있다.In addition, the application driver 111 may perform various application functions, for example, by operating the remote application 110 to remotely monitor the smartphone 100 under the control of the server 200. . In this case, monitoring may include an operation of acquiring location information mainly visited by the user, function information mainly used by the user, location information of the kiosk 300 in which the number of times the user requests the handicapped authentication is equal to or greater than a reference value.

또한, 사용자의 장애 인증을 자동으로 수행하도록 리모트 어플리케이션(110)을 구동할 수 있다. 이러한 어플리케이션 구동부(111)는 키오스크(300) 측으로부터 무선 통신 신호를 수신함에 대응하여 어플리케이션이 시작되도록 제어할 수 있고, 미처 키오스크(300)로부터 무선 통신 신호를 받지 못하더라도 위치감지부(120)를 통해 서버(200)가 스마트폰(100)을 중심으로 인접한 키오스크(300)가 있는 경우 자동으로 근접한 키오스크(300)와 연동될 수 있도록 리모트 어플리케이션(110)을 구동시킬 수도 있다.In addition, it is possible to drive the remote application 110 to automatically perform the user's failure authentication. Such an application driver 111 may control the application to be started in response to receiving a wireless communication signal from the kiosk 300 side, and even if it does not receive a wireless communication signal from the kiosk 300, the position detection unit 120 Through the server 200, when there is a kiosk 300 adjacent to the smart phone 100, the remote application 110 may be driven so that it can be automatically linked with the adjacent kiosk 300.

또한, 어플리케이션 구동부(111)는 리모트 어플리케이션(110) 내에서의 정보 획득에 관여할 수 있으며, 획득된 정보에 대응하여 관련 동작을 수행할 수 있다.In addition, the application driver 111 may be involved in obtaining information in the remote application 110 and may perform a related operation in response to the obtained information.

예컨데 어플리케이션 구동부(111)는 리모트 어플리케이션(110)이 서버(200)로부터 자동 실행과 관련된 명령신호를 수신함에 따라 리모트 어플리케이션을 자동 실행하고, 그 이후 사용자 생체정보를 획득하여 본인인증을 수행할 수 있다. 상기 본인인증은 타인의 오용을 방지하는 목적과 함께 사용자가 해당 어플리케이션을 통해 장애인 인증을 수행할 의사가 있음을 확인하는 목적 하에 수행될 수 있다. 다양한 실시 예에 따라 본인인증 과정은 생략될 수도 있다. For example, the application driver 111 may automatically execute the remote application as the remote application 110 receives a command signal related to automatic execution from the server 200, and then acquire user biometric information to perform identity authentication. . The identity authentication may be performed for the purpose of preventing misuse by others and for the purpose of confirming that the user intends to perform authentication for the disabled through a corresponding application. According to various embodiments, the identity verification process may be omitted.

또한, 어플리케이션 구동부(111)는 서버(200)를 통해 사용자가 장애인 인증을 완료할 수 있도록 인증 지원 동작을 수행할 수 있다. 예를 들어 스마트폰(100) 내 기저장되어 있는 사용자의 장애인 등록번호 내지는 사용자가 서버(200)를 통해 장애인 등록을 수행했을 당시 발급받은 일련번호 등의 장애인증용 정보를 불러와 서버(200)에 전달할 수 있다. 이에 따라 서버(200)는 스마트폰(100)으로부터 획득된 장애 인증용 정보를 기반으로 유효성을 확인하는 인증 동작을 수행할 수 있다.In addition, the application driver 111 may perform an authentication support operation so that the user can complete authentication of the disabled through the server 200. For example, the user's handicapped registration number stored in the smartphone 100 or the handicapped identification information such as the serial number issued at the time the user registered the handicapped through the server 200 is retrieved and stored in the server 200. I can deliver. Accordingly, the server 200 may perform an authentication operation to check the validity based on the information for failure authentication obtained from the smartphone 100.

이때 서버(200)는 장애 인증용 정보를 통해 장애 여부뿐 아니라 장애 정도, 장애 유형 등의 세부 정보를 더 판단할 수 있다. 이에 따라 서버(200)는 사용자의 장애 정도 및 장애 유형에 대응하여 설정값 내지 일 기능을 변경하여 수행하도록 하는 맞춤 명령 신호를 생성하고 이를 키오스크(300), 스마트폰(100) 중 적어도 하나에 전송할 수 있다.In this case, the server 200 may further determine detailed information such as a degree of a failure and a type of failure, as well as whether a failure has occurred through the failure authentication information. Accordingly, the server 200 generates a custom command signal that changes a set value or a work function in response to the user's degree of failure and the type of failure, and transmits it to at least one of the kiosk 300 and the smartphone 100. I can.

또한 본 발명의 시스템(1)이 사용자의 장애 정보에 대응하여 맞춤형 서비스를 제공하기 위해서는, 사용자가 사용하고자 하는 키오스크(300)에 대한 정보가 서버(200)에 전송되어야 할 필요가 있다. 이를 위해 어플리케이션 구동부(111)는 키오스크(300)로부터 무선 신호(예, 비콘 신호)를 수신할 시, 수신된 신호 내에서 해당 키오스크(300)의 식별값을 추출하거 이를 서버(200)에 전송할 수 있다. 이에 따라 서버(200)는 사용자가 사용하고자 하는 서비스의 종류(상품 주문, 무인 정산, 병원 접수 등)를 판단할 수 있다. 그리고 서버(200)는 사용자가 사용하고자하는 키오스크(300)의 특성 정보에 대응하여 서버(200)에서 맞춤 명령 신호를 산출할 수 있다.In addition, in order for the system 1 of the present invention to provide a customized service in response to the user's failure information, information on the kiosk 300 that the user intends to use needs to be transmitted to the server 200. To this end, when receiving a wireless signal (eg, beacon signal) from the kiosk 300, the application driver 111 extracts the identification value of the kiosk 300 from the received signal and transmits it to the server 200. have. Accordingly, the server 200 may determine the type of service that the user wants to use (product order, unattended settlement, hospital reception, etc.). In addition, the server 200 may calculate a custom command signal from the server 200 in response to characteristic information of the kiosk 300 that the user intends to use.

일 실시예에 따라 스마트폰(100)이 서버(200)로부터 맞춤 명령 신호를 수신한 경우 상기 맞춤형 설정 변환부(112)가 그에 대응하여 동작할 수 있다.According to an embodiment, when the smart phone 100 receives a custom command signal from the server 200, the custom setting conversion unit 112 may operate in response thereto.

이러한 맞춤형 설정 변환부(112)는 도 3a와 같이 경고알림모듈(112a), 설정제어모듈(112b), 출력제어모듈(112c)을 포함하여 구성될 수 있다.The customized setting conversion unit 112 may include a warning notification module 112a, a setting control module 112b, and an output control module 112c as shown in FIG. 3A.

맞춤형 설정 변환부(112)는 서버(200)로부터 맞춤 명령 신호를 수신함에 따라 해당 신호에 대응하여 적어도 일 기능을 사용자의 장애 정도 또는 장애 유형에 대응하여 변경할 수 있다. 상기 맞춤형 설정 변환부(112)는 키오스크(300)와 직접 무선 통신을 수행하여 키오스크(300)로부터 수신되는 정보를 사용자의 장애 유형에 대응하여 스마트폰(100) 상에서 변환 출력할 수 있다. 이때, 서버(200)에서 송신하는 맞춤 명령 신호를 수신하고 그에 대응하여 키오스크(300)에서 수행되는 일 동작(예, 텍스트 표시 동작)을 사용자 장애 유형에 맞춰 변형(예, 사운드 출력)하여 수행할 수 있다.Upon receiving the customized command signal from the server 200, the customized setting conversion unit 112 may change at least one function in response to the corresponding signal in response to the user's degree of failure or the type of failure. The customized setting conversion unit 112 may perform wireless communication with the kiosk 300 directly to convert and output information received from the kiosk 300 on the smartphone 100 in response to a user's failure type. At this time, a custom command signal transmitted from the server 200 is received, and in response thereto, an operation (e.g., text display operation) performed by the kiosk 300 is modified (e.g., sound output) according to the user's disability type. I can.

경고알림모듈(112a)은 키오스크(300)에서 사용자에게 경고 메세지를 전달하고자 하나 사용자의 장애로 인해 전달이 제대로 이루어지지 않을 경우 사용자가 소지한 스마트폰(100)에서 해당 알림을 사용자가 인식 가능한 감각 형태로 변환할 수 있다. 예를 들어, 키오스크(300)측에서 시각장애인인 사용자에게 경고 알림을 제공하기 위해 스마트폰(100)에 경고음이 출력되고, 진동 동작 등을 함께 수행하여 사용자가 경고를 인식할 수 있도록 한다.The warning notification module 112a is intended to deliver a warning message to the user from the kiosk 300, but if the delivery is not properly performed due to a user's failure, the user can recognize the notification from the smartphone 100 possessed by the user. Can be converted to form. For example, a warning sound is output to the smartphone 100 in order to provide a warning notification to a user with a visual impairment from the kiosk 300 side, and a vibration operation is performed together so that the user can recognize the warning.

상기 경고알림모듈(112a)은 경고 알림을 수행해야할 상황을 인식하기 위해 키오스크(300)와 무선 통신 연결을 수립하고, 상기 키오스크(300)로부터 수신되는 경고 신호에 기반하여 변환된 형태의 경고 알림 동작을 수행할 수 있다. 예를 들어 경고알림모듈(112a)은 키오스크(300)로부터 경고음 발생 신호를 수신하면, 그에 대응하여 진동 동작 등을 수행할 수 있다.The warning notification module 112a establishes a wireless communication connection with the kiosk 300 in order to recognize a situation in which warning notification should be performed, and operates a converted warning notification based on the warning signal received from the kiosk 300 Can be done. For example, when the warning notification module 112a receives a warning sound generation signal from the kiosk 300, it may perform a vibration operation in response thereto.

다양한 실시예에 따라 경고알림모듈(112a)은 리모트 어플리케이션(110)이 동작 중인 상태에서는 스마트폰(100)이 경고음 형태의 사운드를 입력 받기 위한 대기 모드로 유지시킬 수 있으며, 이에 따라 경고알림모듈(112a)은 경고음을 마이크를 통해 입력 받으면 이를 진동으로 변환 출력할 수 있다. 특히, 경고음을 들을 수 있는 시각장애인이라 하더라도 주변 소음 등으로 인해 경고음을 제대로 듣지 못할 우려가 존재하기 때문에 스마트폰(100)이 진동하여 사용자에게 키오스크(300)에서 경고음이 발생되었다는 사실을 전달할 수 있다.According to various embodiments, the warning notification module 112a may keep the smartphone 100 in a standby mode for receiving a sound in the form of a warning sound while the remote application 110 is operating, and accordingly, the warning notification module 112a 112a) can convert the warning sound into vibration when it is input through a microphone. In particular, even for the visually impaired who can hear the warning sound, there is a fear that the warning sound may not be properly heard due to ambient noise, etc., so that the smartphone 100 vibrates to convey the fact that the warning sound has been generated from the kiosk 300 to the user. .

설정제어모듈(112b)은 키오스크(300)에서 사운드로 출력되는 데이터를 텍스트로 변환하거나, 수화 영상으로 변환하여 화면에 표시하도록 제어하는 구성이다. 또한, 설정제어모듈(112b)은 화면에 표시되는 텍스트 등의 이미지 사이즈를 확대변경하여 표시하도록 제어할 수도 있다. 이러한 설정제어모듈(112b)을 통해 청각 장애 또는 시각 장애가 있는 사용자의 인지 능력을 최대한 활용하여 의사소통을 원활하게 수행할 수 있도록 지원할 수 있다. 특히, 전맹이 아닌 시력이 남아있는 시각장애인의 경우 키오스크(300)의 디스플레이를 확대 변경하여 용이하게 조작할 수 있도록 유도할 수 있다.The setting control module 112b is a component that converts data output as sound from the kiosk 300 into text or converts it into a sign language image and displays it on a screen. In addition, the setting control module 112b may control to enlarge and change the size of an image such as text displayed on the screen. Through the setting control module 112b, it is possible to support to facilitate communication by utilizing the cognitive ability of a user with a hearing impairment or a visual impairment to the maximum. In particular, in the case of a visually impaired person who is not blind, but who has remaining vision, the display of the kiosk 300 may be enlarged and changed to facilitate manipulation.

출력제어모듈(112c)은 키오스크(300)에서 제공하고자 하는 표시 데이터(예, 텍스트, 아이콘 이미지 등)를 사운드로 변환하여 출력하는 동작을 수행할 수 있다. 나아가 출력제어모듈(112c)은 난청 장애가 있는 사용자를 위해, 해당 사용자에게 적합한 볼륨으로 출력값을 조정할 수 있다.The output control module 112c may perform an operation of converting display data (eg, text, icon image, etc.) to be provided by the kiosk 300 into sound and outputting the converted sound. Furthermore, the output control module 112c may adjust the output value to a volume suitable for the user for a user with a hearing loss disorder.

위치감지부(120)는 스마트폰(100)에 내장되어 실시간으로 스마트폰(100)의 위치를 서버(200)로 전송할 수 있고, 이를 통해 서버(200)는 스마트폰(100)의 위치를 실시간으로 매핑하여 파악할 수 있으며, 스마트폰(100)과 인접한 곳에 키오스크(300)와 연결시켜 사용자, 특히 시각장애인이 이동 중 파악하기 어려운 키오스크(300)의 존재 및 위치를 확인할 수 있도록 한다.The location detection unit 120 is embedded in the smart phone 100 and can transmit the location of the smart phone 100 to the server 200 in real time, through which the server 200 can detect the location of the smart phone 100 in real time. It can be mapped and identified, and is connected to the kiosk 300 adjacent to the smartphone 100 so that the user, especially the visually impaired, can check the presence and location of the kiosk 300 that is difficult to grasp while moving.

이러한 위치감지부(120)는 GPS를 기반으로 하여 스마트폰(100)을 포함한 사용자의 위치를 파악하고, 이를 통해 키오스크(300)의 위치와 근접하면 서버(200)에서 어플리케이션 구동부(111)를 통해 리모트 어플리케이션(110)을 실행시킨다.The location detection unit 120 identifies the location of the user including the smartphone 100 based on GPS, and when it is close to the location of the kiosk 300 through the GPS, the server 200 uses the application driver 111 The remote application 110 is executed.

한편, 위치감지부(120)를 통해 스마트폰(100) 및 사용자의 위치를 서버(200)가 파악하여 키오스크(300)와 근접시 리모트 어플리케이션(110)을 작동시킬 수 있으나, 다른 실시예로 키오스크(300) 내에서 송출되는 근거리 통신 신호(예, 비콘신호)를 후술된 단말기 통신부(130)를 통해 수신받아 위치감지부(120)가 근처에 키오스크(300)가 존재함을 사용자가 파악할 수 있도록 하고, 이를 통해 위치감지부(120)가 서버(200)로 신호를 보내 사용자의 위치에서 근접한 키오스크(300)의 위치를 오디오처리부(150) 등을 통해 안내하여 사용자에게 근처에 존재하는 키오스크(300)의 위치를 안내할 수도 있다.On the other hand, the server 200 can detect the location of the smartphone 100 and the user through the location detection unit 120 and operate the remote application 110 when it is close to the kiosk 300, but in another embodiment, the kiosk A short-range communication signal (e.g., a beacon signal) transmitted from within 300 is received through the terminal communication unit 130, which will be described later, so that the location detection unit 120 can recognize that the kiosk 300 exists nearby. And, through this, the location detection unit 120 sends a signal to the server 200 to guide the location of the kiosk 300 close to the user's location through the audio processing unit 150, etc. You can also guide the location of ).

단말기 통신부(130)는 스마트폰(100)과 서버(200)간의 데이터 송수신을 위해 네트워크를 이용할 수 있으며, 상기 네트워크의 종류는 특별히 제한되지 않지만 예를 들어 인터넷 프로토콜(IP)을 통하여 대용량 데이터의 송수신 서비스를 제공하는 아이피(IP: Internet Protocol)망 또는 서로 다른 IP 망을 통합한 올 아이피(All IP)망일 수도 있다. 또한, 네트워크는 유선망, Wibro(Wireless Broadband)망, WCDMA를 포함하는 이동통신망, HSDPA(High Speed Downlink Packet Access)망 및 LTE(Long Term Evolution) 망을 포함하는 이동통신망, LTE advanced(LTE-A), 5G(Five Generation)를 포함하는 이동통신망, 위성 통신망 및 와이파이(Wi-Fi)망 중 하나 이거나 또는 이들 중 적어도 하나 이상을 결합하여 이루어질 수 있다.The terminal communication unit 130 can use a network to transmit and receive data between the smartphone 100 and the server 200, and the type of the network is not particularly limited, but, for example, transmission and reception of large-capacity data through the Internet Protocol (IP). It may be an IP (Internet Protocol) network that provides services or an All IP network that integrates different IP networks. In addition, the network includes a wired network, a wireless broadband (Wibro) network, a mobile communication network including WCDMA, a high speed downlink packet access (HSDPA) network and a mobile communication network including a long term evolution (LTE) network, and LTE advanced (LTE-A). , A mobile communication network including 5G (Five Generation), a satellite communication network, and a Wi-Fi network, or may be formed by combining at least one or more of them.

이러한 단말기 통신부(130)는 서버(200)와 키오스크(300)와의 통신을 수행할 수 있다. 구체적으로 단말기 통신부(130)는 비콘을 비롯한 근거리 무선 통신 신호를 키오스크(300)로부터 수신할 수 있다.The terminal communication unit 130 may communicate with the server 200 and the kiosk 300. Specifically, the terminal communication unit 130 may receive a short-range wireless communication signal including a beacon from the kiosk 300.

이때, 단말기 통신부(130)가 수신한 무선 신호가 키오스크(300)로부터 수신된 장애인 서비스 호출 신호인 경우, 상기 단말기 통신부(130)는 다시 이를(또는 해당 호출 신호가 수신되었음을 알리는 제 2신호) 서버(200)측에 전송할 수 있다.At this time, if the wireless signal received by the terminal communication unit 130 is a service call signal for a disabled person received from the kiosk 300, the terminal communication unit 130 returns it (or a second signal indicating that the corresponding call signal has been received) It can be transmitted to the (200) side.

이를 통해 스마트폰(100) 내 단말기 통신부(130)는 서버(200)로부터 일 명령 신호를 수신하여 자동으로 장애인 인증에 요구되는 일련의 동작을 수행할 수 있다. 이 때 상기 스마트폰(100)은 예를 들어 리모트 어플리케이션을 상기 서버(200)의 제어하에 실행할 수 있다.Through this, the terminal communication unit 130 in the smartphone 100 may receive a command signal from the server 200 and automatically perform a series of operations required for authentication of the disabled. In this case, the smartphone 100 may execute, for example, a remote application under the control of the server 200.

오디오처리부(150)는 소리(sound)와 전기 신호를 쌍방향으로 변환시킬 수 있는 것으로, 오디오 처리부의 적어도 일부 구성요소는 입출력 인터페이스에 포함될 수 있다. 오디오 처리부는, 예를 들면, 스피커, 리시버, 이어폰, 또는 마이크 등을 통해 입력 또는 출력되는 소리 정보를 처리할 수 있다.The audio processing unit 150 is capable of bidirectionally converting sound and electrical signals, and at least some components of the audio processing unit may be included in the input/output interface. The audio processing unit may process sound information input or output through, for example, a speaker, a receiver, an earphone, or a microphone.

본 발명에 따른 오디오처리부(150)는 스마트폰(100)을 통해 각종 안내 메시지 사운드를 출력하도록 제어할 수 있으며, 또한 사용자의 음성 데이터를 입력받을 수 있다. 이러한 오디오처리부(150)는 사용자의 장애 유형 및 정도에 대응하여 출력 사운드의 볼륨값을 제어할 수 있다.The audio processing unit 150 according to the present invention can control to output various guide message sounds through the smart phone 100, and can also receive the user's voice data. The audio processing unit 150 may control a volume value of the output sound according to the type and degree of the user's disability.

센서부(140)는 물리량을 계측하거나 시계의 작동 상태를 감지하여, 계측 또는 감지된 정보를 전기신호로 변환할 수 있다. 이러한 센서부(140)는 제스처 센서, 자이로 센서, 기압 센서, 마그네틱 센서, 가속도 센서, 그립 센서, 근접 센서, 컬러(color) 센서(예: RGB(red, green, blue) 센서), 생체 센서, 온/습도 센서, 조도 센서, 또는 UV(ultra violet) 센서 중의 적어도 하나를 포함할 수 있다. 추가적으로 또는 대체적으로(additionally or alternatively), 센서부(140)는 예를 들면, 후각 센서(E-nose sensor), EMG 센서(electromyography sensor), EEG 센서(electroencephalogram sensor), ECG 센서(electrocardiogram sensor), IR(infrared) 센서, 홍채 센서 및/또는 지문 센서를 포함할 수 있다. 센서부는 그 안에 속한 적어도 하나 이상의 센서들을 제어하기 위한 제어 회로를 더 포함할 수 있다.The sensor unit 140 may measure a physical quantity or detect an operating state of a watch, and convert the measured or sensed information into an electric signal. The sensor unit 140 includes a gesture sensor, a gyro sensor, an air pressure sensor, a magnetic sensor, an acceleration sensor, a grip sensor, a proximity sensor, a color sensor (eg, a red, green, blue) sensor, a biometric sensor, It may include at least one of a temperature/humidity sensor, an illuminance sensor, or an ultra violet (UV) sensor. Additionally or alternatively, the sensor unit 140 may include, for example, an olfactory sensor (E-nose sensor), an electromyography sensor (EMG sensor), an electroencephalogram sensor (EEG sensor), an ECG sensor (electrocardiogram sensor), It may include an infrared (IR) sensor, an iris sensor, and/or a fingerprint sensor. The sensor unit may further include a control circuit for controlling at least one or more sensors included therein.

상술된 센서부(140)는 본인 인증을 위한 생체 센서를 포함할 수 있다. 즉, 생체 센서로 지문센서, 홍채센서 등을 포함할 수 있으며 이를 통해 본인 인증을 수행할 수 있다. 본인 인증은 사용자가 장애인 인증을 수행하기 전 단계에서 수행될 수 있다.The above-described sensor unit 140 may include a biometric sensor for personal authentication. That is, a fingerprint sensor, an iris sensor, etc. may be included as a biometric sensor, and identity authentication may be performed through this. Identity authentication may be performed at a stage before the user performs authentication for the disabled.

카메라부(160)는 시각장애인 외에도 청각장애인 등을 위한 구성으로 정지영상 및 동영상을 촬영할 수 있는 장치로서, 하나 이상의 이미지센서(예: 전면 센서 또는 후면 센서), 렌즈, ISP(image signal processor), 또는 플래시 (flash)(예: LED 또는 xenon lamp 등)를 포함할 수 있다.The camera unit 160 is a device capable of photographing still images and videos in a configuration for the visually impaired, as well as the hearing impaired, and includes at least one image sensor (eg, a front sensor or a rear sensor), a lens, an image signal processor (ISP), Alternatively, it may include a flash (eg, LED or xenon lamp).

상술된 카메라부(160)는 키오스크(300) 사용과 관련하여 제공될 수 있는 QR 코드 등의 이미지 요소를 촬영하여 해당 정보를 획득할 수 있다. 그 밖에도 카메라부(160)는 필요에 따라 사용자가 자신의 모습을 촬영하여 수화하는 모습을 녹화할 수 있도록 지원할 수 있다.The above-described camera unit 160 may acquire corresponding information by photographing image elements such as a QR code that may be provided in connection with the use of the kiosk 300. In addition, the camera unit 160 may support the user to record his or her own image and sign language as necessary.

서버(200)는 스마트폰(100)에 설치된 리모트 어플리케이션(110)을 제어 및 관리하는 플랫폼 서버로, 스마트폰(100) 또는 키오스크(300)의 적어도 일 기능을 장애인 특성 정보(예, 장애 유형, 사용자가 기 지정한 본인의 장애 정도 등)에 따라 변경되도록 제어하는 역할을 수행한다.The server 200 is a platform server that controls and manages the remote application 110 installed in the smart phone 100, and provides at least one function of the smart phone 100 or the kiosk 300 with disability characteristic information (eg, type of disability, It plays a role of controlling changes according to the user's degree of disability previously specified).

그 외 기존의 웹 서버의 기능, 맞춤형 의사소통 기능, 미디어 서비스 제공 기능 등을 수행할 수 있다.In addition, it can perform functions of the existing web server, customized communication functions, and media service provision functions.

이러한 서버(200)는 도 4와 같이 서버 통신부(210), 저장부(220), 인증관리부(230), 맞춤서비스 관리부(240), 결제 항목 관리부(250), 중계지원부(260)를 포함한다.As shown in FIG. 4, the server 200 includes a server communication unit 210, a storage unit 220, an authentication management unit 230, a customized service management unit 240, a payment item management unit 250, and a relay support unit 260. .

서버 통신부(210)는 스마트폰(100) 및 키오스크(300)와의 무선 통신기능을 수행하는 것으로, 서버 통신부(210)는 스마트폰(100)으로부터 전송되는 키오스크(300) 사용 요청 신호(스마트폰(100)이 키오스크(300)로부터 전송되는 비콘 신호를 수신하는 경우 해당 키오스크(300)에 대한 사용 요청 신호를 서버(200)로 전송할 수 있음)를 수신할 수 있다.The server communication unit 210 is to perform a wireless communication function with the smart phone 100 and the kiosk 300, the server communication unit 210 is a kiosk 300 use request signal transmitted from the smart phone 100 (smart phone ( When 100) receives a beacon signal transmitted from the kiosk 300, a use request signal for the kiosk 300 may be transmitted to the server 200).

또한, 서버 통신부(210)는 또한 서버(200)가 관리하는 플랫폼에 등록된 스마트폰(100)들에 대한 정보를 수신하고, 이를 관리할 수 있다. 예를 들어 서버 통신부(210)는 스마트폰(100)의 위치, 해당위치에서의 상황별 비상안내 알림(예, 비상구 위치 등) 정보, 키오스크(300)에서 제공하는 서비스 정보(텍스트, 사운드 포함), 키오스크(300)의 분야 정보(예, 레스토랑 주문기, 무인 정산기 등의 종류로 구분될 수 있음) 등의 정보를 수신할 수 있다.In addition, the server communication unit 210 may also receive and manage information on the smartphones 100 registered in the platform managed by the server 200. For example, the server communication unit 210 provides information on the location of the smartphone 100, emergency information notification (eg, emergency exit location, etc.) for each situation at the corresponding location, and service information (including text and sound) provided by the kiosk 300 , Information such as field information of the kiosk 300 (eg, may be classified into a restaurant ordering machine, an unmanned payment machine, etc.) may be received.

저장부(220)는 사용자 등록 정보, 무인화 기기 등록 정보를 저장할 수 있다.The storage unit 220 may store user registration information and unmanned device registration information.

또한, 저장부(220)는 장애 유형, 장애 정도에 대응하는 맞춤 서비스 명령 코드를 산출하는 것과 관련된 명령 및 알고리즘을 저장할 수 있다. 이외에도 저장부(220)는 스마트폰(100)의 사용 로그 등과 관련된 정보를 수신하고 기록 및 관리할 수 있다.In addition, the storage unit 220 may store commands and algorithms related to calculating a customized service command code corresponding to the type of failure and the degree of the failure. In addition, the storage unit 220 may receive, record, and manage information related to a usage log of the smartphone 100.

인증관리부(230)는 사용자의 장애 인증을 수행하는 것과 관련된 일련의 동작을 처리할 수 있다.The authentication management unit 230 may process a series of operations related to performing failure authentication of a user.

먼저, 인증관리부(230)는 장애인 사용자가 리모트 어플리케이션(110)을 통해 서버(200)에 회원으로 등록되도록 지원할 수 있다. 이러한 인증관리부(230)는 사용자가 스마트폰(100)을 통해 리모트 어플리케이션(110)을 실행하면 사용자가 장애인임을 확인하기 위한 사용자 정보를 입력하도록 요청할 수 있다. 이에 따라 인증관리부(230)는 회원으로 등록하고자 하는 사용자의 인적 정보를 기반으로 회원 가입을 수행할 수 있다. 회원 가입을 위한 인증 방식에는 SNS 인증서버를 통한 본인인증 과정이 추가로 포함될 수 있다.First, the authentication management unit 230 may support a disabled user to register as a member in the server 200 through the remote application 110. When the user executes the remote application 110 through the smartphone 100, the authentication management unit 230 may request to input user information for confirming that the user is a disabled person. Accordingly, the authentication management unit 230 may register as a member based on personal information of a user who wishes to register as a member. The authentication method for membership registration may additionally include a self-authentication process through an SNS authentication server.

상술된 인증관리부(230)는 일 사용자가 회원가입 시, 해당 사용자의 장애 유형, 장애 정도에 관한 정보를 사용자로부터 획득하여 관리할 수 있다. When a user signs up as a member, the above-described authentication management unit 230 may acquire and manage information about the user's disability type and degree of disability from the user.

장애인임을 인정받은 사용자는 서버(200)에 회원으로 등록될 수 있다. 다양한 실시예에 따라 서버(200)는 회원으로 등록이 완료됨에 따라 생성된 회원 일련번호를 스마트폰(100)에 전송하여, 리모트 어플리케이션(110) 내에서 관리되도록 할 수 있다. 상기 일련번호는 추후 인증용 정보로써 서버(200)에 전달되어 장애인 인증시 활용될 수 있다.A user recognized as a disabled person may be registered as a member in the server 200. According to various embodiments, the server 200 may transmit a member serial number generated as a member registration is completed to the smartphone 100 to be managed within the remote application 110. The serial number may be transmitted to the server 200 as authentication information later and used when authenticating the disabled.

또한, 인증관리부(230)는 사용자 등록뿐 아니라, 임의의 사용자가 장애인으로 회원 가입된 사용자임을 인증하는 절차를 수행할 수 있다.In addition, the authentication management unit 230 may perform not only user registration, but also a procedure for authenticating that a user is a user registered as a member with a disability.

또한, 인증관리부(230)는 스마트폰(100)으로부터 전송된 인증용 정보가 유효한지 여부를 검증할 수 있다. 나아가 인증관리부(230)는 장애 인증이 완료된 사용자의 장애 정도, 장애 유형 등에 관한 세부 정보를 추출하고 이를 이하의 맞춤서비스 관리부(240)에 제공할 수 있다.In addition, the authentication management unit 230 may verify whether the authentication information transmitted from the smartphone 100 is valid. Furthermore, the authentication management unit 230 may extract detailed information about the degree of failure and the type of failure of the user who has completed the failure authentication, and provide it to the customized service management unit 240 below.

맞춤서비스 관리부(240)는 사용자의 장애 정도 및 장애 유형에 대응하여 그 내용이 가변되는 항목인 맞춤 서비스 항목을 관리할 수 있다. 상기 맞춤 서비스 항목은 예컨대, 화면에 표시되는 텍스트의 사이즈, 출력되는 안내 메시지의 볼륨, 경고음의 볼륨 등을 포함할 수 있다.The customized service management unit 240 may manage a customized service item, which is an item whose contents are changed in response to a user's degree of failure and a type of failure. The customized service item may include, for example, a size of a text displayed on a screen, a volume of an output guide message, a volume of a warning sound, and the like.

이러한 맞춤서비스 관리부(240)는 일 실시 예에 따라, 사용자의 장애 정도, 장애 유형에 대응하는 맞춤 명령 신호를 생성할 수 있으며, 맞춤서비스 관리부(240)는 생성된 맞춤 명령 신호를 키오스크(300) 또는 스마트폰(100)에 전송할 수 있다.According to an embodiment, the customized service management unit 240 may generate a customized command signal corresponding to a user's level of failure and a type of failure, and the customized service management unit 240 may transmit the generated customized command signal to the kiosk 300. Or it can be transmitted to the smartphone 100.

또한, 맞춤서비스 관리부(240)에서 생성되는 맞춤 명령 신호는 표시되는 텍스트 사이즈를 변경하기 위한 신호, 출력되는 안내 메시지의 볼륨, 또는 경고음의 볼륨을 변경하기 위한 신호, 텍스트를 사운드로 변환(TTS)하기 위한 신호, 사운드를 텍스트로 변환(STT)하기 위한 신호, 사운드를 램프 점멸 동작 등으로 변환하기 위한 신호 등이 포함될 수 있다.In addition, the customized command signal generated by the customized service management unit 240 is a signal for changing the displayed text size, a signal for changing the volume of an output guide message, or a volume of a warning sound, and converting text into sound (TTS). A signal for converting a sound to text (STT), a signal for converting a sound to a lamp blinking operation, and the like may be included.

예를 들어 맞춤서비스 관리부(240)는 사용자가 시각장애인이고, 시각 장애 정도가 전맹(全盲)임을 확인한 경우, 출력되는 메세지와 함께 해당 메세지를 음성화한 데이터를 키오스크(300)에서 표시하도록 하며, 출력되는 안내 음성의 볼륨을 3레벨 증가시키기 위한 맞춤 명령 신호를 생성하고, 이를 키오스크(300)측에 전송할 수 있다.For example, when it is confirmed that the user is a visually impaired person and that the degree of visual impairment is all blind, the customized service management unit 240 causes the kiosk 300 to display the voice-formed data of the message along with the output message. A custom command signal for increasing the volume of the guide voice to be increased by 3 levels may be generated and transmitted to the kiosk 300 side.

상기 맞춤 명령 신호는 장애의 유형과, 장애의 정도에 대응하여 다양하게 산출될 수 있다.The customized command signal may be calculated in various ways according to the type of the failure and the degree of the failure.

또한, 맞춤서비스 관리부(240)는 사용자가 선호하는 정보 전달 방식으로 서비스를 제공하기 위해, 사용자의 선택사항을 반영한 맞춤 명령 신호를 생성할 수 있다. 예를 들어, 시각 장애가 있는 특정 사용자가 출력 디스플레이 데이터의 크기를 증가시키지 않고 음성으로 서비스 내용을 전달받고자 하는 경우, 선호 서비스 방식 항목에서 직접 디스플레이 변경 항목은 해제하고 TTS항목만을 선택할 수 있다.In addition, the customized service management unit 240 may generate a customized command signal reflecting the user's selection in order to provide a service in a manner of transmitting information preferred by the user. For example, when a specific user with a visual impairment wants to receive service contents by voice without increasing the size of the output display data, the display change item can be released from the preferred service method item and only the TTS item can be selected.

그리고 그에 따라 맞춤서비스 관리부(240)는 사용자에게 서비스 제공시, 텍스트는 유지한 상테에서, 추가의 음성 데이터를 키오스크(300) 또는 스마트폰(100)에서 출력되도록 요청하는 신호를 생성할 수 있다.Accordingly, when providing a service to a user, the customized service management unit 240 may generate a signal requesting that additional voice data be output from the kiosk 300 or the smartphone 100 while maintaining the text.

즉, 맞춤서비스 관리부(240)는 사용자가 직접 자신이 서비스를 제공받는 전달 방식을 선택하거나 추가하도록 지원할 수 있다.That is, the customized service management unit 240 may support the user to directly select or add a delivery method in which the service is provided.

또한, 다른 장애유형으로 사용자가 청각 장애인이고, 청각 장애의 정도가 5단계 중 3단계인 것을 확인한 경우, 맞춤서비스 관리부(240)는 출력되는 음성과 함께 해당 메시지를 텍스트화 한 데이터를 화면에 함께 표시하며, 출력되는 안내 음성의 볼륨을 3레벨 증가시키기 위한 맞춤 명령 신호를 생성하고 이를 키오스크(300)측에 전송할 수 있다.In addition, when it is confirmed that the user is a hearing impaired as a different type of disability and the degree of hearing impairment is 3 out of 5 steps, the customized service management unit 240 displays the text of the message along with the output voice on the screen. It is possible to generate a custom command signal for increasing the volume of the displayed and output guide voice by 3 levels and transmit it to the kiosk 300 side.

또한, 청각 장애가 있는 특정 사용자가 출력 사운드 볼륨은 증가시키지 않고, 텍스트로 서비스 내용을 전달받고자 하는 경우, 선호 서비스 방식 항목에서 직접 볼륨 변경 항목은 해제하고 STT항목만을 선택할 수 있다. 그리고 그에 따라 맞춤서비스 관리부(240)는 사용자에게 서비스 제공 시, 볼륨은 유지한 상태에서, 추가의 텍스트 데이터를 키오스크(300) 또는 스마트폰(100) 화면에 표시하도록 요청하는 신호를 생성할 수도 있다.In addition, when a specific user with a hearing impairment does not increase the output sound volume and wants to receive service contents in text, the volume change item can be released from the preferred service method item and only the STT item can be selected. And accordingly, the customized service management unit 240 may generate a signal requesting to display additional text data on the screen of the kiosk 300 or the smartphone 100 while maintaining the volume when providing the service to the user. .

결제 항목 관리부(250)는 장애인인 사용자에게 적용할 수 있는 할인 혜택 정보 및 사용자별 할인 혜택을 적용한 이력을 관리하고 이를 사용자에게 안내할 수 있다.The payment item management unit 250 may manage discount benefit information applicable to a user with a disability and a history of applying a discount benefit for each user, and guide the information to the user.

예를 들어 결제 항목 관리부(250)는 키오스크(300) 중 장애인 인증에 따라 결제 금액의 할인이 적용되는 기기들의 식별값을 별도로 관리할 수 있다.For example, the payment item management unit 250 may separately manage identification values of devices in the kiosk 300 to which a discount of a payment amount is applied according to authentication of a disabled person.

일 실시예에 따라 결제 항목 관리부(250)는 일 사용자가 이용하고자 하는 키오스크(300)가 장애인 할인이 적용 가능한 기기인지 여부를 확인할 수 있으며, 할인이 적용 가능한 것으로 판단되는 경우, 사용자에게 '해당 기기를 통해 결제할 경우 장애인 할인이 적용 가능하다'라는 안내를 푸시 알림 등의 형태로 제공할 수 있다.According to an embodiment, the payment item management unit 250 may check whether the kiosk 300 intended to be used by a user is a device to which the disabled discount is applicable, and when it is determined that the discount is applicable, the user may In the case of payment through, a disability discount is applicable' may be provided in the form of a push notification.

또한, 결제 항목 관리부(250)는 사용자의 장애인 인증을 통해 결제를 수행한 이력을 기록하고, 사용자의 조회 요청에 따라 기록된 사용자의 결제 이력 정보를 스마트폰(100)으로 제공할 수 있다. 상기 사용자의 결제 이력 정보는 사용자가 이용한 키오스크(300)의 종류와 설치 위치 등의 정보를 포함할 수 있다. 나아가, 결제 항목 관리부(250)는 사용자가 수행한 장애인 인증 횟수가 기준치 이상인 키오스크(300)의 종류 또는 설치 위치에 대한 정보를 추출하고, 이를 기반으로 사용자의 행동 패턴을 분석할 수 있다.In addition, the payment item management unit 250 may record a history of performing payment through authentication of a user with a disability, and provide the recorded user's payment history information to the smartphone 100 according to a user's inquiry request. The user's payment history information may include information such as the type and installation location of the kiosk 300 used by the user. Furthermore, the payment item management unit 250 may extract information on the type or installation location of the kiosk 300 in which the number of authentications for the disabled by the user is greater than or equal to a reference value, and analyze the user's behavior pattern based on this.

중계지원부(260)는 스마트폰(100)의 조작을 통해 키오스크(300)를 제어할 수 있도록 스마트폰(100)과 키오스크(300)를 중계하는 역할을 수행한다.The relay support unit 260 performs a role of relaying the smart phone 100 and the kiosk 300 so that the kiosk 300 can be controlled through the manipulation of the smart phone 100.

이러한 중계지원부(260)는 스마트폰(100)에서 기본적으로 제공하는 센서부, 입력 버튼, 마이크, 카메라부 등의 입력 수단을 이용해 사용자가 키오스크(300)에 입력하고자 하는 바를 획득하도록 지원한다. 이후 중계지원부(260)는 입력된 내용(예, 마이크를 이용한 음성 입력, 카메라를 이용한 수화 입력 등)으로부터 키오스크(300)에 대한 조작명령을 추출하고, 추출된 조작 명령을 해당 키오스크(300)에 전달할 수 있다.The relay support unit 260 supports the user to obtain a bar to be input to the kiosk 300 using input means such as a sensor unit, an input button, a microphone, and a camera unit provided by the smart phone 100 by default. Thereafter, the relay support unit 260 extracts an operation command for the kiosk 300 from the input content (eg, voice input using a microphone, sign language input using a camera, etc.), and transfers the extracted operation command to the kiosk 300. I can deliver.

이때, 중계지원부(260)는 스마트폰(100)으로부터 근접한 키오스크(300)에 대한 일련번호를 비콘 신호 등을 통해 확인할 수 있다. 그리고 다양한 실시예에 따라 서버(200)에는 각 키오스크(300)가 등록될 당시, 키오스크(300)가 제공하는 서비스 내용(화면에 표시되는 텍스트 내용, 선택 메뉴 항목 등)이 함께 등록될 수 있다. 그리고 서버(200)의 중계지원부(260)는 각 키오스크(300)에 대한 일련번호를 기반으로 각 키오스크(300)가 지원하는 메뉴 화면을 불러오고 스마트폰(100)의 어플리케이션 상에서 출력(표시, 사운드 출력 등)할 수 있다.At this time, the relay support unit 260 may check the serial number for the kiosk 300 adjacent to the smartphone 100 through a beacon signal or the like. In addition, according to various embodiments, when each kiosk 300 is registered, service contents (text contents displayed on the screen, selection menu items, etc.) provided by the kiosk 300 may be registered together in the server 200 according to various embodiments. And the relay support unit 260 of the server 200 invokes the menu screen supported by each kiosk 300 based on the serial number for each kiosk 300 and outputs (display, sound) on the application of the smartphone 100 Output, etc.)

즉, 이와 같이 중계지원부(260)의 동작 하에 사용자는 자신의 스마트폰(100)을 조작하는 행동으로 키오스크(300)를 조작할 수 있다.That is, in this way, under the operation of the relay support unit 260, a user can manipulate the kiosk 300 by manipulating his or her smartphone 100.

키오스크(300)는 공공장소에 설치되는 무인 정보단말기로, 설치된 장소와 관련된 정보 및 서비스를 제공할 수 있고, 키오스크 외에도 무인 주문기, 무인 요금정산기 등으로 대체될 수 있다.The kiosk 300 is an unmanned information terminal installed in a public place, and can provide information and services related to the installed place, and may be replaced by an unmanned order machine, an unmanned fee calculator, etc. in addition to the kiosk.

이러한 키오스크(300)는 서버(200)를 통해 장애 인증 완료가 된 사용자의 스마트폰(100)과 연결되어 상기 스마트폰(100)을 통해 내부 UI(User Interface, 사용자 인터페이스)가 제어되며, 도 5와 같이 키오스크 통신부(310), 디스플레이부(320), 사운드출력처리부(330), 맞춤서비스 제공부(340)를 포함한다.This kiosk 300 is connected to the smartphone 100 of the user who has completed failure authentication through the server 200, and the internal UI (User Interface) is controlled through the smartphone 100, and FIG. 5 As shown, it includes a kiosk communication unit 310, a display unit 320, a sound output processing unit 330, and a customized service providing unit 340.

먼저, 키오스크 통신부(310)는 기 설정된 거리 범위 내에 지속적으로 또는 장애인용 호출기 버튼을 입력 받은 경우 무선 통신 신호(예, 비콘 신호)를 송신할 수 있다. 상기 키오스크 통신부(310)는 웹 서버 등과 연결하기 위한 통신 기능을 수행할 수 있으며, 서버(200)로부터 맞춤 명령 신호를 수신하기 위한 통신 기능을 수행할 수 있다.First, the kiosk communication unit 310 may transmit a wireless communication signal (eg, a beacon signal) continuously within a preset distance range or when a pager button for the disabled is input. The kiosk communication unit 310 may perform a communication function for connecting to a web server or the like, and may perform a communication function for receiving a customized command signal from the server 200.

또한, 키오스크 통신부(310)는 블루투스, NFC 등의 근거리 통신 기능을 수행할 수 있으며 이를 통해 근접한 사용자 기기와의 통신 연결을 수행할 수 있으며, 서버(200)로부터 근접한 스마트폰(100)에 대한 정보를 수신받을 수 있다.In addition, the kiosk communication unit 310 may perform a short-range communication function such as Bluetooth and NFC, and through this, a communication connection with a nearby user device can be performed, and information about the smartphone 100 adjacent to the server 200 Can be received.

또한, 키오스크 통신부(310)는 이 외에도 주문한 상품에 대한 카드 결제를 수행하기 위한 통신 기능을 수행할 수 있다. 또한 키오스크 통신부(310)는 사용자 요청에 따라 직원을 호출하거나 직원과 대화하기 위한 통신기능을 수행할 수 있다.In addition, the kiosk communication unit 310 may perform a communication function for performing card payment for an ordered product in addition to this. In addition, the kiosk communication unit 310 may perform a communication function for calling an employee or talking with an employee according to a user request.

디스플레이부(320)는 키오스크(300)의 각종 서비스 내용을 화면상에 표시할 수 있다.The display unit 320 may display various service contents of the kiosk 300 on a screen.

사운드출력처리부(330)는 키오스크(300)의 각종 서비스 내용 중 오디오 형식에 해당하는 데이터를 출력할 수 있으며, 사용자로부터 음성 데이터를 입력받을 수 있다.The sound output processing unit 330 may output data corresponding to an audio format among various service contents of the kiosk 300 and may receive voice data from a user.

맞춤서비스 제공부(340)는 스마트폰(100)과 마찬가지로 서버(200)로부터 수신된 맞춤 명령 신호에 대응하여 키오스크(300)로부터 제공되는 정보에 대한 적어도 하나의 형식 또는 설정값을 변경할 수 있다. 이 때 형식을 변경하는 실시 예는, 사운드 형식을 텍스트 형식으로 변환하거나, 텍스트 형식을 사운드 형식으로 변환하는 경우를 포함할 수 있으며, 설정값을 변경하는 경우의 실시 예는 텍스트를 비롯한 이미지의 표시 사이즈 변경, 출력되는 사운드의 볼륨값 변경 등을 포함할 수 있다.Like the smart phone 100, the customized service provider 340 may change at least one format or setting value of information provided from the kiosk 300 in response to a customized command signal received from the server 200. In this case, an embodiment of changing the format may include converting a sound format to a text format or converting a text format to a sound format. An embodiment of changing the setting value is to display images including text. This may include changing the size and changing the volume value of the sound that is output.

본 발명의 실시예에 따른 맞춤서비스 제공부(340)가 수행하는 동작은 아래의 표 1과 같이 구성될 수 있다.Operations performed by the customized service providing unit 340 according to an embodiment of the present invention may be configured as shown in Table 1 below.

구분division 내용Contents 시각 장애인Visually impaired 음성안내기능, 음성의 속도/볼륨/피치 조절기능, 구간 반복기능, 재청취/연속청취기능, 시각장애인에게 TTS를 통해 상황에 따라 문자-음성 출력 제공Voice guidance function, voice speed/volume/pitch control function, section repeat function, re-listening/continuous listening function, text-to-speech output according to the situation through TTS to the visually impaired 저시력자Low vision 문자 확대기능, 색반전 기능Character enlargement function, color inversion function 청각 장애인Deaf 영상수화통역서비스, 음성정보를 텍스트로 변환기능Video sign language interpretation service, function to convert audio information into text 난청장애인Hearing impaired 난청 등급에 따라 Audio processor의 볼륨 또는 음성 대역 등을 자동으로 조절하여 보청 출력 기능 제공Provides hearing aid output function by automatically adjusting the volume or voice band of the audio processor according to the level of hearing loss 농아인Deaf 중계 호출기능 자동 통역서비스 기능으로 3자 중계 서비스 제공Relay call function Provides 3rd party relay service with automatic interpretation service function 시각 및 청각 장애인Blind and deaf 기존 보급된 장애인 보조기기와의 Bluetooth 연결을 통한 무인화 기기 제어 Unmanned device control through Bluetooth connection with existing disability assistive devices

또한, 상기 도면에 도시되지 않았으나, 본 발명의 실시 예에 따른 키오스크(300)는 호출기(도면에 미도시)를 포함하여 구성될 수 있다.Further, although not shown in the drawings, the kiosk 300 according to an embodiment of the present invention may include a pager (not shown in the drawings).

호출기는 임의의 키오스크(300)와 연동될 수 있으며, 휴대폰 및 앱과의 양방향 무선 비콘 통신 기능을 지원할 수 있다. 그에 따라 키오스크(300)는 제조 시기, 지원 서비스 종류와 관계없이 호출기를 구비하는 것만으로 스마트폰(100) 및 서버(200)와의 통신 기능을 수행할 수 있게 된다.The pager may be interlocked with any kiosk 300 and may support a two-way wireless beacon communication function with mobile phones and apps. Accordingly, the kiosk 300 can perform a communication function with the smartphone 100 and the server 200 simply by having a pager regardless of the manufacturing time and the type of support service.

일 실시예에 따라 호출기는 버튼을 포함할 수 있으며 해당 버튼이 입력됨에 따라 기 설정된 거리 범위 내에 있는 스마트폰(100)으로 비콘신호를 송신할 수 있다. 비콘신호를 송신한 스마트폰(100)은 해당 비콘신호에 해당하는 데이터를 서버로 전달하게 되며, 서버(200)는 해당 비콘 신호에 포함된 정보를 확인할 수 있다. 그에 대응하여 서버(200)는 스마트폰(100)으로 리모트 어플리케이션(110)을 실행하도록 제어하는 자동 실행 명령 신호를 전송할 수도 있다.According to an embodiment, the pager may include a button, and when the button is input, the beacon signal may be transmitted to the smartphone 100 within a preset distance range. The smartphone 100 that has transmitted the beacon signal transmits data corresponding to the beacon signal to the server, and the server 200 can check information included in the beacon signal. Correspondingly, the server 200 may transmit an automatic execution command signal for controlling the execution of the remote application 110 to the smartphone 100.

이와 같이 호출기는 스마트폰(100)을 보유한 사용자가 키오스크(300)에서 장애인 인증 내지 장애 특성에 따른 맞춤형 서비스를 제공받을 수 있도록 하기 위해 무선 통신 신호(예, 비콘 신호)를 스마트폰(100)측에 전송할 수 있다.In this way, the pager transmits a wireless communication signal (eg, a beacon signal) to the smartphone 100 so that the user with the smartphone 100 can authenticate the disabled person or receive a customized service according to the characteristics of the disability from the kiosk 300. Can be transferred to.

따라서, 상술된 구성을 통해 스마트폰(100)은 서버(200)로부터 리모트 어플리케이션(110) 구동을 명령하는 신호를 수신받아 리모트 어플리케이션(110)이 구동되고, 장애 인증 정보를 직접 입력하거나 생체정보(예, 지문, 홍채, 안면 정보 등) 요청 동작을 추가로 수행할 수 있다. 이에 따라 스마트폰(100)은 사용자로부터 생체정보를 기반으로 본인 인증이 완료됨에 따라 서버(200)를 통한 장애 인증을 진행 및 완료할 수 있다.Therefore, through the above-described configuration, the smart phone 100 receives a signal for commanding driving the remote application 110 from the server 200 to drive the remote application 110, and directly inputs failure authentication information or biometric information ( For example, fingerprint, iris, facial information, etc.) may additionally perform a request operation. Accordingly, the smartphone 100 may proceed and complete the failure authentication through the server 200 as the user authentication is completed based on the biometric information from the user.

한편, 상술된 실시예에 따른 서버(200)로의 회원 등록 과정에 대해서 상기 서버(200)에서 임의의 사용자를 회원으로 등록하는 과정에는 SNS 인증서버(도면에 미도시)가 추가로 포함되어 함께 동작될 수 있다.Meanwhile, in the process of registering a member with the server 200 according to the above-described embodiment, an SNS authentication server (not shown in the drawing) is additionally included in the process of registering a user as a member in the server 200 and operates together. Can be.

즉, 스마트폰(100)이 서버(200)로 앱 회원 등록(장애인 회원 등록) 요청 신호를 전송하는 동작(1004)을 수행하는데, 이러한 앱 회원 등록 요청 신호는 서버(200)를 거쳐 추가로 포함된 SNS 인증서버로 전송되어 사용자 본인 인증 동작을 수행할 수 있다.That is, the smartphone 100 performs an operation 1004 of transmitting an app member registration (disabled member registration) request signal to the server 200, and such an app member registration request signal is additionally included through the server 200 It is transmitted to the authenticated SNS authentication server to perform the user's own authentication operation.

상기 SNS 인증서버는 예컨데 OAuth 2.0 규격에 기반하여 본인 인증 동작을 수행할 수 있다. 본인 인증이 완료된 경우 해당 본인 인증 정보가 유효함을 알리는 신호를 SNS 인증서버에서 기존 서버로 전송할 수 있으며, 그에 따라 서버는 해당 사용자를 장애인인 회원으로 등록 완료할 수 있도록 한다.The SNS authentication server may perform an identity authentication operation based on, for example, OAuth 2.0 standard. When identity authentication is completed, a signal indicating that the identity authentication information is valid can be transmitted from the SNS authentication server to the existing server, and accordingly, the server enables the user to be registered as a member with a disability.

상술된 구성을 갖는 스마트폰을 이용한 시각 장애인용 키오스크 제어 리모컨 시스템(1)은 도 2와 같은 맞춤 서비스 제공 동작을 수행할 수 있다.The kiosk control remote control system 1 for the visually impaired using a smart phone having the above-described configuration can perform an operation for providing a customized service as shown in FIG. 2.

도 2에 도시된 바와 같이 본 발명의 실시예에 따른 장애 인증 및 맞춤형 서비스 지원 시스템은 스마트폰(100)이 서버(200)로 자신의 위치를 전송하고, 인접한 곳에 키오스크(300)가 존재하는 경우 서버(200)가 스마트폰(100) 내 리모트 어플리케이션(110)의 구동을 실행시킬 수 있으며, 구동된 리모트 어플리케이션(110)을 통해 사용자는 장애 인증을 수행하게 된다. 사용자가 스마트폰(100) 내에서 장애 인증을 수행하면 이에 대한 데이터를 서버(200)로 전송되어 서버(200)에서는 장애 여부 및 유형을 확인하게 된다. 이후 서버(200)는 사용자의 장애 유형 정보에 대응하여 맞춤형 서비스 기능을 산출하고, 해당 기능을 제공하도록 하기 위한 맞춤 명령 신호를 키오스크(300) 또는 스마트폰(100)으로 전달할 수 있다.As shown in FIG. 2, in the case of a failure authentication and customized service support system according to an embodiment of the present invention, when the smartphone 100 transmits its location to the server 200, and a kiosk 300 exists in the vicinity The server 200 may execute the driving of the remote application 110 in the smartphone 100, and the user performs failure authentication through the driven remote application 110. When a user performs failure authentication in the smartphone 100, data about this is transmitted to the server 200, so that the server 200 checks whether or not there is a failure. Thereafter, the server 200 may calculate a customized service function in response to the user's failure type information, and transmit a customized command signal for providing the corresponding function to the kiosk 300 or the smartphone 100.

상술된 서버(200)에 임의의 사용자가 회원으로 등록되는 과정을 도 6과 함께 설명하도록 한다.A process of registering an arbitrary user as a member in the above-described server 200 will be described with reference to FIG. 6.

먼저, 키오스크(300)는 서버(200)로 무인화 기기 등록을 요청하는 동작(1001)을 수행할 수 있고, 이에 대응하여 서버(200)는 키오스크별 DB를 구축하는 동작(1002)을 수행할 수 있다. 이에 따라 서버(200)는 키오스크(300)가 서버(200)에 등록이 완료되었음을 알리는 정보(예, 등록 ID)를 키오스크(300)로 전달하는 동작(1003)을 수행할 수 있다.First, the kiosk 300 may perform an operation 1001 of requesting registration of an unmanned device to the server 200, and in response to this, the server 200 may perform an operation 1002 of building a DB for each kiosk. have. Accordingly, the server 200 may perform an operation 1003 of transmitting information (eg, a registration ID) notifying that registration to the server 200 has been completed by the kiosk 300 to the kiosk 300.

추후 서버(200)는 키오스크(300)로부터 등록 ID를 제공받고, 해당 키오스크(300)가 서버(200)에 등록된 기기인지 여부를 판단할 수 있다.Later, the server 200 may receive a registration ID from the kiosk 300 and determine whether the kiosk 300 is a device registered with the server 200.

그리고 스마트폰(100)은 서버(200)로 앱 회원 등록(장애인 회원 등록) 요청 신호를 전송하는 동작(1004)를 수행할 수 있다. 그리고 서버(200)는 앱 회원 등록 동작의 일환으로, 사용자 본인 인증 동작을 수행할 수 있다. 상기 서버(200)는 사용자 정보를 기반으로 사용자 본인인증 동작을 수행할 수 있다. 또한, 서버(200) 외에도 서버(200)에서 임의의 사용자를 회원으로 등록하는 과정에서 추가될 수 있는 SNS 인증서버가 동작될 경우 상기 SNS 인증서버는 예컨대 OAuth 2.0 규격 806에 기반하여 본인 인증 동작을 수행할 수 있다. 본인 인증이 완료된 경우, 해당 본인 인증 정보가 유효함을 알리는 신호를 상기 SNS 인증 서버에서 서버(200)측으로 전송할 수 있으며, 그에 따라 서버(200)는 해당 사용자를 장애인인 회원으로 등록 완료할 수 있다.In addition, the smartphone 100 may perform an operation 1004 of transmitting an app member registration (disabled member registration) request signal to the server 200. In addition, the server 200 may perform a user authentication operation as part of an app member registration operation. The server 200 may perform a user identification operation based on user information. In addition, when an SNS authentication server that can be added in the process of registering an arbitrary user as a member in the server 200 is operated in addition to the server 200, the SNS authentication server performs an authentication operation based on, for example, OAuth 2.0 standard 806. Can be done. When identification is completed, a signal indicating that the identification information is valid can be transmitted from the SNS authentication server to the server 200, and accordingly, the server 200 can complete registration of the user as a member with a disability. .

이후 서버(200)는 스마트폰(100)측에 장애에 대한 추가 정보를 입력하도록 요청하는 동작(1005)을 수행할 수 있다. 구체적으로 서버(200)는 스마트폰(100)에 장애 정도(예, 장애인 등급 정보), 장애 유형, 장애 유형에 대응하는 유형 서비스 선택 메뉴를 제공하는 동작(1005)을 수행하는 것이다.Thereafter, the server 200 may perform an operation 1005 of requesting to input additional information on the failure to the smartphone 100 side. Specifically, the server 200 performs an operation 1005 of providing a type service selection menu corresponding to the level of a disability (eg, class information of a disability), a type of disability, and a type of disability to the smart phone 100.

이에 따라 사용자는 스마트폰(100)에서 자신의 장애 특성과 관련된 세부 항목 내지는 장애 맞춤형 정보를 추가로 선택하거나 음성/타이핑을 통해 입력할 수 있다. 그리고 스마트폰(100)은 사용자에 의해 입력된 사용자의 장애 특성과 관련된 세부 항목 내지는 장애 맞춤형 정보를 서버(200)로 제공하는 동작(1006)을 수행할 수 있다.Accordingly, the user may additionally select detailed items related to his/her disability characteristics or disability-specific information from the smartphone 100 or input through voice/typing. In addition, the smartphone 100 may perform an operation 1006 of providing the server 200 with detailed items related to the user's disability characteristics input by the user or information tailored to the disability.

이에 대응하여 서버(200)는 스마트폰별 DB를 구축하는 동작(1007)을 수행할 수 있는데, 이때 등록된 스마트폰(100)에 해당되는 번호별로 DB를 구축하는 것이 바람직하다.In response to this, the server 200 may perform an operation 1007 of establishing a DB for each smartphone, and at this time, it is preferable to construct a DB for each number corresponding to the registered smartphone 100.

이후 서비스 등록으로 완료함을 알리는 신호를 스마트폰(100)에 전송하는 동작(1008)을 수행할 수 있으며, 이를 통해 스마트폰(100)과 서버(200)는 각 장치간 앱 프로비저닝을 완료하는 동작(1009)을 수행할 수 있다.Thereafter, an operation 1008 of transmitting a signal indicating completion of service registration to the smartphone 100 may be performed, through which the smartphone 100 and the server 200 complete the provisioning of apps between devices. (1009) can be performed.

또한, 본 발명의 실시예에 따른 장애인 맞춤형 서비스 제공 과정은 도 7과 함께 설명하도록 한다.In addition, a process of providing a customized service for the disabled according to an embodiment of the present invention will be described with reference to FIG. 7.

먼저, 키오스크(300)는 서버(200)로 키오스크(300)의 서비스 위치 설정 정보를 제공하는 동작(1101)을 수행할 수 있다. 이때, 키오스크(300) 내 호출기가 구비되는 경우 호출기에서 서비스 위치 설정 정보를 제공할 수도 있다. 그에 따라 키오스크(300) 또는 호출기가 키오스크(300)의 서비스 위치 설정 정보를 보유하고 있을 수 있다.First, the kiosk 300 may perform an operation 1101 of providing service location setting information of the kiosk 300 to the server 200. In this case, when a pager in the kiosk 300 is provided, the pager may provide service location setting information. Accordingly, the kiosk 300 or the pager may hold service location setting information of the kiosk 300.

이후 스마트폰(100)이 키오스크(300)에 기설정된 거리 이내로 접근하는 동작(1102)이 발생됨에 따라 키오스크(300)는 스마트폰(100)으로 서비스 위치코드를 전달하는 동작(1103)을 수행하게 된다. 그리고 스마트폰(100)은 수신된 서비스 위치코드 및 사용자 번호를 서버(200)로 전달하는 동작(1104)을 수행할 수 있다. 이때, 사용자 번호는 사용자의 식별번호를 의미할 수 있으며, 이는 서버(200)에 기 등록된 회원인지를 확인할 수 있는 회원번호 내지는 등록번호를 의미할 수 있다. Thereafter, as an operation 1102 in which the smartphone 100 approaches the kiosk 300 within a preset distance occurs, the kiosk 300 performs an operation 1103 of transmitting the service location code to the smartphone 100 do. In addition, the smartphone 100 may perform an operation 1104 of transmitting the received service location code and user number to the server 200. In this case, the user number may mean an identification number of a user, and this may mean a member number or a registration number that can confirm whether a member has been registered in the server 200.

서버(200)는 스마트폰(100)으로부터 수신된 서비스 위치코드 및 사용자 번호에 기반하여 해당 사용자가 장애인인지의 여부를 확인하고 무인화 기기별 맞춤형 서비스 코드를 로직하는 동작(1105)을 수행할 수 있다. 이후 서버(200)는 상기 동작(1105)의 결과로 생성된 장애인 맞춤형 서비스 코드를 키오스크(300)로 전달하는 동작(1106)을 수행할 수 있다. 그리고 그에 대응하여 키오스크(300)는 맞춤형 서비스 UI 및 맞춤형 서비스 기능을 제공하는 동작(1107)을 수행할 수 있다.The server 200 may check whether a corresponding user is a disabled person based on a service location code and a user number received from the smartphone 100 and perform an operation 1105 of logic a customized service code for each unmanned device. . Thereafter, the server 200 may perform an operation 1106 of transferring the service code customized for the disabled, generated as a result of the operation 1105, to the kiosk 300. In response, the kiosk 300 may perform an operation 1107 of providing a customized service UI and a customized service function.

상기 키오스크(300)가 장애 유형에 따라 맞춤형 서비스를 제공하는 동작은 다음의 내용을 포함할 수 있다. 먼저, 키오스크(300)의 맞춤형 서비스의 종류는 설정값(예, 청각 능력 장애 정도에 따라 볼륨 사운드 조절, 시각 능력 장애 정도에 따라 표시 사이즈 조절)을 변경하는 구성과, 주 사용 감각에 따라 정보 제공 방식을 변경하는 구성(예, TTS 모듈을 통한 텍스트 데이터의 사운드화, STT모듈을 통한 사운드 데이터의 텍스트화), 사용자 선호 기능을 추가하는 구성(예, 경고음 출력 시, 발광부의 점멸 동작 추가, 수화 통역 화면을 사이드 영역에 추가하는 구성 등) 등을 포함할 수 있다.The operation of the kiosk 300 to provide a customized service according to a type of failure may include the following. First, the type of customized service of the kiosk 300 is a configuration in which a set value (eg, volume sound adjustment according to the degree of hearing impairment, display size adjustment according to the degree of visual impairment) is changed, and information is provided according to the main sense of use. Configuration to change the method (e.g., sound text data through the TTS module, text text through the STT module), configuration to add user preference functions (e.g., when outputting a warning sound, adding a flashing operation of the light emitting unit, sign language) A configuration for adding an interpretation screen to the side area, etc.) may be included.

또한, 본 발명의 실시예에 따른 장애 인증 및 맞춤형 서비스 지원 과정에 대하여 도 10과 함께 설명하도록 한다.In addition, a failure authentication and customized service support process according to an embodiment of the present invention will be described with reference to FIG. 10.

먼저, 도 10에서 도시된 바와 같이 본 발명은 다양한 실시예에 따라 서버(200)에서 인증받은 결과로 생성된 장애인 프로필 정보를 스마트폰(100) 내에 저장한 상태에서 수시로 사용자의 장애 인증 및 맞춤형 서비스 요청 동작을 수행할 수 있도록 한다.First, as shown in FIG. 10, the present invention provides user's disability authentication and customized service from time to time in a state in which the disabled profile information generated as a result of being authenticated by the server 200 is stored in the smartphone 100 according to various embodiments. Make it possible to perform the requested operation.

이러한 실시예는 크게 장애인 프로필 정보를 스마트폰(100) 내에 저장 및 업데이트하는 '장애인 권한부여 및 개인 맞춤형 정보 업데이트 절차'와 장애인 사용자가 키오스크(300)를 사용하기 위해 장애인 프로필 정보를 인증하고 키오스크(300)로부터 맞춤형 서비스를 제공받는 '장애인 무인화 서비스 프로비져닝 절차'로 구성될 수 있다. This embodiment is largely a'disabled person authorization and personalized information update procedure' that stores and updates the disabled profile information in the smartphone 100, and the disabled user authenticates the disabled profile information in order to use the kiosk 300, and a kiosk ( 300) can be configured with a'unmanned service provisioning procedure for the disabled' that is provided with customized services.

먼저, 키오스크(300)에 접근한 사용자의 스마트폰(100)이 서버(200)로 인해 자동으로 리모트 어플리케이션(110)이 시행되며, 이를 통해 사용자는 스마트폰(100) 내 리모트 어플리케이션(110) 내 화면에서 인증 버튼을 클릭하거나 음성으로 인증 수행 동작을 요청하는 등 사용자 인증 시도를 감지하는 동작(1201)을 수행할 수 있다.First, the remote application 110 of the user who has accessed the kiosk 300 is automatically executed by the server 200, through which the user can access the remote application 110 in the smartphone 100. An operation 1201 of detecting a user authentication attempt, such as clicking an authentication button on the screen or requesting an operation to perform authentication by voice, may be performed.

그에 대응하여, 스마트폰(100)은 해당 리모트 어플리케이션(110)의 구동하에 ARS로 서버(200)에 대하여 접속하는 동작(1202)를 수행할 수 있고, 그와 동시에 사용자의 전화번호를 SSL 암호화 데이터 채널을 통해 서버(장애인 권한 부여 ARS 서버, 200)로 전송하는 동작(1204)을 수행할 수 있다.Correspondingly, the smartphone 100 may perform an operation 1202 of accessing the server 200 with an ARS under the driving of the corresponding remote application 110, and at the same time, the user's phone number is converted to SSL encrypted data. An operation 1204 of transmitting to a server (the disabled person authorization ARS server, 200) through a channel may be performed.

이후 서버(200)는 걸려온 전화의 발신번호를 기반으로 장애인 공공DB(400)를 조회하여 장애인 프로필 정보를 조회하는 동작(1205)과 상술된 동작(1202, 1204)에 의해 수집된 스마트폰(100)의 발신정보를 이중으로 검사하여 장애인 일치여부를 확인하는 동작(1206)을 수행할 수 있다.Thereafter, the server 200 searches the disabled public DB 400 based on the calling number of the incoming call to query the disabled profile information (1205) and the smartphone 100 collected by the above-described operations (1202, 1204). ), by double-checking the originating information of the person with whom the disabled person is matched (1206).

이때, 장애인 공공DB(400)는 장애인의 스마트폰(100)의 전화번호를 키 값으로 한 장애인 상세정보가 암호화되어 저장되는 장치를 의미할 수 있다.In this case, the public DB 400 for the disabled may mean a device in which detailed information of the disabled having the phone number of the disabled person's smartphone 100 as a key value is encrypted and stored.

상술된 장애인 공공DB(400)를 통해 인증을 요청한 사용자가 기 등록된 장애인임이 확인되며, 서버(200)는 연결된 SSL 암호화 데이터 채널 중 발신번호와 일치하는 데이터 채널을 찾아 장애인 프로필 정보를 스마트폰(100)으로 전송하는 동작(1207)을 수행할 수 있다.It is confirmed that the user who has requested authentication through the above-described public DB 400 for the disabled is a registered disabled person, and the server 200 searches for a data channel that matches the calling number among the connected SSL encrypted data channels and stores the disabled profile information on the smartphone ( An operation 1207 of transmitting to 100) may be performed.

그리고 이에 따라 스마트폰(100)은 수신된 장애인 프로필 정보를 앱 내 데이터로 저장하는 동작(1208)을 수행하게 된다. 이와 같이 스마트폰(100)의 앱 내 데이터로 저장된 장애인 프로필 정보는 장애인 복지카드의 역할을 할 수 있게 된다. 또한, 상기 장애인 프로필 정보는 추후 사용할 때마다 별도의 ARS 인증과정을 거치지 않더라도 사용자 개인 단말 내에서 열람할 수 있으며, 이를 이용하여 간편하게 무인화 기기 사용 등의 경우에 장애인임을 증명할 수 있게 된다.Accordingly, the smartphone 100 performs an operation 1208 of storing the received profile information for the disabled as data in the app. As described above, profile information for the disabled as data in the app of the smartphone 100 can serve as a welfare card for the disabled. In addition, the disabled profile information can be viewed in the user's personal terminal without going through a separate ARS authentication process each time it is used later, and by using this, it is possible to prove that the person with a disability is simply in case of using an unmanned device.

이와 같이 장애인 프로필 정보를 앱 내 데이터로 저장하는 방식의 경우, 스마트폰(100)의 전화번호와 실제 서버(200)로 수신된 발신번호를 통해 두 단계의 인증검사를 수행하므로, 인터넷 전화 등을 이용한 발신번호 조작 및 그에 따른 비장애인에 의해 장애인 프로필 정보가 도용되는 문제를 보다 확실하게 방지할 수 있는 효과가 있다. 또한 상기 방식은 SSL 암호화 데이터 채널을 활용함으로써 개인정보의 유출을 방지할 수 있으며, 앱 내 버튼 클릭 한번에 의해 장애인 권한을 부여하므로 절차의 간소화 및 접근성을 향상시킬 수 있다.In this way, in the case of storing the disabled profile information as data in the app, two-step authentication tests are performed through the phone number of the smartphone 100 and the calling number received by the actual server 200, so that Internet calls, etc. There is an effect of more reliably preventing the problem of the use of calling number manipulation and the theft of profile information for the disabled by a non-disabled person. In addition, the above method can prevent the leakage of personal information by using an SSL encrypted data channel, and since the handicapped permission is granted by clicking a button in the app, the procedure can be simplified and accessibility can be improved.

상술된 동작(1208) 이후 스마트폰(100)은 저장된 장애인 프로필 정보를 서버(200)와의 인터렉션을 통해 업데이트할 수 있다. 구체적으로, 스마트폰(100)은 장애인 맞춤형 정보를 서버(200)에 등록하는 동작(1209)을 수행할 수 있다. 그에 대응하여 서버(200)는 수신된 맞춤형 정보에 대응하여 업데이트를 수행하는 동작(1210) 및 맞춤형 서비스 등록이 완료됨을 스마트폰(100) 측에 알리는 동작(1211)을 수행할 수 있다.After the operation 1208 described above, the smartphone 100 may update the stored profile information for the disabled through the interaction with the server 200. Specifically, the smartphone 100 may perform an operation 1209 of registering personalized information for the disabled in the server 200. In response, the server 200 may perform an operation 1210 of performing an update in response to the received customized information and an operation 1211 of informing the smartphone 100 that registration of the customized service is completed.

그리고 그에 따라 스마트폰(100)에서도 장애인 맞춤형 정보가 업데이트되는 동작(1212)이 수행될 수 있다.Accordingly, an operation 1212 of updating personalized information for the disabled may be performed in the smartphone 100.

이후, 스마트폰(100)은 키오스크(300)를 사용하고자 할 시 상기 앱 내 저장된 장애인 프로필 정보에 기반하여 장애인임을 인증하고, 장애인 혜택 또는 장애 특성 맞춤형 서비스를 제공받을 수 있다. Thereafter, when the smart phone 100 wants to use the kiosk 300, it may authenticate that the person is a disabled person based on the disabled profile information stored in the app, and receive a disabled person benefit or a service tailored to the characteristics of the disability.

구체적으로, 스마트폰(100)은 키오스크(300)에서 장애인 인증을 위해, 무선 통신을 통해 무인화 기기의 ID를 수신하는 동작(1213)을 수행할 수 있다.Specifically, the smart phone 100 may perform an operation 1213 of receiving the ID of the unmanned device through wireless communication in order to authenticate the disabled person at the kiosk 300.

이때, 키오스크(300)는 비콘, 지그비 등의 방식을 통해 키오스크(300)의 ID정보를 근거리 내 임의의 스마트폰(100)에 브로드캐스팅할 수 있고, 이에 기반하여 스마트폰(100)은 무인화 기기 ID를 수신할 수 있다. 다양한 실시 예에 따라 비콘이 아닌 NFC 방식 등에 의해 스마트폰(100)로의 키오스크 ID 수신이 가능하다. 그리고 이때 키오스크(300)는 스마트폰(100)측으로 전송하는 브로드캐스팅 또는 NFC 접촉 방식에 의해 전달되는 신호를 통해 키오스크(300)에서의 장애인 인증관련 절차 수행을 요청할 수 있다. At this time, the kiosk 300 may broadcast the ID information of the kiosk 300 to an arbitrary smartphone 100 within a short distance through a method such as beacon or Zigbee, and based on this, the smartphone 100 is an unmanned device ID can be received. According to various embodiments, it is possible to receive a kiosk ID to the smartphone 100 by an NFC method instead of a beacon. In this case, the kiosk 300 may request to perform a procedure related to authentication of the disabled person in the kiosk 300 through a signal transmitted by a broadcasting or NFC contact method transmitted to the smartphone 100 side.

한편, 키오스크(300)에서 송출되는 무선 통신 신호 외에도 서버(200)가 스마트폰(100)의 위치를 감지하여 가장 근접한 키오스크(300)의 ID를 스마트폰(100)측으로 수신할 수도 있다.Meanwhile, in addition to the wireless communication signal transmitted from the kiosk 300, the server 200 may detect the location of the smartphone 100 and receive the ID of the nearest kiosk 300 to the smartphone 100.

상술된 바에 따라 스마트폰(100)은 앱 내에서 수신된 인증 시도 절차를 해석하고 앱 내 저장된 장애인 프로필 정보를 확인하여 키오스크(300)에 전송하는 일련의 과정을 수행할 수 있다. 구체적으로 스마트폰(100)은 키오스크(300)에서 사용자의 장애인 인증을 수행하고, 장애 유형 및 장애 정도에 대응하는 맞춤형 서비스를 요청하도록 하는 서비스 프로필 정보를 전송하는 동작(1216)을 수행할 수 있다. 그리고 그에 대응하여 키오스크(300)는 맞춤형 서비스 UI 표시 및 맞춤형 기능을 제공하는 동작(1217)을 수행할 수 있다.As described above, the smartphone 100 may perform a series of processes of interpreting the authentication attempt procedure received in the app, checking the profile information for the disabled person stored in the app, and transmitting it to the kiosk 300. Specifically, the smartphone 100 may perform an operation 1216 of performing authentication of the user with a disability in the kiosk 300 and transmitting service profile information for requesting a customized service corresponding to the type of disability and the degree of disability. . In response, the kiosk 300 may perform an operation 1217 of displaying a customized service UI and providing a customized function.

그리고 상기 서비스 프로필 정보는 스마트폰(100)과 서버(200)의 연동하에 스마트폰(100)의 앱 내 저장된 장애인 프로필과 무인화 기기 ID 정보를 기반으로 서비스 프로비저닝을 수행하는 동작(1214)에 의해 생성될 수 있으며, 상기 프로비저닝 동작은 서버(200)의 키오스크 프로비저닝 DB(1215)와의 인터렉션을 통해 확인된 정보를 기반으로 수행될 수 있다.In addition, the service profile information is generated by an operation 1214 of performing service provisioning based on the disabled profile stored in the app of the smartphone 100 and the unmanned device ID information under the linkage of the smartphone 100 and the server 200 The provisioning operation may be performed based on information confirmed through an interaction with the kiosk provisioning DB 1215 of the server 200.

이에 따라, 키오스크(300)는 스마트폰(100)의 앱 내 기저장된 장애인 프로필 정보를 수신하게 되므로, 매번 인증 절차를 수행할 필요가 없어 간편한 사용이 가능해지며, 나아가, 이는 스마트폰(100)에서 별도의 네트워크(WIFI/LTE) 환경이 조성되지 않은 경우에도, 무인화기기와 앱 내 장애인 프로필 정보 교환이 가능하여 서비스 대응환경이 개선될 수 있게 된다. 그리고 기존의 장애인 복지카드를 이용한 인증 절차의 경우 사람의 육안에 의한 직접 확인이 필요하였으나, 본 방식은 기기간 확인절차에 의해 자동화가 가능하고 인위적인 장애인 권한 부여가 불가능하다. 또한 심야시간이나 휴일에도 앱 내 저장된 장애인 프로필 정보를 활용할 수 있으며, 장애인 프로필이 변경될 경우(예, 장애 정도 변경 등) 장애인 인증절차를 다시 수행하고 변경된 상황이 즉시 반영되도록 할 수 있는 효과가 있다.Accordingly, the kiosk 300 receives the disabled profile information stored in the app of the smartphone 100, so it is not necessary to perform the authentication procedure every time, so it is possible to use it easily. Even when a separate network (WIFI/LTE) environment is not created, the service response environment can be improved by enabling the exchange of profile information for the disabled in the app with the unmanned device. In addition, in the case of the existing authentication process using the welfare card for the disabled, direct verification by the human eye was required, but this method can be automated by the verification procedure between devices and artificially granted the disabled person's authority is not possible. In addition, it is possible to utilize the profile information of the disabled person stored in the app even during late night hours or holidays, and if the disabled profile is changed (eg, change of disability level, etc.), it is effective to perform the verification process for the disabled again and reflect the changed situation immediately .

요컨데, 본 발명의 실시 예에 따른 시스템은 사용자 단말, 서버 및 무인화 기기를 포함하여 구성될 수 있으며, 스마트폰(100)은 키오스크(300)로부터 발생되는 무선 신호를 수신함에 따라 리모트 어플리케이션(110)을 자동 실행하여 서버(200)에 접속하고, 서버(200)에 사용자가 장애인임을 인증받기 위한 인증용 정보를 제공하고, 상기 서버(200)는 상기 스마트폰(100)으로부터 수신된 인증용 정보에 기반하여 기 등록된 장애인 회원인지 여부를 판단하며, 장애인 회원임이 확인되면 인증 완료 정보를 키오스크(300) 또는 스마트폰(100)에 전달하고, 사용자의 장애 유형에 대응하여 서비스되는 기능 중 적어도 하나의 형태 또는 설정값을 변경하기 위한 맞춤 명령 정보를 생성하여 키오스크(300) 또는 스마트폰(100)에 전달하며, 키오스크(300)는 기 설정된 조건에 부합하는 스마트폰(100)에 키오스크(300)의 등록 정보가 포함된 무선 신호를 전달하고, 상기 서버(200)로부터 수신되는 인증 완료 정보를 기반으로 일 사용자가 장애인임을 확인하고, 그에 대응하여 장애인 적용 동작을 수행할 수 있다. In short, the system according to the embodiment of the present invention may be configured to include a user terminal, a server, and an unmanned device, and the smart phone 100 receives the wireless signal generated from the kiosk 300, so that the remote application 110 Is automatically executed to access the server 200, and provides authentication information to the server 200 for authenticating that the user is a disabled person, and the server 200 provides the authentication information received from the smartphone 100 Based on the determination of whether it is a previously registered disabled member, and when it is confirmed that the disabled member is a disabled member, authentication completion information is transmitted to the kiosk 300 or the smartphone 100, and at least one of the functions serviced in response to the user's disability type Custom command information for changing the shape or setting value is generated and transmitted to the kiosk 300 or the smartphone 100, and the kiosk 300 is the kiosk 300 to the smartphone 100 meeting a preset condition. A radio signal including registration information is transmitted, and based on authentication completion information received from the server 200, it is possible to confirm that a user is a disabled person, and to perform an operation for applying a disabled person in response thereto.

도면과 명세서에서 최적의 실시예들이 개시되었다. 여기서, 특정한 용어들이 사용되었으나, 이는 단지 본 발명을 설명하기 위한 목적에서 사용된 것이지 의미한정이나 특허청구범위에 기재된 본 발명의 범위를 제한하기 위하여 사용된 것은 아니다. 그러므로, 본 기술 분야의 통상의 지식을 가진자라면, 이로부터 다양한 변형 및 균등한 타 실시예가 가능하다는 점을 이해할 것이다. 따라서, 본 발명의 진정한 기술적 보호범위는 첨부된 특허청구범위의 기술적 사상에 의해 정해져야 할 것이다.Optimal embodiments have been disclosed in the drawings and specification. Here, specific terms have been used, but these are only used for the purpose of describing the present invention, and are not used to limit the meaning or the scope of the present invention described in the claims. Therefore, those of ordinary skill in the art will understand that various modifications and equivalent other embodiments are possible therefrom. Accordingly, the true technical scope of the present invention should be determined by the technical spirit of the appended claims.

1: 스마트폰을 이용한 시각 장애인용 키오스크 제어 리모컨 시스템
100: 스마트폰 110: 리모트 어플리케이션
111: 어플리케이션 구동부 112: 맞춤형 설정 변환부
112a: 경고알림모듈 112b: 설정제어모듈
112c: 출력제어모듈 120: 위치감지부
130: 단말기 통신부 140: 센서부
150: 오디오처리부 160: 카메라부
200: 서버 210: 통신부
220: 저장부 230: 인증관리부
240: 맞춤서비스 관리부 250: 결제 항목 관리부
260: 중계지원부 300: 키오스크
310: 키오스크 통신부 320: 디스플레이부
330: 오디오 처리부 340: 맞춤서비스 제공부
400: 공공DB
1: Kiosk control remote control system for the visually impaired using a smartphone
100: smartphone 110: remote application
111: application driving unit 112: customized setting conversion unit
112a: warning notification module 112b: setting control module
112c: output control module 120: position detection unit
130: terminal communication unit 140: sensor unit
150: audio processing unit 160: camera unit
200: server 210: communication unit
220: storage unit 230: authentication management unit
240: customized service management unit 250: payment item management unit
260: relay support department 300: kiosk
310: kiosk communication unit 320: display unit
330: audio processing unit 340: customized service providing unit
400: public DB

Claims (8)

스마트폰, 서버 및 키오스크를 포함하여 구성되는 시스템에 있어서,
상기 스마트폰은 사용자의 이동에 따라 변화되는 위치를 실시간으로 서버로 전송하며, 상기 키오스크와 인접한 경우 리모트 어플리케이션이 자동 실행되어 사용자가 장애인임을 인증하는 인증용 정보를 상기 서버로 전송하고,
상기 서버는,
상기 스마트폰의 위치를 매핑하고, 상기 키오스크와 일정 거리 이내로 인접한 경우 상기 리모트 어플리케이션을 자동으로 실행시키며, 상기 인증용 정보에 기반하여 기 등록된 장애인 회원인지 여부를 판단하고, 장애인 회원임이 확인되면 인증 완료 정보를 상기 스마트폰으로 전달하고, 상기 사용자의 장애 유형과 대응하여 서비스되는 기능 중 적어도 하나의 형태 또는 설정값을 변경하기 위한 맞춤 명령 정보를 생성하여 상기 키오스크에 전달하며,
상기 키오스크는,
기 설정된 조건에 부합하는 상기 스마트폰에 상기 키오스크의 등록 정보가 포함된 무선 신호를 전달하고, 상기 서버로부터 수신되는 인증 완료 정보를 기반으로 사용자의 장애 유형에 대응되는 장애인 적용 동작을 수행하고,
상기 리모트 어플리케이션은,
상기 키오스크로부터 수신되는 무선 신호에 대응하여 상기 리모트 어플리케이션을 자동 실행하고, 상기 리모트 어플리케이션을 통해 사용자가 상기 인증용 정보 입력시 이를 상기 서버로 전송하며, 상기 서버에서 송신되는 인증 완료 정보, 맞춤 명령 신호를 수신하는 어플리케이션 구동부; 및
상기 서버로부터 맞춤 명령 신호를 수신함에 따라, 상기 맞춤 명령 신호에 대응하여 표시되는 상기 키오스크의 설정값을 변경하는 맞춤형 설정 변환부;를 포함하고,
상기 스마트폰은,
GPS 기반으로 상기 스마트폰의 위치를 상기 서버에 실시간으로 전송하는 위치 감지부;가 포함되며,
상기 서버는 상기 위치 감지부에서 전송된 상기 스마트폰의 위치에서 상기 키오스크가 기설정된 일정거리 이내로 접근시 상기 스마트폰으로 상기 키오스크의 위치를 안내함과 동시에 상기 어플리케이션 구동부를 통해 상기 리모트 어플리케이션의 구동을 실행시키고,
상기 서버는,
사용자에 의해 이용될 상기 키오스크에 해당되며, 장애인인 사용자에게 적용할 수 있는 할인 혜택 정보 및 사용자별 할인 혜택을 적용한 이력을 관리하기 위한 결제 항목 관리부;를 더 포함하고,
상기 결제 항목 관리부는,
장애인 인증에 따라 결제 금액 할인이 적용되는 키오스크들의 식별값을 별도로 관리하고,
상기 키오스크가 장애인 할인이 적용 가능한 기기인 경우, 장애인 할인 적용 가능을 알리는 안내를 푸시 알림의 형태로 제공하는 것을 특징으로 하는 스마트폰을 이용한 시각 장애인용 키오스크 제어 리모컨 시스템.
In a system comprising a smartphone, a server and a kiosk,
The smartphone transmits a location that changes according to the user's movement to the server in real time, and when adjacent to the kiosk, a remote application is automatically executed to transmit authentication information to the server to certify that the user is a disabled person,
The server,
Maps the location of the smartphone, automatically executes the remote application when it is adjacent to the kiosk within a certain distance, determines whether or not a previously registered disabled member is based on the authentication information, and authenticates when a member with a disability is confirmed Delivering completion information to the smartphone, generating customized command information for changing at least one type or setting value among functions serviced in response to the user's failure type, and delivering it to the kiosk,
The kiosk,
Transmitting a wireless signal including registration information of the kiosk to the smart phone meeting a preset condition, and performing an operation for applying a disabled person corresponding to the user's disability type based on the authentication completion information received from the server,
The remote application,
Automatically executes the remote application in response to a wireless signal received from the kiosk, transmits it to the server when a user inputs the authentication information through the remote application, and transmits authentication completion information and a custom command signal from the server An application driver receiving a signal; And
In response to receiving a custom command signal from the server, a custom setting conversion unit for changing a setting value of the kiosk displayed in response to the custom command signal; Including,
The smartphone,
Includes; a location detection unit for transmitting the location of the smartphone to the server in real time based on GPS,
The server guides the location of the kiosk to the smartphone when the kiosk approaches within a predetermined distance from the location of the smartphone transmitted from the location detection unit and at the same time operates the remote application through the application driver. Run it,
The server,
A payment item management unit corresponding to the kiosk to be used by the user and for managing discount benefit information applicable to a user with a disability and a history of applying the discount benefit for each user; further comprising,
The payment item management unit,
Separately manage the identification values of kiosks to which payment discount is applied according to the authentication of the disabled,
When the kiosk is a device to which a discount for a disabled person is applicable, a remote control system for controlling a kiosk for the visually impaired using a smartphone, characterized in that providing a guide notifying that a discount for the disabled is applicable in the form of a push notification.
삭제delete 삭제delete 제1항에 있어서,
상기 맞춤형 설정 변환부는,
상기 맞춤 명령 정보의 내용에 근거하여, 상기 키오스크에서 제공되는 경고알림을 상기 스마트폰으로도 출력하는 경고알림모듈;
상기 맞춤 명령 정보의 내용에 근거하여, 상기 키오스크에서 출력되는 사운드를 텍스트화하고, 상기 키오스크에서 디스플레이되는 텍스트 사이즈의 조정을 수행하는 설정제어모듈; 및
상기 맞춤 명령 정보의 내용에 근거하여, 상기 키오스크에서 제공될 시각 정보를 사운드 형식으로 변환하여 제공하고, 사운드 출력 설정값을 조정하는 출력제어모듈;을 포함하는 것을 특징으로 하는 스마트폰을 이용한 시각 장애인용 키오스크 제어 리모컨 시스템.
The method of claim 1,
The customized setting conversion unit,
A warning notification module for outputting a warning notification provided from the kiosk to the smartphone based on the content of the customized command information;
A setting control module that converts the sound output from the kiosk into text and adjusts the text size displayed in the kiosk based on the content of the custom command information; And
And an output control module for converting and providing visual information to be provided from the kiosk in a sound format and adjusting a sound output setting value based on the content of the customized command information; Remote control system for kiosk control.
제1항에 있어서,
상기 키오스크는,
상기 스마트폰이 수신할 수 있는 무선 통신 신호를 출력하는 호출기;가 추가로 포함되며,
상기 무선 통신 신호는 상기 키오스크의 등록 정보를 포함하고,
상기 키오스크의 등록 정보는 키오스크의 설치 위치, 키오스크의 일련번호, 키오스크의 제공 서비스 분야 정보를 포함하는 것을 특징으로 하는 스마트폰을 이용한 시각 장애인용 키오스크 제어 리모컨 시스템.
The method of claim 1,
The kiosk,
A pager that outputs a wireless communication signal that the smartphone can receive; is additionally included,
The wireless communication signal includes registration information of the kiosk,
The registration information of the kiosk includes information about an installation location of the kiosk, a serial number of the kiosk, and service field information of the kiosk. A kiosk control remote control system for the visually impaired using a smart phone.
제1항에 있어서,
상기 서버는,
장애인 사용자가 상기 리모트 어플리케이션을 통해 인증 서비스의 회원으로 등록되도록 지원하며, 등록된 장애인 사용자의 스마트폰으로 일련번호를 전송하고, 상기 사용자로부터 제공된 인증용 정보의 사용자의 장애 유무, 장애 정도, 장애 유형 정보를 확인하는 인증관리부; 및
상기 인증관리부에서 확인된 사용자의 장애 정도 및 장애 유형 정보에 대응하여 상기 키오스크의 설정값을 변경하는 맞춤 명령 신호를 생성하는 맞춤서비스 관리부;를 포함하는 것을 특징으로 하는 스마트폰을 이용한 시각 장애인용 키오스크 제어 리모컨 시스템.
The method of claim 1,
The server,
Supports users with disabilities to register as members of the authentication service through the remote application, transmits a serial number to the smartphone of the registered disabled user, and whether the user has a disability, degree of disability, and type of disability in the authentication information provided by the user Authentication management unit to check information; And
A kiosk for the visually impaired using a smartphone, comprising: a customized service management unit that generates a customized command signal for changing a set value of the kiosk in response to the user's degree of disability and disability type information checked by the authentication management unit. Control remote control system.
제6항에 있어서,
상기 서버는,
사용자가 상기 스마트폰을 통해 입력한 내용 중 상기 키오스크에 대한 조작 명령을 추출하며, 추출된 조작 명령을 상기 키오스크에 전달하는 중계 지원부;를 포함하는 것을 특징으로 하는 스마트폰을 이용한 시각 장애인용 키오스크 제어 리모컨 시스템.
The method of claim 6,
The server,
A kiosk control for the visually impaired using a smartphone, comprising: a relay support unit that extracts an operation command for the kiosk from among contents input by a user through the smartphone and transmits the extracted operation command to the kiosk. Remote control system.
제1항에 있어서,
상기 키오스크는,
상기 서버로부터 수신되는 맞춤 명령 정보의 내용에 근거하여, 제공하고자 하는 정보를 사용자의 장애 유형에 맞게 변경하여 제공하는 맞춤서비스 제공부;가 포함되는 것을 특징으로 하는 스마트폰을 이용한 시각 장애인용 키오스크 제어 리모컨 시스템.
The method of claim 1,
The kiosk,
Based on the content of the customized command information received from the server, a customized service providing unit that changes and provides the information to be provided according to the type of disability of the user; a kiosk control for the visually impaired using a smartphone, characterized in that it includes Remote control system.
KR1020200107525A 2020-08-26 2020-08-26 Kiosk remote control system for the visually impaired using a smartphone KR102208323B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020200107525A KR102208323B1 (en) 2020-08-26 2020-08-26 Kiosk remote control system for the visually impaired using a smartphone

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020200107525A KR102208323B1 (en) 2020-08-26 2020-08-26 Kiosk remote control system for the visually impaired using a smartphone

Publications (1)

Publication Number Publication Date
KR102208323B1 true KR102208323B1 (en) 2021-01-27

Family

ID=74238974

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020200107525A KR102208323B1 (en) 2020-08-26 2020-08-26 Kiosk remote control system for the visually impaired using a smartphone

Country Status (1)

Country Link
KR (1) KR102208323B1 (en)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102435206B1 (en) * 2022-03-10 2022-08-31 주식회사 에이티랩 Kiosk simple operation system and method for visually impaired
KR102477206B1 (en) * 2021-12-28 2022-12-13 (주)건융아이비씨 Ordering system and method for the visually impaired
KR20230078850A (en) 2021-11-26 2023-06-05 충남대학교산학협력단 Height adjustable Safety kiosk
KR20230092224A (en) * 2021-12-17 2023-06-26 (주)한우리아이티 Method for authenticating user
KR102582654B1 (en) * 2023-04-28 2023-09-26 하나시스 주식회사 Product payment system for universal
JP7433681B1 (en) 2023-02-28 2024-02-20 株式会社Pay Route Disabled payment system, payment method and program

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101480326B1 (en) 2013-06-07 2015-01-08 (주)본시스 Kiosk device for physically handicapped person, and method for controlling screen display thereof
KR20190008068A (en) * 2017-07-13 2019-01-23 주식회사 세한알에프시스템 Disabled person service system based on beacon
KR102007436B1 (en) * 2018-02-14 2019-10-23 주식회사 뉴턴테크놀러지 Interactive Kiosk System
KR102142034B1 (en) * 2019-06-26 2020-08-06 주식회사 샘물정보통신 Authentication and security system for the disabled

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101480326B1 (en) 2013-06-07 2015-01-08 (주)본시스 Kiosk device for physically handicapped person, and method for controlling screen display thereof
KR20190008068A (en) * 2017-07-13 2019-01-23 주식회사 세한알에프시스템 Disabled person service system based on beacon
KR102007436B1 (en) * 2018-02-14 2019-10-23 주식회사 뉴턴테크놀러지 Interactive Kiosk System
KR102142034B1 (en) * 2019-06-26 2020-08-06 주식회사 샘물정보통신 Authentication and security system for the disabled

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20230078850A (en) 2021-11-26 2023-06-05 충남대학교산학협력단 Height adjustable Safety kiosk
KR20230092224A (en) * 2021-12-17 2023-06-26 (주)한우리아이티 Method for authenticating user
KR102615725B1 (en) * 2021-12-17 2023-12-20 (주)한우리아이티 Method for authenticating user
KR102477206B1 (en) * 2021-12-28 2022-12-13 (주)건융아이비씨 Ordering system and method for the visually impaired
KR102435206B1 (en) * 2022-03-10 2022-08-31 주식회사 에이티랩 Kiosk simple operation system and method for visually impaired
JP7433681B1 (en) 2023-02-28 2024-02-20 株式会社Pay Route Disabled payment system, payment method and program
KR102582654B1 (en) * 2023-04-28 2023-09-26 하나시스 주식회사 Product payment system for universal

Similar Documents

Publication Publication Date Title
KR102208323B1 (en) Kiosk remote control system for the visually impaired using a smartphone
CN107004312B (en) Method for providing visitor controlled access into a building
EP3177077A1 (en) Method and device for network access
CN107004341A (en) trainable transceiver and cloud computing system architecture system and method
US20120173744A1 (en) Wireless connection method and apparatus using image recognition in mobile communication terminal
KR102152325B1 (en) Customized service support system of unmanned device according to disability certification
KR20160059798A (en) Method and System for Servicing Call with Doorphone using Telematics
WO2015178070A1 (en) Information processing system, storage medium, and information processing method
KR20160129496A (en) System and method for calling owner of parked car
KR20110133884A (en) Call system of taxi
US10728258B2 (en) Method for providing an access device for a personal data source
EP2800078A1 (en) Method and apparatus for providing home security service in communication system
KR101947755B1 (en) System for providing one-stop real-time guard and the method thereof
KR102152326B1 (en) Global sign language interpretation support system
KR101708394B1 (en) Platform emergency communication system and method for processing thereof
KR102013558B1 (en) Bus Information System Based on Bus Information Terminal and Methof for Controlling thereof
KR20240019484A (en) Sign language assistance kiosk system for the hearing impaired
US11265512B2 (en) Door-knocking for teleconferencing
KR101838479B1 (en) Public telephone capable of automatic call connection and method thereof, and Traffic signal assistive apparatus capable of automatic call connection
US20180286219A1 (en) Customer Link
KR101725163B1 (en) Access control method, device and system using access control terminal
KR102265138B1 (en) Visitor identification system
WO2014038250A1 (en) Information disclosure assistance system, portable communication terminal, information disclosure assistance method, and recording medium
KR20190109811A (en) Method for providing mobile communication service and mobile communication system using the same
JP2009232421A (en) Intercom system

Legal Events

Date Code Title Description
E701 Decision to grant or registration of patent right
GRNT Written decision to grant