KR20230109463A - 디지털 소외계층을 위한 차세대 키오스크 시스템 및 방법 - Google Patents
디지털 소외계층을 위한 차세대 키오스크 시스템 및 방법 Download PDFInfo
- Publication number
- KR20230109463A KR20230109463A KR1020220005466A KR20220005466A KR20230109463A KR 20230109463 A KR20230109463 A KR 20230109463A KR 1020220005466 A KR1020220005466 A KR 1020220005466A KR 20220005466 A KR20220005466 A KR 20220005466A KR 20230109463 A KR20230109463 A KR 20230109463A
- Authority
- KR
- South Korea
- Prior art keywords
- user
- unit
- voice
- underprivileged
- digitally
- Prior art date
Links
- 238000000034 method Methods 0.000 title claims abstract description 34
- 238000013459 approach Methods 0.000 claims description 22
- 238000013473 artificial intelligence Methods 0.000 claims description 21
- 210000001747 pupil Anatomy 0.000 claims description 12
- 230000006870 function Effects 0.000 claims description 10
- 238000012790 confirmation Methods 0.000 claims description 9
- 238000009795 derivation Methods 0.000 claims description 8
- 230000005684 electric field Effects 0.000 claims description 8
- 238000005259 measurement Methods 0.000 claims description 7
- 238000001514 detection method Methods 0.000 claims description 6
- 238000004806 packaging method and process Methods 0.000 claims description 6
- 238000010187 selection method Methods 0.000 claims description 6
- 238000013519 translation Methods 0.000 claims description 4
- 230000008859 change Effects 0.000 claims description 3
- 230000010355 oscillation Effects 0.000 claims description 3
- 238000006243 chemical reaction Methods 0.000 abstract description 4
- 238000010586 diagram Methods 0.000 description 12
- 230000015572 biosynthetic process Effects 0.000 description 2
- 238000010276 construction Methods 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 230000001771 impaired effect Effects 0.000 description 2
- 235000016709 nutrition Nutrition 0.000 description 2
- 230000035764 nutrition Effects 0.000 description 2
- 238000003786 synthesis reaction Methods 0.000 description 2
- 208000025721 COVID-19 Diseases 0.000 description 1
- 230000008901 benefit Effects 0.000 description 1
- 230000037213 diet Effects 0.000 description 1
- 235000005911 diet Nutrition 0.000 description 1
- 230000003203 everyday effect Effects 0.000 description 1
- 238000000605 extraction Methods 0.000 description 1
- 235000013410 fast food Nutrition 0.000 description 1
- 235000012054 meals Nutrition 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000007480 spreading Effects 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G07—CHECKING-DEVICES
- G07F—COIN-FREED OR LIKE APPARATUS
- G07F17/00—Coin-freed apparatus for hiring articles; Coin-freed facilities or services
- G07F17/40—Coin-freed apparatus for hiring articles; Coin-freed facilities or services for devices for accepting orders, advertisements, or the like
-
- F—MECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
- F16—ENGINEERING ELEMENTS AND UNITS; GENERAL MEASURES FOR PRODUCING AND MAINTAINING EFFECTIVE FUNCTIONING OF MACHINES OR INSTALLATIONS; THERMAL INSULATION IN GENERAL
- F16M—FRAMES, CASINGS OR BEDS OF ENGINES, MACHINES OR APPARATUS, NOT SPECIFIC TO ENGINES, MACHINES OR APPARATUS PROVIDED FOR ELSEWHERE; STANDS; SUPPORTS
- F16M11/00—Stands or trestles as supports for apparatus or articles placed thereon ; Stands for scientific apparatus such as gravitational force meters
- F16M11/02—Heads
- F16M11/04—Means for attachment of apparatus; Means allowing adjustment of the apparatus relatively to the stand
- F16M11/043—Allowing translations
- F16M11/046—Allowing translations adapted to upward-downward translation movement
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S19/00—Satellite radio beacon positioning systems; Determining position, velocity or attitude using signals transmitted by such systems
- G01S19/01—Satellite radio beacon positioning systems transmitting time-stamped messages, e.g. GPS [Global Positioning System], GLONASS [Global Orbiting Navigation Satellite System] or GALILEO
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
- G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/16—Sound input; Sound output
- G06F3/167—Audio in a user interface, e.g. using voice commands for navigating, audio feedback
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F9/00—Arrangements for program control, e.g. control units
- G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
- G06F9/44—Arrangements for executing specific programs
- G06F9/451—Execution arrangements for user interfaces
- G06F9/454—Multi-language systems; Localisation; Internationalisation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N3/00—Computing arrangements based on biological models
- G06N3/02—Neural networks
- G06N3/04—Architecture, e.g. interconnection topology
- G06N3/045—Combinations of networks
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/161—Detection; Localisation; Normalisation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/18—Eye characteristics, e.g. of the iris
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L13/00—Speech synthesis; Text to speech systems
- G10L13/08—Text analysis or generation of parameters for speech synthesis out of text, e.g. grapheme to phoneme translation, prosody generation or stress or intonation determination
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Human Computer Interaction (AREA)
- General Engineering & Computer Science (AREA)
- Health & Medical Sciences (AREA)
- Multimedia (AREA)
- General Health & Medical Sciences (AREA)
- Software Systems (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Computational Linguistics (AREA)
- Remote Sensing (AREA)
- Radar, Positioning & Navigation (AREA)
- Acoustics & Sound (AREA)
- Computer Networks & Wireless Communication (AREA)
- Oral & Maxillofacial Surgery (AREA)
- Mechanical Engineering (AREA)
- Ophthalmology & Optometry (AREA)
- Life Sciences & Earth Sciences (AREA)
- Data Mining & Analysis (AREA)
- Evolutionary Computation (AREA)
- Molecular Biology (AREA)
- Computing Systems (AREA)
- Mathematical Physics (AREA)
- Artificial Intelligence (AREA)
- Biophysics (AREA)
- Biomedical Technology (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
본 발명은 디지털 소외계층을 위한 차세대 키오스크 시스템 및 방법에 관한 것으로, 장애인 및 중·장년층 등의 디지털 소외계층을 위해 눈높이 맞춤이 자동 가능하며, 텍스트 입력 주문 외, 음성 인식 자동 텍스트 변환 기능에 따른 음성 주문 서비스를 제공하는 디지털 소외계층을 위한 차세대 키오스크 시스템 및 방법에 관한 것으로, 키오스크에 있어서, 사용자의 접근을 인식하는 사용자인식부; 터치스크린의 높이를 조절하는 위치제어부; 사용자 주문 음성 지원 서비스를 제공하는 음성출력부; 사용자의 주문 정보를 입력받는 입력부;를 포함한다.
Description
본 발명은 디지털 소외계층을 위한 차세대 키오스크 시스템 및 방법에 관한 것으로, 장애인 및 중·장년층 등의 디지털 소외계층을 위해 눈높이 맞춤이 자동 가능하며, 텍스트 입력 주문 외, 음성 인식 자동 텍스트 변환 기능에 따른 음성 주문 서비스를 제공하는 디지털 소외계층을 위한 차세대 키오스크 시스템 및 방법에 관한 것이다.
코로나 팬데믹으로 우리 사회 전반에 걸친 각종 생활문화 역시 급속도록 변화되면서, 터치스크린을 기반으로 주문·결제 등을 할 수 있는 무인 자동화기기는 인건비 절감과 코로나19 감염 우려 속 고객과 마주하지 않아도 된다는 장점 등으로 빠른 확산세를 보이고 있다. 키오스크는 원래 영화관과 패스트푸드점 등 일부 업종에서만 활용되다가 이제는 주민 센터와 일반음식점에서도 쉽게 볼 수 있을 정도로 일상생활에 빠르게 접목되고 있다. 또한, 인공지능(AI)과 독자 운용체계(웹OS) 등 소프트웨어(SW) 역량, 다양한 로봇 기술까지 녹인 키오스크와, 시각·청각·지체 장애인은 물론 어린이, 노인도 사용하기 쉬운 키오스크가 출시되고 있다.
즉, 코로나19 확산으로 비대면 서비스를 위한 키오스크가 빠르게 보급에 따른 키오스크의 사용률이 계속해서 증가하는 상황에서, 많은 어르신과 장애인분들의키오스크 사용에 있어 나타나는 다양한 문제점을 고려하지 못한다는 점과, 이들의 주문에 어려움으로 결국 종업원을 불러야 하거나 주위 사람에게 부탁을 해야 하는 경우가 발생한다는 한계점이 존재한다는 있다.
본 발명의 실시 예들에 따른, 키오스크에 있어서, 디지털 소외계층을 위한 차세대 키오스크 시스템은 사용자의 접근을 인식하는 사용자인식부; 상기 사용자의 접근이 센싱됨에 따른 터치스크린의 높이를 조절하는 위치제어부; 사용자의 주문 정보를 입력받는 입력부; 사용자의 단계별 주문법 및 상기 사용자의 주문 정보와 관련하여 음성 지원 서비스를 제공하는 음성출력부;를 포함한다.
본 발명의 실시 예들에 있어서, 상기 사용자인식부는, 상기 키오스크의 초음파 센서 기반의 사용자의 접근을 감지하는 초음파센싱부; 및 사용자의 접근에 따른 상기 초음파 센서의 감지 세기에 따른, 상기 터치스크린의 방향의 위치를 사용자 방향으로 조절하는 스크린방향제어부;를 포함한다.
본 발명의 실시 예들에 있어서, 상기 키오스크의 초음파 센서는, 감지선에 고주파의 발진 주파수를 인가하여 전계가 형성함으로써, 상기 감지선의 전계 값의 변화를 통해 물체의 비접촉 근접함을 센싱한다.
본 발명의 실시 예들에 있어서, 상기 위치제어부는, GPS 혹은 비콘 기반의 사용자의 위치를 측정하는 사용자위치측정부; 상기 사용자위치측정부에서 측정된 사용자 위치 정보 기반의 상기 터치스크린의 방향을 조절하는 스크린방향제어부;를 포함한다.
본 발명의 실시 예들에 있어서, 상기 위치제어부는, 상기 터치스크린의 상단에 위치한 카메라를 통해 사용자의 얼굴을 센싱하는 센싱부; 인공지능 기반의 상기 사용자의 얼굴 이미지로부터 사용자의 동공 위치 정보를 도출하는 사용자눈위치도출부;를 포함한다.
본 발명의 실시 예들에 있어서, 상기 위치제어부는, 상기 사용자의 동공 위치 정보에 따른, 사용자의 눈높이에 맞춰 상기 터치스크린의 높이를 조절하는 높이조절부;를 더 포함한다.
본 발명의 실시 예들에 있어서, 상기 입력부는, 상기 터치스크린에 사용자의 텍스트 터치 입력 정보를 수집하는 텍스트입력부; 상기 터치스크린에 탑재된 인공지능 음성 인식 센서 기반의 사용자의 음성 입력 정보를 수집하는 음성정보수집부;를 포함한다.
본 발명의 실시 예들에 있어서, 상기 음성정보수집부는, 인공지능 음성 인식 분석 기반의 사용자의 사용 언어를 입력 받아 사용자 언어 기반의 텍스트 번역 정보를 상기 음성출력부;로 전달한다.
본 발명의 실시 예들에 있어서, 상기 음성출력부는, 텍스트 음성 변환(TTS: Text To Speech)기능 기반의 상기 키오스크에 포함된 콘텐츠 혹은 메뉴 관련 음성 지원 서비스;와 사용자 콘텐츠 혹은 메뉴 선택 방식과, 포장 혹은 내부매장이용 선택 방식 및 결제 방식과 관련한 음성 지원 서비스를 제공하는 음성지원출력부;를 포함한다.
본 발명의 실시 예들에 있어서, 상기 음성출력부는, 사용자가 선택한 콘텐츠 혹은 메뉴 및 포장 혹은 내부매장이용 방식 및 결제 방식을 사용자용 언어 기반의 확인용 음성 피드백 지원 서비스를 제공하는 음성확인도출부;를 더 포함한다.
본 발명의 또 다른 실시 예들에 따른, 키오스크 시스템 구현 방법에 있어서, 사용자인식부가 사용자의 접근을 인식하는 단계; 상기 사용자인식부에서 상기 사용자의 접근을 센싱함에 따른, 위치제어부가 터치스크린의 높이를 조절하는 단계; 음성출력부가 사용자의 단계별 주문법의 음성 지원 서비스를 제공하는 단계; 입력부가 사용자의 주문 정보를 입력받는 단계; 상기 음성출력부가 상기 입력부에서 입력된 상기 사용자의 주문 정보와 관련하여 음성 지원 서비스를 제공하는 단계;를 포함한다.
본 발명의 실시 예들에 있어서, 상기 사용자인식부가 사용자의 접근을 인식하는 단계는, 상기 키오스크의 초음파 센서 기반의 사용자의 접근을 감지하는 단계; 사용자의 접근에 따른 상기 초음파 센서의 감지 세기에 따른, 상기 터치스크린의 방향의 위치를 사용자 방향으로 조절하는 단계;를 포함한다.
본 발명의 실시 예들에 있어서, 상기 위치제어부가 터치스크린의 높이를 조절하는 단계는, GPS 혹은 비콘 기반의 사용자의 위치를 측정하는 단계; 사용자 위치 정보 기반의 상기 터치스크린의 방향을 조절하는 단계; 상기 터치스크린의 상단에 위치한 카메라를 통해 사용자의 얼굴을 센싱하는 단계; 인공지능 기반의 상기 사용자의 얼굴 이미지로부터 사용자의 동공 위치 정보를 도출하는 단계; 상기 사용자의 동공 위치 정보에 따른, 사용자의 눈높이에 맞춰 상기 터치스크린의 높이를 조절하는 단계;를 포함한다.
본 발명의 실시 예들에 있어서, 상기 입력부가 사용자의 주문 정보를 입력받는 단계는, 상기 터치스크린에 사용자의 텍스트 터치 입력 정보를 수집하는 단계; 상기 터치스크린에 탑재된 인공지능 음성 인식 센서 기반의 사용자의 음성 입력 정보를 수집하는 단계;를 포함한다.
이상에서 설명한 바와 같은 사용자 맞춤형 식사·영양관리 데이터 구축 시스템 및 방법에 따르면,
첫째, 사용자가 특정 동작을 하지 않고, 키오스크에 접근만 하게 되더라도 사용자 맞춤형 높이에 맞게 카메라가 이동한다.
둘재, 인공지능 기반의 사용자 얼굴 인식기능에 따른 사용자 눈높이 조절 기능을 제공할 수 있다.
셋째, 시각 장애인과 키오스크 사용 경험이 전무한 중장년층을 위한 음성합성 시스템(TTS)을 이용하여 시스템에 기록된 텍스트를 음성 서비스 지원하여, 키오스크 사용 방법을 음성으로 지원할 수 있다.
넷째, 디지털 소외계층을 위한 맞춤 서비스를 제공할 수 있다.
도 1과 도 2는 본 발명의 모식도 및 구성도이다.
도 3은 본 발명의 일실시예에 따른 사용자인식부(100)의 구성도이다.
도 4와 도 5는 본 발명의 일실시예에 따른 위치제어부(200)의 모식도 및 구성도이다.
도 6은 본 발명의 일실시예에 따른 입력부(300)의 구성도이다.
도 7은 본 발명의 일실시예에 따른 음성출력부(400)의 구성도이다.
도 8은 본 발명의 흐름도이다.
도 3은 본 발명의 일실시예에 따른 사용자인식부(100)의 구성도이다.
도 4와 도 5는 본 발명의 일실시예에 따른 위치제어부(200)의 모식도 및 구성도이다.
도 6은 본 발명의 일실시예에 따른 입력부(300)의 구성도이다.
도 7은 본 발명의 일실시예에 따른 음성출력부(400)의 구성도이다.
도 8은 본 발명의 흐름도이다.
첨부한 도면을 참조하여 본 발명의 실시 예들에 따른 디지털 소외계층을 위한 차세대 키오스크 시스템 및 방법에 대하여 상세히 설명한다. 본 발명은 다양한 변경을 가할 수 있고 여러 가지 형태를 가질 수 있는바, 특정 실시 예들을 도면에 예시하고 본문에 상세하게 설명하고자 한다. 그러나 이는 본 발명을 특정한 개시 형태에 대해 한정하려는 것이 아니며, 본 발명의 사상 및 기술 범위에 포함되는 모든 변경, 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다. 각 도면을 설명하면서 유사한 참조부호를 유사한 구성요소에 대해 사용하였다. 첨부된 도면에 있어서, 구조물들의 치수는 본 발명의 명확성을 기하기 위하여 실제보다 확대하거나, 개략적인 구성을 이해하기 위하여 실제보다 축소하여 도시한 것이다.
또한, 제1 및 제2 등의 용어는 다양한 구성요소들을 설명하는데 사용될 수 있지만, 상기 구성요소들은 상기 용어들에 의해 한정되어서는 안 된다. 상기 용어들은 하나의 구성요소를 다른 구성요소로부터 구별하는 목적으로만 사용된다. 예를 들어, 본 발명의 권리 범위를 벗어나지 않으면서 제1 구성요소는 제2 구성요소로 명명될 수 있고, 유사하게 제2 구성요소도 제1 구성요소로 명명될 수 있다. 한편, 다르게 정의되지 않는 한, 기술적이거나 과학적인 용어를 포함해서 여기서 사용되는 모든 용어들은 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 것과 동일한 의미를 가지고 있다. 일반적으로 사용되는 사전에 정의되어 있는 것과 같은 용어들은 관련 기술의 문맥 상 가지는 의미와 일치하는 의미를 가지는 것으로 해석되어야 하며, 본 출원에서 명백하게 정의하지 않는 한, 이상적이거나 과도하게 형식적인 의미로 해석되지 않는다.
본 발명은 이와 같은 문제점을 감안한 것으로서, 본 발명은 인공지능 기반의 사용자 위치 인식 기반의 사용자 눈높이 맞춤형 자동 높이 조절 기능을 포함하며, 사용자 음성 인식에 따른 사용자 음성 주문 인식 기능을 제공 및 텍스트 음성 변환(TTS: Text To Speech)기능 기반의 메뉴 선택의 음성 지원 서비스를 제공하는 디지털 소외계층을 위한 차세대 키오스크 시스템 및 방법을 제공하는 것이다.
도 1과 도 2는 본 발명의 모식도 및 구성도이다.
도 1과 도 2를 참고하면, 키오스크에 있어서, 디지털 소외계층을 위한 차세대 키오스크 시스템은 사용자인식부(100), 위치제어부(200), 입력부(300) 음성출력부(400)를 포함한다. 사용자인식부(100)는 사용자의 접근을 인식하며, 위치제어부(200)는 상기 사용자의 접근이 센싱됨에 따른 터치스크린의 높이를 조절하며, 입력부(300)는 사용자의 주문 정보를 입력받고, 음성출력부(400)는 상기 사용자의 주문 정보와 관련하여 음성 지원 서비스를 제공한다.
도 3은 본 발명의 일실시예에 따른 사용자인식부(100)의 구성도이다.
도 3을 참고하면, 사용자인식부(100)는 초음파센싱부(100a) 및 스크린방향제어부(100b)를 포함한다. 제1항에 있어서,
초음파센싱부(100a)는 상기 키오스크의 초음파 센서 기반의 사용자의 접근을 감지하며, 스크린방향제어부(100b)는 사용자의 접근에 따른 상기 초음파 센서의 감지 세기에 따른, 상기 터치스크린의 방향의 위치를 사용자 방향으로 조절한다. 여기서, 상기 키오스크의 초음파 센서는, 감지선에 고주파의 발진 주파수를 인가하여 전계가 형성함으로써, 상기 감지선의 전계 값의 변화를 통해 물체의 비접촉 근접함을 센싱한다. 상기 초음파 센서값에 일정 값을 넘어서면 버리고 남은 값에 평균을 주어 이 문제점을 해결하고 정확성이 높아지는 특성을 이용하여, 상기 전계가 형성된 감지선 근방에 상기 도체 및 부도체의 물체가 비접촉 근접할 때, 상기 감지선에 측정된 전계의 측정에 따른 상기 도체 및 부도체 물체가 상기 키오스크 근방에 있음을 감지한다.
도 4와 도 5는 본 발명의 일실시예에 따른 위치제어부(200)의 모식도 및 구성도이다. 도 4와 도 5를 참고하면, 위치제어부(200)는 사용자위치측정부(200a), 스크린방향제어부(200b), 센싱부(200c), 사용자눈위치도출부(200d) 및 높이조절부(200e)를 포함한다.
사용자위치측정부(200a)는 GPS 혹은 비콘 기반의 사용자의 위치를 측정하며, 스크린방향제어부(200b)는 사용자위치측정부(200a)에서 측정된 사용자 위치 정보 기반의 상기 터치스크린의 방향을 조절하며, 센싱부(200c)는 상기 터치스크린의 상단에 위치한 카메라를 통해 사용자의 얼굴을 센싱하고, 사용자눈위치도출부(200d)는 인공지능 기반의 상기 사용자의 얼굴 이미지로부터 사용자의 동공 위치 정보를 도출한다. 또한, 높이조절부(200e)는 상기 사용자의 동공 위치 정보에 따른, 사용자의 눈높이에 맞춰 상기 터치스크린의 높이를 조절한다. 여기서, 높이조절부(200e)는 타임벨트 또는 도르래를 활용하여 터치 스크린을 움직임을 조절한다.
도 6은 본 발명의 일실시예에 따른 입력부(300)의 구성도이다.
도 6을 참고하면, 입력부(300)는 텍스트입력부(300a), 음성정보수집부(300b)를 포함한다. 텍스트입력부(300a)는 상기 터치스크린에 사용자의 텍스트 터치 입력 정보를 수집하며, 음성정보수집부(300b)는 상기 터치스크린에 탑재된 인공지능 음성 인식 센서 기반의 사용자의 음성 입력 정보를 수집한다. 여기서, 음성정보수집부(400b)는 인공지능 음성 인식 분석 기반의 사용자의 사용 언어를 입력 받아 사용자 언어 기반의 텍스트 번역 정보를 음성출력부(400)로 전달하여, 음성확인도출부(400b)에서는 사용자가 선택한 콘텐츠 혹은 메뉴 및 포장 혹은 내부매장이용 방식 및 결제 방식을 사용자용 언어 기반의 확인용 음성 피드백 지원 서비스를 제공한다.
도 7은 본 발명의 일실시예에 따른 음성출력부(400)의 구성도이다.
도 7을 참고하면, 음성출력부(400)는 음성지원출력부(400a)와 음성확인도출부(400b)를 포함한다. 음성지원출력부(400a)는 텍스트 음성 변환(TTS: Text To Speech)기능 기반의 상기 키오스크에 포함된 콘텐츠 혹은 메뉴 관련 음성 지원 서비스와, 사용자 콘텐츠 혹은 메뉴 선택 방식과 포장 혹은 내부매장이용 선택 방식 및 결제 방식과 관련한 음성 지원 서비스를 제공한다. 따라서, TTS(Text To Speach)와 인공지능 음성인식 기술 기반으로 하여, 사용자-카운터 직원과 대화형 방식으로 주문을 가능하게 하는 서비스를 제공한다. 음성확인도출부(400b)는 음성정보수집부(400b)는 인공지능 음성 인식 분석 기반의 사용자의 사용 언어를 입력 받아 사용자 언어 기반의 텍스트 번역 정보를 전달받아, 사용자가 선택한 콘텐츠 혹은 메뉴 및 포장 혹은 내부매장이용 방식 및 결제 방식을 사용자용 언어 기반의 확인용 음성 피드백 지원 서비스를 제공한다.
도 8은 본 발명의 흐름도이다.
도 8을 참고하면, 키오스크 시스템 구현 방법에 있어서, 디지털 소외계층을 위한 차세대 키오스크 시스템은 사용자인식부가 사용자의 접근을 인식하는 단계(S801); 상기 사용자인식부에서 상기 사용자의 접급을 센싱함에 따른, 위치제어부가 터치스크린의 높이를 조절하는 단계(S802); 음성출력부가 사용자의 단계별 주문법의 음성 지원 서비스를 제공하는 단계(S803); 입력부가 사용자의 주문 정보를 입력받는 단계(S804); 상기 음성출력부가 상기 입력부에서 입력된 상기 사용자의 주문 정보와 관련하여 음성 지원 서비스를 제공하는 단계(S805);를 포함한다.
본 발명의 실시 예들에 있어서, 상기 사용자인식부가 사용자의 접근을 인식하는 단계(S801)는, 상기 키오스크의 초음파 센서 기반의 사용자의 접근을 감지하는 단계; 사용자의 접근에 따른 상기 초음파 센서의 감지 세기에 따른, 상기 터치스크린의 방향의 위치를 사용자 방향으로 조절하는 단계;를 포함한다.
본 발명의 실시 예들에 있어서, 상기 위치제어부가 터치스크린의 높이를 조절하는 단계(S802)는, GPS 혹은 비콘 기반의 사용자의 위치를 측정하는 단계; 사용자 위치 정보 기반의 상기 터치스크린의 방향을 조절하는 단계; 상기 터치스크린의 상단에 위치한 카메라를 통해 사용자의 얼굴을 센싱하는 단계; 인공지능 기반의 상기 사용자의 얼굴 이미지로부터 사용자의 동공 위치 정보를 도출하는 단계; 상기 사용자의 동공 위치 정보에 따른, 사용자의 눈높이에 맞춰 상기 터치스크린의 높이를 조절하는 단계;를 포함한다.
본 발명의 실시 예들에 있어서, 상기 입력부가 사용자의 주문 정보를 입력받는 단계(S804)는, 상기 터치스크린에 사용자의 텍스트 터치 입력 정보를 수집하는 단계; 상기 터치스크린에 탑재된 인공지능 음성 인식 센서 기반의 사용자의 음성 입력 정보를 수집하는 단계;를 포함한다.
본 발명은 디지털 소외계층을 위한 차세대 키오스크 시스템 및 방법에 관한 것으로, 장애인 및 중·장년층 등의 디지털 소외계층을 위해 눈높이 맞춤이 자동 가능하며, 텍스트 입력 주문 외, 음성 인식 자동 텍스트 변환 기능에 따른 음성 주문 서비스를 제공하는 디지털 소외계층을 위한 차세대 키오스크 시스템 및 방법에 관한 것이다. 이상에서 설명한 바와 같은 사용자 맞춤형 식사·영양관리 데이터 구축 시스템 및 방법에 따르면, 첫째, 사용자가 특정 동작을 하지 않고, 키오스크에 접근만 하게 되더라도 사용자 맞춤형 높이에 맞게 카메라가 이동한다. 둘재, 인공지능 기반의 사용자 얼굴 인식기능에 따른 사용자 눈높이 조절 기능을 제공할 수 있다. 셋째, 시각 장애인과 키오스크 사용 경험이 전무한 중장년층을 위한 음성합성 시스템(TTS)을 이용하여 시스템에 기록된 텍스트를 음성 서비스 지원하여, 키오스크 사용 방법을 음성으로 지원할 수 있다.
앞서 설명한 본 발명의 상세한 설명에서는 본 발명의 바람직한 실시 예들을 참조하여 설명하였지만, 해당 기술 분야의 숙련된 당업자 또는 해당 기술 분야에 통상의 지식을 갖는 자라면 후술될 특허 청구범위에 기재된 본 발명의 사상 및 기술 영역으로부터 벗어나지 않는 범위 내에서 본 발명을 다양하게 수정 및 변경시킬 수 있음을 이해할 수 있을 것이다.
100: 사용자인식부 100a: 초음파센싱부
100b: 스크린방향제어부 200: 위치제어부
200a: 사용자위치측정부 200b: 스크린방향제어부
200c: 센싱부 200d: 사용자눈위치도출부
200e: 높이조절부 300: 입력부
300a: 텍스트입력부 300b: 음성정보수집부
400: 음성출력부 400a: 음성지원출력부
400b: 음성확인도출부
100b: 스크린방향제어부 200: 위치제어부
200a: 사용자위치측정부 200b: 스크린방향제어부
200c: 센싱부 200d: 사용자눈위치도출부
200e: 높이조절부 300: 입력부
300a: 텍스트입력부 300b: 음성정보수집부
400: 음성출력부 400a: 음성지원출력부
400b: 음성확인도출부
Claims (14)
- 키오스크에 있어서,
사용자의 접근을 인식하는 사용자인식부;
상기 사용자의 접근이 센싱됨에 따른 터치스크린의 높이를 조절하는 위치제어부;
사용자의 주문 정보를 입력받는 입력부;
사용자의 단계별 주문법 및 상기 사용자의 주문 정보와 관련하여 음성 지원 서비스를 제공하는 음성출력부;를 포함하는 것을 특징으로 하는 디지털 소외계층을 위한 차세대 키오스크 시스템. - 제1항에 있어서,
상기 사용자인식부는,
상기 키오스크의 초음파 센서 기반의 사용자의 접근을 감지하는 초음파센싱부; 및
사용자의 접근에 따른 상기 초음파 센서의 감지 세기에 따른,
상기 터치스크린의 방향의 위치를 사용자 방향으로 조절하는 스크린방향제어부;를 포함하는 것을 특징으로 하는 디지털 소외계층을 위한 차세대 키오스크 시스템. - 제2항에 있어서,
상기 키오스크의 초음파 센서는,
감지선에 고주파의 발진 주파수를 인가하여 전계가 형성함으로써,
상기 감지선의 전계 값의 변화를 통해 물체의 비접촉 근접함을 센싱하는 것을 특징으로 하는 디지털 소외계층을 위한 차세대 키오스크 시스템. - 제1항에 있어서,
상기 위치제어부는,
GPS 혹은 비콘 기반의 사용자의 위치를 측정하는 사용자위치측정부;
상기 사용자위치측정부에서 측정된 사용자 위치 정보 기반의 상기 터치스크린의 방향을 조절하는 스크린방향제어부;를 포함하는 것을 특징으로 하는 디지털 소외계층을 위한 차세대 키오스크 시스템. - 제4항에 있어서,
상기 위치제어부는,
상기 터치스크린의 상단에 위치한 카메라를 통해 사용자의 얼굴을 센싱하는 센싱부;
인공지능 기반의 상기 사용자의 얼굴 이미지로부터 사용자의 동공 위치 정보를 도출하는 사용자눈위치도출부;를 포함하는 것을 특징으로 하는 디지털 소외계층을 위한 차세대 키오스크 시스템. - 제5항에 있어서,
상기 위치제어부는,
상기 사용자의 동공 위치 정보에 따른,
사용자의 눈높이에 맞춰 상기 터치스크린의 높이를 조절하는 높이조절부;를 더 포함하는 것을 특징으로 하는 디지털 소외계층을 위한 차세대 키오스크 시스템. - 제1항에 있어서,
상기 입력부는,
상기 터치스크린에 사용자의 텍스트 터치 입력 정보를 수집하는 텍스트입력부;
상기 터치스크린에 탑재된 인공지능 음성 인식 센서 기반의 사용자의 음성 입력 정보를 수집하는 음성정보수집부;를 포함하는 것을 특징으로 하는 디지털 소외계층을 위한 차세대 키오스크 시스템. - 제7항에 있어서,
상기 음성정보수집부는,
인공지능 음성 인식 분석 기반의 사용자의 사용 언어를 입력 받아 사용자 언어 기반의 텍스트 번역 정보를 상기 음성출력부;로 전달하는 것을 특징으로 하는 디지털 소외계층을 위한 차세대 키오스크 시스템. - 제1항에 있어서,
상기 음성출력부는,
텍스트 음성 변환(TTS: Text To Speech)기능 기반의 상기 키오스크에 포함된 콘텐츠 혹은 메뉴 관련 음성 지원 서비스;와
사용자 콘텐츠 혹은 메뉴 선택 방식과, 포장 혹은 내부매장이용 선택 방식 및 결제 방식과 관련한 음성 지원 서비스를 제공하는 음성지원출력부;를 포함하는 것을 특징으로 하는 디지털 소외계층을 위한 차세대 키오스크 시스템. - 제9항에 있어서,
상기 음성출력부는,
사용자가 선택한 콘텐츠 혹은 메뉴 및 포장 혹은 내부매장이용 방식 및 결제 방식을 사용자용 언어 기반의 확인용 음성 피드백 지원 서비스를 제공하는 음성확인도출부;를 더 포함하는 것을 특징으로 하는 디지털 소외계층을 위한 차세대 키오스크 시스템. - 키오스크 시스템 구현 방법에 있어서,
사용자인식부가 사용자의 접근을 인식하는 단계;
상기 사용자인식부에서 상기 사용자의 접근을 센싱함에 따른,
위치제어부가 터치스크린의 높이를 조절하는 단계;
음성출력부가 사용자의 단계별 주문법의 음성 지원 서비스를 제공하는 단계;
입력부가 사용자의 주문 정보를 입력받는 단계;
상기 음성출력부가 상기 입력부에서 입력된 상기 사용자의 주문 정보와 관련하여 음성 지원 서비스를 제공하는 단계;를 포함하는 것을 특징으로 하는 디지털 소외계층을 위한 차세대 키오스크 방법. - 제11항에 있어서,
상기 사용자인식부가 사용자의 접근을 인식하는 단계는,
상기 키오스크의 초음파 센서 기반의 사용자의 접근을 감지하는 단계;
사용자의 접근에 따른 상기 초음파 센서의 감지 세기에 따른,
상기 터치스크린의 방향의 위치를 사용자 방향으로 조절하는 단계;를 포함하는 것을 특징으로 하는 디지털 소외계층을 위한 차세대 키오스크 방법. - 제11항에 있어서,
상기 위치제어부가 터치스크린의 높이를 조절하는 단계는,
GPS 혹은 비콘 기반의 사용자의 위치를 측정하는 단계;
사용자 위치 정보 기반의 상기 터치스크린의 방향을 조절하는 단계;
상기 터치스크린의 상단에 위치한 카메라를 통해 사용자의 얼굴을 센싱하는 단계;
인공지능 기반의 상기 사용자의 얼굴 이미지로부터 사용자의 동공 위치 정보를 도출하는 단계;
상기 사용자의 동공 위치 정보에 따른, 사용자의 눈높이에 맞춰 상기 터치스크린의 높이를 조절하는 단계;를 포함하는 것을 특징으로 하는 디지털 소외계층을 위한 차세대 키오스크 방법. - 제11항에 있어서,
상기 입력부가 사용자의 주문 정보를 입력받는 단계는,
상기 터치스크린에 사용자의 텍스트 터치 입력 정보를 수집하는 단계;
상기 터치스크린에 탑재된 인공지능 음성 인식 센서 기반의 사용자의 음성 입력 정보를 수집하는 단계;를 포함하는 것을 특징으로 하는 디지털 소외계층을 위한 차세대 키오스크 방법.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020220005466A KR20230109463A (ko) | 2022-01-13 | 2022-01-13 | 디지털 소외계층을 위한 차세대 키오스크 시스템 및 방법 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020220005466A KR20230109463A (ko) | 2022-01-13 | 2022-01-13 | 디지털 소외계층을 위한 차세대 키오스크 시스템 및 방법 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| KR20230109463A true KR20230109463A (ko) | 2023-07-20 |
Family
ID=87426254
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| KR1020220005466A KR20230109463A (ko) | 2022-01-13 | 2022-01-13 | 디지털 소외계층을 위한 차세대 키오스크 시스템 및 방법 |
Country Status (1)
| Country | Link |
|---|---|
| KR (1) | KR20230109463A (ko) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR102664988B1 (ko) * | 2023-11-20 | 2024-05-10 | 주식회사 엠엠피 | 노인의 키오스크 활용도 개선 방법 |
Citations (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR20210000078A (ko) | 2019-06-24 | 2021-01-04 | 건국대학교 글로컬산학협력단 | 개인 맞춤형 조절이 가능한 키오스크 및 그 제어 시스템 |
| KR20210056678A (ko) | 2019-11-11 | 2021-05-20 | 주식회사 휴니크 | 무인키오스크를 이용한 음성 주문 시스템 및 그 방법 |
-
2022
- 2022-01-13 KR KR1020220005466A patent/KR20230109463A/ko not_active Application Discontinuation
Patent Citations (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR20210000078A (ko) | 2019-06-24 | 2021-01-04 | 건국대학교 글로컬산학협력단 | 개인 맞춤형 조절이 가능한 키오스크 및 그 제어 시스템 |
| KR20210056678A (ko) | 2019-11-11 | 2021-05-20 | 주식회사 휴니크 | 무인키오스크를 이용한 음성 주문 시스템 및 그 방법 |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR102664988B1 (ko) * | 2023-11-20 | 2024-05-10 | 주식회사 엠엠피 | 노인의 키오스크 활용도 개선 방법 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP6700785B2 (ja) | 人工知能に基づく知能ロボットの制御システム、方法及び装置 | |
| US10592763B2 (en) | Apparatus and method for using background change to determine context | |
| KR100978011B1 (ko) | 국부적 환경 내의 사람들의 위치와 개인적 선호들에 따라 국부적 환경의 분위기를 적응시키는 시스템 및 방법 | |
| US20200042096A1 (en) | Multi Media Computing Or Entertainment System For Responding To User Presence And Activity | |
| CN108885485A (zh) | 基于存在性检测的数字助理体验 | |
| KR20230109463A (ko) | 디지털 소외계층을 위한 차세대 키오스크 시스템 및 방법 | |
| JP7285589B2 (ja) | 対話型健康状態評価方法およびそのシステム | |
| KR20070029794A (ko) | 유저와 시스템 사이에 통신을 하기 위한 방법 및 시스템 | |
| KR20150045683A (ko) | 맞춤형 식생활 서비스 제공 방법 및 맞춤형 식생활 서비스 제공 장치 | |
| US20180047030A1 (en) | Customer service device, customer service method, and customer service system | |
| US11670301B2 (en) | Lip-reading session triggering events | |
| US20220108561A1 (en) | System for capturing the movement pattern of a person | |
| KR102296271B1 (ko) | 시각 및 청각장애인용 키오스크 | |
| KR102521659B1 (ko) | 음주 측정을 통한 대리운전 연계 시스템 및 방법 | |
| CN105993038A (zh) | 操作控制系统的方法及因此的控制系统 | |
| Thieme et al. | Interpretability as a dynamic of human-AI interaction | |
| CN111670434A (zh) | 信息处理装置、信息处理方法和程序 | |
| US11657821B2 (en) | Information processing apparatus, information processing system, and information processing method to execute voice response corresponding to a situation of a user | |
| Topp et al. | An interactive interface for service robots | |
| KR102474399B1 (ko) | 사회적 약자가 손쉽게 활용하도록 접근성을 높인 키오스크와 키오스크의 콘텐츠 제공 방법 | |
| KR20210108302A (ko) | 시각적 인식을 사용하여 디바이스들을 페어링하기 위한 시스템들 및 방법들 | |
| JP2005199373A (ja) | コミュニケーション装置及びコミュニケーション方法 | |
| Dourado et al. | Towards interactive customization of multimodal embedded navigation systems for visually impaired people | |
| JP2023047410A (ja) | ユーザの動的状態に応じて物体認識に基づく情報を提示する携帯装置、プログラム及び方法 | |
| Loghmani et al. | Towards socially assistive robots for elderly: An end-to-end object search framework |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| E902 | Notification of reason for refusal | ||
| E601 | Decision to refuse application |