KR20150146078A - 언어학습 및 저시력 보조를 위한 문자인식 기능을 갖는 스마트 안경 및 그 스마트 안경을 이용한 문자 인식방법 - Google Patents

언어학습 및 저시력 보조를 위한 문자인식 기능을 갖는 스마트 안경 및 그 스마트 안경을 이용한 문자 인식방법 Download PDF

Info

Publication number
KR20150146078A
KR20150146078A KR1020140075946A KR20140075946A KR20150146078A KR 20150146078 A KR20150146078 A KR 20150146078A KR 1020140075946 A KR1020140075946 A KR 1020140075946A KR 20140075946 A KR20140075946 A KR 20140075946A KR 20150146078 A KR20150146078 A KR 20150146078A
Authority
KR
South Korea
Prior art keywords
data
pupil
character
control unit
user
Prior art date
Application number
KR1020140075946A
Other languages
English (en)
Other versions
KR101582890B1 (ko
Inventor
우삼용
양태헌
김종호
송한욱
최인묵
이성준
박연규
Original Assignee
한국표준과학연구원
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 한국표준과학연구원 filed Critical 한국표준과학연구원
Priority to KR1020140075946A priority Critical patent/KR101582890B1/ko
Publication of KR20150146078A publication Critical patent/KR20150146078A/ko
Application granted granted Critical
Publication of KR101582890B1 publication Critical patent/KR101582890B1/ko

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/002Specific input/output arrangements not covered by G06F3/01 - G06F3/16
    • G06F3/005Input arrangements through a video camera
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16Sound input; Sound output

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • General Health & Medical Sciences (AREA)
  • Multimedia (AREA)
  • User Interface Of Digital Computer (AREA)
  • Position Input By Displaying (AREA)

Abstract

본 발명은 언어학습 및 저시력 보조를 위한 문자인식 기능을 갖는 스마트 안경 및 그 스마트 안경을 이용한 문자 인식방법에 대한 것이다. 보다 상세하게는, 문자인식 기능을 갖는 스마트 안경에 있어서, 외부 영상을 촬상하여 영상데이터를 획득하는 외부 촬상수단; 안경 사용자의 동공위치와 상태를 추적하여 동공상태 데이터를 형성하는 동공추적카메라; 상기 동공상태 데이터를 기반으로 상기 외부 촬상수단이 촬상한 영상데이터 중 특정영역을 지정하고, 지정한 특정영역에서 문자를 판별하여 문자데이터를 형성하는 제어부; 상기 제어부로부터 상기 문자데이터를 전송받아 음성데이터로 전환하여 상기 사용자에게 제시하는 음성전달수단; 및 상기 외부 촬상수단, 상기 동공추적카메라, 상기 제어부 및 상기 음성전달수단의 작동유무를 결정하는 작동센서수단;을 포함하는 것을 특징으로 하는 언어학습 및 저시력 보조를 위한 문자인식 기능을 갖는 스마트 안경에 관한 것이다.

Description

언어학습 및 저시력 보조를 위한 문자인식 기능을 갖는 스마트 안경 및 그 스마트 안경을 이용한 문자 인식방법{Smart glasses with character recognition fuction and character recognition using the smart glasses}
본 발명은 언어학습 및 저시력 보조를 위한 문자인식 기능을 갖는 스마트 안경 및 그 스마트 안경을 이용한 문자 인식방법에 대한 것이다.
IT 기술의 발달과 더불어 디지털 카메라의 경우에는 그 응용 범위가 매우 폭넓고 다양하게 확산되고 있는 실정인데, 특히 상기 디지털 카메라는 일반적인 사진촬영 뿐만 아니라 특정 동영상을 촬영한 후 저장 및 전송하는 기능을 포함하고 있다.
이에, 최근에는 안경이나 헬멧 등에 디지털 카메라가 일체로 부착된 제품들이 개발되어, 상기 디지털 카메라가 부착된 해당 안경이나 헬멧 등을 특정 사용자가 착용한 상태에서 사용자의 동선을 따라 해당 영상을 촬영할 수 있도록 이루어진다.
그러나, 상술한 바와 같은 종래의 안경이나 헬멧 등에 부착된 디지털 카메라의 경우, 안경 또는 헬멧의 특정 지점에 디지털 카메라가 고정 설치되어 있음에 따라, 해당 디지털 카메라는 항상 안경 또는 헬멧의 부착 위치에서 일정한 전방의 영상만을 촬영하게 되는 문제점이 발생하게 되었다.
즉, 이에 따라, 종래의 안경이나 헬멧 등에 부착된 디지털 카메라는 촬영된 영상이 사용자의 시선과 정확히 일치하지 않게 되므로, 사용자가 촬영을 원하는 정확한 지점의 영상을 획득하는데 한계가 있게 되는 한편, 해당 디지털 카메라에 대한 촬영이나 정지 등의 작동을 제어를 행하기 위해서는 별도의 스위치 등을 조작해야만 하는 문제점도 발생하게 되었다.
이러한 문제점에 기반하여, 대한민국 공개 특허 제2013-0059827호에서는 안경에 부착된 디지털 카메라가 착용자의 동공 움직임을 기초로 그 방향 및 동작이 제어되면서 구동되도록 함에 따라, 안경 착용자의 시선에 의한 보다 정확하고 효율적인 영상 촬영이 이루어질 수 있도록 한 동공인식을 이용한 안경 카메라에 대해 기재하고 있다.
도 1은 종래 동공인식을 이용한 안경카메라의 사시도를 도시한 것이다. 도 1에 도시된 바와 같이, 종래 동공인식을 이용한 안경카메라는 착용자의 눈 주위에 위치하는 한 쌍의 안경테(2)와, 각 안경테(2) 일측에서 후방으로 연장 형성된 한 쌍의 안경다리(3)를 포함하는 안경과; 상기 안경의 일측 안경테(2) 전방에 설치되어, 사용자의 동공 위치 및 상태를 추적하는 제 1카메라(10)와; 상기 안경에 장착되어, 선택적으로 동작되면서 해당 영상을 촬영하는 제 2카메라(20)와; 상기 제 2카메라(20)의 상.하.좌.우 촬영 방향을 조절하는 모터부와; 상기 제 2카메라(20)의 촬영 영상이 저장되는 메모리부(40) 및; 상기 제 1카메라(10)를 매개로 안경 사용자의 동공 상태를 추적하여 인식한 후, 그 인식값에 따라 상기 모터부 및 제 2카메라(20)를 구동시켜 사용자의 시선에 따른 영상이 제 2카메라(20)를 통해 촬영된 후 저장될 수 있도록 각 구성요소에 대한 전반적인 제어를 행하는 제어부;를 포함하여 구성된다.
그러나 이러한 종래 동공인식을 이용한 안경카메라는 사용자의 시선을 반영하여 보다 정확하고 효율적인 영상촬영을 가능하게 하나, 문자인식이나 번역 기능 등을 수반하지 못한다는 문제점이 존재한다. 또한, 기존의 기술은 언어학습이나 저시력 보조를 위한 목적을 전혀 달성할 수 없는 문제점이 존재하였다.
따라서 이러한 사용자의 동공 상태나 동공의 정지시간, 시선 등을 감지하여 영상을 촬상하고 이러한 영상에 기반하여 문자를 추출하여 사용자에게 제공하거나, 추출된 문자를 번역하여 음성으로 사용자에게 제공하여 고령, 저시력자 및 노안을 해결할 수 있고, 영어, 한글 학습을 위해 읽어주는 기능을 갖는 어학용, 전시장용 등에서 응용될 수 있는 언어학습 및 저시력 보조를 위한 문자인식 기능을 갖는 스마트 안경이 요구되었다.
대한민국 공개 특허 제2013-0059827호 대한민국 공개 특허 제2010-0123036호 대한민국 등록 실용신안 제38918호 대한민국 등록 특허 제405636호
따라서 본 발명은 상기와 같은 종래의 문제점을 해결하기 위하여 안출된 것으로서, 본 발명의 일실시예에 따르면, 사용자의 동공의 정지시간을 측정하여 동공의 정지시간이 설정된 특정시간에 도달하게 되는 경우, 통신수단과 연계된 스마트 폰에 구비된 제어부에 의해 안경 프레임에 장착된 외부 촬상수단을 작동시켜 촬상된 해당 영상에서 문자를 추출하여 사용자에게 음성으로 전달하게 됨으로써, 저시력자에게 문자정보를 손쉽게 제공하거나 번역정보를 제공하거나 문자를 인식하여 해당 문자와 연계된 지식 정보 등을 음성으로 제시해 줄 수 있는 문자인식 기능을 갖는 스마트 안경을 제공하게 된다.
또한, 본 발명의 일실시예에 따르면, 사용자의 동공의 위치, 상태를 추적하여 시선에 대한 데이터를 형성하고, 동공의 깜빡임 또는 찡그림 등의 상태를 인식하여, 통신수단과 연계된 스마트 폰에 구비된 제어부에 의해 안경 프레임에 장착된 외부 촬상수단을 작동시켜 촬상된 해당 영상에서 시선에 대한 데이터를 기반으로 특정영역을 지정하고, 문자를 추출하여 사용자에게 음성으로 전달하게 됨으로써, 저시력자에게 문자정보를 손쉽게 제공하거나 번역정보를 제공하거나 문자를 인식하여 해당 문자와 연계된 지식 정보 등을 음성으로 제시해 줄 수 있는 문자인식 기능을 갖는 스마트 안경을 제공하게 된다.
그리고 본 발명의 일실시예에 따르면, 가속도계, 자이로센서, 터치센서 등을 적용하여 사용자가 안경테에 손을 가져다 대거나, 가볍게 두드리는 등의 행동을 감지하여 전체 시스템의 모드를 전환시킬 수 있는 문자인식 기능을 갖는 스마트 안경을 제공하게 된다.
본 발명의 그 밖에 목적, 특정한 장점들 및 신규한 특징들은 첨부된 도면들과 관련되어 이하의 상세한 설명과 바람직한 실시예로부터 더욱 명확해질 것이다.
본 발명의 제1목적은, 문자인식 기능을 갖는 스마트 안경에 있어서, 외부 영상을 촬상하여 영상데이터를 획득하는 외부 촬상수단; 안경 사용자의 동공이 설정된 특정시간 동안 정지되어 있는지는 판단하는 센서수단; 상기 센서수단에 의해 상기 특정시간 이상 동공이 정지되었다고 판단된 경우 상기 외부촬상수단을 구동시키고, 상기 외부촬상수단에서 촬상된 영상데이터를 기반으로 문자를 판별하여 문자데이터를 형성하고 상기 문자데이터를 음성데이터로 전환하는 제어부; 및 상기 제어부로부터 상기 음성데이터를 전송받아 상기 사용자에게 제시하는 음성전달수단을 포함하는 것을 특징으로 하는 문자인식 기능을 갖는 스마트 안경으로서 달성될 수 있다.
그리고, 상기 제어부, 상기 외부 촬상수단, 상기 음성전달수단 및 상기 센서수단은 안경을 사용자에게 착용할 수 있는 구조를 갖는 프레임에 장착된 것을 특징으로 할 수 있다.
또한, 상기 제어부는 휴대용 단말기에 구비되며, 상기 휴대용 단말기는 통신수단에 의해 상기 센서수단, 상기 외부 촬상수단, 상기 음성전달수단 중 적어도 어느 하나와 통신되는 것을 특징으로 할 수 있다.
그리고, 사용자의 입력을 감지하여, 상기 센서수단, 상기 외부 촬상수단, 상기 음성전달수단, 상기 제어부 중 적어도 어느 하나를 작동시키기 위한 작동센서수단을 더 포함하는 것을 특징으로 할 수 있다.
또한, 상기 구동센서수단은 자이로 센서, 가속도 센서 및 터치센서 중 적어도 어느 하나로 구성된 것을 특징으로 할 수 있다.
그리고, 상기 음성전달수단은, 사용자에게 문자인식여부에 대한 정보 및 외부촬상수단의 작동여부에 대한 정보 중 적어도 어느 하나를 음성으로 제시하는 것을 특징으로 할 수 있다.
본 발명의 제2목적은, 스마트 안경을 이용한 문자인식방법에 있어서, 센서수단에 의해 안경 사용자의 동공이 설정된 특정시간 동안 정지되고 있는지 여부를 감지하는 단계; 제어부가, 상기 센서수단에 의해 동공이 상기 특정시간 이상 정지되었다고 판단되면 외부 영상을 촬상하는 외부 촬상수단을 작동시키는 단계; 상기 외부 촬상수단에 의해 영상데이터를 형성하는 단계; 상기 제어부가 상기 영상데이터를 전송받아 문자를 추출하여 문자데이터를 형성하고, 상기 문자데이터를 음성데이터로 변환하는 단계; 및 음성전달수단이 상기 음성데이터를 전송받아 사용자에게 제시하는 단계를 포함하는 것을 특징으로 하는 스마트 안경을 이용한 문자인식방법으로서 달성될 수 있다.
그리고, 사용자의 입력에 따라 구동센서수단이 이를 감지하여 수동으로 상기 센서수단과, 상기 외부 촬상수단과, 상기 음성전달수단과, 상기 제어부 중 적어도 어느 하나를 작동시키는 단계를 더 포함하는 것을 특징으로 할 수 있다.
또한, 상기 음성전달수단이, 동공의 특정시간 이상 정지여부에 대한 정보 및 상기 영상데이터에서 문자를 추출하였는지 여부에 대한 정보 중 적어도 어느 하나를 제공하는 단계를 더 포함하는 것을 특징으로 할 수 있다.
본 발명의 제3목적은, 컴퓨터에 의해 판독 가능한 기록매체로서, 앞서 언급한 제2목적에 따른 문자인식방법을 실행시키기 위한 프로그램을 기록한 기록매체로서 달성될 수 있다.
본 발명의 제4목적은, 문자인식 기능을 갖는 스마트 안경에 있어서, 외부 영상을 촬상하여 영상데이터를 획득하는 외부 촬상수단; 안경 사용자의 동공위치와 상태를 추적하여 시선에 대한 동공상태 데이터를 형성하는 동공추적카메라; 상기 동공상태 데이터를 기반으로 상기 외부 촬상수단이 촬상한 영상데이터 중 특정영역을 지정하고, 지정한 특정영역에서 문자를 판별하여 문자데이터를 형성하고 음성데이터로 변환하는 제어부; 상기 제어부로부터 상기 음성데이터를 전송받아 상기 사용자에게 제시하는 음성전달수단; 및 상기 외부 촬상수단, 상기 동공추적카메라, 상기 제어부 및 상기 음성전달수단 중 적어도 어느 하나의 작동유무를 결정하는 작동센서수단;을 포함하는 것을 특징으로 하는 문자인식 기능을 갖는 스마트 안경으로서 달성될 수 있다.
그리고, 상기 동공추적 카메라에 의해 상기 동공상태가 기 설정된 동공상태와 일치된다고 판단되는 경우, 상기 제어부는 상기 외부촬상수단을 작동시키는 것을 특징으로 할 수 있다.
또한, 상기 작동센서수단은 가속도계, 자이로센서 및 터치센서 중 적어도 어느 하나를 포함하여 구성되는 것을 특징으로 할 수 있다.
그리고, 상기 제어부는 휴대용 단말기에 구비되며, 상기 휴대용 단말기는 통신수단에 의해, 상기 센서수단, 상기 외부 촬상수단, 상기 음성전달수단 중 적어도 어느 하나와 통신되는 것을 특징으로 할 수 있다.
본 발명의 제5목적은, 스마트 안경을 이용한 문자인식방법에 있어서, 동공추적카메라에 의해 안경 사용자의 동공위치와 상태를 추적하여 시선에 대한 동공상태 데이터를 형성하는 단계; 상기 외부 촬상수단이 외부 영상을 촬상하여 영상데이터를 형성하는 단계; 제어부가 상기 영상데이터를 전송받아 상기 동공상태 데이터를 기반으로 상기 영상데이터 중 특정영역을 지정하는 단계; 상기 제어부가 상기 특정영역에서 문자를 추출하여 문자데이터를 형성하고, 상기 문자데이터를 음성데이터로 변환하는 단계; 및 음성전달수단이 상기 음성데이터를 전송받아 사용자에게 제시하는 단계를 포함하는 것을 특징으로 하는 스마트 안경을 이용한 문자인식방법으로서 달성될 수 있다.
그리고, 사용자의 입력을 작동센서수단이 감지하여 상기 외부 촬상수단, 상기 동공추적 카메라, 상기 제어부 및 상기 음성전달수단 중 적어도 어느 하나가 작동되는 단계를 더 포함하고, 상기 영상데이터를 형성하는 단계 전에, 상기 동공추적 카메라에 의해 사용자의 동공상태가 기 설정된 동공상태와 일치된다고 판단되는 경우, 제어부가 상기 외부촬상수단을 작동시키는 단계를 더 포함하는 것을 특징으로 할 수 있다.
본 발명의 제6목적은, 컴퓨터에 의해 판독 가능한 기록매체로서, 앞서 언급한 제5목적에 따른 문자인식방법을 실행시키기 위한 프로그램을 기록한 기록매체로서 달성될 수 있다.
본 발명의 일실시예에 따르면, 사용자의 동공의 정지시간을 측정하여 동공의 정지시간이 설정된 특정시간에 도달하게 되는 경우, 통신수단과 연계된 스마트 폰에 구비된 제어부에 의해 안경 프레임에 장착된 외부 촬상수단을 작동시켜 촬상된 해당 영상에서 문자를 추출하여 사용자에게 음성으로 전달하게 됨으로써, 저시력자에게 문자정보를 손쉽게 제공하거나 번역정보를 제공하거나 문자를 인식하여 해당 문자와 연계된 지식 정보 등을 음성으로 제시해 줄 수 있는 효과를 갖는다.
또한, 본 발명의 일실시예에 따르면, 사용자의 동공의 위치, 상태를 추적하여 시선에 대한 데이터를 형성하고, 동공의 깜빡임 또는 찡그림 등의 상태를 인식하여, 통신수단과 연계된 스마트 폰에 구비된 제어부에 의해 안경 프레임에 장착된 외부 촬상수단을 작동시켜 촬상된 해당 영상에서 시선에 대한 데이터를 기반으로 특정영역을 지정하고, 문자를 추출하여 사용자에게 음성으로 전달하게 됨으로써, 저시력자에게 문자정보를 손쉽게 제공하거나 번역정보를 제공하거나 문자를 인식하여 해당 문자와 연계된 지식 정보 등을 음성으로 제시해 줄 수 있는 효과를 갖는다.
그리고 본 발명의 일실시예에 따르면, 가속도계, 자이로센서, 터치센서 등을 적용하여 사용자가 안경테에 손을 가져다 대거나, 가볍게 두드리는 등의 행동을 감지하여 전체 시스템의 모드를 전환시킬 수 있는 효과를 갖는다.
비록 본 발명이 상기에서 언급한 바람직한 실시예와 관련하여 설명되어 졌지만, 본 발명의 요지와 범위로부터 벗어남이 없이 다른 다양한 수정 및 변형이 가능한 것은 당업자라면 용이하게 인식할 수 있을 것이며, 이러한 변경 및 수정은 모두 첨부된 특허 청구 범위에 속함은 자명하다.
도 1은 종래 동공인식을 이용한 안경카메라의 사시도,
도 2는 본 발명의 제1실시예에 따른 문자인식 기능을 갖는 스마트 안경의 사시도,
도 3은 본 발명의 제1실시예에 따라 스마트 기기와 연계된 문자인식 기능을 갖는 스마트 안경의 사시도,
도 4는 본 발명의 제1실시예에 따른 제어부의 신호흐름을 나타낸 블록도,
도 5는 본 발명의 제1실시예에 따른 스마트 안경을 이용한 문자인식방법의 흐름도,
도 6은 본 발명의 제2실시예에 따른 문자인식 기능을 갖는 스마트 안경의 사시도,
도 7은 본 발명의 제2실시예에 따라 스마트 기기와 연계된 문자인식 기능을 갖는 스마트 안경의 사시도,
도 8은 본 발명의 제2실시예에 따른 제어부의 신호흐름을 나타낸 블록도,
도 9는 본 발명의 제2실시예에 따른 스마트 안경을 이용한 문자인식방법의 흐름도,
이하 첨부된 도면을 참조하여 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자가 본 발명을 쉽게 실시할 수 있는 실시예를 상세히 설명한다. 다만, 본 발명의 바람직한 실시예에 대한 동작 원리를 상세하게 설명함에 있어 관련된 공지 기능 또는 구성에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우에는 그 상세한 설명을 생략한다.
또한, 도면 전체에 걸쳐 유사한 기능 및 작용을 하는 부분에 대해서는 동일한 도면 부호를 사용한다. 명세서 전체에서, 어떤 부분이 다른 부분과 연결되어 있다고 할 때, 이는 직접적으로 연결되어 있는 경우뿐만 아니라, 그 중간에 다른 소자를 사이에 두고, 간접적으로 연결되어 있는 경우도 포함한다. 또한, 어떤 구성요소를 포함한다는 것은 특별히 반대되는 기재가 없는 한 다른 구성요소를 제외하는 것이 아니라, 다른 구성요소를 더 포함할 수 있는 것을 의미한다.
< 제1실시예 >
이하에서는 본 발명의 제1실시예에 따른 문자인식 기능을 갖는 스마트 안경(100)의 구성 및 기능에 대해 설명하도록 한다. 먼저, 도 2는 본 발명의 제1실시예에 따른 문자인식 기능을 갖는 스마트 안경(100)의 사시도를 도시한 것이다.
본 발명의 제1실시예에 따른 문자인식 기능을 갖는 스마트 안경(100)은 도 2에 도시된 바와 같이, 통상의 안경과 유사한 형태를 갖고 있음을 알 수 있다. 즉, 통상의 안경과 같이, 렌즈가 장착되는 안경테(2)와 안경테(2) 양측 각각에 구비되는 안경다리(3)를 갖는 프레임 구조로 형성되어 있다.
이러한 본 발명의 제1실시예에 따른 문자인식 기능을 갖는 스마트 안경(100)은 통상의 프레임 구조에 설치되는 외부 촬상수단(10), 센서수단(20), 제어부(40) 및 음성전달수단(60) 등을 더 포함하여 구성되게 된다.
외부 촬상수단(10)은 도 2에 도시된 바와 같이, 프레임 일측에 구비되어, 외부 영상을 촬상하여 영상데이터를 획득하게 됨을 알 수 있다. 이러한 외부 촬상수단(10)은 후에 설명되는 바와 같이, 구동센서수단(70)의 작동신호를 전송받거나, 제어부(40)의 제어신호를 전송받는 경우 외부 영상을 촬상하게 된다.
그리고 본 발명의 제1실시예에 따른 센서수단(20)은 자이로 센서, 가속도 센서 등으로 구성되어 안경 사용자의 동공이 설정된 특정시간 동안 정지되어 있는지는 판단하게 된다.
또한, 본 발명의 제1실시예에 따른 제어부(40)는, 센서수단(20)에 의해 상기 특정시간 이상 동공이 정지되었다고 판단된 경우 상기 외부촬상수단(10)을 구동시키고, 상기 외부촬상수단(10)에서 촬상된 영상데이터를 기반으로 문자를 판별하여 문자데이터를 형성하고 상기 문자데이터를 음성데이터로 전환하게 된다.
본 발명의 제1실시예에 따른 제어부(40)는 구동제어부(41), 저장부(41), 문자인식부(44), 변환부(45)를 포함하여 구성될 수 있다. 구동제어부(41)는 센서수단(20)에 의해 동공의 정지시간이 설정된 특정시간을 초과한다고 판단되는 경우, 외부촬상수단(10)을 작동시키도록 제어하게 된다.
또한, 외부촬상수단(10)은 제어구동부의 제어신호에 의해 작동이 게시되면 외부여영상을 촬상하여 영상데이터를 형성하게 되고, 영상데이터를 전송받은 제어부(40)는 저장부(41)를 통해 이러한 영상데이터를 저장하게 되고, 문자인식부(44)는 영상데이터에서 문자를 추출하여 문자데이터를 형성하게 된다. 또한, 변환부(45)는 문자데이터를 음성데이터로 변환하여 음성전달수단(60)에 전송하게 된다.
따라서, 이어폰 등으로 구성된 음성전달수단(60)은, 제어부(40)로부터 음성데이터를 전송받아 안경 사용자에게 음성을 제시하게 된다.
또한, 앞서 언급한 본 발명의 제1실시예에 따른 제어부(40), 외부 촬상수단(10), 음성전달수단(60), 센서수단(20)은 안경을 사용자에게 착용할 수 있는 구조를 갖는 프레임에 장착되어 구성될 수 있다. 다만, 제어부(40)는 스마트폰(50)과 같은 휴대용 단말기에 구비될 수도 있다.
도 3은 본 발명의 제1실시예에 따라 스마트 기기와 연계된 문자인식 기능을 갖는 스마트 안경(100)의 사시도를 도시한 것이다. 도 3에 도시된 바와 같이, 본 발명의 제1실시예에 따른 스마트 안경(100)은 앞서 언급한 구동제어부(41), 저장부(41), 문자인식부(44) 및 변환부(45)의 기능을 수행하는 제어부(40)가 스마트폰(50)에 구비되어 구성될 수 있음을 알 수 있다.
이러한 제어부(40)가 구비된 스마트폰(50)은 통신수단(46)에 의해, 안경 프레임에 설치된 센서수단(20), 외부 촬상수단(10)과 통신이 가능하게 된다. 따라서, 안경 사용자의 동공 정지시간을 측정하여 동공정지시간이 기 설정된 특정시간을 초과하게 되는 경우, 센서수단(20)이 이를 감지하게 되고, 스마트폰(50)에 구비된 제어부(40)의 구동제어부(41)가 외부촬상수단(10)을 작동시켜, 외부 영상을 촬상하여 영상데이터를 형성하게 된다.
그리고 이러한 영상데이터는 통신수단(46)을 통해 스마트폰(50)으로 전송되게 되고, 저장부(41)에 의해 저장되게 된다. 그리고, 스마트폰(50)에 구비된 제어부(40)의 문자인식부(44)에 의해 영상데이터 내의 문자를 추출하여 문자데이터를 형성하게 되고, 변환부(45)에 의해 문자데이터를 음성데이터로 변환하게 된다. 그리고, 스마트폰(50)에 연결된 음성전달수단(60)에 의해 음성데이터가 사용자에게 전달되게 된다.
또한, 본 발명의 제1실시예에 따른 문자인식기능을 갖는 스마트 안경(100)은 작동센서수단(70)을 더 포함하여 구성될 수 있다. 이러한 작동센서수단(70)은 가속도계, 자이로센서, 터치센서 등으로 구성된다. 또한, 터치센서는 캐패시터 센서나 압저항센서 등으로 구성될 수 있다.
이러한 작동센서수단(70)은 사용자가 안경다리(3)나, 안경테(2)에 손을 가져다 대거나 가볍게 터치하거나, 흔드는 등의 행동을 감지하게 되고, 이러한 이벤트에 의해 전체 시스템을 on/off시킬 수 있고, 필요에 따라 외부촬상수단(10), 제어부(40)의 구동을 수동으로 on/off하도록 구성될 수 있다.
또한 본 발명의 제1실시예에 따른 문자인식기능을 갖는 스마트 안경(100)의 제어부(40)는 영상데이터를 기반으로 문자인식여부에 대한 정보를 판단하고, 음성전달수단(60)은 사용자에게 문자인식여부에 대한 정보를 음성으로 제시하도록 구성될 수 있다. 또한, 제어부(40)가 센서수단(20)을 통해 동공의 정지시간이 설정된 특정시간을 초과하였다고 판단되면, 음성전달수단(60)을 통해 외부촬상수단(10)을 작동시키겠다는 정보를 음성을 통해 사용자에게 전달할 수 있다.
도 4는 본 발명의 제1실시예에 따른 제어부(40)의 신호흐름을 나타낸 블록도를 도시한 것이다. 도 4에 도시된 바와 같이, 센서수단(20)은 동공이 설정된 특정시간 동안 정지되었는지를 판단하게 되고, 동공이 설정된 특정시간 동안 정지된 경우, 제어부(40)의 구동제어부(41)가 외부촬상수단(10)에 제어신호를 전송하여 외부촬상수단(10)이 외부 영상을 촬상하게 됨을 알 수 있다. 그리고 외부촬상수단(10)에 의해 형성된 영상데이터는 제어부(40)의 저장부(41)로 전송되어 저장되고, 문자인식부(44)가 저장된 영상데이터에서 문자를 추출하여 문자데이터를 형성하게 된다.
그리고, 제어부(40)의 변환부(45)는 문자데이터를 음성데이터로 변환하게 되고, 음성데이터를 전송받은 음성전달수단(60)이 사용자에게 음성을 제시하게 된다. 또한, 도 4에 도시된 바와 같이, 작동센서수단(70)은 사용자가 안경 프레임을 흔들거나 손을 가져다 대거나, 터치하는 등의 이벤트를 감지하여, 전체시스템의 작동여부를 결정할 수 있음을 알 수 있다.
이하에서는 앞서 언급한 본 발명의 제1실시예에 따른 스마트 안경(100)을 이용한 문자인식방법에 대해 설명하도록 한다. 도 5는 본 발명의 제1실시예에 따른 스마트 안경(100)을 이용한 문자인식방법의 흐름도를 도시한 것이다.
먼저, 사용자가 안경 프레임을 터치하거나 흔들거나 가볍게 두드리는 등의 행동을 작동센서수단(70)이 감지하여 전체 시스템을 sleeping 모드에서 작동 on상태로 전환시키게 된다(S1).
그리고, 센서수단(20)은 동공의 정지시간을 측정하게 되고(S2), 안경 사용자의 동공 정지시간이 설정된 특정시간에 도달하게 되는 경우(S3), 제어부(40)의 작동제어부(41)가, 외부 영상을 촬상하는 외부 촬상수단(10)을 작동시키게 된다(S4). 음성전달수단(60)은 외부 촬상수단(10)이 작동되었다는 정보를 음성으로 제시할 수 있다.
그리고, 외부 촬상수단(10)에 의해 영상데이터를 형성하게 되고(S5), 제어부(40)는 이러한 영상데이터를 전송받아 저장부(41)에 저장하고, 영상데이터에서 문자를 추출하여 문자데이터를 형성하게 된다(S6). 이때, 음성전달수단(60)은 영상데이터에서 문자가 추출되었다는 정보를 음성으로 전달할 수 있다. 그리고, 제어부(40)의 변환부(45)에 의해 문자데이터를 음성데이터로 변환하여 음성전달수단(60)에 전송하게 되고(S7), 음성전달수단(60)은 이러한 음성데이터를 전송받아 사용자에게 제시하게 된다(S8).
이러한 문자인식이 가능한 스마트 안경(100), 문자인식방법은 어학용이나, 저시력자용, 전시장용 등으로 응용될 수 있다. 즉, 제어부(40)에 의해 외래어 등의 문자를 인식하게 되는 경우, 한글로 번역하여 사용자에게 음성으로 전달해 줄 수 있으며, 저시력자가 전방에 글자를 인식하기 어려운 경우 본 발명의 제1실시예에 따른 스마트 안경(100)을 이용하여 문자를 보다 용이하게 인식할 수 있게 된다. 또한, 본 발명의 저장부에서는 특정 문자에 대한 지식정보를 저장하고 있어, 추출된 문자와 연계된 지식정보를 사용자에게 음성으로 제시해 줄 수 있다.
<제2실시예>
이하에서는 본 발명의 제2실시예에 따른 문자인식 기능르 갖는 스마트 안경(100)의 구성 및 기능에 대해 설명하도록 한다. 도 6은 본 발명의 제2실시예에 따른 문자인식 기능을 갖는 스마트 안경(100)의 사시도를 도시한 것이다. 도 6에 도시된 바와 같이, 본 발명의 제2실시예에 따른 문자 인식 기능을 갖는 스마트 안경(100)은 프레임 전방측에 구비된 동공추적카메라(30)를 더 포함하여 구성됨을 알 수 있다.
이러한 본 발명의 제2실시예에 따른 동공상태 데이터는 안경 사용자의 동공위치와 상태를 추적하여 시선을 인식하여 동공상태 데이터를 형성하게 된다. 또한, 이러한 동공상태 데이터는 제어부(40)에 구비된 특정섹터 지정수단과 연계되어, 특정섹터 지정수단이 동공추적카메라(30)에서 인식한 동공상태 데이터를 기반으로 외부촬상수단(10)에 의해 형성된 영상데이터에서 특정영역을 지정하게 된다.
본 발명의 제2실시예에 따른 외부 촬상수단(10)은 앞서 언급한 제1실시예에서와 같이, 외부 영상을 촬상하여 영상데이터를 획득하게 된다. 이러한 제2실시예에 따른 외부 촬상수단(10)은 후에 설명되는 바와 같이, 동공추적카메라(30)에 의해 형성된 동공상태가 기 설정된 동공상태와 일치하게 되는 경우 제어부(40)에 의해 제어신호를 인가받아 작동되도록 구성된다. 또한, 작동센서수단(70)에 의해 사용자의 입력에 따라 작동되도록 구성될 수도 있다.
본 발명의 제2실시에에 따른 동공추적카메라(30)는 앞서 언급한 바와 같이, 안경 사용자의 동공위치와 상태를 추적하여 시선에 대한 동공상태 데이터를 형성하게 된다. 그리고, 제어부(40)는 동공상태 데이터를 기반으로 외부 촬상수단(10)이 촬상한 영상데이터 중 특정영역을 지정하고, 지정한 특정영역에서 문자를 판별하여 문자데이터를 형성하며, 이러한 문자데이터를 음성데이터로 변환하게 된다. 그리고, 음성전달수단(60)은 제어부(40)로부터 음성데이터를 전송받아 사용자에게 음성정보를 전달하게 된다.
본 발명의 제2실시예에 따른 제어부(40)는 구동제어부(41), 저장부(41), 특정섹터 지정부(43), 문자인식부(44), 변환부(45)를 포함하여 구성될 수 있다. 구동제어부(41)는 동공추적카메라(30)에서 추적한 동공상태가 동공이 깜빡이거나 찡그리는 등 기 설정된 동공상태와 일치한다고 판단되는 경우, 외부촬상수단(10)을 작동시키도록 제어하게 된다.
또한, 외부촬상수단(10)은 제어구동부의 제어신호에 의해 작동이 게시되면 외부여영상을 촬상하여 영상데이터를 형성하게 되고, 영상데이터를 전송받은 제어부(40)는 저장부(41)를 통해 이러한 영상데이터를 저장하게 된다.
그리고, 특정섹터 지정부(43)는 전송받은 영상데이터에서 동공추적카메라(30)에 의해 추적한 동공상태 데이터를 기반으로 특정영역을 지정하게 된다. 그리고, 문자인식부(44)는 이러한 특정영역에서 문자를 추출하여 문자데이터를 형성하게 된다. 또한, 변환부(45)는 문자데이터를 음성데이터로 변환하여 음성전달수단(60)에 전송하게 된다. 따라서, 이어폰 등으로 구성된 음성전달수단(60)은, 제어부(40)로부터 음성데이터를 전송받아 안경 사용자에게 음성을 제시하게 된다.
또한, 앞서 언급한 본 발명의 제2실시예에 따른 제어부(40), 외부 촬상수단(10), 동공추적 카메라(30), 음성전달수단(60), 작동센서수단(70)은 안경을 사용자에게 착용할 수 있는 구조를 갖는 프레임에 장착되어 구성될 있다. 다만, 제어부(40)는 스마트폰(50)과 같은 휴대용 단말기에 구비될 수도 있다.
도 7은 본 발명의 제2실시예에 따라 스마트 기기와 연계된 문자인식 기능을 갖는 스마트 안경(100)의 사시도를 도시한 것이다. 도 7에 도시된 바와 같이, 본 발명의 제2실시예에 따른 스마트 안경(100)은 앞서 언급한 구동제어부(41), 저장부(41), 문자인식부(44) 및 변환부(45)의 기능을 수행하는 제어부(40)가 스마트폰(50)에 구비되어 구성될 수 있음을 알 수 있다.
이러한 제어부(40)가 구비된 스마트폰(50)은 통신수단(46)에 의해, 안경 프레임에 설치된 동공추적 카메라(30), 외부 촬상수단(10)과 통신이 가능하게 된다. 따라서, 동공추적 카메라(30)에서 안경 사용자의 동공 상태를 감지하여 동공상태가 깜빡임 또는 찡그림 등의 기 설정된 상태와 일치하게 되는 경우, 동공추적 카메라(30)는 이를 감지하게 되고, 스마트폰(50)에 구비된 제어부(40)의 구동제어부(41)가 외부촬상수단(10)을 작동시켜, 외부 영상을 촬상하여 영상데이터를 형성하게 된다.
그리고 이러한 영상데이터는 통신수단(46)을 통해 스마트폰(50)으로 전송되게 되고, 저장부(41)에 의해 저장되게 된다. 그리고, 스마트폰(50)에 구비된 제어부(40)의 특정섹터 지정부(43)는 동공추적 카메라(30)에서 분석한 시선에 대한 동공상태 데이터를 전송받아 이를 기반으로 영상데이터에서 특정영역을 지정하게 된다. 즉, 사용자의 시선과 일치되는 부분의 특정영역을 지정하게 된다.
그리고, 스마트폰(50)에 구비된 제어부(40)의 문자인식부(44)에 의해 특정영역 내의 문자를 추출하여 문자데이터를 형성하게 되고, 변환부(45)에 의해 문자데이터를 음성데이터로 변환하게 된다. 그리고, 스마트폰(50)에 연결된 음성전달수단(60)에 의해 음성데이터가 사용자에게 전달되게 된다.
또한, 본 발명의 제2실시예에 따른 문자인식기능을 갖는 스마트 안경은 작동센서수단(70)을 더 포함하여 구성될 수 있다. 이러한 작동센서수단(70)은 가속도계, 자이로센서, 터치센서 등으로 구성된다. 또한, 터치센서는 캐패시터 센서나 압저항센서 등으로 구성될 수 있다.
이러한 작동센서수단(70)은 사용자가 안경다리(3)나, 안경테(2)에 손을 가져다 대거나 가볍게 터치하거나, 흔드는 등의 행동을 감지하게 되고, 이러한 이벤트에 의해 전체 시스템을 on/off시킬 수 있고, 필요에 따라 외부촬상수단(10), 동공추적 카메라(30), 제어부(40)의 구동을 수동으로 on/off하도록 구성될 수 있다.
또한 본 발명의 제2실시예에 따른 문자인식기능을 갖는 스마트 안경(100)의 제어부(40)는 영상데이터를 기반으로 문자인식여부에 대한 정보를 판단하고, 음성전달수단(60)은 사용자에게 문자인식여부에 대한 정보를 음성으로 제시하도록 구성될 수 있다. 또한, 제어부(40)가 동공추적 카메라(30)를 통해 동공상태가 기 설정된 동공상태와 일치되었다고 판단되면, 음성전달수단(60)을 통해 외부촬상수단(10)을 작동시키겠다는 정보를 음성을 통해 사용자에게 전달할 수 있다.
도 8은 본 발명의 제2실시예에 따른 제어부(40)의 신호흐름을 나타낸 블록도를 도시한 것이다. 도 8에 도시된 바와 같이, 동공추적 카메라(30)는 동공의 위치 및 상태를 추적하여 정확한 시선을 분석하여 동공상태 데이터를 형성하게 되고, 동공상태가 기 설정된 동공상태와 일치되게 되는지를 판단하게 되고, 동공상태가 기 설정된 상태와 일치된 경우, 제어부(40)의 구동제어부(41)가 외부촬상수단(10)에 제어신호를 전송하여 외부촬상수단(10)이 외부 영상을 촬상하게 됨을 알 수 있다.
그리고 외부촬상수단(10)에 의해 형성된 영상데이터는 제어부(40)의 저장부(41)로 전송되어 저장되고, 제어부(40)의 특정섹터 지정부(43)는 동공추적 카메라(30)에서 형성된 동공상태 데이터를 전송받아 이를 기반으로 사용자의 시선을 반영한 특정영역을 지정하게 된다. 그리고, 문자인식부(44)는 지정된 특정영역에서 문자를 추출하여 문자데이터를 형성하게 된다.
그리고, 제어부(40)의 변환부(45)는 문자데이터를 음성데이터로 변환하게 되고, 음성데이터를 전송받은 음성전달수단(60)이 사용자에게 음성을 제시하게 된다. 또한, 도 8에 도시된 바와 같이, 작동센서수단(70)은 사용자가 안경 프레임을 흔들거나 손을 가져다 대거나, 터치하는 등의 이벤트를 감지하여, 전체시스템의 작동여부를 결정할 수 있음을 알 수 있다.
이하에서는 본 발명의 제2실시예에 따른 스마트 안경(100)을 이용한 문자인식방법에 대해 설명하도록 한다. 도 9는 본 발명의 제2실시예에 따른 스마트 안경(100)을 이용한 문자인식방법의 흐름도를 도시한 것이다.
먼저, 사용자가 안경 프레임을 터치하거나 흔들거나 가볍게 두드리는 등의 행동을 작동센서수단(70)이 감지하여 전체 시스템을 sleeping 모드에서 작동 on상태로 전환시키게 된다(S10).
그리고, 동공추적 카메라(30)는 사용자의 동공 위치와 상태를 추적하여 시선에 대한 동공상태 데이터를 형성하게 된다(S2). 그리고, 동공추적 카메라(30)에 의해 안경 사용자의 동공 상태가 깜빡이거나 찡그리는 등 기 설정된 동공상태에 일치하게 되는 경우(S30), 제어부(40)의 작동제어부(41)가, 외부 영상을 촬상하는 외부 촬상수단(10)을 작동시키게 된다(S40). 그리고 이러한 상태에서 음성전달수단(60)은 외부 촬상수단(10)이 작동되었다는 정보를 음성으로 제시할 수 있다.
그리고, 외부 촬상수단(10)에 의해 영상데이터를 형성하게 되고(S50), 제어부(40)는 이러한 영상데이터를 전송받아 저장부(41)에 저장하고, 특정섹터 지정부(43)가 동공상태 데이터를 기반으로 영상데이터 중 시선을 반영한 특정영역을 지정하게 된다(S60).
그리고, 문자인식부(44)는 특정영역에서 문자를 추출하여 문자데이터를 형성하게 된다(S70). 이때, 음성전달수단(60)은 영상데이터에서 문자가 추출되었다는 정보를 음성으로 전달할 수 있다. 그리고, 제어부(40)의 변환부(45)에 의해 문자데이터를 음성데이터로 변환하여 음성전달수단(60)에 전송하게 되고(S80), 음성전달수단(60)은 이러한 음성데이터를 전송받아 사용자에게 제시하게 된다(S90).
이러한 문자인식이 가능한 스마트 안경(100), 문자인식방법은 어학용이나, 저시력자용, 전시장용 등으로 응용될 수 있다. 즉, 제어부(40)에 의해 외래어 등의 문자를 인식하게 되는 경우, 한글로 번역하여 사용자에게 음성으로 전달해 줄 수 있으며, 저시력자가 전방에 글자를 인식하기 어려운 경우 본 발명의 제2실시예에 따른 스마트 안경(100)을 이용하여 문자를 보다 용이하게 인식할 수 있게 된다. 또한, 본 발명의 저장부에서는 특정 문자에 대한 지식정보를 저장하고 있어, 추출된 문자와 연계된 지식정보를 사용자에게 음성으로 제시해 줄 수 있다.
이상에서 본 발명은 기재된 실시예를 참조하여 상세히 설명되었으나, 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자라면 상기에서 설명된 기술적 사상을 벗어나지 않는 범위 내에서 여러가지 치환, 부가 및 변형이 가능할 것임은 당연한것으로, 이와 같은 변형된 실시 형태들 역시 아래에 첨부한 특허청구범위에 의하여 정하여지는 본 발명의 보호 범위에 속하는 것으로 이해되어야 할 것이다.
1:종래 동공인식을 이용한 안경 카메라
2:안경테
3:안경다리
4:제1카메라
5:제2카메라
6:외부단말기
10:외부촬상수단
20:센서수단
30:동공추적 카메라
40:제어부
41:구동제어부
42:저장부
43:특정섹터 지정부
44:문자인식부
45:변환부
46:통신수단
50:스마트폰
60:음성전달수단
70:작동센서수단
100:문자인식 기능을 갖는 스마트 안경

Claims (17)

  1. 문자인식 기능을 갖는 스마트 안경에 있어서,
    외부 영상을 촬상하여 영상데이터를 획득하는 외부 촬상수단;
    안경 사용자의 동공이 설정된 특정시간 동안 정지되어 있는지는 판단하는 센서수단;
    상기 센서수단에 의해 상기 특정시간 이상 동공이 정지되었다고 판단된 경우 상기 외부촬상수단을 구동시키고, 상기 외부촬상수단에서 촬상된 영상데이터를 기반으로 문자를 판별하여 문자데이터를 형성하고 상기 문자데이터를 음성데이터로 전환하는 제어부; 및
    상기 제어부로부터 상기 음성데이터를 전송받아 상기 사용자에게 제시하는 음성전달수단을 포함하는 것을 특징으로 하는 문자인식 기능을 갖는 스마트 안경.
  2. 제 1항에 있어서,
    상기 제어부, 상기 외부 촬상수단, 상기 음성전달수단 및 상기 센서수단은 안경을 사용자에게 착용할 수 있는 구조를 갖는 프레임에 장착된 것을 특징으로 하는 문자인식 기능을 갖는 스마트 안경.
  3. 제 1항에 있어서,
    상기 제어부는 휴대용 단말기에 구비되며,
    상기 휴대용 단말기는 통신수단에 의해 상기 센서수단, 상기 외부 촬상수단, 상기 음성전달수단 중 적어도 어느 하나와 통신되는 것을 특징으로 하는 문자인식 기능을 갖는 스마트 안경.
  4. 제 1항에 있어서,
    사용자의 입력을 감지하여, 상기 센서수단, 상기 외부 촬상수단, 상기 음성전달수단, 상기 제어부 중 적어도 어느 하나를 작동시키기 위한 작동센서수단을 더 포함하는 것을 특징으로 하는 문자인식 기능을 갖는 스마트 안경.
  5. 제 4항에 있어서,
    상기 구동센서수단은 자이로 센서, 가속도 센서 및 터치센서 중 적어도 어느 하나로 구성된 것을 특징으로 하는 문자인식 기능을 갖는 스마트 안경.
  6. 제 1항에 있어서,
    상기 음성전달수단은, 사용자에게 문자인식여부에 대한 정보 및 외부촬상수단의 작동여부에 대한 정보 중 적어도 어느 하나를 음성으로 제시하는 것을 특징으로 하는 문자인식 기능을 갖는 스마트 안경.
  7. 스마트 안경을 이용한 문자인식방법에 있어서,
    센서수단에 의해 안경 사용자의 동공이 설정된 특정시간 동안 정지되고 있는지 여부를 감지하는 단계;
    제어부가, 상기 센서수단에 의해 동공이 상기 특정시간 이상 정지되었다고 판단되면 외부 영상을 촬상하는 외부 촬상수단을 작동시키는 단계;
    상기 외부 촬상수단에 의해 영상데이터를 형성하는 단계;
    상기 제어부가 상기 영상데이터를 전송받아 문자를 추출하여 문자데이터를 형성하고, 상기 문자데이터를 음성데이터로 변환하는 단계; 및
    음성전달수단이 상기 음성데이터를 전송받아 사용자에게 제시하는 단계를 포함하는 것을 특징으로 하는 스마트 안경을 이용한 문자인식방법.
  8. 제 7항에 있어서,
    사용자의 입력에 따라 작동센서수단이 이를 감지하여 수동으로 상기 센서수단과, 상기 외부 촬상수단과, 상기 음성전달수단과, 상기 제어부 중 적어도 어느 하나를 작동시키는 단계를 더 포함하는 것을 특징으로 하는 스마트 안경을 이용한 문자인식방법.
  9. 제 7항에 있어서,
    상기 음성전달수단이, 동공의 특정시간 이상 정지여부에 대한 정보 및 상기 영상데이터에서 문자를 추출하였는지 여부에 대한 정보 중 적어도 어느 하나를 제공하는 단계를 더 포함하는 것을 특징으로 하는 스마트 안경을 이용한 문자인식방법.
  10. 컴퓨터에 의해 판독 가능한 기록매체로서,
    제 7항 내지 제 9항 중 어느 한 항에 따른 문자인식방법을 실행시키기 위한 프로그램을 기록한 기록매체.
  11. 문자인식 기능을 갖는 스마트 안경에 있어서,
    외부 영상을 촬상하여 영상데이터를 획득하는 외부 촬상수단;
    안경 사용자의 동공위치와 상태를 추적하여 시선에 대한 동공상태 데이터를 형성하는 동공추적카메라;
    상기 동공상태 데이터를 기반으로 상기 외부 촬상수단이 촬상한 영상데이터 중 특정영역을 지정하고, 지정한 특정영역에서 문자를 판별하여 문자데이터를 형성하고 음성데이터로 변환하는 제어부;
    상기 제어부로부터 상기 음성데이터를 전송받아 상기 사용자에게 제시하는 음성전달수단; 및
    상기 외부 촬상수단, 상기 동공추적카메라, 상기 제어부 및 상기 음성전달수단 중 적어도 어느 하나의 작동유무를 결정하는 작동센서수단;을 포함하는 것을 특징으로 하는 문자인식 기능을 갖는 스마트 안경.
  12. 제 11항에 있어서,
    상기 동공추적 카메라에 의해 상기 동공상태가 기 설정된 동공상태와 일치된다고 판단되는 경우, 상기 제어부는 상기 외부촬상수단을 작동시키는 것을 특징으로 하는 문자인식 기능을 갖는 스마트 안경.
  13. 제 11항에 있어서,
    상기 작동센서수단은 가속도계, 자이로센서 및 터치센서 중 적어도 어느 하나를 포함하여 구성되는 것을 특징으로 하는 문자인식 기능을 갖는 스마트 안경.
  14. 제 11항에 있어서,
    상기 제어부는 휴대용 단말기에 구비되며,
    상기 휴대용 단말기는 통신수단에 의해, 상기 센서수단, 상기 외부 촬상수단, 상기 음성전달수단 중 적어도 어느 하나와 통신되는 것을 특징으로 하는 문자인식 기능을 갖는 스마트 안경.
  15. 스마트 안경을 이용한 문자인식방법에 있어서,
    동공추적카메라에 의해 안경 사용자의 동공위치와 상태를 추적하여 시선에 대한 동공상태 데이터를 형성하는 단계;
    상기 외부 촬상수단이 외부 영상을 촬상하여 영상데이터를 형성하는 단계;
    제어부가 상기 영상데이터를 전송받아 상기 동공상태 데이터를 기반으로 상기 영상데이터 중 특정영역을 지정하는 단계;
    상기 제어부가 상기 특정영역에서 문자를 추출하여 문자데이터를 형성하고, 상기 문자데이터를 음성데이터로 변환하는 단계; 및
    음성전달수단이 상기 음성데이터를 전송받아 사용자에게 제시하는 단계를 포함하는 것을 특징으로 하는 스마트 안경을 이용한 문자인식방법.
  16. 제 15항에 있어서,
    사용자의 입력을 작동센서수단이 감지하여 상기 외부 촬상수단, 상기 동공추적 카메라, 상기 제어부 및 상기 음성전달수단 중 적어도 어느 하나가 작동되는 단계를 더 포함하고,
    상기 영상데이터를 형성하는 단계 전에,
    상기 동공추적 카메라에 의해 사용자의 동공상태가 기 설정된 동공상태와 일치된다고 판단되는 경우, 제어부가 상기 외부촬상수단을 작동시키는 단계를 더 포함하는 것을 특징으로 하는 스마트 안경을 이용한 문자인식방법
  17. 컴퓨터에 의해 판독 가능한 기록매체로서,
    제 15항 또는 제 16항에 따른 문자인식방법을 실행시키기 위한 프로그램을 기록한 기록매체.
KR1020140075946A 2014-06-20 2014-06-20 언어학습 및 저시력 보조를 위한 문자인식 기능을 갖는 스마트 안경 및 그 스마트 안경을 이용한 문자 인식방법 KR101582890B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020140075946A KR101582890B1 (ko) 2014-06-20 2014-06-20 언어학습 및 저시력 보조를 위한 문자인식 기능을 갖는 스마트 안경 및 그 스마트 안경을 이용한 문자 인식방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020140075946A KR101582890B1 (ko) 2014-06-20 2014-06-20 언어학습 및 저시력 보조를 위한 문자인식 기능을 갖는 스마트 안경 및 그 스마트 안경을 이용한 문자 인식방법

Publications (2)

Publication Number Publication Date
KR20150146078A true KR20150146078A (ko) 2015-12-31
KR101582890B1 KR101582890B1 (ko) 2016-01-08

Family

ID=55128829

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020140075946A KR101582890B1 (ko) 2014-06-20 2014-06-20 언어학습 및 저시력 보조를 위한 문자인식 기능을 갖는 스마트 안경 및 그 스마트 안경을 이용한 문자 인식방법

Country Status (1)

Country Link
KR (1) KR101582890B1 (ko)

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100405636B1 (ko) 2000-05-23 2003-11-15 이성환 시각 장애인용 착용 가능 보행 안내 장치 및 방법
KR20100123036A (ko) 2009-05-14 2010-11-24 주식회사 마카비즈 보행 보조 장치
KR20110038568A (ko) * 2009-10-08 2011-04-14 한국전자통신연구원 시선 위치 추적 장치 및 방법
KR20130059827A (ko) 2011-11-29 2013-06-07 학교법인 한국산업기술대학 동공인식을 이용한 안경 카메라
JP2013174898A (ja) * 2013-04-10 2013-09-05 Sony Corp 撮像表示装置、撮像表示方法
KR20130102159A (ko) * 2012-03-07 2013-09-17 주식회사 팬택 모바일 장치 및 그 운용 방법

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100405636B1 (ko) 2000-05-23 2003-11-15 이성환 시각 장애인용 착용 가능 보행 안내 장치 및 방법
KR20100123036A (ko) 2009-05-14 2010-11-24 주식회사 마카비즈 보행 보조 장치
KR20110038568A (ko) * 2009-10-08 2011-04-14 한국전자통신연구원 시선 위치 추적 장치 및 방법
KR20130059827A (ko) 2011-11-29 2013-06-07 학교법인 한국산업기술대학 동공인식을 이용한 안경 카메라
KR20130102159A (ko) * 2012-03-07 2013-09-17 주식회사 팬택 모바일 장치 및 그 운용 방법
JP2013174898A (ja) * 2013-04-10 2013-09-05 Sony Corp 撮像表示装置、撮像表示方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
대한민국 등록 실용신안 제38918호

Also Published As

Publication number Publication date
KR101582890B1 (ko) 2016-01-08

Similar Documents

Publication Publication Date Title
US8908021B2 (en) Systems and methods for automatic control of a continuous action
US10165176B2 (en) Methods, systems, and computer readable media for leveraging user gaze in user monitoring subregion selection systems
US9619021B2 (en) Head mounted display providing eye gaze calibration and control method thereof
KR102160017B1 (ko) 시력 기반의 가상화면을 이용한 안경 장치
US11475663B2 (en) Visual aid device and visual aid method by which user uses visual aid device
CN104473717A (zh) 针对全盲人群的可穿戴式引导设备
US8988519B2 (en) Automatic magnification of data on display screen based on eye characteristics of user
KR101455200B1 (ko) 학습 모니터링 장치 및 학습 모니터링 방법
US20170156589A1 (en) Method of identification based on smart glasses
JP6341755B2 (ja) 情報処理装置、方法及びプログラム並びに記録媒体
WO2015035823A1 (en) Image collection with increased accuracy
KR20130059827A (ko) 동공인식을 이용한 안경 카메라
WO2010058927A3 (ko) 안면 영상 촬영장치
US11328187B2 (en) Information processing apparatus and information processing method
KR101582890B1 (ko) 언어학습 및 저시력 보조를 위한 문자인식 기능을 갖는 스마트 안경 및 그 스마트 안경을 이용한 문자 인식방법
CN114281236B (zh) 文本处理方法、装置、设备、介质和程序产品
US20200159318A1 (en) Information processing device, information processing method, and computer program
WO2020170758A1 (ja) 認識装置、ウェアラブル文字認識デバイス、認識方法および認識プログラム
US20230308753A1 (en) Camera system for focusing on and tracking objects
JP2022113973A (ja) 表示方法、表示装置、及び、プログラム
KR20230063667A (ko) 전자 장치 및 그 동작 방법
JP2016184089A (ja) 情報認識装置、ナビゲーションシステム、ナビゲーション方法及びプログラム

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
FPAY Annual fee payment

Payment date: 20181126

Year of fee payment: 4