KR102082181B1 - 인공지능 기반 전자펜, 인공지능 기반 전자펜을 이용한 콘텐츠 재생 시스템 및 방법 - Google Patents

인공지능 기반 전자펜, 인공지능 기반 전자펜을 이용한 콘텐츠 재생 시스템 및 방법 Download PDF

Info

Publication number
KR102082181B1
KR102082181B1 KR1020190102677A KR20190102677A KR102082181B1 KR 102082181 B1 KR102082181 B1 KR 102082181B1 KR 1020190102677 A KR1020190102677 A KR 1020190102677A KR 20190102677 A KR20190102677 A KR 20190102677A KR 102082181 B1 KR102082181 B1 KR 102082181B1
Authority
KR
South Korea
Prior art keywords
content
unit
voice command
electronic pen
dot code
Prior art date
Application number
KR1020190102677A
Other languages
English (en)
Inventor
김철희
Original Assignee
에이아이프렌드 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 에이아이프렌드 주식회사 filed Critical 에이아이프렌드 주식회사
Priority to KR1020190102677A priority Critical patent/KR102082181B1/ko
Application granted granted Critical
Publication of KR102082181B1 publication Critical patent/KR102082181B1/ko

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16Sound input; Sound output
    • G06F3/165Management of the audio stream, e.g. setting of volume, audio stream path
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16Sound input; Sound output
    • G06F3/167Audio in a user interface, e.g. using voice commands for navigating, audio feedback
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06KGRAPHICAL DATA READING; PRESENTATION OF DATA; RECORD CARRIERS; HANDLING RECORD CARRIERS
    • G06K7/00Methods or arrangements for sensing record carriers, e.g. for reading patterns
    • G06K7/10Methods or arrangements for sensing record carriers, e.g. for reading patterns by electromagnetic radiation, e.g. optical sensing; by corpuscular radiation
    • G06K7/14Methods or arrangements for sensing record carriers, e.g. for reading patterns by electromagnetic radiation, e.g. optical sensing; by corpuscular radiation using light without selection of wavelength, e.g. sensing reflected white light
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00Systems or methods specially adapted for specific business sectors, e.g. utilities or tourism
    • G06Q50/10Services

Abstract

본 발명에 따르면 전자펜은 출판물에 구비된 코드를 인식한 후 이에 대응하는 콘텐츠가 메모리부에 없을 경우 무선 통신부를 통해 자동으로 메모리부에 해당 콘텐츠를 다운로드하여 재생되도록 하거나, 또는 마이크를 통해 음성으로 특정 콘텐츠의 다운로드 명령을 입력하면 무선 통신부를 통해 해당 콘텐츠를 메모리부에 다운로드하여 재생되도록 하여 다양한 콘텐츠를 전자펜과 콘텐츠 관리서버 간의 통신을 통해 실시간으로 제공받을 수 있고, 전자펜을 통해 콘텐츠 이용의 편의와 출판물과 연관된 다양한 콘텐츠를 지속적으로 확장시켜 사용자에게 제공할 수 있으며, 음성 명령을 통하여 콘텐츠를 제공받을 수 있으므로, 출판물이 개정되어 닷코드 정보의 수정 및 재인쇄가 수행된 새로운 출판물이 필요할 경우라도, 추가적인 콘텐츠를 음성 명령 입력을 통해 제공 받을 수 있고, 직접 마이크에 음성 명령을 내림으로 인식률을 높여 인식이 잘 안되는 문제점을 해소하였고, 동일한 콘텐츠를 재생하기 위해 종래의 AI 스피커와 같이 다시 음성 명령을 매번 반복하여 내려야 하는 불편함 없이 재생버튼을 누르기만 하면 반복 재생되는 효과가 있다.
또한 출판물의 닷코드와 사용자의 음성 명령을 조합하여 어학, 학습 등 다양한 콘텐츠 서비스에 응용할 수 있는 효과가 있다.

Description

인공지능 기반 전자펜, 인공지능 기반 전자펜을 이용한 콘텐츠 재생 시스템 및 방법{Electronic Pen based on Artificial Intelligence, System for Playing Contents using Electronic Pen based on artificial intelligence and Method thereof}
본 발명은 인공지능 기반 전자펜, 인공지능 기반 전자펜을 이용한 콘텐츠 재생 시스템 및 방법에 관한 것으로, 더욱 상세하게는 전자펜에 인식된 음성 및 코드 정보를 이용하여 매칭되는 콘텐츠를 재생하며, 사람의 음성 명령어를 마이크로 인식하고 인식한 명령어에 해당하는 콘텐츠를 스피커로 출력시키는 인공지능 기반 전자펜, 인공지능 기반 전자펜을 이용한 콘텐츠 재생 시스템 및 방법에 관한 것이다.
책과 같은 인쇄 매체에 인쇄된 특정 코드를 인식하고, 인식된 코드에 대응하는 음성 데이터를 출력하는 전자펜이 다수 개발되고 있다.
이러한 전자펜은 특정 코드를 인식하는 센서와 각각의 코드에 대응하는 데이터를 저장한 메모리를 포함하여, 코드를 인식하면 메모리에 저장된 데이터 중 인식된 코드에 대응하는 데이터를 스피커 등과 같은 출력 장치를 통해 출력한다.
통상적으로 책과 같은 인쇄 매체에는 텍스트나 이미지(인쇄 데이터)만 표시되기 때문에 독자에게 시각 정보만 제공하게 되는데, 이러한 전자펜을 이용하면 시각 정보 이외에 음성 데이터 등과 같은 전자 데이터, 즉, 콘텐츠도 함께 제공할 수 있어 사용자의 정보 이용 방법이 다양화되는 효과가 있다.
특히, 인쇄 매체에 인쇄된 텍스트 등 기타 정보가 언어 학습과 관련된 내용인 경우에는 시각 정보보다 발음과 같은 음성 정보 등이 사용자에게 더 유익할 수 있는데, 전자펜을 이용할 경우 언어 텍스트에 더하여 발음이나 관련 콘텐츠를 사용자에게 제공할 수 있게 된다.
이에 따라, 전자펜을 통해 사용자에게 관련 콘텐츠를 제공하기 위해서는 각각의 인쇄 매체와 관련된 콘텐츠가 전자펜 내의 메모리에 미리 저장되어 있어야 하며, 사용자는 메모리에 콘텐츠를 저장하기 위하여 전자펜을 컴퓨터에 연결하여 콘텐츠 정보를 다운받아야 하는 불편함이 있었다.
대한민국 등록특허공보 등록번호 제10-1515162호
본 발명은 상술한 문제점을 해결하기 위해 안출된 것으로서, 전자펜은 출판물에 구비된 코드를 인식한 후 이에 대응하는 콘텐츠가 메모리부에 없을 경우 무선 통신부를 통해 자동으로 메모리부에 해당 콘텐츠를 다운로드하여 재생되도록 하거나, 또는 마이크를 통해 음성으로 특정 콘텐츠의 다운로드 명령을 입력하면 무선 통신부를 통해 해당 콘텐츠를 메모리부에 다운로드하여 재생되도록 하여 다양한 콘텐츠를 전자펜과 콘텐츠 관리서버 간의 통신을 통해 실시간으로 제공받을 수 있으므로, 종래의 전자펜을 컴퓨터 등에 연결하여 콘텐츠를 다운받아야 하는 불편함을 해소할 수 있고, 인공지능 기술과 무선통신 기술을 적용한 전자펜을 통해 콘텐츠 이용의 편의와 출판물과 연관된 다양한 콘텐츠를 지속적으로 확장시켜 사용자에게 제공할 수 있는 인공지능 기반 전자펜, 인공지능 기반 전자펜을 이용한 콘텐츠 재생 시스템 및 방법을 제공하는 것이다.
더불어 인공지능 기술을 적용함에 있어 해당 기술이 적용된 종래의 AI 스피커의 호출 발화 음성 명령의 인식률이 소음 등 주변 환경에 영향을 받는 문제점, 호출 발화 음성 명령이 사용자들의 발음의 문제로 인식이 잘 안되어 실제 서비스를 제공받기까지 사용자에게 불편함을 주는 문제점, 상기 문제점과 더불어 동일한 호출 및 서비스 발화 음성 명령을 사용자가 매번 반복적으로 해야 하는 불편함을 해소하고, 서비스 발화 음성 명령을 음성과 함께 또는 대체로써 닷코드와 연계하는 방법을 제공할 수 있는 인공지능 기반 전자펜, 인공지능 기반 전자펜을 이용한 콘텐츠 재생 시스템 및 방법을 제공하는 것이다.
상술한 목적을 달성하기 위한 본 발명의 인공지능 기반 전자펜은, 펜 형상의 하우징, 하우징의 하부에 구비되어 닷코드 정보를 인식하는 인식센서부, 하우징의 상부에 구비되어 닷코드 정보에 해당하는 콘텐츠가 출력되는 스피커부, 하우징의 상부와 하부 사이에 구비되어 음성 명령을 입력받는 마이크부, 하우징의 내부에 구비되는 것으로, 인식센서부를 통하여 인식된 닷코드 정보 또는 마이크부를 통하여 입력된 음성 명령을 콘텐츠 관리서버로 송신하거나 또는 콘텐츠 관리서버로부터 송신된 닷코드 정보 또는 음성 명령에 해당하는 콘텐츠를 수신받는 무선통신부 및 하우징의 내부에 구비되는 것으로, 인식센서부를 통하여 닷코드 정보가 인식되면 메모리부에 저장된 해당 콘텐츠가 스피커부를 통하여 출력되도록 하거나 또는 콘텐츠 관리서버로부터 수신된 해당 콘텐츠가 메모리부에 저장되도록 하고, 마이크부를 통하여 입력된 음성 명령에 해당하는 콘텐츠가 콘텐츠 관리서버로부터 수신되면 메모리부에 저장되도록 하는 전자펜 제어부가 포함되어 구성된다.
하우징의 외부에는, 마이크부를 통하여 음성 명령이 입력되도록 선택하는 녹음버튼, 메모리부에 저장된 콘텐츠가 스피커부를 통하여 출력되도록 선택하는 재생버튼, 볼륨의 크기를 조절하는 볼륨조절부가 포함되어 구성될 수 있다.
재생버튼은 메모리부에 저장된 콘텐츠 또는 녹음된 음성이 스피커부를 통하여 출력되도록 선택하는 것으로, 최근 작업의 오디오가 재생되도록 할 수 있다.
그리고, 상술한 목적을 달성하기 위한 본 발명의 인공지능 기반 전자펜을 이용한 콘텐츠 재생 시스템은, 펜 형상으로 구비되는 것으로, 출판물에 구비된 닷코드 정보를 인식하고, 닷코드 정보에 해당하는 콘텐츠가 출력되거나 또는 음성 명령을 입력받아 해당하는 콘텐츠가 출력되도록 하는 전자펜 및 닷코드 정보 및 음성 명령에 대응되는 콘텐츠를 저장하고 관리하는 것으로, 전자펜으로부터 닷코드 정보 또는 음성 명령을 수신 받아 해당하는 콘텐츠를 검색하여 전자펜으로 송신하는 콘텐츠 관리서버가 포함되어 구성된다.
콘텐츠 관리서버는, 전자펜으로부터 수신된 음성 명령을 분석하는 인공지능 엔진부, 닷코드 정보 및 음성 명령의 분석에 따라 해당하는 콘텐츠를 검색하여 전자펜으로 송신하는 응용 처리부, 닷코드 정보 및 음성 명령에 해당하는 콘텐츠가 저장된 데이터베이스가 포함되어 구성될 수 있다.
또한, 상술한 목적을 달성하기 위한 본 발명의 인공지능 기반 전자펜을 이용한 콘텐츠 재생 방법은, 인식센서부를 통하여 출판물에 구비된 닷코드 정보를 인식하는 제1단계 및 제1단계를 통하여 인식된 닷코드 정보에 해당하는 콘텐츠가 메모리부에 저장되어 있으면 해당 콘텐츠가 스피커부를 통하여 출력되도록 하거나 또는 콘텐츠 관리서버로 인식된 닷코드 정보를 송신한 후 콘텐츠 관리서버로부터 닷코드 정보에 대한 콘텐츠를 수신받아 저장시킨 후 스피커부를 통하여 출력되도록 하는 제2단계를 포함한다.
제1단계에서 마이크부를 통하여 음성 명령이 입력되는 단계와, 제2단계에서 콘텐츠 관리서버로 음성 명령을 송신한 후 콘텐츠 관리서버로부터 음성 명령에 대한 콘텐츠를 수신받아 저장시킨 후 스피커부를 통하여 출력되도록 하는 단계를 포함할 수 있다.
또한, 상술한 목적을 달성하기 위한 본 발명의 인공지능 기반 전자펜을 이용한 콘텐츠 재생 방법은 인식센서부를 통하여 출판물에 구비된 닷코드 정보가 인식되는 제11단계; 녹음버튼이 선택되어 마이크부로 특정 음성 명령이 입력되는 제12단계; 제11단계를 통하여 인식된 닷코드 정보와 제12단계를 통하여 녹음된 음성 명령을 무선통신부를 통하여 콘텐츠 관리서버로 송신하는 제13단계 및 콘텐츠 관리서버로부터 닷코드 정보 및 음성 명령에 대한 콘텐츠를 수신받아 저장시킨 후 스피커부를 통하여 출력되도록 하는 제14단계를 포함한다.
제14단계에서는 콘텐츠 관리서버에서 닷코드 정보와 음성 명령이 수신되면, 인공지능 엔진부를 통하여 음성이 분석되도록 하는 단계와, 데이터베이스에서 닷코드 정보와 음성 명령의 분석 결과에 해당하는 콘텐츠를 검색하는 단계와, 검색된 해당 콘텐츠를 응용처리부를 통하여 전자펜으로 송신되도록 하는 단계를 포함할 수 있다.
또한, 본 발명의 상기 하우징은, 전자펜의 일면을 이루는 제1케이스; 전자펜의 타면을 이루고, 상기 제1케이스와 체결되는 제2케이스; 상기 제1케이스 또는 상기 제2케이스에 구비되고, 전자펜의 구동상태를 사용자가 인지할 수 있도록 출력하는 상태표시부; 및 상기 인식센서부를 감싸도록 상기 제1케이스 또는 상기 제2케이스에 결합되는 커버부재를 포함하고, 상기 상태표시부가 설치되도록 상기 제1케이스와 상기 제2케이스 내부에 설치되는 인쇄회로기판은, 상기 상태표시부가 설치되는 안착부와, 상기 안착부로부터 연장되고, 상기 제1케이스 및 상기 제2케이스를 따라 연장되는 연장부를 포함하는 것을 특징으로 한다.
이상에서 설명한 바와 같은 본 발명의 인공지능 기반 전자펜, 인공지능 기반 전자펜을 이용한 콘텐츠 재생 시스템 및 방법에 따르면, 전자펜은 출판물에 구비된 코드를 인식한 후 이에 대응하는 콘텐츠가 메모리부에 없을 경우 무선 통신부를 통해 자동으로 메모리부에 해당 콘텐츠를 다운로드하여 재생되도록 하거나, 또는 마이크를 통해 음성으로 특정 콘텐츠의 다운로드 명령을 입력하면 무선 통신부를 통해 해당 콘텐츠를 메모리부에 다운로드하여 재생되도록 하여 다양한 콘텐츠를 전자펜과 콘텐츠 관리서버 간의 통신을 통해 실시간으로 제공받을 수 있으므로, 종래의 전자펜을 컴퓨터 등에 연결하여 콘텐츠를 다운받아야 하는 불편함을 해소할 수 있다.
그리고, 인공지능 기술과 무선통신 기술을 적용한 전자펜을 통해 콘텐츠 이용의 편의와 출판물과 연관된 다양한 콘텐츠를 지속적으로 확장시켜 사용자에게 제공할 수 있으며, 음성 명령을 통하여 콘텐츠를 제공받을 수 있으므로, 출판물이 개정되어 닷코드 정보의 수정 및 재인쇄가 수행된 새로운 출판물이 필요할 경우라도, 기존의 출판물에서 닷코드 정보의 수정 및 재인쇄, 부가적인 인쇄물 배포 없이 추가적인 콘텐츠를 음성 명령 입력을 통해 제공 받을 수 있는 효과가 있다.
또한, 사용자가 음성 명령을 내릴 때 종래의 AI 스피커는 1단계 호출 발화 음성 명령, 2단계 서비스 발화 음성 명령의 단계를 거친 후 콘텐츠 및 서비스를 제공받게 되는데, 이때 주변 소음, 사용자와 스피커간의 거리 등의 환경 문제로 1단계 호출 발화 음성 명령부터 인식이 안 되거나 또는 2단계에서의 음성명령 인식이 잘 안되어 또 다시 1단계부터 발화 음성 명령을 시도해야 하는 불편함이 있었지만, 본 발명에서는 호출 발화 음성 명령 필요 없이 녹음버튼을 누르고 직접 마이크에 음성 명령을 내림으로 인식률을 높여 인식이 잘 안되는 문제점을 해소하였고, 동일한 콘텐츠를 재생하기 위해 종래의 AI 스피커와 같이 다시 음성 명령을 매번 반복하여 내려야 하는 불편함 없이 재생버튼을 누르기만 하면 반복 재생되는 효과가 있다.
또한, 출판물의 닷코드와 사용자의 음성 명령을 조합하여 어학, 학습 등 다양한 콘텐츠 서비스에 응용할 수 있는 효과가 있다.
도 1은 본 발명의 일실시예에 따른 인공지능 기반 전자펜을 이용한 콘텐츠 재생 시스템을 나타낸 도면이며,
도 2 및 도 3은 본 발명의 일실시예에 따른 인공지능 기반 전자펜을 나타낸 도면이며,
도 4는 본 발명의 일실시예에 따른 인공지능 기반 전자펜을 이용한 콘텐츠 재생 시스템에서 코드 인식에 따른 동작을 설명하기 위한 플로우차트이며,
도 5는 본 발명의 일실시예에 따른 인공지능 기반 전자펜을 이용한 콘텐츠 재생 시스템에서 음성 인식에 따른 동작을 설명하기 위한 플로우차트이며,
도 6은 본 발명의 일실시예에 따른 인공지능 기반 전자펜을 이용한 콘텐츠 재생 시스템에서 닷코드 정보 및 음성 인식에 따른 동작을 설명하기 위한 플로우차트이다.
도 7은 본 발명의 일실시예에 따른 인공지능 기반 전자펜의 하우징이 도시된 분해 사시도이다.
도 8은 본 발명의 일실시예에 따른 인공지능 기반 전자펜의 하우징이 도시된 정면 분해 사시도이다.
도 9는 본 발명의 일실시예에 따른 인공지능 기반 전자펜의 하우징이 도시된 배면 분해 사시도이다.
이하, 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자가 본 발명을 용이하게 실시할 수 있도록 상세히 설명하기 위하여, 본 발명의 바람직한 실시예를 첨부한 도면을 참조하여 상세하게 설명한다.
본 발명의 일실시예에 따른 인공지능 기반 전자펜을 이용한 콘텐츠 재생 시스템은 도 1에 나타낸 바와 같이, 전자펜(100) 및 전자펜(100)과 인터넷(300)으로 연결된 콘텐츠 관리서버(500)가 포함되어 구성된다.
전자펜(100)은 도 2 및 도 3에 나타낸 바와 같이, 펜 형상의 하우징으로 구비되는 것으로, 전원버튼(101), 인식센서부(103), 녹음버튼(105), 마이크부(106), 재생버튼(107), 기능버튼(109), 볼륨조절부(111), 잭연결부(113), USB연결부(115), 메모리부(121), 상태표시부(131), 스피커부(133), 무선통신부(135) 및 전자펜 제어부(150)가 포함되어 구성된다.
인식센서부(103)는 펜 형상의 하우징의 하부에 구비되어 출판물 등의 매체에 텍스트 및 이미지 등이 닷코드로 인쇄된 닷코드 정보를 인식하여 판독하고, 이에 따른 디지털 코드가 생성되도록 하는 것으로, OID(Object Identifier) 센서로 구성된다.
여기서, 매체는 패턴이 인쇄되는 다양한 종류의 매체들을 의미하는 것으로, 예를 들어, 책, 카드, 신문, 잡지, 전단, 팜플렛, 포스트 등의 종이 출판물, 지구본과 같은 플라스틱 교구, 책상과 같은 가구 형태 등으로 다양하게 구성될 수 있다.
또한, 책상, 필통, 연필, 지우개 등의 학용품일 수 있으며, 이외에도 패턴의 인쇄가 가능한 모든 매체들은 본 발명에 따른 실시예에서 언급하는 매체에 해당할 수 있다.
스피커부(133)는 하우징의 상부에 구비되어 닷코드 정보에 해당하는 콘텐츠가 출력되고, 마이크부(106)는 하우징의 상부와 하부 사이에 구비되어 음성 명령을 입력받는다.
무선통신부(135)는 하우징의 내부에 구비되는 것으로, 인식센서부(103)를 통하여 인식된 닷코드 정보 또는 마이크부(106)를 통하여 입력된 음성 명령을 콘텐츠 관리서버(500)로 무선으로 송신하거나 또는 콘텐츠 관리서버(500)로부터 송신된 닷코드 정보에 해당하는 콘텐츠 또는 음성 명령에 해당하는 콘텐츠를 무선으로 수신받는다.
메모리부(121)는 닷코드 정보에 해당하는 콘텐츠 및 음성 명령에 의해 수신된 콘텐츠가 저장된다.
녹음버튼(105)은 마이크부(106)를 통하여 음성 명령이 입력되도록 하거나 또는 목소리를 녹음하기 위하여 마이크부(106)를 활성화시키기 위한 선택버튼이다.
먼저, 음성 명령의 입력 과정은 녹음버튼(105)을 2초 정도 길게 누르면 녹음 시작에 대한 음향이 출력된 후 녹음이 시작될 수 있는 것으로, 예를 들어, 녹음버튼(105)을 2초 정도 누른 후 '띠링'과 같은 알림 사운드를 통해 음성 명령 인식이 가능한 상태라는 것을 알리게 된다.
이어서, 사용자가 녹음버튼(105)을 계속 누르고 있는 상태에서 음성으로 명령을 입력시키면 마이크부(106)로 음성 명령이 입력되어 메모리부(121)에 저장된다.
음성 명령의 입력이 완료되고, 누름 상태의 녹음버튼(105)에서 손을 떼어 누름 상태를 해제시키면, 메모리부(121)에 저장된 음성 명령이 무선통신부(135)를 통해 콘텐츠 관리서버(500)로 전송된다.
또한, 인식센서부(103)를 통해 인식한 닷코드와 마이크부(106)을 통해 입력받은 음성 명령을 조합한 후 콘텐츠 관리서버(500)에 전송하여 어학, 학습 등 다양한 서비스에 응용할 수 있다.
목소리 녹음 과정은 녹음버튼(105)을 연속으로 짧게 2번 누르면, 녹음 시작에 대한 음향이 출력된 후 녹음이 시작될 수 있는 것으로, 예를 들어, 녹음버튼(105)을 연속으로 짧게 2번 누르면, '알림 소리가 나면, 녹음을 시작하세요. 띠링'과 같은 안내 음향이 출력되고, 이어서, 사용자는 목소리 녹음을 수행할 수 있게 된다.
목소리 녹음이 완료되고, 녹음 버튼(105)을 2초 정도 누르면, 목소리 녹음 종료에 대한 음향이 출력된 후 녹음이 종료된다.
재생버튼(107)은 메모리부(121)에 저장된 콘텐츠 또는 녹음된 음성이 스피커부(133)를 통하여 출력되도록 선택하는 것으로, 최근 작업(콘텐츠 재생 또는 녹음 작업)의 오디오가 재생된다.
예를 들어, 최근 작업이 닷코드 인식에 의한 콘텐츠가 재생된 후, 재생버튼(107)을 선택하면 최근 재생된 해당 콘텐츠가 출력되고, 최근 작업이 음성 명령 입력에 의한 콘텐츠가 재생되었다면, 재생버튼(107)을 선택하면 최근 재생된 해당 콘텐츠가 출력되고, 최근 작업이 녹음 작업을 통해 목소리를 녹음 했다면, 재생버튼(107)을 선택하면 해당 음성이 출력된다.
이런식으로, 재생버튼(107)은 최근 출력된 콘텐츠를 반복 재생하는 기능이기 때문에 같은 콘텐츠를 출력하기 위해 닷코드 및 음성 인식을 다시 할 필요가 없어 편리하고, 어학과 같은 반복 학습에 유용하게 사용할 수 있는 것으로, 종래의 전자펜과 AI 스피커의 불편함을 해소하는 장점이 있다.
즉, 종래의 AI 스피커의 불편함은 매번 사용할 때마다 호출어 음성 명령의 인식이 필요하며, 사용자 호출어 음성 인식이 잘 안되는 경우가 종종 발생하였고, AI 스피커가 위치한 곳이 공공장소이거나 주변에 소음이 있으면 호출어 및 음성명령 인식률이 현저히 떨어지게 된다.
이에, 본 발명에 따른 전자펜은 직접 마이크부(106)에 음성을 인식시키기 때문에 공공장소 및 주변 소음에 있더라도 영향을 덜 받게 되며, 호출 발화 음성명령을 내릴 필요 없이 녹음버큰(105)을 누르면 바로 음성 인식 준비 상태에 들어갈 수 있게 된다.
상태표시부(131)는 전자펜(100)의 작동에 따른 상태 정보가 표시되는 것으로, 전원버튼(101)을 선택하여 전자펜(100)의 전원을 ON 시키거나, 전자펜(100)이 작동할 때 등 LED를 이용한 상태 정보가 표시된다.
예를 들어, 전원을 ON 시킬 때, 대기 중일 때, 배터리가 없을 때, 닷코드 정보 인식 중일 때 등 여러 상태에 대하여, LED의 표시를 다르게 하여 나타낼 수 있다.
볼륨조절부(111)는 스피커부(133)를 통해 출력되는 콘텐츠의 볼륨의 크기를 조절한다.
전원버튼(101)은 ON/OFF 동작으로 전자펜(100)이 내장된 배터리의 전원을 공급받아 작동하도록 하거나 또는 전원이 차단되어 작동이 중지되도록 선택하는 것이며, 전원버튼(101)이 ON 상태로 된 후 10분간 전자펜(100)을 사용하지 않으면 전자펜(100)은 전원이 차단되어 작동이 중지된다.
기능버튼(109)은 2초 정도 누를 때마다 미리 설정된 다른 기능으로 변경이 되도록 선택한다.
잭연결부(113)는 이어폰이나 외부 스피커를 사용할 때 연결하는 부분이다.
USB연결부(115)는 전자펜(100)에 내장된 배터리를 충전하거나 또는 동작하는데 필요한 펌웨어 등의 파일, 콘텐츠 파일 등을 업데이트할 때 USB 케이블을 연결하는 부분이다.
전자펜 제어부(150)는 하우징의 내부에 구비되는 것으로, 인식센서부(103)를 통하여 출판물에 구비된 닷코드 정보가 인식되면 메모리부(121)에 저장된 해당 콘텐츠가 스피커부(133)를 통하여 출력되도록 하거나 또는 콘텐츠 관리서버(500)로부터 수신된 해당 콘텐츠가 메모리부(121)에 저장되도록 하고, 마이크부(106)를 통하여 입력된 음성 명령에 해당하는 콘텐츠가 콘텐츠 관리서버(500)로부터 수신되면 메모리부(121)에 저장되도록 한다.
아울러 전자펜 제어부(150)는 녹음버튼(105)의 선택에 따른 동작, 재생버튼(107)의 선택에 따른 동작, 상태표시부(131)로 표시되는 동작, 볼륨조절부(111)의 선택에 따른 동작, 전원버튼(101)의 선택에 따른 동작, 기능버튼(109)의 선택에 따른 동작, 잭연결부(113)의 연결에 따른 동작, USB연결부(115)의 연결에 따른 동작 등을 제어한다.
콘텐츠 관리서버(500)는 닷코드 정보에 대응되는 콘텐츠 및 음성 명령에 대응되는 콘텐츠를 저장하고 관리하는 것으로, 인공지능 엔진부(510), 응용처리부(530) 및 데이터베이스(550)가 포함되어 구성된다.
인공지능 엔진부(510)는 전자펜(100)으로부터 수신된 음성 명령을 분석하고, 응용처리부(530)는 닷코드 정보 및 음성 명령의 분석에 따라 해당하는 콘텐츠를 검색하여 전자펜(100)으로 송신하고, 데이터베이스(550)는 닷코드 정보 및 음성 명령에 해당하는 콘텐츠가 저장된다.
상술한 바와 같이, 인공지능 기반 전자펜을 이용한 콘텐츠 재생 시스템이 구성되고, 전자펜(100)의 인식센서부(103)를 출판물에 구비된 닷코드에 접촉시켜 닷코드 정보가 인식되도록 한다(S110).
이어서, 전자펜 제어부(150)는 인식된 닷코드 정보에 해당하는 콘텐츠가 메모리부(121)에 저장되어 있으면(S120), 해당 콘텐츠가 스피커부(133)를 통하여 출력되도록 한다(S160).
아울러, 출판물에 구비된 닷코드 정보가 콘텐츠 다운로드를 수행하라는 정보이면, 해당 콘텐츠는 메모리부(121)에 저장되어 있지 않기 때문에, 무선통신부(135)를 통하여 콘텐츠 관리서버(500)로 닷코드 정보를 송신하여 해당 콘텐츠를 요청한다(S130).
이어서, 콘텐츠 관리서버(500)는 닷코드 정보를 수신하면, 데이터베이스(550)에서 닷코드 정보에 해당하는 콘텐츠를 검색하고, 검색된 해당 콘텐츠를 응용처리부(530)를 통하여 전자펜(100)으로 송신되도록 한다.
이어서, 전자펜(100)은 무선통신부(135)를 통하여 콘텐츠 관리서버(500)로부터 송신된 해당 콘텐츠를 수신하여(S140), 메모리부(121)에 저장시키고(S150), 저장된 해당 콘텐츠가 스피커부(133)를 통하여 출력되도록 한다(S160).
한편, 전자펜(100)을 출판물에 구비된 닷코드 정보를 인식시키지 않고, 음성으로 특정 콘텐츠를 제공받을 수 있다.
먼저, 녹음버튼(105)를 선택한 후 마이크부(106)로 특정 콘텐츠 다운로드 명령을 음성으로 입력하면(S210), 전자펜 제어부(150)는 녹음된 음성 정보를 무선통신부(135)를 통하여 콘텐츠 관리서버(500)로 송신한다(S220).
이어서, 콘텐츠 관리서버(500)는 음성 정보를 수신하면, 인공지능 엔진부(510)를 통하여 음성이 분석되도록 하고, 데이터베이스(550)에서 음성 정보의 분석 결과에 해당하는 콘텐츠를 검색하고, 검색된 해당 콘텐츠를 응용처리부(530)를 통하여 전자펜(100)으로 송신되도록 한다.
이어서, 전자펜(100)은 무선통신부(135)를 통하여 콘텐츠 관리서버(500)로부터 송신된 해당 콘텐츠를 수신하여(S230), 메모리부(121)에 저장시키고(S240), 저장된 해당 콘텐츠가 스피커부(133)를 통하여 출력되도록 한다(S250).
한편, 전자펜(100)을 출판물에 구비된 닷코드 정보를 인식시키고, 음성 명령을 조합하여 어학, 학습 등 다양한 응용 서비스를 구현하고 특정 콘텐츠를 제공받을 수 있다.
먼저, 인식센서부(103)를 통하여 출판물에 구비된 닷코드 정보를 인식하고(S310), 녹음버튼(105)를 선택한 후 마이크부(106)로 특정 음성 명령을 입력한다(S320).
이어서, 전자펜 제어부(150)는 인식된 닷코드 정보와 녹음된 음성 명령을 무선통신부(135)를 통하여 콘텐츠 관리서버(500)로 송신한다(S330).
이어서, 콘텐츠 관리서버(500)는 닷코드 정보와 음성 명령을 수신하면, 인공지능 엔진부(510)를 통하여 음성이 분석되도록 하고, 데이터베이스(550)에서 닷코드 정보와 음성 명령의 분석 결과에 해당하는 콘텐츠를 검색하고, 검색된 해당 콘텐츠를 응용처리부(530)를 통하여 전자펜(100)으로 송신되도록 한다.
이어서, 전자펜(100)은 무선통신부(135)를 통하여 콘텐츠 관리서버(500)로부터 송신된 해당 콘텐츠를 수신하여(S340), 메모리부(121)에 저장시키고(S350), 저장된 해당 콘텐츠가 스피커부(133)를 통하여 출력되도록 한다(S360).
본 발명에 따른 전자펜(100)을 통하여 닷코드 정보의 인식에 따른 콘텐츠 재생 및 음성 명령 입력에 따른 콘텐츠 재생은 반복하여 재생할 수 있다.
예를 들어, 기존의 AI 스피커 등의 경우 음성 명령을 통해 해당하는 콘텐츠를 스트리밍 방식으로 재생을 하게 되고, 이에 따라 해당 콘텐츠를 다시 재생시키기 위해서는 동일한 음성 명령을 반복하여 입력하여야 했다.
이에, 본 발명에 따른 전자펜(100)은 음성 명령을 통해 해당하는 콘텐츠를 콘텐츠 관리서버(500)로부터 수신받아 메모리부(121)에 저장시킨 후, 재생버튼(107)을 선택하면, 동일한 음성 명령을 반복하여 입력하지 않아도 최근 콘텐츠를 반복하여 재생시킬 수 있다.
아울러, 본 발명에 따른 전자펜(100)은 음성 명령을 통하여 콘텐츠를 제공받을 수 있으므로, 출판물이 개정되어 닷코드 정보의 수정 및 재인쇄가 수행된 새로운 출판물이 필요할 경우라도, 기존의 출판물에서 닷코드 정보의 수정 및 재인쇄, 부가적인 인쇄물 배포 없이 추가적인 콘텐츠를 음성 명령 입력을 통해 제공 받을 수 있다.
도 7은 본 발명의 일실시예에 따른 인공지능 기반 전자펜의 하우징이 도시된 분해 사시도이고, 도 8은 본 발명의 일실시예에 따른 인공지능 기반 전자펜의 하우징이 도시된 정면 분해 사시도이고, 도 9는 본 발명의 일실시예에 따른 인공지능 기반 전자펜의 하우징이 도시된 배면 분해 사시도이다.
도 7 내지 도 9를 참조하면, 본 발명의 일 실시예에 따른 전자펜의 하우징(700)은, 전자펜의 일면을 이루는 제1케이스(710)와, 전자펜의 타면을 이루고, 제1케이스(710)와 체결되는 제2케이스(730)와, 제1케이스(710) 또는 제2케이스(730)에 구비되고, 전자펜의 구동상태를 사용자가 인지할 수 있도록 출력하는 상태표시부(131)와, 인식센서부(103)를 감싸도록 제1케이스(710) 또는 제2케이스(730)에 결합되는 커버부재(750)를 포함한다.
제1케이스(710) 및 제2케이스(730)의 중앙부로부터 하부까지 연장되는 부분은 펜 형상으로 이루어져, 커버부재(750)가 제1케이스(710) 및 제2케이스(730)의 하단에 결합되어 인식센서부(103)를 커버하게 되고, 제1케이스(710)와 제2케이스(730)의 상부는 사용자에게 친근감을 줄 수 있도록 동물이나 사람의 머리 형상으로 이루어진다.
제1케이스(710)의 상부 전면에는 사람이나 동물의 얼굴 모양을 모사할 수 있는 원형 또는 타원의 반투명창 또는 투명창(712)이 설치되고, 투명창(712) 내부에는 상태표시부(131)가 설치되어 전자펜의 구동상태를 표시하는 상태표시부(131)의 영상 또는 신호가 투명창(712)을 통해 외부로 출력되어 사용자가 전자펜의 구동상태를 확인할 수 있게 된다.
본 실시예의 상태표시부(131)는, 투명창(712) 내부에 배치되도록 인쇄회로기판의 전면에 설치되는 기판부재(774a)와, 기판부재(774a)에 설치되어 전원공급부로부터 전달되는 전기에너지가 인가되면 빛을 발하여 전자펜의 구동상태를 표시하는 발광부재(774b)를 포함한다.
따라서 인식센서부(103)를 통해 데이터가 입력되는 동안, 마이크부(106)를 통해 사용자의 음성신호가 입력되는 동안, 스피커부(1330를 통해 음성신호가 출력되는 동안 등등의 전자펜 구동 상태에 따라 사용자가 전자펜 구동상태를 인지할 수 있는 다양한 모양의 영상신호가 발광부재(774b)로부터 조사되는 빛에 의해 투명창(712) 외부로 출력될 수 있게 된다.
여기서, 기판부재(774a)는 투명창(712)과 동일하거나 유사한 모양의 기판으로 이루어지고, 인쇄회로기판의 상단부에 설치되며, 상태표시부(131)가 설치되도록 제1케이스(710)와 제2케이스(730) 내부에 인쇄회로기판이 설치된다.
인쇄회로기판은, 상태표시부(131)가 설치되는 안착부(772b)와, 안착부(772b)로부터 연장되고, 제1케이스(710) 및 제2케이스(730)를 따라 연장되는 연장부(772a)를 포함한다.
연장부(772a)는, 제1케이스(710)와 제2케이스(730)를 따라 수직방향으로 길게 연장될 수 있도록 폭이 좁고 수직방향으로 긴 패널 모양으로 형성되고, 안착부(772b)는, 연장부(772a)의 상단에 일체로 형성되고, 연장부(772b)와 비교하여 폭이 넓은 원형 또는 타원 모양으로 형성되어 투명창(712) 내부에 배치되는 기판부재(774a)가 설치된다.
제1케이스(710)의 전면 중앙부에는 기능버튼(109), 녹음버튼(105) 및 재생버튼(107)이 조작 가능하게 설치되고, 투명창(712)과 기능버튼(109) 사이에는 사용자의 음성신호가 입력될 수 있도록 다수 개의 입력홀부(106a)가 형성된다.
따라서 연장부(772a)와 안착부(772b)의 연결부위에 설치되는 마이크부(106)에 입력홀부(106a)가 대향되게 배치되므로 사용자의 음성신호가 입력홀부(106a)를 통해 효과적으로 마이크부(106)까지 전달될 수 있도록 한다.
또한, 제1케이스(710)의 배면 테두리에는 다수 개의 결합보스(714)가 간격을 유지하며 형성되고, 제2케이스(730)에는 결합보스(714)에 대향되게 형성되는 결합홀부(734)가 형성되므로 결합홀부(734)를 통해 삽입되는 체결부재가 결합보스(714)에 체결되면서 제1케이스(710)와 제2케이스(730)를 일체로 연결할 수 있게 된다.
제1케이스(710)의 내면 하부에는 커버부재(750)로부터 돌출되는 후크부재(754)가 걸림결합되는 제1걸림턱부(716)가 형성되고, 제2케이스(730)의 내면 하부에는 커버부재(750)로부터 돌출되는 후크부재(756)가 걸림결합되는 제2걸림턱부(736)가 형성된다.
커버부재(750)의 상단 전면 및 배면에는 제1걸림턱부(716) 및 제2걸림턱부(736)에 걸림결합되는 한 쌍의 후크부재(756)가 상측으로 연장되게 구비되고, 커버부재(750)의 상단 양측 단부에는 결합보스(714)와 결합홀부(734) 사이에 개재되어 체결부재가 관통되는 연결홀부(754)가 형성되므로 하나의 체결부재를 결합하여 제1케이스(710), 제2케이스(730) 및 커버부재(750)를 동시에 결합시킬 수 있게 된다.
제2케이스(730)의 중앙부 내벽에는 충전배터리(782)가 설치될 수 있는 공간부가 형성되고, 충전배터리(782)로부터 연장되는 케이블은 스피커부(133) 및 인쇄회로기판에 연결되어 전원을 공급하게 된다.
인쇄회로기판에는 충전배터리(782)에 연결되는 충전포트(784)가 설치되므로 충전배터리(782)에 저장되는 전기에너지가 방전되는 경우에는 충전케이블을 충전포트(784)에 연결하여 전기에너지를 저장할 수 있게 된다.
제2케이스(730)는 제1케이스(710)와 동일하거나 유사한 모양으로 이루어지고, 제1케이스(710)와 연결되어 전자펜의 배면을 이루게 되며, 상부 외벽에는 스피커부(133)에 대향되게 배치되는 다수 개의 스프커홀부(133a)가 형성되어 스피커부(133)로부터 출력되는 소리신호를 사용자가 용이하게 들을 수 있게 된다.
이상에서 설명한 바와 같은 본 발명에 따르면, 전자펜은 출판물에 구비된 코드를 인식한 후 이에 대응하는 콘텐츠가 메모리부에 없을 경우 무선 통신부를 통해 자동으로 메모리부에 해당 콘텐츠를 다운로드하여 재생되도록 하거나, 또는 마이크를 통해 음성으로 특정 콘텐츠의 다운로드 명령을 입력하면 무선 통신부를 통해 해당 콘텐츠를 메모리부에 다운로드하여 재생되도록 하여 다양한 콘텐츠를 전자펜과 콘텐츠 관리서버 간의 통신을 통해 실시간으로 제공받을 수 있으므로, 종래의 전자펜을 컴퓨터 등에 연결하여 콘텐츠를 다운받아야 하는 불편함을 해소할 수 있다.
그리고, 인공지능 기술과 무선통신 기술을 적용한 전자펜을 통해 콘텐츠 이용의 편의와 출판물과 연관된 다양한 콘텐츠를 지속적으로 확장시켜 사용자에게 제공할 수 있으며, 음성 명령을 통하여 콘텐츠를 제공받을 수 있으므로, 출판물이 개정되어 닷코드 정보의 수정 및 재인쇄가 수행된 새로운 출판물이 필요할 경우라도, 기존의 출판물에서 닷코드 정보의 수정 및 재인쇄, 부가적인 인쇄물 배포 없이 추가적인 콘텐츠를 음성 명령 입력을 통해 제공 받을 수 있는 효과가 있다.
또한, 사용자가 음성 명령을 내릴 때 종래의 AI 스피커는 1단계 호출 발화 음성 명령, 2단계 서비스 발화 음성 명령의 단계를 거친 후 콘텐츠 및 서비스를 제공받게 되는데, 이때 주변 소음, 사용자와 스피커간의 거리 등의 환경 문제로 1단계 호출 발화 음성 명령부터 인식이 안 되거나 또는 2단계에서의 음성명령 인식이 잘 안되어 또 다시 1단계부터 발화 음성 명령을 시도해야 하는 불편함이 있었지만, 본 발명에서는 호출 발화 음성 명령 필요 없이 녹음버튼을 누르고 직접 마이크에 음성 명령을 내림으로 인식률을 높여 인식이 잘 안되는 문제점을 해소하였고, 동일한 콘텐츠를 재생하기 위해 종래의 AI 스피커와 같이 다시 음성 명령을 매번 반복하여 내려야 하는 불편함 없이 재생버튼을 누르기만 하면 반복 재생되는 효과가 있다.
또한, 출판물의 닷코드와 사용자의 음성 명령을 조합하여 어학, 학습 등 다양한 콘텐츠 서비스에 응용할 수 있는 효과가 있다.
한편, 본 발명에 따른 단계 S110 내지 단계 S160, 단계 S210 내지 단계 S250, 단계 S310 내지 단계 S360에 따른 인공지능 기반 전자펜을 이용한 콘텐츠 재생 방법을 프로그램화하여 컴퓨터가 읽을 수 있도록 메모리, ROM, EEPROM 등의 기록매체에 저장시킬 수도 있다.
이상의 설명에서는 본 발명의 바람직한 실시예를 제시하여 설명하였으나, 본 발명이 반드시 이에 한정되는 것은 아니며, 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자라면 본 발명의 기술적 사상을 벗어나지 않는 범위 내에서 여러 가지 치환, 변형 및 변경할 수 있음을 쉽게 알 수 있을 것이다.
103: 인식센서부 105: 녹음버튼
106: 마이크부 107: 재생버튼
109: 기능버튼 111: 볼륨조절부
121: 메모리부 131 : 상태표시부
133: 스피커부

Claims (11)

  1. 펜 형상의 하우징;
    하우징의 하부에 구비되어 닷코드 정보를 인식하는 인식센서부;
    하우징의 상부에 구비되어 닷코드 정보에 해당하는 콘텐츠가 출력되는 스피커부;
    하우징의 상부와 하부 사이에 구비되어 음성 명령을 입력받는 마이크부;
    하우징의 내부에 구비되는 것으로, 인식센서부를 통하여 인식된 닷코드 정보 또는 마이크부를 통하여 입력된 음성 명령을 콘텐츠 관리서버로 송신하거나 또는 콘텐츠 관리서버로부터 송신된 닷코드 정보 또는 음성 명령에 해당하는 콘텐츠를 수신받는 무선통신부; 및
    하우징의 내부에 구비되는 것으로, 인식센서부를 통하여 닷코드 정보가 인식되면 메모리부에 저장된 해당 콘텐츠가 스피커부를 통하여 출력되도록 하거나 또는 콘텐츠 관리서버로부터 수신된 해당 콘텐츠가 메모리부에 저장되도록 하고, 마이크부를 통하여 입력된 음성 명령에 해당하는 콘텐츠가 콘텐츠 관리서버로부터 수신되면 메모리부에 저장되도록 하는 전자펜 제어부가 포함되어 구성되고,
    상기 하우징의 외부에는, 상기 마이크부를 통하여 음성 명령이 입력되도록 선택하는 녹음버튼; 상기 메모리부에 저장된 콘텐츠가 상기 스피커부를 통하여 출력되도록 선택하는 재생버튼(107); 볼륨의 크기를 조절하는 볼륨조절부가 포함되어 구성되고,
    최근 작업이 음성 명령 입력에 의해 콘텐츠가 재생된 경우에는, 상기 재생버튼(107)을 선택하면 최근 재생된 해당 콘텐츠가 출력되고, 최근 작업이 녹음 작업을 통해 목소리를 녹음 한 경우에는, 상기 재생버튼(107)을 선택하면 해당 음성이 출력되고,
    같은 콘텐츠를 출력하기 위해 닷코드 및 음성 인식을 다시 할 필요가 없고, 공공장소이거나 주변에 소음이 있는 경우에 호출어 및 음성명령 인식률이 떨어지는 것을 방지할 수 있는 것을 특징으로 한 인공지능 기반 전자펜.
  2. 삭제
  3. 청구항 제1항에 있어서, 재생버튼(107)은 메모리부에 저장된 콘텐츠 또는 녹음된 음성이 스피커부를 통하여 출력되도록 선택하는 것으로, 최근 작업의 오디오가 재생되도록 하는 것을 특징으로 한 인공지능 기반 전자펜.
  4. 펜 형상으로 구비되는 것으로, 출판물에 구비된 닷코드 정보를 인식하고, 닷코드 정보에 해당하는 콘텐츠가 출력되거나 또는 음성 명령을 입력받아 해당하는 콘텐츠가 출력되도록 하는 전자펜; 및
    닷코드 정보 및 음성 명령에 대응되는 콘텐츠를 저장하고 관리하는 것으로, 전자펜으로부터 닷코드 정보 또는 음성 명령을 수신 받아 해당하는 콘텐츠를 검색하여 전자펜으로 송신하는 콘텐츠 관리서버가 포함되어 구성되고,
    상기 전자펜은,
    펜 형상의 하우징;
    하우징의 하부에 구비되어 닷코드 정보를 인식하는 인식센서부;
    하우징의 상부에 구비되어 닷코드 정보에 해당하는 콘텐츠가 출력되는 스피커부;
    하우징의 상부와 하부 사이에 구비되어 음성 명령을 입력받는 마이크부;
    하우징의 내부에 구비되는 것으로, 인식센서부를 통하여 인식된 닷코드 정보 또는 마이크부를 통하여 입력된 음성 명령을 콘텐츠 관리서버로 송신하거나 또는 콘텐츠 관리서버로부터 송신된 닷코드 정보 또는 음성 명령에 해당하는 콘텐츠를 수신받는 무선통신부; 및
    하우징의 내부에 구비되는 것으로, 인식센서부를 통하여 닷코드 정보가 인식되면 메모리부에 저장된 해당 콘텐츠가 스피커부를 통하여 출력되도록 하거나 또는 콘텐츠 관리서버로부터 수신된 해당 콘텐츠가 메모리부에 저장되도록 하고, 마이크부를 통하여 입력된 음성 명령에 해당하는 콘텐츠가 콘텐츠 관리서버로부터 수신되면 메모리부에 저장되도록 하는 전자펜 제어부가 포함되어 구성되고,
    상기 하우징의 외부에는, 상기 마이크부를 통하여 음성 명령이 입력되도록 선택하는 녹음버튼; 상기 메모리부에 저장된 콘텐츠가 상기 스피커부를 통하여 출력되도록 선택하는 재생버튼(107); 볼륨의 크기를 조절하는 볼륨조절부가 포함되어 구성되고,
    최근 작업이 음성 명령 입력에 의해 콘텐츠가 재생된 경우에는, 상기 재생버튼(107)을 선택하면 최근 재생된 해당 콘텐츠가 출력되고, 최근 작업이 녹음 작업을 통해 목소리를 녹음 한 경우에는, 상기 재생버튼(107)을 선택하면 해당 음성이 출력되고,
    같은 콘텐츠를 출력하기 위해 닷코드 및 음성 인식을 다시 할 필요가 없고, 공공장소이거나 주변에 소음이 있는 경우에 호출어 및 음성명령 인식률이 떨어지는 것을 방지할 수 있는 것을 특징으로 한 인공지능 기반 전자펜을 이용한 콘텐츠 재생 시스템.
  5. 청구항 4에 있어서, 콘텐츠 관리서버는, 전자펜으로부터 수신된 음성 명령을 분석하는 인공지능 엔진부; 닷코드 정보 및 음성 명령의 분석에 따라 해당하는 콘텐츠를 검색하여 전자펜으로 송신하는 응용 처리부; 닷코드 정보 및 음성 명령에 해당하는 콘텐츠가 저장된 데이터베이스가 포함되어 구성된 것을 특징으로 한 인공지능 기반 전자펜을 이용한 콘텐츠 재생 시스템.
  6. 인식센서부를 통하여 출판물에 구비된 닷코드 정보를 인식하는 제1단계; 및
    제1단계를 통하여 인식된 닷코드 정보에 해당하는 콘텐츠가 메모리부에 저장되어 있으면 해당 콘텐츠가 스피커부를 통하여 출력되도록 하거나 또는 콘텐츠 관리서버로 인식된 닷코드 정보를 송신한 후 콘텐츠 관리서버로부터 닷코드 정보에 대한 콘텐츠를 수신받아 저장시킨 후 스피커부를 통하여 출력되도록 하는 제2단계를 포함하고,
    상기 제1단계에서 마이크부를 통하여 음성 명령이 입력되는 단계와, 제2단계에서 콘텐츠 관리서버로 음성 명령을 송신한 후 콘텐츠 관리서버로부터 음성 명령에 대한 콘텐츠를 수신받아 저장시킨 후 스피커부를 통하여 출력되도록 하는 단계를 포함하고,
    상기 마이크부를 통하여 음성 명령이 입력되는 단계는,
    펜 형상의 하우징;
    하우징의 하부에 구비되어 닷코드 정보를 인식하는 인식센서부;
    하우징의 상부에 구비되어 닷코드 정보에 해당하는 콘텐츠가 출력되는 스피커부;
    하우징의 상부와 하부 사이에 구비되어 음성 명령을 입력받는 마이크부;
    하우징의 내부에 구비되는 것으로, 인식센서부를 통하여 인식된 닷코드 정보 또는 마이크부를 통하여 입력된 음성 명령을 콘텐츠 관리서버로 송신하거나 또는 콘텐츠 관리서버로부터 송신된 닷코드 정보 또는 음성 명령에 해당하는 콘텐츠를 수신받는 무선통신부; 및
    하우징의 내부에 구비되는 것으로, 인식센서부를 통하여 닷코드 정보가 인식되면 메모리부에 저장된 해당 콘텐츠가 스피커부를 통하여 출력되도록 하거나 또는 콘텐츠 관리서버로부터 수신된 해당 콘텐츠가 메모리부에 저장되도록 하고, 마이크부를 통하여 입력된 음성 명령에 해당하는 콘텐츠가 콘텐츠 관리서버로부터 수신되면 메모리부에 저장되도록 하는 전자펜 제어부가 포함되어 구성되는 전자펜에 의해 이루어지고,
    상기 하우징의 외부에는, 상기 마이크부를 통하여 음성 명령이 입력되도록 선택하는 녹음버튼; 상기 메모리부에 저장된 콘텐츠가 상기 스피커부를 통하여 출력되도록 선택하는 재생버튼(107); 볼륨의 크기를 조절하는 볼륨조절부가 포함되어 구성되고,
    최근 작업이 음성 명령 입력에 의해 콘텐츠가 재생된 경우에는, 상기 재생버튼(107)을 선택하면 최근 재생된 해당 콘텐츠가 출력되고, 최근 작업이 녹음 작업을 통해 목소리를 녹음 한 경우에는, 상기 재생버튼(107)을 선택하면 해당 음성이 출력되고,
    같은 콘텐츠를 출력하기 위해 닷코드 및 음성 인식을 다시 할 필요가 없고, 공공장소이거나 주변에 소음이 있는 경우에 호출어 및 음성명령 인식률이 떨어지는 것을 방지할 수 있는 것을 특징으로 하는 인공지능 기반 전자펜을 이용한 콘텐츠 재생 방법.
  7. 삭제
  8. 인식센서부를 통하여 출판물에 구비된 닷코드 정보가 인식되는 제11단계;
    녹음버튼이 선택되어 마이크부로 특정 음성 명령이 입력되는 제12단계;
    제11단계를 통하여 인식된 닷코드 정보와 제12단계를 통하여 녹음된 음성 명령을 무선통신부를 통하여 콘텐츠 관리서버로 송신하는 제13단계; 및
    콘텐츠 관리서버로부터 닷코드 정보 및 음성 명령에 대한 콘텐츠를 수신받아 저장시킨 후 스피커부를 통하여 출력되도록 하는 제14단계를 포함하고,
    상기 제11단계는,
    펜 형상의 하우징;
    하우징의 하부에 구비되어 닷코드 정보를 인식하는 인식센서부;
    하우징의 상부에 구비되어 닷코드 정보에 해당하는 콘텐츠가 출력되는 스피커부;
    하우징의 상부와 하부 사이에 구비되어 음성 명령을 입력받는 마이크부;
    하우징의 내부에 구비되는 것으로, 인식센서부를 통하여 인식된 닷코드 정보 또는 마이크부를 통하여 입력된 음성 명령을 콘텐츠 관리서버로 송신하거나 또는 콘텐츠 관리서버로부터 송신된 닷코드 정보 또는 음성 명령에 해당하는 콘텐츠를 수신받는 무선통신부; 및
    하우징의 내부에 구비되는 것으로, 인식센서부를 통하여 닷코드 정보가 인식되면 메모리부에 저장된 해당 콘텐츠가 스피커부를 통하여 출력되도록 하거나 또는 콘텐츠 관리서버로부터 수신된 해당 콘텐츠가 메모리부에 저장되도록 하고, 마이크부를 통하여 입력된 음성 명령에 해당하는 콘텐츠가 콘텐츠 관리서버로부터 수신되면 메모리부에 저장되도록 하는 전자펜 제어부가 포함되어 구성되는 전자펜에 의해 이루어지고,
    상기 하우징의 외부에는, 상기 마이크부를 통하여 음성 명령이 입력되도록 선택하는 녹음버튼; 상기 메모리부에 저장된 콘텐츠가 상기 스피커부를 통하여 출력되도록 선택하는 재생버튼(107); 볼륨의 크기를 조절하는 볼륨조절부가 포함되어 구성되고,
    최근 작업이 음성 명령 입력에 의해 콘텐츠가 재생된 경우에는, 상기 재생버튼(107)을 선택하면 최근 재생된 해당 콘텐츠가 출력되고, 최근 작업이 녹음 작업을 통해 목소리를 녹음 한 경우에는, 상기 재생버튼(107)을 선택하면 해당 음성이 출력되고,
    같은 콘텐츠를 출력하기 위해 닷코드 및 음성 인식을 다시 할 필요가 없고, 공공장소이거나 주변에 소음이 있는 경우에 호출어 및 음성명령 인식률이 떨어지는 것을 방지할 수 있는 것을 특징으로 하는 인공지능 기반 전자펜을 이용한 콘텐츠 재생 방법.
  9. 청구항 8에 있어서, 제14단계에서는 콘텐츠 관리서버에서 닷코드 정보와 음성 명령이 수신되면, 인공지능 엔진부를 통하여 음성이 분석되도록 하는 단계와, 데이터베이스에서 닷코드 정보와 음성 명령의 분석 결과에 해당하는 콘텐츠를 검색하는 단계와, 검색된 해당 콘텐츠를 응용처리부를 통하여 전자펜으로 송신되도록 하는 단계를 포함하는 것을 특징으로 하는 인공지능 기반 전자펜을 이용한 콘텐츠 재생 방법.
  10. 청구항 제6항, 제8항 및 제9항 중 어느 하나의 인공지능 기반 전자펜을 이용한 콘텐츠 재생 방법을 실행하는 프로그램이 기록되어 컴퓨터로 읽을 수 있는 기록매체.
  11. 제1항에 있어서, 상기 하우징은,
    전자펜의 일면을 이루는 제1케이스;
    전자펜의 타면을 이루고, 상기 제1케이스와 체결되는 제2케이스;
    상기 제1케이스 또는 상기 제2케이스에 구비되고, 전자펜의 구동상태를 사용자가 인지할 수 있도록 출력하는 상태표시부; 및
    상기 인식센서부를 감싸도록 상기 제1케이스 또는 상기 제2케이스에 결합되는 커버부재를 포함하고,
    상기 상태표시부가 설치되도록 상기 제1케이스와 상기 제2케이스 내부에 설치되는 인쇄회로기판은, 상기 상태표시부가 설치되는 안착부와, 상기 안착부로부터 연장되고, 상기 제1케이스 및 상기 제2케이스를 따라 연장되는 연장부를 포함하는 것을 특징으로 하는 인공지능 기반 전자펜.
KR1020190102677A 2019-08-21 2019-08-21 인공지능 기반 전자펜, 인공지능 기반 전자펜을 이용한 콘텐츠 재생 시스템 및 방법 KR102082181B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020190102677A KR102082181B1 (ko) 2019-08-21 2019-08-21 인공지능 기반 전자펜, 인공지능 기반 전자펜을 이용한 콘텐츠 재생 시스템 및 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020190102677A KR102082181B1 (ko) 2019-08-21 2019-08-21 인공지능 기반 전자펜, 인공지능 기반 전자펜을 이용한 콘텐츠 재생 시스템 및 방법

Publications (1)

Publication Number Publication Date
KR102082181B1 true KR102082181B1 (ko) 2020-05-29

Family

ID=70911678

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020190102677A KR102082181B1 (ko) 2019-08-21 2019-08-21 인공지능 기반 전자펜, 인공지능 기반 전자펜을 이용한 콘텐츠 재생 시스템 및 방법

Country Status (1)

Country Link
KR (1) KR102082181B1 (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2022231087A1 (en) * 2021-04-30 2022-11-03 Genirobot Co., Ltd. English learning platform system and service providing method using smart pen and artificial intelligence speaker based on iot star network

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20090044627A (ko) * 2007-11-01 2009-05-07 주식회사 지팡이 사용자가 직접 컨텐츠를 생성하고 재생할 수 있는 지능형광학펜 및 그 동작방법
KR101515162B1 (ko) 2014-03-12 2015-04-24 이명환 전자펜을 이용하는 정보 제공 장치 및 그의 정보 제공 방법
KR20170060506A (ko) * 2015-11-24 2017-06-01 김철회 전자펜 및 전자펜의 콘텐츠 이식 방법
KR101789057B1 (ko) * 2016-06-17 2017-10-23 한밭대학교 산학협력단 시각 장애인을 위한 자동 오디오 북 시스템 및 그 운영 방법

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20090044627A (ko) * 2007-11-01 2009-05-07 주식회사 지팡이 사용자가 직접 컨텐츠를 생성하고 재생할 수 있는 지능형광학펜 및 그 동작방법
KR101515162B1 (ko) 2014-03-12 2015-04-24 이명환 전자펜을 이용하는 정보 제공 장치 및 그의 정보 제공 방법
KR20170060506A (ko) * 2015-11-24 2017-06-01 김철회 전자펜 및 전자펜의 콘텐츠 이식 방법
KR101789057B1 (ko) * 2016-06-17 2017-10-23 한밭대학교 산학협력단 시각 장애인을 위한 자동 오디오 북 시스템 및 그 운영 방법

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2022231087A1 (en) * 2021-04-30 2022-11-03 Genirobot Co., Ltd. English learning platform system and service providing method using smart pen and artificial intelligence speaker based on iot star network

Similar Documents

Publication Publication Date Title
US8787672B2 (en) Reader device having various functionalities
US7792480B2 (en) Electrographic position location apparatus including recording capability and data cartridge including microphone
KR100921441B1 (ko) 사용자가 직접 컨텐츠를 생성하고 재생할 수 있는 지능형광학펜 및 그 동작방법
KR20020055398A (ko) 전자 서적 송출장치, 전자 서적 장치 및 기록매체
KR102082181B1 (ko) 인공지능 기반 전자펜, 인공지능 기반 전자펜을 이용한 콘텐츠 재생 시스템 및 방법
KR101378362B1 (ko) 광학코드 식별 펜에 의하여 제어되는 어학학습기
KR101789057B1 (ko) 시각 장애인을 위한 자동 오디오 북 시스템 및 그 운영 방법
KR20180057951A (ko) 스스로 공부하는 습관을 함양시켜 주는 학습용 전자펜 시스템.
CN107610683A (zh) 一种基于树莓派的可编程音乐播放系统
US9111463B2 (en) Interactive speech synthesizer for enabling people who cannot talk but who are familiar with use of anonym moveable picture communication to autonomously communicate using verbal language
CN110853424A (zh) 一种具有视觉识别的语音学习方法、装置及系统
KR20150139750A (ko) 단어 학습 장치, 이를 실행하기 위한 기록 매체
KR20210070622A (ko) 전자펜을 이용한 학습 관리 장치 및 그 방법
KR102338019B1 (ko) 펜모션 인식 멀티디바이스 콘텐츠 구현 시스템 및 방법
KR20010067934A (ko) 언어 학습 시스템
TWI383376B (zh) 語音溝通方法及應用該方法之系統
CN213844755U (zh) 一种ai智能绘本点读机
KR101282239B1 (ko) 학습용 리딩북 셋트
US20060020470A1 (en) Interactive speech synthesizer for enabling people who cannot talk but who are familiar with use of picture exchange communication to autonomously communicate using verbal language
KR20100024700A (ko) 악보 보드 및 이를 포함하는 악보 연주 시스템
CN101268507A (zh) 用于通信的方法以及通信设备
KR101038571B1 (ko) 학습 정보 선택 버튼을 구비한 학습 보조 장치 및 이를이용한 전자 학습 정보 제공 방법
KR100606464B1 (ko) 인쇄출판물및 화상정보등에 부가된 코드이미지에 의해 음성정보를 제공하는 서비스방법
KR20220040280A (ko) 의사 표현 장치
CN212135717U (zh) 一种智能翻页笔及智能翻页笔系统