KR20090041929A - 사용자 기기의 오조작 패턴 분석을 통한 매뉴얼 제공 방법및 시스템 - Google Patents

사용자 기기의 오조작 패턴 분석을 통한 매뉴얼 제공 방법및 시스템 Download PDF

Info

Publication number
KR20090041929A
KR20090041929A KR1020070107723A KR20070107723A KR20090041929A KR 20090041929 A KR20090041929 A KR 20090041929A KR 1020070107723 A KR1020070107723 A KR 1020070107723A KR 20070107723 A KR20070107723 A KR 20070107723A KR 20090041929 A KR20090041929 A KR 20090041929A
Authority
KR
South Korea
Prior art keywords
manual
pattern
misoperation
information
user
Prior art date
Application number
KR1020070107723A
Other languages
English (en)
Inventor
김현진
이영직
박경
배승조
임충규
윤장우
손동환
심광현
안신영
Original Assignee
한국전자통신연구원
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 한국전자통신연구원 filed Critical 한국전자통신연구원
Priority to KR1020070107723A priority Critical patent/KR20090041929A/ko
Priority to US12/127,341 priority patent/US20090112852A1/en
Publication of KR20090041929A publication Critical patent/KR20090041929A/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F15/00—Digital computers in general; Data processing equipment in general
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44—Arrangements for executing specific programs
    • G06F9/451—Execution arrangements for user interfaces
    • G06F9/453—Help systems
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90—Details of database functions independent of the retrieved data types
    • G06F16/93—Document management systems
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F17/00—Digital computing or data processing equipment or methods, specially adapted for specific functions
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0489—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using dedicated keyboard keys or combinations thereof
    • G06F3/04895—Guidance during keyboard input operation, e.g. prompting

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Software Systems (AREA)
  • Databases & Information Systems (AREA)
  • Human Computer Interaction (AREA)
  • Data Mining & Analysis (AREA)
  • Business, Economics & Management (AREA)
  • General Business, Economics & Management (AREA)
  • Mathematical Physics (AREA)
  • Computer Hardware Design (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

본 발명은 사용자 기기의 오조작 패턴 분석을 통한 매뉴얼 제공 기술에 관한 것으로, 사용자 기기의 동작 패턴을 입력받고, 입력된 동작 패턴이 정상 동작 패턴이 아닌 오조작 패턴인 경우, 오조작 패턴별 매뉴얼을 저장하고 있는 동작 패턴 시퀀스 DB에서 입력된 오조작 패턴에 대한 매뉴얼 정보를 검색하며, 매뉴얼 정보가 검색된 경우, 매뉴얼 정보에서 텍스트 정보를 추출하고, 추출된 텍스트 정보를 음성 또는 디스플레이 장치를 통해 출력하는 것을 특징으로 한다. 본 발명에 의하면, 기기를 처음 접하는 사용자가 많이 범하는 오류 패턴 또는 자주 사용하는 기능에 대해서 많이 범하는 오류 패턴을 수집하여 DB화 하고, 이에 대해서 오류를 인지하여 적절한 사용자 매뉴얼 맨트를 음성 또는 디스플레이 장치를 통해서 제공함으로써, 기기 사용자가 매뉴얼을 숙지하지 않고, 효율적인 매뉴얼 인터페이스를 통해서 해당 기기를 사용할 수 있는 기능을 제공할 수 있다.
동작 패턴, 사용자기기 오조작, 동작 패턴 시퀀스, 음성 매뉴얼

Description

사용자 기기의 오조작 패턴 분석을 통한 매뉴얼 제공 방법 및 시스템{METHOD AND SYSTEM FOR SUPPORTING MANUAL USING HANDLING MISTAKE PATTERN ANALYSIS IN A USER DEVICE}
본 발명은 사용자 기기의 매뉴얼을 제공하는 기술에 관한 것으로서, 특히 사용자 매뉴얼을 숙지하지 않은 사용자가 직관에 의해서 기기를 조작하였을 경우, 흔히 발생하는 오류 패턴을 인식하여 사용자가 원하는 조작에 대한 매뉴얼을 음성 또는 디스플레이 장치를 이용하여 안내를 수행하는데 적합한 사용자 기기 오조작 패턴 분석을 통한 매뉴얼 제공 방법 및 시스템에 관한 것이다.
휴먼 컴퓨터 인터페이스(HCI:Human Computer Interface)는 사용자와 컴퓨터가 쉽고 편하게 상호작용을 할 수 있도록 작동시스템을 디자인하고 평가하는 연구분야로서, 사용자가 쓰기 쉽고 안전하고 기능적으로 뛰어난 컴퓨터시스템을 디자인하는 것이다.
예를 들어, 사용자가 컴퓨터 시스템을 작동 시 음성 및 디스플레이 등을 이용하여 인터페이스를 수행하는 경우, 컴퓨터 시스템은 사용자에게 매뉴얼을 디스플레이하거나 음성 안내를 수행함으로써, 사용자는 처음 접하는 시스템에 대해서도 어려움 없이 작동 시킬 수 있도록 하는 것이다.
이와 같이 컴퓨터 시스템과 같은 사용자기기를 통해 사용자 매뉴얼을 제공하는 기술로는 국내외적으로 몇 가지 특허 및 논문이 제안되고 있는데, 선행기술로서 대화식 음성 입출력을 통해서 기기 내부의 정보를 이용해 음성 매뉴얼을 제시하는 방법(한국공개특허 2007-0022393)과 인터넷을 통해서 외부로부터 정보를 찾아서 음성 매뉴얼을 제시하는 방법(한국공개특허 2001-0113308)이 있다.
한국공개특허 2007-0022393의 "차량 및 다른 복합 장비용 대화식 매뉴얼 시스템 및 방법"의 경우는, 사용자의 음성을 수신하여 음성인식, 언어분석, 대화분석 등의 방법론을 통해서 분석하여, 적합한 매뉴얼 정보를 시각 및 음성합성 표시 장치로 제공하는 것이 목적이고, 차량 등 장치용 매뉴얼을 읽기 힘든 사람들을 위해서 음성으로 매뉴얼을 제시하는 효과가 있다. 그러나 이러한 방법론은 기기 자체에 음성인식, 언어분석, 대화분석, 음성합성, 전체 매뉴얼 DB 등을 다 탑재해야 하므로 기기 및 DB의 복잡도가 높다는 단점과 사용자가 적어도 음성으로 매뉴얼을 찾기 위해서는 필요한 키워드를 숙지해야 하거나, 적합한 정보를 찾아내기 위해서 DB에 저장된 명령어를 인지하고 있어야 하는 점에서는 사용자의 직관에 의한 인터페이스 제공 부분이 미흡하다는 단점이 있다.
또한, 한국공개특허 2001-0113308의 "메뉴얼 서치 서비스 시스템 및 방법"의 경우에는 사용자로부터 컴퓨터, 무선단말기 및 유선 전화기 등을 통해 문자 또는 음성을 입력으로 해서, 정보제공을 요청받은 후, 정보 검색사들이 매뉴얼 정보를 검색, 가공해서 제공하는 것이 목적이고, 전문가 집단을 직접 연결함으로써 가장 확실한 문제 해결 방법을 제공한다는 장점은 가지고 있으나, 외부의 정보를 입력하기 위해 인터넷 또는 유선정보가 연결된 통신 기기를 가지고 있어야 한다는 점과 정보 제공에 따른 비용이 수시로 발생한다는 단점을 가지고 있다.
상기한 바와 같이 동작하는 종래 기술에 의한 사용자에게 매뉴얼을 제공하는 사용자기기에 있어서는, 사용자가 음성으로 매뉴얼을 찾기 위해서는 필요한 키워드 및 명령을 사전에 숙지하고 있어야 했으며, 쌍방향 통신을 통하여 전문가 집단으로부터 매뉴얼 정보를 전송받는 경우에는 통신기기를 구비하여야 하며, 정보제공에 따른 비용이 부가될 수 있다는 문제점이 있었다.
이에 본 발명은 사용자 매뉴얼을 숙지하지 않은 사용자가 직관에 의해서 사용자기기를 조작하였을 경우, 사용자기기에서 발생되는 오류 패턴을 인식하여 사용자가 원하는 조작에 대한 매뉴얼을 음성 또는 디스플레이 장치를 이용하여 안내를 수행하는 방법 및 시스템을 제공한다.
또한 본 발명은 사용자기기에서 사용자가 입력한 버튼 또는 기기 조작의 시퀀스를 파악하여 오조작이 발생한 경우, 가장 근접한 요구에 해당하는 사용자 매뉴얼을 음성 또는 디스플레이로 제공하는 방법 및 시스템을 제공한다.
본 발명의 일 실시예 방법은, 사용자 기기의 동작 패턴을 입력받는 과정과, 상기 입력된 동작 패턴이 정상 동작 패턴이 아닌 오조작 패턴인 경우, 상기 오조작 패턴별 매뉴얼을 저장하고 있는 동작 패턴 시퀀스 DB에서 상기 입력된 오조작 패턴에 대한 매뉴얼 정보를 검색하는 과정과, 상기 매뉴얼 정보가 검색된 경우, 상기 매뉴얼 정보에서 텍스트 정보를 추출하는 과정과, 상기 추출된 텍스트 정보를 음성 또는 디스플레이 장치를 통해 출력하는 것을 포함한다.
본 발명의 일 실시예 장치는, 사용자 기기의 동작 패턴을 입력받는 동작패턴 입력부와, 상기 입력된 동작 패턴이 정상 동작 패턴이 아닌 오조작 패턴인 경우, 상기 오조작 패턴별 매뉴얼을 저장하고 있는 동작 패턴 시퀀스 DB에서 상기 입력된 오조작 패턴에 대한 매뉴얼 정보를 검색하는 오조작 검색부와, 상기 매뉴얼 정보가 검색된 경우, 상기 매뉴얼 정보에서 텍스트 정보를 추출하고, 상기 추출된 텍스트 정보를 출력하는 응답 생성부와, 상기 응답 생성부로부터 출력된 텍스트 정보를 사용자에게 출력하는 정보 출력부를 포함한다.
본 발명에 있어서, 개시되는 발명 중 대표적인 것에 의하여 얻어지는 효과를 간단히 설명하면 다음과 같다.
본 발명은, 사용자가 직관에 의해서 사용자기기의 버튼을 조작했을 경우에 오류가 발생했다면, 사용자기기를 처음 접하는 사용자가 많이 범하는 오류 패턴 또는 자주 사용하는 기능에 대해서 많이 범하는 오류 패턴을 수집하여 DB화 하고, 이에 대해서 오류를 인지하여 적절한 사용자 매뉴얼 맨트를 음성 또는 디스플레이 장치를 통해서 제공함으로써, 기기 사용자가 매뉴얼을 숙지하지 않고도 효율적인 매뉴얼 인터페이스를 통해서 해당 기기를 사용할 수 있는 기능을 제공할 수 있으며, 가전 및 다른 장비/기기 등에서 복잡한 사용법에 대해서 사용자의 매뉴얼에 대한 접근 방법을 개선 할 수 있는 효과가 있다.
이하 첨부된 도면을 참조하여 본 발명의 동작 원리를 상세히 설명한다. 하기에서 본 발명을 설명함에 있어서 공지 기능 또는 구성에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우에는 그 상세한 설명을 생략할 것이다. 그리고 후술되는 용어들은 본 발명에서의 기능을 고려하여 정의된 용어들로서 이는 사용자, 운용자의 의도 또는 관례 등에 따라 달라질 수 있다. 그러므로 그 정의는 본 명세서 전반에 걸친 내용을 토대로 내려져야 할 것이다.
본 발명은 사용자 매뉴얼을 숙지하지 않은 사용자가 직관에 의해서 사용자기기를 조작하였을 경우, 사용자기기에서 발생되는 오류 패턴을 인식하여 사용자가 원하는 조작에 대한 매뉴얼을 음성 또는 디스플레이 장치를 이용하여 안내하는 것이다.
이에 본 발명은 사용자기기에서 사용자가 입력한 버튼 또는 기기 조작의 시퀀스를 파악하여 오조작이 발생한 경우, 가장 근접한 요구에 해당하는 사용자 매뉴얼을 음성 또는 디스플레이로 제공함으로써, 사용자가 매뉴얼을 굳이 숙지하지 않고 직관에 의지한 기기 동작으로 문제가 발생하는 경우, 기기 내부의 DB 또는 저장장치에 있는 정보만으로도 사용자에게 적절한 매뉴얼을 제시하여 효율적인 매뉴얼 인터페이스를 제공한다.
도 1은 본 발명의 바람직한 실시예에 따른 사용자와 사용자기기간의 인터페이스 구조를 도시한 도면이다.
도 1을 참조하면, 사용자(100)와 사용자 기기(105) 간의 상호작용을 위한 인 터페이스방식을 나타내는 것으로서, 사용자(100)가 사용자 기기(105)로 음성, 키패드 및 터치스크린 등으로 사용자(100)의 제어명령을 전달하면, 사용자 기기(105)에서는 음성을 인식하거나 키패드 및 터치스크린으로 입력된 제어신호를 판독하여 사용자(100)에게 그에 해당하는 음성안내를 수행하거나, 매뉴얼 디스플레이를 통하여 사용자(100)와 사용자 기기(105) 간의 인터페이스를 구현할 수 있도록 한다.
도 2는 본 발명의 바람직한 실시예에 따른 사용자기기의 구조를 도시한 블록도이다.
도 2를 참조하면, 사용자기기는 사용자의 오조작 패턴을 분석하여 사용자의 의도를 파악하고 이에 대응하는 사용방법을 음성 또는 디스플레이 장치를 통해 안내하는 매뉴얼을 제공하기 위한 것으로서, 동작패턴 입력부(200), 오조작 검색부(205), 동작 패턴 시퀀스 DB(210), 응답 생성부(215), 정보 출력부(220)를 포함한다.
동작패턴 입력부(200)는 사용자의 동작 패턴을 입력받아 기록하는 것으로서, 동작 방식에는 음성이나 키패드, 터치스크린, 버튼 등 사용자의 동작으로 인해 제어신호를 입력 받을 수 있는 모든 입력 수단을 포함한다. 이에 사용자의 입력이 버튼 등의 기기조작에 있는 경우, 사용자의 기기조작 시퀀스를 순서대로 저장하여, 동작패턴 시퀀스로 변환하게 된다.
예를 들어, 사용자가 디지털 도어락 장치를 조작할 때, 문을 열려는 시도를 하는 경우, (open)버튼을 누르고, 도어문을 잡아당기는 조작을 하였다면, 동작패턴 입력부에서는 이를 (open 버튼 누름) → (도어문 회전) 등을 패턴의 형식으로 변환 하게 된다. 이때 패턴은 숫자의 형태이든 문자의 형태이든 상관하지 않고, 기존 동작패턴 시퀀스 DB(210)에 저장된 형태와 동일 방식으로 변환하도록 한다.
오조작 검색부(205)는 동작패턴 입력부(200)에서 변환된 동작패턴을 분석해서 오조작이 일어났는지 여부를 검색하고, 해당하는 오류에 대한 매뉴얼 정보를 출력하는 기능을 수행한다.
오조작 여부의 검색 방법은 일반적인 유한 오토마타(automata) 검색을 사용하고, 동작패턴 시퀀스 DB(210)에서 기록된 오토마타에서 부분 인식을 하여 해당 매뉴얼이 어떤 것인지를 검색하게 된다. 오조작이 일어났는지 또는 정상 동작이 가능한 시퀀스 인지를 파악하여, 오조작이 일어 난 경우에는 정상 동작으로 유도하는 매뉴얼 정보를 리턴하고, 정상 동작 시퀀스가 입력으로 들어오는 경우에는 정상 정보임을 리턴하게 된다.
예를 들어서, 사용자가 디지털 도어락 장치에서 문을 열려는 시도로 (open 버튼 누름) → (도어문 회전)의 동작을 진행했을 경우, 동작패턴 시퀀스 DB(210)에는 이러한 동작 패턴 시퀀스에 해당하는 동작 매뉴얼 정보를 검색하여, 이 동작 시퀀스가 정상 동작인지, 오조작인지, 오조작의 경우에는 어떤 동작에 대한 부분 오류 시퀀스를 따랐는지 여부를 검색하게 된다.
동작패턴 시퀀스 DB(210)는 해당 기기별 매뉴얼에서 주요 기능에 대해서 자주 발생하는 오조작 패턴과 주로 사용하는 기능에 대한 정상 동작패턴을 오토마타 형식으로 기록한 DB이며, 오조작 검색부(205)에 의해 제어된다. 이 DB에는 오조작과 정상 동작 두 가지 정보를 다 저장하고 있으며, 이는 동작패턴 입력부(200)를 통해서 입력된 동작패턴 시퀀스가 정상동작 시퀀스를 따랐는지, 오조작 시퀀스를 따랐는지 여부를 검색하기 위함이다.
하기 (표 1)은 디지털 도어락 장치에서 문을 열 때 발생하는 오조작 시퀀스와 정상 동작 시퀀스를 담은 동작패턴 시퀀스 DB 스키마의 한 예이다.
시퀀스 번호 기기 동작명 동작패턴 시퀀스 동작 기능 적용 매뉴얼 ID
1 @Door_Open @Open_butten_Click@Door_push 오조작 10_1
2 @Door_Open @Open_butten_Click@Master_Card_touch@Door_push 정상 동작 10
예를 들어, 해당 디지털 도어락 장치에서 사용자가 문을 열려고 하면, 정상동작 패턴 시퀀스는 시퀀스 번호 2)에 기록된 대로, @Open_butten_Click(도어락 장치 내에 있는 Open 버튼을 누른다) → @Master_Card_touch(도어락 장치 내에 소지하고 있는 마스터 카드 키를 갖다 댄다) → @Door_push(문 손잡이를 민다)의 순서을 따르게 된다. 이와 같은 방식의 디지털 도어락 장치기기에서 사용자가 마스터 카드키를 입력하는 것을 주로 잘 잊어버리는 경우에는 시퀀스 번호 1)과 같이 사용자의 오류 패턴으로부터 수집한 동작 패턴 시퀀스를 기록해서 저장한다.
이때, 사용자의 동작 시퀀스 패턴이 정상 동작 기능을 따랐을 경우에는 별 이상이 없으므로 기기가 정상 동작하도록 정보를 리턴하게 되고, 만약 오조작에 해당하는 시퀀스를 따랐을 경우에는 적용 매뉴얼 정보의 번호를 리턴하게 된다.
이와 같이 매뉴얼 정보는 기 오조작 패턴을 정상 동작 패턴과 비교한 후, 어떤 오류가 발생했는지를 검색하여 사용자에게 빠진 절차 또는 정상 동작 절차에 대해 설명하는 문자열 및 그래픽 정보를 포함하는 것으로서, 오조작 검색부(205)는 동작 패턴 입력부(200)에 기 저장된 오조작 패턴 외에 다른 오조작 패턴이 입력된 경우에는 이에 대한 패턴을 동작패턴 시퀀스 DB(210)에 저장하고, 추가적으로 저장된 다른 오조작 패턴에 대해서는 사용자에게 적절한 매뉴얼 맨트를 보낼 수 있도록 이에 해당하는 매뉴얼 멘트를 할당하게 된다.
응답 생성부(215)는, 오조작 검색부(205)에서 각각의 매뉴얼 번호를 호출 한 경우에, 해당 기기의 매뉴얼에 필요한 매뉴얼 맨트를 찾아서 문자열로 제공하는 역할을 수행하고, 정보 출력부(220)는 응답생성부(215)에서 생성된 해당 매뉴얼 맨트에 대해, 사용자기기에 음성 출력장치가 부착이 된 경우에는 TTS(Text-to-speech)기능을 활용하여 사용자가 음성으로 매뉴얼 지침 또는 해당 오류에 대한 오류 지침을 알 수 있도록 자연스럽고 의미 명료한 음향 음성 신호를 생성할 수 있다. 다만, 음성 출력장치는 없고, 디스플레이 장치만 있는 경우에는 디스플레이 장치를 통해서 매뉴얼 맨트를 디스플레이 하는 역할을 수행한다. 물론 사용자기기에 음성 출력 장치 및 디스플레이 장치가 동시에 장착되어 있는 경우에는 음성 출력과 함께 매뉴얼 멘트를 디스플레이 하게 된다.
또한, 매뉴얼 맨트가 문자열만이 아닌 그래픽 정보도 포함된 경우에는 그래픽 정보도 추출하여 디스플레이 장치로 문자열 출력 시 그래픽 정보도 같이 출력하도록 한다.
도 3은 본 발명의 바람직한 실시예에 따른 사용자기기의 매뉴얼 제공절차를 도시한 흐름도이다.
도 3을 참조하면, 300단계에서는 동작패턴 입력부(300)에서 사용자의 동작 패턴을 입력받아 기록하고, 이를 오조작 검색부(205)로 전달하게 된다. 305단계에서 오조작 검색부(205)는 동작 패턴의 오류 발생 여부를 판단하여, 동작패턴의 문제가 없다면, 310단계에서 정상동작을 수행한 후, 종료하게 된다.
그러나 정상적인 동작패턴이 아닌 경우에는 오조작으로 인해 사용자 기기에 오류가 발생하게 되므로, 315단계에서　오류가 발생된 동작 패턴을사용자가 많이 범하는 오류 시퀀스에 따른 매뉴얼 지침이 담겨있는 동작패턴 시퀀스 DB(210)에서 검색을 수행하여, 320단계에서 오류가 발생된 동작 패턴에 해당하는 매뉴얼 정보를 검색하고, 검색된 매뉴얼 정보는 응답 생성부(215)로 전달된다.
이후 325단계에서 응답 생성부(215)로부터 검색된 매뉴얼 정보에서 필요한 맨트가 추출되어 정보 출력부(220)로 전달되고, 정보 출력부(220)에 해당되는 음성 출력 장치 또는 디스플레이 장치에서 해당 맨트를 출력하게 된다.
이상 설명한 바와 같이, 본 발명은 사용자 매뉴얼을 숙지하지 않은 사용자가 직관에 의해서 기기를 조작하였을 경우, 발생되는 오류 패턴을 인식하여 사용자가 원하는 조작에 대한 매뉴얼을 음성 또는 디스플레이 장치를 이용하여 안내를 수행한다.
한편 본 발명의 상세한 설명에서는 구체적인 실시예에 관해 설명하였으나, 본 발명의 범위에서 벗어나지 않는 한도 내에서 여러 가지 변형이 가능함은 물론이다. 그러므로 본 발명의 범위는 설명된 실시예에 국한되지 않으며, 후술되는 특허청구의 범위뿐만 아니라 이 특허청구의 범위와 균등한 것들에 의해 정해져야 한다.
도 1은 본 발명의 바람직한 실시예에 따른 사용자와 사용자기기간의 인터페이스 구조를 도시한 도면,
도 2는 본 발명의 바람직한 실시예에 따른 사용자기기의 구조를 도시한 블록도,
도 3은 본 발명의 바람직한 실시예에 따른 사용자기기의 매뉴얼 제공절차를 도시한 흐름도.
< 도면의 주요 부분에 대한 부호 설명 >
200 : 동작 패턴 입력부　　 205 : 오조작 검색부
210 : 동작 패턴 시퀀스 DB　 215 : 응답 생성부
220 : 정보 출력부

Claims (8)

  1. 사용자 기기의 동작 패턴을 입력받는 과정과,
    상기 입력된 동작 패턴이 정상 동작 패턴이 아닌 오조작 패턴인 경우, 상기 오조작 패턴별 매뉴얼을 저장하고 있는 동작 패턴 시퀀스 DB에서 상기 입력된 오조작 패턴에 대한 매뉴얼 정보를 검색하는 과정과,
    상기 매뉴얼 정보가 검색된 경우, 상기 매뉴얼 정보에서 텍스트 정보를 추출하는 과정과,
    상기 추출된 텍스트 정보를 음성 또는 디스플레이 장치를 통해 출력하는 과정
    을 포함하는 사용자 기기 오조작 패턴 분석을 통한 매뉴얼 제공 방법.
  2. 제 1항에 있어서,
    상기 방법은,
    상기 매뉴얼 정보에서 그래픽 정보를 추출하는 과정과,
    상기 추출된 그래픽 정보를 상기 디스플레이 장치를 통해 출력하는 과정
    을 더 포함하는 것을 특징으로 하는 사용자 기기 오조작 패턴 분석을 통한 매뉴얼 제공 방법.
  3. 제 1항에 있어서,
    상기 방법은,
    상기 입력된 오조작 패턴이 상기 동작 패턴 시퀀스 DB에 기 저장된 오조작 패턴이 아닌 경우에는 이를 상기 동작 패턴 시퀀스 DB에 저장하고, 상기 저장된 오조작 패턴에 대응하는 매뉴얼 정보를 할당하는 과정을 더 포함하는 것을 특징으로 하는 사용자 기기 오조작 패턴 분석을 통한 매뉴얼 제공 방법.
  4. 제 1항에 있어서,
    상기 매뉴얼 정보는,
    상기 오조작 패턴을 정상 동작 패턴과 비교하여 사용자에게 빠진 절차 또는 정상 동작 절차에 대해 설명해주는 문자열과 그래픽 정보중 적어도 하나를 포함하는 것을 특징으로 하는 사용자 기기 오조작 패턴 분석을 통한 매뉴얼 제공 방법.
  5. 사용자 기기의 동작 패턴을 입력받는 동작패턴 입력부와,
    상기 입력된 동작 패턴이 정상 동작 패턴이 아닌 오조작 패턴인 경우, 상기 오조작 패턴별 매뉴얼을 저장하고 있는 동작 패턴 시퀀스 DB에서 상기 입력된 오조작 패턴에 대한 매뉴얼 정보를 검색하는 오조작 검색부와,
    상기 매뉴얼 정보가 검색된 경우, 상기 매뉴얼 정보에서 텍스트 정보를 추출하고, 상기 추출된 텍스트 정보를 출력하는 응답 생성부와,
    상기 응답 생성부로부터 출력된 텍스트 정보를 사용자에게 출력하는 정보 출력부
    를 포함하는 사용자 기기 오조작 패턴 분석을 통한 매뉴얼 제공 시스템.
  6. 제 5항에 있어서,
    상기 응답 생성부는,
    상기 매뉴얼 정보에서 그래픽 정보를 추출하고, 상기 추출된 그래픽 정보를 상기 정보 출력부로 전달하는 것
    을 특징으로 하는 사용자 기기 오조작 패턴 분석을 통한 매뉴얼 제공 시스템.
  7. 제 5항에 있어서,
    상기 오조작 검색부는,
    상기 입력된 오조작 패턴이 상기 동작 패턴 시퀀스 DB에 저장된 오조작 패턴이 아닌 경우에는 이를 상기 동작 패턴 시퀀스 DB에 저장하고, 상기 저장된 오조작 패턴에 대응하는 매뉴얼 정보를 할당하는 것을 특징으로 하는 사용자 기기 오조작 패턴 분석을 통한 매뉴얼 제공 시스템.
  8. 제 5항에 있어서,
    상기 매뉴얼 정보는,
    상기 입력된 오조작 패턴을 토대로 정상 동작 패턴에서 빠진 절차 또는 상기 정상 동작 절차에 대해 설명해주는 문자열과 그래픽 정보중 적어도 하나를 포함하 는 것을 특징으로 하는 사용자 기기 오조작 패턴 분석을 통한 매뉴얼 제공 시스템.
KR1020070107723A 2007-10-25 2007-10-25 사용자 기기의 오조작 패턴 분석을 통한 매뉴얼 제공 방법및 시스템 KR20090041929A (ko)

Priority Applications (2)

Application Number Priority Date Filing Date Title
KR1020070107723A KR20090041929A (ko) 2007-10-25 2007-10-25 사용자 기기의 오조작 패턴 분석을 통한 매뉴얼 제공 방법및 시스템
US12/127,341 US20090112852A1 (en) 2007-10-25 2008-05-27 User manual supporting method and apparatus using error pattern analysis

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020070107723A KR20090041929A (ko) 2007-10-25 2007-10-25 사용자 기기의 오조작 패턴 분석을 통한 매뉴얼 제공 방법및 시스템

Publications (1)

Publication Number Publication Date
KR20090041929A true KR20090041929A (ko) 2009-04-29

Family

ID=40584194

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020070107723A KR20090041929A (ko) 2007-10-25 2007-10-25 사용자 기기의 오조작 패턴 분석을 통한 매뉴얼 제공 방법및 시스템

Country Status (2)

Country Link
US (1) US20090112852A1 (ko)
KR (1) KR20090041929A (ko)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4609544B2 (ja) * 2008-07-30 2011-01-12 ソニー株式会社 情報処理装置、情報処理システムおよび情報処理方法
US8379801B2 (en) 2009-11-24 2013-02-19 Sorenson Communications, Inc. Methods and systems related to text caption error correction
US11562731B2 (en) 2020-08-19 2023-01-24 Sorenson Ip Holdings, Llc Word replacement in transcriptions

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5978595A (en) * 1996-09-27 1999-11-02 Hitachi, Ltd. Method for supporting user operation
US7882434B2 (en) * 2003-06-27 2011-02-01 Benjamin Slotznick User prompting when potentially mistaken actions occur during user interaction with content on a display screen
JP4113254B2 (ja) * 2006-06-21 2008-07-09 松下電器産業株式会社 ユーザの操作意図を推定する装置および当該装置を備えた電子機器

Also Published As

Publication number Publication date
US20090112852A1 (en) 2009-04-30

Similar Documents

Publication Publication Date Title
US6917920B1 (en) Speech translation device and computer readable medium
US5781179A (en) Multimodal information inputting method and apparatus for embodying the same
KR100638198B1 (ko) 정보처리장치 및 방법과 정보제공매체
EP1701247B1 (en) XML based architecture for controlling user interfaces with contextual voice commands
US7389235B2 (en) Method and system for unified speech and graphic user interfaces
CN1369834B (zh) 语音转换设备
CN106251863B (zh) 一种基于智能设备的指令式语音控制系统及控制方法
JP5703491B2 (ja) 言語モデル・音声認識辞書作成装置及びそれらにより作成された言語モデル・音声認識辞書を用いた情報処理装置
CN102148031A (zh) 语音识别与交互系统及方法
CN104464720A (zh) 以语音识别来选择控制客体的装置及方法
CN111179928A (zh) 一种基于语音交互的变配电站智能控制方法
KR20090041929A (ko) 사용자 기기의 오조작 패턴 분석을 통한 매뉴얼 제공 방법및 시스템
CN114830230A (zh) 利用键盘宏功能的自动语音识别器及语音识别方法
CN103164398B (zh) 利用汉维电子辞典自动转译汉维语的方法
CN116705019A (zh) 一种基于人机交互的流程自动化系统
JP4909771B2 (ja) 情報処理装置及びこの装置の階層メニュー表示方法並びに階層メニュー表示プログラム
CN109003380B (zh) 一种基于语音识别的智能云锁控制方法及系统
D’Ulizia et al. A hybrid grammar-based approach to multimodal languages specification
JP2006309620A (ja) ケア記録支援システム
JP2002014751A (ja) オンラインヘルプシステム
JP3870722B2 (ja) 翻訳装置、記録媒体
JP3877975B2 (ja) キーボードレス入力装置とその方法及びこの方法の実行プログラムとその記録媒体
KR20190025188A (ko) 원문과 번역문 파일을 개별적으로 생성하는 문서 번역 서버 및 번역 방법
CN101103347B (zh) 对手持电子设备的有歧义输入进行歧义消解的装置和方法
JP4860390B2 (ja) ポインティングデバイス、文字入力システム、文字入力方法、および、文字入力プログラム

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E601 Decision to refuse application