KR102459076B1 - 사용자 경험 측정을 위한 적응형 설문 생성 장치 및 방법 - Google Patents

사용자 경험 측정을 위한 적응형 설문 생성 장치 및 방법 Download PDF

Info

Publication number
KR102459076B1
KR102459076B1 KR1020200124935A KR20200124935A KR102459076B1 KR 102459076 B1 KR102459076 B1 KR 102459076B1 KR 1020200124935 A KR1020200124935 A KR 1020200124935A KR 20200124935 A KR20200124935 A KR 20200124935A KR 102459076 B1 KR102459076 B1 KR 102459076B1
Authority
KR
South Korea
Prior art keywords
user
questionnaire
questions
recognition
observation data
Prior art date
Application number
KR1020200124935A
Other languages
English (en)
Other versions
KR20220041555A (ko
Inventor
이승룡
후사인 자밀
Original Assignee
경희대학교 산학협력단
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 경희대학교 산학협력단 filed Critical 경희대학교 산학협력단
Priority to KR1020200124935A priority Critical patent/KR102459076B1/ko
Publication of KR20220041555A publication Critical patent/KR20220041555A/ko
Application granted granted Critical
Publication of KR102459076B1 publication Critical patent/KR102459076B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/02—Marketing; Price estimation or determination; Fundraising
    • G06Q30/0201—Market modelling; Market analysis; Collecting market data
    • G06Q30/0203—Market surveys; Market polls
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00—Handling natural language data
    • G06F40/10—Text processing
    • G06F40/166—Editing, e.g. inserting or deleting
    • G06F40/174—Form filling; Merging
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00—Handling natural language data
    • G06F40/10—Text processing
    • G06F40/166—Editing, e.g. inserting or deleting
    • G06F40/186—Templates

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Finance (AREA)
  • Strategic Management (AREA)
  • Development Economics (AREA)
  • Physics & Mathematics (AREA)
  • Accounting & Taxation (AREA)
  • General Physics & Mathematics (AREA)
  • Computational Linguistics (AREA)
  • Artificial Intelligence (AREA)
  • General Engineering & Computer Science (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • General Health & Medical Sciences (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Health & Medical Sciences (AREA)
  • Data Mining & Analysis (AREA)
  • Game Theory and Decision Science (AREA)
  • Economics (AREA)
  • Marketing (AREA)
  • General Business, Economics & Management (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

본 발명은 사용자 경험 측정을 위한 적응형 설문지를 생성하는 기술적 사상에 관한 것으로, 사용자가 대화형 시스템을 이용하는 동안의 사용자의 반응을 수집하고, 수집된 사용자의 반응에 기반하여 설문지의 질문들을 추론 및 선정함에 따라 적응형 설문지를 생성하며, 생성된 적응형 설문지에 기반한 사용자의 피드백을 실시간으로 수집하는 기술에 관한 것으로, 본 발명의 일실시예에 따른 적응형 설문 생성 장치는 사용자가 특정 업무를 수행하는 동안에 상기 특정 업무와 관련된 적어도 하나의 상호 작용 정보를 사용자 관찰 데이터로 수집하는 사용자 추적부, 상기 수집된 사용자 관찰 데이터로부터 사용자의 감정, 행동 및 문제 중 적어도 하나의 인식 대상 정보를 인식하는 인식부 및 상기 인식된 적어도 하나의 인식 대상 정보에 기반하여 사용자의 현재 상황을 확인하고, 상기 확인된 현재 상황 및 상기 사용자 관찰 데이터에 기반하여 추론된 질문들을 추천하고, 상기 사용자에게 상기 추천된 질문들에 기반하여 생성된 설문지를 제공하는 설문지 생성부를 포함할 수 있다.

Description

사용자 경험 측정을 위한 적응형 설문 생성 장치 및 방법{APPARATUS AND METHOD OF GENERATING ADAPTIVE QUESTIONNAIRE FOR MEASURING USER EXPERIENCE}
본 발명은 사용자 경험 측정을 위한 적응형 설문지를 생성하는 기술적 사상에 관한 것으로, 사용자가 대화형 시스템을 이용하는 동안의 사용자의 반응을 수집하고, 수집된 사용자의 반응에 기반하여 설문지의 질문들을 추론 및 선정함에 따라 적응형 설문지를 생성하며, 생성된 적응형 설문지에 기반한 사용자의 피드백을 실시간으로 수집하는 기술에 관한 것이다.
설문지, 얼굴 분석, 음성 분석, 생체 인식 등 다양한 방식으로 제품 사용과 관련된 사용자 경험(user experience, UX)을 획득하기 위한 많은 접근 방식이 사용되고 있다.
전통적인 사용자 경험 측정 방법은 자체 보고 된 측정, 사용성 연구(성능) 및 관찰에 의존하고 있다.
가장 널리 사용되고 일반적으로 사용되는 방법은 사용자 피드백 및 응답을 얻기 위한 설문지 접근 방식으로, 사용자에게 자신의 경험과 관련된 질문을 전달 받는 방법이다.
기술의 발전과 컴퓨터 사용자의 증가에 따라 설문지를 생성 및 개발하는 시스템이 확장되고 있고, 일반적인 전자 질문 시스템은 사용자의 응답을 수집하기 위해 개인을 대상으로 설문지를 작성하고 공유 할 수 있다.
그러나, 이러한 설문지 평가는 경험을 간접적으로 반영할 뿐 실제 경험에 초점을 맞추고 있지 않은 실정이다.
일반 전자 질문지는 몇 가지 중요한 제한 사항이 있다. 예를 들어, 긴 질문 서를 작성하는 것은 시간이 많이 걸리는 작업이며 사용자는 중간에 질문지를 떠날 수 있고, 사용자는 설문에 대한 답변과 관련하여 시간과 열정이 없을 수 있다.
또한, 일반적으로 개인이 답변해야하는 필수 질문을 포함하거나 답변 되지 않은 질문의 경우 다른 대체 질문을 제공하지 않는다.
또한, 일률적 접근 방식을 사용하는 사용자 경험 평가로 인해 UX 전문가가 관련 질문이 사용자와 관련된 특정 컨텍스트 또는 기타 기능과 어떻게 연결 되어야하는지 지정하지 못할 수 있다.
또한, 설문 항목이 명확 하더라도 대부분의 설문에 참가하는 사용자는 정직하고 정확한 성찰에 참여하는 데 어려움을 겪고, 이에 따라서 사용자는 진정한 감정, 능력 및 경험을 충실하게 표현하지 않을 수 도 있다.
즉, 기존의 사용성 테스트는 특정 자극에 대한 특정 사용자의 인식, 느낌 및 감정을 결정하기 위해 일률적인 설문지 접근 방식을 통해 유도된 응답을 사용하는 데 중점을 두고 있는데, 일률적인 설문지는 사용자의 감정을 파악한다고 해서 이러한 감정적 반응이 제품에 대한 진정한 사용자 경험인지 연관성을 갖기 어렵다.
또한, 사용자의 현재 상황을 감지하기 어려워서 사용자 경험에 따른 문제 및 사용자 기분과 관련된 질문을 제시하기는 매우 어려운 실정이다.
미국등록특허 제9582484호 "Methods and systems for filling forms" 한국공개특허 제10-2019-0007283호 "사람이 로봇을 접할 때의 반응을 수집하는 장치 및 그 방법" 미국등록특허 제8195749호 "Questionnaire server capable of providing questionnaires based on device capabilities" 한국공개특허 제10-2019-0098781호 "사용자 행동을 바탕으로 반응하는 로봇 및 그의 제어 방법"
본 발명은 사용자가 상호 작용하는 제품, 시스템 또는 서비스와의 상호 작용에 따른 감정, 문제 및 행동을 통해 인식된 현재 상황(context)를 고려하여 적응형 설문지를 생성하는 것을 목적으로 한다.
본 발명은 현재 상황(context)를 고려하여 추론된 질문들을 선택하여 형성된 적응형 설문지에 기반하여 수집된 피드백 데이터를 통해 사용자 경험(user experience)를 측정하는 것을 목적으로 한다.
본 발명은 평가 대상인 디지털 제품과의 상호작용 중 발생하는 문제에 관한 구체적인 질문을 함으로써 사용자의 주관적인 사용자 경험을 측정하고, 측정된 사용자 경험에 기반하여 평가 대상에 대한 만족도를 증가시키는 것을 목적으로 한다.
본 발명의 일실시예에 따른 적응형 설문 생성 장치는 사용자가 특정 업무를 수행하는 동안에 상기 특정 업무와 관련된 적어도 하나의 상호 작용 정보를 사용자 관찰 데이터로 수집하는 사용자 추적부, 상기 수집된 사용자 관찰 데이터로부터 사용자의 감정, 행동 및 문제 중 적어도 하나의 인식 대상 정보를 인식하는 인식부 및 상기 인식된 적어도 하나의 인식 대상 정보에 기반하여 사용자의 현재 상황을 확인하고, 상기 확인된 현재 상황 및 상기 사용자 관찰 데이터에 기반하여 추론된 질문들을 추천하고, 상기 사용자에게 상기 추천된 질문들에 기반하여 생성된 설문지를 제공하는 설문지 생성부를 포함할 수 있다.
상기 사용자 추적부는 상기 사용자로부터 상기 제공된 설문지와 관련된 피드백 데이터를 수집하고, 상기 수집된 피드백 데이터에 기반하여 사용자 경험(User Experience, UX)을 측정할 수 있다.
상기 특정 업무는 사용자 경험(User Experience, UX)과 관련된 제품 평가와 관련하여 웹사이트(website), 데스크탑(desktop) 및 모바일 어플리케이션(mobile application) 중 적어도 하나의 디지털 제품을 사용하는 업무를 포함할 수 있다.
상기 사용자 추적부는 카메라를 이용하여 상기 사용자가 특정 업무를 수행하는 동안에 사용자의 행동 및 정서적 반응 중 적어도 하나의 상호 작용 정보를 수집할 수 있다.
상기 인식부는 상기 행동 및 상기 정서적 반응에 기반하여 두려움, 행복, 슬픔, 놀라움, 분노 및 혐오감 중 적어도 하나를 상기 감정으로 인식하고, 상기 인식된 감정과 상기 행동에 기반하여 상기 문제를 인식할 수 있다.
상기 사용자 추적부는 상기 사용자가 시청 중인 콘텐츠(content), 상기 콘텐츠(content)를 시청하기 위한 이벤트, 클릭 및 스크롤과 같은 제어 동작, 오류 발생 빈도 및 상기 콘텐츠(content)를 시청한 시간 중 적어도 하나와 관련된 상기 특정 업무의 수행 결과를 추적하여 상기 적어도 하나의 상호 작용 정보를 수집할 수 있다.
상기 설문지 생성부는 기 설정된 우선 순위에 기반하여 상기 추론된 질문들을 추천하고, 상기 추천된 질문들로 구성된 질문 세트를 생성하고, 기 설정된 검증 기준에 따라 상기 생성된 질문 세트를 검증할 수 있다.
본 발명의 일실시예에 따르면 적응형 설문 생성 장치는 상기 제공된 설문지와 관련된 피드백 데이터, 상기 특정 업무와 관련된 사용자 세션 로그 데이터, 상기 생성된 설문지, 상기 사용자 관찰 데이터에 기반하여 추론된 질문들을 추천하기 위한 지식 데이터를 저장하는 데이터 저장부를 더 포함할 수 있다.
본 발명의 일실시예에 따른 적응형 설문 생성 방법은 사용자 추적부에서, 사용자가 특정 업무를 수행하는 동안에 상기 특정 업무와 관련된 적어도 하나의 상호 작용 정보를 사용자 관찰 데이터로 수집하는 단계, 인식부에서, 상기 수집된 사용자 관찰 데이터로부터 사용자의 감정, 행동 및 문제 중 적어도 하나의 인식 대상 정보를 인식하는 단계, 설문지 생성부에서, 상기 인식된 적어도 하나의 인식 대상 정보에 기반하여 사용자의 현재 상황을 확인하는 단계, 상기 설문지 생성부에서, 상기 확인된 현재 상황 및 상기 사용자 관찰 데이터에 기반하여 추론된 질문들을 추천하는 단계 및 상기 설문지 생성부에서, 상기 사용자에게 상기 추천된 질문들에 기반하여 생성된 설문지를 제공하는 단계를 포함할 수 있다.
본 발명의 일실시예에 따르면 적응형 설문 생성 방법은 상기 사용자 추적부에서, 상기 사용자로부터 상기 제공된 설문지와 관련된 피드백 데이터를 수집하고, 상기 수집된 피드백 데이터에 기반하여 사용자 경험(User Experience, UX)을 측정하는 단계를 더 포함할 수 있다.
본 발명은 사용자가 상호 작용하는 제품, 시스템 또는 서비스와의 상호 작용에 따른 감정, 문제 및 행동을 통해 인식된 현재 상황(context)를 고려하여 적응형 설문지를 생성할 수 있다.
본 발명은 현재 상황(context)를 고려하여 추론된 질문들을 선택하여 형성된 적응형 설문지에 기반하여 수집된 피드백 데이터를 통해 사용자 경험(user experience)를 측정할 수 있다.
본 발명은 평가 대상인 디지털 제품과의 상호작용 중 발생하는 문제에 관한 구체적인 질문을 함으로써 사용자의 주관적인 사용자 경험을 측정하고, 측정된 사용자 경험에 기반하여 평가 대상에 대한 만족도를 증가시킬 수 있다.
도 1은 본 발명의 일실시예에 따른 적응형 설문 생성 장치의 구성 요소를 설명하는 도면이다.
도 2는 본 발명의 일실시예에 따른 적응형 설문 생성 방법을 설명하는 도면이다.
도 3은 본 발명의 일실시예에 따른 사용자 추적부의 사용자 관찰 데이터 수집 환경을 설명하는 도면이다.
본 명세서에 개시되어 있는 본 발명의 개념에 따른 실시예들에 대해서 특정한 구조적 또는 기능적 설명들은 단지 본 발명의 개념에 따른 실시예들을 설명하기 위한 목적으로 예시된 것으로서, 본 발명의 개념에 따른 실시예들은 다양한 형태로 실시될 수 있으며 본 명세서에 설명된 실시예들에 한정되지 않는다.
본 발명의 개념에 따른 실시예들은 다양한 변경들을 가할 수 있고 여러 가지 형태들을 가질 수 있으므로 실시예들을 도면에 예시하고 본 명세서에 상세하게 설명하고자 한다. 그러나, 이는 본 발명의 개념에 따른 실시예들을 특정한 개시형태들에 대해 한정하려는 것이 아니며, 본 발명의 사상 및 기술 범위에 포함되는 변경, 균등물, 또는 대체물을 포함한다.
제1 또는 제2 등의 용어를 다양한 구성요소들을 설명하는데 사용될 수 있지만, 상기 구성요소들은 상기 용어들에 의해 한정되어서는 안 된다. 상기 용어들은 하나의 구성요소를 다른 구성요소로부터 구별하는 목적으로만, 예를 들어 본 발명의 개념에 따른 권리 범위로부터 이탈되지 않은 채, 제1 구성요소는 제2 구성요소로 명명될 수 있고, 유사하게 제2 구성요소는 제1 구성요소로도 명명될 수 있다.
어떤 구성요소가 다른 구성요소에 "연결되어" 있다거나 "접속되어" 있다고 언급된 때에는, 그 다른 구성요소에 직접적으로 연결되어 있거나 또는 접속되어 있을 수도 있지만, 중간에 다른 구성요소가 존재할 수도 있다고 이해되어야 할 것이다. 반면에, 어떤 구성요소가 다른 구성요소에 "직접 연결되어" 있다거나 "직접 접속되어" 있다고 언급된 때에는, 중간에 다른 구성요소가 존재하지 않는 것으로 이해되어야 할 것이다. 구성요소들 간의 관계를 설명하는 표현들, 예를 들어 "~사이에"와 "바로~사이에" 또는 "~에 직접 이웃하는" 등도 마찬가지로 해석되어야 한다.
본 명세서에서 사용한 용어는 단지 특정한 실시예들을 설명하기 위해 사용된 것으로, 본 발명을 한정하려는 의도가 아니다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다. 본 명세서에서, "포함하다" 또는 "가지다" 등의 용어는 설시된 특징, 숫자, 단계, 동작, 구성요소, 부분품 또는 이들을 조합한 것이 존재함으로 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부분품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.
다르게 정의되지 않는 한, 기술적이거나 과학적인 용어를 포함해서 여기서 사용되는 모든 용어들은 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 것과 동일한 의미를 가진다. 일반적으로 사용되는 사전에 정의되어 있는 것과 같은 용어들은 관련 기술의 문맥상 가지는 의미와 일치하는 의미를 갖는 것으로 해석되어야 하며, 본 명세서에서 명백하게 정의하지 않는 한, 이상적이거나 과도하게 형식적인 의미로 해석되지 않는다.
이하, 실시예들을 첨부된 도면을 참조하여 상세하게 설명한다. 그러나, 특허출원의 범위가 이러한 실시예들에 의해 제한되거나 한정되는 것은 아니다. 각 도면에 제시된 동일한 참조 부호는 동일한 부재를 나타낸다.
도 1은 본 발명의 일실시예에 따른 적응형 설문 생성 장치의 구성 요소를 설명하는 도면이다.
도 1을 참고하면, 본 발명의 일실시예에 따른 적응형 설문 생성 장치(100)는 사용자 추적부(110), 데이터 저장부(120), 인식부(130) 및 설문지 생성부(140)를 포함한다.
본 발명의 일실시예에 따르면 사용자 추적부(110)는 데이터 획득 및 동기화부(111)를 포함한다.
일례로, 데이터 획득 및 동기화부(111)는 멀티 모달 데이터(multimodal data)를 획득하고, 획득된 멀티 모달 데이터를 동기화할 수 있다.
일례로, 사용자 추적부(110)는 사용자가 특정 업무를 수행하는 동안에 특정 업무와 관련된 적어도 하나의 상호 작용 정보를 사용자 관찰 데이터로 수집할 수 있다.
예를 들어, 특정 업무는 사용자 경험(User Experience, UX)과 관련된 제품 평가와 관련하여 웹사이트(website), 데스크탑(desktop) 및 모바일 어플리케이션(mobile application) 중 적어도 하나의 디지털 제품을 사용하는 업무를 포함할 수 있다.
본 발명의 일실시예에 따르면 사용자 추적부(110)는 사용자가 제품, 시스템, 서비스를 사용하는 동안 사용자 상호 작용 데이터를 수집한다.
예를 들어, 사용자 추적부(110)는 페이지, 화면, 이벤트, 사용자 타이밍, 교차 도메인 추적, 작업, 충돌, 예외 및 맞춤 측정 기준과 같은 일반적인 사용자 상호 작용을 추적할 수 있다.
또한, 사용자 추적부(110)는 카메라를 이용하여 사용자가 특정 업무를 수행하는 동안에 사용자의 행동 및 정서적 반응 중 적어도 하나의 상호 작용 정보를 수집할 수 있다.
본 발명의 일실시예에 따라 사용자 추적부(110)가 상호 작용 중 사용자를 추적함에 따라 사용자가 제품을 얼마나 잘 사용하고 있는지 알 수 있는 사용자 관찰 데이터를 수집할 수 있다.
즉, 사용자 추적부(110)는 사용자가 시청 중인 콘텐츠(content), 콘텐츠(content)를 시청하기 위한 이벤트, 클릭 및 스크롤과 같은 제어 동작, 오류 발생 빈도 및 콘텐츠(content)를 시청한 시간 중 적어도 하나와 관련된 특정 업무의 수행 결과를 추적하여 적어도 하나의 상호 작용 정보를 수집할 수 있다.
예를 들어, 사용자 관찰 데이터는 특정 사용성 문제의 규모를 추정하는 데 유용하고, 사용자가 많은 오류를 범하는 경우 개선의 기회를 제공할 수 있다.
또한, 사용자 추적부(110)는 사용자로부터 설문지 생성부(140)에서 제공된 설문지와 관련된 피드백 데이터를 수집하고, 수집된 피드백 데이터에 기반하여 사용자 경험(User Experience, UX)을 측정할 수 있다.
따라서, 본 발명은 현재 상황(context)를 고려하여 추론된 질문들을 선택하여 형성된 적응형 설문지에 기반하여 수집된 피드백 데이터를 통해 사용자 경험(user experience)를 측정할 수 있다.
본 발명의 일실시예에 따르면 데이터 저장부(120)는 피드백 저장부(121), 사용자 세션 로그 저장부(122), 설문지 저장부(123) 및 지식 저장부(124)를 포함한다.
일례로, 데이터 저장부(120)는 제공된 설문지와 관련된 피드백 데이터, 특정 업무와 관련된 사용자 세션 로그 데이터, 생성된 설문지, 사용자 관찰 데이터에 기반하여 추론된 질문들을 추천하기 위한 지식 데이터를 저장할 수 있다.
본 발명의 일실시예에 따르면 데이터 저장부(120)는 사용자 추적부(106)를 사용하여 사용자로부터 수집된 사용자 관찰 데이터를 유지한다.
일례로, 데이터 저장부(120)는 실시간 데이터 수집 및 이기종 데이터 소스에서 얻은 동기화 및 데이터 특성에 따라 레이블을 할당하고 유지한다.
예를 들어, 피드백 저장부(121), 사용자 세션 로그 저장부(122), 설문지 저장부(123) 및 지식 저장부(124)에 저장된 데이터는 사용자 경험 대응 매트릭스를 확인하는데 활용될 수 있다.
본 발명의 일실시예에 따르면 인식부(130)는 사용자가 특정 업무에 대하여 상호 작용을 하는 동안 감정과 행동 그리고 문제를 인식하기 위해 감정 인식부(131) 및 사용자 행동 및 문제 인식부(132)를 포함한다.
일례로, 인식부(130)는 사용자 관찰 데이터로부터 사용자의 감정, 행동 및 문제 중 적어도 하나의 인식 대상 정보를 인식할 수 있다.
즉, 인식부(130)는 행동 및 상기 정서적 반응에 기반하여 두려움, 행복, 슬픔, 놀라움, 분노 및 혐오감 중 적어도 하나를 감정으로 인식하고, 인식된 감정과 행동에 기반하여 문제를 인식할 수 있다.
구체적으로, 감정 인식부(131)는 카메라로부터 캡처 된 얼굴 및 골격 데이터를 사용하여 감정을 인식하기 위해 기계 학습 접근 방식을 사용한다.
예를 들어, 감정 인식부(131)는 자동 비디오 기반 감정 분석은 두려움, 행복, 슬픔, 놀라움, 분노, 혐오감, 중립성 등과 같은 인간의 감정적 반응에 대한 더 깊은 통찰력을 얻는 데 중요한 역할을 수행한다.
또한, 감정 인식부(131)는 비언어적 제스처는 의사 소통 과정에서 중요한 역할을 하고, 컴퓨팅 시스템과 상호 작용하는 동안 자신의 경험에 대한 중요한 통찰력을 제공 할 수 있다.
일례로, 사용자 행동 및 문제 인식부(132)는 사용자가 직면 할 수 있는 문제를 감지하기 위해 사용자 모델 정보를 저장하고, 행동 및 문제 사이의 개념적 연관성에 따른 규칙 측면에서 지식 기반을 만드는 동안 발생할 수 있는 문제와 사용자 행동 사이에서 탐색, 프레젠테이션, 서비스 및 품질 중 적어도 하나와 관련된 문제를 결정할 수 있다.
본 발명의 일실시예에 따르면 설문지 생성부(140)는 상황 확인부(141), 질문 추론부(142), 질문 선택부(143) 및 질문 제공부(144)를 포함한다.
일례로, 설문지 생성부(140)는 인식부(130)에 의해 인식된 적어도 하나의 인식 대상 정보에 기반하여 사용자의 현재 상황을 확인하고, 확인된 현재 상황 및 사용자 관찰 데이터에 기반하여 추론된 질문들을 추천하고, 사용자에게 추천된 질문들에 기반하여 생성된 설문지를 제공할 수 있다.
구체적으로, 상황 확인부(141)는 현재 상황을 확인하기 위해 인식부(130)에 의해 인식된 적어도 하나의 인식 대상 정보를 사용하여 사용자의 현재 상황을 확인한다.
또한, 질문 추론부(142)는 현재 상황 및 사용자 관찰 데이터에 기반하여 정량화된 감정 및 문제를 입력 데이터로 현재 상황에 따른 질문들을 추론한다.
또한, 질문 선택부(143)는 질문 추론부(142)에 의해 추론 및 추천된 질문들로부터 상위 순위 질문을 선택한다.
즉, 설문지 생성부(140)는 기 설정된 우선 순위에 기반하여 추론된 질문들을 추천하고, 추천된 질문들로 구성된 질문 세트를 생성하고, 기 설정된 검증 기준에 따라 생성된 질문 세트를 검증할 수 있다.
다시 말해, 질문 선택부(143)는 기 설정된 우선 순위에 기반하여 질문들 중 상위 순위 질문을 선택한다. 여기서, 기 설정된 우선 순위는 사용자 경험에 대한 전문가가 정의할 수 있다.
또한, 질문 선택부(143)는 설문지 저장부(123)에 선택된 질문 세트를 저장하고, 기 설정된 검증 기준에 따라 생성된 질문 세트를 검증할 수 있다.
본 발명의 일실시예에 따르면 질문 제공부(144)는 사용자에게 제시될 선택된 질문 세트를 보고 피드백 데이터를 수집하도록 설계된다.
질문 제공부(144)는 사용자 컴퓨팅 장치 상의 그래픽 사용자 인터페이스 (GUI)상에서 선택된 질문 세트를 렌더링한다.
또한, 질문 제공부(144)는 개방형 및 폐쇄 형으로 구성된 모든 유형의 질문을 렌더링할 수 있고, 제시된 질문에 대한 사용자 답변을 수집하고 추가 분석을 위해 피드백 저장부(121)에 저장하는 역할도 수행할 수 있다.
따라서, 본 발명은 사용자가 상호 작용하는 제품, 시스템 또는 서비스와의 상호 작용에 따른 감정, 문제 및 행동을 통해 인식된 현재 상황(context)를 고려하여 적응형 설문지를 생성할 수 있다.
도 2는 본 발명의 일실시예에 따른 적응형 설문 생성 방법을 설명하는 도면이다.
도 2를 참고하면, 본 발명의 일실시예에 따른 적응형 설문 생성 방법은 단계(201)에서 사용자 관찰 데이터를 추적 및 수집한다.
즉, 본 발명의 일실시예에 따른 적응형 설문 생성 방법은 사용자가 특정 업무를 수행하는 동안에 특정 업무와 관련된 적어도 하나의 상호 작용 정보를 사용자 관찰 데이터로 수집할 수 있다.
단계(202)에서 본 발명의 일실시예에 따른 적응형 설문 생성 방법은 사용자의 문제 및 기분(mood)를 식별하여 현재 상황(context)를 확인한다.
즉, 본 발명의 일실시예에 따른 적응형 설문 생성 방법은 수집된 사용자 관찰 데이터로부터 사용자의 감정, 행동 및 문제 중 적어도 하나의 인식 대상 정보를 인식하고, 인식된 적어도 하나의 인식 대상 정보에 기반하여 사용자의 현재 상황을 확인할 수 있다.
단계(203)에서 본 발명의 일실시예에 따른 적응형 설문 생성 방법은 현재 상황 및 사용자 관찰 데이터에 기반하여 추론된 질문들을 추천한다.
즉, 본 발명의 일실시예에 따른 적응형 설문 생성 방법은 단계(202)에서 확인된 현재 상황 및 단계(201)에서 수집된 사용자 관찰 데이터에 기반하여 질문들을 추론하고, 기설정된 우선 순위에 기반하여 추론된 질문들을 추천한다.
단계(204)에서 본 발명의 일실시예에 따른 적응형 설문 생성 방법은 추천된 질문들에 기반하여 설문지를 생성한다.
즉, 본 발명의 일실시예에 따른 적응형 설문 생성 방법은 사용자에게 상기 추천된 질문들 중 특정 질문들을 선택하여 질문 세트를 생성하고, 생성된 질문 세트를 포함하여 생성된 설문지를 제공한다.
단계(205)에서 본 발명의 일실시예에 따른 적응형 설문 생성 방법은 사용자에게 설문지를 제공하여 사용자 경험 관련된 피드백 데이터를 수집한다.
즉, 본 발명의 일실시예에 따른 적응형 설문 생성 방법은 수집된 피드백 데이터에 기반하여 사용자 경험(User Experience, UX)을 측정하기 위하여 사용자로부터 설문지와 관련된 피드백 데이터를 수집할 수 있다.
예를 들어, 적응형 설문 생성 방법은 사용자 관찰 데이터를 사용자가 대상 애플리케이션, 제품 또는 서비스를 사용할 때마다 사용자 컴퓨팅 장치에서 추적 및 수집하고, 멀티 모달 데이터를 시스템, 제품 또는 서비스를 사용하는 동안 감정 및 문제를 인식하기 위해 인식부로 라우팅하기 전에 레이블링한다.
예를 들어, 수집된 피드백 데이터는 사용자 경험 전문가에 의해 해당 제품의 개선 영역을 평가하기 위해 검증된 후 제품의 개발팀으로 전달될 수 있다.
또한, 적응형 설문 생성 방법은 사용자 상호 작용 추적, 감정 및 행동을 인식을 혼합 해석함에 따라 사용자 경험을 측정하기 위한 삼각 측량을 통해 보자 정확한 사용자 경험을 측정할 수 있다.
따라서, 본 발명은 평가 대상인 디지털 제품과의 상호작용 중 발생하는 문제에 관한 구체적인 질문을 함으로써 사용자의 주관적인 사용자 경험을 측정하고, 측정된 사용자 경험에 기반하여 평가 대상에 대한 만족도를 증가시킬 수 있다.
본 발명의 일실시예에 따르면 적응형 설문 생성 방법은 인터랙티브 시스템을 이용하면서 현재 상황을 기반으로 주관적 사용자 경험 (user experience, UX)을 측정하기위한 적응적이고 최적의 설문지를 생성할 수 있다.
감각 자극 경험을 제공하고 해당 사용자의 참여 수준과 프레젠테이션 또는 대화 형 경험의 영향을 결정하는 대화 형 시스템을 사용하는 동안 프레젠테이션 또는 상호 작용에 대한 사용자의 반응일 수 있다.
특히, 적응형 설문 생성 방법은 사용자가 직면한 문제 및 자극과 상호 작용하는 동안의 정서적 반응을 기반으로 최적의 설문지를 사용하여 사용자로부터 실시간 피드백을 수집하고, 서로 다른 센서를 사용하는 사용자 상호 작용을 추적하여, 감정 및 인식을 모두 고려한 혼합적 접근 방식에 따라 사용자를 추적한다.
여기서, 혼합 방법에 따라 인식된 사용자 상태와 규칙을 활용하여 질문 대상인 사용자에게 질문할 특정 질문할 시 추론 엔진을 사용한다.
즉, 적응형 설문 생성 방법은 수집된 생체 인식 무의식 응답으로 명시된 답변을 삼각 측량할 수 있다.
도 3은 본 발명의 일실시예에 따른 사용자 추적부의 사용자 관찰 데이터 수집 환경을 설명하는 도면이다.
도 3을 참고하면, 본 발명의 일실시예에 따르면 사용자 관찰 데이터 수집 환경(300)은 사용자(310) 및 사용자를 촬영하기 위한 카메라(320)와 사용자가 적응형 설문지에 대응하기 위한 컴퓨터로 구성된다.
일례로, 사용자 관찰 데이터 수집 환경(300)에서 사용자(310)는 컴퓨터 앞에 앉아서 컴퓨터를 이용하여 컨텐츠를 관람하거나 특정 업무를 수행하기 위한 이벤트, 클릭, 및 스크롤 등의 제어 동작을 수행하고 있으며, 카메라(320)는 사용자의 얼굴을 캡쳐하여 얼굴 및 골격 데이터를 수집하고, 수집된 데이터는 사용자의 감정을 인식하는 정보로 이용될 수 있다.
예를 들어, 사용자 관찰 데이터 수집 환경(300)에서 수집된 사용자 관찰 데이터는 멀티 모달 데이터로 지칭될 수 있다.
예를 들어, 적응형 설문 생성 장치는 사용자 관찰 데이터 수집 환경(300)에 따라 사용자가 평가 대상 시스템과 상호 작용하는 동안 시스템 사용 동작을 자동으로 추적할 수 있고, 각 이벤트 및 작업과 관련된 사용자 감성 반응을 수집할 수 있다.
또한, 적응형 설문 생성 장치는 사용자 관찰 데이터 수집 환경(300)에 따라 상호작용 중에 발생하는 문제와 관련된 질문이 있는 적응형 설문을 생성할 수 있다.
한편, 적응형 설문 생성 장치는 관찰 데이터 수집 환경(300)에 기반하여 사용자의 사후작업 수행에 근거하여 사용자로부터 피드백을 제공하는 방법 및 사용자 인식과 감정 경험의 암묵적 측정 검증할 수 있다.
이상에서 설명된 장치는 하드웨어 구성요소, 소프트웨어 구성요소, 및/또는 하드웨어 구성요소 및 소프트웨어 구성요소의 조합으로 구현될 수 있다. 예를 들어, 실시예들에서 설명된 장치 및 구성요소는, 예를 들어, 프로세서, 콘트롤러, ALU(arithmetic logic unit), 디지털 신호 프로세서(digital signal processor), 마이크로컴퓨터, FPA(field programmable array), PLU(programmable logic unit), 마이크로프로세서, 또는 명령(instruction)을 실행하고 응답할 수 있는 다른 어떠한 장치와 같이, 하나 이상의 범용 컴퓨터 또는 특수 목적 컴퓨터를 이용하여 구현될 수 있다. 처리 장치는 운영 체제(OS) 및 상기 운영 체제 상에서 수행되는 하나 이상의 소프트웨어 애플리케이션을 수행할 수 있다. 또한, 처리 장치는 소프트웨어의 실행에 응답하여, 데이터를 접근, 저장, 조작, 처리 및 생성할 수도 있다. 이해의 편의를 위하여, 처리 장치는 하나가 사용되는 것으로 설명된 경우도 있지만, 해당 기술분야에서 통상의 지식을 가진 자는, 처리 장치가 복수 개의 처리 요소(processing element) 및/또는 복수 유형의 처리 요소를 포함할 수 있음을 알 수 있다. 예를 들어, 처리 장치는 복수 개의 프로세서 또는 하나의 프로세서 및 하나의 콘트롤러를 포함할 수 있다. 또한, 병렬 프로세서(parallel processor)와 같은, 다른 처리 구성(processing configuration)도 가능하다.
실시예에 따른 방법은 다양한 컴퓨터 수단을 통하여 수행될 수 있는 프로그램 명령 형태로 구현되어 컴퓨터 판독 가능 매체에 기록될 수 있다. 상기 컴퓨터 판독 가능 매체는 프로그램 명령, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 상기 매체에 기록되는 프로그램 명령은 실시예를 위하여 특별히 설계되고 구성된 것들이거나 컴퓨터 소프트웨어 당업자에게 공지되어 사용 가능한 것일 수도 있다. 컴퓨터 판독 가능 기록 매체의 예에는 하드 디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체(magnetic media), CD-ROM, DVD와 같은 광기록 매체(optical media), 플롭티컬 디스크(floptical disk)와 같은 자기-광 매체(magneto-optical media), 및 롬(ROM), 램(RAM), 플래시 메모리 등과 같은 프로그램 명령을 저장하고 수행하도록 특별히 구성된 하드웨어 장치가 포함된다. 프로그램 명령의 예에는 컴파일러에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용해서 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드를 포함한다. 상기된 하드웨어 장치는 실시예의 동작을 수행하기 위해 하나 이상의 소프트웨어 모듈로서 작동하도록 구성될 수 있으며, 그 역도 마찬가지이다.
소프트웨어는 컴퓨터 프로그램(computer program), 코드(code), 명령(instruction), 또는 이들 중 하나 이상의 조합을 포함할 수 있으며, 원하는 대로 동작하도록 처리 장치를 구성하거나 독립적으로 또는 결합적으로(collectively) 처리 장치를 명령할 수 있다. 소프트웨어 및/또는 데이터는, 처리 장치에 의하여 해석되거나 처리 장치에 명령 또는 데이터를 제공하기 위하여, 어떤 유형의 기계, 구성요소(component), 물리적 장치, 가상 장치(virtual equipment), 컴퓨터 저장 매체 또는 장치, 또는 전송되는 신호 파(signal wave)에 영구적으로, 또는 일시적으로 구체화(embody)될 수 있다. 소프트웨어는 네트워크로 연결된 컴퓨터 시스템 상에 분산되어서, 분산된 방법으로 저장되거나 실행될 수도 있다. 소프트웨어 및 데이터는 하나 이상의 컴퓨터 판독 가능 기록 매체에 저장될 수 있다.
이상과 같이 실시예들이 비록 한정된 도면에 의해 설명되었으나, 해당 기술분야에서 통상의 지식을 가진 자라면 상기의 기재로부터 다양한 수정 및 변형이 가능하다. 예를 들어, 설명된 기술들이 설명된 방법과 다른 순서로 수행되거나, 및/또는 설명된 시스템, 구조, 장치, 회로 등의 구성요소들이 설명된 방법과 다른 형태로 결합 또는 조합되거나, 다른 구성요소 또는 균등물에 의하여 대치되거나 치환되더라도 적절한 결과가 달성될 수 있다.
그러므로, 다른 구현들, 다른 실시예들 및 특허청구범위와 균등한 것들도 후술하는 특허청구범위의 범위에 속한다.
100: 적응형 설문 생성 장치
110: 사용자 추적부 120: 데이터 저장부
130: 인식부 140: 설문지 생성부

Claims (10)

  1. 사용자가 시청 중인 콘텐츠(content), 상기 콘텐츠(content)를 시청하기 위한 이벤트, 클릭 및 스크롤 중 적어도 하나의 제어 동작, 상기 제어 동작에 따른 오류 발생 빈도 및 상기 콘텐츠(content)를 시청한 시간과 관련된 특정 업무를 수행하는 동안에 상기 특정 업무의 수행 결과를 추적하여 상기 특정 업무와 관련된 적어도 하나의 상호 작용 정보를 사용자 관찰 데이터로 수집하는 사용자 추적부;
    상기 수집된 사용자 관찰 데이터로부터 사용자의 감정, 행동 및 문제 중 적어도 하나의 인식 대상 정보를 인식하되, 사용성의 문제 규모를 추정하고, 상기 사용자가 범하는 오류 빈도를 인식하는 인식부; 및
    상기 인식된 적어도 하나의 인식 대상 정보, 상기 사용성의 문제 규모 및 상기 사용자가 범하는 오류 빈도에 기반하여 사용자의 현재 상황을 확인하고, 상기 확인된 현재 상황 및 상기 사용자 관찰 데이터에 기반하여 상기 적어도 하나의 상호 작용 정보 및 상기 적어도 하나의 인식 대상 정보를 혼합 해석함에 따라 상호 작용 추적, 감정 인식 및 행동 인식의 삼각 측량을 통해 추론된 질문들을 추천하고, 상기 사용자에게 상기 추천된 질문들에 기반하여 생성된 설문지를 제공하는 설문지 생성부를 포함하고,
    상기 사용자 추적부는 상기 사용자로부터 상기 제공된 설문지와 관련된 피드백 데이터를 수집하고, 상기 수집된 피드백 데이터에 기반하여 상기 사용자의 주관적인 사용자 경험(User Experience, UX)을 측정하고,
    상기 특정 업무는 상기 주관적인 사용자 경험(User Experience, UX)과 관련된 제품 평가와 관련하여 웹사이트(website), 데스크탑(desktop) 및 모바일 어플리케이션(mobile application) 중 적어도 하나의 디지털 제품을 사용하는 업무를 포함하는 것을 특징으로 하는
    적응형 설문 생성 장치.
  2. 삭제
  3. 삭제
  4. 제1항에 있어서,
    상기 사용자 추적부는 카메라를 이용하여 상기 사용자가 특정 업무를 수행하는 동안에 사용자의 행동 및 정서적 반응 중 적어도 하나의 상호 작용 정보를 수집하는 것을 특징으로 하는
    적응형 설문 생성 장치.
  5. 제4항에 있어서,
    상기 인식부는 상기 행동 및 상기 정서적 반응에 기반하여 두려움, 행복, 슬픔, 놀라움, 분노 및 혐오감 중 적어도 하나를 상기 감정으로 인식하고, 상기 인식된 감정과 상기 행동에 기반하여 상기 문제를 인식하는 것을 특징으로 하는
    적응형 설문 생성 장치.
  6. 삭제
  7. 제1항에 있어서,
    상기 설문지 생성부는 기 설정된 우선 순위에 기반하여 상기 추론된 질문들을 추천하고, 상기 추천된 질문들로 구성된 질문 세트를 생성하고, 기 설정된 검증 기준에 따라 상기 생성된 질문 세트를 검증하는 것을 특징으로 하는
    적응형 설문 생성 장치.
  8. 제1항에 있어서,
    상기 제공된 설문지와 관련된 피드백 데이터, 상기 특정 업무와 관련된 사용자 세션 로그 데이터, 상기 생성된 설문지, 상기 사용자 관찰 데이터에 기반하여 추론된 질문들을 추천하기 위한 지식 데이터를 저장하는 데이터 저장부를 더 포함하는 것을 특징으로 하는
    적응형 설문 생성 장치.
  9. 사용자 추적부에서, 사용자가 시청 중인 콘텐츠(content), 상기 콘텐츠(content)를 시청하기 위한 이벤트, 클릭 및 스크롤 중 적어도 하나의 제어 동작, 상기 제어 동작에 따른 오류 발생 빈도 및 상기 콘텐츠(content)를 시청한 시간과 관련된 특정 업무를 수행하는 동안에 상기 특정 업무의 수행 결과를 추적하여 상기 특정 업무와 관련된 적어도 하나의 상호 작용 정보를 사용자 관찰 데이터로 수집하는 단계;
    인식부에서, 상기 수집된 사용자 관찰 데이터로부터 사용자의 감정, 행동 및 문제 중 적어도 하나의 인식 대상 정보를 인식하되, 사용성의 문제 규모를 추정하고, 상기 사용자가 범하는 오류 빈도를 인식하는 단계;
    설문지 생성부에서, 상기 인식된 적어도 하나의 인식 대상 정보, 상기 사용성의 문제 규모 및 상기 사용자가 범하는 오류 빈도에 기반하여 사용자의 현재 상황을 확인하는 단계;
    상기 설문지 생성부에서, 상기 확인된 현재 상황 및 상기 사용자 관찰 데이터에 기반하여 상기 적어도 하나의 상호 작용 정보 및 상기 적어도 하나의 인식 대상 정보를 혼합 해석함에 따라 상호 작용 추적, 감정 인식 및 행동 인식의 삼각 측량을 통해 추론된 질문들을 추천하고, 상기 사용자에게 상기 추천된 질문들에 기반하여 생성된 설문지를 제공하는 단계;
    상기 설문지 생성부에서, 상기 사용자에게 상기 추천된 질문들에 기반하여 생성된 설문지를 제공하는 단계; 및
    상기 사용자 추적부에서, 상기 사용자로부터 상기 제공된 설문지와 관련된 피드백 데이터를 수집하고, 상기 수집된 피드백 데이터에 기반하여 상기 사용자의 주관적인 사용자 경험(User Experience, UX)을 측정하는 단계를 포함하고,
    상기 특정 업무는 상기 주관적인 사용자 경험(User Experience, UX)과 관련된 제품 평가와 관련하여 웹사이트(website), 데스크탑(desktop) 및 모바일 어플리케이션(mobile application) 중 적어도 하나의 디지털 제품을 사용하는 업무를 포함하는 것을 특징으로 하는
    적응형 설문 생성 방법.
  10. 삭제
KR1020200124935A 2020-09-25 2020-09-25 사용자 경험 측정을 위한 적응형 설문 생성 장치 및 방법 KR102459076B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020200124935A KR102459076B1 (ko) 2020-09-25 2020-09-25 사용자 경험 측정을 위한 적응형 설문 생성 장치 및 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020200124935A KR102459076B1 (ko) 2020-09-25 2020-09-25 사용자 경험 측정을 위한 적응형 설문 생성 장치 및 방법

Publications (2)

Publication Number Publication Date
KR20220041555A KR20220041555A (ko) 2022-04-01
KR102459076B1 true KR102459076B1 (ko) 2022-10-26

Family

ID=81183320

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020200124935A KR102459076B1 (ko) 2020-09-25 2020-09-25 사용자 경험 측정을 위한 적응형 설문 생성 장치 및 방법

Country Status (1)

Country Link
KR (1) KR102459076B1 (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2024111791A1 (ko) * 2022-11-25 2024-05-30 아주대학교 산학협력단 모바일 애플리케이션을 위한 사용자 경험 디자인을 제공하는 시스템

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20110125783A1 (en) * 2009-11-19 2011-05-26 Whale Peter Apparatus and method of adaptive questioning and recommending
BR112012030903A2 (pt) * 2010-06-07 2019-09-24 Affectiva Inc método imnplantado por computador para analisar estados mentais, produto de programa de computador e sistema para analisar estados mentais
US20170319122A1 (en) * 2014-11-11 2017-11-09 Global Stress Index Pty Ltd A system and a method for gnerating stress level and stress resilience level information for an individual
KR102363794B1 (ko) * 2017-03-31 2022-02-16 삼성전자주식회사 정보 제공 방법 및 이를 지원하는 전자 장치
KR20190007283A (ko) 2017-07-12 2019-01-22 한국전자통신연구원 사람이 로봇을 접할 때의 반응을 수집하는 장치 및 그 방법
KR102497042B1 (ko) 2018-01-29 2023-02-07 삼성전자주식회사 사용자 행동을 바탕으로 반응하는 로봇 및 그의 제어 방법

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2024111791A1 (ko) * 2022-11-25 2024-05-30 아주대학교 산학협력단 모바일 애플리케이션을 위한 사용자 경험 디자인을 제공하는 시스템

Also Published As

Publication number Publication date
KR20220041555A (ko) 2022-04-01

Similar Documents

Publication Publication Date Title
Sharma et al. Multimodal data capabilities for learning: What can multimodal data tell us about learning?
Alwashmi et al. The iterative convergent design for mobile health usability testing: mixed methods approach
Brown et al. Finding waldo: Learning about users from their interactions
US7797261B2 (en) Consultative system
Dumas et al. Usability testing: Current practice and future directions
Emerson et al. Early prediction of visitor engagement in science museums with multimodal learning analytics
US10546509B2 (en) Evaluating user contribution in collaborative environments
Marques et al. A vision for contextualized evaluation of remote collaboration supported by AR
WO2015191828A1 (en) Adaptive web analytic response environment
Perugia et al. I can see it in your eyes: Gaze as an implicit cue of uncanniness and task performance in repeated interactions with robots
KR102459076B1 (ko) 사용자 경험 측정을 위한 적응형 설문 생성 장치 및 방법
Barra et al. Automating mockup-based usability testing on the mobile device
Kim et al. Bubbleu: Exploring Augmented Reality Game Design with Uncertain AI-based Interaction
WO2024134621A1 (en) Systems and methods for assessing social skills in virtual reality
Federici et al. UX evaluation design of UTAssistant: a new usability testing support tool for Italian public administrations
Sutcliffe et al. ISRE: immersive scenario-based requirements engineering with virtual prototypes
CN111556993A (zh) 电子产品测试系统和方法
Mizuchi et al. Estimation of subjective evaluation of HRI performance based on objective behaviors of human and robots
US20080312985A1 (en) Computerized evaluation of user impressions of product artifacts
De Bruin Automated usability analysis and visualisation of eye tracking data
Kalpanadevi Building an optimal model of cognitive using klm and complexity theory in human computer interface
Sharma et al. Classification of graphical user interfaces through gaze-based features
Generosi et al. A Test Management System to Support Remote Usability Assessment of Web Applications. Information 2022, 13, 505
Biricz et al. User friendly virtual reality software development and testing
Nygren Analysing usability testing solutions for teacher-student interfaces

Legal Events

Date Code Title Description
AMND Amendment
E601 Decision to refuse application
X091 Application refused [patent]
AMND Amendment
X701 Decision to grant (after re-examination)