CN105204993A - 一种基于眼动、语音和触屏多模式交互的问卷测试系统和方法 - Google Patents

一种基于眼动、语音和触屏多模式交互的问卷测试系统和方法 Download PDF

Info

Publication number
CN105204993A
CN105204993A CN201510592951.7A CN201510592951A CN105204993A CN 105204993 A CN105204993 A CN 105204993A CN 201510592951 A CN201510592951 A CN 201510592951A CN 105204993 A CN105204993 A CN 105204993A
Authority
CN
China
Prior art keywords
questionnaire
eye
test
screen
touch screen
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201510592951.7A
Other languages
English (en)
Inventor
于洪强
王春慧
田雨
张恒
谭丽芬
李由
黄守鹏
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
China Astronaut Research and Training Center
Original Assignee
China Astronaut Research and Training Center
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by China Astronaut Research and Training Center filed Critical China Astronaut Research and Training Center
Priority to CN201510592951.7A priority Critical patent/CN105204993A/zh
Publication of CN105204993A publication Critical patent/CN105204993A/zh
Pending legal-status Critical Current

Links

Landscapes

  • User Interface Of Digital Computer (AREA)

Abstract

本发明属于计算机应用技术领域，特别涉及一种问卷测试系统和方法。一种基于眼动、语音和触屏多模式交互的问卷测试系统，包括：带内置问卷测试软件、具有触摸屏输入功能的计算机(1)，其特征是：还包括眼动采集装置(2)和语音输入装置(5)。本测试装置能够实现基于眼动、语音和触屏多模式交互的问卷测试，采用自然的交互方式收集被试的反馈，降低了被测试人员输入信息的难度，提高了问卷测试的有效性和准确性。本测试装置特别适用于一些被测试人员双手被占用的场合，增强了测试过程的连续性。本测试方法适用于手部有残疾的人群等特殊人群，扩大了问卷测试软件的适用范围。

Description

一种基于眼动、语音和触屏多模式交互的问卷测试系统和方法
技术领域
本发明属于计算机应用技术领域，特别涉及一种问卷测试系统和方法。
背景技术
问卷测试是社会学、心理学等研究中用来收集资料的一种方法。问卷测试既可以搜集人们对某个特定问题的态度、观点或价值观等信息，也可以检测人们的能力、行为和个性特质。传统的问卷最常用的载体是纸张，这种形式的问卷分析与统计结果比较繁琐，分发、收集、填写问卷的人工成本较高。随着计算机技术的兴起，软件成为了问卷的新载体。目前的问卷测试软件配合计算机、键盘和鼠标等信息处理装置可以方便地进行问卷的分发、测试、收集和结果的分析与统计。然而，现有的基于键盘和鼠标输入信息的方式并不是一种自然的交互方式，这会很大程度上影响被测试者的真实意愿，也容易引起误操作造成统计结果的偏差。例如，在一些主观问题和客观问题的“其它”选项等需要主动输入信息的问题中，被测试者常常碍于繁琐的键盘输入而简化回答或者逃避选择“其它”选项；在一些客观选择问题中，由于鼠标操作的准确性有限，被测试者也会出现所选非所想的误操作情况，并且不容易被察觉，这都会影响问卷测试的有效性和准确性。此外，在一些特殊场合中，被测试者双手被占用而无法进行键盘和鼠标反馈。例如，在模拟手控交会对接、模拟机械臂遥操作等重要的航天任务相关研究中，在任务进行中需要对操作者作业负荷、情境意识水平进行测量，其中的重要测试方式是问卷测试，任务中操作者双手分别放在两个操纵杆上，如果进行传统的问卷测试，往往需要暂停任务过程，让操作者双手离开操纵杆转向键盘和鼠标完成问卷测试，之后双手返回操纵杆后，再继续进行操作控制。整个过程冗杂不连续，强烈的间断感会影响操作者任务的完成，进而影响实验数据的有效性。另外，在面对一些特殊人群，例如手部有残疾的人群，现有的鼠标键盘或触屏交互方式的问卷测试无法开展。
发明内容
本发明的目的是：提供一种基于眼动、语音和触屏多模式交互的问卷测试系统和方法，满足被测试人员自然交互完成问卷测试的功能需求，以及满足特殊应用场合下对特殊人群的测试需求。
本发明的技术方案是：一种基于眼动、语音和触屏多模式交互的问卷测试系统，包括：带内置问卷测试软件、具有触摸屏输入功能的计算机(1)，其特征是：还包括眼动采集装置(2)和语音输入装置(5)；
所述眼动采集装置(2)通过固定装置(3)固定在所述计算机(1)上，通过USB连接线(4)与所述计算机(1)连接；
所述语音输入装置(5)带有底盘(6)，置于被测试人员与所述计算机(1)之间靠近被测试人员处，通过音频连接线(7)与所述计算机(1)连接。
一种基于眼动、语音和触屏多模式交互的问卷测试方法，它使用上述的基于眼动、语音和触屏多模式交互的问卷测试系统，并包括以下步骤：
A、被测试人员就位
被测试人员位于所述语音输入装置(5)前，正对所述计算机(1)的触摸屏，触屏点击打开问卷测试软件或集成有问卷测试软件的其他测试程序；
B、语音输入检测与眼动识别定标
B1、所述问卷测试软件在测试开始前进行语音输入检测，要求被测试人员语音输入屏幕显示的文字，连续进行2次检测，若2次语音输入都成功，则语音输入满足要求，进入B2步骤；否则，通过所述计算机(1)屏幕提示被测试人员检查语音输入装置(5)，并重复B1步骤；
B2、问卷测试软件实时接收所述眼动采集装置(2)的信号，在测试开始前进行眼动识别定标，令被测试者注视屏幕白色底色上的黑色圆点，注视点随黑色圆点移动，对分布在全屏幕各个部分的5个关键点定标完成后，进行眼动检测，要求被测试人员注视屏幕上随机位置依次出现的三个黑色圆点，若眼动采集装置(2)检测的三个注视点与实际显示注视点都相同，则进入C步骤；否则，重复B2步骤；
C、自动呈现测试条目以及自动记录被测试者反馈的答案
被测试者眼动注视实现点击功能，判断依据为：若注视一区域超过3秒钟，视为对该区域对应选项进行一次点击；与触屏交互具有同样的点击效果；被测试者用语音输入可取代键盘文字输入操作；
所述问卷测试软件依次呈现测试条目，实时接收所述眼动采集装置(2)采集的眼注视点信息，并判断是否进行点击操作；客观选择题目通过眼动注视或触屏交互的点击操作选择答案；主观作答题目在点击文字输入区域后，文字输入区域提示开始输入，此时通过所述语音输入装置(5)进行文字信息输入；其他一些诸如上一题、下一题、结束测试之类需要点击的功能按钮也通过眼动注视或触屏交互的点击操作激活相应按键功能。
本测试装置能够实现基于眼动、语音和触屏多模式交互的问卷测试，采用自然的交互方式收集被试的反馈，降低了被测试人员输入信息的难度，提高了问卷测试的有效性和准确性。本测试装置特别适用于一些被测试人员双手被占用的场合，增强了测试过程的连续性。本测试方法适用于手部有残疾的人群等特殊人群，扩大了问卷测试软件的适用范围。
附图说明
附图1为本测试系统的组成结构示意图；
附图2为本测试方法的流程图。
具体实施方式
实施例1：一种基于眼动、语音和触屏多模式交互的问卷测试系统，包括：带内置问卷测试软件、具有触摸屏输入功能的计算机(1)，其特征是：还包括眼动采集装置(2)和语音输入装置(5)；
所述眼动采集装置(2)通过固定装置(3)固定在所述计算机(1)上，通过USB连接线(4)与所述计算机(1)连接；
所述语音输入装置(5)带有底盘(6)，置于被测试人员与所述计算机(1)之间靠近被测试人员处，通过音频连接线(7)与所述计算机(1)连接。
实施例2：一种基于眼动、语音和触屏多模式交互的问卷测试方法，它使用如实施例1所述的基于眼动、语音和触屏多模式交互的问卷测试系统，并包括以下步骤：
A、被测试人员就位
被测试人员位于所述语音输入装置(5)前，正对所述计算机(1)的触摸屏，触屏点击打开问卷测试软件或集成有问卷测试软件的其他测试程序；
B、语音输入检测与眼动识别定标
B1、所述问卷测试软件在测试开始前进行语音输入检测，要求被测试人员语音输入屏幕显示的文字，连续进行2次检测，若2次语音输入都成功，则语音输入满足要求，进入B2步骤；否则，通过所述计算机(1)屏幕提示被测试人员检查语音输入装置(5)，并重复B1步骤；
B2、问卷测试软件实时接收所述眼动采集装置(2)的信号，在测试开始前进行眼动识别定标，令被测试者注视屏幕白色底色上的黑色圆点，注视点随黑色圆点移动，对分布在全屏幕各个部分的5个关键点定标完成后，进行眼动检测，要求被测试人员注视屏幕上随机位置依次出现的三个黑色圆点，若眼动采集装置(2)检测的三个注视点与实际显示注视点都相同，则进入C步骤；否则，重复B2步骤；
C、自动呈现测试条目以及自动记录被测试者反馈的答案
被测试者眼动注视实现点击功能，判断依据为：若注视一区域超过3秒钟，视为对该区域对应选项进行一次点击；与触屏交互具有同样的点击效果；被测试者用语音输入可取代键盘文字输入操作；
所述问卷测试软件依次呈现测试条目，实时接收所述眼动采集装置(2)采集的眼注视点信息，并判断是否进行点击操作；客观选择题目通过眼动注视或触屏交互的点击操作选择答案；主观作答题目在点击文字输入区域后，文字输入区域提示开始输入，此时通过所述语音输入装置(5)进行文字信息输入；其他一些诸如上一题、下一题、结束测试之类需要点击的功能按钮也通过眼动注视或触屏交互的点击操作激活相应按键功能。

Claims (2)

1.一种基于眼动、语音和触屏多模式交互的问卷测试系统，包括：带内置问卷测试软件、具有触摸屏输入功能的计算机(1)，其特征是：还包括眼动采集装置(2)和语音输入装置(5)；
所述眼动采集装置(2)通过固定装置(3)固定在所述计算机(1)上，通过USB连接线(4)与所述计算机(1)连接；
所述语音输入装置(5)带有底盘(6)，置于被测试人员与所述计算机(1)之间靠近被测试人员处，通过音频连接线(7)与所述计算机(1)连接。
2.一种基于眼动、语音和触屏多模式交互的问卷测试方法，它使用如权利要求1所述的基于眼动、语音和触屏多模式交互的问卷测试系统，并包括以下步骤：
A、被测试人员就位
被测试人员位于所述语音输入装置(5)前，正对所述计算机(1)的触摸屏，触屏点击打开问卷测试软件或集成有问卷测试软件的其他测试程序；
B、语音输入检测与眼动识别定标
B1、所述问卷测试软件在测试开始前进行语音输入检测，要求被测试人员语音输入屏幕显示的文字，连续进行2次检测，若2次语音输入都成功，则语音输入满足要求，进入B2步骤；否则，通过所述计算机(1)屏幕提示被测试人员检查语音输入装置(5)，并重复B1步骤；
B2、问卷测试软件实时接收所述眼动采集装置(2)的信号，在测试开始前进行眼动识别定标，令被测试者注视屏幕白色底色上的黑色圆点，注视点随黑色圆点移动，对分布在全屏幕各个部分的5个关键点定标完成后，进行眼动检测，要求被测试人员注视屏幕上随机位置依次出现的三个黑色圆点，若眼动采集装置(2)检测的三个注视点与实际显示注视点都相同，则进入C步骤；否则，重复B2步骤；
C、自动呈现测试条目以及自动记录被测试者反馈的答案
被测试者眼动注视实现点击功能，判断依据为：若注视一区域超过3秒钟，视为对该区域对应选项进行一次点击；与触屏交互具有同样的点击效果；被测试者用语音输入可取代键盘文字输入操作；
所述问卷测试软件依次呈现测试条目，实时接收所述眼动采集装置(2)采集的眼注视点信息，并判断是否进行点击操作；客观选择题目通过眼动注视或触屏交互的点击操作选择答案；主观作答题目在点击文字输入区域后，文字输入区域提示开始输入，此时通过所述语音输入装置(5)进行文字信息输入；其他一些诸如上一题、下一题、结束测试之类需要点击的功能按钮也通过眼动注视或触屏交互的点击操作激活相应按键功能。
CN201510592951.7A 2015-09-18 2015-09-18 一种基于眼动、语音和触屏多模式交互的问卷测试系统和方法 Pending CN105204993A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201510592951.7A CN105204993A (zh) 2015-09-18 2015-09-18 一种基于眼动、语音和触屏多模式交互的问卷测试系统和方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201510592951.7A CN105204993A (zh) 2015-09-18 2015-09-18 一种基于眼动、语音和触屏多模式交互的问卷测试系统和方法

Publications (1)

Publication Number Publication Date
CN105204993A true CN105204993A (zh) 2015-12-30

Family

ID=54952687

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201510592951.7A Pending CN105204993A (zh) 2015-09-18 2015-09-18 一种基于眼动、语音和触屏多模式交互的问卷测试系统和方法

Country Status (1)

Country Link
CN (1) CN105204993A (zh)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107368724A (zh) * 2017-06-14 2017-11-21 广东数相智能科技有限公司 基于声纹识别的防作弊网络调研方法、电子设备及存储介质
CN107390864A (zh) * 2017-06-19 2017-11-24 广东数相智能科技有限公司 基于眼球轨迹追踪的网络调研方法、电子设备及存储介质
CN107705164A (zh) * 2017-11-14 2018-02-16 宜宾维特瑞安科技有限公司 一种基于眼球追踪技术的市场调查装置、系统及方法
CN110266881A (zh) * 2019-06-18 2019-09-20 Oppo广东移动通信有限公司 应用控制方法及相关产品
CN111400539A (zh) * 2019-01-02 2020-07-10 阿里巴巴集团控股有限公司 语音问卷的处理方法、装置和系统
CN113655883A (zh) * 2021-08-17 2021-11-16 中国人民解放军军事科学院战争研究院 一种人机界面眼动交互方式的工效学实验分析系统及方法

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1584791A (zh) * 2004-06-11 2005-02-23 上海大学 人机交互方法及装置
CN101968867A (zh) * 2009-07-27 2011-02-09 上海薄荷信息科技有限公司 一种用于网络调研的控制装置以及相应的控制方法
US20140282152A1 (en) * 2013-03-12 2014-09-18 Sas Institute Inc. List with targets for touch screens

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1584791A (zh) * 2004-06-11 2005-02-23 上海大学 人机交互方法及装置
CN101968867A (zh) * 2009-07-27 2011-02-09 上海薄荷信息科技有限公司 一种用于网络调研的控制装置以及相应的控制方法
US20140282152A1 (en) * 2013-03-12 2014-09-18 Sas Institute Inc. List with targets for touch screens

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107368724A (zh) * 2017-06-14 2017-11-21 广东数相智能科技有限公司 基于声纹识别的防作弊网络调研方法、电子设备及存储介质
CN107390864A (zh) * 2017-06-19 2017-11-24 广东数相智能科技有限公司 基于眼球轨迹追踪的网络调研方法、电子设备及存储介质
CN107705164A (zh) * 2017-11-14 2018-02-16 宜宾维特瑞安科技有限公司 一种基于眼球追踪技术的市场调查装置、系统及方法
CN111400539A (zh) * 2019-01-02 2020-07-10 阿里巴巴集团控股有限公司 语音问卷的处理方法、装置和系统
CN111400539B (zh) * 2019-01-02 2023-05-30 阿里巴巴集团控股有限公司 语音问卷的处理方法、装置和系统
CN110266881A (zh) * 2019-06-18 2019-09-20 Oppo广东移动通信有限公司 应用控制方法及相关产品
CN113655883A (zh) * 2021-08-17 2021-11-16 中国人民解放军军事科学院战争研究院 一种人机界面眼动交互方式的工效学实验分析系统及方法
CN113655883B (zh) * 2021-08-17 2022-10-14 中国人民解放军军事科学院战争研究院 一种人机界面眼动交互方式的工效学实验分析系统及方法

Similar Documents

Publication Publication Date Title
CN105204993A (zh) 一种基于眼动、语音和触屏多模式交互的问卷测试系统和方法
Bixler et al. Detecting boredom and engagement during writing with keystroke analysis, task appraisals, and stable traits
US20020076679A1 (en) Web enabled medical device training
Tracy et al. Measuring cognitive load to test the usability of web sites
WO2013192439A3 (en) Mobile assessment of clinical function
Meyer et al. Objective fidelity evaluation in multisensory virtual environments: auditory cue fidelity in flight simulation
CN102393834A (zh) 一种核电站数字化人机界面的测试方法和系统
Shirley et al. Bridging the simulator gap: Measuring motivational bias in digital nuclear power plant environments
Ntoa et al. UXAmI observer: an automated user experience evaluation tool for ambient intelligence environments
Silva et al. Measuring expert and novice performance within computer security incident response teams
Kwok et al. Measuring change during intervention using norm-referenced, standardized measures: A comparison of raw scores, standard scores, age equivalents, and growth scale values from the Preschool Language Scales–Fifth Edition
US7512289B2 (en) Apparatus and method for examination of images
TWI642026B (zh) 心理與行為狀態評量暨診斷方法及系統
Jansen et al. How relevant are incidental power poses for HCI?
Nguyen et al. Interactive qualitative data visualization for educational assessment
Dever et al. Identifying the effects of scaffolding on learners’ temporal deployment of self-regulated learning operations during game-based learning using multimodal data
Haimson et al. Using depression analytics to reduce stigma via social media: BlueFriends
Chen A study on psychological stress assessment of higher educational institution’s students based on computer data mining technology
Chan et al. A Practical Usability Study Framework Using the SUS and the Affinity Diagram: A Case Study on the Online Roadshow Website.
Levulis et al. Are all tests equal? A comparison of emulator and device testing for mobile usability evaluation
KR101946279B1 (ko) 스마트 펜을 이용한 진단 검사 방법 및 장치
Dow et al. An air traffic control simulation fidelity definition and categorization system
Jung et al. Investigating the effect of cognitive load on ux: A driving study
Strybel et al. A comparison of methods for assessing situation awareness in current day and future air traffic management operations: Graphics-based vs text-based online probe systems
Tabrizi et al. Usability evaluation for Near East University student information system

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20151230

WD01 Invention patent application deemed withdrawn after publication