CN109805945B - 记录回放装置及方法 - Google Patents

Abstract

本发明提供了一种记录回放装置及方法，该装置包括：记录列表区，用于显示实验记录的记录信息，以供选择实验记录；所述实验记录是通过导入并解析打包的至少一条记录得到；回放界面，用于同步播放选择的实验记录中的视频信息和选择的实验记录中的生理信号，所述视频信息包括刺激材料。通过上述方案能够提高心理学实验数据的回放便利性和灵活性。

Description

记录回放装置及方法

技术领域

本发明涉及信息技术领域，尤其涉及一种在心理学研究中所需的记录回放装置及方法。

背景技术

在心理学研究、实验室应用研究、军工研究、汽车驾驶研究等科学领域，经常需要模拟实际应用场景来采集与人相关的数据记录，并进行记录回放。例如，在心理学研究领域中，通常需要利用多个生理模块采集并回放被试的行为、生理等实验数据记录。目前，是在实验设计模块中完成相应的实验设计数据后，在所需的各生理模块中以实验设计数据为基础生成实验结果记录并进行回放，如此一来，不同生理模块的实验结果记录的回放过程分布在各自的生理模块中，而且实验结果记录的回放方式固定并单一。但由于不同生理模块的实验结果记录往往需要结合起来分析使用，所以四处分散且回放方式单一的实验结果记录在数据分析过程中会给用户带来诸多不便。

发明内容

有鉴于此，本发明提供了一种记录回放装置及方法，以提高心理学实验数据的回放便利性和灵活性。

为了实现上述目的，本发明采用以下方案：

在本发明一实施例中，记录回放装置，包括：

记录列表区，用于显示实验记录的记录信息，以供选择实验记录；所述实验记录是通过导入并解析打包的至少一条记录得到；

回放界面，用于同步播放选择的实验记录中的视频信息和选择的实验记录中的生理信号，所述视频信息包括刺激材料。

在本发明一实施例中，所述回放界面，包括：视频呈现区域，用于按时间顺序播放选择的实验记录中的各时间点对应的刺激材料，所述刺激材料包括视频片段和/或图片；信号呈现区域，用于按时间顺序播放选择的实验记录中的各时间点对应的生理信号；时间轴播放区域，用于通过播放时间轴对齐各时间点的所述刺激材料和相应时间点的所述生理信号。

在本发明一实施例中，记录回放装置，还包括：事件片段类型区；所述事件片段类型区，包括：事件类型录入模块，包括事件列表区和事件添加功能按钮；所述事件添加功能按钮用于接收根据播放的生理信号中的标记点添加的事件类型名称和相应的事件类型标识，并显示于所述事件列表区；和/或片段类型录入模块，包括片段列表区和片段添加功能按钮；所述片段添加功能按钮用于接收根据播放的生理信号中的事件添加的片段类型名称和相应的片段类型标识，并显示于所述片段列表区。

在本发明一实施例中，所述视频呈现区域，还用于当光标定位于所述刺激材料时显示相应的注视点或原始眼动仪实验数据。

在本发明一实施例中，所述信号呈现区域，还用于根据信号轴缩放指令调整所述生理信号对应的信号轴的取值范围，所述信号轴缩放指令包括自动调整范围、调整至默认范围或取消调整范围。

在本发明一实施例中，所述回放界面，还包括：全局信息呈现区域，用于在所述生理信号所对应的位置显示记录信息标签，所述记录信息标签包括所述实验记录的基本信息和相应的生理信号采集设备的数据信息。

在本发明一实施例中，所述回放界面，还包括：全局信息呈现区域，用于显示对应于从所述生理信号中选取的标记点的事件呈现标签，所述事件呈现标签包括事件类型名称和相应的事件类型标识，和/或，显示对应于从所述生理信号中选取的片段的片段呈现标签，所述片段呈现标签包括片段类型名称和相应的片段类型标识。

在本发明一实施例中，所述全局信息呈现区域，还用于根据从事件列表中选取的事件类型突出显示所述生理信号；所述事件列表包含所述事件类型名称；所述全局信息呈现区域，还用于根据从片段列表中选取的片段类型突出显示所述生理信号；所述片段列表包含所述片段类型名称。

在本发明一实施例中，所述时间轴播放区域，还用于显示当前播放时间点、当前光标定位时间点及从所述生理信号选择的片段的起止时间中的至少一个。

在本发明一实施例中，记录回放方法，包括：导入并解析打包的至少一条记录，得到至少一条实验记录；显示所述实验记录的记录信息，以供选择实验记录；同步播放选择的实验记录中的视频信息和选择的实验记录中的生理信号，所述视频信息包括刺激材料。

本发明的记录回放装置，能够一次性导入多条记录，并利用记录列表区显示多条实验记录，而且，记录列表区和回放界面是集成于同一个装置或模块的不同区域或界面，以此便于实验记录回放的集中管理。此外，刺激材料和生理信号同步播放有利于实验记录的数据分析。本发明的记录回放方法与本发明的记录回放装置基于同样的发明构思实现，所以也具有上述有益效果。

附图说明

为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。在附图中：

图1是本发明一实施例的记录回放装置的结构示意图；

图2是本发明一实施例中回放界面的结构示意图；

图3是本发明另一实施例的记录回放装置的结构示意图；

图4是本发明一实施例的记录回放方法的流程示意图；

图5是本发明一实施例的记录回放装置的结构示意图；

图6是本发明一实施例中的事件片段类型区的结构示意图；

图7是本发明一实施例中的事件添加对话框的结构示意图；

图8是本发明一实施例中片段添加对话框的结构示意图；

图9是本发明一实施例中的事件类型录入模块的结构示意图；

图10是本发明一实施例中的片段类型录入模块的结构示意图。

具体实施方式

为使本发明实施例的目的、技术方案和优点更加清楚明白，下面结合附图对本发明实施例做进一步详细说明。在此，本发明的示意性实施例及其说明用于解释本发明，但并不作为对本发明的限定。

图1是本发明一实施例的记录回放装置的结构示意图。如图1所示，一些实施例的记录回放装置，可包括：记录列表区100和回放界面110，二者是集成于同一模块。记录列表区100，用于显示实验记录的记录信息，以供选择实验记录；所述实验记录是通过导入并解析打包的至少一条记录得到；回放界面110，用于同步播放选择的实验记录中的视频信息和选择的实验记录中的生理信号；所述视频信息包括刺激材料。

其中，每条记录信息对应一个实验记录，可以通过鼠标点击某条记录信息所对应的位置或按下快捷键选择一条实验记录。选择一条实验记录后，可以由记录列表区100跳转至回放界面110。记录列表区100和回放界面110可以是显示于同一界面的不同页面，或者，回放界面110可以嵌入至记录列表区100，又或者回放界面110可以是悬浮至记录列表区100之外的窗口。

用于心理学研究的实验设计模块可能一次输出多条记录，这些记录可以根据一定格式进行打包，打包后的一条或多条记录可以一次性预先导入至本发明的记录回放装置。本发明的记录回放装置可以对打包的记录进行解析，得到相应的一条或多条实验记录，同时还可以得到相应的事件片段类型。

实验记录中的刺激材料可以包括视频、视频片段、图片等，用于在心理学研究中对被试的进行视觉刺激。在不同的时间点所使用的刺激材料可以相同或不同，刺激材料之间可以有一定时间间隔。生理信号是在刺激材料的刺激下利用例如生理传感器等实验设备采集的实验结果，其中，生理传感器可包括肌电传感器、皮电传感器、呼吸传感器等。在其他实施例中，上述视频信息可以包括其他视频，例如，在心理学实验过程中利用软件记录的眼动轨迹。

本实施例中，能够一次性导入多条记录，并利用记录列表区显示多条实验记录，而且，记录列表区和回放界面是集成于同一个装置或模块的不同区域或界面，以此便于实验记录回放的集中管理。此外，刺激材料和生理信号同步播放有利于实验记录的数据分析。

图2是本发明一实施例中回放界面的结构示意图。如图2所示，一些实施例中，所述回放界面110，可包括：视频呈现区域111、信号呈现区域112及时间轴播放区域113。

视频呈现区域111，用于按时间顺序播放选择的实验记录中的各时间点对应的刺激材料，所述刺激材料包括视频和/或图片；信号呈现区域112，用于按时间顺序播放选择的实验记录中的各时间点对应的生理信号；时间轴播放区域113，用于通过播放时间轴对齐各时间点的所述刺激材料和相应时间点的所述生理信号。

其中，时间轴可以作为横轴，播放的刺激材料和播放的生理信号可以位于纵轴上的不同位置，而且，可以有多个生理信号(可以由不同的生理传感器采集)同时进行播放，不同生理信号的位置可不同，或者不同生理信号位于同一位置但用不同颜色加以区分。在将各时间点的刺激材料和生理信号对齐后，当某一时间点有刺激材料时，该时间点的生理信号通常可以发生相应变化。对齐刺激材料和生理信号的方法可以利用现有技术实现。具体实施例中，时间轴播放区域113中可以包括时间轴、播放控制按钮、前进按钮、后退按钮、显示数据等。

本实施例中，通过播放时间轴对齐刺激材料和生理信号，有利于利用刺激材料和生理信号进行直观对比分析。

在一些实施例中，所述视频呈现区域111，可用于当光标定位于所述刺激材料时显示相应的注视点或原始眼动仪实验数据。例如，在某一时间点，该刺激材料为一张图片，或者在某一时段，该刺激材料为一个视频片段，在该时间点或该时段内，将光标移动至该图片或该视频片段上，可以在视频呈现区域111中显示出注视点对应的图或视频，或者显示出原始眼动仪实验数据对应的视频或图。其中，注视点中可以用圆点表示注视位置；原始眼动仪实验数据中，可以包含眼动轨迹的图片或视频以及相应的数据。该注视点或原始眼动仪实验数据可以与实验记录一同打包导入本发明的记录回放装置并经过解析得到，而且，可以通过播放的时间轴与播放的刺激材料、生理信号等进行对齐。

本实施例中，通过当光标定位于刺激材料时显示注视点或原始眼动仪实验数据，能够在进行回放实验记录时，极大地方便了用户看到更多实验相关信息。

在一些实施例中，所述信号呈现区域112，可用于根据信号轴缩放指令调整所述生理信号对应的信号轴的取值范围，所述信号轴缩放指令包括调至设定范围、恢复至默认范围或取消调整范围。其中，信号轴取值范围的缩放例如可以通过在鼠标光标放到信号轴(纵轴)上或其附近时，点击右键后显示出自动调整范围、调整至默认范围及取消调整范围对应的按钮菜单，然后，当用户选择点击自动调整范围时，可以根据生理信号的实际数据范围自动合理地调整信号轴的取值范围，当用户选择点击调整至默认范围时，可以将生理信号的当前信号轴取值范围调整或恢复至默认范围，当用户选择点击取消调整范围时，若之前有拖拽或拉动信号轴而使信号轴范围发生变化，则可取消调整。

本实施例中，通过根据信号轴缩放指令调整生理信号对应的信号轴的取值范围，可以便于用户根据自身的需求选择信号轴进行显示，从而提高视觉效果。

在一些实施例中，所述时间轴播放区域113，可用于显示当前播放时间点、当前光标定位时间点及从所述生理信号选择的片段的起止时间中的至少一个。其中，当前播放时间点可以随着播放的进行而不断变化；当前光标定位时间点可以在光标放在时间轴上时才显示相应位置的时刻；从所述生理信号选择的片段的起止时间可以在利用鼠标或键盘在时间轴上选定一段区域时，显示相应时间段的起始时间和终止时间。此外，时间轴播放区域113还可以显示前进、后退、播放控制、调节播放速度等控制按钮。

本实施例中，通过显示当前播放时间点、当前光标定位时间点及片段起止时间等信息，可以在回放实验记录时便于用户了解回放进度。

再如图2所示，另一些实施例中，所述回放界面110，除了包含视频呈现区域111、信号呈现区域112及时间轴播放区域113，还可包括：全局信息呈现区域114。全局信息呈现区域114，用于在所述生理信号所对应的位置显示记录信息标签，所述记录信息标签包括所述实验记录的基本信息和相应的生理信号采集设备的数据信息。

其中，全局信息呈现区域114所包含的内容可以以标签的形式显示，例如，可以包含上述的记录信息标签。例如，可以在光标放在信号轴(纵轴)附近标注有生理信号对应的采集设备的位置时，显示出上述记录信息标签的内容。所述实验记录的基本信息可包括记录名称、记录的持续时间、记录的创建时间、被试名称、被试的相关属性等。生理信号采集设备可以是各种生理传感器，例如，皮电传感器、皮温传感器、肌电传感器、心电传感器、呼吸传感器、光电容积脉搏传感器等。采集设备的数据信息可包括采集设备信息和数据采集信息，其中，采集设备信息例如可包括传感器名称，数据采集信息例如可包括采样率、采样百分比等。

本实施例中，通过在生理信号所对应的位置显示实验记录的基本信息和相应的生理信号采集设备的数据信息，可使在回放实验记录的过程中便于用户查看相关的信息。

在一些实施例中，所述回放界面110，可包括：全局信息呈现区域114。所述全局信息呈现区域114，可用于显示对应于从所述生理信号中选取的标记点的事件呈现标签，所述事件呈现标签包括事件类型名称和相应的事件类型标识，和/或，显示对应于从所述生理信号中选取的片段的片段呈现标签，所述片段呈现标签包括片段类型名称和相应的片段类型标识。

其中，全局信息呈现区域114可以包含上述的事件呈现标签和/或片段呈现标签。事件类型可包括刺激类型、自定义事件类型、同步盒标记事件类型、键盘类型、鼠标类型，事件类型名称可包括刺激、自定义、同步盒标记、键盘、鼠标等。相应的事件类型标识例如可以是不同的颜色，用来标识不同的事件类型。片段类型可以是不同特征的片段，例如刺激过程中的开心片段，此时，片段类型名称可以开心。片段类型标识例如可以是不同的颜色，用来标识不同的片段类型。其中，“事件”可以对应生理信号中的标记点，即刺激时间点的打标结果(事件标记)；“片段”可以标识一段时间内的所有标记点，可以反映一段生理信号的特征。

本实施例中，通过事件呈现标签可使用户在记录回放过程中查看到标记点的详细信息，通过片段呈现标签可使用户在记录回放过程中查看到标记片段的详细信息，便于用户快速获得所需信息。

在一些实施例中，所述全局信息呈现区域114，可用于根据从事件列表中选取的事件类型突出显示所述生理信号；所述事件列表包含所述事件类型名称。所述全局信息呈现区域114，可用于根据从片段列表中选取的片段类型突出显示所述生理信号；所述片段列表包含所述片段类型名称。

例如，当光标放在时间轴上时，可以显示出该时间点的所有类型的事件(标记点)，可以通过点击鼠标右键显示出事件列表，事件列表中可以包含该时间点所有的所有事件类型，此时可以在该事件列表中选择所需的事件类型进行突出显示，例如高亮显示。类似的，可以选取片段列表中的某一片段类型进行例如高亮显示。其中，事件列表中的事件类型可以与实验记录一同打包导入并解析得到，之后可以链接到时间轴的相应的时间点；片段列表中的片段类型可以与类似于事件类型的方式得到，或者可以通过添加事件类型得到，例如可以在后续所述的片段类型录入模块中进行添加。类似的，事件类型可以通过后续所述的事件类型录入模块进行添加。

本实施例中，通过根据选取的事件类型突出显示生理信号，可以便于用户容易地看到所需的事件类型的生理信号。通过根据选取的片段类型突出显示所述生理信号，可以便于用户容易地看到所需的片段类型的生理信号。

图3是本发明另一实施例的记录回放装置的结构示意图。如图3所示，图1所示的记录回放装置，还可包括：事件片段类型区200。所述事件片段类型区200，可包括：事件类型录入模块210和片段类型录入模块220。

事件类型录入模块210，可包括事件列表区211和事件添加功能按钮212。所述事件添加功能按钮212用于接收根据播放的生理信号中的标记点添加的事件类型名称和相应的事件类型标识，并显示于所述事件列表区211。具体地，可以根据选取的生理信号中的标记点，通过用户对标记点的分析判断后，由用户输入事件类型名称和相应的事件类型标识分别到对话框中的相应输入区域，其中，事件类型标识可以是能够区分不同事件类型的颜色。添加好的事件(包括事件类型名称和相应的事件类型标识)可以显示在事件列表区211中。而且，上述事件呈现标签中的事件类型名称可以从此处的事件列表区211中读取或共享。

片段类型录入模块220，可包括片段列表区221和片段添加功能按钮222。所述片段添加功能按钮222用于接收根据播放的生理信号中的事件添加的片段类型名称和相应的片段类型标识，并显示于所述片段列表区221。具体地，可以根据选取的生理信号中的片段，通过用户对片段的分析判断后，由用户输入片段类型名称和相应的片段类型标识分别到对话框中的相应输入区域，其中，片段类型标识可以是能够区分不同片段类型的颜色。添加好的片段(包括片段类型名称和相应的片段类型标识)可以显示在片段列表区221中。而且，上述片段呈现标签中的片段类型名称可以从此处的片段列表区221中读取或共享。

本实施例中，通过在记录回放装置中设置事件片段类型区，并在其中设置事件类型录入模块和片段类型录入模块，能够便于用户根据需要添加事件类型、片段类型，便于用户快速了解记录及了解事件类型、片段类型的情况。

值得说明的是，本发明各实施例的记录回放装置中，各种区、区域或界面的描述(例如，记录列表区、回放界面、视频呈现区域、信号呈现区域、时间轴播放区域、全局信息呈现区域、事件片段类型区等)并非用于限定显示的画面的相对位置或是否在同一页面，而是用于表明该记录回放装置包含相应的功能区，而且该些功能区一般(相对于现有技术分散在各设备模块而言)是在同一模块中实现，所以各种区或界面可以位于同一页面、不同页面或不同的窗口，可以一直显示或可以隐藏，不同页面之间可以通过按钮或自动地进行跳转。

基于与图1所示的记录回放装置相同的发明构思，本发明实施例还提供了一种记录回放方法，如下面实施例所述。由于该记录回放方法解决问题的原理与记录回放装置相似，因此该记录回放方法的实施可以参见记录回放装置的实施，重复之处不再赘述。

图4是本发明一实施例的记录回放方法的流程示意图。如图4所示，一些实施例的记录回放方法，可包括：

步骤S310：导入并解析打包的至少一条记录，得到至少一条实验记录；

步骤S320：显示所述实验记录的记录信息，以供选择实验记录；

步骤S330：同步播放选择的实验记录中的视频信息和选择的实验记录中的生理信号，所述视频信息包括刺激材料。

在一些实施例中，上述步骤S320，具体地，可包括：

按时间顺序播放选择的实验记录中的各时间点对应的刺激材料，所述刺激材料包括视频片段和/或图片；

按时间顺序播放选择的实验记录中的各时间点对应的生理信号；

通过播放时间轴对齐各时间点的所述刺激材料和相应时间点的所述生理信号。

在一些实施例中，图4所示的记录回放方法，还可包括：

接收根据播放的生理信号中的标记点添加的事件类型名称和相应的事件类型标识，并进行显示；

接收根据播放的生理信号中的事件添加的片段类型名称和相应的片段类型标识，并进行显示。

在一些实施例中，上述步骤S320，具体地，还可包括：

当光标定位于所述刺激材料时显示相应的注视点或原始眼动仪实验数据。

在一些实施例中，上述步骤S320，具体地，还可包括：

根据信号轴缩放指令调整所述生理信号对应的信号轴的取值范围，所述信号轴缩放指令包括自动调整范围、调整至默认范围或取消调整范围。

在一些实施例中，上述步骤S320，具体地，还可包括：

在所述生理信号所对应的位置显示记录信息标签，所述记录信息标签包括所述实验记录的基本显示对应于从所述生理信号中选取的标记点的事件呈现标签，所述事件呈现标签包括事件类型名称和相应的事件类型标识，和/或，显示对应于从所述生理信号中选取的片段的片段呈现标签，所述片段呈现标签包括片段类型名称和相应的片段类型标识。信息和相应的生理信号采集设备的数据信息。

在一些实施例中，上述步骤S320，具体地，还可包括：

根据从事件列表中选取的事件类型突出显示所述生理信号；所述事件列表包含所述事件类型名称；

根据从片段列表中选取的片段类型突出显示所述生理信号；所述片段列表包含所述片段类型名称。

在一些实施例中，上述步骤S320，具体地，还可包括：

显示当前播放时间点、当前光标定位时间点及从所述生理信号选择的片段的起止时间中的至少一个。

为使本领域技术人员更好地理解本发明，下面将以一具体实施例说明本发明的具体实施方式。

图5是本发明一实施例的记录回放装置的结构示意图。如图5所示，记录回放装置可包括：记录列表区100、事件片段类型区200，该些区域设置在同一模块界面内。可自动(结合现有的硬件实现自动事件标记)或手动截取记录列表区中的片段、标记点，例如，截取刺激过程中开心片段等。

记录列表区可用于查询记录信息。记录列表区可设有记录名称、记录创建时间、记录持续时间、被试信息，其中被试信息可包括被试姓名以及添加的被试属性信息。双击记录列表区中的任一条记录，可打开该记录进行回放，并可对其进行编辑。

事件片段类型区可用于查看已存在的手动添加的事件类型名称和片段类型名称，也可添加事件或片段。

图6是本发明一实施例中的事件片段类型区的结构示意图。如图6所示，事件片段类型区200内可设有事件类型录入模块和片段录入类型模块。

图7是本发明一实施例中的事件添加对话框的结构示意图。图9是本发明一实施例中的事件类型录入模块的结构示意图。如图7和图9所示，在事件类型录入模块下可设有事件列表区和事件添加功能按钮，点击该事件添加功能按钮弹出事件添加对话框，所述事件添加对话框内可输入添加事件的名称、选择事件的代表颜色、确认功能按钮和取消功能按钮；添加完成的事件可显示在事件类型录入模块下的事件列表中；鼠标放在事件列表下的事件上，可显示有对该事件进行编辑和删除的功能按钮。

图8是本发明一实施例中片段添加对话框的结构示意图。图10是本发明一实施例中的片段类型录入模块的结构示意图。如图8和图10所示，在片段录入类型模块下可设有片段列表区和片段添加功能按钮，点击该片段添加功能按钮弹出片段添加对话框，所述片段添加对话框内可输入添加片段的名称、选择片段的代表颜色、确认功能按钮和取消功能按钮；添加完成的片段可显示在片段类型录入模块下的片段列表中；鼠标放在片段列表下的片段上，可显示有对该片段进行编辑和删除的功能按钮。

在记录列表区选择任一条记录(目标项目)，双击该记录可进入记录回放界面；如图2所示，所述记录回放界面可包括视频呈现区域、信号呈现区域、全局信息呈现区域、时间轴播放区域。

所述视频呈现区域可包括摄像头记录下的视频、软件记录的眼动设备的眼动点轨迹的视频等。前述两种视频模式下的视频显示界面上均可设置有下拉功能按钮，点击所述下拉功能按钮，可弹出呈现选择，所述呈现选择可为嵌套或悬浮。嵌套呈现是嵌套在整个界面里，悬浮呈现是跳出界面呈现，变得可以移动；在播放事件或片段的视频的过程中，当鼠标放在刺激材料上，刺激材料上会显示有呈现形式，所述呈现形式包括注视点和原始数据。

所述信号呈现区域可用于在信号呈现区域呈现采集的信号，在所述信号呈现区域的标题栏中设有下拉功能按钮，点击该下拉功能按钮，弹出呈现选择，该呈现选择为嵌套或悬浮。当鼠标放在任一时间点上时，会显示各个信号在这一时间点上的值。当鼠标光标定位任一处时，点击鼠标右键，可呈现自动Y轴(信号所在轴)范围、默认Y轴范围、取消选择三个功能按钮。其中，所述自动Y轴范围是指信号的Y轴会随着信号值的大小变化而变化；所述默认Y轴范围是指Y轴大小恢复默认设置；所述取消选择是指当有鼠标拖拽处一段范围后，可选择取消选择。

所述全局信息呈现区域可设有记录信息、事件呈现、片段呈现三个标签。

所述记录信息标签下可显示记录的相关信息，该相关信息可包括记录的基本信息、采集设备的数据信息；所述记录的基本信息可包括记录名称、持续时间、创建时间、被试、被试属性等；所述采集设备(例如传感器)的数据信息可包括参与记录的传感器名称、采样率、采样百分比；将鼠标放置在某一生理信号数据上，可显示该信号数据的详细信息，该详细信息可包括传感器的名称、传感器的类型、传感器采样率、采样百分比、对传感器的描述信息、记录开始时间、记录持续时间；选择某一生理信号数据，可通过点击删除标签删除该生理信号数据；可在复选框里选择信号数据，以生成呈现在表格里的信号数据；点击折叠功能按钮可将本部分的内容折叠隐藏；视频数据和眼动数据显示的内容和功能均与传感器数据一致。

所述事件呈现标签下可呈现所有事件类型下的事件；所述事件呈现标签下可设有定制事件和事件列表；点击定制事件对应的添加按钮，可添加自定义的事件类型，添加自定义的事件类型可包括一对话框，该对话框内可编辑事件类型名称和选择代表该事件类型的颜色、完成和取消；添加完成的自定义事件类型可以列表的形式呈现，显示事件类型的名称以及事件类型的颜色；当鼠标放置在事件列表中的某一事件类型上，在该事件类型会显示添加事件类型、编辑事件类型、删除事件类型的功能按钮；点击事件列表中任一事件上的添加事件按钮，(在事件列表中待添加事件的位置)显示的时间点为鼠标光标定位在时间轴的那一时刻点，也可以在时刻点上手动设置事件的时间，前述内容完成后点击添加完成功能按钮，添加的事件将会在时间轴上显示；点击事件列表中任一事件上的编辑事件按钮，对事件类型的名称或显示的颜色再次编辑；点击事件列表中任一事件上的删除事件类型的功能按钮，删除该事件类型以及该事件类型下的事件。

所述事件呈现标签下还可设有事件列表，在该事件列表下可通过选择事件类型来决定呈现的事件；所述事件类型可包括刺激类型、自定义事件类型、同步盒标记事件类型、键盘类型、鼠标类型；所述刺激类型可为该事件类型下显示每个刺激的开始时和结束时的事件标记，所述自定义事件类型为该事件类型下可显示自定义的事件；所述同步盒标记可为该事件类型下显示的是同步盒发出的事件标记；所述键盘类型可为该事件类型下显示的在记录过程中键盘触发的事件标记；所述鼠标类型可为该事件类型下显示的是记录过程中按鼠标触发的事件标记；

所述片段呈现标签下呈现所有的片段类型下的片段件列表，该标签下的内容与操作与事件呈现标签下基本一致，唯一不同点在于所述片段呈现标签下，当自定义的事件类型有多个时，每次只能点亮其中一个类型；

所述时间轴播放区域分为时间轴和播放功能；将鼠标放置在时间轴上，通过滑动鼠标上的滚轮可对时间轴进行缩放，播放控制区域设置有控制按钮和显示数据，所述控制按钮包括前移、后移、播放按钮，及调节播放速度进度条，所述显示数据包括当前播放的时间、当前光标定位的时间、选择片段的开始时间、选择片段的结束时间。

现有技术中实验设计原理为：在人机交互数据同步系统中，在实验设计模块中完成相应的设计数据后，在后续的各生理模块中生成以实验设计数据为基础的结果。在人机交互数据系统中的回放模块，与其它模块设置在同一模块内或与分散在不同的模块内，因此，其功能性和回放过程中的完整性暂不能被有效利用。

人机交互(Human-Computer Interaction,HCI)，是指人与计算机之间使用某种对话语言，以一定的交互方式，为完成确定任务的人与计算机之间的信息交换过程。本实施例记录回放装置完善回放过程中的完整性，各项回放内容和对会放的编辑，可在同一模块内完成输入和/或导入。用于对人机交互数据同步系统中记录的项目进行回放，完整和合理，对整个实验起着至关重要的作用。能够解决现有回放的设计方式单一，或分散至各其它模块中，不利于整合实验数据的问题；解决现有回放过程的完整性不完善的问题，同时方便用户对刺激材料进行属性编辑。回放的采集方式集中、回放的采集方式和途径灵活，有利于在同一模块内完成相关回放。

综上所述，本发明实施例的记录回放装置，能够一次性导入多条记录，并利用记录列表区显示多条实验记录，而且，记录列表区和回放界面是集成于同一个装置或模块的不同区域或界面，以此便于实验记录回放的集中管理。此外，刺激材料和生理信号同步播放有利于实验记录的数据分析。本发明实施例的记录回放方法与本发明实施例的记录回放装置基于同样的发明构思实现，所以也具有上述有益效果。

在本说明书的描述中，参考术语“一个实施例”、“一个具体实施例”、“一些实施例”、“例如”、“示例”、“具体示例”、或“一些示例”等的描述意指结合该实施例或示例描述的具体特征、结构、材料或者特点包含于本发明的至少一个实施例或示例中。在本说明书中，对上述术语的示意性表述不一定指的是相同的实施例或示例。而且，描述的具体特征、结构、材料或者特点可以在任何的一个或多个实施例或示例中以合适的方式结合。各实施例中涉及的步骤顺序用于示意性说明本发明的实施，其中的步骤顺序不作限定，可根据需要作适当调整。

本领域内的技术人员应明白，本发明的实施例可提供为方法、系统、或计算机程序产品。因此，本发明可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且，本发明可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。

本发明是参照根据本发明实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。

这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。

这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上，使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。

以上所述的具体实施例，对本发明的目的、技术方案和有益效果进行了进一步详细说明，所应理解的是，以上所述仅为本发明的具体实施例而已，并不用于限定本发明的保护范围，凡在本发明的精神和原则之内，所做的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。

Claims (8)

1.一种记录回放装置，其特征在于，包括：

记录列表区，用于显示实验记录的记录信息，以供选择实验记录；所述实验记录是通过导入并解析打包的至少一条记录得到；

回放界面，用于同步播放选择的实验记录中的视频信息和选择的实验记录中的生理信号，所述视频信息包括刺激材料；

所述回放界面，包括：

视频呈现区域，用于按时间顺序播放选择的实验记录中的各时间点对应的刺激材料，所述刺激材料包括视频片段和/或图片；

信号呈现区域，用于按时间顺序播放选择的实验记录中的各时间点对应的生理信号；

时间轴播放区域，用于通过播放时间轴对齐各时间点的所述刺激材料和相应时间点的所述生理信号；

所述视频呈现区域，还用于当光标定位于所述刺激材料时显示相应的注视点或原始眼动仪实验数据对应的视频或图。

2.如权利要求1所述的记录回放装置，其特征在于，还包括：事件片段类型区；

所述事件片段类型区，包括：

事件类型录入模块，包括事件列表区和事件添加功能按钮；所述事件添加功能按钮用于接收根据播放的生理信号中的标记点添加的事件类型名称和相应的事件类型标识，并显示于所述事件列表区；和/或

片段类型录入模块，包括片段列表区和片段添加功能按钮；所述片段添加功能按钮用于接收根据播放的生理信号中的事件添加的片段类型名称和相应的片段类型标识，并显示于所述片段列表区。

3.如权利要求1所述的记录回放装置，其特征在于，

所述信号呈现区域，还用于根据信号轴缩放指令调整所述生理信号对应的信号轴的取值范围，所述信号轴缩放指令包括自动调整范围、调整至默认范围或取消调整范围。

4.如权利要求1所述的记录回放装置，其特征在于，所述回放界面，还包括：

全局信息呈现区域，用于在所述生理信号所对应的位置显示记录信息标签，所述记录信息标签包括所述实验记录的基本信息和相应的生理信号采集设备的数据信息。

5.如权利要求1所述的记录回放装置，其特征在于，所述回放界面，还包括：

全局信息呈现区域，用于显示对应于从所述生理信号中选取的标记点的事件呈现标签，所述事件呈现标签包括事件类型名称和相应的事件类型标识，和/或，显示对应于从所述生理信号中选取的片段的片段呈现标签，所述片段呈现标签包括片段类型名称和相应的片段类型标识。

6.如权利要求5所述的记录回放装置，其特征在于，

所述全局信息呈现区域，还用于根据从事件列表中选取的事件类型突出显示所述生理信号；所述事件列表包含所述事件类型名称；

所述全局信息呈现区域，还用于根据从片段列表中选取的片段类型突出显示所述生理信号；所述片段列表包含所述片段类型名称。

7.如权利要求1所述的记录回放装置，其特征在于，

所述时间轴播放区域，还用于显示当前播放时间点、当前光标定位时间点及从所述生理信号选择的片段的起止时间中的至少一个。

8.一种记录回放方法，其特征在于，包括：

导入并解析打包的至少一条记录，得到至少一条实验记录；

显示所述实验记录的记录信息，以供选择实验记录；

同步播放选择的实验记录中的视频信息和选择的实验记录中的生理信号，所述视频信息包括刺激材料；

显示所述实验记录的记录信息，以供选择实验记录，包括：

按时间顺序播放选择的实验记录中的各时间点对应的刺激材料，所述刺激材料包括视频片段和/或图片；

按时间顺序播放选择的实验记录中的各时间点对应的生理信号；

通过播放时间轴对齐各时间点的所述刺激材料和相应时间点的所述生理信号；

显示所述实验记录的记录信息，以供选择实验记录，还包括：

当光标定位于所述刺激材料时显示相应的注视点或原始眼动仪实验数据对应的视频或图。

Images