CN113095049A - 标注行为事件的方法、装置、计算机设备和存储介质 - Google Patents
标注行为事件的方法、装置、计算机设备和存储介质 Download PDFInfo
- Publication number
- CN113095049A CN113095049A CN202110297463.9A CN202110297463A CN113095049A CN 113095049 A CN113095049 A CN 113095049A CN 202110297463 A CN202110297463 A CN 202110297463A CN 113095049 A CN113095049 A CN 113095049A
- Authority
- CN
- China
- Prior art keywords
- information
- behavior
- marking
- labeling
- event
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 38
- 230000006399 behavior Effects 0.000 claims description 314
- 238000002372 labelling Methods 0.000 claims description 115
- 230000002159 abnormal effect Effects 0.000 claims description 16
- 230000003542 behavioural effect Effects 0.000 claims description 16
- 238000004590 computer program Methods 0.000 claims description 13
- 238000013519 translation Methods 0.000 claims description 9
- 230000001133 acceleration Effects 0.000 claims description 5
- 238000013473 artificial intelligence Methods 0.000 abstract description 4
- 238000010586 diagram Methods 0.000 description 7
- 238000004891 communication Methods 0.000 description 6
- 238000005516 engineering process Methods 0.000 description 5
- 230000008569 process Effects 0.000 description 5
- 230000008447 perception Effects 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 239000003086 colorant Substances 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000005457 optimization Methods 0.000 description 1
- 230000008520 organization Effects 0.000 description 1
- 238000003825 pressing Methods 0.000 description 1
- 238000012545 processing Methods 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 230000001960 triggered effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F40/00—Handling natural language data
- G06F40/10—Text processing
- G06F40/166—Editing, e.g. inserting or deleting
- G06F40/169—Annotation, e.g. comment data or footnotes
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Health & Medical Sciences (AREA)
- Artificial Intelligence (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Computational Linguistics (AREA)
- General Health & Medical Sciences (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Navigation (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
Abstract
本申请涉及人工智能领域,提供了一种标注行为事件的方法、装置、计算机设备和存储介质。本申请能够确保对行为事件标注准确性的情况下提高标注效率。该方法包括:提供行为事件的标注界面,获取针对该行为事件的标注引导信息序列,以及获取表征该行为事件的行为信息集合中与标注引导信息序列中各标注引导信息对应的行为信息,然后在标注界面上依次展示标注引导信息序列中的标注引导信息时一并展示与之对应的行为信息,以便获取用户依据行为信息对相应的标注引导信息提供反馈,根据对各标注引导信息的反馈信息得到前述行为事件的标注结果。
Description
技术领域
本申请涉及人工智能技术领域,特别是涉及一种标注行为事件的方法、装置、计算机设备和存储介质。
背景技术
随着人工智能技术的发展,出现了自动驾驶、智能导航等人工智能技术在各种应用场景下的技术。基于在智能系统服务过程中产生的行为事件进行标注,可对智能系统进行优化。
目前的技术主要依赖于专业工程师对每个行为事件进行标注,但智能系统所产生的行为事件数量巨大,导致其存在对行为事件的标注效率低的问题。
发明内容
基于此,有必要针对上述技术问题,提供一种标注行为事件的方法、装置、计算机设备和存储介质。
一种标注行为事件的方法,所述方法包括:
提供行为事件的标注界面;
获取针对所述行为事件的标注引导信息序列,以及获取表征所述行为事件的行为信息集合中与所述标注引导信息序列中各标注引导信息对应的行为信息;
在所述标注界面上依次展示所述标注引导信息序列以及所述各标注引导信息对应的行为信息;
根据对所述各标注引导信息的反馈信息,得到所述行为事件的标注结果。
一种标注行为事件的装置,包括:
界面提供模块,用于提供行为事件的标注界面;
信息获取模块,用于获取针对所述行为事件的标注引导信息序列,以及获取表征所述行为事件的行为信息集合中与所述标注引导信息序列中各标注引导信息对应的行为信息;
信息展示模块,用于在所述标注界面上依次展示所述标注引导信息序列以及所述各标注引导信息对应的行为信息;
结果得到模块,用于根据对所述各标注引导信息的反馈信息,得到所述行为事件的标注结果。
一种计算机设备,包括存储器和处理器,所述存储器存储有计算机程序,所述处理器执行所述计算机程序时实现以下步骤:
提供行为事件的标注界面;获取针对所述行为事件的标注引导信息序列,以及获取表征所述行为事件的行为信息集合中与所述标注引导信息序列中各标注引导信息对应的行为信息;在所述标注界面上依次展示所述标注引导信息序列以及所述各标注引导信息对应的行为信息;根据对所述各标注引导信息的反馈信息,得到所述行为事件的标注结果。
一种计算机可读存储介质,其上存储有计算机程序,所述计算机程序被处理器执行时实现以下步骤:
提供行为事件的标注界面;获取针对所述行为事件的标注引导信息序列,以及获取表征所述行为事件的行为信息集合中与所述标注引导信息序列中各标注引导信息对应的行为信息;在所述标注界面上依次展示所述标注引导信息序列以及所述各标注引导信息对应的行为信息;根据对所述各标注引导信息的反馈信息,得到所述行为事件的标注结果。
上述标注行为事件的方法、装置、计算机设备和存储介质,提供行为事件的标注界面,获取针对该行为事件的标注引导信息序列,以及获取表征该行为事件的行为信息集合中与标注引导信息序列中各标注引导信息对应的行为信息,然后在标注界面上依次展示标注引导信息序列中的标注引导信息时一并展示与之对应的行为信息,以便获取用户依据界面展示的行为信息对相应的标注引导信息提供反馈,根据对各标注引导信息的反馈信息得到前述行为事件的标注结果。该方案能够在标注界面上针对行为事件的标注任务提供多个标注引导信息及其对应的行为信息,使对行为事件的标注任务能够经由一般用户执行,可在确保对行为事件标注准确性的情况下提高标注效率。
附图说明
图1为一个实施例中标注行为事件的方法的应用环境图;
图2为一个实施例中标注行为事件的方法的流程示意图;
图3(a)为一个实施例中的一种标注界面图;
图3(b)为一个实施例中的另一种标注界面图;
图4为另一个实施例中的标注界面图;
图5(a)为又一个实施例中的一种标注界面图;
图5(b)为又一个实施例中的另一种标注界面图;
图6为一个实施例中标注行为事件的装置的结构框图;
图7为一个实施例中计算机设备的内部结构图。
具体实施方式
为了使本申请的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本申请进行进一步详细说明。应当理解,此处描述的具体实施例仅仅用以解释本申请,并不用于限定本申请。
本申请提供的标注行为事件的方法,可以应用于如图1所示的应用环境中。其中,终端110可以通过网络与服务器120进行通信连接,服务器120可为终端110提供包括行为事件的标注引导信息序列、行为信息集合中与标注引导信息序列中各标注引导信息对应的行为信息等数据。具体的,终端110可为用户提供行为事件的标注界面,从服务器120获取针对行为事件的标注引导信息序列,以及获取表征该行为事件的行为信息集合中与标注引导信息序列中各标注引导信息对应的行为信息,在标注界面上为用户依次展示标注引导信息序列以及该标注引导信息序列中各标注引导信息对应的行为信息,用户可在标注界面上依据所展示的行为信息对相应的标注引导信息提供反馈,终端110根据用户对各标注引导信息的反馈信息,得到行为事件的标注结果,该终端110可交由服务器120或者其他终端进行后续处理。
在如图1所示的应用环境中,终端110可以但不限于是各种个人计算机、笔记本电脑、智能手机和平板电脑等,服务器120可以用独立的服务器或者是多个服务器组成的服务器集群来实现。
在一个实施例中,如图2所示,提供了一种标注行为事件的方法,该方法可以由图1所示的终端实施,可以包括以下步骤:
步骤S201,提供行为事件的标注界面。
其中,待标注的行为事件可以是满足预设条件的行为事件。以自动驾驶为例,行为事件具体可以是安全员接管车辆的事件等。对行为事件进行标注将有助于发现产生这些行为事件背后的原因,例如发现处于自动驾驶的车辆由于何种原因被接管而处于手动驾驶状态等,据此有利于对智能系统的软件和/或硬件进行优化。本步骤中,终端110提供标注界面以供用户形成对行为事件的标注。
步骤S202,获取针对行为事件的标注引导信息序列,以及获取表征行为事件的行为信息集合中与标注引导信息序列中各标注引导信息对应的行为信息。
为便于用户对行为事件进行标注,终端110获取针对行为事件的标注引导信息序列,该标注引导信息序列包括多个标注引导信息,标注引导信息的作用在于通过多个信息逐步引导用户形成对行为事件的标注反馈,也即将行为事件的一个标注任务划分成多个标注引导信息,用户通过对这些标注引导信息的反馈即可逐步形成对行为事件的标注从而完成标注任务。示例性的,该标注引导信息序列可以包括多个待回答问题,也即可以通过多个待回答问题的方式逐步引导用户形成对行为事件的标注反馈,其中用户对待回答问题的反馈信息则对应为答题信息。
其中,行为事件可通过多种不同类别的行为信息来进行表征,包含表征行为事件的各种类别的行为信息的集合称为行为信息集合。以自动驾驶场景中的车辆行为事件为例,这些不同类别的行为信息可以包括语音翻译信息、地图信息、前视图信息、加速度折线图信息、方向盘转向折线图信息和方向盘转向角度信息等,表征同一车辆行为事件的各类行为信息的集合即为车辆行为信息集合。
本步骤中,终端110除获取标注引导信息序列,还获取表征行为事件的上述行为信息集合中与该标注引导信息序列中各标注引导信息对应的行为信息。
针对每一标注引导信息,终端110从行为信息集合中获取与其对应的行为信息。具体的,终端110可依据具体的标注引导信息从行为信息集合中获取一类或多类行为信息作为与之对应的行为信息,也即终端110无需将行为信息集合中所包含的所有行为信息均对应至标注引导信息,避免无关信息对用户的标注反馈造成干扰。
步骤S203,在标注界面上依次展示标注引导信息序列以及各标注引导信息对应的行为信息。
本步骤主要是终端110在展示标注引导信息的同时,展示与之对应的行为信息,以供用户依据行为信息形成对标注引导信息的反馈。
以对车辆行为事件进行标注为例,参考图3(a)和图3(b),标注界面300可以包括第一行为信息展示区域310、标注引导信息序列展示区域330和当前标注引导信息展示区域320。在图3(a)中,当前标注引导信息展示区域320中展示的标注引导信息序列中的“标注引导信息3”并展示多个选项供用户选择以形成对该“标注引导信息3”的反馈信息,同时,还在第一行为信息展示区域310中以视频的形式提供与该“标注引导信息3”对应的地图信息,用户可依据第一行为信息展示区域310中展示的地图信息,对当前标注引导信息展示区域320中展示的“标注引导信息3”具有的各选项进行选择以形成“标注引导信息3”的反馈信息。
用户提供对“标注引导信息3”的反馈信息即反馈信息3后,如图3(b)所示,终端110可在当前标注引导信息展示区域320中展示“标注引导信息4”并展示多个选项供用户选择以形成对该“标注引导信息4”的反馈信息,同时还可以在第一行为信息展示区域310中以视频的形式提供该“标注引导信息4”对应的地图信息,以及增设第二行为信息展示区域340,该第二行为信息展示区域340可用于以视频的形式提供与该“标注引导信息4”对应的前视图信息。由此,用户可依据第一行为信息展示区域310和第二行为信息展示区域320提供的行为信息,对当前标注引导信息展示区域320中展示的“标注引导信息4”具有的各选项进行选择以形成“标注引导信息4”的反馈信息。
基于此,终端110通过逐步展示标注引导信息并提供与之对应的行为信息,可获取用户针对各标注引导信息的反馈信息。
步骤S204,根据对各标注引导信息的反馈信息,得到行为事件的标注结果。
具体的,终端110可根据用户对标注引导信息序列中各标注引导信息的反馈信息获得对行为事件的标注结果,该标注结果可用于反映该行为事件由于何种原因而产生,以此对例如自动驾驶系统等智能系统的软件/硬件进行优化。
上述标注行为事件的方法,提供行为事件的标注界面,获取针对该行为事件的标注引导信息序列,以及获取表征该行为事件的行为信息集合中与标注引导信息序列中各标注引导信息对应的行为信息,然后在标注界面上依次展示标注引导信息序列中的标注引导信息时一并展示与之对应的行为信息,以便获取用户依据界面展示的行为信息对相应的标注引导信息提供反馈,根据对各标注引导信息的反馈信息得到前述行为事件的标注结果。该方案能够在标注界面上针对行为事件的标注任务提供多个标注引导信息及其对应的行为信息,使对行为事件的标注任务能够经由一般用户执行,可在确保对行为事件标注准确性的情况下提高标注效率。
在一个实施例中,步骤S202中的获取针对行为事件的标注引导信息序列,包括:
获取用于形成行为事件的标注结果的逻辑树,按照各节点在逻辑树中所处层次顺序,将各节点对应的标注引导信息排布得到标注引导信息序列。
具体的,逻辑树可包含多个处于不同层次的节点,每个节点对应不同的标注引导信息。其中,逻辑树可根据对行为事件的问题定位逻辑进行组织,在各节点部署相应的标注引导信息。由此,在对行为事件标注时,即可按照各节点在逻辑树中所处层次顺序将相应的标注引导信息提取并排布形成标注引导信息序列,这样,通过依序对标注引导信息序列中各标注引导信息进行反馈,即可形成对行为事件的标注。
进一步的,在一些实施例中,为更快速对行为事件进行有效标注,各标注引导信息在标注引导信息序列中的排布顺序符合预设标注顺序,例如符合从感知层到决策层的标注顺序,也即可按照从感知层到决策层的问题定位顺序组织用于形成行为事件的标注结果的逻辑树。示例性的,以车辆行为事件为例,可形成先判断图像的采集是否存在异常,再判断对图像中的感知信息是否准确,后判断对图像中的对象识别是否准确等问题定位顺序组织的逻辑树。采用该种方式有利于快速有效地定位是否由于驾驶系统中感知层/决策层的各类硬件/软件模块产生的何种问题触发该行为事件。
在一些实施例中,步骤S202中的获取表征行为事件的行为信息集合中与标注引导信息序列中各标注引导信息对应的行为信息,包括:
确定形成各标注引导信息的反馈信息所需的行为信息类别,将行为信息集合中与行为信息类别对应的行为信息,作为与各标注引导信息对应的行为信息。
本实施例中,终端110在展示标注引导信息时同时提供对应的行为信息而无需对于每个标注引导信息都展示行为信息集合所包含的全部行为信息。其中,终端110在展示对应的行为信息前可确定形成各标注引导信息的反馈信息所需的行为信息类别。以待回答问题作为标注引导信息为例,终端110在展示待回答问题对应的行为信息前,先确定回答该待回答问题需要何种类别的行为信息,确定后可从行为信息集合中获取该类别对应的行为信息即可。
具体的,在自动驾驶场景中,例如,需要回答“是否压实线?”这一问题时,所需的行为信息可以包括语音翻译信息和地图信息,那么终端110在标注界面展示该问题时,一并提供语音翻译信息和地图信息供用户参考;又如,需要回答“否快撞上障碍物?”这一问题时,所需的行为信息可以包括语音翻译信息、地图信息和前视图信息,那么终端110在标注界面展示该问题时,可提供语音翻译信息、地图信息和前视图信息供用户参考。再如,需要回答“是否急刹?”这一问题时,所需的行为信息可以包括语音翻译信息、前视图信息和加速度折线图信息,所需的行为信息还可以包括语音翻译信息、地图信息、前视图信息、加速度折线图信息和方向盘折线图信息,终端110在标注界面展示该问题时,即可提供相应的行为信息。
进一步的,在一些实施例中,在将行为信息集合中与行为信息类别对应的行为信息,作为与各标注引导信息对应的行为信息之前,还可以通过如下步骤获取行为信息集合,具体包括:
确定行为事件的发生时间,从行为信息源中提取满足预设时长条件的目标时段内的行为信息集合作为表征行为事件的行为信息集合。
本实施例中,行为信息源是指行为信息的数据源,行为信息可以按照时间顺序被记录形成行为信息源,对于每一时刻的行为信息均可以包含各种行为信息类别对应的行为信息。以车辆行为信息为例,行为信息源是车辆运行过程中按照时间顺序记录的各类行为信息的数据源,具体可以包含按照时间顺序记录的语音翻译信息、地图信息、前视图信息、加速度折线图信息、方向盘转向折线图信息和方向盘转向角度信息,即对于每一时刻均可提取相应的语音翻译信息、地图信息、前视图信息、加速度折线图信息、方向盘转向折线图信息和方向盘转向角度信息形成该时刻对应的行为信息集合。
由此,可依据行为事件的发生时间,从行为信息源中提取目标时段内的行为信息集合作为表征行为事件的行为信息集合,该目标时段需满足预设时长条件,即目标时段需具有一定的时间长度,以便于用户具有足够信息量的行为信息对标注引导信息提供准确反馈,并且该目标时段还需包含行为事件的发生时间,以确保所提出的行为信息集合与该行为事件具有强关联性。在具体实施中,可以以该行为事件的发生时间为基础时刻,向前和向后延伸一定的相同或不同的时间长度形成满足前述预设时长条件的目标时段。
对于行为信息在标注界面上的显示,在一些实施例中,步骤S203中的在标注界面上依次展示标注引导信息序列以及各标注引导信息对应的行为信息,可以包括:
针对标注界面展示的当前标注引导信息,展示与当前标注引导信息对应的行为信息,并将行为信息中的当前标注引导信息相关联的行为信息要素与行为信息中的其他行为信息要素区分显示。
其中,行为信息中可以包括多个行为信息要素。示例性的,对于车辆行为事件,在地图信息和前视图信息中可以包括例如当前车辆、障碍物车、障碍物人、路牙、车道线、规划路径和车辆即将行驶路径等行为信息要素。
本实施例主要是终端110在标注界面上展示当前标注引导信息时,不仅展示该当前标注引导信息对应的行为信息,还进一步将该行为信息中与该当前标注引导信息相关联的行为信息要素与其他行为信息要素进行区分显示,以便于辅助用户更准确高效地提供对当前标注引导信息的反馈信息。
对于与当前标注引导信息相关联的行为信息要素,以待回答问题作为标注引导信息为例进行说明,对于“是否压实线?”这一问题,可将地图信息中当前车辆、当前车辆附近的实线、规划路径和车辆即将行驶路径进行突出/高亮显示,以在标注界面上区分其他行为信息要素。其中,对于行为信息要素的区分显示,示例性的,参考图4,终端110可以将地图信息中当前车辆311、当前车辆附近的实线314、规划路径312和车辆即将行驶路径313进行突出显示,以辅助用户回答前述“是否压实线?”这一问题。
对此,在例如同时提供地图信息和前视图信息的标注界面中,在地图信息中突出显示的行为信息要素同样可被突出显示在前视图信息中,用户还可在标注界面上对地图信息中的行为信息要素进行选择,被选择的行为信息要素也可以以突出显示的方式被展示在地图信息和前视图信息中,且在地图信息和前视图信息的播放过程中终端110可实时跟踪该被选择的行为信息要素。
对于行为信息在标注界面上的显示,在另外一些实施例中,行为信息可以包括正常状态行为信息段和异常状态行为信息段。其中,正常状态与异常状态可以由行为事件的发生事件为基准划分,发生行为事件之前可对应于正常状态,如车辆处于自动驾驶状态,发生行为事件之后可对应于异常状态,如从自动驾驶状态切换至手动驾驶状态,那么在目标时段对应的行为信息中,对应于正常状态的时段的行为信息称为正常状态行为信息段,如车辆处于自动驾驶状态对应的一段前视图信息,而对应于异常状态的时段的行为信息称为异常状态行为信息段,如车辆切换至手动驾驶状态对应的一段前视图信息。
为更好辅助用户准确且高效地提供标注反馈,步骤S203中的在标注界面上依次展示标注引导信息序列以及各标注引导信息对应的行为信息,可以包括:
针对标注界面展示的当前标注引导信息,将与当前标注引导信息对应的行为信息中的正常状态行为信息段与异常状态行为信息段区分显示。
本实施例中,终端110按照时序播放当前标注引导信息对应的行为信息过程中,当播放到异常状态对应的行为信息时,终端110可以将该对应于异常状态对应的行为信息从标注界面全局以及行为信息要素两方面进行突出显示,以区分于正常状态行为信息段的显示效果。
具体的,参考图5(a)和图5(b),以播放进度条上的行为事件发生标识510区分正常状态行为信息段与异常状态行为信息段,该行为事件发生标识510之前,属于正常状态行为信息段,行为事件发生标识510之后,属于异常状态行为信息段。
当标注界面播放的是正常状态行为信息段,终端110可对当前车辆311、当前车辆附近的实线314、规划路径312和车辆即将行驶路径313进行突出显示。当标注界面播放的是异常状态行为信息段,终端110一方面仍可对当前车辆311、当前车辆附近的实线314、规划路径312和车辆即将行驶路径313进行突出显示,但采用与正常状态行为信息段不同的方式进行突出显示,例如可采用不同的颜色进行突出显示;另一方面,终端110可在标注界面300的全局布置高亮渐变条520,以从全局的角度区分显示与正常状态行为信息段,终端110还可以将不同状态的区分显示体现在播放进度条上,进入异常状态后播放进度条可以以进度条突出显示530的方式区分于正常状态的进度条显示。由此可实现从全局到单个行为信息要素的状态变化提醒,辅助用户准确且高效地对相应标注引导信息提供反馈信息。
应该理解的是,虽然如上流程图中的各个步骤按照箭头的指示依次显示,但是这些步骤并不是必然按照箭头指示的顺序依次执行。除非本文中有明确的说明,这些步骤的执行并没有严格的顺序限制,这些步骤可以以其它的顺序执行。而且,如上流程图中的至少一部分步骤可以包括多个步骤或者多个阶段,这些步骤或者阶段并不必然是在同一时刻执行完成,而是可以在不同的时刻执行,这些步骤或者阶段的执行顺序也不必然是依次进行,而是可以与其它步骤或者其它步骤中的步骤或者阶段的至少一部分轮流或者交替地执行。
在一个实施例中,如图6所示,提供了一种标注行为事件的装置,该装置600可以包括:
界面提供模块601,用于提供行为事件的标注界面;
信息获取模块602,用于获取针对所述行为事件的标注引导信息序列,以及获取表征所述行为事件的行为信息集合中与所述标注引导信息序列中各标注引导信息对应的行为信息;
信息展示模块603,用于在所述标注界面上依次展示所述标注引导信息序列以及所述各标注引导信息对应的行为信息;
结果得到模块604,用于根据对所述各标注引导信息的反馈信息,得到所述行为事件的标注结果。
在一个实施例中,信息获取模块602,用于获取用于形成所述行为事件的标注结果的逻辑树;其中,所述逻辑树的不同节点对应不同标注引导信息;按照各节点在所述逻辑树中所处层次顺序,将所述各节点对应的标注引导信息排布得到所述标注引导信息序列。
在一个实施例中,所述各标注引导信息在所述标注引导信息序列中的排布顺序符合预设标注顺序。
在一个实施例中,信息获取模块602,用于确定形成所述各标注引导信息的反馈信息所需的行为信息类别;将所述行为信息集合中与所述行为信息类别对应的行为信息,作为与所述各标注引导信息对应的行为信息。
在一个实施例中,信息获取模块602,还用于确定所述行为事件的发生时间;从行为信息源中提取满足预设时长条件的目标时段内的行为信息集合作为表征所述行为事件的行为信息集合;所述目标时段包含所述发生时间。
在一个实施例中,信息展示模块603,用于针对所述标注界面展示的当前标注引导信息,展示与所述当前标注引导信息对应的行为信息,并将所述行为信息中的所述当前标注引导信息相关联的行为信息要素与所述行为信息中的其他行为信息要素区分显示。
在一个实施例中,所述行为信息包括正常状态行为信息段和异常状态行为信息段;信息展示模块603,用于针对所述标注界面展示的当前标注引导信息,将与所述当前标注引导信息对应的行为信息中的所述正常状态行为信息段与所述异常状态行为信息段区分显示。
在一个实施例中,所述行为事件包括车辆行为事件;所述行为信息包括语音翻译信息、地图信息、前视图信息、加速度折线图信息、方向盘转向折线图信息和/或方向盘转向角度信息。
关于标注行为事件的装置的具体限定可以参见上文中对于标注行为事件的方法的限定,在此不再赘述。上述标注行为事件的装置中的各个模块可全部或部分通过软件、硬件及其组合来实现。上述各模块可以硬件形式内嵌于或独立于计算机设备中的处理器中,也可以以软件形式存储于计算机设备中的存储器中,以便于处理器调用执行以上各个模块对应的操作。
在一个实施例中,提供了一种计算机设备,该计算机设备可以是终端,其内部结构图可以如图7所示。该计算机设备包括通过系统总线连接的处理器、存储器、通信接口、显示屏和输入装置。其中,该计算机设备的处理器用于提供计算和控制能力。该计算机设备的存储器包括非易失性存储介质、内存储器。该非易失性存储介质存储有操作系统和计算机程序。该内存储器为非易失性存储介质中的操作系统和计算机程序的运行提供环境。该计算机设备的通信接口用于与外部的终端进行有线或无线方式的通信,无线方式可通过WIFI、运营商网络、NFC(近场通信)或其他技术实现。该计算机程序被处理器执行时以实现一种标注行为事件的方法。该计算机设备的显示屏可以是液晶显示屏或者电子墨水显示屏,该计算机设备的输入装置可以是显示屏上覆盖的触摸层,也可以是计算机设备外壳上设置的按键、轨迹球或触控板,还可以是外接的键盘、触控板或鼠标等。
本领域技术人员可以理解,图7中示出的结构,仅仅是与本申请方案相关的部分结构的框图,并不构成对本申请方案所应用于其上的计算机设备的限定,具体的计算机设备可以包括比图中所示更多或更少的部件,或者组合某些部件,或者具有不同的部件布置。
在一个实施例中,还提供了一种计算机设备,包括存储器和处理器,存储器中存储有计算机程序,该处理器执行计算机程序时实现上述各方法实施例中的步骤。
在一个实施例中,提供了一种计算机可读存储介质,其上存储有计算机程序,该计算机程序被处理器执行时实现上述各方法实施例中的步骤。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程,是可以通过计算机程序来指令相关的硬件来完成,所述的计算机程序可存储于一非易失性计算机可读取存储介质中,该计算机程序在执行时,可包括如上述各方法的实施例的流程。其中,本申请所提供的各实施例中所使用的对存储器、存储、数据库或其它介质的任何引用,均可包括非易失性和易失性存储器中的至少一种。非易失性存储器可包括只读存储器(Read-Only Memory,ROM)、磁带、软盘、闪存或光存储器等。易失性存储器可包括随机存取存储器(Random Access Memory,RAM)或外部高速缓冲存储器。作为说明而非局限,RAM可以是多种形式,比如静态随机存取存储器(Static Random Access Memory,SRAM)或动态随机存取存储器(Dynamic Random Access Memory,DRAM)等。
以上实施例的各技术特征可以进行任意的组合,为使描述简洁,未对上述实施例中的各个技术特征所有可能的组合都进行描述,然而,只要这些技术特征的组合不存在矛盾,都应当认为是本说明书记载的范围。
以上所述实施例仅表达了本申请的几种实施方式,其描述较为具体和详细,但并不能因此而理解为对发明专利范围的限制。应当指出的是,对于本领域的普通技术人员来说,在不脱离本申请构思的前提下,还可以做出若干变形和改进,这些都属于本申请的保护范围。因此,本申请专利的保护范围应以所附权利要求为准。
Claims (10)
1.一种标注行为事件的方法,其特征在于,所述方法包括:
提供行为事件的标注界面;
获取针对所述行为事件的标注引导信息序列,以及获取表征所述行为事件的行为信息集合中与所述标注引导信息序列中各标注引导信息对应的行为信息;
在所述标注界面上依次展示所述标注引导信息序列以及所述各标注引导信息对应的行为信息;
根据对所述各标注引导信息的反馈信息,得到所述行为事件的标注结果。
2.根据权利要求1所述的方法,其特征在于,所述获取针对所述行为事件的标注引导信息序列,包括:
获取用于形成所述行为事件的标注结果的逻辑树;其中,所述逻辑树的不同节点对应不同标注引导信息;
按照各节点在所述逻辑树中所处层次顺序,将所述各节点对应的标注引导信息排布得到所述标注引导信息序列。
3.根据权利要求2所述的方法,其特征在于,所述各标注引导信息在所述标注引导信息序列中的排布顺序符合预设标注顺序。
4.根据权利要求1所述的方法,其特征在于,所述获取表征所述行为事件的行为信息集合中与所述标注引导信息序列中各标注引导信息对应的行为信息,包括:
确定形成所述各标注引导信息的反馈信息所需的行为信息类别;
将所述行为信息集合中与所述行为信息类别对应的行为信息,作为与所述各标注引导信息对应的行为信息。
5.根据权利要求4所述的方法,其特征在于,所述方法还包括:
确定所述行为事件的发生时间;
从行为信息源中提取满足预设时长条件的目标时段内的行为信息集合作为表征所述行为事件的行为信息集合;所述目标时段包含所述发生时间。
6.根据权利要求1所述的方法,其特征在于,
所述在所述标注界面上依次展示所述标注引导信息序列以及所述各标注引导信息对应的行为信息,包括:
针对所述标注界面展示的当前标注引导信息,展示与所述当前标注引导信息对应的行为信息,并将所述行为信息中的所述当前标注引导信息相关联的行为信息要素与所述行为信息中的其他行为信息要素区分显示;
和/或,
所述行为信息包括正常状态行为信息段和异常状态行为信息段;所述在所述标注界面上依次展示所述标注引导信息序列以及所述各标注引导信息对应的行为信息,包括:
针对所述标注界面展示的当前标注引导信息,将与所述当前标注引导信息对应的行为信息中的所述正常状态行为信息段与所述异常状态行为信息段区分显示。
7.根据权利要求1至6任一项所述的方法,其特征在于,所述行为事件包括车辆行为事件;所述行为信息包括语音翻译信息、地图信息、前视图信息、加速度折线图信息、方向盘转向折线图信息和/或方向盘转向角度信息。
8.一种标注行为事件的装置,其特征在于,包括:
界面提供模块,用于提供行为事件的标注界面;
信息获取模块,用于获取针对所述行为事件的标注引导信息序列,以及获取表征所述行为事件的行为信息集合中与所述标注引导信息序列中各标注引导信息对应的行为信息;
信息展示模块,用于在所述标注界面上依次展示所述标注引导信息序列以及所述各标注引导信息对应的行为信息;
结果得到模块,用于根据对所述各标注引导信息的反馈信息,得到所述行为事件的标注结果。
9.一种计算机设备,包括存储器和处理器,所述存储器存储有计算机程序,其特征在于,所述处理器执行所述计算机程序时实现权利要求1至7中任一项所述的方法的步骤。
10.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现权利要求1至7中任一项所述的方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110297463.9A CN113095049B (zh) | 2021-03-19 | 2021-03-19 | 标注行为事件的方法、装置、计算机设备和存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110297463.9A CN113095049B (zh) | 2021-03-19 | 2021-03-19 | 标注行为事件的方法、装置、计算机设备和存储介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN113095049A true CN113095049A (zh) | 2021-07-09 |
CN113095049B CN113095049B (zh) | 2024-08-16 |
Family
ID=76668598
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202110297463.9A Active CN113095049B (zh) | 2021-03-19 | 2021-03-19 | 标注行为事件的方法、装置、计算机设备和存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN113095049B (zh) |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20110227925A1 (en) * | 2010-03-16 | 2011-09-22 | Imb Corporation | Displaying a visualization of event instances and common event sequences |
US20180329593A1 (en) * | 2014-02-04 | 2018-11-15 | Falkonry Inc. | Operating Behavior Classification Interface |
CN109885365A (zh) * | 2019-01-25 | 2019-06-14 | 平安科技(深圳)有限公司 | 操作引导方法、装置、计算机设备和存储介质 |
CN110019725A (zh) * | 2017-12-22 | 2019-07-16 | 科沃斯商用机器人有限公司 | 人机交互方法、系统及其电子设备 |
CN110996138A (zh) * | 2019-12-17 | 2020-04-10 | 腾讯科技(深圳)有限公司 | 一种视频标注方法、设备及存储介质 |
CN111914078A (zh) * | 2020-08-13 | 2020-11-10 | 北京捷通华声科技股份有限公司 | 数据处理方法、装置 |
-
2021
- 2021-03-19 CN CN202110297463.9A patent/CN113095049B/zh active Active
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20110227925A1 (en) * | 2010-03-16 | 2011-09-22 | Imb Corporation | Displaying a visualization of event instances and common event sequences |
US20180329593A1 (en) * | 2014-02-04 | 2018-11-15 | Falkonry Inc. | Operating Behavior Classification Interface |
CN110019725A (zh) * | 2017-12-22 | 2019-07-16 | 科沃斯商用机器人有限公司 | 人机交互方法、系统及其电子设备 |
CN109885365A (zh) * | 2019-01-25 | 2019-06-14 | 平安科技(深圳)有限公司 | 操作引导方法、装置、计算机设备和存储介质 |
CN110996138A (zh) * | 2019-12-17 | 2020-04-10 | 腾讯科技(深圳)有限公司 | 一种视频标注方法、设备及存储介质 |
CN111914078A (zh) * | 2020-08-13 | 2020-11-10 | 北京捷通华声科技股份有限公司 | 数据处理方法、装置 |
Also Published As
Publication number | Publication date |
---|---|
CN113095049B (zh) | 2024-08-16 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US20230052617A1 (en) | Providing early lane navigation information for a road connecting successive intersections | |
CN108170792B (zh) | 基于人工智能的问答引导方法、装置和计算机设备 | |
CN111581433A (zh) | 视频处理方法、装置、电子设备及计算机可读介质 | |
CN109618224A (zh) | 视频数据处理方法、装置、计算机可读存储介质和设备 | |
CN110472154A (zh) | 一种资源推送方法、装置、电子设备及可读存储介质 | |
US11887224B2 (en) | Method, apparatus, and computer program for completing painting of image, and method, apparatus, and computer program for training artificial neural network | |
CN112815948B (zh) | 识别偏航模式的方法、装置、计算机设备和存储介质 | |
CN109214674A (zh) | 客服系统管理方法、客服系统及电子设备 | |
US20230054388A1 (en) | Method and apparatus for presenting audiovisual work, device, and medium | |
CN114780493A (zh) | 无人车数据的处理方法、装置、设备和存储介质 | |
CN113176839A (zh) | 基于地理位置的车辆互动方法、装置、计算机设备和介质 | |
CN113095049B (zh) | 标注行为事件的方法、装置、计算机设备和存储介质 | |
CN113609947A (zh) | 运动轨迹预测方法、装置、计算机设备和存储介质 | |
CN109656650B (zh) | 一种面向混合语言集成系统的新手引导制作方法 | |
CN111797211A (zh) | 业务信息搜索方法、装置、计算机设备和存储介质 | |
CN110717475A (zh) | 自动驾驶场景分类方法及系统 | |
CN113435948B (zh) | 一种电商平台数据监测方法及系统 | |
CN111143424A (zh) | 特征场景数据挖掘方法、装置和终端 | |
CN115857942A (zh) | 一种代码处理方法及装置、设备及存储介质 | |
CN112164225B (zh) | 信息处理方法、装置、设备及存储介质 | |
CN112750213B (zh) | 一种停车服务信息推送方法、装置、设备及介质 | |
CN112261590B (zh) | 作业追踪方法、装置、计算机设备和存储介质 | |
CN111143423B (zh) | 动态场景标注数据挖掘方法、装置以及终端 | |
CN109492747A (zh) | 一种神经网络的网络结构生成方法及装置 | |
CN112306838A (zh) | 页面布局兼容性测试方法、装置、设备及可读存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |