CN108875020A - 用于实现标注的方法、装置、设备及存储介质 - Google Patents

用于实现标注的方法、装置、设备及存储介质 Download PDF

Info

Publication number
CN108875020A
CN108875020A CN201810636105.4A CN201810636105A CN108875020A CN 108875020 A CN108875020 A CN 108875020A CN 201810636105 A CN201810636105 A CN 201810636105A CN 108875020 A CN108875020 A CN 108875020A
Authority
CN
China
Prior art keywords
marked
label
mark
labeling position
annotation tool
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201810636105.4A
Other languages
English (en)
Inventor
徐昀
唐继正
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
4Paradigm Beijing Technology Co Ltd
Original Assignee
4Paradigm Beijing Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 4Paradigm Beijing Technology Co Ltd filed Critical 4Paradigm Beijing Technology Co Ltd
Priority to CN201810636105.4A priority Critical patent/CN108875020A/zh
Publication of CN108875020A publication Critical patent/CN108875020A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00Handling natural language data
    • G06F40/10Text processing
    • G06F40/166Editing, e.g. inserting or deleting
    • G06F40/169Annotation, e.g. comment data or footnotes

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Artificial Intelligence (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Computational Linguistics (AREA)
  • General Health & Medical Sciences (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本发明提供了一种用于实现标注的方法、装置、设备及存储介质。在显示设备上显示待标注对象;检测用户通过标注工具在待标注对象上执行的标注操作,其中,标注工具由光标转换而来;基于标注操作来确定标注位置和标注内容;以及在待标注对象上关联地反映标注位置和标注内容。由此,用户在标注过程中,能够方便且可视化地获知标注结果,从而可以便于用户对标注结果进行调整,进而可以提高标注效率。

Description

用于实现标注的方法、装置、设备及存储介质
技术领域
本发明总体说来涉及信息技术领域,更具体地讲,涉及一种用于实现标注的方法、装置、设备及存储介质。
背景技术
随着信息技术和互联网的飞速发展,各行业甚至各商家都逐渐积累了海量数据,从而能够在越来越多的场景下对数据进行利用,以使得数据更好地驱动生产、经营、生活等各种活动。为了能够更好地利用数据(例如,应用于机器学习、数据挖掘等),通常需要对这些数据进行标注。
目前,主要是通过人工标注的方式,对数据进行人为标注,以得到数据的标注结果。鉴于人工标注的重要性,需要一种能够便于用户进行人工标注的方案。
发明内容
本发明的一个目的在于提供一种用于实现标注的方法及装置,以解决现有技术存在的上述问题。
根据本发明的第一个方面,提出了一种用于实现标注的方法,包括:在显示设备上显示待标注对象;检测用户通过标注工具在待标注对象上执行的标注操作,其中,标注工具由光标转换而来;基于标注操作来确定标注位置和标注内容;以及在待标注对象上关联地反映标注位置和标注内容。
可选地,在待标注对象上关联地反映标注位置和标注内容的步骤包括:在待标注对象上显示指示标注位置的标记,并在标记附近显示相应的标注内容,并且,方法还包括:随着标注工具远离或靠近标注位置,隐藏或呈现标注内容。
可选地,标注工具用于顺序标出多个标注位置,并且,标注工具在视觉上提示关于接下来将标出的标注位置的标注序号。
可选地,在待标注对象上关联地反映标注位置和标注内容的步骤包括:在待标注对象上关联地反映标注位置、标注内容和标注工具。
可选地,在待标注对象上关联地反映标注位置和标注内容的步骤包括:在待标注对象上显示指示标注位置的标记,在标记附近显示相应的标注序号,并将标注工具在视觉上所提示的标注序号加1。
可选地,方法还包括:响应于用户对任意标记执行的删除操作,删除任意标记及其附近所显示的标注序号,相应地调整在待标注对象上显示的大于所删除的标注序号的标注序号和标注工具在视觉上所提示的标注序号。
可选地,标注工具用于为标注位置所对应的图像指定标签,并且,标注工具指定的标签根据用户的标签选择操作而切换。
可选地,在待标注对象上关联地反映标注位置和标注内容的步骤包括:在待标注对象上显示指示标注位置的标记,在标记附近显示相应的标签。
可选地,标注位置包括一个或多个标注点和/或标注区域。
可选地,标注工具用于为标注位置所对应的文本指定标签,并且,标注工具指定的标签根据用户的标签选择操作而切换。
可选地,在待标注对象上关联地反映标注位置和标注内容的步骤包括:在待标注对象上利用与指定标签对应的颜色来突出显示标注位置所对应的文本。
根据本发明的第二个方面,还提供了一种用于实现标注的装置,包括:显示模块,用于在显示设备上显示待标注对象;检测模块,用于检测用户通过标注工具在待标注对象上执行的标注操作,其中,标注工具由光标转换而来;以及确定模块,用于基于标注操作来确定标注位置和标注内容,其中,显示模块在待标注对象上关联地反映标注位置和标注内容。
可选地,显示模块在待标注对象上显示指示标注位置的标记,并在标记附近显示相应的标注内容,并且,随着标注工具远离或靠近标注位置,显示模块隐藏或呈现标注内容。
可选地,标注工具用于顺序标出多个标注位置,并且,标注工具在视觉上提示关于接下来将标出的标注位置的标注序号。
可选地,显示模块在待标注对象上关联地反映标注位置、标注内容和标注工具。
可选地,显示模块在待标注对象上显示指示标注位置的标记,在标记附近显示相应的标注序号,并将标注工具在视觉上所提示的标注序号加1。
可选地,装置还包括:删除模块,用于响应于用户对任意标记执行的删除操作,删除任意标记及其附近所显示的标注序号;以及调整模块,用于相应地调整在待标注对象上显示的大于所删除的标注序号的标注序号和标注工具在视觉上所提示的标注序号。
可选地,标注工具用于为标注位置所对应的图像指定标签,并且,标注工具指定的标签根据用户的标签选择操作而切换。
可选地,显示模块在待标注对象上显示指示标注位置的标记,在标记附近显示相应的标签。
可选地,标注位置包括一个或多个标注点和/或标注区域。
可选地,标注工具用于为标注位置所对应的文本指定标签,并且,标注工具指定的标签根据用户的标签选择操作而切换。
可选地,显示模块在待标注对象上利用与指定标签对应的颜色来突出显示标注位置所对应的文本。
根据本发明的第三个方面,还提供了一种计算设备,包括:显示设备;处理器;以及存储器,其上存储有可执行代码,当可执行代码被处理器执行时,使处理器执行如本发明第一个方面述及的方法。
根据本发明的第四个方面,还提供了一种非暂时性机器可读存储介质,其上存储有可执行代码,当可执行代码被电子设备的处理器执行时,使处理器执行如本发明第一个方面述及的方法。
本发明通过为用户提供便于用户执行标注操作的界面,根据用户的操作,在界面中的待标注对象上关联地呈现相应的标注结果(标注位置和标注内容),使得用户能够方便且可视化地获知标注结果,从而可以便于用户对标注结果进行调整,进而可以提高标注效率。
附图说明
通过下面结合示例性地示出实施例的附图进行的描述,本发明示例性实施例的上述和其他目的和特点将会变得更加清楚,其中:
图1是示出了根据本发明示例性实施例的用于实现标注的方法的流程图。
图2A至图2C是示出了利用标注工具实现顺序标注的示例图。
图3A至图3C是示出了利用标注工具为图像指定标签的示例图。
图4A至图4E是示出了利用标注工具为文本指定标签的示例图。
图5是示出了根据本发明示例性实施例的用于实现标注的装置的框图。
图6是示出了根据本发明示例性实施例的可用于实现上述方法的数据处理的计算设备的框图。
具体实施方式
现将详细参照本发明的实施例,所述实施例的示例在附图中示出,其中,相同的标号始终指的是相同的部件。以下将通过参照附图来说明所述实施例,以便解释本发明。
图1是示出了根据本发明示例性实施例的用于实现标注的方法的流程图。图1所示的方法可以由客户端执行,客户端可以为用户提供便于用户执行标注操作的界面,并根据用户的操作,在界面上呈现相应的标注结果。其中,客户端可以是面向用户的标注平台,该标注平台可以以类似APP的形式安装在手机、PC、平板电脑等终端设备上,或者该标注平台也可以是网页应用,用户可以通过手机、PC、平板电脑等终端设备上的浏览器打开相应网页,使用标注平台。
参见图1,在步骤S110,在显示设备上显示待标注对象。
此处述及的显示设备可以是指位于PC、智能手机、平板电脑等终端设备上的显示装置。其中,显示设备可以显示由计算机生成的图像、文本,可以包括各种类型的图像设备,例如阴极射线管(CRT)、液晶显示器(LCD)、发光二极管(LED)(包括有机发光二极管(OLED))、投射系统等等与其他支持电子装置(例如DAC、ADC、信号处理器等等)的集合。
待标注对象可以是指服务器下发给用户以期望用户对其进行标注的对象。作为示例,服务器可以是标注平台的形式,该标注平台可以为用户提供标注界面,并向用户下发待标注对象,由用户在标注平台为其提供的标注界面内执行标注任务,即,为待标注对象进行人工标注。其中,标注任务可以是标注平台自身所发布的,也可以由有数据标注需求的客户在标注平台上发布标注任务。例如,客户可以将需要标注的数据上传至标注平台,并指定标注问题,由标注平台将其下发给能够执行人工标注的用户。
待标注对象可以是图像,也可以是文档。至于需要在待标注对象中进行标注的物体(或项目)、标注形式(如标注位置)以及相应的标注内容,与标注任务的具体标注需求有关。一般来说,标注任务涉及的标注问题主要可以分为分类问题和识别问题。具体又可以细分为图像分类、物体画框、语义分割、图像注释、人脸打点、视频追踪等多种标注问题。其中,图像分类可以是指根据图像内容,选择图像或图像中物体所属的标签,比如所属场景标签、物体种类标签、物体属性标签、人物性别标签、人物年龄标签等等;物体画框可以是指根据标注需求,对图像中的目标物体进行画框,比如图像中的车辆、车牌、行人、道路、建筑、船只、文字、人体部位等画框并打上对应标签;语义分割可以是指根据标注需求,使用用多边形标注图像中目标物体的轮廓,返回所有轮廓组成点的坐标;图像注释可以是指针对图像中具体情景及标注需求,为每张图像生成中文标注语句;人脸打点可以是指针对图像中的人脸及标注需求,对人脸的关键位置,如脸廓、眉毛、眼睛、嘴唇进行定位并打点;视频追踪可以是指从目标视频中按指定频率抽取关键帧,然后对每帧进行画框标注,各帧中同一目标的标签和序号保持一致。
在步骤S120,检测用户通过标注工具在待标注对象上执行的标注操作。
此处述及的标注工具是由光标转换而来的。具体地说,响应于用户的操作(例如,用户对“标注工具”按钮的点击操作和/或用户对候选标签的点击操作),光标可以转换为能够借由其执行标注操作的标注工具。需要说明的是,此处述及的转换是指光标所能实现的功能的转换,优选地,可伴随光标形式的改变,然而,本发明并没有对光标的形状是否变化进行限定。也就是说,在光标转换为标注工具时,光标可以改变其形状,也可以不改变,对此本公开不做限定。在光标被转换为标注工具之后,可检测用户通过标注工具在待标注对象上的诸如移动和点击等标注操作,从而能够定位用户的标注位置,并确定相应的标注内容。
举例来说,可以在显示设备上显示一个或多个功能控件,用户可以通过针对某一功能控件的操作来切换至标注状态,也可以通过针对一系列相关功能控件的操作来切换至标注状态。响应于用户对功能控件执行的操作,光标可以转换为能够实现相应标注功能的标注工具。如图3A所示,响应于用户点击“标签点工具”按钮的操作,可将光标转换为用于指定当前标签(例如,默认的“这是家猪”)的标注工具,作为示例,光标的形状可同时变为诸如钢笔等形状。相应地,在这种情况下,标注工具的点击位置即会被标注为家猪。此外,在按钮“标签点工具”被按下的同时,如果用户将光标移出待标注对象而到达选择标签的区域,则光标从标注工具恢复为普通的选择工具,用户可利用光标来重新选择当前标签(例如,更换为“这是黑猪”),此后,随着光标再次移动到待标注对象内,光标重新被转换为用于标注黑猪的标注工具。应理解,上述示例并非用于限制本发明示例性实施例中光标转换为标注工具的方式,例如,用户可首先选择当前标签,然后再按下“标签点工具”按钮。在图3A的示例中,还可存在诸如“选择”、“撤销”、“重做”、“删除”、“放大”、“缩小”、“移动图片”等功能按钮,响应于用户选中不同的功能按钮,光标可以转换为能够实现所选中的功能按钮所对应的功能的工具。例如,响应于用户选中“放大”这一功能按钮,光标可以转换为用于实现放大功能的工具,并且光标可以变为诸如放大镜等形状,用户可以通过点击或滚轮,对选中区域进行放大。
在步骤S130,基于标注操作来确定标注位置和标注内容。
标注位置和标注内容的确定均取决于用户在相应场景下利用标注工具执行的标注操作。用户可以在了解标注需求(例如标注任务的标注问题)的基础上,基于自身认知,确定在待标注对象中执行标注的标注位置和/或标注内容,其中,标注位置可以用于指示待标注对象中的标注物体(或者标注项目)。例如,在标注需求是对图像中的猪脸进行标注的情况,标注位置可以用来指示用户认为是猪脸的点击位置,即在正确的标注下,标注位置应该是猪脸所在位置。至于标注内容的具体内容信息则与标注任务的具体标注需求以及用户的认知有关,对此不再赘述。在本发明中,标注位置和标注内容可以视为一个完整的标注结果。
可以根据检测到的用户在待标注对象上执行的标注操作,来确定标注位置和标注内容。根据标注需求不同,标注位置的形式也不尽相同。一般来说,标注位置可以是一个标注点,也可以是一个标注区域(如可以是规则或不规则的多边形区域)。例如,在标注需求是对待标注图像中的人眼进行标注的情况下,标注位置可以是一个标注点,如圆点。再例如,在标注需求是对待标注图像中目标物体的轮廓进行标注的情况下,标注位置可以是包括物体的轮廓在内的一个标注区域,如可以是规则的多边形区域(如方形区域),也可以是一个不规则的多边形区域。因此,所确定的标注位置可以包括一个或多个标注点和/或标注区域。
可以提供多个候选内容,供用户选取,用户选中的候选内容可以作为当前标注内容。作为示例,可以将多个候选内容中第一个候选内容作为默认内容,默认内容可以视为系统默认指定的标注内容,用户可以通过操作来切换标注内容。另外,用户也可以添加自定义内容,添加的自定义内容可以作为候选内容,供用户选取,以丰富候选内容。例如,可以在显示设备上显示多个可供用户选取的候选标签,每个候选标签可以视为一个标注内容,用户可以从这多个候选标签中进行选取,以得到当前标注内容,其中,候选标签可以包括系统提供的标签,也可以包括用户添加的自定义标签。
在步骤S140,在待标注对象上关联地反映标注位置和标注内容。
标注位置和标注内容可以作为用户执行人为标注的人为标注结果。因此可以在待标注对象上关联地反映标注位置和标注内容,以使得用户能够方便且可视化地获知标注结果,从而可以便于用户对标注结果进行调整,进而可以提高标注效率。
在本发明中,可以通过多种方式在待标注对象上关联地反映标注位置和标注内容。
作为本发明的一个示例,可以是以可视化的形式同时在待标注对象上关联地反映标注位置和标注内容,例如,可以在待标注对象上显示指示标注位置的标记,并在标记附近显示相应的标注内容。并且,标注内容可以不是一成不变的,如可以随着标注工具远离或靠近标注位置,隐藏或呈现标注内容。
作为本发明的另一个示例,除了直接显示标注内容之外,还可以是通过提示标注内容的形式在待标注对象上关联地反映标注位置和标注内容。例如,可以仅在待标注对象上显示指示标注位置的标记(可以是圆点,也可以是线框),至于标注内容则可通过其能够被提示的形式来呈现。举例来说,在待标注对象是一段文本,标注问题是对一段文本中词语的词性进行标注时,不同的标注内容(代词、名词、动词等)可以对应不同的颜色,例如代词可以对应蓝色,动词可以对应浅绿色、名词可以对应粉红色,在为文本中的词语标注词性时,可以利用与标注内容(即期望标注的词性)所对应的颜色来突出显示标注位置所对应的文本。
另外,还可以通过多种其它方式在待标注对象上关联地反映标注位置和标注内容,此处不再赘述。
至此,结合图1就本发明的用于实现标注(人工标注)的方法的基本原理和实现流程做了简要说明。下面就本发明涉及的细节做进一步说明。
【标注工具】
实施例一、
本实施例可以应用于有顺序要求的标注场景,例如,可以应用于需要在待标注对象上进行多次标注,且需要掌握这多次标注的标注顺序的标注场景。并且,本实施例也可以应用于需要对待标注对象中的目标物体的数量进行统计的标注场景。另外,本实施例还可以适用其它多种应用场景,此处不再赘述。
在本实施例中,标注工具可以用于顺序标出多个标注位置,并且标注工具可以在视觉上提示关于接下来将要标出的标注位置的标注序号,例如,可以在标注工具旁边显示接下来将要标出的标注位置的标注序号。由此,在用户通过标注工具完成多个标注位置的标注的过程中,标注工具可以提示关于接下来将标出的标注位置的标注序号,以便于用户方便地掌握标注进度。
在执行步骤S140,在待标注对象上关联地反映标注位置和标注内容时,可以同时关联地反映标注工具。也就是说,可以在待标注对象上关联地反映标注位置、标注内容和标注工具。
此处述及的关联地反映标注位置、标注内容和标注工具,可以是指在待标注对象上关联地反映出利用标注工具顺序标出的所有标注位置、标注内容,并在待标注对象上反映出当前的标注工具状态。由此,用户不仅可以及时获知接下来要标出的标注位置的序号,对之前标记过的标注位置也有一个直观的认识,从而可以便于用户对之前的标注位置进行调整,以提高标注效率。
在本实施例中,可以在待标注对象上显示指示标注位置的标记,以表征标注位置。其中,标记可以是点(如可以是一圆点),也可以是一条线段,还可以是一个规则或不规则的线框,对此本公开不做限定。标注内容则可以是标注位置的标注顺序,也即标注序号。如可以在标记附近显示相应的标注序号,以在待标注对象上关联地反映标注位置和标注内容。
在待标注对象上关联地反映标注位置和标注内容时(即步骤S140),可以在待标注对象上显示指示标注位置的标记,在标记附近显示相应的标注序号,并将标注工具在视觉上所提示的标注序号加1。也就是说,标注工具在视觉上所提示的标注序号等于在待标注对象上所显示的所有标记中最大标注序号加1。
另外,响应于用户对任意标记执行的删除操作,可以删除任意标记及其附近所显示的标注序号,相应地调整在待标注对象上显示的大于所删除的标注序号的标注序号和标注工具在视觉上所提示的标注序号,以使得调整后的序号连续。
图2A至图2C是示出了利用标注工具实现顺序标注的示例图。
参见图2A,为用户提供的标注界面中可以包括“顺序点工具”这一按钮,响应于用户对“顺序点工具”按钮的点击操作,光标可以转换为能够借由其执行顺序标注操作的标注工具。另外,标注界面中还可以包括“选择”、“撤销”、“重做”、“删除”、“放大”、“缩小”等多个功能图标,以辅助用户进行标注,对此不再赘述。
如图2B所示,在用户点击“顺序点工具”按钮后,可将光标转换为用于实现顺序标注功能的标注工具,作为示例,光标的形状可以同时变为诸如钢笔等形状,钢笔旁显示的标注序号即为接下来要标注的序号,初始情况下钢笔旁显示的标注序号为1。
如图2C所示,用户通过标注工具在待标注对象上执行点击操作后,在待标注对象上可以显示一个指示标注位置的标记,如圆点,该标记附近会显示标注序号1,同时钢笔旁的标注序号变为接下来将要标出的标注位置的标注序号2,以此类推,可以完成多个标注位置的顺序标注。其中,如果删除已经标注过的任意一个标注位置,则其他标注位置的标注序号(包括已经标注的标注的标注序号以及钢笔旁的标注序号)会按照顺序填充。也就是说,若用户删除了一个标注位置,则标注序号比这个标注位置的标注序号大的标注位置及钢笔旁的标注序号均会减1。
实施例二、
在本实施例中,待标注对象为图像,也即待标注图像。本实施例主要应用于需要对待标注图像自身,或者对待标注图像中的目标物体(例如图像中的动物)指定标签的标注场景。
标注工具可以用于为标注位置所对应的图像指定标签。其中,标注位置对应的图像可以是整个待标注图像,也可以是待标注图像中的部分图像,如可以是待标注图像中标注位置附近所对应的图像。标签可以视为标注内容。如上文所述,标注位置可以是标注点,也可以是标注区域。因此,标注位置所对应的图像可以是待标注图像中的一个特征点,也可以是待标注图像中对应一个范围的特征区域。
可以提供多个可供用户选择的标签,也即候选标签,用户可以从这多个候选标签中选取合适的标签,作为标注位置所对应的图像的标注内容。其中,候选标签可以包括系统(如标注平台)提供的标签,也可以包括用户添加的自定义标签。
用户可以通过标注工具为标注位置所对应的图像指定标签。并且,标注工具所指定的标签不是一成不变的,其可以响应于用户的标签选择操作而切换。例如,用户可以通过标签选择操作选择不同的标签,以替代之前所选中的标签。在基于标注操作确定标注位置和标注内容(即标签)后,可以在待标注对象上显示指示标注位置的标记,并在标记附近显示相应的标签。作为示例,用户可通过选中显示的标签来对其进行修改。
图3A至图3C是示出了利用标注工具为图像指定标签的示例图。
参见图3A,待标注对象为图像,标注需求为对图像中的猪脸进行标注。为用户提供的标注界面中可以包括“标签点工具”这一按钮。为用户提供的标注界面中右侧为标签栏,标签栏内可以包括多个候选标签,并且用户也可以通过点击“添加标签”按钮添加自定义标签到标签栏内,以丰富标签栏内的标签。其中,标签栏内的第一个标签,也即最上面的标签,可以作为默认标签。另外,标注界面中还可以包括“选择”、“撤销”、“重做”、“删除”、“放大”、“缩小”等多个功能图标,以辅助用户进行标注,对此不再赘述。
参见图3B,响应于用户点击“标签点工具”按钮的操作,可将光标转换为用于指定当前标签(例如,默认的“这是家猪”)的标注工具,作为示例,光标的形状可同时变为诸如钢笔等形状。相应地,在这种情况下,标注工具的点击位置即会被标注为家猪。此外,在按钮“标签点工具”被按下的同时,如果用户将光标移出待标注对象而到达选择标签的区域,则光标从标注工具恢复为普通的选择工具,用户可利用光标来重新选择当前标签(例如,更换为“这是黑猪”),此后,随着光标再次移动到待标注对象内,光标重新被转换为用于标注黑猪的标注工具。另外,在按钮“标签点工具”被按下的情况下,用户利用标注根据完成一次标注后,如果未选择新的标签,而接着进行下一次标注,则标注工具的下一次点击位置会被标注为之前所选择的标签。应理解,上述示例并非用于限制本发明示例性实施例中光标转换为标注工具的方式,例如,用户也可首先选择当前标签,然后再按下“标签点工具”按钮。
如图3C所示,在标注工具点击某一个标注位置的情况下,在标注位置处显示指示该位置的标记的同时,所述标记旁边会出现该标记所对应的标签,表明这个标记所指示的标注位置所表征的特征。图3C中的“这是猪眼”即是表明该标记所指示的标注位置(即点所在位置)所表征的特征(猪眼)。这里,可选地,在标注工具离开上述标记的附近以进行后续标注操作时,所显示的标签可被隐藏。此后,若用户通过选择工具选中了某个标记,则所选中的标记附近会重新显示对应的标签,而未被选中的标记对应的标签可以隐藏。
实施例三、
在本实施例中,待标注对象为文本。标注工具主要用于对文本进行标注。例如,待标注对象可以是一段文本,标注问题可以是对文本中词语的词性进行标注,标注工具可以用来对文本中词语的词性进行标注。
标注工具可以用于为标注位置所对应的文本指定标签。可以提供多个可供用户选择的标签,也即候选标签,用户可以从这多个候选标签中选取合适的标签,作为标注位置所对应的文本的标注内容。其中,候选标签可以包括由系统提供的标签,也可以包括用户自行添加的标签,也即自定义标签。标签的内容与标注问题有关,如在需要对文本进行分词并打上合适的词性时,可以提供“代词”、“动词”、“名词”、“形容词”等多个可供用户选取的标签,并且用户也可以添加如“副词”、“介词”、“助词”等自定义标签。
用户可以通过标注工具为标注位置所对应的文本指定标签。并且,标注工具指定的标签不是一成不变的,其可以根据用户的标签选择操作而切换。作为示例,在确定标注位置和标注内容(即标签)后,可以在待标注对象上利用与指定标签对应的颜色来突出显示标注位置所对应的文本,以此实现标注位置和标注内容(即标签)在待标注对象上的关联呈现。
图4A至图4E是示出了利用标注工具为文本指定标签的示例图。
参见图4A,待标注对象为一段文本,标注需求为对文本进行分词并打上合适的词性标签。右侧标签栏内包括多个可供用户选取的标签,并且用户还可以通过“添加标签”按钮,添加自定义标签。虽然图4A至图4E中的标签是黑白显示的,但是应该知道,这仅是出于专利申请对附图要求的考虑,实际上,不同标签可以对应不同的颜色,例如,“无标签”可以对应灰色,“代词”可以对应蓝色,“动词”可以对应浅绿色,“名词”可以对应粉红色,“形容词”可以对应深绿色。并且,用户添加的自定义标签也可以具有与其它标签不同的颜色。
在用户将光标移动到标注界面中显示的待标注的文本中时,光标可以转换为用于选取文本并为选取的文本指定标签的标注工具。如图4B所示,用户可以通过标注工具实现文本的选取,所选取的文本的范围可以作为标注位置。具体来说,光标在转换为用于选取文本并为选取的文本指定标签的标注工具时,光标的形状可以保持不变,用户可以首先将光标移动到期望进行分词的位置,作为起始位置,然后可以通过拖动操作实现文本的选取,例如可以在保持光标处于点击状态下进行拖动,来实现文本的选取。在用户完成文本选取后,可以为选取的文本指定所选择的标签,如可以利用选取的标签对应的颜色来突出显示标注位置所对应的文本。其中,可以在点击状态中断时,认为文本选取完毕。
在用户将光标移出文本,而到达右侧的标签栏内时,光标则从标注工具恢复为普通的选择工具,用户可以利用光标重新选择当前标签。需要说明的是,在本实施例中,可以先选择标签再选择文本,也可以先选择文本再选择标签,对此本公开不做限定。
如图4C至图4E所示,在用户选中标注位置所对应的文本后,还可以对标注位置所对应的文本的范围进行调整。如图4C所示,在标注完成后,可以自动选中当前标注的文本,选中的文本的两侧均会出现一个手柄,用户可以通过拖动手柄左右移动,调整文本范围(如图4D所示)。如图4E所示,对于已经标注过的文本,用户可以点击再次选中该文本并通过调节手柄来改变选择范围。
至此,就本发明的用于实现标注的方法涉及的细节做了进一步说明。本发明的方法还可以实现为一种用于实现标注的装置。
图5是示出了根据本公开一实施例的用于实现标注的装置的结构的示例图。其中,用于实现标注的装置的功能模块可以由实现本发明原理的硬件、软件或硬件和软件的结合来实现。本领域技术人员可以理解的是,图5所描述的功能模块可以组合起来或者划分成子模块,从而实现上述发明的原理。因此,本文的描述可以支持对本文描述的功能模块的任何可能的组合、或者划分、或者更进一步的限定。
下面就用于实现标注的装置可以具有的功能模块以及各功能模块可以执行的操作做简要说明,对于其中涉及的细节部分可以参见上文相关描述,这里不再赘述。
参见图5,用于实现标注的装置500包括显示模块510、检测模块520以及确定模块530。
显示模块510用于在显示设备上显示待标注对象。检测模块520用于检测用户通过标注工具在待标注对象上执行的标注操作,其中,标注工具由光标转换而来。确定模块530用于基于标注操作来确定标注位置和标注内容。标注位置包括一个或多个标注点和/或标注区域。其中,在确定模块530确定标注位置和标注内容后,显示模块510还可以用于在待标注对象上关联地反映标注位置和标注内容。
作为示例,显示模块510可以在待标注对象上显示指示标注位置的标记,并在标记附近显示相应的标注内容,并且,随着标注工具远离或靠近标注位置,显示模块隐藏或呈现标注内容。
在本发明的一个实施例中,标注工具可以用于顺序标出多个标注位置,并且,标注工具在视觉上提示关于接下来将标出的标注位置的标注序号。显示模块510可以在待标注对象上关联地反映标注位置、标注内容和标注工具。例如,所述显示模块510可以在待标注对象上显示指示标注位置的标记,在标记附近显示相应的标注序号,并将所述标注工具在视觉上所提示的标注序号加1。
如图5所示,装置500还可以可选地包括图中虚线框所示的删除模块540和调整模块550。删除模块540用于响应于用户对任意标记执行的删除操作,删除任意标记及其附近所显示的标注序号。调整模块550用于相应地调整在待标注对象上显示的大于所删除的标注序号的标注序号和标注工具在视觉上所提示的标注序号。
在本发明的另一个实施例中,标注工具还可以用于为标注位置所对应的图像指定标签,并且,标注工具指定的标签根据用户的标签选择操作而切换。其中,显示模块在待标注对象上显示指示标注位置的标记,在标记附近显示相应的标签。
在本发明的再一个实施例中,标注工具还可以用于为标注位置所对应的文本指定标签,并且,标注工具指定的标签可以根据用户的标签选择操作而切换。可以在待标注对象上利用与指定标签对应的颜色来突出显示标注位置所对应的文本。
图6示出了根据本公开一实施例可用于实现上述方法的数据处理的计算设备的结构示意图。
参见图6,计算设备600包括显示设备610、存储器620和处理器630。
显示设备610可以是指位于PC、智能手机、平板电脑等计算设备上的显示装置。其中,显示设备610可以显示由计算机生成的图像、文本,可以包括各种类型的图像设备,例如阴极射线管(CRT)、液晶显示器(LCD)、发光二极管(LED)(包括有机发光二极管(OLED))、投射系统等等与其他支持电子装置(例如DAC、ADC、信号处理器等等)的集合。
处理器630可以是一个多核的处理器,也可以包含多个处理器。在一些实施例中,处理器630可以包含一个通用的主处理器以及一个或多个特殊的协处理器,例如图形处理器(GPU)、数字信号处理器(DSP)等等。在一些实施例中,处理器630可以使用定制的电路实现,例如特定用途集成电路(ASIC,Application Specific Integrated Circuit)或者现场可编程逻辑门阵列(FPGA,Field Programmable Gate Arrays)。
存储器620可以包括各种类型的存储单元,例如系统内存、只读存储器(ROM),和永久存储装置。其中,ROM可以存储处理器630或者计算机的其他模块需要的静态数据或者指令。永久存储装置可以是可读写的存储装置。永久存储装置可以是即使计算机断电后也不会失去存储的指令和数据的非易失性存储设备。在一些实施方式中,永久性存储装置采用大容量存储装置(例如磁或光盘、闪存)作为永久存储装置。另外一些实施方式中,永久性存储装置可以是可移除的存储设备(例如软盘、光驱)。系统内存可以是可读写存储设备或者易失性可读写存储设备,例如动态随机访问内存。系统内存可以存储一些或者所有处理器在运行时需要的指令和数据。此外,存储器620可以包括任意计算机可读存储媒介的组合,包括各种类型的半导体存储芯片(DRAM,SRAM,SDRAM,闪存,可编程只读存储器),磁盘和/或光盘也可以采用。在一些实施方式中,存储器620可以包括可读和/或写的可移除的存储设备,例如激光唱片(CD)、只读数字多功能光盘(例如DVD-ROM,双层DVD-ROM)、只读蓝光光盘、超密度光盘、闪存卡(例如SD卡、min SD卡、Micro-SD卡等等)、磁性软盘等等。计算机可读存储媒介不包含载波和通过无线或有线传输的瞬间电子信号。
存储器620上存储有可处理代码,当可处理代码被处理器630处理时,可以使处理器630执行上文述及的用于实现标注的方法。
上文中已经参考附图详细描述了根据本公开的用于实现标注的方法、装置以及计算设备。
此外,根据本公开的方法还可以实现为一种计算机程序或计算机程序产品,该计算机程序或计算机程序产品包括用于执行本发明的上述方法中限定的上述各步骤的计算机程序代码指令。
或者,本发明还可以实施为一种非暂时性机器可读存储介质(或计算机可读存储介质、或机器可读存储介质),其上存储有可执行代码(或计算机程序、或计算机指令代码),当所述可执行代码(或计算机程序、或计算机指令代码)被电子设备(或计算设备、服务器等)的处理器执行时,使所述处理器执行根据本发明的上述方法的各个步骤。
本领域技术人员还将明白的是,结合这里的公开所描述的各种示例性逻辑块、模块、电路和算法步骤可以被实现为电子硬件、计算机软件或两者的组合。
附图中的流程图和框图显示了根据本发明的多个实施例的系统和方法的可能实现的体系架构、功能和操作。在这点上,流程图或框图中的每个方框可以代表一个模块、程序段或代码的一部分,所述模块、程序段或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意,在有些作为替换的实现中,方框中所标记的功能也可以以不同于附图中所标记的顺序发生。例如,两个连续的方框实际上可以基本并行地执行,它们有时也可以按相反的顺序执行,这依所涉及的功能而定。也要注意的是,框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合,可以用执行规定的功能或操作的专用的基于硬件的系统来实现,或者可以用专用硬件与计算机指令的组合来实现。
以上已经描述了本发明的各实施例,上述说明是示例性的,并非穷尽性的,并且也不限于所披露的各实施例。在不偏离所说明的各实施例的范围和精神的情况下,对于本技术领域的普通技术人员来说许多修改和变更都是显而易见的。本文中所用术语的选择,旨在最好地解释各实施例的原理、实际应用或对市场中的技术的改进,或者使本技术领域的其它普通技术人员能理解本文披露的各实施例。

Claims (10)

1.一种用于实现标注的方法,其特征在于,包括:
在显示设备上显示待标注对象;
检测用户通过标注工具在待标注对象上执行的标注操作,其中,所述标注工具由光标转换而来;
基于标注操作来确定标注位置和标注内容;以及
在待标注对象上关联地反映标注位置和标注内容。
2.根据权利要求1所述的方法,其特征在于,在待标注对象上关联地反映标注位置和标注内容的步骤包括:在待标注对象上显示指示标注位置的标记,并在标记附近显示相应的标注内容,
并且,所述方法还包括:
随着所述标注工具远离或靠近所述标注位置,隐藏或呈现所述标注内容。
3.根据权利要求1所述的方法,其特征在于,所述标注工具用于顺序标出多个标注位置,并且,所述标注工具在视觉上提示关于接下来将标出的标注位置的标注序号。
4.根据权利要求3所述的方法,其特征在于,其中,在待标注对象上关联地反映标注位置和标注内容的步骤包括:在待标注对象上关联地反映标注位置、标注内容和标注工具。
5.根据权利要求4所述的方法,其特征在于,其中,在待标注对象上关联地反映标注位置和标注内容的步骤包括:在待标注对象上显示指示标注位置的标记,在标记附近显示相应的标注序号,并将所述标注工具在视觉上所提示的标注序号加1。
6.根据权利要求5所述的方法,其特征在于,还包括:
响应于用户对任意标记执行的删除操作,删除所述任意标记及其附近所显示的标注序号,相应地调整在所述待标注对象上显示的大于所删除的标注序号的标注序号和标注工具在视觉上所提示的标注序号。
7.根据权利要求1所述的方法,其特征在于,所述标注工具用于为标注位置所对应的图像指定标签,并且,所述标注工具指定的标签根据用户的标签选择操作而切换。
8.一种用于实现标注的装置,其特征在于,包括:
显示模块,用于在显示设备上显示待标注对象;
检测模块,用于检测用户通过标注工具在待标注对象上执行的标注操作,其中,所述标注工具由光标转换而来;以及
确定模块,用于基于标注操作来确定标注位置和标注内容,
其中,所述显示模块在所述待标注对象上关联地反映标注位置和标注内容。
9.一种计算设备,包括:
显示设备;
处理器;以及
存储器,其上存储有可执行代码,当所述可执行代码被所述处理器执行时,使所述处理器执行如权利要求1-7中任何一项所述的方法。
10.一种非暂时性机器可读存储介质,其上存储有可执行代码,当所述可执行代码被电子设备的处理器执行时,使所述处理器执行如权利要求1至7中任一项所述的方法。
CN201810636105.4A 2018-06-20 2018-06-20 用于实现标注的方法、装置、设备及存储介质 Pending CN108875020A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201810636105.4A CN108875020A (zh) 2018-06-20 2018-06-20 用于实现标注的方法、装置、设备及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810636105.4A CN108875020A (zh) 2018-06-20 2018-06-20 用于实现标注的方法、装置、设备及存储介质

Publications (1)

Publication Number Publication Date
CN108875020A true CN108875020A (zh) 2018-11-23

Family

ID=64339645

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810636105.4A Pending CN108875020A (zh) 2018-06-20 2018-06-20 用于实现标注的方法、装置、设备及存储介质

Country Status (1)

Country Link
CN (1) CN108875020A (zh)

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110457494A (zh) * 2019-08-01 2019-11-15 新华智云科技有限公司 数据标注方法、装置、电子设备及存储介质
CN110688844A (zh) * 2019-08-22 2020-01-14 阿里巴巴集团控股有限公司 一种文本标注方法及装置
CN111128323A (zh) * 2019-12-18 2020-05-08 中电云脑(天津)科技有限公司 医疗电子病例的标注方法、装置、设备及存储介质
CN111178021A (zh) * 2019-11-29 2020-05-19 厦门快商通科技股份有限公司 一种项目对齐标注工具创建方法及系统
CN111951554A (zh) * 2020-08-20 2020-11-17 北京嘀嘀无限科技发展有限公司 一种违停路段信息采集方法和系统
WO2021093345A1 (zh) * 2019-11-15 2021-05-20 五邑大学 高精度半自动化图像数据标注方法、电子装置及存储介质
CN113392263A (zh) * 2021-06-24 2021-09-14 上海商汤科技开发有限公司 一种数据标注方法及装置、电子设备和存储介质
CN114092709A (zh) * 2021-11-23 2022-02-25 北京百度网讯科技有限公司 一种识别图像中目标轮廓的方法、装置、设备及存储介质

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6457031B1 (en) * 1998-09-02 2002-09-24 International Business Machines Corp. Method of marking previously dictated text for deferred correction in a speech recognition proofreader
CN101739415A (zh) * 2008-11-25 2010-06-16 华中师范大学 一种面向浏览器的网页标注系统
CN101901258A (zh) * 2010-07-15 2010-12-01 北京协进科技发展有限公司 一种通过地图显示网页中地理信息的方法和装置
CN102799573A (zh) * 2012-06-27 2012-11-28 北京经舆典网络科技有限公司 网页批注的方法及系统
CN107609001A (zh) * 2017-07-18 2018-01-19 深圳天珑无线科技有限公司 智能终端及其标注显示方法、具有存储功能的装置
CN107729445A (zh) * 2017-09-30 2018-02-23 长城计算机软件与系统有限公司 一种基于html5的大文本阅读定位及显示方法

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6457031B1 (en) * 1998-09-02 2002-09-24 International Business Machines Corp. Method of marking previously dictated text for deferred correction in a speech recognition proofreader
CN101739415A (zh) * 2008-11-25 2010-06-16 华中师范大学 一种面向浏览器的网页标注系统
CN101901258A (zh) * 2010-07-15 2010-12-01 北京协进科技发展有限公司 一种通过地图显示网页中地理信息的方法和装置
CN102799573A (zh) * 2012-06-27 2012-11-28 北京经舆典网络科技有限公司 网页批注的方法及系统
CN107609001A (zh) * 2017-07-18 2018-01-19 深圳天珑无线科技有限公司 智能终端及其标注显示方法、具有存储功能的装置
CN107729445A (zh) * 2017-09-30 2018-02-23 长城计算机软件与系统有限公司 一种基于html5的大文本阅读定位及显示方法

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110457494A (zh) * 2019-08-01 2019-11-15 新华智云科技有限公司 数据标注方法、装置、电子设备及存储介质
CN110688844A (zh) * 2019-08-22 2020-01-14 阿里巴巴集团控股有限公司 一种文本标注方法及装置
WO2021093345A1 (zh) * 2019-11-15 2021-05-20 五邑大学 高精度半自动化图像数据标注方法、电子装置及存储介质
CN111178021A (zh) * 2019-11-29 2020-05-19 厦门快商通科技股份有限公司 一种项目对齐标注工具创建方法及系统
CN111128323A (zh) * 2019-12-18 2020-05-08 中电云脑(天津)科技有限公司 医疗电子病例的标注方法、装置、设备及存储介质
CN111951554A (zh) * 2020-08-20 2020-11-17 北京嘀嘀无限科技发展有限公司 一种违停路段信息采集方法和系统
CN113392263A (zh) * 2021-06-24 2021-09-14 上海商汤科技开发有限公司 一种数据标注方法及装置、电子设备和存储介质
CN114092709A (zh) * 2021-11-23 2022-02-25 北京百度网讯科技有限公司 一种识别图像中目标轮廓的方法、装置、设备及存储介质
CN114092709B (zh) * 2021-11-23 2023-10-31 北京百度网讯科技有限公司 一种识别图像中目标轮廓的方法、装置、设备及存储介质

Similar Documents

Publication Publication Date Title
CN108875020A (zh) 用于实现标注的方法、装置、设备及存储介质
JP2022191324A (ja) 電子デバイス上の手書き入力
US9411498B2 (en) Brush, carbon-copy, and fill gestures
CN107665047A (zh) 用于在触敏副显示器处动态地提供用户界面控件的系统、设备和方法
US9411504B2 (en) Copy and staple gestures
CN102999274B (zh) 语义缩放动画
US9519356B2 (en) Link gestures
EP2529288B1 (en) Edge gestures
US20110185320A1 (en) Cross-reference Gestures
US20110191719A1 (en) Cut, Punch-Out, and Rip Gestures
CN105144067A (zh) 用于调节控件的外观的设备、方法和图形用户界面
CN106502638A (zh) 用于提供视听反馈的设备、方法和图形用户界面
CN109492635A (zh) 获取标注数据的方法、装置、设备及存储介质
CN105388998A (zh) 用于管理警报的尺寸减小的接口
CN105389107A (zh) 电子触摸通信
CN106415476A (zh) 输入设备和用户界面交互
JP6553418B2 (ja) 表示制御方法、表示制御装置及び制御プログラム
CN106502667B (zh) 一种渲染方法及装置
US20230244363A1 (en) Screen capture method and apparatus, and electronic device
KR101821982B1 (ko) 증강 현실 스킨의 평가
CN107977155A (zh) 一种手写识别方法、装置、设备和存储介质
JP2015135596A (ja) 情報処理装置及び情報処理プログラム
JP6237135B2 (ja) 情報処理装置及び情報処理プログラム
JP5304965B2 (ja) 画面検査装置、画面検査方法、及びプログラム
CN109074209A (zh) 用户界面的细节窗格

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination