KR102176443B1 - Method and Device for Data Labeling - Google Patents

Method and Device for Data Labeling Download PDF

Info

Publication number
KR102176443B1
KR102176443B1 KR1020190147554A KR20190147554A KR102176443B1 KR 102176443 B1 KR102176443 B1 KR 102176443B1 KR 1020190147554 A KR1020190147554 A KR 1020190147554A KR 20190147554 A KR20190147554 A KR 20190147554A KR 102176443 B1 KR102176443 B1 KR 102176443B1
Authority
KR
South Korea
Prior art keywords
area
areas
displayed
data labeling
job
Prior art date
Application number
KR1020190147554A
Other languages
Korean (ko)
Inventor
전문휘
Original Assignee
셀렉트스타 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 셀렉트스타 주식회사 filed Critical 셀렉트스타 주식회사
Priority to KR1020190147554A priority Critical patent/KR102176443B1/en
Application granted granted Critical
Publication of KR102176443B1 publication Critical patent/KR102176443B1/en

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04845—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range for image manipulation, e.g. dragging, rotation, expansion or change of colour
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04817—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance using icons
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44—Arrangements for executing specific programs
    • G06F9/451—Execution arrangements for user interfaces
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N20/00—Machine learning
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048—Indexing scheme relating to G06F3/048
    • G06F2203/04806—Zoom, i.e. interaction techniques or interactors for controlling the zooming operation

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Software Systems (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Artificial Intelligence (AREA)
  • Data Mining & Analysis (AREA)
  • Evolutionary Computation (AREA)
  • Medical Informatics (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Computing Systems (AREA)
  • Mathematical Physics (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

The present invention relates to a method and a device for data labeling. According to an embodiment of the present invention, the objective of the present invention is to provide a user interface for interaction with a user to perform data labeling related tasks comprising drawing a line and picking an object boundary, and based on this, secure high quality training data. The device comprises a display part and a control part.

Description

데이터 라벨링을 위한 방법 및 장치{Method and Device for Data Labeling}Method and Device for Data Labeling

본 실시예는 데이터 라벨링을 위한 방법 및 장치에 관한 것이다. 더욱 상세하게는, 데이터 라벨링과 관련하여 양질의 학습 데이터를 확보하기 위한 방법 및 장치에 관한 것이다.This embodiment relates to a method and apparatus for labeling data. More specifically, it relates to a method and apparatus for securing good quality learning data in relation to data labeling.

이 부분에 기술된 내용은 단순히 본 실시예에 대한 배경 정보를 제공할 뿐 종래기술을 구성하는 것은 아니다.The content described in this section merely provides background information on the present embodiment and does not constitute the prior art.

기계학습(machine learning)에 있어서, 학습방법과 알고리즘 이상으로 중요한 것은 학습을 위한 데이터이다. 따라서, 양질의 학습데이터를 많이 확보하는 것은 기계학습 분야에서 매우 중요하다.In machine learning, what is more important than learning methods and algorithms is the data for learning. Therefore, securing a lot of high-quality learning data is very important in the field of machine learning.

학습데이터를 얻기 위해서는, 일반적으로 로우 데이터(Raw Data)와, 로우 데이터에 대한 라벨링 정보가 필요하다. 라벨링 작업은 사람에 의하여 수행되어야 하므로, 기계학습을 연구하거나 개발하는 곳에서는 라벨링 작업을 수행하는 인력을 보유하기도 한다.In order to obtain training data, in general, raw data and labeling information for the raw data are required. Since the labeling work must be performed by humans, places that research or develop machine learning may have manpower to perform the labeling work.

하지만 라벨링은 전문지식 없이도 누구나 할 수 있는 일인 경우가 많으므로, 인건비의 절감을 위해 인터넷을 통해 다수의 작업자들에게 데이터를 분배하고, 라벨링 작업에 따른 보수를 지급하는 형태의 플랫폼이 등장하게 되었다. 예를 들면, 아마존(amazon)의 메커니컬 터크(Mechanical Turk)가 있다.However, since labeling is often something that anyone can do without specialized knowledge, a platform that distributes data to multiple workers through the Internet and pays compensation for labeling work has emerged to reduce labor costs. For example, Amazon's Mechanical Turk.

하지만, 기존의 플랫폼의 경우 작업자가 성실하게 라벨링을 수행했는지 검수하는 과정이 없어, 학습 데이터의 신뢰도를 보장할 수 없는 문제점이 존재한다. 따라서, 기존 플랫폼의 장점을 유지하면서도 학습 데이터의 신뢰도를 높일 수 있는 기술의 개발이 요구된다.However, in the case of the existing platform, there is a problem that the reliability of the learning data cannot be guaranteed because there is no process of inspecting whether the operator has sincerely performed the labeling. Therefore, it is required to develop a technology that can increase the reliability of learning data while maintaining the advantages of the existing platform.

본 실시예는, 선 그리기 및 물체 경계선 따기를 포함한 데이터 라벨링 관련 작업 수행을 위해 사용자와의 인터렉션을 위한 사용자 인터페이스를 제공하고, 이를 토대로, 양질의 학습 데이터를 확보하고자 하는 데 그 목적이 있다.An object of the present embodiment is to provide a user interface for interaction with a user to perform data labeling related tasks including drawing a line and picking an object boundary, and to secure high-quality learning data based on this.

본 실시예는, 데이터 라벨링 장치에 있어서, 복수의 영역을 포함한 사용자 인터페이스(User Interface)를 표시하는 디스플레이부; 및 상기 디스플레이부 상에 선 그리기 및 물체 경계선 따기를 포함한 데이터 라벨링 관련 작업 수행을 위해 사용자와의 인터렉션을 위한 상기 사용자 인터페이스가 표시되도록 제어하는 제어부를 포함하는 것을 특징으로 하는 데이터 라벨링 장치를 제공한다.In the present embodiment, a data labeling apparatus, comprising: a display unit for displaying a user interface including a plurality of areas; And a control unit for controlling the display of the user interface for interaction with a user to perform data labeling related tasks including drawing a line and picking an object boundary on the display unit.

또한, 본 실시예의 다른 측면에 의하면, 선 그리기 및 물체 경계선 따기를 포함한 데이터 라벨링 관련 작업 수행을 위해 사용자와의 인터렉션을 위한 사용자 인터페이스를 디스플레이부 상에 표시하는 단계; 사용자 입력을 수신하는 단계; 및 상기 사용자 입력 및 상기 사용자 인터페이스에 기반하여 작업 수행 대상에 대응하는 영역을 따라 복수의 점 간 연결로 이루어지는 선을 그리는 상기 작업이 수행되도록 제어하는 단계를 포함하는 것을 특징으로 하는 데이터 라벨링 방법을 제공한다.In addition, according to another aspect of the present embodiment, there is provided a method comprising: displaying a user interface for interaction with a user on a display unit in order to perform data labeling related tasks including drawing a line and picking an object boundary; Receiving a user input; And controlling the operation to be performed by drawing a line consisting of a plurality of points connected along an area corresponding to the object to be performed based on the user input and the user interface. do.

본 실시예에 의하면, 선 그리기 및 물체 경계선 따기를 포함한 데이터 라벨링 관련 작업 수행을 위해 사용자와의 인터렉션을 위한 사용자 인터페이스를 제공하고, 이를 토대로, 양질의 학습 데이터를 확보할 수 있는 효과가 있다.According to the present embodiment, a user interface for interaction with a user is provided to perform data labeling related tasks including drawing a line and picking an object boundary, and based on this, it is possible to secure high-quality learning data.

도 1은 본 실시예에 따른 데이터 라벨링 애플리케이션을 탑재한 단말기를 개략적으로 나타낸 블록 구성도이다.
도 2는 본 실시예에 따른 데이터 라벨링 장치를 개략적으로 나타낸 블록 구성도이다.
도 3은 본 실시예에 따른 데이터 라벨링 관련 작업을 예시한 도면이다.
도 4는 본 실시예에 따른 데이터 라벨링을 위한 사용자 인터페이스를 예시한 도면이다.
도 5 내지 도 12는 본 실시예에 따른 사용자 인터페이스를 이용한 데이터 라벨링 방법을 설명하기 위한 도면이다.
도 13은 본 실시예에 따른 데이터 라벨링 방법을 설명하기 위한 순서도이다.1 is a block diagram schematically showing a terminal equipped with a data labeling application according to the present embodiment.
2 is a block diagram schematically showing a data labeling apparatus according to the present embodiment.
3 is a diagram illustrating an operation related to data labeling according to the present embodiment.
4 is a diagram illustrating a user interface for data labeling according to the present embodiment.
5 to 12 are diagrams for explaining a data labeling method using a user interface according to the present embodiment.
13 is a flowchart illustrating a data labeling method according to the present embodiment.

이하, 본 발명의 일부 실시예들을 예시적인 도면을 통해 상세하게 설명한다. Hereinafter, some embodiments of the present invention will be described in detail through exemplary drawings.

도 1은 본 실시예에 따른 데이터 라벨링 애플리케이션을 탑재한 단말기를 개략적으로 나타낸 블록 구성도이다.1 is a block diagram schematically showing a terminal equipped with a data labeling application according to the present embodiment.

단말기(100)는 사용자의 키 조작에 따라 AP를 포함한 통신 중개장치를 이용하여 각종 데이터를 송수신할 수 있는 단말기를 말하는 것이며, 태블릿 PC(Tablet PC), 랩톱(Laptop), 개인용 컴퓨터(PC: Personal Computer), 스마트폰(Smart Phone), 개인휴대용 정보단말기(PDA: Personal Digital Assistant) 및 이동통신 단말기(Mobile Communication Terminal) 등 중 어느 하나일 수 있다. 즉, 단말기(100)는 AP 및 통신망을 이용하여 음성 또는 데이터 통신을 수행하는 단말기이며, AP 및 통신망을 경유하여 외부 장치와 통신하기 위한 프로그램 또는 프로토콜을 저장하기 위한 메모리, 해당 프로그램을 실행하여 연산 및 제어하기 위한 마이크로프로세서 등을 구비하고 있는 단말기를 의미한다. The terminal 100 refers to a terminal capable of transmitting and receiving various data using a communication intermediary device including an AP according to a user's key operation, and a tablet PC, a laptop, and a personal computer (PC). Computer), a smart phone, a personal digital assistant (PDA), and a mobile communication terminal. That is, the terminal 100 is a terminal that performs voice or data communication using an AP and a communication network, a memory for storing a program or protocol for communicating with an external device via the AP and a communication network, and an operation by executing the program And a terminal equipped with a microprocessor for controlling.

본 실시예에 따른 단말기(100)는 데이터 라벨링 애플리케이션(110)을 탑재하여 데이터 라벨링과 관련한 작업 수행 기능을 제공할 수 있다. 단말기(100)는 사용자의 조작 또는 명령에 의해 데이터 라벨링 애플리케이션(110)을 구동하며, 데이터 라벨링 애플리케이션(110)을 통해 데이터 라벨링과 관련한 작업 수행 기능을 제공할 수 있다.The terminal 100 according to the present embodiment may be equipped with a data labeling application 110 to provide a function to perform a task related to data labeling. The terminal 100 may drive the data labeling application 110 by a user's manipulation or command, and may provide a function of performing a task related to data labeling through the data labeling application 110.

한편, 본 실시예에 따른 단말기(100)에 데이터 라벨링 애플리케이션(110)이 탑재되는 형태에 대해 설명하자면, 단말기(100)는 데이터 라벨링 애플리케이션(110)을 임베디드(Embeded) 형태로 탑재한 상태로 구현되거나, 단말기(100) 내에 탑재되는 OS(Operating System)에 임베디드 형태로 탑재되거나, 사용자의 조작 또는 명령에 의해 단말기(100) 내의 OS에 인스톨되는 형태로 탑재될 수 있다. 다른 실시예에서, 단말기(100)는 웹 접속을 통해 상기의 데이터 라벨링 애플리케이션(110)으로의 접근이 이루어질 수 있다.On the other hand, to describe the form in which the data labeling application 110 is mounted on the terminal 100 according to the present embodiment, the terminal 100 is implemented in a state in which the data labeling application 110 is mounted in an embedded form. Alternatively, it may be mounted in an embedded form in an OS (Operating System) mounted in the terminal 100, or installed in the OS in the terminal 100 by a user's manipulation or command. In another embodiment, the terminal 100 may access the data labeling application 110 through a web connection.

이하, 단말기(100)가 데이터 라벨링과 관련한 작업 수행 기능을 제공하는 동작에 대하여 설명하도록 한다. 단말기(100)는 탑재된 데이터 라벨링 애플리케이션(110)이 실행되는 경우 선 그리기 작업 및 물체 경계선 따기 작업 중 어느 하나의 작업을 선택하기 위한 메뉴를 제공한다.Hereinafter, an operation of the terminal 100 providing a function of performing a task related to data labeling will be described. When the loaded data labeling application 110 is executed, the terminal 100 provides a menu for selecting one of a line drawing operation and an object boundary picking operation.

단말기(100)는 선택된 메뉴에 따라 선 그리기 작업 및 물체 경계선 따기 작업 중 어느 하나의 작업이 수행될 수 있도록 동작한다.The terminal 100 operates to perform any one of a line drawing operation and an object boundary picking operation according to the selected menu.

도 3은 본 실시예에 따른 데이터 라벨링 관련 작업을 예시한 도면이다. 한편, 도 3은 본 실시예에 따른 데이터 라벨링 관련 작업 중 선 그리기 작업을 예시하였으나, 물체 경계선 따기 작업 또한 사실상 그 대상에 있어서 차이가 존재할뿐 실질적인 작업 내용에 있어서는 동일하다.3 is a diagram illustrating an operation related to data labeling according to the present embodiment. Meanwhile, FIG. 3 illustrates a line drawing operation among the data labeling-related operations according to the present embodiment, but the object boundary line picking operation is also substantially the same in terms of the actual work contents, although there is a difference in the object.

도 3에 도시하듯이, 본 실시예에 따른 데이터 라벨링과 관련한 작업은 작업 수행 대상에 있는 선 형태의 특정 부분 위에 점을 찍으면서 선을 그리는 작업일 수 있다. 본 실시예에 있어서 작업에 따른 수행 결과는 이후, AI로 하여금 특정 사진을 학습 시 사진 내 선 혹은 물체 경계선을 인식하기 위해서는 필수적인 학습 데이터로서 활용될 수 있다.As shown in FIG. 3, the work related to data labeling according to the present embodiment may be a work of drawing a line while drawing a dot on a specific part of a line shape on a work target. In the present exemplary embodiment, the result of performing a task may be used as essential learning data in order for AI to recognize a line within a photo or an object boundary when learning a specific photo.

본 실시예에 있어서, 단말기(100)는 상기의 데이터 라벨링 관련 작업 수행을 위해 사용자와의 인터렉션을 위한 사용자 인터페이스를 제공하고, 이를 토대로, 양질의 학습 데이터가 제공될 수 있도록 동작한다. 한편, 본 실시예에 있어서, 데이터 라벨링 관련 작업 수행을 위한 사용자 인터페이스에 대한 자세한 설명은 도 2에서 후술토록 한다.In this embodiment, the terminal 100 provides a user interface for interaction with a user to perform the above-described data labeling-related task, and operates to provide high-quality learning data based on this. Meanwhile, in the present embodiment, a detailed description of the user interface for performing data labeling-related tasks will be described later in FIG. 2.

도 2는 본 실시예에 따른 데이터 라벨링 장치를 개략적으로 나타낸 블록 구성도이다. 이러한 데이터 라벨링 장치(200)는 실질적으로 데이터 라벨링 애플리케이션(102)을 탑재한 단말기(100)의 내부 도면을 나타내고 있으나, 이러한 데이터 라벨링 애플리케이션(102)을 탑재한 단말기(100)는 별도의 장치인 데이터 라벨링 장치(200)로 구현될 수 있으며, 데이터 라벨링 장치(200)에 포함된 구성 요소는 각각 소프트웨어 또는 하드웨어적인 요소로 구현될 수 있다. 즉, 도 2에 도시된 데이터 라벨링 장치(200)는 데이터 라벨링 애플리케이션(102)이 별도의 장치로 구현된 실시예로서, 본 실시예에 따른 데이터 라벨링 장치(200)는 입력부(210), 디스플레이부(220), 제어부(230) 및 메모리부(240)를 포함한다. 이때, 데이터 라벨링 장치(200)에 포함되는 구성요소는 반드시 이에 한정되는 것은 아니다.2 is a block diagram schematically showing a data labeling apparatus according to the present embodiment. The data labeling device 200 substantially shows an internal drawing of the terminal 100 equipped with the data labeling application 102, but the terminal 100 equipped with the data labeling application 102 is a separate device The labeling device 200 may be implemented, and components included in the data labeling device 200 may be implemented as software or hardware elements. That is, the data labeling device 200 shown in FIG. 2 is an embodiment in which the data labeling application 102 is implemented as a separate device, and the data labeling device 200 according to the present embodiment includes an input unit 210 and a display unit. 220, a control unit 230 and a memory unit 240. In this case, the components included in the data labeling apparatus 200 are not necessarily limited thereto.

입력부(210)는 사용자 인터페이스를 통해 데이터 라벨링 관련 작업 수행에 관한 사용자 입력정보를 수신한다. 즉, 입력부(210)는 사용자 인터페이스를 통해, 사용자 클릭정보 및 사용자 선택정보를 수신할 수 있다.The input unit 210 receives user input information on performing a data labeling related task through a user interface. That is, the input unit 210 may receive user click information and user selection information through a user interface.

한편, 입력부(210)는 데이터 라벨링 장치(200)의 구성, 기능 등에 따라 다양한 입력 수단으로 구현될 수 있다. 예를 들어, 데이터 라벨링 장치(200)가 스마트폰이나 태블릿 PC인 경우 입력부(210)는 터치스크린, 키패드, 음성인식센서 등의 입력 수단을 통해 구현될 수 있으며, 개인용 컴퓨터인 경우 마우스, 키보드 등의 입력 수단을 통해 구현될 수 있을 것이다. 특히 터치스크린이 적용되는 스마트폰의 경우 입력부(210)와 디스플레이부(220)는 터치스크린으로 대체될 수 있다. 입력부(210)는 사용자로부터 입력받은 선택명령을 제어부(230)에 전달한다.Meanwhile, the input unit 210 may be implemented as various input means depending on the configuration and function of the data labeling apparatus 200. For example, when the data labeling device 200 is a smartphone or a tablet PC, the input unit 210 may be implemented through input means such as a touch screen, a keypad, and a voice recognition sensor, and in the case of a personal computer, a mouse, a keyboard, etc. It may be implemented through the input means of. In particular, in the case of a smartphone to which a touch screen is applied, the input unit 210 and the display unit 220 may be replaced with a touch screen. The input unit 210 transmits a selection command input from the user to the control unit 230.

한편, GUI 요소에 대한 사용자의 '선택명령'은 입력부(210)가 마우스로 구현될 경우 해당 GUI 요소에 대한 '클릭', '드래그', '마우스 오버' 등의 이벤트일 수 있고, 입력부(210)가 터치스크린의 터치 센서로 구현되는 경우 '탭핑', '드래그', '플릭킹', '프레스' 등의 이벤트일 수 있다.On the other hand, the user's'selection command' for the GUI element may be an event such as'click','drag','mouse over', etc. for the corresponding GUI element when the input unit 210 is implemented with a mouse, and the input unit 210 ) Is implemented as a touch sensor of a touch screen, it may be an event such as'tapping','drag','flicking', and'press'.

여기서, 마우스 오버(Mouse over) 이벤트란 특정 오브젝트 위에 마우스 커서를 일정 시간 동안 위치시키는 동작을 말한다. 탭핑(Tapping) 이벤트는 선택된 오브젝트(숫자, 문자, 기호 또는 아이콘 등)을 가볍게 한번 눌렀다 띄는 동작으로서, 일반 PC에서의 마우스의 클릭과 같은 터치 입력을 말한다. 드래그(Drag) 이벤트는 특정 오브젝트를 선택하여 누른(터치) 상태에서 특정 위치로 이동한 후 띄는 동작으로서, 누른 상태에서 이동된 오브젝트는 이동 방향에 따라 지속적으로 이동한 후 띄는 동작에서 고정된다. 플릭킹(Flicking) 이벤트는 터치 후 특정 방향(상, 하, 좌, 우 또는 대각선) 중 일 방향으로 이동 후 접점이 띄어지는 동작으로서, 플릭킹 이벤트의 동작 방향 및 이동 속도에 따라 특정 동작의 처리가 수행된다. 예를 들어서, 플릭킹 이벤트는 페이지를 넘기는 듯한 동작에 대한 이벤트를 말한다. 프레스(Press) 이벤트는 터치 후 접점을 지속적으로 누르고 있는 동작에 대한 이벤트를 말하며, 해제 이벤트는 터치 후 접점이 띄어지는 동작에 대한 이벤트를 말한다.Here, the mouse over event refers to an action of placing the mouse cursor on a specific object for a certain period of time. The tapping event refers to a touch input, such as a mouse click on a general PC, as an action that lightly presses a selected object (number, letter, symbol, or icon, etc.) once. The drag event is an action that appears after selecting a specific object and moving to a specific position while pressing (touching) it. The object moved while pressing it is fixed in a prominent action after moving continuously according to the moving direction. A flicking event is an action in which a contact is released after moving in a specific direction (up, down, left, right or diagonal) after a touch, and a specific action is processed according to the motion direction and moving speed of the flicking event. Is performed. For example, a flicking event refers to an event for an action that looks like turning a page. The press event refers to an event for an operation of continuously pressing a contact point after a touch, and a release event refers to an event for an operation in which the contact is raised after a touch.

디스플레이부(220)는 입력부(210) 및 제어부(230)의 동작에 따른 결과를 디스플레이 수단을 통해 출력하는 기능을 수행한다.The display unit 220 performs a function of outputting a result of the operation of the input unit 210 and the control unit 230 through a display unit.

본 실시예에 있어서, 디스플레이부(220)는 데이터 라벨링 관련 작업 수행을 위해 사용자와의 인터렉션을 위한 사용자 인터페이스가 표시된다.In this embodiment, the display unit 220 displays a user interface for interaction with a user to perform data labeling related tasks.

도 4를 참조하면, 본 실시예에 따른 사용자 인터페이스는 복수의 영역을 포함하여 이루어진다. 한편, 도 4에서는 본 실시예에 따른 사용자 인터페이스가 크게 제1 내지 제4 영역을 포함하여 이루어지는 것으로 예시하여 설명하나 반드시 이에 한정되는 것은 아니다.Referring to FIG. 4, the user interface according to the present embodiment includes a plurality of regions. Meanwhile, in FIG. 4, the user interface according to the present exemplary embodiment is described by illustrating that it includes largely first to fourth regions, but is not limited thereto.

이러한, 사용자 인터페이스는 메모리(240)에 저장된 프로그램(Program)에 기반하여 제어부(230)에 의해 디스플레이부(220) 상에 표시될 수 있다.The user interface may be displayed on the display unit 220 by the controller 230 based on a program stored in the memory 240.

제1 영역은 데이터 라벨링 관련 작업 수행을 위한 작업 공간으로서, 작업 수행 대상, 작업 수행 대상에 대한 작업 수행과정 및 작업 수행결과를 포함한 작업 정보가 표시되는 영역이다.The first area is a work space for performing a work related to data labeling, and is an area in which work information including a work execution target, a work execution process for the work execution target, and work performance results are displayed.

제2 영역은 작업 수행 대상에 대한 확대 뷰 정보가 표시되는 영역으로서 현재, 작업 중인 작업 수행 대상의 특정 영역에 대한 확대 뷰 정보를 제공할 수 있다.The second area is an area in which enlarged view information on the object to be performed is displayed, and may provide enlarged view information on a specific area of the object to be performed.

제3 영역은 작업 수행 대상에 대한 전체 뷰 정보가 표시되는 영역이다.The third area is an area in which the entire view information on the object to be performed is displayed.

제4 영역은 작업 수행과 관련한 기능 모듈이 표시되는 영역이다. 예컨대, 본 실시예의 경우, 제4 영역에는 작업 수행 결과를 제출하기 위한 제1 기능모듈, 작업 수행 대상 내 점 생성을 위한 보조 기능을 수행하는 제2 기능모듈, 작업 수행 대상 내 생성된 점 간 이동을 위한 제3 기능모듈 및 작업 수행 대상 내 생성된 점을 삭제하기 위한 제4 기능 모듈 등이 표시될 수 있다. 또한, 제4 영역에는 작업 수행 대상에 대한 작업 성공 혹은 이와 무관하게 다음 작업 수행 대상으로 전환하기 위한 기능 모듈 등이 추가로 포함될 수 있다.The fourth area is an area in which functional modules related to task execution are displayed. For example, in the case of the present embodiment, in the fourth area, a first function module for submitting a task execution result, a second function module performing an auxiliary function for generating a point in the task execution target, and movement between points created in the task execution target A third function module for performing a task and a fourth function module for deleting a point created in the object to be performed may be displayed. In addition, the fourth area may additionally include a function module for switching to the next task execution target regardless of the success of the task on the task execution target.

이밖에도, 사용자 인터페이스 상에는 도움말 혹은 뒤로 가기와 같은 추가적인 기능 모듈이 표시되는 제5 영역이 포함될 수 있다. 이러한, 제5 영역은 제4 영역과 하나의 영역으로 구현될 수도 있다.In addition, a fifth area in which additional function modules such as help or go back are displayed may be included on the user interface. The fifth region may be implemented as one region with the fourth region.

도 5를 참조하면, 본 실시예에 따른 데이터 라벨링 장치(100)는 디스플레이부(220)의 사용자 인터페이스를 이용하여 데이터 라벨링 작업을 위한 작업 공간 및 다양한 기능을 제공하며, 이를 토대로, 양질의 학습 데이터가 보다 효율적으로 수집될 수 있도록 한다. 한편, 본 실시예에 따른 사용자 인터페이스를 이용한 데이터 라벨링 작업에 대한 구체적인 내용은 제어부(230)의 동작을 설명하는 과정에서 후술토록 한다.Referring to FIG. 5, the data labeling apparatus 100 according to the present embodiment provides a work space and various functions for data labeling using a user interface of the display unit 220, and based on this, high-quality learning data Can be collected more efficiently. Meanwhile, details of the data labeling operation using the user interface according to the present embodiment will be described later in the process of describing the operation of the controller 230.

제어부(230)는 디스플레이부(220) 상에 선 그리기 및 물체 경계선 따기를 포함한 데이터 라벨링 관련해 사용자와의 인터렉션을 위한 사용자 인터페이스가 표시되도록 제어한다. 즉, 제어부(230)는 입력부(210) 및 디스플레이부(220)와 연동하여, 데이터 라벨링 관련한 작업 수행을 위한 전반적인 제어 기능을 수행한다.The control unit 230 controls the display unit 220 to display a user interface for data labeling including drawing a line and picking an object boundary. That is, the control unit 230 interlocks with the input unit 210 and the display unit 220 to perform an overall control function for performing a task related to data labeling.

이하, 도 6 내지 도 12를 참조하여, 본 실시예에 따른 제어부(230)가 디스플레이부(220)의 사용자 인터페이스를 이용하여 데이터 라벨링 관련한 작업을 수행하는 방법에 대해 설명하도록 한다. 한편, 이하에서는, 데이터 라벨링 관련 작업 중 선 그리기 작업을 예시하여 설명하도록 한다.Hereinafter, with reference to FIGS. 6 to 12, a description will be given of a method of performing a data labeling-related operation by the control unit 230 according to the present embodiment by using the user interface of the display unit 220. Meanwhile, in the following, a line drawing operation among data labeling-related operations will be illustrated and described.

도 6에 도시하듯이, 본 실시예에 있어서 제어부(230)는 제1 영역에 표시된 작업 수행 대상 내 특정 영역에 대한 사용자 클릭정보(ex: 더블 클릭)가 수신되면 특정 영역 상에 작업 수행을 위한 핀 아이콘이 생성되도록 제어한다.As shown in FIG. 6, in the present embodiment, the controller 230 is configured to perform a task on a specific region when user click information (ex: double click) for a specific region within the task execution target displayed in the first region is received. Controls the creation of a pin icon.

제어부(230)는 생성된 핀 아이콘의 이동에 따라 점 위치가 조절되도록 제어한다.The controller 230 controls the point position to be adjusted according to the movement of the generated pin icon.

도 7에 도시하듯이, 본 실시예에 있어서, 제어부(230)는 핀 아이콘에 대한 이동정보 및 사용자 클릭정보에 기반하여 작업 수행 대상에 대응하는 영역을 따라 복수의 점 간 연결로 이루어지는 선을 그리는 작업이 수행되도록 제어한다.As shown in FIG. 7, in this embodiment, the control unit 230 draws a line consisting of a connection between a plurality of points along an area corresponding to the object to be performed based on movement information on the pin icon and user click information. Control the task to be performed.

예컨대, 본 실시예의 경우 핀 아이콘을 사진 속 선을 따라가며 이동시키며, 이동 중 더블 클릭을 통해 계속해서 점을 찍는 방식을 통해 선 그리기 작업을 수행할 수 있다.For example, in the present embodiment, the pin icon is moved by following the line in the picture, and the line drawing operation can be performed by continuously taking a dot by double-clicking while moving.

또한, 제어부(230)는 작업 수행 중 기능 모듈 내 + 버튼(ex: 제2 기능 모듈)을 추가 활용하여 점이 생성되도록 제어할 수 있다.In addition, the controller 230 may control the point to be generated by additionally utilizing a + button (eg, a second function module) in the function module while performing the task.

도 8에 도시하듯이, 제어부(230)는 작업 수행 과정에서 제1 영역에 대한 사용자 스와이프 동작이 인지되는 경우 작업 수행 대상이 확대 또는 이동되도록 제어할 수 있다. 예컨대, 제어부(230)는 제1 영역에 대한 플릭킹 이벤트 발생이 인지되는 경우 사진이 확대되도록 제어할 수 있다.As shown in FIG. 8, when a user swipe operation for the first area is recognized during the operation process, the control unit 230 may control the object to be performed to be enlarged or moved. For example, when the occurrence of a flicking event for the first area is recognized, the controller 230 may control the picture to be enlarged.

도 9에 도시하듯이, 제어부(230)는 복수의 점 간 연결로 이루어지는 선 내 어느 하나의 중간 영역(ex: 선 중간)에 대한 사용자 클릭정보를 수신하는 경우, 해당 중간 영역 상에 새로운 점이 생성되도록 제어할 수 있다.As shown in FIG. 9, when the controller 230 receives user click information for any one middle area (ex: middle of the line) in a line consisting of a connection between a plurality of points, a new point is created on the corresponding middle area. It can be controlled as much as possible.

또한, 제어부(230)는 기능 모듈 내 휴지통 버튼(ex: 제4 기능 모듈)을 활용하여 생성된 점이 삭제되도록 제어할 수 있다.In addition, the control unit 230 may control the generated point to be deleted using a trash can button (eg, a fourth function module) in the function module.

도 10에 도시하듯이, 제어부(230)는 기능 모듈 내 화살표 버튼(ex: 제3 기능 모듈)을 활용 시 작업 수행 대상 내 생성된 점 간 이동이 이루어지도록 제어할 수 있다. 이러한, 화살표 버튼은 좌 우 각각에 대응하는 고유의 버튼이 별개 구비될 수 있다.As illustrated in FIG. 10, when an arrow button (ex: a third function module) in the function module is used, the controller 230 may control movement between points generated in the object to be performed. The arrow buttons may have unique buttons corresponding to left and right respectively.

또한, 제어부(230)는 핀 아이콘이 한번 클릭되는 경우 해당 핀 아이콘을 작업하기 편한 상태로 회전이 가능하도록 제어할 수 있다.In addition, when the pin icon is clicked once, the controller 230 may control the pin icon to be rotated in an easy-to-operate state.

도 11에 도시하듯이, 제어부(230)는 선을 모두 그린 후 기능 모듈 내 비행기 버튼(ex: 제1 기능 모듈)을 누른 경우 작업 수행 결과물이 제출되도록 제어할 수 있다.As shown in FIG. 11, when the plane button (eg, a first function module) in the function module is pressed after drawing all the lines, the control unit 230 may control the result of performing the work to be submitted.

도 12에 도시하듯이, 제어부(230)는 기능 모듈 내 스킵 버튼을 터치 시 작업 수행 대상에 대한 작업 성공 여부와 무관하게 다음 작업 수행 대상으로 전환되도록 제어할 수 있다.As shown in FIG. 12, when a skip button in the function module is touched, the controller 230 may control the switch to the next task execution target regardless of whether the task is successful.

또한, 제어부(230)는 작업 완료 후 기능 모듈 내 클리어 버튼을 터치 시 다음 작업 수행 대상으로 전환되도록 제어할 수 있다.In addition, the controller 230 may control to switch to the next task execution target when the clear button in the function module is touched after the task is completed.

메모리(240)는 데이터 라벨링 작업 수행과 관련한 다양한 데이터가 저장될 수 있다. 예컨대, 메모리(240) 상에는 데이터 라벨링 작업 수행 시 사용자 입력에 대응되는 기능을 수행하기 위한 프로그램 등이 포함될 수 있다. The memory 240 may store various data related to performing a data labeling operation. For example, a program for performing a function corresponding to a user input when performing a data labeling operation may be included on the memory 240.

도 13은 본 실시예에 따른 데이터 라벨링 방법을 설명하기 위한 순서도이다.13 is a flowchart illustrating a data labeling method according to the present embodiment.

데이터 라벨링 장치(200)는 선 그리기 및 물체 경계선 따기를 포함한 데이터 라벨링 관련 작업 수행을 위해 사용자와의 인터렉션을 위한 사용자 인터페이스를 디스플레이부(220) 상에 표시한다(S1302). 단계 S1302에서 데이터 라벨링 장치(200)는 데이터 라벨링 관련 작업 수행을 위한 작업 공간인 제1 영역, 작업 수행 대상에 대한 확대 뷰 정보가 표시되는 영역인 제2 영역, 작업 수행 대상에 대한 전체 뷰 정보가 표시되는 영역인 제3 영역, 작업 수행과 관련한 기능 모듈이 표시되는 영역인 제4 영역을 포함하는 사용자 인터페이스를 디스플레이부(220) 상에 표시한다.The data labeling apparatus 200 displays a user interface for interaction with a user on the display 220 to perform data labeling-related tasks including drawing a line and picking an object boundary (S1302). In step S1302, the data labeling apparatus 200 includes a first area, which is a work space for performing data labeling-related work, a second area, which is an area in which enlarged view information on the work is performed, and the entire view information on the work execution target. A user interface including a third area, which is an area to be displayed, and a fourth area, which is an area for displaying a function module related to performing a task, is displayed on the display unit 220.

데이터 라벨링 장치(200)는 사용자 인터페이스를 통해 데이터 라벨링 관련 작업 수행에 관한 사용자 입력정보를 수신한다(S1304).The data labeling apparatus 200 receives user input information regarding performing a data labeling related task through a user interface (S1304).

데이터 라벨링 장치(200)는 단계 S1304의 사용자 입력정보 및 단계 S1302의 사용자 인터페이스에 기반하여 작업 수행 대상에 대응하는 영역을 따라 복수의 점간 연결로 이루어지는 선을 그리는 작업이 수행되도록 제어한다(S1306).The data labeling apparatus 200 controls the operation of drawing a line consisting of a plurality of point-to-point connections along an area corresponding to the object to be performed, based on the user input information in step S1304 and the user interface in step S1302 (S1306).

여기서, 단계 S1302 내지 S1304는 앞서 설명된 데이터 라벨링 장치(200)의 각 구성요소의 동작에 대응되므로 더 이상의 상세한 설명은 생략한다.Here, since steps S1302 to S1304 correspond to the operation of each component of the data labeling apparatus 200 described above, further detailed description will be omitted.

도 13에서는 각각의 과정을 순차적으로 실행하는 것으로 기재하고 있으나, 반드시 이에 한정되는 것은 아니다. 다시 말해, 도 13에 기재된 과정을 변경하여 실행하거나 하나 이상의 과정을 병렬적으로 실행하는 것으로 적용 가능할 것이므로, 도 13은 시계열적인 순서로 한정되는 것은 아니다.In FIG. 13, it is described that each process is sequentially executed, but the present invention is not limited thereto. In other words, since it is possible to change and execute the processes illustrated in FIG. 13 or execute one or more processes in parallel, FIG. 13 is not limited to a time-series order.

한편, 도 13에 기재된 데이터 라벨링 방법은 프로그램으로 구현되고 컴퓨터의 소프트웨어를 이용하여 읽을 수 있는 기록매체(CD-ROM, RAM, ROM, 메모리 카드, 하드 디스크, 광자기 디스크, 스토리지 디바이스 등)에 기록될 수 있다.Meanwhile, the data labeling method described in FIG. 13 is implemented as a program and recorded on a recording medium (CD-ROM, RAM, ROM, memory card, hard disk, magneto-optical disk, storage device, etc.) that can be read using software of a computer. Can be.

이상의 설명은 본 실시예의 기술 사상을 예시적으로 설명한 것에 불과한 것으로서, 본 실시예가 속하는 기술 분야에서 통상의 지식을 가진 자라면 본 실시예의 본질적인 특성에서 벗어나지 않는 범위에서 다양한 수정 및 변형이 가능할 것이다. 따라서, 본 실시예들은 본 실시예의 기술 사상을 한정하기 위한 것이 아니라 설명하기 위한 것이고, 이러한 실시예에 의하여 본 실시예의 기술 사상의 범위가 한정되는 것은 아니다. 본 실시예의 보호 범위는 아래의 청구범위에 의하여 해석되어야 하며, 그와 동등한 범위 내에 있는 모든 기술 사상은 본 실시예의 권리범위에 포함되는 것으로 해석되어야 할 것이다.The above description is merely illustrative of the technical idea of the present embodiment, and those of ordinary skill in the technical field to which the present embodiment belongs will be able to make various modifications and variations without departing from the essential characteristics of the present embodiment. Accordingly, the present exemplary embodiments are not intended to limit the technical idea of the present exemplary embodiment, but are illustrative, and the scope of the technical idea of the present exemplary embodiment is not limited by these exemplary embodiments. The scope of protection of this embodiment should be interpreted by the following claims, and all technical ideas within the scope equivalent thereto should be interpreted as being included in the scope of the present embodiment.

100: 단말기
110: 데이터 라벨링 애플리케이션
200: 데이터 라벨링 장치 210: 입력부
220: 디스플레이부 230: 제어부
240: 메모리부100: terminal
110: data labeling application
200: data labeling device 210: input unit
220: display unit 230: control unit
240: memory unit

Claims (9)

데이터 라벨링 장치에 있어서,
복수의 영역을 포함한 사용자 인터페이스(User Interface)를 표시하는 디스플레이부; 및
상기 디스플레이부 상에 선 그리기 및 물체 경계선 따기를 포함한 데이터 라벨링 관련해 사용자와의 인터렉션을 위한 상기 사용자 인터페이스가 표시되도록 제어하는 제어부를 포함하되,
상기 제어부는,
상기 복수의 영역 중 제1 영역에 상기 데이터 라벨링 관련 작업 수행 대상, 상기 작업 수행 대상에 대한 작업 수행과정 및 작업 수행결과를 포함한 작업 정보가 표시되도록 하고,
상기 복수의 영역 중 제2 영역에 상기 작업 수행 대상에 대한 확대 뷰 정보가 표시되도록 하며,
상기 복수의 영역 중 제3 영역에 상기 작업 수행 대상에 대한 전체 뷰 정보가 표시되도록 하고,
상기 복수의 영역 중 제4 영역에 상기 작업 수행과 관련한 기능 모듈이 표시되도록 하며,
상기 특정 영역 상에 상기 작업 수행을 위한 핀 아이콘에 대한 이동정보 및 사용자 클릭정보에 기반하여, 상기 작업 수행 대상에 대응하는 영역을 따라 복수의 점 간 연결로 이루어지는 선을 그리는 상기 작업이 수행되도록 하고,
상기 작업 수행 과정에서 상기 기능 모듈에 대한 사용자 클릭정보를 추가 활용하여 상기 작업 수행을 위한 상기 점이 생성되도록 제어하는 것을 특징으로 하는 데이터 라벨링 장치.In the data labeling device,
A display unit that displays a user interface including a plurality of areas; And
A control unit for controlling to display the user interface for interaction with a user in relation to data labeling including drawing a line and picking an object boundary on the display unit,
The control unit,
In a first area of the plurality of areas, job information including a data labeling-related job execution target, a job execution process for the job execution target, and a job execution result are displayed,
Enlarged view information on the object to be performed is displayed in a second area of the plurality of areas,
The entire view information on the object to be performed is displayed in a third area among the plurality of areas,
A function module related to the task execution is displayed in a fourth area among the plurality of areas,
On the specific area, based on movement information for the pin icon for performing the job and user click information, the job is performed by drawing a line consisting of a connection between a plurality of points along an area corresponding to the job execution target, and ,
And controlling the point for performing the task to be generated by additionally utilizing user click information on the function module in the process of performing the task. 삭제delete 제 1항에 있어서,
상기 제어부는,
상기 제1 영역에 표시된 상기 작업 수행 대상 내 특정 영역에 대한 사용자 클릭정보가 수신되면 상기 특정 영역 상에 상기 작업 수행을 위한 핀 아이콘이 생성되도록 제어하는 것을 특징으로 하는 데이터 라벨링 장치.The method of claim 1,
The control unit,
And controlling to generate a pin icon for performing the task on the specific region when user click information on a specific region within the object to be performed is received displayed in the first region. 삭제delete 삭제delete 데이터 라벨링 장치에 있어서,
복수의 영역을 포함한 사용자 인터페이스(User Interface)를 표시하는 디스플레이부; 및
상기 디스플레이부 상에 선 그리기 및 물체 경계선 따기를 포함한 데이터 라벨링 관련해 사용자와의 인터렉션을 위한 상기 사용자 인터페이스가 표시되도록 제어하는 제어부를 포함하되,
상기 제어부는,
상기 복수의 영역 중 제1 영역에 상기 데이터 라벨링 관련 작업 수행 대상, 상기 작업 수행 대상에 대한 작업 수행과정 및 작업 수행결과를 포함한 작업 정보가 표시되도록 하고,
상기 복수의 영역 중 제2 영역에 상기 작업 수행 대상에 대한 확대 뷰 정보가 표시되도록 하며,
상기 복수의 영역 중 제3 영역에 상기 작업 수행 대상에 대한 전체 뷰 정보가 표시되도록 하고,
상기 복수의 영역 중 제4 영역에 상기 작업 수행과 관련한 기능 모듈이 표시되도록 하며,
상기 특정 영역 상에 상기 작업 수행을 위한 핀 아이콘에 대한 이동정보 및 사용자 클릭정보에 기반하여, 상기 작업 수행 대상에 대응하는 영역을 따라 복수의 점 간 연결로 이루어지는 선을 그리는 상기 작업이 수행되도록 하고,
상기 복수의 점 간 연결로 이루어지는 선 내 어느 하나의 중간 영역에 대한 사용자 클릭정보를 수신하는 경우, 상기 중간 영역 상에 새로운 점이 생성되도록 하며,
상기 기능 모듈에 대한 사용자 클릭정보를 활용하여 상기 새로운 점이 삭제되도록 제어하는 것을 특징으로 하는 데이터 라벨링 장치.In the data labeling device,
A display unit that displays a user interface including a plurality of areas; And
A control unit for controlling to display the user interface for interaction with a user in relation to data labeling including drawing a line and picking an object boundary on the display unit,
The control unit,
In a first area of the plurality of areas, job information including a data labeling-related job execution target, a job execution process for the job execution target, and a job execution result are displayed,
Enlarged view information on the object to be performed is displayed in a second area of the plurality of areas,
The entire view information on the object to be performed is displayed in a third area among the plurality of areas,
A function module related to the task execution is displayed in a fourth area among the plurality of areas,
On the specific area, based on movement information for the pin icon for performing the job and user click information, the job is performed by drawing a line consisting of a connection between a plurality of points along an area corresponding to the job execution target, and ,
When receiving user click information for any one intermediate area in the line formed by the connection between the plurality of points, a new point is generated on the intermediate area,
A data labeling device, characterized in that controlling such that the new point is deleted by using user click information on the function module. 제 1항에 있어서,
상기 제어부는,
상기 제1 영역에 대한 사용자 스와이프 동작이 인지되는 경우 상기 작업 수행 대상이 확대 또는 이동되도록 제어하는 것을 특징으로 하는 데이터 라벨링 장치.The method of claim 1,
The control unit,
The data labeling device, characterized in that, when a user swipe operation on the first area is recognized, the object to be performed is expanded or moved. 데이터 라벨링 장치에 있어서,
복수의 영역을 포함한 사용자 인터페이스(User Interface)를 표시하는 디스플레이부; 및
상기 디스플레이부 상에 선 그리기 및 물체 경계선 따기를 포함한 데이터 라벨링 관련해 사용자와의 인터렉션을 위한 상기 사용자 인터페이스가 표시되도록 제어하는 제어부를 포함하되,
상기 제어부는,
상기 복수의 영역 중 제1 영역에 상기 데이터 라벨링 관련 작업 수행 대상, 상기 작업 수행 대상에 대한 작업 수행과정 및 작업 수행결과를 포함한 작업 정보가 표시되도록 하고,
상기 복수의 영역 중 제2 영역에 상기 작업 수행 대상에 대한 확대 뷰 정보가 표시되도록 하며,
상기 복수의 영역 중 제3 영역에 상기 작업 수행 대상에 대한 전체 뷰 정보가 표시되도록 하고,
상기 복수의 영역 중 제4 영역에 상기 작업 수행과 관련한 기능 모듈이 표시되도록 하며,
상기 제4 영역 상에,
상기 작업 수행 결과를 제출하기 위한 제1 기능모듈;
상기 작업 수행 대상 내 점 생성을 위한 보조 기능을 수행하는 제2 기능모듈;
상기 작업 수행 대상 내 생성된 점 간 이동을 위한 제3 기능모듈; 및
상기 작업 수행 대상 내 생성된 점을 삭제하기 위한 제4 기능모듈
중 적어도 하나의 기능 모듈이 표시되도록 제어하는 것을 특징으로 하는 데이터 라벨링 장치.In the data labeling device,
A display unit that displays a user interface including a plurality of areas; And
A control unit for controlling to display the user interface for interaction with a user in relation to data labeling including drawing a line and picking an object boundary on the display unit,
The control unit,
In a first area of the plurality of areas, job information including a data labeling-related job execution target, a job execution process for the job execution target, and a job execution result are displayed,
Enlarged view information on the object to be performed is displayed in a second area of the plurality of areas,
The entire view information on the object to be performed is displayed in a third area among the plurality of areas,
A function module related to the task execution is displayed in a fourth area among the plurality of areas,
On the fourth area,
A first function module for submitting the result of performing the work;
A second function module performing an auxiliary function for generating a point in the object to be performed;
A third function module for moving between points generated in the object to be performed; And
A fourth function module for deleting the points created in the object to be performed
Data labeling device, characterized in that controlling to display at least one of the functional modules. 선 그리기 및 물체 경계선 따기를 포함한 데이터 라벨링 관련 작업 수행을 위해 사용자와의 인터렉션을 위한 사용자 인터페이스를 디스플레이부 상에 표시하는 단계;
사용자 입력을 수신하는 단계; 및
상기 사용자 입력 및 상기 사용자 인터페이스에 기반하여 작업 수행 대상에 대응하는 영역을 따라 복수의 점 간 연결로 이루어지는 선을 그리는 상기 작업이 수행되도록 제어하는 단계를 포함하되,
상기 제어하는 단계는,
상기 복수의 영역 중 제1 영역에 상기 데이터 라벨링 관련 작업 수행 대상, 상기 작업 수행 대상에 대한 작업 수행과정 및 작업 수행결과를 포함한 작업 정보가 표시되도록 하고,
상기 복수의 영역 중 제2 영역에 상기 작업 수행 대상에 대한 확대 뷰 정보가 표시되도록 하며,
상기 복수의 영역 중 제3 영역에 상기 작업 수행 대상에 대한 전체 뷰 정보가 표시되도록 하고,
상기 복수의 영역 중 제4 영역에 상기 작업 수행과 관련한 기능 모듈이 표시되도록 하며,
상기 특정 영역 상에 상기 작업 수행을 위한 핀 아이콘에 대한 이동정보 및 사용자 클릭정보에 기반하여, 상기 작업 수행 대상에 대응하는 영역을 따라 복수의 점 간 연결로 이루어지는 선을 그리는 상기 작업이 수행되도록 하고,
상기 작업 수행 과정에서 상기 기능 모듈에 대한 사용자 클릭정보를 추가 활용하여 상기 작업 수행을 위한 상기 점이 생성되도록 제어하는 것을 특징으로 하는 데이터 라벨링 방법.Displaying a user interface for interaction with a user on a display unit to perform data labeling related tasks including drawing lines and object boundary lines;
Receiving a user input; And
And controlling the operation to be performed by drawing a line consisting of a plurality of points connected along an area corresponding to an object to be performed based on the user input and the user interface,
The controlling step,
In a first area of the plurality of areas, job information including a data labeling-related job execution target, a job execution process for the job execution target, and a job execution result are displayed,
Enlarged view information on the object to be performed is displayed in a second area of the plurality of areas,
The entire view information on the object to be performed is displayed in a third area among the plurality of areas,
A function module related to the task execution is displayed in a fourth area among the plurality of areas,
On the specific area, based on movement information for the pin icon for performing the job and user click information, the job is performed by drawing a line consisting of a connection between a plurality of points along an area corresponding to the job execution target, and ,
And controlling the point for performing the task to be generated by additionally utilizing user click information on the function module in the process of performing the task.
KR1020190147554A 2019-11-18 2019-11-18 Method and Device for Data Labeling KR102176443B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020190147554A KR102176443B1 (en) 2019-11-18 2019-11-18 Method and Device for Data Labeling

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020190147554A KR102176443B1 (en) 2019-11-18 2019-11-18 Method and Device for Data Labeling

Publications (1)

Publication Number Publication Date
KR102176443B1 true KR102176443B1 (en) 2020-11-09

Family

ID=73429650

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020190147554A KR102176443B1 (en) 2019-11-18 2019-11-18 Method and Device for Data Labeling

Country Status (1)

Country Link
KR (1) KR102176443B1 (en)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102343055B1 (en) * 2021-07-08 2021-12-24 주식회사 인피닉 Load balancing method for annotation using local device, and computer program recorded on record-medium for executing method therefor
KR102382030B1 (en) 2020-11-27 2022-03-31 노대균 Ai education and inspection automation system and control method for the same

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004094466A (en) * 2002-08-30 2004-03-25 Fujitsu Ltd Simplified model preparation support device
JP2017156793A (en) * 2016-02-29 2017-09-07 ブラザー工業株式会社 Program and information processing device
KR101902418B1 (en) * 2012-02-14 2018-10-04 삼성전자주식회사 Device and method for editing image in wireless terminal
KR102030754B1 (en) * 2012-03-08 2019-10-10 삼성전자주식회사 Image edting apparatus and method for selecting region of interest
KR20190124559A (en) * 2018-04-26 2019-11-05 주식회사 슈퍼브에이아이 Computing device and artificial intelligence based image processing service system using the same

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004094466A (en) * 2002-08-30 2004-03-25 Fujitsu Ltd Simplified model preparation support device
KR101902418B1 (en) * 2012-02-14 2018-10-04 삼성전자주식회사 Device and method for editing image in wireless terminal
KR102030754B1 (en) * 2012-03-08 2019-10-10 삼성전자주식회사 Image edting apparatus and method for selecting region of interest
JP2017156793A (en) * 2016-02-29 2017-09-07 ブラザー工業株式会社 Program and information processing device
KR20190124559A (en) * 2018-04-26 2019-11-05 주식회사 슈퍼브에이아이 Computing device and artificial intelligence based image processing service system using the same

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102382030B1 (en) 2020-11-27 2022-03-31 노대균 Ai education and inspection automation system and control method for the same
KR102343055B1 (en) * 2021-07-08 2021-12-24 주식회사 인피닉 Load balancing method for annotation using local device, and computer program recorded on record-medium for executing method therefor

Similar Documents

Publication Publication Date Title
CN109981878B (en) Icon management method and device
CN106775313B (en) Split screen operation control method and mobile terminal
EP2669777A1 (en) Terminal device and icon management method
EP2372516B1 (en) Methods, systems and computer program products for arranging a plurality of icons on a touch sensitive display
JP5094158B2 (en) Terminal and control method of terminal with touch screen
CN103076942A (en) Apparatus and method for changing an icon in a portable terminal
CN103797460A (en) Application control in electronic devices
DE202007018420U1 (en) Portable electronic device that performs similar operations for different gestures
CN112148170A (en) Desktop element adjusting method and device and electronic equipment
KR102176443B1 (en) Method and Device for Data Labeling
CN101751296A (en) Method and device for call management of application program
CN105247463B (en) The painting canvas environment of enhancing
JP2021144617A (en) Information processing device, program, and information processing method
CN113342232A (en) Icon generation method and device, electronic equipment and readable storage medium
KR102176458B1 (en) Method and apparatus for Performing Box Drawing for Data Labeling
US20130127745A1 (en) Method for Multiple Touch Control Virtual Objects and System thereof
CN114415886A (en) Application icon management method and electronic equipment
KR20140089696A (en) Operating Method of Virtual Keypad and Electronic Device supporting the same
CN113535027A (en) Icon control method and device, electronic equipment and readable storage medium
CN113360060B (en) Task realization method and device and electronic equipment
CN115291778A (en) Display control method and device, electronic equipment and readable storage medium
CN113885981A (en) Desktop editing method and device and electronic equipment
CN114442881A (en) Information display method and device, electronic equipment and readable storage medium
CN111752428A (en) Icon arrangement method and device, electronic equipment and medium
CN113726953A (en) Display content acquisition method and device

Legal Events

Date Code Title Description
E701 Decision to grant or registration of patent right
GRNT Written decision to grant