JP2021182421A - ラベル付けツールの生成方法と装置、ラベル付け方法と装置、電子デバイス、記憶媒体及びプログラム - Google Patents

Abstract

【課題】ラベル付けツールの移植性を高め、アルゴリズムの内容漏洩の回避を図るラベル付けツールの生成方法と装置、ラベル付け方法と装置、電子デバイス、記憶媒体及びプログラムを提供する。【解決手段】生成方法は、第１言語によって生成された、ラベル付け待ちファイルを取得するための第１機能モジュールを取得することと、第２言語によって生成された第２機能モジュールを取得することと、第２機能モジュールを、ウェブページ向けのバイナリ形式の第３機能モジュールに変換することと、第１機能モジュール及び第３機能モジュールによって、ラベル付けツールを生成することと、を含む。第３機能モジュールは、ラベル付け待ちファイルをラベル付けページにて提示し、ラベル付け待ちファイルに対応するラベル付け結果をラベル付けページにて表示することに用いる。【選択図】図１

Description

本開示は、コンピュータ技術分野に関わり、特に自動運転、インテリジェント交通、コンピュータビジョン及びディープラーニング等の人工知能技術分野に関する。

データラベル付けは人工知能、ディープラーニングなどの分野において非常に一般的であり、自動運転、コンピュータビジョンなどモデルを使用する必要がある場面では、データラベル付けもオペレータが常に直面しなければならないタスクである。モデル訓練段階では、モデルの訓練データに対してラベル付けを行い、ラベル付けされた訓練データを用いて、訓練対象モデルを訓練し、訓練後のモデルを生成する必要がある。

ラベル付け担当者の操作を容易にするために、ラベル付けツールを改善する必要がある。

ラベル付けツールの生成方法、ラベル付け方法、ラベル付けツールの生成装置、ラベル付け装置、電子デバイス、コンピュータ可読記憶媒体及びプログラムを提供する。

本開示の１つ態様は、ラベル付けツールの生成方法を提供し、該方法は、
第１言語によって生成された第１機能モジュールを取得することと、
第２言語によって生成された第２機能モジュールを取得することと、
第２機能モジュールを、ウェブページ向けのバイナリ形式の第３機能モジュールに変換することと、
第１機能モジュール及び第３機能モジュールによって、ラベル付けツールを生成することと、を含み、
ここで、第１機能モジュールは、ラベル付け待ちファイルを取得することに用いられ、第３機能モジュールは、ラベル付け待ちファイルをラベル付けページにて提示し、ラベル付け待ちファイルに対応するラベル付け結果をラベル付けページにて表示することに用いられる。

本開示のもう１つの態様は、ラベル付け方法を提供し、該方法は、
ラベル付けツールを呼び出すことと、
ラベル付けツールの、第１言語で生成された第１機能モジュールによって、ラベル付け待ちファイルをサーバから呼び出して得ることと、
ラベル付けツールの、第２言語で生成された第２機能モジュールを、ウェブページ向けのバイナリ形式に変換して得られた第３機能モジュールによって、ラベル付け待ちファイルをラベル付けページにて提示することと、
ラベル付け待ちファイルに対するラベル付け結果を取得した場合に、ラベル付けツールの第３機能モジュールによって、ラベル付け待ちファイルに対するラベル付け結果をラベル付けページにて表示することと、を含む。

本開示のもう１つの態様は、ラベル付けツールの生成装置を提供し、該装置は、
第１言語によって生成された第１機能モジュールを取得するための第１機能モジュール生成モジュールと、
第２言語によって生成された第２機能モジュールを取得するための第２機能モジュール取得モジュールと、
第２機能モジュールを、ウェブページ向けのバイナリ形式の第３機能モジュールに変換するための変換モジュールと、
第１機能モジュール及び第３機能モジュールによって、ラベル付けツールを生成するための生成モジュールと、を備え、
ここで、第１機能モジュールは、ラベル付け待ちファイルを取得することに用いられ、第３機能モジュールは、ラベル付け待ちファイルをラベル付けページにて提示し、ラベル付け待ちファイルに対応するラベル付け結果をラベル付けページにて表示することに用いられる。

本開示のもう１つの態様は、ラベル付け装置を提供し、該装置は、
ラベル付けツールを呼び出すための呼び出しモジュールと、
ラベル付けツールの、第１言語で生成された第１機能モジュールによって、ラベル付け待ちファイルをサーバから呼び出して得るための呼出取得モジュールと、
ラベル付けツールの、第２言語で生成された第２機能モジュールをウェブページ向けのバイナリ形式に変換して得られた第３機能モジュールによって、ラベル付け待ちファイルをラベル付けページにて提示するための提示モジュールと、
ラベル付け待ちファイルに対するラベル付け結果を取得した場合に、ラベル付けツールの第３機能モジュールによって、ラベル付け待ちファイルに対するラベル付け結果をラベル付けページにて表示するための結果モジュールと、を備える。

本開示のもう１つの態様は、電子デバイスを提供し、該デバイスは、
少なくとも１つのプロセッサと、
少なくとも１つのプロセッサに通信接続されるメモリと、を備え、
メモリには、少なくとも１つのプロセッサにより実行可能な命令が記憶されており、
命令が少なくとも１つのプロセッサにより実行される場合、本開示のいずれかの方法を実行させる。

本開示のもう１つの態様は、コンピュータ命令を記憶した非一時的なコンピュータ可読記憶媒体を提供し、該コンピュータ命令を記憶した非一時的なコンピュータ可読記憶媒体は、本開示のいずれかの方法をコンピュータに実行させる。

本開示のもう１つの態様は、プログラムを提供し、該プログラムは、プロセッサにより実行されると、本開示のいずれかの方法を実行させる。

本開示によれば、第２言語で記述されたラベル付けモジュールを、ウェブページ向けのバイナリ形式のコアラベル付けモジュールに翻訳することで、熟したラベル付けアルゴリズムを用いた言語翻訳を可能にすると同時に、熟したラベル付けアルゴリズムの仕様を保護することができる。

本実施形態に記載されている内容は、本開示の実施形態のキーまたは重要な特徴を識別することを意図せず、本開示の範囲を制限するものでもないことを理解すべきである。本開示の他の特徴については、下記の明細書を通して説明を促す。

本開示の１つの実施形態によるラベル付けツールの生成方法の概略図である。 本開示のもう１つの実施形態によるラベル付け方法の概略図である。 本開示の一例によるラベル付けツールの概略図である。 本開示のもう１つの実施形態によるラベル付け方法の概略図である。 本開示の他の例によるラベル付けツールの概略図である。 本開示の１つの実施形態によるラベル付けツールの生成装置の概略図である。 本開示のもう１つの実施形態によるラベル付けツールの生成装置の概略図である。 本開示のもう１つの実施形態によるラベル付け装置の概略図である。 本開示のもう１つの実施形態によるラベル付け装置の概略図である。 本開示のもう１つの実施形態によるラベル付け装置の概略図である。 本開示のもう１つの実施形態によるラベル付け装置の概略図である。 本開示の実施形態に係るラベル付けツールの生成方法を実現するための電子デバイスのブロック図である。

以下の説明において、本開示の例示的な実施形態を、理解を容易にするために本開示の実施形態の様々な詳細を含む添付の図面に関連して説明するが、これらは単に例示的なものであると考えるべきである。したがって、当業者は、本開示の範囲及び精神を逸脱することなく、本明細書に記載された実施形態に様々な変更及び修正を加えることができることを認識すべきである。同様に、以下の説明では、周知の機能及び構成については、明確化及び簡明化のために説明を省略する。

本開示の実施形態では、まず、図１に示すように、ラベル付けツール生成方法を提供し、該方法は以下のステップを含む。

ステップＳ１１において、第１言語によって生成された第１機能モジュールを取得する。ここで、第１機能モジュールは、ラベル付け待ちファイルを取得することに用いられる。

ステップＳ１２において、第２言語によって生成された第２機能モジュールを取得する。

ステップＳ１３において、第２機能モジュールを、ウェブページ向けのバイナリ形式の第３機能モジュールに変換する。ここで、第３機能モジュールは、ラベル付け待ちファイルをラベル付けページにて提示し、ラベル付け待ちファイルに対応するラベル付け結果をラベル付けページにて表示することに用いられる。

ステップＳ１４において、第１機能モジュール及び第３機能モジュールによって、ラベル付けツールを生成する。

本実施形態において、第１機能モジュールは、サーバ側からラベル付け待ちファイルを取得するビジネスロジックモジュールであってもよい。第３機能モジュールは、ラベル付け待ちファイル及びラベル付け情報をラベル付けページにて提示し、ラベル付けページを通じてラベル付け結果を取得するためのコアラベル付けモジュールであってもよい。

第２言語によって生成される第２機能モジュールは、既知のアルゴリズムライブラリに含まれるラベル付けモジュールであってもよく、非既知のラベル付けモジュールであってもよい。

本実施形態では、第１言語によって生成された第１機能モジュールを取得することは、具体的に、オペレータの第１言語による記述操作の入力に応じて第１機能モジュールを生成するようにしてもよい。

また、第１言語によって生成された第１機能モジュールを取得することは、具体的に、第１言語で予め編集されたプログラムテンプレートをオペレータが呼び出す操作、及びプログラムテンプレートに対して第１言語で編集する操作によって、第１機能モジュールを生成するようにしてもよい。

本実施形態では、第１言語は、第２言語とは異なる言語である。例えば、第一言語は常用のコンピュータ言語であり、第２言語は専門性の高いコンピュータ言語である。第２言語は、ウェブページ互換性が弱い言語であってもよく、第１言語は、ウェブページ互換性が強い言語であってもよい。

本実施形態において、第１機能モジュールは、ＪａｖａＳｃｒｉｐｔ言語を用いて記述されてもよく、以下のように使用することができる。

サーバ側からＨＴＴＰ（Ｈｙｐｅｒ Ｔｅｘｔ Ｔｒａｎｓｍｉｔ Ｐｒｏｔｏｃｏｌ、ハイパーテキスト・トランスファー・プロトコル）プロトコルを介してラベル付けタスクを取得し、ラベル付け待ちファイルをダウンロードする。

コアラベル付けモジュールとのインタフェースを介して、点群をロードする命令をコアラベル付けモジュールに送信する。

コアラベル付けモジュールとのインタフェースを介して、コアラベル付けモジュールから現在のラベル付け結果を取得し、各ラベル付けボックスの大きさ、位置、方向、属性などのラベル付け情報を含む。

オペレータによるラベル付けファイルのラベル付けが完了した後、ＨＴＴＰプロトコルにより現在のラベル付け結果をサーバー側に提出する。

第１機能モジュールがラベル付けページにて２Ｄ補助画像及び投影枠を表示することを可能にするように、コアラベル付けモジュールのコールバックを受信する。

本実施形態では、第３機能モジュールは、Ｃ＋＋を使用して記述され、Ｗｅｂ（ネットワーク）ブラウザで使用するためにＷｅｂＡｓｓｅｍｂｌｙとしてコンパイルされてもよく、１つの実施形態では、第３機能モジュールは、図３に示すような構造を含むことができる。

ＯｐｅｎＧＬ（Ｏｐｅｎ Ｇｒａｐｈｉｃ Ｌｉｂｒａｒｙ、オープン・グラフィックス・ライブラリ）互換層３１、デスクトップＯｐｅｎＧＬＡＰＩ（ＯｐｅｎＧＬ Ａｐｐｌｉｃａｔｉｏｎ Ｐｒｏｇｒａｍｍｉｎｇ Ｉｎｔｅｒｆａｃｅ、オープン・グラフィックス・ライブラリ・アプリケーション・プログラミング・インターフェイス）をＷｅｂＧＬ（Ｗｅｂ Ｇｒａｐｈｉｃ Ｌｉｂｒａｒｙ）に翻訳することができ、Ｃ＋＋部分はＯｐｅｎＧＬを使用して直接開発することができる。

画面要素層３２はラベル付け画面中の各画面要素を抽象し、各画面要素をツリー状に編成する。画面要素には、点群、立方体（寸法ボックス）、球、円柱などが含まれる。画面要素の編成方式は図４に示すようにすることができる。同時に、ＯｐｅｎＧＬインタフェースを介して画面要素の描画操作を行うことにより、様々な個別画面要素の描画を実現する。

レンダリングウィンドウコンポーネント３３は、ラベル付け画面全体のレンダリング機能を実現し、深さ優先トラバースの方法でツリー状に編成されたラベル付け要素を呼び出して画面全体のレンダリングを行い、また、ＳＤＬ（Ｓｉｍｐｌｅ ＤｉｒｅｃｔＭｅｄｉａ Ｌａｙｅｒ）ライブラリを介してユーザのキーボードによるマウス操作やウィンドウサイズ変更などのイベントを受付け、コアラベル付けモジュールの他のコンポーネントに送信する。

タスク管理コンポーネント３４は、点群のロードやラベル付け結果の出力などを含むビジネスロジックモジュールへの外部インタフェースを提供する。

ラベル付けボックス作成及び調整コンポーネント３５は、ユーザからの、ボックス作成、ボックスサイズ調整、ボックス位置調整、ボックス属性調整などの指示を受けて、ラベル付けボックスを作成し調整し、ラベル付けボックスを画面要素層に保存する。ラベル付けボックスを作成し調整する際には、ＰＣＬ（Ｐｏｉｎｔ Ｃｌｏｕｄ Ｌｉｂｒａｒｙ）やＥｉｇｅｎ（線形代数の計算用Ｃ＋＋テンプレートライブラリ）などの業界で熟したアルゴリズムライブラリを利用して、ユーザーのラベル付け効率を向上させるインテリジェントな機能を実現できる。

オペレータは、ブラウザのラベル付けページ上の新規ボックス作成、ボックス調整などのボタンをクリックすることで、コアラベル付けモジュールのインタフェースを呼び出し、コアラベル付けモジュールに対応するコマンドを送信することができる。

本実施形態では、第２言語で記述された第２機能モジュールをウェブページ向けのバイナリ形式の第３機能モジュールに翻訳することにより、熟したラベル付けアルゴリズムを用いた言語翻訳を可能にし、同時に、熟したラベル付けアルゴリズムの具体的なコードを保護することができる。

１つの実施形態では、ラベル付けツールの生成方法は、
オープン・グラフィックス・ライブラリ形式のグラフィックスインタフェースをウェブ・グラフィック・ライブラリ形式のグラフィックスインタフェースに翻訳することと、
ウェブ・グラフィックス・ライブラリ形式のグラフィックスインタフェースを第３機能モジュールに追加することと、をさらに含む。

本実施形態では、オープン・グラフィックス・ライブラリー形式のグラフィックインターフェイスをウェブ・グラフィック・ライブラリ形式のグラフィックインターフェイスに翻訳するが、具体的に、オペレータの翻訳操作に応じて、オープン・グラフィックス・ライブラリー形式のグラフィックインターフェイスをウェブ・グラフィック・ライブラリ形式に翻訳することができる。

あるいは、オープン・グラフィックス・ライブラリ形式のグラフィックスインタフェースを翻訳モジュールに入力し、ウェブ・グラフィックス・ライブラリ形式のグラフィックスインタフェースに翻訳する。

本実施形態では、ウェブ・グラフィックス・ライブラリ形式のグラフィックスインタフェースは、ウェブ・ページや第２言語による記述、ウェブ・ページ向けのバイナリ・形式に変換された第３機能モジュールと互換性のある標準を採用し、以て、フロントエンドのラベル付けされたページと第３機能モジュールとの間の情報転送を可能にする。

本実施形態では、オープン・グラフィックス・ライブラリ形式のグラフィックインターフェースがウェブページグラフィックライブラリ形式のグラフィックインターフェースに翻訳され、以て、第３機能モジュールがインターフェースを介してフロントエンドウェブページと情報インタラクションを行うことができ、ラベル付け操作によって生成されたイベントを検出することができる。

１つの実施形態では、第１言語はＪａｖａＳｃｒｉｐｔ言語であり、第２言語はＣ＋＋言語である。

Ｃ＋＋言語はユーザインタフェースを開発するのが煩雑であり、開発コストが高いが、知的財産権に対する保護機能が高い利点がある。ＪａｖａＳｃｒｉｐｔソースコードはブラウザから直接取得することができ、混同されても大まかに読み取ることができ、機密性が悪く、具体的なコード内容を保護するのに不利である一方、コードは簡単で作成しやすい利点がある。

本実施形態では、第１言語がＪａｖａＳｃｒｉｐｔ言語であるため、機密性の要求が低い部分を、簡単で変更しやすい言語で記述することで、コード記述の難易度を下げ、ラベル付けツールの移植性を高めた。また、第２言語はＣ＋＋言語であるので、熟したＣ＋＋言語のアルゴリズムを利用することができると共に、熟したアルゴリズムの具体的な内容を保護して盗用されにくいようにすることもできる。

本開示の実施形態はまた、図２に示すように、以下のステップを含むラベル付け方法を提供する。

ステップＳ２１において、ラベル付けツールを呼び出す。ラベル付けツールは、本開示のいずれかの実施形態で提供されるラベル付けツールの生成方法によって生成されるラベル付けツールであってもよい。

ステップＳ２２において、ラベル付けツールの第１機能モジュールによって、ラベル付け待ちファイルをサーバから呼び出す。ここで、第１機能モジュールは、第１言語で生成されたものである。

ステップＳ２３において、ラベル付けツールの第３機能モジュールによって、ラベル付け待ちファイルをラベル付けページにて提示する。ここで、第３機能モジュールは、第２言語で生成された第２機能モジュールをウェブページ向けのバイナリ形式に変換して得られたものである。

ステップＳ２４において、ラベル付け待ちファイルに対するラベル付け結果を取得した場合、ラベル付けツールの第３機能モジュールによって、ラベル付け待ちファイルに対するラベル付け結果をラベル付けページにて表示する。

ラベル付けツールを呼び出すことは、具体的に、受信したラベル付けページを開く指示に基づいて、ブラウザを介してラベル付けページを開き、ラベル付けページを通じて、ラベル付けツールを呼び出すことを含むことができる。

上記ラベル付きページを開く指示は、クリック操作などの操作によるページオープンコマンドであってもよい。

ラベル付けページとは、ブラウザを介してアクセスできるＷｅｂページであってもよい。

ラベル付けツールによって、ラベル付け待ちファイルをラベル付けページにて提示することは、ラベル付けツールによって、ラベル付け待ちファイルをサーバから呼び出し、ラベル付け待ちファイルをラベル付けページにオペレータが視認できるように提示することであってもよい。

本実施形態では、ラベル付け待ちファイルをラベル付けする前に、ラベル付け待ちファイルをラベル付けページにて提示してもよい。ラベル付け情報が生成された後、ラベル付け待ちファイル及びラベル付け情報をラベル付けページにレンダリングすることができる。

自動運転技術において、自動運転車両が周辺物体（自動車、非自動車、障害物、歩行者など）を認識する一般的な方式は、レーザーレーダーで車両周辺物体の３次元点群データを検出して収集し、ディープラーニング（Ｄｅｅｐ Ｌｅａｒｎｉｎｇ）、ディープニューラルネットワーク（Ｄｅｅｐ Ｎｅｕｒａｌ Ｎｅｔｗｏｒｋ、ＤＮＮ）技術を用いて３次元点群データを認識することである。ディープラーニング技術は通常、モデルを訓練するために大量の訓練サンプルを必要とする。ディープラーニングモデルを訓練するサンプルデータは、通常、実環境で収集車を用いて収集した後、人手によりラベル付けされる。本開示の実施形態におけるラベル付け待ちファイルは、３次元点群に関連するラベル付け待ちファイルであってもよく、具体的に、点群ファイル、補助画像ファイル、カメラパラメータ等のデータを含むことができる。

本開示の実施形態では、本開示のいずれかのラベル付けツールの生成方法の実施形態を用いて生成されたラベル付けツールが、ラベル付け待ちファイルに対してラベル付けを行うので、熟したラベル付けアルゴリズムを利用することができ、かつ熟したアルゴリズムの具体的な内容を保護してコード漏洩の問題を回避することができ、同時にラベル付けツールの移植性が高く、知能化の程度が高い。

１つの実施形態では、ラベル付けツールの第３機能モジュールは、ラベル付けファイルをラベル付けページにて提示することは、
第３機能モジュールによって、ラベル付け待ちファイルをレンダリングし、ラベル付け待ちファイルの表示可能な画面を生成することと、
ラベル付け待ちファイルの表示可能な画面を、第３機能モジュールのグラフィカルインタフェースによって、ラベル付けページを介して提示することと、を含む。

第１機能モジュールは、ビジネスロジックモジュールであってもよく、本開示の実施形態は、サーバ側からラベル付け待ちファイルを呼び出すことができる。具体的に、ビジネスロジックモジュールによって、サーバ側にラベル付け待ちファイル取得要求を送信し、サーバ側から送信されたラベル付け待ちファイルを受信することを含むことができる。

コアラベル付けモジュールにより、ラベル付けファイルをレンダリングし、表示可能な画面を生成し、具体的に、コアラベル付けモジュールにより、画面中の形状、要素などをレンダリングし、ラベル付けファイルの内容を表示可能な画面に生成することを含むことができる。

本実施形態では、第１言語で記述された第１機能モジュールによって、サーバ側からラベル付けするファイルを呼び出し、そして、第３機能モジュールによってラベル付け待ちファイルの画面を提示することにより、オペレータはウェブページを介してラベル付け待ちファイルを見ることができ、同時に機能的に完全なアルゴリズムを利用してラベル付け待ちファイルに対してラベル付けすることができ、ラベル付けツールによる、コード内容に対する保護機能を向上させると同時に、オペレータの操作利便性を向上させることができる。

１つの実施形態では、ラベル付け待ちファイルをレンダリングし、ラベル付け待ちファイルの表示可能な画面を生成することは、
ラベル付け待ちファイルに基づいて、ラベル付け待ちファイルの画面の要素ツリーを生成することと、
ラベル付け待ちファイルの画面の要素ツリーに基づいて、ラベル付け待ちファイルの表示可能な画面の要素を描画することと、
ラベル付け待ちファイルの表示可能な画面の要素に基づいて、ラベル付け待ちファイルの表示可能な画面を生成することと、を含む。

画面の要素ツリーは、画面の要素のノードを含むことができ、例えば、画面は、要素Ａ、Ｂ、Ｃ、Ｄを含み、Ａはサブ要素Ａ１、Ａ２、Ａ３を含み、Ｂはサブ要素Ｂ１、Ｂ２を含み、Ｃはサブ要素Ｃ１、Ｃ２、Ｃ３を含み、Ｄはサブ要素Ｄ１、Ｄ２を含む。

表示可能な画面の要素は、要素ツリーに基づいて描画され、具体的に、要素ツリーに基づいて各要素のレイヤーを描画することを含むことができる。また、要素ツリーに基づいて、各レベルのサブ要素のレイヤーを描画することを含めることもできる。また、要素ツリーに基づいて、各要素またはサブ要素に対応する、独立したグラフィックを描画することも可能である。

本実施形態では、ラベル付け待ちファイルに基づいて表示可能な画面を生成することにより、ラベル付け対象のコンテンツをオペレータに提示し、オペレータがラベル付け対象のコンテンツを見ることができるようにしている。

１つの実施形態では、ラベル付け待ちファイルのラベル付け結果を取得した場合、ラベル付けツールの第３機能モジュールによって、ラベル付け待ちファイルのラベル付け結果をラベル付けページにて表示することは、
第３機能モジュールにより検出された、入力装置のラベル付けページにおいて発生した操作イベントに基づいて、ラベル付け待ちファイルに対するラベル付け情報を生成することと、
第３機能モジュールによって、表示可能な画面の要素にラベル付け待ちファイルに対するラベル付け情報を追加することと、
ラベル付け待ちファイルの表示可能な画面の要素に基づいて、第３機能モジュールによって、ラベル付け待ちファイルのラベル付け結果を生成することと、を含む。

入力装置は、具体的に、マウス、キーボード、タッチパッド等の端末に付随する入力装置を含むことができる。

入力装置のラベル付けページにおいて発生した操作イベントには、具体的に、線入力操作、ボックス入力操作、文字入力操作、数字入力操作などが含まれてもよい。

ラベル付け情報は、具体的に、ボックス、文字、数字などのラベル付け内容の大きさ、位置、方向、属性、具体的な内容などの情報を含むことができる。

ラベル付け情報を要素に追加することは、ラベル付け情報とラベル付け待ちファイルに基づいて、画面レンダリングを行い、新たな表示可能な画面を生成することを指すことができる。あるいは、ラベル付け情報に基づいて表示可能な画面の更新を行うことを指す。ラベル付け情報に基づいてレンダリングを行い、表示可能な画面の新たな表示情報を生成し、操作イベントが発生した位置に基づいて、対応する要素に新たな表示情報を追加することを含んでもよい。

ラベル付け情報が追加された要素に基づいてラベル付け結果を生成することは、具体的に、ラベル付け情報に基づいてラベル付け待ちファイルを更新し、ラベル付けすべき内容のラベル付けが完了した後にラベル付け結果を生成することができる。

本実施形態では、操作イベントに基づいてラベル付け情報を生成し、ラベル付け情報に基づいてラベル付け結果を生成することにより、ラベル付け結果に基づいてモデルを訓練するためのサンプルを生成することができる。

１つの実施形態では、図４のように、ラベル付け方法はさらに、以下のステップを含む。

ステップＳ４１において、第１機能モジュールに基づいて、ラベル付け結果をサーバ側に送信して保存する。

本実施形態では、現在のラベル付け結果は、ＨＴＴＰプロトコルを介してサービス側に一時的に保存することができる。

本実施形態では、ラベル付け結果をサーバ側に送信して保存することで、ラベル付け結果をもとにモデル訓練のデータを簡単に生成することができる。

本開示の１つの実施形態では、ラベル付けツールとラベル付け方法を点群ファイルのラベル付けに適用することができ、Ｗｅｂベースの点群ラベル付けツールを提供し、ＨＴＭＬ、ＣＳＳ（Ｃａｓｃａｄｉｎｇ Ｓｔｙｌｅ Ｓｈｅｅｔｓ）、ＪａｖａＳｃｒｉｐｔを使用してユーザ操作インタフェースとビジネスロジックを実現し、Ｃ＋＋を使用して３Ｄ点群レンダリングとラベル付け機能を実現する。Ｃ＋＋による３Ｄ点群レンダリングラベル付けコンポーネントをＷｅｂＡｓｓｅｍｂｌｙにコンパイルすることで、この２つを結合する。

本開示の実施形態は、自動運転、インテリジェント交通、コンピュータビジョン及びディープラーニング等の人工知能技術分野に適用することができる。

この例では、ラベル付けツールの構成を図５にて示されたように、ＪａｖａＳｃｒｉｐｔ言語で記述されたビジネスロジックモジュール５１（第１機能モジュールに相当）と、Ｃ＋＋言語で記述され、ＷｅｂＡｓｓｅｍｂｌｙ形式に翻訳されたコアラベル付けモジュール５２（Ｃ＋＋言語で生成された第２機能モジュールをＷｅｂＡｓｓｅｍｂｌｙ形式に変換された第３機能モジュールに相当）とを含む。このうち、コアラベル付けモジュール５２は、ＷｅｂＧＬ形式に翻訳されたＯｐｅｎＧＬインタフェースを含み、表示のために画像をフロントエンドページに転送したり、マウスやキーボードなどの操作イベントを受信したり、操作イベントに基づいてラベル付け情報を取得したりすることができる。クライアントのフロントエンドページは、点群とラベル付けボックスのレンダリングに用いられるＣａｎｖａｓ（キャンバス）を含む、ＨＴＭＬとＣＳＳで記述されたＷｅｂページにすることができる。コアラベル付けモジュール５２は、コアラベル付けモジュール５２とビジネスロジックモジュール５１との間のインタフェースを介してラベル付け結果をビジネスロジックモジュール５１に送信することができ、ビジネスロジックモジュール５１がラベル付け結果をサーバサイド５３に送信することができる。図５に示すフロントエンドページとは、ラベル付けページをオペレータに提示するためのブラウザページのことである。

本開示の実施形態はまた、図６に示すように、ラベル付けツール生成装置を提供する。

第１言語によって生成された第１機能モジュールを取得するための第１機能モジュール生成モジュール６１と、
第２言語によって生成された第２機能モジュールを取得するための第２機能モジュール取得モジュール６２と、
第２機能モジュールを、ウェブページ向けのバイナリ形式の第３機能モジュールに変換するための変換モジュール６３と、
第１機能モジュール及び第３機能モジュールによって、ラベル付けツールを生成するための生成モジュール６４と、を備え、
ここで、第１機能モジュールは、ラベル付け待ちファイルを取得することに用いられ、第３機能モジュールは、ラベル付け待ちファイルをラベル付けページにて提示し、ラベル付け待ちファイルに対応するラベル付け結果をラベル付けページにて表示することに用いられる。

１つの実施形態では、図７に示すように、ラベル付けツールの生成装置を提供し、該装置は、
オープン・グラフィックス・ライブラリ形式のグラフィックスインタフェースをウェブ・グラフィック・ライブラリ形式のグラフィックスインタフェースに変換するためのグラフィックスインタフェースモジュール７１と、
ウェブ・グラフィックス・ライブラリ形式のグラフィックスインタフェースを第３機能モジュールに追加するためのインターフェース追加モジュール７２と、をさらに備える。

１つの実施形態では、第１言語はＪａｖａＳｃｒｉｐｔ言語であり、第２言語はＣ＋＋言語である。

本開示の実施形態はまた、図８に示すように、ラベル付け装置を提供し、該装置は、
ラベル付けツールを呼び出すための呼び出しモジュール８１と、
ラベル付けツールの、第１言語で生成された第１機能モジュールによって、ラベル付け待ちファイルをサーバから呼び出して得るための呼出取得モジュール８２と、
ラベル付けツールの、第２言語で生成された第２機能モジュールをウェブページ向けのバイナリ形式に変換して得られた第３機能モジュールによって、ラベル付け待ちファイルをラベル付けページにて提示するための提示モジュール８３と、
ラベル付け待ちファイルに対するラベル付け結果を取得した場合に、ラベル付けツールの第３機能モジュールによって、ラベル付け待ちファイルに対するラベル付け結果をラベル付けページにて表示するための結果モジュール８４と、を備える。

１つの実施形態では、図９に示すように、提示モジュール８３は、
第３機能モジュールによって、ラベル付け待ちファイルをレンダリングし、ラベル付け待ちファイルの表示可能な画面を生成するためのレンダリングユニット９１と、
ラベル付け待ちファイルの表示可能な画面を、第３機能モジュールのグラフィカルインタフェースによって、ラベル付けページを介して提示するための表示ユニット９２と、を備える。

１つの実施形態では、レンダリングユニット９１は、
ラベル付け待ちファイルに基づいて、ラベル付け待ちファイルの画面の要素ツリーを生成することと、
ラベル付け待ちファイルの画面の要素ツリーに基づいて、ラベル付け待ちファイルの表示可能な画面の要素を描画することと、
ラベル付け待ちファイルの表示可能な画面の要素に基づいて、ラベル付け待ちファイルの表示可能な画面を生成することと、にさらに用いられる。

１つの実施形態では、図１０に示すように、結果モジュール８４は、
第３機能モジュールにより検出された、入力装置のラベル付けページにおいて発生した操作イベントに基づいて、ラベル付け待ちファイルに対するラベル付け情報を生成するためのイベントユニット１０１と、
第３機能モジュールによって、表示可能画面の要素にラベル付け待ちファイルに対するラベル付け情報を追加するための添加ユニット１０２と、
ラベル付け待ちファイルの表示可能な画面の要素に基づいて、第３機能モジュールによって、ラベル付け待ちファイルに対するラベル付け結果を生成するための結果生成ユニット１０３と、を備える。

１つ実施形態では、図１１に示すように、ラベル付け装置はさらに、
ラベル付け結果を、第１機能モジュールによってサーバに送信して保存するための送信モジュール１１１を備える。

本開示の実施形態は、従来のクライアントサイド方式で開発されたラベル付けツールの移植性が悪く、単独でダウンロードする必要があるなどの欠点を効果的に解決することができ、オペレータはＷｅｂブラウザだけで作業できる。また、ＷｅｂＡｓｓｅｍｂｌｙを使用することで、従来のクライアントツールと組み合わせて、業界標準のアルゴリズムライブラリを使用してインテリジェントなアルゴリズムを実現しやすくなり、ラベル付けの効率向上を図ることができる。また、ＪａｖａＳｃｒｉｐｔコードが漏洩しやすいという問題も回避し、知的財産権を保護することに有利である。

本開示の実施例によれば、本開示は、電子デバイス及びコンピュータ可読記憶媒体も提供する。

図１２は、本開示の実施例におけるラベル付けツールの生成方法を実行するための電子デバイスのブロック図である。電子デバイスは、各形式のデジタルコンピュータを指し、例えば、ラップトップコンピュータ、デスクトップコンピュータ、ワークステーション、パーソナルデジタルアシスタント、サーバ、ブレードサーバ、大型コンピュータ、及びその他の適合するコンピュータが挙げられる。電子デバイスは、各形式の移動装置をさらに指し、例えば、パーソナルデジタルアシスタント、セルラー電話、スマートフォン、ウェアラブルデバイス、及びその他の類似のコンピュータ装置が挙げられる。本出願に記載されているコンポーネント、それらの接続関係、及び機能は例示的なものに過ぎず、本出願に記載・特定されているものの実現を限定するわけではない。

図１２に示すように、当該電子デバイスは、１つ又は複数のプロセッサ１２０１、メモリ１２０２、及び各部品を接続するためのインターフェースを含み、高速インターフェースと低速インターフェースを含む。各部品が異なるバスによって接続され、共通マザーボードに装着することができ、又は必要に応じて他の方式で装着することもできる。プロセッサは、電子デバイスで実行する命令を実行することができ、メモリに記憶される命令、又は外部入力／出力装置（例えば、インターフェースにカップリングする表示デバイス）に記憶され、ＧＵＩに表示するグラフィック情報の命令を含む。その他の実施形態において、必要があれば、複数のプロセッサ及び／又は複数のバス及び複数のメモリを一緒に使用することができる。同様に、複数の電子デバイスを接続することができ、各デバイスが各自の必要な操作を提供する（例えば、サーバアレイとしての１グループのブレードサーバ、又は、複数のプロセッサシステム）。図１２では１つのプロセッサ１２０１を例としている。

メモリ１２０２は、本開示に提供される非一時的なコンピュータ可読記憶媒体である。ここで、当該メモリに少なくとも１つのプロセッサで実行する命令が記憶され、当該少なくとも１つのプロセッサに、本開示に提供されるラベル付けツールの生成方法を実行させる。本開示の非一時的なコンピュータ可読記憶媒体にコンピュータ命令が記憶され、当該コンピュータ命令は、コンピュータに本開示に提供されるラベル付けツールの生成方法を実行させる。

メモリ１２０２は、コンピュータ読取可能な非一時的記憶媒体として、非一時的ソフトウェアプログラムを記憶するためのものであってもよく、非一時的コンピュータは、プログラム、及びモジュールを実行することができ、例えば、本開示の実施例におけるラベル付けツールの生成方法に対応するプログラム命令／モジュール（例えば、図６に示される第１機能モジュール生成モジュール６１、第２機能モジュール取得モジュール６２、変換モジュール６３、及び生成モジュール６４）を実行することができる。プロセッサ１２０１は、メモリ１２０２に記憶されている非一時的ソフトウェアプログラム、命令及びモジュールを実行することによって、サーバの各機能及びデータ処理を実行し、即ち、上記の方法実施例におけるラベル付けツールの生成方法を実現する。

メモリ１２０２は、プログラム記憶領域とデータ記憶領域を含み、ここで、プログラム記憶領域に、オペレーションシステム、少なくとも１つの機能に必要なアプリケーションプログラムが記憶され得、データ記憶領域に、ラベル付けツールの生成方法による電子デバイスの使用によって生成されるデータ等が記憶され得る。また、メモリ１２０２は、高速ランダムアクセスメモリを含み得、非一時的メモリも含み得、例えば、少なくとも１つのディスク記憶素子、フラッシュ素子、又はその他の非一時的固体メモリ素子を含む。幾つかの実施形態において、メモリ１２０２はプロセッサ１２０１から遠隔に設置されるメモリを選択的に含み、これらの遠隔メモリは、ネットワークによって、ラベル付けツールの生成方法を実行する電子デバイスに接続されることができる。上記のネットワークは、インターネット、イントラネット、ローカルエリアネットワーク、移動通信ネットワーク及びそれらの組み合わせを例として含むが、それらに限定されない。

ラベル付けツールの生成方法を実行する電子デバイスは、入力装置１２０３及び出力装置１２０４をさらに含み得る。プロセッサ１２０１、メモリ１２０２、入力装置１２０３、及び出力装置１２０４は、バス又は他の方式で接続されることができ、図１２ではバスによる接続を例としている。

入力装置１２０３は入力された数字又は文字情報を受け取ることができ、ラベル付けツールの生成方法を実行する電子デバイスのユーザ設定及び機能制御に関連するキーボード信号入力を生成し、例えば、タッチスクリーン、テンキー、マウス、トラックプレート、タッチタブレット、インジケーター、１つ又は複数のマウスボタン、トラックボール、ジョイスティックなどの入力装置が挙げられる。出力装置１２０４は、表示用デバイス、照明補助装置（例えば、ＬＥＤ）及び触覚型フィードバック装置（例えば、振動モーター）等を含み得る。当該表示用デバイスは、液晶ディスプレイ（ＬＣＤ）、発光ダイオード（ＬＥＤ）ディスプレイ、及びプラズマディスプレイを含むが、それらに限定されない。幾つかの実施形態において、表示用デバイスは、タッチスクリーンであってもよい。

ここで記載されているシステムと技術に関する各実施形態は、デジタル電子回路システム、集積回路システム、専用ＡＳＩＣ（特定用途向け集積回路）、コンピュータハードウェア、ファームウェア、ソフトウェア、及び／又はこれらの組み合わせによって実現されることができる。これらの各実施形態は、１つ又は複数のコンピュータプログラムで実施することを含み得、当該１つ又は複数のコンピュータプログラムは、少なくとも１つのプログラミング可能なプロセッサを含むプログラミング可能なシステムにおいて、実行及び／又は解釈することができ、当該プログラミング可能なプロセッサは、専用又は汎用プログラミング可能なプロセッサであってもよく、記憶システム、少なくとも１つの入力装置、及び少なくとも１つの出力装置から、データと命令を受け取ることができ、データと命令を当該記憶システム、当該少なくとも１つの入力装置、及び当該少なくとも１つの出力装置に伝送することができる。

これらのコンピュータプログラム（プログラム、ソフトウェア、ソフトウェアアプリケーション、又はコードとも称する）はプログラミング可能なプロセッサの機械命令を含み、高級プロシージャ及び／又はオブジェクト指向のプログラム言語、及び／又はアセンブラ／機械語を利用してこれらのコンピュータプログラムを実施する。例えば、本出願に使用される、用語「機械での読取可能な媒体」と「コンピュータ読取可能な媒体」は、機械命令及び／又はデータをプログラミング可能なプロセッサに提供するためのコンピュータプログラム製品、デバイス、及び／又は装置（例えば、ディスク、コンパクトディスク、メモリ、プログラミング可能なロジック装置（ＰＬＤ））を指しており、機械読取可能な信号として機械命令を受け取る機械読取可能な媒体を含む。用語「機械読取可能な信号」は、機械命令及び／又はデータをプログラミング可能なプロセッサに提供するためのいかなる信号を指している。

ユーザとのインタラクションを提供するために、コンピュータでここに記載されているシステムと技術を実施することができ、当該コンピュータは、ユーザに情報を表示するための表示用装置（例えば、ＣＲＴ（陰極線管）又はＬＣＤ（液晶ディスプレイ）モニター）、及びキーボードとポインティングデバイス（例えば、マウス又はトラックボール）を備え、ユーザは、当該キーボードと当該ポインティングデバイスによって、入力をコンピュータに提供することができる。他の種類の装置は、ユーザとのインタラクションを提供するために用いられることができ、例えば、ユーザに提供するフィードバックは、いかなる形式のセンサーフィードバック（例えば、視覚フィードバック、聴覚フィードバック、又は触覚フィードバック）であってもよく、いかなる形式（音入力、音声入力、又は触覚入力）によって、ユーザからの入力を受け取ることができる。

ここに記載されているシステムと技術を、バックグラウンド部品に含まれる計算システム（例えば、データサーバとして）、又はミドルウェア部品を含む計算システム（例えば、アプリケーションサーバ）、又はフロント部品を含む計算システム（例えば、ＧＵＩ又はネットワークブラウザを有するユーザコンピュータが挙げられ、ユーザがＧＵＩ又は当該ネットワークブラウザによって、ここに記載されているシステムと技術の実施形態とインタラクションすることができる）、又はこのようなバックグラウンド部品、ミドルウェア部品、又はフロント部品のいかなる組合した計算システムで実施することができる。如何なる形式又はメディアのデジタルデータ通信（例えば、通信ネットワーク）を介して、システムの部品を互いに接続することができる。通信ネットワークの例は、ローカルエリアネットワーク（ＬＡＮ）、ワイドエリアネットワーク（ＷＡＮ）及びインターネットを含む。

コンピュータシステムは、クライアントとサーバを含み得る。通常、クライアントとサーバは、互いに離れており、通信ネットワークを介してインタラクションを行うことが一般的である。対応するコンピュータで動作することで、クライアント−サーバの関係を有するコンピュータプログラムによってクライアントとサーバの関係を生み出す。サーバは、クラウドサーバであってもよく、クラウド計算サーバ又はクラウドホストとも称し、クラウド計算サービス体系におけるホスト製品であり、従来の物理ホストと仮想専用サーバ（ＶＰＳ）でのサービスに存在する管理難度が大きく、サービス拡張性が弱い欠点を解決することができる。

理解すべきこととして、上記に記載されている各形式のプロセスを利用して、ステップを再度順序付け、追加又は削除することができる。本開示に開示されている技術案の期待結果を実現することさえできれば、例えば、本開示に記載されている各ステップは、平行して実行してもよく、順序付けて実行してもよく、ランダム的に実行してもよく、本開示は、其れを限定しない。

上記の具体的な実施形態は、本開示の保護範囲に対する制限にならない。当業者が、設計要件と他の要因に基づいて、改修、組合、サブ組合、代替を行うことができることは明らかである。本開示の思想と原理における変更、均等な置換及び改善等は、いずれも本開示の保護の範囲内に含まれるべきである。

Claims (19)

1. 第１言語によって生成された第１機能モジュールを取得することと、
   第２言語によって生成された第２機能モジュールを取得することと、
   前記第２機能モジュールを、ウェブページ向けのバイナリ形式の第３機能モジュールに変換することと、
   前記第１機能モジュール及び第３機能モジュールによって、ラベル付けツールを生成することと、を含み、
   前記第１機能モジュールは、ラベル付け待ちファイルを取得することに用いられ、
   前記第３機能モジュールは、前記ラベル付け待ちファイルをラベル付けページにて提示し、前記ラベル付け待ちファイルに対応するラベル付け結果を前記ラベル付けページにて表示することに用いられる、
   ラベル付けツールの生成方法。
2. オープン・グラフィックス・ライブラリ形式のグラフィックスインタフェースをウェブ・グラフィック・ライブラリ形式のグラフィックスインタフェースに変換することと、
   前記ウェブ・グラフィックス・ライブラリ形式のグラフィックスインタフェースを前記第３機能モジュールに追加することと、をさらに含む、
   請求項１に記載のラベル付けツールの生成方法。
3. 前記第１言語はＪａｖａＳｃｒｉｐｔ言語であり、前記第２言語はＣ＋＋言語である、
   請求項１または請求項２に記載のラベル付けツールの生成方法。
4. ラベル付けツールを呼び出すことと、
   前記ラベル付けツールの、第１言語で生成された第１機能モジュールによって、ラベル付け待ちファイルをサーバから呼び出して得ることと、
   前記ラベル付けツールの、第２言語で生成された第２機能モジュールを、ウェブページ向けのバイナリ形式に変換して得られた第３機能モジュールによって、前記ラベル付け待ちファイルをラベル付けページにて提示することと、
   前記ラベル付け待ちファイルに対するラベル付け結果を取得した場合に、前記ラベル付けツールの第３機能モジュールによって、前記ラベル付け待ちファイルに対するラベル付け結果をラベル付けページにて表示することと、を含む、
   ラベル付け方法。
5. 前記ラベル付けツールの第３機能モジュールによって、前記ラベル付け待ちファイルをラベル付けページにて提示することは、
   前記第３機能モジュールによって、前記ラベル付け待ちファイルをレンダリングし、前記ラベル付け待ちファイルの表示可能な画面を生成することと、
   前記ラベル付け待ちファイルの表示可能な画面を、前記第３機能モジュールのグラフィカルインタフェースによって、前記ラベル付けページを介して提示することと、を含む、
   請求項４に記載のラベル付け方法。
6. 前記ラベル付け待ちファイルをレンダリングし、前記ラベル付け待ちファイルの表示可能な画面を生成することは、
   前記ラベル付け待ちファイルに基づいて、前記ラベル付け待ちファイルの画面の要素ツリーを生成することと、
   前記ラベル付け待ちファイルの画面の要素ツリーに基づいて、前記ラベル付け待ちファイルの表示可能な画面の要素を描画することと、
   前記ラベル付け待ちファイルの表示可能な画面の要素に基づいて、前記ラベル付け待ちファイルの表示可能な画面を生成することと、を含む、
   請求項５に記載のラベル付け方法。
7. 前記ラベル付け待ちファイルに対するラベル付け結果を取得した場合に、前記ラベル付けツールの第３機能モジュールによって、前記ラベル付け待ちファイルに対するラベル付け結果をラベル付けページにて表示することは、
   前記第３機能モジュールにより検出された、入力装置の前記ラベル付けページにおいて発生した操作イベントに基づいて、前記ラベル付け待ちファイルに対するラベル付け情報を生成することと、
   前記第３機能モジュールによって、前記表示可能画面の要素に前記ラベル付け待ちファイルに対する前記ラベル付け情報を追加することと、
   前記ラベル付け待ちファイルの表示可能な画面の要素に基づいて、第３機能モジュールによって、前記ラベル付け待ちファイルに対するラベル付け結果を生成することと、を含む、
   請求項６に記載のラベル付け方法。
8. 前記ラベル付け結果を、前記第１機能モジュールによってサーバに送信して保存することをさらに含む、
   請求項４から請求項７までのいずれか１項に記載のラベル付け方法。
9. 第１言語によって生成された第１機能モジュールを取得するための第１機能モジュール生成モジュールと、
   第２言語によって生成された第２機能モジュールを取得するための第２機能モジュール取得モジュールと、
   前記第２機能モジュールを、ウェブページ向けのバイナリ形式の第３機能モジュールに変換するための変換モジュールと、
   前記第１機能モジュール及び第３機能モジュールによって、ラベル付けツールを生成するための生成モジュールと、を備え、
   前記第１機能モジュールは、ラベル付け待ちファイルを取得することに用いられ、
   前記第３機能モジュールは、前記ラベル付け待ちファイルをラベル付けページにて提示し、前記ラベル付け待ちファイルに対応するラベル付け結果を前記ラベル付けページにて表示することに用いられる、
   ラベル付けツールの生成装置。
10. オープン・グラフィックス・ライブラリ形式のグラフィックスインタフェースをウェブ・グラフィック・ライブラリ形式のグラフィックスインタフェースに変換するためのグラフィックスインタフェースモジュールと、
    前記ウェブ・グラフィックス・ライブラリ形式のグラフィックスインタフェースを前記第３機能モジュールに追加するためのインターフェース追加モジュールと、をさらに備える、
    請求項９に記載のラベル付けツールの生成装置。
11. 前記第１言語はＪａｖａＳｃｒｉｐｔ言語であり、前記第２言語はＣ＋＋言語である、
    請求項９または請求項１０に記載のラベル付けツールの生成装置。
12. ラベル付けツールを呼び出すための呼び出しモジュールと、
    前記ラベル付けツールの、第１言語で生成された第１機能モジュールによって、ラベル付け待ちファイルをサーバから呼び出して得るための呼出取得モジュールと、
    前記ラベル付けツールの、第２言語で生成された第２機能モジュールをウェブページ向けのバイナリ形式に変換して得られた第３機能モジュールによって、前記ラベル付け待ちファイルをラベル付けページにて提示するための提示モジュールと、
    前記ラベル付け待ちファイルに対するラベル付け結果を取得した場合に、前記ラベル付けツールの第３機能モジュールによって、前記ラベル付け待ちファイルに対するラベル付け結果をラベル付けページにて表示するための結果モジュールと、を備える、
    ラベル付け装置。
13. 前記提示モジュールは、
    前記第３機能モジュールによって、前記ラベル付け待ちファイルをレンダリングし、前記ラベル付け待ちファイルの表示可能な画面を生成するためのレンダリングユニットと、
    前記ラベル付け待ちファイルの表示可能な画面を、前記第３機能モジュールのグラフィカルインタフェースによって、前記ラベル付けページを介して提示するための表示ユニットと、を備える、
    請求項１２に記載のラベル付け装置。
14. 前記レンダリングユニットは、
    前記ラベル付け待ちファイルに基づいて、前記ラベル付け待ちファイルの画面の要素ツリーを生成することと、
    前記ラベル付け待ちファイルの画面の要素ツリーに基づいて、前記ラベル付け待ちファイルの表示可能な画面の要素を描画することと、
    前記ラベル付け待ちファイルの表示可能な画面の要素に基づいて、前記ラベル付け待ちファイルの表示可能な画面を生成することと、にさらに用いられる、
    請求項１３に記載のラベル付け装置。
15. 前記結果モジュールは、
    前記第３機能モジュールにより検出された、入力装置の前記ラベル付けページにおいて発生した操作イベントに基づいて、前記ラベル付け待ちファイルに対するラベル付け情報を生成するためのイベントユニットと、
    前記第３機能モジュールによって、前記表示可能画面の要素に前記ラベル付け待ちファイルに対する前記ラベル付け情報を追加するための添加ユニットと、
    前記ラベル付け待ちファイルの表示可能な画面の要素に基づいて、第３機能モジュールによって、前記ラベル付け待ちファイルに対するラベル付け結果を生成するための結果生成ユニットと、を備える、
    請求項１４に記載のラベル付け装置。
16. 前記ラベル付け結果を、前記第１機能モジュールによってサーバに送信して保存するための送信モジュールをさらに備える、
    請求項１２から請求項１５までのいずれか１項に記載のラベル付け装置。
17. 少なくとも１つのプロセッサと、
    前記少なくとも１つのプロセッサと通信接続されるメモリと、を備え、
    前記メモリには、前記少なくとも１つのプロセッサで実行可能な命令が記憶され、前記命令は、前記少なくとも１つのプロセッサによって実行されると、前記少なくとも１つのプロセッサに、請求項１から請求項８までのいずれか１項に記載の方法を実行させる、
    電子デバイス。
18. コンピュータに請求項１から請求項８までのいずれか１項に記載の方法を実行させる命令を記憶するための非一時的なコンピュータ可読記憶媒体。
19. コンピュータにおいて、プロセッサにより実行されると、請求項１から請求項８までのいずれか１項に記載の方法を実現するためのプログラム。

Images