WO2021164161A1 - 影像数据标注方法、装置、计算机设备和存储介质 - Google Patents

影像数据标注方法、装置、计算机设备和存储介质 Download PDF

Info

Publication number
WO2021164161A1
WO2021164161A1 PCT/CN2020/097412 CN2020097412W WO2021164161A1 WO 2021164161 A1 WO2021164161 A1 WO 2021164161A1 CN 2020097412 W CN2020097412 W CN 2020097412W WO 2021164161 A1 WO2021164161 A1 WO 2021164161A1
Authority
WO
WIPO (PCT)
Prior art keywords
task
key
cloud
audit
user terminal
Prior art date
Application number
PCT/CN2020/097412
Other languages
English (en)
French (fr)
Inventor
景美娜
Original Assignee
平安国际智慧城市科技股份有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 平安国际智慧城市科技股份有限公司 filed Critical 平安国际智慧城市科技股份有限公司
Publication of WO2021164161A1 publication Critical patent/WO2021164161A1/zh

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/60—Protecting data
    • G06F21/62—Protecting access to data via a platform, e.g. using keys or access control rules
    • G06F21/6218—Protecting access to data via a platform, e.g. using keys or access control rules to a system of files or objects, e.g. local or distributed file system or database
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/60—Protecting data
    • G06F21/602—Providing cryptographic facilities or services

Definitions

  • This application relates to an image data labeling method, device, computer equipment and storage medium.
  • Data annotation is an important part of the field of artificial intelligence. It is an indispensable stage for establishing algorithm models and improving algorithm accuracy.
  • the annotation platform provides such a basic annotation function to provide data annotation services for algorithms.
  • an image data labeling method is provided.
  • An image data labeling method including:
  • Receive the cloud to return the desensitized image file in a binary stream, and send the desensitized image file to the user terminal in a binary stream, so that the user terminal parses the image file to obtain pixel information And desensitization information, and display the obtained pixel information and desensitization information;
  • An image data labeling device including:
  • the first receiving module is configured to receive a task labeling request sent by a user terminal, where the task labeling request carries a task identifier;
  • the first query module is configured to query the storage address and the first key of the image file corresponding to the task identifier from the task list stored in the local database;
  • the first sending module is configured to send the first key to the storage address in the cloud, and the cloud is used to verify the first key, and after the verification is successful, return to the offline in the form of a binary stream.
  • the second receiving module is configured to receive the desensitized image file returned by the cloud in a binary stream, and send the desensitized image file to the user terminal in a binary stream, so that the user terminal can analyze
  • the image file obtains pixel information and desensitization information, and displays the obtained pixel information and desensitization information;
  • the second sending module is configured to receive the structured data after the user terminal has annotated the pixel information, and upload the structured data to the cloud to associate with the image file stored in the cloud storage.
  • a computer device including a memory and one or more processors, the memory stores computer readable instructions, and when the computer readable instructions are executed by the processor, the one or more processors execute The following steps:
  • Receive the cloud to return the desensitized image file in a binary stream, and send the desensitized image file to the user terminal in a binary stream, so that the user terminal parses the image file to obtain pixel information And desensitization information, and display the obtained pixel information and desensitization information;
  • One or more computer-readable storage media storing computer-readable instructions.
  • the one or more processors perform the following steps:
  • Receive the cloud to return the desensitized image file in a binary stream, and send the desensitized image file to the user terminal in a binary stream, so that the user terminal parses the image file to obtain pixel information And desensitization information, and display the obtained pixel information and desensitization information;
  • Fig. 1 is a diagram of an application scenario of an image data labeling method according to one or more embodiments.
  • FIG. 2 is a schematic flowchart of an image data labeling method according to one or more embodiments.
  • Fig. 3 is an interface diagram of annotated pages according to one or more embodiments.
  • Fig. 4 is a block diagram of an image data labeling device according to one or more embodiments.
  • Figure 5 is a block diagram of a computer device according to one or more embodiments.
  • the image data labeling method provided in this application can be applied to the application environment as shown in FIG. 1.
  • the user terminal 102 and the server 104 communicate through the network, and the server 104 communicates with the cloud.
  • the user terminal 102 can download the task list from the server 104 and select the task for execution. After the task is selected, the task tagging request is sent to the server 104.
  • the server 104 queries the task list stored in the local database 108 for the task ID corresponding to the task.
  • the storage address and the first key of the image file and send the first key to the storage address in the cloud, so that the cloud can verify the first key, and after the verification is successful, return the desensitized Image file.
  • the server 104 sends the desensitized image file to the user terminal 102 in a binary stream, so that the user terminal 102 parses the image file to obtain pixel information and desensitization information, and displays the obtained pixel information and desensitization information; thus, the user
  • the terminal 102 annotates the pixel information to generate structured data, and returns the annotated structured data to the server 104, and the server 104 uploads the structured data to the cloud for associated storage with image files stored in the cloud.
  • an audit terminal 106 is also included for auditing the marked structured data.
  • the terminal 102 may be, but is not limited to, various personal computers, notebook computers, smart phones, tablet computers, and portable wearable devices.
  • the server 104 may be implemented by an independent server or a server cluster composed of multiple servers.
  • a method for labeling image data is provided. Taking the method applied to the server in FIG. 1 as an example for description, the method includes the following steps:
  • S202 Receive a task labeling request sent by the user terminal, where the task labeling request carries a task identifier.
  • the task tagging request is generated by the user terminal, and it carries the task that the user terminal wants to perform the tagging operation, and each task stored in the task list has a unique identifier.
  • the task tagging request is generated after the user terminal receives the user's selection instruction for the task displayed on the terminal. That is, the user terminal displays tasks in a list, etc., and the user selects the task to be processed by clicking operations, etc., so that the terminal can query the task ID of the task selected by the user, and generate a task labeling request based on the task ID, so that the task The labeling request is sent to the server for processing.
  • S204 Query the storage address and the first key of the image file corresponding to the task identifier from the task list stored in the local database.
  • the local database is the database corresponding to the index note platform.
  • the local database stores a task list.
  • the task list stores various tasks, including task status, task identification, storage address of the image file corresponding to the task, and first Key etc.
  • the task status includes the status to be marked, the status to be reviewed, and the status of marking completion.
  • the first key is the image file corresponding to the task, that is, the first key generated when the dicom file is stored in the public cloud, and the image file stored on the public cloud can be obtained through the first key, that is, the server sends the first key
  • the key is uploaded to the public cloud obs, and then the public cloud obs judges whether the first key is accurate, and returns the image information if it is accurate; when the data source is an internal client, the key is the key composed of the nas path + file name and some other information
  • the server can query the task list according to the task identifier to obtain the corresponding storage address and the first key.
  • the method of adding tasks in the task list in the local database can include: when the algorithm engineer uploads the image file dicom to the private cloud through the internal client or uploads the image file dicom to the public cloud through the image platform (the internal client is to upload the image file to the public cloud). On the nas of the medical plus service; the image platform uploads image files to the public cloud obs.), so that the cloud updates the file storage address in the database corresponding to the internal R&D platform according to the newly added image file dicom, and the server can take the initiative To inquire whether there is the file storage address of the updated image file dicom in the database of the internal R&D platform, and if it exists, import it to the server.
  • the import here refers to the file storage path, that is, the above storage address is imported to the server, not the entire Image file dicom.
  • the above-mentioned image data is stored in the cloud to strengthen data security management and control, to ensure the security of image data and annotated results, and to avoid the risk of data leakage.
  • the user terminal only uploads the task identification to the server, so that the server can query the task list stored in the local database to obtain the corresponding storage address and the first key, so that the server can go to the public cloud to obtain the image file.
  • S206 Send the first key to the storage address in the cloud, and the cloud is used to verify the first key, and after the verification is successful, return the desensitized image file in a binary stream.
  • the image file is composed of the pixel information of the image and a lot of tag information, and the tag contains many names and genders of the patient.
  • the server uses the first key to go to the corresponding storage address to fetch the image file, that is, the cloud first verifies the first key. If the first key is successfully verified, the cloud queries the corresponding image file dicom and identifies the image file dicom And then desensitize the information to be desensitized to obtain the desensitized information, that is, modify the desensitized information to "*", and then send the desensitized information to the server in a binary stream.
  • S208 Receive the cloud to return the desensitized image file in a binary stream, and send the desensitized image file to the user terminal in the binary stream, so that the user terminal parses the image file to obtain pixel information and desensitization information, and Display the obtained pixel information and desensitization information.
  • the server receives the image file in the form of a binary stream returned from the cloud, and then returns the received binary stream to the user terminal, so that the user terminal can parse the binary stream to obtain pixel information and desensitization information, and then analyze the pixel information. After the information is calculated, it is rendered and displayed, and the desensitization information is displayed.
  • Figure 3 is an interface diagram of the annotated page in an embodiment. The pixel information is rendered and displayed, and the desensitization information is directly displayed, thereby ensuring the name and gender of the patient in the image file dicom. It will not be obtained by the user, and this information is only stored in the cloud, and will not be obtained during the entire labeling process.
  • the user terminal displays as shown in Figure 3, so that the user can outline the characteristics of the lesion on this page, and label the lesion, and then the user terminal generates structured data according to the lesion information marked by the user, and combines the structured data with the corresponding The task ID is returned to the server.
  • S210 Receive the structured data after the pixel information is marked by the user terminal, and upload the structured data to the cloud for storage in association with the image file stored in the cloud.
  • the server After the server receives the structured data returned by the user terminal, that is, json data, it uploads the structured data to the public cloud, and the public cloud generates the second key, returns it to the server, and stores it in the local database. Therefore, when the user needs to view the labeled structured data, the second key can be used to query.
  • the above-mentioned image data annotation method by introducing the cloud, when the user annotates the image data, only the binary stream is returned to the image file, the image file includes pixel information and desensitization information after desensitization, so that the security of the image file can be guaranteed . And in the whole process, the user terminal is isolated from the image file in the whole process, and the user cannot obtain the user information in the image file, which ensures the security of the image file. In addition, the marked data is uploaded to the cloud to avoid the risk of data leakage.
  • the method before receiving the task labeling request sent by the user terminal, the method further includes: receiving the labeling request sent by the user terminal, and querying the task list stored in the first database according to the labeling request to obtain the task whose status is the to-be-labeled state; The tasks whose status is to be marked are sent to the user terminal, and the tasks whose state is to be marked are used for selection by the user terminal.
  • the server receives the labeling request sent by the user terminal, and queries the task list in the local database according to the labeling request to obtain the tasks whose status is the to-be-labeled state, and returns the tasks whose status is the to-be-labeled state to the user terminal, In this way, the user terminal selects the task whose status is the to-be-marked state, and generates a task marking request according to the task identifier of the selected task.
  • a user When a user wants to label data, he can first send a labeling request to the server. After receiving the labeling request, the server can query the local database to obtain the task whose status is to be labeled, and return the task to the user terminal. Therefore, the user terminal can display these tasks for the user to make a selection, and after the user makes a selection, the user terminal generates a task labeling request and sends the task labeling request to the server.
  • the user terminal can log in to the server through the webpage at the second level to obtain the task list, instead of setting up a client, etc., the annotator only needs to register an account through the webpage of the server to start annotating.
  • the user can select the task to be marked that he is interested in from the task list in the server for processing, so that the efficiency of task processing can be improved.
  • the method further includes: receiving a second key corresponding to the structured data returned by the cloud, and adding the second key The key is stored in the corresponding task in the task list, and the status of the corresponding task in the task list is modified to the pending audit status; the audit request sent by the audit terminal is received, and the status of the task list is in the pending audit status according to the audit request.
  • Task get the task whose status is pending audit and return it to the audit terminal, and receive the selected task returned by the audit terminal; query the second key corresponding to the selected task, and return the second key to the audit terminal, the second The key is used for the audit terminal to download and audit structured data from the cloud, and store the audit result in a local database.
  • the audit terminal after marking, it can also include an audit step, that is, the audit terminal sends an audit request to the server, the server queries the local database for tasks in the pending audit status and returns them to the audit terminal, the audit terminal selects the task to be audited, and The task ID of the task to be audited is sent to the server.
  • the server finds the corresponding second key according to the task ID and returns it to the audit terminal.
  • the audit terminal uses the second key to obtain the corresponding structured data on the public cloud, and After the review is passed, the approved information is sent to the local database, and the structured data and the approved information are sent to the R&D platform to store the task and the approved information in the corresponding database of the R&D platform.
  • the labeling after the labeling is completed, it also includes a review process of the labeled structured data, so as to ensure the accuracy of the labeled structured data, so that the accuracy of the original data can be ensured in the subsequent algorithm training process Performance, thereby improving the accuracy of the algorithm.
  • after storing the audit result in the local database further includes: sending the task corresponding to the structured data passed and the corresponding second key to the R&D platform for storage, and storing it in the R&D platform.
  • the task and the second key are used for the R&D terminal to query the second key corresponding to the task, and download the structured data corresponding to the task that has passed the audit from the cloud through the second key.
  • the R&D terminal sends a data acquisition request to the R&D platform, the R&D platform queries the task in the corresponding database, and obtains the second key, returns the second key to the R&D terminal, and the R&D terminal sends the second key to the cloud Obtain the corresponding structured data, and then perform algorithm training and other processing.
  • the labeling after the labeling is completed, it also includes a review process of the labeled structured data, so as to ensure the accuracy of the labeled structured data, so that the accuracy of the original data can be ensured in the subsequent algorithm training process Performance, thereby improving the accuracy of the algorithm.
  • querying the task address and the first key corresponding to the task identifier from the task list stored in the local database includes: selecting the processor to execute through the load balancing algorithm, and selecting the task list from the task list stored in the local database , Query the task address and the first key corresponding to the task identifier.
  • this embodiment mainly emphasizes load balancing, that is, after receiving the labeling request sent by the user terminal, the server selects the corresponding processor in the labeling platform for processing through the load balancing algorithm, and the load balancing algorithm may be the ngnix algorithm.
  • the task labeling request is processed through the load balancing algorithm, which can improve the efficiency of data processing.
  • steps in the flowchart of FIG. 2 are displayed in sequence as indicated by the arrows, these steps are not necessarily performed in sequence in the order indicated by the arrows. Unless specifically stated in this article, the execution of these steps is not strictly limited in order, and these steps can be executed in other orders. Moreover, at least part of the steps in FIG. 2 may include multiple sub-steps or multiple stages. These sub-steps or stages are not necessarily executed at the same time, but can be executed at different times. The execution of these sub-steps or stages The sequence is not necessarily performed sequentially, but may be performed alternately or alternately with at least a part of other steps or sub-steps or stages of other steps.
  • an image data labeling device which includes: a first receiving module 100, a first query module 200, a first sending module 300, a second receiving module 400, and a second receiving module 400; Sending module 500, where:
  • the first receiving module 100 is configured to receive a task labeling request sent by a user terminal, and the task labeling request carries a task identifier.
  • the first query module 200 is configured to query the storage address and the first key of the image file corresponding to the task identifier from the task list stored in the local database.
  • the first sending module 300 is configured to send the first key to a storage address in the cloud, and the cloud is used to verify the first key, and after successful verification, return the desensitized image file in a binary stream.
  • the second receiving module 400 is used to receive the desensitized image file returned by the cloud in the form of a binary stream, and send the desensitized image file to the user terminal in the form of a binary stream, so that the user terminal parses the image file to obtain pixel information And desensitization information, and display the obtained pixel information and desensitization information.
  • the second sending module 500 is configured to receive the structured data after the pixel information is marked by the user terminal, and upload the structured data to the cloud for storage in association with the image file stored in the cloud.
  • the above-mentioned image data labeling device further includes:
  • the third receiving module is configured to receive the labeling request sent by the user terminal, and query the task list stored in the first database according to the labeling request to obtain the task whose status is the to-be-labeled state.
  • the third sending module is used to send tasks whose status is to be marked to the user terminal, and the tasks whose state is to be marked are used for selection by the user terminal.
  • the above-mentioned image data labeling device further includes:
  • the fourth receiving module is used to receive the second key corresponding to the structured data returned by the cloud, and store the second key in the corresponding task in the task list, and modify the status of the corresponding task in the task list to Pending review status.
  • the second query module is used to receive the audit request sent by the audit terminal, and query the tasks in the pending audit status in the task list according to the audit request.
  • the selection module is used to obtain the task whose status is pending audit and return it to the audit terminal, and receive the selected task returned by the audit terminal.
  • the audit module is used to query the second key corresponding to the selected task and return the second key to the audit terminal.
  • the second key is used for the audit terminal to download structured data from the cloud and conduct audit. The results are stored in the local database.
  • the above-mentioned image data labeling device further includes:
  • the storage module is used to send the task corresponding to the structured data passed and the corresponding second key to the R&D platform for storage, and the task and the second key stored in the R&D platform are used for the R&D terminal to query the task Corresponding second key, and download the structured data corresponding to the task that has passed the audit from the cloud through the second key.
  • the above-mentioned first query module 200 includes:
  • the load balancing unit is used to select the processor for execution through the load balancing algorithm, and query the task address and the first key corresponding to the task identifier from the task list stored in the local database.
  • Each module in the above-mentioned image data labeling device can be implemented in whole or in part by software, hardware, and a combination thereof.
  • the above-mentioned modules may be embedded in the form of hardware or independent of the processor in the computer equipment, or may be stored in the memory of the computer equipment in the form of software, so that the processor can call and execute the operations corresponding to the above-mentioned modules.
  • a computer device is provided.
  • the computer device may be a server, and its internal structure diagram may be as shown in FIG. 5.
  • the computer equipment includes a processor, a memory, a network interface, and a database connected through a system bus.
  • the processor of the computer device is used to provide calculation and control capabilities.
  • the memory of the computer device includes a non-volatile storage medium and an internal memory.
  • the non-volatile storage medium stores an operating system, computer readable instructions, and a database.
  • the internal memory provides an environment for the operation of the operating system and computer-readable instructions in the non-volatile storage medium.
  • the database of the computer equipment is used to store image data.
  • the network interface of the computer device is used to communicate with an external terminal through a network connection. When the computer readable instruction is executed by the processor, an image data labeling method is realized.
  • FIG. 5 is only a block diagram of a part of the structure related to the solution of the present application, and does not constitute a limitation on the computer device to which the solution of the present application is applied.
  • the specific computer device may Including more or fewer parts than shown in the figure, or combining some parts, or having a different arrangement of parts.
  • a computer device including a memory and one or more processors.
  • the memory stores computer-readable instructions.
  • the one or more processors perform the following steps: Task labeling request, the task labeling request carries the task ID; from the task list stored in the local database, query the storage address and first key of the image file corresponding to the task ID; send the first key to the storage address in the cloud, the cloud Used to verify the first key, and after successful verification, return the desensitized image file in the form of a binary stream; the receiving cloud returns the desensitized image file in the form of a binary stream, and transfers the desensitized image file in a binary stream.
  • the desensitized image file is sent to the user terminal, so that the user terminal parses the image file to obtain pixel information and desensitization information, and displays the obtained pixel information and desensitization information; and receives the structure after the user terminal labels the pixel information Data, and upload the structured data to the cloud for associated storage with the image files stored in the cloud.
  • the processor before receiving the task labeling request sent by the user terminal when the processor executes the computer-readable instruction, it further includes: receiving the labeling request sent by the user terminal, and querying the tasks stored in the first database according to the labeling request The tasks whose status is the to-be-marked state are obtained from the list; and the tasks whose status is the to-be-marked state are sent to the user terminal, and the tasks whose status is the to-be-marked state are used for selection by the user terminal.
  • uploading the structured data to the cloud for storage in association with the image file stored in the cloud further includes: receiving the structured data returned from the cloud Corresponding second key, and store the second key in the corresponding task in the task list, and modify the status of the corresponding task in the task list to the pending audit status; receive the audit request sent by the audit terminal, and according to the audit Request to query the tasks whose status is pending review in the task list; get the tasks whose status is pending review and return them to the review terminal, and receive the selected tasks returned by the review terminal; and query the second key corresponding to the selected tasks, and The second key is returned to the audit terminal, and the second key is used for the audit terminal to download and audit structured data from the cloud, and store the audit result in the local database.
  • the processor executes the computer-readable instructions and stores the audit result in the local database, it further includes: sending the audit result to the task corresponding to the passed structured data and the corresponding second key
  • the task and the second key stored in the R&D platform are stored on the R&D platform for the R&D terminal to query the second key corresponding to the task, and download the structured data corresponding to the approved task from the cloud through the second key .
  • querying the task address and the first key corresponding to the task identifier from the task list stored in the local database when the processor executes the computer-readable instruction includes: selecting and processing through a load balancing algorithm The device executes, and queries the task address and the first key corresponding to the task identifier from the task list stored in the local database.
  • One or more computer-readable storage media storing computer-readable instructions.
  • the one or more processors perform the following steps: receiving a task marking request sent by a user terminal , The task tag request carries the task identifier; from the task list stored in the local database, query the storage address and the first key of the image file corresponding to the task identifier; send the first key to the storage address in the cloud, and the cloud is used to The first key is verified, and after the verification is successful, the desensitized image file is returned in a binary stream; the receiving cloud returns the desensitized image file in a binary stream, and the desensitized image file is returned in a binary stream.
  • the method before receiving the task labeling request sent by the user terminal when the computer-readable instruction is executed by the processor, the method further includes: receiving the labeling request sent by the user terminal, and querying the data stored in the first database according to the labeling request.
  • the task list obtains tasks whose status is to be marked; and sends tasks whose status is to be marked to the user terminal, and tasks whose status is to be marked are used for selection by the user terminal.
  • the method further includes: receiving and structured data returned from the cloud The second key corresponding to the data, and store the second key in the corresponding task in the task list, and modify the status of the corresponding task in the task list to the pending audit status; receive the audit request sent by the audit terminal, and according to The audit request queries the tasks whose status is pending review in the task list; obtains the tasks whose status is pending review and returns them to the review terminal, and receives the selected tasks returned by the review terminal; and queries the second key corresponding to the selected tasks, And the second key is returned to the audit terminal, and the second key is used for the audit terminal to download structured data from the cloud and conduct audit, and store the audit result in the local database.
  • the computer-readable instruction after the computer-readable instruction is executed by the processor and the audit result is stored in the local database, it further includes: the task corresponding to the passed structured data and the corresponding second key are the audit result.
  • the tasks and second keys stored on the R&D platform are used for the R&D terminal to query the second key corresponding to the task, and download the structured structure corresponding to the approved task from the cloud through the second key. data.
  • querying the task address and the first key corresponding to the task identifier from the task list stored in the local database when the computer-readable instruction is executed by the processor includes: selecting through a load balancing algorithm The processor executes and queries the task address and the first key corresponding to the task identifier from the task list stored in the local database.
  • Non-volatile memory may include read only memory (ROM), programmable ROM (PROM), electrically programmable ROM (EPROM), electrically erasable programmable ROM (EEPROM), or flash memory.
  • Volatile memory may include random access memory (RAM) or external cache memory.
  • RAM is available in many forms, such as static RAM (SRAM), dynamic RAM (DRAM), synchronous DRAM (SDRAM), double data rate SDRAM (DDRSDRAM), enhanced SDRAM (ESDRAM), synchronous chain Channel (Synchlink) DRAM (SLDRAM), memory bus (Rambus) direct RAM (RDRAM), direct memory bus dynamic RAM (DRDRAM), and memory bus dynamic RAM (RDRAM), etc.

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Security & Cryptography (AREA)
  • Bioethics (AREA)
  • General Health & Medical Sciences (AREA)
  • Computer Hardware Design (AREA)
  • Health & Medical Sciences (AREA)
  • Software Systems (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Databases & Information Systems (AREA)
  • Information Transfer Between Computers (AREA)

Abstract

一种影像数据标注方法，涉及大数据处理领域，包括：接收用户终端发送的任务标注请求，任务标注请求携带有任务标识；从本地数据库存储的任务列表中，查询与任务标识对应的影像文件的存储地址和第一密钥；向云端中存储地址发送所述第一密钥，云端用于对所述第一密钥进行验证，在验证成功后，返回脱敏后的影像文件；将脱敏后的影像文件发送给用户终端，以使用户终端解析所述影像文件得到像素信息和脱敏信息，并显示所得到的像素信息和脱敏信息；接收用户终端对像素信息进行标注后的结构化数据，并将结构化数据上传至云端，以与云端中存储的影像文件进行关联存储。

Description

影像数据标注方法、装置、计算机设备和存储介质
相关申请的交叉引用
本申请要求于2020年2月17日提交中国专利局，申请号为2020100976137，申请名称为“影像数据标注方法、装置、计算机设备和存储介质”的中国专利申请的优先权，其全部内容通过引用结合在本申请中。
技术领域
本申请涉及一种影像数据标注方法、装置、计算机设备和存储介质。
背景技术
数据标注是人工智能领域重要的一环，对于建立算法模型和提高算法精度来说是必不可少的阶段，而对于数据标注，标注平台就提供了这样一个基础标注功能为算法提供数据标注服务。
仅针对于影像标注来说，发明人意识到，传统标注工具产品一般是基于客户端来实现，因客户端功能比较齐全，用户体验好，特别是加载本地文件的性能方面比较有优势，但是同时也面临数据安全方面的问题：大量用户在使用这些客户端产品进行数据标注时，由于需要将数据加载到本地，因此很可能存在泄露标注数据的风险。
发明内容
根据本申请公开的各种实施例，提供一种影像数据标注方法、装置、计算机设备和存储介质。
一种影像数据标注方法，包括：
接收用户终端发送的任务标注请求，所述任务标注请求携带有任务标识；
从本地数据库存储的任务列表中，查询与所述任务标识对应的影像文件的存储地址和第一密钥；
向云端中所述存储地址发送所述第一密钥，所述云端用于对所述第一密钥进行验证，并在验证成功后，以二进制流的方式返回脱敏后的影像文件；
接收所述云端以二进制流的方式返回脱敏后的影像文件，并以二进制流方式将脱敏后的影像文件发送给所述用户终端，以使所述用户终端解析所述影像文件得到像素信息和脱敏信息，并显示所得到的像素信息和脱敏信息；及
接收所述用户终端对所述像素信息进行标注后的结构化数据，并将所述结构化数据上传至所述云端，以与所述云端中存储的影像文件进行关联存储。
一种影像数据标注装置，包括：
第一接收模块，用于接收用户终端发送的任务标注请求，所述任务标注请求携带有任务标识；
第一查询模块，用于从本地数据库存储的任务列表中，查询与所述任务标识对应的影像文件的存储地址和第一密钥；
第一发送模块，用于向云端中所述存储地址发送所述第一密钥，所述云端用于对所述第一密钥进行验证，并在验证成功后，以二进制流的方式返回脱敏后的影像文件；
第二接收模块，用于接收所述云端以二进制流的方式返回脱敏后的影像文件，并以二进制流方式将脱敏后的影像文件发送给所述用户终端，以使所述用户终端解析所述影像文件得到像素信息和脱敏信息，并显示所得到的像素信息和脱敏信息；及
第二发送模块，用于接收所述用户终端对所述像素信息进行标注后的结构化数据，并将所述结构化数据上传至所述云端，以与所述云端中存储的影像文件进行关联存储。
一种计算机设备，包括存储器和一个或多个处理器，所述存储器中储存有计算机可读指令，所述计算机可读指令被所述处理器执行时，使得所述一个或多个处理器执行以下步骤：
接收用户终端发送的任务标注请求，所述任务标注请求携带有任务标识；
从本地数据库存储的任务列表中，查询与所述任务标识对应的影像文件的存储地址和第一密钥；
向云端中所述存储地址发送所述第一密钥，所述云端用于对所述第一密钥进行验证，并在验证成功后，以二进制流的方式返回脱敏后的影像文件；
接收所述云端以二进制流的方式返回脱敏后的影像文件，并以二进制流方式将脱敏后的影像文件发送给所述用户终端，以使所述用户终端解析所述影像文件得到像素信息和脱敏信息，并显示所得到的像素信息和脱敏信息；及
接收所述用户终端对所述像素信息进行标注后的结构化数据，并将所述结构化数据上传至所述云端，以与所述云端中存储的影像文件进行关联存储。
一个或多个存储有计算机可读指令的计算机可读存储介质，计算机可读指令被一个或多个处理器执行时，使得一个或多个处理器执行以下步骤：
接收用户终端发送的任务标注请求，所述任务标注请求携带有任务标识；
从本地数据库存储的任务列表中，查询与所述任务标识对应的影像文件的存储地址和第一密钥；
向云端中所述存储地址发送所述第一密钥，所述云端用于对所述第一密钥进行验证，并在验证成功后，以二进制流的方式返回脱敏后的影像文件；
接收所述云端以二进制流的方式返回脱敏后的影像文件，并以二进制流方式将脱敏后的影像文件发送给所述用户终端，以使所述用户终端解析所述影像文件得到像素信息和脱敏信息，并显示所得到的像素信息和脱敏信息；及
接收所述用户终端对所述像素信息进行标注后的结构化数据，并将所述结构化数据上 传至所述云端，以与所述云端中存储的影像文件进行关联存储。
本申请的一个或多个实施例的细节在下面的附图和描述中提出。本申请的其它特征和优点将从说明书、附图以及权利要求书变得明显。
附图说明
为了更清楚地说明本申请实施例中的技术方案，下面将对实施例中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其它的附图。
图1为根据一个或多个实施例中影像数据标注方法的应用场景图。
图2为根据一个或多个实施例中影像数据标注方法的流程示意图。
图3为根据一个或多个实施例中的标注页面的界面图。
图4为根据一个或多个实施例中影像数据标注装置的框图。
图5为根据一个或多个实施例中计算机设备的框图。
具体实施方式
为了使本申请的技术方案及优点更加清楚明白，以下结合附图及实施例，对本申请进行进一步详细说明。应当理解，此处描述的具体实施例仅仅用以解释本申请，并不用于限定本申请。
本申请提供的影像数据标注方法，可以应用于如图1所示的应用环境中。用户终端102与服务器104通过网络进行通信，服务器104与云端进行通信。用户终端102可以从服务器104下载任务列表，并选择任务进行执行，在选择好任务后，将任务标注请求发送给服务器104，服务器104从本地数据库108存储的任务列表中，查询与任务标识对应的影像文件的存储地址和第一密钥，并向云端中存储地址发送第一密钥，从而云端可以对第一密钥进行验证，并在验证成功后，以二进制流的方式返回脱敏后的影像文件。从而服务器104以二进制流方式将脱敏后的影像文件发送给用户终端102，以使用户终端102解析影像文件得到像素信息和脱敏信息，并显示所得到的像素信息和脱敏信息；从而用户终端102对像素信息进行标注后生成结构化数据，并将标注后的结构化数据返回给服务器104，服务器104将结构化数据上传至云端，以与云端中存储的影像文件进行关联存储。此外还包括一审核终端106，用于对标注后的结构化数据进行审核。终端102可以但不限于是各种个人计算机、笔记本电脑、智能手机、平板电脑和便携式可穿戴设备，服务器104可以用独立的服务器或者是多个服务器组成的服务器集群来实现。
在其中一个实施例中，如图2所示，提供了一种影像数据标注方法，以该方法应用于图1中的服务器为例进行说明，包括以下步骤：
S202：接收用户终端发送的任务标注请求，任务标注请求携带有任务标识。
具体地，任务标注请求是用户终端生成的，其携带有用户终端想要进行标注操作的任 务，每一个存储在任务列表中的任务都具有唯一的标识。在实际应用中，任务标注请求是在用户终端接收到用户的针对终端所显示的任务的选择指令后生成的。即用户终端显示以列表等方式显示任务，用户通过点击操作等选择到想要处理的任务，从而终端可以查询用户所选择的任务的任务标识，并根据任务标识生成任务标注请求，从而将该任务标注请求发送给服务器以进行处理。
S204：从本地数据库存储的任务列表中，查询与任务标识对应的影像文件的存储地址和第一密钥。
具体地，本地数据库是指标注平台所对应的数据库，该本地数据库中存储有任务列表，该任务列表存储有各种任务，包括任务状态、任务标识、任务对应的影像文件的存储地址、第一密钥等。任务状态包括待标注状态、待审核状态以及标注完成状态。第一密钥是任务对应的影像文件，即dicom文件存储到公有云时生成的第一密钥，通过该第一密钥可以获取到存储到公有云上的影像文件，即服务器将第一密钥上传到公有云obs，然后公有云obs判断第一密钥是否准确，若准确则返回影像信息；当数据来源是内部的客户端时，key为nas路径+文件名以及一些其他信息组成的key，下载时获取到key以后找到对应的nas文件转换成文件流返回。服务器接收到任务标识后，可以根据任务标识查询该任务列表以获取到对应的存储地址以及第一密钥。本地数据库中任务列表中任务的添加方式可以包括：算法工程师通过内部的客户端上传影像文件dicom至私有云或者是通过影像平台上传影像文件dicom至公有云时(内部的客户端是将影像文件放在医加服务的nas上；影像平台的是将影像文件上传是公有云obs。)，从而云端根据新增的影像文件dicom去更新内部研发平台对应的数据库中的文件存储地址，进而服务器可以主动去查询内部研发平台的数据库中是否有更新的影像文件dicom的文件存储地址，如果存在则导入到服务器，这里的导入是指将文件存储路径，即上述的存储地址导入到服务器，并不是导入整个影像文件dicom。上述影像数据存储在云端，加强数据安全管控，保证影像数据和标注后的结果安全性，避免数据泄露风险。
用户终端仅上传任务标识给服务器，从而服务器可以查询本地数据库中存储的任务列表以得到对应的存储地址以及第一密钥，从而服务器可以去公有云上获取到影像文件。
S206：向云端中存储地址发送第一密钥，云端用于对第一密钥进行验证，并在验证成功后，以二进制流的方式返回脱敏后的影像文件。
具体地，影像文件是由图像的像素信息以及很多很多的tag信息组成的，tag包含很多可以是患者的姓名、性别。服务器通过第一密钥去对应的存储地址进行取影像文件的操作，即云端首先验证第一密钥，如果第一密钥验证成功了，则云端查询到对应的影像文件dicom，识别影像文件dicom中的待脱敏信息，然后对该待脱敏信息进行脱敏处理得到脱敏信息，即将待脱敏信息修改为“*”，然后将脱敏后的信息以二进制流的方式发送给服务器。
S208：接收云端以二进制流的方式返回脱敏后的影像文件，并以二进制流方式将脱敏 后的影像文件发送给用户终端，以使用户终端解析影像文件得到像素信息和脱敏信息，并显示所得到的像素信息和脱敏信息。
具体地，服务器接收到云端返回的以二进制流形式的影像文件，然后将所接收到的二进制流返给用户终端，从而用户终端可以对二进制流进行解析得到像素信息和脱敏信息，然后对像素信息进行计算后渲染显示，并将脱敏信息进行显示。具体地，可以参见图3所示，图3为一个实施例中的标注页面的界面图，像素信息进行渲染显示，脱敏信息进行直接显示，从而保证了影像文件dicom中的患者的姓名、性别不会被用户获取到，且该些信息只保存到云端，整个标注过程均不会被获取到。
用户终端显示如图3所示，从而用户可以在该页面上对病灶特征进行勾画，并打上病灶标签，然后用户终端根据用户所标注的病灶信息生成结构化数据，并将结构化数据和对应的任务标识返回给服务器。
S210：接收用户终端对像素信息进行标注后的结构化数据，并将结构化数据上传至云端，以与云端中存储的影像文件进行关联存储。
具体地，服务器接收到用户终端返回的结构化数据后，即json数据，然后将结构化数据上传至公有云中，公有云生成第二密钥，并返给服务器，并存储到本地数据库中，从而当用户需要查看标注的结构化数据时，则可以通过第二密钥去查询。
上述影像数据标注方法，通过引入云端，在用户对影像数据进行标注时，仅是以二进制流返回影像文件，该影像文件包括像素信息和脱敏后的脱敏信息这样可以保证影像文件的安全性。且在整个过程中，用户终端全程与影像文件隔离，用户无法获取到影像文件中的用户信息，保证了影像文件的安全。此外，标注后的数据上传到云端，避免了数据泄露的风险。
在其中一个实施例中，接收用户终端发送的任务标注请求之前，还包括：接收用户终端发送的标注请求，根据标注请求查询第一数据库中存储的任务列表得到状态为待标注状态的任务；将状态为待标注状态的任务发送给用户终端，状态为待标注状态的任务用于供用户终端进行选择。
具体地，服务器接收到用户终端发送的标注请求，并根据所述标注请求查询本地数据库中的任务列表以获得状态为待标注状态的任务，并将状态为待标注状态的任务返回给用户终端，以使得用户终端对状态为待标注状态的任务进行选择，并根据所选择的任务的任务标识生成任务标注请求。
用户在想要对数据进行标注时，可以首先向服务器发送标注请求，服务器接收到该标注请求后，可以查询本地数据库以获取到状态为待标注状态的任务，并将该任务返给用户终端，从而用户终端可以显示该些任务，以便于用户进行选择，且在用户进行选择后，则用户终端生成任务标注请求，并将任务标注请求发送给服务器。
此外，在该实施例中，用户终端可以至二级通过网页登录服务器，以获取到任务列表，而不要特意设置客户端等，只需标注者通过服务器的网页进行账号注册即可开始标注。
上述实施例中，用户可以从服务器中的任务列表中选取自己感兴趣的待标注任务进行处理，从而可以提高任务处理的效率。
在其中一个实施例中，将结构化数据上传至云端，以与云端中存储的影像文件进行关联存储之后，还包括：接收云端返回的与结构化数据对应的第二密钥，并将第二密钥存储至任务列表中对应的任务中，且将任务列表中对应的任务的状态修改为待审核状态；接收审核终端发送的审核请求，并根据审核请求查询任务列表中状态为待审核状态的任务；获取状态为待审核状态的任务返回给审核终端，并接收审核终端返回的选中的任务；查询所选中的任务对应的第二密钥，并将第二密钥返回给审核终端，第二密钥用于供审核终端从云端下载结构化数据并进行审核，且将审核结果存储至本地数据库。
具体地，在标注完后，还可以包括一审核步骤，即审核终端向服务器发送审核请求，服务器查询本地数据库中状态为待审核状态的任务返回给审核终端，审核终端选择要审核的任务，并将需要审核的任务的任务标识发送给服务器，服务器根据任务标识查询到对应的第二密钥返给审核终端，审核终端通过该第二密钥去公有云上获取到对应的结构化数据，并进行审核，审核通过后，则向本地数据库发送审核通过的信息，并向研发平台发送该结构化数据以及审核通过的信息，以将任务以及审核通过的信息存储至研发平台对应的数据库。
上述实施例中，在标注完成后，还包括对标注的后的结构化数据的审核过程，这样保证标注后的结构化数据的准确性，从而在后续算法的训练过程中可以保证原始数据的准确性，进而提高算法的准确性。
在其中一个实施例中，将审核结果存储至本地数据库之后，还包括：将审核结果为通过的结构化数据对应的任务以及对应的第二密钥发送至研发平台进行存储，存储至研发平台的任务和第二密钥用于供研发终端查询到任务对应的第二密钥，并通过第二密钥从云端下载审核通过的任务对应的结构化数据。
具体地，研发终端向研发平台发送数据获取请求，研发平台查询对应的数据库中的任务，并获取到第二密钥，将第二密钥返给研发终端，研发终端通过第二密钥向云端获取到对应的结构化数据，进而进行算法的训练等处理。
上述实施例中，在标注完成后，还包括对标注的后的结构化数据的审核过程，这样保证标注后的结构化数据的准确性，从而在后续算法的训练过程中可以保证原始数据的准确性，进而提高算法的准确性。
在其中一个实施例中，从本地数据库中存储的任务列表中，查询与任务标识对应的任务地址和第一密钥，包括：通过负载均衡算法选择处理器执行，从本地数据库中存储的任务列表中，查询与任务标识对应的任务地址和第一密钥。
具体地，该实施例主要强调负载均衡，即服务器接收到用户终端发送的标注请求后，通过负载均衡算法选择标注平台中对应的处理器进行处理，负载均衡算法可以是ngnix算法。
上述实施例中，通过负载均衡算法来对任务标注请求进行处理，可以提高数据处理的效率。
应该理解的是，虽然图2的流程图中的各个步骤按照箭头的指示依次显示，但是这些步骤并不是必然按照箭头指示的顺序依次执行。除非本文中有明确的说明，这些步骤的执行并没有严格的顺序限制，这些步骤可以以其它的顺序执行。而且，图2中的至少一部分步骤可以包括多个子步骤或者多个阶段，这些子步骤或者阶段并不必然是在同一时刻执行完成，而是可以在不同的时刻执行，这些子步骤或者阶段的执行顺序也不必然是依次进行，而是可以与其它步骤或者其它步骤的子步骤或者阶段的至少一部分轮流或者交替地执行。
在其中一个实施例中，如图4所示，提供了一种影像数据标注装置，包括：第一接收模块100、第一查询模块200、第一发送模块300、第二接收模块400和第二发送模块500，其中：
第一接收模块100，用于接收用户终端发送的任务标注请求，任务标注请求携带有任务标识。
第一查询模块200，用于从本地数据库存储的任务列表中，查询与任务标识对应的影像文件的存储地址和第一密钥。
第一发送模块300，用于向云端中存储地址发送第一密钥，云端用于对第一密钥进行验证，并在验证成功后，以二进制流的方式返回脱敏后的影像文件。
第二接收模块400，用于接收云端以二进制流的方式返回脱敏后的影像文件，并以二进制流方式将脱敏后的影像文件发送给用户终端，以使用户终端解析影像文件得到像素信息和脱敏信息，并显示所得到的像素信息和脱敏信息。
第二发送模块500，用于接收用户终端对像素信息进行标注后的结构化数据，并将结构化数据上传至云端，以与云端中存储的影像文件进行关联存储。
在其中一个实施例中，上述影像数据标注装置还包括：
第三接收模块，用于接收用户终端发送的标注请求，根据标注请求查询第一数据库中存储的任务列表得到状态为待标注状态的任务。
第三发送模块，用于将状态为待标注状态的任务发送给用户终端，状态为待标注状态的任务用于供用户终端进行选择。
在其中一个实施例中，上述影像数据标注装置还包括：
第四接收模块，用于接收云端返回的与结构化数据对应的第二密钥，并将第二密钥存储至任务列表中对应的任务中，且将任务列表中对应的任务的状态修改为待审核状态。
第二查询模块，用于接收审核终端发送的审核请求，并根据审核请求查询任务列表中状态为待审核状态的任务。
选择模块，用于获取状态为待审核状态的任务返回给审核终端，并接收审核终端返回的选中的任务。
审核模块，用于查询所选中的任务对应的第二密钥，并将第二密钥返回给审核终端，第二密钥用于供审核终端从云端下载结构化数据并进行审核，且将审核结果存储至本地数据库。
在其中一个实施例中，上述影像数据标注装置还包括：
存储模块，用于将审核结果为通过的结构化数据对应的任务以及对应的第二密钥发送至研发平台进行存储，存储至研发平台的任务和第二密钥用于供研发终端查询到任务对应的第二密钥，并通过第二密钥从云端下载审核通过的任务对应的结构化数据。
在其中一个实施例中，上述第一查询模块200包括：
负载均衡单元，用于通过负载均衡算法选择处理器执行，从本地数据库中存储的任务列表中，查询与任务标识对应的任务地址和第一密钥。
关于影像数据标注装置的具体限定可以参见上文中对于影像数据标注方法的限定，在此不再赘述。上述影像数据标注装置中的各个模块可全部或部分通过软件、硬件及其组合来实现。上述各模块可以硬件形式内嵌于或独立于计算机设备中的处理器中，也可以以软件形式存储于计算机设备中的存储器中，以便于处理器调用执行以上各个模块对应的操作。
在其中一个实施例中，提供了一种计算机设备，该计算机设备可以是服务器，其内部结构图可以如图5所示。该计算机设备包括通过系统总线连接的处理器、存储器、网络接口和数据库。该计算机设备的处理器用于提供计算和控制能力。该计算机设备的存储器包括非易失性存储介质、内存储器。该非易失性存储介质存储有操作系统、计算机可读指令和数据库。该内存储器为非易失性存储介质中的操作系统和计算机可读指令的运行提供环境。该计算机设备的数据库用于存储影像数据。该计算机设备的网络接口用于与外部的终端通过网络连接通信。该计算机可读指令被处理器执行时以实现一种影像数据标注方法。
本领域技术人员可以理解，图5中示出的结构，仅仅是与本申请方案相关的部分结构的框图，并不构成对本申请方案所应用于其上的计算机设备的限定，具体的计算机设备可以包括比图中所示更多或更少的部件，或者组合某些部件，或者具有不同的部件布置。
一种计算机设备，包括存储器和一个或多个处理器，存储器中储存有计算机可读指令，计算机可读指令被处理器执行时，使得一个或多个处理器执行以下步骤：接收用户终端发送的任务标注请求，任务标注请求携带有任务标识；从本地数据库存储的任务列表中，查询与任务标识对应的影像文件的存储地址和第一密钥；向云端中存储地址发送第一密钥，云端用于对第一密钥进行验证，并在验证成功后，以二进制流的方式返回脱敏后的影像文件；接收云端以二进制流的方式返回脱敏后的影像文件，并以二进制流方式将脱敏后的影像文件发送给用户终端，以使用户终端解析影像文件得到像素信息和脱敏信息，并显示所得到的像素信息和脱敏信息；及接收用户终端对像素信息进行标注后的结构化数据，并将结构化数据上传至云端，以与云端中存储的影像文件进行关联存储。
在其中一个实施例中，处理器执行计算机可读指令时所实现的接收用户终端发送的任务标注请求之前，还包括：接收用户终端发送的标注请求，根据标注请求查询第一数据库中存储的任务列表得到状态为待标注状态的任务；及将状态为待标注状态的任务发送给用户终端，状态为待标注状态的任务用于供用户终端进行选择。
在其中一个实施例中，处理器执行计算机可读指令时所实现的将结构化数据上传至云端，以与云端中存储的影像文件进行关联存储之后，还包括：接收云端返回的与结构化数据对应的第二密钥，并将第二密钥存储至任务列表中对应的任务中，且将任务列表中对应的任务的状态修改为待审核状态；接收审核终端发送的审核请求，并根据审核请求查询任务列表中状态为待审核状态的任务；获取状态为待审核状态的任务返回给审核终端，并接收审核终端返回的选中的任务；及查询所选中的任务对应的第二密钥，并将第二密钥返回给审核终端，第二密钥用于供审核终端从云端下载结构化数据并进行审核，且将审核结果存储至本地数据库。
在其中一个实施例中，处理器执行计算机可读指令时所实现的将审核结果存储至本地数据库之后，还包括：将审核结果为通过的结构化数据对应的任务以及对应的第二密钥发送至研发平台进行存储，存储至研发平台的任务和第二密钥用于供研发终端查询到任务对应的第二密钥，并通过第二密钥从云端下载审核通过的任务对应的结构化数据。
在其中一个实施例中，处理器执行计算机可读指令时所实现的从本地数据库中存储的任务列表中，查询与任务标识对应的任务地址和第一密钥，包括：通过负载均衡算法选择处理器执行，从本地数据库中存储的任务列表中，查询与任务标识对应的任务地址和第一密钥。
一个或多个存储有计算机可读指令的计算机可读存储介质，计算机可读指令被一个或多个处理器执行时，使得一个或多个处理器执行以下步骤：接收用户终端发送的任务标注请求，任务标注请求携带有任务标识；从本地数据库存储的任务列表中，查询与任务标识对应的影像文件的存储地址和第一密钥；向云端中存储地址发送第一密钥，云端用于对第一密钥进行验证，并在验证成功后，以二进制流的方式返回脱敏后的影像文件；接收云端以二进制流的方式返回脱敏后的影像文件，并以二进制流方式将脱敏后的影像文件发送给用户终端，以使用户终端解析影像文件得到像素信息和脱敏信息，并显示所得到的像素信息和脱敏信息；及接收用户终端对像素信息进行标注后的结构化数据，并将结构化数据上传至云端，以与云端中存储的影像文件进行关联存储。
在其中一个实施例中，计算机可读指令被处理器执行时所实现的接收用户终端发送的任务标注请求之前，还包括：接收用户终端发送的标注请求，根据标注请求查询第一数据库中存储的任务列表得到状态为待标注状态的任务；及将状态为待标注状态的任务发送给用户终端，状态为待标注状态的任务用于供用户终端进行选择。
在其中一个实施例中，计算机可读指令被处理器执行时所实现的将结构化数据上传至云端，以与云端中存储的影像文件进行关联存储之后，还包括：接收云端返回的与结构化 数据对应的第二密钥，并将第二密钥存储至任务列表中对应的任务中，且将任务列表中对应的任务的状态修改为待审核状态；接收审核终端发送的审核请求，并根据审核请求查询任务列表中状态为待审核状态的任务；获取状态为待审核状态的任务返回给审核终端，并接收审核终端返回的选中的任务；及查询所选中的任务对应的第二密钥，并将第二密钥返回给审核终端，第二密钥用于供审核终端从云端下载结构化数据并进行审核，且将审核结果存储至本地数据库。
在其中一个实施例中，计算机可读指令被处理器执行时所实现的将审核结果存储至本地数据库之后，还包括：将审核结果为通过的结构化数据对应的任务以及对应的第二密钥发送至研发平台进行存储，存储至研发平台的任务和第二密钥用于供研发终端查询到任务对应的第二密钥，并通过第二密钥从云端下载审核通过的任务对应的结构化数据。
在其中一个实施例中，计算机可读指令被处理器执行时所实现的从本地数据库中存储的任务列表中，查询与任务标识对应的任务地址和第一密钥，包括：通过负载均衡算法选择处理器执行，从本地数据库中存储的任务列表中，查询与任务标识对应的任务地址和第一密钥。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程，是可以通过计算机可读指令来指令相关的硬件来完成，所述的计算机可读指令可存储于一非易失性计算机可读取存储介质中，该计算机可读指令在执行时，可包括如上述各方法的实施例的流程。本申请所提供的各实施例中所使用的对存储器、存储、数据库或其它介质的任何引用，均可包括非易失性和/或易失性存储器。非易失性存储器可包括只读存储器(ROM)、可编程ROM(PROM)、电可编程ROM(EPROM)、电可擦除可编程ROM(EEPROM)或闪存。易失性存储器可包括随机存取存储器(RAM)或者外部高速缓冲存储器。作为说明而非局限，RAM以多种形式可得，诸如静态RAM(SRAM)、动态RAM(DRAM)、同步DRAM(SDRAM)、双数据率SDRAM(DDRSDRAM)、增强型SDRAM(ESDRAM)、同步链路(Synchlink)DRAM(SLDRAM)、存储器总线(Rambus)直接RAM(RDRAM)、直接存储器总线动态RAM(DRDRAM)、以及存储器总线动态RAM(RDRAM)等。
以上实施例的各技术特征可以进行任意的组合，为使描述简洁，未对上述实施例中的各个技术特征所有可能的组合都进行描述，然而，只要这些技术特征的组合不存在矛盾，都应当认为是本说明书记载的范围。
以上所述实施例仅表达了本申请的几种实施方式，其描述较为具体和详细，但并不能因此而理解为对发明专利范围的限制。应当指出的是，对于本领域的普通技术人员来说，在不脱离本申请构思的前提下，还可以做出若干变形和改进，这些都属于本申请的保护范围。因此，本申请专利的保护范围应以所附权利要求为准。

Claims (16)

  1. 一种影像数据标注方法，包括：
    接收用户终端发送的任务标注请求，所述任务标注请求携带有任务标识；
    从本地数据库存储的任务列表中，查询与所述任务标识对应的影像文件的存储地址和第一密钥；
    向云端中所述存储地址发送所述第一密钥，所述云端用于对所述第一密钥进行验证，并在验证成功后，以二进制流的方式返回脱敏后的影像文件；
    接收所述云端以二进制流的方式返回脱敏后的影像文件，并以二进制流方式将脱敏后的影像文件发送给所述用户终端，以使所述用户终端解析所述影像文件得到像素信息和脱敏信息，并显示所得到的像素信息和脱敏信息；及
    接收所述用户终端对所述像素信息进行标注后的结构化数据，并将所述结构化数据上传至所述云端，以与所述云端中存储的影像文件进行关联存储。
  2. 根据权利要求1所述的方法，其中，所述接收用户终端发送的任务标注请求之前，所述方法还包括：
    接收用户终端发送的标注请求，根据所述标注请求查询第一数据库中存储的任务列表得到状态为待标注状态的任务；及
    将状态为待标注状态的任务发送给所述用户终端，所述状态为待标注状态的任务用于供所述用户终端进行选择。
  3. 根据权利要求1所述的方法，其中，所述将所述结构化数据上传至所述云端，以与所述云端中存储的影像文件进行关联存储之后，所述方法还包括：
    接收所述云端返回的与所述结构化数据对应的第二密钥，并将所述第二密钥存储至所述任务列表中对应的任务中，且将所述任务列表中对应的任务的状态修改为待审核状态；
    接收审核终端发送的审核请求，并根据所述审核请求查询所述任务列表中状态为待审核状态的任务；
    获取所述状态为待审核状态的任务返回给所述审核终端，并接收所述审核终端返回的选中的任务；及
    查询所选中的任务对应的第二密钥，并将所述第二密钥返回给所述审核终端，所述第二密钥用于供所述审核终端从所述云端下载所述结构化数据并进行审核，且将审核结果存储至所述本地数据库。
  4. 根据权利要求3所述的方法，其中，所述将审核结果存储至所述本地数据库之后，所述方法还包括：
    将审核结果为通过的结构化数据对应的任务以及对应的第二密钥发送至研发平台进行存储，存储至所述研发平台的任务和第二密钥用于供研发终端查询到所述任务对应的第二密钥，并通过所述第二密钥从所述云端下载审核通过的任务对应的结构化数据。
  5. 根据权利要求1至4任意一项所述的方法，其中，所述从本地数据库中存储的任 务列表中，查询与所述任务标识对应的任务地址和第一密钥，包括：
    通过负载均衡算法选择处理器执行，从本地数据库中存储的任务列表中，查询与所述任务标识对应的任务地址和第一密钥。
  6. 一种影像数据标注装置，包括：
    第一接收模块，用于接收用户终端发送的任务标注请求，所述任务标注请求携带有任务标识；
    第一查询模块，用于从本地数据库存储的任务列表中，查询与所述任务标识对应的影像文件的存储地址和第一密钥；
    第一发送模块，用于向云端中所述存储地址发送所述第一密钥，所述云端用于对所述第一密钥进行验证，并在验证成功后，以二进制流的方式返回脱敏后的影像文件；
    第二接收模块，用于接收所述云端以二进制流的方式返回脱敏后的影像文件，并以二进制流方式将脱敏后的影像文件发送给所述用户终端，以使所述用户终端解析所述影像文件得到像素信息和脱敏信息，并显示所得到的像素信息和脱敏信息；及
    第二发送模块，用于接收所述用户终端对所述像素信息进行标注后的结构化数据，并将所述结构化数据上传至所述云端，以与所述云端中存储的影像文件进行关联存储。
  7. 一种服务器，包括存储器及一个或多个处理器，所述存储器中储存有计算机可读指令，所述计算机可读指令被所述一个或多个处理器执行时，使得所述一个或多个处理器执行以下步骤：
    接收用户终端发送的任务标注请求，所述任务标注请求携带有任务标识；
    从本地数据库存储的任务列表中，查询与所述任务标识对应的影像文件的存储地址和第一密钥；
    向云端中所述存储地址发送所述第一密钥，所述云端用于对所述第一密钥进行验证，并在验证成功后，以二进制流的方式返回脱敏后的影像文件；
    接收所述云端以二进制流的方式返回脱敏后的影像文件，并以二进制流方式将脱敏后的影像文件发送给所述用户终端，以使所述用户终端解析所述影像文件得到像素信息和脱敏信息，并显示所得到的像素信息和脱敏信息；及
    接收所述用户终端对所述像素信息进行标注后的结构化数据，并将所述结构化数据上传至所述云端，以与所述云端中存储的影像文件进行关联存储。
  8. 根据权利要求7所述的服务器，其中，所述处理器执行所述计算机可读指令时在执行所述接收用户终端发送的任务标注请求的步骤之前，所述处理器执行所述计算机可读指令时还执行以下步骤：
    接收用户终端发送的标注请求，根据所述标注请求查询第一数据库中存储的任务列表得到状态为待标注状态的任务；及
    将状态为待标注状态的任务发送给所述用户终端，所述状态为待标注状态的任务用于供所述用户终端进行选择。
  9. 根据权利要求7所述的服务器，其中，所述处理器执行所述计算机可读指令时在执行所述将所述结构化数据上传至所述云端，以与所述云端中存储的影像文件进行关联存储之后，所述处理器执行所述计算机可读指令时还执行以下步骤：
    接收所述云端返回的与所述结构化数据对应的第二密钥，并将所述第二密钥存储至所述任务列表中对应的任务中，且将所述任务列表中对应的任务的状态修改为待审核状态；
    接收审核终端发送的审核请求，并根据所述审核请求查询所述任务列表中状态为待审核状态的任务；
    获取所述状态为待审核状态的任务返回给所述审核终端，并接收所述审核终端返回的选中的任务；及
    查询所选中的任务对应的第二密钥，并将所述第二密钥返回给所述审核终端，所述第二密钥用于供所述审核终端从所述云端下载所述结构化数据并进行审核，且将审核结果存储至所述本地数据库。
  10. 根据权利要求9所述的服务器，其中，所述处理器执行所述计算机可读指令时在执行所述将审核结果存储至所述本地数据库之后，所述处理器执行所述计算机可读指令时还执行以下步骤：
    将审核结果为通过的结构化数据对应的任务以及对应的第二密钥发送至研发平台进行存储，存储至所述研发平台的任务和第二密钥用于供研发终端查询到所述任务对应的第二密钥，并通过所述第二密钥从所述云端下载审核通过的任务对应的结构化数据。
  11. 根据权利要求7至10任意一项所述的服务器，其中，所述处理器执行所述计算机可读指令时所执行的所述从本地数据库中存储的任务列表中，查询与所述任务标识对应的任务地址和第一密钥，包括：
    通过负载均衡算法选择处理器执行，从本地数据库中存储的任务列表中，查询与所述任务标识对应的任务地址和第一密钥。
  12. 一个或多个存储有计算机可读指令的非易失性计算机可读存储介质，所述计算机可读指令被一个或多个处理器执行时，使得所述一个或多个处理器执行以下步骤：
    接收用户终端发送的任务标注请求，所述任务标注请求携带有任务标识；
    从本地数据库存储的任务列表中，查询与所述任务标识对应的影像文件的存储地址和第一密钥；
    向云端中所述存储地址发送所述第一密钥，所述云端用于对所述第一密钥进行验证，并在验证成功后，以二进制流的方式返回脱敏后的影像文件；
    接收所述云端以二进制流的方式返回脱敏后的影像文件，并以二进制流方式将脱敏后的影像文件发送给所述用户终端，以使所述用户终端解析所述影像文件得到像素信息和脱敏信息，并显示所得到的像素信息和脱敏信息；及
    接收所述用户终端对所述像素信息进行标注后的结构化数据，并将所述结构化数据上传至所述云端，以与所述云端中存储的影像文件进行关联存储。
  13. 根据权利要求12所述的存储介质，其中，所述计算机可读指令被所述处理器执行时在执行所述接收用户终端发送的任务标注请求的步骤之前，所述计算机可读指令被所述处理器执行时还执行以下步骤：
    接收用户终端发送的标注请求，根据所述标注请求查询第一数据库中存储的任务列表得到状态为待标注状态的任务；及
    将状态为待标注状态的任务发送给所述用户终端，所述状态为待标注状态的任务用于供所述用户终端进行选择。
  14. 根据权利要求12所述的存储介质，其中，所述计算机可读指令被所述处理器执行时在执行所述将所述结构化数据上传至所述云端，以与所述云端中存储的影像文件进行关联存储之后，所述计算机可读指令被所述处理器执行时还执行以下步骤：
    接收所述云端返回的与所述结构化数据对应的第二密钥，并将所述第二密钥存储至所述任务列表中对应的任务中，且将所述任务列表中对应的任务的状态修改为待审核状态；
    接收审核终端发送的审核请求，并根据所述审核请求查询所述任务列表中状态为待审核状态的任务；
    获取所述状态为待审核状态的任务返回给所述审核终端，并接收所述审核终端返回的选中的任务；及
    查询所选中的任务对应的第二密钥，并将所述第二密钥返回给所述审核终端，所述第二密钥用于供所述审核终端从所述云端下载所述结构化数据并进行审核，且将审核结果存储至所述本地数据库。
  15. 根据权利要求14所述的存储介质，其中，所述计算机可读指令被所述处理器执行时在执行所述将审核结果存储至所述本地数据库之后，所述计算机可读指令被所述处理器执行时还执行以下步骤：
    将审核结果为通过的结构化数据对应的任务以及对应的第二密钥发送至研发平台进行存储，存储至所述研发平台的任务和第二密钥用于供研发终端查询到所述任务对应的第二密钥，并通过所述第二密钥从所述云端下载审核通过的任务对应的结构化数据。
  16. 根据权利要求12至15任意一项所述的存储介质，其中，所述计算机可读指令被所述处理器执行时所执行的所述从本地数据库中存储的任务列表中，查询与所述任务标识对应的任务地址和第一密钥，包括：
    通过负载均衡算法选择处理器执行，从本地数据库中存储的任务列表中，查询与所述任务标识对应的任务地址和第一密钥。
PCT/CN2020/097412 2020-02-17 2020-06-22 影像数据标注方法、装置、计算机设备和存储介质 WO2021164161A1 (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
CN202010097613.7A CN111324905A (zh) 2020-02-17 2020-02-17 影像数据标注方法、装置、计算机设备和存储介质
CN202010097613.7 2020-02-17

Publications (1)

Publication Number Publication Date
WO2021164161A1 true WO2021164161A1 (zh) 2021-08-26

Family

ID=71172780

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/CN2020/097412 WO2021164161A1 (zh) 2020-02-17 2020-06-22 影像数据标注方法、装置、计算机设备和存储介质

Country Status (2)

Country Link
CN (1) CN111324905A (zh)
WO (1) WO2021164161A1 (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114282882A (zh) * 2021-11-15 2022-04-05 深圳市东信时代信息技术有限公司 素材工单审核方法、装置、设备及存储介质
CN114828007A (zh) * 2022-04-30 2022-07-29 佛山技研智联科技有限公司 基于边缘网关的数据处理方法、装置和系统、边缘网关
CN117938857A (zh) * 2024-03-21 2024-04-26 锱云(上海)物联网科技有限公司 一种物模型的同步管理方法和系统

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111797430B (zh) * 2020-06-30 2023-10-03 平安国际智慧城市科技股份有限公司 数据校验方法、装置、服务器及存储介质
EP4170670A4 (en) * 2020-07-17 2023-12-27 Wuhan United Imaging Healthcare Co., Ltd. METHOD AND SYSTEM FOR PROCESSING MEDICAL DATA
CN112686009A (zh) * 2020-12-23 2021-04-20 中国人民解放军战略支援部队信息工程大学 一种语音标注系统及方法
CN113839953A (zh) * 2021-09-27 2021-12-24 上海商汤科技开发有限公司 一种标注方法及装置、电子设备和存储介质
CN114040223B (zh) * 2021-11-05 2023-11-24 亿咖通(湖北)技术有限公司 一种图像处理方法及系统
CN115622819B (zh) * 2022-12-20 2023-05-05 首都医科大学附属北京胸科医院 一种影像文件的处理方法及系统

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107979595A (zh) * 2017-11-23 2018-05-01 储明 私有数据保护方法及网关系统
CN109410073A (zh) * 2018-09-26 2019-03-01 平安健康保险股份有限公司 影像文件脱敏方法、装置、计算机设备和存储介质
CN109686423A (zh) * 2018-11-06 2019-04-26 众安信息技术服务有限公司 一种医疗影像标注方法及系统
CN110677411A (zh) * 2019-09-27 2020-01-10 浙江宇视科技有限公司 一种基于云存储的数据共享方法及系统

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107979595A (zh) * 2017-11-23 2018-05-01 储明 私有数据保护方法及网关系统
CN109410073A (zh) * 2018-09-26 2019-03-01 平安健康保险股份有限公司 影像文件脱敏方法、装置、计算机设备和存储介质
CN109686423A (zh) * 2018-11-06 2019-04-26 众安信息技术服务有限公司 一种医疗影像标注方法及系统
CN110677411A (zh) * 2019-09-27 2020-01-10 浙江宇视科技有限公司 一种基于云存储的数据共享方法及系统

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114282882A (zh) * 2021-11-15 2022-04-05 深圳市东信时代信息技术有限公司 素材工单审核方法、装置、设备及存储介质
CN114282882B (zh) * 2021-11-15 2023-04-14 深圳市东信时代信息技术有限公司 素材工单审核方法、装置、设备及存储介质
CN114828007A (zh) * 2022-04-30 2022-07-29 佛山技研智联科技有限公司 基于边缘网关的数据处理方法、装置和系统、边缘网关
CN117938857A (zh) * 2024-03-21 2024-04-26 锱云(上海)物联网科技有限公司 一种物模型的同步管理方法和系统

Also Published As

Publication number Publication date
CN111324905A (zh) 2020-06-23

Similar Documents

Publication Publication Date Title
WO2021164161A1 (zh) 影像数据标注方法、装置、计算机设备和存储介质
WO2020186786A1 (zh) 文件处理方法、装置、计算机设备和存储介质
WO2020186783A1 (zh) 数据导入方法、装置、计算机设备和存储介质
WO2019200756A1 (zh) 数据审批方法、装置、计算机设备和存储介质
CN108874926B (zh) 海量数据查询方法、装置、计算机设备和存储介质
WO2020151333A1 (zh) 页面加载方法、装置、计算机设备和存储介质
WO2020192134A1 (zh) 基于Spring MVC的异常处理方法、装置、计算机设备和存储介质
CN109814854B (zh) 项目框架生成方法、装置、计算机设备和存储介质
WO2020233091A1 (zh) 业务数据回退方法、装置、计算机设备和存储介质
CN110908778B (zh) 任务部署方法、系统和存储介质
US10120849B2 (en) Document generation based on referral
CN111177302A (zh) 业务单据处理方法、装置、计算机设备和存储介质
US20130318089A1 (en) Catalog performance and integrity analysis
WO2020258650A1 (zh) 页面信息显示方法、装置、计算机设备和存储介质
WO2020199594A1 (zh) 业务组件加载方法、装置、计算机设备和存储介质
WO2022001625A1 (zh) 数据查询方法、装置、计算机设备和存储介质
CN112506481A (zh) 业务数据交互方法、装置、计算机设备和存储介质
CN116644250B (zh) 页面检测方法、装置、计算机设备和存储介质
CN111901383B (zh) 数据请求处理方法、装置、计算机设备和存储介质
CN116661936A (zh) 页面数据的处理方法、装置、计算机设备及存储介质
US20230351050A1 (en) Method and apparatus for custom development of payment application, computer device, and storage medium
US11709761B2 (en) Automated browser testing assertion on native file formats
CN110888901B (zh) 系统管理方法、装置、计算机设备和存储介质
CN113553344A (zh) 一种业务数据管理方法、系统、计算机设备和存储介质
CN111158644A (zh) 原型图与接口交互方法及装置

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 20919431

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

32PN Ep: public notification in the ep bulletin as address of the adressee cannot be established

Free format text: NOTING OF LOSS OF RIGHTS PURSUANT TO RULE 112(1) EPC (EPO FORM 1205A DATED 17/01/2023)

122 Ep: pct application non-entry in european phase

Ref document number: 20919431

Country of ref document: EP

Kind code of ref document: A1