CN111818373A - 图像处理方法、装置及系统 - Google Patents
图像处理方法、装置及系统 Download PDFInfo
- Publication number
- CN111818373A CN111818373A CN202010686105.2A CN202010686105A CN111818373A CN 111818373 A CN111818373 A CN 111818373A CN 202010686105 A CN202010686105 A CN 202010686105A CN 111818373 A CN111818373 A CN 111818373A
- Authority
- CN
- China
- Prior art keywords
- image data
- image
- thread
- response message
- management thread
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000003672 processing method Methods 0.000 title claims abstract description 16
- 230000004044 response Effects 0.000 claims abstract description 96
- 238000000034 method Methods 0.000 claims abstract description 17
- 238000012545 processing Methods 0.000 claims description 151
- 230000005540 biological transmission Effects 0.000 claims description 90
- 230000003993 interaction Effects 0.000 abstract description 21
- 238000010586 diagram Methods 0.000 description 14
- 230000005577 local transmission Effects 0.000 description 7
- 238000013473 artificial intelligence Methods 0.000 description 6
- 230000009977 dual effect Effects 0.000 description 4
- 230000008569 process Effects 0.000 description 4
- 230000006870 function Effects 0.000 description 3
- 241001465754 Metazoa Species 0.000 description 2
- 230000009471 action Effects 0.000 description 2
- 238000006243 chemical reaction Methods 0.000 description 2
- 238000004590 computer program Methods 0.000 description 2
- 238000007405 data analysis Methods 0.000 description 2
- 238000001514 detection method Methods 0.000 description 2
- 230000001360 synchronised effect Effects 0.000 description 2
- 230000006978 adaptation Effects 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 238000012937 correction Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 238000001914 filtration Methods 0.000 description 1
- 238000009499 grossing Methods 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000010349 pulsation Effects 0.000 description 1
- 230000000087 stabilizing effect Effects 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/41—Structure of client; Structure of client peripherals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/436—Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
- H04N21/4363—Adapting the video stream to a specific local network, e.g. a Bluetooth® network
- H04N21/43632—Adapting the video stream to a specific local network, e.g. a Bluetooth® network involving a wired protocol, e.g. IEEE 1394
- H04N21/43635—HDMI
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/436—Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
- H04N21/4363—Adapting the video stream to a specific local network, e.g. a Bluetooth® network
- H04N21/43637—Adapting the video stream to a specific local network, e.g. a Bluetooth® network involving a wireless protocol, e.g. Bluetooth, RF or wireless LAN [IEEE 802.11]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/65—Control of camera operation in relation to power supply
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Computer Networks & Wireless Communication (AREA)
- Studio Devices (AREA)
Abstract
本申请提供一种图像处理方法、装置及系统，其中，该方法包括：在当前供电状态为第一设备供电时，通过图像管理线程接收第一设备发送的第一请求消息；基于第一请求消息，通过图像管理线程向第一设备发送第一响应消息，第一响应消息包括第一图像数据；通过图像管理线程接收第二设备发送的第二请求消息；基于第二请求消息，通过图像管理线程向第二设备发送第二响应消息，第二响应消息包括第二图像数据，第二图像数据与第一图像数据的分辨率不同。本申请通过创建图像管理线程，第一设备和第二设备可以通过访问该图像管理线程来获取相应的图像数据，由于图像管理线程可以同时和多个设备进行信息交互，从而可以解决多个设备访问冲突的情况。
Description
技术领域
本申请涉及图像技术领域，尤其涉及一种图像处理方法、装置及系统。
背景技术
随着电视产品技术发展，摄像头已经逐渐成为电视的标配，其主要实现方式就是UVC(USB Video Class，USB视频类)摄像头，UVC摄像头可以满足用户的隐私保护需求，例如可以在用户不在家时，用户可以通过UVC摄像头了解家里的情况。
UVC摄像头可以通过USB与电视进行连接，并向电视传输拍摄画面，使得电视可以显示拍摄内容。此外，用户也可以通过网络访问UVC摄像头，从而通过其他终端(例如手机)观看拍摄内容。
然而，在软件层面，两个应用无法同时访问同一个图像设备，即电视和其他终端无法同时访问UVC摄像头的拍摄内容，从而会导致电视和其他终端存在访问冲突的情况。
发明内容
本申请提供一种图像处理方法、装置及系统，用以解决现有技术存在的多个设备存在访问冲突的问题。
一方面，本申请提供一种图像处理方法，包括：
在当前供电状态为第一设备供电时，通过图像管理线程接收第一设备发送的第一请求消息；
基于所述第一请求消息，通过所述图像管理线程向所述第一设备发送第一响应消息，所述第一响应消息包括第一图像数据；
通过所述图像管理线程接收第二设备发送的第二请求消息；
基于所述第二请求消息，通过所述图像管理线程向所述第二设备发送第二响应消息，所述第二响应消息包括第二图像数据，所述第二图像数据与所述第一图像数据的分辨率不同。
另一方面，本申请提供一种图像处理装置，包括：
接收单元，用于在当前供电状态为第一设备供电时，通过图像管理线程接收第一设备发送的第一请求消息；
响应单元，用于基于所述第一请求消息，通过所述图像管理线程向所述第一设备发送第一响应消息，所述第一响应消息包括第一图像数据；
所述接收单元还用于通过所述图像管理线程接收第二设备发送的第二请求消息；
所述响应单元还用于基于所述第二请求消息，通过所述图像管理线程向所述第二设备发送第二响应消息，所述第二响应消息包括第二图像数据，所述第二图像数据与所述第一图像数据的分辨率不同。
另一方面，本申请提供一种图像处理系统，包括：
图像采集设备，用于采集目标区域的图像信号；
图像处理设备，用于对所述目标区域的图像信号进行图像信号处理，得到原始图像数据；
所述图像采集设备与所述图像处理设备连接，所述图像处理设备与系统外部的第一设备通过USB连接，所述第一设备用于为所述图像采集设备以及所述图像处理设备供电；
所述图像处理设备还用于在当前供电状态为第一设备供电时，通过图像管理线程接收第一设备发送的第一请求消息；基于所述第一请求消息，通过所述图像管理线程向所述第一设备发送第一响应消息，所述第一响应消息包括第一图像数据；通过所述图像管理线程接收第二设备发送的第二请求消息；基于所述第二请求消息，通过所述图像管理线程向所述第二设备发送第二响应消息，所述第二响应消息包括第二图像数据，所述第一图像数据以及所述第二图像数据基于所述原始图像数据得到，所述第二图像数据与所述第一图像数据的分辨率不同。
另一方面，本申请提供一种计算机可读存储介质，所述计算机可读存储介质中存储有计算机执行指令，所述计算机执行指令被处理器执行时用于实现上述的图像处理方法。
本申请提供的图像处理方法、装置及系统，其中，该方法包括：在当前供电状态为第一设备供电时，通过图像管理线程接收第一设备发送的第一请求消息；基于第一请求消息，通过图像管理线程向第一设备发送第一响应消息，第一响应消息包括第一图像数据；通过图像管理线程接收第二设备发送的第二请求消息；基于第二请求消息，通过图像管理线程向第二设备发送第二响应消息，第二响应消息包括第二图像数据，第二图像数据与第一图像数据的分辨率不同。本申请通过创建图像管理线程，第一设备和第二设备可以通过访问该图像管理线程来获取相应的图像数据，由于图像管理线程可以同时和多个设备进行信息交互，从而可以解决多个设备访问冲突的情况。
附图说明
此处的附图被并入说明书中并构成本说明书的一部分，示出了符合本公开的实施例，并与说明书一起用于解释本公开的原理。
图1为本申请实施例提供的应用场景图；
图2为本申请实施例中图像处理系统10的工作原理示意图；
图3为本申请实施例提供的图像处理方法的示意图；
图4为本申请实施例中通过图像管理线程向第一传输线程发送原始图像数据，以使得第一设备基于第一传输线程接收包含第一图像数据的第一响应消息的示意图；
图5为本申请实施例中通过图像管理线程向第二传输线程发送原始图像数据，以使得第二设备基于第二传输线程接收包含第二图像数据的第二响应消息的示意图；
图6为本申请实施例中图像采集设备、图像处理设备、第一设备以及第二设备进行信息交互的时序图；
图7为本申请实施例提供的图像处理装置的示意图。
通过上述附图，已示出本公开明确的实施例，后文中将有更详细的描述。这些附图和文字描述并不是为了通过任何方式限制本公开构思的范围，而是通过参考特定实施例为本领域技术人员说明本公开的概念。
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
在本申请实施例中使用的术语是仅仅出于描述特定实施例的目的，而非旨在限制本发明。在本申请实施例中所使用的单数形式的“一种”和“该”也旨在包括多数形式，除非上下文清楚地表示其他含义。
应当理解，本文中使用的术语“和/或”仅仅是一种描述关联对象的关联关系，表示可以存在三种关系，例如，A和/或B，可以表示：单独存在A，同时存在A和B，单独存在B这三种情况。另外，本文中字符“/”，一般表示前后关联对象是一种“或”的关系。
取决于语境，如在此所使用的词语“如果”、“若”可以被解释成为“在……时”或“当……时”或“响应于确定”或“响应于检测”。类似地，取决于语境，短语“如果确定”或“如果检测(陈述的条件或事件)”可以被解释成为“当确定时”或“响应于确定”或“当检测(陈述的条件或事件)时”或“响应于检测(陈述的条件或事件)”。
还需要说明的是，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的商品或者系统不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种商品或者系统所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括所述要素的商品或者系统中还存在另外的相同要素。
在UVC摄像头进行内容拍摄时，电视通过对UVC摄像头进行访问以获取拍摄内容，从而电视上可以显示UVC摄像头的拍摄内容。此外，其他终端通过对UVC摄像头进行访问也可以获取拍摄内容，从而用户可以通过其他终端也可以观看UVC摄像头的拍摄内容。然而，由于在电视和其他终端存在访问冲突时，电视以及其他终端无法同时访问UVC摄像头。
本申请提供的图像处理方法、装置及系统，旨在解决现有技术的如上技术问题。
本申请提供一种图像处理方法，该方法可以应用于UVC摄像头，具体的，在UVC摄像头的软件工作层面，预先创建用于进行图像数据管理的图像管理线程，在UVC摄像头进行图像信号采集以及图像信号处理后，得到的图像数据由该图像管理线程进行存储及发送管理。在UVC摄像头的当前供电状态为第一设备供电时，通过图像管理线程接收第一设备发送的第一请求消息；基于第一请求消息，通过图像管理线程向第一设备发送第一响应消息，第一响应消息包括第一图像数据；通过图像管理线程接收第二设备发送的第二请求消息；基于第二请求消息，通过图像管理线程向第二设备发送第二响应消息，第二响应消息包括第二图像数据，第二图像数据与第一图像数据的分辨率不同。从而，本申请通过创建图像管理线程，第一设备和第二设备可以通过访问该图像管理线程来获取相应的图像数据，由于图像管理线程可以同时和多个设备进行信息交互，从而可以解决多个设备访问冲突的问题。
下面以具体地实施例对本申请的技术方案以及本申请的技术方案如何解决上述技术问题进行详细说明。下面这几个具体的实施例可以相互结合，对于相同或相似的概念或过程可能在某些实施例中不再赘述。下面将结合附图，对本申请的实施例进行描述。
图1为本申请实施例提供的应用场景图，如图1所示，该应用场景具体包括图像处理系统10、与图像处理系统10有线连接的第一设备20以及通过无线网络访问图像处理系统10的第二设备30，第一设备20和第二设备30为系统外部的设备。
图像处理系统10包括图像采集设备11以及图像处理设备12。
其中，图像采集设备11用于采集目标区域的图像信号，目标区域具体可以是需要进行监控拍摄的区域等。图像采集设备11包括图像传感器(Image Sensor)，具体例如CCD传感器、CMOS传感器等，图像传感器可以利用传感器内部的光电器件的光电转换功能将感光面上的光像转换为与光像成相应比例关系的电信号，从而实现目标区域的图像信号采集功能。
可选的，图像采集设备11包括广角图像传感器，从而可以采集得到广角图像的图像信号。
图像处理设备12用于对图像采集设备11采集的目标区域的图像信号进行图像信号处理(Image Signal Processing，ISP)，得到原始图像数据。图像信号处理具体包括畸变校正处理等。另外，图像处理设备12中创建有图像管理线程，该图像管理线程用于进行原始图像数据的存储及发送管理。图像处理设备12具体可以采用例如Hi3556V200等。
参考图1，图像采集设备11与图像处理设备12连接，图像处理设备12与系统外部的第一设备20通过USB连接，具体可以是通过第一连接线13连接，从而在第一设备20处于工作状态时，第一设备20可以通过第一连接线13为图像采集设备以及图像处理设备供电。第一连接线13具体可以是USB连接线。
在图像处理系统10的当前供电状态为第一设备20供电时，图像处理设备12通过图像管理线程接收第一设备20发送的第一请求消息；基于第一请求消息，通过图像管理线程向第一设备20发送第一响应消息，第一响应消息包括第一图像数据；通过图像管理线程接收第二设备30发送的第二请求消息；基于第二请求消息，通过图像管理线程向第二设备30发送第二响应消息，第二响应消息包括第二图像数据，第一图像数据以及第二图像数据基于原始图像数据得到，第二图像数据与第一图像数据的分辨率不同。
具体的，第一设备20可以通过第一连接线13访问图像处理系统10中的图像处理设备12，图像处理设备12中的图像管理线程通过第一连接线13向第一设备20发送相应的图像数据，从而，使得第一设备20可以显示图像采集设备11的拍摄内容。另外，第二设备30可以通过无线网络访问图像处理系统10中的图像处理设备12，图像处理设备12中的图像管理线程通过无线网络向第二设备30发送相应的图像数据，从而，使得第二设备30可以显示图像采集设备11的拍摄内容。
图2为本申请实施例中图像处理系统10的工作原理示意图，如图2所示，首先，图像采集设备采集图像信号，并发送至图像处理设备，图像处理设备对接收的图像信号进行ISP处理，得到原始图像数据，然后分别对原始图像数据进行裁剪+编码处理，以及裁剪+缩放+编码处理，从而得到第一分辨率的第一图像数据以及第二分辨率的第二图像数据。最后通过USB传输将第一图像数据发送至第一设备，通过无线网络传输将第二图像数据发送至第二设备。
本实施例中，通过在图像处理设备12中创建图像管理线程，第一设备和第二设备可以通过访问该图像管理线程来获取相应的图像数据，由于图像管理线程可以同时和多个设备进行信息交互，从而可以解决多个设备访问冲突的问题。
在一些实施例中，参考图1，图像处理设备12还与系统外部的其他电源40连接，具体的，图像处理设备12通过第二连接线14与其他电源40连接，其他电源40与第一设备20为独立关系，从而，在第一设备20处于关机状态而无法为图像处理系统10供电时，其他电源40可以为图像采集设备11以及图像处理设备12供电。
具体的，在第一设备20处于关机状态时，第一设备20不会发生访问图像处理设备12的行为，图像处理设备12中的图像管理线程无需向第一设备20发送图像数据。由于第一设备20关机，会导致图像处理系统10的供电断开，即图像处理系统10停止工作。此时，若第二设备30发生访问图像处理设备12的行为，则会出现访问失败的情况，从而导致第二设备30无法获取目标区域的图像数据。
因此，为了避免第二设备30出现访问失败的情况，本实施例通过设置第二连接线14，图像处理设备12通过第二连接线14与其他电源40连接，其他电源40与第一设备20为独立关系，因此，可以在第一设备20处于关机状态时，通过其他电源40为图像采集设备11以及图像处理设备12供电，从而，在第二设备30发生访问图像处理设备12的行为时，图像处理设备12中的图像管理线程仍可通过无线网络向第二设备30发送相应的图像数据，使得第二设备30可以获取目标区域的图像数据。
在一些实施例中，第一设备20包括显示设备，第二设备30包括移动终端。
具体的，显示设备可以是液晶显示器、OLED显示器或者投影显示设备，例如电视或者投影仪等，本实施例对显示设备的具体类型，尺寸大小和分辨率等不作限定。
移动终端可以是手机、平板电脑、笔记本电脑等具有无线上网功能的设备，也可以是智能手环、智能手表等佩戴类的设备，本实施例对移动终端的具体类型以及尺寸大小等不作限定。
本领技术人员可以理解的是，显示设备以及移动终端可以根据需要进行性能和配置上的调整和改变。
本实施例中，通过显示设备获取图像处理设备12发送的图像数据，可以直接对图像采集设备11采集的目标区域的图像进行显示，从而用户可以通过显示设备查看目标区域的情况。另外，通过移动终端获取图像处理设备12发送的图像数据，用户也可以通过移动终端随时随地查看目标区域的情况。
在一些实施例中，其他电源40包括DC电源(DC voltage-stabilized source，直流稳压电源)。
具体的，DC电源是一种是能量转换电路，DC电源的输入为市电，即220V、50Hz的交流电，输出为稳定的直流电。DC电源的结构通常包括电源变压器、整流电路、滤波电路和稳压电路等。其中，电源变压器用于将市电电网提供的交流电压变换成图像处理系统10所需要的交流电压，同时还起到直流电源与电网的隔离作用。整流电路用于将电源变压器变换后的交流电压变为单向脉动的直流电。滤波电路用于对整流电路输出的脉动直流电进行平滑处理，得到含纹波成分很小的直流电压。稳压电路用于对滤波电路输出的直流电压进行调节，以维持输出电压的基本稳定，避免滤波后输出的直流电压受温度、负载、电网电压波动等因素的影响。
本实施例中，通过DC电源可以将市电转换为适用于图像处理系统10的直流电压，从而可以在第一设备20处于关机状态时为图像处理系统10供电，以保证第二设备30可以在第一设备20处于关机状态时仍能正常获取目标区域的图像数据。
在一些实施例中，图像处理系统10还包括：电源切换设备(图中未示出)，电源切换设备具体可以是双电源输入及OTG输出路径控制选择器(SGM2540)。
具体的，通过双电源输入及OTG输出路径控制选择器可以对图像处理系统10的供电电源进行选择。图像处理系统10与第一设备20以及其他电源40处于长连接关系，在第一设备20处于工作状态时，双电源输入及OTG输出路径控制选择器控制第一设备20为图像处理系统10供电，在第一设备20处于关机状态时，双电源输入及OTG输出路径控制选择器控制其他电源40为图像处理系统10供电，从而，实现图像处理系统10的不间断供电。本实施例中，通过设置电源切换设备，可以在不同情况下对供电电源进行切换，从而实现图像处理系统10的不间断供电，保证第二设备30可以随时访问图像处理系统10以获取目标区域的图像数据。
在一些实施例中，提供一种图像处理方法，该图像处理方法可以用于上述图像处理系统，具体可以应用于图像处理系统10中的图像处理设备12。
图3为本申请实施例提供的图像处理方法的示意图，如图3所示，该方法主要包括以下步骤：
S100、在当前供电状态为第一设备供电时，通过图像管理线程接收第一设备发送的第一请求消息。
其中，第一设备通过第一连接线与图像处理设备连接，在第一设备处于工作状态时，第一设备可以通过第一连接线为图像处理设备供电，此时，第一设备可以向图像处理设备发送第一请求消息，以请求获取目标区域的图像数据，图像处理设备通过创建的图像管理线程接收第一设备发送的第一请求消息。可以理解，第一设备具体为通过第一连接线向图像处理设备发送第一请求消息。
S200、基于第一请求消息，通过图像管理线程向第一设备发送第一响应消息，第一响应消息包括第一图像数据。
图像处理设备创建的图像管理线程用于对图像数据进行存储及发送管理，因此，图像处理设备通过图像管理线程接收第一设备发送的第一请求消息之后，基于该第一请求消息，通过图像管理线程向第一设备发送包含第一图像数据的第一响应消息。可以理解，图像处理设备具体通过第一连接线向第一设备发送第一响应消息。
S300、通过图像管理线程接收第二设备发送的第二请求消息。
其中，第二设备通过无线网络向图像处理设备发送第二请求消息，以请求获取目标区域的图像数据，图像处理设备通过创建的图像管理线程接收第二设备发送的第二请求消息。可以理解，第二设备具体为通过无线网络向图像处理设备发送第二请求消息。
S400、基于第二请求消息，通过图像管理线程向第二设备发送第二响应消息，第二响应消息包括第二图像数据，第二图像数据与第一图像数据的分辨率不同。
图像处理设备创建的图像管理线程用于对图像数据进行存储及发送管理，因此，图像处理设备通过图像管理线程接收第二设备发送的第二请求消息之后，基于该第二请求消息，通过图像管理线程向第二设备发送包含第二图像数据的第二响应消息。可以理解，图像处理设备具体通过无线网络向第二设备发送第二响应消息。
需要说明的是，本实施例中，第二图像数据与第一图像数据的分辨率不同。
具体的，第一图像数据的分辨率高于第二图像数据的分辨率。由于第一设备是与图像处理设备进行有线连接，该第一设备与图像处理设备的数据传输可以认为是本地传输，因此，可以采用高码率的码流以实现图像数据的本地高清存储。而第二设备是与图像处理设备进行无线通信连接，该第二设备与图像处理设备的数据传输可以认为是远程传输，因此，可以采用低码率的码流以保证远程网络传输的速度和流畅度。例如，第一图像数据的分辨率具体可以是1080P(1920*1080)，第二图像数据的分辨率具体可以是720P(1280*720)等。
本实施例提供一种图像处理方法，通过创建图像管理线程，第一设备和第二设备可以通过访问该图像管理线程来获取相应的图像数据，由于图像管理线程可以同时和多个设备进行信息交互，从而可以解决多个设备访问冲突的情况。另外，通过设置第二图像数据与第一图像数据的分辨率不同，可以进行图像数据的双码流传输，双码流可以实现本地传输和远程传输两种不同的带宽码流需要，本地传输采用高码流可以获得更高质量的高清图像存储，远程传输采用较低的码流以适应各种无线网络，从而获得更高的传输速度和更好的传输流畅度。
在一些实施例中，通过图像管理线程接收第一设备发送的第一请求消息，包括：通过图像管理线程接收第一设备基于第一传输线程发送的第一请求消息。
具体的，第一传输线程是指图像处理设备中与第一设备进行信息交互的线程，图像管理线程可以与第一传输线程进行信息交互，从而实现与第一设备的信息交互。在图像处理系统10包括UVC摄像头时，该第一传输线程也可以被称为UVC线程。
相应的，通过图像管理线程向第一设备发送第一响应消息，包括：通过图像管理线程向第一传输线程发送原始图像数据，以使得第一设备基于第一传输线程接收包含第一图像数据的第一响应消息，第一图像数据由第一传输线程对原始图像数据进行数据处理得到。
具体的，在图像管理线程接收到第一传输线程发送的第一请求消息后，基于该第一请求消息向第一传输线程发送原始图像数据，由第一传输线程对原始图像数据进行数据处理得到第一图像数据后，再由第一传输线程向第一设备发送包含第一图像数据的第一响应消息，从而，第一设备接收第一响应消息，并基于第一响应消息中的第一图像数据显示相应的图像。
本实施例中，第一传输线程为图像处理设备中与第一设备进行信息交互的线程，图像管理线程可以与该第一传输线程进行信息交互，从而实现图像处理设与第一设备的数据传输。
图4为本申请实施例中通过图像管理线程向第一传输线程发送原始图像数据，以使得第一设备基于第一传输线程接收包含第一图像数据的第一响应消息的示意图，如图4所示，该处理流程包括：
S212、通过图像管理线程向第一传输线程发送原始图像数据；
S214、通过第一传输线程对原始图像数据进行裁剪处理，得到裁剪后的图像数据，并对裁剪后的图像数据进行编码，得到第一图像数据；
S216、通过第一传输线程向第一设备发送包含第一图像数据的第一响应消息。
具体的，图像处理设备通过图像管理线程向第一传输线程发送原始图像数据后，由于原始图像数据为广角图像数据，广角图像在显示时会出现某一个方向被压缩的情况，因此，进一步还包括对原始图像数据进行裁剪处理，从而得到一个较小分辨率的图像区域。例如，原始图像数据的分辨率为2560*1440，可以从原始图像数据中裁剪出1920*1080的图像数据，然后对裁剪后的图像数据进行编码处理，具体可以采用例如H264编码等，从而得到第一图像数据。最后，图像处理设备通过第一传输线程向第一设备发送包含第一图像数据的第一响应消息。
可以理解，在进行图像数据裁剪时，可以通过AI(Artificial Intelligence，人工智能)算法对原始图像数据进行数据分析，确定包含特定目标对象的图像数据，然后对包含特定目标对象的图像数据进行图像数据裁剪，从而，可以实现对特定目标对象的跟踪观察。特定目标对象具体可以是人或者动物等。
相应的，在进行人物追踪时，图像采集设备具体可以采用GC4653，从而可以实现人脸的追踪拍摄。
本实施例中，在原始图像数据为广角数据，通过对原始图像数据进行裁剪处理，可以使得第一设备接收的图像数据可以正常显示。此外，在进行裁剪处理时，也可以结合AI算法裁剪得到包含特定目标对象的图像数据，从而，可以实现对特定目标对象的跟踪观察。
在一些实施例中，通过图像管理线程接收第二设备发送的第二请求消息，包括：通过图像管理线程接收第二设备基于第二传输线程发送的第二请求消息。
具体的，第二传输线程是指图像处理设备中与第二设备进行信息交互的线程，图像管理线程可以与第二传输线程进行信息交互，从而实现与第二设备的信息交互。由于图像处理设备与第二设备为无线通信传输，该第二传输线程也可以被称为RTSP(Real TimeStreaming Protocol，实时流传输协议)线程。
相应的，通过图像管理线程向第二设备发送第二响应消息，包括：通过图像管理线程向第二传输线程发送原始图像数据，以使得第二设备基于第二传输线程接收包含第二图像数据的第二响应消息，第二图像数据由第二传输线程对原始图像数据进行数据处理得到。
具体的，在图像管理线程接收到第二传输线程发送的第二请求消息后，基于该第二请求消息向第二传输线程发送原始图像数据，由第二传输线程对原始图像数据进行数据处理得到第二图像数据后，再由第二传输线程向第二设备发送包含第二图像数据的第二响应消息，从而，第二设备接收第二响应消息，并基于第二响应消息中的第二图像数据显示相应的图像。
本实施例中，第二传输线程为图像处理设备中与第二设备进行信息交互的线程，图像管理线程可以与该第二传输线程进行信息交互，从而实现图像处理设与第二设备的数据传输。
图5为本申请实施例中通过图像管理线程向第二传输线程发送原始图像数据，以使得第二设备基于第二传输线程接收包含第二图像数据的第二响应消息的示意图，如图5所示，该处理流程包括：
S222、通过图像管理线程向第二传输线程发送原始图像数据；
S224、通过第二传输线程对原始图像数据进行裁剪处理，得到裁剪后的图像数据；
S226、通过第二传输线程对裁剪后的图像数据进行缩放处理，得到缩放后的图像数据，并对缩放后的图像数据进行编码，得到第二图像数据；
S228、通过第二传输线程向第二设备发送包含第二图像数据的第二响应消息。
具体的，图像处理设备通过图像管理线程向第二传输线程发送原始图像数据后，由于原始图像数据为广角图像数据，广角图像在显示时会出现某一个方向被压缩的情况，因此，进一步还包括对原始图像数据进行裁剪处理，从而得到一个较小分辨率的图像区域。例如，原始图像数据的分辨率为2560*1440，可以从原始图像数据中裁剪出1920*1080的图像数据，然后对裁剪后的图像数据进行缩放处理，得到一个更小分辨率的图像数据，例如，1280*720等，最后对缩放后的图像数据进行编码处理，具体可以采用例如H264编码等，从而得到第二图像数据。最后，图像处理设备通过第二传输线程向第二设备发送包含第二图像数据的第二响应消息。
可以理解，在进行图像数据裁剪时，可以通过AI(Artificial Intelligence，人工智能)算法对原始图像数据进行数据分析，确定包含特定目标对象的图像数据，然后对包含特定目标对象的图像数据进行图像数据裁剪，从而，可以实现对特定目标对象的跟踪观察。特定目标对象具体可以是人或者动物等。
本实施例中，在原始图像数据为广角数据，通过对原始图像数据进行裁剪处理，可以使得第二设备接收的图像数据可以正常显示；通过进行缩放处理，可以实现低码率的远程数据传输，保证传输速度和流畅度。此外，在进行裁剪处理时，也可以结合AI算法裁剪得到包含特定目标对象的图像数据，从而，可以实现对特定目标对象的跟踪观察。
在一些实施例中，还包括：在当前供电状态为其他电源供电时，通过图像管理线程接收第二设备发送的第二请求消息；基于第二请求消息，通过图像管理线程向第二设备发送第二响应消息，第二响应消息包括第二图像数据。
具体的，在当前供电状态为其他电源供电时，表示当前第一设备处于关机状态，此时，图像管理线程不会接收到第一设备发送的第一请求消息，因此，图像处理设备不与第一设备进行数据交互。
本实施例中，在当前供电状态为其他电源供电时，第二设备仍可正常访问图像处理设备，因此，第二设备可以向图像处理设备发送第二请求消息，从而，图像处理设备基于第二请求消息向第二设备返回相应的图像数据。
图6为本申请实施例中图像采集设备、图像处理设备、第一设备以及第二设备进行信息交互的时序图，如图6所示，上述设备的信息交互过程具体包括：
S501、图像采集设备采集目标区域的图像信号，并将图像信号发送至图像处理设备；
S502、图像处理设备对图像信号进行图像信号处理，得到原始图像数据；
S503、第一设备向图像处理设备发送第一请求消息；
S504、图像处理设备通过图像管理线程接收第一设备发送的第一请求消息，基于第一请求消息，通过图像管理线程向第一设备发送第一响应消息，第一响应消息包括第一图像数据，第一图像数据由原始图像数据得到；
S505、第一设备根据第一图像数据显示相应的图像；
S506、第二设备向图像处理设备发送第二请求消息；
S507、图像处理设备通过图像管理线程接收第二设备发送的第二请求消息，基于第二请求消息，通过图像管理线程向第二设备发送第二响应消息，第二响应消息包括第二图像数据，第二图像数据由原始图像数据得到，第二图像数据与第一图像数据的分辨率不同；
S508、第二设备根据第二图像数据显示相应的图像。
其中，在图像采集设备及图像处理设备为由第一设备供电时，可以执行S503-S505、S506-S508的步骤，在图像采集设备及图像处理设备为由其他电源供电时，不执行S503-S505的步骤，执行S506-S508的步骤。
本实施例通过创建图像管理线程，第一设备和第二设备可以通过访问该图像管理线程来获取相应的图像数据，由于图像管理线程可以同时和多个设备进行信息交互，从而可以解决多个设备访问冲突的情况。另外，通过设置第二图像数据与第一图像数据的分辨率不同，可以进行图像数据的双码流传输，双码流可以实现本地传输和远程传输两种不同的带宽码流需要，本地传输采用高码流可以获得更高质量的高清图像存储，远程传输采用较低的码流以适应各种无线网络，从而获得更高的传输速度和更好的传输流畅度。
应该理解的是，虽然上述实施例中的流程图中的各个步骤按照箭头的指示依次显示，但是这些步骤并不是必然按照箭头指示的顺序依次执行。除非本文中有明确的说明，这些步骤的执行并没有严格的顺序限制，其可以以其他的顺序执行。而且，图中的至少一部分步骤可以包括多个子步骤或者多个阶段，这些子步骤或者阶段并不必然是在同一时刻执行完成，而是可以在不同的时刻执行，其执行顺序也不必然是依次进行，而是可以与其他步骤或者其他步骤的子步骤或者阶段的至少一部分轮流或者交替地执行。
在一些实施例中，提供一种图像处理装置，图7为本申请实施例提供的图像处理装置的示意图，如图7所示，该装置包括：
接收单元100，用于在当前供电状态为第一设备供电时，通过图像管理线程接收第一设备发送的第一请求消息；
响应单元200，用于基于第一请求消息，通过图像管理线程向第一设备发送第一响应消息，第一响应消息包括第一图像数据；
接收单元100还用于通过图像管理线程接收第二设备发送的第二请求消息；
响应单元200还用于基于第二请求消息，通过图像管理线程向第二设备发送第二响应消息，第二响应消息包括第二图像数据，第二图像数据与第一图像数据的分辨率不同。
关于图像处理装置的具体限定可以参见上文中对于图像处理方法的限定，在此不再赘述。上述图像处理装置中的各个模块可全部或部分通过软件、硬件及其组合来实现。上述各模块可以硬件形式内嵌于或独立于计算机设备中的处理器中，也可以以软件形式存储于计算机设备中的存储器中，以便于处理器调用执行以上各个模块对应的操作。
本申请提供一种图像处理装置，通过创建图像管理线程，第一设备和第二设备可以通过访问该图像管理线程来获取相应的图像数据，由于图像管理线程可以同时和多个设备进行信息交互，从而可以解决多个设备访问冲突的情况。另外，通过设置第二图像数据与第一图像数据的分辨率不同，可以进行图像数据的双码流传输，双码流可以实现本地传输和远程传输两种不同的带宽码流需要，本地传输采用高码流可以获得更高质量的高清图像存储，远程传输采用较低的码流以适应各种无线网络，从而获得更高的传输速度和更好的传输流畅度。
在一个实施例中，提供一种计算机可读存储介质，所述计算机可读存储介质中存储有计算机执行指令，所述计算机执行指令被处理器执行时用于实现本申请各方法实施例的步骤。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程，是可以通过计算机程序来指令相关的硬件来完成，计算机程序可存储于一非易失性计算机可读取存储介质中，该计算机程序在执行时，可包括如上述各方法的实施例的流程。其中，本申请所提供的各实施例中所使用的对存储器、存储、数据库或其它介质的任何引用，均可包括非易失性和/或易失性存储器。非易失性存储器可包括只读存储器(ROM)、可编程ROM(PROM)、电可编程ROM(EPROM)、电可擦除可编程ROM(EEPROM)或闪存。易失性存储器可包括随机存取存储器(RAM)或者外部高速缓冲存储器。作为说明而非局限，RAM以多种形式可得，诸如静态RAM(SRAM)、动态RAM(DRAM)、同步DRAM(SDRAM)、双数据率SDRAM(DDRSDRAM)、增强型SDRAM(ESDRAM)、同步链路(Synchlink)DRAM(SLDRAM)、存储器总线(Rambus)直接RAM(RDRAM)、直接存储器总线动态RAM(DRDRAM)、以及存储器总线动态RAM(RDRAM)等。
本领域技术人员在考虑说明书及实践这里公开的申请后，将容易想到本公开的其它实施方案。本申请旨在涵盖本公开的任何变型、用途或者适应性变化，这些变型、用途或者适应性变化遵循本公开的一般性原理并包括本公开未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的，本公开的真正范围和精神由下面的权利要求书指出。
应当理解的是，本公开并不局限于上面已经描述并在附图中示出的精确结构，并且可以在不脱离其范围进行各种修改和改变。本公开的范围仅由所附的权利要求书来限制。
Claims (11)
1.一种图像处理方法，其特征在于，包括：
在当前供电状态为第一设备供电时，通过图像管理线程接收第一设备发送的第一请求消息；
基于所述第一请求消息，通过所述图像管理线程向所述第一设备发送第一响应消息，所述第一响应消息包括第一图像数据；
通过所述图像管理线程接收第二设备发送的第二请求消息；
基于所述第二请求消息，通过所述图像管理线程向所述第二设备发送第二响应消息，所述第二响应消息包括第二图像数据，所述第二图像数据与所述第一图像数据的分辨率不同。
2.根据权利要求1所述的方法，其特征在于，所述通过图像管理线程接收第一设备发送的第一请求消息，包括：
通过所述图像管理线程接收所述第一设备基于第一传输线程发送的第一请求消息；
相应的，通过所述图像管理线程向所述第一设备发送第一响应消息，包括：
通过所述图像管理线程向所述第一传输线程发送原始图像数据，以使得所述第一设备基于所述第一传输线程接收包含所述第一图像数据的第一响应消息，所述第一图像数据由所述第一传输线程对所述原始图像数据进行数据处理得到。
3.根据权利要求2所述的方法，其特征在于，所述通过所述图像管理线程向所述第一传输线程发送原始图像数据，以使得所述第一设备基于所述第一传输线程接收包含所述第一图像数据的第一响应消息，包括：
通过所述图像管理线程向所述第一传输线程发送所述原始图像数据；
通过所述第一传输线程对所述原始图像数据进行裁剪处理，得到裁剪后的图像数据，并对所述裁剪后的图像数据进行编码，得到所述第一图像数据；
通过所述第一传输线程向所述第一设备发送包含所述第一图像数据的第一响应消息。
4.根据权利要求1所述的方法，其特征在于，所述通过所述图像管理线程接收第二设备发送的第二请求消息，包括：
通过所述图像管理线程接收所述第二设备基于第二传输线程发送的第二请求消息；
相应的，通过所述图像管理线程向所述第二设备发送第二响应消息，包括：
通过所述图像管理线程向所述第二传输线程发送原始图像数据，以使得所述第二设备基于所述第二传输线程接收包含所述第二图像数据的第二响应消息，所述第二图像数据由所述第二传输线程对所述原始图像数据进行数据处理得到。
5.根据权利要求4所述的方法，其特征在于，所述通过所述图像管理线程向所述第二传输线程发送原始图像数据，以使得所述第二设备基于所述第二传输线程接收包含所述第二图像数据的第二响应消息，包括：
通过所述图像管理线程向所述第二传输线程发送所述原始图像数据；
通过所述第二传输线程对所述原始图像数据进行裁剪处理，得到裁剪后的图像数据；
通过所述第二传输线程对所述裁剪后的图像数据进行缩放处理，得到缩放后的图像数据，并对所述缩放后的图像数据进行编码，得到所述第二图像数据；
通过所述第二传输线程向所述第二设备发送包含所述第二图像数据的第二响应消息。
6.根据权利要求1-5任一项所述的方法，其特征在于，还包括：在当前供电状态为其他电源供电时，通过所述图像管理线程接收第二设备发送的第二请求消息；
基于所述第二请求消息，通过所述图像管理线程向所述第二设备发送第二响应消息，所述第二响应消息包括第二图像数据。
7.一种图像处理装置，其特征在于，包括：
接收单元，用于在当前供电状态为第一设备供电时，通过图像管理线程接收第一设备发送的第一请求消息；
响应单元，用于基于所述第一请求消息，通过所述图像管理线程向所述第一设备发送第一响应消息，所述第一响应消息包括第一图像数据；
所述接收单元还用于通过所述图像管理线程接收第二设备发送的第二请求消息；
所述响应单元还用于基于所述第二请求消息，通过所述图像管理线程向所述第二设备发送第二响应消息，所述第二响应消息包括第二图像数据，所述第二图像数据与所述第一图像数据的分辨率不同。
8.一种图像处理系统，其特征在于，包括：
图像采集设备，用于采集目标区域的图像信号；
图像处理设备，用于对所述目标区域的图像信号进行图像信号处理，得到原始图像数据；
所述图像采集设备与所述图像处理设备连接，所述图像处理设备与系统外部的第一设备通过USB连接，所述第一设备用于为所述图像采集设备以及所述图像处理设备供电；
所述图像处理设备还用于在当前供电状态为第一设备供电时，通过图像管理线程接收第一设备发送的第一请求消息；基于所述第一请求消息，通过所述图像管理线程向所述第一设备发送第一响应消息，所述第一响应消息包括第一图像数据；通过所述图像管理线程接收第二设备发送的第二请求消息；基于所述第二请求消息，通过所述图像管理线程向所述第二设备发送第二响应消息，所述第二响应消息包括第二图像数据，所述第一图像数据以及所述第二图像数据基于所述原始图像数据得到，所述第二图像数据与所述第一图像数据的分辨率不同。
9.根据权利要求8所述的系统，其特征在于，所述图像处理设备还与系统外部的其他电源连接，所述其他电源用于在所述第一设备处于关机状态时，为所述图像采集设备以及所述图像处理设备供电。
10.根据权利要求8或9所述的系统，其特征在于，所述第一设备包括显示设备，所述第二设备包括移动终端。
11.根据权利要求9所述的系统，其特征在于，所述其他电源包括DC电源。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202010686105.2A CN111818373A (zh) | 2020-07-16 | 2020-07-16 | 图像处理方法、装置及系统 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202010686105.2A CN111818373A (zh) | 2020-07-16 | 2020-07-16 | 图像处理方法、装置及系统 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN111818373A true CN111818373A (zh) | 2020-10-23 |
Family
ID=72865273
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202010686105.2A Pending CN111818373A (zh) | 2020-07-16 | 2020-07-16 | 图像处理方法、装置及系统 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN111818373A (zh) |
Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20020095367A1 (en) * | 2001-01-18 | 2002-07-18 | Ichiro Mizunuma | Competitive access video/audio monitoring system |
| CN101505365A (zh) * | 2009-02-25 | 2009-08-12 | 南京邮电大学 | 一种基于网络电视机顶盒的实时视频监控系统的实现方法 |
| CN102780874A (zh) * | 2012-07-10 | 2012-11-14 | 四川长虹电器股份有限公司 | 一种家庭智能电视实现简易视频监控的方法 |
| CN103391473A (zh) * | 2013-07-12 | 2013-11-13 | 北京小米科技有限责任公司 | 一种提供及获取音视频的方法和装置 |
| CN104426951A (zh) * | 2013-08-28 | 2015-03-18 | 樊继方 | 一种智能机顶盒远程网络实时监控系统及其方法 |
| CN104639901A (zh) * | 2015-02-03 | 2015-05-20 | 广西智询信息科技有限公司 | 一种移动终端扫码直播无线监控视频的方法 |
-
2020
- 2020-07-16 CN CN202010686105.2A patent/CN111818373A/zh active Pending
Patent Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20020095367A1 (en) * | 2001-01-18 | 2002-07-18 | Ichiro Mizunuma | Competitive access video/audio monitoring system |
| CN101505365A (zh) * | 2009-02-25 | 2009-08-12 | 南京邮电大学 | 一种基于网络电视机顶盒的实时视频监控系统的实现方法 |
| CN102780874A (zh) * | 2012-07-10 | 2012-11-14 | 四川长虹电器股份有限公司 | 一种家庭智能电视实现简易视频监控的方法 |
| CN103391473A (zh) * | 2013-07-12 | 2013-11-13 | 北京小米科技有限责任公司 | 一种提供及获取音视频的方法和装置 |
| CN104426951A (zh) * | 2013-08-28 | 2015-03-18 | 樊继方 | 一种智能机顶盒远程网络实时监控系统及其方法 |
| CN104639901A (zh) * | 2015-02-03 | 2015-05-20 | 广西智询信息科技有限公司 | 一种移动终端扫码直播无线监控视频的方法 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US8970695B2 (en) | Image processing device, image processing system, camera device, image processing method, and program | |
| US6067571A (en) | Server, terminal and control method for transmitting real-time images over the internet | |
| US6469737B1 (en) | Image-sensing server and control method and storage medium therefor | |
| JP5317630B2 (ja) | 画像配信装置、方法及びプログラム | |
| TW201026069A (en) | Encoding and decoding method for video screen layout, encoding device, decoding device, and data structure | |
| KR101838961B1 (ko) | 영상처리보드를 이용한 외부기기 제어와 아날로그/디지털 데이터 저장 및 트렌드 표출 영상감시장치 | |
| KR20130122967A (ko) | 영상 처리 장치, 영상 처리 시스템, 및 영상 처리 방법 | |
| US20190191210A1 (en) | Systems and methods for transmitting a high quality video image from a low power sensor | |
| CN106060447B (zh) | 基于移动通信终端和可视电话的监控方法及监控系统 | |
| US11295589B2 (en) | Image processing device and method for simultaneously transmitting a plurality of pieces of image data obtained from a plurality of camera modules | |
| CN103581695B (zh) | 一种实现移动终端接入全球眼的系统和方法 | |
| CN111818373A (zh) | 图像处理方法、装置及系统 | |
| CN110570614B (zh) | 一种视频监控系统及智能相机 | |
| CN113660411B (zh) | 基于智能手表的遥控拍摄方法、装置和计算机设备 | |
| US11997428B2 (en) | Control system and method | |
| CN106060481A (zh) | 一种云台摄像头的视频采集方法及装置 | |
| US20210144393A1 (en) | Image capturing device, distribution system, distribution method, and recording medium | |
| KR20170068957A (ko) | 네트워크 카메라 시스템 및 그 동작 방법 | |
| EP3110143A1 (en) | Image transmission device and image transmission system | |
| JP2002199251A (ja) | 電力供給方法及び電力供給装置及び雲台装置及び情報入力装置及び情報通信システム | |
| CN111813534A (zh) | 一种智能录播中降低cpu占用率的方法 | |
| JPH11187383A (ja) | 映像監視システム及び映像監視方法 | |
| CN106101639A (zh) | 一种云台摄像头的视频处理方法及装置 | |
| CN109819139B (zh) | 一种智能电子设备和图像处理单元、装置、方法 | |
| JP2006332914A (ja) | 撮影装置、及び画像データ転送方法 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| RJ01 | Rejection of invention patent application after publication | ||
| RJ01 | Rejection of invention patent application after publication |
Application publication date: 20201023 |