TWI737460B - 通信方法、電子設備和儲存介質 - Google Patents
通信方法、電子設備和儲存介質 Download PDFInfo
- Publication number
- TWI737460B TWI737460B TW109128637A TW109128637A TWI737460B TW I737460 B TWI737460 B TW I737460B TW 109128637 A TW109128637 A TW 109128637A TW 109128637 A TW109128637 A TW 109128637A TW I737460 B TWI737460 B TW I737460B
- Authority
- TW
- Taiwan
- Prior art keywords
- data packet
- information
- detection result
- detection
- working mode
- Prior art date
Links
- 238000000034 method Methods 0.000 title claims abstract description 72
- 230000006854 communication Effects 0.000 title claims abstract description 70
- 238000004891 communication Methods 0.000 title claims abstract description 66
- 238000001514 detection method Methods 0.000 claims abstract description 325
- 238000012795 verification Methods 0.000 claims description 86
- 238000004590 computer program Methods 0.000 claims description 12
- 238000012790 confirmation Methods 0.000 claims description 6
- 230000008859 change Effects 0.000 claims description 4
- 230000005540 biological transmission Effects 0.000 description 23
- 238000010586 diagram Methods 0.000 description 22
- 230000006870 function Effects 0.000 description 21
- 238000012545 processing Methods 0.000 description 19
- 238000012360 testing method Methods 0.000 description 10
- 238000005516 engineering process Methods 0.000 description 6
- 125000004122 cyclic group Chemical group 0.000 description 5
- 230000007246 mechanism Effects 0.000 description 5
- 238000013461 design Methods 0.000 description 4
- 230000008569 process Effects 0.000 description 4
- 230000003993 interaction Effects 0.000 description 3
- 230000004048 modification Effects 0.000 description 3
- 238000012986 modification Methods 0.000 description 3
- 239000004065 semiconductor Substances 0.000 description 3
- 230000001902 propagating effect Effects 0.000 description 2
- RYGMFSIKBFXOCR-UHFFFAOYSA-N Copper Chemical compound [Cu] RYGMFSIKBFXOCR-UHFFFAOYSA-N 0.000 description 1
- 235000011034 Rubus glaucus Nutrition 0.000 description 1
- 244000235659 Rubus idaeus Species 0.000 description 1
- 235000009122 Rubus idaeus Nutrition 0.000 description 1
- 238000013473 artificial intelligence Methods 0.000 description 1
- 230000001413 cellular effect Effects 0.000 description 1
- 229910052802 copper Inorganic materials 0.000 description 1
- 239000010949 copper Substances 0.000 description 1
- 230000001419 dependent effect Effects 0.000 description 1
- 238000005538 encapsulation Methods 0.000 description 1
- 239000000835 fiber Substances 0.000 description 1
- 238000009432 framing Methods 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 239000013307 optical fiber Substances 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 239000013589 supplement Substances 0.000 description 1
- 230000001052 transient effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F13/00—Interconnection of, or transfer of information or other signals between, memories, input/output devices or central processing units
- G06F13/38—Information transfer, e.g. on bus
- G06F13/382—Information transfer, e.g. on bus using universal interface adapter
- G06F13/387—Information transfer, e.g. on bus using universal interface adapter for adaptation of different data processing systems to different peripheral devices, e.g. protocol converters for incompatible systems, open system
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L12/00—Data switching networks
- H04L12/28—Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
- H04L12/2803—Home automation networks
- H04L12/2816—Controlling appliance services of a home automation network by calling their functionalities
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
- G06F11/08—Error detection or correction by redundancy in data representation, e.g. by using checking codes
- G06F11/10—Adding special bits or symbols to the coded information, e.g. parity check, casting out 9's or 11's
- G06F11/1004—Adding special bits or symbols to the coded information, e.g. parity check, casting out 9's or 11's to protect a block of data words, e.g. CRC or checksum
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F13/00—Interconnection of, or transfer of information or other signals between, memories, input/output devices or central processing units
- G06F13/38—Information transfer, e.g. on bus
- G06F13/40—Bus structure
- G06F13/4004—Coupling between buses
- G06F13/4022—Coupling between buses using switching circuits, e.g. switching matrix, connection or expansion network
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/103—Static body considered as a whole, e.g. static pedestrian or occupant recognition
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/161—Detection; Localisation; Normalisation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L63/00—Network architectures or network communication protocols for network security
- H04L63/04—Network architectures or network communication protocols for network security for providing a confidential data exchange among entities communicating through data packet networks
- H04L63/0428—Network architectures or network communication protocols for network security for providing a confidential data exchange among entities communicating through data packet networks wherein the data content is protected, e.g. by encrypting or encapsulating the payload
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L63/00—Network architectures or network communication protocols for network security
- H04L63/12—Applying verification of the received information
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L69/00—Network arrangements, protocols or services independent of the application payload and not provided for in the other groups of this subclass
- H04L69/08—Protocols for interworking; Protocol conversion
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L69/00—Network arrangements, protocols or services independent of the application payload and not provided for in the other groups of this subclass
- H04L69/16—Implementation or adaptation of Internet protocol [IP], of transmission control protocol [TCP] or of user datagram protocol [UDP]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L69/00—Network arrangements, protocols or services independent of the application payload and not provided for in the other groups of this subclass
- H04L69/22—Parsing or analysis of headers
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/61—Control of cameras or camera modules based on recognised objects
- H04N23/611—Control of cameras or camera modules based on recognised objects where the recognised objects include parts of the human body
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/64—Computer-aided capture of images, e.g. transfer from script file into camera, check of taken image quality, advice or proposal for image composition or decision on when to take image
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/66—Remote control of cameras or camera parts, e.g. by remote control devices
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/667—Camera operation mode switching, e.g. between still and video, sport and normal or high- and low-resolution modes
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V2201/00—Indexing scheme relating to image or video recognition or understanding
- G06V2201/07—Target detection
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Computer Security & Cryptography (AREA)
- Physics & Mathematics (AREA)
- Signal Processing (AREA)
- General Physics & Mathematics (AREA)
- Computer Networks & Wireless Communication (AREA)
- Multimedia (AREA)
- Computer Hardware Design (AREA)
- Human Computer Interaction (AREA)
- Computing Systems (AREA)
- Oral & Maxillofacial Surgery (AREA)
- Health & Medical Sciences (AREA)
- General Health & Medical Sciences (AREA)
- Quality & Reliability (AREA)
- Mathematical Physics (AREA)
- Automation & Control Theory (AREA)
- User Interface Of Digital Computer (AREA)
- Communication Control (AREA)
- Image Analysis (AREA)
- Mobile Radio Communication Systems (AREA)
Abstract
本發明關於一種通信方法、電子設備和儲存介質,其中,所述方法包括:獲取對圖像幀進行目標檢測得到的檢測結果;基於所述檢測結果以及當前的工作模式,生成預設協定格式的第一資料包;向下位機發送所述第一資料包,以使所述下位機根據所述第一資料包對當前場景進行圖像採集。
Description
本發明關於通信技術領域,尤其關於一種通信方法、電子設備和儲存介質。
在通信技術領域中,上位機和下位機通信具有重要的作用,特別在嵌入式設備中。通常,上位機可以向下位機發送控制指令,下位機根據接收的控制指令控制設備工作。通常,上位機和下位機的通信可以使用不同的通信協定,完備的通信協定可以保證資訊可靠高效地傳輸。
本發明實施例提出了一種通信方法、電子設備和儲存介質。
本發明實施例提供了一種通信方法,所述方法包括:獲取對圖像幀進行目標檢測得到的檢測結果;基於所述檢測結果以及當前的工作模式,生成預設協定格式的第一資料包;向下位機發送所述第一資料包,以使所述下位機根據所述第一資料包對當前場景進行圖像採集。這樣,可以通過預設協定格式的第一資料包,實現上位機和下位機之間的通信。
在一種可能的實現方式中,所述獲取對圖像幀進行目標檢測得到的檢測結果,包括:在共用記憶體中獲取對圖像幀進行目標檢測得到的檢測結果。這樣,上位機可以在共用記憶體中直接對檢測結果進行複製,提高檢測結果獲取的效率。
在一種可能的實現方式中,所述基於所述檢測結果以及當前的工作模式,生成預設協定格式的第一資料包,包括:根據所述檢測結果生成檢測資訊;根據所述當前的工作模式生成控制資訊;將所述檢測資訊添加在檢測結果欄位中,將所述控制資訊添加在控制欄位中,生成預設協議格式的所述第一資料包。這樣,檢測資訊和控制資訊可以攜帶在第一資料包的檢測結果欄位和控制欄位中,實現上位機與下位機的資訊通信。
在一種可能的實現方式中,所述根據所述檢測結果生成檢測資訊,包括:在所述檢測結果的頭部和尾部添加第一校驗資訊,生成所述檢測資訊。這樣,可以保證檢測結果傳輸的可靠性。
在一種可能的實現方式中,所述第一資料包包括校驗欄位;所述方法還包括:生成第二校驗資訊;將所述第二校驗資訊添加在所述第一資料包的校驗欄位中,其中,所述第二校驗資訊用於所述下位機對所述第一資料包的準確性進行驗證。通過在校驗欄位中攜帶第二校驗資訊,可以保證檢測資訊或者控制資訊的準確性,避免被篡改的可能性。
在一種可能的實現方式中,所述生成第二校驗資訊,包括:獲取預設的生成多項式;基於所述生成多項式,生成二進位序列;基於所述檢測結果以及所述二進位序列,生成所述第二校驗資訊。通過這種方式,可以得到對檢測結果進行校驗的第二校驗資訊,提高檢測結果傳輸的準確性。
在一種可能的實現方式中,所述第一資料包包括模式標誌位欄位;所述方法還包括:根據採集所述圖像幀時的工作模式,確定所述檢測結果對應的工作模式;基於所述檢測結果對應的工作模式,生成所述第一資料包的模式標誌位欄位。這樣,通過模式標誌位欄位可以確定檢測結果對應的工作模式,從而下位機可以更好地執行相應的操作。
在一種可能的實現方式中,所述方法還包括:在所述第一資料包的發送時間超過重傳閾值,並且,在所述發送時間內未接收所述下位機返回的確認資訊的情況下,再次向所述下位機發送所述第一資料包。這樣,可以確保第一資料包成功達到下位機,保證上位機與下位機之間的通信。
在一種可能的實現方式中,所述方法還包括:接收下位機發送的第二資料包;根據所述第二資料包的控制欄位攜帶的控制資訊,對當前的工作模式進行調整。通過這種方式,可以實現上位機與下位機的雙向通信。
在一種可能的實現方式中,所述工作模式,包括以下至少一種:手勢分類模式;人臉檢測模式;人體跟蹤模式;球體檢測模式。這樣,上位機可以與下位機在多種工作模式下進行通信。
本發明實施例提供了一種通信方法,所述方法包括:接收上位機發送的預設協定格式的第一資料包;基於所述第一資料包,得到對圖像幀進行目標檢測得到的檢測結果以及當前的工作模式;根據所述檢測結果以及當前的工作模式對當前場景進行圖像採集進行工作。通過這種方式,可以實現上位機和下位機的資訊通信。
在一種可能的實現方式中,所述基於所述第一資料包,得到對圖像幀進行目標檢測得到的檢測結果以及當前的工作模式,包括:在所述第一資料包的檢測結果欄位中獲取檢測資訊;根據所述檢測資訊得到對圖像幀進行目標檢測得到的檢測結果;在所述第一資料包的控制欄位中獲取控制資訊;根據所述控制資訊確定當前工作模式。這樣,下位機可以在第一資料包中得到目標檢測得到的檢測結果以及確定當前工作模式。
在一種可能的實現方式中,所述根據所述檢測資訊得到對圖像幀進行目標檢測得到的檢測結果,包括:在所述檢測資訊的頭部和尾部獲取第一校驗資訊;在所述第一校驗資訊匹配預設校驗資訊的情況下,在所述檢測資訊中提取所述檢測結果。這樣,可以保證檢測結果傳輸的可靠性。
在一種可能的實現方式中,所述在所述第一資料包的檢測結果欄位中獲取檢測資訊,包括:在所述第一資料包的校驗欄位中,獲取第二校驗資訊;獲取由預設的生成多項式生成的二進位序列;利用所述二進位序列對所述第二校驗資訊進行校驗,得到校驗結果;在所述校驗結果為校驗通過的情況下,在所述第一資料包中獲取所述檢測結果。這樣,下位機可以獲取準確地檢測結果,避免檢測結果被篡改。
在一種可能的實現方式中,所述方法還包括:檢測當前的工作模式;在所述工作模式發生改變的情況下,基於當前的工作模式修改所述第一資料包的控制欄位,得到第二資料包;向上位機發送所述第二資料包。這樣,可以實現下位機到上位機的資訊通信過程。
在一種可能的實現方式中,所述工作模式包括以下至少一種:手勢分類模式;人臉檢測模式;人體跟蹤模式;球體檢測模式。這樣,下位機可以與上位機在多種工作模式下進行通信。
本發明實施例提供了一種通信裝置,所述裝置包括:獲取模組,配置為獲取對圖像幀進行目標檢測得到的檢測結果;生成模組,配置為基於所述檢測結果以及當前的工作模式,生成預設協定格式的第一資料包;發送模組,配置為向下位機發送所述第一資料包,以使所述下位機根據所述第一資料包對當前場景進行圖像採集。
在一種可能的實現方式中,所述獲取模組,配置為在共用記憶體中獲取對圖像幀進行目標檢測得到的檢測結果。
在一種可能的實現方式中,所述生成模組,配置為根據所述檢測結果生成檢測資訊;根據所述當前的工作模式生成控制資訊;將所述檢測資訊添加在檢測結果欄位中,將所述控制資訊添加在控制欄位中,生成預設協議格式的所述第一資料包。
在一種可能的實現方式中,所述生成模組,配置為在所述檢測結果的頭部和尾部添加第一校驗資訊,生成所述檢測資訊。
在一種可能的實現方式中,所述第一資料包包括校驗欄位;所述生成模組還配置為生成第二校驗資訊;將所述第二校驗資訊添加在所述第一資料包的校驗欄位中,其中,所述第二校驗資訊配置為所述下位機對所述第一資料包的準確性進行驗證。
在一種可能的實現方式中,所述生成模組,配置為獲取預設的生成多項式;基於所述生成多項式,生成二進位序列;基於所述檢測結果以及所述二進位序列,生成所述第二校驗資訊。
在一種可能的實現方式中,所述第一資料包包括模式標誌位欄位;所述生成模組還配置為根據採集所述圖像幀時的工作模式,確定所述檢測結果對應的工作模式;基於所述檢測結果對應的工作模式,生成所述第一資料包的模式標誌位欄位。
在一種可能的實現方式中,所述發送模組,還配置為在所述第一資料包的發送時間超過重傳閾值,並且,在所述發送時間內未接收所述下位機返回的確認資訊的情況下,再次向所述下位機發送所述第一資料包。
在一種可能的實現方式中,所述裝置還包括:接收模組,配置為接收下位機發送的第二資料包;根據所述第二資料包的控制欄位攜帶的控制資訊,對當前的工作模式進行調整。
在一種可能的實現方式中,所述工作模式,包括以下至少一種:手勢分類模式;人臉檢測模式;人體跟蹤模式;球體檢測模式。
本發明實施例提供了一種通信裝置,所述裝置包括:接收模組,配置為接收上位機發送的預設協定格式的第一資料包;確定模組,配置為基於所述第一資料包,得到對圖像幀進行目標檢測得到的檢測結果以及當前的工作模式;控制模組,配置為根據所述檢測結果以及當前的工作模式對當前場景進行圖像採集進行工作。
在一種可能的實現方式中,所述確定模組,配置為在所述第一資料包的檢測結果欄位中獲取檢測資訊;根據所述檢測資訊得到對圖像幀進行目標檢測得到的檢測結果;在所述第一資料包的控制欄位中獲取控制資訊;根據所述控制資訊確定當前工作模式。
在一種可能的實現方式中,所述確定模組,配置為在所述檢測資訊的頭部和尾部獲取第一校驗資訊;在所述第一校驗資訊匹配預設校驗資訊的情況下,在所述檢測資訊中提取所述檢測結果。
在一種可能的實現方式中,所述確定模組,配置為在所述第一資料包的校驗欄位中,獲取第二校驗資訊;獲取由預設的生成多項式生成的二進位序列;利用所述二進位序列對所述第二校驗資訊進行校驗,得到校驗結果;在所述校驗結果為校驗通過的情況下,在所述第一資料包中獲取所述檢測結果。
在一種可能的實現方式中,所述裝置還包括:修改模組,配置為檢測當前的工作模式;在所述工作模式發生改變的情況下,基於當前的工作模式修改所述第一資料包的控制欄位,得到第二資料包;向上位機發送所述第二資料包。
在一種可能的實現方式中,所述工作模式包括以下至少一種:手勢分類模式;人臉檢測模式;人體跟蹤模式;球體檢測模式。
本發明實施例提供了一種電子設備,包括:處理器;配置為儲存處理器可執行指令的記憶體;其中,所述處理器被配置為執行上述通信方法。
本發明實施例提供了一種電腦可讀儲存介質,其上儲存有電腦程式指令,所述電腦程式指令被處理器執行時實現上述通信方法。
本發明實施例提供了一種電腦程式,包括電腦可讀代碼,當所述電腦可讀代碼在電子設備中運行時,所述電子設備中的處理器執行用於實現上述一個或多個實施例中的通信方法。
在本發明實施例中,上位機可以獲取對圖像幀進行目標檢測得到的檢測結果,然後基於檢測結果以及當前的工作模式,生成預設協定格式的第一資料包,再向下位機發送生成的第一資料包,以使下位機根據所述第一資料包對當前場景進行圖像採集,這樣,可以通過預設協定格式的第一資料包,實現上位機和下位機之間的通信。
應當理解的是,以上的一般描述和後文的細節描述僅是示例性和解釋性的,而非限制本發明。
根據下面參考附圖對示例性實施例的詳細說明,本發明實施例的其它特徵及方面將變得清楚。
以下將參考附圖詳細說明本發明的各種示例性實施例、特徵和方面。附圖中相同的附圖標記表示功能相同或相似的元件。儘管在附圖中示出了實施例的各種方面,但是除非特別指出,不必按比例繪製附圖。
在這裡專用的詞“示例性”意為“用作例子、實施例或說明性”。這裡作為“示例性”所說明的任何實施例不必解釋為優於或好於其它實施例。
本文中術語“和/或”,僅僅是一種描述關聯對象的關聯關係,表示可以存在三種關係,例如,A和/或B,可以表示:單獨存在A,同時存在A和B,單獨存在B這三種情況。另外,本文中術語“至少一種”表示多種中的任意一種或多種中的至少兩種的任意組合,例如,包括A、B、C中的至少一種,可以表示包括從A、B和C構成的集合中選擇的任意一個或多個元素。
另外,為了更好的說明本發明實施例,在下文的實施方式中給出了眾多的細節。本領域技術人員應當理解,沒有某些細節,本發明實施例同樣可以實施。在一些實例中,對於本領域技術人員熟知的方法、手段、元件和電路未作詳細描述,以便於凸顯本發明實施例的主旨。以下將參考附圖詳細說明本發明的各種示例性實施例、特徵和方面。附圖中相同的附圖標記表示功能相同或相似的元件。儘管在附圖中示出了實施例的各種方面,但是除非特別指出,不必按比例繪製附圖。
本發明實施例提供的一種資訊通信方案,上位機可以獲取對圖像幀進行目標檢測得到的檢測結果,然後基於檢測結果以及當前的工作模式,生成預設協定格式的第一資料包,再向下位機發送所述第一資料包,以使所述下位機根據所述第一資料包對當前場景進行圖像採集。如此,實現上位機與下位機之間的資訊通信。例如,實現樹莓派(上位機)與智慧型機器人的控制模組(下位機)之間的資訊通信。
圖1示出根據本發明實施例的通信方法的流程圖。該通信方法可以由終端設備、伺服器或其它類型的電子設備執行,其中,終端設備可以為使用者設備(User Equipment,UE)、移動設備、使用者終端、終端、蜂窩電話、無線電話、個人數位助理(Personal Digital Assistant,PDA)、手持設備、計算設備、車載設備、可穿戴設備、智慧型機器人等。在一些可能的實現方式中,該通信方法可以通過處理器調用記憶體中儲存的電腦可讀指令的方式來實現。下面以電子設備作為執行主體為例對本發明實施例的通信方法進行說明。
步驟S11,獲取對圖像幀進行目標檢測得到的檢測結果。
在本發明實施例中,上位機可以獲取儲存在記憶體中的檢測結果。檢測結果可以是對下位機採集的圖像幀中的目標對象進行目標檢測得到的,例如,對圖像幀中的球體進行目標檢測得到針對球體的目標檢測結果。這裡,檢測結果可以是目標對象在圖像幀中的圖像座標,或者,可以是目標對象在三維空間中的世界座標。舉例來說,樹莓派可以作為上位機,可以應用在智慧型機器人中。智慧型機器人可以即時採集當前場景的圖像幀,然後樹莓派(上位機)可以獲取對圖像幀進行目標檢測的檢測結果。
在一種可能的實現方式中,可以在共用記憶體中獲取對圖像幀進行目標檢測得到的檢測結果。這裡,上位機可以創建共用記憶體,並將圖像幀的檢測結果即時儲存在共用記憶體中,從而上位機可以在共用記憶體中直接對檢測結果進行複製,提高檢測結果獲取的效率。
在一個示例中,共用記憶體中不僅可以儲存檢測結果,還可以即時儲存圖像幀以及檢測結果對應的工作模式。檢測結果對應的工作模式可以是對圖像幀進行目標檢測時上位機與下位機的工作模式,該工作模式可以包括手勢分類模式、人臉檢測模式、人體跟蹤模式、球體檢測模式中的一種或多種,相應地,對圖像幀進行的目標檢測與該工作模式相對應,即,可以根據工作模式可以確定對圖像幀進行目標檢測的目標對象。例如,在手勢分類模式下,目標對象可以是圖像幀中的手勢圖像,在人臉檢測模式下,目標對象可以是圖像幀中的人臉圖像。
圖2示出根據本發明實施例的共用記憶體的資訊儲存格式的方塊圖。共用記憶體可以包括標誌位部分、圖像內容部分以及檢測結果部分。其中,標誌位部分可以儲存標識當前的圖像幀的目標檢測狀態以及工作模式的標誌位,目標檢測狀態可以是當前的圖像幀是否經過目標檢測處理,例如,標誌位為1時,可以表示當前的圖像幀經過手勢檢測。圖像內容部分可以儲存當前的圖像幀,例如,智慧型機器人每採集一個圖像幀,樹莓派可以將該圖像幀儲存在共用記憶體的圖像內容部分。檢測結果部分可以儲存當前的圖像幀進行目標檢測的檢測結果,例如,在目標檢測為人臉檢測的情況下,檢測結果可以人臉的圖像座標或者世界座標。這裡,可以為共用記憶體包括的每個部分分配相應的儲存空間,舉例來說,可以為標誌位分配大小是8位元組的儲存空間,為圖像內容部分分配大小是50K位元組的儲存空間,為檢測結果分配大小是72位元組的儲存空間。這裡,可以不斷對共用記憶體中緩存的內容進行更新,即,每採集一個圖像幀,可以將共用記憶體的內容更新為當前的圖像幀對應的標誌位、圖像內容和檢測結果。
圖3示出根據本發明實施例的檢測結果的資訊儲存格式的方塊圖。
在一個示例中,共用內容的檢測結果部分可以儲存當前的圖像幀中至少一個目標對象的檢測結果,即,目標對象的圖像座標或世界座標,該檢測結果可以用若干個點的圖像座標或世界座標進行表示,例如,檢測結果部分可以儲存N個目標對象的檢測結果,N是大於0的正整數,其中,可以選取目標對象1輪廓的上、下、左、右四個邊緣的點,將這四個邊緣的點的圖像座標或世界座標作為目標對象1的檢測結果。
步驟S12,基於所述檢測結果以及當前的工作模式,生成預設協定格式的第一資料包。
在本發明實施例中,上位機可以檢測當前的工作模式,然後將當前的圖像幀的檢測結果和當前的工作模式封裝在預設協定格式的第一資料包中。這裡,預設協議格式可以是傳輸控制/互聯網(Transmission Control Protocol/Internet Protocol,TCP/IP)協議格式。這裡,當前的工作模式可以與檢測結果對應的工作模式相同或者不同。當前的工作模式可以由使用者進行設定。
在一種可能的實現方式中,可以根據檢測結果生成檢測資訊,根據當前的工作模式生成控制資訊,然後將檢測資訊添加在檢測結果欄位中,以及,將控制資訊添加在控制欄位中,生成預設協定格式的第一資料包。在該實現方式中,第一資料包可以包括檢測結果欄位以及控制欄位。檢測結果欄位中可以添加由檢測結果生成的檢測資訊,控制欄位中可以添加由當前的工作模式生成的控制資訊。上位機可以將檢測結果直接作為檢測資訊添加在檢測結果欄位中,或者,可以對檢測結果進行加密處理,將加密後的檢測結果作為檢測資訊添加在檢測結果欄位中。相應地,上位機可以將表示當前的工作模式的標識資訊直接作為控制資訊,或者,上位機可以將表示當前的工作模式的標識資訊進行加密得到控制資訊。這樣,檢測資訊和控制資訊可以攜帶在第一資料包的檢測結果欄位和控制欄位中,實現與下位機的資訊通信。
在該實現方式的一個示例中,在所述檢測結果的頭部和尾部添加第一校驗資訊,生成所述檢測資訊。在該示例中,為了保證檢測結果傳輸的可靠性,可以在檢測結果的頭部和尾部分別添加第一校驗資訊,頭部添加的第一校驗資訊與尾部添加第一校驗資訊可以相同也可以不同。這裡,第一校驗資訊可以是上位機和下位機預先協商的,例如,可以將頭部的第一校驗資訊設置為0X7e,將尾部的第一校驗資訊設置為0Xac。這樣,下位機在接收到第一資料包之後,可以利用與上位機預先協商的第一校驗資訊對第一資料包的檢測結果欄位中的檢測資訊進行驗證,在檢測資訊的頭部以及尾部均與第一校驗資訊相匹配的情況下,可以根據該檢測資訊執行相應的指令,否則,可以將接收的第一資料包丟棄,不進行任何處理。這樣,可以保證檢測結果傳輸的可靠性。
步驟S13,向下位機發送所述第一資料包,以使所述下位機根據所述第一資料包對當前場景進行圖像採集。
在本發明實施例中,上位機在生成預設協定格式的第一資料包之後,可以向下位機發送第一資料包。這裡,上位機與下位機可以通過多種方式連接,例如,可以通過序列介面連接,或者,可以通過無線方式連接。舉例來說,樹莓派可以通過序列介面與智慧型機器人的控制模組連接,樹莓派可以通過序列介面將第一資料包發送給智慧型機器人的控制模組。
這裡,下位機接收到第一資料包之後,可以通過對第一資料包的解析,由第一資料包的檢測結果欄位中獲取檢測資訊,由第一資料包的控制欄位獲取控制資訊,然後可以根據控制資訊指示的工作模式以及檢測結果指示的目標對象的位置,執行相應的操作,例如,對目標對象進行追蹤拍攝等。
圖4示出根據本發明實施例的第一資料包格式的方塊圖。在一個可能的實現方式中,第一資料包還可以包括校驗欄位。上述方法還可以包括:生成第二校驗資訊;將所述第二校驗資訊添加在所述第一資料包的校驗欄位中,其中,所述第二校驗資訊用於所述下位機對所述第一資料包的準確性進行驗證。
在該實現方式中,第一資料包中可以包括校驗欄位,例如,校驗欄位可以是16個位元。上位機可以生成第二校驗資訊,例如,利用亂數產生第二校驗資訊,然後可以利用第二校驗資訊為檢測資訊或者控制資訊加密,並將第二校驗資訊添加在第一資料包的校驗欄位中。下位機在接收到第一資料包之後,可以利用校驗欄位中的第二校驗資訊為檢測資訊或者控制資訊進行解密,在解密成功的情況下,可以根據得到的檢測結果以及控制資訊執行相應的操作,否則,可以丟棄接收到的第一資料包。通過在校驗欄位中攜帶第二校驗資訊,可以保證檢測資訊或者控制資訊的準確性,避免被篡改的可能性。
在該實現方式的一個示例中,可以獲取預設的生成多項式,基於所述生成多項式,生成二進位序列,基於所述檢測結果以及所述二進位序列,生成所述第二校驗資訊。
在該示例中,為了保證資訊通信過程中檢測結果的準確性,可以針對檢測結果,生成對檢測結果進行校驗的第二校驗資訊。這裡的生成多項式可以與下位機預先協商,生成多項式可以是監督碼序列,可以將生成多項式轉換為二進位序列,二進位序列的位數可以為正整數,如8位、4位等。例如,生成多項式G(x)=x3+x2+1,二進位序列可以是將1101。然後可以利用檢測結果D(x)以及生成多項式G(x),確定冗餘碼長R,然後將D(x)的二進位碼向左移動R位,得到一個第一二進位碼,然後將該第一二進位碼除以G(x),得到餘數r。然後將r的最後R位進行模2運算,得到第二二進位碼,可以將第二二進位碼重新賦值給r。然後將D(x)的二進位碼向左移動R位後與r相加,可以得到第二校驗資訊。通過這種方式,可以得到對檢測結果進行校驗的第二校驗資訊,提高檢測結果傳輸的準確性。
在一種可能的實現方式中,第一資料包包括模式標誌位欄位;上述方法還可以包括:根據採集所述圖像幀時的工作模式,確定所述檢測結果對應的工作模式;基於所述檢測結果對應的工作模式,生成所述第一資料包的模式標誌位欄位。
在該實現方式中,第一資料包中可以包括模式標誌位欄位,該模式標誌位欄位可以指示檢測結果對應的工作模式。例如,該模式標誌位欄位為1時,可以表示檢測結果對應的工作模式是手勢分類模式。上位機可以根據檢測結果對應的工作模式生成儲存在模式標誌位欄位的資訊,然後將該資訊封裝在儲存在模式標誌位欄位。下位機在接收到第一資料包之後,可以根據第一資料包中的模式標誌位欄位確定檢測結果對應的工作模式,例如,確定當前的檢測結果是在人臉檢測模式下的人臉檢測結果,下位機可以將該人臉檢測結果保存在人臉檢測模式對應的儲存空間中。這樣,通過模式標誌位欄位可以確定檢測結果對應的工作模式,從而下位機可以更好地執行相應的操作。
在一種可能的實現方式中,在所述第一資料包的發送時間超過重傳閾值,並且,在所述發送時間內未接收所述下位機返回的確認資訊的情況下,上位機可以再次向所述下位機發送所述第一資料包。
在該實現方式中,上位機可以將重傳閾值儲存在第一資料包的重傳閾值欄位,重傳閾值可以根據實際的應用場景進行設置。上位機在發送第一資料包之後,可以計算第一資料包的發送時間。在該發送時間超過重傳閾值的情況下,上位機未接收到下位機發送的針對第一資料包的返回的確認資訊,可以認為存在下位機未接收到第一資料包或者第一資料包有誤等問題,可以重新向下位機發送第一資料包。這樣,可以確保第一資料包成功達到下位機,保證上位機與下位機之間的通信。
在一個可能的實現方式中,如圖4所示,第一資料包還可以包括可選欄位,該可選欄位可以根據實際應用場景中第一資料包的通信協定格式進行設置,從而可以對第一資料包進行改進以及優化。
在一種可能的實現方式中,上位機可以接收下位機發送的第二資料包;根據所述第二資料包的控制欄位攜帶的控制資訊,對當前的工作模式進行調整。
在該實施方式中,下位機可以連接多個感測器,接收至少一個感測器傳遞的電信號,用戶可以通過感測器設置當前的工作模式。下位機通過檢測感測器的電信號,確定使用者設置的工作模式。下位機可以直接由當前的工作模式生成控制資訊,將該控制資訊添加在第二資料包的控制欄位中,或者,可以將加密後的控制資訊添加在第二資料包的控制欄位中,向上位機發送第二資料包。上位機接收第二資料包之後,可以在第二資料包的控制欄位解析出當前的工作模式,並將自身的工作模式調整到解析出的工作模式,例如,樹莓派根據智慧型機器人的控制模組傳輸的第二資料包,將工作模式由原來的人臉檢測模式調整到球體檢測模式。通過這種方式,可以實現上位機與下位機的雙向通信。
需要說明的是,上位機還可以在第二資料包中獲取下位機發送其他的一些資訊,例如,在第二資料包中獲取智慧型機器人運轉的轉速、速度等一些資訊,從而上位機可以通過與下位機的雙向通信,更好地瞭解智慧型機器人當前的運動狀態。
圖5示出根據本發明實施例的一種通信方法的流程圖。該通信方法可以應用於下位機中,該方法可以包括以下步驟。
步驟S21,接收上位機發送的預設協定格式的第一資料包。
在本發明實施例中,下位機可以接收上位機發送的預設協定格式的第一資料包,這裡,預設協定格式可以是TCP/IP協定格式。舉例來說,智慧型機器人的控制模組(下位機)可以通過序列介面接收樹莓派(上位機)發送的第一資料包。
步驟S22,基於所述第一資料包,得到對圖像幀進行目標檢測得到的檢測結果以及當前的工作模式。
這裡,下位機可以在第一資料包的檢測結果欄位獲取對圖像幀進行目標檢測得到的檢測結果,在第一資料包的控制欄位中獲取當前的工作模式。這裡的工作模式包括手勢分類模式、人臉檢測模式、人體跟蹤模式、球體檢測模式中的一種或多種。
步驟S23,根據所述檢測結果以及當前的工作模式對當前場景進行圖像採集進行工作。
這裡,下位機可以根據檢測結果確定目標對象的位置,該位置可以是目標對象的世界座標或者圖像座標。然後,根據當前的工作模式以及檢測結果指示的目標對象的位置,進行相應的圖像採集進行工作,例如,對目標對象進行追蹤拍攝等。通過這種方式,可以實現上位機和下位機的資訊通信。
在一種可能的實現方式中,下位機可以在所述第一資料包的檢測結果欄位中獲取檢測資訊,根據所述檢測資訊得到對圖像幀進行目標檢測得到的檢測結果。相應地,下位機可以在所述第一資料包的控制欄位中獲取控制資訊,根據所述控制資訊確定當前工作模式。在該實現方式中,下位機可以直接由檢測結果欄位的檢測資訊得到目標對象的檢測結果,或者,可以利用預先與上位機協商的方式將檢測結果欄位的檢測資訊進行解密,得到目標對象的檢測結果。相應地,下位機可以直接由控制欄位的控制資訊得到當前的工作模式,或者,可以利用預先與上位機協商的方式將控制欄位的控制資訊進行解密,得到當前的工作模式。這樣,可以保證第一資料包內容的準確性。
在一種可能的實現方式中,下位機可以在所述檢測資訊的頭部和尾部獲取第一校驗資訊,在所述第一校驗資訊匹配預設校驗資訊的情況下,在所述檢測資訊中提取所述檢測結果。在該實現方式中,第一校驗資訊可以是上位機和下位機預先協商的,檢驗資訊頭部和尾部的第一校驗資訊可以相同,也可以不同。例如,可以將頭部的第一校驗資訊設置為0X7e,將尾部的第一校驗資訊設置為0Xac。下位機在接收到第一資料包之後,可以利用與上位機預先協商的第一校驗資訊對第一資料包的檢測結果欄位中的檢測資訊進行驗證,在檢測資訊的頭部以及尾部均與第一校驗資訊相匹配的情況下,可以由該檢測資訊確定當前的工作模式。否則,可以將接收的第一資料包丟棄,不進行任何處理。這樣,可以保證檢測結果傳輸的可靠性。
在該實現方式的一個示例中,上位機可以在所述第一資料包的校驗欄位中,獲取第二校驗資訊,並獲取由預設的生成多項式生成的二進位序列。然後利用所述二進位序列對所述第二校驗資訊進行校驗,得到校驗結果,在所述校驗結果為校驗通過的情況下,在所述第一資料包中獲取所述檢測結果。
在該示例中,為了保證資訊通信過程中檢測結果的準確性,可以為該檢測結果設置第二校驗資訊。第二校驗資訊可以攜帶在第一資料包的校驗欄位中。下位機可以獲取預先儲存的生成多項式,由該生成多項式生成的二進位序列,或者,直接獲取儲存的二進位序列。然後將第二校驗資訊除以二進位序列,得到餘數,在餘數是0的情況下,可以認為校驗結果是校驗通過。否則,可以認為校驗結果是校驗失敗。在校驗通過的情況下,可以由檢測結果欄位中獲取檢測結果,在校驗失敗的情況下,可以丟棄第一資料包。這樣,下位機可以獲取準確地檢測結果,避免檢測結果被篡改。
在一種可能的實現方式中,所述方法還包括:檢測當前的工作模式;在所述工作模式發生改變的情況下,基於當前的工作模式修改所述第一資料包的控制欄位,得到第二資料包;向上位機發送所述第二資料包。
在該實現方式中,下位機可以連接多個感測器,例如,觸摸感測器、光感感測器、紅外感測器等,接收至少一個感測器傳遞的電信號,用戶可以通過感測器設置當前的工作模式。下位機通過檢測感測器的電信號,確定使用者設置的工作模式。下位機可以直接由當前的工作模式生成控制資訊,將該控制資訊添加在第二資料包的控制欄位中,或者,可以將加密後的控制資訊添加在第二資料包的控制欄位中,向上位機發送第二資料包。從而上位機可以根據第二資料包中控制欄位,調整當前的工作模式。這樣,可以實現下位機到上位機的資訊通信過程。
需要說明的是,下位機除了將當前的工作模式通過第二資料包的控制欄位發送給上位機之後,還可以主動向上位機發送其他的一些資訊,例如,將智慧型機器人運轉的轉速、速度等一些資訊攜帶在第二資料包中發送給上位機。
通過本發明實施例提供的資訊通信方案,實現上位機與下位機之間的資訊通信。例如,實現樹莓派(上位機)與智慧型機器人的控制模組(下位機)之間的資訊通信。
結合樂高和樹莓派搭建的教育機器人mindstorms-EV3,是當前程式設計教育和人工智慧普及的一個新興教具,其中,樂高和樹莓派之間雙向通信是最基礎問題。相關技術中上下位機的通信方式包括利用狀態寄存器,任務單元序列等方式。
上下位機通信技術在很多領域都有較為重要的作用,特別是在嵌入式設備中,完備的通信協定可以保證資料可靠高效地傳輸。但是要設計並實現一種完善統一的協議是比較困難的。首先,協定規範有依賴於相關的硬體介面,而上下位機設備及連接方式也是多種多樣,無法設定統一標準。此外,為了保證資料傳輸的可靠性,需要借助校驗機制和重傳機制,但是重傳和校驗在一定程度上會降低資料傳輸即時性,所以需要根據不同的需求場景對協議進行修改。最後,協定設計還需要實現上下位機的雙向交互。
本發明實施例通過設計樹莓派和EV3通信協定,此協定可以解決樹莓派和EV3的通信問題,主要包括以下步驟S31至步驟S36。
步驟S31:在樹莓派上創建共用記憶體,用於儲存標誌位、圖片及圖片檢測結果等資訊。
其中,本發明實施例主應用領域為教育背景下的智慧型機器人,智慧型機器人可以實現手勢分類,人臉檢測和人體跟蹤等功能,本發明實施例提供一種樹莓派和樂高EV3的雙向通信協議。在樹莓派上完成圖片的採集和不同功能的圖片檢測任務。為了能夠實現圖片儲存、檢測結果儲存及不同功能切換,在樹莓派上創建共用記憶體,共用記憶體主要資訊格式如圖2所示。
圖2中共用記憶體資訊格式主要包括三部分內容,標誌位,圖片內容和檢測結果。其中標誌位功能如下:標識當前採集得到的圖片是否經過檢測處理,標識不同檢測功能模式;圖片內容部分為圖片儲存區域,可以將採集得到的視頻資料分幀後儲存在該部分;檢測結果部分儲存圖片檢測資訊,該部分內容大小為72Bytes,主要為了儲存多目標檢測結果資訊,資訊見圖3。其中,標誌位和圖片內容每一幀不斷更新,但是並不作為資料傳輸內容,而每一幀檢測結果資訊會封裝到資料包中。
步驟S32:改變共用記憶體標誌位,進行下一幀圖片檢測,並將檢測結果資訊封裝為資料欄位。
其中,可以輸入共用記憶體中的檢測結果部分,輸出封裝檢測結果的資料包;基於樹莓派共用記憶體中檢測結果,將對應欄位填寫至指定部分以完成資料封裝,資料包格式如圖4所示。
在共用記憶體中同時保留有功能模式欄位和檢測結果資訊欄位,將檢測結果資訊直接封裝到對應檢測資訊部分,為了保證檢測資料傳輸可靠性,在檢測結果頭部和尾部一個位元組都添加校驗位元組。其中頭部校驗位元組可以為0X7e,尾部位元組可以為0Xac。
EV3接收到資料包之後,會首先解析出檢測結果欄位,然後進行首尾位元組資訊的校驗。校驗通過時,根據檢測結果執行相應指令;在校驗失敗時,會丟棄資料包,不進行任何處理。
步驟S33:根據資料欄位計算CRC校驗欄位。
其中,為了保證傳輸結果的準確性,在資料包中增加CRC(Cyclic Redundancy Check,循環冗餘校驗)校驗欄位,該欄位只針對檢測結果進行校驗,校驗位共計16個位元資訊。在EV3側解析資料包時,同時進行CRC校驗,得到檢測結果序列,校驗不通過時會丟棄資料包。
表1
種類 | 序號 |
手勢分類 | 1 |
人臉檢測 | 2 |
人體跟蹤 | 3 |
球體檢測 | 4 |
其中,教育機器人有不同工作模式,在不同工作模式下需要EV3和樹莓派同時啟動相應服務,服務的啟動和切換需要通過控制欄位的設定,服務及對應控制類型如上表1。在樹莓派側首先檢測自身服務類型,根據服務種類補充控制欄位內容。
此外,資料包格式中預留重傳閾值欄位,設定該時間閾值後,一旦資料包發送時間超過該閾值未收到相應ACK(Acknowledge character,確認字元)回復消息,那麼會重新發送上述資料包。由於本教育機器人採用有線串口方式連接,丟包率極低,所以該欄位為保留欄位,留待無線場景需求。
在完成上述資料包資料資訊封裝後,樹莓派將該資料包通過串口發送,該發送通過作業系統底層指令完成資料包發送。
步驟S35:EV3接收資料包,執行相應指令,完成校驗,並通過觸碰感測器修改控制欄位。
其中,EV3可以完成兩部分功能:接收並解析樹莓派發送的資料包,修改資料包控制欄位並將資料包發送到樹莓派。
首先,在EV3側收到資料包後,會首先進行CRC校驗,在校驗通過時會解析檢測結果,並根據檢測結果執行相應指令。CRC校驗過程包括以下步驟S351至步驟S354:
步驟S351:解析資料包得到檢測結果序列;
步驟S352:檢測結果序列除以預設的生成多項式,得到餘數;
步驟S353:餘數為0,校驗通過,檢測結果正確;
步驟S354:餘數不為0,校驗失敗,檢測結果錯誤。
其次,當在EV3側通過相關感測器修改功能模式時,如通過觸碰感測器或者紅外信標等方式,會修改資料包中的控制欄位,並將該資訊發送至樹莓派側,調整樹莓派側啟動的服務,保證上下位機服務的一致性。
步驟S36:樹莓派接收EV3控制欄位資訊,進行工作模式調整。
其中,樹莓派側接收到資料包後,首先完成CRC校驗,在校驗通過後,會解析控制欄位,通過控制欄位調整自身工作模式。此時樹莓派共用記憶體格式保持不變,包括標誌位、圖片內容和檢測結果三部分,但是檢測結果對應於不同的功能下的檢測資訊。
本發明實施例通過設計樹莓派和EV3通信協議中的資料欄位和控制欄位,可以完成資料資訊和控制資訊傳輸;再通過改進重傳機制和CRC校驗方法,保證資料可靠高效傳輸;借助EV3的觸碰感測器(觸摸感測器),實現上下位機(例如樹莓派和EV3)不同功能模式切換,完成教育機器人的不同工作模式,並可以保證資料資訊一致性;樹莓派和EV3通信協議預留其他可選的通信協議欄位,可以應用到其他類似設備,並可以方便地進行改良和優化。
本發明實施例基於TCP/IP協議,相容串口通信模式下的不同上下位機設備,對硬體設備弱依賴;現有技術常依賴於嵌入式設備類型。
本發明實施例可以同時實現更為靈活的上下位機雙向資訊交互機制,可以方便地實現下位機對上位機弱控制;相關技術大多只針對與上位機對下位機控制。
本發明實施例在樹莓派和EV3通信協議中對資料類型進行劃分,分為資料欄位和控制欄位兩部分,可以提高資料傳輸可靠性。通過控制欄位可以實現教育機器人不同模式切換;現有協議未對資料類型進行分類,較為固化。
本發明實施例對CRC校驗方法進行改良,通過自訂循環碼長度可以自由調整,實現可靠性和高效性的折衷;傳統CRC方式通常固定循環碼長度。
本發明實施例可以應用在教育機器人、半導體領域或者嵌入設備中:在教育機器人應用場景下,樹莓派和EV3通信協定可以保證控制設備和執行設備之間雙向可靠通信;在半導體領域或者嵌入式設備中,該演算法可以提供靈活的雙向交互機制;可以利用本發明實施例中改進CRC校驗方案,提高通信效率。可以利用本發明實施例中提到共用記憶體方式,方便實現上位機中不同功能模式切換。
可以理解,本發明提及的上述各個方法實施例,在不違背原理邏輯的情況下,均可以彼此相互結合形成結合後的實施例,限於篇幅,本發明不再贅述。
此外,本發明還提供了裝置、電子設備、電腦可讀儲存介質、程式,上述均可用來實現本發明提供的任一種通信方法,相應技術方案和描述和參見方法部分的相應記載,不再贅述。
本領域技術人員可以理解,在實施方式的上述方法中,各步驟的撰寫順序並不意味著嚴格的執行順序而對實施過程構成任何限定,各步驟的執行順序應當以其功能和可能的內在邏輯確定。
圖6示出根據本發明實施例的通信裝置一示例的方塊圖,如圖6所示,所述裝置包括:
獲取模組31,配置為獲取對圖像幀進行目標檢測得到的檢測結果;
生成模組32,配置為基於所述檢測結果以及當前的工作模式,生成預設協定格式的第一資料包;
發送模組33,配置為向下位機發送所述第一資料包,以使所述下位機根據所述第一資料包對當前場景進行圖像採集。
在一種可能的實現方式中,所述獲取模組31,配置為在共用記憶體中獲取對圖像幀進行目標檢測得到的檢測結果。
在一種可能的實現方式中,所述生成模組32,配置為根據所述檢測結果生成檢測資訊;根據所述當前的工作模式生成控制資訊;將所述檢測資訊添加在檢測結果欄位中,將所述控制資訊添加在控制欄位中,生成預設協議格式的所述第一資料包。
在一種可能的實現方式中,所述生成模組32,配置為在所述檢測結果的頭部和尾部添加第一校驗資訊,生成所述檢測資訊。
在一種可能的實現方式中,所述第一資料包包括校驗欄位;所述生成模組32還配置為生成第二校驗資訊;將所述第二校驗資訊添加在所述第一資料包的校驗欄位中,其中,所述第二校驗資訊配置為所述下位機對所述第一資料包的準確性進行驗證。
在一種可能的實現方式中,所述生成模組32,配置為獲取預設的生成多項式;基於所述生成多項式,生成二進位序列;基於所述檢測結果以及所述二進位序列,生成所述第二校驗資訊。
在一種可能的實現方式中,所述第一資料包包括模式標誌位欄位;所述生成模組32還配置為根據採集所述圖像幀時的工作模式,確定所述檢測結果對應的工作模式;基於所述檢測結果對應的工作模式,生成所述第一資料包的模式標誌位欄位。
在一種可能的實現方式中,所述發送模組33,還配置為在所述第一資料包的發送時間超過重傳閾值,並且,在所述發送時間內未接收所述下位機返回的確認資訊的情況下,再次向所述下位機發送所述第一資料包。
在一種可能的實現方式中,所述裝置還包括:接收模組,配置為接收下位機發送的第二資料包;根據所述第二資料包的控制欄位攜帶的控制資訊,對當前的工作模式進行調整。
在一種可能的實現方式中,所述工作模式,包括以下至少一種:手勢分類模式;人臉檢測模式;人體跟蹤模式;球體檢測模式。
圖7示出根據本發明實施例的通信裝置一示例的方塊圖,如圖7所示,所述裝置包括:
接收模組41,配置為接收上位機發送的預設協定格式的第一資料包;
確定模組42,配置為基於所述第一資料包,得到對圖像幀進行目標檢測得到的檢測結果以及當前的工作模式;
控制模組43,配置為根據所述檢測結果以及當前的工作模式對當前場景進行圖像採集進行工作。
在一種可能的實現方式中,所述確定模組42,配置為在所述第一資料包的檢測結果欄位中獲取檢測資訊;根據所述檢測資訊得到對圖像幀進行目標檢測得到的檢測結果;在所述第一資料包的控制欄位中獲取控制資訊;根據所述控制資訊確定當前工作模式。
在一種可能的實現方式中,所述確定模組42,配置為在所述檢測資訊的頭部和尾部獲取第一校驗資訊;在所述第一校驗資訊匹配預設校驗資訊的情況下,在所述檢測資訊中提取所述檢測結果。
在一種可能的實現方式中,所述確定模組42,配置為在所述第一資料包的校驗欄位中,獲取第二校驗資訊;獲取由預設的生成多項式生成的二進位序列;利用所述二進位序列對所述第二校驗資訊進行校驗,得到校驗結果;在所述校驗結果為校驗通過的情況下,在所述第一資料包中獲取所述檢測結果。
在一種可能的實現方式中,所述裝置還包括:修改模組,配置為檢測當前的工作模式;在所述工作模式發生改變的情況下,基於當前的工作模式修改所述第一資料包的控制欄位,得到第二資料包;向上位機發送所述第二資料包。
在一種可能的實現方式中,所述工作模式包括以下至少一種:手勢分類模式;人臉檢測模式;人體跟蹤模式;球體檢測模式。
在一些實施例中,本發明實施例提供的裝置具有的功能或包含的模組可以配置為執行上文方法實施例描述的方法,其實現可以參照上文方法實施例的描述,為了簡潔,這裡不再贅述。
本發明實施例還提出一種電子設備,包括:處理器;配置為儲存處理器可執行指令的記憶體;其中,所述處理器被配置為上述方法。
電子設備可以被提供為終端、伺服器或其它形態的設備。
圖8是根據一示例性實施例示出的一種電子設備1900的方塊圖。例如,電子設備1900可以被提供為一伺服器。參照圖8,電子設備1900包括處理組件1922,其進一步包括一個或多個處理器,以及由記憶體1932所代表的記憶體資源,配置為儲存可由處理組件1922的執行的指令,例如應用程式。記憶體1932中儲存的應用程式可以包括一個或一個以上的每一個對應於一組指令的模組。此外,處理組件1922被配置為執行指令,以執行上述方法。
電子設備1900還可以包括一個電源組件1926被配置為執行電子設備1900的電源管理,一個有線或無線網路介面1950被配置為將電子設備1900連接到網路,和一個輸入輸出(Input/Output,I/O)介面1958。電子設備1900可以操作基於儲存在記憶體1932的作業系統,例如Windows ServerTM,Mac OS XTM,UnixTM, LinuxTM,FreeBSDTM或類似。
在示例性實施例中,還提供了一種非易失性電腦可讀儲存介質,例如包括電腦程式指令的記憶體1932,上述電腦程式指令可由電子設備1900的處理組件1922執行以完成上述方法。
本發明可以是系統、方法和/或電腦程式產品。電腦程式產品可以包括電腦可讀儲存介質,其上載有用於使處理器實現本發明的各個方面的電腦可讀程式指令。
電腦可讀儲存介質可以是可以保持和儲存由指令執行設備使用的指令的有形設備。電腦可讀儲存介質例如可以但不限於是電儲存裝置、磁儲存裝置、光儲存裝置、電磁儲存裝置、半導體儲存裝置或者上述的任意合適的組合。電腦可讀儲存介質的例子(非窮舉的列表)包括:可擕式電腦盤、硬碟、隨機存取記憶體(Random Access Memory,RAM)、唯讀記憶體(Read-Only Memory,ROM)、可擦式可程式設計唯讀記憶體(Erasable Programmable Read-Only Memory,EPROM或快閃記憶體)、靜態隨機存取記憶體(Static Random-Access Memory,SRAM)、可擕式壓縮磁碟唯讀記憶體(Compact Disc Read-Only Memory,CD-ROM)、數位多功能盤(Digital Video Disc,DVD)、記憶棒、軟碟、機械編碼設備、例如其上儲存有指令的打孔卡或凹槽內凸起結構、以及上述的任意合適的組合。這裡所使用的電腦可讀儲存介質不被解釋為暫態信號本身,諸如無線電波或者其他自由傳播的電磁波、通過波導或其他傳輸媒介傳播的電磁波(例如,通過光纖電纜的光脈衝)、或者通過電線傳輸的電信號。
這裡所描述的電腦可讀程式指令可以從電腦可讀儲存介質下載到各個計算/處理設備,或者通過網路、例如網際網路、局域網、廣域網路和/或無線網下載到外部電腦或外部儲存裝置。網路可以包括銅傳輸電纜、光纖傳輸、無線傳輸、路由器、防火牆、交換機、閘道電腦和/或邊緣伺服器。每個計算/處理設備中的網路介面卡或者網路介面從網路接收電腦可讀程式指令,並轉發該電腦可讀程式指令,以供儲存在各個計算/處理設備中的電腦可讀儲存介質中。
用於執行本發明操作的電腦程式指令可以是彙編指令、指令集架構(Industry Standard Architecture,ISA)指令、機器指令、機器相關指令、微代碼、固件指令、狀態設置資料、或者以一種或多種程式設計語言的任意組合編寫的原始程式碼或目標代碼,所述程式設計語言包括對象導向的程式設計語言—諸如Smalltalk、C++等,以及常規的過程式程式設計語言—諸如“C”語言或類似的程式設計語言。電腦可讀程式指令可以完全地在使用者電腦上執行、部分地在使用者電腦上執行、作為一個獨立的套裝軟體執行、部分在使用者電腦上部分在遠端電腦上執行、或者完全在遠端電腦或伺服器上執行。在涉及遠端電腦的情形中,遠端電腦可以通過任意種類的網路—包括局域網(local area network,LAN)或廣域網路(Wide Area Network,WAN)—連接到使用者電腦,或者,可以連接到外部電腦(例如利用網際網路服務提供者來通過網際網路連接)。在一些實施例中,通過利用電腦可讀程式指令的狀態資訊來個性化定制電子電路,例如可程式設計邏輯電路、現場可程式設計閘陣列(Field Programmable Gate Array,FPGA)或可程式設計邏輯陣列(programmable logic array,PLA),該電子電路可以執行電腦可讀程式指令,從而實現本發明的各個方面。
這裡參照根據本發明實施例的方法、裝置(系統)和電腦程式產品的流程圖和/或方塊圖描述了本發明的各個方面。應當理解,流程圖和/或方塊圖的每個方塊以及流程圖和/或方塊圖中各方塊的組合,都可以由電腦可讀程式指令實現。
這些電腦可讀程式指令可以提供給通用電腦、專用電腦或其它可程式設計資料處理裝置的處理器,從而生產出一種機器,使得這些指令在通過電腦或其它可程式設計資料處理裝置的處理器執行時,產生了實現流程圖和/或方塊圖中的一個或多個方塊中規定的功能/動作的裝置。也可以把這些電腦可讀程式指令儲存在電腦可讀儲存介質中,這些指令使得電腦、可程式設計資料處理裝置和/或其他設備以特定方式工作,從而,儲存有指令的電腦可讀介質則包括一個製造品,其包括實現流程圖和/或方塊圖中的一個或多個方塊中規定的功能/動作的各個方面的指令。
也可以把電腦可讀程式指令載入到電腦、其它可程式設計資料處理裝置、或其它設備上,使得在電腦、其它可程式設計資料處理裝置或其它設備上執行一系列操作步驟,以產生電腦實現的過程,從而使得在電腦、其它可程式設計資料處理裝置、或其它設備上執行的指令實現流程圖和/或方塊圖中的一個或多個方塊中規定的功能/動作。
相應的,本發明實施例還提供一種電腦程式,包括電腦可讀代碼,當所述電腦可讀代碼在電子設備中運行時,所述電子設備中的處理器執行用於實現本發明實施例提供的任一通信方法。
附圖中的流程圖和方塊圖顯示了根據本發明的多個實施例的系統、方法和電腦程式產品的可能實現的體系架構、功能和操作。在這點上,流程圖或方塊圖中的每個方塊可以代表一個模組、程式段或指令的一部分,所述模組、程式段或指令的一部分包含一個或多個用於實現規定的邏輯功能的可執行指令。在有些作為替換的實現中,方塊中所標注的功能也可以以不同於附圖中所標注的順序發生。例如,兩個連續的方塊實際上可以基本並行地執行,它們有時也可以按相反的循序執行,這依所涉及的功能而定。也要注意的是,方塊圖和/或流程圖中的每個方塊、以及方塊圖和/或流程圖中的方塊的組合,可以用執行規定的功能或動作的專用的基於硬體的系統來實現,或者可以用專用硬體與電腦指令的組合來實現。
以上已經描述了本發明的各實施例,上述說明是示例性的,並非窮盡性的,並且也不限於所披露的各實施例。在不偏離所說明的各實施例的範圍和精神的情況下,對於本技術領域的普通技術人員來說許多修改和變更都是顯而易見的。本文中所用術語的選擇,旨在最好地解釋各實施例的原理、實際應用或對市場中技術的技術改進,或者使本技術領域的其它普通技術人員能理解本文披露的各實施例。
31:獲取模組
32:生成模組
33:發送模組
41:接收模組
42:確定模組
43:控制模組
1900:電子設備
1922:處理組件
1926:電源組件
1932:記憶體
1950:網路介面
1958:輸入輸出介面
S11:步驟
S12:步驟
S13:步驟
S21:步驟
S22:步驟
S23:步驟
此處的附圖被併入說明書中並構成本說明書的一部分,這些附圖示出了符合本發明的實施例,並與說明書一起用於說明本發明的技術方案。
圖1示出根據本發明實施例的通信方法的流程圖;
圖2示出根據本發明實施例的共用記憶體的資訊儲存格式的方塊圖;
圖3示出根據本發明實施例的檢測結果的資訊儲存格式的方塊圖;
圖4示出根據本發明實施例的第一資料包格式的方塊圖;
圖5示出根據本發明實施例的一種通信方法的流程圖;
圖6示出根據本發明實施例的通信裝置一示例的方塊圖;
圖7示出根據本發明實施例的通信裝置一示例的方塊圖;
圖8示出根據本發明實施例的電子設備示例的方塊圖。
S11:步驟
S12:步驟
S13:步驟
Claims (11)
- 一種通信方法,所述方法包括:獲取對圖像幀進行目標檢測得到的檢測結果;基於所述檢測結果以及當前的工作模式,生成預設協定格式的第一資料包;所述工作模式為對圖像幀進行目標檢測時的工作模式;所述工作模式用於確定目標檢測的目標對象;所述檢測結果包括所述目標對象在所述圖像幀中的圖像座標,或者,所述目標對象在三維空間中的世界座標;向下位機發送所述第一資料包,以使所述下位機根據所述第一資料包對當前場景進行圖像採集;其中,所述基於所述檢測結果以及當前的工作模式,生成預設協定格式的第一資料包,包括:根據所述檢測結果生成檢測資訊;根據所述當前的工作模式生成控制資訊;將所述檢測資訊添加在檢測結果欄位中,將所述控制資訊添加在控制欄位中,生成預設協議格式的所述第一資料包。
- 根據請求項1所述的方法,其中,所述根據所述檢測結果生成檢測資訊,包括:在所述檢測結果的頭部和尾部添加第一校驗資訊,生成所述檢測資訊。
- 根據請求項1或2所述的方法,其中,所述第一資料包包括校驗欄位;所述方法還包括:生成第二校驗資訊;將所述第二校驗資訊添加在所述第一資料包的校驗欄位中,其中,所述第二校驗資訊用於所述下位機對所述第一資料包的準確性進行驗證。
- 根據請求項3所述的方法,其中,所述生成第二校驗資訊,包括:獲取預設的生成多項式;基於所述生成多項式,生成二進位序列;基於所述檢測結果以及所述二進位序列,生成所述第二校驗資訊。
- 根據請求項1或2所述的方法,所述方法包括以下至少一種:所述第一資料包包括模式標誌位欄位;所述方法還包括:根據採集所述圖像幀時的工作模式,確定所述檢測結果對應的工作模式;基於所述檢測結果對應的工作模式,生成所述第一資料包的模式標誌位欄位;在所述第一資料包的發送時間超過重傳閾值,並且,在所述發送時間內未接收所述下位機返回的確認資訊的情況下,再次向所述下位機發送所述第一資料包;或者接收下位機發送的第二資料包;根據所述第二資料包的控制欄位攜帶的控制資訊,對當前的工作模式進行調整。
- 一種通信方法,所述方法包括:接收上位機發送的預設協定格式的第一資料包;基於所述第一資料包,得到對圖像幀進行目標檢測得到的檢測結果以及當前的工作模式;根據所述檢測結果以及當前的工作模式對當前場景進行圖像採集工作;所述工作模式為對圖像幀進行目標檢測時的工作模式;所述工作模式用於確定目標檢測的目標對象;所述檢測結果包括所述目標對象在所述圖像幀中的圖像座標,或者,所述目標對象在三維空間中的世界座標; 其中,所述基於所述第一資料包,得到對圖像幀進行目標檢測得到的檢測結果以及當前的工作模式,包括:在所述第一資料包的檢測結果欄位中獲取檢測資訊;根據所述檢測資訊得到對圖像幀進行目標檢測得到的檢測結果;在所述第一資料包的控制欄位中獲取控制資訊;根據所述控制資訊確定當前工作模式。
- 根據請求項6所述的方法,其中,所述根據所述檢測資訊得到對圖像幀進行目標檢測得到的檢測結果,包括:在所述檢測資訊的頭部和尾部獲取第一校驗資訊;在所述第一校驗資訊匹配預設校驗資訊的情況下,在所述檢測資訊中提取所述檢測結果。
- 根據請求項6或7所述的方法,其中,所述在所述第一資料包的檢測結果欄位中獲取檢測資訊,包括:在所述第一資料包的校驗欄位中,獲取第二校驗資訊;獲取由預設的生成多項式生成的二進位序列;利用所述二進位序列對所述第二校驗資訊進行校驗,得到校驗結果;在所述校驗結果為校驗通過的情況下,在所述第一資料包中獲取所述檢測結果。
- 根據請求項6或7所述的方法,其中,所述方法還包括:檢測當前的工作模式;在所述工作模式發生改變的情況下,基於當前的工作模式修改所述第一資料包的控制欄位,得到第二資料包;向上位機發送所述第二資料包。
- 一種電子設備,包括: 處理器;用於儲存處理器可執行指令的記憶體;其中,所述處理器被配置為調用所述記憶體儲存的指令,以執行請求項1至5中任意一項所述的方法,或者,以執行請求項6至9中任意一項所述的方法。
- 一種電腦可讀儲存介質,其上儲存有電腦程式指令,所述電腦程式指令被處理器執行時實現請求項1至5中任意一項所述的方法,或者,實現請求項6至9中任意一項所述的方法。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910809368.5 | 2019-08-29 | ||
CN201910809368.5A CN110545376B (zh) | 2019-08-29 | 2019-08-29 | 通信方法及装置、电子设备和存储介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
TW202109352A TW202109352A (zh) | 2021-03-01 |
TWI737460B true TWI737460B (zh) | 2021-08-21 |
Family
ID=68710834
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
TW109128637A TWI737460B (zh) | 2019-08-29 | 2020-08-21 | 通信方法、電子設備和儲存介質 |
Country Status (7)
Country | Link |
---|---|
US (1) | US20210294767A1 (zh) |
JP (1) | JP2022509292A (zh) |
KR (1) | KR20210086678A (zh) |
CN (1) | CN110545376B (zh) |
SG (1) | SG11202105681QA (zh) |
TW (1) | TWI737460B (zh) |
WO (1) | WO2021036407A1 (zh) |
Families Citing this family (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110545376B (zh) * | 2019-08-29 | 2021-06-25 | 上海商汤智能科技有限公司 | 通信方法及装置、电子设备和存储介质 |
CN113746833B (zh) * | 2021-09-02 | 2023-06-16 | 上海商汤智能科技有限公司 | 通信方法及装置、电子设备和存储介质 |
CN114465888A (zh) * | 2021-12-23 | 2022-05-10 | 珠海格力电器股份有限公司 | 配置数据协议的采集方法、电子设备及存储介质 |
CN115334331B (zh) * | 2022-08-23 | 2023-09-22 | 苏州青颖飞帆软件科技股份有限公司 | 一种教学直播的通讯方法、设备及存储介质 |
CN115861033A (zh) * | 2022-12-20 | 2023-03-28 | 北京远舢智能科技有限公司 | 一种图像数据处理方法、装置、计算机设备及存储介质 |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8890922B2 (en) * | 2010-01-29 | 2014-11-18 | Huawei Device Co., Ltd. | Video communication method, device and system |
CN106034199A (zh) * | 2015-03-18 | 2016-10-19 | 中国科学院苏州纳米技术与纳米仿生研究所 | 一种模拟数据源的图像采集装置和方法 |
CN106603581A (zh) * | 2017-02-22 | 2017-04-26 | 欣旺达电子股份有限公司 | 支持多种通信协议的测试方法及装置 |
CN108712609A (zh) * | 2018-05-17 | 2018-10-26 | Oppo广东移动通信有限公司 | 对焦处理方法、装置、设备及存储介质 |
CN110070511A (zh) * | 2019-04-30 | 2019-07-30 | 北京市商汤科技开发有限公司 | 图像处理方法和装置、电子设备及存储介质 |
Family Cites Families (23)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2002281487A (ja) * | 2001-03-19 | 2002-09-27 | Fujitsu General Ltd | ネットワークカメラによる監視方法と監視システム |
JP4284609B2 (ja) * | 2003-03-27 | 2009-06-24 | ソニー株式会社 | ロボット装置及びロボット装置の制御方法 |
CN101112017B (zh) * | 2005-02-03 | 2011-06-01 | 富士通株式会社 | 无线通信系统及无线通信方法 |
US7899557B2 (en) * | 2005-03-01 | 2011-03-01 | Asm Japan K.K. | Input signal analyzing system and control apparatus using same |
JP2007243663A (ja) * | 2006-03-09 | 2007-09-20 | Matsushita Electric Ind Co Ltd | データ送受信装置 |
JP4279345B1 (ja) * | 2008-09-16 | 2009-06-17 | 株式会社 水口研究所 | プログラマブル・トグルスイッチを持つデジタル画像処理コンピュータシステム |
JP5276538B2 (ja) * | 2009-07-22 | 2013-08-28 | 富士フイルム株式会社 | Af枠自動追尾システム |
JP5703801B2 (ja) * | 2011-02-04 | 2015-04-22 | 富士通株式会社 | ロボット、位置推定方法及びプログラム |
JP6245886B2 (ja) * | 2013-08-08 | 2017-12-13 | キヤノン株式会社 | 画像撮像方法及び画像撮像装置 |
EP3077939A1 (en) * | 2013-12-03 | 2016-10-12 | Edh Us Llc | Systems and methods to track a golf ball to and on a putting green |
JP6126028B2 (ja) * | 2014-02-28 | 2017-05-10 | 三井不動産株式会社 | ロボット制御システム、ロボット制御サーバ及びロボット制御プログラム |
CN104243918A (zh) * | 2014-09-03 | 2014-12-24 | 深圳奇沃智联科技有限公司 | 应用蓝牙定位进行自动巡逻之机器人监控系统 |
US20160085518A1 (en) * | 2014-09-21 | 2016-03-24 | Jang Hee I | Systems and methods for imaging and generation of executable processor instructions based on ordered objects |
US20180009118A1 (en) * | 2015-02-17 | 2018-01-11 | Nec Corporation | Robot control device, robot, robot control method, and program recording medium |
CN105391939B (zh) * | 2015-11-04 | 2017-09-29 | 腾讯科技(深圳)有限公司 | 无人机拍摄控制方法和装置、无人机拍摄方法和无人机 |
CN105391780A (zh) * | 2015-11-09 | 2016-03-09 | 重庆川仪自动化股份有限公司 | 一种数据采集和接收的方法及系统 |
JP2017100242A (ja) * | 2015-12-02 | 2017-06-08 | グローリー株式会社 | 検査ロボットシステム |
CN205721829U (zh) * | 2016-03-07 | 2016-11-23 | 谭圆圆 | 一种无人飞行器 |
JP2018113649A (ja) * | 2017-01-13 | 2018-07-19 | キヤノン株式会社 | カメラ、情報処理装置及びシステム |
CN107623726A (zh) * | 2017-08-29 | 2018-01-23 | 美的智慧家居科技有限公司 | 数据转换传输方法和装置 |
CN207910927U (zh) * | 2018-02-13 | 2018-09-25 | 深圳市辰卓电子有限公司 | 一种信息采集桥接装置及图像传感器质量自动检测设备 |
CN209105343U (zh) * | 2018-12-10 | 2019-07-12 | 美钻深海能源科技研发(上海)有限公司 | 水下履带智能机器人图像采集单元 |
CN110545376B (zh) * | 2019-08-29 | 2021-06-25 | 上海商汤智能科技有限公司 | 通信方法及装置、电子设备和存储介质 |
-
2019
- 2019-08-29 CN CN201910809368.5A patent/CN110545376B/zh active Active
-
2020
- 2020-06-10 SG SG11202105681QA patent/SG11202105681QA/en unknown
- 2020-06-10 WO PCT/CN2020/095340 patent/WO2021036407A1/zh active Application Filing
- 2020-06-10 JP JP2021531028A patent/JP2022509292A/ja active Pending
- 2020-06-10 KR KR1020217016118A patent/KR20210086678A/ko active Search and Examination
- 2020-08-21 TW TW109128637A patent/TWI737460B/zh active
-
2021
- 2021-06-02 US US17/336,957 patent/US20210294767A1/en not_active Abandoned
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8890922B2 (en) * | 2010-01-29 | 2014-11-18 | Huawei Device Co., Ltd. | Video communication method, device and system |
CN106034199A (zh) * | 2015-03-18 | 2016-10-19 | 中国科学院苏州纳米技术与纳米仿生研究所 | 一种模拟数据源的图像采集装置和方法 |
CN106603581A (zh) * | 2017-02-22 | 2017-04-26 | 欣旺达电子股份有限公司 | 支持多种通信协议的测试方法及装置 |
CN108712609A (zh) * | 2018-05-17 | 2018-10-26 | Oppo广东移动通信有限公司 | 对焦处理方法、装置、设备及存储介质 |
CN110070511A (zh) * | 2019-04-30 | 2019-07-30 | 北京市商汤科技开发有限公司 | 图像处理方法和装置、电子设备及存储介质 |
Also Published As
Publication number | Publication date |
---|---|
JP2022509292A (ja) | 2022-01-20 |
CN110545376A (zh) | 2019-12-06 |
CN110545376B (zh) | 2021-06-25 |
TW202109352A (zh) | 2021-03-01 |
WO2021036407A1 (zh) | 2021-03-04 |
SG11202105681QA (en) | 2021-06-29 |
KR20210086678A (ko) | 2021-07-08 |
US20210294767A1 (en) | 2021-09-23 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
TWI737460B (zh) | 通信方法、電子設備和儲存介質 | |
JP6664551B1 (ja) | マルチブロックチェーンネットワークデータ処理方法、装置、およびサーバ | |
CN107786794B (zh) | 向应用提供由图像传感器获取的图像的电子装置和方法 | |
KR20190098752A (ko) | 블록체인 기반 데이터 프로세싱 방법 및 디바이스 | |
WO2018177124A1 (zh) | 业务处理方法、装置、数据共享系统及存储介质 | |
US9413830B2 (en) | Application streaming service | |
BR112019008775B1 (pt) | Método de processamento de dados | |
US20180262388A1 (en) | Remote device deployment | |
KR20190117485A (ko) | 서비스 데이터 처리 방법 및 디바이스, 및 서비스 처리 방법 및 디바이스 | |
CN108924538B (zh) | Ar设备的屏幕拓展方法 | |
CN106453474A (zh) | 在不稳定网络环境中的大文件的网络传输 | |
TW202304212A (zh) | 直播方法、系統、電腦設備及電腦可讀儲存媒體 | |
CN104021069A (zh) | 基于分布式虚拟机系统的软件性能测试的管理方法和系统 | |
CN116866336A (zh) | 一种进行远程协助的方法与设备 | |
BR112019008903A2 (pt) | método e dispositivo para geração de pacotes de unidade de dados de protocolo (pdu) | |
WO2019057089A1 (zh) | 网卡镜像抓包方法、终端以及可读存储介质 | |
CN106878199A (zh) | 一种接入信息的配置方法和装置 | |
CN105550934A (zh) | 虚拟现实中微信软文的推送系统及方法 | |
WO2023029386A1 (zh) | 通信方法及装置、电子设备、存储介质和计算机程序 | |
CN116996309A (zh) | 基于区块链的语义通信方法及系统、存储介质、设备 | |
CN112463067A (zh) | 一种NVMe-oF场景下的数据保护方法及设备 | |
US11283451B1 (en) | Bridged integrated circuits | |
US20220279234A1 (en) | Live stream display method and apparatus, electronic device, and readable storage medium | |
CN111651146B (zh) | 一种函数生成方法、装置、设备和介质 | |
CN109842498A (zh) | 一种客户端配置方法、服务器、客户端及电子设备 |