WO2014169562A1 - 植物器官点云的分割方法和系统 - Google Patents

植物器官点云的分割方法和系统 Download PDF

Info

Publication number
WO2014169562A1
WO2014169562A1 PCT/CN2013/083455 CN2013083455W WO2014169562A1 WO 2014169562 A1 WO2014169562 A1 WO 2014169562A1 CN 2013083455 W CN2013083455 W CN 2013083455W WO 2014169562 A1 WO2014169562 A1 WO 2014169562A1
Authority
WO
WIPO (PCT)
Prior art keywords
point cloud
branch
frame
segmented
point
Prior art date
Application number
PCT/CN2013/083455
Other languages
English (en)
French (fr)
Inventor
李扬彦
陈宝权
范晓晨
Original Assignee
深圳先进技术研究院
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 深圳先进技术研究院 filed Critical 深圳先进技术研究院
Priority to US14/765,806 priority Critical patent/US9547793B2/en
Publication of WO2014169562A1 publication Critical patent/WO2014169562A1/zh

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/10Segmentation; Edge detection
    • G06T7/143Segmentation; Edge detection involving probabilistic approaches, e.g. Markov random field [MRF] modelling
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/60Type of objects
    • G06V20/64Three-dimensional objects
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/10Segmentation; Edge detection
    • G06T7/162Segmentation; Edge detection involving graph-based methods
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/10Segmentation; Edge detection
    • G06T7/174Segmentation; Edge detection involving the use of two or more images
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/10Terrestrial scenes
    • G06V20/188Vegetation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10028Range image; Depth image; 3D point clouds
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09BEDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B9/00Simulators for teaching or training purposes

Definitions

  • the invention relates to the field of point cloud processing, in particular to a method and a system for segmenting a point cloud of a plant organ. ⁇ Background technique ⁇
  • S140 segment the point cloud in the first point cloud frame into a blade point cloud block and a branch point cloud block according to the flatness feature of the data point in the first point cloud frame 1 ;
  • step S240 determining whether the number of branches point clouds contain more than F f F f - number of point clouds branches comprising a number of blades or ⁇ point clouds included if more than blade point included t- 1 The number of cloud blocks, if not, then step S260 is performed, and if yes, step S280 is performed;
  • S310 classify data points in the cloud frame to be segmented according to information of the blade point cloud block and the branch point cloud block in the adjacent point cloud frame of the point cloud frame to be segmented and the flatness feature of the data point of the point cloud frame to be segmented For blade points or branches;
  • i is the data point adjacent to ⁇ in / ⁇ ;
  • E(fs) ⁇ ptESpD p t (f s (pt)) + ⁇ pt ,qt eNst ⁇ ⁇ ⁇ ( ( ⁇ , ( ⁇ ))
  • i is the data point adjacent to ⁇ in the SP
  • is a neighborhood system formed by Delaunay triangulation of the SP and removing edges larger than the threshold ⁇ ; the definition of V pW ( ) is the same as the definition of ⁇ ( ) above, fsW)) indicates the cost of classifying adjacent data points ⁇ and ⁇ as f ⁇ pt ⁇ pf ⁇ qt).
  • the first point cloud frame is used as the point cloud frame to be segmented, and step S140 may divide the point cloud in the first point cloud frame 1 into leaf point clouds and branches according to steps S410, S420, S320 and S330.
  • a scheduling module for, after a first point cloud point cloud frame to frame F 2 sequentially takes in the order corresponding to the growth time of plants ⁇ 7 (2 tn), 7 ⁇ as the cloud point to be segmented frames, F f
  • the first point cloud frame t- 1 is transmitted as an adjacent point cloud frame of the point cloud frame to be transmitted to the point cloud segmentation module and the point cloud segmentation module is started;
  • the point cloud segmentation module is configured to be adjacent to the cloud frame to be segmented according to the point cloud
  • the information of the blade point cloud block and the branch point cloud block in the point cloud frame and the flatness feature of the data point of the point cloud frame to be segmented divide the point cloud in the point cloud frame to be segmented into a blade point cloud block and a branch point cloud block;
  • the backtracking control module is configured to sequentially take (lj tl ) in the reverse order of the corresponding plant growth time in t- 1 to, and use ⁇ as the cloud frame to be segmented, and the last cloud frame as the cloud frame to be segmented
  • the adjacent point cloud frame is transmitted to the point cloud segmentation module and the point cloud segmentation module is started to re-segment the point cloud in the preceding point cloud frame until the leaf point cloud block and the branch point of the re-segmented point cloud frame F j If the number of cloud blocks does not increase, the point cloud segmentation module is stopped and the scheduling module is notified to schedule the point cloud segmentation module to divide the point cloud in the next point cloud frame t+1 into leaf point cloud blocks and branch point clouds. Piece.
  • the point cloud segmentation module includes: a data point classification module, configured to: according to the information of the blade point cloud block and the branch point cloud block in the adjacent point cloud frame of the point cloud frame to be segmented, and the flatness feature of the data point of the point cloud frame to be segmented, the point cloud frame to be segmented The data points in the data are classified into blade points or branch points;
  • the clustering node aggregation module establishes a minimum spanning tree of the branch points in the cloud frame to be segmented, and divides the minimum spanning tree into independent branches that do not include the forked branches, and the branch points in the cloud frame to be split Mapping to each independent branch to form each branch point cloud block, an independent branch corresponding to a branch point cloud block; an independent organ point cloud block extraction module, configured to find each point cloud frame to be segmented and adjacent point cloud frame A point cloud block corresponding to a blade point cloud block and a branch point cloud block having the largest overlap with the data point, and marking the corresponding point cloud block, and extracting the number of times to be marked in the cloud frame to be segmented and the adjacent point cloud frame is less than 2 Blade point cloud block and branch point cloud block;
  • a branch point cloud cloud segmentation module configured to classify the branch points in the point cloud frame to be segmented into corresponding categories of the extracted branch point cloud blocks, and form the branch points belonging to the same category to be segmented A branch point cloud block in a point cloud frame.
  • the collection of plant organ data point categories is ⁇ L, S ⁇ , where L represents the blade point category, S represents the branch point category, / ⁇ is mapped to
  • the classification function of the set ⁇ L, S ⁇ , the purpose is as follows:
  • ⁇ ⁇ is based on a neighborhood system formed by performing Delaunay triangulation and removing edges larger than the threshold ⁇ ;
  • the corresponding categories of the extracted blade point cloud blocks are respectively ⁇ 2 , ⁇ , / ⁇ is the set of blade points in the cloud frame to be segmented, and the LP is mapped to Leaf classification function of ⁇ 1 ⁇ 1 ⁇ , ⁇ ,! ⁇ ;
  • ( 2 ) i is the data point adjacent to ⁇ in the SP;
  • N ⁇ ⁇ is a Delaunay triangulation of the SP and removes the neighborhood formed by the edge larger than the threshold ⁇ ;
  • V pW ( ) has the same definition as above)
  • f qt)) represents the cost of classifying adjacent data points ⁇ and ⁇ as f s (pt) and f s (qt).
  • the calculation of Z) pt (L) and /) pt (S) applies to the case of
  • 0 and
  • 0.
  • the method and system for segmenting a plant organ point cloud obtains a point cloud frame corresponding to a plurality of plant growth times of the monitored plant, and divides the acquired point cloud frame according to a previous adjacent point of the cloud frame to be segmented
  • the information of the blade point block and the branch point cloud block in the cloud frame and the flatness feature of the data point of the point cloud frame to be segmented, and the point cloud of the point cloud frame to be segmented is divided into a leaf point block and a branch point cloud block, adjacent to each other
  • the point cloud frame is used as a reference to segment the point cloud frame, which is beneficial to the segmented organ maintaining temporal and spatial consistency between adjacent point cloud frames, and improving the accuracy of plant organ segmentation.
  • the point cloud in the point cloud frame in front of the point cloud block to be segmented is backtracked back to the blade point cloud of the re-segmented point cloud frame.
  • the number of block and branch point cloud blocks is not increased.
  • FIG. 1 is a schematic flow chart of a method for segmenting a plant organ point cloud in an embodiment
  • step S310 of FIG. 3 is a schematic flow chart of step S310 of FIG. 3 in an embodiment
  • FIG. 5 is a schematic diagram of extracting an independent blade point cloud in a point cloud frame to be divided and an adjacent point cloud frame in one embodiment
  • FIG. 8 is a schematic structural diagram of a data point classification module in an embodiment.
  • dividing the point cloud in a point cloud frame (2 t n ) into a leaf point cloud block and a branch point cloud block in step S 160 includes the following steps S220 ⁇ S280:
  • S220 According to the information of the blade point cloud block and the branch point cloud block in the previous point cloud frame 1 and The flatness feature of the data points divides the point cloud in ⁇ into a blade point cloud block and a branch point cloud block.
  • S280 Backtracking and re-segmenting the point cloud in the preceding point cloud frame in turn, until the number of the blade point cloud block and the branch point cloud block of the re-segmented point cloud frame does not increase, then stopping the backtracking and entering the The point cloud in the next point cloud frame t+ 1 is divided into the steps of the blade point cloud block and the branch point cloud block.
  • Re-segmenting the point cloud in the previous one of the point cloud frames (K j ⁇ t-1 ) in step S280 includes step S282: the information of the blade point cloud block and the branch point cloud block in the latter point cloud frame according to ⁇ and the data The flatness feature of the point divides the point cloud in ⁇ into a blade point cloud block and a branch point cloud block.
  • the above-described step S220 is referred to as a frame to be segmented point cloud
  • t- 1 frame is referred to be adjacent to the point cloud point cloud is divided frame
  • the above-described step S282 is ⁇ referred to as a frame to be segmented point cloud
  • the adjacent point cloud frame of the point cloud frame to be divided wherein the information about the blade point cloud block and the branch point cloud block in the adjacent point cloud frame according to the cloud frame to be segmented and the data point of the point cloud frame to be segmented are
  • the flatness characteristic step of dividing the point cloud in the point cloud frame to be the blade point cloud block and the branch point cloud block includes the following steps S310 ⁇ S360, as shown in FIG. 3:
  • S310 classify data points in the cloud frame to be segmented according to information of the blade point cloud block and the branch point cloud block in the adjacent point cloud frame of the point cloud frame to be segmented and the flatness feature of the data point of the point cloud frame to be segmented For blade points or branches.
  • 2 and 3 are the eigenvalues obtained by principal component analysis of the neighborhood points, ⁇ ⁇ ⁇ 2 3. ⁇ 1 ⁇ ⁇ 3 ;
  • step S220 can perform accurate organ segmentation on the point cloud of the mature plant. Further, based on the accurate organ segmentation of the point cloud of the mature plant, step S282 can improve the organ segmentation of the plant point cloud at the early stage of development when the organ is further segmented back to the point cloud of the early developmental plant. Sex.
  • ( 2 ) i is a data point adjacent to ⁇ in / ⁇ ;
  • the curvature characteristics of the data points are strongly correlated with the adjacent areas of the organs: the data points at the abutment of the organs usually have a large curvature.
  • the above-mentioned data points of different types of organs adjacent to different types of organs are divided into different categories, and the data points adjacent to different types of organs can be divided into different categories, and adjacent ones belonging to the same organ.
  • Data points are divided into different categories of costs Larger, thus ensuring the smoothness of the classification.
  • the above target energy function is a typical Markov Random Fields problem, which can be approximated using a graph cut algorithm.
  • S420 classify the data points in the point cloud frame to be segmented into blade points or branch points according to the obtained classification function.
  • the classification function that minimizes the target energy function maps a certain data point in the point cloud frame to be mapped to L
  • the data point is classified into a blade point
  • the classification function maps the data point to S
  • the data point is classified as a branch point.
  • S320 Aggregate the blade points that are connected in the cloud frame to be segmented to form a blade point cloud block.
  • S330 Establish a minimum spanning tree of the branch points in the point cloud frame to be split, divide the minimum spanning tree into independent branches that do not include the forked branches, and map the branch points in the point cloud frame to be split to the independent branches. , forming each branch cloud block, an independent branch corresponding to a branch point cloud block.
  • S330 can establish a minimum spanning tree according to the remaining sampling points.
  • the node with the degree greater than 2 in the minimum spanning tree may be deleted, so that the branch of the minimum spanning tree is disconnected at the deleted node, thereby generating an independent branch that does not include the forked branch. Further, independent branches shorter than the threshold can be deleted.
  • blade point cloud blocks with a degree of entry greater than or equal to 2 are S3 and S5, and S3 and S5 are deleted, and the remaining S1, S2, S4, S6, and S7 are left.
  • the remaining blade point clouds contain a single, independent blade.
  • S350 classify the blade points in the point cloud frame to be segmented into categories corresponding to the extracted blade point cloud blocks, and form leaf points belonging to the same category to form one blade point cloud block in the point cloud frame to be segmented.
  • the distance between the blade point and the blade point cloud block is the distance between the blade point and the nearest data point in the blade point cloud block.
  • the corresponding categories of the extracted leaf point cloud blocks are respectively ⁇ , ,..., / ⁇
  • LP is a set of blade points in the cloud frame to be segmented, and LP is mapped to ⁇ , L 2 Leaf classification function of , ..., L m ⁇ ;
  • Step S350 the step of classifying the blade points in the point cloud frame to be segmented onto the corresponding category corresponding to each blade point cloud block is: solving a blade point classification function f that minimizes the following leaf classification cost function ⁇ ( ⁇ ) L ( ), the blade points in the point cloud frame to be segmented are classified according to the obtained blade point classification function f L ( ) to the corresponding categories of the extracted leaf point cloud blocks:
  • Dp t (fi pt)) represents the cost of classifying blade points to fi pt
  • d(pt, f L (pt)) represents the distance from the nearest point in the target pt to the target block ACpt);
  • V pW ( ) represents the cost of classifying adjacent data points ⁇ and ⁇ as f L (pt) and f L (qt).
  • SP is the set of branch points in the point cloud frame to be split
  • f s ⁇ is the classification function to which the SP is mapped.
  • ⁇ ⁇ ( sCpt) represents the cost of classifying the branch point pt
  • 0 ) is the orientation information of ⁇
  • o(pt) (x, y, z), where x, y, and z are the neighborhood points of the pair
  • the diagonal element of the feature vector matrix obtained by principal component analysis is the average value of the orientation information of all the branch points in the branch point cloud block corresponding to sCpt)
  • is a preset distance threshold
  • T is a preset Punish 3 ⁇ 4, dC sC)) is the distance between pt and the corresponding branch point cloud block;
  • the distance between the data point and the point cloud block refers to the distance between the data point and the closest data point in the point cloud block.
  • the method for segmenting the point cloud of the plant organ obtains a point cloud frame corresponding to a plurality of plant growth times of the monitored plant, and divides the acquired point cloud frame according to the previous adjacent point cloud frame of the cloud frame to be segmented
  • the information of the mid-blade point block and the branch point cloud block and the flatness feature of the data point of the point cloud frame to be segmented, and the point cloud of the point cloud frame to be segmented is divided into a leaf point block and a branch point cloud block, and the adjacent point cloud
  • the frame is used as a reference to segment the point cloud frame, which helps the segmented organ to maintain temporal and spatial consistency between adjacent point cloud frames, and improves the accuracy of plant organ segmentation.
  • a segmentation system for a plant organ point cloud includes the following point cloud frame acquisition module 10, a first point cloud frame segmentation module 20, a scheduling module 30, a point cloud segmentation module 40, a determination module 50, and a backtracking control.
  • Module 60 wherein:
  • a first frame point cloud for the first segmentation module 20 according to a first feature point flatness of a cloud of data points in frame F
  • the point cloud in a little cloud frame 1 is divided into a blade point cloud block and a branch point cloud block.
  • the processing of the first point cloud frame segmentation module 20 is explained below.
  • the scheduling module 30 is configured to take F f (2 tn) in the order of the corresponding plant growth time in the point cloud frame 2 to " after the first point cloud frame, and use ⁇ 7 as the point cloud frame to be divided, F The first point cloud frame t- 1 of f is transmitted as an adjacent point cloud frame of the point cloud frame to be divided to the point cloud segmentation module and the point cloud segmentation module is started.
  • the point cloud segmentation module 40 is configured to divide the cloud frame to be segmented according to the information of the blade point cloud block and the branch point cloud block in the adjacent point cloud frame of the point cloud frame to be segmented and the flatness feature of the data point of the point cloud frame to be segmented.
  • the point cloud in the middle is divided into a blade point cloud block and a branch point cloud block.
  • the backtracking control module 60 is configured to sequentially take (lj tl ) in the reverse order of the corresponding plant growth time in f ⁇ -1 to , and use the ⁇ as the point cloud frame to be segmented as the point cloud to be segmented.
  • the point cloud segmentation module 40 includes a data point classification module 401, a blade point cloud block aggregation module 402, a branch point cloud block aggregation module 403, an independent organ point cloud block extraction module 404, and a blade point cloud block re-segmentation.
  • Module 405 and branch point cloud block re-segmentation module 406 wherein:
  • the data point classification module 401 includes the following classification function.
  • the solving unit 411 is configured to solve a classification function that minimizes the target energy function, the target energy function is a function about the classification function, and the function value represents a classification cost, and the classification function classifies the data points of the point cloud frame to be segmented into blades.
  • the classification function for points and branches.
  • the collection of plant organ data point categories is ⁇ L, S ⁇ , where L represents the blade point category, S represents the branch point category, / ⁇ is mapped to
  • the classification function of the set ⁇ L, S ⁇ , ie, / ⁇ is a classification function that classifies the data points of the point cloud frame to be segmented into leaf points and branch points
  • the target energy function is as follows: p t EP t p t ,q t eN pt
  • ⁇ Z ⁇ ⁇ is the set of blade point cloud blocks in the adjacent point cloud frame
  • is the number of ⁇ ⁇ elements
  • / ⁇ is the blade point cloud block closest to the distance in ⁇ L t ⁇
  • ?(/ ⁇ ) is the average of the flatness features of the data points in / ⁇
  • ⁇ S s ⁇ is the set of the branch cloud blocks in the adjacent point cloud frames
  • is the ⁇ S s ⁇ element
  • S s is the branch point cloud block closest to the distance in ⁇ S s ⁇
  • 1 (5 ⁇ ) is the average of the flatness characteristics of the data points in *.
  • the point cloud segmentation module 40 when retrospectively re-organizing the point cloud of the early development plant, according to the next neighbor of the cloud frame to be segmented
  • the information of the blade point cloud block and the branch point cloud block in the point cloud frame and the flatness feature of the data point of the point cloud frame to be segmented divide the point cloud in the point cloud frame to be segmented into a blade point cloud block and a branch point cloud block.
  • (2) i is a data point adjacent to ⁇ in / ⁇ ;
  • ⁇ ⁇ is based on the pair Delaunay triangulates and removes the neighborhood formed by the edges larger than the threshold ⁇ ; in one embodiment,
  • the above target energy function is a typical Markov Random Fields problem, which can be approximated using a graph cut algorithm.
  • the classification unit 421 is configured to classify the data points in the point cloud frame to be segmented into the blade points or the branch points according to the obtained classification function.
  • the blade point cloud block aggregation module 402 is configured to aggregate the blade points that are connected in the point cloud frame to be segmented to form a blade point cloud block.
  • the branch point cloud block aggregation module 403 may perform preset processing on the branch points in the segmentation point cloud frame before establishing the minimum spanning tree of the branch points in the point cloud frame to be segmented. Specifically, sampling a predetermined proportion (for example, 10%) of the branch points in the cloud frame to be segmented to obtain a sampling point, and projecting the sampling point to the sampling point adjacent data. Center the point to gather the sample points onto the stem centerline and screen out one of the two sample points with a distance less than the preset value. The branch point cloud block aggregation module 403 can establish a minimum spanning tree according to the remaining sample points.
  • a predetermined proportion for example, 10%
  • the independent organ point cloud block extraction module 404 is configured to search for a point cloud block corresponding to each of the blade point cloud block and the branch point cloud block in the to-be-divided point cloud frame and the adjacent point cloud frame, and mark the same
  • the corresponding point cloud block extracts the leaf point cloud block and the branch point cloud block whose number of times of marking is less than 2 in the point cloud frame to be divided and the adjacent point cloud frame.
  • the point cloud frame to be divided and the adjacent point cloud frame include point blade point cloud blocks S l, S2, S3, S4, S5, S6, and S7.
  • the blade point cloud block with the highest degree of overlap with SI is S5
  • the independent organ point cloud block extraction module 404 can mark an edge from S1 to S5
  • the blade point cloud with the highest degree of overlap with S2 is also S5
  • the cloud block extraction module 404 can mark an edge from S2 to S5
  • the blade point cloud block with the highest degree of overlap with S5 is also S 1
  • the independent organ point cloud block extraction module 404 can mark an edge from S5 to S1. And so on to mark other blade point clouds.
  • blade point cloud with a degree of entry greater than or equal to 2 is S3 and S5, and S3 and S5 are deleted, and the remaining Sl, S2, S4, S6 and S7 are left.
  • the remaining blade point clouds contain a single, independent blade.
  • the blade point cloud block re-segmentation module 405 is configured to classify the blade points in the point cloud frame to be segmented into categories corresponding to the extracted leaf point cloud blocks, and configure the blade points belonging to the same category to form a point cloud frame to be segmented.
  • Dpt(fi pt)) represents the cost of classifying the blade point pt to fi pt), indicating the distance from the nearest point in the target pt to the target block ACpt);
  • i is the data point adjacent to ⁇ in / ⁇ ;
  • V pW ( ) represents the cost of classifying adjacent data points ⁇ and ⁇ as f L (pt) and f L (qt).
  • the branch point cloud block re-segmentation module 406 is configured to classify the branch points in the point cloud frame to be segmented into corresponding categories of the extracted branch point cloud blocks, and form the branch points belonging to the same category to be segmented.
  • the corresponding categories of the respective cloud point cloud blocks extracted by the independent organ point cloud block extraction module 404 are S 2 , . . . , S vigorous , and SP is a set of branch points in the cloud frame to be segmented.
  • f s ⁇ is the classification function to which the SP is mapped,
  • the branch point cloud block re-segmentation module 406 is configured to solve the branch point classification function that minimizes the following branch classification cost function ⁇ ( ), and the branch points in the point cloud frame to be segmented according to the solution
  • the classification function is classified into the categories corresponding to the extracted branch cloud blocks:
  • 0 (pt) ( X , y, Z), where X, y, and Z are the diagonal elements of the eigenvector matrix obtained by principal component analysis of the neighborhood points of ⁇ , which are the corresponding sCpt)
  • is the preset distance threshold,: is the preset penalty, dC sO ) is the distance between pt and the corresponding branch point cloud block;
  • i is the data point adjacent to ⁇ in the SP
  • the point cloud in the point cloud frame in front of the point cloud block to be segmented is backtracked back to the blade point cloud of the re-segmented point cloud frame.
  • the number of block and branch point cloud blocks is not increased.

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Multimedia (AREA)
  • Probability & Statistics with Applications (AREA)
  • Software Systems (AREA)
  • General Health & Medical Sciences (AREA)
  • Health & Medical Sciences (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Image Processing (AREA)
  • Testing And Monitoring For Control Systems (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

一种植物器官点云的分割方法和系统,根据待分割点云帧的前一相邻点云帧中叶片点块和枝干点云块的信息以及待分割点云帧的数据点的平坦性特征,将待分割点云帧的点云分割为叶片点块和枝干点云块,以相邻点云帧作为参照对点云帧进行分割,有利于分割出的器官在相邻点云帧之间保持时空一致性,提高植物器官分割的准确性。当发现新的叶片点云块或枝干点云块时,往前回溯重新分割待分割点云块前面的点云帧中的点云,重新分割时根据后一相邻点云帧中的叶片点云块和枝干点云块的信息分割待重新分割的点云帧,回溯过程中的重新分割有利于在点云帧中提取出新的在前面的分割过程中未被发现的叶片点云块或枝干点云块,从而进一步提高植物器官分割的准确性。

Description

说明书 发明名称: 植物器官点云的分割方法和系统
【技术领域】
本发明涉及点云处理领域, 特别涉及一种植物器官点云的分割方法和系统。 【背景技术】
为了监测了量化植物生长事件, 例如植物器官(例如枝干、 叶片等) 的出 现和凋零等事件, 需在植物的整个生命周期不断的获取植物的四维点云, 并将 四维点云按照植物器官进行分割, 以得到各个植物器官的状态数据, 进而对各 个植物器官进行量化分析。
传统的方法根据植物的几何结构(例如叶片的卷曲结构)、 体积以及拓朴结 构 (例如枝干分支结构)等对植物点云进行分割, 以求将植物点云分割为各个 独立的植物器官。
但是, 植物在其生命周期内不但緩慢而持续地生长或衰败, 而且还可能因 为寻求更有利的生存环境等原因而不停地运动, 因此, 植物的几何结构、 体积 以及拓朴结构都会发生巨大的变化。 从而, 传统的方法在对植物点云按照植物 器官进行分割时存在误差。
【发明内容】
基于此, 有必要提供一种能提高分割准确性的植物器官点云的分割方法和 系统 。
一种植物器官点云的分割方法, 包括以下步骤 S120 ~ S160:
S 120: 获取被监测植物的多个植物生长时间对应的点云帧, 按照对应的植 物生长时间的先后顺序记获取的多个点云帧为 F1 , .·· , Ft , . , Fn;
S 140: 根据第一点云帧 1中数据点的平坦性特征将第一点云帧 中的点云 分割为叶片点云块和枝干点云块;
S 160: 按照对应的植物生长时间的先后顺序依次将第一点云帧之后的点云 帧 至 ^中的点云分割为叶片点云块和枝干点云块,其中,将某一个点云帧 2 < t < n ) 中的点云分割为叶片点云块和枝干点云块包括以下步骤 S220 ~ S280:
S220: 根据 的前一点云帧 1中叶片点云块和枝干点云块的信息以及 的数据点的平坦性特征将^中的点云分割为叶片点云块和枝干点云块;
S240: 判断 Ff所包含的枝干点云块数量是否多于 Ff- 1所包含的枝干点云块 数量或者^所包含的叶片点云块数量是否多于 t- 1包含的叶片点云块数量, 若 否, 则执行步骤 S260, 若是, 则执行步骤 S280;
S260: 当 t < n时则进入到将^的下一个点云帧 t+1 中的点云分割为叶片点 云块和枝干点云块的步骤, 当 t=n时结束;
S280: 往前回溯依次重新分割 1前面的点云帧中的点云, 直到重新分割后 的点云帧的叶片点云块和枝干点云块的数量没有增加, 则停止回溯并进入到将 ^的下一个点云帧 t+1 中的点云分割为叶片点云块和枝干点云块的步骤, 其中, 重新分割 ^7前面的某一个点云帧 ( Kj < t-1 ) 中的点云包括以下步骤:
S282: 根据 的后一点云帧 1中叶片点云块和枝干点云块的信息以及 的数据点的平坦性特征将 ^中的点云分割为叶片点云块和枝干点云块。
在其中一个实施例中, 将上述步骤 S220中的 记为待分割点云帧、 t-1记 为待分割点云帧的相邻点云帧,上述步骤 S282中的 记为待分割点云帧、 记 为待分割点云帧的相邻点云帧, 则
上述根据待分割点云帧的相邻点云帧中叶片点云块和枝干点云块的信息以 及待分割点云帧的数据点的平坦性特征将待分割点云帧中的点云分割为叶片点 云块和枝干点云块的步骤包括以下步骤 S310 ~ S360:
S310: 根据待分割点云帧的相邻点云帧中叶片点云块和枝干点云块的信息 以及待分割点云帧的数据点的平坦性特征将待分割点云帧中的数据点分类为叶 片点或枝干点;
S320: 聚合待分割点云帧中连通的叶片点构成叶片点云块;
S330: 建立待分割点云帧中枝干点的最小生成树, 将最小生成树分割成不 包含分叉枝干的独立分支, 将待分割点云帧中的枝干点映射到各独立分支上, 形成各个枝干点云块, 一个独立分支对应一个枝干点云块; S340: 查找待分割点云帧和相邻点云帧中每一个叶片点云块和枝干点云块 对应的与自身重叠数据点最多的点云块, 并标记该对应的点云块, 提取待分割 点云帧和相邻点云帧中被标记次数小于 2的叶片点云块和枝干点云块;
S350: 将待分割点云帧中的所述叶片点分类到提取的各个叶片点云块对应 的类别上, 将属于同一类别的叶片点构成待分割点云帧中的一个叶片点云块;
S360: 将待分割点云帧中的所述枝干点分类到提取的各个枝干点云块对应 的类别上, 将属于同一类别的枝干点构成待分割点云帧中的一个枝干点云块。
在其中一个实施例中, 步骤 S310包括以下步骤:
S410: 求解使得目标能量函数达到最小的分类函数, 该目标能量函数为关 于分类函数的函数, 其函数值表示分类代价, 该分类函数为将待分割点云帧的 数据点分类为叶片点和枝干点的分类函数;
记待分割点云帧中数据点集合为 /^ = { }, 植物器官数据点类别集合为 {L,S},其中 L代表叶片点类别、 S代表枝干点类别, /β为将 映射到集合 {L,S} 的 分类函数, 所述目标能量函数如下:
E(b) = Z Dpt { P')) + Z vPw fB(p ,fB qt ptEPt pt,qteNpt
其巾:
( 1 ) ζ (/β(ρ 表示将 数据点分类为 fiCpt)的代价,
[max (?(pf)― D,o) 若 | }|≠ 0且 |{Ss}|≠o
Rip - 若 | }|= 0|或 |{Ss }| = o o
0
Figure imgf000005_0001
z)pt(/ 即为 ^( )= 的代价, z)pt(S)即为 ^( ) = S的代价, ?( )为 ^的平坦性特征, R( jt) = log (max (C(pf),c£)), c£为预设的大于 0而小于 1/3的常量, ( )为^的曲率特征, Cip^ ^ +λ23),其中 2和 3是对 的邻域点进行主成份分析得到的特征值, λ ≤ λ23.λ1≤ λ3;
{ }为相邻点云帧中叶片点云块的集合, |{ }|为 { }元素的个数, /^为 {Lt }中与 距离最近的叶片点云块, ?(/^)为/^中的数据点的平坦性特征的平均 值; {Ss }为相邻点云帧中枝干点云块的集合, |{SS }|为 {Ss }元素的个数, Ss*为 {Ss }中与 距离最近的枝干点云块, 1(55*)为 *中的数据点的平坦性特征的平 均值;
¾L = l g(c£), = log (^j;
(2) 为 中与 相邻的数据点;
NPt = {(pt,qt)} = {(p qt) e DelaunayCpt): \p" - q'l < £^^是基于对 /^进 行 Delaunay三角剖分并去除大于阈值 ε的边形成的邻域系; 表示将相邻的数据点 ^和^分类为 和 fiO )的代 价, τ, " , t、 " t、、 )
Figure imgf000006_0001
) 其中, (p E Npt, "( )为^的曲率特征, C(qt)为 qt的曲率特征; S420: 将待分割点云帧中的数据点按照求解得到的分类函数分类为叶片点 或枝干点。
在其中一个实施例中, 记所述提取的各个叶片点云块的对应类别分别为 L , L2> -, Lm , LP为待分割点云帧中的叶片点集合, /L〇为将 LP映射到 { , L2,…, Lm}的叶片分类函数;
步骤 S350将待分割点云帧中的所述叶片点分类到提取的各个叶片点云块对 应的类别上的步骤为: 求解使得如下叶片分类代价函数 Ε(Λ)达到最小的叶片点 分类函数 fL ( ) ,将待分割点云帧中的叶片点按照求解得到的叶片点分类函数分类 到提取的各个叶片点云块对应的类别上:
Ε(Α)
Figure imgf000006_0002
Dpt (Α(ρ ) +∑PW NLt νρΑ (ρ
其巾:
( 1 )
Dpt(fL(pt))表示将叶片点 pt分类到 fL(pt)的代价, ίίΟ^,ΛΟ^))表示数据点 到目标分块/ pt)中最近点的距离; (2)
i 为/^中与 ^相邻的数据点;
于对 LP进行 Delaunay三角剖分并去除大于阈值 ε的边形成的邻域系; VpW( )的定义与上述 )的定义相同,
Figure imgf000007_0001
表示将相 邻的数据点 和£^分类为 fL(pt)和 fL(qt)的代价。
在一个其中实施例中, 记所述提取的各个技干点云块的对应类别分别为
S1,S2,-,Sn, SP为待分割点云帧中的枝干点集合, fs()为将 SP映射到 的枝干分类函数,
步骤 S360将待分割点云帧中的所述枝干点分类到提取的各个枝干点云块对 应的类别上的步骤为: 求解使得如下枝干分类代价函数 E (fs)达到最小的枝干点 分类函数 〇,将待分割点云帧中的枝干点按照求解得到的枝干点分类函数 /s( ) 分类到提取的各个枝干点云块对应的类别上:
E(fs) =∑ptESpDpt (fs(pt)) +∑pt,qteNst νρ ιί( (ρ , (^))
Figure imgf000007_0002
若 d(pt , ρ ≥ A 表示将枝干点 pt分类到 < )的代价, o(pt)为^的朝向信息, o(pt) = (x,y,z), 其中 x、 y和 z是对 的邻域点进行主成份分析得到的特征向量 矩阵的对角元素, 0(¾( );)为 5( )对应的枝干点云块中所有枝干点的朝向信息 的平均值, Δ为预设的距离阈值,: T为预设的惩 ¾项, dC C))为 pt与 ^( )对 应的枝干点云块的距离; (2)
i 为 SP中与 ^相邻的数据点;
^于对 SP进行 Delaunay三角剖分并去除大于阈值 ε的边形成的邻域系; VpW( )的定义与上述^ ( )的定义相同,
Figure imgf000007_0003
fsW))表示将相 邻的数据点 ^和^分类为 f^pt^pf^qt)的代价。 在其中一个实施例中, 将第一点云帧 作为待分割点云帧, 步骤 S140可按 照步骤 S410、 S420、 S320和 S330将第一点云帧 1中的点云分割为叶片点云块 和枝干点云块,计算过程中, Z)pt(L)和 Z)pt(S)的计算适用 |{ }| = 0和 |{SS }| = 0 的情况。 一种植物器官点云的分割系统, 包括:
点云帧获取模块, 用于获取被监测植物的多个植物生长时间对应的点云帧, 按照对应的植物生长时间的先后顺序记获取的多个点云帧为 1, .."ft, ...,Fn; 第一点云帧分割模块, 用于根据第一点云帧 中数据点的平坦性特征将第 一点云帧 中的点云分割为叶片点云块和枝干点云块;
调度模块, 用于在第一点云帧之后的点云帧 F2至 按照对应的植物生长 时间的先后顺序依次取 ^7 (2 t n), 将 ^7做为待分割点云帧、 Ff的前一点云帧 t- 1做为待分割点云帧的相邻点云帧传递给点云分割模块并启动点云分割模块; 点云分割模块, 用于根据待分割点云帧的相邻点云帧中叶片点云块和枝干 点云块的信息以及待分割点云帧的数据点的平坦性特征将待分割点云帧中的点 云分割为叶片点云块和枝干点云块;
判断模块, 用于在点云分割模块分割Ft后判断 Ff所包含的枝干点云块数量 是否多于 t- 1所包含的枝干点云块数量或者^所包含的叶片点云块数量是否多 于 1包含的叶片点云块数量, 若否, 则当 t<n时, 通知调度模块调度点云分 割模块, 以将^的下一个点云帧 t+1 中的点云分割为叶片点云块和枝干点云块, 当 t=n时结束, 若是, 则调度回溯控制模块;
回溯控制模块, 用于在 t-1至 中按照对应的植物生长时间的倒序顺序依 次取 ( l j t-l ), 将^做为待分割点云帧、 的后一点云帧 做为待分割 点云帧的相邻点云帧传递给点云分割模块并启动点云分割模块, 以重新分割 前面的点云帧中的点云, 直到重新分割后的点云帧 Fj的叶片点云块和枝干点云 块的数量没有增加, 则停止启动点云分割模块并通知调度模块调度点云分割模 块, 以将^的下一个点云帧 t+1 中的点云分割为叶片点云块和枝干点云块。
在其中一个实施例中, 所述点云分割模块包括: 数据点分类模块, 用于根据待分割点云帧的相邻点云帧中叶片点云块和枝 干点云块的信息以及待分割点云帧的数据点的平坦性特征将待分割点云帧中的 数据点分类为叶片点或枝干点;
叶片点云块聚合模块, 用于聚合待分割点云帧中连通的叶片点构成叶片点 云块;
枝干点云块聚合模块, 建立待分割点云帧中枝干点的最小生成树, 将最小 生成树分割成不包含分叉枝干的独立分支, 将待分割点云帧中的枝干点映射到 各独立分支上, 形成各个枝干点云块, 一个独立分支对应一个枝干点云块; 独立器官点云块提取模块, 用于查找待分割点云帧和相邻点云帧中每一个 叶片点云块和枝干点云块对应的与自身重叠数据点最多的点云块, 并标记该对 应的点云块, 提取待分割点云帧和相邻点云帧中被标记次数小于 2 的叶片点云 块和枝干点云块;
叶片点云块重分割模块, 用于将待分割点云帧中的所述叶片点分类到提取 的各个叶片点云块对应的类别上, 将属于同一类别的叶片点构成待分割点云帧 中的一个叶片点云块;
枝干点云块重分割模块, 用于将待分割点云帧中的所述枝干点分类到提取 的各个枝干点云块对应的类别上, 将属于同一类别的枝干点构成待分割点云帧 中的一个枝干点云块。
在其中一个实施例中, 所述数据点分类模块包括:
分类函数求解单元, 用于求解使得目标能量函数达到最小的分类函数, 该 目标能量函数为关于分类函数的函数, 其函数值表示分类代价, 该分类函数为 将待分割点云帧的数据点分类为叶片点和枝干点的分类函数;
记待分割点云帧中数据点集合为 /^ = { }, 植物器官数据点类别集合为 {L, S} ,其中 L代表叶片点类别、 S代表枝干点类别, /β为将 映射到集合 {L, S} 的 分类函数, 所述目 如下:
Figure imgf000009_0001
其中: ( l ) ζ 示将 ^数据点分类为 ^(pt)的代价,
Figure imgf000010_0001
z)pt(/ 即为 ^( )= 的代价, z)pt(S)即为 ^( ) = S的代价, ?( )为 ^的平坦性特征, R(jt) = log (max (C(pf),c£)), c£为预设的大于 0而小于 1/3的常量, ( )为^的曲率特征, Cip^ ^ +λ23),其中 2和 3是对 的邻域点进行主成份分析得到的特征值, λ ≤ λ23.λ1≤ λ3;
{ }为相邻点云帧中叶片点云块的集合, |{ }|为 { }元素的个数, /^为 {Lt }中与 距离最近的叶片点云块, ?(/^)为/^中的数据点的平坦性特征的平均 值; {Ss }为相邻点云帧中枝干点云块的集合, |{SS }|为 {Ss }元素的个数, Ss为 {Ss }中与 距离最近的枝干点云块, 1 (5^)为 *中的数据点的平坦性特征的平 均值;
¾L = log{cE), = log ); (2) ^为 中与^相邻的数据点;
NPt = Kp qt)} = Kp q e Delaunay(pt): |pt - qt| < ε}是基于对 进行 Delaunay三角剖分并去除大于阈值 ε的边形成的邻域系;
表示将相邻的数据点 ^和^分类为 ^( )和^(^)的代 价,
Figure imgf000010_0002
) 其中, ( t'qt) Ε Npt, ( )为^的曲率特征, C(qt)为 qt的曲率特征; 分类单元, 用于将待分割点云帧中的数据点按照求解得到的分类函数分类 为叶片点或枝干点。
在其中一个实施例中, 记所述提取的各个叶片点云块的对应类别分别为 ί^2,·Ά, /^为待分割点云帧中的叶片点集合, 〇为将 LP映射到 {1^1^,···,!^}的叶片分类函数;
叶片点云块重分割模块用于求解使得如下叶片分类代价函数 £( )达到最小 的叶片点分类函数 fL ( ) ,将待分割点云帧中的叶片点按照求解得到的叶片点分类 函数 ( )分类到提取的各个叶片点云块对应的类别上:
E(A) =∑ptELP Dpt (Α(ρ ) +∑PW NLt Vpt ^{ρ' , f^q' )
其巾:
( 1 )
Dpt(fi pt))表示将叶片点 分类到 fi pt)的代价, d(pt,fL(pt))表示婦 pt 到目标分块 Α(^)中最近点的距离; (2)
i 为/^中与 ^相邻的数据点;
Ν^ ^于对 LP进行 Delaunay三角剖分并去除大于阈值 ε的边形成的邻域系; VpW( )的定义与上述 )的定义相同,
Figure imgf000011_0001
表示将相 邻的数据点 ^和^分类为 fL(pt)和 fL(qt)的代价。
在其中一个实施例中, 记所述提取的各个枝干点云块的对应类别分别为
SP为待分割点云帧中的枝干点集合, fs〇为将 SP映射到 的枝干分类函数,
枝干点云块重分割模块用于求解使得如下枝干分类代价函数 £( ^)达到最小 的枝干点分类函数 s ( ) ,将待分割点云帧中的枝干点按照求解得到的枝干点分类 函数 s ( )分类到提取的各个枝干点云块对应的类别上: 其中. Ρ Ρ pWENst
( 1 )
D fs(P )} = ir 若 ≥ A ^( sCpt))表示将枝干点 pt分类到 的代价, 0 )为^的朝向信息, o(pt) = (x, y, z) , 其中 x、 y和 z是对 的邻域点进行主成份分析得到的特征向量 矩阵的对角元素, 为 sCpt)对应的枝干点云块中所有枝干点的朝向信息 的平均值, Δ为预设的距离阈值,: T为预设的惩 ¾项, dC sC))为 pt与 对 应的枝干点云块的距离;
( 2 ) i 为 SP中与 ^相邻的数据点;
N^ ^于对 SP进行 Delaunay三角剖分并去除大于阈值 ε的边形成的邻域系; VpW ( )的定义与上述 )的定义相同,
Figure imgf000012_0001
f qt))表示将相 邻的数据点 ^和^分类为 fs(pt)和 fs(qt)的代价。
在其中一个实施例中, 第一点云帧分割模块用于将第一点云帧 作为待分 割点云帧, 按照所述分类函数求解单元和分类单元的处理过程将 F1的数据点分 类为叶片点或枝干点, 并按照叶片点云块聚合模块和枝干点云块聚合模块的处 理过程将 中的点云分割为叶片点云块和枝干点云块, 按照所述分类函数求解 单元的处理过程求解分类函数时, Z)pt (L)和/) pt (S)的计算适用 |{ }| = 0和 | {SS } | = 0的情况。
上述植物器官点云的分割方法和系统, 获取被监测植物的多个植物生长时 间对应的点云帧, 并对获取的点云帧中进行分割, 根据待分割点云帧的前一相 邻点云帧中叶片点块和枝干点云块的信息以及待分割点云帧的数据点的平坦性 特征, 将待分割点云帧的点云分割为叶片点块和枝干点云块, 以相邻点云帧作 为参照对点云帧进行分割, 有利于分割出的器官在相邻点云帧之间保持时空一 致性, 提高植物器官分割的准确性。 而且, 当发现新的叶片点云块或枝干点云 块时, 往前回溯重新分割待分割点云块前面的点云帧中的点云, 直到重新分割 后的点云帧的叶片点云块和枝干点云块的数量没有增加为止, 重新分割时根据 发现了新的叶片点云块或枝干点云块的后一相邻点云帧中的叶片点云块和枝干 点云块的信息分割待重新分割的点云帧, 回溯过程中的重新分割有利于在点云 帧中提取出新的在前面的分割过程中未被发现的叶片点云块或枝干点云块, 从 而进一步提高植物器官分割的准确性。
【附图说明】
图 1为一个实施例中植物器官点云的分割方法的流程示意图;
图 2为一个实施例中图 1的步骤 S 160中将某一个点云帧 ^中的点云分割为 叶片点云块和枝干点云块的步骤的流程示意图;
图 3 为一个实施例中根据待分割点云帧的相邻点云帧中叶片点云块和枝干 点云块的信息以及待分割点云帧的数据点的平坦性特征将待分割点云帧中的点 云分割为叶片点云块和枝干点云块的步骤的流程示意图;
图 4为一个实施例中图 3的步骤 S310的流程示意图;
图 5 为一个实施例中在待分割点云帧和相邻点云帧中提取独立叶片点云的 示意图;
图 6为一个实施例中植物器官点云的分割系统的结构示意图;
图 7为一个实施例中点云分割模块的结构示意图;
图 8为一个实施例中数据点分类模块的结构示意图。
【具体实施方式】
如图 1所示, 一种植物器官点云的分割方法, 包括以下步骤 S 120 S160:
S 120: 获取被监测植物的多个植物生长时间对应的点云帧, 按照对应的植 物生长时间的先后顺序记获取的多个点云帧为 F1 , .·· , Ft , Fn
S 140: 根据第一点云帧 1中数据点的平坦性特征将第一点云帧 中的点云 分割为叶片点云块和枝干点云块。 步骤 S140的详细过程在下文中说明。
S 160: 按照对应的植物生长时间的先后顺序依次将第一点云帧之后的点云 帧 至^中的点云分割为叶片点云块和枝干点云块。
如图 2所示, 步骤 S 160中将某一个点云帧 ( 2 t n )中的点云分割为叶 片点云块和枝干点云块包括以下步骤 S220 ~ S280:
S220: 根据 的前一点云帧 1中叶片点云块和枝干点云块的信息以及 的数据点的平坦性特征将^中的点云分割为叶片点云块和枝干点云块。
S240: 判断 Ff所包含的枝干点云块数量是否多于 Ff- 1所包含的枝干点云块 数量或者^所包含的叶片点云块数量是否多于 1包含的叶片点云块数量, 若 否, 则执行步骤 S260 , 若是, 则执行步骤 S280。
S260: 当 t < n时则进入到将^的下一个点云帧 t+1 中的点云分割为叶片点 云块和枝干点云块的步骤, 当 t=n时结束。
S280: 往前回溯依次重新分割 1前面的点云帧中的点云, 直到重新分割后 的点云帧的叶片点云块和枝干点云块的数量没有增加, 则停止回溯并进入到将 的下一个点云帧 t+ 1 中的点云分割为叶片点云块和枝干点云块的步骤。
步骤 S280中重新分割 前面的某一个点云帧 ( K j < t-1 ) 中的点云包括 步骤 S282: 根据 ^的后一点云帧 中叶片点云块和枝干点云块的信息以及 的数据点的平坦性特征将 ^中的点云分割为叶片点云块和枝干点云块。
在一个实施例中, 将上述步骤 S220中的 记为待分割点云帧、 t-1记为待 分割点云帧的相邻点云帧, 上述步骤 S282中的 ^记为待分割点云帧、 记为 待分割点云帧的相邻点云帧, 则上述根据待分割点云帧的相邻点云帧中叶片点 云块和枝干点云块的信息以及待分割点云帧的数据点的平坦性特征将待分割点 云帧中的点云分割为叶片点云块和枝干点云块的步骤包括以下步骤 S310 ~ S360 , 如图 3所示:
S310: 根据待分割点云帧的相邻点云帧中叶片点云块和枝干点云块的信息 以及待分割点云帧的数据点的平坦性特征将待分割点云帧中的数据点分类为叶 片点或枝干点。
如图 4所示, 在一个实施例中, 步骤 S310包括以下步骤 S410和 S420: S410: 求解使得目标能量函数达到最小的分类函数, 该目标能量函数为关 于分类函数的函数, 其函数值表示分类代价, 该分类函数为将待分割点云帧的 数据点分类为叶片点和枝干点的分类函数。
记待分割点云帧中数据点集合为 /^ = { }, 植物器官数据点类别集合为
{L, S} ,其中 L代表叶片点类别、 S代表枝干点类别, /β为将 映射到集合 {L, S} 的 分类函数, 即, /β为将待分割点云帧的数据点分类为叶片点和枝干点的分类函 数, 所述目标能量函数如下: ptept pt,qteNpt
其巾:
( 1 ) 表示将 数据点分类为 fiCpt)的代价,
0
0 0
Figure imgf000015_0001
0 z)pt(/ 即为 ^( )= 的代价, z)pt(S)即为 ^( ) = S的代价, ?( )为 ^的平坦性特征, R(jt) = log (max (C(pf),c£)), c£为预设的大于 0而小于 1/3的常量, ( )为^的曲率特征, Cip^ ^ +λ23),其中
2和 3是对 的邻域点进行主成份分析得到的特征值, λ ≤ λ23.λ1≤ λ3;
¾L = i g(c£), = log );
{Z^ }为相邻点云帧中叶片点云块的集合, |{ }|为 { }元素的个数, /^为 {Lt }中与 距离最近的叶片点云块, ?(/^)为/^中的数据点的平坦性特征的平均 值; {Ss }为相邻点云帧中枝干点云块的集合, |{SS }|为 {Ss }元素的个数, Ss为 {Ss }中与 距离最近的枝干点云块, 1 (5^)为 *中的数据点的平坦性特征的平 均值。
由于已发育的叶片通常都比较平坦, 属于已发育叶片的数据点^所对应的 曲率特征 CO 都具有较小的数值, 因此,可以通过 有效地从点云中区分出 枝干和发育的叶片。 分布于 [o, , 然而其数值和点云的平坦性并不线性对 应, 为解决这个问题, 本发明首先将特别接近 0的 上取为一个非 0的常量 c£ (参考值: 0.015)以避免 CO 的数值存在多个数量级的差异, 然后再使用 log 函数将其转化为平坦性特征 定义 = log (max (C(pf),c£)), 并定义 ¾L = Ζθ (ί:ε)以及 s = 则 ? (P 将分布于 [9^,9y。从/? (Ρ 到 9 ^和 s的 距离度量了数据点 被分类为叶片或枝干的代价。 因此,上述公式中,若 K ±:L}| = 0或 |{Ss t±:L}| = 0 ,则 Z)pt(L) = R(pt) — L,
Figure imgf000016_0001
R(pt)。
然而, 植物在生发初期叶片点云特征与枝干点云特征的区分度非常细微, 叶片的平坦性数值可能严重地靠近 Rs从而容易被错误地判断为枝干, 只有发育 成熟的叶片的点云特征与枝干点云特征的区分度才非常明显。 使用全局绝对值 RS和 RL定义的 无法适应于植物器官发育的不同阶段, 为保证精确的 植物器官分类, 需要在数据点分类过程中使用相邻点云帧中点云块的平坦性特 征, 而不是全局绝对值 Rs和 。
因此,上述公式中,若 |{L ≠ 0且 | {S ± :L}|≠ 0 ,则/)^(/ = max (R(pt) - !^1),。), Dpt(S) = max (RCSg1) - R(pt), 0)。
在植物器官发育的初期往往难以准确对其植物器官进行分割, 本发明中, 步骤 S220可以对发育成熟植物的点云进行准确的器官分割。 进一步的, 基于对 发育成熟植物的点云的准确的器官分割, 步骤 S282在往前回溯重新对发育初期 植物的点云进行器官分割时, 即可提高对发育初期植物点云进行器官分割的准 确性。
( 2 ) i 为/^中与 ^相邻的数据点;
NPt = Kpt, qt)} = Kpt, qt) e Delaunay(pt): |pt - qt| < ε}是基于对 进行 Delaunay 三角剖分并去除大于阈值 ε的边形成的邻域系; 在一个实施例中, £=3mm。
表示将相邻的数据点 ^和^分类为 ^( )和^(^)的代 价, )
Figure imgf000016_0002
) 其中, (pt' qt) E Npt , ( )为^的曲率特征, C(qt)为 qt的曲率特征。
数据点的曲率特征和器官邻接区域具有很强的相关性: 在器官邻接处的数 据点通常具有较大的曲率。上述 在不同种类器官邻接处将相 邻的数据点分为不同类别的代价较 d、, 可尽量使得不同种类器官的邻接处的数 据点被分为不同类别, 而将属于相同器官的相邻的数据点分为不同类别的代价 较大, 从而可保证分类的平滑性。
上述目标能量函数是典型的马尔可夫随机场 ( Markov Random Fields )问题, 可以使用图割算法来进行近似求解。
S420: 将待分割点云帧中的数据点按照求解得到的分类函数分类为叶片点 或枝干点。
具体的, 若使得上述目标能量函数达到最小的分类函数将待分割点云帧中 的某一个数据点映射到 L , 则将该数据点分类为叶片点, 若该分类函数将该数据 点映射到 S , 则将该数据点分类为枝干点。
S320: 聚合待分割点云帧中连通的叶片点构成叶片点云块。
S330: 建立待分割点云帧中枝干点的最小生成树, 将最小生成树分割成不 包含分叉枝干的独立分支, 将待分割点云帧中的枝干点映射到各独立分支上, 形成各个枝干点云块, 一个独立分支对应一个枝干点云块。
在建立待分割点云帧中枝干点的最小生成树之前, 可先对待分割点云帧中 的枝干点进行预设处理。 具体的, 采样待分割点云帧中预设比例 (例如 10% ) 的枝干点得到采样点, 将采样点投影到采样点邻近数据点的中心以将采样点聚 拢到枝干中心线上, 筛除距离小于预设值的两个采样点中的一个采样点。 步骤
S330可根据剩余的采样点建立最小生成树。
进一步的, 可将最小生成树中度数大于 2 的节点删除, 使得最小生成树的 枝干在删除的节点处断开, 从而生成不包含分叉枝干的独立分支。 进一步的, 可将短于阈值的独立分支删除。
S340: 查找待分割点云帧和相邻点云帧中每一个叶片点云块和枝干点云块 对应的与自身重叠数据点最多的点云块, 并标记该对应的点云块, 提取待分割 点云帧和相邻点云帧中被标记次数小于 2的叶片点云块和枝干点云块。
在一个实施例中, 可从待分割点云帧和相邻点云帧的每一个叶片点云块出 发, 在两个点云帧中该叶片点云块所在的点云帧外的另一个点云帧中查找与该 点云块重叠程度最高的叶片点云块, 并标记一条从该叶片点云块出发至与之重 叠程度最高的叶片点云块的出边,然后筛除所有入度大于等于 2的叶片点云块。
图 5 为一个实施例中在待分割点云帧和相邻点云帧中提取独立叶片点云的 示意图。如图 5所示,待分割点云帧和相邻点云帧中包含点叶片点云块 Sl、 S2、 S3、 S4、 S5、 S6和 S7。 与 SI重叠程度最高的叶片点云块是 S5, 则标记一条从 S1至 S5的出边, 与 S2重叠程度最高的叶片点云块也是 S5, 则标记一条从 S2 至 S5的出边, 与 S5重叠程度最高的叶片点云块也是 S1, 则标记一条从 S5至 S1的出边, 依次类推标记其它的叶片点云块。 最后, 入度大于等于 2的叶片点 云块为 S3和 S5, 删除 S3和 S5, 剩余 Sl、 S2、 S4、 S6和 S7。 剩余的这些叶片 点云块中都包含单个独立的叶片。
S350: 将待分割点云帧中的所述叶片点分类到提取的各个叶片点云块对应 的类别上, 将属于同一类别的叶片点构成待分割点云帧中的一个叶片点云块。
其中, 叶片点与叶片点云块的距离为叶片点与叶片点云块中最近数据点的 距离。
具体的,记所述提取的各个叶片点云块的对应类别分别为 ^, ,…,/^, LP 为待分割点云帧中的叶片点集合, Λ〇为将 LP映射到 { , L2 ,…, Lm}的叶片分类 函数;
步骤 S350将待分割点云帧中的所述叶片点分类到提取的各个叶片点云块对 应的类别上的步骤为: 求解使得如下叶片分类代价函数 Ε(Λ)达到最小的叶片点 分类函数 fL ( ) ,将待分割点云帧中的叶片点按照求解得到的叶片点分类函数 fL ( ) 分类到提取的各个叶片点云块对应的类别上:
E(A) =∑ptELP Dpt (Α(ρ ) +∑PW NLt Vpt ^{ρ' , f^q' )
其巾:
( 1 )
Dpt(fi pt))表示将叶片点 分类到 fi pt)的代价, d(pt,fL(pt))表示婦 pt 到目标分块 ACpt)中最近点的距离;
(2)
i 为/^中与 ^相邻的数据点;
NLt = Kp qt)} = Kp q e Delaunay(pt): \ρ' -qt\ < £}), NLt是基于对/^ 进行 Delaunay三角剖分并去除大于阈值 ε的边形成的邻域系;
VpW( )的定义与上述 )的定义相同,
Figure imgf000019_0001
表示将相 邻的数据点 ^和^分类为 fL(pt)和 fL(qt)的代价。
S360: 将待分割点云帧中的所述枝干点分类到提取的各个枝干点云块对应 的类别上, 将属于同一类别的枝干点构成待分割点云帧中的一个枝干点云块。
在一个实施例中, 记所述提取的各个枝干点云块的对应类别分别为
SP为待分割点云帧中的枝干点集合, fs〇为将 SP映射到 的分类函数,
步骤 S360将待分割点云帧中的所述枝干点分类到提取的各个枝干点云块对 应的类别上的步骤为: 求解使得如下枝干分类代价函数 E (fs)达到最小的枝干点 分类函数 s( ) ,将待分割点云帧中的枝干点按照求解得到的枝干点分类函数 s( ) 分类到提取的各个枝干点云块对应的类别上:
Dpt (fs(pt)) +∑pt,qteNst
Figure imgf000019_0002
Δ
Figure imgf000019_0003
Δ ^( sCpt))表示将枝干点 pt分类到 的代价, 0 )为^的朝向信息, o(pt) = (x,y,z), 其中 x、 y和 z是对 的邻域点进行主成份分析得到的特征向量 矩阵的对角元素, 为 sCpt)对应的枝干点云块中所有枝干点的朝向信息 的平均值, Δ为预设的距离阈值,: T为预设的惩 ¾项, dC sC))为 pt与 对 应的枝干点云块的距离;
i 为 SP中与 ^相邻的数据点;
Nst = Kpt'qt)} = {(pt'qt) £ Delaunay (P*): \≠ - q¾| < ε}, 于对 SP进 行 Delaunay三角剖分并去除大于阈值 ε的边形成的邻域系; VpW ( )的定义与上述 )的定义相同,
Figure imgf000020_0001
f qt))表示将相 邻的数据点 ^和^分类为 fs(pt)和 fs(qt)的代价。
本申请文件中, 数据点与点云块之间的距离指的是该数据点与该点云块中 与之最近的数据点之间的距离。
在一个实施例中, 将第一点云帧 F1作为待分割点云帧, 步骤 S 140可按照步 骤 S410、 S420、 S320和 S330将第一点云帧 中的点云分割为叶片点云块和枝 干点云块, 计算过程中, Z)pt(L)和/) pt (S)的计算适用 |{ }| = 0和 | {SS }| = 0的 情况。
上述植物器官点云的分割方法, 获取被监测植物的多个植物生长时间对应 的点云帧, 并对获取的点云帧中进行分割, 根据待分割点云帧的前一相邻点云 帧中叶片点块和枝干点云块的信息以及待分割点云帧的数据点的平坦性特征, 将待分割点云帧的点云分割为叶片点块和枝干点云块, 以相邻点云帧作为参照 对点云帧进行分割, 有利于分割出的器官在相邻点云帧之间保持时空一致性, 提高植物器官分割的准确性。 而且, 当发现新的叶片点云块或枝干点云块时, 往前回溯重新分割待分割点云块前面的点云帧中的点云 , 直到重新分割后的点 云帧的叶片点云块和枝干点云块的数量没有增加为止, 重新分割时根据发现了 新的叶片点云块或枝干点云块的后一相邻点云帧中的叶片点云块和枝干点云块 的信息分割待重新分割的点云帧, 回溯过程中的重新分割有利于在点云帧中提 取出新的在前面的分割过程中未被发现的叶片点云块或枝干点云块, 从而进一 步提高植物器官分割的准确性。 如图 6所示,一种植物器官点云的分割系统,包括以下点云帧获取模块 10、 第一点云帧分割模块 20、 调度模块 30、 点云分割模块 40、 判断模块 50和回溯 控制模块 60 , 其中:
点云帧获取模块 10用于获取被监测植物的多个植物生长时间对应的点云帧, 按照对应的植物生长时间的先后顺序记获取的多个点云帧为 1 , .. Ft , ... , Fn
第一点云帧分割模块 20用于根据第一点云帧 F1中数据点的平坦性特征将第 一点云帧 1中的点云分割为叶片点云块和枝干点云块。 第一点云帧分割模块 20 的处理过程在下文中说明。
调度模块 30 用于在第一点云帧之后的点云帧 2至 "中按照对应的植物生 长时间的先后顺序依次取 Ff (2 t n), 将 ^7做为待分割点云帧、 Ff的前一点云 帧 t- 1做为待分割点云帧的相邻点云帧传递给点云分割模块并启动点云分割模 块。
点云分割模块 40用于根据待分割点云帧的相邻点云帧中叶片点云块和枝干 点云块的信息以及待分割点云帧的数据点的平坦性特征将待分割点云帧中的点 云分割为叶片点云块和枝干点云块。
判断模块 50用于在点云分割模块 40分割 Ff后判断 Ff所包含的枝干点云块 数量是否多于 1所包含的枝干点云块数量或者 所包含的叶片点云块数量是 否多于 Ft-i包含的叶片点云块数量, 若否, 则当 t<n时, 通知调度模块 30调度 点云分割模块 40,以将^的下一个点云帧 t+1 中的点云分割为叶片点云块和枝 干点云块, 当 t=n时结束, 若是, 则调度回溯控制模块 60。
回溯控制模块 60用于在 f^-1至 中按照对应的植物生长时间的倒序顺序依 次取 ( l j t-l ), 将^做为待分割点云帧、 的后一点云帧 做为待分割 点云帧的相邻点云帧传递给点云分割模块并启动点云分割模块 40, 以重新分割 t前面的点云帧中的点云, 直到重新分割后的点云帧 Fj的叶片点云块和枝干点 云块的数量没有增加, 则停止启动点云分割模块并通知调度模块 30调度点云分 割模块 40, 以将^的下一个点云帧 t+1 中的点云分割为叶片点云块和枝干点云 块。
如图 7所示, 点云分割模块 40包括数据点分类模块 401、 叶片点云块聚合 模块 402、 枝干点云块聚合模块 403、 独立器官点云块提取模块 404、 叶片点云 块重分割模块 405和枝干点云块重分割模块 406, 其中:
数据点分类模块 401 用于根据待分割点云帧的相邻点云帧中叶片点云块和 枝干点云块的信息以及待分割点云帧的数据点的平坦性特征将待分割点云帧中 的数据点分类为叶片点或枝干点。
如图 8所示, 在一个实施例中, 数据点分类模块 401 包括以下分类函数求 解单元 411和分类单元 421, 其中:
求解单元 411 用于求解使得目标能量函数达到最小的分类函数, 该目标能 量函数为关于分类函数的函数, 其函数值表示分类代价, 该分类函数为将待分 割点云帧的数据点分类为叶片点和枝干点的分类函数。
记待分割点云帧中数据点集合为 /^ = { }, 植物器官数据点类别集合为 {L,S},其中 L代表叶片点类别、 S代表枝干点类别, /β为将 映射到集合 {L,S} 的 分类函数, 即, /β为将待分割点云帧的数据点分类为叶片点和枝干点的分类函 数, 所述目标能量函数如下: ptEPt pt,qteNpt
其巾: 表示将 ^数据点分类为 β(ί^)的代价,
0
0 0
0
Figure imgf000022_0001
z)pt(/ 即为 ^( )= 的代价, t(S)即为 ^( ) = S的代价, ?( )为 ^的平坦性特征, R(jt) = log (max (C(pf),c£)), c£为预设的大于 0而小于 1/3的常量, ( )为^的曲率特征, Cip^ ^ +λ23),其中 2和 3是对 的邻域点进行主成份分析得到的特征值, λ ≤ λ23.λ1≤ λ3;
¾L = log{cE), = log );
{Z^ }为相邻点云帧中叶片点云块的集合, |{ }|为 { }元素的个数, /^为 {Lt }中与 距离最近的叶片点云块, ?(/^)为/^中的数据点的平坦性特征的平均 值; {Ss }为相邻点云帧中枝干点云块的集合, |{SS }|为 {Ss }元素的个数, Ss为 {Ss }中与 距离最近的枝干点云块, 1 (5^)为 *中的数据点的平坦性特征的平 均值。
由于已发育的叶片通常都比较平坦, 属于已发育叶片的数据点^所对应的 曲率特征 CO 都具有较小的数值, 因此,可以通过 有效地从点云中区分出 枝干和发育的叶片。 分布于 [o, , 然而其数值和点云的平坦性并不线性对 应, 为解决这个问题, 本发明首先将特别接近 0的 ccpt)上取为一个非 0的常量 c£ (参考值: 0.015)以避免 的数值存在多个数量级的差异, 然后再使用 log 函数将其转化为平坦性特征 定义 = log (max (C(pf),c£)), 并定义 ¾L = Ζθ (ί:ε)以及 s = 则 ? (P 将分布于 [9^,9y。从/? (P 到 9 ^和 s的 距离度量了数据点 被分类为叶片或枝干的代价。
因此,上述公式中,若 |{/^±:1}| = 0或 |{Ss t±:L}| = 0,则/) pt(z = R(pt)— L,
Figure imgf000023_0001
R(pt)。
然而, 植物在生发初期叶片点云特征与枝干点云特征的区分度非常细微, 叶片的平坦性数值可能严重地靠近 Rs从而容易被错误地判断为枝干, 只有发育 成熟的叶片的点云特征与枝干点云特征的区分度才非常明显。 使用全局绝对值 RS和 RL定义的 无法适应于植物器官发育的不同阶段, 为保证精确的 植物器官分类, 需要在数据点分类过程中使用相邻点云帧中点云块的平坦性特 征, 而不是全局绝对值 Rs和 。
因此,上述公式中,若 |{L ≠ 0且 |{S ±:L}| ≠ 0,则/)^(/ = max(R(pt) - !^1),。), Dpt(S
Figure imgf000023_0002
- R(pt),0)。
在植物器官发育的初期往往难以准确对其植物器官进行分割, 本发明中, 点云分割模块 40在根据待分割点云帧的前一相邻点云帧中叶片点云块和枝干点 云块的信息以及待分割点云帧的数据点的平坦性特征将待分割点云帧中的点云 分割为叶片点云块和枝干点云块时, 可以对发育成熟植物的点云进行准确的器 官分割。 进一步的, 基于对发育成熟植物的点云的准确的器官分割, 点云分割 模块 40在往前回溯重新对发育初期植物的点云进行器官分割时, 根据待分割点 云帧的后一相邻点云帧中叶片点云块和枝干点云块的信息以及待分割点云帧的 数据点的平坦性特征将待分割点云帧中的点云分割为叶片点云块和枝干点云块, 从而可提高对发育初期植物点云进行器官分割的准确性。
(2) i 为/^中与 ^相邻的数据点;
NPt = Kpt,qt)} = Kpt,qt) e Delaunay(pt): |pt - qt| < ε}是基于对 进行 Delaunay 三角剖分并去除大于阈值 ε的边形成的邻域系; 在一个实施例中,
表示将相邻的数据点 ^和^分类为 ^( )和^(^)的代 价,
Figure imgf000024_0001
) 其中, ( t' qt) Ε Npt , ( )为^的曲率特征, C(qt)为 qt的曲率特征。
数据点的曲率特征和器官邻接区域具有很强的相关性: 在器官邻接处的数 据点通常具有较大的曲率。上述 在不同种类器官邻接处将相 邻的数据点分为不同类别的代价较 d、, 可尽量使得不同种类器官的邻接处的数 据点被分为不同类别, 而将属于相同器官的相邻的数据点分为不同类别的代价 较大, 从而可保证分类的平滑性。
上述目标能量函数是典型的马尔可夫随机场 ( Markov Random Fields )问题, 可以使用图割算法来进行近似求解。
分类单元 421 用于将待分割点云帧中的数据点按照求解得到的分类函数分 类为叶片点或枝干点。
具体的, 若使得上述目标能量函数达到最小的分类函数将待分割点云帧中 的某一个数据点映射到 L , 则将该数据点分类为叶片点, 若该分类函数将该数据 点映射到 S, 则将该数据点分类为枝干点。
叶片点云块聚合模块 402用于聚合待分割点云帧中连通的叶片点构成叶片 点云块。
枝干点云块聚合模块 403 用于建立待分割点云帧中枝干点的最小生成树, 将最小生成树分割成不包含分叉枝干的独立分支, 将待分割点云帧中的枝干点 映射到各独立分支上, 形成各个枝干点云块, 一个独立分支对应一个枝干点云 块。
枝干点云块聚合模块 403在建立待分割点云帧中枝干点的最小生成树之前, 可先对待分割点云帧中的枝干点进行预设处理。 具体的, 采样待分割点云帧中 预设比例 (例如 10% ) 的枝干点得到采样点, 将采样点投影到采样点邻近数据 点的中心以将采样点聚拢到枝干中心线上, 筛除距离小于预设值的两个采样点 中的一个采样点。 枝干点云块聚合模块 403 可根据剩余的采样点建立最小生成 树。
进一步的, 枝干点云块聚合模块 403可将最小生成树中度数大于 2的节点 删除, 使得最小生成树的枝干在删除的节点处断开, 从而生成不包含分叉枝干 的独立分支。 进一步的, 可将短于阈值的独立分支删除。
独立器官点云块提取模块 404用于查找待分割点云帧和相邻点云帧中每一 个叶片点云块和枝干点云块对应的与自身重叠数据点最多的点云块, 并标记该 对应的点云块, 提取待分割点云帧和相邻点云帧中被标记次数小于 2 的叶片点 云块和枝干点云块。
在一个实施例中, 独立器官点云块提取模块 404 可从待分割点云帧和相邻 点云帧的每一个叶片点云块出发, 在两个点云帧中该叶片点云块所在的点云帧 外的另一个点云帧中查找与该点云块重叠程度最高的叶片点云块, 并标记一条 从该叶片点云块出发至与之重叠程度最高的叶片点云块的出边, 然后筛除所有 入度大于等于 2的叶片点云块。
如图 5所示,待分割点云帧和相邻点云帧中包含点叶片点云块 S l、 S2、 S3、 S4、 S5、 S6和 S7。 与 SI重叠程度最高的叶片点云块是 S5 , 则独立器官点云块 提取模块 404可标记一条从 S1至 S5的出边,与 S2重叠程度最高的叶片点云块 也是 S5 , 则独立器官点云块提取模块 404可标记一条从 S2至 S5的出边, 与 S5 重叠程度最高的叶片点云块也是 S 1 , 则独立器官点云块提取模块 404可标记一 条从 S5至 S1的出边,依次类推标记其它的叶片点云块。 最后, 入度大于等于 2 的叶片点云块为 S3和 S5 , 删除 S3和 S5 , 剩余 Sl、 S2、 S4、 S6和 S7。 剩余的 这些叶片点云块中都包含单个独立的叶片。
叶片点云块重分割模块 405 用于将待分割点云帧中的所述叶片点分类到提 取的各个叶片点云块对应的类别上, 将属于同一类别的叶片点构成待分割点云 帧中的一个叶片点云块。
其中, 叶片点与叶片点云块的距离为叶片点与叶片点云块中最近数据点的 距离。 具体的,记所述提取的各个叶片点云块的对应类别分别为 Z^Ly,/^, LP 为待分割点云帧中的叶片点集合, Λ〇为将 LP映射到 { , L2 ,…, Lm}的叶片分类 函数;
叶片点云块重分割模块 405用于求解使得如下叶片分类代价函数 E(A)达到 最小的叶片点分类函数 fL ( ) ,将待分割点云帧中的叶片点按照求解得到的叶片点 分类函数 i ( )分类到提取的各个叶片点云块对应的类别上:
E(fL)
Figure imgf000026_0001
其巾:
( 1 )
Figure imgf000026_0002
Dpt(fi pt))表示将叶片点 pt分类到 fi pt)的代价, 表示婦 pt 到目标分块 ACpt)中最近点的距离;
(2)
i 为/^中与 ^相邻的数据点;
NLt = Kpt'qt)} = {( 七,9七) e Delaunay(pt): |pt - qt| < ε}, NLt ^于对 /^进 行 Delaunay三角剖分并去除大于阈值 ε的边形成的邻域系;
VpW( )的定义与上述 )的定义相同, 表示将相 邻的数据点 ^和^分类为 fL(pt)和 fL(qt)的代价。
枝干点云块重分割模块 406用于将待分割点云帧中的所述枝干点分类到提 取的各个枝干点云块对应的类别上, 将属于同一类别的枝干点构成待分割点云 帧中的一个枝干点云块。
在一个实施例中, 记独立器官点云块提取模块 404提取的各个枝干点云块 的对应类别分别为 S2 ,…, S„ , SP为待分割点云帧中的枝干点集合, fs〇为将 SP映射到 的分类函数,
枝干点云块重分割模块 406用于求解使得如下枝干分类代价函数 Ε( )达到 最小的枝干点分类函数 ) ,将待分割点云帧中的枝干点按照求解得到的枝干点 分类函数 分类到提取的各个枝干点云块对应的类别上:
Figure imgf000027_0001
。( — 若 ^ ,^( )≤
若^ ^( )≥
表示将枝干点 pt分类到 的代价, 。(pt)为^的朝向信息,
0(pt) = (X,y,Z), 其中 X、 y和 Z是对 ^的邻域点进行主成份分析得到的特征向量 矩阵的对角元素, 为 sCpt)对应的枝干点云块中所有枝干点的朝向信息 的平均值, Δ为预设的距离阈值,: 为预设的惩 ¾项, dC sO )为 pt与 对 应的枝干点云块的距离;
i 为 SP中与 ^相邻的数据点;
Nst = {(PW)} = {(PW) 6 Delaunay(pt): |pt - q < ε}, N^是基于对 SP进 行 Delaunay三角剖分并去除大于阈值 ε的边形成的邻域系;
VpW( )的定义与上述 )的定义相同,
Figure imgf000027_0002
f qt))表示将相 邻的数据点 ^和^分类为 fs(pt)和 fs(qt)的代价。 本申请文件中, 数据点与点云块之间的距离指的是该数据点与该点云块中 与之最近的数据点之间的距离。 在一个实施例中, 第一点云帧分割模块 20用于将第一点云帧 F1作为待分割 点云帧, 按照分类函数求解单元 411和分类单元 421的处理过程将 F1的数据点 分类为叶片点或枝干点, 并按照叶片点云块聚合模块 402和枝干点云块聚合模 块 403 的处理过程将 中的点云分割为叶片点云块和枝干点云块, 按照分类函 数求解单元 411 的处理过程求解分类函数时, Z)pt(L)和/) pt(S)的计算适用
|{^ }| = 0和 |{SS }| = 0的情况。
上述植物器官点云的分割系统, 获取被监测植物的多个植物生长时间对应 的点云帧, 并对获取的点云帧中进行分割, 根据待分割点云帧的前一相邻点云 帧中叶片点块和枝干点云块的信息以及待分割点云帧的数据点的平坦性特征, 将待分割点云帧的点云分割为叶片点块和枝干点云块, 以相邻点云帧作为参照 对点云帧进行分割, 有利于分割出的器官在相邻点云帧之间保持时空一致性, 提高植物器官分割的准确性。 而且, 当发现新的叶片点云块或枝干点云块时, 往前回溯重新分割待分割点云块前面的点云帧中的点云 , 直到重新分割后的点 云帧的叶片点云块和枝干点云块的数量没有增加为止, 重新分割时根据发现了 新的叶片点云块或枝干点云块的后一相邻点云帧中的叶片点云块和枝干点云块 的信息分割待重新分割的点云帧, 回溯过程中的重新分割有利于在点云帧中提 取出新的在前面的分割过程中未被发现的叶片点云块或枝干点云块, 从而进一 步提高植物器官分割的准确性。 本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程, 是可以通过计算机程序控制相关的硬件来完成的, 所述的程序可存储于一计算 机可读取存储介质中,该程序在执行时,可包括如上述各方法的实施例的流程。 其中, 所述的存储介质可为磁碟、 光盘、 只读存储记忆体(Read-Only Memory, ROM )或随机存储记忆体(Random Access Memory, RAM )等。 但并不能因此而理解为对本发明专利范围的限制。 应当指出的是, 对于本领域 的普通技术人员来说, 在不脱离本发明构思的前提下, 还可以做出若干变形和 改进, 这些都属于本发明的保护范围。 因此, 本发明专利的保护范围应以所附 权利要求为准。

Claims

权利要求书
1、 一种植物器官点云的分割方法, 包括以下步骤 S120 S160:
S120: 获取被监测植物的多个植物生长时间对应的点云帧, 按照对应的植 物生长时间的先后顺序记获取的多个点云帧为 F1, .··, Ft, . , Fn;
S 140: 根据第一点云帧 1中数据点的平坦性特征将第一点云帧 中的点云 分割为叶片点云块和枝干点云块;
S 160: 按照对应的植物生长时间的先后顺序依次将第一点云帧之后的点云 帧 至 ^中的点云分割为叶片点云块和枝干点云块,其中,将某一个点云帧 2 <t<n) 中的点云分割为叶片点云块和枝干点云块包括以下步骤 S220 ~ S280:
S220: 根据 的前一点云帧 1中叶片点云块和枝干点云块的信息以及 的数据点的平坦性特征将^中的点云分割为叶片点云块和枝干点云块;
S240: 判断 Ff所包含的枝干点云块数量是否多于 Ff- 1所包含的枝干点云块 数量或者^所包含的叶片点云块数量是否多于 1包含的叶片点云块数量, 若 否, 则执行步骤 S260, 若是, 则执行步骤 S280;
S260: 当 t<n时则进入到将^的下一个点云帧 t+1 中的点云分割为叶片点 云块和枝干点云块的步骤, 当 t=n时结束;
S280: 往前回溯依次重新分割 1前面的点云帧中的点云, 直到重新分割后 的点云帧的叶片点云块和枝干点云块的数量没有增加, 则停止回溯并进入到将 ^的下一个点云帧 t+1 中的点云分割为叶片点云块和枝干点云块的步骤, 其中, 重新分割 ^7前面的某一个点云帧 ( Kj<t-1 ) 中的点云包括以下步骤:
S282: 根据 的后一点云帧 1中叶片点云块和枝干点云块的信息以及 的数据点的平坦性特征将 ^中的点云分割为叶片点云块和枝干点云块。
2、 根据权利要求 1所述的植物器官点云的分割方法, 其特征在于, 将上述 步骤 S220中的 Ff记为待分割点云帧、 Ft—1记为待分割点云帧的相邻点云帧, 上 述步骤 S282 中的 记为待分割点云帧、 记为待分割点云帧的相邻点云帧, 则
上述根据待分割点云帧的相邻点云帧中叶片点云块和枝干点云块的信息以 及待分割点云帧的数据点的平坦性特征将待分割点云帧中的点云分割为叶片点 云块和枝干点云块的步骤包括以下步骤 S310 ~ S360:
S310: 根据待分割点云帧的相邻点云帧中叶片点云块和枝干点云块的信息 以及待分割点云帧的数据点的平坦性特征将待分割点云帧中的数据点分类为叶 片点或枝干点;
S320: 聚合待分割点云帧中连通的叶片点构成叶片点云块;
S330: 建立待分割点云帧中枝干点的最小生成树, 将最小生成树分割成不 包含分叉枝干的独立分支, 将待分割点云帧中的枝干点映射到各独立分支上, 形成各个枝干点云块, 一个独立分支对应一个枝干点云块;
S340: 查找待分割点云帧和相邻点云帧中每一个叶片点云块和枝干点云块 对应的与自身重叠数据点最多的点云块, 并标记该对应的点云块, 提取待分割 点云帧和相邻点云帧中被标记次数小于 2的叶片点云块和枝干点云块;
S350: 将待分割点云帧中的所述叶片点分类到提取的各个叶片点云块对应 的类别上, 将属于同一类别的叶片点构成待分割点云帧中的一个叶片点云块;
S360: 将待分割点云帧中的所述枝干点分类到提取的各个枝干点云块对应 的类别上, 将属于同一类别的枝干点构成待分割点云帧中的一个枝干点云块。
3、根据权利要求 2所述的植物器官点云的分割方法,其特征在于,步骤 S310 包括以下步骤:
S410: 求解使得目标能量函数达到最小的分类函数, 该目标能量函数为关 于分类函数的函数, 其函数值表示分类代价, 该分类函数为将待分割点云帧的 数据点分类为叶片点和枝干点的分类函数;
记待分割点云帧中数据点集合为 /^ = { }, 植物器官数据点类别集合为 {L, S},其中 L代表叶片点类别、 S代表枝干点类别, /β为将 映射到集合 {L, S} 的 分类函数, 所述目标能量函数如下:
E( b) = Z Dpt { P')) + Z vPw fB (p , fB qt
ptEPt pt,qteNpt
其巾:
( 1 ) Ζ (/β(ρ 表示将 ^数据点分类为 ^(pt)的代价, max (R(pt) - D,o) 若 | }|≠0且 |{Ss}|≠o
Dpt(L) =
R(p - 若 | }|=0|或 KSs }| = o max R SS^} R(pt),o), 若 K }|≠ o且 |{SS }|≠ o
pt(S) =
若 |{ }| = 0或 |{SS }| = 0 z)pt(/ 即为 ^( )= 的代价, z)pt(S)即为 ^( ) = S的代价, ?( )为 ^的平坦性特征, R( jt) = log (max (C(pf),c£)), c£为预设的大于 0而小于 1/3的常量, ( )为^的曲率特征, Cip^ ^ +λ23),其中
2和 3是对 的邻域点进行主成份分析得到的特征值, λ ≤ λ23.λ1≤ λ3;
{ }为相邻点云帧中叶片点云块的集合, |{ }|为 { }元素的个数, /^为 {Lt }中与 距离最近的叶片点云块, ?(/^)为/^中的数据点的平坦性特征的平均 值; {Ss }为相邻点云帧中枝干点云块的集合, |{SS }|为 {Ss }元素的个数, Ss为 {Ss }中与 距离最近的枝干点云块, 1(5^)为 *中的数据点的平坦性特征的平 均值;
¾L = log{cE), = log );
(2) ^为 中与^相邻的数据点;
NPt 于对 进行 Delaunay三角剖分并去除大于阈值 ε的边形成的邻域系; 表示将相邻的数据点 ^和^分类为 ^( )和^(^)的代 价,
Figure imgf000031_0001
其中, ( W e Npt, ( )为^的曲率特征, C(qt)为 qt的曲率特征;
S420: 将待分割点云帧中的数据点按照求解得到的分类函数分类为叶片点 或枝干点 …,Lm
4、 根据权利要求 3所述的植物器官点云的分割方法, 其特征在于, 记所述 提取的各个叶片点云块的对应类别分别为 L2 ,…, Lm , /^为待分割点云帧中 的叶片点集合, Λ〇为将 LP映射到 {l^Ly'Lm}的叶片分类函数;
步骤 S350将待分割点云帧中的所述叶片点分类到提取的各个叶片点云块对 应的类别上的步骤为: 求解使得如下叶片分类代价函数 Ε(Λ)达到最小的叶片点 分类函数 fL ( ) ,将待分割点云帧中的叶片点按照求解得到的叶片点分类函数分类 到提取的各个叶片点云块对应的类别上:
Figure imgf000032_0001
Dpt(fi pt))表示将叶片点 分类到 fi pt)的代价, 表示数据点 到目标分块 Α(^)中最近点的距离; ( 2 )
i 为/^中与 ^相邻的数据点;
N^ ^于对 LP进行 Delaunay三角剖分并去除大于阈值 ε的边形成的邻域系;
VpW( )的定义与上述 )的定义相同, 表示将相 邻的数据点 ^和^分类为 fL(pt)和 fL(qt)的代价。
5、 根据权利要求 3所述的植物器官点云的分割方法, 其特征在于, 记所述 提取的各个枝干点云块的对应类别分别为 S2 ,…, S„ , SP为待分割点云帧中的 枝干点集合, fs〇为将 SP映射到 的枝干分类函数;
步骤 S360将待分割点云帧中的所述枝干点分类到提取的各个枝干点云块对 应的类别上的步骤为: 求解使得如下枝干分类代价函数 E (fs达到最小的枝干点 分类函数 s( ) ,将待分割点云帧中的枝干点按照求解得到的枝干点分类函数 s( ) 分类到提取的各个枝干点云块对应的类别上:
fsCqt))
Figure imgf000032_0002
Δ
Figure imgf000032_0003
^(sCpt))表示将枝干点 pt分类到 的代价, 0 )为^的朝向信息, o(pt) = (x,y,z), 其中 x、 y和 z是对 的邻域点进行主成份分析得到的特征向量 矩阵的对角元素, 为 sCpt)对应的枝干点云块中所有枝干点的朝向信息 的平均值, Δ为预设的距离阈值,: T为预设的惩 ¾项, dC sC))为 pt与 对 应的枝干点云块的距离; (2)
i 为 SP中与 ^相邻的数据点;
N^ ^于对 SP进行 Delaunay三角剖分并去除大于阈值 ε的边形成的邻域系; VpW( )的定义与上述 )的定义相同, νρ ιί( (ρ (^))表示将相 邻的数据点 ^和^分类为 fs(pt)和 fs(qt)的代价。
6、 根据权利要求 3所述的植物器官点云的分割方法, 其特征在于, 将第一 点云帧 1作为待分割点云帧, 步骤 S140可按照步骤 S410、 S420、 S320和 S330 将第一点云帧 1中的点云分割为叶片点云块和枝干点云块,计算过程中, Dpt(L) 和 Z)pt(S)的计算适用 |{ }| = 0和 |{SS }| = 0的情况。
7、 一种植物器官点云的分割系统, 其特征在于, 包括:
点云帧获取模块, 用于获取被监测植物的多个植物生长时间对应的点云帧, 按照对应的植物生长时间的先后顺序记获取的多个点云帧为 1, .. Ft, ...,Fn; 第一点云帧分割模块, 用于根据第一点云帧 中数据点的平坦性特征将第 一点云帧 中的点云分割为叶片点云块和枝干点云块;
调度模块, 用于在第一点云帧之后的点云帧 F2至 按照对应的植物生长 时间的先后顺序依次取 ^7 (2 t n), 将 ^7做为待分割点云帧、 Ff的前一点云帧 t- 1做为待分割点云帧的相邻点云帧传递给点云分割模块并启动点云分割模块; 点云分割模块, 用于根据待分割点云帧的相邻点云帧中叶片点云块和枝干 点云块的信息以及待分割点云帧的数据点的平坦性特征将待分割点云帧中的点 云分割为叶片点云块和枝干点云块;
判断模块, 用于在点云分割模块分割Ft后判断 Ff所包含的枝干点云块数量 是否多于 t- 1所包含的枝干点云块数量或者^所包含的叶片点云块数量是否多 于 t— 1包含的叶片点云块数量, 若否, 则当 t < n时, 通知调度模块调度点云分 割模块, 以将^的下一个点云帧 t+1 中的点云分割为叶片点云块和枝干点云块, 当 t=n时结束, 若是, 则调度回溯控制模块;
回溯控制模块, 用于在 t-1至 中按照对应的植物生长时间的倒序顺序依 次取 ( l j t- l ), 将^做为待分割点云帧、 的后一点云帧 做为待分割 点云帧的相邻点云帧传递给点云分割模块并启动点云分割模块, 以重新分割 前面的点云帧中的点云, 直到重新分割后的点云帧 Fj的叶片点云块和枝干点云 块的数量没有增加, 则停止启动点云分割模块并通知调度模块调度点云分割模 块, 以将^的下一个点云帧 t+1 中的点云分割为叶片点云块和枝干点云块。
8、 根据权利要求 7所述的植物器官点云的分割系统, 其特征在于, 所述点 云分割模块包括:
数据点分类模块, 用于根据待分割点云帧的相邻点云帧中叶片点云块和枝 干点云块的信息以及待分割点云帧的数据点的平坦性特征将待分割点云帧中的 数据点分类为叶片点或枝干点;
叶片点云块聚合模块, 用于聚合待分割点云帧中连通的叶片点构成叶片点 云块;
枝干点云块聚合模块, 建立待分割点云帧中枝干点的最小生成树, 将最小 生成树分割成不包含分叉枝干的独立分支, 将待分割点云帧中的枝干点映射到 各独立分支上, 形成各个枝干点云块, 一个独立分支对应一个枝干点云块;
独立器官点云块提取模块, 用于查找待分割点云帧和相邻点云帧中每一个 叶片点云块和枝干点云块对应的与自身重叠数据点最多的点云块, 并标记该对 应的点云块, 提取待分割点云帧和相邻点云帧中被标记次数小于 2 的叶片点云 块和枝干点云块;
叶片点云块重分割模块, 用于将待分割点云帧中的所述叶片点分类到提取 的各个叶片点云块对应的类别上, 将属于同一类别的叶片点构成待分割点云帧 中的一个叶片点云块;
枝干点云块重分割模块, 用于将待分割点云帧中的所述枝干点分类到提取 的各个枝干点云块对应的类别上, 将属于同一类别的枝干点构成待分割点云帧 中的一个枝干点云块。
9、 根据权利要求 8所述的植物器官点云的分割系统, 其特征在于, 所述数 据点分类模块包括:
分类函数求解单元, 用于求解使得目标能量函数达到最小的分类函数, 该 目标能量函数为关于分类函数的函数, 其函数值表示分类代价, 该分类函数为 将待分割点云帧的数据点分类为叶片点和枝干点的分类函数;
记待分割点云帧中数据点集合为 /^ = { }, 植物器官数据点类别集合为 {L,S},其中 L代表叶片点类别、 S代表枝干点类别, /β为将 映射到集合 {L,S} 的 分类函数, 所述目标能量函数如下: ptept pt,qteNpt
其巾: 表示将 ^数据点分类为 β(ί^)的代价,
0
0 0
0
Figure imgf000035_0001
z)pt(/ 即为 ^( )= 的代价, t(S)即为 ^( ) = S的代价,
?( )为 ^的平坦性特征, R(pt = log (max (C(pf),c£)), c£为预设的大于 0而小于 1/3的常量, ( )为^的曲率特征, Cip^ ^ +λ23),其中 2和 3是对 的邻域点进行主成份分析得到的特征值, λ ≤ λ23.λ1≤ λ3;
{ }为相邻点云帧中叶片点云块的集合, |{ }|为 { }元素的个数, /^为 {Lt }中与 距离最近的叶片点云块, ?(/^)为/^中的数据点的平坦性特征的平均 值; {Ss }为相邻点云帧中枝干点云块的集合, |{SS }|为 {Ss }元素的个数, Ss为 {Ss }中与 距离最近的枝干点云块, 1 (5^)为 *中的数据点的平坦性特征的平 均值;
¾L = i g(c£), = log ); (2) ^为 中与^相邻的数据点;
NPt = Kp qt)} = Kp q e Delaunay(pt): |pt - qt| < ε}是基于对 进行 Delaunay三角剖分并去除大于阈值 ε的边形成的邻域系;
表示将相邻的数据点 ^和^分类为 ^( )和^(^)的代
Figure imgf000036_0001
其中, ( t'qt) Ε Npt, ( )为^的曲率特征, C(qt)为 qt的曲率特征; 分类单元, 用于将待分割点云帧中的数据点按照求解得到的分类函数分类 为叶片点或枝干点。
10、 根据权利要求 9所述的植物器官点云的分割系统, 其特征在于, 记所 述提取的各个叶片点云块的对应类别分别为 L2,…, Lm , LP为待分割点云帧 中的叶片点集合, 〇为将 LP映射到 {l^Ly'Lm}的叶片分类函数;
叶片点云块重分割模块用于求解使得如下叶片分类代价函数 £( )达到最小 的叶片点分类函数 fL ( ) ,将待分割点云帧中的叶片点按照求解得到的叶片点分类 函数 ( )分类到提取的各个叶片点云块对应的类别上:
E(A)
Figure imgf000036_0002
fL
其巾:
Dpt(fi pt))表示将叶片点 分类到 fi pt)的代价, d(pt,fL(pt))表示婦 pt 到目标分块 Α(^)中最近点的距离;
(2)
i 为/^中与 ^相邻的数据点;
N^ ^于对 LP进行 Delaunay三角剖分并去除大于阈值 ε的边形成的邻域系; VpW( )的定义与上述 )的定义相同, 表示将相 邻的数据点 ^和^分类为 fL(pt)和 fL(qt)的代价。
11、 根据权利要求 9 所述的植物器官点云的分割系统, 其特征在于, 记所 述提取的各个枝干点云块的对应类别分别为 , S2 ,…, S„ , SP为待分割点云帧中 的枝干点集合, fs〇为将 SP映射到 的枝干分类函数,
枝干点云块重分割模块用于求解使得如下枝干分类代价函数 £( ^)达到最小 的枝干点分类函数 s ( ) ,将待分割点云帧中的枝干点按照求解得到的枝干点分类 函数 s ( )分
Figure imgf000037_0001
若 ^ ,^( )≤
Figure imgf000037_0002
若 ≠ , Ρ
表示将枝干点 pt分类到 的代价, 。(pt)为^的朝向信息,
0(pt) = (X,y,Z), 其中 X、 y和 Z是对 ^的邻域点进行主成份分析得到的特征向量 矩阵的对角元素, 为 sCpt)对应的枝干点云块中所有枝干点的朝向信息 的平均值, Δ为预设的距离阈值,: 为预设的惩 ¾项, dC sO )为 pt与 对 应的枝干点云块的距离;
(2) i 为 SP中与 ^相邻的数据点;
N^ ^于对 SP进行 Delaunay三角剖分并去除大于阈值 ε的边形成的邻域系; VpW( )的定义与上述 )的定义相同, νρ ιί( (ρ , (^))表示将相 邻的数据点 ^和^分类为 fs(pt)和 fs(qt)的代价。
12、 根据权利要求 9所述的植物器官点云的分割系统, 其特征在于, 第一 点云帧分割模块用于将第一点云帧 F1作为待分割点云帧, 按照所述分类函数求 解单元和分类单元的处理过程将 F1的数据点分类为叶片点或枝干点, 并按照叶 片点云块聚合模块和枝干点云块聚合模块的处理过程将 中的点云分割为叶片 点云块和枝干点云块, 按照所述分类函数求解单元的处理过程求解分类函数时, ζ (ζ和 z (S)的计算适用 | }| = 0和 |{SS }| = 0的情况。
PCT/CN2013/083455 2013-04-19 2013-09-13 植物器官点云的分割方法和系统 WO2014169562A1 (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
US14/765,806 US9547793B2 (en) 2013-04-19 2013-09-13 Method and system for dividing plant organ point cloud

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
CN201310138373.0A CN103218817B (zh) 2013-04-19 2013-04-19 植物器官点云的分割方法和系统
CN201310138373.0 2013-04-19

Publications (1)

Publication Number Publication Date
WO2014169562A1 true WO2014169562A1 (zh) 2014-10-23

Family

ID=48816560

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/CN2013/083455 WO2014169562A1 (zh) 2013-04-19 2013-09-13 植物器官点云的分割方法和系统

Country Status (3)

Country Link
US (1) US9547793B2 (zh)
CN (1) CN103218817B (zh)
WO (1) WO2014169562A1 (zh)

Families Citing this family (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102013209109A1 (de) * 2013-05-16 2014-11-20 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Vorrichtung und Verfahren zum Parametrisieren einer Pflanze
CN103714555B (zh) * 2013-12-13 2017-06-13 中国科学院深圳先进技术研究院 一种基于运动轨迹的四维运动点云分割与重建方法
CN104091321B (zh) * 2014-04-14 2016-10-19 北京师范大学 适用于地面激光雷达点云分类的多层次点集特征的提取方法
CN106447771B (zh) * 2016-10-18 2019-01-11 中国科学院深圳先进技术研究院 花朵开放过程的重建方法及装置
US11188752B2 (en) * 2018-03-08 2021-11-30 Regents Of The University Of Minnesota Crop biometrics detection
EP3807836A4 (en) * 2018-06-15 2022-01-26 Bayerische Motoren Werke Aktiengesellschaft INCREMENTAL POINT CLOUD SEGMENTATION
CN110838122B (zh) * 2018-08-16 2022-06-14 北京大学 点云的分割方法、装置及计算机存储介质
CN111866484B (zh) * 2019-04-30 2023-06-20 华为技术有限公司 点云编码方法、点云解码方法、装置及存储介质
CN110837849B (zh) * 2019-10-16 2022-04-08 中国农业科学院农业信息研究所 植株叶片的叶脉获取方法
CN111553937B (zh) * 2020-04-23 2023-11-21 东软睿驰汽车技术(上海)有限公司 激光点云地图构建方法、装置、设备及系统
CN111768413B (zh) * 2020-05-29 2023-12-05 北京农业信息技术研究中心 一种植物三维点云分割方法及系统
CN113420846A (zh) * 2021-08-24 2021-09-21 天津云圣智能科技有限责任公司 点云分割方法、装置及终端设备
CN114005319B (zh) * 2021-10-09 2024-04-05 精兵特种装备(福建)有限公司 一种实兵交战系统

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102256061A (zh) * 2011-07-29 2011-11-23 武汉大学 一种二维三维混合的视频稳定方法
CN102467753A (zh) * 2010-11-04 2012-05-23 中国科学院深圳先进技术研究院 基于骨架配准的时变点云重建方法及系统
CN102938162A (zh) * 2012-10-18 2013-02-20 深圳先进技术研究院 基于样本的植物模型建立装置与方法

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2288937B1 (de) * 2008-04-03 2016-03-30 Hochschule München Verfahren und vorrichtung zur rechnergestützten segmentierung einer umgebung in einzelne objekte
US8680994B2 (en) * 2010-12-30 2014-03-25 Utility Risk Management Corporation, Llc Method for locating vegetation having a potential to impact a structure

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102467753A (zh) * 2010-11-04 2012-05-23 中国科学院深圳先进技术研究院 基于骨架配准的时变点云重建方法及系统
CN102256061A (zh) * 2011-07-29 2011-11-23 武汉大学 一种二维三维混合的视频稳定方法
CN102938162A (zh) * 2012-10-18 2013-02-20 深圳先进技术研究院 基于样本的植物模型建立装置与方法

Also Published As

Publication number Publication date
CN103218817B (zh) 2015-11-18
US9547793B2 (en) 2017-01-17
CN103218817A (zh) 2013-07-24
US20150379350A1 (en) 2015-12-31

Similar Documents

Publication Publication Date Title
WO2014169562A1 (zh) 植物器官点云的分割方法和系统
CN108805083B (zh) 单阶段的视频行为检测方法
CN108140032B (zh) 用于自动视频概括的设备和方法
TWI435234B (zh) Plant disease identification method, system and record media
CN105519102B (zh) 视频监控方法和视频监控系统
CN107609588B (zh) 一种基于语音信号的帕金森患者updrs得分预测方法
JP4699298B2 (ja) 人体領域抽出方法および装置並びにプログラム
EP4250228A2 (en) Deformity edge detection
JP7020497B2 (ja) 一致判定装置、一致判定方法、記憶媒体
US10679096B2 (en) System and method for plant leaf identification
JP2008219570A (ja) カメラ間連結関係情報生成装置
CN112001422B (zh) 一种基于深度贝叶斯学习的图像标记估计方法
CN104537355A (zh) 一种利用图像边界信息和区域连通性的显著对象检测方法
CN110021000B (zh) 基于图层变形的发际线修复方法及装置
CN105550244A (zh) 一种自适应聚类方法
WO2022199214A1 (zh) 样本扩展方法、训练方法和系统、及样本学习系统
CN105868767B (zh) 人脸特征点定位方法和装置
WO2013145496A1 (ja) 情報処理装置、情報処理方法、及びプログラム
JP2017059090A (ja) 生成装置、生成方法、及び生成プログラム
CN107194870B (zh) 一种基于显著性物体检测的图像场景重构方法
CN110751654B (zh) 图像抠图方法、介质、设备及装置
CN110349176B (zh) 基于三重卷积网络和感知干扰学习的目标跟踪方法和系统
CN110544262B (zh) 一种基于机器视觉的子宫颈细胞图像分割方法
JP2009294955A (ja) 画像処理装置、画像処理方法、画像処理プログラムおよび同プログラムを記録した記録媒体。
CN107909078B (zh) 一种图间显著性检测方法

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 13882383

Country of ref document: EP

Kind code of ref document: A1

WWE Wipo information: entry into national phase

Ref document number: 14765806

Country of ref document: US

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 13882383

Country of ref document: EP

Kind code of ref document: A1