CN112906703A - 一种基于座位管理的图像切割方法 - Google Patents
一种基于座位管理的图像切割方法 Download PDFInfo
- Publication number
- CN112906703A CN112906703A CN202110252116.4A CN202110252116A CN112906703A CN 112906703 A CN112906703 A CN 112906703A CN 202110252116 A CN202110252116 A CN 202110252116A CN 112906703 A CN112906703 A CN 112906703A
- Authority
- CN
- China
- Prior art keywords
- seat
- image
- cutting block
- taking
- long oblique
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Withdrawn
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/20—Image preprocessing
- G06V10/26—Segmentation of patterns in the image field; Cutting or merging of image elements to establish the pattern region, e.g. clustering-based techniques; Detection of occlusion
- G06V10/267—Segmentation of patterns in the image field; Cutting or merging of image elements to establish the pattern region, e.g. clustering-based techniques; Detection of occlusion by performing operations on regions, e.g. growing, shrinking or watersheds
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/40—Extraction of image or video features
- G06V10/44—Local feature extraction by analysis of parts of the pattern, e.g. by detecting edges, contours, loops, corners, strokes or intersections; Connectivity analysis, e.g. of connected components
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/40—Extraction of image or video features
- G06V10/48—Extraction of image or video features by mapping characteristic values of the pattern into a parameter space, e.g. Hough transformation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/50—Context or environment of the image
- G06V20/52—Surveillance or monitoring of activities, e.g. for recognising suspicious objects
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Multimedia (AREA)
- Theoretical Computer Science (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Image Analysis (AREA)
Abstract
本发明涉及一种基于座位管理的图像切割方法,S1、获取摄像头至少倾斜拍摄的具有一张完整桌面的视频流,并截取该视频流中的多帧图像;S2、对任意一帧图像进行预处理得到第一图像;S3、对第一图像进行边缘检测得到第二图像;S4、提取第二图像中轮廓完整桌面的平行四边形轮廓;S5、建立每个座位的切割块,并使用每个座位的切割块对原始图像进行切割,得到每个座位图像。本发明中通过切割块对图像进行分割,减少了图像识别复杂度,提高了图像识别准确率。
Description
技术领域
本发明涉及图像处理领域,特别涉及一种基于座位管理的图像切割方法。
背景技术
图书馆、自习室等公共区域存在的意义主要在于它所包含的学习资源。有史以来座位管理都是管理界中的一个难题,不仅仅是因为实际上的座位配备不足,还存在异常严重的占座问题:有些读者经常使用书包等私人物品一人占两个座位;还有的读者会长时间离开,但是却不带走自己的私人物品,所以经常出现无人却也无座的现象。所以经常发生座位方面的纠纷问题,由于人力和管理成本太高,管理单位无法安排管理人员时刻监督读者的行为。并且,传统意义上的座位管理不能很好地满足用户的使用需求,比如无法直观显示座位的使用状态,尤其是在作为资源紧张的时候,用户往往需要耗费大量的时间在各个区域里一间间自习室挨个找位置,这不仅消耗了寻找位置的用户的时间,自习室内人员的频繁走动也会影响区域内学习的人的专注程度。
有申请号为CN201910297328.7(公布号为CN110059611A)的中国发明专利公开了一种智能化教室空余座位识别方法,包括:摄像头拍摄教室内座位图像;计算服务器对拍摄到的座位图像进行图像标定,计算出座位图像区域左下、右下、左上、右上4个角点的坐标,4个角点的坐标围成主视区域;计算服务器将主视区域进行梯形校正,利用透视变换将主视区域拉伸为矩形,得到校正图像;计算服务器利用深度学习模型对校正图像中人的位置进行检测,得到校正图像中每个人的中心点坐标,若坐标落在座位区域,则此座位有人,否则,则无人。上述识别方法识别准确,适应性强可广泛应用于高校教室综合管理系统中。但由于上述识别方法中需要对单个座位图像进行图像识别,但由于图书馆等其他场所的桌子为一个整体,一个桌子上设有多个座位,摄像头拍摄的某个座位上的人的投影还会在相邻的另一个座位上,因此这种情况下上述座位识别方法并不适用,识别难度高。
发明内容
本发明所要解决的技术问题是针对现有技术的现状,提供一种操作简单且便于后续图像识别的基于座位管理的图像切割方法。
本发明解决上述技术问题所采用的技术方案为:一种基于座位管理的图像切割方法,其特征在于:包括以下步骤:
S1、获取摄像头至少倾斜拍摄的具有一张完整桌面的视频流,并截取该视频流中的多帧图像;
S2、对S1中的任意一帧图像进行预处理,得到第一图像;
S3、对第一图像进行边缘检测,得到第一图像边缘化后的图像,记为第二图像;
S4、对S3中的第二图像提取轮廓,得到至少一个完整桌面的平行四边形轮廓;
S5、建立每个座位的切割块,并使用每个座位的切割块对该帧图像所对应的原始图像进行切割,得到每个座位图像;
其中在一个完整桌面的平行四边形轮廓上建立座位切割块的具体步骤为:
S5-1、将平行四边形上靠近摄像头的长斜边记为第一长斜边,另外一个长斜边记为第二长斜边,另外,桌子的单面或双面设置有座位,即:第一长斜边和/或第二长斜边设置有座位;
S5-2、根据座位的个数对平行四边形的第一长斜边和第二长斜边进行均分,得到平行四边形的两长斜边上的均分点;
S5-3、建立每个座位的切割块,其中,每个座位的切割块的宽度和高度均为预设值;
具体为:
对于第一长斜边上的座位采用以下方法建立切割块:其中,第一长斜边上按照距离摄像头从近到远依次记为第1座位、第2座位、…第N座位;N为座位总个数;
对于第1座位,以中点为该第1座位对应在第一长斜边上顶点的竖直边作为第1座位切割块的第一竖向边,以经过第一长斜边上第2座位中点、并与第1座位切割块的第一竖向边之间的距离为预设宽度的竖直边作为第1座位切割块的第二竖向边,并将两竖向边的两端分别相连而成的矩形作为该第1座位的切割块;
对于第j座位,以中点为第一长斜边上第j座位和第j-1座位共同均分点的竖直边作为第j座位切割块的第一竖向边,以经过第一长斜边上第j+1座位中点、并与第j座位切割块的第一竖向边之间的距离为预设宽度的竖直边作为第j座位切割块的第二竖向边,并将两竖向边的两端分别相连而成的矩形作为该第j座位的切割块;j=2、3、…N-1;
对于第N座位,以中点为第一长斜边上第N座位和第N-1座位共同均分点的竖直边作为第N座位切割块的第一竖向边,并将远离该座位方向设置的、与第N座位切割块的第一竖向边之间的距离为预设宽度的竖直线作为第N座位切割块的第二竖向边,并将两竖向边的两端分别相连而成的矩形作为第N座位的切割块;
对于第二长斜边上的座位采用以下方法建立切割块:其中,第二长斜边上按照距离摄像头从近到远依次记为第1’座位、第2’座位、…第N’座位;
对于第1’座位,以中点为该第1’座位上对应在第二长斜边上顶点的横线作为第1’座位切割块的其中一横向边,并以该横向边向上延伸而形成的高度为预设值的矩形作为第1’座位的切割块;
对于第i’座位,以中点为第二长斜边上第i’座位与第(i-1)’座位共同均分点的横线作为i’座位切割块的其中一横向边,并以该横向边向上延伸而形成的高度为预设值的矩形作为第i’座位的切割块;i’=2’、3’、…N’。
优选的,所述S3中边缘检测的具体算法为HED网络。HED网络输入的是原图像,输出的是二值图,因此适用于实时监测且边缘提取精确度高。
作为改进,所述S4中的具体步骤为:
S4-1、对第二图像进行Hough-Line直线检测,得到第三图像;
S4-2、将第三图像中得到的线段延长成直线,得到第四图像;
S4-3、利用第四图像中的直线作为参考,将第三图像短线段合并成一条长线段得到第五图像;
S4-4、计算出第五图像中得到的长线段的交点坐标,其中,临近的交叉点进行合并;
S4-5、对得到的所有交叉点,每次取四个,判断这四个点组成的四边形是否是一个平行四边形,如是,则该四边形为提取出的桌面轮廓,结束;如否,则该四边形不是最终提取出的桌面轮廓,并继续选取其他4个交叉点进行判断。
本方案中,所述S5-3中每个座位的切割块均为大小相同的矩形。
与现有技术相比,本发明的优点在于:通过对提取出的桌面的平行四边形轮廓建立每个座位的切割块,从而能方便用于座位管理。因此本方法中通过建立的切割块对原始图像进行分割,便于后续每个座位的状态识别,减少了图像识别复杂度,提高了图像识别准确率。
附图说明
图1为本发明实施例中图像切割方法的流程图;
图2为图1中建立每个座位切割块的示意图。
具体实施方式
以下结合附图实施例对本发明作进一步详细描述。
本发明的座位管理主要应用对图书馆、自习室等公共区域的座位进行管理,以及时获取每个座位上是否有人使用的情况,在图书馆、自习室等公共区域基本上都安装有高清摄像头,另外,高清摄像头一般都安装在图书馆或自习室等区域的高处,呈俯拍状态,通常情况下为了获取更大拍摄视角,摄像头则处于房间的顶角进行拍摄,从而使拍摄的桌子呈一定角度倾斜的平行四边形。
本发明中主要用于对高清摄像头倾斜拍摄的桌子图像进行实时切割,以方便后续对每个座位进行管理,如图1所示,具体为:一种基于座位管理的图像切割方法包括以下步骤:
S1、获取摄像头至少倾斜拍摄的具有一张完整桌面的视频流,并截取该视频流中的多帧图像;
S2、对S1中的任意一帧图像进行预处理,得到第一图像;
其中,为了提高边缘检测的准确度,当边缘检测需要输入二值化图像时,则该步骤中的预处理包括图像灰值化和图像二值化等操作;但如果后续边缘检测直接输入的是原图像的话则预处理为降噪等处理;
S3、对第一图像进行边缘检测,得到第一图像边缘化后的图像,记为第二图像;
本实施例中,边缘检测的具体算法为HED网络;通过HED网络作为边缘检测的方法比传统的Canny算法更加合理,另外,常见的YOLO和FCN神经网络模型不仅边缘化的精确度不够,结构较为复杂,并且运算量大,无法做到实时监测,因此本实施例中最优的还是采用HED网络,能得到更加精确的边缘图像;
S4、对S3中的第二图像提取轮廓,得到至少一个完整桌面的平行四边形轮廓;
对于公共区域摆放多张桌子的场景,提取出的每个桌面的平行四边形轮廓之间是不会重叠的;
具体步骤为:
S4-1、对第二图像进行Hough-Line直线检测,得到第三图像;
S4-2、将第三图像中得到的线段延长成直线,得到第四图像;
S4-3、利用第四图像中的直线作为参考,将第三图像短线段合并成一条长线段得到第五图像;
S4-4、计算出第五图像中得到的长线段的交点坐标,其中,临近的交叉点进行合并;
S4-5、对得到的所有交叉点,每次取四个,判断这四个点组成的四边形是否是一个平行四边形,如是,则该四边形为提取出的桌面轮廓,结束;如否,则该四边形不是最终提取出的桌面轮廓,并继续选取其他4个交叉点进行判断;
其中,平行四边形的判断条件可以是:两对边是否平行,边长的比值等,每条边是否可以和对应的交叉点的关联线段重合也是一很重要的判断条件,如果两者不能重合,则这个四边形就不是我们所希望检测出来的平行四边形;
S5、建立每个座位的切割块,并使用每个座位的切割块对该帧图像所对应的原始图像进行切割,得到每个座位图像;
其中如图2所示,在一个完整桌面的平行四边形轮廓上建立座位切割块的具体步骤为:
S5-1、将平行四边形上靠近摄像头的长斜边记为第一长斜边,另外一个长斜边记为第二长斜边,另外,桌子的单面或双面设置有座位,即:第一长斜边和/或第二长斜边设置有座位;
S5-2、根据座位的个数对平行四边形的第一长斜边和第二长斜边进行均分,得到平行四边形的两长斜边上的均分点;
S5-3、建立每个座位的切割块,其中,每个座位的切割块的宽度和高度均为预设值;
具体为:
对于第一长斜边上的座位采用以下方法建立切割块:其中,第一长斜边上按照距离摄像头从近到远依次记为第1座位、第2座位、…第N座位;N为座位总个数;
对于第1座位,以中点为该第1座位对应在第一长斜边上顶点的竖直边作为第1座位切割块的第一竖向边,以经过第一长斜边上第2座位中点、并与第1座位切割块的第一竖向边之间的距离为预设宽度的竖直边作为第1座位切割块的第二竖向边,并将两竖向边的两端分别相连而成的矩形作为该第1座位的切割块;
对于第j座位,以中点为第一长斜边上第j座位和第j-1座位共同均分点的竖直边作为第j座位切割块的第一竖向边,以经过第一长斜边上第j+1座位中点、并与第j座位切割块的第一竖向边之间的距离为预设宽度的竖直边作为第j座位切割块的第二竖向边,并将两竖向边的两端分别相连而成的矩形作为该第j座位的切割块;j=2、3、…N-1;
对于第N座位,以中点为第一长斜边上第N座位和第N-1座位共同均分点的竖直边作为第N座位切割块的第一竖向边,并将远离该座位方向设置的、与第N座位切割块的第一竖向边之间的距离为预设宽度的竖直线作为第N座位切割块的第二竖向边,并将两竖向边的两端分别相连而成的矩形作为第N座位的切割块;
对于第二长斜边上的座位采用以下方法建立切割块:其中,第二长斜边上按照距离摄像头从近到远依次记为第1’座位、第2’座位、…第N’座位;
对于第1’座位,以中点为该第1’座位上对应在第二长斜边上顶点的横线作为第1’座位切割块的其中一横向边,并以该横向边向上延伸而形成的高度为预设值的矩形作为第1’座位的切割块;
对于第i’座位,以中点为第二长斜边上第i’座位与第(i-1)’座位共同均分点的横线作为i’座位切割块的其中一横向边,并以该横向边向上延伸而形成的高度为预设值的矩形作为第i’座位的切割块;i’=2’、3’、…N’。
为了方便切割,上述S5中每个座位的切割块均为大小相同的矩形,当然,也可根据实际情况设置矩形或其他形状,每个座位的切割块对应的高度、宽度、形状以及每个均根据实际情况调整。
另外,上述每个座位的切割块主要是每个座位上人所在的区域进行切割,从而以实现后续的座位上是否有人的识别,当然,也可以根据上述相同的方法改变切割块的大小以实现每个座位上对应的桌面区域的切割,以实现座位上是否存在占座的情况,因此这种方法能实现图书馆或自习室等公共区域的座位管理,且实时监测性强。
以上所述仅是本发明的优选实施方式,应当指出,对于本技术领域的普通技术人员来说,在不脱离本发明技术原理的前提下,还可以做出若干改进和润饰,这些改进和润饰也应视为本发明的保护范围。
Claims (4)
1.一种基于座位管理的图像切割方法,其特征在于:包括以下步骤:
S1、获取摄像头至少倾斜拍摄的具有一张完整桌面的视频流,并截取该视频流中的多帧图像;
S2、对S1中的任意一帧图像进行预处理,得到第一图像;
S3、对第一图像进行边缘检测,得到第一图像边缘化后的图像,记为第二图像;
S4、对S3中的第二图像提取轮廓,得到至少一个完整桌面的平行四边形轮廓;
S5、建立每个座位的切割块,并使用每个座位的切割块对该帧图像所对应的原始图像进行切割,得到每个座位图像;
其中在一个完整桌面的平行四边形轮廓上建立座位切割块的具体步骤为:
S5-1、将平行四边形上靠近摄像头的长斜边记为第一长斜边,另外一个长斜边记为第二长斜边,另外,桌子的单面或双面设置有座位,即:第一长斜边和/或第二长斜边设置有座位;
S5-2、根据座位的个数对平行四边形的第一长斜边和第二长斜边进行均分,得到平行四边形的两长斜边上的均分点;
S5-3、建立每个座位的切割块,其中,每个座位的切割块的宽度和高度均为预设值;
具体为:
对于第一长斜边上的座位采用以下方法建立切割块:其中,第一长斜边上按照距离摄像头从近到远依次记为第1座位、第2座位、…第N座位;N为座位总个数;
对于第1座位,以中点为该第1座位对应在第一长斜边上顶点的竖直边作为第1座位切割块的第一竖向边,以经过第一长斜边上第2座位中点、并与第1座位切割块的第一竖向边之间的距离为预设宽度的竖直边作为第1座位切割块的第二竖向边,并将两竖向边的两端分别相连而成的矩形作为该第1座位的切割块;
对于第j座位,以中点为第一长斜边上第j座位和第j-1座位共同均分点的竖直边作为第j座位切割块的第一竖向边,以经过第一长斜边上第j+1座位中点、并与第j座位切割块的第一竖向边之间的距离为预设宽度的竖直边作为第j座位切割块的第二竖向边,并将两竖向边的两端分别相连而成的矩形作为该第j座位的切割块;j=2、3、…N-1;
对于第N座位,以中点为第一长斜边上第N座位和第N-1座位共同均分点的竖直边作为第N座位切割块的第一竖向边,并将远离该座位方向设置的、与第N座位切割块的第一竖向边之间的距离为预设宽度的竖直线作为第N座位切割块的第二竖向边,并将两竖向边的两端分别相连而成的矩形作为第N座位的切割块;
对于第二长斜边上的座位采用以下方法建立切割块:其中,第二长斜边上按照距离摄像头从近到远依次记为第1’座位、第2’座位、…第N’座位;
对于第1’座位,以中点为该第1’座位上对应在第二长斜边上顶点的横线作为第1’座位切割块的其中一横向边,并以该横向边向上延伸而形成的高度为预设值的矩形作为第1’座位的切割块;
对于第i’座位,以中点为第二长斜边上第i’座位与第(i-1)’座位共同均分点的横线作为i’座位切割块的其中一横向边,并以该横向边向上延伸而形成的高度为预设值的矩形作为第i’座位的切割块;i’=2’、3’、…N’。
2.根据权利要求1所述的基于座位管理的图像切割方法,其特征在于:所述S3中边缘检测的具体算法为HED网络。
3.根据权利要求1所述的基于座位管理的图像切割方法,其特征在于:所述S4中的具体步骤为:
S4-1、对第二图像进行Hough-Line直线检测,得到第三图像;
S4-2、将第三图像中得到的线段延长成直线,得到第四图像;
S4-3、利用第四图像中的直线作为参考,将第三图像短线段合并成一条长线段得到第五图像;
S4-4、计算出第五图像中得到的长线段的交点坐标,其中,临近的交叉点进行合并;
S4-5、对得到的所有交叉点,每次取四个,判断这四个点组成的四边形是否是一个平行四边形,如是,则该四边形为提取出的桌面轮廓,结束;如否,则该四边形不是最终提取出的桌面轮廓,并继续选取其他4个交叉点进行判断。
4.根据权利要求1~3任一项所述的基于座位管理的图像切割方法,其特征在于:所述S5-3中每个座位的切割块均为大小相同的矩形。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110252116.4A CN112906703A (zh) | 2021-03-08 | 2021-03-08 | 一种基于座位管理的图像切割方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110252116.4A CN112906703A (zh) | 2021-03-08 | 2021-03-08 | 一种基于座位管理的图像切割方法 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN112906703A true CN112906703A (zh) | 2021-06-04 |
Family
ID=76107944
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202110252116.4A Withdrawn CN112906703A (zh) | 2021-03-08 | 2021-03-08 | 一种基于座位管理的图像切割方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN112906703A (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113792638A (zh) * | 2021-09-07 | 2021-12-14 | 上海电力大学 | 基于Parallelogram-YOLOv4的火电厂雨排口污染物识别方法 |
-
2021
- 2021-03-08 CN CN202110252116.4A patent/CN112906703A/zh not_active Withdrawn
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113792638A (zh) * | 2021-09-07 | 2021-12-14 | 上海电力大学 | 基于Parallelogram-YOLOv4的火电厂雨排口污染物识别方法 |
CN113792638B (zh) * | 2021-09-07 | 2024-03-05 | 上海电力大学 | 基于Parallelogram-YOLOv4的火电厂雨排口污染物识别方法 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN109635694B (zh) | 一种行人检测方法、装置、设备及计算机可读存储介质 | |
Nagao et al. | Region extraction and shape analysis in aerial photographs | |
CN104933710B (zh) | 基于监控视频下的商店人流轨迹智能分析方法 | |
CN100361138C (zh) | 视频序列中人脸的实时检测与持续跟踪的方法及系统 | |
CN1312625C (zh) | 基于游程邻接图的复杂背景彩色图像中字符提取方法 | |
CN105205488B (zh) | 基于Harris角点和笔画宽度的文字区域检测方法 | |
CN109949578A (zh) | 一种基于深度学习的车辆压线违法自动审核方法 | |
CN107679503A (zh) | 一种基于深度学习的人群计数算法 | |
CN101833664A (zh) | 基于稀疏表达的视频图像文字检测方法 | |
CN103295009B (zh) | 基于笔画分解的车牌字符识别方法 | |
CN103473950A (zh) | 一种停车场车位监控方法 | |
CN103824059A (zh) | 一种基于视频图像序列的人脸表情识别方法 | |
CN110321769A (zh) | 一种多尺寸货架商品检测方法 | |
CN102663354A (zh) | 人脸标定方法和系统 | |
CN112883978A (zh) | 一种基于神经网络的座位识别方法 | |
CN103020993A (zh) | 一种双通道颜色对比度融合的视觉显著性检测方法 | |
CN103440633B (zh) | 一种数字图像自动祛除斑点的方法 | |
CN106297492A (zh) | 一种教育玩具套件及利用颜色和轮廓识别编程模块的方法 | |
CN108537787A (zh) | 一种人脸图像的质量判定方法 | |
CN106355592A (zh) | 一种教育玩具套件及其电路元件和电线的识别方法 | |
CN112906703A (zh) | 一种基于座位管理的图像切割方法 | |
CN108460833A (zh) | 一种基于bim构建传统建筑数字化保护与修复的信息平台 | |
CN106683051A (zh) | 一种图像拼接方法及装置 | |
CN107264570A (zh) | 钢轨光带分布检测装置与方法 | |
CN108564638B (zh) | 一种基于地理图像学确定人流热区的方法和装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
WW01 | Invention patent application withdrawn after publication |
Application publication date: 20210604 |
|
WW01 | Invention patent application withdrawn after publication |