CN113033472A - 一种基于智能ar眼镜的实时直播和人脸识别系统 - Google Patents

一种基于智能ar眼镜的实时直播和人脸识别系统 Download PDF

Info

Publication number
CN113033472A
CN113033472A CN202110407553.9A CN202110407553A CN113033472A CN 113033472 A CN113033472 A CN 113033472A CN 202110407553 A CN202110407553 A CN 202110407553A CN 113033472 A CN113033472 A CN 113033472A
Authority
CN
China
Prior art keywords
module
face recognition
glasses
intelligent
real
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202110407553.9A
Other languages
English (en)
Inventor
张晓峰
邱小锋
王青峰
刘波
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Gifpay Information Technology Co ltd
Original Assignee
Gifpay Information Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Gifpay Information Technology Co ltd filed Critical Gifpay Information Technology Co ltd
Priority to CN202110407553.9A priority Critical patent/CN113033472A/zh
Publication of CN113033472A publication Critical patent/CN113033472A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G06V40/168—Feature extraction; Face representation
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/017—Head mounted
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/20—Image preprocessing
    • G06V10/30—Noise filtering
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/40—Scenes; Scene-specific elements in video content
    • G06V20/41—Higher-level, semantic clustering, classification or understanding of video scenes, e.g. detection, labelling or Markovian modelling of sport events or news items
    • G06V20/42—Higher-level, semantic clustering, classification or understanding of video scenes, e.g. detection, labelling or Markovian modelling of sport events or news items of sport video content
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G06V40/172—Classification, e.g. identification
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/017—Head mounted
    • G02B2027/0178—Eyeglass type

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Human Computer Interaction (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Computational Linguistics (AREA)
  • Software Systems (AREA)
  • Optics & Photonics (AREA)
  • Studio Devices (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

本发明公开了一种基于智能AR眼镜的实时直播和人脸识别系统，属于人脸识别技术领域，包括视频影像采集模块、用户移动端、人脸识别模块、镜头捕捉追踪模块、音频采集模块、无线传输模块和智能AR眼镜；其中，用户移动端包括选择输入模块；智能AR眼镜包括无线通讯模块、中央处理模块、声音播放模块、影像投影模块、影像显示模块和供电模块；本发明设置有人脸识别模块和镜头捕捉追踪模块，其通过人脸识别和捕捉追踪可以实现实时镜头切换，得到人脸识别对象的比赛画面，再将采集到音频信息一同发送至智能AR眼镜，进而使体育场馆后座球迷既可以体验现场氛围又能近距离观看喜爱球星表现，从而有利于提高现场球迷观赛体验感。

Description

一种基于智能AR眼镜的实时直播和人脸识别系统
技术领域
本发明涉及人脸识别技术领域，尤其涉及一种基于智能AR眼镜的实时直播和人脸识别系统。
背景技术
经检索，中国专利号CN111783674A公开了一种基于AR眼镜的人脸识别方法和系统，该发明虽然可根据不同使用环境切换工作模式，但应用场景有限，无法应用于实时直播场景；足球作为全球第一大运动，其受到数以万人的追捧和青睐；而每四年一届的世界杯现场更是人潮汹涌，让能容纳上万人次的体育馆座无虚席，但庞大的体育馆也给一些球迷带来一些不适；由于赛事火爆一票难求，大部分的球迷都只能选择买球场后座，这使得他们只能通过中央大屏幕来进行足球现场的直播观看，导致观赛体验感并不理想，并且他们也无法近距离的实时观看到他们所喜爱球星的精彩表现，这使得既想体验现场氛围又想近距离观看喜爱球星表现得的他们非常纠结；而随着科技的不断发展，智能AR眼镜被研发出来，结合人脸识别，则可以很好解决上述问题，进而有利于提高现场球迷的观赛体验感；因此，发明出一种基于智能AR眼镜的实时直播和人脸识别系统变得尤为重要；
现有基于智能AR眼镜的人脸识别系统，其应用场景有限，无法针对足球实时直播场景进行球员人脸识别和镜头捕捉追踪，进而无法满足体育场馆后座球迷想要近距离观看喜爱球星表现的愿望，从而容易降低体育场馆后座球迷的观赛体验感；为此，我们提出一种基于智能AR眼镜的实时直播和人脸识别系统。
发明内容
本发明的目的是为了解决现有技术中存在的缺陷，而提出的一种基于智能AR眼镜的实时直播和人脸识别系统。
为了实现上述目的，本发明采用了如下技术方案：
一种基于智能AR眼镜的实时直播和人脸识别系统，包括视频影像采集模块、用户移动端、人脸识别模块、镜头捕捉追踪模块、音频采集模块、无线传输模块和智能AR眼镜；
其中，所述用户移动端包括选择输入模块；所述智能AR眼镜包括无线通讯模块、中央处理模块、声音播放模块、影像投影模块、影像显示模块和供电模块；所述智能AR眼镜和人脸识别模块均与智能AR眼镜无线通信连接。
进一步地，所述视频影像采集模块具体为足球场周围的若干个摄像机位，用于实时获取足球场上所有球员的比赛画面；所述用户移动端具体为电子通讯设备，用于与智能AR眼镜和人脸识别模块建立联接；所述选择输入模块具体为APP，用于用户根据爱好选择人脸识别对象。
进一步地，所述人脸识别模块用于根据神经网络并结合比赛画面对人脸识别对象进行人脸识别检测，得到具体识别目标，其具体识别过程如下：
S1：图像获取，获取足球场上所有球员的图像；
S2：图像预处理，对获取到的足球场上所有球员的图像进行图像灰度转换和图像噪声去除，并提取其像素值特征，得到球员人脸样本特征集；
S3：构建分类器，将球员人脸样本特征集作为输入源进行输入，得到人脸识别模型；
S4：最后将用户根据爱好选择的人脸识别对象输入人脸识别模型中，得到具体识别目标。
进一步地，所述镜头捕捉追踪模块用于根据具体识别目标捕捉追踪人脸识别对象的比赛画面，其具体过程如下：
SS1：获取具体识别目标；
SS2：根据具体识别目标对若干个摄像机位进行目标捕捉追踪，得到追踪结果；
SS3：根据追踪结果进行实时镜头切换，得到人脸识别对象的比赛画面。
进一步地，所述音频采集模块用于实时获取足球场上和场外的音频信息，所述音频信息包括解说声音、球员声音和裁判声音；所述无线传输模块用于将获取到的音频信息以及人脸识别对象的比赛画面进行调制解调，并无线传输给智能AR眼镜。
进一步地，所述无线通讯模块用于接收调制解调后的音频信息以及人脸识别对象的比赛画面，并将其发送至中央处理模块；所述中央处理模块用于对音频信息以及人脸识别对象的比赛画面进行模数转化，并将音频信息和人脸识别对象的比赛画面分别发送至声音播放模块和影像投影模块。
进一步地，所述声音播放模块具体为扬声器，用于将音频信息进行外放；所述影像投影模块用于将人脸识别对象的比赛画面投影于影像显示模块；所述影像显示模块用于将人脸识别对象的比赛画面反馈显示给用户。
相比于现有技术，本发明的有益效果在于：
1、该基于智能AR眼镜的实时直播和人脸识别系统设置有人脸识别模块和镜头捕捉追踪模块，其人脸识别模块通过神经网络构建得到人脸识别模型，从而可以针对用于所选择的人脸识别对象进行目标识别和确定；此外，镜头捕捉追踪模块通过具体识别目标对若干个摄像机位进行目标捕捉追踪，得到追踪结果，之后根据追踪结果进行实时镜头切换，进而有利于实时获取人脸识别对象的比赛画面；
2、该基于智能AR眼镜的实时直播和人脸识别系统设置有智能AR眼镜，其包括无线通讯模块、中央处理模块、声音播放模块、影像投影模块、影像显示模块和供电模块，该智能AR眼镜通过对采集到的音频信息和人脸识别对象的比赛画面进行模数转换和投影显示，使体育场馆后座球迷既可以体验现场氛围又能近距离观看喜爱球星表现，从而有利于提高现场球迷观赛体验感。
附图说明
附图用来提供对本发明的进一步理解，并且构成说明书的一部分，与本发明的实施例一起用于解释本发明，并不构成对本发明的限制。
图1为本发明提出的一种基于智能AR眼镜的实时直播和人脸识别系统的整体结构示意图。
具体实施方式
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。
在本发明的描述中，需要理解的是，术语“上”、“下”、“前”、“后”、“左”、“右”、“顶”、“底”、“内”、“外”等指示的方位或位置关系为基于附图所示的方位或位置关系，仅是为了便于描述本发明和简化描述，而不是指示或暗示所指的装置或元件必须具有特定的方位、以特定的方位构造和操作，因此不能理解为对本发明的限制。
实施例1
参照图1，一种基于智能AR眼镜的实时直播和人脸识别系统，包括视频影像采集模块、用户移动端、人脸识别模块、镜头捕捉追踪模块、音频采集模块、无线传输模块和智能AR眼镜；
其中，用户移动端包括选择输入模块；智能AR眼镜包括无线通讯模块、中央处理模块、声音播放模块、影像投影模块、影像显示模块和供电模块；智能AR眼镜和人脸识别模块均与智能AR眼镜无线通信连接。
视频影像采集模块具体为足球场周围的若干个摄像机位，用于实时获取足球场上所有球员的比赛画面；用户移动端具体为电子通讯设备，用于与智能AR眼镜和人脸识别模块建立联接；选择输入模块具体为APP，用于用户根据爱好选择人脸识别对象。
人脸识别模块用于根据神经网络并结合比赛画面对人脸识别对象进行人脸识别检测，得到具体识别目标，其具体识别过程如下：
S1：图像获取，获取足球场上所有球员的图像；
S2：图像预处理，对获取到的足球场上所有球员的图像进行图像灰度转换和图像噪声去除，并提取其像素值特征，得到球员人脸样本特征集；
S3：构建分类器，将球员人脸样本特征集作为输入源进行输入，得到人脸识别模型；
S4：最后将用户根据爱好选择的人脸识别对象输入人脸识别模型中，得到具体识别目标。
镜头捕捉追踪模块用于根据具体识别目标捕捉追踪人脸识别对象的比赛画面，其具体过程如下：
SS1：获取具体识别目标；
SS2：根据具体识别目标对若干个摄像机位进行目标捕捉追踪，得到追踪结果；
SS3：根据追踪结果进行实时镜头切换，得到人脸识别对象的比赛画面。
具体的，该基于智能AR眼镜的实时直播和人脸识别系统通过设置有人脸识别模块和镜头捕捉追踪模块，其人脸识别模块通过神经网络构建得到人脸识别模型，从而可以针对用于所选择的人脸识别对象进行目标识别和确定。
实施例2
一种基于智能AR眼镜的实时直播和人脸识别系统，还包括音频采集模块，音频采集模块用于实时获取足球场上和场外的音频信息，音频信息包括解说声音、球员声音和裁判声音；无线传输模块用于将获取到的音频信息以及人脸识别对象的比赛画面进行调制解调，并无线传输给智能AR眼镜。
无线通讯模块用于接收调制解调后的音频信息以及人脸识别对象的比赛画面，并将其发送至中央处理模块；中央处理模块用于对音频信息以及人脸识别对象的比赛画面进行模数转化，并将音频信息和人脸识别对象的比赛画面分别发送至声音播放模块和影像投影模块。
声音播放模块具体为扬声器，用于将音频信息进行外放；影像投影模块用于将人脸识别对象的比赛画面投影于影像显示模块；影像显示模块用于将人脸识别对象的比赛画面反馈显示给用户，该智能AR眼镜通过对采集到的音频信息和人脸识别对象的比赛画面进行模数转换和投影显示，使体育场馆后座球迷既可以体验现场氛围又能近距离观看喜爱球星表现，从而有利于提高现场球迷观赛体验感。
本发明的工作原理及使用流程：该基于智能AR眼镜的实时直播和人脸识别系统，在使用时需要佩戴智能AR眼镜，然后视频影像采集模块会实时获取足球场上所有球员的比赛画面；此时用户可以通过电子通讯设备与智能AR眼镜和人脸识别模块建立联接，之后再通过选择输入模块选择人脸识别对象；人脸识别对象选择完成后，人脸识别模块会根据神经网络并结合比赛画面对人脸识别对象进行人脸识别检测，其具体过程如下：第一步图像获取，获取足球场上所有球员的图像；第二步图像预处理，对获取到的足球场上所有球员的图像进行图像灰度转换和图像噪声去除，并提取其像素值特征，得到球员人脸样本特征集；第三步：构建分类器，将球员人脸样本特征集作为输入源进行输入，得到人脸识别模型；第四步最后将用户根据爱好选择的人脸识别对象输入人脸识别模型中，得到具体识别目标；之后镜头捕捉追踪模块会根据具体识别目标捕捉追踪人脸识别对象的比赛画面；与此同时音频采集模块会实时获取足球场上和场外的音频信息；然后无线传输模块会将获取到的音频信息以及人脸识别对象的比赛画面进行调制解调，并无线传输给智能AR眼镜；之后无线通讯模块会接收调制解调后的音频信息以及人脸识别对象的比赛画面，并将其发送至中央处理模块；然后中央处理模块会对音频信息以及人脸识别对象的比赛画面进行模数转化，并将音频信息和人脸识别对象的比赛画面分别发送至声音播放模块和影像投影模块；然后声音播放模块会将音频信息进行外放，同时影像投影模块会将人脸识别对象的比赛画面投影于影像显示模块，最后影像显示模块将人脸识别对象的比赛画面反馈显示给用户；本发明设置有人脸识别模块和镜头捕捉追踪模块，其人脸识别模块根据用户爱好选择进行球员人脸识别，得到识别目标，而镜头捕捉追踪模块根据识别目标对若干个摄像机位进行目标捕捉追踪，得到追踪结果，之后根据追踪结果进行实时镜头切换，得到人脸识别对象的比赛画面，再将采集到音频信息一同发送至智能AR眼镜，进而使体育场馆后座球迷既可以体验现场氛围又能近距离观看喜爱球星表现，从而有利于提高现场球迷观赛体验感。
以上所述，仅为本发明较佳的具体实施方式，但本发明的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本发明揭露的技术范围内，根据本发明的技术方案及其发明构思加以等同替换或改变，都应涵盖在本发明的保护范围之内。

Claims (7)

1.一种基于智能AR眼镜的实时直播和人脸识别系统，其特征在于，包括视频影像采集模块、用户移动端、人脸识别模块、镜头捕捉追踪模块、音频采集模块、无线传输模块和智能AR眼镜；
其中，所述用户移动端包括选择输入模块；所述智能AR眼镜包括无线通讯模块、中央处理模块、声音播放模块、影像投影模块、影像显示模块和供电模块；所述智能AR眼镜和人脸识别模块均与智能AR眼镜无线通信连接。
2.根据权利要求1所述的一种基于智能AR眼镜的实时直播和人脸识别系统，其特征在于，所述视频影像采集模块具体为足球场周围的若干个摄像机位，用于实时获取足球场上所有球员的比赛画面；所述用户移动端具体为电子通讯设备，用于与智能AR眼镜和人脸识别模块建立联接；所述选择输入模块具体为APP，用于用户根据爱好选择人脸识别对象。
3.根据权利要求1所述的一种基于智能AR眼镜的实时直播和人脸识别系统，其特征在于，所述人脸识别模块用于根据神经网络并结合比赛画面对人脸识别对象进行人脸识别检测，得到具体识别目标，其具体识别过程如下：
S1：图像获取，获取足球场上所有球员的图像；
S2：图像预处理，对获取到的足球场上所有球员的图像进行图像灰度转换和图像噪声去除，并提取其像素值特征，得到球员人脸样本特征集；
S3：构建分类器，将球员人脸样本特征集作为输入源进行输入，得到人脸识别模型；
S4：最后将用户根据爱好选择的人脸识别对象输入人脸识别模型中，得到具体识别目标。
4.根据权利要求1所述的一种基于智能AR眼镜的实时直播和人脸识别系统，其特征在于，所述镜头捕捉追踪模块用于根据具体识别目标捕捉追踪人脸识别对象的比赛画面，其具体过程如下：
SS1：获取具体识别目标；
SS2：根据具体识别目标对若干个摄像机位进行目标捕捉追踪，得到追踪结果；
SS3：根据追踪结果进行实时镜头切换，得到人脸识别对象的比赛画面。
5.根据权利要求1所述的一种基于智能AR眼镜的实时直播和人脸识别系统，其特征在于，所述音频采集模块用于实时获取足球场上和场外的音频信息，所述音频信息包括解说声音、球员声音和裁判声音；所述无线传输模块用于将获取到的音频信息以及人脸识别对象的比赛画面进行调制解调，并无线传输给智能AR眼镜。
6.根据权利要求1所述的一种基于智能AR眼镜的实时直播和人脸识别系统，其特征在于，所述无线通讯模块用于接收调制解调后的音频信息以及人脸识别对象的比赛画面，并将其发送至中央处理模块；所述中央处理模块用于对音频信息以及人脸识别对象的比赛画面进行模数转化，并将音频信息和人脸识别对象的比赛画面分别发送至声音播放模块和影像投影模块。
7.根据权利要求1所述的一种基于智能AR眼镜的实时直播和人脸识别系统，其特征在于，所述声音播放模块具体为扬声器，用于将音频信息进行外放；所述影像投影模块用于将人脸识别对象的比赛画面投影于影像显示模块；所述影像显示模块用于将人脸识别对象的比赛画面反馈显示给用户。
CN202110407553.9A 2021-04-15 2021-04-15 一种基于智能ar眼镜的实时直播和人脸识别系统 Pending CN113033472A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110407553.9A CN113033472A (zh) 2021-04-15 2021-04-15 一种基于智能ar眼镜的实时直播和人脸识别系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110407553.9A CN113033472A (zh) 2021-04-15 2021-04-15 一种基于智能ar眼镜的实时直播和人脸识别系统

Publications (1)

Publication Number Publication Date
CN113033472A true CN113033472A (zh) 2021-06-25

Family

ID=76457144

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110407553.9A Pending CN113033472A (zh) 2021-04-15 2021-04-15 一种基于智能ar眼镜的实时直播和人脸识别系统

Country Status (1)

Country Link
CN (1) CN113033472A (zh)

Similar Documents

Publication Publication Date Title
WO2021031915A1 (zh) 一种智能录像方法和装置
CN108259921B (zh) 一种基于场景切换的多角度直播系统及切换方法
CN108471451A (zh) 一种校园体育训练/比赛运动场/馆信息化物联网系统
US7966636B2 (en) Multi-video receiving method and apparatus
CN1750618A (zh) 在接收机上观看视听文档的方法和观看这种文档的接收机
CN107529021B (zh) 隧道型全景视频采集、分发、定位跟踪系统及其方法
CN105210371A (zh) 具有智能缓冲的移动设备
CN112533003B (zh) 一种视频处理系统、装置、方法
CN104834375A (zh) 基于增强现实的游乐园指南系统
CN109961039B (zh) 一种个人进球视频捕捉方法及系统
CN107241613A (zh) 体育场馆赛况多角度直播系统
CN114143561B (zh) 一种超高清视频多视角漫游播放方法
CN108769755A (zh) 高分辨率全景视频直播拍照系统与方法
CN109525806A (zh) 便携式显示装置、图像供给装置、显示系统
CN113315980A (zh) 智能直播方法及直播物联网系统
CN114025183A (zh) 直播方法、装置、设备、系统和存储介质
JP2017212665A (ja) 競争路に使われる個人動画リアルタイム生放送方法及び生放送システム
CN113033472A (zh) 一种基于智能ar眼镜的实时直播和人脸识别系统
CN111897246B (zh) 基于信息传媒以及运动比赛的智能气氛烘托方法及其系统
JP3201804U (ja) 特に音声／動画データにおけるポータブル動画通信デバイス及びデータ送信方法、ならびにその用途
CN103327068B (zh) 一种基于音频脉冲信号的信息同步与交互方法及其系统
CN210466804U (zh) 一种远程互动教育系统
CN113938713B (zh) 一种多路超高清视频多视角漫游播放方法
CN204104045U (zh) 一套具有摄像、无线视频传输、延时播放和录像功能的便携式发球训练辅助系统
CN110213611A (zh) 一种基于人工智能视觉识别技术的球类赛场摄像实现方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination