CN115550704B - 一种基于多功能家电的远程家人互动活动方法 - Google Patents

一种基于多功能家电的远程家人互动活动方法 Download PDF

Info

Publication number
CN115550704B
CN115550704B CN202211523458.6A CN202211523458A CN115550704B CN 115550704 B CN115550704 B CN 115550704B CN 202211523458 A CN202211523458 A CN 202211523458A CN 115550704 B CN115550704 B CN 115550704B
Authority
CN
China
Prior art keywords
video
remote
teaching
screen
terminal
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202211523458.6A
Other languages
English (en)
Other versions
CN115550704A (zh
Inventor
雷力
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Lei Li
Original Assignee
Chengdu Applause Rulei Network Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Chengdu Applause Rulei Network Technology Co ltd filed Critical Chengdu Applause Rulei Network Technology Co ltd
Priority to CN202211523458.6A priority Critical patent/CN115550704B/zh
Publication of CN115550704A publication Critical patent/CN115550704A/zh
Application granted granted Critical
Publication of CN115550704B publication Critical patent/CN115550704B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/4104—Peripherals receiving signals from specially adapted client devices
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42203—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS] sound input device, e.g. microphone
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42204—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
    • H04N21/42206—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor characterized by hardware details
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/4223—Cameras
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/433—Content storage operation, e.g. storage operation in response to a pause request, caching operations
    • H04N21/4334—Recording operations
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/44016—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving splicing one content stream with another content stream, e.g. for substituting a video clip
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/485—End-user interface for client configuration
    • H04N21/4854—End-user interface for client configuration for modifying image parameters, e.g. image brightness, contrast

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Closed-Circuit Television Systems (AREA)

Abstract

本发明公开一种基于多功能家电的远程家人互动活动系统及方法，系统包括带刹车双弹簧减震轮、无线键盘、电视支架、无线鼠标、无线遥控器、走地线槽、后置教学摄像头、前置教学摄像头、广角摄像头、摄像头支架、四阵列麦克风、数据线、视频终端和长盒；设置播放模块进行对照教学能够降低学习难度，图像分割单元将录像转换为既有黑白图像又有真彩色图像，便于用户掌握动作，在对照处理后录像学习时换浅色背景提高用户的专心程度，基于远程看护的方法能够让学习用户与教师侧远程实时互动教学，视频终端制作短视频用于家人互动活动，提升家庭间联谊活动质量，本发明既能制作短视频、开展教学活动、实现远程监控，又能看电视，可完全成为电视的替代品。

Description

一种基于多功能家电的远程家人互动活动方法
技术领域
本发明属于家电视频制作及教学活动技术领域，具体涉及一种基于多功能家电的远程家人互动活动系统及方法。
背景技术
目前短视频在网络上的热度非常高，用户越来越喜爱用电子设备观看和制作具有特色的短视频。用户在观看一些高水平的视频之后，往往会想模仿制作类似的视频。然而，高水平的视频一般需要通过专业工具、专业制作手法、专业动作指导制作，对于没有学习过专业制作技术的普通用户，仅通过视频画面难以了解其制作手法，导致用户在模仿制作时，无法制作出满意的视频。
现在一部分家人可能远隔千里去其他城市打工，即使在同一个城市上班也是远离家中的。在上班期间，家里的老人、孩子、宠物也需要远程关怀。现在也有远程监控，家长可以通过监控与孩子对话，但看不到视频，这种交流作用小了很多。
以前一家人在客厅坐在沙发上观看电视，就电视内容或家事相互交流，家庭和睦的气氛在此聚集。现在人们看电视的意愿很少，已经转移到观看短视频去了。在沙发上，每人拿着手机各刷自己的短视频，家人之间缺乏交流。人们现在流行的制作短视频，还特别注意身体健康，上班的男士、女士流行跳健身操，退休老太流行跳广场舞，退休男士流行打太极拳。团队活动时，人们流行狼人杀、剧本杀。但现在没有这样一种与人们爱好同时进步的家电。客厅的摆放电视机的位置，势必应该有一种契合人们刷短视频、制作短视频的习惯、契合健身活动、契合生活品质提升、契合留守儿童看护需求、契合远程监控需求的多功能家电，来接替单一功能的电视机。从而实现家人之间既能进行广泛的交流互动，进行各种流行的健身运动，又能观看电视，拉近远方的亲戚朋友关系，重新聚集家庭和睦的气氛。
发明内容
针对现有技术中的上述不足，本发明提供的一种基于多功能家电的远程家人互动活动系统及方法解决了家人间进行远程互动交流活动方法单一的问题。
为了达到上述发明目的，本发明采用的技术方案为：一种基于多功能家电的远程家人互动活动系统，包括带刹车双弹簧减震轮、无线键盘、电视支架、无线鼠标、无线遥控器、走地线槽、后置教学摄像头、摄像头支架、四阵列麦克风、数据线、视频终端和长盒；
其中，所述带刹车双弹簧减震轮设置于所述电视支架的底部，所述视频终端活动设置于所述电视支架的顶端，所述无线键盘、无线鼠标、无线遥控器均与所述视频终端通信连接，所述四阵列麦克风固定设置于所述视频终端的长边沿正中心位置，所述视频终端设置有USB接口，所述数据线的一端与所述USB接口通信连接，所述数据线的另一端与所述后置教学摄像头通信连接，所述后置教学摄像头固定设置于所述摄像头支架的顶端，所述长盒设置于所述视频终端的下方。
进一步地：所述视频终端的顶端还设置有第一柔性连接杆、激光测距仪、前置教学摄像头、广角摄像头、反向伞形状灯罩、补光灯、第二柔性连接杆和内腔；
其中，所述第一柔性连接杆底端与所述视频终端的顶端固定连接，所述第一柔性连接杆顶端与所述前置教学摄像头固定连接，并与所述激光测距仪卡扣连接，所述第二柔性连接杆顶端与所述补光灯固定连接，所述第二柔性连接杆底端与所述视频终端的顶端固定连接，所述内腔中设置有反向伞形状灯罩，所述反向伞形状灯罩在内腔中处于收起状态。
上述进一步方案的有益效果为：后置教学摄像头采用数据线通信，可以避免数据传输受无线信号的干扰。
进一步地：所述视频终端的左边或者右边设置有舞蹈镜，所述舞蹈镜与所述视频终端处于同一直线上，并且所述舞蹈镜与所述视频终端同步横放或竖放，所述舞蹈镜活动设置于所述舞蹈镜支架的顶端，所述舞蹈镜支架的底部固定设置带刹车双弹簧减震轮。
进一步地：所述视频终端包括依次连接的远程开启屏幕模块、远程视频模块、录屏模块、播放模块、剪辑模块和数据库模块；
其中，所述远程视频模块包括远程监控单元和远程视频单元，所述播放模块设置有对照原录像学习单元，所述录屏模块设置有图像分割单元。
一种基于多功能家电的远程家人互动活动方法，包括以下步骤：
S1、基于开启的视频终端，进行远程监控与看护活动；
S2、基于开启的视频终端，进行对照教学活动；
S3、基于开启的视频终端，进行短视频制作与团队活动；
S4、基于完成的远程监控与看护活动、对照教学活动、短视频制作与团队活动，完成远程家人互动活动。
进一步地：所述S1中，所述远程监控与看护活动包括远程监控、远程开屏和远程看护；
所述远程监控的方法具体为：
通过远程监控单元开启广角摄像头进行广角录像，将录像存入视频终端，通过当视频终端中录像达到设定阈值时，控制远程监控单元删除最早的录像，并根据当前的录像进行人脸和人形特征分析识别，当分析识别结构为只存在未录入人脸或人形特征时，则通过视频终端播放报警声，并与用户的终端通信连接，通过视频终端屏幕显示用户的视频；
所述远程开屏的方法具体为：
通过用户移动端设备发送屏幕开启请求至视频终端，基于视频终端接收的屏幕开启请求，通过视频终端返回验证信息至用户移动端设备，根据用户移动端设备接收的验证信息，完成视频终端的屏幕开启；
所述远程看护的方法具体为：
基于用户照片，通过剪辑模块将用户全身像融合在视频终端的背景，并将融合后的图像存储于数据库模块，根据远程视频单元接收的用户头部图像生成绿幕序列图像，并将其图像解码后与融合后的图像进行融合，得到实时视频，并通过视频终端播放实时视频。
进一步地：所述S2中，对照教学活动包括远程教学和对照录像学习；
进行远程教学的方法具体为：
通过视频终端控制开启前置教学摄像头和后置教学摄像头；当开启前置教学摄像头时，所述远程视频单元将左右相反图像的信息进行显示；当开启后置教学摄像头时，通过视频终端将后置教学摄像头拍摄的图像数据发送至用户移动端设备；
所述对照录像学习的方法包括对照原录像学习和对照处理后录像学习。
上述进一步方案的有益效果为：左右屏幕进行相反图像的信息显示可以供用户在不分左右的情况下进行学习。
进一步地所述对照原录像学习的方法具体为：
通过对照学习单元将视频终端的屏幕分成左右屏幕，控制左屏幕播放教学录像，控制右屏幕播放后置教学摄像头和前置教学摄像头的录像；
其中，在播放教学录像时控制对照原录像学习单元对播放的录像进行暂停、快速前进、快速后退和慢速播放对应的动作；
所述对照处理后录像学习的方法具体为：
通过图像分割单元将教学录像中的背景序列图像只取绿色，得到绿幕照片，将绿幕照片中绿幕部分替换为浅色的背景序列图像，通过图像分割单元将教学录像中指定人体部位色彩不变，并将教学录像中剩余图像区域替换成黑白图像，通过视频终端（12）显示处理后的教学录像。
进一步地：所述S3中，所述短视频制作与团队活动包括短视频制作和远程团圆活动；
进行短视频制作的方法具体为：
通过剪辑模块根据短视频制作模板将视频素材进行处理，完成短视频制作；
进行远程团圆活动的方法具体为：
通过视频终端控制广角摄像头和四阵列麦克风，采集环境中所有声音和图像视频数据，通过剪辑模块根据短视频制作模板将所述声音和图像视频数据进行处理，生成远程团圆活动短视频，完成远程团圆活动；
进行团圆照制作的方法具体为：
获取需制作团圆照的家人照片，通过剪辑单元将家人照片中背景设置为绿色，并将所述家人照片进行融合拼接，生成团圆照。
进一步地：所述播放模块、录屏模块和剪辑模块的播放视频方法均为慢动作回归正常速度视频播放方法，所述慢动作回归正常速度视频播放的方法具体为：
通过光流法进行插帧处理，当进行慢动作视频播放时通过设置的第一播放阈值倍率进行慢动作视频播放，当进行回归正常速度视频播放时通过设置的第二播放阈值倍率进行回归正常速度视频播放，并根据播放的视频进行录屏；其中，第一播放阈值为N/10，第二播放阈值为10/N，N为大于等于1小于10的自然数；
所述录屏的视频用于进行视频剪辑，所述视频剪辑的方法具体为：
将录屏的视频进行剪辑并去除视频中的音频，将剪辑后的视频加入1倍倍率的制作音频，生成录屏视频对应的模仿音视频；
所述制作音频根据1倍倍率配音生成。
本发明的有益效果为：
（1）本发明提供的一种基于多功能家电的远程家人互动活动系统及方法，通过设置播放模块进行对照教学，能够降低了学习难度，图像分割单元将前置教学摄像头拍摄的录像转换为既有黑白图像又有真彩色图像，便于学习用户掌握动作，进行沉浸式录像的方法在对照处理后录像学习时去掉了背景，提高学习用户的专心程度，基于远程看护的方法能够让学习用户与教师侧远程实时互动教学，动作视频学习时，使用视频终端与舞蹈镜对照原录像学习，扩大了视野，便掌握动作要领。
（2）本发明的视频终端可以90度旋转，设置有四阵列麦克风和广角摄像头，可以收录设置环境的人员图像以及声音，加强了人与人之间的互动，可以开展远程家人互动活动，视频终端制作短视频用于家人互动活动，能够提升家庭间联谊活动质量。
（3）本发明既能制作短视频、开展教学活动、实现远程监控，又能看电视，可完全成为电视的替代品。
附图说明
图1为本发明提供的基于多功能家电的远程家人互动活动系统正面图一；
图2为本发明提供的基于多功能家电的远程家人互动活动系统正面图二；
图3为本发明提供的反向伞形状补光灯使用状态图。
图4为本发明一种基于多功能家电的远程家人互动活动方法的流程图。
其中：1、带刹车双弹簧减震轮；2、无线键盘；3、电视支架；4、无线鼠标；5、无线遥控器；6、走地线槽；7、后置教学摄像头；8、摄像头支架；9、四阵列麦克风；10、数据线；11、USB接口；12、视频终端；13、第一柔性连接杆；14、激光测距仪；15、前置教学摄像头；16、广角摄像头；17、反向伞形状灯罩；18、补光灯；19、第二柔性连接杆；20、内腔；21、长盒；22、舞蹈镜支架；23、舞蹈镜。
具体实施方式
下面对本发明的具体实施方式进行描述，以便于本技术领域的技术人员理解本发明，但应该清楚，本发明不限于具体实施方式的范围，对本技术领域的普通技术人员来讲，只要各种变化在所附的权利要求限定和确定的本发明的精神和范围内，这些变化是显而易见的，一切利用本发明构思的发明创造均在保护之列。
如图1~图3所示，在本发明的一个实施例中，一种基于多功能家电的远程家人互动活动系统，包括带刹车双弹簧减震轮1、无线键盘2、电视支架3、无线鼠标4、无线遥控器5、走地线槽6、后置教学摄像头7、摄像头支架8、四阵列麦克风9、数据线10、视频终端12和长盒21；
其中，所述带刹车双弹簧减震轮1设置于所述电视支架3的底部，所述视频终端12活动设置于所述电视支架3的顶端，所述无线键盘2、无线鼠标4、无线遥控器5均与所述视频终端12通信连接，所述四阵列麦克风9固定设置于所述视频终端12的长边沿正中心位置，所述视频终端12设置有USB接口11，所述数据线10的一端与所述USB接口11通信连接，所述数据线10的另一端与所述后置教学摄像头7通信连接，所述后置教学摄像头7固定设置于所述摄像头支架8的顶端，所述长盒21设置于所述视频终端12的下方。
带刹车双弹簧减震轮1设置于电视支架3和舞蹈镜支架22底部，可以有效地解决易碎品搬动安全的问题，无线遥控器5用于在进行对照教学时，执行播放暂停、后退、前进、加速和放慢的操作，所述长盒21用于放置无线键盘2、无线鼠标4、无线遥控器5和走地线槽6，视频终端12可以旋转90度放置于电视支架3顶端。
在本实施例中，视频终端12内置网络电视模块，网络电视模块预存网络电视软件，后置教学摄像头7通过USB接口11与视频终端12连接，连接USB接口11的数据线10通过走地线槽6，后置教学摄像头7替换原有的Wi-Fi摄像头是为了避免数据传输受无线信号的干扰，Wi-Fi的工作频率都是2.4GHz，会被其他工作频率为2.4GHz的设备干扰，例如微波炉，从而影响用户的根据后置教学摄像头7进行远程辅导或教学。
所述视频终端12的顶端还设置有第一柔性连接杆13、激光测距仪14、前置教学摄像头15、广角摄像头16、反向伞形状灯罩17、补光灯18、第二柔性连接杆19和内腔20；
其中，所述第一柔性连接杆13底端与所述视频终端12的顶端固定连接，所述第一柔性连接杆13顶端与所述前置教学摄像头15固定连接，并与所述激光测距仪14卡扣连接，所述第二柔性连接杆19顶端与所述补光灯18固定连接，所述第二柔性连接杆19底端与所述视频终端12的顶端固定连接，所述内腔20中设置有反向伞形状灯罩17，所述反向伞形状灯罩17在内腔20中处于收起状态。
激光测距仪14用于确定出镜人、器材、道具和前置后置教学镜头放置位置，内腔20用于放置第一柔性连接杆13、前置教学摄像头15、激光测距仪14、第二柔性连接杆19、补光灯18、反向伞形状灯罩17和广角摄像头16，广角摄像头16与内腔20固定相连。
所述视频终端12的左边或者右边设置有舞蹈镜23，所述舞蹈镜23与所述视频终端12处于同一直线上，并且舞蹈镜23与所述视频终端12同步横放或竖放，所述舞蹈镜23活动设置于所述舞蹈镜支架22的顶端，所述舞蹈镜支架22的底部固定设置带刹车双弹簧减震轮1。
舞蹈镜23用于显示视频终端12的视频，且舞蹈镜23可以采用横挂和竖挂方式，设置于舞蹈镜支架22的顶端。
所述视频终端12包括依次连接的远程开启屏幕模块、远程视频模块、录屏模块、播放模块、剪辑模块和数据库模块；
其中，所述远程视频模块包括远程监控单元和远程视频单元，所述播放模块设置有对照原录像学习单元，所述录屏模块设置有图像分割单元。
所述远程开启屏幕模块用于设置是否开启远程开屏，设置允许开屏的时间段、允许远程开屏的用户；
所述远程视频模块用于远程视频教学制作短视频以及教学其他手工操作的技术，还用于远程监控；
所述录屏模块用于播放视频时分区域分图像类型录屏；
所述剪辑模块用于剪辑远程视频模块、录屏模块存放在数据库模块中音视频和图片；
所述数据库模块用于存放远程视频模块、录屏模块、剪辑模块、远程开启屏幕模块所有音视频、图片和其他资料。
如图4所示，一种基于多功能家电的远程家人互动活动方法，包括以下步骤：
S1、基于开启的视频终端12，进行远程监控与看护活动；
S2、基于开启的视频终端12，进行对照教学活动；
S3、基于开启的视频终端12，进行短视频制作与团队活动；
S4、基于完成的远程监控与看护活动、对照教学活动、短视频制作与团队活动，完成远程家人互动活动。
所述S1中，所述远程监控与看护活动包括远程监控、远程开屏和远程看护；
所述远程监控的方法具体为：
通过远程监控单元开启广角摄像头16进行广角录像，将录像存入视频终端12，通过当视频终端12中录像达到设定阈值时，控制远程监控单元删除最早的录像，并根据当前的录像进行人脸和人形特征分析识别，当分析识别结构为只存在未录入人脸或人形特征时，则通过视频终端12播放报警声，并与用户的终端通信连接，通过视频终端12屏幕显示用户的视频；
在本实施例中，手机用户凭密码进入视频终端（12）内查看录像；监控区域内出现人员移动，所述广角摄像头(16)自动捕捉运动轨迹，跟踪追拍；
所述远程开屏的方法具体为：
通过用户移动端设备发送屏幕开启请求至视频终端12，基于视频终端12接收的屏幕开启请求，通过视频终端12返回验证信息至用户移动端设备，根据用户移动端设备接收的验证信息，完成视频终端12的屏幕开启；
所述远程看护的方法具体为：
基于用户照片，通过剪辑模块将用户全身像融合在视频终端12的背景，并将融合后的图像存储于数据库模块，根据远程视频单元接收的用户头部图像生成绿幕序列图像，并将其图像解码后与融合后的图像进行融合，得到实时视频，并通过视频终端12播放实时视频。
所述S2中，对照教学活动包括远程教学和对照录像学习；
进行远程教学的方法具体为：
通过视频终端12控制开启前置教学摄像头15和后置教学摄像头7；当开启前置教学摄像头15时，所述远程视频单元将左右相反图像的信息进行显示；当开启后置教学摄像头7时，通过视频终端12将后置教学摄像头7拍摄的图像数据发送至用户移动端设备；
所述对照录像学习的方法包括对照原录像学习和对照处理后录像学习。
由于广角摄像头16会造成身体图像弯曲，为了实现教学的目的将视频终端12的左右屏幕进行相反图像的信息显示，以供用户不分左右的情况下使用，当使用后置教学摄像头7时，远程视频单元将文字类图像原样发送给视频终端12，便于用户远程教育。
所述远程视频模块得到用户远程视频请求，远程视频模块将信息发送给远程开启屏幕模块，远程开启屏幕模块开启视频终端12的屏幕，视频终端12显示用户的视频，以供用户看护生病在床的家人，看护小孩、看护宠物时使用。
所述对照原录像学习的方法具体为：
通过对照原录像学习单元将视频终端12的屏幕分成左右屏幕，控制左屏幕播放教学录像，控制右屏幕播放后置教学摄像头7和前置教学摄像头15的录像；
所述对照处理后录像学习的方法具体为：
通过图像分割单元将教学录像中的背景序列图像只取绿色，得到绿幕照片，将绿幕照片中绿幕部分替换为浅色的背景序列图像，通过图像分割单元将教学录像中指定人体部位色彩不变，并将教学录像中剩余图像区域替换成黑白图像，通过视频终端12显示处理后的教学录像。
在本实施例中，教学录像包括健美操、健身操、广场舞和太极拳学习的内容。
通过图像分割单元将录像中背景替换成纯白色（R=255、G=255、B=255），维持录像中的指定人体部位色彩不变，并将录像中剩余物体替换成黑白图像（采用平均值法：Gray=（R+G+B）/3，也可以采用浮点法：Gray=R*0.3+G*0.59+B*0.11，或者整数法：Gray=(R*30+G*59+B*11)/100，但不使用Gray=G以及Gamma校正算法）。
图像的背景与前景的分割，具体情况下物体和背景的对比度在图像中的各处不是一样的，这时很难用一个统一的阈值将物体与背景分开。可以根据图像的局部特征分别采用不同的阈值进行分割，按照具体问题将图像分成若干子区域分别选择阈值，或者动态地根据一定的邻域范围选择每点处的阈值，进行图像分割。对于给定的图像，可以通过分析直方图的方法确定最佳的阈值，例如当直方图明显呈现双峰情况时，选择两个峰值的中点作为最佳阈值。
通过进行有分区域分图像类型录像，可以减少短视频模仿学习过程中的干扰。
其中，在播放教学录像时控制对照原录像学习单元对播放的录像进行暂停、快速前进、快速后退和慢速播放对应的动作；
所述S3中，所述短视频制作与团队活动包括短视频制作和远程团圆活动；
进行短视频制作的方法具体为：
通过剪辑模块根据短视频制作模板将视频素材进行处理，完成短视频制作；
短视频制作模板包括爱情、节气、节日、武侠风格、校园、美食、聚会、旅行、联谊活动、远程看护、家庭会议、教学活动、搞笑小品、狼人杀和剧本杀。
进行远程团圆活动的方法具体为：
通过视频终端12控制广角摄像头16和四阵列麦克风9，采集环境中所有声音和图像视频数据，通过剪辑模块根据短视频制作模板将所述声音和图像视频数据进行处理，生成远程团圆活动短视频，完成远程团圆活动；
进行团圆照制作的方法具体为：
获取需制作团圆照的家人照片，通过剪辑单元将家人照片中背景设置为绿色，并将所述家人照片进行融合拼接，生成团圆照。
所述播放模块、录屏模块和剪辑模块的播放视频方法均为慢动作回归正常速度视频播放方法，所述慢动作回归正常速度视频播放的方法具体为：
通过光流法进行插帧处理，当进行慢动作视频播放时通过设置的第一播放阈值倍率进行慢动作视频播放，当进行回归正常速度视频播放时通过设置的第二播放阈值倍率进行回归正常速度视频播放，并根据播放的视频进行录屏；其中，第一播放阈值为N/10，第二播放阈值为10/N，N为大于等于1小于10的自然数；
所述录屏的视频用于进行视频剪辑，所述视频剪辑的方法具体为：
将录屏的视频进行剪辑并去除视频中的音频，将剪辑后的视频加入1倍倍率的音频，生成录屏视频对应的模仿音视频；
所述制作音频根据1倍倍率配音生成。
在本实施例中，慢动作回归正常速度视频播放在播放学习内容难度较大的视频中使用，可在视频对应位置设置合适的播放速度，帮助用户完成学习，并在学习过程中进行录屏操作，对录屏后的视频进行配音，加入1倍倍率的原音频，生成与原视频相同的模仿音视频。
剪辑模块运用光流法进行插帧处理，确保慢速播放不卡顿；用户以N/10（N为大于等于1小于10的自然数）倍率慢速模仿，将模仿视频以10/N速度播放并录屏，录屏视频再剪辑，由于N/10*10/N=1，故最终与正常速度一致；用于模仿比较困难的舞蹈。
本发明的有益效果为：本发明提供的一种基于多功能家电的远程家人互动活动系统及方法，通过设置播放模块进行对照教学，能够降低了学习难度，图像分割单元将前置教学摄像头15拍摄的录像转换为既有黑白图像又有真彩色图像，便于学习用户掌握动作，进行沉浸式录像的方法在对照处理后录像学习时去掉了背景，提高学习用户的专心程度，基于远程看护的方法能够让学习用户与教师侧远程实时互动教学，动作视频学习时，使用视频终端12与舞蹈镜23对照原录像学习，扩大了视野，便掌握动作要领。
本发明的视频终端12可以90度旋转，设置有四阵列麦克风9和广角摄像头16，可以收录设置环境的人员图像以及声音，加强了人与人之间的互动，可以开展远程家人互动活动，视频终端12制作短视频用于家人互动活动，能够提升家庭间联谊活动质量。
本发明既能制作短视频、开展教学活动、实现远程监控，又能看电视，可完全成为电视的替代品。
在本发明的描述中，需要理解的是，术语“中心”、“厚度”、“上”、“下”、“水平”、“顶”、“底”、“内”、“外”、“径向”等指示的方位或位置关系为基于附图所示的方位或位置关系，仅是为了便于描述本发明和简化描述，而不是指示或暗示所指的设备或元件必须具有特定的方位、以特定的方位构造和操作，因此不能理解为对本发明的限制。此外，术语“第一”、“第二”、“第三”仅用于描述目的，而不能理解为指示或暗示相对重要性或隐含指明的技术特征的数量。因此，限定由“第一”、“第二”、“第三”的特征可以明示或隐含地包括一个或者更多个该特征。

Claims (5)

1.一种基于多功能家电的远程家人互动活动方法，用于基于多功能家电的远程家人互动活动系统，所述基于多功能家电的远程家人互动活动系统包括带刹车双弹簧减震轮（1）、无线键盘（2）、电视支架（3）、无线鼠标（4）、无线遥控器（5）、走地线槽（6）、后置教学摄像头（7）、摄像头支架（8）、四阵列麦克风（9）、数据线（10）、视频终端（12）和长盒（21）；
其中，所述带刹车双弹簧减震轮（1）设置于所述电视支架（3）的底部，所述视频终端（12）活动设置于所述电视支架（3）的顶端，所述无线键盘（2）、无线鼠标（4）、无线遥控器（5）均与所述视频终端（12）通信连接，所述四阵列麦克风（9）固定设置于所述视频终端（12）的长边沿正中心位置，所述视频终端（12）设置有USB接口（11），所述数据线（10）的一端与所述USB接口（11）通信连接，所述数据线（10）的另一端与所述后置教学摄像头（7）通信连接，所述后置教学摄像头（7）固定设置于所述摄像头支架（8）的顶端，所述长盒（21）设置于所述视频终端（12）的下方；
所述视频终端（12）的顶端还设置有第一柔性连接杆（13）、激光测距仪（14）、前置教学摄像头（15）、广角摄像头（16）、反向伞形状灯罩（17）、补光灯（18）、第二柔性连接杆（19）和内腔（20）；
其中，所述第一柔性连接杆（13）底端与所述视频终端（12）的顶端固定连接，所述第一柔性连接杆（13）顶端与所述前置教学摄像头（15）固定连接，并与所述激光测距仪（14）卡扣连接，所述第二柔性连接杆（19）顶端与所述补光灯（18）固定连接，所述第二柔性连接杆（19）底端与所述视频终端（12）的顶端固定连接，所述内腔（20）中设置有反向伞形状灯罩（17），所述反向伞形状灯罩（17）在内腔（20）中处于收起状态；
所述视频终端（12）的左边或者右边设置有舞蹈镜（23），所述舞蹈镜（23）与所述视频终端（12）处于同一直线上，并且所述舞蹈镜（23）与所述视频终端（12）同步横放或竖放，所述舞蹈镜（23）活动设置于所述舞蹈镜支架（22）的顶端；
所述视频终端（12）包括依次连接的远程开启屏幕模块、远程视频模块、录屏模块、播放模块、剪辑模块、网络电视模块及数据库模块；
其中，所述远程视频模块包括远程监控单元和远程视频单元，所述播放模块设置有对照原录像学习单元，所述录屏模块设置有图像分割单元；
其特征在于，所述基于多功能家电的远程家人互动活动方法包括以下步骤：
S1、基于开启的视频终端（12），进行远程监控与看护活动；
S2、基于开启的视频终端（12），进行对照教学活动；
S3、基于开启的视频终端（12），进行短视频制作与团队活动；
S4、基于完成的远程监控与看护活动、对照教学活动、短视频制作与团队活动，完成远程家人互动活动；
所述S1中，所述远程监控与看护活动包括远程监控、远程开屏和远程看护；
所述远程监控的方法具体为：
通过远程监控单元开启广角摄像头（16）进行广角录像，将录像存入视频终端（12），通过当视频终端（12）中录像达到设定阈值时，控制远程监控单元删除最早的录像，并根据当前的录像进行人脸和人形特征分析识别，当分析识别结构为只存在未录入人脸或人形特征时，则通过视频终端（12）播放报警声，并与用户的终端通信连接，通过视频终端（12）屏幕显示用户的视频；
所述远程开屏的方法具体为：
通过用户移动端设备发送屏幕开启请求至视频终端（12），基于视频终端（12）接收的屏幕开启请求，通过视频终端（12）返回验证信息至用户移动端设备，根据用户移动端设备接收的验证信息，完成视频终端（12）的屏幕开启；
所述远程看护的方法具体为：
基于用户照片，通过剪辑模块将用户全身像融合在视频终端（12）的背景，并将融合后的图像存储于数据库模块，根据远程视频单元接收的用户头部图像生成绿幕序列图像，并将其图像解码后与融合后的图像进行融合，得到实时视频，并通过视频终端（12）播放实时视频。
2.根据权利要求1所述的基于多功能家电的远程家人互动活动方法，其特征在于，所述S2中，对照教学活动包括远程教学和对照录像学习；
进行远程教学的方法具体为：
通过视频终端（12）控制开启前置教学摄像头（15）和后置教学摄像头（7）；当开启前置教学摄像头（15）时，所述远程视频单元将左右相反图像的信息进行显示；当开启后置教学摄像头（7）时，通过视频终端（12）将后置教学摄像头（7）拍摄的图像数据发送至用户移动端设备；
所述对照录像学习的方法包括对照原录像学习和对照处理后录像学习。
3.根据权利要求2所述的基于多功能家电的远程家人互动活动方法，其特征在于，所述对照原录像学习的方法具体为：
通过对照学习单元将视频终端（12）的屏幕分成左右屏幕，控制左屏幕播放教学录像，控制右屏幕播放后置教学摄像头（7）和前置教学摄像头（15）的录像；
其中，在播放教学录像时控制对照原录像学习单元对播放的录像进行暂停、快速前进、快速后退和慢速播放对应的动作；
所述对照处理后录像学习的方法具体为：
通过图像分割单元将教学录像中的背景序列图像只取绿色，得到绿幕照片，将绿幕照片中绿幕部分替换为浅色的背景序列图像，通过图像分割单元将教学录像中指定人体部位色彩不变，并将教学录像中剩余图像区域替换成黑白图像，通过视频终端（12）显示处理后的教学录像。
4.根据权利要求3所述的基于多功能家电的远程家人互动活动方法，其特征在于，所述S3中，所述短视频制作与团队活动包括短视频制作、远程团圆活动和团圆照制作；
进行短视频制作的方法具体为：
通过剪辑模块根据短视频制作模板将视频素材进行处理，完成短视频制作；
进行远程团圆活动的方法具体为：
通过视频终端（12）控制广角摄像头（16）和四阵列麦克风（9），采集环境中所有声音和图像视频数据，通过剪辑模块根据短视频制作模板将所述声音和图像视频数据进行处理，生成远程团圆活动短视频，完成远程团圆活动；
进行团圆照制作的方法具体为：
获取需制作团圆照的家人照片，通过剪辑单元将家人照片中背景设置为绿色，并将所述家人照片进行融合拼接，生成团圆照。
5.根据权利要求4所述的基于多功能家电的远程家人互动活动方法，其特征在于，所述播放模块、录屏模块和剪辑模块的播放视频方法均为慢动作回归正常速度视频播放方法，所述慢动作回归正常速度视频播放的方法具体为：
通过光流法进行插帧处理，当进行慢动作视频播放时通过设置的第一播放阈值倍率进行慢动作视频播放，当进行回归正常速度视频播放时通过设置的第二播放阈值倍率进行回归正常速度视频播放，并根据播放的视频进行录屏；其中，第一播放阈值为N/10，第二播放阈值为10/N，N为大于等于1小于10的自然数；
所述录屏的视频用于进行视频剪辑，所述视频剪辑的方法具体为：
将录屏的视频进行剪辑并去除视频中的音频，将剪辑后的视频加入1倍倍率的制作音频，生成录屏视频对应的模仿音视频；
所述制作音频根据1倍倍率配音生成。
CN202211523458.6A 2022-12-01 2022-12-01 一种基于多功能家电的远程家人互动活动方法 Active CN115550704B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202211523458.6A CN115550704B (zh) 2022-12-01 2022-12-01 一种基于多功能家电的远程家人互动活动方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202211523458.6A CN115550704B (zh) 2022-12-01 2022-12-01 一种基于多功能家电的远程家人互动活动方法

Publications (2)

Publication Number Publication Date
CN115550704A CN115550704A (zh) 2022-12-30
CN115550704B true CN115550704B (zh) 2023-03-14

Family

ID=84721948

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202211523458.6A Active CN115550704B (zh) 2022-12-01 2022-12-01 一种基于多功能家电的远程家人互动活动方法

Country Status (1)

Country Link
CN (1) CN115550704B (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115965507B (zh) * 2023-02-15 2023-05-30 成都掌声如雷网络科技有限公司 一种教学和管理系统及方法

Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1411277A (zh) * 2001-09-26 2003-04-16 Lg电子株式会社 视频通信系统
CN1425951A (zh) * 2001-12-13 2003-06-25 奥林巴斯光学工业株式会社 闪光装置、搭载该闪光装置的照相机及照相机的控制方法
US7227567B1 (en) * 2004-09-14 2007-06-05 Avaya Technology Corp. Customizable background for video communications
CN203675213U (zh) * 2014-01-01 2014-06-25 中山市教育信息中心 一种可灵活移动的多功能网络视频交互一体化终端
CN104869346A (zh) * 2014-02-26 2015-08-26 中国移动通信集团公司 一种视频通话中的图像处理方法及电子设备
CN204721477U (zh) * 2015-04-10 2015-10-21 国家电网公司 应用于基层供电所的网络软视频终端设备
CN109118558A (zh) * 2017-06-23 2019-01-01 沈瑜越 对处于不同的时间点或地点的多个合影对象进行合影的方法
CN110012264A (zh) * 2017-11-13 2019-07-12 广州必威易微播科技有限责任公司 一种视频实时处理合成系统及方法
CN110444073A (zh) * 2019-08-09 2019-11-12 中国人民解放军空军勤务学院 一种远程在线教学训练操作平台
CN111901672A (zh) * 2020-06-12 2020-11-06 深圳市京华信息技术有限公司 一种人工智能图像处理方法
CN112007348A (zh) * 2018-05-29 2020-12-01 库里欧瑟产品公司 用于交互式训练和演示的反射视频显示设备及其使用方法

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9232189B2 (en) * 2015-03-18 2016-01-05 Avatar Merger Sub Ii, Llc. Background modification in video conferencing

Patent Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1411277A (zh) * 2001-09-26 2003-04-16 Lg电子株式会社 视频通信系统
CN1425951A (zh) * 2001-12-13 2003-06-25 奥林巴斯光学工业株式会社 闪光装置、搭载该闪光装置的照相机及照相机的控制方法
US7227567B1 (en) * 2004-09-14 2007-06-05 Avaya Technology Corp. Customizable background for video communications
CN203675213U (zh) * 2014-01-01 2014-06-25 中山市教育信息中心 一种可灵活移动的多功能网络视频交互一体化终端
CN104869346A (zh) * 2014-02-26 2015-08-26 中国移动通信集团公司 一种视频通话中的图像处理方法及电子设备
CN204721477U (zh) * 2015-04-10 2015-10-21 国家电网公司 应用于基层供电所的网络软视频终端设备
CN109118558A (zh) * 2017-06-23 2019-01-01 沈瑜越 对处于不同的时间点或地点的多个合影对象进行合影的方法
CN110012264A (zh) * 2017-11-13 2019-07-12 广州必威易微播科技有限责任公司 一种视频实时处理合成系统及方法
CN112007348A (zh) * 2018-05-29 2020-12-01 库里欧瑟产品公司 用于交互式训练和演示的反射视频显示设备及其使用方法
CN110444073A (zh) * 2019-08-09 2019-11-12 中国人民解放军空军勤务学院 一种远程在线教学训练操作平台
CN111901672A (zh) * 2020-06-12 2020-11-06 深圳市京华信息技术有限公司 一种人工智能图像处理方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
虚拟空间会议系统中视频合成技术的研究与实现;杨冰等;《小型微型计算机系统》;20010621(第06期);44-47 *

Also Published As

Publication number Publication date
CN115550704A (zh) 2022-12-30

Similar Documents

Publication Publication Date Title
JP6888096B2 (ja) ロボット、サーバおよびヒューマン・マシン・インタラクション方法
US20230094802A1 (en) Reflective video display apparatus for interactive training and demonstration and methods of using same
Thompson et al. Grammar of the Edit
Barr et al. Developmental changes in imitation from television during infancy
KR102581453B1 (ko) 헤드 마운티드 디스플레이(Head Mounted Display: HMD) 디바이스를 위한 이미지 처리
US7154510B2 (en) System and method for modifying a portrait image in response to a stimulus
JP6589880B2 (ja) 情報処理システム、制御方法、および記憶媒体
CN115550704B (zh) 一种基于多功能家电的远程家人互动活动方法
CN105719518A (zh) 智能儿童早教机
JP2012089909A (ja) 情報処理装置、同期方法およびプログラム
US20220068010A1 (en) Augmented reality methods and systems
JP2016100033A (ja) 再生制御装置
CN101867708B (zh) 摄影装置、显示装置、再现装置、摄影方法以及显示方法
CN208849884U (zh) 一种自动生成儿童成长视频的机器人系统
CN111741280A (zh) 一种壁窟沉浸式投影装置及投影方法
CN104984555A (zh) 4d影片视频的动感文件采编系统
CN204865010U (zh) 4d影片视频的动感文件采编系统
CN115103138A (zh) 一种基于时空一致的虚实融合图像的生成方法和系统
JP5299374B2 (ja) カラオケ装置
Doroski Thoughts of spirits in madness: Virtual production animation and digital technologies for the expansion of independent storytelling
JP2012027340A (ja) カラオケ装置及びカラオケ歌唱者の静止画出力方法
CN111168689A (zh) 一种自动生成儿童成长视频的机器人系统及其工作方法
Nikolai The camera-dancer: a dyadic approach to improvisation
Ehret Moving Off-Screen: Pathways for Understanding an Adolescent's Embodied Experience of New Media Making
CN112822385A (zh) 一种具有ai互动的摄影仪及其网络分享系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
TR01 Transfer of patent right

Effective date of registration: 20230417

Address after: No. 604, 6th Floor, Unit 1, Building 2, No.148 Xueyuan Road, Xipu Town, Pixian County, Chengdu City, Sichuan Province, 610000

Patentee after: Lei Li

Address before: No. 3248, 26th Floor, Xanadu Square, No. 65, Kehua North Road, Wuhou District, Chengdu, Sichuan 610097

Patentee before: Chengdu Applause Rulei Network Technology Co.,Ltd.

TR01 Transfer of patent right