CN111683288B - 一种基于电视的多角度照镜方法及系统 - Google Patents

一种基于电视的多角度照镜方法及系统 Download PDF

Info

Publication number
CN111683288B
CN111683288B CN202010804898.3A CN202010804898A CN111683288B CN 111683288 B CN111683288 B CN 111683288B CN 202010804898 A CN202010804898 A CN 202010804898A CN 111683288 B CN111683288 B CN 111683288B
Authority
CN
China
Prior art keywords
instruction
mirror
delay
human body
body part
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202010804898.3A
Other languages
English (en)
Other versions
CN111683288A (zh
Inventor
袁炜
沈辉
孙宏熙
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shanghai Intelligence Visual Electronics Co ltd
Original Assignee
Shanghai Intelligence Visual Electronics Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shanghai Intelligence Visual Electronics Co ltd filed Critical Shanghai Intelligence Visual Electronics Co ltd
Priority to CN202010804898.3A priority Critical patent/CN111683288B/zh
Publication of CN111683288A publication Critical patent/CN111683288A/zh
Application granted granted Critical
Publication of CN111683288B publication Critical patent/CN111683288B/zh
Priority to PCT/CN2021/111546 priority patent/WO2022033434A1/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/44213Monitoring of end-user related data
    • H04N21/44218Detecting physical presence or behaviour of the user, e.g. using sensors to detect if the user is leaving the room or changes his face expression during a TV program
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/472End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/643Communication protocols

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Social Psychology (AREA)
  • Databases & Information Systems (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Human Computer Interaction (AREA)
  • Studio Devices (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

本发明公开了一种基于电视的多角度照镜方法及系统,该系统包括信息传输模块、照镜控制模块、照镜处理模块,信息传输模块接收人体视频或图像信息并发送;照镜控制模块产生处理多角度照镜的命令;照镜处理模块接收所述信息传输模块发送的信息,根据所述照镜控制模块发送的命令对信息进行格式转化、缓存延迟、多角度切换处理后发送至电视终端设备,在普通的电视终端设备上,利用单个固定的摄像装置即可实现多角度照镜,让使用者观看到自身多角度形象,同时利用电视屏幕的自身特性,提供更多照镜子相关功能。

Description

一种基于电视的多角度照镜方法及系统
技术领域
本申请涉及电子照镜技术领域,更具体地说,涉及一种基于电视的多角度照镜方法及系统。
背景技术
在日常生活中,照镜子是非常普遍的行为,由于镜子照射角度的局限性,人们只能通过镜子看到自身的正面局部形象,很难看清侧面形象,并且很难看清自身的背部形象。随着技术的进步,现在也发展出了具备照镜子功能的手机等电子设备。但是,这些电子设备同样继承了上述问题。同时还存在手机屏幕太小并且不方便自拍、大型电子设备造价昂贵等新问题,而且这两种方案一般也只能呈现照镜者正面的形象。因此如何开发出一种新的照镜系统,能够克服上述问题,是本领域技术人员需要研究的方向。
发明内容
本发明公开了一种基于电视的多角度照镜方法,其采用的技术方案如下:
一种基于电视的多角度照镜方法,其包括如下步骤:
步骤S1:以摄像装置采集用户端数据,所述用户端数据包括视频数据和/或图像数据;
步骤S2:以信息传输模块将步骤S1所得用户端数据输出至照镜处理模块;
步骤S3:照镜控制模块生成格式转化指令;
步骤S4:照镜处理模块读取步骤S3所得格式转化指令、将用户端数据的数据格式调整为电视终端设备的可识别数据格式;
步骤S5:照镜处理模块创建数据缓冲区、将用户端数据缓存于数据缓冲区内;
步骤S6:照镜控制模块接收延时指令,所述延时指令包括固定延时指令和/或体位延时指令;当延时指令为体位延时指令时设延时指令参数N=0,当延时指令为固定延时指令时设延时指令参数N=1;
步骤S7:照镜控制模块接收人体部位指令,所述人体部位指令基于外部输入或基于预存体位识别算法自动生成。当人体部位指令为实时照镜起始指令时,设照镜模式参数M=0;当人体部位指令为延时照镜起始指令时,设照镜模式参数M=1、并记录当前时间为S1;当人体部位指令为延时照镜播放指令时,保持当前照镜模式参数M值不变、并记录当前时间为S2;
步骤S8:照镜控制模块基于预存的运算式T=N×(M×D)+︱N-1︳×M×(S2-S1)求得照镜延时长度参数T,所述D为预设的固定延时时长参数值;
步骤S9:照镜处理模块记录当前时间,并基于步骤S8所得照镜延时长度参数T,从数据缓冲区内写入时间为当前时间前溯T的用户端数据处进行缓冲播放。
通过采用上述技术方案,其取得如下技术效果:
1、信息传输模块从用户端外设获取视频和/或图像形式的用户端数据,该用户端数据经制式调整后在电视终端设备播放,使用户基于现有摄像装置和电视终端设备实现照镜子的效果。由于制式问题,用户端数据在部分电视终端设备往往不能直接播放或播放效果不佳,通过设置格式转化命令、基于该格式转化命令将用户端数据以接收时的状态/进行视频编码后/进行视频封装后/依序进行视频编码和视频封装,实现在电视终端设备获得较好的播放效果;
2、通过设置照镜延时长度机制实现对获取用户端数据的延时播放,使用户能够方便舒适地观看自身各个角度。具体来说:当获取到人体部位指令为“实时照镜起始指令”时,设置照镜模式为实时照镜模式,此时照镜模式参数M值取0,令照镜延时长度参数T必然为0,即实现实时照镜。而当获取到人体部位指令为其它人体部位指令时,此时照镜模式参数M值取1,又分为基于体位延时或基于固定延时两种情况。所述固定延时即照镜延时长度参数T为预设的固定长度,此时延时指令参数N值取1,固定延时时长参数值D通过外部指令设定;所述体位延时即根据人体部位指令中延时照镜起始指令获取时间和延时照镜播放指令获取时间的差值,形成浮动的照镜延时长度参数T,以方便用户根据需要观看自身特定部位的延时影像。在延时照镜模式下,当获取延时照镜播放指令时,照镜控制模块从数据缓冲区内写入时间为当前时间前溯T的用户端数据处进行缓冲播放。需要说明的是,当M=1、N=1、D=0时求得T=0,即也可通过在延时照镜模式下设置固定延时时长参数值D为0来实现实时照镜。所述缓冲播放的播放方式包括选择播放起点位置,选择播放终点位置,选择播放速度中的任一种或任几种,以让用户实现可操控的播放延时、更加方便地观看自身多角度影像。需要说明的是,在固定延时指令下,当照镜处理模块获取延时照镜起始指令的时间加上所述固定延时时长参数值D后,人体部位指令自动调整为延时照镜播放指令。
优选的是,上述基于电视的多角度照镜方法中:步骤S7所述人体部位指令基于预存体位识别算法自动生成;包括如下步骤:
步骤S71:解析用户端数据中的左眼轮廓线、右眼轮廓线和头部轮廓线:当取得左眼轮廓线和右眼轮廓线时跳转至步骤S72;当未取得左眼轮廓线和/或右眼轮廓线、且当前人体部位指令为实时照镜起始指令或为空时,重置人体部位指令为延时照镜起始指令并发送至照镜控制模块;当未取得左眼轮廓线和/或右眼轮廓线、且当前人体部位指令为延时照镜起始指令时,维持当前人体部位指令;
步骤S72:制取左眼轮廓线水平中心线,分别取得该左眼轮廓线水平中心线与人体头部左侧轮廓线交点a1、左眼轮廓线水平中心线与左眼轮廓线的左侧交点a2,并求得a1与a2间的距离值A;当A不等于0时跳转至步骤S73;当A=0且当前人体部位指令为实时照镜起始指令或为空时,重置人体部位指令为延时照镜起始指令并发送至照镜控制模块;当A=0且当前人体部位指令为延时照镜起始指令时,维持当前人体部位指令;
步骤S73:制取右眼轮廓线水平中心线,分别取得该右眼轮廓线水平中心线与人体头部右侧轮廓线的交点b1、右眼轮廓线水平中心线与由右眼轮廓线的右侧交点b2,并求得b1与b2间的距离值B;当B不等于0时跳转至步骤S74;当B=0且当前人体部位指令为实时照镜起始指令或为空时,重置人体部位指令为延时照镜起始指令并发送至照镜控制模块;当B=0且当前人体部位指令为延时照镜起始指令时,维持当前人体部位指令;
步骤S74:将步骤S72所得A和步骤S73所得B代入公式C=A/B中求得C;当C落入预存的数值区间(C1,C2)且当前人体部位指令为空时,重置人体部位指令为实时照镜起始指令并发送至照镜控制模块;当C落入预存的数值区间(C1,C2)且当前人体部位指令为实时照镜起始指令时,维持当前人体部位指令;当C落入预存的数值区间(C1,C2)且当前人体部位指令为延时照镜起始指令同时N=0时,重置人体部位指令为延时照镜播放指令并发送至照镜控制模块;当C落入预存的数值区间(C1,C2)且当前人体部位指令为延时照镜起始指令且N=1时,延时D后重置人体部位指令为实时照镜起始指令并发送至照镜控制模块;当C未落入预存的数值区间(C1,C2)且当前人体部位指令为实时照镜起始指令或为空时,重置人体部位指令为延时照镜起始指令并发送至照镜控制模块。
通过采用这种技术方案:基于用户端数据中左眼轮廓线、右眼轮廓线和头部轮廓线的位置和当前人体部位指令生成人体部位指令:
具体来说分为以下几种情况:当未取得左眼轮廓线和/或右眼轮廓线、意味着此时人体头部未正对摄像装置、处于转身状态,若当前人体部位指令为实时照镜起始指令或为空时,此时照镜模式切换为延时照镜,人体部位指令重置为延时照镜起始指令;若当前人体部位指令为延时照镜起始指令时,表示人体依然处于转身状态,维持当前照镜模式为延时照镜不变;
当取得左眼轮廓线和右眼轮廓线,意味着此时人体头部正对摄像装置或对摄像装置的偏转角度不大,此时分别查询左右两眼的水平中心线与人体头部轮廓线的交点以及与两眼轮廓线的左/右侧交点是否重合;
若重合意味着此时人体头部未正对摄像装置、处于转身状态:若当前人体部位指令为实时照镜起始指令或为空时,此时照镜模式切换为延时照镜,人体部位指令重置为延时照镜起始指令;若当前人体部位指令为延时照镜起始指令时,表示人体依然处于转身状态,维持当前照镜模式为延时照镜不变;
若不重合,基于公式C=A/B,进一步计算左右眼与人头轮廓线的距离的比值。C越接近1则人头头部越是正对摄像装置。当C落入预存的数值区间(C1,C2)则视为人体当前正对摄像装置;
此时若当前人体部位信号为空,表示人体刚开始进行照镜,则输出实时照镜起始指令;
若当前人体部位指令为延时照镜起始指令且N=0,表示人体处于由未正对摄像装置回到正对摄像装置的状态,此时人体部位指令重置为延时照镜播放指令,开启延时照镜内容缓冲播放;
若当前人体部位指令为延时照镜起始指令且N=1,表示人体处于由未正对摄像装置回到正对摄像装置的状态,此时延时T后重置人体部位指令为实时照镜起始指令,即在把人体未正对摄像装置时的影像播放完毕后进入实时照镜状态。
优选的是,上述基于电视的多角度照镜方法中,步骤S9所述缓冲播放包括如下步骤:
步骤S91:照镜处理模块接收电视终端设备在请求点播时发送的点播协议请求报文;
步骤S92:照镜处理模块解析步骤S91所得点播协议请求报文,获取其协议报文特征值;
步骤S93:照镜处理模块将步骤S92所得协议报文特征值与预存的协议报文模板进行比对,确定播放协议;
步骤S94:照镜处理模块基于步骤S93所得播放协议,将所述用户端数据发送到电视终端设备。
之所以采用这种技术方案,在于:目前家庭已有大量电视终端设备,而且品类众多、规格不一,如果这些设备和多角度照镜系统重新进行视频传输协议适配,需要对电视终端设备进行软件或硬件升级,这将带来巨大的代价,而电视终端设备一般都支持视频点播,如运营商电视视频点播服务、互联网电视视频点播服务等,通过采用上述方案,将多角度照镜系统和电视终端设备已经内置的视频点播协议自动匹配,解决了存量电视终端设备的视频传输协议兼容性问题。
进一步优选的是,上述基于电视的多角度照镜方法,步骤S94还包括如下步骤:
步骤S941:照镜控制模块读取缓冲区欺骗命令;
步骤S942:照镜处理模块基于步骤S941所得缓冲区欺骗命令,获取电视终端设备视频播放器缓冲区大小;
步骤S943:照镜处理模块发送对应大小的数据填充电视终端设备视频播放器缓冲区直至填满;
步骤S944:照镜处理模块停止发送数据;
步骤S945:照镜处理模块计算出电视终端设备视频播放器将缓冲区对应数据播放完毕所需要的时间t,并在时间t后基于步骤S93所得播放协议,将用户端数据发送到电视终端设备。
通过采用这种技术方案:首先将电视终端设备视频播放器的缓冲区填满,使播放器进入播放状态,然后停止发送数据,等待播放器将缓冲区内的数据消耗完,然后再发送用户端数据,此时播放器会判断当前没有足够的数据、必须实时播放最新接收到的数据而不会再次等待缓冲区填满,上述步骤能适应大部分电视终端设备视频播放器的工作原理,从而有效解决了电视终端设备视频播放器缓冲区带来的播放迟滞问题,使用户在电视照镜时能够基本实时看到自己的影像,大幅度提升了电视照镜用户体验。需要说明的是,由于现有电视终端设备是为了放电视而不是照镜子设计的,电视终端设备视频播放器在开始播放前需要缓冲一定量数据,由此造成电视屏幕上呈现的画面和用户端实际画面相比有明显的延迟,这种播放迟滞并不影响看电视体验,但会明显影响电视照镜的使用体验。为了满足电视照镜这种对播放迟滞非常敏感的业务,通常的做法是需要重新设计电视终端设备视频播放器并尽可能减少上述缓冲数据大小、以减少播放迟滞,而这需要对家庭已有电视终端设备进行软件或硬件升级、代价巨大。
更优选的是,上述基于电视的多角度照镜方法,还包括步骤S10,所述步骤S10包括:
步骤S101:读取外部输入的抓取参数命令;
步骤S102:基于抓取参数命令在用户端数据的视频数据中抓取视频帧并转换成图片。
通过采用这种技术方案:用户可以实现对照镜画面的选择性存储。
为实现上述照镜方法,本发明还公开了一种基于电视的多角度照镜系统,其技术方案如下:
一种基于电视的多角度照镜系统,其包括:摄像装置,信息传输模块、照镜控制模块、照镜处理模块和电视终端设备;
所述摄像装置用于采集视频和/或图像格式的用户端数据;
所述信息传输模块用于将用户端数据由摄像装置传输至照镜处理模块;
所述照镜控制模块用于根据预存的运算式T=N×(M×D)+︱N-1︳×M×(S2-S1)、基于延时指令和人体部位指令生成照镜延时长度参数T,所述延时指令包括固定延时指令和/或体位延时指令,当延时指令为体位延时指令时设延时指令参数N=0,当延时指令为固定延时指令时设延时指令参数N=1,所述D为预设的固定延时时长参数值,当人体部位指令为实时照镜起始指令时,设照镜模式参数M=0,当人体部位指令为延时照镜起始指令时,设照镜模式参数M=1、并记录当前时间为S1,当人体部位指令为延时照镜播放指令时,保持当前照镜模式参数M值不变、并记录当前时间为S2;并将该照镜延时长度参数T传输至照镜处理模块;
所述照镜处理模块包括数据缓冲单元和播放单元,所述数据缓冲单元用于创建数据缓冲区、所述播放单元用于从数据缓冲区内写入时间为当前时间前溯T的用户端数据处在电视终端设备进行缓冲播放。
优选的是,上述基于电视的多角度照镜系统中:所述照镜处理模块还包括终端适配单元,所述终端适配单元用于将用户端数据转化为电视终端设备的可识别数据格式。
更优选的是,上述基于电视的多角度照镜系统中:所述照镜处理模块还包括点播匹配单元;所述点播匹配单元用于将用户端数据通过视频点播通道发送至电视终端设备播放。
更优选的是,上述基于电视的多角度照镜系统中:所述照镜处理模块还包括缓冲区欺骗单元,所述缓冲区欺骗单元用于减少电视终端设备视频播放器缓冲区造成的播放迟滞。
更优选的是,上述基于电视的多角度照镜系统中:所述照镜处理模块还包括抓取单元,所述抓取单元用于在视频数据中抓取视频帧并转换成图片。
与现有技术相比,本申请取得了如下有益效果:
1、基于家庭已有普通电视终端设备即可实现类似于照镜子的效果;
2、通过一个普通摄像装置和电视终端设备,用户就可以方便地观看到自身整体形象、动态形象、多角度形象等,并进而可以帮助使用者达到仪容提升等目的,也可以实现趣味性自拍;
3、本申请提供的这种基于电视的多角度照镜系统,在普通用户家中普遍具备的电视机上,利用电视屏幕大等特点,解决传统照镜子的照镜子角度问题和现有电子照镜子的照镜覆盖面积和观看效果存在矛盾等问题,并提供了更多照镜子的功能。
附图说明
一个或多个实施例通过与之对应的附图中的图片进行示例性说明,这些示例性说明并不构成对实施例的限定,附图中具有相同参考数字标号的元件表示为类似的元件,除非有特别申明,附图中的图不构成比例限制:
图1为本发明的系统结构图;
图2为本发明的流程示意图;
图3为生成照镜延时长度参数T的流程示意图;
图4为自适应电视终端设备已有视频播放协议的示意图;
各附图标记与部件名称对应关系如下:
1、信息传输模块;2、照镜控制模块;3、照镜处理模块;4、摄像装置;5、电视终端设备。
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚,下面将基于附图对本发明的各实施方式进行详细的阐述。然而应当理解,在没有进一步叙述的情况下,一个实施方式中的元件、结构和特征也可以有益地结合到其他实施方式中。
如图1所示:
一种基于电视的多角度照镜系统,其包括:摄像装置,信息传输模块、照镜控制模块、照镜处理模块和电视终端设备;所述摄像装置用于采集视频和/或图像格式的用户端数据;所述信息传输模块用于将用户端数据由摄像装置传输至照镜处理模块;所述照镜控制模块用于根据预存的运算式T=N×(M×D)+︱N-1︳×M×(S2-S1)、基于延时指令和人体部位指令生成照镜延时长度参数T,所述延时指令包括固定延时指令和/或体位延时指令,当延时指令为体位延时指令时设延时指令参数N=0,当延时指令为固定延时指令时设延时指令参数N=1,所述D为预设的固定延时时长参数值,当人体部位指令为实时照镜起始指令时,设照镜模式参数M=0,当人体部位指令为延时照镜起始指令时,设照镜模式参数M=1、并记录当前时间为S1,当人体部位指令为延时照镜播放指令时,保持当前照镜模式参数M值不变、并记录当前时间为S2;并将该照镜延时长度参数T传输至照镜处理模块;所述照镜处理模块包括数据缓冲单元和播放单元,所述数据缓冲单元用于创建数据缓冲区、所述播放单元用于从数据缓冲区内写入时间为当前时间前溯T的用户端数据处在电视终端设备进行缓冲播放;所述照镜处理模块还包括终端适配单元,所述终端适配单元用于将用户端数据转化为电视终端设备的可识别数据格式;所述照镜处理模块还包括点播匹配单元,所述点播匹配单元用于将用户端数据通过视频点播通道发送至电视终端设备播放;所述照镜处理模块还包括缓冲区欺骗单元,所述缓冲区欺骗单元用于减少电视终端设备视频播放器缓冲区造成的播放迟滞;所述照镜处理模块还包括抓取单元,所述抓取单元用于在视频数据中抓取视频帧并转换成图片。
需要说明的是,所述摄像装置4指具有视频摄像或静态图像捕捉等功能的装置,例如摄像头、摄像机、电视机或手机内置的摄像设备等。所述电视终端设备5包括数字电视机、电视机顶盒。所述电视机顶盒指与电视机通过有线或无线连接的机顶盒如数字电视机顶盒、IPTV机顶盒、OTT机顶盒、其它网络机顶盒等。所述数字电视机指不用外接机顶盒就能实现前述电视机顶盒功能的电视机如数字电视一体机、IPTV电视一体机、互联网电视机等,数字电视机还包括内置数字电视或网络电视功能的投影仪、平板电脑等。
实施例1:用户在实时照镜模式下正面照镜、在体位延时照镜模式下非正面照镜、并自然切换。其工作过程如下:
步骤1:用户正面朝向电视屏幕,输入实时照镜起始指令,此时照镜控制模块2设置照镜模式参数M为0,所以照镜延时长度参数T必然为0、照镜控制模块2控制照镜处理模块3将接收的用户端数据实时发送到电视终端设备5,进入实时照镜模式;所述正面朝向指人体完全正面朝向电视屏幕或包括一定角度的修正值如正负10度,以人眼能舒适地看清楚电视屏幕为宜;
步骤2:当用户即将转身非正面朝向电视屏幕时,输入延时照镜起始指令并设置延时指令为体位延时指令,此时照镜控制模块2设置照镜模式参数M为1、控制照镜处理模块3将接收的用户端数据缓存、进入延时照镜模式,并记录当前时间为S1;照镜控制模块2设置延时指令参数N为0;
步骤3:用户进行各类非正面朝向电视屏幕的动作或其它希望延迟观看的动作;
步骤4:用户完成所述动作后再次正面朝向电视屏幕、输入延时照镜播放指令,此时照镜控制模块2记录当前时间为S2 、控制照镜处理模块3将接收的用户端数据按照等于S2-S1的延迟时间发送到电视终端设备5;
步骤5:用户观看延时播放的照镜画面,观看完毕后再次输入实时照镜起始指令,进入实时照镜模式;
具体来说,在上述过程中:当用户正面朝向电视屏幕时,通过用户指令控制进入实时照镜模式,舒适地观看自己的实时画面;当用户即将非正面朝向电视屏幕时,通过用户指令控制进入延时照镜模式,当用户转动身体一圈回到正面朝向电视屏幕时,可以舒适地观看自己转动身体一圈的完整动作延时画面;观看完毕后可以再次通过用户指令控制进入实时照镜模式,实现无缝平滑衔接。需要说明的是,在实际应用中,照镜处理模块3也可以将接收的用户端数据调整延迟时间发送到电视终端设备5。比如在上述例子中,用户只希望观看自己转动身体后半圈的延时画面,则可以通过用户指令控制来实现此目的。
实施例2:用户在固定延时照镜模式下进行照镜。其工作过程如下:
步骤1:用户输入延时照镜起始指令,并设置延时指令为固定延时指令,此时照镜控制模块2设置照镜模式参数M为1;照镜控制模块2设置延时指令参数N为1,同时获取系统预设的固定延时时长参数值D;
步骤2:照镜控制模块2控制照镜处理模块3将接收的用户端数据按照D的延迟时间发送到电视终端设备5;
步骤3:照镜控制模块2通过用户指令重新获取固定延时时间长度,并控制照镜处理模块3将接收的用户端数据按照新的固定延时时间长度发送到电视终端设备5。
实施例3:照镜处理模块记录当前时间T1,并基于照镜延时长度参数T,从数据缓冲区内写入时间为T1-T的用户端数据处进行缓冲播放。所述缓冲播放方式包括选择播放起点位置,选择播放终点位置,选择播放速度中的任一种或任几种。
例如在实施例1所述例子中,用户在观看自己转动身体一圈的完整动作延时画面时,可以通过反复选择播放起点位置来反复观看自己身体在转动一圈过程中的特定画面;或者通过选择更快的播放速度来快速跳过某一部分的画面;也可以通过选择播放终点来调整播放方向,以实现观看身体反向转动的画面效果。
实施例4:根据预存体位识别算法自动生成人体部位指令。其工作过程如下:
步骤1:解析用户端数据中的左眼轮廓线、右眼轮廓线和头部轮廓线:当取得左眼轮廓线和右眼轮廓线时跳转至步骤2;当未取得左眼轮廓线和/或右眼轮廓线、且当前人体部位指令为实时照镜起始指令或为空时,重置人体部位指令为延时照镜起始指令并发送至照镜控制模块;当未取得左眼轮廓线和/或右眼轮廓线、且当前人体部位指令为延时照镜起始指令时,维持当前人体部位指令;
步骤2:制取左眼轮廓线水平中心线,分别取得该左眼轮廓线水平中心线与人体头部左侧轮廓线交点a1、左眼轮廓线水平中心线与左眼轮廓线的左侧交点a2,并求得a1与a2间的距离值A;当A不等于0时跳转至步骤3;当A=0且当前人体部位指令为实时照镜起始指令或为空时,重置人体部位指令为延时照镜起始指令并发送至照镜控制模块;当A=0且当前人体部位指令为延时照镜起始指令时,维持当前人体部位指令;
步骤3:制取右眼轮廓线水平中心线,分别取得该右眼轮廓线水平中心线与人体头部右侧轮廓线的交点b1、右眼轮廓线水平中心线与由右眼轮廓线的右侧交点b2,并求得b1与b2间的距离值B;当B不等于0时跳转至步骤4;当B=0且当前人体部位指令为实时照镜起始指令或为空时,重置人体部位指令为延时照镜起始指令并发送至照镜控制模块;当B=0且当前人体部位指令为延时照镜起始指令时,维持当前人体部位指令;
步骤4:将步骤2所得A和步骤3所得B代入公式C=A/B中求得C;当C落入预存的数值区间(C1,C2)且当前人体部位指令为空时,重置人体部位指令为实时照镜起始指令并发送至照镜控制模块;当C落入预存的数值区间(C1,C2)且当前人体部位指令为实时照镜起始指令时,维持当前人体部位指令;当C落入预存的数值区间(C1,C2)且当前人体部位指令为延时照镜起始指令同时N=0时,重置人体部位指令为延时照镜播放指令并发送至照镜控制模块;当C落入预存的数值区间(C1,C2)且当前人体部位指令为延时照镜起始指令且N=1时,延时D后重置人体部位指令为实时照镜起始指令并发送至照镜控制模块;当C未落入预存的数值区间(C1,C2)且当前人体部位指令为实时照镜起始指令或为空时,重置人体部位指令为延时照镜起始指令并发送至照镜控制模块。需要说明的是,在实际应用中,考虑到不同用户对正面观看电视屏幕的角度感知不同,并且不同人体的面部的双眼位置不一定是严格水平对称的,因此上述步骤中,C1和C2的具体取值范围,是以不同用户能够自然舒适的看到电视屏幕的状态进行确定的,可以通过外部指令或系统预设值等方式确定。一般的,C1取值为1/3,C2取值为3。
实施例5:将从摄像装置4获取的用户端数据进行格式适配后在电视终端设备5上进行播放。
由于不同设备的制式问题,从摄像装置4获取的用户端数据往往不能在电视终端设备5直接播放或播放效果不佳,需要由照镜处理模块读取照镜控制模块生成的格式转化指令、将用户端数据以接收时的状态/进行视频编码后/进行视频封装后/依序进行视频编码和视频封装后,在电视终端设备获得较好的播放效果。
如很多摄像装置4默认输出的是可变码率RTP封装的H.264编码格式视频,而相当部分的电视终端设备5只支持恒定码率TS封装的H.264编码格式视频,此时照镜处理模块3做如下处理:
步骤1:将视频内容进行解码;
步骤2:将解码后的数据重新编码,把可变码率调整成合适大小的恒定码率,并调整分辨率至合适大小,以在电视终端设备5上达到较好的呈现效果;
步骤3:将重新编码后的H.264编码格式的视频内容封装成TS视频数据,使之能在电视终端设备5上播放。
实施例6:照镜控制模块2生成抓取参数命令,照镜处理模块3根据照镜控制模块2的抓取参数命令,在所接收的用户端视频数据中抓取出对应的视频帧并转换成图片。其工作过程如下:
步骤1:照镜处理模块3读取照镜控制模块2,获得抓取参数命令;
步骤2:照镜处理模块3根据抓取参数命令,从所接收的用户端视频数据中抓取出对应的视频帧并转换成图片:
步骤21:照镜处理模块3在接收到信息传输模块1发送的用户端视频数据后,对视频数据进行解码,还原成有序排列的视频帧;
步骤22:当需要保存视频图像时,由照镜控制模块2发送指令通知照镜处理模块3,保存对应时间点的视频帧,并将这个视频帧转换成图片。
实施例7:基于电视终端设备已经内置的视频点播协议开展照镜业务并减少播放迟滞。其工作过程如下:
步骤1:照镜处理模块接收电视终端设备在请求点播时发送的点播协议请求报文;
步骤2:照镜处理模块解析步骤1所得点播协议请求报文,获取其协议报文特征值;
步骤3:照镜处理模块将步骤2所得协议报文特征值与预存的协议报文模板进行比对,确定播放协议;
步骤4:照镜控制模块生成缓冲区欺骗命令;
步骤5:照镜处理模块基于步骤4所得缓冲区欺骗命令,获取电视终端设备视频播放器缓冲区大小;
步骤6:照镜处理模块发送对应大小的数据填充电视终端设备视频播放器缓冲区直至填满;
步骤7:照镜处理模块停止发送数据;
步骤8:照镜处理模块计算出电视终端设备视频播放器将缓冲区对应数据播放完毕所需要的时间t,并在时间t后基于步骤3所得播放协议,将用户端数据发送到电视终端设备。
具体来说,如果不采用上述步骤,用户在实时照镜模式下,收看到的画面内自己的动作影像将会和自己现实的动作存在几秒的延迟,在采用了上述步骤之后,用户收看到的画面内动作影像将会和自己现实的动作基本同步。需要说明的是,上述步骤8中,也可以在比时间t略长或略短的时间后将用户端数据发送至电视终端设备,此时并不影响最终实现的技术效果。
以上显示和描述了本方案的基本原理和主要特征和本方案的优点。本行业的技术人员应该了解,本方案不受上述实施例的限制,上述实施例和说明书中描述的只是说明本方案的原理,在不脱离本方案精神和范围的前提下,本方案还会有各种变化和改进,这些变化和改进都落入要求保护的本方案范围内。本方案要求保护范围由所附的权利要求书及其等效物界定。

Claims (10)

1.一种基于电视的多角度照镜方法,其特征在于包括如下步骤:
步骤S1:以摄像装置采集用户端数据,所述用户端数据包括视频数据和/或图像数据;
步骤S2:以信息传输模块将步骤S1所得用户端数据输出至照镜处理模块;
步骤S3:照镜控制模块生成格式转化指令;
步骤S4:照镜处理模块读取步骤S3所得格式转化指令、将用户端数据的数据格式调整为电视终端设备的可识别数据格式;
步骤S5:照镜处理模块创建数据缓冲区、将用户端数据缓存于数据缓冲区内;
步骤S6:照镜控制模块接收延时指令,所述延时指令包括固定延时指令和/或体位延时指令;当延时指令为体位延时指令时设延时指令参数N=0,当延时指令为固定延时指令时设延时指令参数N=1;
步骤S7:照镜控制模块接收人体部位指令,当人体部位指令为实时照镜起始指令时,设照镜模式参数M=0;当人体部位指令为延时照镜起始指令时,设照镜模式参数M=1、并记录当前时间为S1;当人体部位指令为延时照镜播放指令时,保持当前照镜模式参数M值不变、并记录当前时间为S2;
步骤S8:照镜控制模块基于预存的运算式T=N×(M×D)+︱N-1︳×M×(S2-S1)求得照镜延时长度参数T,所述D为预设的固定延时时长参数值;
步骤S9:照镜处理模块记录当前时间,并基于步骤S8所得照镜延时长度参数T,从数据缓冲区内写入时间为当前时间前溯T的用户端数据处进行缓冲播放。
2.如权利要求1所述基于电视的多角度照镜方法,其特征在于:步骤S7所述人体部位指令基于预存体位识别算法自动生成;包括如下步骤:
步骤S71:解析用户端数据中的左眼轮廓线、右眼轮廓线和头部轮廓线:当取得左眼轮廓线和右眼轮廓线时跳转至步骤S72;当未取得左眼轮廓线和/或右眼轮廓线、且当前人体部位指令为实时照镜起始指令或为空时,重置人体部位指令为延时照镜起始指令并发送至照镜控制模块;当未取得左眼轮廓线和/或右眼轮廓线、且当前人体部位指令为延时照镜起始指令时,维持当前人体部位指令;
步骤S72:制取左眼轮廓线水平中心线,分别取得该左眼轮廓线水平中心线与人体头部左侧轮廓线交点a1、左眼轮廓线水平中心线与左眼轮廓线的左侧交点a2,并求得a1与a2间的距离值A;当A不等于0时跳转至步骤S73;当A=0且当前人体部位指令为实时照镜起始指令或为空时,重置人体部位指令为延时照镜起始指令并发送至照镜控制模块;当A=0且当前人体部位指令为延时照镜起始指令时,维持当前人体部位指令;
步骤S73:制取右眼轮廓线水平中心线,分别取得该右眼轮廓线水平中心线与人体头部右侧轮廓线的交点b1、右眼轮廓线水平中心线与由右眼轮廓线的右侧交点b2,并求得b1与b2间的距离值B;当B不等于0时跳转至步骤S74;当B=0且当前人体部位指令为实时照镜起始指令或为空时,重置人体部位指令为延时照镜起始指令并发送至照镜控制模块;当B=0且当前人体部位指令为延时照镜起始指令时,维持当前人体部位指令;
步骤S74:将步骤S72所得A和步骤S73所得B代入公式C=A/B中求得C;当C落入预存的数值区间(C1,C2)且当前人体部位指令为空时,重置人体部位指令为实时照镜起始指令并发送至照镜控制模块;当C落入预存的数值区间(C1,C2)且当前人体部位指令为实时照镜起始指令时,维持当前人体部位指令;当C落入预存的数值区间(C1,C2)且当前人体部位指令为延时照镜起始指令同时N=0时,重置人体部位指令为延时照镜播放指令并发送至照镜控制模块;当C落入预存的数值区间(C1,C2)且当前人体部位指令为延时照镜起始指令且N=1时,延时D后重置人体部位指令为实时照镜起始指令并发送至照镜控制模块;当C未落入预存的数值区间(C1,C2)且当前人体部位指令为实时照镜起始指令或为空时,重置人体部位指令为延时照镜起始指令并发送至照镜控制模块。
3.如权利要求1所述基于电视的多角度照镜方法,其特征在于:步骤S9中所述缓冲播放包括如下步骤:
步骤S91:照镜处理模块接收电视终端设备在请求点播时发送的点播协议请求报文;
步骤S92:照镜处理模块解析步骤S91所得点播协议请求报文,获取其协议报文特征值;
步骤S93:照镜处理模块将步骤S92所得协议报文特征值与预存的协议报文模板进行比对,确定播放协议;
步骤S94:照镜处理模块基于步骤S93所得播放协议,将所述用户端数据发送到电视终端设备。
4.如权利要求3所述基于电视的多角度照镜方法,其特征在于:步骤S94还包括如下步骤:
步骤S941:照镜控制模块读取缓冲区欺骗命令;
步骤S942:照镜处理模块基于步骤S941所得缓冲区欺骗命令,获取电视终端设备视频播放器缓冲区大小;
步骤S943:照镜处理模块发送对应大小的数据填充电视终端设备视频播放器缓冲区直至填满;
步骤S944:照镜处理模块停止发送数据;
步骤S945:照镜处理模块计算出电视终端设备视频播放器将缓冲区对应数据播放完毕所需要的时间t,并在时间t后基于步骤S93所得播放协议,将用户端数据发送到电视终端设备。
5.如权利要求1所述基于电视的多角度照镜方法,其特征在于,还包括步骤S10,所述步骤S10包括:
步骤S101:读取外部输入的抓取参数命令;
步骤S102:在用户端数据的视频数据中抓取视频帧并转换成图片。
6.一种基于电视的多角度照镜系统,其特征在于,包括:摄像装置,信息传输模块、照镜控制模块、照镜处理模块和电视终端设备;
所述摄像装置用于采集视频和/或图像格式的用户端数据;
所述信息传输模块用于将用户端数据由摄像装置传输至照镜处理模块;
所述照镜控制模块用于根据预存的运算式T=N×(M×D)+︱N-1︳×M×(S2-S1)、基于延时指令和人体部位指令生成照镜延时长度参数T,所述延时指令包括固定延时指令和/或体位延时指令,当延时指令为体位延时指令时设延时指令参数N=0,当延时指令为固定延时指令时设延时指令参数N=1,所述D为预设的固定延时时长参数值,当人体部位指令为实时照镜起始指令时,设照镜模式参数M=0,当人体部位指令为延时照镜起始指令时,设照镜模式参数M=1、并记录当前时间为S1,当人体部位指令为延时照镜播放指令时,保持当前照镜模式参数M值不变、并记录当前时间为S2;并将该照镜延时长度参数T传输至照镜处理模块;
所述照镜处理模块包括数据缓冲单元和播放单元,所述数据缓冲单元用于创建数据缓冲区、所述播放单元用于从数据缓冲区内写入时间为当前时间前溯T的用户端数据处在电视终端设备进行缓冲播放。
7.如权利要求6所述基于电视的多角度照镜系统,其特征在于:所述照镜处理模块还包括终端适配单元,所述终端适配单元用于将用户端数据转化为电视终端设备的可识别数据格式。
8.如权利要求6所述基于电视的多角度照镜系统,其特征在于:所述照镜处理模块还包括点播匹配单元;所述点播匹配单元用于将用户端数据通过视频点播通道发送至电视终端设备播放。
9.如权利要求8所述基于电视的多角度照镜系统,其特征在于:所述照镜处理模块还包括缓冲区欺骗单元,所述缓冲区欺骗单元用于减少电视终端设备视频播放器缓冲区造成的播放迟滞。
10.如权利要求6所述基于电视的多角度照镜系统,其特征在于:所述照镜处理模块还包括抓取单元,所述抓取单元用于在视频数据中抓取视频帧并转换成图片。
CN202010804898.3A 2020-08-12 2020-08-12 一种基于电视的多角度照镜方法及系统 Active CN111683288B (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN202010804898.3A CN111683288B (zh) 2020-08-12 2020-08-12 一种基于电视的多角度照镜方法及系统
PCT/CN2021/111546 WO2022033434A1 (zh) 2020-08-12 2021-08-09 一种基于电视的多角度照镜方法及系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010804898.3A CN111683288B (zh) 2020-08-12 2020-08-12 一种基于电视的多角度照镜方法及系统

Publications (2)

Publication Number Publication Date
CN111683288A CN111683288A (zh) 2020-09-18
CN111683288B true CN111683288B (zh) 2020-11-10

Family

ID=72458300

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010804898.3A Active CN111683288B (zh) 2020-08-12 2020-08-12 一种基于电视的多角度照镜方法及系统

Country Status (2)

Country Link
CN (1) CN111683288B (zh)
WO (1) WO2022033434A1 (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111683288B (zh) * 2020-08-12 2020-11-10 上海英立视电子有限公司 一种基于电视的多角度照镜方法及系统
CN113112407B (zh) * 2021-06-11 2021-09-03 上海英立视电子有限公司 基于电视的照镜视野生成方法、系统、设备及介质

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN203276279U (zh) * 2013-01-31 2013-11-06 陈彦彰 数字试妆装置
CN203468139U (zh) * 2013-09-10 2014-03-12 谭波 一种梳妆镜
CN106333564A (zh) * 2016-11-15 2017-01-18 田元元 一种方便的多角度试衣镜
CN107467987A (zh) * 2017-08-28 2017-12-15 厦门臻鑫豪科技有限公司 智能试衣镜
TWI646908B (zh) * 2018-03-23 2019-01-11 崑山科技大學 具照相影像控制傳輸功能之試衣鏡

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110415062A (zh) * 2018-04-28 2019-11-05 香港乐蜜有限公司 基于服饰试穿的信息处理方法和装置
CN111683288B (zh) * 2020-08-12 2020-11-10 上海英立视电子有限公司 一种基于电视的多角度照镜方法及系统

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN203276279U (zh) * 2013-01-31 2013-11-06 陈彦彰 数字试妆装置
CN203468139U (zh) * 2013-09-10 2014-03-12 谭波 一种梳妆镜
CN106333564A (zh) * 2016-11-15 2017-01-18 田元元 一种方便的多角度试衣镜
CN107467987A (zh) * 2017-08-28 2017-12-15 厦门臻鑫豪科技有限公司 智能试衣镜
TWI646908B (zh) * 2018-03-23 2019-01-11 崑山科技大學 具照相影像控制傳輸功能之試衣鏡

Also Published As

Publication number Publication date
CN111683288A (zh) 2020-09-18
WO2022033434A1 (zh) 2022-02-17

Similar Documents

Publication Publication Date Title
US20220279237A1 (en) Streaming and Rendering of Multidimensional Video Using a Plurality of Data Streams
CN108337497B (zh) 一种虚拟现实视频/图像格式以及拍摄、处理、播放方法和装置
CA2974104C (en) Video transmission based on independently encoded background updates
CN111683288B (zh) 一种基于电视的多角度照镜方法及系统
JP4695669B2 (ja) 映像配信システム
CN112219403B (zh) 沉浸式媒体的渲染视角度量
TWI735552B (zh) 將沈浸式視訊格式化用於傳統及沈浸式顯像元件之方法、裝置及串流
CN111869221B (zh) Dash对象之间的有效关联
WO2018036112A1 (zh) 一种编解码全景视频的方法和系统
JP4148673B2 (ja) 映像配信システム
KR20110052933A (ko) 촬영장치 및 촬영영상 제공방법
CN107707830B (zh) 基于单向通信的全景视频播放拍照系统
KR101280443B1 (ko) 영역 영상을 처리하는 장치 및 그 제어방법
CN109104635A (zh) 即时传送屏幕图像的方法及系统
KR20050048263A (ko) 이동단말과 헤드 마운티드 디스플레이 장치간의 정합 장치및 방법
US20190313151A1 (en) Streaming-technology based video data processing method and apparatus
JP5024331B2 (ja) ビデオカメラ及び情報送信方法
TWI852855B (zh) 無線多路雙向視頻處理系統
CN117440175A (zh) 用于视频传输的方法、装置、系统、设备和介质
JP3074653B2 (ja) 画像通信装置
KR20230068852A (ko) 세로 모드 스트리밍 방법, 및 이동형 세로 모드 스트리밍 시스템
CN112926043A (zh) 一种vr互动方法和系统
JP2017085333A (ja) 撮影システム
KR20150126335A (ko) 촬영장치 및 촬영영상 제공방법
JP2006094093A (ja) ビデオカメラ

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant