CN117354568A - 一种显示方法、设备及系统 - Google Patents

一种显示方法、设备及系统 Download PDF

Info

Publication number
CN117354568A
CN117354568A CN202211316193.2A CN202211316193A CN117354568A CN 117354568 A CN117354568 A CN 117354568A CN 202211316193 A CN202211316193 A CN 202211316193A CN 117354568 A CN117354568 A CN 117354568A
Authority
CN
China
Prior art keywords
preset
data
target
image
display
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202211316193.2A
Other languages
English (en)
Inventor
郝佳
袁乐
王鹏
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Huawei Technologies Co Ltd
Original Assignee
Huawei Technologies Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Huawei Technologies Co Ltd filed Critical Huawei Technologies Co Ltd
Priority to PCT/CN2023/076903 priority Critical patent/WO2024001223A1/zh
Publication of CN117354568A publication Critical patent/CN117354568A/zh
Pending legal-status Critical Current

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • H04N21/4316Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations for displaying supplemental content in a region of the screen, e.g. an advertisement in a separate window
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S13/00Systems using the reflection or reradiation of radio waves, e.g. radar systems; Analogous systems using reflection or reradiation of waves whose nature or wavelength is irrelevant or unspecified
    • G01S13/02Systems using reflection of radio waves, e.g. primary radar systems; Analogous systems
    • G01S13/06Systems determining position data of a target
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • H04N13/349Multi-view displays for displaying three or more geometrical viewpoints without viewer tracking
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4318Generation of visual interfaces for content selection or interaction; Content or additional data rendering by altering the content in the rendering process, e.g. blanking, blurring or masking an image region
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/472End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/472End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/47202End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for requesting content on demand, e.g. video on demand
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/472End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/4728End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for selecting a Region Of Interest [ROI], e.g. for requesting a higher resolution version of a selected region
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/478Supplemental services, e.g. displaying phone caller identification, shopping application
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/482End-user interface for program selection
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/488Data services, e.g. news ticker
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/488Data services, e.g. news ticker
    • H04N21/4882Data services, e.g. news ticker for displaying messages, e.g. warnings, reminders
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/90Arrangement of cameras or camera modules, e.g. multiple cameras in TV studios or sports stadiums
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/222Studio circuitry; Studio devices; Studio equipment
    • H04N5/262Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/265Mixing

Abstract

本申请涉及图像处理技术领域,公开了一种显示方法、设备及系统,用以提供一种观众可获得运动场上全局信息的技术方案,方便及时判断赛况,增强参与感,从而可以给予观众更好的视觉体验,提升观看效果。以及,该方法可以向观众提供更多感兴趣的信息,提升趣味性。该方法中,显示端设备接收来自采集端设备的第一数据;根据所述第一数据显示第一界面;其中,所述第一界面包含预设图层以及叠加在所述预设图层的指定区域上的雷达图;所述预设图层为基于目标场景的预设视点图像得到的,所述雷达图用于指示所述目标场景中的多个目标对象的位置信息。

Description

一种显示方法、设备及系统
本申请要求在2022年06月27日提交中华人民共和国知识产权局、申请号为202210745069.1、申请名称为“一种显示方法及终端设备”的中国专利申请的优先权,其全部内容通过引用结合在本申请中。
技术领域
本申请实施例涉及图像处理技术领域,尤其涉及一种显示方法、设备及系统。
背景技术
视频助理裁判(video assistant referee,VAR)技术,主要是依靠运动场上的多个摄像机将三维景物影像化;然后,在计算机中近距离实时还原球线模型,从而为判罚提供帮助。该技术通过多机位、多角度地捕捉运动场上球员的每一个细小动作,在运动场上出现争议判罚或主裁判需要调取比赛录像时,需要由技术人员手动操作,并使用视频回放技术帮助主裁判做出正确的判罚决定。因此,在体育比赛场地或舞台等场景下使用VAR技术,不仅需要技术人员的手动参与,还会对正在进行的比赛进程产生影响,存在一定的使用局限性。
发明内容
本申请实施例提供一种显示方法、设备及系统,用以提供一种观众可获得运动场上全局信息的技术方案,方便及时判断赛况,增强参与感,从而可以给予观众更好的视觉体验,提升观看效果。以及,该方法可以向观众提供更多感兴趣的信息,提升趣味性。
第一方面,本申请实施例提供了一种显示方法。该方法可以应用于显示端设备,包括:接收来自采集端设备的第一数据;根据所述第一数据显示第一界面;其中,所述第一界面包含预设图层以及叠加在所述预设图层的指定区域上的雷达图;所述预设图层为基于目标场景的预设视点图像得到的,所述雷达图用于指示所述目标场景中的多个目标对象的位置信息。
该方法中,通过基于自由视点图像生成用于显示全局信息的雷达图、以及根据自由视点图像得到用于显示某个视点的局部信息的预设图层,并将所述雷达图和所述预设图层叠加之后显示给用户,可以便于用户一方面可以通过预设图层查看目标场景的局部显示内容,另一方面还可从雷达图获取到目标场景中的全局信息,从而可以提升参与感,增强更好的用户观看体验和观看效果。
在一种可能的设计中,所述第一数据包括:用于显示所述预设图层的编码数据、以及用于显示所述雷达图的编码数据。所述根据所述第一数据显示第一界面,可实施为将解码得到的雷达图显示在解码得到的预设图层的指定区域上。
该设计中,可以在采集端设备侧生成雷达图,从而可以减少显示端设备侧的计算量,降低对显示端设备的计算能力的要求。
在一种可能的设计中,所述第一数据包括:用于显示所述预设图层的编码数据、以及所述多个目标对象的位置信息。所述根据所述第一数据显示第一界面,可实施为:根据所述多个目标对象的位置信息,生成所述雷达图;将生成的所述雷达图,显示在解码得到的预设图层的指定区域上。
该设计中,还可以由采集端设备和显示端设备共同生成雷达图,从而可以均衡采集端设备和显示端设备的计算量,平衡对采集端设备和显示端设备的计算能力的要求。
在一种可能的设计中,所述第一数据还包括:至少一个指定目标对象对应的个性化信息。基于此,所述方法还包括:检测到在所述第一界面上的第一用户操作,所述第一用户操作用于指示获取第一目标对象的个性化信息;所述第一目标对象为所述至少一个指定目标对象中的任意一个目标对象;响应于所述第一用户操作,显示第二界面;所述第二界面包含所述第一目标对象的个性化信息。
该设计中,通过为目标对象链接个性化信息,可以向用户提供更多可能感兴趣的信息,增加用户对目标场景的交互性和参与感,从而可以提升用户的观看趣味性。
在一种可能的设计中,所述方法还包括:从预设数据库中,获取至少一个指定目标对象对应的个性化信息;将所述至少一个指定目标对象的个性化信息与所述雷达图中相对应的指定目标对象进行关联。
该设计中,显示端设备还可从网络或预先配置的数据库中自行获取各指定目标对象的个性化信息,并为各指定目标对象链接对应的个性化信息,可以向用户提供更多可能感兴趣的信息,增加用户对目标场景的交互性和参与感,从而可以提升用户的观看趣味性。
在一种可能的设计中,若所述目标场景为比赛场景,所述指定目标对象为运动员;所述指定目标对象对应的个性化信息包括但不限于以下信息中的一种或组合:运动员信息、运动员比赛信息、运动员所在团队比赛信息。
该设计中,通过向用户提供比赛场景中的关于运动员的个性化信息,可以便于用户更好地了解比赛情况,从而可以具有更佳地观看体验。
在一种可能的设计中,所述预设图层为基于目标场景的预设视点图像得到的,包括但不限于以下方式:
方式1、所述预设图层为基于第一单视点图像得到的,所述第一单视点图像为所述采集端设备采集得到的多张自由视点图像中的任意一张图像;或者,
方式2、所述预设图层为基于多个自由视点图像进行拼接得到的多视点拼接画面;或者,
方式3、所述预设图层为基于多个自由视点图像以及目标虚拟视点,生成的第二单视点图像。
该设计中,可以根据业务场景需求,为用户提供局部显示内容的具体内容,以便于用户结合预设图层中显示的自由视点图像结合雷达图显示的全局信息,更好地了解目标场景。
在一种可能的设计中,所述方法还包括:检测到在所述第一界面上的第二用户操作,所述第二用户操作用于指示关闭显示或隐藏显示所述雷达图;响应于所述第二用户操作,显示第三界面,所述第三界面包含所述预设图层。
该设计中,通过配置雷达图在预设图层上进行显示的可选择性,从而可以满足用户更多地观看场景,以便于用户结合雷达图和预设图层了解目标场景,或者也可以更重点关注预设图层的显示内容,避免雷达图对预设图层的观看产生影响。
第二方面,本申请实施例还提供一种显示方法。该方法可以应用于采集端设备,包括:采集至少一张自由视点图像;基于所述至少一张自由视点图像,得到第一数据;将所述第一数据发送给显示端设备,所述第一数据用于所述显示端设备显示第一界面;其中,所述第一界面包含预设图层以及叠加在所述预设图层的指定区域上的雷达图;所述预设图层为基于目标场景的预设视点图像得到的,所述雷达图用于指示所述目标场景中的多个目标对象的位置信息。
在一种可能的设计中,所述基于所述至少一张自由视点图像,得到第一数据,包括:基于所述至少一张自由视点图像,得到所述目标场景的深度信息;以及,基于所述至少一张自由视点图像,对所述目标场景中的目标对象进行识别,以及确定所述目标对象的特征标识;根据所述目标场景的深度信息,确定所述目标场景中的所述多个目标对象的位置信息;根据所述目标对象的特征标识和所述多个目标对象的位置信息,生成所述雷达图;根据基于所述至少一张自由视点图像进行编码得到的用于显示所述预设图层的编码数据、以及基于所述雷达图进行编码得到的用于显示所述雷达图的编码数据,得到所述第一数据。
在另一种可能的设计中,所述基于所述至少一张自由视点图像,得到第一数据,包括:基于所述至少一张自由视点图像,得到所述目标场景的深度信息;根据所述目标场景的深度信息,确定所述目标场景中的所述多个目标对象的位置信息;根据基于所述至少一张自由视点图像进行编码得到的用于显示所述预设图层的编码数据、以及所述多个目标对象的位置信息,得到所述第一数据。
在一种可能的设计中,所述得到所述第一数据之前,所述方法还包括:从预设数据库中,获取至少一个指定目标对象对应的个性化信息;所述得到所述第一数据,还包括:根据所述至少一个指定目标对象对应的个性化信息,得到所述第一数据。
在一种可能的设计中,若所述目标场景为比赛场景,所述指定目标对象为运动员;所述指定目标对象对应的个性化信息包括但限于以下信息中的一种或组合:运动员信息、运动员比赛信息、运动员所在团队比赛信息。
在一种可能的设计中,所述预设图层为基于目标场景的预设视点图像得到的,包括:所述预设图层为基于第一单视点图像得到的,所述第一单视点图像为所述采集端设备采集得到的多张自由视点图像中的任意一张图像;或者,所述预设图层为基于多个自由视点图像进行拼接得到的多视点拼接画面;或者,所述预设图层为基于多个自由视点图像以及目标虚拟视点,生成的第二单视点图像。
第三方面,本申请实施例还提供了一种显示系统。所述系统包括至少一个显示端设备和采集端设备;其中,
所述采集端设备,用于采集至少一张自由视点图像;
所述采集端设备,还用于基于所述至少一张自由视点图像,得到第一数据;
所述采集端设备,还用于将所述第一数据发送给所述显示端设备;
所述显示端设备,用于根据所述第一数据显示第一界面;
其中,所述第一界面包含预设图层以及叠加在所述预设图层的指定区域上的雷达图;所述预设图层为基于目标场景的预设视点图像得到的,所述雷达图用于指示所述目标场景中的多个目标对象的位置信息。
在一种可能的实现方式中,可在所述采集端设备侧生成雷达图。示例性的,所述采集端设备,用于基于所述至少一张自由视点图像,得到第一数据,可具体用于:基于所述至少一张自由视点图像,得到所述目标场景的深度信息;以及,基于所述至少一张自由视点图像,对所述目标场景中的目标对象进行识别,以及确定所述目标对象的特征标识;根据所述目标场景的深度信息,确定所述目标场景中的所述多个目标对象的位置信息;根据所述目标对象的特征标识和所述多个目标对象的位置信息,生成所述雷达图;根据基于所述至少一张自由视点图像进行编码得到的用于显示所述预设图层的编码数据、以及基于所述雷达图进行编码得到的用于显示所述雷达图的编码数据,得到所述第一数据。
该实现方式中,所述显示端设备,用于根据所述第一数据显示第一界面,可具体用于:将解码得到的雷达图显示在解码得到的预设图层的指定区域上。
另一种可能的实现方式中,还可在所述采集端设备侧基于雷达图和预设图层生成目标图像。示例性的,所述采集端设备,除了用于生成所述雷达图之后,还可用于基于所述雷达图和预设图像生成目标图像;然后对所述目标图像进行编码得到用于显示所述雷达图的编码数据(也即第一数据)。该实现方式中,所述显示端设备,用于根据所述第一数据显示第一界面,可具体用于:将基于所述第一数据进行解码得到的目标图像,直接进行显示。
又一种可能的实现方式中,还可由采集端设备和显示端设备共同生成雷达图。所述采集端设备,用于基于所述至少一张自由视点图像,得到第一数据,还可具体用于:基于所述至少一张自由视点图像,得到所述目标场景的深度信息;根据所述目标场景的深度信息,确定所述目标场景中的所述多个目标对象的位置信息;根据基于所述至少一张自由视点图像进行编码得到的用于显示所述预设图层的编码数据、以及所述多个目标对象的位置信息,得到所述第一数据。
该实现方式中,所述显示端设备,用于根据所述第一数据显示第一界面,可具体用于:根据所述多个目标对象的位置信息,生成所述雷达图;将生成的所述雷达图,显示在解码得到的预设图层的指定区域上。
可以理解,在其他可能的实现方式中,采集端设备还可直接将采集得到的多张自由视点图像进行编码,得到所述第一数据,然后由显示端设备基于解码之后的多张自由视点图像进行生成雷达图等处理。
在一种可能的设计中,所述采集端设备得到所述第一数据之前,还用于:从预设数据库中,获取至少一个指定目标对象对应的个性化信息。所述采集端设备,用于得到所述第一数据,还可具体用于:根据所述至少一个指定目标对象对应的个性化信息,得到所述第一数据。
基于上述设计,可选的,所述显示端设备接收的所述第一数据还可以包括:至少一个指定目标对象对应的个性化信息。所述显示端设备,还用于:检测到在所述第一界面上的第一用户操作,所述第一用户操作用于指示获取第一目标对象的个性化信息;所述第一目标对象为所述至少一个指定目标对象中的任意一个目标对象;响应于所述第一用户操作,显示第二界面;所述第二界面包含所述第一目标对象的个性化信息。
另一可选的示例中,还可由显示端设备从网络等预设数据库中,获取至少一个指定目标对象对应的个性化信息;将所述至少一个指定目标对象的个性化信息与所述雷达图中相对应的指定目标对象进行关联。基于此,所述显示端设备,也可以响应于第一用户操作,显示第二界面。
一种可能的场景中,若所述目标场景为比赛场景,所述指定目标对象为运动员;所述指定目标对象对应的个性化信息包括但不限定于以下信息中的一种或组合:运动员信息、运动员比赛信息、运动员所在团队比赛信息。
基于上述各设计,所述预设图层为基于目标场景的预设视点图像得到的,可包括以下几种可选的方式:
方式1、所述预设图层为基于第一单视点图像得到的,所述第一单视点图像为所述采集端设备采集得到的多张自由视点图像中的任意一张图像;或者,
方式2、所述预设图层为基于多个自由视点图像进行拼接得到的多视点拼接画面;或者,
方式3、所述预设图层为基于多个自由视点图像以及目标虚拟视点,生成的第二单视点图像。
此外,基于显示端设备在预设图层上显示雷达图的场景,所述显示端设备,还用于检测到在所述第一界面上的第二用户操作,所述第二用户操作用于指示关闭显示或隐藏显示所述雷达图;响应于所述第二用户操作,显示第三界面,所述第三界面包含所述预设图层。
第四方面,本申请提供一种显示端设备,所述显示端设备包括多个功能模块;所述多个功能模块相互作用,实现上述第一方面及其各实施方式中显示端设备所执行的方法,或实现上述第三方面及其各实施方式中显示端设备所执行的方法。所述多个功能模块可以基于软件、硬件或软件和硬件的结合实现,且所述多个功能模块可以基于具体实现进行任意组合或分割。
第五方面,本申请提供一种显示端设备,包括相互耦合的非易失性存储器和处理器,所述处理器调用存储在所述存储器中的程序代码以执行上述第一方面及其各实施方式中显示端设备执行的方法,或执行上述第三方面及其各实施方式中显示端设备执行的方法。
第六方面,本申请提供一种采集端设备,所述采集端设备包括多个功能模块;所述多个功能模块相互作用,实现上述第二方面及其各实施方式中采集端设备所执行的方法,或实现上述第三方面及其各实施方式中采集端设备所执行的方法。所述多个功能模块可以基于软件、硬件或软件和硬件的结合实现,且所述多个功能模块可以基于具体实现进行任意组合或分割。
第七方面,本申请提供一种采集端设备,包括相互耦合的非易失性存储器和处理器,所述处理器调用存储在所述存储器中的程序代码以执行上述第二方面及其各实施方式中采集端设备执行的方法,或执行上述第三方面及其各实施方式中采集端设备执行的方法。
第八方面,本申请实施例还提供一种显示系统,所述系统可以包括上述第七方面所介绍的采集端设备,以及至少一个如上述第五方面所介绍的显示端设备。
第九方面,本申请还提供一种计算机可读存储介质,所述计算机可读存储介质中存储有计算机程序,当所述计算机程序被计算机执行时,使得所述计算机执行上述任一方面及其各可能的设计中显示端设备、或采集端设备执行的方法。
第十方面,本申请提供了一种计算机程序产品,计算机程序产品包括:计算机程序(也可以称为代码,或指令),当计算机程序被运行时,使得计算机执行上述任一方面及其各可能的设计中显示端设备、或采集端设备的方法。
第十一方面,本申请实施例还提供一种显示端设备上的图形用户界面,该显示端设备具有显示屏、一个或多个存储器、以及一个或多个处理器,所述一个或多个处理器用于执行存储在所述一个或多个存储器中的一个或多个计算机程序,所述图形用户界面包括所述显示端设备执行上述任一方面及其各可能的设计时显示的图形用户界面。例如,显示端设备可以显示第一界面。
第十二方面,本申请还提供一种芯片,所述芯片用于读取存储器中存储的计算机程序,执行上述任一方面及其各可能的设计中显示端设备、或采集端设备执行的方法。
第十三方面,本申请还提供一种芯片系统,该芯片系统包括处理器,用于支持计算机装置实现上述任一方面及其各可能的设计中显示端设备、或采集端设备执行的方法。在一种可能的设计中,所述芯片系统还包括存储器,所述存储器用于保存该计算机装置必要的程序和数据。该芯片系统可以由芯片构成,也可以包含芯片和其他分立器件。
上述第二方面至第十三方面中任一方面及其可能的设计的有益效果请具体参阅上述第一方面中各种可能的设计的有益效果,在此不再赘述。
附图说明
图1为自由视点技术的一种原理示例图;
图2为本申请实施例适用的一种可能的系统架构的示意图;
图3为本申请实施例提供的第一界面的一种示意图;
图4为本申请实施例提供的一种显示方法的交互流程示意图;
图5为本申请实施例提供的第二界面的一种示意图;
图6为本申请实施例体用的一种显示装置的一种结构示意图;
图7为本申请实施例体用的一种显示装置的另一种结构示意图。
具体实施方式
以下,对本申请实施例中的部分用语进行解释说明,以便于本领域技术人员理解。
(1)本申请实施例中的术语“至少一个”是指一个或者多个,“多个”是指两个或两个以上。“和/或”,描述关联对象的关联关系,表示可以存在三种关系,例如,A和/或B,可以表示:单独存在A,同时存在A和B,单独存在B的情况,其中A,B可以是单数或者复数。字符“/”一般表示前后关联对象是一种“或”的关系。“以下至少一项(个)”或其类似表达,是指的这些项中的任意组合,包括单项(个)或复数项(个)的任意组合。例如,a,b,或c中的至少一项(个),可以表示:a,b,c,a-b,a-c,b-c,或a-b-c,其中a,b,c,a-b,a-c,b-c,或a-b-c中任意一种情况可以包括单个a、单个b、单个c,也可以包括多个a、多个b、多个c。
以及,除非有相反的说明,本申请实施例提及“第一”、“第二”等序数词是用于对多个对象进行区分,不用于限定多个对象的顺序、时序、优先级或者重要程度。例如,第一优先级准则和第二优先级准则,只是为了区分不同的准则,而并不是表示这两种准则的内容、优先级或者重要程度等的不同。
此外,本申请实施例和权利要求书及附图中的术语“包括”和“具有”不是排他的。例如,包括了一系列步骤或模块/单元的过程、方法、系统、产品或设备,不限定于已列出的步骤或模块,还可以包括没有列出的步骤或模块/单元。
(2)VAR技术,主要依靠运动场上分布的多个摄像机镜头,多机位、多角度地捕捉运动场上球员的每一个细小动作,在运动场上出现争议判罚或主裁判需要调取比赛录像时,需要由技术人员手动操作,并使用视频回放技术帮助主裁判做出正确的判罚决定。基于VAR技术的系统通过多相机精确的同步控制,可以按照每秒30采集帧率(FPS)实现不间断采集,从而保证比赛直播精彩画面的同步以及保存,用户在交互模式下可以点击比赛直播视频可以360°自由视角观赛。
在采用VAR技术的应用场景中,一般需要专门的VAR团队。其中,VAR团队可以依据运动场分布的摄像头数量来确定。示例性的,VAR团队可包括1名VAR和3名VAR助理(AVAR)。此外,VAR团队通常还需要4名回放专员(replay operator,RO)提供协助,RO可以从现场拍摄到的各种角度中筛选出有用信息。需要启用VAR技术进行裁判时,回放控制室内的VAR团队的几名工作人员各司其职,可以在最短的时间内完成各自规定的工作。其中,VAR负责视频画面的分析判罚,提醒或被主裁判提醒使用VAR视频进行分析;RO通常可由提供VAR设备的公司技术人员、或者/>公司专业培训的技术人员担任,RO需要在最短时间内从几个乃至十几个不同机位的摄像机画面中,找到争议判罚(进球)的回放,并选取最佳角度提供给VAR裁判际足联官员记录操作室内情况,并将信息通过电脑传输至球场内的大屏幕及现场的媒体解说席。可以理解,VAR的使用原则是“最小限度地打断比赛,最大限度地获得收益”。VAR纠正的是清晰明显的错漏判,而不是力求将比赛判罚的准确率提高到100%。由此可得到,VAR的使用场景具有较大的局限性,VAR的使用会对正在进行的比赛进程产生影响,因此VAR的使用需要非常慎重。而且,采集端设备采用的VAR系统可以帮助裁判进行分析判罚,而一般不会向观众提供。
(3)自由视点技术,属于近年兴起的一种成像技术,是一套可以在直播环境中使用的、快速动和静态“时间凝结”内容制作系统。该技术通过对体育比赛场地或舞台等场地进行多通路、多视角采集,为用户提供体育赛事等的不同观看角度。例如,在篮球、足球等球赛中,在投篮或射门时,一般用户可能会更加愿意以特定角度观看关键瞬间。因此,自由视点技术为用户提供了一种新颖的观看模式,可能受到用户和内容运营商的欢迎。例如,图1为自由视点技术的一种原理示例图。从图1中可以看到,基于摄像机阵列中包含的多个摄像机,可以采用不同视角对被拍摄场景及物体的采集,可以满足用户在自由度范围内、对一些特定的虚拟视角的观看需求。基于自由视点技术的单视点视频显示系统无法在显示端设备独立实现自由视点技术的功能,一般需要多个视点进行组合。
有鉴于此,本申请实施例提供一种显示方法,可以应用于运动比赛等场景中,例如足球、橄榄球、冰球、曲棍球、马球、板球等比赛场景中;也可以应用于舞台表演场景中,例如舞蹈、唱歌等表演场景中。该方法中,基于采集端设备采集的自由视点图像信息,可以对目标对象(例如运动员、球;或例如表演者)进行识别;然后,根据目标对象的位置信息可以生成雷达图,将雷达图和预设图层(例如可以为单视点图像、或多视点拼接画面、又或生成的虚拟单视点图像等图层)进行叠加处理之后,绘制得到目标图像并进行显示。因此,通过该方法,可以便于用户基于所述雷达图获取全局信息,满足用户更多场景下的观看体验。
另外,在显示端设备上,还可以为一些目标对象关联个性化信息(例如运动员及球的位置、移动方向,运动员身份介绍等信息),以实现所述显示端设备检测并响应于对第一目标对象(例如任意一个运动员等)的用户操作(例如点击操作等),可以显示用于展示所述个性化信息的第一界面。因此,该方法还可以基于雷达图向用户提供交互体验,从而增加用户的参与感和趣味性等。
可以理解的是,本申请实施例的采集端设备可以是诸如摄像机或包含摄像机的电子设备等设备,例如采集端设备可以为图1中的摄像机阵列中的摄像机,或者也可以为由图1中的摄像机阵列组成的设备集群等。
本申请实施例的显示端设备可以是诸如大屏、手机、平板电脑、笔记本电脑、增强现实(augmented reality,AR)/虚拟现实(virtual reality,VR)设备、智能家居设备(例如,智能电视,智慧屏等)等具有显示功能的终端设备。可以理解的是,本申请实施例对终端设备的具体类型不作任何限制。
本申请实施例可以应用到的显示端设备,示例性实施例包括但不限于搭载 或者其它操作系统的终端设备。
参阅图2,为本申请实施例适用的一种可能的系统架构的示意图。本申请实施例的系统架构可以包括:采集端设备201、显示端设备202以及传输链路203。其中,
采集端设备201(本申请实施例中也可简称为“头端”),可以用于采集自由视点图像(或视频)。其中,自由视点视频可以理解为多张自由视点图像帧,以下实施例中以一帧自由视点图像作为示例,自由视点视频的处理方式可参阅自由视点图像的处理方式,以下实施例中不再重复介绍。
示例性的,采集端设备201可以为包含多个摄像机的自由视点系统;基于此示例,采集的自由视点图像可以包括多张基于不同视点的图像。其中,不同视点图像可以为来自不同摄像机采集的图像。
另一示例性的,采集端设备201也可以为任意一个摄像机;基于此示例,尽管图2中未示出,采集端设备201可以包含多个,例如可以包含采集端设备2011至201N(N为正整数)。其中,在此示例性下,采集的自由视点图像可以为基于所述采集端设备201的部署位置所确定的视点进行拍摄得到的图像。
本申请实施例中,基于采集端设备201采集得到的多张自由视点图像,可以进行预处理,得到目标场景的深度信息。然后,所述深度信息和所述多张自由视点图像可用于进行至少一种目标对象的识别,得到各目标对象的位置信息。以及,基于所述各目标对象的位置信息得到雷达图,与预设图层进行叠加处理之后得到目标图像,显示包含目标图像的第一界面。可以理解,生成雷达图的处理过程可以在采集端设备201上实现、或者也可以在显示端设备202上实现,本申请对此不进行限定。
一种可能的场景中,可由采集端设备201生成雷达图,并将雷达图通过传输链路203传输给显示端设备202;显示端设备202接收来自采集端设备201的雷达图,叠加到预设图层之后,显示为第一界面。
另一可能的场景中,采集端设备201也可以将多张自由视点图像直接通过传输链路203传输给显示端设备202;然后,由显示端设备202基于所述多张自由视点图像生成雷达图,并对基于雷达图和预设图层进行叠加之后的第一界面进行显示。
又一可能的场景中,还可由采集端设备201和显示端设备202共同实现生成雷达图的处理。可选的,采集端设备201可以基于多张自由视点图像进行预处理,得到目标场景的深度信息、以及得到基于所述多张自由视点图像和所述目标场景的深度信息得到各目标对象的位置信息;然后,所述采集端设备201将得到的多张自由视点图像和各目标对象的位置信息通过传输链路203传输给显示端设备202。
显示端设备202(本申请实施例中也可以简称为“端侧”),可用于通过传输链路203接收来自采集端设备201的雷达图,然后将所述雷达图叠加到预设图层之后进行显示。
或者,显示端设备202,也可用于通过传输链路203接收来自采集端设备201的多张自由视点图像,基于所述多张自由视点图像,进行预处理,得到目标场景的深度信息;然后,根据所述目标场景的深度信息和所述多张自由视点图像,进行至少一种目标对象的识别,得到各目标对象的位置信息;最后,基于所述各目标对象的位置信息和预设图层,进行叠加处理之后,可以绘制得到雷达图,并对雷达图和预设图层叠加之后进行显示。
又或者,显示端设备202,也可用于通过传输链路203接收来自采集端设备201的多张自由视点图像和各目标对象的位置信息,基于所述各目标对象的位置信息和预设图层,进行叠加处理之后,可以绘制得到雷达图,并对雷达图和预设图层叠加之后进行显示。
其中,采集端设备201可以将待传输信息编码成一个数据包的形式进行传输,或者编码成多个数据包的形式进行分发传输,本申请对此不进行限定。所述待传输信息为前述实施例中介绍到的采集端设备201可能向显示端设备202发送的数据。
此外,可选的,所述预设图层可以为单视点图像,所述单视点图像可以为响应于用户的选择、或者预设规则的选择,从多张自由视点图像中确定的指定角度的视点图像。例如,图3为本申请实施例提供的第一界面的一种示意图。从图3中可以看到,显示端设备202上显示的第一界面可以为在第一单视点图像上叠加雷达图得到的。其中,雷达图可以为基于目标场景中的各目标对象(如图3中的运动员和球)的位置信息得到的全局雷达图,从而便于观众及时地判断赛况,提升参与感和趣味性。第一单视点图像可以为多张自由视点图像中的任意一张自由视点图像。
另一可选的,所述预设图层还可以为多视点拼接画面,例如,显示端设备的显示屏上可以显示为左右两个视点图像的拼接图像,还可以显示为上左、上右、下左和下右四个视点图像的拼接图像;又一示例性的,所述预设图层还可为基于多个自由视点图像以及目标虚拟视点,生成的第二单视点图像,可以理解所述第二单视点图像不属于所述采集端设备直接采集的,而是基于采集端设备采集的多张视点图像生成的虚拟单视点图像。可以理解,本申请对预设图像的选择和获取方式等不进行限定。
本申请实施例中,传输链路203可以通过多种可能的方式实现,例如有线方式或无线方式等,本申请对传输链路的实现方式不进行限定。
基于图2介绍的可能的系统架构,以下结合附图对本申请实施例提供的方法进行介绍。图4为本申请实施例提供的一种显示方法的交互流程示意图。
S401、采集端设备201采集至少一张自由视点图像。
示例性的,本申请实施例中以采集端设备201为包含用于对目标场景进行拍摄的、且部署在多个不同位置的多个摄像机的采集设备集群作为示例进行介绍。例如,多个摄像机可以通过有线或无线方式进行连接,从而可以由采集设备集群中还包含的至少一个处理器获取由所述多个摄像头分别采集的至少一张自由视点图像。
其中,目标场景例如可以为比赛场景中的运动场,或者表演场景中的舞台场地等。另外,各自由视点图像通常为以相对应的摄像机作为中心、且按照摄像机的姿态角所决定的拍摄角度,对目标场景中的一定视角和区域进行拍摄得到的图像,一般为目标场景的局部画面。
S402、采集端设备201基于所述至少一张自由视点图像,得到第一数据。
S403、采集端设备201将所述第一数据发送给显示端设备202。
本申请实施例中,主要的设计思想为,基于采集端设备201采集的至少一张自由视点图像,生成雷达图,以及将雷达图叠加到如单视点图像、或多视点拼接画面或虚拟单视点图像等预设图层上进行显示。可以理解,中间处理过程可以由采集端设备201实现,也可以由显示端设备202实现,具体实现时,可根据采集端设备201和/或显示端设备202的处理能力或实际场景进行配置,本申请对此不进行限定。基于此,本申请提供的方法可以包括但不限于以下处理场景,可以理解,不同的处理场景下,采集端设备201向显示端设备202发送的第一数据的具体内容不同,如下:
场景A、由采集端设备201生成雷达图。示例性的,生成雷达图可以包括以下流程:
步骤A1、基于所述至少一张自由视点图像,得到所述目标场景的深度信息。
示例性的,采集端设备201可以将所述至少一张自由视点图像作为输入,基于深度估计算法、神经网络模型等进行深度估计,得到自由视点图像中每个像素点的深度信息。也可以理解为像素点相对于拍摄源(例如对应的摄像机)的距离。
步骤A2、基于所述至少一张自由视点图像,对所述目标场景中的目标对象进行识别,以及确定所述目标对象的特征标识。
以比赛场景作为示例,目标对象可以包括运动员。示例性的,采集端设备201可以采用人脸检测与识别技术识别运动场上的运动员;另一示例性的,采集端设备201还可以采用文字检测与识别技术识别运动员衣服上的号码。因此,采集端设备201可以基于人脸识别结果和/或文字识别结果,确定运动场的运动员身份。可以理解,本申请实施例中,可以将所述人脸识别结果和/或文字识别结果作为所述目标对象的特征标识,从而可以根据所述目标对象的特征标识确定运动场上的运动员信息。
另外,为了提升对运动员的识别准确性,采集端设备201进行识别之前,还可以从至少一张自由视点图像中选择满足预设选择条件的至少一张图像帧。示例性的,采集端设备201可以通过预先训练的神经网络模型等选择图像帧,以至少一张自由视点图像作为预先训练的神经网络模型的输入,可以输出满足预设选择条件的至少一张图像帧。其中,预设选择条件可以为视点好(例如包含的目标对象最多、或拍摄的视角范围最大等)、质量优(例如无遮挡、清晰不模糊等);预设选择条件可以通过所述预先训练的神经网络模型学习到。
以比赛场景作为示例,目标对象还可以包括所述比赛所使用的球。示例性的,采集端设备201可以采用目标检测与识别技术识别运动场上的球。另外,与目标对象为运动员的场景类似,进行目标对象为球的识别时,也可以从至少一张自由视点图像中选择满足预设选择条件的至少一张图像帧,在此不再赘述。
需要说明的是,本申请实施例中,不同种类的目标对象还可以共同进行识别,例如可以至少一张自由视点图像作为预先训练的神经网络模型的输入,从而可以输出各目标对象。其中,预先训练的神经网络模型具有识别不同种类的目标对象的能力。
步骤A3、根据所述目标场景的深度信息,确定所述目标场景中的所述多个目标对象的位置信息。
示例性的,基于步骤A2识别出的目标对象,可以结合步骤A1中得到的目标场景的深度信息,确定各目标对象的位置信息。
可选的,本申请实施例中,为了更好的确定各目标对象的位置信息,还可以将各目标对象的位置信息转换为以拍摄指定视角(例如鸟瞰视角)的摄像机坐标系中进行位置信息标识。
例如,若目标对象为运动员,可以通过(xi,yi)来表示运动员在运动场上的位置信息。其中,i=0,1,2,……,n-1,所述i为运动员编号,n为运动场上的运动员人数。
又例如,若目标对象为球,可以通过(xball,yball)来表示球在运动场上的位置信息。
此外,由于目标场景可以为比赛场景等,通常为连续性的自由视点视频,基于此,本申请实施例中,还可以采用目标跟踪技术等,跟踪运动员和球的运动轨迹;然后,还可以对单帧自由视点图像相对于上一帧自由视点图像的位置变化进行平滑处理,从而可以保证目标对象的移动连续性。在此场景中,可以将平滑之后的位置坐标作为目标对象的位置信息,例如,若目标对象为运动员,可以通过(xi’,yi’)来表示运动员在运动场上的位置信息。其中,i=0,1,2,……,n-1,所述i为运动员编号,n为运动场上的运动员人数。又例如,若目标对象为球,可以通过(xball’,yball’)来表示球在运动场上的位置信息。
步骤A4、根据所述目标对象的特征标识和所述多个目标对象的位置信息,生成所述雷达图。
示例性的,采集端设备201中预先存储用于绘制雷达图的几何形状布局,其中,所述几何形状布局可以为基于运动场的特性预先绘制的,例如等比例绘制运动场上的参考线等,如图3中的雷达图中的运动场参考线可以是预先绘制并存储的。然后,所述采集端设备201可以将基于步骤A3得到的多个目标对象的位置信息,按照坐标信息绘制到所述几何形状布局中,渲染得到如图3所示的雷达图。
基于上述场景A的介绍内容,一种可选的实施例中,采集端设备201可以将步骤A4得到的雷达图叠加到预设图层上,得到目标图像;然后,所述采集端设备201可以将所述目标图像进行压缩编码之后,作为第一数据发送给显示端设备202。这样,可以降低对显示端设备202的处理能力的要求。
另一种可选的实施例中,采集端设备201向显示端设备202发送的第一数据还可以为:用于显示所述预设图层的编码数据、以及用于显示所述雷达图的编码数据。这样,显示端设备202接收之后,可以分开处理用于显示所述预设图层的编码数据、以及用于显示所述雷达图的编码数据,以便于可以向用户提供显示雷达图或不显示雷达图的可选功能,从而可以提升用户体验。
场景B、由显示端设备202生成雷达图。一种可选的实施例中,采集端设备201可以只负责采集至少一张自由视点图像,此时,采集端设备201向显示端设备202发送的第一数据可以为所述至少一张自由视点图像的压缩编码数据。而显示端设备202生成雷达图的实现过程可参阅场景A中的介绍内容,在此不再重复说明。
另一种可选的实施例中,采集端设备201也可以进行一些用于生成雷达图的预处理等,例如采集端设备201可以实现场景A中介绍的步骤A1、或者步骤A1和步骤A2、或者步骤A1至步骤A3;然后,采集端设备201可以将处理得到的所述目标场景的深度信息、或者所述目标场景的深度信息和目标对象的识别结果以及特征标识、或者目标对象的识别结果以及特征标识和多个目标对象的位置信息等的编码数据,作为第一数据传输给显示端设备202。而显示端设备202可以根据接收到的第一数据的具体内容,参照场景A中的生成雷达图的实现过程继续进行相应处理,具体处理过程在此不再重复说明。
S404、显示端设备202根据所述第一数据显示第一界面;其中,所述第一界面包含预设图层以及叠加在所述预设图层的指定区域上的雷达图;所述预设图层为基于目标场景的预设视点图像得到的,所述雷达图用于指示所述目标场景中的多个目标对象的位置信息。
其中,一种可能的实现方式中,所述预设图层为基于第一单视点图像得到的,所述第一单视点图像为所述采集端设备采集得到的多张自由视点图像中的任意一张图像。示例性的,所述第一单视点图像为用户选择的自由视点图像,或者为目标场景下的工作人员根据目标场景的实际情况选择的自由视点图像,或者还可以为根据预设时间或预设条件等自动切换的自由视点图像。
另一种可选的实现方式中,所述预设图层为基于多个自由视点图像进行拼接得到的多视点拼接画面。与所述第一单视点图像的确定方式类似,所述多视点拼接画面可以为用户选择的、或目标场景下的工作人员设置的、或者还可以为根据预设时间或预设条件等自动切换的多视点拼接画面。例如,显示端设备的显示屏上可以显示为左右两个视点图像的拼接图像,还可以显示为上左、上右、下左和下右四个视点图像的拼接图像。其中,所述多视点拼接画面可以为所述目标场景下的工作人员设置的,也可以为用户对多个视点的选择生成的等,本申请对此不进行限定。
另一种可选的实现方式中,所述预设图层还可为基于多个自由视点图像以及目标虚拟视点,生成的第二单视点图像。示例性的,所述多个自由视点可以为用户选择的自由视点图像,或者为目标场景下的工作人员根据目标场景的实际情况选择的自由视点图像,或者还可以为根据预设时间或预设条件等自动切换的自由视点图像,或者还可以为采集的所有自由视点图像等。以及,所述目标虚拟视点也可以为用户选择的,或者为目标场景下的工作人员根据目标场景的实际情况设置的,或者根据预设条件得到的等方式。
需要说明的是,所述预设图层也可以为在采集端设备201上生成的,此时采集端设备201可以直接将生成的预设图层的编码数据包含在第一数据中,发送给显示端设备202。或者,另一示例性的,所述预设图层也可以为在显示端设备202上生成的,此时采集端设备201可以将采集到的至少一张自由视点图像的编码数据包含在第一数据中,发送给显示端设备202;然后,显示端设备202接收到第一数据之后,可以基于第一数据中包含的至少一张自由视点图像,得到所述预设图层。
本申请实施例中,采集端设备201或显示端设备202在将雷达图叠加到预设图层上时,可以根据默认配置进行处理;如图3所示,雷达图可以默认叠加到预设图层(第一单视点图像)的下中区域。另外,显示端设备202还可以检测用于对所述雷达图进行移动的用户移动操作,响应于所述用户移动操作,可以变更第一界面,显示为对所述雷达图进行移动之后的显示界面。
另外,所述显示端设备202还可检测到在所述第一界面上的第二用户操作,所述第二用户操作用于指示关闭显示或隐藏显示所述雷达图;响应于所述第二用户操作,显示第三界面,所述第三界面包含所述预设图层。示例性的,所述第二用户操作可以包括但不限于:诸如“关闭显示雷达图”的用户语音指令、或者点击所述雷达图上包含的诸如“×”的关闭控件的用户操作、或者拖动所述雷达图以隐藏在显示端设备一侧的用户操作。
此外,本申请实施例中,在显示端设备202上显示第一界面的场景下,还可以实现对目标对象的扩展功能。示例性的,所述显示端设备202可检测到在所述第一界面上的第一用户操作,所述第一用户操作用于指示获取第一目标对象的个性化信息;所述第一目标对象为所述至少一个指定目标对象中的任意一个目标对象;响应于所述第一用户操作,显示第二界面;所述第二界面包含所述第一目标对象的个性化信息。例如,所述第一用户操作可以包括但不限于:对雷达图上第一目标对象的点击操作、或者对第一单视点图像上包含的第一目标对象的点击操作、或者诸如“显示51号运动员的个性化信息”的用户语音指令。
示例性的,所述显示端设备202可以从采集端设备201发送的第一数据中获取到至少一个目标对象的个性化信息。例如,可以所述至少一个目标对象的个性化信息可以表示为:infoj;其中,所述j=0,1,2,……,m-1,j表示目标对象的标识,m表示具有个性化信息的目标对象的数量。可以理解,本申请实施例中,可以为目标场景中包含的部分目标对象关联个性化信息。
可选的,所述显示端设备202或所述采集端设备201可以将所述至少一个目标对象的个性化信息链接到相应的目标对象上,以便于用户点击相应目标对象时可以显示对应的个性化信息,从而可以实现用户与显示端设备202的交互,提升用户的参与感和观看体验。
另一种可选的示例中,所述显示端设备202还可从预设数据库中,获取至少一个指定目标对象对应的个性化信息;将所述至少一个指定目标对象的个性化信息与所述雷达图中相对应的指定目标对象进行关联。
例如,图5为本申请实施例提供的第二界面的一种示意图。若所述目标场景为比赛场景,所述指定目标对象为运动员;所述指定目标对象对应的个性化信息包括以下信息中的一种或组合:运动员信息、运动员比赛信息、运动员所在团队比赛信息。显示端设备202检测到对第一界面上包含的雷达图中的一个运动员的点击操作,响应于所述点击操作,可以弹出所述运动员对应的个性化信息(也即显示为第二界面),如图5中的个性化信息中可以包括运动员的照片、姓名、年龄、身份等运动员信息,以及进球情况、判罚情况等运动员比赛信息。此外,尽管图5中未示出,实际实现时,还可以显示运动员所在团队比赛信息等其他类型的个性化信息等,本申请对此不进行限定。
另外,所述显示端设备202可以设置所述第二界面的显示时长阈值,例如可以设置为10s;然后若所述显示端设备202对显示第二界面的计时时长到达所述显示时长阈值,则可以恢复显示第一界面,或者若所述显示端设备202检测并响应用于恢复第一界面的用户操作,恢复显示第一界面。可以理解,即使恢复显示所述第一界面,此时显示的第一单视点图像和雷达图的具体图像帧已经随着目标场景的变化发生变化,本申请对第一界面中显示的图像帧不进行限定。
本申请提供的方法,通过基于自由视点图像生成用于显示全局信息的雷达图、以及根据自由视点图像得到用于显示某个视点的局部信息的预设图层,并将所述雷达图和所述预设图层叠加之后显示给用户,可以便于用户一方面可以通过预设图层查看目标场景的局部显示内容,另一方面还可从雷达图获取到目标场景中的全局信息,从而可以提升参与感,增强更好的用户观看体验和观看效果。
基于以上实施例及相同构思,本申请实施例还提供一种显示装置,用于实现本申请实施例提供的采集端设备或显示端设备的功能。图6所示为本申请实施例提供的一种显示装置600,该显示装置600可以是显示端设备,也可以是显示端设备中的芯片或芯片系统;或者,该显示装置600可以是采集端设备,也可以是采集端设备中的芯片或芯片系统。
具体的,所述显示装置600包括收发器601和至少一个处理器602。其中,所述处理器602和所述收发器601耦合,本申请实施例中的耦合是装置、单元或模块之间的间接耦合或通信连接,可以是电性,机械或其它的形式,用于装置、单元或模块之间的信息交互。
具体的,所述收发器601可以是电路、总线、通信接口或者其它任意可以用于进行信息交互的模块,可用于接收或发送信息。
可选的,所述显示装置600还可以包括存储器603,所述存储器603与所述收发器601和所述处理器602耦合,用于存储程序指令。
所述处理器602用于调用存储器603中存储的程序指令,使得显示装置600执行本申请实施例提供的显示方法中由采集端设备或显示端设备所执行的方法。
所述收发器601用于接收和发送射频信号,耦合于显示装置600的接收器和发射器。所述收发器601通过射频信号与通信网络和其它显示装置通信,如无线局域网(wireless local area networks,WLAN)、蓝牙通信网络、UWB等。具体实现中,所述收发器601支持的通信协议至少包括UWB协议,还可以包括蓝牙协议、WiFi协议等短距无线通信相关协议。
具体实现中,所述存储器603可包括高速随机存取的存储器,并且也可包括非易失性存储器,例如一个或多个磁盘存储设备、闪存设备或其他非易失性固态存储设备。所述存储器603可以存储操作系统(下述简称系统),例如ANDROID,IOS,WINDOWS,或者LINUX等嵌入式操作系统。所述存储器603可用于存储本申请实施例的实现程序。所述存储器603还可以存储网络通信程序,该网络通信程序可用于与一个或多个附加设备,一个或多个用户设备,一个或多个网络设备进行通信。
所述处理器602可以是一个通用中央处理器(central processing unit,CPU),微处理器,特定应用集成电路(application-specific integrated circuit,ASIC),或一个或多个用于控制本申请方案程序执行的集成电路。
在一些实施例中,所述显示装置600还可以包括输出设备604和输入设备605。输出设备604和处理器602通信,可以以多种方式来显示信息。例如,输出设备604可以是液晶显示器(liquid crystal display,LCD),发光二级管(light emitting diode,LED)显示设备,阴极射线管(cathode ray tube,CRT)显示设备,或投影仪(projector)等。输入设备605和处理器602通信,可以以多种方式接收用户的输入。例如,输入设备605可以是鼠标、键盘、触摸屏设备或传感设备等。为了便于输出设备604和输入设备605的用户使用,在一些实施例中,所述存储器603还可以存储用户接口程序,该用户接口程序可以通过图形化的操作界面将应用程序的内容形象逼真的显示出来,并通过菜单、对话框以及按键等输入控件接收用户对应用程序的控制操作。
需要说明的,图6仅仅是本申请实施例的一种实现方式,实际应用中,显示装置600还可以包括更多或更少的部件,这里不作限制。
在一个示例中,当该显示装置600应用于上述实施例中的显示端设备时,所述收发器601,用于接收来自采集端设备的第一数据;所述处理器602,用于根据所述第一数据显示第一界面;其中,所述第一界面包含预设图层以及叠加在所述预设图层的指定区域上的雷达图;所述预设图层为基于目标场景的预设视点图像得到的,所述雷达图用于指示所述目标场景中的多个目标对象的位置信息。
在一种可能的设计中,所述第一数据包括:用于显示所述预设图层的编码数据、以及用于显示所述雷达图的编码数据;所述处理器602,用于根据所述第一数据显示第一界面,具体用于:将解码得到的雷达图显示在解码得到的预设图层的指定区域上。
在另一种可能的设计中,所述第一数据包括:用于显示所述预设图层的编码数据、以及所述多个目标对象的位置信息;所述处理器602,用于根据所述第一数据显示第一界面,具体用于:根据所述多个目标对象的位置信息,生成所述雷达图;将生成的所述雷达图,显示在解码得到的预设图层的指定区域上。
在一种可能的设计中,所述第一数据还包括:至少一个指定目标对象对应的个性化信息;所述收发器601,还用于检测到在所述第一界面上的第一用户操作,所述第一用户操作用于指示获取第一目标对象的个性化信息;所述第一目标对象为所述至少一个指定目标对象中的任意一个目标对象;所述处理器602,还用于响应于所述第一用户操作,显示第二界面;所述第二界面包含所述第一目标对象的个性化信息。
在一种可能的设计中,所述处理器602,还用于从预设数据库中,获取至少一个指定目标对象对应的个性化信息;将所述至少一个指定目标对象的个性化信息与所述雷达图中相对应的指定目标对象进行关联。
在一种可能的设计中,若所述目标场景为比赛场景,所述指定目标对象为运动员;所述指定目标对象对应的个性化信息包括以下信息中的一种或组合:运动员信息、运动员比赛信息、运动员所在团队比赛信息。
在一种可能的设计中,所述预设图层为基于目标场景的预设视点图像得到的,包括以下方式:
方式1、所述预设图层为基于第一单视点图像得到的,所述第一单视点图像为所述采集端设备采集得到的多张自由视点图像中的任意一张图像;或者,
方式2、所述预设图层为基于多个自由视点图像进行拼接得到的多视点拼接画面;或者,
方式3、所述预设图层为基于多个自由视点图像以及目标虚拟视点,生成的第二单视点图像。
在一种可能的设计中,所述收发器601,还用于检测到在所述第一界面上的第二用户操作,所述第二用户操作用于指示关闭显示或隐藏显示所述雷达图;所述处理器602,用于响应于所述第二用户操作,显示第三界面,所述第三界面包含所述预设图层。
在另一个示例中,当该显示装置600应用于上述实施例中的采集端设备时,所述处理器602,用于采集至少一张自由视点图像;所述处理器602,用于基于所述至少一张自由视点图像,得到第一数据;所述收发器601,用于将所述第一数据发送给显示端设备,所述第一数据用于所述显示端设备显示第一界面;其中,所述第一界面包含预设图层以及叠加在所述预设图层的指定区域上的雷达图;所述预设图层为基于目标场景的预设视点图像得到的,所述雷达图用于指示所述目标场景中的多个目标对象的位置信息。
在一种可能的设计中,所述处理器602,用于基于所述至少一张自由视点图像,得到第一数据,具体用于:基于所述至少一张自由视点图像,得到所述目标场景的深度信息;以及,基于所述至少一张自由视点图像,对所述目标场景中的目标对象进行识别,以及确定所述目标对象的特征标识;根据所述目标场景的深度信息,确定所述目标场景中的所述多个目标对象的位置信息;根据所述目标对象的特征标识和所述多个目标对象的位置信息,生成所述雷达图;根据基于所述至少一张自由视点图像进行编码得到的用于显示所述预设图层的编码数据、以及基于所述雷达图进行编码得到的用于显示所述雷达图的编码数据,得到所述第一数据。
在一种可能的设计中,所述处理器602,用于基于所述至少一张自由视点图像,得到第一数据,具体用于:基于所述至少一张自由视点图像,得到所述目标场景的深度信息;根据所述目标场景的深度信息,确定所述目标场景中的所述多个目标对象的位置信息;根据基于所述至少一张自由视点图像进行编码得到的用于显示所述预设图层的编码数据、以及所述多个目标对象的位置信息,得到所述第一数据。
在一种可能的设计中,得到所述第一数据之前。所述收发器601,还用于从预设数据库中,获取至少一个指定目标对象对应的个性化信息;所述处理器602,用于得到所述第一数据,还用于:根据所述至少一个指定目标对象对应的个性化信息,得到所述第一数据。
在一种可能的设计中,若所述目标场景为比赛场景,所述指定目标对象为运动员;所述指定目标对象对应的个性化信息包括但不限于以下信息中的一种或组合:运动员信息、运动员比赛信息、运动员所在团队比赛信息。
在一种可能的设计中,所述预设图层为基于目标场景的预设视点图像得到的,包括以下方式:
方式1、所述预设图层为基于第一单视点图像得到的,所述第一单视点图像为所述采集端设备采集得到的多张自由视点图像中的任意一张图像;或者,
方式2、所述预设图层为基于多个自由视点图像进行拼接得到的多视点拼接画面;或者,
方式3、所述预设图层为基于多个自由视点图像以及目标虚拟视点,生成的第二单视点图像。
基于以上实施例及相同构思,本申请实施例还提供一种显示装置,用于实现本申请实施例提供的采集端设备或显示端设备的功能。图7所示为本申请实施例提供的一种显示装置700,该显示装置700可以是终端设备,也可以是终端设备中的芯片或芯片系统。
具体的,所述显示装置700包括收发单元701和处理单元702。其中,所述收发单元701用于接收来自所述显示装置700之外的其它通信装置(或其它显示装置)的信号并传输至所述处理单元702或将来自所述处理单元702的信号发送给所述显示装置700之外的其它通信装置(其它显示装置)。
所述显示装置700应用于上述实施例中的显示端设备时,所述收发单元701与所述处理单元702配合,可用于执行本申请实施例提供的由显示端设备所执行的方法。
所述显示装置700应用于上述实施例中的采集端设备时,所述收发单元701与所述处理单元702配合,可用于执行本申请实施例提供的由采集端设备所执行的方法。
本申请实施例中对模块的划分是示意性的,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,另外,在本申请各个实施例中的各功能模块可以集成在一个处理器中,也可以是单独物理存在,也可以两个或两个以上模块集成在一个模块中。上述集成的模块既可以采用硬件的形式实现,也可以采用软件功能模块的形式实现。
基于以上实施例及相同构思,本申请实施例还提供一种显示系统,所述显示系统至少包括上述实施例中提供的至少一个显示端设备和采集端设备。
基于以上实施例及相同构思,本申请实施例还提供一种计算机可读存储介质,所述计算机可读存储介质中存储有计算机可读程序,当所述计算机可读程序在计算机上运行时,使得所述计算机执行以上实施例提供的应用于采集端设备或显示端设备的显示方法。
基于以上实施例及相同构思,本申请实施例还提供一种计算机程序产品,当所述计算机程序产品在计算机上运行时,使得所述计算机执行以上实施例提供的应用于采集端设备或显示端设备的显示方法。
基于以上实施例及相同构思,本申请实施例还提供一种芯片,所述芯片用于读取存储器中存储的计算机程序,执行以上实施例提供的应用于采集端设备或显示端设备的显示方法。
基于以上实施例及相同构思,本申请实施例还提供一种芯片系统,所述芯片系统包括处理器,用于支持显示装置实现以上实施例提供的应用于采集端设备或显示端设备的显示方法。
在一种可能的设计中,所述芯片系统还包括存储器,所述存储器用于存储所述计算机装置必要的程序和数据。
在一种可能的设计中,所述芯片系统由芯片构成,或者包含芯片和其他分立器件。
本申请实施例提供的方法中,可以全部或部分地通过软件、硬件、固件或者其任意组合来实现。当使用软件实现时,可以全部或部分地以计算机程序产品的形式实现。所述计算机程序产品包括一个或多个计算机指令。在计算机上加载和执行所述计算机程序指令时,全部或部分地产生按照本发明实施例所述的流程或功能。所述计算机可以是通用计算机、专用计算机、计算机网络、网络设备、用户设备或者其他可编程装置。所述计算机指令可以存储在计算机可读存储介质中,或者从一个计算机可读存储介质向另一个计算机可读存储介质传输,例如,所述计算机指令可以从一个网站站点、计算机、服务器或数据中心通过有线(例如同轴电缆、光纤、数字用户线(digital subscriber line,简称DSL)或无线(例如红外、无线、微波等)方式向另一个网站站点、计算机、服务器或数据中心进行传输。所述计算机可读存储介质可以是计算机可以存取的任何可用介质或者是包含一个或多个可用介质集成的服务器、数据中心等数据存储设备。所述可用介质可以是磁性介质(例如,软盘、硬盘、磁带)、光介质(例如,数字视频光盘(digital video disc,简称DVD)、或者半导体介质(例如,SSD)等。
本申请是参照根据本申请的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器,使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中,使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品,该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上,使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理,从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
显然,本领域的技术人员可以对本申请进行各种改动和变型而不脱离本申请的范围。这样,倘若本申请的这些修改和变型属于本申请权利要求及其等同技术的范围之内,则本申请也意图包含这些改动和变型在内。

Claims (19)

1.一种显示方法,其特征在于,应用于显示端设备,包括:
接收来自采集端设备的第一数据;
根据所述第一数据显示第一界面;其中,所述第一界面包含预设图层以及叠加在所述预设图层的指定区域上的雷达图;所述预设图层为基于目标场景的预设视点图像得到的,所述雷达图用于指示所述目标场景中的多个目标对象的位置信息。
2.根据权利要求1所述的方法,其特征在于,所述第一数据包括:用于显示所述预设图层的编码数据、以及用于显示所述雷达图的编码数据;
所述根据所述第一数据显示第一界面,包括:
将解码得到的雷达图显示在解码得到的预设图层的指定区域上。
3.根据权利要求1所述的方法,其特征在于,所述第一数据包括:用于显示所述预设图层的编码数据、以及所述多个目标对象的位置信息;
所述根据所述第一数据显示第一界面,包括:
根据所述多个目标对象的位置信息,生成所述雷达图;
将生成的所述雷达图,显示在解码得到的预设图层的指定区域上。
4.根据权利要求1至3中任一所述的方法,其特征在于,所述第一数据还包括:至少一个指定目标对象对应的个性化信息;
所述方法还包括:
检测到在所述第一界面上的第一用户操作,所述第一用户操作用于指示获取第一目标对象的个性化信息;所述第一目标对象为所述至少一个指定目标对象中的任意一个目标对象;
响应于所述第一用户操作,显示第二界面;所述第二界面包含所述第一目标对象的个性化信息。
5.根据权利要求1至4中任一项所述的方法,其特征在于,所述方法还包括:
从预设数据库中,获取至少一个指定目标对象对应的个性化信息;
将所述至少一个指定目标对象的个性化信息与所述雷达图中相对应的指定目标对象进行关联。
6.根据权利要求4或5所述的方法,其特征在于,若所述目标场景为比赛场景,所述指定目标对象为运动员;所述指定目标对象对应的个性化信息包括以下信息中的一种或组合:
运动员信息、运动员比赛信息、运动员所在团队比赛信息。
7.根据权利要求1至6中任一项所述的方法,其特征在于,所述预设图层为基于目标场景的预设视点图像得到的,包括:
所述预设图层为基于第一单视点图像得到的,所述第一单视点图像为所述采集端设备采集得到的多张自由视点图像中的任意一张图像;或者,
所述预设图层为基于多个自由视点图像进行拼接得到的多视点拼接画面;或者,
所述预设图层为基于多个自由视点图像以及目标虚拟视点,生成的第二单视点图像。
8.根据权利要求1至7中任一项所述的方法,其特征在于,所述方法还包括:
检测到在所述第一界面上的第二用户操作,所述第二用户操作用于指示关闭显示或隐藏显示所述雷达图;
响应于所述第二用户操作,显示第三界面,所述第三界面包含所述预设图层。
9.一种显示方法,其特征在于,应用于采集端设备,包括:
采集至少一张自由视点图像;
基于所述至少一张自由视点图像,得到第一数据;
将所述第一数据发送给显示端设备,所述第一数据用于所述显示端设备显示第一界面;其中,所述第一界面包含预设图层以及叠加在所述预设图层的指定区域上的雷达图;所述预设图层为基于目标场景的预设视点图像得到的,所述雷达图用于指示所述目标场景中的多个目标对象的位置信息。
10.根据权利要求9所述的方法,其特征在于,所述基于所述至少一张自由视点图像,得到第一数据,包括:
基于所述至少一张自由视点图像,得到所述目标场景的深度信息;以及,
基于所述至少一张自由视点图像,对所述目标场景中的目标对象进行识别,以及确定所述目标对象的特征标识;
根据所述目标场景的深度信息,确定所述目标场景中的所述多个目标对象的位置信息;
根据所述目标对象的特征标识和所述多个目标对象的位置信息,生成所述雷达图;
根据基于所述至少一张自由视点图像进行编码得到的用于显示所述预设图层的编码数据、以及基于所述雷达图进行编码得到的用于显示所述雷达图的编码数据,得到所述第一数据。
11.根据权利要求9所述的方法,其特征在于,所述基于所述至少一张自由视点图像,得到第一数据,包括:
基于所述至少一张自由视点图像,得到所述目标场景的深度信息;
根据所述目标场景的深度信息,确定所述目标场景中的所述多个目标对象的位置信息;
根据基于所述至少一张自由视点图像进行编码得到的用于显示所述预设图层的编码数据、以及所述多个目标对象的位置信息,得到所述第一数据。
12.根据权利要求10或11所述的方法,其特征在于,所述得到所述第一数据之前,所述方法还包括:
从预设数据库中,获取至少一个指定目标对象对应的个性化信息;
所述得到所述第一数据,还包括:根据所述至少一个指定目标对象对应的个性化信息,得到所述第一数据。
13.根据权利要求12所述的方法,其特征在于,若所述目标场景为比赛场景,所述指定目标对象为运动员;所述指定目标对象对应的个性化信息包括以下信息中的一种或组合:
运动员信息、运动员比赛信息、运动员所在团队比赛信息。
14.根据权利要求9至13中任一项所述的方法,其特征在于,所述预设图层为基于目标场景的预设视点图像得到的,包括:
所述预设图层为基于第一单视点图像得到的,所述第一单视点图像为所述采集端设备采集得到的多张自由视点图像中的任意一张图像;或者,
所述预设图层为基于多个自由视点图像进行拼接得到的多视点拼接画面;或者,
所述预设图层为基于多个自由视点图像以及目标虚拟视点,生成的第二单视点图像。
15.一种显示端设备,其特征在于,包括:相互耦合的非易失性存储器和处理器,所述处理器调用存储在所述存储器中的程序代码以执行如权利要求1-8中任一项所述的方法。
16.一种采集端设备,其特征在于,包括:相互耦合的非易失性存储器和处理器,所述处理器调用存储在所述存储器中的程序代码以执行如权利要求9-14中任一项所述的方法。
17.一种显示系统,其特征在于,包括至少一个如权利要求15所述的显示端设备、和如权利要求16所述的采集端设备。
18.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质中存储有计算机程序,当其在处理器上运行时,实现权利要求1-8或权利要求9-14中任一项所述的方法。
19.一种包含指令的计算机程序产品,其特征在于,当所述计算机程序产品在计算机上运行时,使得所述计算机执行如权利要求1-8或权利要求9-14中任一项所述的方法。
CN202211316193.2A 2022-06-27 2022-10-26 一种显示方法、设备及系统 Pending CN117354568A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
PCT/CN2023/076903 WO2024001223A1 (zh) 2022-06-27 2023-02-17 一种显示方法、设备及系统

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
CN202210745069 2022-06-27
CN2022107450691 2022-06-27

Publications (1)

Publication Number Publication Date
CN117354568A true CN117354568A (zh) 2024-01-05

Family

ID=89354591

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202211316193.2A Pending CN117354568A (zh) 2022-06-27 2022-10-26 一种显示方法、设备及系统

Country Status (2)

Country Link
CN (1) CN117354568A (zh)
WO (1) WO2024001223A1 (zh)

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20140192164A1 (en) * 2013-01-07 2014-07-10 Industrial Technology Research Institute System and method for determining depth information in augmented reality scene
JP7013139B2 (ja) * 2017-04-04 2022-01-31 キヤノン株式会社 画像処理装置、画像生成方法及びプログラム
JP7109907B2 (ja) * 2017-11-20 2022-08-01 キヤノン株式会社 画像処理装置、画像処理方法およびプログラム
JP7277085B2 (ja) * 2018-07-04 2023-05-18 キヤノン株式会社 情報処理装置、情報処理方法及びプログラム
CN110478901B (zh) * 2019-08-19 2023-09-22 Oppo广东移动通信有限公司 基于增强现实设备的交互方法及系统
JP7446754B2 (ja) * 2019-09-30 2024-03-11 キヤノン株式会社 画像処理装置、画像処理方法、及びプログラム
CN113784148A (zh) * 2020-06-10 2021-12-10 阿里巴巴集团控股有限公司 数据处理方法、系统、相关设备和存储介质

Also Published As

Publication number Publication date
WO2024001223A1 (zh) 2024-01-04

Similar Documents

Publication Publication Date Title
CN109565605B (zh) 拍摄技术生成方法以及影像处理装置
US11043008B2 (en) Imaging system, calibration method, and calibrator
CN106803966B (zh) 一种多人网络直播方法、装置及其电子设备
US11373354B2 (en) Techniques for rendering three-dimensional animated graphics from video
US8924583B2 (en) Method, apparatus and system for viewing content on a client device
US10412467B2 (en) Personalized live media content
US9118845B2 (en) Method, apparatus and handset
US11748870B2 (en) Video quality measurement for virtual cameras in volumetric immersive media
US20170309077A1 (en) System and Method for Implementing Augmented Reality via Three-Dimensional Painting
US20120250980A1 (en) Method, apparatus and system
US20150193970A1 (en) Video playing method and system based on augmented reality technology and mobile terminal
JP2009505553A (ja) ビデオストリームへの視覚効果の挿入を管理するためのシステムおよび方法
JP2019159950A (ja) 情報処理装置および情報処理方法
CN106791906B (zh) 一种多人网络直播方法、装置及其电子设备
US9968853B2 (en) Media system and method
CN102196280A (zh) 方法、客户端设备和服务器
JP2020086983A (ja) 画像処理装置、画像処理方法、及びプログラム
US20090015678A1 (en) Method and system for automatic pose and trajectory tracking in video
CN106060523A (zh) 全景立体图像采集、显示方法及相应的装置
EP3429706B1 (en) Shared experiences in panoramic video
CN103404122B (zh) 基于运动矢量的运动对象比较
CN117354568A (zh) 一种显示方法、设备及系统
WO2022165620A1 (en) Game focus estimation in team sports for immersive video
US20120194736A1 (en) Methods and Apparatus for Interactive Media
WO2022261848A1 (en) Method and system of automatically estimating a ball carrier in team sports

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination