CN112334886A - 内容分发系统、内容分发方法、计算机程序 - Google Patents

内容分发系统、内容分发方法、计算机程序 Download PDF

Info

Publication number
CN112334886A
CN112334886A CN201980039637.2A CN201980039637A CN112334886A CN 112334886 A CN112334886 A CN 112334886A CN 201980039637 A CN201980039637 A CN 201980039637A CN 112334886 A CN112334886 A CN 112334886A
Authority
CN
China
Prior art keywords
virtual
distributor
live content
distribution
content
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201980039637.2A
Other languages
English (en)
Other versions
CN112334886B (zh
Inventor
川上量生
岩城进之介
小岛尚
清水俊博
齐藤宽明
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Dwango Co Ltd
Original Assignee
Dwango Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Dwango Co Ltd filed Critical Dwango Co Ltd
Publication of CN112334886A publication Critical patent/CN112334886A/zh
Application granted granted Critical
Publication of CN112334886B publication Critical patent/CN112334886B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/27Server based end-user applications
    • H04N21/274Storing end-user multimedia data in response to end-user request, e.g. network recorder
    • H04N21/2743Video hosting of uploaded data from client
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F13/00Interconnection of, or transfer of information or other signals between, memories, input/output devices or central processing units
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/20Scenes; Scene-specific elements in augmented reality scenes
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/103Static body considered as a whole, e.g. static pedestrian or occupant recognition
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/20Movements or behaviour, e.g. gesture recognition
    • G06V40/23Recognition of whole body movements, e.g. for sport training
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/21Server components or server architectures
    • H04N21/218Source of audio or video content, e.g. local disk arrays
    • H04N21/2187Live feed
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/422Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/4223Cameras
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/44012Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving rendering scenes according to scene graphs, e.g. MPEG-4 scene graphs
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/478Supplemental services, e.g. displaying phone caller identification, shopping application
    • H04N21/4788Supplemental services, e.g. displaying phone caller identification, shopping application communicating with other users, e.g. chatting
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81Monomedia components thereof
    • H04N21/8146Monomedia components thereof involving graphical data, e.g. 3D object, 2D graphics
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81Monomedia components thereof
    • H04N21/816Monomedia components thereof involving special video data, e.g 3D video

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Signal Processing (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • General Engineering & Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Health & Medical Sciences (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • General Health & Medical Sciences (AREA)
  • Psychiatry (AREA)
  • Social Psychology (AREA)
  • Computer Graphics (AREA)
  • Software Systems (AREA)
  • Computer Hardware Design (AREA)
  • Information Transfer Between Computers (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Processing Or Creating Images (AREA)

Abstract

能够设为如下的结构:进行与该实况内容不同的分发的分发者、或对该不同的分发进行视听的视听者加入虚拟空间,能够参加基于虚拟项目的投入的意思表示或其视觉辨认。

Description

内容分发系统、内容分发方法、计算机程序
技术领域
本公开涉及内容分发系统、内容分发方法和计算机程序。
背景技术
近年来,经由网络来分发实况内容(Live content)的服务作为互联网直播而普及。在这样的互联网直播中,提出了分发者在虚拟空间内作为虚拟角色(虚拟人物(avatar))来登场,并将该影像作为实况内容来分发的技术。在这样的实况内容中,对通过运动捕捉技术将分发者的动作合成为虚拟角色的动作的影像进行分发。
例如,专利文献1公开了如下结构:使虚拟空间上的虚拟人物代行自身的行动,生成来自包含第三者视点的自由视点的3维空间图像,由此进行没有在现实空间中携带摄影器材的不便和委托其他人摄影等麻烦的动画制作。
此外,专利文献2提出了如下方案:在现实世界中进行现场演奏的情况下,通过对表演者祝福,或送花,表演者也能够越来越兴奋,与此对应地,在动画共享服务中也以获得同样的效果为目的,将内容(实况内容等动态图像是指在观众之间共享的“节目”)的观众购买的虚拟项目与内容关联而进行管理,并作为对内容的显示画面进行修饰的项目而使用。作为虚拟的项目,例如可以举出由内容的观众购买花、字符、标志等作为“装饰(decoration)”,并在显示画面上配置在自由的位置来装饰设显示画面。
现有技术文献
专利文献
专利文献1:日本专利第4637889号公报
专利文献2:日本特开2012-120098号公报
发明内容
但是,在与由观众通过如使用了虚拟空间的互联网直播等,将装饰那样的虚拟项目投入到该虚拟空间中的系统相关的现有技术中,还没有解决以下那样的重大课题。
如果以前面的装饰为例,则认为作为实况内容的表演者或相关人员(歌手、舞者、演奏者、讲演者、导演、演出家、制片人、赞助商等)希望实况内容被更广的范围、人数的观众视听,如果内容得到认可,则在内容画面内显示作为之前的专利文献中的装饰那样的认可或称赞、赞美的符号的虚拟项目。
进而,期望进行了折角显示的装饰那样的认可的符号项目被更多的广大范围的观众视觉确认,赞同成为更大的蔓延。
然而,在先前的专利文献2所公开的结构中,由于能够投送装饰的观众仅是以自己的意志观看该内容的观众,因此难以从更广的对象得到作为认可的符号的装饰的投送。
同样地,在先前的专利文献2所公开的结构中,仅是只有以自己的意志来观看实况内容的观众看到其他观众向实况内容投送的装饰,因此,不能设想装饰被更广的对象观看而认可的圈扩展的情况。
本发明是鉴于上述的点而完成的,其目的在于提供一种内容分发系统、内容分发方法、计算机程序,该内容分发系统能够从不限于成为对象的实况内容的观众的更宽的对象者得到成为对实况内容的认可的符号的虚拟项目(item)的投送,同时,能够由不限于该实况内容的观众的更宽的对象者视觉确认成为该认可的符号的虚拟项目,从而能够进一步扩大针对实况内容的认可的圈。
为了解决上述课题,本发明提供下述1)~7)所述的内容分发系统、内容分发方法、计算机程序。
1)
一种内容分发系统,其特征在于,具有:
参加受理部,受理其他的实况内容的分发者向实况内容的分发者对分发所使用的虚拟空间内的参加希望;
信息取得部,取得用于表示实况内容的分发者与其他的实况内容的分发者各自的活动的运动信息、以及各虚拟角色的信息;以及
影像分发部,基于信息取得部所取得的各信息,将虚拟空间以及各虚拟角色的影像分发给实况内容的观众以及其他实况内容的观众,
内容分发系统具有投入受理部,投入受理部从各分发者以及各观众的任一个受理新的虚拟项目向虚拟空间的投入,并包含被进行了投入的新的虚拟项目的影像而进行虚拟空间以及各虚拟角色的分发。
2)
如1)所述的内容分发系统,其特征在于,
被构成为,新投入的虚拟项目具有作为活动的信息的运动信息,该运动信息被用于影像分发部进行的分发。
3)
如2)所述的内容分发系统,其特征在于,
被构成为,用于表示实况内容的分发者与其他实况内容的分发者各自的活动的运动信息、以及作为新投入的虚拟项目的活动的信息的运动信息,通过共同的结构部被进行存储和/或传输。
4)
一种内容分发方法,其特征在于,
参加受理步骤,受理其他的实况内容的分发者向实况内容的分发者对分发所使用的虚拟空间内的参加希望;
信息取得步骤,取得用于表示实况内容的分发者与其他的实况内容的分发者各自的活动的运动信息、以及各虚拟角色的信息;以及
影像分发步骤,基于信息取得步骤中所取得的各信息,将虚拟空间以及各虚拟角色的影像分发给实况内容的观众以及其他实况内容的观众,
内容分发方法具有投入受理步骤,从各分发者以及各观众的任一个,受理新的虚拟项目向虚拟空间的投入,并包含被进行了投入的新的虚拟项目的影像而进行虚拟空间以及各虚拟角色的分发。
5)
如4)所述的内容分发方法,其特征在于,
被构成为,新投入的虚拟项目具有作为活动的信息的运动信息,该运动信息被用于影像分发步骤中进行的分发。
6)
如5)所述的内容分发方法,其特征在于,
被构成为,表示实况内容的分发者与其他实况内容的分发者各自的活动的运动信息、以及作为新投入的虚拟项目的活动的信息的运动信息,通过公共的结构部进行存储和/或传输。
7)
一种计算机程序,使计算机执行4)至6)的任一项所述的内容分发方法的各步骤。
根据本公开,能够提供一种内容分发系统、内容分发方法、计算机程序,该内容分发系统能够从不限于成为对象的实况内容的观众的更宽的对象者得到成为对实况内容的赞同的符号的虚拟项目的投送,同时,能够由不限于该实况内容的观众的更宽的对象者视觉确认作为该认可的符号的虚拟项目,从而能够进一步扩大针对实况内容的赞同的圈。
附图说明
图1是示意性地表示本发明的内容分发接收系统的结构的图。
图2是图1的内容分发接收系统所具有的内容分发服务器的框图。
图3是说明图1的内容分发接收系统所具有的虚拟人物(avatar)的数据的示意图。
图4是图1的内容分发接收系统所具有的第一分发者终端的框图。
图5是图1的内容分发接收系统所具有的第一观众终端的框图。
图6是图5的第一观众终端的外观示意图。
图7是在图6的外观示意图中包含评论的显示的图。
图8是本发明的内容分发接收系统执行的、与共同分发前的内容视听有关的信号流程图。
图9是本发明的内容分发接收系统中的、共同分发前的第一虚拟空间的示意图。
图10是图9所示的虚拟空间中的、从各视点观察的渲染的示意图。
图11是本发明的内容分发接收系统中的、共同分发前的第二虚拟空间的示意图。
图12是图11所示的虚拟空间中的、从各视点观察的渲染的示意图。
图13是本发明的内容分发接收系统执行的、与共同分发前的虚拟项目的投送有关的信号流程图。
图14是本发明的内容分发接收系统中的、被投入虚拟项目的、共同分发前的第一虚拟空间的示意图。
图15是图14所示的虚拟空间中的、从各视点观察的渲染的示意图。
图16是本发明的内容分发接收系统执行的、与共同分发的执行有关的信号流程图。
图17是本发明的内容分发接收系统中的、共同分发开始后的第一虚拟空间的示意图。
图18是图17所示的虚拟空间中的、从各视点观察的渲染的示意图。
图19是本发明的内容分发接收系统执行的、在由第一观众终端进行共同分发开始后的虚拟项目的投送的情况下的信号流程图。
图20是本发明的内容分发接收系统中的、被投送了虚拟项目的、共同分发开始后的第一虚拟空间的示意图。
图21是图20所示的虚拟空间中的、从各视点观察的渲染的示意图。
图22是本发明的内容分发接收系统执行的、在由第二观众终端进行共同分发开始后的虚拟项目的投送的情况下的信号流程图。
图23是本发明的内容分发接收系统中的、被投送了虚拟项目的、共同分发开始后的第一虚拟空间的示意图。
图24是图23所示的虚拟空间中的、从各视点观察的渲染的示意图。
图25是表示本发明的内容分发接收系统中的投送用虚拟项目被附加了动作信息的情况下的利用例的示意图。
图26是表示本发明的内容分发接收系统中的投送用虚拟项目被附加了动作信息的情况下的利用例的示意图。
图27是表示本发明的内容分发接收系统中的、投送用虚拟项目的其他方式的示意图。
图28是表示本发明的内容分发接收系统中的、投送用虚拟项目的其他方式的示意图。
图29是表示本发明的内容分发接收系统中的、投送用虚拟项目的其他方式的示意图。
图30是表示本发明的内容分发接收系统中的投送用虚拟项目的其他方式的示意图。
图31是表示本发明的内容分发接收系统中的、内容分发服务器等的结构的图。
具体实施方式
以下,对本公开的实施方式进行说明。另外,以下说明的本实施方式只不过是例示,在不脱离本发明的主旨的范围内能够进行各种变形,这些也包含在本发明中。
【内容分发接收系统1的结构】
图1是示意性地表示本发明的内容分发接收系统1的结构的图。
内容分发接收系统1构成为包括内容分发服务器2、第一分发者终端11、第一观众终端12、第二分发者终端21、第二观众终端22,这些各结构通过互联网通信网3或者其他通信网以能够相互进行数据交换的方式连接。内容分发服务器2是通用的计算机被构成为以专用的计算机程序进行动作的服务器。
第一分发者终端11是在后面进行说明的使用了第一虚拟空间30的实况内容的分发中使用的、由主办该实况内容的分发者使用的个人计算机。第一观众终端12是对上述实况内容进行视听的观众所使用的个人计算机,或者也可以使用智能手机、PDA(个人数字助理)等各种信息终端来实现。
第二分发者终端21是在使用了之后进行说明的第二虚拟空间40的实况内容的分发中使用的、由主办该实况内容的分发者使用的个人计算机。第二观众终端22是对上述实况内容进行视听的观众所使用的个人计算机,或者也可以使用智能手机、PDA(个人数字助理)等各种信息终端来实现,这一点也相同。
将第一分发者终端11和第一观众终端12合起来称为第一内容分发组10,同样地将第二分发者终端21和第二观众终端22合起来称为第二内容分发组20。各个分发组在尚未实施实况内容的共同分发的阶段,在各组10、20内共享各个实况内容分发流。
另外,虽然图1图示的结构以及上述的说明中为了简化说明而限制了构成的终端等的数量,但在实施时当然能够构成为包含更大量的分发者终端、更大量的观众终端、更大量的内容分发组。
【内容分发服务器2的结构】
如图2图示,内容分发服务器2具有作为服务器内外的数据发送端的输入输出接口2a、进行在各处所示的服务器2的动作的控制统管的CPU(中央处理单元)即控制部2b。
同样,服务器2所具有的运动信息存储部2c存储有从各分发者终端或者各观众终端发送的、与作为虚拟项目的虚拟人物(人体的代理显示对象)的动作相关的数据、以及投送项目那样的虚拟项目的数据等,并根据需要向所需的发送目的地进行发送。
具体而言,如图3所示,运动信息存储部2c由在后面说明的观众终端等自己准备虚拟人物的外观数据7-1,或者从由系统准备并供选择中选择,或者指定网络上配置的外观数据的URL(统一资源定位器)等来决定。然后,作为对观众等的身体各处的活动进行感测的结果即运动数据7-2,如图3(B)所示,将身体各处作为节7-2a而获得其位置信息、活动的信息。也可以构成为,进一步生成对节7-2a进行连接的枝7-2b的信息,使节7-2a彼此的关系明确化。
内容分发部2d接收并存储各分发者终端等进行渲染作业而在影像中生成的实况内容,并向要求了视听的各终端发送来供视听。例如,关于虚拟人物的渲染,如图3(C)所示,从运动数据7-2得到外观数据7-1的各处的位置和活动,生成表示当前的虚拟人物的位置和活动的虚拟人物的渲染用数据7-3。另外,由于绘制能够利用作为静态图像数据的虚拟人物的外观数据7-1、以及节7-2、支7-2b的数据来进行,而非利用动画,因此外观数据7-1是静态图像数据,因此数据容量小,节7-2a、支7-2b的数据不是图像数据而是有限数量的点的坐标数据或运动矢量数据,因此,其容量也小,其结果是,能够使数据的发送、接收、存储、渲染所需的传送路径、硬件的负担极小。进而,如果不是将虚拟形象的外观数据7-1指定为图像数据本身,而是用URL(统一资源定位器)指定,则能够以更小的字符串数据进行发送、存储。这些有利的方面是通过系统的哪个结构生成、传输、存储、渲染这些外观数据或运动数据无关,起到同样的效果,不限于人的虚拟人物,在想要渲染虚拟对象时成为共同的效果。另外,在本申请的附图中,各处记载的虚拟人物的示意图使用简易的显示,没有写入到四肢的活动等,但这些图示是指图3(C)所示的渲染用虚拟人物数据7-3。
如后面说明的那样,共同分发受理部2e从主办某个实况内容而进行分发的分发者所使用的分发者终端受理在当前分发中想要进行其他实况内容的共同分发的申请,向与主办该其他实况内容的其他分发者的终端生成并发送用于进行共同分发的询问的信息。
程序存储部2f存储有用于实现该服务器2的各执行动作的程序。
用户管理部2g将之前说明的主办实况内容的分发者所使用的分发者终端、对该实况内容进行视听的观众使用的观众终端、以及共同分发该实况内容的其他分发者使用的分发者终端和其观众所使用的观众终端的信息保存为IP(互联网协议)地址等数据,从而通过使用该用户管理部2g存储的信息,能够知道应该向哪个终端发送某个实况内容,因此在本系统1中,向适当的终端发送适当的实况内容。
此外,用户管理部2g还记录向各实况内容所使用的虚拟空间内投送的虚拟项目的履历和该项目的种类等信息。
投送项目受理部2h从正在视听实况内容的终端受理表示向该实况内容的认可或赞美的虚拟项目的投送,向主办被投送的对象的实况内容的分发者终端发送虚拟项目的信息。其结果,在被投送的实况内容的显示画面上会显示被投送的虚拟项目。
总线2i将这些服务器2的各结构间以相互可进行数据交换的方式连接。
第一分发者终端11和第二分发者终端21具有共同的结构,以下以第一分发者终端11为例进行说明。
【第一分发者终端11的结构】
如图4所示,第一分发者终端11首先具有作为终端内外的信息输入输出端的输入输出接口11a、作为进行终端11的各结构的控制统管的CPU的控制部11b。
虚拟人物操作部11c为了使分发者使自己的虚拟的分身即虚拟人物在虚拟空间内登场,并进行所希望的动作,使用附加于自己的身体的加速度传感器、通过3D摄像机拍摄了自己的活动的数据、或者用多普勒传感器感测到自己的身体各处的活动的数据,取得这些运动数据并向服务器2进行发送。
运动信息受理部11d为了实现实况内容的共同分发,存储经由服务器2从其他分发者终端接收到的其他分发者或观众的运动数据,并用于渲染。另外,除了进行共同分发以外,在从分发者主办的实况内容的观众申请了基于虚拟人物的参加的情况下,也接收并记录该观众的虚拟人物的运动数据用于实况内容的渲染。此外,运动信息受理部11d被构成为,还接收并存储从其他分发者或者观众投送的虚拟项目的信息,并与虚拟人物同样地供于实况内容的渲染,因此,即使在共同分发的实况内容中,也能够使包含共同分发目的地的分发组的观众在内的大范围的对象者视听到被投送的虚拟项目。
渲染部11e使用上面所示的虚拟人物的运动数据、被投送的虚拟项目的数据、和虚拟空间的背景图像或放置于虚拟空间内的虚拟的项目的数据,进行用于使虚拟空间可视化的绘制(渲染),将得到的虚拟空间的影像作为实况内容向服务器2发送,以供分发。
显示部11f是为了分发者自身视听实况内容、或者为了进行各种操作而进行画面显示的结构,由个人计算机的显示面板、佩戴于面部的护目镜型的HMD(Head MountDisplay:头戴式显示器)等实现。
操作部11g用于分发者进行各种动作的操作,可以是个人计算机的键盘、鼠标、触摸面板,或者也可以是通过操作者的运动数据进行操作的设备。程序存储部11h存储实况内容的分发、视听所需的计算机程序,也可以包括通用的计算机操作系统(OS)、互联网阅览程序(浏览器)等。数据存储部11i存储用于实况内容的虚拟空间的背景的数据、虚拟项目的数据等。
投送项目投稿部11j是为了使分发者向进行共同分发的其他实况内容等投送虚拟项目而存储该虚拟项目的数据的结构,但分发者终端11也有可能根据状况而被用作观众终端12,因此与观众终端12同样地配置的评论投稿部11k是用于将覆盖在实况内容的显示画面上而显示的字符信息即评论投稿到服务器2的构成。总线11m以能够相互交换数据的方式连接分发者终端11的各结构。
第一观众终端12和第二观众终端22具有共同的结构,以下以第一观众终端12为例进行说明。
【第一观众终端12的结构】
如图5所示,第一观众终端12具有作为终端12内外的数据发送接收端的输入输出接口12a、作为进行终端12各处的控制统管的CPU(中央处理单元)的控制部12b。
就虚拟人物操作部12c而言,分发者为了使作为自己的虚拟分身的虚拟人物在虚拟空间内登场,并进行所希望的动作,使用附加于自己的身体的加速度传感器、利用3D摄像机拍摄了自己的活动的数据、或者用多普勒传感器感测到自己的身体各处的活动的数据,取得这些运动数据并向服务器2进行发送。
就虚拟人物投稿部12e而言,观众为了使自己的虚拟人物登场在自己所视听的实况内容中,将其用于向服务器2投稿虚拟人物的外观数据、之前说明的动作数据。
显示部12f是为了观众自身视听实况内容、或者为了进行各种操作而进行画面显示的结构,通过个人计算机的显示面板、佩戴于面部的护目镜型的HMD(Head MountDisplay)等来实现。
操作部12g用于观众进行各种动作的操作,既可以是个人计算机的键盘、鼠标、触摸面板,或者也可以是通过操作者的动作数据进行操作的设备。程序存储部12h存储视听实况内容所需的计算机程序,也可以包括通用的计算机操作系统(OS)、互联网阅览程序(浏览器)等。数据存储部12i存储各种数据。
投送项目投稿部12j为了观众向正在视听的实况内容投送虚拟项目,而存储该虚拟项目的数据。评论投稿部12k是用于将覆盖在实况内容的显示画面上显示的字符信息即评论投稿到服务器2的结构。总线12m将观众终端12的各结构以能够相互交换数据的方式连接。
图6是示意性地表示用个人计算机实现了第一观众终端12的情况下的外观的图,显示各种影像、静态图像、动态图像、字符信息的显示面板12-1上,在观众为了利用本系统1的服务而输入预先被通知的URL(统一资源定位符)并与服务器2进行连接时,从服务器2接收必要的数据和脚本(JavaScript(注册商标))程序,显示动态图像分发服务的门户。
观众从显示列表(未图示)中选择自己想要视听的实况内容,图5表示当前显示该实况内容(节目)的内容的状况。但是,为了避免图示变得复杂,从观看实况内容的各观众投稿的字符信息即评论在该图6中未图示。
在图6中,在显示面板12-1内具有显示实况内容动画的动画显示区域12-1a,在此显示有:第一分发者的虚拟人物12-1b、进行了共同分发的第二分发者的虚拟人物12-1c、出于对实况内容的认同、赞美等目的而视听该实况内容的任意观众投送的、表示色带的外观的第一投送项目12-1d、作为配置于该实况内容所使用的虚拟空间中的虚拟项目的树木12-1n、房屋12-1o。
同样地,在显示面板12-1内分别显示用于返回到动画分发服务的门户网(入口)页的主页按钮显示12-1e、用于视听的内容不是直播而是播放内容的情况下使用的播放停止按钮显示12-1f、暂停按钮显示12-1g、以及播放按钮显示12-1h。
显示面板12-1内的评论投稿按钮显示12-1i是用于对观众正在视听的内容投稿先前进行了说明的评论的按钮,项目投送按钮显示12-1j是同样地用于对视听中的内容投送用于表示认同或赞美等的虚拟项目的动作的按钮。
搜索条显示12-1k在内容为播放内容的情况下,使播放开始时刻为左端,使播放结束时刻与右端对应,搜索按钮显示12-1m的位置表示当前的播放时刻,能够使鼠标指针12-3移动该搜索按钮显示12-1m的位置并使其向想要播放的时刻移动。作为前面说明的操作部12g,观众终端12也具有鼠标指针12-3、鼠标光标12-2,键盘12-4。
图7是表示在图6所示的观众终端12中进一步将评论12-1r显示在显示面板12-1内的状况的图,“感谢更新!!”、“啊,我知道这里”、“我也是。”、“我去过这里啊”、“请告诉我你们住的酒店名称!?”、“这里不是很贵吗?”、“好像也不是。”、“还希望能上传美食照片”这样的内容的评论12-1r从显示面板12-1的右端出现并滚动移动到左端而消失。这些评论12-1r被显示的范围被设定为超出显示实况内容动画的动画显示区域12-1a,因此,观众能够清楚地理解这些评论12-r不是内容的原始内容而是由别的投稿者投稿的。
【内容的分发和视听】
接着,分别使用图7的信号流程图、图9的第一虚拟空间示意图、图10的从各视点观察到的渲染结果的图,说明从第一分发者终端11投稿并分发的实况内容被第一观众终端12视听为止的动作。
要主办实况内容来分发的分发者使用第一分发者终端向服务器2进行内容分发的申请(步骤S101)。若服务器2许可分发,则从服务器2向第一分发者终端12通知许可的意思(步骤S102),服务器2在分发服务网站的适当的页面,作为能够进行视听的内容而进行揭示(步骤S103)。
由于被许可了分发,所以第一分发者终端11作为实况内容,在图9所示的第一虚拟空间内的各虚拟项目中,将与第一分发者的虚拟人物显示有关的动作数据发送给服务器2,并配合,将从第一分发者的虚拟人物观察到的第一虚拟空间的渲染影像(图10(A)。从第一虚拟人物12-1b观察到的第一虚拟空间内的项目全部被渲染。这在以下也是同样的。)、从放置在第一虚拟空间内且具有θ1的视场角(也可以是固定视场角,也可以是能够变焦的视场角)的第一虚拟照相机看到的渲染影像(图10(B))开始向服务器2发送(步骤S104)。虚拟摄像机无需如图示那样设置在中央,设置场所可以是任意的,也可以移动,也可以设置多个。另外,也可以从实况内容的中途追加。此外,虚拟摄像机也能够进行实况内容的观众、进行共同分发的其他分发者、共同分发的其他内容的观众设置或移动。这些虚拟摄像机的运用在本说明书的其他地方也是共通的,但在以后的说明中为了避免繁杂,假设虚拟摄像机仅限于在各虚拟空间中只有一个的例示。
通过列表得知广播中的实况内容的存在的观众从第一观众终端12向服务器2申请实况内容的视听(步骤S105),其结果,从服务器2对第一观众终端12,连续地发送从第一分发者的虚拟人物观察到的第一虚拟空间的渲染影像(图10(A))、从第一虚拟摄像机观察到的渲染影像(图10(B))作为动态图像,观众能够通过操作来选择期望的影像并使其显示,并进行视听。另外,也可以从服务器2对第一观众终端12,除了以上说明那样的已渲染影像的数据以外,还发送第一分发者的虚拟人物12-1b的动作数据,由第一观众终端12进行渲染。这样的变形在本申请说明书的其他地方也是同样的。
此外,第一分发者终端11分发的实况内容不限于第一观众终端12,利用本动画分发系统的其他利用者也能够进行申请并视听。
以上说明的关于实况内容的分发和视听的开始的动作,在属于第二分发组20的第二分发者终端21、第二观众终端22中也完全相同,在图11中示出第二分发者终端21在实况内容的分发中使用的第二虚拟空间40中包含背景41、作为虚拟的项目的信号机43、具有θ2的视角的第二虚拟摄像机42、第二分发者的虚拟人物显示12-1c,在图12的(A)中示出了从第二分发者的虚拟人物显示12-1c的视点观察到的渲染影像,在图12的(B)中示出了从第二虚拟摄像机42的视点观察到的渲染影像。
【向虚拟空间内投入虚拟项目】
接着,参照图13、图14、图15说明从第一分发者终端11正在视听分发中的实况内容的第一观众终端12,以表示对该实况内容的认可、赞美等为目的,投送表示色带的外观的第一虚拟项目12-1d的动作。
首先,要投送虚拟项目12-1d的观众从第一观众终端12向服务器2进行投送的申请和项目数据的发送作为项目投送动作(步骤S201)。项目数据包含如图14所示的第一虚拟项目12-1d那样的例如带状的外观数据等。
服务器2使用与第一分发者虚拟人物12-1b的运动数据相同的方法,即使用相同的存储单元或传送单元即相同的结构,存储接收到的项目数据,并且向第一分发者终端11发送(步骤S202)。其结果,第一分发者终端11除了使用到目前为止的第一分发者虚拟人物12-1b的数据以外,还能够使用被投送的虚拟项目12-1d的数据进行虚拟空间30的渲染,因此,以后,第一分发者11分发的实况内容如图15(A)所示,从第一分发者虚拟人物12-1b的视点观察到的渲染影像,图15(B)所示的从第二虚拟摄像机的视点观察到的渲染影像那样,对实况内容施加第一虚拟项目12-1d的影像(步骤S203),该影像能够被对实况内容进行视听的所有观众(包含第一分发者)视听,因此所有观众能够理解观众所示出的认同或赞美的情绪(步骤S204)。
【共同分发的执行】
接着,使用图16至图18说明使用图8至图10说明的第一分发者终端11所分发的实况内容在第一观众终端12正在被视听的状态下,第二分发者终端21进行共同分发的各动作。
在本实施方式中,作为一例,设为共同分发预先进行第一分发者终端11的许可,因此,从第二分发者终端21对服务器2进行共同分发的申请(步骤S401)。
受理了申请的服务器2对正在分发作为对象的实况内容的第一分发者终端11发送共同分发询问(步骤S402)。如果得到许可(步骤S403),则从服务器2向第二分发者终端21通知许可的意思(步骤S404),接受该许可,向第二分发者终端21发送第二分发者虚拟人物12-1c和从第二分发者终端分发的实况内容中存在观众的虚拟人物的情况下、或如果有投入虚拟项目,则将这些数据全部使用与之前说明的虚拟人物的运动数据或外观数据的传输或存储同样的方法,即使用共同的存储单元或传输单元,发送到服务器2(步骤S405)。服务器2通过与虚拟人物的动作数据同样的方法,即使用共同的存储单元、传承单元,向第一分发者终端11发送这些接收数据(步骤S406)。接收到它们的第一分发者终端11只要与虚拟人物的运动数据同样地对它们进行处理来对第一虚拟空间30进行渲染,其结果是,如图16的第一虚拟空间的概念图那样,第一虚拟空间30被变更。第一分发者终端11将从图18(A)所示的第一分发者虚拟人物12-1b及第二分发者虚拟人物12-1c的视点观察到的渲染影像、图18(B)图示的从第一虚拟摄像机32的视点观察到的渲染影像向服务器2发送(步骤S407),之后,服务器2将至今视听了从第一分发者终端11分发的实况内容的所有观众和至今视听了从第二分发者终端21分发的实况内容的全部观众,将图18图示的各渲染影像作为实况内容进行分发(步骤S408)。
在此,共同分发的开始是基于进行各个实况内容的分发的各分发者的意志来进行的,这一点是重要的。各实况内容的观众基于与自己的意志不同的维度的决定来视觉确认新的虚拟人物,或者参加新的实况内容的视听,从观众的立场有意外性,具有演出上的趣味性,具有能够进行认可或赞美的对象扩展的优点。此外,根据各分发者的立场,具有自己主办的实况内容的观众数量、观众层扩展的优点。
【共同分发后的虚拟项目投送的执行】
接着,使用图19至图24,说明在如使用图16至图18所说明的那样,在第一分发者终端11分发的实况内容中加入了第二分发者终端21分发的实况内容的虚拟人物等的、共同分发中进行虚拟项目的投送的动作。
在从第一观众终端12向共同分发中的实况内容进行投送的情况下,从第一观众终端12向服务器2,通过之前说明的方法进行投送(投送的申请和项目数据的发送)(步骤S501),由于从服务器2向第一分发者终端11进行项目数据的发送(步骤S502),因此第一分发者终端11以后包含表示色带的形状的虚拟项目12-1d来进行第一虚拟空间30的渲染,之后,从第一分发者虚拟人物12-1c的视点和第二分发者虚拟项目12-1c的视点进行了渲染的视频(图21(A))、从第一虚拟摄像机32的视点进行了渲染的视频(图21(B))被分发给被共同分发的所有观众终端和分发者终端(步骤S503、S504)。
其结果是,由于实况内容的观众层扩展,所以对于根据观众个人的意思或信息是没有视听的机会的意想不到的实况内容,能够表示观众的认同或赞美,虚拟项目投送所带来的认同或赞美的结果扩大到更宽的观众层、观众数,虚拟项目投送的效果非常大。
另外,图22至图24示出了来自第二观众终端22的虚拟项目投送动作,被用于投送的、表示纪念的盾的第二虚拟项目33的形状与第一虚拟项目12-1d不同,因此,例如也能够使其他观众理解是从哪个观众投送的,或者享受虚拟项目的形状本身的创作性。
【关于变形例1~各结构的配置的任意性】
在前面的本实施方式的说明中,由主办者的分发者终端进行关于分发者主办的虚拟空间的各视点影像的渲染。但是,这样构成的这一点在本发明的实施中不是必须的,也不是本质性的。即,可以在服务器中进行该渲染,或者也可以在正在进行共同分发的其他分发者终端、正在视听该实况内容的各观众终端中进行该渲染。为了这样进行渲染,只要预先将虚拟空间的背景、所放置的虚拟项目的数据、各虚拟人物的数据、投送虚拟项目的数据发送至要进行渲染的服务器或者终端即可,详细的结构或者步骤从之前说明的本实施方式的结构中可知。
【变形例之2~进行共同分发时的方式的多样性】
同样地,在前面的本实施方式的说明中,设为在进行共同分发时,发挥申请了共同分发的一侧的虚拟空间30,在维持其背景、虚拟项目的存在的状态下,在虚拟空间30和虚拟空间40中共享各虚拟人物、投送虚拟项目。但是,该结构也不是必须的或者本质上的,例如,也可以发挥虚拟空间40侧的背景、虚拟项目,或者,也可以进行渲染,以使观众在共同分发前进行视听的虚拟空间的背景、虚拟项目。为了如此进行渲染,只要预先将虚拟空间的背景、所放置的虚拟项目的数据、各虚拟人物的数据、投送虚拟项目的数据发送至要进行渲染的服务器或者终端即可,详细的结构或者步骤从之前说明的本实施方式的结构可知,这一点也相同。
【变形例之3~被附加了动作信息的投送用虚拟项目的有效利用】
如前面说明的那样,在本实施例系统1中,以与分发者或者观众的虚拟人物(代理人)的运动数据(动作信息)同样的步骤、结构进行发送和存储的方式,在本实施例系统1中构成投送虚拟空间的虚拟项目。
因此,能够使投送中使用的虚拟项目与虚拟人物同样地具有动作信息(位置的信息、活动的方向/速度的信息、姿势的信息、声音的信息、振动的信息等)。
通过设为附加了这样的动作信息的投送用虚拟项目,能够进行提高用户的兴趣、关心的多样的演出。
例如,图25(A)图示的示意图意味着投送到虚拟空间30中的虚拟项目12-1d从上向下落下而着落到虚拟空间的地面的演出。项目的投送例如与在剧场中将“喜封(おひねり)”投到舞台,或者在婚礼中投掷花束这样的感觉具有共同性,是自然的感觉的演出,容易得到观众的认同。
同样地,图25(B)图示的示意图是这样的演出:若将项目的投送对象决定为例如第一分发者12-1b并以这样的方式进行规定的操作,则被投送到虚拟空间中的虚拟项目12-1d朝向作为投送的对象的第一分发者12-1b在虚拟空间内移动。从前面说明的“喜封”的例子也能够成为自然的演出。
同样地,图26(A)是投送到虚拟空间内的虚拟项目12-1d自动地在虚拟空间内移动(包括到处飞)、或者根据投送的人的操作在虚拟空间内来回移动的演出。与投送后的虚拟项目在虚拟空间内静止的情况相比,成为非常显著的演出,有助于投送的表现(appeal)。
图26(B)图示的示意图是在从众多观众投送的虚拟项目12-1d大量上升、或者同一人投送了多个项目的情况下,这些被投入的项目暂时堆叠后,崩塌的演出。对于受欢迎的实况内容、受欢迎的场景、受欢迎的表演者,预测虚拟项目的投送集中,这样的演出可实现性高,演出上的效果也大。
【变形例之4~投送虚拟项目时的演出上的研究】
包括已经进行了说明的点在内,如果列举投入虚拟项目的情况下的演出上的优选的方法,则首先除了将投送的对象设为实况内容整体以外,还可以是决定特定的表演者等对象并在操作上投送的方法。确定对象并被投送的项目也可以放置于对象者的旁边,或者标记对象者名。
另外,还期望在虚拟摄像机的视野内放置被投送的项目。
以下,对关于投送项目的进一步优选的实施方式进行说明。
【关于投送项目的进一步优选的实施方式】
作为在本实施方式中投入的假想项目12-1d的一例,是表示观众或分发者的认同或赞美的符号,例如有从虚拟空间的上方向下方落下的红酒杯的对象(图27(A))、从地面或虚拟空间的下方产生的草的对象(图27(B))、从虚拟空间的下方朝向上方上升的烟花的演出等。此外,也可以施加伴随这些对象的演出的声音的演出、振动的演出、动画的演出等。作为声音的演出,例如既可以是使烟花扬起的声音、红酒杯彼此接触那样的效果音,也可以是像歌舞伎等中使用那样的合乘(合いの手)、吆喝声这样的声音。此时,如果进行将所投入的虚拟项目设定为透明等的操作,则也能够进行仅将声音作为虚拟项目投入这样的演出。此外,也可以同样地在投入虚拟项目时,将使振动功能工作的信号发送到分发者终端和/或观众终端,在虚拟项目的投入中施加振动的演出。
在这些虚拟项目的控制中也可以使用物理运算,例如,能够进行以下各种演出:落下的虚拟项目在其他的对象、地面上弹起的演出、虚拟项目因冲击等而损坏而隐藏且其中的其他的对象飞出的演出、被投送的红酒杯堆叠而使完成红酒杯塔的演出、落下的虚拟项目与吹出的虚拟项目冲突的演出、使用虚拟人物拿着虚拟项目、操纵、投掷等各种演出。
此外,作为虚拟项目的另一例,也可以不是单纯的符号,而是具有特别的功能、效果,并以特定目的使用的类型。作为功能的一例,例如有,若投入炸弹那样的具有爆炸的功能的虚拟项目,则在一定时间后或者通过规定的触发而爆炸,并将其他的虚拟项目、对象、虚拟人物等吹飞或者消失的功能,或者若投入具有生物、机械那样的活动的功能的虚拟项目,则由于该虚拟项目的行动,可能会有推开其他的虚拟项目、对象、虚拟人物等或者引起互动的功能等。
此外,作为虚拟项目的另一例,也可以是服装、交通工具、建筑物、背景、占据虚拟空间的一部分的小空间等,通过使用它们,例如能够进行虚拟人物佩戴作为虚拟项目投入的服装的演出、虚拟人物进入所投入的建筑物中的演出、将所投入的背景显示为虚拟空间的背景或者其一部分的演出、或者将进行了特殊照片等背景、照片帧那样的装饰的小空间(不限于三维而包含平面、曲面、线段)作为虚拟项目来投入,通过虚拟人物进入该帧内,从而能够进行虚拟人物从不同的影像切出的其他视角进行影像分发那样的演出等。
此外,作为虚拟项目的另一例,也可以不是预先决定的样式的虚拟项目,而是反映投入者投入时或者事先设定的内容。作为设定内容,例如有虚拟项目所记载的字符的内容、虚拟项目的颜色或图案、虚拟项目的一部分或整体的形状、动态虚拟项目的活动的内容、具有功能的虚拟对象的功能的种类、多个虚拟项目成为一组而能够投入的虚拟项目群中的单体的虚拟项目彼此的组合内容等。此外,这些设定内容也可以根据投入者的操作或者规定的触发而变化,进而,对于在节目内已经投入的虚拟项目、或过去的映像中投入的虚拟项目,也可以根据具有适当权限的虚拟项目的操作或者规定的条件来改变其设定内容。
此外,作为虚拟项目的另一例,也可以显示投入者自身的信息、道具数据所包含的各种数值数据等这样的附加信息。作为附加信息,例如可以有虚拟项目的投入者的用户信息、所投入的虚拟项目的获取所需的积分的数值、通过投入该虚拟项目而对分发者或节目赋予的点数的数值、所投入的虚拟项目或对该虚拟项目的投入者的其他观众或分发者的评价等。此外,作为这些附加信息的显示部位,例如可以有投入的虚拟项目的表面或附近、以与投入的虚拟项目关联的方式在虚拟空间的内外的任意的场所、其他的标签或其他的窗口内等。此外,各种数值数据可以是与各虚拟项目的投入有关的数值,也可以是与属于任意类别的多个虚拟项目的投入有关的数值(例如,也包括总和、平均、排行等)。
此外,作为虚拟项目的另一例,也可以具有投票等统计功能。例如,在存在多个分发者的广播中,存在由于观众向自己喜欢的分发者投入虚拟项目而进行的分发者间的人气投票等。在这样的广播中,通过对向各分发者投入的虚拟项目的总数或者作为虚拟项目的附加信息的各种数值数据的综合值等进行合计,能够得到投票结果。此外,作为观众指定向哪个分发者投入虚拟项目时的方法,例如,可以是提供投入虚拟项目时、或者事先提供向哪个分发者投入虚拟项目的选项的方法,或者也可以是如下方法:能够获得各个分发者专用的虚拟项目,当投入这些专用虚拟项目时,作为虚拟项目向对应的分发者的投入而被换算。进而,也可以是投入虚拟项目的人自己指定虚拟项目的投入位置、移动方向、轨道等,根据这些指定虚拟项目在虚拟空间内移动的结果,判断为对接触的虚拟人物进行了投票的方法。
此外,作为虚拟项目的另一例,也可以具有基于与现实的商品对应的虚拟项目的获取、或者投入记录来受理现实的该商品的购买的功能。
此外,作为虚拟项目的投入方法的例子,说明了如上述那样投入的人自己指定虚拟项目的投入位置、移动方向、轨道等的方法,但不限于此,例如也可以预先决定能够按各虚拟项目投入的位置、移动方法、轨道等。例如,也可以越是获取所需的点数多的虚拟项目,越优先投入到虚拟空间的中心区域。
此外,作为虚拟项目的演出的例子,也可以在投入的虚拟项目在一定时间后或者通过规定的触发而变化。例如,虚拟项目有如下效果:在投入后10秒后缩小,若堆叠则压扁而变小,逐渐变得透明而消失,若积存一定数量以上则会被分解为细切等。根据这样的演出,例如,在投入了大量的虚拟项目或大型的虚拟项目的情况下,能够避免分发者操作的虚拟人物被虚拟项目遮挡而减轻分发的趣味性这样的状况。
此外,作为虚拟项目的演出的例子,也可以是投入的虚拟项目在一部分的分发者终端以及或者观众终端中显示,在除此以外的分发者终端以及或者观众终端中不显示那样的演出。例如,也可以是由观众投入的虚拟项目在投入了该虚拟项目的观众的终端中被显示,但在其他观众的终端中不显示这样的演出。根据这样的演出,能够应对例如想要确认自身投入的虚拟项目,但避免分发者的虚拟人物埋藏在虚拟项目中而无法看到的观众的要求。此外,也可以是由观众投入的虚拟项目在分发者终端中显示,但不在所有观众终端中显示的演出。根据这样的演出,能够应对例如虽然想要对分发者表示赞赏的意思,但想要避免因大量的虚拟项目而导致节目性崩溃的观众的要求。此外,这样的演出的设定既可以在节目的广播前决定,也可以在广播中决定以及变更。另外,这样的演出的设定既可以由分发者终端进行操作,也可以由观众终端进行操作。
此外,作为虚拟项目的控制的例子,也可以是对所投入的虚拟项目的数量设置限制的控制。例如,也可以存在能够在1个节目的广播中投入的虚拟项目的数量的上限。此外,即使在投入了上限数的虚拟项目之后,也可以通过满足一定时间的经过或特定条件,来填充能够再次投入的虚拟项目。根据这样的控制,例如,能够避免相对于1个节目仅偏向1种虚拟项目而投入的情况,能够建立均匀地投入多种多样的虚拟项目的环境。
此外,作为虚拟项目的控制的例子,也可以是在能够投入虚拟项目的时间、能够投入的虚拟空间内的区域设置限制的控制。例如,在从节目的广播的开始起计数而经过时间包含在规定的经过时间的范围内的情况下,也可以是禁止或限制一部分虚拟项目的投入这样的控制。另外,例如也可以是基于具有权限的人的操作,暂时禁止或部分限制虚拟项目的投入这样的控制。进而,也可以是参照投入到节目内的虚拟项目的数量、虚拟项目所占的总面积、或者其他参数,在判断为这些参数超过了规定的阈值的情况下,禁止或者一部分限制虚拟项目的投入这样的控制。此外,例如也可以是如下控制:将虚拟空间内分割为任意的区域,参照按每个区域投入的虚拟项目的数量、虚拟项目所占的总面积、或者其他参数,在判断为这些参数超过了规定的阈值的情况下,在该区域中禁止或者一部分限制虚拟项目的投入。另外,在获取节目整体而投入的虚拟项目的上述那样的参数超过了规定的阈值的情况下,也可以控制为在虚拟空间内的某个区域(例如虚拟人物所在的区域)不能进一步投入虚拟项目,在其他区域(例如没有虚拟人物的区域)之后也允许虚拟项目的投入。根据这样的控制,能够避免因投入大量的虚拟项目而导致节目性崩溃。
此外,作为虚拟项目的控制的例子,也可以是虚拟项目不碰到虚拟人物的控制。例如,虚拟项目也可以设为针对其他对象产生物理相互作用的设定,设为仅穿过虚拟人物的设定(图29(A))。此外,例如,虚拟人物的周围具有透明的壁面,所投入的虚拟项目与透明的壁面碰撞而反弹,因此也能够设为虚拟项目不会碰到虚拟人物这样的设定(图29(B))。根据这样的控制,能够避免因虚拟项目碰到虚拟人物而导致节目性崩溃。
此外,包括与前面的说明一部分重复的点在内,进一步对进行了进行投送的虚拟项目的演出上的研究的实施方式进行说明。
重新考虑本实施例系统1中的将虚拟项目投送到三维虚拟空间中的结构,本系统实施的方法是将三维虚拟空间作为绘制发送的对象,从服务器经由网络向不特定的视听用终端进行动态图像广播的方法,具有服务器的绘制部根据来自视听用终端的请求进行向三维虚拟空间内投入虚拟对象的所述绘制的步骤,虚拟对象、投入该虚拟对象的动作具有如下的演出上的特征。
(A)投入的虚拟对象在与位于三维虚拟空间内的任一虚拟对象之间,进行模仿了实际空间中的实体间的物理作用的互动的演出(图30(A)、图30(B))。···例如,在虚拟对象为橡胶球的情况下等,是投入到虚拟空间中的橡胶球碰到位于虚拟空间中的地面而弹跳的演出。或者,也包括虚拟对象彼此发生碰撞、或在碰撞后进行弹性的反抗、或因碰撞而虚拟对象发生变形或被破坏的情况。对于观众而言,能够享受真实的感触。
(B)在与处于三维虚拟空间内的人体的虚拟人物对象被投入的虚拟对象之间进行接触的演出。···在之前的橡胶球的例子中,作为虚拟对象的橡胶球碰到虚拟空间内的虚拟人物而弹出,或虚拟人物踢该橡胶球的演出,这也能够享受到真实感。
(C)投入的虚拟对象是在内部绘制图像的图像帧,在内部绘制位于3维空间内的人体的虚拟人物的演出(图30(C))。···是在照片帧中拍摄到自己投入的对象的表演者等时,对象的表演者被封闭,表演者和进行了投入的观众也非常显著的效果。也可以在帧内加入字符。
(D)在视听用终端的显示画面中,显示进行投入的观众终端的排名信息的演出。···是在动态图像广播画面的一部分,显示在该节目中投送多的观众、成为投送的对象的情况较多的表演者等,提高进行所谓的“总选举”性的热烈度、进行投送的动机的演出。
(E)在动态图像广播的显示画面中,投入成为使已经投入的其他虚拟对象消失的原因的新的虚拟对象的演出。···投送也是所谓的人气投票,所以有可能投送会集中在受欢迎的动态图像节目、该节目中有人气的环节(Corner)或场景、有人气的表演者。在该情况下,如图28(C)所示,动态图像广播画面被投入的虚拟项目填满,无法欣赏本来的广播画面。因此,例如是投送炸弹型的虚拟项目并使其爆炸,从而进一步加强其他虚拟项目的演出。存在意外性、战斗的要素,促进娱乐性。
(F)投入的虚拟对象在三维虚拟空间内向远离视点的方向移动的演出(图30(A))。…如之前说明的那样,是利用3维空间这一情况,给予真实的感觉、沉浸感的演出。相反地,还考虑虚拟项目从里侧飞向跟前的结构。
(G)投入的虚拟对象对与该广播相关的对象者分别预先进行关联,通过进行投入来按每个对象者发生显示或属性的变化的演出。···例如表演者为偶像组合,按每个组合的成员准备不同的投入项目,观众选择自己喜欢的成员用专用的项目。是一种人气投票、享受到竞争心、游戏感觉。此外,在投入项目伴随着实际的礼物的情况下,具有能够在组合的成员之间容易进行礼物的分配的优点。
(H)根据投入的执行或投入后的虚拟对象的活动来进行声音显示的演出。···如果虚拟对象是烟花,则发生破裂音,或者在虚拟项目碰到地面时发出声音。如果是动物型的项目,则也考虑发出鸣叫声。
(I)在广播的显示画面中预先显示能够用于投入的虚拟项目各自的演出。···虚拟项目有多种,以菜单形式选择的方式在广播画面的旁边等作为菜单进行显示。如果虚拟项目的种类按每个节目变化,或者根据日换而变化,或者随机地变化,则会出现游戏性。
(J)能够用于投入的虚拟项目对商品进行了象征化,通过投入来使商品的购入成立的演出。···虽然虚拟项目的投送原本是从对节目或表演者的认可或赞美(所谓的“喜封”)开始的,但考虑利用该机制、系统来进行附加价值更高的服务。在该演出中,如在线购物那样将商品在广播画面中选择并作为购入的意思表示,进行所选择的虚拟项目的投送,但不是单纯的购入,有参加节目的感觉,也可以在节目内进行商品解说,能够成为附加价值高的商业。
(K)显示对被投入的虚拟项目进行投入的观众所指定的字符信息的演出。…已经进行了将评论投稿到动态图像节目中,但将其在虚拟项目的投送服务中展开。由于是字符信息,因此在进行投送的人的意思显示的基础上,游戏感、参加的感觉进一步提高。
(L)投如的虚拟项目具有字符的外形形状的演出(图30(D))。…有字符本身从上方下来的趣味性。
(M)使能够根据进行动态图像广播的节目而进行投入的虚拟对象不同的演出。·····通过设为符合节目内容的虚拟项目,带来节目本身的兴起。
(O)投入的虚拟项目是日用品的演出。···项目的投送是认同或赞美等,因此,一般多使用花、奖杯等具有赠送的感觉的物品,此外,也有不少著名的建筑物、地标上的塔等。与此相对,作为具有完全不应该作为这样的目的使用的意外性的物品,如果使用洗衣机、冰箱等日用品,则有意外性,还导致兴起、宣传(appeal)。
(P)针对投入的每个虚拟项目具有有可能投入的上限数量的演出。…说明了在有人气的节目等中可能引起投送的集中的点,但如果对投送的数量设置上限,则能够防止过度的集中,也能够从稀有感中维持投送的积极性。
(Q)进行处于三维虚拟空间内的人体的虚拟人物对象被投入的虚拟物件的握持的演出(图30(B))。·····如果虚拟人物抓住被投入的虚拟项目并使其活动,则能够得到宛如表演者接住“喜封”那样的感觉,因此能够得到投送的达成感。
(R)投入的虚拟项目在被投入后经过规定时间后消失的演出。···之前说明的防止过度的投送集中,并且继续进行投送的动机。
(S)根据进行投入的观众的属性,使被投入的虚拟项目在三维虚拟空间内的出现位置和/或出现后的表演不同的演出。···动态图像分发(广播)服务的会员是分为收费会员和免费会员的运营商,为了优待收费会员或者高级会员,这些会员投送的项目在虚拟空间中出现在跟前而变得显眼,或者出现在表演者的旁边,或者落下的速度缓慢。
(T)一种动态图像广播系统,将三维虚拟空间作为绘制发送的对象,从服务器经由网络向各视听用终端进行动态图像广播,基于来自观众用终端的请求向三维虚拟空间投入新的虚拟对象来进行绘制的绘制部、以及绘制部进行绘制时,模拟将三维虚拟空间中已经包含的已有虚拟对象和新投入的虚拟对象设想为处于实际空间的实体物的情况下的物理的相互作用,将该模拟的结果反映到所述绘制中的计算部。····如之前说明的那样,投送虚拟项目既可以与现有的虚拟项目冲突而弹性地反抗(反弹),也可以绘制为非弹性地将某一个项目或者双方的项目变形、破坏。或者,也可以在两个项目不接触的同时,宛如在磁场或者电场的作用下相互排斥而改变在空间内行进的轨道。
(U)一种动态图像广播系统,将三维虚拟空间作为绘制发送的对象,从服务器经由网络向各视听用终端进行动态图像广播,绘制部,基于来自观众用终端的请求,向三维虚拟空间投放新的虚拟对象来进行绘制;以及用户接口部,其针对能够投入的虚拟对象,进行用于进行使用了观众终端的投入操作的操作示教、和/或基于使用各观众终端已经进行了的各投入的结果的信息的显示。···有以下方法:对观众能够投入的虚拟项目,在显示画面的侧方等进行罗列显示而使其被选择;也有以下方法,作为节目而表示想要进行投入的项目的种类、想要进行投入的时间的信息,而引导投入的方法。作为已经投入的项目的排序,如果将投入的数量、点数最多的观众的名字、句柄名同样地显示在画面侧方,则也能够成为奖励。
(V)一种动态图像广播系统,将三维虚拟空间作为绘制发送的对象,从服务器经由网络向各视听用终端进行动态图像广播,所述动态图像广播系统具有:绘制部,其基于来自观众用终端的请求,向三维虚拟空间投入新的假想对象来进行绘制;以及属性判断部,根据对被用于投入的观众用终端、进行该投入的观众、以及被用于该投入的虚拟对象中的至少一个预先提供的属性,使所述投入的可否、投入的方式、投入后的显示的方式中的至少任意一个变化并反映到绘制中。···例如,在基本上能够免费地参加的动态图像分发服务中,只要能够仅允许收费高级会员进行项目的投入,或者投入与免费会员不同的醒目的项目,或者在虚拟空间的显示画面中,能够进行在最前面的醒目的位置显示项目那样的投入,则加入到高级会员的积极性提高,能够有助于动画分发服务的运营利益。这样的差异化既可以通过动画分发服务的账户进行,也可以通过注册的终端(个人计算机、智能手机、平板终端)等的固有的编号、通信端的编号(IP地址等)进行。此外,也可以是针对虚拟对象例如设定针对每个节目推荐投入的项目、或者相反禁止投入的项目,使节目的行进顺畅地进行的方法。另外,在根据如上所述的观众、观众终端、虚拟项目的种类等属性而设为不同的控制的情况下,除了能否投入项目以外,作为投入后的项目的举止,也可以使用在画面中出现的场所的差异、在虚拟空间中飞行的方法的差异、持续出现的时间的长短的差异等。
(W)一种服务器,包括:分发部,其分发观众允许介入的实况内容;存储部,其存储用于实施观众的介入的信息;发送部,其将信息向观众的终端发送;接收部,其从终端接收介入的实施请求;显示控制部,在接收到介入的实施请求的情况下,其基于实施请求,在实况内容的影像中合成显示电子项目;以及显示控制部在达到规定的条件的情况下,限制观众的介入。···如之前说明的那样,是在虚拟项目的投送数达到规定的限额的情况下禁止以后的投送、或者限制投送虚拟项目的时间的方法。
在此,参照对内容分发服务器2的结构等进行说明的图31,对用于实现以上说明的那样的投送虚拟项目的各种演出的结构重新进行说明。
如之前的说明那样,投送中使用的虚拟项目分别具有特有的外观,且进行特有的动作。另外,一些虚拟项目在与虚拟人物、其他虚拟项目、虚拟空间内的其他项目之间进行接触等的联动动作。因此,这些虚拟项目只要是与之前说明的虚拟人物同样的数据的持有方法、用于渲染的结构,则存在各种优点。
作为一例,与虚拟项目相关的信息存储于内容分发服务器2的虚拟项目存储部53,对观众终端56进行操作而选择出的虚拟项目,服务器2的投入受理部52接受其选择信号,所选择的虚拟项目的信号(外观以及动作)经由动作数据发送部55而发送至分发者终端57,在分发者终端57中,与其他项目、虚拟人物的信息一并被进行渲染,经由服务器2的影像数据接收部50、影像数据发送部51,发送至观众终端56以供观看动态图像节目。
作为其他方法,在观众想要投入自己原创的虚拟项目的情况下,也可以预先在观众终端56中准备虚拟项目的信息,经由服务器2向分发者终端57发送,从而进行渲染。
或者,也可以在分发者终端57中准备虚拟项目的信息。
另外,渲染可以由分发者终端57进行,也可以由观众终端56或服务器2进行。
(发明效果的说明)
根据本发明,能够提供一种内容分发系统、内容分发方法、程序,该内容分发系统能够从不限于成为对象的实况内容的观众的更宽的对象者得到成为与实况内容的认可的符号的虚拟项目的投送,同时,不限于该实况内容的观众的更宽的对象者能够视觉确认成为该认可的符号的虚拟项目,从而能够进一步扩大针对实况内容的赞同的圈。
本发明能够以其他各种方式实施,在不脱离发明的主旨的范围内能够进行各种省略、置换、变更。这些实施方式及其变形包含在发明的范围或主旨中,同样包含在权利要求书所记载的发明及其等价的范围内。

Claims (7)

1.一种内容分发系统,其特征在于,具有:
参加受理部,受理其他的实况内容的分发者向实况内容的分发者对分发所使用的虚拟空间内的参加希望;
信息取得部,取得用于表示所述实况内容的分发者与所述其他的实况内容的分发者各自的活动的运动信息、以及各虚拟角色的信息;以及
影像分发部,基于所述信息取得部所取得的各信息,将所述虚拟空间以及所述各虚拟角色的影像分发给所述实况内容的观众以及所述其他实况内容的观众,
所述内容分发系统具有投入受理部,所述投入受理部从所述各分发者以及所述各观众的任一个受理新的虚拟项目向所述虚拟空间的投入,并包含被进行了所述投入的新的虚拟项目的影像而进行所述虚拟空间以及所述各虚拟角色的所述分发。
2.如权利要求1所述的内容分发系统,其特征在于,
被构成为,所述新投入的虚拟项目具有作为活动的信息的运动信息,该运动信息被用于所述影像分发部进行的分发。
3.如权利要求2所述的内容分发系统,其特征在于,
被构成为,用于表示所述实况内容的分发者与所述其他实况内容的分发者各自的活动的运动信息、以及作为所述新投入的虚拟项目的活动的信息的运动信息,通过共同的结构部被进行存储和/或传输。
4.一种内容分发方法,其特征在于,
参加受理步骤,受理其他的实况内容的分发者向实况内容的分发者对分发所使用的虚拟空间内的参加希望;
信息取得步骤,取得用于表示所述实况内容的分发者与所述其他的实况内容的分发者各自的活动的运动信息、以及各虚拟角色的信息;以及
影像分发步骤,基于所述信息取得步骤中所取得的各信息,将所述虚拟空间以及所述各虚拟角色的影像分发给所述实况内容的观众以及所述其他实况内容的观众,
所述内容分发方法具有投入受理步骤,从所述各分发者以及所述各观众的任一个,受理新的虚拟项目向所述虚拟空间的投入,并包含被进行了所述投入的新的虚拟项目的影像而进行所述虚拟空间以及所述各虚拟角色的所述分发。
5.如权利要求4所述的内容分发方法,其特征在于,
被构成为,所述新投入的虚拟项目具有作为活动的信息的运动信息,该运动信息被用于所述影像分发步骤中进行的分发。
6.如权利要求5所述的内容分发方法,其特征在于,
被构成为,表示所述实况内容的分发者与所述其他实况内容的分发者各自的活动的运动信息、以及作为所述新投入的虚拟项目的活动的信息的运动信息,通过公共的结构部进行存储和/或传输。
7.一种计算机程序,使计算机执行权利要求4至6的任一项所述的内容分发方法的各步骤。
CN201980039637.2A 2018-07-25 2019-07-24 内容分发系统、内容分发方法、记录介质 Active CN112334886B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2018150864A JP6745301B2 (ja) 2018-07-25 2018-07-25 コンテンツ配信システム、コンテンツ配信方法、コンピュータプログラム
JP2018-150864 2018-07-25
PCT/JP2019/029106 WO2020022404A1 (ja) 2018-07-25 2019-07-24 コンテンツ配信システム、コンテンツ配信方法、コンピュータプログラム

Publications (2)

Publication Number Publication Date
CN112334886A true CN112334886A (zh) 2021-02-05
CN112334886B CN112334886B (zh) 2024-03-29

Family

ID=69182232

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201980039637.2A Active CN112334886B (zh) 2018-07-25 2019-07-24 内容分发系统、内容分发方法、记录介质

Country Status (4)

Country Link
US (2) US11477507B2 (zh)
JP (1) JP6745301B2 (zh)
CN (1) CN112334886B (zh)
WO (1) WO2020022404A1 (zh)

Families Citing this family (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11044535B2 (en) 2018-08-28 2021-06-22 Gree, Inc. Video distribution system for live distributing video containing animation of character object generated based on motion of distributor user, distribution method, and storage medium storing video distribution program
US11736779B2 (en) 2018-11-20 2023-08-22 Gree, Inc. System method and program for distributing video
WO2020129115A1 (ja) * 2018-12-17 2020-06-25 株式会社ソニー・インタラクティブエンタテインメント 情報処理システム、情報処理方法およびコンピュータプログラム
JP6644928B1 (ja) * 2019-03-29 2020-02-12 株式会社ドワンゴ 配信サーバ、視聴者端末、配信者端末、配信方法、情報処理方法及びプログラム
JP7244450B2 (ja) * 2020-03-23 2023-03-22 グリー株式会社 コンピュータプログラム、サーバ装置、端末装置、及び方法
WO2022190291A1 (en) * 2021-03-10 2022-09-15 17Live Japan Inc. Universal live streaming with interaction
JP7253597B1 (ja) 2021-10-29 2023-04-06 グリー株式会社 情報処理システム、情報処理方法およびコンピュータプログラム
JP7340207B2 (ja) * 2021-10-29 2023-09-07 グリー株式会社 情報処理システム、情報処理方法およびコンピュータプログラム
JP7253025B1 (ja) 2021-10-29 2023-04-05 グリー株式会社 情報処理システム、情報処理方法およびコンピュータプログラム
JP7253026B1 (ja) 2021-10-29 2023-04-05 グリー株式会社 情報処理システム、情報処理方法およびコンピュータプログラム
US20230252706A1 (en) * 2021-10-29 2023-08-10 Gree, Inc. Information processing system, information processing method, and computer program
US11989811B2 (en) 2021-10-29 2024-05-21 Gree, Inc. Information processing system, information processing method, and computer program
JP7333528B2 (ja) * 2021-12-23 2023-08-25 グリー株式会社 プログラム、情報処理方法及び情報処理装置
JP2023127513A (ja) * 2022-03-01 2023-09-13 株式会社 ディー・エヌ・エー ライブ配信サービスを提供するためのシステム及び方法、並びに、ライブ動画を視聴するためのプログラム
JP7317325B1 (ja) * 2022-04-27 2023-07-31 グリー株式会社 情報処理システム、情報処理方法およびコンピュータプログラム
JP7357865B1 (ja) 2022-07-25 2023-10-10 グリー株式会社 プログラム、情報処理方法、及び情報処理装置

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005018212A (ja) * 2003-06-24 2005-01-20 Sora Technology Corp ネットワーク上の情報コンテンツに対するユーザの反応を把握する情報収集方法及びシステム
US7086005B1 (en) * 1999-11-29 2006-08-01 Sony Corporation Shared virtual space conversation support system using virtual telephones
US20180096507A1 (en) * 2016-10-04 2018-04-05 Facebook, Inc. Controls and Interfaces for User Interactions in Virtual Spaces

Family Cites Families (33)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8280682B2 (en) * 2000-12-15 2012-10-02 Tvipr, Llc Device for monitoring movement of shipped goods
US6774869B2 (en) * 2000-12-22 2004-08-10 Board Of Trustees Operating Michigan State University Teleportal face-to-face system
US8683386B2 (en) * 2006-10-03 2014-03-25 Brian Mark Shuster Virtual environment for computer game
JP4074879B1 (ja) * 2006-10-18 2008-04-16 株式会社コナミデジタルエンタテインメント ゲーム装置、メッセージ表示方法、および、プログラム
JP4637889B2 (ja) * 2007-10-10 2011-02-23 ヤフー株式会社 仮想空間放送装置
US7921128B2 (en) * 2008-02-05 2011-04-05 International Business Machines Corporation Method and system for merging disparate virtual universes entities
CN102084354A (zh) * 2008-04-05 2011-06-01 社会传播公司 基于共享虚拟区域通信环境的装置和方法
US20110107239A1 (en) * 2008-05-01 2011-05-05 Uri Adoni Device, system and method of interactive game
US9462030B2 (en) * 2009-03-04 2016-10-04 Jacquelynn R. Lueth System and method for providing a real-time three-dimensional digital impact virtual audience
WO2010129721A2 (en) * 2009-05-05 2010-11-11 Mixamo, Inc. Distributed markerless motion capture
US8839121B2 (en) * 2009-05-06 2014-09-16 Joseph Bertolami Systems and methods for unifying coordinate systems in augmented reality applications
JP2012120098A (ja) * 2010-12-03 2012-06-21 Linkt Co Ltd 情報提供システム
US20120249544A1 (en) * 2011-03-29 2012-10-04 Giuliano Maciocci Cloud storage of geotagged maps
JP5755064B2 (ja) * 2011-07-08 2015-07-29 株式会社ドワンゴ 会場設置ディスプレイシステム
JP6281857B2 (ja) * 2012-01-13 2018-02-21 株式会社ドワンゴ 映像システム、および撮影方法
KR101327995B1 (ko) * 2012-04-12 2013-11-13 동국대학교 산학협력단 디지털 캐릭터를 이용한 무대 공연을 처리하는 장치 및 방법
JP2014149712A (ja) * 2013-02-01 2014-08-21 Sony Corp 情報処理装置、端末装置、情報処理方法及びプログラム
US9423922B2 (en) * 2013-12-24 2016-08-23 Dropbox, Inc. Systems and methods for creating shared virtual spaces
JP6348741B2 (ja) * 2014-03-18 2018-06-27 任天堂株式会社 情報処理システム、情報処理装置、情報処理プログラム、および情報処理方法
US9818225B2 (en) * 2014-09-30 2017-11-14 Sony Interactive Entertainment Inc. Synchronizing multiple head-mounted displays to a unified space and correlating movement of objects in the unified space
JP5793255B1 (ja) * 2015-03-10 2015-10-14 株式会社 ディー・エヌ・エー 動画又は音声を配信するシステム、方法、及びプログラム
US10345897B2 (en) * 2015-06-30 2019-07-09 Amazon Technologies, Inc. Spectator interactions with games in a specatating system
JP6706473B2 (ja) * 2015-09-14 2020-06-10 株式会社コーエーテクモゲームス 情報処理装置、表示制御方法、及び表示制御プログラム
US10304247B2 (en) * 2015-12-09 2019-05-28 Microsoft Technology Licensing, Llc Third party holographic portal
JP6001757B1 (ja) * 2015-12-28 2016-10-05 株式会社 ディー・エヌ・エー デジタルコンテンツを配信するシステム、方法、及びプログラム
EP3196838A1 (en) * 2016-01-25 2017-07-26 Nokia Technologies Oy An apparatus and associated methods
JP6754678B2 (ja) * 2016-11-18 2020-09-16 株式会社バンダイナムコエンターテインメント シミュレーションシステム及びプログラム
WO2018207046A1 (en) * 2017-05-09 2018-11-15 Within Unlimited, Inc. Methods, systems and devices supporting real-time interactions in augmented reality environments
US20180348531A1 (en) * 2017-05-31 2018-12-06 Colopl, Inc. Method executed on computer for controlling a display of a head mount device, program for executing the method on the computer, and information processing apparatus therefor
US10908769B2 (en) * 2018-04-09 2021-02-02 Spatial Systems Inc. Augmented reality computing environments—immersive media browser
JP6469279B1 (ja) * 2018-04-12 2019-02-13 株式会社バーチャルキャスト コンテンツ配信サーバ、コンテンツ配信システム、コンテンツ配信方法及びプログラム
US11726549B2 (en) * 2018-04-17 2023-08-15 Sony Corporation Program, information processor, and information processing method
WO2019234879A1 (ja) * 2018-06-07 2019-12-12 株式会社ソニー・インタラクティブエンタテインメント 情報処理システム、情報処理方法およびコンピュータプログラム

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7086005B1 (en) * 1999-11-29 2006-08-01 Sony Corporation Shared virtual space conversation support system using virtual telephones
JP2005018212A (ja) * 2003-06-24 2005-01-20 Sora Technology Corp ネットワーク上の情報コンテンツに対するユーザの反応を把握する情報収集方法及びシステム
US20180096507A1 (en) * 2016-10-04 2018-04-05 Facebook, Inc. Controls and Interfaces for User Interactions in Virtual Spaces

Also Published As

Publication number Publication date
US20230007331A1 (en) 2023-01-05
JP6745301B2 (ja) 2020-08-26
US11477507B2 (en) 2022-10-18
US20210204014A1 (en) 2021-07-01
CN112334886B (zh) 2024-03-29
JP2020017243A (ja) 2020-01-30
WO2020022404A1 (ja) 2020-01-30

Similar Documents

Publication Publication Date Title
CN112334886B (zh) 内容分发系统、内容分发方法、记录介质
JP6810108B2 (ja) サーバ、方法、プログラム、動画像放送システム
US11436803B2 (en) Insertion of VR spectator in live video of a live event
JP6724110B2 (ja) 仮想空間中のアバター表示システム、仮想空間中のアバター表示方法、コンピュータプログラム
US10380798B2 (en) Projectile object rendering for a virtual reality spectator
US9566517B2 (en) System and method for visualizing synthetic objects within real-world video clip
JP7159244B2 (ja) コンテンツ配信システム、コンテンツ配信方法、コンピュータプログラム
JP7398873B2 (ja) サーバシステムおよび動画配信システム
JP6707111B2 (ja) 3次元コンテンツ配信システム、3次元コンテンツ配信方法、コンピュータプログラム
JP2020099729A (ja) 共有インターフェースを介してアクセスされるミニゲーム
JP2022502759A (ja) ビデオゲームで拡張現実(ar)を提供するためのarシステム
JP2018518081A (ja) スポーツバーチャルリアリティシステム
US20220277493A1 (en) Content generation system and method
KR20130137320A (ko) 시뮬레이션을 이용한 스포츠 경기 중계 방법, 시스템 및 컴퓨터 판독 가능한 매체
JP7473909B2 (ja) 動画用アプリケーションプログラム、動画のオブジェクト描画方法、動画管理プログラム、動画管理方法、サーバ及び動画配信システム
JP2020103835A (ja) ゲームシステム及びプログラム
KR102200239B1 (ko) 실시간 cg 영상 방송 서비스 시스템
JP2020144887A (ja) 仮想空間中のアバター表示システム、仮想空間中のアバター表示方法、コンピュータプログラム
JP7146847B2 (ja) サーバ、方法、プログラム、動画像放送システム
JP7179089B2 (ja) 情報処理装置
JP7225159B2 (ja) 3次元コンテンツ配信システム、3次元コンテンツ配信方法、コンピュータプログラム
Chung Emerging Metaverse XR and Video Multimedia Technologies
WO2022201509A1 (ja) 情報処理装置、情報処理方法、およびプログラム
WO2022113335A1 (ja) 方法、コンピュータ可読媒体、および情報処理装置
WO2022113330A1 (ja) 方法、コンピュータ可読媒体、および情報処理装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant