CN106170101A - 内容供应系统、信息处理设备和内容再现方法 - Google Patents

内容供应系统、信息处理设备和内容再现方法 Download PDF

Info

Publication number
CN106170101A
CN106170101A CN201610324059.5A CN201610324059A CN106170101A CN 106170101 A CN106170101 A CN 106170101A CN 201610324059 A CN201610324059 A CN 201610324059A CN 106170101 A CN106170101 A CN 106170101A
Authority
CN
China
Prior art keywords
content
image
unit
position information
shooting
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201610324059.5A
Other languages
English (en)
Other versions
CN106170101B (zh
Inventor
久志本圭
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Ricoh Co Ltd
Original Assignee
Ricoh Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Ricoh Co Ltd filed Critical Ricoh Co Ltd
Publication of CN106170101A publication Critical patent/CN106170101A/zh
Application granted granted Critical
Publication of CN106170101B publication Critical patent/CN106170101B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60Network streaming of media packets
    • H04L65/61Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio
    • H04L65/612Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio for unicast
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60Network streaming of media packets
    • H04L65/61Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio
    • H04L65/613Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio for the control of the source by the destination
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/21Server components or server architectures
    • H04N21/218Source of audio or video content, e.g. local disk arrays
    • H04N21/21805Source of audio or video content, e.g. local disk arrays enabling multiple viewpoints, e.g. using a plurality of cameras
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/232Content retrieval operation locally within server, e.g. reading video streams from disk arrays
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/254Management at additional data server, e.g. shopping server, rights management server
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/27Server based end-user applications
    • H04N21/274Storing end-user multimedia data in response to end-user request, e.g. network recorder
    • H04N21/2743Video hosting of uploaded data from client
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/4508Management of client data or end-user data
    • H04N21/4524Management of client data or end-user data involving the geographical location of the client
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/472End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/4722End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for requesting additional data associated with the content
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81Monomedia components thereof
    • H04N21/8126Monomedia components thereof involving additional data, e.g. news, sports, stocks, weather forecasts
    • H04N21/8133Monomedia components thereof involving additional data, e.g. news, sports, stocks, weather forecasts specifically related to the content, e.g. biography of the actors in a movie, detailed information about an article seen in a video program
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/222Studio circuitry; Studio devices; Studio equipment
    • H04N5/28Mobile studios

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Human Computer Interaction (AREA)
  • Television Signal Processing For Recording (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Signal Processing For Digital Recording And Reproducing (AREA)
  • Indexing, Searching, Synchronizing, And The Amount Of Synchronization Travel Of Record Carriers (AREA)
  • Management Or Editing Of Information On Record Carriers (AREA)
  • Information Transfer Between Computers (AREA)

Abstract

提供一种内容供应系统,包括信息处理设备和终端装置,其中信息处理设备将包含分别拍摄于离散的拍摄场所的多个图像的内容提供给终端装置,信息处理设备包括:被配置为检索内容和与内容有关的位置信息项的检索单元;以及被配置为将内容和位置信息项传送给终端装置的传送单元;终端装置包括:被配置为接收内容和位置信息项的接收单元;以及被配置为通过选择要被显示的图像和显示被选择的图像的部分区域来再现内容的内容再现单元,被显示的部分区域从被选择的图像中提取出,以对于至少一个图像显示指定位置的方向上的视图。还提供一种信息处理设备和内容再现方法。

Description

内容供应系统、信息处理设备和内容再现方法
技术领域
本公开涉及内容供应系统、信息处理设备和内容再现方法。
背景技术
在视频发布网站等等,各种视频图像在因特网上被上传,并且允许用户免费观看。这种视频图像内容包括通过拍摄装置在移动的同时拍摄场景的图像而创建的视频图像。例如,包括:由沿着观光路线行走的用户拍摄的视频图像,从行进的车辆上拍摄的视频图像(包括诸如由行车记录仪拍摄的图像的事故记录图像),在自行车骑行期间拍摄的视频图像,在滑冰或者滑雪期间拍摄的视频图像,从诸如船舶之类的移动机器上拍摄的视频图像等等。
然而,这种视频图像可能看起来枯燥,并且对于用户来说,将那些视频图像从开始观看到结束是困难的。因此,概括视频图像用于再现的技术已经被开发出来(例如,专利文献1)。在专利文献1中,公开了图像拍摄/再现设备,其拍摄行进对象周围的视频图像,并且判断场景的重要性以便识别各个场景的重要性。图像拍摄/再现设备通过生成计划表来概括视频图像用于摘要再现。
然而,专利文献1的技术没有考虑到被拍摄到的视频图像的帧中哪一部分包含重要项目。例如,帧包含整个视角内的风光的图像。然而,重要项目并不总是跨越此帧的整个范围而被拍摄。因此,对于用户来说,当他或她玩摘要再现时,可能难于确认要被看到的帧的部分。
同样,近来,依据已开发的光学和图像处理技术,通过一个拍摄操作可以拍摄360°图像的图像拍摄装置变得流行起来。通过这种图像拍摄装置拍摄的球面图像难以一次性完整地在显示屏幕上显示。例如,在重要的对象在场景的北侧被拍摄到而另一个对象在场景的南侧被拍摄到的情况下,用户可能不能够确认重要对象。因此,对于球面图像的移动图像来说,用户观看球面图像的哪一部分是非常重要的。然而,在传统技术中并没有开发出有效的再现方法。
【相关技术文献】
【专利文献】
【专利文献1】:WO 2010/150348
发明内容
本公开的目的在于提供显示内容的创建者期望看到的对象的摘要内容供应系统。
采用以下内容实现此目的。
在本发明的实施例的一个方面,提供一种内容供应系统,该内容供应系统包括信息处理设备和终端装置,其中,信息处理设备将包含分别拍摄于离散的拍摄场所的多个图像的内容提供给终端装置,信息处理设备包括:检索单元,被配置为从用于存储内容的内容存储装置中检索内容,以及从用于存储位置信息项的位置信息存储装置中检索与内容有关的位置信息项,该位置信息项定义指定位置;和传送单元,被配置为将检索到的内容和检索到的位置信息项传送给终端装置;终端装置包括:接收单元,被配置为接收内容和位置信息项;和内容再现单元,被配置为通过依次从内容所包含的图像中选择要被显示的图像并且显示被选择的图像的部分区域来再现内容,对于至少一个图像,被显示的部分区域是从被选择的图像中提取出,以显示指定位置的方向上的视图,至少一个图像基于指定位置和至少一个图像的拍摄场所之间的距离而被确定。
当结合附图阅读时,根据以下的详细说明,本发明的其他目的、特征和优点将变得更显而易见。
附图说明
图1是图解第一实施例的实例内容再现方法的图。
图2是图解内容创建者的实例动作的图。
图3是图解实例内容设置方法和实例摘要信息编辑方法的图。
图4是图解内容供应系统的实例系统配置的图。
图5是图解摘要管理服务器的实例硬件配置的框图。
图6是图解内容供应系统的功能配置的框图。
图7是图解用于内容创建者编辑摘要信息的处理的时序图。
图8A是图解地图中指示的内容的路径的图,其中,内容的摘要信息已经被改变。
图8B是图解在拍摄点C4拍摄的实例球面图像的图。
图9是图解由创建者PC显示的实例摘要信息改变屏幕的图。
图10是图解当内容创建者点击指定点时显示的摘要信息改变屏幕的图。
图11是图解当内容创建者在点击指定点之后输入放大操作时显示的实例摘要信息改变屏幕的图。
图12是示意性地图解作为在摘要再现期间分别显示的图像的范围的显示范围的图。
图13A是示意性地图解映射在球形表面上的实例球面图像的图。
图13B是图解用于在显示器上显示球面图像的实例显示范围V的图。
图13C是图解被包含在球体的矩形区域中的显示区域V的图像的图。
图14是图解将拍摄点C4设置为原点的三维坐标系的图。
图15是图解与拍摄点C7对应的摘要信息的实例计算方法的图。
图16是图解指示在拍摄点C4和C7的视线方向的实例矢量的图。
图17是用于图解在两个指定点P1和P2被指定的地图上的实例路径的图。
图18是图解指示在拍摄点C4、C7和C10的视线方向的实例矢量的图。
图19是图解省略了图18中已使用的不必要的矢量的矢量的图。
图20是用于图解拍摄点C7的显示放大倍率的实例计算方法的图。
图21是示意性地图解在摘要再现期间显示的图像的显示范围的图。
图22是图解在内容供应系统中进行的摘要再现的实例处理的时序图。
图23是图解步骤S3中进行的摘要再现的实例处理的流程图。
图24是图解再现时间可以利用其而被设置的实例摘要信息改变屏幕的图。
图25是图解第二实施例的摘要管理服务器的实例功能配置的框图。
图26是图解由自动摘要信息生成单元进行的摘要信息的自动生成的实例处理的时序图。
图27是示意性地图解在内容中设置的摘要信息的多个模式的图。
图28是图解用于将已经设置好球面图像的显示范围的内容从内容供应服务器传输到用户PC的处理的时序图。
具体实施方式
下面,将参考附图描述实施例。
<第一实施例>
<视频图像的显示方法>
图1是图解本实施例的实例内容再现方法的图。在该内容中,包括由在从点S到点E的路径61上移动的用户拍摄的球面图像的视频图像,其中,该球面图像是用户周围的360°的宽范围的图像。视频图像包含多个帧,至少在图1所示的拍摄点C1-C13拍摄的帧被包含在该多个帧中。同样,在视频图像中,指定点P1和P2被设置,其中指定点由内容的创建者(内容创建者)指定为要被终端用户观看的点。用户PC(个人计算机)(下文描述)用下文所述的方式显示内容:(i)拍摄点C1-C3的球面图像:用户PC在用户PC的显示部等上显示显示范围V1-V3以内的球面图像,其中拍摄装置的行进方向被设置为视线方向。显示范围V1-V3能够分别被显示在显示屏上,并且显示范围可以不一致。(ii)拍摄点C4的球面图像:拍摄点C4被定位于最接近指定点P1。用户PC在用户PC的显示部等上显示显示范围V4以内的球面图像,其中连接拍摄点C4和指定点P1的线被设置为视线方向。(iii)拍摄点C5和C6的球面图像:用户PC在用户PC的显示部等上显示显示范围V5和V6以内的球面图像,其中拍摄装置的行进方向被设置为视线方向。(iv)拍摄点C7的球面图像:拍摄点C7被定位于最接近指定点P2。用户PC在用户PC的显示部等上显示显示范围V7以内的球面图像,其中连接拍摄点C7和指定点P2的线被设置为视线方向。(v)拍摄点C8-C13的球面图像:用户PC在用户PC的显示部等上显示显示范围V8-V13以内的球面图像,其中拍摄装置11的行进方向被设置为视线方向。
用这种方法,内容创建者打算引起终端用户注意的指定点P1和P2被设置在本实施例的视频图像中。当在定位于最接近指定点P1和P2的拍摄点C4和C7拍摄的帧通过用户PC被显示时,从拍摄点C4和C7在视线方向上观看的包括指定点P1和P2的显示范围V被显示。因此,在诸如球面图像的不能通过用户PC一次性完整显示的宽范围图像通过用户PC被显示情形下,指定点P1和P2如内容创建者所期望的那样引起终端用户的注意。
内容再现方法被称为摘要再现,在内容显示方法中,包含指定点P1和P2的图像与接近指定点的拍摄点对应地被显示。同样,各个指定点也可以被称为摘要信息。
<发布内容的示意性处理>
以下,将参考图2描述发布内容的处理。图2是图解内容创建者的实例动作的图。
(1)摄像师/摄影师8持有能够拍摄360°宽范围图像的拍摄装置11行走。拍摄装置11被设置为在每个预定期间或每段预定距离拍摄图像,并且拍摄的球面图像关联拍摄点而被记录。因此,沿着由摄像师/摄影师8步行出来的路径的图像被拍摄。此外,摄像师/摄影师8也可以利用诸如车辆之类的机器行进来拍摄图像。
(2)当到目的地的路径上的图像拍摄完成后,摄像师/摄影师8经由接入点9将多个图像传送至内容生成服务器12。
(3)内容生成服务器12利用包含摄像师/摄影师8的行进路径的地图和拍摄到的图像来创建内容,并且将创建的内容登记在内容供应服务器13中。此外,在拍摄装置11不包括通信功能的情形中,已经从拍摄装置11接收到被拍摄的图像的移动终端将图像传送给内容生成服务器12。
图3是图解实例内容设置方法和实例摘要信息编辑方法的图。
(4)内容生成服务器12创建内容并将其放到内容供应服务器13中,并且将内容的URI(统一资源标识符)传送给已经预先注册的内容用户企业的操作员7。此外,如图3中虚线(4)所示,URL也可以被传送给已经被传送过拍摄的图像的摄像师/摄影师8(图3中摄像师/摄影师8的移动终端17)。
(5)内容用户企业的操作员7操作公司PC 15来将内容的URI添加到内容用户企业的网页(例如,主页)的HTML数据中(例如,通过复制和粘贴操作)。这样,沿着由摄像师/摄影师8行走出来的路径拍摄的球面图像的内容能够被链接到内容用户企业的网页。
(6)内容用户企业的操作员7将网页放在自己公司的网络服务器14中。这样,终端用户6能够显示被链接到内容的内容用户企业的网页。
(7)查看内容用户企业的网页的终端用户6操作用户PC 16来显示该内容。
(8)内容创建者5操作创建者PC 19(信息终端的实例)来从内容供应服务器13获取内容以便创建摘要信息。内容创建者5在内容中设置摘要信息。通常,指定点P1和P2以及在最接近的拍摄点拍摄的球面图像的帧ID与摘要信息对应。此外,内容创建者5可以是与摄像师/摄影师8或内容用户企业的操作员7相同的人。创建者PC 19可以是与企业PC15相同的PC。
(9)内容创建者5将摘要信息发送给摘要管理服务器18。此外,摘要管理服务器18可以是与内容供应服务器13相同的服务器。
(10)终端用户6操作用户PC 16获取内容及摘要信息。这样,用户PC 16能够进行如参考图1所描述的内容的摘要再现。
<实例配置>
图4是图解内容供应系统100的实例系统配置的图。内容供应系统100包括内容生成服务器12、内容供应服务器13、网络服务器14、摘要管理服务器18、用户PC 16以及创建者PC 19,他们能够通过网络N彼此通信。此外,如果需要,将在本实施例中描述拍摄装置11、摄像师/摄影师8持有的移动终端17以及企业PC 15。
网络N通过创建者PC 19被布置于其中的办公楼等中提供的LAN、用于将LAN连接到因特网的运营商网络、以及由电信运营商提供的专用线路来被配置。因特网可以被包含在网络N中。网络N可以是有线的或无线的或二者的结合。同样,在创建者PC 19被直接连接到电话网络或移动电话网络的情形中,创建者PC 19可以被连接到运营商网络而不连接到LAN。
如上所述,内容生成服务器12是用于利用球面图像创建内容的服务器。内容供应服务器13存储内容并响应请求将其提供给终端用户6。网页服务器14由内容用户企业操作,并且该内容用户企业的网页被登记在网页服务器14中。摘要管理服务器18至少管理与内容有关的摘要信息项。内容可以被存储在摘要管理服务器18中。
用户PC 16由终端用户6操作,并且显示由内容用户企业提供的网页和内容。创建者PC 19由在内容中设置摘要信息的内容创建者5操作。该内容的一个或多个重点(要引起注意的场景)已经为内容创建者5所知或已经被指示给内容创建者5。创建者PC 19可以是智能手机、PDA(个人数字助理),平板终端、移动电话、可穿戴PC等,以及PC。
此外,在图4中,为说明的方便起见,内容生成服务器12、内容供应服务器13、网络服务器14和摘要管理服务器18是作为离散的设备显示的。然而,这4个服务器的功能可以被整合为1-3个服务器。或者,可以将这4个服务器的功能划分为5个或更多服务器。
同样,内容生成服务器12、内容供应服务器13、网络服务器14和摘要管理服务器18中的一个或多个功能可以被提供为利用云计算技术的云服务。根据云计算技术,虚拟服务器根据工作负荷被添加或释放,并且服务器配置动态地被改变。
图4中显示的内容供应系统100的配置不是限定性实例,并且也可以采用另一种配置,只要其包括能够进行如下所述的实施例的处理的信息处理设备的功能。
<内容生成服务器12、内容供应服务器13、网络服务器14、用户PC 16、摘要管理服务器18和创建者PC 19的硬件配置>
图5是图解摘要管理服务器18的实例硬件配置的框图。此外,图5显示的摘要管理服务器18的硬件配置可以不必整合到设备的外壳中。其描述优选被包含在摘要管理服务器18中的硬件元件。
摘要管理服务器18包括CPU 301、ROM 302、RAM 303、HDD 305、显示部308、网络接口309、键盘311、鼠标312、媒体驱动器307和光驱314,上述部件分别连接到总线310。CPU 301执行存储在HD 304中的摘要管理程序以控制摘要管理服务器18的全部操作。ROM 302存储程序,例如用于启动CPU 301的处理的IPL。RAM 303被用作CPU 301的工作区域。HD 304是包含非易失性存储器的存储装置,其存储用于创建内容的摘要管理程序、OS等等。
HDD(硬盘驱动)305根据CPU 301的控制来控制各个来自/进入HD 304的数据的读/写操作。显示部308显示信息项,例如光标、鼠标指针、窗口、字符以及图像。网络接口309是到诸如LAN或因特网之类的网络N的接口。
键盘311和鼠标312是输入/输出装置。键盘311包括多个按键,用于输入字符、数字、指令等,并且接受其的输入。鼠标312用来移动鼠标指针,用于选择指令,执行指令,接收要被处理的对象的选择,等等。
媒体驱动器307控制来自/进入诸如闪存之类的介质306的数据的读/写(存储)操作。光驱314控制来自/进入CD(光盘)313等的数据的读/写操作,其中CD 313是实例可拆卸记录介质。
此外,摘要管理程序可以以可安装格式或可执行格式被存储在诸如介质306和CD 313的计算机可读记录介质中,以便被分配。或者,摘要管理程序可以从服务器类型信息处理装置中被下载并被分配。
此外,内容生成服务器12、内容供应服务器13、网络服务器14、用户PC 16和创建者PC 19的各自的硬件配置与摘要管理服务器的硬件配置类似。所以,相关说明省略。然而,用于创建内容的内容创建程序被存储在内容生成服务器12的HD 304中。同样,用于提供内容的内容供应程序被存储在内容供应服务器13的HD 304中。进一步,举例来说,例如用于显示网页和内容的浏览器之类的用户PC程序被存储在用户PC 16的HD 304中。同样,用于在内容中设置摘要信息的摘要信息程序(例如,浏览器)被存储在创建者PC 19的HD 304中。
<内容供应系统的功能>
图6是图解内容供应系统100的功能配置的框图。下面,将分别描述包含在内容供应系统100中的设备(内容供应服务器13、摘要管理服务器18、用户PC 16、创建者PC 19)。如果需要,也将描述内容生成服务器12和网络服务器14。
<内容供应服务器13>
内容供应服务器13包括传送/接收单元21、内容供应单元22和读/写单元29。内容供应服务器13所包含的各个单元是通过图5所示的任意元件,按照CPU 301给出的基于从HDD 305检索到的要被加载在RAM 303中的内容供应程序1100的指令来进行的操作所实现的功能或手段。
内容供应服务器13包括通过图5所示的RAM 303和HDD 305配置的存储单元1000。内容管理DB 1001和内容供应程序1100被存储在存储单元1000中。在内容管理DB 1001(内容存储装置的实例)中,与内容ID有关的用于指示内容的存储位置的内容名称和URI等等被存储。
传送/接收单元21由图5所示的CPU 301的指令和网络接口309等来实现,并且通过网络N与摘要管理服务器18、用户PC 16和创建者PC 19通信。特别地,传送/接收单元21从用户PC 16或创建者PC 19接收带有内容的URI的内容请求。
内容供应单元22由图5所示的CPU 301的指令等来实现,并将由URI识别的内容传送给用户PC 16或创建者PC 19。
读/写单元29通过图5所示的CPU 301的指令、HD 304等来实现,并进行用于将数据存储到存储单元1000和检索存储在存储单元1000中的数据的处理。
<用户PC 16>
下面,将描述用户PC 16的功能。用户PC 16包括传送/接收单元31、可操作的输入接收单元32、网页请求单元33、网页显示单元34、摘要信息请求单元35、摘要再现单元36和读/写单元39。用户PC 16所包含的各个单元是通过图5所示的任意元件,按照CPU 301给出的基于从HD 304检索到的要被加载在RAM 303中的用户PC程序2100的指令来进行的操作所实现的功能或手段。
用户PC 16包括通过图5所示的RAM 303和HDD 305配置的存储单元2000。用户PC程序2100存储在存储单元2000中。
传送/接收单元31通过图5所示的CPU 301的指令和网络接口309等实现,并且通过网络N与内容供应服务器13和摘要管理服务器18通信。特别地,传送/接收单元31接收内容和摘要信息。
可操作的输入接收单元32通过图5所示的CPU 301的指令、键盘311、鼠标312等实现,并接收来自终端用户6的可操作的输入。终端用户6指定任意网页或被包含在网页中的内容。
网页请求单元33通过图5所示的CPU 301的指令等实现,并且按照终端用户6的操作向网页服务器14请求网页。同样,在终端用户6给出指令用于请求指示其的URI的内容的情形中,网页请求单元33请求内容供应服务器13提供该内容。
网页显示单元34通过图5所示的CPU 301的指令、显示部308等实现,并且在显示部308上显示网页和内容。
摘要信息请求单元35通过图5所示的CPU 301的指令等实现,并且当通过用户PC 16进行内容的摘要再现时,从摘要管理服务器18获取摘要信息。例如,摘要信息请求单元35响应内容请求(依据终端用户6输入用于请求内容的操作)来获取。或者终端用户6可以输入明确的操作,用于请求摘要信息。
摘要再现单元36通过图5所示的CPU 301的指令、显示部308等实现,并且利用摘要信息进行内容的摘要再现。摘要再现的详细说明将在下文描述。
读/写单元39通过图5所示的CPU 301的指令、HD 304等实现,并且进行用于将数据存储到存储单元2000和检索存储在存储单元2000中的数据的处理。
<摘要管理服务器>
下面,将描述摘要管理服务器18的功能。摘要管理服务器18包括传送/接收单元41、摘要信息供应单元42、摘要信息改变单元43和读/写单元49。摘要管理服务器18所包含的各个单元是由图5所示的任意元件,按照CPU 301给出的基于从HD 304检索到的要被加载在RAM 303中摘要管理程序4100指令来进行的操作所实现的功能或手段。
摘要管理服务器18包括由图5所示的RAM 303和HDD 305配置的存储单元4000。存储单元4000中存储摘要信息管理DB 4001和摘要管理程序4100。
【表1】
摘要信息表
在存储单元4000中,由表1所示的摘要信息表组成的摘要信息管理DB 4001(位置信息存储单元的实例)被存储。与内容ID有关的内容名称、帧ID、极坐标和显示放大倍率被记录在摘要信息表中。帧ID是识别信息,用于识别内容(球面图像的视频内容)中的帧。下文将给出帧ID的详细说明。由帧ID识别的球面图像是实例第一图像。极坐标对应于上述指定点P,并且被用来定义拍摄点C1-C13的视线方向。显示放大倍率在再现与帧ID对应的帧时被应用。
此外,在内容创建者还没有创建摘要信息的情形中,初始状态的摘要信息被存储在摘要信息管理DB 4001中。在初始状态的摘要信息中,极坐标指示行进方向,显示放大倍率被设置为1。
传送/接收单元41通过图5所示的CPU 301的指令和网络接口309等实现,并与用户PC 16和创建者PC 19通信。
摘要信息供应单元42通过图5所示的CPU 301的指令等实现,并响应请求将从摘要信息管理DB 4001中检索到的摘要信息传送给用户PC 16和创建者PC 19。
摘要信息改变单元43通过图5所示的CPU 301的指令等实现,并响应创建者PC 19的请求,将摘要信息登记在摘要信息管理DB 4001中存储的摘要信息管理表中。
读/写单元49通过图5所示的CPU 301的指令、HD 304等实现,并进行用于将数据存储到存储单元4000和检索存储在存储单元4000中的数据的处理。
<创建者PC>
下面,将描述创建者PC 19的功能。创建者PC 19包括传送/接收单元51、可操作的输入接收单元52、摘要信息改变显示单元53、摘要信息改变请求单元54和读/写单元59。创建者PC 19的各个单元是通过图5所示的任意元件,按照CPU 301给出的基于从HD 304检索到的要被加载在RAM 303中的摘要信息程序6100的指令,来进行的操作所实现的功能或手段。
创建者PC 19包括通过图5所示的RAM 303和HDD 305配置的存储单元6000。存储单元6000中存储摘要信息程序6100。
传送/接收单元51通过图5所示的CPU 301的指令和网络接口309等实现,并通过网络N与摘要管理服务器18通信。
可操作的输入接收单元52通过图5所示的CPU 301的指令、键盘311、鼠标312等实现,并接收内容创建者5的可操作的输入指令。内容创建者5编辑或者设置摘要信息。
摘要信息改变显示单元53通过图5所示的CPU 301的指令等实现。摘要信息改变显示单元53从内容供应服务器13获取内容,从摘要管理服务器18获取摘要信息。摘要信息改变显示单元53显示屏幕,内容创建者5利用该屏幕编辑摘要信息。
摘要信息改变请求单元54通过图5所示的CPU 301的指令等实现,并传送由已在屏幕上输入操作的内容创建者5编辑的摘要信息。
读/写单元59通过图5所示的CPU 301的指令、HD 304等实现,并进行用于将数据存储到存储单元6000和检索存储在存储单元6000中的数据的处理。
<直至摘要信息编辑的处理流程>
图7是图解用于由内容创建者5编辑摘要信息的处理的时序图。在图7所示的处理之前,内容已被登记在内容供应服务器13中,并且初始状态的摘要信息已被登记在摘要管理服务器18中。依据给予内容供应服务器13的内容,内容供应服务器13将内容ID传送给摘要管理服务器18。这样,摘要管理服务器18能够将与内容ID有关的摘要信息存储在摘要信息管理DB 4001中。
在步骤S1中,创建者PC 19的摘要信息改变显示单元53响应内容创建者5的操作,请求摘要管理服务器18提供摘要信息。在这种情况下,内容创建者5预先确认摘要信息需要被改变的内容的内容ID和内容名称,因为内容创建者5是处理与已被摄像师/摄影师8和内容用户企业的操作员7获得或者处理过的内容相同的内容的人。另外,内容创建者5可以登录内容供应服务器13以显示内容列表,从而识别期望的内容。
在步骤S1.1中,响应接收摘要信息请求,摘要管理服务器18的摘要信息供应单元42从摘要信息管理DB 4001获取摘要信息。摘要信息供应单元42将摘要信息传送给创建者PC 19。
在步骤S2中,创建者PC 19的摘要信息改变显示单元53请求内容供应服务器13提供与内容ID有关,也就是与摘要信息有关的内容。因此,内容从内容供应单元22被获得。
在步骤S3中,内容创建者5通过在摘要信息改变屏幕上输入操作来编辑摘要信息,摘要信息改变屏幕将参考图9进行描述。创建者PC 19的可操作的输入接收单元52接收用于编辑摘要信息可操作的输入,并且将改变后的摘要信息输出给摘要信息改变请求单元54。
在步骤S3.1中,摘要信息改变请求单元54将包含改变后的摘要信息的摘要信息改变请求传送给摘要管理服务器18。
在步骤S3.1.1中,响应摘要信息改变请求,摘要管理服务器18的摘要信息改变单元43改变摘要信息管理DB 4001中存储的摘要信息。
<摘要信息的编辑>
下面,将参考图8A-图11描述用于内容创建者5编辑摘要信息的处理。
图8A是图解地图中指示的内容的路径61的图,其中该内容的摘要信息被改变。图8A所示的地图由内容生成服务器12创建。内容生成服务器12确定区域范围以便包括该区域中的所有拍摄点C1-C13,并且通过使用通过网络N获得的地图数据创建地图,其中,球面图像在各个拍摄点被拍摄。
同样,内容生成服务器12指示地图上的路径61。由于拍摄点C1-C13是预先已知的,路径61能够通过按照拍摄时间的顺序连接拍摄点来建立。内容生成服务器12将球面图像嵌入路径上的拍摄点C1-C13。这里,嵌入意味着将球面图像与地图上的各个拍摄点关联起来。根据关联,创建者PC 19能够响应内容创建者5用鼠标等点击地图上的拍摄点C1-C13,显示在各个拍摄点C1-C13拍摄的球面图像。此外,这种地图可以由内容创建者5等,而不是内容生成服务器12来创建。
例如,地图的图像和球面图像以由HTML和JavaScript书写的HTML数据被指定,并且HTML数据(屏幕信息的实例)等被传送到创建者PC 19。内容创建者5的用鼠标点击拍摄点C1-C13的操作被检测为显示在拍摄点C1-C13拍摄的球面图像的事件。
假如在指定点P有内容创建者5想要引起终端用户的注意的对象(车站、公众组织、建筑物、商店、观光点)。同样,在这种情况下,拍摄点C4是最接近指定点P的拍摄点。
图8B是图解拍摄于拍摄点C4的实例球面图像的图。拍摄于拍摄点C4之外的各个拍摄点的球面图像也包含在内容中。
图9是图解通过创建者PC 19显示的实例摘要信息改变屏幕601的图。摘要信息改变屏幕601包括地图部62和图像部63。图8A所示的地图显示在地图部62。指示指定点P的星形标志在地图部62中被显示。该星形标志是为了说明方便起见而示出的,其在实际的屏幕中并不显示。
在图像部63中,显示消息“点击你想要引起终端用户注意的点”。响应内容创建者5用鼠标等点击地图部中的任意点,摘要信息改变显示单元53将拍摄点C4确定为最接近的拍摄点,以在图像部63中显示拍摄于拍摄点C4的球面图像。下面,描述内容创建者5点击指定点P的情形。
图10是图解当内容创建者5点击指定点P时显示的摘要信息改变屏幕601的图。响应内容创建者5点击指定点P,摘要信息改变显示单元53确定拍摄点C4,拍摄点C4为相对于指定点P来说最接近的拍摄点。更进一步地,摘要信息改变显示单元53在图像部63中显示在显示范围V4以内的球面图像,其中连接拍摄点C4和指定点P的线被设置为视线方向。用这种方法,摘要信息被编辑。在下文将描述用于创建摘要信息的具体方法。
如上所述,内容创建者5能够利用用于在地图部62中选择需要引起终端用户的注意的对象的位置的简单操作来编辑摘要信息。尽管,图10所示的实例中仅仅包含一个指定点P,但是内容创建者5可以指定多个指定点P。
<用于球面图像放大/缩小显示的摘要信息>
如图11所示,内容创建者5可以使得图像部63的图像被放大或缩小。图11是图解当内容创建者5在点击指定点P之后输入放大的操作时显示的实例摘要信息改变屏幕601的图。
例如,内容创建者5可以在如图10所示的摘要信息改变屏幕601被显示之后,改变图像部63中显示范围V4的显示放大倍率,其中,内容创建者5进行将鼠标指针放置在图像部63同时转动鼠标的滚轮的操作。尽管,相较图10所示的图像,在图11所示的实例中图像被放大,但是图像也可以被缩小。
这种操作通过将鼠标指针被定位于图像部63的同时的滚轮转动检测为事件的可操作的输入接收单元52来实现。可操作的输入接收单元52基于转动方向判定是放大还是缩小,并按照转动量判定显示放大倍率(放大比率或缩小比率)。
<摘要再现>
下面,参考图12描述利用如上所述被编辑的摘要信息的内容的摘要再现。图12是示意性地图解显示范围V1-V13的图,显示范围V1-V13是在摘要再现期间在显示部308中分别显示的图像的范围。在图12中,拍摄点C1-C13被指示在路径61上,摄像师/摄影师8的行进路径通过路径61被显示出来。同样,显示范围V1-V13在各个拍摄点C1-C13被显示出来。显示范围V4被调整以便指定点P在视线方向上,并且期望的显示放大倍率被应用。
显示范围V1-V13分别表明在利用摘要信息的内容的再现期间,球面图像的哪个部分通过用户PC 16显示出来。就是说,当其图像沿着图12所示的路径被拍摄的内容被再现时,用户PC 16在显示部308中与拍摄点C1对应地显示球面图像的显示范围V1。类似地,用户PC 16在显示部308中依次与拍摄点C2-C13对应地显示球面图像的显示范围V2-V13。
显示范围V1-V3和V5-V13是预先设置的以便各个显示范围包含球面图像的预定区域,并且视线方向被设置为行进方向,其中显示范围V1-V3和V5-V13对应于除已被与由内容创建者5设置的指定点对应地选择的拍摄点C4之外的拍摄点C1-C3和C5-C13。行进方向可以通过跟随与球面图像有关的拍摄点来建立。
因此,当用户PC 16显示在除了最接近指定点P的拍摄点C4之外的拍摄点C1-C3和C5-C13拍摄的球面图像时,显示范围V1-V3和V5-V13被设置,其中视线方向被设置为行进方向。当用户PC 16显示在最接近指定点P的拍摄点C4拍摄的球面图像时,显示范围V4被设置,其中指定点P在视线方向上。由此,需要引起终端用户的注意的对象如同内容创建者5期望的那样被终端用户看到。
此外,在参考图9-图12的描述中,指定点P仅仅是在与最接近指定点P的拍摄点C4对应的球面图像中被设置为在视线方向上。然而,指定点P在与其他拍摄点对应的球面图像中同样可以被设置为在视线方向上。例如,按照接近指定点P的顺序选择两个或三个拍摄点,指定点P可以在与选择的拍摄点相应的球面图像中被设置为在视线方向上。在这种情况下,图12中的拍摄点C3-C5被选择。用这种方法,内容创建者5可以使终端用户注意该对象较长时间。
<摘要信息的创建>
下面,将参考图13A-图14描述摘要信息的创建。图13A、图13B和图13C是图解球面图像的显示方法的图。图8B所示的球面图像通过使用墨卡托投影被转换为平面图像。同样,通过使用墨卡托投影转换的图像(墨卡托投影的图像)可以再转换为球面图像。内容供应服务器13在将墨卡托投影的图像转换为球面图像之后,将图像发送给终端用户。在已从墨卡托投影的图像转换成的球面图像被存储在内容供应服务器13中的情形中,不再需要转换操作。
图13A是示意性地图解被映射在球形表面的实例球面图像的图。图13A所示的球面图像包含存在于拍摄点周围360o范围内的被拍摄的对象。
图13B是图解用于在显示部308上显示球面图像的实例显示范围V的图。虚拟照相机71安置在与球面图像被映射的球形表面对应的球体的中心。在角度被在纬度方向和经度方向指定的情形中,可以在球体中指定矩形(不完全是)区域,其中纬度方向和经度方向是相对于虚拟照相机71的视线方向定义的,视线方向与矩形区域相交于其中心。该矩形区域对应于显示范围V。
图13C是图解在显示部308上显示的球体的矩形区域以内的显示区域V的图像的图。所以,终端用户使得用户PC 16显示类似图13C所示的图像的图像。
图14是图解将拍摄点C4设置为原点的三维坐标系的图。虚拟照相机71安置在原点。在从安置在原点的虚拟照相机71观看由内容创建者5指定的指定点P的情形中,指定点P的极坐标可以表示为P(r,θ,)。假定拍摄点C4是原点来给出描述。
“r”指示拍摄点C4和指定点P之间的距离。“θ”指示虚拟照相机71水平方向上的角度,其中x轴方向被设置为基准。指示虚拟照相机71垂直方向上的角度,其中水平方向(x轴和y轴方向)被设置为基准。此外,如果拍摄点C4的高度与指定点P的高度相同,是0。另一方面,在例如山顶的高的地方被指定为指定点P的情形中,指定点P比拍摄点C4高。在这种情况下,由拍摄点C4和指定点P之间的高度差和距离来计算。
如上所述,指定点P可以由P(r,θ,)定义,摘要信息可以通过定义在最接近的拍摄点拍摄的球面图像的帧ID、极坐标和显示放大倍率来创建。
<与其他拍摄点对应的摘要信息>
在用户PC 16进行内容的摘要再现情形中,较好地,摘要信息改变显示单元53创建与除了最接近指定点P的拍摄点C4之外的拍摄点C1-C3和C5-C13对应的摘要信息。拍摄于拍摄点C1-C3和C5-C13的图像是第二图像的实例。
在初始状态,视线方向(初始视线方向)被设置为行进方向的摘要信息与除了最接近指定点P的拍摄点C4之外的拍摄点C1-C3和C5-C13相对应设置。然而,当设置好这种摘要信息后,拍摄点的转变(例如,从拍摄点C3到C4或者从拍摄点C4到C5)引起视线方向和显示放大倍率的急剧变化。因此,在再现期间,终端用户可能会感觉不自然。
因此,摘要信息改变显示单元53逐渐地改变与除了最接近指定点P的拍摄点C4之外的各个拍摄点C1-C3和C5-C13相对应的视线方向和显示放大倍率。这样,可以呈现给终端用户更加自然的球面图像的内容。
图15是图解与拍摄点C7对应的摘要信息的实例计算方法的图。这里,与拍摄点C4对应的摘要信息(视线方向和显示放大倍率)已被计算。在图15中,显示范围V7是从视线方向设置为行进方向的拍摄点C7观看到的某个区域。
下面,将描述用于找到拍摄点C7的视线方向和显示放大倍率,以便视线方向和显示放大倍率从拍摄点C4逐渐地变化的方法。简而言之,依照拍摄点C4和C7之间的距离,拍摄点C4的视线方向和显示放大倍率被反映到拍摄点C7的视线方向和显示放大倍率。
图16是图解指示在拍摄点C4和C7的视线方向的实例矢量的图。拍摄点C4和C7以及指定点P被绘制在二维坐标系中。二维坐标系可以对应于水平面,其中高度方向被省略(仰角)。因此,可以给出与在三维坐标系的情形中的那些类似的描述。同样,尽管拍摄点C4和C7的相对位置不同于图15所示的那些,但是计算结果不受该区别的影响。
矢量vAP指示拍摄点C4的视线方向。矢量B指示拍摄点C7的行进方向。
通过将矢量vAP与矢量B相加产生的矢量B'可以表示为公式(1),其中矢量vAP被如图16所示的平移。
【公式1】
B &prime; &RightArrow; = B &RightArrow; + V AP &RightArrow; . . . ( 1 )
然而,通过这种简单的矢量相加,矢量vAP对拍摄点C7的视线方向的影响很大。因此,进行后续计算以便矢量vAP的影响自然地减弱。这里,描述一种方法,该方法使用“平方反比定律”,该定律陈述了光强度与光源距离的平方成反比。
矢量B”(第二图像的实例视线方向)可以由公式(2)表示,其中拍摄点C4和C7之间的距离被认为是3(拍摄点)。
【公式2】
B &prime; &RightArrow; = B &RightArrow; + 1 3 2 V AP &RightArrow; . . . ( 2 )
就是说,拍摄点C4的视线方向根据距离的平方衰减。
类似地,显示放大倍率可以由公式(3)表示。
“C7的显示放大倍率”=“C7的显示放大倍率”+(1/32)×"C4的显示放大倍率”(3)
拍摄点C4和C7之间的实际距离可以代替3(拍摄点)。C7的视线方向被设置为矢量B”,C7的显示放大倍率被设置为由公式(3)计算得到的数值。此外,在计算中,C4的视线方向的影响的强度可以与距离成反比或与距离的实际倍数成反比地被作用。另外,可以以不同于视线方向的情形的方式来计算显示放大倍率。
类似地,可以计算与其他拍摄点C1-C3、C5、C6和C8-C13相对应的摘要信息。按照上述计算,拍摄点的转变不会引起视线方向和显示放大倍率的急剧变化。因此,在再现期间,终端用户会较少地感觉到不自然。
<多个指定点情形下的摘要信息>
下面,将描述在内容创建者5指定多个指定点P1和P2作为引起终端用户的注意的点的情形下,用于自然的摘要再现的摘要信息。
图17是用于图解两个指定点P1和P2被指定的地图上的实例路径61的示意图。最接近指定点P1的拍摄点是拍摄点C4,最接近指定点P2的拍摄点是拍摄点C10。拍摄点C4和C10的摘要信息(视线方向和显示放大倍率)利用参考图10和图11描述的方法被计算。
下面将参考图18描述用于计算拍摄点C7的视线方向和显示放大倍率的方法。拍摄于拍摄点C4和C10之间的拍摄点C7(C5-C9)的图像是第三图像的实例。图18是图解指示在拍摄点C4、C7和C10的视线方向的实例矢量的图。类似图16的情形,尽管视线方向被绘制在二维坐标系中,但是计算结果不受其影响。指示拍摄点C4朝向指定点P1的视线方向的矢量vAP和指示拍摄点C10朝向指定点P2的视线方向的矢量vBP已经分别被计算。
原点被设置为拍摄点C7的矢量vCPA和vCPB被计算以便定义拍摄点C7的视线方向。
vCPA=vAP+vCA
矢量vCA可以基于指示拍摄点C4和C7的纬度和经度的信息而被计算。这样,可以计算矢量vCPA
类似地,通过使用矢量vBP可以计算矢量vCPB
vCPB=vBP+vCB
下面,将参考图19描述拍摄点C7的视线方向矢量的矢量信息的计算方法。图19是图解省略了在图18中已使用的不必要的矢量的矢量的图。矢量vCPAu和vCPBu是矢量vCPA和vCPB各自的单位矢量。由公式(4)计算得到的矢量C被设置为拍摄点C7的视线方向。
Vector C=vCPAu+vCPBu (4)
如上所述,拍摄点C7的视线方向矢量可以通过将指示用于从拍摄点C7观看指定点P1和P2的各个方向的矢量相加来定义。
下面,将参考图20描述拍摄点C7的显示放大倍率。图20是用于图解拍摄点C7的显示放大倍率的实例计算方法的图。如图20所示,从路径61的起点S出发,拍摄点C4是第四拍摄点,拍摄点C7是第七拍摄点,拍摄点C10是第十拍摄点。
拍摄点C7的显示放大倍率被计算为拍摄点C4和C10的显示放大倍率之间的值,以便能够进行平稳的摘要再现。拍摄点C4的显示放大倍率是r4,拍摄点C10的显示放大倍率是r10。拍摄点C7的显示放大倍率r7可以通过公式(5)计算。
r7=r4+(r10-r4){(7-4)/(10-4)} (5)
就是说,拍摄点C4和C10之间显示放大倍率的差值乘以拍摄点C7和C4之间的距离与拍摄点C4和C10之间的距离的比值,该相乘得到的数值被加到拍摄点C4的显示放大倍率。由公式(5)计算得到的数值被设置为拍摄点C7的显示放大倍率。当拍摄点C7的显示放大倍率被这样设置时,可以实现在摘要再现期间,显示放大倍率平稳地改变。
拍摄点C5、C6、C8和C9的摘要信息可以类似图19和图20的情形来计算。拍摄点C1-C3的摘要信息可以通过参考图15和图16描述的计算来计算,因为拍摄点C1-C3的摘要信息仅受指定点P1的影响。同样,拍摄点C11-C13的摘要信息也可以通过参考图15和图16描述的计算来计算,因为拍摄点C11-C13的摘要信息仅受指定点P2的影响。
图21是示意性地图解在摘要再现期间在显示部308中显示的图像的显示范围V1-V13的图。主要,将参考图21描述其与图12的差异。
显示范围V1-V13指示,当用户PC 16按照摘要信息再现内容时,球面图像的哪个部分被显示在显示部308中。同样,显示范围V1-V13的大小与显示放大倍率有关。
如图21描述的那样,根据显示范围V1-V13,通过拍摄点C1-C3逐渐地引导视线方向到指定点P1。在拍摄点C4,视线方向被准确地导向指定点P1,然后,通过拍摄点C5-C9逐渐地引导视线方向到指定点P2。在拍摄点C10,视线方向被准确地导向指定点P2,然后,通过拍摄点C11-C13,视线方向逐渐地与行进方向一致。这样,视线方向被平稳地改变。
同样,显示放大倍率在拍摄点C4被放大(显示范围变窄),在拍摄点C10被缩小(显示范围扩大)。显示范围如显示范围V1-V3那样逐渐地变窄,因为通过拍摄点C1-C3,显示放大倍率逐渐地变为拍摄点C4的显示放大倍率。在拍摄点C4,显示放大倍率变成内容创建者5设置的数值,然后,在拍摄点C5-C9的显示放大倍率基于拍摄点C4和C10之间的距离被设置。因此,显示范围如显示范围V5-V9那样逐渐地扩大。在拍摄点C10,显示放大倍率变成内容创建者5设置的数值,然后,拍摄点C11-C13的显示放大倍率基于其与拍摄点C10的距离增加。因此,显示范围如显示范围V11-V13那样逐渐地变窄。这样,显示放大倍率被平稳地改变。
<摘要再现的操作处理>
下面,将描述利用上述创建的摘要信息的摘要再现的操作处理。
图22是图解在内容供应系统100中进行的摘要再现的实例处理的时序图。图22所示的处理响应终端用户给出进行内容的摘要再现的指令而起动。
在步骤S1中,用户PC 16的网页请求单元33响应终端用户的可操作的输入,请求内容供应服务器13提供内容。相应地,网页请求单元33获取内容。在此时,例如内容ID的用于识别内容的信息同样被获取。此外,用于向网页服务器14请求网页的处理省略。同样,可以不请求网页来获取内容。
在步骤S2中,用户PC 16的摘要信息请求单元35请求摘要管理服务器18提供指定内容ID等的内容的摘要信息。摘要信息的请求可以响应终端用户请求摘要信息的可操作的输入而被传送,或者可以响应接收内容而自动地被传送。
在步骤S2.1中,摘要管理服务器18的摘要信息供应单元42从摘要信息管理DB 4001中检索与内容ID等有关的摘要信息。摘要信息供应单元42将摘要信息传送给用户PC 16。
在步骤S3中,用户PC 16的摘要再现单元36利用步骤S2中获取的摘要信息进行步骤S1中获取的内容的摘要再现。
图23是图解图22中的步骤S3中进行的摘要再现的实例处理的流程图。图23所示的处理响应接收内容和摘要信息或者响应终端用户的可操作输入开始。
摘要再现单元36在变量“n”中设置1(步骤S10)。变量n被提供用于管理拍摄点C1-C13。
摘要再现单元36判定给定的拍摄点的后缀序号是否小于变量n。在这种情况下,数字1-13被分别与变量n进行比较(步骤S20)。在判定所有的1-13的序号均小于变量n的情形中(步骤S20处为是),处理终止,因为没有球面图像需要被处理。
在序号1-13中任意一个被判定为不是小于变量n的情形中(步骤S20处为否),摘要再现单元36检索与第“n”个拍摄点Cn相对应的摘要信息(步骤S30)。
摘要再现单元36基于摘要信息计算与拍摄点Cn相对应的球面图像的视线方向和显示放大倍率(步骤S40)。例如,在最接近指定点P的拍摄点只在前向的情形中,视线方向通过公式(2)计算,显示放大倍率通过公式(3)计算。同样,在最接近指定点P的拍摄点只在后向的情形中,类似地进行计算。在最接近指定点P的拍摄点在前向和后向都存在的情形中,视线方向通过公式(4)计算,显示放大倍率通过公式(5)计算。
摘要再现单元36利用计算得出的视线方向和显示放大倍率显示与拍摄点Cn相对应的球面图像(步骤S50)。
摘要再现单元36将变量n加1(步骤S60)。从步骤S20的处理被重复进行。
如上所述,随着改变视线方向和显示放大倍率,进行球面图像的内容的摘要再现。
<再现速度>
改变与各个拍摄点C1-C13相对应的再现速度同样是高效的途径。例如,在其他拍摄点进行迅速的再现的同时,在邻近最接近指定点的拍摄点附近进行缓慢再现。
图24是图解利用其再现时间(再现速度)可以被设置的实例摘要信息改变屏幕601的图。图24中,显示了地图部62、图像部63、再现时间设置区域65和基本再现时间设置区域66。
内容创建者5可以在再现时间设置区域65设置任意值作为再现时间(再现速度)。再现时间设置区域65的再现时间由与除了最接近指定点P的拍摄点C4之外的拍摄点的再现时间相乘的值指示。
除了拍摄点C4之外的拍摄点的再现时间被称为基本再现时间。内容创建者5可以在再现时间设置区域66设置任意值作为基本再现时间(再现速度)。因此,内容创建者5可以缩短除了最接近指定点的拍摄点C之外的拍摄点的再现时间,或者延长最接近指定点P的拍摄点C的再现时间。
此外,类似于显示放大倍率的情形,除了拍摄点C4之外的拍摄点的再现时间按照与拍摄点C4的距离而被调整。因此,再现速度也可以被平稳地改变。
如上所述,在本实施例的内容供应系统100中,指定点P如内容创建者5期望的那样引起终端用户注意,并且不能被一次性完全呈现的宽范围图像,例如球面图像,被显示。
<第二实施例>
在本实施例中,将描述可以自动地创建摘要信息而不用内容创建者5设置摘要信息的内容供应系统100。通常,由内容创建者5指定的指定点P是具有受欢迎的特征的场所。这种特征(包括车站、公众组织、建筑物、商店、观光点等)被登记在地图数据中。因此,内容供应系统100可以参照地图数据创建摘要信息。
图25是图解本实施例的摘要管理服务器18的实例功能配置的框图。内容供应服务器13、用户PC 16和创建者PC 19可以与在第一实施例中的那些相同。图25所示的摘要管理服务器18包含自动摘要信息生成单元44和地图数据DB 4002(地图数据存储装置)。
地图数据DB 4002存储与位置信息(经度、纬度和高度)有关的主要特征的信息项。地图数据DB 4002可以不包含在内容供应系统100中,内容供应系统100可以使用对公众开放的Web API(Web应用编程接口)。Web API是用于在两个装置之间通过网络进行处理的协议(用于请求处理、指定数据等的方法)。“GOOGLE PLACES API”、“Itsumo NAVIAPI”、由雅虎提供的API等均是地图数据DB 4002的Web API。
自动摘要信息生成单元44通过图5所示的CPU 301的指令等实现,并且利用地图数据DB 4002自动地创建摘要信息。特别地,内容的拍摄点C1-C13的外围周边信息项从地图数据DB 4002中被获取。指示各个拍摄点C1-C13的预定距离内的特征的信息项从地图数据DB 4002中被获取。该特征对应于指定点P。在多个特征存在的情形中,特征可以基于特征的预定属性(车站、公众组织、建筑物、观光点等)而被选择。同样,特征可以在因特网上搜索,并且只有在DNS服务器(即,具有URL)中登记的特征可以被选择。自动摘要信息生成单元44创建摘要信息,将与获得的信息项相对应的特征的位置信息设置为指定点P。计算视线方向和显示放大倍率等的方法与在第一实施例中的类似。
图26是图解由自动摘要信息生成单元44进行的摘要信息的自动生成的实例处理的时序图。在步骤S1中,内容生成服务器12从拍摄装置11或者移动终端接收内容来创建内容。创建的内容被传送到内容供应服务器13。在步骤S2中,依据被登记的新内容,内容供应服务器13将指示内容已在内容供应服务器13中被登记的内容获取通知传送给摘要管理服务器18。在步骤S3中,响应接收内容获取通知,自动摘要信息生成单元44创建摘要信息。在步骤S4中,被创建的摘要信息存储在摘要信息管理DB 4001中。
此外,可以在内容创建者5给出指令的时刻进行摘要信息的自动生成。例如,可以在当摘要信息改变屏幕601上显示的自动生成按钮被按压的时刻进行摘要信息的自动生成。
这样,根据本实施例的内容供应系统100,摘要信息可以被生成,而不用内容创建者5设置指定点P。
<第三实施例>
在本实施例中,内容供应系统100可以相对于一个内容设置多个摘要信息模式。模式意味着相对于包含在内容中的多个球面图像(或者一个球面图像)设置的一系列指定点(或者一个指定点)。图27是示意性地图解在内容中设置的多个摘要信息模式的图。在图27中,指定点P11和P12(白色星形标记)的组合对应于一个模式,而指定点P21-P27(黑色星形标记)的组合对应于另一个模式。即,指定点P11和P12属于一个群,而指定点P21-P27属于另一个群。类似于在第一实施例中的情形,内容创建者5可以基于内容的应用或者目标设置不同的指定点P的模式。或者,在类似第二实施例的情形的自动地生成摘要信息的情形中,不同的指定点P的模式基于特征的属性被设置。
例如,在图27中,指定点P11和P12是为了引起游客注意的观光点,而指定点P21-P27是为引起女性注意的商店。
可以类似第一和第二实施例的情形进行用于创建摘要信息的方法。即,内容创建者5基于内容的用途或者目标设置指定点P。自动摘要信息生成单元44在逐个模式的基础上,基于其属性来通过选择特征来设置指定点P。摘要信息改变单元43将用于识别各个模式的识别信息项(下文描述的摘要ID)分配给指定点,从而处理离散的模式。另外,内容创建者5可以在逐个模式的基础上指定各个识别信息项。
例如,在多个摘要信息的模式被设置的情形中,摘要信息表显示如下。
【表2】摘要信息表
在表2所示的摘要信息表中,相比于表1添加了摘要ID列。摘要ID是用于识别模式的识别信息(群信息)。既然相对于一个内容ID的两个摘要ID被记录在表2中,那么摘要再现可以以两种模式进行。例如,当“D01”被选择为摘要ID时,在指定点P只包含在与5和7的帧ID相对应的帧中的条件下,用户PC 16进行摘要再现。
摘要再现的可操作的处理可以与图22所示的相同。然而,在这种情况下,在图22的步骤S2中传送的摘要信息请求中,摘要信息请求单元35包含内容ID和摘要ID。相应地,摘要管理服务器18将与摘要ID相对应的摘要信息传送给用户PC 16。
用户PC 16响应终端用户选择被提供用于在内容的再现屏幕上显示的观光点或商店的按钮等传送摘要ID。各个按钮与摘要ID有关。用户PC 16将与选择的按钮有关的摘要ID发送给摘要管理服务器18。
因此,根据本实施例的内容供应系统100,一个内容的摘要再现可以以多种模式来进行。
<其他应用的实例>
上文中,尽管本发明已经相对于具体实施例做出了完整而清晰的描述,但是其所附权利要求不能因此而被限制,而是应当被解释为包含完全落入在此阐述的基本教导内的、本领域技术人员可能想到的所有的变形和替换。
例如,摘要管理服务器18或内容供应服务器13可以传送其中球面图像的显示范围已经基于摘要信息而被设定好的内容。在这种情况下,用户PC 16可以仅仅通过再现类似流的内容来显示指定点P。
图28是图解用于将已经设定好球面图像的显示范围的内容从内容供应服务器13传送到用户PC 16的处理的时序图。在图28中,摘要管理服务器18包含摘要再现单元36。摘要再现单元36设置显示范围V1-V13。在步骤S1中,用户PC 16请求内容供应服务器13提供内容。在步骤S2中,内容供应服务器13将通过用户PC 16请求的内容传送给摘要管理服务器18。在步骤S3中,摘要管理服务器18的摘要再现单元36从摘要信息管理DB4001中检索摘要信息。在步骤S4中,摘要再现单元36如参考图23所描述的那样确定显示范围和显示放大倍率。在步骤S5中,摘要再现单元36将已经设置好显示范围的内容传送给内容供应服务器13。在步骤S6中,内容供应服务器13将已经设置好显示范围的内容传送给用户PC 16。
同样,在这种情况下,摘要管理服务器18可以仅仅将显示范围V1-V13传送给用户PC 16。这样,传送球面图像的时间可以被缩短。
同样,根据本实施例的描述,任意已经获得内容和摘要信息的设备都可以进行摘要再现。例如,当摘要管理服务器18存储内容时,内容的摘要再现可以通过把显示部等连接到摘要管理服务器18上进行。
例如,在实施例中,尽管球面图像被包含在内容中,但这不是限定性实例。例如,不能被完全地在显示部的屏幕上显示的宽范围图像也可以包含在内容中。同样,除球面图像之外的图像可以被包含在内容的球面图像中,并且可以在球面图像之间显示图像。更进一步地,在内容的图像是球面图像的情形中,可以使用由多个图像组合而成的球面图像,以及通过专门拍摄球面图像的拍摄装置11拍摄的球面图像。另外,球面图像可以通过附带特定镜头的智能手机拍摄。
同样,视频图像包含在空中(在跳伞或滑翔期间)、在水中(在海洋或水池中)以及在地面上拍摄的视频图像。在使用不是在地面上拍摄的视频图像的情形中,较好地,图像中添加高度信息以及经度和纬度。
同样,在实施例中,内容创建者5编辑与最接近指定点P的拍摄点相对应的球面图像的摘要信息。然而,除与最接近指定点P的拍摄点相对应的球面图像的摘要信息之外的其他的摘要信息也可以被编辑。例如,内容创建者5可以在摘要信息改变屏幕601中选择拍摄点,以便指定对应的要编辑摘要信息的球面图像。同样,不仅最接近指定点P的拍摄点的视线方向,而且多个拍摄点的视线方向可以被调整,以便被导向指定点P。
更进一步地,在图6所示的功能配置中,为了说明的方便起见,各个功能模块按照他们的功能被划分,这并不是限定性实例。同样,在存储单元1000和4000中存储的数据库可以被安置在其他单元中,只要内容供应系统100可以从中读/写数据即可。
另外,图6中,各个功能单元包含在内容供应服务器13、摘要管理服务器18、用户PC 16和创建者PC 19中。然而,这不是限定性实例。例如,包含在内容供应服务器13、摘要管理服务器18、用户PC 16和创建者PC 19中的各个功能单元可以进行进一步划分。同样,举例来说,几个功能单元也可以集成。
上文中,尽管本发明已经相对于具体实施例做出了完整而清晰的公开,但是其所附权利要求不是因此而被限制,而是应当被解释为包含完全落入在此阐述的基本教导内的、本领域技术人员可以做出的所有的变形和替换。本申请基于2015年5月20日提交的日本优先权申请No.2015-102622,其全部内容通过引用合并于此。

Claims (13)

1.一种内容供应系统,其特征在于:所述内容供应系统包括信息处理设备和终端装置,所述信息处理设备将包含分别拍摄于离散的拍摄场所的多个图像的内容提供给所述终端装置,
所述信息处理设备包括:
检索单元,所述检索单元被配置为从用于存储所述内容的内容存储装置中检索所述内容,以及从用于存储位置信息项的位置信息存储装置中检索与所述内容有关的所述位置信息项,所述位置信息项定义指定位置;和
传送单元,所述传送单元被配置为将检索到的内容和检索到的位置信息项传送给所述终端装置;
所述终端装置包括:
接收单元,所述接收单元被配置为接收所述内容和所述位置信息项;和
内容再现单元,所述内容再现单元被配置为通过依次从被包含在所述内容中的所述图像中选择要被显示的图像并且显示被选择的图像的部分区域来再现所述内容,对于至少一个所述图像,被显示的部分区域是从被选择的图像中提取出,以显示指定位置的方向上的视图,至少一个所述图像基于所述指定位置和所述至少一个图像的拍摄场所之间的距离而被确定。
2.根据权利要求1所述的内容供应系统,其特征在于:
与用于识别被包含在所述内容中的至少一个所述图像的识别信息有关的所述位置信息项被存储在所述位置信息存储装置中,
所述接收单元接收带有所述位置信息项的所述识别信息,以及
内容再现单元设置图像的视线方向,用于定义所述部分区域的中心,至少通过所述识别信息识别的第一图像的所述视线方向被导向所述指定位置。
3.根据权利要求2所述的内容供应系统,其特征在于:
所述终端装置的所述接收单元还接收与所述识别信息有关的显示放大倍率,并且
所述内容再现单元通过显示以所述显示放大倍率放大或缩小的所述第一图像来再现所述内容。
4.根据权利要求3所述的内容供应系统,其特征在于:
所述内容包括所述第一图像和在所述内容的再现中在所述第一图像之后显示的第二图像,
所述第一图像的所述视线方向被设置为被导向所述指定点,并且
所述第二图像的所述视线方向通过基于所述第一图像的所述视线方向以及与所述第一图像相对应的第一拍摄位置跟与所述第二图像相对应的第二拍摄位置之间的距离,调整所述第二图像的初始视线方向来被设置,或者
所述第二图像的所述显示放大倍率通过基于所述第一图像的所述显示放大倍率以及所述第一拍摄位置与所述第二拍摄位置之间的距离,调整所述第二图像的初始显示放大倍率来被设置。
5.根据权利要求3所述的内容供应系统,其特征在于:
通过所述位置信息项定义第一指定点和第二指定点,
所述内容包括所述第一图像、在所述内容的再现中在所述第一图像之后显示的第二图像以及在所述第一图像和所述第二图像之间显示的第三图像,
与所述第一图像相对应的第一拍摄场所和所述第一指定点之间的距离小于第一预定值,与所述第二图像相对应的第二拍摄场所和第二指定点之间的距离小于第二预定值,与所述第三图像相对应的第三拍摄场所和所述第一指定点之间的距离大于或等于所述第一预定值,所述第三拍摄场所和所述第二指定点之间的距离大于或等于所述第二预定值,
所述第一图像的所述视线方向被设置为被导向所述第一指定点,
所述第二图像的所述视线方向被设置为被导向所述第二指定点,并且
所述第三图像的所述视线方向通过基于所述第一拍摄场所和所述第三拍摄场所以及所述第二拍摄场所和所述第三拍摄场所之间的距离将指示所述第一图像的所述视线方向的矢量和指示所述第二图像的所述视线方向的矢量相加来被设置,或者
所述第三图像的所述显示放大倍率被设置为所述第一图像的所述显示放大倍率和所述第二图像的所述显示放大倍率之间的值。
6.根据权利要求2-5中任意一项所述的内容供应系统,其特征在于:所述内容再现单元将所述第一图像的再现速度设置为小于其他图像的再现速度。
7.根据权利要求1-6中任意一项所述的内容供应系统,其特征在于:
用于识别所述位置信息项所属群的群信息被进一步存储在所述位置信息存储装置中,所述群信息与所述位置信息项有关,
所述传送单元传送由所述群信息指定的所述位置信息项,并且
所述终端装置的所述内容再现单元基于由所述群信息指定的所述位置信息项定义的指定位置,设置所述图像的所述显示范围。
8.根据权利要求1-7中任意一项所述的内容供应系统,其特征在于:
所述信息处理设备进一步包括位置信息设置单元,所述位置信息设置单元被配置为检测位于包含在所述内容中的所述图像的拍摄场所周围预定范围内的对象,以便将检测到的对象的所述位置信息项存储在所述位置信息存储装置中,所述对象基于从地图数据存储装置中检索到的地图数据来被检测。
9.根据权利要求1-7中任意一项所述的内容供应系统,其特征在于:
所述信息处理设备进一步包括屏幕信息传送单元,所述屏幕信息传送单元被配置为将屏幕传送到所述终端装置,所述内容中的所述位置信息项或显示放大倍率在所述屏幕中被设置,其中
所述屏幕信息传送单元获取由所述终端装置的用户通过所述屏幕输入的所述位置信息项和所述显示放大倍率。
10.一种信息处理设备,其特征在于,所述信息处理设备用于将包含分别拍摄于离散拍摄点的多个图像的内容传送到终端装置,所述终端装置接收所述内容和位置信息项,以便通过依次从所述内容中所包含的所述图像中选择要被显示的图像并显示被选择的图像的部分区域来再现所述内容,对于至少一个所述图像,被显示的部分区域从是被选择的图像中提取出,以显示由所述位置信息项定义的指定位置的方向上的视图,至少一个所述图像基于所述指定位置和所述至少一个图像的拍摄场所之间的距离而被确定,所述信息处理设备包括:
检索单元,所述检索单元被配置为从用于存储所述内容的内容存储装置中检索所述内容,以及从用于存储所述位置信息项的位置信息存储装置中检索与所述内容有关的所述位置信息项;和
传送单元,所述传送单元被配置为将检索到的内容和检索到的位置信息项传送给所述终端装置。
11.一种信息处理设备,其特征在于,所述信息处理设备用于将包含分别拍摄于离散的拍摄场所的多个图像的内容传送到终端装置,所述信息处理设备包括:
检索单元,所述检索单元被配置为从用于存储所述内容的内容存储装置中检索所述内容,以及从用于存储所述位置信息项的位置信息存储装置中检索与所述内容有关的位置信息项,所述位置信息项定义指定位置;和
显示范围设置单元,所述显示范围设置单元被配置为通过提取包含在所述内容中的所述图像中的一个图像的部分区域来确定显示范围,对于至少一个图像,被显示的部分区域是从所述图像中提取出,以显示指定位置的方向上的视图,至少一个图像基于所述指定位置和所述至少一个图像的拍摄场所之间的距离而被确定,
传送单元,所述传送单元被配置为将设置好确定的显示范围的所述内容传送给所述终端装置,或者将确定好的显示范围传送给所述终端装置。
12.一种内容供应系统,其特征在于,所述内容供应系统用于再现包含分别拍摄于离散的拍摄场所的多个图像的内容,所述内容供应系统包括:
检索单元,所述检索单元被配置为从用于存储所述内容的内容存储装置中检索所述内容,以及从用于存储位置信息项的位置信息存储装置中检索与所述内容有关的位置信息项,所述位置信息项定义指定位置;和
内容再现单元,所述内容再现单元被配置为通过依次从所述内容中所包含的所述图像中选择要被显示的图像并且显示被选择的图像的部分区域来再现所述内容,对于至少一个所述图像,被显示的部分区域是从被选择的图像中提取出,以显示指定位置的方向上的视图,至少一个所述图像基于指定位置和所述至少一个所述图像的拍摄场所之间的距离而被确定。
13.一种用于再现包含分别拍摄于离散的拍摄场所的多个图像的内容的方法,其特征在于,包括:
从用于存储所述内容的内容存储装置中检索所述内容,以及从用于存储位置信息项的位置信息存储装置中检索与所述内容有关的所述位置信息项,所述位置信息项定义指定位置;并且
通过依次从所述内容中所包含的所述图像中选择要被显示的图像并且显示被选择的图像的部分区域来再现所述内容,对于至少一个所述图像,被显示的部分区域是从被选择的图像中提取出,以显示指定位置的方向上的视图,至少一个所述图像基于指定位置和所述至少一个图像的拍摄场所之间的距离而被确定。
CN201610324059.5A 2015-05-20 2016-05-16 内容供应系统、信息处理设备和内容再现方法 Active CN106170101B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2015102622A JP6503881B2 (ja) 2015-05-20 2015-05-20 コンテンツ提供システム、情報処理装置、プログラム、コンテンツ再生方法
JP2015-102622 2015-05-20

Publications (2)

Publication Number Publication Date
CN106170101A true CN106170101A (zh) 2016-11-30
CN106170101B CN106170101B (zh) 2019-05-03

Family

ID=57324960

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610324059.5A Active CN106170101B (zh) 2015-05-20 2016-05-16 内容供应系统、信息处理设备和内容再现方法

Country Status (3)

Country Link
US (1) US10230779B2 (zh)
JP (1) JP6503881B2 (zh)
CN (1) CN106170101B (zh)

Families Citing this family (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10949514B2 (en) 2010-11-29 2021-03-16 Biocatch Ltd. Device, system, and method of differentiating among users based on detection of hardware components
US11223619B2 (en) 2010-11-29 2022-01-11 Biocatch Ltd. Device, system, and method of user authentication based on user-specific characteristics of task performance
US10728761B2 (en) 2010-11-29 2020-07-28 Biocatch Ltd. Method, device, and system of detecting a lie of a user who inputs data
US10586036B2 (en) 2010-11-29 2020-03-10 Biocatch Ltd. System, device, and method of recovery and resetting of user authentication factor
US10917431B2 (en) 2010-11-29 2021-02-09 Biocatch Ltd. System, method, and device of authenticating a user based on selfie image or selfie video
US10776476B2 (en) 2010-11-29 2020-09-15 Biocatch Ltd. System, device, and method of visual login
US10069837B2 (en) 2015-07-09 2018-09-04 Biocatch Ltd. Detection of proxy server
US20190158535A1 (en) * 2017-11-21 2019-05-23 Biocatch Ltd. Device, System, and Method of Detecting Vishing Attacks
US10621585B2 (en) 2010-11-29 2020-04-14 Biocatch Ltd. Contextual mapping of web-pages, and generation of fraud-relatedness score-values
US11269977B2 (en) 2010-11-29 2022-03-08 Biocatch Ltd. System, apparatus, and method of collecting and processing data in electronic devices
US10897482B2 (en) 2010-11-29 2021-01-19 Biocatch Ltd. Method, device, and system of back-coloring, forward-coloring, and fraud detection
US10970394B2 (en) 2017-11-21 2021-04-06 Biocatch Ltd. System, device, and method of detecting vishing attacks
US12101354B2 (en) * 2010-11-29 2024-09-24 Biocatch Ltd. Device, system, and method of detecting vishing attacks
US11210674B2 (en) 2010-11-29 2021-12-28 Biocatch Ltd. Method, device, and system of detecting mule accounts and accounts used for money laundering
US10834590B2 (en) 2010-11-29 2020-11-10 Biocatch Ltd. Method, device, and system of differentiating between a cyber-attacker and a legitimate user
GB2539705B (en) 2015-06-25 2017-10-25 Aimbrain Solutions Ltd Conditional behavioural biometrics
GB2552032B (en) 2016-07-08 2019-05-22 Aimbrain Solutions Ltd Step-up authentication
US10579784B2 (en) 2016-11-02 2020-03-03 Biocatch Ltd. System, device, and method of secure utilization of fingerprints for user authentication
JP7277894B2 (ja) * 2018-01-22 2023-05-19 株式会社ユピテル システム,制御方法,プログラム等
JP2020109514A (ja) * 2020-01-20 2020-07-16 中松 義郎 手元から飛ばす撮影システム
US11606353B2 (en) 2021-07-22 2023-03-14 Biocatch Ltd. System, device, and method of generating and utilizing one-time passwords

Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101366027A (zh) * 2005-11-15 2009-02-11 耶路撒冷希伯来大学伊森姆研究发展公司 用于产生视频概要的方法和系统
US20110141141A1 (en) * 2009-12-14 2011-06-16 Nokia Corporation Method and apparatus for correlating and navigating between a live image and a prerecorded panoramic image
CN102129812A (zh) * 2010-01-12 2011-07-20 微软公司 在街道级图像的上下文中观看媒体
CN102447886A (zh) * 2010-09-14 2012-05-09 微软公司 在现有静止图像内可视化视频
CN103327298A (zh) * 2013-05-29 2013-09-25 山西绿色光电产业科学技术研究院(有限公司) 全景高速球一体机的联动浏览方法
US20140184821A1 (en) * 2012-12-28 2014-07-03 Satoshi TANEICHI Image management system, image management method, and computer program product
CN103959288A (zh) * 2011-11-30 2014-07-30 诺基亚公司 用于基于web的增强现实应用查看器的方法和装置
CN104040546A (zh) * 2012-01-11 2014-09-10 谷歌公司 用于显示全景图像的方法和系统
US8913083B1 (en) * 2010-07-13 2014-12-16 Google Inc. System and method of generating a view for a point of interest
CN104301769A (zh) * 2014-09-24 2015-01-21 华为技术有限公司 呈现图像的方法、终端设备和服务器

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH09161096A (ja) * 1995-12-06 1997-06-20 Matsushita Electric Ind Co Ltd 3次元画像表示制御装置
JP4934922B2 (ja) * 2001-07-30 2012-05-23 ソニー株式会社 情報処理装置および方法、記録媒体、並びにプログラム
JP2004070609A (ja) * 2002-08-05 2004-03-04 Canon Inc 画像再生装置及び方法
JP5342748B2 (ja) * 2007-03-26 2013-11-13 株式会社デンソーアイティーラボラトリ 車載装置及び路側装置
WO2010150348A1 (ja) 2009-06-23 2010-12-29 パイオニア株式会社 映像記録再生装置、映像記録再生方法、および映像記録再生プログラム
US9167290B2 (en) * 2010-12-17 2015-10-20 Microsoft Technology Licensing, Llc City scene video sharing on digital maps
JP6186775B2 (ja) * 2012-05-31 2017-08-30 株式会社リコー 通信端末、表示方法、及びプログラム
JP6006536B2 (ja) * 2012-06-01 2016-10-12 任天堂株式会社 情報処理プログラム、情報処理装置、情報処理システム、およびパノラマ動画表示方法
US9886794B2 (en) * 2012-06-05 2018-02-06 Apple Inc. Problem reporting in maps
JP6228392B2 (ja) * 2013-05-31 2017-11-08 任天堂株式会社 パノラマ画像表示プログラム、パノラマ画像表示装置、パノラマ画像表示システム、および、パノラマ画像表示方法
US9881590B2 (en) * 2014-03-12 2018-01-30 HERE Global, B.V. Method and apparatus for multi-resolution point of interest boundary identification in digital map rendering

Patent Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101366027A (zh) * 2005-11-15 2009-02-11 耶路撒冷希伯来大学伊森姆研究发展公司 用于产生视频概要的方法和系统
US20110141141A1 (en) * 2009-12-14 2011-06-16 Nokia Corporation Method and apparatus for correlating and navigating between a live image and a prerecorded panoramic image
CN102129812A (zh) * 2010-01-12 2011-07-20 微软公司 在街道级图像的上下文中观看媒体
US8913083B1 (en) * 2010-07-13 2014-12-16 Google Inc. System and method of generating a view for a point of interest
CN102447886A (zh) * 2010-09-14 2012-05-09 微软公司 在现有静止图像内可视化视频
CN103959288A (zh) * 2011-11-30 2014-07-30 诺基亚公司 用于基于web的增强现实应用查看器的方法和装置
CN104040546A (zh) * 2012-01-11 2014-09-10 谷歌公司 用于显示全景图像的方法和系统
US20140184821A1 (en) * 2012-12-28 2014-07-03 Satoshi TANEICHI Image management system, image management method, and computer program product
CN103327298A (zh) * 2013-05-29 2013-09-25 山西绿色光电产业科学技术研究院(有限公司) 全景高速球一体机的联动浏览方法
CN104301769A (zh) * 2014-09-24 2015-01-21 华为技术有限公司 呈现图像的方法、终端设备和服务器

Also Published As

Publication number Publication date
US20160344783A1 (en) 2016-11-24
JP6503881B2 (ja) 2019-04-24
JP2016220017A (ja) 2016-12-22
US10230779B2 (en) 2019-03-12
CN106170101B (zh) 2019-05-03

Similar Documents

Publication Publication Date Title
CN106170101B (zh) 内容供应系统、信息处理设备和内容再现方法
US11450350B2 (en) Video recording method and apparatus, video playing method and apparatus, device, and storage medium
USRE43545E1 (en) Virtual skywriting
CN109963163A (zh) 网络视频直播方法、装置及电子设备
JP4637889B2 (ja) 仮想空間放送装置
CN102542483A (zh) 房产位置展示系统及方法、展示数据生成系统及方法
KR20160112898A (ko) 증강현실 기반 동적 서비스 제공 방법 및 장치
CN104484327A (zh) 一种项目工程的环境展示方法
CN103514621B (zh) 案、事件场景全真动态3d再现方法及重构系统
CN105959814B (zh) 基于场景识别的视频弹幕显示方法及其显示装置
CN108446015A (zh) 基于混合现实的展会展览方法及展会系统
WO2024077909A1 (zh) 基于视频的交互方法、装置、计算机设备和存储介质
CN108521587A (zh) 短视频处理方法、装置及移动终端
JP2022507502A (ja) 拡張現実(ar)のインプリント方法とシステム
CN113781660A (zh) 一种用于直播间在线渲染加工虚拟场景的方法及装置
CN106445439A (zh) 一种在线展示图片的方法
Langlotz et al. AR record&replay: situated compositing of video content in mobile augmented reality
KR20090044105A (ko) 삼차원 가상 공간 콘텐츠를 이용한 영상제공시스템
Cao Development and design case function comparison of panoramic roaming system of virtual museum based on Pano2VR
CN113792646A (zh) 舞蹈动作辅助生成方法、装置及跳舞设备
KR20160136833A (ko) 영상콘텐츠를 활용한 의료교육 시스템
CN107707830A (zh) 基于单向通信的全景视频播放拍照系统
KR101221540B1 (ko) 인터랙티브 미디어 매핑 시스템 및 그 방법
Li et al. An empirical evaluation of labelling method in augmented reality
Wu et al. Construction and implementation of the three-dimensional virtual panoramic roaming system of Hainan ecotourism

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant