CN107172503B - 显示设备 - Google Patents

显示设备 Download PDF

Info

Publication number
CN107172503B
CN107172503B CN201610817539.5A CN201610817539A CN107172503B CN 107172503 B CN107172503 B CN 107172503B CN 201610817539 A CN201610817539 A CN 201610817539A CN 107172503 B CN107172503 B CN 107172503B
Authority
CN
China
Prior art keywords
video
storage amount
temporary storage
display device
unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201610817539.5A
Other languages
English (en)
Other versions
CN107172503A (zh
Inventor
藤居彻
武罗李·洲烈朱
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujifilm Business Innovation Corp
Original Assignee
Fuji Xerox Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fuji Xerox Co Ltd filed Critical Fuji Xerox Co Ltd
Publication of CN107172503A publication Critical patent/CN107172503A/zh
Application granted granted Critical
Publication of CN107172503B publication Critical patent/CN107172503B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/765Interface circuits between an apparatus for recording and another apparatus
    • H04N5/77Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/433Content storage operation, e.g. storage operation in response to a pause request, caching operations
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00Geometric image transformations in the plane of the image
    • G06T3/40Scaling of whole images or parts thereof, e.g. expanding or contracting
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/70Determining position or orientation of objects or cameras
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/231Content storage operation, e.g. caching movies for short term storage, replicating data over plural servers, prioritizing data for deletion
    • H04N21/23103Content storage operation, e.g. caching movies for short term storage, replicating data over plural servers, prioritizing data for deletion using load balancing strategies, e.g. by placing or distributing content on different disks, different memories or different servers
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/231Content storage operation, e.g. caching movies for short term storage, replicating data over plural servers, prioritizing data for deletion
    • H04N21/23106Content storage operation, e.g. caching movies for short term storage, replicating data over plural servers, prioritizing data for deletion involving caching operations
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/2343Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H04N21/23439Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements for generating different versions
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/238Interfacing the downstream path of the transmission network, e.g. adapting the transmission rate of a video stream to network bandwidth; Processing of multiplex streams
    • H04N21/2387Stream processing in response to a playback request from an end-user, e.g. for trick-play
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/262Content or additional data distribution scheduling, e.g. sending additional data at off-peak times, updating software modules, calculating the carousel transmission frequency, delaying a video stream transmission, generating play-lists
    • H04N21/26258Content or additional data distribution scheduling, e.g. sending additional data at off-peak times, updating software modules, calculating the carousel transmission frequency, delaying a video stream transmission, generating play-lists for generating a list of items to be played back in a given order, e.g. playlist, or scheduling item distribution according to such list
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/266Channel or content management, e.g. generation and management of keys and entitlement messages in a conditional access system, merging a VOD unicast channel into a multicast channel
    • H04N21/2662Controlling the complexity of the video stream, e.g. by scaling the resolution or bitrate of the video stream based on the client capabilities
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/4104Peripherals receiving signals from specially adapted client devices
    • H04N21/4126The peripheral being portable, e.g. PDAs or mobile phones
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/433Content storage operation, e.g. storage operation in response to a pause request, caching operations
    • H04N21/4331Caching operations, e.g. of an advertisement for later insertion during playback
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/4508Management of client data or end-user data
    • H04N21/4524Management of client data or end-user data involving the geographical location of the client
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/462Content or additional data management, e.g. creating a master electronic program guide from data received from the Internet and a Head-end, controlling the complexity of a video stream by scaling the resolution or bit-rate based on the client capabilities
    • H04N21/4621Controlling the complexity of the content stream or additional data, e.g. lowering the resolution or bit-rate of the video stream for a mobile client with a small screen
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/61Network physical structure; Signal processing
    • H04N21/6106Network physical structure; Signal processing specially adapted to the downstream path of the transmission network
    • H04N21/6125Network physical structure; Signal processing specially adapted to the downstream path of the transmission network involving transmission via Internet
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/845Structuring of content, e.g. decomposing content into time segments
    • H04N21/8456Structuring of content, e.g. decomposing content into time segments by decomposing the content in the time domain, e.g. in time segments
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/01Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level
    • H04N7/0127Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level by changing the field or frame frequency of the incoming video signal, e.g. frame rate converter

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Information Transfer Between Computers (AREA)

Abstract

本发明提供了一种显示设备,该显示设备包括:临时存储单元,其临时存储以流的方式递送的视频的数据;显示单元,其在读取临时存储的数据的同时显示视频;以及处理单元,其执行存储量控制处理,以使得存储在临时存储单元中的视频的数据的临时存储量是根据显示视频的显示设备的状态的量。

Description

显示设备
技术领域
本发明涉及一种显示设备。
背景技术
在用于显示流递送视频的技术中,诸如视频的图像质量等级和回放的连续性(无中断地回放)的回放质量是重要的。为了提高回放质量,例如JP 2004-88480 A公开了一种根据分组通信网络的带宽改变所传输的图像编码信号的信息量的技术。
发明内容
通常,显示以流的方式递送的视频的显示设备在临时存储视频的数据的同时显示该视频。随着临时存储的数据量增大,例如,即使通信中断,显示连续时间也增加。同时,例如,在能够在显示的中途改变比特率的MPEG-DASH等的流递送中,当临时存储的数据量较大时,即使在比特率改变为较大值的情况下,也以具有较小值的比特率显示,换句话说,继续低图像质量的显示,直至临时存储的数据的显示结束。
本发明的至少实施例的目的是能够根据设备的状态改变以流的方式递送的视频的数据的临时存储量。
[1]根据本发明的一方面,提供了一种显示设备,包括:临时存储单元,其临时存储以流的方式递送的视频的数据;显示单元,其在读取临时存储的数据的同时显示视频;以及处理单元,其执行存储量控制处理,以使得存储在临时存储单元中的视频的数据的临时存储量是根据显示视频的显示设备的状态的量。
[2]在根据[1]所述的显示设备中,其中视频可为比特率在显示过程中可变化的视频,显示单元可根据显示视频的显示区的尺寸改变视频的比特率,并且处理单元可执行存储量控制处理,以使得临时存储量是根据显示区的尺寸的量,显示区的尺寸是显示设备的状态。
[3]在根据[2]所述的显示设备中,显示单元在显示区扩大的情况下可将比特率改变为较大值,并且处理单元在显示区的尺寸扩大的情况下可通过增大临时存储量来执行存储量控制处理。
[4]在根据[3]所述的显示设备中,可对临时存储在临时存储单元中的数据的量设置上限,并且处理单元可执行用于在高达上限的范围内增大临时存储量的存储量控制处理。
[5]在根据[2]至[4]中的任一项所述的显示设备中,显示单元可在显示区缩小的情况下将比特率改变为较小值,并且处理单元可在显示区的尺寸缩小的情况下通过减小临时存储量来执行存储量控制处理。
[6]在根据[1]所述的显示设备中,处理单元可执行存储量控制处理,以使得临时存储量是根据显示设备的方向的量,显示设备的方向是显示设备的状态。
[7]在根据[1]所述的显示设备中,处理单元可执行存储量控制处理,以使得临时存储量是根据显示设备的运动速度的量,显示设备的运动速度是显示设备的状态。
[8]在根据[1]所述的显示设备中,处理单元可执行存储量控制处理,以使得临时存储量是根据显示设备的位置的量,显示设备的位置是显示设备的状态。
[9]在根据[1]所述的显示设备中,处理单元可执行存储量控制处理,以使得临时存储量是根据显示设备与另一设备的连接状态的量,显示设备与另一设备的连接状态是显示设备的状态。
根据[1]所述的显示设备,临时存储的以流的方式递送的视频的数据量可根据设备的状态而变化。
根据[2]所述的显示设备,临时存储的以流的方式递送的视频的数据量可根据设备的显示区的尺寸而变化。
根据[3]所述的显示设备,与临时存储量不增大的情况相比,可较少地发生视频的中断。
根据[4]所述的显示设备,可防止临时存储量过大。
根据[5]所述的显示设备,在显示区的尺寸稍后扩大的情况下,与临时存储量不减少的情况相比,低图像质量的图像回放的时间可缩短。
根据[6]所述的显示设备,临时存储的以流的方式递送的视频的数据量可根据自身设备的方向而变化。
根据[7]所述的显示设备,临时存储的以流的方式递送的视频的数据量可根据显示设备的运动速度而变化。
根据[8]所述的显示设备,临时存储的以流的方式递送的视频的数据量可根据显示设备的位置而变化。
根据[9]所述的显示设备,临时存储的以流的方式递送的视频的数据量可根据显示设备与另一设备之间的连接状态而变化。
附图说明
将基于以下附图详细描述本发明的示例性实施例,其中:
图1是示出根据示例性实施例的视频传输系统的整体构造的示图;
图2是示出流递送的结构的示图;
图3是示出智能电话的硬件构造的示图;
图4是示出视频递送设备的硬件构造的示图;
图5是示出通过各个设备实现的功能性构造的示图;
图6A是示出在显示区中显示的视频的示例的示图;
图6B是示出在显示区中显示的视频的示例的示图;
图6C是示出在显示区中显示的视频的示例的示图;
图7是示出比特率表的示例的示图;
图8是示出区段数据数量表的示例的示图;
图9是示出在流递送处理中各个设备的操作程序的示例的示图;
图10是示出根据修改例的区段数据数量表的示例的示图;
图11是示出根据修改例的通过智能电话实现的功能性构造的示图;
图12是示出区段数据数量表的示例的示图;
图13是示出根据修改例的通过智能电话实现的功能性构造的示图;
图14是示出区段数据数量表的示例的示图;
图15是示出根据修改例的智能电话的硬件构造的示图;
图16是示出通过智能电话实现的功能性构造的示图;
图17是示出区段数据数量表的示例的示图;
图18是示出根据修改例的智能电话的硬件构造的示图;
图19是示出通过智能电话实现的功能性构造的示图;
图20是示出区段数据数量表的示例的示图;
图21是示出根据修改例的视频传输系统的整体构造的示图;
图22是示出服务器设备的硬件构造的示图;以及
图23是示出通过各个设备实现的功能性构造的示图。
具体实施方式
[1]示例性实施例
图1示出了根据示例性实施例的视频传输系统1的整体构造。视频传输系统1是一种将视频以流的方式递送至用户使用的回放设备的系统。视频的流递送采用这样的架构递送视频:将视频划分为多个区段并且在以回放顺序发送和接收代表各个区段的视频的区段数据的同时依序再现区段数据。区段数据是代表例如约一秒至十秒的区段的数据。
视频传输系统1包括:通信线路2;智能电话10;以及视频递送设备20。例如,通信线路2包括移动通信网络、互联网等,并且是中继转发设备之间的数据交换的系统。智能电话10按照无线方式连接至通信线路2,并且视频递送设备20按照有线方式连接至通信线路2(这是一个示例,并且可按照有线方式或者无线方式进行连接)。
智能电话10是在视频传输系统1中显示以流的方式递送的视频的显示设备。智能电话10由用户携带并且在各种场合使用。视频递送设备20是这样一种信息处理设备,其对整体代表一个视频的多块区段数据进行存储,并通过按照回放次序依序发送这些区段数据来以流的方式递送视频。
在视频传输系统1中,其比特率在回放过程中可变化的视频按照流的方式(例如,符合被称作MPEG(运动图片专家组)-DASH(HTTP动态自适应流)的标准)被递送。在根据该示例性实施例的流递送中,预先设置多个比特率。
图2示出了流递送的结构。根据该示例性实施例的视频递送设备20存储分别代表“高”比特率、“中”比特率和“低”比特率的视频的区段数据组A1、A2和A3。比特率是一秒内发送/接收的数据量(单位为Mbps(兆比特每秒)或MB/sec(兆字节每秒))。随着比特率变高,由该区段数据组代表的视频具有更高的视频分辨率或者更高视频帧率。
当请求视频的流递送时,智能电话10指定待递送的视频的比特率。视频递送设备20从指定的比特率的区段数据组中按次序读取和发送区段数据。智能电话10临时存储(高速缓存)接收到的区段数据并且读取和再现高速缓存的区段数据。
另外,在回放视频的过程中智能电话10请求以与被回放的视频的比特率不同的比特率递送的情况下,在接收到该请求之后,视频递送设备20发送新指定的比特率的区段数据。当接收到区段数据时,在当前比特率的区段数据代表的视频之后,智能电话10回放由新比特率的区段数据代表的视频。如上所述,区段数据组A1、A2和A3表示其多个区段按照流的方式按次序递送并且其比特率可在回放过程中变化的视频。
图3示出了智能电话10的硬件构造。智能电话10是计算机,其包括:中央处理单元(CPU)11;随机存取存储器(RAM)12;只读存储器(ROM)13;网络接口卡(NIC)14;闪速存储器15;触摸屏16;扬声器17;和传感器18。CPU 11通过用作工作区域的RAM 12执行存储在ROM13和闪速存储器15中的程序,从而控制各个单元的操作。NIC 14包括天线、通信电路等,并且例如执行符合移动通信标准的无线通信。
闪速存储器15存储CPU 11用于控制处理的数据和程序。在该示例性实施例中,浏览器程序被包括在这些程序中。通过在浏览器上执行的Java(注册商标)脚本来实现稍后将描述的根据本发明的功能。然而,程序不限于此,而是可存储实现根据本发明的功能的应用程序。触摸屏16包括作为布置在显示器表面上的触摸面板的显示器,并且接收用户的操作以及显示图像。扬声器17将表示声音的声数据转换为模拟信号并且发声。例如,传感器18是三轴地磁传感器,并且将表示智能电话10的斜率的数据供应至CPU 11。
图4示出了视频递送设备20的硬件构造。视频递送设备20是包括CPU 21、RAM 22、ROM 23、NIC 24和硬盘驱动器(HDD)25的计算机。CPU 21至ROM 23与图3所示的具有相同名称的硬件相同。NIC 24包括通信电路,并且通过通信线路2执行通信。HDD 25存储CPU 21用于控制处理的数据和程序。
包括在视频传输系统1中的各个设备的CPU通过执行程序控制各个单元,从而实现下面描述的功能。
图5示出了通过各个设备实现的功能性构造。智能电话10包括:比特率信息获取单元101;显示区尺寸指定单元102;高速缓存量指定单元103;通信速度指定单元104;比特率确定单元105;递送请求单元106;区段数据接收单元107;临时存储单元108;视频回放单元109;和临时存储量控制处理单元110。视频递送设备20包括:区段数据存储单元201;比特率信息存储单元202;比特率信息发送单元203;区段数据读取单元204;和区段数据发送单元205。
视频递送设备20的区段数据存储单元201存储通过视频递送设备20以流的方式递送的视频的区段数据。如参照图2的描述,区段数据存储单元201存储代表多个比特率的视频的区段数据。为了减小通信量,将各个区段数据编码(压缩)为例如代表参考帧与当前帧之间的差异的数据。
比特率信息存储单元202对存储在区段数据存储单元201中的表示将要通过视频递送设备20以流的方式递送的视频的多个比特率的比特率信息(例如,MPEG-DASH的媒体内容描述(MPD))进行存储。就图2所示的示例而言,比特率信息存储单元202存储表示由区段数据组A1、A2和A3表示的视频的比特率的比特率信息。例如,当视频的区段数据通过视频递送设备20的操作者存储时,存储该比特率信息。
当请求视频的流递送时,智能电话10的比特率信息获取单元101获取表示视频的多个比特率的比特率信息。例如,在智能电话10显示的网页上公布有指向由视频递送设备20以流的方式待递送的视频的链接并且用户执行选择该链接的操作的情况下,比特率信息获取单元101将请求该视频的比特率信息的请求数据发送至视频递送设备20。在该请求数据中,包括了指定视频的信息(例如,文件(MPEG-DASH的MPD文件)的统一资源定位符(URL)等)。
当接收到从智能电话10发送的请求数据时,视频递送设备20的比特率信息发送单元203从比特率信息存储单元202读取在请求数据中指定的视频(换句话说,存储在视频递送设备20中的视频)的比特率信息,并且将读取的比特率信息发送至请求源(在该示例性实施例中,智能电话10)。比特率信息获取单元101获取按此方式发送的比特率信息。比特率信息获取单元101将获取的比特率信息供应至比特率确定单元105。
比特率确定单元105将由比特率信息获取单元101所获取的比特率信息表示的多个比特率之一确定为待回放的视频的比特率。稍后将详细描述确定比特率的方法。比特率确定单元105以确定时间间隔重复地执行比特率的确定。作为时间间隔,例如,使用由区段数据的确定块数表示的视频的回放时间的间隔(例如,在回放时间为2秒的区段数据的确定块数为2块的情况下,每4秒,等等)。每当确定比特率时,比特率确定单元105就向递送请求单元106通知确定的比特率。
递送请求单元106请求执行视频的流递送的设备(在该示例性实施例中,视频递送设备20)以流的方式递送通过比特率确定单元105确定的比特率的视频。在通过比特率确定单元105确定的比特率变化的情况下,由递送请求单元106请求以流的方式递送的视频的比特率也变化。
另外,递送请求单元106在指定待发送的区段数据的块数的情况下执行该请求。每当比特率确定单元105确定比特率时,执行通过递送请求单元106执行的递送请求。为此,随着通过递送请求单元106指定的区段数据的块数增加,递送布置在更前侧上的场景的视频。
当从外部设备请求视频的流递送时,视频递送设备20的区段数据读取单元204读取请求的视频的区段数据。当接收到从智能电话10发送的指定数据时,区段数据读取单元204从视频的开头开始从指定数据指定的比特率的区段数据组中读取与指定数据指定的数量相对应的区段数据。
然后,区段数据读取单元204按间隔重复地执行从已读取的区段数据的延续部分读取与指定数量相对应的区段数据的处理,所述间隔为一次读取的区段数据中表示的一部分视频的回放时间或比该回放时间更短的时间。当指定的比特率在中途变化时,区段数据读取单元204在新比特率的区段数据当中从回放位置继续的部分开始读取与指定数量相对应的区段数据。每当读取区段数据时,区段数据读取单元204将读取的区段数据供应至区段数据发送单元205。
区段数据发送单元205将供应的区段数据发送至指定数据的发送源(在该示例性实施例中,智能电话10),换句话说,请求视频的流递送的请求源。智能电话10的区段数据接收单元107接收已从视频递送设备20发送的区段数据。区段数据接收单元107将接收到的区段数据供应至临时存储单元108。
临时存储单元108临时存储以流的方式递送的视频的数据。更详细地说,临时存储单元108临时存储通过区段数据接收单元107接收的区段数据,直到由该区段数据表示的一部分视频被再现。
当区段数据存储在临时存储单元108中时,视频回放单元109按次序读取所存储的区段数据并且按次序回放由读取的区段数据表示的视频。如上所述,由于区段数据被编码,因此视频回放单元109对区段数据进行解码并且随后再现解码后的区段数据。在显示区中显示再现的视频的同时,视频回放单元109根据智能电话10的方向在不同的显示区中显示视频。
图6A、图6B和图6C是示出在显示区中显示的视频的示例的图。在图6A、图6B和图6C所示的示例中,在图2所示的触摸屏16的显示表面161上,显示视频。显示表面161是由长边162和短边163包围的矩形表面。在图6A中,示出如下情况下的显示区B1:智能电话10取向为使得显示表面161的长边162沿着竖直方向布置(下文中,称作“竖直方向”)。
在图6B中,示出如下情况下的显示区B2:智能电话10取向为使得显示表面161的长边162沿着水平方向布置(下文中,称作“水平方向”)。在显示区B1和B2二者中,显示了其中示出了一个人的视频C1。视频回放单元109基于图3所示的传感器18测得的自身设备(智能电话10)的斜率确定自身设备布置在竖直方向还是水平方向,并且在竖直方向的情况下在显示区B1中显示视频,在水平方向的情况下在显示区B2中显示视频。
智能电话10的显示区尺寸指定单元102指定以流的方式递送的视频的显示区的尺寸。显示区尺寸指定单元102是根据本发明的示例性实施例的“第一指定单元”的示例。显示区尺寸指定单元102向视频回放单元109询问显示视频的显示区的类型(显示区B1和B2中的哪一个)。当接收到询问时,视频回放单元109向显示区尺寸指定单元102通知显示视频的显示区的类型。显示区尺寸指定单元102指定与所通知的显示区的类型相对应的尺寸作为显示区的尺寸。
在显示区B1被通知为显示区的类型的情况下,显示区尺寸指定单元102指定通过将图6A所示的长边的长度L1乘以短边的长度L2而获取的值(换句话说,显示区的面积)作为显示区的尺寸。另一方面,在显示区B2被通知为显示区的类型的情况下,显示区尺寸指定单元102指定通过将图6B所示的长边的长度L3乘以短边的长度L4而获取的值(换句话说,显示区的面积)作为显示区的尺寸。
这里,虽然显示区B1的短边接触显示表面161的长边162,并且显示区B2的短边接触显示表面161的短边163,但是显示区的尺寸和排列方式不限于此。例如,如图6C所示,视频回放单元109可在长边或短边均不接触显示表面161的长边162和短边163的显示区B3中显示视频C1。另外,在这种情况下,显示区尺寸指定单元102指定通过将显示区B3的长边的长度L5乘以其短边的长度L6而获取的值作为显示区的尺寸。显示区尺寸指定单元102将表示如上指定的显示区的尺寸的尺寸信息(在该示例性实施例中,表示显示区的面积的信息)供应至比特率确定单元105和临时存储量控制处理单元110。
智能电话10的高速缓存量指定单元103指定流回放中的高速缓存量,换句话说,针对以流的方式回放的视频的从现在开始要再现的位置而临时存储的区段数据的数据量。高速缓存量指定单元103是“第二指定单元”的示例。高速缓存量指定单元103参考临时存储在临时存储单元108中的区段数据,并且指定在已参考的区段数据作为上述高速缓存量被再现的情况下的回放时间。例如,在已高速缓存的区段数据表示两秒的视频,并且已再现对应于0.5秒的视频的情况下,高速缓存量指定单元103指定对应于1.5秒的视频被高速缓存,并且将表示秒数的信息供应至比特率确定单元105和临时存储量控制处理单元110作为高速缓存量信息。
智能电话10的通信速度指定单元104指定对以流的方式递送的视频的区段数据进行接收的通信速度。通信速度指定单元104是根据本发明的示例性实施例的“第三指定单元”的示例。通信速度指定单元104监视区段数据接收单元107并且指定在单位时间内由区段数据接收单元107接收的区段数据的数据大小作为通信速度。例如,在一秒接收10兆比特的区段数据的情况下,区段数据接收单元107指定10Mbps作为通信速度。区段数据接收单元107将表示这样指定的通信速度的通信速度信息供应至比特率确定单元105。
显示区尺寸指定单元102、高速缓存量指定单元103和通信速度指定单元104以与比特率确定单元105重复地确定比特率的时间间隔相同的时间间隔执行其特定处理。
比特率确定单元105基于显示区尺寸指定单元102指定的显示区的尺寸、高速缓存量指定单元103指定的高速缓存量和通信速度指定单元104指定的通信速度来确定待回放的视频的比特率。例如,比特率确定单元105使用其中显示区的尺寸和比特率的范围彼此关联的比特率表。
图7示出了比特率表的示例。在图7所示的示例中,在流递送中,设置了5个比特率,包括4.0Mbps、2.0Mbps、1.0Mbps、0.5Mbps和0.3Mbps。在这种情况下,比特率的范围“2.0、1.0、0.5和0.3”(单位为Mbps)与显示区的尺寸“小于阈值Th1”关联。另外,比特率的范围“4.0、2.0、1.0和0.5”与显示区的尺寸“等于或大于阈值Th1且小于阈值Th2”关联,并且比特率的范围“4.0、2.0和1.0”与显示区的尺寸“等于或大于阈值Th2”关联。
比特率确定单元105从比特率表中读取与显示区尺寸指定单元102指定的显示区的尺寸关联的比特率的范围。比特率确定单元105将所读取的比特率的范围缩小至不超过通信速度指定单元104指定的通信速度的范围。例如,在指定了小于阈值Th1的显示区的尺寸的情况下,比特率确定单元105读取比特率的范围“2.0、1.0、0.5和0.3”。然后,在指定了通信速度1.2Mbps的情况下,比特率2.0Mbps超过了指定的通信速度,因此,比特率确定单元105将比特率的范围缩小为另一范围“1.0、0.5和0.3”。
在其中再现由区段数据(以高速缓存量指定单元103所指定的高速缓存量的区段数据被临时存储)表示的视频的情况的回放时间(下文中,称作“高速缓存回放时间”)等于或大于阈值Th3的情况下,比特率确定单元105在缩减后的范围中选择自最高比特率开始确定的顺序的各比特率之一,并且将所选择的比特率确定为视频的比特率。在该示例性实施例中,比特率确定单元105选择和确定所确定的到“1”为止的顺序的比特率(换句话说,最大比特率)。如上述示例中,在缩减后的范围为“1.0、0.5和0.3”的情况下,比特率确定单元105将这些比特率中的最大比特率“1.0”确定为待回放的视频的比特率。
另一方面,在高速缓存回放时间小于上述阈值Th3的情况下,比特率确定单元105在缩减后的范围中选择自最低比特率开始确定的顺序的各比特率之一,并且将所选择的比特率确定为待回放的视频的比特率。在该示例性实施例中,确定了包括除最大比特率之外的所有比特率的顺序。因此,比特率确定单元105选择和确定通过从缩减后范围中排除最大比特率而获取的各比特率之一。
如上述示例中,在缩减后范围为“1.0、0.5和0.3”的情况下,比特率确定单元105选择通过排除这些比特率中的最大比特率“1.0”获取的“0.5和0.3”之一,并且将选择的比特率确定为待回放的视频的比特率。在最终选择两个或更多个比特率之一的情况下,例如,比特率确定单元105可通过将更多重点放在视频的分辨率上时常选择它们中的最大比特率,或者可通过将更多重点放在视频的连续性上时常选择它们中的最小比特率。
比特率确定单元105与递送请求单元106和视频回放单元109协作,从而用作在读取临时存储的视频的数据的同时显示视频的显示单元111。如上所述,显示单元111根据显示视频的显示区的尺寸改变视频的比特率。更具体地说,显示单元111在显示区增大的情况下将比特率改变为更大的值,并且在显示区减小的情况下将比特率改变为更小的值。
临时存储量控制处理单元110执行用于将存储在临时存储单元108中的视频的数据的临时存储量构造为根据显示视频的自身设备(智能电话10)的状态的量的存储量控制处理。临时存储量控制处理单元110是根据本发明的示例性实施例的“处理单元”的示例。在该示例性实施例中,临时存储量控制处理单元110执行以下处理作为存储量控制处理:通过将从显示区尺寸指定单元102供应的尺寸信息所表示的显示区的尺寸状态用作自身设备状态,来将临时存储量构造为根据该尺寸的量。
临时存储量控制处理单元110利用其中显示区尺寸状态和区段数据的块数彼此关联的区段数据数量表执行上述确定。
图8是示出区段数据数量表的示例的示图。在图8所示的示例中,表示了在显示区尺寸状态为“扩大状态”的情况下区段数据的块数为“增加”,并且临时存储量处于“等于或小于上限”的状态,以及在显示区尺寸状态为“扩大状态”的情况下区段数据的块数设为“0”,并且临时存储量处于“超过上限”的状态。另一方面,表示了在显示区尺寸状态为“缩小状态”的情况下区段数据的块数为“减少”。
在智能电话10中,通过临时存储单元108临时存储的视频的数据的量(临时存储量)存在上限。例如,通过用户设置和确定该上限,以防止RAM的可用容量由于高速缓存的数据而变小,并且防止延迟除视频的回放以外的处理。另外,同样在高速缓存的量充分小于RAM的可用容量的情况下,可设置用于确保预定时间或更长的回放的临时存储量的上限。
例如,在自身设备状态为显示区的尺寸扩大的扩大状态的情况下,在临时存储量等于或小于上限的情况下,临时存储量控制处理单元110执行增大临时存储量的处理作为存储量控制处理。在由此时供应的尺寸信息表示的显示区的尺寸大于由先前时间供应的尺寸信息表示的显示区的尺寸的情况下,临时存储量控制处理单元110确定扩大状态。临时存储量控制处理单元110确定由递送请求单元106请求的区段数据的块数,并且执行提供用于请求确定数量的区段数据的指令的指示处理作为存储量控制处理。
在如上所述确定为扩大状态的情况下,临时存储量控制处理单元110执行增加区段数据的块数的确定,如区段数据数量表中所示。临时存储量控制处理单元110可从前一个数增大区段数据的块数,或者可从预先设置的参考数(例如,以做出递送请求的间隔再现的区段数据的块数;在一个区段数据的回放时间为2秒,并且请求间隔为2秒的情况下,参考数为2)增大块数。
在任何情况下,由递送请求单元106请求的区段数据的块数增大,发送表示更先前的画面的区段数据,并且增大了存储在临时存储单元108中的区段数据的数据量(换句话说,临时存储量)。临时存储量控制处理单元110在直至上限的范围内执行增大临时存储量的处理,作为存储量控制处理。
在由从高速缓存量指定单元103供应的高速缓存量信息表示的量(在该示例性实施例中,高速缓存的视频的秒数)达到预先设置的上限的情况下,而且在显示区尺寸状态为扩大状态的情况下,临时存储量控制处理单元110确定区段数据的下一块数为零,如区段数据数量所示,从而临时存储量不超过上限。另外,这种情况的区段数据的块数不限于零,而是可为用于减小临时存储量的数。
另一方面,在自身设备状态为显示区的尺寸缩小的缩小状态的情况下,临时存储量控制处理单元110执行减小临时存储量的处理作为存储量控制处理。在由此时供应的尺寸信息表示的显示区的尺寸小于由先前时间供应的尺寸信息表示的显示区的尺寸的情况下,临时存储量控制处理单元110确定缩小状态。
在确定了缩小状态的情况下,临时存储量控制处理单元110执行减小区段数据的块数的确定,如区段数据数量表所示。临时存储量控制处理单元110可将区段数据的块数从先前时间的数减小或者可将所述块数从预先设置的参考数减小,如上所述。在任何情况下,减少了通过递送请求单元106请求的区段数据的块数,并且减小了存储在临时存储单元108中的区段数据的数据量(换句话说,临时存储量)。
包括在视频传输系统1中的各个设备基于上述构造执行视频的流递送处理。
图9示出了在流递送处理中各个设备的操作程序的示例。在图9所示的示例中,通过在用户回放以流的方式递送至智能电话10的视频的操作(选择指向视频的链接的操作等)时触发,来开始操作程序。
首先,智能电话10接收视频的回放操作(步骤S11)。接着,智能电话10(比特率信息获取单元101)向视频递送设备20请求接收到其回放操作的视频的比特率信息(步骤S12)。视频递送设备20(比特率信息发送单元203)读取所请求的视频的比特率信息并且将读取的比特率信息发送至智能电话10(步骤S13)。智能电话10(比特率信息获取单元101)获取已被发送至其的比特率信息(步骤S14)。
接着,智能电话10(显示区尺寸指定单元102)指定已接收到其回放操作的视频的显示区的尺寸(步骤S15)。接着,智能电话10(临时存储量控制处理单元110)根据指定的尺寸确定区段数据的块数(步骤S16)。接着,智能电话10(比特率确定单元105)根据指定的尺寸确定视频的比特率(步骤S17)。然后,智能电话10(递送请求单元106)请求视频递送设备20执行在步骤S17中确定的比特率的视频的流递送(步骤S18)。
视频递送设备20(区段数据读取单元204)读取表示在步骤S18中请求的比特率的视频的区段数据(步骤S21)。接着,视频递送设备20(区段数据发送单元205)将在步骤S21中读取的区段数据发送至智能电话10(步骤S22)。智能电话10(区段数据接收单元107)接收在步骤S22中发送至其的区段数据。智能电话10(临时存储单元108)临时存储接收到的区段数据(步骤S23)。
接着,智能电话10(视频回放单元109)读取和再现临时存储的区段数据,并且在显示区中显示再现的视频(步骤S24)。接着,智能电话10(显示区尺寸指定单元102)指定再现的视频的显示区的尺寸(步骤S25)。接着,智能电话10(高速缓存量指定单元103)指定临时存储的区段数据的数据量(换句话说,高速缓存量)(步骤S26)。
接着,智能电话10(通信速度指定单元104)指定接收区段数据的通信速度(步骤S27)。然后,智能电话10(比特率确定单元105)基于在步骤S25中指定的显示区的尺寸、在步骤S26中指定的高速缓存量以及在步骤S27中指定的通信速度来确定比特率(步骤S28)。智能电话10(递送请求单元106)请求视频递送设备20递送在步骤S28中确定的比特率的视频(步骤S29)。
处理返回至步骤S21,并且视频递送设备20(区段数据读取单元204)读取表示步骤S29中请求的比特率的视频的区段数据。然后,重复地执行步骤S21至S29的操作,直至用户执行结束回放的操作为止,或者直至视频回放终止为止,视频的回放结束。
根据该示例性实施例,如上所述,存储在临时存储单元108中的数据量(换句话说,临时存储的以流的方式递送的视频的数据量)根据自身设备的状态(在该示例性实施例中,显示区的尺寸)而改变。例如,在比特率减小的缩小状态(显示区的尺寸缩小的状态)下,通过减小临时存储量,与临时存储量在缩小状态下不减小的情况相比,在显示区的尺寸稍后扩大的情况下低图像质量的图像(比特率低的图像)的回放时间较短。
另一方面,在比特率增大的扩大状态(显示区的尺寸扩大的状态)下,区段数据的大小也增大,因此,与区段数据小的情况相比,通信会更容易中断。在该示例性实施例中,在扩大状态下,通过增大临时存储量,与临时存储量在扩大状态下不增大的情况相比,即使通信会容易地中断,视频的中断的发生也少于临时存储量不增大的情况。另外,由于设置了临时存储量的上限,因此可防止临时存储量的过量增加。
[2]修改例
上述示例性实施例仅是本发明的示例性实施例的示例并且可如下修改。另外,示例性实施例和各个修改例可根据需要结合在一起。
[2-1]临时存储量的上限
在示例性实施例中,虽然设置了临时存储量的上限,但是可不设置上限。例如,在临时存储单元108具有超过待流传送的视频的最大数据大小的存储容量的情况下,虽然未设置上限,但是不会出现用于临时存储的存储区不足且丢弃递送的区段数据的情况。
[2-2]显示设备的方向
临时存储量控制处理单元110可使用除示例性实施例的状态以外的状态作为自身设备(显示设备)的状态。例如,参照图6A所示,在视频回放单元109根据自身设备的方向在一定尺寸的显示区中显示视频的情况下,临时存储量控制处理单元110执行如下处理作为存储量控制处理:通过将自身设备的方向的状态用作自身设备的状态来将临时存储量构造为根据该方向的量。
图10示出了根据该修改例的区段数据数量表的示例。在图10所示的示例中示出了:在自身设备的方向的状态是“水平方向”(其中智能电话10如图6B所示取向为显示表面161的长边162沿着水平方向布置的状态)的情况下,区段数据的块数是“增加”,并且,在自身设备的方向的状态是“竖直方向”(其中智能电话10如图6A所示取向为显示表面161的短边163沿着竖直方向布置的状态)的情况下,区段数据的块数为“减小”。
如该区段数据数量表中所示,临时存储量控制处理单元110在智能电话10处于水平方向的状态的情况下执行用于增大临时存储量的处理作为存储量控制处理,并且在智能电话10处于竖直方向的状态的情况下执行用于减小临时存储量的处理作为存储量控制处理。如上所述,在该修改例中,临时存储的以流的方式递送的视频的数据量根据智能电话10的方向而变化。这样,如图6A所示的描述中所示,在智能电话10在水平方向的状态下比在竖直方向的状态下具有更大的显示区尺寸的情况下,如示例性实施例中,在显示区的尺寸稍后扩大的情况下,低图像质量的图像(低比特率的图像)回放的时间缩短,并且不大可能发生视频的中断。
[2-3]显示设备的运动速度
临时存储量控制处理单元110可使用运动速度的状态作为自身设备(显示设备)的状态。在这种情况下,临时存储量控制处理单元110执行如下处理作为存储量控制处理:利用自身设备的运动速度作为自身设备的状态来将临时存储量构造为根据该速度的量。
图11示出了根据该修改例的通过智能电话10a实现的功能性构造。除图5所示的单元之外,智能电话10a还包括运动速度测量单元112。在该修改例中,图3所示的传感器18是三轴加速度传感器,并且其将表示智能电话10a的加速度的数据供应至CPU 11。运动速度测量单元112基于该加速度测量智能电话10a的运动速度。运动速度测量单元112以与来自递送请求单元106的递送请求的间隔相同的间隔执行测量,并且针对各个测量将测量的结果供应至临时存储量控制处理单元110。
图12示出了根据该修改例的区段数据数量表的示例。在图12所示的示例中,示出了在智能电话10a的运动速度的状态为“小于阈值Th11”的情况下区段数据的块数“增加”,并且在智能电话10a的运动速度的状态为“等于或大于阈值Th11”的情况下“减少”区段数据的块数。
如该区段数据数量表中所示,临时存储量控制处理单元110在智能电话10a的运动速度处于小于阈值Th11的状态的情况下执行增大临时存储量的处理作为存储量控制处理,并且在智能电话10a的运动速度处于等于或大于阈值Th11的状态的情况下执行减小临时存储量的处理作为存储量控制处理。如上所述,在该修改例中,临时存储的以流的方式递送的视频的数据量根据智能电话10a的运动速度而改变。
例如,将用户的步行速度与用户停止时的智能电话10a的运动速度之间的边界的值(例如,约2至3km每小时)设为阈值Th11。然后,当用户停止时,区段数据的块数增大,并且临时存储量增大,从而即使通信临时中断视频也不容易中断。另一方面,当用户步行时,区段数据的块数减小,并且临时存储量减小,从而当通信临时中断时视频可容易地中断。这样,与未执行根据该修改例的存储量控制处理的情况相比,抑制了步行时观看智能电话的行为(步行时使用智能电话),并且当用户停止时可舒适地观看视频。
[2-4]显示设备的位置
临时存储量控制处理单元110可使用自身设备的位置的状态作为自身设备(显示设备)的状态。在这种情况下,临时存储量控制处理单元110执行如下处理作为存储量控制处理:通过利用自身设备的位置的状态作为自身设备的状态来将临时存储量构造为根据该位置的量。
图13示出了通过根据该修改例的智能电话10b实现的功能性构造。除图5所示的单元之外,智能电话10b还包括定位单元113。在该修改例中,图3所示的传感器18是包括全球定位系统(GPS)的定位传感器,并且其将表示智能电话10b位置的位置数据供应至CPU 11。定位单元113测量通过该位置数据表示的智能电话10b的位置。定位单元113以与来自递送请求单元106的递送请求的间隔相同的间隔执行位置的测量,并针对各个测量将测量结果供应至临时存储量控制处理单元110。
图14示出了根据该修改例的区段数据数量表的示例。在图14所示的示例中示出了:在智能电话10b的位置的状态为“家庭/办公室”的状态的情况下区段数据的块数“增加”,并且在智能电话10b的位置的状态为运动路径的情况下“减少”区段数据的块数。另外,示出了在智能电话10b的位置的状态为“列车路线”的情况下,在“从出发至站前”的情况下区段数据的块数为“增加”,并且在“从站前至出发”的情况下“减少”区段数据的块数。
如该区段数据数量表中所示,临时存储量控制处理单元110在智能电话10b的位置处于“家庭/办公室”的状态或者在“列车路线”中的“从出发至站前”的状态的情况下执行用于增大临时存储量的处理作为存储量控制处理,并且在智能电话10b的位置处于“运动路径”的状态或处于“列车路线”中的“从站前至出发”的状态的情况下执行减小临时存储量的处理作为存储量控制处理。如上所述,在该修改例中,临时存储的以流的方式递送的视频的数据量根据智能电话10b的位置而改变。
在该修改例中,当用户在他的家中或办公室中或在列车中时,区段数据的块数增加,并且临时存储量也增加,从而即使在通信临时中断的情况下视频也不容易中断。另一方面,当用户处于运动路径中时或者当列车将要很快到站时,区段数据的块数减小,并且临时存储量减小,从而当通信临时停止时视频可容易地中断。这样,与未执行根据该修改例的存储量控制处理的情况相比,减少了步行时观看智能电话的行为(步行时使用智能电话)。另外,同样在用户运动的情况下,在列车中运动的情况下也可舒适地观看视频。所述运动不限于在列车中运动,而是包括在公共汽车、轮船或飞机中运动,如在该修改例中,通过执行存储量控制处理,可舒适地观看视频。
[2-5]显示设备与其它设备之间的连接状态
临时存储量控制处理单元110可执行如下处理作为存储量控制处理:利用自身设备(显示设备)与其它设备之间的连接状态作为自身设备的状态,将临时存储量构造为根据连接的量。例如,这里描述的连接状态是同与自身设备无线通信的设备的连接状态。
图15示出了根据该修改例的智能电话10c的硬件构造。除图3所示的硬件之外,智能电话10c还包括第二NIC 14-2。在该修改例中,NIC 14执行符合移动通信标准的无线通信,并且第二NIC 14-2执行符合无线局域网(LAN)标准的无线通信。
图16示出了通过智能电话10c实现的功能性构造。除图5所示的单元之外,智能电话10c还包括无线通信连接目标确定单元114。无线通信连接目标确定单元114在NIC 14执行无线通信的情况下确定移动通信网络的基站作为无线通信的连接目标,并且在第二NIC14-2执行无线通信的情况下确定无线LAN的接入点作为无线通信的连接目标。无线电通信连接目标确定单元114以与来自递送请求单元106的递送请求的间隔相同的间隔执行确定,并且针对各个确定将确定的结果供应至临时存储量控制处理单元110。
图17示出了根据该修改例的区段数据数量表的示例。在图17所示的示例中,示出了在无线通信的连接目标是“接入点”的情况下区段数据的块数“增加”,并且在无线通信的连接目标为“基站”的情况下“减少”区段数据的块数。如该区段数据数量表所示,临时存储量控制处理单元110在执行与智能电话10c的无线通信的连接目标是“接入点”的状态下执行用于增大临时存储量的处理作为存储量控制处理,并且在执行与智能电话10c的无线通信的连接目标是“基站”的状态下执行用于减小临时存储量的处理作为存储量控制处理。
如上所述,在该修改例中,临时存储的以流的方式递送的视频的数据量根据智能电话10c与其它设备之间的连接状态而改变。另外,在接入点是连接目标的情况下,通常,与不执行根据该修改例的存储量控制处理的情况相比,在接入点是连接目标的情况下不执行费率计费,通过增大临时存储量,视频不容易中断。另一方面,在基站是连接目标的情况下,由于存在执行费率计费或者在超过预定通信量的情况下执行通信速度降低的措施的情况,与不执行根据该修改例的存储量控制处理的情况相比,通过减小临时存储量,可容易地执行通信费的降低或者避免通信速度降低的措施。
这里,例如,连接状态可为自身设备(显示设备)与除上述设备之外的外围设备之间的连接状态。
图18示出了根据修改例的智能电话10d的硬件构造。除图3所示的硬件之外,智能电话10d还包括接口(I/F)19。例如,I/F 19是符合蓝牙(注册商标)标准的接口,并且对应于蓝牙的外围设备与其连接。
图19示出了通过智能电话10d实现的功能性构造。除图5所示的单元之外,智能电话10d还包括外围设备连接确定单元115。外围设备连接确定单元115确定是否存在连接至I/F 19的外围设备。例如,外围设备连接确定单元115从智能电话10d的操作系统(OS)获取表示蓝牙的配对状态的信息,在存在已配对的设备的情况下,确定外围设备连接。外围连接确定单元115以与来自递送请求单元106的递送请求的间隔相同的间隔执行确定,并且针对各个确定将确定的结果供应至临时存储量控制处理单元110。
图20示出了根据该修改例的区段数据数量表的示例。在图20所示的示例中,示出了在外围设备的连接“不存在”的情况下区段数据的块数“增加”,并且在外围设备的连接“存在”的情况下“减少”区段数据的块数。如该区段数据数量表中所示,临时存储量控制处理单元110在智能电话10d与外围设备之间的连接不存在的状态下执行增大临时存储量的处理作为存储量控制处理,并且在智能电话10d与外围设备之间的连接存在的状态下执行减小临时存储量的处理作为存储量控制处理。
另外,在这种情况下,临时存储的以流的方式递送的视频的数据量根据智能电话10d与其它设备之间的连接状态改变。在连接外围设备的情况下,形成主要使用外围设备的状态,因此,在该修改例中,通过减小临时存储量将可由外围设备使用的存储区构造为较大。同时,在连接外围设备的情况下,与未连接外围设备的情况相比,可相对容易降低对显示的视频的关注,因此,减小临时存储量时的影响较小。
[2-6]服务器设备
可通过服务器设备执行上述比特率的确定。
图21示出了根据该修改例的视频递送传输系统1e的整体构造。视频传输系统1e包括:通信线路2;智能电话10e;视频递送设备20;和服务器设备30。
图22是示出服务器设备30的硬件构造的示图。服务器设备30是包括CPU 31、RAM32、ROM 33、NIC 34和HDD 35的计算机。从CPU 31至HDD 35与图4所示的相同名称的硬件相同。
图23示出了通过根据该修改例的各个设备实现的功能性构造。除图5所示的区段数据接收单元107、临时存储单元108和视频回放单元109之外,智能电话10e还包括回放操作通知单元116。服务器设备30包括图5所示的比特率信息获取单元101、显示区尺寸指定单元102、高速缓存量指定单元103、通信速度指定单元104、比特率确定单元105、递送请求单元106、以及临时存储量控制处理单元110。
当针对智能电话10e执行播放以流的方式递送的视频的操作时,智能电话10e的回放操作通知单元116向服务器设备30通知该操作的指示。该通知被服务器设备30的比特率信息获取单元101、显示区尺寸指定单元102、高速缓存量指定单元103和通信速度指定单元104接收。当接收到该通知并且比特率信息获取单元101获取比特率信息时,各个指定单元与对应于智能电话10e的各个单元通信(显示区尺寸指定单元102与视频回放单元109通信,高速缓存量指定单元103与临时存储单元108通信,并且通信速度指定单元104与区段数据接收单元107通信),并且开始其特定操作。
根据该修改例的临时存储量控制处理单元110执行存储量控制处理,其用于将在临时存储数据的同时显示以流的方式递送的视频的数据的显示设备(在该修改例中,智能电话10e)中的视频的临时存储量构造为根据显示设备的状态的量。该临时存储量控制处理单元110也是根据本发明的“处理单元”的示例。例如,通过将智能电话10e显示视频的显示区的尺寸的状态用作显示设备的状态,临时存储量控制处理单元110执行将临时存储量构造为根据尺寸的量的处理,作为存储量控制处理。
虽然存储量控制处理的细节与上述示例性实施例或者修改例相同,但是在描述的示例的每一个中,显示设备执行存储量控制处理,因此,自身设备主要是所述处理的目标或对象。然而,在该修改例中,由于服务器设备30执行存储量控制处理,因此不是“自身设备”而是作为服务器设备30的外部设备的“显示设备”是所述处理的目标或对象。因此,如在上述示例中的每一个中,比特率确定单元105确定比特率,临时存储量控制处理单元110确定区段数据的块数,并且通过递送请求单元106请求视频的递送。
此时,递送请求单元106在视频的递送目标设为智能电话10e的情况下执行请求。视频递送设备20的区段数据发送单元205将请求的视频的区段数据发送至智能电话10e。这样,将通过服务器设备30确定的比特率的视频递送至智能电话10e。另外,在该修改例中,由于服务器设备30如同根据示例性实施例的智能电话10那样控制临时存储量,因此临时存储的以流的方式递送的视频的数据的量根据智能电话10的状态(在该修改例中,显示区的尺寸)而改变。
[2-7]本发明的类别
本发明被理解为视频递送设备或视频递送系统,所述视频递送系统包括诸如不同于显示以流的方式递送的视频的显示设备(比如上述智能电话)的设备以及执行存储量控制处理而不显示视频的信息处理设备(比如上述服务器设备)。另外,本发明还被理解为用于实现各个设备执行的处理的信息处理方法或使得控制各设备的计算机工作的程序。可以用非暂时性记录介质(比如存储有程序的光盘)的形式提供这种程序,或者可以按照通过通信线路(比如因特网)将这种程序下载到计算机并安装在计算机中从而使其可使用的形式来提供这种程序。
已经针对示出和描述的目的提供了本发明的示例性实施例的以上描述。这不旨在是全面的或者将本发明限于公开的具体形式。显然,许多修改和变化对于本领域技术人员而言是显而易见的。选择和描述实施例以最好地解释本发明的原理及其实际应用,从而使得本领域其它技术人员能够理解本发明各实施例和适于预期的特定用途的各种修改。本发明的范围旨在由权利要求及其等同物限定。

Claims (9)

1.一种显示设备,包括:
临时存储单元,其临时存储以流的方式递送的视频的数据;
显示单元,其在读取临时存储的数据的同时显示视频;以及
处理单元,其执行存储量控制处理,以使得存储在临时存储单元中的视频的数据的临时存储量是根据显示视频的所述显示设备的状态的量,
其中,当所述显示设备的运动速度小于阈值时,视频的数据的临时存储量被增大,当所述显示设备的运动速度等于或大于所述阈值时,视频的数据的临时存储量被减小。
2.根据权利要求1所述的显示设备,
其中,视频是比特率在显示过程中可变化的视频,
显示单元根据显示视频的显示区的尺寸改变视频的比特率,并且
处理单元执行存储量控制处理,以使得临时存储量是根据显示区的尺寸的量,显示区的尺寸是显示设备的状态。
3.根据权利要求2所述的显示设备,
其中,显示单元在显示区扩大的情况下将比特率改变为较大值,并且
处理单元在显示区的尺寸扩大的情况下通过增大临时存储量来执行存储量控制处理。
4.根据权利要求3所述的显示设备,
其中,对临时存储在临时存储单元中的数据的量设置上限,并且
处理单元执行用于在高达上限的范围内增大临时存储量的存储量控制处理。
5.根据权利要求2至4中的任一项所述的显示设备,
其中,显示单元在显示区缩小的情况下将比特率改变为较小值,并且
处理单元在显示区的尺寸缩小的情况下通过减小临时存储量来执行存储量控制处理。
6.根据权利要求1所述的显示设备,
其中,处理单元执行存储量控制处理,以使得临时存储量是根据显示设备的方向的量,显示设备的方向是显示设备的状态。
7.根据权利要求1所述的显示设备,
其中,处理单元执行存储量控制处理,以使得临时存储量是根据显示设备的运动速度的量,显示设备的运动速度是显示设备的状态。
8.根据权利要求1所述的显示设备,
其中,处理单元执行存储量控制处理,以使得临时存储量是根据显示设备的位置的量,显示设备的位置是显示设备的状态。
9.根据权利要求1所述的显示设备,
其中,处理单元执行存储量控制处理,以使得临时存储量是根据显示设备与另一设备的连接状态的量,显示设备与另一设备的连接状态是显示设备的状态。
CN201610817539.5A 2016-03-08 2016-09-12 显示设备 Active CN107172503B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2016044906A JP2017163287A (ja) 2016-03-08 2016-03-08 表示装置
JP2016-044906 2016-03-08

Publications (2)

Publication Number Publication Date
CN107172503A CN107172503A (zh) 2017-09-15
CN107172503B true CN107172503B (zh) 2021-01-01

Family

ID=57205994

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610817539.5A Active CN107172503B (zh) 2016-03-08 2016-09-12 显示设备

Country Status (5)

Country Link
US (1) US9866786B2 (zh)
EP (1) EP3217681B1 (zh)
JP (1) JP2017163287A (zh)
KR (1) KR102123885B1 (zh)
CN (1) CN107172503B (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102614021B1 (ko) * 2015-04-27 2023-12-14 삼성전자주식회사 오디오 컨텐츠 인식 방법 및 장치

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2006097872A2 (en) * 2005-03-16 2006-09-21 Koninklijke Philips Electronics N.V. Content reproduction system and method
CN101017691A (zh) * 2005-12-08 2007-08-15 株式会社日立制作所 信息处理装置、媒体播放器以及存储设备的控制方法
CN101147358A (zh) * 2005-03-25 2008-03-19 爱米特系统公司 多媒体通信系统中的特征可测度性
CN103959274A (zh) * 2011-10-07 2014-07-30 爱立信电视公司 具有自动速率整形的http自适应流传送服务器
WO2015148016A1 (en) * 2014-03-26 2015-10-01 Intel Corporation Adaptive media streaming
US9253229B1 (en) * 2013-01-07 2016-02-02 Cox Communications, Inc. Correlating video quality with video playback view

Family Cites Families (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7188352B2 (en) * 1995-07-11 2007-03-06 Touchtunes Music Corporation Intelligent digital audiovisual playback system
JPH1198574A (ja) * 1997-09-24 1999-04-09 Toyota Motor Corp 移動体用無線通信システムおよびそのシステムに用いられる無線通信移動局
JP3475142B2 (ja) * 2000-03-01 2003-12-08 三菱電機株式会社 地図データ送信装置、地図データ送信方法、及び、地図データ送信方法をコンピュータに実行させるためのプログラムを記録したコンピュータ読み取り可能な記録媒体
JP2002141860A (ja) * 2000-11-02 2002-05-17 Denso Corp 狭域無線用自動車搭載通信装置
JP2004088480A (ja) 2002-08-27 2004-03-18 Canon Inc 撮像装置及びそのデータ伝送制御方法
JP4100182B2 (ja) * 2003-01-30 2008-06-11 松下電器産業株式会社 通信端末装置及びその制御方法
US20050066089A1 (en) 2003-09-22 2005-03-24 Jeyhan Karaoguz Consumption based source throttling
JP2005151352A (ja) * 2003-11-18 2005-06-09 Matsushita Electric Ind Co Ltd 車載装置および配信局、並びにストリーミング配信システム
JP4249672B2 (ja) * 2004-08-16 2009-04-02 Kddi株式会社 ビデオ情報複数同時符号化装置
JP4339211B2 (ja) * 2004-08-31 2009-10-07 シャープ株式会社 通信装置および通信システム
JP2006148789A (ja) 2004-11-24 2006-06-08 Matsushita Electric Ind Co Ltd ストリーミング受信装置及び配信サーバ装置
EP1843592A1 (en) * 2006-04-05 2007-10-10 BRITISH TELECOMMUNICATIONS public limited company Controlling media content quality
JP5060926B2 (ja) * 2007-11-28 2012-10-31 ルネサスエレクトロニクス株式会社 番組情報処理装置及び番組情報処理方法
JP2011172182A (ja) * 2010-02-22 2011-09-01 Nec Personal Products Co Ltd 配信サーバ及び配信システム
CN101848382A (zh) 2010-05-31 2010-09-29 深圳市景阳科技股份有限公司 一种视频流图像分辨率和码流的调整方法及系统
WO2013109941A2 (en) 2012-01-19 2013-07-25 Vid Scale, Inc. Methods and systems for video delivery supporting adaption to viewing conditions
US8861932B2 (en) 2012-05-18 2014-10-14 At&T Mobility Ii Llc Video service buffer management
JP2014204395A (ja) * 2013-04-09 2014-10-27 キヤノン株式会社 画像再生装置及びその再生方法
CN104168174A (zh) * 2013-05-16 2014-11-26 阿里巴巴集团控股有限公司 一种传输信息的方法及装置
US20150350369A1 (en) * 2014-05-30 2015-12-03 Qualcomm Incorporated Method For Reducing Pre-Fetching Of Multimedia Streaming Data With Minimal Impact On Playback User Experience

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2006097872A2 (en) * 2005-03-16 2006-09-21 Koninklijke Philips Electronics N.V. Content reproduction system and method
CN101147358A (zh) * 2005-03-25 2008-03-19 爱米特系统公司 多媒体通信系统中的特征可测度性
CN101017691A (zh) * 2005-12-08 2007-08-15 株式会社日立制作所 信息处理装置、媒体播放器以及存储设备的控制方法
CN103959274A (zh) * 2011-10-07 2014-07-30 爱立信电视公司 具有自动速率整形的http自适应流传送服务器
US9253229B1 (en) * 2013-01-07 2016-02-02 Cox Communications, Inc. Correlating video quality with video playback view
WO2015148016A1 (en) * 2014-03-26 2015-10-01 Intel Corporation Adaptive media streaming

Also Published As

Publication number Publication date
KR102123885B1 (ko) 2020-06-17
JP2017163287A (ja) 2017-09-14
US9866786B2 (en) 2018-01-09
CN107172503A (zh) 2017-09-15
EP3217681A1 (en) 2017-09-13
US20170264854A1 (en) 2017-09-14
KR20170104913A (ko) 2017-09-18
EP3217681B1 (en) 2020-02-05

Similar Documents

Publication Publication Date Title
KR101918017B1 (ko) 정보 처리 장치 및 정보 처리 방법
KR102352679B1 (ko) 다중 경로 전송 제어 프로토콜을 지원하는 디바이스 및 디바이스에서 영상 데이터를 스트리밍으로 수신하는 방법
KR102020363B1 (ko) 적응형 스트리밍을 이용한 미디어 세그먼트 송수신 방법 및 장치
CN113141514B (zh) 媒体流传输方法、系统、装置、设备及存储介质
US20140294096A1 (en) Video image data delivery device, method and system
WO2013191946A1 (en) Synchronizing the storing of streaming video
JP6021385B2 (ja) ストリーミングメディア再生装置、ストリーミングメディア再生方法、及びプログラム
CN114035672A (zh) 一种虚拟现实vr场景的视频处理方法及相关设备
CN113141523A (zh) 资源传输方法、装置、终端及存储介质
JP4153777B2 (ja) 映像コンテンツ配信装置及び方法
CN107172503B (zh) 显示设备
EP3968651A1 (en) Bitrate switching method and device
CN107135403B (zh) 信息处理设备
US11265356B2 (en) Network assistance functions for virtual reality dyanmic streaming
KR20120040838A (ko) 끊김 없는 영상을 제공하기 위한 멀티 스크린 플레이 서비스 시스템 및 방법
JP2015104075A (ja) メディア再生制御装置、メディア再生制御方法、及びプログラム
KR101548501B1 (ko) 청크 기반의 끊김 없는 스트림 송수신 장치 및 그 방법
JP5784538B2 (ja) ストリーミングメディア再生装置、メディアビットレート変更判定方法、及びプログラム
JP6099715B2 (ja) ストリーミングメディア再生装置、ストリーミングメディア再生方法、及びプログラム
JP2020522936A (ja) 画像処理装置およびシステム
JP2006041819A (ja) ストリーム配信サーバ、移動端末、ストリーム配信システム、およびストリーム配信方法
KR20140126094A (ko) 멀티미디어 시스템에서 컨텐츠 재생 방법 및 장치

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
CP01 Change in the name or title of a patent holder
CP01 Change in the name or title of a patent holder

Address after: Tokyo

Patentee after: Fuji film business innovation Co.,Ltd.

Address before: Tokyo

Patentee before: Fuji Xerox Co.,Ltd.