CN107135422A - 信息处理设备和信息处理方法 - Google Patents

信息处理设备和信息处理方法 Download PDF

Info

Publication number
CN107135422A
CN107135422A CN201610643376.3A CN201610643376A CN107135422A CN 107135422 A CN107135422 A CN 107135422A CN 201610643376 A CN201610643376 A CN 201610643376A CN 107135422 A CN107135422 A CN 107135422A
Authority
CN
China
Prior art keywords
video
bit rate
unit
bandwidth
data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201610643376.3A
Other languages
English (en)
Other versions
CN107135422B (zh
Inventor
藤居彻
武罗李·洲烈朱
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujifilm Business Innovation Corp
Original Assignee
Fuji Xerox Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fuji Xerox Co Ltd filed Critical Fuji Xerox Co Ltd
Publication of CN107135422A publication Critical patent/CN107135422A/zh
Application granted granted Critical
Publication of CN107135422B publication Critical patent/CN107135422B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/262—Content or additional data distribution scheduling, e.g. sending additional data at off-peak times, updating software modules, calculating the carousel transmission frequency, delaying a video stream transmission, generating play-lists
    • H04N21/26258—Content or additional data distribution scheduling, e.g. sending additional data at off-peak times, updating software modules, calculating the carousel transmission frequency, delaying a video stream transmission, generating play-lists for generating a list of items to be played back in a given order, e.g. playlist, or scheduling item distribution according to such list
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/47202—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for requesting content on demand, e.g. video on demand
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/266—Channel or content management, e.g. generation and management of keys and entitlement messages in a conditional access system, merging a VOD unicast channel into a multicast channel
    • H04N21/2662—Controlling the complexity of the video stream, e.g. by scaling the resolution or bitrate of the video stream based on the client capabilities
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/637—Control signals issued by the client directed to the server or network components
    • H04N21/6373—Control signals issued by the client directed to the server or network components for rate control, e.g. request to the server to modify its transmission rate
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60—Network streaming of media packets
    • H04L65/61—Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio
    • H04L65/613—Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio for the control of the source by the destination
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/21—Server components or server architectures
    • H04N21/218—Source of audio or video content, e.g. local disk arrays
    • H04N21/2187—Live feed
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H04N21/234363—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements by altering the spatial resolution, e.g. for clients with a lower screen resolution
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H04N21/234381—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements by altering the temporal resolution, e.g. decreasing the frame rate by frame skipping
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H04N21/23439—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements for generating different versions
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/238—Interfacing the downstream path of the transmission network, e.g. adapting the transmission rate of a video stream to network bandwidth; Processing of multiplex streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/238—Interfacing the downstream path of the transmission network, e.g. adapting the transmission rate of a video stream to network bandwidth; Processing of multiplex streams
    • H04N21/2385—Channel allocation; Bandwidth allocation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/258—Client or end-user data management, e.g. managing client capabilities, user preferences or demographics, processing of multiple end-users preferences to derive collaborative data
    • H04N21/25808—Management of client data
    • H04N21/25825—Management of client data involving client display capabilities, e.g. screen resolution of a mobile phone
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/258—Client or end-user data management, e.g. managing client capabilities, user preferences or demographics, processing of multiple end-users preferences to derive collaborative data
    • H04N21/25808—Management of client data
    • H04N21/25833—Management of client data involving client hardware characteristics, e.g. manufacturer, processing or storage capabilities
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/4104—Peripherals receiving signals from specially adapted client devices
    • H04N21/4126—The peripheral being portable, e.g. PDAs or mobile phones
    • H04N21/41265—The peripheral being portable, e.g. PDAs or mobile phones having a remote control device for bidirectional communication between the remote control device and client device
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/414—Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance
    • H04N21/41407—Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance embedded in a portable device, e.g. video client on a mobile phone, PDA, laptop
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42204—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
    • H04N21/42206—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor characterized by hardware details
    • H04N21/42224—Touch pad or touch panel provided on the remote control
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/433—Content storage operation, e.g. storage operation in response to a pause request, caching operations
    • H04N21/4331—Caching operations, e.g. of an advertisement for later insertion during playback
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/437—Interfacing the upstream path of the transmission network, e.g. for transmitting client requests to a VOD server
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/44004—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving video buffer management, e.g. video decoder buffer or video display buffer
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/4402—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • H04N21/440236—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display by media transcoding, e.g. video is transformed into a slideshow of still pictures, audio is converted into text
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/4402—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • H04N21/440281—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display by altering the temporal resolution, e.g. by frame skipping
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442—Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/44209—Monitoring of downstream path of the transmission network originating from a server, e.g. bandwidth variations of a wireless network
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45—Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/462—Content or additional data management, e.g. creating a master electronic program guide from data received from the Internet and a Head-end, controlling the complexity of a video stream by scaling the resolution or bit-rate based on the client capabilities
    • H04N21/4621—Controlling the complexity of the content stream or additional data, e.g. lowering the resolution or bit-rate of the video stream for a mobile client with a small screen
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/47217—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for controlling playback functions for recorded or on-demand content, e.g. using progress bars, mode or play-point indicators or bookmarks
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/482—End-user interface for program selection
    • H04N21/4825—End-user interface for program selection using a list of items to be played back in a given order, e.g. playlists
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/61—Network physical structure; Signal processing
    • H04N21/6106—Network physical structure; Signal processing specially adapted to the downstream path of the transmission network
    • H04N21/6125—Network physical structure; Signal processing specially adapted to the downstream path of the transmission network involving transmission via Internet
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/61—Network physical structure; Signal processing
    • H04N21/6106—Network physical structure; Signal processing specially adapted to the downstream path of the transmission network
    • H04N21/6131—Network physical structure; Signal processing specially adapted to the downstream path of the transmission network involving transmission via a mobile phone network
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81—Monomedia components thereof
    • H04N21/8146—Monomedia components thereof involving graphical data, e.g. 3D object, 2D graphics
    • H04N21/8153—Monomedia components thereof involving graphical data, e.g. 3D object, 2D graphics comprising still images, e.g. texture, background image
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/845—Structuring of content, e.g. decomposing content into time segments
    • H04N21/8456—Structuring of content, e.g. decomposing content into time segments by decomposing the content in the time domain, e.g. in time segments

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Human Computer Interaction (AREA)
  • Computer Graphics (AREA)
  • Computer Security & Cryptography (AREA)
  • General Engineering & Computer Science (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Information Transfer Between Computers (AREA)

Abstract

一种信息处理设备，包括：第一指定单元，其指定流传输的视频的显示区的尺寸，所述视频具有在再现期间可改变的比特率；第二指定单元，其指定针对接下来将要再现的一段时间的视频而临时存储的数据的数据量；以及第三指定单元，其指定用于接收所述数据的带宽。所述信息处理设备还包括确定单元，其基于所指定的所述尺寸、所述数据量和所述带宽来确定再现的视频的比特率。

Description

信息处理设备和信息处理方法
技术领域
本发明涉及信息处理设备和信息处理方法。
背景技术
在对流传送(del ivered by streaming)的视频进行再现的技术中，诸如视频分辨率等级和再现连续性(在其中再现不中断)的再现质量较为重要。为了改善再现质量，例如，JP 2004-88480A中公开了一种改变根据包通信网络传输的图像编码信号的信息量的技术。
发明内容
当使用移动通信终端作为再现视频的再现装置时，由于无线电波状态的变化比固定式再现装置(例如，台式个人计算机(PC)等)时更大，因此带宽的变化范围和变化间隔有可能增大。为此，为了避免带宽突然下降从而使视频中断的情况，需要考虑到稳定性而以低比特率传送视频，然而，即使在这种情况下，仍然希望提高再现质量(例如，图像的分辨率等级等)。例如，当仅考虑带宽时，存在由于提高再现连续性而使得视频分辨率过低的情况，从而使整个再现质量下降。
就这一点而言，本发明的目的在于可以采用这样的比特率，在该比特率下，与仅考虑带宽确定比特率时相比，再现质量改善得更高。
根据本发明的第一方面，提供了一种信息处理装置，包括：第一指定单元，其指定流传输的视频的显示区的尺寸，所述视频具有在再现期间可改变的比特率；第二指定单元，其指定针对接下来将要再现的一段时间的视频而临时存储的数据的数据量；第三指定单元，其指定用于接收所述数据的带宽；以及确定单元，其基于所指定的所述尺寸、所述数据量和所述带宽来确定再现的视频的比特率。
根据本发明的第二方面，提供了一种根据第一方面的信息处理装置，其中，限定了流传送中的多个比特率，并且其中，当再现由具有所指定的数据量的临时存储的数据指示的视频的再现时间等于或大于阈值时，所述确定单元在对应于所指定的显示区尺寸且不超过所指定的带宽的比特率范围内，选择按照降序达到设定数量的比特率中的任意一个，并且确定选中的比特率作为再现的视频的比特率。
根据本发明的第三方面，提供了一种根据第一方面或第二方面的信息处理装置，其中，限定了流传送中的多个比特率，并且其中，当再现由具有所指定的数据量的临时存储的数据指示的视频的再现时间小于阈值时，所述确定单元在对应于所指定的显示区尺寸且不超过所指定的带宽的比特率范围内，选择按照升序达到设定数量的比特率中的任意一个，并且确定选中的比特率作为再现的视频的比特率。
根据本发明的第四方面，提供了一种根据第二方面或第三方面的信息处理装置，其中，所述确定单元将处于所述比特率范围内的致使临时存储的数据的数据量增加的比特率确定为再现的视频的比特率。
根据本发明的第五方面，提供了一种根据第一方面至第四方面中的任一方面的信息处理装置，其中，所述比特率的等级对应于视频的分辨率的等级和视频的帧率的等级，并且其中，当视频快速再现时，所述确定单元确定在其中分辨率或帧率低于正常再现时的分辨率或帧率的比特率。
根据本发明的第六方面，提供了一种根据第一方面至第五方面中的任一方面的信息处理装置，其中，所述比特率的等级对应于视频的分辨率的等级和视频的帧率的等级，并且其中，当视频慢速再现时，所述确定单元确定在其中分辨率或帧率高于正常再现时的分辨率或帧率的比特率。
根据本发明的第七方面，提供了一种根据第一方面至第六方面中的任一方面的信息处理装置，还包括：静态图像请求单元，当正以第一比特率再现视频的同时执行请求视频的特定场景的静态图像的操作时，所述静态图像请求单元在比第一比特率高的第二比特率的视频中请求该特定场景的静态图像。
根据本发明的第八方面，提供了一种根据第七方面的信息处理装置，其中，所述静态图像请求单元请求与所指定的带宽相对应的文件格式的所述静态图像。
根据本发明的第九方面，提供了一种根据第七方面的信息处理装置，其中，所述静态图像请求单元请求与视频的用途相对应的文件格式的所述静态图像。
根据本发明的第十方面，提供了一种根据第一方面至第九方面中的任一方面的信息处理装置，其中，当所述再现从视频的起点开始时，所述确定单元在不使用数据量和带宽的情况下确定比特率，直到已经经过了设定的时段。
根据本发明的第十一方面，提供了一种根据第一方面至第十方面中的任一方面的信息处理装置，还包括：获取单元，其获取用于指示多个比特率的比特率信息；其中，所述确定单元将获取到的比特率信息所指示的多个比特率中的任意一个确定为再现的视频的比特率；以及传送请求单元，其以所确定的比特率请求所述视频的流传送。
根据本发明的第十二方面，提供了一种信息处理方法，包括步骤：指定流传送的视频的显示区的尺寸，所述视频具有在再现期间可改变的比特率；指定针对接下来将要再现的一段时间的视频而临时存储的数据的数据量；指定用于接收所述数据的带宽；以及基于所指定的所述尺寸、所述数据量和所述带宽来确定再现的视频的比特率。
根据本发明的第一方面、第十一方面和第十二方面，可采用这样的比特率，在该比特率下，与仅考虑带宽确定比特率时相比，再现质量改善得更高。
根据本发明的第二方面，与不考虑临时存储的数据的数据量时相比，视频的再现质量可改善得更高。
根据本发明的第三方面，相比于采用与本发明各方面的方法不同的方法选择比特率时，可更加难以出现这样的情况：对临时存储的数据所指示的视频的再现在对新数据的接收结束之前结束，从而使得视频中断。
根据本发明的第四方面，与选择了在其中数据量不增加的比特率时相比，可更加难以出现在其中视频的再现中断的情况。
根据本发明的第五方面，在快进再现时，与正常再现、并且不改变比特率决定方法时相比，可将数据通信的负载减至更低。
根据本发明的第六方面，在慢再现时，与正常再现时相比，可显示具有更高分辨率或帧率的视频。
根据本发明的第七方面，与请求具有第一比特率的视频的静态画面相比，可更易于使要显示的静态画面的分辨率增加。
根据本发明的第八方面，可以显示适于带宽的文件格式的静态图像。
根据本发明的第九方面，可以显示适于视频用途的文件格式的静态图像。
根据本发明的第十方面，即使在未指定数据量和带宽的时间段中，也可确定比特率。
附图说明
将根据以下附图详细描述本发明的示例性实施例，在附图中：
图1是示出根据示例性实施例的视频传送系统的整体配置的示图；
图2是示出流传送机制的示图；
图3是示出智能电话的硬件配置的示图；
图4是示出视频传送设备的硬件配置的示图；
图5是示出由各个设备实现的功能配置的示图；
图6A是示出在显示区上显示的示例性视频的示图；
图6B是示出在显示区上显示的示例性视频的示图；
图6C是示出在显示区上显示的示例性视频的示图；
图7是示出示例性比特率表的示图；
图8是示出流传送过程中的各个设备的示例性操作过程的示图；
图9是示出根据修改例的由智能电话实现的功能配置的示图；
图10是示出根据修改例的由各个设备实现的功能配置的示图；
图11是示出示例性文件格式表的示图；
图12是示出根据修改例的视频传送系统的整体配置的示图；
图13是示出服务器设备的硬件配置的示图；
图14是示出根据修改例的由各个设备实现的功能配置的示图；
图15是示出根据修改例的由智能电话实现的功能配置的示图；以及
图16是示出示例性的所显示的流再现状态的示图。
具体实施方式
[1]示例性实施例
图1示出了根据示例性实施例的视频传送系统1的整体配置。视频传送系统1是向用户使用的再现设备流传送视频的系统。流传送视频是指通过以下机制传送视频：在以再现顺序收发用于指示视频的一部分的分段数据的同时顺序地再现分段数据。视频传送系统1包括通信线路2、智能电话10和视频传送设备20。
通信线路2是在其中对装置之间的数据交换进行中继的系统，例如移动通信网络或互联网。智能电话10以无线方式连接至通信线路2，视频传送设备20以有线方式连接至通信线路2(这是一个示例，它们可以有线方式和无线方式中的任意方式连接)。
智能电话10是对视频传送系统1中流传送的视频进行再现的再现装置。智能电话10由用户携带并且在各种地点使用。视频传送设备20是信息处理系统，其存储了作为一个整体指示一个视频的多条分段数据，并且通过以再现顺序按次序发送分段数据来执行视频的流传送。例如，一条分段数据是用于表示在整个视频中的约1至10秒的一部分的数据。
在视频传送系统1中，对这样的视频进行流传送，其符合例如被称作运动图像专家组(MPEG)-基于HTTP的动态自适应流(DASH)的标准，并且具有可在其再现期间改变的比特率。在示例性实施例的流传送中，预先确定了多个比特率。
图2示出了流传送机制。根据示例性实施例的视频传送设备20存储了数据组A1、A2和A3，其分别指示具有“高”比特率的视频、具有“中等”比特率的视频和具有“低”比特率的视频。比特率是指一秒间隔收发的数据量(具有兆比特每秒(Mbps)或兆字节每秒(MB/sec)的单位)。
在由所述分段数据组指示的视频中，随着比特率提高，视频的分辨率和帧率增加。智能电话10在请求视频的流传送时指定待传送的视频的比特率。视频传送设备20从所指定的比特率的分段数据组中顺序地读取分段数据，并且发送所读取的分段数据。智能电话10临时存储(缓存)接收到的分段数据，并且读取和再现所缓存的分段数据。
此外，当智能电话10在视频再现期间指定了与正在再现的视频的比特率不同的比特率并且请求传送该不同的比特率的分段数据时，视频传送设备20接收该请求，并且发送所指定的新比特率的分段数据。在接收到分段数据时，智能电话10在由当前比特率的分段数据指示的视频之后，再现由新比特率的分段数据指示的视频。因此，智能电话10显示再现期间比特率可改变的视频。本发明的示例性实施例的特征之一在于比特率决定方法。稍后将详细描述该决定方法。
图3示出了智能电话10的硬件配置。智能电话10是包括中央处理器(CPU)11、随机存取存储器(RAM)12、只读存储器(ROM)13、网络接口卡(NIC)14、闪速存储器15、触摸屏16、扬声器17和传感器18的计算机。CPU 11使用RAM 12作为工作区，通过执行存储在ROM 13或闪速存储器15中的程序来控制各个单元的操作。NIC14包括天线、通信电路等，并且执行符合诸如移动通信标准的无线通信。
闪速存储器15存储了数据以及CPU 11使用其进行控制的程序。在本示例性实施例中，包括了浏览器程序作为所述程序，并且通过在浏览器上执行的Java(注册商标)脚本来实现本发明的示例性实施例的功能(其将在稍后描述)。本发明不限于本示例性实施例，可存储实现本发明的功能的应用程序。触摸屏16包括用作显示单元的显示器和安装在显示器表面的触摸面板，并且显示图像和接收来自用户的操作。扬声器17将指示声音的音频数据转换为模拟信号并且输出声音。传感器18是例如三轴地磁传感器，并且将指示其自身设备的倾斜度的数据提供给CPU 11。
图4示出了视频传送设备20的硬件配置。视频传送设备20是包括CPU 21、RAM 22、ROM 23、NIC 24和硬盘驱动器(HDD)25的计算机。CPU 21至ROM 23是与图3所示的具有相同名称的组件相同的硬件。NIC 24包括通信电路，并且通过通信线路2执行通信。HDD25存储了数据以及CPU 21使用其进行控制的程序。
通过包括在视频传送系统1中的各个设备的CPU执行程序来控制各个单元，由此实现了下文将要描述的功能。
图5示出了由各个设备实现的功能配置。智能电话10包括比特率信息获取单元101、显示区尺寸指定单元102、缓存量指定单元103、带宽指定单元104、比特率确定单元105、传送请求单元106、分段数据接收单元107、临时存储单元108和视频再现单元109。视频传送设备20包括分段数据存储单元201、比特率信息存储单元202、比特率信息发送单元203、分段数据读取单元204和分段数据发送单元205。
视频传送设备20的分段数据存储单元201存储由其自身设备进行流传送的视频的分段数据。分段数据存储单元201存储用于指示具有多个比特率的视频(如同上文参照图2描述的那样)的分段数据。由于每条分段数据具有较小的通信量，因此将每条分段数据编码(压缩)为例如用于指示参考帧和与该帧的差异的数据。
比特率信息存储单元202存储比特率信息(例如，MPEG-DASH中的媒体表示描述(MPD))，其用于指示存储在分段数据存储单元201中且由其自身设备流传送的视频的多个比特率。在图2的示例中，比特率信息存储单元202存储了用于指示由分段数据组A1、A2和A3表示的视频的比特率。例如，当视频传送设备20的操作者存储了视频的分段数据时，由该操作者创建并存储比特率信息。
在请求视频的流传送的情况下，智能电话10的比特率信息获取单元101获取用于指示视频的多个比特率的比特率信息。例如，在显示在智能电话10上的网页中附有链接，该链接指向由视频传送设备20进行流传送的视频，当用户执行选中该链接的操作时，比特率信息获取单元101向视频传送设备20发送用于请求视频的比特率信息的请求数据。请求数据包括指定视频的信息(例如，文件(例如，MPEG-DASH中的MPD)的资源定位符(URL))。
在接收到从智能电话10发送的请求数据时，视频传送设备20的比特率信息发送单元203从比特率信息存储单元202读取由请求数据指定的视频的比特率信息，即，存储在其自身设备中的视频的比特率信息，并且将读取到的视频的比特率信息发送至请求源(在本示例性实施例中，智能手机10)。比特率信息获取单元101获取如上所述的发送出的比特率信息。比特率信息获取单元101向比特率确定单元105提供获取到的比特率信息。
比特率确定单元105将通过比特率信息获取单元101所获取的比特率信息指示的多个比特率中的任意一个确定为待再现的视频的比特率。稍后将详细描述比特率决定方法。比特率确定单元105以确定的时间间隔重复地确定比特率。例如，使用比一条分段数据所指示的视频的再现时间更短的时间间隔(例如，当再现时间为2秒之类时，1秒的间隔)作为所述时间间隔。每次确定比特率时，比特率确定单元105向传送请求单元106通知所确定的比特率。
传送请求单元106请求对视频进行流传送的设备(在本示例性实施例中，视频传送设备20)以比特率确定单元105所确定的比特率传送视频。当比特率确定单元105所确定的比特率改变时，传送请求单元106所请求的流传送的视频的比特率也会改变。
当外部设备请求视频的流传送时，视频传送设备20的分段数据读取单元204读取所请求的视频的分段数据。在接收到从智能电话10发送的指定数据时，分段数据读取单元204从视频起点开始按顺序从指定数据所指定的比特率的分段数据组中读取设定条数的分段数据。
此后，分段数据读取单元204以一次读取的分段数据所指示的一部分视频的再现时间为间隔，或者以比该部分的再现时间更短的时间为间隔，在已读取的分段数据之后重复地执行读取设定条数的分段数据的处理。当中途改变所指定的比特率时，分段数据读取单元204在新比特率的分段数据之中的再现位置自其延续的一部分中读取设定条数的分段数据。每次读取到分段数据时，分段数据读取单元204向分段数据发送单元205提供读取到的分段数据。
分段数据发送单元205将所提供的分段数据发送至指定数据发送源，即，请求了视频的流传送的请求源(在本示例性实施例中，智能电话10)。智能电话10的分段数据接收单元107接收从视频传送设备20发送的分段数据。分段数据接收单元107向临时存储单元108提供接收到的分段数据。
临时存储单元108临时地存储由分段数据接收单元107接收到的分段数据，直到再现了分段数据所指示的那部分视频。当分段数据存储在临时存储单元108中时，视频再现单元109顺序地读取所存储的分段数据，并且顺序地再现由读取到的分段数据指示的视频。由于分段数据如上所述是编码的，因此视频再现单元109对分段数据进行解码和再现。视频再现单元109使得再现的视频显示在显示区上，但是根据其自身设备的方向使得视频显示在不同的显示区上。
图6A至图6C示出了在显示区上显示的示例性视频。在图6A至图6C中，视频显示在图2所示的触摸屏16的显示面161上。显示面161是被长边162和短边163包围的矩形表面。图6A示出了当智能电话10设置为显示面161的长边162沿竖直方向时的显示区B1，图6B示出了当智能电话10设置为显示面161的长边162沿水平方向时的显示区B2。在其中出现一个人的视频C1显示在显示区B1和B2两者上。如上所述，视频再现单元109根据其自身装置的倾斜度而使得视频显示在显示区B1或B2上。
智能电话10的显示区尺寸指定单元102指定了流传送的视频的显示区的尺寸。显示区尺寸指定单元102是根据本发明的示例性实施例的“第一指定单元”的示例。显示区尺寸指定单元102向视频再现单元109发送关于在其中显示视频的显示区的类型(显示区B1和显示区B2之一)的查询。在接收到查询时，视频再现单元109向显示区尺寸指定单元102通知在其中显示视频的显示区的类型。显示区尺寸指定单元102指定与被通知的显示区的类型相对应的尺寸作为显示区的尺寸。
当通知显示区B1作为显示区类型时，显示区尺寸指定单元102指定通过将图6A所示的长边的长度L1与短边的长度L2相乘而获得的值，即，显示区的面积，来作为显示区的尺寸。此外，当通知显示区B2作为显示区类型时，显示区尺寸指定单元102指定通过将图6B所示的长边的长度L3与短边的长度L4相乘而获得的值来作为显示区的尺寸。
显示区B1的短边接触显示面161的长边162，显示区B2的短边接触显示面161的短边163，但是显示区的尺寸和布置不限于本示例。视频再现单元109可使得视频C1显示在显示区B3中，在该显示区中，长边和短边的任一个都不与显示面161的长边162和短边163接触，例如，如图6C所示。这种情况下，显示区尺寸指定单元102指定通过将显示区B3的长边的长度L5与短边的长度L6相乘而获得的值来作为显示区的尺寸。显示区尺寸指定单元102向比特率确定单元105提供用于指示如上所述所指定的显示区尺寸的尺寸信息(在本示例性实施例中，用于指示显示区的面积的信息)。
智能电话10的缓存量指定单元103指定流再现中的缓存量，即，针对流再现的视频中的接下来将要再现的一段时间的视频而临时存储的分段数据的数据量。缓存量指定单元103是根据本发明的示例性实施例的“第二指定单元”的示例。缓存量指定单元103参照临时存储在临时存储单元108中的分段数据，并且指定在其中再现被参照的分段数据的再现时间来作为缓存量。例如，当缓存的分段数据指示2秒的视频，并且已经再现了0.5秒时，缓存量指定单元103指定缓存了1.5秒的视频，并且向比特率确定单元105提供用于指示1.5秒的信息作为缓存量信息。
智能电话10的带宽指定单元104指定用于接收流传送的视频的分段数据的带宽。带宽指定单元104是根据本发明的示例性实施例的“第三指定单元”的示例。带宽指定单元104监视分段数据接收单元107，并且指定分段数据接收单元107在每单位时间接收到的分段数据的数据大小作为带宽。例如，当一秒接收10兆比特的分段数据时，分段数据接收单元107指定10Mbps作为带宽。分段数据接收单元107向比特率确定单元105提供用于指示所指定带宽的带宽信息。
在本示例性实施例中，显示区尺寸指定单元102、缓存量指定单元103和带宽指定单元104按照与比特率确定单元105重复确定比特率的时间间隔相同的时间间隔执行所述指定处理。
比特率确定单元105基于由显示区尺寸指定单元102指定的显示区的尺寸、由缓存量指定单元103指定的缓存量以及由带宽指定单元104指定的带宽来确定再现的视频的比特率。例如，比特率确定单元105使用在其中显示区的尺寸与比特率范围相关联的比特率表。
图7示出了示例性比特率表。在图7的示例中，假设针对流传送限定了五个比特率(例如4.0Mbps、2.0Mbps、1.0Mbps、0.5Mbps和0.3Mbps)。这种情况下，“2.0、1.0、0.5、0.3”(单位均为Mbps)的比特率范围与“小于阈值Th1”的显示区尺寸相关联。“4.0、2.0、1.0、0.5”的比特率范围与“大于或等于阈值Th1且小于阈值Th2”的显示区尺寸相关联，“4.0、2.0、1.0”的比特率范围与“大于或等于阈值Th2”的显示区尺寸相关联。
比特率确定单元105从该比特率表读取与显示区尺寸指定单元102所指定的显示区的尺寸相关联的比特率范围。比特率确定单元105将读取到的比特率范围缩减到不超过带宽指定单元104所指定的带宽的范围。例如，当指定了小于阈值Th1的显示区的尺寸时，比特率确定单元105读取“2.0、1.0、0.5、0.3”的比特率范围，并且当指定了1.2Mbps的带宽时，由于2.0Mbps的比特率超过了所指定的带宽，因此比特率确定单元105将比特率范围缩减到“1.0、0.5、0.3”。
当对临时存储的分段数据(其具有缓存量指定单元103所指定的缓存量)所指示的视频进行再现的再现时间(下文中，被称作“缓存再现时间”)等于或大于设定的阈值Th3时，比特率确定单元105在缩减后的范围内选择按照降序达到设定数量的比特率中的任意一个(即，在缩减后的范围内，从设定数量个最高比特率之中选择任意一个比特率)，并且确定选中的比特率作为再现的视频的比特率。在本示例性实施例中，比特率确定单元105以1作为所述设定数量，即，选择最高的那个比特率，并且确定该最高的比特率作为再现的视频的比特率。当缩减后的范围为如上述示例中的“1.0、0.5、0.3”时，比特率确定单元105确定“1.0”(其为这些比特率之中最高的那个比特率)作为再现的视频的比特率。
此外，当缓存再现时间小于设定的阈值Th3时，比特率确定单元105在缩减后的范围内从按照升序的设定数量的比特率中选择任意一个(即，在缩减后的范围内，从设定数量个最低比特率之中选择任意一个比特率)，并且确定选中的比特率作为再现的视频的比特率。在本示例性实施例中，设定使得除最高的那个比特率外的所有比特率包括在内的数量。因此，比特率确定单元105在缩减后的范围中选择除最高的那个比特率之外的各比特率中的任意一个，并且确定选中的比特率作为再现的视频的比特率。
当缩减后的范围为如上述示例中的“1.0、0.5、0.3”时，比特率确定单元105选择除“1.0”(其为这些比特率之中最高的那个比特率)之外的“0.5、0.3”中的任意一个作为再现的视频的比特率。例如，当选择了两个或多个比特率中的任意一个时，比特率确定单元105可在着重于视频的分辨率的情况下始终选择其中最高的那个比特率，或者可在着重于视频的连续性的情况下始终选择其中最低的那个比特率。
然而，紧随接收到视频再现操作之后，由于尚未接收到分段数据、带宽指定单元104尚未指定带宽、并且尚未缓存分段数据，因此缓存量指定单元103也无法指定缓存量。就这一点而言，当从视频的起点执行再现时，比特率确定单元105在不使用缓存量指定单元103所指定的缓存量和带宽指定单元104所指定的带宽的情况下确定比特率，直到经过了初始响应时段(其设置为在其中使用再现初始阶段的决定方法的时段)。换言之，比特率确定单元105仅仅基于显示区尺寸指定单元102所指定的显示区的尺寸确定比特率，直到经过了初始响应时段。
例如，将直到初始指定了缓存量和带宽的时段设置为初始响应时段。此外，可使用预期完成对缓存量和带宽的指定的时段(其基于指定所需时间的记录而设定)作为初始响应时段。在初始响应时段中，例如，比特率确定单元105在图7所示的比特率表中的与已指定的显示区的尺寸相关联的比特率范围中选择任意一个比特率，并且确定选中的比特率作为待再现的视频的比特率。
比特率确定单元105可在着重于视频分辨率的情况下从所述范围中选择最高的那个比特率，或者可在着重于视频连续性的情况下从所述范围中选择最低的那个比特率。本发明不限于所述示例，并且例如，当预先设置了用户需要的帧率时，比特率确定单元105可选择通过将已设置的帧率与已指定的显示区的尺寸和系数相乘而获得的值的比特率、或者与该值最接近的值的比特率，并且确定选中的比特率作为待再现的视频的比特率。
视频传送系统1中包括的各个设备基于上述配置对视频进行流传送处理。
图8示出了流传送过程中的各个设备的示例性操作过程。在图8的示例中，当用户执行使得智能电话10再现流传送的视频的操作(例如，选择视频的链接的操作)时，操作过程开始。
首先，智能电话10接收视频再现操作(步骤S11)。然后，智能电话10(比特率信息获取单元101)请求视频传送设备20发送接收到针对其的再现操作的视频的比特率信息(步骤S12)。视频传送设备20(比特率信息发送单元203)读取被请求的所述视频的比特率信息，并且将读取到的所述视频的比特率信息发送至智能电话10(步骤S13)。智能电话10(比特率信息获取单元101)获取已发送的比特率信息(步骤S14)。
然后，智能电话10(显示区尺寸指定单元102)对已接收了针对其的再现操作的视频的显示区的尺寸进行指定(步骤S15)。接着，智能电话10(比特率确定单元105)根据所指定的尺寸确定视频的比特率(步骤S16)。随后，智能电话10(传送请求单元106)请求视频传送设备20以步骤S16中确定的比特率执行视频的流传送(步骤S17)。
视频传送设备20(分段数据读取单元204)读取用于指示步骤17中所请求的比特率的视频的分段数据(步骤S21)。然后，视频传送设备20(分段数据发送单元205)向智能手机10发送在步骤S21中读取到的分段数据(步骤S22)。智能电话10(分段数据接收单元107)接收在步骤S22中发送的分段数据。智能电话10(临时存储单元108)临时地存储接收到的分段数据。
然后，智能电话10(视频再现单元109)读取并再现临时存储的分段数据，并且使得分段数据显示在显示区上(步骤S23)。接下来，智能电话10(显示区尺寸指定单元102)指定被再现的视频的显示区的尺寸(步骤S24)。随后，智能电话10(缓存量指定单元103)指定临时存储的分段数据的数据量，即，缓存量(步骤S25)。
然后，智能电话10(带宽指定单元104)指定接收分段数据的带宽(步骤S26)。接下来，智能电话10(比特率确定单元105)基于步骤S24中指定的显示区的尺寸、步骤S25中指定的缓存量和步骤S26中指定的带宽来确定比特率(步骤S27)。智能电话10(传送请求单元106)请求视频传送设备20传送步骤S27中确定的比特率的视频(步骤S28)。
视频传送设备20(分段数据读取单元204)返回至步骤S21，并且读取用于指示步骤S28中所请求的比特率的视频的分段数据。此后，重复步骤S21至S28的操作，直到用户结束再现操作，或者视频已再现到末尾从而使得视频的再现结束。
在视频再现中，除非比特率变化，否则视频的分辨率随着显示区缩减而增加。换言之，当显示区较小时，虽然比特率较低，但是与显示区较大时相比，视频的分辨率的降低得到抑制。在本示例性实施例中，由于确定了与显示区的指定尺寸相对应的比特率，因此，与不考虑显示区尺寸的情况相比，在显示区较小时显示分辨率高于必要分辨率的视频并且无线通信带宽被压缩的现象得到抑制。
在本示例性实施例中，也会基于已指定的缓存量确定比特率。例如，当缓存量相对较大时(当缓存再现时间等于或大于阈值Th3时)，选择高比特率，并且当缓存量相对较小时(当缓存再现时间小于阈值Th3时)，选择低比特率。
当缓存量相对较大时，下载分段数据所花费的时间比缓存量相对较小时更长，但是视频再现更不可能被中断，因此当如上所述选择高比特率时，改善了视频分辨率，同时将视频连续性保持在预定水平。至少，与不考虑缓存量(临时存储的分段数据的数据量)时相比，视频的再现质量改善为更高。在本文中，再现质量是指包括视频分辨率等级和再现连续性(在其中再现不中断)的综合质量。
另一方面，当缓存量相对较小时，如果下载分段数据所花费的时间较长，则与缓存量相对较大时相比，视频的再现更有可能中断，因此当如上所述选择了低比特率时，需要花费时间接收新的分段数据，但是由临时存储的数据指示的视频的再现不太可能中断。换言之，与使用不同于本实施例的方法选择比特率的情况相比，更有可能发生这样的情况：对临时存储的分段数据所指示的视频的再现在对新分段数据的接收结束之前结束，从而使得视频中断。
此外，在本示例性实施例中，也会基于已指定的带宽确定比特率。当带宽较高且视频不太可能被中断时，选择高比特率以使得视频分辨率增加，并且通过改善视频分辨率而使视频再现质量得到改善，而当带宽较低时，选择低比特率以使得视频不太可能中断，并且通过改善视频连续性而使视频再现质量得到改善。
在本示例性实施例中，如上所述，基于显示区尺寸和缓存量以及带宽来确定比特率，从而将再现质量改善为高于例如在仅考虑带宽而确定比特率的情况下的再现质量。此外，在本示例性实施例中，在初始响应时段，在不使用缓存量和带宽的情况下确定比特率。因此，即使在其中缓存量和带宽尚未指定的时段中也确定了比特率，从而相比于在初始响应时段中不考虑显示区尺寸而确定比特率的情况，视频的再现质量改善为更高。
[2]修改例
上述示例性实施例是本发明的示例，并且可进行以下修改。如有需要，示例性实施例和修改例可以彼此组合实施。
[2-1]比特率决定方法
由比特率确定单元105进行的比特率决定方法不限于上述示例。例如，比特率确定单元105在处于类似于所述示例的缩减后的比特率范围内的各比特率之中，将致使临时存储在临时存储单元108中的分段数据的数据量增加的比特率确定为待再现的视频的比特率。
例如，在以0.5Mbps的比特率执行流传送的状态中，假设使用图7所示的比特率表，基于显示区尺寸和带宽将比特率范围缩减至“1.0、0.5、0.3(Mbps)”。由于在这些比特率中选中0.3Mbps时数据量减小，在选中0.5Mbps时数据量不改变，而在选中1.0Mbps时数据率增加，因此比特率确定单元105选择1.0Mbps并且确定1.0Mbps作为待再现的视频的比特率。
例如，当存在多个致使数据量增加的比特率时，比特率确定单元105可在着重于视频分辨率的情况下选择最高的那个比特率，并确定这个最高的比特率作为待再现的视频的比特率，或者可在着重于视频连续性的情况下选择最低的那个比特率，并确定这个最低的比特率作为待再现的视频的比特率。采用这种决定方法，由于比特率的变化而导致临时存储在临时存储单元108中的分段数据的数据量增加，因此与选择了不会致使数据量增加的比特率的情况相比，视频的再现更不可能中断。
比特率确定单元105可将致使临时存储在临时存储单元108中的分段数据的再现时间增加的各个比特率中的任意一个确定为待再现的视频的比特率。在比特率的提高导致帧率提高和分辨率增加(如示例所示)的情况下，如果帧数增加，则数据量一般也会增加，但是，例如，也会存在使用这样的比特率的情况：该比特率通过降低视频的分辨率(而不是增加帧数)而不会使得数据量增加。这种情况下，使用这种决定方法，由于确定了数据量不增加而帧数增加的比特率，因此视频的再现更不可能中断，并且通信负载有可能降低。
[2-2]再现速度
比特率确定单元105可根据视频的再现速度改变比特率决定方法。在本修改例中，假设比特率的等级对应于视频分辨率等级和视频帧率等级中的至少一个。具体地，随着比特率增加，分辨率和帧率中的任一个或两者增加。例如，虽然比特率增加，但是分辨率可在一定的比特率范围内不改变，例如，比特率增加到0.5Mbps、1.0Mbps、2.0Mbps和4.0Mbps时，分辨率可提高到640×360、854×480、854×480和1280×720。
图9示出了根据本修改例的由智能电话10a实现的功能配置。除了图5所示的各单元之外，智能电话10a还包括再现速度改变操作接收单元110。再现速度改变操作接收单元110接收对正在流再现的视频的再现速度进行改变的操作。改变再现速度的操作的示例包括快进操作、慢再现操作和倒回操作。在接收到再现速度改变操作时，再现速度改变操作接收单元110向比特率确定单元105通知接收到的操作的内容。
比特率确定单元105基于由再现速度改变操作接收单元110报告的操作内容来确定比特率。例如，当视频以特定速度再现(快进再现)时，比特率确定单元105确定在其中分辨率或帧率低于正常再现时的分辨率或帧率的比特率。例如，当根据显示区尺寸和带宽将比特率范围缩减至4.0Mbps、2.0Mbps和1.0Mbps这三个比特率，并且缓存量等于或大于阈值Th3时，假设比特率确定单元105在正常再现中选择最高的那个比特率(4.0Mbps)，并且将该最高比特率(4.0Mbps)确定为待再现的视频的比特率。
这种情况下，当从再现速度改变操作接收单元110接收到指示执行快进再现的通知时，比特率确定单元105选择在其中分辨率或帧率低于正常再现时的分辨率或帧率的比特率的次高比特率(2.0Mbps)或第三高的比特率(1.0Mbps)来作为待再现的视频的比特率。由于当用户寻找其想要观看的场景时通常会执行快进再现，因此，这种情况下，希望能够粗略获悉再现的场景，因而通常无需高分辨率和高帧率。
使用这种决定方法，在快进再现时，分辨率和帧率低于正常再现时的分辨率和帧率，但是用户通常不会由于上述原因感到不舒服。另一方面，分段数据的通信负载降至更小，与执行正常再现并且不改变比特率决定方法时相比，更易于确保其他流传送的频带。此外，与执行正常再现并且不改变比特率决定方法时相比，每单位时间中接收分段数据的所需时间更短，并且当在快进再现结束之后执行正常再现时，临时存储的分段数据的再现时间更长，从而在快进再现结束之后，视频的再现不太可能中断。因此，与执行正常再现并且不改变比特率决定方法时相比，再现质量改善得更高。
比特率确定单元105可基于快进再现的倍率来确定比特率。例如，比特率确定单元105确定比特率，以使得选择随倍率增加而减小的比特率。随着倍率增加，发送的分段数据的数据量增加，从而使得到完成接收为止所需的时间增加，并且再现有可能中断。就这一点而言，由于基于快进再现的倍率确定比特率，因此快进再现更不可能中断，并且与不考虑倍率时相比，视频的再现质量改善得更高。
此外，当视频以较慢的速度再现(慢再现)时，比特率确定单元105确定在其中分辨率或帧率高于正常再现时的分辨率或帧率的比特率。例如，当根据显示区尺寸和带宽将比特率范围缩减至4.0Mbps、2.0Mbps和1.0Mbps这三个比特率，并且缓存量等于或大于阈值Th3时，假设比特率确定单元105在正常再现中选择最低的那个比特率(1.0Mbps)，并且将该最低比特率(1.0Mbps)确定为待再现的视频的比特率。
这种情况下，当从再现速度改变操作接收单元110接收到指示执行慢再现的通知时，比特率确定单元105选择在其中分辨率或帧率高于正常再现时的分辨率或帧率的比特率的次高比特率(2.0Mbps)或最高比特率(4.0Mbps)来作为待再现的视频的比特率。由于用户在希望更仔细地观看场景时执行慢再现，因此希望分辨率和帧率较高。使用这种决定方法，在慢再现时，对分辨率或帧率高于正常再现时分辨率或帧率的视频进行再现。因此，与执行正常再现并且不改变比特率决定方法时相比，再现质量改善得更高。
比特率确定单元105可基于慢再现的倍率来确定比特率。例如，比特率确定单元105确定比特率，以使得选择随倍率减小(即，速度下降)而增加的比特率。在慢再现的情况下，随着倍率减小，直到再现下一帧的时段变长，因此，虽然比特率增加，但是视频的再现(慢再现)不太可能中断。就这一点而言，由于基于慢再现的倍率确定比特率，因此与不考虑倍率时相比，视频的分辨率或帧率以及视频的再现质量改善得更高。
[2-3]静态图像的获取
可提供获取静态图像的机制，所述静态图像用于指示再现的视频的特定场景。
图10示出了根据本修改例的由各个设备实现的功能配置。在图10的示例中，示出了除图5所示的各个单元之外还包括静态图像请求单元111和静态图像显示单元112的智能电话10b。此外，示出了除图5所示的各个单元之外还包括静态图像产生单元206和静态图像发送单元207的视频传送设备20b。
当用户执行用于获取再现的视频的特定场景的静态图像的操作时，智能电话10b的静态图像请求单元111请求视频传送设备20b发送该场景的静态图像。更详细地说，当在以第一比特率执行视频再现的同时执行获取视频的特定场景的静态图像的操作时，静态图像请求单元111请求高于第一比特率的第二比特率的视频中该场景的静态图像。
例如，当第一比特率(再现期间的视频的比特率)为1.0Mbps时，静态图像请求单元111请求使用比第一比特率高一个等级的比特率作为第二比特率的静态图像。第二比特率不限于本示例，并且可为流传送的视频的最高比特率。
静态图像请求单元111通过向视频传送设备20b发送请求数据来进行请求，所述请求数据用于指示请求了其中的静态图像的视频、该静态图像的场景以及第二比特率。例如，将视频的URL用作指定该视频的信息，并且例如，将场景的再现时间用作指定静态图像的场景的信息。
在接收到所发送的请求数据时，视频传送设备20b的静态图像产生单元206参照所述请求数据所指示的比特率的视频的分段数据，来产生所述请求数据所指示的场景的静态图像。静态图像产生单元206对包括有目标场景的分段数据进行解码，并且产生该场景的静态图像。例如，静态图像产生单元206以预定的文件格式(联合图像专家组(JPEG)、便携式网络图像(PNG)等)产生静态图像。
当如同上文描述的那样产生了静态图像请求单元111所请求的静态图像时，静态图像产生单元206向静态图像发送单元207提供所产生的静态图像。静态图像发送单元207向用作请求源设备的智能电话10b发送所提供的静态图像，即，静态图像请求单元111所请求的静态图像。智能电话10b的静态图像显示单元112使得从视频传送设备20b发送的静态图像显示在其自身设备的显示单元(触摸屏16的显示器)上。
随着比特率增加，分辨率一般也会增加。为此，在本修改例中，请求第二比特率的视频的静态图像，从而与请求第一比特率的视频的静态图像时相比，要显示的静态图像的分辨率更易于增加。另一方面，静态图像的数据大小小于流传送的视频，因此，即使在分辨率增加时，通信负载也会较小，并且即使获取高分辨率的静态图像，对通信负载的影响也会抑制到较小。
在上述示例中，静态图像发送单元207发送从分段数据产生的静态图像，但是本发明不限于此，例如，每个场景的静态图像的数据可预先存储在其自身设备的存储单元中，并且可从存储单元读取并发送所请求的场景的静态数据。待发送的静态图像的格式的数量不限于一种，并且可使用两种或更多种格式(例如，JPEG和PNG两者，等等)，并且用户可选择这些格式中的任意一种。此外，当发送两个或更多个静态图像时，静态图像发送单元207可同时或不同时(不同的时序)发送静态图像。
[2-4]静态图像的文件格式
在上述示例中，预先设定了静态图像的文件格式，但是本发明不限于该示例，静态图像的文件格式可为可变的。例如，静态图像请求单元111请求与带宽指定单元104所指定的带宽相对应的文件格式的静态图像。对于该请求，静态图像请求单元111使用诸如在其中带宽与文件格式相关联的文件格式表。
图11示出了示例性文件格式表。在图11的示例中，“JPEG”与“小于阈值Th11”的带宽相关联，“PNG”与“等于或大于阈值Th11”的带宽相关联。当指定了带宽时，带宽指定单元104向静态图像请求单元111提供用于指示所指定带宽的带宽信息。静态图像请求单元111请求视频传送设备20b发送在文件格式表中与提供的带宽信息所指示的带宽相关联的文件格式的静态图像。
在本修改例中，在带宽较高(等于或大于阈值Th11)且易于执行数据量大的数据的通信的情况下，请求诸如PNG的无损压缩格式的文件格式的静态图像，因此通信量较大，但是即使在放大所显示的静态图像时也能确保良好的图像质量。另一方面，在带宽较低(小于阈值Th11)且不易于执行数据量大的数据的通信的情况下，请求诸如JPEG的有损压缩格式的文件格式的静态图像，因此在放大所显示的静态图像时图像质量较差，但是通信量较小，并且到显示所述静态图像为止花费的时间减少。如上所述，在本修改例中，显示适于所述带宽的文件格式的静态图像。
例如，除了带宽之外，还可根据静态图像的用途设定文件格式。例如，当用途为使得普通用户能够观看电影、电视等的视频时，JPEG是合意的，但是当用途为检查监控摄像机的视频时，为了识别视频中出现的对象，视频可能被放大，因此使用在其中能够以无损压缩方案表示精细图像的PNG。这种情况下，例如，通过用户的操作等在智能电话10b中设定视频的用途，并且静态图像请求单元111请求视频传送设备20b发送与所设定的视频的用途相对应的文件格式的静态图像。因此，显示适于视频的用途的文件格式的静态图像。
此外，用户可选择充当静态图像的基础的比特率和文件格式。这种情况下，静态图像请求单元111显示在其中选择比特率和文件格式的选择屏幕，并且请求视频传送设备20b发送通过在选择屏幕上执行的操作而选中的比特率和文件格式的静态图像。因此，显示用户期望的文件格式的静态图像。
[2-5]服务器设备
可通过服务器设备确定比特率。
图12示出了根据本修改例的视频传送系统1c的整体配置。视频传送系统1c包括通信线路2、智能电话10c、视频传送设备20和服务器设备30。
图13示出了服务器设备30的硬件配置。服务器设备30是包括CPU 31、RAM 32、ROM33、NIC 34和HDD 35的计算机。CPU 31至HDD 35是与图4所示的具有相同名称的组件相同的硬件。
图14示出了根据本修改例的由各个设备实现的功能配置。智能电话10c包括再现操作通知单元113以及图5所示的分段数据接收单元107、临时存储单元108和视频再现单元109。服务器设备30包括图5所示的比特率信息获取单元101、显示区尺寸指定单元102、缓存量指定单元103、带宽指定单元104、比特率确定单元105和传送请求单元106。
当在其自身设备上执行再现流传送的视频的操作时，智能手机10c的再现操作通知单元113向服务器设备30发出用于指示已执行操作的通知。服务器设备30的比特率信息获取单元101、显示区尺寸指定单元102、缓存量指定单元103和带宽指定单元104接收该通知。当接收到该通知时，比特率信息获取单元101获取比特率信息，并且各指定单元执行与智能手机10c的相应单元的通信(显示区尺寸指定单元102执行与视频再现单元109的通信，缓存量指定单元103执行与临时存储单元108的通信，带宽指定单元104执行与分段数据接收单元107的通信)，并开始指定操作。
因此，比特率确定单元105确定比特率，传送请求单元106请求视频的传送。此时，传送请求单元106设置智能电话10c作为视频的传送目的地，并且进行请求。视频传送设备20的分段数据发送单元205向智能电话10c发送所请求的视频的分段数据。如上所述的那样由服务器设备30确定的比特率的视频被传送至智能电话10c。在本修改例中，服务器设备30按照类似于所述示例的智能电话10的方式确定比特率，从而采用该比特率以使得图像质量与仅考虑带宽来确定比特率时相比改善得更高。
[2-6]信息处理设备
诸如确定比特率的决定设备或再现视频的再现设备之类的信息处理设备不限于智能电话或服务器设备。例如，信息处理设备可为平板装置、笔记本PC或台式PC。智能电话用作决定设备和再现装置两者，然而，服务器设备用作决定设备而不用作再现装置并且因此请求视频传送设备向外部再现装置流传送所确定的比特率的视频。
即使就诸如台式PC的在静止状态下使用的信息处理设备而言，显示区尺寸、缓存量和带宽也会改变，因此，类似于上述示例，流传送所确定的比特率的视频，从而与仅考虑带宽来确定比特率时相比，再现质量改进得更高。
[2-7]指定信息的显示
上述指定信息或所确定的比特率可显示在对视频进行再现的再现设备上。
图15示出了根据本修改例的由智能电话10d实现的功能配置。除了图5所示的各单元之外，智能电话10d还包括流再现状态显示单元114。在本修改例中，显示区尺寸指定单元102、缓存量指定单元103和带宽指定单元104向流再现状态显示单元114提供用于指示指定结果的指定结果信息，并且向流再现状态显示单元114通知由比特率确定单元105确定的比特率。
流再现状态显示单元114使得由提供的指定结果信息指示的流再现状态和被通知的比特率显示在其自身设备的显示单元上。
图16示出了示例性的所显示的流再现状态。在图16的示例中，诸如“显示区尺寸”、“缓存量”、“带宽”和“比特率”的字符串以及指示状态的图像D1、D2、D3和D4显示在图2所示的触摸屏16的显示面161上。每个图像根据圆圈图像的位置指示状态。
图像D1指示的是显示区尺寸是大还是小(随着圆圈图像更靠近图中的“小”，显示区尺寸减小，随着圆圈图像更靠近图中的“大”，显示区尺寸增加)，图像D2指示的是缓存量是大还是小。图像D3指示的是带宽是高还是低，图像D4指示的是比特率是高还是低。例如，通过查看流再现状态，用户注意到带宽较低、比特率较低，并采取移动到无线电波状态良好的位置处的行动。如果用户明白比特率随着显示区尺寸的减小而降低，则用户采取通过增大显示区尺寸来增加比特率的行动。
图像D2可为用于接收改变缓存量的操作的操作子。例如，随着圆圈图像向左边移动，缓存量减少，而随着圆圈图像向右边移动，缓存量增加。随着缓存量的增加，缓存再现时间有可能变得等于或大于阈值Th3，因此比特率增加。如上所述，由于显示了流传送状态，因此用户可采取提高或降低比特率的行动。
[2-8]比特率
在本示例性实施例中，随着比特率的增加，视频分辨率增加，帧率也会增加，但是本发明不限于本示例性实施例。例如，虽然比特率增加，但是只有帧率会增加而分辨率不会变化，或者只有分辨率增加而帧率不会变化。
[2-9]比特率确定单元
在本示例性实施例中，比特率确定单元105将从预定的多个比特率中选择的比特率确定为待再现的视频的比特率，但是本发明不限于本示例性实施例。例如，当指定了设定范围内的比特率，并且视频传送设备具有执行将存储的参考比特率的视频转换为指定比特率的视频的处理的功能时，比特率确定单元105可在所述设定范围内确定比特率。
此时，例如，比特率确定单元105可将所指定的显示区尺寸的值、缓存量的值或者通过将带宽的值代入设定的公式而获得的值确定为比特率。因此，与预先确定多个比特率时相比，执行更多级别的比特率的视频的流传送。
[2-10]发明的类别
除了诸如智能电话或服务器设备的信息处理处理设备之外，本发明还可应用为视频传送设备或包括视频传送设备的视频传送系统。本发明可应用为执行各个设备所实现的处理的信息处理方法，也可应用为使得计算机控制各个设备操作的程序。所述程序可以存储该程序的诸如光盘的记录介质的形式提供，或者可以通过诸如互联网的通信线路将程序下载至计算机且安装程序以供使用的形式提供。
已经出于说明和描述的目的提供了本发明的各示例性实施例的以上描述。其并非意在穷举性的或将本发明限于所公开的精确形式。许多修改和变化对于本领域从业人员而言将是显而易见的。为了更好地解释本发明的原理及其实际应用而选择并描述了这些实施例，从而能够使得本领域其他技术人员根据不同的实施例和适于预期特定用途的各种修改来理解本发明。本发明的范围旨在通过所附权利要求及其等价形式来限定。

Claims (12)

1.一种信息处理设备，包括：
第一指定单元，其指定流传输的视频的显示区的尺寸，所述视频具有在再现期间可改变的比特率；
第二指定单元，其指定针对接下来将要再现的一段时间的视频而临时存储的数据的数据量；
第三指定单元，其指定用于接收所述数据的带宽；以及
确定单元，其基于所指定的所述尺寸、所述数据量和所述带宽来确定再现的视频的比特率。
2.根据权利要求1所述的信息处理设备，
其中，限定了流传送中的多个比特率，并且
其中，当再现由具有所指定的数据量的临时存储的数据指示的视频的再现时间等于或大于阈值时，所述确定单元在对应于所指定的显示区尺寸且不超过所指定的带宽的比特率范围内，选择按照降序达到设定数量的比特率中的任意一个，并且确定选中的比特率作为再现的视频的比特率。
3.根据权利要求1或2所述的信息处理设备，
其中，限定了流传送中的多个比特率，并且
其中，当再现由具有所指定的数据量的临时存储的数据指示的视频的再现时间小于阈值时，所述确定单元在对应于所指定的显示区尺寸且不超过所指定的带宽的比特率范围内，选择按照升序达到设定数量的比特率中的任意一个，并且确定选中的比特率作为再现的视频的比特率。
4.根据权利要求2或3所述的信息处理设备，
其中，所述确定单元将处于所述比特率范围内的致使临时存储的数据的数据量增加的比特率确定为再现的视频的比特率。
5.根据权利要求1至4中任一项所述的信息处理设备，
其中，所述比特率的等级对应于视频的分辨率的等级和视频的帧率的等级，并且
其中，当视频快速再现时，所述确定单元确定在其中分辨率或帧率低于正常再现时的分辨率或帧率的比特率。
6.根据权利要求1至5中任一项所述的信息处理设备，
其中，所述比特率的等级对应于视频的分辨率的等级和视频的帧率的等级，并且
其中，当视频慢速再现时，所述确定单元确定在其中分辨率或帧率高于正常再现时的分辨率或帧率的比特率。
7.根据权利要求1至6中任一项所述的信息处理设备，还包括：
静态图像请求单元，当正以第一比特率再现视频的同时执行请求视频的特定场景的静态图像的操作时，所述静态图像请求单元在比第一比特率高的第二比特率的视频中请求该特定场景的静态图像。
8.根据权利要求7所述的信息处理设备，
其中，所述静态图像请求单元请求与所指定的带宽相对应的文件格式的所述静态图像。
9.根据权利要求7所述的信息处理设备，
其中，所述静态图像请求单元请求与视频的用途相对应的文件格式的所述静态图像。
10.根据权利要求1至9中任一项所述的信息处理设备，
其中，当所述再现从视频的起点开始时，所述确定单元在不使用数据量和带宽的情况下确定比特率，直到已经经过了设定的时段。
11.根据权利要求1至10中任一项所述的信息处理设备，还包括：
获取单元，其获取用于指示多个比特率的比特率信息；
其中，所述确定单元将由获取到的比特率信息指示的多个比特率中的任意一个确定为再现的视频的比特率；以及
传送请求单元，其以所确定的比特率请求所述视频的流传送。
12.一种信息处理方法，包括步骤：
指定流传送的视频的显示区的尺寸，所述视频具有在再现期间可改变的比特率；
指定针对接下来将要再现的一段时间的视频而临时存储的数据的数据量；
指定用于接收所述数据的带宽；以及
基于所指定的所述尺寸、所述数据量和所述带宽来确定再现的视频的比特率。
CN201610643376.3A 2016-02-29 2016-08-08 信息处理设备和信息处理方法 Active CN107135422B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2016-036943 2016-02-29
JP2016036943A JP2017157903A (ja) 2016-02-29 2016-02-29 情報処理装置

Publications (2)

Publication Number Publication Date
CN107135422A true CN107135422A (zh) 2017-09-05
CN107135422B CN107135422B (zh) 2021-02-26

Family

ID=56684463

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610643376.3A Active CN107135422B (zh) 2016-02-29 2016-08-08 信息处理设备和信息处理方法

Country Status (5)

Country Link
US (1) US10382832B2 (zh)
EP (1) EP3211906A1 (zh)
JP (1) JP2017157903A (zh)
KR (1) KR101918017B1 (zh)
CN (1) CN107135422B (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111698536A (zh) * 2019-03-15 2020-09-22 瑞昱半导体股份有限公司 视频处理方法与系统

Families Citing this family (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20190387271A1 (en) * 2017-01-30 2019-12-19 Sony Corporation Image processing apparatus, image processing method, and program
WO2019054360A1 (ja) * 2017-09-12 2019-03-21 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ 画像表示方法、画像配信方法、画像表示装置及び画像配信装置
JP7072404B2 (ja) * 2018-03-01 2022-05-20 キヤノン株式会社 画像処理装置及びその制御方法、プログラム、記憶媒体
JP7011721B2 (ja) * 2018-08-17 2022-01-27 株式会社ソニー・インタラクティブエンタテインメント 画像生成装置、画像生成方法及びプログラム
US11856442B2 (en) * 2019-04-12 2023-12-26 Sony Group Corporation Control device, wireless communication device, and method of controlling wireless communication system
KR20210050752A (ko) * 2019-10-29 2021-05-10 삼성전자주식회사 전자장치 및 그 제어방법
CN118075517A (zh) 2019-12-11 2024-05-24 谷歌有限责任公司 用于选择流送媒体内容项的格式的方法、系统和介质
CN113141514B (zh) * 2020-01-17 2022-07-22 北京达佳互联信息技术有限公司 媒体流传输方法、系统、装置、设备及存储介质
US20230394629A1 (en) * 2020-10-26 2023-12-07 Jun Min HAN Reproduction method for image
KR102281128B1 (ko) * 2020-10-26 2021-07-26 한창엽 영상의 재생 방법
US11979767B2 (en) * 2020-11-27 2024-05-07 At&T Intellectual Property I, L.P. Automatic adjustment of throughput rate to optimize wireless device battery performance
CN114363674B (zh) * 2021-12-09 2024-02-09 北京快乐茄信息技术有限公司 视频播放方法、装置、终端及存储介质
CN114979726B (zh) * 2022-06-30 2023-09-26 重庆紫光华山智安科技有限公司 码率调整方法、装置、服务器和存储介质

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20130028576A1 (en) * 2011-07-29 2013-01-31 Kabushiki Kaisha Toshiba Reproduction control device and reproduction control method
US20130124748A1 (en) * 2008-05-30 2013-05-16 Microsoft Corporation Media streaming with enhanced seek operation
US20140040959A1 (en) * 2012-08-03 2014-02-06 Ozgur Oyman Device orientation capability exchange signaling and server adaptation of multimedia content in response to device orientation
CN104079954A (zh) * 2013-03-26 2014-10-01 索尼公司 图像处理装置、图像处理方法和计算机程序
WO2015023832A1 (en) * 2013-08-15 2015-02-19 Intel Corporation Apparatus, system and method of controlling wireless transmission of video streams
EP2924999A1 (en) * 2014-03-25 2015-09-30 Intel IP Corporation Context-aware streaming of digital content
CN105230024A (zh) * 2013-07-19 2016-01-06 华为技术有限公司 基于超文本传输协议的动态自适应流媒体中的元数据信息的指示及携带

Family Cites Families (30)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002344941A (ja) 2001-05-14 2002-11-29 Sony Corp コンテンツ品質制御システム
JP2002344913A (ja) 2001-05-16 2002-11-29 Nec Yonezawa Ltd ネットワークにおける映像データの変換処理装置及び変換処理方法並びに変換処理サービス
JP2002369052A (ja) * 2001-06-06 2002-12-20 Nikon Corp 電子画像装置
WO2002102072A1 (fr) 2001-06-06 2002-12-19 Nikon Corporation Appareil d'imagerie electronique et systeme d'imagerie electronique
JP4387072B2 (ja) * 2001-07-12 2009-12-16 三菱電機株式会社 携帯型映像記録装置
JP2004007066A (ja) * 2002-05-30 2004-01-08 Kddi Corp 画像伝送装置
JP2004088480A (ja) 2002-08-27 2004-03-18 Canon Inc 撮像装置及びそのデータ伝送制御方法
JP2006092341A (ja) 2004-09-24 2006-04-06 Victor Co Of Japan Ltd コンテンツ配信サーバ
JP2007036666A (ja) 2005-07-27 2007-02-08 Onkyo Corp コンテンツ配信システム、クライアント及びクライアントプログラム
JP4915208B2 (ja) * 2006-10-26 2012-04-11 三菱電機株式会社 ストリームデータ再生システム
JP4350742B2 (ja) 2006-12-19 2009-10-21 キヤノン株式会社 映像処理装置及び映像処理装置の制御方法
JP2008270939A (ja) 2007-04-17 2008-11-06 Victor Co Of Japan Ltd 動画像配信システム並びにサーバー装置及びクライアント装置
US8891946B2 (en) * 2009-09-09 2014-11-18 Netflix, Inc. Accelerated playback of streaming media
JP2011180810A (ja) 2010-03-01 2011-09-15 Nec Corp コンテンツ配信システム、コンテンツ配信方法、コンテンツ配信装置、コンテンツ計測装置、及びプログラム
US8922665B2 (en) * 2010-10-06 2014-12-30 Microsoft Corporation Rapidly initializing and dynamically adjusting media streams
EP2472868A1 (en) * 2010-12-29 2012-07-04 British Telecommunications Public Limited Company Video coding
JP5187404B2 (ja) * 2011-01-27 2013-04-24 ブラザー工業株式会社 符号化装置、符号化方法、および符号化プログラム
US9456387B2 (en) 2011-10-05 2016-09-27 Alcatel Lucent Method and apparatus for improving adaptive streaming video quality by optimizing resource allocation
EP2781070B1 (en) 2011-11-14 2018-06-20 Telefonaktiebolaget LM Ericsson (publ) Media streaming in mobile networks with improved efficiency
US9819717B2 (en) * 2011-12-28 2017-11-14 Intel Corporation Video adaptation for content-aware wireless streaming
KR20190097306A (ko) 2012-01-19 2019-08-20 브이아이디 스케일, 인크. 시청 조건에 대한 적응을 지원하는 비디오 전송 방법 및 시스템
US9450997B2 (en) * 2012-02-27 2016-09-20 Qualcomm Incorporated Dash client and receiver with request cancellation capabilities
JP6021385B2 (ja) * 2012-03-30 2016-11-09 エヌ・ティ・ティ・コミュニケーションズ株式会社 ストリーミングメディア再生装置、ストリーミングメディア再生方法、及びプログラム
KR20160063405A (ko) * 2012-04-24 2016-06-03 브이아이디 스케일, 인크. Mpeg/3gpp-dash에서의 원활한 스트림 스위칭을 위한 방법 및 장치
JP2014183488A (ja) * 2013-03-19 2014-09-29 Enwa Co Ltd ストリーミング受信装置
KR102161230B1 (ko) * 2013-05-28 2020-09-29 삼성전자주식회사 멀티미디어 콘텐츠 검색을 위한 사용자 인터페이스 방법 및 장치
US9544352B2 (en) 2013-06-11 2017-01-10 Bitmovin Gmbh Adaptation logic for varying a bitrate
JP2015194832A (ja) * 2014-03-31 2015-11-05 パイオニア株式会社 コンテンツ出力装置、コンテンツ配信サーバ、コンテンツ出力方法およびコンテンツ出力プログラム
GB2524958A (en) * 2014-04-03 2015-10-14 Orbital Multi Media Holdings Corp Data flow control method
US10200725B2 (en) * 2015-06-15 2019-02-05 Intel Corporation Adaptive data streaming based on virtual screen size

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20130124748A1 (en) * 2008-05-30 2013-05-16 Microsoft Corporation Media streaming with enhanced seek operation
US20130028576A1 (en) * 2011-07-29 2013-01-31 Kabushiki Kaisha Toshiba Reproduction control device and reproduction control method
US20140040959A1 (en) * 2012-08-03 2014-02-06 Ozgur Oyman Device orientation capability exchange signaling and server adaptation of multimedia content in response to device orientation
CN104079954A (zh) * 2013-03-26 2014-10-01 索尼公司 图像处理装置、图像处理方法和计算机程序
CN105230024A (zh) * 2013-07-19 2016-01-06 华为技术有限公司 基于超文本传输协议的动态自适应流媒体中的元数据信息的指示及携带
WO2015023832A1 (en) * 2013-08-15 2015-02-19 Intel Corporation Apparatus, system and method of controlling wireless transmission of video streams
EP2924999A1 (en) * 2014-03-25 2015-09-30 Intel IP Corporation Context-aware streaming of digital content

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111698536A (zh) * 2019-03-15 2020-09-22 瑞昱半导体股份有限公司 视频处理方法与系统

Also Published As

Publication number Publication date
JP2017157903A (ja) 2017-09-07
US10382832B2 (en) 2019-08-13
US20170251274A1 (en) 2017-08-31
CN107135422B (zh) 2021-02-26
KR101918017B1 (ko) 2018-11-13
EP3211906A1 (en) 2017-08-30
KR20170101755A (ko) 2017-09-06

Similar Documents

Publication Publication Date Title
CN107135422A (zh) 信息处理设备和信息处理方法
US7280711B2 (en) Information processing apparatus, information processing method, information processing system and program thereof
US20090234919A1 (en) Method of Transmitting Data in a Communication System
US20110310965A1 (en) Communication device, communication method, and communication program product
US20090262136A1 (en) Methods, Systems, and Products for Transforming and Rendering Media Data
WO2008108379A1 (ja) メディア配信システム、配信サーバ装置及びそれらに用いるメディア配信方法並びにそのプログラム
EP2272237B1 (en) Method of transmitting data in a communication system
JP6021385B2 (ja) ストリーミングメディア再生装置、ストリーミングメディア再生方法、及びプログラム
JP2020053760A (ja) 情報処理システム、端末装置およびプログラム
CN104580783B (zh) 控制图像传输的信息处理设备及其控制方法
JP2007274066A (ja) コンテンツ配信システム
KR102137133B1 (ko) 정보 처리 장치
JP5784538B2 (ja) ストリーミングメディア再生装置、メディアビットレート変更判定方法、及びプログラム
JP6099715B2 (ja) ストリーミングメディア再生装置、ストリーミングメディア再生方法、及びプログラム
CN114302145A (zh) 自适应网络环境的视频编码优化方法、装置、设备及存储介质
CN108282669A (zh) 信息处理设备和信息处理系统
CN107172503A (zh) 显示设备
JP5488694B2 (ja) リモート型携帯通信システム、サーバ装置及びリモート型携帯通信システム制御方法
KR20100028747A (ko) 고속 이동 사용자를 위한 미디어 스트리밍 시스템 및 그 방법
JP2001274858A (ja) ストリームデータ先読込装置及びストリームデータ先読込プログラムを記憶した記憶媒体
KR101139444B1 (ko) 서버시스템
JP2009044595A (ja) ディジタル・コンテンツ送信装置およびその動作制御方法
JP4893356B2 (ja) ネットワーク画像伝送表示方法
JP4902326B2 (ja) 動画送信サーバおよびその制御方法
CN114143407A (zh) 一种远程实时预览实现设备及方法、装置、可读存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
CP01 Change in the name or title of a patent holder
CP01 Change in the name or title of a patent holder

Address after: Tokyo

Patentee after: Fuji film business innovation Co.,Ltd.

Address before: Tokyo

Patentee before: Fuji Xerox Co.,Ltd.