WO2011142312A1 - リモート型携帯通信システム、サーバ装置及びリモート型携帯通信システム制御方法 - Google Patents

リモート型携帯通信システム、サーバ装置及びリモート型携帯通信システム制御方法 Download PDF

Info

Publication number
WO2011142312A1
WO2011142312A1 PCT/JP2011/060648 JP2011060648W WO2011142312A1 WO 2011142312 A1 WO2011142312 A1 WO 2011142312A1 JP 2011060648 W JP2011060648 W JP 2011060648W WO 2011142312 A1 WO2011142312 A1 WO 2011142312A1
Authority
WO
WIPO (PCT)
Prior art keywords
packet
content
mobile
server device
unit
Prior art date
Application number
PCT/JP2011/060648
Other languages
English (en)
French (fr)
Inventor
一範 小澤
Original Assignee
日本電気株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 日本電気株式会社 filed Critical 日本電気株式会社
Priority to US13/697,716 priority Critical patent/US9118953B2/en
Priority to JP2012514786A priority patent/JP5488694B2/ja
Publication of WO2011142312A1 publication Critical patent/WO2011142312A1/ja

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/414Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance
    • H04N21/41407Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance embedded in a portable device, e.g. video client on a mobile phone, PDA, laptop
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60Network streaming of media packets
    • H04L65/61Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio
    • H04L65/612Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio for unicast
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/80Responding to QoS
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/2343Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/2343Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H04N21/234309Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements by transcoding between formats or standards, e.g. from MPEG-2 to MPEG-4 or from Quicktime to Realvideo
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/258Client or end-user data management, e.g. managing client capabilities, user preferences or demographics, processing of multiple end-users preferences to derive collaborative data
    • H04N21/25808Management of client data
    • H04N21/25825Management of client data involving client display capabilities, e.g. screen resolution of a mobile phone
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/27Server based end-user applications
    • H04N21/274Storing end-user multimedia data in response to end-user request, e.g. network recorder
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/637Control signals issued by the client directed to the server or network components
    • H04N21/6375Control signals issued by the client directed to the server or network components for requesting retransmission, e.g. of data packets lost or corrupted during transmission from server
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W28/00Network traffic management; Network resource management
    • H04W28/02Traffic management, e.g. flow control or congestion control
    • H04W28/04Error control
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W28/00Network traffic management; Network resource management
    • H04W28/02Traffic management, e.g. flow control or congestion control
    • H04W28/06Optimizing the usage of the radio link, e.g. header compression, information sizing, discarding information
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W4/00Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/18Information format or content conversion, e.g. adaptation by the network of the transmitted or received information for the purpose of wireless delivery to users or terminals

Definitions

  • the present invention is based on the priority claim of Japanese patent application: Japanese Patent Application No. 2010-108669 (filed on May 10, 2010), the entire contents of which are incorporated herein by reference. Shall.
  • the present invention relates to a remote mobile communication system, a server device, and a remote mobile communication system control method, and in particular, accesses a virtual client on a server via a mobile network, as if it is a terminal itself.
  • the present invention relates to a remote mobile communication system, a thin client server device, and a remote mobile communication system control method for instructing and operating a client.
  • LTE Long Term Evolution
  • EPC Evolved Packet Core
  • Patent Document 1 discloses a thin client system that can be used from both a local environment and a remote environment with a simple configuration.
  • Patent Document 2 describes a method for optimizing a rate control method by exchanging signaling information in a mobile network.
  • Patent Document 3 discloses a color image data transfer system having an optimum display quality and drawing performance corresponding to a network load that changes every moment in a screen transfer method thin client.
  • Patent Document 4 describes a client device that enables image data downloaded from a server device to be stored with sufficient image quality and viewed offline in a thin client terminal.
  • An object of the present invention is to provide a remote mobile communication system, a server device, and a remote mobile communication system control method that solve such problems.
  • the server device provides: A storage unit for receiving content storage instruction information from a mobile terminal via a packet transfer device on a mobile network and storing the content stream or content file when receiving the content stream or content file; A virtual client unit that receives a content playback instruction information from a portable terminal, reads a content stream or a content file stored in the storage unit, decodes and reproduces the content stream, and generates a display screen; And an encoder unit that sends out, as a packet, an encoding result obtained by compressing and encoding all or part of the display screen.
  • the remote mobile communication system includes the server device according to the first aspect.
  • the remote portable communication system control method is: A server device on a mobile network receives content storage instruction information from a portable terminal via a packet transfer device on the mobile network, receives a content stream or content file, and stores the content stream or content file in its storage unit The process of accumulating in Receiving content playback instruction information from the mobile terminal, reading out the content stream or content file stored in the storage unit, decoding and playing back, and generating a display screen; And a step of sending an encoded result obtained by compressing and encoding all or part of the display screen as a packet to the packet transfer apparatus.
  • content can be used without changing the mobile terminal when the content size in the mobile network increases.
  • a remote portable communication system According to the first deployment mode, a remote portable communication system according to the first aspect is provided.
  • the frequency of the retransmission request received from the mobile terminal for the transmitted packet is measured, and at least one of the bit rate and the frame rate of compression encoding by the encoder unit is based on the measurement result
  • a server device is further provided that further includes a rate control unit that controls the server.
  • the rate control unit reduces the maximum bit rate or the maximum frame rate of compression encoding by the encoder unit when the number of retransmission requests received in a predetermined period is equal to or greater than a predetermined threshold.
  • a server device is provided.
  • a server device that, when the rate control unit receives a retransmission request from the mobile terminal, retransmits the corresponding packet.
  • a server device in which the encoder unit takes the encoded result as a packet and sends it to the packet transfer device using the UDP protocol.
  • the remote mobile communication system according to the second aspect is provided.
  • the remote mobile communication system further includes a mobile terminal that receives a packet transmitted from a server device via a packet transfer device and decodes and displays an encoding result stored in the packet. Is provided.
  • a remote mobile communication system in which the mobile network is a mobile packet network or a mobile LTE / EPC network.
  • the remote portable communication system control method according to the third aspect is provided.
  • the step of measuring the frequency of the retransmission request received from the mobile terminal for the transmitted packet and controlling at least one of the bit rate and the frame rate of the compression encoding based on the measurement result A remote mobile communication system control method is further provided.
  • the new service when an operator introduces a new service, the new service can be introduced by updating the application software of the server device installed on the network. Therefore, it is not necessary to procure or remodel a mobile terminal every time a new service is introduced.
  • the storage unit (cache memory, hard disk storage, etc.) provided in the server device on the network can be used to store content such as still images, especially moving images, content files, etc. Device). Therefore, even if the content or content file is destroyed due to a failure of the mobile terminal, or when the mobile terminal is misplaced or stolen, the content, content file, etc. are lost and cannot be accessed. .
  • the packet when the stored content is played back or browsed, the packet in the case of UDP / IP during the call connection or during the call connection against the fluctuation of the bandwidth of the mobile packet network or the LET / EPC network. It is possible to control the maximum bit rate when the number of retransmission requests is measured by the server device and the screen information is compression-encoded based on the measurement result. Therefore, it takes time to receive information on the mobile terminal side, and it is possible to avoid a decrease in QoE due to a slow screen update.
  • FIG. 1 shows a connection configuration of apparatuses in a remote portable communication system according to the present embodiment.
  • FIG. 1 shows a configuration when a 3G mobile packet network 150 is used as a mobile network and an xGSN device 190 is used as a packet transfer device.
  • the xGSN device 190 refers to a device in which an SGSN (Serving GPRS Support Node) device and a GGSN (Gateway GPRS Support Node) device are integrated.
  • SGSN Serving GPRS Support Node
  • GGSN Gateway GPRS Support Node
  • FIG. 1 shows an example of a service on a server of a mobile network so as to store still images / videos, content such as audio, content files, etc. taken by an end user with a camera of a mobile terminal on a mobile terminal.
  • the content stored in the cache memory or storage device of the virtual client on the server, and then the content stored in the cache memory or storage device of the virtual client on the server is displayed on the mobile terminal so as to reproduce and display the content stored in the mobile terminal.
  • a configuration in the case of providing a service to do is shown. It should be noted that services can be provided not only for contents but also for games, applications, and other cases based on the same configuration.
  • the mobile terminal 170 performs a base station 194, RNC (RNC) in order to perform an operation for accumulating contents with respect to a virtual client included in the thin client server apparatus 110 arranged on the mobile packet network 150.
  • RNC Radio Network Controller
  • An instruction signal to be stored is sent to the thin client server device 110 via the Radio Network Controller) device 195 and the xGSN device 190.
  • the instruction signal refers to a signal transmitted from the mobile terminal 170 when a key press operation on the mobile terminal 170, an input operation of a special character (for example, *, #, etc.) or the like is performed.
  • a special character for example, *, #, etc.
  • the instruction signal transmitted from the mobile terminal 170 arrives in the order of the base station 194, the RNC device 195, the xGSN device 190, and the thin client server device 110 provided on the mobile packet network 150. Thereby, the thin client server device 110 receives the instruction signal from the portable terminal 170.
  • a known protocol can be used as a protocol for sending the instruction signal.
  • TCP / IP and HTTP are used as its upper layer.
  • SIP Session Initiation Protocol
  • SIP Session Initiation Protocol
  • FIG. 2 is a block diagram showing the configuration of the thin client server device 110.
  • the thin client server device 110 includes a virtual client unit 211, a screen capture unit 180, an encoder unit 186, a packet construction / transmission unit 176, a cache memory (storage unit) 189, and a packet reception unit 188.
  • the virtual client unit 211 includes application software corresponding to a new service, an audio / still image / video decoder, a screen generation unit, and the like (not shown).
  • the application software can be easily changed from outside the thin client server device 110.
  • the virtual client unit 211 receives a TCP packet as an accumulation instruction signal from the mobile terminal 170 via the base station 194, the RNC device 195, and the xGSN device 190.
  • the virtual client unit 211 analyzes HTTP received on the received TCP packet, and recognizes that an operation of storing content in the thin client server device 110 is performed.
  • the virtual client unit 211 executes an application for performing content accumulation in accordance with an instruction signal from the mobile terminal, generates an application screen indicating operation details, and outputs the application screen to the screen capture unit 180. .
  • the screen capture unit 180 captures the screen, converts it into an image luminance signal and a color difference signal, and outputs them to the encoder unit 186.
  • a YUV format or the like can be used as another format.
  • the encoder unit 186 receives an image signal or a still image signal of a predetermined fps (the number of frames per second, frame per second) as a screen signal from the screen capture unit 180. Further, the encoder unit 186 compresses and encodes the image signal output from the screen capture unit 180 by a predetermined compression method so as not to exceed a predetermined maximum bit rate, and generates a compression encoded bit stream. It is generated and sent to the packet construction / transmission unit 176.
  • a predetermined fps the number of frames per second, frame per second
  • a compression encoding method based on Wavelet that is effective for compression encoding of a mixed screen of still images and moving images is used. Note that other known compression encoding methods can also be employed.
  • the packet construction / transmission unit 176 stores the compression-encoded bit stream in the payload of the packet and sends it to the xGSN device 190 using the TCP / IP protocol.
  • the compression-encoded bitstream can be temporarily stored in a file, and then the file can be transmitted in packets.
  • the mobile terminal 170 receives a packet sent from the thin client server device 110 via the xGSN device 190 or the like, and converts the compressed encoded bit stream stored in the packet payload into a thin client.
  • a screen obtained by decoding with a decoder corresponding to the encoder unit 186 in the server apparatus 110 is displayed. Further, the mobile terminal 170 starts accumulation of content streams or content files with respect to the thin client server device 110.
  • the packet receiving unit 188 receives a packet storing a content stream to be accumulated or a content file to be accumulated from the mobile terminal 170, extracts a content stream or a content file from the payload portion of the packet, Are stored in the cache memory 189.
  • the cache memory 189 When the accumulation of the content stream or the content file is completed, the cache memory 189 notifies the virtual client unit 211 of the completion.
  • the virtual client unit 211 When the virtual client unit 211 receives the completion notification, the virtual client unit 211 generates a storage end screen and outputs the screen to the screen capture unit 180.
  • the screen capture unit 180 captures the screen.
  • the encoder unit 186 encodes the captured screen and outputs the encoded result to the packet construction / transmission unit 176.
  • the packet construction / transmission unit 176 constructs a TCP / IP packet and outputs it to the xGSN device 190.
  • the mobile terminal 170 receives these packets.
  • the virtual client unit 211 When the virtual client unit 211 receives content reproduction instruction information from the mobile terminal 170 via the xGSN device 190, the virtual client unit 211 reads the stream or file of the corresponding content from the content stored in the cache memory 189 and compresses it with the mobile terminal 170.
  • the content stream or file is decoded and reproduced using a decoding method corresponding to the encoded encoding method, and a display screen is generated and output to the screen capture unit 180.
  • the screen capture unit 180 captures the screen, converts it into a luminance signal and a color difference signal of the image, and outputs them to the encoder unit 186.
  • other formats such as a YUV format can also be used.
  • the encoder unit 186 receives an image signal or a still image signal of a predetermined fps (the number of frames per second, frame per second) as a screen signal from the screen capture unit 180. Further, the encoder unit 186 compresses and encodes the image signal output from the screen capture unit 180 by a predetermined compression method so as not to exceed a predetermined maximum bit rate, and generates a compression encoded bit stream. It is generated and sent to the packet construction / transmission unit 176.
  • a predetermined fps the number of frames per second, frame per second
  • the packet construction / transmission unit 176 stores the compression-encoded bit stream in the payload portion of the packet and sends it to the xGSN device 190 using the TCP / IP protocol.
  • the compression-encoded bitstream can be temporarily stored in a file, and then the file can be transmitted as a TCP / IP packet.
  • the xGSN device 190 encapsulates the received TCP / IP packet by the GTP-U protocol and transfers it to the RNC device 195.
  • the RNC device 195 transmits to the mobile terminal 170 wirelessly via the base station 194.
  • the mobile terminal 170 receives a packet according to the TCP / IP protocol, and extracts a compression-coded stream or file stored in the payload portion of the packet.
  • the mobile terminal 170 has a decoder corresponding to the encoder unit 186 of the thin client server device 110, and the decoder decodes the compression-encoded stream, or extracts and decodes the stream stored in the file,
  • the screen obtained by decoding is displayed on the display of the portable terminal 170.
  • the contents stored from the portable terminal 170 are not limited to still images / moving pictures, but various contents such as music / audio, files, programs, and the like can be stored.
  • the xGSN device 190 may be arranged separately into an SGSN device and a GGSN device.
  • the cache memory 189 is used as the storage unit in the thin client server device 110, a storage device such as a hard disk may be used.
  • the configuration using TCP / IP as the packet protocol transmitted from the thin client server device 110 to the xGSN device 190 has been described.
  • a configuration using UDP / IP instead of TCP / IP will be described.
  • the transfer delay time in the mobile network can be shortened compared to the case of using TCP / IP.
  • measures against packet loss are required.
  • FIG. 3 is a diagram showing a connection configuration of apparatuses in the remote mobile communication system according to the present embodiment.
  • the operation of the component having the same reference numeral as that of the component in FIG. 1 is the same as the operation of the component in FIG.
  • the configuration shown in FIG. 3 is different from the configuration shown in FIG. 1 in the following points (1) to (3).
  • the thin client server device 510 sends a UDP / IP packet to the xGSN device 190.
  • a unique or general-purpose sequence number is assigned to the UDP packet.
  • the mobile terminal 570 receives the UDP / IP packet transmitted from the thin client server device 510 via the xGSN device 190, the RNC device 195, and the base station 194.
  • the portable terminal 570 checks the unique or general-purpose sequence number added to the UDP / IP packet to confirm whether there is a packet loss of the UDP packet. If the sequence numbers are continuous and there is no packet loss, the mobile terminal 570 extracts the bit stream or file stored in the payload portion of the UDP packet, decodes it, and then displays the display of the mobile terminal 570 To display. On the other hand, if the sequence number has jumped (becomes discontinuous) and packet loss is considered to have occurred, the portable terminal 570 requests the thin client server device 510 to retransmit the lost packet.
  • FIG. 4 is a block diagram showing a configuration of the thin client server device 510.
  • the operation of the component having the same reference numeral as that of the component of FIG. 2 is the same as the operation of the component of FIG.
  • the packet construction / transmission unit 576 stores the compression-encoded bit stream from the encoder unit 186 in the payload of the UDP packet, adds a unique or general-purpose sequence number, and uses the UDP / IP protocol. , XGSN device 190.
  • the packet construction / transmission unit 576 may temporarily store the compression-encoded bitstream in a file and then send the file in a packet.
  • UDP / IP can be used as an example of the packet protocol in this case.
  • the retransmission control unit 595 receives a retransmission request signal from the virtual client unit 511 via the xGSN device 190 when the mobile terminal 570 requests retransmission.
  • Retransmission control section 595 determines the sequence number from the retransmission request instruction and outputs the determined sequence number to packet construction / transmission section 576.
  • the packet construction / transmission unit 576 retransmits the UDP / IP packet having the corresponding sequence number to the xGSN device 190 in accordance with the instruction from the retransmission control unit 595.
  • the rate control unit 585 counts the number of retransmission request instructions received from the virtual client unit 511 within a predetermined time interval, and obtains a cumulative value C accumulated in the predetermined time interval. Further, the rate control unit 585 controls the maximum bit rate Emax in the encoder unit 186 by comparing the obtained accumulated value C with a predetermined threshold Th2.
  • the rate control unit 585 reduces the maximum bit rate Emax as shown in equation (2).
  • Equation (2) ⁇ 3 is a predetermined constant.
  • the rate control unit 585 returns the maximum bit rate Emax to the initial value.
  • the rate control unit 585 outputs the maximum bit rate Emax thus determined to the encoder unit 186.
  • FIG. 4 explains the case of controlling the maximum bit rate.
  • the configuration similar to that in FIG. 4 can also be applied to frame rate control.
  • the contents stored from the mobile terminal are not limited to still images / moving pictures, but various contents such as music / audio, files, and programs can be stored.
  • the xGSN device 190 may be arranged separately into an SGSN device and a GGSN device.
  • the cache memory 189 is used as the storage unit in the thin client server device 510, a storage device such as a hard disk may be used.
  • FIG. 5 is a diagram showing a connection configuration of apparatuses in the remote mobile communication system according to the present embodiment.
  • the remote mobile communication system includes a thin client server device 110, an S / P-GW device 305, an e-NodeB (enhanced-NodeB) device 306, a base station 194, and a mobile terminal 670.
  • e-NodeB enhanced-NodeB
  • the configuration shown in FIG. 5 and the configuration shown in FIG. 1 are such that the mobile terminal 670 passes through the mobile LTE / EPC network 350 and passes through the e-NodeB device 306 and the S / P-GW device 305 to a thin client server. It differs in that it is connected to the device 110. According to the configuration shown in FIG. 5, packets can be transferred at a much higher speed than the configuration based on the mobile packet network 150 shown in FIG. 1.
  • the e-NodeB device 306 realizes much faster packet transmission in the wireless section with the mobile terminal 670 using LTE technology. Also, since the S / P-GW apparatus 305 and the thin client server apparatus 110 are connected by the IP protocol, the thin client server apparatus 110 shown in FIG. 1 is also used when connecting to the S / P-GW apparatus. Can be used as is.
  • the S / P-GW apparatus 305 receives a TCP / IP or UDP / IP protocol packet from the thin client server apparatus 110 or a file transferred over these protocols, and receives a GTP-U (GPRS Tunneling Protocol-User). Plane) / TCP / IP or GTP-U / UDP / IP protocol, and then outputs the compression-encoded bit stream or file to the e-NodeB device 306.
  • GTP-U GPRS Tunneling Protocol-User
  • the e-NodeB device 306 converts the data into the PDCP / RLC protocol and sends the packet or file to the mobile terminal 670.
  • the contents stored from the mobile terminal are not limited to still images / moving pictures, but various contents such as music / audio, files, and programs can be stored.
  • the S / P-GW apparatus 305 uses an integrated configuration of the S-GW apparatus and the P-GW apparatus, but a configuration in which the S-GW apparatus and the P-GW apparatus are separated can also be used.
  • a well-known SIP Session Initiation Protocol
  • SIP Session Initiation Protocol
  • the new service when an operator introduces a new service, the new service can be introduced by updating the application software of the thin client server installed on the network. Therefore, it is not necessary to newly procure and remodel mobile terminals every time a new service is introduced.
  • the cache memory (or hard disk or the like such as a hard disk) provided in the thin client server device on the network can be used to store content such as still images, particularly moving images, content files, etc. Storage device). Therefore, even if the content or content file is destroyed due to a failure of the mobile terminal, or when the mobile terminal is misplaced or stolen, the content, content file, etc. are lost and cannot be accessed. .
  • the UDP / IP when the stored content is played back or browsed, the UDP / IP can be used during the call connection or during the call connection in response to the fluctuation of the bandwidth of the mobile packet network or the LET / EPC network.
  • the number of packet retransmission requests is measured by the thin client server device, and the maximum bit rate when the screen information is compression-encoded can be controlled based on the measurement result. Therefore, it takes time to receive information on the mobile terminal side, and it is possible to avoid a decrease in QoE due to a slow screen update.
  • the frequency of the retransmission request received from the portable terminal with respect to the transmitted packet is measured, and at least one of the bit rate and the frame rate of compression encoding by the encoder unit is based on the measurement result
  • the rate control unit reduces the maximum bit rate or the maximum frame rate of compression encoding by the encoder unit.
  • Appendix 6 A remote mobile communication system comprising the server device according to any one of appendices 1 to 5.
  • Appendix 8 The remote mobile communication system according to appendix 6 or 7, wherein the mobile network is a mobile packet network or a mobile LTE / EPC network.
  • the server device on the mobile network receives the content accumulation instruction information from the portable terminal via the packet transfer device on the mobile network, and also receives the content stream or content file, and the content stream or content file
  • the process of accumulating in the accumulator Receiving content reproduction instruction information from the portable terminal, reading the content stream or content file stored in the storage unit, decoding and reproducing the content stream, and generating a display screen;
  • a method for controlling a remote portable communication system comprising a step of sending an encoded result obtained by compressing and encoding all or part of the display screen as a packet to the packet transfer apparatus.

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Computer Security & Cryptography (AREA)
  • Computer Graphics (AREA)
  • General Engineering & Computer Science (AREA)
  • Mobile Radio Communication Systems (AREA)
  • Telephonic Communication Services (AREA)
  • Information Transfer Between Computers (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

 サーバ装置は、モバイルネットワーク上のパケット転送装置を介して携帯端末からコンテンツ蓄積の指示情報を受信するとともにコンテンツストリーム又はコンテンツファイルを受信した場合に、該コンテンツストリーム又はコンテンツファイルを蓄積する蓄積部と、携帯端末からコンテンツ再生の指示情報を受信すると、蓄積部に蓄積されたコンテンツストリーム又はコンテンツファイルを読み出して復号再生して表示画面を生成する仮想クライアント部と、表示画面の全部又は一部を圧縮エンコードしたエンコード結果をパケットとしてパケット転送装置に送出するエンコーダ部と、を有する。モバイルネットワークにおけるコンテンツのサイズが大きくなった場合において、携帯端末を変更することなくコンテンツを利用できるようにする。

Description

リモート型携帯通信システム、サーバ装置及びリモート型携帯通信システム制御方法
[関連出願についての記載]
 本発明は、日本国特許出願:特願2010-108669号(2010年5月10日出願)の優先権主張に基づくものであり、同出願の全記載内容は引用をもって本書に組み込み記載されているものとする。
 本発明は、リモート型携帯通信システム、サーバ装置及びリモート型携帯通信システム制御方法に関し、特に、モバイルネットワークを介してサーバ上の仮想クライアントにアクセスし、あたかも自身の端末であるかのように、仮想クライアントに指示するとともに動作をさせるリモート型携帯通信システム、シンクライアントサーバ装置及びリモート型携帯通信システム制御方法に関する。
 今後、LTE(Long Term Evolution)、EPC(Evolved Packet Core)技術等の導入によるモバイルネットワークの高速・大容量化の進展により、ネットワークの高速・大容量性を活用した新しいサービスが提供されることが予想される。
 簡易な構成でローカル環境及びリモート環境の双方から利用することができるシンクライアントシステムが、特許文献1に記載されている。
 また、モバイルネットワークにおいてシグナリング情報を交換してレート制御方式を最適化する方法が、特許文献2に記載されている。
 さらに、画面転送方式シンクライアントにおいて、時々刻々変化するネットワーク負荷に応じた最適な表示品質と描画性能を有するカラー画像データ転送システムが、特許文献3に記載されている。
 また、シンクライアントな端末において、サーバ装置からダウンロードされた画像データを十分な画像品質で保存し、オフラインで閲覧することを可能とするクライアント装置が、特許文献4に記載されている。
特開2007-310508号公報 特表2006-521029号公報 特開2008-234389号公報 特開2009-246758号公報
 上記の特許文献等の各開示を、本書に引用をもって繰り込むものとする。以下の分析は、本発明者によってなされたものである。
 従来のサービスの枠組みに基づいて、オペレータが新規サービスを導入しようとすると、既存の携帯端末では対応できない場合が生じる。かかる場合には、新規サービスに対応するために、新規のサービスの開始に合わせて、携帯端末を新規に購入し、又は端末を改造する必要が生じるという問題がある。
 また、静止画、特に動画等のコンテンツ、コンテンツファイル等を携帯端末に保存する場合に、今後高精細化が進みこれらのファイルサイズが大容量化すると、携帯端末のメモリ量の制約により、これらすべてを保存することはできなくなる恐れがある。
 さらに、エンドユーザが自身の携帯端末にコンテンツ、コンテンツファイル等を保存する場合には、携帯端末の故障によりこれらが破壊され、又は、携帯端末の置き忘れ、盗難等によりこれらを紛失すると、これらへのアクセスができなくなるという問題がある。
 そこで、モバイルネットワークにおけるコンテンツのサイズが大きくなった場合において、携帯端末を変更することなくコンテンツを利用できるようにすることが課題となる。本発明の目的は、かかる課題を解決するリモート型携帯通信システム、サーバ装置及びリモート型携帯通信システム制御方法を提供することにある。
 本発明の第1の視点に係るサーバ装置は、
 モバイルネットワーク上のパケット転送装置を介して携帯端末からコンテンツ蓄積の指示情報を受信するとともにコンテンツストリーム又はコンテンツファイルを受信した場合に、該コンテンツストリーム又はコンテンツファイルを蓄積する蓄積部と、
 携帯端末からコンテンツ再生の指示情報を受信すると、蓄積部に蓄積されたコンテンツストリーム又はコンテンツファイルを読み出して復号再生して表示画面を生成する仮想クライアント部と、
 表示画面の全部又は一部を圧縮エンコードしたエンコード結果をパケットとしてパケット転送装置に送出するエンコーダ部と、を有する。
 本発明の第2の視点に係るリモート型携帯通信システムは、上記第1の視点に係るサーバ装置を有する。
 本発明の第3の視点に係るリモート型携帯通信システム制御方法は、
 モバイルネットワーク上のサーバ装置が、モバイルネットワーク上のパケット転送装置を介して携帯端末からコンテンツ蓄積の指示情報を受信するとともにコンテンツストリーム又はコンテンツファイルを受信し、該コンテンツストリーム又はコンテンツファイルを自身の蓄積部に蓄積する工程と、
 携帯端末からコンテンツ再生の指示情報を受信し、蓄積部に蓄積されたコンテンツストリーム又はコンテンツファイルを読み出して復号再生して表示画面を生成する工程と、
 表示画面の全部又は一部を圧縮エンコードしたエンコード結果をパケットとしてパケット転送装置に送出する工程と、を含む。
 本発明に係るリモート型携帯通信システム、サーバ装置及びリモート型携帯通信システム制御方法によると、モバイルネットワークにおけるコンテンツのサイズが大きくなった場合において、携帯端末を変更することなくコンテンツを利用することができる。
第1の実施形態に係るリモート型携帯通信システムにおける装置の接続構成を示す図である。 第1の実施形態に係るリモート型携帯通信システムにおけるシンクライアントサーバ装置の構成を示すブロック図である。 第2の実施形態に係るリモート型携帯通信システムにおける装置の接続構成を示す図である。 第2の実施形態に係るリモート型携帯通信システムにおけるシンクライアントサーバ装置の構成を示すブロック図である。 第3の実施形態に係るリモート型携帯通信システムにおける装置の接続構成を示す図である。
 第1の展開形態によると、上記第1の視点に係るリモート型携帯通信システムが提供される。
 第2の展開形態によると、送出したパケットに対して携帯端末から受信した再送要求の頻度を計測し、エンコーダ部による圧縮エンコードのビットレート及びフレームレートのうちの少なくともいずれかを該計測結果に基づいて制御するレート制御部をさらに有する、サーバ装置が提供される。
 第3の展開形態によると、レート制御部は、所定の期間に受信した再送要求の回数が所定の閾値以上である場合には、エンコーダ部による圧縮エンコードの最大ビットレート又は最大フレームレートを削減する、サーバ装置が提供される。
 第4の展開形態によると、レート制御部は、携帯端末から再送要求を受信した場合には、該当するパケットを再送する、サーバ装置が提供される。
 第5の展開形態によると、エンコーダ部は、エンコード結果をパケットとし、UDPプロトコルによりパケット転送装置に送出する、サーバ装置が提供される。
 第6の展開形態によると、上記第2の視点に係るリモート型携帯通信システムが提供される。
 第7の展開形態によると、サーバ装置から送出されたパケットをパケット転送装置を介して受信するとともに、パケットに格納されたエンコード結果をデコードして表示する携帯端末をさらに有する、リモート型携帯通信システムが提供される。
 第8の展開形態によると、モバイルネットワークは、モバイルパケットネットワーク又はモバイルLTE/EPCネットワークである、リモート型携帯通信システムが提供される。
 第9の展開形態によると、上記第3の視点に係るリモート型携帯通信システム制御方法が提供される。
 第10の展開形態によると、送出したパケットに対して携帯端末から受信した再送要求の頻度を計測し、圧縮エンコードのビットレート及びフレームレートのうちの少なくともいずれかを計測結果に基づいて制御する工程をさらに含む、リモート型携帯通信システム制御方法が提供される。
 本発明によると、オペレータが新規サービスを導入する場合に、ネットワーク上に設置したサーバ装置のアプリケーションソフトを更新することで新規サービスの導入が可能となる。したがって、新規サービスが導入される都度、携帯端末を新規に調達したり改造したりする必要がない。
 また、本発明によると、携帯端末に保存するのと同じ動作で、静止画や特に動画等のコンテンツ、コンテンツファイル等をネットワーク上のサーバ装置に設けられた蓄積部(キャッシュメモリ、ハードディスク等の蓄積装置)に蓄積することができる。したがって、携帯端末の故障によりコンテンツやコンテンツファイルが破壊された場合、又は、携帯端末の置き忘れ、盗難等に遭遇した場合であっても、コンテンツ、コンテンツファイル等を紛失し、アクセスできなくなる恐れがなくなる。
 さらに、本発明によると、蓄積したコンテンツを再生、閲覧する場合に、モバイルパケットネットワークやLET/EPCネットワークの帯域幅の変動に対し、呼接続時や呼接続中に、UDP/IPの場合はパケット再送要求回数をサーバ装置で計測し、計測結果により画面情報を圧縮符号化するときの最大ビットレートを制御することができる。したがって、携帯端末側で情報を受信するのに時間を要し、画面の更新が遅くなることによるQoEの低下を回避することができる。
 (実施形態1)
 第1の実施形態に係るリモート型携帯通信システムについて、図面を参照して詳細に説明する。
 図1は、本実施形態に係るリモート型携帯通信システムにおける装置の接続構成を示す。
 図1では、モバイルネットワークとして3Gモバイルパケットネットワーク150を用い、パケット転送装置としてxGSN装置190を用いる場合の構成を示している。ここで、xGSN装置190とは、SGSN(Serving GPRS Support Node)装置とGGSN(Gateway GPRS Support Node)装置を一体化した装置をいう。
 また、図1は、サービスの例として、エンドユーザが携帯端末のカメラ等で撮影した静止画/動画、オーディオ等のコンテンツ、コンテンツファイル等を、あたかも携帯端末に保存するようにモバイルネットワークのサーバ上の仮想クライアントのキャッシュメモリ又は蓄積装置に蓄積し、その後で、あたかも携帯端末に保存したコンテンツを再生表示するようにサーバ上の仮想クライアントのキャッシュメモリ又は蓄積装置に蓄積したコンテンツなどを携帯端末で表示するというサービスを提供する場合の構成を示す。なお、コンテンツに限らず、ゲーム、アプリケーションその他の場合についても、同様の構成に基づいて、サービスを提供することができる。
 図1を参照すると、携帯端末170は、モバイルパケットネットワーク150上に配置されたシンクライアントサーバ装置110が有する仮想クライアントに対し、コンテンツを蓄積するための操作を行うために、基地局194、RNC(Radio Network Controller)装置195、xGSN装置190を経由して、シンクライアントサーバ装置110に対し蓄積するための指示信号を送出する。
 ここで、指示信号とは、携帯端末170におけるキー押し下げ操作、特殊文字(例えば、*、#など)の入力操作等を行った際に、携帯端末170から送出される信号をいう。
 携帯端末170から送出された指示信号は、モバイルパケットネットワーク150上に設けられた基地局194、RNC装置195、xGSN装置190、シンクライアントサーバ装置110の順に到達する。これにより、シンクライアントサーバ装置110は、携帯端末170からの指示信号を受信する。
 指示信号を送出するためのプロトコルとして、公知のプロトコルを使用することができる。ここでは、一例として、TCP/IP及びその上位層としてHTTPを用いるものとする。また、HTTP以外にSIP(Session Initiation Protocol)を用いることもできる。
 図2は、シンクライアントサーバ装置110の構成を示すブロック図である。図2を参照すると、シンクライアントサーバ装置110は、仮想クライアント部211、画面キャプチャ部180、エンコーダ部186、パケット構築・送信部176、キャッシュメモリ(蓄積部)189及びパケット受信部188を有する。
 仮想クライアント部211は、新規サービスに対応したアプリケーションソフト、音声/静止画/動画デコーダ、画面生成部等を備えている(非図示)。アプリケーションソフトは、シンクライアントサーバ装置110の外部から容易に変更することができる。
 仮想クライアント部211は、携帯端末170から、基地局194、RNC装置195、xGSN装置190を経由して、TCPパケットを蓄積指示信号として受信する。仮想クライアント部211は、受信したTCPパケット上のHTTPを解析し、コンテンツをシンクライアントサーバ装置110に蓄積する動作を行うことを認識する。
 コンテンツ蓄積動作の場合、仮想クライアント部211は、携帯端末からの指示信号に従い、コンテンツ蓄積を実施するためのアプリケーションを実行し、操作内容等を示すアプリケーション画面を生成し、画面キャプチャ部180に出力する。
 画面キャプチャ部180は、画面をキャプチャして画像の輝度信号と色差信号に変換し、エンコーダ部186に出力する。なお、他の形式として、例えば、YUV形式等を用いることもできる。
 エンコーダ部186は、画面キャプチャ部180から、画面信号として、予め定められたfps(1秒間あたりのフレーム枚数、frame per second)の画像信号又は静止画信号を受信する。また、エンコーダ部186は、予め定められた圧縮方式により、画面キャプチャ部180から出力された画像信号に対し、予め定められた最大ビットレートを超えないように圧縮符号化して圧縮符号化ビットストリームを生成し、パケット構築・送信部176に送出する。
 本実施形態では、一例として、静止画と動画の混在の画面の圧縮符号化に有効なWavelet(ウェーブレット)に基づく圧縮符号化方式を用いる。なお、他の公知の圧縮符号化方式を採用することもできる。
 パケット構築・送信部176は、圧縮符号化ビットストリームをパケットのペイロードに格納し、TCP/IPプロトコルを用いて、xGSN装置190に送出する。ここで、圧縮符号化ビットストリームを一旦ファイルに格納した上で、ファイルをパケットで送出することもできる。
 図1を参照すると、携帯端末170は、xGSN装置190等を経由して、シンクライアントサーバ装置110から送出されたパケットを受信し、パケットのペイロードに格納された圧縮符号化ビットストリームを、シンクライアントサーバ装置110におけるエンコーダ部186に対応するデコーダで復号して得られた画面を表示する。さらに、携帯端末170は、シンクライアントサーバ装置110に対し、コンテンツストリーム又はコンテンツファイルの蓄積を開始する。
 図2を参照すると、パケット受信部188は、携帯端末170から蓄積すべきコンテンツストリーム又は蓄積すべきコンテンツファイルを格納したパケットを受信し、パケットのペイロード部からコンテンツストリーム又はコンテンツファイルを抽出し、これをキャッシュメモリ189に蓄積する。
 キャッシュメモリ189は、コンテンツストリーム又はコンテンツファイルの蓄積が完了すると、仮想クライアント部211に完了を通知する。
 仮想クライアント部211は、完了通知を受信すると蓄積終了の画面を生成し、画面キャプチャ部180に出力する。
 画面キャプチャ部180は、画面をキャプチャする。
 エンコーダ部186は、キャプチャされた画面をエンコードして、エンコード結果をパケット構築・送信部176に出力する。
 パケット構築・送信部176は、TCP/IPパケットを構築し、xGSN装置190に出力する。
 携帯端末170は、これらのパケットを受信する。
 次に、コンテンツ再生の動作を説明する。仮想クライアント部211は、携帯端末170からxGSN装置190を介してコンテンツ再生の指示情報を受信すると、キャッシュメモリ189に蓄積されたコンテンツで、該当するコンテンツのストリーム又はファイルを読み出し、携帯端末170で圧縮符号化された符号化方式に対応する復号方式を用いてコンテンツストリーム又はファイルを復号し再生した上で表示画面を生成し、画面キャプチャ部180に出力する。
 画面キャプチャ部180は、画面をキャプチャして画像の輝度信号と色差信号に変換しエンコーダ部186に出力する。ここで、他の形式、例えば、YUV形式等を用いることもできる。
 エンコーダ部186は、画面キャプチャ部180から、画面信号として、予め定められたfps(1秒間あたりのフレーム枚数、frame per second)の画像信号又は静止画信号を受信する。また、エンコーダ部186は、予め定められた圧縮方式により、画面キャプチャ部180から出力された画像信号に対し、予め定められた最大ビットレートを超えないように圧縮符号化して圧縮符号化ビットストリームを生成し、パケット構築・送信部176に送出する。
 パケット構築・送信部176は、圧縮符号化ビットストリームをパケットのペイロード部に格納し、TCP/IPプロトコルを用いて、xGSN装置190に送出する。ここで、圧縮符号化ビットストリームを一旦ファイルに格納した上で、ファイルをTCP/IPパケットで送出することもできる。
 xGSN装置190は、受信したTCP/IPパケットをGTP-Uプロトコルによりカプセル化してRNC装置195に転送する。
 RNC装置195は、基地局194を介して無線により携帯端末170に送出する。
 携帯端末170は、TCP/IPプロトコルによるパケットを受信し、パケットのペイロード部に格納された圧縮符号化ストリーム又はファイルを取り出す。携帯端末170は、シンクライアントサーバ装置110のエンコーダ部186に対応したデコーダを保有しており、当該デコーダにより、圧縮符号化ストリームを復号し、又はファイルに格納されているストリームを取り出して復号し、復号して得られた画面を携帯端末170のディスプレイ上に表示する。
 図2に示した構成について種々の変形が可能である。図2では、携帯端末170から蓄積するコンテンツとして、静止画/動画に限らず、音楽/オーディオ、ファイル、プログラムなど、種々のものを蓄積することができる。また、xGSN装置190は、SGSN装置とGGSN装置とに分離して配置してもよい。さらに、シンクライアントサーバ装置110における蓄積部としてキャッシュメモリ189を用いたが、ハードディスク等の蓄積装置を用いることもできる。
 (実施形態2)
 第2の実施形態に係るリモート型携帯通信システムについて、図面を参照して詳細に説明する。
 第1の実施形態では、シンクライアントサーバ装置110からxGSN装置190に送出するパケットプロトコルとしてTCP/IPを用いる構成について説明した。本実施形態では、TCP/IPの代わりにUDP/IPを用いる構成について説明する。
 UDP/IPを用いることにより、TCP/IPを用いた場合と比較して、モバイルネットワークにおける転送遅延時間を短縮することができる。一方、UDP/IPを用いた場合には、パケットロスに対する対策が必要となる。
 ここでは、携帯端末側でパケットロスが発生したか否かを判定し、パケットロスが発生した場合には、携帯端末からシンクライアントサーバ装置に対しパケットの再送を要求する構成について説明する。
 図3は、本実施形態に係るリモート型携帯通信システムにおける装置の接続構成を示す図である。図3において、図1の構成要素と同一の符合が付された構成要素の動作は、図1の構成要素の動作と同一であることから、説明を省略する。
 図3に示した構成は、図1に示した構成と、以下の(1)~(3)の点において相違する。(1)シンクライアントサーバ装置510は、UDP/IPのパケットをxGSN装置190に送出する。(2)UDPパケットに独自の又は汎用のシーケンス番号を付与する。(3)携帯端末570は、シンクライアントサーバ装置510から送出されたUDP/IPパケットをxGSN装置190及びRNC装置195及び基地局194を経由して受信する。
 携帯端末570は、UDP/IPパケットに付加された独自又は汎用のシーケンス番号をチェックして、UDPパケットのパケットロスがあるか否かを確認する。シーケンス番号が連続しており、パケットロスがない場合には、携帯端末570は、UDPパケットのペイロード部に格納されたビットストリーム又はファイルを抽出し、デコードを行なった上で、携帯端末570のディスプレイに表示する。一方、シーケンス番号がジャンプしており(不連続となり)、パケットロスが発生したと考えられる場合には、携帯端末570は、ロストしたパケットの再送をシンクライアントサーバ装置510に要求する。
 図4は、シンクライアントサーバ装置510の構成を示すブロック図である。図4において、図2の構成要素と同一の符号が付された構成要素の動作は、図2の構成要素の動作と同一であるため、説明を省略する。
 図4を参照すると、パケット構築・送信部576は、エンコーダ部186での圧縮符号化ビットストリームをUDPパケットのペイロードに格納し、独自又は汎用のシーケンス番号を付加し、UDP/IPプロトコルを用いて、xGSN装置190に送出する。
 なお、パケット構築・送信部576は、圧縮符号化ビットストリームを一旦ファイルに格納した上で、ファイルをパケットで送出するようにしてもよい。この場合のパケットプロトコルとして、一例として、UDP/IPを用いることができる。
 再送制御部595は、携帯端末570が再送を要求した場合に、xGSN装置190を経由し、仮想クライアント部511から再送要求信号を受信する。再送制御部595は、再送要求指示からシーケンス番号を割り出し、割り出したシーケンス番号をパケット構築・送信部576に出力する。
 パケット構築・送信部576は、再送制御部595からの指示に従い、該当するシーケンス番号のUDP/IPパケットをxGSN装置190に再送する。
 レート制御部585は、予め定められた時間区間内に仮想クライアント部511から受信した再送要求指示の回数をカウントし、予め定められた時間区間で累積した累積値Cを求める。また、レート制御部585は、求めた累積値Cを予め定められた閾値Th2と比較することにより、エンコーダ部186における最大ビットレートEmaxを制御する。
 C≧Th2   (1)
 式(1)が成り立つ場合には、レート制御部585は、式(2)のように最大ビットレートEmaxを削減する。
 Emax=Emax-△3   (2)
 式(2)において、△3は予め定められた定数である。
 一方、累積値Cの値が閾値Th2未満の場合には、レート制御部585は、最大ビットレートEmaxを初期値に戻す。
 レート制御部585は、このようにして求めた最大ビットレートEmaxをエンコーダ部186に出力する。
 図4では、最大ビットレートを制御する場合について説明した。図4と同様の構成は、フレームレートの制御にも適用することができる。
 また、携帯端末から蓄積するコンテンツとしては、静止画/動画に限らず、音楽/オーディオ、ファイル、プログラム等の種々のものを蓄積することができる。さらに、xGSN装置190は、SGSN装置とGGSN装置とに分離して配置してもよい。また、シンクライアントサーバ装置510における蓄積部としてキャッシュメモリ189を用いたが、ハードディスク等の蓄積装置などを用いることもできる。
 (実施形態3)
 第3の実施形態に係るリモート型携帯通信システムについて、図面を参照して詳細に説明する。
 図5は、本実施形態に係るリモート型携帯通信システムにおける装置の接続構成を示す図である。図5を参照すると、リモート型携帯通信システムは、シンクライアントサーバ装置110、S/P-GW装置305、e-NodeB(enhanced-NodeB)装置306、基地局194及び携帯端末670を有する。
 図5において、図1の構成要素と同一の符号を付された構成要素の動作は、図1の構成要素の動作と同一であるため、説明を省略する。
 図5に示した構成と図1に示した構成とは、携帯端末670が、モバイルLTE/EPCネットワーク350を介し、e-NodeB装置306及びS/P-GW装置305を経由してシンクライアントサーバ装置110に接続する点において相違する。図5に示した構成によると、図1に示したモバイルパケットネットワーク150に基づく構成と比較して、はるかに高速にパケットを転送することができる。
 e-NodeB装置306は、LTE技術を用いて、携帯端末670との間の無線区間で、従来よりもはるかに高速なパケット伝送を実現する。また、S/P-GW装置305とシンクライアントサーバ装置110との間はIPプロトコルで接続されるため、S/P-GW装置と接続する場合にも、図1に示したシンクライアントサーバ装置110をそのまま使用することができる。
 S/P-GW装置305は、シンクライアントサーバ装置110からTCP/IP又はUDP/IPプロトコルによるパケット、又は、これらのプロトコル上を転送されるファイルを受信し、GTP-U(GPRS Tunneling Protocol-User Plane)/TCP/IP又は、GTP-U/UDP/IPプロトコルに変換した上で、圧縮符号化ビットストリーム又はファイルを、e-NodeB装置306に出力する。
 e-NodeB装置306は、PDCP/RLCプロトコルに変換し、携帯端末670に対し、パケット又はファイルを送出する。
 携帯端末から蓄積するコンテンツとして、静止画/動画に限らず、音楽/オーディオ、ファイル、プログラム等の種々のものを蓄積することができる。また、S/P-GW装置305は、S-GW装置とP-GW装置の一体型の構成を用いたが、S-GW装置とP-GW装置とを分離した構成を用いることもできる。
 以上説明した全ての実施形態において、携帯端末からの指示信号として、公知のSIP(Session Initiation Protocol)を用いることもできる。
 上記実施形態によると、オペレータが新規サービスを導入する場合に、ネットワーク上に設置したシンクライアントサーバのアプリケーションソフトを更新することで新規サービスの導入が可能となる。したがって、新規サービスが導入される都度、携帯端末を新規に調達した改造したりする必要がない。
 また、上記実施形態によると、携帯端末に保存するのと同じ動作で、静止画や特に動画等のコンテンツ、コンテンツファイル等をネットワーク上のシンクライアントサーバ装置に設けられたキャッシュメモリ(ないしハードディスク等の蓄積装置)に蓄積することができる。したがって、携帯端末の故障によりコンテンツやコンテンツファイルが破壊された場合、又は、携帯端末の置き忘れ、盗難等に遭遇した場合であっても、コンテンツ、コンテンツファイル等を紛失し、アクセスできなくなる恐れがなくなる。
 さらに、上記実施形態によると、蓄積したコンテンツを再生、閲覧する場合に、モバイルパケットネットワークやLET/EPCネットワークの帯域幅の変動に対し、呼接続時や呼接続中に、UDP/IPの場合はパケット再送要求回数をシンクライアントサーバ装置で計測し、計測結果により画面情報を圧縮符号化するときの最大ビットレートを制御することができる。したがって、携帯端末側で情報を受信するのに時間を要し、画面の更新が遅くなることによるQoEの低下を回避することができる。
 本発明の全開示(請求の範囲を含む)の枠内において、さらにその基本的技術思想に基づいて、実施形態の変更・調整が可能である。また、本発明の請求の範囲の枠内において種々の開示要素の多様な組み合わせないし選択が可能である。すなわち、本発明は、請求の範囲を含む全開示、技術的思想にしたがって当業者であればなし得るであろう各種変形、修正を含むことは勿論である。
 また、上記実施形態の一部又は全部は、以下の付記として記載することができるものであるが、これらに限定されるものではない。
 (付記1)モバイルネットワーク上のパケット転送装置を介して携帯端末からコンテンツ蓄積の指示情報を受信するとともにコンテンツストリーム又はコンテンツファイルを受信した場合に、該コンテンツストリーム又はコンテンツファイルを蓄積する蓄積部と、
 前記携帯端末からコンテンツ再生の指示情報を受信すると、前記蓄積部に蓄積されたコンテンツストリーム又はコンテンツファイルを読み出して復号再生して表示画面を生成する仮想クライアント部と、
 前記表示画面の全部又は一部を圧縮エンコードしたエンコード結果をパケットとして前記パケット転送装置に送出するエンコーダ部と、を備えていることを特徴とするサーバ装置。
 (付記2)前記送出したパケットに対して前記携帯端末から受信した再送要求の頻度を計測し、前記エンコーダ部による圧縮エンコードのビットレート及びフレームレートのうちの少なくともいずれかを該計測結果に基づいて制御するレート制御部をさらに備えていることを特徴とする、付記1に記載のサーバ装置。
 (付記3)前記レート制御部は、所定の期間に受信した再送要求の回数が所定の閾値以上である場合には、前記エンコーダ部による圧縮エンコードの最大ビットレート又は最大フレームレートを削減することを特徴とする、付記2に記載のサーバ装置。
 (付記4)前記レート制御部は、前記携帯端末から再送要求を受信した場合には、該当するパケットを再送することを特徴とする、付記2又は3に記載のサーバ装置。
 (付記5)前記エンコーダ部は、前記エンコード結果をパケットとし、UDPプロトコルにより前記パケット転送装置に送出することを特徴とする、付記2乃至4のいずれか一に記載のサーバ装置。
 (付記6)付記1乃至5のいずれか一に記載のサーバ装置を備えていることを特徴とするリモート型携帯通信システム。
 (付記7)前記サーバ装置から送出されたパケットを前記パケット転送装置を介して受信するとともに、該パケットに格納されたエンコード結果をデコードして表示する携帯端末をさらに備えていることを特徴とする、付記6に記載のリモート型携帯通信システム。
 (付記8)前記モバイルネットワークは、モバイルパケットネットワーク又はモバイルLTE/EPCネットワークであることを特徴とする、付記6又は7に記載のリモート型携帯通信システム。
 (付記9) モバイルネットワーク上のサーバ装置が、該モバイルネットワーク上のパケット転送装置を介して携帯端末からコンテンツ蓄積の指示情報を受信するとともにコンテンツストリーム又はコンテンツファイルを受信し、該コンテンツストリーム又はコンテンツファイルを自身の蓄積部に蓄積する工程と、
 前記携帯端末からコンテンツ再生の指示情報を受信し、前記蓄積部に蓄積されたコンテンツストリーム又はコンテンツファイルを読み出して復号再生して表示画面を生成する工程と、
 前記表示画面の全部又は一部を圧縮エンコードしたエンコード結果をパケットとして前記パケット転送装置に送出する工程と、を含むことを特徴とするリモート型携帯通信システム制御方法。
 (付記10)前記送出したパケットに対して前記携帯端末から受信した再送要求の頻度を計測し、圧縮エンコードのビットレート及びフレームレートのうちの少なくともいずれかを該計測結果に基づいて制御する工程をさらに含むことを特徴とする、付記9に記載のリモート型携帯通信システム制御方法。
 (付記11)所定の期間に受信した再送要求の回数が所定の閾値以上である場合には、圧縮エンコードの最大ビットレート又は最大フレームレートを削減する工程を含むことを特徴とする、付記10に記載のリモート型携帯通信システム制御方法。
 (付記12)前記携帯端末から再送要求を受信した場合には、該当するパケットを再送する工程を含むことを特徴とする、付記10又は11に記載のリモート型携帯通信システム制御方法。
110、510  シンクライアントサーバ装置(サーバ装置)
150  モバイルパケットネットワーク
170、570、670  携帯端末
176、576  パケット構築・送信部
180  画面キャプチャ部
186  エンコーダ部
188  パケット受信部
189  キャッシュメモリ(蓄積部)
190  xGSN装置
194  基地局
195  RNC装置
211、511  仮想クライアント部
305  S/P-GW装置
306  e-NodeB装置
350  モバイルLTE/EPCネットワーク
585  レート制御部
595  再送制御部

Claims (12)

  1.  モバイルネットワーク上のパケット転送装置を介して携帯端末からコンテンツ蓄積の指示情報を受信するとともにコンテンツストリーム又はコンテンツファイルを受信した場合に、該コンテンツストリーム又はコンテンツファイルを蓄積する蓄積部と、
     前記携帯端末からコンテンツ再生の指示情報を受信すると、前記蓄積部に蓄積されたコンテンツストリーム又はコンテンツファイルを読み出して復号再生して表示画面を生成する仮想クライアント部と、
     前記表示画面の全部又は一部を圧縮エンコードしたエンコード結果をパケットとして前記パケット転送装置に送出するエンコーダ部と、を備えていることを特徴とするサーバ装置。
  2.  前記送出したパケットに対して前記携帯端末から受信した再送要求の頻度を計測し、前記エンコーダ部による圧縮エンコードのビットレート及びフレームレートのうちの少なくともいずれかを該計測結果に基づいて制御するレート制御部をさらに備えていることを特徴とする、請求項1に記載のサーバ装置。
  3.  前記レート制御部は、所定の期間に受信した再送要求の回数が所定の閾値以上である場合には、前記エンコーダ部による圧縮エンコードの最大ビットレート又は最大フレームレートを削減することを特徴とする、請求項2に記載のサーバ装置。
  4.  前記レート制御部は、前記携帯端末から再送要求を受信した場合には、該当するパケットを再送することを特徴とする、請求項2又は3に記載のサーバ装置。
  5.  前記エンコーダ部は、前記エンコード結果をパケットとし、UDPプロトコルにより前記パケット転送装置に送出することを特徴とする、請求項2乃至4のいずれか1項に記載のサーバ装置。
  6.  請求項1乃至5のいずれか一に記載のサーバ装置を備えていることを特徴とするリモート型携帯通信システム。
  7.  前記サーバ装置から送出されたパケットを前記パケット転送装置を介して受信するとともに、該パケットに格納されたエンコード結果をデコードして表示する携帯端末をさらに備えていることを特徴とする、請求項6に記載のリモート型携帯通信システム。
  8.  前記モバイルネットワークは、モバイルパケットネットワーク又はモバイルLTE/EPCネットワークであることを特徴とする、請求項6又は7に記載のリモート型携帯通信システム。
  9.  モバイルネットワーク上のサーバ装置が、該モバイルネットワーク上のパケット転送装置を介して携帯端末からコンテンツ蓄積の指示情報を受信するとともにコンテンツストリーム又はコンテンツファイルを受信し、該コンテンツストリーム又はコンテンツファイルを自身の蓄積部に蓄積する工程と、
     前記携帯端末からコンテンツ再生の指示情報を受信し、前記蓄積部に蓄積されたコンテンツストリーム又はコンテンツファイルを読み出して復号再生して表示画面を生成する工程と、
     前記表示画面の全部又は一部を圧縮エンコードしたエンコード結果をパケットとして前記パケット転送装置に送出する工程と、を含むことを特徴とするリモート型携帯通信システム制御方法。
  10.  前記送出したパケットに対して前記携帯端末から受信した再送要求の頻度を計測し、圧縮エンコードのビットレート及びフレームレートのうちの少なくともいずれかを該計測結果に基づいて制御する工程をさらに含むことを特徴とする、請求項9に記載のリモート型携帯通信システム制御方法。
  11.  所定の期間に受信した再送要求の回数が所定の閾値以上である場合には、圧縮エンコードの最大ビットレート又は最大フレームレートを削減する工程を含むことを特徴とする、請求項10に記載のリモート型携帯通信システム制御方法。
  12.  前記携帯端末から再送要求を受信した場合には、該当するパケットを再送する工程を含むことを特徴とする、請求項10又は11に記載のリモート型携帯通信システム制御方法。
PCT/JP2011/060648 2010-05-10 2011-05-09 リモート型携帯通信システム、サーバ装置及びリモート型携帯通信システム制御方法 WO2011142312A1 (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
US13/697,716 US9118953B2 (en) 2010-05-10 2011-05-09 Remote mobile communication system, server device, and remote mobile communication system control method
JP2012514786A JP5488694B2 (ja) 2010-05-10 2011-05-09 リモート型携帯通信システム、サーバ装置及びリモート型携帯通信システム制御方法

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2010108669 2010-05-10
JP2010-108669 2010-05-10

Publications (1)

Publication Number Publication Date
WO2011142312A1 true WO2011142312A1 (ja) 2011-11-17

Family

ID=44914368

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2011/060648 WO2011142312A1 (ja) 2010-05-10 2011-05-09 リモート型携帯通信システム、サーバ装置及びリモート型携帯通信システム制御方法

Country Status (3)

Country Link
US (1) US9118953B2 (ja)
JP (1) JP5488694B2 (ja)
WO (1) WO2011142312A1 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2013236377A (ja) * 2012-05-04 2013-11-21 Awind Inc ビデオ符号化システム、方法、および、コンピュータ可読媒体

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20170244894A1 (en) * 2016-02-22 2017-08-24 Seastar Labs, Inc. Method and Apparatus for Managing Latency of Remote Video Production

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH10336238A (ja) * 1997-06-05 1998-12-18 Sony Corp 情報処理システム、携帯端末、サーバ、及びデータ処理方法
JP2002245259A (ja) * 2001-02-19 2002-08-30 Blue Island Network:Kk 仮想錠付個人スペースを用いた高セキュリティ情報システム
JP2005006288A (ja) * 2003-05-21 2005-01-06 Sharp Corp 無線通信装置、送信機、受信機、無線通信システム、ワイヤレスavシステム、無線伝送方法並びに動作制御プログラム及びそのプログラムを記録した記録媒体
JP2005311842A (ja) * 2004-04-23 2005-11-04 Sharp Corp 携帯電話システム
JP2007310508A (ja) * 2006-05-16 2007-11-29 Nippon Telegraph & Telephone East Corp シンクライアントシステムおよびシンクライアント端末用プログラム
JP2009060425A (ja) * 2007-08-31 2009-03-19 Hitachi Ltd トラフィック制御システムおよびトラフィック制御方法

Family Cites Families (24)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100422252B1 (ko) * 2001-12-20 2004-03-11 삼성전자주식회사 씬 클라이언트 네트워크 시스템과 그 네트워크 시스템의데이터 전송 방법
GB2396228A (en) * 2002-12-19 2004-06-16 Nokia Corp A method of gathering information relating to consumption of broadcast content by receiving stations
US7453805B2 (en) 2003-03-21 2008-11-18 Panasonic Corporation Method and communication system for signaling information for optimizing rate control schemes in wireless networks
JP3683576B2 (ja) 2003-05-21 2005-08-17 シャープ株式会社 無線通信装置、無線通信システム、ワイヤレスavシステム、無線伝送方法並びに動作制御プログラム及びそのプログラムを記録した記録媒体
GB0316080D0 (en) * 2003-07-09 2003-08-13 Nokia Corp Service halt
US7054637B2 (en) * 2003-09-26 2006-05-30 Exphand, Inc. Dynamically distributed, portal-based application services network topology for cellular systems
US7962124B1 (en) * 2003-10-13 2011-06-14 Nortel Networks Limited Method and system for multimedia message delivery in a communication system
JP4013980B2 (ja) * 2005-02-14 2007-11-28 株式会社日立製作所 Ip通信システム、ipネットワークにおける通信制御方法およびクライアント端末、ならびにクライアントサーバ
JP4577267B2 (ja) * 2006-05-17 2010-11-10 株式会社日立製作所 シンクライアントシステム
JP2007325109A (ja) * 2006-06-02 2007-12-13 Canon Inc 配信サーバ、ネットワークカメラ、配信方法及びプログラム
KR100772923B1 (ko) * 2006-08-23 2007-11-05 한국전자통신연구원 휴대용 단말기에서 서버의 응용프로그램을 실행하기 위한시스템 및 방법
US20100088755A1 (en) * 2006-12-29 2010-04-08 Telefonaktiebolaget L M Ericsson (Publ) Access management for devices in communication networks
US20080184128A1 (en) * 2007-01-25 2008-07-31 Swenson Erik R Mobile device user interface for remote interaction
US8045957B2 (en) * 2007-01-25 2011-10-25 International Business Machines Corporation Computer program product to indicate a charge for a call
JP2008234389A (ja) 2007-03-22 2008-10-02 Nec Corp カラー画像データ転送システムおよびそれに使用されるクライアント
US20090006533A1 (en) * 2007-06-28 2009-01-01 Yahoo! Inc. Server-aided approach to improve media negotiation efficiency
US8751146B2 (en) * 2007-08-30 2014-06-10 Telenav, Inc. Navigation system having location based service and temporal management
JP5003561B2 (ja) 2008-03-31 2012-08-15 カシオ計算機株式会社 クライアント装置、サーバ装置、クライアント制御プログラム、およびサーバ制御プログラム
US20080189298A1 (en) * 2008-04-02 2008-08-07 Steve Cha Method and apparatus for wireless access to personalized multimedia at any location
US8527647B2 (en) * 2009-10-06 2013-09-03 Unwired Planet, Inc. Managing network traffic using intermediate flow control
US20110202634A1 (en) * 2010-02-12 2011-08-18 Surya Kumar Kovvali Charging-invariant and origin-server-friendly transit caching in mobile networks
US9420441B2 (en) * 2010-07-07 2016-08-16 Futurewei Technologies, Inc. System and method for content and application acceleration in a wireless communications system
US8792491B2 (en) * 2010-08-12 2014-07-29 Citrix Systems, Inc. Systems and methods for multi-level quality of service classification in an intermediary device
US8576756B2 (en) * 2011-06-28 2013-11-05 International Business Machines Corporation Continuous cache service in cellular networks

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH10336238A (ja) * 1997-06-05 1998-12-18 Sony Corp 情報処理システム、携帯端末、サーバ、及びデータ処理方法
JP2002245259A (ja) * 2001-02-19 2002-08-30 Blue Island Network:Kk 仮想錠付個人スペースを用いた高セキュリティ情報システム
JP2005006288A (ja) * 2003-05-21 2005-01-06 Sharp Corp 無線通信装置、送信機、受信機、無線通信システム、ワイヤレスavシステム、無線伝送方法並びに動作制御プログラム及びそのプログラムを記録した記録媒体
JP2005311842A (ja) * 2004-04-23 2005-11-04 Sharp Corp 携帯電話システム
JP2007310508A (ja) * 2006-05-16 2007-11-29 Nippon Telegraph & Telephone East Corp シンクライアントシステムおよびシンクライアント端末用プログラム
JP2009060425A (ja) * 2007-08-31 2009-03-19 Hitachi Ltd トラフィック制御システムおよびトラフィック制御方法

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2013236377A (ja) * 2012-05-04 2013-11-21 Awind Inc ビデオ符号化システム、方法、および、コンピュータ可読媒体

Also Published As

Publication number Publication date
JP5488694B2 (ja) 2014-05-14
US9118953B2 (en) 2015-08-25
JPWO2011142312A1 (ja) 2013-07-22
US20130058213A1 (en) 2013-03-07

Similar Documents

Publication Publication Date Title
WO2011142311A1 (ja) リモート型携帯通信システム、サーバ装置及びリモート型携帯通信システム制御方法
WO2011049179A1 (ja) 配信システム、ゲートウェイ、配信方法及びプログラム
WO2011004886A1 (ja) 配信システムと方法とゲートウェイ装置とプログラム
WO2011049193A1 (ja) 配信システム、ゲートウェイ、配信方法及びプログラム
EP1855483A2 (en) Apparatus and method for transmitting and receiving moving pictures using near field communication
JP5888417B2 (ja) 通信システムと方法とプログラム
JP2008193510A (ja) 映像送信装置、映像受信装置、及び映像伝送システム
CN109862400B (zh) 一种流媒体传输方法、装置及其系统
JP5505507B2 (ja) サーバ装置、映像品質計測システム、映像品質計測方法およびプログラム
US10085029B2 (en) Switching display devices in video telephony
JP5488694B2 (ja) リモート型携帯通信システム、サーバ装置及びリモート型携帯通信システム制御方法
JP2010011287A (ja) 映像伝送方法および端末装置
KR101632012B1 (ko) 통신 시스템, 서버 장치, 서버 장치의 제어 방법 및 프로그램을 저장하는 컴퓨터 판독 가능한 기록 매체
WO2011052590A1 (ja) リモート型携帯通信システム、方法及びプログラム
CN115842919B (zh) 一种基于硬件加速的视频低延迟传输方法
KR100713363B1 (ko) 이동통신 시스템에서 엠펙 전송 장치 및 방법
WO2014042137A1 (ja) 通信システムと方法とサーバ装置及び端末

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 11780569

Country of ref document: EP

Kind code of ref document: A1

WWE Wipo information: entry into national phase

Ref document number: 2012514786

Country of ref document: JP

NENP Non-entry into the national phase

Ref country code: DE

WWE Wipo information: entry into national phase

Ref document number: 13697716

Country of ref document: US

122 Ep: pct application non-entry in european phase

Ref document number: 11780569

Country of ref document: EP

Kind code of ref document: A1