KR101667970B1 - 서버 장치, 단말, 씬 클라이언트 시스템, 화면 송신 방법 및 프로그램 - Google Patents
서버 장치, 단말, 씬 클라이언트 시스템, 화면 송신 방법 및 프로그램 Download PDFInfo
- Publication number
- KR101667970B1 KR101667970B1 KR1020157010396A KR20157010396A KR101667970B1 KR 101667970 B1 KR101667970 B1 KR 101667970B1 KR 1020157010396 A KR1020157010396 A KR 1020157010396A KR 20157010396 A KR20157010396 A KR 20157010396A KR 101667970 B1 KR101667970 B1 KR 101667970B1
- Authority
- KR
- South Korea
- Prior art keywords
- compression
- terminal
- drawing command
- data
- unit
- Prior art date
Links
- 230000005540 biological transmission Effects 0.000 title claims description 68
- 238000000034 method Methods 0.000 title claims description 45
- 230000004044 response Effects 0.000 claims abstract description 30
- 230000006835 compression Effects 0.000 claims abstract description 27
- 238000007906 compression Methods 0.000 claims abstract description 27
- 238000003384 imaging method Methods 0.000 claims abstract description 6
- 238000012545 processing Methods 0.000 claims description 13
- 230000008569 process Effects 0.000 claims description 8
- 238000009877 rendering Methods 0.000 abstract description 20
- 238000005259 measurement Methods 0.000 description 19
- 238000010586 diagram Methods 0.000 description 14
- 239000000523 sample Substances 0.000 description 7
- 239000000284 extract Substances 0.000 description 6
- 238000012986 modification Methods 0.000 description 3
- 230000004048 modification Effects 0.000 description 3
- 230000005236 sound signal Effects 0.000 description 3
- 238000004891 communication Methods 0.000 description 2
- 238000007796 conventional method Methods 0.000 description 2
- 230000003111 delayed effect Effects 0.000 description 2
- 238000009499 grossing Methods 0.000 description 2
- 230000004075 alteration Effects 0.000 description 1
- 230000008901 benefit Effects 0.000 description 1
- 230000007423 decrease Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000007774 longterm Effects 0.000 description 1
- 230000004043 responsiveness Effects 0.000 description 1
- 230000002123 temporal effect Effects 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L69/00—Network arrangements, protocols or services independent of the application payload and not provided for in the other groups of this subclass
- H04L69/04—Protocols for data compression, e.g. ROHC
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
- H04L67/10—Protocols in which an application is distributed across nodes in the network
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
- H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
- H04N21/234309—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements by transcoding between formats or standards, e.g. from MPEG-2 to MPEG-4 or from Quicktime to Realvideo
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/236—Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/238—Interfacing the downstream path of the transmission network, e.g. adapting the transmission rate of a video stream to network bandwidth; Processing of multiplex streams
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/238—Interfacing the downstream path of the transmission network, e.g. adapting the transmission rate of a video stream to network bandwidth; Processing of multiplex streams
- H04N21/2381—Adapting the multiplex stream to a specific network, e.g. an Internet Protocol [IP] network
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/24—Monitoring of processes or resources, e.g. monitoring of server load, available bandwidth, upstream requests
- H04N21/2402—Monitoring of the downstream path of the transmission network, e.g. bandwidth available
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
- H04N21/266—Channel or content management, e.g. generation and management of keys and entitlement messages in a conditional access system, merging a VOD unicast channel into a multicast channel
- H04N21/2662—Controlling the complexity of the video stream, e.g. by scaling the resolution or bitrate of the video stream based on the client capabilities
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
- H04N21/85—Assembly of content; Generation of multimedia applications
- H04N21/854—Content authoring
- H04N21/8543—Content authoring using a description language, e.g. Multimedia and Hypermedia information coding Expert Group [MHEG], eXtensible Markup Language [XML]
Landscapes
- Engineering & Computer Science (AREA)
- Signal Processing (AREA)
- Multimedia (AREA)
- Computer Security & Cryptography (AREA)
- Computer Networks & Wireless Communication (AREA)
- Databases & Information Systems (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
- Data Exchanges In Wide-Area Networks (AREA)
Abstract
서버 장치는, 애플리케이션 소프트웨어를 동작시켜서 묘화 커맨드(들)을 실행함으로써 화면 데이터를 생성하는 가상 클라이언트부와, 화면 데이터를 압축 부호화하는 화상 인코드부와, 묘화 커맨드(들)을 압축 부호화하는 묘화 커맨드 인코드부와, 네트워크를 통해 서버 장치에 접속된 단말을 향하여 송출된 패킷에 대한 단말로부터의 응답 패킷에 의거하여, 네트워크의 대역을 계측하는 대역 계측부와, 계측한 대역에 따라, 압축 부호화한 화면 데이터 또는 압축 부호화한 묘화 커맨드(들) 중 어느 것을 단말에 송출할지를 선택하는 선택부와, 압축 부호화한 화면 데이터 또는 압축 부호화한 묘화 커맨드(들) 중 선택된 것을 단말에 송출하는 패킷 송수신부를 포함한다. 씬 클라이언트 서버 장치와 단말 사이의 네트워크 대역이 변동했을 경우에, 클라이언트 단말에 있어서의 화면 표시의 지연을 방지한다.
Description
[관련 출원에 대한 기재]
본 발명은, 일본국 특허출원번호 제2012-250887호(2012년 11월 15일 출원)에 대한 우선권을 주장하며, 동(同)출원의 모든 기재 내용은 참조로서 본 명세서에 포함된다. 본 발명은 서버 장치, 단말, 씬 클라이언트 시스템, 화면 송신 방법 및 프로그램에 관한 것으로서, 특히, 휴대 단말 등의 단말이 모바일 네트워크 등의 네트워크를 통해 원격으로 서버 장치에 액세스하여, 서버 장치상의 가상 클라이언트를 조작하는 씬 클라이언트 시스템, 씬 클라이언트 시스템에 있어서의 서버 장치, 단말, 화면 송신 방법 및 프로그램에 관한 것이다.
최근, 기업 등에서는, 고도의 시큐리티를 확보하기 위해서, 씬 클라이언트 시스템의 사용이 보급되기 시작하고 있다. 씬 클라이언트란, 단말로부터, 마치 실제의 단말을 조작하는 것처럼 서버 장치상의 가상 클라이언트를 조작하여 가상 클라이언트상에서 애플리케이션을 동작시켜서 화면 정보를 생성함과 함께, 생성한 화면 정보를 단말에 전송하여 단말에서 표시하는 기술을 말한다. 씬 클라이언트에 의하면, 단말에는 데이터가 일체 남지 않기 때문에, 단말을 분실해도 비밀 정보, 기업 정보 등이 외부에 누설될 우려가 없다는 이점이 있다.
특허문헌 1에는, 네트워크를 통해 접속된 씬 클라이언트 단말과 서버 장치를 구비한 씬 클라이언트 시스템에 있어서, 클라이언트 단말의 처리부에서의 클럭 주파수를 네트워크 대역을 고려하여 제어함으로써, 클라이언트 단말의 소비 전력을 삭감하는 기술이 개시되어 있다.
상기의 특허문헌의 모든 개시 내용은, 참조로서 본 명세서에 포함된다. 이하의 분석은, 본 발명자에 의해 이루어진 것이다.
서버 장치 측에서 애플리케이션을 동작시켜서 화면을 생성하고, 생성한 화면을 압축하여 단말에 전송하고, 단말에서 화면을 복호화하여 표시하는 씬 클라이언트 방식에 의하면, 화면의 상황에 관계 없이 항상 화상 코덱을 사용하여 화면을 압축 부호화하여 전송했을 경우, 서버 장치로부터 단말에 전송하는 데이터량이 증대한다는 문제가 있다. 특히, 네트워크의 대역폭이 좁은 경우, 데이터의 전송에 지연이 발생하고, 단말에서의 화면 갱신이 늦어지거나, 반응이 늦어지거나 하는 문제가 있다.
한편, 서버 장치로부터 화면 그 자체를 전송하는 대신에, 단말에서 당해 화면을 생성하기 위한 화면 묘화 커맨드(drawing command)를, 서버 장치로부터 단말에 전송하는 방법이 알려져 있다. 이러한 방법에 의하면, 화면의 움직임이 적은 경우, 상기 씬 클라이언트 방식과 비교하여, 서버 장치로부터 단말에 전송하는 데이터량을 삭감할 수 있다. 그러나, 화면이 복잡하고 움직임이 큰 경우, 서버 장치로부터 단말에 전송하는 커맨드가 대폭 늘어나기 때문에, 당해 화면을 묘화시키기 위한 단말에서의 처리 부하가 상기 씬 클라이언트 방식과 비교하여 대폭 증대한다. 이때, 단말에서의 처리 시간이 증대하고, 응답성이 저하한다는 문제가 있다. 또한, 단말에서의 처리 부하의 증대에 의해, 단말의 전력 사용량도 증대한다는 문제도 있다.
따라서, 씬 클라이언트 서버 장치와 클라이언트 단말 사이의 네트워크 대역이 변동됐을 경우에, 클라이언트 단말에 있어서의 화면 표시 지연을 막는 것이 요망된다. 본 발명의 목적은, 이러한 요망에 기여하는 서버 장치, 휴대 단말, 씬 클라이언트 시스템, 화면 송신 방법 및 프로그램을 제공하는 것에 있다.
본 발명의 제 1 양태에 따른 서버 장치는, 애플리케이션 소프트웨어를 동작시켜서 묘화 커맨드(들)을 실행함으로써 화면 데이터를 생성하는 가상 클라이언트부와, 상기 화면 데이터를 압축 부호화하는 화상 인코드부와, 상기 묘화 커맨드(들)을 압축 부호화하는 묘화 커맨드 인코드부와, 네트워크를 통해 상기 서버 장치에 접속된 단말을 향하여 송출된 패킷에 대한 당해 단말로부터의 응답 패킷에 의거하여, 당해 네트워크의 대역을 계측하는 대역 계측부와, 계측한 대역에 따라, 압축 부호화한 상기 화면 데이터 또는 압축 부호화한 상기 묘화 커맨드(들) 중 어느 것을 상기 단말에 송출할지를 선택하는 선택부와, 압축 부호화한 상기 화면 데이터 또는 압축 부호화한 상기 묘화 커맨드(들) 중 선택된 것을 상기 단말에 송출하는 패킷 송수신부를 포함한다.
본 발명의 제 2 양태에 따르면, 네트워크를 통해 서버 장치에 접속되는 단말이 제공된다. 상기 서버 장치는, 애플리케이션 소프트웨어를 동작시켜서 묘화 커맨드(들)을 실행함으로써 화면 데이터를 생성하는 가상 클라이언트부와, 상기 화면 데이터를 압축 부호화하는 화상 인코드부와, 상기 묘화 커맨드(들)을 압축 부호화하는 묘화 커맨드 인코드부와, 네트워크를 통해 상기 서버 장치에 접속된 단말을 향하여 송출된 패킷에 대한 당해 단말로부터의 응답 패킷에 의거하여, 당해 네트워크의 대역을 계측하는 대역 계측부와, 계측한 대역에 따라, 압축 부호화한 상기 화면 데이터 또는 압축 부호화한 상기 묘화 커맨드(들) 중 어느 것을 상기 단말에 송출할지를 선택하는 선택부와, 압축 부호화한 상기 화면 데이터 또는 압축 부호화한 상기 묘화 커맨드(들) 중 선택된 것을 상기 단말에 송출하는 패킷 송수신부를 포함한다. 상기 단말은, 압축 부호화된 상기 화면 데이터를 복호화하는 화상 디코드부와, 압축 부호화된 상기 묘화 커맨드(들)을 복호화하는 묘화 커맨드 디코더와, 복호화된 상기 묘화 커맨드(들)을 실행함으로써 상기 화면 데이터를 생성하는 화면 묘화부를 포함한다.
본 발명의 제 3 양태에 따르면, 서버 장치와, 네트워크를 통해 상기 서버 장치에 접속되는 단말을 포함하는 씬 클라이언트 시스템이 제공된다. 상기 서버 장치는, 애플리케이션 소프트웨어를 동작시켜서 묘화 커맨드(들)을 실행함으로써 화면 데이터를 생성하는 가상 클라이언트부와, 상기 화면 데이터를 압축 부호화하는 화상 인코드부와, 상기 묘화 커맨드(들)을 압축 부호화하는 묘화 커맨드 인코드부와, 상기 단말을 향하여 송출된 패킷에 대한 상기 단말로부터의 응답 패킷에 의거하여 상기 네트워크의 대역을 계측하는 대역 계측부와, 계측한 대역에 따라, 압축 부호화한 상기 화면 데이터 또는 압축 부호화한 상기 묘화 커맨드(들) 중 어느 것을 상기 단말에 송출할지를 선택하는 선택부와, 압축 부호화한 상기 화면 데이터 또는 압축 부호화한 상기 묘화 커맨드(들) 중 선택된 것을 상기 단말에 송출하는 패킷 송수신부를 포함한다. 상기 단말은, 압축 부호화된 상기 화면 데이터를 복호화하는 화상 디코드부와, 압축 부호화된 상기 묘화 커맨드(들)을 복호화하는 묘화 커맨드 디코더와, 복호화된 상기 묘화 커맨드(들)을 실행함으로써 상기 화면 데이터를 생성하는 화면 묘화부를 포함한다.
본 발명의 제 4 양태에 따른 화면 송신 방법은, 애플리케이션 소프트웨어를 동작시켜서 묘화 커맨드(들)을 실행함으로써 화면 데이터를 생성하는 공정과, 상기 화면 데이터 또는 상기 묘화 커맨드(들)을 압축 부호화하는 공정과, 네트워크를 통해 상기 서버 장치에 접속된 단말을 향하여 송출된 패킷에 대한 당해 단말로부터의 응답 패킷에 의거하여, 당해 네트워크의 대역을 계측하는 공정과, 계측한 대역에 따라, 압축 부호화한 상기 화면 데이터 또는 압축 부호화한 상기 묘화 커맨드(들) 중 어느 것을 상기 단말에 송출할지를 선택하는 공정과, 압축 부호화한 상기 화면 데이터 또는 압축 부호화한 상기 묘화 커맨드(들) 중 선택된 것을 상기 단말에 송출하는 공정을 포함한다.
본 발명의 제 5 양태에 따른 프로그램은, 애플리케이션 소프트웨어를 동작시켜서 묘화 커맨드(들)을 실행함으로써 화면 데이터를 생성하는 처리와, 상기 화면 데이터 또는 상기 묘화 커맨드(들)을 압축 부호화하는 처리와, 네트워크를 통해 상기 서버 장치에 접속된 단말을 향하여 송출된 패킷에 대한 당해 단말로부터의 응답 패킷에 의거하여, 당해 네트워크의 대역을 계측하는 처리와, 계측한 대역에 따라, 압축 부호화한 상기 화면 데이터 또는 압축 부호화한 상기 묘화 커맨드(들) 중 어느 것을 상기 단말에 송출할지를 선택하는 처리와, 압축 부호화한 상기 화면 데이터 또는 압축 부호화한 상기 묘화 커맨드 중 선택된 것을 상기 단말에 송출하는 처리를, 컴퓨터에 실행시킨다. 또, 프로그램은, 비일시적 컴퓨터 판독가능한 기록매체(non-transitory computer-readable storage medium)에 기록된 프로그램 제품으로서 제공될 수도 있다.
본 발명에 따른 서버 장치, 휴대 단말, 씬 클라이언트 시스템, 방법 및 프로그램에 의하면, 씬 클라이언트 서버 장치와 클라이언트 단말 사이의 네트워크 대역이 변동했을 경우에, 클라이언트 단말에 있어서의 화면 표시 지연을 막는 것이 가능해진다.
도 1은 제 1 실시형태에 따른 씬 클라이언트 시스템의 접속 구성을 일례로서 나타낸 도면.
도 2는 제 1 실시형태에 따른 씬 클라이언트 시스템에 있어서의 서버 장치의 구성을 일례로서 나타낸 블록도.
도 3은 제 1 실시형태에 따른 씬 클라이언트 시스템에 있어서의 서버 장치에 포함되는 제어부의 구성을 일례로서 나타낸 블록도.
도 4는 제 1 실시형태에 따른 씬 클라이언트 시스템에 있어서의 서버 장치에 포함되는 화상 인코드부의 구성을 일례로서 나타낸 블록도.
도 5는 제 1 실시형태에 따른 씬 클라이언트 시스템에 있어서의 휴대 단말에 탑재되는 클라이언트 소프트웨어의 구성을 일례로서 나타낸 블록도.
도 2는 제 1 실시형태에 따른 씬 클라이언트 시스템에 있어서의 서버 장치의 구성을 일례로서 나타낸 블록도.
도 3은 제 1 실시형태에 따른 씬 클라이언트 시스템에 있어서의 서버 장치에 포함되는 제어부의 구성을 일례로서 나타낸 블록도.
도 4는 제 1 실시형태에 따른 씬 클라이언트 시스템에 있어서의 서버 장치에 포함되는 화상 인코드부의 구성을 일례로서 나타낸 블록도.
도 5는 제 1 실시형태에 따른 씬 클라이언트 시스템에 있어서의 휴대 단말에 탑재되는 클라이언트 소프트웨어의 구성을 일례로서 나타낸 블록도.
먼저, 일 실시형태의 개요에 대해서 설명한다. 또, 이 개요에 부기하는 도면 참조 부호는, 오로지 이해를 돕기 위한 예시이며, 본 발명을 도시된 형태로 한정하는 것을 의도하는 것은 아니다.
도 1은 본 발명에 따른 씬 클라이언트 시스템의 접속 구성을 일례로서 나타낸 도면이다. 도 1을 참조하면, 씬 클라이언트 시스템은, 씬 클라이언트 서버에 상당하는 서버 장치(110)와, 씬 클라이언트 단말에 상당하는 단말로서, 네트워크(예를 들면, 모바일 네트워크(150))를 통해 서버 장치(110)에 접속되는 단말(예를 들면, 휴대 단말(170))을 구비한다.
도 2는 서버 장치(110)의 구성을 일례로서 나타낸 블록도이다. 또한, 도 3은 서버 장치(110)에 포함되는 제어부(185)의 구성을 일례로서 나타낸 블록도이다. 도 2 및 도 3을 참조하면, 서버 장치(110)는, 애플리케이션 소프트웨어를 동작시켜서 묘화 커맨드(들)을 실행함으로써 화면 데이터를 생성하는 가상 클라이언트부(211)와, 화면 데이터를 압축 부호화하는 화상 인코드부(186)와, 묘화 커맨드(들)을 압축 부호화하는 묘화 커맨드 인코드부(183)와, 단말(170)을 향하여 송출된 패킷에 대한 단말(170)로부터의 응답 패킷에 의거하여 네트워크(150)의 대역을 계측하는 대역 계측부(203)와, 계측한 대역에 따라, 압축 부호화한 화면 데이터 또는 압축 부호화한 묘화 커맨드(들) 중 어느 것을 단말(170)에 송출할지를 선택하는 선택부(202)와, 압축 부호화한 화면 데이터 또는 압축 부호화한 묘화 커맨드(들) 중 선택된 것을 단말(170)에 송출하는 패킷 송수신부(176)를 포함한다.
도 5는 단말(170)에 탑재되는 클라이언트 소프트웨어(171)의 구성을 일례로서 나타낸 블록도이다. 도 5를 참조하면, 단말(170)은, 압축 부호화된 화면 데이터를 복호화하는 화상 디코드부(254)와, 압축 부호화된 묘화 커맨드(들)을 복호화하는 묘화 커맨드 디코더(259)와, 복호화된 묘화 커맨드(들)을 실행함으로써 화면 데이터를 생성하는 화면 묘화부(260)를 갖는다.
선택부(202)는, 계측한 대역이 소정의 임계값 이상인 경우, 압축 부호화한 화면 데이터를 선택하고, 그 이외의 경우, 압축 부호화한 묘화 커맨드(들)을 선택할 수 있다.
이러한 씬 클라이언트 시스템에 의하면, 씬 클라이언트 서버 장치와 클라이언트 단말 사이의 네트워크의 대역이 변동했을 경우에, 클라이언트 단말에 있어서의 화면 표시 지연을 막는 것이 가능해진다. 왜냐하면, 네트워크의 대역이 좁은 경우에, 압축 부호화한 화면 데이터보다도 데이터량이 작은 압축 부호화한 묘화 커맨드들을 클라이언트 단말에 송출하고, 클라이언트 단말에서 묘화 커맨드들을 실행하여 화면 데이터를 생성함으로써, 데이터 전송의 지연에 의한 화면 표시의 지연을 막을 수 있기 때문이다.
도 4는 서버 장치(110)에 포함되는 화상 인코드부(186)의 구성을 일례로서 나타낸 블록도이다. 도 4를 참조하면, 화상 인코드부(186)는, 화면 데이터가 나타내는 화상 중 제 1 영역(예를 들면, 동영상 영역)에 대응하는 데이터를 제 1 압축 부호화 방식에 의거하여 압축 부호화하는 제 1 화상 인코더(227)와, 화상으로부터 제 1 영역을 제외하여 얻어진 제 2 영역(예를 들면, 정지영상 영역)에 대응하는 데이터를 제 2 압축 부호화 방식에 의거하여 압축 부호화하는 제 2 화상 인코더(228)를 포함한다. 또한, 도 5를 참조하면, 단말(170)의 화상 디코드부(254)는, 제 1 화상 인코더(227)에 의해 압축 부호화된 데이터를 복호화하는 제 1 화상 디코더(252)와, 제 2 화상 인코더(228)에 의해 압축 부호화된 데이터를 복호화하는 제 2 화상 디코더(253)를 구비하고, 단말(170)은 제 1 화상 디코더(252)에 의해 복호화된 제 1 영역(동영상 영역)의 데이터 및 제 2 화상 디코더(253)에 의해 복호화된 제 2 영역(정지영상 영역)의 데이터를 더하여, 화면 데이터가 나타내는 화상을 생성하는 화면 표시부(256)를 구비할 수 있다.
이러한 씬 클라이언트 시스템에 의하면, 화면 데이터가 나타내는 화상(들)에 동영상 영역 및 정지영상 영역이 포함되는 경우에, 화면 데이터 전부를 압축 부호화하여 서버 장치(110)로부터 단말(170)에 송출했을 때와 비교하여, 서버 장치(110)에서 압축 부호화해야 할 데이터량, 서버 장치(110)로부터 단말(170)에 대하여 송출해야 할 데이터량, 및, 단말(170)에서 복호화해야 할 데이터량을, 모두 삭감할 수 있다. 따라서, 이러한 씬 클라이언트 시스템에 의하면, 서버 장치(110) 및 단말(170)에서의 처리 부하 및 처리 시간을 삭감할 수 있으며, 또한 데이터 송신 시간을 삭감할 수 있게 된다.
또, 본 발명에 있어서, 하기의 형태가 가능하다.
[형태 1]
상기 제 1 양태에 따른 서버 장치와 같다.
[형태 2]
상기 선택부는, 계측한 대역이 소정의 임계값 이상인 경우, 압축 부호화한 상기 화면 데이터를 선택하고, 그 이외의 경우, 압축 부호화한 상기 묘화 커맨드(들)을 선택할 수 있다.
[형태 3]
상기 응답 패킷은, 상기 서버 장치로부터 상기 단말을 향하여 송출된 패킷의 데이터 사이즈 및 당해 패킷의 상기 단말에 의한 수신 시각을 포함하고, 상기 대역 계측부는, 상기 응답 패킷에 포함되는 상기 데이터 사이즈 및 상기 수신 시각에 의거하여 상기 네트워크의 대역을 계측할 수 있다.
[형태 4]
상기 화상 인코드부는, 상기 화면 데이터가 나타내는 화상 중 제 1 영역에 대응하는 데이터를 제 1 압축 부호화 방식에 의거하여 압축 부호화하는 제 1 화상 인코더와, 상기 화상으로부터 상기 제 1 영역을 제외하여 얻어진 제 2 영역에 대응하는 데이터를 제 2 압축 부호화 방식에 의거하여 압축 부호화하는 제 2 화상 인코더를 포함할 수 있다.
[형태 5]
상기 제 1 영역은, 상기 화면 데이터가 나타내는 화상 중 동영상 영역이며, 상기 제 2 영역은, 상기 화면 데이터가 나타내는 화상 중 정지영상 영역일 수 있다.
[형태 6]
상기 제 2 양태에 따른 단말과 같다.
[형태 7]
상기 화상 인코드부는, 상기 화면 데이터가 나타내는 화상 중 제 1 영역에 대응하는 데이터를 제 1 압축 부호화 방식에 의거하여 압축 부호화하는 제 1 화상 인코더와, 상기 화상으로부터 상기 제 1 영역을 제외하여 얻어진 제 2 영역에 대응하는 데이터를 제 2 압축 부호화 방식에 의거하여 압축 부호화하는 제 2 화상 인코더를 포함할 수 있다. 상기 화상 디코드부는, 상기 제 1 화상 인코더에 의해 압축 부호화된 데이터를 복호화하는 제 1 화상 디코더와, 상기 제 2 화상 인코더에 의해 압축 부호화된 데이터를 복호화하는 제 2 화상 디코더를 포함할 수 있다. 상기 단말은, 상기 제 1 화상 디코더에 의해 복호화된 상기 제 1 영역의 데이터 및 상기 제 2 화상 디코더에 의해 복호화된 상기 제 2 영역의 데이터를 더하여, 상기 화면 데이터가 나타내는 화상을 생성하는 화면 표시부를 포함할 수 있다.
[형태 8]
상기 제 1 영역은, 상기 화면 데이터가 나타내는 화상 중 동영상 영역이며, 상기 제 2 영역은, 상기 화면 데이터가 나타내는 화상 중 정지영상 영역일 수 있다.
[형태 9]
상기 제 3 양태에 따른 씬 클라이언트 시스템과 같다.
[형태 10]
상기 선택부는, 계측한 대역이 소정의 임계값 이상인 경우, 압축 부호화한 상기 화면 데이터를 선택하고, 그 이외의 경우, 압축 부호화한 상기 묘화 커맨드(들)을 선택할 수 있다.
[형태 11]
상기 응답 패킷은, 상기 서버 장치로부터 상기 단말을 향하여 송출된 패킷의 데이터 사이즈 및 당해 패킷의 상기 단말에 의한 수신 시각을 포함하고, 상기 대역 계측부는, 상기 응답 패킷에 포함되는 상기 데이터 사이즈 및 상기 수신 시각에 의거하여 상기 네트워크의 대역을 계측할 수 있다.
[형태 12]
상기 화상 인코드부는, 상기 화면 데이터가 나타내는 화상 중 제 1 영역에 대응하는 데이터를 제 1 압축 부호화 방식에 의거하여 압축 부호화하는 제 1 화상 인코더와, 상기 화상으로부터 상기 제 1 영역을 제외하여 얻어진 제 2 영역에 대응하는 데이터를 제 2 압축 부호화 방식에 의거하여 압축 부호화하는 제 2 화상 인코더를 포함할 수 있다.
[형태 13]
상기 화상 디코드부는, 상기 제 1 화상 인코더에 의해 압축 부호화된 데이터를 복호화하는 제 1 화상 디코더와, 상기 제 2 화상 인코더에 의해 압축 부호화된 데이터를 복호화하는 제 2 화상 디코더를 포함하고, 상기 단말은, 상기 제 1 화상 디코더에 의해 복호화된 상기 제 1 영역의 데이터 및 상기 제 2 화상 디코더에 의해 복호화된 상기 제 2 영역의 데이터를 더하여, 상기 화면 데이터가 나타내는 화상을 생성하는 화면 표시부를 포함할 수 있다.
[형태 14]
상기 제 1 영역은, 상기 화면 데이터가 나타내는 화상 중 동영상 영역이며, 상기 제 2 영역은, 상기 화면 데이터가 나타내는 화상 중 정지영상 영역일 수 있다.
[형태 15]
상기 제 4 양태에 따른 화면 송신 방법과 같다.
[형태 16]
상기 선택하는 공정은, 계측한 대역이 소정의 임계값 이상인 경우, 압축 부호화한 상기 화면 데이터를 선택하고, 그 이외의 경우, 압축 부호화한 상기 묘화 커맨드(들)을 선택하는 것을 포함할 수 있다.
[형태 17]
화면 송신 방법은, 상기 화면 데이터가 나타내는 화상 중 제 1 영역에 대응하는 데이터를 제 1 압축 부호화 방식에 의거하여 압축 부호화하는 공정과, 상기 화상으로부터 상기 제 1 영역을 제외하여 얻어진 제 2 영역에 대응하는 데이터를 제 2 압축 부호화 방식에 의거하여 압축 부호화하는 공정을 포함할 수 있다.
[형태 18]
상기 제 1 영역은, 상기 화면 데이터가 나타내는 화상 중 동영상 영역이며, 상기 제 2 영역은, 상기 화면 데이터가 나타내는 화상 중 정지영상 영역일 수 있다.
[형태 19]
상기 제 5 양태에 따른 프로그램과 같다.
[형태 20]
상기 선택하는 처리는, 계측한 대역이 소정의 임계값 이상인 경우, 압축 부호화한 상기 화면 데이터를 선택하고, 그 이외의 경우, 압축 부호화한 상기 묘화 커맨드(들)을 선택하는 것을 포함할 수 있다.
[형태 21]
상기 프로그램은, 상기 화면 데이터가 나타내는 화상 중 제 1 영역에 대응하는 데이터를 제 1 압축 부호화 방식에 의거하여 압축 부호화하는 처리와, 상기 화상으로부터 상기 제 1 영역을 제외하여 얻어진 제 2 영역에 대응하는 데이터를 제 2 압축 부호화 방식에 의거하여 압축 부호화하는 처리를, 상기 컴퓨터에 실행시킬 수 있다.
[형태 22]
상기 제 1 영역은, 상기 화면 데이터가 나타내는 화상 중 동영상 영역이며, 상기 제 2 영역은, 상기 화면 데이터가 나타내는 화상 중 정지영상 영역일 수 있다.
(제 1 실시형태)
제 1 실시형태에 따른 씬 클라이언트 시스템의 구성 및 동작에 대해서, 도면을 참조하여 상세하게 설명한다. 여기에서는, 씬 클라이언트 시스템의 일례로서, 씬 클라이언트 단말에 상당하는 휴대 단말이 네트워크를 경유하여 씬 클라이언트 서버에 상당하는 서버 장치에 액세스하는 리모트형 휴대 통신 시스템에 대해서 설명한다. 단, 본 발명에 따른 씬 클라이언트 시스템의 적용 대상은, 이러한 시스템에 한정되지 않는다.
도 1은 본 실시형태에 따른 씬 클라이언트 시스템의 접속 구성을 일례로서 나타낸다. 도 1은 네트워크로서, 모바일 네트워크(150)를 사용하는 예를 나타낸다. 또한, 도 1은 패킷 전송 장치로서, SGSN/GGSN 장치를 사용하는 경우의 구성을 나타낸다. 여기에서, SGSN/GGSN 장치란, SGSN(Serving General packet radio service Support Node) 장치와 GGSN(Gateway General packet radio service Support Node) 장치를 일체화한 장치이다. 또한, 도 1은 일례로서, 씬 클라이언트 서버 장치(110)가 클라우드망(130)상에 배치되어 있으며, 클라우드망(130)과 모바일 네트워크(150)가 접속된 구성을 나타낸다.
도 1에 있어서, 엔드유저(end user)는, 휴대 단말(170)을 클라우드망(130)에 배치된 서버 장치(110)의 가상 클라이언트에 접속하고, 가상 클라이언트를 마치 실제의 단말을 조작하는 것처럼 조작한다. 그 때문에, 휴대 단말(170)의 클라이언트 소프트웨어로부터, 모바일 네트워크(150)상의 기지국 장치(194), RNC(Radio Network Controller) 장치(195) 및 SGSN/GGSN 장치(190)를 경유하여, 서버 장치(110)에 대하여, 조작 신호를 격납한 패킷(조작 신호 패킷)을 송출한다. 여기에서, 조작 신호란, 휴대 단말(170)에서의 키 조작, 화면에의 터치 조작, 문자 입력, 스크롤 등의 조작에 의해, 휴대 단말(170)로부터 서버 장치(110)에 송출되는 신호이다.
휴대 단말(170)에 탑재된 클라이언트 소프트웨어의 패킷 송신부에서 송출된 조작 신호 패킷은, 모바일 네트워크(150)상에 마련된 기지국 장치(194), RNC 장치(195) 및 SGSN/GGSN 장치(190)를 거쳐서, 클라우드망(130)상의 서버 장치(110)에 도달한다. 이에 따라, 서버 장치(110)는, 조작 신호를 수신한다. 조작 신호를 송출할 때의 프로토콜로서, 기존의 프로토콜을 사용할 수 있다. 여기에서는, 일례로서, UDP/IP(User Datagram Protocol/Internet Protocol)를 사용하는 것으로 한다. 단, TCP/IP(Transmission Control Protocol/Internet Protocol) 등을 사용할 수도 있다.
도 2는 서버 장치(110)의 구성을 일례로서 나타낸 블록도이다. 도 2를 참조하면, 서버 장치(110)는, 조작 신호 패킷 수신부(182), 가상 클라이언트부(211), 화면 캡쳐부(180), 묘화 커맨드 수집부(181), 제어부(185), 화상 인코드부(186), 오디오 인코드부(187), 묘화 커맨드 인코드부(183), 패킷 송수신부(176), 및 패킷 송신부(177)를 구비한다.
조작 신호 패킷 수신부(182)는 휴대 단말(170)로부터, 기지국 장치(194), RNC 장치(195) 및 SGSN/GGSN 장치(190)를 경유하여, 조작 신호를 격납한 패킷을 수신한다. 조작 신호 패킷 수신부(182)는 수신한 UDP/IP 패킷으로부터 조작 신호를 추출하여, 가상 클라이언트부(211)에 출력한다.
가상 클라이언트부(211)는, 각종 서비스에 대응한 애플리케이션 소프트웨어, 제어부, 화면 생성부, 캐시 메모리 등을 갖는다. 또한, 서버 장치(110)의 외부로부터 애플리케이션 소프트웨어의 갱신을 용이하게 행할 수 있는 구성으로 되어 있다. 가상 클라이언트부(211)는, 조작 신호 패킷 수신부(182)로부터 수신되는 조작 신호를 해석하고, 조작 신호에서 지정된 애플리케이션 소프트웨어를 기동하고, 애플리케이션 소프트웨어 및 OS(Operating System)에 의해, 미리 정해진 화면 해상도에서 화면을 생성하고, 생성한 화면을 화면 캡쳐부(180)에 출력한다. 또한, 가상 클라이언트부(211)는, 화면을 생성·묘화할 때에 실행되는 묘화 커맨드들을, 묘화 커맨드 수집부(181)에 출력한다.
묘화 커맨드 수집부(181)는, 가상 클라이언트부(211)로부터 출력되는 묘화 커맨드 군을 화면마다 수집하고, 화면마다 임시 저장한 후, 제어부(185)에 출력한다.
화면 캡쳐부(180)는, 미리 정해진 화면 해상도 및 프레임 레이트에서, 상기 화면을 캡쳐하여 출력한다.
화면 캡쳐부(180)는, 캡쳐한 화면을 미리 정해진 사이즈의 복수개의 블록으로 분할한다. 여기에서는, 일례로서, 블록의 사이즈를, 16화소×16라인으로 한다. 단, 다른 사이즈, 예를 들면, 8화소×8라인이나 4화소×4라인 등을 사용할 수도 있다. 블록의 사이즈를 작게 함에 따라, 제어부(185)에 있어서의 판별 정밀도가 향상되지만, 제어부(185)에 의한 처리량은 증대된다. 화면 캡쳐부(180)는, 분할한 블록을 제어부(185)에 출력한다.
도 3은 제어부(185)의 구성을 일례로서 나타낸 블록도이다. 도 3을 참조하면, 제어부(185)는, 대역 계측부(203) 및 선택부(202)를 갖는다.
대역 계측부(203)는, 네트워크의 대역을 계측한다.
선택부(202)는 대역 계측부(203)에서 구한 대역 계측값에 의거하여, 화면을 전송할지, 묘화 커맨드들을 전송할지를 판정한다.
대역 계측부(203)는, 미리 정해진 타이밍에, 도 2에 나타낸 패킷 송수신부(176)에 대하여, 특정 패킷들(프로브 패킷들)을 송출하도록 지시한다. 패킷 송수신부(176)는, 지시에 따라, 지시를 받은 타이밍에서 특정 패킷들을 휴대 단말(170)을 향해서, 복수 패킷 이상 연속하여 송출한다.
여기에서, 복수 패킷이란, 2개 이상의 패킷을 말한다. 또한, 송출하는 순서는 미리 정해진 순서로 하고, 예를 들면, 데이터 사이즈가 작은 패킷으로부터 데이터 사이즈가 큰 패킷까지 순서대로 송출할 수 있다. 또한, 패킷과 다음 패킷 사이의 시간 간격은, 미리 정해진 시간 구간으로 한다. 여기에서, 패킷들을 송출하기 위한 프로토콜의 일례로서, UDP/IP를 사용할 수 있다. 단, 패킷을 송출하기 위한 프로토콜은, 이것에 한정되지 않는다.
패킷 송수신부(176)는, 휴대 단말(170)로부터의 응답 패킷을 수신한다. 여기에서, 응답 패킷은, 예를 들면, 휴대 단말(170)에서 지연 임계값 이하로 수신되는 데이터 사이즈, 패킷 번호, 서버 장치(110)로부터의 송신 시각, 휴대 단말(170)에서의 수신 시각의 정보를 포함한다.
패킷 송수신부(176)는, 수신한 응답 패킷으로부터, 지연 임계값 이하로 수신되는 데이터 사이즈, 패킷 번호, 서버 장치(110)로부터의 송신 시각, 휴대 단말(170)에서의 수신 시각의 정보를 추출하고, 이들을 도 3의 대역 계측부(203)에 출력한다.
대역 계측부(203)는, 지연 임계값 이하로 수신되는 데이터 사이즈, 패킷 번호, 서버 장치(110)로부터의 송신 시각, 휴대 단말(170)에서의 수신 시각의 정보를 받아서, 식(1)에 따라 네트워크의 대역 W를 산출한다.
D(N)/W=R(N)-R(N-1) (1)
식(1)에 있어서, D(N)는 서버 장치(110)로부터 N 번째로 송출된 패킷의 패킷 사이즈를 나타낸다. 여기에서, N, D(N)에는, 각각, 휴대 단말(170)에 있어서 지연 임계값 이하로 수신되는 패킷 번호, 데이터 사이즈를 입력한다. 또한, R(N)은 서버 장치(110)로부터 N 번째로 송출된 패킷의 휴대 단말(170)에서의 수신 시각을 나타낸다. 한편, R(N-1)은 서버 장치(110)로부터 N-1번째로 송출된 패킷의 휴대 단말(170)에서의 수신 시각을 나타낸다.
다음으로, 대역 계측부(203)는, 대역 계측값 W를, 식(2)에 의거하여 시간적으로 평활화한다.
B(n)=(1-β)B(n-1)+βW (2)
식(2)에 있어서, B(n)는 제 n 시각의 평활화 후의 대역 계측값을 나타낸다. 또한, β는 0<β<1의 범위의 정수이다. 또, 대역 계측부(203)는, 불필요한 경우(예를 들면, 대역 변동이 적은 경우), 식(2)에 의거하는 시간 방향의 평활화를 생략해도 된다.
도 2의 패킷 송수신부(176)는, 예를 들면, 세션 접속시에만, 또는, 세션 접속시 및 세션 접속시를 기점으로 하여 미리 정해진 시간 간격마다, 네트워크 대역 계측에 필요한 정보를 휴대 단말(170)에 송출함과 함께, 정기적으로 휴대 단말(170)로부터 응답 신호를 수신한다.
도 3의 선택부(202)는 대역 계측부(203)로부터, 네트워크 대역 계측값 B(n)를 수신한다. 네트워크 대역 계측값 B(n)가 미리 정해진 임계값 Th1 이상인 경우, 선택부(202)는 화면 전송으로 판단한다. 이 경우, 선택부(202)는 플래그 F를 0으로 하고, 도 2의 화상 인코드부(186) 및 패킷 송수신부(176)에 대하여, 플래그 F를 출력한다.
한편, 대역 계측값 B(n)가 임계값 Th1 미만인 경우, 선택부(202)는 커맨드(들) 전송으로 판단한다. 이 경우, 선택부(202)는 플래그 F를 1로 하고, 도 2의 묘화 커맨드 인코드부(183) 및 패킷 송수신부(176)에 대하여, 플래그 F를 출력한다.
도 4는 화상 인코드부(186)의 구성을 일례로서 나타낸 블록도이다. 도 4를 참조하면, 화상 인코드부(186)는, 제 1 화상 인코더(227) 및 제 2 화상 인코더(228)를 구비한다.
제 1 화상 인코더(227)는, 제어부(185)로부터 플래그 F를 수신하고, 플래그 F가 0, 즉, 화면 전송인 경우, 화면 캡쳐부(180)로부터 화상 신호를 입력하고, 미리 정해진 동영상 인코더를 사용하여 압축 부호화한 후, 압축 후의 비트 스트림을 도 2의 패킷 송수신부(176)에 출력한다. 여기에서는, 미리 정해진 동영상 인코더로서, H.264를 사용하는 것으로 한다. 단, 다른 기존의 동영상 코덱, 예를 들면, MPEG(Moving Picture Experts Group)-4는 HEVC(High Efficiency Video Coding) 등을 사용할 수도 있다. 또한, 제 1 화상 인코더(227)는, 동영상 영역의 영역 정보를 도 2의 패킷 송수신부(176)에 출력한다.
제 2 화상 인코더(228)는, 화상 캡쳐부(180)로부터 캡쳐 화상(들)을 수신하고, 제어부(185)로부터 플래그 F를 수신하고, 플래그 F가 0일 때, 정지영상 영역의 범위를 수신하고, 정지영상인 경우에는, 정지영상 코덱을 사용하여 화상(들)을 압축 부호화하여, 도 2의 패킷 송수신부(176)에 출력한다. 여기에서는, 제 2 화상 인코더(228)는, 정지영상 코덱으로서, JPEG(Joint Photographic Experts Group) 2000을 사용하는 것으로 한다. 단, 다른 기존의 코덱, 예를 들면, JPEG 등을 사용할 수도 있다.
묘화 커맨드 인코드부(183)는, 제어부(185)로부터 플래그 F를 수신하고, 플래그 F가 1, 즉, 묘화 커맨드 전송인 경우, 묘화 커맨드 수집부(181)로부터 화면마다 묘화 커맨드 군을 수신하고, 미리 정해진 압축 방식에 의해 묘화 커맨드 군을 무손실 부호화(lossless encoding)하고, 압축 부호화한 결과를 패킷 송수신부(176)에 출력한다. 여기에서, 묘화 커맨드 수집부(181)는, 미리 정해진 압축 방식으로서, Zip 압축 방식 등의 기존의 무손실 부호화 방식을 사용할 수 있다.
다음으로, 화면에 오디오가 부수되는 경우에는, 오디오 인코드부(187)는, 화면 캡쳐부(180)로부터 화면에 부수되는 오디오 신호를 수신하고, 오디오 인코더에 의해 압축 부호화하여 도 2의 패킷 송신부(177)에 출력한다. 여기에서는, 오디오 인코드부(187)는, 오디오 인코더로서, MPEG-4 AAC(Advanced Audio Coding)를 사용하는 것으로 한다. 단, 오디오 인코드부(187)는, 다른 기존의 오디오 인코더를 사용할 수도 있다.
도 2로 돌아가서, 패킷 송수신부(176)는, 제어부(185)로부터 플래그 F를 수신한다. 또한, 패킷 송수신부(176)는, 플래그 F가 0인 경우, 화상 인코드부(186)로부터 압축 부호화 비트 스트림을 수신하여, 플래그 F가 1인 경우, 묘화 커맨드 인코드부(183)로부터 압축 부호화된 묘화 커맨드들을 수신한다. 또한, 패킷 송수신부(176)는, 플래그 F, 압축 부호화된 비트 스트림, 압축 부호화된 묘화 커맨드들을 패킷의 페이로드에 격납하고, 미리 정해진 프로토콜에 의한 패킷을 구축하여, 도 1의 SGSN/GGSN 장치(190)에 송출한다. 여기에서는, 패킷 송수신부(176)는, 미리 정해진 프로토콜로서, UDP/IP를 사용하는 것으로 한다. 단, 패킷 송수신부(176)는, 기존의 프로토콜로서, RTP(Real-time Transport Protocol)/UDP/IP, TCP/IP 등을 사용할 수도 있다.
또한, 패킷 송수신부(176)는, 휴대 단말(170)로부터 수신한 응답 신호를 도 3의 대역 계측부(203)에 출력한다.
패킷 송신부(177)는, 오디오 신호에 대한 압축 부호화 비트 스트림을 패킷의 페이로드에 격납하고, 미리 정해진 프로토콜에 의한 패킷을 구축하여, SGSN/GGSN 장치(190)에 송출한다. 여기에서는, 패킷 송신부(177)는, 미리 정해진 프로토콜로서, UDP/IP를 사용하는 것으로 한다. 단, 패킷 송수신부(177)는, 기존의 프로토콜로서, RTP/UDP/IP, TCP/IP 등을 사용할 수도 있다.
도 1의 SGSN/GGSN 장치(190)는, 서버 장치(110)로부터 수신한 패킷들을, GTP-U(General packet radio service Tunneling Protocol User plane) 프로토콜에 의해 터널링하여 RNC 장치(195)에 전송한다.
RNC 장치(195)는, 수신한 패킷들을, 기지국 장치(194)를 통해서 무선에 의해 휴대 단말(170)에 송출한다.
본 실시형태에서는 휴대 단말(170)은, 클라이언트 소프트웨어를 갖는다. 클라이언트 소프트웨어는, 유저가 휴대 단말(170)을 조작했을 때의 조작 신호를 서버 장치(110)에 송출함과 함께, 서버 장치(110)로부터의 패킷들을 수신하고, 압축 부호화 스트림들을 디코드하여 표시시킨다.
도 5는 클라이언트 소프트웨어(171)의 구성을 일례로서 나타낸 블록도이다. 도 5를 참조하면, 클라이언트 소프트웨어(171)는, 패킷 송수신부(250), 제 1 화상 디코더(252), 제 2 화상 디코더(253), 묘화 커맨드 디코더(259), 화면 묘화부(260), 화면 표시부(256), 패킷 수신부(251), 오디오 디코더(255), 조작 신호 생성부(257), 및 패킷 송신부(258)를 구비한다.
패킷 송수신부(250)는 패킷을 수신하고, 패킷에 격납된 플래그 F, 압축 부호화 비트 스트림, 압축 부호화된 묘화 커맨드 정보를 추출한다. 플래그 F가 0, 즉, 화면 전송을 나타내는 경우, 패킷 송수신부(250)는, 제 1 화상 인코더(227)(도 4)에 의해 인코드된 압축 부호화 비트 스트림을 선택 추출하여, 제 1 화상 디코더(252)에 출력한다. 또한, 패킷 송수신부(250)는, 제 2 화상 인코더(228)(도 4)에 의해 인코드된 압축 부호화 비트 스트림을, 제 2 화상 디코더(253)에 출력한다.
제 1 화상 디코더(252)는 압축 부호화된 스트림을 수신하고, 그 압축 부호화된 스트림을 디코드하여 화면 표시부(256)에 출력한다. 또한, 제 1 화상 디코더(252)는 동영상 영역 정보도 화면 표시부(256)에 출력한다. 여기에서는, 제 1 화상 디코더(252)로서, 예를 들면, H.264 디코더를 사용하는 것으로 한다. 단, 제 1 화상 디코더(252)로서, 다른 기존의 화상 디코더, 예를 들면, MPEG-4 디코더 등을 사용할 수도 있다. 또, 서버 장치(110)의 화상 인코드부(186)에 있어서의 제 1 화상 인코더(227)와, 제 1 화상 디코더(252) 사이에서, 동일 종류의 부호화를 사용하는 것은 말할 필요도 없다.
제 2 화상 디코더(253)는, 압축 부호화된 스트림을 수신하고, 그 밖의 영역에 대한 압축 부호화된 스트림을 디코드하여 화면 표시부(256)에 출력한다. 또한, 제 2 화상 디코더(253)는, 그 밖의 영역 정보를 화면 표시부(256)에 출력한다.
화면 표시부(256)는, 제 1 화상 디코더(252)로부터, 제 1 영역 정보와 제 1 영역에서의 화상 신호들을 수신하고, 제 2 화상 디코더(253)로부터, 그 밖의 영역 정보와 그 밖의 영역에서의 화상 신호들을 수신한다. 또한, 화상 표시부(256)는, 제 1 영역 정보를 사용하여, 제 1 화상 디코더(252)로부터의 출력 화상(들)을 제 1 영역에 표시시키고, 그 밖의 영역 정보를 사용하여, 제 2 화상 디코더(253)로부터의 출력 화상(들)을 그 밖의 영역에 표시시킨다. 이와 같이 하여, 화면 표시부(256)는, 각각의 영역의 화상 신호들을 조합시켜서 표시 화면들을 생성하고, 출력한다.
패킷 송수신부(250)는, 플래그 F가 1인 경우, 즉, 묘화 커맨드 전송의 경우, 압축 부호화된 묘화 커맨드 정보를 선택 추출하여, 묘화 커맨드 디코더(259)에 출력한다.
묘화 커맨드 디코더(259)는, 미리 정해진 디코드 방식에 의해 압축 복호화하여, 화면마다 묘화 커맨드 군을 화면 묘화부(260)에 출력한다. 여기에서, 묘화 커맨드 디코더(259)는, 미리 정해진 디코드 방식으로서, 예를 들면, Zip 방식을 사용할 수 있다. 단, 묘화 커맨드 디코더(259)는, 디코드 방식으로서, 다른 기존의 방식을 사용해도 된다.
화면 묘화부(260)는, 화면마다 묘화 커맨드 군을 수신하고, 화면을 묘화 생성하고, 생성한 화면을 화면 표시부(256)에 출력한다.
또한, 패킷 송수신부(250)는, 수신한 프로브 패킷에 대한 응답 신호 패킷을 네트워크에 송출한다. 여기에서, 패킷 송수신부(250)는, 예를 들면, 이하와 같이 응답 신호를 생성한다.
패킷 송수신부(250)는, 도 2의 패킷 송수신부(176)로부터 송출된 복수개의 프로브 패킷 각각을 수신하고, 각 패킷에 대한 지연 시간 T(n)를, 식(3)에 의거하여 계측한다.
T(n)=R(n)-S(n) (3)
식(3)에 있어서, T(n), R(n) 및 S(n)는, 각각, 제 n 번째의 패킷의 지연 시간, 제 n 번째의 패킷의 수신 시각, 및 제 n 번째의 패킷의 송신 시각을 나타낸다.
또한, 패킷 송수신부(250)는, 각 패킷 간의 지연 차분 τ(n)를 식(4)에 의거하여 산출한다.
τ(n)=T(n)-T(n-1) (4)
식(4)에 있어서, τ(n)는 n 번째의 패킷의 지연 차분을 나타낸다.
다음으로, 패킷 송수신부(250)는, τ(n)를 사용하여, 지연 차분이 미리 정해진 임계값 이상인지의 여부를 판정한다. 패킷 송수신부(250)는, τ(n)≥Th3인 경우, n 번째의 패킷에서 지연 차분이 임계값 이상이 된 것으로 판정한다. 그리고, 제 1 패킷 송수신부(250)는, 응답 신호로서, N=n으로 하여, N의 값, 제 N 번째 패킷의 데이터 사이즈, N-1번째 패킷의 데이터 사이즈, 각각의 수신 시각, 송신 시각을 응답 신호 패킷들의 페이로드에 격납한 후, 서버 장치(110)에 대하여 송출한다.
여기에서, 임계값 Th3은 미리 정해 두어도 되고, τ(n)의 일련의 수치를 참조한 후 각 경우마다 결정해도 된다.
또한, 패킷 송수신부(250)는, 판별법으로서, 다른 방법을 사용할 수도 있다. 예를 들면, 패킷 송수신부(250)는, T(n)를 임계값과 비교하여, 임계값 이상이 된 시점의 n을 N으로 하도록 해도 된다.
패킷 수신부(251)는, 패킷들을 수신하고, 패킷에 격납된 오디오에 관한 압축 부호화 비트 스트림을 추출하여, 오디오 디코더(255)에 출력한다.
오디오 디코더(255)는, 압축 부호화 스트림을 수신하여, 디코드한 후, 화면 부분과 동기를 취하여 출력한다. 오디오 디코더(255)로서, 예를 들면 MPEG-4 AAC를 사용할 수 있다. 단, 오디오 디코더(255)로서, 다른 기존의 오디오 디코더를 사용해도 된다. 또, 서버 장치(110)의 오디오 인코드부(187)에 있어서의 오디오 인코더와, 오디오 디코더(255) 사이에서, 동일 종류의 부호화를 사용하는 것은 말할 필요도 없다.
조작 신호 생성부(257)는, 유저가 휴대 단말(170)에 대하여 입력한 조작들, 예를 들면, 화면 터치, 화면 스크롤, 아이콘 터치, 문자 입력 등을 검출하고, 각각에 대한 조작 신호를 생성하여 패킷 송신부(258)에 출력한다.
패킷 송신부(258)는, 조작 신호들을 수신하고, 미리 정해진 프로토콜에 따라 패킷들에 격납하여, 네트워크로 송출한다. 패킷 송신부(258)는, 미리 정해진 프로토콜로서, TCP/IP, UDP/IP 등을 사용할 수 있다. 단, 패킷 송신부(258)가 사용하는 프로토콜은, 이들에 한정되지 않는다.
본 실시형태에 따른 씬 클라이언트 시스템에 대해서, 각종의 변형이 가능하다.
대역 계측부(203)에 있어서의 대역 계측의 방법으로서, 다른 기존의 방법을 사용할 수도 있다. 네트워크 대역 계측의 타이밍으로서, 세션 접속시에 1회, 프로브 패킷을 송출하는 것에 의해 계측하도록 해도 된다. 한편, 세션 접속시에 프로브 패킷을 송출하고, 그 이후, 미리 정해진 시간 간격마다 프로브 패킷을 송출하면서 세션이 접속해제될 때까지 계측하도록 해도 된다. 네트워크 대역폭이 시간적으로 변동하는 경우, 후자의 방법에 의하면, 대역폭의 시간적 변동에 추종할 수 있다.
선택부(202)에 있어서의 판정 방법으로서, 다른 기존의 방법을 사용할 수도 있다.
도 1에 나타낸 모바일 네트워크(150)로서, LTE/EPC(Long Term Evolution/Evolved Packet Core) 네트워크로 할 수도 있다. 또한, 모바일 네트워크(150)로서, WiMax(Worldwide Interoperability for Microwave Access)망이나 WiFi(Wireless Fidelity)망으로 할 수도 있다. 또한, 모바일 네트워크(150)로서, 고정망, NGN(Next Generation Network)망, 인터넷으로 할 수도 있다. 단, 이 경우에는, 휴대 단말(170) 대신, 고정 단말, PC(Personal Computer) 등으로부터의 접속이 된다.
도 1에서는, 서버 장치(110)를 클라우드망(130)에 배치했지만, 인터넷망에 배치할 수도 있다. 또한, 기업에 씬 클라이언트 서버를 두는 경우에는, 서버 장치(110)를 기업망에 배치할 수도 있다. 또한, 다른 구성으로서, 통신사업자 자신이 씬 클라이언트 서버를 설치하는 경우, 모바일 네트워크(150), 고정망 또는 NGN망상에, 서버 장치(110)를 배치할 수도 있다.
본 발명에 의하면, 네트워크를 통해 씬 클라이언트를 사용하는 경우, 서버 장치 측에서 프로브 패킷(들)을 송출하여 네트워크의 대역을 계측하고, 그 계측값에 의거하여 화면을 전송할지 묘화 커맨드들을 전송할지에 관하여 판정하여서, 이들을 전환하여 전송한다. 따라서, 데이터량, 네트워크 지연량, 단말에서의 부하량의 밸런스를 취하는 것이 가능해진다. 이에 따라, 씬 클라이언트 시스템에 있어서, 데이터량의 대폭적인 증가, 응답 시간의 대폭적인 지연, 단말에서의 처리 부하의 대폭적인 증가를 막을 수 있다.
또, 상기 특허문헌의 개시된 내용은 본 명세서에 참조로서 포함된다. 본 발명의 모든 개시(청구범위를 포함)의 범위 내에 있어서, 또한 그 기본적 기술 사상에 의거하여, 실시형태의 변경·조정이 가능하다. 또한, 본 발명의 청구범위의 범위 내에 있어서 각종의 개시 요소(각 청구항의 각 요소, 각 실시형태의 각 요소, 각 도면의 각 요소 등을 포함)의 다양한 조합, 내지, 선택이 가능하다. 즉, 본 발명은, 청구범위를 포함하는 모든 개시, 기술적 사상에 따라서 당업자라면 할 수 있는 각종 변형, 수정을 포함하는 것은 물론이다. 특히, 본 명세서에 기재된 수치 범위에 대해서는, 당해 범위 내에 포함되는 임의의 수치 또는 소범위가, 별도의 기재가 없는 경우에도 구체적으로 기재되어 있는 것으로 해석되어야 한다.
110 서버 장치
130 클라우드망
150 모바일 네트워크
170 휴대 단말
171 클라이언트 소프트웨어
176 패킷 송수신부
177 패킷 송신부
180 화면 캡쳐부
181 묘화 커맨드 수집부
182 조작 신호 패킷 수신부
183 묘화 커맨드 인코드부
185 제어부
186 화상 인코드부
187 오디오 인코드부
190 SGSN/GGSN 장치
194 기지국 장치
195 RNC 장치
202 선택부
203 대역 계측부
211 가상 클라이언트부
227 제 1 화상 인코더
228 제 2 화상 인코더
250 패킷 송수신부
251 패킷 수신부
252 제 1 화상 디코더
253 제 2 화상 디코더
254 화상 디코드부
255 오디오 디코더
256 화면 표시부
257 조작 신호 생성부
258 패킷 송신부
259 묘화 커맨드 디코더
260 화면 묘화부
130 클라우드망
150 모바일 네트워크
170 휴대 단말
171 클라이언트 소프트웨어
176 패킷 송수신부
177 패킷 송신부
180 화면 캡쳐부
181 묘화 커맨드 수집부
182 조작 신호 패킷 수신부
183 묘화 커맨드 인코드부
185 제어부
186 화상 인코드부
187 오디오 인코드부
190 SGSN/GGSN 장치
194 기지국 장치
195 RNC 장치
202 선택부
203 대역 계측부
211 가상 클라이언트부
227 제 1 화상 인코더
228 제 2 화상 인코더
250 패킷 송수신부
251 패킷 수신부
252 제 1 화상 디코더
253 제 2 화상 디코더
254 화상 디코드부
255 오디오 디코더
256 화면 표시부
257 조작 신호 생성부
258 패킷 송신부
259 묘화 커맨드 디코더
260 화면 묘화부
Claims (17)
- 애플리케이션 소프트웨어를 사용하여 묘화 커맨드(drawing command)를 실행함으로써 화면 데이터를 생성하는 가상 클라이언트부;
상기 화면 데이터를 압축 부호화하는 화상 인코드부;
상기 묘화 커맨드를 압축 부호화하는 묘화 커맨드 인코드부;
네트워크를 통해 서버 장치에 접속된 단말을 향하여 송출된 패킷에 대한 상기 단말로부터의 응답 패킷에 의거하여, 상기 네트워크의 대역을 계측하는 대역 계측부;
계측한 대역에 따라, 압축 부호화한 상기 화면 데이터 또는 압축 부호화한 상기 묘화 커맨드 중 어느 것을 상기 단말에 송출할지를 선택하는 선택부; 및
압축 부호화한 상기 화면 데이터 또는 압축 부호화한 상기 묘화 커맨드 중 선택된 것을 상기 단말에 송출하는 패킷 송수신부를 포함하는 서버 장치. - 제 1 항에 있어서,
상기 선택부는, 계측한 대역이 소정의 임계값 이상인 경우, 압축 부호화한 상기 화면 데이터를 선택하고, 그 이외의 경우, 압축 부호화한 상기 묘화 커맨드를 선택하는 서버 장치. - 제 1 항 또는 제 2 항에 있어서,
상기 응답 패킷은, 상기 서버 장치로부터 상기 단말을 향하여 송출된 패킷의 데이터 사이즈 및 상기 패킷의 상기 단말에 의한 수신 시각을 포함하고,
상기 대역 계측부는, 상기 응답 패킷에 포함되는 상기 데이터 사이즈 및 상기 수신 시각에 의거하여 상기 네트워크의 대역을 계측하는 서버 장치. - 제 1 항 또는 제 2 항에 있어서,
상기 화상 인코드부는,
상기 화면 데이터가 나타내는 화상 중 제 1 영역에 대응하는 데이터를, 제 1 압축 부호화 방식에 의거하여 압축 부호화하는 제 1 화상 인코더; 및
상기 화상으로부터 상기 제 1 영역을 제외하여 얻어진 제 2 영역에 대응하는 데이터를, 제 2 압축 부호화 방식에 의거하여 압축 부호화하는 제 2 화상 인코더를 포함하는 서버 장치. - 제 4 항에 있어서,
상기 제 1 영역은, 상기 화면 데이터가 나타내는 화상 중 동영상 영역(video region)이며,
상기 제 2 영역은, 상기 화면 데이터가 나타내는 화상 중 정지영상 영역(still image region)인 서버 장치. - 애플리케이션 소프트웨어를 사용하여 묘화 커맨드를 실행함으로써 화면 데이터를 생성하는 가상 클라이언트부;
상기 화면 데이터를 압축 부호화하는 화상 인코드부;
상기 묘화 커맨드를 압축 부호화하는 묘화 커맨드 인코드부;
네트워크를 통해 서버 장치에 접속된 단말을 향하여 송출된 패킷에 대한 상기 단말로부터의 응답 패킷에 의거하여, 상기 네트워크의 대역을 계측하는 대역 계측부;
계측한 대역에 따라, 압축 부호화한 상기 화면 데이터 또는 압축 부호화한 상기 묘화 커맨드 중 어느 것을 상기 단말에 송출할지를 선택하는 선택부; 및
압축 부호화한 상기 화면 데이터 또는 압축 부호화한 상기 묘화 커맨드 중 선택된 것을 상기 단말에 송출하는 패킷 송수신부를 포함하는 서버 장치에 대하여, 상기 네트워크를 통해 접속되는 단말로서,
압축 부호화된 상기 화면 데이터를 복호화하는 화상 디코드부;
압축 부호화된 상기 묘화 커맨드를 복호화하는 묘화 커맨드 디코더; 및
복호화된 상기 묘화 커맨드를 실행함으로써 상기 화면 데이터를 생성하는 화면 묘화부를 포함하는 단말. - 제 6 항에 있어서,
상기 화상 인코드부는,
상기 화면 데이터가 나타내는 화상 중 제 1 영역에 대응하는 데이터를 제 1 압축 부호화 방식에 의거하여 압축 부호화하는 제 1 화상 인코더; 및
상기 화상으로부터 상기 제 1 영역을 제외하여 얻어진 제 2 영역에 대응하는 데이터를 제 2 압축 부호화 방식에 의거하여 압축 부호화하는 제 2 화상 인코더를 포함하고,
상기 화상 디코드부는,
상기 제 1 화상 인코더에 의해 압축 부호화된 데이터를 복호화하는 제 1 화상 디코더; 및
상기 제 2 화상 인코더에 의해 압축 부호화된 데이터를 복호화하는 제 2 화상 디코더를 포함하고,
상기 단말은, 상기 제 1 화상 디코더에 의해 복호화된 상기 제 1 영역의 데이터 및 상기 제 2 화상 디코더에 의해 복호화된 상기 제 2 영역의 데이터를 더하여, 상기 화면 데이터가 나타내는 화상을 생성하는 화면 표시부를 포함하는 단말. - 서버 장치; 및
네트워크를 통해 상기 서버 장치에 접속되는 단말을 포함하는 씬 클라이언트 시스템으로서,
상기 서버 장치는,
애플리케이션 소프트웨어를 동작시켜서 묘화 커맨드를 실행함으로써 화면 데이터를 생성하는 가상 클라이언트부;
상기 화면 데이터를 압축 부호화하는 화상 인코드부;
상기 묘화 커맨드를 압축 부호화하는 묘화 커맨드 인코드부;
상기 단말을 향하여 송출된 패킷에 대한 상기 단말로부터의 응답 패킷에 의거하여 상기 네트워크의 대역을 계측하는 대역 계측부;
계측한 대역에 따라, 압축 부호화한 상기 화면 데이터 또는 압축 부호화한 상기 묘화 커맨드 중 어느 것을 상기 단말에 송출할지를 선택하는 선택부; 및
압축 부호화한 상기 화면 데이터 또는 압축 부호화한 상기 묘화 커맨드 중 선택된 것을 상기 단말에 송출하는 패킷 송수신부를 포함하고,
상기 단말은,
압축 부호화된 상기 화면 데이터를 복호화하는 화상 디코드부;
압축 부호화된 상기 묘화 커맨드를 복호화하는 묘화 커맨드 디코더; 및
복호화된 상기 묘화 커맨드를 실행함으로써 상기 화면 데이터를 생성하는 화면 묘화부를 포함하는 씬 클라이언트 시스템. - 서버 장치가, 애플리케이션 소프트웨어를 사용하여 묘화 커맨드를 실행함으로써 화면 데이터를 생성하는 공정;
상기 화면 데이터 또는 상기 묘화 커맨드를 압축 부호화하는 공정;
네트워크를 통해 상기 서버 장치에 접속된 단말을 향하여 송출된 패킷에 대한 상기 단말로부터의 응답 패킷에 의거하여, 상기 네트워크의 대역을 계측하는 공정;
계측한 대역에 따라, 압축 부호화한 상기 화면 데이터 또는 압축 부호화한 상기 묘화 커맨드 중 어느 것을 상기 단말에 송출할지를 선택하는 공정; 및
압축 부호화한 상기 화면 데이터 또는 압축 부호화한 상기 묘화 커맨드 중 선택된 것을 상기 단말에 송출하는 공정을 포함하는 화면 송신 방법. - 애플리케이션 소프트웨어를 사용하여 묘화 커맨드를 실행함으로써 화면 데이터를 생성하는 처리;
상기 화면 데이터 또는 상기 묘화 커맨드를 압축 부호화하는 처리;
네트워크를 통해 서버 장치에 접속된 단말을 향하여 송출된 패킷에 대한 상기 단말로부터의 응답 패킷에 의거하여, 상기 네트워크의 대역을 계측하는 처리;
계측한 대역에 따라, 압축 부호화한 상기 화면 데이터 또는 압축 부호화한 상기 묘화 커맨드 중 어느 것을 상기 단말에 송출할지를 선택하는 처리; 및
압축 부호화한 상기 화면 데이터 또는 압축 부호화한 상기 묘화 커맨드 중 선택된 것을 상기 단말에 송출하는 처리를 컴퓨터에 실행시키는 컴퓨터 프로그램을 기록한 컴퓨터로 판독가능한 기록매체. - 삭제
- 삭제
- 삭제
- 삭제
- 삭제
- 삭제
- 삭제
Applications Claiming Priority (3)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2012250887 | 2012-11-15 | ||
| JPJP-P-2012-250887 | 2012-11-15 | ||
| PCT/JP2013/080762 WO2014077307A1 (ja) | 2012-11-15 | 2013-11-14 | サーバ装置、端末、シンクライアントシステム、画面送信方法およびプログラム |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| KR20150063450A KR20150063450A (ko) | 2015-06-09 |
| KR101667970B1 true KR101667970B1 (ko) | 2016-10-20 |
Family
ID=50731216
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| KR1020157010396A KR101667970B1 (ko) | 2012-11-15 | 2013-11-14 | 서버 장치, 단말, 씬 클라이언트 시스템, 화면 송신 방법 및 프로그램 |
Country Status (6)
| Country | Link |
|---|---|
| US (1) | US20150296054A1 (ko) |
| EP (1) | EP2922300A4 (ko) |
| JP (1) | JP5983761B2 (ko) |
| KR (1) | KR101667970B1 (ko) |
| CN (1) | CN104782134B (ko) |
| WO (1) | WO2014077307A1 (ko) |
Families Citing this family (9)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP6146230B2 (ja) * | 2013-09-19 | 2017-06-14 | 富士通株式会社 | 中継装置、シンクライアントシステム、中継方法および中継プログラム |
| US8879858B1 (en) | 2013-10-01 | 2014-11-04 | Gopro, Inc. | Multi-channel bit packing engine |
| US10021161B2 (en) * | 2014-11-05 | 2018-07-10 | Qualcomm Incorporated | Compression of graphical commands for remote display |
| FR3035535A1 (fr) * | 2015-04-27 | 2016-10-28 | Agece | Dispositif de capture de signaux sonores et systeme de capture et de transmission de signaux |
| CN106484712A (zh) * | 2015-08-27 | 2017-03-08 | 北京易车互联信息技术有限公司 | 分布式文件系统的数据存储方法及装置 |
| CN111836092A (zh) * | 2019-04-15 | 2020-10-27 | 深信服科技股份有限公司 | 一种虚拟桌面的数据处理方法、装置及相关组件 |
| EP3994865A1 (en) * | 2019-07-03 | 2022-05-11 | Saudi Arabian Oil Company | Systems and methods for securely transferring selective datasets between terminals with multi-applications support |
| CN113301313B (zh) * | 2021-04-30 | 2023-02-03 | 深圳市度信科技有限公司 | 一种图像数据处理和传输方法及系统 |
| CN114845119B (zh) * | 2022-07-04 | 2022-10-04 | 光谷技术有限公司 | 一种物联网关验证及压缩系统 |
Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2005228227A (ja) | 2004-02-16 | 2005-08-25 | Nippon Telegr & Teleph Corp <Ntt> | シンクライアントシステム及びその通信方法 |
| JP2010035105A (ja) | 2008-07-31 | 2010-02-12 | Casio Comput Co Ltd | サーバベース・コンピューティング・システムのサーバ装置およびサーバ制御プログラム |
| JP2012118881A (ja) | 2010-12-02 | 2012-06-21 | Fujitsu Ltd | 情報処理装置、情報処理方法および情報処理プログラム |
Family Cites Families (13)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN1290027C (zh) * | 2001-08-27 | 2006-12-13 | 皇家飞利浦电子股份有限公司 | 高速缓存方法 |
| US20050010697A1 (en) * | 2002-12-30 | 2005-01-13 | Husam Kinawi | System for bandwidth detection and content switching |
| US8560753B1 (en) * | 2005-03-30 | 2013-10-15 | Teradici Corporation | Method and apparatus for remote input/output in a computer system |
| US8766993B1 (en) * | 2005-04-06 | 2014-07-01 | Teradici Corporation | Methods and apparatus for enabling multiple remote displays |
| US8184692B2 (en) * | 2006-09-25 | 2012-05-22 | Framecaster, Inc. | Distributed and automated video encoding and delivery system |
| JP2009060425A (ja) * | 2007-08-31 | 2009-03-19 | Hitachi Ltd | トラフィック制御システムおよびトラフィック制御方法 |
| CN101276470A (zh) * | 2008-04-25 | 2008-10-01 | 南京航空航天大学 | 一种保护目标图像信息的遥感图像压缩方法 |
| JP2010087950A (ja) * | 2008-10-01 | 2010-04-15 | Nec Personal Products Co Ltd | シンクライアントシステム、シンクライアント端末、シンクライアントサーバ、プログラム |
| JP2010237726A (ja) * | 2009-03-30 | 2010-10-21 | Nec Personal Products Co Ltd | 情報処理装置、そのパラメータ設定方法、プログラム及び記録媒体 |
| JP2010250615A (ja) * | 2009-04-16 | 2010-11-04 | Casio Computer Co Ltd | サーバ装置、クライアント装置、サーバベースコンピューティングシステム及びプログラム |
| US9510048B2 (en) * | 2009-05-26 | 2016-11-29 | Red Hat Israel, Ltd. | Dynamically changing streaming video quality |
| JP2011070565A (ja) | 2009-09-28 | 2011-04-07 | Nec Personal Products Co Ltd | クライアント端末及びシンクライアントシステム |
| KR20120119504A (ko) * | 2011-04-21 | 2012-10-31 | 한국전자통신연구원 | 게임 스트리밍 서비스 시스템 및 방법 |
-
2013
- 2013-11-14 CN CN201380059552.3A patent/CN104782134B/zh not_active Expired - Fee Related
- 2013-11-14 US US14/442,948 patent/US20150296054A1/en not_active Abandoned
- 2013-11-14 WO PCT/JP2013/080762 patent/WO2014077307A1/ja active Application Filing
- 2013-11-14 EP EP13855936.4A patent/EP2922300A4/en not_active Withdrawn
- 2013-11-14 KR KR1020157010396A patent/KR101667970B1/ko active IP Right Grant
- 2013-11-14 JP JP2014547022A patent/JP5983761B2/ja not_active Expired - Fee Related
Patent Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2005228227A (ja) | 2004-02-16 | 2005-08-25 | Nippon Telegr & Teleph Corp <Ntt> | シンクライアントシステム及びその通信方法 |
| JP2010035105A (ja) | 2008-07-31 | 2010-02-12 | Casio Comput Co Ltd | サーバベース・コンピューティング・システムのサーバ装置およびサーバ制御プログラム |
| JP2012118881A (ja) | 2010-12-02 | 2012-06-21 | Fujitsu Ltd | 情報処理装置、情報処理方法および情報処理プログラム |
Also Published As
| Publication number | Publication date |
|---|---|
| WO2014077307A1 (ja) | 2014-05-22 |
| KR20150063450A (ko) | 2015-06-09 |
| CN104782134A (zh) | 2015-07-15 |
| EP2922300A4 (en) | 2016-08-17 |
| JP5983761B2 (ja) | 2016-09-06 |
| JPWO2014077307A1 (ja) | 2017-01-05 |
| EP2922300A1 (en) | 2015-09-23 |
| CN104782134B (zh) | 2018-06-05 |
| US20150296054A1 (en) | 2015-10-15 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| KR101667970B1 (ko) | 서버 장치, 단말, 씬 클라이언트 시스템, 화면 송신 방법 및 프로그램 | |
| CN106851281B (zh) | 实时视频传输的初始带宽估计 | |
| US10756997B2 (en) | Bandwidth adjustment for real-time video transmission | |
| CN104509048B (zh) | 服务器装置、通信系统及通信方法 | |
| US20130039177A1 (en) | Remote mobile communication system, server device and control method of remote mobile communication system | |
| CN106973294B (zh) | 实时视频传输的初始带宽估计 | |
| GB2527588A (en) | Encoder and decoder | |
| CN106162199B (zh) | 带反向信道消息管理的视频处理的方法和系统 | |
| KR20150034778A (ko) | 리모트 통신 시스템, 서버 장치, 리모트 통신 방법, 및 프로그램 | |
| KR101640851B1 (ko) | 화상 정보 전송 방법 및 패킷 통신 시스템 | |
| US20130174203A1 (en) | Server apparatus, video image quality measurement system, video image quality measurement method and program | |
| KR101632012B1 (ko) | 통신 시스템, 서버 장치, 서버 장치의 제어 방법 및 프로그램을 저장하는 컴퓨터 판독 가능한 기록 매체 | |
| KR20170033234A (ko) | 분할화면 송수신 기반의 영상 처리 장치 및 방법 | |
| WO2014042137A1 (ja) | 通信システムと方法とサーバ装置及び端末 | |
| WO2014057809A1 (ja) | 動画伝送システム及び方法 | |
| KR20170033235A (ko) | 즉각적 분할화면 송수신 기반의 영상 처리 장치 및 방법 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A201 | Request for examination | ||
| E902 | Notification of reason for refusal | ||
| E701 | Decision to grant or registration of patent right |