TW201419868A - 通訊系統與方法以及伺服器裝置與終端設備 - Google Patents

通訊系統與方法以及伺服器裝置與終端設備 Download PDF

Info

Publication number
TW201419868A
TW201419868A TW102129760A TW102129760A TW201419868A TW 201419868 A TW201419868 A TW 201419868A TW 102129760 A TW102129760 A TW 102129760A TW 102129760 A TW102129760 A TW 102129760A TW 201419868 A TW201419868 A TW 201419868A
Authority
TW
Taiwan
Prior art keywords
region
area
image
screen
size
Prior art date
Application number
TW102129760A
Other languages
English (en)
Inventor
Kazunori Ozawa
Original Assignee
Nec Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nec Corp filed Critical Nec Corp
Publication of TW201419868A publication Critical patent/TW201419868A/zh

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H04N21/234363—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements by altering the spatial resolution, e.g. for clients with a lower screen resolution
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136—Incoming video signal characteristics or properties
    • H04N19/137—Motion inside a coding unit, e.g. average field, frame or block difference
    • H04N19/139—Analysis of motion vectors, e.g. their magnitude, direction, variance or reliability
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/59—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial sub-sampling or interpolation, e.g. alteration of picture size or resolution
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H04N21/234345—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements the reformatting operation being performed only on part of the stream, e.g. a region of the image or a time segment
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/4402—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • H04N21/440245—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display the reformatting operation being performed only on part of the stream, e.g. a region of the image or a time segment
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/4402—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • H04N21/440263—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display by altering the spatial resolution, e.g. for displaying on a connected PDA
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/65—Transmission of management data between client and server
    • H04N21/658—Transmission by the client directed to the server
    • H04N21/6582—Data stored in the client, e.g. viewing habits, hardware capabilities, credit card number

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

【課題】本發明係為一種可以削減在伺服器側作成之有動作的畫面之對終端轉送時的資料量，可以削減根據網路造成的延遲，可以抑制伺服器側的處理量之系統、方法的提供。【解決手段】伺服器裝置係接收透過網路連接之終端的操作資訊，並將依據前述操作資訊在虛擬用戶部使應用程式動作而產生的畫面，利用分割部分割為區塊，利用判定部從每個區域的畫像特徵量將畫面區域判定為第1區域、及前述第1區域以外的其他區域之至少2種，依據前述第1區域與預先設定尺寸的大小關係，變更(縮小)成預先設定的尺寸進行壓縮編碼，連同前述第1區域的區域資訊一起傳送到前述終端，在前述終端中，將前述第1區域進行解碼並變更(放大)該畫面尺寸，與其他區域的畫像組合，進行畫面顯示。

Description

通訊系統與方法以及伺服器裝置與終端設備
[針對關聯申請案的記載]
本發明係為依據日本專利申請案：特願2012-199283號(2012年9月11日申請)者，並將該申請案的記載內容全部引用並編入記載於本案說明書者。
本發明係為有關一種通訊系統與方法以及伺服器裝置與終端設備。
在企業等之中，為了圖謀高度安全性的確保，輕量化用戶方式開始普及。輕量化用戶方式的安裝雖然是各式各樣，但是例如使用虛擬機器之系統為悉知的。在伺服器裝置中，例如在虛擬層上包括虛擬機器(也稱為「虛擬終端」或是「虛擬用戶」)，並在虛擬機器上執行虛擬OS(Operating System；作業系統)(也稱為「用戶OS」)或應用程式。終端(通訊終端)係透過網路與伺服器裝置通訊連接，如同操作真實終端的方式，操作伺服器裝置上的虛擬終端使應用程式動作，例如產生畫面資訊。虛擬終端上的應用程式係將該畫面資訊傳送到終端，並在終端的顯示裝置顯示該畫面資訊。這樣的系統之終端也稱為輕量化用戶終端。例如依據來自端終的登入ID、終端辨識資訊等，進行對伺服器裝置上之虛擬終端的連接，並 從自家或外出地方對伺服器裝置進行存取，可以安全地連接到自己的虛擬終端而使業務順利進行。
在終端中，由於資料全部都不會留下，即使例如終端遺失了也不會有秘密資訊或企業資訊等洩漏到外部的情況。
又，就在伺服器裝置取得終端(用戶終端)中的操作資訊之後，並將根據該操作所要求的處理，使其在伺服器裝置動作之應用程式執行，在產生用以顯示根據該應用程式所執行的處理結果之畫面之後，將該畫面傳送到終端(用戶終端)之輕量化用戶系統而言，例如檢索到專利文獻1作為根據本案申請人的先前技術文獻。在該專利文獻1之中，揭示：在伺服器裝置中，伺服器側遠終畫面控制用應用程式係將由根據前述應用程式所執行的處理結果而產生的畫面，分割為多個區域，並對於每個已分割的區域監控變更頻率，將變更頻率超過臨界值之區域，也就是高頻率變更區域的屬性資訊傳送到終端(用戶終端)，與此同時，伺服器側遠終畫面控制用應用程式係將高頻率變更區域的點陣圖畫像編碼為MPEG-2或MPEG-4等的MEPG(Moving Picture Experts Group；動態影像專家組)方式的資料之後，傳送到終端(用戶終端)之構成。
【先前技術文獻】 【專利文獻】
【專利文獻1】日本特開2012-014533號公報
在以下進行關聯技術的分析。
依據在伺服器側使應用程式動作而產生畫面，並壓縮畫面後轉送到終端，在終端將畫面進行解碼顯示的方式之輕量化用戶系統的情況，在伺服器側將畫面進行壓縮編碼的情況下，作為畫像的編碼/解碼器，當使用靜止畫編碼/解碼器時，有處理量為非常少的優點。但是，對於有動作的畫面而言，由於使轉送資料量大幅增加，當使用無法充分確保頻寬的網路傳送到終端時，會增大根據網路造成的延遲，而有在終端之畫面更新或回應速度變慢的問題。
一方面，在伺服器側將畫面進行壓縮編碼的情況下，作為畫像編碼/解碼器，當使用動畫編碼/解碼器時，對於有動作的畫面可以大幅削減轉送資料量。為此，在使用頻寬不夠的網路傳送到終端的情況下，可以回避上述延遲的問題。但是，與靜止畫編碼/解碼器相比有伺服器裝置的處理量大幅增大的問題。
又，在上述專利文獻1中，對於在視框緩衝器所描繪的畫像而言，對於分割該畫像之每個區域，在經過特定期間必須持續加算在視框間的變更次數(變更頻率)。為此，在該加算處理有必要的處理量。又，在視框間即使有動作，但只持續短期間的情況下，也有變更次數沒有超過臨界值的可能性。在該情況下，於判定上會產生錯誤而沒有選擇動畫編碼器的可能性。再者，根據整個畫面動畫化判定，利用動畫編碼器將整個畫面進編碼的情況下，由於使動畫編碼器動作，使伺服器的 負荷變重(本發明與專利文獻1的對比將於後面說明)。
因此，本發明係為有鑑於上述問題點而創作出來者，其目的係為提供一種可以削減伺服器側作成之有動作的畫面之對終端轉送時的資料量，可以削減根據網路造成的延遲，同時可以抑制伺服器側的處理量之系統與方法以及伺服器裝置與終端設備。
根據本發明，提供一種包括伺服器裝置、及終端之網路系統，該伺服器裝置係接收透過網路連接之終端的操作資訊，並將依據前述操作資訊將在虛擬用戶部使應用程式動作而產生的畫面利用分割部分割為區塊，利用判定部從每個區塊的畫像特徵量判定畫面區域為第1區域、及前述第1區域以外的其他區域之至少2種，在前述第1區域比預先設定的尺寸更大的情況下，利用縮小處理部將前述第1區域縮小到前述預先設定的尺寸之後，並利用畫像編碼部進行壓縮編碼，利用畫像編碼部將前述第1區域以外的其他區域之畫像訊號進行壓縮編碼，透過前述網路傳送到前述終端，前述終端係將從前述伺服器裝置所傳送之前述第1區域利用畫像解碼器進行解碼並進行畫面尺寸的放大之後，與從前述節點裝置所傳送之前述第1區域以外的其他區域的畫像組合，進行畫面顯示。
根據本發明，其係提供一種訊方法，伺服器裝置係接收透過網路連接之終端的操作資訊，關於依據前述操作資訊在虛擬用戶部使應用程式動作而產生的畫面，從畫像特徵量將畫面區域判定為第1區域、及前述第1區域以外的其他區 域之至少2種，依據前述第1區域的尺寸與預先設定的尺寸之大小關係，將已變更(縮小)前述第1區域的尺寸之畫像進行編碼，並產生前述第1區域資訊，再者，針對前述第1區域以外的其他區域亦同將畫像訊號進行編碼，並連同前述第1區域資訊，透過前述網路傳送到前述終端，在前述終端中，將前述第1區域進行解碼，並由前述第1區域資訊，在前述第1區域因應必要變更(放大)解碼畫面的尺寸之後，與前述第1區域以外的其他區域的畫像組合，進行畫面顯示。
根據本發明，提供一種通訊系統，其係包括：終端；及接收透過網路連接之前述終端的操作資訊，並將依據前述操作資訊在虛擬用戶部使應用程式動作而產生的畫面透過前述網路傳送到前述終端，而在前述終端顯示前述畫面之伺服器裝置，前述伺服器裝置，其係包括：依據分割前述產生的畫面之每個區塊的特徵量，將前述畫面區域判定為第1區域、及前述第1區域以外的其他區域之至少2種的判定部；及依據前述第1區域的畫面尺寸與預先設定的值之大小關係，變更前述第1區域的畫面尺寸，並輸出將已變更的前述第1區域進行編碼的訊號與前述第1區域的區域資訊之畫像編碼器部，前述終端，其係為接收從前述伺服器裝置所傳送之將前述第1區域進行編碼的訊號與前述第1區域的區域資訊，並將已編碼之前述第1區域的訊號進行解碼，關於前述第1區域，依 據前述已解碼的畫面尺寸與前述第1區域的畫面尺寸之大小，因應必要變更前述解碼畫面的尺寸。又，前述伺服器裝置，其係包括：將前述已產生的畫面分割為預先設定尺寸的多個區塊之分割部；對於前述每個區塊從畫像訊號算出特徵量，並依據前述特徵量將前述畫面區域判定為第1區域、及前述第1區域以外的其他區域之至少2種的判定部；在前述被判定之前述第1區域的尺寸比預先設定之值(臨界值)更大的情況，縮小前述第1區域的畫面尺寸，輸出利用第1畫面編碼器將已縮小的畫像進行壓縮編碼的訊號與前述第1區域的區域資訊之畫像編碼部，前述終端，其係包括：接收從前述伺服器裝置所傳送之前述畫面的前述第1區域之被壓縮編碼的訊號與前述第1區域的區域資訊，並將前述被壓縮編碼的訊號進行解碼而產生解碼畫面之第1畫像解碼器部；及在前述解碼畫面的畫面尺寸比前述第1區域的畫面尺寸更小的情況下，放大前述解碼畫面之放大處理部的構成亦可。
根據本發明，其係提供一種伺服器裝置。該伺服器裝置係為接收透過網路連接之前述終端的操作資訊，並將依據前述操作資訊在虛擬用戶部使應用程式動作而產生的畫面透過前述網路傳送到前述終端，在前述終端顯示前述畫面，其特徵在於包括：依據分割前述已產生的畫面之每個區塊的特徵 量，判定前述畫面區域為第1區域、及前述第1區域以外的其他區域之至少2種的判定部；依據前述第1區域的畫面尺寸與預先設定的值之大小關係，變更前述第1區域的畫面尺寸，並輸出將已變更的前述第1區域進行編碼的訊號與前述第1區域的區域資訊之畫像編碼器部。伺服器裝置係包括：接收透過網路連接之終端的操作資訊之接收部；擷取依據前述操作資訊使應用程式動作而產生的畫面之畫面擷取部；將利用畫面擷取部所擷取的畫面分割為預先設定尺寸的多個區塊之分割部；對於每個區塊從畫像訊號算出特徵量，並依據前述特徵量將畫面區域判定為第1區域、及前述第1區域以外的其他區域之至少2種的判定部；畫面編碼部；及第1傳送部，前述畫面編碼部，其係包括：由前述判定部輸入判定結果及區域的範圍資訊，對於前述被判定之前述第1區域，在其尺寸比預先設定的尺寸(臨界值)更大之情況，對於包含在前述第1區域的畫像將其縮小成預先設定的尺寸，並將已縮小的畫像輸出到前述第1畫像編碼器之縮小處理部；輸出將利用前述縮小處理部縮小的畫像進行壓縮編碼的訊號與前述第1區域的區域資訊之第1畫像編碼器；及對於前述被判定之前述第1區域以外的其他區域，在前述 其他區域為靜止區域的情況下，利用靜止畫編碼/解碼器進行編碼，在為移動區域的情況，利用靜止畫編碼/解碼器將移動前的畫像進行壓縮編碼，並輸出代表性的動作向量，再者，輸出前述第1區域以外的其他區域的區域資訊之第2畫像編碼器，前述第1傳送部，其係將從前述畫像編碼部所輸出之前述第1區域之被壓縮編碼的訊號及區域資訊、與前述第1區域以外的其他區域之被壓縮編碼的訊號及區域資訊，透過前述網路傳送到前述終端，使其在前述終端顯示。
根據本發明，其係提供一種終端裝置。該終端係與伺服器裝置連接，該伺服器裝置係接收透過網路連接之終端的操作資訊，並將依據前述操作資訊在虛擬用戶部使應用程式動作而產生的畫面透過前述網路將傳送到前述終端並在前述終端顯示前述畫面之伺服器裝置，而且是依據分割前述已產生的畫面之每個區塊的特徵量，將前述畫面區域判定為第1區域、及前述第1區域以外的其他區域之至少2種，並依據前述第1區域的畫面尺寸與預先設定值的大小關係，變更前述第1區域的畫面尺寸，並輸出將已變更之前述第1區域進行編碼的訊號與前述第1區域的區域資訊，該終端設備，其係包括：接收從前述伺服器裝置所傳送之將前述第1區域進行編碼的訊號與前述第1區域的區域資訊，並將已編碼之前述第1區域的訊號進行解碼之編碼器單元；及依據前述已解碼的畫面尺寸與前述第1區域的畫面尺寸之大小，變更前述解碼畫面的尺寸之單元。前述終端裝置，其係 包括：接收從透過網路連接之終端裝置的操作資訊，並依據前述操作資訊使應用程式動作而產生，將前述已產生的畫面分割為預先設定尺寸的多個區塊，對於前述每個區塊從畫像訊號算出特徵量，並依據前述特徵量將前述畫面區域判定為第1區域、及前述第1區域以外的其他區域之至少2種的伺服器裝置所傳送之前述第1區域與前述第1區域以外的其他區域之被壓縮編碼的訊號、前述第1區域的區域資訊、及前述第1區域以外的其他區域的區域資訊之第1接收部；輸入利用前述第1接收部所接收之前述第1區域的區域資訊與前述第1區域之前述被壓縮編碼的訊號，並將前述被壓縮編碼的訊號進行解碼的訊號與前述第1區域的區域資訊輸出到放大處理部之前述第1畫像解碼器；輸入利用前述第1畫像解碼器所解碼的畫像訊號與前述第1區域的區域資訊，將解碼後之畫像訊號的區域尺寸與根據前述第1區域的區域資訊之第1區域的尺寸相比，在前述解碼後之畫像訊號的區域尺寸比前述第1區域的尺寸更小的情況，以解碼後之畫像訊號的區域尺寸與前述第1區域的尺寸一致的方式，對於前述畫像訊號施予放大處理，並將已放大的畫像訊號輸出到畫面顯示部之前述放大處理部；輸入利用前述第1接收部所接收之前述第1區域以外的其他區域的區域資訊與前述其他區域之前述被壓縮編碼的訊號，並對於前述其他區域將被壓縮編碼的訊號進行解碼的訊號與其他區域的區域資訊輸出到前述畫面顯示部之前述第2畫像解碼器；及 由前述放大處理部輸入前述第1區域的區域資訊與已放大之前述第1區域的畫像訊號，輸入將前述第1區域以外的其他區域之被壓縮編碼的訊號利用前述第2畫像解碼器進行解碼的畫像訊號與前述第1區域以外的其他區域的區域資訊，使用前述第1區域的區域資訊，在前述第1區域使來自前述放大處理部的畫像顯示，並使用前述第1區域以外的其他區域的區域資訊，在前述第1區域以外的其他區域使來自前述第2畫像解碼器的畫像顯示之前述畫面顯示部。
根據本發明，其係提供一種在伺服器裝置執行以下處理的程式。該處理係為：接收透過網路連接之終端的操作資訊之接收處理；擷取依據前述操作資訊使應用程式動作而產生的畫面之畫面擷取處理；將利用畫面擷取部所擷取的畫面分割為預先設定尺寸的多個區塊之分割處理；對於每個區塊從畫像訊號算出特徵量，並依據前述特徵量將畫面區域判定為第1區域、及前述第1區域以外的其他區域之至少2種之判定處理；從前述判定處理輸入判定結果及區域的範圍資訊，對於前述被判定之前述第1區域，在其尺寸比預先設定的尺寸(臨界值)更大的情況，對於包含在前述第1區域之畫像將其縮小成預先設定的尺寸，並將已縮小的畫像輸出到第1畫像編碼處理之縮小處理； 輸出將利用前述縮小處理所縮小的畫像進行壓縮編碼的訊號與前述第1區域的區域資訊之前述第1畫像編碼處理；對於前述被判定之前述第1區域以外的其他區域，在前述其他區域為靜止區域的情況，使用靜止畫編碼/解碼器進行壓縮編碼，在為移動區域的情況，利用靜止畫編碼/解碼器將移動前的畫像進行壓縮編碼，並輸出代表性的動作向量，再者，輸出前述第1區域以外的其他區域的區域資訊之第2畫像編碼處理；及將從前述第1畫像編碼處理所輸出之前述第1區域之被壓縮編碼的訊號及區域資訊、與從前述第2畫像編碼處理所輸出之前述第1區域以外的其他區域之被壓縮編碼的訊號及區域資訊，透過前述網路傳送到前述終端並使其顯示在前述終端之第1傳送處理。根據本發明，其係提供一種記錄有該程式之電腦可讀出之記錄媒體(半導體記憶體、磁/光碟等)。
根據本發明，其係提供一種在構成終端裝置之電腦執行以下處理之程式。該處理係為：接受從接收透過網路連接之終端裝置的操作資訊，並依據前述操作資訊使應用程式動作而產生，將前述已產生的畫面分割為預先設定尺寸的多個區塊，對於前述每個區塊從畫像訊號算出特徵量，並依據前述特徵量將畫面區域判定為第1區域、及前述第1區域以外的其他區域之至少2種的伺服器裝置所傳送之前述第1區域與前述第1區域以外的其他區域之被壓縮編碼的訊號、前述第1區域的區域資訊、及前述第1區域以外的其他區域的區域資訊之第1接收處理； 輸入利用前述第1接收部所接收之前述第1區域的區域資訊與前述第1區域之被壓縮編碼的訊號，將被壓縮編碼的訊號進行解碼的訊號與前述第1區域的區域資訊輸出到放大處理之前述第1畫像解碼處理；輸入已解碼的畫像訊號與前述第1區域的區域資訊，使用前述畫像訊號，算出解碼後的畫像訊號之區域尺寸，並與根據前述第1區域的區域資訊之第1區域的尺寸相比，在前述解碼後之畫像訊號的區域尺寸比前述第1區域尺寸更小的情況，以解碼後之畫像訊號的區域尺寸與前述第1區域尺寸一致的方式，對於前述畫像訊號施予放大處理，並將已放大的畫像訊號輸出到畫面顯示處理之前述放大處理；輸入利用前述第1畫像解碼器所解碼的畫像訊號與前述第1區域的區域資訊，將解碼後的畫像訊號之區域尺寸與根據前述第1區域的區域資訊之第1區域的尺寸相比，在前述解碼後之畫像訊號的區域尺寸比前述第1區域的尺寸更小的情況，以解碼後之畫像訊號的區域尺寸與前述第1區域的尺寸一致的方式，對於前述畫像訊號施予放大處理，並將已放大的畫像訊號輸出到畫面顯示部之前述放大處理部；輸入利用前述第1接收處理所接收之前述第1區域以外的其他區域的區域資訊與前述其他區域之被壓縮編碼的訊號，並將對於前述其他區域被壓縮編碼的訊號進行解碼的訊號與其他區域的區域資訊輸出到前述畫面顯示處理之前述第2畫像解碼處理；及從前述放大處理輸入前述第1區域的區域資訊與已放大之 前述第1區域中的畫像訊號，輸入將前述第1區域以外的其他區域之被壓縮編碼的訊號利用前述第2畫像解碼處理進行解碼的畫像訊號與前述第1區域以外的其他區域的區域資訊，使用前述第1區域的區域資訊，在前述第1區域使來自前述放大處理的畫像顯示，並使用前述第1區域以外的其他區域的區域資訊，在前述第1區域以外的其他區域使來自前述第2畫像解碼處理的畫像顯示之前述畫面顯示處理。根據本發明，其係提供一種記錄有該程式之電腦可讀出之記錄媒體(半導體記憶體、磁/光碟等)。
根據本發明，可以削減伺服器側作成之有動作的畫面之對終端轉送時的資料量，可以削減根據網路造成的延遲，同時可以抑制伺服器側的處理量。
110‧‧‧伺服器裝置
130‧‧‧雲網
150‧‧‧行動網路
170‧‧‧行動終端
171‧‧‧用戶軟體
176‧‧‧第1封包傳送部
177‧‧‧第2封包傳送部
180‧‧‧畫面擷取部
182‧‧‧操作訊號封包接收部
184‧‧‧分割部
185‧‧‧判定部
186‧‧‧畫面編碼部
187‧‧‧音頻編碼部
190‧‧‧SGSN/GGSN裝置
194‧‧‧基地台裝置
195‧‧‧RNC裝置
201‧‧‧動作向量算出部
202‧‧‧區域判定部
211‧‧‧虛擬用戶部
212‧‧‧控制部
213‧‧‧應用程式軟體
214‧‧‧畫面產生部
225‧‧‧縮小處理部
227‧‧‧第1畫像編碼器
228‧‧‧第2畫像編碼器
250‧‧‧第1封包接收部
251‧‧‧第2封包接收部
252‧‧‧第1畫像解碼器
253‧‧‧第2畫像解碼器
254‧‧‧放大處理部
255‧‧‧音頻解碼器
256‧‧‧畫面顯示部
257‧‧‧操作訊號產生部
258‧‧‧封包傳送部
圖1係為例示本發明之一實施形態之系統的圖面。
圖2係為例示本發明之一實施形態之伺服器裝置構成的圖面。
圖3係為例示本發明之一實施形態之伺服器裝置的判定部構成之圖面。
圖4係為例示本發明之一實施形態之伺服器裝置的畫像編碼部構成之圖面。
圖5係為例示本發明之一實施形態之終端裝置構成之圖 面。
針對本發明之實施形態，進行詳細說明。
<系統構成>
圖1係為顯示本發明之一實施形態之網路系統的構成例之圖面。在圖1中，作為網路係顯示使用行動網路150之例示。又，雖然沒有特別的限定，但是作為封包轉送裝置係例示使用SGSN(Serving GPRS(General Packet Radio Service)Support Node；服務GPRS(整合封包無線電服務)支援節點)/GGSN(Gateway GPRS Support Node；網關GPRS支援節點)裝置情況的構成。在圖1中，SGSN/GGSN裝置190係表示將SGSN裝置與GGSN裝置一體化的裝置。
在圖1中，作為一例係將輕量化用戶的伺服器裝置110配置在雲網130上，雲網130與行動網路150成為相互連接的構成。
在圖1中，終端使用者係將行動終端170與配置在雲網130之伺服器裝置110的虛擬用戶部(圖2的211)連接，並如同操作真實終端的方式操作虛擬用戶。為此，從行動終端170的用戶軟體，經由行動網路150上的基地台裝置194、RNC(Radio Network controller；無線電網路控制器)裝置195、SGSN/GGSN裝置190，對於伺服器裝置110送出儲存有操作訊號(操作資訊)的封包。操作訊號係意指根據在行動終端170的鍵盤操作、對畫面的觸碰操作、文字輸入、滑動等操作，從行動終端170送出到伺服器裝置110的訊號。又，在圖1中， 作為本發明之通訊終端的一例雖然是例示行動終端170，但是如後述所示，通訊終端當然不限於行動終端。
儲存有操作訊號之封包係從搭載在行動終端170之用戶軟體的封包傳送部(之後說明之圖5的256)送出，並透過位於行動網路150上的基地台裝置194、RNC裝置195、SGSN/GGSN裝置190，到達雲網130上的伺服器裝置110，在伺服器裝置110接收儲存有操作訊號的封包。送出儲存有操作訊號的封包時之通訊協定係可以使用悉知的。在該實施形態中，使用TCP(Transmission Control Protocol；傳輸控制協定)/IP(Internet Protocol；網際網路協定)與HTTP(Hyper Text Transfer Protocol；超文件傳送協定)作為其上位層。又，HTTP以外，也可以使用例如SIP(Session Initiation Protocol；會談啟始協定)等。
<伺服器裝置>
圖2係為例示圖1之伺服器裝置110構成的一例之圖面。包括：虛擬用戶部211、畫面擷取部180、操作訊號封包接收部182、分割部184、判定部185、畫像編碼部186、音頻編碼部187、第1封包傳送部176、第2封包傳送部177。當然，伺服器裝置110之上述各部的一部份或全部之處理．機能．控制係利用在伺服器裝置110執行之程式加以實現亦可。
操作訊號封包接收部182係從行動終端170透過基地台裝置194、RNC裝置195、SGSN/GGSN裝置190接收儲存有操作訊號的封包。操作訊號封包接收部182係從已接收的操作訊號TCP/IP封包抽出操作訊號，並輸出到虛擬用戶部 211。
虛擬用戶部211係與各種服務對應而具有控制部212、應用程式軟體213、畫面產生部214、快取記憶體(未圖示)等。又，其係形成為易於從伺服器裝置110的外部進行應用程式軟體213的更新之構成。虛擬用戶部211係在Host OS(Host Operation System；安裝虛擬機器的作業系統)上的虛擬化層上之虛擬機器中的Guest OS(Guest Operation System；安裝在虛擬機器上的作業系統；虛擬OS)上動作。Host OS或Guest OS係可以使用既知的OS。作為一例係在Host OS中使用例如Linux(登錄商標)、在Guest OS中係與行動終端170(例如智慧型手機)的OS對應而使用例如Android(登錄商標)等，但是使用其他的OS亦可。又，作為虛擬化機構係除了在特定的Host OS上安裝虛擬軟體之Host OS型之外，藉由不使用Host OS之虛擬機器管理員(Hypervisor)型加以構成亦可。
虛擬用戶部211的控制部212係分析從操作訊號封包接收部182所輸入的操作訊號，並使利用前述操作訊號所指定的應用程式軟體213啟動。
根據應用程式軟體213的執行，對於終端使用者產生用以畫面顯示之畫面資訊。
畫面產生部214係使用前述畫面資訊而產生畫面，並輸出到畫面擷取部180。
畫面擷取部180係利用預先設定的畫面解像度及視框數，擷取輸出前述畫面。
分割部184係輸入利用畫面擷取部180所擷取的 畫面，並將該畫面分割為預先設定尺寸的多個區塊。在本實施形態中，區塊的尺寸係例如是16畫素×16線。但是，使用除此之外的其他尺寸，例如8畫素×8線等亦可。區塊的尺寸為小者雖然可以提升在判定部185的判定精確度，但是處理量增大。分割部184係將已分割的區塊輸出到判定部185。
<判定部>
圖3係為例示判定部185構成之圖面。參照圖3時，其係包括：判定部185、動作向量算出部201、及區域判定部202。以下，針對判定部185將畫面區域判定為2種的情況進行說明。其中，所謂的2種係為第1區域(動畫區域)、及第1區域以外的其他區域。作為在判定部185所使用的畫像特徵量係使用動作向量。
動作向量算出部201係對於每個區塊算出例如將下式(1)的Dk成為最小的動作向量Vk(dx,dy)。
Dk=ΣiΣj|f_n_k(Xi,Yj)-f_n-1_k(Xi+dx,Yj+dy)|．．．(1)其中，f_n_k(Xi,Yj)係表示在第n個視框之第k個區塊的畫素，f_n-1_k(Xi+dx,Yj+dy)係表示在第n-1個視框之第k個區塊之畫素。又，ΣiΣj係為雙總和記號，例如在1區塊為16畫素×16線的情況，其係為關於i=1~16的各值之將j=1~16的總和加算i=1~16部分之值。
動作向量算出部201係對於每個區塊，利用下式 求出動作向量的大小及方向。
θk=arctan(dy/dx)．．．(3)
Vk係為在第k個區塊之動作向量的大小。
Θk係為在第k個區塊之動作向量的角度(方向)。
區域判定部202係接收利用動作向量算出部201所算出的動作向量，對於多個連續的區塊，檢查動作向量的大小Vk及角度Θk。
區域判定部202係在連續的多個區塊，Vk為超過預先設定的臨界值，而且Θk為零亂無章的情況下，對於此等連續的多個區塊，判斷為第1區域。第1區域係意指動畫區域。Θk是否為零亂無章係與例如Θk的分散(δ2)是否比預先設定的臨界值更大相對應。
一方面，在連續的多個區塊，雖然動作向量的大小Vk超過臨界值，但是動作向量的角度Θk顯示大致相同角度的情況下，區域判定部202係不視為第1區域，而判斷為根據畫面滑動等之移動區域。
區域判定部202係將顯示是否有第1區域之判定旗標、及在第1區域的情況下將區域範圍(第1區域的範圍)作為第1區域的區域資訊，輸出到圖2的畫像編碼部186。又，就第1區域而言，其係整形成為矩形的區域者。區域的範圍係為該矩形區域的水平方向之畫素數、垂直方向之線數、包含在 該區域之區域號、區塊尺寸。
又，區域判定部202係在作為第1區域以外的其他區域，例如判定為移動區域、或者靜止區域，並將顯示移動區域或靜止區域的判定旗標、區域範圍(第1區域以外的其他區域之範圍)作為其他區域的區域資訊，輸出到圖2的畫像編碼部186。
<畫像編碼部>
圖4係為例示畫像編碼部186構成之圖面。參照圖4時，其係包括：畫像編碼部186；縮小處理部225；及第1、第2畫像編碼器227、228。
縮小處理部225與第2畫像編碼器228係從圖2的畫像擷取部180輸入擷取畫像，從圖2的分割部184輸入用以分割的區塊尺寸，並輸入從判定部185所輸出之第1區域的區域資訊與其他區域的區域資訊(判定旗標、區域範圍(第1區域(動畫區域)之範圍、第1區域以外的其他區域(移動區域或靜止區域)之範圍)。
縮小處理部225係於存在有第1區域的情況下，判定第1區域的尺寸，也就是水平方向的畫素數與垂直方向的線數是否超過預先設定之值(畫素數與線數的臨界值)。在本實施形態中，所謂預先設定的尺寸係例如是QVGA(Quarter Video Graphic Array；四分之一視訊圖形陣列)尺寸(320×240像素：VGA的1/4)。
縮小處理部225係在第1區域的尺寸超過QVGA尺寸的情況，對於包含在第1區域的畫像，以成為QVGA尺寸 的方式施予縮小過濾器的運算，縮小將該畫像，並將縮小後的畫像輸出到第1畫像編碼器227。縮小過濾器係例如藉由因應縮小率以一定間隔等將原來畫像的像素變小而縮小到目的的尺寸。縮小處理部225係因為縮小第1區域的尺寸，因此將變更前的尺寸作為第1區域的範圍輸出到第1畫像編碼器227。
縮小處理部225係在第1區域的尺寸沒有超過預先設定的尺寸之情況，不會進行縮小過濾器的運算，而是將第1區域的畫像直接輸出到第1畫像編碼器227。縮小處理部225也直接將第1區域的尺寸作為第1區域的區域資訊輸出到第1畫像編碼部227。
第1畫像編碼器227係從縮小處理部225輸入第1區域的畫像訊號，並使用預先設定的動畫編碼器進行壓縮編碼，將壓縮編碼後的位元串流輸出到圖2的第1封包傳送部176。在本實施形態中，使用H.264作為預先設定的動畫編碼器。但是使用其他既知的動畫編碼/解碼器，例如MPEG-4等亦可。
第1畫像編碼器227係將第1區域的區域資訊輸出到圖2的第1封包傳送部176。
第2畫像編碼器228係輸入第1區域以外的其他區域的區域資訊，在為靜止畫的情況下，使用靜止畫編碼/解碼器將畫像進行壓縮編碼，並輸出到圖2的第1封包傳送部176。在本實施形態中，作為靜止畫編碼/解碼器係使用JPEG2000。也可以使用其他既知的編碼/解碼器，例如JPEG(Joint Photographic Experts Group；聯合圖像專家小組) 等。第2畫像編碼器228係進一步將其他區域的資訊輸出到圖2的第1封包傳送部176。
第2畫像編碼器228係在移動區域的情況(雖然動作向量的大小超過臨界值，但是角度大致為相同值)，利用靜止畫編碼/解碼器將移動前的畫像進行壓縮編碼之位元串流與代表性的動作向量成為1個種類並輸出到圖2的第1封包傳送部176。再者，其他區域的資訊也輸出到圖2的第1封包傳送部176。
在畫面附帶音頻的情況，音頻編碼部187係從畫面擷取部180輸入附帶在畫面之音頻訊號，並利用音頻編碼器進行壓縮編碼，輸出到圖2的第2封包傳送部177。在本實施形態中，作為音頻編碼器係使用MPEG-4 AAC(Advanced Audio Coding；進階音頻編碼)。但是使用其他既知的音訊編碼器亦可。
回到圖2，第1封包傳送部176係將前述區域資訊與前述壓縮編碼的位元串流儲存在封包的有效載荷，架構出根據預先設定的協定之封包，送出到SGSN/GGSN裝置190。其中，作為預先設定的協定係為既知的協定，例如RTP(Real-time Transport Protocol；即時傳輸協定)/UDP(User Data Protocol；用戶資料協定)/IP((Internet Protocol；網際網路協定)、或是UDP/IP亦可，TCP(Transmission Control Protocol；傳輸控制協定)/IP亦可。在本實施形態中係使用UDP/IP。又，在第1封包傳送部176中，在進行封包化時，區域資訊係儲存在RTP標頭部或UDP標頭部亦可。又，作為其他構成係將前述壓縮 編碼的位元串流使用MP4或3GP等檔案格式一旦儲存在檔案之後，將前述檔案以封包方式送出亦可。作為該情況之封包協定係可以使用例如TCP/IP。
第2封包傳送部177係將對於音頻訊號之壓縮編碼的位元串流儲存在封包的有效載荷，架構出根據預先設定的協定之封包，送出到SGSN/GGSN裝置190。在本實施形態中，作為預先設定的協定雖然可以使用RTP/UDP/IP、UDP/IP、TCP/IP等，但作為一例係使用UDP/IP。
SGSN/GGSN裝置190係將從伺服器裝置110所接收到的封包利用GTP(GPRS Tunneling Protocol)-U協定進行穿隧並轉送到RNC裝置195，RNC裝置195係通過基地台裝置194，利用無線送出到行動終端170。
<終端>
以下，作為關於本發明之終端的一實施形態，針對行動終端進行說明。在圖1之行動終端170中，其係搭載有用以將使用者操作終端時的操作訊號送出到伺服器，同時接收來自伺服器的封包，將壓縮編碼的位元串流進行解碼使其顯示之用戶軟體。圖5係為例示用戶軟體171構成之圖面。參照圖5時，用戶軟體171係包括：第1、第2封包接收部250、251；第1、第2畫像解碼器252、253；放大處理部254；畫面顯示部256；音頻解碼器255；操作訊號產生部257；及封包傳送部258。
第1封包接收部250係接收封包，取出儲存在封包之壓縮編碼位元串流及區域資訊。將第1區域的尺寸、及利用伺服器裝置110之第1畫像編碼器227進行編碼之壓縮編碼 位元串流作為第1區域的區域資訊，輸出到第1畫像解碼器252。
又，第1封包接收部250係將其他區域的區域資訊與在該區域中利用伺服器裝置110之第2畫像編碼器228進行編碼的壓縮編碼位元串流輸出到第2畫像解碼器253。
第1畫像解碼器252係輸入第1區域的區域資訊與被壓縮編碼的位元串流，將被壓縮編碼的位元串流進行解碼輸出到放大處理部254。再者，第1區域的區域資訊也輸出到放大處理部254。在本實施形態中，就第1畫像解碼器252而言係使用例如H.264。使用其他既知的畫像解碼器，例如MPEG-4解碼器等亦可。但是，使用與伺服器裝置110之第1畫像編碼器227相同種類的解碼器。
放大處理部254係輸入解碼後的畫像訊號與第1區域的區域資訊。放大處理部254係使用解碼後的畫像訊號，算出解碼後的畫像訊號之區域尺寸(之後標示為A)，並與根據第1區域的區域資訊之第1區域的尺寸(之後標示為B)進行比較。
放大處理部254係在A<B的情況，以A與B一致的方式，對於解碼後的畫像訊號，根據施加例如既知的放大過濾器之運算而施予放大處理，並將成為B尺寸的畫像訊號輸出到畫面顯示部256。在放大過濾器中，例如利用原來畫像之相鄰像素內插根據放大而空出的像素。又，在A與B一致的情況下，放大處理部254係跳過放大處理，而將被解碼的畫像訊號直接輸出到畫面顯示部256。再者，將第1區域的區域資訊 輸出到畫面顯示部256。
第2畫像解碼部253係輸入其他區域的區域資訊與被壓縮編碼的位元串流，將對於其他區域將被壓縮編碼的位元串流進行解碼並輸出到畫面顯示部256。第2畫像解碼部253係將其他區域的區域資訊輸出到畫面顯示部256。
畫面顯示部256係從放大處理部254輸入第1區域的區域資訊與第1區域的畫像訊號，從第2畫像解碼部253輸入其他區域的區域資訊與其他區域中的畫像訊號，並使用第1區域的區域資訊，在第1區域使來自放大處理部254的輸出畫像顯示，使用其他區域的區域資訊，在其他區域使來自第2畫面解碼部253的輸出畫像顯示。如此一來，畫面顯示部256係組合各個區域的畫像訊號而產生輸出顯示畫面。
第2封包接收部251係接收封包，取出儲存在封包之關於音頻的壓縮編碼位元串流，並輸出到音頻解碼器255。
音頻解碼器255係在輸入前述壓縮編碼位元串流並進行解碼之後，與畫面部份同步進行輸出。就音頻解碼器而言係使用例如MPEG-4 AAC。使用其他既知的音頻解碼器亦可。但是，音頻解碼器255係使用與伺服器裝置110之音頻編碼部187相同種類者。
操作訊號產生部257係就使用者對於行動終端170所輸入的操作(觸碰面板操作)，檢測例如
．畫面觸碰
．畫面滑動
．圖形觸碰
．文字輸入等，對於各個產生操作訊號，並輸出到封包傳送部258。
封包傳送部258係從操作訊號產生部257輸入操作訊號，並儲存在根據預先設定的協定之封包，送出到網路。其中，就預先設定的協定而言係可以使用TCP/UDP/IP等。
在前述的實施形態中，利用判定部185所判定之畫面區域的種類係為3種類以上亦可。又，用於區域判定之畫像特徵量係使用動作向量以外者亦可，或者也可以組合多種的特徵量予以使用。
在圖1中，行動網路150可以是LTE(Long Term Evolution；長期演進技術)/EPC(Evolved Packet Core；演進數據封包核心網)網路，也可以是WiMax(Worldwide Interoperability for Microwave Access；全球互通微波存取)網或WiFi(Wireless Fidelity；無線高傳真)網。再者，也可以是固定網或NGN(Next Generation Network；下一世代網路)網或網際網。但是，在此等情況下，並不是與行動終端(行動電話、行動資訊終端、平板終端)，而是成為從包括該通訊機能之固定終端或PC(Personal Computer；個人電腦)的連接。在該情況，在固定終端、PC等終端中係安裝與該終端對應之圖5構成的用戶軟體。在該情況，在伺服器裝置110的虛擬機器的Guest OS係使用用戶終端的OS，例如Windows(登錄商標等)。
在圖1中，雖然將伺服器裝置110配置在雲網130，但是配置在網際網路亦可。又，對於企業設置輕量化用戶的伺服器裝置之情況，將伺服器裝置配置在企業網亦可。
又，作為其他構成，在通訊事業者本身設置輕量化用戶的伺服器裝置之情況下，在行動網路150上或固定網上或NGN網上配置伺服器裝置110亦可。
根據上述實施形態，透過網路使用輕量化用戶的情況下，對於在伺服器側所產生的畫面，將畫面分割為區塊，並依據每個區塊的特徵量(例如動作向量)，將畫面區域判定為第1區域、及第1區域以外的其他區域之至少2種，在第1區域(動畫區域)比預先設定的尺寸更大的情況下，將第1區域縮小到前述預先設定的尺寸之後，利用動畫編碼/解碼器進行壓縮編碼轉送到終端。在終端中，利用動畫編碼/解碼器將第1區域進行解碼，並進行畫面尺寸的放大之後，與其他區域的畫像組合進行畫面顯示。即使是有動作的畫面，可以削減轉送資料量，並削減根據網路造成的延遲，同時可以抑制伺服器的處理量上限。
在上述實施形態中，如上述專利文獻1所示，不是畫像的變更頻率，而是從畫像訊號抽出每個區塊的特徵量(動作向量的大小及方向)，並使用每個區塊的特徵量求出第1區域(動畫區域)，對於第1區域使用動畫編碼/解碼器進行壓縮編碼。藉此，與上述專利文獻1的構成相比，可以實現計算量的削減、判定錯誤的削減。再者，在第1區域的畫面尺寸超過預先設定的臨界值的情況下，成為將該畫面尺寸縮小為預先設定的畫面尺寸之後，再使用動畫編碼/解碼器進行壓縮編碼之構成，可以抑制處理量為多之動畫編碼/解碼器的處理量最大值。為此，根據上述實施形態，可以抑制伺服器裝置的負荷之 最大值。
上述之實施形態的1部份或全部雖然沒有特別的限定，例如可以附註如以下所示。
(附註1)
一種網路系統，其特徵在於包括：伺服器裝置，其係接收透過網路連接之終端的操作資訊，並將依據前述操作資訊在虛擬用戶部使應用程式動作而產生的畫面利用分割部分割為區塊，利用判定部從每個區塊的畫像特徵量將畫面區域判定為第1區域、及前述第1區域以外的其他區域之至少2種，在前述第1區域比預先設定的尺寸更大的情況下，利用縮小處理部將前述第1區域縮小到前述預先設定的尺寸之後，利用畫像編碼部進行壓縮編碼，利用畫像編碼部將前述第1區域以外的其他區域之畫像訊號進行壓縮編碼，透過前述網路轉送到前述終端，前述終端，其係將從前述伺服器裝置所傳送之前述第1區域利用畫像解碼器進行解碼並進行畫面尺寸的放大之後，與從前述節點裝置所傳送之前述第1區域以外的其他區域之畫像組合，進行畫面顯示。
(附註2)
一種通訊方法，其特徵在於：伺服器裝置係接收透過網路連接之終端的操作資訊，並關於依據前述操作資訊在虛擬用戶部使應用程式動作而產生的畫面，從畫像特徵量將畫面區域判定為第1區域、及前述第1區域以外的其他區域之至少2種，在前述第1區域比預先設定 的尺寸更大的情況下，將前述第1區域縮小到前述預先設定的尺寸之畫像進行壓縮編碼，再者針對前述第1區域以外的其他區域亦同將畫像訊號利用畫像編碼部進行壓縮編碼，透過前述網路轉送到前述終端，在前述終端中，利用畫像解碼器將前述第1區域進行解碼並進行畫面尺寸的放大之後，與其他區域之畫像組合，進行畫面顯示。
(附註3)
如附註2記載的通訊方法，其中：前述伺服器裝置係將前述已產生的畫面分割為預先設定尺寸之多個區塊，並對於每個區塊算出動作向量，依據多個連續的區塊之前述動作向量的大小及方向，對於前述多個區塊，判定其為前述第1區域、或是前述第1區域以外的其他區域，在為前述第1區域以外的其他區域之情況，判定其為移動區域或是靜止區域，輸出判定結果、與前述第1區域的區域資訊、或是前述第1區域以外的其他區域的區域資訊。
(附註4)
一種通訊系統，其特徵在於包括：伺服器裝置，其係接收透過網路連接之終端的操作資訊，並將依據前述操作資訊使虛擬用戶部之應用程式動作而產生的畫面透過前述網路轉送到前述終端，並使其顯示在前述終端，前述伺服器裝置，其係包括：將前述已產生的畫面分割為預先設定尺寸的多個區塊之 分割部；對於前述每個區塊從畫像訊號算出特徵量，並依據前述特徵量將畫面區域判定為第1區域、及前述第1區域以外的其他區域之至少2種的判定部；及在前述被判定之前述第1區域的尺寸比預先設定之值(臨界值)更大的情況，縮小前述第1區域的畫面尺寸，並輸出將已縮小的畫像利用第1畫像編碼器進行壓縮編碼的訊號與前述第1區域的區域資訊之畫像編碼部，前述終端，其係包括：接收從前述伺服器裝置透過前述網路所傳送之將對於前述第1區域進行壓縮編碼的訊號與前述第1區域的區域資訊，將前述被壓縮編碼的訊號進行解碼而產生解碼畫像之第1畫像解碼器；及在前述解碼畫面的畫面尺寸比前述第1區域的畫面尺寸更小的情況下，放大前述解碼畫面之放大處理部。
(附註5)
如附註4記載之通訊系統，其中：對於前述伺服器裝置，前述判定部，其係包括：對於前述每個區塊算出動作向量之動作向量算出部；及依據多個連續的區塊之前述動作向量的大小及方向，對於前述多個區塊，判定其為前述第1區域、或是前述第1區域以外的其他區域，在為前述第1區域以外的其他區域之情況，判定其為移動區域或是靜止區域， 輸出判定結果、及前述第1區域的區域資訊、或是前述第1區域以外的其他區域的區域資訊之區域判定部。
(附註6)
如附註5記載之通訊系統，其中：對於前述伺服器裝置，前述畫像編碼部，其係包括：由前述判定部輸入判定結果及區域的範圍資訊，對於前述被判定之前述第1區域，在其尺寸比預先設定的尺寸更大的情況，對於包含在前述第1區域之畫像將其縮小成預先設定的尺寸，並將已縮小的畫像輸出到前述第1畫像編碼器之前述縮小處理部；前述第1畫像編碼器；及對於前述被判定之前述第1區域以外的其他區域，在前述其他區域為靜止區域的情況，利用靜止畫編碼/解碼器進行壓縮編碼，在為移動區域的情況，利用靜止畫編碼/解碼器將移動前的畫像進行壓縮編碼並輸出代表性的動作向量，再者，輸出前述第1區域以外的其他區域的區域資訊之第2畫像編碼器，進一步包括：將由前述畫像編碼部所輸出之區域資訊、及被壓縮編碼的訊號，透過前述網路傳送到前述終端之第1傳送部。
(附註7)
如附註5記載之通訊系統，其中：前述終端，其係包括：輸入將前述第1區域以外的其他區域的畫像進行壓縮編碼的訊號，利用第2畫像解碼器進行解碼 的畫像訊號與前述第1區域以外的其他區域的區域資訊，由前述放大處理部輸入前述第1區域的區域資訊與前述第1區域的畫像訊號，使用前述第1區域的區域資訊，在前述第1區域使來自前述放大處理部的畫像顯示，並使用前述第1區域以外的其他區域的區域資訊，在前述第1區域以外的其他區域使來自前述第2畫像解碼器的畫像顯示之畫面顯示部。
(附註8)
如附註7記載之通訊系統，其中：前述終端，其係包括：接收利用前述伺服器裝置的前述第1、第2畫像編碼器分別壓縮編碼之前述第1區域的訊號與前述第1區域以外的其他區域的訊號、前述第1區域的區域資訊、與前述第1區域以外的其他區域的區域資訊，並將利用前述伺服器裝置的前述第1、第2畫像編碼器所壓縮編碼之前述第1區域的訊號與前述第1區域以外的其他區域的訊號分別輸出到前述第1畫像解碼器與第2畫像解碼器之第1接收部，前述第1畫像解碼器，其係輸入前述第1區域的區域資訊與前述第1區域之前述被壓縮編碼的訊號，並將前述第1區域之被壓縮編碼的訊號進行解碼的訊號，連同前述第1區域的區域資訊一起輸出到前述放大處理部，前述放大處理部，其係輸入利用前述第1畫像解碼器所解碼之畫像訊號與前述第1區域的區域資訊，並算出解碼後之畫像訊號的區域尺寸，與根據前述第1區域的區域資訊之第1區域的尺寸相比，在前述解碼後之畫像訊號的區域尺寸比前述第 1區域的尺寸更小的情況，以解碼後之畫像訊號的區域尺寸與前述第1區域的尺寸一致的方式，對於前述畫像訊號施予放大處理，並將已放大的畫像訊號輸出到前述畫面顯示部，前述第2畫像解碼器，其係輸入前述第1區域以外的其他區域的區域資訊與前述第1區域以外的其他區域之被壓縮編碼的訊號，將前述第1區域以外的其他區域之被壓縮編碼的訊號進行解碼的訊號與前述第1區域以外的其他區域的區域資訊輸出到前述畫面顯示部。
(附註9)
如附註8記載之通訊系統，其中：前述伺服器裝置，其係包括：將附帶在前述已產生的畫面之音頻訊號進行壓縮編碼之音頻編碼器；及將前述音頻編碼器的輸出透過前述網路傳送到前述終端之第2傳送部，前述終端，其係包括：接收從前述伺服器裝置所傳送之被壓縮編碼的音頻訊號，並輸出到音頻解碼器之第2接收部；及在輸入前述被壓縮編碼的音頻訊號並進行解碼之後，與畫面部份同步進行輸出之前述音頻解碼器。
(附註10)
一種伺服器裝置，其係包括：接收透過網路連接之終端的操作資訊之接收部；擷取依據前述操作資訊使應用程式動作而產生的畫面之 畫面擷取部；將利用畫面擷取部所擷取的畫面分割為預先設定尺寸的多個區塊之分割部；對於每個區塊從畫像訊號算出特徵量，並依據前述特徵量將畫面區域判定為第1區域、及前述第1區域以外的其他區域之至少2種的判定部；畫面編碼部；及第1傳送部，前述畫面編碼部，其係包括：由前述判定部輸入判定結果及區域的範圍資訊，對於前述被判定之前述第1區域，在其尺寸比預先設定的尺寸(臨界值)更大之情況，對於包含在前述第1區域的畫像使其縮小成預先設定的尺寸，並將已縮小的畫像輸出到前述第1畫像編碼器，在前述第1區域的尺寸為預先設定的尺寸(臨界值)以下的情況，不進行縮小處理而直接輸出之縮小處理部；輸出將利用前述縮小處理部縮小的畫像進行壓縮編碼的訊號與前述第1區域的區域資訊之前述第1畫像編碼器；及對於前述被判定之前述第1區域以外的其他區域，在前述其他區域為靜止區域的情況，利用靜止畫編碼/解碼器進行壓縮編碼，在為移動區域的情況，利用靜止畫編碼/解碼器將移動前的畫像進行壓縮編碼並輸出代表性的動作向量，再者，輸出前述第1區域以外的其他區域的區域資訊之第2畫像編碼器，前述第1傳送部，其係將從前述畫像編碼部所輸出之前述 第1區域之被壓縮編碼的訊號及區域資訊、與前述第1區域以外的其他區域之被壓縮編碼的訊號及區域資訊，透過前述網路傳送到前述終端，並使其在前述終端顯示。
(附註11)
如附註10記載之伺服器裝置，其中：前述判定部，其係包括：對於前述每個區塊算出動作向量之動作向量算出部；及依據多個連續的區塊之前述動作向量的大小及方向，對於前述多個區塊，判定其為前述第1區域、或是前述第1區域以外的其他區域，在為前述第1區域以外的其他區域的情況，判定其為移動區域或是靜止區域，輸出判定結果、及前述第1區域的區域資訊、或者前述第1區域以外的其他區域的區域資訊之區域判定部。
(附註12)
一種終端裝置，其係包括：接受從接收透過網路連接之終端裝置的操作資訊，並依據前述操作資訊使應用程式動作而產生，將前述已產生的畫面分割為預先設定尺寸的多個區塊，對於前述每個區塊從畫像訊號算出特徵量，並依據前述特徵量將畫面區域判定為第1區域、及前述第1區域以外的其他區域之至少2種的伺服器裝置所傳送之前述第1區域與前述第1區域以外的其他區域之被壓縮編碼的訊號、前述第1區域的區域資訊、及前述第1區域以外的其他區域的區域資訊之第1接收部；輸入利用前述第1接收部所接收之前述第1區域的區域資 訊與前述第1區域之前述被壓縮編碼的訊號，將前述被壓縮編碼的訊號進行解碼的訊號與前述第1區域的區域資訊輸出到放大處理部之前述第1畫像解碼器；輸入利用前述第1畫像解碼器所解碼之畫像訊號與前述第1區域的區域資訊，將解碼後之畫像訊號的區域尺寸與根據前述第1區域的區域資訊之第1區域的尺寸相比，在前述解碼後之畫像訊號的區域尺寸比前述第1區域的尺寸更小的情況，以解碼後之畫像訊號的區域尺寸與前述第1區域的尺寸一致的方式，對於前述畫像訊號施予放大處理，並將已放大的畫像訊號輸出到畫面顯示部之前述放大處理部；輸入利用前述第1接收部所接收之前述第1區域以外的其他區域的區域資訊與前述其他區域之被壓縮編碼的訊號，並將對於前述其他區域被壓縮編碼的訊號進行解碼的訊號與其他區域的區域資訊輸出到前述畫面顯示部之前述第2畫像解碼器；及從前述放大處理部輸入前述第1區域的區域資訊與已放大之前述第1區域的畫像訊號，輸入將前述第1區域以外的其他區域之被壓縮編碼的訊號利用前述第2畫像解碼器進行解碼的畫像訊號與前述第1區域以外的其他區域的區域資訊，使用前述第1區域的區域資訊，在前述第1區域使來自前述放大處理部的畫像顯示，並使用前述第1區域以外的其他區域的區域資訊，在前述第1區域以外的其他區域使來自前述第2畫像解碼器的畫像顯示之前述畫面顯示部。
(附註13)
一種在伺服器裝置執行之程式，其係為：接收透過網路連接之終端的操作資訊之接收處理；擷取依據前述操作資訊使應用程式動作而產生的畫面之畫面擷取處理；將利用畫面擷取部所擷取的畫面分割為預先設定尺寸的多個區塊之分割處理；對於每個區塊從畫像訊號算出特徵量，並依據前述特徵量將畫面區域判定為第1區域、及前述第1區域以外的其他區域之至少2種的判定處理；由前述判定處理輸入判定結果及區域的範圍資訊，對於前述被判定之前述第1區域，在其尺寸比預先設定的尺寸(臨界值)更大的情況，對於包含在前述第1區域之畫像將其縮小成預先設定的尺寸，並將已縮小的畫像輸出到第1畫像編碼處理，在前述第1區域的區域尺寸為預先設定的尺寸(臨界值)以下的情況，不進行縮小處理而直接輸出之縮小處理；輸出將利用前述縮小處理所縮小的畫像進行壓縮編碼的訊號與前述第1區域的區域資訊之前述第1畫像編碼處理；對於前述被判定之前述第1區域以外的其他區域，在前述其他區域為靜止區域的情況，使用靜止畫編碼/解碼器進行壓縮編碼，在為移動區域的情況，利用靜止畫編碼/解碼器將移動前的畫像進行壓縮編碼並輸出代表性的動作向量，再者，輸出前述第1區域以外的其他區域的區域資訊之第2畫像編碼處理；及 將從前述第1畫像編碼處理所輸出之前述第1區域之被壓縮編碼的訊號及區域資訊、與從前述第2畫像編碼處理所輸出之前述第1區域以外的其他區域之被壓縮編碼的訊號及區域資訊，透過前述網路傳送到前述終端並使其在前述終端顯示之第1傳送處理。
(附註14)
一種在構成終端裝置之電腦執行之程式，其係為：接受從接收透過網路連接之終端裝置的操作資訊，並依據前述操作資訊使應用程式動作而產生，將前述已產生的畫面分割為預先設定尺寸的多個區塊，對於前述每個區塊從畫像訊號算出特徵量，並依據前述特徵量將畫面區域判定為第1區域、及前述第1區域以外的其他區域的至少2種之伺服器裝置所傳送之前述第1區域與前述第1區域以外的其他區域之被壓縮編碼的訊號、前述第1區域的區域資訊、及前述第1區域以外的其他區域的區域資訊之第1接收處理；輸入利用前述第1接收部所接收之前述第1區域的區域資訊與前述第1區域之前述被壓縮編碼的訊號，將被壓縮編碼的訊號進行解碼的訊號與前述第1區域的區域資訊輸出到放大處理之前述第1畫像解碼處理；輸入已解碼的畫像訊號與前述第1區域的區域資訊，使用前述畫像訊號，算出解碼後的畫像訊號之區域尺寸，並與根據前述第1區域的區域資訊之第1區域的尺寸相比，在解碼後之畫像訊號的區域尺寸比前述第1區域的尺寸更小的情況，以解碼後之畫像訊號的區域尺寸與前述第1區域尺寸一致的方式， 對於前述畫像訊號施予放大處理，並將已放大的畫像訊號輸出到畫面顯示處理之前述放大處理；輸入利用前述第1畫像解碼器所解碼的畫像訊號與前述第1區域的區域資訊，將解碼後的畫像訊號的區域尺寸與根據前述第1區域的區域資訊之第1區域的尺寸相比，在前述解碼後之畫像訊號的區域尺寸比前述第1區域尺寸更小的情況，以解碼後之畫像訊號的區域尺寸與前述第1區域尺寸一致的方式，對於前述畫像訊號施予放大處理，並將已放大的畫像訊號輸出到畫面顯示部之前述放大處理部；輸入利用前述第1接收處理所接收之前述第1區域以外的其他區域的區域資訊與前述其他區域之被壓縮編碼的訊號，並將對於前述其他區域被壓縮編碼的訊號進行解碼的訊號與其他區域的區域資訊輸出到前述畫面顯示處理之前述第2畫像解碼處理；及由前述放大處理輸入前述第1區域的區域資訊與已放大之前述第1區域的畫像訊號，輸入將前述第1區域以外的其他區域之被壓縮編碼的訊號利用前述第2畫像解碼處理進行解碼的畫像訊號與前述第1區域以外的其他區域的區域資訊，使用前述第1區域的區域資訊，在前述第1區域使來自前述放大處理的畫像顯示，並使用前述第1區域以外的其他區域之區域資訊，在前述第1區域以外的其他區域使來自前述第2畫像解碼處理的畫像顯示之前述畫面顯示處理。
又，上述專利文獻的各揭示係予以引用並編入本 案說明書者。在本發明之全部揭示(包含申請專利範圍)的範疇內，進一步依據該基本的技術思想，可以進行實施形態或實施例的變更．調整。又，在本發明之申請專利範圍的範疇內，可進行各種揭示要素(包含各附註的各要素、各實施例的各要素、各圖面的各要素等)的多種組合或選擇。換言之，本發明當然也包含依據包含申請專利範圍的全部揭示、技術思想而只要是同業者可想得到的各種變形、修正。
110‧‧‧伺服器裝置
176‧‧‧第1封包傳送部
177‧‧‧第2封包傳送部
180‧‧‧畫面擷取部
182‧‧‧操作訊號封包接收部
184‧‧‧分割部
185‧‧‧判定部
186‧‧‧畫面編碼部
187‧‧‧音頻編碼部
211‧‧‧虛擬用戶部
212‧‧‧控制部
213‧‧‧應用程式軟體
214‧‧‧畫面產生部

Claims (10)

  1. 一種通訊系統，包括：終端；及接收透過網路連接之前述終端的操作資訊，並依據前述操作資訊，將在虛擬用戶部使應用程式動作而產生的畫面透過前述網路傳送到前述終端，而在前述終端顯示前述畫面之伺服器裝置，其特徵在於：前述伺服器裝置，其係包括：依據分割前述產生的畫面之每個區塊的特徵量，將前述畫面區域判定為第1區域、及前述第1區域以外的其他區域之至少2種的判定部；及依據前述第1區域的畫面尺寸與預先設定的值之大小關係，變更前述第1區域的畫面尺寸，並輸出將已變更之前述第1區域進行編碼的訊號與前述第1區域的區域資訊之畫像編碼器部，前述終端，其係接收從前述伺服器裝置所傳送之將前述第1區域進行編碼的訊號與前述第1區域的區域資訊，並將前述已編碼之第1區域的訊號進行解碼，關於前述第1區域，依據前述已解碼的畫面尺寸與前述第1區域的畫面尺寸之大小，因應必要變更前述解碼畫面的尺寸。
  2. 如申請專利範圍第1項之通訊系統，其中，前述伺服器裝置，其係包括：將前述產生的畫面分割為預先設定尺寸的多個區塊之分割部； 對於前述每個區塊從畫像訊號算出特徵量，並依據前述特徵量，將前述畫面區域判定為第1區域、及前述第1區域以外的其他區域之至少2種的前述判定部；在前述被判定之前述第1區域的尺寸比預先設定之值更大的情況下，縮小前述第1區域的畫面尺寸，並輸出利用第1畫面編碼器將已縮小的畫像進行壓縮編碼的訊號與前述第1區域的區域資訊之前述畫像編碼部，前述終端，其係包括：接收從前述伺服器裝置所傳送之前述畫面的前述第1區域之被壓縮編碼的訊號與前述第1區域的區域資訊，並將前述第1區域之前被壓縮編碼的訊號進行解碼而產生解碼畫面之第1畫像解碼器；及在前述解碼畫面的畫面尺寸比前述第1區域的畫面尺寸更小的情況下，放大前述解碼畫面之放大處理部。
  3. 如申請專利範圍第2項之通訊系統，其中，對於前述伺服器裝置，前述判定部，其係包括：對於前述每個區塊算出動作向量之動作向量算出部；及依據多個連續的區塊之前述動作向量的大小及方向，對於前述多個區塊判定其為前述第1區域、或是前述第1區域以外的其他區域，再者，當其為前述第1區域以外的其他區域的情況下，判定前述第1區域以外的其他區域為移動區域或靜止區域，輸出判定結果、前述第1區域的區域資訊、及前述第1區 域以外的其他區域的區域資訊之區域判定部。
  4. 如申請專利範圍第3項之通訊系統，其中，對於前述伺服器裝置，前述畫像編碼部，其係包括：由前述判定部輸入判定結果及區域的範圍資訊，並對於前述被判定之前述第1區域，在其尺寸比預先設定的尺寸更大的情況，對於包含在前述第1區域之畫像將其縮小成預先設定的尺寸，並將已縮小的畫像輸出到前述第1畫像編碼器之前述縮小處理部，又包括：前述第1畫像編碼器、及對於被判定之前述第1區域以外的其他區域，在前述第1區域以外的其他區域為靜止區域的情況下，利用靜止區域碼/解碼器進行編碼，在為移動區域的情況下，利用靜止畫編碼/解碼器將移動前的畫像進行編碼，並輸出代表性的動作向量，再者，輸出前述第1區域以外的其他區域的區域資訊之第2畫像編碼器，進一步包括：將從前述畫像編碼部所輸出的區域資訊、及前述已編碼的訊號透過前述網路傳送到前述終端之第1傳送部。
  5. 如申請專利範圍第2項之通訊系統，其中，前述終端，其係包括：輸入將前述第1區域以外的其他區域進行編碼的訊號，利用第2畫像解碼器進行解碼的畫像訊號與前述第1區域以 外的其他區域的區域資訊，由前述放大處理部輸入前述第1區域的區域資訊與前述第1區域中的畫像訊號，使用前述第1區域的區域資訊，在前述第1區域顯示來自前述放大處理部的畫像，並使用前述第1區域以外的其他區域的區域資訊，在前述第1區域以外的其他區域顯示來自前述第2畫像解碼器的畫像之畫面顯示部。
  6. 如申請專利範圍第5項之通訊系統，其中，前述伺服器裝置，其係包括：將附帶在前述已產生的畫面之音頻訊號進行編碼之音頻編碼器；及透過前述網路，將前述音頻編碼器的輸出傳送到前述終端之第2傳送部，前述終端，其係包括：接收從前述伺服器裝置所傳送之已編碼的音頻訊號並輸出到音頻解碼器之第2受訊部；及在輸入解碼前述已編碼的音頻訊號之後，與畫面部份同步進行輸出之音頻解碼器。
  7. 一種通訊方法，其特徵在於：伺服器裝置係接收透過網路連接之終端的操作資訊，關於依據前述操作資訊在虛擬用戶部使應用程式動作而產生的畫面，從畫像特徵量，將畫面區域判定為第1區域、及前述第1區域以外的其他區域之至少2種，並依據前述第1區域的尺寸與預先設定的尺寸之大小關係，將已變更前述第1區域的尺寸之畫像進行 編碼，產生前述第1區域資訊，再者，針對前述第1區域以外的其他區域亦同，將畫像訊號進行編碼，連同前述第1區域資訊一起透過前述網路傳送到前述終端，在前述終端中，將前述第1區域進行解碼，並由前述第1區域資訊，在前述第1區域因應必要將解碼畫面的尺寸進行變更之後，與前述第1區域以外的其他區域的畫像組合，進行畫面顯示。
  8. 一種伺服器裝置，其係為接收透過網路連接之前述終端的操作資訊，並將依據前述操作資訊在虛擬用戶部使應用程式動作而產生的畫面透過前述網路傳送到前述終端，並在前述終端顯示前述畫面之伺服器裝置，其特徵在於包括：依據分割前述已產生的畫面之每區塊的特徵量，將前述畫面區域判定為第1區域、及前述第1區域以外的其他區域之至少2種的判定部；及依據前述第1區域的畫面尺寸與預先設定值的大小關係，變更前述第1區域的畫面尺寸，並輸出將已變更之前述第1區域進行編碼的訊號與前述第1區域的區域資訊之畫像編碼部。
  9. 如申請專利範圍第8項之伺服器裝置，其中，包括：接收透過網路連接之終端的操作資訊之接收部；擷取依據前述操作資訊使虛擬用戶部的應用程式動作而產生的畫面之畫面擷取部；將利用前述畫面擷取部所擷取的畫面分割為預先設定尺寸 的多個區塊之分割部；對於每個區塊從畫像訊號算出特徵量，並依據前述特徵量，將畫面區域判定為第1區域、及前述第1區域以外的其他區域之至少2種的前述判定部；前述畫面編碼部；及第1傳送部，前述畫面編碼部，其係包括：由前述判定部輸入判定結果及區域的範圍資訊，對於前述被判定之前述第1區域，在其尺寸比預先設定的尺寸更大之情況，對於包含在前述第1區域的畫像，將其縮小成預先設定的尺寸，並將已縮小的畫像輸出到前述第1畫像解碼器之縮小處理部；輸出將利用前述縮小處理部縮小的畫像進行編碼的訊號、及前述第1區域的區域資訊之第1畫像編碼器；及對於前述被判定之前述第1區域以外的其他區域，在前述第1區域以外的其他區域為靜止區域的情況，利用靜止畫編碼/解碼器進行編碼，在為移動區域的情況，利用靜止畫編碼/解碼器將移動前的畫像進行編碼，並輸出代表性的動作向量，再者，輸出前述第1區域以外的其他區域的區域資訊之第2畫像編碼器，前述第1傳送部係將從前述畫像編碼部所輸出之前述第1區域之被壓縮編碼的訊號及區域資訊、與前述第1區域以外的其他區域之被壓縮編碼的訊號及區域資訊，透過前述網路傳送到前述終端，並使其在前述終端顯示， 前述判定部，其係包括：對於前述每個區塊算出動作向量之動作向量算出部；及依據多個連續的區塊的前述動作向量的大小及方向，對於前述多個區塊，判定其為前述第1區域、或是前述第1區域以外的其他區域，再者，在為前述第1區域以外的其他區域，判定其為移動區域或是靜止區域，輸出判定結果、前述第1區域的區域資訊、及前述第1區域以外的其他區域的區域資訊之區域判定部。
  10. 一種終端裝置，其係為與伺服器裝置連接之終端裝置，該伺服器裝置係接收透過網路連接之終端的操作資訊，並將依據前述操作資訊在虛擬用戶部使應用程式動作而產生的畫面透過前述網路傳送到前述終端，並在前述終端顯示前述畫面之伺服器裝置，而且是依據已分割前述產生的畫面之每個區塊的特徵量，將前述畫面區域判定為第1區域、及前述第1區域以外的其他區域之至少2種，並依據前述第1區域的畫面尺寸與預先設定值的大小關係，變更前述第1區域的畫面尺寸，並輸出將已變更之前述第1區域進行編碼的訊號與前述第1區域的區域資訊之伺服器裝置，其特徵在於包括：接收從前述伺服器裝置所傳送之將前述第1區域進行編碼的訊號與前述第1區域的區域資訊，並將前述第1區域已編碼的訊號進行解碼之編碼器單元；及依據前述已解碼的畫面尺寸與前述第1區域的畫面尺寸之 大小，變更前述解碼畫面的尺寸之單元。
TW102129760A 2012-09-11 2013-08-20 通訊系統與方法以及伺服器裝置與終端設備 TW201419868A (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2012199283 2012-09-11

Publications (1)

Publication Number Publication Date
TW201419868A true TW201419868A (zh) 2014-05-16

Family

ID=50278248

Family Applications (1)

Application Number Title Priority Date Filing Date
TW102129760A TW201419868A (zh) 2012-09-11 2013-08-20 通訊系統與方法以及伺服器裝置與終端設備

Country Status (2)

Country Link
TW (1) TW201419868A (zh)
WO (1) WO2014042137A1 (zh)

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3258840B2 (ja) * 1994-12-27 2002-02-18 シャープ株式会社 動画像符号化装置および領域抽出装置
CA2538340A1 (en) * 2003-09-12 2005-03-31 Citrix Systems, Inc. Method and apparatus for generating graphical and media displays at a thin client
JP2007241736A (ja) * 2006-03-09 2007-09-20 Victor Co Of Japan Ltd リモートデスクトップシステムのサーバ装置及びクライアント装置
JP5471903B2 (ja) * 2010-07-01 2014-04-16 富士通株式会社 情報処理装置、画像送信プログラム及び画像表示方法

Also Published As

Publication number Publication date
WO2014042137A1 (ja) 2014-03-20

Similar Documents

Publication Publication Date Title
US10652506B2 (en) High quality multimedia transmission from a mobile device for live and on-demand viewing
US10187668B2 (en) Method, system and server for live streaming audio-video file
US9756328B2 (en) System, terminal, and method for dynamically adjusting video
US9860285B2 (en) System, apparatus, and method for sharing a screen having multiple visual components
CN104509048B (zh) 服务器装置、通信系统及通信方法
WO2011142311A1 (ja) リモート型携帯通信システム、サーバ装置及びリモート型携帯通信システム制御方法
KR20150063450A (ko) 서버 장치, 단말, 씬 클라이언트 시스템, 화면 송신 방법 및 프로그램
WO2018089096A1 (en) Compressed media with still images selected from a video stream
KR102199270B1 (ko) 클라우드 스트리밍 서비스 시스템, 스틸 이미지 기반 클라우드 스트리밍 서비스 방법 및 이를 위한 장치
US10547878B2 (en) Hybrid transmission protocol
KR102271721B1 (ko) 클라우드 스트리밍 서비스 시스템, 단말 성능을 고려한 이미지 클라우드 스트리밍 서비스 방법 및 이를 위한 장치
TWI528771B (zh) Communication system, servo device, servo device control method and program
TW201419868A (zh) 通訊系統與方法以及伺服器裝置與終端設備
KR102247887B1 (ko) 클라우드 스트리밍 서비스 시스템, 소스 정보를 이용한 클라우드 스트리밍 서비스 방법 및 이를 위한 장치
KR102313533B1 (ko) 클라우드 스트리밍 서비스 시스템, 전체 화면 변화를 고려한 이미지 클라우드 스트리밍 서비스 방법 및 이를 위한 장치
WO2014057809A1 (ja) 動画伝送システム及び方法
KR102272357B1 (ko) 클라우드 스트리밍 서비스 시스템, 드로잉 레이어 분리를 이용한 이미지 클라우드 스트리밍 서비스 방법 및 이를 위한 장치
KR20160044732A (ko) 클라우드 스트리밍 서비스 시스템, 스틸 이미지 기반 클라우드 스트리밍 서비스 방법 및 이를 위한 장치
EP2946554B1 (en) System, apparatus and method for sharing a screen having multiple visual components