KR102552753B1 - 딜레이 절감을 위한 vmi 화면 표시 방법 및 장치 - Google Patents

딜레이 절감을 위한 vmi 화면 표시 방법 및 장치 Download PDF

Info

Publication number
KR102552753B1
KR102552753B1 KR1020180127269A KR20180127269A KR102552753B1 KR 102552753 B1 KR102552753 B1 KR 102552753B1 KR 1020180127269 A KR1020180127269 A KR 1020180127269A KR 20180127269 A KR20180127269 A KR 20180127269A KR 102552753 B1 KR102552753 B1 KR 102552753B1
Authority
KR
South Korea
Prior art keywords
vmi
information
screen
target
client terminal
Prior art date
Application number
KR1020180127269A
Other languages
English (en)
Other versions
KR20200046309A (ko
Inventor
김지훈
김응창
Original Assignee
에스케이텔레콤 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 에스케이텔레콤 주식회사 filed Critical 에스케이텔레콤 주식회사
Priority to KR1020180127269A priority Critical patent/KR102552753B1/ko
Publication of KR20200046309A publication Critical patent/KR20200046309A/ko
Application granted granted Critical
Publication of KR102552753B1 publication Critical patent/KR102552753B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs
    • H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H04N21/234363—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements by altering the spatial resolution, e.g. for clients with a lower screen resolution
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/231—Content storage operation, e.g. caching movies for short term storage, replicating data over plural servers, prioritizing data for deletion
    • H04N21/23106—Content storage operation, e.g. caching movies for short term storage, replicating data over plural servers, prioritizing data for deletion involving caching operations
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/414—Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance
    • H04N21/41407—Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance embedded in a portable device, e.g. video client on a mobile phone, PDA, laptop
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/433—Content storage operation, e.g. storage operation in response to a pause request, caching operations
    • H04N21/4331—Caching operations, e.g. of an advertisement for later insertion during playback
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs
    • H04N21/4402—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • H04N21/440263—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display by altering the spatial resolution, e.g. for displaying on a connected PDA
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/4722—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for requesting additional data associated with the content
    • H04N21/4725—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for requesting additional data associated with the content using interactive regions of the image, e.g. hot spots

Abstract

본 실시예는 Edge N/W 구조를 활용하고, App/Web 컨텐츠에 대한 화면을 VMI 서버장치와 VMI 클라이언트 단말기에 미리 버퍼링하여 제공함으로써 VMI 서비스 제공을 위해 소요되는 N/W Traffic과 UX 이벤트 반응에 대한 딜레이를 감소시킬 수 있는 VMI 화면 표시 방법 및 장치에 관한 것이다.

Description

딜레이 절감을 위한 VMI 화면 표시 방법 및 장치{VMI Screen Display Method And Apparatus for Delay Reduction}
본 실시예는 딜레이 절감을 위한 VMI 화면 표시 방법 및 장치에 관한 것이다. 더욱, 상세하게는, VMI 서비스 제공시 소요되는 N/W Traffic과 서버에서 처리하는 화면 En/Decoding 처리로 소요되는 딜레이를 절감하여 초저지연 서비스를 제공하기 위한 VMI 화면 표시 방법 및 장치에 관한 것이다.
이 부분에 기술된 내용은 단순히 본 실시예에 대한 배경 정보를 제공할 뿐 종래기술을 구성하는 것은 아니다.
스마트폰의 활성화로 최근 많은 사람들이 스마트폰을 사용중이며, 이를 통해 다양한 App으로 Web 서핑, 게임, 쇼핑, 동영상 시청 등이 가능해 모바일 기반의 다양한 Eco-system들이 폭발적으로 성장하고 있다. 하지만, 많은 App들을 Device에 설치함에 따른 용량/메모리 부족, 스마트폰 성능 저하, 스마트폰 H/W 및 S/W 성능 제약에 따른 App 사용 경험 차이, 데이터 보안, 기기 교체 시 App 재설치 불편함 등 다양한 이슈들이 존재한다. 또한, 최근 스마트폰 App과 동영상의 고품질화, 대용량화 사례가 증가하면서 App 업데이트와 동영상 시청과 App 업데이트를 위한 데이터 소모량이 증가 추세이다.
이러한 On-device의 다양한 문제점을 해결하기 위해, 가상의 스마트폰 환경을 고성능의 Cloud 서버에 구축하고, 서버의 H/W, S/W 자원을 이용하여 사용자에게 높은 성능과 품질을 제공할 수 있는 VMI 기술이 5G Boom-up과 더불어 최근 많은 관심을 받고 있다. VMI(Virtual Mobile Infrastructure)는 가상의 스마트폰 환경을 사용자에게 제공해주는 솔루션으로, 서버에서 생성/관리하는 사용자 VM(Virtual Machine)을 개별 사용자의 스마트폰에 노출시켜 서비스를 제공하는 기술이다.
하지만, 현재, VMI 기술의 경우 기존 PC 환경과 달리 스마트폰 H/W 제약, OS의 Cloud 서버 환경과의 환경 구성(아키텍처 등) 상이, 실시간 무선 N/W을 통한 초고속/저지연 통신 등 기술적 이슈와 Use Case에 따른 융합 기술 역량 부족 등으로 아직 B2B/B2C 시장에 정식 상용화 된 사례는 없다.
이에, 5G 시대에 다양한 모바일 기기들에서 초고속/저지연 N/W 기반의 차별화된 VMI 서비스를 제공 가능토록 하면서도, 다른 기술들과의 융합이 보다 효율적으로 이루어질 수 있도록 하는 새로운 기술을 필요로 한다.
본 실시예는 Edge N/W 구조를 활용하고, App/Web 컨텐츠에 대한 화면을 VMI 서버장치와 VMI 클라이언트 단말기에 미리 버퍼링하여 제공함으로써 VMI 서비스 제공을 위해 소요되는 N/W Traffic과 UX 이벤트(Touch, Scroll 등) 반응에 대한 딜레이를 감소시키고자 하는 데 그 목적이 있다.
본 실시예는, VMI 클라이언트 단말기로부터 요청받은 VMI 서비스를 실행하고, 상기 VMI 서비스의 실행에 따라 대응되는 초기 VMI 화면을 영상으로 변환하여 송출하는 서비스 수행부; 상기 VMI 서비스와 관련하여, 상기 VMI 클라이언트 단말기의 화면 크기 대비 더 큰 사이즈를 갖는 적어도 하나의 대상 VMI 화면 정보를 인코딩하는 데이터 처리부; 및 상기 대상 VMI 화면 정보를 상기 VMI 클라이언트 단말기로 전송하는 데이터 전송부를 포함하는 것을 특징으로 하는 VMI 서버장치를 제공한다.
또한, 본 실시예의 다른 측면에 의하면, VMI 서비스와 관련하여 VMI 서버장치로부터 제공받은 대상 VMI 화면 정보를 저장하는 버퍼링부; 상기 VMI 서비스와 관련하여 사용자 동작정보를 수집하는 사용자 인터페이스부; 및 상기 버퍼링부 내 상기 대상 VMI 화면 정보를 활용하여, 상기 VMI 서비스와 관련하여 디스플레이 상에 표시되고 있는 현재 VMI 화면에 상기 사용자 동작정보가 반영된 결과 VMI 화면 정보를 출력하는 제어부를 포함하는 것을 특징으로 하는 VMI 클라이언트 단말기를 제공한다.
또한, 본 실시예의 다른 측면에 의하면, 하드웨어와 결합되어, VMI 클라이언트 단말기로부터 요청받은 VMI 서비스를 실행하고, 상기 VMI 서비스의 실행에 따라 대응되는 초기 VMI 화면을 영상으로 변환하여 송출하는 과정; 상기 VMI 서비스와 관련하여, 상기 VMI 클라이언트 단말기의 화면 크기 대비 더 큰 사이즈를 갖는 적어도 하나의 대상 VMI 화면 정보를 인코딩하는 과정; 및 상기 대상 VMI 화면 정보를 상기 VMI 클라이언트 단말기로 전송하는 과정을 실행시키기 위하여 컴퓨터로 읽을 수 있는 기록매체에 저장된 컴퓨터프로그램을 제공한다.
또한, 본 실시예의 다른 측면에 의하면, 하드웨어와 결합되어, VMI 서비스와 관련하여 VMI 서버장치로부터 제공받은 대상 VMI 화면 정보를 저장하는 과정; 상기 VMI 서비스와 관련하여 사용자 동작정보를 수집하는 과정; 및 상기 대상 VMI 화면 정보를 활용하여, 상기 VMI 서비스와 관련하여 디스플레이 상에 표시되고 있는 현재 VMI 화면에 상기 사용자 동작정보가 반영된 결과 VMI 화면 정보를 출력하는 과정을 실행시키기 위하여 컴퓨터로 읽을 수 있는 기록매체에 저장된 컴퓨터프로그램을 제공한다.
본 실시예에 따르면, Edge N/W 구조를 활용하고, App/Web 컨텐츠에 대한 화면을 VMI 서버장치와 VMI 클라이언트 단말기에 미리 버퍼링하여 제공함으로써 VMI 서비스 제공을 위해 소요되는 N/W Traffic과 UX 이벤트 반응에 대한 딜레이를 감소시킬 수 있는 효과가 있다.
또한, 본 실시예에 따르면, 인프라 측면에서 백홀 트래픽을 절감함으로써 더 많은 리소스를 확보 가능하며, 이를 통해 더 많은 사용자들에게 안정적인 서비스를 제공할 수 있는 효과가 있다.
도 1은 본 실시예에 따른 VMI 서비스 시스템을 예시한 예시도이다.
도 2는 본 실시예에 따른 VMI 클라이언트 단말기를 개략적으로 나타낸 블록 구성도이다.
도 3은 본 실시예에 따른 VMI 서버장치를 개략적으로 나타낸 블록 구성도이다.
도 4는 본 실시예에 따른 VMI 서버장치의 VMI 화면 표시 방법을 설명하기 위한 순서도이다.
도 5는 본 실시예에 따른 VMI 클라이언트 단말기의 VMI 화면 표시 방법을 설명하기 위한 순서도이다.
도 6 내지 도 7은 본 실시예에 따른 버퍼 영역 상에 저장되는 대상 VMI 화면 정보에 대한 관리정보를 예시한 도면이다.
도 8 내지 도 10은 본 실시예에 따른 VMI 화면 표시 방법에 따른 사용자 동작 기능 지원방법을 설명하기 위한 예시도이다.
이하, 본 실시예를 첨부된 도면을 참조하여 상세하게 설명한다.
VMI(Virtual Mobile Infrastructure)는 가상의 스마트폰 환경을 사용자에게 제공해주는 솔루션으로, 서버에서 생성/관리하는 사용자 VM(Virtual Machine)을 개별 사용자의 모바일 기기에 노출시켜 서비스를 제공하는 기술이다.
본 실시예는 이러한 VMI 기술과 관련하여 모바일 기기들에서 초고속/저지연 N/W 기반의 차별화된 VMI 서비스를 제공 가능토록 하면서도, 다른 기술들과의 융합이 보다 효율적으로 이루어질 수 있도록 하는 새로운 방안을 제안한다. 예컨대, 본 실시예에서는 VMI 서비스 제공시 소요되는 N/W Traffic과 서버에서 처리하는 화면 En/Decoding 처리로 소요되는 딜레이를 절감하여 초저지연 서비스를 제공할 수 있도록 하는 VMI 화면 표시 방법을 제안한다.
도 1은 본 실시예에 따른 VMI 서비스 시스템을 예시한 예시도이다.
도 1에 도시하듯이, 본 실시예에 따른 VMI 서비스 시스템(100)은 VMI 클라이언트 단말기(110), VMI 게이트웨이 장치(120), VMI 서버장치(130) 및 엣지 서버장치(140)를 포함한다. 여기서, 본 실시예에 따른 VMI 서비스 시스템(100)에 포함되는 구성 요소는 반드시 이에 한정되는 것은 아니다. 예컨대, 이러한, VMI 서비스 시스템(100)은 다른 기능의 구현을 위해 도시한 것보다 많거나 적은 구성요소 또는 상이한 구성요소의 구성을 가질 수 있음을 인식하여야 한다.
한편, 본 실시예에 있어서, VMI 게이트웨이 장치(120), VMI 서버장치(130)의 위치는 초저지연 VMI 서비스가 가능하고, N/W Backhaul Traffic 절감 효과를 위해, 그 위치가 일반적인 인터넷 구간이나 Public/Private Cloud 서버가 아닌 교환국사, 전송국사, 특정 B2B 사이트 등이 될 수 있다. VMI 클라이언트 단말기(110)는 현재 위치에서 가장 가까운 Edge와 통신을 수행하게 되며, LTB/5G의 eNB/gNB, cell ID 등을 참고한다.
VMI 클라이언트 단말기(110)는 사용자의 키 조작 또는 명령에 따라 네트워크를 경유하여 각종 데이터를 송수신할 수 있는 단말기를 말하는 것이며, 태블릿 PC(Tablet PC), 랩톱(Laptop), 개인용 컴퓨터(PC: Personal Computer), 스마트폰(Smart Phone), 개인휴대용 정보단말기(PDA: Personal Digital Assistant) 및 이동통신 단말기(Mobile Communication Terminal) 등 중 어느 하나일 수 있다.
VMI 클라이언트 단말기(110)는 VMI 서비스 애플리케이션을 탑재하여 사용자로 하여금 VMI 서비스를 제공받을 수 있도록 동작한다. 즉, VMI 클라이언트 단말기(110)는 사용자의 조작 또는 명령에 의해 VMI 서비스 애플리케이션을 구동하며, VMI 서비스 애플리케이션을 통해 On-device에 가상의 VM(Virtual Machine)을 표시하기 위한 기능을 수행한다. 예컨대, VMI 클라이언트 단말기(110)는 실제 화면에 대해 VMI 서버장치(130)에서 실시간 인코딩 처리를 한 영상을 받아 On-device의 디스플레이 상에 표시할 수 있다.
VMI 클라이언트 단말기(110)는 VMI 게이트웨이 장치(120)와 연결되어 사용자 인증, VMI 서비스 제공 수준(N/W 대역폭, 해상도 등) 확정, 데이터 보안 통신 등의 기능을 수행한다.
VMI 클라이언트 단말기(110)는 사용자 기본 정보, 디바이스의 Local 정보(H/W, S/W 등), 사용자 Action 정보(터치, 스크롤 등) 등을 수집하여 VMI 서버장치(130)로 전달한다.
VMI 클라이언트 단말기(110)는 환경 설정 기능을 제공하며, 이를 통해, 사용자로 하여금 VMI 서비스와 관련하여 다양한 옵션을 설정할 수 있도록 한다.
본 실시예에 따른 VMI 클라이언트 단말기(110)는 VMI 서비스에 대한 화면 정보를 버퍼 영역 상에 미리 저장하여 제공함으로써 초저지연 VMI 서비스를 제공한다.
즉, 본 실시예에 따른, VMI 클라이언트 단말기(110)는 VMI 서비스에 상응하는 버퍼 영역을 구성하며, 해당 버퍼 영역 상에 VMI 서비스와 관련하여 VMI 서버장치(130)에서 미리 버퍼링하여 처리한 대상 VMI 화면 정보를 사전에 다운로드 받아 저장한다. 여기서 대상 VMI 화면 정보는 VMI 서비스와 관련하여 제공되는 App/Web 컨텐츠에 대한 모든 화면 정보일 수 있다.
이후, 본 실시예에 따른, VMI 클라이언트 단말기(110)는 VMI 서비스와 관련한 사용자 동작정보 발생 시 해당 VMI 서비스와 관련하여 기 수집된 대상 VMI 화면 정보를 활용하여 사용자 동작정보에 상응하는 결과 VMI 화면 정보를 디스플레이 상에 표시한다. 예컨대, VMI 클라이언트 단말기(110)는 VMI 서비스와 관련한 사용자 동작정보 발생 시 En/Decoding 처리를 위한 VMI 서버장치(130)와의 연동 없이, 바로 VMI 클라이언트 단말기(110)의 버퍼 영역에서 관련 VMI 화면 정보를 불러와서 제공한다.
VMI 게이트웨이 장치(120)는 VMI 서비스 제공을 위해 VMI 클라이언트 단말기(110) 및 VMI 서버장치(130) 사이에 중개 역할을 수행하는 장치를 의미한다. 즉, VMI 게이트웨이 장치(120)는 VMI 클라이언트 단말기(110)에 대한 인증을 수행하고, 인증결과에 따라 VMI 서비스 제공을 위한 적절한 VMI 서버장치(130)와의 연결을 중개하는 기능을 수행한다.
VMI 게이트웨이 장치(120)는 VMI 클라이언트 단말기(110)로부터 VMI 서비스와 관련하여 입력된 사용자 입력정보를 VMI 서버장치(130)로 전달하고, VMI 서버장치(130)로부터의 응답을 VMI 클라이언트 단말기(110)로 전달할 수 있다. 예컨대, VMI 게이트웨이 장치(120)는 VMI 클라이언트 단말기(110)로부터 사용자 Action 정보(터치, 스크롤 등) 등을 수신하여 VMI 서버장치(130)로 전달하고, 이에 대응하여, VMI 서버장치(130)로부터 인코딩된 영상을 제공받아, VMI 클라이언트 단말기(110)로 전달할 수 있다.
VMI 서버장치(130)는 VMI 서비스 제공과 관련하여, VMI 클라이언트 단말기(110)가 사용할 VM을 생성하고 관리하는 기능을 수행한다. 즉, VMI 서버장치(130)는 사용자별 VM에 대하여 저장공간/메모리 등을 설정하고, 애플리케이션 설치/업데이트 관리, 사용자 설정값 등을 저장한다.
VMI 서버장치(130)는 VMI 클라이언트 단말기(110)를 통해 사용자 동작을 입력받으면, 해당 동작을 처리하여 VMI 클라이언트 단말기(110)로 전달한다. 예컨대, VMI 서버장치(130)는 VMI 클라이언트 단말기(110)를 통해 입력받은 사용자 동작에 기반하여 실제 화면에 대해 실시간 인코딩 처리를 하고, 인코딩된 영상을 VMI 클라이언트 단말기(110)로 전달한다. 이를 위해, VMI 서버장치(130)는 고성능의 CPU, GPU를 탑재하여 On-device 대비 고품질 영상 및 빠른 연산 처리 기능을 제공 가능토록 구현될 수 있다.
본 실시예에 있어서, VMI 서버장치(130)는 VMI 클라이언트 단말기(110)에서 요청하는 VMI 서비스 예컨대, App/Web에 대한 실행을 처리하고, 해당 화면을 인코딩하면서 VMI 클라이언트 단말기(110)로 실시간으로 전송한다.
이와 동시에, 본 실시예에 따른 VMI 서버장치(130)는 VMI 서비스와 관련하여, VMI 클라이언트의 화면 크기 대비 더 큰 사이즈를 갖는 적어도 하나의 대상 VMI 화면 정보를 산출하고, 이를 인코딩 처리하여 제공한다. 이후, VMI 서버장치(130)는 대상 VMI 화면 정보를 VMI 서비스에 대한 캐싱 데이터로서 VMI 클라이언트 단말기(110)로 전송한다.
한편, 본 실시예에 있어서, VMI 서버장치(130)는 상기의 인코딩 과정을 수행하는 데 있어서, Edge N/W 구조를 활용할 수 있다. 예컨대, 본 실시예에 따른 VMI 서버장치(130)는 별도의 버퍼 영역을 구성하고, 버퍼 영역 상에 VMI 서비스와 관련하여 엣지(Edge) 서버장치 상에 캐싱 데이터로서 기 저장된 컨텐츠 정보를 제공받아 대상 VMI 화면 정보를 산출할 수 있다.
본 실시예에 따른 VMI 서버장치(130)는 히트율이 높은 컨텐츠에 대해 N/W 통신을 하지 않고, 엣지 서버장치(140)에 저장된 컨텐츠를 바로 사용함으로써 딜레이를 절감할 수 있고, N/W Traffic을 절감할 수 있다.
엣지 서버장치(140)는 외부 서버장치로부터 VMI 서비스와 관련하여 히트율이 높을 것으로 예상되는 컨텐츠(Web, App, 뉴스 등)를 미리 제공받아, 일정 시간 동안 저장하며, 이를 VMI 서비스에 대한 캐싱 데이터로서 제공한다.
이를 위해, 엣지 서버장치(140) 상에는 VMI 서버장치(130)와는 별도로 컨텐츠를 저장하기 위한 저장공간이 할당될 수 있다.
엣지 서버장치(140)는 위치, 시간별 통계를 분석하여 어떤 컨텐츠를 엣지 서버장치(140) 상에 반영할지 여부를 결정할 수 있다. 한편, 엣지 서버장치(140) 상에 저장되는 컨텐츠는 일정 시간 기간을 두어 갱신될 수 있다.
도 2는 본 실시예에 따른 VMI 클라이언트 단말기를 개략적으로 나타낸 블록 구성도이다.
도 2에 도시하듯이, 본 실시예에 따른 VMI 클라이언트 단말기(110)는 버퍼링부(200), 사용자 인터페이스부(210) 및 제어부(220)를 포함한다. 본 실시예에 따른 VMI 클라이언트 단말기(110)에 포함되는 구성 요소는 반드시 이에 한정되는 것은 아니다. 즉, 도 2의 경우 본 실시예에 따른 초저지연 VMI 서비스 제공을 위한 VMI 클라이언트 단말기(110)의 필수 구성요소만을 예시적으로 도시한 것으로서, 이러한, VMI 클라이언트 단말기(110)는 다른 기능의 구현을 위해 도시한 것보다 많거나 적은 구성요소 또는 상이한 구성요소의 구성을 가질 수 있음을 인식하여야 한다.
버퍼링부(200)는 현재 실행 중인 VMI 서비스에 상응하는 버퍼 영역을 구성하며, 버퍼 영역 상에 상기 VMI 서비스와 관련하여 VMI 서버장치(130)에서 미리 버퍼링하여 처리한 대상 VMI 화면 정보를 사전에 다운로드 받아 저장한다.
본 실시예에 있어서, 버퍼링부(200)는 VMI 서비스와 관련하여 VMI 서버장치(130)로부터 현재 VMI 클라이언트 단말기(110)의 디스플레이 상에 표시되는 VMI 화면뿐만아니라, 보이지 않은 숨은 영역의 화면을 포함한 모든 화면 정보(ex: 대상 VMI 화면 정보)를 미리 다운로드 받아 저장한다.
버퍼링부(200)는 VMI 서버장치(130)로부터 대상 VMI 화면 정보와 더불어, 해당 대상 VMI 화면 정보와 관련한 버퍼 관리정보를 추가로 수신한다. 이러한 버퍼 관리정보는, VMI 서비스와 관련한 사용자 동작정보를 처리 시 기준 데이터로서 활용될 수 있다.
버퍼링부(200)는 대상 VMI 화면 정보와 관련하여 산출된 타입정보, URL 정보 및 사이즈 정보 및 메타 정보 등을 관리정보로서 수신할 수 있다. 이때, 메타 정보로는 대상 VMI 화면정보에서 추출한 링크 정보 및 해당 링크 정보에 대한 좌표 정보 등이 포함될 수 있다. 한편, 본 실시예에 따른 버퍼링부(200)에 추가 수집되는 관리정보의 구체적인 내역은 도 7을 통해 확인할 수 있다.
사용자 인터페이스부(210)는 VMI 서비스와 관련하여 사용자 동작정보를 수집하는 기능을 수행한다.
본 실시예에 있어서, 사용자 인터페이스부(210)는 현재 VMI 클라이언트 단말기(110)의 디스플레이 상에 표시되고 있는 VMI 화면에 대한 사용자의 스크롤, 터치 및 영역 선택 등의 이벤트 발생정보를 상기의 사용자 동작정보로서 수집할 수 있다.
제어부(220)는 사용자 동작정보에 상응하는 결과 VMI 화면 정보를 디스플레이 상에 표시하는 기능을 수행한다.
본 실시예에 있어서, 제어부(220)는 스크롤, 터치, 스와이프(Swipe) 등에 의해 현재 화면의 위치 변경이 발생 시 버퍼링부(200)에 저장된 대상 VMI 화면 정보를 활용하여 사용자 동작정보에 상응하는 결과 VMI 화면 정보를 디스플레이 상에 표시한다.
이하, 도 8 내지 도 10을 함께 참조하여, 본 실시예에 따른 제어부(220)의 사용자 동작정보에 상응하는 결과 VMI 화면 정보 표시방법에 대해 설명하도록 한다.
도 8의 (a)는 본 실시예에 따른 VMI 클라이언트 단말기(110)의 디스플레이 상에 표시되는 VMI 화면 영역에 대한 정보를 도시하고 있다. 본 실시예의 경우, 디스플레이의 크기(해상도)가 1440 × 2960인 경우로 예시하였으며, 이와 관련하여, VMI 화면의 좌표정보는 dx1=0, dy1=0, dx2=1440, dy2=2960로 표현될 수 있다. 여기서, dx1, dy1, dx2 , dy2는 현재 VMI 클라이언트 단말기(110)의 디스플레이 상에 표시되는 초기 VMI 화면의 각 모서리 부분에 대한 좌표정보를 의미하며, 이후, 사용자 동작정보에 따른 상대적 이동값을 합산하는 과정에 있어서, 최초 기준 좌표정보로서 이용된다.
도 8의 (b)는 본 실시예에 따른 VMI 클라이언트 단말기(110)의 버퍼링부(200)에 저장된 대상 VMI 화면 정보 즉, VMI 서비스와 관련하여 제공되는 App/Web 컨텐츠에 대한 전체 화면정보를 도시하고 있다. 본 실시예의 경우, 컨텐츠 크기가 1600 × 4000인 경우로 예시하였으며, 이와 관련하여, 컨텐츠의 전체 화면에 대한 좌표정보는 cx1=0, cy1=0, cx2=1600, cy2=4000로 표현될 수 있다. 여기서, cx1, cy1, cx2 , cy2는 버퍼링부(200)에 저장된 App/Web 컨텐츠에 대한 전체 화면의 각 모서리 부분에 대한 좌표정보를 의미하며, 이후, 사용자 동작정보에 따른 현재 화면의 위치 변경이 발생 시 변경된 위치에 상응하는 대상 VMI 화면 정보를 산출하는 과정에 있어서, 참조 자료로서 활용된다.
도 9는 본 실시예에 따른 사용자 동작정보에 따른 대상 VMI 화면 정보의 산출방법을 예시한 예시도이다.
본 실시예에 따른 제어부(220)는 디스플레이 상에 표시되고 있는 현재 VMI 화면의 좌표정보 상에 사용자 동작정보에 따른 상대적 이동값을 합산하여 대상 VMI 화면 정보의 산출을 위한 좌표정보 즉, 버퍼링부(200)에서 인식할 수 있는 좌표값으로 변경한다.
한편, 도 9의 (a), (b), (c), (d)는 스크롤 이벤트, 터치 이벤트 및 영역 선택 이벤트가 발생 시에 각각에 상응하는 좌표 변경 정보를 산출하는 방법을 예시하고 있다.
도 9의 (b)는, 스크롤 이벤트 발생에 따라 현재 VMI 화면의 좌표 대비 x는 200, y는 1000만큼 이동한 경우를 예시하고 있으며, 이 경우, 상대 좌표 rx1, ry1, rx2, ry2는 각각 rx1 = cx1+200 = 200, ry1 = cy1+1000 = 1000, rx2 = rx1+dx2 = 200+1440 = 1640, ry2 = ry1+dy2 = 1000+2960 = 3960일 수 있다. 여기서, rx1, ry1, rx2, ry2는 현재 VMI 화면에서 스크롤 이벤트 발생에 따라 변경된 위치에 대한 좌표값을 콘텐츠 화면의 좌표정보를 기준으로 하여 나타낸 정보로서, 스크롤 이벤트 발생에 따른 대상 VMI 화면 정보를 산출하는 과정에 있어서, 참조 자료로서 활용된다.
도 9의 (c)는, 영역 선택 이벤트 발생에 따라 화면 상 x는 800, y는 1600 위치에서부터 x는 1100, y는 2000까지 영역을 선택한 경우를 예시하고 있으며, 이 경우 터치좌표 tx1, ty1, tx2, ty2는 각각 tx1 = rx1+800=1000, ty1 = ry1+1600=2600, tx2 = rx1+1100=1300, ty2 = ry1+2000=3000일 수 있다. 여기서, tx1, ty1, tx2, ty2는 현재 VMI 화면에서 영역 선택 이벤트 발생에 따라 선택된 위치에 대한 좌표값을 콘텐츠 화면의 좌표정보를 기준으로 하여 나타낸 정보로서, 영역 선택 이벤트 발생에 따른 대상 VMI 화면 정보를 산출하는 과정에 있어서, 참조 자료로서 활용된다.
도 9의 (d)는, 터치 이벤트 발생에 따라 화면 상 x는 800, y는 1600 위치를 터치한 경우를 예시하고 있으며, 이 경우 터치좌표 tx1, ty1, tx2, ty2는 각각 tx1 = rx1+800=1000, ty1 = ry1+1600=2600, tx2 = tx1=1000, ty2 = ty1=2600일 수 있다. 여기서, tx1, ty1, tx2, ty2는 현재 VMI 화면에서 터치 이벤트 발생에 따라 선택된 위치에 대한 좌표값을 콘텐츠 화면의 좌표정보를 기준으로 하여 나타낸 정보로서, 터치 이벤트 발생에 따른 대상 VMI 화면 정보를 산출하는 과정에 있어서, 참조 자료로서 활용된다.
제어부(200)는 산출된 좌표정보에 상응하는 대상 VMI 화면 정보를 결과 VMI 화면 정보로서 산출할 수 있다.
한편, 본 실시예에 따른 제어부(220)는 버퍼링부(200)로부터 대상 VMI 화면 정보와 관련하여 산출된 타입정보, URL 정보 및 사이즈 정보 및 메타 정보 등의 관리정보를 추가로 수신하고, 이를 활용하여 링크 이벤트 정보를 지원할 수 있다. 예컨대, 제어부(220)는 메타 정보 내 앞서, 산출된 좌표 정보와 동일한 좌표 정보에 매칭되어 저장된 링크 정보를 산출하여 링크 이벤트를 실행시킬 수 있다.
도 10은 본 실시예에 따른 터치 동작에 따른 링크 이벤트 발생 시의 이벤트 실행 방법을 예시한 예시도이다.
도 10은 화면 상 x는 800, y는 1600 위치를 터치한 경우를 예시하고 있으며, 이 경우, 터치좌표는 tx1 = tx2 =1000, ty1 = ty2 =2600일 수 있다. 이때, 메타 정보의 좌표정보 중 상기의 터치좌표와 동일한 좌표 정보에 매칭되어 저장된 링크 정보를 탐색하면, Link No.1이 조건에 맞으므로, Link No.1의 URL인 'http://www.no.1...'이 실행된다.
즉, 본 실시예에 따른 제어부(220)에 의하는 경우 사용자에 의해 화면이 상하/좌우로 이동할 시 VMI 서버장치(130)와 En/Decoding 처리를 프레임 단위로 하지 않고, 버퍼링부(200)에서 바로 관련 화면 이미지를 불러들임으로써 N/W 트래픽과 VMI 서버장치(130)에서 처리하는 화면 En/Decoding 처리로 소요되는 딜레이를 절감하여 초저지연 서비스를 제공할 수 있고, 사용 편의성(사용자 입력에 대한 반응속도)을 향상시킬 수 있는 효과가 있다.
도 3은 본 실시예에 따른 VMI 서버장치를 개략적으로 나타낸 블록 구성도이다.
도 3에 도시하듯이, 본 실시예에 따른 VMI 서버장치(130)는 서비스 수행부(300), 데이터 처리부(310) 및 데이터 전송부(320)를 포함한다. 여기서, 본 실시예에 따른 VMI 서버장치(130)에 포함되는 구성 요소는 반드시 이에 한정되는 것은 아니다.
서비스 수행부(300)는 VMI 클라이언트 단말기(110)로부터 요청받은 VMI 서비스를 실행하고, VMI 서비스 실행에 따라 대응되는 초기 VMI 화면을 영상으로 변환하여 송출한다. 여기서, 초기 VMI 화면의 크기는 VMI 클라이언트 단말기(110)의 디스플레이 크기에 따라 결정될 수 있다.
데이터 처리부(310)는 VMI 서비스와 관련하여 VMI 클라이언트 단말기(110)의 화면 크기 대비 더 큰 사이즈를 갖는 적어도 하나의 대상 VMI 화면 정보를 인코딩 처리하여 제공한다. 여기서 대상 VMI 화면 정보는 VMI 서비스와 관련하여 제공되는 App/Web 컨텐츠에 대한 모든 화면 정보일 수 있다. 즉, 데이터 처리부(310)는 현재 VMI 클라이언트 단말기(110)의 디스플레이 상에 표시되는 초기 VMI 화면뿐만아니라, 보이지 않은 숨은 영역의 화면을 포함한 모든 화면 정보(ex: 대상 VMI 화면 정보)를 미리 다운로드 받고, 이를 인코딩 처리하여 제공할 수 있다.
한편, 데이터 처리부(310)는 서비스 수행부(300)를 통해 초기 VMI 화면을 송출하는 것과 동시에 상기의 인코딩 동작을 수행할 수 있다.
본 실시예에 있어서, 데이터 처리부(310)는 바람직하게는 인코딩 동작을 수행하는 데 있어서, Edge N/W 구조를 활용할 수 있다. 예컨대, 본 실시예에 따른 데이터 처리부(310)는 VMI 서비스에 상응하는 버퍼 영역을 구성하며, 버퍼 영역 상에VMI 서비스와 관련하여 엣지(Edge) 서버장치(140) 상에 캐싱 데이터로서 기 저장된 컨텐츠 정보를 다운로드 받아, 상기의 인코딩 관련 동작을 수행할 수 있다.
데이터 처리부(310)는 버퍼 영역 상에 VMI 서비스와 관련하여 산출한 적어도 하나의 대상 VMI 화면 정보를 버퍼링하여 저장한다.
데이터 처리부(310)는 엣지 서버장치(140) 상에 이미 저장된 컨텐츠 정보를 갖고 오면서 바로 대상 VMI 화면 정보에 대한 버퍼링 동작을 수행할 수 있다. 다른 실시예에서, 데이터 처리부(310)는 엣지 서버장치(140) 상에 저장되어 있지 않는 컨텐츠 정보에 대해서는 VMI 클라이언트 단말기(110)에 현재 화면 정보를 전송하면서 버퍼링 동작을 동시에 수행할 수 있다.
데이터 처리부(310)는 VMI 서비스와 관련하여 수집된 컨텐츠 정보를 기반으로 VMI 서비스에 상응하는 화면 크기 정보를 산출하고, 산출한 화면 크기 정보에 근거하여 버퍼 영역의 공간을 확보할 수 있다.
데이터 처리부(310)는 VMI 서비스와 관련하여 수집된 컨텐츠 정보에 대한 화면 정보를 프레임 단위로 캡쳐하여 대상 VMI 화면 정보를 산출한다. 이때, 데이터 처리부(310)는 소정 시간 단위로 측정된 프레임의 변화값에 따라 대상 VMI 화면 정보를 필터링하여 제공할 수 있다. 예컨대, 데이터 처리부(310)는 동영상/애니메이션/배너 등 실시간으로 영상이 변경되는 컨텐츠들에 대해서는 정지화면을 저장하거나, 해당 컨텐츠가 포함된 화면은 인코딩 대상에서 제외할 수 있다.
데이터 처리부(310)는 대상 VMI 화면 정보와 더불어, 해당 대상 VMI 화면 정보와 관련한 버퍼 관리정보를 추가로 수집한다. 즉, 데이터 처리부(310)는 대상 VMI 화면 정보와 관련하여 산출된 타입정보, URL 정보 및 사이즈 정보 및 메타 정보 등을 관리정보로서 수집하고, 이를 대상 VMI 화면 정보와 함께 VMI 클라이언트 단말기(110)로 전송한다. 한편, 데이터 처리부(310)가 대상 VMI 화면 정보와 관련하여 수집하는 버퍼 관리정보에 대한 구체적인 내역은 도 6을 통해 확인할 수 있다.
데이터 전송부(320)는 데이터 처리부(310) 상에 미리 인코딩 처리한 대상 VMI 화면 정보 및 이에 상응하는 버퍼 관리정보를 VMI 서비스에 대한 캐싱 데이터로서 VMI 클라이언트 단말기로 전송한다.
도 4는 본 실시예에 따른 VMI 서버장치의 VMI 화면 표시 방법을 설명하기 위한 순서도이다.
VMI 서버장치(130)는 VMI 클라이언트 단말기(110)로부터 요청받은 VMI 서비스를 실행하고, VMI 서비스 실행에 따라 대응되는 초기 VMI 화면을 영상으로 변환하여 송출한다(S402).
VMI 서버장치(130)는 VMI 서비스와 관련하여, VMI 클라이언트 단말기(110)의 화면 크기 대비 더 큰 사이즈를 갖는 적어도 하나의 대상 VMI 화면 정보를 인코딩한다(S404). 단계 S404에서 VMI 서버장치(130)는 VMI 서비스와 관련하여 엣지(Edge) 서버장치(140) 상에 캐싱 데이터로서 기 저장된 컨텐츠 정보를 제공받고, 이를 기반으로 인코딩 동작을 수행할 수 있다.
VMI 서버장치(130)는 대상 VMI 화면 정보와 더불어, 대상 VMI 화면 정보와 관련하여 산출된 타입정보, URL 정보 및 사이즈 정보 및 메타 정보 등을 포함하는 버퍼 관리정보를 추가로 수집할 수 있다.
VMI 서버장치(130)는 단계 S404에서 미리 인코딩하여 처리한 대상 VMI 화면 정보를 VMI 서비스에 대한 캐싱 데이터로서 VMI 클라이언트 단말기(110)로 전송한다.
도 5는 본 실시예에 따른 VMI 클라이언트 단말기의 VMI 화면 표시 방법을 설명하기 위한 순서도이다.
VMI 클라이언트 단말기(110)는 현재 실행 중인 VMI 서비스에 상응하는 버퍼 영역을 구성하며, 버퍼 영역 상에 VMI 서비스와 관련하여 VMI 서버장치로부터 제공받은 대상 VMI 화면 정보를 저장한다(S502). 단계 S502에서 VMI 클라이언트 단말기(110)는 VMI 서비스와 관련하여 VMI 서버장치(130)로부터 현재 VMI 클라이언트 단말기(110)의 디스플레이 상에 표시되는 VMI 화면뿐만아니라, 보이지 않은 숨은 영역의 화면을 포함한 모든 화면 정보를 미리 다운로드 받아 저장한다.
VMI 클라이언트 단말기(110)는 VMI 서버장치(130)로부터 대상 VMI 화면 정보와 더불어, 해당 대상 VMI 화면 정보와 관련한 버퍼 관리정보를 추가로 수신한다. 이러한 버퍼 관리정보는, 대상 VMI 화면 정보와 관련하여 산출된 타입정보, URL 정보 및 사이즈 정보 및 메타 정보 등이 포함될 수 있다.
VMI 클라이언트 단말기(110)는 단계 S502의 VMI 서비스와 관련하여 사용자 동작정보를 수집한다(S504). 단계 S504에서 VMI 클라이언트 단말기(110)는 현재 VMI 클라이언트 단말기(110)의 디스플레이 상에 표시되고 있는 VMI 화면에 대한 사용자의 스크롤, 터치 및 영역 선택 등의 이벤트 발생정보를 상기의 사용자 동작정보로서 수집할 수 있다.
VMI 클라이언트 단말기(110)는 단계 S502에서 수집한 대상 VMI 화면 정보를 활용하여 단계 S504의 사용자 동작정보에 상응하는 결과 VMI 화면 정보를 디스플레이 상에 표시한다(S506). 단계 S506에서 VMI 클라이언트 단말기(110)는 디스플레이 상에 표시되고 있는 현재 VMI 화면의 좌표정보 상에 사용자 동작정보에 따른 상대적 이동값을 합산하여 대상 VMI 화면 정보의 산출을 위한 좌표정보 즉, 버퍼링부(200)에서 인식할 수 있는 좌표값으로 변경한다.
VMI 클라이언트 단말기(110)는 산출된 좌표정보에 상응하는 대상 VMI 화면 정보를 결과 VMI 화면 정보로서 산출할 수 있다.
VMI 클라이언트 단말기(110)는 단계 S502에서 추가 수집한 대상 VMI 화면 정보의 버퍼 관리정보를 활용하여 링크 이벤트 정보를 지원할 수 있다.
여기서, 단계 S402 내지 S406 및 단계 S502 내지 S506은 앞서 설명된 VMI 서버장치(130) 및 VMI 클라이언트 단말기(110)의 각 구성요소의 동작에 대응되므로 더 이상의 상세한 설명은 생략한다.
도 4 및 도 5에서는 각각의 과정을 순차적으로 실행하는 것으로 기재하고 있으나, 반드시 이에 한정되는 것은 아니다. 다시 말해, 도 4 및 도 5에 기재된 과정을 변경하여 실행하거나 하나 이상의 과정을 병렬적으로 실행하는 것으로 적용 가능할 것이므로, 도 4 및 도 5는 시계열적인 순서로 한정되는 것은 아니다.
전술한 바와 같이 도 4 및 도 5에 기재된 VMI 화면 표시 방법은 프로그램으로 구현되고 컴퓨터의 소프트웨어를 이용하여 읽을 수 있는 기록매체(CD-ROM, RAM, ROM, 메모리 카드, 하드 디스크, 광자기 디스크, 스토리지 디바이스 등)에 기록될 수 있다.
이상의 설명은 본 실시예의 기술 사상을 예시적으로 설명한 것에 불과한 것으로서, 본 실시예가 속하는 기술 분야에서 통상의 지식을 가진 자라면 본 실시예의 본질적인 특성에서 벗어나지 않는 범위에서 다양한 수정 및 변형이 가능할 것이다. 따라서, 본 실시예들은 본 실시예의 기술 사상을 한정하기 위한 것이 아니라 설명하기 위한 것이고, 이러한 실시예에 의하여 본 실시예의 기술 사상의 범위가 한정되는 것은 아니다. 본 실시예의 보호 범위는 아래의 청구범위에 의하여 해석되어야 하며, 그와 동등한 범위 내에 있는 모든 기술 사상은 본 실시예의 권리범위에 포함되는 것으로 해석되어야 할 것이다.
100: VMI 서비스 시스템 110: VMI 클라이언트 단말기
120: VMI 게이트웨이 장치 130: VMI 서버장치
140: 엣지 서버장치 200: 버퍼링부
210: 사용자 인터페이스부 220: 제어부
300: 서비스 수행부 310: 데이터 처리부
320: 데이터 전송부

Claims (12)

  1. VMI 클라이언트 단말기로부터 요청받은 VMI 서비스를 실행하고, 상기 VMI 서비스의 실행에 따라 대응되는 초기 VMI 화면을 영상으로 변환하여 송출하는 서비스 수행부;
    상기 VMI 서비스와 관련하여, 상기 VMI 클라이언트 단말기의 화면 크기 대비 더 큰 사이즈를 갖는 적어도 하나의 대상 VMI 화면 정보를 인코딩하는 데이터 처리부; 및
    상기 대상 VMI 화면 정보를 상기 VMI 클라이언트 단말기로 전송하는 데이터 전송부
    를 포함하되,
    상기 VMI 클라이언트 단말기의 화면 크기 대비 더 큰 사이즈를 갖는 적어도 하나의 대상 VMI 화면 정보는,
    상기 VMI 서비스와 관련하여 제공되는 App/Web 컨텐츠의 전체화면에 대한 정보인 것을 특징으로 하는 VMI 서버장치.
  2. 제 1항에 있어서,
    상기 데이터 처리부는,
    상기 VMI 서비스에 상응하는 버퍼 영역을 구성하며, 상기 버퍼 영역 상에 상기 VMI 서비스와 관련하여 엣지(Edge) 서버장치 상에 캐싱 데이터로서 기 저장된 컨텐츠 정보를 제공받아 상기 대상 VMI 화면 정보를 산출하는 것을 수행하는 것을 특징으로 하는 VMI 서버장치.
  3. 제 1항에 있어서,
    상기 데이터 처리부는,
    상기 VMI 서비스와 관련하여 수집된 컨텐츠 정보의 화면을 상기 VMI 클라이언트 단말기의 화면 크기 대비 더 큰 사이즈 단위로 캡쳐하여 현재 상기 VMI 클라이언트 단말기의 화면 상에 표시되는 상기 초기 VMI 화면 및 상기 VMI 클라이언트 단말기의 화면 상에 표시되지 않은 숨은 영역의 화면을 포함한 상기 대상 VMI 화면 정보를 산출하는 것을 특징으로 하는 VMI 서버장치.
  4. 제 1항에 있어서,
    상기 데이터 전송부는,
    상기 대상 VMI 화면정보에서 추출한 링크 정보 및 상기 링크 정보에 대한 좌표 정보를 포함한 상기 대상 VMI 화면정보의 메타 정보를 상기 VMI 클라이언트 단말기로 추가 전송하는 것을 특징으로 하는 VMI 서버장치.
  5. VMI 서비스와 관련하여 VMI 서버장치로부터 사전에 제공받은 대상 VMI 화면 정보를 버퍼 영역상에 저장하는 버퍼링부;
    상기 VMI 서비스와 관련하여 사용자 동작정보를 수집하는 사용자 인터페이스부; 및
    상기 버퍼링부 내 상기 대상 VMI 화면 정보를 활용하여, 상기 VMI 서비스와 관련하여 디스플레이 상에 표시되고 있는 현재 VMI 화면에 상기 사용자 동작정보가 반영된 결과에 상응하는 대상 VMI 화면 정보를 산출하고, 산출된 대상 VMI 화면 정보를 기초로 생성한 화면 이미지를 출력하는 제어부
    를 포함하는 것을 특징으로 하는 VMI 클라이언트 단말기.
  6. 제 5항에 있어서,
    상기 버퍼링부는,
    상기 VMI 서버장치로부터 현재 실행 중인 VMI 서비스와 관련하여 상기 디스플레이의 화면 크기 대비 더 큰 사이즈를 갖는 상기 대상 VMI 화면정보를 수신하는 것을 특징으로 하는 VMI 클라이언트 단말기.
  7. 제 6항에 있어서,
    상기 대상 VMI 화면정보는,
    현재 상기 디스플레이 상에 표시되는 화면 정보와 상기 VMI 클라이언트 단말기의 화면 상에 표시되지 않은 숨은 영역의 화면 정보를 모두 포함하여 구성된 것을 특징으로 하는 VMI 클라이언트 단말기.
  8. 제 5항에 있어서,
    상기 제어부는,
    상기 디스플레이 상에 표시되고 있는 현재 VMI 화면의 좌표정보 상에 상기 사용자 동작정보에 따른 상대적 이동값을 합산하여 스크롤 이벤트에 따른 상대 좌표정보, 터치 이벤트에 따른 터치 좌표정보 및 영역 선택 이벤트에 따른 터치 좌표정보 중 어느 하나의 좌표 정보를 산출하고, 산출된 좌표 정보에 상응하는 대상 VMI 화면 정보의 영역을 상기 결과 VMI 화면 정보로서 산출하는 것을 특징으로 하는 VMI 클라이언트 단말기.
  9. 제 8항에 있어서,
    상기 버퍼링부는,
    상기 VMI 서버장치로부터 상기 대상 VMI 화면정보에서 추출한 링크 정보 및 상기 링크 정보에 대한 좌표 정보를 포함한 상기 대상 VMI 화면정보의 메타 정보를 추가로 수신하며,
    상기 제어부는, 상기 메타 정보를 활용하여 링크 이벤트 정보를 지원하는 것을 특징으로 하는 VMI 클라이언트 단말기.
  10. 제 9항에 있어서,
    상기 제어부는,
    상기 메타 정보 내 상기 산출된 좌표 정보와 동일한 좌표 정보에 매칭되어 저장된 링크 정보를 산출하여 상기 링크 이벤트를 실행시키는 것을 특징으로 하는 VMI 클라이언트 단말기.
  11. 하드웨어와 결합되어,
    VMI 클라이언트 단말기로부터 요청받은 VMI 서비스를 실행하고, 상기 VMI 서비스의 실행에 따라 대응되는 초기 VMI 화면을 영상으로 변환하여 송출하는 과정;
    상기 VMI 서비스와 관련하여, 상기 VMI 클라이언트 단말기의 화면 크기 대비 더 큰 사이즈를 갖는 적어도 하나의 대상 VMI 화면 정보를 인코딩하는 과정; 및
    상기 대상 VMI 화면 정보를 상기 VMI 클라이언트 단말기로 전송하는 과정을 포함하되,
    상기 VMI 클라이언트 단말기의 화면 크기 대비 더 큰 사이즈를 갖는 적어도 하나의 대상 VMI 화면 정보는,
    상기 VMI 서비스와 관련하여 제공되는 App/Web 컨텐츠의 전체화면에 대한 정보인
    VMI 화면 표시 방법을 실행시키기 위하여 컴퓨터로 읽을 수 있는 기록매체에 저장된 컴퓨터프로그램.
  12. 하드웨어와 결합되어,
    VMI 서비스와 관련하여 VMI 서버장치로부터 사전에 제공받은 대상 VMI 화면 정보를 버퍼 영역상에 저장하는 과정;
    상기 VMI 서비스와 관련하여 사용자 동작정보를 수집하는 과정; 및
    상기 대상 VMI 화면 정보를 활용하여, 상기 VMI 서비스와 관련하여 디스플레이 상에 표시되고 있는 현재 VMI 화면에 상기 사용자 동작정보가 반영된 결과에 상응하는 대상 VMI 화면 정보를 산출하고, 산출된 대상 VMI 화면 정보를 기초로 생성한 화면 이미지를 출력하는 과정
    을 실행시키기 위하여 컴퓨터로 읽을 수 있는 기록매체에 저장된 컴퓨터프로그램.
KR1020180127269A 2018-10-24 2018-10-24 딜레이 절감을 위한 vmi 화면 표시 방법 및 장치 KR102552753B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020180127269A KR102552753B1 (ko) 2018-10-24 2018-10-24 딜레이 절감을 위한 vmi 화면 표시 방법 및 장치

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020180127269A KR102552753B1 (ko) 2018-10-24 2018-10-24 딜레이 절감을 위한 vmi 화면 표시 방법 및 장치

Publications (2)

Publication Number Publication Date
KR20200046309A KR20200046309A (ko) 2020-05-07
KR102552753B1 true KR102552753B1 (ko) 2023-07-05

Family

ID=70733554

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020180127269A KR102552753B1 (ko) 2018-10-24 2018-10-24 딜레이 절감을 위한 vmi 화면 표시 방법 및 장치

Country Status (1)

Country Link
KR (1) KR102552753B1 (ko)

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2018007228A (ja) 2016-07-08 2018-01-11 エントリクス カンパニー、リミテッド クラウドストリーミングサービス提供方法及びそのための装置

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20120105688A (ko) * 2011-03-16 2012-09-26 정민재 이기종 서버/클라이언트간 가상화 서비스 시스템 및 방법
KR101630638B1 (ko) * 2011-07-25 2016-06-15 엔트릭스 주식회사 화면 가상화 기반 어플리케이션 실행 시스템 및 방법
KR101671310B1 (ko) * 2012-05-30 2016-11-02 엔트릭스 주식회사 화면 가상화 기반 어플리케이션 구동 시스템 및 방법
KR101430927B1 (ko) * 2013-02-05 2014-08-18 에스케이플래닛 주식회사 클라우드 스트리밍 기반의 가상 api 제공 방법, 시스템, 서비스장치 및 클라이언트 단말기
KR102148375B1 (ko) * 2016-09-13 2020-08-26 에스케이텔레콤 주식회사 네트워크 기능 가상화 운영 장치 및 방법

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2018007228A (ja) 2016-07-08 2018-01-11 エントリクス カンパニー、リミテッド クラウドストリーミングサービス提供方法及びそのための装置

Also Published As

Publication number Publication date
KR20200046309A (ko) 2020-05-07

Similar Documents

Publication Publication Date Title
CN111544886B (zh) 一种画面显示的方法以及相关装置
Lu et al. Virtualized screen: A third element for cloud–mobile convergence
EP3046331B1 (en) Media control method and system based on cloud desktop
US20110010629A1 (en) Selectively distributing updates of changing images to client devices
CN102750067B (zh) 一种基于手持设备的大屏幕交互方法
WO2022188595A1 (zh) 应用画面的显示方法、装置、终端、投屏系统及介质
US20090006977A1 (en) Method and System of Computer Remote Control that Optimized for Low Bandwidth Network and Low Level Personal Communication Terminal Device
CN111433743B (zh) 一种app远程控制方法及相关设备
KR20150018770A (ko) 스크린 공유 방법, 관련 장치, 및 통신 시스템
CN103430123A (zh) 用于经由支持2d画布和动态绘图的html来进行远程桌面会话的方法和系统
CN106453572B (zh) 基于云服务器同步图像的方法及系统
CN103430164A (zh) 用于经由http标头来进行远程桌面会话重新绘制的方法和系统
CN103460670A (zh) 用于利用http处理器和远程桌面客户端通用接口来进行远程桌面会话的方法和系统
KR20120042883A (ko) 이동 기기의 상호운영성을 제공하는 방법 및 장치
Kim et al. pTHINC: a thin-client architecture for mobile wireless web
CN113368492B (zh) 渲染的方法、装置
CN102984189A (zh) 一种无线网络及其实现方法、终端
CN104067202A (zh) 鼠标同步的方法、装置和系统
US20230333803A1 (en) Enhanced Screen Sharing Method and System, and Electronic Device
CN111625315A (zh) 页面显示方法、装置、电子设备及存储介质
JPWO2011077550A1 (ja) 画面中継装置
KR102552753B1 (ko) 딜레이 절감을 위한 vmi 화면 표시 방법 및 장치
JP2016103117A (ja) 情報処理装置、端末装置、画像表示システムおよび画像送信プログラム
CN107623788B (zh) 应用启动速度的提高方法、装置及计算机可读存储介质
KR102537913B1 (ko) 특정영역에서의 vmi화면과 로컬화면 표시 방법 및 장치

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant