KR102359367B1 - 게임 스트리밍을 위한 방법 및 장치 - Google Patents

게임 스트리밍을 위한 방법 및 장치 Download PDF

Info

Publication number
KR102359367B1
KR102359367B1 KR1020200042236A KR20200042236A KR102359367B1 KR 102359367 B1 KR102359367 B1 KR 102359367B1 KR 1020200042236 A KR1020200042236 A KR 1020200042236A KR 20200042236 A KR20200042236 A KR 20200042236A KR 102359367 B1 KR102359367 B1 KR 102359367B1
Authority
KR
South Korea
Prior art keywords
image
image quality
streaming
client device
preset
Prior art date
Application number
KR1020200042236A
Other languages
English (en)
Other versions
KR20210124770A (ko
Inventor
김환
백승욱
Original Assignee
주식회사 엔씨소프트
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 엔씨소프트 filed Critical 주식회사 엔씨소프트
Priority to KR1020200042236A priority Critical patent/KR102359367B1/ko
Priority to TW109122840A priority patent/TWI730837B/zh
Priority to US16/934,639 priority patent/US20210308570A1/en
Priority to JP2020124151A priority patent/JP7191900B2/ja
Publication of KR20210124770A publication Critical patent/KR20210124770A/ko
Application granted granted Critical
Publication of KR102359367B1 publication Critical patent/KR102359367B1/ko

Links

Images

Classifications

    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/30—Interconnection arrangements between game servers and game devices; Interconnection arrangements between game devices; Interconnection arrangements between game servers
    • A63F13/35—Details of game servers
    • A63F13/358—Adapting the game course according to the network or server load, e.g. for reducing latency due to different connection speeds between clients
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/30—Interconnection arrangements between game servers and game devices; Interconnection arrangements between game devices; Interconnection arrangements between game servers
    • A63F13/35—Details of game servers
    • A63F13/355—Performing operations on behalf of clients with restricted processing capabilities, e.g. servers transform changing game scene into an encoded video stream for transmitting to a mobile phone or a thin client
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/50—Controlling the output signals based on the game progress
    • A63F13/53—Controlling the output signals based on the game progress involving additional visual information provided to the game scene, e.g. by overlay to simulate a head-up display [HUD] or displaying a laser sight in a shooting game
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/85—Providing additional services to players
    • A63F13/86—Watching games played by other players
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/50—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by details of game servers
    • A63F2300/53—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by details of game servers details of basic data processing
    • A63F2300/534—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by details of game servers details of basic data processing for network load management, e.g. bandwidth optimization, latency reduction
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/50—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by details of game servers
    • A63F2300/53—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by details of game servers details of basic data processing
    • A63F2300/535—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by details of game servers details of basic data processing for monitoring, e.g. of user parameters, terminal parameters, application parameters, network parameters
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/50—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by details of game servers
    • A63F2300/53—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by details of game servers details of basic data processing
    • A63F2300/538—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by details of game servers details of basic data processing for performing operations on behalf of the game client, e.g. rendering

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Physics & Mathematics (AREA)
  • Optics & Photonics (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Information Transfer Between Computers (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

게임 스트리밍을 위한 방법 및 장치가 개시된다. 일 실시예에 따른 스트리밍 방법은, 게임 플레이 영상을 구성하는 복수의 화면 구성 요소 중 일부 화면 구성 요소를 포함하는 제1 영상 및 상기 복수의 화면 구성 요소 중 나머지 화면 구성 요소를 포함하는 제2 영상을 생성하는 동작, 상기 제1 영상의 영상 품질이 상기 제2 영상의 영상 품질 이상이 되도록 상기 제1 영상 및 상기 제2 영상 각각의 영상 품질을 결정하는 동작, 상기 결정된 영상 품질에 기초하여 상기 제1 영상 및 상기 제2 영상을 각각 인코딩하는 동작 및 상기 인코딩된 제1 영상 및 상기 인코딩된 제2 영상을 클라이언트 장치로 스트리밍하는 동작을 포함한다.

Description

게임 스트리밍을 위한 방법 및 장치{METHOD AND APPARATUS FOR GAME STREAMING}
개시되는 실시예들은 게임 스트리밍 기술과 관련된다.
최근 유무선 네트워크 기술의 발전에 따라 사용자가 고성능의 장치 없이도 고사양의 게임을 플레이 가능하도록 하기 위한 게임 스트리밍 서비스가 제공되고 있다. 게임 스트리밍 서비스는 원격에 존재하는 고성능의 장치에서 실행되는 게임의 게임 플레이 영상을 사용자가 이용하는 클라이언트 장치로 스트리밍하여 재생되도록 하고, 클라이언트 장치에서 재생된 화면에 기초한 사용자 입력을 게임이 실행되는 장치로 전달하여 게임에 반영되도록 함으로써 사용자가 클라이언트 장치의 성능 제약 없이 고사양의 게임을 플레이할 수 있도록 하기 위한 서비스이다.
이러한 게임 스트리밍 서비스는 네트워크 환경에 따라 스트리밍되는 영상의 품질을 조절할 필요가 있으나 스트리밍되는 영상의 품질을 낮추는 경우 클라이언트 장치에서 재생되는 게임 플레이 영상의 명시성이 떨어진다는 문제가 있다. 또한, 명시성 확보를 위해 스트리밍되는 영상의 품질을 높이는 경우 인코딩 및 디코딩 처리 시간과 네트워크 전송 지연으로 인해 게임 플레이를 위한 사용자 입력이 게임 내에 즉각적으로 반영되지 않으므로, 게임 플레이의 반응성이 떨어진다는 문제점이 발생한다.
개시되는 실시예들은 게임 스트리밍을 위한 방법 및 장치를 제공하기 위한 것이다.
일 실시예에 따른 스트리밍 방법은, 게임 플레이 영상을 구성하는 복수의 화면 구성 요소 중 일부 화면 구성 요소를 포함하는 제1 영상 및 상기 복수의 화면 구성 요소 중 나머지 화면 구성 요소를 포함하는 제2 영상을 생성하는 동작, 상기 제1 영상의 영상 품질이 상기 제2 영상의 영상 품질 이상이 되도록 상기 제1 영상 및 상기 제2 영상 각각의 영상 품질을 결정하는 동작, 상기 결정된 영상 품질에 기초하여 상기 제1 영상 및 상기 제2 영상을 각각 인코딩하는 동작 및 상기 인코딩된 제1 영상 및 상기 인코딩된 제2 영상을 클라이언트 장치로 스트리밍하는 동작을 포함한다.
상기 제1 영상은, 상기 복수의 화면 구성 요소 중 사전 설정된 하나 이상의 화면 구성 요소를 포함할 수 있다.
상기 사전 설정된 하나 이상의 화면 구성 요소는, UI(User Interface) 객체를 포함할 수 있다.
상기 생성하는 동작은, 상기 복수의 화면 구성 요소 중 적어도 일부에 대해 사전 설정된 우선 순위 및 상기 클라이언트 장치의 네트워크 상태에 기초하여 상기 일부 화면 구성 요소를 결정할 수 있다.
상기 결정하는 동작은, 사전 설정된 영상 품질에 기초하여 상기 제1 영상의 영상 품질을 결정할 수 있다.
상기 결정하는 동작은, 상기 사전 설정된 영상 품질을 가지도록 상기 제1 영상의 영상 품질을 결정할 수 있다.
상기 결정하는 동작은, 상기 클라이언트 장치의 네트워크 상태에 기초하여 상기 제1 영상의 영상 품질을 결정하되, 상기 제1 영상의 영상 품질이 상기 사전 설정된 영상 품질 이상으로 유지되도록 상기 제1 영상의 영상 품질을 결정할 수 있다.
상기 결정하는 동작은, 상기 클라이언트 장치의 네트워크 상태에 기초하여 상기 제2 영상의 영상 품질을 결정할 수 있다.
상기 복수의 화면 구성 요소 중 적어도 일부는, 게임 서버에 의해 수행된 연산 결과에 기초하여 결정될 수 있다.
일 실시예에 따른 스트리밍 장치는, 하나 이상의 하드웨어 프로세서 및 하나 이상의 통신 인터페이스를 포함하고, 상기 하나 이상의 하드웨어 프로세서는, 게임 플레이 영상을 구성하는 복수의 화면 구성 요소 중 일부 화면 구성 요소를 포함하는 제1 영상 및 상기 복수의 화면 구성 요소 중 나머지 화면 구성 요소를 포함하는 제2 영상을 생성하고, 상기 제1 영상의 영상 품질이 상기 제2 영상의 영상 품질 이상이 되도록 상기 제1 영상 및 상기 제2 영상 각각의 영상 품질을 결정하고, 상기 결정된 영상 품질에 기초하여 상기 제1 영상 및 상기 제2 영상을 각각 인코딩하고, 상기 하나 이상의 통신 인터페이스를 통해, 상기 인코딩된 제1 영상 및 상기 인코딩된 제2 영상을 클라이언트 장치로 스트리밍한다.
상기 제1 영상은, 상기 복수의 화면 구성 요소 중 사전 설정된 하나 이상의 화면 구성 요소를 포함할 수 있다.
상기 사전 설정된 하나 이상의 화면 구성 요소는, UI(User Interface) 객체를 포함할 수 있다.
상기 하나 이상의 하드웨어 프로세서는, 상기 복수의 화면 구성 요소 중 적어도 일부에 대해 사전 설정된 우선 순위 및 상기 클라이언트 장치의 네트워크 상태에 기초하여 상기 일부 화면 구성 요소를 결정할 수 있다.
상기 하나 이상의 하드웨어 프로세서는, 사전 설정된 영상 품질에 기초하여 상기 제1 영상의 영상 품질을 결정할 수 있다.
상기 하나 이상의 하드웨어 프로세서는, 상기 사전 설정된 영상 품질을 가지도록 상기 제1 영상의 영상 품질을 결정할 수 있다.
상기 하나 이상의 하드웨어 프로세서는, 상기 클라이언트 장치의 네트워크 상태에 기초하여 상기 제1 영상의 영상 품질을 결정하되, 상기 제1 영상의 영상 품질이 상기 사전 설정된 영상 품질 이상으로 유지되도록 상기 제1 영상의 영상 품질을 결정할 수 있다.
상기 하나 이상의 하드웨어 프로세서는, 상기 클라이언트 장치의 네트워크 상태에 기초하여 상기 제2 영상의 영상 품질을 결정할 수 있다.
상기 복수의 화면 구성 요소 중 적어도 일부는, 게임 서버에 의해 수행된 연산 결과에 기초하여 결정될 수 있다.
개시되는 실시예들에 따르면, 게임 플레이 영상을 구성하는 복수의 화면 구성 요소 중 일부를 포함하는 제1 영상과 복수의 화면 구성 요소 중 나머지를 구성하는 제2 영상을 생성한 후, 제1 영상의 영상 품질이 제2 영상의 영상 품질이 이상이 되도록 인코딩하여 클라이언트 장치로 스트리밍 함으로써, 클라이언트 장치에서 재생되는 게임 플레이 영상의 명시성을 확보함과 동시에 게임 플레이의 반응성을 향상시킬 수 있다.
도 1은 일 실시예에 따른 게임 스트리밍 시스템의 구성도이다.
도 2는 일 실시예에 따른 스트리밍 장치의 구성도이다.
도 3은 게임 플레이 영상에 대한 제1 영상 및 제2 영상을 생성하는 일 예를 나타낸 도면이다.
도 4는 일 실시예에 따른 스트리밍 방법의 순서도이다.
도 5는 일 실시예에 따른 컴퓨팅 장치를 포함하는 컴퓨팅 환경을 예시하여 설명하기 위한 블록도이다.
이하, 도면을 참조하여 구체적인 실시형태를 설명하기로 한다. 이하의 상세한 설명은 본 명세서에서 기술된 방법, 장치 및/또는 시스템에 대한 포괄적인 이해를 돕기 위해 제공된다. 그러나 이는 예시에 불과하며 본 발명은 이에 제한되지 않는다.
실시예들을 설명함에 있어서, 관련된 공지기술에 대한 구체적인 설명이 요지를 불필요하게 흐릴 수 있다고 판단되는 경우에는 그 상세한 설명을 생략하기로 한다. 그리고, 후술되는 용어들은 기능을 고려하여 정의된 용어들로서 이는 사용자, 운용자의 의도 또는 관례 등에 따라 달라질 수 있다. 그러므로 그 정의는 본 명세서 전반에 걸친 내용을 토대로 내려져야 할 것이다. 상세한 설명에서 사용되는 용어는 단지 실시예들을 기술하기 위한 것이며, 결코 제한적이어서는 안 된다. 명확하게 달리 사용되지 않는 한, 단수 형태의 표현은 복수 형태의 의미를 포함한다. 본 설명에서, "포함" 또는 "구비"와 같은 표현은 어떤 특성들, 숫자들, 단계들, 동작들, 요소들, 이들의 일부 또는 조합을 가리키기 위한 것이며, 기술된 것 이외에 하나 또는 그 이상의 다른 특성, 숫자, 단계, 동작, 요소, 이들의 일부 또는 조합의 존재 또는 가능성을 배제하도록 해석되어서는 안 된다.
도 1은 일 실시예에 따른 게임 스트리밍 시스템의 구성도이다.
도 1을 참조하면, 일 실시예에 따른 게임 스트리밍 시스템(100)은 스트리밍 장치(110) 및 클라이언트 장치(120)를 포함한다.
일 실시예에 따르면, 게임 스트리밍 시스템(100)은 사용자의 입력에 기초하여 클라이언트 장치(120)로부터 수신되는 게임 조작 신호에 따라 원격에서 실행되는 게임의 게임 플레이 영상을 클라이언트 장치(120)로 스트리밍(streaming)하여 사용자가 클라이언트 장치(120)에서 재생되는 게임 플레이 영상을 보면서 게임을 플레이할 수 있도록 하는 게임 스트리밍을 지원하기 위한 시스템이다.
스트리밍 장치(110)는 스트리밍 대상인 게임의 게임 플레이 영상을 인코딩하여 클라이언트 장치(120)로 스트리밍하고, 클라이언트 장치(120)로부터 사용자의 입력에 기초하여 생성된 게임 조작 신호를 수신하기 위한 장치이다.
일 실시예에 따르면, 스트리밍 장치(110)는 클라이언트 장치(120)로부터 수신된 게임 조작 신호에 따라 게임을 실행시키고, 게임 실행 결과에 기초하여 게임 플레이 영상을 생성하는 장치일 수 있다. 예를 들어, 스트리밍 장치(110)는 데스크탑 PC (Desktop PC), 게임 콘솔(Game console) 등과 같이 클라이언트 장치(120)의 사용자가 소유한 컴퓨팅 장치일 수 있다. 이 경우, 게임 실행을 위해 필요한 모든 연산과 게임 플레이 영상의 생성은 스트리밍 장치(110)에 의해 수행될 수 있다. 그러나, 스트리밍 장치(110)에서 실행되는 게임이 게임 서버(미도시)와 연동하여 제공되는 온라인 게임인 경우, 게임 실행을 위해 필요한 연산들 중 적어도 일부는 게임 서버에 의해 수행될 수 있다.
다른 실시예에 따르면, 게임 실행을 위해 필요한 연산 중 적어도 일부는 스트리밍 장치(110)와 유무선 네트워크를 통해 연결된 하나 이상의 외부 장치에 의해 분산 수행될 수 있으며, 이 경우, 스트리밍 장치(110)는 하나 이상의 외부 장치에 의해 분산 수행된 연산 결과에 기초하여 게임 플레이 영상을 생성할 수 있다.
또 다른 실시예에 따르면, 스트리밍 장치(110)는 클라우드 컴퓨팅 환경 내에 포함된 하나 이상의 서버일 수 있으며, 이 경우, 게임 실행을 위해 필요한 모든 연산과 게임 플레이 영상의 생성은 해당 하나 이상의 서버에 의해 분산 수행될 수 있다.
클라이언트 장치(120)는 게임 플레이를 위해 사용자에 의해 이용되는 장치이다. 구체적으로, 클라이언트 장치(120)는 스트리밍 장치(110)에 의해 인코딩되어 스트리밍되는 게임 플레이 영상을 디코딩하여 클라이언트 장치(120)의 디스플레이 수단를 통해 표시하고, 게임 조작을 위해 클라이언트 장치(120)의 입력 수단을 통해 입력된 사용자 입력에 대응되는 게임 조작 신호를 스트리밍 장치(110)로 제공한다.
한편, 클라이언트 장치(120)는 예를 들어, 태블릿 PC (Tablet PC), 랩탐(Laptop PC), 스마트폰 (Smartphone), 스마트 TV (Smart TV) 등일 수 있으나, 유무선 네트워크를 이용하여 스트리밍 장치(110)로부터 스트리밍되는 게임 플레이 영상을 수신하여 디코딩하고, 디코딩된 게임 플레이 영상을 출력할 수 있는 장치라면 반드시 특정한 장치로 한정되는 것은 아니다.
한편, 도시된 예에서는 스트리밍 장치(110)와 클라이언트 장치(120)사이에 직접적인 데이터 송수신이 이루어지는 것으로 도시하고 있으나, 실시예에 따라, 스트리밍 장치(110)로부터 스트리밍되는 데이터를 수신하여 클라이언트 장치(120)로 전달하고, 클라이언트 장치(120)로부터 전송되는 게임 조작 신호를 수신하여 스트리밍 장치(110)로 전달하기 위한 별도의 중계 서버(미도시)가 존재할 수 있다.
도 2는 일 실시예에 따른 스트리밍 장치(110)의 구성도이다.
도 2를 참조하면, 일 실시예에 따른 스트리밍 장치(110)는 영상 생성부(111), 인코딩부(112) 및 전송부(113)를 포함한다.
일 실시예에서, 영상 생성부(111), 인코딩부(112) 및 전송부(113)는 각각 물리적으로 구분된 하나 이상의 장치를 이용하여 구현되거나, 하나 이상의 하드웨어 프로세서 또는 하나 이상의 하드웨어 프로세서 및 소프트웨어의 결합에 의해 구현될 수 있으며, 도시된 예와 달리 구체적 동작에 있어 명확히 구분되지 않을 수 있다.
영상 생성부(111)는 게임 플레이 영상을 구성하는 복수의 화면 구성 요소 중 일부를 포함하는 제1 영상 및 복수의 화면 구성 요소 중 나머지를 포함하는 제2 영상을 생성한다.
구체적으로, 영상 생성부(111)는 게임 플레이 영상을 구성하는 복수의 화면 구성 요소 중 제1 영상에 포함될 화면 구성 요소를 결정한 후, 결정된 화면 구성 요소를 포함하는 제1 영상과 나머지 화면 구성 요소를 포함하는 제2 영상을 개별적으로 렌더링하여 제1 영상 및 제2 영상을 생성할 수 있다.
이때, 화면 구성 요소는 게임 플레이 영상 내에 이미지 내지는 텍스트의 형태로 표현되는 그래픽 객체를 의미할 수 있다. 예를 들어, 화면 구성 요소는 게임의 플레이 장면(scene)을 표현하기 위한 장면 객체(예를 들어, 사용자의 게임 캐릭터, NPC (Non-Player Character), 배경 이미지, 게임 캐릭터의 체력 게이지, 게임 캐릭터의 데미지 수치 등) 및 사용자 인터페이스(User Interface, UI)를 표현하기 위한 UI 객체 (예를 들어, 메뉴 창, 스킬 선택 창, UI 이미지, 채팅 메시지, 이벤트 알림 메시지 등)을 포함할 수 있다. 그러나, 화면 구성 요소는 반드시 상술한 예에 한정되는 것은 아니며 게임의 장르에 따라 상이할 수 있다.
일 실시예에 따르면, 제1 영상에 포함되는 화면 구성 요소는 게임 플레이 영상을 구성하는 복수의 화면 구성 요소 중 사전 설정된 하나 이상의 화면 구성 요소를 포함할 수 있다. 이때, 사전 설정된 하나 이상의 화면 구성 요소는 예를 들어, 상술한 UI 객체를 포함할 수 있으나, 반드시 이에 한정되는 것은 아니다. 예를 들어, 스트리밍 장치(110)를 이용하여 게임 스트리밍 서비스를 제공하는 서비스 운영자, 게임 개발자 또는 클라이언트 장치(120)의 사용자는 게임 플레이 영상을 구성하는 복수의 화면 구성 요소 중 게임 플레이 영상 내에서 명확하게 표현될 필요가 있는 하나 이상의 화면 구성 요소를 제1 영상에 포함될 화면 구성 요소로 사전 설정할 수 있다.
한편, 일 실시예에 따르면, 제1 영상에 포함되는 화면 구성 요소는 게임 플레이 영상을 구성하는 복수의 화면 구성 요소 중 적어도 일부에 대해 사전 설정된 우선 순위 및 클라이언트 장치(120)의 네트워크 상태에 기초하여 결정될 수 있다.
예를 들어, 복수의 화면 구성 요소 중 일부에 대해 1순위, 2순위 및 3순위 중 하나의 우선 순위가 사전 설정되어 있는 경우를 가정하면, 영상 생성부(111)는 클라이언트 장치(120)의 네트워크 상태가 기 설정된 제1 기준 값 이하인 경우, 1순위로 설정된 화면 구성 요소가 제1 영상에 포함되도록 할 수 있다. 또한, 영상 생성부(110)는 클라이언트 장치(120)의 네트워크 상태가 기 설정된 제1 기준 값을 초과하고, 기 설정된 제2 기준 값 이하인 경우, 1순위로 설정된 화면 구성 요소 및 2순위로 설정된 화면 구성 요소가 제1 영상에 포함되도록 할 수 있다. 또한, 영상 생성부(110)는 클라이언트 장치(120)의 네트워크 상태가 기 설정된 제2 기준 값을 초과하는 경우, 1순위로 설정된 화면 구성 요소, 2순위로 설정된 화면 구성 요소 및 3순위로 설정된 화면 구성 요소가 제1 영상에 포함되도록 할 수 있다.
한편, 상술한 예에서, 클라이언트 장치(120)의 네트워크 상태는 예를 들어, 대역폭(bandwidth), 패킷 손실(packet loss) 및 패킷 지연(packet delay) 중 적어도 하나에 기초하여 결정될 수 있으나, 네트워크 상태를 결정하기 위한 기준 및 측정 방식은 실시예에 따라 변경될 수 있다.
한편, 일 실시예에 따르면, 게임 플레이 영상이 게임 서버(미도시)와 연동하여 제공되는 온라인 게임의 게임 플레이 영상인 경우, 영상 생성부(111)는 게임 서버로부터 게임 실행을 위해 필요한 복수의 연산 중 적어도 일부에 대한 연산 결과를 수신하고, 수신된 연산 결과에 기초하여 게임 플레이 영상에 포함될 복수의 화면 구성 요소 중 적어도 일부를 결정할 수 있다.
구체적으로, 클라이언트 장치(120)로부터 수신된 게임 조작 신호에 따른 게임 실행을 위해 게임 서버에서 수행되어야 할 하나 이상의 연산이 존재하는 경우, 영상 생성부(111)는 해당 하나 이상의 연산의 수행을 게임 서버로 요청할 수 있다. 이후, 영상 생성부(111)는 게임 서버로부터 수행 요청한 연산에 대한 연산 결과를 수신하고, 수신된 연산 결과에 기초하여 게임 플레이 영상에 포함될 복수의 화면 구성 요소 중 적어도 일부를 결정할 수 있다.
예를 들어, 클라이언트 장치(120)로부터 수신된 게임 조작 신호에 따라 게임 내에서 실행될 동작이 사용자 캐릭터가 몬스터를 공격하는 동작이고, 공격 결과(예를 들어, 공격 성공 여부, 몬스터가 받은 데미지 수치 등)를 결정하기 위한 연산이 게임 서버에 의해 수행되어야 하는 경우, 영상 생성부(111)는 게임 서버로 공격 결과를 결정하기 위한 연산의 수행을 요청할 수 있다. 이후, 영상 생성부(110)는 게임 서버로부터 요청한 연산의 연산 결과가 수신된 경우, 수신된 연산 결과에 따라 게임 플레이 영상에 포함될 화면 구성 요소(예를 들어, 몬스터 체력 게이지, 몬스터가 받은 데이지 수치를 나타내는 텍스트 등)를 결정할 수 있다.
도 3은 게임 플레이 영상에 대한 제1 영상 및 제2 영상을 생성하는 일 예를 나타낸 도면이다.
도 3에 도시된 예에서, 게임 플레이 영상(310)은 사용자의 게임 캐릭터(311), 게임 캐릭터(311)의 명칭(312) 및 체력 게이지(313), 적 캐릭터(314), 적 캐릭터(314)의 명칭(315) 및 체력 게이지(316), UI 이미지(317, 318), 게임 내 발생된 이벤트를 표시하는 이벤트 알림 메시지(319) 등과 같은 화면 구성 요소들을 포함하고 있다.
이 경우, 영상 생성부(111)는 게임 플레이 영상(310)에 포함되는 화면 구성 요소들(311 내지 319) 중 UI 이미지(317, 318) 및 이벤트 알림 메시지(319) 만을 포함하는 제1 영상(320) 및 나머지 화면 구성 요소들(311 내지 316)을 포함하는 제2 영상(330)을 각각 생성할 수 있다.
이때, 제1 영상(320)에 포함된 화면 구성 요소들(317, 318, 319)은 예를 들어, 제1 영상(320)에 포함되도록 사전 설정된 화면 구성 요소일 수 있으나, 실시예에 따라 사전 설정된 우선 순위 및 클라이언트 장치(120)의 네트워크 상태에 기초하여 결정된 화면 구성 요소일 수도 있다.
다시 도 2를 참조하면, 인코딩부(112)는 제1 영상의 영상 품질이 및 제2 영상의 영상 품질 이상이 되도록 제1 영상 및 제2 영상 각각에 대한 영상 품질을 결정하고, 결정된 영상 품질에 기초하여 제1 영상 및 제2 영상 각각을 인코딩한다.
이때, 일 실시예에 따르면, 영상 품질은 해상도, 프레임 레이트(frame rate), 압축률, 비트 레이트(bit rate) 중 적어도 하나를 포함할 수 있다.
일 실시예에 따르면, 인코딩부(112)는 예를 들어, H.264, ,MPEG-2, MPEG-4 등과 같은 표준 동영상 코덱(codec)을 이용하여 제1 영상 및 제2 영상 각각을 인코딩할 수 있다. 그러나, 인코딩부(112)는 상술한 예 외에도 다양한 동영상 인코딩 방식을 이용하여 제1 영상 및 제2 영상 각각을 인코딩할 수 있으며, 제1 영상 및 제2 영상 각각을 인코딩하기 위한 동영상 인코딩 방식은 동일하거나 상이할 수 있다.
한편, 일 실시예에 따르면, 인코딩부(112)는 사전 설정된 영상 품질에 기초하여 제1 영상의 영상 품질을 결정할 수 있다.
예를 들어, 인코딩부(112)는 제1 영상이 사전 설정된 영상 품질을 가지도록 제1 영상의 영상 품질을 결정할 수 있다. 즉, 인코딩부(112)는 제1 영상의 영상 품질이 사전 설정된 영상 품질로 유지되도록 할 수 있다.
다른 예로, 인코딩부(112)는 클라이언트 장치(120)의 네트워크 상태에 기초하여 제1 영상의 영상 품질을 결정하되, 제1 영상의 영상 품질이 사전 설정된 영상 품질 이상으로 유지되도록 할 수 있다. 구체적으로, 인코딩부(112)는 클라이언트 장치(120)의 네트워크 상태에 기초하여 제1 영상의 해상도, 프레임 레이트, 압축률, 비트 레이트 중 적어도 하나를 변경하되 변경된 값이 사전 설정된 값 이상이 되도록 할 수 있다.
한편, 일 실시예에 따르면, 인코딩부(113)는 클라이언트 장치(120)의 네트워크 상태에 기초하여 제2 영상의 영상 품질을 결정할 수 있다.
구체적으로, 인코딩부(112)는 클라이언트 장치(120)의 네트워크 상태에 기초하여 제2 영상의 해상도, 프레임 레이트, 압축률, 비트 레이트 중 적어도 하나를 변경할 수 있으며, 제2 영상의 영상 품질은 제1 영상의 영상 품질 이하일 수 있다.
전송부(113)는 인코딩부(112)에 의해 인코딩된 제1 영상 및 제2 영상 각각을 클라이언트 장치(120)로 스트리밍한다.
구체적으로, 전송부(113)는 인코딩된 제1 영상 및 인코딩된 제2 영상 각각을 예를 들어, 실시간 스트리밍 프로토콜(Real Time Streaming Protocol, RTSP), HLS(Http Live Streaming) 등 같은 공지된 스트리밍 프로토콜에 따라 스트리밍할 수 있다.
한편, 클라이언트 장치(120)는 전송부(113)에 의해 스트리밍되는 제1 영상 및 제2 영상 각각을 디코딩한 후 디코딩된 제1 영상 및 제2 영상을 합성하여 게임 플레이 영상을 재생할 수 있다.
도 4는 일 실시예에 따른 스트리밍 방법의 순서도이다.
도 4를 참조하면, 우선 스트리밍 장치(110)는 게임 플레이 영상을 구성하는 복수의 화면 구성 요소 중 일부를 포함하는 제1 영상 및 복수의 화면 구성 요소 중 나머지를 포함하는 제2 영상을 생성한다(410).
일 실시예에 따르면, 제1 영상에 포함되는 화면 구성 요소는 게임 플레이 영상을 구성하는 복수의 화면 구성 요소 중 사전 설정된 하나 이상의 화면 구성 요소를 포함할 수 있다. 이때, 사전 설정된 하나 이상의 화면 구성 요소는 UI 객체를 포함할 수 있다.
또한, 일 실시예에 따르면, 제1 영상에 포함되는 화면 구성 요소는 게임 플레이 영상을 구성하는 복수의 화면 구성 요소 중 적어도 일부에 대해 사전 설정된 우선 순위 및 클라이언트 장치(120)의 네트워크 상태에 기초하여 결정될 수 있다.
이후, 스트리밍 장치(110)는 생성된 제1 영상의 영상 품질이 및 제2 영상의 영상 품질 이상이 되도록 제1 영상 및 제2 영상 각각에 대한 영상 품질을 결정한다(420).
일 실시예에 따르면, 스트리밍 장치(110)는 사전 설정된 영상 품질에 기초하여 제1 영상의 영상 품질을 결정할 수 있다.
예를 들어, 스트리밍 장치(110)는 제1 영상이 사전 설정된 영상 품질을 가지도록 제1 영상의 영상 품질을 결정할 수 있다.
다른 예로, 스트리밍 장치(110)는 클라이언트 장치(120)의 네트워크 상태에 기초하여 제1 영상의 영상 품질을 결정하되, 제1 영상의 영상 품질이 사전 설정된 영상 품질 이상으로 유지되도록 할 수 있다.
이후, 스트리밍 장치(110)는 결정된 영상 품질에 기초하여 제1 영상 및 제2 영상을 각각 인코딩한다(430).
이후, 스트리밍 장치(110)는 인코딩된 제1 영상 및 제2 영상을 클라이언트 장치(120)로 스트리밍한다(440).
한편, 도 4에 도시된 순서도에서 적어도 일부의 단계들은 순서를 바꾸어 수행되거나, 다른 단계와 결합되어 함께 수행되거나, 생략되거나, 세부 단계들로 나뉘어 수행되거나, 또는 도시되지 않은 하나 이상의 단계가 부가되어 수행될 수 있다.
도 5는 일 실시예에 따른 컴퓨팅 장치를 포함하는 컴퓨팅 환경을 예시하여 설명하기 위한 블록도이다.
도시된 실시예에서, 각 컴포넌트들은 이하에 기술된 것 이외에 상이한 기능 및 능력을 가질 수 있고, 이하에 기술되지 않은 것 이외에도 추가적인 컴포넌트를 포함할 수 있다.
도시된 컴퓨팅 환경(10)은 컴퓨팅 장치(12)를 포함한다. 일 실시예에서, 컴퓨팅 장치(12)는 도 1 및 도 2에 도시된 스트리밍 장치(110)에 포함되는 하나 이상의 컴포넌트일 수 있다.
컴퓨팅 장치(12)는 적어도 하나의 프로세서(14), 컴퓨터 판독 가능 저장 매체(16) 및 통신 버스(18)를 포함한다. 프로세서(14)는 컴퓨팅 장치(12)로 하여금 앞서 언급된 예시적인 실시예에 따라 동작하도록 할 수 있다. 예컨대, 프로세서(14)는 컴퓨터 판독 가능 저장 매체(16)에 저장된 하나 이상의 프로그램들을 실행할 수 있다. 상기 하나 이상의 프로그램들은 하나 이상의 컴퓨터 실행 가능 명령어를 포함할 수 있으며, 상기 컴퓨터 실행 가능 명령어는 프로세서(14)에 의해 실행되는 경우 컴퓨팅 장치(12)로 하여금 예시적인 실시예에 따른 동작들을 수행하도록 구성될 수 있다.
컴퓨터 판독 가능 저장 매체(16)는 컴퓨터 실행 가능 명령어 내지 프로그램 코드, 프로그램 데이터 및/또는 다른 적합한 형태의 정보를 저장하도록 구성된다. 컴퓨터 판독 가능 저장 매체(16)에 저장된 프로그램(20)은 프로세서(14)에 의해 실행 가능한 명령어의 집합을 포함한다. 일 실시예에서, 컴퓨터 판독 가능 저장 매체(16)는 메모리(랜덤 액세스 메모리와 같은 휘발성 메모리, 비휘발성 메모리, 또는 이들의 적절한 조합), 하나 이상의 자기 디스크 저장 디바이스들, 광학 디스크 저장 디바이스들, 플래시 메모리 디바이스들, 그 밖에 컴퓨팅 장치(12)에 의해 액세스되고 원하는 정보를 저장할 수 있는 다른 형태의 저장 매체, 또는 이들의 적합한 조합일 수 있다.
통신 버스(18)는 프로세서(14), 컴퓨터 판독 가능 저장 매체(16)를 포함하여 컴퓨팅 장치(12)의 다른 다양한 컴포넌트들을 상호 연결한다.
컴퓨팅 장치(12)는 또한 하나 이상의 입출력 장치(24)를 위한 인터페이스를 제공하는 하나 이상의 입출력 인터페이스(22) 및 하나 이상의 네트워크 통신 인터페이스(26)를 포함할 수 있다. 입출력 인터페이스(22) 및 네트워크 통신 인터페이스(26)는 통신 버스(18)에 연결된다. 입출력 장치(24)는 입출력 인터페이스(22)를 통해 컴퓨팅 장치(12)의 다른 컴포넌트들에 연결될 수 있다. 예시적인 입출력 장치(24)는 포인팅 장치(마우스 또는 트랙패드 등), 키보드, 터치 입력 장치(터치패드 또는 터치스크린 등), 음성 또는 소리 입력 장치, 다양한 종류의 센서 장치 및/또는 촬영 장치와 같은 입력 장치, 및/또는 디스플레이 장치, 프린터, 스피커 및/또는 네트워크 카드와 같은 출력 장치를 포함할 수 있다. 예시적인 입출력 장치(24)는 컴퓨팅 장치(12)를 구성하는 일 컴포넌트로서 컴퓨팅 장치(12)의 내부에 포함될 수도 있고, 컴퓨팅 장치(12)와는 구별되는 별개의 장치로 컴퓨팅 장치(12)와 연결될 수도 있다.
이상에서 대표적인 실시예를 통하여 본 발명에 대하여 상세하게 설명하였으나, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자는 전술한 실시예에 대하여 본 발명의 범주에서 벗어나지 않는 한도 내에서 다양한 변형이 가능함을 이해할 것이다. 그러므로 본 발명의 권리범위는 설명된 실시예에 국한되어 정해져서는 안 되며, 후술하는 특허청구범위뿐만 아니라 이 특허청구범위와 균등한 것들에 의해 정해져야 한다.
10: 컴퓨팅 환경
12: 컴퓨팅 장치
14: 프로세서
16: 컴퓨터 판독 가능 저장 매체
18: 통신 버스
20: 프로그램
22: 입출력 인터페이스
24: 입출력 장치
26: 네트워크 통신 인터페이스
100: 게임 스트리밍 시스템
110: 스트리밍 장치
111: 영상 생성부
112: 인코딩부
113: 전송부
120: 클라이언트 장치

Claims (18)

  1. 게임 플레이 영상을 구성하는 복수의 화면 구성 요소 중 일부 화면 구성 요소를 포함하는 제1 영상 및 상기 복수의 화면 구성 요소 중 나머지 화면 구성 요소를 포함하는 제2 영상을 생성하는 동작;
    상기 제1 영상의 영상 품질이 상기 제2 영상의 영상 품질 이상이 되도록 상기 제1 영상 및 상기 제2 영상 각각의 영상 품질을 결정하는 동작;
    상기 결정된 영상 품질에 기초하여 상기 제1 영상 및 상기 제2 영상을 각각 인코딩하는 동작; 및
    상기 인코딩된 제1 영상 및 상기 인코딩된 제2 영상을 클라이언트 장치로 스트리밍하는 동작을 포함하고,
    상기 생성하는 동작은, 상기 클라이언트 장치의 네트워크 상태에 기초하여 상기 일부 화면 구성 요소를 결정하는 스트리밍 방법.
  2. 청구항 1에 있어서,
    상기 제1 영상은, 상기 복수의 화면 구성 요소 중 사전 설정된 하나 이상의 화면 구성 요소를 포함하는 스트리밍 방법.
  3. 청구항 2에 있어서,
    상기 사전 설정된 하나 이상의 화면 구성 요소는, UI(User Interface) 객체를 포함하는 스트리밍 방법.
  4. 청구항 1에 있어서,
    상기 생성하는 동작은, 상기 복수의 화면 구성 요소 중 적어도 일부에 대해 사전 설정된 우선 순위 및 상기 클라이언트 장치의 네트워크 상태에 기초하여 상기 일부 화면 구성 요소를 결정하는 스트리밍 방법.
  5. 청구항 1에 있어서,
    상기 결정하는 동작은, 사전 설정된 영상 품질에 기초하여 상기 제1 영상의 영상 품질을 결정하는 스트리밍 방법.
  6. 청구항 5에 있어서,
    상기 결정하는 동작은, 상기 사전 설정된 영상 품질을 가지도록 상기 제1 영상의 영상 품질을 결정하는 스트리밍 방법.
  7. 청구항 5에 있어서,
    상기 결정하는 동작은, 상기 클라이언트 장치의 네트워크 상태에 기초하여 상기 제1 영상의 영상 품질을 결정하되, 상기 제1 영상의 영상 품질이 상기 사전 설정된 영상 품질 이상으로 유지되도록 상기 제1 영상의 영상 품질을 결정하는 스트리밍 방법.
  8. 청구항 1에 있어서,
    상기 결정하는 동작은, 상기 클라이언트 장치의 네트워크 상태에 기초하여 상기 제2 영상의 영상 품질을 결정하는 스트리밍 방법.
  9. 청구항 1에 있어서,
    상기 복수의 화면 구성 요소 중 적어도 일부는, 게임 서버에 의해 수행된 연산 결과에 기초하여 결정되는 스트리밍 방법.
  10. 하나 이상의 하드웨어 프로세서; 및
    하나 이상의 통신 인터페이스를 포함하고,
    상기 하나 이상의 하드웨어 프로세서는,
    게임 플레이 영상을 구성하는 복수의 화면 구성 요소 중 일부 화면 구성 요소를 포함하는 제1 영상 및 상기 복수의 화면 구성 요소 중 나머지 화면 구성 요소를 포함하는 제2 영상을 생성하고,
    상기 제1 영상의 영상 품질이 상기 제2 영상의 영상 품질 이상이 되도록 상기 제1 영상 및 상기 제2 영상 각각의 영상 품질을 결정하고,
    상기 결정된 영상 품질에 기초하여 상기 제1 영상 및 상기 제2 영상을 각각 인코딩하고,
    상기 하나 이상의 통신 인터페이스를 통해, 상기 인코딩된 제1 영상 및 상기 인코딩된 제2 영상을 클라이언트 장치로 스트리밍하되,
    상기 클라이언트 장치의 네트워크 상태에 기초하여 상기 일부 화면 구성 요소를 결정하는 스트리밍 장치.
  11. 청구항 10에 있어서,
    상기 제1 영상은, 상기 복수의 화면 구성 요소 중 사전 설정된 하나 이상의 화면 구성 요소를 포함하는 스트리밍 장치.
  12. 청구항 11에 있어서,
    상기 사전 설정된 하나 이상의 화면 구성 요소는, UI(User Interface) 객체를 포함하는 스트리밍 장치.
  13. 청구항 10에 있어서,
    상기 하나 이상의 하드웨어 프로세서는, 상기 복수의 화면 구성 요소 중 적어도 일부에 대해 사전 설정된 우선 순위 및 상기 클라이언트 장치의 네트워크 상태에 기초하여 상기 일부 화면 구성 요소를 결정하는 스트리밍 장치.
  14. 청구항 10에 있어서,
    상기 하나 이상의 하드웨어 프로세서는, 사전 설정된 영상 품질에 기초하여 상기 제1 영상의 영상 품질을 결정하는 스트리밍 장치.
  15. 청구항 14에 있어서,
    상기 하나 이상의 하드웨어 프로세서는, 상기 사전 설정된 영상 품질을 가지도록 상기 제1 영상의 영상 품질을 결정하는 스트리밍 장치.
  16. 청구항 14에 있어서,
    상기 하나 이상의 하드웨어 프로세서는, 상기 클라이언트 장치의 네트워크 상태에 기초하여 상기 제1 영상의 영상 품질을 결정하되, 상기 제1 영상의 영상 품질이 상기 사전 설정된 영상 품질 이상으로 유지되도록 상기 제1 영상의 영상 품질을 결정하는 스트리밍 장치.
  17. 청구항 10에 있어서,
    상기 하나 이상의 하드웨어 프로세서는, 상기 클라이언트 장치의 네트워크 상태에 기초하여 상기 제2 영상의 영상 품질을 결정하는 스트리밍 장치.
  18. 청구항 10에 있어서,
    상기 복수의 화면 구성 요소 중 적어도 일부는, 게임 서버에 의해 수행된 연산 결과에 기초하여 결정되는 스트리밍 장치.
KR1020200042236A 2020-04-07 2020-04-07 게임 스트리밍을 위한 방법 및 장치 KR102359367B1 (ko)

Priority Applications (4)

Application Number Priority Date Filing Date Title
KR1020200042236A KR102359367B1 (ko) 2020-04-07 2020-04-07 게임 스트리밍을 위한 방법 및 장치
TW109122840A TWI730837B (zh) 2020-04-07 2020-07-07 用於遊戲串流的方法及裝置
US16/934,639 US20210308570A1 (en) 2020-04-07 2020-07-21 Method and apparatus for game streaming
JP2020124151A JP7191900B2 (ja) 2020-04-07 2020-07-21 ゲームストリーミングのための方法および装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020200042236A KR102359367B1 (ko) 2020-04-07 2020-04-07 게임 스트리밍을 위한 방법 및 장치

Publications (2)

Publication Number Publication Date
KR20210124770A KR20210124770A (ko) 2021-10-15
KR102359367B1 true KR102359367B1 (ko) 2022-02-07

Family

ID=77517214

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020200042236A KR102359367B1 (ko) 2020-04-07 2020-04-07 게임 스트리밍을 위한 방법 및 장치

Country Status (4)

Country Link
US (1) US20210308570A1 (ko)
JP (1) JP7191900B2 (ko)
KR (1) KR102359367B1 (ko)
TW (1) TWI730837B (ko)

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10589171B1 (en) * 2018-03-23 2020-03-17 Electronic Arts Inc. User interface rendering and post processing during video game streaming

Family Cites Families (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003009120A (ja) 2001-06-21 2003-01-10 Matsushita Electric Ind Co Ltd コンテンツ再生装置及び方法、並びにそれに用いるプロトコル、プログラム
JP4120986B2 (ja) 2003-02-28 2008-07-16 株式会社コナミデジタルエンタテインメント 画像配信システム、画像配信装置、画像配信装置の制御方法及びプログラム
AU2006201851A1 (en) * 2006-05-03 2007-11-22 Canon Kabushiki Kaisha Compressing page descriptions while preserving high quality
JP2009232178A (ja) 2008-03-24 2009-10-08 Konami Digital Entertainment Co Ltd 映像生成装置、映像表示方法、および、プログラム
US9043484B2 (en) * 2010-04-02 2015-05-26 Disney Enterprises, Inc. Streaming playback and dynamic ad insertion
US9672688B2 (en) * 2011-10-14 2017-06-06 Bally Gaming, Inc. System and method for cross platform persistent gaming sessions using a mobile device
EP2774371B1 (en) * 2011-11-03 2020-08-26 Sun Patent Trust Efficient rounding for deblocking
EP3174295B1 (en) * 2012-04-13 2018-12-12 GE Video Compression, LLC Low delay picture coding
US9104240B2 (en) * 2013-01-09 2015-08-11 Intel Corporation Gesture pre-processing of video stream with hold-off period to reduce platform power
KR20140106838A (ko) * 2013-02-27 2014-09-04 한국전자통신연구원 스트리밍 기반의 게임 플랫폼을 이용한 클라우드 서비스 제공 장치 및 방법
KR20150040393A (ko) * 2013-10-04 2015-04-15 한국전자통신연구원 클라우드 게임 서비스를 제공하는 클라우드 서버 및 그 방법
US10632372B2 (en) * 2015-06-30 2020-04-28 Amazon Technologies, Inc. Game content interface in a spectating system
KR101744684B1 (ko) * 2015-07-09 2017-06-08 주식회사 엔씨소프트 클라우드 게임 서비스 제공 장치 및 방법
JP2017018245A (ja) 2015-07-09 2017-01-26 株式会社スクウェア・エニックス ビデオゲーム処理プログラム及びビデオゲーム処理装置
EP3128413A1 (en) 2015-08-04 2017-02-08 Nokia Technologies Oy Sharing mediated reality content
JP2017199994A (ja) 2016-04-26 2017-11-02 日本放送協会 映像配信装置及び映像配信方法
US10277914B2 (en) * 2016-06-23 2019-04-30 Qualcomm Incorporated Measuring spherical image quality metrics based on user field of view
WO2018064627A1 (en) 2016-09-30 2018-04-05 Sony Interactive Entertainment Inc. Wireless head mounted display with differential rendering and sound localization
WO2018179880A1 (ja) 2017-03-28 2018-10-04 日本電気株式会社 動画コンテンツ制御システム、方法およびプログラム
KR102383117B1 (ko) 2017-07-21 2022-04-06 삼성전자주식회사 디스플레이 장치, 디스플레이 방법 및 디스플레이 시스템
JP2019114106A (ja) 2017-12-25 2019-07-11 株式会社コロプラ 仮想体験を提供するためのプログラム、情報処理装置、及び情報処理方法
US11509703B2 (en) 2018-09-26 2022-11-22 Vmware, Inc. System and method for widescale adaptive bitrate selection

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10589171B1 (en) * 2018-03-23 2020-03-17 Electronic Arts Inc. User interface rendering and post processing during video game streaming

Also Published As

Publication number Publication date
TWI730837B (zh) 2021-06-11
TW202139721A (zh) 2021-10-16
KR20210124770A (ko) 2021-10-15
US20210308570A1 (en) 2021-10-07
JP2021164626A (ja) 2021-10-14
JP7191900B2 (ja) 2022-12-19

Similar Documents

Publication Publication Date Title
CN111131851B (zh) 游戏直播控制方法及装置、计算机存储介质、电子设备
US8903897B2 (en) System and method for providing interactive content to non-native application environments
US9549152B1 (en) Application content delivery to multiple computing environments using existing video conferencing solutions
US10080966B2 (en) System and method for experiencing advertised interactive applications
CN108076364B (zh) 自适应媒体流传输设备和媒体服务设备
US9370718B2 (en) System and method for delivering media over network
CN111882626A (zh) 图像处理方法、装置、服务器及介质
US9942556B2 (en) Altering streaming video encoding based on user attention
CN111135569A (zh) 云游戏处理方法、装置、存储介质与电子设备
JP6310073B2 (ja) 描画システム、制御方法、及び記憶媒体
CN102460407A (zh) 虚拟桌面服务
KR20190074232A (ko) 비디오 프레임들을 비디오 스트림으로부터 디스플레이로 전송하는 방법 및 대응하는 장치
US8860720B1 (en) System and method for delivering graphics over network
US20140243083A1 (en) Apparatus and method of providing cloud service using game platform based on streaming
US20150182857A1 (en) System and Method for Delivering Media over Network
CN112354176A (zh) 云游戏实现方法、云游戏实现装置、存储介质与电子设备
KR20190112780A (ko) 데이터 버퍼링 방법, 네트워크 디바이스, 및 저장 매체
CN112511849A (zh) 一种游戏显示方法、装置、设备、系统及存储介质
KR20180086114A (ko) 재생 지연 방지 시스템을 포함하는 미디어 재생 장치 및 방법
EP3780628A1 (en) Information processing device, information processing method, and program
KR102359367B1 (ko) 게임 스트리밍을 위한 방법 및 장치
EP3780627A1 (en) Information processing device, information processing method, and program
JP2014075737A (ja) 画像処理装置、画像処理方法及び画像処理システム
KR20190121280A (ko) 분할 영상 기반의 vr 컨텐츠 라이브 스트리밍 서비스를 지원하는 전자 장치
KR102362140B1 (ko) 스트리밍 게임 제공 방법 및 장치

Legal Events

Date Code Title Description
E701 Decision to grant or registration of patent right
GRNT Written decision to grant