KR20140099185A - 그래픽 클라우드에서 멀티미디어 콘텐츠를 처리하는 방법 및 장치 - Google Patents

그래픽 클라우드에서 멀티미디어 콘텐츠를 처리하는 방법 및 장치 Download PDF

Info

Publication number
KR20140099185A
KR20140099185A KR1020140006025A KR20140006025A KR20140099185A KR 20140099185 A KR20140099185 A KR 20140099185A KR 1020140006025 A KR1020140006025 A KR 1020140006025A KR 20140006025 A KR20140006025 A KR 20140006025A KR 20140099185 A KR20140099185 A KR 20140099185A
Authority
KR
South Korea
Prior art keywords
multimedia
graphics
instance
stream
multimedia stream
Prior art date
Application number
KR1020140006025A
Other languages
English (en)
Other versions
KR102178523B1 (ko
Inventor
헤만슈 스리바스타바
아마르 스리바스타바
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to EP14152901.6A priority Critical patent/EP2763038A3/en
Priority to CN201410043313.5A priority patent/CN103970677A/zh
Priority to US14/171,531 priority patent/US9787746B2/en
Publication of KR20140099185A publication Critical patent/KR20140099185A/ko
Application granted granted Critical
Publication of KR102178523B1 publication Critical patent/KR102178523B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46—Multiprogramming arrangements
    • G06F9/50—Allocation of resources, e.g. of the central processing unit [CPU]
    • G06F9/5005—Allocation of resources, e.g. of the central processing unit [CPU] to service a request
    • G06F9/5027—Allocation of resources, e.g. of the central processing unit [CPU] to service a request the resource being a machine, e.g. CPUs, Servers, Terminals
    • G06F9/505—Allocation of resources, e.g. of the central processing unit [CPU] to service a request the resource being a machine, e.g. CPUs, Servers, Terminals considering the load
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60—Network streaming of media packets
    • H04L65/70—Media network packetisation

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Software Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • User Interface Of Digital Computer (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Computer And Data Communications (AREA)

Abstract

본 발명의 전자 장치는 멀티미디어 인스턴스를 개시하기 위한 그래픽 호출을 그래픽 가상 서버로 전송하고, 상기 멀티미디어 인스턴스와 관련된 멀티미디어 스트림을 상기 그래픽 가상 서버로부터 수신하며, 상기 멀티미디어 스트림은, 상기 그래픽 가상 서버가 상기 멀티미디어 인스턴스와 연관된 부하 밸런스를 결정하고, 상기 멀티미디어 인스턴스를 처리하기 위한 그래픽 카드를 선택하고, 적어도 하나의 멀티미디어 디바이스에 제공하기 위해 상기 그래픽 카드와 연관된 다수의 포트를 활성화시켜 선택된 멀티미디어 스트림임을 특징으로 한다.

Description

그래픽 클라우드에서 멀티미디어 콘텐츠를 처리하는 방법 및 장치{METHOD AND APPARATUS FOR PROCESSING MULTIMEDIA CONTENT ON A GRAPHIC CLOUD}
본 발명의 다양한 실시 예들은 그래픽 클라우드에서 멀티미디어 콘텐츠를 처리하는 방법 및 장치에 관한 것이다.
다수의 멀티미디어 디바이스들 각각은 동시에 멀티미디어 콘텐츠를 서버로부터 제공받을 수 있다. 예컨대, 멀티미디어 콘텐츠는 게임, 사진 갤러리, 애니메이션 및 비디오 스트림이 될 수 있다. 또한, 멀티미디어 디바이스는 인터넷 프로토콜 텔레비전(Internet Protocol Television: IPTV), 모바일 폰, 태블릿 PC, PDA(Personal Digital Assistant) 및 스마트 폰이 될 수 있다.
한편, 멀티미디어 디바이스는 멀티미디어 콘텐츠를 처리하기 위해 그래픽 카드가 사용된다. 이에 따라, 멀티미디어 디바이스의 사용자는 멀티미디어 콘텐츠를 처리하기 위해 그래픽 카드를 구입할 수 있다 또한, 사용자는 멀티미디어 콘텐츠의 처리를 위해 하나 이상의 요소를 기반으로 다양한 그래픽 카드를 구입할 수 있다. 예를 들면, 게임 제작자는 어느 게임이 멀티미디어 디바이스에서 실행될 수 있는지를 판단하여 그래픽 카드를 추천한다. 이에 따라, 사용자는 게임을 실행하기 위해 필요한 성능 등의 요소를 기반으로 설계된 그래픽 카드를 구입한다. 사용자는 멀티미디어 콘텐츠를 저장 및 처리하기 위해 그래픽 클라우드에 접속할 수 있다. 그래픽 클라우드는 멀티미디어 콘텐츠를 처리하기 위한 다양한 하드웨어 및 소프트웨어 유닛을 포함한다.
그러나, 하드웨어 및 소프트웨어 유닛은 그래픽 카드에 따라 상이할 수 있다. 따라서, 멀티미디어 콘텐츠를 처리하기 위해 하드웨어 및 소프트웨어 유닛을 이용하는 것이 특정 그래픽 카드를 사용하는 사용자에게 필수적이 될 수 있다.
또한, 사용자가 멀티미디어 콘텐츠를 변경하려는 경우, 사용자는 멀티미디어 콘텐츠를 처리하기 위한 다른 그래픽 카드를 다시 구입해야 하는 번거로움을 초래할 수 있다.
또한, 일부 멀티미디어 디바이스는 멀티미디어 콘텐츠를 처리하기 위한 내장형 그래픽 카드를 포함하고 있으므로, 사용자의 요구 사항을 기반으로 그래픽 카드를 동적으로 변경할 수 없다.
전술한 설명의 견지에서, 멀티미디어 콘텐츠를 처리하기 위해 다수의 그래픽 카드를 지원하는 하이브리드형 그래픽 클라우드를 생성하기 위한 효율적인 방법이 필요할 수 있다.
이를 해결하기 위해, 본 발명의 일 실시 예는, 그래픽 클라우드에서 멀티미디어 콘텐츠를 처리하는 방법 및 장치를 제공할 수 있다.
본 발명의 실시 예에 따른 방법은, 멀티미디어 인스턴스를 개시하기 위한 그래픽 호출을 그래픽 가상 서버로 전송하는 단계와, 상기 멀티미디어 인스턴스와 관련된 멀티미디어 스트림을 상기 그래픽 가상 서버로부터 수신하는 단계를 포함하며, 상기 멀티미디어 스트림은, 상기 그래픽 가상 서버가 상기 멀티미디어 인스턴스와 연관된 부하 밸런스를 결정하고, 상기 멀티미디어 인스턴스를 처리하기 위한 그래픽 카드를 선택하고, 적어도 하나의 멀티미디어 디바이스에 제공하기 위해 상기 그래픽 카드와 연관된 다수의 포트를 활성화시켜 선택된 멀티미디어 스트림임을 특징으로 한다.
본 발명의 실시 예에 따른 장치는, 멀티미디어 인스턴스를 개시하기 위한 그래픽 호출을 그래픽 가상 서버로 전송하고, 상기 멀티미디어 인스턴스와 관련된 멀티미디어 스트림을 상기 그래픽 가상 서버로부터 수신하는 무선부를 포함하며, 상기 멀티미디어 스트림은, 상기 그래픽 가상 서버가 상기 멀티미디어 인스턴스와 연관된 부하 밸런스를 결정하고, 상기 멀티미디어 인스턴스를 처리하기 위한 그래픽 카드를 선택하고, 적어도 하나의 멀티미디어 디바이스에 제공하기 위해 상기 그래픽 카드와 연관된 다수의 포트를 활성화시켜 선택된 멀티미디어 스트림임을 특징으로 한다.
본 발명의 실시 예에 따른 다른 방법은, 그래픽 클라우드에서 멀티미디어 콘텐츠를 처리하는 방법으로서, 멀티미디어 스트림을 수신하는 사용자에 의해 개시되는 멀티미디어 인스턴스를 식별하는 단계; 상기 멀티미디어 인스턴스와 연관된 부하 밸런스를 결정하는 단계; 복수의 그래픽 카드 중에서 상기 멀티미디어 인스턴스를 처리하기 위한 그래픽 카드를 선택하는 단계; 상기 멀티미디어 스트림을 복수의 멀티미디어 디바이스에 제공하기 위해 상기 그래픽 카드와 연관된 복수의 포트를 활성화하는 단계; 및 상기 멀티미디어 스트림을 상기 멀티미디어 디바이스로 전송하는 단계를 포함하며, 상기 선택하는 단계는; 복수의 요소(factor)에 의거하여 상기 그래픽 카드를 선택하는 단계;임을 특징으로 한다.
본 발명의 실시 예에 따른 시스템은, 그래픽 클라우드에서 멀티미디어 콘텐츠를 처리하는 시스템으로서, 멀티미디어 디바이스; 통신을 확립하기 위한 통신 인터페이스; 명령을 저장하는 메모리; 및 프로세서를 포함하고, 상기 프로세서는 상기 명령에 응답하여, 멀티미디어 스트림을 수신하는 사용자에 의해 개시되는 멀티미디어 인스턴스를 식별하고; 상기 멀티미디어 인스턴스와 연관된 부하 밸런스를 결정하고; 복수의 그래픽 카드 중에서 상기 멀티미디어 인스턴스를 처리하기 위한 그래픽 카드를 선택하고; 상기 멀티미디어 스트림을 복수의 멀티미디어 디바이스에 제공하기 위해 상기 그래픽 카드와 연관된 복수의 포트를 활성화하고; 상기 멀티미디어 스트림을 상기 멀티미디어 디바이스로 전송하며, 상기 선택은; 복수의 요소(factor)에 의거하여 상기 그래픽 카드를 선택;함을 특징으로 한다.
본 발명의 일 실시 예에 따르면, 멀티미디어 인스턴스를 처리하기 위해 필요한 처리 능력 및 가상 메모리와 연관된 정보를 포함하는 프로파일과 연관됨으로써, 멀티미디어 인스턴스를 처리하는데 적합한 그래픽 카드를 선택할 수 있다.
또한, 본 발명의 실시 예에 따르면, 멀티미디어 스트림을 처리하기 위해 다양한 그래픽 카드 공급자로부터 다수의 그래픽 카드를 포함하는 하이브리드형 그래픽 클라우드를 개발하는 효율적인 방법을 제공할 수 있다.
첨부된 도면에서, 동일한 참조 부호들은 동일하거나 기능적으로 유사한 요소들을 가리킬 수 있다. 이 참조 부호들은, 상세한 설명에서 본 발명의 다양한 실시 예를 나타내고 본 개시의 다양한 양태들 및 이점들을 설명하기 위해 사용될 수 있다.
도 1은 본 발명의 실시 예에 따른 환경 시스템을 나타내는 도면이다.
도 2는 본 발명의 실시 예에 따른 그래픽 가상 서버의 블록도이다.
도 3은 본 발명의 실시 예에 따른 그래픽 가성 서버에서 멀티미디어 콘텐츠를 처리하는 절차를 나타내는 순서도이다.
도 4는 본 발명의 실시 예에 따른 멀티미디어 디바이스의 세부 구성을 나타내는 블록도이다.
도 5는 본 발명의 실시 예에 따른 멀티미디어 디바이스의 전면 사시도를 나타내는 도면이다.
본 발명의 실시 예에서는 다양한 변경을 가할 수 있고 여러 가지 실시 예를 가질 수 있는바, 특정 실시 예들을 도면에 예시하여 상세하게 설명한다. 그러나 이는 본 발명을 특정한 실시 형태에 대해 한정하려는 것이 아니며, 본 발명의 사상 및 기술 범위에 포함되는 모든 변경, 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다.
제1, 제2 등과 같이 서수를 포함하는 용어는 다양한 구성요소들을 설명하는데 사용될 수 있지만, 상기 구성요소들은 상기 용어들에 의해 한정되지는 않는다. 상기 용어들은 하나의 구성요소를 다른 구성요소로부터 구별하는 목적으로만 사용된다. 예를 들어, 본 발명의 권리 범위를 벗어나지 않으면서 제1 구성요소는 제2 구성요소로 명명될 수 있고, 유사하게 제2 구성요소도 제1 구성요소로 명명될 수 있다. 및/또는 이라는 용어는 복수의 관련된 기재된 항목들의 조합 또는 복수의 관련된 기재된 항목들 중의 어느 항목을 포함한다.
본 발명의 실시 예들에서 사용한 용어는 단지 특정한 실시 예를 설명하기 위해 사용된 것으로, 본 발명을 한정하려는 의도가 아니다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다. 본 발명에서, "포함하다" 또는 "가지다" 등의 용어는 명세서상에 기재된 특징, 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.
다르게 정의되지 않는 한, 기술적이거나 과학적인 용어를 포함해서 여기서 사용되는 모든 용어들은 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 것과 동일한 의미를 가지고 있다. 일반적으로 사용되는 사전에 정의되어 있는 것과 같은 용어들은 관련 기술의 문맥상 가지는 의미와 일치하는 의미를 가지는 것으로 해석되어야 하며, 본 발명에서 명백하게 정의하지 않는 한, 이상적이거나 과도하게 형식적인 의미로 해석되지 않는다.
본 발명의 실시 예에 따라 멀티미디어 콘텐츠 처리 방법 및 장치를 제공한다.
도 1은 본 발명의 실시 예에 따른 환경 시스템을 나타내는 도면이다. 도 1을 참조하면, 환경 시스템(100)은 다양한 멀티미디어 디바이스들 및 그래픽 클라우드(110)을 포함하여 구성될 수 있다. 상기 멀티미디어 디바이스들은 예컨대, 멀티미디어 디바이스 1(105a), 멀티미디어 디바이스 2(105b) 및 멀티미디어 디바이스 3(105c)가 될 수 있다. 또한, 상기 환경 시스템(100)은 상기 그래픽 클라우드(110)를 통해 상기 멀티미디어 디바이스들과 연결될 수 있는 그래픽 가상 서버(115)를 더 포함하여 구성될 수도 있다. 예컨대, 상기 멀티미디어 디바이스들은 컴퓨터, 노트북, 모바일 폰, 핸드헬드 디바이스, PDA(Personal Digital Assistant) 및 통신 디바이스를 포함하지만, 이에 한정되는 것은 아니며, 상기 그래픽 클라우드(110) 예컨대, 로컬 영역 네트워크(LAN), 광역 네트워크(WAN) 및 무선 네트워크를 통해 상기 그래픽 가상 서버(115)로 액세스될 수 있다.
상기 멀티미디어 디바이스들은 상기 그래픽 가상 서버(115)로부터 멀티미디어 스트림을 수신할 수 있다. 상기 멀티미디어 디바이스들은 수신된 멀티미디어 스트림을 디스플레이하도록 동작이 가능할 수 있다. 예컨대, 상기 멀티미디어 스트림은 게임, 사진 갤러리, 애니메이션 및 비디오 스트림을 포함하지만, 이에 한정되는 것은 아니다.
본 발명의 일 실시 예에 따르면, 상기 멀티미디어 디바이스 1(105a)는 멀티미디어 인스턴스 예컨대, 게임 인스턴스를 개시할 수 있다. 상기 멀티미디어 인스턴스는 그래픽 호출을 이용함으로써 개시될 수 있다. 또한, 게임 인스턴스의 개시에 이용되는 그래픽 호출은 상기 그래픽 가상 서버(115)에 전송될 수 있다. 본 발명의 실시 예에 따른 상기 멀티미디어 디바이스 1(105a)에 포함된 운영 체제(OS)는 상기 그래픽 가상 서버(115)로 그래픽 호출을 전송하도록 구성될 수 있다.
상기 그래픽 가상 서버(115)는 상기 멀티미디어 디바이스 1(105a)로부터 상기 그래픽 호출을 수신하면, 그래픽의 호출을 검출할 수 있다. 이후, 게임 인스턴스와 연관된 부하 밸런스를 결정할 수 있다. 상기 부하 밸런스는 게임 인스턴스의 처리에 필요한 처리 능력 및 가상 메모리를 결정할 수 있다.
게임 인스턴스와 연관된 부하 밸런스의 결정되면, 상기 그래픽 가상 서버(115)는 다수의 그래픽 카드들 중 상기 게임 인스턴스의 처리를 가능하도록 할 수 있는 그래픽 카드를 선택할 수 있다. 이후, 상기 멀티미디어 디바이스 1(105a)는 게임 인스턴스를 제공받을 수 있다. 상기 다수의 그래픽 카드들은 상기 다수의 그래픽 카드 공급자에 의해 제공될 수 있으며,상기 게임 인스턴스의 처리를 가능하도록 할 수 있는 그래픽 카드는 다수의 요소들을 기반으로 선택될 수 있다.
또한, 그래픽 카드의 선택 시, 상기 그래픽 가상 서버(115)는 그래픽 카드와 연관된 다수의 포트들을 활성화할 수 있다. 또한, 게임 인스턴스와 연관된 멀티미디어 스트림의 디스플레이 설정을 정의하도록, 하나 이상의 파라미터가 상기 그래픽 가상 서버(115)에 의해 설정될 수 있다. 게임 인스턴스와 연관된 멀티미디어 스트림은 활성화되는 포트의 넘버를 기반으로 멀티미디어 디바이스에 제공될 수 있다.
또한, 그래픽 카드와 연관된 포트의 활성화 시, 게임 인스턴스와 연관된 멀티미디어 스트림이 상기 멀티미디어 디바이스 1(105a)로 전송될 수 있다.
따라서, 그래픽 카드 공급자의, 멀티미디어 스트림을 처리하기 위한 그래픽 카드를 포함하는 그래픽 클라우드가 생성될 수 있다. 본 발명의 실시 예에 따르면, 상기 그래픽 카드를 선택함으로써, 적합한 그래픽 카드가 멀티미디어 스트림을 처리하는데 사용될 수 있다.
도 2는 본 발명의 실시 예에 따른 그래픽 가상 서버의 블록도이다. 도 2를 참조하면, 그래픽 가상 서버(115)는 정보를 통신하는 버스(205) 또는 다른 통신 메커니즘, 및 정보를 처리하기 위해 상기 버스(205)와 결합된 프로세서(210)를 포함할 수 있다. 또한, 상기 그래픽 가상 서버(115)는 메모리(215), 예컨대, 프로세서(210)에 의해 실행되는 정보 및 명령을 저장하기 위해 버스(205)에 결합된 랜덤 액세스 메모리(RAM) 또는 다른 동적 저장 디바이스를 포함할 수 있다. 상기 메모리(215)는 상기 프로세서(210)에 의한 명령의 실행 중에 임시 변수 또는 다른 중간 정보를 저장하기 위해 사용될 수 있다. 상기 그래픽 가상 서버(115)는 상기 프로세서(210)에 대한 정적 정보 및 명령을 저장하기 위해 버스(205)에 결합된 판독 전용 메모리(ROM)(220) 또는 다른 정적 저장 디바이스를 더 포함할 수 있다. 저장 유닛(225) 자기 디스크 또는 광 디스크는 정보 예컨대, 멀티미디어 스트림과 연관된 복수의 프레임을 저장하기 위해 설치될 수 있으며 상기 버스(205)에 결합될 수 있다.
상기 그래픽 가상 서버(115)는 멀티미디어 스트림을 디스플레이하기 위해 상기 버스(205)를 통해 디스플레이(230) 예컨대, 음극선관(CRT)에 결합될 수 있다. 영숫자 및 다른 키를 포함하는 입력 디바이스(235)는 상기 프로세서(210)에 정보 및 커맨드 선택을 통신하기 위해 버스(205)와 결합될 수 있다. 다른 종류의 사용자 입력 디바이스는 커서 컨트롤(240)로서 예컨대, 상기 프로세서(210)에 방향 정보 및 커맨드 선택을 통신하고 디스플레이(230)에서 커서 움직임을 제어하기 위한 마우스, 트랙볼, 또는 커서 방향키가 될 수 있다.
본 발명의 다양한 실시 예에 따르면 본 발명에서 설명하는 기술을 구현하기 위한 그래픽 가상 서버(115)의 사용과 관련될 수 있다. 본 발명의 일 실시 예에 따르면 이 기술은 상기 메모리(215)에 포함된 명령을 실행하는 상기 프로세서(210)에 응답하여 상기 그래픽 가상 서버(115)에 의해 행해질 수 있다. 상기 명령은 다른 기계 판독 가능 매체 예컨대, 상기 저장 유닛(225)으로부터 상기 메모리(215) 내로 읽어질 수 있다. 상기 메모리(215)에 포함된 명령의 실행으로 인해 상기 프로세서(210)는 본 발명에서 설명된 프로세스 단계를 실행하게 될 수 있다.
본 발명의 일 실시 예에 따르면 상기 프로세서(210)는 상기 프로세서(210)의 하나 이상의 기능을 실행하는 하나 이상의 처리 유닛을 포하도록 구성될 수 있다. 상기 처리 유닛은 소프트웨어 명령을 대신하거나 상기 처리 유닛과 함께 지정될 수 있는 기능을 실행하는데 사용되는 하드웨어 회로일 수 있다.
본 발명에서 사용되는 용어 "기계 판독 가능 매체"는, 기계가 특정 기능을 수행하게 하는 데이터를 제공하는데 참여하는 임의의 매체를 말한다. 상기 그래픽 가상 서버(115)를 이용해서 구현되는 실시예에서, 다양한 기계 판독 가능 매체는 예컨대, 실행을 위해 프로세서(210)에 명령을 제공하는데 관련될 수 있다. 상기 기계 판독 가능 매체는 휘발성 또는 비휘발성 저장 매체일 수 있다. 예컨대, 상기 휘발성 매체는 메모리(215) 등의 동적 메모리를 포함를 포함할 수 있으며, 상기 비휘발성 매체는 광 또는 자기 디스크(예컨대, 저장 유닛(225))를 포함할 수 있다. 상기 매체들은 매체에 의해 반송되는 명령이, 이 명령을 기계 내로 읽어들이는 물리적 메커니즘에 의해 검출될 수 있게 하는 유형이 될 수 있다.
본 발명의 실시 예에 따른 기계 판독 가능 매체의 일반적인 형태는 예컨대, 플로피 디스크, 플렉서블 디스크, 하드 디스크, 자기 테이프, 또는 임의의 다른 자기 매체, CD-ROM, 임의의 다른 광학 매체, 펀치카드, 페이퍼테이프, 홀 패턴을 갖는 임의의 다른 물리적 매체, RAM, PROM, 및 EPROM, FLASH-EPROM, 임의의 다른 메모리 칩 또는 카트리지를 포함할 수 있다.
본 발명의 다른 실시 예에 따른 기계 판독 가능 매체는 버스(205)를 포함하는 와이어를 포함하여, 동축 케이블, 구리 와이어 및 광섬유를 포함하는 전송 매체일 수 있다. 상기 전송 매체는 또한 전파 및 적외선 데이터 통신 동안에 발생되는 것과 같은 음향 또는 광파의 형태를 취할 수 있다. 기계 판독 가능 매체의 예는, 후술하는 반송파 또는 그래픽 가상 서버(115)가 판독할 수 있는 임의의 다른 매체를 포함할 수 있지만, 이에 한정되는 것은 아니다. 예컨대, 최초의 명령이 원격 컴퓨터의 자기 디스크 상에서 반송될 수 있다. 상기 원격 컴퓨터는 자신의 동적 메모리에 명령을 로드하고 모뎀을 이용하여 전화 회선을 통해 명령을 전송할 수 있다. 상기 그래픽 가상 서버(115)에 로컬인 모뎀은 전화 회선 상에서 데이터를 수신하고 적외선 송신기를 이용하여 데이터를 적외선 신호를 변환할 수 있다. 적외선 검출기가 적외선 신호에서 반송되는 데이터를 수신할 수 있고, 적절한 회로가 데이터를 버스(205)에 놓을 수 있다. 버스(205)는 메모리(215)에 데이터를 반송하고, 프로세서(210)는 명령을 검색하고 실행한다. 메모리(215)에 의해 수신된 명령은 프로세서(210)에 의한 실행 전 또는 후에 저장 유닛(225)에 선택적으로 저장될 수 있다. 모든 이러한 매체는 매체에 의해 반송된 명령이, 이 명령을 기계 내에 읽어들이는 물리적 메커니즘에 의해 검출될 수 있게 하기 위한 유형이어야 한다.
또한, 상기 그래픽 가상 서버(115)는 버스(205)에 결합된 통신 인터페이스(245)를 포함한다. 상기 통신 인터페이스(245)는 프로세서(210)에 결합되어 양방향 데이터 통신을 제공한다. 예를 들면, 상기 통신 인터페이스(245)는 대응하는 종류의 전화 회선에의 데이터 통신 연결을 제공하는 ISDN(integrated services digital network) 카드 또는 모뎀일 수 있다. 본 발명의 다른 실시 예에 따른, 상기 통신 인터페이스(245)는 호환 가능한 LAN에의 데이터 통신 연결을 제공하는 근거리 통신망(LAN) 카드일 수 있다. 이러한 임의의 구현에서, 통신 인터페이스(245)는 다양한 종류의 정보를 나타내는 디지털 데이터 스트림을 반송하는 전기, 전자기 또는 광학 신호를 송수신할 수 있다.
상기 프로세서(210)는 멀티미디어 인스턴스를 결정하도록 구성될 수 있다. 상기 멀티미디어 인스턴스는 멀티미디어 스트림을 수신하기 위해 그래픽 호출을 이용하여 사용자에 의해 개시될 수 있다. 상기 프로세서(210)는 그래픽 호출의 수신 시 멀티미디어 인스턴스를 결정할 수 있다.
상기 프로세서(210)는 상기 멀티미디어 인스턴스와 연관된 부하 밸런스를 결정하도록 동작 가능할 수 있다. 상기 그래픽 가상 서버(115)에 포함된 부하 밸런서 유닛(250)은 멀티미디어 인스턴스와 연관된 부하 밸런스를 결정하는 데 사용될 수 있다. 부하 밸런서 유닛(250)에 의해 결정된 부하 밸런스는 멀티미디어 인스턴스의 처리에 필요한 처리 능력 및 가상 메모리를 식별하기 위해 사용될 수 있다. 상기 부하 밸런서 유닛(250)은 다수의 그래픽 카드들과 연관된 부하 밸런스를 더 저장할 수 있다.
상기 프로세서(210)는 멀티미디어 인스턴스를 처리하기 위해 복수의 그래픽 카드로부터 그래픽 카드를 선택하기 위해 동작 가능할 수 있다. 할당 유닛(255)은 복수의 요소를 기반으로 선택하기 위해 사용될 수 있다. 이 요소는 예컨대, 멀티미디어 인스턴스에 의한 그래픽 처리 유닛(GPU) 사용, 그래픽 카드의 최소, 최대 및 평균 GPU 사용, 멀티미디어 인스턴스의 초당 프레임(fps) 요건, 그래픽 카드와 연관된 런타임 의존성, 멀티미디어 인스턴스의 해상도 및 색 깊이, 런타임에서 멀티미디어 인스턴스를 처리하기 위한 하드웨어 및 소프트웨어 요건 및 그래픽 카드의 비용을 포함하도록 구성될수 있지만, 이에 한정되는 것은 아니다.
선택되는 그래픽 카드가 멀티미디어 인스턴스의 처리, 멀티미디어 인스턴스의 전처리, 멀티미디어 인스턴스의 후처리 및 멀티미디어 인스턴스의 렌더링 동안 연관된 작업의 오프로드를 가능하게 할 수 있게 선택할 수 있다.
상기 그래픽 가상 서버(115)에 포함된 프로세서(210)는 다수의 멀티미디어 디바이스들에 멀티미디어 스트림을 제공하기 위해 그래픽 카드와 연관된 다수의 포트들을 활성화하도록 구성될 수 있다. 상기 프로세서(210)로부터 활성화 커맨드의 수신 시 가상 포트 관리 유닛(260)은 그래픽 카드와 연관된 포트를 활성화할 수 있다.
가상 포트 관리 유닛(260)은 멀티미디어 스트림과 연관된 디스플레이 설정을 정의하는 데 사용되는 하나 이상의 파라미터를 활성화하도록 구성될 수 있다. 예컨대, 상기 파라미터는 해상도, 색 깊이 등을 포함하지만, 이에 한정되는 것은 아니다.
상기 그래픽 가상 서버(115)는 비페이징 메모리(non-paged) 또는 가상 메모리에 멀티미디어 스트림을 저장하도록 동작 가능한 어드밴스 렌더러 모듈(265)을 포함할 수 있다. 멀티미디어 스트림이 향상된 버퍼 속도를 가지면, 멀티미디어 스트림은 비페이징 메모리에서 처리 및 저장될 수 있다. 또한, 멀티미디어 스트림 버퍼가 저하된 버퍼 속도를 가지면, 멀티미디어 스트림은 가상 메모리에서 처리 및 저장될 수 있다.
어드밴스 렌더러 모듈(265)에 의해 비페이징 메모리 또는 가상 메모리에 멀티미디어 스트림의 저장이 수행되어 딜레이 시간을 줄이기 때문에 멀티미디어 스트림을 효율적으로 처리 가능할 수 있다.
상기 그래픽 가상 서버(115)는 사용자에게 멀티미디어 스트림을 전송하기 전에 멀티미디어 스트림을 압축하도록 동작 가능한 미디어 스트리밍 서버(270)를 포함할 수 있다. 멀티미디어 스트림의 압축을 위해, 미디어 스트리밍 서버(270)에 의해 하나 이상의 압축 기술이 사용될 수 있으며, 상기 압축은 멀티미디어 스트림의 전송 동안에 저감된 대역폭을 얻기 위해 사용될 수 있다.
상기 미디어 스트리밍 서버(270)는 멀티미디어 디바이스로 멀티미디어 스트림을 전송하도록 구성될 수 있다. 또한, 미디어 스트리밍 서버(270)는 상기 멀티미디어 디바이스에서 멀티미디어 스트림을 디스플레이하기 전에 멀티미디어 스트림을 압축하도록 동작 가능할 수 있다.
이하, 도 3을 기반으로 본 발명의 실시 예에 따라 멀티미디어 콘텐츠를 처리하는 방법을 상세히 설명한다.
도 3은 본 발명의 실시 예에 따른 그래픽 가상 서버에서 멀티미디어 콘텐츠를 처리하는 절차를 나타내는 순서도이다.
도 3을 참조하면, 멀티미디어 디바이스는 사용자에 의해 멀티미디어 인스턴스가 결정(310)될 수 있다. 예컨대, 상기 멀티미디어 인스턴스는 멀티미디어 스트림을 수신하는 상기 멀티미디어 디바이스의 사용자에 의해 개시될 수 있다. 상기 멀티미디어 디바이스는 멀티미디어 인스턴스를 개시하기 위해 그래픽 호출을 그래픽 가상 서버로 전송할 수 있다. 본 발명의 일 실시 예에 따른 멀티미디어 인스턴스는 예컨대, 프로세서(210)에 의한 그래픽 호출의 수신 시 결정될 수 있다.
상기 그래픽 가상 서버는 상기 멀티미디어 디바이스로부터 그래픽 호출을 수신하면, 멀티미디어 인스턴스와 연관된 부하 밸런스를 결정(315)할 수 있다. 상기 부하 밸런스는 멀티미디어 인스턴스의 처리에 필요한 처리 능력 및 가상 메모리를 나타낼 수 있다. 본 발명의 일 실시 예에 따른 부하 밸런서 유닛(250)은 예컨대, 상기 부하 밸런스를 결정할 수 있다.
본 발명의 일 실시 예에 따른, 각 그래픽 카드는 멀티미디어 인스턴스를 처리하는 그래픽 카드의 처리 능력을 나타내는 부하 밸런스와 연관될 수 있다. 또한, 이 방법은 그래픽 클라우드에 있는 각 그래픽 카드와 연관된 부하 밸런스의 저장을 포함할 수 있다. 상기 부하 밸런서 유닛(250)은 각 그래픽 카드와 연관된 부하 밸런스를 저장할 수 있다.
상기 그래픽 가상 서버는 부하 배런스가 결정되면, 다수의 그래픽 카드들 중 상기 멀티미디어 인스턴스를 처리하기 위한 그래픽 카드를 선택(320)할 수 있다. 상기 다수의 그래픽 카드들은 상기 다수의 그래픽 카드 공급자에 의해 제공될 수 있다. 다수의 그래픽 카드들을 공급하는 공급자로부터 그래픽 카드는 그래픽 클라우드에 존재할 수 있다. 상기 그래픽 클라우드는 다양한 그래픽 카드들을 포함하므로 예컨대, 상기 그래픽 클라우드는 하이브리드형 그래픽 클라우드가 될 수 있다. 상기 그래픽 카드는 상기 멀티미디어 인스턴스의 처리를 가능하도록 할 수 있는 그래픽 카드는 다수의 요소들을 기반으로 선택될 수 있다. 본 발명의 일 실시 예에 따른 상기 다수의 요소들은 예컨대, 멀티미디어 인스턴스에 의한 GPU 사용, 그래픽 카드의 최소, 최대 및 평균 GPU 사용, 멀티미디어 인스턴스의 fps 요건, 그래픽 카드와 연관된 런타임 의존성, 멀티미디어 인스턴스의 해상도 및 색 깊이, 런타임에서 멀티미디어 인스턴스를 처리하기 위한 하드웨어 및 소프트웨어 요건 및 그래픽 카드의 비용을 포함하지만, 이에 한정되지 않는다.
상기 멀티미디어 인스턴스는, 멀티미디어 인스턴스를 처리하기 위해 필요한 처리 능력 및 가상 메모리와 연관된 정보를 포함하는 프로파일과 연관될 수 있다. 상기 프로파일은 상기 멀티미디어 인스턴스를 처리하기 위해 적합한 그래픽 카드의 선택을 가능하게 할 수 있다.
상기 선택된 그래픽 카드는 멀티미디어 인스턴스의 처리, 멀티미디어 인스턴스의 전처리, 멀티미디어 인스턴스의 후처리 및 멀티미디어 인스턴스의 렌더링 동안 연관된 작업의 오프로드를 가능하게 할 수 있다.
또한, 상기 선택된 그래픽 카드는 그래픽 카드의 변경을 지원하지 않는 멀티미디어 디바이스에서 멀티미디어 스트림의 렌더링을 가능하게 할 수도 있다.
상기 그래픽 가성 서버는 다수의 멀티미디어 디바이스들에 멀티미디어 스트림을 제공하기 위해, 상기 선택된 그래픽 카드와 연관된 다수의 포트들을 활성화시킬 수 있다. 본 발명의 실시 예에 따른프로세서(210)는 예컨대, 프로세서(210)에 의해 가상 포트 관리 유닛(예컨대, 가상 포트 관리 유닛(260))에 제공되는 활성화 커맨드가 포트를 활성화하기 위해 사용될 수 있다.
본 발명의 실시 예에 따른 하나 이상의 파라미터는 멀티미디어 스트림과 연관된 디스플레이 설정을 정의하기 위해 활성화될 수 있다. 상기 파라미터는 예컨대, 해상도, 색 깊이 등을 포함하지만, 이에 한정되는 것은 아니다.
또한, 이 방법은 비페이징 메모리 및 가상 메모리 중 하나에의 멀티미디어 스트림의 저장을 포함할 수 있다. 상기 멀티미디어 스트림과 연관된 처리 속도를 기반으로 저장을 할 수 있다. 또한, 상기 비페이징 메모리 또는 가상 메모리에의 멀티미디어 스트림의 저장이 실행해서, 딜레이 시간을 줄여 멀티미디어 스트림의 효율적인 처리를 가능하게 할 수 있다.
본 발명의 일 실시 예에 따르면, 멀티미디어 스트림과 연관된 fps가 비교적 낮으면, 멀티미디어 스트림은 가상 메모리에 저장될 수 있다. 또한, 멀티미디어 스트림과 연관된 fps가 상대적으로 높으면, 멀티미디어 스트림은 비페이징 메모리에 저장될 수 있다.
또한, 이 방법은 멀티미디어 스트림의 전송에 앞서 멀티미디어 스트림의 압축을 포함할 수 있다. 본 발명의 실시 예에 따른, 그래픽 가상 서버는 상기 멀티미디어 스트림을 전송하는 동안 효율적인 대역폭 사용을 보장하기 위해 압축이 실행될 수 있다.
상기 그래픽 가상 서버는 상기 멀티미디어 스트림을 상기 멀티미디어 디바이스로 전송(330)한다. 상기 전송 시, 멀티미디어 스트림은 압축 해제될 수 있으며, 멀티미디어 디바이스의 화면에 디스플레이될 수 있다.
본 개시에서 특정된 실시예는, 멀티미디어 스트림을 처리하기 위해 다양한 그래픽 카드 공급자로부터의 복수의 그래픽 카드를 포함하는 하이브리드형 그래픽 클라우드를 개발하는 효율적인 방법을 제공하는 데 있어 바람직하다. 또한, 선택되는 그래픽 카드가 하드웨어 및 소프트웨어 애플리케이션과 독립적으로 멀티미디어 스트림을 처리하도록, 하이브리드형 그래픽 클라우드가 실시간으로 그래픽 카드의 선택을 가능하게 함으로써, 사용자가 명시적으로 처리용 그래픽 카드를 구입하게 되는 것을 방지할 수 있다. 또한, 이 방법은 상이한 멀티미디어 스트림의 처리에 적합한 그래픽 카드의 선택을 가능하게 한다.
도 4를 참조하면, 본 발명의 실시 예에 따른 멀티미디어 디바이스(100)는 제어부(110), 통신모듈(120), 입/출력 모듈(130), 저장부(150), 전원공급부(160), 터치스크린(171), 및 터치스크린 컨트롤러(172)를 포함할 수 있다.
우선, 제어부(110)는 CPU(111), 멀티미디어 디바이스(100)의 제어를 위한 제어프로그램이 저장된 롬(ROM, 112) 및 장치(100)의 외부로부터 입력되는 신호 또는 데이터를 기억하거나, 멀티미디어 디바이스(100)에서 수행되는 작업을 위한 기억영역으로 사용되는 램(RAM, 113)을 포함할 수 있다. CPU(111), 롬(112), 및 램(113)은 내부버스(bus)를 통해 상호 연결될 수 있다. 또한, 제어부(110)는 통신모듈(120), 입/출력 모듈(130), 저장부(150), 전원공급부(160), 터치스크린(171), 및 터치스크린 컨트롤러(172)를 제어할 수 있다. 나아가, 제어부(110)는 싱글코어로 이루어지거나, 듀얼 코어, 트리플 코어, 또는 쿼드 코어 등과 같이 복수의 코어로 이루어질 수도 있다. 상기 코어의 수는 단말의 특성에 따라 본 발명의 기술분야에서 통상의 지식을 가진자에 의해 다양하게 구성될 수 있음은 물론이다.
통신모듈(120)은 셀룰러 모듈, 무선랜 모듈 및 근거리통신 모듈 중 적어도 하나를 포함할 수 있다. 셀룰러 모듈은 제어부(110)의 제어에 따라 적어도 하나-하나 또는 복수-의 안테나를 이용하여 이동 통신을 통해 멀티미디어 디바이스(100)가 외부 장치와 연결되도록 한다. 셀룰러 모듈은 멀티미디어 디바이스(100)에 입력되는 전화번호를 가지는 휴대폰, 스마트폰, 태블릿 PC 또는 다른 장치와 음성 통화, 화상 통화, 문자메시지(SMS) 또는 멀티미디어 메시지(MMS)를 위한 무선 신호를 송/수신한다.
무선랜 모듈은 제어부(110)의 제어에 따라 무선 액세스 포인트(AP, access point)(도시되지 아니함)가 설치된 장소에서 인터넷에 연결될 수 있다. 무선랜 모듈은 미국전기전자학회(IEEE)의 무선랜 규격(IEEE802.11x)을 지원한다. 무선랜 모듈은 무선으로 연결되는 무선 액세스 포인트(AP, access point)에서 제공하는 위치 정보를 사용하여 무선랜 모듈을 구비하고 있는 단말의 위치정보를 확인하는 WPS(Wi-Fi Positioning System)를 구동할 수 있다.
근거리통신 모듈은 제어부(110)의 제어에 따라 멀티미디어 디바이스(100)와 무선으로 근거리 통신을 처리하는 모듈로써, 블루투스(bluetooth), 적외선 통신(IrDA, infrared data association), 와이파이 다이렉트(WiFi-Direct) 통신, NFC(Near Field Communication) 등의 근거리 통신방식에 기초하여 통신을 처리할 수 있다.
나아가, 통신모듈(120)은 USB 통신 케이블, 시리얼 통신 케이블 등을 통해 연결된 다른 전자장치와 소정의 통신 방식(예컨대, USB 통신, 시리얼 통신 등)에 기초하여 데이터 통신을 수행할 수 있음은 물론이다.
입/출력 모듈(130)은 버튼(131), 스피커(132), 및 진동모터(133) 중, 적어도 하나를 포함할 수 있다.
버튼(131)은 상기 멀티미디어 디바이스(100)의 하우징의 전면, 측면 또는 후면에 형성될 수 있으며, 전원/잠금 버튼(도시되지 아니함), 볼륨버튼(도시되지 아니함), 메뉴 버튼, 홈 버튼, 돌아가기 버튼(back button) 및 검색 버튼 중 적어도 하나를 포함할 수 있다.
스피커(132)는 제어부(110)의 제어에 따라 셀룰러 모듈, 무선랜 모듈 및 근거리통신 모듈의 다양한 신호(예, 무선신호, 방송신호 등)에 대응되는 사운드를 장치(100) 외부로 출력할 수 있다. 스피커(132)는 상기 멀티미디어 디바이스(100)의 하우징의 적절한 위치 또는 위치들에 하나 또는 복수로 형성될 수 있다.
진동모터(133)는 제어부(110)의 제어에 따라 전기적 신호를 기계적 진동으로 변환할 수 있다. 상기 멀티미디어 디바이스(100)의 하우징 내에 하나 또는 복수로 형성될 수 있다.
이와 같은, 스피커(132) 및 진동모터(133)는 멀티미디어 디바이스(100)의 볼륨운영모드의 설정 상태에 따라, 동작할 수 있다. 예컨대, 멀티미디어 디바이스(100)의 볼륨운영모드는 소리모드, 진동모드, 소리 및 진동모드, 무음모드 등으로 운영될 수 있으며, 이들 모드 중 하나의 모드로 설정될 수 있다. 제어부(110)는 상기 볼륨운영모드가 설정된 모드에 기초하여, 멀티미디어 디바이스(100)가 수행하는 기능에 따라 상기 스피커(132) 또는 진동모터(133)의 동작을 지시하는 신호를 출력할 수 있다.
저장부(150)는 제어부(110)의 제어에 따라 입/출력 모듈(130), 터치스크린(171)의 동작에 대응되게 입/출력되는 신호 또는 데이터를 저장할 수 있다. 저장부(150)는 멀티미디어 디바이스(100) 또는 제어부(110)의 제어를 위한 제어 프로그램 및 어플리케이션들을 저장할 수 있다.
'저장부'라는 용어는 저장부(150), 제어부(110)내 롬(112), 램(113) 또는 장치(100)에 장착되는 메모리 카드(도시되지 아니함)(예, SD 카드, 메모리 스틱)를 포함한다. 저장부는 비휘발성메모리, 휘발성메모리, 하드 디스크 드라이브(HDD) 또는 솔리드 스테이트 드라이브(SSD)를 포함할 수 있다.
전원공급부(160)는 제어부(110)의 제어에 따라 멀티미디어 디바이스(100)의 하우징에 배치되는 하나 또는 복수의 배터리(도시되지 아니함)에 전원을 공급할 수 있다. 하나 또는 복수의 배터리(도시되지 아니함)는 멀티미디어 디바이스(100)에 전원을 공급한다. 또한, 전원공급부(160)는 장치에 구비된 커넥터와 연결된 유선 케이블을 통해 외부의 전원소스(도시되지 아니함)에서부터 입력되는 전원을 멀티미디어 디바이스(100)로 공급할 수 있다. 또한, 전원공급부(160)는 무선 충전 기술을 통해 외부의 전원소스로부터 무선으로 입력되는 전원을 멀티미디어 디바이스(100)로 공급할 수도 있다.
터치스크린(171)은 단말의 운영체제(OS; Operation System)에 기초하여, 사용자에게 다양한 서비스(예, 통화, 데이터 전송, 방송, 사진촬영)에 대응되는 유저 인터페이스를 디스플레이할 수 있다. 터치스크린(171)은 유저 인터페이스에 입력되는 적어도 하나의 터치에 대응되는 아날로그 신호를 터치스크린 컨트롤러(172)로 전송할 수 있다. 터치스크린(171)은 사용자의 신체(예, 엄지를 포함하는 손가락) 또는 터치 가능한 입력 수단(예, 스타일러스 펜)을 통해 적어도 하나의 터치를 입력받을 수 있다. 또한, 터치스크린(171)은 적어도 하나의 터치 중에서, 하나의 터치의 연속적인 움직임을 입력받을 수 있다. 터치스크린(171)은 입력되는 터치의 연속적인 움직임에 대응되는 아날로그 신호를 터치스크린 컨트롤러(172)로 전송할 수 있다.
터치스크린(171)은 예를 들어, 저항막(resistive) 방식, 정전용량(capacitive) 방식, 적외선(infrared) 방식 또는 초음파(acoustic wave) 방식으로 구현될 수 있다.
한편, 터치스크린 컨트롤러(172)는 제어부(110)에서 제공되는 디스플레이 데이터가 터치스크린(171)에 표시될 수 있도록, 터치스크린(171)의 출력값을 제어한다. 그리고, 터치스크린 컨트롤러(172)는 터치스크린(171)에서부터 수신된 아날로그 신호를 디지털 신호(예, X와 Y좌표)로 변환하여 제어부(110)로 전송한다.
이와 같은, 제어부(110)는 터치스크린(171)과 터치스크린 컨트롤러(172)로부터 제공되는 데이터를 사용하여, 사용자 입력을 처리할 수 있다. 즉, 제어부(110)는 터치스크린 컨트롤러(172)로부터 수신된 디지털 신호를 이용하여 터치스크린(171)을 제어할 수 있다. 예를 들어, 제어부(110)는 터치 이벤트 또는 호버링 이벤트에 응답하여 터치스크린(171)에 표시된 단축 아이콘(도시되지 아니함)이 선택되게 하거나 또는 단축 아이콘(도시되지 아니함)을 실행할 수 있다.
이상, 본 발명의 일 실시예에서, 사용자 입력을 터치스크린(171)을 통해 입력받는 것을 예시하였으나, 본 발명이 이를 한정하는 것은 아니며, 다양한 구성부를 통해 사용자 입력을 인식하여 처리할 수 있음은 물론이다. 예컨대, 본 발명의 일 실시예에 따른 멀티미디어 디바이스(100)는, 센서 모듈 또는 카메라 모듈을 포함할 수 있고, 상기 센서 모듈 또는 카메라 모듈을 통해 입력되는 데이터를 사용하여 사용자 입력을 처리할 수 있다.
예컨대, 상기 센서 모듈은 사용자의 멀티미디어 디바이스(100)에 대한 접근 여부를 검출하는 근접센서, 멀티미디어 디바이스(100) 주변의 빛의 양을 검출하는 조도센서, 및 RGB 센서 중, 적어도 하나의 센서를 포함하여 구성될 수 있다. 또한, 센서 모듈은 멀티미디어 디바이스(100)의 동작(예, 멀티미디어 디바이스(100)의 회전, 멀티미디어 디바이스(100)에 가해지는 가속도 또는 진동)을 검출하는 모션센서(도시되지 아니함)를 포함할 수도 있다. 나아가, 상기 센서 모듈에서 검출된 정보는 제어부(110)에 제공될 수 있으며, 상기 제어부(110)는 상기 검출된 정보를 사용하여 사용자 입력을 처리할 수 있다.
나아가, 카메라 모듈은 장치의 전면 또는 후면에 마련되어 제어부(110)의 제어에 따라 정지이미지 또는 동영상을 촬영하는 카메라를 포함할 수 있으며, 카메라를 통해 촬영된 정지이미지 또는 동영상은 제어부(110)에 제공될 수 있다. 상기 제어부(110)는 상기 카메라에서 제공되는 정지이미지 또는 동영상을 사용하여, 사용자 입력을 처리할 수 있다.
도 5는 본 발명의 실시 예에 따른 멀티미디어 디바이스의 전면 사시도를 나타내는 도면이다.
도 5를 참조하면, 멀티미디어 디바이스(100)의 전면 중앙에는 터치스크린(171)이 배치된다. 상기 터치스크린(171)은 멀티미디어 디바이스(100)의 전면의 대부분을 차지하도록 크게 형성될 수 있다.
또한, 상기 멀티미디어 디바이스(100)의 화면에 표시되는 홈 스크린은 여러 페이지의 서로 다른 홈 스크린들을 포함할 수 있는데, 상기 여러 페이지의 홈 스크린들 중 첫 번째 홈 스크린은 도 5에 도시된 바와 같은 메인 홈 스크린일 수 있다. 홈 스크린에는 자주 사용되는 어플리케이션들을 실행하기 위한 단축 아이콘들(171a, 171b, 171c), 메인메뉴 전환키(171d), 시간, 날씨 등이 표시될 수 있다. 상기 메인메뉴 전환키(171d)는 상기 터치스크린(171) 상에 메뉴 화면을 표시한다. 또한, 상기 터치스크린(171)의 상단에는 배터리 충전상태, 수신신호의 세기, 현재 시각, 볼륨운영모드와 같은 장치(100)의 상태를 표시하는 상태바(Status Bar)가 형성될 수도 있다.
이하, 본 발명의 예시적 실시예에 따른 방법들은 다양한 컴퓨터 수단을 통하여 수행될 수 있는 프로그램 명령 형태로 구현되어 컴퓨터 판독 가능 매체에 기록될 수 있다. 상기 컴퓨터 판독 가능 매체는 프로그램 명령, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 상기 매체에 기록되는 프로그램 명령은 본 발명을 위하여 특별히 설계되고 구성된 것들이거나 컴퓨터 소프트웨어 분야에서 통상의 지식을 가진 자에게 공지되어 사용 가능한 것일 수도 있다.
또한, 본 발명의 예시적 실시예에 따른 방법들은 전술한 멀티미디어 디바이스(100)의 저장부(150)에 프로그램 명령 형태로 구현되어 저장될 수 있으며,상기 프로그램 명령은, 본 발명의 예시적 실시예에 따른 방법들의 실행을 위해 제어부(110) 내에 포함된 램(RAM, 113)에 일시적으로 저장될 수 있다. 이에 따라, 제어부(110)는, 본 발명의 예시적 실시예에 따른 방법들에 따른 상기 프로그램 명령에 대응하여, 멀티미디어 디바이스(100)에 포함된 하드웨어 구성요소들의 제어를 수행하고, 본 발명의 예시적 실시예에 따른 방법들을 실행하면서 발생되는 데이터를 일시 또는 지속적으로 저장부(150)에 저장하고, 본 발명의 예시적 실시예에 따른 방법들의 실행에 필요한 UI를 터치스크린 컨트롤러(172)에 제공할 수 있다.전술한 상세한 설명에서, 본 개시 및 그 이점들을 특정 실시예들을 참조하여 설명했다. 그러나, 이하의 특허청구범위에서 제시된 본 개시의 범주에서 벗어나지 않고 다양한 변형 및 변경이 이루어질 수 있음은 당업자에게 명백할 것이다. 따라서, 본 상세한 설명 및 도면은 제한의 의미가 아니라, 본 개시의 예시적 예로서 간주되어야 한다. 이러한 모든 가능한 변형물들은 본 개시의 범주에 포함되는 것으로 의도된다.

Claims (14)

  1. 멀티미디어 인스턴스를 개시하기 위한 그래픽 호출을 그래픽 가상 서버로 전송하는 단계; 및
    상기 멀티미디어 인스턴스와 관련된 멀티미디어 스트림을 상기 그래픽 가상 서버로부터 수신하는 단계를 포함하며,
    상기 멀티미디어 스트림은, 상기 그래픽 가상 서버가 상기 멀티미디어 인스턴스와 연관된 부하 밸런스를 결정하고, 상기 멀티미디어 인스턴스를 처리하기 위한 그래픽 카드를 선택하고, 적어도 하나의 멀티미디어 디바이스에 제공하기 위해 상기 그래픽 카드와 연관된 다수의 포트를 활성화시켜 선택된 멀티미디어 스트림임을 특징으로 하는 멀티미디어 디바이스의 멀티미디어 콘텐츠 처리 방법.
  2. 제 1 항에 있어서, 상기 그래픽 카드는,
    그래픽 클라우드에 저장된 다수의 그래픽 카드들 중 적어도 하나임을 특징으로 하는 멀티미디어 디바이스의 멀티미디어 콘텐츠 처리 방법.
  3. 제 1 항에 있어서, 상기 그래픽 가상 서버는,
    상기 다수의 그래픽 카드들 중 다수의 멀티미디어 인스턴스 각각을 처리하기 위한 하나의 그래픽 카드를 선택하기 위해 상기 다수의 멀티미디어 인스턴스들과 연관된 프로파일을 저장하는 단계를 더 포함함을 특징으로 하는 멀티미디어 디바이스의 멀티미디어 콘텐츠 처리 방법.
  4. 제 1 항에 있어서, 상기 활성화는,
    상기 멀티미디어 스트림과 연관된 디스플레이의 설정을 정의하는데 사용되는 하나 이상의 파라미터를 활성화임을 특징으로 하는 멀티미디어 디바이스의 멀티미디어 콘텐츠 처리 방법.
  5. 제 1 항에 있어서, 상기 그래픽 가상 서버는,
    비페이징(non-paged) 메모리 및 가상 메모리 중 하나에 상기 멀티미디어 스트림을 저장하는 단계를 더 포함하며,
    상기 저장은 상기 멀티미디어 스트림과 연관된 처리 속도를 기반으로 실행됨을 특징으로 하는 멀티미디어 디바이스의 멀티미디어 콘텐츠 처리 방법.
  6. 제 1 항에 있어서, 상기 그래픽 가상 서버는,
    상기 멀티미디어 스트림을 상기 멀티미디어 디바이스로 전송하기 전에 상기 멀티미디어 스트림을 압축하는 단계를 더 포함함을 특징으로 하는 멀티미디어 디바이스의 멀티미디어 콘텐츠 처리 방법.
  7. 멀티미디어 인스턴스를 개시하기 위한 그래픽 호출을 그래픽 가상 서버로 전송하고, 상기 멀티미디어 인스턴스와 관련된 멀티미디어 스트림을 상기 그래픽 가상 서버로부터 수신하는 무선부를 포함하며,
    상기 멀티미디어 스트림은, 상기 그래픽 가상 서버가 상기 멀티미디어 인스턴스와 연관된 부하 밸런스를 결정하고, 상기 멀티미디어 인스턴스를 처리하기 위한 그래픽 카드를 선택하고, 적어도 하나의 멀티미디어 디바이스에 제공하기 위해 상기 그래픽 카드와 연관된 다수의 포트를 활성화시켜 선택된 멀티미디어 스트림임을 특징으로 하는 멀티미디어 디바이스.
  8. 제 7 항에 있어서, 상기 그래픽 카드는,
    그래픽 클라우드에 저장된 다수의 그래픽 카드들 중 적어도 하나임을 특징으로 하는 멀티미디어 디바이스.
  9. 제 7 항에 있어서, 상기 그래픽 가상 서버는,
    상기 다수의 그래픽 카드들 중 다수의 멀티미디어 인스턴스 각각을 처리하기 위한 하나의 그래픽 카드를 선택하기 위해 상기 다수의 멀티미디어 인스턴스들과 연관된 프로파일을 저장하는 저장부를 더 포함함을 특징으로 하는 멀티미디어 디바이스.
  10. 제 7 항에 있어서, 상기 활성화는,
    상기 멀티미디어 스트림과 연관된 디스플레이의 설정을 정의하는데 사용되는 하나 이상의 파라미터를 활성화임을 특징으로 하는 멀티미디어 디바이스.
  11. 제 7 항에 있어서, 상기 그래픽 가상 서버는,
    비페이징(non-paged) 메모리 및 가상 메모리 중 하나에 상기 멀티미디어 스트림을 저장하는 저장부를 더 포함하며,
    상기 저장은 상기 멀티미디어 스트림과 연관된 처리 속도를 기반으로 실행됨을 특징으로 하는 멀티미디어 디바이스.
  12. 제 7 항에 있어서, 상기 그래픽 가상 서버는,
    상기 멀티미디어 스트림을 상기 멀티미디어 디바이스로 전송하기 전에 상기 멀티미디어 스트림을 압축하는 제어부를 더포함함을 특징으로 하는 멀티미디어 디바이스.
  13. 그래픽 클라우드에서 멀티미디어 콘텐츠를 처리하는 방법으로서,
    멀티미디어 스트림을 수신하는 사용자에 의해 개시되는 멀티미디어 인스턴스를 식별하는 단계;
    상기 멀티미디어 인스턴스와 연관된 부하 밸런스를 결정하는 단계;
    복수의 그래픽 카드 중에서 상기 멀티미디어 인스턴스를 처리하기 위한 그래픽 카드를 선택하는 단계;
    상기 멀티미디어 스트림을 복수의 멀티미디어 디바이스에 제공하기 위해 상기 그래픽 카드와 연관된 복수의 포트를 활성화하는 단계; 및
    상기 멀티미디어 스트림을 상기 멀티미디어 디바이스로 전송하는 단계를 포함하며,
    상기 선택하는 단계는; 복수의 요소(factor)에 의거하여 상기 그래픽 카드를 선택하는 단계;임을 특징으로 하는 방법.
  14. 그래픽 클라우드에서 멀티미디어 콘텐츠를 처리하는 시스템으로서,
    멀티미디어 디바이스;
    통신을 확립하기 위한 통신 인터페이스;
    명령을 저장하는 메모리; 및
    프로세서를 포함하고,
    상기 프로세서는 상기 명령에 응답하여,
    멀티미디어 스트림을 수신하는 사용자에 의해 개시되는 멀티미디어 인스턴스를 식별하고;
    상기 멀티미디어 인스턴스와 연관된 부하 밸런스를 결정하고;
    복수의 그래픽 카드 중에서 상기 멀티미디어 인스턴스를 처리하기 위한 그래픽 카드를 선택하고;
    상기 멀티미디어 스트림을 복수의 멀티미디어 디바이스에 제공하기 위해 상기 그래픽 카드와 연관된 복수의 포트를 활성화하고;
    상기 멀티미디어 스트림을 상기 멀티미디어 디바이스로 전송하며,
    상기 선택은; 복수의 요소(factor)에 의거하여 상기 그래픽 카드를 선택;함을 특징으로 하는 시스템.

KR1020140006025A 2013-02-01 2014-01-17 그래픽 클라우드에서 멀티미디어 콘텐츠를 처리하는 방법 및 장치 KR102178523B1 (ko)

Priority Applications (3)

Application Number Priority Date Filing Date Title
EP14152901.6A EP2763038A3 (en) 2013-02-01 2014-01-28 Method and apparatus for processing multimedia content on a graphic cloud
CN201410043313.5A CN103970677A (zh) 2013-02-01 2014-01-29 在图形云上处理多媒体内容的方法和装置
US14/171,531 US9787746B2 (en) 2013-02-01 2014-02-03 Method and apparatus for processing multimedia content on a graphic cloud

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
IN443CH2013 IN2013CH00443A (ko) 2013-02-01 2013-02-01
IN443/CHE/2013 2013-02-01

Publications (2)

Publication Number Publication Date
KR20140099185A true KR20140099185A (ko) 2014-08-11
KR102178523B1 KR102178523B1 (ko) 2020-11-13

Family

ID=51745678

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020140006025A KR102178523B1 (ko) 2013-02-01 2014-01-17 그래픽 클라우드에서 멀티미디어 콘텐츠를 처리하는 방법 및 장치

Country Status (2)

Country Link
KR (1) KR102178523B1 (ko)
IN (1) IN2013CH00443A (ko)

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20120106778A (ko) * 2009-11-25 2012-09-26 프레임호크, 인코포레이티드 라이트웨이트 클라이언트를 이용해서 네트워크를 거쳐 가상화 컴퓨팅 서비스와 인터페이스하기 위한 방법
JP2012216058A (ja) * 2011-03-31 2012-11-08 Fujitsu Ltd 割当方法、割当装置、および割当プログラム

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20120106778A (ko) * 2009-11-25 2012-09-26 프레임호크, 인코포레이티드 라이트웨이트 클라이언트를 이용해서 네트워크를 거쳐 가상화 컴퓨팅 서비스와 인터페이스하기 위한 방법
JP2012216058A (ja) * 2011-03-31 2012-11-08 Fujitsu Ltd 割当方法、割当装置、および割当プログラム

Also Published As

Publication number Publication date
IN2013CH00443A (ko) 2015-07-31
KR102178523B1 (ko) 2020-11-13

Similar Documents

Publication Publication Date Title
KR102220267B1 (ko) 전자문서를 공유하는 방법 및 이를 위한 장치들
KR102064836B1 (ko) 모바일 장치에서의 메뉴 표시 장치 및 방법
CN110022489B (zh) 视频播放方法、装置及存储介质
TWI520043B (zh) 消息查看方法、裝置和移動終端
WO2018161534A1 (zh) 一种显示图像的方法、双屏终端和计算机可读的非易失性存储介质
US20180329598A1 (en) Method and apparatus for dynamic display box management
WO2018077041A1 (zh) 应用运行的方法及装置
KR20140111088A (ko) 문지르기 제스처를 검출하여 미리보기를 제공하는 모바일 장치 및 그 제어 방법
KR20140126140A (ko) 모바일 장치의 상태에 대응하는 변경된 숏컷 아이콘을 제공하는 모바일 장치 및 그 제어 방법
CN110083486B (zh) 与外部终端交互的方法、装置和记录介质
CN108037990B (zh) 任务信息处理方法、装置以及服务器
CN112312144B (zh) 一种直播方法、装置、设备和存储介质
CN110618806A (zh) 一种应用程序控制方法、装置、电子设备及存储介质
CN108564539B (zh) 一种显示图像的方法和装置
CN110688051B (zh) 一种录屏操作方法、装置、计算机可读存储介质及终端
US9787746B2 (en) Method and apparatus for processing multimedia content on a graphic cloud
CN110221765B (zh) 一种视频文件播放方法、装置、存储介质及终端
CN112835493A (zh) 截屏显示方法、装置和终端设备
CN108196754B (zh) 一种显示对象的方法、终端及服务器
CN109660445B (zh) 一种消息处理方法、装置及存储介质
CN111026477B (zh) 一种显示方法及电子设备
US11150913B2 (en) Method, device, and terminal for accelerating startup of application
CN111210496B (zh) 一种图片解码方法、装置以及设备
CN105320532B (zh) 显示交互界面的方法、装置及终端
KR20140089868A (ko) 하이브리드 위젯을 제공하는 모바일 장치 및 그 제어 방법

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant