KR20160102419A - 화면 콘텐츠 전송 및 디스플레이 - Google Patents

화면 콘텐츠 전송 및 디스플레이 Download PDF

Info

Publication number
KR20160102419A
KR20160102419A KR1020167016433A KR20167016433A KR20160102419A KR 20160102419 A KR20160102419 A KR 20160102419A KR 1020167016433 A KR1020167016433 A KR 1020167016433A KR 20167016433 A KR20167016433 A KR 20167016433A KR 20160102419 A KR20160102419 A KR 20160102419A
Authority
KR
South Korea
Prior art keywords
screen
web
terminal
point
display terminal
Prior art date
Application number
KR1020167016433A
Other languages
English (en)
Inventor
지준 유안
Original Assignee
알리바바 그룹 홀딩 리미티드
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 알리바바 그룹 홀딩 리미티드 filed Critical 알리바바 그룹 홀딩 리미티드
Publication of KR20160102419A publication Critical patent/KR20160102419A/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1454—Digital output to display device ; Cooperation and interconnection of the display device with other functional units involving copying of the display data of a local workstation or window to a remote workstation or window so that an actual copy of the data is displayed simultaneously on two or more displays, e.g. teledisplay
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/02—Protocols based on web technology, e.g. hypertext transfer protocol [HTTP]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/1066—Session management
    • H04L65/1083—In-session procedures
    • H04L65/1093—In-session procedures by adding participants; by removing participants
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/1066—Session management
    • H04L65/1083—In-session procedures
    • H04L65/1094—Inter-user-equipment sessions transfer or sharing
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60—Network streaming of media packets
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/10—Protocols in which an application is distributed across nodes in the network
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/131—Protocols for games, networked simulations or virtual reality
    • H04L67/38—
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/21—Server components or server architectures
    • H04N21/218—Source of audio or video content, e.g. local disk arrays
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60—Network streaming of media packets
    • H04L65/61—Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio

Abstract

투사 단말기 및 디스플레이 단말기는 웹 기반 오퍼레이팅 시스템(OS)에 의해 제공되는 포인트-투-포인트 접속 인터페이스를 이용하여 포인트-투-포인트 통신 링크를 설정한다. 투사 단말기는 웹-기반 OS에 의해 제공되는 화면 방문 인터페이스를 이용하여 화면 콘텐츠에 액세스하고, 화면 콘텐츠를 실시간으로 화면 콘텐츠 데이터로 변환하고, 화면 콘텐츠 데이터를 통신 링크를 통해 전송한다. 디스플레이 단말기는 화면 콘텐츠 데이터를 수신하며 웹-기반 OS에 의해 제공된 콘텐츠 디스플레이 제어를 이용하여 화면 콘텐츠 데이터를 화면상에 디스플레이한다. 본 기술은 웹-기반 OS를 장비한 두 디바이스가 화면 투사를 구현하고, 화면 투사 기술의 사용을 확장할 수 있게 하며, 구현이 용이하다.

Description

화면 콘텐츠 전송 및 디스플레이{TRANSMITTING AND DISPLAYING SCREEN CONTENT}
관련 출원의 상호 참조
본 출원은 2013년 12월 27일자로 "웹 기반 OS 운영 환경에 기초하여 화면 콘텐츠를 전송하고 디스플레이하기 위한 방법 및 장치(Method and Apparatus for Transmitting and Displaying Screen Content Based on web-Based OS Operating Environment)라는 명칭으로 출원한 중국 출원 제201310741237.0호의 외국 우선권을 주장하며, 이 출원의 전체 내용은 본 출원에서 참조문헌으로 인용된다.
기술 분야
본 개시는 화면 투사 기술 분야에 관한 것으로, 보다 상세하게는 웹 기반 오퍼레이팅 시스템(operating system, OS) 운영 환경에 기초하여 화면 콘텐츠를 전송하고 디스플레이하기 위한 방법에 관한 것이다. 화면 콘텐츠는 이미지나 비디오를 포함한다. 본 개시는 또한 웹 기반 OS 운영 환경에 기초하여 화면 콘텐츠를 전송하기 위한 예시적인 방법 및 웹 기반 OS 운영 환경에 기초하여 화면 콘텐츠를 디스플레이하기 위한 대응하는 예시적인 방법을 제공한다. 본 개시는 또한 웹 기반 오퍼레이팅 시스템(OS) 운영 환경에 기초하여 화면 콘텐츠를 전송 및 디스플레이하기 위한 예시적인 장치를 제공한다.
화면을 갖춘 전자 디바이스는 우리의 일상생활과 사업 환경에서 널리 사용되어 왔다. 여러 화면을 충분히 활용하기 위해, 종종 화면 콘텐츠는 공유되기도 한다. 화면 콘텐츠를 공유하기 위한 일반적인 방법은 화면 공유 기술(screen sharing technology), 화면 맵핑 기술(screen mapping technology), 및 화면 투사 기술(screen projecting technology)을 포함한다. 화면 투사 기술은 특정 방법이나 장치를 통해 하나의 디스플레이 화면에서 현재 디스플레이된 콘텐츠를 다른 하나 이상의 디스플레이 화면상에 투사하는 기술을 말한다. 화면 투사 기술은 대중적이며 종종 프로젝터 또는 스마트 단말 디바이스의 분야에서 사용되기도 한다. 화면 투사 기술은 두 개의 프로세스를 포함한다. 제 1 프로세스는 제 1 화면에 있는 화면 콘텐츠 데이터를 제 2 화면으로 전송하는 데이터 전송 프로세스이다. 제 2 프로세스는 수신한 화면 콘텐츠 데이터를 제 2 스크린에서 디스플레이하는 것이다. 두 개의 프로세스는 완전 화면 투사 프로세스를 형성한다. 본 개시에서, 명료하게 할 목적을 위해, 화면 투사는 제 1 프로세스를 화면 콘텐츠 전송이라 지칭하고 제 2 프로세스를 화면 콘텐츠 디스플레이라고 지칭하는 화면 콘텐츠 전송 및 디스플레이라고 지칭된다.
이전의 화면 투사는 화면을 공유하는 두 디바이스를 연결하는 특수한 데이터 라인을 사용하여 화면 콘텐츠 데이터를 전송하는 특수한 데이터 라인이 필요했다. 네트워크의 발달에 따라, 일반적으로 전자 디바이스는 네트워크의 노드가 되는 역량을 갖게 되었다. 그래서 네트워크를 이용하여 화면 콘텐츠를 직접 공유하는 것이 가능해졌다.
기존의 기술 하에서, 네트워크를 이용하여 화면 투사를 구현하는 방법은 주로 이동 디바이스를 통해 그 이동 디바이스의 화면 콘텐츠를 그 이동 디바이스의 동일한 로컬 영역 네트워크 내에 있는 특별한 대형 화면 디바이스의 화면에다 무선으로 투사하는 것이다. 예를 들면, (아이패드TM, 아이폰TM 아이포드TM 또는 아이맥TM 같은) 애플TM 디바이스는 그의 화면을 WiFi를 통해 애플TM TV의 화면에다 투사한다. 샤오미(Xiaomi) 이동 디바이스, iOSTM디바이스, 또는 PC는 그의 화면을 동일한 근거리 네트워크 내에서 접속되어 있는 샤오미 TV의 화면으로 투사하거나, 그의 화면을 샤오미 박스에 투사하고 그러면 샤오미 박스가 화면 콘텐츠 데이터를 샤오미 TV로 전송한다.
기존 기술의 단점은 디바이스들 사이의 접속이 특화된 소프트웨어의 지원을 필요로 하며 그래서 그러한 접속은 보편성이 부족하다는 것이다. 예를 들면, 애플TM 이동 디바이스로부터 애플TM TV로 투사하는 화면은 특정 애플TM TV로 한정되며 전용의 프로토콜을 기초로 한다. 샤오미 이동 디바이스 또는 iOSTM 이동 디바이스로부터 샤오미 박스 또는 샤오미 TV로 투사하는 화면은 전용의 샤오미 소프트웨어를 설치하여야 하며 안드로이드TM 또는 iOSTM 이동 디바이스와 샤오미 박스 사이에서 화면 투사만을 지원할 뿐이다. 그러한 화면 투사를 구현하기 위해, 다운로드하고 설치하는 특화된 애플리케이션이 필요하다. 이와 같이 특화된 애플리케이션은 종종 구매해야 하고 다운로드 받은 후에는 조정해야 한다. 그래서, 기존 기술은 사용하기 위해서는 많은 인내가 필요하다.
이와 같은 요약 내용은 아래의 상세한 설명에서 추가 설명되는 개념의 선택을 간략한 형태로 소개하려고 제공된다. 이러한 요약 내용은 청구된 주제의 모든 핵심적인 특징이나 본질적인 특징을 확인하려는 의도가 아니며 청구된 주제의 범위를 결정하는데 도움을 주기 위해서만 사용하려는 의도도 아니다. 용어 "기술"은 예를 들면 앞의 문맥에 의해 그리고 본 개시의 전체에서 용인되는 것으로서 장치(들), 시스템(들), 방법(들) 및/또는 컴퓨터 판독 가능한 명령어를 말할 수 있다.
본 개시는 기존의 화면 투사 기술의 문제를 해결하기 위해 웹 기반 오퍼레이팅 시스템(OS) 운영 환경에 기초하여 화면 콘텐츠를 전송하고 디스플레이하기 위한 예시적인 방법을 제공한다.
본 개시는 웹 기반 OS 운영 환경에 기초하여 화면 콘텐츠를 전송하고 디스플레이하기 위한 예시적인 방법을 제공하며, 이 방법은 다음과 같은 동작을 포함할 수 있다.
투사 단말기 및 디스플레이 단말기는 웹 기반 OS에 의해 제공되는 포인트-투-포인트 접속 인터페이스(point-to-point connection interface)를 이용하여 포인트-투-포인트 통신 링크를 설정한다. 투사 단말기는 웹-기반 OS에 의해 제공되는 화면 방문 인터페이스(screen visiting interface)를 이용하여 화면 콘텐츠에 액세스하고, 화면 콘텐츠를 실시간으로 화면 콘텐츠 데이터로 변환하고, 화면 콘텐츠 데이터를 통신 링크를 통해 전송한다.
디스플레이 단말기는 화면 콘텐츠 데이터를 수신하며 웹-기반 OS에 의해 제공된 콘텐츠 디스플레이 제어(content displaying control)를 이용하여 화면 콘텐츠 데이터를 화면상에 디스플레이한다.
선택사양으로, 투사 단말기와 디스플레이 단말기 사이에서 포인트-투-포인트 링크를 설정하는 단계를 실시하기 전에, 예시적인 방법은 다음과 같은 동작을 포함될 수 있다. 투사 단말기에 내장된 기존의 웹-기반 OS 운영 환경은 URL(uniform resource locator)을 통해 웹 서버를 방문하고, 웹 서버로부터 컴퓨터 판독가능한 코드 또는 논리 코드를 로딩하고, 투사 단말기의 등록 및 초기화에 관련하는 컴퓨터 실행가능한 코드를 실행한다. 디스플레이 단말기에 내장된 기존의 웹-기반 OS 운영 환경은 URL을 통해 웹 서버를 방문하고, 웹 서버로부터 컴퓨터 판독가능한 코드 또는 논리 코드를 로딩하고, 디스플레이 단말기의 등록 및 초기화에 관련하는 컴퓨터 실행가능한 코드를 실행한다.
선택사양으로, 투사 단말기 및 디스플레이 단말기는 웹 서버의 연락을 통해 이들 각자의 등록 정보를 통해 포인트-투-포인트 통신 링크를 설정한다.
선택사양으로, 웹-기반 OS 운영 환경은 웹 실시간 통신(web Real-Time Communication, WebRTC) 애플리케이션을 이용하는 하이퍼텍스트 마크업 랭귀지(HyperText Markup Language, HTML) 5 운영 환경이다.
선택사양으로, 웹-기반 OS를 이용하는 투사 단말기 및 디스플레이 단말기에 의해 제공되는 포인트-투-포인트 인터페이스를 통해 설정된 포인트-투-포인트 통신 링크는 RTCPeerConnection 인터페이스를 통해 설정된다.
선택사양으로, 웹-기반 OS에 의해 제공되고 투사 단말기에 의해 사용되는 화면 콘텐츠에 액세스하는 화면 방문 인터페이스는 WebRTC의 MediaStream 인터페이스를 통해 구현된다.
선택사양으로, 디스플레이 단말기에 의해 사용되는 콘텐츠 디스플레이 제어는 HTML 5의 비디오 제어이다.
선택사양으로, 디스플레이 단말기가 화면 콘텐츠 데이터를 수신하고 웹-기반 OS에 의해 제공되는 콘텐츠 디스플레이 제어를 이용하여 화면 콘텐츠 데이터를 화면상에 디스플레이하기 전에, 예시적인 방법은 다음과 같은 동작을 더 포함할 수 있다.
디스플레이 단말기에 내장된 웹-기반 OS 운영 환경은 화면 콘텐츠 데이터를 디스플레이하는 하나의 해상도를 선택한다. 해상도는 디스플레이 단말기의 화면 해상도, 투사 단말기와 같은 전송 단말기의 화면 해상도, 또는 자체 정의된 화면 해상도를 포함할 수 있다.
선택사양으로, 투사 단말기 및 디스플레이 단말기가 웹-기반 OS에 의해 제공되는 포인트-투-포인트 접속 인터페이스를 사용하여 포인트-투-포인트 통신 링크를 설정하는 단계에서, 통신 링크는 근거리 네트워크(local area network, LAN)에서 유선 통신 링크와, LAN에서 WiFi나 블루투스를 통해 설정되는 무선 통신 링크와, 인터넷을 통해 설정되는 원격 포인트-투-포인트 통신 링크 중 적어도 하나를 포함할 수 있다.
본 개시는 또한 웹-기반 OS 운영 환경에 기초하여 화면 콘텐츠를 전송하기 위한 예시적인 방법을 제공하며, 이 방법은 다음과 같은 동작을 포함할 수 있다.
웹-기반 OS에 의해 제공되는 포인트-투-포인트 접속 인터페이스를 통해 디스플레이 단말기와의 포인트-투-포인트 통신 링크가 설정된다. 웹-기반 OS에 의해 제공된 화면 방문 인터페이스가 사용되어 화면 콘텐츠에 액세스하고, 화면 콘텐츠를 실시간으로 화면 콘텐츠 데이터로 변환하고, 화면 콘텐츠 데이터를 통신 링크를 통해 디스플레이 단말기로 전송한다.
선택사양으로, 디스플레이 단말기와의 포인트-투-포인트 통신 링크를 설정하는 단계를 실시하기 전에, 예시적인 방법은 다음과 같은 동작을 포함할 수 있다. 애초에 내장된 웹-기반 OS 환경은 URL(uniform resource locator)을 통해 웹 서버를 방문하고, 웹 서버로부터 컴퓨터 판독가능한 코드 또는 논리 코드를 로딩하고, 투사 단말기의 초기화에 관련하는 컴퓨터 실행가능한 코드를 실행하고, 웹 서버에서 등록을 완료한다.
선택사양으로, 웹 서버에서 등록은 다음과 같은 동작을 포함할 수 있다. 초기화를 완료하는 웹-기반 OS 운영 환경을 통해, 디바이스의 등록 관련 정보가 취득되고 웹 서버에 업로딩되어 등록이 완료된다.
선택사양으로, 웹-기반 OS에 의해 제공되는 포인트-투-포인트 통신 인터페이스를 통해 디스플레이 단말기와의 포인트-투-포인트 통신 링크를 설정하는 단계는 다음과 같은 동작을 포함할 수 있다. 내장된 웹-기반 OS 환경은 새로운 RTCPeerConnection 인터페이스를 정의하고 RTCPeerConnection 인터페이스의 초기화를 완료한다. 내장된 웹-기반 OS 운영 환경은 포인트-투-포인트 접속 요청 메시지를 디스플레이 단말기로 전송한다. 디스플레이 단말기로부터 응답 메시지가 수신된 후, RTCPeerConnection 인터페이스와 관련하는 컴퓨터 실행가능한 코드가 실행되어 디스플레이 단말기와의 포인트-투-포인트 통신 링크를 설정한다.
선택사양으로, 화면 콘텐츠 데이터를 판독하고 전송하는 프로세스는 다음과 같은 동작을 포함할 수 있다. 내장된 웹-기반 OS 운영 환경은 새로운 MediaStream 인터페이스를 정의하고 초기화하며 MediaStream 인터페이스를 사용하여 현재 화면의 화면 콘텐츠 데이터를 판독한다. 내장된 웹-기반 OS 운영 환경은 WebRTC를 구동하고 현재 화면의 취득한 화면 콘텐츠 데이터를 RTCPeerConnection 인터페이스에 추가한다. RTCPeerConnection 인터페이스는 화면 콘텐츠 데이터를 포인트-투-포인트 통신 링크를 통해 디스플레이 단말기로 전송하도록 제공된다.
본 개시는 또한 웹-기반 OS 운영 환경에 기초하여 화면 콘텐츠를 디스플레이하기 위한 예시적인 방법을 제공하며, 이 방법은 다음과 같은 동작을 포함할 수 있다.
웹-기반 OS에 의해 제공되는 포인트-투-포인트 접속 인터페이스를 통해 디스플레이 단말기와의 포인트-투-포인트 통신 링크가 설정된다. 수신한 화면 콘텐츠 데이터는 웹-기반 OS에 의해 제공되는 콘텐츠 디스플레이 제어를 사용함으로써 화면상에 디스플레이된다.
선택사양으로, 투사 단말기와의 포인트-투-포인트 통신 링크를 설정하는 단계를 실시하기 전에, 예시적인 방법은 다음과 같은 동작을 포함할 수 있다. 애초에 내장된 웹-기반 OS 운영 환경은 URL(uniform resource locator)을 통해 웹 서버를 방문하고, 웹 서버로부터 컴퓨터 판독가능한 코드 또는 논리 코드를 로딩하고, 디스플레이 단말기의 초기화에 관련하는 컴퓨터 실행가능한 코드를 실행하고, 웹 서버에서 등록을 완료한다.
선택사양으로, 웹 서버에서 등록은 다음과 같은 동작을 포함할 수 있다. 초기화를 완료하는 웹-기반 OS 운영 환경을 통해, 디바이스의 등록 관련 정보가 취득되고 웹 서버에 업로딩되어 등록을 완료한다.
선택사양으로, 웹-기반 OS에 의해 제공되는 포인트-투-포인트 통신 인터페이스를 통해 투사 단말기와의 포인트-투-포인트 통신 링크를 설정하는 단계는 다음과 같은 동작을 포함할 수 있다. 내장된 웹-기반 OS 환경은 새로운 RTCPeerConnection 인터페이스를 정의하고 RTCPeerConnection 인터페이스의 초기화를 완료한다. 내장된 웹-기반 OS 운영 환경은 투사 단말기로부터 포인트-투-포인트 접속 요청 메시지를 수신하고, 응답 메시지를 투사 단말기로 돌려준 다음, RTCPeerConnection 인터페이스와 관련하는 컴퓨터 실행가능한 코드를 실행하여 투사 단말기와의 포인트-투-포인트 통신 링크를 설정한다.
선택사양으로, 웹-기반 OS 에 의해 제공된 콘텐츠 디스플레이 제어를 사용함으로써 수신된 화면 콘텐츠 데이터를 화면상에 디스플레이하는 단계는 다음과 같은 동작을 포함할 수 있다. 내장된 웹-기반 OS 운영 환경은 새로운 비디오 제어를 정의하고 초기화한다. RTCPeerConnection 인터페이스로부터 수신된 화면 콘텐츠 데이터는 비디오 제어를 통해 취득된다. 내장된 웹-기반 OS 운영 환경은 하나의 해상도를 선택한다. 해상도는 디스플레이 단말기의 화면 해상도, 투사 단말기와 같은 전송 단말기의 화면 해상도, 또는 자체 정의된 화면 해상도를 포함할 수 있다. 비디오 제어는 선택된 화면 해상도에 따라서 화면 콘텐츠 데이터를 디스플레이 단말기의 화면상에 디스플레이한다.
본 개시는 또한 웹-기반 OS 운영 환경에 기초하여 화면 콘텐츠를 전송하고 디스플레이하기 위한 예시적인 장치를 제공한다. 장치는 통신 링크 설정 유닛과, 화면 콘텐츠 데이터 변환 유닛과, 화면 콘텐츠 데이터 디스플레이 유닛을 포함할 수 있다.
통신 링크 설정 유닛은 투사 단말기 및 디스플레이 단말기 사이에서 웹-기반 OS에 의해 제공되는 포인트-투-포인트 통신 인터페이스를 통해 포인트-투-포인트 통신 링크를 설정한다.
화면 콘텐츠 데이터 변환 유닛은 투사 단말기가 웹-기반 OS에 의해 제공된 화면 방문 인터페이스를 이용하여 화면 콘텐츠에 액세스할 때, 화면 콘텐츠를 실시간으로 화면 콘텐츠 데이터로 변환하고, 화면 콘텐츠 데이터를 포인트-투-포인트 통신 링크를 통해 전송한다.
화면 콘텐츠 디스플레이 유닛은 디스플레이 단말기가 화면 콘텐츠 데이터를 수신할 때, 웹-기반 OS에 의해 제공된 콘텐츠 디스플레이 제어를 이용하여 화면 콘텐츠 데이터를 화면상에 디스플레이한다.
선택사양으로, 장치는 등록 초기화 유닛을 더 포함할 수 있다. 등록 초기화 유닛은 서버 접속 서브 유닛과 등록 초기화 서브유닛을 포함할 수 있다.
서버 접속 서브유닛은 웹-기반 OS 운영 환경을 통해 디스플레이 단말기 또는 투사 단말기와 웹 서버 사이의 접속을 각기 설정한다.
등록 초기화 서브유닛은 투사 단말기 또는 디스플레이 단말기가 이들 각자의 내장된 웹-기반 OS를 이용함으로써 URL을 통해 웹 서버를 방문할 때, 웹 서버로부터 투사 단말기 또는 디스플레이 단말기의 등록 및 초기화에 필요한 컴퓨터 판독가능한 코드 또는 논리 코드를 로딩하고, 등록 및 초기화에 관련하는 컴퓨터 실행가능한 코드를 실행한다.
선택사양으로, 장치는 디스플레이 단말기에서 내장된 웹-기반 OS 운영 환경 하에서 화면 콘텐츠 데이터를 디스플레이하는 하나의 해상도를 선택하는 화면 해상도 선택 유닛을 더 포함할 수 있다. 해상도는 디스플레이 단말기의 화면 해상도, 투사 단말기와 같은 전송 단말기의 화면 해상도, 또는 자체 정의된 화면 해상도를 포함할 수 있다.
본 기술은 적어도 다음과 같은 기술적인 장점을 갖고 있다. 본 기술은 보편적으로 적용될 수 있다. 본 기술은 어떠한 특화된 지원 소프트웨어에도 의존하지 않고 일반적으로 내장된 웹-기반 OS 운영 환경에 기초하므로, 본 기술은 보편성을 가지며 각종 유형의 전자 디바이스들 사이에서 화면 투사를 구현할 수 있다. 또한, 본 기술은 애플리케이션 문턱치를 상당히 낮추어준다. 본 기술은 특화된 지원 소프트웨어를 설치하지 않고 각종 유형의 전자 디바이스들 사이에서 화면 투사를 구현하고, 화면 투사 디바이스의 문턱치를 상당히 낮추어 주어 대부분의 디바이스가 본 기술을 이용하여 화면 투사를 구현할 수 있다. 본 기술은 어떠한 특화된 지원 소프트웨어도 필요하지 않으므로, 본 기술은 또한 범용 사용자에게 문턱치를 상당히 낮추어 주어 많은 사용자가 본 기술을 사용할 수 있다.
더욱이, 본 기술 아래에서, 화면 투사를 위한 디바이스는 LAN 또는 인터넷에서 유선 또는 무선 접속을 통해 접속될 수 있으며, 그럼으로써 화면 투사의 투사 범위 및 화면 투사 기술의 사용 범위를 증가시킬 수 있다. 본 개시는 특별한 투사 디바이스를 구매하거나 특화된 소프트웨어를 설치할 필요가 없으며, 그래서 구현 비용이 또한 낮다.
도 1은 본 개시의 예시적인 제 1 실시예에 따라서 웹 기반 OS 운영 환경에 기초하여 화면 콘텐츠를 전송하고 디스플레이하기 위한 예시적인 시스템의 다이어그램이다.
도 2는 본 개시의 예시적인 제 1 실시예에 따라서 웹 기반 OS 운영 환경에 기초하여 화면 콘텐츠를 전송하고 디스플레이하기 위한 예시적인 방법의 플로우차트이다.
도 3은 본 개시의 예시적인 제 2 실시예에 따라서 투사 단말기에서 화면 콘텐츠를 전송하기 위한 예시적인 방법의 플로우차트이다.
도 4는 본 개시의 예시적인 제 3 실시예에 따라서 디스플레이 단말기에서 화면 콘텐츠를 디스플레이하기 위한 예시적인 방법의 플로우차트이다.
도 5는 본 개시의 예시적인 제 4 실시예에 따라서 웹 기반 OS 운영 환경에 기초하여 화면 콘텐츠를 전송 및 디스플레이하기 위한 예시적인 장치의 다이어그램이다.
다음의 설명은 본 개시를 이해하는데 도움을 주는 많은 특정 세부사항을 제공한다. 그러나 본 개시는 본 명세서에서 설명된 바와 같은 방법과 다른 많은 방법으로 구현될 수 있다. 본 기술에서 통상의 지식을 가진 자라면 본 개시를 위반하지 않고 유사한 대안 예를 만들 수 있다. 그러므로 본 개시는 본 명세서의 설명으로 한정되지 않는다.
도 1은 본 개시의 예시적인 제 1 실시예에 따라서 웹 기반 OS 운영 환경에 기초하여 화면 콘텐츠를 전송하고 디스플레이하기 위한 예시적인 시스템의 다이어그램이다.
본 개시는 웹 기반 OS 운영 환경에 기초하여 화면 콘텐츠를 전송하고 디스플레이하기 위한 예시적인 방법을 제공하며, 이 방법은 다음의 동작을 포함할 수 있다.
투사 단말기(102) 및 디스플레이 단말기(104)는 웹-기반 OS(106)에 의해 제공된 포인트-투-포인트 접속을 이용하여 웹 서버(108)의 연락을 통해 포인트-투-포인트 통신 링크를 설정한다. 투사 단말기(102)는 웹-기반 OS 운영 환경(106)에 의해 제공되는 화면 방문 인터페이스를 사용하여 화면 콘텐츠에 액세스하고, 화면 콘텐츠 데이터를 통신 링크를 통해 디스플레이 단말기(104)에 전송한다. 디스플레이 단말기(104)는 화면 콘텐츠 데이터를 수신하고, 웹-기반 OS 운영 환경(106)에 의해 제공되는 콘텐츠 디스플레이 제어를 사용하여 화면 해상도를 선택하고, 화면 콘텐츠 데이터를 디스플레이 단말기(104)의 화면상에 디스플레이한다.
웹 서버(108)는 인터넷상에서 특정 유형의 컴퓨터에 상주하는 컴퓨터 프로그램을 포함한다는 것을 알아야 한다. 프로그램은 요청을 전송하는 브라우저에게 문서를 제공하고, 웹 브라우저(클라이언트)에게 WWW, 이메일, 및 FTP와 같은 인터넷 서비스를 제공할 수 있다. 웹 서버는 인터넷상의 다른 컴퓨터에서 구동하는 웹 브라우저(클라이언트)가 요청을 전송할 때 웹 서버가 응답하는 수동적 프로그램이다. 웹 브라우저(클라이언트)가 웹 서버(108)에 접속하고 파일을 요청할 때, 웹 서버(108)는 그 요청을 처리하고 웹 브라우저(클라이언트)에게 파일을 보는 방법을 알려주는 정보(즉, 파일 타입)를 첨부한 파일을 웹 브라우저(클라이언트)에게 되돌려준다.
또한, 투사 단말기(102) 및 디스플레이 단말기(104)는 웹 서버(108)와의 접속을 설정하기 위해 전술한 웹 브라우저(클라이언트)를 갖고 있다. 이러한 예시적인 실시예에서, 웹 브라우저(클라이언트)는 투사 단말기(102) 및 디스플레이 단말기(104)에 내장된 웹-기반 OS 운영 환경(106)이다. 웹-기반 OS 운영 환경(106)은 웹에서 컴퓨터 실행가능한 코드를 운반하고 실행하는 것을 기초로 하는 오퍼레이팅 시스템이다. 웹-기반 OS는 각종 구현 예를 갖는다. 하나의 실현 가능한 기술 계획은 HTML5 기술에 기초하여 개발되며 그러한 웹-기반 OS 운영 환경은 HTML 5 특징을 지원하는데, 특히 WebRTC 기술과 같은 실시간 음성 또는 비디오 통신을 위해 웹 브라우저를 지원하는 HTML 5의 기술을 지원한다.
도 2는 본 개시의 예시적인 제 2 실시예에 따라서 웹-기반 OS 운영 환경에 기초하여 화면 콘텐츠를 전송하고 디스플레이하기 위한 예시적인 방법의 플로우차트이다.
(202)에서, 투사 단말기 및 디스플레이 단말기는 내장된 기존의 웹-기반 OS 운영 환경을 통해 웹 서버와의 접속을 설정하고, 웹 서버를 방문하여 초기화에 필요한 컴퓨터 실행가능한 코드(코드들)을 취득하고, 초기화를 위해 그 코드를 실행한다.
웹 서버와 웹 브라우저(클라이언트) 사이에서 정보 통신은 하이퍼텍스트 전송 프로토콜(Hypertext transfer protocol, HTTP)을 통해 처리된다는 것을 알아야 한다. 웹 서버에 액세스하여 정보를 취득하기 위해, 웹 브라우저(클라이언트)는 웹 서버와의 HTTP 접속을 설정한다. 이러한 예시적인 실시예에서, 투사 단말기 또는 디스플레이 단말기에 내장된 웹-기반 OS 운영 환경과 웹 서버 사이의 HTTP 접속의 설정은 다음과 같은 동작을 포함할 수 있다.
(1) 투사 단말기 및 디스플레이 단말기는 이들 각자의 액세스 라우터와의 물리적 접속을, 이를테면 다이얼링을 통해 설정한다. 물리적 접속은 케이블 커넥터와 같은 유선 접속 또는 WiFi나 블루투스와 같은 무선 접속을 포함할 수 있다.
(2) 투사 단말기 및 디스플레이 단말기는 내장된 기존의 웹-기반 OS 운영 환경을 통해 이들 각자의 IP 어드레스를 취득한다.
(3) 투사 단말기 및 디스플레이 단말기는 이들 각자의 내장된 기존의 웹-기반 OS 운영 환경을 통해 라우터와의 데이터 링크를 설정한다.
(4) 투사 단말기 및 디스플레이 단말기는 내장된 기존의 웹-기반 OS 운영 환경을 통해 웹 서버의 IP 어드레스를 취득한다.
(5) 투사 단말기 및 디스플레이 단말기는 이들 각자의 내장된 기존의 웹-기반 OS 운영 환경을 통해 웹 서버와의 TCP 접속을 설정한다.
(6) 투사 단말기 및 디스플레이 단말기는 이들 각자의 내장된 기존의 웹-기반 OS 운영 환경을 통해 웹 서버와의 HTTP 접속을 설정한다. 이러한 단계가 완료된 후, 투사 단말기 및 디스플레이 단말기에 내장된 기존의 웹-기반 OS 운영 환경은 웹 서버에 액세스하여 웹 서버와 정보를 교환할 수 있다.
투사 단말기 또는 디스플레이 단말기와 웹 서버 사이의 접속이 설정된 후, 투사 단말기 또는 디스플레이 단말기에 내장된 기존의 웹-기반 OS 운영 환경은 웹 서버를 방문하고, 웹 서버로부터 초기화에 필요한 컴퓨터 판독가능한 코드를 로딩하고, 초기화를 위해 컴퓨터 실행가능한 코드를 실행하여 초기화를 완료하는데, 이는 다음의 동작을 포함할 수 있다.
투사 단말기 및 디스플레이 단말기는 액세스 요청 메시지를 웹 서버로 전송한다. 웹 서버는 액세스 요청 메시지를 수신하고 액세스에 동의한다는 메시지를 반환한다. 투사 단말기 및 디스플레이 단말기가 액세스에 동의한다는 메시지를 수신한 후, 투사 단말기 및 디스플레이 단말기에 내장된 기존의 웹-기반 OS 운영 환경은 URL을 통해 웹 서버에 액세스하고, 웹 서버로부터 초기화에 필요한 컴퓨터 판독가능한 코드 또는 논리 코드를 로딩한다. 웹-기반 OS 운영 환경이 초기화에 필요한 컴퓨터 판독가능한 코드를 로딩한 후, 초기화를 위해 컴퓨터 실행가능한 코드를 실행하고 투사 단말기 및 디스플레이 단말기 각각의 초기화를 끝낸다. 초기화 후, 투사 단말기는 화면 투사를 구현하는 완전한 웹-기반 OS 운영 환경을 갖고 디스플레이 단말기 또한 수신한 화면 콘텐츠 데이터를 화면상에 디스플레이하는 완전한 웹-기반 OS 운영 환경을 갖게 된다.
투사 단말기 및 디스플레이 단말기에서 내장된 기존의 웹-기반 OS 운영 환경은 디바이스마다 상이할 수 있다는 것을 알아야 한다. 일부 투사 단말기 또는 디바이스는 완전한 기존의 웹-기반 OS 운영 환경을 이미 내장하고 있을 수 있으며 화면 투사를 바로 구현할 수 있다. 대안으로, 일부 디스플레이 단말기 또는 디바이스는 완전한 기존의 웹-기반 OS 운영 환경을 이미 내장하고 있을 수 있으며 화면 콘텐츠 데이터를 수신할 때 화면 콘텐츠 데이터를 바로 스크린상에 디스플레이할 수 있다.
그러나 일부 디바이스는 웹 서버에 액세스함으로써 취득될 수 있는, 단순히 기본 네트워크 접속 기능을 갖되 약간 복잡한 기능을 갖지 않는 기존의 웹-기반 OS 운영 환경을 갖고 있을 수 있다. 전술한 설명은 전술한 투사 단말기 및 디스플레이 단말기가 기존의 웹-기반 OS 운영 환경만을 갖고 있다고 추정한 것이다. 전술한 초기화는 기존의 웹-기반 OS 운영 환경에 기초하여 완전한 웹-기반 OS 운영 환경을 갖게 하는 프로세스이다. 이러한 예시적인 실시예에서, 웹-기반 OS 운영 환경은 HTML5 운영 환경이다. 이와 같은 운영 환경은 WebRTC 아키텍처 컴포넌트를 지원해야 한다. WebRTC는 웹 실시간 통신(web Real-Time Communication)의 머리글자이며, 또는 실시간 웹 페이지 통신이라 호칭될 수 있다. WebRTC는 웹 브라우저들 사이에서 실시간 음성 또는 비디오 통신을 지원한다.
(204)에서, 투사 단말기 및 디스플레이 단말기는 각기 이들의 내장된 웹-기반 OS 운영 환경을 통해 웹 서버에 등록 정보를 제출한다.
투사 단말기 및 디스플레이 단말기가 완전한 HTML 5 환경을 가진 후, 투사 단말기 및 디스플레이 단말기는 더 많은 기능을 달성할 수 있다. 등록의 목적은 웹 서버의 연락을 통해 투사 단말기와 디스플레이 단말기 사이에서 통신 링크를 설정하려는 것이다. 등록 프로세스의 예는 다음과 같다.
제 1 단계에서, 투사 단말기 및 디스플레이 단말기는 각기 자체 디바이스 정보를 취득한다. 디바이스 정보는 IP 어드레스, 디바이스 식별, 및 디바이스의 화면 해상도를 포함할 수 있다.
제 2 단계에서, 투사 단말기 및 디스플레이 단말기는 각자의 내장된 웹-기반 OS 운영 환경을 통해 각자의 디바이스 정보를 웹 서버로 전송하여 등록을 완료한다.
(206)에서, 투사 단말기는 내장된 웹-기반 OS 운영 환경에 의해 제공되는 RTCPeerConnection 인터페이스 관련 코드를 실시하고 디스플레이 단말기의 정보에 필요한 코드를 구성한다.
RTCPeerConnection 인터페이스는 WebRTC 아키텍처 컴포넌트에 의해 제공되는 제 3자 개발자를 위한 표준의 애플리케이션 프로그래밍 인터페이스(standard application programming interface, API)이다. API는 사용자가 구동하는 두 브라우저들 사이에서 직접적인 통신 관계를 설정하게 해준다.
투사 단말기가 내장된 웹-기반 OS 운영 환경을 이용하여 RTCPeerConnection 인터페이스 관련 코드를 실행하고 디스플레이 단말기의 정보에 필요한 코드를 구성하는 예시적인 구현 프로세스는 다음과 같을 수 있다.
Figure pct00001
RTCPeerConnection 인터페이스 관련 코드 및 디스플레이 단말기와 관련한 정보의 구성을 위한 코드는 투사 단말기와 디스플레이 단말기 사이의 포인트-투-포인트 통신 링크를 설정하기 위한 방법에 대응하는 코드를 말한다는 것을 알아야 한다. 또한, 여기서 설명된 코드와 유사한 코드 또는 대안의 코드는 동일한 기능(즉, 투사 단말기와 디스플레이 단말기 사이에서 포인트-투-포인트 통신 링크를 설정하는 기능)을 구현하기 위해 사용될 수 있다. 본 개시는 어떠한 제한도 부과하지 않는다.
또한, RTCPeerConnection 객체는 두 개의 브라우저 사이에서 직접적인 통신을 가능하게 해준다는 것을 알아야 한다. 통신은 신호 경로를 통해 조화된다. 동시에, 이러한 접속은 또한 음성 및 비디오 데이터를 전달하는데도 사용될 수 있다. 실제 응용에 있어서, RTCPeerConnection 인터페이스가 화면 콘텐츠 데이터를 전송하는 포인트-투-포인트 통신 링크를 설정하기 위해 사용될 때 네트워크 대역폭의 요건은 비교적 높다. 예를 들면, 투사 단말기 및 디스플레이 단말기는 동일한 LAN에 있을 수 있다. 투사 단말기 및 디스플레이 단말기는 모두 유선 접속 또는 WiFi 접속을 통해 동일한 라우터에 접속한다. 또한, 화면 투사 이미지 품질 및 실시간 효율의 최대 한도에 이르기 위해, 클라우드 OS 플랫폼을 구현하는 것이 최선의 결과를 가져올 수 있다. 화면 투사의 이미지 품질 및 실시간 효율을 보장하는 것에 기초하여, 본 기술은 또한 다른 접속을 사용할 수도 있다. 본 개시는 어떠한 제한도 부과하지 않는다.
(208)에서, 디스플레이 단말기는 내장된 웹-기반 OS 운영 환경에 의해 제공된 RTCPeerConnection 인터페이스 관련 코드를 실시하고 투사 단말기의 정보에 필요한 코드를 구성한다.
단계(206)에 대응하여, 디스플레이 단말기가 내장된 웹-기반 OS 운영 환경을 이용하여 RTCPeerConnection 인터페이스 관련 코드를 실행하고 투사 단말기의 정보에 필요한 코드를 구성하는 예시적인 구현 프로세스는 다음과 같을 수 있다.
Figure pct00002
RTCPeerConnection 인터페이스 관련 코드 및 수신 단말기와 관련된 정보의 구성을 위한 코드는 투사 단말기와 디스플레이 단말기 사이에서 포인트-투-포인트 통신 링크를 설정하기 위한 방법에 대응하는 코드를 말한다는 것을 알아야 한다. 또한, 여기서 설명된 코드와 유사한 코드 또는 대안의 코드는 동일한 기능(즉, 투사 단말기와 디스플레이 단말기 사이에서 포인트-투-포인트 통신 링크를 설정하는 기능)을 구현하기 위해 사용될 수 있다. 본 개시는 어떠한 제한도 부과하지 않는다.
전술한 단계(206 및 208)의 실시 이후, 투사 단말기와 디스플레이 단말기 사이에서 포인트-투-포인트 접속 링크의 설정이 완료된다.
(210)에서, 투사 단말기는 웹 기반 OS에 의해 제공되는 MediaStream 방문 인터페이스(MediaStream visiting interface)를 사용하여 투사 단말기의 화면에 액세스하고, 취득한 화면 콘텐츠 데이터를 전술한 단계를 통해 설정된 포인트-투-포인트 통신 링크를 통해 디스플레이 단말기로 전송한다. 예시적인 프로세스는 다음과 같다.
(1) 투사 단말기는 내장된 웹 기반 OS에 의해 제공되는 MediaStream 방문 인터페이스를 사용하여 투사 단말기의 현재 화면 콘텐츠 데이터를 검색(retrieve)한다.
투사 단말기에서 현재 화면 콘텐츠 데이터를 검색하는 투사 단말기의 예시적인 프로세스는 다음과 같다.
Figure pct00003
MediaStream 인터페이스는 투사 단말기에서 현재 화면 콘텐츠 데이터를 검색한 후, 화면 콘텐츠 데이터를 단계(206 및 208)에서 설정된 포인트-투-포인트 통신 링크를 통해 디스플레이 단말기로 전송한다.
MediaStream 인터페이스는 데이터 스트림을 원격 노드로 전송하거나 원격 노드로부터 데이터 스트림을 수신하기 위해 사용된다는 것을 알아야 한다. 또한, MediaStream은 화면 콘텐츠 데이터를 검색하기 위한 예시적인 방법으로서 사용된다. 화면 콘텐츠 데이터를 취득하는 몇몇 다른 인터페이스 또는 방법이 사용될 수 있다. 본 개시는 어떠한 제한도 부과하지 않는다.
(2) 화면 콘텐츠 데이터는 HTML5에 의해 지원되는 오디오 및 비디오 스트림으로 변환된다. 이러한 예시적인 실시예에서, 화면 콘텐츠 데이터는 내장된 웹 기반 OS 운영 환경에 의해 지원되는 오디오 및 비디오 스트림으로 변환된다.
하이퍼텍스트 마크업 랭귀지(Hypertext Markup Language, HTML) 5는 OGG 포맷, WEBM 포맷, 및 MP4 포맷을 포함하지만 이것으로 제한되지 않는 포맷의 오디오 및 비디오 스트림을 지원한다는 것을 알아야 한다. 만일 화면 이미지 데이터가 오디오 신호이면, 이 데이터는 OGG 포맷으로 변환될 수 있다. 만일 화면 콘텐츠 데이터가 비디오 신호이면, 이 데이터는 WEBM 또는 MP4 포맷으로 변환될 수 있다. IE™ 브라우저와 같은 일부 브라우저가 WEBM 포맷을 지원하지 않는데 반해 MP4 포맷은 오디오 및 비디오 신호를 모두 지원하므로, 일부 예에서 MP4 포맷은 최선의 선택일 수 있다.
파이어폭스(Firefox), 인터넷 익스플로어(Internet Explorer, IE), 구글(Google) 브라우저, 맥스톤(Maxthon) 브라우저, 브라우저(360), 및 텐센트(Tencent) 브라우저를 비롯한 현재의 주요 브라우저는 모두 HTML5 표준을 지원하며 그래서 HTML5에 의해 지원되는 오디오 및 비디오 스트림의 디스플레이를 지원한다는 것을 또한 알아야 한다.
(3) MediaStream 인터페이스는 단계(208)에서 설명된 RTCPeerConnection 인터페이스에 의해 호출된다. 즉, MediaStream 인터페이스는 화면 콘텐츠 데이터로부터 변환된 오디오 및 비디오 스트림을 취득하며, 이후 스트림은 RTCPeerConnection 인터페이스를 통해 디스플레이 단말기로 전송된다.
(212)에서, 디스플레이 단말기가 투사 단말기로부터 전송된 화면 콘텐츠 데이터를 수신한 후, 디스플레이 단말기는 디스플레이 단말기에 내장된 웹 기반 OS 운영 환경을 통해 적절한 화면 해상도를 선택한다.
디스플레이 단말기가 투사 단말기로부터 RTCPeerConnection 인터페이스를 통해 화면 콘텐츠 데이터를 수신한 후, 디스플레이 단말기에 내장된 웹 기반 OS 운영 환경은 디스플레이 단말기에서 사용될 화면 해상도를 선택한다. 해상도는 디스플레이 단말기의 화면 해상도, 투사 단말기와 같은 전송 단말기의 화면 해상도, 또는 자체 정의된 화면 해상도를 포함할 수 있다. 해상도가 선택된 후, 다음 동작이 실시된다.
(214)에서, 디스플레이 단말기는 웹 기반 OS에 의해 제공된 비디오 제어를 사용하여 화면 콘텐츠 데이터를 디스플레이 단말기의 현재 화면상에 디스플레이한다.
디스플레이 단말기는 웹 기반 OS에 의해 제공된 HTML5 비디오 제어를 사용하여 오디오 및 비디오 스트림을 화면상에 디스플레이한다. 예시적인 코드 실행 프로세스는 다음과 같다.
Figure pct00004
비디오 제어는 수신한 화면 콘텐츠 데이터를 본 개시의 현재 화면상에 디스플레이하기 위한 예시적인 방법이라는 것을 알아야 한다. 화면 콘텐츠 데이터를 디스플레이하는 다른 제어 또는 방법이 사용될 수 있다. 본 개시는 어떠한 제한도 부과하지 않는다.
예시적인 실시예에서 사용되는 특정 코드 및 환경은 이러한 특정 코드 및 환경이 두 브라우저 사이에서 교신을 통해 화면 콘텐츠 데이터의 전송 및 디스플레이를 구현하는 한 기술의 발달에 따라서 변할 수 있다.
본 개시는 또한 본 개시의 예시적인 제 2실시예에서 웹 기반 OS 운영 환경에 기초하여 화면 콘텐츠 데이터를 전송하기 위한 예시적인 방법을 제공한다.
도 3은 본 개시의 예시적인 제 2 실시예에 따라서 투사 단말기에서 화면 콘텐츠를 전송하기 위한 예시적인 방법의 플로우차트이다.
(302)에서, 투사 단말기는 투사 단말기의 내장된 기존의 웹 기반 OS 운영 환경을 통해 웹 서버와의 접속을 설정한다.
웹 서버는 인터넷상의 임의의 유형의 컴퓨터상에 상주하는 컴퓨터 프로그램을 포함한다는 것을 알아야 한다. 프로그램은 요청을 전송한 브라우저에 문서를 제공하고, 웹 브라우저(클라이언트)에 WWW, 이메일, FTP와 같은 각종 인터넷 서비스를 제공할 수 있다. 웹 서버는 인터넷상의 다른 컴퓨터 상에서 구동하는 웹 브라우저(클라이언트)가 요청을 전송할 때 웹 서버가 응답하는 수동적 프로그램이다. 웹 브라우저(클라이언트)가 웹 서버에 접속하고 파일을 요청할 때, 웹 서버(108)는 그 요청을 처리하고 웹 브라우저(클라이언트)에게 파일을 어떻게 보는지를 알려주는 첨부 정보(즉, 파일 타입)와 함께 파일을 웹 브라우저(클라이언트)로 되돌려준다.
또한, 투사 단말기 및 디스플레이 단말기는 웹 서버와의 접속을 설정하기 위해 전술한 웹 브라우저(클라이언트)를 갖고 있다. 이러한 예시적인 실시예에서, 웹 브라우저(클라이언트)는 투사 단말기 및 디스플레이 단말기에 내장된 웹-기반 OS 운영 환경이다. 웹-기반 OS 운영 환경은 웹에서 컴퓨터 실행가능한 코드를 운반하고 실행하는 것을 기초로 하는 오퍼레이팅 시스템이다. 웹-기반 OS는 다양한 구현 예를 갖는다. 하나의 실현 가능한 기술 계획은 HTML5 기술을 기반으로 개발되며 그러한 웹-기반 OS 운영 환경은 HTML5 특징을 지원하는데, 특히 WebRTC 기술과 같은 실시간 음성 또는 비디오 통신을 위한 웹 브라우저를 지원하는 HTML5의 기술을 지원한다.
더욱이, 웹 서버와 웹 브라우저(클라이언트) 사이의 정보 통신은 HTTP를 통해 수행된다. 웹 서버에 액세스하여 정보를 취득하기 위해, 웹 브라우저(클라이언트)는 웹 서버와의 HTTP 접속을 설정하여야 한다. 이러한 예시적인 실시예에서, 투사 단말기에 내장된 웹-기반 OS 운영 환경과 웹 서버 사이에서 HTTP 접속의 설정은 아래와 같은 동작을 포함할 수 있다.
(1) 투사 단말기는 액세스 라우터와의 물리적 접속을 설정하는데, 이는 다이얼링을 통해 설정될 수 있다. 물리적 접속은 케이블 접속과 같은 유선 접속 또는 WiFi나 블루투스와 같은 무선 접속을 포함될 수 있다.
(2) 투사 단말기는 내장된 기존의 웹-기반 OS 운영 환경을 통해 투사 단말기의 IP 어드레스를 취득한다.
(3) 투사 단말기는 투사 단말기의 내장된 기존의 웹-기반 OS 운영 환경을 통해 라우터와의 데이터 링크를 설정한다.
(4) 투사 단말기는 내장된 기존의 웹-기반 OS 운영 환경을 통해 웹 브라우저의 IP 어드레스를 취득한다.
(5) 투사 단말기는 내장된 기존의 웹-기반 OS 운영 환경을 통해 웹 서버와의 TCP 접속을 설정한다.
(6) 투사 단말기는 내장된 기존의 웹-기반 OS 운영 환경을 통해 웹 서버와의 HTTP 접속을 설정한다. 이러한 단계가 완료된 후, 투사 단말기에 내장된 기존의 웹-기반 OS 운영 환경은 웹 서버에 액세스하여 웹 서버와 정보를 교환할 수 있다.
(304)에서, 투사 단말기는 내장된 기존의 웹-기반 OS 운영 환경을 통해 웹 서버에 액세스하고, 웹 서버로부터 초기화에 필요한 컴퓨터 실행가능한 코드를 로딩하고, 초기화를 위해 컴퓨터 실행가능한 코드를 실행한다.
투사 단말기에 내장된 기존의 웹-기반 OS 운영 환경은 디바이스마다 상이할 수 있다. 일부 투사 단말기 또는 디바이스는 완전한 기존의 웹-기반 OS 운영 환경을 이미 내장하고 있을 수 있고 화면 투사를 직접 실시할 수 있다. 그러나 일부 디바이스는 웹 서버에 액세스하여 취득될 수 있는 기본적인 네트워크 접속 기능을 갖지만 약간 복잡한 기능을 갖지 않는 단순한 기존의 웹-기반 OS 운영 환경을 갖고 있을 수 있다. 전술한 설명은 투사 단말기가 기존의 웹-기반 OS 운영 환경만을 갖는다고 가정한다.
먼저, 투사 단말기는 액세스 요청 메시지를 웹 서버에 전송한다. 웹 서버는 액세스 요청 메시지를 수신하고 투사 단말기에 액세스하는 것을 동의한다는 메시지를 반환한다. 투사 단말기가 액세스에 동의한다는 메시지를 수신한 후, 투사 단말기는 투사 단말기에 내장된 기존의 웹-기반 OS 운영 환경을 이용함으로써 URL을 통해 웹 서버에 액세스하고 웹 서버로부터 초기화에 필요한 컴퓨터 판독가능한 코드 또는 논리 코드를 로딩한다. 투사 단말기는 초기화에 필요한 컴퓨터 판독가능한 코드를 로딩한 후, 초기화를 위해 컴퓨터 실행가능한 코드를 실행하고 투사 단말기의 초기화를 완료한다. 초기화 후, 투사 단말기는 화면 투사를 실시하는 완전한 웹-기반 OS 운영 환경을 갖는다.
투사 단말기 및 디스플레이 단말기는 액세스 요청 메시지를 웹 서버로 전송한다. 웹 서버는 액세스 요청 메시지를 수신하고 액세스에 동의한다는 메시지를 반환한다. 투사 단말기 및 디스플레이 단말기가 액세스에 동의한다는 메시지를 수신한 후, 투사 단말기 및 디스플레이 단말기에 내장된 기존의 웹-기반 OS 운영 환경은 URL을 통해 URL을 통해 웹 서버에 액세스하고, 웹 서버로부터 초기화에 필요한 컴퓨터 판독가능한 코드 또는 논리 코드를 로딩한다. 웹-기반 OS 운영 환경은 초기화에 필요한 컴퓨터 판독가능한 코드를 로딩한 후, 초기화를 위해 컴퓨터 실행가능한 코드를 실행하고 투사 단말기 및 디스플레이 단말기의 초기화를 각기 완료한다. 초기화 후, 투사 단말기는 화면 투사를 실시하는 완전한 웹-기반 OS 운영 환경을 갖고 디스플레이 단말기 또한 수신한 화면 콘텐츠 데이터를 화면상에 디스플레이하는 완전한 웹-기반 OS 운영 환경을 갖게 된다.
(306)에서, 투사 단말기는 내장된 웹-기반 OS 운영 환경을 통해 등록 정보를 웹 서버에 제출한다.
투사 단말기가 완전한 HTML5 환경을 갖게 된 후, 투사 단말기는 더 많은 기능을 달성할 수 있다. 등록의 목적은 웹 서버의 연락을 통해 투사 단말기 및 디스플레이 단말기 사이에서 통신 링크를 설정하려는 것이다. 예시적인 등록 프로세스는 다음과 같다.
제 1 단계에서, 투사 단말기는 투사 단말기의 디바이스 정보를 취득한다. 디바이스 정보는 IP 어드레스, 디바이스 식별, 및 디바이스의 스크린 해상도를 포함할 수 있다.
제 2 단계에서, 투사 단말기는 투사 단말기의 디바이스 정보를 내장된 웹-기반 OS 운영 환경을 통해 웹 서버로 전송하여 등록을 완료한다.
(308)에서, 투사 단말기는 웹-기반 OS에 의해 제공된 포인트-투-포인트 링크 인터페이스를 통해 디스플레이 단말기와 접속한다.
예를 들면, 이 단계에서 기술되는 포인트-투-포인트 링크 인터페이스는 RTCPeerConnection 인터페이스일 수 있다. RTCPeerConnection 인터페이스는 WebRTC 아키텍처 컴포넌트에 의해 제공된 제 3 자 개발자를 위한 표준 API이다. API는 사용자가 구동 중인 두 브라우저들 사이의 직접적인 통신 관계를 설정하게 해준다.
투사 단말기가 내장된 웹-기반 OS 운영 환경을 이용하여 RTCPeerConnection 인터페이스 관련 코드를 실행하고 디스플레이 단말기의 정보를 위한 코드를 구성하는 예시적인 구현 프로세스는 아래와 같을 수 있다.
Figure pct00005
RTCPeerConnection 인터페이스 관련 코드 및 디스플레이 단말기와 관련된 정보의 구성을 위한 코드는 투사 단말기와 디스플레이 단말기 사이에서 포인트-투-포인트 통신 링크를 설정하기 위한 방법에 대응하는 코드를 말한다는 것을 알아야 한다. 또한, 여기서 설명된 코드와 유사한 코드 또는 대안의 코드는 동일한 기능(즉, 투사 단말기와 디스플레이 단말기 사이에서 포인트-투-포인트 통신 링크를 설정하는 기능)을 구현하기 위해 사용될 수 있다. 본 개시는 어떠한 제한도 부과하지 않는다.
또한, RTCPeerConnection 객체는 두 개의 브라우저 사이에서 직접적인 통신을 가능하게 해준다는 것을 알아야 한다. 통신은 신호 경로를 통해 조화된다. 동시에, 이러한 접속은 또한 음성 및 비디오 데이터를 전달하는데도 사용될 수 있다. 실제 응용에 있어서, RTCPeerConnection 인터페이스가 포인트-투-포인트 통신 링크를 설정하여 화면 콘텐츠 데이터를 전송하기 위해 사용될 때 네트워크 대역폭의 요건은 비교적 높다. 예를 들면, 투사 단말기 및 디스플레이 단말기는 동일한 LAN에 있을 수 있다. 투사 단말기 및 디스플레이 단말기는 모두 유선 접속 또는 WiFi 접속을 통해 동일한 라우터에 접속한다. 또한, 화면 투사 이미지 품질 및 실시간 효율의 최대 한도에 이르기 위해, 클라우드 OS 플랫폼을 구현하는 것이 최선의 결과를 가져올 수 있다. 화면 투사의 이미지 품질 및 실시간 효율을 보장하는 것에 기초하여, 본 기술은 또한 다른 접속을 사용할 수도 있다. 본 개시는 어떠한 제한도 부과하지 않는다.
(310)에서, 투사 단말기는 웹-기반 OS에 의해 제공되는 MediaStream 방문 인터페이스를 사용하여 화면 콘텐츠 데이터를 검색하고 화면 콘텐츠 데이터를 포인트-투-포인트 통신 링크를 통해 디스플레이 단말기로 전송한다.
(1) 투사 단말기는 내장된 웹-기반 OS 운영 환경에 의해 제공된 MediaStream 방문 인터페이스를 사용하여 투사 단말기의 현재 화면 콘텐츠 데이터를 검색한다. 투사 단말기가 투사 단말기에서 현재 화면 콘텐츠 데이터를 검색하는 예시적인 프로세스는 아래와 같다.
투사 단말기가 웹-기반 OS에 의해 제공된 MediaStream 방문 인터페이스를 사용하여 화면 콘텐츠 데이터를 검색하는 예시적인 프로세스는 다음과 같다.
Figure pct00006
MediaStream 인터페이스는 투사 단말기에서 현재 화면 콘텐츠 데이터를 검색한 후, 화면 콘텐츠 데이터를 단계(308)에서 설정된 포인트-투-포인트 통신 링크를 통해 디스플레이 단말기로 전송한다.
MediaStream 인터페이스는 데이터 스트림을 원격 노드로 전송하거나 원격 노드로부터 데이터 스트림을 수신하는데 사용된다. MediaStream 인터페이스는 화면 콘텐츠 데이터를 검색하기 위한 예시적인 방법으로서 사용된다는 것을 알아야 한다. 화면 콘텐츠 데이터를 취득하는 몇몇 다른 인터페이스 또는 방법이 사용될 수 있다. 본 개시는 어떠한 제한도 부과하지 않는다.
(2) 화면 콘텐츠 데이터는 HTML5에 의해 지원되는 오디오 및 비디오 스트림으로 변환된다. 이러한 예시적인 실시예에서, 화면 콘텐츠 데이터는 내장된 웹 기반 OS 운영 환경에 의해 지원되는 오디오 및 비디오 스트림으로 변환된다.
하이퍼텍스트 마크업 랭귀지(HTML) 5는 OGG 포맷, WEBM 포맷, 및 MP4 포맷을 포함하지만 이것으로 제한되지 않는 포맷의 오디오 및 비디오 스트림을 지원한다는 것을 알아야 한다. 만일 화면 이미지 데이터가 오디오 신호이면, 이 신호는 OGG 포맷으로 변환될 수 있다. 만일 화면 콘텐츠 데이터가 비디오 신호이면, 이 신호는 WEBM 또는 MP4 포맷으로 변환될 수 있다. IE™ 브라우저와 같은 일부 브라우저가 WEBM 포맷을 지원하지 않는데 반해 MP4 포맷은 오디오 및 비디오 신호를 모두 지원하므로, 일부 예에서 MP4 포맷은 최선의 선택일 수 있다.
파이어폭스, 인터넷 익스플로어(IE), 구글 브라우저, 맥스톤 브라우저, 브라우저(360), 및 텐센트 브라우저를 비롯한 현재의 주요 브라우저는 모두 HTML5 표준을 지원하며 그래서 HTML5에 의해 지원되는 오디오 및 비디오 스트림의 디스플레이를 지원한다는 것을 또한 알아야 한다.
(3) MediaStream 인터페이스는 단계(208)에서 설명된 RTCPeerConnection 인터페이스에 의해 호출된다. 즉, MediaStream 인터페이스는 화면 콘텐츠 데이터로부터 변환된 오디오 및 비디오 스트림을 취득하며, 이후 이 스트림은 RTCPeerConnection 인터페이스를 통해 디스플레이 단말기로 전송된다.
전술한 특정 실시예 및 지원 상황은 그저 예일뿐이다. 기술의 발달에 따라, 환경 및 지원 상황은 변할 수 있지만 본 개시의 실체에 영향을 미치지 않을 것이다.
본 개시는 또한 본 개시의 예시적인 제 3 실시예에서 웹-기반 OS 운영 환경에 기초하여 화면 콘텐츠 데이터를 디스플레이하기 위한 예시적인 방법을 제공하는데, 이 방법은 로컬 브라우저에서 화면 콘텐츠 데이터를 디스플레이하는 예시적인 제 2 실시예에서 웹-기반 OS 운영 환경에 기초하여 화면 콘텐츠 데이터를 전송하기 위한 예시적인 방법과 조합된다.
도 4는 본 개시의 예시적인 제 3 실시예에 따른 화면 콘텐츠를 디스플레이하기 위한 예시적인 방법의 플로우차트이다.
(402)에서, 디스플레이 단말기는 그의 내장된 기존의 웹-기반 OS 운영 환경을 통해 웹 서버와의 접속을 설정한다.
투사 단말기가 (302)에서 그의 내장된 웹-기반 OS 운영 환경을 통해 웹 서버와의 접속을 설정하는 예시적인 프로세스와 유사하게, 디스플레이 단말기가 웹 서버와 HTTP 접속하는 예시적인 프로세스는 다음과 같다.
(1) 디스플레이 단말기는 액세스 라우터와의 물리적 접속을 설정하는데, 이는 다이얼링을 통해 설정될 수 있다. 물리적 접속은 케이블 접속과 같은 유선 접속 또는 WiFi나 블루투스와 같은 무선 접속을 포함될 수 있다.
(2) 디스플레이 단말기는 그의 내장된 기존의 웹-기반 OS 운영 환경을 통해 그의 IP 어드레스를 취득한다.
(3) 디스플레이 단말기는 그의 내장된 기존의 웹-기반 OS 운영 환경을 통해 라우터와의 데이터 링크를 설정한다.
(4) 디스플레이 단말기는 그의 내장된 기존의 웹-기반 OS 운영 환경을 통해 웹 서버의 IP 어드레스를 취득한다.
(5) 디스플레이 단말기는 그의 내장된 기존의 웹-기반 OS 운영 환경을 통해 웹 서버와의 TCP 접속을 설정한다.
(6) 디스플레이 단말기는 그의 내장된 기존의 웹-기반 OS 운영 환경을 통해 웹 서버와의 HTTP 접속을 설정한다. 이러한 단계가 완료된 후, 디스플레이 단말기에 내장된 기존의 웹-기반 OS 운영 환경은 웹 서버에 액세스하여 웹 서버와 정보를 교환할 수 있다.
(404)에서, 디스플레이 단말기는 내장된 기존의 웹-기반 OS 운영 환경을 통해 웹 서버에 액세스하고, 웹 서버로부터 초기화에 필요한 컴퓨터 실행가능한 코드를 로딩하고, 초기화를 위해 컴퓨터 실행가능한 코드를 실행한다.
디스플레이 단말기는 내장된 웹-기반 OS 운영 환경을 통해 (402)에서 설정된 웹 서버와의 접속을 통해 웹 서버에 액세스 요청 메시지를 전송한다. 웹 서버는 액세스 요청 메시지를 수신하고 디스플레이 단말기로의 액세스에 동의한다는 메시지를 반환한다.
디스플레이 단말기가 액세스에 동의한다는 메시지를 수신한 후, 디스플레이 단말기는 디스플레이 단말기에 내장된 기존의 웹-기반 OS 운영 환경을 이용함으로써 URL을 통해 웹 서버에 액세스하고, 웹 서버로부터 초기화에 필요한 컴퓨터 판독가능한 코드 또는 논리 코드를 로딩한다. 디스플레이 단말기는 초기화에 필요한 컴퓨터 판독가능한 코드를 로딩한 후, 초기화를 위해 컴퓨터 실행가능한 코드를 실행하고, 투사 단말기의 초기화를 완료한다. 초기화 후, 디스플레이 단말기는 화면 투사를 실시하는 완전한 웹-기반 OS 운영 환경을 갖는다.
(406)에서, 디스플레이 단말기는 내장된 웹-기반 OS 운영 환경을 통해 등록 정보를 웹 서버에 제출한다.
예시적인 등록 프로세스는 다음과 같다. 제 1 단계에서, 투사 단말기는 그의 디바이스 정보를 취득한다. 디바이스 정보는 IP 어드레스, 디바이스 식별, 및 디바이스의 스크린 해상도를 포함할 수 있다.
제 2 단계에서, 디스플레이 단말기는 그의 디바이스 정보를 내장된 웹-기반 OS 운영 환경을 통해 웹 서버로 전송하여 등록을 완료한다.
(408)에서, 디스플레이 단말기는 웹-기반 OS에 의해 제공된 포인트-투-포인트 링크 인터페이스를 통해 투사 단말기와의 포인트-투-포인트 통신 링크를 설정한다.
예시적인 제 2 실시예의 단계(308)에 대응하여, 예를 들면, 디스플레이 단말기는 웹-기반 OS 운영 환경에 의해 제공된 RTCPeerConnection 인터페이스를 통해 투사 단말기와 접속하며, 이는 다음과 같다.
Figure pct00007
RTCPeerConnection 인터페이스 관련 코드 및 디스플레이 단말기와 관련된 정보의 구성을 위한 코드는 투사 단말기와 디스플레이 단말기 사이에서 포인트-투-포인트 통신 링크를 설정하기 위한 방법에 대응하는 코드를 말한다는 것을 알아야 한다. 또한, 여기서 설명된 코드와 유사한 코드 또는 대안의 코드는 동일한 기능(즉, 투사 단말기와 디스플레이 단말기 사이에서 포인트-투-포인트 통신 링크를 설정하는 기능)을 구현하기 위해 사용될 수 있다. 본 개시는 어떠한 제한도 부과하지 않는다.
이러한 (408) 및 대응하는 단계(308)가 완료된 후, 투사 단말기와 디스플레이 단말기 사이의 포인트-투-포인트 통신 링크가 설정된다.
(410)에서, 디스플레이 단말기가 투사 단말기로부터 RTCPeerConnection 인터페이스를 통해 화면 콘텐츠 데이터를 수신한 후, 디스플레이 단말기는 디스플레이 단말기에 내장된 웹-기반 OS 운영 환경을 통해 화면 콘텐츠 데이터를 디스플레이하는 해상도를 선택한다. 해상도는 디스플레이 단말기의 화면 해상도, 투사 단말기와 같은 전송 단말기의 화면 해상도, 또는 자체 정의된 화면 해상도를 포함할 수 있다. 해상도가 선택된 후, 다음 단계가 실시된다.
(412)에서, 디스플레이 단말기는 HTML5 비디오 제어를 이용하여 화면 콘텐츠 데이터를 현재 화면상에 디스플레이한다.
먼저, 디스플레이 단말기는 (408)에서 RTCPeerConnection 인터페이스를 통해 단계(310)에서 투사 단말기에 의해 전송된 오디오 및 비디오 스트림을 수신한다.
디스플레이 단말기는 웹-기반 OS에 의해 제공된 HTML5 비디오 제어를 이용하여 오디오 및 비디오 스트림을 화면상에 디스플레이한다. 예시적인 프로세스는 아래와 같다.
Figure pct00008
비디오 제어는 수신한 화면 콘텐츠 데이터를 본 개시의 현재 화면상에 디스플레이하기 위한 예시적인 방법이라는 것을 알아야 한다. 화면 콘텐츠 데이터를 디스플레이하는 일부 다른 제어 또는 방법이 사용될 수 있다. 본 개시는 어떠한 제한도 부과하지 않는다.
본 개시는 또한 웹-기반 OS 운영 환경에 기초하여 화면 콘텐츠 데이터를 전송하고 디스플레이하기 위한 장치를 제공한다.
도 5는 본 개시의 예시적인 제 4 실시예에 따른 웹-기반 OS 운영 환경에 기초하여 화면 콘텐츠를 전송하고 디스플레이하기 위한 예시적인 장치(500)의 다이어그램이다.
장치(500)는 하나 이상의 프로세서(들)(502) 또는 데이터 처리 유닛(들) 및 메모리(504)를 포함할 수 있다. 메모리(504)는 컴퓨터 판독가능한 매체의 일 예이다. 메모리(504)는 등록 초기화 유닛(506), 통신 링크 설정 유닛(508), 화면 콘텐츠 데이터 변환 유닛(510), 화면 해상도 선택 유닛(512), 및 화면 콘텐츠 데이터 디스플레이 유닛(514)을 비롯하여 복수의 모듈이나 유닛을 저장할 수 있다.
등록 초기화 유닛(506)은 서버 접속 서브유닛(506-2) 및 등록 초기화 서브유닛(506-4)을 포함할 수 있다.
서버 접속 서브유닛(506-2)은 디스플레이 단말기 및/또는 투사 단말기와 웹 서버 간의 접속을 각기 내장된 웹-기반 OS 운영 환경을 통해 설정한다.
예를 들면, 웹 서버와 웹 브라우저(클라이언트) 간의 정보 통신은 HTTP를 통해 수행된다. 웹 서버에 액세스하여 정보를 취득하기 위해, 웹 브라우저(클라이언트)는 웹 서버와 HTTP 접속을 설정한다.
등록 초기화 서브유닛(506-4)은 초기화 서브유닛 및 등록 서브유닛(도 5에서 도시되지 않음)을 포함할 수 있다.
투사 단말기 및 디스플레이 단말기가 액세스 요청 메시지를 웹 서버에 전송한 후, 웹 서버는 액세스 요청 메시지를 수신하고 투사 단말기 및 디스플레이 단말기로의 액세스에 동의한다는 메시지를 전송한다. 투사 단말기 및 디스플레이 단말기가 웹 서버로부터 액세스에 동의한다는 메시지를 수신 한 후, 초기화 서브유닛은 투사 단말기 또는 디스플레이 단말기가 이들 각자의 내장된 웹-기반 OS를 이용함으로써 URL을 통해 웹 서버를 방문할 때, 웹 서버로부터 각각의 투사 단말기 또는 디스플레이 단말기의 등록 및 초기화에 필요한 컴퓨터 판독가능한 코드 또는 논리 코드를 로딩하고, 기존의 웹-기반 OS 운영 환경을 통해 등록 및 초기화에 관련하는 컴퓨터 실행가능한 코드를 실행한다. 초기화의 완료 후, 투사 단말기는 화면 투사를 실시하는 완전한 웹-기반 OS 운영 환경을 갖고 디스플레이 단말기는 수신한 화면 콘텐츠 데이터를 화면상에 디스플레이하는 완전환 웹-기반 OS 운영 환경을 갖게 된다.
등록 서브유닛은 내장된 웹-기반 OS 운영 환경을 통해 디스플레이 단말기 또는 투사 단말기의 디바이스 정보를 취득하고 디바이스 정보를 웹 서버로 전송하여 등록을 완료한다. 디바이스 정보는 IP 어드레스, 디바이스 식별, 및 디바이스의 화면 해상도를 포함할 수 있다.
통신 링크 설정 유닛(508)은 투사 단말기 및 디스플레이 단말기 사이에서 웹-기반 OS에 의해 제공된 포인트-투-포인트 통신 인터페이스를 통해 포인트-투-포인트 통신 링크를 설정한다.
예를 들면, 통신 링크 설정 유닛(508)은 내장된 웹-기반 OS 운영 환경에 의해 제공된 인터페이스 관련 코드를 실시하고 투사 단말기에서 디스플레이 단말기의 정보에 필요한 코드를 구성한다. 통신 링크 설정 유닛(508)은 또한 내장된 웹-기반 OS 운영 환경에 의해 제공된 인터페이스 관련 코드를 실시하고 디스플레이 단말기에서 투사 단말기의 정보에 필요한 코드를 구성한다. 투사 단말기 및 디스플레이 단말기에 대한 코드가 실행된 후, 투사 단말기와 디스플레이 단말기 사이의 포인트-투-포인트 통신 링크가 설정된다.
화면 콘텐츠 데이터 변환 유닛(510)은 투사 단말기가 화면 콘텐츠 데이터를 검색할 때, 화면 콘텐츠를 화면 콘텐츠 데이터로 변환한다.
예를 들면, 투사 단말기가 웹-기반 OS에 의해 제공된 MediaStream 방문 인터페이스를 통해 화면 콘텐츠 데이터를 취득할 때, 화면 콘텐츠 데이터 변환 유닛(510)은 화면 콘텐츠 데이터를 HTML5에 의해 지원되는 오디오 및 비디오 스트림으로 변환한다. 예를 들어, 화면 콘텐츠 데이터는 내장된 웹-기반 OS 운영 환경에 의해 지원되는 오디오 및 비디오 스트림으로 변환되고 그런 다음 오디오 및 비디오 스트림은 RTCPeerConnection 인터페이스를 통해 디스플레이 단말기로 전송된다.
화면 해상도 선택 유닛(512)은 화면 콘텐츠 데이터를 디스플레이하는 해상도를 선택한다. 예를 들면, 화면 해상도 선택 유닛(512)은 디스플레이 단말기가 투사 단말기로부터 RTCPeerConnection 인터페이스를 통해 화면 콘텐츠 데이터를 수신한 후, 디스플레이 단말기에 내장된 웹-기반 OS 운영 환경 하에서 화면 콘텐츠 데이터를 디스플레이하는 해상도를 선택한다. 선택가능한 화면 해상도는 디스플레이 단말기의 화면 해상도, 투사 단말기와 같은 전송 단말기의 화면 해상도, 또는 자체 정의된 화면 해상도를 포함할 수 있다. 예를 들면, 디스플레이 단말기가 RTCPeerConnection 인터페이스를 통해 투사 단말기로부터 화면 콘텐츠 데이터를 수신한 후, 화면 해상도 선택 유닛(512)은 디스플레이 단말기에 내장된 웹-기반 OS 운영 환경을 통해 화면 콘텐츠 데이터를 현재 화면에서 디스플레이하는 화면 해상도를 선택한다.
화면 콘텐츠 디스플레이 유닛(514)은 디스플레이 단말기가 화면 콘텐츠 데이터를 수신할 때, 화면 콘텐츠 데이터를 화면상에 디스플레이한다. 예를 들면, 화면 해상도 디스플레이 유닛(514)은 웹-기반 OS에 의해 제공된 비디오 제어를 이용하여 투사 단말기로부터 수신한 화면 콘텐츠 데이터를 디스플레이 단말기의 화면상에 디스플레이한다. 화면 콘텐츠 데이터를 디스플레이 단말기에 디스플레이하기 위해 선택된 화면 해상도는 화면 해상도 선택 유닛(512)이 선택한 화면 해상도이다.
전술한 설명은 본 개시의 예시적인 실시예를 설명하는 것으로, 본 개시를 한정하는 것으로 사용되지 않아야 한다. 본 기술에서 통상의 지식을 가진 자라면 본 기술을 임의로 수정 또는 변형할 수 있다. 본 기술의 사상과 범위를 벗어나지 않는 임의의 변경, 등가물 대체 또는 개선은 그럼에도 본 개시의 청구 범위의 범위에 속할 것이다.
표준 구성에서, 본 개시에서 설명한 바와 같이 컴퓨팅 디바이스 또는 시스템은 하나 이상의 중앙 처리 유닛(central processing unit, CPU), 하나 이상의 입력/출력 인터페이스, 하나 이상의 네트워크 인터페이스, 및 메모리를 포함할 수 있다.
메모리는 컴퓨터 판독가능한 매체에서 랜덤 액세스 메모리(random access memory, RAM)와 같은 비영구적 메모리 및/또는 판독 전용 메모리(read only memory, ROM) 및 플래시 랜덤 액세스 메모리(flash RAM)과 같은 비휘발성 메모리와 같은 형태를 포함할 수 있다. 메모리는 컴퓨터 판독가능한 매체의 일 예이다.
컴퓨터 판독 가능한 매체는 정보 저장을 구현하는 임의의 방법 또는 기술을 사용할 수 있는 영구적 및 비영구적, 이동 및 고정 매체를 포함한다. 정보는 컴퓨터 판독가능한 명령어, 데이터 구조, 소프트웨어 모듈 또는 임의의 데이터일 수 있다. 컴퓨터 저장 매체의 예는 이것으로 한정되지 않지만, 컴퓨팅 디바이스에 의해 액세스 가능한 정보를 저장할 수 있는 상전이 메모리(phase-change memory, PCM), 정적 랜덤 액세스 메모리(static random access memory, SRAM), 동적 랜덤 액세스 메모리(dynamic random access memory, DRAM), 다른 유형의 RAM, ROM, 전기적 소거 가능한 프로그래머블 판독 전용 메모리(electrically erasable programmable read only memory, EEPROM), 플래시 메모리, 내부 메모리, CD-ROM, DVD, 광 메모리, 자기 테이프, 자기 디스크, 임의의 다른 자기 저장 디바이스 또는 임의의 다른 비-통신 매체를 포함할 수 있다. 본 명세서에서 정의된 바와 같이, 컴퓨터 판독 가능한 매체는 변조된 데이터 신호 및 반송파와 같은 일시적 매체를 포함하지 않는다.
본 기술에서 통상의 지식을 가진 자라면 예시적인 실시예는 방법, 시스템 또는 컴퓨터 소프트웨어 제품의 형태로 제시될 수 있다는 것을 이해할 것이다. 그러므로, 본 기술은 하드웨어, 컴퓨터 소프트웨어, 또는 이들의 조합에 의해 구현될 수 있다. 또한, 본 기술은 컴퓨터 실행 가능하거나 컴퓨터 판독 가능한 명령어를 포함하는 (이것으로 한정하지 않지만, 디스크, CD-ROM, 또는 광 저장 디바이스를 비롯한) 하나 이상의 컴퓨터 저장 매체의 형태로 된 컴퓨터 소프트웨어 제품으로서 구현될 수 있다.

Claims (20)

  1. 투사 단말기에 의해 화면 콘텐츠를 전송하는 방법으로서,
    상기 투사 단말기에서 웹-기반 오퍼레이팅 시스템(web-based operating system: web-based OS)에 의해 제공된 포인트-투-포인트 링크 인터페이스를 통해 디스플레이 단말기와의 포인트-투-포인트 통신 링크를 설정하는 단계와,
    상기 웹-기반 OS에 의해 제공된 화면 방문 인터페이스(screen visiting interface)를 이용하여 화면 콘텐츠를 검색하는 단계와,
    상기 화면 콘텐츠를 화면 콘텐츠 데이터로 변환하는 단계와,
    상기 화면 콘텐츠 데이터를 상기 포인트-투-포인트 통신 링크를 통해 상기 디스플레이 단말기로 전송하는 단계를 포함하는
    투사 단말기에 의한 화면 콘텐츠 전송 방법.
  2. 제 1 항에 있어서,
    상기 화면 콘텐츠를 화면 콘텐츠 데이터로 변환하는 단계는, 상기 화면 콘텐츠를 실시간으로 상기 화면 콘텐츠 데이터로 변환하는 단계를 포함하는
    투사 단말기에 의한 화면 콘텐츠 전송 방법.

  3. 제 1 항에 있어서,
    상기 웹 기반 OS에 의해 제공된 포인트-투-포인트 링크 인터페이스를 통해 디스플레이 단말기와의 포인트-투-포인트 통신 링크를 설정하는 단계 이전에,
    상기 웹-기반 OS를 통해 웹 서버를 방문하는 단계와,
    상기 웹 서버로부터 초기화를 위한 컴퓨터 실행가능한 코드를 로딩하는 단계와,
    상기 투사 단말기에 필요한 초기화를 위해 상기 컴퓨터 실행가능한 코드를 실행하는 단계와,
    상기 웹 서버에 상기 투사 단말기를 등록하는 단계를 더 포함하는
    투사 단말기에 의한 화면 콘텐츠 전송 방법.
  4. 제 3 항에 있어서,
    상기 웹 서버에서 상기 투사 단말기를 등록하는 단계는,
    초기화를 완료하는 상기 웹-기반 OS를 통해 상기 투사 단말기의 등록 관련 정보를 상기 웹 서버에 업로딩하는 단계와,
    등록을 완료하는 단계를 포함하는
    투사 단말기에 의한 화면 콘텐츠 전송 방법.
  5. 제 1 항에 있어서,
    상기 웹-기반 OS는 웹 실시간 통신(web Real-Time Communication: WebRTC) 애플리케이션을 이용하여 하이퍼텍스트 마크업 랭귀지(HyperText Markup Language: HTML) 5 운영 환경을 지원하는
    투사 단말기에 의한 화면 콘텐츠 전송 방법.
  6. 제 5 항에 있어서,
    상기 투사 단말기에서 웹-기반 OS에 의해 제공된 포인트-투-포인트 링크 인터페이스를 통해 디스플레이 단말기와의 포인트-투-포인트 통신 링크를 설정하는 단계는,
    상기 웹-기반 OS를 통해 RTCPeerConnection 인터페이스를 정의하는 단계와,
    상기 RTCPeerConnection 인터페이스의 개시를 완료하는 단계와,
    포인트-투-포인트 접속 메시지를 상기 디스플레이 단말기로 전송하는 단계와,
    상기 디스플레이 단말기로부터 응답 메시지를 수신하는 단계와,
    상기 RTCPeerConnection 인터페이스와 관련된 컴퓨터 실행가능한 코드를 실행하는 단계와,
    상기 디스플레이 단말기와의 상기 포인트-투-포인트 통신 링크를 설정하는 단계를 포함하는
    투사 단말기에 의한 화면 콘텐츠 전송 방법.
  7. 제 6 항에 있어서,
    상기 웹-기반 OS에 의해 제공된 화면 방문 인터페이스를 이용하여 상기 화면 콘텐츠를 검색하는 단계는,
    MediaStream 인터페이스를 정의하고 초기화하는 단계와,
    상기 MediaStream 인터페이스를 통해 상기 화면 콘텐츠에 액세스하는 단계를 포함하는
    투사 단말기에 의한 화면 콘텐츠 전송 방법.
  8. 제 7 항에 있어서,
    상기 화면 콘텐츠 데이터를 상기 포인트-투-포인트 통신 링크를 통해 상기 디스플레이 단말기로 전송하는 단계는,
    상기 화면 콘텐츠 데이터를 상기 RTCPeerConnection 인터페이스로 전송하는 단계와,
    상기 화면 콘텐츠 데이터를 상기 RTCPeerConnection 인터페이스로부터 상기 포인트-투-포인트 통신 링크를 통해 상기 디스플레이 단말기로 전송하는 단계를 포함하는
    투사 단말기에 의한 화면 콘텐츠 전송 방법.
  9. 제 1 항에 있어서,
    상기 포인트-투-포인트 통신 링크는,
    근거리 네트워크(local area network: LAN)에서의 유선 통신 링크,
    상기 LAN에서 WiFi나 블루투스를 통해 설정되는 무선 통신 링크, 또는
    인터넷을 통해 설정되는 원격 포인트-투-포인트 통신 링크
    중 적어도 하나를 포함하는
    투사 단말기에 의한 화면 콘텐츠 전송 방법.
  10. 디스플레이 단말기에 의해 화면 콘텐츠를 디스플레이하기 위한 방법으로서,
    상기 디스플레이 단말기에서 웹-기반 오퍼레이팅 시스템(operating system: OS)에 의해 제공된 포인트-투-포인트 링크 인터페이스를 통해 투사 단말기와의 포인트-투-포인트 통신 링크를 설정하는 단계와,
    상기 투사 단말기로부터 수신된 화면 콘텐츠 데이터를 화면에서 디스플레이하는 단계를 포함하는
    디스플레이 단말기에 의한 화면 콘텐츠 디스플레이 방법.
  11. 제 10 항에 있어서,
    상기 투사 단말기로부터 수신된 화면 콘텐츠 데이터를 화면에서 디스플레이하는 단계는, 상기 웹-기반 OS에 의해 제공된 비디오 제어(video control)를 이용하여 상기 화면 콘텐츠 데이터를 디스플레이하는 단계를 포함하는
    디스플레이 단말기에 의한 화면 콘텐츠 디스플레이 방법.
  12. 제 10 항에 있어서,
    상기 웹-기반 OS에 의해 제공된 포인트-투-포인트 링크 인터페이스를 통해 투사 단말기와의 포인트-투-포인트 통신 링크를 설정하는 단계 이전에,
    상기 웹-기반 OS를 통해 웹 서버를 방문하는 단계와,
    상기 웹 서버로부터 초기화를 위한 컴퓨터 실행가능한 코드를 로딩하는 단계와,
    상기 디스플레이 단말기에 요구되는 상기 초기화를 위한 상기 컴퓨터 실행가능한 코드를 실행하는 단계와,
    상기 웹 서버에서 상기 디스플레이 단말기를 등록하는 단계를 더 포함하는
    디스플레이 단말기에 의한 화면 콘텐츠 디스플레이 방법.

  13. 제 12 항에 있어서,
    상기 웹 서버에서 상기 디스플레이 단말기를 등록하는 단계는,
    초기화를 완료하는 상기 웹-기반 OS를 통해 상기 디스플레이 단말기의 등록 관련 정보를 상기 웹 서버에 업로딩하는 단계와,
    등록을 완료하는 단계를 포함하는
    디스플레이 단말기에 의한 화면 콘텐츠 디스플레이 방법.
  14. 제 10 항에 있어서,
    상기 웹-기반 OS는 웹 실시간 통신(web Real-Time Communication: WebRTC) 애플리케이션을 이용하여 하이퍼텍스트 마크업 랭귀지(HyperText Markup Language: HTML) 5 운영 환경을 지원하는
    디스플레이 단말기에 의한 화면 콘텐츠 디스플레이 방법.
  15. 제 14 항에 있어서,
    상기 디스플레이 단말기에서 웹-기반 OS에 의해 제공된 포인트-투-포인트 링크 인터페이스를 통해 투사 단말기와의 포인트-투-포인트 통신 링크를 설정하는 단계는,
    상기 웹-기반 OS를 통해 RTCPeerConnection 인터페이스를 정의하는 단계와,
    상기 RTCPeerConnection 인터페이스의 개시를 완료하는 단계와,
    상기 투사 단말기로부터 포인트-투-포인트 접속 메시지를 수신하는 단계와,
    상기 투사 단말기로 응답 메시지를 반환하는 단계와,
    상기 RTCPeerConnection 인터페이스와 관련된 컴퓨터 실행가능한 코드를 실행하는 단계와,
    상기 투사 단말기와의 상기 포인트-투-포인트 통신 링크를 설정하는 단계를 포함하는
    디스플레이 단말기에 의한 화면 콘텐츠 디스플레이 방법.
  16. 제 15 항에 있어서,
    상기 투사 단말기로부터 수신된 화면 콘텐츠 데이터를 화면에서 디스플레이하는 단계는, 상기 웹-기반 OS에 의해 제공된 콘텐츠 디스플레이 제어(content displaying control)를 이용하여 상기 화면 콘텐츠 데이터를 상기 화면에서 디스플레이하는 단계를 포함하는
    디스플레이 단말기에 의한 화면 콘텐츠 디스플레이 방법.
  17. 제 16 항에 있어서,
    상기 웹-기반 OS에 의해 제공된 콘텐츠 디스플레이 제어를 이용하여 상기 화면 콘텐츠 데이터를 상기 화면에서 디스플레이하는 단계는,
    비디오 제어를 정의하고 초기화하는 단계와,
    상기 콘텐츠 디스플레이 제어를 이용하여 상기 RTCPeerConnection 인터페이스로부터 수신된 상기 화면 콘텐츠 데이터를 검색하는 단계와,
    화면 해상도를 선택하여 상기 화면 콘텐츠 데이터를 디스플레이하는 단계와,
    상기 비디오 제어를 이용하여 상기 화면 해상도에 따라서 상기 화면 콘텐츠 데이터를 상기 화면에서 디스플레이하는 단계를 포함하는
    디스플레이 단말기에 의한 화면 콘텐츠 디스플레이 방법.
  18. 제 17 항에 있어서,
    상기 화면 해상도는,
    상기 투사 단말기의 화면 해상도,
    상기 디스플레이 단말기의 화면 해상도, 또는
    사용자에 의해 정의된 화면 해상도
    중 적어도 하나를 포함하는
    디스플레이 단말기에 의한 화면 콘텐츠 디스플레이 방법.

  19. 화면 콘텐츠를 전송하고 디스플레이하기 위한 장치로서,
    투사 단말기와 디스플레이 단말기 사이에서 웹-기반 OS에 의해 제공된 포인트-투-포인트 통신 인터페이스를 통해 포인트-투-포인트 통신 링크를 설정하는 통신 링크 설정 유닛과,
    상기 투사 단말기가 상기 웹-기반 OS에 의해 제공된 화면 방문 인터페이스를 이용하여 상기 화면 콘텐츠에 액세스할 때, 상기 화면 콘텐츠를 실시간으로 화면 콘텐츠 데이터로 변환하고, 상기 화면 콘텐츠 데이터를 상기 포인트-투-포인트 통신 링크를 통해 전송하는 화면 콘텐츠 데이터 변환 유닛과,
    상기 디스플레이 단말기가 상기 화면 콘텐츠 데이터를 수신할 때, 상기 웹-기반 OS에 의해 제공된 콘텐츠 디스플레이 제어를 이용하여 상기 화면 콘텐츠 데이터를 화면상에 디스플레이하는 화면 콘텐츠 디스플레이 유닛을 포함하는
    화면 콘텐츠 전송 및 디스플레이 장치.
  20. 제 19 항에 있어서,
    등록 초기화 유닛을 더 포함하되, 상기 등록 초기화 유닛은,
    상기 웹-기반 OS 운영 환경을 통해 상기 투사 단말기 또는 상기 디스플레이 단말기와 상기 웹 서버 사이에서 각기 접속을 설정하는 서버 접속 서브유닛과,
    상기 투사 단말기 또는 상기 디스플레이 단말기가 상기 웹 서버를 방문할 때, 상기 웹 서버로부터 상기 투사 단말기 또는 상기 디스플레이 단말기의 등록 및 초기화에 필요한 컴퓨터 판독가능한 코드 또는 논리 코드를 로딩하고, 상기 등록 및 초기화에 관련된 상기 컴퓨터 실행가능한 코드를 실행하는 등록 초기화 서브유닛을 포함하는
    화면 콘텐츠 전송 및 디스플레이 장치.
KR1020167016433A 2013-12-27 2014-12-24 화면 콘텐츠 전송 및 디스플레이 KR20160102419A (ko)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
CN201310741237.0A CN104753989B (zh) 2013-12-27 2013-12-27 基于Web-based OS运行环境的屏幕影像传输播放方法及装置
CN201310741237.0 2013-12-27
PCT/US2014/072360 WO2015100417A1 (en) 2013-12-27 2014-12-24 Transmitting and displaying screen content

Publications (1)

Publication Number Publication Date
KR20160102419A true KR20160102419A (ko) 2016-08-30

Family

ID=53479703

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020167016433A KR20160102419A (ko) 2013-12-27 2014-12-24 화면 콘텐츠 전송 및 디스플레이

Country Status (8)

Country Link
US (1) US10498801B2 (ko)
EP (1) EP3087502B1 (ko)
JP (1) JP6966675B2 (ko)
KR (1) KR20160102419A (ko)
CN (1) CN104753989B (ko)
HK (1) HK1207761A1 (ko)
TW (1) TWI627858B (ko)
WO (1) WO2015100417A1 (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10728562B2 (en) 2016-12-28 2020-07-28 Kt Corporation Video transmitting device and video playing device

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106131145B (zh) * 2016-06-29 2019-04-19 成都中科创达软件有限公司 一种移动终端的投影方法
US10572031B2 (en) * 2016-09-28 2020-02-25 Salesforce.Com, Inc. Processing keyboard input to cause re-sizing of items in a user interface of a web browser-based application
US10642474B2 (en) * 2016-09-28 2020-05-05 Salesforce.Com, Inc. Processing keyboard input to cause movement of items in a user interface of a web browser-based application
CN107016289B (zh) * 2017-02-15 2020-04-10 中国科学院信息工程研究所 基于Web操作系统的移动瘦终端安全模型建立方法及装置
CN115836528A (zh) 2020-04-24 2023-03-21 海信视像科技股份有限公司 一种显示设备及投屏方法
CN113556590B (zh) * 2020-04-24 2022-11-11 海信视像科技股份有限公司 一种投屏视频流有效分辨率检测方法及显示设备
CN112328941A (zh) * 2020-11-19 2021-02-05 Oppo广东移动通信有限公司 基于浏览器的应用投屏方法及相关装置

Family Cites Families (28)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20020023265A1 (en) * 2000-08-08 2002-02-21 Metcalf Darrell J. Wireless controller with publicly-accessible communications link for controlling the content seen on large-screen systems
AU2001284799A1 (en) 2000-08-10 2002-02-25 Mike Fullerton Method for screen image sharing
US7180475B2 (en) * 2001-06-07 2007-02-20 Infocus Corporation Method and apparatus for wireless image transmission to a projector
US7599989B2 (en) * 2005-01-24 2009-10-06 Microsoft Corporation System and method for gathering and reporting screen resolutions of attendees of a collaboration session
US7933955B2 (en) * 2006-07-11 2011-04-26 Igor Khalatian One-click universal screen sharing
JP2009116630A (ja) 2007-11-07 2009-05-28 Sony Corp ウェブ画面の共有システム、その共有用端末機およびその共有プログラム
US8175639B2 (en) 2007-11-26 2012-05-08 Nasrin Chaparian Amirmokri NanoPC mobile personal computing and communication device
JP5262359B2 (ja) 2008-07-02 2013-08-14 パナソニック株式会社 自動販売機の内扉ロック装置
JP5305894B2 (ja) 2008-12-26 2013-10-02 株式会社東芝 画面共有システム、設定変更方法、クライアント装置、およびプログラム
JP5197351B2 (ja) * 2008-12-26 2013-05-15 三菱電機株式会社 情報処理装置及び情報処理方法及びプログラム
US9733886B2 (en) 2009-11-24 2017-08-15 Clearslide, Inc. Method and system for browser-based screen sharing
US8527549B2 (en) * 2010-02-22 2013-09-03 Sookasa Inc. Cloud based operating and virtual file system
US8342696B2 (en) * 2010-03-26 2013-01-01 Seiko Epson Corporation System and method for displaying remote content through multiple projectors
US9143570B2 (en) 2010-05-04 2015-09-22 Microsoft Technology Licensing, Llc Desktop screen sharing over HTTP
US8364130B2 (en) * 2010-05-12 2013-01-29 Sony Mobile Communications Ab Establishing sessions between devices in a network
CN102325144B (zh) * 2011-09-29 2014-07-30 Tcl集团股份有限公司 一种媒体设备间互联互通的方法、系统及多媒体设备
US8941673B2 (en) 2011-11-08 2015-01-27 Red Hat, Inc. Rendering images in a remote web browser
US9268517B2 (en) 2011-12-07 2016-02-23 Adobe Systems Incorporated Methods and systems for establishing, hosting and managing a screen sharing session involving a virtual environment
US9525998B2 (en) * 2012-01-06 2016-12-20 Qualcomm Incorporated Wireless display with multiscreen service
US8881170B2 (en) 2012-04-30 2014-11-04 Genesys Telecommunications Laboratories, Inc Method for simulating screen sharing for multiple applications running concurrently on a mobile platform
US9705729B2 (en) * 2012-06-01 2017-07-11 Dell Products L.P. General client engine with load balancing for client-server communication
US20130332857A1 (en) * 2012-06-08 2013-12-12 Samsung Electronics Co., Ltd. Photo edit history shared across users in cloud system
US9241131B2 (en) * 2012-06-08 2016-01-19 Samsung Electronics Co., Ltd. Multiple channel communication using multiple cameras
US20140053182A1 (en) * 2012-08-20 2014-02-20 Veiko Jääger Method and system for evaluating and sharing media
US9113033B2 (en) * 2012-08-28 2015-08-18 Microsoft Technology Licensing, Llc Mobile video conferencing with digital annotation
KR101422808B1 (ko) * 2012-09-21 2014-08-14 주식회사 팬택 드로잉 화면 공유 서비스의 제공 장치 및 방법과 이를 위한 휴대 단말
KR102220267B1 (ko) * 2013-07-11 2021-02-25 삼성전자주식회사 전자문서를 공유하는 방법 및 이를 위한 장치들
US9369491B2 (en) * 2014-11-10 2016-06-14 Cisco Technology, Inc. Inspection of data channels and recording of media streams

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10728562B2 (en) 2016-12-28 2020-07-28 Kt Corporation Video transmitting device and video playing device

Also Published As

Publication number Publication date
CN104753989A (zh) 2015-07-01
CN104753989B (zh) 2018-09-14
US20150188998A1 (en) 2015-07-02
EP3087502A4 (en) 2017-09-06
JP6966675B2 (ja) 2021-11-17
EP3087502A1 (en) 2016-11-02
EP3087502B1 (en) 2018-12-19
TW201526620A (zh) 2015-07-01
US10498801B2 (en) 2019-12-03
HK1207761A1 (en) 2016-02-05
JP2017511511A (ja) 2017-04-20
WO2015100417A1 (en) 2015-07-02
TWI627858B (zh) 2018-06-21

Similar Documents

Publication Publication Date Title
KR20160102419A (ko) 화면 콘텐츠 전송 및 디스플레이
US11882195B2 (en) Systems and methods for enabling access to third party services via a service layer
CN106664514B (zh) 在m2m接口中建立和执行组-组操作的装置和方法
KR101950122B1 (ko) 경량 기기 간 프로토콜을 디바이스 관리 프로토콜과 상호연동하기
US11671306B2 (en) Enhancing native service layer device management functionality
WO2015007245A1 (zh) 跨终端进行下载的方法、系统、云端服务器和终端
WO2016041322A1 (zh) 移动智能终端下转发应用内流量的方法
JP7005141B2 (ja) リモートモニタリングのための方法、及び信号取得及びリモートモニタリングのためのシステム
US20110185038A1 (en) Apparatus and method for providing a terminal web service
WO2017101186A1 (zh) 用于为用户设备的应用建立无线连接的方法
GB2524646A (en) Communication apparatus, information processing apparatus, and control method for the same
CN113905144A (zh) 一种图片传输方法、系统、服务器、客户端及用户设备
CN112565458B (zh) 平台远程控制方法和装置、存储介质及电子设备
CN112383617A (zh) 进行长连接的方法、装置、终端设备以及介质
JP2015069547A (ja) サーバ装置、端末装置、通信方法およびコンピュータプログラム
US9485801B1 (en) Mobile communication device connected to home digital network
WO2023213101A1 (zh) 一种通信方法、装置及设备
KR101561524B1 (ko) 원격 사용자 인터페이스 관리 시스템 및 그 방법
US20230208922A1 (en) Communication system, management server, and non-transitory computer-executable medium
US9565057B1 (en) System and method for utilizing a font data container to store a device identifier
CN115756744A (zh) 基于容器的应用访问方法、装置、系统、电子设备和介质
CN113032167A (zh) 页面通信方法、装置及设备
GB2531611A (en) Method, device, and computer program for improving access to services carried out in remote web runtime environments

Legal Events

Date Code Title Description
N231 Notification of change of applicant
E902 Notification of reason for refusal
E601 Decision to refuse application