KR20190139088A - Method of Live Streaming by Mobile Device - Google Patents

Method of Live Streaming by Mobile Device Download PDF

Info

Publication number
KR20190139088A
KR20190139088A KR1020180065695A KR20180065695A KR20190139088A KR 20190139088 A KR20190139088 A KR 20190139088A KR 1020180065695 A KR1020180065695 A KR 1020180065695A KR 20180065695 A KR20180065695 A KR 20180065695A KR 20190139088 A KR20190139088 A KR 20190139088A
Authority
KR
South Korea
Prior art keywords
live streaming
screen
mobile communication
communication terminal
video
Prior art date
Application number
KR1020180065695A
Other languages
Korean (ko)
Inventor
송전영
차재훈
설진하
Original Assignee
송전영
설진하
차재훈
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 송전영, 설진하, 차재훈 filed Critical 송전영
Priority to KR1020180065695A priority Critical patent/KR20190139088A/en
Publication of KR20190139088A publication Critical patent/KR20190139088A/en

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/21Server components or server architectures
    • H04N21/218Source of audio or video content, e.g. local disk arrays
    • H04N21/2187Live feed
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/436Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
    • H04N21/4363Adapting the video stream to a specific local network, e.g. a Bluetooth® network
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • H04M1/72409User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality by interfacing with external accessories
    • H04M1/72527
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/436Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
    • H04N21/43615Interfacing a Home Network, e.g. for connecting the client to a plurality of peripherals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/633Control signals issued by server directed to the network components or client
    • H04N21/6332Control signals issued by server directed to the network components or client directed to client
    • H04N21/6334Control signals issued by server directed to the network components or client directed to client for authorisation, e.g. by transmitting a key
    • H04N21/63345Control signals issued by server directed to the network components or client directed to client for authorisation, e.g. by transmitting a key by transmitting keys
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81Monomedia components thereof
    • H04N21/8166Monomedia components thereof involving executable data, e.g. software
    • H04N21/8173End-user applications, e.g. Web browser, game

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Computer Security & Cryptography (AREA)
  • Human Computer Interaction (AREA)
  • Databases & Information Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • Software Systems (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

The present invention relates to a live streaming method, which is a basic method using a technique of sharing a screen from a PC to a mobile communication terminal in PC live streaming. Through a live streaming program, a live streaming program operated in an existing PC is allocated to a mobile communication terminal as an application to reduce the burden on the PC. The method of the present invention comprises: a screen casting engine (hereinafter, referred to as a ′streamer′ device) for capturing a PC screen and transmitting the same to a mobile communication terminal; and a key injection engine suitable for capturing a key event from a PC, and transmitting the same to a live streaming device again.

Description

PC에서 이동통신단말로 화면을 공유하는 기술을 활용한 라이브스트리밍 방법{Method of Live Streaming by Mobile Device}Live streaming method using technology to share screen from PC to mobile terminal {Method of Live Streaming by Mobile Device}

본 발명은 PC에 이동 통신 단말로 화면을 공유하는 기술을 활용한 라이브스트리밍 방법으로 PC에서 실행되는 라이브스트리밍 프로그램 대신 이동통신 단말로 라이브스트리밍 App 으로 실행하여 PC의 성능부담을 더는 목적을 가지고 있다.The present invention has a purpose of increasing the performance burden of the PC by running the live streaming app as a mobile communication terminal instead of a live streaming program executed in the PC as a live streaming method utilizing the technology of sharing the screen to the mobile communication terminal on the PC. .

본 발명의 기초가 되는 라이브 스트리밍 기술은 실시간으로 데이터를 주고받는용도로 널리 사용되고 있는 실상이다. 종래의 라이브스트리밍 기술은 영상데이터를 생성함과 동시에 송출하는것이 하나의 PC에서 이루어져 PC에 큰 성능부담을 안겨주었다. Live streaming technology, which is the basis of the present invention, is widely used for real-time data exchange. In the conventional live streaming technology, image data is simultaneously generated and transmitted in one PC, which places a large performance burden on the PC.

공개특허 10-2012-0079454Patent Publication 10-2012-0079454

JIIBC 2014-4-8JIIBC 2014-4-8

본 발명은 PC에 이동 통신 단말로 화면을 공유하는 기술을 활용한 라이브스트리밍 방법으로 PC에서 실행되는 라이브스트리밍 프로그램 대신 이동통신 단말로 라이브스트리밍 App 으로 실행하여 PC화면을 이동통신 단말을 통해 라이브스트리밍 하는 목적이 있다.The present invention is a livestreaming method utilizing a technology of sharing a screen to a mobile communication terminal on a PC to run a live streaming app as a mobile communication terminal instead of a live streaming program executed on a PC to live stream the PC screen through a mobile communication terminal. There is a purpose.

본 발명의 다른 목적은 PC의 성능 부담을 낮추는 목적이 있다.Another object of the present invention is to reduce the performance burden of the PC.

본 발명은 이동통신 단말을 통해서 PC의 화면을 라이브스트리밍 하는것을 목적으로 한다.An object of the present invention is to livestream a screen of a PC through a mobile communication terminal.

본 발명의 주 효과로는 기존에 PC 에서 동작하는 라이브스트리밍 프로그램을 이동통신 단말에 APP으로 할당하여 PC자원의 부담을 낮추며 라이브스트리밍을 하는 효과가 있다.The main effect of the present invention is to allocate the live streaming program operating on the PC to the mobile terminal as an APP to reduce the burden of PC resources and live streaming.

부수적인 효과로는 PC 의 자원 부담이 낮아 짐에 따라서 PC에서 전 보다 더 원활하게 다른 프로그램을 실행할 수 있는 효과가 있다.As a side effect, the resource burden on the PC is lowered, which makes it possible to run other programs on the PC more smoothly than before.

제 도1 은 전체적인 라이브스트리밍 방법을 개략적으로 도시한다.
제 도2 는 PC화면 스트리밍 App의 동작을 개략적으로 도시한다.
1 schematically shows the overall livestreaming method.
2 schematically illustrates the operation of a PC screen streaming App.

10: 선 연결없이 무선으로 화면을 스마트 컴퓨터 화면에서 볼 수 있게 해주는 솔루션이다.10: It is a solution that allows users to see the screen on the smart computer screen wirelessly without wire connection.

작동원리를 간단히 말하면 화면정보를 코딩하여 주파수로 송신하면 컴퓨터는 그 주파수를 수신해서 디코딩하여 컴퓨터로 출력하는 것이다.In simple terms, the screen information is coded and transmitted at a frequency. The computer receives the frequency, decodes it, and outputs it to the computer.

한마디로 주파수를 주고 받는 무선통신이다. 블루투스를 떠올리면 이해하기 쉽다.In short, it is wireless communication that transmits and receives frequencies. It's easy to understand when you think of Bluetooth.

폰에서 인터넷을 하거나 동영상을 볼때 눈이 아파온다면If your eyes hurt when you browse the internet or watch videos on your phone

이 방벙을 통해 큰 화면으로 폰의 화면을 볼 수 있다. This way you can see your phone's screen on the big screen.

20: 이동 통신(移動通信, mobile telecommunication)은 사용자가 단말기를 통해 음성이나 영상, 데이터 등을 장소에 구애받지 않고 통신할 수 있도록 이동성이 부여된 통신 체계를 말한다. 최초의 이동 통신인 아날로그 방식의 셀룰러 폰은 음성의 송수신이 주된 서비스였으나 최근에는 동영상, 문자, 인터넷 정보, 방송, 사진 촬영, 신용 결재 등 다양한 서비스가 결합된 단말기가 출시되고 있다. 20: Mobile telecommunication refers to a communication system in which mobility is provided so that a user can communicate voice, video, data, and the like through a terminal regardless of place. Analog cell phone, the first mobile communication, has been the main service for transmitting and receiving voices, but recently, terminals combining various services such as video, text, Internet information, broadcasting, photo shooting, and credit settlement have been released.

21: 비디오의 압축 방법은 매우 다양하고 복잡한데 이는 기술의 발전으로 인한 것도 있겠지만 무엇보다 어느 한 가지 방법만을 사용해서는 충분히 만족할 만한 성능이 나오지 않는 경우가 많기 때문, 하지만 그 어떤 종류의 압축이라도 두 가지 종류로 분류할 수 있는데 그것은 바로 가역 압축과 비가역 압축이다.21: There are many different and complex methods of compressing video, which may be due to advances in technology, but most of all, using only one method often does not yield satisfactory performance. It can be classified into two types: reversible compression and irreversible compression.

가역 압축이란 압축된 데이터라도 손상 없이 압축되기 전 상태, 즉 무압축 상태로 되돌릴 수 있는 압축을 의미하며 가역 압축이라는 표현보다 무손실 압축(lossless compression)으로 주로 표기된다. 동영상 압축은 아니지만 우리가 컴퓨터에서 많이 사용하는 ZIP이나 RAR을 생각하면 이해하기 쉬울 것이다. 하지만 가역 압축은 완벽하게 원본의 형태로 복원할 수 있다는 특성상 그 압축 효율이 떨어지고 그렇기 때문에 특수한 상황에서만 제한적으로 사용된다.Reversible compression refers to compression that can return compressed data to a state before it is compressed without being damaged, that is, uncompressed. It is mainly referred to as lossless compression rather than reversible compression. It's not video compression, but it's easy to understand if you think about ZIP or RAR, which we use a lot on our computers. Reversible compression, however, has a limited compression efficiency due to the fact that it can be completely restored to its original form.

반면 비가역 압축의 결과물은 압축 과정에서 발생하는 데이터의 손실로 인해 압축된 결과물만을 가지고는 압축되기 전의 완벽한 무압축 상태로 되돌릴 수 없는 압축을 말하며 그렇기 때문에 손실 압축(lossy compression)이라 표현되기도 하며 대부분의 동영상 압축이 이 방식을 사용한다. 100% 완벽한 원본의 무압축 상태로 복원할 수 없다는 단점에도 불구하고 동영상 압축 방식의 주류로 손실 압축이 사용되는 이유는 대부분의 손실 압축이 무손실 압축과 비교해 사람이 인지하기 어려운 수준의 매우 적은 화질 손상 또는 사용 목적을 감안해 납득할 수 있는 수준의 화질 손상만으로도 무손실 압축에 비해 적게는 수배에서 수천 배 이상 더 높은 압축 효율을 얻을 수 있어 저장 공간과 전송의 편의성을 얻을 수 있기 때문이다.The result of irreversible compression, on the other hand, is the compression that cannot be returned to the complete uncompressed state before compression, due to the loss of data in the compression process, which is often referred to as lossy compression. Video compression uses this method. Despite the disadvantage of not being able to restore 100% of the original uncompressed state, lossy compression is used as the mainstream of video compression, because most lossy compressions are of very low image quality that are less noticeable to humans than lossless compression. Or, due to the purpose of use, the image quality loss that can be convinced can achieve compression efficiency at least several times to thousands of times higher than lossless compression, thereby providing storage space and transmission convenience.

간혹 ‘시각적 무손실 압축(visually lossless compression)’이라는 표현이 사용되는 경우도 있는데 굉장히 주의해야 할 표현으로 ‘무손실’이라는 단어가 사용되기는 했지만 엄밀히 따지면 손실이 발생하는 방식이기 때문이다. 단지 그 손실의 정도가 매우 적거나 최적화가 이루어져 사람의 눈으로 거의 인지할 수 없는 경우에 한하여 시각적 무손실이란 표현을 사용하며 여기에 반대되는 본 의미 그대로의 무손실 압축은 ‘수학적 무손실 압축(mathematically lossless compression)’이라고 강조해 표현한다. 실제 작업 현장에서 사용되는 비디오 압축은 목표하고자 하는 압축 효율을 달성하기 위해 여러 가지 압축 방법을 복합적으로 사용하는데, 당연히 사용된 기술의 특성에 따라 압축률과 인코딩 및 디코딩 속도와 같은 해당 비디오 코덱의 특성과 장단점이 나타나게 된다.Occasionally, the term “visually lossless compression” is used because the word “lossless” is used as an expression of great caution, but it is precisely how loss occurs. Visual lossless expression is used only when the loss is very small or when it is optimized and hardly noticeable by the human eye. In contrast, lossless compression as it is meant is 'mathematically lossless compression'. 'To express. Video compression used in the real world uses a combination of compression methods to achieve the desired compression efficiency, which of course depends on the nature of the video codec, such as compression rate, encoding and decoding speed, depending on the nature of the technology used. Pros and cons will appear.

22: 네트워크는 다수의 시스템을 전송 매체로 연결한 것이다. 소규모 네트워크를 전송 매체로 연결해 더 큰 네트워크로 확장할 수 있다. 컴퓨터 네트워크는 외형상 호스트 시스템과 전송 매체로 구분된다. 하지만 이런 물리적인 형태와는 별도로, 그들이 수행하는 내부 기능을 기초로 다양한 구조로 구분할 수 있다. 특히, 호스트가 제공하는 서비스를 사용하는 방식에 따라서 계층 모델로 나눠 설명할 수 있다.22: A network is a connection of multiple systems as transmission media. A small network can be connected as a transport medium to extend to a larger network. Computer networks are divided into external host systems and transmission media. Apart from these physical forms, however, they can be divided into various structures based on the internal functions they perform. In particular, it can be described by dividing it into a hierarchical model according to the way of using the service provided by the host.

40: 영상을 실시간으로 찍는데 그게 어떻게 바로바로 인코더 서버에서 인코딩이 되는지는 영상을 찍을때 초단위라던지, 0.x 초단위로 영상을 잘라서 인코더 서버로 보내는것이고,이렇게 잘게 잘린 영상을 인코더 서버에서 화질에 맞게(저화질, 중화질, 고화질 등) 재인코딩하고, 이걸 사용자에게 배달해줌.40: The video is taken in real time and how it is encoded in the encoder server is the time in seconds when the video is taken, or the video is cut in 0.x seconds and sent to the encoder server. Re-encode it for quality (Low, Medium, High), and deliver it to the user.

스트리밍 서버(스트리밍(Live) 엔진, 스트리밍(vod) 엔진)을 이용해서 송출을 하는데 Live는 실시간 스트리밍 방송을 할때 쓰이고, 스트리밍 vod엔진 서버는  Broadcasting is done by using streaming server (streaming engine, streaming engine). Live is used for real-time streaming broadcasting. Streaming vod engine server

보통 Live엔진이라 하면 실시간 방송할 때 쓰인다. Vod는 재방송할때라고 이해하면된다. 실시간으로 보낸것도 녹화되어 있고, 나중에 돌려보거나 할 때는 Vod 엔진을 쓰는것이다. 보통 이런 실시간이나 Vod는 하나의 프로그램으로 존재합니다.Normally, Live engine is used for real time broadcasting. You can understand that Vod is when rebroadcast. The real-time sent is recorded, and you will use the Vod engine to watch it later. Usually this real time or Vod exists as a program.

이런쪽의 프로그램으로 Wowza 스트리밍 서버가 있는데 Live와 Vod를 동시에 지원한다. One such program is the Wowza streaming server, which supports Live and Vod at the same time.

처음 컴퓨터와 스마트폰간에 화면을 전송하기 위해서To transfer the screen between your computer and your smartphone for the first time

화면송신 프로그램 (10) 에서 네트 워크 전송부를통해서 스크린캐스팅 요청신호를 전송하면 이동통신단말(20) 의 PC화면 스트리밍 APP(24)의 스크린캐스팅 프로그램에서 스크린캐스팅 요청을 수신받고 허가신호를 보내 송신 프로그램이 허가신호를 받은 이후부터 PC의 화면 신호가 송신된다.When the screen transmission program 10 transmits the screencasting request signal through the network transmission unit, the screencasting program of the PC screen streaming APP 24 of the mobile communication terminal 20 receives the screencasting request and sends a permission signal to the transmission program. After receiving this permission signal, the screen signal of the PC is transmitted.

PC는 이동통신 단말과 서로 유선 또는 무선으로 데이터를 주고 받는 방식을 사용한다.The PC uses a method of exchanging data with a mobile communication terminal by wire or wirelessly.

유선으로는 USB, HDMI, DP ,DVI 등 그 외의 다른 영상 전송가능한 케이블등 을 활용하거나 무선으로는 4G, 5G, 4G LTE, WIFI, ZigBee, Bluetooth, NFC 등을 활용하여 통신한다.It uses USB, HDMI, DP, DVI, and other video transmission cables for wired communication, and wirelessly uses 4G, 5G, 4G LTE, WIFI, ZigBee, Bluetooth, and NFC.

PC화면을 캡처하여 이를 이동 통신단말로 전송하는 스크린 캐스팅 엔진(이하, "스트리머" 장치라 칭한다)을 포함한다.And a screen casting engine (hereinafter referred to as a "streamer" device) for capturing a PC screen and transmitting it to a mobile communication terminal.

PC로부터의 키 이벤트를 캡처하고 이들을 다시 라이브스트리밍 장치로 전송하는데 적합한 키 인젝션(injection) 엔진을 포함한다. It includes a key injection engine suitable for capturing key events from a PC and sending them back to the livestreaming device.

스크린 캐스팅 기술적 설명Screen casting Technical Description

동작action

도 2는 스크린 캐스팅의 동작을 개략적으로 도시한다.2 schematically illustrates the operation of screen casting.

1. PC송신장치(10)상의 스크린캐스팅 프로그램(20)은 프레임 버퍼로부터 비디오 압축부로 현재 화면을 직접 캡처한다.1. The screencasting program 20 on the PC transmitter 10 directly captures the current screen from the frame buffer to the video compression unit.

2. 압축된 비디오는 네트워크 상에서 전송된다. 2. The compressed video is transmitted over the network.

3. 수신측(20)은 압축 해제를 위해 내장된 비디오 디코더 하드웨어(21)를 사용한다.3. The receiving side 20 uses the built-in video decoder hardware 21 for decompression.

4. 비디오는 직접 압축 해제되어 장치의 물리적 화면에 디스플레이 될 수 있다.4. The video can be directly decompressed and displayed on the device's physical screen.

5. 키 인젝션 엔진을 실행하는 수신장치(20)는 로컬 키 및 터치 이벤트들을 캡처하고 이들을 라이브스트리밍 장치에 다시 전송하는 옵션을 갖는다.5. The receiver 20 executing the key injection engine has the option to capture local key and touch events and send them back to the livestreaming device.

6. 스트리머 장치는(10)는 OS/하드웨어 및 훅들을 사용하여 이러한 키들을 실행 중인 프로그램에 주입한다.6. The streamer device 10 injects these keys into the running program using OS / hardware and hooks.

본 발명에 따라 동작함에 의해 하기의 하기의 기술적 특징들이 획득될 수 있고, 이는 본 발명의 기술분야에 속한 당업자에게는 쉽게 이해될 수 있다.By operating in accordance with the present invention the following technical features can be obtained, which can be easily understood by those skilled in the art.

- 물리적 레벨 프레임 속도(Physical-level frame rate) : 디스플레이의 캡쳐가 변경 속도(modification rate)에 의해 변경되며, 변경 속도는 화면이 캡처되는 실제 장치에 의해 결정된다. Physical-level frame rate: The capture of the display is changed by the modification rate, which is determined by the actual device on which the screen is captured.

- 동적 프레임 속도(Dynamic frame rate)는 이용 가능한 대역폭에 따라 다르다.Dynamic frame rate depends on the available bandwidth.

- 낮은 계산 지연(Low Computation delay): 실제 인코딩 및 디코딩 시간에 의해 발생하는 지연시간이 5ms 이내이다. Low Computation delay: The delay caused by the actual encoding and decoding time is within 5ms.

- 네트워크 사용(Network usage): 본 발명에 따라 동작하는 장치들은 최적의 이용가능한 네트워크를 사용할 수 있다. 와이파이를 이용하여 로컬 장치들로 캐스팅하거나, 3G 네트워크를 이용하여 서버를 통해 브로드캐스팅하는 것을 예로 들 수 있다.Network usage: Devices operating according to the present invention can use the best available network. For example, casting to local devices using Wi-Fi or broadcasting through a server using a 3G network.

브로드캐스팅 프로그램 기술적 설명Broadcasting Program Technical Description

송신 호스트가 전송한 데이터가 네트워크에 연결된 모든 호스트에 전송되는 방식. 수신된 데이터에 대한 처리는 전적으로 수신 호스트의 몫으로 남는다.The way data sent by a sending host is sent to all hosts on the network. The processing of the received data remains entirely with the receiving host.

브로드캐스팅 방식에서는 호스트 수가 많을수록 네트워크 트래픽이 급격히 증가하는 단점이 있다. 따라서 이 방식을 사용해야 한다면 네트워크 전체에 대해 데이터를 전송하기보다 특정 서브넷(Subnet)을 사용한다.In the broadcasting method, as the number of hosts increases, network traffic increases rapidly. So if you need to do this, use a specific subnet rather than sending data across the network.

- 단말에는 HD 급과 같은 고화질 영상을 처리하여 전송할 때 코덱 처리를 위한 버퍼와 스트림의 패킷화 변환시 소요되는 대용량의 버퍼가 요구되며 효과적으로 전송 사이즈를 줄이기 위하여 하드웨어 혹은 소프트웨어 코덱들이 활용된다.-When processing and transmitting high-definition video such as HD class, the terminal requires a buffer for codec processing and a large buffer required for packetization conversion of a stream, and hardware or software codecs are utilized to effectively reduce the transmission size.

- AP프로세서가 고성능이지 못할 때는 하드웨어 코덱을 이용하지만 최근 들어 높은 클럭으로 동작되는 다중코어 AP들을 활용한 스마트 단말은 소프트웨어 코덱을 이용하기도 한다. -When the AP processor is not high performance, the hardware codec is used, but smart terminals using multi-core APs that operate at a high clock recently use a software codec.

10 : 화면 송신 프로그램
20 : 이동 통신 단말
21 : 비디오 압축
22 : 네트워크 전송부
24 : PC화면 라이브 스트리밍 APP
30 : 인터넷망
40 : 라이브 스트리밍 서버
10: screen transmission program
20: mobile communication terminal
21: Video Compression
22: network transmission unit
24: PC screen live streaming APP
30: Internet network
40: live streaming server

Claims (5)

라이브스트리밍 방법에 있어서,
화면송신 프로그램을 실행하는 PC와,
PC화면 라이브스트리밍 APP을 실행하는 이동통신단말,
PC 또는 이동 통신단말 장치로서 동작하는 PC화면을 캡쳐하고 유,무선 네트워크상에서 캡쳐된 화면을 다른 이동 통신단말 장치에 전송하는 스크린 캐스팅 엔진,
PC 또는 이동 통신 단말로부터 키 이벤트를 캡쳐하고 이들을 라이브스트리밍 장치에게 다시 전송하는 키 및 터치 인젝션 엔진,
이동통신 단말에서 라이브스트리밍 서버로 영상을 전달하는 인터넷망과,
영상을 사용자들에게 제공해주는 라이브스트리밍 서버를 포함하는 것을 특징으로 하는 라이브스트리밍 방법.
In the live streaming method,
PC running screen transmission program,
Mobile communication terminal running a PC screen live streaming APP,
A screen casting engine that captures a PC screen operating as a PC or a mobile communication terminal device and transmits the screen captured on a wired or wireless network to another mobile communication device;
A key and touch injection engine that captures key events from a PC or mobile terminal and sends them back to the livestreaming device,
Internet network for transmitting the video from the mobile terminal to the live streaming server,
Livestreaming method comprising a livestreaming server for providing a video to users.
청구항 1에 있어서
상기 PC의 프로그램은 상기 키 인젝션 엔진이 캡쳐한 상기 이벤트들을 상기 이동 장치로 제공하고, 상기 사용자의 이동 장치의 동작하면서 제어하는 것을 특징으로 하는 라이브스트리밍 방법.
The method according to claim 1
The program of the PC provides the events captured by the key injection engine to the mobile device, Live streaming method, characterized in that for controlling the operation of the mobile device of the user.
청구항 1에 있어서, PC는 이동통신 단말과 서로 유선 또는 무선으로 데이터를 주고 받는 방식을 특징으로하는 라이브스트리밍 방법.The live streaming method of claim 1, wherein the PC transmits and receives data to or from the mobile communication terminal by wire or wirelessly. 청구항 3에 있어서, 유선으로는 USB, HDMI, DP ,DVI 등 그 외의 다른 영상 전송가능한 케이블등 을 활용하거나 무선으로는 4G, 5G, 4G LTE, WIFI, ZigBee, Bluetooth, NFC 등을 활용하여 통신하는 것을 특징으로하는 라이브스트리밍 방법.The method of claim 3, wherein the wired cable is used to communicate with other video transmission cables such as USB, HDMI, DP, DVI, etc., or wirelessly using 4G, 5G, 4G LTE, WIFI, ZigBee, Bluetooth, NFC, and the like. Livestream method characterized in that. 청구항 2에 있어서, PC로부터의 키 이벤트를 캡처하고 이들을 다시 스트리머 장치로 전송하는데 적합한 키 인젝션 엔진을 포함하는 라이브스트리밍 방법.

The method of claim 2, comprising a key injection engine suitable for capturing key events from a PC and sending them back to the streamer device.

KR1020180065695A 2018-06-07 2018-06-07 Method of Live Streaming by Mobile Device KR20190139088A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020180065695A KR20190139088A (en) 2018-06-07 2018-06-07 Method of Live Streaming by Mobile Device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020180065695A KR20190139088A (en) 2018-06-07 2018-06-07 Method of Live Streaming by Mobile Device

Publications (1)

Publication Number Publication Date
KR20190139088A true KR20190139088A (en) 2019-12-17

Family

ID=69056626

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020180065695A KR20190139088A (en) 2018-06-07 2018-06-07 Method of Live Streaming by Mobile Device

Country Status (1)

Country Link
KR (1) KR20190139088A (en)

Similar Documents

Publication Publication Date Title
JP6595006B2 (en) Low latency screen mirroring
US9693080B2 (en) Distribution control system, distribution control method, and computer-readable storage medium
US9294533B2 (en) Distribution control, method and system for changing a parameter of reproduction quality at a communication terminal based on the received transmission delay time information
JP5983761B2 (en) Server device, terminal, thin client system, screen transmission method and program
WO2018010662A1 (en) Video file transcoding method and device, and storage medium
JP6338688B2 (en) Video synchronized playback method, apparatus, and system
CN105072190A (en) Method and system for realizing real-time desktop cloud
US9497492B2 (en) Distribution control system, distribution system, distribution control method, and computer-readable storage medium
CN109040786B (en) Camera data transmission method, device and system and storage medium
US20160044079A1 (en) Distribution control system, distribution control method, and computer-readable storage medium
JP5888417B2 (en) Communication system, method and program
WO2017084309A1 (en) Device for wirelessly transmitting video, video playing device, method, and system
CN103329521A (en) Methods, apparatuses and computer program products for pausing video streaming content
US9723337B2 (en) Distribution control system and distribution system
CN112035081A (en) Screen projection method and device, computer equipment and storage medium
EP2974317B1 (en) Computer system, distribution control system, distribution control method, and computer-readable storage medium
US11893963B2 (en) Wireless programmable media processing system
CN102611878A (en) Low-bandwidth-occupancy high-definition camera mapping method
WO2021057697A1 (en) Video encoding and decoding methods and apparatuses, storage medium, and electronic device
CN103957391A (en) Method and system for displaying videos of all parties at same time during multi-party call in video intercom
CN205105347U (en) Video wireless transmission equipment, video playback devices and system
WO2022057362A1 (en) Image processing method and apparatus, cloud real machine system, storage medium, and electronic device
CN112929704B (en) Data transmission method, device, electronic equipment and storage medium
KR20190139088A (en) Method of Live Streaming by Mobile Device
CN110798700B (en) Video processing method, video processing device, storage medium and electronic equipment