KR102067360B1 - 실시간 그룹 스트리밍 콘텐츠 처리 방법 및 장치 - Google Patents

실시간 그룹 스트리밍 콘텐츠 처리 방법 및 장치 Download PDF

Info

Publication number
KR102067360B1
KR102067360B1 KR1020190088493A KR20190088493A KR102067360B1 KR 102067360 B1 KR102067360 B1 KR 102067360B1 KR 1020190088493 A KR1020190088493 A KR 1020190088493A KR 20190088493 A KR20190088493 A KR 20190088493A KR 102067360 B1 KR102067360 B1 KR 102067360B1
Authority
KR
South Korea
Prior art keywords
content
stream
captured
provider
video stream
Prior art date
Application number
KR1020190088493A
Other languages
English (en)
Inventor
이승건
Original Assignee
이승건
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 이승건 filed Critical 이승건
Priority to KR1020190088493A priority Critical patent/KR102067360B1/ko
Application granted granted Critical
Publication of KR102067360B1 publication Critical patent/KR102067360B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236—Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • H04N21/2365—Multiplexing of several video streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/21—Server components or server architectures
    • H04N21/218—Source of audio or video content, e.g. local disk arrays
    • H04N21/21805—Source of audio or video content, e.g. local disk arrays enabling multiple viewpoints, e.g. using a plurality of cameras
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/21—Server components or server architectures
    • H04N21/218—Source of audio or video content, e.g. local disk arrays
    • H04N21/2187—Live feed
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/27—Server based end-user applications
    • H04N21/274—Storing end-user multimedia data in response to end-user request, e.g. network recorder
    • H04N21/2743—Video hosting of uploaded data from client

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • Information Transfer Between Computers (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

실시간 그룹 스트리밍 콘텐츠의 제공 방법 및 장치가 개시된다. 일실시예에 따른 실시간 그룹 스트리밍 콘텐츠의 제공 장치는 실시간 그룹 스트리밍 콘텐츠의 제공을 위한 콘텐츠 제공 채널 및 콘텐츠 시청 채널을 생성하고, 콘텐츠 제공자들의 콘텐츠 제공 단말들로부터 콘텐츠 제공 채널을 통한 접속들을 인식하고, 콘텐츠 시청자들의 콘텐츠 시청 단말들로부터 콘텐츠 시청 채널을 통한 접속들을 인식하고, 콘텐츠 제공자들의 촬영 영상 스트림들을 콘텐츠 제공 단말들로부터 각각 수신하고, 콘텐츠 제공자들 중 어느 하나의 콘텐츠 제공자와 연관된 영상 표시 모드에 대한 선택 입력을 전송한 콘텐츠 시청 단말로, 콘텐츠 제공자의 촬영 영상 스트림을 중심으로 촬영 영상 스트림들 중 적어도 하나를 합성하여 생성한 콘텐츠 제공자 중심 영상 스트림을 전송할 수 있다.

Description

실시간 그룹 스트리밍 콘텐츠 처리 방법 및 장치{METHOD AND APPARATUS FOR PROCESSING REAL-TIME GROUP STREAMING CONTENTS}
아래 실시예들은 실시간으로 그룹 스트리밍 콘텐츠 서비스를 제공하는 기술에 관한 것이다.
통신 기술의 발전으로 모바일 플랫폼이 대중화되고 있고, 영상을 소비하는 방식은 전통적인 텔레비전 매체에서 벗어나 유튜브TM와 같은 다양한 동영상 플랫폼으로 확장되고 있다. 방송국과 같이 전문적으로 영상을 생산하는 콘텐츠 제작자의 영역도 1인 창작자 또는 1인 미디어와 같은 형태로 일반인, 대중에게 확대되고 있다. 5G(5 generation) 통신 기술이 보급되면서 현장감과 체험감을 극대화시킬 수 있는 가상현실(VR) 또는 증강현실(AR) 기반 콘텐츠도 늘어나고 있다.
실시간으로 주고받을 수 있는 데이터 규모가 커짐에 따라 영상 콘텐츠를 스트리밍 방식으로 제공하는 기술이 실생활에서 구현되고 있고, 텍스트와 이미지를 넘어 동영상으로 소통하는 서비스가 보편화되고 있다. 대중적인 소통 채널로서 동영상 콘텐츠 스트리밍 서비스가 자리 잡히면서, 일반인, 연예인 정치인 등 다양한 분야의 콘텐츠 제작자들이 참여하고 있다. 통신기술의 발전과 동영상 콘텐츠 서비스의 확장에 따라, 콘텐츠의 사용성, 체험감, 편의성을 높이기 위한 기술의 연구가 요구된다.
KR100869765 KR101714048B1 KR101630018B1 KR100881371B1
실시예들은 실시간으로 제공되는 스트리밍 콘텐츠를 그룹화하여 시청자들에게 제공하고자 한다.
실시예들은 스트리밍 콘텐츠들 중 어느 하나를 중심으로 영상 스트림을 생성하여, 시청자들 별로 차별화된 콘텐츠를 제공하고자 한다.
실시예들은 복수의 콘텐츠들 중 시청자가 원하는 콘텐츠를 실시간으로 선택하고 편집하는 체험감을 제공하고자 한다.
실시예들은 콘텐츠 제공자들 별로 시청자 그룹을 분류하여 자신이 선호하는 동영상 콘텐츠를 선별하고, 콘텐츠 제공자와 개별적으로 소통하는 체험감을 제공하고자 한다.
일실시예에 따른 실시간 그룹 스트리밍 콘텐츠 처리 방법은 실시간 그룹 스트리밍 콘텐츠의 제공을 위한 콘텐츠 제공 채널 및 콘텐츠 시청 채널을 생성하는 단계; 콘텐츠 제공자들의 콘텐츠 제공 단말들로부터 상기 콘텐츠 제공 채널을 통한 접속들을 인식하는 단계; 콘텐츠 시청자들의 콘텐츠 시청 단말들로부터 상기 콘텐츠 시청 채널을 통한 접속들을 인식하는 단계; 상기 콘텐츠 제공자들의 촬영 영상 스트림들을 상기 콘텐츠 제공 단말들로부터 각각 수신하는 단계; 및 상기 콘텐츠 제공자들 중 어느 하나의 콘텐츠 제공자와 연관된 영상 표시 모드에 대한 선택 입력을 전송한 콘텐츠 시청 단말로, 상기 콘텐츠 제공자의 촬영 영상 스트림을 중심으로 상기 촬영 영상 스트림들 중 적어도 하나를 합성하여 생성한 상기 콘텐츠 제공자 중심 영상 스트림을 전송하는 단계를 포함한다.
일실시예에 따르면, 상기 콘텐츠 제공자 중심 영상 스트림을 전송하는 단계는 제1 콘텐츠 시청자 그룹에 속한 제1 콘텐츠 시청자들의 제1 콘텐츠 시청 단말들로부터, 영상 표시 모드들 중 제1 영상 표시 모드-상기 제1 영상 표시 모드는 상기 콘텐츠 제공자들 중 제1 콘텐츠 제공자를 중심으로 영상이 표시되는 모드임-에 대한 제1 선택 입력을 수신하는 단계; 상기 제1 선택 입력에 응답하여, 상기 콘텐츠 제공자들 중 상기 제1 콘텐츠 제공자의 제1 촬영 영상 스트림을 식별하는 단계; 상기 식별된 제1 촬영 영상 스트림을 중심으로 상기 촬영 영상 스트림들 중 상기 제1 촬영 영상 스트림을 포함한 적어도 하나를 합성하여, 제1 콘텐츠 제공자 중심 영상 스트림을 생성하는 단계; 제2 콘텐츠 시청자 그룹에 속한 제2 콘텐츠 시청자들의 제2 콘텐츠 시청 단말들로부터, 영상 표시 모드들 중 제2 영상 표시 모드-상기 제2 영상 표시 모드는 상기 콘텐츠 제공자들 중 제2 콘텐츠 제공자를 중심으로 영상이 표시되는 모드임-에 대한 제2 선택 입력을 수신하는 단계; 상기 제2 선택 입력에 응답하여, 상기 콘텐츠 제공자들 중 상기 제2 콘텐츠 제공자의 제2 촬영 영상 스트림을 식별하는 단계; 상기 식별된 제2 촬영 영상 스트림을 중심으로 상기 촬영 영상 스트림들 중 상기 제2 촬영 영상 스트림을 포함한 적어도 하나를 합성하여, 제2 콘텐츠 제공자 중심 영상 스트림을 생성하는 단계; 및 상기 제1 콘텐츠 제공자 중심 영상 스트림을 인코딩하여 상기 제1 콘텐츠 시청 단말들로 전송하고, 상기 제2 콘텐츠 제공자 중심 영상 스트림을 인코딩하여 상기 제2 콘텐츠 시청 단말들로 전송하는 단계를 포함할 수 있다.
일실시예에 따르면, 상기 콘텐츠 제공자들 중 적어도 하나는 진행자이고, 상기 진행자를 제외한 나머지 콘텐츠 제공자들은 게스트들이며, 상기 제1 콘텐츠 제공자 중심 영상 스트림을 생성하는 단계는 상기 진행자의 촬영 영상 스트림 및 게스트인 상기 제1 콘텐츠 제공자의 상기 제1 촬영 영상 스트림을 영상 프레임 내 미리 정의된 프레임들에 각각 배치하는 단계; 및 상기 미리 정의된 프레임들에 각각 배치된 상기 진행자의 상기 촬영 영상 스트림 및 상기 제1 촬영 영상 스트림을 합성하여, 상기 제1 콘텐츠 제공자 중심 영상 스트림을 생성하는 단계를 포함하고, 상기 제2 콘텐츠 제공자 중심 영상 스트림을 생성하는 단계는 상기 진행자의 상기 촬영 영상 스트림 및 게스트인 상기 제2 콘텐츠 제공자의 상기 제2 촬영 영상 스트림을 영상 프레임 내 미리 정의된 프레임들에 각각 배치하는 단계; 및 상기 미리 정의된 프레임들에 각각 배치된 상기 진행자의 상기 촬영 영상 스트림 및 상기 제2 촬영 영상 스트림을 합성하여, 상기 제2 콘텐츠 제공자 중심 영상 스트림을 생성하는 단계를 포함할 수 있다.
일실시예에 따르면, 상기 콘텐츠 제공자 중심 영상 스트림을 전송하는 단계는 상기 콘텐츠 제공자들 중 상기 영상 표시 모드에 대한 선택 입력에 대응하는 상기 콘텐츠 제공자를 식별하는 단계; 상기 촬영 영상 스트림들 중 상기 콘텐츠 제공자의 상기 촬영 영상 스트림을 식별하는 단계; 상기 영상 표시 모드에 대응하는 영상 프레임을 획득하는 단계; 상기 영상 프레임 내에서, 상기 영상 표시 모드에 대응하는 메인 프레임에 상기 식별된 촬영 영상 스트림을 배치하고, 서브 프레임들 중 적어도 하나에 상기 식별된 촬영 영상 스트림을 제외한 나머지 촬영 영상 스트림들 중 적어도 하나를 배치하는 단계; 및 상기 배치된 촬영 영상 스트림 및 상기 배치된 적어도 하나의 나머지 영상 스트림을 합성하여 상기 콘텐츠 제공자 중심 영상 스트림을 생성하는 단계를 포함할 수 있다.
일실시예에 따르면, 상기 콘텐츠 제공자 중심 영상 스트림을 전송하는 단계는 상기 선택 입력에 대응하는 상기 콘텐츠 제공자의 상기 촬영 영상 스트림을 영상 프레임 내 미리 정의된 비율로 고정적으로 배치하고, 상기 배치된 촬영 영상 스트림을 제외한 나머지 촬영 영상 스트림들 중 적어도 하나를 상기 영상 프레임 내 선택적으로 배치하여, 상기 촬영 영상 스트림들 중 적어도 하나를 합성한 상기 콘텐츠 제공자 중심 영상 스트림을 생성하는 단계를 포함할 수 있다.
일실시예에 따르면, 상기 콘텐츠 제공자 중심 영상 스트림을 전송하는 단계는 상기 선택 입력에 대응하는 상기 콘텐츠 제공자의 상기 촬영 영상 스트림을 영상 프레임 내 미리 정의된 시간 비중으로 배치하고, 상기 배치된 촬영 영상 스트림을 제외한 나머지 촬영 영상 스트림들 중 적어도 하나를 상기 영상 프레임 내 선택적으로 배치하여, 상기 촬영 영상 스트림들 중 적어도 하나를 합성한 상기 콘텐츠 제공자 중심 영상 스트림을 생성하는 단계를 포함할 수 있다.
일실시예에 따른 실시간 그룹 스트리밍 콘텐츠 처리 방법은 상기 촬영 영상 스트림들에 기초하여, 상기 콘텐츠 제공자들의 제스처들 및 음성들을 인식하는 단계; 상기 제스처들 및 음성들 중 적어도 하나에 기초하여, 영상 프레임 내 기 배치된 촬영 영상 스트림을 상기 촬영 영상 스트림들 중 적어도 하나로 교체하는 단계; 상기 적어도 하나로 교체한 촬영 영상 스트림에 기초하여, 상기 촬영 영상 스트림들 중 적어도 하나를 합성한 영상 스트림을 생성하는 단계; 및 상기 생성된 영상 스트림을 상기 콘텐츠 시청 단말들 중 적어도 하나로 전송하는 단계를 더 포함할 수 있다.
일실시예에 따른 실시간 그룹 스트리밍 콘텐츠 처리 방법은 상기 촬영 영상 스트림들에 기초하여, 상기 콘텐츠 제공자들의 제스처들 및 음성들 중 영상 효과 대상에 대응하는 제스처 및 음성 중 적어도 하나를 인식하는 단계; 상기 인식된 제스처 및 음성 중 적어도 하나에 대응하는 촬영 영상 스트림을 식별하는 단계; 상기 식별된 촬영 영상 스트림에 영상 효과를 적용하는 단계; 상기 영상 효과가 적용된 상기 촬영 영상 스트림에 기초하여, 상기 촬영 영상 스트림들 중 적어도 하나를 합성한 영상 스트림을 생성하는 단계; 및 상기 생성된 영상 스트림을 상기 콘텐츠 시청 단말들 중 적어도 하나로 전송하는 단계를 더 포함할 수 있다.
일실시예에 따른 실시간 그룹 스트리밍 콘텐츠 처리 방법은 상기 콘텐츠 시청자들을 분류하는 콘텐츠 시청자 그룹들에 각각 대응하는 콘텐츠 채팅방들을 개설하는 단계; 제1 콘텐츠 시청자 그룹에 대응하는 제1 콘텐츠 채팅방을 통해 제1 콘텐츠 시청 단말들과 제1 콘텐츠 제공자 단말을 연결하는 단계; 상기 제1 콘텐츠 시청 단말들로부터 제1 채팅 입력을 수신하여 상기 제1 콘텐츠 채팅방을 통해 표시하는 단계; 제2 콘텐츠 시청자 그룹에 대응하는 제2 콘텐츠 채팅방을 통해 제2 콘텐츠 시청 단말들과 제2 콘텐츠 제공자 단말을 연결하는 단계; 및 제2 콘텐츠 시청 단말들로부터 제2 채팅 입력을 수신하여 상기 제2 콘텐츠 채팅방을 통해 표시하는 단계를 더 포함하고, 상기 콘텐츠 제공자 중심 영상 스트림을 전송하는 단계는 상기 제1 채팅 입력에 포함된 제1 키워드들 중 적어도 하나에 기초하여, 상기 제1 콘텐츠 제공자의 제1 촬영 영상 스트림에 제1 영상 효과를 적용하는 단계; 상기 제1 영상 효과가 적용된 상기 제1 촬영 영상 스트림을 중심으로 상기 촬영 영상 스트림들 중 적어도 하나를 합성하여, 제1 콘텐츠 제공자 중심 영상 스트림을 생성하는 단계; 상기 제2 채팅 입력에 포함된 제2 키워드들 중 적어도 하나에 기초하여, 상기 제2 콘텐츠 제공자의 제2 촬영 영상 스트림에 제2 영상 효과를 적용하는 단계; 및 상기 제2 영상 효과가 적용된 상기 제2 촬영 영상 스트림을 중심으로 상기 촬영 영상 스트림들 중 적어도 하나를 합성하여, 제2 콘텐츠 제공자 중심 영상 스트림을 생성하는 단계를 포함할 수 있다.
일실시예에 따르면, 상기 제1 콘텐츠 제공자 중심 영상 스트림을 생성하는 단계는 콘텐츠 시청자 그룹들에 각각 속한 상기 콘텐츠 시청자들의 분포 및 상기 콘텐츠 채팅방들에 참여하는 상기 콘텐츠 시청자들의 분포 중 적어도 하나에 기초하여, 영상 프레임 내 상기 제1 촬영 영상 스트림의 크기, 상기 제1 촬영 영상 스트림이 배치되는 위치 및 상기 제1 촬영 영상 스트림에 적용되는 제1 영상 효과 중 적어도 하나를 변경하는 단계를 포함하고, 상기 제2 콘텐츠 제공자 중심 영상 스트림을 생성하는 단계는 콘텐츠 시청자 그룹들에 각각 속한 상기 콘텐츠 시청자들의 분포 및 상기 콘텐츠 채팅방들에 참여하는 상기 콘텐츠 시청자들의 분포 중 적어도 하나에 기초하여, 영상 프레임 내 상기 제2 촬영 영상 스트림의 크기, 상기 제2 촬영 영상 스트림이 배치되는 위치 및 상기 제2 촬영 영상 스트림에 적용되는 제2 영상 효과 중 적어도 하나를 변경하는 단계를 포함할 수 있다.
일실시예에 따른 실시간 그룹 스트리밍 콘텐츠 처리 방법은 상기 제1 콘텐츠 시청 단말들 중 어느 하나의 콘텐츠 시청 단말로부터 상기 제2 콘텐츠 제공자를 중심으로 영상이 표시되는 제2 영상 표시 모드에 대한 선택 입력을 수신하는 단계; 상기 선택 입력에 대응하는 콘텐츠 시청자를 상기 제2 콘텐츠 시청자 그룹으로 분류하고, 상기 제2 콘텐츠 채팅방에 참여시키는 단계; 및 상기 제2 콘텐츠 제공자 중심 영상 스트림을 상기 선택 입력에 대응하는 콘텐츠 시청 단말로 전송하는 단계를 더 포함할 수 있다.
일실시예에 따르면, 상기 콘텐츠 제공자 중심 영상 스트림을 전송하는 단계는 상기 제1 촬영 영상 스트림 내 상기 제1 콘텐츠 제공자의 제스처 및 음성 중 적어도 하나를 인식하여, 상기 촬영 영상 스트림들 중 상기 제1 촬영 영상 스트림을 제거하고, 상기 제1 콘텐츠 채팅방을 폐쇄 단계; 상기 제1 콘텐츠 시청 단말들로부터 수신한 선택 입력들에 기초하여, 제1 콘텐츠 시청자들 중 적어도 하나를 상기 제2 콘텐츠 시청자 그룹으로 분류하고, 상기 제2 콘텐츠 채팅방에 참여시키는 단계; 상기 제1 촬영 영상 스트림 내 상기 제1 콘텐츠 제공자의 추가 제스처 및 추가 음성 중 적어도 하나를 인식하여, 상기 촬영 영상 스트림들 중 상기 제1 촬영 영상 스트림을 포함시키는 단계; 및 상기 제2 콘텐츠 시청자 그룹으로 분류된 상기 제1 콘텐츠 시청자들 중 적어도 하나를 제1 콘텐츠 시청자 그룹으로 분류하고, 상기 제1 콘텐츠 채팅방을 개설하여 참여시키는 단계를 더 포함할 수 있다.
일실시예에 따르면, 상기 콘텐츠 제공자 중심 영상 스트림을 전송하는 단계는 상기 콘텐츠 채팅방들을 통해 상기 콘텐츠 제공자들 사이의 순위 경쟁 또는 투표를 위한 채팅 입력들을 수신하는 단계; 상기 채팅 입력들에 기초하여, 상기 콘텐츠 제공자들 사이의 경쟁 결과를 생성하는 단계; 및 상기 경쟁 결과에 기초하여, 영상 프레임 내 상기 촬영 영상 스트림들 중 적어도 하나의 크기, 배치되는 위치 및 영상 효과 중 적어도 하나를 변경하는 단계를 포함할 수 있다.
일실시예에 따르면, 상기 제1 영상 효과를 적용하는 단계는 상기 제1 콘텐츠 시청 단말들에 의해 균등하게 지불되는 비용들을 합산하는 단계; 및 상기 합산 결과에 기초하여, 상기 제1 콘텐츠 제공자를 상징하는 영상 효과를 상기 제1 촬영 영상 스트림에 적용하는 단계를 포함할 수 있다.
일실시예에 따르면, 상기 콘텐츠 제공자 중심 영상 스트림을 전송하는 단계는 상기 콘텐츠 시청 단말로부터 상기 콘텐츠 제공자들 중 적어도 둘 이상의 콘텐츠 제공자들에 대한 우선 순위-상기 우선 순위는 제1 콘텐츠 제공자에 대응하는 제1 순위 및 제2 콘텐츠 제공자에 대응하는 제2 순위를 포함함-를 지정한 선택 입력을 수신하는 단계; 상기 선택 입력에 응답하여, 상기 콘텐츠 제공자들 중 상기 제1 콘텐츠 제공자의 제1 촬영 영상 스트림 및 상기 제2 콘텐츠 제공자의 제2 촬영 영상 스트림을 식별하는 단계; 및 상기 우선 순위에 대응하는 미리 정의된 비중으로 영상 프레임 내 상기 제1 촬영 영상 스트림 및 상기 제2 촬영 영상 스트림 중 적어도 하나를 배치하여, 상기 촬영 영상 스트림들 중 상기 제1 촬영 영상 스트림을 포함한 적어도 하나를 합성한 상기 콘텐츠 제공자 중심 영상 스트림을 생성하는 단계를 포함할 수 있다.
일실시예에 따르면, 상기 콘텐츠 제공자 중심 영상 스트림을 생성하는 단계는 상기 제1 촬영 영상 스트림 내 상기 제1 콘텐츠 제공자의 제스처 및 음성 중 적어도 하나를 인식하여, 상기 영상 프레임 내 상기 제1 촬영 영상 스트림을 상기 제2 촬영 영상 스트림으로 교체하는 단계를 포함할 수 있다.
일실시예에 따르면, 상기 콘텐츠 제공자 중심 영상 스트림을 생성하는 단계는 상기 제1 촬영 영상 스트림 내 상기 제1 콘텐츠 제공자 및 상기 제1 콘텐츠 제공자의 얼굴 중 적어도 하나가 인식되지 않는 시간이 미리 정의된 시간 조건을 충족하는 경우, 상기 영상 프레임 내 상기 제1 촬영 영상 스트림을 상기 제2 촬영 영상 스트림으로 교체하는 단계를 포함할 수 있다.
일실시예에 따른 실시간 그룹 스트리밍 콘텐츠 처리 방법은 콘텐츠 제공 채널들 및 콘텐츠 시청 채널들을 생성하는 단계; 콘텐츠 제공 단말들로부터 상기 콘텐츠 제공 채널들을 통한 접속들을 인식하는 단계; 콘텐츠 시청 단말들로부터 상기 콘텐츠 시청 채널들을 통한 접속들을 인식하는 단계; 및 상기 콘텐츠 제공 채널들 및 상기 콘텐츠 시청 채널들 간을 서로 연결하여, 실시간 그룹 스트리밍 콘텐츠들을 상기 콘텐츠 시청 채널들을 통해 제공하는 단계를 더 포함할 수 있다.
일실시예에 따른 장치는 하드웨어와 결합되어 상술한 방법들 중 어느 하나의 항의 방법을 실행시키기 위하여 매체에 저장된 컴퓨터 프로그램에 의해 제어될 수 있다.
실시예들은 실시간으로 제공되는 스트리밍 콘텐츠를 그룹화하여 시청자들에게 제공할 수 있다.
실시예들은 스트리밍 콘텐츠들 중 어느 하나를 중심으로 영상 스트림을 생성하여, 시청자들 별로 차별화된 콘텐츠를 제공할 수 있다.
실시예들은 복수의 콘텐츠들 중 시청자가 원하는 콘텐츠를 실시간으로 선택하고 편집하는 체험감을 제공할 수 있다.
실시예들은 콘텐츠 제공자들 별로 시청자 그룹을 분류하여 자신이 선호하는 동영상 콘텐츠를 선별하고, 콘텐츠 제공자와 개별적으로 소통하는 체험감을 제공할 수 있다.
도 1은 일실시예에 따른 실시간 그룹 스트리밍 콘텐츠 제공 시스템을 설명하기 위한 도면이다.
도 2는 일실시예에 따른 실시간 그룹 스트리밍 콘텐츠 처리 방법을 설명하기 위한 순서도이다.
도 3 내지 도 14는 일실시예에 따른 실시간 그룹 스트리밍 콘텐츠 처리 방법을 설명하기 위한 도면이다.
도 15는 일실시예에 따른 장치의 구성의 예시도이다.
이하에서, 첨부된 도면을 참조하여 실시예들을 상세하게 설명한다. 그러나, 실시예들에는 다양한 변경이 가해질 수 있어서 특허출원의 권리 범위가 이러한 실시예들에 의해 제한되거나 한정되는 것은 아니다. 실시예들에 대한 모든 변경, 균등물 내지 대체물이 권리 범위에 포함되는 것으로 이해되어야 한다.
실시예들에 대한 특정한 구조적 또는 기능적 설명들은 단지 예시를 위한 목적으로 개시된 것으로서, 다양한 형태로 변경되어 실시될 수 있다. 따라서, 실시예들은 특정한 개시형태로 한정되는 것이 아니며, 본 명세서의 범위는 기술적 사상에 포함되는 변경, 균등물, 또는 대체물을 포함한다.
제1 또는 제2 등의 용어를 다양한 구성요소들을 설명하는데 사용될 수 있지만, 이런 용어들은 하나의 구성요소를 다른 구성요소로부터 구별하는 목적으로만 해석되어야 한다. 예를 들어, 제1 구성요소는 제2 구성요소로 명명될 수 있고, 유사하게 제2 구성요소는 제1 구성요소로도 명명될 수 있다.
어떤 구성요소가 다른 구성요소에 "연결되어" 있다고 언급된 때에는, 그 다른 구성요소에 직접적으로 연결되어 있거나 또는 접속되어 있을 수도 있지만, 중간에 다른 구성요소가 존재할 수도 있다고 이해되어야 할 것이다.
실시예에서 사용한 용어는 단지 설명을 목적으로 사용된 것으로, 한정하려는 의도로 해석되어서는 안된다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다. 본 명세서에서, "포함하다" 또는 "가지다" 등의 용어는 명세서 상에 기재된 특징, 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.
다르게 정의되지 않는 한, 기술적이거나 과학적인 용어를 포함해서 여기서 사용되는 모든 용어들은 실시예가 속하는 기술 분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 것과 동일한 의미를 가지고 있다. 일반적으로 사용되는 사전에 정의되어 있는 것과 같은 용어들은 관련 기술의 문맥 상 가지는 의미와 일치하는 의미를 가지는 것으로 해석되어야 하며, 본 출원에서 명백하게 정의하지 않는 한, 이상적이거나 과도하게 형식적인 의미로 해석되지 않는다.
또한, 첨부 도면을 참조하여 설명함에 있어, 도면 부호에 관계없이 동일한 구성 요소는 동일한 참조부호를 부여하고 이에 대한 중복되는 설명은 생략하기로 한다. 실시예를 설명함에 있어서 관련된 공지 기술에 대한 구체적인 설명이 실시예의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우 그 상세한 설명을 생략한다.
실시예들은 퍼스널 컴퓨터, 랩톱 컴퓨터, 태블릿 컴퓨터, 스마트 폰, 텔레비전, 스마트 가전 기기, 지능형 자동차, 키오스크, 웨어러블 장치 등 다양한 형태의 제품으로 구현될 수 있다.
도 1은 일실시예에 따른 실시간 그룹 스트리밍 콘텐츠 제공 시스템을 설명하기 위한 도면이다.
도 1을 참조하면, 실시간 그룹 스트리밍 콘텐츠 제공 시스템은 서버(101), 네트워크(102), 콘텐츠 제공자 그룹(103) 및 콘텐츠 시청자 그룹(104)을 포함한다. 실시간 그룹 스트리밍 콘텐츠 제공 시스템은 실시간으로 그룹 스트리밍 콘텐츠를 제공하는 시스템으로서, 콘텐츠 시청자들(141, 142 및 143)의 콘텐츠 시청 단말들(151, 152 및 153)로 그룹 스트리밍 콘텐츠를 제공하기 위한 복수의 주체들로 구성된다. 그룹 스트리밍 콘텐츠는 복수의 주체들에 의해 생성된 촬영 영상 스트림들 중 적어도 하나를 조합하여 생성된 콘텐츠로서, 예를 들어 복수의 주체들이 각자의 스마트폰들로 각각 촬영하여 생성된 영상들을 실시간으로 합성하여 스트리밍 형태로 제공되는 콘텐츠일 수 있다. 콘텐츠 제공자 그룹(103)은 콘텐츠를 제공하는 주체와 연관된 그룹으로서, 예를 들어 콘텐츠를 생성하기 위한 촬영 영상을 전송하는 단말들 및 그 촬영 영상의 대상이 되는 주체들을 포함할 수 있다. 콘텐츠 시청자 그룹(104)은 콘텐츠를 시청하는 주체와 연관된 그룹으로서, 예를 들어 실시간 그룹 스트리밍 콘텐츠를 재생하거나 표시하는 단말들 및 그 단말들을 통해 콘텐츠를 시청하거나 소통하는 주체들을 포함할 수 있다.
일실시예에 따른 시스템의 주체는 통신 기능이 포함된 전자 장치일 수 있다. 예를 들면, 전자 장치는 스마트폰(smartphone), 태블릿 PC(tablet personal computer), 이동 전화기(mobile phone), 화상전화기, 전자북 리더기(e-book reader), 데스크톱 PC(desktop personal computer), 랩탑 PC(laptop personal computer), 넷북 컴퓨터(netbook computer), PDA(personal digital assistant), PMP(portable multimedia player), MP3 플레이어, 모바일 의료기기, 카메라(camera), 또는 웨어러블 장치(wearable device)(예: 전자 안경과 같은 head-mounted-device(HMD), 전자 의복, 전자 팔찌, 전자 목걸이, 전자 앱세서리(appcessory), 전자 문신, 스마트카(smart car) 또는 스마트 와치(smartwatch)중 적어도 하나를 포함할 수 있다.
일실시예에 따르면, 전자 장치는 통신 기능을 갖춘 스마트 가전 제품(smart home appliance)일 수 있다. 스마트 가전 제품은, 예를 들자면, 전자 장치는 텔레비전, DVD(digital video disk) 플레이어, 오디오, 냉장고, 에어컨, 청소기, 오븐, 전자레인지, 세탁기, 공기 청정기, 셋톱 박스(set-top box), TV 박스(예를 들면, 삼성 HomeSyncTM, 애플TVTM, 또는 구글 TVTM), 게임 콘솔(game consoles), 전자 사전, 전자 키, 캠코더(camcorder), 또는 전자 액자 중 적어도 하나를 포함할 수 있다.
일실시예에 따르면, 전자 장치는 각종 의료기기(예: MRA(magnetic resonance angiography), MRI(magnetic resonance imaging), CT(computed tomography), 촬영기, 초음파기 등), 네비게이션(navigation) 장치, GPS 수신기(global positioning system receiver), EDR(event data recorder), FDR(flight data recorder), 자동차 인포테인먼트(infotainment) 장치, 선박용 전자 장비(예: 선박용 항법 장치 및 자이로 콤파스 등), 항공 전자기기(avionics), 보안 기기, 차량용 헤드 유닛, 산업용 또는 가정용 로봇, 금융 기관의 ATM(automatic teller's machine) 또는 상점의 POS(point of sales) 중 적어도 하나를 포함할 수 있다.
일실시예에 따르면, 전자 장치는 통신 기능을 포함한 가구(furniture) 또는 건물/구조물의 일부, 전자 보드(electronic board), 전자 사인 입력장치(electronic signature receiving device), 프로젝터(projector), 또는 각종 계측기기(예: 수도, 전기, 가스, 또는 전파 계측 기기 등) 중 적어도 하나를 포함할 수 있다. 일실시예에 따른 전자 장치는 전술한 다양한 장치들 중 하나 또는 그 이상의 조합일 수 있다. 또한, 일실시예에 따른 전자 장치는 플렉서블 장치일 수 있다. 또한, 일실시예에 따른 전자 장치는 전술한 기기들에 한정되지 않음은 당업자에게 자명하다. 다양한 실시예에서 이용되는 유저라는 용어는 전자 장치를 사용하는 사람 또는 전자 장치를 사용하는 장치(예: 인공지능 전자 장치)를 지칭할 수 있다.
일실시예에 따른 전자 장치는 프로세서, 메모리, 유저 인터페이스 및 통신 인터페이스를 포함하고, 다른 전자 장치와 네트워크(102)를 통해 연결될 수 있다. 통신 인터페이스는 유, 무선 네트워크 또는 유선 직렬 통신 등을 통하여 소정 거리 이내의 다른 전자 장치와 데이터를 송수신할 수 있다. 네트워크(102)는 일실시예에 따른 실시간 그룹 스트리밍 콘텐츠 제공 시스템 내 다양한 개체들(entities) 간의 유, 무선 통신을 가능하게 한다. 시스템 내 주체들은 네트워크(102)를 통해 서로 통신할 수 있고, 네트워크(102)는 표준 통신 기술 및/또는 프로토콜들을 사용할 수 있다. 이때, 네트워크(102)는 인터넷(Internet), LAN(Local Area Network), Wireless LAN(Wireless Local Area Network), WAN(Wide Area Network), PAN(Personal Area Network), WCDMA(Wideband Code Division Multiple Access), WiBro(Wireless Broadband), 3G(3rd Generation), LTE(Long-Term Evolution), WiMAX(Worldwide Interoperability for Microwave Acces) 및 5G(5th generation)등을 포함하나 이에 한정되지 않으며, 정보를 송, 수신할 수 있는 다른 종류의 네트워크가 될 수도 있음을 통신 기술 분야의 통상의 지식을 가진 자라면 알 수 있다.
일실시예에 따른 네트워크(102)에는 5G 규격이 채용되어, 시스템 내 주체들은 360도 웨어러블 카메라, 드론과 같은 다양한 장비를 이용한 고화질 영상을 방송할 수 있고, 5G 통신 규격은 초고속 대용량 네트워크를 통해 대용량 데이터 전송과 고 해상도 영상 서비스를 지원할 수 있다. 5G의 특성은 초고속(Enhanced Mobile Broadband), 초저지연(Ultra-Reliable and Low Latency Communication), 초연결(Massive Machine Type Communication)로 요약된다. 5G는 데이터 전송량이 큰 고주파 대역을 사용하여 더 많은 데이터를 빠르게 전송할 수 있고, 4G(LTE)와 비교해 체감 속도가 10배 더 빠를 수 있다. 시스템 내 주체들은 초고화질 영상이나 VR/AR 같은 대용량 콘텐츠를 빠르게 송수신할 수 있고, 즉각적인 응답과 반응을 통해 실시간 서비스를 구현할 수 있으며, 인터넷에 연결될 수 있는 단말과 센서 수를 크게 늘려 대규모 IoT 환경을 구현할 수 있다.
일실시예에 따르면, 콘텐츠 제공자 그룹(103)은 콘텐츠 제공자들(111, 112, 113, 114 및 115)을 포함한다. 콘텐츠 제공자들(111, 112, 113, 114 및 115)은 촬영의 대상이 될 수 있는데, 예를 들어 팬들과 실시간 방송으로 소통하고자 하는 연예인으로서, 아이돌 그룹의 멤버들일 수 있다. 콘텐츠 제공자들(111, 112, 113, 114 및 115)은 콘텐츠 제공 단말들(121, 122, 123, 124 및 125)을 통해 서버(101)로 접속하고, 자신의 촬영 영상을 스트리밍으로 제공할 수 있다. 예를 들어, 콘텐츠 제공자들(111, 112, 113, 114 및 115)은 실시간으로 영상 회의를 진행하는 패널들일 수 있고, 각자를 개별적으로 촬영한 영상을 조합한 콘텐츠를 제공할 수 있다.
일실시예에 따르면, 콘텐츠 제공자(111)는 진행자이고, 콘텐츠 제공자들(112, 113, 114 및 115)은 게스트로서 예를 들어 아이돌 그룹의 멤버들일 수 있다. 콘텐츠 제공자들(111, 114 및 115)은 카메라들(131, 133 및 134)로 자신의 영상을 촬영하고, 콘텐츠 제공 단말들(121, 124 및 125)로 촬영 영상들을 네트워크(102)를 통해 제공할 수 있다. 콘텐츠 제공자들(112 및 113)은 콘텐츠 제공 단말들(122 및 123)로 자신의 영상을 촬영하고, 촬영 영상들을 네트워크(102)를 통해 제공할 수 있다. 콘텐츠 제공자들(111, 112, 113, 114 및 115)은 서로 다른 공간에서 각자의 영상을 촬영하면서 서로 소통할 수 있는데, 예를 들어 진행자인 콘텐츠 제공자(111)는 영상 제작 전문 스튜디오에서 영상을 촬영하고, 아이돌 그룹 멤버들로서 게스트들인 콘텐츠 제공자들(112, 113, 114 및 115)은 각자의 일정에 따라 여건이 되는 공간에서 영상을 촬영할 수 있다. 가령, 콘텐츠 제공자(112)는 차량(132) 근처에서 촬영하고, 콘텐츠 제공자(113)는 자신의 방에서 촬영하고, 콘텐츠 제공자들(114 및 115)는 휴식 공간에서 촬영하는 식으로 물리적으로 서로 동떨어진 공간에서 영상을 촬영하고 시청자들에게 촬영된 영상들의 조합을 제공할 수 있다. 콘텐츠 제공자들(111, 112, 113, 114 및 115)을 통해 생성된 콘텐츠의 구성과 포맷은 영상 회의나 토크쇼 등 다양한 방식으로 구현될 수 있으며, 실시예는 여기에 제한되지 않는다.
일실시예에 따르면, 콘텐츠 시청자 그룹(104)은 콘텐츠 시청자들(141, 142 및 143)을 포함한다. 콘텐츠 시청자들(141, 142 및 143)은 콘텐츠 제공 단말들(121, 122, 123, 124 및 125)로부터 전송된 촬영 영상 스트림들 중 적어도 하나를 합성하여 생성된 영상 스트림을 콘텐츠 시청 단말들(151, 152 및 153)을 통해 시청할 수 있다. 예를 들어, 콘텐츠 시청자들(141, 142 및 143)은 자신이 좋아하는 아이돌 내 멤버들 중 특정 멤버를 중심으로 생성된 영상 스트림을 시청하고자 하는 아이돌 그룹의 팬들일 수 있다. 콘텐츠 시청자들(141, 142 및 143)은 콘텐츠 시청 단말들(151, 152 및 153)을 통해 서버(101)로 접속하고, 콘텐츠 제공자들(111, 112, 113, 114 및 115) 중 적어도 하나의 콘텐츠 제공자를 중심으로 생성된 영상 스트림을 시청할 수 있다. 콘텐츠 시청자들(141, 142 및 143)은 콘텐츠 제공자들(111, 112, 113, 114 및 115)에 각각 대응하는 촬영 영상 스트림들 중 적어도 하나 이상의 우선 순위를 설정하여, 각자 차별적인 영상 스트림을 시청할 수 있다. 예를 들어, 콘텐츠 시청자들(141, 142 및 143)은 콘텐츠 제공자들(111, 112, 113, 114 및 115)이 참여하는 영상 회의를 시청할 때 선호하는 콘텐츠 제공자나 영상을 선별하여 영상 스트림을 시청할 수 있다.
일실시예에 따르면, 콘텐츠 시청자(141)는 콘텐츠 시청 단말(151)을 통해 콘텐츠 제공자(113)를 중심으로 합성된 영상 스트림(161)을 시청할 수 있다. 콘텐츠 시청자(141)는 콘텐츠 제공자(114) 및 콘텐츠 제공자(115)를 콘텐츠 제공자(113)의 후순위로 설정하여 합성된 영상 스트림(161)을 시청할 수 있다. 예를 들어, 콘텐츠 시청자(141)는 유저 인터페이스를 통해 콘텐츠 제공자들(111, 112, 113, 114 및 115) 중 적어도 하나의 우선 순위를 선택하고, 콘텐츠 시청 단말(151)은 유저 인터페이스를 통한 입력에 응답하여 서버(101)와 통신하고 네트워크(102)를 통해 영상 스트림(161)을 수신하고, 표시할 수 있다. 콘텐츠 시청자(142)는 콘텐츠 제공자(113) 및 콘텐츠 제공자(114)를 중심으로 합성된 영상 스트림(162)을 콘텐츠 시청 단말(152)을 통해 시청할 수 있다. 콘텐츠 시청자(143)는 콘텐츠 제공자(115)를 중심으로 합성된 영상 스트림(163)을 콘텐츠 시청 단말(153)을 통해 시청할 수 있다.
일실시예에 따르면, 콘텐츠 시청자들(141, 142 및 143)은 콘텐츠 제공자들(111, 112, 113, 114 및 115)에 의해 생성된 촬영 영상들을 기반으로 생성된 콘텐츠를 일률적 및 일방향적으로 시청하는데 그치지 않고, 자신이 원하는 콘텐츠 제작자 또는 촬영 영상을 중심으로 합성된 콘텐츠를 시청하는 체험감을 제공받을 수 있다. 예를 들어, 콘텐츠 시청자들(141, 142 및 143)은 아이돌 그룹 멤버들 중 선호하는 멤버를 중심으로 실시간 영상 스트림들을 재구성하여 콘텐츠를 소비할 수 있다. 콘텐츠 시청자들(141, 142 및 143)은 복수의 영상 스트림들 중 자신이 원하는 콘텐츠를 실시간으로 선택하고, 편집할 수 있으며, 실시예들은 특정 영상 스트림을 중심으로 합성된 콘텐츠를 제공하여 콘텐츠 시청자들(141, 142 및 143) 별로 차별화된 콘텐츠를 제공하고, 콘텐츠 제공자와 개별적으로 소통하는 체험감을 제공할 수 있다.
일실시예에 따르면, 콘텐츠 제공 단말들(121, 122, 123, 124 및 125)과 콘텐츠 시청 단말들(151, 152 및 153)에는 실시간 그룹 스트리밍 콘텐츠를 제공하기 위한 프로그램이 설치될 수 있다. 설치된 프로그램에 따라 실시간 그룹 스트리밍 콘텐츠 서비스가 제공되기 위한 정보의 송수신, 명령의 처리, 정보의 기록이 수행될 수 있다. 실시간 그룹 스트리밍 콘텐츠 처리 장치는 실시간 그룹 스트리밍 콘텐츠를 제공하기 위한 동작들을 수행하는 장치로서, 서버(101), 콘텐츠 제공 단말들(121, 122, 123, 124 및 125)과 콘텐츠 시청 단말들(151, 152 및 153) 중 적어도 하나 또는 이들의 조합으로 구현될 수 있다. 실시간 그룹 스트리밍 콘텐츠 처리 장치가 수행하는 동작은 서버(101)의 동작일 수 있지만, 상술한 바와 같이 서버(101), 콘텐츠 제공 단말들(121, 122, 123, 124 및 125)과 콘텐츠 시청 단말들(151, 152 및 153) 중 적어도 하나에 의한 연계 동작일 수도 있다. 이하, 도 2 내지 도 15를 참조하여 실시간 그룹 스트리밍 콘텐츠가 제공되는 실시예가 설명된다.
도 2는 일실시예에 따른 실시간 그룹 스트리밍 콘텐츠 처리 방법을 설명하기 위한 순서도이다.
일실시예에 따르면, 실시간 그룹 스트리밍 콘텐츠 처리 장치는 실시간 그룹 스트리밍 콘텐츠의 제공을 위한 콘텐츠 제공 채널 및 콘텐츠 시청 채널을 생성할 수 있다(201). 실시간 그룹 스트리밍 콘텐츠 처리 장치(이하, 콘텐츠 처리 장치라 함)는 실시간으로 그룹 스트리밍 콘텐츠를 제공하는 장치로서, 예를 들어 소프트웨어 모듈, 하드웨어 모듈 또는 이들의 조합으로 구현될 수 있다. 그룹 스트리밍 콘텐츠는 콘텐츠 제공자들의 촬영 영상 스트림들을 합성하여 생성된 스트리밍 콘텐츠일 수 있다. 상술한 바와 같이, 콘텐츠 처리 장치는 네트워크를 통해 접속이 가능한 서버로 구현될 수 있으나, 서버와 통신이 가능한 단말과 서버의 조합으로 구현될 수도 있다. 콘텐츠 처리 장치는 서버 및 단말에 설치된 프로그램에 의해 실행되는 명령들을 수행할 수 있다.
일실시예에 따르면, 콘텐츠 제공 채널은 콘텐츠 제공자들이 콘텐츠 제공 단말들을 통해 서버에 접속하기 위한 채널로서, 콘텐츠 제공자의 촬영 영상 스트림은 콘텐츠 제공 채널을 통해 콘텐츠 제공 단말로부터 전송될 수 있다. 콘텐츠 시청 채널은 콘텐츠 시청자들이 콘텐츠 시청 단말들을 통해 서버에 접속하기 위한 채널로서, 콘텐츠 제공자의 촬영 영상 스트림은 콘텐츠 시청 채널을 통해 콘텐츠 시청 단말로 전송될 수 있다. 콘텐츠 처리 장치는 네트워크를 통해 콘텐츠 제공 채널 및 콘텐츠 시청 채널을 생성하고, 단말들의 접속을 위해 세션을 유지할 수 있다. 콘텐츠 제공 단말과 콘텐츠 시청 단말은 생성된 콘텐츠 제공 채널 및 콘텐츠 시청 채널을 통해 정보를 송수신할 수 있다.
일실시예에 따르면, 콘텐츠 처리 장치는 콘텐츠 제공자들의 콘텐츠 제공 단말들로부터 콘텐츠 제공 채널을 통한 접속들을 인식할 수 있다(202). 콘텐츠 처리 장치는 세션 수립을 위한 채널을 유지할 수 있고, 해당 채널은 특정 그룹에 대응할 수 있다. 콘텐츠 처리 장치는 특정 그룹으로 분류되는 콘텐츠 제공자들의 콘텐츠 제공 단말들이 그 그룹과 대응하는 채널을 통해 접속하는지 여부를 인식하고, 인식된 콘텐츠 제공 단말들을 식별할 수 있다.
일실시예에 따르면, 콘텐츠 처리 장치는 콘텐츠 시청자들의 콘텐츠 시청 단말들로부터 콘텐츠 시청 채널을 통한 접속들을 인식할 수 있다(203). 콘텐츠 처리 장치는 세션 수립을 위한 채널을 유지할 수 있고, 해당 채널은 특정 그룹에 대응할 수 있다. 콘텐츠 처리 장치는 특정 그룹으로 분류되는 콘텐츠 시청자들의 콘텐츠 시청 단말들이 그 그룹과 대응하는 채널을 통해 접속하는지 여부를 인식하고, 인식된 콘텐츠 시청 단말들을 식별할 수 있다. 콘텐츠 제공 채널과 콘텐츠 시청 채널은 서로 매칭될 수 있고, 콘텐츠 처리 장치는 서로 매칭된 콘텐츠 제공 채널과 콘텐츠 시청 채널을 통해 콘텐츠 제공 단말들과 콘텐츠 시청 단말들을 연결할 수 있다.
일실시예에 따르면, 콘텐츠 처리 장치는 콘텐츠 제공자들의 촬영 영상 스트림들을 콘텐츠 제공 단말들로부터 각각 수신할 수 있다(204). 콘텐츠 제공자들은 카메라를 활용하여 영상을 촬영하고, 콘텐츠 제공 단말들은 실시간으로 촬영 영상 스트림들을 콘텐츠 제공 채널을 통해 전송하고, 콘텐츠 처리 장치는 콘텐츠 제공자들에 각각 대응하는 촬영 영상 스트림들을 수신할 수 있다. 예를 들어, 영상 회의에 참여하는 패널들, 콘텐츠 제작을 위한 진행자와 게스트들, 팬들과 소통하기 위한 아이돌 그룹 멤버들은 각각의 촬영 영상 스트림들을 콘텐츠 제공 단말들을 통해 콘텐츠 처리 장치로 전송할 수 있다.
일실시예에 따르면, 콘텐츠 처리 장치는 콘텐츠 제공자들 중 어느 하나의 콘텐츠 제공자와 연관된 영상 표시 모드에 대한 선택 입력을 전송한 콘텐츠 시청 단말로, 콘텐츠 제공자의 촬영 영상 스트림을 중심으로 촬영 영상 스트림들 중 적어도 하나를 합성하여 생성한 콘텐츠 제공자 중심 영상 스트림을 전송할 수 있다(205). 콘텐츠 시청 단말은 콘텐츠 시청자로부터 유저 인터페이스를 통해 영상 표시 모드에 대한 선택을 입력 받을 수 있다.
일실시예에 따르면, 영상 표시 모드는 콘텐츠 제공자들 중 적어도 하나의 콘텐츠 제공자와 연관시켜 영상을 표시하는 모드로서, 예를 들어 콘텐츠 제공자들 중 적어도 하나의 콘텐츠 제공자를 선택하거나 우선 순위를 선택하여 선택 결과에 따라 콘텐츠 제공자의 비중을 영상 내에서 달리 표시하는 모드일 수 있다. 아이돌 그룹 내에서 특정 아이돌 멤버 A의 팬인 콘텐츠 시청자는 아이돌 멤버들 중 멤버 A를 중심으로 영상을 표시하기 위한 영상 표시 모드를 콘텐츠 시청 단말을 통해 선택할 수 있다.
일실시예에 따르면, 콘텐츠 처리 장치는 영상 표시 모드에 대한 선택 입력에 응답하여, 특정 콘텐츠 제공자의 촬영 영상 스트림을 중심으로 촬영 영상 스트림들 중 적어도 하나를 합성하여 영상 스트림을 생성할 수 있다. 특정 촬영 영상 스트림을 중심으로 생성된 영상 스트림을 콘텐츠 제공자 중심 영상 스트림이라 한다. 콘텐츠 처리 장치는 아이돌 멤버들 중 멤버 A의 촬영 영상 스트림을 중심으로 아이돌 멤버들의 촬영 영상 스트림들 중 적어도 하나를 합성하여, 멤버 A 중심 영상 스트림을 생성할 수 있다.
일실시예에 따르면, 콘텐츠 처리 장치는 콘텐츠 제공자 중심 영상 스트림을 영상 표시 모드에 대한 선택 입력을 전송한 콘텐츠 시청 단말로 전송할 수 있다. 콘텐츠 처리 장치는 멤버 A의 팬인 콘텐츠 시청자의 콘텐츠 시청 단말로 멤버 A 중심 영상 스트림을 전송할 수 있다. 콘텐츠 처리 장치는 아이돌 멤버들 중 멤버 B의 촬영 영상 스트림을 중심으로 합성되어 생성된 멤버 B 중심 영상 스트림을 멤버 B를 중심으로 영상을 표시하기 위한 영상 표시 모드를 선택한 팬인 콘텐츠 시청자의 콘텐츠 시청 단말로 전송할 수 있다. 콘텐츠 처리 장치는 실시간으로 제공되는 촬영 영상 스트림들을 기초로 영상 스트림의 합성을 수행하되, 콘텐츠 시청자들의 요구들에 부합하는 특정 콘텐츠 제공자 중심 영상 스트림들을 생성하여 콘텐츠 시청자들 별로 각기 다른 실시간 콘텐츠들을 차별적으로 제공할 수 있다.
도 3은 일실시예에 따른 실시간 그룹 스트리밍 콘텐츠 처리 방법을 설명하기 위한 도면이다.
일실시예에 따르면, 콘텐츠 처리 장치는 실시간 그룹 스트리밍 콘텐츠 서비스를 제공하기 위해, 콘텐츠 제공 채널들 및 콘텐츠 시청 채널들을 생성할 수 있다. 콘텐츠 제공 채널들 및 콘텐츠 시청 채널들은 네트워크(307)를 통해 연결될 수 있다. 콘텐츠 제공 채널들 및 콘텐츠 시청 채널들은 서로 각각 매칭되어 연결될 수 있다.
일실시예에 따르면, 콘텐츠 처리 장치는 제1 콘텐츠 제공자들(301)의 제1 콘텐츠 제공 단말들로부터 제1 콘텐츠 제공 채널을 통한 접속들을 인식할 수 있다. 제1 콘텐츠 제공자들(301)은 그룹화되어 그룹 스트리밍 콘텐츠를 제공하는 주체로 분류될 수 있다.
일실시예에 따르면, 콘텐츠 처리 장치는 제1 콘텐츠 시청자들(304)의 제1 콘텐츠 시청 단말들로부터 제1 콘텐츠 시청 채널을 통한 접속들을 인식할 수 있다. 제1 콘텐츠 시청자들(304)은 그룹화되어 그룹 스트리밍 콘텐츠를 시청하는 주체로 분류될 수 있다. 콘텐츠 처리 장치는 제1 콘텐츠 제공자들(301)의 촬영 영상 스트림들에 기초하여 생성된 그룹 스트리밍 콘텐츠를 제1 콘텐츠 시청 채널을 통해 제1 콘텐츠 시청자들(304)의 제1 콘텐츠 시청 단말들로 제공할 수 있다. 예를 들어, 제1 콘텐츠 제공자들(301)은 아이돌 그룹 A의 멤버들일 수 있고, 제1 콘텐츠 시청자들(304)은 아이돌 그룹 A의 팬들일 수 있으며, 콘텐츠 처리 장치는 제1 콘텐츠 제공 채널과 제1 콘텐츠 시청 채널을 연결하여 콘텐츠 제공자와 시청자 사이의 상호작용을 가능하게 할 수 있다.
일실시예에 따르면, 콘텐츠 처리 장치는 콘텐츠 제공 채널들 및 콘텐츠 시청 채널들 간을 서로 연결하여, 실시간 그룹 스트리밍 콘텐츠들을 콘텐츠 시청 채널들을 통해 제공할 수 있다. 콘텐츠 처리 장치는 제2 콘텐츠 제공 채널 및 제2 콘텐츠 시청 채널을 통해 제2 콘텐츠 제공자들(302)의 제2 콘텐츠 제공 단말들과 제2 콘텐츠 시청자들(305)의 제2 콘텐츠 시청 단말들을 서로 연결할 수 있다. 콘텐츠 처리 장치는 제3 콘텐츠 제공 채널 및 제3 콘텐츠 시청 채널을 통해 제3 콘텐츠 제공자들(303)의 제3 콘텐츠 제공 단말들과 제3 콘텐츠 시청자들(306)의 제3 콘텐츠 시청 단말들을 서로 연결할 수 있다.
예를 들어, 제2 콘텐츠 제공자들(302) 및 제3 콘텐츠 제공자들(303)은 각각 아이돌 그룹 B의 멤버들과 아이돌 그룹 C의 멤버들이고, 제2 콘텐츠 시청자들(305) 및 제3 콘텐츠 시청자들(306)은 각각 아이돌 그룹 B의 팬들과 아이돌 그룹 C의 팬들일 수 있다. 콘텐츠 처리 장치는 콘텐츠 제공자들과 콘텐츠 시청자들을 각각 그룹화하고 서로 매칭시켜 차별화된 요구에 부흥하고, 다양한 유형의 콘텐츠를 생성 및 시청하는데 참여시키기 위한 콘텐츠 플랫폼을 제공할 수 있다.
도 4는 일실시예에 따른 실시간 그룹 스트리밍 콘텐츠 처리 방법을 설명하기 위한 도면이다.
일실시예에 따르면, 콘텐츠 처리 장치는 그룹 스트리밍 콘텐츠를 생성하고자 하는 콘텐츠 제공자들 A 내지 E의 콘텐츠 제공 단말들(401 내지 405)로부터 네트워크(406)를 통해 촬영 영상 스트림들을 수신할 수 있다. 콘텐츠 처리 장치는 제1 콘텐츠 시청자 그룹(407) 내지 제2 콘텐츠 시청자 그룹(408)의 네트워크(406)를 통한 접속을 인식할 수 있다. 콘텐츠 시청자 그룹들은 콘텐츠 제공자들 별로 분류되거나 콘텐츠 제공자들의 조합 또는 우선순위로 분류될 수 있다. 예를 들어, 제1 콘텐츠 시청자 그룹(407)은 콘텐츠 제공자 A에 대응하고, 제2 콘텐츠 시청자 그룹(408)은 콘텐츠 제공자 C에 대응할 수 있다.
일실시예에 따르면, 콘텐츠 처리 장치는 제1 콘텐츠 시청자 그룹(407)에 속한 제1 콘텐츠 시청자들(411 내지 414)의 제1 콘텐츠 시청 단말들로부터, 영상 표시 모드들 중 제1 영상 표시 모드에 대한 제1 선택 입력을 수신할 수 있다. 제1 영상 표시 모드는 콘텐츠 제공자들 A 내지 E 중 콘텐츠 제공자 A를 중심으로 영상이 표시되는 모드일 수 있다.
일실시예에 따르면, 제1 콘텐츠 시청자들(411 내지 414)을 포함한 제1 콘텐츠 시청자 그룹(407)은 제1 영상 표시 모드에 대한 제1 선택 입력에 의해 분류된 그룹일 수 있다. 예를 들어, 제1 콘텐츠 시청자(411)는 제1 콘텐츠 시청 단말(406)의 유저 인터페이스(422)를 통해 콘텐츠 제공자 A를 중심으로 영상이 표시되는 제1 영상 표시 모드를 입력할 수 있다. 제1 콘텐츠 시청자들(411 내지 414)은 제1 영상 표시 모드를 선택한 유저들일 수 있다.
일실시예에 따르면, 콘텐츠 처리 장치는 제1 영상 표시 모드에 대한 제1 선택 입력에 응답하여, 콘텐츠 제공자들 A 내지 E 중 제1 선택 입력에 대응하는 콘텐츠 제공자 A의 제1 촬영 영상 스트림을 식별할 수 있다. 콘텐츠 처리 장치는 식별된 제1 촬영 영상 스트림을 중심으로 콘텐츠 제공자들 A 내지 E의 촬영 영상 스트림들 중 적어도 하나를 합성하여 콘텐츠 제공자 A 중심 영상 스트림을 생성할 수 있다. 콘텐츠 제공자 A 중심 영상 스트림은 콘텐츠 제공자들 A 내지 E의 촬영 영상 스트림들 중 적어도 하나를 합성하되 콘텐츠 제공자 A의 제1 촬영 영상 스트림의 프레임 내 비중 또는 시간 비중을 기준으로 콘텐츠 제공자 A가 중심인 영상 스트림일 수 있다.
일실시예에 따르면, 콘텐츠 처리 장치는 콘텐츠 제공자 A 중심 영상 스트림을 제1 콘텐츠 시청자 그룹(407) 내 제1 콘텐츠 시청자들(411 내지 414)의 제1 콘텐츠 시청 단말들로 전송할 수 있다. 제1 콘텐츠 시청 단말들은 콘텐츠 제공자 A 중심 영상 스트림을 재생하여 표시할 수 있다. 예를 들어, 제1 콘텐츠 시청자(411)의 제1 콘텐츠 시청 단말(406)은 제1 영상 표시 모드에 대응하는 콘텐츠 제공자 A 중심 영상 스트림(423)을 표시할 수 있다.
일실시예에 따르면, 콘텐츠 제공 단말들(401 내지 405)은 촬영 영상 스트림들을 인코딩하여 콘텐츠 처리 장치로 전송할 수 있다. 콘텐츠 처리 장치는 영상 합성을 위해 촬영 영상 스트림들을 디코딩할 수 있다. 콘텐츠 처리 장치는 디코딩된 촬영 영상 스트림들을 특정 촬영 영상 스트림을 중심으로 합성하여, 특정 콘텐츠 제공자 중심 영상 스트림을 생성할 수 있다. 콘텐츠 처리 장치는 콘텐츠 제공자 중심 영상 스트림을 인코딩하고, 인코딩된 콘텐츠 제공자 중심 영상 스트림을 콘텐츠 시청 단말로 전송할 수 있다. 콘텐츠 시청 단말은 수신된 콘텐츠 제공자 중심 영상 스트림을 디코딩하여 재생하고 표시할 수 있다.
일실시예에 따르면, 콘텐츠 처리 장치는 제2 콘텐츠 시청자 그룹(408)에 속한 제2 콘텐츠 시청자들(431 내지 433)의 제2 콘텐츠 시청 단말들로부터, 영상 표시 모드들 중 제2 영상 표시 모드에 대한 제2 선택 입력을 수신할 수 있다. 제2 영상 표시 모드는 콘텐츠 제공자들 A 내지 E 중 콘텐츠 제공자 C를 중심으로 영상이 표시되는 모드일 수 있다.
일실시예에 따르면, 제2 콘텐츠 시청자들(431 내지 433)을 포함한 제2 콘텐츠 시청자 그룹(408)은 제2 영상 표시 모드에 대한 제2 선택 입력에 의해 분류된 그룹일 수 있다. 예를 들어, 제2 콘텐츠 시청자(433)는 제2 콘텐츠 시청 단말(441)의 유저 인터페이스(442)를 통해 콘텐츠 제공자 C를 중심으로 영상이 표시되는 제2 영상 표시 모드를 입력할 수 있다. 제2 콘텐츠 시청자들(431 내지 433)은 제2 영상 표시 모드를 선택한 유저들일 수 있다.
일실시예에 따르면, 콘텐츠 처리 장치는 제2 영상 표시 모드에 대한 제2 선택 입력에 응답하여, 콘텐츠 제공자들 A 내지 E 중 제2 선택 입력에 대응하는 콘텐츠 제공자 C의 제2 촬영 영상 스트림을 식별할 수 있다. 콘텐츠 처리 장치는 식별된 제2 촬영 영상 스트림을 중심으로 콘텐츠 제공자들 A 내지 E의 촬영 영상 스트림들 중 적어도 하나를 합성하여 콘텐츠 제공자 C 중심 영상 스트림을 생성할 수 있다. 콘텐츠 제공자 C 중심 영상 스트림은 콘텐츠 제공자들 A 내지 E의 촬영 영상 스트림들 중 적어도 하나를 합성하되 콘텐츠 제공자 C의 제2 촬영 영상 스트림의 프레임 내 비중 또는 시간 비중을 기준으로 콘텐츠 제공자 C가 중심인 영상 스트림일 수 있다.
일실시예에 따르면, 콘텐츠 처리 장치는 콘텐츠 제공자 C 중심 영상 스트림을 제2 콘텐츠 시청자 그룹(408) 내 제2 콘텐츠 시청자들(431 내지 433)의 제2 콘텐츠 시청 단말들로 전송할 수 있다. 제2 콘텐츠 시청 단말들은 콘텐츠 제공자 C 중심 영상 스트림을 재생하여 표시할 수 있다. 예를 들어, 제2 콘텐츠 시청자(433)의 제2 콘텐츠 시청 단말(441)은 제2 영상 표시 모드에 대응하는 콘텐츠 제공자 C 중심 영상 스트림(443)을 표시할 수 있다. 콘텐츠 시청 그룹들은 동일한 채널을 통해 콘텐츠 제공자들 A 내지 E의 촬영 영상 스트림들을 기초로 생성된 콘텐츠를 소비하지만, 그룹 별로 자신의 선호 또는 취향에 따라 차별화된 촬영 영상 스트림을 제공받을 수 있다.
도 5는 일실시예에 따른 실시간 그룹 스트리밍 콘텐츠 처리 방법을 설명하기 위한 도면이다.
일실시예에 따르면, 콘텐츠 처리 장치는 다양한 포맷의 콘텐츠를 제공할 수 있다. 콘텐츠 처리 장치는 진행자와 게스트들이 참여하는 구도의 콘텐츠를 처리할 수 있다. 콘텐츠 제공자들은 진행자 M과 게스트들 G1 내지 G4로 구성될 수 있다. 예를 들어, 진행자 M은 인터넷 방송에서 활약하고 있는 1인 크리에이터이고, 게스트들 G1 내지 G4는 젊은층이 열광하는 아이돌 그룹의 멤버들일 수 있다. 다만, 이는 예시에 지나지 않고, 진행자와 게스트들의 수와 구도, 양상은 다양하게 변형 또는 응용될 수 있다.
일실시예에 따르면, 콘텐츠 처리 장치는 제1 콘텐츠 시청자 그룹(501)에 속한 제1 콘텐츠 시청자(511)의 제1 콘텐츠 시청 단말(521)로부터 영상 표시 모드들 중 제1 영상 표시 모드에 대한 제1 선택 입력을 수신할 수 있다. 예를 들어, 제1 콘텐츠 시청자(511)는 제1 콘텐츠 시청 단말(521)의 유저 인터페이스(531)를 통해 게스트 G2를 중심으로 영상이 표시되는 제1 영상 표시 모드를 입력할 수 있다. 영상 표시 모드들은 각각 게스트들 G1 내지 G4를 각각 중심으로 영상이 표시되는 모드들이고, 제1 영상 표시 모드는 게스트 G2를 중심으로 영상이 표시되는 모드일 수 있다.
일실시예에 따르면, 콘텐츠 처리 장치는 진행자 M의 촬영 영상 스트림 및 게스트 G2의 제1 촬영 영상 스트림을 영상 프레임 내 미리 정의된 프레임들에 각각 배치할 수 있다. 콘텐츠 처리 장치는 미리 정의된 프레임들에 각각 배치된 촬영 영상 스트림들을 합성하여 게스트 G2 중심 영상 스트림을 생성할 수 있다. 또는, 콘텐츠 처리 장치는 게스트 G2의 제1 촬영 영상 스트림을 촬영 영상 스트림들 중 제1 촬영 영상 스트림을 포함한 적어도 하나를 합성하여, 게스트 G2 중심 영상 스트림을 생성할 수 있다.
일실시예에 따르면, 콘텐츠 처리 장치는 게스트 G2 중심 영상 스트림을 제1 콘텐츠 시청자 그룹(501) 내 제1 콘텐츠 시청자들의 제1 콘텐츠 시청 단말들로 전송할 수 있다. 제1 콘텐츠 시청자(511)의 제1 콘텐츠 시청 단말(521)은 게스트 G2 중심 영상 스트림(541)을 표시할 수 있다. 제1 콘텐츠 시청자 그룹(501) 내 제1 콘텐츠 시청자들은 자신이 선호하는 아이돌 그룹 멤버 G2를 중심으로 진행자 M과 게스트들 G1 내지 G4가 출연하는 콘텐츠를 시청하는 체험감을 제공받을 수 있다.
일실시예에 따르면, 콘텐츠 처리 장치는 제2 콘텐츠 시청자 그룹(502)에 속한 제2 콘텐츠 시청자(512)의 제2 콘텐츠 시청 단말(522)로부터 영상 표시 모드들 중 제2 영상 표시 모드에 대한 제2 선택 입력을 수신할 수 있다. 예를 들어, 제2 콘텐츠 시청자(512)는 제2 콘텐츠 시청 단말(522)의 유저 인터페이스(532)를 통해 게스트 G4를 중심으로 영상이 표시되는 제2 영상 표시 모드를 입력할 수 있다. 제2 영상 표시 모드는 게스트 G4를 중심으로 영상이 표시되는 모드일 수 있다.
일실시예에 따르면, 콘텐츠 처리 장치는 진행자 M의 촬영 영상 스트림 및 게스트 G4의 제2 촬영 영상 스트림을 영상 프레임 내 미리 정의된 프레임들에 각각 배치할 수 있다. 콘텐츠 처리 장치는 미리 정의된 프레임들에 각각 배치된 촬영 영상 스트림들을 합성하여 게스트 G4 중심 영상 스트림을 생성할 수 있다. 또는, 콘텐츠 처리 장치는 게스트 G4의 제2 촬영 영상 스트림을 촬영 영상 스트림들 중 제2 촬영 영상 스트림을 포함한 적어도 하나를 합성하여, 게스트 G4 중심 영상 스트림을 생성할 수 있다.
일실시예에 따르면, 콘텐츠 처리 장치는 게스트 G4 중심 영상 스트림을 제2 콘텐츠 시청자 그룹(502) 내 제2 콘텐츠 시청자들의 제2 콘텐츠 시청 단말들로 전송할 수 있다. 제2 콘텐츠 시청자(512)의 제2 콘텐츠 시청 단말(522)은 게스트 G4 중심 영상 스트림(542)을 표시할 수 있다. 제2 콘텐츠 시청자 그룹(502) 내 제2 콘텐츠 시청자들은 자신이 선호하는 아이돌 그룹 멤버 G4를 중심으로 진행자 M과 게스트들 G1 내지 G4가 출연하는 콘텐츠를 시청하는 체험감을 제공받을 수 있다.
도 6은 일실시예에 따른 실시간 그룹 스트리밍 콘텐츠 처리 방법을 설명하기 위한 도면이다.
일실시예에 따르면, 콘텐츠 처리 장치는 특정 콘텐츠 제공자 또는 특정 콘텐츠 제공자들(우선순위 포함)을 중심으로 촬영 영상 스트림들을 합성할 수 있는데, 새롭게 합성된 영상 스트림을 생성하는 방식은 다양하게 응용 또는 변형될 수 있다. 콘텐츠 처리 장치는 콘텐츠 제공자들 A 내지 D 중 영상 표시 모드에 대한 선택 입력(601)에 대응하는 콘텐츠 제공자 A를 식별할 수 있다. 콘텐츠 처리 장치는 촬영 영상 스트림들 중 콘텐츠 제공자 A의 촬영 영상 스트림을 식별하고, 콘텐츠 제공자 A 중심 영상 스트림(602 내지 607)을 생성할 수 있다.
일실시예에 따르면, 콘텐츠 처리 장치는 영상 표시 모드에 대응하는 영상 프레임을 획득할 수 있다. 영상 프레임은 적어도 하나의 메인 프레임 및 서브 프레임을 포함하여 구성될 수 있고, 단일의 프레임으로만 구현될 수 있다. 예를 들어, 콘텐츠 처리 장치는 단일 프레임으로 구현된 영상 프레임을 획득하여, 콘텐츠 제공자 A의 촬영 영상 스트림만이 표시되기 위한 콘텐츠 제공자 A 중심 영상 스트림(602)을 생성할 수 있다.
일실시예에 따르면, 콘텐츠 처리 장치는 영상 프레임 내에서, 영상 표시 모드에 대응하는 메인 프레임에 콘텐츠 제공자 A의 촬영 영상 스트림을 배치하고, 서브 프레임들 중 적어도 하나에 콘텐츠 제공자 A를 제외한 콘텐츠 제공자 B 내지 D들 중 적어도 하나의 나머지 촬영 영상 스트림을 배치할 수 있다. 콘텐츠 처리 장치는 영상 프레임 내 배치된 적어도 하나의 촬영 영상 스트림을 합성하여 콘텐츠 제공자 A 중심 영상 스트림을 생성할 수 있다.
일실시예에 따르면, 콘텐츠 처리 장치는 콘텐츠 제공자 A의 촬영 영상 스트림을 메인 프레임에 배치하고, 서브 프레임들에 각각 콘텐츠 제공자 B 내지 D들의 촬영 영상 스트림들을 배치하여, 콘텐츠 제공자 A 중심 영상 스트림(603)을 생성할 수 있다. 콘텐츠 제공자 A 중심 영상 스트림(603)은 콘텐츠 제공자 A의 비중이 가장 크지만 나머지 콘텐츠 제공자 B 내지 D들 모두 영상에 등장하므로, 콘텐츠 제공자들 전부를 영상으로 접하고자 하는 시청자에게 적합할 수 있다.
일실시예에 따르면, 콘텐츠 처리 장치는 콘텐츠 제공자 A의 다음 순위에 대응하는 콘텐츠 제공자 B에 대한 선택 입력을 수신하고, 수신된 선택 입력에 응답하여 콘텐츠 제공자 A의 촬영 영상 스트림을 메인 프레임에 배치할 수 있다. 콘텐츠 처리 장치는 메인 프레임보다 상대적으로 비중이 적은 서브 프레임에 콘텐츠 제공자 B의 촬영 영상 스트림을 배치할 수 있다. 콘텐츠 처리 장치는 각각의 프레임들에 콘텐츠 제공자 A 및 B의 촬영 영상 스트림들을 배치한 콘텐츠 제공자 A 중심 영상 스트림(604)을 생성할 수 있다. 콘텐츠 제공자 A 중심 영상 스트림(604)은 콘텐츠 제공자들에 대한 선호도에 우선순위가 있는 시청자에게 적합할 수 있다.
일실시예에 따르면, 콘텐츠 처리 장치는 콘텐츠 제공자 A의 촬영 영상 스트림을 메인 프레임에 디폴트로 고정적으로 배치하고, 서브 프레임에 나머지 콘텐츠 제공자들 B 내지 D의 촬영 영상 스트림들을 선택적으로 배치할 수 있다. 콘텐츠 제공자들 B 내지 D의 촬영 영상 스트림들은 콘텐츠 제공자들 B 내지 D의 음성, 제스처 또는 미리 분배된 분량, 미리 정의된 시간 구간에 따라 서브 프레임에 동적으로 배치될 수 있다.
일실시예에 따르면, 콘텐츠 처리 장치는 콘텐츠 제공자 B의 발화 또는 특정 제스처를 인식하고, 인식 결과에 기초하여 서브 프레임에 콘텐츠 제공자 B의 촬영 영상 스트림을 배치한 콘텐츠 제공자 A 중심 영상 스트림(605)을 생성할 수 있다. 콘텐츠 처리 장치는 콘텐츠 제공자 D의 발화 또는 특정 제스처를 인식하여, 서브 프레임에 콘텐츠 제공자 D의 촬영 영상 스트림을 배치한 콘텐츠 제공자 A 중심 영상 스트림(606)을 생성할 수 있다. 콘텐츠 처리 장치는 콘텐츠 제공자 C의 발화 또는 특정 제스처를 인식하여, 서브 프레임에 콘텐츠 제공자 C의 촬영 영상 스트림을 배치한 콘텐츠 제공자 A 중심 영상 스트림(607)을 생성할 수 있다. 콘텐츠 시청자는 자신이 선호하는 콘텐츠 제공자 A의 촬영 영상 스트림이 고정적으로 배치되고, 나머지 콘텐츠 제공자들의 촬영 영상 스트림들이 동적으로 교체되는 체험감을 제공받을 수 있다.
도 7은 일실시예에 따른 실시간 그룹 스트리밍 콘텐츠 처리 방법을 설명하기 위한 도면이다.
일실시예에 따르면, 콘텐츠 처리 장치는 콘텐츠 제공자들의 촬영 영상 스트림들을 동적으로 합성하여 영상 스트림을 생성하고, 전송할 수 있다. 콘텐츠 처리 장치는 콘텐츠 제공자들의 음성 및 동작, 콘텐츠 시청자들의 피드백 및 통계값, 상황, 콘텐츠 제공 환경, 시간 구간 등 다양한 변수들에 기초하여 시청자에게 제공하기 위한 영상 스트림을 생성할 수 있다. 예를 들어, 콘텐츠 제공자들 A 내지 D의 콘텐츠를 시청하기 위한 시청자들은 콘텐츠 제공자들 A 내지 D 중 적어도 하나 또는 우선 순위에 따른 영상 표시 모드를 선택하여, 자신의 선호 및 취향에 따른 콘텐츠를 선별적으로 소비할 수 있다. 여기서, 콘텐츠 처리 장치는 영상 표시 모드를 선택하지 않거나 디폴트 영상 표시 모드를 선택한 콘텐츠 시청자를 대상으로 한 영상 스트림을 생성하여 제공할 수 있다.
일실시예에 따르면, 콘텐츠 처리 장치는 디폴트 영상 표시 모드로 분류되는 콘텐츠 시청자들을 위한 영상 스트림을 생성할 수 있다. 콘텐츠 처리 장치는 콘텐츠 제공자들 A 내지 D의 촬영 영상 스트림들을 수신하고, 디폴트 영상 표시 모드에 대응하는 영상 프레임을 획득할 수 있다.
일실시예에 따르면, 콘텐츠 처리 장치는 콘텐츠 제공자들 A 내지 D의 촬영 영상 스트림들에 기초하여 콘텐츠 제공자들 A 내지 D의 제스처들 및 음성들을 인식할 수 있다. 콘텐츠 처리 장치는 콘텐츠 제공자들 A 내지 D의 제스처들 및 음성들에 기초하여, 영상 프레임 내 촬영 영상 스트림들의 배치를 조정할 수 있다.
일실시예에 따르면, 콘텐츠 처리 장치는 영상 프레임 내 기 배치된 촬영 영상 스트림을 다른 촬영 영상 스트림으로 교체하거나 기 배치된 촬영 영상 스트림의 서브 프레임을 조절하거나 분할할 수 있다. 콘텐츠 처리 장치는 콘텐츠 제공자들 A 내지 D의 제스처들 및 음성들에 기초하여 변형된 프레임 또는 서브 프레임들 내 촬영 영상 스트림들을 합성하여, 영상 스트림을 생성할 수 있다. 콘텐츠 처리 장치는 생성된 영상 스트림을 디폴트 영상 표시 모드로 분류되는 콘텐츠 시청자들의 콘텐츠 시청 단말들로 전송할 수 있다.
일실시예에 따르면, 콘텐츠 처리 장치는 콘텐츠 제공자들 A 내지 D의 촬영 영상 스트림들을 영상 프레임 내 미리 정의된 서브 프레임들에 병렬적으로 배치하여 영상 스트림(701)을 생성할 수 있다. 영상 스트림(701)은 콘텐츠 제공자들 A 내지 D에 대한 비중을 동일하게 반영하여 합성된 영상 스트림일 수 있다.
일실시예에 따르면, 콘텐츠 처리 장치는 콘텐츠 제공자 A의 음성에 대한 인식 결과에 응답하여, 콘텐츠 제공자 A의 촬영 영상 스트림을 식별할 수 있다. 콘텐츠 처리 장치는 콘텐츠 제공자들 A 내지 D 중 현재 발화하는 콘텐츠 제공자 A를 식별하거나 특정 키워드를 발화하는 콘텐츠 제공자 A를 식별할 수 있다. 콘텐츠 처리 장치는 콘텐츠 A의 촬영 영상 스트림을 메인 프레임에 배치하여 영상 스트림(702)을 생성할 수 있다.
일실시예에 따르면, 콘텐츠 처리 장치는 콘텐츠 제공자 B의 음성에 대한 인식 결과에 응답하여, 콘텐츠 제공자 B의 촬영 영상 스트림을 식별할 수 있다. 콘텐츠 처리 장치는 콘텐츠 B의 촬영 영상 스트림을 메인 프레임에 배치하여 영상 스트림(703)을 생성할 수 있다.
일실시예에 따르면, 콘텐츠 처리 장치는 콘텐츠 제공자 A 및 B의 음성에 대한 인식 결과에 응답하여, 콘텐츠 제공자 A 및 B의 촬영 영상 스트림들을 식별할 수 있다. 콘텐츠 처리 장치는 콘텐츠 제공자 A 및 B의 음성에 대한 인식 결과에 기초하여, 콘텐츠 제공자 A 및 B의 촬영 영상 스트림들의 메인 프레임 내 비중을 판단할 수 있다. 콘텐츠 처리 장치는 음성의 크기, 길이, 키워드 및 콘텐츠 시청자들의 피드백 중 적어도 하나에 기초하여 콘텐츠 제공자 A 및 B의 촬영 영상 스트림들의 메인 프레임 내 비중을 판단할 수 있다. 콘텐츠 처리 장치는 판단 결과에 기초하여 콘텐츠 제공자 A 및 B의 촬영 영상 스트림들을 메인 프레임 내 서브 프레임들에 배치하고, 영상 스트림(704)를 생성할 수 있다.
일실시예에 따르면, 콘텐츠 처리 장치는 콘텐츠 제공자 C의 음성에 대한 인식 결과에 응답하여, 콘텐츠 제공자 C의 촬영 영상 스트림을 식별할 수 있다. 콘텐츠 처리 장치는 콘텐츠 C의 촬영 영상 스트림을 메인 프레임에 배치하여 영상 스트림(705)을 생성할 수 있다.
일실시예에 따르면, 콘텐츠 처리 장치는 콘텐츠 제공자들 A 내지 D의 음성들을 인식할 수 있다. 콘텐츠 처리 장치는 콘텐츠 제공자들 A 내지 D의 음성들에 대한 인식 결과에 기초하여 콘텐츠 제공자들 A 내지 D이 미리 정의된 구간 내에서 발화하는지 여부를 판단할 수 있다. 콘텐츠 처리 장치는 미리 정의된 키워드를 콘텐츠 제공자들 A 내지 D이 동시에 발화하는지 여부를 판단할 수 있다. 콘텐츠 처리 장치는 콘텐츠 제공자들 A 내지 D의 음성들에 대한 인식 결과에 기초하여 콘텐츠 제공자들 A 내지 D의 촬영 영상 스트림들의 메인 프레임 내 비중을 판단할 수 있다. 콘텐츠 처리 장치는 판단 결과에 기초하여 콘텐츠 제공자들 A 내지 D의 촬영 영상 스트림들을 메인 프레임 내 서브 프레임들에 각각 배치하고, 영상 스트림(706)를 생성할 수 있다.
일실시예에 따르면, 콘텐츠 처리 장치는 콘텐츠 제공자들 A 내지 D의 음성들에 대한 인식 결과에 기초하여, 콘텐츠 제공자들 A 내지 D의 메인 프레임 내 비중들을 개별적으로 조절할 수 있다. 콘텐츠 처리 장치는 콘텐츠 제공자들 A 내지 D의 비중들을 A, C, B 및 D의 순서대로 그 크기를 조절하고, 조절된 비중들에 따라 메인 프레임 내 서브 프레임들을 조절하고, 조절된 서브 프레임들에 각각 콘텐츠 제공자들 A 내지 D의 촬영 영상 스트림들을 각각 배치하여 영상 스트림(707)을 생성할 수 있다.
일실시예에 따르면, 콘텐츠 처리 장치는 콘텐츠 제공자 B의 음성에 대한 인식 결과에 응답하여, 콘텐츠 제공자 B의 촬영 영상 스트림을 식별할 수 있다. 예를 들어, 콘텐츠 처리 장치는 콘텐츠 제공자 B의 음성 인식 결과가 미리 정의된 키워드에 대응하는지 여부를 판단하고, 판단 결과에 응답하여 콘텐츠 B의 촬영 영상 스트림을 메인 프레임에 배치하고 영상 스트림(708)을 생성할 수 있다.
일실시예에 따르면, 콘텐츠 처리 장치는 콘텐츠 제공자들의 촬영 영상 스트림들을 실시간으로 분석하여, 분석된 결과를 바탕으로 동적으로 영상이 편집되는 영상 효과를 제공할 수 있다. 콘텐츠 시청자는 각각의 촬영 영상 스트림들의 음성 및 제스처 등에 기초하여 메인 프레임 내에서 동적으로 편집되는 영상 스트림을 시청하는 체험감을 제공받을 수 있다.
도 8은 일실시예에 따른 실시간 그룹 스트리밍 콘텐츠 처리 방법을 설명하기 위한 도면이다.
일실시예에 따르면, 콘텐츠 처리 장치는 콘텐츠 제공자들의 제스처들을 인식하고, 인식 결과에 기초하여 촬영 영상 스트림들을 합성하고, 영상 스트림을 생성할 수 있다. 콘텐츠 처리 장치는 콘텐츠 제공자 A의 촬영 영상 스트림의 비중이 높은 영상 스트림(801)을 생성할 수 있다. 콘텐츠 처리 장치는 콘텐츠 제공자 A의 제스처를 인식하고, 인식 결과에 기초하여 콘텐츠 제공자 A의 촬영 영상 스트림을 식별할 수 있다. 콘텐츠 처리 장치는 식별 결과에 기초하여 콘텐츠 제공자 A의 촬영 영상 스트림의 비중을 유지하면서 영상 스트림(802)을 생성할 수 있다.
일실시예에 따르면, 콘텐츠 처리 장치는 영상 스트림(803)을 생성하고, 콘텐츠 제공자 B의 제스처를 인식할 수 있다. 콘텐츠 처리 장치는 제스처의 인식 결과에 기초하여, 콘텐츠 제공자 B의 제스처에 대응하는 영상 효과를 콘텐츠 제공자 B의 촬영 영상 스트림에 적용할 수 있다. 콘텐츠 처리 장치는 콘텐츠 제공자 B의 촬영 영상 스트림에 적용된 영상 효과(811)에 기초하여, 콘텐츠 제공자들의 촬영 영상 스트림들을 합성하고 영상 스트림(804)을 생성할 수 있다.
일실시예에 따르면, 콘텐츠 처리 장치는 콘텐츠 제공자 A의 제스처를 인식할 수 있다. 콘텐츠 처리 장치는 콘텐츠 제공자 A의 제스처가 화면에서 콘텐츠 제공자 A를 제외시키는 명령에 대응하는지 여부를 판단할 수 있다. 콘텐츠 처리 장치는 판단 결과에 기초하여 콘텐츠 제공자 A의 촬영 영상 스트림을 배제한채 나머지 촬영 영상 스트림들을 합성하여 영상 스트림(805)를 생성할 수 있다.
일실시예에 따르면, 콘텐츠 처리 장치는 콘텐츠 제공자 A의 음성 및 제스처 중 적어도 하나에 기초하여 콘텐츠 제공자 A의 촬영 영상 스트림을 메인 프레임 내 재배치시킬지 여부를 판단할 수 있다. 콘텐츠 처리 장치는 판단 결과에 기초하여 영상 스트림(806)을 생성할 수 있다. 콘텐츠 처리 장치는 콘텐츠 제공자들의 제스처들을 인식하여 인식 결과에 따라 영상을 동적으로 재구성 및 편집할 수 있다. 콘텐츠 시청자는 서로 다른 주체들의 촬영 영상 스트림들을 실시간으로 분석하여 미리 정의된 제스처에 따라 동적으로 촬영 영상 스트림들이 합성한 결과를 제공받을 수 있다.
도 9는 일실시예에 따른 실시간 그룹 스트리밍 콘텐츠 처리 방법을 설명하기 위한 도면이다.
일실시예에 따르면, 콘텐츠 처리 장치는 콘텐츠 제공자들 중 특정 콘텐츠를 중심으로 합성된 콘텐츠 제공자 중심 영상 스트림을 생성하는데 있어서, 프레임 내 비율 및 시간 비중 중 적어도 하나를 고려할 수 있다. 콘텐츠 처리 장치는 콘텐츠 제공자들 중 특정 콘텐츠 제공자에 대한 선택 입력을 수신할 수 있다.
일실시예에 따르면, 콘텐츠 처리 장치는 선택 입력에 대응하는 콘텐츠 제공자의 촬영 영상 스트림을 영상 프레임 내 미리 정의된 비율의 서브 프레임(911)에 배치하고, 나머지 촬영 영상 스트림들 중 적어도 하나를 영상 프레임 내 나머지 서브 프레임들에 선택적으로 배치할 수 있다. 콘텐츠 처리 장치는 촬영 영상 스트림들의 배치 결과에 따라 촬영 영상 스트림들을 합성한 콘텐츠 제공자 중심 영상 스트림(901)을 생성할 수 있다. 콘텐츠 처리 장치는 선택 입력에 대응하는 콘텐츠 제공자의 촬영 영상 스트림이 영상 프레임 내에서 배치되는 서브 프레임의 비율이 미리 정의된 조건 이상이 되도록 유지할 수 있고, 시간이 경과됨에 따라 프레임 내 비율 조건이 유지되는 콘텐츠 제공자 중심 영상 스트림들(902 및 903)을 생성할 수 있다.
일실시예에 따르면, 콘텐츠 처리 장치는 선택 입력에 대응하는 콘텐츠 제공자의 촬영 영상 스트림을 영상 프레임 내 미리 정의된 시간 비중으로 배치할 수 있다. 예를 들어, 콘텐츠 처리 장치는 영상 재생 시간 T 동안에 미리 정의된 시간 비중 조건을 충족하도록 시간 구간 T1 및 시간 구간 T3 동안에는 선택 입력에 대응하는 콘텐츠 제공자의 촬영 영상 스트림이 특정 서브 프레임에 지속적으로 배치되고, 시간 구간 T2 동안에는 나머지 촬영 영상 스트림들을 합성하여 영상 스트림을 생성할 수 있다. 콘텐츠 처리 장치는 시간 구간 T2 동안에는 나머지 촬영 영상 스트림들을 선택적으로 배치하되, 영상 재생 시간 T 동안에 미리 정의된 시간 비중 조건을 충족하도록 선택 입력에 대응하는 콘텐츠 제공자의 촬영 영상 스트림을 영상 프레임 내에 배치할 수 있다. 콘텐츠 처리 장치는 영상 프레임 내 비중 또는 영상 재생 시간 내 시간 구간의 비중 조건에 기초하여 콘텐츠 제공자 중심 영상 스트림을 생성 및 전송할 수 있다.
도 10은 일실시예에 따른 실시간 그룹 스트리밍 콘텐츠 처리 방법을 설명하기 위한 도면이다.
일실시예에 따르면, 콘텐츠 처리 장치는 콘텐츠 시청자들을 분류하는 콘텐츠 시청자 그룹들에 각각 대응하는 콘텐츠 채팅방들을 개설할 수 있다. 콘텐츠 시청자 그룹들(1001 내지 1002)은 콘텐츠 제공자 그룹(1010)에 대응할 수 있다. 콘텐츠 시청자 그룹들(1001 내지 1002)은 콘텐츠 제공자 그룹(1010)에 포함된 콘텐츠 제공자들의 촬영 영상 스트림들에 기초하여 생성된 영상 스트림을 시청할 수 있다. 콘텐츠 시청자 그룹들(1001 내지 1002)은 콘텐츠 제공자들 또는 콘텐츠 제공자들의 조합, 우선순위에 따라 분류될 수 있다. 예를 들어, 제1 콘텐츠 시청자 그룹(1001)은 콘텐츠 제공자 A를 중심으로 하는 영상 스트림을 시청할 수 있다. 제2 콘텐츠 시청자 그룹(1002)은 콘텐츠 제공자 B를 중심으로 하는 영상 스트림을 시청할 수 있다.
일실시예에 따르면, 콘텐츠 처리 장치는 제1 콘텐츠 시청자 그룹(1001)에 대응하는 제1 콘텐츠 채팅방(1005)을 개설할 수 있다. 콘텐츠 처리 장치는 제1 콘텐츠 채팅방(1005)을 통해 제1 콘텐츠 시청 단말들과 제1 콘텐츠 제공자 단말을 연결할 수 있다. 제1 콘텐츠 시청 단말들은 콘텐츠 제공자 A 중심 영상 스트림을 수신할 수 있다. 제1 콘텐츠 제공자 단말은 콘텐츠 제공자 A의 단말일 수 있다.
일실시예에 따르면, 콘텐츠 처리 장치는 제1 콘텐츠 채팅방(1005)을 통해 제1 콘텐츠 시청 단말들로부터 제1 채팅 입력을 수신할 수 있다. 콘텐츠 처리 장치는 제1 콘텐츠 채팅방(1005)을 통해 수신된 제1 채팅 입력을 표시할 수 있다. 제1 콘텐츠 채팅방(1005)은 콘텐츠 제공자 A의 제1 콘텐츠 제공자 단말과 제1 콘텐츠 시청 단말들에 의해 표시될 수 있다. 예를 들어, 아이돌 그룹의 멤버인 콘텐츠 제공자 A와 해당 멤버의 팬들인 콘텐츠 시청자들은 다른 멤버들 및 팬들과 독립적인 제1 콘텐츠 채팅방(1005)을 통해 서로 소통할 수 있다.
일실시예에 따르면, 콘텐츠 처리 장치는 제1 채팅 입력에 포함된 제1 키워드들을 인식할 수 있다. 콘텐츠 처리 장치는 제1 채팅 입력에 포함된 제1 키워드들 중 미리 정의된 키워드를 인식할 수 있다. 예를 들어, 콘텐츠 제공자 A를 상징하는 이미지를 "토끼"라고 가정하자. 아이돌 멤버 A와 그들의 팬들은 "토끼"의 이미지를 매개로 서로 소통하고 교감할 수 있다. 콘텐츠 처리 장치는 콘텐츠 제공자 A에 대응하는 키워드들 중 어느 하나를 "토끼"로 기록 및 관리할 수 있다.
일실시예에 따르면, 콘텐츠 처리 장치는 제1 채팅 입력에 포함된 키워드들 중 "토끼"에 대응하는 키워드를 인식할 수 있다. 콘텐츠 처리 장치는 인식된 키워드들의 수나 양상이 미리 정의된 조건을 충족하는 경우, 콘텐츠 제공자 A의 제1 촬영 영상 스트림에 제1 영상 효과를 적용할 수 있다. 예를 들어, 제1 영상 효과는 "토끼"의 이모티콘이 콘텐츠 제공자 A가 표시된 영역 주변에 표시되는 효과일 수 있다.
일실시예에 따르면, 콘텐츠 처리 장치는 제1 영상 효과가 적용된 제1 촬영 영상 스트림을 중심으로 콘텐츠 제공자들의 촬영 영상 스트림들 중 적어도 하나를 합성하여, 콘텐츠 제공자 A 중심 영상 스트림(1006)을 생성하고, 제1 콘텐츠 시청 단말들로 전송할 수 있다. 제1 콘텐츠 시청 단말들(1003 포함)은 제1 영상 효과가 적용된 콘텐츠 제공자 A 중심 영상 스트림(1006)을 표시할 수 있다. 콘텐츠 제공자 A와 제1 콘텐츠 시청자들은 제1 콘텐츠 채팅방(1005)을 통해 다른 콘텐츠 제공자들 및 콘텐츠 시청자들과는 별도로 자신들만의 공간에서 소통하고, 채팅방에 입력된 키워드들을 바탕으로 영상 효과를 부여하는 체험감을 제공받을 수 있다.
일실시예에 따르면, 콘텐츠 처리 장치는 제2 콘텐츠 시청자 그룹(1002)에 대응하는 제2 콘텐츠 채팅방(1007)을 개설할 수 있다. 콘텐츠 처리 장치는 제2 콘텐츠 채팅방(1007)을 통해 제2 콘텐츠 시청 단말들과 제2 콘텐츠 제공자 단말을 연결할 수 있다. 제2 콘텐츠 시청 단말들은 콘텐츠 제공자 B 중심 영상 스트림을 수신할 수 있다. 제2 콘텐츠 제공자 단말은 콘텐츠 제공자 B의 단말일 수 있다.
일실시예에 따르면, 콘텐츠 처리 장치는 제2 콘텐츠 채팅방(1007)을 통해 제2 콘텐츠 시청 단말들로부터 제2 채팅 입력을 수신할 수 있다. 콘텐츠 처리 장치는 제2 콘텐츠 채팅방(1007)을 통해 수신된 제2 채팅 입력을 표시할 수 있다. 제2 콘텐츠 채팅방(1007)은 콘텐츠 제공자 B의 제2 콘텐츠 제공자 단말과 제2 콘텐츠 시청 단말들에 의해 표시될 수 있다. 예를 들어, 아이돌 그룹의 멤버인 콘텐츠 제공자 B와 해당 멤버의 팬들인 콘텐츠 시청자들은 다른 멤버들 및 팬들과 독립적인 제2 콘텐츠 채팅방(1007)을 통해 서로 소통할 수 있다.
일실시예에 따르면, 콘텐츠 처리 장치는 제2 채팅 입력에 포함된 제2 키워드들을 인식할 수 있다. 콘텐츠 처리 장치는 제2 채팅 입력에 포함된 제2 키워드들 중 미리 정의된 키워드를 인식할 수 있다. 예를 들어, 콘텐츠 제공자 B를 상징하는 이미지를 "돌고래"라고 가정하자. 아이돌 멤버 B와 그들의 팬들은 "돌고래"의 이미지를 매개로 서로 소통하고 교감할 수 있다. 콘텐츠 처리 장치는 콘텐츠 제공자 B에 대응하는 키워드들 중 어느 하나를 "돌고래"로 기록 및 관리할 수 있다.
일실시예에 따르면, 콘텐츠 처리 장치는 제2 채팅 입력에 포함된 키워드들 중 "돌고래"에 대응하는 키워드를 인식할 수 있다. 콘텐츠 처리 장치는 인식된 키워드들의 수나 양상이 미리 정의된 조건을 충족하는 경우, 콘텐츠 제공자 B의 제2 촬영 영상 스트림에 제2 영상 효과를 적용할 수 있다. 예를 들어, 제2 영상 효과는 "돌고래"의 이모티콘이 콘텐츠 제공자 B가 표시된 영역 주변에 표시되는 효과일 수 있다.
일실시예에 따르면, 콘텐츠 처리 장치는 제2 영상 효과가 적용된 제2 촬영 영상 스트림을 중심으로 콘텐츠 제공자들의 촬영 영상 스트림들 중 적어도 하나를 합성하여, 콘텐츠 제공자 B 중심 영상 스트림(1008)을 생성하고, 제2 콘텐츠 시청 단말들로 전송할 수 있다. 제2 콘텐츠 시청 단말들(1004 포함)은 제2 영상 효과가 적용된 콘텐츠 제공자 B 중심 영상 스트림(1008)을 표시할 수 있다. 콘텐츠 제공자 B와 제2 콘텐츠 시청자들은 제2 콘텐츠 채팅방(1007)을 통해 다른 콘텐츠 제공자들 및 콘텐츠 시청자들과는 별도로 자신들만의 공간에서 소통하고, 채팅방에 입력된 키워드들을 바탕으로 영상 효과를 부여하는 체험감을 제공받을 수 있다.
일실시예에 따르면, 콘텐츠 처리 장치는 콘텐츠 채팅방들을 통해 콘텐츠 제공자들과 콘텐츠 시청자들 사이에서 투표, 경쟁, 게임 등 다양한 유형의 소통 콘텐츠를 제공할 수 있다. 예를 들어, 아이돌 멤버들 사이에서 개인기 경쟁을 하는 경우, 콘텐츠 처리 장치는 콘텐츠 채팅방을 통해 개인기 결과에 대한 순위 경쟁에 대한 콘텐츠 시청자들의 피드백을 수신할 수 있고, 수신된 피드백에 기반하여 콘텐츠 중심 영상 스트림들 별로 차별적으로 영상 효과를 부여할 수 있다. 예를 들어, 최하위 순위에 해당하는 아이돌 멤버에는 페널티 영상 효과가 부여될 수 있다.
일실시예에 따르면, 콘텐츠 처리 장치는 특정 콘텐츠 제공자의 콘텐츠 제공 단말에만 제한적으로 피드백 결과를 제공할 수 있다. 예를 들어, 콘텐츠 처리 장치는 시청 데이터나 투표 결과 같은 정보를 진행자와 아이돌 멤버들 중 진행자에 대응하는 콘텐츠 제공 단말에만 제공할 수 있다. 진행자는 제공된 결과를 바탕으로 추가적인 반응을 하고, 이를 통해 다자간이 참여하는 콘텐츠를 다채롭게 만들 수 있다.
일실시예에 따르면, 콘텐츠 처리 장치는 콘텐츠 시청 그룹들 별로 경쟁하는 체험감을 콘텐츠 채팅방들을 통해 제공할 수 있다. 예를 들어, 콘텐츠 채팅방들을 통해 콘텐츠 제공자와 해당 콘텐츠 시청자들은 서로 소통할 수 있는데, 콘텐츠 처리 장치는 특정 퀴즈 문제나 특정 게임을 통해 콘텐츠 채팅방들 별로 콘텐츠 제공자와 콘텐츠 시청자들이 협업하여 동작할 수 있는 미션을 부여하고, 콘텐츠 채팅방들 별로 해당 미션의 수행 결과에 따라 경쟁을 시킬 수 있다. 이를 통해 콘텐츠 시청자들은 자신이 선호하는 콘텐츠 제공자와 협업하여 다른 콘텐츠 시청자들 또는 콘텐츠 제공자들과 경쟁하는 체험감을 제공받을 수 있다.
도 11은 일실시예에 따른 실시간 그룹 스트리밍 콘텐츠 처리 방법을 설명하기 위한 도면이다.
일실시예에 따르면, 콘텐츠 처리 장치는 콘텐츠 시청자 그룹들에 각각 속한 콘텐츠 시청자들의 제1 분포 및 콘텐츠 채팅방들에 참여하는 콘텐츠 시청자들의 제2 분포를 획득할 수 있다. 콘텐츠 처리 장치는 제1 분포 및 제2 분포 중 적어도 하나에 기초하여 영상 프레임 내 배치되는 촬영 영상 스트림을 교체하거나 촬영 영상 스트림이 배치되는 위치 및 크기를 변경하거나 촬영 영상 스트림에 새로운 영상 효과를 적용하거나 기 적용된 영상 효과를 변경할 수 있다.
일실시예에 따르면, 콘텐츠 처리 장치는 콘텐츠 시청자들의 수에 기초하여 영상 스트림을 동적으로 변경할 수 있다. 콘텐츠 시청자들의 수는 영상 표시 모드들에 대응하는 접속자 수 또는 채팅방에 접속한 콘텐츠 시청자들의 수일 수 있다.
일실시예에 따르면, 콘텐츠 처리 장치는 미리 정의된 범위 내에 균등한 콘텐츠 시청자들의 분포에 기초하여, 영상 스트림(1101)을 생성할 수 있다. 콘텐츠 처리 장치는 콘텐츠 제공자 A에 대응하는 콘텐츠 시청자들의 수가 나머지 콘텐츠 시청자들의 수보다 미리 정의된 범위를 벗어나 큰 경우, 메인 프레임 내 특정 서브 프레임의 비중을 늘려 콘텐츠 제공자 A의 촬영 영상 스트림을 배치하고, 나머지 콘텐츠 제공자들의 촬영 영상 스트림들은 나머지 서브 프레임들에 각각 배치하여, 영상 스트림(1102)을 생성할 수 있다. 콘텐츠 처리 장치는 콘텐츠 시청자들의 분포를 지속적으로 모니터링할 수 있다.
일실시예에 따르면, 콘텐츠 처리 장치는 콘텐츠 제공자 B에 대응하는 콘텐츠 시청자들의 수가 나머지 콘텐츠 시청자들의 수보다 미리 정의된 범위를 벗어나 큰 경우, 메인 프레임 내 특정 서브 프레임의 비중을 늘려 콘텐츠 제공자 B의 촬영 영상 스트림을 배치하고, 나머지 콘텐츠 제공자들의 촬영 영상 스트림들은 나머지 서브 프레임들에 각각 배치하여, 영상 스트림(1103)을 생성할 수 있다. 나머지 서브 프레임들보다 비중이 큰 서브 프레임에 배치되는 촬영 영상 스트림이 해당 콘텐츠 제공자에 대응하는 통계적 분포에 따라 교체될 수 있고, 콘텐츠 시청자들은 자신들의 시청 행위가 영상에 반영되는 체험감을 제공받을 수 있다.
도 12는 일실시예에 따른 실시간 그룹 스트리밍 콘텐츠 처리 방법을 설명하기 위한 도면이다.
일실시예에 따르면, 콘텐츠 처리 장치는 콘텐츠 제공자들에 대응하는 콘텐츠 시청자들을 각각의 콘텐츠 채팅방들에 참여시킬 수 있고, 영상 표시 모드에 응답하여 콘텐츠 시청자가 속한 콘텐츠 시청자 그룹 및 콘텐츠 채팅방을 변경할 수 있다. 제1 콘텐츠 시청 그룹(1201)은 콘텐츠 제공자 A에 대응한다. 제2 콘텐츠 시청 그룹(1202)은 콘텐츠 제공자 B에 대응한다. 제3 콘텐츠 시청 그룹(1203)은 콘텐츠 제공자 C에 대응한다.
일실시예에 따르면, 콘텐츠 처리 장치는 제1 콘텐츠 시청 그룹(1201)에 속한 제1 콘텐츠 시청 단말들 중 어느 하나인 제1 콘텐츠 시청 단말(1206)로부터 콘텐츠 제공자 B를 중심으로 영상이 표시되는 제2 영상 표시 모드에 대한 선택 입력을 수신할 수 있다. 콘텐츠 처리 장치는 수신된 선택 입력에 응답하여, 콘텐츠 제공자 A 중심 영상 스트림 대신에 콘텐츠 제공자 B 중심 영상 스트림을 제1 콘텐츠 시청 단말(1206)로 전송할 수 있다.
일실시예에 따르면, 콘텐츠 처리 장치는 제1 콘텐츠 시청 단말(1206)의 콘텐츠 시청자를 제2 콘텐츠 시청 그룹(1202)으로 분류할 수 있다. 콘텐츠 처리 장치는 제1 콘텐츠 시청 단말(1206)의 콘텐츠 시청자를 콘텐츠 제공자 A에 대응하는 제1 콘텐츠 채팅방(1211)에서 탈퇴시키고, 콘텐츠 제공자 B에 대응하는 제2 콘텐츠 채팅방(1212)에 참여시킬 수 있다.
일실시예에 따르면, 콘텐츠 처리 장치는 콘텐츠 제공자 C의 촬영 영상 스트림으로부터 콘텐츠 제공자 C의 제스처 및 음성 중 적어도 하나를 인식할 수 있다. 콘텐츠 처리 장치는 콘텐츠 제공자 C의 제스처 및 음성 중 적어도 하나에 대한 인식 결과가 영상 프레임 내에서 콘텐츠 제공자 C의 촬영 영상 스트림을 제외시키는 명령에 대응하는지 여부를 판단할 수 있다. 콘텐츠 처리 장치는 판단 결과에 기초하여 콘텐츠 제공자 C의 촬영 영상 스트림을 제외한 나머지 촬영 영상 스트림들을 합성하여 영상 스트림을 생성할 수 있다. 예를 들어, 콘텐츠 처리 장치는 콘텐츠 제공자 C의 특정 제스처를 인식하거나 콘텐츠 제공자 C가 미리 정의된 시간 구간 조건에 부합하여 등장하지 않는지 여부를 인식할 수 있다.
일실시예에 따르면, 콘텐츠 처리 장치는 메인 프레임 내 촬영 영상 스트림들 중 콘텐츠 제공자 C의 촬영 영상 스트림을 제거하면서 콘텐츠 제공자 C에 대응하는 제3 콘텐츠 채팅방을 폐쇄할 수 있다. 콘텐츠 처리 장치는 제3 콘텐츠 채팅방에 속해 있던 제3 콘텐츠 시청자들을 다른 콘텐츠 채팅방에 참여시킬 수 있다.
일실시예에 따르면, 콘텐츠 처리 장치는 제3 콘텐츠 시청자들의 제3 콘텐츠 시청 단말들로부터 영상 표시 모드에 대한 선택 입력들을 수신할 수 있다. 콘텐츠 처리 장치는 수신된 선택 입력들에 기초하여 제3 콘텐츠 시청자들 중 적어도 하나를 콘텐츠 제공자 A에 대응하는 제1 콘텐츠 시청자 그룹(1204)으로 분류하고 제1 콘텐츠 채팅방에 참여시킬 수 있다. 콘텐츠 처리 장치는 수신된 선택 입력들에 기초하여 제3 콘텐츠 시청자들 중 적어도 하나를 콘텐츠 제공자 B에 대응하는 제1 콘텐츠 시청자 그룹(1205)으로 분류하고 제2 콘텐츠 채팅방에 참여시킬 수 있다.
일실시예에 따르면, 콘텐츠 처리 장치는 콘텐츠 제공자 C의 촬영 영상 스트림의 추가 제스처 및 추가 음성 중 적어도 하나를 인식하여, 콘텐츠 제공자 C의 촬영 영상 스트림이 포함된 촬영 영상 스트림들 중 적어도 하나를 합성한 영상 스트림을 생성할 수 있다. 콘텐츠 처리 장치는 콘텐츠 제공자 C에 대응하는 제3 콘텐츠 채팅방을 다시 개설할 수 있다.
일실시예에 따르면, 콘텐츠 처리 장치는 제3 콘텐츠 채팅방의 폐쇄로 인해 다른 콘텐츠 채팅방에 참여하게 된 제3 콘텐츠 시청자들 중 적어도 하나를 제3 콘텐츠 시청자 그룹으로 재 분류하고, 다시 개설된 제3 콘텐츠 채팅방에 참여시킬 수 있다. 콘텐츠 처리 장치는 콘텐츠 제공자 C 중심 영상 스트림을 다시 제3 콘텐츠 시청자 그룹으로 분류된 제3 콘텐츠 시청자들의 제3 콘텐츠 시청 단말들로 전송할 수 있다.
도 13은 일실시예에 따른 실시간 그룹 스트리밍 콘텐츠 처리 방법을 설명하기 위한 도면이다.
일실시예에 따르면, 콘텐츠 처리 장치는 콘텐츠 제공자 A 중심 영상 스트림(1301), 콘텐츠 제공자 B 중심 영상 스트림(1302), 콘텐츠 제공자 C 중심 영상 스트림(1303) 및 콘텐츠 제공자 D 중심 영상 스트림(1304)을 생성할 수 있다. 콘텐츠 처리 장치는 콘텐츠 시청자들의 피드백 및 상호작용을 반영하여 영상 효과를 생성할 수 있다.
일실시예에 따르면, 콘텐츠 처리 장치는 콘텐츠 제공자 A, B, C 및 D의 촬영 영상 스트림들을 각각 표시하는 영상 스트림(1310)을 생성할 수 있다. 예를 들어, 콘텐츠 처리 장치는 콘텐츠 제공자 A, B, C 및 D이 순위 경쟁을 위한 영상 스트림(1310)을 생성할 수 있다.
일실시예에 따르면, 콘텐츠 처리 장치는 콘텐츠 시청자들의 피드백 결과에 기초하여 콘텐츠 제공자 A가 1순위인 경쟁 결과를 생성할 수 있다. 예를 들어, 콘텐츠 처리 장치는 콘텐츠 시청자들의 채팅 입력들에 기초하여 콘텐츠 제공자들의 경쟁 결과를 생성할 수 있다. 콘텐츠 처리 장치는 경쟁 결과를 모든 콘텐츠 제공자들에 제공하지 않고, 특정 콘텐츠 제공자(예를 들어, 진행자)에게만 차별적으로 제공할 수 있다.
일실시예에 따르면, 콘텐츠 처리 장치는 경쟁 결과를 표시하는 영상 효과에 기초하여, 콘텐츠 제공자 A의 촬영 영상 스트림을 메인 프레임에 배치한 영상 스트림(1320)을 생성할 수 있다. 콘텐츠 처리 장치는 경쟁 결과에 기초하여, 영상 프레임 내 촬영 영상 스트림들 중 적어도 하나의 크기, 배치되는 위치 및 영상 효과 중 적어도 하나를 변경할 수 있다. 콘텐츠 처리 장치는 콘텐츠 제공자 A, B, C 및 D에 각각 대응하는 콘텐츠 제공자 중심 영상 스트림들(1331 내지 1334)을 생성하여 콘텐츠 제공자 A, B, C 및 D에 각각 대응하는 콘텐츠 시청자들로 전송할 수 있다.
일실시예에 따르면, 콘텐츠 처리 장치는 콘텐츠 시청 단말들이 지불하는 비용들을 인식하고, 비용들의 인식 결과에 기초하여 영상 효과를 촬영 영상 스트림에 적용할 수 있다. 콘텐츠 처리 장치는 콘텐츠 제공자 B에 대응하는 콘텐츠 시청 단말들에 의해 균등하게 지불되는 비용들의 정보를 획득할 수 있다. 콘텐츠 처리 장치는 균등하게 지불된 비용들의 합산 결과를 생성할 수 있다.
일실시예에 따르면, 콘텐츠 처리 장치는 합산 결과에 기초하여 콘텐츠 제공자 B를 상징하는 영상 효과를 획득할 수 있다. 콘텐츠 처리 장치는 콘텐츠 제공자 B의 촬영 영상 스트림에 획득된 영상 효과를 적용하고, 영상 효과가 적용된 콘텐츠 제공자 B의 촬영 영상 스트림에 기초하여 콘텐츠 제공자 B 중심 영상 스트림(1332)을 생성할 수 있다. 단순히 특정 소비자 또는 시청자에 의해 지불되는 과금 방식이 아니라, 콘텐츠 처리 장치는 특정 콘텐츠 제공자를 선호하는 콘텐츠 시청자들이 균등하게 비용을 지불하여 콘텐츠 제공자 중심 영상 스트림을 생성하는데 참여하는 체험감을 제공할 수 있다.
도 14는 일실시예에 따른 실시간 그룹 스트리밍 콘텐츠 처리 방법을 설명하기 위한 도면이다.
일실시예에 따르면, 콘텐츠 처리 장치는 콘텐츠 제공자들 중 단일의 콘텐츠 제공자에 대한 선택 입력뿐만 아니라 콘텐츠 제공자들의 우선 순위에 따른 선택 입력에 응답하여 콘텐츠 제공자 중심 영상 스트림을 생성할 수 있다. 콘텐츠 처리 장치는 콘텐츠 시청 단말로부터 콘텐츠 제공자들 A, B, C 및 D 중 콘텐츠 제공자 A를 제1 순위로 지정하고, 콘텐츠 제공자 D를 제2 순위로 지정한 선택 입력(1401)을 수신할 수 있다.
일실시예에 따르면, 콘텐츠 처리 장치는 선택 입력(1401)에 응답하여, 콘텐츠 제공자들 A, B, C 및 D 촬영 영상 스트림들 중 콘텐츠 제공자 A의 제1 촬영 영상 스트림 및 콘텐츠 제공자 D의 제2 촬영 영상 스트림을 식별할 수 있다. 콘텐츠 처리 장치는 선택 입력(1401)에 따른 우선 순위에 대응하는 미리 정의된 비중으로 영상 프레임 내 제1 촬영 영상 스트림 및 제2 촬영 영상 스트림을 배치하여, 촬영 영상 스트림들을 콘텐츠 제공자 A 및 D 중심 영상 스트림(1402)을 생성할 수 있다. 예를 들어, 제1 촬영 영상 스트림 및 제2 촬영 영상 스트림의 영상 프레임 내 비중이 나머지 촬영 영상 스트림들보다 크고, 제1 촬영 영상 스트림의 영상 프레임 내 비중이 제2 촬영 영상 스트림보다 클 수 있다.
일실시예에 따르면, 콘텐츠 처리 장치는 제1 촬영 영상 스트림 내 콘텐츠 제공자 A의 제스처 및 음성 중 적어도 하나를 인식할 수 있다. 콘텐츠 처리 장치는 인식 결과에 기초하여, 영상 프레임 내 제1 촬영 영상 스트림을 제2 촬영 영상 스트림으로 교체하고, 영상 스트림(1403)을 생성할 수 있다. 콘텐츠 처리 장치는 제1 촬영 영상 스트림 내 콘텐츠 제공자 A 및 콘텐츠 제공자 A의 얼굴 중 적어도 하나가 인식되지 않는 시간이 미리 정의된 시간 조건을 충족하는 경우, 영상 프레임 내 제1 촬영 영상 스트림을 제2 촬영 영상 스트림으로 교체할 수 있다. 예를 들어, 콘텐츠 제공자 A가 화면에서 벗어나거나 특정 제스처 및 음성이 감지된 경우, 콘텐츠 제공자 A의 다음 순위인 콘텐츠 제공자 D를 중심으로 영상 스트림이 변경될 수 있다. 이 경우에도, 콘텐츠 제공자 D가 2순위에 해당하므로, 나머지 콘텐츠 제공자들보다 비중이 높은 영상 스트림이 생성될 수 있다.
일실시예에 따르면, 콘텐츠 처리 장치는 제2 촬영 영상 스트림 내 콘텐츠 제공자 D의 제스처 및 음성 중 적어도 하나를 인식하여, 제1 및 제2 촬영 영상 스트림을 제외한 나머지 촬영 영상 스트림들을 합성한 영상 스트림(1404)을 생성할 수 있다. 예를 들어, 콘텐츠 제공자 D도 화면에서 벗어난 이벤트에 따른 영상 스트림이 생성될 수 있다.
일실시예에 따르면, 콘텐츠 처리 장치는 콘텐츠 제공자 A가 다시 화면으로 복귀하는 이벤트를 감지하여 콘텐츠 제공자 A 중심 영상 스트림(1405)을 생성할 수 있다. 콘텐츠 처리 장치는 콘텐츠 제공자 D가 다시 화면으로 복귀하는 이벤트를 감지하여 콘텐츠 제공자 A 및 D 중심 영상 스트림(1406)을 생성할 수 있다. 콘텐츠 처리 장치는 콘텐츠 제공자들의 제스처 및 음성 중 적어도 하나를 인식하여, 해당 콘텐츠 제공자가 다시 화면으로 복귀하는 이벤트가 발생하는지 여부를 판단할 수 있다. 콘텐츠 시청자는 단일 콘텐츠 제공자만을 지정하는 것이 아니라 자신의 취향 또는 선호에 따라 다양한 조합의 콘텐츠 제공자의 우선 순위를 지정하고, 그에 따른 영상 스트림을 제공받을 수 있다.
도 15는 일실시예에 따른 장치의 구성의 예시도이다.
일실시예에 따른 장치(1501)는 프로세서(1502) 및 메모리(1503)를 포함한다. 일실시예에 따른 장치(1501)는 상술한 서버 또는 단말일 수 있다. 프로세서는 도 1 내지 도 14를 통하여 전술한 적어도 하나의 장치들을 포함하거나, 도 1 내지 도 14를 통하여 전술한 적어도 하나의 방법을 수행할 수 있다. 메모리(1503)는 상술한 방법과 관련된 정보를 저장하거나 상술한 방법이 구현된 프로그램을 저장할 수 있다. 메모리(1503)는 휘발성 메모리 또는 비휘발성 메모리일 수 있다.
프로세서(1502)는 프로그램을 실행하고, 장치(1501)를 제어할 수 있다. 프로세서(1502)에 의하여 실행되는 프로그램의 코드는 메모리(1503)에 저장될 수 있다. 장치(1501)는 입출력 장치(도면 미 표시)를 통하여 외부 장치(예를 들어, 퍼스널 컴퓨터 또는 네트워크)에 연결되고, 데이터를 교환할 수 있다.
이상에서 설명된 실시예들은 하드웨어 구성요소, 소프트웨어 구성요소, 및/또는 하드웨어 구성요소 및 소프트웨어 구성요소의 조합으로 구현될 수 있다. 예를 들어, 실시예들에서 설명된 장치, 방법 및 구성요소는, 예를 들어, 프로세서, 콘트롤러, ALU(arithmetic logic unit), 디지털 신호 프로세서(digital signal processor), 마이크로컴퓨터, FPGA(field programmable gate array), PLU(programmable logic unit), 마이크로프로세서, 또는 명령(instruction)을 실행하고 응답할 수 있는 다른 어떠한 장치와 같이, 하나 이상의 범용 컴퓨터 또는 특수 목적 컴퓨터를 이용하여 구현될 수 있다. 처리 장치는 운영 체제(OS) 및 상기 운영 체제 상에서 수행되는 하나 이상의 소프트웨어 애플리케이션을 수행할 수 있다. 또한, 처리 장치는 소프트웨어의 실행에 응답하여, 데이터를 접근, 저장, 조작, 처리 및 생성할 수도 있다. 이해의 편의를 위하여, 처리 장치는 하나가 사용되는 것으로 설명된 경우도 있지만, 해당 기술분야에서 통상의 지식을 가진 자는, 처리 장치가 복수 개의 처리 요소(processing element) 및/또는 복수 유형의 처리 요소를 포함할 수 있음을 알 수 있다. 예를 들어, 처리 장치는 복수 개의 프로세서 또는 하나의 프로세서 및 하나의 콘트롤러를 포함할 수 있다. 또한, 병렬 프로세서(parallel processor)와 같은, 다른 처리 구성(processing configuration)도 가능하다.
실시예에 따른 방법은 다양한 컴퓨터 수단을 통하여 수행될 수 있는 프로그램 명령 형태로 구현되어 컴퓨터 판독 가능 매체에 기록될 수 있다. 상기 컴퓨터 판독 가능 매체는 프로그램 명령, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 상기 매체에 기록되는 프로그램 명령은 실시예를 위하여 특별히 설계되고 구성된 것들이거나 컴퓨터 소프트웨어 당업자에게 공지되어 사용 가능한 것일 수도 있다. 컴퓨터 판독 가능 기록 매체의 예에는 하드 디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체(magnetic media), CD-ROM, DVD와 같은 광기록 매체(optical media), 플롭티컬 디스크(floptical disk)와 같은 자기-광 매체(magneto-optical media), 및 롬(ROM), 램(RAM), 플래시 메모리 등과 같은 프로그램 명령을 저장하고 수행하도록 특별히 구성된 하드웨어 장치가 포함된다. 프로그램 명령의 예에는 컴파일러에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용해서 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드를 포함한다. 상기된 하드웨어 장치는 실시예의 동작을 수행하기 위해 하나 이상의 소프트웨어 모듈로서 작동하도록 구성될 수 있으며, 그 역도 마찬가지이다.
소프트웨어는 컴퓨터 프로그램(computer program), 코드(code), 명령(instruction), 또는 이들 중 하나 이상의 조합을 포함할 수 있으며, 원하는 대로 동작하도록 처리 장치를 구성하거나 독립적으로 또는 결합적으로(collectively) 처리 장치를 명령할 수 있다. 소프트웨어 및/또는 데이터는, 처리 장치에 의하여 해석되거나 처리 장치에 명령 또는 데이터를 제공하기 위하여, 어떤 유형의 기계, 구성요소(component), 물리적 장치, 가상 장치(virtual equipment), 컴퓨터 저장 매체 또는 장치, 또는 전송되는 신호 파(signal wave)에 영구적으로, 또는 일시적으로 구체화(embody)될 수 있다. 소프트웨어는 네트워크로 연결된 컴퓨터 시스템 상에 분산되어서, 분산된 방법으로 저장되거나 실행될 수도 있다. 소프트웨어 및 데이터는 하나 이상의 컴퓨터 판독 가능 기록 매체에 저장될 수 있다.
이상과 같이 실시예들이 비록 한정된 도면에 의해 설명되었으나, 해당 기술분야에서 통상의 지식을 가진 자라면 상기를 기초로 다양한 기술적 수정 및 변형을 적용할 수 있다. 예를 들어, 설명된 기술들이 설명된 방법과 다른 순서로 수행되거나, 및/또는 설명된 시스템, 구조, 장치, 회로 등의 구성요소들이 설명된 방법과 다른 형태로 결합 또는 조합되거나, 다른 구성요소 또는 균등물에 의하여 대치되거나 치환되더라도 적절한 결과가 달성될 수 있다.
그러므로, 다른 구현들, 다른 실시예들 및 특허청구범위와 균등한 것들도 후술하는 청구범위의 범위에 속한다.

Claims (20)

  1. 실시간 그룹 스트리밍 콘텐츠의 제공을 위한 콘텐츠 제공 채널 및 콘텐츠 시청 채널을 생성하는 단계;
    콘텐츠 제공자들의 콘텐츠 제공 단말들로부터 상기 콘텐츠 제공 채널을 통한 접속들을 인식하는 단계;
    콘텐츠 시청자들의 콘텐츠 시청 단말들로부터 상기 콘텐츠 시청 채널을 통한 접속들을 인식하는 단계;
    상기 콘텐츠 제공자들의 촬영 영상 스트림들을 상기 콘텐츠 제공 단말들로부터 각각 수신하는 단계; 및
    상기 콘텐츠 제공자들 중 어느 하나의 콘텐츠 제공자와 연관된 영상 표시 모드에 대한 선택 입력을 전송한 콘텐츠 시청 단말로, 상기 콘텐츠 제공자의 촬영 영상 스트림을 중심으로 상기 촬영 영상 스트림들 중 적어도 하나를 합성하여 생성한 상기 콘텐츠 제공자 중심 영상 스트림을 전송하는 단계
    를 포함하고,
    상기 콘텐츠 제공자 중심 영상 스트림을 전송하는 단계는
    상기 콘텐츠 제공자들 중 상기 영상 표시 모드에 대한 선택 입력에 대응하는 상기 콘텐츠 제공자를 식별하는 단계;
    상기 촬영 영상 스트림들 중 상기 콘텐츠 제공자의 상기 촬영 영상 스트림을 식별하는 단계;
    상기 영상 표시 모드에 대응하는 영상 프레임을 획득하는 단계;
    상기 영상 프레임 내에서, 상기 영상 표시 모드에 대응하는 메인 프레임에 상기 식별된 촬영 영상 스트림을 배치하고, 서브 프레임들 중 적어도 하나에 상기 식별된 촬영 영상 스트림을 제외한 나머지 촬영 영상 스트림들 중 적어도 하나를 배치하는 단계; 및
    상기 배치된 촬영 영상 스트림 및 상기 배치된 적어도 하나의 나머지 영상 스트림을 합성하여 상기 콘텐츠 제공자 중심 영상 스트림을 생성하는 단계
    를 포함하는,
    실시간 그룹 스트리밍 콘텐츠 처리 방법.
  2. 실시간 그룹 스트리밍 콘텐츠의 제공을 위한 콘텐츠 제공 채널 및 콘텐츠 시청 채널을 생성하는 단계;
    콘텐츠 제공자들의 콘텐츠 제공 단말들로부터 상기 콘텐츠 제공 채널을 통한 접속들을 인식하는 단계;
    콘텐츠 시청자들의 콘텐츠 시청 단말들로부터 상기 콘텐츠 시청 채널을 통한 접속들을 인식하는 단계;
    상기 콘텐츠 제공자들의 촬영 영상 스트림들을 상기 콘텐츠 제공 단말들로부터 각각 수신하는 단계; 및
    상기 콘텐츠 제공자들 중 어느 하나의 콘텐츠 제공자와 연관된 영상 표시 모드에 대한 선택 입력을 전송한 콘텐츠 시청 단말로, 상기 콘텐츠 제공자의 촬영 영상 스트림을 중심으로 상기 촬영 영상 스트림들 중 적어도 하나를 합성하여 생성한 상기 콘텐츠 제공자 중심 영상 스트림을 전송하는 단계
    를 포함하고,
    상기 콘텐츠 제공자 중심 영상 스트림을 전송하는 단계는
    제1 콘텐츠 시청자 그룹에 속한 제1 콘텐츠 시청자들의 제1 콘텐츠 시청 단말들로부터, 영상 표시 모드들 중 제1 영상 표시 모드-상기 제1 영상 표시 모드는 상기 콘텐츠 제공자들 중 제1 콘텐츠 제공자를 중심으로 영상이 표시되는 모드임-에 대한 제1 선택 입력을 수신하는 단계;
    상기 제1 선택 입력에 응답하여, 상기 콘텐츠 제공자들 중 상기 제1 콘텐츠 제공자의 제1 촬영 영상 스트림을 식별하는 단계;
    상기 식별된 제1 촬영 영상 스트림을 중심으로 상기 촬영 영상 스트림들 중 상기 제1 촬영 영상 스트림을 포함한 적어도 하나를 합성하여, 제1 콘텐츠 제공자 중심 영상 스트림을 생성하는 단계;
    제2 콘텐츠 시청자 그룹에 속한 제2 콘텐츠 시청자들의 제2 콘텐츠 시청 단말들로부터, 영상 표시 모드들 중 제2 영상 표시 모드-상기 제2 영상 표시 모드는 상기 콘텐츠 제공자들 중 제2 콘텐츠 제공자를 중심으로 영상이 표시되는 모드임-에 대한 제2 선택 입력을 수신하는 단계;
    상기 제2 선택 입력에 응답하여, 상기 콘텐츠 제공자들 중 상기 제2 콘텐츠 제공자의 제2 촬영 영상 스트림을 식별하는 단계;
    상기 식별된 제2 촬영 영상 스트림을 중심으로 상기 촬영 영상 스트림들 중 상기 제2 촬영 영상 스트림을 포함한 적어도 하나를 합성하여, 제2 콘텐츠 제공자 중심 영상 스트림을 생성하는 단계; 및
    상기 제1 콘텐츠 제공자 중심 영상 스트림을 인코딩하여 상기 제1 콘텐츠 시청 단말들로 전송하고, 상기 제2 콘텐츠 제공자 중심 영상 스트림을 인코딩하여 상기 제2 콘텐츠 시청 단말들로 전송하는 단계
    를 포함하는,
    실시간 그룹 스트리밍 콘텐츠 처리 방법.
  3. 제2항에 있어서,
    상기 콘텐츠 제공자들 중 적어도 하나는 진행자이고,
    상기 진행자를 제외한 나머지 콘텐츠 제공자들은 게스트들이며,
    상기 제1 콘텐츠 제공자 중심 영상 스트림을 생성하는 단계는
    상기 진행자의 촬영 영상 스트림 및 게스트인 상기 제1 콘텐츠 제공자의 상기 제1 촬영 영상 스트림을 영상 프레임 내 미리 정의된 프레임들에 각각 배치하는 단계; 및
    상기 미리 정의된 프레임들에 각각 배치된 상기 진행자의 상기 촬영 영상 스트림 및 상기 제1 촬영 영상 스트림을 합성하여, 상기 제1 콘텐츠 제공자 중심 영상 스트림을 생성하는 단계
    를 포함하고,
    상기 제2 콘텐츠 제공자 중심 영상 스트림을 생성하는 단계는
    상기 진행자의 상기 촬영 영상 스트림 및 게스트인 상기 제2 콘텐츠 제공자의 상기 제2 촬영 영상 스트림을 영상 프레임 내 미리 정의된 프레임들에 각각 배치하는 단계; 및
    상기 미리 정의된 프레임들에 각각 배치된 상기 진행자의 상기 촬영 영상 스트림 및 상기 제2 촬영 영상 스트림을 합성하여, 상기 제2 콘텐츠 제공자 중심 영상 스트림을 생성하는 단계
    를 포함하는,
    실시간 그룹 스트리밍 콘텐츠 처리 방법.
  4. 삭제
  5. 실시간 그룹 스트리밍 콘텐츠의 제공을 위한 콘텐츠 제공 채널 및 콘텐츠 시청 채널을 생성하는 단계;
    콘텐츠 제공자들의 콘텐츠 제공 단말들로부터 상기 콘텐츠 제공 채널을 통한 접속들을 인식하는 단계;
    콘텐츠 시청자들의 콘텐츠 시청 단말들로부터 상기 콘텐츠 시청 채널을 통한 접속들을 인식하는 단계;
    상기 콘텐츠 제공자들의 촬영 영상 스트림들을 상기 콘텐츠 제공 단말들로부터 각각 수신하는 단계; 및
    상기 콘텐츠 제공자들 중 어느 하나의 콘텐츠 제공자와 연관된 영상 표시 모드에 대한 선택 입력을 전송한 콘텐츠 시청 단말로, 상기 콘텐츠 제공자의 촬영 영상 스트림을 중심으로 상기 촬영 영상 스트림들 중 적어도 하나를 합성하여 생성한 상기 콘텐츠 제공자 중심 영상 스트림을 전송하는 단계
    를 포함하고,
    상기 콘텐츠 제공자 중심 영상 스트림을 전송하는 단계는
    상기 선택 입력에 대응하는 상기 콘텐츠 제공자의 상기 촬영 영상 스트림을 영상 프레임 내 미리 정의된 비율로 고정적으로 배치하고, 상기 배치된 촬영 영상 스트림을 제외한 나머지 촬영 영상 스트림들 중 적어도 하나를 상기 영상 프레임 내 선택적으로 배치하여, 상기 촬영 영상 스트림들 중 적어도 하나를 합성한 상기 콘텐츠 제공자 중심 영상 스트림을 생성하는 단계
    를 포함하는,
    실시간 그룹 스트리밍 콘텐츠 처리 방법.
  6. 실시간 그룹 스트리밍 콘텐츠의 제공을 위한 콘텐츠 제공 채널 및 콘텐츠 시청 채널을 생성하는 단계;
    콘텐츠 제공자들의 콘텐츠 제공 단말들로부터 상기 콘텐츠 제공 채널을 통한 접속들을 인식하는 단계;
    콘텐츠 시청자들의 콘텐츠 시청 단말들로부터 상기 콘텐츠 시청 채널을 통한 접속들을 인식하는 단계;
    상기 콘텐츠 제공자들의 촬영 영상 스트림들을 상기 콘텐츠 제공 단말들로부터 각각 수신하는 단계; 및
    상기 콘텐츠 제공자들 중 어느 하나의 콘텐츠 제공자와 연관된 영상 표시 모드에 대한 선택 입력을 전송한 콘텐츠 시청 단말로, 상기 콘텐츠 제공자의 촬영 영상 스트림을 중심으로 상기 촬영 영상 스트림들 중 적어도 하나를 합성하여 생성한 상기 콘텐츠 제공자 중심 영상 스트림을 전송하는 단계
    를 포함하고,
    상기 콘텐츠 제공자 중심 영상 스트림을 전송하는 단계는
    상기 선택 입력에 대응하는 상기 콘텐츠 제공자의 상기 촬영 영상 스트림을 영상 프레임 내 미리 정의된 시간 비중으로 배치하고, 상기 배치된 촬영 영상 스트림을 제외한 나머지 촬영 영상 스트림들 중 적어도 하나를 상기 영상 프레임 내 선택적으로 배치하여, 상기 촬영 영상 스트림들 중 적어도 하나를 합성한 상기 콘텐츠 제공자 중심 영상 스트림을 생성하는 단계
    를 포함하는,
    실시간 그룹 스트리밍 콘텐츠 처리 방법.
  7. 실시간 그룹 스트리밍 콘텐츠의 제공을 위한 콘텐츠 제공 채널 및 콘텐츠 시청 채널을 생성하는 단계;
    콘텐츠 제공자들의 콘텐츠 제공 단말들로부터 상기 콘텐츠 제공 채널을 통한 접속들을 인식하는 단계;
    콘텐츠 시청자들의 콘텐츠 시청 단말들로부터 상기 콘텐츠 시청 채널을 통한 접속들을 인식하는 단계;
    상기 콘텐츠 제공자들의 촬영 영상 스트림들을 상기 콘텐츠 제공 단말들로부터 각각 수신하는 단계;
    상기 콘텐츠 제공자들 중 어느 하나의 콘텐츠 제공자와 연관된 영상 표시 모드에 대한 선택 입력을 전송한 콘텐츠 시청 단말로, 상기 콘텐츠 제공자의 촬영 영상 스트림을 중심으로 상기 촬영 영상 스트림들 중 적어도 하나를 합성하여 생성한 상기 콘텐츠 제공자 중심 영상 스트림을 전송하는 단계;
    상기 촬영 영상 스트림들에 기초하여, 상기 콘텐츠 제공자들의 제스처들 및 음성들을 인식하는 단계;
    상기 제스처들 및 음성들 중 적어도 하나에 기초하여, 영상 프레임 내 기 배치된 촬영 영상 스트림을 상기 촬영 영상 스트림들 중 적어도 하나로 교체하는 단계;
    상기 적어도 하나로 교체한 촬영 영상 스트림에 기초하여, 상기 촬영 영상 스트림들 중 적어도 하나를 합성한 영상 스트림을 생성하는 단계; 및
    상기 생성된 영상 스트림을 상기 콘텐츠 시청 단말들 중 적어도 하나로 전송하는 단계
    를 포함하는
    실시간 그룹 스트리밍 콘텐츠 처리 방법.
  8. 실시간 그룹 스트리밍 콘텐츠의 제공을 위한 콘텐츠 제공 채널 및 콘텐츠 시청 채널을 생성하는 단계;
    콘텐츠 제공자들의 콘텐츠 제공 단말들로부터 상기 콘텐츠 제공 채널을 통한 접속들을 인식하는 단계;
    콘텐츠 시청자들의 콘텐츠 시청 단말들로부터 상기 콘텐츠 시청 채널을 통한 접속들을 인식하는 단계;
    상기 콘텐츠 제공자들의 촬영 영상 스트림들을 상기 콘텐츠 제공 단말들로부터 각각 수신하는 단계;
    상기 콘텐츠 제공자들 중 어느 하나의 콘텐츠 제공자와 연관된 영상 표시 모드에 대한 선택 입력을 전송한 콘텐츠 시청 단말로, 상기 콘텐츠 제공자의 촬영 영상 스트림을 중심으로 상기 촬영 영상 스트림들 중 적어도 하나를 합성하여 생성한 상기 콘텐츠 제공자 중심 영상 스트림을 전송하는 단계;
    상기 촬영 영상 스트림들에 기초하여, 상기 콘텐츠 제공자들의 제스처들 및 음성들 중 영상 효과 대상에 대응하는 제스처 및 음성 중 적어도 하나를 인식하는 단계;
    상기 인식된 제스처 및 음성 중 적어도 하나에 대응하는 촬영 영상 스트림을 식별하는 단계;
    상기 식별된 촬영 영상 스트림에 영상 효과를 적용하는 단계;
    상기 영상 효과가 적용된 상기 촬영 영상 스트림에 기초하여, 상기 촬영 영상 스트림들 중 적어도 하나를 합성한 영상 스트림을 생성하는 단계; 및
    상기 생성된 영상 스트림을 상기 콘텐츠 시청 단말들 중 적어도 하나로 전송하는 단계
    를 포함하는
    실시간 그룹 스트리밍 콘텐츠 처리 방법.
  9. 실시간 그룹 스트리밍 콘텐츠의 제공을 위한 콘텐츠 제공 채널 및 콘텐츠 시청 채널을 생성하는 단계;
    콘텐츠 제공자들의 콘텐츠 제공 단말들로부터 상기 콘텐츠 제공 채널을 통한 접속들을 인식하는 단계;
    콘텐츠 시청자들의 콘텐츠 시청 단말들로부터 상기 콘텐츠 시청 채널을 통한 접속들을 인식하는 단계;
    상기 콘텐츠 제공자들의 촬영 영상 스트림들을 상기 콘텐츠 제공 단말들로부터 각각 수신하는 단계;
    상기 콘텐츠 제공자들 중 어느 하나의 콘텐츠 제공자와 연관된 영상 표시 모드에 대한 선택 입력을 전송한 콘텐츠 시청 단말로, 상기 콘텐츠 제공자의 촬영 영상 스트림을 중심으로 상기 촬영 영상 스트림들 중 적어도 하나를 합성하여 생성한 상기 콘텐츠 제공자 중심 영상 스트림을 전송하는 단계;
    상기 콘텐츠 시청자들을 분류하는 콘텐츠 시청자 그룹들에 각각 대응하는 콘텐츠 채팅방들을 개설하는 단계;
    제1 콘텐츠 시청자 그룹에 대응하는 제1 콘텐츠 채팅방을 통해 제1 콘텐츠 시청 단말들과 제1 콘텐츠 제공자 단말을 연결하는 단계;
    상기 제1 콘텐츠 시청 단말들로부터 제1 채팅 입력을 수신하여 상기 제1 콘텐츠 채팅방을 통해 표시하는 단계;
    제2 콘텐츠 시청자 그룹에 대응하는 제2 콘텐츠 채팅방을 통해 제2 콘텐츠 시청 단말들과 제2 콘텐츠 제공자 단말을 연결하는 단계; 및
    제2 콘텐츠 시청 단말들로부터 제2 채팅 입력을 수신하여 상기 제2 콘텐츠 채팅방을 통해 표시하는 단계
    를 포함하고,
    상기 콘텐츠 제공자 중심 영상 스트림을 전송하는 단계는
    상기 제1 채팅 입력에 포함된 제1 키워드들 중 적어도 하나에 기초하여, 상기 제1 콘텐츠 제공자의 제1 촬영 영상 스트림에 제1 영상 효과를 적용하는 단계;
    상기 제1 영상 효과가 적용된 상기 제1 촬영 영상 스트림을 중심으로 상기 촬영 영상 스트림들 중 적어도 하나를 합성하여, 제1 콘텐츠 제공자 중심 영상 스트림을 생성하는 단계;
    상기 제2 채팅 입력에 포함된 제2 키워드들 중 적어도 하나에 기초하여, 상기 제2 콘텐츠 제공자의 제2 촬영 영상 스트림에 제2 영상 효과를 적용하는 단계; 및
    상기 제2 영상 효과가 적용된 상기 제2 촬영 영상 스트림을 중심으로 상기 촬영 영상 스트림들 중 적어도 하나를 합성하여, 제2 콘텐츠 제공자 중심 영상 스트림을 생성하는 단계
    를 포함하는,
    실시간 그룹 스트리밍 콘텐츠 처리 방법.
  10. 제9항에
    상기 제1 콘텐츠 제공자 중심 영상 스트림을 생성하는 단계는
    콘텐츠 시청자 그룹들에 각각 속한 상기 콘텐츠 시청자들의 분포 및 상기 콘텐츠 채팅방들에 참여하는 상기 콘텐츠 시청자들의 분포 중 적어도 하나에 기초하여, 영상 프레임 내 상기 제1 촬영 영상 스트림의 크기, 상기 제1 촬영 영상 스트림이 배치되는 위치 및 상기 제1 촬영 영상 스트림에 적용되는 제1 영상 효과 중 적어도 하나를 변경하는 단계
    를 포함하고,
    상기 제2 콘텐츠 제공자 중심 영상 스트림을 생성하는 단계는
    콘텐츠 시청자 그룹들에 각각 속한 상기 콘텐츠 시청자들의 분포 및 상기 콘텐츠 채팅방들에 참여하는 상기 콘텐츠 시청자들의 분포 중 적어도 하나에 기초하여, 영상 프레임 내 상기 제2 촬영 영상 스트림의 크기, 상기 제2 촬영 영상 스트림이 배치되는 위치 및 상기 제2 촬영 영상 스트림에 적용되는 제2 영상 효과 중 적어도 하나를 변경하는 단계
    를 포함하는,
    실시간 그룹 스트리밍 콘텐츠 처리 방법.
  11. 제9항에
    상기 제1 콘텐츠 시청 단말들 중 어느 하나의 콘텐츠 시청 단말로부터 상기 제2 콘텐츠 제공자를 중심으로 영상이 표시되는 제2 영상 표시 모드에 대한 선택 입력을 수신하는 단계;
    상기 선택 입력에 대응하는 콘텐츠 시청자를 상기 제2 콘텐츠 시청자 그룹으로 분류하고, 상기 제2 콘텐츠 채팅방에 참여시키는 단계; 및
    상기 제2 콘텐츠 제공자 중심 영상 스트림을 상기 선택 입력에 대응하는 콘텐츠 시청 단말로 전송하는 단계
    를 더 포함하는,
    실시간 그룹 스트리밍 콘텐츠 처리 방법.
  12. 제9항에
    상기 콘텐츠 제공자 중심 영상 스트림을 전송하는 단계는
    상기 제1 촬영 영상 스트림 내 상기 제1 콘텐츠 제공자의 제스처 및 음성 중 적어도 하나를 인식하여, 상기 촬영 영상 스트림들 중 상기 제1 촬영 영상 스트림을 제거하고, 상기 제1 콘텐츠 채팅방을 폐쇄 단계;
    상기 제1 콘텐츠 시청 단말들로부터 수신한 선택 입력들에 기초하여, 제1 콘텐츠 시청자들 중 적어도 하나를 상기 제2 콘텐츠 시청자 그룹으로 분류하고, 상기 제2 콘텐츠 채팅방에 참여시키는 단계;
    상기 제1 촬영 영상 스트림 내 상기 제1 콘텐츠 제공자의 추가 제스처 및 추가 음성 중 적어도 하나를 인식하여, 상기 촬영 영상 스트림들 중 상기 제1 촬영 영상 스트림을 포함시키는 단계; 및
    상기 제2 콘텐츠 시청자 그룹으로 분류된 상기 제1 콘텐츠 시청자들 중 적어도 하나를 제1 콘텐츠 시청자 그룹으로 분류하고, 상기 제1 콘텐츠 채팅방을 개설하여 참여시키는 단계
    를 더 포함하는,
    실시간 그룹 스트리밍 콘텐츠 처리 방법.
  13. 제9항에
    상기 콘텐츠 제공자 중심 영상 스트림을 전송하는 단계는
    상기 콘텐츠 채팅방들을 통해 상기 콘텐츠 제공자들 사이의 순위 경쟁 또는 투표를 위한 채팅 입력들을 수신하는 단계;
    상기 채팅 입력들에 기초하여, 상기 콘텐츠 제공자들 사이의 경쟁 결과를 생성하는 단계; 및
    상기 경쟁 결과에 기초하여, 영상 프레임 내 상기 촬영 영상 스트림들 중 적어도 하나의 크기, 배치되는 위치 및 영상 효과 중 적어도 하나를 변경하는 단계
    를 포함하는,
    실시간 그룹 스트리밍 콘텐츠 처리 방법.
  14. 제9항에
    상기 제1 영상 효과를 적용하는 단계는
    상기 제1 콘텐츠 시청 단말들에 의해 균등하게 지불되는 비용들을 합산하는 단계; 및
    상기 합산 결과에 기초하여, 상기 제1 콘텐츠 제공자를 상징하는 영상 효과를 상기 제1 촬영 영상 스트림에 적용하는 단계
    를 포함하는,
    실시간 그룹 스트리밍 콘텐츠 처리 방법.
  15. 실시간 그룹 스트리밍 콘텐츠의 제공을 위한 콘텐츠 제공 채널 및 콘텐츠 시청 채널을 생성하는 단계;
    콘텐츠 제공자들의 콘텐츠 제공 단말들로부터 상기 콘텐츠 제공 채널을 통한 접속들을 인식하는 단계;
    콘텐츠 시청자들의 콘텐츠 시청 단말들로부터 상기 콘텐츠 시청 채널을 통한 접속들을 인식하는 단계;
    상기 콘텐츠 제공자들의 촬영 영상 스트림들을 상기 콘텐츠 제공 단말들로부터 각각 수신하는 단계; 및
    상기 콘텐츠 제공자들 중 어느 하나의 콘텐츠 제공자와 연관된 영상 표시 모드에 대한 선택 입력을 전송한 콘텐츠 시청 단말로, 상기 콘텐츠 제공자의 촬영 영상 스트림을 중심으로 상기 촬영 영상 스트림들 중 적어도 하나를 합성하여 생성한 상기 콘텐츠 제공자 중심 영상 스트림을 전송하는 단계
    를 포함하고,
    상기 콘텐츠 제공자 중심 영상 스트림을 전송하는 단계는
    상기 콘텐츠 시청 단말로부터 상기 콘텐츠 제공자들 중 적어도 둘 이상의 콘텐츠 제공자들에 대한 우선 순위-상기 우선 순위는 제1 콘텐츠 제공자에 대응하는 제1 순위 및 제2 콘텐츠 제공자에 대응하는 제2 순위를 포함함-를 지정한 선택 입력을 수신하는 단계;
    상기 선택 입력에 응답하여, 상기 콘텐츠 제공자들 중 상기 제1 콘텐츠 제공자의 제1 촬영 영상 스트림 및 상기 제2 콘텐츠 제공자의 제2 촬영 영상 스트림을 식별하는 단계; 및
    상기 우선 순위에 대응하는 미리 정의된 비중으로 영상 프레임 내 상기 제1 촬영 영상 스트림 및 상기 제2 촬영 영상 스트림 중 적어도 하나를 배치하여, 상기 촬영 영상 스트림들 중 상기 제1 촬영 영상 스트림을 포함한 적어도 하나를 합성한 상기 콘텐츠 제공자 중심 영상 스트림을 생성하는 단계
    를 포함하는,
    실시간 그룹 스트리밍 콘텐츠 처리 방법.
  16. 제15항에
    상기 콘텐츠 제공자 중심 영상 스트림을 생성하는 단계는
    상기 제1 촬영 영상 스트림 내 상기 제1 콘텐츠 제공자의 제스처 및 음성 중 적어도 하나를 인식하여, 상기 영상 프레임 내 상기 제1 촬영 영상 스트림을 상기 제2 촬영 영상 스트림으로 교체하는 단계
    를 포함하는,
    실시간 그룹 스트리밍 콘텐츠 처리 방법.
  17. 제15항에
    상기 콘텐츠 제공자 중심 영상 스트림을 생성하는 단계는
    상기 제1 촬영 영상 스트림 내 상기 제1 콘텐츠 제공자 및 상기 제1 콘텐츠 제공자의 얼굴 중 적어도 하나가 인식되지 않는 시간이 미리 정의된 시간 조건을 충족하는 경우, 상기 영상 프레임 내 상기 제1 촬영 영상 스트림을 상기 제2 촬영 영상 스트림으로 교체하는 단계
    를 포함하는,
    실시간 그룹 스트리밍 콘텐츠 처리 방법.
  18. 제1항에
    콘텐츠 제공 채널들 및 콘텐츠 시청 채널들을 생성하는 단계;
    콘텐츠 제공 단말들로부터 상기 콘텐츠 제공 채널들을 통한 접속들을 인식하는 단계;
    콘텐츠 시청 단말들로부터 상기 콘텐츠 시청 채널들을 통한 접속들을 인식하는 단계; 및
    상기 콘텐츠 제공 채널들 및 상기 콘텐츠 시청 채널들 간을 서로 연결하여, 실시간 그룹 스트리밍 콘텐츠들을 상기 콘텐츠 시청 채널들을 통해 제공하는 단계
    를 더 포함하는
    실시간 그룹 스트리밍 콘텐츠 처리 방법.
  19. 하드웨어와 결합되어 제1항 내지 제3항 및 제5항 내지 제18항 중 어느 하나의 항의 방법을 실행시키기 위하여 매체에 저장된 컴퓨터 프로그램.
  20. 실시간 그룹 스트리밍 콘텐츠의 제공을 위한 콘텐츠 제공 채널 및 콘텐츠 시청 채널을 생성하고,
    콘텐츠 제공자들의 콘텐츠 제공 단말들로부터 상기 콘텐츠 제공 채널을 통한 접속들을 인식하고,
    콘텐츠 시청자들의 콘텐츠 시청 단말들로부터 상기 콘텐츠 시청 채널을 통한 접속들을 인식하고,
    상기 콘텐츠 제공자들의 촬영 영상 스트림들을 상기 콘텐츠 제공 단말들로부터 각각 수신하고,
    상기 콘텐츠 제공자들 중 어느 하나의 콘텐츠 제공자와 연관된 영상 표시 모드에 대한 선택 입력을 전송한 콘텐츠 시청 단말로, 상기 콘텐츠 제공자의 촬영 영상 스트림을 중심으로 상기 촬영 영상 스트림들 중 적어도 하나를 합성하여 생성한 상기 콘텐츠 제공자 중심 영상 스트림을 전송하는 프로세서
    를 포함하고,
    상기 프로세서는
    상기 콘텐츠 제공자들 중 상기 영상 표시 모드에 대한 선택 입력에 대응하는 상기 콘텐츠 제공자를 식별하고,
    상기 촬영 영상 스트림들 중 상기 콘텐츠 제공자의 상기 촬영 영상 스트림을 식별하고,
    상기 영상 표시 모드에 대응하는 영상 프레임을 획득하고,
    상기 영상 프레임 내에서, 상기 영상 표시 모드에 대응하는 메인 프레임에 상기 식별된 촬영 영상 스트림을 배치하고, 서브 프레임들 중 적어도 하나에 상기 식별된 촬영 영상 스트림을 제외한 나머지 촬영 영상 스트림들 중 적어도 하나를 배치하고,
    상기 배치된 촬영 영상 스트림 및 상기 배치된 적어도 하나의 나머지 영상 스트림을 합성하여 상기 콘텐츠 제공자 중심 영상 스트림을 생성하는,
    실시간 그룹 스트리밍 콘텐츠 처리 장치.
KR1020190088493A 2019-07-22 2019-07-22 실시간 그룹 스트리밍 콘텐츠 처리 방법 및 장치 KR102067360B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020190088493A KR102067360B1 (ko) 2019-07-22 2019-07-22 실시간 그룹 스트리밍 콘텐츠 처리 방법 및 장치

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020190088493A KR102067360B1 (ko) 2019-07-22 2019-07-22 실시간 그룹 스트리밍 콘텐츠 처리 방법 및 장치

Publications (1)

Publication Number Publication Date
KR102067360B1 true KR102067360B1 (ko) 2020-01-16

Family

ID=69369074

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020190088493A KR102067360B1 (ko) 2019-07-22 2019-07-22 실시간 그룹 스트리밍 콘텐츠 처리 방법 및 장치

Country Status (1)

Country Link
KR (1) KR102067360B1 (ko)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102415774B1 (ko) * 2021-11-05 2022-07-01 주식회사 아몽아트드림 다중 영상의 선별적 배치를 수행하는 서버의 제어 방법
KR102660135B1 (ko) * 2023-07-07 2024-05-03 스테이지랩스 주식회사 라이브 스트리밍 서비스 제공 장치 및 방법

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100869765B1 (ko) 2007-01-05 2008-11-21 (주)디와이빌 행사 중계 시스템 및 그 중계 방법
KR100881371B1 (ko) 2007-05-04 2009-02-02 이동수 무선 다중접속에 의한 실시간 동영상 전송장치, 무선다중접속에 의한 실시간 동영상 수신장치, 무선 다중접속에의한 실시간 동영상 송수신장치 및 무선 다중접속에 의한실시간 동영상 송수신 방법
KR20130012222A (ko) * 2011-07-12 2013-02-01 부산대학교 산학협력단 시청자 맞춤형 커스텀뷰를 제공하기 위한 온라인 방송 시스템 및 방법
KR101630018B1 (ko) 2013-11-01 2016-06-13 주식회사 엘지유플러스 촬영 단말기 및 그 제어방법, 촬영 단말기와 통신하는 그룹 영상 관리 시스템 및 그 제어방법과 이를 위한 기록 매체
KR101714048B1 (ko) 2010-10-28 2017-03-08 엘지이노텍 주식회사 복수의 네트워크 카메라로부터의 영상 제어 방법 및 네트워크 카메라

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100869765B1 (ko) 2007-01-05 2008-11-21 (주)디와이빌 행사 중계 시스템 및 그 중계 방법
KR100881371B1 (ko) 2007-05-04 2009-02-02 이동수 무선 다중접속에 의한 실시간 동영상 전송장치, 무선다중접속에 의한 실시간 동영상 수신장치, 무선 다중접속에의한 실시간 동영상 송수신장치 및 무선 다중접속에 의한실시간 동영상 송수신 방법
KR101714048B1 (ko) 2010-10-28 2017-03-08 엘지이노텍 주식회사 복수의 네트워크 카메라로부터의 영상 제어 방법 및 네트워크 카메라
KR20130012222A (ko) * 2011-07-12 2013-02-01 부산대학교 산학협력단 시청자 맞춤형 커스텀뷰를 제공하기 위한 온라인 방송 시스템 및 방법
KR101630018B1 (ko) 2013-11-01 2016-06-13 주식회사 엘지유플러스 촬영 단말기 및 그 제어방법, 촬영 단말기와 통신하는 그룹 영상 관리 시스템 및 그 제어방법과 이를 위한 기록 매체

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102415774B1 (ko) * 2021-11-05 2022-07-01 주식회사 아몽아트드림 다중 영상의 선별적 배치를 수행하는 서버의 제어 방법
KR102660135B1 (ko) * 2023-07-07 2024-05-03 스테이지랩스 주식회사 라이브 스트리밍 서비스 제공 장치 및 방법

Similar Documents

Publication Publication Date Title
US20210344991A1 (en) Systems, methods, apparatus for the integration of mobile applications and an interactive content layer on a display
US20210019982A1 (en) Systems and methods for gesture recognition and interactive video assisted gambling
US10182095B2 (en) Method and system for video call using two-way communication of visual or auditory effect
US10499118B2 (en) Virtual and augmented reality system and headset display
US20180316948A1 (en) Video processing systems, methods and a user profile for describing the combination and display of heterogeneous sources
US20180316939A1 (en) Systems and methods for video processing, combination and display of heterogeneous sources
US20180316947A1 (en) Video processing systems and methods for the combination, blending and display of heterogeneous sources
US20180152736A1 (en) Live video recording, streaming, viewing, and storing mobile application, and systems and methods of use thereof
US20180316942A1 (en) Systems and methods and interfaces for video processing, combination and display of heterogeneous sources
WO2017088621A1 (zh) 一种实现网络直播的方法和服务器
US11284137B2 (en) Video processing systems and methods for display, selection and navigation of a combination of heterogeneous sources
US20180316944A1 (en) Systems and methods for video processing, combination and display of heterogeneous sources
US20180316943A1 (en) Fpga systems and methods for video processing, combination and display of heterogeneous sources
US11343594B2 (en) Methods and systems for an augmented film crew using purpose
US20180316946A1 (en) Video processing systems and methods for display, selection and navigation of a combination of heterogeneous sources
US20170048597A1 (en) Modular content generation, modification, and delivery system
US11481983B2 (en) Time shifting extended reality media
WO2018071781A2 (en) Systems and methods for video processing and display
WO2022078167A1 (zh) 互动视频的创建方法、装置、设备及可读存储介质
US10219018B2 (en) Method of controlling display device for providing content and display device performing the same
US20180316941A1 (en) Systems and methods for video processing and display of a combination of heterogeneous sources and advertising content
US20180316940A1 (en) Systems and methods for video processing and display with synchronization and blending of heterogeneous sources
US20240064356A1 (en) User Chosen Watch Parties
KR102067360B1 (ko) 실시간 그룹 스트리밍 콘텐츠 처리 방법 및 장치
WO2017112520A9 (en) Video display system

Legal Events

Date Code Title Description
E701 Decision to grant or registration of patent right
GRNT Written decision to grant