KR20230040334A - 가상 지원 스튜디오의 생성 및 관리를 위한 시스템 및 방법 - Google Patents

가상 지원 스튜디오의 생성 및 관리를 위한 시스템 및 방법 Download PDF

Info

Publication number
KR20230040334A
KR20230040334A KR1020237001804A KR20237001804A KR20230040334A KR 20230040334 A KR20230040334 A KR 20230040334A KR 1020237001804 A KR1020237001804 A KR 1020237001804A KR 20237001804 A KR20237001804 A KR 20237001804A KR 20230040334 A KR20230040334 A KR 20230040334A
Authority
KR
South Korea
Prior art keywords
venue
computing device
user
live performance
audio
Prior art date
Application number
KR1020237001804A
Other languages
English (en)
Inventor
카일 데이비드 크레이머
맥스웰 비. 윌리스
크리스토퍼 마이클 트레스테인
크리스 루드위그
라일리 윈턴
Original Assignee
하만인터내셔날인더스트리스인코포레이티드
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 하만인터내셔날인더스트리스인코포레이티드 filed Critical 하만인터내셔날인더스트리스인코포레이티드
Publication of KR20230040334A publication Critical patent/KR20230040334A/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/2224—Studio circuitry; Studio devices; Studio equipment related to virtual studio applications
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00—Administration; Management
    • G06Q10/02—Reservations, e.g. for tickets, services or events
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/02—Marketing; Price estimation or determination; Fundraising
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/01—Social networking
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/10—Services
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/21—Server components or server architectures
    • H04N21/218—Source of audio or video content, e.g. local disk arrays
    • H04N21/21805—Source of audio or video content, e.g. local disk arrays enabling multiple viewpoints, e.g. using a plurality of cameras
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/21—Server components or server architectures
    • H04N21/218—Source of audio or video content, e.g. local disk arrays
    • H04N21/2187—Live feed
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/47202—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for requesting content on demand, e.g. video on demand
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/475—End-user interface for inputting end-user data, e.g. personal identification number [PIN], preference data
    • H04N21/4756—End-user interface for inputting end-user data, e.g. personal identification number [PIN], preference data for rating content, e.g. scoring a recommended movie
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/478—Supplemental services, e.g. displaying phone caller identification, shopping application
    • H04N21/4781—Games
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/478—Supplemental services, e.g. displaying phone caller identification, shopping application
    • H04N21/47815—Electronic shopping
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/478—Supplemental services, e.g. displaying phone caller identification, shopping application
    • H04N21/4784—Supplemental services, e.g. displaying phone caller identification, shopping application receiving rewards
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/478—Supplemental services, e.g. displaying phone caller identification, shopping application
    • H04N21/4788—Supplemental services, e.g. displaying phone caller identification, shopping application communicating with other users, e.g. chatting
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/485—End-user interface for client configuration
    • H04N21/4852—End-user interface for client configuration for modifying audio parameters, e.g. switching between mono and stereo
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/485—End-user interface for client configuration
    • H04N21/4854—End-user interface for client configuration for modifying image parameters, e.g. image brightness, contrast
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/65—Transmission of management data between client and server
    • H04N21/658—Transmission by the client directed to the server
    • H04N21/6587—Control parameters, e.g. trick play commands, viewpoint selection
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/62—Control of parameters via user interfaces
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/63—Control of cameras or camera modules by using electronic viewfinders
    • H04N23/631—Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/66—Remote control of cameras or camera parts, e.g. by remote control devices
    • H04N23/661—Transmitting camera control signals through networks, e.g. control via the Internet
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/667—Camera operation mode switching, e.g. between still and video, sport and normal or high- and low-resolution modes
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/90—Arrangement of cameras or camera modules, e.g. multiple cameras in TV studios or sports stadiums
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/2621—Cameras specially adapted for the electronic generation of special effects during image pickup, e.g. digital cameras, camcorders, video cameras having integrated special effects capability
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/2624—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects for obtaining an image which is composed of whole input images, e.g. splitscreen
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/265—Mixing
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/272—Means for inserting a foreground image in a background image, i.e. inlay, outlay
    • H04N5/2723—Insertion of virtual advertisement; Replacing advertisements physical present in the scene by virtual advertisement
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/765—Interface circuits between an apparatus for recording and another apparatus
    • H04N5/77—Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera
    • H—ELECTRICITY
    • H05—ELECTRIC TECHNIQUES NOT OTHERWISE PROVIDED FOR
    • H05B—ELECTRIC HEATING; ELECTRIC LIGHT SOURCES NOT OTHERWISE PROVIDED FOR; CIRCUIT ARRANGEMENTS FOR ELECTRIC LIGHT SOURCES, IN GENERAL
    • H05B47/00—Circuit arrangements for operating light sources in general, i.e. where the type of light source is not relevant
    • H05B47/10—Controlling the light source
    • H05B47/155—Coordinated control of two or more light sources

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Business, Economics & Management (AREA)
  • Tourism & Hospitality (AREA)
  • Human Computer Interaction (AREA)
  • Marketing (AREA)
  • Strategic Management (AREA)
  • Physics & Mathematics (AREA)
  • General Business, Economics & Management (AREA)
  • Economics (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Development Economics (AREA)
  • Human Resources & Organizations (AREA)
  • Databases & Information Systems (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Operations Research (AREA)
  • Quality & Reliability (AREA)
  • Finance (AREA)
  • Health & Medical Sciences (AREA)
  • Primary Health Care (AREA)
  • General Health & Medical Sciences (AREA)
  • Accounting & Taxation (AREA)
  • General Engineering & Computer Science (AREA)
  • Game Theory and Decision Science (AREA)
  • Computing Systems (AREA)
  • Selective Calling Equipment (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Studio Devices (AREA)

Abstract

적어도 일 실시예에서, 가상 콘서트의 양태들을 제어하기 위한 시스템이 제공된다. 장치는 하나 이상의 제어기들 및 적어도 하나의 컴퓨팅 디바이스를 포함한다. 하나 이상의 제어기들은 공연장에 위치되고 적어도 하나의 제1 신호에 기초하여 공연장에서의 라이브 공연의 피쳐들을 제어하도록 구성된다. 적어도 하나의 컴퓨팅 디바이스는 공연장으로부터 멀리 떨어져 있는 사용자로부터 직접 라이브 공연의 적어도 일부를 제어하고 라이브 공연의 피쳐들을 제어하기 위해 적어도 하나의 제1 신호를 하나 이상의 제어기들로 송신하기 위한 커맨드를 나타내는 제2 신호를 수신하도록 프로그래밍된다.

Description

가상 지원 스튜디오의 생성 및 관리를 위한 시스템 및 방법
관련 출원에 대한 상호 참조
본 출원은 2020년 7월 17일에 출원된 미국 가출원 일련 번호 제63/053,318 호의 이익을 주장하며, 그 개시 내용은 그 전체가 참조로 본 명세서에 포함된다.
기술 분야
본 명세서에 개시된 양태들은 일반적으로 가상 지원 스튜디오(virtually enabled studio)를 생성 및 관리하기 위한 시스템 및 방법에 관한 것이다. 특정 실시예들에서, 본 명세서에 개시된 양태들은 사용자들이 스튜디오에서 실제 출력을 제공하는 연결된 디바이스들을 통해 원격으로 상호작용할 수 있는 가상 지원 스튜디오를 생성 및 관리하기 위한 시스템 및 방법에 대응할 수 있다. 이러한 양태들 및 기타 사항들은 아래에서 자세히 논의될 것이다.
사용자들이 실제 콘서트장들에서 라이브 콘서트들에 참여할 수 없을 수도 있다. 예를 들어, 사용자들은 다양한 이유들로 라이브 콘서트에 참여하지 못할 수 있다. 예를 들어, 최근 팬데믹(pandemic)으로 인해, 많은 군중들은 콘서트를 위해 작은 공간들에 모이는 것으로부터 금지되었다. 추가적으로, 팬데믹의 우려들 없이, 콘서트 관객들(또는 팬들)은 공연장과 팬의 위치 사이의 위치 또는 거리로 인해 콘서트에 참석하지 못할 수 있다. 실제 라이브 공연(live performance)의 위치로부터 상이한 위치에서 원격으로 이러한 양태들을 경험하면서 팬의 선호도들에 기초하여 라이브 공연과 관련된 여러 측면들이 사용자들이 제어할 수 있도록 하는 것이 바람직할 수 있다.
적어도 하나의 실시예에서, 가상 콘서트의 양태를 제어하기 위한 시스템이 제공된다. 장치는 하나 이상의 제어기들 및 적어도 하나의 컴퓨팅 디바이스를 포함한다. 하나 이상의 제어기들은 공연장에 위치하고 적어도 하나의 제1 신호에 기초하여 공연장에서의 라이브 공연의 피쳐를 제어하도록 구성된다. 적어도 하나의 컴퓨팅 디바이스는 공연장에서 멀리 떨어져 있는 사용자로부터 직접 라이브 공연의 적어도 일부를 제어하기 위한 커맨드를 나타내는 제2 신호를 수신하고 라이브 공연의 특징을 제어하기 위해 적어도 하나의 제1 신호를 하나 이상의 제어기들로 송신하도록 프로그래밍되어 있다.
적어도 다른 실시예에서, 가상 콘서트의 양태를 제어하기 위한 방법이 제공된다. 방법은 공연장에 위치한 하나 이상의 제어기들을 통해 적어도 하나의 제1 신호에 기초하여 공연장에서의 라이브 공연의 피쳐를 제어하는 단계 및 공연장에서 멀리 떨어져 있는 사용자로부터 직접 라이브 공연의 적어도 일부를 제어하기 위한 커맨드를 나타내는 제2 신호를 적어도 하나의 컴퓨팅 디바이스에서 수신하는 단계를 포함한다. 방법은 라이브 공연의 피쳐를 제어하기 위해 적어도 하나의 제1 신호를 하나 이상의 제어기들에 송신하는 단계를 더 포함한다.
적어도 다른 실시예에서, 가상 콘서트의 제어기 양태를 위해 프로그래밍된 비일시적 컴퓨터 판독 가능 매체에 구현된 컴퓨터 프로그램 제품. 컴퓨터 프로그램 제품은 공연장에 위치한 하나 이상의 제어기들을 통해 적어도 하나의 제1 신호에 기초하여 공연장에서의 라이브 공연의 피쳐를 제어하고 공연장에서 멀리 떨어져 있는 사용자로부터 직접 라이브 공연의 적어도 일부를 제어하기 위한 커맨드를 나타내는 제2 신호를 적어도 하나의 컴퓨팅 디바이스에서 수신하기 위한 명령어를 포함한다. 컴퓨터 프로그램 제품은 라이브 공연의 피쳐를 제어하기 위해 적어도 하나의 제1 신호를 하나 이상의 제어기들로 송신하기 위한 명령어를 포함한다.
본 개시의 실시예들은 첨부된 청구범위에서 구체적으로 지적된다. 그러나, 다양한 실시예들의 다른 피쳐들은 첨부된 도면들과 함께 다음의 상세한 설명을 참조함으로써 더욱 명백해지고 가장 잘 이해될 것이다:
도 1은 일 실시예에 따라 가상 지원 스튜디오 또는 라이브 공연을 생성하고 관리하기 위한 시스템을 묘사한다;
도 2는 일 실시예에 따라 가상 지원 스튜디오 또는 라이브 공연을 위해 하나 이상의 카메라들을 제어하기 위한 방법을 묘사한다;
도 3은 일 실시예에 따라 가상 지원 스튜디오의 또는 라이브 공연을 위해 조명을 제어하기 위한 방법을 묘사한다;
도 4는 일 실시예에 따라 가상 지원 스튜디오 또는 라이브 공연을 위해 하나 이상의 소품(prop)들을 제어하기 위한 방법을 묘사한다;
도 5는 일 실시예에 따라 가상 지원 스튜디오 또는 라이브 공연을 위해 다양한 활동들을 제어하기 위한 방법을 묘사한다;
도 6은 실시예에 따라 모순된 커맨드(contradictory command)들이 가상 지원 스테레오 또는 라이브 공연과 관련된 양태들을 제어하기 위해 제공될 때 제1 사용자와 제2 사용자 사이에 명성(prestige)을 결정하는 방법을 묘사한다;
도 7은 일 실시예에 따라 도 1의 시스템에 의해 발행될 수 있는 응원 크레딧(cheer credit)들의 예들을 묘사한다;
도 8은 일 실시예에 따라 도 1의 시스템에 의해 발행될 수 있는 응원 크레딧들의 추가적인 예들을 묘사한다;
도 9는 일 실시예에 따라 도 1의 시스템에 의해 발행될 수 있는 티켓 등급(ticket tier)들의 예들을 묘사한다;
도 10은 일 실시예에 따라 도 1의 시스템에 의해 발행될 수 있는 배타적인 피쳐(exclusive feature)들의 예들을 묘사한다;
도 11은 일 실시예에 따라 도 1의 시스템에 의해 발행될 수 있는 배타적인 제안들의 예들을 묘사한다;
도 12는 일 실시예에 따라 도 1의 시스템에 의해 발행될 수 있는 재생목록 이벤트(playlist event)들의 예들을 묘사한다;
도 13은 일 실시예에 따라 도 1의 시스템에 의해 발행될 수 있는 재생목록 이벤트들의 예들을 묘사한다;
도 14는 일 실시예에 따라 도 1의 시스템의 하나 이상의 컴퓨팅 디바이스들 상의 예시적인 사용자 인터페이스를 묘사한다;
도 15는 실시예에 따라 오디오/비디오 믹스 및 라이브 오디오 및 비디오 스트림의 마스터를 원격으로 생성하기 위한 시스템을 묘사한다;
도 16은 실시예에 따라 도 15의 시스템의 컴퓨팅 디바이스에 의해 제공되는 인터페이스 스크린을 묘사한다;
도 17은 일 실시예에 따라 라이브 공연으로부터의 오디오 및 비디오 스트림들을 시간 정렬하기 위한 방법을 묘사한다; 및
도 18은 일 실시예에 따라 라이브 공연을 위한 "픽처-인-픽처 스트림(picture-in-picture stream)"을 제공하기 위한 방법을 묘사한다.
필요에 따라, 본 발명의 상세한 실시예가 본 명세서에서 개시된다; 그러나 개시된 실시예는 다양하고 대안적인 형태로 구현될 수 있는 본 발명의 예시일 뿐이라는 것을 이해해야 한다. 수치가 반드시 비례하지는 않으며; 일부 피쳐는 특정 컴포넌트의 세부 정보를 표시하기 위해 과장되거나 최소화될 수 있다. 따라서, 본 명세서에 개시된 특정 구조적 및 기능적 세부 사항은 제한적인 것으로 해석되어서는 안 되며, 단지 당업자가 본 발명을 다양하게 사용하도록 교시하기 위한 대표적인 근거로 해석되어야 한다.
본 명세서에 개시된 바와 같은 적어도 하나의 제어기(또는 적어도 하나의 프로세서)는 본 명세서에 개시된 동작(들)을 수행하기 위해 서로 협력하는 다양한 마이크로프로세서, 집적 회로, 메모리 디바이스(예를 들어, 플래시(FLASH), 랜덤 액세스 메모리(RAM), 판독 전용 메모리(ROM), 전기적으로 프로그래밍 가능한 판독 전용 메모리(EPROM), 전기적으로 소거 가능한 프로그래밍 가능한 판독 전용 메모리(EEPROM), 또는 이의 다른 적합한 변형) 및 소프트웨어를 포함할 수 있다는 것이 인식된다. 또한, 본 명세서에 개시된 바와 같은 적어도 하나의 제어기는 개시된 바와 같이 임의의 수의 기능을 수행하도록 프로그래밍된 비일시적 컴퓨터 판독가능 매체에 구현된 컴퓨터 프로그램을 실행하기 위해 하나 이상의 마이크로프로세서를 이용한다. 또한, 본 명세서에 제공된 제어기(들)는 하우징과 하우징 내에 위치한 다양한 수의 마이크로프로세서, 집적 회로 및 메모리 디바이스(예를 들어, FLASH, 랜덤 액세스 메모리(RAM), 판독 전용 메모리(ROM), 전기적으로 프로그래밍 가능한 판독 전용 메모리(EPROM), 전기적으로 소거 가능한 프로그래밍 가능한 판독 전용 메모리(EEPROM))를 포함한다. 개시된 제어기(들)는 또한 본 명세서에서 논의된 바와 같이 다른 하드웨어 기반 디바이스로부터 데이터를 수신하고 다른 하드웨어 기반 디바이스로 데이터를 송신하기 위한 하드웨어 기반 입력 및 출력을 포함한다.
가상 지원 스튜디오 또는 라이브 공연을 생성하고 관리하기 위한 시스템 및 방법
본 명세서에 개시된 양태들은 일반적으로 온라인 가상 콘서트 경험을 제공하기 위해 조명, 오디오 마이킹, 증폭, 비디오그래피, 프로젝션 등을 포함하는, 라이브 스트리밍 스튜디오로서 전체 음악 공연장을 제공하지만, 이에 제한되지 않는다. 이 기술과 구현예는 가상 콘서트에 제한되지 않고 임의의 라이브 스트리밍 이벤트에도 사용될 수 있다. 원격 사용자들은 채팅을 통해, 온라인으로 커맨드들을 발행함으로써 공연장에 있는 많은 상이한 물리적 디바이스들을 제어하고 트리거할 수 있다. 이러한 커맨드들은 스트림(또는 라이브 공연)의 위치에서 실시간으로, 실제 이벤트들이 발생하도록 트리거한다.
이 기술의 중심에는 많은 노드들이 제공되는 메인 서버("서버")(또는 적어도 하나의 제어기 )가 있다. 서버는 본 명세서에 언급된 임의의 기능들을 수행하기 위한 명령어들을 실행하는 임의의 수의 마이크로프로세서들을 포함할 수 있다. 일 예에서, 서버는 임의의 수의 노드들에 커맨드들(예를 들어, 메시지)을 송신하는 능력이 있는 온라인 연결 컴퓨터 디바이스의 임의의 유형일 수 있다. 각 노드는 하나 이상의 마이크로제어기, 컴퓨터, 서버로부터의 커맨드들(메시지들)을 해석하고 커맨드(또는 메시지)와 연관된 커맨드들을 실행하도록 구성된 모바일 디바이스(예를 들어, 휴대폰, 태블릿)를 포함할 수 있다. 서버는 스트리밍 서비스(예를 들어, 챗봇)와 관련된 채팅(예를 들어, 인터넷 릴레이 채트(IRC))에서 송신되는 키워드들을 해석할 수 있다. 이 서비스는 이벤트가 열리는 콘서트장이나 스튜디오에서 이벤트들을 발생시키도록 트리거하려는 사용자에 의해 송신된 메시지들을 해석할 수 있다. 다른 실시예에서, 사용자는 컴퓨팅 디바이스의 사용자 인터페이스를 통해 이벤트들을 트리거하고 서버는 스트리밍 공연장에서 그들을 재생하기 위해 이러한 응답들 또는 커맨드들을 해석한다. 서버는 공연장으로 송신되는 응답들 또는 커맨드들을 수집하기 위한 데이터베이스를 포함한다. 서버는 공연장에 대한 커맨드들로 송신되는 데이터를 집계하고 또한 데이터를 다른 컴퓨팅 디바이스로 다시 송신할 수 있다. 하나의 예는 공연장의 디스플레이에 표시될 제1 컴퓨팅 디바이스로부터의 상호작용들(예를 들어, 이모지, 응원, 투표, 또는 임의의 다른 유형의 사용자 상호작용)의 송신을 포함할 수 있다. 서버는 또한 사용자가 원하는 경우 그러한 다른 컴퓨팅 디바이스들에서 보기 위해 다른 컴퓨팅 디바이스들에 상호작용들을 송신할 수 있다.
온라인 통화는 또한 이벤트를 위해 현지 통화와 교환하여 생성될 수 있다. 일단 교환되면, 사용자는 라이브 공연과 연관된 원하는 이벤트들을 트리거하기 위해 이벤트 중에 이 통화를 사용할 수 있다. 또한, 사용자가 비디오 스트림에 참여할 때 구매한 액세스 등급에 따라, 사용자들은 특정 등급의 명성을 부여받을 수 있다. 이러한 레벨의 명성은 사용자들에게 라이브 공연장이 열리는 스튜디오/공연장에서 트리거할 수 있는 추가적인 이벤트들에 대한 액세스 권한을 부여한다.
사용자가 라이브 공연에서 원하는 이벤트를 트리거하려는 경우, 서버는 사용자가 그러한 원하는 이벤트를 트리거하는 데 필요한 적절한 명성과 잔고(balance)를 가지고 있는지 결정할 수 있다. 일단 결정되면, 서버는 이벤트를 트리거하기 위해 적절한 메시지들을 송신하거나 서버가 메시지를 다시 사용자들에게 반송하여 이러한 이벤트를 트리거할 명성, 잔고, 또는 둘 모두가 부족함을 사용자들에게 알릴 수 있다. 이 통화는 또한 상이한 이벤트들에 대해 사용자들에게 수여될 수 있다. 이 통화는 또한 이벤트 전, 중, 또는 후에 이용가능한 배타적인 매장으로부터 상이한 상품을 구매하는 데에 사용할 수 있다. 일 예에서, 이러한 구매들은 이벤트 기간 동안에만 허용될 수 있다.
라이브 스트림이 열리는 위치(예를 들어, 라이브 스트림을 위한 공연장)에는 원격 사용자에 의해 제어될 수 있는 복수의 노드들(예를 들어, 복수의 전자 노드들)이 장착될 수 있다. 노드들은 신호탄, 카메라들, 로봇들, 유압식 기계, 무대 조명, 청중 조명, 무대 조명 애니메이션들, 오디오, 스트림에서 렌더링된 애니메이션들, 뿐만 아니라 위치에서 볼 수 있는 대형 화면에 배치할 트리거 애니메이션들, 공연장의 화면에 표시될 텍스트, 공연장의 화면 상의 이모티콘들 등을 포함할 수 있지만, 이에 제한되지는 않는다. 노드들은 사용자에 의해 요청된 이벤트를 적절하게 제어하기 위해 서버로부터 메시지들/커맨드들을 변환하고 이러한 커맨드들을 디지털 또는 아날로그 메시지들(예를 들어, 직렬, 디지털 멀티플렉스(DMX), 인터-직접 회로(I2C), 사용자 데이터그램 프로토콜(UDP), 자바스크립트 오브젝트 노테이션(JSON), 릴레이, 전압, 전류, 저항, 커패시턴스, 인덕턴스, 자기장 및 전기장 등)로 변환하는 임의의 수의 마이크로제어기들을 각각 포함하는 컴퓨터, 모바일 디바이스(예를 들어, 전화, 태블릿 등)가 장착될 수 있다. 노드들은 사용자에 의해 카메라와 마이크의 선택을 사용하여 화상 통화들을 하는 데 사용될 수 있다. 또한, 배타적인 연락처(contact)는 선택된 사용자 또는 사용자들의 그룹에 비공개 경험을 제공하기 위해 사용될 수 있다. 노드들은 사용자들을 "무대 위" 또는 "무대 뒤" 또는 공연장 전체의 추가적인 공연장들로 데려가기 위한 추가의 배타적인 화상 통화들에 활용하기 위해 예를 들어 무대 위, 무대 뒤, 대기실, 콘서트 홀, 관객석, 메자닌(mezzanine) 등 공연장 내 임의의 수의 위치들에 위치될 수 있다. 화상 통화는 또한 사용자를 캡처하는 데 사용될 수 있고 공연장에 표시되는 추가의 데이터 포인트로 사용될 수 있다. 예를 들어, 사용자 얼굴의 캡처된 이미지 또는 그들의 카메라로부터의 다른 데이터는 다른 사용자들과 공유될 수 있으며 흥미로운 방식으로 재생산되는 데이터 포인트로 사용될 수 있다(예를 들어, 콘서트에 대한 팬들의 반응 및 팬의 반응 캡처).
서버는 또한 사용자들이 라이브 스트리밍 이벤트 전반에 걸쳐 이벤트들에 참여할 수 있는 방법들을 제공할 수 있다. 사용자들은 서버에 액세스하고 그들의 개인 디바이스를 통해 로그인하는 방법이 프롬프트될 수 있다. 액세스 권한이 부여되면, 사용자 인터페이스는 사용자가 라이브 스트림/공연장에서 발생하는 이벤트에 참여하도록 표시될 수 있다. 이러한 이벤트들은 공연장에서 화면 전체에 애니메이션 그리기, 박자에 맞춰 탭하기, 실시간 설문 조사에 참여하기, 사소한 질문들에 답하기, 사용자 입력들을 로깅하기, 공연장에서 사용자 입력들을 렌더링하기, 스포트라이트 돌리기, 리더 따르기, 스트리밍 아티스트와 상호작용하기, 등을 포함할 수 있지만, 이에 제한되지는 않는다.
본 명세서에 개시된 실시예들은 일반적으로 라이브 공연이 일어나는 위치로부터 원격으로 라이브 공연과 상호작용하는 사용자들을 위한 새로운 경험을 제공한다. 예를 들어, 사용자들은 이전과는 전혀 다른 방식으로 좋아하는 아티스트들과 함께 이벤트에 참여하고 상호작용할 수 있다. 본 명세서에 언급된 구현예들을 사용하여, 공연장 또는 스튜디오는 원격 사용자들에 의해 환경이 조작가능할 수 있는 가상 지원 공간으로 전환될 수 있다. 이는 원격 사용자를 위해 지속적으로 새로운 것으로 변형되는 흥미롭고 역동적인 환경을 만든다. 사용자가 아티스트 및 타인과의 즉시 연결되는 온라인 이벤트를 위해 사람들을 함께 모으는 것은 완전히 독특한 시나리오와 경험을 만들 수 있다.
도 1은 실시예에 따라 가상 지원 스튜디오 또는 라이브 공연을 생성 및 관리하기 위한 시스템(100)을 묘사한다. 시스템(100)은 일반적으로 복수의 컴퓨팅 디바이스들(또는 클라이언트들)(104a 내지 104c)에 동작가능하게 결합된 적어도 하나의 서버(이하 "서버")(102)를 포함한다. 컴퓨팅 디바이스(104a 내지 104n)(또는 컴퓨팅 디바이스(104))는 다양한 사용자들의 제어 하에 있는 랩탑, 데스크탑 컴퓨터, 모바일 디바이스(예를 들어, 휴대폰, 태블릿) 등 중 어느 하나를 포함할 수 있다. 컴퓨팅 디바이스들(104a 내지 104b) 중 하나 이상은 또한 차량의 디스플레이에 라이브 공연을 표시하는 차량(105)에 위치될 수 있다는 것이 인지된다. 차량(105)은 자율 차량일 수 있고, 예를 들어, 음악가들에 의해 라이브 또는 스튜디오 공연들이 공연되는 공연장(107)으로부터 원격으로 승객들이 라이브 공연을 캡처할 수 있게 하는 대형 디스플레이를 포함할 수 있다. 마찬가지로, 하나 이상의 컴퓨팅 디바이스들(104a 내지 104b)은 소규모 모임들이 대형 디스플레이 또는 화면을 통해 라이브 공연을 볼 수 있도록 거주지의 거실 또는 다른 시설에 위치될 수 있다. 시스템(100)은 또한 공연장(107)에 위치된 복수의 노드들(106a 내지 106n)을 포함한다. 본 명세서에 표시된 라이브 공연은 또한 뮤지컬들, 연극 행사들 등에 대응할 수 있음이 인지된다. 일 예에서, 노드(106a)는 공연장(107)에서 다양한 카메라들(110a)를 제어하는 적어도 하나의 카메라 제어기(108a)(이하, 카메라 제어기(108a))에 대응할 수 있다. 다른 예에서, 노드(106b)는 공연장(107)에서 다양한 조명(110b)을 제어하는 적어도 하나의 조명 제어기(108b)(이하 조명 제어기(108b))에 대응할 수 있다. 다른 예에서, 노드(106c)는 라이브 또는 스튜디오 공연 동안 기계적으로 움직이는 다양한 소품들 또는 다른 디바이스들을 제어하는 적어도 하나의 로봇(또는 소품) 제어기(108c)(이하, 로봇 제어기(106c))에 대응할 수 있다.
사용자들 및 그들의 다양한 컴퓨팅 디바이스들(104a 내지 104c)은 공연장(107)으로부터 원격으로 위치될 수 있고 음악가들이 공연장(107)에서 공연하는 동안 라이브 또는 스튜디오 공연으로 임의의 수의 양태들을 제어할 수 있다. 라이브 또는 스튜디오 공연에서 사용자의 선호도들에 기초하여 맞춤형 공연 양태들을 제공하도록 공연장(107)에 위치한 노드들(110a 내지 110n) 중 하나 이상 및 대응하는 카메라들(110a), 조명(110b), 로봇(110c) 등을 제어하기 위해 임의의 수의 사용자들이 다양한 컴퓨팅 디바이스들(104a 내지 104c)에 위치된 사용자 인터페이스들(도시되지 않음)을 통해 커맨드들을 입력할 수 있음이 인지된다. 예를 들어, Twitch ® 와 같은 온라인 포털은 사용자들이 방송된 라이브 스트림 공연들(또는 사전녹화된 공연들의 비디오)을 볼 수 있도록 한다. 일 예에서, 사용자 인터페이스 및 데이터 통신 프로토콜(예를 들어, 라이브 채팅 상자)은 사용자가 그들 개별의 컴퓨팅 디바이스(104a 내지 104c)에서 라이브 공연을 보는 동안 메시지들이 송신될 수 있도록 생성될 수 있다. 추가적으로, 공연장(107)에 위치된 하나 이상의 인코더들은 비디오 및 오디오를 인코딩하고 이러한 인코딩된 비디오 및 오디오를 서버로 송신한다. 차례로, 클라우드 데이터베이스(또는 호스팅 데이터베이스)(또는 클라우드, 호스팅 제어기 또는 스트리밍 플랫폼들)는 인코딩된 비디오 및 오디오를 컴퓨팅 디바이스(들)(104a 내지 104c)로 송신하거나 스트리밍한다. 구체적으로, 사용자는 임의의 하나 이상의 컴퓨팅 디바이스들(104a 내지 104c)에 위치된 사용자 인터페이스를 통해 하나 이상의 커맨드들을 입력할 수 있고, 이는 서버(102)로 송신된다. 차례로, 서버(102)는 라이브 공연 또는 스튜디오 공연이 열리는 동안 원하는 동작을 실행하는 의도된 노드(106a 내지 106c)에 커맨드들을 송신한다. 다양한 노드들(110a 내지 110n)은 라이브 공연이 열리는 동안 하나 이상의 조명, 마이킹, 증폭, 비디오그래피, 프로젝션, 신호탄, 색종이 조각 대포들, 무대 위의 로봇, 공연장에서 재생되는 오디오 클립들 등을 제어할 수 있다.
시스템(100)과 관련하여 개시된 양태들은 또한 컴퓨팅 디바이스들(104a 내지 140c)에 제시된 온라인 포털을 통해 라이브 채팅 상자(예를 들어, 인터넷 릴레이 채팅(IRC))에 입력된 키워드들에 응답하여 컴퓨팅 디바이스들(104a 내지 104c)이 커맨드들을 서버(102)와 노드들(106a 내지 106n)에 송신할 수 있음을 제공할 수 있다. 서버(102) 및/또는 노드들(106a 내지 106n)은 공연장(107)에서 라이브 공연 동안 이벤트들을 트리거하기 위해 컴퓨팅 디바이스들(104a 내지 104c)에 의해 DMX, MaxMSP, 고화질 멀티미디어 인터페이스(HDMI), 직렬 등으로 수신된 커맨드들을 변환할 수 있다.
도 2는 일 실시예에 따라 가상 지원 스튜디오 또는 라이브 공연을 위해 하나 이상의 카메라들(110a)을 제어하기 위한 방법(120)을 묘사한다.
동작(122)에서, 컴퓨팅 디바이스(104)는 공연을 관람하는 사용자(예를 들어, 관중)로부터 하나 이상의 커맨드들을 수신한다. 하나 이상의 커맨드들은 사용자에게 원하는 공연의 뷰를 제공하기 위해 카메라(110a)의 요청된 움직임들에 대응할 수 있다. 다른 예에서, 카메라들(110a)(예를 들어, GoPro® 카메라들)은 라이브 공연에서 공연하는 밴드의 하나 이상의 멤버들(예를 들어, 머리/가슴) 또는 그들 개별의 악기들에 위치될 수 있다. 하나 이상의 커맨드들은 임의의 하나 이상의 라이브 밴드 멤버들 또는 하나 이상의 그들의 악기들에 위치된 하나 이상의 카메라들(110a)을 활성화하는 것에 대응할 수 있다. 컴퓨팅 디바이스(104)는 하나 이상의 커맨드들을 서버(102)로 송신한다.
동작(124)에서, 서버(102)는 하나 이상의 커맨드들을 공연장(107)에 있는 노드(110a)(또는 카메라 제어기(108a))로 송신한다. 카메라 제어기(108a)는 라이브 공연이 열리는 공연장(107)에 물리적으로 근접하게 위치된다.
동작(126)에서, 카메라 제어기(108a)는 사용자에 의해 송신되는 하나 이상의 커맨드들에 따라 공연의 라이브 비디오 스트림을 제공하기 위해 공연장에 있는 하나 이상의 카메라들(110a)을 원하는 카메라 각도 또는 고도로 이동(또는 회전)하도록 제어한다. 전술한 바와 같이, 카메라 제어기(108a)는 또한 컴퓨팅 디바이스(104)로부터 수신된 커맨드들에 기초하여 밴드 멤버 또는 밴드 멤버들의 악기들 상에 위치된 임의의 카메라들을 선택적으로 활성화/비활성화할 수 있다. 서버(102)가 라이브 공연을 캡처하는 공연장(107)에 분산된 카메라들(110a)의 위치 및/또는 임의의 하나 이상의 밴드 멤버 또는 하나 이상의 그들 개별의 악기들에 위치된 카메라들(110a)의 위치의 상세한 목록 또는 매핑을 제공함이 인지된다. 서버(102)는 이 매핑(또는 카메라 맵)을 컴퓨팅 디바이스들(104)에 제공하여 컴퓨팅 디바이스(104)가 사용자가 임의의 수의 카메라들을 선택하여 그 동작을 제어할 수 있도록 한다. 컴퓨팅 디바이스들(104)은 또한 본 명세서에 개시된 임의의 피쳐들에 대한 매핑을 제공할 수 있다는 것이 인지된다. 사용자는 사용자에 의해 요청 시 원하는 각도에서 라이브 공연의 이미지들을 캡처하기 위해 임의의 하나 이상의 카메라(110a)를 제어할 수 있다. 예를 들어, 사용자는 라이브 공연 중에 가수에 가장 가까운 카메라를 제어하여 가수를 확대할 수 있다. 유사하게, 사용자가 기타리스트이고 기타 솔로를 연주하는 동안 무대에서 기타 연주자의 클로즈업 샷 또는 뷰(예를 들어, 확대된 뷰)를 얻는 데 관심이 있는 경우에도, 사용자는 솔로를 연주하는 동안 기타리스트를 자세히 보기 위한 기타리스트의 프렛 보드를 확대하기 위해 기타리스트(또는 기타리스트 또는 기타 자체)에 가장 가까운 카메라(110a)를 제어할 수 있다. 추가적으로, 다른 카메라들(110a)은 전체 밴드의 이미지들을 캡처하기 위해 공연장 주변에 위치될 수 있다. 사용자는 그들이 공연하는 동안 전체 밴드의 클로즈업을 캡처하기 위해 확대 또는 축소하도록 이러한 카메라(들)(110a)을 명령할 수 있다. 유사하게, 임의의 하나 이상의 카메라들(110a)(또는 전방향 카메라들)은 사용자에 의해 요청되는 경우 라이브 공연의 360도 뷰(예를 들어, 조감도 뷰)를 제공할 수 있다. 카메라 제어기(108)는 임의의 수의 비디오 스트림들을 송신할 수 있다는 것이 인지된다. 일 예에서, 카메라 제어기(108)는 공연장(107)에서 공연하는 각 음악가에 대한 비디오 스트림을 컴퓨팅 디바이스들(104)로 송신할 수 있다. 이와 관련하여, 컴퓨팅 디바이스들(104)은 또한 사용자가 표시할 비디오 스트림(들)을 선택할 수 있게 할 수 있다.
동작(128)에서, 카메라 제어기(108a)는 동작(122)에서 설정한 줌인 또는 줌아웃 샷들 또는 원하는 앵글들에 따라 라이브 공연을 캡처된 이미지들을 서버(102)로 송신할 수 있다. 차례로, 서버(102)는 캡처된 이미지들을 다시 사용자에게 표시하기 위한 컴퓨팅 디바이스(104)로 송신한다.
도 3은 일 실시예에 따라 가상 지원 스튜디오에서 또는 라이브 공연을 위해 조명(110b)을 제어하기 위한 방법(130)을 묘사한다.
동작(132)에서, 컴퓨팅 디바이스(104)는 공연을 관람하는 사용자(예를 들어, 관중)로부터 하나 이상의 커맨드들을 수신한다. 하나 이상의 커맨드들은 사용자에게 원하는 공연 조명을 제공하기 위해 조명의 요청된 움직임들에 대응할 수 있다. 컴퓨팅 디바이스(104)는 하나 이상의 커맨드들을 서버(102)로 송신한다.
동작(134)에서, 서버(102)는 하나 이상의 커맨드들을 공연장(107)에 있는 노드(110b)(또는 조명 제어기(108b))에 송신한다. 조명 제어기(108b)는 라이브 공연이 열리는 공연장(107)에 근접하여 물리적으로 위치된다.
동작(136)에서, 조명 제어기(108b)는 라이브 공연이 열리는 동안(또는 실시간으로) 원하는 방식으로 스포트라이트들, 스트로브들, 조명 패턴들, 공연장(107)의 관객 조명, 무대 색상들, 애니메이션들 등과 같은 공연장(107)의 임의의 조명을 제어한다. 특히, 조명 제어기(108b)는 서버(102)를 통해 컴퓨팅 디바이스(104)로부터 수신된 메시지들(또는 커맨드들)을 전술한 조명 디바이스들 및 동작들을 제어하는 디지털 멀티플렉스(DMX) 통신(또는 다른 적합한 맞춤형 통신 프로토콜)으로 변환한다.
서버(102)는 라이브 공연을 캡처하는 공연장(107) 전체에 분산된 모든 조명(110b)의 상세한 목록 또는 매핑을 제공하는 것으로 인지된다. 서버(102)는 컴퓨팅 디바이스(104)가 사용자가 그 동작을 제어하기 위해 임의의 수의 조명들(또는 조명)을 선택할 수 있도록 컴퓨팅 디바이스들(104)에 이러한 매핑(또는 조명 맵 )을 제공한다. 컴퓨팅 디바이스(104)는 대안적으로 상세한 목록 또는 매핑을 제공할 수 있다는 것이 인지된다.
동작(138)에서, 조명 제어기(108b)는 이에 따라 조명(110b)을 제어하고 카메라(110a)는 카메라 제어기(108a)를 통해 라이브 공연의 공연장(107)에서 제어되는 조명(110b)의 캡처된 이미지들을 동작(132)에서 원래 설정된 원하는 조명에 따라 서버(102)로 송신한다. 차례로, 서버(102)는 캡처된 이미지들을 다시 사용자에게 표시하기 위한 컴퓨팅 디바이스(104)로 송신한다.
도 4는 일 실시예에 따라 가상 지원 스튜디오 또는 라이브 공연을 위해 하나 이상의 소품들(또는 로봇들(110c))을 제어하기 위한 방법(140)을 묘사한다.
동작(142)에서, 컴퓨팅 디바이스(104)는 공연을 관람하는 사용자(예를 들어, 관중)로부터 하나 이상의 커맨드들을 수신한다. 하나 이상의 커맨드들은 공연 중에 소품(들)의 원하는 작동을 사용자에게 제공하기 위해 로봇들(또는 소품)의 요청된 움직임들에 대응할 수 있다. 컴퓨팅 디바이스(104)는 하나 이상의 커맨드들을 서버(102)로 송신한다. 일 예에서, 사용자는 전기적으로 제어되고 라이브 공연이 진행되는 동안(또는 실시간으로) 원하는 방식으로 기계적인 움직임 또는 작동이 필요한 무대 위의 소품들(또는 로봇들(110c)) 중 임의의 하나 이상을 제어하기 위해 로봇 노드(106c)를 제어할 수 있는 컴퓨팅 디바이스들(104a, 104b, 104c) 중 하나 이상에 커맨드를 입력할 수 있다.
동작(144)에서, 서버(102)는 공연장(107)에서 노드(108c)(또는 로봇 제어기(106c))에 하나 이상의 커맨드들을 송신한다. 로봇 제어기(106c)는 라이브 공연이 열리는 공연장(107)에 물리적으로 근접하게 위치된다.
동작(146)에서, 로봇 제어기(106c)는 서버(102)를 통해 컴퓨팅 디바이스들(104)로부터 수신된 하나 이상의 커맨드들에 따라 공연장에서 원하는 소품들(110c)을 활성화/비활성화할 수 있다. 노드(106c)는 서버(102)로부터 수신된 메시지들을 전술한 로봇/소품 동작들을 제어하는 통신 프로토콜(또는 다른 적합한 맞춤형 통신 프로토콜)로 변환한다. 소품들은 아티스트들이 사용자들의 콘서트 경험을 향상시키기 위해 사용할 수 있는 무대 주위 또는 무대 위에 위치된 기계 디바이스들(또는 로봇들)에 대응할 수 있다. 예를 들어, 헤비메탈 밴드인 아이언 메이든(Iron Maiden®)을 생각해 보면, 이러한 밴드는 "에디(Eddie)" 또는 "에디 머리(Eddie the Head)"라고도 알려진 마스코트가 있다: 대형 기계 로봇들은 무대에서 에디(Eddie)의 형태로 구성된다. 에디의 이미지를 형상화한 로봇은 밴드와 함께 무대에 등장해 밴드가 다양한 곡들을 연주하는 동안 무대를 이동하는 것으로 알려졌다. 이 경우에는, 사용자는 서버(102)를 통해 로봇 제어기(106c)로 발송되는 컴퓨팅 디바이스(104a 내지 104c)에 입력된 커맨드들을 통해 에디의 다양한 움직임들을 제어하도록 선택할 수 있다. 이 경우에, 노드(106c)는 라이브 공연 중 무대 위의 에디의 움직임을 제어하기 위해 서버(102)에 의해 수신된 커맨드들을 직렬 데이터로 변환할 수 있다.
서버(102)는 라이브 공연 동안 제어될 수 있는 공연장(107) 전체에 분산된 모든 소품들(110c)의 상세한 목록 또는 매핑을 사용자에게 제공하는 것이 인지된다. 서버(102)는 컴퓨팅 디바이스들(104)에 이 매핑(또는 소품 맵)을 제공하여 컴퓨팅 디바이스(104)가 사용자가 임의의 수의 소품들을 선택하여 그 동작을 제어할 수 있도록 한다. 컴퓨팅 디바이스(104)는 모든 소품들(110c)의 매핑에 대한 상세한 목록을 제공할 수 있다는 것이 또한 인지된다.
동작(148)에서, 로봇 제어기(106c)는 이에 따라 소품들을 제어하고 카메라 제어기(108a)를 통해 카메라들(110a)은 커맨드들에 기초하여 수정되는 소품들의 캡처된 이미지를 서버(102)에 송신한다. 차례로, 서버(102)는 캡처된 이미지들을 다시 사용자에게 표시하기 위한 컴퓨팅 디바이스(104)로 송신한다.
도 5는 일 실시예에 따라 가상 지원 스튜디오 또는 라이브 공연을 위한 다양한 활동들을 제어하기 위한 방법(150)을 묘사한다.
동작(152)에서, 컴퓨팅 디바이스(104)는 공연을 보는 사용자(예를 들어, 관중)로부터 하나 이상의 커맨드들을 수신한다. 하나 이상의 커맨드들은 라이브 공연이 열리는 동안(또는 실시간으로) 원하는 방식으로 신호탄, 색종이 조각 대포, 스크린 상의 비디오/오디오 프로젝션, 마이킹, 증폭 등과 같은 무대 상의 다양한 항목들(또는 다양한 항목(110n))을 제어하는 것에 대응할 수 있다. 컴퓨팅 디바이스(104)는 하나 이상의 커맨드들을 서버(102)로 송신한다. 일 예에서, 사용자는 라이브 공연이 열리는 동안(또는 실시간으로) 원하는 방식으로 다양한 제어기(106n)(예를 들어, 신호탄 노드, 색종이 조각 대포 노드, 비디오/오디오 프로젝터, 텔레비전, LED 패널(또는 LED 벽) 등과 같은 공연장(107)의 임의의 수의 디스플레이) , 마이킹 노드(예를 들어, 바이노럴 마이크(들)(binaural microphone(s)), 증폭 등과 같지만 이에 제한되지 않는 마이크들))를 제어할 수 있는 하나 이상의 컴퓨팅 디바이스들(104a, 104b, 104c)에 커맨드를 입력할 수 있다. 사용자는 기타 또는 베이스의 톤 변경, 특정 악기의 볼륨 증가와 같지만 이에 제한되지 않는 임의의 수의 양태들(또는 오디오 속성)을 제어할 수 있다. 시스템(100)은 사용자가 악기를 연주하는 음악가에 대한 전용 비디오 스트림을 선택하는 것에 응답하여 임의의 주어진 악기에 대한 볼륨을 자동으로 증가시킬 수 있다는 것이 인지된다. 유사하게, 사용자는 공연장(107)으로부터 수신된 오디오에 기초하여 그들 자신의 음악 믹스를 생성하고 이퀄라이제이션(equalization), 효과들, 압축 등과 같은 개인화된 오디오 선호도들을 추가할 수 있다. 바이노럴 마이크들과 같은 그러나 이에 제한되지 않는 마이크들은 마이크들이 공연장(107)에서 청중의 분위기와 느낌을 캡처하고 마이크들이 캡처된 분위기를 서버(102) 및 기타 제어기(106n)를 통해 컴퓨팅 디바이스(104)에 제공할 수 있도록 공연장(107)에 위치될 수 있다는 것이 인지된다(예를 들어, 공연장(107)에서 청중 주위에 위치됨). 컴퓨팅 디바이스(104)는 또한 공연장(107)에서 하나 이상의 마이크들을 선택적으로 활성화 및 비활성화하기 위한 커맨드들을 송신할 수 있다. 마이크들은 바이노럴, 빔포밍, 지향성, X-Y, ORTF(Office de Radiodiffusion
Figure pct00001
) 마이킹/녹음 솔루션 등 또는 다른 적절한 기술들에 대응할 수 있다.
동작(154)에서, 서버(102)는 공연장(107)에서 하나 이상의 커맨드들을 노드(108n)(또는 신호탄 제어기, 색종이 조각 대포 제어기, 비디오/오디오 프로젝션 제어기, 마이킹 제어기, 증폭 제어기 등, 집합적으로 다양한 제어기(106n)라고 함)로 송신한다. 다양한 제어기(106c)는 라이브 공연이 열리는 공연장(107)에 물리적으로 근접하게 위치된다.
동작(156)에서, 다양한 제어기(106n)는 서버(102)를 통해 컴퓨팅 디바이스들(104)로부터 수신된 하나 이상의 커맨드들에 따라 다양한 항목들(110n)(예를 들어, 신호탄, 색종이 조각 대포, 비디오/오디오 프로젝션, 마이킹(또는 마이크들(예를 들어, 바이노럴 마이크들 등)), 증폭 등)을 활성화/비활성화할 수 있다. 예를 들어, 다양한 제어기(106n)는 신호탄, 색종이 조각 제어기, 비디오/오디오 프로젝션, 마이킹 및 증폭을 활성화할 수 있다. 마이킹과 관련하여, 다양한 제어기(106n)는 무대 상에 캡처된 오디오에 대한 마이킹 레벨을 증가시키거나 감소시킬 수 있다. 예를 들어, 다양한 제어기(106b)는 오디오의 레벨을 제어할 수 있고 특히 사용자에 의해 요청되는 원하는 양에 대응하도록 하나 이상의 마이크들에 의해 캡처되는 특정 악기에 대한 레벨을 제어할 수 있다. 유사하게, 사용자는 공연장(107)에서 연주되고 있는 임의의 악기에 적용되는 증폭의 양을 조정할 수 있다. 사용자는 또한 공연장에 있는 임의의 화면들 또는 모니터들 상의 비디오 또는 오디오 프로젝션들을 활성화할 수 있다. 다양한 제어기(106n)는 또한 공연장(107)에 위치된 바이노럴 마이크들을 선택적으로 활성화/비활성화할 수 있다.
서버(102)는 라이브 공연 동안 제어될 수 있는 모든 다양한 항목들(110n)의 상세한 목록 또는 매핑을 사용자에게 제공하는 것으로 인지된다. 서버(102)는 컴퓨팅 디바이스(104)가 사용자가 항목들의 동작을 제어하기 위해 임의의 수의 항목들(예를 들어, 활성화 또는 비활성화될 수 있는 오디오 및/또는 비디오 클립의 유형, 색종이 조각 대포, 불꽃놀이, 악기에 대한 마이킹, 바이노럴 마이크 및 악기 증폭)을 선택할 수 있도록 이 매핑(또는 기타 맵)을 컴퓨팅 디바이스들(104)에 제공한다.
동작(158)에서, 다양한 제어기(108n)는 이에 따라 다양한 항목들을 제어하고, 카메라 제어기(108a)를 통해 카메라들(110a)은 커맨드들에 기초하여 수정되는 다양한 항목들(106n)의 캡처된 이미지들을 서버(102)에 송신한다. 차례로, 서버(102)는 캡처된 이미지들을 다시 사용자에게 표시하기 위한 컴퓨팅 디바이스(104)로 송신한다. 사운드 보드가 공연장(107)에 위치될 수 있고 오디오 스트림들을 서버(102)에 무선으로 송신할 수 있다는 것이 인지된다. 차례로, 서버(102)는 오디오 스트림을 컴퓨팅 디바이스(104)로 송신한다. 따라서, 이와 관련하여, 마이킹 및/또는 증폭에 대해 수행된 임의의 변경사항들은 컴퓨팅 디바이스들로 송신되는 송신된 오디오 스트림들에서 캡처될 것이다.
추가적으로, 컴퓨팅 디바이스(104a 내지 104c)의 사용자들은 이러한 사용자들이 라이브 공연 중에 발생하는 원하는 이벤트를 실행하기 위해 다양한 노드들(106a 내지 106n)을 제어할 수 있도록 하는 크레딧(credit)들을 얻기 위해 통화를 교환할 수 있다는 것이 인지된다. 이와 관련하여, 사용자는 다음 중 하나 이상을 위해 개별의 컴퓨팅 디바이스들(104a 내지 104c)을 사용할 수 있다: 청중 또는 라이브 공연 무대 둘 모두에 위치된 바이노럴 마이크(들)에 의해 제공되는 t HiFi 오디오 제어 및/또는 액세스, 라이브 공연에서 밴드 멤버들을 위한 특정 악기들의 오디오 솔로들, 추가의 비디오 스트림들, 아티스트와 상호작용할 수 있는 기회, 밴드 뒤에 위치한 프로젝션 화면에 사용자 이름과 이모티콘들의 공유, 및 라이브 공연 중에 열리는 특별한 이벤트들.
서버(102)는 구매된 크레딧들의 수에 기초하여 또는 어떤 다른 배열을 통해 명성의 상이한 레벨들을 부여할 수 있다. 가상 통화는 사용자들이 명성과 가상 통화 잔고에 기초하여 액세스에 대한 비용을 지불하고 상이한 피쳐들(예를 들어, 카메라들(110a), 조명(110b), 로봇들(110c), 다양한 항목들(110n))을 제어할 수 있게 한다. 사용자들과 연관된 더 높은 명성 설정들은 이러한 사용자들에게 서로 모순될 수 있는 커맨드들을 무시할 수 있는 더 높은 우선 순위를 제공할 수 있다. 예를 들어, 사용자 1은 "기본 플레이어" 또는 고객으로 간주되고 및 사용자 2는 "프리미엄 플레이어"로 간주될 수 있다. 사용자 1은 앞으로 이동하는 로봇(110c)의 움직임을 제어하는 커맨드를 송신하고, 사용자 2는 뒤로 이동하는 로봇(110d)의 움직임을 제어하는 커맨드를 송신하는 경우, 서버(102)는 사용자 1과 사용자 2 각각에 대한 명성 레벨을 결정하고 사용자 2에 대한 명성 레벨이 사용자 1보다 높기 때문에 뒤로 이동하는 로봇(110c)을 이동시키는 커맨드(예를 들어, 사용자 2로부터의 커맨드)를 활성화한다. 추가적으로, 두 명의 사용자들이 비슷한 명성 레벨을 공유하는 경우, 서버(102)는 커맨드가 다른 커맨드들에 대해 수신되는 순차적인 순서에 기초하여 공연장(107)에서의 라이브 공연에서 원하는 이벤트를 실행할 수 있다. 이 경우에는, 서버(102)는 공연장(107)에서 라이브 공연 동안 원하는 이벤트가 발생하도록 이벤트가 활성화되거나 비활성화되면 시간 지연을 사용할 수 있다. 일단 지연이 만료되면, 그 다음 서버(102)는 공연장(107)에서 라이브 공연 동안 원하는 이벤트가 활성화 또는 비활성화되도록 다음 커맨드를 처리할 수 있다. 명성이나 지위에 기초하여 사용자들에게 커맨드들을 실행하는 것 외에도, 시스템(100)은 대안적으로 미리결정된 수의 커맨드들을 모니터링하거나 집계하고 사용자들에 의해 주로 요청되는 것에 관한 단순한 다수에 기초하여 이러한 커맨드들을 실행할 수 있다.
도 6은 모순된 커맨드들이 일 실시예에 따라 가상 지원 스튜디오 또는 라이브 공연과 관련된 양태들을 제어하기 위해 제공될 때 제1 사용자와 제2 사용자 간의 명성을 결정하기 위한 방법(160)을 묘사한다.
동작(162)에서, 서버(102)는 개별적으로, 제1 및 제2 컴퓨팅 디바이스들(104a, 140b)로부터 제1 및 제2 커맨드를 수신한다. 동작(164)에서, 서버(102)는 제1 및 제2 커맨드들이 공연장(107)에서 수행되어야 할 모순된 동작들을 포함하는지 여부를 결정한다. 예를 들어, 서버(102)는 제1 커맨드가 제2 커맨드를 통해 요청된 제2 조명 순서와 상이한 제1 조명 순서를 나타내는 것으로 결정할 수 있다. 모순된 커맨드들이 수신되지 않은 경우, 방법(160)은 동작(168)으로 진행하고 그 다음 서버(102)는 커맨드들이 수신된 순차적인 순서에 기초하여 2개의 커맨드들을 실행할 수 있다. 서버(102)가 모순되는 커맨드들이 있다고 결정하는 경우, 그 다음 방법(160)은 동작(166)으로 이동한다.
동작(166)에서, 서버(102)는 제1 사용자와 제2 사용자가 동등한 레벨의 명성을 갖는지의 여부를 평가하거나 결정한다. 예를 들어, 제1 사용자와 제2 사용자가 동등한 레벨의 명성을 갖는 경우, 서버(102)는 공연장(107)에서 동시에 서로 모순되는 변경사항들을 실행하는 것이 바람직하지 않기 때문에 제1 및 제2 커맨드들을 실행할지 여부를 결정하기 위해 다른 기준을 평가할 필요가 있다. 서버(102)가 제1 사용자와 제2 사용자가 동등한 레벨의 명성을 갖고 있다고 결정하는 경우, 그 다음 방법(160)은 동작(168)으로 진행하고 이러한 커맨드들이 수신된 순차적인 순서에 기초하여 커맨드들을 실행한다. 서버(102)가 제1 사용자와 제2 사용자가 동등한 레벨의 명성을 갖지 않는다고 결정하는 경우, 그 다음 방법(160)은 동작(170)으로 진행한다.
동작(170)에서, 서버(102)는 제1 커맨드와 제2 커맨드들 사이에서 먼저 수신된 커맨드를 공연장(또는 노드들(106a 내지 106n) 중 어느 하나)로 송신하여 가장 높은 명성을 가진 사용자에 속하는 커맨드가 먼저 실행되도록 한다. 공연장(107)에서 가장 높은 명성을 가진 사용자의 커맨드가 실행되면, 서버(102)는 낮은 명성을 가진 사용자에 속하는 수신된 다음 커맨드를 송신하여 이 커맨드가 이후 공연장(107)에서 실행되도록 한다. 동작(170)에서, 서버(102)는 가장 높은 명성을 가진 사용자에 속하는 커맨드를 공연장(107)으로 송신하여 이 커맨드가 실행되도록 한다 .
채팅 상자(또는 다른 사용자 인터페이스 매체들)는 메시징, IRC의 해석 및 사용자가 시스템(100)에 액세스한 다음 DAC를 통해 커맨드를 발송하는지 여부를 처리하기 위해 컴퓨팅 디바이스들(104a 내지 104c)에서 사용될 수 있다. 컴퓨팅 디바이스들(104a 내지 104c)(예를 들어, IRC)로부터 송신된 커맨드들은 노드들(108a 내지 108n)에 (직접 또는 간접적으로) 발송될 수 있다. 이는 스크립트, 소켓 커맨드들, DMX, 직렬 등을 통해 수행될 수 있다. 디지털-아날로그 변환기(DAC)를 사용하여 릴레이들, 로봇들 등을 트리거하기 위해 전압 또는 전류를 송신하도록 이용될 수 있다. IRC(또는 채팅 상자)는 많은 유형들의 아날로그 또는 디지털 커맨드들을 다양한 노드들로 송신할 수 있다. 디지털 커맨드들 유형들의 예들은 MIDI, 직렬, DMX 조명 제어기들, TCP 등을 포함할 수 있으며 아날로그 신호들의 예들은 조명, 로봇들, 릴레이들, 미터들 등을 포함할 수 있다. 디지털 또는 아날로그 기반 신호들은 시스템(100)에서 송신될 수 있음이 인지된다. 노드들(108a 내지 108n)은 서버(102)에 의해 수신된 임의의 수의 커맨드들을 DMX, MaxMSP, HDMI, 직렬 등으로 변환하도록 구성된 단일 전자 유닛에 통합될 수 있음이 더 인지된다. 그 다음 DMX, MaxMSP, HDMI, 직렬 형식의 정보는 하나 이상의 컴퓨팅 디바이스들(104a 내지 104c)에서 요청된 방식으로 이러한 디바이스들을 제어하기 위해 대응하는 카메라들(110a), 조명(110b), 로봇들(110c), 및 다양한 항목들(110n) 등에 송신될 수 있다.
다른 예에서, 서버(102)는 컴퓨팅 디바이스들(104a 내지 104c)의 사용자 인터페이스(예를 들어, IRC)를 통해 그에 제출된 투표 프록시(voting proxy)의 결과들을 결정할 수 있다. 투표들은 다음 노래를 결정하고, 포그 머신(신호탄, 로봇들 등)을 트리거할 시기를 결정하고, 퀴즈에 답하고, 다른 이벤트를 트리거하는 등에 사용될 수 있다. 투표들은 또한 이벤트를 트리거할지 여부에 대한 미터(meter) 또는 조건으로 해석될 수 있다. 예를 들어, "투표 미터"는 라이브 공연의 조명들을 빨간색으로 변경하기 위해 500명이 투표할 수 있는 곳에 이용될 수 있다. 해당 포인트에서, 일단 임계치에 도달하면(또는 대부분의 투표들에 도달하면), 조명들은 빨간색으로 켜지도록 제어될 수 있다. 서버(102)는 또한 "사용자들을 무대에 올리기"를 위해 배타적인 사용자들과 비디오 통화들을 주최하기 위한 공연장(107) 내에 어딘가에(예를 들어, 무대 상에, 앞줄, 대기실, 무대 뒤, 집 앞 등) 위치된 원격 컴퓨터들(예를 들어, 휴대폰들, 태블릿들, 랩탑들(예를 들어, 임의의 인터넷 연결 디바이스))를 제어할 수 있다.
다른 예에서, 서버(102)는 사용자들이 원격으로 로그인하기 위해 원격으로 주최되는 그룹 이벤트들을 가능하게 할 수 있다. 추가적으로, 컴퓨팅 디바이스들(104a 내지 104c)은 사용자들이 다음을 수행할 수 있도록 일회성 이벤트들에 대한 배타적인 인터페이스를 제공한다: (1) 버튼 누르기, (2) 투표하기, (3) 퀴즈 질문들에 답하기, (4) 애니메이션 그리기, (5) 무대 색상들 변경 등.
시스템(100)은 일반적으로 온라인 라이브 스트리밍될 라이브 가상 콘서트 시리즈들을 가능하게 한다. 시스템(100)은 또한 팬들이 무료로 스트리밍할 수 있게 하고 또한 라이브 공연의 오디오 품질 및 피쳐들에 대한 액세스의 등급화된 레벨들을 제공한다. 시스템(100)은 또한 콘텐츠 및 배타적인 상품에 대한 추가의 액세스에 대한 등급화된 티켓들을 제공한다.
도 7은 일 실시예에 따라 도 1의 시스템(100)에 의해 발행될 수 있는 응원 크레딧들(172)의 예들을 묘사한다. 도 7은 이러한 사용자들이 크레딧들을 통화로 교환할 때 사용자들에게 발행될 수 있는 다양한 응원 크레딧을 예시한다. 예를 들어, 시스템(100)은 이모티콘과 같은 다양한 팬 상호작용들을 게시하고, 화면에 걸쳐 이모티콘을 드래그하고, 아티스트에 의해 연주된 노래 또는 딥 컷에 투표하고, 프로젝션 화면에 표시된 밴드에 개인화된 메시지를 발송하고, 공연 중에 한 명 이상의 밴드 멤버들이 구두로 개인화된 메시지를 말하게 하고, 및/또는 공연장(107)에서 일부 유형의 오디오를 렌더링하기 위해 사용자가 아티스트 뒤에서 대형 프로젝션 화면(들)을 사용할 수 있게 할 수 있다. 도 7은 다양한 응원 크레딧들에 대한 환율(exchange rate)로 사용될 수 있는 통화의 예들을 더 묘사한다.
도 8은 또한 일 실시예에 따라 도 1의 시스템(100)에 의해 발행될 수 있는 응원 크레딧들(174)의 예들을 묘사한다. 예를 들어, 시스템(100)은 미리결정된 수의 응원 크레딧들과 함께 제공되는 콘텐츠 등급들을 제공할 수 있다. 한 예에서, 시스템(100)은 5 응원 크레딧들을 제공하는 제1 레벨(또는 기본 레벨), 10 응원 크레딧들을 제공하는 제2 레벨(또는 중간 레벨), 및 15 응원 크레딧들을 제공하는 제3 레벨(예를 들어, 배타적인 레벨)을 제공할 수 있다. 제1 레벨은 라이브 공연 및 선택된 조명 패턴 동안 공연장(107)에서 게시 또는 포스팅을 위한 이름 포스팅(예를 들어, 컴퓨팅 디바이스의 사용자 이름)에 대한 액세스를 제공할 수 있다. 제2 레벨은 수많은 개인화된 메시지들과 배타적인 이모지들 또는 사운드 바이트들을 제공할 수 있다. 제3 레벨은 밴드 멤버들에 대한 임의의 수의 스포트라이트들을 제공하고 일대일 경매에 참여할 수 있는 액세스 권한을 제공할 수 있다.
도 9는 일 실시예에 따라 도 1의 시스템(100)에 의해 발행될 수 있는 티켓 등급들(176)의 예들을 묘사한다. 일반적으로, 티켓 등급들(176)은 일반 입장권, 예약 좌석, 앞줄 좌석, 및 무대 뒤 패스를 포함할 수 있다. 일반 입장권 등급은 사용자들에게 광고, 구매에 대한 응원들 또는 무료 포함 응원들, 인스턴스당 지불 옵션, "아이디어 얻기" 옵션을 제공할 수 있고, 사용자가 더 높은 등급들에 대한 티켓을 구매할 수 있는 배타적인 피쳐들을 샘플링할 수 있는 기회를 제공할 수 있다. 아이디어 얻기 옵션은 HiFi 오디오 경험 또는 다른 적합한 피쳐와 같은 사용가능한 업그레이드들의 30초 또는 60초 미리보기를 제공하는 것과 대응할 수 있다.
예약된 좌석 등급은 사용자들/구매자들이 쇼 동안 광고들에 노출될 필요가 없도록 구매자들을 위한 광고 없음 피쳐를 제공할 수 있다. 예약된 좌석 등급은 또한 구매에 대한 응원 또는 무료 포함 응원을 제공할 수 있고 구매자에게 일반 입장권 등급에서 허용된 것보다 더 많은 카메라들을 활성화/비활성화할 수 있는 옵션을 제공할 수 있다. 예약된 좌석 등급은 또한 구매자들에게 HiFi 오디오 경험을 제공할 수 있다. HiFi 오디오 경험은 고품질 오디오, 무손실 코덱, 바이노럴 처리(예를 들어, 오디오가 공연장(107)의 벽들에서 반사되는 방식에 기초하여 사용자가 실제로 청중 안에 있다는 인식을 제공함)에 대응할 수 있다.
앞줄 좌석 등급은 또한 패키지의 일부로서 구매 또는 무료 응원들과 함께 광고 없음 피쳐들을 제공할 수 있다. 유사하게, 앞줄 좌석 등급은 구매자들에게 HiFi 오디오 경험과 좌석 옵션과 같은 앞줄을 제공할 수 있다. 좌석 옵션과 같은 앞줄은 일반적으로 임의의 팬이 콘서트에서 밴드 멤버와 일대일 경험을 갖도록 선택될 추첨을 제공하는 시스템(100)을 포함한다. 앞줄 좌석 등급은 또한 향상된 오디오 경험을 위해 헤드 트래킹 옵션들(예를 들어, JBL QuantumSPHERE 30 360®에 의해 제공되는 오디오 경험)이 있는 헤드폰들에 대한 상품 및 크레딧 구매를 위한 옵션을 제공할 수 있다. 무대 뒤 패스 등급은 구매 시, 패키지의 일부로 구매 또는 무료의 응원들과 함께 광고 없음 피쳐들을 제공할 수 있다. 유사하게, 무대 뒤 패스 등급은 다른 등급들에 의해 제공되는 것보다 공연장(107)에서 더 많은 수의 카메라들(110a)에 대한 HiFi 오디오 경험 및 더 많은 제어를 구매자들에게 제공할 수 있다. 무대 뒤 패스 등급은 또한 사용자들에게 예를 들어, 서명된 JBL 헤드폰과 같은, 배타적인 맞춤형 및 서명된 헤드 트래킹 시스템을 받을 수 있도록 제공할 수 있다. 무대 뒤 패스는 또한 앞줄 좌석 경험 옵션과 VIP 라운지를 포함한다. 시스템(100)에 의해 제공되는 VIP 라운지 피쳐는 이에 액세스할 수 있는 팬들이 공연장(107)의 대기실에 위치된 모바일 디바이스들(예를 들어, 태블릿들)에 나타날 수 있게 하고 이는 사용자들이 밴드 멤버들이 논의하는 내용을 듣는 기능과 또한 쇼 전후에 밴드 멤버들과 대화할 수 있는 기능을 허용한다.
도 10은 일 실시예에 따라 도 1의 시스템(100)에 의해 발행될 수 있는 배타적인 피쳐들(178)의 예들을 묘사한다. 시스템(100)에 의해 제공되는 배타적인 피쳐들(178)은 전술한 바와 같이 앞줄 옵션 및 VIP 라운지 옵션을 포함한다. 앞줄 옵션은 사용자가 무대에서 "풀업"할 수 있고 앞줄 옵션은 팬들이 추가 응원들에 지불할 수 있게 한다. 유사하게, 앞줄 옵션을 사용하면, 사용자는 원하는 만큼 추첨에 그들의 이름을 입력할 수 있다. 배타적인 피쳐들(178)은 또한 무대 뒤 패스 등급을 가진 팬들이 경매에 참여하여 라이브 공연이 끝날 때 밴드 멤버들과 비공개의 일대일 앙코르에 액세스할 수 있는 "1대1 옵션"을 제공한다.
도 11은 일 실시예에 따라 도 1의 시스템에 의해 발행될 수 있는 배타적인 제안(178)의 예들을 묘사한다. 전술한 바와 같이, 배타적인 제안(178)은 예를 들어, JBL QuantumONE® 헤드폰과 같은 헤드 트래킹 기반 헤드폰들(또는 헤드폰 시스템)에 대응할 수 있다. 시스템(100)은 사용자에게 라이브 경험을 제공하기 위해 헤드 트래킹을 이용할 수 있는 기회를 제공한다.
도 12는 일 실시예에 따라 도 1의 시스템(100)에 의해 발행될 수 있는 재생목록 이벤트들(180)의 예들을 묘사한다. 재생목록 이벤트들(180)은 공연장(207)에서 라이브로 참여하는 사람들이 일부가 될 이벤트들에만 이용가능할 수 있다. 예를 들어, 재생목록 이벤트들(180)은 슈퍼팬 슛아웃(superfan shootout), 조명들, 데시벨 미터, 및 라이브 투표(live poll)를 포함한다. "슈퍼팬 슛아웃"은 두 명 이상의 팬들을 선택하여 이러한 팬들이 밴드에 대한 퀴즈 질문들에 답하는 것을 포함한다. 또한, 예를 들어, 퀴즈 대회에서 우승한 팬은 크레딧들이나 서명된 상품이 제공된다. "조명 이벤트"는 조명을 들기 위해 그들 개별의 컴퓨팅 디바이스의 사용자 인터페이스에서 프롬프트를 선택하기 위해 그들 개별의 모바일 디바이스들을 통해 참여하는 사용자들에 대응한다. 따라서, 조명들은 화면에 나타난다. "데시벨 미터 이벤트"는 사용자들이 컴퓨팅 디바이스들(104)을 통해, 그들의 화면(또는 사용자 인터페이스)의 버튼이나 프롬프트를 가능한 한 빨리 탭하고 서버(102) 또는 공연장(107)의 노드들 중 임의의 하나에 위치한 미터는 팬들이 이러한 버튼을 얼마나 빨리 탭하는지 측정한다. 컴퓨팅 디바이스들(104)에 대한 탭핑은 컴퓨팅 디바이스들(104) 또는 서버(102)에 의해 컴퓨팅 디바이스들(104)에서도 재생을 위한 응원링으로 변환된다. "라이브 투표 이벤트"는 팬들(또는 사용자들)이 밴드 멤버가 특정 행위를 수행하도록 투표할 수 있게 한다. 이러한 행위들은 밴드 멤버가 그들 머리 위의 페인트 통 위로 넘어지게 하거나, 공연자가 그/그녀의 얼굴에 파이를 튀기도록 강요하거나, 무대에서 청중 속으로 다이빙하거나, 및/또는 그들의 머리를 깎는 등의 행위 등에 대응할 수 있다.
도 13은 일 실시예에 따라 도 1의 시스템(100)에 의해 발행될 수 있는 추가의 재생목록 이벤트들(182)의 예들을 묘사한다. 예를 들어, 추가의 재생목록 이벤트들(182)은 진화하는 캔버스 이벤트, 레드 대 블루 이벤트, 밴드와 함께하는 잼 이벤트, 및 스포트라이트 이벤트를 포함한다. 진화하는 캔버스 이벤트는 공연장(107)에서 프로젝션 화면 상에 표시되는 컴퓨팅 디바이스(104)를 통해 수행되는 한 번에 하나의 픽셀을 라이브 페인팅하는 것을 포함한다. 이는 또한 티켓 등급이 있는 브러시 크기 척도를 포함한다. 레드 대 블루 이벤트는 그들 개별의 컴퓨팅 디바이스들(104) 상의 사용자들을 2개 이상의 팀들로 분할하는 것을 포함하며 이러한 사용자들은 그들의 컴퓨팅 디바이스(104)의 비트에 탭하거나, 밴드 퀴즈를 하거나, 또는 게임을 함으로써 서로 경쟁한다. 어떤 팀이 이기든 무대의 가상 색상이 표시되도록 컴퓨팅 디바이스(104)에 표시된다. 밴드와 함께하는 잼 이벤트는 팬들이 컴퓨팅 디바이스들(104)을 통해 전자적으로 노트들(예를 들어, 악보들)을 제출하기 위한 바보 증명 시퀀서를 생성하는 것을 포함한다. 제출된 노트들은 무대에서 밴드에 의해 순차적으로 연주되고 밴드가 따라 연주한다. 악보들은 퀀타이즈 분할(quantized division)들 및 펜타토닉 규모(pentatonic scale)일 수 있다.
도 14는 일 실시예에 따른 도 1의 시스템(100)의 컴퓨팅 디바이스(104) 상의 예시적인 사용자 인터페이스(190)를 묘사한다. 사용자 인터페이스(190)는 업그레이드 티켓 필드(192), 상품 구매 필드(194), 응원 및 입찰(bid) 필드(196) 및 대화 상자(198)를 제공할 수 있다. 사용자는 도 9에서 일반적으로 (176)으로 도시된 바와 같이 예약된 좌석 등급, 앞줄 등급, 또는 무대 뒤 패스 중 하나로 업그레이드하기 위해 업그레이드 티켓 필드(192)를 선택함으로써 그/그녀의 티켓 등급을 업그레이드할 수 있다. 사용자는 상품 필드(194)를 통해 밴드와 연관된 상품을 구매할 수 있다. 사용자는 또한 쇼의 양태들을 제어하기 위해 응원 및 입찰 필드(196)를 통해 응원 및 입찰할 수 있다. 대화 상자(198)는 사용자가 이벤트를 가상으로 보고 있는 다른 사용자들과 함께 포스팅/댓글을 작성할 수 있게 한다. 본 명세서에 설명된 바와 같이 컴퓨팅 디바이스(104)를 통해 옵션(들)의 입력 또는 선택에 대한 임의의 참조는 또한 이러한 데이터를 서버(102) 및 공연장(107)에 위치된 노드들(106)로 송신하는 것을 포함한다는 것이 인지된다.
오디오/비디오 믹스 및 라이브 오디오 및 비디오 스트림의 마스터를 원격으로 생성하기 위한 시스템 및 방법
오디오 및 비디오들의 현재 라이브 스트림들 또는 임의의 텔레비전 기반 쇼는 사전설계된 믹스 및 전문가들의 편집이다. 이는 특정 경험이 필요한 텔레비전과 같은 항목들에 특히 유용할 수 있다. 그러나, 라이브 또는 사전녹화된 이벤트 또는 다중의 오디오 및 비디오 소스들이 사용가능한 일상적인 스트림의 경우, 사용자가 자신의 경험을 만들고 라이브 공연에 있는 모든 카메라들과 다른 콘텐츠와 함께 모든 오디오 스트림들에 액세스하는 것이 바람직할 수 있다. 이는 모든 비디오 및 오디오 스트림이 사전패키징되는 문제를 해결할 수 있으며 매번 개별화된 경험으로 전환될 수 있다.
본 명세서에 개시된 양태들은 일반적으로 사용자들이 그들 자신의 고유한 경험을 생성하기 위해 이벤트로부터 상이한 콘텐츠에 액세스하고 생성/편집할 수 있게 한다. 컴퓨팅 디바이스들을 동작하는 사용자들은 라이브 또는 사전녹화된 이벤트에서 나오는 다중의 원시 콘텐츠 스트림들(예를 들어, 오디오 및 비디오 스트림들)에 액세스할 수 있다. 콘텐츠 스트림들이 오디오 및 비디오 외부로 확장될 수 있음이 인지된다. 서버는 YouTube®, Twitch®, Vimeo®, Spotify® 등과 같지만 이에 제한되지 않는 기존 플랫폼들을 통해 원격 최종 사용자들(예를 들어, 컴퓨팅 디바이스들(또는 클라이언트들))에 콘텐츠 스트림들을 제공하고 컴퓨팅 디바이스들 또는 클라이언트들을 통해 이러한 스트림들에 액세스할 수 있다. 플랫폼은 또한 비디오 및 오디오를 인코딩하고 이러한 인코딩된 비디오 및 오디오를 서버로 송신하는 공연장(207)에 위치된 하나 이상의 인코더들을 포함할 수 있다. 차례로, 클라우드 데이터베이스(또는 호스팅 데이터베이스)(또는 클라우드, 호스팅, 또는 스트리밍 플랫폼들)는 인코딩된 비디오 및 오디오를 컴퓨팅 디바이스(들)로 송신하거나 스트리밍한다.
본 명세서에 개시된 실시예들은 지연이 없도록 각각의 콘텐츠 스트림을 서로 시간 정렬하는 어려움을 도입한다. 또한 이벤트의 위치에 있는 서버에서 메인 인스턴스뿐만 아니라 사용자들이 모든 피쳐들에 대한 액세스 권한을 그들에게 부여하기 위해 설치할 수 있는 원격 최종 사용자 인스턴스를 실행함으로써 구현될 수 있다. 컴퓨팅 디바이스(또는 서버)는 사용자들이 이벤트로부터 원시 스트림들을 편집하고 처리함으로써 그들 자신의 경험을 생성하고 혼합할 수 있게 한다. 유사하게, 사용자는 공연장(107)으로부터 수신된 오디오에 기초하여 그들 자신의 음악 믹스를 생성하고 이퀄라이제이션, 효과, 압축 등과 같은 개인화된 오디오 선호도들을 추가할 수 있다. 서버(또는 대안적으로 사운드 보드 또는 비디오 보드)는 라이브 공연 또는 스튜디오 공연이 열리는 공연장에서 명령어들을 실행할 수 있다. 사용자들은 실시간으로 기록되고 마지막에 마스터 기록에 들어가는 이벤트 전체에서 상이한 시간들에 선택되는 콘텐츠 스트림과 적용되는 설정들을 활성화/비활성화할 수 있다.
사용자들은 또한 메인 선택 스트림과 나란히 도시되기를 원하는 "픽처-인-픽처(picture-in-picture)" 스트림을 선택할 수 있다. 예를 들어, 이벤트가 라이브 스트리밍 콘서트인 경우, 기타리스트가 솔로하는 동안, 사용자들은 "기타 카메라 스트림" 및 "기타 전용 오디오 스트림 솔로"를 선택할 수 있다. 사용자들은 더 작은 "픽처-인-픽처"에 포함할 "드러머 스트림"을 선택하고 드러머 오디오의 일부를 드러머 스트림에 추가할 수도 있다. 솔로가 끝나자마자, 그 다음 사용자는 메인 카메라 스트림을 선택하고 오디오를 다시 모든 악기들로 스위칭할 수 있다. 이는 콘텐츠의 스위칭 사이에 지연 없이 실시간으로 발생할 수 있지만, 모든 설정들 및 선택들이 실행되는 이 소프트웨어의 로컬 인스턴스에만 영향을 미치므로 임의의 다른 사용자의 콘서트 경험에는 영향을 미치지 않을 수 있다. 전체 경험은 실시간으로 기록되고 마지막에 마스터 기록에 삽입될 수 있다. 사용자들은 또한 그들이 원하는 방식으로 이벤트를 경험하기 위해 오디오/비디오 믹스를 재시청할 수 있다. 사용자들이 완전히 고유한 경험을 위해 나중에 경험을 리믹스하고 마스터하기 위해 다시 돌아갈 수 있음이 인지된다.
서버가 이벤트의 위치에 있는 경우, 서버는 사용자의 컴퓨팅 디바이스들에 직접 오디오 및 비디오를 포함하지만 이에 제한되지 않는, 콘텐츠의 다중의 상이한 스트림들을 스트리밍할 수 있다. 이러한 스트림들은 공연장에 위치된 하드웨어(예를 들어, 사운드 보드, 비디오 부스 등)에서 직접 올 수 있어 공연장에 지원 및 공급되는 모든 콘텐츠 스트림들에 대한 사용자 액세스를 가능하게 한다. 서버는 또한 위치의 아티스트들, 엔지니어들, 또는 스트리머 등에 의해 선택되고 설계된 스트리밍 위치(예를 들어, 사운드 믹스, 오디오/비디오 처리 설정들)에서 이용되는 현재 설정들로 입력될 수 있다.
사용자들과 연관된 컴퓨팅 디바이스들은 기존 스트리밍 사이트들(예를 들어, YouTube®, Vimeo®, Twitch®, Spotify®, Pandora®, Soundcloud®, Tidal® 등)에서 내장된 인터넷 정보 위치(URL), 애플리케이션 프로그래밍 인터페이스(APIs) 등 유사하지만 이에 제한되지 않는 상이한 콘텐츠의 다중의 스트림들에 액세스할 수 있다. 이러한 구현예는 각각의 콘텐츠 스트림을 동시에 소프트웨어에 로드할 수 있다. 사용자가 상이한 콘텐츠를 선택하면, 컴퓨팅 디바이스는 사용자의 커맨드를 반영하기 위해 지정된 콘텐츠 스트림과 이전 콘텐츠 스트림을 숨기거나 숨김해제할 수 있다. 지연 및 지연 오프셋은 각각의 콘텐츠 스트림을 정렬하고 사용자가 콘텐츠 스트림 사이에서 스위칭할 때 지연이 없도록 보장하도록 결정될 수 있다.
소프트웨어 접근법의 두 가지 구현예들은 사용자들이 이벤트의 공연장 또는 위치에서 라이브 이벤트들, 다중의 상이한 기능들 및 실시간 출력들과 인터페이스할 수 있는 버튼들을 통해 이벤트들을 트리거할 수 있게 할 수 있다. 이는 이벤트에 위치된 서버 또는 연관된 스트림의 URL을 통해 커맨드들을 발송함으로써 구현될 수 있으며 소켓 커맨드들, 인터넷 릴레이 차트(IRC), 챗봇 등과 유사하지만 이에 제한되지 않는다. 커맨드들을 트리거하는 방법은 컴퓨팅 디바이스가 아닌, 트리거들이 이벤트 공간에서 설정되는 방식에 의해 제한될 수 있다.
사용자들은 그들 개인적으로 설계한 경험을 예시하는 개별의 컴퓨팅 디바이스에 메인 인터페이스 화면을 가질 수 있다. 사용자에게 속하는 컴퓨팅 디바이스는 또한 상이한 콘텐츠의 혼합을 생성하기 위해 각각의 콘텐츠 스트림에 대한 설정들을 조정하기 위한 추가 인터페이스를 제공하는 하위메뉴 또는 상이한 탭들 및 사용자들이 그러한 믹스들을 생성하는 방식을 포함할 수 있다. 예를 들어, 오디오 페이지는 노브(knob), 페이더(fader), 마이크 또는 악기를 조정하는 슬라이더(예를 들어, 습식/건식 믹스, 전체 게인(gain), 채널 게인, 음소거/음소거 해제, 솔로 등)를 포함하는 믹싱 보드와 유사한 인터페이스를 가질 수 있다. 비디오 페이지는 필터들, 대비, 노출, 색조, 채도 등을 포함한 비디오 처리 도구들 중에서 선택할 수 있는 모든 카메라 각도의 미리보기들을 제공할 수 있다. 예를 들어, 사용자들은 모서리의 다른 카메라의 픽처-인-픽처가 있는 기본 비디오 페이지, 두 개의 비디오 스트림들이 있는 분할 화면 등을 통해 오버레이될 다중의 비디오 스트림들을 선택할 수 있다. 언제든지, 최종 사용자들은 스트리머, 아티스트, 또는 엔지니어들 등이 아닌 공연장에서 설계 중인 현재 설정들로 설정들을 다시 변경하는 능력을 가질 수 있다. 이는 특정 사용자들이 그들의 경험을 우발적으로 파괴하지 않도록 보장하도록 제어될 수 있다. 스트림을 제어할 수 있는 사용자들의 양 또는 EQ, 습식/건식 믹스, 전체 게인, 비디오 색조 등에 대해 수행할 수 있는 변경들의 양에 대한 다양한 제한들은 최종 사용자들에 대한 개선된 사용 용이성을 제공하기 위해 서버에 의해 부과될 수 있다.
도 15는 실시예에 따라 라이브 오디오 및 비디오 스트림들의 오디오/비디오 믹스 및 마스터를 원격으로 생성하기 위한 시스템(200)을 묘사한다. 시스템(200)은 일반적으로 복수의 컴퓨팅 디바이스들(또는 클라이언트들)(204a 내지 204c)에 동작가능하게 결합된 적어도 하나의 서버(이하 "서버")(202)를 포함한다. 컴퓨팅 디바이스들(204a 내지 204n)(또는 컴퓨팅 디바이스(204))은 다양한 사용자들의 제어하에 있는 랩탑, 데스크탑 컴퓨터, 모바일 디바이스(예를 들어, 휴대폰, 태블릿) 등 중 어느 하나를 포함할 수 있다. 시스템(200)은 또한 라이브 또는 스튜디오 공연들이 예를 들어, 음악가들에 의해 수행되는 공연장(207)에 위치된 사운드 보드(206)를 포함한다.
적어도 하나의 기타(208) 및 드럼들(210)은 사운드 보드(206)에 동작가능하게 결합된다. 임의의 수의 악기들(예를 들어, 베이스 기타, 키보드, 보컬 입력 등)이 사운드 보드(206)에 동작가능하게 결합될 수 있다는 것이 인지된다. 사운드 보드(206)는 일반적으로 다양한 악기들(208, 210)로부터 다양한 트랙들 또는 스트림들(예를 들어, 기타 스트림, 베이스 기타 스트림, 보컬 스트림, 드럼 스트림, 키보드 스트림 등)을 수신하고 이러한 스트림들을 서버(202)로 송신하도록 구성된다(예를 들어, 무선 또는 유선 직접 연결을 통해).
비디오 보드(212)는 서버(202)에 동작가능하게 결합된다. 사운드 보드(206) 및 비디오 보드(212)는 모두 미디어 제어기로 지칭될 수 있다. 360 시야(FOV) 카메라(214)(또는 전방향 카메라(omni-directional camera))가 비디오 보드(212)에 동작가능하게 결합된다. 유사하게, 시점(POV) 카메라(216)는 비디오 보드(212)에 동작가능하게 결합된다. POV 카메라(216)는 음악가 또는 연주자의 캡처된 이미지(또는 음악가 또는 연주자의 클로즈업 이미지)를 제공한다. 임의의 수의 카메라들이 FOV 카메라(214) 및 POV 카메라(216)로부터의 비디오 스트림들과 함께 비디오 보드(212)에 동작가능하게 결합될 수 있음이 인지된다. 또한 서버(202)가 공연장(207)의 부근 어딘가에 위치될 수 있음이 인지된다. 그 다음 서버(202)는 사운드 보드(206)로부터 수신된 다양한 오디오 스트림들 및 비디오 보드(212)로부터 수신된 비디오 스트림들을 사용자들과 연관된 컴퓨팅 디바이스들(204a 내지 204c)로 송신할 수 있다. 오디오 및 비디오 스트림들은 YouTube®, Vimeo®, Spotify® 등을 통해 서버(202)에서 컴퓨팅 디바이스들(204a 내지 204c)로 스트리밍될 수 있다. 일반적으로, 사용자들이 컴퓨팅 디바이스들(204a 내지 204c)에서 이용하는 알고리즘(예를 들어, 소프트웨어 및 하드웨어) 뿐만 아니라 스트림의 발신자가 됨으로써, 이 양태는 시스템(200)이 스트림들 사이의 지연을 결정하고 사용자를 위한 매끄럽고 지연없는 경험을 생성하기 위해 이러한 지연을 적절하게 조정할 수 있게 한다. 일반적으로 말하면, 모든 오디오/비디오 스트림들은 라이브 공연장(207)에 위치한 서버(202)에서 아티스트/뮤지션/연주자들과 이미 동기화되어 있다. 그 다음 이러한 시간정렬된 스트림들은 예를 들어, YouTube®, Vimeo® 등과 같은 스트리밍 플랫폼들을 통해 시청자들에게 배포된다. 따라서, 복잡성은 줄어들 수 있으며 임의의 사용자들에게 어떤 지연 문제들이 없을 수 있다.
컴퓨팅 디바이스들(204a 내지 204c)로, 사용자들은 공연장(207)로부터 수신된 오디오 및 비디오 스트림들에 현재 설정된 모든 설정들을 수정, 활성화, 비활성화 등을 할 수 있다. 또한, 사용자는 실시간으로 기록되는 라이브 공연을 통해 상이한 시간들에 오디오 및 비디오 스트림들에 설정된 모든 설정들을 수정, 활성화, 비활성화 등을 할 수 있다. 추가적으로, 사운드 보드(206) 및/또는 비디오 보드(212)는 또한 라이브 공연이 수행되는 동안 모든 비디오 설정들(또는 카메라 설정들)에 더하여 모든 오디오 설정들(예를 들어, 기타, 베이스, 보컬 설정들 등)을 저장하고 이러한 정보를 서버(202)를 통해 하나 이상의 컴퓨팅 디바이스들(204a 내지 204c)에 제공할 수 있다. 사용자들은 컴퓨팅 디바이스들(204a 내지 204c)을 통해, 라이브 공연이 발생되는 동안 공연장(207)에서 아티스트들, 사운드 엔지니어들, 또는 스트리머들에 의해 선택되었을 설정들을 조정할 수 있다. 사용자들은 또한 라이브 공연의 위치가 열리는 공연장(207)에서 오디오 설정들을 조정 및 변경할 수 있다. 유사하게, 사용자들은 또한 라이브 공연의 위치가 열리는 공연장(207)에서 비디오 설정들을 조정하고 변경할 수 있다. 컴퓨팅 디바이스들(204a 내지 204c)의 사용자들은 수정되거나 조정된 비디오 및 오디오 스트림들(조정된 오디오 및 비디오 설정들을 포함하거나 포함하지 않음)을 기록하고 기록된 수정 또는 조정된 비디오 및 오디오 스트림을 다시 재생할 수 있다. 컴퓨팅 디바이스들(204a 내지 204c)은 사용자가 오디오 및 비디오 스트림들을 여러 번 조정/수정하도록 계속 허용할 수 있음이 인지된다.
전술한 바와 같이, 컴퓨팅 디바이스들(204a 내지 204c)은 YouTube®, Vimeo®, Twitch®, Spotify®, Pandora®, Soundcloud®, Tidal® 등을 통해 오디오 및 비디오 스트림들을 스트리밍할 수 있다. 이 접근방식은 라이브 공연이 공연장(207)에서 열리는 동안 각 콘텐츠 스트림을 동시에 로드할 수 있다. 사용자가 컴퓨팅 디바이스(204a 내지 204c)에서 상이한 미디어 콘텐츠를 선택할 때, 사용자의 커맨드를 반영하기 위해 지정되거나 선택된 콘텐츠 스트림을 및 이전 콘텐츠 스트림을 숨기거나 숨김해제한다.
사용자들은 또한 임의의 하나 이상의 컴퓨팅 디바이스들(204a 내지 204c)을 통해, 사용자가 컴퓨팅 디바이스(204)의 디스플레이 상에 메인 선택 스트림과 함께 도시되기를 원할 수 있는 "픽처-인-픽처" 스트림을 선택할 수 있다. 예를 들어, 이벤트는 라이브 스트리밍 콘서트이고, 기타리스트가 솔로하는 동안, 사용자들은 컴퓨팅 디바이스(204)를 통해 "기타 카메라 스트림" 및 "솔로 기타 전용 오디오 스트림"을 선택할 수 있다. 사용자는 또한 컴퓨팅 디바이스(204)를 통해, "픽처-인-픽처" 옵션을 선택하고 기타리스트가 함께 연주할 때 드러머 오디오의 일부를 스트림에 추가할 수 있다. 솔로가 끝나자마자, 사용자는 컴퓨팅 디바이스(204)를 통해, 메인 카메라 스트림을 선택하고 오디오를 다시 모든 악기들로 스위칭할 수 있다. 이 양태는 콘텐츠의 스위칭 사이에 지연없이 실시간으로 발생할 수 있다. 추가적으로, 이는 모든 설정들 및 선택들이 오디오 및/또는 비디오 스트림을 수정하는 컴퓨팅 디바이스(204)의 로컬 인스턴스에만 영향을 미치기 때문에 다른 사람의 콘서트 경험에 영향을 미치지 않을 수 있다.
컴퓨팅 디바이스들(204a 내지 204c)은 각각 개인적으로 설계된 경험을 예시하는 메인 인터페이스 화면을 포함할 수 있다. 컴퓨팅 디바이스(204)의 사용자 인터페이스의 하위메뉴 또는 다른 탭들에서, 컴퓨팅 디바이스(204)는 상이한 콘텐츠의 믹스를 생성하기 위해 각 상이한 콘텐츠 스트림(예를 들어, 기타 스트림, 베이스 스트림, 드럼 스트림, 비디오 스트림 등)의 설정들을 조정하기 위한 추가 인터페이스를 제공할 수 있다. 예를 들어, 컴퓨팅 디바이스(204)는 믹싱 보드에 유사한 인터페이스를 제공할 수 있는 오디오 페이지(250)(도 16 참조)를 제공할 수 있다. 오디오 페이지(250)는 일반적으로 노브, 페이더, 마이크/악기 eq, 습식/건식 믹스, 전체 게인, 채널 게인, 음소거/음소거 해제, 솔로 등을 조정하는 슬라이더들을 포함한다. 추가 콘텐츠 페이지(또는 튜닝 페이지)(256)는 수신된 오디오 스트림에 대한 볼륨, 밸런스, 고음, 및 저음을 제어하기 위한 제어 스위치들(또는 노브, 슬라이더 등)을 포함한다. 편집 필드(258)는 사용자들이 각 전용 악기에 대한 오디오 스트림들 또는 트랙들을 생성 또는 편집하는 능력을 할 수 있게 한다. 예를 들어, 편집 필드(258)는 각 페이더가 대응하는 악기(예를 들어, 기타, 베이스, 보컬, 드럼, 키보드 등)에 묶인 사용자 입력을 통해 조작될 수 있는 노브들 및 페이더들을 표시한다. 편집 필드(258)는 사용자가 오디오의 다양한 트랙들을 믹싱하는 능력을 허용하고 믹싱 데스크로서 동작하며 또한 사용자에게 오디오의 밸런스를 맞추는 능력을 제공한다.
또한, 컴퓨팅 디바이스(204)는 사용자가 컴퓨팅 디바이스(204)로부터 선택할 수 있는 모든 카메라 각도의 복수의 작은 미리보기들에 제공되거나 표시될 수 있는 비디오 페이지(252)를 포함할 수 있다. 컴퓨팅 디바이스(204)는 또한 비디오 페이지(252)를 통해, 필터들, 대비, 노출, 색조, 채도 등을 포함하는 비디오 처리 도구들을 제공할 수 있다. 추가적으로, 사용자는 오버레이될 다중의 비디오 스트림들을 컴퓨팅 디바이스(204)를 통해 선택할 수 있다. 컴퓨팅 디바이스(204)는 또한 모서리에 있는 다른 카메라의 픽처-인-픽처, 2개의 비디오 스트림들이 있는 분할 화면 등을 제공할 수 있다. 언제든지, 사용자들은 컴퓨팅 디바이스(204)를 통해, 아티스트, 엔지니어, 또는 스트리머에 의해 라이브 공연에 실제로 적용되는 현재 설정들로 임의의 설정들을 다시 변경할 수 있는 능력을 가질 수 있다. 컴퓨팅 디바이스(204)는 특정 사용자들이 그들의 경험을 우발적으로 파괴하지 않도록 보장하도록 구성될 수 있다. 일 실시예에서, 사용자가 EQ, 리버브, 게인 등과 같은 설정들의 많은 양태들에서 너무 멀리 갈 수 있으므로 스트림들의 경험을 파괴하지 않도록 설정에 대한 변경들의 수에 제한들을 설정하는 것이 바람직할 수 있다. 이러한 설정들에 대한 이러한 급격한 변경들은 사용자에게 즐거운 경험을 만들지 못하게 할 수 있다. 컴퓨팅 디바이스(204)는 최종 사용자들에게 개선된 사용 용이성을 제공하기 위해 제어의 양을 제한하거나 서버(202)에 의해 제공되는 스트림들에서 수행될 수 있는 EQ, 습식/건식 믹스, 전체 게인, 비디오 색조 등의 양을 제한하도록 구성될 수 있다.
시스템(200)과 관련하여 개시된 양태들은 (i) 오디오 스트림 및 오디오 스트림의 방송 유형을 제어하는 것 외에도 라이브 공연의 카메라 각도들 및 스트림을 제어하는 것, (ii) 예를 들어, 슬라이더들 및/또는 다수의 제어들(예를 들어, 각 악기에 대한 레벨 제어, EQ 변경, 습식/건식 믹스 등)을 위한 다른 스위칭 메커니즘들을 포함하는 컴퓨팅 디바이스들(204a 내지 204c)에 사용자 인터페이스를 제공하는 것, (iii) 사용자들이 오디오를 믹스하고 비디오 보드(202)로부터 대응하는 비디오 스트림을 선택할 수 있게 하는 컴퓨팅 디바이스들(204a 내지 204c) 상의 최종 사용자 구성가능 플랫폼, (iv) 공연장(207)에서 오디오 엔지니어로부터 기본 "프론트 오브 하우스(front of house)" 믹스로 재설정하는 것, (v) 라이브 공연의 복수의 비디오 스트림들의 큰 선택을 위해 원하는 비디오 스트림을 선택하는 것, (vi) 라이브 공연으로부터 다른 비디오 스트림들과 함께 픽처-인-픽처를 제공하는 것, (vii) 사용자들이 라이브 공연의 콘서트 믹스(예를 들어, 비디오/오디오)를 기록하고 나중에 이를 리믹스할 수 있도록 하는 것, (viii) 다중 채널 콘텐츠, 상이한 악기들의 상이한 스트림들로 구성된 다중 오디오 스트림들을 스트리밍하는 것, 및 (ix) 다중 채널 콘텐츠, 다중 오디오 스트림들, 및 다중 비디오 스트림들을 스트리밍하는 것을 제공하지만, 이에 제한되지 않는다.
도 17은 일 실시예에 따라 라이브 공연으로부터 오디오 및 비디오 스트림들을 시간 정렬하기 위한 방법(300)을 묘사한다.
동작(302)에서, 서버(202)는 공연장(207)에 위치된 사운드 보드(206) 및 비디오 보드(212)로부터, (또는 미디어 제어기로부터) 개별적으로, 라이브 스트리밍된 오디오 및 비디오 데이터를 수신한다. 비디오 스트림들은 공연장(207)에 위치된 다양한 카메라들(214 및 216)로부터 캡처된 다수의 비디오 스트림들을 포함할 수 있음이 인지된다. 예를 들어, 밴드가 공연장에서 라이브로 공연하고 있다고 가정하면, 다양한 카메라들(214)은 전체 밴드를 캡처하는 제1 비디오 스트림을 제공할 수 있고 카메라들(216)은 각 개별의 밴드 멤버에 대한 추가 비디오 스트림들(또는 시점 샷들)을 제공할 수 있다. 마찬가지로, 오디오 스트림은 공연장에 위치된 다양한 악기들(208, 210)로부터 캡처된 임의의 수의 오디오 스트림들을 포함할 수 있음이 인지된다.
동작(303)에서, 서버(202)는 라이브 스트리밍된 오디오 및 비디오 스트림들을 스트리밍 플랫폼(예를 들어, YouTube®, Vimeo®, Twitch®, Pandora®, Soundcloud®, Tidal® 등)으로 송신한다. 이 양태는 비디오 및 오디오를 서버로 인코딩하고 인코딩된 비디오를 오디오에 제공하는 서버가 컴퓨팅 디바이스(204)에 제공되는 또 다른 스트리밍 제공자에게 제공하는 것을 포함할 수 있다.
동작(304)에서, 각 컴퓨팅 디바이스(204)는 라이브 오디오 및 비디오 스트림들(예를 들어, 복수의 카메라들(214 및 216)로부터 제공된 모든 비디오 스트림들) 사이의 지연을 결정한다. 동작(306)에서, 컴퓨팅 디바이스(204)는 지연이 계산되고 알려진 후에 라이브 오디오 및 비디오 스트림들을 서로 시간 정렬/시프트(또는 동기화)한다. 예를 들어, 컴퓨팅 디바이스(204)가 모든 비디오 스트림들에 대한 지연(또는 재생 오프셋 비율)을 결정하면, 컴퓨팅 디바이스(240)는 스트림들을 시간적으로 함께 정렬하기 위해 재생 오프셋 비율 또는 지연에 기초하여 비디오 스트림들 및 오디오 스트림들을 조정한다.
동작(308)에서, 컴퓨팅 디바이스(204)는 사용자가 원하는 대로 동기화된 오디오 및 비디오 스트림들의 오디오 및 비디오 속성들을 수정할 수 있다. 사용자에 의해 오디오 스트림에 수행된 임의의 변경들은 오디오 속성의 변경에 대응할 수 있다. 유사하게, 비디오 스트림(들)에 수행된 임의의 변경들은 바이드(vide) 속성의 변경에 대응할 수 있다. 예를 들어, 사용자는 컴퓨팅 디바이스(204)를 통해 공연장(207)에서 밴드에 의해 제공되는 모든 오디오의 단일 믹스를 포함하는 단일 오디오 스트림을 선택적으로 수정할 수 있다. 대안적으로, 사용자는 예를 들어, 컴퓨팅 디바이스(204)를 통해 공연장(207)에서 밴드의 기타리스트에 의해 제공되는 기타 트랙에 속하는 단일 오디오 스트림을 선택적으로 수정할 수 있다. 컴퓨팅 디바이스(204)는 사용자가 다양한 임의의 수의 오디오 및 비디오 트랙들을 선택하도록 할 수 있다. 사용자가 전체 밴드의 통합 비디오 스트림을 보고자 하는 경우, 컴퓨팅 디바이스(204)는 그들이 사용자에 의해 보기 위해 선택될 때까지 개별 밴드 멤버들의 나머지 비디오 스트림들을 숨길 수 있다. 유사하게, 사용자가 밴드에 의해 연주되는 악기들의 전체 믹스를 듣고자 하는 경우, 컴퓨팅 디바이스(204)는 그들이 사용자에 의해 듣기 위해 개별적으로 선택될 때까지 예를 들어, 기타, 보컬, 드럼 및 베이스 기타에 대한 개별 트랙들을 음소거할 수 있다. 하나 이상의 오디오 스트림들 또는 트랙들은 제때에 임의의 단일 인스턴스에서 재생될 수 있음이 인지된다.
도 18은 일 실시예에 따라 라이브 공연을 위한 "픽처-인-픽처 스트림"을 제공하기 위한 방법(350)을 묘사한다.
동작(352)에서, 컴퓨팅 디바이스(204)는 스트리밍 제공자를 통해 서버(202)로부터 2개 이상의 비디오 스트림들을 수신한다. 동작(354)에서, 컴퓨팅 디바이스(204)는 라이브 공연 동안 예를 들어, 전체 밴드의 제1 비디오 스트림을 표시한다. 전술한 바와 같이, 컴퓨팅 디바이스(204)가 공연장(207)로부터 2개 이상의 비디오 스트림들을 수신하는 동안, 컴퓨팅 디바이스(204)는 2개 이상의 비디오 스트림들 중 단일 비디오 스트림을 재생할 수 있다는 것이 인지된다. 방법(350)과 관련하여 제시된 예에 대해, 컴퓨팅 디바이스(204)가 라이브 공연 동안 모든 밴드 멤버들을 예시하는 단일 비디오 스트림을 단순히 재생하고 있다고 가정할 수 있다.
동작(356)에서, 컴퓨팅 디바이스(204)는 라이브 공연 동안 연주하고 있는 밴드의 특정 음악가(예를 들어, 기타리스트 또는 보컬리스트)에 대한 제2 비디오 스트림을 보기 위해 사용자로부터 커맨드를 수신한다(그의 사용자 인터페이스를 통해). 동작(358)에서, 컴퓨팅 디바이스(204)는 비디오 콘텐츠의 스위칭 사이에 지연없이 실시간으로 제1 비디오 스트림 및 제2 비디오 스트림 둘 모두를 재생한다.
예시적인 실시예들이 전술되었지만, 이러한 실시예들은 본 발명의 모든 가능한 형태들을 설명하는 것은 아니다. 오히려, 본 명세서에 사용된 단어들은 한정이 아닌 설명을 위한 단어들이며, 다양한 변경들은 본 발명의 사상 및 범위에서 벗어나지 않는 범위 내에서 이루어질 수 있음이 이해되어야 한다. 추가적으로, 다양한 구현 실시예들의 피쳐들은 본 발명의 추가 실시예들을 형성하도록 결합될 수 있다.

Claims (20)

  1. 가상 콘서트(virtual concert)의 양태들을 제어하기 위한 시스템에 있어서, 장치는:
    공연장(venue)에 배치되고 적어도 하나의 제1 신호에 기초하여 상기 공연장에서의 라이브 공연(live performance)의 피쳐(feature)들을 제어하도록 구성된 하나 이상의 제어기들을; 및
    적어도 하나의 컴퓨팅 디바이스(computing device)를 포함하고, 상기 컴퓨터 디바이스는:
    상기 공연장으로부터 멀리 떨어져 있는 사용자로부터 직접 상기 라이브 공연의 적어도 일부를 제어하기 위한 커맨드(command)를 나타내는 제2 신호를 수신하고; 및
    상기 라이브 공연의 상기 피쳐들을 제어하기 위해 상기 적어도 하나의 제1 신호를 상기 하나 이상의 제어기들로 송신하도록 프로그래밍된, 시스템.
  2. 제1항에 있어서, 상기 하나 이상의 제어기들은 원하는 카메라 각도로 이동하고 상기 원하는 카메라 각도에 기초하여 상기 라이브 공연의 제1 비디오 스트림(video stream)을 상기 적어도 하나의 컴퓨팅 디바이스에 송신하도록 상기 공연장에 위치된 하나 이상의 카메라들을 제어하도록 구성된 카메라 제어기를 포함하는, 시스템.
  3. 제2항에 있어서, 상기 하나 이상의 카메라들은 상기 공연장의 연주자에게 직접 또는 상기 연주자의 악기에 직접 위치되는, 시스템.
  4. 제3항에 있어서, 상기 카메라 제어기는 상기 연주자에 직접 또는 상기 악기에 직접 위치된 상기 하나 이상의 카메라들을 활성화하고 상기 연주자 또는 상기 연주자의 상기 악기의 캡처된 비디오 스트림에 대응하는 제2 비디오 스트림을 제공하도록 더 구성되는, 시스템.
  5. 제2항에 있어서, 상기 적어도 하나의 컴퓨팅 디바이스는 상기 공연장에 위치된 상기 카메라들을 제어하기 위해 매핑(mapping) 상의 항목들의 사용자 선택을 가능하게 하기 위해 상기 공연장 전체에 위치된 바와 같은 상기 카메라들의 상기 매핑을 표시하도록 더 구성되는, 시스템.
  6. 제2항에 있어서, 상기 하나 이상의 제어기들은 상기 적어도 하나의 제1 신호에 기초하여 상기 라이브 공연에 위치된 조명과 관련된 양태들을 제어하도록 구성된 조명 제어기(lighting controller)를 포함하고, 상기 카메라 제어기는 상기 라이브 공연에서 상기 조명에 대한 상기 원하는 변경들을 묘사하는 캡처된 비디오 스트림을 상기 적어도 하나의 컴퓨팅 디바이스로 송신하도록 더 구성되는, 시스템.
  7. 제6항에 있어서, 상기 라이브 공연에 위치된 상기 조명은 스포트라이트(spotlight), 스트로브 조명(strobe light), 무대 조명(stage light) 및 애니메이션(animation) 중 하나 이상을 포함하는, 시스템.
  8. 제6항에 있어서, 상기 적어도 하나의 컴퓨팅 디바이스는 상기 공연장에 위치된 상기 조명을 제어하기 위해 매핑 상의 항목들의 사용자 선택을 가능하게 하기 위해 상기 공연장 전체에 위치된 바와 같은 상기 조명의 상기 매핑을 표시하도록 더 구성되는, 시스템.
  9. 제2항에 있어서, 상기 하나 이상의 제어기들은 상기 적어도 하나의 제1 신호에 기초하여 상기 라이브 공연에 위치된 적어도 하나의 기계적 소품(mechanical prop)을 제어하기 위한 로봇 제어기(robotic controller)를 포함하고 상기 카메라 제어기는 상기 적어도 하나의 제1 신호에 기초하여 상기 적어도 하나의 기계적 소품의 움직임에 대응하는 캡처된 비디오 스트림을 상기 적어도 하나의 컴퓨팅 디바이스로 송신하도록 더 구성되는, 시스템.
  10. 제9항에 있어서, 상기 적어도 하나의 컴퓨팅 디바이스는 상기 공연장에서 적어도 하나의 기계적 소품을 제어하기 위해 매핑 상의 항목들의 사용자 선택을 가능하게 하기 위해 상기 공연장에 위치된 바와 같은 상기 적어도 하나의 기계적 소품의 상기 매핑을 표시하도록 더 구성되는, 시스템.
  11. 제1항에 있어서, 상기 하나 이상의 제어기들은 상기 적어도 하나의 제1 신호에 기초하여 상기 라이브 공연에 위치된 신호탄(pyrotechnics), 색종이 조각 대포(confetti cannon)들, 스크린 상의 비디오/오디오 프로젝션들, 오디오 마이킹, 및 증폭 중 하나 이상에 대응하는 하나 이상의 제1 항목들을 제어하도록 구성된 제1 제어기를 포함하는, 시스템.
  12. 제11항에 있어서, 상기 오디오 마이킹은 상기 공연장에서 청중의 분위기를 캡처하기 위해 상기 공연장에 위치된 하나 이상의 바이노럴 마이크(binaural microphone)들을 포함하는, 시스템.
  13. 제11항에 있어서, 상기 적어도 하나의 컴퓨팅 디바이스는 상기 적어도 하나의 제1 신호에 기초하여 상기 라이브 공연에 위치된 상기 신호탄, 색종이 조각 대포들, 스크린 상의 비디오/오디오 프로젝션들, 오디오 마이킹, 및 증폭 중 하나 이상의 사용자 선택을 가능하게 하기 위해 상기 공연장에 위치한 상기 하나 이상의 제1 항목들의 매핑을 표시하도록 더 구성되는, 시스템.
  14. 제1항에 있어서, 상기 적어도 하나의 컴퓨팅 디바이스는 상기 사용자가 응원 크레딧(cheer credit), 티켓 등급(ticket tier)들 및 플레이리스트 이벤트(playlist event) 중 하나 이상을 선택할 수 있게 하도록 더 구성되는, 시스템.
  15. 제14항에 있어서, 상기 응원 크레딧들은 무대 조명 변경에 대한 요청들, 상기 공연장에서 연주될 노래들에 대한 투표들, 상기 라이브 공연에서 연주자들에게 개인화 메시지들의 송신들 및 상기 연주자들에 대한 개인화 메시지 제공 요청들 중 하나 이상에 대응하는, 시스템.
  16. 제14항에 있어서, 상기 티켓 등급들은:
    상기 적어도 하나의 컴퓨팅 디바이스에서 상기 라이브 공연을 원격으로 보기 위한 일반 입장권 등급(general admission tier);
    상기 사용자가 상기 공연장에서 멀리 떨어져 있는 동안 HiFi 오디오 품질을 얻을 수 있도록 하는 예약 좌석 등급(reserve seating tier);
    상기 라이브 공연이 상기 적어도 하나의 컴퓨팅 디바이스에서 보여지는 동안 광고들이 표시되는 것으로부터 차단하는 앞줄 좌석 등급(front row seating tier); 및
    상기 무대 상의 연주자들에 의해 서명된(autographed) 항목들을 제공하는 무대 뒤 패스 등급(back stage pass tier) 중 임의의 하나 이상에 대응하는, 시스템.
  17. 제14항에 있어서, 상기 재생목록 이벤트들은:
    복수의 상기 컴퓨팅 디바이스의 사용자들이 서로 경쟁할 수 있게 하는 슈퍼팬 슛아웃 이벤트(superfan shootout event);
    상기 적어도 하나의 컴퓨팅 디바이스의 상기 사용자가 상기 라이브 공연에서 조명을 들고 있는 사용자를 나타내는 조명을 트리거하기 위해 상기 개별의 컴퓨팅 디바이스에 대한 옵션을 선택할 수 있게 하는 조명 이벤트(lighters event);
    상기 청중에 의해 제공되는 상기 데시벨 레벨을 증가시키기 위해 반복적으로 뛰는 상기 라이브 공연에서 팬들을 시뮬레이션하기 위해 상기 적어도 하나의 컴퓨팅 디바이스의 상기 사용자가 미리결정된 기간 내에 그 위에 위치된 인터페이스를 탭할 수 있게 하는 데시벨 미터 이벤트(decibel meter event); 및
    상기 사용자가 미리결정된 행위를 수행할 연주자에게 투표할 수 있게 하는 라이브 투표 이벤트(live poll event) 중 임의의 하나 이상에 대응하는, 시스템.
  18. 제1항에 있어서, 상기 하나 이상의 제어기들 및 상기 적어도 하나의 컴퓨팅 디바이스에 동작가능하게 결합되는 서버를 더 포함하고 상기 서버는 복수의 상기 컴퓨팅 디바이스들의 복수의 사용자들에 대한 사용자 명성 양(user prestige amount)을 결정하도록 구성되는, 시스템.
  19. 가상 콘서트의 양태들을 제어하는 방법에 있어서, 상기 방법은:
    공연장에 위치된 하나 이상의 제어기들을 통해, 적어도 하나의 제1 신호에 기초하여 상기 공연장에서의 라이브 공연의 피쳐들을 제어하는 단계;
    적어도 하나의 컴퓨팅 디바이스에서, 상기 공연장에서 멀리 떨어져 있는 사용자로부터 직접 상기 라이브 공연의 적어도 일부를 제어하는 커맨드를 나타내는 제2 신호를 수신하는 단계; 및
    상기 라이브 공연의 상기 피쳐들을 제어하기 위해 상기 적어도 하나의 제1 신호를 상기 하나 이상의 제어기들로 송신하는 단계를 포함하는, 방법.
  20. 가상 콘서트의 제어기 양태들을 위해 프로그래밍된 비일시적 컴퓨터 판독가능 매체에 구현된 컴퓨터 프로그램 제품에 있어서,상기 컴퓨터 프로그램 제품은:
    공연장에 위치된 하나 이상의 제어기들을 통해, 적어도 하나의 제1 신호에 기초하여 상기 공연장에서의 라이브 공연의 피쳐들을 제어하고;
    적어도 하나의 컴퓨팅 디바이스에서, 상기 공연장에서 멀리 떨어져 있는 사용자로부터 직접 상기 라이브 공연의 적어도 일부를 제어하는 커맨드를 나타내는 제2 신호를 수신하고; 및
    상기 라이브 공연의 상기 피쳐들을 제어하기 위해 상기 적어도 하나의 제1 신호를 상기 하나 이상의 제어기들로 송신하기 위한 명령어를 포함하는, 컴퓨터 프로그램 제품.
KR1020237001804A 2020-07-17 2021-07-19 가상 지원 스튜디오의 생성 및 관리를 위한 시스템 및 방법 KR20230040334A (ko)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US202063053318P 2020-07-17 2020-07-17
US63/053,318 2020-07-17
PCT/US2021/042195 WO2022016145A1 (en) 2020-07-17 2021-07-19 System and method for the creation and management of virtually enabled studio

Publications (1)

Publication Number Publication Date
KR20230040334A true KR20230040334A (ko) 2023-03-22

Family

ID=77265303

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020237001804A KR20230040334A (ko) 2020-07-17 2021-07-19 가상 지원 스튜디오의 생성 및 관리를 위한 시스템 및 방법

Country Status (6)

Country Link
US (1) US20230269435A1 (ko)
EP (1) EP4183126A1 (ko)
JP (1) JP2023535364A (ko)
KR (1) KR20230040334A (ko)
CN (1) CN116158071A (ko)
WO (1) WO2022016145A1 (ko)

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10438448B2 (en) * 2008-04-14 2019-10-08 Gregory A. Piccionielli Composition production with audience participation
US20130259446A1 (en) * 2012-03-28 2013-10-03 Nokia Corporation Method and apparatus for user directed video editing
AU2013231217A1 (en) * 2012-09-26 2014-04-10 Anthony Robert Farah Interactive system
WO2014145925A1 (en) * 2013-03-15 2014-09-18 Moontunes, Inc. Systems and methods for controlling cameras at live events
US20170032336A1 (en) * 2015-07-28 2017-02-02 Randy G. Connell Live fan-artist interaction system and method
US20180338163A1 (en) * 2017-05-18 2018-11-22 International Business Machines Corporation Proxies for live events
WO2018222932A1 (en) * 2017-06-01 2018-12-06 Silicon Constellations, Inc. Video recording by tracking wearable devices
US10341537B2 (en) * 2017-09-29 2019-07-02 Sony Interactive Entertainment America Llc Spectator view into an interactive gaming world showcased in a live event held in a real-world venue

Also Published As

Publication number Publication date
EP4183126A1 (en) 2023-05-24
CN116158071A (zh) 2023-05-23
US20230269435A1 (en) 2023-08-24
WO2022016145A1 (en) 2022-01-20
JP2023535364A (ja) 2023-08-17

Similar Documents

Publication Publication Date Title
US9779708B2 (en) Networks of portable electronic devices that collectively generate sound
US9514723B2 (en) Distributed, self-scaling, network-based architecture for sound reinforcement, mixing, and monitoring
US20110304735A1 (en) Method for Producing a Live Interactive Visual Immersion Entertainment Show
WO2020183630A1 (ja) ライブ配信システムおよびライブ配信方法
JP2022083443A (ja) オーディオと関連してユーザカスタム型臨場感を実現するためのコンピュータシステムおよびその方法
Janer et al. Immersive orchestras: audio processing for orchestral music VR content
JP5302742B2 (ja) コンテンツ制作管理装置、コンテンツ制作装置、コンテンツ制作管理プログラム、及びコンテンツ制作プログラム
Baxter A practical guide to television sound engineering
Williams et al. A distributed theatre experiment with shakespeare
US20230269435A1 (en) System and method for the creation and management of virtually enabled studio
Deal et al. Auksalaq, A telematic opera
US20230262271A1 (en) System and method for remotely creating an audio/video mix and master of live audio and video
US11871046B2 (en) Method and system for production and presentation of live performance with virtual venue to plurality of remote audience devices by cloud-based interactive video communications
Stenzel et al. Producing interactive immersive sound for MPEG-H: A field test for sports broadcasting
Woszczyk et al. Space Builder: An Impulse Response-Based Tool for Immersive 22.2 Channel Ambiance Design
Holm et al. Spatial audio production for 360-degree live music videos: multi-camera case studies
Bloomberg Making Musical Magic Live
KR102526599B1 (ko) 비대면 리액티브 공연을 위한 공연서버 운영 방법
US20210320959A1 (en) System and method for real-time massive multiplayer online interaction on remote events
Hashimoto et al. Sound Environment Control Using an Immersive Audio System–Advancing Sound Experiences for Creators and Listeners Using Active Field Control–
US10863274B2 (en) Themed ornaments with internet radio receiver
Björling et al. Crafting cinematic high end VR audio for Etihad Airways
Young day2
JP2022046878A (ja) 配信システム及び配信方法
JP2023182937A (ja) 反応管理装置及びプログラム