KR20170066185A - 다수 개의 카메라를 기반으로 하는 영상 전송 방법, 장치 및 시스템 - Google Patents

다수 개의 카메라를 기반으로 하는 영상 전송 방법, 장치 및 시스템 Download PDF

Info

Publication number
KR20170066185A
KR20170066185A KR1020160003558A KR20160003558A KR20170066185A KR 20170066185 A KR20170066185 A KR 20170066185A KR 1020160003558 A KR1020160003558 A KR 1020160003558A KR 20160003558 A KR20160003558 A KR 20160003558A KR 20170066185 A KR20170066185 A KR 20170066185A
Authority
KR
South Korea
Prior art keywords
sub
monitor
camera
image
area
Prior art date
Application number
KR1020160003558A
Other languages
English (en)
Other versions
KR101807159B1 (ko
Inventor
이재석
Original Assignee
카페24 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 카페24 주식회사 filed Critical 카페24 주식회사
Priority to PCT/KR2016/004207 priority Critical patent/WO2017094978A1/ko
Priority to US15/552,494 priority patent/US20180278881A1/en
Priority to CN201680019403.8A priority patent/CN107431846B/zh
Publication of KR20170066185A publication Critical patent/KR20170066185A/ko
Application granted granted Critical
Publication of KR101807159B1 publication Critical patent/KR101807159B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/4223—Cameras
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/013—Eye tracking input arrangements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04842—Selection of displayed objects or displayed text elements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/18—Eye characteristics, e.g. of the iris
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60—Network streaming of media packets
    • H04L65/61—Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio
    • H04L65/611—Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio for multicast or broadcast
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60—Network streaming of media packets
    • H04L65/61—Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio
    • H04L65/613—Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio for the control of the source by the destination
    • H04N13/0014—
    • H04N13/0484—
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/21—Server components or server architectures
    • H04N21/218—Source of audio or video content, e.g. local disk arrays
    • H04N21/21805—Source of audio or video content, e.g. local disk arrays enabling multiple viewpoints, e.g. using a plurality of cameras
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/21—Server components or server architectures
    • H04N21/218—Source of audio or video content, e.g. local disk arrays
    • H04N21/2187—Live feed
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42204—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • H04N21/4316—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations for displaying supplemental content in a region of the screen, e.g. an advertisement in a separate window
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442—Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/44213—Monitoring of end-user related data
    • H04N21/44218—Detecting physical presence or behaviour of the user, e.g. using sensors to detect if the user is leaving the room or changes his face expression during a TV program
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/65—Transmission of management data between client and server
    • H04N21/658—Transmission by the client directed to the server
    • H04N21/6587—Control parameters, e.g. trick play commands, viewpoint selection
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81—Monomedia components thereof
    • H04N21/8126—Monomedia components thereof involving additional data, e.g. news, sports, stocks, weather forecasts
    • H04N21/8133—Monomedia components thereof involving additional data, e.g. news, sports, stocks, weather forecasts specifically related to the content, e.g. biography of the actors in a movie, detailed information about an article seen in a video program
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/90—Arrangement of cameras or camera modules, e.g. multiple cameras in TV studios or sports stadiums
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/181—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/188—Capturing isolated or intermittent images triggered by the occurrence of a predetermined event, e.g. an object reaching a predetermined position
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/50—Constructional details
    • H04N23/54—Mounting of pick-up tubes, electronic image sensors, deviation or focusing coils
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/57—Mechanical or electrical details of cameras or camera modules specially adapted for being embedded in other devices

Abstract

다수 개의 카메라를 기반으로 하는 영상 전송 방법, 장치 및 시스템이 개시되어 있다. 영상 전송 방법은 다수 개의 카메라를 이용하여 다수 개의 영상을 취득하고, 모니터에서 표시되는 화면을 상기 다수 개의 영상에 대응하는 다수 개의 영역으로 분할하여 표시하고, 사용자가 응시하는 영역을 감지하고, 그 감지된 영역에 대응하는 영상을 선택하고, 선택된 영상을 방송을 통하여 전송할 수 있다. 따라서, 다수 개의 영상을 기반으로 사용자의 시선에 따라 방송 영상을 변경할 수 있다.

Description

다수 개의 카메라를 기반으로 하는 영상 전송 방법, 장치 및 시스템 {Method, Apparatus and System for Transmitting Video Based On Multiple Cameras}
본 발명은 다수 개의 카메라를 기반으로 하는 영상 전송 방법, 장치 및 시스템에 관한 것으로서, 다수 개의 카메라를 통하여 다수 개의 영상을 촬영하고 사용자의 시선에 따라 촬영된 영상을 선택적으로 전송하는 다수 개의 카메라를 기반으로 하는 영상 전송 방법, 장치 및 시스템에 관한 것이다.
최근 들어, 라이브 스트리밍 기술의 발전에 따라 인터넷을 기반으로 하는 개인 방송의 사용자 층이 급속도로 증가하고 있다. 게다가 최근에는 인터넷 개인 방송이 다양하고 전문적인 콘텐트를 제공하면서 공중파 예능 프로그램의 한 포맷으로까지 발전하게 되었다.
개인이 운영하는 1인 방송은 공중파 방송과 여러 가지 면에서 비교될 수 있는데, 그 중 하나가 카메라의 운용 대수이다. 즉 여기서 카메라의 운용 대수라는 것은 방송 프로그램의 촬영을 위하여 몇 대의 카메라를 운용하는가 이다.
1인 개인 방송은 통상, 방송을 주도하는 한 명이 방송을 하여야 하고 카메라맨도 별도로 없기 때문에 주로 모니터에 고정되는 하나 또는 소수의 웹 카메라만 사용할 수 밖에 없다. 따라서 웹 카메라가 촬영하는 영역도 고정되므로 사용자가 보여주고 싶은 장면이나 상황을 역동적으로 전달하는 데는 한계가 있는 것이 사실이다.
한국특허공개 제20090026617호
본 발명은 이러한 문제점을 해결하기 위한 것으로서, 다수 개의 카메라를 기반으로 다수 개의 영상을 촬영하고, 사용자의 시선에 따라 전송할 영상을 선택하여 전송할 수 있는 다수 개의 카메라를 기반으로 하는 영상 전송 방법, 장치 및 시스템을 제공하는데 그 목적이 있다.
이러한 목적을 달성하기 위하여 본 발명은 일 측면(Aspect)에서 다수 개의 카메라를 기반으로 하는 영상 전송 방법을 제공한다. 상기 다수 개의 카메라를 기반으로 하는 영상 전송 방법은, 영상 전송 장치에 의하여 수행되는 영상 전송 방법에 있어서, 다수 개의 카메라를 이용하여 다수 개의 영상을 취득하는 단계; 모니터에서 표시되는 화면을 상기 다수 개의 영상에 대응하는 다수 개의 영역으로 분할하여 표시하는 단계; 사용자가 응시하는 영역을 감지하는 단계; 상기 감지하는 단계에서 감지된 영역에 대응하는 영상을 선택하는 단계; 및 상기 선택된 영상을 방송을 통하여 전송하는 단계를 포함한다.
상기 다수 개의 카메라는 메인 카메라 및 적어도 하나의 서브 카메라를 포함하고, 상기 다수 개의 영역은, 상기 메인 카메라에 의하여 촬영되는 영상을 표시하는 메인 영역; 및 상기 적어도 하나의 서브 카메라에 의하여 촬영되는 적어도 하나의 영상을 표시하는 적어도 하나의 서브 영역을 포함할 수 있다.
상기 영상을 선택하는 단계는, 상기 감지하는 단계에서 감지된 영역을 기반으로 하여, 상기 다수 개의 영상에 대응하는 다수 개의 영역 중 상기 사용자가 응시하는 영역에 대응하는 영상을 선택하는 단계를 포함할 수 있다.
상기 영상을 선택하는 단계는, 상기 감지 단계에서 상기 사용자가 상기 다수 개의 영역 이외의 영역을 응시하고 있는 것으로 감지되면, 상기 다수 개의 영상 중 미리 정해진 영상을 선택하는 단계를 포함할 수도 있다.
상기 다수 개의 카메라는, 상기 모니터의 상측 중심에 구비되는 메인 카메라; 상기 모니터의 좌상단에 구비되는 제 1 서브 카메라; 상기 모니터의 우상단에 구비되는 제 2 서브 카메라; 상기 모니터의 우하단에 구비되는 제 3 서브 카메라; 및 상기 모니터의 좌하단에 구비되는 제 4 서브 카메라를 포함할 수 있다.
상기 다수 개의 영역은, 상기 모니터의 화면의 중심부에 표시되며, 상기 메인 카메라로부터 취득된 영상을 표시하는 메인 영역; 상기 모니터의 화면의 좌상단에 표시되며, 상기 제 1 서브 카메라로부터 취득된 영상을 표시하는 제 1 서브 영역; 상기 모니터의 화면의 우상단에 표시되며, 상기 제 2 서브 카메라로부터 취득된 영상을 표시하는 제 2 서브 영역; 상기 모니터의 화면의 우하단에 표시되며, 상기 제 3 서브 카메라로부터 취득된 영상을 표시하는 제 3 서브 영역; 및 상기 모니터의 화면의 좌하단에 표시되며, 상기 제 4 서브 카메라로부터 취득된 영상을 표시하는 제 4 서브 영역을 포함할 수 있다. 각각의 상기 카메라의 위치와 상기 모니터의 화면에 표시되는 각각의 상기 영역의 위치를 대응시킬 수 있다.
상기 다수 개의 카메라 중 적어도 어느 하나는 모니터 또는 스튜디오의 일측에 구비되는 고정 장치에 의하여 고정될 수 있다. 상기 고정 장치는 상기 모니터 또는 스튜디오의 일측에 고정되는 고정부; 상기 고정부로부터 연장되게 형성되는 연장부; 및 상기 연장부의 일측에 구비되어 카메라를 지지하는 지지부를 포함할 수 있다.
한편, 상술한 본 발명의 목적을 달성하기 위하여 본 발명은 다른 측면에서 다수 개의 카메라를 기반으로 하는 영상 전송 장치를 제공한다. 상기 다수 개의 카메라를 기반으로 하는 영상 전송 장치는, 수 개의 카메라에 의하여 취득되는 다수 개의 영상을 수신하는 영상 수신부; 모니터에서 표시되는 화면을 상기 다수 개의 영상에 대응하는 다수 개의 영역으로 분할하여 표시하는 분할 표시부; 사용자가 응시하는 영역을 감지하는 시선 감지부; 상기 시선 감지부에 의하여 감지된 영역에 대응하는 영상을 선택하는 영상 선택부; 및 상기 영상 선택부에 의하여 선택된 영상을 방송을 통하여 전송하는 전송부를 포함할 수 있다.
상기 다수 개의 카메라는 메인 카메라 및 적어도 하나의 서브 카메라를 포함할 수 있다. 상기 다수 개의 영역은, 상기 메인 카메라에 의하여 촬영되는 영상을 표시하는 메인 영역; 및 상기 적어도 하나의 서브 카메라에 의하여 촬영되는 적어도 하나의 영상을 표시하는 적어도 하나의 서브 영역을 포함할 수 있다.
상기 영상 선택부는, 상기 감지된 영역을 기반으로 하여, 상기 다수 개의 영상에 대응하는 다수 개의 영역 중 상기 사용자가 응시하는 영역에 대응하는 영상을 선택할 수 있다. 상기 영상 선택부는, 상기 시선 감지부에 의하여 상기 사용자가 상기 다수 개의 영역 이외의 영역을 응시하고 있는 것으로 감지되면, 상기 다수 개의 영상 중 미리 정해진 영상을 선택할 수도 있다.
상기 다수 개의 카메라는, 상기 모니터의 상측 중심에 구비되는 메인 카메라; 상기 모니터의 좌상단에 구비되는 제 1 서브 카메라; 상기 모니터의 우상단에 구비되는 제 2 서브 카메라; 상기 모니터의 우하단에 구비되는 제 3 서브 카메라; 및 상기 모니터의 좌하단에 구비되는 제 4 서브 카메라를 포함할 수 있다.
상기 다수 개의 영역은, 상기 모니터의 화면의 중심부에 표시되며, 상기 메인 카메라로부터 취득된 영상을 표시하는 메인 영역; 상기 모니터의 화면의 좌상단에 표시되며, 상기 제 1 서브 카메라로부터 취득된 영상을 표시하는 제 1 서브 영역; 상기 모니터의 화면의 우상단에 표시되며, 상기 제 2 서브 카메라로부터 취득된 영상을 표시하는 제 2 서브 영역; 상기 모니터의 화면의 우하단에 표시되며, 상기 제 3 서브 카메라로부터 취득된 영상을 표시하는 제 3 서브 영역; 및 상기 모니터의 화면의 좌하단에 표시되며, 상기 제 4 서브 카메라로부터 취득된 영상을 표시하는 제 4 서브 영역을 포함할 수 있다. 각각의 상기 카메라의 위치와 상기 모니터의 화면에 표시되는 각각의 상기 영역의 위치를 대응시킬 수 있다.
상기 다수 개의 카메라 중 적어도 어느 하나는 모니터 또는 스튜디오의 일측에 구비되는 고정 장치에 의하여 고정될 수 있다. 상기 고정 장치는 상기 모니터 또는 스튜디오의 일측에 고정되는 고정부; 상기 고정부로부터 연장되게 형성되는 연장부; 및 상기 연장부의 일측에 구비되어 카메라를 지지하는 지지부를 포함할 수 있다.
한편, 본 발명의 목적을 달성하기 위하여 본 발명은 또 다른 측면에서 다수 개의 카메라를 기반으로 하는 영상 전송 시스템을 제공한다. 상기 다수 개의 카메라를 기반으로 하는 영상 전송 시스템은, 다수 개의 영상을 취득하는 다수 개의 카메라; 및 상기 다수 개의 카메라에 의하여 취득되는 다수 개의 영상을 수신하고, 모니터에서 표시되는 화면을 상기 다수 개의 영상에 대응하는 다수 개의 영역으로 분할하여 표시하고, 사용자가 응시하는 영역을 감지하고, 그 감지된 영역에 대응하는 영상을 선택하고, 상기 선택된 영상을 방송을 통하여 전송하는 영상 전송 장치를 포함할 수 있다.
상기 다수 개의 카메라는 메인 카메라 및 적어도 하나의 서브 카메라를 포함할 수 있다. 상기 다수 개의 영역은, 상기 메인 카메라에 의하여 촬영되는 영상을 표시하는 메인 영역; 및 상기 적어도 하나의 서브 카메라에 의하여 촬영되는 적어도 하나의 영상을 표시하는 적어도 하나의 서브 영역을 포함할 수 있다.
상기 영상 전송 장치는, 상기 감지된 영역을 기반으로 하여, 상기 다수 개의 영상에 대응하는 다수 개의 영역 중 상기 사용자가 응시하는 영역에 대응하는 영상을 선택할 수 있다. 상기 영상 전송 장치는, 상기 사용자가 상기 다수 개의 영역 이외의 영역을 응시하고 있는 것으로 감지되면, 상기 다수 개의 영상 중 미리 정해진 영상을 선택할 수 있다.
상기 다수 개의 카메라는, 상기 모니터의 상측 중심에 구비되는 메인 카메라; 상기 모니터의 좌상단에 구비되는 제 1 서브 카메라; 상기 모니터의 우상단에 구비되는 제 2 서브 카메라; 상기 모니터의 우하단에 구비되는 제 3 서브 카메라; 및 상기 모니터의 좌하단에 구비되는 제 4 서브 카메라를 포함할 수 있다.
상기 다수 개의 영역은, 상기 모니터의 화면의 중심부에 표시되며, 상기 메인 카메라로부터 취득된 영상을 표시하는 메인 영역; 상기 모니터의 화면의 좌상단에 표시되며, 상기 제 1 서브 카메라로부터 취득된 영상을 표시하는 제 1 서브 영역; 상기 모니터의 화면의 우상단에 표시되며, 상기 제 2 서브 카메라로부터 취득된 영상을 표시하는 제 2 서브 영역; 상기 모니터의 화면의 우하단에 표시되며, 상기 제 3 서브 카메라로부터 취득된 영상을 표시하는 제 3 서브 영역; 및 상기 모니터의 화면의 좌하단에 표시되며, 상기 제 4 서브 카메라로부터 취득된 영상을 표시하는 제 4 서브 영역을 포함할 수 있다. 각각의 상기 카메라의 위치와 상기 모니터의 화면에 표시되는 각각의 상기 영역의 위치를 대응시킬 수 있다.
상기 다수 개의 카메라 중 적어도 어느 하나는 모니터 또는 스튜디오의 일측에 구비되는 고정 장치에 의하여 고정될 수 있다. 상기 고정 장치는 상기 모니터 또는 스튜디오의 일측에 고정되는 고정부; 상기 고정부로부터 연장되게 형성되는 연장부; 및 상기 연장부의 일측에 구비되어 카메라를 지지하는 지지부를 포함할 수 있다.
한편, 상술한 본 발명의 목적을 달성하기 위하여 본 발명은 또 다른 측면에서 영상 전송 시스템을 제공한다. 상기 영상 전송 시스템은, 다수 개의 영상을 취득하는 다수 개의 카메라; 및 상기 다수 개의 카메라에 의하여 취득되는 다수 개의 영상을 수신하고, 모니터에서 표시되는 화면을 상기 다수 개의 영상에 대응하는 다수 개의 영역으로 분할하여 표시하고, 사용자의 시선을 실시간으로 감지하는 것을 기반으로 하여 사용자가 응시하고 있는 영역의 변동에 따라 방송을 통하여 전송하는 영상을 변동시키는 영상 전송 장치를 포함할 수 있다.
한편, 상술한 본 발명의 목적을 달성하기 위하여 본 발명은 또 다른 측면에서 영상 전송 장치를 제공한다. 상기 영상 전송 장치는, 다수 개의 영상을 취득하는 다수 개의 카메라와 연동하는 영상 전송 장치로서, 상기 다수 개의 카메라에 의하여 취득되는 다수 개의 영상을 수신하고, 모니터에서 표시되는 화면을 상기 다수 개의 영상에 대응하는 다수 개의 영역으로 분할하여 표시하는 제 1 처리부; 및 사용자의 시선을 실시간으로 감지하는 것을 기반으로 하여, 상기 다수 개의 영역에서 사용자가 응시하고 있는 영역의 변동에 따라 방송을 통하여 전송하는 영상을 변동시키는 제 2 처리부를 포함할 수 있다.
이상 설명한 바와 같이, 본 발명에 따르면 다수 개의 카메라를 기반으로 다수 개의 영상을 촬영하고, 사용자의 시선에 따라 전송할 영상을 자동 선택하여 전송할 수 있다. 예를 들어, 방송을 진행하는 사용자의 시선에 따라 전송 영상이 자동으로 실시간으로 자동 전환될 수 있다. 따라서, 고가의 카메라 장비나 전송 시스템을 구비하기 어려운 개인 방송에서 보다 역동적인 방송이 가능해진다.
도 1은 본 발명의 바람직한 실시예에 따른 다수 개의 카메라를 이용한 영상 전송 방법을 실현하기 위한 시스템의 구성을 도시하는 블록도이다.
도 2는 본 발명의 바람직한 실시예에 따른 다수 개의 카메라의 장착 위치를 나타내는 예시도이다.
도 3은 카메라를 고정하기 위한 고정 장치를 예시적으로 도시하는 사시도이다.
도 4는 본 발명의 바람직한 다른 실시예에 따른 다수 개의 카메라의 장착 위치를 나타내는 예시도이다.
도 5는 도 1에 도시되어 있는 영상 전송 장치의 구성을 도시하는 블록도이다.
도 6은 도 5에 도시되어 있는 영상 전송 장치의 흐름을 설명하기 위한 흐름도로서, 본 발명의 바람직한 실시예에 따른 영상 전송 방법의 흐름을 나타내고 있다.
도 7은 분할 표시부에 의하여 분할되어 표시되는 모니터의 화면을 예시적으로 나타내는 예시도이다.
도 8 및 도 9는 사용자의 시선에 따라 실시간으로 이동하는 방송 콘텐츠를 설명하기 위한 예시도이다.
본 발명은 다양한 변경을 가할 수 있고 여러 가지 실시예를 가질 수 있는 바, 특정 실시예들을 도면에 예시하고 상세하게 설명하고자 한다. 그러나, 이는 본 발명을 특정한 실시 형태에 대해 한정하려는 것이 아니며, 본 발명의 사상 및 기술 범위에 포함되는 모든 변경, 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다.
제 1, 제 2 등의 용어는 다양한 구성요소들을 설명하는데 사용될 수 있지만, 상기 구성요소들은 상기 용어들에 의해 한정되어서는 안 된다. 상기 용어들은 하나의 구성요소를 다른 구성요소로부터 구별하는 목적으로만 사용된다. 예를 들어, 본 발명의 권리 범위를 벗어나지 않으면서 제 1 구성요소는 제 2 구성요소로 명명될 수 있고, 유사하게 제 2 구성요소도 제 1 구성요소로 명명될 수 있다. 및/또는 이라는 용어는 복수의 관련된 기재된 항목들의 조합 또는 복수의 관련된 기재된 항목들 중의 어느 항목을 포함한다.
어떤 구성요소가 다른 구성요소에 '연결되어' 있다거나 '접속되어' 있다고 언급된 때에는, 그 다른 구성요소에 직접적으로 연결되어 있거나 또는 접속되어 있을 수도 있지만, 중간에 다른 구성요소가 존재할 수도 있다고 이해되어야 할 것이다. 반면에, 어떤 구성요소가 다른 구성요소에 '직접 연결되어' 있다거나 '직접 접속되어' 있다고 언급된 때에는, 중간에 다른 구성요소가 존재하지 않는 것으로 이해되어야 할 것이다.
본 출원에서 사용한 용어는 단지 특정한 실시예를 설명하기 위해 사용된 것으로, 본 발명을 한정하려는 의도가 아니다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다. 본 출원에서, '포함하다' 또는 '가지다' 등의 용어는 명세서상에 기재된 특징, 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.
다르게 정의되지 않는 한, 기술적이거나 과학적인 용어를 포함해서 여기서 사용되는 모든 용어들은 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 것과 동일한 의미를 가지고 있다. 일반적으로 사용되는 사전에 정의되어 있는 것과 같은 용어들은 관련 기술의 문맥상 가지는 의미와 일치하는 의미를 가진 것으로 해석되어야 하며, 본 출원에서 명백하게 정의하지 않는 한, 이상적이거나 과도하게 형식적인 의미로 해석되지 않는다.
이하, 첨부한 도면들을 참조하여, 본 발명의 바람직한 실시예를 보다 상세하게 설명하고자 한다. 본 발명을 설명함에 있어 전체적인 이해를 용이하게 하기 위하여 도면상의 동일한 구성요소에 대해서는 동일한 참조부호를 사용하고 동일한 구성요소에 대해서 중복된 설명은 생략한다.
도 1은 본 발명의 바람직한 실시예에 따른 다수 개의 카메라를 이용한 영상 전송 방법을 실현하기 위한 시스템의 구성을 도시하는 블록도이다.
도 1에 도시된 바와 같이, 시스템(1)의 영상 전송 장치(10)는 다수 개의 카메라(C1~Cn)와 유선 또는 무선으로 연동할 수 있다. 상기 영상 전송 장치(10)는 인터넷 등과 같은 통신망과 연동하고, 다수 개의 카메라(C1~Cn)로부터 취득되는 영상 중 적어도 하나를 통신망을 통하여 시청 디바이스로 방송할 수 있다. 상기 영상 전송 장치(10)와 상기 시청 디바이스 사이에는 방송 서비스 서버가 포함될 수도 있다.
상기 영상 전송 장치(10)는 n개(n은 2보다 큰 정수)의 카메라(C1~Cn)와 연동할 수 있다. 예컨대, 본 발명의 바람직한 실시예에서 영상 전송 장치(10)는 5개의 카메라와 연동할 수 있다. 이 경우 상기 5개의 카메라는 하나의 메인 카메라와 4개의 서브 카메라를 포함할 수 있다. 그러나 이러한 실시예는 한정은 아니며 카메라의 개수 및 역할은 다양하게 변경 실시될 수 있음은 물론이다. 각각의 카메라는 영상을 취득하고 취득된 영상을 유선 또는 무선을 통하여 영상 전송 장치(10)로 전송할 수 있다.
도 2는 본 발명의 바람직한 실시예에 따른 다수 개의 카메라의 장착 위치를 나타내는 예시도이다.
도 2에 도시된 바와 같이, 메인 카메라(CM)가 모니터(15)의 일측, 예컨대 상측 중심에 구비될 수 있다. 모니터(15)의 타측에는 다수 개의 서브 카메라들(CS1~CS4), 예컨대 서브 카메라 1(CS1), 서브 카메라 2(CS2), 서브 카메라 3(CS3) 및 서브 카메라 4(CS4)가 구비될 수 있다. 예를 들어, 상기 서브 카메라 1(CS1)은 모니터(15)의 좌상단에 구비될 수 있다. 서브 카메라 2(CS2)는 모니터(15)의 우상단에 구비될 수 있다. 서브 카메라 3(CS3)은 모니터(15)의 우하단에 구비될 수 있다. 서브 카메라 4(CS4)는 모니터(15)의 좌하단에 구비될 수 있다.
각각의 카메라는 모니터(15)에 일체형으로 구비될 수도 있고, 모니터(15)에 탈착 가능한 형태로 고정될 수도 있다. 한편, 각각의 카메라는 고정 수단을 통하여 모니터(15) 또는 스튜디오의 다양한 위치에 고정되어 구비될 수도 있다.
도 3은 카메라를 고정하기 위한 고정 장치를 예시적으로 도시하는 사시도이다. 도 3에 도시된 예에서 카메라는 메인 카메라인 것을 예를 들었다.
도 3에 도시된 바와 같이, 고정 장치는 모니터(15) 또는 스튜디오의 일측에 고정되는 고정부(22), 고정부(22)로부터 연장 형성되는 연장부(24) 및 연장부(24)의 단부에 구비되어 메인 카메라(CM)를 지지하는 지지부(26)를 포함할 수 있다.
상기 고정부(22)는 고정 장치를 모니터(15)에 고정할 수 있다. 상기 고정부(22)는 압축식, 집게식, 접착식 등의 방식으로서 모니터(15)나 스튜디오에 탈착 가능하도록 형성될 수도 있다. 상기 지지부(26)는 카메라 모듈을 안착시킬 수 있는 유닛을 구비하고 카메라 모듈을 고정 및 지지할 수 있다.
상기 연장부(24)는 고정부(22)와 지지부(26)를 사이에서 이들을 연결하고, 메인 카메라(CM)가 고정된 위치로부터 연장되도록 할 수 있다. 상기 연장부(24)는 다양한 길이 및 방향으로 플렉서블하게 변형이 가능하여 메인 카메라(CM)가 다양한 촬영각을 가질 수 있도록 지원할 수 있다.
도 4는 본 발명의 바람직한 다른 실시예에 따른 다수 개의 카메라의 장착 위치를 나타내는 예시도로서, 서브 카메라들을 모니터(15)가 아닌 스튜디오에 장착하는 예를 나타내고 있다.
도 4에 도시된 바와 같이, 메인 카메라(CM)는 모니터(15)의 상측 중심에 구비될 수 있다. 반면, 4개의 서브 카메라(CS1~SS4)는 스튜디오의 전면부 벽면에 설치된다. 예를 들어 서브 카메라 1(CS1)은 스튜디오 벽면의 좌상단에 구비될 수 있다. 서브 카메라 2(CS2)는 스튜디오의 벽면의 우상단에 구비될 수 있다. 서브 카메라 3(CS3)은 스튜디오의 벽면의 우하단에 구비될 수 있다. 서브 카메라 4(CS4)는 스튜디오의 벽면의 좌하단에 구비될 수 있다. 이와 같이, 서브 카메라들(CS1~CS4)가 스튜디오의 벽면에 도 4에 도시된 바와 같이 설치됨에 따라 보다 넓은 범위의 영상 취득이 가능해진다.
도 5는 도 1에 도시되어 있는 영상 전송 장치(10)의 구성을 도시하는 블록도이다. 도 6은 도 5에 도시되어 있는 영상 전송 장치(10)의 흐름을 설명하기 위한 흐름도로서, 본 발명의 바람직한 실시예에 따른 영상 전송 방법의 흐름을 나타내고 있다.
도 5에 도시된 바와 같이, 영상 전송 장치(10)는 영상 수신부(101), 분할 표시부(102), 시선 감지부(103), 영상 선택부(104), 전송부(105), 모니터(15) 등을 포함할 수 있다. 상기 영상 전송 장치(10)는 다수 개의 카메라, 예컨대 메인 카메라(CM) 및 4개의 서브 카메라(CS1~CS4)와 연동할 수 있다. 다른 한편으로, 영상 전송 장치(10)는 통신망을 통하여 다수 개의 카메라들, 예컨대 메인 카메라(CM) 및 4개의 서브 카메라(CS1~CS4)로부터 촬영된 영상을 기반으로 한 방송 서비스를 제공할 수 있다.
도 5 내지 도 6을 참조하면, 영상 수신부(101)는 다수 개의 카메라(CM, CS1~CS4) 이용하여 다수 개의 영상을 취득할 수 있다(단계:S1). 예를 들어, 영상 수신부(101)는 메인 카메라(CM)로부터 메인 영상, 서브 카메라 1(CS1)으로부터 서브 영상 1, 서브 카메라 2(CS2)로부터 서브 영상 2, 서브 카메라 3(CS3)으로부터 서브 영상 3, 서브 카메라 4(CS4)로부터 서브 영상 4를 취득할 수 있다.
분할 표시부(102)는 모니터(15)에서 표시되는 화면을 상기 다수 개의 영상에 대응하는 다수 개의 영역으로 분할하여 표시할 수 있다(단계:S2). 예컨대, 분할 표시부(102)는 메인 카메라(CM)로부터 취득된 메인 영상을 표시하기 위한 메인 영역, 서브 카메라 1(CS1)으로부터 취득되는 서브 영상 1을 표시하기 위한 서브 영역 1, 서브 카메라 2(CS2)로부터 취득되는 서브 영상 2를 표시하기 위한 서브 영역 2, 서브 카메라 3(CS3)으로부터 취득되는 서브 영상 3를 표시하기 위한 서브 영역 3, 서브 카메라 4(CS4)로부터 취득되는 서브 영상 4를 표시하기 위한 서브 영역 4 등 5개 영역으로 모니터(15)의 화면을 분할하여 표시할 수 있다.
상기 분할 표시부(102)는 다수 개의 카메라(CM, CS1~CS4)의 실제 물리적인 배치에 대응하여 다수 개의 표시 영역의 모니터(15)의 화면상에서의 배치를 일치시킬 수 있다. 즉 분할 표시부(102)는 사용자가 모니터(15)의 화면에서 분할된 영역의 배치만 보고도 어느 카메라에서 촬영된 영상인지를 직관적으로 인지할 수 있도록 분할된 표시 영역을 배치할 수 있다.
도 7은 분할 표시부(102)에 의하여 분할되어 표시되는 모니터(15)의 화면을 예시적으로 나타내는 예시도이다.
도 7에 도시된 바와 같이, 예컨대, 메인 카메라(CM)로부터 취득된 메인 영상을 표시하기 위한 메인 영역(PM)은 화면의 중심부에 표시하고, 좌상측 카메라인 서브 카메라 1(CS1)에 대응하는 서브 영역 1(PS1)은 화면의 좌측 상부에 표시하고, 우상측 카메라인 서브 카메라 2(CS2)에 대응하는 서브 영역 2(PS2)는 화면의 우측 상부에 표시하고, 우하측 카메라인 서브 카메라 3(CS3)에 대응하는 서브 영상 3를 표시하기 위한 서브 영역 3(PS3)는 화면의 우측 하부에 표시하고, 좌하측 카메라인 서브 카메라 4(CS4)로부터 취득되는 서브 영상 4를 표시하기 위한 서브 영역 4(CS4)는 화면의 좌측 하부에 표시할 수 있다.
이를 위해 분할 표시부(102)는 사용자가 표시 영역의 위치 및 배치를 설정할 수 있는 사용자 인터페이스를 제공할 수도 있고, 다수 개의 카메라((CM, CS1~CS4)의 배치를 기반으로 자동으로 표시 영역의 배치(PM, PS1~PS4)를 설정할 수도 있다.
예를 들어, 전자의 경우 분할 표시부는 다수 개의 카메라(CM, CS1~CS4)가 연결되면 연결된 카메라의 개수 및 식별 정보를 인식하고, 연결된 카메라 리스트를 표시 영역 설정 사용자 인터페이스를 통하여 표시할 수 있다. 상기 표시 영역 설정 사용자 인터페이스는 각각의 카메라에 대응하는 실시간 샘플 영상을 표시할 수도 있다. 상기 영역 설정 사용자 인터페이스는 카메라의 개수에 대응하는 표시 영역의 다양한 배치를 표시하고 사용자로 하여금 원하는 배치를 선택하도록 하는 설정 창을 표시할 수 있다. 상시 설정 창을 통하여 배치의 선택이 입력되면 분할 표시부(102)는 입력된 선택에 대응하여 카메라 배치를 설정하고, 설정 데이터를 데이터베이스에 저장할 수 있다.
한편, 후자의 경우 영상 전송 장치(10)는 광각 촬영용 카메라를 구비할 수 있다. 분할 표시부(102)는 광각 촬영용 카메라를 통하여 촬영되는 광영역의 영상을 수신할 수 있다. 분할 표시부(102)는 다수 개의 카메라(CM, CS1~CS4)가 연결되면 그에 대응하는 다수 개의 영상을 수신하고, 각각의 카메라에서 취득된 영상을 미리 수신한 광영역의 영상과 비교하여, 각각의 카메라에서 취득된 영상이 광 영역의 영상에서 어느 부분에 각각 매칭되는지를 분석할 수 있다.
이러한 비교 및 매칭을 기반으로, 분할 표시부(102)는 각각의 카메라의 위치를 추정하고, 추정된 위치에 따라 각각의 카메라에 대응하는 표시 영역의 위치를 자동 설정할 수 있다. 만약, 광영역의 영상 및 각각의 카메라로부터 취득된 영상의 매칭이 정상적으로 이루어지지 않을 경우 분할 표시부(102)는 수동 설정 모드로 전환하여 영역 설정 사용자 인터페이스를 표시할 수도 있다.
다수 개의 카메라(CM, CS1~CS4)로부터 취득되는 다수 개의 영상이 모니터(15)의 화면을 통하여 표시되는 상태에서, 시선 감지부(103)는 사용자의 시선을 트랙킹하여 사용자가 응시하는 영역을 감지할 수 있다(단계:S3). 상기 시선 감지부(103)는 예컨대 모니터(15)의 일측에 구비되는 아이 트랙킹 센서를 포함할 수 있다. 아이 트랙킹 센서의 위치는 실시 환경에 따라 다양하게 설치될 수 있다. 예컨대, 메인 카메라(CM) 또는 서브 카메라(CS1~CS4) 중 적어도 어느 하나가 아이 트랙킹 센서의 기능을 겸할 수도 있다.
시선 감지부(103)에 의하여 사용자가 응시하는 영역이 감지되면, 영상 선택부(104)는 시선 감지부(103)에 의하여 사용자가 현재 응시하고 있다고 감지된 영역에 대응하는 영상을 선택할 수 있다(단계:S4). 예를 들어, 사용자가 모니터(15)의 화면상에서 메인 영역(PM)을 현재 응시하고 있다는 것이 감지된 경우, 영상 선택부(104)는 메인 영역(PM)에서 표시되는 영상, 즉 메인 카메라(CM)로부터 취득되는 영상을 선택할 수 있다. 또는 사용자가 서브 영역 1(PS1)을 응시하고 있는 것이 감지된 경우, 영상 선택부(104)는 서브 영역 1(PS1)에서 표시되는 영상, 즉 서브 카메라 1(CS1)으로부터 취득되는 영상을 선택할 수 있다.
한편, 시선 감지부(103)에서 사용자가 상기 다수 개의 표시 영역(PM, PS1~PS4) 이외의 영역, 예컨대 모니터(15)의 바깥, 후방 등을 응시하고 있는 것을 감지하거나, 시선 감지가 불가능한 경우, 영상 선택부(104)는 상기 다수 개의 영상 중 미리 정해진 영상을 선택할 수 있다. 예를 들어, 디폴트 영상으로 메인 영상이 설정되어 있고 사용자가 모니터(15) 이외의 다른 곳을 응시하거나 옆을 보거나 뒤를 볼 경우, 영상 선택부(104)는 메인 영상을 선택할 수 있다. 영상 선택부(104)는 사전에 상기 디폴트 영상을 설정할 수 있는 사용자 인터페이스를 표시하고, 그 사용자 인터페이스를 통하여 선택되는 신호에 응답하여 디폴트 영상을 설정할 수 있다.
전송부(105)는 상기 시선 감지부(103)에 의하여 선택된 영상을 통신망을 통하여 방송할 수 있다. 따라서 영상 전송 장치(10)에서 서비스되는 영상을 수신하여 재생하는 시청 디바이스들은 사용자가 현재 응시하는 표시 영역에 대응되는 카메라로부터 취득된 영상을 시청하게 된다.
도 8 및 도 9는 사용자의 시선에 따라 실시간으로 이동하는 방송 콘텐츠를 설명하기 위한 예시도이다.
도 8에 도시된 바와 같이, 모니터(15)에 표시되는 5개의 표시 영역(PM, PS1~PS4) 중 사용자가 메인 영역(PM)을 응시하고 있다고 가정하면, 영상 전송 장치(10)는 메인 영역(PM)에 대응하는 메인 커메라(CM)로부터 취득된 영상을 방송한다.
도 9에 도시된 바와 같이, 사용자의 시선이 메인 영역(PM)으로부터 서브 영역 1(PS1)로 이동할 경우, 영상 전송 장치(10)는 서브 카메라 1(CS1)으로부터 취득된 영상을 선택하여 방송할 수 있다. 따라서, 메인 카메라(CM)로부터 취득되는 영상의 전송은 중단되고, 서브 카메라 1(CS1)으로부터 취득되는 영상이 방송을 통하여 시청 디바이스로 제공된다.
이상 설명한 바와 같이, 본 발명에 따르면 다수 개의 카메라를 기반으로 다수 개의 영상을 취득하고, 방송을 진행하는 사용자의 시선에 따라 전송 영상이 자동으로 실시간으로 자동 전환될 수 있다. 따라서 고가의 카메라 장비나 전송 시스템을 구비하기 어려운 개인 방송에서 보다 역동적인 방송이 가능해진다.
이상 본 발명에 대하여 그 바람직한 실시예를 예시하여 설명하였지만 해당 기술 분야의 숙련된 당업자는 하기의 특허 청구 범위에 기재된 본 발명의 기술적 사항 및 영역으로부터 벗어나지 않는 범위 내에서 본 발명을 다양하게 수정 및 변경시켜 실시할 수 있음을 이해할 수 있을 것이다. 따라서, 본 발명의 앞으로의 실시예들의 변경은 본 발명의 기술을 벗어날 수 없을 것이다.
10 : 영상 전송 장치
15 : 모니터
101 : 영상 수신부
102 : 분할 표시부
103 : 시선 감지부
104 : 영상 선택부
105 : 전송부
CM : 메인 카메라
CS1~CS4 : 서브 카메라 1 ~ 서브 카메라 4

Claims (23)

  1. 영상 전송 장치에 의하여 수행되는 영상 전송 방법에 있어서,
    다수 개의 카메라를 이용하여 다수 개의 영상을 취득하는 단계;
    모니터에서 표시되는 화면을 상기 다수 개의 영상에 대응하는 다수 개의 영역으로 분할하여 표시하는 단계;
    사용자가 응시하는 영역을 감지하는 단계;
    상기 감지하는 단계에서 감지된 영역에 대응하는 영상을 선택하는 단계; 및
    상기 선택된 영상을 방송을 통하여 전송하는 단계를 포함하는 것을 특징으로 하는 다수 개의 카메라를 기반으로 하는 영상 전송 방법.
  2. 제 1 항에 있어서, 상기 다수 개의 카메라는 메인 카메라 및 적어도 하나의 서브 카메라를 포함하고,
    상기 다수 개의 영역은,
    상기 메인 카메라에 의하여 촬영되는 영상을 표시하는 메인 영역; 및
    상기 적어도 하나의 서브 카메라에 의하여 촬영되는 적어도 하나의 영상을 표시하는 적어도 하나의 서브 영역을 포함하는 것을 특징으로 하는 다수 개의 카메라를 기반으로 하는 영상 전송 방법.
  3. 제 2 항에 있어서, 상기 영상을 선택하는 단계는,
    상기 감지하는 단계에서 감지된 영역을 기반으로 하여, 상기 다수 개의 영상에 대응하는 다수 개의 영역 중 상기 사용자가 응시하는 영역에 대응하는 영상을 선택하는 단계를 포함하는 것을 특징으로 하는 다수 개의 카메라를 기반으로 하는 영상 전송 방법.
  4. 제 2 항에 있어서, 상기 영상을 선택하는 단계는,
    상기 감지 단계에서 상기 사용자가 상기 다수 개의 영역 이외의 영역을 응시하고 있는 것으로 감지되면, 상기 다수 개의 영상 중 미리 정해진 영상을 선택하는 단계를 포함하는 것을 특징으로 하는 영상 전송 방법.
  5. 제 1 항에 있어서, 상기 다수 개의 카메라는,
    상기 모니터의 상측 중심에 구비되는 메인 카메라;
    상기 모니터의 좌상단에 구비되는 제 1 서브 카메라;
    상기 모니터의 우상단에 구비되는 제 2 서브 카메라;
    상기 모니터의 우하단에 구비되는 제 3 서브 카메라; 및
    상기 모니터의 좌하단에 구비되는 제 4 서브 카메라를 포함하는 것을 특징으로 하는 다수 개의 카메라를 기반으로 하는 영상 전송 방법.
  6. 제 5 항에 있어서, 상기 다수 개의 영역은,
    상기 모니터의 화면의 중심부에 표시되며, 상기 메인 카메라로부터 취득된 영상을 표시하는 메인 영역;
    상기 모니터의 화면의 좌상단에 표시되며, 상기 제 1 서브 카메라로부터 취득된 영상을 표시하는 제 1 서브 영역;
    상기 모니터의 화면의 우상단에 표시되며, 상기 제 2 서브 카메라로부터 취득된 영상을 표시하는 제 2 서브 영역;
    상기 모니터의 화면의 우하단에 표시되며, 상기 제 3 서브 카메라로부터 취득된 영상을 표시하는 제 3 서브 영역; 및
    상기 모니터의 화면의 좌하단에 표시되며, 상기 제 4 서브 카메라로부터 취득된 영상을 표시하는 제 4 서브 영역을 포함하고,
    각각의 상기 카메라의 위치와 상기 모니터의 화면에 표시되는 각각의 상기 영역의 위치를 대응시키는 것을 특징으로 하는 다수 개의 카메라를 기반으로 하는 영상 전송 방법.
  7. 제 1 항에 있어서, 상기 다수 개의 카메라 중 적어도 어느 하나는 모니터 또는 스튜디오의 일측에 구비되는 고정 장치에 의하여 고정되고,
    상기 고정 장치는
    상기 모니터 또는 스튜디오의 일측에 고정되는 고정부;
    상기 고정부로부터 연장되게 형성되는 연장부; 및
    상기 연장부의 일측에 구비되어 카메라를 지지하는 지지부를 포함하는 것을 특징으로 하는 다수 개의 카메라를 기반으로 하는 영상 전송 방법.
  8. 다수 개의 카메라에 의하여 취득되는 다수 개의 영상을 수신하는 영상 수신부;
    모니터에서 표시되는 화면을 상기 다수 개의 영상에 대응하는 다수 개의 영역으로 분할하여 표시하는 분할 표시부;
    사용자가 응시하는 영역을 감지하는 시선 감지부;
    상기 시선 감지부에 의하여 감지된 영역에 대응하는 영상을 선택하는 영상 선택부; 및
    상기 영상 선택부에 의하여 선택된 영상을 방송을 통하여 전송하는 전송부를 포함하는 것을 특징으로 하는 다수 개의 카메라를 기반으로 하는 영상 전송 장치.
  9. 제 8 항에 있어서, 상기 다수 개의 카메라는 메인 카메라 및 적어도 하나의 서브 카메라를 포함하고,
    상기 다수 개의 영역은,
    상기 메인 카메라에 의하여 촬영되는 영상을 표시하는 메인 영역; 및
    상기 적어도 하나의 서브 카메라에 의하여 촬영되는 적어도 하나의 영상을 표시하는 적어도 하나의 서브 영역을 포함하는 것을 특징으로 하는 다수 개의 카메라를 기반으로 하는 영상 전송 장치.
  10. 제 9 항에 있어서, 상기 영상 선택부는,
    상기 감지된 영역을 기반으로 하여, 상기 다수 개의 영상에 대응하는 다수 개의 영역 중 상기 사용자가 응시하는 영역에 대응하는 영상을 선택하는 것을 특징으로 하는 다수 개의 카메라를 기반으로 하는 영상 전송 장치.
  11. 제 8 항에 있어서, 상기 영상 선택부는,
    상기 시선 감지부에 의하여 상기 사용자가 상기 다수 개의 영역 이외의 영역을 응시하고 있는 것으로 감지되면, 상기 다수 개의 영상 중 미리 정해진 영상을 선택하는 것을 특징으로 하는 영상 전송 장치.
  12. 제 8 항에 있어서, 상기 다수 개의 카메라는,
    상기 모니터의 상측 중심에 구비되는 메인 카메라;
    상기 모니터의 좌상단에 구비되는 제 1 서브 카메라;
    상기 모니터의 우상단에 구비되는 제 2 서브 카메라;
    상기 모니터의 우하단에 구비되는 제 3 서브 카메라; 및
    상기 모니터의 좌하단에 구비되는 제 4 서브 카메라를 포함하는 것을 특징으로 하는 다수 개의 카메라를 기반으로 하는 영상 전송 장치.
  13. 제 12 항에 있어서, 상기 다수 개의 영역은,
    상기 모니터의 화면의 중심부에 표시되며, 상기 메인 카메라로부터 취득된 영상을 표시하는 메인 영역;
    상기 모니터의 화면의 좌상단에 표시되며, 상기 제 1 서브 카메라로부터 취득된 영상을 표시하는 제 1 서브 영역;
    상기 모니터의 화면의 우상단에 표시되며, 상기 제 2 서브 카메라로부터 취득된 영상을 표시하는 제 2 서브 영역;
    상기 모니터의 화면의 우하단에 표시되며, 상기 제 3 서브 카메라로부터 취득된 영상을 표시하는 제 3 서브 영역; 및
    상기 모니터의 화면의 좌하단에 표시되며, 상기 제 4 서브 카메라로부터 취득된 영상을 표시하는 제 4 서브 영역을 포함하고,
    각각의 상기 카메라의 위치와 상기 모니터의 화면에 표시되는 각각의 상기 영역의 위치를 대응시키는 것을 특징으로 하는 다수 개의 카메라를 기반으로 하는 영상 전송 장치.
  14. 제 8 항에 있어서, 상기 다수 개의 카메라 중 적어도 어느 하나는 모니터 또는 스튜디오의 일측에 구비되는 고정 장치에 의하여 고정되고,
    상기 고정 장치는
    상기 모니터 또는 스튜디오의 일측에 고정되는 고정부;
    상기 고정부로부터 연장되게 형성되는 연장부; 및
    상기 연장부의 일측에 구비되어 카메라를 지지하는 지지부를 포함하는 것을 특징으로 하는 다수 개의 카메라를 기반으로 하는 영상 전송 장치.
  15. 다수 개의 영상을 취득하는 다수 개의 카메라; 및
    상기 다수 개의 카메라에 의하여 취득되는 다수 개의 영상을 수신하고, 모니터에서 표시되는 화면을 상기 다수 개의 영상에 대응하는 다수 개의 영역으로 분할하여 표시하고, 사용자가 응시하는 영역을 감지하고, 상기 감지된 영역에 대응하는 영상을 선택하고, 상기 선택된 영상을 방송을 통하여 전송하는 영상 전송 장치를 포함하는 것을 특징으로 하는 다수 개의 카메라를 기반으로 하는 영상 전송 시스템.
  16. 제 15 항에 있어서, 상기 다수 개의 카메라는 메인 카메라 및 적어도 하나의 서브 카메라를 포함하고,
    상기 다수 개의 영역은,
    상기 메인 카메라에 의하여 촬영되는 영상을 표시하는 메인 영역; 및
    상기 적어도 하나의 서브 카메라에 의하여 촬영되는 적어도 하나의 영상을 표시하는 적어도 하나의 서브 영역을 포함하는 것을 특징으로 하는 다수 개의 카메라를 기반으로 하는 영상 전송 시스템.
  17. 제 16 항에 있어서, 상기 영상 전송 장치는,
    상기 감지된 영역을 기반으로 하여, 상기 다수 개의 영상에 대응하는 다수 개의 영역 중 상기 사용자가 응시하는 영역에 대응하는 영상을 선택하는 것을 특징으로 하는 다수 개의 카메라를 기반으로 하는 영상 전송 시스템.
  18. 제 15 항에 있어서, 상기 영상 전송 장치는,
    상기 사용자가 상기 다수 개의 영역 이외의 영역을 응시하고 있는 것으로 감지되면, 상기 다수 개의 영상 중 미리 정해진 영상을 선택하는 것을 특징으로 하는 영상 전송 시스템.
  19. 제 15 항에 있어서, 상기 다수 개의 카메라는,
    상기 모니터의 상측 중심에 구비되는 메인 카메라;
    상기 모니터의 좌상단에 구비되는 제 1 서브 카메라;
    상기 모니터의 우상단에 구비되는 제 2 서브 카메라;
    상기 모니터의 우하단에 구비되는 제 3 서브 카메라; 및
    상기 모니터의 좌하단에 구비되는 제 4 서브 카메라를 포함하는 것을 특징으로 하는 다수 개의 카메라를 기반으로 하는 영상 전송 시스템.
  20. 제 19 항에 있어서, 상기 다수 개의 영역은,
    상기 모니터의 화면의 중심부에 표시되며, 상기 메인 카메라로부터 취득된 영상을 표시하는 메인 영역;
    상기 모니터의 화면의 좌상단에 표시되며, 상기 제 1 서브 카메라로부터 취득된 영상을 표시하는 제 1 서브 영역;
    상기 모니터의 화면의 우상단에 표시되며, 상기 제 2 서브 카메라로부터 취득된 영상을 표시하는 제 2 서브 영역;
    상기 모니터의 화면의 우하단에 표시되며, 상기 제 3 서브 카메라로부터 취득된 영상을 표시하는 제 3 서브 영역; 및
    상기 모니터의 화면의 좌하단에 표시되며, 상기 제 4 서브 카메라로부터 취득된 영상을 표시하는 제 4 서브 영역을 포함하고,
    각각의 상기 카메라의 위치와 상기 모니터의 화면에 표시되는 각각의 상기 영역의 위치를 대응시키는 것을 특징으로 하는 다수 개의 카메라를 기반으로 하는 영상 전송 시스템.
  21. 제 15 항에 있어서, 상기 다수 개의 카메라 중 적어도 어느 하나는 모니터 또는 스튜디오의 일측에 구비되는 고정 장치에 의하여 고정되고,
    상기 고정 장치는
    상기 모니터 또는 스튜디오의 일측에 고정되는 고정부;
    상기 고정부로부터 연장되게 형성되는 연장부; 및
    상기 연장부의 일측에 구비되어 카메라를 지지하는 지지부를 포함하는 것을 특징으로 하는 다수 개의 카메라를 기반으로 하는 영상 전송 장치.
  22. 다수 개의 영상을 취득하는 다수 개의 카메라; 및
    상기 다수 개의 카메라에 의하여 취득되는 다수 개의 영상을 수신하고, 모니터에서 표시되는 화면을 상기 다수 개의 영상에 대응하는 다수 개의 영역으로 분할하여 표시하고, 사용자의 시선을 실시간으로 감지하는 것을 기반으로 하여 사용자가 응시하고 있는 영역의 변동에 따라 방송을 통하여 전송하는 영상을 변동시키는 영상 전송 장치를 포함하는 것을 특징으로 하는 영상 전송 시스템.
  23. 다수 개의 영상을 취득하는 다수 개의 카메라와 연동하는 영상 전송 장치로서,
    상기 다수 개의 카메라에 의하여 취득되는 다수 개의 영상을 수신하고, 모니터에서 표시되는 화면을 상기 다수 개의 영상에 대응하는 다수 개의 영역으로 분할하여 표시하는 제 1 처리부; 및
    사용자의 시선을 실시간으로 감지하는 것을 기반으로 하여, 상기 다수 개의 영역에서 사용자가 응시하고 있는 영역의 변동에 따라 방송을 통하여 전송하는 영상을 변동시키는 제 2 처리부를 포함하는 것을 특징으로 하는 영상 전송 장치.
KR1020160003558A 2015-12-04 2016-01-12 다수 개의 카메라를 기반으로 하는 영상 전송 방법, 장치 및 시스템 KR101807159B1 (ko)

Priority Applications (3)

Application Number Priority Date Filing Date Title
PCT/KR2016/004207 WO2017094978A1 (ko) 2015-12-04 2016-04-22 다수 개의 카메라를 기반으로 하는 영상 전송 방법, 장치 및 시스템
US15/552,494 US20180278881A1 (en) 2015-12-04 2016-04-22 Multiple camera-based image transmission method, device and system
CN201680019403.8A CN107431846B (zh) 2015-12-04 2016-04-22 基于多个摄像机的图像传输方法、设备和系统

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR1020150172047 2015-12-04
KR20150172047 2015-12-04

Publications (2)

Publication Number Publication Date
KR20170066185A true KR20170066185A (ko) 2017-06-14
KR101807159B1 KR101807159B1 (ko) 2017-12-11

Family

ID=59218391

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020160003558A KR101807159B1 (ko) 2015-12-04 2016-01-12 다수 개의 카메라를 기반으로 하는 영상 전송 방법, 장치 및 시스템

Country Status (3)

Country Link
US (1) US20180278881A1 (ko)
KR (1) KR101807159B1 (ko)
CN (1) CN107431846B (ko)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20190087230A (ko) * 2018-01-16 2019-07-24 삼성전자주식회사 복수의 카메라를 이용하여 영상 데이터를 생성하는 방법 및 서버
KR20230018256A (ko) * 2021-07-29 2023-02-07 주식회사 케이티 개인 방송 서비스를 제공하는 iptv 시스템 및 방법

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112423139A (zh) * 2020-11-20 2021-02-26 千脉文化传媒(上海)有限公司 基于移动终端的多机位直播方法、系统、设备及存储介质

Family Cites Families (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6995810B2 (en) * 2000-11-30 2006-02-07 Texas Instruments Incorporated Method and system for automated convergence and focus verification of projected images
GR1004309B (el) * 2001-03-15 2003-08-28 . Συστημα και μεθοδος ζωντανης πολλαπλης αναμεταδοσης τηλεορασης ή κινηματογραφου
JP4503945B2 (ja) * 2003-07-04 2010-07-14 独立行政法人科学技術振興機構 リモート観測装置
CN101917389B (zh) * 2009-12-17 2013-11-06 新奥特（北京）视频技术有限公司 一种网络电视直播系统
CN101909160A (zh) * 2009-12-17 2010-12-08 新奥特（北京）视频技术有限公司 一种网络视频直播中的播控切换方法及装置
CN101866215B (zh) * 2010-04-20 2013-10-16 复旦大学 在视频监控中采用视线跟踪的人机交互装置和方法
CN201623797U (zh) * 2010-04-30 2010-11-03 第一视频通信传媒有限公司 一种多画面网络直播系统
US8531394B2 (en) * 2010-07-23 2013-09-10 Gregory A. Maltz Unitized, vision-controlled, wireless eyeglasses transceiver
CN102075696B (zh) * 2011-01-07 2013-03-27 卢泳 信号采集、传输、编辑整合、播发及收视的方法和系统
US8736660B2 (en) * 2011-03-14 2014-05-27 Polycom, Inc. Methods and system for simulated 3D videoconferencing
US8451344B1 (en) * 2011-03-24 2013-05-28 Amazon Technologies, Inc. Electronic devices with side viewing capability
CN102866776B (zh) * 2012-09-07 2016-07-13 广东电网公司电力调度控制中心 电网调度运行的眼控输入系统及其应用方法
US20150018723A1 (en) * 2013-07-09 2015-01-15 Industry-Academic Cooperation Foundation, Kyungpook National University Apparatus for early detection of paralysis based on motion sensing
US9513702B2 (en) * 2013-07-15 2016-12-06 Lg Electronics Inc. Mobile terminal for vehicular display system with gaze detection
CN103605208B (zh) * 2013-08-30 2016-09-28 北京智谷睿拓技术服务有限公司 内容投射系统及方法
KR102129798B1 (ko) * 2014-05-08 2020-07-03 엘지전자 주식회사 비히클 및 그 제어 방법
US10001837B2 (en) * 2014-12-23 2018-06-19 Intel Corporation Technologies for interacting with computing devices using haptic manipulation

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20190087230A (ko) * 2018-01-16 2019-07-24 삼성전자주식회사 복수의 카메라를 이용하여 영상 데이터를 생성하는 방법 및 서버
KR20230018256A (ko) * 2021-07-29 2023-02-07 주식회사 케이티 개인 방송 서비스를 제공하는 iptv 시스템 및 방법

Also Published As

Publication number Publication date
US20180278881A1 (en) 2018-09-27
KR101807159B1 (ko) 2017-12-11
CN107431846A (zh) 2017-12-01
CN107431846B (zh) 2020-08-07

Similar Documents

Publication Publication Date Title
US10650244B2 (en) Video conferencing system and related methods
US8429703B2 (en) Video distribution apparatus, viewer apparatus, video distribution system including these apparatuses, control method for the video distribution apparatus, control method for the viewer apparatus, and computer program for the apparatuses
KR101782582B1 (ko) 아이 트랙킹을 기반으로 하는 영상 전송 방법, 장치 및 시스템
US10531068B2 (en) Information processing device, information processing method, and three-dimensional image data transmission method
KR102069930B1 (ko) 이머전 통신 클라이언트, 서버 및 컨텐츠 뷰를 획득하는 방법
US9791937B2 (en) Wearable device and method for controlling display of the same
KR101695249B1 (ko) 감시 영상 표시 방법 및 시스템
JP4835898B2 (ja) 映像表示方法および映像表示装置
US9706264B2 (en) Multiple field-of-view video streaming
CA2866459A1 (en) Teleconference system and teleconference terminal
KR101807159B1 (ko) 다수 개의 카메라를 기반으로 하는 영상 전송 방법, 장치 및 시스템
US20060192847A1 (en) Display apparatus, and display control method for the display apparatus
JP2006270380A (ja) 画像情報送信装置
US10742964B2 (en) Methods and apparatus for displaying images
JP5370380B2 (ja) 映像表示方法および映像表示装置
JP2005033570A (ja) 移動体画像提供方法、移動体画像提供システム
JP2008289091A (ja) 画像表示装置及び監視カメラシステム
JP2004289779A (ja) 移動体撮像方法、移動体撮像システム
KR102040723B1 (ko) 다원 방송 송출 방법 및 장치
CN110896446B (zh) 影像传送系统
JP3891402B2 (ja) 映像切出し制御装置
JP4195844B2 (ja) 移動可能な移動体撮像装置
CN214851294U (zh) 一种基于wifi6路由器的虚拟现实设备管理系统
JP2007215012A (ja) ネットワークカメラシステムの表示方法
WO2023171120A1 (ja) 情報処理装置、情報処理方法、およびプログラム

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant