KR102374665B1 - 개인방송을 위한 방송영상 생성방법 및 이를 위한 방송영상 생성시스템 - Google Patents

개인방송을 위한 방송영상 생성방법 및 이를 위한 방송영상 생성시스템 Download PDF

Info

Publication number
KR102374665B1
KR102374665B1 KR1020200176024A KR20200176024A KR102374665B1 KR 102374665 B1 KR102374665 B1 KR 102374665B1 KR 1020200176024 A KR1020200176024 A KR 1020200176024A KR 20200176024 A KR20200176024 A KR 20200176024A KR 102374665 B1 KR102374665 B1 KR 102374665B1
Authority
KR
South Korea
Prior art keywords
image
broadcast
terminal device
user terminal
selection
Prior art date
Application number
KR1020200176024A
Other languages
English (en)
Other versions
KR102374665B9 (ko
Inventor
이지예
Original Assignee
이지예
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 이지예 filed Critical 이지예
Priority to KR1020200176024A priority Critical patent/KR102374665B1/ko
Application granted granted Critical
Publication of KR102374665B1 publication Critical patent/KR102374665B1/ko
Publication of KR102374665B9 publication Critical patent/KR102374665B9/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/272—Means for inserting a foreground image in a background image, i.e. inlay, outlay
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00—Image enhancement or restoration
    • G06T5/001—Image restoration
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00—Image enhancement or restoration
    • G06T5/50—Image enhancement or restoration by the use of more than one image, e.g. averaging, subtraction
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/10—Segmentation; Edge detection
    • G06T7/194—Segmentation; Edge detection involving foreground-background segmentation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/64—Circuits for processing colour signals
    • H04N9/646—Circuits for processing colour signals for image enhancement, e.g. vertical detail restoration, cross-colour elimination, contour correction, chrominance trapping filters

Abstract

영상합성장치나 프로그램을 사용하지 않더라고 사용자의 선택에 따라 다양한 테마의 방송용 배경영상을 생성하고, 이를 이용하여 개인방송을 위한 방송영상을 생성할 수 있는 방송영상 생성방법 및 이를 위한 방송영상 생성시스템이 제공된다. 방송영상 생성방법은 사용자가 원하는 방송용 배경영상을 쉽고 빠르게 제작하고, 이를 이용하여 개인방송을 위한 방송영상을 제작할 수 있어 개인방송 제작의 편리성 및 효율성을 높일 수 있다.

Description

개인방송을 위한 방송영상 생성방법 및 이를 위한 방송영상 생성시스템{Method and system for generating broadcast video for personal broadcasting}
본 발명은 방송영상 생성방법으로, 특히 사용자의 선택에 따라 다양한 테마의 방송용 배경영상을 생성하고, 이를 이용하여 개인방송을 위한 방송영상을 생성할 수 있는 방송영상 생성방법 및 이를 위한 방송영상 생성시스템에 관한 것이다.
일반적으로 방송은 영상과 음성의 데이터를 공중으로 방송을 송출하는 것으로, 대부분 불특정 다수가 시청하도록 실시된다. 이러한 방송에는 영상을 생성하고 송출하는 방송을 비롯해서 영상을 중계하는 방송도 있으며, 이에 공중파 방송, 케이블TV, 유선방송, 종합편성방송 등 다양한 방송이 실시되고 있다. 이러한 방송들은 대부분 미디어를 생성하고 송출하는 주체가 대부분 거대한 기업에 해당되는 방송이 주류를 이루고 있다.
근래들어 인터넷 네트워크 환경이 좋아지면서, 네트워크 수단을 이용한 개인 인터넷방송이 확대되고 있다. 즉 개인들이 일반적으로 사용하고 있는 컴퓨터단말기를 이용하여 영상을 촬영하거나 컴퓨터 단말기에서 실행하는 내용을 방송의 소재로 이용하여 생성하고, 이를 송출하고 있다. 이러한 인터넷방송은 다수의 개인들이 각자 개성에 따라 생성하고 시행하기 때문에 일반적인 대중성을 갖지는 못하더라도 특정한 공감대를 형성하는 많은 시청자를 확보하곤 한다.　
상술한 인터넷방송을 위하여 종래에는 별도의 스튜디오에서 영상을 촬영하여 방송용 동영상을 제작하고, 제작된 동영상을 인터넷 방송플랫폼을 통해 전송하는 구조로 되어 있다.
종래의 인터넷방송용 동영상을 제작함에 있어 촬영기기를 통해 입력되는 아날로그 동영상을 디지털 동영상으로 변환한 뒤, 디지털 동영상에 배경을 합성하거나, 각종 특수효과를 부가하여 최종 방송용 동영상을 제작하는 방식이 이용되고 있다. 또한, 종래에는 별도의 전문인력, 예컨대 연출자나 편집자가 촬영된 영상을 편집의도에 맞게 방송용 동영상을 편집하는 방식이 이용되고 있다.
이와 같이, 종래의 방송용 동영상 제작 및 편집에는 고가의 장비와 많은 시간 및 인력이 필요하게 되며, 인터넷방송 제작에 많은 제약이 있다.
이에, 이러한 제약을 보완하기 위하여 크로마키(chroma-key) 기법 등을 이용하여 배경화면과 방송진행자의 모습을 합성하여 방송용 동영상을 제작하는 방식이 사용되고 있다.
그러나, 기존의 크로마키 기법을 이용하여 영상을 합성하는 경우에도, 고가의 영상합성장치 또는 프로그램과 이를 이용하여 영상을 합성할 수 있는 전문 편집인력이 요구되는 문제가 있다.
본 발명은 상술한 문제점을 해결하기 위한 것으로, 영상합성장치나 프로그램을 사용하지 않더라고 사용자의 선택에 따라 다양한 테마의 방송용 배경영상을 생성하고, 이를 이용하여 개인방송을 위한 방송영상을 생성할 수 있는 방송영상 생성방법 및 이를 위한 방송영상 생성시스템을 제공하고자 하는 데 있다.
본 발명의 일 실시예에 따른 방송영상 생성방법은, 사용자 단말장치로부터 전송된 선택정보에 따라 하나 이상의 선택이미지를 추출하는 단계; 상기 사용자 단말장치에서 전송된 촬영영상에서 하나 이상의 객체를 추출하고, 상기 객체와 상기 선택이미지를 합성하는 단계; 상기 사용자 단말장치에서 전송된 보정요청에 따라 합성이미지를 보정하는 단계; 및 보정된 이미지에서 객체를 제거하여 배경영상을 생성하는 단계를 포함한다.
본 발명의 일 실시에에 따른 방송영상 생성시스템은, 유/무선 네트워크를 통해 서로 연결된 영상서버, 사용자 단말장치 및 방송서버를 포함한다.
여기서, 상기 영상서버는, 상기 사용자 단말장치로부터 전송된 선택정보에 기초하여 배경영상을 생성하고, 상기 사용자 단말장치로부터 전송된 촬영영상과 상기 배경영상을 합성하여 사용자의 개인방송을 위한 방송영상을 생성하는 것을 특징으로 한다.
본 발명의 방송영상 생성방법 및 시스템은, 크로마키 등과 같은 별도의 영상제작설비나 복잡한 영상편집프로그램 없이 사용자가 원하는 방송용 배경영상을 쉽고 빠르게 제작하고, 이를 이용하여 개인방송을 위한 방송영상을 제작할 수 있어, 개인방송 제작의 편리성 및 효율성을 높일 수 있다.
도 1은 본 발명의 실시예에 따른 방송영상 생성시스템을 나타내는 도면이다.
도 2는 도 1의 이미지 보정부의 구성을 나타내는 도면이다.
도 3은 본 발명의 실시예에 따른 방송영상 생성방법을 나타내는 도면이다.
도 4는 도 3의 이미지 보정단계를 나타내는 도면이다.
도 5a 내지 도 5c는 본 발명의 방송영상 생성의 실시예들을 나타내는 도면들이다.
도 6은 종래의 방송영상과 본 발명의 방송영상의 실시예를 나타내는 도면이다.
본 명세서 및 청구범위에서 사용되는 용어는 본 발명의 다양한 실시 예들에서의 기능을 고려하여 일반적인 용어들을 선택하였다. 하지만, 이러한 용어들은 당 분야에 종사하는 기술자의 의도나 법률적 또는 기술적 해석 및 새로운 기술의 출현 등에 따라 달라질 수 있다. 또한, 일부 용어는 출원인이 임의로 선정한 용어일 수 있다. 이러한 용어에 대해서는 본 명세서에서 정의된 의미로 해석될 수 있으며, 구체적인 용어 정의가 없으면 본 명세서의 전반적인 내용 및 당해 기술 분야의 통상적인 기술 상식을 토대로 해석될 수도 있다.
또한, 본 명세서에 첨부된 각 도면에 기재된 동일한 참조 번호 또는 부호는 실질적으로 동일한 기능을 수행하는 부품 또는 구성요소를 나타낸다. 설명 및 이해의 편의를 위해서 서로 다른 실시 예들에서도 동일한 참조번호 또는 부호를 사용하여 설명하도록 한다. 즉, 복수의 도면에서 동일한 참조 번호를 가지는 구성 요소를 모두 도시하고 있다고 하더라도, 복수의 도면들이 하나의 실시 예를 의미하는 것은 아니다.
또한, 본 명세서 및 청구범위에서는 구성요소들 간의 구별을 위하여 '제1', '제2' 등과 같이 서수를 포함하는 용어가 사용될 수 있다. 이러한 서수는 동일 또는 유사한 구성 요소들을 서로 구별하기 위하여 사용하는 것이며, 이러한 서수 사용으로 인하여 용어의 의미가 한정 해석되어서는 안될 것이다. 일 예로, 이러한 서수와 결합된 구성 요소는 그 숫자에 의해 사용 순서나 배치 순서 등이 제한 해석되어서는 안된다. 필요에 따라서는, 각 서수들은 서로 교체되어 사용될 수도 있다.
본 명세서에서 단수의 표현은 문맥상 명백하게 다름을 뜻하지 않는 한, 복수의 표현을 포함한다. 본 출원에서, '포함하다' 또는 '구성하다' 등의 용어는 명세서 상에 기재된 특성, 숫자, 단계, 동작, 구성 요소, 부품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특성들이나 숫자, 단계, 동작, 구성 요소, 부품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.
또한, 본 발명의 실시 예에서, 어떤 부분이 다른 부분과 연결되어 있다고 할 때, 이는 직접적인 연결뿐 아니라, 다른 매체를 통한 간접적인 연결의 경우도 포함한다. 또한 어떤 부분이 어떤 구성 요소를 포함한다는 의미는, 특별히 반대되는 기재가 없는 한 다른 구성 요소를 제외하는 것이 아니라 다른 구성 요소를 더 포함할 수 있다는 것을 의미한다.
도 1은 본 발명의 실시예에 따른 방송영상 생성시스템을 나타내는 도면이고, 도 2는 도 1의 이미지 보정부의 구성을 나타내는 도면이다.
도면을 참조하면, 본 실시예의 방송영상 생성시스템(10)은 유/무선 네트워크(400)를 통해 서로 연결된 영상서버(100), 사용자 단말장치(200) 및 방송서버(300)를 포함할 수 있다.
영상서버(100)는 사용자 단말장치(200)의 요청에 따라 소정 테마(theme)를 갖는 배경영상을 생성할 수 있다. 또한, 영상서버(100)는 기 생성된 배경영상을 이용하여 사용자의 개인방송을 위한 방송영상을 제작할 수 있다. 영상서버(100)는 배경영상 또는 방송영상을 사용자 단말장치(200) 또는 방송서버(300)로 전송할 수 있다.
사용자 단말장치(200)는 사용자의 개인방송 제작을 위한 장치로, 디스플레이(미도시), 카메라(미도시), 마이크나 스피커 등의 음향수단(미도시), 키보드나 마우스 등의 입력수단(미도시), 소정의 영상프로그램이 탑재된 본체(미도시) 등으로 구성된 컴퓨터 장치, 예컨대 PC, 노트PC, 스마트 폰 등일 수 있다.
사용자 단말장치(200)는 영상서버(100)로부터 소정의 배경영상을 포함하는 방송영상을 제공받을 수 있다. 사용자 단말장치(200)는 수신된 방송영상에 자막 등을 포함하는 편집을 하여 편집된 방송영상을 생성할 수 있다.
방송서버(300)는 다수의 시청자들에게 사용자의 방송영상을 배포할 수 있는 플랫폼 또는 장치로, 예컨대 유튜브 또는 아프리카TV의 플랫폼 또는 서버일 수 있다.
방송서버(300)는 영상서버(100)에서 방송영상을 제공받아 다수의 시청자들에게 배포하거나 또는 사용자 단말장치(200)로부터 편집된 방송영상을 제공받아 다수의 시청자들에게 배포할 수 있다.
영상서버(100)는 이미지 추출부(110), 합성이미지 생성부(120), 이미지 보정부(130), 공간이미지 저장부(140), 소품이미지 저장부(150) 및 방송영상 생성부(160)를 포함할 수 있다.
이미지 추출부(110)는 사용자 단말장치(200)로부터 전송된 선택정보에 기초하여 공간이미지 저장부(140) 또는 소품이미지 저장부(150)에 저장된 다수의 공간이미지(I_a) 또는 다수의 소품이미지(I_b) 중 하나 이상을 선택하여 선택이미지로 추출할 수 있다. 이미지 추출부(110)에서 추출되는 공간이미지(I_a) 및 소품이미지(I_b)는 2차원 이미지일 수 있다.
합성이미지 생성부(120)는 사용자 단말장치(200)에서 전송된 촬영영상과 이미지 추출부(110)에서 추출된 선택이미지를 합성하여 합성이미지를 생성할 수 있다.
합성이미지 생성부(120)는 촬영영상에서 배경을 제거하여 하나 이상의 객체를 추출할 수 있다. 그리고, 추출된 하나 이상의 객체와 선택이미지를 합성하여 합성이미지를 생성할 수 있다.
여기서, 사용자 단말장치(200)로부터 제공되는 촬영영상은 사용자의 방송제작을 위한 영상, 다시 말해 연속적인 프레임(frame)을 갖는 동영상 형태일 수 있다. 이러한 촬영영상에는 영상뿐만 아니라 사용자의 음성 등이 포함될 수 있ㄷ. 합성이미지 생성부(120)는 상기 촬영영상의 적어도 1프레임에서 객체를 추출하고, 이를 선택이미지와 합성할 수 있다.
이미지 보정부(130)는 사용자 단말장치(200)로부터의 보정요청에 기초하여 객체와 선택이미지가 합성된 합성이미지를 보정하고, 보정된 합성이미지로부터 배경영상을 생성할 수 있다. 예컨대, 합성이미지의 선택이미지는 방송영상의 배경영상으로 사용되는 이미지일 수 있다. 따라서, 이미지 보정부(130)는 선택이미지의 배치정보, 컬러정보 및 깊이정보 중 적어도 하나를 보정함으로써, 선택이미지로부터 배경영상을 생성할 수 있다.
이미지 보정부(130)는 배치정보 보정부(131), 컬러정보 보정부(132), 깊이정보 보정부(133) 및 배경영상 생성부(135)를 포함할 수 있다.
배치정보 보정부(131)는 객체와 선택이미지 간의 배치정보를 보정할 수 있다. 배치정보는 객체와 선택이미지 간 전면배치, 후면배치 또는 중첩배치와 같은 배치순서, 객체와 선택이미지 각각의 배치위치 또는 크기정보를 포함할 수 있다.
컬러정보 보정부(132)는 선택이미지의 컬러정보를 보정할 수 있다. 컬러정보는 선택이미지의 색상, 명도, 채도, 선명도, 컬러효과 등을 포함할 수 있다.
깊이정보 보정부(133)는 선택이미지의 깊이정보를 보정할 수 있다. 깊이정보는 선택이미지의 거리감, 입체감 등을 포함할 수 있다.
배경영상 생성부(135)는 배치정보, 컬러정보 및 깊이정보 중 적어도 하나가 보정된 선택이미지를 포함하는 합성이미지로부터 방송용 배경영상을 생성할 수 있다. 배경영상 생성부(135)는 보정된 합성이미지에 포함된 객체를 제거하고, 객체가 제거된 합성이미지로부터 배경영상을 생성할 수 있다.
공간이미지 저장부(140)에는 다양한 테마를 갖는 방송용 공간에 대한 다수의 공간이미지(I_a)가 저장될 수 있다. 소품이미지 저장부(150)에는 다양한 테마를 갖는 방송용 소품에 대한 다수의 소품이미지(I_b)가 저장될 수 있다. 이에, 전술된 이미지 추출부(110)는 사용자 단말장치(200)의 선택정보에 따라 다수의 공간이미지(I_a) 또는 다수의 소품이미지(I_b) 중 하나 이상의 이미지를 선택하고, 선택된 이미지를 선택이미지로 추출하여 출력할 수 있다.
방송영상 생성부(160)는 이미지 보정부(130)에서 생성된 배경영상과 사용자 단말장치(200)로부터 전송된 촬영영상으로부터 사용자의 방송영상을 생성할 수 있다. 방송영상 생성부(160)는 촬영영상에서 배경을 제거할 수 있다. 이어, 배경이 제거된 촬영영상에 이미지 보정부(130)에서 생성된 배경영상을 합성하여 방송영상을 생성할 수 있다. 방송영상은 사용자 단말장치(200)의 요청에 따라 네트워크(400)를 통해 사용자 단말장치(200) 또는 방송서버(300)로 전송될 수 있다.
여기서, 촬영영상은 앞서 설명한 바와 같이 연속적인 프레임을 갖는 동영상일 수 있다. 따라서, 방송영상 생성부(160)에서 생성된 방송영상은 촬영영상의 객체와 사용자의 선택에 따라 생성된 배경영상을 포함하는 동영상으로 생성될 수 있다.
상술한 바와 같이, 본 실시예의 영상서버(100)는 사용자 단말장치(200)로부터 전송된 사용자의 선택정보에 기초하여 다양한 테마의 다수의 이미지 중 적어도 하나를 이용한 배경영상을 생성할 수 있다. 그리고, 생성된 배경영상을 이용하여 사용자의 방송영상을 생성할 수 있다.
따라서, 본 발명은 크로마키 등과 같은 별도의 영상제작설비나 복잡한 영상편집프로그램 없이 사용자가 원하는 방송용 배경영상을 쉽고 빠르게 제작할 수 있어 방송영상의 제작 편리성 및 효율성을 높일 수 있다.
한편, 영상서버(100)에서 생성된 방송영상은 사용자 단말장치(200)의 전송요청에 기초하여 사용자 단말장치(200) 또는 방송서버(300)로 전송될 수 있다.
사용자 단말장치(200)의 요청에 따라, 영상서버(100)에서 사용자 단말장치(200)로 방송영상이 전송되면, 사용자 단말장치(200)는 수신된 방송영상에 자막이나 효과 등을 포함되도록 편집할 수 있다. 그리고, 편집된 방송영상은 방송서버(300)를 통해 다수의 시청자들에게 사용자의 개인방송으로 제공될 수 있다.
또한, 본 발명의 다른 실시예에 따라 영상서버(100)는 사용자 단말장치(200)로 배경영상을 전송할 수도 있다. 이때, 사용자 단말장치(200)는 수신된 배경영상을 이용하여 소정 테마의 방송영상을 생성할 수 있다.
사용자 단말장치(200)는 카메라를 통해 촬영되는 영상에서 객체를 제외한 영역, 즉 배경을 제거하고, 제거된 배경에 영상서버(100)에서 전송된 배경영상을 포함시켜 방송영상을 생성할 수 있다. 이러한 방송영상은 방송서버(300)로 전송되어 다수의 시청자들에게 사용자의 개인방송으로 제공될 수 있다.
사용자 단말장치(200)의 요청에 따라 영상서버(100)에서 방송서버(300)로 방송영상이 전송되면, 방송서버(300)는 이를 다수의 시청자들에게 사용자의 개인방송으로 제공할 수 있다.
도 3은 본 발명의 실시예에 따른 방송영상 생성방법을 나타내는 도면이고, 도 4는 도 3의 이미지 보정단계를 나타내는 도면이다.
이하에서는, 설명의 편의를 위하여, 도 3 및 도 4와 함께 도 1과 도 2를 참조하여, 본 실시예의 방송영상 생성방법을 설명하기로 한다.
먼저, 영상서버(100)는 사용자 단말장치(200)로부터 촬영영상과 선택정보를 수신할 수 있다(S10).
촬영영상에는 객체, 예컨대 사용자가 포함될 수 있다. 이러한 촬영영상은 다수의 연속적인 프레임을 갖는 동영상 형태를 가질 수 있다. 이러한 촬영영상은 도 6의 (a)에 도시된 바와 같이, 별도의 배경이 꾸며지지 않은 공간, 예컨대 사용자의 방이나 사무실 등에서 촬영된 방송제작을 위한 영상일 수 있다. 촬영영상에는 객체에 대한 영상데이터와 함께 소리 등의 음성데이터가 포함될 수 있다.
선택정보는 제작하고자 하는 방송영상에 대한 배경정보를 포함할 수 있다. 선택정보는 방송공간에 대한 형태 또는 컬러 등의 정보, 상기 방송공간에 배치된 소품의 형태, 컬러, 개수 등의 정보 등을 포함할 수 있다.
여기서, 영상서버(100)는 사용자 단말장치(200)에 다양한 테마의 다수의 배경이미지, 예컨대 다수의 공간이미지(I_a) 또는 다수의 소품이미지(I_b)에 대한 정보를 제공할 수 있다. 이에, 사용자 단말장치(200)는 다수의 공간이미지(I_a) 소품이미지(I_b) 중 적어도 하나를 선택하고, 이를 선택정보로 영상서버(100)에 전송할 수 있다.
다음으로, 영상서버(100)의 이미지 추출부(110)는 사용자 단말장치(200)에서 전송된 선택정보에 따라 공간이미지 저장부(140) 또는 소품이미지 저장부(150)로부터 하나 이상의 공간이미지(I_a) 또는 소품이미지(I_b)를 선택할 수 있다. 그리고, 선택된 공간이미지(I_a) 또는 소품이미지(I_b)를 포함하여 선택이미지를 출력할 수 있다. 또한, 영상서버(100)의 합성이미지 생성부(120)는 촬영영상에서 배경을 제거하여 하나 이상의 객체를 추출할 수 있다(S20).
앞서 설명한 바와 같이, 촬영영상은 다수의 프레임을 갖는 동영상 형태이므로, 합성이미지 생성부(120)는 상기 촬영영상의 적어도 하나의 프레임에서 객체를 추출할 수 있다.
계속해서, 합성이미지 생성부(120)는 추출된 하나 이상의 객체와 선택이미지를 합성하여 합성이미지를 생성할 수 있다(S30).
여기서, 객체와 선택이미지는 2차원 형태의 이미지일 수 있다. 따라서, 합성이미지 생성부(120)에 의해 생성된 합성이미지는 2차원 평면에서 2개 이상의 이미지가 중첩된 형태를 가질 수 있다.
다음으로, 이미지 보정부(130)는 사용자 단말장치(200)의 보정요청에 따라 합성이미지의 배치, 컬러, 깊이값 중 적어도 하나를 보정하여 보정된 이미지를 생성할 수 있다(S40).
앞서 설명한 바와 같이, 합성이미지는 하나 이상의 객체와 선택이미지가 평면 상에 중첩되어 합성되므로 이에 객체와 선택이미지는 구별되기 어려운 형태일 수 있다.
이에, 이미지 보정부(130)의 배치정보 보정부(131)는 합성이미지 내의 객체와 선택이미지가 구별되도록 객체와 선택이미지 간 배치순서, 예컨대 객체를 중심으로 하여 선택이미지의 배치순서를 보정할 수 있다(S100).
도 5a에 도시된 바와 같이, 배치정보 보정부(131)는 1개의 선택이미지, 즉 제1선택이미지(Image1)와 객체(Object) 간의 배치순서를 보정할 수 있다. 이때, 제1선택이미지(Image1)는 방송영상에서 배경을 형성하게 되므로, 객체(Object)의 후면에 배치되도록 배치순서가 보정될 수 있다. 따라서, 객체(Object)와 제1선택이미지(Image1)의 중첩영역은 객체(Object)에 의해 가려지게 된다.
또한, 도 5b에 도시된 바와 같이, 배치정보 보정부(131)는 객체(Object)와 2개의 선택이미지, 예컨대 제1선택이미지(Image1) 및 제2선택이미지(Image2) 간의 배치순서를 보정할 수 있다. 마찬가지로, 제1선택이미지(Image1) 및 제2선택이미지(Image2)는 배경을 형성하는 것이므로, 객체(Object)의 후면에 배치되도록 보정될 수 있다. 따라서, 객체(Object)와 제1선택이미지(Image1) 및 객체(Object)와 제2선택이미지(Image2)의 중첩영역은 객체(Object)에 의해 가려질 수 있다.
또한, 도 5c에 도시된 바와 같이, 배치정보 보정부(131)는 객체(Object)와 제1선택이미지(Image1)가 중첩되도록 배치순서를 보정하고, 객체(Object) 또는 제1선택이미지(Image1)의 후면에 제2선택이미지(Image2)가 배치되도록 배치순서를 보정할 수 있다. 따라서, 객체(Object)와 일부 중첩되는 제1선택이미지(Image1)는 객체(Object)의 전면에 배치되어 객체(Object)의 일부영역을 가리게 되고, 제2선택이미지(Image2)는 제1선택이미지(Image1) 및 객체(Object)의 후면에 배치되어 이들에 의해 가려질 수 있다.
상술한 바와 같이, 본 실시예의 이미지 배치정보 보정은 객체(Object)와 제1선택이미지(Image1) 또는 제2선택이미지(Image2) 간의 배치순서를 보정함으로써, 객체(Object)와 선택이미지들 간이 구별되도록 할 수 있다.
그리고, 이미지 보정부(130)는 배치정보가 보정된 합성이미지를 사용자 단말장치(200)로 제공하고, 사용자 단말장치(200)로부터 이에 대한 피드백, 즉 보정요청을 수신할 수 있다(S200).
다음으로, 이미지 보정부(130)의 컬러정보 보정부(132)는 사용자 단말장치(200)로부터 전송된 보정요청에 따라 합성이미지의 선택이미지에 대한 컬러정보를 보정할 수 있다(S300).
도 5a 내지 도 5c에 도시된 바와 같이, 컬러정보 보정부(132)는 제1선택이미지(Image1) 및 제2선택이미지(Image2)의 색상, 명도, 채도, 선명도 등의 컬러를 보정할 수 있다.
또한, 컬러정보 보정부(132)는 객체와 선택이미지 또는 복수의 선택이미지 간 경계영역의 컬러효과를 보정할 수 있다.
예컨대, 컬러정보 보정부(132)는 객체(Object)와 제1선택이미지(Image1) 또는 객체(Object)와 제2선택이미지(Image2)의 경계영역, 즉 제1경계선(BL1)을 중심으로 선명도를 증가시키거나 그래디에이션(gradation) 효과를 적용할 수 있다. 또한, 컬러정보 보정부(132)는 제1선택이미지(Image1)와 제2선택이미지(Image2) 간 경계영역, 즉 제2경계선(BL2)을 중심으로 선명도를 증가시키거나 그래디에이션 효과를 적용할 수 있다.
이어, 이미지 보정부(130)의 깊이정보 보정부(133)는 사용자 단말장치(200)로부터 전송된 보정요청에 따라 배치정보 및 컬러정보가 보정된 합성이미지의 선택이미지에 대한 거리감, 입체감, 깊이값 등의 깊이정보를 보정할 수 있다(S400). 이러한 깊이정보 보정부(133)의 깊이정보 보정에 따라 선택이미지에 대한 시점이 변경되될 수 있다.
예컨대, 도 6의 (b)에서와 같이, 깊이정보 보정부(133)는 선택이미지의 공간이미지(I_a)에 대하여 거리감, 입체감, 깊이값 등을 보정함으로써, 공간이미지(I_a)의 시점을 객체(Object)의 전방시점으로 변경할 수 있다. 따라서, 선택이미지의 공간이미지(I_a)는 객체(Object)의 후방으로 소정 깊이값을 갖는 입체공간의 형태로 변환될 수 있다.
또한, 도 6의 (C)에서와 같이, 깊이정보 보정부(133)는 선택이미지의 공간이미지(I_a) 및 소품이미지(I_b)에 대하여 거리감, 입체감, 깊이값 등을 보정함으로써, 공간이미지(I_a) 및 소품이미지(I_b)의 시점을 객체(Object)의 전방시점으로 변경할 수 있다. 따라서, 공간이미지(I_a)는 객체(Object)의 후방으로 소정 깊이값을 갖는 입체공간의 형태로 변환될 수 있다. 또한, 소품이미지(I_b)는 객체(Object)의 후방으로 거리감을 갖는 형태로 변환될 수 있다.
예컨대, 도 6의 (C)에서 공간이미지(I_a)에 의해 형성된 입체공간의 좌측벽에 배치된 소품이미지(I_b)인 액자는 깊이정보 보정부(133)에 의해 깊이정보가 보정됨으로써, 그 형태가 객체(Object)의 후방으로 갈수록 폭이 좁아지는 사다리꼴이 형태로 변환될 수 있다.
한편, 상술한 본 실시예에서는 합성이미지에 대하여 배치정보, 컬러정보 및 깊이정보의 순서로 이미지를 보정하는 것을 예로 들어 설명하였으나, 본 발명은 이에 제한되지는 않는다. 에컨대 합성이미지에 대한 배치정보의 보정 후, 배치정보가 보정된 합성이미지에 대한 컬러정보 및 깊이정보 보정이 동시에 이루어질 수도 있다.
다음으로, 이미지 보정부(130)의 배경영상 생성부(135)는 배치정보, 컬러정보 및 깊이정보가 보정된 합성이미지로부터 방송을 위한 배경영상을 생성할 수 있다(S50).
배경영상 생성부(135)는 보정된 합성이미지에서 객체를 제거할 수 있다. 그리고, 객체가 제거된 합성이미지를 배경영상으로 생성할 수 있다. 여기서, 배경영상에서 객체가 위치했던 영역은 이의 후면으로 배치되도록 설정된 선택이미지가 표시될 수 있다.
영상서버(100)는 생성된 배경영상을 사용자 단말장치(200)로 전송할 수 있다. 사용자 단말장치(200)는 수신한 배경영상의 추가 보정요청을 영상서버(100)로 전송하거나 또는 배경영상을 이용하여 방송영상의 제작을 요청할 수 있다.
사용자 단말장치(200)로부터 방송영상 제작이 요청되면, 영상서버(100)의 방송영상 생성부(160)는 사용자 단말장치(200)에서 전송된 촬영영상과, 이미지 보정부(130)의 배경영상 생성부(135)에서 생성된 배경영상으로부터 방송영상을 생성할 수 있다(S60).
방송영상 생성부(160)는 촬영영상에서 객체를 제외한 나머지 부분, 예컨대 배경부분을 제거할 수 있다. 그리고, 기 생성된 배경영상을 배경이 제거된 촬영영상과 합성하여 방송영상을 생성할 수 있다.
여기서, 배경영상은 전술한 이미지 보정부(130)에 의해 하나 이상의 선택이미지의 배치순서가 보정된 상태일 수 있다. 따라서, 촬영영상의 객체가 배경영상에 합성되더라도 배경영상에 의해 촬영영상이 가려지지는 않을 것이다.
또한, 배경영상은 이미지 보정부(130)에 의해 하나 이상의 선택이미지의 컬러정보 및 깊이정보가 보정된 상태일 수 있다. 따라서, 배경영상은 촬영영상의 객체로부터 후방 시점에 입체적으로 배치되도록 구성될 수 있으며, 사용자가 원하는 형태의 컬러를 가질 수 있다.
영상서버(100)는 생성된 방송영상을 사용자 단말장치(200)로 전송할 수 있다. 사용자 단말장치(200)는 영상서버(100)로부터 전송된 방송영상에 자막 등을 포함시켜 편집하고, 편집된 방송영상을 방송서버(300)로 전송하여 방송서버(300)를 통해 다수의 시청자들에게 사용자의 개인방송으로 제공할 수 있다.
또한, 본 발명의 다른 실시에에 따라 영상서버(100)는 생성된 방송영상을 방송서버(300)로 전송하고, 방송서버(300)는 이를 다수의 시청자들에게 사용자의 개인방송으로 제공할 수도 있다.
이상에서 설명한 바와 같이, 본 발명에 따른 방송영상 생성방법은, 사용자의 선택에 따라 다양한 테마의 다수의 이미지 중 적 적어도 하나의 공간이미지와 소품이미지를 포함하는 선택이미지를 추출하고, 이의 배치정보, 컬러정보 및 깊이정보 중 적어도 하나를 보정함으로써 방송제작에 필요한 배경영상을 생성할 수 있다. 그리고, 이러한 배경영상을 이용하여 방송영상을 제작하고, 이를 방송서버(300)를 통해 다수의 시청자들에게 개인방송으로 제공할 수 있다. 따라서, 본 발명은 크로마키 등과 같은 영상합성장치를 이용하지 않더라도 사용자가 원하는 방송배경 및 이와 합성된 방송영상을 생성할 수 있어, 방송제작의 편리성 및 효율성을 높일 수 있다.
또한, 상술한 본 발명의 방송영상 생성방법은, 이를 수행하기 위한 프로그램이 저장된 컴퓨터 판독 가능한 기록매체, 상기 기록매체에 저장되어 구동되는 프로그램 또는 어플리케이션으로 구현될 수 있다. 이에, 본 발명의 사용자 단말장치(200) 및 영상서버(100)에는 전술된 방송영상 생성방법을 수행하기 위한 프로그램 또는 어플리케이션이 탑재되고, 이의 구동에 따라 사용자가 원하는 방송용 배경영상 및 이를 통한 사용자의 방송영상 제작 등의 동작이 수행될 수 있다.
이상, 본 발명의 일 실시 예에 대하여 설명하였으나, 해당 기술 분야에서 통상의 지식을 가진 자라면 특허청구범위에 기재된 본 발명의 사상으로부터 벗어나지 않는 범위 내에서, 구성 요소의 부가, 변경, 삭제 또는 추가 등에 의해 본 발명을 다양하게 수정 및 변경시킬 수 있을 것이며, 이 또한 본 발명의 권리범위 내에 포함된다고 할 것이다.
또한, 전술된 용어들은 본 발명에서의 기능을 고려하여 정의된 용어들로서 이는 사용자, 운용자의 의도 또는 관례에 따라 달라질 수 있다. 그러므로, 이러한 용어들에 대한 정의는 본 명세서 전반에 걸친 내용을 토대로 하여 내려져야 할 것이다.
10: 배경영상 생성시스템 100: 배경영상서버
110: 이미지 추출부 120: 합성이미지 생성부
130: 이미지 보정부 131: 배치정보 보정부
132: 컬러정보 보정부 133: 깊이정보 보정부
135: 배경영상 생성부 140: 공간이미지 저장부
150: 소품이미지 저장부 160: 방송영상 생성부
200: 사용자 단말장치 300: 방송서버

Claims (12)

  1. 사용자 단말장치로부터 전송된 선택정보에 따라 제1선택이미지와 제2선택이미지를 포함하는 선택이미지를 추출하는 단계;
    상기 사용자 단말장치에서 전송된 촬영영상에서 하나 이상의 객체를 추출하고, 상기 객체와 상기 선택이미지를 합성하여 합성이미지를 생성하는 단계;
    상기 합성이미지를 상기 사용자 단말장치로 전송하고, 상기 사용자 단말장치로부터 전송된 보정요청에 따라 상기 합성이미지에서 상기 객체와 상기 선택이미지의 배치순서를 보정하는 단계;
    배치순서가 보정된 합성이미지의 상기 선택이미지에 대한 컬러정보를 보정하는 단계;
    배치순서 및 컬러정보가 보정된 합성이미지의 상기 선택이미지에 대한 깊이정보를 보정하는 단계; 및
    보정된 이미지에서 상기 객체를 제거하여 배경영상을 생성하는 단계를 포함하고,
    상기 객체와 상기 선택이미지의 배치순서를 보정하는 단계는,
    상기 제1선택이미지를 상기 객체의 전면에 배치하고, 상기 제2선택이미지를 상기 제1선택이미지 및 상기 객체의 후면에 배치하여, 상기 제1선택이미지에 의해 상기 객체의 일부영역이 가려지도록 보정하는 단계인 것을 특징으로 하는 방송영상 생성방법.
  2. 삭제
  3. 삭제
  4. 제1항에 있어서,
    상기 컬러정보를 보정하는 단계는,
    상기 선택이미지의 색상, 명도, 채도, 선명도 중 적어도 하나를 보정하는 단계; 및
    상기 객체와 상기 선택이미지 간 경계영역 또는 복수개의 선택이미지 간 경계영역의 컬러효과를 보정하는 단계를 포함하는 것을 특징으로 하는 방송영상 생성방법.
  5. 제1항에 있어서,
    상기 깊이정보를 보정하는 단계는,
    상기 선택이미지의 거리감 또는 입체감을 보정하여 상기 선택이미지에 대한 시점을 변경하는 단계인 것을 특징으로 하는 방송영상 생성방법.
  6. 삭제
  7. 제1항에 있어서,
    상기 배경영상을 상기 사용자 단말장치로 전송하는 단계; 및
    상기 사용자 단말장치로부터 수신된 방송영상 제작요청에 따라 상기 촬영영상과 상기 배경영상을 합성하여 사용자의 개인방송을 위한 방송영상을 생성하는 단계를 더 포함하는 방송영상 생성방법.
  8. 제7항에 있어서,
    상기 방송영상을 생성하는 단계는,
    상기 촬영영상에서 배경을 제거하는 단계; 및
    배경이 제거된 촬영영상에 상기 배경영상을 합성하여 상기 방송영상을 생성하는 단계를 포함하는 것을 특징으로 하는 방송영상 생성방법.
  9. 제7항에 있어서,
    상기 방송영상을 상기 사용자 단말장치로 전송하는 단계;
    상기 사용자 단말장치에서 상기 방송영상을 편집하는 단계; 및
    편집된 방송영상을 방송서버로 전송하여 다수의 시청자들에게 제공하는 단계를 더 포함하는 것을 특징으로 하는 방송영상 생성방법.
  10. 제1항에 있어서,
    상기 제1선택이미지 및 제2선택이미지 각각은,
    상기 선택정보에 기초하여 공간이미지 저장부로부터 추출되는 방송용 공간에 대한 하나 이상의 공간이미지와, 상기 선택정보에 기초하여 소품이미지 저장부로부터 추출되는 방송용 소품에 대한 하나 이상의 소품이미지를 포함하는 것을 특징으로 하는 방송영상 생성방법.
  11. 제1항, 제4항, 제5항 및 제7항 내지 제10항 중 어느 한 항에 따른 방송영상 생성방법을 위한 방송영상 생성시스템으로,
    상기 방송영상 생성시스템은,
    유/무선 네트워크를 통해 서로 연결된 영상서버, 사용자 단말장치 및 방송서버를 포함하고,
    상기 영상서버는,
    상기 사용자 단말장치로부터 전송된 선택정보에 기초하여 배경영상을 생성하고, 상기 사용자 단말장치로부터 전송된 촬영영상과 상기 배경영상을 합성하여 사용자의 개인방송을 위한 방송영상을 생성하는 것을 특징으로 하는 방송영상 생성시스템.
  12. 제11항에 있어서,
    상기 영상서버는,
    상기 선택정보에 기초하여 하나 이상의 공간이미지와 소품이미지를 포함하는 선택이미지를 추출하는 이미지 추출부;
    상기 촬영영상에서 하나 이상의 객체를 추출하고, 추출된 객체와 상기 선택이미지를 합성하여 합성이미지를 생성하는 합성이미지 생성부;
    상기 사용자 단말장치의 보정요청에 기초하여 상기 합성이미지의 배치정보, 컬러정보 및 깊이정보 중 적어도 하나를 보정하고, 보정된 합성이미지로부터 배경영상을 생성하는 이미지 보정부; 및
    상기 촬영영상과 상기 배경영상을 합성하여 상기 방송영상을 생성하는 방송영상 생성부를 포함하는 것을 특징으로 하는 방송영상 생성시스템.

KR1020200176024A 2020-12-16 2020-12-16 개인방송을 위한 방송영상 생성방법 및 이를 위한 방송영상 생성시스템 KR102374665B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020200176024A KR102374665B1 (ko) 2020-12-16 2020-12-16 개인방송을 위한 방송영상 생성방법 및 이를 위한 방송영상 생성시스템

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020200176024A KR102374665B1 (ko) 2020-12-16 2020-12-16 개인방송을 위한 방송영상 생성방법 및 이를 위한 방송영상 생성시스템

Publications (2)

Publication Number Publication Date
KR102374665B1 true KR102374665B1 (ko) 2022-03-15
KR102374665B9 KR102374665B9 (ko) 2022-12-08

Family

ID=80816641

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020200176024A KR102374665B1 (ko) 2020-12-16 2020-12-16 개인방송을 위한 방송영상 생성방법 및 이를 위한 방송영상 생성시스템

Country Status (1)

Country Link
KR (1) KR102374665B1 (ko)

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20110062417A (ko) * 2009-12-03 2011-06-10 주식회사바텍 고해상도 파노라마 영상 획득 방법 및 장치
KR101270780B1 (ko) * 2011-02-14 2013-06-07 김영대 가상 강의실 강의 방법 및 장치
KR20140003116A (ko) * 2012-06-29 2014-01-09 에스케이플래닛 주식회사 영상 추출 및 합성 장치, 이의 방법
KR101817145B1 (ko) * 2016-04-12 2018-01-11 (주)지니트 멀티 레이어 기반 크로마키 합성 시스템 및 방법

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20110062417A (ko) * 2009-12-03 2011-06-10 주식회사바텍 고해상도 파노라마 영상 획득 방법 및 장치
KR101270780B1 (ko) * 2011-02-14 2013-06-07 김영대 가상 강의실 강의 방법 및 장치
KR20140003116A (ko) * 2012-06-29 2014-01-09 에스케이플래닛 주식회사 영상 추출 및 합성 장치, 이의 방법
KR101817145B1 (ko) * 2016-04-12 2018-01-11 (주)지니트 멀티 레이어 기반 크로마키 합성 시스템 및 방법

Also Published As

Publication number Publication date
KR102374665B9 (ko) 2022-12-08

Similar Documents

Publication Publication Date Title
US9160938B2 (en) System and method for generating three dimensional presentations
US7689062B2 (en) System and method for virtual content placement
US6335765B1 (en) Virtual presentation system and method
US20130236160A1 (en) Content preparation systems and methods for interactive video systems
KR101817145B1 (ko) 멀티 레이어 기반 크로마키 합성 시스템 및 방법
US9679369B2 (en) Depth key compositing for video and holographic projection
CN104660872A (zh) 一种虚拟场景合成系统及方法
US20110304735A1 (en) Method for Producing a Live Interactive Visual Immersion Entertainment Show
KR101392406B1 (ko) 영상합성기의 크로마키 피사체영상과 배경영상 합성장치 및 방법
US20190394362A1 (en) System and method for augmented reality movie screenings
CN106101576B (zh) 一种增强现实照片的拍摄方法、装置及移动终端
JP2005020607A (ja) 合成画像出力装置および合成画像出力処理プログラム
CN104205795B (zh) 色彩分级预览方法和装置
KR100901111B1 (ko) 삼차원 가상 공간 콘텐츠를 이용한 영상제공시스템
KR102374665B1 (ko) 개인방송을 위한 방송영상 생성방법 및 이를 위한 방송영상 생성시스템
KR101430985B1 (ko) 2d-3d 복합 차원 콘텐츠 파일을 사용하는 복합 차원 콘텐츠 서비스 제공 시스템, 그 서비스 제공 방법
KR101773891B1 (ko) 실시간 환경객체 선택을 통한 합성동영상 재생 시스템 및 컴퓨터 구현 방법
JP2017034354A (ja) 写真撮影遊戯装置、写真シール作成装置、写真撮影遊戯装置の制御方法、及び写真撮影遊戯装置の制御プログラム
CN112153472A (zh) 一种画面特效的生成方法及装置、存储介质及电子设备
KR101373631B1 (ko) 실시간 크로마키 합성 시스템 및 방법
KR101695209B1 (ko) 실시간영상과 크로마키 피사체영상의 합성 제작시스템 및 그 방법
CN116962744A (zh) 网络直播的连麦互动方法、装置及直播系统
JP7167629B2 (ja) ガイドシステム
KR101843024B1 (ko) 실시간 환경객체 선택을 통한 합성동영상 재생 시스템 및 컴퓨터 구현 방법
KR20140104121A (ko) 복합 차원 콘텐츠 제공 시스템, 그 제공 방법 및 복합 차원 콘텐츠 파일

Legal Events

Date Code Title Description
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
G170 Re-publication after modification of scope of protection [patent]