KR20160072817A - 다시점 카메라를 이용한 영상제공 시스템 및 방법 - Google Patents

다시점 카메라를 이용한 영상제공 시스템 및 방법 Download PDF

Info

Publication number
KR20160072817A
KR20160072817A KR1020150179333A KR20150179333A KR20160072817A KR 20160072817 A KR20160072817 A KR 20160072817A KR 1020150179333 A KR1020150179333 A KR 1020150179333A KR 20150179333 A KR20150179333 A KR 20150179333A KR 20160072817 A KR20160072817 A KR 20160072817A
Authority
KR
South Korea
Prior art keywords
view
image
viewpoint
cameras
viewer
Prior art date
Application number
KR1020150179333A
Other languages
English (en)
Inventor
송헌주
Original Assignee
주식회사 아크인터랙티브
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 아크인터랙티브 filed Critical 주식회사 아크인터랙티브
Publication of KR20160072817A publication Critical patent/KR20160072817A/ko
Priority to KR1020160127543A priority Critical patent/KR101759297B1/ko
Priority to KR1020160127542A priority patent/KR101722681B1/ko

Links

Images

Classifications

    • H04N13/0059—
    • H04N13/0055—
    • H04N13/0242—
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236—Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • H04N21/2365—Multiplexing of several video streams

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Studio Devices (AREA)

Abstract

본 발명은 다시점 카메라를 이용한 영상제공 시스템 및 방법에 관한 것으로, 보다 상세하게는 사용자가 직접 공간에 다수의 카메라를 설치 촬영하여 지연 없는 다시점 뷰어를 통해 확인하고, 다수의 카메라로 촬영된 다시점 영상을 미디어 서버에 전송하여 실시간으로 저장 및 공유할 수 있도록 사용자 설치형 다시점 카메라를 이용한 다시점 영상을 제공함으로써, 기존 단방향 중심의 방송에서 다수개의 방송시점을 제공할 수 있고, 사용자들이 다시점으로 방송하고 싶은 공간을 선택하여 다양한 분야에 적용 운영할 수 있는 매우 유용한 발명인 것이다.

Description

다시점 카메라를 이용한 영상제공 시스템 및 방법{System and method for providing movie using multi-viewpoint camera}
본 발명은 다시점 카메라를 이용한 영상제공 시스템 및 방법에 관한 것으로, 더욱 상세하게는 사용자가 직접 공간에 다수의 카메라를 설치 촬영하여 지연 없는 다시점 뷰어를 통해 확인하고, 미디어 서버로 전송하여 실시간 저장 및 공유할 수 있는 사용자 설치형 다시점 카메라를 이용한 영상제공 시스템 및 방법에 관한 것이다.
현실의 공간은 기본적으로 시간이 흐르는 동화상 기반이다. 도 1에 도시된 바와 같이 우리가 현실의 세계에서 고개를 돌려 주변을 보거나 어떠한 피사체를 중심으로 거닐면서 주목해 보는 것이 자연계에 존재하는 두 가지 시점이다.
이러한 현실의 시점과 같은 감상을 제공하는 온라인 인터넷 서비스 또는 독립적으로 동작하는 뷰어를 구현하는 방법은 크게 오브젝트 방식, 영상 방식, 이미지 방식으로 나뉜다.현실 속에 존재하는 3차원 물체를 감상하듯이 가상현실 속에서 보고 싶은 시점으로 양방향 감상을 제공하는 온라인 인터넷 서비스 또는 독립적으로 동작하는 어플리케이션을 구현하는 방법은 크게 오브젝트 방식, 이미지 방식, 영상 방식으로 나뉜다.
오브젝트 방식은 물체를 그대로 형상화한 3차원 축을 가지는 형상 데이터를 3차원 디지털 공간에 구현하고 감상자의 눈처럼 각도를 조정할 수 있는 카메라를 구현하여, 그 카메라의 시점을 통하여 물체를 돌려보게 하거나 카메라를 움직이면 3차원 개체를 현실의 공간과 같이 감상할 수 있게 된다.
이러한 오브젝트 방식의 단점은 3차원 형상과 그 표면의 색상정보를 연산하여 가상의 현실 안에 생성 된 카메라 시점으로 구현하여 보여주기 때문에 자유도는 현실과 같이 높으나 현재의 모바일 기기에서 구현하기에는 무겁다는 단점이 있다. 데이터의 양도 많고 점 선면의 색상 정보와 그림자의 연산 등 낮은 사양의 모바일 기기에서 구현하기에는 단점이 된다.
또한 가상현실 엔진의 기술 발달로 현실에 점점 더 가까운 품질을 구현하게 되나 컴퓨터 연산의 결과물과 현실의 영상 촬영 결과물과의 품질은 다르며 보통의 경우 현실의 공간을 촬영한 실제 영상 결과물이 컴퓨터그래픽 엔진을 이용한 가상현실 엔진보다 더욱 생생한 현장감을 주게 된다.
영상 방식은 텔레비전과 같은 영상 감상 기기에서 다양한 시점을 제공하려는 시도가 많이 진전된 분야이나 다수 영상의 프레임을 정교하고 교합하면서 시점을 바꾸어줄 때 부호화 알고리즘을 통한 부호화 과정의 연산 시간이 소요되므로 지연현상이 나타나는 단점이 있다. 근래의 모바일 기기에서 터치 드래그와 같은 손끝으로 시점 전환이 가능한 지연 없는 다시점 영상뷰어는 부호화 방식으로 구현하기 힘들며 음성이나 영상 콘텐츠의 끊김 현상이 반드시 존재하게 된다.
이미지 방식은 하나의 시간 축에 대하여 구현 가능하나 흐르는 시간 축에 대한 음성과 일치하는 정교한 교합이 가능한 다시점 영상 뷰어는 구현하기 힘들다. 즉, 현실의 품질 그대로 흐르는 시간 축을 구현하는 뷰어는 영상기반의 뷰어로 지연 시간 없이 현실과 같이 즉시 시점을 변환하여 준다면 현실과 가장 가까운 다시점 뷰어가 구현될 수 있을 것이다. 또한 그 다시점 영상 뷰어가 낮은 사양 기기에서도 구현 가능하다면 현실적으로 가장 널리 보급될 수 있는 다시점 뷰어가 될 수 있다.
대한민국 공개특허공보 10-2013-0063281(등록일자 2013년12월05일)
본 발명은 이상과 같은 종래의 문제점을 개선하기 위하여 창출된 것으로서, 다수의 카메라로 영상을 획득하고 그 획득된 다수의 영상을 사용자가 저장, 감상, 비교, 공유하는 장치와 방법에 관한 것으로 사용자는 자신이 촬영하고자 하는 공간에 유선 또는 무선의 카메라 장치를 설치하고, 영상을 저장하기 위하여 동영상 기록 장치에서 흐름 데이터로 존재하고 있는 영상의 데이터를 소리, 물리적 버튼, 휴대용 전화 등의 무선 장치에서 촬영 신호를 주고 스트림 영상의 특정 시간대를 미디어 서버에 전송하여 저장하며, 특정한 길이로 저장된 영상을 다시점을 지연현상 없이 즉각적을 화면 전환을 지원하는 뷰어나 실행 애플리케이션을 통해 공유하는 다시점 카메라를 이용한 영상제공 시스템 및 방법을 제공하는데 그 목적이 있는 것이다.
이와 같은 본 발명의 목적을 달성하기 위한 본 발명에 따른 다시점 카메라를 이용한 영상제공 시스템은, 사용자가 직접 공간에 다수의 카메라를 설치 촬영하여 지연 없는 다시점 뷰어를 통해 확인하고, 다수의 카메라로 촬영된 다시점 영상을 미디어 서버에 전송하여 실시간으로 저장 및 공유할 수 있도록 사용자 설치형 다시점 카메라를 이용한 다시점 영상을 제공하는 것을 특징으로 한다.
본 발명의 상기 시스템은 다수개의 카메라로 구성된 영상 획득부와, 지연 없이 다수 영상을 감상하는 화면과 영상을 저장 및 편집하여 미디어 서버로 전송하는 영상 전송부, 다시점 영상을 저장하는 미디어 서버, 및 시점 영상 애플리케이션이 설치된 감상자 단말을 포함한다.
본 발명의 상기 시스템은, 개인용 다시점 캠 영상 촬영 및 방송 방식으로 적어도 둘 이상의 다시점 캠 또는 카메라와, 컴퓨터 장치, 무선 공유기, 유무선 네트워크, 다시점 영상을 저장하는 미디어 서버, 시점 영상 애플리케이션이 설치된 감상자 단말로 구성된 것을 특징으로 한다.
본 발명의 다른 관점에서 다시점 카메라를 이용한 영상제공 방법은, 사용자가 직접 공간에 다수의 카메라를 설치 촬영하여 지연 없는 다시점 뷰어를 통해 확인하고, 다수의 카메라로 촬영된 다시점 영상을 미디어 서버에 전송하여 실시간으로 저장 및 공유할 수 있도록 사용자 설치형 다시점 카메라를 이용한 다시점 영상을 제공하는 것을 특징으로 한다.
본 발명의 상기 방법은, 1 단계) 감상자 단말을 통해 다시점 영상 애플리케이션을 시작시키는 단계와, 2 단계) 감상자 단말은 다수개의 카메라와 감상자 단말에 애플리케이션 설치되어 있는지 확인하는 단계, 3 단계) 카메라 스트림 영상이 애플리케이션과 연결되어 있는지 확인하는 단계, 4 단계) 감상자 단말에 애플리케이션 화면을 표시하는 단계, 5 단계) 사용자가 소리, 동작, 버튼 등으로 명령을 선택하였는지 확인하는 단계, 6 단계) 미디어 서버로 길이 및 특성 변환된 다시점 영상을 전송 요청하는 단계, 7 단계) 애플리케이션 화면으로 전송받은 다시점 영상을 표시하는 단계, 8 단계) 사용자가 공유하기를 선택하였는지 확인하는 단계, 및 9 단계) 애플리케이션 공유 화면에 표시하는 단계를 포함하는 것을 특징으로 한다.
이상과 같이 본 발명에서 추구하는 기술적 문제 해결은 사용자가 직접 공간에 다수의 카메라를 설치 촬영하여 지연 없는 다시점 뷰어를 통해 확인하고, 다수의 카메라로 촬영된 다시점 영상을 미디어 서버에 전송하여 실시간으로 저장 및 공유할 수 있는 사용자 설치형 다시점 카메라를 이용하여 영상을 제공함으로써, 기존 하나의 감상 방향 중심의 방송에서 다수개의 방송시점을 제공할 수 있고, 사용자들이 다시점으로 방송하고 싶은 공간을 선택하여 다양한 분야에 적용 운영할 수 있는 장점이 있다.
본 발명은 다시점 카메라에서 획득 된 다수개의 영상은 유선 또는 무선망으로 컴퓨터 장치에 영상 흐름으로 컴퓨터 장치에 전달되고, 전달된 영상 흐름은 즉시 영상뷰어의 가상의 공간인 2차원 또는 3차원 형태의 공간으로 동시에 모두 전송되어 다수개가 동시에 흐름으로 이러한 영상의 흐름중 하나의 영상을 다시점 영상 뷰어에 표시할 수 있는 장점이 있다.
본 발명의 사용자는 이렇게 다수개의 영상 흐름을 감상하면서 소프트웨어 연산을 통하여 컴퓨터 장치에 저장할 수 있고, 인터넷 망을 통하여 영상 흐름이나 저장 영상을 미디어 서버로 전송하여 생방송, 녹화 방송 서비스를 다시점으로 제공할 수 있는 장점이 있다.
본 발명은 컴퓨터장치에 설치되는 소프트웨어나 모바일 애플리케이션으로 다수개의 영상을 실시간 중계하거나 공유 다시보기 방송을 제공할 수 있는 장점이 있다.
도 1은 자연계의 존재하는 시점을 나타낸 예시도이다.
도 2는 본 발명의 일실시예에 따른 다시점 카메라를 이용한 영상제공 시스템의 구성을 계략적으로 나타낸 구성도이다.
도 3은 본 발명에 따른 다시점 카메라를 이용한 영상제공 시스템의 영상 촬영 상태를 나타낸 예시도이다.
도 4는 도 3에 도시된 구성의 부분 확대도이다.
도 5는 본 발명에 따른 다시점 카메라로 촬영되는 다시점 영상을 처리하는 과정을 설명하기 위한 도면이다.
도 6은 본 발명에 따른 GPU를 이용하여 다양한 2D, 3D 공간이 만들어지는 뷰어의 계층 구조를 나타낸 예시도이다.
도 7은 본 발명에 따른 개발 코드 상단 정의 부분에서 NetStream과 같은 2차원 영상이 흐르는 방을 이용하는 상태를 나타낸 도면이다..
도 8은 본 발명에 따른 개발 코드 중 2차원 배열로 다수개의 영상 개수를 지정하는 부분을 나타낸 도면이다.
도 9는 본 발명의 다른 실시예에 따른 개인용 다시점 카메라를 이용한 영상제공 시스템의 구성을 나타낸 예시도이다.
도 10은 본 발명에 따른 다시점 카메라를 이용한 영상제공 방법을 설명하기 위한 흐름도이다.
이하, 본 발명의 실시 예를 첨부된 도면들을 참조하여 상세하게 설명한다. 우선 각 도면의 구성 요소들에 참조 부호를 첨가함에 있어서, 동일한 구성 요소들에 대해서는 비록 다른 도면상에 표시되더라도 가능한 한 동일한 부호를 가지도록 하고 있음에 유의해야 한다. 또한, 본 발명을 설명함에 있어서, 관련된 공지 구성 또는 기능에 대한 구체적인 설명이 본 발명의 요지를 흐릴 수 있다고 판단되는 경우에는 그 상세한 설명은 생략한다. 또한, 이하에서 본 발명의 바람직한 실시 예를 설명할 것이나, 본 발명의 기술적 사상은 이에 한정하거나 제한되지 않고 당업자에 의해 실시될 수 있음은 물론이다.
도 2는 본 발명의 일실시예에 따른 다시점 카메라를 이용한 영상제공 시스템의 구성을 계략적으로 나타낸 구성도이다.
도 2에 도시된 바와 같이 본 발명의 다시점 카메라를 이용한 영상제공 시스템은(100), 영상 획득부(10)와, 영상 전송부(20), 미디어 서버(30) 및 다시점 영상 애플리케이션이 설치된 감상자 단말(40)을 포함하여 구성된다. 여기서, 감상자 단말(40)은 개인용 컴퓨터(PC), 노트북, 테블릭PC, 스마트폰 등에 다시점 영상 애플리케이션이 설치하여 사용한다.
도 3은 본 발명에 따른 다시점 카메라를 이용한 영상제공 시스템의 영상 촬영 상태를 나타낸 예시도이고, 도 4는 도 3에 도시된 구성의 부분 확대도이다.
상기 영상 획득부(10)와 영상 전송부(20)는 도 3과 도 4에 도시된 바와 같이, 다수개의 카메라와 지연 없이 다수 영상을 감상하는 다시점 뷰어 화면, 영상 녹화 실행 버튼, 카메라 받침대, 다수개의 카메라는 높이 조절이 가능하도록 설계된다.
본 발명은 다수의 카메라로 영상을 획득하고 그 획득된 다수의 영상을 사용자가 저장, 감상, 비교, 공유하는 장치에 관한 것으로 사용자는 자신이 촬영하고자 하는 공간에 유선 또는 무선의 카메라를 설치하고, 영상을 저장 및 편집, 미디어 서버(30)로 전송하기 위하여 영상 전송부(20)에서 흐름 데이터로 존재하고 있는 영상의 데이터를 소리, 물리적 버튼, 휴대용 전화 등의 무선 장치에서 촬영 신호를 주고 스트림 영상의 특정 시간대를 미디어 서버(30)에 전송하여 저장하며, 특정한 길이로 저장된 영상을 다시점을 지연현상 없이 즉각적으로 화면 전환을 지원하는 뷰어나 실행 애플리케이션이 설치된 감상자 단말(40)을 통해 공유할 수 있다.
본 발명에서 한정하는 영상은 다시점으로 하나의 카메라로 촬영되는 화상이 아닌 2개 이상의 복수 및 다수의 촬영 장치로 촬영하여 기존의 하나의 시점으로 감상하던 공간의 더욱 많은 시점을 제공한다.
이로 인해 사용자는 실시간 또는 저장으로 다양한 시점의 정보를 저장 공유 탐색 감상함으로써 하나의 화면에서 탐색하는 것보다 더욱 다양한 각도에서의 풍부한 정보 감상을 제공하여 사각지대 없는 보안카메라, 다양한 각도의 드레스룸, 스포츠장의 판정이나 자세 교정 등에서 효율적으로 쇼룸을 구현할 수 있다.
도 5는 본 발명에 따른 다시점 카메라로 촬영되는 다시점 영상을 처리하는 과정을 설명하기 위한 도면이고, 도 6은 본 발명에 따른 GPU를 이용하여 다양한 2D, 3D 공간이 만들어지는 뷰어의 계층 구조를 나타낸 예시도이다.
도 5와 도 6에 도시된 바와 같이, 본 발명에 따른 다시점 카메라를 이용한 영상제공 시스템(100)은 근래에 발전되기 시작한 그래픽 처리 장치(GPU:Graphics Processing Unit)를 이용하므로 3차원 형상을 낮은 사양 기기에서도 비교적 잘 구현하도록 Stage3D 공간과 같은 3차원 구현 공간을 가지는 모든 가상현실 엔진에서 구현할 수 있도록 설계된다.
최근들어 영상 뷰어 안에 3차원 형상도 처리할 정도의 가상 공간을 실시할 수 있게 되면서 기존 영상 부호화 처리도 어려웠던 영상 처리 뷰어에 많은 연산과 2차원, 3차원 공간 설계가 가능하다.
이에 따라, 본 발명은 다수개의 영상을 받아 가상의 공간에 2차원공간을 기본으로 하는 가상의 방을 만들고, 그 안에 다수개의 영상을 모두 흐름 상태로 동시에 연산한다. 이는 3차원 공간에서도 가능하고, 데이터를 가볍게 구현할 수 있도록 2차원의 평면 영상이 흐르는 공간에서도 가능하다. 이렇게 동시에 시간의 축을 가지고 흐르는 동화상의 데이터들을 상위 2차원 조작부에서 감상자가 버튼을 누르거나 모바일 기기의 터치하는 손동작으로 드래그 할 때 각각의 흐름을 가지고 영상정보가 흐르고 있는 방을 선택과 버튼의 방향대로 즉시 바꾸어주어 사용자가 현실에서 눈으로 사방을 보거나 피사체를 감상하는 것과 같은 영상기반의 자유로운 시점 변환이 즉시 이루어지는 다시점 뷰어를 제공함으로써, 현실의 감상자가 보는 모든 시점의 감상을 현실과 같이 제공하면서도 낮은 사양 기기에서 구현할 수 있게 된다.
이는 현시점의 이미지, 영상, 오브젝트를 하나의 뷰어에서 빠르게 구현하려는 뷰어의 기초 공간이 GPU와 같은 기술의 발전으로 3차원 형상부의 연산을 따로 분리하여 연산하는 등의 방법으로 기초 뷰어를 구현하는 공간의 성능이 분업화를 통한 고성능의 공간을 제공하기 때문에 현 시점에서 가능하다.
예를 들어, 본 발명을 실시하려는 개발자는 이러한 뷰어의 사용자 조작부 설계 계층, 3D 계층, 영상 계층, 2차원 계층, 음성 계층 등에 선택하여 다수개의 가상의 공간을 만들고, 이 공간에 다수개의 영상 흐름을 동시에 흘려보내고, 사용자의 조작부를 통하여 최종 사용자가 조작대로 시점 변환을 지연 없이 전달할 수 있게 된다.
이때, 감상자가 보는 영상 뷰어의 조작부와 그 깊이에 따른 각층의 레이어 전체를 관통하는 초당 프레임 수(FPS)는 영화의 경우 예를 어, 24 FPS를 이용하며, 웹 브라우저를 통하거나 개인용 컴퓨터(PC)에서 운영되는 영상 뷰어에서는 예를 들어, 30~60 FPS의 빠른 응답속도를 제공한다.
본 발명의 영상 전환 시간은 전체 운영 뷰어의 FPS로 최대 24~60 FPS를 개발 상태에 따라 구성할 수 있어 사용자는 최소 24분의 1초라는 시간에 빠른 화면전환 효과를 얻을 수 있다.
한편, 도 7은 본 발명에 따른 개발 코드 상단 정의 부분에서 NetStream과 같은 2차원 영상이 흐르는 방을 이용하는 상태를 나타낸 것이고, 도 8은 본 발명에 따른 개발 코드 중 2차원 배열로 다수개의 영상 개수를 지정하는 부분을 나타낸 것이다.
도 9는 본 발명의 다른 실시예에 따른 개인용 다시점 카메라를 이용한 영상제공 시스템의 구성을 나타낸 예시도이다.
도 9에 도시된 본 발명의 다른 실시예에 따른 개인용 다시점 카메라를 이용한 영상제공 시스템(200)은 개인용 다시점 캠 영상 촬영 및 방송 방식으로 적어도 둘 이상의 다시점 캠 또는 카메라(210), 컴퓨터 장치(220), 무선 공유기(230), 유무선 네트워크(240), 미디어 서버(250), 감상자 단말(260)으로 구성된다. 여기서, 감상자 단말(260)은 개인용 컴퓨터(PC), 노트북, 테블릭PC, 스마트폰 등에 다시점 영상 애플리케이션이 설치하여 사용한다.
다수개의 카메라(210)는 하나의 컴퓨터 장치(220)에 연결되는 다수의 웹캠으로 유에스비(usb) 포트 등에 케이블로 연결되는 유선 타입이거나, 무선으로 자체 스트림을 지원하는 장치로 구현하여 미디어 서버(250)에 직접 전송할 수 있도록 구현이 가능하다. 즉, 유무선 네트워크(240)로 연결된 IP 카메라 또한 미디어 서버(250)로 전송하는 장치를 별도로 구성할 수도 있다.
또한, 감상자인 사용자는 정지 중, 이동 중, 실내와 실외 등 다양한 상황과 접촉면에서 방송용 쇼룸을 구현해야 하므로 카메라(210)의 설치 방법은 접착형, 거치형, 클립형 등 다양한 방식으로 설치 가능하다.
미디어 서버(250)에 다수개의 카메라(210)를 통해 촬영된 다시점 영상과 사용자가 원하는 길이로 저장 완료되면, 사용자가 감상할 수 있는 감상자 단말(260)의 애플리케이션에서 다시점을 지연 없이 감상할 수 있는 다시점 뷰어로 다수개의 영상신호를 표시한다.
이와 같이 다수개의 표시된 영상은 기존의 다른 시간대의 영상과 비교 공유할 수 있다. 이를 통해 사용자는 자신이 입어본 다양한 의류의 착용상태를 비교하고 선택에 도움을 받는다든지, 사람이 없는 방에서 아이나 애완동물의 상태를 사각지대 없이 관찰 보호할 수 있는 다시점 방송을 운영 할 수 있게 된다.
도 10은 본 발명에 따른 다시점 카메라를 이용한 영상제공 방법을 설명하기 위한 흐름도이다.
도 9에 도시된 바와 같이, 본 발명은 감상자인 사용자가 1 단계) 감상자 단말(40)을 통해 다시점 영상 애플리케이션을 시작시키는 단계, 이때 감상자 단말(40)은 2 단계) 다수개의 카메라와 감상자 단말에 애플리케이션 설치되어 있는지 확인하는 단계와, 3 단계) 카메라 스트림 영상이 애플리케이션과 연결되어 있는지 확인하는 단계, 4 단계) 감상자 단말에 애플리케이션 화면을 표시하는 단계, 5 단계) 사용자가 소리, 동작, 버튼 등으로 명령을 선택하였는지 확인하는 단계, 6 단계) 미디어 서버로 길이 및 특성 변환된 다시점 영상을 전송 요청하는 단계, 7 단계) 애플리케이션 화면으로 전송받은 다시점 영상을 표시하는 단계, 8 단계) 사용자가 공유하기를 선택하였는지 확인하는 단계, 및 9 단계) 애플리케이션 공유 화면에 표시하는 단계를 포함한다.
본 발명은 상술한 과정을 통해 다양한 시점을 사용자가 선택하여 지연 없는 다시점 뷰어를 보면서도 낮은 사양의 컴퓨터와 모바일 기기에서도 감상 가능하게 된다. 따라서, 종래의 오브젝트 방식은 낮은 사양에서 구현하기 어렵고, 영상과 이미지 방식은 다양한 시점의 현실과 같은 빠른 시점 전환을 구현하기 어려웠지만 본 발명과 같은 방식으로 지연 없이 영상을 즉시 바꾸어 주어 사용자의 소리, 동작, 버튼 조작으로 화면 전환이 즉시 이루어지는 다시점 뷰어를 구현할 수 있게 된다. 이를 통해 그동안 가상현실에서 많이 구현되던 파노라마 시점은 물론 오브젝트의 주변에서 피사체를 바라보며 주변으로 돌려보는 호버 시점도 구현 가능하다.
또한, 본 발명은 기존 카메라의 단방향적인 시점을 가지는 방법이 시점변환을 통하여 공간 탐색을 해결했다면 다수의 카메라를 설치하고 전송하면서 지연 없는 다시점 뷰어를 함께 제공함으로써, 지연 없는 다시점 뷰어를 통해 현실의 모든 공간을 눈으로 동시에 탐색하는 방법과 일치하려는데 있다.
본 발명을 통하여 의류업체는 고객이 착용하는 옷을 라이브 쇼룸을 통하여 비교하고 구입하는데 도움이 되는 실사기반의 라이브 드레스룸을 운영할 수 있다.
보안카메라 업체는 본 발명을 통하여 사각지대 없는 공간감시 카메라와 뷰어를 제공할 수 있게 된다. 또한 다양한 분야, 엔터테인먼트분야나 스포츠 분야에서 자세교정이나 실시간 스포츠 방송을 지연 없는 다시점 방식으로 구현할 수 있다.
본 발명은 사용자가 하나 이상의 카메라를 적용하여 상황에 맞게 운영해야 하므로 다수의 카메라 장치를 공간에 설치하여 운영하게 된다..
상술한 바와 같이 본 발명은 지연 없는 다시점 뷰어를 통하여 사용자가 직접 공간에 다수의 카메라를 설치 촬영하여 전송하고 실시간, 저장, 공유할 수 있는 사용자 설치형 다시점 카메라를 이용하여 촬영된 영상을 제공함으로써, 기존 단방향 중심의 방송에서 다수개의 방송시점을 제공할 수 잇고, 사용자들이 다시점으로 방송하고 싶은 공간을 선택하여 다양한 분야에 적용 운영할 수 있게 된다.
본 발명은 현실의 세계에 존재하는 물체를 감상하듯이 동영상 기반으로 빠르게 시점을 지연 없이 제공하도록 구현한 것으로 현실세계에 존재하는 두 가지 시점인 하나의 지점에서 눈을 돌려 사방을 둘러보는 파노라마(Panorama) 시점과 오브젝트를 주변으로 돌려서 보는 호버(Hover) 시점 두 가지의 시점을 모두 구현할 수 있다.
또한, 3차원 가상의 방에 영상 흐름을 다수개의 방을 만들어 동시에 실행시키거나 2차원 가상의 방에 2차원 영상의 흐름을 동시에 흘려 연산하는 가상의 방을 만들고 감상자가 원하는 대로 즉시 연결 감상할 수 있으며, 낮은 사양 기기에서 다양한 시점의 현실과 같은 영상기반 가상현실 뷰어를 구성할 수 있다.
이러한 뷰어에 다수개의 영상을 획득하는 장치를 구현하여 감상자가 운영하면서 영상을 실시간으로 획득 감상하고 녹화하며 미디어 서버를 통하여 공유 실시간 방송, 녹화 방송을 제공할 수 있다.
본 발명은 개인적으로 구입하여 가정이나 자신이 원하는 공간에 쉽게 설치할 수 있는 다수개의 카메라 장치와 기업 등에서 운영할 수 있는 다시점 카메라 장치, 획득된 다시점 영상을 즉시 볼 수 있는 컴퓨터 소프트웨어, 획득 된 다시점 영상을 미디어 서버에 저장 방송하고, 그 저장 영상을 모바일 장치의 어플리케이션을 통하여 감상, 공유할 수 있는 장치 전반을 포함한다.
이상의 설명은 본 발명의 기술 사상을 예시적으로 설명한 것에 불과한 것으로서, 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자라면 본 발명의 본질적인 특성에서 벗어나지 않는 범위 내에서 다양한 수정, 변경, 및 치환이 가능할 것이다. 따라서 본 발명에 개시된 실시예 및 첨부된 도면들은 본 발명의 기술 사상을 한정하기 위한 것이 아니라 설명하기 위한 것이고, 이러한 실시예 및 첨부된 도면들에 의해서 본 발명의 기술 사상의 범위가 한정되는 것은 아니다. 본 발명의 보호 범위는 아래의 청구 범위에 의해서 해석되어야 하며, 그와 동등한 범위 내에 있는 모든 기술 사상은 본 발명의 권리 범위에 포함되는 것으로 해석되어야 할 것이다.
100, 200 : 다시점 카메라를 이용한 영상제공 시스템
10 : 영상 획득부 20 : 영상 전송부
30 : 미디어 서버 40 : 감상자 단말

Claims (5)

  1. 사용자가 직접 공간에 다수의 카메라를 설치 촬영하여 지연 없는 다시점 뷰어를 통해 확인하고, 다수의 카메라로 촬영된 다시점 영상을 미디어 서버에 전송하여 실시간으로 저장 및 공유할 수 있도록 사용자 설치형 다시점 카메라를 이용한 다시점 영상을 제공하는 것을 특징으로 하는 다시점 카메라를 이용한 영상제공 시스템.
  2. 제 1 항에 있어서,
    다수개의 카메라로 구성된 영상 획득부와,
    지연 없이 다수 영상을 감상하는 화면과 영상을 저장 및 편집하여 미디어 서버로 전송하는 영상 전송부,
    다시점 영상을 저장하는 미디어 서버, 및
    시점 영상 애플리케이션이 설치된 감상자 단말을 포함하는 다시점 카메라를 이용한 영상제공 시스템.
  3. 제 1 항에 있어서,
    상기 다시점 카메라를 이용한 영상제공 시스템은,
    개인용 다시점 캠 영상 촬영 및 방송 방식으로 적어도 둘 이상의 다시점 캠 또는 카메라와, 컴퓨터 장치, 무선 공유기, 유무선 네트워크, 다시점 영상을 저장하는 미디어 서버, 시점 영상 애플리케이션이 설치된 감상자 단말로 구성된 것을 특징으로 하는 다시점 카메라를 이용한 영상제공 시스템.
  4. 사용자가 직접 공간에 다수의 카메라를 설치 촬영하여 지연 없는 다시점 뷰어를 통해 확인하고, 다수의 카메라로 촬영된 다시점 영상을 미디어 서버에 전송하여 실시간으로 저장 및 공유할 수 있도록 사용자 설치형 다시점 카메라를 이용한 다시점 영상을 제공하는 것을 특징으로 하는 다시점 카메라를 이용한 영상제공 방법.
  5. 제 4 항에 있어서,
    상기 방법은,
    1 단계) 감상자 단말을 통해 다시점 영상 애플리케이션을 시작시키는 단계와,
    2 단계) 감상자 단말은 다수개의 카메라와 감상자 단말에 애플리케이션 설치되어 있는지 확인하는 단계,
    3 단계) 카메라 스트림 영상이 애플리케이션과 연결되어 있는지 확인하는 단계,
    4 단계) 감상자 단말에 애플리케이션 화면을 표시하는 단계,
    5 단계) 사용자가 소리, 동작, 버튼 등으로 명령을 선택하였는지 확인하는 단계,
    6 단계) 미디어 서버로 길이 및 특성 변환된 다시점 영상을 전송 요청하는 단계,
    7 단계) 애플리케이션 화면으로 전송받은 다시점 영상을 표시하는 단계,
    8 단계) 사용자가 공유하기를 선택하였는지 확인하는 단계, 및
    9 단계) 애플리케이션 공유 화면에 표시하는 단계를 포함하는 것을 특징으로 하는 다시점 카메라를 이용한 영상제공 방법.
KR1020150179333A 2014-12-15 2015-12-15 다시점 카메라를 이용한 영상제공 시스템 및 방법 KR20160072817A (ko)

Priority Applications (2)

Application Number Priority Date Filing Date Title
KR1020160127543A KR101759297B1 (ko) 2015-12-15 2016-10-04 동영상 처리 장치, 및 방법
KR1020160127542A KR101722681B1 (ko) 2014-12-15 2016-10-04 동영상 처리 장치, 및 방법

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR20140180634 2014-12-15
KR1020140180634 2014-12-15

Publications (1)

Publication Number Publication Date
KR20160072817A true KR20160072817A (ko) 2016-06-23

Family

ID=56353422

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020150179333A KR20160072817A (ko) 2014-12-15 2015-12-15 다시점 카메라를 이용한 영상제공 시스템 및 방법

Country Status (1)

Country Link
KR (1) KR20160072817A (ko)

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20130063281A (ko) 2011-12-06 2013-06-14 한국기초과학지원연구원 초전도 자석 냉각 시스템

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20130063281A (ko) 2011-12-06 2013-06-14 한국기초과학지원연구원 초전도 자석 냉각 시스템

Similar Documents

Publication Publication Date Title
EP3238445B1 (en) Interactive binocular video display
RU2665872C2 (ru) Стереопросмотр
KR102052567B1 (ko) 가상의 3차원 비디오 생성 및 관리 시스템 및 방법
KR102407283B1 (ko) 콘텐트를 전달 및/또는 콘텐트를 재생하기 위한 방법들 및 장치
US10681276B2 (en) Virtual reality video processing to compensate for movement of a camera during capture
JP2022177053A (ja) 情報処理システム、情報処理方法、および情報処理プログラム
US20180342043A1 (en) Auto Scene Adjustments For Multi Camera Virtual Reality Streaming
JP6932796B2 (ja) レイヤ化拡張型エンターテインメント体験
JP2017536565A (ja) ステレオ視のための広視野カメラ装置
JP7378243B2 (ja) 画像生成装置、画像表示装置および画像処理方法
JP7237538B2 (ja) 情報処理装置、それを含むシステム、情報処理方法、およびプログラム
WO2020084951A1 (ja) 画像処理装置および画像処理方法
WO2019064853A1 (ja) 情報処理装置、情報提供装置、制御方法、及びプログラム
JP2016163342A (ja) 三次元形状情報の配信または放送の方法
KR20190031943A (ko) 계층 프로젝션 기반 6-자유도 전방위 입체 영상 제공 방법 및 장치
CN110730340B (zh) 基于镜头变换的虚拟观众席展示方法、系统及存储介质
KR20220096700A (ko) 임의 시점 영상 생성 기술을 이용한 다이나믹 영상 촬영 장치 및 방법
CN111149356A (zh) 用于投影沉浸式视听内容的方法
KR20160072817A (ko) 다시점 카메라를 이용한 영상제공 시스템 및 방법
KR20200025083A (ko) 가상현실 영상의 제작 및 중계를 위한 1인 미디어 방송 시스템
WO2020194190A1 (en) Systems, apparatuses and methods for acquiring, processing and delivering stereophonic and panoramic images
Hamacher et al. Study on making omnistereo images for HMD using longer focal length

Legal Events

Date Code Title Description
A201 Request for examination