KR101486959B1 - 몰입감을 향상시키는 노래방 시스템 - Google Patents

Abstract

본 발명은 몰입감을 향상시키는 노래방 시스템에 관한 것으로서, 더욱 상세하게는 노래연습장, 노래방, 노래주점, 멀티방(DVD,GAME), 유흥주점, 클럽 등에 화면투사면부를 구성하여 해당 화면투사면부에 여러 개의 영상을 하나의 영상처럼 구현하거나, 다수의 분할 영상을 다양한 형상의 화면투사면부에 동시에 제공하며, 화면투사면부에 투영되는 영상에 굴곡 혹은 흘러 내리는 현상 등의 왜곡없이 구현되도록 하여 현실감과 입체감을 제공하면서 동시에 생동감 있는 영상을 제공하고, 영상이 파노라마로 구현되어 실제와 가까운 이머시브 환경 내에서 사용자가 서비스를 이용할 수 있도록 하는 몰입감을 향상시키는 노래방 시스템에 관한 것이다.

Description

몰입감을 향상시키는 노래방 시스템{Karaoke System to improve the immersion.}

본 발명은 몰입감을 향상시키는 노래방 시스템에 관한 것으로서, 더욱 상세하게는 노래연습장, 노래방, 노래주점, 멀티방(DVD,GAME), 유흥주점, 클럽 등에 화면투사면부를 구성하여 해당 화면투사면부에 여러 개의 영상을 하나의 영상처럼 구현하거나, 다수의 분할 영상을 다양한 형상의 화면투사면부에 동시에 제공하며, 화면투사면부에 투영되는 영상에 굴곡 혹은 흘러 내리는 현상 등의 왜곡없이 구현되도록 하여 현실감과 입체감을 제공하면서 동시에 생동감 있는 영상을 제공하고, 영상이 파노라마로 구현되어 실제와 가까운 이머시브 환경 내에서 사용자가 서비스를 이용할 수 있도록 하는 몰입감을 향상시키는 노래방 시스템에 관한 것이다.

기존의 가라오케나 노래방기기는 음악과 배경 비디오를 합성해 화면에 보여주며 노래를 하도록 되어있다.

다른 서비스로서 노래방기기에 비디오 크로마키를 이용하여 합성을 하여 비디오를 넣는 방식의 가라오케 시스템도 소개되어 있다.

비디오 믹서방식 가라오케는 TV와 스피커와 마이크 및 가라오케 시스템으로 구성된다.

또한, 피사체를 촬영한 신호를 출력하는 카메라와 배경화면을 재생하는 영상재생장치 및 카메라에서 출력되는 신호를 전자적으로 처리하여 화상의 특정한 성분들을 제거하여 공백으로 만들기 위한 크로마키(Chromakey)장치를 통과한 후 영상재생장치에서 재생되는 비디오를 믹싱하는 크로마키 비디오 믹서부 및 스크린으로 구성된 2D신호처리부로 구성되어 있다.

상기 구성은 단순히 기존의 가라오케시스템에 단순 2D 비디오 믹싱을 할수 있도록 한 것이다.

즉, 비디오나 사진을 실시간 비디오와 합성하여 영상을 발생하는 장치이기 때문에 3차원 공간으로 표현할 수 없을 뿐만 아니라 노래를 부를시 항시 비디오를 재생하여야 되는 문제점이 발생하게 된다.

상기한 노래방은 여러 나라에서 수 십년간 성행하면서 하나의 오락 문화로서 정착되어 왔다.

종래의 노래방에서는 수많은 노래의 반주와 가사를 데이터베이스화하여 저장하고 있는 반주기에 원하는 노래의 코드번호를 입력하면 해당 노래의 반주와 함께 가사가 디스플레이된다.

이러한 기본 기능 이외에도 다양한 즐길 거리를 제공하기 위해 노래 배틀 기능, 댄스 따라하기 기능, 동영상 업로드 기능 등이 추가로 서비스된다.

그런데 종래의 노래방 시스템에서는 모니터 화면에 가사와 함께 뮤직 비디오 와 같이 미리 저장된 영상만이 디스플레이 된다.

이러한 종래의 노래방 시스템에서는 사용자가 원하는 영상을 재생하는 것도 불가능하며, 사용자의 흥미를 유발하기도 어렵다.

즉, 현실감과 입체감을 제공하면서 동시에 생동감 있는 영상을 제공함으로써, 사용자에게 흥미 유발을 시킬 수 있는 기술이 필요하게 되었다.

대한민국공개특허번호 10-2005-0105308호(2005.11.04)

따라서 본 발명은 상기와 같은 종래 기술의 문제점을 감안하여 제안된 것으로서, 본 발명의 목적은 노래연습장, 노래방, 노래주점, 멀티방(DVD,GAME), 유흥주점, 클럽 등에 화면투사면부를 구성하여 해당 화면투사면부에 여러 개의 영상을 하나의 영상처럼 구현하도록 하거나, 다수의 분할 영상을 다양한 형상의 화면투사면부에 동시에 제공할 수 있도록 하는데 있다.

본 발명의 다른 목적은 다양한 형상의 화면투사면부에 투영되는 영상을 굴곡 혹은 흘러 내리는 현상 등의 왜곡없이 구현되도록 하여 현실감과 입체감을 제공하면서 동시에 생동감 있는 영상을 제공하고, 영상이 파노라마로 구현되어 실제와 가까운 이머시브 환경(사용자를 에워싸는 이머시브 영상 및 음향) 내에서 사용자가 서비스를 이용할 수 있도록 하는데 있다.

본 발명이 해결하고자 하는 과제를 달성하기 위하여, 본 발명의 실시예에 따른 몰입감을 향상시키는 노래방 시스템은,

영상 정보, 음향 정보를 저장하고 있는 영상음향정보저장부(110),

상기 영상음향정보저장부에 저장된 영상 정보를 랜더링하기 위한 랜더링부(120),

상기 랜더링부에 의해 랜더링된 영상 정보들을 취합하여 스티치 처리하기 위한 스티치처리부(130),

상기 스티치처리부에 의해 스티치 처리된 영상 정보를 획득하여 영상 효과 및 음향 효과를 추가하여 이펙트효과를 제공하기 위한 이펙트처리부(140),

다수의 프로젝터를 통해 투사되는 다른 영상들을 하나의 파노라마로 구성되도록 각 영상 화면의 중첩된 부분을 에지 브랜딩 처리하는 것과, 화면투사면부 내 굴곡 및 흘러내리는 영상 이미지를 와핑 처리하는 것 중 적어도 어느 하나 이상을 처리하기 위한 화면보정부(150),

음향 정보를 음향출력장치로 제공하기 위한 음향정보제공부(160)를 포함하여 구성되는 몰입감향상영상음향생성수단(100);

상기 몰입감향상영상음향생성수단에 의해 생성된 영상을 화면투사면부에 투사시키는 다수의 프로젝터(200);

화면투사면부 내에 설치 구성되어 음향을 출력하기 위한 음향출력장치(300);

원형 혹은 곡면 혹은 다각형으로 구성되며, 몰입감향상영상음향생성수단에서 제공되는 영상을 구현하기 위한 화면투사면부(400);를 포함한다.

이상의 구성 및 작용을 지니는 본 발명에 따른 몰입감을 향상시키는 노래방 시스템은,

노래연습장, 노래방, 노래주점, 멀티방(DVD,GAME), 유흥주점, 클럽 등에 화면투사면부를 구성하여 해당 화면투사면부에 여러 개의 영상을 하나의 영상처럼 구현하도록 하며, 다수의 분할 영상을 다양한 형태의 화면투사면부에 동시에 제공할 수 있는 효과를 발휘한다.

또한, 화면투사면부에 투영되는 영상을 굴곡 혹은 흘러 내리는 현상 등의 왜곡없이 구현되도록 하여 현실감과 입체감을 제공하면서 동시에 생동감 있는 영상을 제공하고, 영상이 파노라마로 구현되어 실제와 가까운 이머시브 환경 내에서 사용자가 서비스를 이용할 수 있도록 함으로써, 종래 노래방 서비스보다 더욱 흥미를 느낄 수 있는 효과를 발휘한다.

또한, 사전에 미리 제작된 인물이나 사물 등의 영상을 몰입감향상영상음향생성수단에 의해 생성된 영상에 추가하여 제공함으로써, 증강 현실의 효과도 제공할 수 있게 된다.

또한, 네트워크를 통해 노래정보디비에 저장된 노래 화면과 가사가 동기화되어 노래에 맞추어 음악과 영상을 상영할 수 있게 된다.

도 1은 본 발명의 실시예에 따른 몰입감을 향상시키는 노래방 시스템의 전체 구성도이다.
도 2는 본 발명의 실시예에 따른 몰입감을 향상시키는 노래방 시스템의 몰입감향상영상음향생성수단 블록도이다.
도 3은 본 발명의 일실시예에 따른 몰입감을 향상시키는 노래방 시스템의 화면투사면부가 원형 써클로 구성될 경우에 원형 써클에 투영된 영상을 나타낸 화면이며, 도 4는 조립식 써클벽을 조립하여 원형 써클을 완성시키는 예시도이며, 도 5는 입체 음향을 나타낸 예시도이며, 도 6은 흘러내린 영상을 와핑 처리하는 예시도이다.
도 7a 내지 도 7h는 파노라마 해상도를 처리하는 예시도이며, 도 8은 최종 파노라마 영상을 나타낸 예시도이다.
도 9는 에지 브랜딩 적용 전 예시도이며, 도 10은 최종 에지 브랜딩 작업을 완료할 경우에 예시도이다.
도 11은 프로젝터 1 및 2에 의해 투영된 화면 예시도이며, 도 12는 중첩 부분을 나타낸 예시도이며, 도 13은 에지 브랜딩 처리시 중첩 부분의 빛을 50%씩 줄인 예시도이며, 도 14는 파노라마 완성 예시도이다.
도 15는 와핑 처리를 간략히 나타낸 개념 예시도이며, 도 16은 화면 좌표 설정 예시도이며, 도 17은 프로젝터 설치 전 화면 투사 예시도이며, 도 18은 각 꼭지점이 투사영상 내 위치할 수 있도록 프로젝터를 조정한 예시도이며, 도 19는 화면이 고르지 않아 어긋난 화면에 대하여 와핑 처리 예시도이며, 도 20은 최종 조정된 화면 예시도이다.
도 21은 다양한 형태의 화면투사면부를 나타낸 예시도이다.

이하, 본 발명에 의한 몰입감을 향상시키는 노래방 시스템의 실시예를 통해 상세히 설명하도록 한다.

본 발명의 화면투사면부(400)는 원형 혹은 곡면 혹은 다각형으로 구성될 수 있는데, 도 21을 예를 들어 설명하자면, 원형, 곡면(커브), 삼각형, 사각형, 마름모형, 팔각형, 별모양형, 웨이브형, 100미터 이상의 직선형 등 다양한 형상으로 구성될 수 있음을 나타낸 것이다.

즉, 노래방 시스템을 도입할 장소에 따라 원형을 선택하거나, 곡면을 선택하거나, 삼각형 등 다각형 중 어느 하나를 선택하여 화면투사면부를 설치 구성하게 되고, 상기 화면투사면부에 몰입감향상영상음향생성수단에서 제공된 영상을 투영하게 되는 것이다.

도 1은 본 발명의 실시예에 따른 몰입감을 향상시키는 노래방 시스템의 전체 구성도이다.

도 1에 도시한 바와 같이, 본 발명은 노래연습장, 노래방, 노래주점, 멀티방(DVD,GAME), 유흥주점, 클럽 등에 화면투사면부를 구성하여 해당 화면투사면부에 여러 개의 영상을 하나의 영상처럼 구현하도록 하며, 다수의 분할 영상을 다양한 형태의 공간(원형, 곡면(커브), 삼각형, 사각형, 마름모형, 팔각형, 별모양형, 웨이브형, 100미터 이상의 직선형 등의 공간)을 형성하는 화면투사면부에 동시에 제공할 수 있는 효과를 발휘한다.

본 발명에서 설명하고 있는 노래방이란 상기한 노래방, 노래연습장, 클럽, 주점, DVD방, 복합멀티방, 라운지바, 유흥주점, 클럽 등을 대표하는 명칭으로서 사용하였으며, 상기 노래방의 공간 뿐만 아니라, 홍보관, 극장 등의 내부에 화면투사면부를 구성하고, 해당 화면투사면부에 본 발명의 시스템 구성요소들을 구성하면 본 발명의 효과를 제공받을 수 있는 것은 당연한 것이다.

즉, 영상을 투영하는 모든 장소에서 적용이 가능하며, 특히 영상을 보면서 노래를 부를 수 있는 모든 장소에 적용이 가능한 것은 당연한 것이다.

본 발명은 화면투사면부에 영상(사진, 동영상 등)을 상영하는 것인데, 화면투사면부에 여러 개의 화면(영상, 사진 등)을 하나의 화면처럼 구현하거나, 여러 개의 영상을 원형 또는 곡면의 화면투사면부를 통해서 영상을 구현하는 것이다.

본 발명은 원형으로 실시예를 설명하였으나, 도 21과 같이 다양항 형태의 화면투사면부를 제공하는 것은 당연한 것이다.

본 발명의 노래방 시스템은 몰입감향상영상음향생성수단(100), 다수의 프로젝터(200), 음향출력장치(300), 화면투사면부(400)를 포함하여 구성된다.

본 발명의 몰입감향상영상음향생성수단(100)은 영상음향정보저장부(110), 랜더링부(120), 스티치처리부(130), 이펙트처리부(140), 화면보정부(150), 음향정보제공부(160)를 포함하여 구성된다.

상기 영상 정보 및 음향 정보는 영상음향정보저장부에 저장되게 되는데, 맵제작 및 주인공 사진 촬영 등으로 컨텐츠를 제작하거나, 파노라마 영상 기법으로 360도 전방향의 영상촬영을 수행하거나, 기존 영상 및 사진을 수집하거나, 그래픽 및 애니메이션 영상 작업을 수행한 결과물을 수집한 후 영상음향정보저장부에 저장시키게 되는 것이다.

이후, 콘티 제작, 리소소 제작(캐릭터, 배경 모델링 제작) 등을 거치게 된다.

이때, 상기 랜더링부(120)는 영상음향정보저장부에 저장된 영상 정보를 랜더링하게 되고, 상기 스티치처리부(130)는 랜더링부에 의해 랜더링된 영상 정보들을 취합하여 스티치 처리하게 되는 것이다.

예를 들어, 8분할 원본 리소스 스티치(이음)를 수행하게 되는데, 바람직하게는 PTGUI 프로그램을 활용하여 8192*768 해상도로 제작할 수도 있다.

구체적으로 스티치 처리는 파노라마 영상을 제작하기 위한 것이며, 파노라마 화면의 해상도를 결정하는 역할을 수행한다.

예를 들어, 컴퓨터 표준으로는 640*480, 800*600, 1024*768, 1152*864,1280*800, 1280*1024, 1440*900, 1680*1050, 1600*1200, 1920*1200, 2048*1080, 2048*1536, 2560*1600, 2560*2048, 3200*2048, 3200*2400, 3840*2400, 4096*1716, 4096*3072, 5120*3200, 5120*4096,6400*4096, 6400*4800, 7680*4800이 있으며, 모바일은 320*240, 480*270이 있으며, TV는 640*480, 768*576, 704*480, 640*480, 1920*1080, 1280*720, 1366*768, 1920*1080의 해상도 종류를 가지게 된다.

본 발명에서 설명하는 파노라마는 만약 화면투사면부가 원형 써클로 구성된다면, 전체 경치중에서도 360도 방향의 모든 경치를 담아내는 기법이나 장치, 또는 그렇게 담아낸 사진이나 그림 또는 영상을 의미한다.

이때, 보유한 영상의 해상도에 따라 파노라마 해상도가 결정되는데, 예를 들어 보유한 영상(640*480 1개, 800*600 2개, 1024*768 2개)중 해상도가 가장 작은쪽으로 파노라마 해상도를 결정한다.

만약, 3200*480으로 작업영역(파렛트)을 설정할 경우에 3200*480으로 설정된 파렛트에 보유한 영상을 맞추어 가로로 배열하게 된다.

예를 들어, 보유한 영상의 해상도가 640*480, 800*600, 800*600, 1024*768, 1024*768 이라면, 크기가 다르므로 작업 영역에 맞게 각각 축소하게 된다.

상기와 같은 처리를 위하여 파노라마해상도처리모듈(152)을 구성하게 되는데, 작업 영역에 맞게 배열된 영상들을 랜더링하여 하나의 파일로 결과를 얻게 된다.

도 7a 내지 도 7h를 참조하여 설명하자면, 파노라마 해상도를 처리하기 위한 프로그램을 통해 파노라마 해상도를 처리하게 되는데, 도 7a는 파레트 프레임 설정 화면으로 프레임 크기는 3200, 가로는 480을 설정한 예시이며, 도 7b는 효과 설정하는 예시이며, 도 7c는 파레트에 배치시킬 영상 리스트를 나타낸 예시이며, 도 7d는 영상을 통해 드래그하여 작업창에 넣게 되고, 도 7e와 같이 작업창 내 영상을 드래그하여 비디오 1위치에 넣고, 도 7f와 같이 작업창 내 다른 영상을 드래그하여 비디오 2위치에 넣게 된다.

상기와 같은 과정으로 도 7g와 같이, 비디오 1 내지 비디오 5까지의 영상을 가로로 배열하게 되며, 도 7h와 같이, 최종적으로 내보내기(랜더링) 아이콘을 클릭하게 되면 파노라마해상도처리모듈(152)은 도 8과 같은 최종 파노라마 동영상을 완성시키게 되는 것이다.

즉, 자연스러운 영상 제공을 위하여 일반 해상도 영상을 파노라마 해상도로 변환시키는 역할을 수행하는 것이다.

이후, 이펙트처리부(140)는 스티치처리부에 의해 스티치 처리된 영상 정보를 획득하여 영상 효과 및 음향 효과를 추가하여 이펙트 효과를 제공하게 된다.

즉, 화면 효과 및 음향 효과를 추가하여 최종 랜더링을 거쳐 영상 압축을 수행하게 된다.

이후, 인코딩 작업을 거쳐 화면 보정 기능을 수행하게 된다.

이를 위하여 화면보정부(150)는 다수의 프로젝터를 통해 투사되는 다른 영상들을 하나의 파노라마로 구성되도록 각 영상 화면의 중첩된 부분을 에지 브랜딩 처리하며, 화면투사면부 내 굴곡 및 흘러내리는 현상 등의 왜곡된 영상 이미지를 와핑 처리하게 되는 것이다.

구체적으로 설명하자면, 다수의 프로젝터의 다른 영상을 하나의 파노라마로 구성되도록 중첩된 부분을 자연스럽게 에지 브랜딩 처리하게 되며, 자연스러운 영상을 위하여 일반 해상도 영상을 파노라마 해상도로 처리하게 된다.

그리고, 와핑 기술을 이용하여 화면투사면부 내 굴곡 및 흘러내리는 현상 등의 왜곡 이미지를 제거하여 화면 왜곡을 제거하게 된다.

또한, 화면투사면부에 화면 분할을 통해 실시간 영상물을 투사하여 왜곡된 이미지의 픽셀들을 원하는 위치변환 규칙에 의해 다른 위치로 옮김으로써, 자연스러운 영상 이미지를 제공할 수 있도록 하는 것이다.

이때, 화면 보정 기술을 통해 화면투사면부 내에 완벽하게 보정된 이미지 공간을 조성하게 된다.

그리고, 음향정보제공부(160)는 음향 정보를 음향출력장치로 제공하게 되어 영상과 음향을 통한 생동감있는 컨텐츠를 사용자들에게 제공하게 되는 것이다.

한편, 도 1 및 도 3에 도시한 바와 같이, 몰입감향상영상음향생성수단에 의해 생성된 영상을 화면투사면부에 투사시키는 다수의 프로젝터(200)를 구성하게 된다.

상기 프로젝터마다 각각 영상을 표출시키기 위한 영역이 설정되어 있기 때문에 화면 보정기술은 왜곡없는 영상을 제공하기 위하여 반드시 필요한 과정이다.

상기 화면투사면부(400)는 원형 혹은 곡면 혹은 다각형으로 구성되며, 도 5에 도시한 바와 같이, 다수의 프로젝터와 다수의 음향출력장치가 내부 공간 주변에 설치 구성되어 몰입감향상영상음향생성수단에서 제공되는 영상 뿐만 아니라, 음향까지 구현하게 된다.

도 4에 도시한 바와 같이, 일실시예에 따라 상기 화면투사면부를 원형으로 구성한다면, 조립식 서클벽을 서로 연결하여 원형 써클(360도 써클)을 완성하게 되며, 조립식 서클벽을 이용하는 이유는 일체형 원형 써클을 제조하는 과정을 간편하게 수행하기 위한 것이며, 다향한 면적에서 해당 환경에 맞게 원형 써클을 도입할 수 있기 때문이다.

그리고, 만약 화면투사면부가 원형 써클일 경우에 써클 영상을 제공하기 위하여 하나 또는 그 이상의 영상화면을 원형에 구현시키기 위한 영상을 제작하거나, 기존 영상을 파노라마로 변경, 다수의 영상을 스티치하여 표현할 수도 있을 것이다.

이때, 곡면 또는 원형에 구현되기 위해 중첩되는 부분과 평면 영상이 곡면에서 왜곡되는 현상을 없애기 위해 화면보정기술을 사용한 것이며, 각 영상이 원활하게 재생될 수 있도록 싱크를 맞추는 작업이나 이펙트 작업 등을 가미한 것이다.

그리고, 화면투사면부에서 구현되는 영상은 각 영상 개별로 동시에 보여줄 수도 있으며, 하나의 화면으로 재생시킬 수도 있다.

또한, 영상을 원하는 각도에 따라 왜곡없이 표현되도록 파노라마 영상을 가공하게 되는 것이다.

한편, 도 2에 도시한 바와 같이, 상기 몰입감향상영상음향생성수단(100)은,

영상 정보, 음향 정보를 저장하고 있는 영상음향정보저장부(110),

상기 영상음향정보저장부에 저장된 영상 정보를 랜더링하기 위한 랜더링부(120),

상기 랜더링부에 의해 랜더링된 영상 정보들을 취합하여 스티치 처리하기 위한 스티치처리부(130),

상기 스티치처리부에 의해 스티치 처리된 영상 정보를 획득하여 영상 효과 및 음향 효과를 추가하여 이펙트효과를 제공하기 위한 이펙트처리부(140),

다수의 프로젝터를 통해 투사되는 다른 영상들을 하나의 파노라마로 구성되도록 각 영상 화면의 중첩된 부분을 에지 브랜딩 처리하는 것과, 화면투사면부 내 굴곡 및 흘러내리는 영상 이미지를 와핑 처리하는 것 중 적어도 어느 하나 이상을 처리하기 위한 화면보정부(150),

음향 정보를 음향출력장치로 제공하기 위한 음향정보제공부(160)를 포함하여 구성된다.

상기 랜더링부(120)는 영상음향정보저장부에 저장된 영상 정보를 랜더링하게 되며, 스티치처리부(130)는 랜더링부에 의해 랜더링된 영상 정보들을 취합하여 스티치(이음) 처리하게 된다.

상기 이펙트처리부(140)는 스티치처리부에 의해 스티치 처리된 영상 정보를 획득하여 영상 효과 또는 음향 효과를 추가하여 이펙트효과를 제공하게 된다.

특히, 본 발명의 핵심 요소인 상기 화면보정부(150)는 다수의 프로젝터를 통해 투사되는 다른 영상들을 하나의 파노라마로 구성되도록 각 영상 화면의 중첩된 부분을 에지 브랜딩 처리하거나, 화면투사면부 내 굴곡 및 흘러내리는 영상 이미지를 와핑 처리하게 된다.

이를 위하여, 상기 화면보정부(150)는 에지브랜딩처리모듈(151), 파노라마해상도처리모듈(152), 와핑처리모듈(153) 중 적어도 어느 하나 이상을 포함하여 구성되게 된다.

상기 에지브랜딩처리모듈(151)은 다수의 프로젝터를 통해 투사되는 다른 영상들을 하나의 파노라마로 구성되도록 각 영상 화면의 중첩된 부분을 에지 브랜딩 처리하게 된다.

에지 브랜딩 처리는 자연스러운 영상을 제공하기 위한 것이며, 파노라마해상도처리모듈(152)을 통해 일반 해상도 영상을 파노라마 해상도로 변환시킨 영상에 에지 브랜딩 처리하여 영상을 더욱 자연스럽게 함으로써, 영상에 대한 거부감을 제거할 수 있게 된다.

도 9 내지 도 14에 도시한 바와 같이, 프로젝터와 프로젝터 사이는 빛을 스크린에 투사하기 때문에 TV, 모니터와는 다르게 빛의 중첩부분이 생길수 있으며, 어긋나고 자연스럽지 못한 화면이 생기게 된다.

도 11의 경우에 파노라마 화면을 제공하기 위하여 프로젝터1의 화면과 프로젝터2의 화면을 중첩시키게 되면 도 12와 같이 중첩 부분이 발생하게 된다.

이러한 부분을 바로잡기 위해 에지 브랜딩을 수행하게 되는데, 에지 브랜딩은 프로젝터와 프로젝터 사이의 일정한 공간 내 빛의 중첩을 요구하며, 중첩 부분은 두 개의 프로젝터 빛이 합쳐지므로 중첩되지 않는 부분과는 다르게 밝게 보여진다.

빛의 중첩되는 부분의 빛의 양을 조절(50%+50%, 30%+70%, 60%+:40% 등의 비율)하여 중첩 부분의 빛을 200%에서 100%로 맞춰 화면을 자연스럽게 이으며 삐뚤어진 부분을 조절하여 자연스럽게 만드는 것이다.

도 9를 참조하여 구체적으로 설명하자면, 일반TV모니터 화면 2개를 가로로 배열하였을 경우와 프로젝터 화면 2개를 가로로 배열하였을 경우를 나타내는데, 프로젝터 화면 2개를 가로로 배열하였을 경우는 에지 브랜딩 적용 전 예시이다.

도 10과 같이, 에지 브랜딩 처리시, 중첩 부분 에지 브랜딩 적용 1 및 에지 브랜딩 적용 2를 거쳐 프로젝터 1,2를 통해 최종 에지 브랜딩 작업을 완료하게 되는 것이다.

이때, 도 13과 같이, 에지 브랜딩 작업시 중첩 부분의 빛의 양을 50%씩 각각 줄임으로써, 도 14와 같은 파노라마 화면을 완성하게 되는 것이다.

특히, 상기 와핑처리모듈(153)은 화면투사면부 내 굴곡 및 흘러내리는 왜곡된 영상 이미지를 와핑 처리하기 위하여 구성한 것이다.

상기와 같은 에지 브랜딩, 파노라마 해상도, 와핑 처리를 통해 몰입감 향상과 시야가 넓어지는 효과, 동서남북 어느 방향에서도 노래를 부를 수 있는 상승 효과를 발휘한다.

도 6에 도시한 바와 같이, 와핑 처리는 화면투사면부에 투영되는 영상의 굴곡 혹은 흘러내리는 현상과 같은 화면의 왜곡을 제거하기 위하여 흘러내린 픽셀을 도면과 같이 올려 주거나, 아니면 내려 주어 왜곡 현상을 제거하는 것을 의미한다.

구체적으로 설명하자면, 모니터, TV와 같은 경우와는 다르게 프로젝터는 설치시 약간의 오류로 기울어져 투사될 수도 있고, 설치 부분이 잘못되어 옆의 프로젝터와 동일선 상이 되지 않아 화면의 크기가 약간씩 달라질 수 있다.

또한, 평면이 아닌 원형 또는 고르지 못한 면의 화면에 프로젝터를 투사하는 경우가 많다.

상기 모든 경우에 사용자가 원하는 화면을 충족할 수 없기 때문에 이러한 오류로 인하여 잦은 재설치를 요구하게 된다.

도 15와 같이, 와핑 처리는 실제 투사된 화면의 a,b,c,d 4군데 모서리를 지정하여 원하는 화면으로 보정하는 것이다.

도16 내지 도 20을 참조하여 구체적으로 설명하자면, 도 16과 같이, 사용자가 원하는 화면 좌표를 설정하게 되며, 도 17과 같이, 프로젝터 조정이 필요한 부분이 발생하게 된다.

이때, 도 18과 같이, 각 꼭지점이 투사 영상 내에 위치할 수 있도록 프로젝터를 설치하게 된다.

이때, 도 19와 같이, 화면이 고르지 않아 어긋난 화면이 발생하는데, a1 ~ a7, g1 ~ g7와 같이 좌표 설정하고, 좌표 설정된 점을 와핑 처리하여 각각 a ~ h 좌표선으로, g ~ n 좌표선으로 조정하게 되는 것이다.

결국, 와핑 처리에 의하여 도 20과 같이, 사용자가 원하는 화면으로 조정이 완료되는 것이다.

와핑 처리를 위하여 사용자에게 와핑 작업을 수행하기 위한 좌표 설정 프로그램을 제공하여 사용자가 원하는 화면에 임의의 좌표를 설정하게 하며, 프로젝터 투사 영상 내 a ~ n 꼭지점이 위치하도록 프로젝터를 조절하게 된다.

이후, a1 ~ a7, g1 ~ g7의 점을 와핑 처리하여 각각 a ~ h 좌표선으로 g ~ n 좌표선으로 조절하여 사용자가 원하는 화면으로 조정 완료하게 된다.

본 발명의 영상 보정을 수행하기 위하여 사용자가 원하는 영상, 좌표 등을 설정할 수 있는 프로그램을 제공하는 것은 일반적으로 알려진 기술이므로 상기한 정도의 설명만으로도 당업자들은 충분히 이해할 수 있으므로 이에 대한 상세한 설명은 생략하겠다.

이때, 본 발명에서는 상기 프로그램에 의해 설정된 설정치를 획득하여 영상 보정을 수행하게 되는 것이다.

한편, 몰입감향상영상음향생성수단(100)은 다수의 분할 영상을 제공할 경우에, 투사될 분할 영상 정보를 획득하여 분할 영상별 프로젝터를 설정하며, 프로젝터별 설정된 분할 영상 정보를 송출하기 위한 분할영상제공부(170)를 더 포함하여 구성할 수도 있다.

즉, 하나의 파노라마 영상을 제공할 수도 있으나, 화면투사면부가 원형 써클로 구성될 경우에 필요에 따라 어느 써클벽(410)에는 다른 영상을 출력할 수도 있기 때문에 분할영상제공부를 구성하게 된다.

예를 들어, 8면으로 원형 써클을 만들었다면 8면에 하나의 파노라마 영상을 제공할 수 있으며, 1면에는 A화면, 2면에는 B화면, 3 내지 8 화면에는 파노라마 영상인 C 화면을 제공할 수도 있다.

상기 분할 영상은 게임 엔진 구성시, 게임 분할 영상을 의미하게 된다.

상기와 같이, 구성한다면 국내외에서 각종 장소에 몰입감 및 생동감을 최고조로 제공할 수 있는 플랫폼을 제공할 수 있을 것이며, 화면투사면부 내에서 영상물을 구현하게 된다.

한편, 화면투사면부에 영상물을 투영하여 노래방에서의 몰입감을 증대시키지만, 필요에 따라 화면투사면부에 게임 영상을 제공할 수도 있다.

이를 위하여, 본 발명의 노래방 시스템은,

화면투사면부에 게임 영상을 제공하며, 음향출력장치에 게임 음향을 제공하여 게임을 진행시키기 위한 게임엔진부,

상기 게임 영상 및 게임 음향을 획득하여 게임 영상 효과 및 게임 음향 효과를 추가하여 이펙트효과를 제공하기 위한 이펙트처리부(140),

다수의 프로젝터를 통해 투사되는 다른 영상들을 하나의 파노라마로 구성되도록 각 영상 화면의 중첩된 부분을 에지 브랜딩 처리하는 것과, 화면투사면부 내 굴곡 및 흘러내리는 영상 이미지를 와핑 처리하는 것 중 적어도 어느 하나 이상을 처리하기 위한 화면보정부(150),

음향 정보를 음향출력장치로 제공하기 위한 음향정보제공부(160)를 포함하여 구성되는 몰입감향상영상음향생성수단(100);

상기 몰입감향상영상음향생성수단에 의해 생성된 영상을 화면투사면부에 투사시키는 다수의 프로젝터(200);

화면투사면부 내에 설치 구성되어 음향을 출력하기 위한 음향출력장치(300);

원형 혹은 곡면 혹은 다각형으로 구성되며, 몰입감향상영상음향생성수단에서 제공되는 영상을 구현하기 위한 화면투사면부(400);를 포함하여 구성되게 된다.

상기 게임엔진부는 노래방 화면에 투영되는 캐릭터 영상을 제공하기 위한 것일 수 있으며, 노래 부르기 이외에 총, 활, 칼 등을 이용하여 게임을 화면투사면부 내에서 진행할 수도 있기 때문에 구성하게 된 것이다.

즉, 화면투사면부에서 게임 영상을 제공하기 때문에 에지 브랜딩과 와핑 처리를 수행하게 된다.

그리고, 화면투사면부의 주변에 다수의 프로젝터 및 음향출력장치가 설치 구성되는 것은 당연한 것이다.

한편, 본 발명의 추가적인 구성에 따라 노래방 시스템은 삽입대상영상정보디비(500), 증강현실영상합성부(600)를 더 포함하여 구성할 수도 있다.

즉, 사전에 몰입감향상영상음향생성수단에 의해 처리된 영상에 포함될 인물이나 사물 영상 정보를 삽입대상영상정보디비(500)에 저장하고 있다가 특정 시점에 증강현실영상합성부(600)의 처리에 의하여 몰입감향상영상음향생성수단에 의해 처리된 영상과 인물이나 사물 영상을 합성하여 증강 현실 영상을 저작하고 해당 영상을 화면투사면부에 출력시키면 해당 인물이나 사물의 영상이 동시에 제공하여 흥미를 유발시킬 수 있을 것이다.

한편, 노래 화면 정보와 가사 정보를 저장하고 있는 노래정보디비(700),

상기 노래정보디비에 저장된 특정 노래 화면과 가사 정보를 추출하여 상기 몰입감향상영상음향생성수단에서 처리된 영상에 매칭시켜 프로젝터에 제공하기 위한 노래정보제공부(800)를 더 포함하여 구성되게 되면, 몰입감향상영상음향생성수단에 의해 처리된 영상에 노래 화면과 가사 정보가 추출되어 노래 부를 경우에 이를 참조하여 부를 수 있게 된다.

상기 음향출력장치는 노래방 기기 또는 동영상 파일에 포함된 음향을 재생하는 것으로서 사운드카드, 앰프를 이용하여 음향을 출력시키게 된다.

예를 들어, 전면우퍼와 전방좌측, 전방우측, 후방좌측, 후방우측에 설치되는 4대의 서브스피커로 구성된 서라운드 멀티채널 오디오 시스템을 구성하게 되면 실감나는 서라운드 사운드를 제공하여 생동감, 몰입감, 입체감 있는 음향을 구현할 수 있을 것이다.

다음은 파노라마 플레이에 대하여 설명하도록 하겠다.

우선, 텍스쳐의 인터페이스를 설정하는 과정이 수행된다.

텍스쳐 인터페이스 설정 과정은 텍스쳐 변수를 선언하는 과정으로서 다이렉트x가 사용될 경우 c++언어에서는 다음과 같이 설정될 수 있을 것이다.

d3dxcreatetexturefromfile(device,filename,texturepointer)function

LPDIRECT3DTEXTURE9 Texture=NULL;

텍스쳐 인터페이스가 설정된 후에는 텍스쳐의 좌표를 설정하는 과정이 수행된다.

이때, 설정되는 좌표는 텍스쳐가 삽입될 영역의 텍스쳐 자체의 2차원 좌표가 포함될 수 있다.

이와 같은 좌표는 c++언어의 구조체 형식으로 설정될 수 있을 것이며, 그 예는 다음과 같다.

struct CUSTOMVERTEX

{

d3dxvector3 d3dxvec3normalize;

d3dcolor color;

float u, v;

}

좌표가 설정된 후, 텍스쳐를 초기화하는 과정이 진행된다.

텍스쳐는 파일의 경로를 지정하는 방식 등을 통해 로드될 수 있고 로드된 영상이미지가 드로잉되는 메모리 영역을 지정함으로써, 텍스쳐를 로드하는 것이 바람직하다.

텍스쳐 로드에는 d3dxcreatetexturefromfile 함수 등이 이용될 수 있을 것이다.

텍스쳐가 삽입될 좌표에 대한 변수를 선언한다.

이후, 버텍스버퍼를 만들어 메모리에 저장하는 과정이 수행된다.

이후 텍스쳐에 대한 인덱스 버퍼를 만들어 메모리에 저장하는 과정이 수행된다

텍스쳐가 설정되면 텍스쳐가 입혀질 스테이지를 설정하는 과정이 수행된다.

스테이지가 설정이 되면 스테이지에 버텍스 버퍼장치의 데이터 스트림에 바인드(맵핑)하는 과정을 수행함으로써 렌더링 작업이 완료된다.

상기 과정의 c++ 형식으로 다음과 같은 함수가 나열될 수 있을 것이다.

lpdirect3dtexture9 m_pTex;

lpdirect3dvertexbuffer9 m_pvb;

lpdirect3dindexbuffer9 m_pib;

device->settexture(0, m_ptex);

device->setstreamsource(0, m_pvb, 0, sizeof(vert));

device->drawlndexedprimitive(d3dpt_trianglelist);

device->drawlndexedprimitive;

본 발명의 범위는 상기 상세한 설명보다는 후술하는 특허청구범위에 의하여 나타내어지며, 특허청구 범위의 의미 및 범위 그리고 그 등가 개념으로부터 도출되는 모든 변경 또는 변형된 형태가 본 발명의 범위에 포함되는 것으로 해석되어야 한다.

100 : 몰입감향상영상음향생성수단
200 : 프로젝터
300 : 음향출력장치
400 : 화면투사면부
500 : 삽입대상영상정보디비
600 : 증강현실영상합성부
700 : 노래정보디비
800 : 노래정보제공부

Claims (5)

1. 몰입감을 향상시키는 노래방 시스템에 있어서,
   영상 정보, 음향 정보를 저장하고 있는 영상음향정보저장부(110),
   상기 영상음향정보저장부에 저장된 영상 정보를 랜더링하기 위한 랜더링부(120),
   상기 랜더링부에 의해 랜더링된 영상 정보들을 취합하여 스티치 처리하기 위한 스티치처리부(130),
   상기 스티치처리부에 의해 스티치 처리된 영상 정보를 획득하여 영상 효과 및 음향 효과를 추가하여 이펙트효과를 제공하기 위한 이펙트처리부(140),
   다수의 프로젝터를 통해 투사되는 다른 영상들을 하나의 파노라마로 구성되도록 각 영상 화면의 중첩된 부분을 에지 브랜딩 처리하기 위한 에지브랜딩처리모듈(151),
   자연스러운 영상 제공을 위하여 일반 해상도 영상을 파노라마 해상도로 변환시키되, 일반 해상도의 영상 중 해상도가 가장 작은 해상도로 파노라마 해상도를 변환시키기 위한 파노라마해상도처리모듈(152),
   화면투사면부 내 굴곡 및 흘러내리는 현상의 왜곡된 영상 이미지를 와핑 처리하기 위한 와핑처리모듈(153) 중 적어도 어느 하나 이상을 포함하여 구성되는 화면보정부(150),
   음향 정보를 음향출력장치로 제공하기 위한 음향정보제공부(160),
   다수의 분할 영상을 제공할 경우에, 투사될 분할 영상 정보를 획득하여 분할 영상별 프로젝터를 설정하며, 프로젝터별 설정된 분할 영상 정보를 송출하기 위한 분할영상제공부(170)를 포함하여 구성되는 몰입감향상영상음향생성수단(100);
   상기 몰입감향상영상음향생성수단에 의해 생성된 영상을 화면투사면부에 투사시키는 다수의 프로젝터(200);
   화면투사면부 내에 설치 구성되어 음향을 출력하기 위한 음향출력장치(300);
   조립식 서클벽을 서로 연결하여 형성되는 원형 써클(360도 써클) 혹은 조립식 서클벽을 적어도 한 개 이상 서로 연결하여 형성되는 곡면 써클로 구성되며, 몰입감향상영상음향생성수단에서 제공되는 영상을 구현하기 위한 화면투사면부(400);
   노래 화면 정보와 가사 정보를 저장하고 있는 노래정보디비(700);
   상기 노래정보디비에 저장된 특정 노래 화면과 가사 정보를 추출하여 상기 몰입감향상영상음향생성수단에 의해 처리된 영상에 매칭시켜 프로젝터에 제공하기 위한 노래정보제공부(800);를 포함하여 구성되는 것을 특징으로 하는 몰입감을 향상시키는 노래방 시스템.
   
2. 삭제
3. 삭제
4. 삭제
5. 제 1항에 있어서,
   증강 현실 영상을 제공할 경우에,
   몰입감향상영상음향생성수단에 의해 처리된 영상에 포함될 인물이나 사물 영상 정보를 저장하고 있는 삽입대상영상정보디비(500);
   상기 몰입감향상영상음향생성수단에 의해 처리된 영상과 인물이나 사물 영상을 합성하여 증강 현실 영상을 저작하는 증강현실영상합성부(600);를 더 포함하여 구성되는 것을 특징으로 하는 몰입감을 향상시키는 노래방 시스템.
   

Images