KR101683385B1 - 360°실사 vr체험공간에 적용될 입체음향 레코딩 및 재생 방법 - Google Patents

Abstract

카메라 RIG(20)를 지지하는 지지대(10)와; 다수의 모노 마이크(30)가 설치되는 구 형상의 카메라 RIG(20)와; 상기 카메라 RIG(20)의 각각의 방향의 외주면에 각각 설치되는 다수의 모노 마이크(30); 로 구성되는 것으로, 상기 다수의 모노 마이크(30)를 해당하는 위치에 배치하여 각 공간에서 들려오는 사운드를 위상별로 레코딩하고, 마이크와 동일한 위치에 설치된 가상 스피커(40)를 이용하여 HMD 장비의 헤드트레킹 정보에 따라 위상별 스피커의 볼륨이 변화하도록 위상별로 재생하는 것으로,
따라서 본 발명에 따른 360°실사 VR체험공간에 적용될 입체음향 레코딩 및 재생 방법은 다른 형태의 레코딩 방법을 통해 시청각 모두 가상현실로 인지할 수 있도록 하고, 홀로포닉스 녹음 기술을 기반으로 하는 스테레오 기술과 사용자의 시각에 따라 위상이 변하는 입체음향기술을 알맞게 조절하여 360°실사 VR 체험공간의 장점을 부각시킬 수 있는 360°실사 VR체험공간에 적용될 입체음향 레코딩 및 재생 방법을 제공하는 현저한 효과가 있다.

Description

360°실사 VR체험공간에 적용될 입체음향 레코딩 및 재생 방법 { 360° due diligence stereo recording and playback method applied to the VR experience space }

본 발명은 360°실사 VR체험공간에 적용될 입체음향 레코딩 및 재생 방법에 관한 것으로, 더욱 상세하게는 HMD 장비의 헤드트레킹 정보 연동하여 입체감 있는 음향을 제공할 수 있는 레코딩 및 재생 솔루션을 제공하는 360°실사 VR체험공간에 적용될 입체음향 레코딩 및 재생 방법에 관한 것이다.

종래기술로서 등록특허공보 등록번호 제10-0725818호의 최적 가상음원을 제공하는 음향재생장치 및 음향재생방법에 의하면,복수 개의 가상음원 제공모드 중 하나의 제공모드에 대응하는 가상음원 위치 및 갯수에 대응하는 가상음향신호를, 입력된 하나 이상의 음향신호에 기초하여 생성하는 가상음향신호 생성부; 및 상기 가상음향신호를 소정 갯수의 출력채널에 대응된 출력 가상음향신호로 다운믹싱하는 가상음향신호 다운믹싱부;를 포함하며, 상기 가상음향신호 생성부는, 상기 하나 이상의 음향신호 중 적어도 둘 이상을 기초로 합산하여 합산 음향신호를 생성하는 합산기; 상기 하나 이상의 음향신호 중 적어도 둘 이상을 기초로 감산하여 감산 음향신호를 생성하는 감산기; 상기 하나 이상의 음향신호, 상기 합산 음향신호, 및 상기 감산 음향신호를 상기 생성대상 가상음원의 위치 및 갯수에 대응하여 기설정된 최적 이득으로 이득조절하는 이득조절부; 및 상기 이득조절된 상기 음향신호를 상기 생성대상 가상음원의 위치 및 갯수에 대응하여 기설정된 최적 신호전달필터에 의한 필터링과정을 수행하여 상기 가상음향신호를 생성하는 신호전달필터부;를 포함하는 것을 특징으로 하는 음향재생장치라고 기재되어 있다.

다른 종래기술로서 등록특허공보 등록번호 제10-0703923호의 멀티미디어기기를 위한 입체음향 최적화 장치 및 방법에 있어서, 음향변환기를 통해 음향을 재생하는 멀티미디어기기에서 최적의 입체음향을 재생하기 위한 장치로서, 재생할 오디오파일의 주파수 스펙트럼을 분석하여 배음성분을 생성함으로써 일정 저역차단주파수 이하의 주파수성분에 대한 저역주파수음을 발생시키는 저역주파수 배음성분 및 일정 고역차단주파수 이상의 주파수성분에 대한 고역주파수음을 발생시키는 고역주파수 배음성분을 복원하며, 상기 생성된 저역주파수 배음성분 및 고역주파수 배음성분의 레벨을 사용자가 설정한 저역주파수음의 레벨 설정값과, 고역주파수음의 레벨 설정값을 이용하여 조절한 후 상기 오디오파일의 저역차단주파수와 고역차단주파수 사이의 중역주파수성분과 혼합하여 출력하는 입체음향 프로세서부와; 고정된 레벨의 중역주파수 기준음과, 증감되는 레벨에 따른 저역/고역주파수 기준음을 교차 재생하고, 현재 재생되는 저역/고역주파수 기준음의 레벨을 저역주파수음/고역주파수음의 레벨로 설정하기 위한 사용자 입력 시 해당 기준음 레벨을 레벨 설정값으로서 상기 입체음향 프로세서부로 제공하는 배음성분 레벨 조절부;를 포함하는 것을 특징으로 하는 멀티미디어기기의 입체음향 최적화 장치라고 기재되어 있다.

그러나 상기와 같은 종래의 장치는 실사 360°VR 영상을 HMD(Head Mount Display)를 통해 재생할 때 이용되는 다수의 2.1 채널의 사운드를 방향별로 레코딩하지 못하며, HMD의 헤드트래킹 정보에 맞추어 입체음향을 조절하지 못하는 단점이 있었다.

따라서 본 발명 360°실사 VR체험공간에 적용될 입체음향 레코딩 및 재생 방법을 통하여, 다른 형태의 레코딩 방법을 통해 시청각 모두 가상현실로 인지할 수 있도록 하고자 하는 것으로, 한쪽 방향만을 계속 보는 경우 바이노럴 녹음기술인 홀로포닉스 녹음 기술을 통해 스테레오만으로도 입체를 구현할 수 있으나 사용자의 시각에 따라 위상이 변하는 사운드는 구현할 수 없기에, 상기를 해결할 수 있는 360°실사 VR체험공간에 적용될 입체음향 레코딩 및 재생 방법을 제공하고자 하는 것이다

본 발명은 카메라 RIG(20)를 지지하는 지지대(10)와; 다수의 모노 마이크(30)가 설치되는 구 형상의 카메라 RIG(20)와; 상기 카메라 RIG(20)의 각각의 방향의 외주면에 각각 설치되는 다수의 모노 마이크(30); 로 구성되는 것으로, 상기 다수의 모노 마이크(30)를 해당하는 위치에 배치하여 각 공간에서 들려오는 사운드를 위상별로 레코딩하고, 마이크와 동일한 위치에 설치된 가상 스피커(40)를 이용하여 HMD 장비의 헤드트레킹 정보에 따라 위상별 스피커의 볼륨이 변화하도록 위상별로 재생하는 것을 특징으로 한다.

본 발명에 따른 360°실사 VR체험공간에 적용될 입체음향 레코딩 및 재생 방법은 다른 형태의 레코딩 방법을 통해 시청각 모두 가상현실로 인지할 수 있도록 하고, 홀로포닉스 녹음 기술을 기반으로 하는 스테레오 기술과 사용자의 시각에 따라 위상이 변하는 입체음향기술을 알맞게 조절하여 360°실사 VR 체험공간의 장점을 부각시킬 수 있는 360°실사 VR체험공간에 적용될 입체음향 레코딩 및 재생 방법을 제공하는 현저한 효과가 있다.

도 1은 본 발명 360°실사 VR체험공간에 적용될 입체음향 레코딩 및 재생 방법의 레코딩을 위한 구성도
도 2는 본 발명 360°실사 VR체험공간에 적용될 입체음향 레코딩 및 재생 방법의 가상 스피커 배치 개념도

본 발명은 카메라 RIG(20)를 지지하는 지지대(10)와; 다수의 모노 마이크(30)가 설치되는 구 형상의 카메라 RIG(20)와; 상기 카메라 RIG(20)의 각각의 방향의 외주면에 각각 설치되는 다수의 모노 마이크(30); 로 구성되는 것으로, 상기 다수의 모노 마이크(30)를 해당하는 위치에 배치하여 각 공간에서 들려오는 사운드를 위상별로 레코딩하고, 마이크와 동일한 위치에 설치된 가상 스피커(40)를 이용하여 HMD 장비의 헤드트레킹 정보에 따라 위상별 스피커의 볼륨이 변화하도록 위상별로 재생하는 것을 특징으로 한다.

또한, 상기 카메라 RIG(20)는 외면부의 각각의 방향에 서로 일정각도가 되도록 모노 마이크(30)가 배치되는 것을 특징으로 한다.

또한, 상기 카메라 RIG(20)의 각각의 방향에 설치된 모노 마이크(30)는 거리에 의한 소리의 신호를 감지함으로써, 같은 소리라도 다른 위치에 구성되어 소리의 방향에 따라 다른 신호가 저장되는 것을 특징으로 한다.

또한, 상기 레코딩의 방법은 각각의 위치에 있는 모노 마이크(30)에서 입력되는 사운드를 HMD에 적용할 수 있도록 저장하는 것을 특징으로 한다.

또한, 상기 재생의 방법은 모노 마이크(30)가 설치된 것과 동일한 위치의 외주면에 NULL 오브젝트로 제작된 가상 스피커(40)를 배치함으로써, HMD의 헤드트레킹 방향에 따라 소리의 볼륨이 변화하도록 구성되는 것을 특징으로 한다.

본 발명을 첨부도면에 의해 상세히 설명하면 다음과 같다.

도 1은 본 발명 360°실사 VR체험공간에 적용될 입체음향 레코딩 및 재생 방법의 레코딩을 위한 구성도, 도 2는 본 발명 360°실사 VR체험공간에 적용될 입체음향 레코딩 및 재생 방법의 가상 스피커 배치 개념도이다.

본 발명에 대해 구체적으로 기술하면, 본 발명은 도 1과 같이, 카메라 RIG(20)를 지지하는 지지대(10)와; 다수의 모노 마이크(30)가 설치되는 구 형상의 카메라 RIG(20)와; 상기 카메라 RIG(20)의 각각의 방향의 외주면에 각각 설치되는 다수의 모노 마이크(30); 로 구성되는 것으로, 상기 다수의 모노 마이크(30)를 해당하는 위치에 배치하여 각 공간에서 들려오는 사운드를 위상별로 레코딩하고, 마이크와 동일한 위치에 설치된 가상 스피커(40)를 이용하여 HMD 장비의 헤드트레킹 정보에 따라 위상별 스피커의 볼륨이 변화하도록 위상별로 재생하는 것이다.

또한, 상기 지지대(10)는 다수 개의 다리(11)와, 각각의 다리(11)의 상단에 결합된 링형상의 지지판(12)으로 이루어지되, 상기 지지판(12)의 상면에 카메라 RIG(20)가 지지되는 것이다.

상기 다리(11)의 일실시예로써, 다리(11)는 지지판(12)으로부터 전과 후, 좌와 우 방향에 각각 설치되어 무게를 버티는 것이다.

상기 지지판(12)의 일실시예로써, 지지판(12)은 링형태의 내주면과 외주면이 높이가 낮고 내주면과 외주면 사이의 높이는 높고, 중심이 개구되어 있어서, 카메라 RIG(20)가 거치됐을 때 카메라 RIG(20)가 떨어지지 않도록 안정적으로 거치하는 것이다.

또한, 상기 카메라 RIG(20)는 외면부의 각각의 방향에 서로 일정각도가 되도록 모노 마이크(30)가 배치되는 것이다.

또한, 상기 카메라 RIG(20)의 일실시예로써, 카메라 RIG(20)는 구 형상으로 구성되어, 구의 중심을 기준으로 상, 하, 좌, 우, 전, 후 방향에 각각 90도 각도가 되도록 모노 마이크(30)가 배치되는 것이다.

또한, 상기 카메라 RIG(20)의 다른 일실시예로써, 카메라 RIG(20)는 구 형상으로 구성되어, 구의 중심을 기준으로 상, 하, 좌, 우, 전, 후 방향 외에도 각방향의 사이에 추가적으로 모노 마이크(30)가 규칙적으로 배치되는 것이다.

또한, 상기 모노 마이크(30)는 1개의 신호를 녹음하는 장치로써, 카메라 RIG(20)의 각각의 방향에 설치된 모노 마이크(30)는 거리에 의한 소리의 신호를 감지함으로써, 같은 소리라도 다른 위치에 구성되어 소리의 방향에 따라 다른 신호가 저장된다.

상기 모노 마이크(30)의 일실시예로써, 모노 마이크(30)는 카메라 RIG(20)의 외부방향으로 설치되어 각 방향에서의 소리를 따로 인식하기가 쉽다.

또한, 상기 레코딩의 방법은 각각의 위치에 있는 모노 마이크(30)에서 입력되는 사운드를 HMD에 적용할 수 있도록 저장하는 것이다.

상기 사운드의 일실시예로써, 사운드는 각 방향에 따른 모노 마이크의 소리와 HMD의 헤드트레킹 방향을 통하여 사운드를 조정하여 사용자에게 제공하는 것이다.

또한, 상기 재생의 방법은 도 2와 같이, 모노 마이크(30)가 설치된 것과 동일한 위치의 외주면에 NULL 오브젝트로 제작된 가상 스피커(40)를 배치함으로써, HMD의 헤드트레킹 방향에 따라 소리의 볼륨이 변화하도록 구성되는 것이다.

일반적으로 상기 HMD는 머리에 쓰는 것으로 눈앞에 거대한 가상화면을 보여주는 디스플레이 기기로써, 일실시예로써, 본 발명은 HMD를 사용하는 곳에 이용될 수 있다.

본 발명의 일실시예로써, 바다를 바라본다고 하였을 때 정면을 주시할 때에는 Left Sound와 Right Sound의 파도소리가 일정하게 들리겠지만 왼쪽 방향을 주시했을 때는 Left Sound가 작게 들리고 Right Sound가 더욱 크게 들려야함으로써, 이를 HMD를 통한 가상영상에 맞추어 적용할 수 있다.

따라서 본 발명에 따른 360°실사 VR체험공간에 적용될 입체음향 레코딩 및 재생 방법은 다른 형태의 레코딩 방법을 통해 시청각 모두 가상현실로 인지할 수 있도록 하고, 홀로포닉스 녹음 기술을 기반으로 하는 스테레오 기술과 사용자의 시각에 따라 위상이 변하는 입체음향기술을 알맞게 조절하여 360°실사 VR 체험공간의 장점을 부각시킬 수 있는 360°실사 VR체험공간에 적용될 입체음향 레코딩 및 재생 방법을 제공하는 현저한 효과가 있다.

10 : 지지대
11 : 다리 12 : 지지판
20 : 카메라 RIG
30 : 모노 마이크
40 : 가상 스피커

Claims (5)

1. 카메라 RIG(20)를 지지하는 지지대(10)와; 구 형상의 카메라 RIG(20)와; 상기 카메라 RIG(20)의 각각의 방향의 외주면에 각각 설치되는 다수 개의 모노 마이크(30); 로 이루어지는 360°실사 VR체험공간에 적용될 입체음향 레코딩 및 재생 방법에 있어서,
   상기 다수 개의 모노 마이크(30)는 각 위치에서 들려오는 사운드를 위상별로 레코딩하고, 마이크와 동일한 위치에 형성된 가상 스피커(40)를 이용하여 HMD 장비의 헤드트레킹 정보에 따라 위상별 스피커의 볼륨이 변화하도록 위상별로 재생하고,
   상기 카메라 RIG(20)의 외주면에는 다수 개의 모노 마이크(30)가 서로 일정각도를 이루도록 배치되고,
   상기 다수 개의 모노 마이크(30)는 거리에 의한 소리의 신호를 감지함으로써, 같은 소리라도 다른 위치에 구성되어 소리의 방향에 따라 다른 신호가 저장되고,
   상기 레코딩은 다수 개의 모노 마이크(30)에서 입력되는 사운드를 HMD 장비에 적용할 수 있도록 저장하는 것이며,
   상기 사운드는 각 방향에 따른 모노 마이크(30)의 소리와 HMD 장비의 헤드트레킹 방향을 통하여 사운드를 조정하여 사용자에게 제공하고,
   상기 재생은 다수 개의 모노 마이크(30)가 설치된 것과 동일한 위치의 외주면에 NULL 오브젝트로 제작된 가상 스피커(40)를 배치하여, HMD 장비의 헤드트레킹 방향에 따라 소리의 볼륨이 변화하도록 구성되고,
   상기 지지대(10)는 다수 개의 다리(11)와, 각각의 다리(11)의 상단에 결합된 링형상의 지지판(12)으로 이루어지되, 상기 지지판(12)의 상면에 카메라 RIG(20)가 지지되는 것으로,
   상기 다리(11)는 지지판(12)으로부터 전과 후, 좌와 우 방향에 각각 설치되어 무게를 버티는 것이며,
   상기 지지판(12)은 링형태의 내주면과 외주면이 높이가 낮고 내주면과 외주면 사이의 높이는 높고, 중심이 개구되어 있어서, 카메라 RIG(20)가 거치 됐을 때 카메라 RIG(20)가 떨어지지 않도록 안정적으로 거치하고,
   상기 카메라 RIG(20)는 구 형상으로 구성되어, 구의 중심을 기준으로 상, 하, 좌, 우, 전, 후 방향에 각각 각도가 90˚가 되도록 모노 마이크(30)가 배치되고,
   상기 카메라 RIG(20)는 상, 하, 좌, 우, 전, 후 방향 외에도 각방향의 사이에 추가적으로 모노 마이크(30)가 규칙적으로 배치되고,
   상기 모노 마이크(30)는 카메라 RIG(20)의 외부방향으로 설치되어 각 방향에서의 소리를 따로 인식하기 쉬운 것
   을 특징으로 하는 360°실사 VR체험공간에 적용될 입체음향 레코딩 및 재생 방법
   
2. 삭제
3. 삭제
4. 삭제
5. 삭제

Images