KR101851360B1 - 다채널 스피커 기반 플레이어 적응형 입체사운드 실시간 제공시스템 - Google Patents
다채널 스피커 기반 플레이어 적응형 입체사운드 실시간 제공시스템 Download PDFInfo
- Publication number
- KR101851360B1 KR101851360B1 KR1020160130669A KR20160130669A KR101851360B1 KR 101851360 B1 KR101851360 B1 KR 101851360B1 KR 1020160130669 A KR1020160130669 A KR 1020160130669A KR 20160130669 A KR20160130669 A KR 20160130669A KR 101851360 B1 KR101851360 B1 KR 101851360B1
- Authority
- KR
- South Korea
- Prior art keywords
- sound
- speaker
- unit
- channel
- player
- Prior art date
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04S—STEREOPHONIC SYSTEMS
- H04S7/00—Indicating arrangements; Control arrangements, e.g. balance control
- H04S7/30—Control circuits for electronic adaptation of the sound field
- H04S7/302—Electronic adaptation of stereophonic sound system to listener position or orientation
- H04S7/303—Tracking of listener position or orientation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04S—STEREOPHONIC SYSTEMS
- H04S3/00—Systems employing more than two channels, e.g. quadraphonic
- H04S3/002—Non-adaptive circuits, e.g. manually adjustable or static, for enhancing the sound image or the spatial distribution
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04S—STEREOPHONIC SYSTEMS
- H04S2400/00—Details of stereophonic systems covered by H04S but not provided for in its groups
- H04S2400/11—Positioning of individual sound objects, e.g. moving airplane, within a sound field
Landscapes
- Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- Acoustics & Sound (AREA)
- Signal Processing (AREA)
- Stereophonic System (AREA)
Abstract
본 발명은 다채널 스피커 기반 플레이어 적응형 입체사운드 실시간 제공시스템을 제공한다. 이와 같은 본 발명에 따른 다채널 스피커 기반 플레이어 적응형 입체사운드 실시간 제공시스템은 인터랙티브 게임컨텐츠를 비롯한 각종 인터랙티브 영상컨텐츠를 현재 체험하고 있는 플레이어의 현재 위치 및 플레이어 조작기(게임용 총 등)의 현재 동작/현재 지향방향을 기준으로 한 입체사운드가 실시간으로 생성되어 출력되도록 함으로써 입체사운드의 현실 근접도를 극대화시킬 수 있고, 이를 통해 사운드 체감도와 인터랙티브 영상에 대한 몰입도를 증대시킬 수 있는 기술적 이점을 갖는다.
본 발명에 따른 다채널 스피커 기반 플레이어 적응형 입체사운드 실시간 제공시스템은 인터랙티브 영상컨텐츠의 입체사운드 구현을 위한 채널별 사운드유닛을 각각 출력시키는 설정 개수의 스피커(11)로 구성된 설정 종류의 스피커 시스템으로 이루어지고, 복수의 스피커(11)로부터 출력된 채널별 사운드유닛의 합성에 의한 합성 입체사운드가 유효하게 제공되는 영역인 입체사운드 유효영역을 둘러싸면서 복수의 스피커(11)가 서로 이격되게 배치되도록 하되, 배치위치별 스피커 채널에 맞추어 달리 할당되는 채널별 사운드유닛이 각 스피커(11)로 전달되어 출력되는 다채널 스피커 유닛(10)과; 플레이어의 현재 위치를 검출하는 플레이어 현재 위치검출유닛(20)과; 입체사운드 유효영역에 위치한 플레이어 조작기(1)의 현재 동작정보와 현재 지향방향 정보를 검출하는 플레이어 조작기 현재정보 검출유닛(30)과; 인터랙티브 영상컨텐츠에 연동되는 소스 사운드정보를 다채널 스피커 유닛(10)의 사운드 채널 특성에 맞추어진 복수의 채널별 소스 사운드유닛의 조합으로 설정하는 소스 사운드정보 설정유닛(40)과; 플레이어의 현재 위치정보, 플레이어 조작기(1)의 현재 동작정보와 현재 지향방향 정보에 연동되는 이벤트 사운드정보를 실시간으로 생성하되, 플레이어의 현재 위치정보와 플레이어 조작기(1)의 현재 지향방향을 기준으로 한 각 스피커(11)의 상대위치를 산출하고, 산출된 각 스피커(11)의 상대위치 별로 달리 할당되는 채널별 이벤트 사운드유닛의 조합으로 이벤트 사운드정보를 생성하는 이벤트 사운드정보 생성유닛(50)과; 소스 사운드정보 설정유닛(40)과 이벤트 사운드정보 생성유닛(50)으로부터 채널별 소스 사운드유닛과 채널별 이벤트 사운드유닛을 전달받아 다채널 스피커 유닛(10)의 각 스피커(11)로 전송하는 채널별 사운드유닛 전송유닛(60)을 포함하여, 플레이어 조작기(1)의 사용으로 발생되는 이벤트 사운드의 입체적인 구현이 가능해지도록 한다.
본 발명에 따른 다채널 스피커 기반 플레이어 적응형 입체사운드 실시간 제공시스템은 인터랙티브 영상컨텐츠의 입체사운드 구현을 위한 채널별 사운드유닛을 각각 출력시키는 설정 개수의 스피커(11)로 구성된 설정 종류의 스피커 시스템으로 이루어지고, 복수의 스피커(11)로부터 출력된 채널별 사운드유닛의 합성에 의한 합성 입체사운드가 유효하게 제공되는 영역인 입체사운드 유효영역을 둘러싸면서 복수의 스피커(11)가 서로 이격되게 배치되도록 하되, 배치위치별 스피커 채널에 맞추어 달리 할당되는 채널별 사운드유닛이 각 스피커(11)로 전달되어 출력되는 다채널 스피커 유닛(10)과; 플레이어의 현재 위치를 검출하는 플레이어 현재 위치검출유닛(20)과; 입체사운드 유효영역에 위치한 플레이어 조작기(1)의 현재 동작정보와 현재 지향방향 정보를 검출하는 플레이어 조작기 현재정보 검출유닛(30)과; 인터랙티브 영상컨텐츠에 연동되는 소스 사운드정보를 다채널 스피커 유닛(10)의 사운드 채널 특성에 맞추어진 복수의 채널별 소스 사운드유닛의 조합으로 설정하는 소스 사운드정보 설정유닛(40)과; 플레이어의 현재 위치정보, 플레이어 조작기(1)의 현재 동작정보와 현재 지향방향 정보에 연동되는 이벤트 사운드정보를 실시간으로 생성하되, 플레이어의 현재 위치정보와 플레이어 조작기(1)의 현재 지향방향을 기준으로 한 각 스피커(11)의 상대위치를 산출하고, 산출된 각 스피커(11)의 상대위치 별로 달리 할당되는 채널별 이벤트 사운드유닛의 조합으로 이벤트 사운드정보를 생성하는 이벤트 사운드정보 생성유닛(50)과; 소스 사운드정보 설정유닛(40)과 이벤트 사운드정보 생성유닛(50)으로부터 채널별 소스 사운드유닛과 채널별 이벤트 사운드유닛을 전달받아 다채널 스피커 유닛(10)의 각 스피커(11)로 전송하는 채널별 사운드유닛 전송유닛(60)을 포함하여, 플레이어 조작기(1)의 사용으로 발생되는 이벤트 사운드의 입체적인 구현이 가능해지도록 한다.
Description
본 발명은 다채널 스피커 기반 플레이어 적응형 입체사운드 실시간 제공시스템에 관한 것으로, 좀더 구체적으로는 인터랙티브 게임컨텐츠를 비롯한 각종 인터랙티브 영상컨텐츠를 현재 체험하고 있는 플레이어의 현재 위치 및 플레이어 조작기(게임용 총 등)의 현재 동작/현재 지향방향을 기준으로 한 입체사운드가 실시간으로 생성되어 출력되도록 함으로써 입체사운드의 현실 근접도를 극대화시킬 수 있고, 이를 통해 사운드 체감도와 인터랙티브 영상에 대한 몰입도를 증대시킬 수 있는 다채널 스피커 기반 플레이어 적응형 입체사운드 실시간 제공시스템에 관한 것이다.
전기전자기술 및 멀티미디어 기술의 발달에 힘입어 가상 현실(VR:virtual reality)을 기반으로 하는 영상컨텐츠가 많이 활용되고 있다. 여기서 가상 현실을 이용자에게 실제 상황으로 인식시키기 위해서는 입체사운드 효과가 필수적이다. 입체사운드는 이용자에게 몰입감(immersion), 상호작용(interaction), 상상력(imagination)의 작용을 통해 리얼리티한 상황 연출을 가능하게 하는 중요한 요소이기 때문이다.
이와 같은 입체사운드의 구현기술과 관련하여 대한민국 공개특허공보 공개번호 제10-2015-0100305호 "입체 사운드를 재생하는 방법 및 장치", 공개번호 제10-1999-0034393호 "그룹 가상현실환경에 적합한 3차원 사운드 채널설정장치" 등이 안출되어 있다.
한편 유니티(Unity)는 3D 비디오게임, 건축 시각화, 실시간 3D 애니메이션 등의 인터랙티브 콘텐츠를 제작하기 위한 통합 제작 도구로서, 유니티를 기반으로 한 콘텐츠 제작에 연동되는 사운드 작업을 위한 편의 기능을 갖춘 작업 도구인 사운드 툴을 구비하고 있는데, 유니티에 구비된 사운드 툴은 가상현실 컨텐츠에 대하여 디테일한 음향 효과를 표현하기에는 부족한 부분이 있다.
특히 가상현실 콘텐츠 제작의 경우, 이용자가 콘텐츠 이용시 실제 상황처럼 실감하게 하기 위해서는 입체적인 사운드 조정이 절실히 필요하고 제작시 실시간으로 수정 및 채널에 따라 배치가능한 사운드 툴의 제작이 우선시되어야 하나, 종래의 유니티 사운드 툴을 통해서는 이를 구현하기 어려웠다. 이에 따라 대부분의 가상현실 콘텐츠 개발사에서는 개발 시 연출의도에 따라 게임엔진 내에서 미세한 커스터마이징을 할 수 있는 사운드 툴의 필요성을 절실히 느끼고 있다.
삭제
삭제
따라서 본 발명은 이와 같은 종래 기술의 문제점을 개선하여, 플레이어 현재 위치검출유닛과 플레이어 조작기 현재정보 검출유닛이 구비되어 플레이어의 현재 위치 및 플레이어 조작기(게임용 총 등)의 현재 동작/현재 지향방향이 검출되고, 이벤트 사운드정보 생성유닛이 구비되어 인터랙티브 영상컨텐츠의 플레이어 현재 위치 및 플레이어 조작기(게임용 총 등)의 현재 동작/현재 지향방향에 맞추어진 입체사운드가 실시간으로 생성되는 구조를 제공하여 입체사운드의 현실 근접도가 극대화되도록 하고, 이를 통해 사운드 체감도와 인터랙티브 영상에 대한 몰입도가 증대되도록 하는 새로운 형태의 다채널 스피커 기반 플레이어 적응형 입체사운드 실시간 제공시스템을 제공하는 것을 목적으로 한다.
상술한 목적을 달성하기 위한 본 발명의 특징에 의하면, 본 발명은 인터랙티브 영상컨텐츠의 입체사운드 구현을 위한 채널별 사운드유닛을 각각 출력시키는 설정 개수의 스피커(11)로 구성된 설정 종류의 스피커 시스템으로 이루어지고, 복수의 스피커(11)로부터 출력된 채널별 사운드유닛의 합성에 의한 합성 입체사운드가 유효하게 제공되는 영역인 입체사운드 유효영역을 둘러싸면서 복수의 스피커(11)가 서로 이격되게 배치되도록 하되, 배치위치별 스피커 채널에 맞추어 달리 할당되는 채널별 사운드유닛이 각 스피커(11)로 전달되어 출력되는 다채널 스피커 유닛(10)과; 플레이어의 현재 위치를 검출하는 플레이어 현재 위치검출유닛(20)과; 입체사운드 유효영역에 위치한 플레이어 조작기(1)의 현재 동작정보와 현재 지향방향 정보를 검출하는 플레이어 조작기 현재정보 검출유닛(30)과; 인터랙티브 영상컨텐츠에 연동되는 소스 사운드정보를 다채널 스피커 유닛(10)의 사운드 채널 특성에 맞추어진 복수의 채널별 소스 사운드유닛의 조합으로 설정하는 소스 사운드정보 설정유닛(40)과; 플레이어의 현재 위치정보, 플레이어 조작기(1)의 현재 동작정보와 현재 지향방향 정보에 연동되는 이벤트 사운드정보를 실시간으로 생성하되, 플레이어의 현재 위치정보와 플레이어 조작기(1)의 현재 지향방향을 기준으로 한 각 스피커(11)의 상대위치를 산출하고, 산출된 각 스피커(11)의 상대위치 별로 달리 할당되는 채널별 이벤트 사운드유닛의 조합으로 이벤트 사운드정보를 생성하는 이벤트 사운드정보 생성유닛(50)과; 소스 사운드정보 설정유닛(40)과 이벤트 사운드정보 생성유닛(50)으로부터 채널별 소스 사운드유닛과 채널별 이벤트 사운드유닛을 전달받아 다채널 스피커 유닛(10)의 각 스피커(11)로 전송하는 채널별 사운드유닛 전송유닛(60)을 포함하여, 플레이어 조작기(1)의 사용으로 발생되는 이벤트 사운드의 입체적인 구현이 가능해지도록 하는 것을 특징으로 하는 다채널 스피커 기반 플레이어 적응형 입체사운드 실시간 제공시스템을 제공한다.
이와 같은 본 발명에 따른 다채널 스피커 기반 플레이어 적응형 입체사운드 실시간 제공시스템에서 이벤트 사운드정보 생성유닛(50)은, 플레이어 조작기(1)의 현재 지향방향을 기준으로 한 각 스피커(11)의 이격각도를 산출하는 스피커 이격각도 산출모듈(51a)과; 각 스피커(11)의 플레이어 조작기 현재 지향방향 기준 이격각도에 대응하여 각 스피커(11)의 배치위치별 스피커 채널을 재설정하는 스피커 채널 재설정모듈(52a)과; 플레이어 조작기(1)의 현재 동작정보에 해당되는 이벤트 소스 사운드정보를 생성하는 이벤트 소스 사운드정보 생성모듈(53)과; 다채널 스피커 유닛(10)의 스피커 시스템 종류에 맞추어 이벤트 소소 사운드정보로부터 채널별 이벤트 사운드유닛을 생성시키는 채널별 이벤트 사운드유닛 생성모듈(54)과; 재설정된 배치위치별 스피커 채널에 맞추어 각 스피커(11)에 채널별 이벤트 사운드유닛을 할당시키는 채널별 이벤트 사운드유닛 할당모듈(55)을 포함하는 구성으로 이루어질 수 있다. 여기서 이벤트 사운드정보 생성유닛(50)은, 플레이어 조작기 지향방향을 기준으로 한 좌우측 제1기준각도 영역에 속한 사운드 집중영역, 플레이어 조작기 지향방향을 기준으로 한 좌우측 제1기준각도와 제2기준각도 영역 사이의 사운드 분산영역, 플레이어 조작기 지향방향을 기준으로 한 좌우측 제2기준각도 외부 영역에 속한 사운드 잔향영역이 설정되는 사운드영역 분할설정모듈(57)과; 각 스피커(11)의 플레이어 조작기 현재 지향방향 기준 이격각도로부터 각 스피커(11)를 사운드 집중영역, 사운드 분산영역, 사운드 잔향영역에 할당시키는 스피커 사운드영역 할당모듈(58) 및; 각 스피커(11)에 할당된 채널별 이벤트 사운드유닛에 해당 스피커(11)가 속한 사운드 영역에 대응하여 설정된 사운드편집용 가중치를 부여하여 영역 가중치 부여 채널별 이벤트 사운드유닛을 생성시키는 영역 가중치 부여 채널별 이벤트 사운드유닛 생성모듈(59)을 더 포함하는 구성으로 이루어질 수 있다.
이와 같은 본 발명에 따른 다채널 스피커 기반 플레이어 적응형 입체사운드 실시간 제공시스템은 플레이어 조작기(1)의 현재 동작에 반응하는 인터랙티브 영상컨텐츠의 NPC 반응동작에 연동되는 반응이벤트 사운드정보를 실시간으로 생성하되, 플레이어의 현재 위치정보와 플레이어 조작기(1)의 현재 지향방향을 기준으로 한 각 스피커(11)의 상대위치를 산출하고, 산출된 각 스피커(11)의 상대위치 별로 달리 할당되는 채널별 반응이벤트 사운드유닛의 조합으로 반응이벤트 사운드정보를 생성하는 반응이벤트 사운드정보 생성유닛(80)을 더 포함하고, 채널별 사운드유닛 전송유닛(60)은 소스 사운드정보 설정유닛(40)과 이벤트 사운드정보 생성유닛(50) 및 반응이벤트 사운드정보 생성유닛(80)으로부터 채널별 소스 사운드유닛과 채널별 이벤트 사운드유닛 및 채널별 반응이벤트 사운드유닛을 전달받아 다채널 스피커 유닛(10)의 각 스피커(11)로 전송할 수 있다.
이와 같은 본 발명에 따른 다채널 스피커 기반 플레이어 적응형 입체사운드 실시간 제공시스템에서 플레이어 조작기 현재정보 검출유닛(30)은 플레이어 조작기(1)로 사용되는 게임용 총(1a)의 격발 동작을 현재 동작정보로 검출하는 한편 게임용 총(1a)의 사격방향을 현재 지향방향 정보로 검출하고, 이벤트 사운드정보 생성유닛(50)은, 게임용 총(1a)의 사격방향을 기준으로 한 각 스피커(11)의 이격각도를 산출하는 스피커 이격각도 산출모듈(51a)과; 플레이어의 현재 위치를 기준으로 한 각 스피커(11)의 이격거리를 산출하는 스피커 이격거리 산출모듈(51b)과; 각 스피커(11)의 게임용 총 현재 사격방향 기준 이격각도에 대응하여 각 스피커(11)의 배치위치별 스피커 채널을 재설정하는 스피커 채널 재설정모듈(52a)과; 각 스피커(11)의 플레이어 기준 이격거리 및 게임용 총 현재 사격방향 기준 이격각도에 대응하여 사운드 우세순위를 스피커(11) 별로 설정하는 사운드 우세순위 설정모듈(52b)과; 게임용 총(1a)의 격발 동작시 격발이벤트 소스 사운드정보를 생성하는 격발이벤트 소스 사운드정보 생성모듈(53a)과; 다채널 스피커 유닛(10)의 스피커 시스템 종류에 맞추어 격발이벤트 소소 사운드정보로부터 채널별 격발이벤트 사운드유닛을 생성시키는 채널별 격발이벤트 사운드유닛 생성모듈(54a)과; 재설정된 배치위치별 스피커 채널에 맞추어 각 스피커(11)에 채널별 격발이벤트 사운드유닛을 할당시키는 채널별 격발이벤트 사운드유닛 할당모듈(55a) 및; 사운드 우세순위 설정모듈(52b)에 의해 설정된 사운드 우세순위에 맞추어 각 스피커(11)에 할당된 채널별 격발이벤트 사운드유닛의 출력크기와 출력시작 시각을 조정하는 사운드유닛 조정모듈(56)을 포함하는 구성으로 이루어질 수 있다.
이와 같은 본 발명에 따른 다채널 스피커 기반 플레이어 적응형 입체사운드 실시간 제공시스템에서 이벤트 사운드정보 생성유닛(50)은, 플레이어 조작기 지향방향을 기준으로 한 좌우측 제1기준각도 영역에 속한 사운드 집중영역, 플레이어 조작기 지향방향을 기준으로 한 좌우측 제1기준각도와 제2기준각도 영역 사이의 사운드 분산영역, 플레이어 조작기 지향방향을 기준으로 한 좌우측 제2기준각도 외부 영역에 속한 사운드 잔향영역이 설정되는 사운드영역 분할설정모듈(57)과; 플레이어 조작기(1)의 현재 지향방향을 기준으로 한 각 스피커(11)의 이격각도를 산출하는 스피커 이격각도 산출모듈(51a)과; 각 스피커(11)의 플레이어 조작기 현재 지향방향 기준 이격각도로부터 각 스피커(11)를 사운드 집중영역, 사운드 분산영역, 사운드 잔향영역에 할당시키는 스피커 사운드영역 할당모듈(58)과; 사운드 집중영역, 사운드 분산영역, 사운드 잔향영역 별로 사운드 특성치 및 사운드 출력패턴을 달리한 채널별 이벤트 사운드유닛을 생성시키고, 생성된 채널별 이벤트 사운드유닛을 해당 스피커(11)에 할당하는 채널별 이벤트 사운드유닛 생성모듈(54)을 포함하는 구성으로 이루어질 수도 있다.
이와 같은 본 발명에 따른 다채널 스피커 기반 플레이어 적응형 입체사운드 실시간 제공시스템에서 소스 사운드정보 설정유닛(40)은, 플레이어의 현재 위치를 기준으로 한 각 스피커(11)의 이격거리를 산출하고, 각 스피커(11)에 설정되는 채널별 소스 사운드유닛에 해당 스피커(11)의 이격거리에 대응하는 사운드편집용 가중치를 부여하여 거리 가중치 부여 채널별 소스 사운드유닛을 생성시키게 되고, 이벤트 사운드정보 생성유닛(50)은, 플레이어의 현재 위치를 기준으로 한 각 스피커(11)의 이격거리를 산출하고, 각 스피커(11)에 설정되는 채널별 이벤트 사운드유닛에 해당 스피커(11)의 이격거리에 대응하는 사운드편집용 가중치를 부여하여 거리 가중치 부여 채널별 이벤트 사운드유닛을 생성시키게 될 수 있다.
본 발명에 의한 다채널 스피커 기반 플레이어 적응형 입체사운드 실시간 제공시스템에 의하면, 인터랙티브 게임컨텐츠를 비롯한 각종 인터랙티브 영상컨텐츠를 현재 체험하고 있는 플레이어의 현재 위치 및 플레이어 조작기(게임용 총 등)의 현재 동작/현재 지향방향을 기준으로 한 입체사운드가 실시간으로 생성되어 출력되도록 하므로, 입체사운드의 현실 근접도가 극대화되고, 이를 통해 사운드 체감도와 인터랙티브 영상에 대한 몰입도가 증대되는 효과가 있다.
도 1은 본 발명에 따른 다채널 스피커 기반 플레이어 적응형 입체사운드 실시간 제공시스템의 기본 구성블록도;
도 2는 본 발명의 제1실시예에 따른 다채널 스피커 유닛을 구현하는 5.1채널 스피커 시스템의 예시도;
도 3은 본 발명의 제2실시예에 따른 다채널 스피커 유닛을 구현하는 7.1채널 스피커 시스템의 예시도;
도 4는 본 발명의 제3실시예에 따른 다채널 스피커 유닛을 구현하는 원형배열 스피커 시스템의 예시도;
도 5는 본 발명의 실시예에 따른 플레이어 조작기의 구성블록도;
도 6은 본 발명에 따른 다채널 스피커 기반 플레이어 적응형 입체사운드 실시간 제공시스템에서 이벤트 발생에 의해 스피커 채널이 변경되는 것을 보여주기 위한 도면;
도 7은 본 발명에 따른 다채널 스피커 기반 플레이어 적응형 입체사운드 실시간 제공시스템의 입체사운드 출력 관리서버의 구성블록도;
도 8은 본 발명의 제1실시예에 따른 이벤트 사운드정보 생성유닛의 구성블록도;
도 9는 본 발명에 따른 다채널 스피커 기반 플레이어 적응형 입체사운드 실시간 제공시스템에서 스피커의 이격각도에 따라 스피커 채널이 변경되는 것을 보여주기 위한 도면;
도 10은 반응이벤트 사운드정보 생성유닛이 구비된 본 발명에 따른 다채널 스피커 기반 플레이어 적응형 입체사운드 실시간 제공시스템의 기본 구성블록도;
도 11은 본 발명의 제2실시예에 따른 이벤트 사운드정보 생성유닛의 구성블록도;
도 12와 도 13은 본 발명의 제2실시예에 따른 이벤트 사운드정보 생성유닛에 의해 사운드 우세순위가 설정되는 것을 보여주기 위한 도면;
도 14는 본 발명의 제3실시예에 따른 이벤트 사운드정보 생성유닛의 구성블록도;
도 15는 본 발명의 제3실시예에 따른 이벤트 사운드정보 생성유닛에 의해 분할설정된 사운드영역에 각 스피커가 할당되는 것을 보여주기 위한 도면;
도 16은 본 발명의 제4실시예에 따른 이벤트 사운드정보 생성유닛의 구성블록도이다.
도 2는 본 발명의 제1실시예에 따른 다채널 스피커 유닛을 구현하는 5.1채널 스피커 시스템의 예시도;
도 3은 본 발명의 제2실시예에 따른 다채널 스피커 유닛을 구현하는 7.1채널 스피커 시스템의 예시도;
도 4는 본 발명의 제3실시예에 따른 다채널 스피커 유닛을 구현하는 원형배열 스피커 시스템의 예시도;
도 5는 본 발명의 실시예에 따른 플레이어 조작기의 구성블록도;
도 6은 본 발명에 따른 다채널 스피커 기반 플레이어 적응형 입체사운드 실시간 제공시스템에서 이벤트 발생에 의해 스피커 채널이 변경되는 것을 보여주기 위한 도면;
도 7은 본 발명에 따른 다채널 스피커 기반 플레이어 적응형 입체사운드 실시간 제공시스템의 입체사운드 출력 관리서버의 구성블록도;
도 8은 본 발명의 제1실시예에 따른 이벤트 사운드정보 생성유닛의 구성블록도;
도 9는 본 발명에 따른 다채널 스피커 기반 플레이어 적응형 입체사운드 실시간 제공시스템에서 스피커의 이격각도에 따라 스피커 채널이 변경되는 것을 보여주기 위한 도면;
도 10은 반응이벤트 사운드정보 생성유닛이 구비된 본 발명에 따른 다채널 스피커 기반 플레이어 적응형 입체사운드 실시간 제공시스템의 기본 구성블록도;
도 11은 본 발명의 제2실시예에 따른 이벤트 사운드정보 생성유닛의 구성블록도;
도 12와 도 13은 본 발명의 제2실시예에 따른 이벤트 사운드정보 생성유닛에 의해 사운드 우세순위가 설정되는 것을 보여주기 위한 도면;
도 14는 본 발명의 제3실시예에 따른 이벤트 사운드정보 생성유닛의 구성블록도;
도 15는 본 발명의 제3실시예에 따른 이벤트 사운드정보 생성유닛에 의해 분할설정된 사운드영역에 각 스피커가 할당되는 것을 보여주기 위한 도면;
도 16은 본 발명의 제4실시예에 따른 이벤트 사운드정보 생성유닛의 구성블록도이다.
이하, 본 발명의 실시예를 첨부된 도면 도 1 내지 도 16에 의거하여 상세히 설명한다. 한편, 도면과 상세한 설명에서 일반적인 스피커, 다채널 스피커 시스템, 5.1 채널 스피커 시스템, 7.1 채널 스피커 시스템, 원형 배열 스피커 시스템, 입체사운드 구현, 인터랙티브 영상컨텐츠, 플레이어 조작기, 게임용 총 등으로부터 이 분야의 종사자들이 용이하게 알 수 있는 구성 및 작용에 대한 도시 및 언급은 간략히 하거나 생략하였다. 특히 도면의 도시 및 상세한 설명에 있어서 본 발명의 기술적 특징과 직접적으로 연관되지 않는 요소의 구체적인 기술적 구성 및 작용에 대한 상세한 설명 및 도시는 생략하고, 본 발명과 관련되는 기술적 구성만을 간략하게 도시하거나 설명하였다.
본 발명에 따른 다채널 스피커 기반 플레이어 적응형 입체사운드 실시간 제공시스템(100)은 플레이어 조작기(1)의 사용으로 발생되는 이벤트 사운드의 입체적인 구현이 가능해지도록 하는 것으로, 특히 3D 영상컨텐츠/인터랙티브 영상컨텐츠/게임 컨텐츠 등의 제작에 사용되는 유니티(Unity)에 효과적으로 적용되어 유니트 기반의 제작 컨텐츠에 연동된 입체 사운드의 구현을 위한 사운드 작업도구로 활용될 수 있다. 물론 본 발명에 따른 다채널 스피커 기반 플레이어 적응형 입체사운드 실시간 제공시스템(100)이 유니티에 한정되어 사용되는 것은 아니고, 다양한 3D 영상컨텐츠/인터랙티브 영상컨텐츠/게임 컨텐츠 제작 프로그램이나 입체사운드 제작툴, 입체사운드 시스템 등에 적용될 수 있다.
이를 위한 본 발명에 따른 다채널 스피커 기반 플레이어 적응형 입체사운드 실시간 제공시스템(100)은 도 1에서와 같이 다채널 스피커 유닛(10), 플레이어 현재 위치검출유닛(20), 플레이어 조작기 현재정보 검출유닛(30), 소스 사운드정보 설정유닛(40), 이벤트 사운드정보 생성유닛(50), 채널별 사운드유닛 전송유닛(60)을 포함하는 구성으로 이루어진다.
다채널 스피커 유닛(10)은 설정 종류의 스피커 시스템으로 이루어지는 것으로, 인터랙티브 영상컨텐츠의 입체사운드 구현을 위한 채널별 사운드유닛을 각각 출력시키는 설정 개수의 스피커(11)로 구성된다. 즉 다채널 스피커 유닛(10)은 도 2에서와 같이 5.1채널 스피커 시스템으로 이루어질 수도 있고, 도 3에서와 같이 7.1채널 스피커 시스템으로 이루어질 수도 있으며, 도 4에서와 같이 원형 배열 스피커 시스템으로 이루어질 수도 있다. 이외에 다채널 스피커 유닛(10)은 9.1채널 스피커 시스템, 11.2채널 스피커 시스템, 22.2채널 스피커 시스템 등으로 이루어질 수도 있다.
이와 같은 다채널 스피커 유닛(10)은 복수의 스피커(11)로부터 출력된 채널별 사운드유닛의 합성에 의한 합성 입체사운드가 유효하게 제공되는 영역인 입체사운드 유효영역을 둘러싸면서 복수의 스피커(11)가 서로 이격되게 배치되도록 하는데, 배치위치별 스피커 채널에 맞추어 달리 할당되는 채널별 사운드유닛이 각 스피커(11)로 전달되어 출력된다.
플레이어 현재 위치검출유닛(20)은 플레이어의 현재 위치를 검출하는 것으로, 영상촬영장치에 의한 영상촬영으로 플레이어의 현재 위치를 검출할 수도 있고, 본 발명에 따른 입체사운드 실시간 제공시스템(100)이 설치되는 영역의 설정 지점에 설치되는 위치검출센서를 통해 플레이어의 현재 위치를 검출할 수도 있으며, 플레이어가 착용하거나 소지하게 되는 위치검출센서를 통해 플레이어의 현재 위치를 검출할 수도 있다.
플레이어 조작기 현재정보 검출유닛(30)은 입체사운드 유효영역에 위치한 플레이어가 소지하게 되는 플레이어 조작기(1)의 현재 동작정보와 현재 지향방향 정보를 검출하는 유닛이다. 인터랙티브 영상컨텐츠가 게임 컨텐츠일 경우, 플레이어 조작기(1)로는 게임용 총(1a)이 사용될 수 있으며, 게임용 총(1a)의 격발 동작이 플레이어 조작기(1)의 현재 동작정보로 검출되는 한편 게임용 총(1a)의 사격방향이 플레이어 조작기(1)의 현재 지향방향 정보로 검출될 수 있다.
여기서 플레이어 조작기 현재정보 검출유닛(30)은 플레이어 조작기(1)에 배치되는 것일 수 있다. 이와 같은 플레이어 조작기 현재정보 검출유닛(30)이 배치된 플레이어 조작기(1)는 도 5에서와 같이 조작기 본체(2), 컨트롤러(3), 방향정보 검출센서(4), 통신모듈(5)을 포함하는 구성으로 이루어질 수 있다.
조작기 본체(2)는 사용자가 소지하면서 사용자에 의해 조작되는 것으로, 스위치, 선택버튼 등이 설치되어 있을 수 있다. 플레이어 조작기(1)가 게임용 총(1a)일 경우, 조작기 본체(2)는 방아쇠를 구비하게 된다.
컨트롤러(3)는 조작기 본체(2)에 내장되는 것으로, 사용자의 조작기 본체 조작으로부터 플레이어 조작기(1)의 현재 동작정보를 산출하게 된다. 플레이어 조작기(1)가 게임용 총(1a)일 경우 컨트롤러(3)는 방아쇠에 연결되어 방아쇠 조작에 따른 격발 동작을 플레이어 조작기 현재 동작정보로 산출하게 된다.
방향정보 검출센서(4)는 조작기 본체(2)에 설치되어 조작기 본체(2)의 움직임 정보를 센싱하는 것으로, 센싱된 조작기 본체(2)의 움직임 정보로부터 플레이어 조작기(1)의 현재 지향방향 정보를 산출하게 된다. 이와 같은 방향정보 검출센서(4)로는 지자기 센서, 자이로 센서 등이 사용될 수 있다.
통신모듈(5)은 컨트롤러(3)와 방향정보 검출센서(4)로부터 플레이어 조작기(1)의 현재 동작정보와 현재 지향방향 정보를 전달받아 이벤트 사운드정보 생성유닛(50)으로 전송하는 모듈이다. 이와 같은 통신모듈(5)로는 블루투스 통신기 등이 사용될 수 있다.
소스 사운드정보 설정유닛(40)은 인터랙티브 영상컨텐츠에 연동되는 소스 사운드정보를 다채널 스피커 유닛(10)의 사운드 채널 특성에 맞추어진 복수의 채널별 소스 사운드유닛의 조합으로 설정하는 유닛이다. 여기서 소스 사운드정보 설정유닛(40)은 플레이어의 현재 위치를 기준으로 한 각 스피커(11)의 이격거리를 산출하고, 각 스피커(11)에 설정되는 채널별 소스 사운드유닛에 해당 스피커(11)의 이격거리에 대응하는 사운드편집용 가중치를 부여하여 거리 가중치 부여 채널별 소스 사운드유닛을 생성시킬 수도 있다.
이벤트 사운드정보 생성유닛(50)은 플레이어의 현재 위치정보, 플레이어 조작기(1)의 현재 동작정보와 현재 지향방향 정보에 연동되는 이벤트 사운드정보를 실시간으로 생성하는 유닛이다. 이를 위하여 이벤트 사운드정보 생성유닛(50)은 플레이어의 현재 위치정보와 플레이어 조작기(1)의 현재 지향방향을 기준으로 한 각 스피커(11)의 상대위치를 산출하고, 산출된 각 스피커(11)의 상대위치 별로 달리 할당되는 채널별 이벤트 사운드유닛의 조합으로 이벤트 사운드정보를 생성하게 된다. 예를 들어 5.1 채널 스피커 시스템으로 이루어진 다채널 스피커 유닛(10)에서 게임용 총(1a)의 격발 동작 이벤트 발생시 도 2에서와 같은 플레이어 조작기 현재 지향방향을 가질 경우, 플레이어 조작기 현재 지향방향을 기준으로 각 스피커(11)의 상대위치가 달라지면서 원래의 각 스피커(11)에 할당된 배치위치별 스피커 채널이 도 6에서와 같이 변경된다.
여기서 이벤트 사운드정보 생성유닛(50)은 플레이어의 현재 위치를 기준으로 한 각 스피커(11)의 이격거리를 산출하고, 각 스피커(11)에 설정되는 채널별 이벤트 사운드유닛에 해당 스피커(11)의 이격거리에 대응하는 사운드편집용 가중치를 부여하여 거리 가중치 부여 채널별 이벤트 사운드유닛을 생성시킬 수도 있다.
채널별 사운드유닛 전송유닛(60)은 소스 사운드정보 설정유닛(40)과 이벤트 사운드정보 생성유닛(50)으로부터 채널별 소스 사운드유닛과 채널별 이벤트 사운드유닛을 전달받아 다채널 스피커 유닛(10)의 각 스피커(11)로 전송하는 유닛이다.
여기서 본 발명의 실시예에 따른 다채널 스피커 기반 플레이어 적응형 입체사운드 실시간 제공시스템(100)은 도 7에서와 같이 입체사운드 출력 관리서버(70)에 소스 사운드정보 설정유닛(40), 이벤트 사운드정보 생성유닛(50), 채널별 사운드유닛 전송유닛(60)이 구비되도록 한다. 이와 같은 입체사운드 출력 관리서버(70)는 본 발명에 따른 입체사운드 실시간 제공시스템(100)이 설치되는 영역의 설정 지점에 설치될 수 있다.
한편 본 발명에 따른 다채널 스피커 기반 플레이어 적응형 입체사운드 실시간 제공시스템(100)은 도 8에서와 같이 반응이벤트 사운드정보 생성유닛(80)을 구비할 수 있다.
반응이벤트 사운드정보 생성유닛(80)은 플레이어 조작기(1)의 현재 동작에 반응하는 인터랙티브 영상컨텐츠의 NPC 반응동작에 연동되는 반응이벤트 사운드정보를 실시간으로 생성하는 유닛으로, 플레이어의 현재 위치정보와 플레이어 조작기(1)의 현재 지향방향을 기준으로 한 각 스피커(11)의 상대위치를 산출하고, 산출된 각 스피커(11)의 상대위치 별로 달리 할당되는 채널별 반응이벤트 사운드유닛의 조합으로 반응이벤트 사운드정보를 생성하게 된다.
이에 대응하여 채널별 사운드유닛 전송유닛(60)은 소스 사운드정보 설정유닛(40)과 이벤트 사운드정보 생성유닛(50) 및 반응이벤트 사운드정보 생성유닛(80)으로부터 채널별 소스 사운드유닛과 채널별 이벤트 사운드유닛 및 채널별 반응이벤트 사운드유닛을 전달받아 다채널 스피커 유닛(10)의 각 스피커(11)로 전송하게 된다.
이와 같은 본 발명에 따른 다채널 스피커 기반 플레이어 적응형 입체사운드 실시간 제공시스템(100)은 플레이어 조작기(1)의 사용으로 발생되는 이벤트 사운드의 입체적인 구현이 가능해지도록 하는 것으로, 이벤트 사운드의 입체적인 구현을 위한 이벤트 사운드정보 생성유닛(50)은 다양한 구성으로 이루어질 수 있다.
여기서 본 발명의 제1실시예에 따른 이벤트 사운드정보 생성유닛(50)은 도 9에서와 같이 스피커 이격각도 산출모듈(51a), 스피커 채널 재설정모듈(52a), 이벤트 소스 사운드정보 생성모듈(53), 채널별 이벤트 사운드유닛 생성모듈(54), 채널별 이벤트 사운드유닛 할당모듈(55)을 포함하는 구성으로 이루어진다.
스피커 이격각도 산출모듈(51a)은 도 10에서와 같이 플레이어 조작기(1)의 현재 지향방향을 기준으로 한 각 스피커(11)의 이격각도를 산출하는 모듈이다.
스피커 채널 재설정모듈(52a)은 각 스피커(11)의 플레이어 조작기 현재 지향방향 기준 이격각도에 대응하여 각 스피커(11)의 배치위치별 스피커 채널을 재설정하는 모듈이다. 예를 들어 도 10에서와 같이 각 스피커(11)의 원래 배치위치별 스피커 채널인 (1) 내지 (8)은 도 10에 도시된 플레이어 조작기 현재 지향방향을 기준으로 변경된 배치위치별 스피커 채널 ① 내지 ⑧로 재설정된다.
이벤트 소스 사운드정보 생성모듈(53)은 플레이어 조작기(1)의 현재 동작정보에 해당되는 이벤트 소스 사운드정보를 생성하는 모듈이다. 플레이어 조작기(1)가 게임용 총(1a)인 경우 격발로부터 야기되는 사운드가 이벤트 소스 사운드로 생성된다.
채널별 이벤트 사운드유닛 생성모듈(54)은 다채널 스피커 유닛(10)의 스피커 시스템 종류에 맞추어 이벤트 소소 사운드정보로부터 채널별 이벤트 사운드유닛을 생성시키는 모듈이다.
채널별 이벤트 사운드유닛 할당모듈(55)은 재설정된 배치위치별 스피커 채널에 맞추어 각 스피커(11)에 채널별 이벤트 사운드유닛을 할당시키는 모듈이다.
한편 플레이어 조작기 현재정보 검출유닛(30)이 플레이어 조작기(1)로 사용되는 게임용 총(1a)의 격발 동작을 플레이어 조작기 현재 동작정보로 검출하는 한편 게임용 총(1a)의 사격방향을 플레이어 조작기 현재 지향방향 정보로 검출하는 경우에 대응하는 본 발명의 제2실시예에 따른 이벤트 사운드정보 생성유닛(50)은 도 11에서와 같이 스피커 이격각도 산출모듈(51a), 스피커 이격거리 산출모듈(51b), 스피커 채널 재설정모듈(52a), 사운드 우세순위 설정모듈(52b), 격발이벤트 소스 사운드정보 생성모듈(53a), 채널별 격발이벤트 사운드유닛 생성모듈(54a), 채널별 격발이벤트 사운드유닛 할당모듈(55a), 사운드유닛 조정모듈(56)을 포함하는 구성으로 이루어진다.
스피커 이격각도 산출모듈(51a)은 게임용 총(1a)의 사격방향을 기준으로 한 각 스피커(11)의 이격각도를 산출하는 모듈이고, 스피커 이격거리 산출모듈(51b)은 플레이어의 현재 위치를 기준으로 한 각 스피커(11)의 이격거리를 산출하는 모듈이다.
스피커 채널 재설정모듈(52a)은 각 스피커(11)의 게임용 총 현재 사격방향 기준 이격각도에 대응하여 각 스피커(11)의 배치위치별 스피커 채널을 재설정하는 모듈이다.
사운드 우세순위 설정모듈(52b)은 각 스피커(11)의 플레이어 기준 이격거리 및 게임용 총 현재 사격방향 기준 이격각도에 대응하여 사운드 우세순위를 스피커(11) 별로 설정하는 모듈이다. 예를 들어 게임용 총(1a)의 격발 동작에 따른 총알의 이동을 고려하여 도 12에서와 같이 사운드 우세순위 [1]은 사운드 선출력-스피커(4), 사운드 후출력-스피커(2)로 설정하고, 사운드 우세순위 [2]는 사운드 선출력-스피커(4), 사운드 후출력-스피커(1)로 설정하며, 사운드 우세순위 [3]은 사운드 선출력-스피커(4), 사운드 후출력-스피커(3)으로 설정하고, 사운드 우세순위 [4]는 사운드 선출력-스피커(4), 사운드 후출력-스피커(5)로 설정할 수 있다. 여기서 플레이어의 격발 동작에 대응하는 인터랙티브 영상컨텐츠의 NPC 반응동작(NPC의 격발 동작)에 연동되는 반응이벤트 사운드정보를 생성하기 위하여 사운드 우세순위 설정모듈(52b)은 도 13에서와 같이 사운드 우세순위 [1] 내지 [4]를 설정할 수 있다.
격발이벤트 소스 사운드정보 생성모듈(53a)은 플레이어 조작기(1)의 현재 동작에 반응하는 인터랙티브 영상컨텐츠의 NPC 반응동작에 연동되는 반응이벤트 사운드정보를 실시간으로 생성하는 유닛으로, 플레이어의 현재 위치정보와 플레이어 조작기(1)의 현재 지향방향을 기준으로 한 각 스피커(11)의 상대위치를 산출하고, 산출된 각 스피커(11)의 상대위치 별로 달리 할당되는 채널별 반응이벤트 사운드유닛의 조합으로 반응이벤트 사운드정보를 생성하게 된다.
격발이벤트 소스 사운드정보 생성모듈(53a)은 게임용 총(1a)의 격발 동작시 격발이벤트 소스 사운드정보를 생성하는 모듈이고, 채널별 격발이벤트 사운드유닛 생성모듈(54a)은 다채널 스피커 유닛(10)의 스피커 시스템 종류에 맞추어 격발이벤트 소소 사운드정보로부터 채널별 격발이벤트 사운드유닛을 생성시키는 모듈이다.
채널별 격발이벤트 사운드유닛 할당모듈(55a)은 재설정된 배치위치별 스피커 채널에 맞추어 각 스피커(11)에 채널별 격발이벤트 사운드유닛을 할당시키는 모듈이고, 사운드유닛 조정모듈(56)은 사운드 우세순위 설정모듈(52b)에 의해 설정된 사운드 우세순위에 맞추어 각 스피커(11)에 할당된 채널별 격발이벤트 사운드유닛의 출력크기와 출력시작 시각을 조정하는 모듈이다.
그리고 본 발명의 제3실시예에 따른 이벤트 사운드정보 생성유닛(50)은 도 14에서와 같이 본 발명의 제1실시예에 따른 이벤트 사운드정보 생성유닛(50)에 사운드영역 분할설정모듈(57), 스피커 사운드영역 할당모듈(58), 영역 가중치 부여 채널별 이벤트 사운드유닛 생성모듈(59)을 추가적으로 구비하는 것으로, 인간의 생체특성(인간의 귀 위치 및 청각계 생체구조에 따른 사운드 수용 특성 등) 및 사운드 전달특성에 따라 구분되는 사운드 영역 별 특성이 고려되도록 한 것이다.
사운드영역 분할설정모듈(57)은 도 15에서와 같이 플레이어 조작기 지향방향을 기준으로 한 좌우측 제1기준각도 영역에 속한 사운드 집중영역, 플레이어 조작기 지향방향을 기준으로 한 좌우측 제1기준각도와 제2기준각도 영역 사이의 사운드 분산영역, 플레이어 조작기 지향방향을 기준으로 한 좌우측 제2기준각도 외부 영역에 속한 사운드 잔향영역이 설정되는 모듈이다.
스피커 사운드영역 할당모듈(58)은 각 스피커(11)의 플레이어 조작기 현재 지향방향 기준 이격각도로부터 각 스피커(11)를 사운드 집중영역, 사운드 분산영역, 사운드 잔향영역에 할당시키는 모듈이다.
영역 가중치 부여 채널별 이벤트 사운드유닛 생성모듈(59)은 각 스피커(11)에 할당된 채널별 이벤트 사운드유닛에 해당 스피커(11)가 속한 사운드 영역에 대응하여 설정된 사운드편집용 가중치를 부여하여 영역 가중치 부여 채널별 이벤트 사운드유닛을 생성시키는 모듈이다.
한편 인간의 생체특성(인간의 귀 위치 및 청각계 생체구조에 따른 사운드 수용 특성 등) 및 사운드 전달특성에 따라 구분되는 사운드 영역 별 특성만을 고려하여 이벤트 사운드정보가 생성되도록 할 수도 있는데, 이를 위한 본 발명의 제4실시예에 따른 이벤트 사운드정보 생성유닛(50)은 도 16에서와 같이 사운드영역 분할설정모듈(57), 스피커 이격각도 산출모듈(51a), 스피커 사운드영역 할당모듈(58), 채널별 이벤트 사운드유닛 생성모듈(54)을 포함하는 구성으로 이루어진다.
사운드영역 분할설정모듈(57)은 플레이어 조작기 지향방향을 기준으로 한 좌우측 제1기준각도 영역에 속한 사운드 집중영역, 플레이어 조작기 지향방향을 기준으로 한 좌우측 제1기준각도와 제2기준각도 영역 사이의 사운드 분산영역, 플레이어 조작기 지향방향을 기준으로 한 좌우측 제2기준각도 외부 영역에 속한 사운드 잔향영역이 설정되는 모듈이다.
스피커 이격각도 산출모듈(51a)은 플레이어 조작기(1)의 현재 지향방향을 기준으로 한 각 스피커(11)의 이격각도를 산출하는 모듈이다.
스피커 사운드영역 할당모듈(58)은 각 스피커(11)의 플레이어 조작기 현재 지향방향 기준 이격각도로부터 각 스피커(11)를 사운드 집중영역, 사운드 분산영역, 사운드 잔향영역에 할당시키는 모듈이다.
채널별 이벤트 사운드유닛 생성모듈(54)은 사운드 집중영역, 사운드 분산영역, 사운드 잔향영역 별로 사운드 특성치 및 사운드 출력패턴을 달리한 채널별 이벤트 사운드유닛을 생성시키고, 생성된 채널별 이벤트 사운드유닛을 해당 스피커(11)에 할당하는 모듈이다.
상기와 같이 구성된 본 발명의 실시예에 따른 다채널 스피커 기반 플레이어 적응형 입체사운드 실시간 제공시스템(100)은 플레이어 현재 위치검출유닛(20)과 플레이어 조작기 현재정보 검출유닛(30)을 구비하여 플레이어의 현재 위치 및 플레이어 조작기(게임용 총 등)의 현재 동작/현재 지향방향을 검출하고, 이벤트 사운드정보 생성유닛(50)을 구비하여 인터랙티브 영상컨텐츠의 플레이어 현재 위치 및 플레이어 조작기(게임용 총 등)의 현재 동작/현재 지향방향에 맞추어진 입체사운드를 실시간으로 생성하는 구조를 제공하므로, 입체사운드의 현실 근접도가 극대화되도록 하고, 이를 통해 사운드 체감도와 인터랙티브 영상에 대한 몰입도가 증대되도록 한다.
상술한 바와 같은, 본 발명의 실시예에 따른 다채널 스피커 기반 플레이어 적응형 입체사운드 실시간 제공시스템을 상기한 설명 및 도면에 따라 도시하였지만, 이는 예를 들어 설명한 것에 불과하며 본 발명의 기술적 사상을 벗어나지 않는 범위 내에서 다양한 변화 및 변경이 가능하다는 것을 이 분야의 통상적인 기술자들은 잘 이해할 수 있을 것이다.
1 : 플레이어 조작기
1a : 게임용 총
2 : 조작기 본체
3 : 컨트롤러
4 : 방향정보 검출센서
5 : 통신모듈
10 : 다채널 스피커 유닛
11 : 스피커
20 : 플레이어 현재 위치검출유닛
30 : 플레이어 조작기 현재정보 검출유닛
40 : 소스 사운드정보 설정유닛
50 : 이벤트 사운드정보 생성유닛
51a : 스피커 이격각도 산출모듈
51b : 스피커 이격거리 산출모듈
52a : 스피커 채널 재설정모듈
52b : 사운드 우세순위 설정모듈
53 : 이벤트 소스 사운드정보 생성모듈
53a : 격발이벤트 소스 사운드정보 생성모듈
54 : 채널별 이벤트 사운드유닛 생성모듈
54a : 채널별 격발이벤트 사운드유닛 생성모듈
55 : 채널별 이벤트 사운드유닛 할당모듈
55a : 채널별 격발이벤트 사운드유닛 할당모듈
56 : 사운드유닛 조정모듈
57 : 사운드영역 분할설정모듈
58 : 스피커 사운드영역 할당모듈
59 : 영역 가중치 부여 채널별 이벤트 사운드유닛 생성모듈
60 : 채널별 사운드유닛 전송유닛
70 : 입체사운드 출력 관리서버
80 : 반응이벤트 사운드정보 생성유닛
100 : 입체사운드 실시간 제공시스템
1a : 게임용 총
2 : 조작기 본체
3 : 컨트롤러
4 : 방향정보 검출센서
5 : 통신모듈
10 : 다채널 스피커 유닛
11 : 스피커
20 : 플레이어 현재 위치검출유닛
30 : 플레이어 조작기 현재정보 검출유닛
40 : 소스 사운드정보 설정유닛
50 : 이벤트 사운드정보 생성유닛
51a : 스피커 이격각도 산출모듈
51b : 스피커 이격거리 산출모듈
52a : 스피커 채널 재설정모듈
52b : 사운드 우세순위 설정모듈
53 : 이벤트 소스 사운드정보 생성모듈
53a : 격발이벤트 소스 사운드정보 생성모듈
54 : 채널별 이벤트 사운드유닛 생성모듈
54a : 채널별 격발이벤트 사운드유닛 생성모듈
55 : 채널별 이벤트 사운드유닛 할당모듈
55a : 채널별 격발이벤트 사운드유닛 할당모듈
56 : 사운드유닛 조정모듈
57 : 사운드영역 분할설정모듈
58 : 스피커 사운드영역 할당모듈
59 : 영역 가중치 부여 채널별 이벤트 사운드유닛 생성모듈
60 : 채널별 사운드유닛 전송유닛
70 : 입체사운드 출력 관리서버
80 : 반응이벤트 사운드정보 생성유닛
100 : 입체사운드 실시간 제공시스템
Claims (7)
- 인터랙티브 영상컨텐츠의 입체사운드 구현을 위한 채널별 사운드유닛을 각각 출력시키는 설정 개수의 스피커(11)로 구성된 설정 종류의 스피커 시스템으로 이루어지고, 복수의 스피커(11)로부터 출력된 채널별 사운드유닛의 합성에 의한 합성 입체사운드가 유효하게 제공되는 영역인 입체사운드 유효영역을 둘러싸면서 복수의 스피커(11)가 서로 이격되게 배치되도록 하되, 배치위치별 스피커 채널에 맞추어 달리 할당되는 채널별 사운드유닛이 각 스피커(11)로 전달되어 출력되는 다채널 스피커 유닛(10)과;
영상촬영장치에 의한 영상촬영이나 영역의 설정 지점에 설치되는 위치검출센서를 통해 플레이어의 현재 위치를 검출하는 플레이어 현재 위치검출유닛(20)과;
입체사운드 유효영역에 위치한 플레이어 조작기(1)의 현재 동작정보와 현재 지향방향 정보를 검출하는 플레이어 조작기 현재정보 검출유닛(30)과;
인터랙티브 영상컨텐츠에 연동되는 소스 사운드정보를 다채널 스피커 유닛(10)의 사운드 채널 특성에 맞추어진 복수의 채널별 소스 사운드유닛의 조합으로 설정하는 소스 사운드정보 설정유닛(40)과;
플레이어의 현재 위치정보, 플레이어 조작기(1)의 현재 동작정보와 현재 지향방향 정보에 연동되는 이벤트 사운드정보를 실시간으로 생성하되, 플레이어의 현재 위치정보와 플레이어 조작기(1)의 현재 지향방향을 기준으로 한 각 스피커(11)의 상대위치를 산출하고, 산출된 각 스피커(11)의 상대위치 별로 달리 할당되는 채널별 이벤트 사운드유닛의 조합으로 이벤트 사운드정보를 생성하는 이벤트 사운드정보 생성유닛(50)과;
소스 사운드정보 설정유닛(40)과 이벤트 사운드정보 생성유닛(50)으로부터 채널별 소스 사운드유닛과 채널별 이벤트 사운드유닛을 전달받아 다채널 스피커 유닛(10)의 각 스피커(11)로 전송하는 채널별 사운드유닛 전송유닛(60)을 포함하여,
플레이어 조작기(1)의 사용으로 발생되는 이벤트 사운드의 입체적인 구현이 가능해지도록 하는 것을 특징으로 하는 다채널 스피커 기반 플레이어 적응형 입체사운드 실시간 제공시스템. - 제 1항에 있어서,
이벤트 사운드정보 생성유닛(50)은,
플레이어 조작기(1)의 현재 지향방향을 기준으로 한 각 스피커(11)의 이격각도를 산출하는 스피커 이격각도 산출모듈(51a)과;
각 스피커(11)의 플레이어 조작기 현재 지향방향 기준 이격각도에 대응하여 각 스피커(11)의 배치위치별 스피커 채널을 재설정하는 스피커 채널 재설정모듈(52a)과;
플레이어 조작기(1)의 현재 동작정보에 해당되는 이벤트 소스 사운드정보를 생성하는 이벤트 소스 사운드정보 생성모듈(53)과;
다채널 스피커 유닛(10)의 스피커 시스템 종류에 맞추어 이벤트 소스 사운드정보로부터 채널별 이벤트 사운드유닛을 생성시키는 채널별 이벤트 사운드유닛 생성모듈(54)과;
재설정된 배치위치별 스피커 채널에 맞추어 각 스피커(11)에 채널별 이벤트 사운드유닛을 할당시키는 채널별 이벤트 사운드유닛 할당모듈(55)을 포함하는 것을 특징으로 하는 다채널 스피커 기반 플레이어 적응형 입체사운드 실시간 제공시스템. - 제 2항에 있어서,
플레이어 조작기(1)의 현재 동작에 반응하는 인터랙티브 영상컨텐츠의 NPC 반응동작에 연동되는 반응이벤트 사운드정보를 실시간으로 생성하되, 플레이어의 현재 위치정보와 플레이어 조작기(1)의 현재 지향방향을 기준으로 한 각 스피커(11)의 상대위치를 산출하고, 산출된 각 스피커(11)의 상대위치 별로 달리 할당되는 채널별 반응이벤트 사운드유닛의 조합으로 반응이벤트 사운드정보를 생성하는 반응이벤트 사운드정보 생성유닛(80)을 더 포함하고,
소스 사운드정보 설정유닛(40)과 이벤트 사운드정보 생성유닛(50) 및 반응이벤트 사운드정보 생성유닛(80)으로부터 채널별 소스 사운드유닛과 채널별 이벤트 사운드유닛 및 채널별 반응이벤트 사운드유닛을 전달받아 다채널 스피커 유닛(10)의 각 스피커(11)로 전송하는 채널별 사운드유닛 전송유닛(60)을 포함하는 것을 특징으로 하는 다채널 스피커 기반 플레이어 적응형 입체사운드 실시간 제공시스템. - 삭제
- 삭제
- 제 1항에 있어서,
이벤트 사운드정보 생성유닛(50)은,
플레이어 조작기 지향방향을 기준으로 한 좌우측 제1기준각도 영역에 속한 사운드 집중영역, 플레이어 조작기 지향방향을 기준으로 한 좌우측 제1기준각도와 제2기준각도 영역 사이의 사운드 분산영역, 플레이어 조작기 지향방향을 기준으로 한 좌우측 제2기준각도 외부 영역에 속한 사운드 잔향영역이 설정되는 사운드영역 분할설정모듈(57)과;
플레이어 조작기(1)의 현재 지향방향을 기준으로 한 각 스피커(11)의 이격각도를 산출하는 스피커 이격각도 산출모듈(51a)과;
각 스피커(11)의 플레이어 조작기 현재 지향방향 기준 이격각도로부터 각 스피커(11)를 사운드 집중영역, 사운드 분산영역, 사운드 잔향영역에 할당시키는 스피커 사운드영역 할당모듈(58)과;
사운드 집중영역, 사운드 분산영역, 사운드 잔향영역 별로 사운드 특성치 및 사운드 출력패턴을 달리한 채널별 이벤트 사운드유닛을 생성시키고, 생성된 채널별 이벤트 사운드유닛을 해당 스피커(11)에 할당하는 채널별 이벤트 사운드유닛 생성모듈(54); 및
각 스피커(11)에 할당된 채널별 이벤트 사운드유닛에 해당 스피커(11)가 속한 사운드 영역에 대응하여 설정된 사운드편집용 가중치를 부여하여 영역 가중치 부여 채널별 이벤트 사운드유닛을 생성시키는 영역 가중치 부여 채널별 이벤트 사운드유닛 생성모듈(59);을 포함하는 것을 특징으로 하는 다채널 스피커 기반 플레이어 적응형 입체사운드 실시간 제공시스템. - 삭제
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020160130669A KR101851360B1 (ko) | 2016-10-10 | 2016-10-10 | 다채널 스피커 기반 플레이어 적응형 입체사운드 실시간 제공시스템 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020160130669A KR101851360B1 (ko) | 2016-10-10 | 2016-10-10 | 다채널 스피커 기반 플레이어 적응형 입체사운드 실시간 제공시스템 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| KR20180039409A KR20180039409A (ko) | 2018-04-18 |
| KR101851360B1 true KR101851360B1 (ko) | 2018-04-23 |
Family
ID=62082927
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| KR1020160130669A KR101851360B1 (ko) | 2016-10-10 | 2016-10-10 | 다채널 스피커 기반 플레이어 적응형 입체사운드 실시간 제공시스템 |
Country Status (1)
| Country | Link |
|---|---|
| KR (1) | KR101851360B1 (ko) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US11032508B2 (en) | 2018-09-04 | 2021-06-08 | Samsung Electronics Co., Ltd. | Display apparatus and method for controlling audio and visual reproduction based on user's position |
Families Citing this family (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR102225492B1 (ko) * | 2019-05-08 | 2021-03-10 | 넷마블 주식회사 | 게임 사운드 제공 방법 및 장치 |
| EP3989605A4 (en) * | 2019-06-21 | 2022-08-17 | Sony Group Corporation | SIGNAL PROCESSING DEVICE AND METHOD AND PROGRAM |
| KR102227489B1 (ko) * | 2019-07-10 | 2021-03-15 | 김영언 | 음원 시각화 장치 및 방법 |
Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2010200212A (ja) * | 2009-02-27 | 2010-09-09 | Sony Corp | 情報処理装置および方法、並びにプログラム |
| JP2014090293A (ja) * | 2012-10-30 | 2014-05-15 | Fujitsu Ltd | 情報処理装置、音像定位強調方法、及び音像定位強調プログラム |
| WO2015157102A2 (en) * | 2014-04-08 | 2015-10-15 | Eon Reality, Inc. | Interactive virtual reality systems and methods |
-
2016
- 2016-10-10 KR KR1020160130669A patent/KR101851360B1/ko active IP Right Grant
Patent Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2010200212A (ja) * | 2009-02-27 | 2010-09-09 | Sony Corp | 情報処理装置および方法、並びにプログラム |
| JP2014090293A (ja) * | 2012-10-30 | 2014-05-15 | Fujitsu Ltd | 情報処理装置、音像定位強調方法、及び音像定位強調プログラム |
| WO2015157102A2 (en) * | 2014-04-08 | 2015-10-15 | Eon Reality, Inc. | Interactive virtual reality systems and methods |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US11032508B2 (en) | 2018-09-04 | 2021-06-08 | Samsung Electronics Co., Ltd. | Display apparatus and method for controlling audio and visual reproduction based on user's position |
Also Published As
| Publication number | Publication date |
|---|---|
| KR20180039409A (ko) | 2018-04-18 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| KR101851360B1 (ko) | 다채널 스피커 기반 플레이어 적응형 입체사운드 실시간 제공시스템 | |
| US8160265B2 (en) | Method and apparatus for enhancing the generation of three-dimensional sound in headphone devices | |
| US5469511A (en) | Method and apparatus for presentation of on-line directional sound | |
| EP2922313B1 (en) | Audio signal processing device and audio signal processing system | |
| JP2021528001A (ja) | 双方向オーディオ環境のための空間オーディオ | |
| JP7338626B2 (ja) | 情報処理装置、情報処理方法及びプログラム | |
| US9174119B2 (en) | Controller for providing inputs to control execution of a program when inputs are combined | |
| CN107277736B (zh) | 模拟系统、声音处理方法及信息存储介质 | |
| EP2942980A1 (en) | Real-time control of an acoustic environment | |
| US9219961B2 (en) | Information processing system, computer-readable non-transitory storage medium having stored therein information processing program, information processing control method, and information processing apparatus | |
| KR101415944B1 (ko) | 기상 상태에 대한 입체 음향을 제공하는 가상 골프 시뮬레이션 장치 및 방법 | |
| US11094107B2 (en) | Information processing device and image generation method | |
| EP2591832A2 (en) | Information processing program, information processing device, information processing system, and information processing method | |
| CN111459444A (zh) | 在扩展现实应用中将虚拟声源映射到物理扬声器 | |
| US9241231B2 (en) | Information processing system, computer-readable non-transitory storage medium having stored therein information processing program, information processing control method, and information processing apparatus | |
| JP2002085831A (ja) | ゲーム装置及び情報記憶媒体 | |
| EP3506080B1 (en) | Audio scene processing | |
| CN109791436B (zh) | 用于提供虚拟场景的装置及方法 | |
| JP5860629B2 (ja) | 音源定位制御プログラムおよび音源定位制御装置 | |
| KR102324816B1 (ko) | 사운드의 병행 출력을 통한 공간 이동에 따른 사운드 인터렉션 시스템 및 방법 | |
| TW201644288A (zh) | 耳機裝置及控制耳機裝置之方法 | |
| KR20120005464A (ko) | 오디오 소나 신호의 바이노럴 재생을 위한 장치 및 방법 | |
| KR101851361B1 (ko) | Hmd 연동 헤드폰 기반 플레이어 적응형 입체사운드 실시간 제공시스템 | |
| US11641459B2 (en) | Viewing system, distribution apparatus, viewing apparatus, and recording medium | |
| US11880631B2 (en) | Processing apparatus and immersion level deriving method |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| E701 | Decision to grant or registration of patent right | ||
| GRNT | Written decision to grant |