KR20210099982A - 오디오 제공 및 오디오 기록 방법과 이를 수행하는 장치 - Google Patents

Abstract

본 발명은 저장 메모리가 내장된 재생 장치 및/또는 무선통신 방식(블루투스, 와이파이 등)의 스트리밍 기능 내장 된 무선 오디오 장치 또는 기타 컴퓨터 장치 등을 활용하여 일반 오디오와 3차원 오디오를 실시간 Mix 또는 Mux 하는 오디오 재생 기술과 무선통신 통화 소리, 스트림 된 소리, 주변 소리, 음원 재생 소리를 실시간 선택 기록하는 오디오 기록 기술이 포함 된 헤드셋, 이어셋 등의 귀에 착용하는 형태의 구현 장치와 기술

Description

오디오 제공 및 오디오 기록 방법과 이를 수행하는 장치 {METHOD OF PROVIDING AUDIO AND RECODING AND FOR PERFORMING THE SAME}

실시간 오디오 변환 기술

가상 공간 체험 기술, 오디오 재현 기술

기존의 오디오 기능이 내장된 장치에 보다 현장감과 사용성이 있는 오디오 기능을 제공하기 위해 실시간 오디오 변환 기술이 필요하다.

본 발명은 귀 착용형 장치인 헤드셋, 이어셋 등에 실시간 오디오 변환 기술인 바이노럴 이펙트 기술과 오디오 믹스 기능으로 무선통신으로 전송되는 오디오 사운드와 자체 메모리의 컨텐츠를 실시간 믹스하여 가상 공간의 장소에서 자신의 듣고 싶은 음원을 듣는 혼합 현실로 구현하는 기술을 갖는다. 또한 이러한 혼합 현실에 있어 선택적 실시간 기록 기술을 가지고 있어 이전에 발생된 소리를 다시 들을수 있는 시점 전환 기능을 갖는다.

이를 위해서 무선통신 장치, 저장 장치, 처리 장치와 배터리, 컨트롤러 장치(버튼, 센서) 등의 부가 장치로 구성되며 일반적인 송수신형태의 무선 헤드셋, 이어셋 장치에 3차원 공간 사운드 컨트롤과 재생중인 음원을 실시간 믹스하여 컨트롤 장치 환경에 따라 음원 변경을 실시간 처리 하며 또한 저장 메모리에 해당 소리를 외부 소리, 무선전송 된 소리, 자체 재생 소리를 선택 기록하여 언제든지 되돌려서 해당 환경을 다시 듣게 한다.

도 1은 일 실시예에 따른 오디오 재생 기술을 나타내는 도면이다.

본 기술 제품은 저장 메모리가 내장된 재생 장치 및/또는 무선통신 방식(블루투스, 와이파이 등)의 스트리밍 기능 내장 된 무선 오디오 장치 또는 기타 컴퓨터 장치 등을 활용하여 일반 오디오 재생 및 3차원 오디오 재현 기술이 내장된 오디오 재생 기술과 실시간 오디오 데이터 기록을 통한 오디오 다시 듣기 기술이 포함 된 헤드셋, 이어셋 등의 귀에 착용하는 형태의 제품을 말한다.

본 기술 제품은 물리적 버튼이나, 터치, 동작 센서, 사용자의 제스처, 외부 기기와의 연결 등을 통하여 기능 조작이 가능하다.

3차원으로 오디오 재현시 센서(머리의 움직임 등)의 정보에 따라 오디오의 위치가 실시간으로 변환되어 3차원 오디오의 현실감을 더해 주는 기능이 가능하다.

본 기술 제품의 첫번째 오디오 재생기술은 오디오 스페이스(Audio Space) 기술이라는 명칭으로 3차원 기술과 실시간 Mix 및/또는 Mux 기술을 활용하여 일반 음원과 공간 사운드(일반 레코딩, 바이노럴 레코딩 된 현장 오디오 또는 가공된 2,3차원 오디오)을 동시 재생을 통하여 사용자에게 특정 공간에서 음악을 듣는 듯한 공간감을 제공하며, 헤드트레킹 기술 및 사용자에 의한 음원의 위치 지정등을 통해 일반 음원 및/또는 공간 사운드의 오브젝트 사운드 또는 바이노럴 이펙트 등과 같은 기술을 활용하여 소리의 위치를 실시간 가공하여 보다 현실감, 입체감 있는 3D 공간 오디오 재현 기능을 제공한다.

공간 사운드는 재생 장치의 내장된 메모리에 저장되어 재생되거나, 블루투스나 와이 파이 통신 등의 무선통신을 통해 스트리밍 형태로 일반 음원과 공간 사운드를 함께 입력받아 재생하는것도 가능하다.

공간 사운드는 카페, 숲, 바다, 콘서트장 등의 다양한 공간의 오디오 음원이 될수 있으며, 일반 음원과 함께 재생 시, 사용자에 의한 공간 사운드 선택으로 동일한 음원을 다양한 공간에서 듣는듯한 체험이 가능하며, 공간 사운드와 일반 음원의 개별 EQ셋팅 및 오디오 볼륨 조절 기능을 통해 사용자가 공간 사운드와 일반 음원의 볼륨 및 EQ를 조절하는 사용자 설정이 가능하다.

본 기술 제품의 두번째 오디오 기록 기술은 오디오 리콜(Audio Recall) 기술이라는 명칭으로, 사용자의 데이터를 기록하는 블랙박스와 같은 기능을 하여, 사용자의 오디오 재생 및 주변 환경, 통화음 등의 소리를 녹음하는 기술로서, 사용자에 의해 발생된 모든 음원을 실시간 녹음 및 저장하여, 사용자에게 오디오 데이터 저장 및 저장된 오디오 데이터 다시 듣기 기능을 제공한다.

해당 오디오 리콜 기술의 기록되는 오디오 데이터는 기기를 통해 재생되는 음원(내부 재생 또는 무선통신을 통한 스트리밍 재생)과, 통화시 발생하는 통화음(내장된 마이크를 통해 수음되는 사용자 통화 음성 및 무선통신을 통해 전달되는 상대방 음성 데이터), 내장된 마이크를 통해 수음되는 주변 소음 등으로 구성되며, 해당 오디오 기록은 모든 오디오 데이터를 기록하거나, 일부 사용자가 선택한 오디오만 기록하는 등의 사용자의 목적에 따른 선택적 기록이 가능하다.

해당 기록된 오디오 기록은 재생가능한 오디오 파일로 내장된 메모리에 저장되거나, 연결 된 무선통신을 통하여 외부 저장소 또는 클라우드 서버 등에 저장이 가능하며, 저장된 오디오 기록을 재생하여 사용자가 원하는 오디오 기록을 다시 들을수 있다.

또 다른 설명으로

공간 사운드는 두 가지 이상의 복수의 오디오가 조합(또는 혼합된)을 이룰 수 있다. 예를 들어, 카페, 해변, 숲 등 다양한 공간에서 느껴지는 오디오 사운드와 청취자(또는 사용자)가 선택한 오디오를 조합하여 특정 공간에서 오디오를 듣는 듯한 가상 경험을 제공받을 수 있다. 공간 사운드와 오디오 사운드는 개별적인 위치값을 가질 수도 있으며, 특정 사운드는 특정 위치와 방향이 고정된 형태로 고개를 돌렸을 때 변환되는 오디오 경험을 느낄 수도 있다. 청취자(또는 사용자)가 지정한 위치에 오디오 위치와 방향을 제공하여 들을 수 있다.

오디오 제공 장치는 실제 공간과 가상 공간이 조합되기도 하며, 스트리밍 서비스의 오디오 등 조합되는 오디오의 제한 없이 360도로 변하는 머리의 움직임을 센싱하여 오디오를 변환한다. 예를 들어 사무실에 앉아있을 때 보다 창의적인 작업을 위해 카페 공간의 백색 소음과 음원 등을 조합하여 청취자(또는 사용자)가 원하는 장소에서 오디오를 재생하는 듯한 경험을 할 수 있다. 또한, 바다 또는 숲과 같은 자연의 오디오와 오디오북의 사운드 등을 결합하여 휴식을 취하도록 변환하는 등 목적에 따른 오디오 콘텐츠로 변환할 수 있다. 또한, 운동하는 실내 공간에서 실제 자연 공간에서 듣는 듯한 오디오의 조합을 제공하여 실외의 활동하는 듯한 가상의 오디오를 들을 수 있으며, 극장에 가지 않고 오디오 또는 영상에서 재생되는 오디오를 결합하여 콘서트 또는 영화관에서의 오디오 경험 등을 느낄 수 있다. 이러한 예시에 대한 경험은 공간 사운드와 오디오 사운드를 다양하게 조합하여 실제 공간적 경험뿐만아니라 목적에 따른 오디오를 선택하여 재생할 수 있다.

오디오 기록 기술은 실시간으로 오디오를 기록할 수 있으며, 기록 결과물을 장치를 통하여 특정 위치로 이동하여 다시 재생할 수 있다. 오디오 기록은 한 개 이상의 마이크를 통하여 장치 외에서 나오는 사운드, 블루투스 등과 같은 무선통신으로 스트리밍 되는 사운드, 무선통신 상태에서 통화하는 내용 등 다른 형태의 사운드를 구분하여 기록할 수 있으며, 특정 오디오를 선택적으로 기록할 수 있다.

오디오 기록에 대한 선택은 사용자가 직접 설정하여 기록할 수 있다. 사용자는 기록된 오디오를 장치에서 직접 선택하여 재생할 수 있으며, 스마트폰 애플리케이션과 같은 별도의 소프트웨어를 통하여 선택하여 들을 수도 있다.

오디오 재생 장치는 기록을 위한 저장장치와 같은 별도의 메모리가 내부 장착되어 있으며, 외부 클라우드 서버 등을 통하여도 저장이 가능하다.

오디오 재생 장치에 기록된 오디오는 기존의 공간 사운드와 조합하여 360도로 재생되는 3D 오디오로 재생할 수 있으며, 기록된 오디오는 자체적으로 공간에 대한 재현으로 기존 일반 오디오와 결합하여 재생할 수 있다.

오디오 기록은 외부소리와 스트리밍 오디오, 전화통화 등 모든 소리를 기록하는 방식과 선별적으로 기록하는 방식이 있으며, 시간 순 별 및 기록 유형 별 원하는 기록 오디오의 위치를 찾을 수 있도록 선택하여 찾을 수 있다.

Claims (3)

1. 컨텐츠를 저장하는 메모리; 및
   무선통신으로 스트리밍 기능을 가지는 재생 장치를 포함하는 무선 오디오 장치는,
   실시간 오디오 변환 기술인 바이노럴 이펙트 기술과 오디오 믹스 기능을 이용하여 상기 무선통신으로 전송되는 오디오 사운드와 상기 메모리에 컨텐츠를 실시간 믹스하는 것을 특징으로 하는 무선 오디오 장치.
2. 제1항에 있어서, 상기 무선 오디오 장치는
   혼합 현실에 있어 선택적 실시간 기록 기술을 가지고 있어 이전에 발생된 사운드를 다시 들을수 있는 시점 전환 기능을 가지는 것을 특징으로 하는 무선 오디오 장치.
3. 제1항에 있어서, 상기 무선 오디오 장치는
   3차원으로 오디오 재현시 머리의 움직임에 따라 상기 오디오의 위치가 실시간으로 변환되어 3차원 오디오의 현실감을 더해 주는 것을 특징으로 하는 무선 오디오 장치.

Images