WO2023136571A1

WO2023136571A1 - 휴대용 오디오 출력 장치 및 모바일 디바이스를 포함하는 시스템의 제어 방법

Info

Publication number: WO2023136571A1
Application number: PCT/KR2023/000377
Authority: WO
Inventors: 윤석호; 박순현; 이기영
Original assignee: 엘지전자 주식회사
Priority date: 2022-01-13
Filing date: 2023-01-09
Publication date: 2023-07-20

Abstract

본 발명의 일실시예에 따른 어플리케이션(모바일 디바이스에 다운로드 가능한 명상 관련)에 의하면, 명상 관련 어플리케이션이 실행된 이후, 모바일 디바이스와 유선 또는 무선으로 연결된 휴대용 오디오 출력 장치를 착용한 사용자의 상태를 체크하도록 제어하고, 체크된 사용자의 상태에 따라 특정 오디오 컨텐츠의 제1 레이어에 해당하는 세그먼트를 휴대용 오디오 출력 장치를 통해 출력하도록 제어하고, 그리고 체크된 사용자의 상태가 변경된 경우, 상기 특정 오디오 컨텐츠의 제2 레이어에 해당하는 세그먼트를, 휴대용 오디오 출력 장치를 통해 출력하도록 제어된다.

Description

휴대용 오디오 출력 장치 및 모바일 디바이스를 포함하는 시스템의 제어 방법

본 발명은 휴대용 오디오 출력 장치, 모바일 디바이스 등에 관한 것이다. 보다 구체적으로 예를 들면, 명상 관련 어플리케이션을 웨어러블 디바이스(ex: 이어버드, 스마트 워치 등) 및 스마트폰 등을 이용하여 구현하는 모든 기술에 적용 가능하다.

코로나 이후 가정에 머무는 시간이 증가함으로써, 명상 관련 서비스에 대한 사용자 니즈가 높아지고 있는 실정이다.

명상(meditation)은 고요히 눈을 감고 차분한 상태로 어떤 생각도 하지 않는 것이다. 명상은 종종 마음을 깨끗이 하고, 스트레스를 줄이며, 휴식을 촉진시키거나, 마음을 훈련시키는데 사용된다.

여러 연구 조사 등에 따르면, 예를 들어, 명상을 할 때의 두뇌의 파장 등을 검증하여 이것이 두뇌 및 신체 호르몬에 주는 영향이 존재한다.

오프라인에서 사람들이 모여서 지도자 등을 통해 명상 서비스를 받을 수도 있으나, 최근에는 코로나 이후 온라인을 통해 개별적으로 명상 서비스를 즐기는 인구가 증가하고 있다. 대표적인 온라인 방식은 명상 관련 어플리케이션 이라고 할 수 있다.

다만, 종래 기술에 의한 명상 관련 어플리케이션은, 사용자에게 피드백을 전혀 제공하지 않는 온라인 명상 서비스에 그치고 있다.

따라서, 명상 관련 초보자들은, 자신에게 적합한 명상과 컨텐츠 등을 찾기 위하여, 많은 시간과 비용을 소모하는 문제점이 있다.

본 발명의 일실시예는, 본격적인 명상 서비스에 앞서, 사용자의 상태를 측정할 수 있는 기술을 제공하고자 한다.

본 발명의 다른 일실시예는, 명상 서비스 시작(예를 들어, 오디오 컨텐츠 출력)한 이후에도, 변경되는 사용자의 상태에 따라 실시간 가이드를 변경하고자 한다.

그리고, 본 발명의 또 다른 일실시예는, 명상 서비스 종료 이후에도, 과거 데이터와의 비교 등을 통해 구체적인 피드백을 제공하는 서비스를 구현하고자 한다.

실시예들에서 이루고자 하는 기술적 과제들은 이상에서 언급한 사항들로 제한되지 않으며, 언급하지 않은 또 다른 기술적 과제들은 이하 설명할 다양한 실시예들로부터 당해 기술분야에서 통상의 지식을 가진 자에 의해 고려될 수 있다.

본 발명의 일실시예에 의한 휴대용 오디오 출력 장치 및 모바일 디바이스를 포함하는 시스템의 제어 방법은, 상기 모바일 디바이스를 통해 명상 관련 어플리케이션을 실행하는 단계와, 상기 모바일 디바이스와 유선 또는 무선으로 연결된 상기 휴대용 오디오 출력 장치를 착용한 사용자의 상태를 체크하는 단계와, 상기 체크된 사용자의 상태에 따라, 특정 오디오 컨텐츠의 제1 레이어에 해당하는 세그먼트를, 상기 휴대용 오디오 출력 장치를 통해 출력하는 단계와, 그리고 상기 체크된 사용자의 상태가 변경된 경우, 상기 특정 오디오 컨텐츠의 제2 레이어에 해당하는 세그먼트를, 상기 휴대용 오디오 출력 장치를 통해 출력하는 단계를 포함한다. 그리고, 상기 제1 레이어와 상기 제2 레이어는 서로 다른 것을 특징으로 한다.

상기 사용자의 상태는, 예를 들어, 뇌파, 심박수 또는 호흡수 중 적어도 하나 이상을 포함한다.

상기 특정 오디오 컨텐츠의 적어도 하나 이상의 레이어는, 예를 들어, 뉴트럴 상태의 레이어, 긍정적인 상태의 레이어 및 부정적인 상태의 레이어 중 적어도 하나 이상을 포함한다.

예를 들어, 상기 사용자의 뇌파에서 베타파인 12 내지 30Hz 주파수가 감지된 경우, 뉴트럴 상태로 간주한다.

예를 들어, 상기 사용자의 뇌파에서 알파파인 8 내지 12Hz 주파수가 감지된 경우, 긍정적인 상태로 간주한다.

예를 들어, 상기 사용자의 뇌파에서 감마파인 30 내지 50Hz 주파수가 감지된 경우, 부정적인 상태로 간주한다.

상기 특정 오디오 컨텐츠를 구성하는 적어도 하나 이상의 세그먼트의 길이는, 사용자에 따라 동일하며, 기설정된 동일 시간 단위로 구성된다. 또는, 상기 특정 오디오 컨텐츠를 구성하는 적어도 하나 이상의 세그먼트의 길이는, 사용자에 따라 변경되며, 메모리에 기저장된 사용자별 상태의 프로파일 히스토리에 따라 다른 것을 특징으로 한다.

나아가, 상기 특정 오디오 컨텐츠가 나레이션에 해당하는 경우, 상기 체크된 사용자의 상태에 따라, 상기 휴대용 오디오 출력 장치를 통해 다른 스크립트를 출력한다.

반면, 상기 특정 오디오 컨텐츠가 음악인 경우, 상기 체크된 사용자의 상태에 따라, 상기 휴대용 오디오 출력 장치를 통해 다른 레벨의 뇌파 동조 신호를 믹싱하여 출력한다.

상기 휴대용 오디오 출력 장치는, 예를 들어, 이어폰, 이어버드, 헤드셋 중 적어도 하나를 포함한다.

본 발명의 일실시예에 의한 모바일 디바이스에서 다운로드 가능한 명상 관련 어플리케이션의 제어 방법은, 상기 명상 관련 어플리케이션이 실행된 이후, 상기 모바일 디바이스와 유선 또는 무선으로 연결된 휴대용 오디오 출력 장치를 착용한 사용자의 상태를 체크하도록 제어하는 단계와, 상기 체크된 사용자의 상태에 따라, 특정 오디오 컨텐츠의 제1 레이어에 해당하는 세그먼트를, 상기 휴대용 오디오 출력 장치를 통해 출력하도록 제어하는 단계와, 그리고 상기 체크된 사용자의 상태가 변경된 경우, 상기 특정 오디오 컨텐츠의 제2 레이어에 해당하는 세그먼트를, 상기 휴대용 오디오 출력 장치를 통해 출력하도록 제어하는 단계를 포함한다.

본 발명의 일실시예에 의하면, 본격적인 명상 서비스에 앞서, 사용자의 상태를 측정할 수 있는 기술을 제공한다.

본 발명의 다른 일실시예에 의하면, 명상 서비스 시작(예를 들어, 오디오 컨텐츠 출력)한 이후에도, 변경되는 사용자의 상태에 따라 실시간 가이드를 변경하기 위한 알고리짐을 정의한다.

그리고, 본 발명의 또 다른 일실시예에 의햐면, 명상 서비스 종료 이후에도, 과거 데이터와의 비교 등을 통해 구체적인 피드백을 제공할 수 있는 기술적 효과가 있다. 나아가, 과학적이고 객관적인 사용자 상태 판단, 피드백 제공 및 사용자에게 보다 적합한 명상 컨텐츠를 추천하는 것이 가능해진다.

실시예들로부터 얻을 수 있는 효과들은 이상에서 언급된 효과들로 제한되지 않으며, 언급되지 않은 또 다른 효과들은 이하의 상세한 설명을 기반으로 당해 기술분야에서 통상의 지식을 가진 자에게 명확하게 도출되고 이해될 수 있다.

실시예들에 대한 이해를 돕기 위해 상세한 설명의 일부로 포함된, 첨부 도면은 다양한 실시예들을 제공하고, 상세한 설명과 함께 다양한 실시예들의 기술적 특징을 설명한다.

도 1은 종래 기술에 의한 명상 관련 어플리케이션의 동작을 설명하기 위한 도면이다.

도 2는 종래 기술에 의한 뇌파 측정 장비의 외관을 도시하고 있다.

도 3은 본 발명의 일실시예에 따라, 사용자의 뇌파, 호흡수 및 심박수 등을 측정하는 이어버드 및 모바일 디바이스를 도시하고 있다.

도 4는 본 발명의 일실시예에 따라, 휴대용 오디오 출력 장치와 모바일 디바이스간 데이터를 송수신하는 플로우 차트를 도시하고 있다.

도 5는 본 발명의 일실시예에 따라, 모비일 디바이스 등에 다운로드 가능한 명상 관련 어플리케이션이 사용자의 상태를 체크하는 초기 동작 순서를 도시하고 있다.

도 6은 본 발명의 일실시예에 따라, 모비일 디바이스 등에 다운로드 가능한 명상 관련 어플리케이션이 사용자에게 최적화된 오디오 컨텐츠 등을 제공하는 프로세스를 도시하고 있다.

도 7은 본 발명의 일실시예에 따라, 사용자의 집중도를 특정 레벨(ex: 80%)로 타겟팅 하기 위해, 실시간으로 변경되는 컨텐츠를 도시하고 있다.

도 8은 본 발명의 일실시예에 따라, 사용자의 이완 상태를 특정 레벨(ex: 90%)로 타겟팅 하기 위해, 실시간으로 변경되는 뇌파 동조 신호를 도시하고 있다.

도 9는 본 발명의 일실시예에 따른 시스템(휴대용 오디오 출력 장치, 모바일 디바이스 또는 클라우드 서버 등)의 동작을 개괄적으로 도시한 도면이다.

도 10은 본 발명의 일실시예에 따른 명상 관련 어플리케이션의 동작을 설명하기 위한 도면이다.

도 11은 종래 기술과 대비하여, 본 발명의 일실시예에 따른 명상 관련 어플리케이션을 통해 영상 컨텐츠의 세그먼트를 구성하는 프로세스를 도시한 도면이다.

그리고, 도 12는 종래 기술과 대비하여, 본 발명의 일실시예에 따른 명상 관련 어플리케이션을 통해 영상 컨텐츠의 레이어 및 세그먼트의 관계를 상세히 설명하기 위한 도면이다.

이하, 첨부된 도면을 참조하여 본 명세서에 개시된 실시예를 상세히 설명하되, 도면 부호에 관계없이 동일하거나 유사한 구성요소는 동일한 참조 번호를 부여하고 이에 대한 중복되는 설명은 생략하기로 한다. 이하의 설명에서 사용되는 구성요소에 대한 접미사 “유닛”, "모듈" 및 "부"는 명세서 작성의 용이함만이 고려되어 부여되거나 혼용되는 것으로서, 그 자체로 서로 구별되는 의미 또는 역할을 갖는 것은 아니다.

또한, 본 명세서에 개시된 실시예를 설명함에 있어서 관련된 공지 기술에 대한 구체적인 설명이 본 명세서에 개시된 실시예의 요지를 흐릴 수 있다고 판단되는 경우 그 상세한 설명을 생략한다. 또한, 첨부된 도면은 본 명세서에 개시된 실시예를 쉽게 이해할 수 있도록 하기 위한 것일 뿐, 첨부된 도면에 의해 본 명세서에 개시된 기술적 사상이 제한되지 않으며, 본 발명의 사상 및 기술 범위에 포함되는 모든 변경, 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다.

제 1, 제2 등과 같이 서수를 포함하는 용어는 다양한 구성요소들을 설명하는데 사용될 수 있지만, 상기 구성요소들은 상기 용어들에 의해 한정되지는 않는다. 상기 용어들은 하나의 구성요소를 다른 구성요소로부터 구별하는 목적으로만 사용된다. 어떤 구성요소가 다른 구성요소에 "연결되어" 있다거나 "접속되어" 있다고 언급된 때에는, 그 다른 구성요소에 직접적으로 연결되어 있거나 또는 접속되어 있을 수도 있지만, 중간에 다른 구성요소가 존재할 수도 있다고 이해되어야 할 것이다.

반면에, 어떤 구성요소가 다른 구성요소에 "직접 연결되어" 있다거나 "직접 접속되어" 있다고 언급된 때에는, 중간에 다른 구성요소가 존재하지 않는 것으로 이해되어야 할 것이다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다. 본 출원에서, "포함한다" 또는 "가지다" 등의 용어는 명세서상에 기재된 특징, 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.

우선, 도 1을 참조하여 종래 기술에 의한 명상 관련 어플리케이션이 시간 흐름에 따라 어떤 변화가 있는지 설명하도록 하겠다.

도 1에 도시된 바와 같이, 기존 명상 어플리케이션을 실행하면, 시작 시점(Start) 부터 종료 시점(Finish) 까지 동일한 컨텐츠가 단순히 재생되고, 어떠한 변화도 발생하지 않는다.

즉, 사용자가 명상 어플리케이션을 실행하기 전 상태나, 또는 실행 이후에도 사용자별 달라지는 피드백을 고려하지 않는 문제점이 있었다.

한편, 명상의 효과 등을 확인하기 위하여, 도 2에 도시된 뇌파 측정 장비를 사후적으로 사용하는 경우도 있었으나, 머리에 써야 하는 형태로 일반적인 상황에서 사용하기 부담스로운 폼팩터 이다.

도 1 및 도 2에 도시된 종래 기술의 문제점들을 해결하기 위하여, 본 발명의 일실시예는 도 3에 도시된 바와 같이, 새로운 형태의 휴대용 오디오 출력 장치 및 모바일 디바이스에 다운로드 가능한 명상 관련 어플리케이션(app.)을 제안하고자 한다.

우선, 도 3에 도시된 휴대용 오디오 출력 장치(300)는, 예를 들어 이어폰, 이어버드, 헤드셋 등이 될 수 있고, 착용한 사용자의 상태를 감지할 수 있는 기능이 탑재되도록 설계한다. 여기서, 사용자의 상태는, 예를 들어 뇌파, 심박수 또는 호흡수 등을 적어도 하나 이상 포함한다.

따라서, 상기 휴대용 오디오 출력 장치(300)는, 예를 들어, 일정한 표면적을 가지는 기준전극과, 기준전극과 이격되어 설치되며, 뇌파를 감지하여 측정하는 측정전극과, 측정전극 및 기준전극과 분리되며 피부 표면에 부착되는 접지전극과, 기준전극과 측정전극 및 접지전극을 피부에 가압시키는 가압 하우징 및 상기 측정전극에서 측정된 뇌파 신호를 전송하는 통신모듈을 포함한다.

나아가, 상기 휴대용 오디오 출력 장치(300)는, 예를 들어, 사용자의 움직임을 모션 아티팩트(motion artifact)로서 감지하는 가속도 센서 모듈과, 혈류량을 측정하는 적외선 센서 모듈, 측정된 혈류량의 신호에서 상기 모션 아티팩트를 제거하는 노이즈 제거 모듈과, 상기 모션 아티팩트가 제거된 혈류량 신호를 기초로 심박수를 산출하는 심박수 산출 모듈을 포함한다.

그리고, 상기 휴대용 오디오 출력 장치(300)는, 예를 들어, 사용자의 호흡에 대한 호흡 신호를 자이로 센서로 검출하고, 검출된 호흡 신호로부터 호흡수를 측정하는 호흡수 측정 모듈을 더 포함하고 있다.

다만, 위에서 설명한 모듈들은 예시에 불과하며, 뇌파, 심박수 또는 호흡수를 체크할 수 있는 다른 구성요소들을 채택하는 것도 본 발명의 다른 권리범위에 속한다고 할 것이다.

다시 도 3을 참조하여 설명하면, 본 발명의 일실시예에 의한 모바일 디바이스(310)에 명상 관련 어플리케이션이 다운로드 되어 있는 것을 가정한다.

모바일 디바이스(310)는 휴대용 오디오 출력 장치(300)와 유선 또는 무선으로 통신 연결되어 있으며, 예를 들어 BT(블루투스) 무선 통신으로 데이터를 송수신 한다.

모바일 디바이스(310)는 휴대용 오디오 출력 장치(300)로부터 수신한 사용자의 상태 정보에 기초하여, 맞춤형 컨텐츠를 휴대용 오디오 출력 장치(300)로 다시 전송하도록 설계된다.

휴대용 오디오 출력 장치(300)와 모바일 디바이스(310)가 송수신 하는 구체적인 데이터에 대해서는 이하 도 4를 참조하여 보다 상세히 설명하도록 하겠다.

도 4에 도시된 바와 같이, 본 발명의 일실시예에 의한 시스템은, 휴대용 오디오 출력 장치 및 모바일 디바이스를 포함하지만, 각 디바이스별로 본 발명을 구현하는 것도 가능하다.

모바일 디바이스는, 명상 관련 어플리케이션을 실행한다(S410).

나아가, 모바일 디바이스는, 유선 또는 무선으로 연결된 휴대용 오디오 출력 장치로 사용자 상태를 체크하라는 명령을 전송한다(S420). 다만, 상기 명령 전송(S420)은, 일정 주기 또는 특정 시점에 반복된다(S430).

그리고, 휴대용 오디오 출력 장치는, 사용자의 상태를 체크하고(S440), 사용자 상태를 모바일 디바이스에 리포트 한다(S450). 여기서, 사용자의 상태는, 예를 들어 뇌파, 심박수 또는 호흡수 중 적어도 하나 이상을 포함한다.

모바일 디바이스는, 휴대용 오디오 출력 장치에 의해 보고된 사용자의 상태에 따라, 특정 오디오 컨텐츠의 제1 레이어에 해당하는 세그먼트를 추출하도록 설계된다(S460).

모바일 디바이스는, 제1 레이어에 해당하는 세그먼트를 휴대용 오디오 출력 장치로 전송하고(S470), 휴대용 오디오 출력 장치는 제1 레이어에 해당하는 세그먼트를 출력한다(S480).

나아가, 전술한 바와 같이, S430 단계를 통해 체크된 사용자의 상태가 변경된 경우, 상기 특정 오디오 컨텐츠의 제2 레이어에 해당하는 세그먼트를, 상기 휴대용 오디오 출력 장치를 통해 출력한다.

특히, 상기 제1 레이어와 상기 제2 레이어는 서로 다른 것을 특징으로 하며, 본 발명의 특징 중 하나인 레이어 및 세그먼트에 대해서는 이하 도 12를 참조하여 보다 상세히 후술하겠다.

전술한 바와 같이, 본 발명의 일특징 중 하나는, 명상 관련 어플리케이션을 실행한 이후 바로 오디오 컨텐츠가 재생되지 않고, 사용자의 상태를 체크하도록 설계되어 있다는 점이다.

예를 들어, 도 5의 (a)에 도시된 바와 같이, 모바일 디바이스에 다운로드되어 있는 명상 관련 어플리케이션을 실행하면, 최초 가이드 화면이 디스플레이 된다.

도 5의 (a)에 도시된 중앙에 위치한 버튼을 누른 경우, 도 5의 (b)에 도시된 바와 같이, 사용자 신체에 부착되어 있으면서도 사용자 상태를 체크할 수 있는 디바이스가 있는지 문의하는 GUI 가 디스플레이 된다.

도 5의 (b)에 도시된 디바이스들 중에서 휴대용 오디오 출력 장치(예를 들어, 이어폰)이 선택된 경우, 도 5의 (c)에 도시된 바와 같이, 사용자가 안정을 취할 수 있는 가이드 메시지를 디스플레이 한다.

도 5의 (c)에 도시된 가이드 메시지를 일정 시간(T1) 디스플레이 한 이후, 도 5의 (d)에 도시된 바와 같이, 사용자의 상태를 측정하고 있다는 2번째 가이드 메시지가 디스플레이 된다.

도 5의 (d)에 도시된 가이드 메시지를 일정 시간(T2, T1 보다 큼) 디스플레이 한 이후, 도 5의 (e)에 도시된 바와 같이, 사용자의 상태 측정 결과를 디스플레이 한다. 나아가, 도 5의 (e)에 도시된 바와 같이, 평균 대비 해당 사용자의 수치를 비교해 보여줌으로써, 상대적인 자신의 상태가 어떠한지 피드백 받을 수 있는 장점이 있다.

도 5에 도시된 사용자 상태 체크가 모두 완료되면, 도 6에 도시된 바와 같이 현재 사용자의 상태에 맞춤형 오디오가 출력된다.

우선, 도 6의 (a)에 도시된 바와 같이, 사용자의 상태(ex: 뇌파, 심박수, 호흡수 측정 결과 고려)에 따른 최적의 오디오 컨텐츠가 선택되고, 휴대용 오디오 출력 장치를 통해 출력된다.

나아가, 종래 기술과 달리, 도 6의 (b)에 도시된 바와 같이, 임의의 오디오 컨텐츠가 출력된 이후에도, 사용자 상태 체크를 지속적으로 또는 주기적으로 유지한다. 따라서, 사용자의 호흡이 떨리는 것으로 측정된 경우, 도 6의 (b)에 도시된 바와 같이, "호흡이 떨리고 있습니다. 천천히 심호흡 하세요" 라는 가이드 메시지가 모바일 디바이스를 통해 출력되거나 또는 휴대용 오디오 출력 장치를 통해 음성으로 출력되도록 설계한다.

그리고, 도 6의 (c)에 도시된 바와 같이, 명상 관련 오디오 컨텐츠의 재생이 모두 완료 후, 사용자의 상태 변화에 대한 결과값을 그래픽으로 디스플레이 하도록 설계된다.

나아가, 도 6의 (c)의 하단에 도시된 바와 같이, 누적 결과를 볼 수 있는 제1 옵션 및 실시간 피드백을 확인할 수 있는 제2 옵션이 추가적으로 표시되도록 설계한다.

도 6의 (c)의 하단에 도시된 제1 옵션(누적 결과 보기)이 선택된 경우, 도 6의 (d)에 도시된 바와 같이, 해당 사용자의 지난 명상 체험 결과를 보여 줄 수 있는 그래프가 표시된다. 누적 결과는, 도 6의 (d)에 도시된 바와 같이, 1주일, 1개월, 3개월 단위로 선택할 수 있으며, 다른 단위로도 설계 가능하다.

반면, 도 6의 (c)의 하단에 도시된 제2 옵션(실시간 피드백)이 선택된 경우, 도 6의 (e)에 도시된 바와 같이, 방금 이루어 졌던 명상 체험 중 특정 메시지가 발생한 순간(즉, 사용자 상태 변화가 급격하게 이루어진 지점)을 하이라이트 하여 표시한다.

본 발명의 일실시예에 의하면, 사용자의 명상에 대한 몰입도에 따라 오디오 컨텐츠의 길이가 달라지도록 설계한다.

따라서, 사용자별로 명상이 종료하는 시간(총길이)이 달라지도록 설계한다. 예를 들어, 명상의 몰입도가 높은 사용자의 경우, 명상이 보다 짧게 끝나도록 설계하는 반면, 명상의 몰입도가 낮은 사용자의 경우, 명상이 상대적으로 길게 끝나도록 설계한다.

다만, 명상의 몰입도가 낮아도 오디오 컨텐츠를 영원히 출력하는 것은 자원 낭비이므로, 원하는 집중도에 도달하지 못한 경우에도 종료될 수 있도록 오디오 컨텐츠의 맥스(Max) 한계 시간을 설정한다.

도 7은 집중의 비중을 80%로 목표 설정한 명상 컨텐츠가 재생되는 경우를 가정하고 있다.

우선, 도 7의 상단에 표시된 그래프를 기준으로 설명하면, 사용자의 집중도가 상대적으로 빠른 시간내(5분)에 목표치인 80%까지 도달한 경우를 가정하고 있다.

사용자의 집중도가 50%로 판단되면, 이에 대응하는 내레이션이 휴대용 오디오 출력 장치를 통해 출력되고, 사용자의 집중도가 40%로 판단되면, 이에 대응하는 내레이션이 휴대용 오디오 출력 장치를 통해 출력된다. 사용자의 집중도가 70%로 판단되면, 이에 대응하는 내레이션이 휴대용 오디오 출력 장치를 통해 출력되고, 사용자의 집중도가 80%로 판단되면, 이에 대응하는 내레이션이 휴대용 오디오 출력 장치를 통해 출력되고, 클로즈 내레이션이 출력된다.

한편, 도 7의 중간에 표시된 그래프를 기준으로 설명하면, 사용자의 집중도가 상대적으로 오랜 시간내(8분)에 목표치인 80%까지 도달한 경우를 가정하고 있다.

사용자의 집중도가 40%로 판단되면, 이에 대응하는 내레이션이 휴대용 오디오 출력 장치를 통해 출력되고, 사용자의 집중도가 50%로 판단되면, 이에 대응하는 내레이션이 휴대용 오디오 출력 장치를 통해 출력된다. 사용자의 집중도가 70%로 판단되면, 이에 대응하는 내레이션이 휴대용 오디오 출력 장치를 통해 출력되고, 사용자의 집중도가 80%로 판단되면, 이에 대응하는 내레이션이 휴대용 오디오 출력 장치를 통해 출력되고, 클로즈 내레이션이 출력된다.

마지막으로, 도 7의 하단에 표시된 그래프를 기준으로 설명하면, 사용자의 집중도가 맥스(Max) 시간인 10분 이내에 목표치인 80% 도달에 실패한 경우를 가정하고 있다.

명상 관련 오디오 컨텐츠를 출력한 이후, 기설정된 제한 시간인 10분 이내에 목표치인 집중도 80%에 도달하지 못한 경우, 장치를 통해 출력되고, 클로즈 내레이션이 출력된다.

이상 도 7에서 전술한 바와 같이, 명상 관련 오디오 컨텐츠가 나레이션에 해당하는 경우, 체크된 사용자의 상태에 따라, 휴대용 오디오 출력 장치를 통해 다른 스크립트가 출력되도록 제어한다.

우선, 명상 관련 오디오 사운드 위에 뇌파 동조 이펙트(effect)를 믹싱하여 출력하도록 설계한다.

도 8의 상단에 표시된 그래프를 기준으로 설명하면, 사용자의 이완 상태가 상대적으로 빠른 시간내(5분)에 목표치인 90%까지 도달한 경우를 가정하고 있다.

도 8의 중간에 표시된 그래프를 기준으로 설명하면, 사용자의 이완 상태가 상대적으로 늦은 시간내(8분)에 목표치인 90%까지 도달한 경우를 가정하고 있다.

사용자의 이완 상태가 40%로 판단되면, 이에 대응하는 레벨1의 뇌파 동조 신호를 믹싱하여 휴대용 오디오 출력 장치를 통해 출력되고, 사용자의 이완 상태가 50%로 판단되면, 이에 대응하는 레벨2의 뇌파 동조 신호를 믹싱하여 휴대용 오디오 출력 장치를 통해 출력된다. 사용자의 이완 상태가 60%로 판단되면, 이에 대응하는 레벨3의 뇌파 동조 신호를 믹싱하여 출력되고, 사용자의 이완 상태가 90%로 판단되면, 더 이상 뇌파 동조 신호를 믹싱하지 않고 원본 사운드만 출력하도록 설계된다.

마지막으로, 도 8의 하단에 표시된 그래프를 기준으로 설명하면, 사용자의 이완 상태가 맥스(Max) 시간인 10분 이내에 목표치인 90% 도달에 실패한 경우를 가정하고 있다.

사용자의 이완 상태가 40%로 판단되면, 이에 대응하는 레벨1의 뇌파 동조 신호를 믹싱하여 휴대용 오디오 출력 장치를 통해 출력되고, 사용자의 이완 상태가 50%로 판단되면, 이에 대응하는 레벨2의 뇌파 동조 신호를 믹싱하여 휴대용 오디오 출력 장치를 통해 출력된다. 사용자의 이완 상태가 60%로 판단되면, 이에 대응하는 레벨3의 뇌파 동조 신호를 믹싱하여 출력되고, 사용자의 이완 상태가 80%로 판단되면, 이에 대응하는 레벨4의 뇌파 동조 신호를 믹싱하여 출력된다. 다만, 명상 관련 오디오 컨텐츠를 출력한 이후, 기설정된 제한 시간인 10분 이내에 목표치인 이완 90%에 도달하지 못한 경우, 자원 및 시간 낭비를 줄이기 위하여, 오디오 컨텐츠의 출력을 중단한다.

이상 도 8에서 전술한 바와 같이, 명상 관련 오디오 컨텐츠가 음악에 해당하는 경우, 체크된 사용자의 상태에 따라, 휴대용 오디오 출력 장치를 통해 다른 레벨의 뇌파 동조 신호를 믹싱하여 출력하도록 제어한다.

도 3에 도시된 시스템과 달리, 도 9에 도시된 시스템은 추가적으로 클라우드 서버를 포함하고 있다.

모바일 디바이스(910)에 다운로드된 명상 관련 어플리케이션이 실행되면, 휴대용 오디오 출력 장치(900)와 근거리 유선 또는 무선 통신 연결이 이루어 진다. 나아가, 모바일 디바이스(910)는 클라우드 서버(930)와의 원격 통신을 통해 다른 사용자의 상태 관련 정보 등을 추가적으로 수신하는 것이 가능하다.

휴대용 오디오 출력 장치(900)가 예를 들어, 이어폰/이어버드 등인 경우, 사용자 귀를 통한 바이도 피드백을 측정하고, 모바일 디바이스(910)는 분석 지표를 인덱스화 한다.

그리고, 모바일 디바이스(910)는 사용자 상태에 따른 맞춤형 컨텐츠를 클라우드 서버(930)로부터 수신하여 휴대용 오디오 출력 장치(900)로 실시간 전송하도록 설계된다.

본 발명의 일실시예에 의한 명상 관련 어플리케이션의 이름을 퍼즈(pause)로 명명할 수 있으나, 이는 예시에 불과하고 해당 명칭으로 본 발명이 제한되는 것은 아니다.

종래 기술과 달리, 본 발명의 일실시예에 따른 명상 관련 어플리케이션이 실행되면, 휴대용 오디오 출력 장치 등을 통해 사용자의 현재 상태(ex: 뇌파, 심박수, 호흡수 등)를 다각도로 체크하도록 설계된다.

그리고, 체크된 사용자의 현재 상태에 따라, 해당 사용자의 지금 상태에 최적화된 오디오 컨텐츠(ex: 마음챙김 3번코스)를, 모바일 디바이스가 휴대용 오디오 출력 장치로 전송한다.

나아가, 해당 오디오 컨텐츠를 휴대용 오디오 출력 장치가 출력한 이후에도, 사용자의 상태를 주기적으로 또는 실시간으로 계속 모니터링 한다.

예를 들어, 명상 관련 오디오 컨텐츠의 1/3이 재생된 시점에서, 사용자의 상태 중 호흡에 문제가 있는 경우, "호흡이 빨라지고 있어요. 조금 더 깊게 쉼호흡 하세요"란 메시지가 모바일 디바이스를 통해 디스플레이 되거나 또는 휴대용 오디오 출력 장치를 통해 음성으로 출력된다.

예를 들어, 명상 관련 오디오 컨텐츠의 2/3이 재생된 시점에서, 사용자의 상태 중 심박수에 문제가 있는 경우, "팔다리에 힘을 빼세요"란 메시지가 모바일 디바이스를 통해 디스플레이 되거나 또는 휴대용 오디오 출력 장치를 통해 음성으로 출력된다.

예를 들어, 명상 관련 오디오 컨텐츠의 종료하기 직전에, 사용자의 상태 중 뇌파에 문제가 있는 경우, "조금 더 집중하세요"란 메시지가 모바일 디바이스를 통해 디스플레이 되거나 또는 휴대용 오디오 출력 장치를 통해 음성으로 출력된다.

그리고, 명상 관련 오디오 컨텐츠가 종료시, 과거 상태 정보와 비교하는 메시지(명상 후 스트레스 지수가 어제보다 2단계 내려갔어요)를 모바일 디바이스를 통해 디스플레이 되거나 또는 휴대용 오디오 출력 장치를 통해 음성으로 출력되도록 설계한다.

즉, 종래 기술과 달리, 본 발명은 사용자가 명상 관련 어플리케이션을 실행한 시점부터 종료시까지 지속적으로 상태를 체크하고, 전혀 다른 형태의 명상 관련 오디오를 제공해야만 한다. 이를 구현하기 위하여, 오디오 컨텐츠를 레이어별로 세그먼트화 하는 구체적인 기술에 대해서는, 이하 도 11 및 도 12를 참조하여 보다 상세히 후술하겠다.

종래 기술에 의하면, 도 11의 (a)에 도시된 바와 같이, 서버(컨텐츠 Repository)에 저장되어 있는 명상 관련 컨텐츠가, 모바일 디바이스 및 휴대용 오디오 장치에서 그대로 한곡이 끝날 때까지 재생되고 있다. 즉, 사용자 상태를 전혀 고려하지 않고 있다.

반면, 본 발명의 일실시예에 의하면, 도 11의 (b)에 도시된 바와 같이, 명상 관련 개별 컨텐츠들을 모두 아주 작은 단위로 세그먼테이션화 하여, 사용자의 상태에 따른 컨텐츠를 실시간으로 생성하도록 설계되어 있다.

해당 기술을 구현하기 위해서는, 컨텐츠를 작은 단위로 나누고 사용자의 상태에 따른 컨텐츠를 이어가는 알고리즘을 만들어야 한다. 이와 관련된 보다 구체적인 실시예는 이하 도 12에서 보다 상세히 설명하도록 하겠다.

도 12에 도시된 바와 같이, 본 발명의 일실시예에 의한 명상 관련 어플리케이션은, 명상의 몰입도 등에 따라 준비된 나레이션의 레이어가 변경되도록 설계한다. 한편, 명상의 몰입도 등 사용자 상태는, 전술한 바와 같이 휴대용 오디오 출력 장치를 통해 바이오 피드백(ex: 뇌파, 심박, 호흡 등)으로부터 추출된다.

보다 구체적으로 설명하면, 명상 관련 오디오 컨텐츠의 적어도 하나 이상의 레이어는, 뉴트럴(Neutral) 상태의 레이어, 긍정적인(Positive) 상태의 레이어 및 부정적인(Negative) 상태의 레이어 중 적어도 하나 이상을 포함한다.

나아가, 예를 들어, 상기 사용자의 뇌파에서 베타파인 12 내지 30Hz 주파수가 감지된 경우, 뉴트럴 상태로 간주하고, 상기 사용자의 뇌파에서 알파파인 8 내지 12Hz 주파수가 감지된 경우, 긍정적인 상태로 간주하고, 상기 사용자의 뇌파에서 감마파인 30 내지 50Hz 주파수가 감지된 경우, 부정적인 상태로 간주하도록 설계된다. 물론, 다른 파라미터(예를 들어, 심박수, 호흡수 등)를 기준으로 하여, 사용자 상태를 세분화하고, 컨텐츠의 레이어를 구별하는 것도 본 발명의 다른 권리범위에 속한다.

그리고, 도 12에 도시된 바와 같이, 부정적인 상태도 2개의 레벨(부정적인 상태/매우 부정적인 상태)로 나누고, 긍정적인 상태도 2개의 레벨(아주 긍정적인 상태/긍정적인 상태)로 나누는 것도 본 발명의 또 다른 권리범위에 속한다.

나아가, 도 12에 도시된 바와 같이, 특정 오디오 컨텐츠를 구성하는 적어도 하나 이상의 세그먼트(Intro, Main-1, Main-2, Main-3, Outro)의 길이는 사용자에 따라 변경되지 않고 동일하며, 기설정된 동일 시간 단위(예를 들어, 1분 또는 2분 등)으로 고정되어 있을 수 있다.

다만, 메모리에 저장된 프로파일 히스토리를 참조할 때, 예컨대 10분의 명상 관련 오디오를 감상하는 중에도, 사용자별로 상태 변화가 빈번하게 발생하는 사용자가 존재할 수 있고, 반대로 상태 변화가 상대적으로 덜 빈번하게 발생하는 사용자가 존재할 수 있다.

이를 고려하여, 본 발명의 다른 일실시예에 의하면, 명상 관련 오디오 컨텐츠를 구성하는 세그먼트의 길이가 사용자에 따라 변경되도록 설계하고, 특히 메모리에 기저장된 사용자별 상태의 프로파일 히스토리에 따라 달라지도록 설계한다.

보다 구체적으로 예를 들어 설명하면, 상태 변화가 빈번하게 발생하는 제1 사용자가 명상 관련 어플리케이션을 실행한 경우, 세그먼트(예를 들어, 1분 단위)를 보다 촘촘히 쪼개도록 설계한다. 이와 같이 설계할 경우, 민감한 사용자의 상태 변화에 보다 최적화된 명상 관련 컨텐츠를 제공할 수 있는 기술적 효과가 있다.

반면, 상태 변화가 상대적으로 덜 빈번하게 발생하는 제2 사용자가 명상 관련 어플리케이션을 실행한 경우, 세그먼트(예를 들어, 2분30초 단위)를 보다 넓은 주기로 쪼개도록 설계한다. 이와 같이 설계할 경우, 불필요한 사용자 상태 체크를 최소화할 수 있는 장점이 있다.

나아가, 도 12에 도시된 사용자의 상태가 중립 상태(뉴트럴 상태)인 경우, 이에 해당하는 레이어의 나레이션(ex: 집중을 잘 하고 있습니다)이 휴대용 오디오 출력 장치를 통해 출력된다.

한편, 사용자의 상태가 긍정적인 상태(Positive)인 경우, 이에 해당하는 레이어의 나레이션(ex: 매우 집중을 잘 하고 있습니다)이 휴대용 오디오 출력 장치를 통해 출력하거나, 해당 나레이션이 출력되지 않도록 제어한다.

그리고, 사용자의 상태가 부정적인 상태(Negative)인 경우, 이에 해당하는 레이어의 나레이션(ex: 명상에 집중해 주세요)이 휴대용 오디오 출력 장치를 통해 출력된다.

즉, 동일한 명상 오디오를 선택하여도, 사용자별로, 그리고 동일 사용자에 대해서도 시점(상태)에 따라 다른 최적의 명상을 제공받을 수 있는 기술적 효과가 있다.

반면, 종래 기술에 의하면, 명상 관련 오디오가 도 12에 도시된 바와 같이, 세그먼트로 분할되어 있지도 않고, 레이어의 개념이 존재하지 않는다. 예를 들어, 중립 상태임을 가정한 동일한 오디오가 변함 없이 출력된다.

이와 같은 본 발명의 일실시예에 의하면, 신체 데이터(바이오 피드백: 뇌파, 심박, 호흡 등)의 분석을 통해 실시간으로 컨텐츠를 변경함으로써, 맞춤형 명상 서비스를 제공한다. 명상 관련 오디오로서, 대중 음악, ASMR, Guided 명상, 오디오 북 등이 사용될 수 있으며, 각각 신체 데이터 상태에 따라 적절한 컨텐츠가 적용된다.

전술한 바와 같이, 종래 기술에 의한 명상 관련 어플리케이션은, 명상 전 내 상태를 자동으로 판단해 주지 않고, 사용자가 개별로 원하는 명상 오디오를 찾아야 하기 때문에 많은 비용과 시간이 발생하는 문제점이 있었다. 반면, 본 발명의 일실시예에 의한 명상 관련 서비스는, 사용자 상태를 체크하여 적절한 명상 컨텐츠를 자동으로 찾아 주는 장점이 있다.

나아가, 종래 기술에 의한 명상 관련 어플리케이션은, 명상 중 일방적인 전달 방식으로만 명상이 잘 이루어 지고 있는지 동일한 메시지를 제공하였다. 반면, 본 발명의 일실시예에 의한 명상 관련 서비스는, 관련 오디오가 출력된 이후에도 사용자 상태를 지속적으로 모니터링 하고 그 결과(“호흡을 더 깊게 하세요” 등)를 지속적으로 제공하도록 설계되어 있다.

그리고, 종래 기술에 의한 명상 관련 어플리케이션은, 명상 후 피드백을 제공하지 않았다. 반면, 본 발명의 일실시예에 의한 명상 관련 서비스는, 이전 데이터를 참조하여, 어느 정도 명상 관련 개선되었는지 피드백(ex: “잘 하고 있지만, 좀 더 집중이 필요해요”)을 제공하는 장점이 있다.

이상 본 발명의 다양한 실시예들에 대하여 설명하였으나, 이는 예시에 불과한 것으로서 본 발명은 이에 한정되지 않는 것이며, 본 명세서에 개시된 기초 사상에 따르는 최광의 범위를 갖는 것으로 해석되어야 한다.

당업자는 개시된 실시 형태들을 조합, 치환하여 적시되지 않은 실시 형태를 실시할 수 있으나, 이 역시 본 발명의 권리범위를 벗어나지 않는 것이다. 이외에도 당업자는 본 명세서에 기초하여 개시된 실시형태를 용이하게 변경 또는 변형할 수 있으며, 이러한 변경 또는 변형도 본 발명의 권리범위에 속함은 명백하다.

이전 목차인 발명의 실시를 위한 최선의 형태에서, 본 발명을 실시하기 위한 다양한 형태들에 대해 전술한 바 있다.

본 발명의 일실시예는, 휴대용 오디오 출력 장치, 모바일 디바이스, 클라우드 서버 또는 명상 관련 어플리케이션 등에 적용 가능하기 때문에, 산업상 이용가능성이 인정된다.

Claims

휴대용 오디오 출력 장치 및 모바일 디바이스를 포함하는 시스템의 제어 방법에 있어서,

상기 모바일 디바이스를 통해 명상 관련 어플리케이션을 실행하는 단계;

상기 모바일 디바이스와 유선 또는 무선으로 연결된 상기 휴대용 오디오 출력 장치를 착용한 사용자의 상태를 체크하는 단계;

상기 체크된 사용자의 상태에 따라, 특정 오디오 컨텐츠의 제1 레이어에 해당하는 세그먼트를, 상기 휴대용 오디오 출력 장치를 통해 출력하는 단계; 그리고

상기 체크된 사용자의 상태가 변경된 경우, 상기 특정 오디오 컨텐츠의 제2 레이어에 해당하는 세그먼트를, 상기 휴대용 오디오 출력 장치를 통해 출력하는 단계

를 포함하며,

상기 제1 레이어와 상기 제2 레이어는 서로 다른 것을 특징으로 하는 시스템의 제어 방법.
제1항에 있어서,

상기 사용자의 상태는,

뇌파, 심박수 또는 호흡수 중 적어도 하나 이상을 포함하는 것을 특징으로 하는 시스템의 제어 방법.
제2항에 있어서,

상기 특정 오디오 컨텐츠의 적어도 하나 이상의 레이어는,

뉴트럴 상태의 레이어, 긍정적인 상태의 레이어 및 부정적인 상태의 레이어 중 적어도 하나 이상을 포함하는 것을 특징으로 하는 시스템의 제어 방법.
제3항에 있어서,

상기 사용자의 뇌파에서 베타파인 12 내지 30Hz 주파수가 감지된 경우, 뉴트럴 상태로 간주하고,

상기 사용자의 뇌파에서 알파파인 8 내지 12H 주파수가 감지된 경우, 긍정적인 상태로 간주하고,

상기 사용자의 뇌파에서 감마파인 30 내지 50Hz 주파수가 감지된 경우, 부정적인 상태로 간주하는 것을 특징으로 하는 시스템의 제어 방법.
제3항에 있어서,

상기 특정 오디오 컨텐츠를 구성하는 적어도 하나 이상의 세그먼트의 길이는,

사용자에 따라 동일하며, 기설정된 동일 시간 단위로 구성되는 것을 특징으로 하는 시스템의 제어 방법.
제3항에 있어서,

상기 특정 오디오 컨텐츠를 구성하는 적어도 하나 이상의 세그먼트의 길이는,

사용자에 따라 변경되며, 메모리에 기저장된 사용자별 상태의 프로파일 히스토리에 따라 다른 것을 특징으로 하는 시스템의 제어 방법.
제1항에 있어서,

상기 특정 오디오 컨텐츠가 나레이션에 해당하는 경우,

상기 체크된 사용자의 상태에 따라, 상기 휴대용 오디오 출력 장치를 통해 다른 스크립트를 출력하는 단계

를 더 포함하는 것을 특징으로 하는 시스템의 제어 방법.
제1항에 있어서,

상기 특정 오디오 컨텐츠가 음악인 경우,

상기 체크된 사용자의 상태에 따라, 상기 휴대용 오디오 출력 장치를 통해 다른 레벨의 뇌파 동조 신호를 믹싱하여 출력하는 단계

를 더 포함하는 것을 특징으로 하는 시스템의 제어 방법.
제1항에 있어서,

상기 휴대용 오디오 출력 장치는,

이어폰, 이어버드, 헤드셋 중 적어도 하나를 포함하는 것을 특징으로 하는 시스템의 제어 방법.
모바일 디바이스에서 다운로드 가능한 명상 관련 어플리케이션의 제어 방법에 있어서,

상기 명상 관련 어플리케이션이 실행된 이후, 상기 모바일 디바이스와 유선 또는 무선으로 연결된 휴대용 오디오 출력 장치를 착용한 사용자의 상태를 체크하도록 제어하는 단계;

상기 체크된 사용자의 상태에 따라, 특정 오디오 컨텐츠의 제1 레이어에 해당하는 세그먼트를, 상기 휴대용 오디오 출력 장치를 통해 출력하도록 제어하는 단계; 그리고

상기 체크된 사용자의 상태가 변경된 경우, 상기 특정 오디오 컨텐츠의 제2 레이어에 해당하는 세그먼트를, 상기 휴대용 오디오 출력 장치를 통해 출력하도록 제어하는 단계

를 포함하며,

상기 제1 레이어와, 상기 제2 레이어는 서로 다른 것을 특징으로 하는 모바일 디바이스에서 다운로드 가능한 명상 관련 어플리케이션의 제어 방법.