KR20200097637A - 시뮬레이션 모래상자 시스템 - Google Patents

시뮬레이션 모래상자 시스템 Download PDF

Info

Publication number
KR20200097637A
KR20200097637A KR1020197023916A KR20197023916A KR20200097637A KR 20200097637 A KR20200097637 A KR 20200097637A KR 1020197023916 A KR1020197023916 A KR 1020197023916A KR 20197023916 A KR20197023916 A KR 20197023916A KR 20200097637 A KR20200097637 A KR 20200097637A
Authority
KR
South Korea
Prior art keywords
sandbox
virtual
real
camera device
voice
Prior art date
Application number
KR1020197023916A
Other languages
English (en)
Other versions
KR102463112B1 (ko
Inventor
즈난 왕
Original Assignee
즈난 왕
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 즈난 왕 filed Critical 즈난 왕
Publication of KR20200097637A publication Critical patent/KR20200097637A/ko
Application granted granted Critical
Publication of KR102463112B1 publication Critical patent/KR102463112B1/ko

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F30/00Computer-aided design [CAD]
    • G06F30/20Design optimisation, verification or simulation
    • G06K9/00671
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/20Scenes; Scene-specific elements in augmented reality scenes

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Computer Hardware Design (AREA)
  • Evolutionary Computation (AREA)
  • Geometry (AREA)
  • General Engineering & Computer Science (AREA)
  • User Interface Of Digital Computer (AREA)
  • Processing Or Creating Images (AREA)

Abstract

본 발명의 시뮬레이션 모래상자 시스템은 카메라 장치, 제어기, 디지털화 프로세서, 디스플레이 장치, 실체 모래상자 표기, 실체 모래 캐비닛 표기를 포함한다. 카메라 장치는 디지털화 프로세서 및 디스플레이 장치에 연결되고, 실체 모래상자 표기와 카메라 장치는 광학 정보 전송 연결되며, 실체 모래 캐비닛 표기는 카메라 장치와 광학 정보 전송 연결된다. 본 발명의 장점과 특징은 여러 사람이 인터넷 온라인상에서 타지에서 동시에 조작 가능한 3D 가상 모래상자를 처음으로 제공하는 것이다.

Description

시뮬레이션 모래상자 시스템
본 발명은 심리학 분야에 관한 것이며, 시뮬레이션 모래상자 시스템에 관한 것으로서, 구체적으로, 심리학의 모래상자 게임 이론의 실천 및 발전을 기반으로 창조한 시뮬레이션 모래상자 시스템에 관한 것이다.
모래상자 게임(sandplay) 이론의 끊임없는 발전에 의해, 실체 모래상자가 나타나고, 또 단체 모래상자와 단일 모래상자로 나눈다. 단체 모래상자는 단일 모래상자에 비해 단체에서의 대인관계, 단체와 개인의 성장에 매우 좋은 효과를 가져왔다. 일반적으로 제한성 단체 모래상자를 이용해 왔다. 제한성 단체 모래상자는 일정한 규칙적인 제한이 존재하는 단체 모래상자 게임 방법을 의미하는데, 필요조건은 단일 모래상자와 동일하여 모래상자 게임실의 배치 문제에서 특별한 요구가 존재하지 않는다. 단체 멤버는 사전에 협약한 방식에 따라 각종 랜덤 방식으로 순서를 생성한다. 모든 멤버가 1회 즉 1차수 완성하면 전체 과정은 멤버 사이에서 그 어떤 언어와 비언어적인 교류 및 상호작용을 허용하지 않으며, 상담원은 멤버의 규칙에 대한 준수 상황에 근거하여 인격 특징을 발견할 수 있다.
제한성 단체 모래상자는 인간관계, 부부관계, 자녀와 부모관계 등에 대한 치료에 적용된다. 제한성 모래상자 게임은 사회 현실의 이니셜로서 매개인의 행동 양식은 단체 모래상자에서 구현될 수 있다. 단체 모래상자 게임에서 개개인은 모두 자신만의 가상 세계가 존재한다. 하지만, 공동의 작품을 완성하려면 통합이 필요하다. 또한, 모래상자 게임 과정을 통해, 상담원은 매개인의 인격 특징을 관찰하여 매개인이 자신의 그러한 특징을 인식하게끔 도울 수 있다. 단체 모래상자 게임은 여러 번의 제작 과정을 거쳐 끊임없는 조화를 거쳐야만 최종의 통합에 도달할 수 있다.
실체 모래상자가 실제 조작 사용중 널리 보급되지 못하는 문제에 대해, 모래상자 진료실 지리위치가 고정되고, 실체 모래상자 점용 공간이 크고 참여 인수가 제한되며 모델 수량이 제한되고 작업자의 사용시간이 원활하지 못하며 작업중 효과음과 냄새를 생성시키지 못하는 등 난제를 집중적으로 해결한다.
본 발명은 시뮬레이션 모래상자 시스템을 제공함으로써, 단체 모래상자를 전자 설비에 이식하여 상담원이 많은 사용자를 동시에 효과적으로 대응하지 못하는 결점을 완벽하게 해결하고 모래상자실의 주소 문제를 해결하고 모래상자실의 공간의 크기 문제를 해결하며, 가상의 모래상자는 조작상에서 리얼 모래상자보다 더욱 원활하여 모래상자의 공간 확장과 기능 연장 면에서 가상 모래상자는 리얼 모래상자에 비해 더욱 원활하고 풍부하여 가상 모래 캐비닛은 공간 규모의 제한을 받지 않는다. 모래 캐비닛의 설계는 맞춤제작이 가능하여 제작된 모델은 통일된 스타일과 비례 기준이 있어 모델로 하여금 더욱 대표성을 띠게 한다. 모래상자의 조작에 설비의 진동 피드백을 추가하고 전자 모래상자는 리얼 모래상자가 구비되지 않은 조명효과를 갖고 있다. 매개 모형은 각자 독특한 속성 액션을 구비하고 모래상자는 주야 순환 및 날씨 등 변화가 존재하며 또한 동일한 모형은 여러 번 사용할 수 있으며 모래상자에 동시에 나타날 수도 있다. 단일 모래상자와 단체 모래상자는 조작시 상담원의 체력, 정력 및 조직능력의 구속을 받지 않는다. 따라서, 사용자로 하여금 모래상자 조작에 더욱 전념하도록 하여 사용자의 감각을 더욱 확대 향상함으로써 사용자가 다각도로 모래상자 및 모델을 관찰하고 느낄 수 있도록 쉽게 도울 수 있다. 가상 환경에서 사용자가 특정된 상황에서 진실 세계에서의 물리적 규칙의 제한에서 벗어날 수 있도록 하여 모래상자, 모델에 대해 효과적으로 다각도로 조작을 진행할 수 있게 한다. 리얼 모래상자에서 조수가 모래상자 데이터 통계를 진행하는 부분을 시스템에서 모래상자 조작의 데이터 정보에 대해 디지털화 처리하도록 전환한다.
아래와 같은 기술방안을 실시한다:
본 발명의 실시예에 따른 시뮬레이션 모래상자 시스템은 카메라 장치, 제어기, 디지털화 프로세서, 디스플레이 장치, 실체 모래상자 표기, 실체 모래 캐비닛 표기를 포함한다. 상기 카메라 장치는 휴대폰, 태블릿, 노트북, 스마트 안경, 블루투스 카메라 및 기타 리얼 신을 캡쳐할 수 있는 장치를 포함한다. 상기 제어기는 액션 캡쳐 핸들을 포함하며, 기타는 센서를 통해 사용자 액션을 맵핑하는 휴대장치이다. 카메라 장치와 제어기는 디지털화 프로세서 및 디스플레이 장치에 연결되고 카메라 장치를 통해 리얼 신을 획득하며, 카메라 장치와 제어기에 관련되는 디지털화 프로세서는 카메라 장치로 캡쳐한 리얼 신 데이터를 획득하고 해석하며, 리얼 신 데이터에 대해 디지털화 처리를 진행한 후 디스플레이 장치에 시현(presence)한다. 장치는 인터넷 혹은 근거리 통신망 및 기타 네트워크 방식으로 디지털화 처리된 데이터를 기타 본 발명의 실시예를 설치한 장치와 연결 및 인터랙션을 진행한다. 리얼 모래상자 표기는 리얼 환경에서 여러 가지 원인으로 인해 리얼 모래상자를 세팅할 수 없어 어떠한 표기를 통해 가상 모래상자 맵핑을 시작하는 것을 의미하며, 이러한 표기는 이미지, 플라스틱, 천 혹은 기타 본 발명의 실시예에 의해 인증된 표기할 수 있는 물체가 될 수 있으며, 실체 모래상자 표기와 카메라 장치는 광학 정보 전송 연결된다. 실체 모래 캐비닛 표기는 리얼 환경에서 여러 가지 원인으로 인해 리얼 캐비닛을 세팅하지 못하여 그 어떠한 표기를 통해 가상 모래 캐비닛 맵핑을 시작하는 것을 의미하며, 이러한 표기는 이미지, 플라스틱, 천 혹은 기타 본 발명의 실시예에 의해 인증된 표기할 수 있는 물체가 될 수 있으며, 실체 모래 캐비닛 표기와 카메라 장치는 광학 정보 전송 연결된다.
미각에 관해: 본 발명의 실시예 인증을 거친 장치는 관련 조건을 만족하는 상황에서 장치의 외장형 장치에서 상응하는 무해 기체를 발산한다. 더욱 구체적인 방법은 다음과 같다: 가상 환경에서 곧 나타날 가상 냄새의 기초 파라미터를 획득한다. 상기 기초 파라미터 및 냄새 발생기의 배치 파라미터 및 성능 파라미터에 근거하여 제어 신호를 생성한다. 상기 제어 신호에 근거하여 상기 냄새 발생기를 제어함으로써 상기 냄새 발생기가 상기 가상 냄새에 대응되는 냄새를 생성하도록 한다. 상기 가상 환경에서 곧 나타날 가상 냄새의 기초 파라미터를 획득하는 방법은 다음과 같다: 사전에 저장한 가상 데이터를 해석하여 기초 데이터 집합을 생성하고, 상기 가상 환경에서 가상 냄새가 곧 나타날 때, 곧 나타날 가상 냄새의 시간 파라미터에 근거하여 기초 데이터 집합에서 대응되는 기초 파라미터를 획득한다. 상기 가상 환경에서 곧 나타날 가상 냄새의 기초 파라미터를 획득한 후 다음과 같은 절차가 더 포함된다: 리얼 환경에서의 리얼 냄새 파라미터를 획득할 경우, 상기 기초 파라미터, 냄새 발생기의 배치 파라미터 및 성능 파라미터에 근거하여 제어 신호를 생성한다. 상기 리얼 냄새 파라미터, 상기 기초 파라미터, 냄새 발생기의 배치 파라미터 및 성능 파라미터에 근거하여 제어 신호를 생성한다. 상기 제어 신호에 근거하여 상기 냄새 발생기를 제어함으로써 상기 냄새 발생기가 상기 가상 냄새에 대응되는 진정한 냄새를 생성하며, 선풍기로 상기 진정한 냄새를 휘발시킨다.
촉각에 대해: 장치의 진동에 의해 촉각의 효과를 시뮬레이션한다. 주위의 신 배치는 시험자의 체험감을 높이고, 가상과 현실을 더 가깝게 상호 결합함으로써 더욱 많은 체험 테스트 효과를 체험하며, 더욱 많은 테스트 방식에 기초 조건과 가능성을 제공한다. 그 방법은 구체적으로 다음과 같다: 가상현실 신 및/또는 시험자가 있는 환경의 매개 물체의 상태 정보를 획득하고 상태 정보에 근거하여 촉각 피드백 정보를 생성한다. 촉각 피드백 정보에 근거하여 시험자에 대해 촉각 피드백을 진행한다. 상기 가상현실 신 및/또는 시험자가 있는 환경의 매개 물체의 상태 정보는 다음과 같은 것을 포함한다: 상기 가상현실 신의 매개 물체를 식별하고 식별해낸 매개 물체에 대응되는 물리 상태 정보를 확정한다. 및/또는 사전 설정된 레이더 센서 혹은 적외선 센서를 통해 상기 시험자가 있는 환경의 매개 물체의 운동 상태 정보를 모니터링한다. 이중, 상기 물리상태 정보는 물체의 경도 및/또는 조도를 포함한다. 상기 운동 상태 정보는 위치, 이동방향 및/혹은 이동 속도 정보를 포함한다. 상기 상태 정보가 운동 상태 정보를 포함할 경우, 상기 촉각 피드백 정보를 생성하는 방식은 다음과 같은 것을 포함한다: 매개 물체의 상기 운동 상태 정보에 근거하여 상기 시험자가 있는 환경에서 시험자와 물체의 거리를 확정한다. 만약 그 거리가 0보다 클 경우, 사전에 설정한 거리와 피드백 강도의 대응관계에 근거하여 매개 물체에 대응되는 피드백 강도 정보를 생성한다. 상기 촉각 피드백 정보에 근거하여 시험자에 대해 촉각 피드팩을 진행하는 방법은 다음과 같다: 압력 장치를 이용하여 시험자에 대해 상기 피드백 강도 정보에 대응되는 압력을 가한다. 및/또는 진동 장치를 이용하여 시험자에 대해 상기 피드백 강도 정보에 대응되는 진동을 가한다. 상기 상태 정보가 물리 상태 정보를 포함할 경우, 상기 촉각 피드백 정보를 생성하는 방식은 다음과 같은 내용을 포함한다: 사전 설정한 터치 스크린에 시현된 상기 가상현실 신의 매개 물체의 물리 상태 정보에 근거하여 매개 물체에 대응되는 터치 감지 정보를 생성한다. 이중, 상기 터치 감지 정보는 물체를 터치할 때 물체의 경도 및/또는 조도를 감지하는데 필요한 힘의 크기와 분포 영역 정보를 포함한다. 상기 터치 피드백 정보에 근거하여 시험자에 대해 터치 피드백을 진행하는 방식은 다음과 같은 것을 포함한다: 생성된 상기 터치 감지 정보에 근거하여 상기 터치 스크린의 서로 다른 영역에서 사전에 설정된 매칭 규칙에 따라 발송 전극과 수신 전극에 대응되는 입력 전압 신호를 입력한다. 입력 전압 신호의 서로 다름에 따라 매개 영역에 대응되는 정전력을 생성하여 매개 영역에서 생성되는 정전력에 근거하여 물체를 터치하였을 때의 경도 및/또는 조도를 감지한다. 상기 촉각 피드백 정보에 근거하여 시험자에 대해 촉각 피드백을 진행하기 전에 다음과 같은 내용을 포함한다: 시험자가 상기 터치 스크린을 터치하는 압력을 측정한다. 그 측정된 압력이 사전 설정 임계값보다 클 경우, 상기 터치 스크린에서 촉각 피드백 정보에 근거하여 시험자에 대해 촉각 피드백을 진행하도록 트리거한다.
모래상자 설정: 카메라 장치로 실체 모래상자 혹은 실체 모래상자 표기를 마주한 후, 장치 신에 가상 모래상자가 나타나고 가상 모래상자의 양식은 실체 모래상자 혹은 실체 모래상자의 표기의 특징에 근거하여 서로 대응되게 시현한다. 만약 실체 모래상자일 경우, 가상 모래상자는 실체 모래상자의 평면 범위내에 완전하게 존재한다. 하지만, 리얼 모래상자에서 조작할 수 없는 공간 범위로 확장될 수도 있다. 이러한 공간 범위는 리얼 모래상자의 상부 밑부분을 포함하며, 실체 모래상자의 최대 횡단면의 프레임 범위내를 말한다. 하지만, 공간 영역에서 연장되는 가상 모래상자도 존재한다. 만약 실체 모래상자 표기일 경우, 가상 모래상자는 온전히 모래상자 표기를 기반으로 하여 근거 없이 장치에 나타난 가상 모래상자이다. <실체 모래상자와 모래상자 표기는 모두 뷰(View) 장치에 제공되는 참조물이다>, 그것은 실체 모래상자와 모래상자 표기가 동시에 존재하고 또한 상호 전환할 수 있으며, 실체 모래상자의 제한성에 비해, 가상 모래상자만이 갖고 있는 특수성은 동적인 가변 외모 형태의 속성을 갖고 있다. 그 속성은 하늘, 지면 및 지하의 속성이다. 따라서 가상 모래상자가 가상 모래 캐비닛과 구별되는 특수 상황은 다음과 같다: 모래상자를 설정한 후의 가상 모래상자의 형태는 능동적 혹은 피동적인 동적 변화를 진행할 수 있지만 가상 모래 캐비닛은 하늘, 지면, 지하의 상호적인 속성을 갖고 있지 않는다.
모래 캐비닛의 설정: 장치를 실체 캐비닛 혹은 실체 캐비닛 표기를 마주한 후, 장치 신에서 가상 모래 캐비닛이 나타나는데 가상 모래 캐비닛의 모양은 실체 캐비닛 혹은 실체 캐비닛 표기에 근거하여 시현된다. 만약 참조 실체 캐비닛일 경우, 모든 피규어는 실체 캐비닛에 향상되어 시현된다. 만약 실체 캐비닛 표기일 경우, 가상 모래 캐비닛은 온전히 캐비닛 표기를 계속하여 완전히 가상으로 된 모래 캐비닛을 하나 더 만들어낸다.
구체적인 조작은 다음과 같다: 카메라 장치와 현실 물체 혹은 표기와의 멀고 가까운 정도를 변경하여 향상된 현실 혹은 가상현실에서의 인터랙션 거리를 변경할 수 있으며, 제어기, 손짓 혹은 핑거의 조작을 통해 향상된 현실 혹은 가상현실에서의 인터랙션 거리를 가깝게 하거나 멀게 할 수 있다. 카메라 장치의 현실에 대한 각도를 변경해도 향상된 현실 혹은 가상현실에서의 관찰 각도를 변경할 수 있다. 향상된 현실에서의 모든 조작은 장치의 스크린에 기반하며, 가상 모래 캐비닛은 회전, 뒤집기, 연신, 평행이동, 리셋, 변행 등, 모래 캐비닛에서 피규어를 획득한 후, 카메라 장치를 모래상자의 범위내에 이동시키고 그 다음 피규어를 가진 상태에서 가상 모래상자를 관찰하며, 피규어를 세팅 혹은 내버릴 수 있는데, 만약 내버릴 경우 모래상자 외부에서 손을 놓는데 이렇게 되면 피규어는 소실된다. 만약 세팅할 경우 가상 모래상자의 범위내에서 손을 놓는데 장치를 통해 피규어가 실체 모래상자 위에 중첩되어 겹쳐있는 것을 관찰할 수 있다. AR, VR 및 기타 장치는 랜 혹은 인터넷을 통해 다자간 망연동 조작을 진행할 수 있다.
또한, 테스트 과정에서 조작자 혹은 작업자가 가상 신으로 진입하여 가이드 및 교류를 진행해줄 필요가 있을 수 있다. 본 발명에서 적용하는 실시방법은 다음과 같다: 가상현실 플랫폼에서 제1가상현실장치에서 발송한 통신 요청 메시지를 수신하며, 상기 통신 요청 메시지에 제1시각위치정보와 제2가상현실장치의 식별자를 포함한다. 상기 제1시각위치정보는 상기 제1가상현실장치의 전체화면 시각 위치 정보중의 임의의 시각위치정보를 말한다. 상기 제1시각위치정보와 상기 제2가상현실장치의 식별자에 근거하여 제2가상현실장치의 전체화면 동영상 영역에서 대응되는 제2동영상영역을 확정한다. 상기 제2동영상영역에 대응되는 다각도 동영상을 획득하고 제1가상현실장치에 발송하여 상기 제2동영상영역에 대응되는 다각도 동영상의 시현을 진행한다. 상기 가상현실플랫폼은 상기 제1가상현실장치 혹은 상기 제2가상현실장치에 내장 혹은 외장되어 상기 제1가상현실장치와 상기 제2가상현실장치가 다차원 동영상 통신을 구현하도록 하는 처리 칩을 포함한다. 상기 가상현실 플랫폼에서는 제1가상현실장치에서 발송한 통신 요청 메시지를 수신하기 전에, 다음과 같은 내용을 포함한다: 상기 가상현실 플랫폼은 상기 제1가상현실장치와 상기 제2가상현실장치에서 각각 발송한 등록 요청 메시지를 수신하며, 상기 제1가상현실장치에서 발송한 등록 요청 메시지에는 상기 제1가상현실장치의 전체화면 동영상 영역과 전체화면 시각 위치 정보 사이의 대응관계를 포함하고, 상기 제2가상현실장치에서 발송한 등록 요청 메시지에는 상기 제2가상현실장치의 전체화면 동영상 영역과 전체화면 시각 정보 사이의 대응관계를 포함한다. 또한, 상기 제1가상현실장치의 식별자, 상기 제1가상현실장치의 전체화면 동영상 영역과 상기 전체화면 시각 위치 정보 사이의 대응관계를 설정하고 저장한다. 또한, 상기 제2가상현실장치의 식별자, 상기 제2가상현실장치의 전체화면 동영상 영역과 상기 전체화면 시각 위치 정보 사이의 대응관계를 설정하고 저장한다. 상기 제1시각위치정보와 상기 제2가상현실장치의 식별자는 제2가상현실장치의 전체화면 동영상 영역에서 대응되는 제2동영상영역을 확정한다. 이는 다음과 같은 내용을 포함한다: 상기 제1시각위치정보와 상기 제2가상현실장치의 식별자에 근거하여 상기 제2가상현실장치의 전체화면 시각 위치 정보에서 상기 제1시각위치정보에 대응되는 제2시각위치정보를 확정하고, 상기 제2시각위치정보는 상기 제2가상현실장치의 전체화면 시각 위치 정보중의 임의의 시각위치정보이다. 상기 제2시각위치정보에 근거하여 상기 제2가상현실장치의 전체화면 동영상 영역에서 상기 제2시각위치정보에 대응되는 제2동영상영역을 확정한다. 혹은 상기 제1시각위치정보에 근거하여 상기 제1가상현실장치의 전체화면 동영상 영역에서 상기 제1시각위치정보에 대응되는 제1동영상영역을 확정하고, 상기 제2가상현실정치의 식별자와 상기 제1동영상영역에 근거하여 상기 제2가상현실장치의 전체화면 동영상 영역에서 상기 제1동영상영역에 대응되는 제2동영상영역을 확정한다. 상기 가상현실 플랫폼은 상기 제1가상현실장치의 전체화면 동영상 영역내의 이미지 및 상기 제2가상현실장치의 전체화면 동영상 영역내의 이미지를 수신한다. 상기 제1가상현실장치의 전체화면 동영상 영역내의 이미지에 근거하여 상기 제1가상현실장치의 전체화면 다차원 동영상을 만든다. 상기 제2가상현실장치의 전체화면 동영상 영역내의 이미지에 근거하여 상기 제2가상현실장치의 전체화면 다차원 동영상을 만든다.
또한, 테스트 과정에서 시험자와 언어적인 교류가 필요할 수 있다. 하지만, 테스트 과정에서 너무 많은 버튼과 수동으로 제어해야 하는 방식으로 인해 조작이 복잡하고 테스트 결과에 영향준다. 따라서 본 발명은 특유의 설정과 방식을 이용하여 시험자의 조작을 감소하고 감정을 지니며 감정상에서 시험자에 대한 영향을 감소시켜 스마트하게 시험자와 교류할 수 있다. 구체적으로, 상기 장치는 음성 이동단말기, 가상 환경 단말기, 외부 서버를 포함한다. 상기 외부 서버는 음성 이동단말기, 가상 환경 단말기와 각각 통신 연결되며, 상기 음성 이동단말기와 가상 환경 단말기는 통신 연결된다. 상기 음성 이동단말기는 사용자의 음성 신호를 수집하고 수집한 음성에 대해 사전 처리하기 위한 음성수집모듈, 사전 처리된 음성 신호를 텍스트 정보로 변환하고 텍스트 정보를 대응되는 제어 명령과 파라미터로 생성하는 음성식별모듈, 음성수집모듈에서 사전 처리한 후의 음성 신호에서 감정 특징을 갖고 있는 파라미터를 추출하기 위한 음성 감정특징 파라미터 추출모듈, 외부 서버로 부터 로딩 및 업데이트된 음성식별데이터, 음성 제어명령 데이터베이스 및 음성 감정 데이터베이스를 저장하기 위한 저장모듈, 식별해낸 제어명령과 파라미터 혹은 음성 텍스트 정보와 대응되는 음성 감정을 가상 환경 단말기에 발송하고 외부 서버와 통신 연결하여 외부 서버내의 대응되는 데이터패킷을 저장모듈에 로딩 및 업데이트하기 위한 무선통신모듈 및 수집한 사용자 음성 정보를 처리하거나 혹은 외부 서버에 업데이트 명령을 발송하여 저장 모듈에 저장된 데이터를 로딩 및 업데이트하기 위한 프로세서를 포함한다. 상기 프로세서는 음성수집모듈, 음성식별모듈, 음성 감정특징 파라미터 추출모듈, 저장모듈, 무선통신모듈과 연결된다. 상기 음성수집모듈은 음성식별모듈, 음성 감정특징 파라미터 추출모듈과 연결된다. 음성 감정특징 파라미터 추출모듈에서 추출해낸 감정특징은 대응되는 음성식별모듈에서 식별해낸 음성텍스트정보와 각각 맵핑된다. 상기 저장모듈은 음성식별모듈 및 음성 감정특징 파라미터 추출모듈과 각각 연결된다. 상기 가상환경단말기는 외부 서버로 부터 로딩 및 업데이트 되는 가상 인물 감정 표정 및 액션의 모델 라이브러리, 음성 감정에 대응되는 억양 및 말하는 속도 데이터 베이스를 저장하기 위한 저장유닛, 수신된 음성 텍스트 정보를 재생하기 위한 음성재생모듈, 가상 인물 음성 표달의 감정 표정 및 액션을 시현하기 위한 디스플레이모듈, 음성이동단말기와 통신하고 외부 서버와 통신 연결되어 외부 서버의 대응되는 데이터패킷을 저장 유닛내로 로딩 및 업데이트하기 위한 통신모듈을 포함한다. 상기 저장유닛은 음성재생모듈, 디스플레이모듈과 각각 연결된다. 상기 음성수집모듈은 주요하게 마이크로폰이다. 상기 음성식별모듈은 음성특징추출유닛, 음성특징비교유닛, 비교결과출력유닛을 포함한다. 상기 음성특징추출유닛과 음성특징비교유닛이 연결되고 상기 음성특징비교유닛은 비교결과출력유닛과 연결된다. 상기 음성 감정특징 파라미터 추출모듈은 감정특징추출유닛, 감정특징비교유닛, 감정특징출력유닛을 포함한다. 상기 감정특징추출유닛과 감정특징비교유닛이 연결되고 상기 감정특징비교유닛은 감정특징출력유닛과 연결된다. 상기 음성재생모듈은 억양매칭유닛, 음성재생유닛을 포함한다. 상기 디스플레이모듈은 액션매칭유닛, 디스플레이유닛을 포함한다. 상기 액션매칭유닛과 디스플레이유닛이 연결된다. 그 방법은 다음과 같은 절차가 포함된다: 음성이동단말기는 가상환경단말기와 연결되고 연결 성공한 후, 음성이동단말기의 프로세서, 가상환경단말기는 데이터베이스 버전 조회 명령을 외부서버에 각각 발송한다. 음성이동단말기의 저장모듈에 저장된 음성식별데이터, 음성제어명령 데이터베이스, 음성감정데이터베이스의 버전 및 가상환경단말기의 저장유닛에 저장된 가상인물감정표정과 액션의 모델 라이브러리, 음성감정에 대응되는 억양과 말하는 속도 데이터베이스의 버전이 외부 서버의 것과 일치한지 조회한다. 만약 일치하지 않을 경우, 외부 서버로 부터 대응되는 최신 버전의 데이터를 대응되는 저장모듈, 저장유닛에 로딩 및 업데이트함으로써, 저장모듈과 저장유닛내의 데이터가 최신 상태를 유지한다. 음성수집모듈은 사용자의 음성신호를 수집하고 수집한 음성신호를 필터링, 양자화 등 사전처리한 후 음성식별모듈과 음성 감정특징 파라미터 추출모듈에 발송한다. 음성식별모듈은 저장모듈에 저장한 음성식별데이터에 결합하여 사전처리된 후의 음성신호를 텍스트 정보 형식으로 전환하고 텍스트 정보를 음성제어명령 데이터베이스내의 명령 데이터와 매칭하여 제어 명령이 맞는지 판단한다. 만약 제어명령이 맞을 경우, 대응되는 제어명령과 파라미터를 생성하고 가상환경 단말기로 출력하여 대응되는 제어 조작을 진행한다. 만약 제어명령이 아닐 경우, 음성교류정보이다. 음성 감정특징 파라미터 추출모듈은 사전 처리후의 음성신호의 파형을 분석하고 감정특징을 갖고 있는 파라미터를 추출하며, 추출해낸 감정특징을 갖는 파라미터를 음성감정 데이터베이스의 감정데이터와 매칭하여 대응되는 감정특징을 얻어낸다. 그 다음 상기 감정특징정보를 대응되는 단어 혹은 어구에 맵핑하고 감정특징 및 상기 감정특징 정보를 맵핑한 대응 단어 혹은 어구를 가상환경 단말기에 발송한다. 가상환경 단말기의 액션매칭유닛은 수신된 감정특징을 저장유닛의 가상인물감정표정 및 액션의 모델 라이브러리와 매칭을 진행하여 상기 감정특징에 대응되는 감정표정 및 액션을 얻으며, 디스플레이유닛을 통해 대응되는 감정표정 및 액션을 디스플레이한다. 억양매칭유닛은 감정특징에 대응되는 단어 혹은 어구를 음성감정에 대응되는 억양과 말하는 속도 데이터베이스의 데이터와 매칭을 진행하여 상기 단어 혹은 어구에 대응되는 억양 및 말하는 속도를 얻는다. 음성재생유닛을 통해 대응되는 어조와 말하는 속도의 음성교류정보를 재생하고 음성재생모듈은 디스플레이모듈과 동기화되어 재생되어 가상 사용자가 현실 환경에서 다자간 교류를 진행할 수 있다.
필요되는 소프트웨어 지원:
AR개발 키트는 다음과 같은 것을 포함한다: ARPA, ARLab, DroidAR, Metaio, Wikitude, vuforia. 개발 플랫폼은 다음과 같은 것을 포함한다: Android, IOS, GoogleGlass, WindowsPC, Unity, EpsonMoverio BT-2000, Vuzix M-100, Optinvent OPA1, PhoneGap, Titanium, Xamarin.
VR개발 키트는 다음과 같은 것을 포함한다: HoloLens Emulator, Google VR SDK, Google VR View, Web VR, Cardboard SDK, Faceshift Studio, A-Frame, Oculus DK2, Cryengine, Destinations Workshop Tools, RealSense SDK, Leap Motion SDK, kinect SDK, Source Engine, OpenVR SDK, Oculus SDK, Gear VR, Nibiru VR SDK. 개발 플랫폼은 다음과 같은 것을 포함한다: Android, IOS, GoogleGlass, WindowsPC, Unity, EpsonMoverio BT-2000, Vuzix M-100, Optinvent OPA1, PhoneGap, Titanium, Xamarin, Auto Stingray3D, Gamebryo, Virtools.
본 발명은 카메라 장치를 통해 가상 모래상자를 시작하고 관찰한다. 언급되는 카메라 장치의 블루투스 모델명 장치는 장치를 이탈할 수 있으며 향상된 현실 혹은 가상현실에서의 상호작용 액션도 마찬가지로 강화할 수 있다. 본 발명의 특유의 인증 장치는 응답식 스위치를 통해 대응되는 냄새를 발산한다.
본 발명의 구체적인 적용방식은 다음과 같다:
본 발명을 시작하여 메인화면으로 이동하는데 상기 메인화면으로 로그인 되는 사람은 모래상자 사례를 조작할 때 두 가지 신분을 갖고 있는다. 하나는 조직자 혹은 발기인(하기에서 조직자로 칭함)이고 다른 하나의 신분은 피초대자 즉 보통 사용자이다.
사용자는 모래상자 사례를 만든 후 신분을 자동으로 조작자로 전환하고 기타 상기 모래상자 사례에 진입하게 되는 사용자는 모두 피초대자로 된다.
조직자는 기타 사용자가 참여하지 않은 모래상자 사례를 시작할 수 있고 이때 모래상자 사례는 싱글 모래상자 즉 단일 모래상자로 변한다.
조직자는 새 모래상자 사례를 시작하고 초대를 보내는데, 자신의 명단 리스트에서 온라인 된 사람을 초대하거나 혹은 LBS 위치확인(위치 기반 서비스)을 통해 부근의 사람을 초대하여 다자간 모래상자 조작을 진행한다.
피초대자는 요청을 보낼 수 있으며 준비중의 모래상자 사례에 가입시킬 것을 요청한다.
상기 준비 화면에서의 기능:
조직자는 기존의 연락처 명단 리스트를 조회할 수 있다.
LBS(위치기반 서비스)를 기반으로 하여 주위의 온라인 사용자 명단 리스트를 조회한다.
단체 모래상자를 공동으로 조작하는데 필요한 인원수를 선택할 수 있고 모래상자 사례를 시작하기 전에 임의로 수정할 수 있다.
이미 초대에 동의한 모든 사람들과 문자, 음성 혹은 동영상 혹은 사신으로 교류할 수 있다.
초대에 아직 동의하지 않은 사람과 단독으로 문자, 음성 혹은 동영상을 통해 교류할 수 있다.
모래상자를 조작하는데 필요한 차수를 확정할 수 있고 모래상자 사례를 시작하기 전에 임의로 수정할 수 있다.
모래상자의 최종 정리 차수를 확정할 수 있고 모래상자 사례를 시작하기 전에 임의로 수정할 수 있다.
상기 준비 화면을 닫거나 혹은 숨길 수 있다.
기타 진행 가능한 조작.
연락처 명단 리스트에 대해:
모든 사람은 상대방의 연락처 명단 리스트에 서로 추가될 수 있으며, 연락처 명단 리스트에서 연락처의 온라인 상태를 조회할 수 있다. 온라인 상태는 대기중, 자리비움, 준비중, 인원수 만원(조직자만의 특수 상태) 및 모래상자에 놓임을 포함한다. 조직자와 피초대자는 연락처의 태그를 조회할 수 있다. 태그는 캐릭터, 이름, 비고 및 기타 표기를 포함한다. 연락처의 태그를 클릭한 후 더욱 상세한 연락처 자료를 조회할 수 있다.
대기중에 대해:
조작자와 피초대자는 신청 혹은 초대될 수 있는 상태에 놓인다.
자리비움에 대해:
조직자와 피초대자는 일정한 시간내에 그 어떤 문자, 음성 및 비디오 교류를 포함하는 액션도 취하지 않고, 아직 시작되지 않은 모래상자 사례에 놓이지 않고 초대 혹은 신청 액션을 진행하지 않는 것을 말하며, 시스템은 현재 상태가 자리비움이라고 설정하고 사용자가 임의의 화면 조작을 진행한 후 자리비움 이전의 상태로 복구한다.
준비중에 대해:
만약 조직자일 경우, 아직 시작되지 않은 모래상자 사례를 생성하였지만 시작하지 않고 인원수가 아직 가득 차지 않은 경우를 말한다. 만약 피초대자일 경우, 아직 시작되지 않은 모래상자 사례에 진입한 후를 말한다.
인원수 만원에 대해:
이는 조직자에게만 존재하는 상태이고, 아직 시작하지 않은 모래상자 사례의 인원수가 이미 꽉 찼지만 아직 시작하지 않았을 때 기타 피초대자가 가입 불가이고, 현재 조작자도 기타 피초대자를 더 이상 초대할 수 없는 것을 말한다.
모래상자에 놓임:
이는 조직자와 피초대자가 이미 시작된 모래상자 사례에 놓일 경우이고 이때 신청 혹은 초대가 불가능한 것을 말한다.
공동 조작에 필요한 단체 모래상자의 인원수 선택에 대한 제한:
조직자가 한 명 내지 백 명의 사람을 선택하여 단체 모래상자 사례에 참가하도록 하며, 이때 모래상자 사례가 아직 시작되지 않았을 경우 수정이 가능하며, 만약 수정 후의 인원수가 이미 가입된 모래상자 사례의 인원수보다 적을 경우 성공 불가능하다.
모래상자 차수의 선택에 대해:
조직자는 모래상자 사례를 생성한 후 조작 차수를 확정해야 하는데 조작 차수는 보통 5회 혹은 8회이다.
정리 차수 선택에 대해:
정리 차수는 보통 1-5회로 서로 다르며, 모래상자 사례가 아직 시작되지 않았을 시에는 수정 가능하다.
태그/표기에 대해:
모래상자 사례가 생성된 후, 현재 모래상자 사례에서 시스템은 준비 화면에 있는 매 사람한테 단독으로 된 태그를 할당하는데, 태그 내용은 캐릭터, 이름, 할당한 색상 블록을 포함하며, 상기 태그는 기타 사람들에 의해 클릭이 가능하고 클릭하면 더 상세한 정보가 있다.
초대에 대해:
조직자만이 초대가 가능하고, 온라인에 있는 사람만 초대할 수 있으며, 피초대자는 이미 조작이 시작된 모래상자 사례에 놓여 있어서는 안 된다. 하지만, 다른 조직자의 준비 화면에 놓여 있을 수 있다. 조직자는 초대를 시도한 후 피초대자의 응답을 대기해야 하며, 피초대자는 일정한 시간내에 거절 혹은 동의를 선택할 수 있거나 혹은 대기시간 종료 후 시스템은 피초대자를 도와 초대를 거절한다.
내보내는 것에 대해:
조직자는 어느 한 피초대자를 현재 아직 시작되지 않은 모래상자 사례에서 내보낼 수 있다.
초대중의 피초대자에 대해:
피초대자는 조직자의 초대를 대기할 수 있다.
신청에 대해:
피초대자는 어떤 조직자의 아직 시작하지 않은 모래상자 사례에 가입할 것을 능동적으로 신청할 수 있다. 하지만, 신청을 받게 되는 조직자의 상태는 준비중일 수 밖에 없으며, 피신청 조직자는 일정한 시간내에 동의 혹은 거절을 선택하거나 혹은 시간 초과후 타임아웃 후 시스템은 자동으로 거절을 선택하게 된다. 조직자는 여러 사람의 신청을 동시에 받아들일 수 있으며 순서에 따라 신청에 대한 동의를 진행하지 않아도 되며, 조직자의 모래상자 사례 인원수가 꽉 찰 경우 기타 신청이 실패하게 된다.
교류에 대해:
어떤 아직 시작하지 않은 모래상자 사례에서 피초대자는 기타 사람들과 문자, 음성, 비디오 교류를 진행할 수 있다. 모든 사람은 연락처 리스트의 사람과 문자, 음성, 비디오 교류를 진행할 수 있다.
단체 모래상자의 기타 설명:
피초대자는 준비중의 모래상자 사례를 사전에 떠날 수 있다.
조직자는 인원수가 꽉 차지 않은 모래상자 사례를 시작한 후 단일 모래상자로 변경되고 조직자의 신분은 모래상자를 조작하는 사용자로 변한다.
조직자는 여러 사람을 동시에 초대하여 모래상자 사례에 진입시킬 수 있으며, 인원수는 모래상자 사례의 규정된 수를 초과할 수 있다.
피초대자는 조직자의 동의 순서에 따라 모래상자 사례에 차례대로 진입하게 되는데, 모래상자 사례에서 인원수가 꽉 찰 경우, 후에 진입 동의된 피초대자는 모래상자 사례에 진입 불가능하며, 모래상자 사례에서 인원수가 꽉 찰 경우 조직자는 새로운 초대를 시도할 수 없다.
피초대자는 여러 조직자의 모래상자 사례에 동시에 신청 가입할 수 있다. 만약 신청을 받은 조직자의 모래상자 사례에서 인원수가 꽉 찰 경우 신청을 시도할 수 없으며, 피초대자는 첫 번째로 동의된 모래상자 사례에 진입하게 되고 어떤 조직자의 모래상자 사례에 진입한 후 기타 신청은 자동으로 실패된다.
피초대자는 여러 조직자에 의해 초대될 수 있으며, 어떤 모래상자 사례에 진입한 후, 이미 시도된 신청과 기타 초대는 모두 자동으로 실패된다.
피초대자는 어떤 모래상자 사례의 준비 화면에 진입한 후, 상기 모래상자 사례의 차수를 조회할 수 있고, 모래상자 사례의 인원 리스트를 조회할 수 있으며, 기타 사람들과 문자, 음성 및 동영상 교류를 진행할 수 있다.
만약 피초대자가 호 절단 혹은 오프라인 상태일 경우, 만약 이미 어떤 모래상자 사례에 진입하였을 경우 자동으로 나가게 되며, 현재 모래상자 사례는 한 개 자리가 또 비어있게 된다.
조직자가 호 절단 혹은 오프라인 상태일 경우, 현재 모래상자 사례는 자동으로 해산되고, 이전에 상기 모래상자 사례의 피초대자의 준비화면은 닫기게 된다.
모래상자 사례의 인원수가 꽉 찰 경우, 조직자는 모래상자 사례를 시작할 수 있으며, 카운트다운의 대기시간이 있는데 카운트다운 종료 후, 모든 사람은 현재 준비 화면을 닫고 로딩 완료 후 시작되는 가상 모래상자 사례에 진입한다.
모래상자 사례에서 모듈의 분포
모래상자실:
가상 모래상자실이라고도 부른다. 만약 가상현실(VR)에 놓일 경우, 리얼 모래상자실을 원형으로 제작한다. 가상현실 환경에서 모래상자실내에는 모래상자, 모래 캐비닛, 모델 및 기타 리얼 모래 상자에 필수로 되는 물품이 존재한다. 만약 단체 모래 상자 사례일 경우, 기타 다른 사람의 영상이 존재한다. 만약 향상된 현실(AR) 환경에서 현재 사용자가 처해있는 룸 혹은 공간을 빌려 사용할 경우 주소 및 크기에 의한 제한을 받지 않는다.
피규어에 대해:
모형이라고도 부른다. 각 유형의 피규어의 색상 원형을 분석한 후, 간결한 모델링 디자인을 통해 만들어낸 것이다. 작업자에게 더욱 자유로운 상상 공간을 제공하기 위해 주요하게 다음과 같이 몇 가지로 분류한다: 인물, 동물, 식물, 건축, 가구 및 일상용품, 교통운수, 음식물, 돌, 조개껍질, 자연물질, 날씨 및 기타.
모래 캐비닛에 대해:
캐비닛이라고도 부르며 가상 모래 캐비닛이기도 하며 모델을 배치하는 캐비닛이다. 모든 모델의 최초 배치 조작은 모래 캐비닛으로부터 추출해야 하며 일부 기타 조작도 모래 캐비닛으로 부터 시작해야 한다.
모래상자에 대해:
가상 모래상자이기도 하다. 피규어를 배치하고 조작하는데 사용되며, 모래를 파고 쌓는데 사용되며 물과 잔디의 시현을 구현하고 여러 가지 모래상자 스타일로 맞춤제작할 수 있다.
날씨에 대해:
모래상자 사례에서의 날씨 변화를 변경한다.
시각에 대해:
시각의 각도와 고도를 전환하여 모래상자 사례에 대해 서로 다른 방위로 관찰한다.
화면 조작에 대해:
조작 모래상자의 데이터를 조작 및 기록할 수 있고 상담원의 일부 업무를 대체할 수 있다. 단체 모래상자 사례에서 모래상자 사례의 기타 사용자와 바로바로 교류할 수 있다.
모든 사람들이 모래상자에 진입한 후, 손, 손가락, 손짓 혹은 제어기의 조작이다.
모래상자 사례에서 주요하게 조작상태와 조회상태로 주요하게 분류한다.
조회상태에 대해:
모든 사용자는 회전 기능을 통해 모래상자의 전체화면을 볼 수 있는데, 전체화면은 근경과 원경을 포함한다. 스위치를 통해 보통 시각과 수직 시각을 전환할 수 있다. 가상 모래상자실의 허용하는 범위내에서 거닐 수 있는데 모래상자에 대해 수시로 능동적으로 관찰 및 조작할 수 있다. 확대경 스위치를 통해 국부의 모래상자를 확대 혹은 축소하면서 관람할 수 있다.
조작 가능 상태에 대해:
조작상태에서 모래상자 및 모델에 대해 조작할 수 있다. 상기 조작은 모델 배치와 배치 후의 조작을 포함한다. 이중, 모델을 선택해야 하는데 그 후 모델은 조작 가능 상태로 시현스한다. 모델의 조작 가능 상태에서 이동, 회전, 줌 아웃, 삭제 조작을 진행할 수 있다. 모래상자 조작에서 모래 상자에 대해 파거나 쌓는 조작을 진행할 수 있고 동시에 효과음이 나타나고 전자설비는 응답식으로 진동효과가 나타난다. 모래상자의 어느 한 위치에서 "파는" 조작을 진행하는데 일정한 정도까지 판 후 모래상자에 물이 나타난다. 물이 나타난 후 일정한 정도까지 판 후, 즉 물이 일정한 깊이까지 도달한 후, 그 위치에서 파는 동작에 다시는 응답하지 않는다. 쌓인 모래는 모래상자를 높이 솟아오르게 하여 평수위로 물을 채워 높은 산을 쌓으며, 일정한 높이까지 쌓은 후 모래 쌓는 조작에 대한 응답을 정지한다. 모든 조작은 장치의 스위치를 이용하여 제어하는데, 표현 형식상에서 휴대 장치를 손 혹은 기타 보조 기구로 변화시킬 수 있다.
공중의 객관 환경의 조작:
모래상자의 날씨 표현 형식을 변경할 수 있다.
모델 배치의 조작:
모델은 신의 캐비닛으로부터 획득할 수 있고, 그 다음 모래상자에 배치하는데, 배치할 때 모래상자의 모델은 편집할 수 있다.
모델 선택의 조작:
손가락, 손 혹은 제어기를 통해 조작되어야 하는 모델에 대해 트리거식 조작을 진행하여 조작하여 조작이 필요한 모델의 선택 상태를 활성화한다.
모델 이동의 조작:
이동이 필요한 모델을 조종한 후, 모델은 손가락, 손 혹은 제어기에 따라 이동 변화한다.
모델 회전의 조작:
회전이 필요한 모델을 선택한 후, 손가락, 손짓 혹은 제어기의 그음에 의해 상응하는 회전을 진행한다.
모델 줌 아웃의 조작:
두 개의 손가락, 손짓 혹은 제어기를 이용하여 조작해야 하는데, 마주하거나 혹은 반대방향으로 이동한 후 모델의 줌 아웃에 맵핑한다.
모델 삭제의 조작:
이동하는 방법을 이용하여 모델이 모래상자 외부로 도달하도록 제어한다.
화면 조작:
뮤직, 음향효과, 진동, 교류창의 스위치를 제어하여 도움 알림 화면을 조회하거나 메인화면으로 점프할 수 있다.
교류:
단체 모래상자 사례에서 교류창을 열 경우, 전체 사람들이 동시에 교류하는 것일 수 있고 조직자가 단독으로 피초대자와 교류하는 것일 수도 있다. 조직자의 모래상자 사례의 화면은 피초대자 인원수에 1을 더한 수의 단독 창이 있으며 모든 사람이 교류할 수 있는 공용의 창이 존재하는 외에 매 피초대자와 단독으로 교류하는 창이 존재한다.
단체 모래상자 사례에서 조직자는 능동적으로 피초대자와 문자, 음성 및 동영상 교류를 진행할 수 있다. 모래상자 사례가 정식으로 시작한 후의 매 차수에서는 명확한 알림 확인이 있으며 이는 피초대자로 하여금 확인하고 시작하게 하기 위한 것이다. 모든 사람들은 확인한 후 다음 조작을 진행할 수 있다. 조직자 화면에 모든 피초대자의 확인 상태를 표시하게 되는데, 만약 확인되지 않은 피초대자가 존재하면 조직자는 확인하지 않은 피초대자에게 단독으로 문의해야 한다. 단체 모래상자를 정식으로 조작할 때, 제1차수의 시작전에 시스템은 피초대자의 조작 순서를 랜덤으로 맞춤제작한다. 그 다음 당회 모래상자 사례에서 매개인의 순서는 다시는 변하지 않는다.
카운트다운과 조작 노드의 설명:
만약 어느 한 피초대자가 조작할 차례가 될 경우, 스크린에 명확한 알림이 있다. 그 다음 카운트다운하는데 매 피초대자는 각 차수에서의 조작시간은 제한된다. 카운트다운 종료전에는 유효 조작을 진행하거나 혹은 연속으로 유효 조작을 진행할 수 있다. 만약 일회성 조작일 경우, 조작 종료 후 다음 조작자로 자동으로 점프한다. 만약 연속성 조작일 경우, 카운트다운 종료 전에 조작을 앞당겨 종료하여 다음 조작자로 점프할 수 있다. 혹은 카운트다운 종료한 후 다음 조작자로 점프할 수 있다. 만약 현재 차수에서 후속 조작자가 존재하지 않을 경우, 현재 차수의 모래상자 사례는 노드 상태에 놓이며, 이때 매 조작자의 스크린앞에 하나의 단독으로 된 창이 있는데 조작자가 현재 차수의 조작에 대해 보충 설명을 진행하여 그렇게 조작하는 원인에 대해 해석해야 하는데, 보충설명의 형식은 문자, 음성 및 동영상을 입력할 수 있다. 보충설명은 시간상 제한이 있으며 상기 시간내 카운트다운 종료 후 조작자가 보충 완료하였는지 그 여부에 막론하고 이미 입력된 내용 정보를 제출하는데, 조작자는 보충설명을 포기할 수도 있다. 상기 차수가 종료하는 노드에서 조작자의 화면에 기타 내용은 숨기고 모래상자 사례만 표시하는 기능이 존재하며, 카운트다운 종료전에 조작자는 임의의 각도의 화면캡처를 진행할 수 있다. 카운트다운 종료 후 즉 현행 차수의 조작이 정식으로 종료 후, 현행 모래상자 사례를 반복으로 진행할 수 있도록 다음 차수를 정식으로 시작할 수 있다. 맨 마지막 차수를 종료한 후, 만약 단체 모래상자에서 매 조작자의 화면에 단독으로 된 창이 있는데 이는 현행 모래상자 사례의 네이밍을 입력하기 위한 것이고 네이밍 형식은 문자, 음성 및 동영상일 수 있다. 네이밍 입력이 노드에서도 카운트다운이 존재하며, 카운트다운 종료 후 네이밍의 제시 여부를 막론하고 매개인의 화면에 모든 사람의 네이밍을 표시한다. 그 다음 조작자의 조작 순서에 따라 정렬하며, 조작자는 네이밍에 대해 투표하여 현행 모래상자 사례 이름을 하나 선택해야 한다. 모래상자 사례의 최종 이름은 투표수가 가장 많은 이름이다. 만약 투표수가 동일할 경우 가장 먼저 가장 많은 투표수를 받은 이름을 선택한다. 만약 단체 모래상자일 경우, 사용자에게 현행 모래상자 사례에 대해 단독 네이밍을 진행하라고 알림한다.
네이밍 종료 후, 매 조작자는 현행 모래상자 사례에서 자신이 가장 좋아하는 영역 혹은 모 타입의 모델을 하나 선택하라는 알림을 받는다. 이와 동시에 스크린에 하나의 창이 존재하는데 좋아하는 원인에 대한 보충 설명을 진행하기 위한 것이다. 상기 조작은 카운트다운이 존재하는데 카운트다운 종료 후 최종의 선택을 기록하며 조작자는 선택하지 않고 보충하지 않을 수 있다. 보충 형식은 문자, 음성 및 동영상일 수 있다.
가장 좋아하는 조작을 선택한 후, 매 조작자는 특별히 염두에 두는 모델을 선택하라는 알림을 받게 된다. 이와 동시에 스크린에 한 개의 창이 존재하는데 특별히 염두에 두는 원인에 대한 보충 설명을 진행하기 위한 것이다. 상기 조작은 카운트다운이 존재하는데 카운트다운 종료 후 최종 선택을 기록하며 조작자는 선택하지 않고 보충하지 않을 수 있다. 보충 형식은 문자, 음성 및 동영상일 수 있다.
특별히 염두에 두는 모델을 선택한 후, 매 조작자는 가장 싫어하는 모델 혹은 모래상자 영역을 선택하라는 알림을 받게 된다. 이와 동시에 스크린에 한 개의 창이 존재하는데 가장 싫어하는 원인에 대해 보충 설명하기 위한 것이다. 상기 조작은 카운트다운이 존재하는데 카운트다운 종료 후 최종 선택을 기록하며 조작자는 선택하지 않고 보충하지 않을 수 있다. 보충 형식은 문자, 음성 및 동영상일 수 있다.
가장 싫어하는 조작을 기록한 후, 매 조작자는 자아상을 선택하기 시작하고 이와 동시에 스크린에 창이 한 개 뜨는데 상기 자아상을 선택한 원인에 대해 보충 설명하기 위한 것이며, 보충 형식은 문자, 음성 및 동영상일 수 있다.
조작자는 가장 좋아하는 것, 특별히 염두에 두는 것, 가장 싫어하는 것 및 자아상을 선택할 때, 조직자의 화면에 기타 내용을 숨기고 모래상자 사례만 표시하는 기능이 존재하며, 카운트 종료전에 임의의 각도의 화면캡처를 진행할 수 있다.
자아상 조작을 종료한 후, 현행 모래상자 사례에 대해 정리하는 단계에 진입하는데, 이전 조직자의 조작 순서에 따라 매개인은 짧은 조절 시간이 존재하며 카운트다운이 존재한다. 상기 정리 단계에서 조작자는 모래상자 사례에 대해 임의의 조작을 진행할 수 있으며 구체적인 조작 차수는 조작자가 모래상자 사례의 준비 화면에서 지정할 수 있다.
여러 사람이 인터넷 온라인상에서 타지에서 동시에 조작 가능한 3D 가상 모래상자를 처음으로 제공한다.
도 1은 본발명에 따른 조작 순서도이다.
본 발명의 실시예에 따른 시뮬레이션 모래상자 시스템은 카메라 장치, 제어기, 디지털화 프로세서, 디스플레이 장치, 실체 모래상자 표기, 실체 모래 캐비닛 표기를 포함한다. 상기 카메라 장치는 휴대폰, 태블릿, 노트북, 스마트 안경, 블루투스 카메라 및 기타 리얼 신을 캡쳐할 수 있는 장치를 포함한다. 상기 제어기는 액션 캡쳐 핸들을 포함하며, 기타는 센서를 통해 사용자 액션을 맵핑하는 휴대장치이다. 카메라 장치와 제어기는 디지털화 프로세서 및 디스플레이 장치에 연결되고 카메라 장치를 통해 리얼 신을 획득하며, 카메라 장치와 제어기에 관련되는 디지털화 프로세서는 카메라 장치로 캡쳐한 리얼 신 데이터를 획득하고 해석하며, 리얼 신 데이터에 대해 디지털화 처리를 진행한 후 디스플레이 장치에 시현한다. 장치는 인터넷 혹은 근거리 통신망 및 기타 네트워크 방식으로 디지털화 처리된 데이터를 기타 본 발명의 실시예를 설치한 장치와 연결 및 인터랙션을 진행한다. 실체 모래상자 표기는 리얼 환경에서 여러 가지 원인으로 인해 리얼 모래상자를 세팅할 수 없어 어떠한 표기를 통해 가상 모래상자 맵핑을 시작하는 것을 의미하며, 이러한 표기는 이미지, 플라스틱, 천 혹은 기타 본 발명의 실시예에 의해 인증된 표기할 수 있는 물체가 될 수 있으며, 실체 모래상자 표기와 카메라 장치는 광학 정보 전송 연결된다. 실체 모래 캐비닛 표기는 리얼 환경에서 여러 가지 원인으로 인해 리얼 캐비닛을 세팅하지 못하여 그 어떠한 표기를 통해 가상 모래 캐비닛 맵핑을 시작하는 것을 의미하며, 이러한 표기는 이미지, 플라스틱, 천 혹은 기타 본 발명의 실시예에 의해 인증된 표기할 수 있는 물체가 될 수 있으며, 실체 모래 캐비닛 표기와 카메라 장치는 광학 정보 전송 연결된다.
본 발명에 따른 설명에서 유의해야 할 것은 별도로 규정 및 한정하지 않은 한, 용어 "설치", "서로 연결", "연결"은 보편화된 의미로 이해야 한다. 예를 들면, 고정 연결, 탈착 가능 연결 혹은 일체로 연결, 기계적인 연결, 전기적 연결, 직접 연결, 중간 매체를 통해 간접적으로 서로 연결, 두 개의 부재 내부의 연통일 수 있다. 당업자에게 있어서 구체적인 상황에 따라 본 발명에서의 상기 용어의 구체적인 의미를 이해할 수 있다. 이외, 본 발명의 설명에서 별도의 설명이 없는 한, "여러개"의 의미는 두개 혹은 두개 이상을 의미한다.
모래상자 사례의 전체 조작 프로세스에서, 만약 "단일", "한 사람", "단체", "여러 명" 등에 대해 명확하게 정의하지 않았을 경우, 여러 사람 혹은 싱글의 조건하에서 모두 만족하고 적용되는 것으로 이해할 수 있다.
본 발명을 이해하기 쉽게 아래 본 발명의 비교적 양호한 형태의 실시방식을 제시한다. 하지만, 본 발명은 많은 서로 다른 방식으로 구현될 수 있으며 본 명세서에서 설명하는 실시방식에 한정되지 않는다. 반대로, 이러한 실시방식을 제공하는 목적은 본 발명의 공개 내용에 대해 더욱 투철하고 전면적으로 이해시키기 위한 것이다. 유의해야 할 것은 부재가 다른 한 개의 부재에 "고정"된다는 것은 다른 한 부재에 직접 연결될 수 있거나 혹은 동시에 중간 부재가 존재할 수 있다. 본 설명서에서 사용하는 용어 "수직", "수평", "좌", "우" 및 이와 유사한 표현은 설명하기 위한 것이지 유일한 실시방식을 의미하는 것은 아니다. 본 명세서에서 사용되는 모든 기술용어 및 과학 용어는 본 발명의 당업자가 보편적으로 이해하는 의미와 동일하다. 본 명세서에 사용되는 용어는 구체적인 실시형태를 설명하기 위한 것이지 본 발명을 한정하려는 것은 아니다. 본 명세서에서 사용되는 용어 "및/또는"은 한 개 혹은 여러개의 관련되는 열거되는 항목의 임의의 및 모든 조합을 포함한다.
본 발명의 실시예에 따른 시뮬레이션 모래상자 시스템은 카메라 장치, 제어기, 디지털화 프로세서, 디스플레이 장치, 실체 모래상자 표기, 실체 모래 캐비닛 표기를 포함한다. 상기 카메라 장치는 휴대폰, 태블릿, 노트북, 스마트 안경, 블루투스 카메라 및 기타 리얼 신을 캡쳐할 수 있는 장치를 포함한다. 상기 제어기는 액션 캡쳐 핸들을 포함하며, 기타는 센서를 통해 사용자 액션을 맵핑하는 휴대장치이다. 카메라 장치와 제어기는 디지털화 프로세서 및 디스플레이 장치에 연결되고 카메라 장치를 통해 리얼 신을 획득하며, 카메라 장치와 제어기에 관련되는 디지털화 프로세서는 카메라 장치로 캡쳐한 리얼 신 데이터를 획득하고 해석하며, 리얼 신 데이터에 대해 디지털화 처리를 진행한 후 디스플레이 장치에 시현한다. 장치는 인터넷 혹은 근거리 통신망 및 기타 네트워크 방식으로 디지털화 처리된 데이터를 기타 본 발명의 실시예를 설치한 장치와 연결 및 인터랙션을 진행한다. 실체 모래상자 표기는 리얼 환경에서 여러 가지 원인으로 인해 리얼 모래상자를 세팅할 수 없어 어떠한 표기를 통해 가상 모래상자 맵핑을 시작하는 것을 의미하며, 이러한 표기는 이미지, 플라스틱, 천 혹은 기타 본 발명의 실시예에 의해 인증된 표기할 수 있는 물체가 될 수 있으며, 실체 모래상자 표기와 카메라 장치는 광학 정보 전송 연결된다. 실체 모래 캐비닛 표기는 리얼 환경에서 여러 가지 원인으로 인해 리얼 캐비닛을 세팅하지 못하여 그 어떠한 표기를 통해 가상 모래 캐비닛 맵핑을 시작하는 것을 의미하며, 이러한 표기는 이미지, 플라스틱, 천 혹은 기타 본 발명의 실시예에 의해 인증된 표기할 수 있는 물체가 될 수 있으며, 실체 모래 캐비닛 표기와 카메라 장치는 광학 정보 전송 연결된다.
이상, 본 발명 및 그 실시형태에 대해 설명하였다. 이러한 설명은 한정성이 없으며 제시하는 실시형태는 본 발명의 실시형태중의 하나일 뿐이지, 실제 구조는 이에 한정되지 않는다. 다시 말해서, 만약 당업자가 계시를 받아 본 발명의 창조성 요지를 벗어나지 않는 상황에서 발명자의 허락없이 설계해낸 상기 기술방안과 유사한 구조방안과 실시예는 모두 본 발명의 보호범위에 속할 것이다.
기존의 물리적 규칙에 근거하면 일 측면에서 완전한 가상 환경에서 리얼 자연환경을 모방할 수 있음으로 조작자로 하여금 시각, 청각, 촉각, 미각, 후각 및 운동의 감각을 느낄 수 있다. 또한, 조작자로 하여금 사람이 가질 수 있는 모든 감지 능력을 갖게 하고 조작자로 하여금 리얼 환경에 놓여있는 존재감을 갖게 하며 가상환경과 상호작용할 시 생성되는 피드백과 응답으로 인해 얻게 되는 조작감과 양방향성을 갖게 한다. 가상환경 자체 특징은 조작자가 참여하지 않아도 자주성과 다양성을 갖고 있다. 가상 모래상자내의 모든 정보를 디지털화 처리한다.
다른 측면에서, 기존의 현실 세계의 일정한 시간과 공간범위내에서 체험하기 어려운 모래상자 정보(영상, 사운드, 냄새, 촉각 등)를 본 발명을 통해 시뮬레이션 후 겹침하여 가상 정보를 리얼 모래상자에 응용함으로써 인류 감관에 의해 감지되어 현실을 넘어서는 감관 체험을 하게 된다. 리얼 환경과 가상 물체를 동일 모래상자에 실시간으로 겹침하여 동시에 존재하도록 한다.

Claims (2)

  1. 카메라 장치, 제어기, 디지털화 프로세서, 디스플레이 장치, 실체 모래상자 표기, 실체 모래 캐비닛 표기를 포함하는 시뮬레이션 모래상자 시스템에 있어서,
    상기 카메라 장치는 휴대폰, 태블릿, 노트북, 스마트 안경, 블루투스 카메라 및 기타 리얼 신을 캡쳐할 수 있는 장치를 포함하고, 상기 제어기는 액션 캡쳐 핸들을 포함하며, 기타는 센서를 통해 사용자 액션을 맵핑하는 휴대 장치이며, 카메라 장치와 제어기는 디지털화 프로세서 및 디스플레이 장치에 연결되고 카메라 장치를 통해 리얼 신을 획득하며, 카메라 장치와 제어기에 관련되는 디지털화 프로세서는 카메라 장치로 캡쳐한 리얼 신 데이터를 획득하고 해석하며, 리얼 신 데이터에 대해 디지털화 처리를 진행한 후 디스플레이 장치에 시현하며, 장치는 인터넷 혹은 근거리 통신망 및 기타 네트워크 방식으로 디지털화 처리된 데이터를 기타 본 발명의 사례를 설치한 장치와 연결 및 인터랙션을 진행하며, 실체 모래상자 표기는 리얼 환경에서 여러 가지 원인으로 인해 리얼 모래상자를 세팅할 수 없어 어떠한 표기를 통해 가상 모래상자 맵핑을 시작하는 것을 의미하며, 이러한 표기는 이미지, 플라스틱, 천 혹은 기타 본 발명의 실시예에 의해 인증된 표기할 수 있는 물체가 될 수 있으며, 실체 모래상자 표기와 카메라 장치는 광학 정보 전송 연결되며, 실체 모래 캐비닛 표기는 리얼 환경에서 여러 가지 원인으로 인해 리얼 캐비닛을 세팅하지 못하여 그 어떠한 표기를 통해 가상 모래 캐비닛 맵핑을 시작하는 것을 의미하며, 이러한 표기는 이미지, 플라스틱, 천 혹은 기타 본 발명의 실시예에 의해 인증된 표기할 수 있는 물체가 될 수 있으며, 실체 모래 캐비닛 표기와 카메라 장치는 광학 정보 전송 연결되는 것을 특징으로 하는 시뮬레이션 모래상자 시스템.
  2. 청구항 1에 있어서,
    기술방안은 심리학 분야의 모래상자 게임에 적용하는 것을 특징으로 하는 시뮬레이션 모래상자 시스템.
KR1020197023916A 2017-12-20 2017-12-20 시뮬레이션 모래상자 시스템 KR102463112B1 (ko)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/CN2017/117551 WO2019119314A1 (zh) 2017-12-20 2017-12-20 一种仿真沙盘系统

Publications (2)

Publication Number Publication Date
KR20200097637A true KR20200097637A (ko) 2020-08-19
KR102463112B1 KR102463112B1 (ko) 2022-11-04

Family

ID=66992916

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020197023916A KR102463112B1 (ko) 2017-12-20 2017-12-20 시뮬레이션 모래상자 시스템

Country Status (4)

Country Link
JP (1) JP7009508B2 (ko)
KR (1) KR102463112B1 (ko)
GB (1) GB2571853A (ko)
WO (1) WO2019119314A1 (ko)

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110916687A (zh) * 2019-11-07 2020-03-27 苏志强 一种虚拟沙盘心理分析处理方法及储存介质、系统
CN111724881B (zh) * 2020-06-19 2024-02-23 中国科学院自动化研究所 一种心理沙盘分析方法和系统
CN111973201A (zh) * 2020-07-29 2020-11-24 北京塞欧思科技有限公司 基于眼动交互的多维虚拟心理沙盘智能分析方法及装置
CN112419838A (zh) * 2020-12-07 2021-02-26 肖永忠 一种心理健康教育教具
CN113870680A (zh) * 2021-10-13 2021-12-31 九江学院 一种经济管理用模拟沙盘结构
CN114120047B (zh) * 2022-01-26 2022-04-08 中国科学院自动化研究所 基于视觉分析的物体联结性的判断方法、系统和设备
US20230368794A1 (en) * 2022-05-13 2023-11-16 Sony Interactive Entertainment Inc. Vocal recording and re-creation

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20040037608A (ko) * 2002-10-29 2004-05-07 한국전자통신연구원 정신질환 치료를 위한 가상현실 게임 운영시스템 및 그 방법
JP2013061870A (ja) * 2011-09-14 2013-04-04 Namco Bandai Games Inc プログラム、情報記憶媒体及び電子機器
KR20140108436A (ko) * 2013-02-27 2014-09-11 주식회사 멀틱스 증강현실을 이용한 소셜네트워크형 운동 게임 시스템 및 방법
CN107029424A (zh) * 2017-05-10 2017-08-11 北京派希教育科技有限公司 一种用于增强现实的积木搭建系统及方法

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5350427B2 (ja) * 2011-03-31 2013-11-27 株式会社コナミデジタルエンタテインメント 画像処理装置、画像処理装置の制御方法、及びプログラム
CN102654953A (zh) * 2011-05-20 2012-09-05 上海华博信息服务有限公司 一种基于vr交互模式的沙盘系统及其应用
CN106682329A (zh) * 2016-12-30 2017-05-17 中南大学 虚拟沙盘系统及其数据处理方法
CN107450721A (zh) * 2017-06-28 2017-12-08 丝路视觉科技股份有限公司 一种vr互动方法和系统
CN107239294A (zh) * 2017-07-11 2017-10-10 王子南 一种虚拟沙盘的创建操作方法及其应用

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20040037608A (ko) * 2002-10-29 2004-05-07 한국전자통신연구원 정신질환 치료를 위한 가상현실 게임 운영시스템 및 그 방법
JP2013061870A (ja) * 2011-09-14 2013-04-04 Namco Bandai Games Inc プログラム、情報記憶媒体及び電子機器
KR20140108436A (ko) * 2013-02-27 2014-09-11 주식회사 멀틱스 증강현실을 이용한 소셜네트워크형 운동 게임 시스템 및 방법
CN107029424A (zh) * 2017-05-10 2017-08-11 北京派希教育科技有限公司 一种用于增强现实的积木搭建系统及方法

Also Published As

Publication number Publication date
WO2019119314A1 (zh) 2019-06-27
GB201907569D0 (en) 2019-07-10
GB2571853A (en) 2019-09-11
JP7009508B2 (ja) 2022-01-25
KR102463112B1 (ko) 2022-11-04
JP2020508822A (ja) 2020-03-26

Similar Documents

Publication Publication Date Title
US10846520B2 (en) Simulated sandtray system
KR102463112B1 (ko) 시뮬레이션 모래상자 시스템
Machidon et al. Virtual humans in cultural heritage ICT applications: A review
KR101505060B1 (ko) 가상 현실 연동 서비스 제공 시스템 및 그 방법
Reeves Designing interfaces in public settings: Understanding the role of the spectator in Human-Computer Interaction
US9244533B2 (en) Camera navigation for presentations
KR100735676B1 (ko) 가상현실 모델하우스 운영시스템 및 운영방법
Tennent et al. Thresholds: Embedding virtual reality in the museum
CN107683166A (zh) 用于限制头戴式显示器上的视觉活动的过滤和父母控制方法
JP6718169B2 (ja) 情報提示システム、情報提示装置及びプログラム
CN102483819A (zh) 用于实时联网通信的空间界面
KR20090086805A (ko) 진화하는 사이버 로봇
KR20220113248A (ko) 인공지능 기반 가상현실 서비스 시스템 및 방법
KR20190034035A (ko) 롤플레잉 기반 가상현실을 이용한 대리체험 서비스 제공 방법
CN109074680A (zh) 基于通信的增强现实中实时图像和信号处理方法和系统
Cadi Yazli et al. Modeling craftspeople for cultural heritage: A case study
Sénécal et al. Modelling life through time: cultural heritage case studies
CN113220130A (zh) 一种用于党建的vr体验系统及其设备
Lang The impact of video systems on architecture
KR20220023005A (ko) 체험 교구를 사용하는 실감형 인터렉티브 에듀테인먼트 시스템
McDonald et al. Nature bot: Experiencing nature in the built environment
US20190339771A1 (en) Method, System and Apparatus For Brainwave and View Based Recommendations and Story Telling
TWI799195B (zh) 利用虛擬物件實現第三人稱視角的方法與系統
Li et al. Immersive Experience Design of Digital Media Interactive Art Based on Virtual Reality
Twomey Machines for Living

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant