KR102355193B1 - 시스템, 단말 장치, 방법 및 기록 매체 - Google Patents

시스템, 단말 장치, 방법 및 기록 매체 Download PDF

Info

Publication number
KR102355193B1
KR102355193B1 KR1020187026576A KR20187026576A KR102355193B1 KR 102355193 B1 KR102355193 B1 KR 102355193B1 KR 1020187026576 A KR1020187026576 A KR 1020187026576A KR 20187026576 A KR20187026576 A KR 20187026576A KR 102355193 B1 KR102355193 B1 KR 102355193B1
Authority
KR
South Korea
Prior art keywords
information
user
tactile
sensor
terminal device
Prior art date
Application number
KR1020187026576A
Other languages
English (en)
Other versions
KR20180126474A (ko
Inventor
이쿠오 야마노
요스케 마츠자키
Original Assignee
소니그룹주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 소니그룹주식회사 filed Critical 소니그룹주식회사
Publication of KR20180126474A publication Critical patent/KR20180126474A/ko
Application granted granted Critical
Publication of KR102355193B1 publication Critical patent/KR102355193B1/ko

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/016Input arrangements with force or tactile feedback as computer generated output to the user
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/01Measuring temperature of body parts ; Diagnostic temperature sensing, e.g. for malignant or inflamed tissue
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16Constructional details or arrangements
    • G06F1/1613Constructional details or arrangements for portable computers
    • G06F1/163Wearable computers, e.g. on a belt
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B6/00Tactile signalling systems, e.g. personal calling systems
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/02Constructional features of telephone sets
    • H04M1/0202Portable telephone sets, e.g. cordless phones, mobile phones or bar type handsets
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • H04M1/72409User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality by interfacing with external accessories
    • H04M1/72412User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality by interfacing with external accessories using two-way short-range wireless interfaces
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/725Cordless telephones
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M11/00Telephonic communication systems specially adapted for combination with other electrical systems
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M11/00Telephonic communication systems specially adapted for combination with other electrical systems
    • H04M11/08Telephonic communication systems specially adapted for combination with other electrical systems specially adapted for optional reception of entertainment or informative matter
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/01Indexing scheme relating to G06F3/01
    • G06F2203/011Emotion or mood input determined on the basis of sensed human body parameters such as pulse, heart rate or beat, temperature of skin, facial expressions, iris, voice pitch, brain activity patterns
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M2250/00Details of telephonic subscriber devices
    • H04M2250/12Details of telephonic subscriber devices including a sensor for measuring a physical value, e.g. temperature or motion

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Signal Processing (AREA)
  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Computer Hardware Design (AREA)
  • Biomedical Technology (AREA)
  • Medical Informatics (AREA)
  • Public Health (AREA)
  • Veterinary Medicine (AREA)
  • Animal Behavior & Ethology (AREA)
  • Surgery (AREA)
  • Molecular Biology (AREA)
  • General Health & Medical Sciences (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Pathology (AREA)
  • Biophysics (AREA)
  • User Interface Of Digital Computer (AREA)
  • Telephonic Communication Services (AREA)
  • Telephone Function (AREA)

Abstract

촉각 자극을 이용한 풍부한 커뮤니케이션을 가능하게 하는 구조를 제공한다. 제1 단말 장치와 복수의 제2 단말 장치를 구비하는 시스템이며, 상기 제1 단말 장치는, 센서에 의해 검출된 제1 유저에 관한 제1 센서 정보를 조합하여 생성된 상기 제1 유저의 상태를 나타내는 제1 촉각 정보를 송신하고, 복수의 상기 제2 단말 장치는, 상기 제1 촉각 정보를 수신하여 출력하는, 시스템이다.

Description

시스템, 단말 장치, 방법 및 기록 매체
본 개시는 시스템, 단말 장치, 방법 및 기록 매체에 관한 것이다.
근년, 모바일 단말기의 보급이나 네트워크 기술의 고도화에 수반하여, 네트워크를 통한 커뮤니케이션을 행할 기회가 증가하고 있다. 그래서, 네트워크를 이용한 보다 다양한 커뮤니케이션을 실현하기 위한 기술이 개발되고 있다.
예를 들어, 하기 특허문헌 1에서는, 손목 밴드형 웨어러블 단말기를 장착한 유저간에서의, 촉각 자극을 이용한 가벼운 커뮤니케이션을 실현하는 기술이 개시되어 있다.
국제 공개 제2015/029573호
그러나, 상기 특허문헌 1에 있어서 개시된 기술은, 손목 밴드형 단말기를 두드린 진동이 상대에게 통지되는 것에 지나지 않았다. 그 때문에, 통지되는 정보량은 적고, 커뮤니케이션에 의해 얻어지는 연대감은 한정적인 것에 머물렀다.
그래서, 본 개시에서는 촉각 자극을 이용한 풍부한 커뮤니케이션을 가능하게 하는 구조를 제공한다.
본 개시에 따르면, 제1 단말 장치와 복수의 제2 단말 장치를 구비하는 시스템이며, 상기 제1 단말 장치는, 센서에 의해 검출된 제1 유저에 관한 제1 센서 정보를 조합하여 생성된 상기 제1 유저의 상태를 나타내는 제1 촉각 정보를 송신하고, 복수의 상기 제2 단말 장치는, 상기 제1 촉각 정보를 수신하여 출력하는, 시스템이 제공된다.
또한, 본 개시에 따르면, 센서에 의해 검출된 제1 유저에 관한 제1 센서 정보를 조합하여 생성된 상기 제1 유저의 상태를 나타내는 제1 촉각 정보를 송신하는 제어부를 구비하는 단말 장치가 제공된다.
또한, 본 개시에 따르면, 센서에 의해 검출된 제1 유저에 관한 복수의 제1 센서 정보를 조합하여 생성된 상기 제1 유저의 상태를 나타내는 제1 촉각 정보를 수신하여 출력하는 제어부를 구비하는 단말 장치가 제공된다.
또한, 본 개시에 따르면, 제1 단말 장치와 복수의 제2 단말 장치를 구비하는 시스템에 있어서, 상기 제1 단말 장치가, 센서에 의해 검출된 제1 유저에 관한 제1 센서 정보를 조합하여 생성된 상기 제1 유저의 상태를 나타내는 제1 촉각 정보를 송신하는 것과, 복수의 상기 제2 단말 장치가, 상기 제1 촉각 정보를 수신하여 출력하는 것을 포함하는 방법이 제공된다.
또한, 본 개시에 따르면, 컴퓨터를, 센서에 의해 검출된 제1 유저에 관한 복수의 제1 센서 정보를 조합하여 생성된 상기 제1 유저의 상태를 나타내는 제1 촉각 정보를 수신하여 출력하는 제어부로서 기능시키기 위한 프로그램을 기록한 기록 매체가 제공된다.
본 개시에 따르면, 제1 단말 장치로부터 송신된, 제1 유저에 관한 센서 정보를 조합하여 생성된 촉각 정보가, 복수의 제2 단말 장치에 있어서 출력된다. 복수의 센서 정보가 조합되어 촉각 정보가 생성되므로, 단일의 센서 정보에 기초하여 촉각 정보가 생성되는 경우와 비교하여, 촉각 자극을 이용한 풍부한 커뮤니케이션이 가능하게 된다.
이상 설명한 바와 같이 본 개시에 따르면, 촉각 자극을 이용한 풍부한 커뮤니케이션을 가능하게 하는 구조가 제공된다. 또한, 상기 효과는 반드시 한정적인 것은 아니며, 상기 효과와 함께, 또는 상기 효과 대신에, 본 명세서에 나타난 어느 효과, 또는 본 명세서로부터 파악될 수 있는 다른 효과가 발휘되어도 된다.
도 1은, 본 실시 형태에 관한 시스템의 개요를 설명하기 위한 도면이다.
도 2는, 본 실시 형태에 관한 제2 단말 장치의 외관 구성의 일례를 설명하기 위한 도면이다.
도 3은, 본 실시 형태에 관한 제2 단말 장치의 내부 구조의 일례를 설명하기 위한 도면이다.
도 4는, 본 실시 형태에 관한 제2 단말 장치의 외관 구성의 다른 일례를 설명하기 위한 도면이다.
도 5는, 본 실시 형태에 관한 시스템의 논리적인 구성의 일례를 설명하기 위한 도면이다.
도 6은, 본 실시 형태에 관한 촉각 정보의 생성 처리의 일례를 설명하기 위한 도면이다.
도 7은, 본 실시 형태에 관한 촉각 정보의 생성 처리의 일례를 설명하기 위한 도면이다.
도 8은, 본 실시 형태에 관한 시스템에 있어서 실행되는 배신 서비스의 제공 처리의 흐름의 일례를 설명하기 위한 시퀀스도이다
도 9는, 제1 실시예에 관한 시스템의 구성의 일례를 도시하는 도면이다.
도 10은, 제1 실시예에 관한 시스템의 구성의 일례를 도시하는 도면이다.
도 11은, 제2 실시예에 관한 시스템의 구성의 일례를 도시하는 도면이다.
도 12는, 제3 실시예에 관한 시스템의 구성의 일례를 도시하는 도면이다.
도 13은, 제4 실시예에 관한 시스템의 구성의 일례를 도시하는 도면이다.
도 14는, 제5 실시예에 관한 시스템의 구성의 일례를 도시하는 도면이다.
도 15는, 본 실시 형태에 관한 정보 처리 장치의 하드웨어 구성의 일례를 도시하는 블록도이다.
이하에 첨부 도면을 참조하면서, 본 개시의 적합한 실시 형태에 대하여 상세하게 설명한다. 또한, 본 명세서 및 도면에 있어서, 실질적으로 동일한 기능 구성을 갖는 구성 요소에 대해서는, 동일한 번호를 부여함으로써 중복 설명을 생략한다.
또한, 본 명세서 및 도면에 있어서, 실질적으로 동일한 기능 구성을 갖는 요소를, 동일한 부호 뒤에 상이한 알파벳을 부여하여 구별하는 경우도 있다. 예를 들어, 실질적으로 동일한 기능 구성을 갖는 복수의 요소를, 필요에 따라 단말 장치(10A, 10B 및 10C)와 같이 구별한다. 단, 실질적으로 동일한 기능 구성을 갖는 복수의 요소의 각각을 특별히 구별할 필요가 없는 경우, 동일 부호만을 부여한다. 예를 들어, 단말 장치(10A, 10B 및 10C)를 특별히 구별할 필요가 없는 경우에는, 간단히 단말 장치(10)라고 칭한다.
또한, 설명은 이하의 순서로 행하기로 한다.
1. 개요
2. 기술적 특징
2.1. 물리적인 구성예
2.2. 논리적인 구성예
2.3. 배신 정보의 생성 처리
2.4. 배신 정보의 배신 처리 및 출력 처리
2.5. 처리의 흐름
3. 실시예
3.1. 제1 실시예
3.2. 제2 실시예
3.3. 제3 실시예
3.4. 제4 실시예
3.5. 제5 실시예
4. 하드웨어 구성예
5. 정리
<<1. 개요>>
우선, 도 1을 참조하여, 본 개시의 일 실시 형태에 관한 시스템의 개요를 설명한다.
도 1은, 본 실시 형태에 관한 시스템의 개요를 설명하기 위한 도면이다. 도 1에 도시하는 바와 같이, 시스템(1)은, 예를 들어 아이돌 등의 아티스트에 의한 음악 라이브회장에 있어서 적용될 수 있다. 아티스트는 제1 단말 장치(10)를 장착하고 있고, 관객은 제2 단말 장치(20)(20A 또는 20B)를 장착하고 있다. 시스템(1)은, 제1 단말 장치(10)에 의해 검출된 센서 정보에 기초하여 생성된 배신 정보를, 제2 단말 장치(20)에 배신하는 배신 서비스를 제공한다. 또한, 배신이란, 배신처 유저로의 송신을 가리키는 것으로 한다.
배신 정보는, 배신원 유저에 관한 센서 정보에 기초하여 생성되며, 배신처 유저에 배신되는 정보이다. 예를 들어, 배신 정보는 음성 정보, 화상 정보, 행동 인식 결과를 나타내는 정보, 생체 정보, 함께 있는 사람을 나타내는 정보, 및 위치 정보 등의 다양한 정보를 포함한다. 특히, 본 실시예에서는, 배신 정보는 촉각 정보를 포함한다. 촉각 정보란, 압력, 온도, 진동, 질감 및 통증 등의, 피부를 통하여 감지되는 정보이다. 촉각 정보가 배신됨으로써, 배신처 유저가 느끼는 배신원 유저와의 연대감을 증강시키는 것이 가능하게 된다. 또한, 배신처 유저는, 주위 사람이 알아채지 못하게 배신 서비스를 즐기는 것이 가능하게 된다.
도 1에 도시한 예에 있어서는, 스테이지 상의 아티스트의 심박 및 움직임의 상태 등을 나타내는 센서 정보가 제1 단말 장치(10)에 의해 검출되어, 센서 정보에 기초하여 배신 정보가 생성된다. 그리고, 배신 정보는, 일대다의 무선 통신에 의해 회장 내의 관객에게 리얼 타임으로 배신된다. 이에 의해, 아티스트와 관객의 연대감을, 관객에게 주는 것이 가능하게 된다. 그 밖에도, 배신 정보는, 텔레비전 수상기 등을 통하여 라이브를 감상하는 관객 등의, 장소를 달리 하는 유저에게도 배신되어도 된다. 또한, 반드시 리얼 타임으로 감상하는 관객에 한정되는 것은 아니며, 예를 들어 녹화한 영상을 감상하는 관객에 대하여, 재생되는 영상과 동기하여 배신 정보가 배신되어도 된다. 어느 경우든, 배신처 유저는, 배신원 유저와의 연대감을 느끼는 것이 가능하게 된다.
이러한 배신 서비스는, 음악 라이브 이외에도, 예를 들어 스포츠 관전에 있어서도 적용될 수 있다. 이 경우, 시스템(1)은, 스포츠 선수와 관객의 사이의 연대감을 제공 가능하다.
배신 서비스는, 음악 라이브의 감상이나 스포츠 관전과 같은 리얼 타임성이 요구되는 장면 이외에도, 리얼 타임성이 요구되지 않거나 또는 요구도가 낮은 장면에도 적용 가능하다. 예를 들어, 아이돌 등의 배신원 유저가 제1 단말 장치(10)를 장착하여 생활하는 중에 검출된 센서 정보에 기초하여 생성된 배신 정보가, 배신처 유저에게 배신되어도 된다. 이러한 서비스에서는, 예를 들어 팬은 아이돌과의 연대감을 상시 느끼는 것이 가능하게 된다.
이하에서는, 제1 단말 장치(10)에 관련지어지는 유저(예를 들어, 제1 단말 장치(10)를 장착 또는 휴대하는 유저)를, 제1 유저라고도 칭한다. 또한, 제2 단말 장치(20)에 관련지어지는 유저(예를 들어, 제2 단말 장치(20)를 장착 또는 휴대하는 유저)를, 제2 유저라고도 칭한다. 전형적으로는, 제1 유저가 배신원 유저이고, 제2 유저가 배신처 유저이다. 물론, 제1 유저가 배신처 유저로 되고, 제2 유저가 배신원 유저로 되는 경우도 있다.
<<2. 기술적 특징>>
이하에서는, 도 2 내지 도 8을 참조하여, 본 실시 형태에 관한 기술적 특징을 설명한다.
<2.1. 물리적인 구성예>
우선, 도 2 내지 도 4를 참조하여, 제2 단말 장치(20)의 물리적인 구성의 일례를 설명한다.
도 2는, 본 실시 형태에 관한 제2 단말 장치(20)의 외관 구성의 일례를 설명하기 위한 도면이다. 도 2에 도시하는 바와 같이, 제2 단말 장치(20)는, 유저의 손목을 주회하면서 길이를 고정하는 것이 가능한 밴드부(23)를 갖는다. 제2 단말 장치(20)는, 밴드부(23)에 의해 유저의 손목에 장착된다. 또한, 도 2에 도시하는 바와 같이, 제2 단말 장치(20)는, 발광부(21), 및 장착 상태에서 발광부(21)와 손목을 사이에 두고 반대측에 배치되는 진동부(22)를 갖는다. 또한, 장착 상태란, 제2 단말 장치(20)가 유저의 손목에 장착된 상태를 가리킨다.
발광부(21)는, 예를 들어 LED(light emitting diode)에 의해 실현된다. 발광부(21)는, 배신 정보를 출력하는 출력 장치의 일례이다. 발광부(21)는, 면상으로 형성되어 있으며, 면이 균일하게 발광해도 되고, 영역마다 색 또는 휘도를 바꾸어 발광할 수 있다. 전형적으로는, 발광부(21)는, 장착 상태에서 손목의 외측(즉, 손등측)에 배치된다. 이에 의해, 유저는, 용이하게 발광을 시인하는 것이 가능하다. 또한, 발광부(21)가 손목의 외측에 배치되도록 장착되어 있는지 여부, 즉 장착 양식은, 예를 들어 유저의 보행 시에 검출되는 가속도 등에 기초하여 추정되고, 추정 결과에 따라 출력 내용이 제어되어도 된다. 이것은, 진동부(22) 등의 배신 정보를 출력하는 다른 출력 장치에서도 마찬가지이다.
진동부(22)는, 예를 들어 진동 가능한 액추에이터에 의해 실현된다. 진동부(22)는, 촉각 정보를 출력하는 출력 장치의 일례이다. 진동부(22)는, 발광부(21)에 의한 발광과 연동하여 진동할 수 있다. 또한, 전형적으로는, 진동부(22)는, 장착 상태에서 손목의 내측(즉, 손바닥측)에 배치된다. 이에 의해, 유저는, 촉각 감도가 높은 부위인 손목의 내측에 있어서 촉각 정보의 출력을 받는 것이 가능하게 된다.
제2 단말 장치(20)는, 촉각의 제시 강도를 조절 가능하게 되도록, 밴드부(23)가 유저의 손목을 체결하는 힘을 조절 가능한 구조를 갖는다. 이 점에 대하여, 도 3을 참조하여 설명한다.
도 3은, 본 실시 형태에 관한 제2 단말 장치(20)의 내부 구조의 일례를 설명하기 위한 도면이다. 도 3에서는, 도 2에 도시한 제2 단말 장치(20)를 발광부(21)의 길이 방향으로 절단한 단면도가 도시되어 있다. 도 3에 도시하는 바와 같이, 밴드부(23)는, 내부에 형상 유지부(24)를 포함하고 있다. 형상 유지부(24)는, 철 등의 자성체를 끌어 당기는 재질을 포함하여 구성된다. 밴드부(23)는, 유저의 손목을 주회하면 선단이 타단을 넘어 중복될 정도의 길이를 갖고, 선단부에 마그네트(25)를 포함한다. 마그네트(25)는, 형상 유지부(24)에 끌어 당겨져, 유저의 손목을 주회하여 중복되는 밴드부(23)끼리를 고정한다. 여기서, 마그네트(25)는, 유저의 손목을 주회하는 밴드부(23)의 둘레 길이를 조절 가능하게, 밴드부(23)끼리를 고정하는 것이 가능하다. 따라서, 유저는, 마그네트(25)를 멈출 위치를 조절함으로써 촉각의 제시 강도를 조절하는 것이 가능하다.
여기서, 형상 유지부(24)는, 장착 상태에서 진동부(22)와 마그네트(25)의 사이에 위치한다. 이에 의해, 형상 유지부(24)는, 마그네트(25)로부터의 자력을 진동부(22)로부터 릴리프시켜, 마그네트(25)로부터 진동부(22)로의 간섭을 방지하는 것이 가능하게 된다.
도 4는, 본 실시 형태에 관한 제2 단말 장치(20)의 외관 구성의 다른 일례를 설명하기 위한 도면이다. 도 4에 도시하는 바와 같이, 제2 단말 장치(20)는, 음성 통화 등의 유저와의 인터랙션이 가능한 기존의 웨어러블 단말기(26)에, 촉각 제시 기능을 갖는 어태치먼트(27)가 설치된 구성을 갖는다. 예를 들어, 어태치먼트(27)는, 음성 신호의 통신 경로를 통하여 촉각 정보를 수신하여, 출력한다.
이상, 제2 단말 장치(20)의 물리적인 구성예를 설명하였다. 또한, 제1 단말 장치(10)는, 제2 단말 장치(20)와 마찬가지의 물리적인 구성을 가져도 된다. 보다 상세하게는, 후술하는 출력 엔티티(70)를 포함하는 단말 장치는, 도 2 내지 도 4를 참조하여 상기 설명한 구성을 가져도 되며, 제2 단말 장치(20)는 출력 엔티티(70)를 적어도 포함한다. 제1 단말 장치(10)도 출력 엔티티(70)를 포함하는 경우에는, 도 2 내지 도 4를 참조하여 상기 설명한 구성을 가져도 된다. 물론, 제1 단말 장치(10)는, 제2 단말 장치(20)와는 상이한 물리적인 구성을 가져도 된다.
<2.2. 논리적인 구성예>
계속해서, 도 5를 참조하여, 시스템(1)의 논리적인 구성의 일례를 설명한다.
도 5는, 본 실시 형태에 관한 시스템(1)의 논리적인 구성의 일례를 설명하기 위한 도면이다. 도 5에 도시하는 바와 같이, 본 실시 형태에 관한 시스템(1)은, 입력 엔티티(40), 생성 엔티티(50), 배신 엔티티(60) 및 출력 엔티티(70)와 같은 복수의 논리 엔티티를 포함한다.
입력 엔티티(40)는, 배신원 유저에 관한 센서 정보의 입력을 접수하는 기능을 갖는다. 환언하면, 입력 엔티티(40)는, 배신원 유저에 관한 센서 정보를 검출하는 기능을 갖는다. 입력 엔티티(40)는, 다양한 센서 장치를 포함하여 실현될 수 있다. 예를 들어, 입력 엔티티(40)는, 카메라, 심도 센서, 마이크, GPS, 적외선 센서, 광선 센서, 근전 센서, 신경 센서, 심박 센서, 맥박 센서, 체온 센서, 자이로 센서, 가속도 센서 또는 터치 센서 중 적어도 어느 것을 포함할 수 있다. 또한, 입력 엔티티(40)는, 전자 악기, 키보드 또는 마우스 등의, 배신원 유저에 의한 능동적인 입력을 접수하는 장치를 포함하고 있어도 되며, 이들 장치로의 입력도 센서 정보로서 취급되어도 된다. 또한, 입력 엔티티(40)는, 무선 통신기 또는 GNSS(Global Navigation Satellite System) 수신기 등의 무선 신호를 수신하는 수신 장치를 포함하고 있어도 되며, 이들 장치가 수신한 신호도 센서 정보로서 취급되어도 된다. 입력 엔티티(40)는, 입력된 센서 정보를 생성 엔티티(50)에 송신한다.
생성 엔티티(50)는, 입력 엔티티(40)에 의해 입력된(즉, 검출된) 센서 정보에 기초하여 배신 정보를 생성하는 기능을 갖는다. 특히, 본 실시 형태에 관한 생성 엔티티(50)는, 센서 정보에 기초하여 촉각 정보를 생성한다. 구체적인 생성 처리에 대해서는, 후술하므로 여기서의 설명을 생략한다. 생성 엔티티(50)는, 생성된 배신 정보를 배신 엔티티(60)에 송신한다.
배신 엔티티(60)는, 생성 엔티티(50)에 의해 생성된 배신 정보의 배신 제어를 행하는 기능을 갖는다. 예를 들어, 배신 엔티티(60)는, 배신 정보를 배신하는 타이밍 및 배신처 등을 제어하면서, 배신 정보를 출력 엔티티(70)에 배신한다.
출력 엔티티(70)는, 배신 엔티티(60)로부터 배신 정보를 수신하여 출력하는 기능을 갖는다. 출력 엔티티(70)는, 다양한 출력 장치를 포함하여 실현될 수 있다.
예를 들어, 출력 엔티티(70)는, 촉각 정보를 출력하는 출력 장치를 포함할 수 있다. 예를 들어, 출력 엔티티(70)는, 진동 액추에이터 또는 보이스 코일 액추에이터 등의 진동 가능한 진동 장치를 포함하며, 진동해도 된다. 출력 엔티티(70)는, 편심 모터 등의 촉각 제시 장치를 포함하며, 촉각을 제시해도 된다. 또한, 출력 엔티티(70)는, 저주파 발생 장치를 포함하며, 저주파를 인체에 흘려도 된다. 또한, 출력 엔티티(70)는, 형상 또는 경도를 제어 가능한 역각 제시 장치를 포함하며, 제어 대상 물체의 단단함을 제어해도 된다. 또한, 출력 엔티티(70)는, 밴드부(23)에 의한 체결력을 제어해도 된다. 출력 엔티티(70)는, 복수의 출력 장치를 조합하여 촉각 정보를 출력해도 된다.
특히, 출력 엔티티(70)는, 보이스 코일 액추에이터 등의 광대역 액추에이터를 포함하는 것이 바람직하다. 이에 의해, 예를 들어 출력 엔티티(70)는, 마이크 또는 가속도 센서 등에 의해 아날로그 정보로서 검출된 배신원 유저의 음성 정보 및 진동 정보를, 그대로 충실하게 재현하는 것이 가능하게 되고, 배신원 유저와의 높은 연대감 및 임장감을 배신처 유저에게 주는 것이 가능하게 된다.
또한, 출력 엔티티(70)는, 촉각 정보 이외의 배신 정보를 출력하는 출력 장치를 포함할 수 있다. 예를 들어, 출력 엔티티(70)는, 음성 정보를 출력하는 스피커 또는 이어폰, 화상 정보를 출력하는 표시 장치, 또는 발광 정보를 출력하는 발광 장치 중 적어도 어느 것을 포함할 수 있다.
이상, 시스템(1)의 논리적인 구성의 일례를 설명하였다. 상술한 논리 엔티티는, 임의의 물리 엔티티(예를 들어, 정보 처리 장치 또는 전자 회로 등)에 매핑될 수 있다. 입력 엔티티(40), 생성 엔티티(50), 배신 엔티티(60) 및 출력 엔티티(70)는, 각각 별도의 물리 엔티티에 매핑되어도 되고, 2 이상이 동일한 물리 엔티티에 매핑되어도 된다. 또한, 하나의 논리 엔티티가 복수의 물리 엔티티에 매핑되어도 된다. 구체적인 매핑예에 대해서는, 후술하는 실시예에 있어서 설명한다.
<2.3. 배신 정보의 생성 처리>
생성 엔티티(50)는, 배신원 유저에 관하여 검출된 센서 정보에 기초하여 배신 정보를 생성한다.
생성 엔티티(50)는, 센서 정보를 그대로 배신 정보로 하거나, 또는 소정의 처리를 실시함으로써, 배신 정보를 생성한다. 특히, 생성 엔티티(50)는, 배신 정보로서 촉각 정보를 생성한다. 생성되는 촉각 정보는, 특히 배신원 유저의 상태를 나타내는 정보인 것이 바람직하다. 배신원 유저의 상태를 나타내는 촉각 정보로서는, 예를 들어 행동 인식 결과에 대응하는 촉각 정보, 심박 등의 생체 정보에 대응하는 촉각 정보, 함께 있는 사람에 대응하는 촉각 정보, 또는 위치 정보에 대응하는 촉각 정보 등이 고려된다. 이러한 정보가 배신됨으로써, 배신원 유저와의 연대감을 배신처 유저에게 주는 것이 가능하게 된다. 예를 들어, 생성 엔티티(50)는, 마이크 또는 가속도 센서 등에 의해 아날로그 정보로서 검출된 음성 정보 및 진동 정보를 그대로 배신 정보로 하거나, 또는 소정의 처리를 실시함으로써 배신 정보를 생성한다. 이에 의해, 배신처 유저에 대하여 배신원 유저에 관한 아날로그 정보가 재현되므로, 배신처 유저는 배신원 유저와의 연대감을 느낌과 함께, 임장감을 갖고 배신원 유저의 상태를 체감하는 것이 가능하게 된다.
여기서, 배신 정보는, 배신원 유저에 의한 무의식적인 행동에 관한 센서 정보에 기초하여 생성된다. 예를 들어, 배신 정보는, 심박 등의 상시 검출 가능한 센서 정보에 기초하여 생성되어, 상시 배신된다. 그 때문에, 배신원 유저는, 메시지를 녹음하는 등의 작업을 행하지 않아도 되며, 매우 가벼운 부하로 배신 서비스를 제공하는 것이 가능하다.
배신 정보 생성을 위한 소정의 처리에 관하여, 이하에 상세하게 설명한다.
ㆍ추상화
전형적으로는, 배신 정보가 풍부하며, 또한 상세한 쪽이 배신 서비스의 가치는 높아질 것으로 생각된다. 그러나, 배신원 유저의 프라이버시가 손상될 우려가 높아질 수 있다. 그래서, 생성 엔티티(50)는, 센서 정보를 추상화하여 촉각 정보를 생성해도 된다.
예를 들어, 생성 엔티티(50)는, 배신원 유저의 상태에 기초하여 배신 정보를 생성/송신할지 여부를 제어해도 된다. 구체적으로는, 생성 엔티티(50)는, 배신원 유저가 화장실에 가는 등, 특히 프라이버시 문제에 직결되는 특정 상태에 있는 경우, 배신 정보의 생성/송신을 일시적으로 정지한다. 이에 의해, 배신원 유저의 프라이버시를 지키는 것이 가능하게 된다. 배신원 유저가 특정 상태에 있는지 여부의 판정은, 예를 들어 위치 정보 및 모션 센싱 정보 등에 기초하여 행해진다. 혹은, 배신원 유저에 의해, 특정 상태에 있는지 여부를 나타내는 정보가 수동으로 입력되어도 된다.
예를 들어, 배신 정보는, 소정의 생성 룰을 사용하여 센서 정보를 가공함으로써 생성되어도 된다. 구체적으로는, 생성 엔티티(50)는, 배신원 유저의 센서 정보에 따라 규정 패턴을 시계열로 배치함으로써 배신 정보를 생성한다. 규정 패턴이란, 배신 정보의 생성을 위해 미리 준비된 정보이며, 예를 들어 화상, 진동의 파형, 또는 음성의 파형이다. 예를 들어, 생성 엔티티(50)는, 심음을 표현하는 규정의 파형을 검출된 심박수에 따른 BPM(Beats Per Minute)으로 재생하는 진동 정보 또는 음성 정보를 생성한다.
예를 들어, 배신 정보는, 복수의 생성 룰 중 배신원 유저의 상태에 대응하는 생성 룰을 사용하여 생성되어도 된다. 구체적으로는, 생성 엔티티(50)는, 배신원 유저가 달리거나, 걷거나, 재채기하거나, 하품하거나, 자거나, 또는 일어나는 등의 특정 행동을 센서 정보에 기초하여 판정하고, 판정된 특정 행동에 대응하는 규정 패턴을 사용하여 배신 정보를 생성한다. 예를 들어, 생성 엔티티(50)는, 배신원 유저가 재채기를 한 경우에, 재채기에 대응하는 소정의 진동 정보를 배신 정보로 한다. 또한, 생성 엔티티(50)는, 특정 행동에 대응하는 규정 패턴을, 센서 정보에 기초하여 가공함으로써 배신 정보를 생성해도 된다. 예를 들어, 생성 엔티티(50)는, 배신원 유저가 런닝하고 있는 경우, 런닝 시의 상하 이동을 표현하는 규정의 파형을 속도에 따른 BPM으로 재생하는 진동 정보 또는 음성 정보를 생성한다. 이러한 처리에 의해, 배신 정보의 리얼리티를 유지한 채 프라이버시를 지키는 것이 가능하게 된다.
예를 들어, 배신 정보는, 설정된 레벨에 따라 배신원 유저의 상태를 추상화한 정보여도 된다. 구체적으로는, 생성 엔티티(50)는, 설정된 프라이버시 레벨이 허용하는 센서 정보에 기초하여 배신 정보를 생성한다. 이에 의해, 예를 들어 심박, 체온 또는 활동량 등의, 배신되어도 배신원 유저의 프라이버시를 해칠 우려가 적은 센서 정보에 기초하여 배신 정보가 생성되므로, 배신원 유저의 프라이버시를 지키는 것이 가능하게 된다. 프라이버시 레벨은, 배신원 유저의 상황에 따라 자동적으로 설정되어도 되고, 배신원 유저에 의해 수동으로 설정되어도 된다. 프라이버시 레벨 설정의 일례를, 하기 표 1에 나타낸다.
Figure 112018091187942-pct00001
상기 표 1에 따르면, 레벨이 낮을수록 프라이버시를 해칠 우려가 적은 센서 정보에 기초하여 촉각 정보가 생성된다. 예를 들어, 레벨 1이 설정된 경우에는, 생성 엔티티(50)는 심박 또는 체온에 기초하여 촉각 정보를 생성한다. 또한, 레벨 5가 설정된 경우에는, 생성 엔티티(50)는 센싱된 영상에 기초하여 배신 정보를 생성한다.
또한, 프라이버시 레벨에 따라, 배신 서비스를 받을 때의 대가가 설정되어도 된다. 예를 들어, 프라이버시 레벨이 높을수록 높은 대가가 설정되어도 된다. 이에 의해, 배신처 유저는, 자신이 알고 싶은 레벨에 따른 대가를 지불함으로써, 원하는 배신 정보의 제공을 받는 것이 가능하게 된다.
ㆍ조합
상술한 추상화에 따르면, 배신원 유저의 프라이버시를 지키는 것이 가능하게 되는 한편, 원 패턴의 정보가 제공될 수 있는 등, 배신 정보의 풍부함이 손상될지도 모른다. 그래서, 생성 엔티티(50)는, 복수의 센서 정보를 조합하여 배신 정보를 생성해도 된다.
상세하게는, 생성 엔티티(50)는, 복수의 센서 정보를 조합하여 배신원 유저의 상태를 나타내는 촉각 정보를 생성한다. 복수의 센서 정보를 조합함으로써, 폭넓은 촉각 정보를 생성하는 것이 가능하게 되고, 촉각 자극을 이용한 풍부한 커뮤니케이션이 실현된다. 또한, 센서 정보가 그대로 배신처 유저에 대하여 제공되는 것은 아니며, 가공되어 제공되므로, 배신원 유저의 프라이버시를 지키는 것도 가능하게 된다.
촉각 정보는, 배신원 유저에 관하여 검출된 센서 정보를, 검출된 다른 센서 정보에 기초하여 변조함으로써 생성된 촉각 정보여도 된다. 구체적으로는, 생성 엔티티(50)는, 마이크 등에 의해 검출된 음성 정보 또는 가속도 센서 등에 의해 검출된 파형에, 생체 정보, 행동 인식 결과, 화상 정보 또는 위치 정보 중 적어도 어느 것에 기초하는 가공을 적용함으로써, 진동 정보 등의 촉각 정보를 생성한다. 이에 의해, 배신 정보의 베리에이션을 풍부하게 함과 함께, 배신원 유저의 프라이버시를 지키는 것이 가능하게 되는, 구체적인 처리에 대하여, 이하에 설명한다.
예를 들어, 촉각 정보는, 배신원 유저의 심박에 기초하는 진동 정보를, 배신원 유저의 체온 정보에 기초하여 변조한 진동 정보여도 된다. 구체적으로는, 생성 엔티티(50)는, 배신원 유저의 체온이 역치보다 높은 경우에는 심박감을 강하게 하고(즉, 진폭을 크게 하고), 역치보다 낮은 경우에는 심박감을 약하게 하는(즉, 진폭을 작게 하는) 처리를 행한다. 이에 의해, 단순한 심박만이 아닌 정보량을 가진 촉각 정보를 제공하는 것이 가능하게 된다.
이러한 변조의 일례를, 도 6을 참조하여 설명한다. 도 6은, 본 실시 형태에 관한 촉각 정보의 생성 처리의 일례를 설명하기 위한 도면이다. 도 6에 도시한 파형(81)은, 심음을 표현하는 규정의 파형을 검출된 심박수에 따른 BPM으로 재생하는 진동 정보이다. 한편, 파형(82)은, 파형(81)에 나타낸 진동 정보를, 배신원 유저의 체온 정보에 기초하여 변조한 진동 정보이며, 배신원 유저의 체온이 역치보다 높기 때문에 진폭을 크게 하는 처리가 행해지고 있다.
예를 들어, 촉각 정보는, 배신원 유저의 행동에 기초하는 진동 정보를, 배신원 유저의 주위의 음성 정보에 기초하여 변조한 진동 정보여도 된다. 구체적으로는, 생성 엔티티(50)는, 배신원 유저의 주위의 소음 상황에 따른 크기의 고주파 노이즈를, 배신원 유저의 행동에 기초하는 진동 정보에 더하는 처리를 행한다. 이에 의해, 단순한 행동에 따른 진동만이 아닌 정보량을 가진 촉각 정보를 제공하는 것이 가능하게 된다.
이러한 변조의 일례를, 도 7을 참조하여 설명한다. 도 7은, 본 실시 형태에 관한 촉각 정보의 생성 처리의 일례를 설명하기 위한 도면이다. 도 7에 도시한 파형(83)은, 배신원 유저가 런닝하고 있는 경우에 생성되는, 런닝 시의 상하 이동을 표현하는 규정의 파형을 속도에 따른 BPM으로 재생하는 진동 정보이다. 한편, 파형(84)은, 파형(83)에 나타낸 진동 정보를, 배신원 유저의 주위의 소음 상황에 기초하여 변조한 진동 정보이며, 소음 상황에 따른 고주파 노이즈를 더하는 처리가 행해지고 있다.
<2.4. 배신 정보의 배신 처리 및 출력 처리>
(1) 배신 경로
배신 정보는, 무선 통신로를 통하여 배신 엔티티(60)로부터 출력 엔티티(70)로 송신된다.
무선 통신로는, Bluetooth(등록 상표), Zigbee(등록 상표), Wi-Fi(등록 상표), 또는 4G 혹은 5G 등의 셀룰러 통신 규격 등의 임의의 무선 통신 규격에 준거하고 있어도 된다. 또한, 무선 통신로는, FM 전파, 920MHz대, 2.4GHz대 등의 임의의 주파수대에 있어서 형성되어도 되고, 적외선을 사용하여 형성되어도 된다.
배신 엔티티(60)와 출력 엔티티(70)는, 직접적으로 또는 로컬 에어리어 네트워크를 통하여 통신 가능해도 된다. 이 경우의 무선 통신로를, 제1 무선 통신로라고도 칭한다. 예를 들어, 배신원 유저와 배신처 유저가 동일한 장소(예를 들어, 라이브회장)에 있는 경우, 920MHz대를 통하여 배신 정보가 배신됨으로써, 센서 정보의 검출부터 배신 정보의 출력까지의 타임 래그를 적게 하는 것이 가능하다.
물론, 배신 엔티티(60)와 출력 엔티티(70)는, 글로벌 에어리어 네트워크를 통하여 통신 가능해도 된다. 이 경우의 무선 통신로를, 제2 무선 통신로라고도 칭한다. 예를 들어, 배신원 유저와 배신처 유저가 상이한 장소에 있는 경우, 셀룰러 통신망 또는 인터넷 등을 통하여 배신 정보가 배신된다. 이 경우, 배신에 걸리는 타임 래그는 허용된다.
또한, 출력 엔티티(70)로의 배신 정보의 송신에 사용되는 무선 통신로에 따라 상이한 배신 정보가 생성되어도 된다. 예를 들어, 제1 무선 통신로를 사용하여 배신되는 경우, 리얼 타임성이 요구되는 정보가 배신 정보로서 생성되어도 된다. 한편, 제2 무선 통신로를 사용하여 배신되는 경우, 리얼 타임성이 요구되지 않는 정보가 배신 정보로서 생성되어도 된다.
(2) 배신 타이밍
배신 엔티티(60)에 의한 배신 정보의 배신 타이밍은 다양하게 고려된다.
ㆍ리얼 타임 배신
배신 엔티티(60)는, 리얼 타임으로 배신 정보를 배신해도 된다.
예를 들어, 심박 등의 상시 검출 가능한 센서 정보에 기초하는 배신 정보에 관해서는, 상시 배신되어도 된다.
물론, 심박 등의 상시 검출 가능한 센서 정보에 기초하는 배신 정보에 관해서도, 상시가 아니라 소정의 타이밍에 배신되어도 된다. 이에 의해, 배신 정보로서의 변화를 주는 것이 가능하게 된다. 예를 들어, 심박수가 변화한 타이밍에, 그 변화의 모습을 나타내는 규정 패턴에 기초하여 생성된 배신 정보(예를 들어, 짧은 시간 동안에 심박이 급격하게 상승하는 진동 정보)가 배신되어도 된다. 또한, 예를 들어 행동 인식 결과가 변화한 타이밍에 그 변화를 표현하는 규정 패턴에 기초하여 생성된 배신 정보(예를 들어, 배신원 유저가 계단을 오르기 시작한 타이밍에는, 계단을 오를 때의 상하 이동을 표현하는 진동 정보)가 배신되어도 된다.
예를 들어, 재채기 등의 특정 행동에 기초하는 배신 정보 등의, 돌발적으로 검출되는 센서 정보에 기초하는 배신 정보에 관해서는, 특정 행동이 검출된 타이밍에 배신되어도 된다.
ㆍ비 리얼 타임 배신
배신 엔티티(60)는, 비 리얼 타임으로 배신 정보를 배신해도 된다. 예를 들어, 배신 엔티티(60)는, 생성된 배신 정보를 축적해 둔다. 그리고, 출력 엔티티(70)로부터의 요구에 따라 배신 엔티티(60)로부터 출력 엔티티(70)로 배신 정보가 송신되어도 된다.
(3) 출력 타이밍
출력 엔티티(70)에 의한 배신 정보의 출력 타이밍은 다양하게 고려된다.
예를 들어, 출력 엔티티(70)는, 배신 정보를 수신한 타이밍에 출력해도 된다. 이에 의해 배신 정보의 리얼 타임성이 증가하므로, 배신원 유저와의 높은 연대감을 배신처 유저에게 주는 것이 가능하게 된다.
예를 들어, 출력 엔티티(70)는, 소정의 조건이 만족된 타이밍에 배신 정보를 출력해도 된다. 소정의 조건으로서는, 예를 들어 배신처 유저가 소정의 행동을 행한 것을 들 수 있다. 예를 들어, 출력 엔티티(70)는, 배신처 유저가 출력 지시를 입력한 타이밍에, 배신 정보를 출력해도 된다. 이에 의해, 출력 엔티티(70)는, 배신처 유저가 편리한 타이밍에 배신 정보를 출력하는 것이 가능하게 된다. 예를 들어, 출력 엔티티(70)는, 배신처 유저가 배신원 유저와 동일한 행동 또는 배신원 유저에 의해 설정된 행동을 행한 타이밍에, 배신 정보를 출력해도 된다. 또한, 출력 엔티티(70)는, 배신 정보를 출력하기 위해 어떠한 행동을 해야 할지를 배신처 유저에게 지시해도 된다. 이에 의해, 배신원 유저와의 높은 연대감을 배신처 유저에게 주는 것이 가능하게 된다.
<2.5. 처리의 흐름>
이하, 도 8을 참조하여, 배신 서비스의 제공 처리의 흐름의 일례를 설명한다.
도 8은, 본 실시 형태에 관한 시스템(1)에 있어서 실행되는 배신 서비스의 제공 처리의 흐름의 일례를 설명하기 위한 시퀀스도이다. 도 8에 도시하는 바와 같이, 본 시퀀스에는 입력 엔티티(40), 생성 엔티티(50), 배신 엔티티(60) 및 출력 엔티티(70)가 관여한다.
우선, 입력 엔티티(40)는, 각종 센서 정보를 검출하고(스텝 S102), 검출한 센서 정보를 생성 엔티티(50)에 송신한다(스텝 S104).
이어서, 생성 엔티티(50)는, 수신한 센서 정보에 기초하여 배신 정보를 생성하는 배신 정보 생성 처리를 행한다(스텝 S106). 특히, 생성 엔티티(50)는, 복수의 센서 정보를 조합하거나 추상화하거나 하여 촉각 정보를 생성한다. 이어서, 생성 엔티티(50)는, 생성된 배신 정보를 배신 엔티티(60)에 송신한다(스텝 S108).
배신 엔티티(60)는, 수신한 배신 정보의 배신 타이밍 및 배신처 등을 제어하는 배신 제어 처리를 행하고(스텝 S110), 제어 결과에 따라 배신 정보를 출력 엔티티(70)에 송신한다(스텝 S112).
그리고, 출력 엔티티(70)는, 수신한 배신 정보를 출력한다(스텝 S114).
<<3. 실시예>>
이하, 본 실시 형태에 관한 시스템(1)에 관한 구체적인 실시예를 설명한다.
<3.1. 제1 실시예>
본 실시예는, 시스템(1)이 제1 단말 장치(10) 및 복수의 제2 단말 장치(20)(20A 및 20B)를 포함하고, 단방향의 배신이 행해지는 예이다. 이하, 도 9를 참조하여, 본 실시예에 대하여 설명한다.
도 9는, 제1 실시예에 관한 시스템(1)의 구성의 일례를 도시하는 도면이다. 도 9에 도시하는 바와 같이, 시스템(1)은, 제1 단말 장치(10) 및 복수의 제2 단말 장치(20)를 포함한다. 본 실시예에서는, 제1 단말 장치(10)에 입력 엔티티(40), 생성 엔티티(50) 및 배신 엔티티(60)가 매핑되고, 제2 단말 장치(20)에 출력 엔티티(70)가 매핑된다. 제1 단말 장치(10)는, 제1 유저에 관한 센서 정보를 검출하여 배신 정보를 생성하고, 복수의 제2 단말 장치(20)에 배신한다. 제2 단말 장치(20)는, 배신 정보를 수신하여 출력한다. 또한, 제1 유저가 배신원 유저이고, 제2 유저가 배신처 유저이다.
도 9에 도시하는 바와 같이, 제1 단말 장치(10)는, 심박 센서(110), 제어부(120) 및 송신부(130)를 포함한다. 심박 센서(110)는, 심박 정보를 검출하는 센서 장치이다. 제어부(120)는, 검출된 심박 정보에 기초하여 배신 정보(특히, 촉각 정보)를 생성하고, 배신 제어를 행한다. 실시예에서는 생략되어 있지만, 물론, 상술한 추상화나 조합과 같은 생성 처리가 행해져도 된다. 송신부(130)는, 제어부(120)에 의한 제어에 따라 배신 정보를 복수의 제2 단말 장치(20)에 배신한다.
도 9에 도시하는 바와 같이, 제2 단말 장치(20)는, 수신부(210), 제어부(220) 및 진동부(230)를 포함한다. 수신부(210)는, 제1 단말 장치(10)로부터 배신 정보를 수신한다. 제어부(220)는, 수신부(210)에 의해 수신된 배신 정보에 기초하는 출력 제어를 행한다. 진동부(230)는, 제어부(220)에 의한 제어에 따라 배신 정보 중 촉각 정보를 출력한다.
여기서, 제1 단말 장치(10)와 제2 단말 장치(20)의 무선 통신은, 1:복수(즉, 1:N)의 통신(예를 들어, 멀티캐스트 또는 브로드캐스트 등)이다. 즉, 복수의 제2 단말 장치(20)에 대하여, 제1 단말 장치(10)로부터 동일한 배신 정보가 송신(즉, 브로드캐스트)된다. 예를 들어, 제1 단말 장치(10)와 제2 단말 장치(20)의 사이의 무선 통신로에는, Bluetooth, Zigbee, 920MHz대 디지털 통신, Wi-Fi, 적외 통신, 또는 FM 전파 등이 사용될 수 있다. 단, 제1 단말 장치(10)는, 다수의 제2 단말 장치(20), 즉 광범위하게 전파를 발신하기 위해, 대형화될 우려가 있다.
본 실시예는, 예를 들어 음악 라이브에 있어서 적용될 수 있다. 이 경우, 1인의 아티스트가 제1 유저이고, 많은 관객이 제2 유저이다.
제1 단말 장치(10)는, 심박 센서 이외에도, 가속도 센서, 스위치 및 전자 악기와 같은 입력 장치를 포함하고 있어도 된다. 또한, 제2 단말 장치(20)는, 편심 모터 등의 촉각 제시 장치, 표시 장치, 음성 출력 장치 및 발광 장치 등을 포함하고 있어도 된다. 이러한 다른 장치를 포함하는 구성예를, 도 10에 도시한다.
도 10은, 제1 실시예에 관한 시스템(1)의 구성의 일례를 도시하는 도면이다. 도 10에 도시하는 바와 같이, 시스템(1)은, 제1 단말 장치(10) 및 복수의 제2 단말 장치(20)를 포함한다. 제1 단말 장치(10)는, 도 9에 도시한 구성에 추가하여, 전자 악기(160) 및 마이크(170)를 포함한다. 제어부(120)는, 심박 센서(110)로부터 출력된 심박 정보, 전자 악기(160)로부터 출력된 음향 정보, 및 마이크(170)로부터 출력된 음성 정보에 기초하여 배신 정보를 생성한다. 제2 단말 장치(20)는, 도 9에 도시한 구성에 추가하여, 발광부(260)를 포함한다. 배신 정보는, 진동부(230)를 진동시키기 위한 진동 정보, 및 발광부(260)를 발광시키기 위한 발광 정보를 포함하며, 진동부(230)는 수신된 진동 정보에 기초하여 진동하고, 발광부(260)는 수신된 발광 정보에 기초하여 발광한다. 여기서, 제1 단말 장치(10)는, 음원 위치를 재현하는 배신 정보를 생성해도 된다. 예를 들어, 진동 정보가 음향 정보 및 음성 정보 중 좌측 채널(L-ch)의 정보에 기초하여 생성되고, 발광 정보가 음향 정보 및 음성 정보 중 우측 채널(R-ch)의 정보에 기초하여 생성되어도 된다. 이에 의해, 제2 단말 장치(20)는, 좌측 채널의 정보와 우측 채널의 정보를 상이한 표현으로 출력하는 것이 가능하게 된다.
<3.2. 제2 실시예>
본 실시예는, 시스템(1)이 제1 단말 장치(10), 통신 장치(30) 및 복수의 제2 단말 장치(20)(20A 및 20B)를 포함하고, 단방향의 배신이 행해지는 예이다. 통신 장치(30)는, 제1 단말 장치(10)와 제2 단말 장치(20)의 사이의 통신을 중개하는 물리 엔티티이다. 이하, 도 11을 참조하여, 본 실시예에 대하여 설명한다.
도 11은, 제2 실시예에 관한 시스템(1)의 구성의 일례를 도시하는 도면이다. 도 11에 도시하는 바와 같이, 시스템(1)은, 제1 단말 장치(10), 통신 장치(30) 및 복수의 제2 단말 장치(20)를 포함한다. 본 실시예에서는, 제1 단말 장치(10)에 입력 엔티티(40) 및 생성 엔티티(50)가 매핑되고, 통신 장치(30)에 배신 엔티티(60)가 매핑되고, 제2 단말 장치(20)에 출력 엔티티(70)가 매핑된다. 제1 단말 장치(10)는, 제1 유저에 관한 센서 정보를 검출하여 배신 정보를 생성하고, 통신 장치(30)에 송신한다. 통신 장치(30)는, 배신 제어를 행하여 배신 정보를 복수의 제2 단말 장치(20)에 배신한다. 제2 단말 장치(20)는, 배신 정보를 수신하여 출력한다. 또한, 제1 유저가 배신원 유저이고, 제2 유저가 배신처 유저이다.
도 11에 도시하는 바와 같이, 제1 단말 장치(10)는, 심박 센서(110), 제어부(120) 및 송신부(130)를 포함한다. 심박 센서(110)는, 심박 정보를 검출하는 센서 장치이다. 제어부(120)는, 검출된 심박 정보에 기초하여 배신 정보를 생성한다. 실시예에서는 생략되어 있지만, 물론, 상술한 추상화나 조합과 같은 생성 처리가 행해져도 된다. 송신부(130)는, 제어부(120)에 의해 생성된 배신 정보를 통신 장치(30)에 송신한다.
도 11에 도시하는 바와 같이, 통신 장치(30)는, 수신부(310), 제어부(320) 및 송신부(330)를 포함한다. 수신부(310)는, 제1 단말 장치(10)로부터 배신 정보를 수신한다. 제어부(220)는, 수신부(210)에 의해 수신된 배신 정보의 배신 제어를 행한다. 송신부(330)는, 제어부(220)에 의한 제어에 따라 배신 정보를 복수의 제2 단말 장치(20)에 배신한다.
도 11에 도시하는 바와 같이, 제2 단말 장치(20)는, 수신부(210), 제어부(220) 및 진동부(230)를 포함한다. 수신부(210)는, 통신 장치(30)로부터 배신 정보를 수신한다. 제어부(220)는, 수신부(210)에 의해 수신된 배신 정보에 기초하는 출력 제어를 행한다. 진동부(230)는, 제어부(220)에 의한 제어에 따라 배신 정보 중 촉각 정보를 출력한다.
여기서, 제1 단말 장치(10)와 통신 장치(30)의 통신(무선 통신/유선 통신)은, 1:1의 통신(예를 들어, 유니캐스트 등)이다. 예를 들어, 제1 단말 장치(10)와 통신 장치(30)의 사이의 무선 통신로에는, Bluetooth 등의 브로드캐스트의 구조를 갖지 않는 무선 통신 규격이 사용되어도 된다. 또한, 통신 장치(30)와 제2 단말 장치(20)의 무선 통신은, 1:N의 통신이다. 즉, 복수의 제2 단말 장치(20)에 대하여, 통신 장치(30)로부터 동일한 배신 정보가 송신(즉, 브로드캐스트)된다.
본 실시예는, 제1 실시예와 비교하여, 제1 단말 장치(10)의 배신 정보의 송신에 걸리는 전력 부하가 작아진다. 이에 의해, 제1 단말 장치(10)를 소형화하는 것, 및 소형의 배터리로 구동시키는 것이 가능하게 된다. 통신 장치(30)는, 예를 들어 제1 단말 장치(10)의 부근에 배치되어, AC(Alternating Current) 전원 등의 외부 전원으로 구동될 수 있다.
통신 장치(30)는, 예를 들어 음악 라이브 등의 리얼 타임성이 요구되는 상황에 있어서는, 제1 단말 장치(10)로부터 수신한 배신 정보를 즉시 처리하여 제2 단말 장치(20)에 배신해도 된다. 한편, 통신 장치(30)는, 리얼 타임성이 요구되지 않는 상황에 있어서는, 제1 단말 장치(10)로부터 수신한 배신 정보를 일단 축적하거나, 내용을 체크하거나, 통합 등의 처리를 행하거나 한 후에, 제2 단말 장치(20)에 배신해도 된다. 이 경우, 통신 장치(30)는, 높은 계산 능력을 갖는 서버로서 구성되어도 된다.
<3.3. 제3 실시예>
본 실시예는, 시스템(1)이 복수의 제1 단말 장치(10)(10A 및 10B), 통신 장치(30) 및 복수의 제2 단말 장치(20)(20A 및 20B)를 포함하고, 단방향의 배신이 행해지는 예이다. 이하, 도 12를 참조하여, 본 실시예에 대하여 설명한다.
도 12는, 제3 실시예에 관한 시스템(1)의 구성의 일례를 도시하는 도면이다. 도 12에 도시하는 바와 같이, 시스템(1)은, 복수의 제1 단말 장치(10)(10A 및 10B), 통신 장치(30) 및 복수의 제2 단말 장치(20)를 포함한다. 본 실시예에서는, 제1 단말 장치(10)에 입력 엔티티(40) 및 생성 엔티티(50)가 매핑되고, 통신 장치(30)에 배신 엔티티(60)가 매핑되고, 제2 단말 장치(20)에 출력 엔티티(70)가 매핑된다. 복수의 제1 단말 장치(10)의 각각은, 각각을 장착한 제1 유저에 관한 센서 정보를 검출하여 배신 정보를 생성하고, 통신 장치(30)에 송신한다. 통신 장치(30)는, 배신 제어를 행하여 배신 정보를 복수의 제2 단말 장치(20)에 배신한다. 제2 단말 장치(20)는, 배신 정보를 수신하여 출력한다. 또한, 제1 유저가 배신원 유저이고, 제2 유저가 배신처 유저이다.
제1 단말 장치(10), 제2 단말 장치(20) 및 통신 장치(30)의 내부 구성은, 제2 실시예와 마찬가지이다. 제1 단말 장치(10)는, 배신 정보를 생성하여 통신 장치(30)에 송신한다. 통신 장치(30)는, 제1 단말 장치(10)로부터 수신한 배신 정보를 복수의 제2 단말 장치(20)에 송신한다. 제2 단말 장치(20)는, 통신 장치(30)로부터 수신한 배신 정보를 출력한다.
단, 제2 단말 장치(20)는, 어느 제1 단말 장치(10)로부터의 배신 정보를 출력할지를 선택해도 된다. 구체적으로는, 제2 단말 장치(20)는, 복수의 배신 정보 중 수신할 하나의 배신 정보를 선택해도 된다. 이 경우, 통신 장치(30)는, 복수의 제1 단말 장치(10)로부터 수신한 복수의 제1 유저에 관한 복수의 배신 정보를 복수의 제2 단말 장치(20)에 브로드캐스트하고, 제2 단말 장치(20)는, 선택된 배신 정보를 선택적으로 수신하여 출력한다. 예를 들어, 복수의 배신 정보가 각각 상이한 채널 또는 주파수 등의 무선 리소스에 있어서 송신되는 경우, 수신할 무선 리소스를 선택함으로써 선택적인 수신이 실현된다. 이러한 선택적인 수신에 의해 통신량이 억제되므로, 제2 단말 장치(20)의 소비 전력을 억제하는 것이 가능하게 된다. 또한, 어느 배신 정보를 수신할지의 선택은, 예를 들어 제2 유저에 의해 행해진다. 혹은, 제2 단말 장치(20)는, 복수의 제1 단말 장치(10)로부터의 배신 정보를 병렬적으로 수신하면서, 수신한 복수의 배신 정보 중 출력할 하나의 배신 정보를 선택해도 된다. 이 경우, 통신 장치(30)는, 복수의 제1 단말 장치(10)로부터 수신한 복수의 제1 유저에 관한 복수의 배신 정보를 복수의 제2 단말 장치(20)에 브로드캐스트하고, 제2 단말 장치(20)는, 수신한 복수의 배신 정보 중 선택된 배신 정보를 출력한다. 이러한 선택적인 출력에 따르면, 제2 유저는, 예를 들어 복수의 배신 정보를 출력시키면서 원하는 하나의 배신 정보를 선택하는, 유연한 선택을 행하는 것이 가능하게 된다. 또한, 어느 배신 정보를 출력할지의 선택은, 예를 들어 제2 유저에 의해 행해진다.
또한, 제2 단말 장치(20)에 어느 배신 정보를 출력시킬지의 선택은, 배신원측(예를 들어, 통신 장치(30))에 있어서 행해져도 된다. 구체적으로는, 통신 장치(30)는, 복수의 제1 유저에 관한 복수의 배신 정보 중 선택된 하나의 배신 정보를, 복수의 제2 단말 장치(20)에 송신한다. 이에 의해, 제2 단말 장치(20)는, 하나의 배신 정보를 수신하여 출력하면 되고, 통신량이 억제되므로 소비 전력을 억제하는 것이 가능하게 된다. 또한, 예를 들어 음악 라이브에 있어서, 복수의 아티스트 중 솔로 연주/솔로 가창 등을 행하는 주목시키고 싶은 아티스트의 배신 정보를, 배신원측에서 선택하여 배신하는 것이 가능하게 된다. 이에 의해, 배신 서비스의 만족도를 향상시킬 수 있다.
여기서, 복수의 제1 단말 장치(10)와 통신 장치(30)의 통신은, 각각의 제1 단말 장치(10)와 통신 장치(30)의 1:1의 통신이다. 예를 들어, 제1 단말 장치(10)와 통신 장치(30)의 사이의 무선 통신로에는, Bluetooth 등의 브로드캐스트의 구조를 갖지 않는 무선 통신 규격이 사용되어도 된다. 그 경우, 통신 장치(30)는, 복수의 제1 단말 장치(10)로부터 수신하기 위한 복수의 수신기를 갖게 된다. 물론, 제1 단말 장치(10)와 통신 장치(30)의 사이의 무선 통신로에는, Wi-Fi 등의 시분할 다중화 등의 다중화 가능한 무선 통신 규격이 사용되어도 되며, 그 경우, 통신 장치(30)는 하나의 수신기를 갖고 있으면 된다. 또한, 시스템(1)은, 제1 단말 장치(10)의 수와 동일한 수의 통신 장치(30)를 포함하고, 각각의 제1 단말 장치(10)와 통신 장치(30)의 사이에서는, 제2 실시예와 같이 1:1의 통신이 행해져도 된다. 이 경우, 각각의 통신 장치(30)는, 하나의 제1 단말 장치(10)로부터 배신 정보를 수신하여, 복수의 제2 단말 장치(20)에 배신 정보를 배신한다.
또한, 통신 장치(30)와 제2 단말 장치(20)의 무선 통신은, 1:N의 통신이다. 즉, 복수의 제2 단말 장치(20)에 대하여, 통신 장치(30)로부터 동일한 배신 정보가 송신(즉, 브로드캐스트)된다.
본 실시예는, 예를 들어 음악 라이브에 있어서 적용될 수 있다. 이 경우, 아이돌 그룹과 같은 복수의 아티스트가 제1 유저이고, 많은 관객이 제2 유저이다.
본 실시예에 있어서도, 제2 실시예와 마찬가지로, 제1 단말 장치(10)는 소형의 배터리로 구동되며, 통신 장치(30)는 AC 전원 등의 외부 전원으로 구동될 수 있다.
통신 장치(30)는, 제2 실시예와 마찬가지로, 리얼 타임성이 요구되는지 여부에 따라, 상이한 처리를 행해도 된다.
<3.4. 제4 실시예>
본 실시예는, 시스템(1)이 제1 단말 장치(10), 통신 장치(30) 및 복수의 제2 단말 장치(20)(20A 및 20B)를 포함하고, 쌍방향의 배신이 행해지는 예이다. 이하, 도 13을 참조하여, 본 실시예에 대하여 설명한다.
도 13은, 제4 실시예에 관한 시스템(1)의 구성의 일례를 도시하는 도면이다. 도 13에 도시하는 바와 같이, 시스템(1)은, 제1 단말 장치(10), 통신 장치(30) 및 복수의 제2 단말 장치(20)를 포함한다. 본 실시예에서는, 제1 단말 장치(10) 및 제2 단말 장치(20)에 입력 엔티티(40), 생성 엔티티(50) 및 출력 엔티티(70)가 매핑되고, 통신 장치(30)에 배신 엔티티(60)가 매핑된다. 본 실시예에서는 쌍방향의 배신이 행해진다.
우선, 제1 단말 장치(10)로부터 제2 단말 장치(20)로의 제1 방향에서의 배신에 대하여 설명한다. 제1 방향에서 송신되는, 즉 제1 단말 장치(10)에 의해 생성되는 배신 정보를, 제1 배신 정보라고도 칭한다. 제1 단말 장치(10)는, 제1 유저에 관한 센서 정보를 검출하여 제1 배신 정보를 생성하고, 통신 장치(30)에 송신한다. 통신 장치(30)는, 배신 제어를 행하여 제1 배신 정보를 복수의 제2 단말 장치(20)에 배신한다. 제2 단말 장치(20)는, 제1 배신 정보를 수신하여 출력한다. 제1 방향에서는, 제1 유저가 배신원 유저이고, 제2 유저가 배신처 유저이다.
이어서, 제2 단말 장치(20)로부터 제1 단말 장치(10)로의 제2 방향에서의 배신에 대하여 설명한다. 제2 방향에서 송신되는, 즉 제2 단말 장치(20)에 의해 생성되는 배신 정보를, 제2 배신 정보라고도 칭한다. 제2 단말 장치(20)는, 제2 유저에 관한 센서 정보를 검출하여 제2 배신 정보를 생성하고, 통신 장치(30)에 송신한다. 통신 장치(30)는, 배신 제어를 행하여 제2 배신 정보를 제1 단말 장치(10)에 배신한다. 제1 단말 장치(10)는, 제2 배신 정보를 수신하여 출력한다. 제2 방향에서는, 제2 유저가 배신원 유저이고, 제1 유저가 배신처 유저이다.
도 13에 도시하는 바와 같이, 제1 단말 장치(10)는, 심박 센서(110), 제어부(120), 송신부(130), 수신부(140) 및 진동부(150)를 포함한다. 심박 센서(110)는, 심박 정보를 검출하는 센서 장치이다. 제어부(120)는, 검출된 심박 정보에 기초하여 제1 배신 정보를 생성한다. 실시예에서는 생략되어 있지만, 물론, 상술한 추상화나 조합과 같은 생성 처리가 행해져도 된다. 송신부(130)는, 제어부(120)에 의해 생성된 제1 배신 정보를 통신 장치(30)에 송신한다. 또한, 수신부(140)는, 통신 장치(30)로부터 제2 배신 정보를 수신한다. 제어부(120)는, 수신부(140)에 의해 수신된 제2 배신 정보에 기초하는 출력 제어를 행한다. 진동부(150)는, 제어부(120)에 의한 제어에 따라 제2 배신 정보 중 촉각 정보를 출력한다.
도 13에 도시하는 바와 같이, 통신 장치(30)는, 수신부(310), 제어부(320) 및 송신부(330)를 포함한다. 수신부(310)는, 제1 단말 장치(10)로부터 제1 배신 정보를 수신하고, 제2 단말 장치(20)로부터 제2 배신 정보를 수신한다. 제어부(220)는, 수신부(210)에 의해 수신된 제1 배신 정보 및 제2 배신 정보의 배신 제어를 행한다. 송신부(330)는, 제어부(220)에 의한 제어에 따라 제1 배신 정보를 복수의 제2 단말 장치(20)에 배신하고, 제2 배신 정보를 제1 단말 장치(10)에 배신한다.
도 13에 도시하는 바와 같이, 제2 단말 장치(20)는, 수신부(210), 제어부(220), 진동부(230), 심박 센서(240) 및 송신부(250)를 포함한다. 수신부(210)는, 통신 장치(30)로부터 제1 배신 정보를 수신한다. 제어부(220)는, 수신부(210)에 의해 수신된 제1 배신 정보에 기초하는 출력 제어를 행한다. 진동부(230)는, 제어부(220)에 의한 제어에 따라 제1 배신 정보 중 촉각 정보를 출력한다. 또한, 심박 센서(240)는, 심박 정보를 검출하는 센서 장치이다. 제어부(220)는, 검출된 심박 정보에 기초하여 제2 배신 정보를 생성한다. 실시예에서는 생략되어 있지만, 물론, 상술한 추상화나 조합과 같은 생성 처리가 행해져도 된다. 송신부(250)는, 제어부(220)에 의해 생성된 제2 배신 정보를 통신 장치(30)에 송신한다.
제1 방향에 있어서의 제1 단말 장치(10)와 통신 장치(30)의 통신에 대해서는, 제2 실시예와 마찬가지이다. 또한, 제1 방향에 있어서의 통신 장치(30)와 제2 단말 장치(20)의 통신에 대해서는, 제2 실시예와 마찬가지이다.
제2 방향에 있어서의 제2 단말 장치(20)와 통신 장치(30)의 통신에 대해서는, 제3 실시예에 있어서의 제1 단말 장치(10)와 통신 장치(30)의 통신과 마찬가지이다. 또한, 제2 방향에 있어서의 통신 장치(30)와 제1 단말 장치(10)의 통신에 대해서는, 1:1의 통신이다. 예를 들어, 통신 장치(30)와 제1 단말 장치(10)의 사이의 무선 통신로에는, Bluetooth 등의 브로드캐스트의 구조를 갖지 않는 무선 통신 규격이 사용되어도 된다.
본 실시예는, 예를 들어 음악 라이브에 있어서 적용된다. 이 경우, 1인의 아티스트가 제1 유저이고, 많은 관객이 제2 유저이다. 예를 들어, 아티스트의 심박에 기초하는 촉각 정보가 관객에게 제공됨과 함께, 복수의 관객의 심박에 기초하는 촉각 정보가 통합되어 아티스트에게 제공된다. 통합 처리는, 예를 들어 복수의 관객의 심박수의 평균값에 기초하는 배신 정보가 리얼 타임으로 생성됨으로써 실현될 수 있다. 그 밖에도, 예를 들어 관객이 제2 단말 장치(20)를 장착한 팔을 흔들거나 박수하거나 하면, 그 정보에 기초하여 생성된 배신 정보가 아티스트에게 제공된다. 또한, 이 경우, 제2 단말 장치(20)는 적어도 가속도 센서를 포함한다. 이러한 쌍방향의 배신에 의해, 아티스트와 관객이 서로 연대감을 부여하는 것이 가능하게 된다.
본 실시예에 있어서도, 제2 실시예와 마찬가지로, 제1 단말 장치(10)는 소형의 배터리로 구동되고, 통신 장치(30)는 AC 전원 등의 외부 전원으로 구동될 수 있다.
통신 장치(30)는, 제2 실시예와 마찬가지로, 리얼 타임성이 요구되는지 여부에 따라, 상이한 처리를 행해도 된다.
<3.5. 제5 실시예>
본 실시예는, 시스템(1)이 복수의 제1 단말 장치(10)(10A 및 10B), 통신 장치(30) 및 복수의 제2 단말 장치(20)(20A 및 20B)를 포함하고, 쌍방향의 배신이 행해지는 예이다. 이하, 도 14를 참조하여, 본 실시예에 대하여 설명한다.
도 14는, 제5 실시예에 관한 시스템(1)의 구성의 일례를 도시하는 도면이다. 도 14에 도시하는 바와 같이, 시스템(1)은, 복수의 제1 단말 장치(10), 통신 장치(30) 및 복수의 제2 단말 장치(20)를 포함한다. 본 실시예에서는, 제1 단말 장치(10) 및 제2 단말 장치(20)에 입력 엔티티(40), 생성 엔티티(50) 및 출력 엔티티(70)가 매핑되고, 통신 장치(30)에 배신 엔티티(60)가 매핑된다. 본 실시예에서는 제4 실시예와 마찬가지로, 쌍방향의 배신이 행해진다.
제1 단말 장치(10), 제2 단말 장치(20) 및 통신 장치(30)의 내부 구성은, 제4 실시예와 마찬가지이다.
제1 방향에 있어서의 제1 단말 장치(10)와 통신 장치(30)의 통신에 대해서는, 제3 실시예와 마찬가지이다. 또한, 제1 방향에 있어서의 통신 장치(30)와 제2 단말 장치(20)의 통신에 대해서는, 제3 실시예와 마찬가지이다.
제2 방향에 있어서의 제2 단말 장치(20)와 통신 장치(30)의 통신에 대해서는, 제3 실시예에 있어서의 제1 단말 장치(10)와 통신 장치(30)의 통신과 마찬가지이다. 또한, 제2 방향에 있어서의 통신 장치(30)와 제1 단말 장치(10)의 통신에 대해서는, 제3 실시예에 있어서의 통신 장치(30)와 제2 단말 장치(20)의 통신과 마찬가지이다
본 실시예는, 예를 들어 음악 라이브에 있어서 적용된다. 이 경우, 아이돌 그룹과 같은 복수의 아티스트가 제1 유저이고, 많은 관객이 제2 유저이다. 예를 들어, 복수의 아티스트의 심박에 기초하는 촉각 정보가 통합되어 또는 개별적으로(즉, 통합되지 않고 택일적으로) 관객에게 제공됨과 함께, 복수의 관객의 심박에 기초하는 촉각 정보가 통합되어 아티스트에게 제공된다. 그 밖에도, 예를 들어 관객이 제2 단말 장치(20)를 장착한 팔을 흔들거나 박수하거나 하면, 그 정보에 기초하여 생성된 배신 정보가 아티스트에게 제공된다. 또한, 이 경우, 제2 단말 장치(20)는 적어도 가속도 센서를 포함한다. 이러한 쌍방향의 배신에 의해, 복수의 아티스트와 관객이 서로 연대감을 부여하는 것이 가능하게 된다.
본 실시예에 있어서도, 제2 실시예와 마찬가지로, 제1 단말 장치(10)는 소형의 배터리로 구동되고, 통신 장치(30)는 AC 전원 등의 외부 전원으로 구동될 수 있다.
통신 장치(30)는, 제2 실시예와 마찬가지로, 리얼 타임성이 요구되는지 여부에 따라, 상이한 처리를 행해도 된다.
<<4. 하드웨어 구성예>>
마지막으로, 도 15를 참조하여, 본 실시 형태에 관한 정보 처리 장치의 하드웨어 구성에 대하여 설명한다. 도 15는, 본 실시 형태에 관한 정보 처리 장치의 하드웨어 구성의 일례를 도시하는 블록도이다. 또한, 도 15에 도시하는 정보 처리 장치(900)는, 예를 들어 도 9 내지 도 14를 참조하여 상기 설명한 제1 단말 장치(10), 제2 단말 장치(20) 또는 통신 장치(30)를 실현할 수 있다. 환언하면, 도 15에 도시하는 정보 처리 장치(900)는, 예를 들어 도 5를 참조하여 상기 설명한 입력 엔티티(40), 생성 엔티티(50), 배신 엔티티(60) 또는 출력 엔티티(70) 중 적어도 어느 것이 매핑될 수 있다. 본 실시 형태에 관한 제1 단말 장치(10), 제2 단말 장치(20) 또는 통신 장치(30)(환언하면, 입력 엔티티(40), 생성 엔티티(50), 배신 엔티티(60) 또는 출력 엔티티(70))에 의한 정보 처리는, 소프트웨어와, 이하에 설명하는 하드웨어의 협동에 의해 실현된다.
도 15에 도시하는 바와 같이, 정보 처리 장치(900)는, CPU(Central Processing Unit)(901), ROM(Read Only Memory)(902), RAM(Random Access Memory)(903) 및 호스트 버스(904a)를 구비한다. 또한, 정보 처리 장치(900)는, 브리지(904), 외부 버스(904b), 인터페이스(905), 입력 장치(906), 출력 장치(907), 스토리지 장치(908), 드라이브(909), 접속 포트(911) 및 통신 장치(913)를 구비한다. 정보 처리 장치(900)는, CPU(901) 대신에, 또는 이와 함께, 전기 회로, DSP 혹은 ASIC 등의 처리 회로를 가져도 된다.
CPU(901)는, 연산 처리 장치 및 제어 장치로서 기능하고, 각종 프로그램에 따라 정보 처리 장치(900) 내의 동작 전반을 제어한다. 또한, CPU(901)는, 마이크로 프로세서여도 된다. ROM(902)은, CPU(901)가 사용하는 프로그램이나 연산 파라미터 등을 기억한다. RAM(903)은, CPU(901)의 실행에 있어서 사용하는 프로그램이나, 그 실행에 있어서 적절하게 변화하는 파라미터 등을 일시 기억한다. 도 5에 도시한 입력 엔티티(40), 생성 엔티티(50), 배신 엔티티(60) 또는 출력 엔티티(70) 중 적어도 어느 것이 매핑되는 물리 엔티티는, CPU(901)를 포함한다. 상세하게는, CPU(901)는, 도 9 내지 도 14에 도시한 제어부(120), 제어부(220) 또는 제어부(320)를 형성할 수 있다. 예를 들어, CPU(901)는, 정보 처리 장치(900)를 제어하여, 센서 정보를 검출하거나, 센서 정보에 기초하여 배신 정보를 생성하거나, 배신 정보의 배신 제어를 행하거나, 배신 정보를 출력하거나 한다.
CPU(901), ROM(902) 및 RAM(903)은, CPU 버스 등을 포함하는 호스트 버스(904a)에 의해 서로 접속되어 있다. 호스트 버스(904a)는, 브리지(904)를 통하여, PCI(Peripheral Component Interconnect/Interface) 버스 등의 외부 버스(904b)에 접속되어 있다. 또한, 반드시 호스트 버스(904a), 브리지(904) 및 외부 버스(904b)를 분리 구성할 필요는 없으며, 하나의 버스에 이들 기능을 실장해도 된다.
입력 장치(906)는, 예를 들어 마우스, 키보드, 터치 패널, 버튼, 마이크로폰, 스위치 및 레버 등, 유저에 의해 정보가 입력되는 장치에 의해 실현된다. 또한, 입력 장치(906)는, 예를 들어 적외선이나 그 밖의 전파를 이용한 리모트 컨트롤 장치여도 되고, 정보 처리 장치(900)의 조작에 대응한 휴대 전화나 PDA 등의 외부 접속 기기여도 된다. 또한, 입력 장치(906)는, 예를 들어 상기 입력 수단을 사용하여 유저에 의해 입력된 정보에 기초하여 입력 신호를 생성하고, CPU(901)에 출력하는 입력 제어 회로 등을 포함하고 있어도 된다. 정보 처리 장치(900)의 유저는, 이 입력 장치(906)를 조작함으로써, 정보 처리 장치(900)에 대하여 각종 데이터를 입력하거나 처리 동작을 지시하거나 할 수 있다.
그 밖에도, 입력 장치(906)는, 유저에 관한 정보를 검지하는 장치에 의해 형성될 수 있다. 예를 들어, 입력 장치(906)는, 화상 센서(예를 들어, 카메라), 심도 센서(예를 들어, 스테레오 카메라), 가속도 센서, 자이로 센서, 지자기 센서, 광 센서, 음 센서, 측거 센서, 힘 센서 등의 각종 센서를 포함할 수 있다. 또한, 입력 장치(906)는, 정보 처리 장치(900)의 자세, 이동 속도 등, 정보 처리 장치(900) 자신의 상태에 관한 정보나, 정보 처리 장치(900)의 주변의 밝기나 소음 등, 정보 처리 장치(900)의 주변 환경에 관한 정보를 취득해도 된다. 또한, 입력 장치(906)는, GNSS(Global Navigation Satellite System) 위성으로부터의 GNSS 신호(예를 들어, GPS(Global Positioning System) 위성으로부터의 GPS 신호)를 수신하여 장치의 위도, 경도 및 고도를 포함하는 위치 정보를 측정하는 GNSS 모듈을 포함해도 된다. 또한, 위치 정보에 관해서는, 입력 장치(906)는, Wi-Fi(등록 상표), 휴대 전화ㆍPHSㆍ스마트폰 등과의 송수신, 또는 근거리 통신 등에 의해 위치를 검지하는 것이어도 된다. 도 5에 도시한 입력 엔티티(40)가 매핑되는 물리 엔티티는, 입력 장치(906)를 포함한다. 상세하게는, 입력 장치(906)는, 도 9 내지 도 14에 도시한 제1 단말 장치(10) 또는 제2 단말 장치(20)에 포함되는 센서 장치를 형성할 수 있다. 도 9 내지 도 14에서는, 센서 장치의 일례로서 심박 센서(110), 전자 악기(160), 마이크(170) 및 심박 센서(240)가 도시되어 있지만, 제1 단말 장치(10) 및 제2 단말 장치(20)는, 이들 이외에도 상술한 임의의 입력 장치(906)를 포함하고 있어도 되고, 검출된 다양한 센서 정보에 기초하여 배신 정보가 생성되어도 된다.
출력 장치(907)는, 취득한 정보를 유저에 대하여 시각적 또는 청각적으로 통지하는 것이 가능한 장치로 형성된다. 이러한 장치로서, CRT 디스플레이 장치, 액정 디스플레이 장치, 플라스마 디스플레이 장치, EL 디스플레이 장치, 레이저 프로젝터, LED 프로젝터 및 램프 등의 표시 장치나, 스피커 및 헤드폰 등의 음성 출력 장치나, 프린터 장치 등이 있다. 출력 장치(907)는, 예를 들어 정보 처리 장치(900)가 행한 각종 처리에 의해 얻어진 결과를 출력한다. 구체적으로는, 표시 장치는, 정보 처리 장치(900)가 행한 각종 처리에 의해 얻어진 결과를, 텍스트, 이미지, 표, 그래프 등, 여러 가지 형식으로 시각적으로 표시한다. 한편, 음성 출력 장치는, 재생된 음성 데이터나 음향 데이터 등을 포함하는 오디오 신호를 아날로그 신호로 변환하여 청각적으로 출력한다. 또한, 출력 장치(907)는, 진동 액추에이터, 보이스 코일 액추에이터, 편심 모터, 저주파 발생 장치, 또는 역각 제시 장치 등의, 촉각을 통하여 유저에게 정보를 출력 가능한 장치로 형성되어도 된다. 도 5에 도시한 출력 엔티티(70)가 매핑되는 물리 엔티티는, 출력 장치(907)를 포함한다. 상세하게는, 출력 장치(907)는, 도 9 내지 도 14에 도시한 제1 단말 장치(10) 또는 제2 단말 장치(20)에 포함되는 출력 장치를 형성할 수 있다. 도 9 내지 도 14에서는, 출력 장치의 일례로서 진동부(150), 진동부(230) 및 발광부(260)가 도시되어 있지만, 제1 단말 장치(10) 및 제2 단말 장치(20)는, 이들 이외에도 상술한 임의의 출력 장치(907)를 포함하고 있어도 되고, 다양한 수단으로 배신 정보를 출력해도 된다.
스토리지 장치(908)는, 정보 처리 장치(900)의 기억부의 일례로서 형성된 데이터 저장용 장치이다. 스토리지 장치(908)는, 예를 들어 HDD 등의 자기 기억부 디바이스, 반도체 기억 디바이스, 광 기억 디바이스 또는 광자기 기억 디바이스 등에 의해 실현된다. 스토리지 장치(908)는, 기억 매체, 기억 매체에 데이터를 기록하는 기록 장치, 기억 매체로부터 데이터를 판독하는 판독 장치 및 기억 매체에 기록된 데이터를 삭제하는 삭제 장치 등을 포함해도 된다. 이 스토리지 장치(908)는, CPU(901)가 실행하는 프로그램이나 각종 데이터 및 외부로부터 취득한 각종 데이터 등을 저장한다. 도 5에 도시한 배신 엔티티(60)가 매핑되는 물리 엔티티는, 스토리지 장치(908)를 포함한다. 상세하게는, 스토리지 장치(908)는, 도 11 내지 도 14에 도시한 통신 장치(30)에 포함될 수 있다. 예를 들어, 통신 장치(30)는, 스토리지 장치(908)를 포함하고, 배신 정보를 일시적으로 축적한다.
드라이브(909)는, 기억 매체용 리더/라이터이며, 정보 처리 장치(900)에 내장 혹은 외장된다. 드라이브(909)는, 장착되어 있는 자기 디스크, 광 디스크, 광자기 디스크 또는 반도체 메모리 등의 리무버블 기억 매체에 기록되어 있는 정보를 판독하여, RAM(903)에 출력한다. 또한, 드라이브(909)는, 리무버블 기억 매체에 정보를 기입할 수도 있다.
접속 포트(911)는, 외부 기기와 접속되는 인터페이스이며, 예를 들어 USB(Universal Serial Bus) 등에 의해 데이터 전송 가능한 외부 기기와의 접속구이다.
통신 장치(913)는, 예를 들어 네트워크(920)에 접속하기 위한 통신 디바이스 등으로 형성된 통신 인터페이스이다. 통신 장치(913)는, 예를 들어 유선 혹은 무선 LAN(Local Area Network), LTE(Long Term Evolution), Bluetooth(등록 상표) 또는 WUSB(Wireless USB)용 통신 카드 등이다. 또한, 통신 장치(913)는, 광 통신용 라우터, ADSL(Asymmetric Digital Subscriber Line)용 라우터 또는 각종 통신용 모뎀 등이어도 된다. 이 통신 장치(913)는, 예를 들어 인터넷이나 다른 통신 기기와의 사이에서, 예를 들어 TCP/IP 등의 소정의 프로토콜에 의거하여 신호 등을 송수신할 수 있다. 도 5에 도시한 입력 엔티티(40), 생성 엔티티(50), 배신 엔티티(60) 또는 출력 엔티티(70) 중 적어도 어느 것이 매핑되는 물리 엔티티는, 통신 장치(913)를 포함한다. 상세하게는, 통신 장치(913)는, 도 9 내지 도 14에 도시한 송신부(130), 수신부(140), 수신부(210), 송신부(250), 수신부(310) 또는 송신부(330)를 형성할 수 있다.
또한, 네트워크(920)는, 네트워크(920)에 접속되어 있는 장치로부터 송신되는 정보의 유선 또는 무선의 전송로이다. 예를 들어, 네트워크(920)는, 인터넷, 전화 회선망, 위성 통신망 등의 공중 회선망이나, Ethernet(등록 상표)를 포함하는 각종 LAN(Local Area Network), WAN(Wide Area Network) 등을 포함해도 된다. 또한, 네트워크(920)는, IP-VPN(Internet Protocol-Virtual Private Network) 등의 전용 회선망을 포함해도 된다.
이상, 본 실시 형태에 관한 정보 처리 장치(900)의 기능을 실현 가능한 하드웨어 구성의 일례를 나타내었다. 상기 각 구성 요소는, 범용적인 부재를 사용하여 실현되어도 되고, 각 구성 요소의 기능에 특화된 하드웨어에 의해 실현되어도 된다. 따라서, 본 실시 형태를 실시하는 그 때의 기술 레벨에 따라, 적절하게, 이용할 하드웨어 구성을 변경하는 것이 가능하다.
또한, 상술한 바와 같이 본 실시 형태에 관한 정보 처리 장치(900)의 각 기능을 실현하기 위한 컴퓨터 프로그램을 제작하고, PC 등에 실장하는 것이 가능하다. 또한, 이러한 컴퓨터 프로그램이 저장된, 컴퓨터로 판독 가능한 기록 매체도 제공할 수 있다. 기록 매체는, 예를 들어 자기 디스크, 광 디스크, 광자기 디스크, 플래시 메모리 등이다. 또한, 상기 컴퓨터 프로그램은, 기록 매체를 사용하지 않고, 예를 들어 네트워크를 통하여 배신되어도 된다.
<<5. 정리>>
이상, 도 1 내지 도 15를 참조하여, 본 개시의 일 실시 형태에 대하여 상세하게 설명하였다. 상기 설명한 바와 같이, 본 실시 형태에 관한 시스템(1)은, 제1 단말 장치(10) 및 복수의 제2 단말 장치(20)를 적어도 포함하고, 제1 단말 장치(10)는, 제1 유저에 관한 센서 정보를 조합하여 생성된 촉각 정보를 송신하고, 제2 단말 장치(20)는 촉각 정보를 수신하여 출력한다. 복수의 센서 정보가 조합되어 촉각 정보가 생성되므로, 단일의 센서 정보에 기초하여 촉각 정보가 생성되는 경우와 비교하여, 촉각 정보의 정보량이 풍부해진다. 이에 의해, 촉각 자극을 이용한 풍부한 커뮤니케이션이 가능하게 된다.
이상, 첨부 도면을 참조하면서 본 개시의 적합한 실시 형태에 대하여 상세하게 설명하였지만, 본 개시의 기술적 범위는 이러한 예에 한정되지 않는다. 본 개시의 기술 분야에 있어서의 통상의 지식을 갖는 자라면, 청구범위에 기재된 기술적 사상의 범주 내에 있어서, 각종 변경예 또는 수정예에 상도할 수 있다는 것은 명확하며, 이들에 대해서도, 당연히 본 개시의 기술적 범위에 속하는 것이라고 이해된다.
예를 들어, 상기에서는, 적어도 제2 단말 장치(20)는, 유저의 손목에 장착되는 손목 시계형 또는 손목 밴드형 웨어러블 단말기인 것으로서 설명하였지만, 본 기술은 이러한 예에 한정되지 않는다. 예를 들어, 제2 단말 장치(20)는, 펜던트형 또는 안경형 등의 다른 웨어러블 단말기로서 실현되어도 되고, 스마트폰 등의 휴대되는 단말기로서 실현되어도 된다. 또한, 제2 단말 장치(20)로서의 기능이 애플리케이션(즉, 프로그램)으로서 실현되고, 스마트 시계 등의 웨어러블 단말기에 다운로드되어도 된다. 또한, 제2 단말 장치(20)는, 음악 라이브 회장에 있어서 관객에게 사용되는, 펜라이트나 부채 등의 응원 상품으로서 실현되어도 된다. 또한, 제2 단말 장치(20)는, 스포츠 관전 회장에 있어서 관객에게 사용되는, 메가폰 등의 응원 상품으로서 실현되어도 된다.
또한, 본 명세서에 있어서 시퀀스도를 사용하여 설명한 처리는, 반드시 도시된 순서로 실행되지는 않아도 된다. 몇 가지 처리 스텝은, 병렬적으로 실행되어도 된다. 또한, 추가적인 처리 스텝이 채용되어도 되고, 일부의 처리 스텝이 생략되어도 된다.
또한, 본 명세서에 기재된 효과는, 어디까지나 설명적 또는 예시적인 것이며 한정적이지는 않다. 즉, 본 개시에 관한 기술은, 상기 효과와 함께, 또는 상기 효과 대신에, 본 명세서의 기재로부터 당업자에게는 명확한 다른 효과를 발휘할 수 있다.
또한, 이하와 같은 구성도 본 개시의 기술적 범위에 속한다.
(1) 제1 단말 장치와 복수의 제2 단말 장치를 구비하는 시스템이며,
상기 제1 단말 장치는, 센서에 의해 검출된 제1 유저에 관한 제1 센서 정보를 조합하여 생성된 상기 제1 유저의 상태를 나타내는 제1 촉각 정보를 송신하고,
복수의 상기 제2 단말 장치는, 상기 제1 촉각 정보를 수신하여 출력하는, 시스템.
(2) 상기 제1 촉각 정보는, 상기 제1 유저에 관하여 검출된 센서 정보를, 검출된 다른 센서 정보에 기초하여 변조함으로써 생성된 촉각 정보인, 상기 (1)에 기재된 시스템.
(3) 상기 제1 촉각 정보는, 상기 제1 유저의 심박에 기초하는 진동 정보를, 상기 제1 유저의 체온 정보에 기초하여 변조한 진동 정보인, 상기 (2)에 기재된 시스템.
(4) 상기 제1 촉각 정보는, 상기 제1 유저의 행동에 기초하는 진동 정보를, 상기 제1 유저의 주위의 음성 정보에 기초하여 변조한 진동 정보인, 상기 (2)에 기재된 시스템.
(5) 상기 제1 단말 장치는, 상기 제1 유저의 상태에 기초하여 상기 제1 촉각 정보를 송신할지 여부를 제어하는, 상기 (1) 내지 (4) 중 어느 한 항에 기재된 시스템.
(6) 상기 제1 촉각 정보는, 상기 제1 촉각 정보의 복수의 생성 룰 중 상기 제1 유저의 상태에 대응하는 상기 생성 룰을 사용하여 생성되는, 상기 (1) 내지 (5) 중 어느 한 항에 기재된 시스템.
(7) 상기 제1 촉각 정보는, 설정된 레벨에 따라 상기 제1 유저의 상태를 추상화한 정보인, 상기 (1) 내지 (6) 중 어느 한 항에 기재된 시스템.
(8) 상기 시스템은, 복수의 상기 제1 단말 장치, 및 상기 제1 단말 장치로부터 수신한 상기 제1 촉각 정보를 복수의 상기 제2 단말 장치에 송신하는 통신 장치를 더 구비하고,
상기 통신 장치는, 복수의 상기 제1 유저에 관한 복수의 상기 제1 촉각 정보를, 복수의 상기 제2 단말 장치에 송신하고,
상기 제2 단말 장치는, 수신한 복수의 제1 촉각 정보 중 출력할 하나의 상기 제1 촉각 정보를 선택하는, 상기 (1) 내지 (7) 중 어느 한 항에 기재된 시스템.
(9) 상기 시스템은, 복수의 상기 제1 단말 장치, 및 상기 제1 단말 장치로부터 수신한 상기 제1 촉각 정보를 복수의 상기 제2 단말 장치에 송신하는 통신 장치를 더 구비하고,
상기 통신 장치는, 복수의 상기 제1 유저에 관한 복수의 상기 제1 촉각 정보를, 복수의 상기 제2 단말 장치에 송신하고,
상기 제2 단말 장치는, 복수의 제1 촉각 정보 중 수신할 하나의 상기 제1 촉각 정보를 선택하는, 상기 (1) 내지 (7) 중 어느 한 항에 기재된 시스템.
(10) 상기 시스템은, 복수의 상기 제1 단말 장치, 및 상기 제1 단말 장치로부터 수신한 상기 제1 촉각 정보를 복수의 상기 제2 단말 장치에 송신하는 통신 장치를 더 구비하고,
상기 통신 장치는, 복수의 상기 제1 유저에 관한 복수의 상기 제1 촉각 정보 중 선택된 하나의 상기 제1 촉각 정보를, 복수의 상기 제2 단말 장치에 송신하는, 상기 (1) 내지 (7) 중 어느 한 항에 기재된 시스템.
(11) 상기 제2 단말 장치는, 센서에 의해 검출된 제2 유저에 관한 제2 센서 정보를 조합하여 생성된 상기 제2 유저의 상태를 나타내는 제2 촉각 정보를 송신하고,
상기 제1 단말 장치는, 상기 제2 촉각 정보를 수신하여 출력하는, 상기 (1) 내지 (10) 중 어느 한 항에 기재된 시스템.
(12) 상기 시스템은, 복수의 상기 제1 단말 장치, 및 상기 제2 단말 장치로부터 수신한 상기 제2 유저에 관한 상기 제2 촉각 정보를, 복수의 상기 제1 단말 장치에 송신하는 통신 장치를 더 구비하는, 상기 (11)에 기재된 시스템.
(13) 상기 제1 촉각 정보는, 무선 통신로를 통하여 상기 제2 단말 장치에 송신되는, 상기 (1) 내지 (12) 중 어느 한 항에 기재된 시스템.
(14) 상기 제2 단말 장치로의 상기 제1 촉각 정보의 송신에 사용되는 무선 통신로에 따라 상이한 상기 제1 촉각 정보가 생성되는, 상기 (13)에 기재된 시스템.
(15) 상기 제2 단말 장치는, 상기 제2 단말 장치에 관련지어지는 제2 유저가 소정의 행동을 행한 경우에 상기 제1 촉각 정보를 출력하는, 상기 (1) 내지 (14) 중 어느 한 항에 기재된 시스템.
(16) 상기 제2 단말 장치는, 상기 제1 유저 이외의 제2 유저에 장착되는, 상기 (1) 내지 (15) 중 어느 한 항에 기재된 시스템.
(17) 센서에 의해 검출된 제1 유저에 관한 제1 센서 정보를 조합하여 생성된 상기 제1 유저의 상태를 나타내는 제1 촉각 정보를 송신하는 제어부를 구비하는 단말 장치.
(18) 센서에 의해 검출된 제1 유저에 관한 복수의 제1 센서 정보를 조합하여 생성된 상기 제1 유저의 상태를 나타내는 제1 촉각 정보를 수신하여 출력하는 제어부를 구비하는 단말 장치.
(19) 제1 단말 장치와 복수의 제2 단말 장치를 구비하는 시스템에 있어서,
상기 제1 단말 장치가, 센서에 의해 검출된 제1 유저에 관한 제1 센서 정보를 조합하여 생성된 상기 제1 유저의 상태를 나타내는 제1 촉각 정보를 송신하는 것과,
복수의 상기 제2 단말 장치가, 상기 제1 촉각 정보를 수신하여 출력하는 것
을 포함하는 방법.
(20) 컴퓨터를,
센서에 의해 검출된 제1 유저에 관한 복수의 제1 센서 정보를 조합하여 생성된 상기 제1 유저의 상태를 나타내는 제1 촉각 정보를 수신하여 출력하는 제어부로서 기능시키기 위한 프로그램을 기록한 기록 매체.
1: 시스템
10: 제1 단말 장치
110: 심박 센서
120: 제어부
130: 송신부
140: 수신부
150: 진동부
160: 전자 악기
170: 마이크
20: 제2 단말 장치
210: 수신부
220: 제어부
230: 진동부
240: 심박 센서
250: 송신부
260: 발광부
30: 통신 장치
310: 수신부
320: 제어부
330: 송신부
21: 발광부
22: 진동부
23: 밴드부
24: 형상 유지부
25: 마그네트
26: 웨어러블 단말기
27: 어태치먼트
40: 입력 엔티티
50: 생성 엔티티
60: 배신 엔티티
70: 출력 엔티티

Claims (20)

  1. 제1 단말 장치와 복수의 제2 단말 장치를 구비하는 시스템이며,
    상기 제1 단말 장치는, 센서에 의해 검출된 제1 유저에 관한 생체 정보를 포함하는 제1 센서 정보를 조합하여 상기 제1 유저의 생체 상태를 나타내는 제1 촉각 정보를 생성하여 송신하고,
    복수의 상기 제2 단말 장치는, 상기 제1 촉각 정보를 수신하여 출력하고,
    상기 제1 촉각 정보는, 상기 제1 유저의 생체 정보에 관하여 검출된 센서 정보를, 상기 제1 유저에 관하여 검출된 다른 센서 정보 - 상기 다른 센서 정보는 음성 정보, 화상 정보, 행동 인식 결과를 나타내는 정보, 생체 정보, 함께 있는 사람을 나타내는 정보, 및 위치 정보를 포함함 - 에 기초하여 변조함으로써 생성된 촉각 정보를 포함하는, 시스템.
  2. 삭제
  3. 제1항에 있어서, 상기 제1 촉각 정보는, 상기 제1 유저의 심박에 기초하는 진동 정보를, 상기 제1 유저의 체온 정보에 기초하여 변조함으로써 얻은 진동 정보를 포함하는, 시스템.
  4. 제1항에 있어서, 상기 제1 촉각 정보는, 상기 제1 유저의 행동에 기초하는 진동 정보를, 상기 제1 유저의 주위의 음성 정보에 기초하여 변조함으로써 얻은 진동 정보를 포함하는, 시스템.
  5. 제1항에 있어서, 상기 제1 단말 장치는, 상기 제1 유저의 상태에 기초하여 상기 제1 촉각 정보를 송신할지 여부를 제어하는, 시스템.
  6. 제1항에 있어서, 상기 제1 촉각 정보는, 상기 제1 촉각 정보의 복수의 생성 룰 중 상기 제1 유저의 상태에 대응하는 상기 생성 룰을 사용하여 생성되는, 시스템.
  7. 제1항에 있어서, 상기 제1 촉각 정보는, 설정된 레벨에 따라 상기 제1 유저의 상태를 추상화함으로써 얻은 정보를 포함하는, 시스템.
  8. 제1항에 있어서, 상기 시스템은, 다른 제1 단말 장치, 및 상기 제1 단말 장치로부터 수신한 상기 제1 촉각 정보를 복수의 상기 제2 단말 장치에 송신하는 통신 장치를 더 구비하고,
    상기 통신 장치는, 복수의 상기 제1 유저에 관한 복수의 상기 제1 촉각 정보를, 복수의 상기 제2 단말 장치에 송신하고,
    상기 복수의 제2 단말 장치는, 수신한 복수의 제1 촉각 정보 중 출력할 하나의 상기 제1 촉각 정보를 선택하는, 시스템.
  9. 제1항에 있어서, 상기 시스템은, 다른 제1 단말 장치, 및 상기 제1 단말 장치로부터 수신한 상기 제1 촉각 정보를 복수의 상기 제2 단말 장치에 송신하는 통신 장치를 더 구비하고,
    상기 통신 장치는, 복수의 상기 제1 유저에 관한 복수의 상기 제1 촉각 정보를, 복수의 상기 제2 단말 장치에 송신하고,
    상기 복수의 제2 단말 장치는, 복수의 제1 촉각 정보 중 수신할 하나의 상기 제1 촉각 정보를 선택하는, 시스템.
  10. 제1항에 있어서, 상기 시스템은, 다른 제1 단말 장치, 및 상기 제1 단말 장치로부터 수신한 상기 제1 촉각 정보를 복수의 상기 제2 단말 장치에 송신하는 통신 장치를 더 구비하고,
    상기 통신 장치는, 복수의 상기 제1 유저에 관한 복수의 상기 제1 촉각 정보 중 선택된 하나의 상기 제1 촉각 정보를, 복수의 상기 제2 단말 장치에 송신하는, 시스템.
  11. 제1항에 있어서, 상기 복수의 제2 단말 장치는, 센서에 의해 검출된 제2 유저에 관한 제2 센서 정보를 조합하여 생성된 상기 제2 유저의 상태를 나타내는 제2 촉각 정보를 송신하고,
    상기 제1 단말 장치는, 상기 제2 촉각 정보를 수신하여 출력하는, 시스템.
  12. 제11항에 있어서, 상기 시스템은, 다른 제1 단말 장치, 및 상기 복수의 제2 단말 장치로부터 수신한 상기 제2 유저에 관한 상기 제2 촉각 정보를, 상기 제1 단말 장치에 송신하는 통신 장치를 더 구비하는, 시스템.
  13. 제1항에 있어서, 상기 제1 촉각 정보는, 무선 통신로를 통하여 상기 복수의 제2 단말 장치에 송신되는, 시스템.
  14. 제13항에 있어서, 상기 제1 촉각 정보는, 상기 복수의 제2 단말 장치로의 상기 제1 촉각 정보의 송신에 사용되는 무선 통신로에 따라 상이하게 생성되는, 시스템.
  15. 제1항에 있어서, 상기 복수의 제2 단말 장치는, 상기 복수의 제2 단말 장치에 관련지어지는 제2 유저가 소정의 행동을 행한 경우에 상기 제1 촉각 정보를 출력하는, 시스템.
  16. 제1항에 있어서, 상기 복수의 제2 단말 장치는, 상기 제1 유저 이외의 제2 유저에 장착되는, 시스템.
  17. 센서에 의해 검출된 제1 유저에 관한 생체 정보를 포함하는 제1 센서 정보를 조합하여 상기 제1 유저의 생체 상태를 나타내는 제1 촉각 정보를 생성하여 송신하는 제어부를 구비하고,
    상기 제1 촉각 정보는, 상기 제1 유저의 생체 정보에 관하여 검출된 센서 정보를, 상기 제1 유저에 관하여 검출된 다른 센서 정보 - 상기 다른 센서 정보는 음성 정보, 화상 정보, 행동 인식 결과를 나타내는 정보, 생체 정보, 함께 있는 사람을 나타내는 정보, 및 위치 정보를 포함함 - 에 기초하여 변조함으로써 생성된 촉각 정보를 포함하고,
    상기 제어부는 적어도 하나의 프로세서를 통해 실행되는, 단말 장치.
  18. 센서에 의해 검출된 제1 유저에 관한 생체 정보를 포함하는 복수의 제1 센서 정보를 조합하여 생성된 상기 제1 유저의 생체 상태를 나타내는 제1 촉각 정보를 수신하여 출력하는 제어부를 구비하고,
    상기 제1 촉각 정보는, 상기 제1 유저의 생체 정보에 관하여 검출된 센서 정보를, 상기 제1 유저에 관하여 검출된 다른 센서 정보 - 상기 다른 센서 정보는 음성 정보, 화상 정보, 행동 인식 결과를 나타내는 정보, 생체 정보, 함께 있는 사람을 나타내는 정보, 및 위치 정보를 포함함 - 에 기초하여 변조함으로써 생성된 촉각 정보를 포함하고,
    상기 제어부는 적어도 하나의 프로세서를 통해 실행되는, 단말 장치.
  19. 제1 단말 장치와 복수의 제2 단말 장치를 구비하는 시스템에서 수행되는 방법으로서, 상기 방법은,
    센서에 의해 검출된 제1 유저에 관한 생체 정보를 포함하는 제1 센서 정보를 조합하여 상기 제1 유저의 생체 상태를 나타내는 제1 촉각 정보를 생성하여 상기 제1 단말 장치에 의해 송신하는 것과,
    상기 제1 촉각 정보를 복수의 상기 제2 단말 장치에 의해 수신하여 출력하는 것을 포함하고,
    상기 제1 촉각 정보는, 상기 제1 유저의 생체 정보에 관하여 검출된 센서 정보를, 상기 제1 유저에 관하여 검출된 다른 센서 정보 - 상기 다른 센서 정보는 음성 정보, 화상 정보, 행동 인식 결과를 나타내는 정보, 생체 정보, 함께 있는 사람을 나타내는 정보, 및 위치 정보를 포함함 - 에 기초하여 변조함으로써 생성된 촉각 정보를 포함하는, 방법.
  20. 컴퓨터에 의해 실행될 때 컴퓨터로 하여금,
    센서에 의해 검출된 제1 유저에 관한 생체 정보를 포함하는 복수의 제1 센서 정보를 조합하여 생성된 상기 제1 유저의 생체 상태를 나타내는 제1 촉각 정보를 수신하여 출력하는 것을 포함하는 방법을 실행시키게 하는 프로그램이 내장된 비일시적 컴퓨터 판독가능한 기록 매체로서,
    상기 제1 촉각 정보는, 상기 제1 유저의 생체 정보에 관하여 검출된 센서 정보를, 상기 제1 유저에 관하여 검출된 다른 센서 정보 - 상기 다른 센서 정보는 음성 정보, 화상 정보, 행동 인식 결과를 나타내는 정보, 생체 정보, 함께 있는 사람을 나타내는 정보, 및 위치 정보를 포함함 - 에 기초하여 변조함으로써 생성된 촉각 정보를 포함하는, 비일시적 컴퓨터 판독가능한 기록 매체.
KR1020187026576A 2016-04-07 2017-03-31 시스템, 단말 장치, 방법 및 기록 매체 KR102355193B1 (ko)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US201662319412P 2016-04-07 2016-04-07
US62/319,412 2016-04-07
PCT/JP2017/013804 WO2017175689A1 (ja) 2016-04-07 2017-03-31 システム、端末装置、方法及び記録媒体

Publications (2)

Publication Number Publication Date
KR20180126474A KR20180126474A (ko) 2018-11-27
KR102355193B1 true KR102355193B1 (ko) 2022-01-26

Family

ID=60000474

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020187026576A KR102355193B1 (ko) 2016-04-07 2017-03-31 시스템, 단말 장치, 방법 및 기록 매체

Country Status (6)

Country Link
US (1) US10514763B2 (ko)
JP (1) JP6835070B2 (ko)
KR (1) KR102355193B1 (ko)
CN (1) CN108886542B (ko)
DE (1) DE112017001918T5 (ko)
WO (1) WO2017175689A1 (ko)

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20180068573A1 (en) * 2016-09-07 2018-03-08 Cornell University Mindless technologies to subtly influence behavior
KR102208810B1 (ko) * 2017-10-20 2021-01-28 주식회사 씨케이머티리얼즈랩 촉각 정보 제공 시스템
JP6531257B2 (ja) * 2017-10-28 2019-06-19 丸井 智敬 情報伝達補強システム。
CN111068304B (zh) * 2019-12-16 2023-12-01 瑞声科技(新加坡)有限公司 一种触觉反馈分享方法、装置及系统
WO2021145025A1 (ja) 2020-01-16 2021-07-22 ソニーグループ株式会社 情報処理装置、情報処理端末及びプログラム
WO2021145024A1 (ja) * 2020-01-16 2021-07-22 ソニーグループ株式会社 情報処理装置、情報処理端末及びプログラム
IL309800A (en) 2021-06-28 2024-02-01 Distal Reality LLC Haptic communication techniques
CN118176829A (zh) * 2021-12-16 2024-06-11 阿尔卑斯阿尔派株式会社 演出系统、演出控制装置以及演出装置
CN115051720B (zh) * 2022-06-06 2024-01-09 中国电信股份有限公司 触觉通信方法及系统、信号发送端和信号接收端

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005303722A (ja) * 2004-04-13 2005-10-27 Nippon Telegr & Teleph Corp <Ntt> 一体感を伝える通信システム
WO2013073437A1 (ja) * 2011-11-15 2013-05-23 ソニー株式会社 情報処理装置及び方法

Family Cites Families (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003060745A (ja) * 2001-08-22 2003-02-28 Sony Corp 情報伝達装置、情報伝達方法及びモニタ装置
JP4391091B2 (ja) * 2003-01-17 2009-12-24 ソニー株式会社 情報伝送方法、情報伝送装置、情報記録方法、情報記録装置、情報再生方法、情報再生装置および記録媒体
JP4403832B2 (ja) * 2004-03-04 2010-01-27 ヤマハ株式会社 合奏システム
KR100662335B1 (ko) * 2004-06-18 2007-01-02 엘지전자 주식회사 이동단말기 사용자의 감정 전달 및 표출 방법과, 그를위한 통신 시스템
JP4541185B2 (ja) * 2005-02-28 2010-09-08 横河電機株式会社 通報システム
US20090132088A1 (en) * 2007-04-24 2009-05-21 Tairob Ltd. Transfer of knowledge from a human skilled worker to an expert machine - the learning process
JP2009015449A (ja) * 2007-07-02 2009-01-22 Sony Corp 生体情報共有システム、生体情報表現装置、生体情報表現方法
CN102204225B (zh) * 2008-09-05 2013-12-11 Sk电信有限公司 传送振动信息的移动通信终端及其方法
US8326378B2 (en) * 2009-02-13 2012-12-04 T-Mobile Usa, Inc. Communication between devices using tactile or visual inputs, such as devices associated with mobile devices
CA2805250C (en) * 2010-07-15 2017-10-31 The Cleveland Clinic Foundation Classification of impacts from sensor data
US9643050B2 (en) * 2011-12-22 2017-05-09 Adidas Ag Fitness activity monitoring systems and methods
WO2013099629A1 (ja) * 2011-12-27 2013-07-04 ソニー株式会社 情報処理装置及び方法
US9098984B2 (en) * 2013-03-14 2015-08-04 Immersion Corporation Haptic effects broadcasting during a group event
US9939900B2 (en) * 2013-04-26 2018-04-10 Immersion Corporation System and method for a haptically-enabled deformable surface
US10325457B2 (en) * 2013-08-29 2019-06-18 Sony Corporation Wristband-type information processing device, information processing system, and information processing method
US9443401B2 (en) * 2013-09-06 2016-09-13 Immersion Corporation Automatic remote sensing and haptic conversion system
US10341544B2 (en) * 2014-07-23 2019-07-02 Orcam Technologies Ltd. Determining a matching score between users of wearable camera systems
KR20160023212A (ko) * 2014-08-21 2016-03-03 엘지전자 주식회사 글래스 타입의 이동 단말기 및 그 제어방법
JP2016197350A (ja) * 2015-04-03 2016-11-24 シャープ株式会社 情報伝送装置、行動体感システム、情報伝送方法および行動体感方法

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005303722A (ja) * 2004-04-13 2005-10-27 Nippon Telegr & Teleph Corp <Ntt> 一体感を伝える通信システム
WO2013073437A1 (ja) * 2011-11-15 2013-05-23 ソニー株式会社 情報処理装置及び方法

Also Published As

Publication number Publication date
US20190025924A1 (en) 2019-01-24
CN108886542A (zh) 2018-11-23
KR20180126474A (ko) 2018-11-27
JPWO2017175689A1 (ja) 2019-02-14
DE112017001918T5 (de) 2018-12-20
CN108886542B (zh) 2020-11-03
US10514763B2 (en) 2019-12-24
WO2017175689A1 (ja) 2017-10-12
JP6835070B2 (ja) 2021-02-24

Similar Documents

Publication Publication Date Title
KR102355193B1 (ko) 시스템, 단말 장치, 방법 및 기록 매체
CN113873378B (zh) 一种耳机噪声处理方法、装置及耳机
TW201820315A (zh) 改良型音訊耳機裝置及其聲音播放方法、電腦程式
US11676461B2 (en) Information processing device, information processing method, and program for controlling haptics based on context information
CN113873379A (zh) 一种模式控制方法、装置及终端设备
US11068230B2 (en) Bluetooth speaker, and intelligent control method for playing audio
CN111445901B (zh) 音频数据获取方法、装置、电子设备及存储介质
US20220342631A1 (en) Method and system for playing audios
US10785579B2 (en) Hearing assistance device with an accelerometer
CN111045945B (zh) 模拟直播的方法、装置、终端、存储介质及程序产品
JP2015125647A (ja) 情報通信プログラム、情報通信装置及び配信サーバ
CN109729222A (zh) 一种近距离查找可穿戴设备的方法及系统
CN109358744A (zh) 信息共享方法、装置、存储介质及穿戴式设备
JP2015185019A (ja) 情報通信装置の外部接続デバイス、情報通信装置の外部接続デバイス用プログラム
CN110870322A (zh) 信息处理设备、信息处理方法和程序
CN105680956B (zh) 电子设备及控制方法
CN109587603A (zh) 音量控制方法、装置及存储介质
US11276282B2 (en) Information processing apparatus, information processing method, and recording medium
WO2020100583A1 (ja) 情報処理装置、情報処理方法、および記憶媒体
US10310805B2 (en) Synchronized sound effects for sexual activity
CN110187863A (zh) 一种基于骨传导的信息交互方法、可穿戴设备及存储介质
US11740656B1 (en) Systems and methods for interaction of wearable communication devices
JP4538322B2 (ja) 電子機器間で人間の知覚信号を共有するシステム
US20210042078A1 (en) Methods and Systems for Replicating Content and Graphical User Interfaces on External Electronic Devices
Chelladurai et al. SoundHapticVR: Head-Based Spatial Haptic Feedback for Accessible Sounds in Virtual Reality for Deaf and Hard of Hearing Users

Legal Events

Date Code Title Description
E902 Notification of reason for refusal
AMND Amendment
E601 Decision to refuse application
AMND Amendment
X701 Decision to grant (after re-examination)