KR102427212B1 - 정보 처리 장치, 정보 처리 방법 및 프로그램 - Google Patents

정보 처리 장치, 정보 처리 방법 및 프로그램 Download PDF

Info

Publication number
KR102427212B1
KR102427212B1 KR1020187037422A KR20187037422A KR102427212B1 KR 102427212 B1 KR102427212 B1 KR 102427212B1 KR 1020187037422 A KR1020187037422 A KR 1020187037422A KR 20187037422 A KR20187037422 A KR 20187037422A KR 102427212 B1 KR102427212 B1 KR 102427212B1
Authority
KR
South Korea
Prior art keywords
tactile stimulation
output
unit
tactile
stimulation unit
Prior art date
Application number
KR1020187037422A
Other languages
English (en)
Other versions
KR20190025844A (ko
Inventor
료 요코야마
이쿠오 야마노
유스케 나카가와
Original Assignee
소니그룹주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 소니그룹주식회사 filed Critical 소니그룹주식회사
Publication of KR20190025844A publication Critical patent/KR20190025844A/ko
Application granted granted Critical
Publication of KR102427212B1 publication Critical patent/KR102427212B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/016—Input arrangements with force or tactile feedback as computer generated output to the user
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/25—Output arrangements for video game devices
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/25—Output arrangements for video game devices
    • A63F13/28—Output arrangements for video game devices responding to control signals received from the game device for affecting ambient conditions, e.g. for vibrating players' seats, activating scent dispensers or affecting temperature or light
    • A63F13/285—Generating tactile feedback signals via the game input device, e.g. force feedback
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0346—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of the device orientation or free movement in a 3D space, e.g. 3D mice, 6-DOF [six degrees of freedom] pointers using gyroscopes, accelerometers or tilt-sensors
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2201/00—Details of transducers, loudspeakers or microphones covered by H04R1/00 but not provided for in any of its subgroups
    • H04R2201/02—Details casings, cabinets or mounting therein for transducers covered by H04R1/02 but not provided for in any of its subgroups
    • H04R2201/023—Transducers incorporated in garment, rucksacks or the like
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2400/00—Loudspeakers
    • H04R2400/03—Transducers capable of generating both sound as well as tactile vibration, e.g. as used in cellular phones
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R5/00—Stereophonic arrangements
    • H04R5/02—Spatial or constructional arrangements of loudspeakers

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

위치 정보에 적응적으로 촉각 자극의 출력을 변화시키는 것이 가능한, 정보 처리 장치, 정보 처리 방법 및 프로그램을 제안한다.
적어도 2개 이상의 촉각 자극부에 대하여 촉각 자극의 출력을 제어하는 출력 제어부를 구비하고, 상기 출력 제어부는, 소정의 위치 정보 및 당해 위치 정보에 관련되는 촉각 출력에 관한 정보에 따라서, 상기 소정의 위치 정보에 대응하는 촉각 자극부의 출력을 변경하는 정보 처리 장치이다.

Description

정보 처리 장치, 정보 처리 방법 및 프로그램
본 개시는, 정보 처리 장치, 정보 처리 방법 및 프로그램에 관한 것이다.
종래, 예를 들어 진동 등의 촉각 자극을 유저에게 제시하기 위한 기술이 각종 제안되어 있다.
예를 들어, 하기 특허문헌 1에는, 가상 공간에 있어서 이벤트가 발생한 경우에, 소정의 디바이스에 촉각 자극을 출력시키는 기술이 기재되어 있다.
일본 특허 공개 제2015-166890호 공보
그런데, 예를 들어 촉각 자극의 대상이 되는 위치 등에 따라서, 출력되는 촉각 자극이 상이할 것도 요망된다. 그러나, 특허문헌 1에 기재된 기술에서는, 위치 정보에 상관없이, 동일한 촉각 자극이 출력된다.
따라서, 본 개시에서는, 위치 정보에 적응적으로 촉각 자극의 출력을 변화시키는 것이 가능한, 신규이면서도 개량된 정보 처리 장치, 정보 처리 방법 및 프로그램을 제안한다.
본 개시에 따르면, 적어도 2개 이상의 촉각 자극부에 대하여 촉각 자극의 출력을 제어하는 출력 제어부를 구비하고, 상기 출력 제어부는, 소정의 위치 정보 및 당해 위치 정보에 관련되는 촉각 출력에 관한 정보에 따라서, 상기 소정의 위치 정보에 대응하는 촉각 자극부의 출력을 변경하는 정보 처리 장치가 제공된다.
또한, 본 개시에 따르면, 적어도 2개 이상의 촉각 자극부에 대하여 촉각 자극의 출력을 제어하는 것과, 소정의 위치 정보 및 당해 위치 정보에 관련되는 촉각 출력에 관한 정보에 따라서, 상기 소정의 위치 정보에 대응하는 촉각 자극부의 출력을 프로세서가 변경하는 것을 포함하는 정보 처리 방법이 제공된다.
또한, 본 개시에 따르면, 컴퓨터를, 적어도 2개 이상의 촉각 자극부에 대하여 촉각 자극의 출력을 제어하는 출력 제어부로서 기능시키기 위한 프로그램이며, 상기 출력 제어부는, 소정의 위치 정보 및 당해 위치 정보에 관련되는 촉각 출력에 관한 정보에 따라서, 상기 소정의 위치 정보에 대응하는 촉각 자극부의 출력을 변경하는 프로그램이 제공된다.
이상 설명한 바와 같이 본 개시에 따르면, 위치 정보에 적응적으로 촉각 자극의 출력을 변화시킬 수 있다. 또한, 여기에 기재된 효과는 반드시 한정되는 것은 아니고, 본 개시 중에 기재된 어느 효과여도 된다.
도 1은 본 개시의 실시 형태에 의한 정보 처리 시스템의 구성예를 도시한 설명도이다.
도 2는 상기 실시 형태에 의한 재킷(20)의 외관도이다.
도 3은 개개의 촉각 자극부(200)가 단독으로 촉각 자극을 제시 가능한 범위를 도시한 설명도이다.
도 4는 2개의 촉각 자극부(200)가 유저의 신체 상에 배치되어 있는 예를 도시한 설명도이다.
도 5는 도 4에 도시한 상황에 있어서 2개의 촉각 자극부(200)의 출력 강도와, 지각 위치의 관계의 예를 도시한 설명도이다.
도 6은 본 개시의 비교예에 의한, 지각 위치와, 2개의 촉각 자극부(200)의 각각에 설정되는 출력 강도의 관계를 도시한 그래프이다.
도 7은 도 6에 도시한 함수가 적용된 경우에 있어서의 지각 위치와 지각 강도의 관계를 도시한 그래프이다.
도 8은 상기 실시 형태에 의한 서버(10)의 구성예를 도시한 기능 블록도이다.
도 9는 유저의 신체에 대하여 설정된 목표의 지각 위치의 이동 경로(220)의 일례를 도시한 설명도이다.
도 10은 목표의 지각 위치의 이동 경로(220)의 다른 예를 도시한 설명도이다.
도 11은 목표의 지각 위치의 범위(230)가 확대되는 예를 도시한 설명도이다.
도 12는 목표의 지각 위치의 범위(230)가 목표의 이동 경로(220)를 따라서 연속적으로 이동되는 예를 도시한 설명도이다.
도 13은 도 4에 도시한 상황에 있어서, 상기 실시 형태에 의한 출력 강도의 조정 함수를 적용한 예를 도시한 설명도이다.
도 14는 상기 실시 형태에 의한 출력 강도의 조정 함수의 일례를 도시한 설명도이다.
도 15는 도 14에 도시한 함수가 적용된 경우에 있어서의 지각 위치와 지각 강도의 관계를 도시한 그래프이다.
도 16은 복수의 촉각 자극부(200)의 출력 강도의 평면적인 조정예를 설명하기 위한 도면이다.
도 17은 2개의 목표의 지각 위치에 관하여 구성되는 삼각형이 겹치는 예를 도시한 설명도이다.
도 18은 현재 이동 중인 지각 위치의 범위(240)를 강조하여 진동을 발생시키는 예를 도시한 설명도이다.
도 19는 상기 실시 형태에 의한 동작예의 전체적인 흐름을 도시한 흐름도이다.
도 20은 상기 실시 형태에 의한 「출력 강도의 산출 처리」의 흐름을 도시한 흐름도이다.
도 21은 상기 실시 형태의 적용예 1에 의해 표시되는 화상(40)을 도시한 도면이다.
도 22는 적용예 1에 의해 유저에 대하여 출력되는 촉각 자극 및 소리를 도시한 모식도이다.
도 23은 상기 실시 형태의 적용예 2에 의해 표시되는 화상(40)을 도시한 도면이다.
도 24는 적용예 2에 의해 출력되는 촉각 자극의 지각 위치의 이동 경로를 도시한 모식도이다.
도 25는 적용예 2에 의해 유저에 대하여 출력되는 촉각 자극 및 소리를 도시한 모식도이다.
도 26은 상기 실시 형태의 적용예 3에 의해 표시되는 화상(40)을 도시한 도면이다.
도 27은 적용예 3에 의해 유저에 대하여 출력되는 촉각 자극 및 소리를 도시한 모식도이다.
도 28은 본 실시 형태에 의한 서버(10)의 하드웨어 구성예를 도시한 설명도이다.
이하에 첨부 도면을 참조하면서, 본 개시의 적합한 실시 형태에 대하여 상세하게 설명한다. 또한, 본 명세서 및 도면에 있어서, 실질적으로 동일한 기능 구성을 갖는 구성 요소에 대해서는, 동일한 번호를 부여함으로써 중복 설명을 생략한다.
또한, 본 명세서 및 도면에 있어서, 실질적으로 동일한 기능 구성을 갖는 복수의 구성 요소를, 동일한 부호 뒤에 상이한 알파벳을 붙여 구별하는 경우도 있다. 예를 들어, 실질적으로 동일한 기능 구성을 갖는 복수의 구성을, 필요에 따라 서버(10a) 및 서버(10b)와 같이 구별한다. 단, 실질적으로 동일한 기능 구성을 갖는 복수의 구성 요소의 각각을 특별히 구별할 필요가 없는 경우, 동일 부호만을 부여한다. 예를 들어, 서버(10a) 및 서버(10b)를 특별히 구별할 필요가 없는 경우에는, 간단히 서버(10)라 칭한다.
또한, 이하에 나타내는 항목 순서에 따라서 당해 「발명을 실시하기 위한 형태」를 설명한다.
1. 정보 처리 시스템의 구성
2. 실시 형태의 상세한 설명
3. 적용예
4. 하드웨어 구성
5. 변형예
<<1. 정보 처리 시스템의 구성>>
먼저, 본 개시의 실시 형태에 의한 정보 처리 시스템의 구성에 대하여, 도 1을 참조하여 설명한다. 도 1은 본 실시 형태에 의한 정보 처리 시스템의 구성을 도시한 설명도이다. 도 1에 도시한 바와 같이, 당해 정보 처리 시스템은, 서버(10), 표시 장치(30), 및, 통신망(32)을 갖는다. 또한, 본 실시 형태에서는, 도 1에 도시한 바와 같이, 유저(2)는 후술하는 재킷(20)을 장착할 수 있다.
<1-1. 재킷(20)>
도 2는 재킷(20)의 외관을 도시한 도면이다. 도 2에 도시한 바와 같이, 재킷(20)은 재킷(20)의 내부에 복수의 촉각 자극부(200), 및, 2개의 음성 출력부(202)를 갖는다. 예를 들어, 재킷(20)의 내부에 있어서, 유저의 정면측 및 배면측에 각각 소정의 개수(예를 들어 6개)씩 촉각 자극부(200)가 배치될 수 있다. 일례로서, 정면측에 배치되어 있는 개개의 촉각 자극부(200)와, 배면측에 배치되어 있는 개개의 촉각 자극부(200)가 대향하는 위치 관계에서, 개개의 촉각 자극부(200)는 배치된다. 또한, 도 2에서는, 재킷(20)이 소매가 없는 옷인 예를 나타내고 있지만, 이러한 예에 한정되지 않고, 재킷(20)은 소매가 있어도 된다. 이 경우, 촉각 자극부(200)는 유저의 흉부 및 복부뿐만 아니라, 유저의 양팔에 대응하는 위치에도 하나 이상 배치될 수 있다.
{1-1-1. 촉각 자극부(200)}
촉각 자극부(200)는, 예를 들어 서버(10)로부터 수신되는 제어 신호에 따라서, 예를 들어 진동 등의 촉각 자극을 출력한다. 또한, 이하에서는, 촉각 자극부(200)가, 촉각 자극으로서, 진동을 발생시키는 예를 중심으로 하여 설명을 행한다.
그런데, 재킷(20)에 포함되는 복수의 촉각 자극부(200)가 각각 단독으로 진동을 발생시키는 경우, 예를 들어 도 3에 도시한 바와 같이, 발생된 진동은, 당해 촉각 자극부(200)의 주변부(210)에서만 지각될 수 있다. 즉, 개개의 촉각 자극부(200)가 이격되어 배치되어 있는 경우에는, 개개의 촉각 자극부(200)가 따로따로 발생시키는 진동은, 유저의 신체에 있어서 이산적으로 지각될 수 있다.
한편, 팬텀 센세이션이라는 착각 현상이 의학적으로 해명되었다. 이 팬텀 센세이션은, 피부 상의 상이한 위치에 대하여 동시에 자극이 제시되면, 인간은, 제시된 자극 위치의 사이에 있어서 자극을 하나만 지각하는 착각 현상이다. 예를 들어, 도 4에 도시한 바와 같이, 유저의 신체 상에 배치된 2개의 촉각 자극부(200)에 동시에 자극을 출력시키면, 통상, 유저에게 지각되는 자극의 위치(이하, 지각 위치라 칭함)는, 2개의 촉각 자극부(200)의 사이의 위치가 되는 것이 알려져 있다.
도 5는, 도 4에 도시한 상황에 있어서, 2개의 촉각 자극부(200)의 각각의 출력 강도와, 지각 위치의 관계의 예(팬텀 센세이션의 예)를 도시한 설명도이다. 예를 들어, 도 5에 도시한 바와 같이, 시간의 경과에 따라서, 촉각 자극부(200a)의 출력 강도를 예를 들어 「1」, 「0.6」, 「0」과 같이 연속적으로 약하게 하고, 또한 촉각 자극부(200b)의 출력 강도를 「0」, 「0.6」, 「1」과 같이 연속적으로 강하게 한 것으로 한다. 이 경우, 도 5에 도시한 바와 같이, (유저에게 지각되는) 지각 위치(50)는 촉각 자극부(200a)의 접촉 위치로부터 촉각 자극부(200b)의 접촉 위치로 연속적으로 이동할 수 있다. 이와 같이 복수의 촉각 자극부(200)의 출력 강도를 변화시킴으로써, 개개의 촉각 자극부(200)의 배치 간격을 변화시키지 않고, 복수의 촉각 자극부(200)에 의해 제시 가능한 촉각 자극의 범위가 연속적으로 확대될 수 있다.
{1-1-2. 음성 출력부(202)}
음성 출력부(202)는, 예를 들어 서버(10)로부터 수신되는 제어 신호에 따라서, 음성을 출력한다. 이 음성 출력부(202)는, 도 2에 도시한 바와 같이, 재킷(20)의 좌우에 각각 하나씩 배치될 수 있다. 예를 들어, 재킷(20)의 장착 시에 유저의 어깨 또는 어깨의 근변에 위치하도록, 음성 출력부(202)는 배치된다. 단, 이러한 예에 한정되지 않고, 재킷(20)에는 음성 출력부(202)가 1개만 배치되어도 되고, 또는, 3개 이상 배치되어도 된다. 또한, 음성 출력부(202)는 재킷(20)에 포함되는 대신에, 독립된 장치로서 당해 소정의 공간 내에 배치되어도 되고, 또는, 재킷(20)과는 상이한 장착형 장치(예를 들어 헤드폰이나 헤드셋 등)나 휴대형 장치(예를 들어 휴대형 음악 플레이어, 스마트폰, 휴대형 게임기 등)에 포함되어도 된다.
<1-2. 표시 장치(30)>
표시 장치(30)는, 화상 정보를 표시하는 장치이다. 예를 들어, 표시 장치(30)는, 후술하는 서버(10)로부터 수신되는 제어 신호에 따라서, 투영 대상(4)에 대하여 화상 정보를 투영한다. 또한, 도 1에서는, 표시 장치(30)가 프로젝터인 예를 기재하고 있지만, 이러한 예에 한정되지 않고, 표시 장치(30)는 액정 디스플레이(LCD : Liquid Crystal Display) 장치나, OLED(Organic Light Emitting Diode) 장치 등이어도 된다. 또한, 표시 장치(30)는 태블릿 단말기나 스마트폰 등의 휴대형 장치, 또는, HMD나 AR(Augmented Reality) 유리 등의 장착형 장치에 포함되어도 된다. 또한, 이들의 경우, 음성 출력부(202) 및 표시 장치(30)는 동일한 장치에 포함되어도 된다.
<1-3. 서버(10)>
서버(10)는, 본 개시에 있어서의 정보 처리 장치의 일례이다. 서버(10)는, 복수의 촉각 자극부(200)(또는 재킷(20))에 대한 촉각 자극의 출력을 제어하는 장치이다. 예를 들어, 서버(10)는 재킷(20)에 포함되는 복수의 촉각 자극부(200)의 각각에 대하여 진동의 발생을 제어한다. 혹은, 복수의 촉각 자극부(200)를 제어하는 기능을 재킷(20)이 갖는 경우에는, 서버(10)는 당해 복수의 촉각 자극부(200)의 각각에 의한 진동의 발생을 재킷(20)에 대하여 지시하는 것도 가능하다.
또한, 서버(10)는 콘텐츠의 재생을 제어하는 기능을 가질 수 있다. 여기서, 콘텐츠는, 화상(화상 정보) 및 음성(소리 정보)을 포함한다. 예를 들어, 서버(10)는 표시 장치(30)에 대하여 화상의 표시를 제어한다. 또한, 서버(10)는 음성 출력부(202)에 대하여 음성의 출력을 제어한다. 이에 의해, 소정의 공간 내에 위치하는 유저는, 예를 들어 표시 장치(30)에 의해 표시되는 영상, 및/또는, 음성 출력부(202)에 의해 출력되는 음악을 시청하면서, 복수의 촉각 자극부(200)에 의해 발생되는 진동을 동시에 체험할 수 있다.
또한, 서버(10)는, 예를 들어 후술하는 통신망(32)을 통해 다른 장치(촉각 자극부(200), 음성 출력부(202), 및, 표시 장치(30) 등)와 통신하는 것이 가능하다.
<1-4. 통신망(32)>
통신망(32)은, 통신망(32)에 접속되어 있는 장치로부터 송신되는 정보의 유선, 또는 무선의 전송로이다. 예를 들어, 통신망(32)은 전화 회선망, 인터넷, 위성 통신망 등의 공중 회선망이나, Ethernet(등록 상표)을 포함하는 각종 LAN(Local Area Network), WAN(Wide Area Network) 등을 포함해도 된다. 또한, 통신망(32)은 IP-VPN(Internet Protocol-Virtual Private Network) 등의 전용 회선망을 포함해도 된다.
<1-5. 과제의 정리>
이상, 본 실시 형태에 의한 정보 처리 시스템의 구성에 대하여 설명하였다. 그런데, 촉각 자극부(200)에 의한 진동을 실제로 유저가 지각하는 강도(이하, 지각 강도라 칭함)는, 당해 촉각 자극부(200)로부터의 거리에 따라서 저하될 수 있다. 예를 들어, 촉각 자극부(200)에 의한 진동의 지각 강도는, 당해 촉각 자극부(200)로부터의 거리에 반비례적으로 저하될 수 있다.
여기서, 본 개시의 비교예에 대하여 설명한다. 도 6은 도 4에 도시한 상황에 있어서, 본 비교예에 의한, 2개의 촉각 자극부(200)의 출력 강도의 함수 f0(x) 및 함수 f1(x)을 나타낸 그래프이다. 본 비교예는, 도 6에 도시한 함수 f0(x)과 같은 출력 강도로 촉각 자극부(200a)에 진동을 발생시키고, 동시에, 도 6에 도시한 함수 f1(x)과 같은 출력 강도로 촉각 자극부(200a)에 진동을 발생시킨다. 이 함수 f0(x) 및 함수 f1(x)은, 촉각 자극부(200)의 출력 강도를 비선형적으로 조정하는 함수이므로, 팬텀 센세이션에 의해, 지각 위치가 이동하는 감각을 보다 강하게 유저에게 제시할 수 있다.
그러나, 이 경우, 도 7에 도시한 그래프와 같이, 촉각 자극부(200a)의 접촉 위치와 촉각 자극부(200b)의 접촉 위치의 중간 부근에서는, 이들 2개의 접촉 위치와 비교하여, 지각 강도가 크게 저하되어 버린다. 이 때문에, 본 비교예에서는, 원하는 지각 위치에 있어서, 원하는 지각 강도의 촉각 자극을 유저에게 제시하는 것이 곤란하다.
따라서, 상기 사정을 일 착안점으로 하여, 본 실시 형태에 의한 서버(10)를 창작하기에 이르렀다. 본 실시 형태에 의한 서버(10)는, 유저의 신체에 있어서의 소정의 위치 정보 및 당해 위치 정보에 관련되는 촉각 출력에 관한 정보에 따라서, 당해 소정의 위치 정보에 대응하는 하나 이상의 촉각 자극부(200)의 출력을 변경한다. 여기서, 촉각 출력에 관한 정보는, 예를 들어 촉각 자극의 목표의 지각 강도, 또는, (목표의) 촉각 출력값을 포함한다.
예를 들어, 서버(10)는 촉각 자극의 대상이 되는 위치, 및, 당해 위치에 있어서의 목표의 지각 강도에 따라서, 하나 이상의 촉각 자극부(200)의 출력 강도를 변경하는 것이 가능하다. 이 때문에, 예를 들어 복수의 촉각 자극부(200)의 접촉 위치의 사이에 있어서 지각 강도가 거의 일정해지도록, 유저에게 촉각 자극(진동 등)을 지각시킬 수 있다.
<<2. 실시 형태의 상세한 설명>>
<2-1. 구성>
다음으로, 본 실시 형태에 의한 서버(10)의 구성에 대하여 상세하게 설명한다. 도 8은 본 실시 형태에 의한 서버(10)의 구성예를 도시한 기능 블록도이다. 도 8에 도시한 바와 같이, 서버(10)는 제어부(100), 통신부(120), 및, 기억부(122)를 갖는다.
{2-1-1. 제어부(100)}
제어부(100)는, 서버(10)에 내장되는, 후술하는 CPU(Central Processing Unit)(150)나, RAM(Random Access Memory)(154) 등의 하드웨어를 사용하여, 서버(10)의 동작을 통괄적으로 제어한다. 또한, 도 8에 도시한 바와 같이, 제어부(100)는 콘텐츠 재생부(102), 목표 위치ㆍ강도 결정부(104), 및, 출력 제어부(106)를 갖는다.
{2-1-2. 콘텐츠 재생부(102)}
콘텐츠 재생부(102)는 콘텐츠의 재생을 제어한다. 예를 들어, 재생 대상의 콘텐츠가 화상을 포함하는 경우, 콘텐츠 재생부(102)는 표시 장치(30)에 대하여 화상의 표시 제어를 행한다. 또한, 재생 대상의 콘텐츠가 음성을 포함하는 경우, 콘텐츠 재생부(102)는 음성 출력부(202)에 대하여 음성의 출력 제어를 행한다.
또한, 콘텐츠 재생부(102)는, 후술하는 출력 제어부(106)에 의한 촉각 자극의 출력 제어와 관련지어, 재생 대상의 콘텐츠를 표시 장치(30) 및/또는 음성 출력부(202)에 재생시키는 것이 가능하다. 예를 들어, 콘텐츠 재생부(102)는, 1 이상의 촉각 자극부(200)에 의한 진동의 발생과 타이밍을 동기시켜 콘텐츠를 재생한다.
또한, 재생 대상의 콘텐츠의 종류는, 미리 정해져 있는 설정 정보(재생 리스트 등)에 기초하여 결정되어도 되고, 또는, 유저에 의해 입력되는 재생 요구에 기초하여 결정되어도 된다.
{2-1-3. 목표 위치ㆍ강도 결정부(104)}
(2-1-3-1. 목표의 지각 위치의 결정)
목표 위치ㆍ강도 결정부(104)는, 소정의 타이밍에 있어서의, 촉각 자극의 목표의 지각 위치 및 당해 지각 위치에 있어서의 목표의 지각 강도를 결정한다. 여기서, 목표의 지각 위치는, 기본적으로, 유저의 신체에 대하여 설정될 수 있다. 예를 들어, 목표 위치ㆍ강도 결정부(104)는, 재생 대상의 콘텐츠에 따라서, 소정의 타이밍에 있어서의, 촉각 자극의 목표의 지각 위치 및 당해 지각 위치에 있어서의 목표의 지각 강도를 결정한다. 일례로서, 목표 위치ㆍ강도 결정부(104)는 재생 대상의 콘텐츠의 재생 기간 중의 각 타이밍에 있어서 표시되는 화상, 및/또는, 출력되는 음성에 따라서, 각 타이밍에 있어서의 목표의 지각 위치 및 목표의 지각 강도를 결정한다.
- 이동 경로
예를 들어, 재생 대상의 콘텐츠에 목표의 이동 경로가 미리 관련지어져 있는 경우에는, 목표 위치ㆍ강도 결정부(104)는, 당해 목표의 이동 경로에 기초하여, 당해 콘텐츠의 재생 기간 중의 각 타이밍에 있어서의 목표의 지각 위치를 결정한다. 또는, 목표 위치ㆍ강도 결정부(104)는, 현재의(목표의) 지각 위치와, 현재 재생 중인 콘텐츠에 따라서, 장래의 소정의 타이밍에 있어서의 목표의 지각 위치를 리얼타임으로 결정해도 된다.
여기서, 목표의 이동 경로는, 유저의 신체의 표면 상에 설정될 수 있다. 도 9는 유저의 신체에 대하여 설정된 목표의 이동 경로(220)의 일례를 도시한 설명도이다. 도 9에서는, 목표의 이동 경로(220)가, 촉각 자극부(200a)의 접촉 위치, 촉각 자극부(200c)의 접촉 위치, 촉각 자극부(200d)의 접촉 위치, 및, 촉각 자극부(200h)의 접촉 위치를 연결하는 경로인 예를 도시하고 있다. 이 경우, 시점인 촉각 자극부(200a)의 접촉 위치로부터, 종점인 촉각 자극부(200h)의 접촉 위치까지 지각 위치가 연속으로 이동하도록, 유저에게 촉각 자극을 제시하는 것이 가능해진다.
또는, 목표의 이동 경로는, 유저의 신체의 제1 면, 유저의 신체의 내부, 및, 당해 제1 면과 대향하는 제2 면을 연결하는 경로로서 설정될 수 있다. 여기서, 제1 면은 유저의 정면이며, 또한, 제2 면은 유저의 배면일 수 있다. 혹은, 제1 면은, 예를 들어 팔 등의 소정의 부위의 표측의 면이며, 또한, 제2 면은, 당해 부위의 이측의 면이어도 된다. 도 10은 목표의 이동 경로(220)의 다른 예를 도시한 설명도이다. 도 10에서는, 목표의 이동 경로(220)가, 유저의 정면에 있어서의 촉각 자극부(200a)의 접촉 위치, 유저의 신체의 내부, 및, 유저의 배면에 있어서의 촉각 자극부(200b)의 접촉 위치를 연결하는 경로인 예를 나타내고 있다. 이 경우, 정면으로부터 배면으로 신체의 내부에 꽂히는 듯한 감각을 유저에게 제시할 수 있다.
- 이동 영역
또한, 재생 대상의 콘텐츠에 목표의 이동 영역이 미리 관련지어져 있는 경우에는, 목표 위치ㆍ강도 결정부(104)는, 당해 목표의 이동 영역에 기초하여, 당해 콘텐츠의 재생 기간 중의 각 타이밍에 있어서의 목표의 지각 위치의 집합(영역)을 결정하는 것이 가능하다. 또는, 목표 위치ㆍ강도 결정부(104)는, 현재의(목표의) 지각 위치의 집합과, 현재 재생 중인 콘텐츠에 따라서, 장래의 소정의 타이밍에 있어서의 목표의 지각 위치의 집합을 리얼타임으로 결정해도 된다.
여기서, 목표의 이동 영역은, 유저의 신체에 있어서, 시간의 경과에 따라서 면적으로 확대되는 영역으로서 설정될 수 있다. 도 11은 유저의 신체에 대하여 설정된 목표의 이동 영역(230)의 일례를 도시한 설명도이다. 도 11에서는, 목표의 이동 영역(230)이, 촉각 자극부(200a)의 접촉 위치를 시점으로 하여, 시간의 경과에 따라서, 목표의 지각 위치의 집합이 면적으로 확대되는 영역인 예를 도시하고 있다. 예를 들어, 목표의 이동 영역(230)은, 촉각 자극부(200a)의 접촉 위치와 목표의 지각 위치의 집합의 거리가 시간의 경과에 따라서 서서히 커지는 영역이다. 이 경우, 시점인 촉각 자극부(200a)의 접촉 위치를 기준으로 하여, 지각 위치가 연속으로, 또한, 면적으로 확대되도록, 유저에게 촉각 자극을 제시할 수 있다. 또한, 촉각 자극부(200a)의 접촉 위치(즉, 당해 목표의 이동 영역의 시점)는, 본 개시에 있어서의 제3 위치의 일례이다.
(2-1-3-2. 목표의 지각 강도의 결정)
또한, 목표 위치ㆍ강도 결정부(104)는, 재생 대상의 콘텐츠에 따라서, 당해 콘텐츠의 재생 기간 중의 각 타이밍에 있어서의 목표의 지각 강도를 결정하는 것이 가능하다.
- 결정예 1
예를 들어, 목표의 이동 경로(또는 목표의 이동 영역)와, 당해 목표의 이동 경로(또는 목표의 이동 영역) 상의 각 위치에 있어서의 목표의 지각 강도가 미리 관련지어질 수 있다. 이 경우, 목표 위치ㆍ강도 결정부(104)는, 먼저, 예를 들어 재생 대상의 콘텐츠에 따라서 목표의 이동 경로를 결정하고, 그리고, 당해 목표의 이동 경로에 기초하여, 당해 콘텐츠의 재생 기간 중의 각 타이밍에 있어서의 목표의 지각 강도를 결정한다. 또한, 목표의 이동 경로(또는 목표의 이동 영역) 상의 각 위치에 있어서의 목표의 지각 강도는, 모두 동일하게 정해져도 되고, 위치마다 상이하도록 정해져도 된다. 또한, 목표의 이동 경로(또는 목표의 이동 영역) 상의 각 위치에 있어서의 목표의 지각 강도는, 유저가 수동으로 설정해도 된다.
또는, 목표 위치ㆍ강도 결정부(104)는, 현재의(목표의) 지각 강도와, 현재 재생 중인 콘텐츠에 따라서, 장래의 소정의 타이밍에 있어서의 목표의 지각 강도를 리얼타임으로 결정해도 된다.
- 결정예 2
또는, 목표의 지각 강도의 파형이 미리 등록될 수 있다. 이 경우, 목표 위치ㆍ강도 결정부(104)는, 당해 목표의 지각 강도의 파형과, 결정한 목표의 지각 위치에 기초하여, 당해 목표의 지각 위치에 있어서의 목표의 지각 강도를 예를 들어 리얼타임으로 결정하는 것이 가능하다. 또한, 목표의 지각 강도의 파형은, 상수 함수여도 되고, 또는, 재생 대상의 콘텐츠에 관련지어 등록되어도 된다.
{2-1-4. 출력 제어부(106)}
(2-1-4-1. 목표 위치의 연속적인 이동)
출력 제어부(106)는, 목표 위치ㆍ강도 결정부(104)에 의해 결정된 목표의 지각 위치 및 목표의 지각 강도에 따라서, 당해 목표의 지각 위치에 대응하는 복수의 촉각 자극부(200)에 대한 진동의 발생을 제어한다. 예를 들어, 출력 제어부(106)는, 먼저, 현재의 목표의 지각 위치의 근린에 위치하는 복수(예를 들어 3개)의 촉각 자극부(200)를 특정한다. 그리고, 출력 제어부(106)는, 당해 복수의 촉각 자극부(200)의 각각과 당해 목표의 지각 위치의 위치 관계, 및, 현재의 목표의 지각 강도에 기초하여, 당해 복수의 촉각 자극부(200)의 각각의 출력 강도를 결정한다. 이에 의해, 예를 들어 현재의 목표의 지각 위치에 있어서 현재의 목표의 지각 강도의 진동이 유저에게 지각될 수 있다.
또한, 출력 제어부(106)는, 시간의 경과에 따라서, 목표 위치ㆍ강도 결정부(104)에 의해 결정되는 목표의 지각 위치 및 목표의 지각 강도가 변화될 때마다, 변화 후의 목표의 지각 위치에 대응하는 복수의 촉각 자극부(200)의 각각의 출력 강도를 순차적으로 조정한다.
- 구체예
예를 들어, 도 9에 도시한 바와 같이, 유저의 신체의 표면 상에 목표의 이동 경로(220)가 설정되어 있고, 또한, 당해 목표의 이동 경로(220)에 있어서의 목표의 지각 강도가 일정하게 정해져 있는 것으로 한다. 이 경우, 출력 제어부(106)는, 시간의 경과에 따라서, 당해 목표의 이동 경로(220) 상의 각 위치에 있어서 동일한 지각 강도의 진동이 연속적으로 이동하도록, 해당하는 복수의 촉각 자극부(200)의 출력 강도를 조정한다.
또는, 도 10에 도시한 바와 같이, 목표의 이동 경로(220)가 유저의 신체의 정면과 배면을 연결하는 이동 경로로서 설정되어 있는 것으로 한다. 이 경우, 출력 제어부(106)는, 시간의 경과에 따라서, 당해 목표의 이동 경로(220)를 따라서 지각 위치가 신체의 내부를 통과하도록, 해당하는 복수의 촉각 자극부(200)의 출력 강도를 조정한다.
또는, 도 11에 도시한 바와 같이, 목표의 이동 영역(230)이 면적으로 확대되는 영역으로서 설정되어 있는 것으로 한다. 이 경우, 출력 제어부(106)는, 시간의 경과에 따라서, 시점(예를 들어 촉각 자극부(200a)의 접촉 위치)과 지각 위치의 집합(범위) 사이의 거리가 연속적으로 커지도록, 해당하는 복수의 촉각 자극부(200)의 출력 강도를 조정한다.
또는, 도 12에 도시한 바와 같이, 출력 제어부(106)는, 목표의 지각 위치의 범위(230)가 목표의 이동 경로(220)를 따라서 연속적으로 이동하도록, 해당하는 복수의 촉각 자극부(200)의 출력 강도를 조정한다.
(2-1-4-2. 제시 거리를 사용한 출력 강도의 제어)
또한, 출력 제어부(106)는, (목표의 지각 강도에 기초하여 결정되는) 당해 촉각 자극부(200)의 출력 강도를, 목표의 지각 위치와, 당해 목표의 지각 위치의 근린에 위치하는 촉각 자극부(200)의 거리에 기초하여 변경하는 것이 가능하다. 예를 들어, 당해 목표의 지각 위치의 근린에 촉각 자극부(200a) 및 촉각 자극부(200b)가 위치하는 경우, 출력 제어부(106)는, 유저의 신체에 있어서의 촉각 자극부(200a)의 접촉 위치와 목표의 지각 위치의 거리에 기초하여, 촉각 자극부(200a)의 출력 강도를 변경한다. 또한, 출력 제어부(106)는, 유저의 신체에 있어서의 촉각 자극부(200b)의 접촉 위치와 목표의 지각 위치의 거리에 기초하여, 촉각 자극부(200b)의 출력 강도를 변경한다. 여기서, 촉각 자극부(200a)는 본 개시에 있어서의 제1 촉각 자극부의 일례이며, 또한, 촉각 자극부(200b)는 본 개시에 있어서의 제2 촉각 자극부의 일례이다.
- 2점간의 출력 강도의 보정예
이하, 상기의 기능에 대하여 보다 상세하게 설명한다. 먼저, 2개의 촉각 자극부(200)의 접촉 위치의 사이에 목표의 지각 위치가 위치하는 경우에 있어서의, 당해 2개의 촉각 자극부(200)의 출력 강도의 조정예에 대하여 설명한다. 예를 들어, 출력 제어부(106)는, 촉각 자극부(200a)의 접촉 위치와 촉각 자극부(200b)의 접촉 위치의 중간 위치와, 목표의 지각 위치의 위치 관계에 기초하여, 촉각 자극부(200a)의 출력 강도 및 촉각 자극부(200b)의 출력 강도를 각각 변경한다. 여기서, 당해 중간 위치는, 본 개시에 있어서의 제4 위치의 일례이다.
예를 들어, 출력 제어부(106)는, 당해 중간 위치와 목표의 지각 위치의 거리가 작을수록, 촉각 자극부(200a)의 출력 강도 및 촉각 자극부(200b)의 출력 강도의 합계값이 커지도록, 촉각 자극부(200a) 및 촉각 자극부(200b)의 출력 강도를 변경해도 된다. 또는, 촉각 자극부(200b)의 접촉 위치보다도 촉각 자극부(200a)의 접촉 위치의 근처에 목표의 지각 위치가 위치하는 경우, 출력 제어부(106)는 촉각 자극부(200a)의 접촉 위치와 목표의 지각 위치의 거리가 커질수록 촉각 자극부(200a)의 출력 강도가 커지도록 촉각 자극부(200a)의 출력 강도를 변경해도 된다. 또한, 촉각 자극부(200b)에 관해서도 마찬가지이다(즉, 역의 관계가 된다).
동시에, 출력 제어부(106)는, 당해 중간 위치와 목표의 지각 위치의 위치 관계에 기초하여, 촉각 자극부(200a)의 출력 강도와 촉각 자극부(200b)의 출력 강도의 비를 변경한다.
도 13은, 도 5에 도시한 예에 대응하는, 상기의 출력 강도의 조정을 적용한 장면의 예를 도시한 설명도이다. 또한, 도 13의 (a) 및 (c)는, 목표의 지각 위치(50)가 촉각 자극부(200a)의 접촉 위치 혹은 촉각 자극부(200b)의 접촉 위치에 일치하는 상황을 도시하고 있다. 또한, 도 13의 (b)는 목표의 지각 위치(50)가 2개의 촉각 자극부(200)의 중간 위치에 위치하는 타이밍을 도시하고 있다. 예를 들어, 도 13의 (a)에 도시한 타이밍에서는, 출력 제어부(106)는 촉각 자극부(200a)의 출력 강도를 「1」, 촉각 자극부(200b)의 출력 강도를 「0」으로 각각 설정한다. 또한, 도 13의 (b)에 도시한 타이밍에서는, 출력 제어부(106)는 촉각 자극부(200a)의 출력 강도를 「1.5」, 촉각 자극부(200b)의 출력 강도를 「1.5」로 각각 설정한다. 또한, 도 13의 (c)에 도시한 타이밍에서는, 출력 제어부(106)는, 촉각 자극부(200a)의 출력 강도를 「0」, 촉각 자극부(200b)의 출력 강도를 「1」로 각각 설정한다. 즉, 2개의 촉각 자극부(200)의 중간 위치와 목표의 지각 위치(50)의 거리가 작은 경우(도 13의 (b))쪽이, 당해 중간 위치와 목표의 지각 위치(50)의 거리가 큰 경우(도 13의 (a) 및 (c))보다도, 2개의 촉각 자극부(200)의 출력 강도의 합계가 커지도록, 출력 제어부(106)는 촉각 자극부(200a) 및 촉각 자극부(200b)의 출력 강도를 조정한다.
예를 들어, 출력 제어부(106)는, 이하의 수학식 1과 같이, 도 6에 도시한 바와 같은 함수 f0(x)에 대하여 조정 함수 h0(x)을 승산함으로써, 도 14에 도시한 바와 같은 함수 g0(x)을 구한다. 여기서, 함수 g0(x)은 목표의 지각 위치가 x인 경우에 있어서의 촉각 자극부(200a)의 출력 강도를 나타내는 함수이다. 또한, 조정 함수 h0(x)은, 촉각 자극부(200a)와 목표의 지각 위치의 거리에 비례적으로 촉각 자극부(200a)의 출력 강도를 증대시키는 함수이다.
Figure 112018129526233-pct00001
마찬가지로, 출력 제어부(106)는, 이하의 수학식 2와 같이, 도 6에 도시한 함수 f1(x)에 대하여 조정 함수 h1(x)을 승산함으로써, 도 14에 도시한 바와 같은 함수 g1(x)을 구한다. 여기서, 함수 g1(x)은, 목표의 지각 위치가 x인 경우에 있어서의 촉각 자극부(200b)의 출력 강도를 나타내는 함수이다. 또한, 조정 함수 h1(x)은, 촉각 자극부(200b)와 목표의 지각 위치의 거리에 비례적으로 촉각 자극부(200b)의 출력 강도를 증대시키는 함수이다. 또한, 함수 f0(x) 및 함수 f1(x)은, 도 6에 도시한 바와 같은 평방근 함수에 한정되지 않고, 대수 함수나 선형의 함수(1차 함수 등) 등이어도 된다.
Figure 112018129526233-pct00002
또한, 도 15는, 함수 g0(x) 및 함수 g1(x)을 사용한 장면에 있어서의, 목표의 지각 위치(=x)와, 지각 강도의 관계의 예를 나타낸 그래프이다. 구체적으로는, 도 15는, 2개의 촉각 자극부(200)의 사이의 구간 전체에 있어서 목표의 지각 강도가 「1」로 설정되고, 또한, 도 14에 도시한 함수 g0(x)을 사용하여 촉각 자극부(200a)에 진동을 발생시키고, 또한, 도 14에 도시한 함수 g1(x)을 사용하여 촉각 자극부(200b)에 진동을 발생시킨 경우에 있어서의 그래프를 도시하고 있다. 도 15에 도시한 바와 같이, 함수 g0(x) 및 함수 g1(x)을 적용함으로써, 촉각 자극부(200a)와 촉각 자극부(200b) 사이의 구간 전체에 있어서, 지각 강도가 거의 일정하게 될 수 있다. 예를 들어, 목표의 지각 위치가 당해 중간 위치 부근에 위치하는 경우에도, 지각 강도가 거의 저하되지 않는다.
- 평면적인 출력 강도의 보정예
다음으로, 복수의 촉각 자극부(200)의 출력 강도의 평면적인 조정예에 대하여 설명한다. 보다 구체적으로는, 3개의 촉각 자극부(200)의 접촉 위치에서 정해지는 삼각형의 내부에 목표의 지각 위치가 위치하는 경우에 있어서의, 당해 3개의 촉각 자극부(200)의 출력 강도의 조정예에 대하여 설명한다.
예를 들어, 출력 제어부(106)는, 당해 3개의 촉각 자극부(200)의 각각에 관하여, 당해 촉각 자극부(200)의 접촉 위치와 목표의 지각 위치의 거리에 기초하여, 당해 촉각 자극부(200)의 출력 강도를 변경한다.
여기서, 도 16을 참조하여, 상기의 기능에 대하여 보다 상세하게 설명한다. 또한, 도 16에서는, 점 A가 목표의 지각 위치인 예를 도시하고 있다. 예를 들어, 출력 제어부(106)는, 먼저, 점 A의 근린에 위치하는 3개의 촉각 자극부(200)의 접촉 위치(A0, A1, A2)의 위치 관계에 기초하여, 당해 3개의 촉각 자극부(200)의 각각의 출력 강도를 (일시적으로) 산출한다. 그리고, 출력 제어부(106)는, 당해 3개의 촉각 자극부(200)의 각각에 관하여, 당해 촉각 자극부(200)의 접촉 위치와 목표의 지각 위치의 거리(도 16에 도시한 예에서는 L0, L1, 또는, L2)에 기초하여, 산출한 출력 강도를 변경(보정)한다. 이 제어예에 따르면, 예를 들어 당해 삼각형 내의 전체 범위에 있어서의 목표의 지각 강도가 동일 값으로 설정된 경우에서는, 당해 삼각형 내의 모든 위치에 있어서 (실제로 유저에게 지각되는) 지각 강도가 거의 일정하게 될 수 있다. 예를 들어, 목표의 지각 위치가 당해 삼각형의 무게 중심 부근에 위치하는 경우에도, 지각 강도가 거의 저하되지 않는다.
- - 삼각형의 겹침
또한, 목표의 지각 위치가 복수개 설정되는 경우에는, 개개의 목표의 지각 위치에 관하여 구성되는 삼각형이 서로 겹치도록 결정되는 것이 허용될 수 있다. 예를 들어, 도 17에 도시한 바와 같이, 제1 목표의 지각 위치(점 A)의 근린에 위치하는 3개의 촉각 자극부(200)의 접촉 위치(A0, A1, A2)에 의해 정해지는 삼각형과, 제2 목표의 지각 위치(점 B)의 근린에 위치하는 3개의 촉각 자극부(200)의 접촉 위치(A0, A2, A3)에 의해 정해지는 삼각형은 중첩되어도 된다.
- 변형예
여기서, 상술한 복수의 촉각 자극부(200)의 출력 강도의 조정 방법의 변형예에 대하여 설명한다. 예를 들어, 지각 위치(또는 감도 특성)가 불분명(예를 들어 특정 불가능)한 경우에는, 출력 제어부(106)는 개개의 촉각 자극부(200)에 대하여 적용하는 상기의 조정 함수의 파라미터를 모두 소정의 값(동일한 값)으로 설정해도 된다.
또한, 유저의 신체에 대한 촉각 자극부(200)의 접촉 위치가 불분명한 경우도 있다. 예를 들어, 촉각 자극부(200)를 포함하는 디바이스가 벨트형의 디바이스인 경우에는, 유저는 당해 디바이스를 손목에 장착하는 경우도 있고, 발목에 장착하는 경우도 있다. 따라서, 촉각 자극부(200)의 접촉 위치가 불분명한 경우에는, 출력 제어부(106)는 개개의 촉각 자극부(200)가 등간격으로 위치하는 것으로 가정함으로써, 개개의 촉각 자극부(200)의 출력 강도의 조정 함수의 파라미터의 값을 결정해도 된다.
또한, 유저의 신체에 대한 촉각 자극부(200)의 접촉 압력이 불분명한 경우도 있다. 예를 들어, 재킷(20)을 유저가 장착하는 경우, 재킷(20)과 신체 사이에 간극이 발생할 수 있지만, 당해 간극을 검출할 수 없는 경우가 있다. 따라서, 촉각 자극부(200)의 접촉 압력이 불분명한 경우에는, 출력 제어부(106)는 당해 촉각 자극부(200)의 출력 강도의 조정 함수의 파라미터를 소정의 값으로 설정해도 된다.
또한, 유저의 신체에 대하여 접촉되는 복수의 촉각 자극부(200) 중 어느 것이 고장난 경우에는, 출력 제어부(106)는 해당의 촉각 자극부(200)의 근린에 위치하는 촉각 자극부(200)의 출력 강도의 조정 함수의 파라미터의 값을 (고장 전의 값으로부터) 변경하는 것도 가능하다. 이에 의해, 하나의 촉각 자극부(200)가 고장났다고 해도, 유저에 대한 촉각 자극의 제시 영역이 결여되는 것을 방지할 수 있다.
또한, 적어도 하나 이상의 촉각 자극부(200)의 접촉 압력이 소정의 역치보다도 작아진 것이 측정된 경우, 또는, 추정된 경우에는, 출력 제어부(106)는 모든 촉각 자극부(200)에 의한 진동의 발생을 중지해도 된다. 또는, 이 경우, 출력 제어부(106)는, 해당의 촉각 자극부(200)에 의한 촉각 자극의 출력을 중지하고, 또한, 해당의 촉각 자극부(200)의 근린에 위치하는 촉각 자극부(200)의 출력 강도의 조정 함수의 파라미터의 값을 (당해 중지 전의 값으로부터) 변경해도 된다.
(2-1-4-3. 이동 속도의 제어)
또한, 출력 제어부(106)는, 또한, 목표 위치의 이동 속도를 결정하는 것이 가능하다. 예를 들어, 출력 제어부(106)는 목표 위치의 이동 속도를 소정의 값으로 설정해도 되고, 또는, 동적으로 변경해도 된다.
후자의 경우, 예를 들어 출력 제어부(106)는, (콘텐츠 재생부(102)에 의한) 재생 대상의 콘텐츠에 따라서, 목표 위치의 이동 속도를 동적으로 변경해도 된다. 또는, 출력 제어부(106)는 예를 들어 유저의 신체 회전 속도, 또는, 소정의 디바이스에 대한 유저의 조작 속도의 측정 결과에 기초하여, 목표 위치의 이동 속도를 변경해도 된다. 또한, 유저의 신체 회전 속도는, 유저가 휴대 또는 장착하는 가속도 센서나 자이로스코프 등의 각종 센서에 의한 측정 결정에 기초하여 특정될 수 있다. 여기서, 각종 센서는, 재킷(20)이 가져도 되고, 촉각 자극부(200)가 가져도 되고, 또는, 유저가 휴대 또는 장착하는 다른 디바이스가 가져도 된다. 또한, 상이한 디바이스가 각각 갖는 상이한 센서(예를 들어 촉각 자극부(200)가 가속도 센서를 갖고, 또한, 재킷(20)이 자이로스코프를 갖는 등)에 의한 측정 결과를 조합하여, 유저의 신체의 회전 속도는 특정되어도 된다.
(2-1-4-4. 출력 강도의 동적 변경)
또한, 출력 제어부(106)는, 또한, 소정의 기준에 기초하여, 복수의 촉각 자극부(200)의 출력 강도를 동적으로 변경해도 된다. 예를 들어, 출력 제어부(106)는, 현재 이동 중인 지각 위치(또는 지각 위치의 범위)에 기초하여, 복수의 촉각 자극부(200)의 출력 강도를 동적으로 변경하는 것이 가능하다. 일례로서, 도 18에 도시한 바와 같이, 출력 제어부(106)는, 목표의 지각 위치의 범위(230)를 목표의 이동 경로(220)를 따라서 연속적으로 이동시키면서, 현재 이동 중인 지각 위치의 범위(240)에 있어서의 목표의 지각 강도만을 상대적으로 보다 크게 한다. 이에 의해, 현재 이동 중인 지각 위치를 보다 강조하여 유저에게 제시할 수 있다.
또는, 출력 제어부(106)는, 지각 위치의 이동 방향의 예측에 기초하여, 복수의 촉각 자극부(200)의 출력 강도를 동적으로 변경하는 것이 가능하다. 예를 들어, 출력 제어부(106)는 지각 위치의 이동원, 또는, 이동처에 있어서의 출력 강도를 상대적으로 작게 해도 된다. 이에 의해, 지각 위치의 이동의 콘트라스트를 강조하여 유저에게 제시할 수 있다.
또는, 출력 제어부(106)는, 유저의 신체에 있어서의 소정의 영역과 지각 위치의 위치 관계에 기초하여, 복수의 촉각 자극부(200)의 출력 강도를 동적으로 변경하는 것이 가능하다. 예를 들어, 출력 제어부(106)는 유저의 신체에 있어서의 소정의 영역을 피하여 지각 위치가 이동하도록, 복수의 촉각 자극부(200)에 대한 진동의 발생을 제어해도 된다. 또한, 소정의 영역은, 예를 들어 심장 부근 등의 소정의 부위이거나, 다친 영역 등일 수 있다.
또한, 일반적으로, 인간은, 부위에 따라 촉각 자극의 지각 강도가 상이할 수 있다. 따라서, 출력 제어부(106)는, 또한, 목표의 지각 위치를 포함하는 부위에 따라서, 복수의 촉각 자극부(200)의 출력 강도를 동적으로 변경하는 것도 가능하다. 예를 들어, 목표의 지각 위치가, 감도가 높은 부위에 포함되는 경우에는, 출력 제어부(106)는 복수의 촉각 자극부(200)의 출력 강도를 상대적으로 약하게 한다. 또한, 목표의 지각 위치가, 감도가 낮은 부위에 포함되는 경우에는, 출력 제어부(106)는 복수의 촉각 자극부(200)의 출력 강도를 상대적으로 강하게 한다. 또는, 출력 제어부(106)는, 목표의 지각 위치를 포함하는 부위에 따라서, (출력 강도 대신에) 복수의 촉각 자극부(200)에 발생시키는 진동의 주파수를 변경해도 된다. 이에 의해, 지각 위치를 포함하는 부위에 의존하지 않고, 당해 지각 위치에 있어서 원하는 지각 강도를 유저에게 제시할 수 있다.
또는, 출력 제어부(106)는, 또한, 목표의 지각 위치의 이동 속도에 따라서, 복수의 촉각 자극부(200)의 출력 강도를 동적으로 변경하는 것도 가능하다. 예를 들어, 출력 제어부(106)는 복수의 촉각 자극부(200)의 출력 강도의 피크값(최댓값) 또는 출력 강도의 변화량을 동적으로 변경한다. 일례로서, 출력 제어부(106)는, 목표의 지각 위치의 이동 속도가 빠를수록, 출력 강도의 최댓값 또는 출력 강도의 변화량을 보다 작게 한다.
또한, 일반적으로, 진동의 발생에 관한 특성은, 개개의 촉각 자극부(200)에 따라 상이할 수 있다. 따라서, 예를 들어 개개의 촉각 자극부(200)의 특성을 미리 알고 있는 경우에는, 출력 제어부(106)는, 또한, 개개의 촉각 자극부(200)의 특성에 따라서, 개개의 촉각 자극부(200)의 출력 강도를 동적으로 변경해도 된다. 예를 들어, 출력 제어부(106)는 개개의 촉각 자극부(200)의 특성에 따라서, 개개의 촉각 자극부(200)의 출력 강도의 비를 변경한다.
또한, 일반적으로, 유저의 신체에 대한 촉각 자극부(200)의 접촉 압력에 따라 촉각 자극의 지각 강도는 상이할 수 있다. 따라서, 출력 제어부(106)는, 또한, 개개의 촉각 자극부(200)의 접촉 압력의 측정 결과 또는 추정 결과에 기초하여, 개개의 촉각 자극부(200)의 출력 강도(또는 출력 강도의 조정 함수의 파라미터의 값)를 동적으로 변경해도 된다. 또한, 촉각 자극부(200)의 접촉 압력은 이하의 방법에 의해 측정 또는 추정될 수 있다. 예를 들어, 촉각 자극부(200)가 압력 센서를 포함하는 경우에는, 당해 촉각 자극부(200)의 접촉 압력은 당해 압력 센서에 의해 측정될 수 있다. 또는, 촉각 자극부(200)에 있어서의 전류값의 변화의 분석에 기초하여, 당해 촉각 자극부(200)의 접촉 압력은 추정될 수 있다. 예를 들어, 인간의 신체(또는 다른 물체)에 대한 접촉 압력과, 촉각 자극부(200)에 있어서의 전류값의 관계성이 예를 들어 개발자에 의해 미리 구해질 수 있다. 이 경우, 촉각 자극부(200)에 있어서의 전류값의 측정 결과와, 당해 관계성에 기초하여, 당해 촉각 자극부(200)의 접촉 압력은 추정될 수 있다.
또는, 촉각 자극부(200)가 유저의 신체에 장착되는 경우(예를 들어 재킷(20)을 유저가 장착하는 경우 등)에서는, 촉각 자극부(200)의 자세 및/또는 유저의 자세의 측정 결과에 기초하여, 촉각 자극부(200)의 접촉 압력이 추정될 수 있다. 또한, 촉각 자극부(200)의 자세는, 예를 들어 촉각 자극부(200)에 내장되는 자이로스코프 및 가속도 센서에 기초하여 측정될 수 있다. 또한, 유저의 자세는, 유저가 휴대 또는 장착하는 다른 장치에 내장되는 자이로스코프 및 가속도 센서에 기초하여 측정될 수 있다.
{2-1-5. 통신부(120)}
통신부(120)는 다른 장치와의 사이에서 정보의 송수신을 행한다. 예를 들어, 통신부(120)는, 출력 제어부(106)의 제어에 따라서, 촉각 자극의 출력의 제어 신호를 복수의 촉각 자극부(200)의 각각(또는 재킷(20))에 송신한다. 또한, 통신부(120)는, 콘텐츠 재생부(102)의 제어에 따라서, 재생 대상의 화상의 표시의 제어 신호를 표시 장치(30)에 송신하고, 또한, 재생 대상의 음성의 출력의 제어 신호를 복수의 음성 출력부(202)의 각각(또는 재킷(20))에 송신한다.
{2-1-6. 기억부(122)}
기억부(122)는, 각종 데이터나 각종 소프트웨어를 기억한다.
<2-2. 동작>
이상, 본 실시 형태에 의한 구성에 대하여 설명하였다. 다음으로, 본 실시 형태에 의한 동작의 일례에 대하여, 도 19를 참조하여 설명한다. 도 19는 본 실시 형태에 의한 동작예를 도시한 흐름도이다.
{2-2-1. 동작의 전체의 흐름}
도 19에 도시한 바와 같이, 먼저, 서버(10)의 목표 위치ㆍ강도 결정부(104)는, 현재의 시각의 단위 시간(ΔT초) 후에 있어서의, 촉각 자극의 목표의 지각 위치 및 당해 지각 위치에 있어서의 목표의 지각 강도를, 예를 들어 현재 재생 중인 콘텐츠 등에 따라서 결정한다(S101).
계속해서, 출력 제어부(106)는, 당해 목표의 지각 위치의 근린에 위치하는 3개의 촉각 자극부(200)를 특정한다(S103).
계속해서, 출력 제어부(106)는, 후술하는 「출력 강도의 산출 처리」를 행한다(S105).
그 후, S101의 시점으로부터 ΔT초가 경과할 때까지 대기한다(S107). 그리고, ΔT초가 경과하였을 때에는(S107 : "예"), 출력 제어부(106)는 당해 3개의 촉각 자극부(200)의 각각에, S105에서 산출된 출력 강도로 촉각 자극을 출력시킨다(S109).
그 후, 서버(10)는 소정의 종료 조건이 만족시켜졌는지 여부를 판정한다(S111). 소정의 종료 조건이 만족시켜지지 않았다고 판정된 경우(S111 : "아니오"), 서버(10)는 다시 S101 이후의 처리를 행한다. 한편, 소정의 종료 조건이 만족시켜졌다고 판정된 경우(S111 : "예"), 서버(10)는 본 동작을 종료한다. 또한, 소정의 종료 조건은, 본 동작의 개시로부터 소정 시간이 경과한 것, 재생 대상의 콘텐츠가 종료된 것, 또는, 유저가 종료의 지시를 입력한 것 등일 수 있다.
{2-2-2. 출력 강도의 산출 처리}
여기서, 도 20을 참조하여, S105에 있어서의 「출력 강도의 산출 처리」의 흐름에 대하여 설명한다. 도 20에 도시한 바와 같이, 먼저, 출력 제어부(106)는, S103에서 특정된 3개의 촉각 자극부(200) 중, 처리 대상의 촉각 자극부(200)의 번호를 나타내는 변수 I에 「1」을 설정한다(S151).
그리고, I의 값이 「3」 이하인 한, 출력 제어부(106)는 이하의 S155 내지 S159의 처리를 반복한다(S153).
구체적으로는, 먼저, 출력 제어부(106)는, S101에서 결정된 목표의 지각 위치와, 당해 3개의 촉각 자극부(200)의 각각의 접촉 위치의 위치 관계, 및, S101에서 결정된 목표의 지각 강도에 기초하여, I번째의 촉각 자극부(200)의 출력 강도를 (일시적으로) 산출한다(S155).
계속해서, 출력 제어부(106)는, 당해 목표의 지각 위치와, I번째의 촉각 자극부(200)의 접촉 위치의 거리에 기초하여, S155에서 산출된 출력 강도를 변경(보정)한다(S157). 그리고, 출력 제어부(106)는 I에 「1」을 가산한다(S159).
<2-3. 효과>
이상 설명한 바와 같이, 본 실시 형태에 의한 서버(10)는, 유저의 신체에 있어서의 소정의 위치 정보, 및, 당해 위치 정보에 관련되는 촉각 자극의 목표의 지각 강도에 따라서, 당해 소정의 위치 정보에 대응하는 하나 이상의 촉각 자극부(200)의 출력 강도를 변경한다. 이 때문에, 유저의 신체에 있어서의 위치 정보에 적응한 강도의 촉각 자극을 유저에게 지각시킬 수 있다. 예를 들어, 복수의 촉각 자극부(200)의 접촉 위치의 사이에 있어서 지각 위치가 연속적으로 이동하고, 또한, 당해 이동 중에 있어서 지각 강도가 거의 일정하도록, 유저에게 촉각 자극(진동 등)을 지각시킬 수 있다.
<<3. 적용예>>
<3-1. 적용예 1>
다음으로, 상술한 본 실시 형태의 적용예에 대하여 설명한다. 먼저, 본 실시 형태의 적용예 1에 대하여, 도 21 및 도 22를 참조하여 설명한다. 도 21은, 적용예 1에 의한, 표시 장치(30)에 의해 표시되는 화상(40)의 예를 도시한 도면이다. 이 화상(40)은 유저의 시점을 기준으로 하여 생성된 화상(예를 들어 삼차원의 CG(Computer Graphics) 화상 등)이다. 또한, 도 21에 도시한 예에서는, 화상(40)은 볼형의 오브젝트(400)를 복수 포함한다. 오브젝트(400)는 본 개시에 있어서의 타깃 영역의 일례이다.
도 21에 도시한 바와 같이, 오브젝트(400a)가 화상(40)에 있어서의 좌측 전방으로 이동하는, 즉, 마치 유저의 신체의 좌측에 부딪칠 듯이 날아오는 애니메이션이 표시되도록, 화상(40a)으로부터 화상(40b)으로 화상이 연속적으로 천이한 것으로 한다. 이 경우, 도 22에 도시한 바와 같이, 먼저, 출력 제어부(106)는, 도 21의 (b)에 도시한 화상(40b)에 있어서의 오브젝트(400a)의 위치에 대응하는 유저의 신체 상의 위치(충돌 위치)를 특정한다. 또한, 도 22에 도시한 예에서는, 당해 충돌 위치는, 촉각 자극부(200e)의 접촉 위치 부근이다.
그리고, 출력 제어부(106)는, 시간의 경과에 따라서, 예를 들어 특정한 위치를 시점으로 하여 목표의 지각 위치의 집합(230)이 면적으로 확대되도록, 주위에 위치하는 복수의 촉각 자극부(200)에 대한 촉각 자극의 출력을 제어한다. 이에 의해, 당해 충돌 위치를 시점으로 하여 충격이 주위로 전달되는 듯한 감각을 유저에게 제시할 수 있다.
동시에, 콘텐츠 재생부(102)는, 도 22에 있어서 2개의 파선의 곡선으로 나타낸 바와 같이, 유저의 신체 상의 당해 충돌 위치로부터 마치 충격음이 들려오는 것처럼, 2개의 음성 출력부(202)에 충격음을 출력시킨다. 예를 들어, 당해 충돌 위치는 유저의 신체의 좌측에 위치하므로, 도 22에 도시한 바와 같이, 콘텐츠 재생부(102)는, 유저의 신체의 좌측의 음성 출력부(202b)에 당해 충격음을 큰 음량으로 출력시키고, 또한, 유저의 신체의 우측의 음성 출력부(202a)에 당해 충격음을 작은 음량으로 출력시킨다.
이 적용예 1에 따르면, 볼이 유저의 신체에 부딪치는 듯한 영상의 표시와 동시에, 당해 영상에 최적의 촉각 자극 및 음향을 유저에게 제시할 수 있다. 이와 같은 멀티모달의 표현을 유저에게 제시함으로써, 보다 임장감이 높은 연출이 가능해진다.
<3-2. 적용예 2>
다음으로, 본 실시 형태의 적용예 2에 대하여, 도 23 내지 도 25를 참조하여 설명한다. 도 23은 표시 장치(30)에 의해 표시되는 화상(40)의 다른 예를 도시한 도면이다. 도 23에 도시한 예에서는, 화상(40)은 창형의 오브젝트(410)를 포함한다. 또한, 오브젝트(410)는 본 개시에 있어서의 타깃 영역의 일례이다.
도 23에 도시한 바와 같이, 오브젝트(410)가 화상(40)에 있어서의 좌측 전방으로 이동하는, 즉, 마치 유저의 신체의 좌측에 창의 선단이 부딪칠 듯이 날아오는 애니메이션이 표시되도록, 화상(40a)으로부터 화상(40b)으로 화상이 연속적으로 천이한 것으로 한다. 이 경우, 도 24에 도시한 바와 같이, 먼저, 목표 위치ㆍ강도 결정부(104)는, 화상(40)에 있어서의 오브젝트(410)의 이동 궤적에 기초하여, 목표의 지각 위치의 이동 경로(220)를 결정한다.
예를 들어, 목표 위치ㆍ강도 결정부(104)는, 먼저, 도 23에 도시한 화상(40b)에 있어서의 오브젝트(410)의 선단의 위치에 대응하는 유저의 신체 상의 위치(충돌 위치)를 특정한다. 또한, 도 25에 도시한 예에서는, 당해 충돌 위치는, 촉각 자극부(200e)의 접촉 위치 부근이다. 그리고, 목표 위치ㆍ강도 결정부(104)는, 특정한 위치와, 화상(40)에 있어서의 오브젝트(410)의 이동 궤적에 기초하여, 목표의 지각 위치의 이동 경로(220)를 결정한다. 또한, 도 24에 도시한 예에서는, 목표의 지각 위치의 이동 경로(220)는, 유저의 좌측의 정면에 위치하는 촉각 자극부(200e) 부근의 위치와, 유저의 좌측의 배면에 위치하는 촉각 자극부(200i) 부근의 위치를 연결하는 경로이다. 또한, 목표 위치ㆍ강도 결정부(104)는, 목표의 지각 위치의 범위(230)를 결정한다.
계속해서, 출력 제어부(106)는, 목표의 지각 위치의 범위(230)가 목표의 지각 위치의 이동 경로(220)를 따라서 연속적으로 이동하는 것처럼 유저에게 지각되도록, 촉각 자극부(200e) 및 촉각 자극부(200i) 등의 복수의 촉각 자극부(200)에 대한 촉각 자극의 출력을 제어한다. 이에 의해, 당해 충돌 위치를 시점으로 하여, 유저의 좌측 전방으로부터 좌측 후방을 향하여 창이 꽂히는 듯한 감각을 유저에게 제시할 수 있다.
동시에, 콘텐츠 재생부(102)는, 도 25에 있어서 2개의 파선의 곡선으로 나타낸 바와 같이, 유저의 신체 상의 당해 충돌 위치로부터 마치 충격음이 들려오는 것처럼, 2개의 음성 출력부(202)에 충격음을 출력시킨다. 예를 들어, 당해 충돌 위치는 유저의 신체의 좌측에 위치하므로, 도 25에 도시한 바와 같이, 콘텐츠 재생부(102)는, 유저의 신체의 좌측의 음성 출력부(202b)에 당해 충격음을 큰 음량으로 출력시키고, 또한, 유저의 신체의 우측의 음성 출력부(202a)에 당해 충격음을 작은 음량으로 출력시킨다.
이 적용예 2에 따르면, 창이 유저의 신체에 꽂히는 듯한 영상의 표시와 동시에, 당해 영상에 최적의 촉각 자극 및 음향을 유저에게 제시할 수 있다. 이와 같은 멀티모달의 표현을 유저에게 제시함으로써, 보다 임장감이 높은 연출이 가능해진다.
<3-3. 적용예 3>
다음으로, 본 실시 형태의 적용예 3에 대하여, 도 26 및 도 27을 참조하여 설명한다. 도 26은 표시 장치(30)에 의해 표시되는 화상(40)의 또 다른 예를 도시한 도면이다. 도 26에 도시한 예에서는, 화상(40)은 몬스터의 오브젝트(420)를 포함한다. 또한, 오브젝트(420)는 본 개시에 있어서의 타깃 영역의 일례이다.
도 26에 도시한 바와 같이, 화상(40)에 있어서의 우측으로부터 좌측으로 오브젝트(420)가 이동하면서 유저를 공격하는 애니메이션이 표시되도록, 화상(40a)으로부터 화상(40b)으로 화상이 연속적으로 천이한 것으로 한다. 이 경우, 도 27에 도시한 바와 같이, 먼저, 출력 제어부(106)는, 도 26에 도시한 화상(40a)에 있어서의 오브젝트(420)의 위치(예를 들어 오브젝트(420)의 손의 위치 등)에 대응하는 유저의 신체 상의 위치(충돌 위치)를 특정한다. 도 27에 도시한 예에서는, 당해 충돌 위치는, 촉각 자극부(200a)의 접촉 위치 부근이다.
그리고, 목표 위치ㆍ강도 결정부(104)는, 특정한 위치와, 화상(40)에 있어서의 오브젝트(420)의 이동 궤적(공격의 궤적)에 기초하여, 목표의 지각 위치의 이동 경로(220)를 결정한다. 또한, 도 27에 도시한 예에서는, 목표의 지각 위치의 이동 경로(220)는, 유저의 우측에 위치하는 촉각 자극부(200a)의 접촉 위치 부근과, 유저의 좌측에 위치하는 촉각 자극부(200b)의 접촉 위치 부근을 연결하는 경로이다. 또한, 목표 위치ㆍ강도 결정부(104)는 목표의 지각 위치의 범위(230)를 결정한다.
계속해서, 출력 제어부(106)는, 목표의 지각 위치의 범위(230)가 목표의 이동 경로(220)를 따라서 연속적으로 이동하는 것처럼 유저에게 지각되도록, 촉각 자극부(200a) 및 촉각 자극부(200e) 등의 복수의 촉각 자극부(200)에 대한 촉각 자극의 출력을 제어한다. 이에 의해, 당해 충돌 위치를 시점으로 하여, 유저의 우측으로부터 좌측을 향하여 오브젝트(420)에 공격당하는 듯한 감각을 제시할 수 있다.
동시에, 콘텐츠 재생부(102)는, 도 27에 있어서 파선의 곡선으로 나타낸 바와 같이, 시간의 경과에 따라서, 충격음의 이동 궤적(250)을 따라서 충격음이 이동하여 들리는 것처럼, 2개의 음성 출력부(202)에 충격음을 출력시킨다. 여기서, 이동 경로(220)를 따른 지각 위치의 이동과 연동하여, 충격음은 출력될 수 있다. 예를 들어, 콘텐츠 재생부(102)는, 유저의 신체의 우측의 음성 출력부(202a)에 출력시키는 당해 충격음의 음량과 유저의 신체의 좌측의 음성 출력부(202b)에 출력시키는 당해 충격음의 음량의 비를, 목표의 지각 위치의 이동에 따라서 변화시킨다.
이 적용예 3에 따르면, 오브젝트(420)가 우측으로부터 좌측을 향하여 유저를 공격하는 듯한 영상의 표시와 동시에, 당해 영상에 최적의 촉각 자극 및 음향을 유저에게 제시할 수 있다. 이와 같은 멀티모달의 표현을 유저에게 제시함으로써, 보다 임장감이 높은 연출이 가능해진다.
<<4. 하드웨어 구성>>
다음으로, 본 실시 형태에 의한 서버(10)의 하드웨어 구성에 대하여, 도 28을 참조하여 설명한다. 도 28에 도시한 바와 같이, 서버(10)는 CPU(150), ROM(Read Only Memory)(152), RAM(154), 버스(156), 인터페이스(158), 스토리지 장치(160) 및 통신 장치(162)를 구비한다.
CPU(150)는, 연산 처리 장치 및 제어 장치로서 기능하고, 각종 프로그램에 따라서 서버(10) 내의 동작 전반을 제어한다. 또한, CPU(150)는, 서버(10)에 있어서 제어부(100)의 기능을 실현한다. 또한, CPU(150)는, 마이크로프로세서 등의 프로세서에 의해 구성된다.
ROM(152)은, CPU(150)가 사용하는 프로그램이나 연산 파라미터 등의 제어용 데이터 등을 기억한다.
RAM(154)은, 예를 들어 CPU(150)에 의해 실행되는 프로그램 등을 일시적으로 기억한다.
버스(156)는 CPU 버스 등으로 구성된다. 이 버스(156)는 CPU(150), ROM(152) 및 RAM(154)을 서로 접속한다.
인터페이스(158)는 스토리지 장치(160) 및 통신 장치(162)를 버스(156)와 접속한다.
스토리지 장치(160)는, 기억부(122)로서 기능하는, 데이터 저장용의 장치이다. 스토리지 장치(160)는, 예를 들어 기억 매체, 기억 매체에 데이터를 기록하는 기록 장치, 기억 매체로부터 데이터를 판독하는 판독 장치, 또는 기억 매체에 기록된 데이터를 삭제하는 삭제 장치 등을 포함한다.
통신 장치(162)는, 예를 들어 통신망(32) 등에 접속하기 위한 통신 디바이스 등으로 구성된 통신 인터페이스이다. 또한, 통신 장치(162)는 무선 LAN 대응 통신 장치, LTE(Long Term Evolution) 대응 통신 장치, 또는 유선에 의한 통신을 행하는 와이어 통신 장치여도 된다. 이 통신 장치(162)는 통신부(120)로서 기능한다.
<<5. 변형예>>
이상, 첨부 도면을 참조하면서 본 개시의 적합한 실시 형태에 대하여 상세하게 설명하였지만, 본 개시는 이러한 예에 한정되지 않는다. 본 개시가 속하는 기술 분야에 있어서의 통상의 지식을 갖는 자라면, 청구범위에 기재된 기술적 사상의 범주 내에서, 각종 변경예 또는 수정예에 상도할 수 있는 것은 명백하고, 이들에 대해서도, 당연히 본 개시의 기술적 범위에 속하는 것으로 이해된다.
<5-1. 변형예 1>
예를 들어, 목표의 지각 위치가, 모든 촉각 자극부(200)에 의한 촉각 자극의 제시 범위의 외부에 위치하는 경우도 발생할 수 있다. 또한, 촉각 자극부(200)의 배치 위치간의 거리가 매우 큰 경우에는, 복수의 촉각 자극부(200)의 사이의 범위에 있어서 목표의 지각 강도로 유저에게 촉각 자극을 지각시키는 것이 곤란한 경우도 발생할 수 있다.
따라서, 예를 들어 모든 촉각 자극부(200)에 의한 촉각 자극의 제시 범위 외로 목표의 지각 위치가 이동하는 경우에는, 서버(10)는 당해 제시 범위 외에 있어서 지각 위치가 이동하고 있는 듯한 감각(착각)을 유저에게 제공하도록, 재생 중인 콘텐츠를 변화시켜도 된다.
일례로서, 목표의 지각 위치가 유저의 신체의 좌우 방향으로 이동하고 있고, 또한, 당해 제시 범위 외로 이동하는 경우에는, 서버(10)는, (예를 들어 「3. 적용예」에서 설명한 바와 같이) 목표의 지각 위치의 이동 방향과 동일한 방향으로, 표시 중인 화상(또는 화상 중의 특정한 영역)을 이동시키거나, 또는, 유저의 신체의 좌우에서 출력시키는 음량의 비를 변화시킨다. 동시에, 서버(10)는 해당의 하나 이상의 촉각 자극부(200)의 출력 강도를, 목표의 지각 위치가 당해 범위의 경계에 위치하는 경우의 출력 강도와 각각 동일하게 설정하거나, 또는, 목표의 지각 위치와 당해 경계의 거리에 따라서 출력 강도를 약하게 한다.
이 변형예에 따르면, 화상이나 음성을 이용함으로써, 촉각 자극의 제시 범위 외에 있어서의 지각 위치의 (의사적인) 보간을 실현할 수 있다.
<5-2. 변형예 2>
또한, 다른 변형예로서, 서버(10)(출력 제어부(106))는, 유저의 신체에 있어서의 복수의 촉각 자극부(200)의 상하 방향(수직 방향)의 배열을 따라서, 당해 복수의 촉각 자극부(200)를 위로부터 아래, 또는, 아래로부터 위로 차례차례로 촉각 자극을 출력하도록 제어해도 된다. 이에 의해, 중력감, 상승감, 또는, 하강감이 유저에게 제시될 수 있다. 예를 들어, 마치, 움직이고 있는 엘리베이터를 타고 있는 듯한 감각을 유저가 얻는 것을 기대할 수 있다.
<5-3. 변형예 3>
또한, 다른 변형예로서, 서버(10)는 신체(예를 들어 피부 등)가 잡아당겨지는 감각을 유저에게 제시하도록, 복수의 촉각 자극부(200)에 대한 촉각 자극의 출력을 제어해도 된다.
<5-4. 변형예 4>
또한, 다른 변형예로서, 서버(10)는 하나 이상의 촉각 자극부(200)를 갖는 소정의 하우징에 대한 유저의 조작(흔드는 것이나, 돌리는 것 등)에 따라서, 당해 하나 이상의 촉각 자극부(200), 및/또는, 재킷(20)에 포함되는 복수의 촉각 자극부(200)에 대한 촉각 자극의 출력을 제어해도 된다. 이에 의해, 또한, 체성 감각 등의 다른 감각 기관도 이용한 공간적ㆍ공중적인 촉각 자극의 해상도의 향상을 실현할 수 있다.
<5-5. 변형예 5>
또한, 상기의 설명에서는, 팬텀 센세이션을 이용함으로써 지각 위치의 이동을 제시하는 예에 대하여 설명하였지만, 본 개시는 이러한 예에 한정되지 않는다. 예를 들어, 서버(10)는, 지각 위치가 복수의 촉각 자극부(200)의 사이에서 정위하는 듯한 착각을 유저에게 제시하도록, 복수의 촉각 자극부(200)에 대한 촉각 자극의 출력을 제어하는 것도 가능하다.
일례로서, 출력 제어부(106)는, 짧은 주기로, 2개의 촉각 자극부(200)의 사이에서 지각 위치가 왕복 운동하도록(특히 중간 위치 부근에 있어서 왕복 운동하도록), 당해 2개의 촉각 자극부(200)의 출력 강도를 순차적으로 변경해도 된다. 또는, 출력 제어부(106)는, 먼저, 2개의 촉각 자극부(200) 중 한쪽의 접촉 위치로부터 당해 중간 위치까지 지각 위치가 이동하도록, 당해 2개의 촉각 자극부(200)의 출력 강도를 변화시키고, 그리고, 지각 위치가 당해 중간 위치에 도달한 이후에는 당해 2개의 촉각 자극부(200)의 출력 강도를 동일값 그대로 유지(고정)해도 된다. 또는, 지각 위치가 당해 중간 위치에 도달하였을 때에, 출력 제어부(106)는 당해 2개의 촉각 자극부(200) 중 한쪽의 출력 강도를 「0」 혹은 소정의 작은 값으로 설정하거나, 또는, 해당의 촉각 자극부(200)의 출력 강도를 서서히 저하시켜도 된다. 이들 제어예에 따르면, 마치 당해 2개의 촉각 자극부(200)의 중간에 지각 위치가 정위하는 듯한 감각을 유저가 얻는 것을 기대할 수 있다.
<5-6. 변형예 6>
또한, 다른 변형예로서, 출력 강도(진폭)의 최댓값이 소정의 값 이하가 되도록, (목표의 지각 강도의 파형에 기초하여 결정되는) 촉각 자극부(200)의 출력 강도의 파형 진폭이 조정될 수 있다. 예를 들어, 설령 당해 출력 강도의 파형에 대하여 (상술한) 출력 강도의 조정 함수를 승산하였다고 해도 진폭의 최댓값이 소정의 값 이하가 되도록, 당해 출력 강도의 파형의 진폭이 조정될 수 있다. 또한, 당해 출력 강도의 파형의 진폭은 사전에 조정되어도 되고, 리얼타임으로 조정되어도 된다. 혹은, 진폭의 최댓값이 소정의 값 이하가 되도록, (상술한) 출력 강도의 조정 함수의 파라미터의 값이 조정되어도 된다.
<5-7. 변형예 7>
또한, 일반적으로, 진동의 주파수에 따라서도 촉각 자극의 지각 강도는 상이할 수 있다. 예를 들어, 인간은, 진동의 주파수가 약 200Hz인 경우에 진동을 가장 강하게 느끼고, 또한, 주파수가 200Hz보다도 높아지면 진동을 보다 약하게 느낄 수 있다. 따라서, 출력 제어부(106)는, 목표의 지각 위치 및 목표의 지각 강도에 기초하여, (진폭을 변경하는 대신에) 복수의 촉각 자극부(200)에 발생시키는 진동의 주파수를 변경해도 된다. 이에 의해, (진폭을 변경하는 경우와 마찬가지로) 목표의 지각 위치에 있어서 목표의 지각 강도의 촉각 자극을 유저에게 제시할 수 있다.
<5-8. 변형예 8>
또한, 상술한 실시 형태에서는, 촉각 자극부(200)가 촉각 자극으로서 진동을 발생하는 예를 중심으로 하여 설명하였지만, 이러한 예에 한정되지 않고, 촉각 자극부(200)는, 온도, 역각 정보, 또는, 전기 자극 등을 촉각 자극으로서 출력해도 된다. 예를 들어, 서버(10)는 유저의 신체에 대하여 이격되어 배치된 복수의 촉각 자극부(200)의 온도를 각각 조정함으로써, 당해 복수의 촉각 자극부(200)의 사이의 위치에 있어서 목표의 온도를 제시할 수 있다. 또한, 서버(10)는, 당해 복수의 촉각 자극부(200)에 출력시키는 역각 정보의 강도를 각각 조정함으로써, 당해 복수의 촉각 자극부(200)의 사이의 위치에 있어서 목표의 지각 강도를 제시할 수 있다. 또한, 서버(10)는, 당해 복수의 촉각 자극부(200)에 출력시키는 전기 자극의 강도를 각각 조정함으로써, 당해 복수의 촉각 자극부(200)의 사이의 위치에 있어서 목표의 지각 강도를 제시할 수 있다.
<5-9. 변형예 9>
또한, 상술한 실시 형태에서는, 본 개시에 있어서의 위치 정보가, 유저의 신체에 있어서의 위치 정보인 예를 중심으로 설명하였지만, 이러한 예에 한정되지 않고, 공간상의 위치 정보여도 된다. 예를 들어, 당해 위치 정보는, 실공간상의 위치 정보일 수 있다. 이 경우, 실공간상에 목표의 지각 위치(또는, 목표의 지각 위치의 영역이나 목표의 지각 위치의 경로 등)가 설정될 수 있다. 그리고, 당해 목표의 지각 위치에 대응하는 장소에, 예를 들어 재킷(20)을 장착한 유저가 이동한 것이 측정된 경우에는, 서버(10)는 복수의 촉각 자극부(200)에 진동을 발생시키거나, 당해 복수의 촉각 자극부(200)의 각각의 진동의 출력 강도를 변경해도 된다.
또한, 당해 위치 정보는, 가상 공간상의 위치 정보일 수 있다. 이 경우, 가상 공간상에 목표의 지각 위치(또는, 목표의 지각 위치의 영역이나 목표의 지각 위치의 경로 등)가 설정될 수 있다. 그리고, 당해 가상 공간상에 있어서, 유저에 대응하는 오브젝트가 당해 목표의 지각 위치로 이동한 것이 검출된 경우에는, 서버(10)는, 당해 복수의 촉각 자극부(200)에 진동을 발생시키거나, 당해 복수의 촉각 자극부(200)의 각각의 진동의 출력 강도를 변경해도 된다.
<5-10. 변형예 10>
또한, 상술한 실시 형태에서는, 본 개시에 있어서의 정보 처리 장치가 서버(10)인 예에 대하여 설명하였지만, 이러한 예에 한정되지 않는다. 예를 들어, 당해 정보 처리 장치는, PC(Personal Computer), 태블릿 단말기, 스마트폰 등의 휴대 전화, 게임기, 휴대형 음악 플레이어, 예를 들어 HMD나 손목 시계형 디바이스 등의 장착형 장치, 또는, 재킷(20)이어도 된다.
또한, 상술한 실시 형태에서는, 본 개시에 있어서의 촉각 자극부가 재킷(20)에 포함되는 예를 중심으로 하여 설명하였지만, 이러한 예에 한정되지 않고, 다른 종류의 장치에 포함되어도 된다. 예를 들어, 당해 촉각 자극부는, 손목 시계형 디바이스나 리스트형 디바이스에 포함되어도 되고, 또는, 의자에 포함되어도 된다.
<5-11. 변형예 11>
또한, 상술한 실시 형태의 동작에 있어서의 각 스텝은, 반드시 기재된 순서에 따라서 처리되지 않아도 된다. 예를 들어, 각 스텝은, 적절히 순서가 변경되어 처리되어도 된다. 또한, 각 스텝은, 시계열적으로 처리되는 대신에, 일부 병렬적으로 또는 개별적으로 처리되어도 된다. 또한, 기재된 스텝 중 일부가 생략되거나, 또는, 다른 스텝이 더 추가되어도 된다.
또한, 상술한 실시 형태에 따르면, CPU(150), ROM(152) 및 RAM(154) 등의 하드웨어를, 상술한 실시 형태에 의한 서버(10)의 각 구성과 동등한 기능을 발휘시키기 위한 컴퓨터 프로그램도 제공 가능하다. 또한, 해당 컴퓨터 프로그램이 기록된 기록 매체도 제공된다.
또한, 본 명세서에 기재된 효과는, 어디까지나 설명적 또는 예시적인 것이며 한정적이지 않다. 즉, 본 개시에 관한 기술은, 상기의 효과와 함께, 또는 상기의 효과 대신에, 본 명세서의 기재로부터 당업자에게는 명백한 다른 효과를 발휘할 수 있다.
또한, 이하와 같은 구성도 본 개시의 기술적 범위에 속한다.
(1)
적어도 2개 이상의 촉각 자극부에 대하여 촉각 자극의 출력을 제어하는 출력 제어부를 구비하고,
상기 출력 제어부는, 소정의 위치 정보 및 당해 위치 정보에 관련되는 촉각 출력에 관한 정보에 따라서, 상기 소정의 위치 정보에 대응하는 촉각 자극부의 출력을 변경하는, 정보 처리 장치.
(2)
상기 출력 제어부는, 상기 소정의 위치 정보 및 당해 위치 정보에 관련되는 촉각 출력에 관한 정보에 따라서, 상기 소정의 위치 정보에 대응하는 촉각 자극부의 출력 강도를 변경하는, 상기 (1)에 기재된 정보 처리 장치.
(3)
상기 소정의 위치 정보는, 유저의 신체에 있어서의 위치 정보인, 상기 (1) 또는 (2)에 기재된 정보 처리 장치.
(4)
상기 촉각 자극부에 의한 촉각 자극의 출력과 관련지어 표시되는 화상에 따라서, 상기 소정의 위치 정보는 변경되는, 상기 (3)에 기재된 정보 처리 장치.
(5)
상기 소정의 위치 정보 및 당해 위치 정보에 관련되는 촉각 출력에 관한 정보는, 상기 화상에 있어서의 타깃 영역의 위치에 따라서 변경되는, 상기 (4)에 기재된 정보 처리 장치.
(6)
상기 화상에 있어서의 상기 타깃 영역의 이동에 따라서, 상기 소정의 위치 정보는, 상기 타깃 영역의 이동 방향에 따른 방향으로 이동되는, 상기 (5)에 기재된 정보 처리 장치.
(7)
상기 촉각 자극부에 의한 촉각 자극의 출력과 관련지어 출력되는 소리 정보에 따라서, 상기 소정의 위치 정보는 변경되는, 상기 (3) 내지 (6) 중 어느 것에 기재된 정보 처리 장치.
(8)
상기 유저에 대하여 출력되는 소리의 종류 또는 음량에 따라서, 상기 소정의 위치 정보는 변경되는, 상기 (7)에 기재된 정보 처리 장치.
(9)
상기 소정의 위치 정보는, 상기 신체에 대하여 정해지는 목표 경로에 있어서 이동되는 위치 정보인, 상기 (3) 내지 (8) 중 어느 것에 기재된 정보 처리 장치.
(10)
상기 소정의 위치 정보는, 시간의 경과에 따라서, 상기 목표 경로 상에서 이동되는, 상기 (9)에 기재된 정보 처리 장치.
(11)
상기 적어도 2개 이상의 촉각 자극부는, 제1 촉각 자극부 및 제2 촉각 자극부를 포함하고,
상기 목표 경로는, 상기 신체에 있어서의 상기 제1 촉각 자극부의 접촉 위치와 상기 신체에 있어서의 상기 제2 촉각 자극부의 접촉 위치를 연결하는 경로인, 상기 (10)에 기재된 정보 처리 장치.
(12)
상기 목표 경로는, 상기 신체에 있어서의 제1 면 상의 제1 위치, 상기 신체의 내부, 및, 상기 제1 면과 대향하는 제2 면 상의 제2 위치를 연결하는 경로인, 상기 (9) 내지 (11) 중 어느 것에 기재된 정보 처리 장치.
(13)
상기 적어도 2개 이상의 촉각 자극부는, 제1 촉각 자극부 및 제2 촉각 자극부를 포함하고,
상기 제1 위치는, 상기 제1 면에 있어서의 상기 제1 촉각 자극부의 접촉 위치이며,
상기 제2 위치는, 상기 제2 면에 있어서의 상기 제2 촉각 자극부의 접촉 위치인, 상기 (12)에 기재된 정보 처리 장치.
(14)
상기 제1 면은, 상기 유저의 정면이고,
상기 제2 면은, 상기 유저의 배면인, 상기 (12) 또는 (13)에 기재된 정보 처리 장치.
(15)
상기 신체에 있어서의 제3 위치와, 상기 소정의 위치 정보가 나타내는 위치의 거리가 시간의 경과에 따라서 커지도록, 상기 소정의 위치 정보는 변경되는, 상기 (3) 내지 (14) 중 어느 것에 기재된 정보 처리 장치.
(16)
상기 제3 위치는, 상기 적어도 2개 이상의 촉각 자극부 중 어느 것의, 상기 신체에 있어서의 접촉 위치인, 상기 (15)에 기재된 정보 처리 장치.
(17)
상기 적어도 2개 이상의 촉각 자극부는, 제1 촉각 자극부를 포함하고,
상기 출력 제어부는, 상기 신체에 있어서의 상기 제1 촉각 자극부의 접촉 위치와, 상기 소정의 위치 정보가 나타내는 위치의 거리에 기초하여, 상기 제1 촉각 자극부의 출력을 변경하는, 상기 (3) 내지 (16) 중 어느 것에 기재된 정보 처리 장치.
(18)
상기 적어도 2개 이상의 촉각 자극부는 제2 촉각 자극부를 더 포함하고,
상기 출력 제어부는, 상기 신체에 있어서의 상기 제2 촉각 자극부의 접촉 위치와, 상기 소정의 위치 정보가 나타내는 위치의 거리에 기초하여, 상기 제2 촉각 자극부의 출력을 변경하는, 상기 (17)에 기재된 정보 처리 장치.
(19)
적어도 2개 이상의 촉각 자극부에 대하여 촉각 자극의 출력을 제어하는 것과,
소정의 위치 정보 및 당해 위치 정보에 관련되는 촉각 출력에 관한 정보에 따라서, 상기 소정의 위치 정보에 대응하는 촉각 자극부의 출력을 프로세서가 변경하는 것을 포함하는, 정보 처리 방법.
(20)
컴퓨터를,
적어도 2개 이상의 촉각 자극부에 대하여 촉각 자극의 출력을 제어하는 출력 제어부로서 기능시키기 위한 프로그램이며,
상기 출력 제어부는, 소정의 위치 정보 및 당해 위치 정보에 관련되는 촉각 출력에 관한 정보에 따라서, 상기 소정의 위치 정보에 대응하는 촉각 자극부의 출력을 변경하는, 프로그램.
10 : 서버
20 : 재킷
30 : 표시 장치
32 : 통신망
100 : 제어부
102 : 콘텐츠 재생부
104 : 목표 위치ㆍ강도 결정부
106 : 출력 제어부
120 : 통신부
122 : 기억부
200 : 촉각 자극부
202 : 음성 출력부

Claims (20)

  1. 적어도 2개 이상의 촉각 자극부에 대하여 촉각 자극의 출력을 제어하는 출력 제어부를 구비하고,
    상기 적어도 2개 이상의 촉각 자극부는, 제1 촉각 자극부 및 제2 촉각 자극부를 포함하고,
    상기 출력 제어부는,
    유저의 신체에 있어서의 상기 제1 촉각 자극부의 접촉 위치와 소정의 위치 정보가 나타내는 위치와의 거리, 상기 신체에 있어서의 상기 제2 촉각 자극부의 접촉 위치와 상기 소정의 위치 정보가 나타내는 위치와의 거리, 및 상기 제1 촉각 자극부의 접촉 위치와 상기 제2 촉각 자극부의 접촉 위치의 중간 위치와 상기 소정의 위치 정보가 나타내는 위치의 위치 관계에 기초하여, 상기 제1 촉각 자극부 및 상기 제2 촉각 자극부의 출력 강도를 변경하고,
    상기 중간 위치와 상기 소정의 위치 정보가 나타내는 위치의 거리가 작을수록 상기 제1 촉각 자극부의 출력 강도 및 상기 제2 촉각 자극부의 출력 강도의 합계값이 커지도록 상기 제1 촉각 자극부 및 상기 제2 촉각 자극부의 출력 강도를 변경하고,
    상기 소정의 위치 정보는, 시간의 경과에 따라서, 상기 제1 촉각 자극부의 접촉 위치와 상기 제2 촉각 자극부의 접촉 위치를 연결하는 경로인 목표 경로 상에서 이동되는 정보 처리 장치.
  2. 삭제
  3. 삭제
  4. 제1항에 있어서,
    상기 촉각 자극부에 의한 촉각 자극의 출력과 관련지어 표시되는 화상에 따라서, 상기 소정의 위치 정보는 변경되는 정보 처리 장치.
  5. 제4항에 있어서,
    상기 소정의 위치 정보는 상기 화상에 있어서의 타깃 영역의 위치에 따라서 변경되는 정보 처리 장치.
  6. 제5항에 있어서,
    상기 화상에 있어서의 상기 타깃 영역의 이동에 따라서, 상기 소정의 위치 정보는, 상기 타깃 영역의 이동 방향에 따른 방향으로 이동되는 정보 처리 장치.
  7. 제1항에 있어서,
    상기 촉각 자극부에 의한 촉각 자극의 출력과 관련지어 출력되는 소리 정보에 따라서, 상기 소정의 위치 정보는 변경되는 정보 처리 장치.
  8. 제7항에 있어서,
    상기 유저에 대하여 출력되는 소리의 종류 또는 음량에 따라서, 상기 소정의 위치 정보는 변경되는 정보 처리 장치.
  9. 삭제
  10. 삭제
  11. 삭제
  12. 제1항에 있어서,
    상기 목표 경로는, 상기 신체에 있어서의 제1 면 상의 제1 위치, 상기 신체의 내부, 및, 상기 제1 면과 대향하는 제2 면 상의 제2 위치를 연결하는 경로인 정보 처리 장치.
  13. 제12항에 있어서,
    상기 제1 위치는, 상기 제1 면에 있어서의 상기 제1 촉각 자극부의 접촉 위치이며,
    상기 제2 위치는, 상기 제2 면에 있어서의 상기 제2 촉각 자극부의 접촉 위치인 정보 처리 장치.
  14. 제12항에 있어서,
    상기 제1 면은, 상기 유저의 정면이고,
    상기 제2 면은, 상기 유저의 배면인 정보 처리 장치.
  15. 제1항에 있어서,
    상기 신체에 있어서의 제3 위치와, 상기 소정의 위치 정보가 나타내는 위치의 거리가 시간의 경과에 따라서 커지도록, 상기 소정의 위치 정보는 변경되는 정보 처리 장치.
  16. 제15항에 있어서,
    상기 제3 위치는, 상기 적어도 2개 이상의 촉각 자극부 중 어느 것의, 상기 신체에 있어서의 접촉 위치인 정보 처리 장치.
  17. 삭제
  18. 삭제
  19. 적어도 2개 이상의 촉각 자극부에 대하여 촉각 자극의 출력을 제어하는 것과 - 상기 적어도 2개 이상의 촉각 자극부는, 제1 촉각 자극부 및 제2 촉각 자극부를 포함함 -,
    유저의 신체에 있어서의 상기 제1 촉각 자극부의 접촉 위치와 소정의 위치 정보가 나타내는 위치와의 거리, 상기 신체에 있어서의 상기 제2 촉각 자극부의 접촉 위치와 상기 소정의 위치 정보가 나타내는 위치와의 거리, 및 상기 제1 촉각 자극부의 접촉 위치와 상기 제2 촉각 자극부의 접촉 위치의 중간 위치와 상기 소정의 위치 정보가 나타내는 위치의 위치 관계에 기초하여, 상기 제1 촉각 자극부 및 상기 제2 촉각 자극부의 출력 강도를 프로세서가 변경하는 것을 포함하고,
    상기 제1 촉각 자극부 및 상기 제2 촉각 자극부의 출력 강도를 변경하는 것은, 상기 중간 위치와 상기 소정의 위치 정보가 나타내는 위치의 거리가 작을수록 상기 제1 촉각 자극부의 출력 강도 및 상기 제2 촉각 자극부의 출력 강도의 합계값이 커지도록 상기 제1 촉각 자극부 및 상기 제2 촉각 자극부의 출력 강도를 변경하는 것을 포함하고,
    상기 소정의 위치 정보는, 시간의 경과에 따라서, 상기 제1 촉각 자극부의 접촉 위치와 상기 제2 촉각 자극부의 접촉 위치를 연결하는 경로인 목표 경로 상에서 이동되는 정보 처리 방법.
  20. 컴퓨터를,
    적어도 2개 이상의 촉각 자극부에 대하여 촉각 자극의 출력을 제어하는 출력 제어부로서 기능시키기 위한 프로그램이 기록된 컴퓨터 판독가능 기록매체이며,
    상기 적어도 2개 이상의 촉각 자극부는, 제1 촉각 자극부 및 제2 촉각 자극부를 포함하고,
    상기 출력 제어부는,
    유저의 신체에 있어서의 상기 제1 촉각 자극부의 접촉 위치와 소정의 위치 정보가 나타내는 위치와의 거리, 상기 신체에 있어서의 상기 제2 촉각 자극부의 접촉 위치와 상기 소정의 위치 정보가 나타내는 위치와의 거리, 및 상기 제1 촉각 자극부의 접촉 위치와 상기 제2 촉각 자극부의 접촉 위치의 중간 위치와 상기 소정의 위치 정보가 나타내는 위치의 위치 관계에 기초하여, 상기 제1 촉각 자극부 및 상기 제2 촉각 자극부의 출력 강도를 변경하고,
    상기 중간 위치와 상기 소정의 위치 정보가 나타내는 위치의 거리가 작을수록 상기 제1 촉각 자극부의 출력 강도 및 상기 제2 촉각 자극부의 출력 강도의 합계값이 커지도록 상기 제1 촉각 자극부 및 상기 제2 촉각 자극부의 출력 강도를 변경하고,
    상기 소정의 위치 정보는, 시간의 경과에 따라서, 상기 제1 촉각 자극부의 접촉 위치와 상기 제2 촉각 자극부의 접촉 위치를 연결하는 경로인 목표 경로 상에서 이동되는 프로그램이 기록된 컴퓨터 판독가능 기록매체.
KR1020187037422A 2016-07-07 2017-04-06 정보 처리 장치, 정보 처리 방법 및 프로그램 KR102427212B1 (ko)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2016134717 2016-07-07
JPJP-P-2016-134717 2016-07-07
PCT/JP2017/014379 WO2018008217A1 (ja) 2016-07-07 2017-04-06 情報処理装置、情報処理方法、およびプログラム

Publications (2)

Publication Number Publication Date
KR20190025844A KR20190025844A (ko) 2019-03-12
KR102427212B1 true KR102427212B1 (ko) 2022-07-29

Family

ID=60912056

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020187037422A KR102427212B1 (ko) 2016-07-07 2017-04-06 정보 처리 장치, 정보 처리 방법 및 프로그램

Country Status (6)

Country Link
US (1) US10976821B2 (ko)
EP (1) EP3483701B1 (ko)
JP (1) JP6922908B2 (ko)
KR (1) KR102427212B1 (ko)
CN (1) CN109416584B (ko)
WO (1) WO2018008217A1 (ko)

Families Citing this family (46)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2017043400A1 (ja) 2015-09-08 2017-03-16 ソニー株式会社 情報処理装置、方法およびコンピュータプログラム
US10732714B2 (en) 2017-05-08 2020-08-04 Cirrus Logic, Inc. Integrated haptic system
WO2019013056A1 (ja) * 2017-07-10 2019-01-17 ソニー株式会社 情報処理装置、情報処理方法、およびプログラム
US11228855B2 (en) 2017-07-10 2022-01-18 Sony Corporation Information processing device and information processing method
US11259121B2 (en) 2017-07-21 2022-02-22 Cirrus Logic, Inc. Surface speaker
WO2019124068A1 (ja) * 2017-12-19 2019-06-27 ソニー株式会社 情報処理装置および方法、並びにプログラム
CN111712779A (zh) * 2018-02-20 2020-09-25 索尼公司 信息处理装置、信息处理方法和程序
WO2019187527A1 (ja) * 2018-03-27 2019-10-03 ソニー株式会社 情報処理装置、情報処理方法、およびプログラム
US10832537B2 (en) 2018-04-04 2020-11-10 Cirrus Logic, Inc. Methods and apparatus for outputting a haptic signal to a haptic transducer
US11709550B2 (en) 2018-06-19 2023-07-25 Sony Corporation Information processing apparatus, method for processing information, and program
DE112019003209T5 (de) 2018-06-28 2021-04-08 Sony Corporation Codiervorrichtung, Codierverfahren, Decodiervorrichtung, Decodierverfahren und Programm
JP2021170148A (ja) * 2018-07-02 2021-10-28 ソニーグループ株式会社 情報処理装置、情報処理方法、および記録媒体
DE112019003391T5 (de) * 2018-07-03 2021-04-15 Sony Corporation Codiervorrichtung, codierverfahren, decodiervorrichtung, decodierverfahren, übertragungssystem, empfangsvorrichtung und programm
US11269415B2 (en) 2018-08-14 2022-03-08 Cirrus Logic, Inc. Haptic output systems
WO2020054415A1 (ja) * 2018-09-11 2020-03-19 ソニー株式会社 情報処理装置、情報処理方法、及び、記録媒体
GB201817495D0 (en) 2018-10-26 2018-12-12 Cirrus Logic Int Semiconductor Ltd A force sensing system and method
JP2020080122A (ja) * 2018-11-14 2020-05-28 ソニー株式会社 情報処理装置、情報処理方法、および記憶媒体
US12019804B2 (en) 2018-11-14 2024-06-25 Sony Group Corporation Information processing system, tactile presentation apparatus, tactile presentation method, and storage medium
WO2020162210A1 (ja) * 2019-02-04 2020-08-13 ソニー株式会社 情報処理装置、情報処理方法およびプログラム
US10992297B2 (en) 2019-03-29 2021-04-27 Cirrus Logic, Inc. Device comprising force sensors
US11644370B2 (en) 2019-03-29 2023-05-09 Cirrus Logic, Inc. Force sensing with an electromagnetic load
US12035445B2 (en) 2019-03-29 2024-07-09 Cirrus Logic Inc. Resonant tracking of an electromagnetic load
US10828672B2 (en) 2019-03-29 2020-11-10 Cirrus Logic, Inc. Driver circuitry
US10955955B2 (en) 2019-03-29 2021-03-23 Cirrus Logic, Inc. Controller for use in a device comprising force sensors
US20200313529A1 (en) 2019-03-29 2020-10-01 Cirrus Logic International Semiconductor Ltd. Methods and systems for estimating transducer parameters
US10726683B1 (en) 2019-03-29 2020-07-28 Cirrus Logic, Inc. Identifying mechanical impedance of an electromagnetic load using a two-tone stimulus
US11509292B2 (en) 2019-03-29 2022-11-22 Cirrus Logic, Inc. Identifying mechanical impedance of an electromagnetic load using least-mean-squares filter
US20220244784A1 (en) * 2019-05-28 2022-08-04 Sony Group Corporation Information processing device, information processing method, and program
US10976825B2 (en) 2019-06-07 2021-04-13 Cirrus Logic, Inc. Methods and apparatuses for controlling operation of a vibrational output system and/or operation of an input sensor system
CN114008569A (zh) 2019-06-21 2022-02-01 思睿逻辑国际半导体有限公司 用于在装置上配置多个虚拟按钮的方法和设备
US11408787B2 (en) 2019-10-15 2022-08-09 Cirrus Logic, Inc. Control methods for a force sensor system
US11380175B2 (en) 2019-10-24 2022-07-05 Cirrus Logic, Inc. Reproducibility of haptic waveform
US11545951B2 (en) 2019-12-06 2023-01-03 Cirrus Logic, Inc. Methods and systems for detecting and managing amplifier instability
WO2021145024A1 (ja) 2020-01-16 2021-07-22 ソニーグループ株式会社 情報処理装置、情報処理端末及びプログラム
WO2021145025A1 (ja) 2020-01-16 2021-07-22 ソニーグループ株式会社 情報処理装置、情報処理端末及びプログラム
WO2021145023A1 (ja) 2020-01-16 2021-07-22 ソニーグループ株式会社 情報処理装置及び情報処理端末
WO2021145026A1 (ja) 2020-01-17 2021-07-22 ソニーグループ株式会社 情報処理装置及び情報処理端末
US11662821B2 (en) 2020-04-16 2023-05-30 Cirrus Logic, Inc. In-situ monitoring, calibration, and testing of a haptic actuator
DE112021006311T5 (de) 2020-12-04 2023-10-12 Sony Group Corporation Informationsverarbeitungseinrichtung, informationsverarbeitungsverfahren, programm und informationsverarbeitungssystem
JPWO2022118748A1 (ko) 2020-12-04 2022-06-09
US20240295925A1 (en) 2020-12-04 2024-09-05 Sony Group Corporation Information processing device, information processing method, program, and information processing system
US11933822B2 (en) 2021-06-16 2024-03-19 Cirrus Logic Inc. Methods and systems for in-system estimation of actuator parameters
US11765499B2 (en) 2021-06-22 2023-09-19 Cirrus Logic Inc. Methods and systems for managing mixed mode electromechanical actuator drive
US11908310B2 (en) 2021-06-22 2024-02-20 Cirrus Logic Inc. Methods and systems for detecting and managing unexpected spectral content in an amplifier system
US11552649B1 (en) 2021-12-03 2023-01-10 Cirrus Logic, Inc. Analog-to-digital converter-embedded fixed-phase variable gain amplifier stages for dual monitoring paths
JP2024088928A (ja) * 2022-12-21 2024-07-03 株式会社Ｊｖｃケンウッド 生体フィードバック検出装置、生体感覚拡張装置、生体感覚拡張方法、及びプログラム

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001005601A (ja) * 1999-06-17 2001-01-12 Sony Corp 電気刺激装置及び電気刺激を用いた力触覚呈示装置並びにこれらの制御方法
JP2009070263A (ja) * 2007-09-14 2009-04-02 Japan Science & Technology Agency 貫通触感覚提示装置
JP2012187148A (ja) * 2011-03-08 2012-10-04 Sony Computer Entertainment Inc 情報処理装置および情報処理方法

Family Cites Families (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4023214B2 (ja) * 2002-05-20 2007-12-19 セイコーエプソン株式会社 触覚・力覚提示装置および触覚・力覚提示システム
US20040095311A1 (en) * 2002-11-19 2004-05-20 Motorola, Inc. Body-centric virtual interactive apparatus and method
JP4291830B2 (ja) * 2005-07-15 2009-07-08 株式会社エスシーエー 形状記憶合金の機械振動を情報伝達手段とする触覚による情報伝達装置
KR20080048837A (ko) * 2006-11-29 2008-06-03 삼성전자주식회사 촉각 피드백을 출력하는 장치 및 방법
JP5419100B2 (ja) * 2008-06-13 2014-02-19 学校法人早稲田大学 感覚呈示システム及び感覚呈示装置
US8540571B2 (en) * 2010-03-31 2013-09-24 Immersion Corporation System and method for providing haptic stimulus based on position
US20110267294A1 (en) * 2010-04-29 2011-11-03 Nokia Corporation Apparatus and method for providing tactile feedback for user
TWI492096B (zh) * 2010-10-29 2015-07-11 Au Optronics Corp 立體影像互動系統及其位置偏移補償方法
WO2013089494A1 (ko) * 2011-12-15 2013-06-20 한양대학교 산학협력단 가상 영상에 대한 촉감 제공 장치 및 방법
US9046925B2 (en) * 2012-09-11 2015-06-02 Dell Products L.P. Method for using the GPU to create haptic friction maps
US9330544B2 (en) * 2012-11-20 2016-05-03 Immersion Corporation System and method for simulated physical interactions with haptic effects
US9164587B2 (en) * 2013-11-14 2015-10-20 Immersion Corporation Haptic spatialization system
US9671826B2 (en) * 2013-11-27 2017-06-06 Immersion Corporation Method and apparatus of body-mediated digital content transfer and haptic feedback
JP2015166890A (ja) * 2014-03-03 2015-09-24 ソニー株式会社 情報処理装置、情報処理システム、情報処理方法及びプログラム
JP6341294B2 (ja) * 2014-12-05 2018-06-13 富士通株式会社 触感提供システム、及び、触感提供装置
KR102188157B1 (ko) * 2015-12-11 2020-12-07 코오롱인더스트리 주식회사 촉각자극 제공 장치 및 그 구동 방법
US10198086B2 (en) * 2016-10-27 2019-02-05 Fluidity Technologies, Inc. Dynamically balanced, multi-degrees-of-freedom hand controller

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001005601A (ja) * 1999-06-17 2001-01-12 Sony Corp 電気刺激装置及び電気刺激を用いた力触覚呈示装置並びにこれらの制御方法
JP2009070263A (ja) * 2007-09-14 2009-04-02 Japan Science & Technology Agency 貫通触感覚提示装置
JP2012187148A (ja) * 2011-03-08 2012-10-04 Sony Computer Entertainment Inc 情報処理装置および情報処理方法

Also Published As

Publication number Publication date
US20190196596A1 (en) 2019-06-27
EP3483701A1 (en) 2019-05-15
US10976821B2 (en) 2021-04-13
KR20190025844A (ko) 2019-03-12
JPWO2018008217A1 (ja) 2019-04-18
CN109416584A (zh) 2019-03-01
WO2018008217A1 (ja) 2018-01-11
EP3483701A4 (en) 2019-07-03
CN109416584B (zh) 2022-08-02
JP6922908B2 (ja) 2021-08-18
EP3483701B1 (en) 2023-11-01

Similar Documents

Publication Publication Date Title
KR102427212B1 (ko) 정보 처리 장치, 정보 처리 방법 및 프로그램
US10792569B2 (en) Motion sickness monitoring and application of supplemental sound to counteract sickness
EP3343326B1 (en) Haptic feedback using a field of view
JP7089846B2 (ja) 触覚対応ニューラルインターフェースのためのシステム及び方法
CN106023289B (zh) 图像生成系统及图像生成方法
JP6058855B1 (ja) 情報処理方法及び当該情報処理方法をコンピュータに実行させるためのプログラム
WO2017115635A1 (ja) 情報処理方法及び情報処理プログラム
CN111937045B (zh) 信息处理装置、信息处理方法和记录介质
US11360545B2 (en) Information processing device, information processing method, and program
JP6908053B2 (ja) 情報処理装置、情報処理方法、およびプログラム
US20220277425A1 (en) Information processing device, head-mounted display, and image displaying method
CN113906368A (zh) 基于生理观察修改音频
JP2018007227A (ja) 情報処理方法及び当該情報処理方法をコンピュータに実行させるためのプログラム
JP7379427B2 (ja) 配信ユーザの動きに基づいて生成されるキャラクタオブジェクトのアニメーションを含む動画をライブ配信する動画配信システム、動画配信方法及び動画配信プログラム
JP7232765B2 (ja) シミュレーション方法とシステム
JP6127792B2 (ja) 音響再生装置及び音響再生プログラム
WO2018234318A1 (en) REDUCING VIRTUAL DISEASE IN VIRTUAL REALITY APPLICATIONS

Legal Events

Date Code Title Description
E902 Notification of reason for refusal
E90F Notification of reason for final refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant