CN115999144A - 用于提供热体验的反馈装置、内容再现装置、系统和方法 - Google Patents
用于提供热体验的反馈装置、内容再现装置、系统和方法 Download PDFInfo
- Publication number
- CN115999144A CN115999144A CN202211386813.XA CN202211386813A CN115999144A CN 115999144 A CN115999144 A CN 115999144A CN 202211386813 A CN202211386813 A CN 202211386813A CN 115999144 A CN115999144 A CN 115999144A
- Authority
- CN
- China
- Prior art keywords
- feedback
- thermal
- thermal feedback
- heat
- intensity
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/016—Input arrangements with force or tactile feedback as computer generated output to the user
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/72—Signal processing specially adapted for physiological signals or for diagnostic purposes
- A61B5/7271—Specific aspects of physiological measurement analysis
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B18/00—Surgical instruments, devices or methods for transferring non-mechanical forms of energy to or from the body
- A61B18/04—Surgical instruments, devices or methods for transferring non-mechanical forms of energy to or from the body by heating
- A61B18/12—Surgical instruments, devices or methods for transferring non-mechanical forms of energy to or from the body by heating by passing a current through the tissue to be heated, e.g. high-frequency current
- A61B18/14—Probes or electrodes therefor
- A61B18/1477—Needle-like probes
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/01—Measuring temperature of body parts ; Diagnostic temperature sensing, e.g. for malignant or inflamed tissue
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/01—Measuring temperature of body parts ; Diagnostic temperature sensing, e.g. for malignant or inflamed tissue
- A61B5/015—By temperature mapping of body part
-
- F—MECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
- F25—REFRIGERATION OR COOLING; COMBINED HEATING AND REFRIGERATION SYSTEMS; HEAT PUMP SYSTEMS; MANUFACTURE OR STORAGE OF ICE; LIQUEFACTION SOLIDIFICATION OF GASES
- F25B—REFRIGERATION MACHINES, PLANTS OR SYSTEMS; COMBINED HEATING AND REFRIGERATION SYSTEMS; HEAT PUMP SYSTEMS
- F25B21/00—Machines, plants or systems, using electric or magnetic effects
- F25B21/02—Machines, plants or systems, using electric or magnetic effects using Peltier effect; using Nernst-Ettinghausen effect
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
- G05D23/00—Control of temperature
- G05D23/19—Control of temperature characterised by the use of electric means
- G05D23/1919—Control of temperature characterised by the use of electric means characterised by the type of controller
- G05D23/192—Control of temperature characterised by the use of electric means characterised by the type of controller using a modification of the thermal impedance between a source and the load
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
- G05D23/00—Control of temperature
- G05D23/19—Control of temperature characterised by the use of electric means
- G05D23/20—Control of temperature characterised by the use of electric means with sensing elements having variation of electric or magnetic properties with change of temperature
-
- G—PHYSICS
- G08—SIGNALLING
- G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
- G08B6/00—Tactile signalling systems, e.g. personal calling systems
-
- H—ELECTRICITY
- H05—ELECTRIC TECHNIQUES NOT OTHERWISE PROVIDED FOR
- H05B—ELECTRIC HEATING; ELECTRIC LIGHT SOURCES NOT OTHERWISE PROVIDED FOR; CIRCUIT ARRANGEMENTS FOR ELECTRIC LIGHT SOURCES, IN GENERAL
- H05B1/00—Details of electric heating devices
- H05B1/02—Automatic switching arrangements specially adapted to apparatus ; Control of heating devices
- H05B1/0227—Applications
-
- H—ELECTRICITY
- H10—SEMICONDUCTOR DEVICES; ELECTRIC SOLID-STATE DEVICES NOT OTHERWISE PROVIDED FOR
- H10N—ELECTRIC SOLID-STATE DEVICES NOT OTHERWISE PROVIDED FOR
- H10N10/00—Thermoelectric devices comprising a junction of dissimilar materials, i.e. devices exhibiting Seebeck or Peltier effects
- H10N10/10—Thermoelectric devices comprising a junction of dissimilar materials, i.e. devices exhibiting Seebeck or Peltier effects operating with only the Peltier or Seebeck effects
- H10N10/13—Thermoelectric devices comprising a junction of dissimilar materials, i.e. devices exhibiting Seebeck or Peltier effects operating with only the Peltier or Seebeck effects characterised by the heat-exchanging means at the junction
-
- F—MECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
- F25—REFRIGERATION OR COOLING; COMBINED HEATING AND REFRIGERATION SYSTEMS; HEAT PUMP SYSTEMS; MANUFACTURE OR STORAGE OF ICE; LIQUEFACTION SOLIDIFICATION OF GASES
- F25B—REFRIGERATION MACHINES, PLANTS OR SYSTEMS; COMBINED HEATING AND REFRIGERATION SYSTEMS; HEAT PUMP SYSTEMS
- F25B2321/00—Details of machines, plants or systems, using electric or magnetic effects
- F25B2321/02—Details of machines, plants or systems, using electric or magnetic effects using Peltier effects; using Nernst-Ettinghausen effects
- F25B2321/021—Control thereof
- F25B2321/0212—Control thereof of electric power, current or voltage
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02B—CLIMATE CHANGE MITIGATION TECHNOLOGIES RELATED TO BUILDINGS, e.g. HOUSING, HOUSE APPLIANCES OR RELATED END-USER APPLICATIONS
- Y02B30/00—Energy efficient heating, ventilation or air conditioning [HVAC]
- Y02B30/70—Efficient control or regulation technologies, e.g. for control of refrigerant flow, motor or heating
Landscapes
- Engineering & Computer Science (AREA)
- Health & Medical Sciences (AREA)
- Life Sciences & Earth Sciences (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Surgery (AREA)
- Theoretical Computer Science (AREA)
- Veterinary Medicine (AREA)
- Public Health (AREA)
- Biomedical Technology (AREA)
- Heart & Thoracic Surgery (AREA)
- Medical Informatics (AREA)
- Molecular Biology (AREA)
- General Health & Medical Sciences (AREA)
- Animal Behavior & Ethology (AREA)
- Biophysics (AREA)
- Pathology (AREA)
- Human Computer Interaction (AREA)
- Automation & Control Theory (AREA)
- Signal Processing (AREA)
- Psychiatry (AREA)
- Artificial Intelligence (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Physiology (AREA)
- Thermal Sciences (AREA)
- Mechanical Engineering (AREA)
- Plasma & Fusion (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Otolaryngology (AREA)
- User Interface Of Digital Computer (AREA)
- Thermotherapy And Cooling Therapy Devices (AREA)
- Multimedia (AREA)
Abstract
根据本发明的方面,本发明涉及反馈装置、内容再现装置、用于提供热体验的系统和用于提供热体验的方法,包括再现多媒体内容,其中,多媒体内容包括与视频内容相关的视频数据和与视频内容的特定场景相对应的热反馈相关的热反馈数据;获得热电操作的开始时间,其中,考虑到从用于热反馈的热电操作开始到用户感测到热反馈的延迟持续时间,开始时间被设置为在特定场景的显示时间之前;并且当多媒体内容的播放时间达到热电操作的开始时间时,向使用热电元件输出热反馈的反馈装置发送与热反馈相关的开始消息,以便在特定场景的显示时间将热反馈和特定场景一起提供给用户,并且当多媒体内容的播放时间达到特定场景的显示时间时,经由显示器输出特定场景。
Description
本申请是2017年10月25日提交的、申请号为201780081874.6(PCT/KR2017/011866)、发明名称为“用于提供热体验的反馈装置、内容再现装置、系统和方法”的专利申请的分案申请。
技术领域
本公开总体上涉及反馈装置和使用该反馈装置提供热反馈的方法。具体地,本公开涉及根据多媒体内容的再现输出热反馈的反馈装置、用于再现多媒体内容的内容再现装置、使用这些装置提供热反馈的系统和方法。
背景技术
最近,随着诸如虚拟现实(VR)或增强现实(AR)等技术的发展,越来越需要提供与各种人类感官相关的用户体验(UX),以便增强用户对内容的沉浸感。特别地,在2016年的消费电子展(CES)上,引入虚拟现实技术,作为一种有前途的未来技术。针对这一趋势,正在积极开展研究,以将目前主要局限于视觉和听觉的使用体验提高为对各种人类感官(例如,嗅觉和触觉)的用户体验。
期望通过珀耳帖效应利用电能进行发热或吸热的热电元件(TE)用于向用户提供热反馈。然而,热电元件的应用受到限制,因为传统的热电元件使用平坦的衬底难以与用户的身体部位紧密接触。
然而,近年来,柔性热电元件(FTE)的开发已经达到成功阶段,并且期望通过克服传统热电元件的问题,热反馈能够有效地传送给用户。
发明内容
技术目标
本发明的目的是提供一种热体验提供系统和一种热体验提供方法,其通过在向用户再现多媒体内容时输出热反馈来提供热体验。
特别地,本发明旨在通过将多媒体内容的视听输出与热反馈互锁来改善用户的内容沉浸感。
应当理解,本发明不限于上述技术目标,并且通过描述和附图,对于本领域技术人员,未描述的其他目标将是显而易见的。
技术解决方案
本发明的一个方面是提供一种用于提供热体验的方法,包括:再现多媒体内容,其中,所述多媒体内容包括与视频内容相关的视频数据和与视频内容的特定场景相对应的热反馈相关的热反馈数据;获得热电操作的开始时间,其中,考虑到从用于热反馈的热电操作开始到用户感测到热反馈的延迟持续时间,所述开始时间被设置为在特定场景的显示时间之前;当多媒体内容的播放时间达到热电操作的开始时间时,向使用热电元件输出热反馈的反馈装置发送与热反馈相关的开始消息,以便在特定场景的显示时间将热反馈和特定场景一起提供给用户;并且当多媒体内容的播放时间达到特定场景的显示时间时,经由显示器输出特定场景。
本发明的另一方面是提供一种内容再现装置,包括:存储器,存储器存储数据;通信模块,通信模块与外部装置进行通信;以及控制器,控制器被配置为从存储器获得多媒体内容并且再现多媒体内容,其中,多媒体内容包括与视频内容相关的视频数据和与视频内容的特定场景相对应的热反馈相关的反馈数据,其中,所述控制器获得热电操作的开始时间,其中,考虑到从用于热反馈的热电操作开始到用户感测到热反馈的延迟持续时间,所述开始时间被设置为在特定场景的显示时间之前,当多媒体内容的播放时间达到热电操作的开始时间时,经由通信模块向使用热电元件来输出热反馈的反馈装置发送与热反馈相关的开始消息,以便在特定场景的显示时间将特定场景和热反馈一起提供给用户;并且当多媒体内容的播放时间达到特定场景的显示时间时,经由显示器输出特定场景。
本发明的另一方面是提供一种用于提供热体验的系统,包括:内容再现装置,包括:存储器,存储器存储数据;第一通信模块,第一通信模块与外部装置进行通信;以及应用控制器,应用控制器被配置为从存储器获得多媒体内容并且再现多媒体内容;其中,多媒体内容包括与视频内容相关的视频数据和与视频内容的特定场景相对应的热反馈相关的反馈数据;以及反馈装置,包括:第二通信模块,第二通信模块与外部装置进行通信;热电元件,热电元件执行热电操作,用于输出热反馈;反馈控制器,反馈控制器向热电元件供电,用于热电操作;以及接触表面,接触表面被配置为与用户身体接触,并且传送由于热电操作而生成的热量,其中,所述控制器获得热电操作的开始时间,其中,考虑到从热电操作开始直到接触表面达到用户感测的温度的延迟持续时间,所述开始时间被设置为在特定场景的显示时间之前;当多媒体内容的播放时间达到开始时间时,经由第一通信模块向反馈装置发送与热反馈相关的开始消息;并且当多媒体内容的播放时间达到显示时间时,经由显示器输出特定场景,并且其中,当所述反馈控制器经由第二通信模块接收到开始消息时,所述反馈控制器向热电元件供电,以便在显示时间将特定场景和热反馈一起提供给用户。
本发明的另一方面是提供一种用于提供与多媒体内容相关的热体验的反馈装置,其中,所述多媒体内容包括与视频内容相关的视频数据和与视频内容的特定场景相对应的热反馈相关的反馈数据,所述装置包括:热电元件,热电元件执行热电操作,用于输出热反馈;反馈控制器,反馈控制器向热电元件供电,用于热电操作,其中,所述反馈控制器在开始时间向热电元件供电,考虑到从用于热反馈的热电操作开始到用户感测到热反馈的延迟持续时间,所述开始时间被设置为在特定场景的显示时间之前,以便在显示时间将热反馈和特定场景一起提供给用户;以及接触表面,接触表面被配置为与用户身体接触,其中,由于热电操作而生成的热量通过接触表面传送给用户。
应当理解,本发明不限于上述技术解决方案,并且通过描述和附图,对于本领域技术人员,未描述的其他解决方案将是显而易见的。
有利效果
根据本发明,热体验可以作为与多媒体内容相关的一个用户体验提供给用户。
根据本发明,当再现多媒体内容时,可以通过将热体验与视听体验互锁来,或者通过提供给与多媒体内容相关的用户的情况,输出热反馈,作为适当形式,来提高对多媒体内容的沉浸。
应当理解,本发明不限于上述有利效果,并且通过描述和附图,对于本领域技术人员,未描述的其他效果将是显而易见的。
附图说明
图1是根据本发明的实施例的热体验提供系统的配置的框图;
图2是根据本发明的实施例的内容再现装置的配置的框图;
图3是根据本发明的实施例的视听装置的配置的框图;
图4是根据本发明的实施例的反馈装置的框图;
图5是根据本发明的实施例的热体验提供系统的第一实施方式的示意图;
图6是根据本发明的实施例的热体验提供系统的第一实施方式的示意图
图7和8是示出根据本发明的实施例的热体验提供系统的第一实施方式的HMD的示例性形式的示意图;
图9是与根据本发明的实施例的热体验提供系统的第一实施方式的HMD的配置相关的框图;
图10和11是示出根据本发明的实施例的热体验提供系统的第一实施方式的输入装置的示例性形式的示意图;
图12是与根据本发明的实施例的热体验提供系统的第一实施方式的输入装置的配置相关的框图;
图13-17是示出根据本发明的实施例的热体验提供系统的第一实施方式的输入装置的另一示例形式的示意图;
图18至22是示出根据本发明的实施例的热体验提供系统的第一实施方式中的穿戴式装置的示例性形式的示意图;
图23是根据本发明的实施例的热体验提供系统的第二实施方式的示意图;
图24是根据本发明的实施例的热体验提供系统的第二实施方式的框图;
图25是与根据本申请的热体验提供系统的第二实施方式的智能装置的配置相关的框图;
图26是根据本发明的实施例的热体验提供系统的第三实施方式的示意图;
图27是根据本发明的实施例的热体验提供系统的第三实施方式的示意图;
图28是根据本发明的实施例的热体验提供系统的第四实施方式的示意图;
图29是根据本发明的实施例的热体验提供系统的第五实施方式的示意图;
图30是根据本发明的实施例的热体验提供系统的第六实施例的示意图;
图31是根据本发明的实施例的热输出模块的配置的框图;
图32是根据本发明的实施例的热输出模块的实施例的示图;
图33是根据本发明的实施例的热输出模块的另一实施例的示图;
图34是根据本发明的实施例的热输出模块的另一实施例的示图;
图35是根据本申请的实施例的热输出模块的另一实施例的另一示图;
图36是示出根据本发明的实施例的用于提供热反馈的发热操作的示图;
图37是根据本发明的实施例的热反馈期间与温度相关的曲线图;
图38是示出根据本发明的实施例的用于提供冷反馈的吸热操作的示图;
图39是根据本发明的一个实施例的在冷反馈期间与温度相关的曲线图;
图40是示出根据本发明的实施例的基于电压幅度调整的热/冷反馈的强度程度的曲线图;
图41是根据本发明的实施例的与具有相同温度变化量的热/冷反馈相关的曲线图;
图42是与根据本发明的实施例的热格栅操作相关的示图;
图43是根据本发明的实施例的用于以电压控制方式提供中性热格栅反馈的电压表;
图44是根据本发明的实施例的热体验提供方法的基本流程图;
图45是根据本发明的实施例的热体验提供方法的第一实施方式的流程图;
图46是示出根据本发明的实施例的在热体验提供方法的第一实施方式中使用的热反馈数据的示例的示图;
图47是根据本发明的实施例的热体验提供方法的第一实施方式的热反馈输出操作的示图;
图48是根据本发明的实施例的热体验提供方法的第二实施方式的流程图;
图49是根据本发明的实施例的用于提供热体验的方法的第三实施方式的流程图;
图50是根据本发明的实施例的在热体验提供方法的第三实施方式中使用的技能热反馈表的示图;
图51是根据本发明的实施例的热体验提供方法的第四实施方式的流程图;
图52是根据本发明的实施例的与热体验提供方法的第四实施方式中提供的文本呈现事件相关的示图;
图53是根据本发明的实施例的热体验提供方法的第五实施方式的流程图;
图54是根据本发明的实施例的热体验提供方法的第六实施方式的流程图;
图55是根据本发明的实施例的用于提供热体验的方法的第七实施方式的流程图;
图56是根据本发明的实施例的用于提供热体验的方法的第七实施方式的提供定时动作的游戏的示图;
图57是根据本发明的实施例的热体验提供方法的第八实施方式的流程图;
图58是示出根据本发明的实施例的热体验提供方法的第八实施方式中的游戏中的虚拟空间的示图;
图59是根据本发明的实施例的热体验提供方法的第九实施方式的流程图;
图60是根据本发明的实施例的热体验提供方法的第十实施方式的流程图;
图61是根据本发明的实施例的热体验提供方法的第十一实施方式的流程图;
图62是根据本发明的实施例的热体验提供方法的第十四实施方式的流程图;
图63是根据本发明的实施例的用于提供热体验的方法的第十五实施方式的流程图;
图64是根据本发明的实施例的热体验提供方法的第十六实施方式的流程图;
图65是根据本发明的实施例的用于提供热体验的方法的第十七实施方式的流程图;
图66是示出根据本发明的实施例的热体验提供方法的第十七实施方式的第一人称游戏中根据热事件发生点的热反馈目标对象的示图;
图67是根据本发明的实施例的电子装置的框图;
图68是根据本发明的实施例的用于生成多媒体内容的方法的第一实施方式的流程图。
具体实施方式
本发明的一个方面是提供一种用于提供热体验的方法,包括:再现多媒体内容,其中,所述多媒体内容包括与视频内容相关的视频数据和与视频内容的特定场景相对应的热反馈相关的热反馈数据;获得热电操作的开始时间,其中,考虑到从用于热反馈的热电操作开始到用户感测到热反馈的延迟持续时间,所述开始时间被设置为在特定场景的显示时间之前;当多媒体内容的播放时间达到热电操作的开始时间时,向使用热电元件输出热反馈的反馈装置发送与热反馈相关的开始消息,以便在特定场景的显示时间将热反馈和特定场景一起提供给用户;并且当多媒体内容的播放时间达到特定场景的显示时间时,经由显示器输出特定场景。
应当理解,前面的一般描述和下面的详细描述都是示例性和解释性的,并不旨在将本公开限制于所公开的特定形式,并且应当被解释为包括不脱离本公开的精神的修改或变化。
应该在整个说明书中使用该术语的上下文中,基于该术语的含义来解释本说明书中使用的术语。
所附的附图旨在说明本公开,并且附图中所示的形状可能夸大,以有助于理解本公开,因此本公开不限于附图。
在以下描述中,可以省略普通技术人员已知的与本公开相关的配置或功能的详细描述。
本发明的一个方面是提供一种用于提供热体验的方法,该方法可以包括:再现多媒体内容,其中,所述多媒体内容包括与视频内容相关的视频数据和与视频内容的特定场景相对应的热反馈相关的热反馈数据;获得热电操作的开始时间,其中,考虑到从用于热反馈的热电操作开始到用户感测到热反馈的延迟持续时间,所述开始时间被设置为在特定场景的显示时间之前;当多媒体内容的播放时间达到热电操作的开始时间时,向使用热电元件输出热反馈的反馈装置发送与热反馈相关的开始消息,以便在特定场景的显示时间将热反馈和特定场景一起提供给用户;并且当多媒体内容的播放时间达到特定场景的显示时间时,经由显示器输出特定场景。
在本文中,所述开始时间可以比所述显示时间早延迟持续时间。
在本文中,所述反馈数据可以包括指示与热反馈相对应的特定场景的识别信息,并且其中,所述获得可以包括,从反馈数据中获得识别信息,基于识别信息从视频数据中获得显示时间,并且基于显示时间和延迟持续时间计算开始时间。
在本文中,在所述计算中,通过从显示时间中减去延迟持续时间来计算开始时间。
在本文中,所述反馈数据可以包括热反馈的输出时间,所述输出时间被设置为与显示时间相同,并且其中,所述获得可以包括从反馈数据获得输出时间,并且基于输出时间和延迟持续时间来计算开始时间。
在本文中,在所述计算中,从所述特定场景的输出时间中计算开始时间,作为延迟持续时间之前的时间点。
在本文中,所述热电操作可以包括当向热电元件供电时由热电元件执行的发热操作或吸热操作中的至少一个。
在本文中,所述反馈数据可以包括反馈类型信息,所述反馈类型信息包括热反馈和冷反馈,并且其中,所述方法还可以包括基于反馈数据来确定热反馈的类型,并且基于热反馈的类型来获得延迟持续时间。
在本文中,所述反馈数据可以包括反馈强度信息,并且所述方法还可以包括基于反馈数据来确定热反馈的强度,并且考虑热反馈的强度,获得延迟持续时间。
在本文中,所述热反馈的强度可以包括第一强度和比第一强度更强的第二强度,并且与第一强度相关的第一延迟持续时间可以小于与第二强度相关的第二延迟持续时间。
在本文中,所述热反馈的强度可以包括第一强度和比第一强度更强的第二强度,并且与第一强度相关的第一延迟持续时间可以大于与第二强度相关的第二延迟持续时间。
在本文中,所述方法还可以包括从反馈装置获得识别反馈装置的装置信息;并且基于装置信息获得延迟持续时间。
在本文中,所述方法还可以包括从反馈装置接收延迟持续时间。
在本文中,可以在单个文件中提供视频数据和反馈数据。
在本文中,可以在不同的文件中提供视频数据和反馈数据。
在本文中,在所述输出中,可以通过向具有显示器的外部装置传送视频信号,来通过显示器输出特定场景。
本发明的另一方面是提供一种内容再现装置,该装置可以包括:存储器,存储器存储数据;通信模块,通信模块与外部装置进行通信;以及控制器,控制器被配置为从存储器获得多媒体内容并且再现多媒体内容,其中,多媒体内容包括与视频内容相关的视频数据和与视频内容的特定场景相对应的热反馈相关的反馈数据,其中,所述控制器获得热电操作的开始时间,其中,考虑到从用于热反馈的热电操作开始到用户感测到热反馈的延迟持续时间,所述开始时间被设置为在特定场景的显示时间之前,当多媒体内容的播放时间达到热电操作的开始时间时,经由通信模块向使用热电元件来输出热反馈的反馈装置发送与热反馈相关的开始消息,以便在特定场景的显示时间将特定场景和热反馈一起提供给用户;并且当多媒体内容的播放时间达到特定场景的显示时间时,经由显示器输出特定场景。
在本文中,所述开始时间可以比所述显示时间早延迟持续时间。
在本文中,所述反馈数据可以包括指示与热反馈相对应的特定场景的识别信息,并且所述控制器可以从反馈数据中获得识别信息,基于识别信息从视频数据中获得显示时间,并且基于显示时间和延迟持续时间计算开始时间。
在本文中,所述控制器可以通过从显示时间中减去延迟持续时间来计算开始时间。
在本文中,所述反馈数据可以包括热反馈的输出时间,所述输出时间被设置为与显示时间相同,并且所述控制器可以从反馈数据获得输出时间,并且基于输出时间和延迟持续时间计算开始时间。
在本文中,所述控制器可以通过从输出时间中减去延迟持续时间来计算开始时间。
在本文中,所述热电操作可以包括当向热电元件供电时由热电元件执行的发热操作或吸热操作中的至少一个。
在本文中,所述反馈数据可以包括反馈类型信息,所述反馈类型信息包括热反馈和冷反馈,并且所述控制器可以基于反馈数据来确定热反馈的类型,并且基于热反馈的类型来获得延迟持续时间。
在本文中,所述反馈数据可以包括反馈强度信息,并且所述控制器可以基于反馈数据来确定热反馈的强度,并且通过考虑热反馈的强度,获得延迟持续时间。
在本文中,所述热反馈的强度可以包括第一强度和比第一强度更强的第二强度,并且与第一强度相关的第一延迟持续时间可以小于与第二强度相关的第二延迟持续时间。
在本文中,所述热反馈的强度可以包括第一强度和比第一强度更强的第二强度,并且与第一强度相关的第一延迟持续时间可以大于与第二强度相关的第二延迟持续时间。
在本文中,所述控制器可以经由通信模块从反馈装置接收识别反馈装置的装置信息,并且基于装置信息获得延迟持续时间。
在本文中,所述控制器可以经由通信模块从反馈装置接收延迟持续时间。
在本文中,所述视频数据和所述反馈数据可以作为单个文件被存储在存储器中。
在本文中,所述视频数据和所述反馈数据可以以单独的文件被存储在存储器中。
在本文中,所述控制器可以经由通信模块接收多媒体内容,并且将接收的多媒体内容存储在存储器中。
在本文中,所述控制器可以经由通信模块向具有显示器的外部装置传送视频信号,使得显示器显示特定场景。
本发明的另一方面是提供一种用于提供热体验的系统,该系统可以包括:内容再现装置,包括:存储器,存储器存储数据;第一通信模块,第一通信模块与外部装置进行通信;以及应用控制器,应用控制器被配置为从存储器获得多媒体内容并且再现多媒体内容;其中,多媒体内容包括与视频内容相关的视频数据和与视频内容的特定场景相对应的热反馈相关的反馈数据;以及反馈装置,包括:第二通信模块,第二通信模块与外部装置进行通信;热电元件,热电元件执行热电操作,用于输出热反馈;反馈控制器,反馈控制器向热电元件供电,用于热电操作;以及接触表面,接触表面被配置为与用户身体接触,并且传送由于热电操作而生成的热量,其中,所述控制器获得热电操作的开始时间,其中,考虑到从热电操作开始直到接触表面达到用户感测的温度的延迟持续时间,所述开始时间被设置为在特定场景的显示时间之前;当多媒体内容的播放时间达到开始时间时,经由第一通信模块向反馈装置发送与热反馈相关的开始消息;并且当多媒体内容的播放时间达到显示时间时,经由显示器输出特定场景,并且其中,当所述反馈控制器经由第二通信模块接收到开始消息时,所述反馈控制器向热电元件供电,以便在显示时间将特定场景和热反馈一起提供给用户。
本发明的另一方面是提供一种用于在多媒体内容再现中向用户提供热体验的反馈装置,其中,所述多媒体内容包括与视频内容相关的视频数据和与视频内容的特定场景相对应的热反馈相关的反馈数据,所述装置可以包括:热电元件,热电元件执行热电操作,用于输出热反馈;反馈控制器,反馈控制器向热电元件供电,用于热电操作;以及接触表面,接触表面被配置为与用户身体接触,并且传送由于热电操作而生成的热量,其中,当多媒体内容的播放时间达到开始时间时,所述反馈控制器向热电元件供电,其中,考虑到从热电操作开始直到接触表面达到用户感测的温度的延迟持续时间,所述开始时间被设置为在特定场景的显示时间之前,以便在显示时间将特定场景和热反馈一起提供给用户。
本发明的另一方面是提供一种用于生成提供热体验的多媒体内容的方法,其中,通过使用反馈装置来实现热体验,并且其中,反馈装置经由在视频再现期间与用户身体接触的接触表面来提供由于热电元件的热电操作而生成的热反馈,包括:从视频的播放时段获得特定场景的显示时间,其中,特定场景是对应于热反馈的场景;获得热电操作的开始时间,其中,考虑到从用于热反馈的热电操作开始到用户感测到热反馈的延迟持续时间,所述开始时间被设置为在显示时间之前,以便在显示时间一起向用户提供热反馈和特定场景;并且生成与热反馈相关的反馈数据,该数据包括热电操作的开始时间。
在本文中,开始时间可以比显示时间早延迟持续时间。
在本文中,在获得开始时间的步骤中,可以通过从显示时间中减去延迟持续时间来计算开始时间。
在本文中,热电操作可以包括发热操作和吸热操作中的至少一个。
在本文中,该方法可以进一步包括:获得关于热反馈类型的信息,该信息包括热反馈和冷反馈;并且考虑热反馈的类型,获得延迟持续时间。
在本文中,该方法可以进一步包括:获得关于热反馈强度的信息;并且考虑热反馈的强度获得延迟持续时间。
在本文中,热反馈的强度可以包括第一强度和比第一强度更强的第二强度。作为与第一强度相关的延迟持续时间的第一持续时间可以小于作为与第二强度相关的延迟持续时间的第二持续时间。
在本文中,热反馈的强度可以包括第一强度和比第一强度更强的第二强度。作为与第一强度相关的延迟持续时间的第一持续时间可以大于作为与第二强度相关的延迟持续时间的第二持续时间。
在本文中,该方法可以进一步包括:获得关于反馈装置的识别信息;并且考虑识别信息,获得延迟持续时间。
在本文中,该方法可以进一步包括:生成单个文件形式的多媒体内容,包括反馈数据和与视频相关的视频数据。
在本文中,该方法可以进一步包括:生成多文件形式的多媒体内容,多文件的第一文件包括反馈数据,多文件的第二文件包括与视频相关的视频数据。第一文件和第二文件可以彼此链接。
本发明的另一方面是提供一种用于生成提供热体验的多媒体内容的电子装置,其中,通过使用反馈装置来实现热体验,并且其中,反馈装置经由在视频再现期间与用户身体接触的接触表面来提供由于热电元件的热电操作而生成的热反馈,包括:存储器,其存储数据;以及控制器,其被配置为:从视频的播放时段获得特定场景的显示时间,其中,特定场景是对应于热反馈的场景;获得热电操作的开始时间,其中,考虑到从用于热反馈的热电操作开始到用户感测到热反馈的延迟持续时间,所述开始时间被设置为在显示时间之前,以便在显示时间一起向用户提供热反馈和特定场景;并且生成与热反馈相关的反馈数据,该数据包括热电操作的开始时间。
在本文中,开始时间可以比显示时间早延迟持续时间。
在本文中,控制器可以通过从显示时间中减去延迟持续时间来计算开始时间。
在本文中,热电操作可以包括发热操作和吸热操作中的至少一个。
在本文中,该装置可以进一步包括:输入模块,其接收用户输入,并且控制器可以经由输入模块接收包括关于热反馈和冷反馈的热反馈类型的信息的用户输入,并且考虑热反馈的类型来确定延迟持续时间。
在本文中,该装置可以进一步包括:输入模块,其接收用户输入,并且控制器可以经由输入模块接收包括关于热反馈强度信息的用户输入,该热反馈包括热反馈和冷反馈,并且考虑热反馈的强度来确定延迟持续时间。
在本文中,存储器可以存储强度和延迟持续时间的匹配表,并且控制器可以使用匹配表获得对应于强度的延迟持续时间。匹配表可以包括第一强度、比第一强度更强的第二强度、与第一强度相关的第一持续时间以及与大于第一持续时间的第二强度相关的第二持续时间。
在本文中,存储器可以存储强度和延迟持续时间的匹配表,并且控制器可以使用匹配表获得对应于强度的延迟持续时间。匹配表可以包括第一强度、比第一强度更强的第二强度、与第一强度相关的第一持续时间以及与小于第一持续时间的第二强度相关的第二持续时间。
在本文中,控制器可以获得关于反馈装置的识别信息,并且考虑到识别信息,获得延迟持续时间。
在本文中,控制器可以以包括反馈数据和与视频相关的视频数据的单个文件的形式生成多媒体内容。
在本文中,控制器可以生成多文件形式的多媒体内容,多文件的第一文件包括反馈数据,多文件的第二文件包括与视频相关的视频数据。第一文件和第二文件可以彼此链接。
本发明的另一方面是提供一种用于提供与电子游戏相关的热体验的方法,该方法由执行电子游戏并与使用热电元件输出热反馈的反馈装置协作的内容再现装置执行,该方法包括:执行游戏,该游戏包括玩家和敌人角色,该敌人角色通过执行具有元素属性的攻击动作来攻击玩家,其中,元素属性包括火元件、冷元件和电元件;当在游戏中发生反映玩家被攻击动作击中的击中事件时,基于攻击动作的元素属性确定热反馈的类型,其中,当与击中事件相关的攻击动作的元素属性是火元件时,热反馈的类型被确定为热反馈,当与击中事件相关的攻击动作的元素属性是冷元件时,热反馈的类型被确定为冷反馈,并且当与击中事件相关的攻击动作的元素属性是电元件时,热反馈的类型被确定为热格栅反馈;并且控制反馈装置输出与击中事件相关的热反馈并且显示击中图形,使得当热反馈的类型是热反馈时,热电元件执行发热操作,当热反馈的类型是冷反馈时,执行吸热操作,并且当热反馈的类型是热格栅反馈时,执行热格栅操作,在热格栅操作中,发热操作和吸热操作组合。
在本文中,该方法还包括:基于攻击动作的攻击能力、由于击中事件导致的玩家的损害量、玩家的损害量与总健康点的比率以及玩家的剩余健康点中的至少一个来确定热反馈的强度,并且该控制可以包括控制反馈装置输出具有确定的强度的热反馈。
在本文中,当通过使用游戏中的特定技能来执行攻击动作时,可以基于分配给特定技能的元素属性来确定攻击动作的元素属性。
在本文中,该方法可以进一步包括:基于特定技能的水平、特定技能的损害量和特定技能的等级中的至少一个来确定热反馈的强度,其中,该等级反映了特定技能在具有特定技能和其元素属性与特定技能相同的其他技能的技能树中的位置,并且该控制可以包括控制反馈装置输出具有确定的强度的热反馈。
在本文中,当通过使用近战武器执行攻击动作时,可以基于分配给近战武器的元素属性来确定攻击动作的元素属性。
在本文中,该方法可以进一步包括:基于近战武器的等级和近战武器的攻击能力中的至少一个来确定热反馈的强度,并且该控制可以包括控制反馈装置输出具有确定的强度的热反馈。
在本文中,当通过使用远程武器执行攻击动作时,可以基于分配给远程武器的元素属性或分配给远程武器的射弹的元素属性来确定攻击动作的元素属性。
在本文中,当射弹具有元素属性时,攻击动作的元素属性可以由分配给射弹的元素属性来确定,或者当射弹不具有元素属性时,攻击动作的元素属性可以由分配给远程武器的元素属性来确定。
在本文中,该方法可以进一步包括:基于远程武器的等级、远程武器的攻击能力、射弹的等级和射弹的攻击能力中的至少一个来确定热反馈的强度,并且该控制可以包括控制反馈装置输出具有确定的强度的热反馈。
在本文中,该方法可以进一步包括:向玩家引起与击中事件相关的去毛刺效果,并且该控制可以包括控制反馈装置在去毛刺效果的去毛刺持续时间内输出热反馈。
在本文中,该控制可以包括控制反馈装置,随着去毛刺持续时间的过去而降低热反馈的强度。
在本文中,电子游戏可以包括二维类型、虚拟现实类型和增强现实类型。
本发明的另一方面是提供一种与使用热电元件输出热反馈的反馈装置协作的内容再现装置,包括:存储器,其存储数据;通信模块,其与外部装置通信;以及控制器,其被配置为:执行电子游戏,包括玩家和敌人角色,该敌人角色通过执行具有元素属性的攻击动作来攻击玩家,其中,元素属性包括火元件、冷元件和电元件;当在游戏中发生反映玩家被攻击动作击中的击中事件时,基于攻击动作的元素属性确定热反馈的类型;并且经由通信模块,控制反馈装置输出与击中事件相关的热反馈,并且显示击中图形,其中,当与击中事件相关的攻击动作的元素属性是火元件时,控制器将热反馈的类型确定为热反馈,当与击中事件相关的攻击动作的元素属性是冷元件时,将热反馈的类型确定为冷反馈,并且当与击中事件相关的攻击动作的元素属性是电元件时,将热反馈的类型确定为热格栅反馈,并且其中,控制器控制热电元件,以在热反馈的类型是热反馈时,执行发热操作,在热反馈的类型是冷反馈时,执行吸热操作,并且在热反馈的类型是热格栅反馈时,执行热格栅操作,在热格栅操作中,发热操作和吸热操作组合。
在本文中,控制器可以通过从安装游戏的存储器加载游戏来执行游戏。
在本文中,控制器可以通过经由通信从存储游戏的游戏服务器加载游戏来执行游戏。
在本文中,该装置可以进一步包括:记录介质驱动器,其读取记录介质;并且控制器可以通过经由记录介质驱动器从存储游戏的记录介质加载游戏来执行游戏。
在本文中,该装置可以进一步包括:显示器,其显示图像;并且控制器可以经由显示器显示包括击中图形的游戏图形。
在本文中,控制器可以控制外部显示器显示包括击中图形的游戏图形。
在本文中,控制器可以基于攻击动作的攻击能力、由于击中事件导致的玩家的损害量、玩家的损害量与总健康点的比率以及玩家的剩余健康点中的至少一个来确定热反馈的强度,并且控制反馈装置输出具有确定的强度的热反馈。
在本文中,当通过使用游戏中的特定技能来执行攻击动作时,控制器可以基于分配给特定技能的元素属性来确定攻击动作的元素属性。
在本文中,控制器可以基于特定技能的水平、特定技能的损害量和特定技能的等级中的至少一个来确定热反馈的强度,其中,该等级反映了特定技能在具有特定技能和其元素属性与特定技能相同的其他技能的技能树中的位置,并且控制反馈装置输出具有确定的强度的热反馈。
在本文中,控制器可以向玩家引起与击中事件相关的去毛刺效果,并且控制反馈装置在去毛刺效果的去毛刺持续时间内输出热反馈。
在本文中,控制器可以经由通信模块控制反馈装置,以随着去毛刺持续时间的过去而降低热反馈的强度。
在本文中,电子游戏可以包括二维类型、虚拟现实类型和增强现实类型。
本发明的另一方面是提供一种用于提供热体验的方法,由反馈装置执行该方法,其中,反馈装置包括:热电元件,其执行热电操作,热电操作包括发热操作、吸热操作和热格栅操作,在热格栅操作中,发热操作和吸热操作组合;以及接触表面,其被配置为与用户身体接触,并且通过经由接触表面向用户传输由于热电操作而生成的热量来输出热反馈,该方法包括:与执行游戏的内容再现装置连接,该内容再现装置包括玩家和敌人角色,该敌人角色通过执行具有元素属性的攻击动作来攻击玩家,其中,元素属性包括火元件、冷元件和电元件;当玩家在游戏中被其元素属性是火元件的攻击动作击中时,通过向热电元件施加正向功率,以执行发热操作来输出热反馈,当玩家在游戏中被其元素属性是冷元件的攻击动作击中时,通过向热电元件施加反向功率,以执行吸热操作来输出冷反馈,并且当玩家在游戏中被其元素属性是电元件的攻击动作击中时,通过同时或替代地向热电元件施加正向功率和反向功率来输出热格栅反馈,以执行热格栅操作。
本发明的另一方面是提供一种用于输出对应于电子游戏中元素属性的热反馈的反馈装置,其中,该反馈装置与执行游戏的内容再现协作,该游戏包括玩家和敌人角色,敌人角色通过执行具有元素属性的攻击动作来攻击玩家,该装置包括:热输出模块,包括执行热电操作的热电元件,热电操作包括发热操作、吸热操作和热格栅操作,在热格栅操作中,发热操作和吸热操作组合;电源端子,向热电元件供电;以及接触表面,其被配置为与用户身体接触,其中,热输出模块通过经由接触表面将由于热电操作而生成的热传输给用户来输出热反馈;以及反馈控制器,其被配置为:当玩家在游戏中被其元素属性是火元件的攻击动作击中时,通过向热电元件施加正向功率来输出热反馈,以执行发热操作,当玩家在游戏中被其元素属性是冷元件的攻击动作击中时,通过向热电元件施加反向功率来输出冷反馈,以执行吸热操作,并且当玩家在游戏中被其元素属性是电元件的攻击动作击中时,通过同时或可替换地向热电元件施加正向功率和反向功率来输出热格栅反馈,以执行热格栅操作。
在本文中,热电元件可以设置为具有能够单独控制的多个热电偶组的热电偶阵列。当游戏中的玩家被其元素属性是电元件的攻击动作击中时,反馈控制器可以将正向功率施加到包括热电组的一部分的第一组,并且将反向功率施加到包括热电组的另一部分的第二组。
本发明的另一方面是提供一种用于提供热体验的系统,包括:内容再现装置,执行电子游戏;显示器,显示与游戏相关的图像;以及反馈装置,与内容再现装置连接并使用热电元件输出热反馈,其中,内容再现装置包括:第一通信模块,与反馈装置通信;以及控制器,其被配置为:执行包括玩家和敌人角色的游戏,敌人角色通过执行具有元素属性的攻击动作来攻击玩家,其中,元素属性包括火元件、冷元件和电元件,并且当在游戏中发生反映玩家被攻击动作击中的击中事件时,经由显示器显示与击中事件相关的击中图形,基于攻击动作的元素属性确定热反馈的类型,并且经由第一通信模块控制反馈装置输出与击中事件相关的热反馈并且显示击中图形,其中,当与击中事件相关的攻击动作的元素属性是火元件时,控制器将热反馈的类型确定为热反馈,当与击中事件相关的攻击动作的元素属性是冷元件时,将热反馈的类型确定为冷反馈,并且当与击中事件相关的攻击动作的元素属性是电元件时,将热反馈的类型确定为热格栅反馈,其中,反馈装置包括:第二通信模块,与内容再现装置通信;热输出模块,包括执行热电操作的热电元件,热电操作包括发热操作、吸热操作和热格栅操作,在热格栅操作中,发热操作和吸热操作组合;电源端子,向热电元件供电;以及接触表面,其被配置为与用户身体接触,其中,热输出模块通过经由接触表面将由于热电操作而生成的热传输给用户来输出热反馈;以及反馈控制器,其被配置为:经由第二通信模块接收热反馈的类型,并且向热电元件供电,以输出所接收类型的热反馈,并且其中,反馈控制器在接收到指示热反馈的类型时,将正向功率施加到热电元件,以执行发热操作,在接收到指示冷反馈的类型时,将反向功率施加到热电元件,以执行吸热操作,并且在接收到指示热格栅反馈的类型时,同时或可替代地将正向功率和反向功率施加到热电元件,以执行热格栅操作。
本发明的另一方面是提供一种用于提供与电子游戏相关的热体验的方法,该热体验由执行电子游戏并与使用热电元件输出热反馈的反馈装置协作的内容再现装置执行,该方法包括:执行游戏,该游戏包括玩家执行具有元素属性的特定动作,其中,元素属性包括火元件、冷元件和电元件;使玩家根据用户命令执行特定动作;显示与特定动作相关的图形;基于元素属性确定热反馈的类型,其中,当特定动作的元素属性是火元件时,该类型被确定为热反馈,当特定动作的元素属性是冷元件时,该类型被确定为冷反馈,并且当特定动作的元素属性是电元件时,该类型被确定为热格栅反馈,并且控制反馈装置输出热反馈以及显示与特定动作相关的图形,使得在类型是热反馈时,热电元件执行发热操作,在类型是冷反馈时,执行吸热操作,并且在类型是热格栅反馈时,执行热格栅操作,在热格栅操作中,发热操作和吸热操作组合。
在本文中,特定动作可以包括攻击游戏中的敌人角色的攻击动作和帮助游戏中的玩家的缓冲动作中的至少一个。
在本文中,特定动作可以是攻击游戏中的敌人角色的攻击动作。该方法还可以包括:基于攻击动作的攻击能力、与攻击动作相关的技能属性和与攻击动作相关的武器属性中的至少一个来确定热反馈的强度。该控制可以包括控制反馈装置输出具有确定强度的热反馈。技能属性可以包括技能树中的技能水平、技能伤害和技能等级中的至少一个,技能树包括具有相同元素属性的多个技能,并且武器属性可以包括武器等级、武器攻击能力、射弹等级和射弹攻击能力中的至少一个。
在本文中,控制可以包括控制反馈装置输出特定动作的投掷持续时间的热反馈。
在本文中,该方法可以进一步包括:随着投掷持续时间的过去,控制反馈装置增加热反馈的强度。
在本文中,控制可以包括当特定动作的结果保持剩余持续时间时,控制反馈装置在剩余持续时间内保持输出热反馈。
在本文中,控制可以包括控制反馈装置,以随着剩余持续时间的过去,降低热反馈的强度。
在本文中,电子游戏可以包括二维类型、虚拟现实类型和增强现实类型。
本发明的另一方面是提供一种与使用热电元件输出热反馈的反馈装置协作的内容再现装置,包括:存储器,其存储数据;通信模块,其与外部装置通信;以及控制器,其被配置为:执行游戏,游戏包括玩家执行具有元素属性的特定动作,其中,元素属性包括火元件、冷元件和电元件,使得玩家根据用户命令执行特定动作,显示与特定动作相关的图形,基于特定动作的元素属性确定热反馈的类型,并且经由通信模块控制反馈装置输出热反馈以及显示与特定动作相关的图形,其中,当特定动作的元素属性是火元件时,控制器将类型确定为热反馈,当特定动作的元素属性是冷元件时,将类型确定为冷反馈,并且当特定动作的元素属性是电元件时,将类型确定为热格栅反馈,并且其中,控制器在类型是热反馈时,控制热电元件执行发热操作,在类型是冷反馈时,控制热电元件执行吸热操作,并且在类型是热格栅反馈时,控制热电元件执行热格栅操作,在热格栅操作中,发热操作和吸热操作组合。
在本文中,特定动作可以包括攻击游戏中的敌人角色的攻击动作和帮助游戏中的玩家的缓冲动作中的至少一个。
在本文中,特定动作可以是攻击游戏中的敌人角色的攻击动作。控制器可以基于攻击动作的攻击能力、与攻击动作相关的技能属性和与攻击动作相关的武器属性中的至少一个来确定热反馈的强度,并且经由通信模块控制反馈装置输出具有确定的强度的热反馈。技能属性可以包括技能树中的技能水平、技能伤害和技能等级中的至少一个,技能树包括具有相同元素属性的多个技能,并且武器属性可以包括武器等级、武器攻击能力、射弹等级和射弹攻击能力中的至少一个。
在本文中,控制器可以控制反馈装置输出特定动作的投掷持续时间的热反馈。
在本文中,控制器可以控制反馈装置,以随着投掷持续时间的过去增加热反馈的强度。
在本文中,当特定动作的结果保持剩余持续时间时,控制器可以控制反馈装置在剩余持续时间内保持输出热反馈。
在本文中,控制器可以控制反馈装置,以随着剩余持续时间的过去,降低热反馈的强度。
本发明的另一方面是提供一种由反馈装置执行的用于提供热体验的方法,其中,反馈装置包括:热电元件,其执行热电操作,热电操作包括发热操作、吸热操作和热格栅反馈中的至少一个,在热格栅反馈中,发热操作和吸热操作组合;以及接触表面,其被配置为与用户的身体接触并传输由热电操作生成的热量,该方法包括:与执行电子游戏的内容再现装置连接,其中,该游戏包括执行具有元素属性的攻击动作的玩家,其中,该元素属性包括火元件、冷元件和电元件;当玩家执行火元件的攻击动作时,通过向热电元件施加正向功率来输出热反馈,以执行发热操作;当玩家执行冷元件的攻击动作时,通过向热电元件施加反向功率来输出冷反馈,以执行吸热操作;并且当玩家执行电元件的攻击动作时,通过同时或可替代地向热电元件施加正向功率和反向功率来输出热格栅反馈,以执行热格栅操作。
本发明的另一方面是提供一种用于输出对应于攻击动作的元素属性的热反馈的反馈装置,其中,该反馈装置与执行电子游戏的内容再现装置协作,该电子游戏包括执行具有元素属性的攻击动作的玩家,该元素属性包括火元件、冷元件和电元件,该装置包括:输入模块,其获得用户输入;热输出模块,包括执行热电操作的热电元件,该热电操作包括发热操作、吸热操作和热格栅操作,在热格栅操作中,发热操作和吸热操作组合;电源端子,向热电元件供电;以及接触表面,其设置在热电元件的一侧并被配置为与用户身体部位接触,其中,所述热输出模块通过经由所述接触表面将由于热电操作而生成的热传输给用户来输出热反馈;以及反馈控制器,其被配置为:当控制器经由输入模块接收到指示具有火元件的攻击动作的用户输入时,通过向热电元件施加正向功率来经由热输出模块输出热反馈,以执行发热操作;当控制器经由输入模块接收到指示具有冷元件的攻击动作的用户输入时,通过向热电元件施加反向功率来经由热输出模块输出热反馈,以执行吸热操作,其中,反向功率的电流方向与正向功率的电流方向相反;并且当控制器经由输入模块接收到指示具有电元件的攻击动作的用户输入时,通过同时或可替代地向热电元件施加正向功率和反向功率来经由热输出模块输出热反馈,以执行热格栅生成操作。
在本文中,热电元件可以被设置为热电偶阵列,该热电偶阵列具有能够被单独控制的多个热电偶组。反馈控制器可以在接收到指示具有电元件的攻击动作的用户输入时,将正向功率施加到作为热电偶组的一部分的第一组,将反向功率施加到作为热电偶组的另一部分的第二组。
本发明的另一方面是提供一种用于提供与多媒体内容相关的热体验的方法,该方法由内容再现装置执行,该内容再现装置执行包括电子游戏和体验应用的多媒体内容,并且与使用热电元件输出热反馈的反馈装置协作,该方法包括:执行多媒体内容,其中,多媒体内容包括玩家和虚拟对象,实现玩家被虚拟对象击中的击中事件,并且向玩家分配与击中事件相关的热阻;在游戏中生成击中事件;基于击中事件,设置热反馈的强度;基于热阻调整热反馈的强度;并且控制反馈装置输出具有调整强度的热反馈。
在本文中,击中事件可以包括热击事件和冷击事件中的至少一个,热反馈可以包括热反馈和冷反馈中的至少一个。该方法还可以包括:基于击中事件的类型来确定热反馈的类型。控制可以包括控制反馈装置输出所确定类型的热反馈的热反馈。
在本文中,热阻可以包括对应于热击事件的热阻和对应于冷击事件的热阻中的至少一个。该调整可以包括基于对应于所生成的击中事件的类型的热阻来调整热反馈的强度。
在本文中,该方法可以进一步包括:基于分配给玩家的热阻和分配给玩家装备的设备的热阻来计算热阻。
在本文中,调整可以包括降低热反馈的强度。
在本文中,热反馈的强度可以包括多个强度级别。该设置可以包括从多个强度级别获得第一强度级别,作为与击中事件相关的热反馈的强度。该调整可以包括从多个强度级别获得低于第一强度级别的第二强度级别。
在本文中,调整可以包括基于第一强度和热阻确定第二强度。
在本文中,当第一强度级别不是多个强度级别中的最低强度级别时,可以执行获得第二强度级别。该调整还可以包括当第一强度水平是多个强度水平中的最低强度水平时,将第一强度水平保持为与击中事件相关的热反馈的强度。
本发明的另一方面是提供一种内容再现装置,其中,内容再现装置与使用热电元件输出热反馈的反馈装置协作,包括:存储器,其存储数据;通信模块,其与外部装置通信;以及控制器,其被配置为:执行包括电子游戏和体验应用的多媒体内容,其中,多媒体内容包括玩家和虚拟对象,实现玩家被虚拟对象击中的击中事件,并且向玩家分配与击中事件相关的热阻,在发生击中事件时,基于击中事件设置热反馈的强度,基于热阻调整热反馈的强度,并且经由通信模块控制反馈装置输出具有调整的强度的热反馈。
在本文中,击中事件可以包括热击事件和冷击事件中的至少一个,热反馈可以包括热反馈和冷反馈中的至少一个。控制器可以基于击中事件的类型来确定热反馈的类型,并且控制反馈装置输出所确定类型的热反馈的热反馈。
在本文中,热阻可以包括对应于热击事件的热阻和对应于冷击事件的热阻中的至少一个。控制器可以基于对应于所生成的击中事件的类型的热阻来调整热反馈的强度。
在本文中,控制器可以基于分配给玩家的热阻和分配给玩家装备的设备的热阻来计算热阻。
在本文中,控制器可以通过考虑热阻降低热反馈的强度来调整热反馈的强度。
在本文中,热反馈的强度可以包括多个强度级别。控制器可以将与击中事件相关的热反馈的强度设置为多个强度级别中的第一强度,并将与击中事件相关的热反馈的强度调整为多个强度级别中的低于第一强度级别的第二强度级别。
在本文中,控制器可以基于第一强度和热阻来确定第二强度。
在本文中,当第一强度级别不是多个强度级别中的最低强度级别时,控制器可以将与击中事件相关的热反馈的强度调整到第二强度级别,并且当第一强度级别是多个强度级别中的最低强度级别时,将第一强度级别保持为与击中事件相关的热反馈的强度。
本发明的另一方面是提供一种反馈装置,其中,该反馈装置与执行设置为电子游戏或体验应用的多媒体内容的内容再现装置协作,并且其中,该多媒体内容包括玩家和虚拟对象,实现玩家被虚拟对象击中的击中事件,并且向玩家分配与击中事件相关的热阻,该反馈装置包括:外壳,该外壳具有被用户抓握的抓握部分,并且形成反馈装置的外部;输入模块,根据用户的操作接收用户输入;通信模块,其与内容再现装置通信;热输出模块,包括执行热电操作的热电元件、向热电元件供电的电源端子、以及设置在抓握部分上并被配置为与用户接触的接触表面,其中,热输出模块通过经由接触表面将热电操作生成的热传输给用户来输出热反馈;以及控制器,其被配置为:经由输入模块接收用户输入,经由通信模块将用户输入发送到内容再现装置,以便使玩家根据用户的操作而行动,经由通信模块接收来自内容再现装置的热反馈的强度,基于热反馈的强度在多个预设电压值中选择操作电压,生成具有工作电压的操作电源,并将操作电源施加到电源端子,使得所述热输出模块输出热反馈,并且其中,在所述游戏中发生击中事件时,所述控制器将第一工作电压施加到具有第一热阻的玩家,并且在所述游戏中发生击中事件时,将大于第一工作电压的第二工作电压施加到具有大于第一热阻的第二热阻的玩家。
本发明的另一方面是提供一种用于提供与多媒体内容相关的热体验的方法,该方法由内容再现装置执行,其中,内容再现装置执行包括电子游戏和体验应用的多媒体内容,并且与使用热电元件输出热反馈的反馈装置协作,该方法包括:执行多媒体内容,其中,多媒体内容包括引起热反馈的热事件、玩家和分配有热阻的设备;当发生热事件时,确定玩家是否装备了设备;当玩家没有装备该设备时,将热反馈的强度设置为第一强度水平;当玩家装备该设备时,将热反馈的强度设置为不同于第一强度水平的第二强度水平;并且根据所确定的强度,控制反馈装置输出热反馈。
在本文中,第二强度级别可以小于第一强度级别。
在本文中,可以基于设备的第一强度水平和热阻来计算第二强度水平。
本发明的另一方面是提供一种用于提供与多媒体内容相关的热体验的方法,该方法由内容再现装置执行,其中,内容再现装置执行包括电子游戏和体验应用的多媒体内容,并且与使用热电元件输出热反馈的反馈装置协作,该方法包括:执行多媒体内容,其中,多媒体内容包括引起热反馈的热事件、玩家和分配有热阻的设备;当发生热事件时,确定玩家是否装备了设备;基于玩家是否装备了该设备,来确定是否输出与热反馈相关的热反馈;并且仅当玩家没有装备该设备时,控制反馈装置输出热反馈。
本发明的另一方面是提供一种内容再现装置,其中,内容再现装置与使用热电元件输出热反馈的反馈装置协作,包括:存储器,其存储数据;通信模块,其与外部装置通信;以及控制器,其被配置为:执行多媒体内容,其中,多媒体内容被设置为电子游戏或体验应用,并且包括导致热反馈的热事件、玩家和分配有热阻的设备,当发生热事件时,确定玩家是否装备了该设备,当玩家没有装备该设备时,将热反馈的强度设置为第一强度水平,当玩家装备该设备时,将热反馈的强度设置为不同于第一强度水平的第二强度水平,并且经由通信模块控制反馈装置根据所确定的强度输出热反馈。
在本文中,第二强度级别可以小于第一强度级别。
在本文中,控制器可以基于第一强度级别和分配给设备的热阻来计算第二强度级别。
本发明的另一方面是提供一种内容再现装置,其中,内容再现装置与使用热电元件输出热反馈的反馈装置协作,包括:存储器,其存储数据;通信模块,其与外部装置通信;以及控制器,其被配置为:执行多媒体内容,其中,多媒体内容包括导致热反馈的热事件、玩家和分配有热阻的设备,当发生热事件时,确定玩家是否装备了该设备,基于玩家是否装备了该设备来确定是否输出与热反馈相关的热反馈,并且仅当玩家没有装备该设备时,经由通信模块控制反馈装置输出热反馈。
本发明的另一方面是提供一种用于输出热反馈的反馈装置,其中,该反馈装置与执行设置为电子游戏或体验应用的多媒体内容的内容再现装置协作,并且其中,该多媒体内容包括引起热反馈的热事件、玩家和分配有热阻的装置,该装置包括:外壳,该外壳具有被用户抓握的抓握部分并形成反馈装置的外部;输入模块,根据用户的操作接收用户输入;通信模块,其与内容再现装置通信;以及热输出模块,包括执行热电操作的热电元件、向热电元件供电的电源端子、以及设置在抓握部分上并被配置为与用户接触的接触表面,其中,热输出模块通过经由接触表面将热电操作生成的热传输给用户来输出热反馈;以及控制器,其被配置为:经由输入模块获得用户输入,经由通信模块将用户输入发送到内容再现装置,以便使用户根据用户的操作来行动,经由通信模块接收请求从内容再现装置输出热反馈的消息,并且在接收到该消息时应用,向电源端子供电,使得热输出模块输出热反馈,其中,当控制器在多媒体内容再现期间发生热事件时经由热输出模块输出热反馈时,控制器执行第一操作或第二操作,在第一操作中,基于玩家是否装备了该设备来确定是否输出热反馈,在第二操作中,基于玩家是否装备了该设备来调整热反馈的强度,其中,控制器通过在玩家没有装备该设备时向热电元件施加操作功率以及在玩家装备该设备时不向热电元件施加操作功率来执行第一操作,并且其中,控制器通过在玩家没有装备该设备时向热电元件施加第一操作功率并且通过施加电压幅度小于第一操作功率的第二操作功率来执行第二操作。
本发明的另一方面是提供一种用于提供热反馈的方法,该方法由与使用热电元件输出热反馈的反馈装置协作的内容再现装置来执行,包括:执行包括根据用户的操作而行动的玩家的电子游戏,其中,玩家具有健康点,并且当所有健康点耗尽时在游戏中死亡;根据游戏再现期间健康点的变化,获得热反馈的强度和热反馈的类型中的至少一个;并且根据所确定的强度和类型中的至少一个来控制反馈装置输出热反馈,其中,所述获得包括以下中的至少一个:基于健康点的变化量来获得热反馈的强度,基于变化量与健康点的总量的比率来获得热反馈的强度,并且基于健康点是增加还是减少来获得热反馈的类型。
在本文中,在基于健康点的变化量获得热反馈的强度的步骤中,当变化量是第一值时可以获得第一强度,并且当变化量是大于第一值的第二值时可以获得大于第一强度的第二强度。
在本文中,在基于变化量与健康点总量的比率获得热反馈的强度的步骤中,当该比率是第一值时可以获得第一强度,并且当该比率是大于第一值的第二值时可以获得大于第一强度的第二强度。
在本文中,在基于健康点是增加还是减少来获得热反馈的强度的步骤中,当健康点增加时,可以获得热反馈和冷反馈中的一个,作为热反馈的类型,当健康点减少时,可以获得热反馈和冷反馈中的另一个,作为热反馈的类型。
本发明的另一方面是提供一种用于提供热反馈的方法,该方法由与使用热电元件输出热反馈的反馈装置协作的内容再现装置来执行,包括:执行包括根据用户的操作而行动的玩家的电子游戏,其中,玩家具有健康点,并且当所有健康点耗尽时在游戏中死亡;在游戏再现期间,基于健康点的剩余量和健康点的剩余量与健康点总量的比率中的至少一个,确定是否输出热反馈、热反馈的强度和热反馈的类型中的至少一个;并且根据是否输出热反馈、强度和类型中的确定的至少一个,控制反馈装置输出热反馈。
本发明的另一方面是提供一种内容再现装置,其中,内容再现装置与使用热电元件输出热反馈的反馈装置协作,包括:存储器,其存储数据;通信模块,其与外部装置通信;以及控制器,其被配置为:执行包括根据用户的操作而行动的玩家的电子游戏,其中,玩家具有健康点,并且当所有健康点耗尽时在游戏中死亡,在游戏再现期间,根据健康点的变化获得热反馈的强度和热反馈的类型中的至少一个;并且经由通信模块控制反馈装置根据所确定的强度和类型中的至少一个来输出热反馈,其中,控制器基于健康点的变化量中的至少一个来确定热反馈的强度,并且基于健康点是增加还是减少来确定热反馈的类型。
在本文中,当变化量是第一值时,控制器可以获得第一强度,作为热反馈的强度,当变化量是大于第一值的第二值时,控制器可以获得大于第一强度的第二强度,作为热反馈的强度。
在本文中,当该比率是第一值时,控制器可以获得第一强度,作为热反馈的强度,并且当该比率是大于第一值的第二值时,获得大于第一强度的第二强度,作为热反馈的强度。
在本文中,当健康点增加时,控制器可以获得热反馈和冷反馈中的一个,作为热反馈的类型,并且当健康点减少时,获得热反馈和冷反馈中的另一个,作为热反馈的类型。
本发明的另一方面是提供一种内容再现装置,其中,内容再现装置与使用热电元件输出热反馈的反馈装置协作,包括:存储器,其存储数据;通信模块,其与外部装置通信;以及控制器,其被配置为:执行包括根据用户的操作而行动的玩家的电子游戏,其中,玩家具有健康点,并且当所有健康点耗尽时在游戏中死亡,在游戏再现期间,基于健康点的剩余量和健康点的剩余量与健康点总量的比率中的至少一个,确定是否输出热反馈、热反馈的强度和热反馈的类型中的至少一个,并且经由通信模块控制反馈装置根据是否输出热反馈、强度和类型中的确定的至少一个,来输出热反馈。
本发明的另一方面是提供一种用于输出热反馈的反馈装置,其中,该反馈装置与执行电子游戏的内容再现装置协作,该电子游戏包括根据用户的操作而行动的玩家,并且其中,该玩家具有健康点,并且当所有健康点耗尽时在游戏中死亡,该反馈装置包括:外壳,该外壳具有被用户抓握的抓握部分,并且形成游戏控制器的外部;输入模块,根据用户的操作接收用户输入;通信模块,其与内容再现装置通信;热输出模块,包括执行热电操作的热电元件、向热电元件供电的电源端子、以及设置在抓握部分上并被配置为与用户接触的接触表面,其中,热输出模块通过经由接触表面将热电操作生成的热传输给用户来输出热反馈;以及控制器,其被配置为经由通信模块接收用户输入,经由通信模块将接收到的用户输入发送到内容再现装置,以便使玩家对应于用户的操作而行动,并且根据健康点的变化向电源终端施加操作电源,使得热输出模块输出对应于健康点的变化的热反馈,其中,控制器执行第一操作、第二操作和第三操作中的至少一个,其中,控制器通过当健康点的变化量或变化量与健康点总量的比率是第一值时,施加第一操作功率,并且当变化量或比率是大于第一值的第二值时,施加电压幅度大于第一操作功率的第二操作功率,来执行第一操作,其中,控制器通过在健康点增加时施加用于热反馈的正向功率和用于冷反馈的反向器功率中的一个,并且在健康点减少时施加正向功率和反向器功率中的另一个,来执行第二操作,并且其中,控制器通过当健康点的剩余量或剩余量与总量的比率是第三值时施加第三操作功率,并且当剩余量或剩余量的比率是小于第三值的第四值时施加电压幅度大于第三操作功率的第四操作功率,来执行第三操作。
本发明的另一方面是提供一种用于提供热反馈的方法,该方法由与使用热电元件输出热反馈的反馈装置协作的内容再现装置执行,包括:执行设置为电子游戏或体验应用的多媒体内容,其中,多媒体内容包括虚拟热源,包括传导类型和辐射类型的热传输属性分配给该虚拟热源;基于虚拟热源的热传输属性确定从虚拟热源传输到多媒体内容的玩家的虚拟热传输量,基于所确定的虚拟热传输量获得热反馈的强度;并且控制反馈装置输出具有确定强度的热反馈。其中,确定虚拟热传输量包括当虚拟热源的热传输属性是传导类型时,基于虚拟热源的温度值计算虚拟热传输量,并且当虚拟热源的热传输属性是辐射类型时,基于温度值和玩家与虚拟热源之间的距离计算虚拟热传输量。
在本文中,所述确定可以包括当玩家与传导类型的热源分离时,确定传导类型的虚拟热源不向玩家传输虚拟热量或者虚拟热传输量为0。
在本文中,在计算与辐射类型的虚拟热源相关的虚拟热传输量的步骤中,虚拟热传输量可以随着距离变小而变大。
在本文中,在计算与辐射类型的虚拟热源相关的虚拟热传输量的步骤中,当该距离是第一距离时,可以获得第一热量,作为虚拟热传输量,并且当该距离是小于第一距离的第二距离时,可以获得大于第一热量的第二热量,作为虚拟热传输量。
在本文中,热传输属性可以进一步包括方向类型。该确定还可以包括当虚拟热源的热传输属性是方向性类型时,基于虚拟热源的温度值,计算虚拟热传输量,即使当玩家和虚拟热源之间的距离变化时,与方向性类型的虚拟热源相关的虚拟热传输量也是恒定的。
在本文中,热传输属性可以进一步包括区域类型。该确定还可以包括当虚拟热源的热传输属性是区域类型时,基于虚拟热源的温度值,计算虚拟热传输量。只有当玩家和区域类型的虚拟热源之间的距离小于预定距离时,虚拟热量才可以传输。
在本文中,该方法可以进一步包括:基于虚拟热传输量是正还是负,确定热反馈的类型是热反馈还是冷反馈。所述控制可以包括控制反馈装置输出具有确定类型的热反馈的热反馈。
本发明的另一方面是提供一种内容再现装置,其中,内容再现装置与使用热电元件输出热反馈的反馈装置协作,包括:存储器,其存储数据;通信模块,其与外部装置通信;以及控制器,其被配置为:执行设置为电子游戏或体验应用的多媒体内容,其中,多媒体内容包括分配有包括传导类型和辐射类型的热传输属性的虚拟热源,基于虚拟热源的热传输属性确定从虚拟热源传输到多媒体内容的玩家的虚拟热传输量,基于所确定的虚拟热传输量获得热反馈的强度,并且经由通信模块控制反馈装置输出具有确定的强度的热反馈,其中,当虚拟热源的热传输属性是传导类型时,控制器基于虚拟热源的温度值计算虚拟热传输量,并且当虚拟热源的热传输属性是辐射类型时,控制器基于温度值和玩家与虚拟热源之间的距离计算虚拟热传输量。
在本文中,控制器可以确定传导类型的虚拟热源不向玩家传输虚拟热量,或者当玩家与传导类型的热源分离时,虚拟热传输量为0。
在本文中,控制器可以确定与辐射类型的虚拟热源相关的虚拟热传输量随着距离变小而变大
在本文中,当该距离是第一距离时,控制器可以确定虚拟热传输量是第一热量,并且当该距离是小于第一距离的第二距离时,确定虚拟热传输量是大于第一热量的第二热量。
在本文中,热传输属性可以进一步包括方向类型。控制器可以基于虚拟热源的温度值计算与方向性类型的虚拟热源相关的虚拟热传输量,即使当玩家和虚拟热源之间的距离变化时,可以确定与方向性类型的虚拟热源相关的虚拟热传输量恒定。
在本文中,热传输属性可以进一步包括区域类型。控制器可以基于虚拟热源的温度值计算与区域类型的虚拟热源相关的虚拟热传输量,并且仅当玩家和区域类型的虚拟热源之间的距离小于预定距离时,确定虚拟热传输。
在本文中,控制器基于虚拟热传输量是正还是负,来确定热反馈的类型是热反馈还是冷反馈,并且控制反馈装置输出具有所确定的类型的热反馈的热反馈。
本发明的另一方面是提供一种用于输出热反馈的反馈装置,其中,该反馈装置与执行包括虚拟热源的电子游戏或体验应用的内容再现装置协作,并且输出对应于从虚拟热源传输到游戏或应用的玩家的虚拟热传输量的热反馈,包括:热输出模块,该热输出模块包括热电元件,该热电元件执行热电操作,该热电操作包括发热操作、吸热操作和热格栅操作,在热格栅操作中,发热操作和吸热操作组合;电源端子,向热电元件供电;以及接触表面,其设置在抓握部分上并被配置为与用户接触,其中,热输出模块通过经由接触表面将热电操作生成的热传输给用户来输出热反馈;以及控制器,其被配置为:通过当玩家与第一虚拟热源接触时向功率终端施加第一功率,并且通过当玩家远离第一虚拟热源时停止施加第一功率,来控制热电元件输出反映通过从第一虚拟热源传导到玩家的虚拟热传输量的热反馈,并且通过当玩家与第二虚拟热源间隔开第一距离时向功率终端施加第二功率,并且通过当玩家与第二虚拟热源间隔开小于第一距离的第二距离时向功率终端施加大于第二功率的第三功率,来控制热电元件输出反映由来自与第一虚拟热源不同类型的第二虚拟热源的辐射传输的虚拟热传输量的热反馈。
本发明的另一方面是提供一种用于提供热体验的方法,该方法由内容再现装置执行,该内容再现装置执行设置为电子游戏或体验应用的多媒体内容,并且与使用热电元件输出热反馈的反馈装置协作,该方法包括:执行多媒体内容,其中,多媒体内容包括虚拟对象和玩家,并且实现玩家和虚拟对象之间的交互,例如,触摸或抓取,虚拟对象具有包括温度信息和纹理信息的热属性;根据交互的持续时间、温度信息和纹理信息中的至少一个来改变热反馈的强度;并且控制反馈装置输出具有强度的热反馈。
在本文中,该方法可以进一步包括:基于温度信息设置热反馈的最大强度,随着持续时间的增加而增加强度,并且当强度达到最大强度时,停止改变热反馈的强度。
在本文中,改变可以包括基于纹理信息调整每次强度变化率。
本发明的另一方面是提供一种内容再现装置,其中,内容再现装置执行设置为电子游戏或体验应用的多媒体内容,并且与使用热电元件输出热反馈的反馈装置协作,包括:热输出模块,包括执行发热操作和吸热操作的热电元件;电源端子,向热电元件供电;以及接触表面,其设置在抓握部分上并被配置为与用户接触,其中,热输出模块通过经由接触表面将热电元件生成的热传输给用户来输出热反馈;存储器,其存储数据;通信模块,其与外部装置通信;以及控制器,其被配置为:执行多媒体内容,其中,多媒体内容包括虚拟对象和玩家,并且实现玩家和虚拟对象之间的交互,例如,触摸或抓取,虚拟对象具有包括温度信息和纹理信息的热属性,根据交互的持续时间、温度信息和纹理信息中的至少一个改变热反馈的强度,控制反馈装置输出具有该强度的热反馈。
在本文中,控制器可以基于温度信息设置热反馈的最大强度,随着持续时间的增加而增加强度,并且当强度达到最大强度时停止改变热反馈的强度。
在本文中,控制器可以基于纹理信息调整每次强度变化率。
本发明的另一方面是提供一种用于输出热反馈的反馈装置,其中,反馈装置与执行设置为电子游戏或体验应用的多媒体内容的内容再现装置协作,并且其中,多媒体内容包括虚拟对象和玩家,并且实现玩家和虚拟对象之间的交互,例如,触摸或抓取,所述虚拟对象具有包括温度信息和纹理信息的热属性,所述反馈装置包括:外壳,其具有被用户抓握的抓握部分,并形成反馈装置的外部;输入模块,根据用户的操作接收用户输入;通信模块,其与内容再现装置通信;热输出模块,包括执行热电操作的热电元件、向热电元件供电的电源端子、以及设置在抓握部分上并被配置为与用户接触的接触表面,其中,热输出模块通过经由接触表面将热电操作生成的热传输给用户来输出热反馈;以及反馈控制器,其被配置为当玩家和虚拟对象之间的交互根据用户的操作开始时,随着交互持续时间的增加,增加施加到热电元件的功率的电压幅度或电流幅度。
在本文中,当虚拟对象的纹理信息指示树时,反馈控制器可以以第一速率增加功率的电压幅度或电流幅度,并且当虚拟对象的纹理信息指示金属时,以大于第一速率的第二速率增加功率的电压幅度或电流幅度。
在本文中,当虚拟对象的温度信息不同时,反馈控制器可以将最大电压或最大电流设置为不同。
在本文中,当虚拟对象的纹理信息不同时,反馈控制器可以不同地设置电压幅度或电流幅度的变化率。
本发明的另一方面是提供一种用于提供热体验的方法,包括:使用支持与虚拟对象之间的冲突相关的冲突处理功能的物理引擎来执行电子游戏,其中,冲突处理功能包括冲突类型,其中,至少考虑虚拟对象的动量和一个虚拟对象穿过另一虚拟对象的触发类型来计算虚拟对象的行为;确定与玩家角色被虚拟对象击中时发生的击中事件相关的冲突处理功能是冲突类型还是触发类型;基于确定的结果决定热反馈的强度;并且基于热反馈的强度控制由反馈装置执行的热电操作的强度,其中,反馈装置使用执行热电操作的热电元件输出热反馈。
在本文中,所述决定可以包括当击中事件与冲突类型相关时,基于使用冲突类型的冲突处理功能计算的动量来决定热反馈的强度。
在本文中,热反馈的强度可以随着计算动量的增大而增大。
在本文中,所述决定可以包括当击中事件与触发类型相关时,将热反馈的强度决定为预定值。
在本文中,所述决定可以包括基于第一对象的识别信息和第二对象的识别信息中的至少一个来决定热反馈的强度,所述第一对象是击中玩家角色的虚拟对象,所述第二对象是当击中事件与触发类型相关时启动第一对象的虚拟对象。
本发明的另一方面是提供一种内容再现装置,其与使用热电元件输出热反馈的反馈装置协作,包括:存储器,其存储数据;通信模块,其与反馈装置通信;以及控制器,其被配置为:使用支持与虚拟对象之间的冲突相关的冲突处理功能的物理引擎来执行电子游戏,其中,冲突处理功能包括冲突类型和触发类型,在冲突类型中,至少考虑虚拟对象的动量来计算虚拟对象的行为,在触发类型中,一个虚拟对象穿过另一虚拟对象,确定与玩家角色被虚拟对象击中时发生的击中事件相关的冲突处理功能是冲突类型还是触发类型,基于确定的结果决定热反馈的强度,并且基于热反馈的强度经由通信模块控制由热电元件执行的热电操作的强度。
在本文中,当击中事件与冲突类型相关时,控制器可以基于使用冲突类型的冲突处理功能计算的动量来决定热反馈的强度。
在本文中,热反馈的强度可以随着计算动量的增大而增大。
在本文中,当击中事件与触发类型相关时,控制器可以将热反馈的强度确定为预定值。
在本文中,控制器可以基于第一对象的识别信息和第二对象的识别信息中的至少一个来决定热反馈的强度,第一对象是撞击玩家角色的虚拟对象,第二对象是当击中事件与触发类型相关时启动第一对象的虚拟对象。
本发明的另一方面是提供一种用于提供热体验的方法,该方法由执行多媒体内容并与使用热电元件输出热反馈的多个反馈装置协作的内容再现装置执行,包括:执行提供虚拟空间的虚拟现实应用;根据从HMD(头戴式显示器)检测到的用户视线方向获得虚拟空间的FOV(视场);当在虚拟空间中发生热事件时,基于热事件相对于FOV的取向,确定多个反馈装置中的至少一个目标装置;并且向目标反馈装置传输指示输出热反馈的信号。
在本文中,所述确定可以包括当热事件位于FOV的中心区域时,确定至少一个目标装置包括由用户右手抓住的第一装置和由用户左手抓住的第二装置。
在本文中,该方法可以进一步包括:控制第一装置和第二装置以相同的强度输出热反馈。
在本文中,所述确定可以包括当热事件位于FOV的右区域时,确定至少一个目标装置包括由用户右手抓住的第一装置,并且当热事件位于FOV的左区域时,确定至少一个目标装置包括由用户左手抓住的第二装置。
在本文中,所述确定可以包括当热事件位于FOV的右区域或左区域时,确定至少一个目标装置包括由用户的右手抓住的第一装置和由用户的左手抓住的第二装置。该方法可以进一步包括:不同地调整第一装置和第二装置的热反馈的强度。
在本文中,第一装置和第二装置中的一个的热反馈的强度可以大于第一装置和第二装置中的另一个的热反馈的强度。
本发明的另一方面是提供一种内容再现装置,其中,内容再现装置再现多媒体内容,并且与使用热电元件输出热反馈的多个反馈装置协作,包括:存储器,其存储数据;通信模块,其与反馈装置通信;控制器,其被配置为执行提供虚拟空间的虚拟现实应用,当在虚拟空间中发生热事件时,根据从HMD(头戴式显示器)检测到的用户视线方向获得虚拟空间的FOV(视场),基于热事件相对于FOV的取向确定多个反馈装置中的至少一个目标装置,并且将指示输出热反馈的信号传输到目标反馈装置。
在本文中,当热事件位于FOV的中心区域时,控制器可以确定至少一个目标装置包括由用户的右手抓住的第一装置和由用户的左手抓住的第二装置。
在本文中,控制器可以控制第一装置和第二装置以相同的强度输出热反馈。
在本文中,当热事件位于FOV的右区域时,控制器可以确定至少一个目标装置包括由用户的右手抓住的第一装置,并且当热事件位于FOV的左区域时,确定至少一个目标装置包括由用户的左手抓住的第二装置。
在本文中,当热事件位于FOV的右区域或左区域时,控制器可以确定至少一个目标装置包括由用户的右手抓住的第一装置和由用户的左手抓住的第二装置,并且不同地调整第一装置和第二装置的热反馈的强度。
在本文中,控制器可以确定第一装置和第二装置中的一个的热反馈的强度大于第一装置和第二装置中的另一个的热反馈的强度。
本发明的另一方面是提供一种用于提供热体验的方法,包括:执行提供虚拟空间的虚拟现实应用,其中,虚拟空间包括温度特性分配给的虚拟区域和温度特性分配给的虚拟对象;当发生反映玩家角色进入虚拟区域的区域事件时,控制反馈装置输出与区域事件相关的热反馈,其中,反馈装置使用执行热电操作的热电元件输出热反馈;当区域事件持续时,检测反映玩家受到虚拟对象影响的对象事件的发生;并且当在区域事件期间检测到对象事件的发生时,控制反馈装置通过与对象事件相关的热反馈来覆盖与区域事件相关的热反馈。
在本文中,该方法可以进一步包括:当对象事件持续时,检测新区域事件的发生;并且当在对象事件期间检测到新区域事件的发生时,控制反馈装置通过与新区域事件相关的热反馈来覆盖与对象事件相关的热反馈。
在本文中,该方法可以进一步包括:当对象事件或输出与对象事件相关的热反馈完成时,控制反馈装置重新开始输出与区域事件相关的热反馈。
本发明的另一方面是提供一种内容再现装置,其中,内容再现装置再现多媒体内容,并且与使用热电元件输出热反馈的至少一个反馈装置协作,包括:存储器,其存储数据;通信模块,其与反馈装置通信;控制器,其被配置为:执行提供虚拟空间的虚拟现实应用,其中,虚拟空间包括温度特性分配给的虚拟区域和温度特性分配给的虚拟对象,当反映玩家角色进入虚拟区域的区域事件发生时,经由通信模块控制反馈装置输出与区域事件相关的热反馈,其中,所述反馈装置使用执行热电操作的热电元件输出热反馈,当所述区域事件持续时,检测反映玩家受到虚拟对象影响的对象事件的发生,并且当在所述区域事件期间检测到所述对象事件的发生时,经由通信模块控制所述反馈装置,以通过与对象事件相关的热反馈来覆盖与区域事件相关的热反馈。
在本文中,当对象事件持续时,控制器可以检测新区域事件的发生;并且当在对象事件期间检测到新区域事件的发生时,经由通信模块控制反馈装置,以通过与新区域事件相关的热反馈来覆盖与对象事件相关的热反馈。
在本文中,当对象事件或输出与对象事件相关的热反馈完成时,控制器可以经由通信模块控制反馈装置重新开始输出与区域事件相关的热反馈。
本发明的另一方面是提供一种用于提供热体验的方法,包括:执行提供虚拟空间的虚拟现实应用,其中,虚拟空间包括温度特性分配给的虚拟区域,虚拟区域具有全局区域和包括在全局区域中的局部区域;当玩家角色进入全局区域时,控制反馈装置输出对应于全局区域的温度特性的热反馈,其中,反馈装置使用执行热电操作的热电元件输出热反馈;并且当玩家角色进入局部区域时,控制反馈装置用对应于局部区域的温度特性的热反馈来覆盖对应于全局区域的温度特性的热反馈。
在本文中,该方法可以进一步包括:当玩家角色离开局部区域时,控制反馈装置重新开始输出对应于局部区域的温度特性的热反馈。
本发明的另一方面是提供一种内容再现装置,其中,内容再现装置再现多媒体内容,并且与至少一个使用热电元件输出热反馈的反馈装置协作,包括:存储器,其存储数据;通信模块,其与反馈装置通信;控制器,其被配置为:执行提供虚拟空间的虚拟现实应用,其中,所述虚拟空间包括温度特性分配给的虚拟区域,所述虚拟区域具有全局区域和包含在所述全局区域中的局部区域,当玩家角色进入全局区域时,经由通信模块控制反馈装置,以输出对应于全局区域的温度特性的热反馈,其中,反馈装置使用执行热电操作的热电元件输出热反馈,并且当玩家角色进入局部区域时,经由通信模块控制反馈装置用对应于局部区域的温度特性的热反馈来覆盖对应于全局区域的温度特性的热反馈。
在本文中,当玩家角色离开局部区域时,控制器可以经由通信模块控制反馈装置重新开始输出对应于局部区域的温度特性的热反馈。
本发明的另一方面是提供一种用于提供热体验的方法,包括:再现多媒体内容,其中,多媒体内容包括图像和与图像的特定场景互锁的热反馈相关的数据;获得供电时间,该时间被设置为在从热电操作的开始时间到用户识别由于热电引起的热反馈的延迟持续时间之前,发送到反馈装置,该反馈装置在多媒体内容再现期间到达供电时间时使用热电元件输出热反馈,以便在特定场景的显示时间将热反馈和特定场景一起提供给用户;并且在到达特定场景的显示时间时输出该特定场景。
在本文中,供电时间可以比特定场景的播放时间早延迟持续时间。
在本文中,该方法可以进一步包括:从多媒体内容的数据获得热反馈的强度,并且基于热反馈的强度计算延迟持续时间。
在本文中,随着热反馈的强度越强,延迟持续时间越长。
在本文中,该方法可以进一步包括:从多媒体内容的数据获得热反馈类型的信息,并且可以进一步考虑热反馈的类型来计算延迟持续时间。
在本文中,该方法可以进一步包括:获得反馈装置的识别信息,并考虑该识别信息来计算延迟持续时间。
在本文中,该方法可以进一步包括:从反馈装置接收延迟持续时间的信息。
在本文中,在多媒体内容的数据中,再现时间热反馈被设置为与特定场景的播放时间相同,并且可以基于再现时间热反馈和延迟持续时间来计算供电时间。
在本文中,可以基于特定场景的播放时间和延迟持续时间来计算供电时间。
在本文中,可以基于特定场景的播放时间和延迟持续时间来计算供电时间。
本发明的另一方面是提供一种用于热体验的方法,该方法可以包括:执行视频游戏,该视频游戏包括具有包括火、冷和闪电的元素属性的技能;当获得指示技能发生的用户输入时,考虑技能的元素属性,获得热反馈的类型,其中,当技能是火时,热反馈的类型是热反馈,当技能是冷时,热反馈的类型是冷反馈,当技能是闪电时,热反馈的类型是热格栅反馈;根据热反馈的类型,使用热电元件控制输出热反馈的反馈装置的热电操作,其中,当热反馈的类型是热反馈时,控制反馈装置执行发热操作,当热反馈的类型是冷反馈时,执行吸热操作,并且当热反馈的类型是热格栅反馈时,执行发热操作和吸热操作,并且显示技能的图形。
在本文中,该方法可以进一步包括:考虑技能所属的技能树中的技能水平、技能损害或技能等级中的至少一个,获得热反馈的强度,并且可以根据反馈的强度来控制反馈装置的热电操作的强度。
本发明的另一方面是提供一种用于热体验的方法,该方法可以包括执行视频游戏,该视频游戏包括具有包括火、冷和闪电的元素属性的技能;当在视频游戏中发生该技能的击中事件时,考虑该技能的元素属性,获得热反馈的类型,其中,当该技能是火时,热反馈的类型是热反馈,当该技能是冷时,热反馈的类型是冷反馈,当该技能是闪电时,热反馈的类型是热格栅反馈;并且
根据热反馈的类型,通过使用热电元件来控制输出热反馈的反馈装置的热电操作,以便根据击中事件输出与技能的元素属性相对应的热反馈以及击中图形,其中,当热反馈的类型是热反馈时,控制反馈装置执行发热操作,当热反馈的类型是冷反馈时执行吸热操作,并且当热反馈的类型是热格栅反馈时执行发热操作和吸热操作。
在本文中,该方法可以进一步包括:考虑技能所属的技能树中的技能水平、根据击中事件的损害或技能等级中的至少一个,获得热反馈的强度,并且可以根据反馈的强度来控制反馈装置的热电操作的强度。
在本文中,控制可以包括根据技能的击中事件应用的去毛刺持续时间来控制反馈装置的热电操作的剩余持续时间。
在本文中,控制可以包括控制反馈装置,以随着去毛刺持续时间的过去降低热电操作的强度。
本发明的另一方面是提供一种用于热体验的方法,该方法可以包括:使用支持与虚拟对象之间的冲突相关的冲突处理功能的物理引擎来执行电子游戏,其中,冲突处理功能包括冲突类型,其中,至少考虑虚拟对象的动量和一个虚拟对象穿过另一虚拟对象的触发类型来计算虚拟对象的行为;确定与玩家角色被虚拟对象击中时发生的击中事件相关的冲突处理功能是冲突类型还是触发类型;基于确定的结果决定热反馈的强度;并且基于热反馈的强度控制由反馈装置执行的热电操作的强度,其中,反馈装置使用执行热电操作的热电元件输出热反馈。
在本文中,该决定可以包括当击中事件与冲突类型相关时,基于使用冲突类型的冲突处理功能计算的动量来决定热反馈的强度。
在本文中,热反馈的强度可以随着计算动量的增大而增大。
在本文中,所述决定可以包括当击中事件与触发类型相关时,将热反馈的强度决定为预定值。
在本文中,所述决定可以包括基于第一对象的识别信息或第二对象的识别信息中的至少一个来决定热反馈的强度,所述第一对象是撞击玩家角色的虚拟对象,所述第二对象是当击中事件与触发类型相关时启动第一对象的虚拟对象。
本发明的另一方面是提供一种用于提供热体验的方法,该方法由执行多媒体内容并使用热电元件与输出热反馈的多个反馈装置协作的内容再现装置执行,该方法可以包括:执行提供虚拟空间的虚拟现实应用;根据从HMD(头戴式显示器)检测到的用户视线方向获得虚拟空间的FOV(视场);当在虚拟空间中发生热事件时,基于热事件相对于FOV的取向,确定多个反馈装置中的至少一个目标装置;并且向目标反馈装置传输指示输出热反馈的信号。
本发明的另一方面是提供一种用于提供热体验的方法,该方法由执行多媒体内容并使用热电元件与输出热反馈的多个反馈装置协作的内容再现装置执行,该方法可以包括:执行提供虚拟空间的虚拟现实应用;根据从HMD(头戴式显示器)检测到的用户视线方向获得虚拟空间的FOV(视场);当在虚拟空间中发生热事件时,基于热事件相对于FOV的取向,确定多个反馈装置中的至少一个目标装置;并且向目标反馈装置传输指示输出热反馈的信号。
本发明的另一方面是提供一种用于提供热体验的方法,该方法可以包括:执行包括具有健康点的玩家角色的游戏;基于健康点生成热反馈数据;并且基于热反馈数据,通过使用热电元件来控制输出热反馈的反馈装置的热电操作。
在本文中,所述生成可以包括基于健康点的变化幅度来确定热反馈数据中的热反馈的强度。
在本文中,热反馈的强度可以被判断为随着变化越大而越大。
在本文中,所述生成可以包括根据健康点改变时健康点是增加还是减少来确定是否输出热反馈。
在本文中,所述生成可以包括当健康点降低时确定热反馈的输出。
在本文中,所述生成可以包括根据健康点改变时健康点是增加还是减少来确定热反馈的类型。
在本文中,所述生成可以包括将第一热反馈确定为热反馈,其中,当健康点增加时,第一热反馈是热反馈或冷反馈中的一个,并且将第二热反馈确定为热反馈,其中,当健康点减少时,第二热反馈是热反馈或冷反馈中的另一个。
在本文中,所述生成可以包括根据当前健康点与最大健康点的比率或当前健康点的量来确定热反馈数据中的热反馈的强度和类型。
本发明的另一方面是提供一种用于提供热体验的方法,该方法可以包括:执行热体验应用,该热体验应用根据虚拟对象的触摸事件输出热反馈;当发生虚拟对象的触摸事件时,获得分配给虚拟对象的温度特性和纹理属性;基于温度特性确定至少包括热反馈和冷反馈的热反馈的类型;基于纹理属性确定热反馈的强度;并且将包括热反馈的类型和强度的热反馈的开始信号传输到包括热电元件的反馈装置,该热电元件根据热电操作输出热反馈。
本发明的另一方面是提供一种用于提供热体验的方法,该方法可以包括:驱动多媒体内容,例如,实现虚拟空间的虚拟现实应用,虚拟热源设置在虚拟空间中;根据虚拟热源确定虚拟空间中玩家角色接收的热量;基于所确定的热量确定热反馈的强度;并且将包括热反馈强度的热反馈的开始信号传输到包括热电元件的反馈装置,该热电元件根据热电操作输出热反馈,其中,确定热量可以包括确定虚拟热源的热传输属性是传导类型还是辐射类型,并且基于虚拟热源的热传输属性和到玩家角色的距离来计算热量。
在本文中,确定热量可以包括仅当玩家角色触摸虚拟热源时,基于提供给虚拟热源的温度值计算热量,并且当玩家角色与传导类型的虚拟热源的虚拟热源分离时,计算热量为‘0’。
在本文中,确定热量可以包括基于玩家角色和辐射类型的虚拟热源的虚拟热源之间的距离来计算热量。
在本文中,确定热量,确定辐射类型的虚拟热源的热量可以包括以下中的至少一个:当辐射类型的热源是辐射热源时,计算距离越小而越大的热量;当辐射型热源是定向热源时,根据施加到热源的温度,计算热量至恒定值,而与距离无关;或者当辐射类型的热源是面积热源时,仅当距离小于或等于预定距离时,才计算热量。
本发明的另一方面是提供一种用于提供热体验的方法,该方法可以包括:执行提供虚拟空间的虚拟现实应用,其中,虚拟空间包括温度特性分配给的虚拟区域和温度特性分配给的虚拟对象;当发生反映玩家角色进入虚拟区域的区域事件时,控制反馈装置输出热反馈,其中,反馈装置使用执行热电操作的热电元件输出热反馈;当发生对象事件时,控制反馈装置输出热反馈,其中,对象事件是玩家角色和虚拟对象交互的事件;在区域事件的发生中检测对象事件的发生;停止区域事件的热反馈的输出,并且控制反馈装置执行对象事件的热反馈的输出。
本发明的另一方面是提供一种用于提供热体验的方法,该方法可以包括:执行提供虚拟空间的虚拟现实应用,其中,虚拟空间包括温度特性分配给的虚拟区域,该虚拟区域具有全局区域和包括在该全局区域中的局部区域;当玩家角色进入全局区域时,控制反馈装置输出对应于全局区域的温度特性的热反馈,其中,反馈装置使用执行热电操作的热电元件输出热反馈;并且当玩家角色进入局部区域时,控制反馈装置用对应于局部区域的温度特性的热反馈来覆盖对应于全局区域的温度特性的热反馈。
本发明的另一方面是提供一种用于提供热体验的方法,该方法可以包括:当发生玩家角色的击中事件时,执行引起热反馈的游戏;根据击中事件设置热反馈的强度;当发生击中事件时,获得施加到玩家角色的热阻;考虑热阻来校正热反馈的强度;并且根据热反馈的校正强度,控制反馈装置输出热反馈,其中,反馈装置使用执行热电操作的热电元件输出热反馈。
在本文中,所述获得可以包括基于玩家角色的容量和分配给玩家角色的设备的热阻值来计算玩家角色的热阻。
在本文中,所述校正可以包括根据击中事件确定热反馈的类型,在角色的热阻中确定对应于热反馈类型的热阻,并且基于对应于热反馈类型的热阻,校正热反馈的强度。
1.热体验提供系统
在下文中,将描述根据本发明的实施例的热体验提供系统。
1.1.热体验系统概述
根据本发明的实施例的热体验提供系统是允许用户体验热体验(TX)的系统。具体地,热体验提供系统可以允许用户在再现多媒体内容时通过输出热反馈,作为内容的表示模式的一部分,来体验热体验。
在本文中,热反馈是一种热刺激,刺激主要分布在用户身体内的热感觉器官,让用户感受到热感觉。在本说明书中,指代所有热刺激的热反馈应该被解释为包含性的。
热反馈的代表性示例包括热反馈和冷反馈。热反馈是指通过向分布在皮肤上的热点施加暖热量或正热量而使用户感受到热的热反馈。冷反馈是指通过向分布在皮肤上的冷点施加冷热量或负热量而使用户感受到冷的热反馈。
在本文中,因为热量是以正标量形式表示的物理量,所以从物理角度来看,“施加冷热量”或“施加负热量”的表达可能不是精确的表达。然而,为了描述方便,在本说明书中,吸收热量是指施加冷热量。术语“负热量”也可以被用来代替“冷热量”。
此外,除了热反馈和冷反馈之外,本说明书中的热反馈还可以包括热格栅反馈。当同时给予暖热量和冷热量时,用户将其感知为疼痛感觉,而不是将其识别为单独的冷感觉和热感觉。这种疼痛感被称为所谓的热格栅错觉(TGI)。即,热格栅反馈是指施加暖热量和冷热量的组合的热反馈,并且可以主要通过同时输出热反馈和冷反馈来提供。热格栅反馈在提供更接近感觉的感觉方面也可以称为热感觉反馈。下面将提供热格栅反馈的更详细的讨论。
在本文中,多媒体内容可以包括各种内容,包括运动图像、游戏、虚拟现实应用、增强现实应用等。
通常,主要根据基于图像和语音的视听表示模式向用户提供多媒体内容,但是在本发明中,可以包括基于上述热反馈的热表达,作为基本表示模式。
此外,多媒体内容的‘回放’或‘再现’应该被解释为综合含义,包括执行多媒体内容以提供给用户的所有操作。因此,本说明书中的术语‘回放’应该被解释为不仅包括通过媒体玩家再现运动图像的操作,还包括执行游戏程序、训练程序、虚拟现实应用、增强现实应用的操作。
1.2.热体验系统的配置
图1是根据本发明的实施例的热体验提供系统1000的配置的框图。
参考图1,热体验提供系统1000可以包括内容再现装置1200、视听装置1400和反馈装置1600。
在本文中,内容再现装置1200再现多媒体内容,视听装置1400根据内容的再现输出图像或音频,并且反馈装置1600可以根据内容的再现输出热反馈。
例如,内容再现装置1200可以解码包括视频数据、音频数据和热反馈数据的多媒体内容,以生成视频信号、音频信号和与热反馈相关的信号(热反馈信号)。视频信号和音频信号可以传输到视听装置1400,热反馈信号可以传输到反馈装置1600。视听装置1400接收视频信号和音频信号并输出视频和音频,反馈装置1600接收热反馈信号并输出热反馈。
在下文中,将更详细地描述热体验提供系统1000的每个组件。
1.2.1.内容回放装置
内容再现装置再现多媒体内容。
图2是根据本发明的实施例的内容再现装置1200的配置的框图。
参考图2,内容再现装置1200可以包括通信模块1220、存储器1240和控制器1260。
通信模块1220可以与外部装置通信。内容再现装置1200可以通过通信模块1220向视听装置和反馈装置传输数据和从视听装置和反馈装置接收数据。例如,内容再现装置1200可以经由通信模块1220向视听装置传输音频/视频信号,或者向反馈装置发送热反馈信号。此外,内容再现装置1200可以通过通信模块1220访问互联网,以下载多媒体内容。
通信模块1220可以包括有线型通信模块和无线型通信模块。因为有线类型和无线类型具有优点和缺点,所以内容再现装置1200可以具有有线型通信模块和无线型通信模块。
LAN(局域网)和USB(通用串行总线)通信是有线型通信方法的典型示例,其他方法也是可能的。
在无线型通信方法的情况下,可以使用基于无线个人区域网(WPAN)的通信方法,例如,Bluetooth或Zigbee。然而,由于无线通信协议不限于此,所以也可以使用基于WLAN(无线局域网)的通信方法,例如,Wi-Fi或其他已知的通信方法。
也可以使用游戏机或控制台制造商开发的专有协议,作为有线/无线通信协议。
存储器1240可以存储各种信息。在存储器1240中,可以暂时或半永久地存储各种数据。存储器1240的示例包括硬盘驱动器(HDD)、固态驱动器(SSD)、闪存、ROM(只读存储器)、RAM。可以以嵌入在内容再现装置1200中的形式或者以可拆卸的形式提供存储器1240。
存储器1240存储内容再现装置1200的操作所需的各种数据,包括用于操作内容再现装置1200的操作系统(OS)或要由内容再现装置1200再现的内容。
控制器1260可以控制内容再现装置1200的整体操作。例如,控制器1260可以从存储器1240加载多媒体内容并将其再现,或者可以根据内容的再现生成视频信号、音频信号或热反馈信号。
控制器1260可以根据硬件、软件或其组合实现为CPU(中央处理单元)等。可以以通过在硬件中处理电信号来执行控制功能的电子电路的形式提供,并且可以以用于在软件中驱动硬件电路的程序或代码的形式提供。
1.2.2.视听装置
视听装置可以根据多媒体内容的再现来输出视频和音频。
图3是根据本发明的实施例的视听装置1400的配置的框图。
参考图3,视听装置1400可以包括通信模块1420和A/V模块1440。
通信模块1420可以与外部装置通信。视听装置1400可以经由通信模块1420向内容再现装置传输数据和从内容再现装置接收数据。例如,视听装置1400可以经由通信模块1420从内容再现装置接收音频信号和/或视频信号。
由于视听装置1400的通信模块1420可以被配置为类似于内容再现装置的通信模块,因此将省略其详细描述。
A/V模块1440可以向用户提供视频或音频。为此,A/V模块1440可以包括视频模块1442和音频模块1444。
图像模块1442通常以显示形式提供,并且可以根据从内容再现装置接收的视频信号输出视频。音频模块1444通常以扬声器的形式提供,以便根据从内容再现装置接收的音频信号输出音频。
1.2.3.反馈装置
反馈装置可以响应多媒体内容的再现输出热反馈。
图4是根据本发明的实施例的反馈装置1600的框图。
在图4中,反馈装置1600可以包括通信模块1620和热输出模块1640。
通信模块1620可以与外部装置通信。反馈装置1600可以经由通信模块1620向内容再现装置传输数据和从内容再现装置接收数据。例如,反馈装置1600可以经由通信模块1620从内容回放装置接收热反馈信号。
热输出模块1640可以输出热反馈。热反馈可以通过向用户身体施加暖热量(正热)或冷热量(负热)来提供。暖热量(正热)和/或冷热量(负热)可以由功率输出模块1640生成,并且功率输出模块1640可以包括接触用户身体的接触表面1641和连接到该接触表面的热电元件。热反馈可以经由接触表面1641提供给用户身体。
热输出模块1640可以与经由通信模块1620从内容再现装置接收的热反馈信号一起执行发热操作、吸热操作和/或热格栅操作,以输出热反馈,然后用户可以体验输出的热反馈。
稍后将描述热输出模块1640的具体配置和操作的更详细描述。
1.3.热体验系统的实施方式
具有上述配置的热体验提供系统可以以各种形式实现。在下文中,将描述热体验提供系统的一些实施方式。
1.3.1.第一实施方式
热体验提供系统的第一实施方式涉及用于再现增强现实应用或虚拟现实应用的系统。
图5是根据本发明的实施例的热体验提供系统1000-1的第一实施方式的示意图,并且图6是根据本发明的实施例的热体验提供系统1000-1的第一实施方式的示意图。
参考图5和6,根据本实施例的热体验提供系统1000-1包括控制台装置1200-1、头戴式显示器(HMD)1400-1和输入装置1600-1。在本文中,控制台装置1200-1可以对应于内容再现装置1200,HMD 1400-1可以对应于视听装置,并且输入装置1600-1可以对应于反馈装置。
在下文中,将描述根据该实施例的热体验提供系统1000-1的每个组件。
可以提供对应于内容再现装置的控制台装置1200-1,作为用于再现增强现实应用或虚拟现实应用的电子装置。例如,控制台装置1200-1可以包括游戏控制台,用于专业地执行VR应用,例如,索尼的游戏站VR(TM),并且设置为能够执行AR/VR应用的PC。
控制台装置1200-1可以包括通信模块、存储器和控制器,类似于上述内容再现装置。
图7和8是示出根据本发明的实施例的热体验提供系统1000-1的第一实施方式的HMD1400-1的示例性形式的示意图。
对应于视听装置的HMD 1400-1可以安装在用户的头部,以向用户提供视频和/或音频。音频可以通过耳机等提供给用户。
例如,如图7所示,HMD 1400-1可以设置为HMD型电子装置1400a,例如,Oculus的RiftTM或HTC的ViveTM,并且HMD 1400-1可以耦合到PC或游戏控制台,并且可以通过不透明显示器输出视频。
在另一示例中,如图8所示,视听装置可以被实现为眼镜型穿戴式装置1400b,例如,谷歌的Google GlassTM。眼镜型穿戴式装置1400b可以通过透明显示器显示虚拟视频(虚拟图像)。可以经由透明显示器向用户提供虚拟视频,该虚拟视频可以增强用户对真实世界的视觉体验。同时,尽管眼镜型穿戴式装置1400b在概念上不同于使用传统不透明显示器的HMD型电子装置1400a,但是根据本申请的HMD 1400-1应当理解为包括眼镜型穿戴式装置1400b的综合概念。
图9是与根据本发明的实施例的热体验提供系统的第一实施方式的HMD 1400-1的配置相关的框图。
参考图9,类似于上述视听装置,HMD 1400-1可以包括通信模块1420和A/V模块1440。
然而,在本实施例中,除了从控制台装置接收A/V信号之外,通信模块1420还可以将感测模块1460感测到的信息传输到控制台装置。此外,通信模块1420可以设置为无线类型,使得安装在用户头部的HMD 1400-1不会尽可能多地干扰用户的移动。
此外,A/V模块1440中的图像模块1442可以包括两个显示器。一个显示器用于左眼,另一显示器用于右眼,然后两个显示器可以输出立体3D,用于实现虚拟现实或增强现实。图像模块1442可以以透明显示器或投影仪的形式提供,用于将虚拟图像投影到透明眼镜上,使得用户观看的虚拟图像和真实图像一起提供。
返回参考图9,HMD 1400-1可以进一步包括感测模块1460和相机1480。
感测模块1460可以感测实现增强现实或虚拟现实所需的各种信息。特别地,为了在增强现实或虚拟现实中向用户提供高真实感,需要根据用户头部的移动来控制视频输出。因此,感测模块1460可以包括用于感测用户姿态的姿态传感器和/或用于感测用户运动的运动传感器。
相机1480可以捕捉图像和/或视频。为了实现增强现实,需要识别实际空间,并且可以使用由相机1480拍摄的图像。此外,捕捉的图像和/或视频可以通过与虚拟图像合成来生成增强图像。
图10和11是示出根据本发明的实施例的热体验提供系统的第一实施方式的输入装置1600-1的示例性形式的示意图。
对应于反馈装置的输入装置1600-1可以接收用户操作,并且可以输出热反馈。
例如,如图10所示,输入装置1600-1可以设置为由用户的手抓握的条形输入装置1600a,例如,索尼的用于Move MotionTM或ViveTM的游戏控制器。在本文中,如图11所示,也可以成两对地实现条形输入装置1600b,以便握在用户的双手上。
图12是与根据本发明的实施例的热体验提供系统的第一实施方式的输入装置1600-1的配置相关的框图。
参考图12,输入装置1600-1可以包括通信模块1620和热输出模块1640,类似于上述反馈装置。
然而,在本实施例中,通信模块1620可以从控制台装置接收热反馈信号。此外,通信模块1620可以将与通过输入模块1650输入的用户操作相关的信息和/或由感测模块1660感测的信息传输到控制台装置。通信模块1620可以以无线类型提供,使得用户可以容易地操作输入模块1650。
参考图12,输入装置1600-1可以进一步包括外壳1610、输入模块1650、感测模块1660和振动模块1670。
外壳1610形成输入装置1600-1的外观,并且可以在其中容纳输入装置1600-1的其他组件。因此,外壳可以保护外壳免受外部冲击等。
可以向输入装置1600-1提供用于由用户抓握输入装置1600-1的抓握部分。热输出模块1640的触摸表面可以设置在抓握部分上。抓握部分是输入装置1600-1接触用户身体的部分。此外,抓握部分可以由具有高摩擦力的材料(例如,橡胶或聚氨酯)制成,或者可以具有防滑形状(例如,不规则形状等)。抓握部分也可以由吸收用户皮肤生成的汗水的材料制成。
输入模块1650可以从用户获得用户输入。输入模块1650可以以按钮类型和/或棒类型实现,并且用户可以通过按下按钮和/或在特定方向上操作棒来输入用户输入。输入模块1650的实施方式不限于上述示例性形式。
感测模块1660可以感测与输入装置1600-1相关的各种信息。典型感测模块1660的示例包括用于感测输入装置1600-1的姿态的姿态传感器、用于感测输入装置1600-1的运动的运动传感器以及用于感测用户生物信号的生物传感器。陀螺仪传感器和/或加速度传感器可以用作姿态传感器和/或运动传感器。生物传感器可以包括用于感测用户体温的温度传感器和/或用于感测心电图的心电图传感器。
振动模块1670可以输出振动反馈。振动反馈和热反馈可以进一步增强用户对游戏的体验。
同时,上述输入装置可以以除条形以外的各种形式提供。
图13-17是示出根据本发明的实施例的热体验提供系统的第一实施方式的输入装置1600-1的另一示例形式的示意图。
参考图13,输入装置1600-1可以设置为双手持式游戏控制器类型的装置,例如,索尼的PlayStationTM Dual ShockTM或微软的XboxTM的游戏控制器。
在输入装置1600-1被实现为游戏控制器类型装置的情况下,两个抓握部分可以设置在外壳的两个间隔开的部分处,以便双手抓握。接触表面1641可以设置在每个抓握部分上。
此外,输入装置1600-1可以设置为如图14所示的赛车游戏中使用的轮式装置1600d、如图15所示的飞行模拟器游戏中使用的操作杆型装置1600e、如图16所示的第一人称射击(FPS)游戏中使用的枪型装置1600f和/或如图17所示的计算机游戏环境中通常使用的鼠标型装置1600g。
此外,在本实施例中,热体验提供系统还包括穿戴式装置,或者输入装置可以被穿戴式装置代替。在这种情况下,穿戴式装置可以对应于反馈装置。
图18至22是示出根据本发明的实施例的热体验提供系统的第一实施方式中的穿戴式装置1600-1’的示例性形式的示意图。
对应于反馈装置的穿戴式装置1600-1’可以佩戴在用户身体上,以用作人机接口(HMI)并输出热反馈。
穿戴式装置1600-1’可以根据安装在用户身体上的部件以各种形式提供。例如,穿戴式装置1600-1’可以包括上述眼镜或HMD型、如图18所示的套装型装置1600h、如图19所示的手套型装置1600i、如图20所示的鞋型装置1600j、如图21和22所示的手表型装置1600k或带型装置1600l。
穿戴式装置可以包括已经相对于输入装置进行了描述的通信模块和热输出模块。
同时,穿戴式装置可以包括形成穿戴式装置外观的主体和能够感测用户的动作、姿态和/或生物信息的感测模块。在本文中,热输出模块的接触表面可以形成在主体上。
穿戴式装置对于每种类型也可以具有稍微不同的额外组件。例如,带式装置或手表型装置的穿戴式装置可以具有用于显示各种可见信息的显示器。
1.3.2.第二实施方式
热体验提供系统的第二实施方式涉及用于再现增强现实应用或虚拟现实应用的系统。
图23是根据本发明的实施例的热体验提供系统1000-2的第二实施方式的示意图。图24是根据本发明的实施例的热体验提供系统1000-2的第二实施方式的框图。
热体验提供系统1000-2的第二实施方式用于处理增强现实应用或虚拟现实应用,并且可以类似于热体验提供系统的第一实施方式来提供。然而,参考图23,在本实施方式中,控制台装置可以用智能装置1200-2替换。在本文中,智能装置1200-2可以对应于内容再现装置和视听装置。
例如,智能装置1200-2可以设置在智能手机型装置中,例如,三星电子的GalaxyS6TM。智能装置1200-2通常包括显示器、音频输出端、相机、姿态传感器等,并且可以安装在HMD1400-2上,以实现虚拟现实或增强现实。
图25是与根据本申请的热体验提供系统的第二实施方式的智能装置1200-2的配置相关的框图。
根据第二实施方式,智能装置1200-2可以包括A/V模块1440、感测模块1460和相机1480。这表示在第二实施方式中,可以在智能装置中,而不是在HMD中,提供A/V模块1440、感测模块1460和相机1480。然而,不一定省略HMD中的A/V模块1440、感测模块1460和相机1480。
1.3.3.第三实施方式
热体验提供系统的第三实施方式涉及用于再现增强现实应用或虚拟现实应用的系统。
图26是根据本发明的实施例的热体验提供系统1000-3的第三实施方式的示意图。图27是根据本发明的实施例的热体验提供系统1000-3的第三实施方式的示意图。
热体验提供系统1000-3的第三实施方式用于处理增强现实应用或虚拟现实应用,并且可以类似于热体验提供系统的第一实施方式来提供。然而,参考图27,第一实施方式的控制台装置可以包含到第三实施方式的HMD 1200-3中。因此,HMD 1200-3可以对应于内容再现装置和视听装置。
例如,HMD 1200-3可以以具有内置CPU的HMD的形式提供,例如,微软的HololensTM。因此,HMD 1200-3可以独立地执行虚拟现实或增强现实应用,而不与控制台装置连接。因此,在本实施方式中,可以在热体验提供系统1000-3中省略控制台装置,并且HMD1200-3可以包括存储器和控制器。
1.3.4.第四实施方式
热体验提供系统的第四实施例涉及用于通过传统2D屏幕再现多媒体内容(例如,视频内容或游戏内容)的系统。
图28是根据本发明的实施例的热体验提供系统1000-4的第四实施方式的示意图。
热体验提供系统1000-4的第四实施方式用于处理传统2D屏幕上的多媒体内容,并且可以类似于热体验提供系统的第一实施方式来提供。参考图28,在本实施方式中,第一实施方式的HMD可以被提供2D屏幕的显示装置1400-4代替。在本文中,控制台装置1200-4可以对应于内容再现装置,并且显示装置1400-4可以对应于视听装置。此外,输入装置1600-4可以对应于反馈装置。
显示装置1400-4可以包括上述第一实施方式的通信模块和A/V模块。例如,显示装置1400-4可以以电视、监视器、投影仪等形式提供。此外,显示装置1400-4可以以立体方式向用户提供3D图像。
1.3.5.第五实施方式
热体验提供系统的第五实施方式涉及一种用于通过传统2D屏幕再现多媒体内容(例如,视频内容或游戏内容)的系统。
图29是根据本发明的实施例的热体验提供系统1000-5的第五实施方式的示意图。
可以提供热体验提供系统1000-5的第五实施方式,用于处理增强现实应用或虚拟现实应用,并且类似于热体验提供系统的第四实施方式提供。参考图29,在本实施方式中,在第四实施方式中描述的控制台装置和显示装置可以用智能装置1200-5代替。在本第五实施方式中,控制台装置和显示装置可以集成在智能装置1200-5中。在本文中,智能装置1200-5可以对应于内容再现装置和视听装置。
例如,智能装置1200-5可以以智能电话、笔记本、平板电脑等形式提供。因此,在本实施方式中,智能装置1200-5可以进一步包括A/V模块。
1.3.6.第六实施方式
在热体验提供系统的第六实施方式中,热体验提供系统可以包括便携式智能装置和连接到便携式智能装置的外围装置。当用户携带智能装置时,该实施方式对用户可能是有用的。
图30是根据本发明的实施例的热体验提供系统1000-6的第六实施例的示意图。
在本实施方式中,智能装置1200-6可以类似于第五实施方式的智能装置1000-5来提供。
外围装置1600-6还包括反馈装置的基本配置,并且可以另外包括便携式智能装置1200-6可以安装到其上的底座和用于输出热反馈的电池。例如,外围装置1600-6可以设置为如图30所示的自粘式或智能手机外壳形状。外围装置1600-6可以结合便携式智能装置1200-6输出热反馈。
2.热输出模块
在下文中,将描述根据本发明的实施例的热输出模块。
2.1.热输出模块概述
热输出模块可以执行发热操作、吸热操作和/或热格栅操作,以通过施加暖热量和冷热量向用户输出热反馈。在热体验提供系统中,当反馈装置接收热反馈信号时,安装在反馈装置上的热输出模块向热体验提供系统的用户输出热反馈。因此,可以向用户提供热体验。
热输出模块可以使用热电元件,例如,珀耳帖元件,来执行发热操作、吸热操作或热格栅操作。
珀耳帖效应是Jean Peltier在1834年发现的热电现象。根据珀耳帖效应,当电流流过两个导体之间的接点时,在接点的一侧发生发热,在接点的另一侧发生吸热。珀耳帖元件是产生这种珀耳帖效应的元件。珀耳帖元件最初由诸如铋和锑的不同金属的接点制成,但近年来,通过在衬底之间设置N-P半导体来制造,用于提高热效率。
珀耳帖元件能够在施加电流的瞬间响应中在元件的两侧发热和吸热,通过改变施加电流的方向容易地在发热和吸热之间切换,并且通过控制电流量精确地调整发热或吸热的强度。因此,珀耳帖元件适用于热反馈的发热操作或吸热操作。特别地,随着柔性热电元件的开发,可以以容易接触用户身体的形式制造热电元件,并且作为反馈装置的商业使用的可能性正在增加。
因此,当向热电元件供电时,热输出模块可以进行发热操作或吸热操作。尽管在物理上供电的热电元件中同时发生发热和吸热,但是在本说明书中,参考接触表面来定义发热操作和吸热操作。更具体地,发热操作是导致在与用户身体接触的接触表面处发热的操作,吸热操作是导致在接触表面处吸热的操作。例如,热电元件可以通过在衬底上设置N-P半导体来制造,并且当电流施加到热电元件时,在热电元件的一侧发热,在热电元件的另一侧吸热。在本文中,我们可以将热电元件面向用户身体的一侧定义为前侧,将相对侧定义为后侧。然后,为热输出模块定义导致在前侧发热和在后侧吸热的操作,以进行发热操作,并且为热输出模块定义导致在前侧吸热的操作,以进行吸热操作。
因为热电效应是由热电元件中流动的电荷引起的,所以可以从电流的角度来描述引起热输出模块的发热操作或吸热操作的电能。然而,在本说明书中,我们将主要从电压的角度来描述施加到热电元件的电能。但是,因为这仅仅是为了方便解释,并且很明显,本领域技术人员从基于电压的描述从电流的角度来理解本发明的实施例,所以应该注意,本发明不应该根据电压来解释。
2.2.热输出模块的配置
图31是根据本发明的实施例的热输出模块1640的配置的框图。
参考图31,热输出模块1640包括接触表面1641、衬底1642、设置在衬底1642上的热电偶阵列1643、用于向热输出模块1640供电的电源端子1640以及反馈控制器。
接触表面1641被配置为直接接触用户的身体,以将热输出模块1640生成的暖热量或冷热量传输到用户的皮肤。换言之,反馈装置的外表面直接接触用户身体的部分可以是接触表面1641。例如,接触表面1641可以形成在用户抓握的反馈装置的外壳的抓握部分上。
接触表面1641可以被配置为直接或间接连接到热电偶阵列1643的外表面(朝向用户身体的方向)的层,热电偶阵列1643在热输出模块1640中执行发热操作或吸热操作。这种类型的接触表面1641设置在热电偶阵列1643和用户皮肤之间,以执行热传输。接触表面1641可以由具有高导热性的材料制成,从而有效地执行从热电偶阵列1643到用户身体的热传输。层状接触表面1641可以防止热电偶阵列1643直接暴露于外部,从而保护热电偶阵列1643免受外部冲击。
在以上描述中,接触表面1641设置在热电偶阵列1643的外表面上。然而,热电偶阵列1643本身的外表面可以用作接触表面1641。换言之,热电偶阵列1643的前表面的一部分或全部可以是接触表面1641。
衬底1642可以被配置为支撑热电偶单元,并且设置为绝缘材料。例如,可以选择陶瓷作为衬底1642的材料。衬底1642可以是平板形状,但不是必须如此。
衬底1642可以设置有柔性材料,以便具有通常可用于具有各种形状的接触表面1641的各种类型的反馈装置的柔性。例如,在游戏控制器类型装置的反馈控制器中,用户用手掌握住游戏控制器的抓握部分可以具有曲面。为了在这样的弯曲部分中使用热输出模块1640,衬底1642的柔性可能是重要的。用于衬底1642的柔性材料的示例包括玻璃纤维和柔性塑料。
热电偶阵列1643包括设置在衬底1642上的多个热电偶单元。热电偶单元可以配置有不同金属(例如,铋和锑)对。优选地,热电偶单元可以配置有N型和P型半导体对。
在热电偶单元中,半导体对在一端彼此电连接,在另一端电连接到相邻热电偶单元的半导体。半导体对和或相邻半导体对之间的电连接由设置在衬底1642上的导体构件实现。导体构件可以是引线或电极,诸如是铜或银。
热电偶单元可以串联电连接。串联连接的多个热电偶单元可以形成热电偶组。至少一个热电偶组1644可以形成热电偶阵列1643。
电源端子1647可以向热输出模块1640供电。热电偶阵列1643可以根据施加到电源端子1647的功率生成热量或吸收热量。根据功率的电压值和/或电流方向,确定热电偶阵列是生成热量还是吸收热量。一对电源端子1647可以连接到一个热电偶组。当热输出模块1640(热电偶阵列1643)配置有多个热电偶组时,可以设置多对电源端子。因此,对于每个热电偶组1643,单独控制电压值和电流方向,并且可以控制对于单独的热电偶阵列1643是执行发热操作还是吸热操作。此外,对于在热输出模块1640中的单独的热电偶阵列1643,还可以控制发热或吸热的程度。
如下所述,电源端子1647接收反馈控制器输出的电信号。反馈控制器可以调整电信号的电流方向和/或电压值。因此,可以控制热输出模块1640的发热操作和吸热操作。当多个热电偶组设置在热输出模块1640中时,也可以单独控制针对每个热电偶组单独施加到电源端子的电信号。
反馈控制器可以经由电源端子1647向热电偶阵列1643施加电信号。具体地,反馈控制器可以经由通信模块从内容再现装置的控制器接收与热反馈相关的信息,然后反馈控制器可以分析接收到的信息,以确定热电操作的类型和程度。然后,反馈控制器可以根据确定结果生成电信号。生成的电信号可以施加到电源端子1647,使得热电偶阵列1643可以输出热反馈。
反馈控制器可以进行各种信息的计算和处理,并且根据计算和处理的结果通过向热输出模块输出电信号来控制热输出模块1640的操作。因此,反馈控制器可以在计算机或类似装置中被实现为硬件、软件或其组合。硬件的反馈控制器可以以通过处理电信号来进行控制功能的电子电路的形式提供。软件的反馈控制器以用于驱动硬件电路的程序或代码的形式提供。
反馈装置还可以设置有多个上述热输出模块1640。例如,如果反馈装置具有如图13所示的多个抓握部分,则可以为反馈装置的每个抓握部分安装热输出模块1640。如果反馈装置设置有多个热输出模块1640,则反馈装置可以为每个热输出模块1640设置反馈控制器。另一方面,可以提供单个反馈控制器,以整体管理反馈装置中的所有热输出模块1640。此外,如图11所示,当在热体验系统中提供多个反馈装置时,一个或多个热输出模块可以设置在每个反馈装置中。
2.3.热输出模块的类型
将基于对热输出模块的配置的描述来描述热输出模块的一些实施例。
图32是根据本发明的实施例的热输出模块1640的一个实施例的示图。
参考图32,在热输出模块1640的一个实施例中,提供一对衬底1642,以便彼此面对。接触表面位于两个衬底1642中的一个的外表面上,以将热输出模块1640生成的热传输到用户身体。如果衬底1642配置有柔性衬底1642,则柔性可以被定义为热输出模块1640的一个属性。
多个热电偶单元1645可以设置在衬底1642之间。每个热电偶单元1645由N型半导体1645a和P型半导体1645b的半导体对组成。在一个热电偶单元1645中,N型半导体1645a和P型半导体1645b在一端通过导体构件1646彼此电连接。热电偶单元1645的N型半导体1645a和P型半导体1645b的另一端分别连接到一个相邻热电偶单元1645的P型半导体1645b和另一相邻热电偶单元1645的N型半导体1645a。热电偶单元1645之间的电连接由衬底1642实现。因此,热电偶单元串联连接,以形成一个热电偶组。在该实施例中,由于热电偶阵列1643由一个热电偶组组成,并且所有热电偶单元1645串联连接在电源端子之间,所以热输出模块1640可以在整个接触表面(前表面)上执行相同的热电操作。即,当电力沿一个方向施加到电源端子时,热输出模块1640执行发热操作,并且当电力沿相反方向施加时,热输出模块1640执行吸热操作。
图33是根据本发明的实施例的热输出模块1640的另一实施例的示图。
参考图33,另一实施例的热输出模块1640部分类似于上述一个实施例。然而,在该实施例中,热电偶阵列1643具有多个热电偶组1644,并且每个热电偶组1644连接到相应的电源端子1647。例如,施加到第一热电偶组1644-1的第一电流的方向可以不同于施加到第二热电偶组1644-2的第二电流的方向,使得如果第一热电偶组1644-1执行发热操作,则第二热电偶组1644-2可以执行吸热操作。此外,施加到第一热电偶组1644-1的第一电压值可以不同于施加到第二热电偶组1644-2的第二电压值,使得由第一热电偶组1644-1执行的第一热电操作的程度可以不同于由第二热电偶组1644-2执行的第二热电操作的程度。
如图33所示,热电偶组1644可以设置在热电偶阵列1643中的一维阵列中。或者,热电偶组1644可以设置在热电偶阵列1643中的二维阵列中。图34是根据本发明的实施例的热输出模块1640的另一实施例的示图。如图34所示,根据本申请的一个实施例,热电偶组可以设置在热电阵列中的二维阵列中。由于二维阵列,可以以二维方式控制热电偶阵列的热电操作。
同时,尽管热输出模块的上述实施例被描述为使用一对相对的衬底,但是也可以使用单个衬底。
图35是根据本申请的实施例的热输出模块1640的另一实施例的另一示图。参考图35,热电偶单元1645可以嵌入在单个衬底1642中。在该实施例中,玻璃纤维等可以用作衬底1642的材料,并且热电偶单元1645可以在其中部由单个衬底1642支撑。本实施例的单个衬底1642的使用可以为热输出模块1640提供更大的灵活性。
上述热输出模块的各种实施例可以在本申请的范围内相互组合或修改。例如,尽管在上述实施例中接触表面形成在热输出模块的前表面上,作为与热输出模块分离的层,但是热输出模块的一个表面可以用作没有分离层的接触表面。即,在上述实施例中描述的一个衬底的外表面可以是接触表面。
2.4.热反馈输出
在下文中,将描述由反馈装置执行的热反馈输出操作。
当热输出模块执行发热操作或吸热操作时,反馈装置可以输出热反馈。热反馈包括热反馈、冷反馈和热格栅反馈。
在本文中,热反馈可以通过执行发热操作来输出,冷反馈可以通过执行吸热操作来输出。此外,热格栅反馈可以通过热格栅操作输出,在热格栅操作中同时执行发热操作和吸热操作。
另一方面,反馈装置可以以各种强度输出上述热反馈。热反馈的强度可以以这样的方式调整,使得热输出模块的反馈控制器调整经由电源端子施加到热电偶阵列的电压的幅度。在本文中,控制电压幅度的方法包括在平滑占空比信号之后向热电偶阵列供电。即,通过调整占空比信号的占空比来调整电压电平的方法可以用于调整电压的幅度(电压电平)。
在下文中,将更详细地描述发热操作、吸热操作和热格栅操作。
2.4.1.发热/吸热操作
反馈装置可以通过使用热输出模块向用户提供热反馈来执行发热操作。类似地,热输出模块可以执行吸热操作,以向用户提供冷反馈。
图36是示出根据本发明的实施例的用于提供热反馈的发热操作的示图,图37是根据本发明的实施例的热反馈期间与温度相关的曲线图。
参考图36,当反馈控制器1648向热电偶阵列1643施加正向电流时,可以通过在接触表面上引发发热反应来执行发热操作。在本文中,当反馈控制器1648向热电偶阵列1643施加正向电压(下文中,被施加以在接触表面上引起发热反应的电压可称为“正向电压”或“前向电压”)时,热电偶阵列1643开始发热操作。根据发热操作,接触表面的温度可以随着时间上升到饱和温度,如图37所示。因此,在发热操作开始时,用户可以感觉不到热反馈或感觉到弱热反馈,然后用户可以开始感觉到热反馈,直到温度达到饱和温度(下文中,称为“热饱和温度”),并且用户可以在饱和时间(下文中,称为“热温度饱和时间”或“热饱和时间”)之后一致地感觉到对应于饱和温度(热饱和温度)的热反馈。
图38是示出根据本发明的实施例的用于提供冷反馈的吸热操作的示图,图39是根据本发明的一个实施例的在冷反馈期间与温度相关的曲线图。
参考图38,当反馈控制器1648向热电偶阵列1643施加反向电流时,可以通过在接触表面中引发吸热反应来执行吸热操作。在本文中,当反馈控制器1648向热电偶阵列1643施加反向电压(下文中,被施加以在接触表面上引发吸热反应的电压可称为“反向电压”或“逆向电压”)时,热电偶阵列1643开始吸热操作。根据吸热操作,接触表面的温度随着时间上升到饱和温度,如图39所示。因此,在吸热操作开始时,用户可以感觉不到冷反馈或者感觉到弱冷反馈,然后用户可以开始感觉热反馈,直到温度达到饱和温度,并且用户可以在饱和时间之后一致地感觉到对应于饱和温度(冷饱和温度)的冷反馈。
另一方面,当向热电元件供电时,除了在热电元件两侧发生的发热反应和吸热反应之外,电能可以转换成热能。即,可以生成焦耳热。因此,当通过仅改变电流方向来向热电偶阵列施加相同幅度的电压时,由于发热操作引起的温度变化量可能大于由于吸热操作引起的温度变化量。在本文中,温度变化量是指在热输出模块不工作的状态下饱和温度和初始温度之间的温差。
在下文中,热电元件使用电能执行的发热操作和吸热操作将统称为“热电操作”。此外,下面将描述的热格栅操作也可以被解释为一种“热电操作”,因为可以通过组合发热操作和吸热操作来实现热格栅操作。
2.4.2.发热操作/吸热操作的强度控制程度
如上所述,当热输出模块执行发热操作或吸热操作时,反馈控制器可以通过调整施加电压的幅度来控制热输出模块的发热程度或吸热程度。具体地,反馈控制器可以调整电流的方向,以在发热操作和吸热操作之间选择热电操作的类型,并且可以调整电压的幅度,以调整热反馈(当热输出模块执行发热操作时提供)或冷反馈(当热输出模块执行吸热操作时提供)的强度程度。
图40是示出根据本发明的实施例的基于电压幅度调整的热/冷反馈的强度程度的曲线图。
例如,参考图40,反馈控制器可以在正向或反向施加具有五个电平的电压,使得反馈装置可以向用户提供十个可区分的热反馈。
如图40所示,热反馈的强度程度的数量与冷反馈的强度程度的数量相同。然而,热反馈和冷反馈的强度程度(水平)的数量不必总是相同的,并且可以彼此不同。
在本文中,示出了具有相同程度(水平)反馈强度的热反馈和冷反馈通过使用相同幅度的电压改变电流方向来实现。然而,对相同强度(水平)的热反馈和冷反馈施加的电压值的幅度不需要彼此相等。
特别地,当施加相同幅度的电压来执行发热操作和吸热操作时,发热操作的温度变化量通常大于吸热操作的温度变化量。因此,在热反馈和冷反馈的相同水平(强度程度)下,如图41所示,用于冷反馈的电压幅度也可以大于用于热反馈的电压幅度。图41是根据本发明的实施例的与具有相同温度变化量的热/冷反馈相关的曲线图。
如上所述,除了简单地向用户提供热/冷反馈之外,电压幅度的调整可以提供具有多级的热反馈,例如,强热反馈、弱热反馈、强冷反馈和弱冷反馈。热反馈的这种不同强度程度可以增强用户在游戏环境或虚拟/增强现实环境中的热体验。此外,在本发明应用于医疗装置的情况下,可以更精确地检查患者的感觉。
2.4.3.热格栅操作
2.4.3.1.热格栅反馈的类型
热格栅反馈可以包括中性热格栅反馈、热格栅反馈和冷格栅反馈。
在本文中,中性热格栅反馈、热热格栅反馈和冷热格栅反馈分别为用户提供中性热格栅错觉、热热格栅错觉和冷热格栅错觉。中性热格栅错觉是指没有冷热感觉的热格栅错觉。热格栅错觉是指除了热格栅错觉之外,使用户感到热的错觉。冷热格栅错觉是指除了热格栅错觉之外,使用户感到冷的错觉。
当热热反馈和冷热反馈同时提供并且在预定的比率范围内提供时,可以实现中性热格栅错觉。中性热格栅错觉的比率(下文中,称为‘中性比率’)对于设置有热格栅反馈的身体的每个部分可以是不同的,即使是相同的身体部位,对于每个单独的用户也可以稍微不同。通常,当由暖热量激发的热感觉量(热热反馈)大于由冷热量激发的热感觉量(冷热反馈)时,或者当提供给用户的热感觉量大于提供给用户的冷感觉量时,用户倾向于感觉到热格栅错觉。
热反馈的强度程度可以表示为反馈装置提供给与接触表面接触的身体部位的热量或者从身体部位吸收的热量。这表示,当热反馈提供给特定身体部位达特定时间段时,热反馈的强度程度可以使用施加热反馈的目标身体部位的温度之间的差(例如,热反馈的初始点的温度和平衡点的温度之间的差)来表示。
另一方面,人体温度通常在36.5-36.9℃之间,皮肤温度因人而异,但已知平均在30-32℃左右。具体地,手掌的温度约为33℃,略高于平均皮肤温度。当然,上述温度值可能因人而异,甚至同一个人也可能因环境或条件而有所不同。
根据一个实验示例,证实当对33℃的手掌提供约40℃的热反馈和约20℃的冷热反馈时,感觉到中性热格栅错觉。在上述实验示例中,对33℃的手掌提供+7℃的热反馈和-13℃的冷热反馈。从上述实验情况来看,考虑到温度差异,人手掌的中性比率可以表示为1.86(=|-13|/|7|)。
由此可以理解,在大多数人中,当暖热量和冷热量连续施加到同一身体部位时,中性比率可以表示为热温差(暖热量的初始点和热平衡点之间的温差)和冷温差(冷热量的初始点和冷平衡点之间的温差)的比率,并且根据本申请,中性比率可以在1.5-5的范围内。此外,当在中性比率之上施加暖热量时,用户可以感测到热热格栅错觉,并且当在中性比率之上施加冷热量时,用户可以感测到冷热格栅错觉。
2.4.3.2.通过调整电压进行热格栅操作
反馈装置可以以电压控制方式执行热格栅操作。电压控制方式的热格栅操作可以由反馈装置实现,其中,热电偶阵列包括多个热电偶组。
具体地,可以通过向热电偶组的一部分施加正电压,以发热操作,并且向热电偶组的另一部分施加反向电压,以执行吸热操作,来执行电压控制方式中的热格栅操作。这表示热输出模块同时向用户提供热热反馈和冷热反馈。
图42是根据本发明的实施例的与热格栅操作相关的示图。
参考图42,热电偶阵列1643包括行设置的多个热电偶组1644。在本文中,反馈控制器1648允许第一热电偶组1644-1和1644-3(例如,热电偶组1644的奇数行)执行发热操作,并且允许第二热电偶组1644-2和1644-4(例如,热电偶组1644的偶数行)执行吸热操作。如果热电偶组1644根据行设置交替执行发热操作和吸热操作,则可以同时向用户提供热热反馈和冷热反馈。结果,可以向用户提供热格栅反馈。在本文中,热电偶阵列1644分成奇数行和偶数行,应该理解为示例性情况,并且本发明的范围不应该局限于上述实施例。
在本文中,反馈装置可以控制第一热电偶组1644-1和1644-3的饱和温度以及第二热电偶组1644-2和1644-4的饱和温度,以符合中性热格栅反馈的中性比率。
图43是根据本发明的实施例的用于以电压控制方式提供中性热格栅反馈的电压表。
例如,参考图43,反馈控制器可以分别向热输出模块施加五个正电压和五个负电压。热输出模块可以根据五个正电压和五个负电压生成五个发热操作和五个吸热操作。根据具有特定水平的发热操作的温度变化量可以与根据具有与发热操作相同水平的吸热操作的温度变化量相同。然而,相同水平的发热/吸热操作的温度变化量之间的关系不限于上述内容。假设每个相邻发热/吸热操作之间的温度变化量是恒定的,当中性比率设置为3时,反馈控制器可以向第一热电偶组施加第一电平正电压(例如,最小电平正电压),向第二热电偶组施加第三电平负电压,使得热输出模块可以提供中性热格栅反馈。当中性比率设置为2.5时,为了提供中性热格栅反馈,反馈控制器可以向第一热电偶组施加第二电平正电压,向第二热电偶组施加第五电平负电压。当中性比率被设置为2时,反馈控制器可以向热电偶阵列施加第一电平正电压和第二电平负电压或者第二电平正电压和第四电平负电压。用户可以感觉到由第一电平正电压和第二电平负电压的组合引起的热格栅反馈比由第二电平正电压和第四电平负电压的组合提供的热格栅反馈更痛苦。这表示后一个热格栅反馈的强度幅度大于前一个热格栅反馈的强度幅度。鉴于上述情况,可以根据所施加电压的控制来调整热格栅反馈的强度幅度。提供热格栅反馈的方法的以上描述应该理解为示例性实施例,因此本发明不应该局限于上述示例性实施例。例如,用于发热/吸热操作的等级(水平)的数量不限于5,并且用于发热操作的等级的数量不必与用于吸热操作的等级的数量相同。
反馈控制器还可以通过将正电压和负电压调整到低于中性比率来提供热热格栅反馈,或者通过将正电压和负电压调整到高于中性比率来提供冷热格栅反馈。
例如,参考图43,当反馈控制器向第一热电偶组施加第一电平正电压,向第二热电偶组施加第二电平负电压时(假设中性比率被设置为3),用户可以同时体验包括热热反馈和热格栅反馈的热格栅反馈。同时,在这种情况下,正电压不需要是中性热格栅反馈的正电压。换言之,反馈控制器可以允许热输出模块通过使用第四电平正电压和第四电平负电压来提供热热格栅反馈。
在冷热格栅反馈的情况下,当反馈控制器的中性比率设置为3时,反馈控制器可以向热输出模块施加第一电平正电压/第一电平负电压或第四电平正电压/第五电平负电压。
然而,在提供热热格栅反馈或冷热格栅反馈的情况下,当以大幅偏离中性比率的比率施加恒定电压和反向电压时,存在用户不能体验热格栅错觉的问题。因此,可能需要在适当的范围内调整正电压和负电压的比率。
3.提供热体验的方法
在下文中,将描述根据本发明的实施例的提供热体验的方法。将参考由热输出模块提供的热电操作并参考根据本发明的实施例的热体验提供系统进行以下描述。然而,这仅仅是为了便于解释,因此,根据本发明的实施例的提供热体验的方法不限于此。
3.1.提供热体验的方法的概述
图44是根据本发明的实施例的热体验提供方法的基本流程图。
参考图44,根据本发明的实施例的提供热体验的方法包括由内容再现装置再现多媒体内容(S1),由内容再现装置根据多媒体内容的再现获得热反馈数据(S2),由内容再现装置根据热反馈数据向反馈装置发送热反馈信号(S3),并且由反馈装置执行热反馈输出操作(S4)。在下文中,将具体描述上述步骤。
首先,内容再现装置可以再现多媒体内容(S1)。
多媒体内容可以是视频、游戏、虚拟现实应用、增强现实应用、体验应用等。内容再现装置的控制器可以从存储器加载存储在存储器中的多媒体内容。内容再现装置可以通过通信模块接收多媒体内容,并再现多媒体内容。
例如,内容再现装置的控制器可以再现存储在存储器中的多媒体内容,例如,游戏或电影文件。作为另一示例,内容再现装置可以根据下载或流式传输方法通过通信模块从互联网接收和再现多媒体内容。
内容再现装置可以根据多媒体内容的再现获得热反馈数据(S2)。
多媒体内容可以包括热反馈数据或用于处理热反馈的算法。内容再现装置的控制器可以根据多媒体内容的再现来解码热反馈数据,或者可以执行热反馈处理算法,以获得热反馈数据。
在本文中,热反馈数据可以包括热反馈目标、热反馈类型、热反馈强度幅度和热反馈时间信息中的至少一个。
热反馈目标可以指被控制用于向用户提供热反馈的目标。例如,如果在热体验提供系统中使用多个反馈装置(见图11),或者如果反馈装置具有多个热输出模块,或者如果热输出模块1640是区域控制的(见图33),则热反馈目标可以指示执行热反馈的目标。
热反馈类型可以指一种热反馈。例如,热反馈类型可以包括热反馈、冷反馈和热格栅反馈。热格栅反馈还可以包括中性热格栅反馈、热热格栅反馈和冷热格栅反馈。
热反馈强度可以指热反馈的强度。在一些情况下,热反馈强度可以包括热反馈类型。例如,当热反馈强度被分类为1至10级时,等级1至5可被分配给冷热反馈,等级6至10可被分配给热热反馈。
热反馈提供时间可以指与输出热反馈相关的时间信息。热反馈提供时间可以包括热反馈输出的开始时间、结束时间和运行时间(持续时间)。
内容再现装置可以根据热反馈数据向反馈装置发送热反馈信号(S3),并且反馈装置可以接收热反馈信号并根据接收的信号执行热反馈输出操作(S4)。
具体地,控制器可以基于热反馈数据生成热反馈信号,并且经由通信模块将热反馈信号传输到反馈装置。在具有多个反馈装置的热体验提供系统中,控制器可以基于热反馈对象信息选择反馈装置来发送热反馈信号,作为热反馈目标。反馈控制器可以通过通信模块接收热反馈信号,并根据热反馈信号执行热反馈输出操作。
热反馈信号是用于控制热反馈输出的信号。热反馈信号可以包括指示热反馈输出开始的热反馈开始信号和指示热反馈输出终止的热反馈结束信号。
内容再现装置的控制器可以经由通信模块发送开始信号(热反馈开始信号),然后反馈装置的反馈控制器可以经由通信模块接收开始信号。当反馈装置接收到开始信号时,反馈控制器可以响应于开始信号向热电偶阵列供电,以使得热电偶阵列执行热反馈输出操作。
内容再现装置的控制器可以经由通信模块发送结束信号(热反馈结束信号),然后反馈装置的反馈控制器可以经由通信模块接收结束信号。当反馈装置接收到结束信号时,反馈控制器可以根据结束信号停止向热电偶阵列供电,使得热电偶阵列可以停止热反馈输出操作。
在本文中,热反馈结束信号可以用作可选信号。例如,如果开始信号包括热反馈提供时间,则反馈控制器可能不需要结束信号,因为可以根据热反馈提供时间,确定热反馈的运行时间,在运行时间期间保持热反馈的输出,并且终止热反馈的输出。在另一示例中,如果热反馈输出操作的运行时间默认设置为反馈装置,则反馈控制器可以将热反馈输出操作保持默认运行时间。在这种情况下,可以省略结束信号。
反馈装置的反馈控制器可以经由通信模块向内容回放装置发送热反馈报告信号,以报告热输出模块的操作状态。反馈装置可以周期性地或者响应于热反馈信号的接收,向内容再现装置发送报告信号(热反馈报告信号)。热反馈报告信号可以包括诸如是否输出热反馈、当前输出的热反馈的类型或强度、接触表面的温度、由感测模块感测的用户生物信息、误差信息和/或电池电量信息等信息。
反馈装置根据热反馈信号的热反馈输出操作可以以多种方式实现。
首先,反馈装置的热反馈输出操作的开始和终止可以如下完成。在一个实施例中,反馈装置可以仅在接收热反馈信号时执行热反馈输出操作,并且可以在不再接收热反馈信号时停止热反馈输出操作。在这种情况下,热反馈信号可以连续传输。在另一实施例中,一旦接收到开始信号,反馈装置可以在开始信号中包括的预定时间(例如,默认运行时间)或运行时间期间输出热反馈,然后,在开始信号中包括的预定时间或运行时间过去之后,反馈装置可以停止热反馈操作。在又一实施例中,反馈装置可以在接收开始信号时开始热反馈输出操作,并且在接收结束信号时停止热反馈输出操作。
在一些实施例中,热反馈信号可以作为简单的开/关信号提供。然而,根据本申请,热反馈信号可以以包括上述热反馈数据的全部或至少一部分的形式提供。当反馈控制器接收热反馈信号时,可以提取其中包含的信息并控制热反馈输出操作。例如,反馈控制器可以基于热反馈目标信息来确定哪个热输出模块将执行热反馈输出操作。作为另一示例,反馈控制器可以基于热反馈类型信息来确定是执行发热操作、吸热操作还是热格栅操作。对于又一示例,反馈控制器可以基于热反馈强度信息来确定要施加到热电偶阵列的电压值。对于又一示例,反馈控制器可以基于热反馈提供时间信息来确定热反馈输出操作的开始时间和/或结束时间。当然,可以将上述热反馈的类型/强度/时间中的至少一个默认设置到热反馈装置。
3.2.热体验提供方法的应用
传统上,以视频或音频呈现的视听形式来体验游戏和电影等内容。此外,为了改善内容的沉浸感,使用由振动反馈表示的触觉体验和使用嗅觉的嗅觉体验来支持和增强现有的视听体验。此外,最近,已经开发了诸如虚拟现实或增强现实等解决方案,用于提供更真实的增强用户体验。
热体验提供系统通过与由上述传统方法提供的各种情况协作输出热反馈来实现热现实(TR)。以这种方式,热体验提供系统确保增强用户体验。
在这点上,利用上述热体验提供方法,反馈装置通过内容再现装置根据多媒体内容的再现而生成的热反馈信号输出热反馈。
因此,热体验提供方法可以应用于请求用户体验的各种技术领域。在下文中,将示意性地描述热体验提供系统1000和可以利用热体验提供方法的一些代表性技术领域。
3.2.1.虚拟现实(VR)
虚拟现实是可以使用热体验提供系统的代表性技术领域的代表性示例。
虚拟现实表示创建虚拟环境或情境,让用户感觉他们实际上在虚拟空间中。通常,虚拟现实是基于三维图像实现的,该三维图像使用HMD根据用户的视野动态变化。虚拟现实正积极开发,用于教育和商业辅助,包括各种游戏和电影。
特别是随着智能装置的发展和三星电子齿轮VR(TM)的发布,VR相关市场有望在未来变得更大。
本发明的热体验提供系统可以与这样的虚拟现实应用协作,并且向现有的视觉/听觉/触觉添加热感觉。
例如,热体验提供系统可以将温度分配给放置在虚拟空间中的特定虚拟对象,并且当虚拟现实中的用户化身触摸该对象时,热体验提供系统可以向用户提供热反馈。
同样,热体验提供系统可以将适当的温度分配给虚拟空间,例如,沙漠或极地区域,并且当虚拟现实中的用户化身在虚拟空间中时,热体验提供系统可以根据分配给虚拟空间的适当温度向用户输出热反馈或冷反馈。
3.2.2.增强现实(AR)
增强现实也是可以应用热体验提供系统的领域的代表性示例。
增强现实是一种混合现实,因为通过在真实世界中提供虚拟对象来将虚拟环境与真实世界结合起来。
与将用户完全沉浸在虚拟空间中的虚拟现实相比,增强现实基本上通过提供虚拟对象或虚拟额外信息来增强真实世界。因此,用于增强现实的HMD可以是玻璃型透明显示器,使得在透明显示器上显示的虚拟图像可以被用户视觉感知。否则,当不采用透明显示器的HMD用于增强现实时,HMD可以显示合成图像,该合成图像是通过将虚拟图像与相机实时捕捉的真实图像组合而生成的。
因此,用户可以在视觉上体验用虚拟图像增强的真实世界。
苹果的iPhone(TM)和其他智能装置的增强现实能力有限,近年来,随着微软的Hololens TM(一种独立的HMD类型)的发布,人们对AR的兴趣越来越大。
热体验提供系统可以提供与这种增强现实应用结合工作的热感觉,以帮助现有的视觉/听觉用户体验。
例如,热体验提供系统可以通过在热物体进入用户视野时输出热反馈作为一个增强元件来向用户提供有用的信息。
3.2.3.游戏内容
热体验提供系统可以用于游戏内容。
用户体验是非常重要的元素,因为游戏内容基本上是基于游戏内容所提供的情境和用户之间的交互的交互内容。
游戏内容的实施方式可以通过上述虚拟现实或增强现实技术以及在通过传统电视或监视器输出的游戏屏幕上反映用户操作的传统技术来实现。热体验提供系统可以添加热体验,作为改善用户沉浸在通过上述技术实现的游戏环境中的一部分。例如,热体验提供系统可以在第一人称射击类型的游戏中被枪等射击时根据射击输出热反馈。
3.2.4.视频内容
此外,热体验提供系统可以用于视频内容等。视频内容基于诸如视频或语音等视听表达风格,并且热体验提供系统可以通过输出对应于由视听表示的特定场景的热反馈来允许多媒体内容向用户提供热体验。例如,热体验提供系统可以输出热反馈,例如,在爆炸场景中输出热反馈,并且在冬季海洋场景中输出冷反馈。
尽管上面已经描述了热体验提供系统的各种应用领域,但是热体验提供系统的应用领域不限于上述示例。除了上述技术领域,热体验提供系统可以用于各种多媒体内容,包括教育或学习内容或医疗应用。
因此,在本发明中,热体验提供系统应该被解释为无限制地适用于能够提供热反馈以改善用户体验的任何领域。
4.提供热体验的方法的实施方式
在上面,热体验提供方法可以用于改善各种技术领域中的用户体验。然而,当再现多媒体内容时,输出适当的热反馈可能是重要的,以便为用户提供更好的热体验。
在下文中,将描述用于为每个技术领域提供能够改善用户体验的热体验的方法的各种实施例。
4.1.第一实施方式
根据本发明的实施例的热体验提供方法的第一实施方式是通过在视频内容再现期间向图像或语音输出热反馈来向用户提供热体验的方法。
为了在视频内容再现期间将热反馈与视频或音频相关联,热反馈的时间与特定图像(特定视频场景)或特定声音(特定音频场景)同步可能是重要的。例如,在爆炸场景的情况下,爆炸场景的视频输出时间最好与热反馈的感觉时间一致。
然而,如果反馈控制器在输出特定场景时为热反馈输出供电,则在特定场景的输出时间和热反馈之间可能出现时间差。这是因为即使向热电偶阵列供电,也需要一些时间来达到接触表面能够向用户提供热反馈的温度。即,供电的第一时间点和用户能够感觉到热反馈的第二时间点可能彼此不相同。因此,如果供电时间点被设置为与特定场景的输出时间点相同,则用户可以在特定场景过去之后体验热反馈。在下文中,从热电操作的开始时间到用户能够感测热反馈的感觉时间的持续时间将被称为‘延迟时间’。
在该实施例中,可以建立视频输出(或音频输出)和热反馈输出之间的同步,以改善用户体验。
在下文中,与用于增强用户体验的热反馈相关联的特定场景将称为热事件场景。热事件场景通常可以包括在真实世界中涉及吸热或发热的事件,例如,爆炸或枪击。根据本发明的热事件场景不限于上述场景,并且热事件场景可以包括能够与热反馈相关联的任何场景,以改善用户对视频内容的沉浸。同样,与用于改善用户体验的热反馈相关联的特定音频将称为热事件音频或热事件音频场景。
图45是根据本发明的实施例的热体验提供方法的第一实施方式的流程图。
参考图45,热体验提供方法的第一实施方式包括加载视频内容,该视频内容包括热事件场景和与热事件场景相关联的热反馈相关的热反馈数据(S110),根据视频数据输出视频(S120),获得要感测热反馈的感觉时间(S130),基于感觉时间和校正时间计算热反馈的热电操作的开始时间(S140),在开始时间发送热反馈开始信号(S150),并且根据热反馈开始信号开始用于输出热反馈的热电操作(S160)。
在下文中,将更详细地描述上述实施例的每个步骤。
内容再现装置可以加载视频数据,该视频数据包括热事件场景和与热事件场景相关联的热反馈相关的热反馈数据(S110)。
具体地,控制器可以加载存储在存储器中的视频内容,或者通过通信模块以下载方法或流式传输方法接收视频内容。
视频内容可以包括视频数据和热反馈数据。在本文中,可以提供视频内容,作为包括视频数据和热反馈数据的一个文件,但是与热反馈相关联的视频内容可以在包括视频数据的视频文件和包括热反馈数据的热反馈文件中单独提供。
图46是示出根据本发明的实施例的在热体验提供方法的第一实施方式中使用的热反馈数据的示例的示图。
根据一个实施例,热反馈数据可以以类似于在视频输出时用于覆盖字幕的字幕文件的形式提供,该字幕文件加载有视频文件,类似于图46所示的形式
在本文中,可以在“<HEADER>”部分中定义校正时间。可以为要输出的每种类型的热反馈定义校正时间。此外,可以为要输出的热反馈的每个强度定义校正时间。校正时间可以对应于延迟时间。例如,在图46的情况下,为报头部分中的热反馈和冷反馈设置从第一级到第五级的五个校正时间。
在本文中,用于热反馈的时间信息(热反馈提供时间)、类型、强度、热反馈目标和/或热电偶阵列可以在“<BODY>”部分中提供。如上所述,时间信息可以包括热反馈的开始时间和结束时间,并且开始时间可以被定义为与和热反馈相关联的热事件场景的输出时间相同的时间。
视频数据包括关于再现视频内容时要输出的场景的信息。此外,热事件场景可以包括在要输出的场景中。
内容再现装置可以根据视频数据输出视频和/或音频(S120)。例如,控制器可以使用视频编解码器解码视频数据并输出视频。可以通过外部或内部显示器来执行视频输出。
内容再现装置可以获得感测热反馈的时间点(S130)。具体地,控制器可以从热反馈数据获得用户应该体验热反馈的时间点。在本文中,热反馈的时间点可以与要与热反馈相关联的特定场景的输出时间相同。
内容再现装置可以基于获得的热反馈的时间点(感觉时间)和校正时间来计算热反馈的热电操作的开始时间(S140)。具体地,控制器可以通过从热反馈的感觉时间(S130处获得的时间)中减去校正时间来计算热反馈的热电操作的开始时间。
在本文中,校正时间可以是从向热电偶阵列供电时的供电时间点到接触表面变成用户可以体验热反馈的温度的时间间隔。
控制器可以参考存储在存储器中的校正时间表来确定校正时间。或者,当视频数据包括关于校正时间的信息时,控制器可以参考视频数据中包括的信息来确定校正时间。
校正时间可以是预定值,而与热反馈的类型和强度无关。否则,如上所述,根据热反馈的类型和/或强度,校正时间可以是不同的值。
在这种情况下,控制器可以基于热反馈的类型和热反馈的强度中的至少一个来确定校正时间。
例如,因为热反馈的延迟时间和冷反馈的延迟时间彼此不同,所以控制器可以根据热反馈是热反馈还是冷反馈来不同地确定校正时间。具体地,在热反馈和冷反馈强度相同的情况下,通过热反馈的发热操作使接触表面达到饱和温度的时间可能比通过冷反馈的吸热操作使接触表面达到饱和温度的时间快。即,热反馈的延迟时间可以短于冷反馈的延迟时间。
再如,热反馈的强度可以被分为多个等级,并且强度更强和强度更弱的延迟时间可以彼此不同。因此,控制器可以根据热反馈的强度不同地确定校正时间。在这种情况下,考虑到温度变化速度,可以将较强强度的校正时间设置得比较弱强度的校正时间短。或者,考虑到温度的变化量,用于较强强度的校正时间可以被设置为大于用于较弱强度的校正时间。
另一方面,因为热反馈的延迟时间可以是输出热反馈的反馈装置的固有特性,所以控制器可以考虑反馈装置的识别信息来确定延迟时间。为此,控制器可以通过通信模块接收并获得反馈装置的识别信息。或者,在反馈装置本身存储延迟时间和/或校正时间的情况下,控制器可以从反馈装置接收延迟时间和/或校正时间,用于设置校正时间。
内容再现装置可以在热反馈的热电操作的开始时间发送热反馈开始信号(S150)。当确定热电操作的开始时间时,控制器控制通信模块在所确定的开始时间将热反馈开始信号传输到反馈装置。开始时间可以是相对于视频内容的回放时间的相对值。开始时间可以被确定为视频内容的回放持续时间(回放时间线)之间的值。
反馈装置可以根据热反馈的开始信号启动热反馈输出操作(S160)。
图47是根据本发明的实施例的热体验提供方法的第一实施方式的热反馈输出操作的示图。
具体地,反馈控制器响应于接收到开始信号(其基本上与热电操作的开始时间相同),向热电偶阵列供电。热电偶阵列可以从供电时间开始执行发热操作或吸热操作。当从供电时间起经过校正时间时,接触表面的温度可以达到用户能够感觉到热反馈的温度。
因此,用户可以在视频内容的回放时间在热事件场景的输出时间感受热反馈。换言之,在内容再现装置的控制下,反馈装置可以在热电操作的开始时间向热电元件供电,该开始时间设置为比要与热反馈相关联的特定场景的输出时间点更早的时间点,这可以允许用户在热事件场景的输出时间体验热反馈。
在以上描述中,已经参考该实施例描述了视频和热反馈之间的同步。然而,也可以通过用音频代替视频来同步音频和热反馈。本领域技术人员可以通过使用音频数据而不是视频数据作为热事件场景来容易地理解这一点。这可以类似地应用于将在后面描述的根据本发明的实施例的热体验提供方法的另一实施例。
根据上述实施例,由于和谐地提供了根据视频或音频的视听体验和根据热反馈的热体验,所以可以改善用户对视频内容的体验。
4.2.第二实施方式
在传统的多媒体内容中的一些游戏或4D电影等中,振动反馈与视频或音频输出相关联,以改善用户沉浸感。因此,可以认为热反馈与振动反馈相关联,以便在再现先前产生的多媒体内容时提供热体验的一部分,直到在市场上积极地分发提供热体验的多媒体内容。
根据本发明的实施例的热体验提供方法的第二实施方式是通过输出与热反馈相关联的振动反馈来向用户提供热体验的方法。
图48是根据本发明的实施例的热体验提供方法的第二实施方式的流程图。
参考图48,热体验提供方法的第二实施方式可以包括再现包括振动事件的多媒体内容(S210),当发生振动事件时发送振动反馈开始信号(S220),并且根据振动反馈开始信号执行热反馈输出操作(S230)。
在下文中,将更详细地描述上述实施例的每个步骤。
内容再现装置可以再现包括振动事件的多媒体内容(S210)。具体地,控制器可以通过存储器或通信模块加载多媒体内容以再现。例如,内容再现装置可以再现视频内容或执行游戏应用、虚拟现实应用或增强现实应用。
在本文中,除了视频数据和音频数据之外,多媒体内容可以包括振动反馈数据。内容再现装置可以基于振动反馈数据根据多媒体内容的再现来确定是否已经发生振动事件。振动事件是指在多媒体内容再现期间需要振动反馈输出的事件。例如,在视频内容的情况下,振动反馈数据可以被设置为需要振动反馈输出的振动事件,用于视频数据中的再现时间点,例如,车祸场景点或枪击场景点。在另一示例中,游戏内容可以包括角色的击打事件、技能使用事件等作为振动事件。
当发生振动事件时,内容再现装置可以向反馈装置发送振动反馈开始信号(S220),并且反馈装置可以根据振动反馈开始信号执行热反馈输出操作(S230)。
当确定已经发生振动事件时,控制器可以经由通信模块向反馈装置发送振动反馈开始信号。此外,反馈控制器可以通过通信模块接收振动反馈开始信号,并且可以向热电偶阵列供电,以执行热反馈输出操作。
另一方面,如果反馈装置包括振动模块,则反馈装置可以通过振动模块输出振动反馈以及输出热反馈。
同时,上述本实施方式是一种用于在没有热反馈数据的多媒体内容中实现热反馈的方法,并且使用振动反馈数据而不是热反馈数据输出热反馈。另一方面,在该实施例中,也可以利用包括在多媒体内容中的一些其他数据来输出热反馈,而不是振动反馈数据。
作为一个示例,可以修改本实施方式,以响应于屏幕抖动事件,而不是振动事件,输出热反馈。包括FPS的一些游戏使用屏幕抖动技术来抖动游戏引擎中的虚拟相机,以便在发生射击或击中事件时抖动视频。因此,控制器可以再现包括屏幕抖动事件而不是振动事件的多媒体内容。在这种情况下,当在再现期间发生屏幕抖动事件时,控制器可以通过通信模块向反馈装置发送热反馈开始信号,然后,反馈控制器可以根据热反馈开始信号执行热反馈输出操作。
作为另一示例,本实施方式可以被修改为根据特定音频而不是振动事件输出热反馈。更具体地,当控制器再现多媒体内容并且在再现期间输出特定音频时,控制器可以经由通信模块向反馈装置发送热反馈开始信号,并且反馈控制器可以根据反馈开始信号执行热反馈输出操作。在本文中,特定音频可以是例如在冲突中生成的音频、在爆炸场景中生成的音频、尖叫声等。当音频输出等于或高于预定音量时,控制器可以将其确定为特定音频。当音频属于预定频带时,也可以确定为其他特定音频。
根据本实施方式,通过使用其他数据而不是热反馈数据,即使当多媒体内容没有热反馈数据时,也可以提供热体验。
4.3.第三实施方式
根据本发明的实施例的热体验提供方法的第三实施方式是通过在激活技能或在游戏期间被击中时输出与技能的元素属性相关联的热反馈来向用户提供热体验的方法。
在本文中,元素属性是提供给游戏中的技能的属性。例如,该技能的元素属性可以包括火属性(或火焰属性)、冰属性(或冻结属性)、风属性、闪电属性(或电属性)等。技能的元素属性可以根据游戏开发者的技能属性设计来定义,但是通常,在许多游戏中,技能属性可以包括火属性、冰属性和闪电属性。
另一方面,在本实施方式中,游戏应当被理解为包括立体3D游戏、使用虚拟现实技术或增强现实技术的游戏以及传统2D游戏的综合概念。将在后面描述的根据本发明的实施例的热体验提供方法的其他实施例也是如此。
图49是根据本发明的实施例的用于提供热体验的方法的第三实施方式的流程图。
参考图49,热体验提供方法的第三实施方式可以包括执行实现具有多个元素属性的技能的游戏(S310),当发生技能启动事件(技能施展事件)或技能击中事件时,生成包括对应于技能的元素属性的热反馈类型信息的热反馈开始信号(S320),发送热反馈开始信号(S330),并且根据热反馈开始信号执行热反馈输出操作,其中,热反馈可以包括输出对应于热反馈类型信息的热反馈(S340)。
在下文中,将更详细地描述上述实施例的每个步骤。
内容再现装置可以执行实现具有多个元素属性的技能的游戏(S310)。控制器可以加载并执行这样的游戏。
在本文中,该技能可以对应于诸如游戏中虚拟角色使用的咒语和/或射弹的射击动作等操作。该技术的另一代表性示例可以包括防火墙、冰箭和闪电链等。作为其他一些示例,可以有挥舞武器的动作、发射射弹的动作等。在这种情况下,提供给武器或射弹的属性可以被视为技能的属性。在本文中,虚拟角色可以包括由玩家控制的玩家角色或者攻击玩家角色的敌人角色。在包括VR/AR的第一人称游戏的情况下,可以显示和/或示出由玩家控制的玩家角色的视野,而不是在虚拟现实环境或增强现实环境中的屏幕上显示玩家角色。在下文中,‘玩家’的表达应该被解释为通用术语,包括由玩家(用户)或其化身在虚拟空间或增强空间中控制的虚拟角色(可玩角色)。
游戏中的技能可能有元素属性。例如,在火球的情况下可以给出火属性(火焰属性),在冰箭的情况下给出冰属性(冻结属性),在闪电链的情况下给出电属性。
此外,每项技能都可能具有一个技能级别。在一个示例中,游戏中的技能可以以这样的方式实现,即,该技能的能力随着技能级别的升级而增加。例如,火球技能具有一个等级,并且等级1的火球可以升级为等级2的火球,从而增强火球技能的效果。
此外,在具有相同元素属性的技能中,一种技能可能优于另一种技能。即,技能可以具有技能等级。例如,当火焰属性的技能在游戏中包括火箭、火球和火焰风暴时,等级1可以分配给火箭,等级2可以分配给火箭,等级3可以分配给火焰风暴。
或者,每种技能都有一个损害值。例如,火球的损害值可以在100到200个损害之间。
内容再现装置可以在游戏期间发生技能启动事件或技能射击事件的情况下生成热反馈开始信号,包括对应于技能的元素属性的热反馈类型信息(S320)。
当检测到指示游戏中技能启动的用户输入时,控制器可以将用户输入视为技能启动事件(技能施展事件)。或者,当游戏中其他角色调用的技能击中玩家角色时,控制器可以将被击中的动作确定为技能击中事件。
当控制器检测到技能启动事件或技能击中事件时,控制器可以基于对应于由用户玩家激活的技能或击中用户玩家的技能的元素属性来确定热反馈的类型。例如,热反馈的类型可以被确定为火焰属性技能的热反馈,并且热反馈的类型可以被确定为冰属性技能的冷反馈。此外,热反馈的类型可以被设置为电属性技能的热格栅反馈。
此时,控制器可以基于技能类型、技能等级(技能水平)、技能损害(由用户玩家激活的技能的损害)和击中损害(击中用户玩家的技能的损害)中的至少一个来确定热反馈的强度。例如,如果火焰属性技能的火箭、火球和火焰风暴在游戏中实现,则热反馈的强度可以被确定为火箭的弱强度、火球的中等强度和火焰风暴的强强度。再如,热反馈的强度可以被确定为第一级火球的弱强度、第二级火球的中等强度以及第三级火球的强强度。再如,热反馈的强度越强,技能的损害值就越大。对于又一示例,当发生技能击中事件时,热反馈的强度可以被设置为随着对应于技能击中用户玩家的对用户玩家的损害增加而更强。
另外,控制器还可以确定热反馈的持续时间。例如,被火焰属性的技能击中的用户玩家(虚拟角色)可能在预定时间段内遭受火焰效果,而被冰属性的技能击中的虚拟角色可能在预定时间段内遭受停止效果或缓慢效果。此外,由闪电属性的技能拍摄的角色可能在预定时间段内遭受麻痹效果等。控制器可以根据由角色的技能引起的特效的持续时间(预定时间段)来确定用于提供热反馈的持续时间。
这些特效可以是对技能目标有益的缓冲效果,也可以是对技能目标有害的减益效果。当要为玩家(用户玩家、虚拟角色)的技能击中事件输出热反馈时,如果根据技能击中事件为玩家生成减益效果,则热反馈可以在减益效果的持续时间期间输出。此外,当要输出热反馈时,可以在根据技能启动事件对玩家引发的缓冲效果的持续时间期间输出热反馈。
此外,控制器可以在热反馈的持续时间期间逐渐降低热反馈的强度,使得用户可以知道缓冲效果或减益效果的端点。
控制器可以生成热反馈开始信号,该信号包括关于热反馈类型的信息。热反馈开始信号还可以包括关于热反馈强度的信息。此外,热反馈开始信号还可以包括关于热反馈的持续时间的信息。
另一方面,当控制器确定热反馈的类型和强度时,控制器可以参考存储在游戏内容或存储器中的技能热反馈表,如图50所示
图50是在根据本发明的实施例的热体验提供方法的第三实施方式中使用的技能热反馈表的示图。
参考图50,描述了包括技能标识符、技能元素属性、根据元素属性的技能热反馈类型、技能等级、技能水平、技能热反馈强度以及为技能提供热反馈的持续时间的信息的表格。
内容再现装置可以发送热反馈开始信号(S330)。控制器可以通过通信模块将生成的热反馈开始信号传输到反馈装置。
反馈装置可以根据热反馈开始信号执行热反馈输出操作,其中,热反馈输出操作可以反映热反馈类型信息(S340)。
当接收到热反馈开始信号时,反馈控制器可以向热电偶阵列供电,以执行热反馈输出操作。此时,反馈控制器可以根据热反馈开始信号中包括的信息生成电源信号。例如,控制器可以通过参考热反馈的类型来确定是执行发热操作、吸热操作还是热格栅操作,并生成与之对应的电源信号。此外,控制器可以通过参考热反馈的强度来确定电压水平。
控制器还可以基于热反馈的提供时间或持续时间来确定施加电源信号的时间长度。此时,控制器可以在持续时间期间输出预定恒定强度的热反馈,但是也可以在持续时间期间随着热反馈强度的逐渐降低而输出热反馈。例如,如果虚拟角色第一次被技能击中,则可以输出强强度热反馈,并且在预定时间段之后,可以在技能击中事件或技能致动事件(例如,麻痹或缓慢)引发的特效的持续时间期间输出较弱强度的热反馈。据此,用户可以知道在击打时是否被强热反馈击打,并且用户还可以经由弱热反馈知道虚拟角色是否处于特效下。除此之外,用户还可以通过热反馈的终止来知道特效是否终止。这可以提高游戏的直观性和用户的沉浸感。
根据上述方法,反馈装置可以在启动或被火焰属性技能击中时向热电元件施加恒定电压,并且为冷属性技能向热电元件施加反向电压。反馈装置还可以控制内容再现装置结合发光属性技能来施加恒定电压和反向电压。
在以下描述中,将基于技能的元素属性包括火(火焰)/冰(冻结)/闪电来进行描述。然而,应该注意的是,这只是为了便于解释,并且技能的元素属性可以不同地定义。
在以上描述中,热/冷/热格栅反馈对应于元素属性,但是热反馈的类型和元素属性的类型之间的匹配关系可以根据设计者的选择自由改变。在其中的热格栅反馈中,也可以利用中性热格栅反馈/热热格栅反馈/冷热格栅反馈。例如,可以将热热格栅反馈与火焰属性匹配,将冷热格栅反馈与冰属性匹配,将中性热格栅反馈与闪电属性匹配。
在上文中,尽管解释主要集中在技能的启动和击中上,但是可以为其他攻击动作而不是技能提供类似的热反馈。例如,除了技能攻击之外,攻击动作可能还包括武器攻击。武器攻击也可能包括近战武器攻击和远程武器攻击。
此时,攻击动作的元素属性可以根据用于武器攻击的武器的元素属性而不是技能攻击的元素属性来确定。此外,如果远程武器用于武器攻击,则武器攻击的元素属性可以根据提供给远程武器的射弹的元素属性来确定。此时,如果向远程武器和射弹提供元素属性,则这两个元素属性中的一个可以优先确定为武器攻击的元素属性。
如果攻击动作是技能攻击,则热反馈的强度可以基于技能等级、技能的损害量和技能树上的技能等级中的至少一个来确定,该技能树包括具有相同元素属性的多个技能。如果攻击动作是武器攻击,则热反馈的强度可以基于武器的类别(等级)、武器的攻击能力、武器的射弹类别(在远程武器的情况下)和射弹的攻击能力中的至少一个来确定。
此外,热反馈的强度可以基于攻击动作的攻击能力、根据技能击中事件的玩家的损害量、玩家的损害与总健康点的比率以及玩家的剩余健康点中的至少一个来确定。
在一些实施例中,也可以根据武器的类型匹配热反馈的类型。例如,如果用于技能启动事件或技能击中事件的武器是冰属性武器,则冷热格栅反馈可以与其匹配,如果武器是火焰属性武器,则热热格栅反馈可以与其匹配。
根据上述实施方式,可以通过响应于游戏中技能的启动或技能的击中而输出对应于技能的元素属性的热反馈来提高用户对游戏的享受和沉浸感。
4.4.第四实施方式
根据本发明的实施例的热体验提供方法的第四实施方式是通过输出与角色和/或玩家的情感表达或文本选择相关联的热反馈来向用户提供热体验的方法。
在本文中,角色的情感表达可以包括快乐、愤怒、恐惧等。在某些情况下,角色的情感状态可以被定义为游戏中的一种角色属性,但是在其他情况下,角色可以通过执行特定动作或做出特定面部表情来直接表达他的情感状态。在本实施方式中,情感表达应该被解释为综合含义,包括角色表达其情感的特定动作或特定面部表情以及直接指示情感的属性。
在本文中,文本选择表示在游戏进行期间从提供给用户的多个可选文本中选择一个。例如,在用户操作的可玩角色(PC)和不可玩角色(NPC)之间的对话情况下,或者在用户应该做出决定的情况下,可以在游戏中呈现可选择文本,并且用户可以选择文本中的任何一个。
图51是根据本发明的实施例的热体验提供方法的第四实施方式的流程图。
参考图51,热体验提供方法的第四实施方式可以包括执行包括执行情感表达的虚拟角色的游戏或提供用户可选择的至少一个文本的游戏(S410),当感测到虚拟角色的情感表达事件或文本提供事件时,生成包括对应于情感表达或文本选择的热反馈类型信息的热反馈开始信号(S420),发送热反馈开始信号(S430),并根据热反馈开始信号执行热反馈输出操作,这可以包括输出对应于热反馈类型信息的热反馈(S440)。
在下文中,将更详细地描述上述实施例的每个步骤。
内容再现装置可以执行游戏,该游戏包括执行情感表达的虚拟角色或者提供用户可选择的至少一个文本(S410)。控制器可以执行游戏。
当检测到发生虚拟角色的情感表达事件或文本提供事件时,内容再现装置可以生成包括对应于情感表达或文本选择的热反馈类型信息的热反馈开始信号(S420)。控制器可以在游戏过程中检测虚拟角色的情感表达事件。例如,可以通过执行特定动作或做出特定面部表情来发生虚拟角色的情感表达事件。情感表达事件可以根据用户的输入发生。虚拟人物的情感表达事件也可能发生在角色对话期间的特定情境中。此外,控制器可以检测文本提供事件。文本提供事件可能主要由可玩角色和不可玩角色之间的对话动作或游戏期间的故事进度引起。
当发生情感表达事件或文本提供事件时,控制器可以确定由角色表达的情感的类型或响应于文本提供事件选择的文本的类型。控制器可以根据所确定的情感的类型或所选择的文本的类型来确定热反馈的类型。在本文中,控制器可以通过参考存储在存储器中或存储在游戏程序中的情感/文本-热反馈类型的表格来确定热反馈的类型。情感/文本-热反馈类型的表格可以根据情感状态和/或文本类型定义热反馈的类型。
图52是根据本发明的实施例的与热体验提供方法的第四实施方式中提供的文本呈现事件相关的示图。
参考图52,在玩家角色和非玩家角色之间的对话期间,呈现供用户选择的文本。控制器可以经由通信模块从输入装置接收用户输入,以选择特定文本,从而可以确定热反馈的类型。
内容再现装置可以发送热反馈开始信号(S430)。控制器可以通过通信模块将包括热反馈类型信息的热反馈开始信号传输到反馈装置。
反馈装置可以根据热反馈开始信号执行热反馈输出操作,并且可以输出对应于热反馈类型信息的热反馈(S440)。
当接收到热反馈开始信号时,反馈控制器可以向热电偶阵列供电,以执行热反馈输出操作。此时,反馈控制器可以根据热反馈开始信号中包括的信息生成电源信号。例如,控制器可以通过参考热反馈的类型来确定是执行发热操作、吸热操作还是热格栅操作。
根据上述实施例,可以通过提供适合虚拟角色情感的热反馈来提高用户的游戏沉浸水平,例如,当虚拟角色生气时输出热反馈,当害怕时输出冷反馈。类似地,当虚拟角色选择文本时,可以为游戏中的每个文本选择提供合适的热反馈,例如,输出做出好决策的热反馈和输出做出坏决策的冷反馈,从而改善用户的游戏沉浸感。
4.5第五实施方式
根据本发明的实施例的热体验提供方法的第五实施方式是通过在游戏期间输出与游戏中的移动速度相关联的热反馈来向用户提供热体验的方法。在本文中,移动速度可以指游戏中提供的虚拟空间中的可玩角色的移动速度。
图53是根据本发明的实施例的热体验提供方法的第五实施方式的流程图。
参考图53,热体验提供方法的第五实施方式可以包括执行游戏,其中,可移动角色在虚拟空间内实现(S510),生成包括对应于可移动角色的移动速度的强度信息的热反馈开始信号(S520),发送热反馈开始信号(S530),并且根据热反馈开始信号执行热反馈输出操作,这可以包括输出对应于热反馈数据的热反馈(S540)。
在下文中,将更详细地描述上述实施例的每个步骤。
内容再现装置可以执行实现虚拟空间和其中的可移动角色的游戏(S510)。控制器可以执行包括虚拟空间和其中的可移动角色的游戏。在本文中,角色可以是由游戏虚拟空间中的游戏内容的用户控制的虚拟角色。虽然虚拟角色在第三人称游戏中在屏幕上显示(输出),但是在第一人称游戏中只有一部分虚拟角色可以显示在屏幕上,也可以不显示在屏幕上。或者,在使用虚拟现实技术的游戏中,用户的身体或输入装置可以被视为角色。
内容再现装置可以生成热反馈开始信号,包括对应于角色在移动期间的移动速度的热反馈的强度信息(S520)。控制器1260可以检测游戏虚拟空间中角色的移动。例如,可以根据指示角色移动的用户输入来进行角色的移动。控制器可以经由通信模块从输入装置获得用于指示角色移动的用户输入,从而移动角色或相应地操作角色的移动。此外,角色可以在游戏的虚拟空间中提供的骑乘上移动。例如,在诸如赛车游戏或平板模拟等游戏中,飞机或汽车可以是角色,并且可以根据用户的操作而移动。控制器可以根据角色在虚拟空间中的移动速度来确定热反馈的强度。例如,随着角色在虚拟空间中的移动速度变得更快,控制器可以增加热反馈的强度。当确定强度时,控制器可以生成包括热反馈的强度信息的热反馈开始信号。
内容再现装置可以发送热反馈开始信号(S530)。控制器可以经由通信模块将包括热反馈的强度信息的热反馈开始信号传输到反馈装置。
反馈装置可以根据热反馈开始信号执行热反馈输出操作,并且可以输出对应于热反馈的强度信息的热反馈(S540)。
当接收到热反馈开始信号时,反馈控制器可以向热电偶阵列供电,以执行热反馈输出操作。此时,反馈控制器可以根据热反馈开始信号中包括的信息生成电源信号。例如,控制器可以通过参考热反馈的强度信息调整电源的电压值来控制热反馈的强度。
在该实施方式中,冷反馈可以主要用作热反馈。因此,当用户在车辆上的移动速度在真实世界中增加时,用户可以体验到用户能够感受到的感觉。
在一些实施例中,当角色的移动停止时,也可以暂时输出热反馈。控制器可以确定角色的移动是否终止,然后可以生成热反馈开始信号,该热反馈开始信号包括用于指示热反馈的热反馈数据,并且通过通信模块将热反馈开始信号发送到反馈装置。反馈装置因此可以相应地输出热反馈,由此用户可以感觉像在真实世界中一样热。
4.6第六实施方式
根据本发明的实施例的热体验提供方法的第六实施方式是通过在游戏期间输出与角色的健康点相关联的热反馈来向用户提供热体验的方法。
图54是根据本发明的实施例的热体验提供方法的第六实施方式的流程图。
参考图54,用于提供热体验的方法的第六实施方式可以包括执行实现具有健康点的虚拟角色的游戏(S610),生成热反馈开始信号,该热反馈开始信号包括与健康点的变化、剩余物理健康点以及剩余健康点与角色的最大健康点的比率中的至少一个相对应的热反馈数据(S620),发送包括热反馈数据的热反馈开始信号(S630),并且根据热反馈开始信号执行热反馈输出操作,这可以包括输出对应于热反馈数据的热反馈(S640)。
在下文中,将更详细地描述上述实施方式的每个步骤。
内容再现装置可以执行出现具有健康点的角色的游戏(S610)。控制器可以执行包括用户操作的角色的游戏。健康点可以分配给角色。健康点可以是指示游戏中角色的生命力(活力)的信息。例如,如果角色的健康点耗尽,则角色可能会在游戏中死亡。健康点可以根据游戏中的事件增加或减少。例如,如果角色被击中,则健康点可以减少,如果角色使用治疗技能或恢复物品,例如,健康点,则健康点可以增加。
内容再现装置可以生成热反馈开始信号,该热反馈开始信号包括与健康点的变化、剩余物理健康点以及剩余健康点与角色的最大健康点的比率中的至少一个相对应的热反馈数据(S620)。
当健康点在游戏过程中改变时,控制器可以根据健康点的变化来生成热反馈数据。
在一个示例中,控制器可以根据健康点是减少还是增加来确定热反馈的类型。例如,当健康点减少时,控制器可以将热反馈的类型确定为冷反馈。再如,当健康点增加时,控制器1260可以将热反馈的类型确定为热反馈。
在另一示例中,控制器可以根据健康点的变化量来确定热反馈的强度。例如,控制器可以确定健康点的变化量越大,热反馈的强度越强。
在又一示例中,控制器可以根据健康点的变化量与最大健康点的比率来确定热反馈的强度。例如,控制器可以确定健康点的变化量与最大健康点的比率越大,热反馈的强度越强。
此外,控制器可以根据剩余健康点确定热反馈数据。作为示例,控制器可以确定剩余健康点越小,热反馈健康点的强度越强。作为另一示例,控制器可以基于剩余健康点的值来确定热反馈的类型。例如,作为热反馈类型,当剩余健康点的值在第一范围内时,可以确定冷反馈,并且当该值在第二范围内时,可以确定热反馈。
控制器可以根据剩余健康点与最大健康点的比率来确定热反馈数据。例如,控制器可以确定热反馈的强度越强,比率越低。作为另一示例,控制器可以根据健康比率确定热反馈的类型。例如,作为热反馈类型,当健康比率在第一范围内时,可以确定冷反馈,并且当健康比率在第二范围内时,可以确定热反馈。
如上所述,一旦确定热反馈数据,控制器可以生成包括所确定的热反馈数据的热反馈开始信号。
内容再现装置可以发送包括热反馈数据的热反馈开始信号(S630)。控制器可以经由通信模块将包括热反馈数据的热反馈开始信号传输到反馈装置。
反馈装置可以根据热反馈开始信号执行热反馈输出操作,并且可以输出对应于热反馈数据的热反馈(S640)。
当接收到热反馈开始信号时,反馈控制器可以向热电偶阵列供电,以执行热反馈输出操作。此时,反馈控制器可以根据热反馈开始信号中包括的信息生成电源信号。
因此,当健康点发生变化时,反馈装置可以根据健康点的变化量、变化量与最大健康点的比率、剩余健康点和/或剩余健康点与最大健康点的比率输出不同的热反馈。
在以上描述中,描述了本实施方式,热反馈数据可以被确定为对应于健康点,但是热反馈数据也可以对应于游戏中使用的其他点。例如,在赛车游戏的情况下,也可以将热反馈与燃料量点而不是健康点相关联。作为另一示例,也可以将热反馈与魔法点相关联。即,这种实施方式可全面应用于与游戏中的角色相关的可变资源点。
同时,当提供与角色相关联的多个资源时,也可以将不同类型的热反馈分配给每个资源。例如,控制器可以执行游戏,用于操作游戏中具有包括健康点和魔法点的资源点的角色。控制器还可以生成对应于资源点的变化量、其增加和减少、其剩余量以及剩余点与最大点的比率中的至少一个的热反馈数据。控制器还可以经由通信模块向反馈装置发送包括生成的信息的热反馈开始信号。控制器然后可以根据热反馈数据输出热反馈操作。此时,控制器可以确定热反馈的类型,以对应于改变的资源点的类型。例如,作为热反馈,可以为健康点确定热反馈,并且可以为魔法点确定冷反馈。
根据上述实施方式,通过热反馈向用户提供关于游戏中角色的重要状况(健康点)的信息,从而帮助用户对游戏的直观理解并改善游戏沉浸感。
4.7.第七实施方式
根据本发明的实施例的热体验提供方法的第七实施方式是通过关联并输出与游戏期间用户输入时间的反映相关联的热反馈来向用户提供热体验的方法。
图55是根据本发明的实施例的用于提供热体验的方法的第七实施方式的流程图。
参考图55,热体验提供方法的第七实施方式可以包括执行游戏,其中,提供根据输入时间输出不同结果的定时动作(S710),在执行定时动作期间生成包括对应于输入时间的热反馈数据的热反馈开始信号(S720),发送包括热反馈数据的热反馈开始信号(S730),并且响应于热反馈开始信号执行热反馈输出操作,这可以包括输出对应于热反馈数据的热反馈(S740)。
在下文中,将更详细地描述上述实施方式的每个步骤。
内容再现装置可以执行提供定时动作的游戏,以根据输入时间输出不同的结果(S710)。
控制器可以执行游戏。在本文中,在该实施方式中执行的游戏可以包括计时动作。在本文中,定时动作是指根据用户的输入时间输出不同结果的操作。
图56是根据本发明的实施例的根据用于提供热体验的方法的第七实施方式提供定时动作的游戏的示图。
图56是箭头动作游戏的屏幕,其中,可以在虚拟空间中射出箭头。箭头动作游戏是包括计时动作的游戏的一个示例。在根据图56的游戏中,射箭距离可以与拉箭时间成比例地增加。当用户按下分配有射箭动作的按钮时,拉动箭头的动作开始。当连续按下按钮时,连续且逐渐地拉出箭头(弓的弦),并且在释放按钮的瞬间可能从弓中射出箭头。在图56中,提供了计量器(其反映拉动弓(箭头)的弦的程度),使得用户可以在视觉上检查射箭动作(即,计时动作)的时间时玩游戏。定时动作的其他示例可以包括在足球比赛期间持续增加射击强度和/或准确性的射门动作,并且可以包括键盘动作,该键盘动作请求用户输入,以根据节奏游戏中的音乐音符在正确的时间按下正确的键。
内容再现装置可以生成热反馈开始信号,该热反馈开始信号包括对应于执行定时动作时的输入时间的热反馈数据(S720)。
作为示例,控制器可以从游戏进行期间发生定时动作的时间点开始计数经过的时间,并且根据经过的时间确定热反馈的强度。例如,经过的时间越长,可以确定的热反馈强度就越大。
作为另一示例,控制器可以根据预定参考值和经过时间之间的差异来确定热反馈强度。例如,差值越小,可以确定的热反馈的强度越大。
作为另一示例,控制器可以根据经过时间的长度是否超过预定的参考长度来确定热反馈强度。例如,可以确定经过的时间越长,输出的热反馈强度越大,直到该长度超过预定的参考长度,并且还可以确定在经过的时间长度超过预定的参考长度之后不会输出热反馈。
作为另一示例,控制器可以根据经过的时间是否超过预定参考值来确定热反馈的类型。例如,热反馈可以被确定为经过时间超过预定参考值之前的热反馈的类型,而冷反馈可以被确定为经过时间超过预定参考值之后的热反馈的类型。
在确定热反馈数据之后,控制器可以生成包括热反馈数据的热反馈开始信号。
内容再现装置可以发送包括热反馈数据的热反馈开始信号(S730)。控制器可以经由通信模块将包括热反馈数据的热反馈开始信号传输到反馈装置。
反馈装置可以根据热反馈开始信号执行热反馈输出操作,并且可以输出对应于热反馈数据的热反馈(S740)。当接收到热反馈开始信号时,反馈控制器可以向热电偶阵列供电,以执行热反馈输出操作。此时,反馈控制器可以根据热反馈开始信号中包括的热反馈数据生成电源信号。
根据上述实施方式,输入时间可以通过热反馈通知给用户,从而提供用户对游戏的直觉。
4.8.第八实施方式
根据本发明的实施例的热体验提供方法的第八实施方式是通过根据游戏中虚拟空间的属性输出热反馈来向用户提供热体验的方法。
图57是根据本发明的实施例的热体验提供方法的第八实施方式的流程图。
参考图57,热体验提供方法的第八实施方式可以包括执行游戏,其中,温度特性(温度属性)被分配给虚拟空间(S810),响应于进入虚拟空间,生成包括对应于虚拟空间的温度特性的热反馈数据的热反馈开始信号(S820),发送热反馈开始信号(S830),并且根据热反馈开始信号执行热反馈输出操作,这可以包括输出对应于热反馈数据的热反馈(S840)。
在下文中,将更详细地描述上述实施方式的每个步骤。
内容再现装置可以执行温度特性被分配给虚拟空间的游戏(S810)。控制器可以执行游戏。游戏中的虚拟空间可以具有温度特性。例如,区域温度特性表可以存储在存储器或游戏程序中。在区域温度特性表中,第一温度特性可以与虚拟空间的第一区域匹配,第二温度特性可以与虚拟空间的第二区域匹配。
图58是示出根据本发明的实施例的热体验提供方法的第八实施方式中的游戏中的虚拟空间的示图。
参考图58,游戏中的虚拟空间可以包括火焰区域、冰川区域、平原区域、湖泊区域等,作为全局区域。在本文中,火焰区域可以具有作为温度特性的热温度特性,冰川区域可以具有冷温度特性。
内容再现装置可以生成热反馈开始信号,该热反馈开始信号包括对应于虚拟空间的温度特性的热反馈数据(S820)。可以响应角色(玩家)进入虚拟空间而生成热反馈开始信号。
控制器可以通过在虚拟现实游戏中检查角色在虚拟空间中的位置来确定可玩角色当前所处的当前区域。控制器可以通过检查用户在增强现实游戏中的增强虚拟空间中的位置来确定用户当前所处的当前区域。可以实时进行该确定。或者,当可玩角色或用户进入虚拟空间中的特定区域时,控制器可以确定入口区域。如果确定当前区域或入口区域,则控制器可以参考区域温度特性表根据分配给相应区域(入口区域的当前区域)的温度特性来确定热反馈数据。
作为示例,可以根据温度特性来确定热反馈的类型。例如,在热温度特性分配给相应区域的情况下,热反馈的类型可以被确定为热反馈,而在冷温度特性分配给相应区域的情况下,热反馈的类型可以被确定为冷反馈。
作为另一示例,可以根据温度特性来确定热反馈的强度。例如,温度特性可以包括对应于提供给相应区域的温度值的值,并且控制器可以根据该值确定热反馈的强度。
一旦确定热反馈的强度,控制器可以生成包括热反馈强度信息的热反馈开始信号。
内容再现装置可以发送包括热反馈数据的热反馈开始信号(S830),并且反馈装置可以根据热反馈开始信号执行热反馈输出操作,并且可以输出对应于热反馈数据的热反馈(S840)。
控制器可以经由通信模块将包括热反馈数据的热反馈开始信号传输到反馈装置。当接收到热反馈开始信号时,反馈控制器可以向热电偶阵列供电,以执行热反馈输出操作。此时,反馈控制器可以根据热反馈开始信号中包括的信息生成电源信号。
此外,虚拟空间可以按层次结构分类。上层区域可以包括下层区域。例如,虚拟空间可以是作为最大区域类别的全局区域、作为全局区域的子区域包括在全局区域中的局部区域、作为局部区域的子区域包括在局部区域中的子局部区域等。参考图58,火焰区域(全局区域)可以包括火山子区域(局部区域),湖泊区域(全局区域)可以包括山区(局部区域)和湖泊区域(局部区域),平原区域(全局区域)可以包括湖泊区域(局部区域)和村庄区域(局部区域),冰川区域(全局区域)可以包括温泉区域(局部区域)和村庄区域(局部区域)。如果火焰区域、平原区域、湖泊区域和冰区域被定义为局部区域,则上述子区域可以被定义为子局部区域。
在本文中,当玩家(用户的角色)在冰川区域时,可以输出冷反馈,作为热反馈,但是当玩家在作为冰川区域的子区域的温泉区域时,可以输出热热反馈,作为热反馈。即,分配给子区域(下层区域)的温度特性可以优先于分配给上层区域的温度特性。如果玩家离开温泉区域,则可以输出冷反馈,作为热反馈。在相同的温度特性被分配给上层区域和下层区域(例如,火焰区域和火山子区域)的情况下,较弱的反馈可以输出给上层区域的用户,而较强的反馈可以输出给下层区域。例如,弱热反馈可以分配给火焰区域,强热反馈可以分配给火山子区域。
当用户位于多个区域时,内容再现装置可以确定将提供热体验的位置。具体地,控制器可以根据区域的等级来确定与热体验相关联的区域。例如,当控制器1260位于多个区域中时,控制器可以将较窄的区域(即,多个区域中的下层区域)判断为目标区域,并且生成包括对应于目标区域的温度特性的热反馈数据的热反馈开始信号。
根据上述实施方式,当可玩角色进入虚拟现实中的虚拟空间时,或者当用户进入虚拟现实和/或增强现实中的虚拟空间时,可以输出适合于该区域的虚拟环境的热反馈,以向用户提供真实的热体验。
4.9.第九实施方式
根据本发明的实施例的热体验提供方法的第九实施方式是通过根据游戏中的射击事件输出热反馈来向用户提供热体验的方法。
图59是根据本发明的实施例的热体验提供方法的第九实施方式的流程图。
参考图59,热体验提供方法的第九实施方式可以包括使用支持冲突事件和触发事件的物理引擎来执行游戏,用于处理虚拟对象的射击事件(S910),当虚拟现实游戏(和/或增强现实)中的虚拟对象对可玩角色(或用户)发生击中事件时,生成热反馈开始信号,该热反馈开始信号包括根据处理是冲突事件还是触发事件而确定的热反馈数据(S920),发送热反馈开始信号(S930),并且根据热反馈开始信号执行热反馈输出操作,这可以包括输出对应于热反馈数据的热反馈(S940)。
在下文中,将更详细地描述上述实施方式的每个步骤。
内容再现装置可以使用支持冲突事件和触发事件的物理引擎来执行游戏,用于处理虚拟对象的击中事件(S910)。
控制器可以执行游戏。在本实施方式中执行的游戏可以是用于使用物理引擎处理击中事件的游戏,该击中事件由虚拟空间中的虚拟对象引起。
在本文中,物理引擎是用于模拟计算机图形、视频游戏、电影等领域中的物理现象的软件。物理引擎主要用于上述领域,用于实现图像处理和增加真实感。还提供物理引擎,作为中间件,用于在游戏领域实时计算物理现象。物理引擎的代表性功能可以包括虚拟对象之间的冲突处理和光源处理等。
击中事件(击中事件)是指由用户操作的可玩角色或虚拟现实和/或增强现实中的用户被虚拟对象击中。在该实施方式中,游戏可以使用物理引擎将击中事件处理为冲突事件或触发事件。
具体地,物理引擎可以将冲突确定属性分配给虚拟对象。冲突确定属性可以包括冲突属性和触发属性。在由物理引擎实现的虚拟空间中,由冲突属性分配的虚拟对象被处理为能够与另一虚拟对象冲突。相反,触发器属性分配的虚拟对象被处理为不与另一虚拟对象冲突。
因此,当两个虚拟对象位于虚拟空间中的相同坐标时,如果两个虚拟对象的属性都是冲突属性,则物理引擎可以将其视为冲突事件。另一方面,如果两个虚拟对象中的至少一个是触发属性,则物理引擎可以将其视为触发事件。在在本文中,在冲突事件的情况下,两个虚拟对象的主体彼此不重叠,并且像在真实世界中一样反应,好像它们彼此冲突。相反,根据触发事件,由两个虚拟对象占据的空间彼此重叠,使得一个对象可以穿过另一对象。
由于虚拟现实的可玩角色或用户主要具有冲突属性,所以如果具有冲突属性的虚拟对象击中可玩角色,则物理引擎可以生成冲突事件。虽然如果对象击中可玩角色,物理引擎可以生成触发事件,但是可以生成触发属性。
例如,当可玩角色从虚拟现实和/或增强现实中的高处落在地面上时,可能发生冲突事件,因为地面主要具有冲突属性。类似地,由于游戏中的其他角色或虚拟车辆也具有冲突属性,所以当它们被击中用户的可玩角色时,会导致冲突事件。在另一示例中,在射击游戏中,子弹通常具有触发属性,因此当角色或其他虚拟对象被子弹击中时,发生触发事件。
当虚拟现实游戏(和/或增强现实)中的虚拟对象对可玩角色(或用户)发生击中事件时,内容再现装置可以生成热反馈开始信号,该热反馈开始信号包括根据处理是冲突事件还是触发事件而确定的热反馈数据(S920)。
当在游戏中发生击中事件时,控制器可以确定击中事件的处理方法是冲突事件还是触发事件。这可以根据击中对象的冲突确定属性来确定。控制器可以针对冲突事件和触发事件以不同的方式确定热反馈的强度。
在一个示例中,如果击中事件被确定为冲突事件,则控制器可以基于在物理引擎中计算的脉冲量来确定热反馈的强度。例如,脉冲量越大,热反馈的强度可以设置得越强。此时,物理引擎中的脉冲量可以基于虚拟对象之间的相对速度和提供给虚拟对象的质量值来计算。即,由于脉冲物体的质量大且相对速度高,所以热反馈的强度可以被确定为强。
作为另一示例,当击中事件被确定为触发事件时,控制器可以基于虚拟对象或射弹的类型或者虚拟对象的速度来确定热反馈的强度,因为物理引擎不计算触发事件时的脉冲量。例如,如果被具有触发属性的子弹击中,则控制器可以确定子弹的绝对速度越高,热反馈的强度越强。例如,如果被具有触发属性的子弹击中,则控制器可以根据子弹的类型确定热反馈的强度。再如,如果被具有触发属性的子弹击中,则控制器可以根据发射子弹的武器类型来确定热反馈的强度。此时,控制器可以参考为每种类型的武器设置热反馈强度的表格。例如,武器越强,热反馈的强度就越强。在本文中,为了根据子弹或武器的类型设置热反馈的强度,控制器可以参考为每种子弹/射弹设置热反馈强度的表格。
内容再现装置可以发送包括热反馈数据的热反馈开始信号(S930),并且反馈装置可以根据热反馈开始信号执行热反馈输出操作,该这可以输出对应于热反馈数据的热反馈(S940)。
控制器可以经由通信模块将包括热反馈数据的热反馈开始信号传输到反馈装置。当接收到热反馈开始信号时,反馈控制器可以向热电偶阵列供电,以执行热反馈输出操作。此时,反馈控制器可以根据热反馈开始信号中包括的信息生成电源信号。
根据上述实施方式,可以通过输出关于虚拟空间中发生的击中事件的真实热反馈来向用户给出现实。特别地,在被具有冲突属性的虚拟对象撞击的情况下,可以使用由物理引擎计算的脉冲量来调整热反馈的强度,从而提供对应于实际现实的热反馈。此外,在具有触发属性的虚拟对象难以计算脉冲量的情况下,可以使用其他合适的参数来代替脉冲量,以便简单和现实地提供对应于击中事件的热反馈。
4.10.第十实施方式
根据本发明的实施例的热体验提供方法的第十实施方式是通过输出与游戏中虚拟对象的热传输属性相关联的热反馈来向用户提供热体验的方法。
图60是根据本发明的实施例的热体验提供方法的第十实施方式的流程图。
参考图60,热体验提供方法的第十实施方式可以包括执行包括分配有传热属性的虚拟对象的游戏(S1010),生成包括考虑传热属性的热反馈数据的热反馈开始信号(S1020),发送热反馈开始信号(S1030),并且根据热反馈开始信号执行热反馈输出操作,这可以包括输出对应于热反馈数据的热反馈(S1040)。
在下文中,将更详细地描述上述实施方式的每个步骤。
内容再现装置可以执行包括传热属性被分配给的虚拟对象的游戏(S1010)。
控制器可以执行游戏。同时,在该实施方式中,游戏包括虚拟对象,并且虚拟对象可以具有热传输属性。在本文中,热传输属性可以指示虚拟对象如何向玩家(角色)和/或用户传输热量。
具有热传输属性的虚拟对象可以被视为游戏中的热源。热源可以包括传导热源和辐射热源。传导热源只有在与游戏中的用户(或可玩角色)充分接触时才能传输热量。辐射热源即使在远离游戏中的用户(或可玩角色)时也能传输热量。
考虑到虚拟对象的热传输属性,内容再现装置可以生成包括热反馈数据的热反馈开始信号(S1020)。
考虑到虚拟对象的热传输属性,控制器可以生成包括热反馈数据的热反馈开始信号。
在一个示例中,如果虚拟对象的热传输属性是传导热源,则控制器可以确定用户(或可玩角色)和虚拟对象是否实质上彼此接触。当传导热源与用户(或可玩角色)接触时,控制器可以生成热反馈开始信号。此时,控制器可以基于分配给传导热源的温度特性来确定热反馈的类型和强度。相反,如果用户(或可玩角色)远离传导热源,则控制器可以不生成热反馈开始信号。
在另一示例中,如果虚拟对象的热传输属性是辐射热源,则即使当用户(或可玩角色)与虚拟对象间隔开时,控制器也可以生成热反馈开始信号。此时,控制器可以基于分配给辐射热源(虚拟对象)的温度特性来确定热反馈的类型。控制器还可以根据分配给辐射热源(虚拟对象)的温度特性来确定热反馈的强度。
另一方面,当确定辐射热源的热反馈数据时,控制器可以进一步考虑辐射热源的类型以及用户(或可玩角色)和辐射热源之间的距离。
根据距离(辐射热源和可玩角色(用户)之间的距离)和与其传输的热量之间的关系,辐射热源可以分为几种类型。例如,辐射热源可以包括发射热源、定向热源和区域热源。在本文中,发射热源是随着与热源的距离增加,传输热量变小的热源。定向热源是一种始终传输恒定热量的热源,而不管与热源的距离。区域热源是仅将热传输到距热源预定距离内的区域并且不将热传输到超过预定距离的区域的热源。此外,区域热源可以设置为总是传输恒定热源,或者随着该区域距离的增加,传输较小的热量。
因此,在辐射热源是发射热源的情况下,控制器可以将热反馈强度设置为随着与用户(或可玩角色)的距离变得更近而更强。相反,当辐射热源是定向热源时,控制器可以仅考虑热源的温度来设置热反馈强度,而不管与用户的距离(或可玩角色)。当辐射热源是区域热源时,当用户(或玩家角色)在距热源的预定区域内时,控制器可以根据热源的温度来确定热反馈强度。也可以如上所述考虑热源到用户(或可玩角色)的距离和热源的温度,来确定热反馈强度。此外,当用户(或可玩角色)在预定区域之外时,可能不会生成热反馈开始信号。
同时,为了计算游戏中由热源传输的热量,该实施方式的游戏可以使用根据本发明的实施例的热体验提供方法中描述的物理引擎。
当确定热反馈数据时,控制器可以生成包括热反馈数据的热反馈开始信号。
内容再现装置可以发送包括热反馈数据的热反馈开始信号(S1030),并且反馈装置可以根据热反馈开始信号执行热反馈输出操作,并且可以输出对应于热反馈数据的热反馈(S1040)。
控制器可以经由通信模块将包括热反馈数据的热反馈开始信号传输到反馈装置。当接收到热反馈开始信号时,反馈控制器可以向热电偶阵列供电,以执行热反馈输出操作。此时,反馈控制器可以根据热反馈开始信号中包括的信息生成电源信号。
根据上述实施方式,可以根据距离和与虚拟空间上的热源相关的其他信息来计算传输给用户或可玩角色的热量,并且可以输出相应的热反馈,以给用户提供真实的热体验。
4.11.第十一实施方式
根据本发明的实施例的热体验提供方法的第十一实施方式是通过关联并输出与游戏中虚拟对象的导热率相关联的热反馈来向用户提供热体验的方法。
图61是根据本发明的实施例的热体验提供方法的第十一实施方式的流程图。
参考图61,热体验提供方法的第十一实施方式可以包括执行游戏,该游戏包括分配有与热传导相关的表面属性(表面特性)的虚拟对象(S1110),当发生用户或可玩角色的触摸事件或抓握事件时,生成包括基于表面属性确定的热反馈数据的热反馈开始信号(S1120),发送热反馈开始信号(S1130),并且根据热反馈开始信号执行热反馈输出操作,这可以包括输出对应于热反馈数据的热反馈(S1140)。
在下文中,将更详细地描述上述实施方式的每个步骤。
在热体验提供方法的第十一实施方式中,内容再现装置可以玩包括虚拟对象的游戏,与热传导相关的表面属性分配给该虚拟对象(S1110)。
控制器可以玩游戏。在该实施方式中,游戏包括虚拟对象,并且与热传导相关的表面属性可以分配给虚拟对象。在本文中,表面属性(材料特性或纹理特性)定义了当用户(或可玩角色)抓握或触摸虚拟对象时从虚拟对象传输给用户(或可玩角色)的热量的大小。
内容再现装置可以生成包括热反馈数据的热反馈开始信号。在虚拟对象的用户或可玩角色的触摸事件或抓握事件上,与虚拟对象的表面属性相关联地确定热反馈数据(S1120)。
当发生触摸事件或抓握事件时,控制器可以生成热反馈开始信号。在本文中,控制器可以确定要包括在热反馈开始信号中的热反馈数据。
作为示例,可以基于分配给虚拟对象的温度(温度特性)来确定热反馈的类型。例如,可以基于分配给虚拟对象的温度在热反馈、冷反馈和热格栅反馈中选择热反馈的类型。控制器还可以基于热源(虚拟对象)的温度来确定热反馈的强度。
当确定热反馈数据时,控制器可以生成包括热反馈数据的热反馈开始信号。
内容再现装置可以发送包括热反馈数据的热反馈开始信号(S1030),并且反馈装置可以根据热反馈开始信号执行热反馈输出操作,并且输出对应于热反馈数据的热反馈(S1040)。
控制器可以经由通信模块将包括热反馈数据的热反馈开始信号传输到反馈装置。当接收到热反馈开始信号时,反馈控制器可以向热电偶阵列供电,以执行热反馈输出操作。此时,反馈控制器可以根据热反馈开始信号中包括的信息生成电源信号。
内容再现装置可以发送包括热反馈数据的热反馈开始信号(S1130),并且反馈装置可以根据热反馈开始信号执行热反馈输出操作,并且输出对应于热反馈数据的热反馈(S1140)。
控制器可以经由通信模块将包括热反馈数据的热反馈开始信号传输到反馈装置。当接收到热反馈开始信号时,反馈控制器可以向热电偶阵列供电,以执行热反馈输出操作。此时,反馈控制器可以根据热反馈开始信号中包括的信息生成电源信号。
根据上述实施方式,通过输出对应于虚拟空间中虚拟对象和用户之间的触摸或抓握的热反馈,可以给用户真实感。
4.12.第十二实施方式
根据本发明的实施例的热体验提供方法的第十二实施方式是一种通过在游戏中发生热事件时输出与考虑热事件的优先级相关联的热反馈来向用户提供热体验的方法。
在包括游戏的多媒体环境中,热事件(例如,击中事件、触摸事件、抓握事件或进入特定区域)可以同时发生。
在本文中,热事件是指引发热反馈输出的事件。热事件的示例可以包括在上述热体验提供方法的第六实施例中改变健康点、进入上述热体验提供方法的第八实施例中的热属性分配区域、以及在上述热体验提供方法的第九实施例中被击中或射击等。
例如,可以在可玩角色(或用户)进入引发冷反馈的特定区域的状态下,发生引发热反馈的击中事件(射击事件)。
此时,内容再现装置可以确定热事件之间的优先级,并且输出对于一个热事件的热反馈,该热反馈具有比另一热事件更高的优先级。
例如,当引发热反馈的子弹在湖泊区域中击中角色或用户,引发冷反馈时,可以确定热事件的优先级。然后,当子弹击中事件的优先级被确定为高于进入湖泊事件的优先级时,将首先输出击中事件所包含的热反馈。
具体地,当在进入引起热反馈的区域时发生导致热反馈的击中事件时,控制器可以生成热反馈开始信号,该热反馈开始信号包括热反馈数据,用于在由于进入该区域而输出热反馈之前,根据击中事件对热反馈的输出进行优先级排序,直到根据击中事件的热反馈结束,并且通过通信模块将反馈数据传输到反馈装置,使得反馈控制器根据热反馈数据执行热反馈输出操作。
总之,当存在进入热事件中的区域的区域进入事件和玩家与虚拟对象交互的对象事件时,根据对象事件的热反馈可以优先化为根据区域进入事件的热反馈。
具体地,在区域进入状态中,输出根据区域事件的热反馈,并且当在该状态中发生对象事件时,输出根据对象事件的热反馈。将来,当对象事件结束时,可以恢复根据区域事件的热事件。
4.13.第十三实施方式
根据上述本发明的实施例的热体验提供方法的第十二实施方式涉及当同时发生热事件时应当优先考虑哪个热事件。
然而,也可以将两个热事件组合为同时发生的热事件,从而输出组合的热反馈。
例如,如果同时输出热反馈和冷反馈,则可以输出热格栅反馈。此时,如果热反馈的强度大于基于中性比率确定的强度,则内容再现装置可以输出热格栅反馈,并且在相反的情况下,内容再现装置可以输出冷格栅反馈。
即,控制器可以生成热反馈开始信号,使得由一个热事件引起的热反馈和由另一热事件引起的冷反馈同时提供给用户,从而输出热格栅反馈(冷热格栅反馈或热热格栅反馈)。此外,控制器可以通过比较由一个热事件引起的热反馈的强度和由另一热事件引起的冷反馈的强度来确定热格栅反馈的类型。例如,当热反馈的强度更强时,热格栅反馈的类型可以被确定为热热格栅反馈。当冷反馈的强度更强时,热反馈的类型可以被确定为冷热格栅反馈。
控制器然后可以将通过通信模块生成的热反馈开始信号传输到反馈装置。反馈装置可以参考热反馈开始信号中包括的热反馈数据,并执行输出操作。
4.14.第十四实施方式
根据本发明的实施例的热体验提供方法的第十四实施方式是一种通过在游戏中发生热事件时输出与考虑角色热阻相关联的热反馈来向用户提供热体验的方法。
图62是根据本发明的实施例的热体验提供方法的第十四实施方式的流程图。
参考图62,热体验提供方法的第十四实施方式可以包括执行游戏,其中,虚拟空间中的玩家角色或玩家具有热阻(S1410),生成包括考虑热阻确定的热反馈强度信息的热反馈开始信号(S1420),发送热反馈开始信号(S1430),并且根据热反馈开始信号执行热反馈输出操作,这可以包括输出对应于热反馈数据的热反馈(S1440)。
在下文中,将更详细地描述上述实施方式的每个步骤。
内容再现装置可以执行游戏,其中,虚拟空间中的玩家角色或玩家具有热阻(S1410)。
控制器可以执行游戏。在本文中,在该实施方式中执行的游戏中,热阻可以提供给虚拟现实中的玩家角色或用户化身。热阻可以以能力或才能的形式分配给角色或化身。此外,如果角色或化身装备有武器或盔甲等设备,则有可能在角色的热阻上添加分配给武器或盔甲的热阻。即,可以通过将角色或化身的能力添加到设备的热阻上来确定角色的总热阻。
内容再现装置可以生成热反馈开始信号,该热反馈开始信号包括当发生热事件时考虑热阻(总热阻)而确定的热反馈强度信息(S1420)。
当发生热事件时,控制器可以根据热事件处理热反馈数据。此时,如果角色具有热阻,则控制器可以考虑角色的热阻来调整热反馈的强度。例如,热阻越高,热反馈的强度越低。
另一方面,热阻可以分类为耐热性/耐寒性/耐痛性。在这种情况下,控制器可以确定由热事件发生引起的热反馈的类型,根据热反馈的类型选择要考虑的热阻的类型,并且根据选择的热阻调整热反馈的强度。
内容再现装置可以发送包括热反馈数据的热反馈开始信号(S1430),并且反馈装置可以根据热反馈开始信号执行热反馈输出操作,并且输出对应于热反馈数据的热反馈(S1440)。
控制器可以经由通信模块将包括热反馈数据的热反馈开始信号传输到反馈装置。当接收到热反馈开始信号时,反馈控制器可以向热电偶阵列供电,以执行热反馈输出操作。此时,反馈控制器可以根据热反馈开始信号中包括的信息生成电源信号。
根据上述实施方式,由于根据虚拟空间中的热阻来调整热反馈的强度,所以可以提供反映角色扮演游戏(RPG)中角色的装备和成长程度的热体验。
4.15.第十五实施方式
根据本发明的实施例的热体验提供方法的第十五实施方式是一种通过输出热反馈向用户提供热体验的方法,该热反馈与当在游戏中发生热事件时与考虑与在视场(FOV)中显示的热事件相关的图像的大小相关联。
图63是根据本发明的实施例的用于提供热体验的方法的第十五实施方式的流程图。
参考图63,用于提供热体验的方法的第十五实施方式可以包括执行包括热事件的游戏(S1510),生成包括根据与在FOV中发生的热事件相关的图像占据的面积确定的强度信息的热反馈开始信号(S1520),发送热反馈开始信号(S1530),并且根据热反馈开始信号执行热反馈输出操作,这可以包括输出对应于热反馈数据的热反馈(S1540)。
在下文中,将更详细地描述上述实施方式的每个步骤。
内容再现装置可以执行包括热事件的游戏(S1510),该游戏可以由控制器执行。此外,控制器可以在游戏期间输出视频信号,该视频信号可以是根据虚拟空间中虚拟相机的FOV的视频信号。
当在FOV中发生热事件时,内容再现装置可以生成热反馈开始信号,该热反馈开始信号包括根据与热事件相关的图像所占据的面积确定的热反馈强度信息(S1520)。
控制器可以计算与在FOV中发生的热事件相关的图像所占据的面积。控制器然后可以根据占用区域确定热反馈强度信息,并将其包括在内,以生成热反馈开始信号。例如,随着与热事件相关联的图像所占据的像素数量的增加,热反馈的强度可以增加。
内容再现装置可以发送包括热反馈数据的热反馈开始信号(S1530),并且反馈装置可以根据热反馈开始信号执行热反馈输出操作,并且可以输出对应于热反馈数据的热反馈(S1540)。
控制器可以经由通信模块向反馈装置发送包括热反馈数据的热反馈开始信号。当接收到热反馈开始信号时,反馈控制器可以向热电偶阵列供电,以执行热反馈输出操作。此时,反馈控制器可以根据热反馈开始信号中包括的信息生成电源信号。
根据上述实施例,即使生成相同的热事件,当用户在热事件方向上放大视野时,也可以输出强热反馈,而当用户缩小视野时,可以输出弱热反馈。类似地,热反馈可以通过转动FOV而减弱,使得用户将热事件移出屏幕,并且可以通过将热事件输入FOV而增强。因此,可以进一步改善用户的热体验。
4.16.第十六实施方式
根据本发明的实施例的热体验提供方法的第十六实施方式是通过输出与游戏中的增强现实相关联的热反馈来向用户提供热体验的方法。
图64是根据本发明的实施例的热体验提供方法的第十六实施方式的流程图。
参考图64,热体验提供方法的第十六实施方式可以包括捕捉真实世界的图像(S1610),基于捕捉的图像检测用户FOV中的热物体(S1620),根据检测到的热物体生成热反馈数据(S1630),发送包括热反馈数据的热反馈开始信号(S1640),并且根据热反馈开始信号执行热反馈输出操作,这可以输出对应于热反馈数据的热反馈(S1650)。
在下文中,将更详细地描述上述实施方式的每个步骤。
内容再现装置可以通过相机捕捉真实世界的图像(S1610)。此时,内容再现装置可以用包括相机的HMD的形式提供。或者,内容再现装置可以设置为与HMD相关联的控制台装置。在这种情况下,内容再现装置可以通过通信模块获得(接收)由HDM的相机获得的真实世界的图像(视频)。
内容再现装置可以基于图像检测用户的FOV中的热物体(S1620)。控制器可以通过图像识别算法识别图像中包括的热物体。在本文中,热物体可以是通过增强现实应用结合到真实世界的真实物体或虚拟对象。
内容再现装置可以根据检测到的热物体生成热反馈数据(S1630)。控制器可以使用热物体的识别结果获得分配给热物体的温度属性(温度特性)。此外,控制器可以根据温度属性确定热反馈的类型。
内容再现装置可以发送包括热反馈数据的热反馈开始信号(S1640),并且反馈装置可以根据热反馈开始信号执行热反馈输出操作,这可以输出对应于热反馈数据的热反馈(S1650)。
控制器可以经由通信模块将包括热反馈数据的热反馈开始信号传输到反馈装置。当接收到热反馈开始信号时,反馈控制器可以向热电偶阵列供电,以执行热反馈输出操作。此时,反馈控制器可以根据热反馈开始信号中包括的信息生成电源信号。
4.17.第十七实施方式
根据本发明的实施例的热体验提供方法的第十七实施方式是通过输出与考虑视场(FOV)或发生热事件的角色位置以及屏幕中的位置相关联的热反馈来向用户提供热体验的方法。
将基于用户双手使用两个反馈装置的情况来描述本实施方式。
图65是根据本发明的实施例的用于提供热体验的方法的第十七实施方式的流程图。
参考图65,热体验提供方法的第十七实施方式可以包括再现多媒体内容(S1710),生成在多媒体内容再现期间的热事件(S1720),根据热事件的发生方向确定热反馈目标(S1730),根据热反馈目标的确定发送热反馈开始信号(S1740),并且响应于热反馈开始信号的接收执行热反馈输出操作,这可以输出对应于热反馈数据的热反馈(S1750)。
在下文中,将更详细地描述上述实施方式的每个步骤。
内容再现装置可以再现多媒体内容(S1710)。在本文中,多媒体内容可以包括至少一个热事件。内容再现装置还可以与用户右手抓握的第一反馈装置和用户左手抓握的第二反馈装置通信。
内容再现装置可以根据多媒体内容再现生成热事件(S1720)。在本文中,热事件可以包括在根据上述本发明的实施例的热体验提供方法中描述的所有热事件。
当在多媒体内容的再现期间发生热事件时,内容再现装置可以根据热事件的方向来确定热反馈目标(S1730)。
控制器可以确定热事件的发生方向。具体地,在包括虚拟现实应用或增强现实应用的第一人称观看多媒体内容的情况下,可以基于热事件的位置和FOV的关系来确定热事件的发生方向。在第三人观看内容的情况下,可以基于游戏中的玩家角色来确定热事件发生的方向。
当确定热事件发生的方向时,控制器可以根据生成方向确定热反馈目标。
图66是示出根据本发明的实施例的热体验提供方法的第十七实施方式的第一人称游戏中根据热事件发生点的热反馈目标对象的示图。
例如,参考图66,当基于第一人称视角应用中的FOV在中心部分发生热事件时,控制器可以将热反馈目标确定为第一反馈装置和第二反馈装置。此外,当基于FOV在右侧发生热事件时,控制器可以将热反馈目标确定为第一反馈装置。另一方面,当基于FOV在左侧发生热事件时,控制器可以将热反馈目标确定为第二反馈装置。
内容再现装置可以根据热反馈目标的确定发送热反馈开始信号(S1740)。
一旦确定热反馈目标,控制器可以经由通信模块向反馈装置发送热反馈开始信号,反馈装置是所确定的热反馈目标。
当接收到热反馈开始信号时,反馈装置可以响应于热反馈开始信号的接收来执行热反馈输出操作。可以基于热反馈数据输出热反馈输出(S1750)。
另一方面,在该实施方式中,随着热事件的发生点移动,输出热反馈的反馈装置可以随着当前实施方式的实时应用而改变。例如,如果当在FOV右侧发生热事件时,用户转动FOV,则热事件发生的点可以通过中心移动到左侧。此时,热反馈目标可以按照右反馈装置、这两个反馈装置和左反馈装置的顺序改变。
尽管上面已经将本实施例描述为在使用多个反馈装置的环境中执行,但是不一定如此。例如,当使用单个反馈装置时,可以应用这种实施方式,即使在一种情况下设置有多个热输出模块,例如,双手抓握的游戏控制器。在这种情况下,可以选择游戏控制器中包括的第一热输出模块和第二热输出模块,而不是选择第一反馈装置和第二反馈装置,作为热反馈目标,并且反馈装置的反馈控制器可以通过向热反馈开始信号发送热反馈目标信息来确定输出热反馈的热输出模块。作为另一示例,即使在反馈装置仅具有一个热输出模块的情况下,也可以应用本实施方式。如果只有一个模块具有由多个热电偶组构成的热电偶阵列(即,一个热模块被配置为可通过区域来控制),则可以确定模块的哪个区域(中心/右侧/左侧/整体)将输出热反馈。
根据上述本发明的实施例的提供热反馈的方法可以单独使用或彼此结合使用。此外,由于在每个热反馈提供方法中描述的每个步骤不是必需的,所以可以通过包括所有或部分步骤来执行提供热反馈的方法。此外,由于描述步骤的顺序仅仅是为了便于解释,所以提供热反馈的方法中的步骤不必按照描述的顺序执行。
此外,在根据上述本发明的实施例的提供热反馈的方法中,不提及执行实体的步骤可以由反馈装置的应用控制器和反馈控制器中的至少一个来执行。此外,在前面的描述中,如果需要,已经描述为由应用控制器执行的内容可以由反馈控制器执行,反之亦然。此外,也可以通过应用控制器或反馈控制器的协作来执行上述要由应用控制器或反馈控制器执行的项目。如前所述,应当注意,应用控制器和反馈控制器可以实现为单个控制器。
5.用于生成多媒体内容的方法
在下文中,将描述在热体验提供方法中使用的生成多媒体内容的方法。根据本发明的实施例的生成多媒体内容的方法可以包括生成视频内容的方法和生成游戏或可感知应用的方法。
5.1.电子装置
根据本发明的实施例的用于生成多媒体内容的方法可以由电子装置来执行。电子装置的典型示例包括个人电脑和工作站。此外,电子装置可以包括膝上型笔记本、平板电脑、智能电话等。
图67是根据本发明的实施例的电子装置2000的框图。
参考图67,电子装置2000可以包括输入模块2200、输出模块2400、存储器2600和控制器2800。
输入模块2200可以从用户接收用户输入。用户输入可以是各种形式,包括按键输入、触摸输入和语音输入等。输入模块2200的示例可以包括传统类型的按键、键盘和鼠标、用于感测用户触摸的触摸传感器以及用于感测或接收各种类型的用户输入的各种类型的输入装置,这是综合概念。此外,输入模块2200可以以输入接口(USB端口、PS/2端口等)的形式实现,该输入接口将接收用户输入的外部输入装置与电子装置连接,而不是装置本身感测用户输入。
输出模块2400可以输出各种信息并将其提供给用户。输出模块2400是综合概念,包括用于输出视频的显示器、用于输出声音的扬声器、用于生成振动的触觉装置以及其他各种类型的输出装置。此外,输出模块2400可以以端口类型输出接口的形式实现,该端口类型输出接口将上述单独的输出装置连接到电子装置2000。
存储器2600可以存储各种信息。存储器可以暂时或半永久地存储数据。存储器的示例包括HDD、SSD、闪存、ROM和RAM。可以以嵌入电子装置2000中的形式或者以可拆卸的形式提供存储器2600。存储器(2600)可以存储驱动电子装置2000所需或使用的各种数据,包括用于以电子装置2000的内置形式或可拆卸形式驱动电子装置2000的OS数据。
控制器2800控制电子装置的整体操作(2000)。即,控制器2800可以执行各种信息的计算和处理,并控制电子装置的其他组件的操作。根据硬件、软件或其组合,可以在计算机或类似装置中实现控制器。在硬件中,可以以电子电路的形式提供控制器,该电子电路利用电信号处理来执行控制功能。在软件中,可以以驱动硬件控制器的程序的形式提供控制器。电子装置2000的操作可以被解释为由控制器2800执行,除非在生成提供下述热体验的多媒体内容的方法的实施方式中另有说明。
5.2.第一实施方式
在下文中,将描述根据本发明的实施例的用于生成多媒体内容的方法的第一实施方式。该实施例涉及一种在多媒体内容中生成视频内容的方法。
在上述热体验提供方法的第一实施方式中,在再现被设置为使得热事件场景再现时间点与一个热反馈再现重合的视频内容的情况下,内容再现装置中的热反馈开始时间点早于热反馈再现时间点,使得用户可以在再现热事件图片的时间点感受到热反馈。
或者,当生成热反馈数据时,也可以考虑热反馈的供电时间点和用户感觉时间点之间的时间差来预先设置热反馈的再现时间点。根据本发明的实施例的用于生成提供热体验的多媒体内容的方法涉及一种用于生成要链接到视频或音频的视频内容的热反馈数据的方法,即使热体验提供系统根据视频内容的热反馈数据在热反馈的再现时间执行热反馈输出操作。
图68是根据本发明的实施例的用于生成多媒体内容的方法的第一实施方式的流程图。
在图68中,用于生成多媒体内容的方法的第一实施方式可以包括获得热事件场景的再现时间点(S1810),基于热事件场景的再现时间点和校正时间计算热反馈再现时间点(S1820),并且基于热反馈再现点生成热反馈数据(S1830)。
在下文中,将更详细地描述上述实施方式的每个步骤。
电子装置可以获得热事件场景的输出时间点(S310)。控制器可以通过输入模块接收与要链接到热反馈的热事件场景的再现时间相关的用户输入。
此时,电子装置可以提供UI屏幕,该UI屏幕允许用户能够通过输出模块(例如,显示器)容易地输入热事件场景的再现时间点。UI屏幕可以设置为与传统图像编辑程序所提供的屏幕有些相似。
UI屏幕可以包括反映视频内容的再现时间点的进度条、设置在进度条上的指示器以及用于输出与指示器指示的时间点相对应的场景的视频窗口。UI屏幕还可以包括用于控制再现视频内容的控制面板。在本文中,用户可以移动进度条上的指示器或者使用控制面板再现视频内容,并且在这样做的过程中,用户可以在该过程中看到通过视频窗口输出的场景。当在视频窗口上显示希望成为热事件场景的场景时,用户可以选择时间点,作为热事件场景的再现时间点,在该时间点,进度条上的指示器与该场景相对应。此时,UI屏幕可以与菜单一起提供,用于进一步选择热反馈的对象、类型、强度和持续时间。
经由UI屏幕,用户可以通过视频窗口搜索要与热反馈链接的场景,并且输入用户输入,用于选择在视频窗口中输出期望场景的时间点,作为输出要链接到热反馈的特定场景的时间点。控制器可以通过输入模块接收用户输入来获得特定场景的输出时间点。
电子装置可以基于热事件场景的输出时间点和校正时间来计算热反馈的供电时间点(S1820)。
在本文中,校正时间可以是从允许向热电元件供电以开始热反馈的输出的时间到用户通过接触表面感觉到热感觉的时间所花费的延迟时间。
控制器可以通过从获得的输出时间点减去校正时间来计算用于开始输出热反馈的供电时间点。
当计算供电时间点时,电子装置可以基于该时间点生成热反馈数据(S1830)。热反馈数据可以包括关于热反馈的类型和强度的信息以及关于开始输出热反馈的供电时间点的信息。热反馈数据可以进一步包括关于目标反馈装置的信息,在热体验提供系统使用多个反馈装置的情况下,热反馈将输出到该目标反馈装置。例如,在使用两个条形游戏控制器的VR系统中,关于目标反馈装置的信息可以是关于输出热反馈的游戏控制器的信息。此外,在热体验提供系统中,该信息还可以包括输出热反馈数据的热电偶组,即,当反馈装置的热电元件设置在包括多个单独可控的热电偶组的热电偶阵列中时,指定操作组的目标区域。
以这种方式生成的热反馈数据可以用于输出链接到视频输出的热反馈,在再现视频内容时参考该视频输出。为此,热反馈数据可以作为与视频文件分开的文件来提供,例如,在视频输出期间提供字幕的字幕文件。或者,可以作为集成热反馈数据和视频数据的单个文件来提供。
如在该实施例中一样,当考虑到用户从用于开始输出热反馈的功率允许时间点感受热反馈所需的延迟时间来生成热反馈数据时,在热体验提供方法的第一实施例中,内容再现装置不需要考虑延迟时间来校正热反馈的输出时间点,这有利于减少多媒体内容再现中的计算,与热体验提供方法的第一实施例不同。
另一方面,热体验提供方法的第一实施例的方法更有利,比该实施例具有更高的兼容性。例如,由于反馈装置的制造商从用于开始输出热反馈的功率允许时间点到用户的热感觉时间点的延迟时间可能略有不同,所以考虑到热体验提供方法的第一实施例中的反馈装置的类型,可以针对每种情况自适应地处理校正时间。
在实施方式的以上描述中,主要解释多媒体内容中的视频内容,但是该实施例可以应用于其他类型的多媒体内容,例如,游戏或可感知的应用。通常,该实施例可以用于在游戏过程中出现视频剪辑场景的场景,并且可以与根据本发明的实施例的热体验提供方法的第一实施方式相同。
在该实施例和热体验提供方法的第一实施例中,当热电元件的响应时间快时,上述效果可能稍微小一些。然而,在用材料(例如,橡胶)处理接触表面以改善游戏控制器中用户的抓握感的情况下,从热电元件到接触表面的热传输所需的时间可能变得更长,并且在这种情况下,期望进一步发挥优势。
5.3.第二实施方式
在下文中,将描述根据本发明的实施例的用于生成多媒体内容的方法的第二实施方式。该实施例涉及一种生成多媒体内容的方法,以多媒体内容中的游戏或可感知应用程序的形式提供该多媒体内容。
在上述热体验提供方法的第二实施方式中,可以包括生成虚拟对象并将热特性分配给生成的虚拟对象。
在本文中,虚拟对象是指能够在游戏、可感知的游戏应用程序等中与玩家交互的对象。
当生成虚拟对象时,生成的虚拟对象可以具有热特性。
热特性(属性、特性)与热反馈的类型和强度直接或间接相关。
此外,可以定义各种热特性(属性)。一些简单的示例是温度值、材料值、电阻值等。在具体示例中,用于确定热反馈的强度/类型/目标装置的所有信息可以是本发明的热体验提供方法中对象的热特性,
在一个示例中,虚拟对象具有元素属性,从而可以相应地确定热反馈的类型。这在根据本发明的实施例的热体验提供方法的第三实施方式中详细解释。
在另一示例中,可以根据分配给对象的热特性(属性)来确定热传输方法,这在根据本发明的实施例的热体验提供方法的第十实施例中示出。
此外,可以在游戏制作引擎上使用这种实施方式。例如,现有的游戏制作引擎主要包括处理物体冲突和光路的物理引擎,并且可以理解,热处理功能添加到这种物理引擎。
根据上述本发明的实施例的提供热体验的多媒体内容生成方法可以单独使用或者彼此结合使用。此外,由于在每个多媒体内容生成方法中描述的每个步骤不是必需的,所以可以通过包括所有或部分步骤来执行多媒体内容生成方法。此外,由于描述步骤的顺序仅仅是为了方便描述,所以用于生成多媒体内容的方法中的步骤不必按照所描述的顺序执行。
前面的描述仅仅是对本发明的技术思想的说明,本领域技术人员可以在本发明的基本特征范围内对其进行各种改变和修改。因此,上述本发明的实施例可以单独或组合实现。
因此,在本发明中公开的实施例不是为了限制本发明的范围,而是为了说明本发明的技术思想。本发明的保护范围应当根据以下权利要求来解释,并且在其等同范围内的所有技术思想应当被解释为包括在本发明的范围内。
Claims (1)
1.一种内容再现装置,其特征在于,所述内容再现装置再现多媒体内容,并且与执行热电操作的多个反馈装置协作,所述内容再现装置包括:
存储器,所述存储器被配置为存储数据;
通信模块,所述通信模块被配置为与所述多个反馈装置进行通信;以及
控制器,所述控制器被配置为:
执行提供在虚拟空间中移动的虚拟角色的虚拟现实应用,
获得所述虚拟角色在所述虚拟空间中的面向方向,
当在所述虚拟空间中发生热事件时,基于所述热事件发生在所述虚拟空间中的位置相对于所述虚拟角色的所述面向方向的相对取向,确定所述多个反馈装置中的至少一个目标装置,以及
将指示根据所述热事件执行热电操作的信号传输到所述目标反馈装置。
Applications Claiming Priority (24)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US201662415437P | 2016-10-31 | 2016-10-31 | |
US62/415437 | 2016-10-31 | ||
KR1020160158765A KR20180048200A (ko) | 2016-10-31 | 2016-11-25 | 피드백 디바이스, 콘텐츠 재생 디바이스, 열적 경험 제공 시스템 및 열적 경험 제공 방법 |
KR10-2016-0158765 | 2016-11-25 | ||
KR1020160158762A KR102554721B1 (ko) | 2016-10-31 | 2016-11-25 | 피드백 디바이스, 콘텐츠 재생 디바이스, 열적 경험 제공 시스템 및 열적 경험 제공 방법 |
KR10-2016-0158764 | 2016-11-25 | ||
KR10-2016-0158783 | 2016-11-25 | ||
KR10-2016-0158777 | 2016-11-25 | ||
KR10-2016-0158762 | 2016-11-25 | ||
KR1020160158777A KR20180048204A (ko) | 2016-10-31 | 2016-11-25 | 피드백 디바이스, 콘텐츠 재생 디바이스, 열적 경험 제공 시스템 및 열적 경험 제공 방법 |
KR10-2016-0158774 | 2016-11-25 | ||
KR1020160158785A KR20180048207A (ko) | 2016-10-31 | 2016-11-25 | 열적 경험을 제공하는 멀티미디어 콘텐츠 생성 방법 및 이를 수행하는 전자 기기 |
KR10-2016-0158767 | 2016-11-25 | ||
KR1020160158770A KR20180048202A (ko) | 2016-10-31 | 2016-11-25 | 피드백 디바이스, 콘텐츠 재생 디바이스, 열적 경험 제공 시스템 및 열적 경험 제공 방법 |
KR1020160158774A KR20180048203A (ko) | 2016-10-31 | 2016-11-25 | 피드백 디바이스, 콘텐츠 재생 디바이스, 열적 경험 제공 시스템 및 열적 경험 제공 방법 |
KR1020160158764A KR20180048199A (ko) | 2016-10-31 | 2016-11-25 | 피드백 디바이스, 콘텐츠 재생 디바이스, 열적 경험 제공 시스템 및 열적 경험 제공 방법 |
KR1020160158783A KR20180048206A (ko) | 2016-10-31 | 2016-11-25 | 피드백 디바이스, 콘텐츠 재생 디바이스, 열적 경험 제공 시스템 및 열적 경험 제공 방법 |
KR10-2016-0158785 | 2016-11-25 | ||
KR10-2016-0158781 | 2016-11-25 | ||
KR10-2016-0158770 | 2016-11-25 | ||
KR1020160158781A KR20180048205A (ko) | 2016-10-31 | 2016-11-25 | 피드백 디바이스, 콘텐츠 재생 디바이스, 열적 경험 제공 시스템 및 열적 경험 제공 방법 |
KR1020160158767A KR20180048201A (ko) | 2016-10-31 | 2016-11-25 | 피드백 디바이스, 콘텐츠 재생 디바이스, 열적 경험 제공 시스템 및 열적 경험 제공 방법 |
PCT/KR2017/011866 WO2018080174A1 (ko) | 2016-10-31 | 2017-10-25 | 피드백 디바이스, 콘텐츠 재생 디바이스, 열적 경험 제공 시스템 및 열적 경험 제공 방법 |
CN201780081874.6A CN110199243B (zh) | 2016-10-31 | 2017-10-25 | 用于提供热体验的反馈装置、内容再现装置、系统和方法 |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201780081874.6A Division CN110199243B (zh) | 2016-10-31 | 2017-10-25 | 用于提供热体验的反馈装置、内容再现装置、系统和方法 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN115999144A true CN115999144A (zh) | 2023-04-25 |
Family
ID=62020036
Family Applications (4)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202211386998.4A Pending CN115738237A (zh) | 2016-10-31 | 2017-10-25 | 用于提供热体验的反馈装置、内容再现装置、系统和方法 |
CN202211386813.XA Pending CN115999144A (zh) | 2016-10-31 | 2017-10-25 | 用于提供热体验的反馈装置、内容再现装置、系统和方法 |
CN202211386937.8A Pending CN115738236A (zh) | 2016-10-31 | 2017-10-25 | 用于提供热体验的反馈装置、内容再现装置、系统和方法 |
CN202211386855.3A Pending CN115738235A (zh) | 2016-10-31 | 2017-10-25 | 用于提供热体验的反馈装置、内容再现装置、系统和方法 |
Family Applications Before (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202211386998.4A Pending CN115738237A (zh) | 2016-10-31 | 2017-10-25 | 用于提供热体验的反馈装置、内容再现装置、系统和方法 |
Family Applications After (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202211386937.8A Pending CN115738236A (zh) | 2016-10-31 | 2017-10-25 | 用于提供热体验的反馈装置、内容再现装置、系统和方法 |
CN202211386855.3A Pending CN115738235A (zh) | 2016-10-31 | 2017-10-25 | 用于提供热体验的反馈装置、内容再现装置、系统和方法 |
Country Status (4)
Country | Link |
---|---|
US (3) | US10561374B2 (zh) |
KR (2) | KR102369905B1 (zh) |
CN (4) | CN115738237A (zh) |
WO (1) | WO2018080174A1 (zh) |
Families Citing this family (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6138566B2 (ja) * | 2013-04-24 | 2017-05-31 | 川崎重工業株式会社 | 部品取付作業支援システムおよび部品取付方法 |
US10719987B1 (en) | 2017-06-28 | 2020-07-21 | Kilburn Live, Llc | Augmented reality in a virtual reality environment |
CN109085922B (zh) * | 2018-07-27 | 2021-02-12 | 北京航空航天大学 | 一种多元触觉融合反馈手柄 |
US10437340B1 (en) * | 2019-01-29 | 2019-10-08 | Sean Sullivan | Device for providing thermoreceptive haptic feedback |
CN110493729B (zh) * | 2019-08-19 | 2020-11-06 | 芋头科技(杭州)有限公司 | 增强现实设备的交互方法、设备及存储介质 |
US11816757B1 (en) * | 2019-12-11 | 2023-11-14 | Meta Platforms Technologies, Llc | Device-side capture of data representative of an artificial reality environment |
TWI747337B (zh) * | 2020-06-20 | 2021-11-21 | 續天曙 | 射擊遊戲系統 |
US20220080302A1 (en) * | 2020-09-17 | 2022-03-17 | Whoborn Inc. | Apparatus for reproducing temperature for metaverse |
WO2023042255A1 (ja) * | 2021-09-14 | 2023-03-23 | 株式会社ソニー・インタラクティブエンタテインメント | 操作デバイス、その制御装置、制御方法、及びプログラム |
US11808493B1 (en) * | 2022-08-16 | 2023-11-07 | Braeden Ostepchuk | Apparatus and method for enhancing physiological thermoregulation |
Family Cites Families (61)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO1995020787A1 (en) | 1994-01-27 | 1995-08-03 | Exos, Inc. | Multimode feedback display technology |
GB9505916D0 (en) | 1995-03-23 | 1995-05-10 | Norton John M | Controller |
JPH09199765A (ja) | 1995-11-13 | 1997-07-31 | Ngk Insulators Ltd | 熱電気変換モジュールおよびその製造方法 |
US6353623B1 (en) | 1999-01-04 | 2002-03-05 | Uniphase Telecommunications Products, Inc. | Temperature-corrected wavelength monitoring and control apparatus |
US6496200B1 (en) | 1999-11-02 | 2002-12-17 | Interval Research Corp. | Flexible variation of haptic interface resolution |
KR100346196B1 (ko) | 1999-11-11 | 2002-07-26 | 삼성전자 주식회사 | 피부접촉형 단말기에서 열형태 경보신호를 제공하는 장치및그 제어방법 |
JP2003308009A (ja) | 2002-04-17 | 2003-10-31 | Nippon Hoso Kyokai <Nhk> | 触覚刺激による感性情報提示装置 |
JP2005077066A (ja) | 2003-09-03 | 2005-03-24 | Toshiba Corp | 空調管理装置、空調管理プログラム、および空調管理システム |
US6880345B1 (en) | 2003-11-04 | 2005-04-19 | Intel Corporation | Cooling system for an electronic component |
EP1533678A1 (en) * | 2003-11-24 | 2005-05-25 | Sony International (Europe) GmbH | Physical feedback channel for entertaining or gaming environments |
US20160098095A1 (en) * | 2004-01-30 | 2016-04-07 | Electronic Scripting Products, Inc. | Deriving Input from Six Degrees of Freedom Interfaces |
JP2005234881A (ja) | 2004-02-19 | 2005-09-02 | Nec Corp | 触圧覚提示携帯端末及び方法 |
JP3868450B2 (ja) * | 2005-01-31 | 2007-01-17 | 株式会社コナミデジタルエンタテインメント | ゲーム装置、ゲーム装置の制御方法及びプログラム |
KR100867408B1 (ko) | 2005-12-23 | 2008-11-06 | 한국과학기술원 | 촉감과 냉온감을 동시에 전달하는 촉감 디스플레이 장치 |
US20200046936A1 (en) | 2010-02-02 | 2020-02-13 | University Of Pittsburgh - Of The Commonwealth System Of Higher Education | Noninvasive, regional brain thermal stimulation for inducing relaxation |
US20090233710A1 (en) * | 2007-03-12 | 2009-09-17 | Roberts Thomas J | Feedback gaming peripheral |
JP2008227178A (ja) | 2007-03-13 | 2008-09-25 | Sumitomo Chemical Co Ltd | 熱電変換モジュール用基板及び熱電変換モジュール |
US7830361B2 (en) * | 2007-03-30 | 2010-11-09 | Sony Corporation | Haptic interface system for video systems |
US8177825B2 (en) | 2007-12-10 | 2012-05-15 | Remco International, Inc. | Method of dynamic binary temperature therapy |
KR20100051386A (ko) * | 2008-11-07 | 2010-05-17 | 한국전자통신연구원 | 촉각 피드백 제공 장치 및 방법 |
US20140194726A1 (en) | 2013-01-04 | 2014-07-10 | Neurotrek, Inc. | Ultrasound Neuromodulation for Cognitive Enhancement |
KR101056950B1 (ko) | 2010-03-04 | 2011-08-16 | 주식회사 유연플러스 | 교체가능한 매체를 이용한 휴대용 냉온 마사지 장치 |
EP2617072B1 (en) | 2010-09-13 | 2020-05-06 | Tempronics, Inc. | Distributed thermoelectric string and insulating panel and applications for local heating, local cooling, and power generation from heat |
US10318002B2 (en) | 2010-09-15 | 2019-06-11 | Inventus Engineering Gmbh | Magnetorheological transmission device |
US8759721B1 (en) | 2010-11-02 | 2014-06-24 | Piatto Technologies, Inc. | Heated or cooled dishwasher safe dishware and drinkware |
US8550905B2 (en) * | 2011-04-11 | 2013-10-08 | Sony Computer Entertainment Inc. | Temperature feedback motion controller |
US20130021234A1 (en) * | 2011-07-21 | 2013-01-24 | Frederick Umminger | Apparatus, system, and method for providing feedback sensations of temperature and texture to a controller |
US10101810B2 (en) | 2011-11-28 | 2018-10-16 | At&T Intellectual Property I, L.P. | Device feedback and input via heating and cooling |
US9696804B2 (en) | 2011-12-23 | 2017-07-04 | Pine Development Corporation | Systems and methods for eliciting cutaneous sensations by electromagnetic radiation |
WO2013099321A1 (ja) | 2011-12-26 | 2013-07-04 | Nakanuma Tadashi | 熱電発電装置 |
JP5857792B2 (ja) | 2012-02-27 | 2016-02-10 | 富士通株式会社 | 熱電デバイスおよびその製造方法 |
KR101344033B1 (ko) | 2012-06-07 | 2014-01-16 | 장성호 | 개인용 의복 미기후 냉난방 장치 및 이를 부착한 의복 |
US8902159B1 (en) | 2012-07-24 | 2014-12-02 | John Matthews | Ergonomic support apparatus having situational sensory augmentation |
KR20140090318A (ko) * | 2013-01-07 | 2014-07-17 | 삼성전자주식회사 | 햅틱 기반 카메라 운용 지원 방법 및 이를 지원하는 단말기 |
KR101498141B1 (ko) | 2013-02-20 | 2015-03-05 | 한국에너지기술연구원 | 체감 지수에 기반한 실내 환경 제어 장치, 단말 및 방법 |
BR112015025869A2 (pt) * | 2013-04-16 | 2017-07-25 | Sony Corp | aparelhos de processamento de informação e de exibição, métodos para processamento de informação e para exibição, e, sistema de processamento de informação |
KR101515410B1 (ko) | 2013-09-27 | 2015-04-30 | 한국표준과학연구원 | 복합 촉감 생성모듈, 복합 촉감 제시방법, 그 복합 촉감 생성모듈이 구비된 마우스 및 복합촉각제시시스템 |
US9908048B2 (en) | 2013-06-08 | 2018-03-06 | Sony Interactive Entertainment Inc. | Systems and methods for transitioning between transparent mode and non-transparent mode in a head mounted display |
US9514620B2 (en) | 2013-09-06 | 2016-12-06 | Immersion Corporation | Spatialized haptic feedback based on dynamically scaled values |
KR101493797B1 (ko) | 2013-10-18 | 2015-02-17 | 한국과학기술원 | 메쉬형 기판을 이용한 플랙시블 열전소자 및 그 제조방법 |
KR101493792B1 (ko) | 2013-11-08 | 2015-02-17 | 한국과학기술원 | 플랙시블 열전소자 및 그 제작방법 |
DE102013114319A1 (de) | 2013-12-18 | 2015-06-18 | Dr. Hahn Gmbh & Co. Kg | Verfahren und Vorrichtung zur Übertragung von elektrischer Leistung und von Signalen zwischen einer Wand und einem gegenüber dieser schwenkbaren Flügel |
KR20160001312A (ko) * | 2014-06-27 | 2016-01-06 | 주식회사 대창 | 열전 소자 모듈 |
KR20160033585A (ko) | 2014-09-18 | 2016-03-28 | 비손메디칼 주식회사 | 의료기 레이저 다이오드용 전원 공급 장치 |
KR102073227B1 (ko) | 2014-09-25 | 2020-02-04 | 한국과학기술원 | 촉감 서비스 제공 장치 |
US9934697B2 (en) | 2014-11-06 | 2018-04-03 | Microsoft Technology Licensing, Llc | Modular wearable device for conveying affective state |
US11033058B2 (en) | 2014-11-14 | 2021-06-15 | Gentherm Incorporated | Heating and cooling technologies |
US9703381B2 (en) | 2015-02-18 | 2017-07-11 | Ecole Polytechnique Federale De Lausanne (Epfl) | Multimodal haptic device including a thermal and tactile display unit, system, and method of using the same |
US9665174B2 (en) * | 2015-02-20 | 2017-05-30 | Sony Interactive Entertainment Inc. | Magnetic tracking of glove fingertips with peripheral devices |
US10296086B2 (en) * | 2015-03-20 | 2019-05-21 | Sony Interactive Entertainment Inc. | Dynamic gloves to convey sense of touch and movement for virtual objects in HMD rendered environments |
KR20160117944A (ko) | 2015-04-01 | 2016-10-11 | 엘지이노텍 주식회사 | 열전모듈 및 이를 포함하는 열전환장치 |
KR101729226B1 (ko) | 2015-04-17 | 2017-05-04 | 씨제이포디플렉스 주식회사 | 특수효과 의자 및 이를 포함하는 시스템 |
US10635161B2 (en) * | 2015-08-04 | 2020-04-28 | Google Llc | Context sensitive hand collisions in virtual reality |
US9672702B2 (en) | 2015-09-23 | 2017-06-06 | Apple Inc. | Thermal haptic alert notification |
KR102226472B1 (ko) | 2016-01-26 | 2021-03-12 | 한국전자기술연구원 | 제어 대상 장치의 온도 피드백 시스템 및 장치 |
US9983697B1 (en) * | 2016-05-18 | 2018-05-29 | Meta Company | System and method for facilitating virtual interactions with a three-dimensional virtual environment in response to sensor input into a control device having sensors |
JP6607448B2 (ja) | 2016-06-21 | 2019-11-20 | パナソニックIpマネジメント株式会社 | 熱電変換器 |
US10613630B2 (en) | 2016-09-30 | 2020-04-07 | Sony Interactive Entertainment Inc. | Temperature controlled headset apparatus |
WO2018187320A1 (en) | 2017-04-03 | 2018-10-11 | U.S. Department Of Veterans Affairs | Smart foot position sensor for power wheelchair users, and systems and methods of using same |
WO2019045165A1 (ko) | 2017-08-31 | 2019-03-07 | 주식회사 테그웨이 | 피드백 디바이스 및 이를 이용하는 열적 피드백 제공 방법 |
US10799698B2 (en) | 2018-06-15 | 2020-10-13 | Newton Howard | Transcutaneous electrically amplified cognitive enhancement system |
-
2017
- 2017-05-19 KR KR1020170062591A patent/KR102369905B1/ko active IP Right Grant
- 2017-06-26 US US15/633,341 patent/US10561374B2/en active Active
- 2017-10-25 CN CN202211386998.4A patent/CN115738237A/zh active Pending
- 2017-10-25 CN CN202211386813.XA patent/CN115999144A/zh active Pending
- 2017-10-25 CN CN202211386937.8A patent/CN115738236A/zh active Pending
- 2017-10-25 WO PCT/KR2017/011866 patent/WO2018080174A1/ko active Application Filing
- 2017-10-25 CN CN202211386855.3A patent/CN115738235A/zh active Pending
-
2020
- 2020-01-07 US US16/736,678 patent/US11191491B2/en active Active
-
2021
- 2021-08-05 US US17/394,816 patent/US11612358B2/en active Active
-
2022
- 2022-10-11 KR KR1020220129399A patent/KR20220142982A/ko active IP Right Grant
Also Published As
Publication number | Publication date |
---|---|
CN115738235A (zh) | 2023-03-07 |
US11191491B2 (en) | 2021-12-07 |
US11612358B2 (en) | 2023-03-28 |
WO2018080174A1 (ko) | 2018-05-03 |
CN115738236A (zh) | 2023-03-07 |
KR102369905B9 (ko) | 2022-07-18 |
US20180116601A1 (en) | 2018-05-03 |
KR20220142982A (ko) | 2022-10-24 |
US20200229769A1 (en) | 2020-07-23 |
US10561374B2 (en) | 2020-02-18 |
KR20180048255A (ko) | 2018-05-10 |
KR102369905B1 (ko) | 2022-03-03 |
US20210369210A1 (en) | 2021-12-02 |
CN115738237A (zh) | 2023-03-07 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN110199243B (zh) | 用于提供热体验的反馈装置、内容再现装置、系统和方法 | |
US11612358B2 (en) | Feedback device and method for providing thermal feedback using the same | |
US11747056B2 (en) | Feedback device and thermal feedback providing method using same | |
EP2511793B1 (en) | Temperature feedback motion controller | |
JP6776393B2 (ja) | 視聴プログラム、視聴方法、および情報端末装置 | |
EP3988190A1 (en) | Game program, game method, and terminal device | |
JP2020156739A (ja) | ゲームプログラム、ゲーム方法、および情報端末装置 | |
CN111035926B (zh) | 虚拟对象控制方法、装置及存储介质 | |
JP6776409B1 (ja) | プログラム、方法、および端末装置 | |
JP6813618B2 (ja) | 視聴プログラム、視聴方法、視聴端末、配信プログラム、配信方法、および情報端末装置 | |
JP2022000218A (ja) | プログラム、方法、情報処理装置、およびシステム | |
US20230358447A1 (en) | Feedback device and thermal feedback providing method using same | |
JP7341976B2 (ja) | 配信プログラム、および配信方法 | |
JP2020163042A (ja) | 配信プログラム、配信方法、および情報端末装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |