CN102395410B - 用于适应性调节用户环境的方法和系统 - Google Patents

用于适应性调节用户环境的方法和系统 Download PDF

Info

Publication number
CN102395410B
CN102395410B CN201080016755.0A CN201080016755A CN102395410B CN 102395410 B CN102395410 B CN 102395410B CN 201080016755 A CN201080016755 A CN 201080016755A CN 102395410 B CN102395410 B CN 102395410B
Authority
CN
China
Prior art keywords
data
user
mood
terminal
equipment
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN201080016755.0A
Other languages
English (en)
Other versions
CN102395410A (zh
Inventor
P.S.牛顿
H.F.P.M.范多维伦
D.布罗肯
J.M.A.范登厄伦比姆德
F.M.H.克龙普沃茨
P.M.C.莱门斯
J.J.G.德夫里斯
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Koninklijke Philips NV
Original Assignee
Koninklijke Philips Electronics NV
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Koninklijke Philips Electronics NV filed Critical Koninklijke Philips Electronics NV
Publication of CN102395410A publication Critical patent/CN102395410A/zh
Application granted granted Critical
Publication of CN102395410B publication Critical patent/CN102395410B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/422Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42201Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS] biosensors, e.g. heat sensor for presence detection, EEG sensors or any limb activity sensors worn by the user
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/20Input arrangements for video game devices
    • A63F13/21Input arrangements for video game devices characterised by their sensors, purposes or types
    • A63F13/212Input arrangements for video game devices characterised by their sensors, purposes or types using sensors worn by the player, e.g. for measuring heart beat or leg activity
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/20Input arrangements for video game devices
    • A63F13/22Setup operations, e.g. calibration, key configuration or button assignment
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/25Output arrangements for video game devices
    • A63F13/28Output arrangements for video game devices responding to control signals received from the game device for affecting ambient conditions, e.g. for vibrating players' seats, activating scent dispensers or affecting temperature or light
    • A63F13/285Generating tactile feedback signals via the game input device, e.g. force feedback
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/30Interconnection arrangements between game servers and game devices; Interconnection arrangements between game devices; Interconnection arrangements between game servers
    • A63F13/33Interconnection arrangements between game servers and game devices; Interconnection arrangements between game devices; Interconnection arrangements between game servers using wide area network [WAN] connections
    • A63F13/338Interconnection arrangements between game servers and game devices; Interconnection arrangements between game devices; Interconnection arrangements between game servers using wide area network [WAN] connections using television networks
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/30Interconnection arrangements between game servers and game devices; Interconnection arrangements between game devices; Interconnection arrangements between game servers
    • A63F13/35Details of game servers
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/50Controlling the output signals based on the game progress
    • A63F13/52Controlling the output signals based on the game progress involving aspects of the displayed game scene
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/50Controlling the output signals based on the game progress
    • A63F13/54Controlling the output signals based on the game progress involving acoustic signals, e.g. for simulating revolutions per minute [RPM] dependent engine sounds in a driving game or reverberation against a virtual wall
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/60Generating or modifying game content before or while executing the game program, e.g. authoring tools specially adapted for game development or game-integrated level editor
    • A63F13/65Generating or modifying game content before or while executing the game program, e.g. authoring tools specially adapted for game development or game-integrated level editor automatically by game devices or servers from real world data, e.g. measurement in live racing competition
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/4104Peripherals receiving signals from specially adapted client devices
    • H04N21/4131Peripherals receiving signals from specially adapted client devices home appliance, e.g. lighting, air conditioning system, metering devices
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/422Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42202Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS] environmental sensors, e.g. for detecting temperature, luminosity, pressure, earthquakes
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/436Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
    • H04N21/43615Interfacing a Home Network, e.g. for connecting the client to a plurality of peripherals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/65Transmission of management data between client and server
    • H04N21/654Transmission by server directed to the client
    • H04N21/6543Transmission by server directed to the client for forcing some client operations, e.g. recording
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/835Generation of protective data, e.g. certificates
    • H04N21/8352Generation of protective data, e.g. certificates involving content or source identification data, e.g. Unique Material Identifier [UMID]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/16Analogue secrecy systems; Analogue subscription systems
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/20Input arrangements for video game devices
    • A63F13/21Input arrangements for video game devices characterised by their sensors, purposes or types
    • A63F13/213Input arrangements for video game devices characterised by their sensors, purposes or types comprising photodetecting means, e.g. cameras, photodiodes or infrared cells
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/10Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by input arrangements for converting player-generated signals into game device control signals
    • A63F2300/1012Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by input arrangements for converting player-generated signals into game device control signals involving biosensors worn by the player, e.g. for measuring heart beat, limb activity
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/10Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by input arrangements for converting player-generated signals into game device control signals
    • A63F2300/1018Calibration; Key and button assignment
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/10Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by input arrangements for converting player-generated signals into game device control signals
    • A63F2300/1037Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by input arrangements for converting player-generated signals into game device control signals being specially adapted for converting control signals received from the game device into a haptic signal, e.g. using force feedback
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/10Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by input arrangements for converting player-generated signals into game device control signals
    • A63F2300/1087Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by input arrangements for converting player-generated signals into game device control signals comprising photodetecting means, e.g. a camera
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/30Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by output arrangements for receiving control signals generated by the game device
    • A63F2300/302Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by output arrangements for receiving control signals generated by the game device specially adapted for receiving control signals not targeted to a display device or game input means, e.g. vibrating driver's seat, scent dispenser
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/40Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterised by details of platform network
    • A63F2300/409Data transfer via television network
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/50Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by details of game servers
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/50Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by details of game servers
    • A63F2300/53Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by details of game servers details of basic data processing
    • A63F2300/535Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by details of game servers details of basic data processing for monitoring, e.g. of user parameters, terminal parameters, application parameters, network parameters
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/60Methods for processing data by generating or executing the game program
    • A63F2300/6063Methods for processing data by generating or executing the game program for sound processing
    • A63F2300/6081Methods for processing data by generating or executing the game program for sound processing generating an output signal, e.g. under timing constraints, for spatialization
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/60Methods for processing data by generating or executing the game program
    • A63F2300/66Methods for processing data by generating or executing the game program for rendering three dimensional images
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/60Methods for processing data by generating or executing the game program
    • A63F2300/69Involving elements of the real world in the game world, e.g. measurement in live races, real video
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/80Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game specially adapted for executing a specific type of game
    • A63F2300/8082Virtual reality

Abstract

一种适应性调节终端(2)的环境的方法,其包括:-在终端(2)处接收来自外部源的数据(27);-接收来自用于监控环境中至少一个用户的系统的监测数据;以及-控制用于提供在环境中可感知输出的至少一个输出设备,输出根据监测数据来自调整。包括关于至少一个精神状态的数据的至少一个段从来自外部源的数据(27)获取,并且至少部分地基于关于至少一个精神状态的数据来实现根据监测数据的调整。

Description

用于适应性调节用户环境的方法和系统
技术领域
本发明涉及一种适应性调节(adapt)终端环境的方法,其包括:
-接收来自用于监测环境中至少一个用户的系统的监测数据。
本发明还涉及一种适应性调节终端环境的系统,其包括:
-接口,用于接收来自监测环境中至少一个用户的系统的监测数据。
本发明还涉及一种影响终端环境的方法,其包括:
-终端被布置成接收来自用于监测环境中至少一个用户的系统的监测数据。
本发明还涉及一种用于影响终端环境的系统,其被配置成提供传送到终端的数据,
-终端被布置成接收来自用于监测环境中至少一个用户的系统的监测数据。
本发明还涉及信号和计算机程序。
背景技术
US2005-0223237A1公开了一种用于处理多媒体数据的情感控制系统。它包括用于向用户呈现(presenting)多媒体内容的多媒体系统,用于在呈现多媒体内容时确定用户的情感状态的情感模型装置以及用于根据用户的情感状态改变多媒体内容以便于由多媒体系统呈现改变后的多媒体内容的编辑单元。多媒体系统可以不仅包括显示器和扬声器,而且包括诸如灯之类的其它环境设备。根据用户的情感状态,家庭娱乐系统可以接收和处理情感信息,并且使环境适应激励源。例如,假如用户正在看可怕的电影并且与恐惧有关的身体变化(例如高心率或者高血压)被提交给情感模型装置,于是然后恐惧的情感状态被提交给编辑装置,然后,多媒体系统可以借助于调暗光或者增加声音来适应性调节环境,以便强调用户感觉到的情感(emotion)。
已知系统的问题在于,用户可能不会被电影本身特别地惊吓,所以环境未被调节以强调这种情感。
发明内容
本发明的目的是提供以上提及类型的方法、系统、信号和计算机程序,其允许例如娱乐素材等的内容提供者向用户提供具有相对较少不一致的沉浸式体验。
该目的是通过根据本发明的方法来实现的,该方法包括:
-在终端处接收来自外部源的数据;
-接收来自用于监测环境中至少一个用户的系统的监测数据;以及
-控制用于提供环境中可感知的输出的至少一个输出设备,输出根据监测数据来调整,
其中,包括关于至少一个精神状态的数据的至少一个段从来自外部源的数据被获取,并且至少部分地基于关于至少一个精神状态的数据来实现根据监测数据的调整。
因为接收来自用于监测环境中至少一个用户的系统的监测数据,并且用于提供环境中可感知的输出的至少一个输出设备被控制成使得输出根据监测数据来调整,所以闭环控制的形式可以在终端处完成。因为调整是至少部分地基于关于至少一个精神状态的数据来根据监测数据实现的,所以闭环控制被实现以便于达到目标精神状态。因为终端接收数据且从数据中获取包括关于至少一个精神状态的数据的至少一个段,所以从外部提供目标精神状态。特别地,其可以通过内容数据的作者来提供。因而,终端适应性调节输出以实现作者已经指示它去实现的目标精神状态。远程作者因而能够提供合适的沉浸式体验。
在实施例中,来自外部源的数据包括数据流。
该实施例具有如下效果:目标精神状态可以随时间改变,因为在终端处接收和解析数据流。
在实施例中,关于至少一个精神状态的数据包括携带可以从其至少部分地推导出监测数据和输出之间相关性的信息的数据。
该特征的效果在于,给终端提供关于控制算法的信息,以实现基于监测数据获取目标精神状态。因而,不必给终端提供用户的复杂模型。更特别地,不必给终端提供用于实现宽范围情感状态中每一个的模型和算法。替代地,其可以由外部源来提供所需数据以实现由沉浸式效果的远程作者所预期的目标情感状态。这允许使用具有至少较小存储器的终端。而且,其意味着:作者不必考虑可能以其他方式存在于不同类型终端中的不同模型。同样,外部作者可以将最近的领悟并入在他提供的数据中如何去影响情绪以及在情绪和生理的或者行为的现象之间存在什么关系。因而,对于依赖这种模型和在终端中已经使用的编程关系的独立更新,存在较少的需求。
在实施例中,关于至少一个精神状态的数据包括代表可以从监测数据获得的至少一个信号的值的允许范围的边界值的数据,以及执行对输出的调整,以便使可从监测数据获得的信号的值保持在值的允许范围内。
在以下的意义上:终端可以从不完成用户的模型或者精神状态和生理或者行为症状之间关系(该关系导致过多表征这种症状的参数值)的模型,该特征允许校准终端。
在实施例中,包括关于至少一个精神状态的数据的段与在终端处以可视和可听的方式中至少一个进行再现的内容数据同步接收到,并且对环境中可感知输出的调整与终端处的内容数据的再现同步。
该实施例允许用于以可视和可听方式中至少一个再现内容数据的作者提供附随的数据流,用于使观看或者听环境适于实现适合于内容的观看者或者听者的精神状态。更特别地,该精神状态可以随着听觉和视觉进度而改变,例如,由电影故事情节所产生的感觉从悬疑状态改变为轻松状态。
一个实施例包括:接收来自外部源的数据的至少一个段,其包括代表待调整的可感知输出方面的数据,并且基于关于至少一个精神状态的数据来根据监测数据修改代表待调整的可感知输出方面的数据。
该实施例允许作者指定如何达到特定精神状态。例如,作者可以指定:惊恐状态将通过调整由风扇生成的气流或者通过调整由力反馈设备所生成的触觉效果来实现。特别地,在数据流提供给附随的待再现视听内容的情况下,这可能是有用的,因为惊恐状态可能优选地通过在视频描绘有风的场景时使用前者形态或者在视频描绘行进的军队或者类似物时使用后面的形态来实现。
在该实施例的变形中,代表待调整的可感知输出的方面的数据进一步地基于代表终端和可由终端控制的输出设备中至少一个的能力的数据来修改。
该变形确保了:数据流可以通过比较宽范围的终端和由这些终端控制的输出设备来处置。代表终端和可由终端控制的输出设备中至少一个的能力的数据可以包括用于代替含在代表待调整的可感知输出的方面的数据中的指令的规则,或者其可以导致某些指令被忽略。
方法的一个实施例包括:接收来自外部源的数据,其包括含代表待调整的可感知输出方面的数据的段和包括关于(pertainingto)至少一个精神状态的数据的段(segment),并且使各个段彼此分离。
该实施例进一步加宽了终端和包含在可以处置数据流的这些终端中的解码器的范围,因为不接收监测数据的那些终端仍然可以控制输出设备。在该情形中,他们将仅仅使用代表待调整的可感知输出的方面的数据。而且,数据的分离允许数据段以比如下情况更简单的格式来提供:假如单个数据容器将指出待实现的情感状态以及如何实现-和待使用的输出形态。这样的容器需要伴随复杂的情况语句(case-statement)发生,所述情况语句对于简单的解码器比较难解析。
在变形中,来自外部源的数据包括数据流,并且,分离通过解复用数据流来实现,以分别地获取包括代表待调整的可感知输出方面的数据的可识别数据分组和包括关于至少一个精神状态的数据的数据分组。
该变形有如下效果:段的同步比较容易实现。而且,特别是在数据流通过网络传送(例如,广播或者多播)的情况下,在终端处获取段更容易。
在适应性调节终端环境的另一个方法中,该方法包括:
-在终端处接收来自外部源的数据;
-接收来自用于监测环境中至少一个用户的系统的监测数据;以及
-控制用于提供环境中可感知输出的至少一个输出设备,输出根据监测数据来调整,其中,包括关于至少一个精神状态的数据的至少一个段从来自外部源的数据获取,以及至少部分地基于关于至少一个精神状态的数据来根据监测数据实现调整,使用闭环控制系统。控制系统的反馈环包括:用于基于监测数据来对至少一个用户的精神状态进行分类的模型。精神状态被分类为N维空间中的一组值,其中,N≥1。
这具有如下效果:提供合适的控制变量。可以通过从目标值减去模型输出来得到误差信号。
在该实施例的变形中,所调整的输出包括:音频、视频、图像、触觉反馈、嗅觉和味觉数据中至少一种的再现,所述调整包括:从可利用数据的集合选择被再现为可感知输出的数据。
在该变形中,可以通过选择所有可感知输出来全面地影响用户的情绪。而且,可以预先提供该可利用数据的集合。
在选择待再现数据的情况下,控制系统可以包括离散控制器。
因而,提供保持短暂选择的离散输出,以便给用户提供时间接收所改变的输出。特别地在认知数据的情形下,监测数据将不对所改变输出示出非常快的响应。
可替代地,在通过改变调节输出如何以可感知形式再现的输出设备的设置、根据监测数据来调整输出的情况下,控制系统可以包括连续控制器。
因而,例如,声音复现的量可以被连续地控制。因而其将不较长时间保持太大声,但是一旦在例如已经得出用户已经变得太焦躁的结论时调低音量。
根据另一方面,根据本发明的适应性调节终端环境的系统包括:
-用于在终端处接收来自外部源的数据的接口;
-用于接收来自监测环境中至少一个用户的系统的监测数据的接口;以及
-用于控制提供环境中可感知输出的至少一个输出设备的设备;
-其中,系统被配置成使输出根据监测数据来调整,以及系统被配置成从来自外部源的数据中获取包括关于至少一个精神状态的数据的至少一个段,并且基于关于至少一个精神状态的数据来实现根据监测数据的调整。
在实施例中,系统被配置成执行根据本发明的方法。
根据另一方面,根据本发明的影响终端环境的方法包括:
-向终端提供数据;
-终端被配置成接收来自用于监测环境中至少一个用户的系统的监测数据,
其中,终端被布置成控制用于提供环境中可感知输出的至少一个输出设备,输出根据监测数据来调整,该方法进一步包括:向终端提供包括含关于精神状态的数据的至少一个段的数据,所述终端被布置成至少部分地基于关于精神状态的数据来实现根据监测数据的调整。
方法适于在内容创作系统中完成,例如,用于提供广播或者多播的数据。可替代地,这种数据流可以设置在数据载体上(例如,DVD或者CD),特别地,与视听数据相结合。
在该方法的一个实施例中,关于至少一个精神状态的数据包括:携带从其至少部分地可推导出监测数据和输出之间相关性的信息的数据。
因而,终端需要首先被配置去解码数据,但是其不必之前已经利用每个可想象的精神状态和在这些状态中用户对应的生理和行为表现之间的每一个可能的相关性来编程(programmed)。
在影响终端环境的方法的实施例中,关于至少一个精神状态的数据包括代表可以从监测数据获得的至少一个信号的值的允许范围的边界值的数据。
该数据允许实体执行该方法,以最大化或者最小化某些所监测的生理或者行为变量。提供有数据流的终端因此可以被校准,以确保导致用户精神状态改变的其输出的任何调整保持在可接受的边界内。
在影响终端环境的方法的一个实施例中,包括关于至少一个精神状态的数据的段与终端处以可视和可听方式中至少一个再现的内容数据同步提供。
因而,执行方法的实体可以在再现视听内容数据的位置处提供沉浸式体验。
在影响终端环境的方法的一个实施例中,提供了包括代表待调整的可感知输出的方面的数据的至少一个数据段。
因而,执行方法的实体(entity)还可以影响用来改变终端环境中人情感状态的形态。
在一个变形中,包括代表待调整的可感知输出方面的数据的段和包括关于至少一个情感状态的数据的段以可识别地单独方式来提供。
这允许终端仅仅获取两类段中的一类。特别地,如果传统终端没有能力处理代表终端环境中至少一个用户的生理或者行为表现的监测数据,那么仅仅代表待调整的可感知输出的数据可以被获取和解析。
根据另一方面,根据本发明用于影响终端环境的系统被配置成提供传送到终端的数据。
终端被布置成接收来自用于监测环境中至少一个用户的系统的监测数据,
其中,终端进一步地被布置成控制用于提供环境中可感知输出的至少一个输出设备,输出根据监测数据来调整,以及其中,系统被配置成提供包括含如下数据的至少一个段的数据:基于该数据,终端能够根据监测数据来调整输出。
根据另一方面,根据本发明的信号携带包括含关于精神状态的数据的至少一个段的数据流,所述数据包括如下信息:基于该信息,被布置成控制用于提供终端环境中可感知输出的至少一个输出设备的终端能够根据由用于监测终端环境中至少一个用户的系统所提供的监测数据来调整输出。
根据另一方面,根据本发明的计算机程序包括:当并入可机读介质时能够使具有信息处理能力的系统执行根据本发明的方法的一组指令。
附图说明
现在将参考附图来进一步详细地解释本发明,其中:
图1的示图提供了分布用于适应性调节接收者解码器的环境的数据的系统的概观图;
图2是用于解码图1中适应性调节接收者解码器的环境的数据的解码器模型的框图;
图3是携带用于适应性调节图1中接收者解码器的环境的数据的基于分组的数据流的示意性图示;以及
图4是在功能方面描述用于适应性调节终端环境的系统的另一个实施例的框图。
具体实施方式
图1以示意性的方式图示了用于分布数据的结构。以下,将获取的数据包括音频、视频和图像数据中的至少一个。内容数据结合时变的情感数据来提供。在某些实施例中,情感数据与内容数据同步,以使得在合适的时间访问内容数据的人中可以造成不同的精神状态。
为了提供情感数据,提供创作系统1。创作系统1是用于影响终端2的环境的系统实例,在所述终端2处数据内容以可感知方式来再现。终端2可以实现为:机顶盒、个人计算机、手持式计算机、蜂窝式电话手机、数字电视、等等。在一个实施例中,创作系统1的输出在数据载体3(例如,光盘)上直接提供给终端2。在另一个实施例中,其在数据载体4上或者经由网络连接提供给服务器5(所述服务器5可以包括在广播网头端),用于跨网络6分配给终端2和其他相似的终端。网络6可以包括蜂窝网络、长距离光网络、卫星或者有线电视网络,等等。分布可以是以广播、多播或者直接传输(例如,按需下载到终端2)的形式。在所图示的实施例中,内容数据以数字电视的格式(例如,DVB或者ATSC)来分布。
如果经由网络6来分布,终端2经由网络接口7、调谐器8、解调器9和解复用器10接收具有情感数据的内容数据。所图示的终端2还包括用于读取数据载体3的内容的读取单元11。
在已知的方式中,终端2包括视频编解码器12、以及用于将内容数据选定流的视频成分再现在显示器14上的显示驱动器13。音频编解码器15和音频输出级16向扬声器17,18提供信号。
终端2在用于执行软件(包括:用于解析情感数据和完成解码器的指令)的处理器19和主存储器20的控制下工作,其模型在图2中示出。此外,终端2包括在周围系统中,所述周围系统进一步地包括:周围输出设备21,22以及因此的驱动器23。周围输出设备21,22代表一宽范围类的输出设备,用于再现不同于音频、视频和图像数据的可感知输出。实例包括:用于周围照明的照明设备(特别是被布置成提供可调整颜色、亮度和方向的指向光的那些设备),用于影响周围气候(例如,温度、湿度)的设备,以及用于提供触觉反馈的设备(例如,清理滚筒)。周围输出设备21,22可以穿戴在用户个人的身上,例如,包括在腕带、手套或者头戴式耳机中。
终端2还包括监测设备25,26的接口24,其被布置成使终端2能够获得代表由终端2的各自用户所展现的生理和行为表现中至少一个的监测数据。可替代地或者附加地,监测数据可以共同地表征用户。监测数据包括表征生理和行为现象中至少一个的数据。前者的实例包括:血压、皮肤温度、皮肤传导率、心率、呼吸率以及这些变量的改变。后者的实例通常是用户或者多个用户运动的特征,其例如由利用数字照相机拍摄的解释图像来获得。例如,可以评估面部表情、运动频率、凝视方向和相似的特征。
监测数据允许终端2实现在终端2的环境中的用户或者多个用户的精神状态的闭环形式控制。因而,影响用户的精神状态,以根据创作系统1上远程生成的情感数据来实现目标精神状态。
图2图示了根据国际标准ISO/IEC13818-1(MPEG-2系统)数据流27,作为用于携带情感数据的数据流实例。数据流27包括传输流分组28a-d,每个传输流分组包括头29a-d以及固定数据长度的有效载荷30a-d。传输流分组28a-d携带程序基本流(PES)分组31a-c,每个PES分组还包括分组头32a-c和有效载荷33。
在情感数据与音频、视频或者视听内容数据同步提供的情形中,情感数据是程序的一部分。程序包括多个基本流。每个基本流包括PES分组31a-c,所述PES分组借助于PES分组头32a中的流标识符34是分别地可识别的。除了包括用于相对于数据流27中携带的时钟参考确定显示时间和解码中至少一个的时间戳的字段35之外,PES分组头(packetheader)32a包括在此处未描述的其他字段。因而,可以实现由数据流27携带的程序成分的同步再现。
因为任何TS分组28携带一个且仅有一个基本流的数据,TS分组头29中的单独分组标识符(PID)也标识组成程序的各基本流。用于同步基本流的时间戳实际上可以包括在任何情况下携带时钟参考的TS分组头(packetheader)29a-d中。
正如在国际标准ISO/IEC13818-1中更加充分地描述的,由TS分组28a-d构成的任何数据流27包括具有固定标识符的分组,其携带代表程序相关表(PAT)(未示出)的数据。该表识别数据流27中的可利用程序,并且指向携带程序映射表(PMT)的分组。对于每个程序,存在一个这样的PMT。PMT识别携带不同基本流的分组以及它们的类型。根据实施例,PMT包括TS分组28a-d的PID或者PES分组31a-c的基本流标识符。
在此处所使用的实例中,情感数据携带在至少一个单独的基本流中,每个基本流具有其各自相应的标识符值,这在其所属的程序的PMT中示出。在情感数据与音频和视频数据同步提供的情况中,PMT将识别携带音频数据的流或者多个流、携带视频数据的流或者多个流以及携带情感数据的流或者多个流。携带情感数据的流或者多个流的类型将是“私有的”,以使得传统(legacy)终端可以忽略这些流。因而,尽管在图1的终端2中,解复用器10被设定成获取情感数据,但是传统终端将忽略它们,并且仅仅获取那些携带音频和视频数据的情感数据。
图3示出了供解码数据流27中携带的情感数据和调整至少周围输出设备21,22的输出使用的终端2的第一实施例的解码器。解码器根据功能性成分被示出,其可以以任何不同的方法结合硬件成分和软件成分来实现。
解码器的输入包括图2中的数据流27。分过滤器36仅仅取出包括具有某PID值的分组头29a-d的那些TS分组28a-d。这些分组是携带情感数据的TS分组28a-d。分组过滤器36知道从PMT中查找哪些PID值,所述PMT之前已经解析,并且其列出了PID值和如上所述形成程序的基本流的相关描述。分组过滤器36典型地包括在解复用器10中(图1)。
在适合于图2的解码器模型的方法实施例中,存在包括在情感数据中的两种类型的数据对象,即,感觉场景描述对象(sensoryscenedescriptionobject)和情感构成对象(emotioncompositionobject)。以下,术语“对象”和“段”将可相互替换地使用,段是用来指嵌入在数据流中的对象的术语。
情感构成对象包括关于至少一个精神状态的数据。该信息通知终端在终端2的环境中的人待实现的目标精神状态。
感觉场景描述对象包括代表周围输出设备21,22的可感知输出方面的数据,以及,可选地,包括在终端和显示器14以及扬声器17,18中的显示系统和声系统,其被调整以便于影响用户精神状态。也就是说,感觉场景描述对象将指定特定精神状态是否将通过控制触觉反馈设备的输出、照明单元的色温、声系统的声级别、等等来实现。待实现的实际精神状态以及为实现精神状态对所选择输出设备的调整在情感构成对象中指定。
在所示出的实施例中,情感构成对象和感觉场景描述对象可识别为单个基本流内部的单独对象。在可替代的实施例中,情感构成对象和感觉场景描述对象包括在单独的段中,每个段被携带在由不同的各自PID值可识别的不同的相应基本流中。因而,仅仅使用感觉场景描述对象来调整周围输出设备21,22的输出,传统解码器可能忽略情感构成对象。在该情形下,感觉场景描述对象还将包括:由他们指定的各种类型输出的级别,例如,风扇或者触觉反馈设备的输出强度,由周围照明设备提供的光色彩和亮度,等等。然而,这种传统解码器将不考虑当调整周围系统输出时从监测设备25,26所获得的监测数据。
返回到解码器模型,由分组过滤器36获取的TS分组28a-d被放置在传输缓冲区37中。在那里,去除分组头29a-d,32a-c。解码时间戳和显现时间戳被去除并且与情感流段(感觉场景描述段和情感构成段)相关联。所述段然后被放置在编码数据缓冲区38中。
情感流处理器39解码并解析情感流中的不同段。情感构成段被放置在情感命令缓冲区40中,以及感觉场景描述段被放置在解码的感觉场景描述对象缓冲区41中。
正如所提到的,感觉场景描述段携带描述如何改变终端2周围环境的数据,例如,是否改变照明条件、气流、声音、气味、温度,或者是否提供触觉、听觉或者视觉反馈。该数据通常编码在置标语言中。合适的数据格式的实例包括:MPEG-V、MPEG-RoSE或者Ambi-X。
情感构成段包括三类数据中的任何一类,即描述目标精神状态的数据、情感窗限定数据以及交互式情感构成数据。数据通常将在置标语言中。可以以W3C情感置标语言或者MPEG-V格式包括数据,其被扩展以提供三种类型的情感构成段的功能。
情感窗限定数据(emotionwindowdefinitiondata)描述了用户情感状态的边界。其被用作校准步骤,以使得用户不面临非理想的极限感觉体验。因而,该数据包括:代表从通过接口24所接收的监测数据中可获得的至少一个信号值的允许范围的至少一个边界值的数据。终端2调整周围输出设备21,22的输出,以便保持从监测数据中可以获得的信号值在值的允许范围内。在一个实施例中,从监测数据中可以获得、保持在允许范围内的信号是与表征生理或者行为现象(血压、心率、例如烦躁的活动测量,等等)的变量值相对应的信号。在另一个实施例中,信号是通过对这个信号应用用户模型所获得的信号,以便获得与用户精神状态的维度(唤醒程度、情绪化程度、警戒程度,等等)相对应的一个或多个变量值。
交互式情感构成段(interactiveemotioncomposition)限定了如何对用户或者用户总体的所测量情感状态的改变作出反应。例如,可以限定:如果用户感到紧张,周围照明应改变颜色。实际上,可以限定以下功能:使颜色的改变与表征用户紧张的变量的改变相联系。因而,终端2可以得到监测数据的至少一个子集与由周围输出设备21,22所提供的输出之间的相关性。
返回到图3的解码器模型,来自监测设备25,26的信号由监测信号处理器42来处理,以获得用于感觉场景构成控制器43的信号。感觉场景构成控制器(sensoryscenecompositioncontroller)使用感觉场景构成段中关于如何响应从监测信号处理器42实时供给的信号的指令。基于监测数据和情感构成段中的指令,感觉场景构成控制器43改变含在解码的感觉场景描述对象缓冲区41中的解码的感觉场景描述对象。在该阶段,其还确保了:观察到情感窗限定数据中的指令。
已经以此方式进行调整的解码的感觉场景描述对象移动到传感器场景描述缓冲区45。在过程中,应用感觉设备能力掩码(sensorydevicecapabilitiesmask)44。该掩码44包括代表至少终端2或者可以由终端2控制的输出设备12-18,21,22的能力的数据,或者代表两者能力的数据。该掩码44的应用发生在解码过程的最后阶段。因而,感觉场景描述缓冲区45中的感觉场景描述(其含有驱动输出设备12-18,21,22所要求的命令)总是与可利用的感觉再现平台的能力相匹配。
图4示出了用于适应性调节终端2的环境的系统的可替代模型,其也旨在用于终端2中的实现。在该实施例中,终端2接收关于包括至少目标精神状态的至少一个精神状态的数据,以及可选地,例如也以如下形式实现目标精神状态的方式:描述哪些输出要调整的感觉场景描述对象和以描述精神状态如何依赖于监测数据的函数形式提供用户模型的情感场景构成对象。
系统包括控制器46,其将在以下进一步地详细描述。系统还包括致动系统47,其用于提供在终端2的环境中可感知的输出。致动系统47嵌入在周围输出设备21,22中,处理器19、视频编解码器12、显示驱动器13和显示器14中,以及处理器19,音频编解码器15、音频输出级16和扬声器17,18中或者在这些设备的子集中,这取决于实施例。它们提供人体48对其起反应的刺激。特别地,它们提供五个感觉(看、闻、听、摸和尝)中任何一种或者多种的刺激。
测量系统49向代表人体48模型的分类器/译码器50提供监测数据。分类器/译码器50提供代表精神状态的数据作为输出。该数据是N-维空间中一组值的形式,其中,N≥1。因而,它可以从相同格式的目标精神状态中减去。差值信号是控制器46的输入。维数N可以是从1到15的范围,特别是从1到3。通常,将存在二维,即,人情感状态的一个广泛使用模型的诱力(valence)和激励(arousal)维。当使用更多错综复杂的情感模型时,例如,基于评估的情感描述,更高的值是有用的。
在一个实施例中,终端2用来在显示器14上显示图像。在该情形下可感知的输出通过选择用于显示(图)的源数据来调整。在该实施例中,控制器46是离散控制器。在相似的实施例中,终端2选择场景,从而在特定程序的几个可替代变形之间进行切换。例如,可能存在携带视频数据的几个基本流,其中,每个基本流包括:一个故事但不同细节和/或视频设置的不同变形。在变形中,故事真正地分叉并且加入单个的故事主线,在该情形中,还提供具有不同对话的多个音频流。可替代地,可以存在一个视频流但不同的音频流,例如,每个具有不同风格的背景音乐,其中控制器46的作用是根据误差信号选择合适的流。
在另一个实施例中,覆盖物设置在显示器14上,覆盖物仅仅覆盖可用来显示其他内容的部分区域。特别地,情感可以被选择用于显示。在该实施例中,控制器46通常将以继电器式(bang-bang)控制器的形式来实现。bang-bang控制器是在状态间切换的控制器,并且具有滞后作用。
在另一个实施例中,控制器46是连续的控制器,例如,PID、ID、P、D、或者I控制器,其管控用来再现预选内容或者通常调整终端2的周围环境的输出设备的设置。假定给终端2提供具有嵌入式精神状态目标的数据流27,终端2将通过选择性地打开和关断或者调高和调低设置(例如,周围照明设备的音量、音宽、色饱和、色输出,等等)来逐步地调整视听内容数据消费体验的沉浸感。
因而,根据使用远端创作系统1所生成且在网络6上的数据流中或者在数据载体3上传送到终端2的指令,按照图4中示出线路的系统还能够影响终端2用户的精神状态。
应注意的是,上述实施例图示而不是限制本发明,并且那些本领域技术人员将能够设计出许多种可替代实施例,而不脱离所附权利要求的范围。在权利要求中,放置在括号之间的任何附图标记将不解释为限制权利要求。词语“包括”不排除存在除权利要求中所列元件或者步骤之外的元件或者步骤。元件之前的词“一”不排除存在多个这样的元件。在互不相同的从属权利要求中记载某些措施的仅有事实不表明这些措施的结合不能使用以获益。
要理解的是,情感场景构成段和感觉场景描述段可以作为对象存储在数据载体3上。该数据的格式与目前在数据存储系统(DVD、Blu-Ray)和MPEG相关系统中使用以提供子标题或者图形的数据格式相符。实际上,在另一个实施例中,情感数据可以实现为图形流或者子标题流,并且通过对传统终端2应用固件更新来解码。可替代地,感觉场景描述对象可以描述为图像数据,以及情感构成对象可以是提供图像数据注解的构成对象的形式。颜色查找表可以被应用,以将颜色转换为用于控制周围输出设备21,22的命令。

Claims (10)

1.一种适应性影响终端的用户的情绪状态的方法,该终端可控地耦接到至少用于呈现用户可感知内容的第一设备和至少用于修改用户可感知的环境的周围条件的第二设备,该方法包括:
-从外部提供者接收内容数据和持续可更新的情绪数据,所述内容数据包括将呈现给用户的信息,所述情绪数据包括与待从用户引出的不同预定情绪有关的、与所述内容数据的各个部分相对应的信息;
-接收指示用户的情绪状态的监测数据;以及
-控制所述第一设备和所述第二设备中的至少一个的输出来从所述用户引出所述预定的情绪,所述输出根据指示所述用户的情绪状态的监测数据进行调整。
2.根据权利要求1的方法,其中:
所述情绪数据包括包含可以从其至少部分地推导出监测数据和输出之间相关性的信息的数据。
3.根据权利要求1的方法,其中:
所述情绪数据包括代表可以从监测数据获得的至少一个信号的值的允许范围的边界值的数据,以及其中,执行对输出的调整,使得可以从监测数据中获得的信号的值保持在值的允许范围内。
4.根据权利要求1的方法,
其中,所述情绪数据与所述内容数据同步接收到,其中,对输出的调整与内容的呈现同步。
5.根据权利要求1的方法,包括:
-接收代表待调整的输出方面的数据的至少一个段,以及
-根据监测数据修改来自所述至少至少一个段的数据以实现所述调整。
6.根据权利要求5的方法,
其中,代表待调整的输出方面的数据进一步地基于代表终端、所述第一设备和所述第二设备中至少一个的能力的数据来修改。
7.根据权利要求5的方法,
包括:接收代表待调整的输出方面的数据的段和情绪数据的段,并且将各个段彼此分离。
8.根据权利要求1的方法,
其中,所述情绪数据包括各个可单独识别的数据流的分组,所述数据流包括:
-与用户的情绪状态相关的情绪构成段;以及
-感觉场景描述段,其描述待由第一设备和第二设备中至少一个产生的预定输出以从用户引出预定情绪;
其中来自所述情绪合成段和监测数据的信息被共同地用于调整所述预定输出。
9.一种用于适应性影响用户的情绪状态的终端,包括:
-至少一个接口,其用于:
-从外部提供者接收内容数据和持续可更新的情绪数据,所述内容数据包括将呈现给用户的信息,所述情绪数据包括与将从用户得引出的不同预定情绪有关的、与所述内容数据的各个部分相对应的信息;以及
-接收指示用户的情绪状态的监测数据;
-第一驱动器,其用于可控地将该终端耦接到至少用于呈现来自所述用户可感知的内容数据的内容的第一设备;
-第二驱动器,其用于可控地将该终端耦接到至少用于修改所述用户可感知的环境的周围条件的第二设备;以及
-处理器,其被配置为控制所述第一设备和所述第二设备中的至少一个的输出来从所述用户引出所述预定的情绪,并且根据指示所述用户的情绪状态的监测数据调整所述至少一个输出。
10.根据权利要求9的终端,其中所述情绪数据包括各个可单独识别的数据流的分组,所述数据流包括:
-与用户的情绪状态相关的情绪构成段;以及
-感觉场景描述段,其描述待由第一设备和第二设备中至少一个产生的预定输出以从用户引出预定情绪;
所述处理器被配置为共同地利用来自所述情绪构成段的信息和来自监测数据的信息来调整所述预定输出。
CN201080016755.0A 2009-04-15 2010-04-08 用于适应性调节用户环境的方法和系统 Expired - Fee Related CN102395410B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
EP09157915.1 2009-04-15
EP09157915 2009-04-15
PCT/IB2010/051520 WO2010119376A1 (en) 2009-04-15 2010-04-08 Methods and systems for adapting a user environment

Publications (2)

Publication Number Publication Date
CN102395410A CN102395410A (zh) 2012-03-28
CN102395410B true CN102395410B (zh) 2015-12-02

Family

ID=42562383

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201080016755.0A Expired - Fee Related CN102395410B (zh) 2009-04-15 2010-04-08 用于适应性调节用户环境的方法和系统

Country Status (5)

Country Link
US (1) US8712948B2 (zh)
EP (1) EP2419184A1 (zh)
JP (1) JP5899111B2 (zh)
CN (1) CN102395410B (zh)
WO (1) WO2010119376A1 (zh)

Families Citing this family (24)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5640496B2 (ja) * 2010-06-25 2014-12-17 ソニー株式会社 情報処理システム並びに情報処理装置
US20120023161A1 (en) * 2010-07-21 2012-01-26 Sk Telecom Co., Ltd. System and method for providing multimedia service in a communication system
CN103126690A (zh) * 2013-01-28 2013-06-05 周万荣 一种基于应用的人体情绪识别及控制方法及设备和系统
TWM459428U (zh) * 2013-03-04 2013-08-11 Gunitech Corp 環境控制裝置及影/音播放裝置
US8910298B2 (en) * 2013-03-15 2014-12-09 Leeo, Inc. Environmental monitoring device
US20150020615A1 (en) 2013-07-16 2015-01-22 Leeo, Inc. Electronic device with environmental monitoring
US9116137B1 (en) 2014-07-15 2015-08-25 Leeo, Inc. Selective electrical coupling based on environmental conditions
US9788777B1 (en) * 2013-08-12 2017-10-17 The Neilsen Company (US), LLC Methods and apparatus to identify a mood of media
US10013892B2 (en) 2013-10-07 2018-07-03 Intel Corporation Adaptive learning environment driven by real-time identification of engagement level
TW201519697A (zh) * 2013-11-15 2015-05-16 Gunitech Corp 光源控制系統及其光源控制之方法
US9372477B2 (en) 2014-07-15 2016-06-21 Leeo, Inc. Selective electrical coupling based on environmental conditions
US9092060B1 (en) 2014-08-27 2015-07-28 Leeo, Inc. Intuitive thermal user interface
US10102566B2 (en) 2014-09-08 2018-10-16 Leeo, Icnc. Alert-driven dynamic sensor-data sub-contracting
US10026304B2 (en) 2014-10-20 2018-07-17 Leeo, Inc. Calibrating an environmental monitoring device
US9445451B2 (en) 2014-10-20 2016-09-13 Leeo, Inc. Communicating arbitrary attributes using a predefined characteristic
US20160180722A1 (en) * 2014-12-22 2016-06-23 Intel Corporation Systems and methods for self-learning, content-aware affect recognition
CN104991464B (zh) * 2015-05-08 2019-01-15 联想(北京)有限公司 一种信息处理方法及控制系统
US9801013B2 (en) 2015-11-06 2017-10-24 Leeo, Inc. Electronic-device association based on location duration
US10805775B2 (en) 2015-11-06 2020-10-13 Jon Castor Electronic-device detection and activity association
CN105446310B (zh) * 2015-12-31 2018-07-03 广东美的制冷设备有限公司 一种空气环境制造方法及装置
CN106512209B (zh) * 2016-12-06 2018-11-02 江苏师范大学 一种智慧学习精神状态调节装置
US10772178B2 (en) 2017-01-04 2020-09-08 Signify Holding B.V. Adaptive lighting automation
CN110275370A (zh) * 2019-06-28 2019-09-24 海南大学 内容驱动的主动空间交互优化系统
CN110298317A (zh) * 2019-07-01 2019-10-01 海南大学 目标驱动的交互式内容多媒体化空间展示系统

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6001065A (en) * 1995-08-02 1999-12-14 Ibva Technologies, Inc. Method and apparatus for measuring and analyzing physiological signals for active or passive control of physical and virtual spaces and the contents therein
WO2002092184A1 (en) * 2001-05-11 2002-11-21 Koninklijke Philips Electronics N.V. An enabled device and a method of operating a set of devices
WO2003089100A1 (en) * 2002-04-22 2003-10-30 Intellocity Usa, Inc. Method and apparatus for data receiver and controller

Family Cites Families (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5875108A (en) * 1991-12-23 1999-02-23 Hoffberg; Steven M. Ergonomic man-machine interface incorporating adaptive pattern recognition based control system
JP4176233B2 (ja) * 1998-04-13 2008-11-05 松下電器産業株式会社 照明制御方法及び照明装置
JP2001252265A (ja) * 2000-03-08 2001-09-18 Sharp Corp バイオフィードバック装置
JP3644502B2 (ja) * 2001-02-06 2005-04-27 ソニー株式会社 コンテンツ受信装置およびコンテンツ呈示制御方法
US6611206B2 (en) * 2001-03-15 2003-08-26 Koninklijke Philips Electronics N.V. Automatic system for monitoring independent person requiring occasional assistance
JP2003219342A (ja) * 2002-01-25 2003-07-31 Victor Co Of Japan Ltd 画像情報記憶再生システム
US7331870B2 (en) 2003-05-16 2008-02-19 Healing Rhythms, Llc Multiplayer biofeedback interactive gaming environment
EP1582965A1 (en) 2004-04-01 2005-10-05 Sony Deutschland Gmbh Emotion controlled system for processing multimedia data
JP2005318973A (ja) * 2004-05-07 2005-11-17 Sony Corp 生体センサ装置、コンテンツ再生方法およびコンテンツ再生装置
EP2018062A4 (en) * 2006-04-21 2010-08-04 Sharp Kk DATA TRANSMISSION METHOD AND DEVICE, AND AUDIOVISUAL ENVIRONMENT MANAGEMENT DEVICE, SYSTEM AND METHOD
JP2008035298A (ja) * 2006-07-31 2008-02-14 Sharp Corp コンテンツ処理装置及びプログラム
RU2513772C2 (ru) * 2008-01-16 2014-04-20 Конинклейке Филипс Электроникс Н.В. Система и способ автоматического создания атмосферы, подходящей для общественной обстановки и настроя в окружающей среде
CN108279781B (zh) * 2008-10-20 2022-01-14 皇家飞利浦电子股份有限公司 在再现环境下控制对用户的影响
US8004391B2 (en) * 2008-11-19 2011-08-23 Immersion Corporation Method and apparatus for generating mood-based haptic feedback
US20120296476A1 (en) * 2009-10-30 2012-11-22 Richard John Cale Environmental control method and system
KR101303648B1 (ko) * 2009-12-08 2013-09-04 한국전자통신연구원 감성신호 감지 장치 및 그 방법
US8670018B2 (en) * 2010-05-27 2014-03-11 Microsoft Corporation Detecting reactions and providing feedback to an interaction
US8903176B2 (en) * 2011-11-14 2014-12-02 Sensory Logic, Inc. Systems and methods using observed emotional data

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6001065A (en) * 1995-08-02 1999-12-14 Ibva Technologies, Inc. Method and apparatus for measuring and analyzing physiological signals for active or passive control of physical and virtual spaces and the contents therein
WO2002092184A1 (en) * 2001-05-11 2002-11-21 Koninklijke Philips Electronics N.V. An enabled device and a method of operating a set of devices
WO2003089100A1 (en) * 2002-04-22 2003-10-30 Intellocity Usa, Inc. Method and apparatus for data receiver and controller

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
Interoperable affective context collection using MPEG-21;Poppe Chris,etc;《Wireless, Mobile and Multimedia Networks, 2006 IET International Conference》;20061231;第1-4页 *

Also Published As

Publication number Publication date
US20120041917A1 (en) 2012-02-16
WO2010119376A1 (en) 2010-10-21
US8712948B2 (en) 2014-04-29
JP5899111B2 (ja) 2016-04-06
CN102395410A (zh) 2012-03-28
JP2012524442A (ja) 2012-10-11
EP2419184A1 (en) 2012-02-22

Similar Documents

Publication Publication Date Title
CN102395410B (zh) 用于适应性调节用户环境的方法和系统
US20220286728A1 (en) Information processing apparatus and information processing method, display equipped with artificial intelligence function, and rendition system equipped with artificial intelligence function
JP6504165B2 (ja) 情報処理装置及び情報処理方法並びにプログラム
US7698238B2 (en) Emotion controlled system for processing multimedia data
US20100268745A1 (en) Method and apparatus for representing sensory effects using sensory device capability metadata
JP4052556B2 (ja) 外部機器連動型コンテンツ生成装置、その方法及びそのプログラム
US11477525B2 (en) Creative intent scalability via physiological monitoring
KR101667416B1 (ko) 실감 효과 표현 방법 및 그 장치 및 실감 기기 성능 메타데이터가 기록된 컴퓨터로 읽을 수 있는 기록 매체
JP5781435B2 (ja) 感覚再生装置に係るメタデータを用いるマルチメディアアプリケーションシステム及びその方法
EP2330827A2 (en) Method and device for realising sensory effects
US20100274817A1 (en) Method and apparatus for representing sensory effects using user's sensory effect preference metadata
US20200304882A1 (en) Method and device for controlling the setting of at least one audio and/or video parameter, corresponding terminal and computer program
US10861221B2 (en) Sensory effect adaptation method, and adaptation engine and sensory device to perform the same
KR20100008777A (ko) 실감 효과 표현 방법 및 그 장치 및 실감 기기 제어 메타데이터가 기록된 컴퓨터로 읽을 수 있는 기록 매체
JP7067482B2 (ja) 制御装置、記録媒体、およびプログラム
US20230031160A1 (en) Information processing apparatus, information processing method, and computer program
US11675419B2 (en) User-driven adaptation of immersive experiences
US20220353578A1 (en) Artificial intelligence information processing apparatus, artificial intelligence information processing method, and artificial-intelligence-function-equipped display apparatus
KR20050116916A (ko) 환경 정보를 포함하는 콘텐츠를 생성하고 재생하는 방법과그 재생 장치
KR102460671B1 (ko) 실감 효과 적응 방법 및 이를 수행하는 적응 엔진 및 실감 장치
US20220321961A1 (en) Information processing device, information processing method, and artificial intelligence function-mounted display device
CN110945874A (zh) 信息处理装置、信息处理方法以及程序

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20151202

Termination date: 20210408

CF01 Termination of patent right due to non-payment of annual fee