CN111052192A - 基于注意力的玩家选择ai确定 - Google Patents

基于注意力的玩家选择ai确定 Download PDF

Info

Publication number
CN111052192A
CN111052192A CN201880055440.3A CN201880055440A CN111052192A CN 111052192 A CN111052192 A CN 111052192A CN 201880055440 A CN201880055440 A CN 201880055440A CN 111052192 A CN111052192 A CN 111052192A
Authority
CN
China
Prior art keywords
player
game
association
instructions
executable
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201880055440.3A
Other languages
English (en)
Inventor
P.提姆
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Interactive Entertainment LLC
Original Assignee
Sony Computer Entertainment America LLC
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Computer Entertainment America LLC filed Critical Sony Computer Entertainment America LLC
Publication of CN111052192A publication Critical patent/CN111052192A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/40—Processing input control signals of video game devices, e.g. signals generated by the player or derived from the environment
    • A63F13/42—Processing input control signals of video game devices, e.g. signals generated by the player or derived from the environment by mapping the input signals into game commands, e.g. mapping the displacement of a stylus on a touch screen to the steering angle of a virtual vehicle
    • A63F13/428—Processing input control signals of video game devices, e.g. signals generated by the player or derived from the environment by mapping the input signals into game commands, e.g. mapping the displacement of a stylus on a touch screen to the steering angle of a virtual vehicle involving motion or position input signals, e.g. signals representing the rotation of an input controller or a player's arm motions sensed by accelerometers or gyroscopes
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/20—Input arrangements for video game devices
    • A63F13/21—Input arrangements for video game devices characterised by their sensors, purposes or types
    • A63F13/212—Input arrangements for video game devices characterised by their sensors, purposes or types using sensors worn by the player, e.g. for measuring heart beat or leg activity
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/20—Input arrangements for video game devices
    • A63F13/21—Input arrangements for video game devices characterised by their sensors, purposes or types
    • A63F13/213—Input arrangements for video game devices characterised by their sensors, purposes or types comprising photodetecting means, e.g. cameras, photodiodes or infrared cells
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/25—Output arrangements for video game devices
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/25—Output arrangements for video game devices
    • A63F13/26—Output arrangements for video game devices having at least one additional display device, e.g. on the game controller or outside a game booth
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/40—Processing input control signals of video game devices, e.g. signals generated by the player or derived from the environment
    • A63F13/42—Processing input control signals of video game devices, e.g. signals generated by the player or derived from the environment by mapping the input signals into game commands, e.g. mapping the displacement of a stylus on a touch screen to the steering angle of a virtual vehicle
    • A63F13/426—Processing input control signals of video game devices, e.g. signals generated by the player or derived from the environment by mapping the input signals into game commands, e.g. mapping the displacement of a stylus on a touch screen to the steering angle of a virtual vehicle involving on-screen location information, e.g. screen coordinates of an area at which the player is aiming with a light gun
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/45—Controlling the progress of the video game
    • A63F13/46—Computing the game score
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/50—Controlling the output signals based on the game progress
    • A63F13/53—Controlling the output signals based on the game progress involving additional visual information provided to the game scene, e.g. by overlay to simulate a head-up display [HUD] or displaying a laser sight in a shooting game
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/50—Controlling the output signals based on the game progress
    • A63F13/53—Controlling the output signals based on the game progress involving additional visual information provided to the game scene, e.g. by overlay to simulate a head-up display [HUD] or displaying a laser sight in a shooting game
    • A63F13/533—Controlling the output signals based on the game progress involving additional visual information provided to the game scene, e.g. by overlay to simulate a head-up display [HUD] or displaying a laser sight in a shooting game for prompting the player, e.g. by displaying a game menu
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/60—Generating or modifying game content before or while executing the game program, e.g. authoring tools specially adapted for game development or game-integrated level editor
    • A63F13/67—Generating or modifying game content before or while executing the game program, e.g. authoring tools specially adapted for game development or game-integrated level editor adaptively or by learning from player actions, e.g. skill level adjustment or by storing successful combat sequences for re-use
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/70—Game security or game management aspects
    • A63F13/79—Game security or game management aspects involving player-related data, e.g. identities, accounts, preferences or play histories
    • A63F13/798—Game security or game management aspects involving player-related data, e.g. identities, accounts, preferences or play histories for assessing skills or for ranking players, e.g. for generating a hall of fame
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/013—Eye tracking input arrangements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04842—Selection of displayed objects or displayed text elements
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/20—Input arrangements for video game devices
    • A63F13/21—Input arrangements for video game devices characterised by their sensors, purposes or types
    • A63F13/211—Input arrangements for video game devices characterised by their sensors, purposes or types using inertial sensors, e.g. accelerometers or gyroscopes
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/20—Input arrangements for video game devices
    • A63F13/21—Input arrangements for video game devices characterised by their sensors, purposes or types
    • A63F13/217—Input arrangements for video game devices characterised by their sensors, purposes or types using environment-related information, i.e. information generated otherwise than by the player, e.g. ambient temperature or humidity
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/10—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by input arrangements for converting player-generated signals into game device control signals
    • A63F2300/1087—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by input arrangements for converting player-generated signals into game device control signals comprising photodetecting means, e.g. a camera
    • A63F2300/1093—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by input arrangements for converting player-generated signals into game device control signals comprising photodetecting means, e.g. a camera using visible light
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/80—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game specially adapted for executing a specific type of game
    • A63F2300/8082—Virtual reality

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Human Computer Interaction (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Health & Medical Sciences (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Optics & Photonics (AREA)
  • General Health & Medical Sciences (AREA)
  • Biophysics (AREA)
  • Cardiology (AREA)
  • Business, Economics & Management (AREA)
  • General Business, Economics & Management (AREA)
  • Computer Security & Cryptography (AREA)
  • User Interface Of Digital Computer (AREA)
  • Biodiversity & Conservation Biology (AREA)
  • Ecology (AREA)
  • Environmental & Geological Engineering (AREA)
  • Environmental Sciences (AREA)

Abstract

使用摄像机(302)或其他追踪硬件，在游戏玩法期间的关键/预定点处追踪(402)计算机游戏的玩家(300)的注意力(基于例如注视方向)。例如，当所述玩家进入所述游戏中的新区域诸如模拟的房间、城镇等时，确定(404)所述玩家的注视更多地聚焦于的内容，例如，蜷缩在角落里的狗、有明显财富标志的贵族或阴影中外形诡异的人物。基于此输入，确定(408)未来游戏玩法的一个或多个因素，诸如呈现遭遇战/挑战的顺序、调整角色的“道德”分数/标示、调整对非玩家角色(NPC)互动的奖赏/惩罚等。

Description

基于注意力的玩家选择AI确定
技术领域
本申请涉及必须植根于计算机技术并产生具体技术改进的技术上创新的非常规解决方案。
背景技术
如本文所理解的，在计算机游戏中，玩家决定必须由游戏控制台经由玩家输入(通常是按下按钮)来确定。还如本文所理解的，这向玩家流露出正在做出本身可能影响玩家决定的决定。
发明内容
如本文进一步理解的，期望完全不干扰玩家体验的非直接输入方法来基于玩家的自发注意力更改计算机游戏玩法。
因此，一种装置包括至少一个计算机存储器，所述至少一个计算机存储器不是瞬时信号并且包括指令，所述指令可由至少一个处理器执行以从摄像机接收计算机游戏的玩家的至少一个图像。所述指令可执行以：至少部分地基于所述图像，确定所述玩家的注视方向；使所述注视方向与所述计算机游戏中的至少一个对象关联以建立关联性；并且使用所述关联性来确定要呈现给所述玩家的游戏路径、和/或要呈现给所述玩家的对话、和/或玩家技能属性。所述指令还可执行以：向所述玩家呈现所述游戏路径、和/或向所述玩家呈现所述对话、和/或根据所述玩家技能属性更改与所述玩家相关联的技能。
在示例性实施方案中，所述指令可能够执行以：至少部分地基于访问所述计算机游戏指示至少一个主要场景中的对象的位置的信息来使所述注视方向与所述计算机游戏中的至少一个对象关联以建立关联性。所述摄像机可由所述玩家可穿戴的计算机游戏头戴式耳机支撑。
在示例性实施方案中，所述指令可能够执行以至少部分地基于大于一的所述注视方向指向所述至少一个对象的次数的数量来建立所述关联性。在非限制性实例中，所述指令可执行以至少部分地基于所述至少一个对象的类别来建立所述关联性。
在另一个方面，一种设备包括：至少一个计算机存储设备，所述至少一个计算机存储设备具有可由至少一个处理器执行的指令；以及至少一个处理器，所述至少一个处理器被配置来访问所述指令以用于从装置接收不是计算机游戏输入信号的至少一个指示信号。所述指示信号指示玩家对计算机游戏的元素的注意力。所述指令可执行以用于：至少部分地基于所述指示信号来确定所述玩家的注意力；使所述玩家的所述注意力与所述计算机游戏中的至少一个对象关联以建立关联性；并且然后使用所述关联性来确定要呈现给所述玩家的游戏路径、和/或要呈现给所述玩家的对话、和/或玩家技能属性。所述指令可能够执行以用于：向所述玩家呈现所述游戏路径、和/或向所述玩家呈现所述对话、和/或根据所述玩家技能属性更改与所述玩家相关联的技能。
在另一个方面，一种方法包括：接收不是计算机游戏输入信号的至少一个指示信号；以及至少部分地基于所述指示信号，确定所述玩家的注意力。所述方法包括：使所述玩家的所述注意力与计算机游戏中的至少一个对象关联以建立关联性。所述方法还包括：使用所述关联性来更改所述计算机游戏的呈现。
本申请的关于其结构和操作两者的细节可参考附图得到最好的理解，在附图中相似附图标号指代相似部分，并且在附图中：
附图说明
图1是根据本原理的包括实例的示例性系统的框图；
图2是符合本原理的可采用的计算机游戏头戴式耳机的图解；
图3是符合本原理的简化示例性系统的框图；
图4是符合本原理的示例性注意力追踪逻辑的流程图；
图5是符合本原理的示例性游戏更改逻辑的流程图；并且
图6和图7示意性地示出基于玩家注意哪个对象来更改游戏路径。
具体实施方式
本公开总体涉及计算机生态系统，所述计算机生态系统包括消费者电子设备(CE)装置网络诸如但不限于分布式计算机游戏网络的各方面。
本文的系统可包括服务器和客户端部件，所述服务器和客户端部件通过网络连接，使得可在客户端与服务器部件之间交换数据。客户端部件可包括一个或多个计算装置，所述一个或多个计算装置包括游戏控制台，诸如但不限于Sony PlaystationTM和MicrosoftXboxTM、便携式电视(例如，智能TV、互联网使能TV)、便携式计算机(诸如膝上型计算机和平板计算机)，以及其他移动装置，包括智能电话和下面所讨论的另外的实例。这些客户端装置可以多种操作环境操作。例如，客户端计算机中的一些可采用例如Orbis或Linux操作系统、来自Microsoft的操作系统或Unix操作系统，或由Apple Computer或Google生产的操作系统。这些操作环境可用于执行一个或多个浏览程序，诸如由Microsoft或Google或Mozilla制造的浏览器，或者可访问由下面所讨论的互联网服务器托管的网站的其他浏览器程序。此外，根据本原理的操作环境可用于执行一个或多个计算机游戏程序。
服务器和/或网关可包括执行指令的一个或多个处理器，所述指令将服务器配置来通过诸如互联网的网络接收和发射数据。或者，客户端和服务器可通过本地内联网或虚拟专用网络连接。服务器或控制器可由游戏控制台诸如Sony
Figure BDA0002392362850000041
个人计算机等实例化。
信息可通过网络在客户端与服务器之间交换。为此并且为安全起见，服务器和/或客户端可包括防火墙、负载均衡器、暂时性存储器和代理，以及用于可靠性和安全性的其他网络基础设施。一个或多个服务器可形成实现向网络成员提供诸如在线社交网站的安全社区的方法的设备。
如本文所使用，指令指代用于在系统中处理信息的计算机实现的步骤。指令可在软件、固件或硬件中实现，并且包括由系统的部件进行的任何类型的已编程步骤。
处理器可以是可借助于诸如地址线、数据线和控制线的各种线以及寄存器和移位寄存器执行逻辑的任何常规通用的单芯片处理器或多芯片处理器。
通过本文的流程图和用户界面描述的软件模块可包括各种子例程、程序等。在不限制本公开的情况下，陈述为由特定模块执行的逻辑可被重新分配到其他软件模块和/或一起组合在单个模块中和/或被使得可在可共享库中利用。
本文所描述的本原理可实现为硬件、软件、固件或其组合；因此说明性部件、块、模块、电路和步骤依据其功能性加以阐述。
除以上提到的内容之外，下面所描述的逻辑块、模块和电路可用通用处理器、数字信号处理器(DSP)、现场可编程门阵列(FPGA)或其他可编程逻辑装置实现或执行，所述其他可编程逻辑装置诸如专用集成电路(ASIC)、离散门或晶体管逻辑、离散硬件部件或上述各项的被设计来执行本文所描述的功能的任何组合。处理器可由控制器或状态机或计算装置的组合实现。因此，本文的方法可实现为由处理器、适当地配置的专用集成电路(ASIC)或现场可编程门阵列(FPGA)模块或如本领域中技术人员将理解的任何其他便利方式执行的软件指令。在采用的情况下，软件指令可体现在非暂时性装置诸如CD ROM或闪存驱动器中。软件代码指令可替代地体现在诸如无线电或光信号的瞬时布置中，或者经由通过互联网下载来体现。
下面所描述的功能和方法当在软件中实现时可以诸如但不限于Java、C#或C++的适当语言编写，并且可存储在计算机可读存储介质上或通过计算机可读存储介质传输，所述计算机可读存储介质诸如随机存取存储器(RAM)、只读存储器(ROM)、电可擦除可编程只读存储器(EEPROM)、光盘只读存储器(CD-ROM)或其他光盘存储设备(诸如数字通用光盘(DVD))、磁盘存储设备或包括可移动拇指驱动器的其他磁存储装置等。连接可建立计算机可读介质。此类连接可包括例如硬连线电缆，所述硬连线电缆包括光纤和同轴线以及数字用户线(DSL)和双绞线。此类连接可包括无线通信连接，所述无线通信连接包括红外线和无线电。
包括在一个实施方案中的部件可以任何适当组合使用于其他实施方案中。例如，可将本文所描述的和/或附图中所描绘的各种部件中的任一个组合、互换或从其他实施方案排除。
“具有A、B和C中的至少一个的系统”(类似地，“具有A、B或C中的至少一个的系统”和“具有A、B、C中的至少一个的系统”)包括仅具有A、仅具有B、仅具有C、具有A和B、A和C、B和C和/或A、B和C等的系统。
现在具体地参考图1，其示出示例性系统10，所述系统10可包括以上提及和下面根据本原理进一步描述的示例性装置中的一个或多个。包括在系统10中的示例性装置中的第一个是消费者电子设备(CE)装置，诸如音频视频装置(AVD)12，所述AVD 12诸如但不限于具有显示器的计算机游戏控制台系统或者具有TV调谐器(等同地，控制TV的机顶盒)的互联网使能的TV。然而，AVD 12替代地可以是器具或家用物品，例如，计算机化的互联网使能的冰箱、洗涤器或干燥器。AVD 12替代地还可以是计算机化的互联网使能的(“智能”)电话、平板计算机、笔记本式计算机、可穿戴式计算机化的装置(例如像计算机化的互联网使能的手表、计算机化的互联网使能的手镯)、其他计算机化的互联网使能的装置、计算机化的互联网使能的音乐播放器、计算机化的互联网使能的耳机、计算机化的互联网使能的可植入装置(诸如可植入皮肤装置)等。无论如何，应理解，AVD 12被配置来进行本原理(例如，与其他CE装置进行通信以进行本原理，执行本文所描述的逻辑，并且执行本文所描述的任何其他功能和/或操作)。
因此，为了进行这类原理，AVD 12可由图1中所示的部件中的一些或全部建立。例如，AVD 12可包括一个或多个显示器14，所述一个或多个显示器14可由高清晰度或超高清晰度(“4K”)或更高的平面屏幕实现，并且可以是触摸使能的，以用于经由显示器上的触摸来接收用户输入信号。根据本原理，AVD 12可包括用于输出音频的一个或多个扬声器16，以及用于例如将可听命令输入至AVD 12中以控制AVD 12的至少一个另外的输入装置18，例如像音频接收器/麦克风。示例性AVD 12还可包括用于在一个或多个处理器24的控制下通过诸如互联网、WAN、LAN等的至少一个网络22通信的一个或多个网络接口20。因此，接口20可以是但不限于Wi-Fi收发器，所述Wi-Fi收发器为无线计算机网络接口的实例，诸如但不限于网状网络收发器。应理解，处理器24控制AVD 12来进行本原理，包括本文所描述的AVD 12的其他元件，例如像控制显示器14来在显示器14上呈现图像和从显示器14接收输入。此外，请注意，网络接口20可以是例如有线或无线调制解调器或路由器，或其他适当接口，例如像无线电话收发器或如以上所提及的Wi-Fi收发器等。
除前述内容之外，AVD 12还可包括用来物理地连接(例如，使用有线连接)到另一个CE装置的一个或多个输入端口26(例如像高清晰度多媒体接口(HDMI)端口或USB端口)，和/或用来将耳机连接到AVD 12以用来通过耳机将来自AVD 12的音频呈现给用户的耳机端口。例如，输入端口26可经由有线或无线地连接到音频视频内容的电缆或卫星源26a。因此，源26a可以是例如单独的或集成的机顶盒或卫星接收器。或者，源26a可以是包含诸如计算机游戏软件和数据库的内容的游戏控制台或磁盘播放器。源26a在实现为游戏控制台时可包括下面关于CE装置44描述的部件中的一些或全部。
AVD 12还可包括不是瞬时信号的一个或多个计算机存储器28，诸如基于磁盘的存储设备或固态存储设备，所述一个或多个计算机存储器28在一些情况下于AVD的底盘中体现为独立装置，或者体现为AVD的底盘内部或外部的用于回放AV节目的个人视频记录装置(PVR)或视频磁盘播放器，或者体现为可移动存储器介质。此外在一些实施方案中，AVD 12可包括定位或位置接收器，诸如但不限于手机接收器、GPS接收器和/或高度计30，所述定位或位置接收器被配置来例如从至少一个卫星或手机塔接收地理定位信息并且将所述信息提供给处理器24和/或结合处理器24确定AVD 12被设置处于的高度。然而，应理解，根据本原理，可使用除手机接收器、GPS接收器和/或高度计之外的另一种合适的定位接收器来例如确定AVD 12在例如所有三维中的位置。
继续AVD 12的描述，在一些实施方案中，根据本原理，AVD 12可包括一个或多个摄像机32，所述一个或多个摄像机32可以是例如热成像摄像机、数字摄像机(诸如网络摄像机)和/或集成到AVD 12中并且可由处理器24控制来采集图片/图像和/或视频的摄像机。AVD12上还可包括用于分别使用蓝牙和/或NFC技术与其他装置通信的蓝牙收发器34和其他近场通信(NFC)元件36。示例性NFC元件可以是射频识别(RFID)元件。
再进一步地，AVD 12可包括向处理器24提供输入的一个或多个辅助传感器37(例如，运动传感器，诸如加速度计、陀螺仪、回转计或磁传感器、红外线(IR)传感器、光学传感器、速度和/或节奏传感器、手势传感器(例如，用于感测手势命令)等)。AVD 12可包括用于接收向处理器24提供输入的OTA TV广播的无线TV广播端口38。除前述内容之外，应注意，AVD 12还可包括红外线(IR)发射器和/或IR接收器和/或IR收发器42，诸如IR数据关联(IRDA)装置。可提供电池(未示出)以用于为AVD 12供电。
仍参考图1，除AVD 12之外，系统10可包括一个或多个其他CE装置类型。在一个实例中，第一CE装置44可用于经由通过下面所描述的服务器发送的命令控制显示器，而第二CE装置(诸如源26a)可包括与第一CE装置44类似的部件并且因此将不进行详细讨论。可使用更少或更多的装置。如以上所提到，CE装置可由游戏控制台实现。或者，CE装置中的一个或多个可由计算机游戏头戴式耳机(诸如图2中所示的示例性头戴式耳机200)实现。
在所示的实例中，为了说明本原理，所有装置假设是例如家中娱乐网络的成员，或至少在诸如房子的位置中存在于彼此附近。然而，本原理不限于由虚线48所示的特定位置，除非另有明确要求。
示例性的非限制性第一CE装置44可由以上提及的装置(例如，便捷式无线膝上型计算机或笔记本计算机或游戏控制器(也称为“控制台”))中的任一个建立，并且因此可具有下面所描述的部件中的一个或多个。第二CE装置26a无限制地可由视频磁盘播放器诸如蓝光播放器、游戏控制台等建立。第一CE装置44可以是用于例如将AV播放和暂停命令发布到AVD 12的远程控件(RC)，或者它可以是更加高级的装置，诸如平板计算机、经由有线或无线链路与由第二CE装置实现的游戏控制台通信并且控制AVD 12上的视频游戏呈现的游戏控制器、个人计算机、无线电话等。
因此，第一CE装置44可包括可以是触摸使能的以用于经由显示器上的触摸接收用户输入信号的一个或多个显示器50。根据本原理，第一CE装置44可包括用于输出音频的一个或多个扬声器52，以及用于例如将可听命令输入至第一CE装置44以控制装置44的至少一个另外的输入装置54，例如像音频接收器/麦克风。示例性第一CE装置44还可包括用于在一个或多个CE装置处理器58的控制下通过网络22通信的一个或多个网络接口56。因此，接口56可无限制地为Wi-Fi收发器，所述Wi-Fi收发器为无线计算机网络接口(包括网状网络接口)的实例。应理解，处理器58控制第一CE装置44来进行本原理，包括本文所描述的第一CE装置44的其他元件，诸如用于控制显示器50以在显示器50上呈现图像和从显示器50接收输入的图形处理器58a。此外，请注意，网络接口56可以是例如有线或无线调制解调器或路由器，或其他适当接口，例如像无线电话收发器或如以上所提及的Wi-Fi收发器等。
除前述内容之外，第一CE装置44还可包括用来物理地连接(例如，使用有线连接)到另一个CE装置的一个或多个输入端口60(例如像HDMI端口或USB端口)，和/或用来将耳机连接到第一CE装置44以用于通过耳机将来自第一CE装置44的音频呈现给用户的耳机端口。第一CE装置44还可包括一个或多个有形计算机可读存储介质62，诸如基于磁盘的存储设备或固态存储设备。此外，在一些实施方案中，第一CE装置44可包括定位或位置接收器，诸如但不限于手机和/或GPS接收器和/或高度计64，所述定位或位置接收器被配置来例如使用三角测量从至少一个卫星或手机塔接收地理定位信息，并且将所述信息提供给CE装置处理器58和/或结合CE装置处理器58确定第一CE装置44被设置处于的高度。然而，应理解，根据本原理，可使用除手机和/或GPS接收器和/或高度计之外的另一种合适的定位接收器来例如确定第一CE装置44在例如所有三维中的位置。
继续第一CE装置44的描述，在一些实施方案中，根据本原理，第一CE装置44可包括一个或多个摄像机66，所述一个或多个摄像机66可以是例如热成像摄像机、数字摄像机(诸如网络摄像机)和/或集成到第一CE装置44中并且可由CE装置处理器58控制以采集图片/图像和/或视频的摄像机。第一CE装置44上还可包括用于分别使用蓝牙和/或NFC技术与其他装置通信的蓝牙收发器68和其他近场通信(NFC)元件70。示例性NFC元件可以是射频识别(RFID)元件。
再进一步地，第一CE装置44可包括向CE装置处理器58提供输入的一个或多个辅助传感器72(例如，运动传感器，诸如加速度计、陀螺仪、回转计或磁传感器、红外线(IR)传感器、光学传感器、速度和/或节奏传感器、手势传感器(例如，用于感测手势命令)等)。第一CE装置44还可包括向CE装置处理器58提供输入的其他传感器，例如像一个或多个气候传感器74(例如，气压计、湿度传感器、风传感器、光传感器、温度传感器等)和/或一个或多个生物计量传感器76。除前述内容之外，应注意，在一些实施方案中，第一CE装置44还可包括红外线(IR)发射器和/或IR接收器和/或IR收发器78，诸如IR数据关联(IRDA)装置。可提供电池(未示出)以用于为第一CE装置44供电。CE装置44可通过以上描述的通信模式和有关部件与AVD 12通信。
CE装置可包括针对CE装置44所示的部件中的一些或全部。CE装置可由一个或多个电池供电。
现在参考前面提及的至少一个服务器80，所述至少一个服务器80包括至少一个服务器处理器82、至少一个有形计算机可读存储介质84(诸如基于磁盘的存储设备或固态存储设备)以及至少一个网络接口86，所述至少一个网络接口86在服务器处理器82的控制下允许通过网络22与图1的其他装置通信，并且实际上可根据本原理促进服务器与客户端装置之间的通信。请注意，网络接口86可以是例如有线或无线调制解调器或路由器、Wi-Fi收发器或其他适当接口，例如像无线电话收发器。通常，服务器80包括称为“刀片”的多个计算机中的多个处理器。
因此，在一些实施方案中，服务器80可以是互联网服务器或整个服务器“群”，并且可包括和执行“云”功能，使得系统10的装置可在用于例如网络游戏应用的示例性实施方案中经由服务器80存取“云”环境。或者，服务器80可由一个或多个游戏控制台或与图1所示的其他装置在相同房间中或附近的其他计算机实现。
图3示意性地示出计算机游戏的玩家300可由一个或多个摄像机302成像。摄像机302可安装在图2中的头戴式耳机200上，或者安装在实现图1中的装置中的一个装置或另一个装置(诸如显示装置)的计算机游戏控制台上。来自摄像机302的图像被发送到访问一个或多个计算机游戏306的一个或多个处理器304。处理器304可以是计算机游戏控制台的一部分。如下面进一步阐述的，处理器304使用眼睛追踪图像辨识从摄像机图像确定玩家300的注视方向，以确定玩家在看计算机游戏中的什么对象。
在其他实现方式中，代替或除了使用玩家300的图像，处理器304可借助于例如游戏控制器确定玩家正将屏幕光标悬停在计算机游戏中的对象之上(优选地，并不突出显示悬停于其上的对象)。在这两种情况下，处理器使用的信号指示玩家的注意力，但它并不是如通过例如玩家按下游戏控制器上的按键将输入的计算机游戏输入信号。
图4示出用于基于摄像机图像确定玩家注意力的示例性逻辑，应理解，相同的逻辑可使用光标悬停来确定玩家注意力。开始于框400，在游戏的一个或多个关键场景中标记一个或多个游戏对象(诸如游戏角色)在计算机游戏中的位置。关键场景可以是例如游戏的任一帧。可通过在元数据中指示每个被标记对象在关键场景内的位置来标记位置。
前进到框402，识别玩家的注意力。在一个实例中，这通过对玩家的眼睛成像并执行眼睛追踪图像辨识以确定玩家的注视方向来进行。在另一个实现方式中，可通过确定玩家将屏幕光标悬停在游戏场景中的何处来识别玩家的注意力。可连续执行框402，或者仅在某些时间段或游戏事件时，如当玩家进入游戏中的新区域诸如模拟的房间、城镇等时，才执行框402。
移动到框404，使玩家的注意力与通勤者游戏中的对象关联。当使用眼睛追踪时，这可通过基于玩家的注视方向来确定玩家正在看的游戏帧的位置来完成，在一些情况下，这基于呈现游戏的显示器位于玩家面部的正前方的假设。然后将那个位置用作输入到来自框400的元数据中的输入参数以确定玩家正在看的对象。当使用光标悬停时，光标正悬停在其上的对象与玩家的注意力相关。
所述逻辑可从框404移动到框406以基于在框404处关联的对象来更新计数或分数。例如，可注意到玩家聚焦于特定类型的对象，并且玩家聚焦于那个对象和/或类型的离散次数的数量(通常大于一)得到更新。作为实例，可注意到玩家主要聚焦于战斗物品，或者相反，主要聚焦于情感物品，诸如幼犬。可对计数进行加权，使得例如，对特定对象的聚焦的计数可为对另一对象的聚焦的计数的两倍，以建立对象之间相对于游戏玩法执行的相对重要性。随着玩家前进通过一个或多个游戏，机器学习算法可识别玩家倾向于注意的对象的类型，并相应地更改游戏执行。
在框408处，基于计数/分数，可修改游戏执行。图5提供实例。
开始于框500，基于来自图4的计数/分数(玩家注意力与物体的关联性)，建立游戏路径。典型的计算机游戏提供从玩家通常所处于的任何游戏路径分支出来的各种游戏路径。因此，与基于玩家经由游戏控制器输入游戏信号而建立游戏将分支到其中的游戏路径相反，在图5中，至少部分地基于玩家的注意力聚焦于何处来建立路径。例如，在简化实例中，可基于玩家的注意力聚焦于第一对象来呈现角色遭遇战/挑战的第一序列，而可基于玩家的注意力聚焦于第二对象来呈现角色遭遇战/挑战的第二序列。
同样，在框502处，可基于图4的注意力关联性建立在扬声器上以可听方式呈现给玩家的对话。例如，在简化实例中，可基于玩家的注意力聚焦于第一对象来呈现第一对话，而可基于玩家的注意力聚焦于第二对象来呈现第二对话。
再进一步地，在框504处，可通过以下方式来修改游戏执行：基于图4的注意力聚焦逻辑来建立玩家的技能水平或其他游戏者属性(诸如玩家(或代表玩家的角色)的“道德”分数/标示)，调整对非玩家角色(NPC)互动的奖赏/惩罚等。作为另外的实例，如果注意到玩家的注意力聚焦于其他玩家的角色，则所述玩家的技能指示可能是“首领”。在任何情况下，这些玩家角色属性都可用于奖励奖赏积分，而奖赏积分进而可用于呈现游戏的下一个更高级别等。在追踪玩家注意力时，在框506处可改变玩家的技能水平。
现在转到图6和图7，其中假设使用眼睛追踪来确定玩家的注意力聚焦于呈现在显示器(诸如图1中所示的显示器14)上的计算机游戏中的对象。在图6中，玩家300注视对象“A”，这致使随后在显示器上呈现游戏路径“X”。相反，在图7中，玩家300注视对象“B”，这致使随后在显示器上呈现游戏路径“Y”。应容易理解，相同的原理可用于以上讨论的其他游戏执行更改，使得例如聚焦于对象“A”致使在扬声器上播放对话“M”而聚焦于对象“B”致使在扬声器上播放对话“N”。
应理解，虽然已经参考一些示例性实施方案描述了本原理，但是这些实施方案并不意图为限制性的并且各种替代性布置可用来实现本文所要求保护的主题。

Claims (20)

1.一种装置，其包括：
至少一个计算机存储器，所述至少一个计算机存储器不是瞬时信号并且包括指令，所述指令能由至少一个处理器执行以：
从摄像机接收计算机游戏的玩家的至少一个图像；
至少部分地基于所述图像，确定所述玩家的注视方向；
使所述注视方向与所述计算机游戏中的至少一个对象关联以建立关联性；
使用所述关联性来确定以下中的至少一者：要呈现给所述玩家的游戏路径、要呈现给所述玩家的对话、玩家技能属性；并且
执行以下中的至少一者：向所述玩家呈现所述游戏路径、向所述玩家呈现所述对话、根据所述玩家技能属性更改与所述玩家相关联的技能。
2.如权利要求1所述的装置，其中所述指令能执行以：
使用所述关联性来确定要呈现给所述玩家的游戏路径；并且向所述玩家呈现所述游戏路径。
3.如权利要求1所述的装置，其中所述指令能执行以：
使用所述关联性来确定要呈现给所述玩家的对话；并且向所述玩家呈现所述对话。
4.如权利要求1所述的装置，其中所述指令能执行以：
使用所述关联性来确定玩家技能属性；并且根据所述玩家技能属性更改与所述玩家相关联的技能。
5.如权利要求1所述的装置，其中所述指令能执行以：
至少部分地基于访问所述计算机游戏指示至少一个主要场景中的对象的位置的信息来使所述注视方向与所述计算机游戏中的至少一个对象关联以建立关联性。
6.如权利要求1所述的装置，其中所述摄像机由所述玩家能穿戴的计算机游戏头戴式耳机支撑。
7.如权利要求1所述的装置，其中所述指令能执行以：
至少部分地基于大于一的所述注视方向指向所述至少一个对象的次数的数量来建立所述关联性。
8.如权利要求1所述的装置，其中所述指令能执行以：
至少部分地基于所述至少一个对象的类别来建立所述关联性。
9.如权利要求1所述的装置，其包括所述至少一个处理器。
10.一种设备，其包括：
至少一个计算机存储设备，所述至少一个计算机存储设备包括能由至少一个处理器执行的指令；以及
至少一个处理器，所述至少一个处理器被配置来访问所述指令以用于：
从装置接收不是计算机游戏输入信号的至少一个指示信号，所述至少一个指示信号指示玩家对计算机游戏的元素的注意力；
至少部分地基于所述指示信号，确定所述玩家的注意力；
使所述玩家的所述注意力与所述计算机游戏中的至少一个对象关联以建立关联性；
使用所述关联性来确定以下中的至少一者：要呈现给所述玩家的游戏路径、要呈现给所述玩家的对话、玩家技能属性；以及
执行以下中的至少一者：向所述玩家呈现所述游戏路径、向所述玩家呈现所述对话、根据所述玩家技能属性更改与所述玩家相关联的技能。
11.如权利要求10所述的设备，其中所述装置是摄像机，并且所述指示信号包括所述玩家的至少一个图像。
12.如权利要求10所述的设备，其中所述装置是处理器，并且所述指示信号包括至少光标悬停信号。
13.如权利要求10所述的设备，其中所述指令能执行以用于：
使用所述关联性来确定要呈现给所述玩家的游戏路径；以及向所述玩家呈现所述游戏路径。
14.如权利要求10所述的设备，其中所述指令能执行以用于：
使用所述关联性来确定要呈现给所述玩家的对话；以及向所述玩家呈现所述对话。
15.如权利要求10所述的设备，其中所述指令能执行以用于：
使用所述关联性来确定玩家技能属性；以及根据所述玩家技能属性更改与所述玩家相关联的技能。
16.如权利要求10所述的设备，其中所述指令能执行以用于：
至少部分地基于访问所述计算机游戏指示至少一个主要场景中的对象的位置的信息来建立所述关联性。
17.如权利要求10所述的设备，其中所述指令可执行以用于：
至少部分地基于大于一的所述注意力指向所述至少一个对象的次数的数量来建立所述关联性。
18.如权利要求10所述的设备，其中所述指令能执行以用于：
至少部分地基于所述至少一个对象的类别来建立所述关联性。
19.一种方法，其包括：
接收不是计算机游戏输入信号的至少一个指示信号；至少部分地基于所述指示信号，确定所述玩家的注意力；
使所述玩家的所述注意力与计算机游戏中的至少一个对象关联以建立关联性；以及使用所述关联性来更改所述计算机游戏的呈现。
20.如权利要求19所述的方法，其包括：
使用所述关联性来确定以下中的至少一者：要呈现给所述玩家的游戏路径、要呈现给所述玩家的对话、玩家技能属性；以及
执行以下中的至少一者：向所述玩家呈现所述游戏路径、向所述玩家呈现所述对话、根据所述玩家技能属性更改与所述玩家相关联的技能。
CN201880055440.3A 2017-09-12 2018-08-21 基于注意力的玩家选择ai确定 Pending CN111052192A (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US15/702,483 US11351453B2 (en) 2017-09-12 2017-09-12 Attention-based AI determination of player choices
US15/702,483 2017-09-12
PCT/US2018/047187 WO2019055175A1 (en) 2017-09-12 2018-08-21 DETERMINATION BY ARTIFICIAL INTELLIGENCE (IA) BASED ON THE ATTENTION OF PLAYER CHOICE

Publications (1)

Publication Number Publication Date
CN111052192A true CN111052192A (zh) 2020-04-21

Family

ID=65630323

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201880055440.3A Pending CN111052192A (zh) 2017-09-12 2018-08-21 基于注意力的玩家选择ai确定

Country Status (5)

Country Link
US (2) US11351453B2 (zh)
EP (1) EP3655932A4 (zh)
JP (1) JP2020532352A (zh)
CN (1) CN111052192A (zh)
WO (1) WO2019055175A1 (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112016952A (zh) * 2019-05-28 2020-12-01 索尼互动娱乐有限责任公司 参与度相关性模型离线评估度量

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11625311B2 (en) * 2019-06-17 2023-04-11 Beseeq User interaction for determining attention

Citations (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101890237A (zh) * 2010-07-16 2010-11-24 叶尔肯·拜山 游戏控制器及其控制方法
CN102160080A (zh) * 2008-07-22 2011-08-17 索尼在线娱乐有限公司 用于在仿真中进展角色能力的系统和方法
CN102160081A (zh) * 2008-07-22 2011-08-17 索尼在线娱乐有限公司 用于自明式多用户内容的系统和方法
CN102663245A (zh) * 2012-03-30 2012-09-12 福建天趣网络科技有限公司 3d游戏世界编辑器
CN202682765U (zh) * 2012-06-08 2013-01-23 南昌布理安信息技术有限公司 便携式脑电波控制眼镜娱乐装置
CN103096987A (zh) * 2010-09-09 2013-05-08 科乐美数码娱乐株式会社 游戏系统
US20140176813A1 (en) * 2012-12-21 2014-06-26 United Video Properties, Inc. Systems and methods for automatically adjusting audio based on gaze point
CN104035702A (zh) * 2013-03-06 2014-09-10 腾讯科技（深圳）有限公司 一种防止智能终端误操作的方法和智能终端
US20150012827A1 (en) * 2013-03-13 2015-01-08 Baback Elmeih System and method for navigating a field of view within an interactive media-content item
CN104436640A (zh) * 2014-09-01 2015-03-25 李春锋 分析眼睛的水平角度来控制游戏
CN204952235U (zh) * 2015-07-22 2016-01-13 陈飞 一种用于情境模拟训练/游戏的头盔
CN105324738A (zh) * 2013-06-07 2016-02-10 索尼电脑娱乐公司 在头戴式显示器中切换操作模式
CN106527702A (zh) * 2016-11-03 2017-03-22 网易（杭州）网络有限公司 虚拟现实的交互方法及装置
US20170182414A1 (en) * 2015-12-29 2017-06-29 Bandai Namco Entertainment Inc. Game device, processing method, and information storage medium
WO2017112133A1 (en) * 2015-12-21 2017-06-29 Sony Interactive Entertainment Inc. Game controller with lights visible inside and outside the game controller
CN106924970A (zh) * 2017-03-08 2017-07-07 网易（杭州）网络有限公司 虚拟现实系统、基于虚拟现实的信息显示方法及装置

Family Cites Families (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6152563A (en) 1998-02-20 2000-11-28 Hutchinson; Thomas E. Eye gaze direction tracker
JP2001149653A (ja) * 1999-11-25 2001-06-05 Namco Ltd ゲーム装置、経路選択方法および情報記憶媒体
US7815507B2 (en) * 2004-06-18 2010-10-19 Igt Game machine user interface using a non-contact eye motion recognition device
US9250703B2 (en) * 2006-03-06 2016-02-02 Sony Computer Entertainment Inc. Interface with gaze detection and voice input
WO2010118292A1 (en) * 2009-04-09 2010-10-14 Dynavox Systems, Llc Calibration free, motion tolerant eye-gaze direction detector with contextually aware computer interaction and communication methods
US9507418B2 (en) * 2010-01-21 2016-11-29 Tobii Ab Eye tracker based contextual action
US8643680B2 (en) * 2011-04-08 2014-02-04 Amazon Technologies, Inc. Gaze-based content display
WO2013033842A1 (en) 2011-09-07 2013-03-14 Tandemlaunch Technologies Inc. System and method for using eye gaze information to enhance interactions
US9176581B2 (en) * 2012-09-28 2015-11-03 Intel Corporation System and method for inferring user intent based on eye movement during observation of a display screen
US10048748B2 (en) * 2013-11-12 2018-08-14 Excalibur Ip, Llc Audio-visual interaction with user devices
US9459451B2 (en) * 2013-12-26 2016-10-04 Microsoft Technology Licensing, Llc Eye tracking apparatus, method and system
JP6851133B2 (ja) 2014-01-03 2021-03-31 ハーマン インターナショナル インダストリーズ インコーポレイテッド ユーザに方向付けられた個人情報アシスタント
US20150199030A1 (en) 2014-01-10 2015-07-16 Microsoft Corporation Hover-Sensitive Control Of Secondary Display
US9442631B1 (en) * 2014-01-27 2016-09-13 Google Inc. Methods and systems for hands-free browsing in a wearable computing device
US20160232399A1 (en) 2014-04-08 2016-08-11 Umoove Services Ltd. System and method of detecting a gaze of a viewer
US10424103B2 (en) 2014-04-29 2019-09-24 Microsoft Technology Licensing, Llc Display device viewer gaze attraction
US10650644B2 (en) * 2014-05-30 2020-05-12 Igt Canada Solutions Ulc Systems, methods and devices for moving game components in gaming systems
JP6691351B2 (ja) * 2015-03-31 2020-04-28 株式会社バンダイナムコエンターテインメント プログラム及びゲームシステム
US9773372B2 (en) * 2015-12-11 2017-09-26 Igt Canada Solutions Ulc Enhanced electronic gaming machine with dynamic gaze display
JP6712865B2 (ja) 2016-01-27 2020-06-24 株式会社コーエーテクモゲームス 情報処理装置、設定画面表示方法及び設定画面表示プログラム
US10678327B2 (en) * 2016-08-01 2020-06-09 Microsoft Technology Licensing, Llc Split control focus during a sustained user interaction
US10444987B2 (en) * 2016-12-19 2019-10-15 Microsoft Technology Licensing, Llc Facilitating selection of holographic keyboard keys

Patent Citations (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102160080A (zh) * 2008-07-22 2011-08-17 索尼在线娱乐有限公司 用于在仿真中进展角色能力的系统和方法
CN102160081A (zh) * 2008-07-22 2011-08-17 索尼在线娱乐有限公司 用于自明式多用户内容的系统和方法
CN101890237A (zh) * 2010-07-16 2010-11-24 叶尔肯·拜山 游戏控制器及其控制方法
CN103096987A (zh) * 2010-09-09 2013-05-08 科乐美数码娱乐株式会社 游戏系统
CN102663245A (zh) * 2012-03-30 2012-09-12 福建天趣网络科技有限公司 3d游戏世界编辑器
CN202682765U (zh) * 2012-06-08 2013-01-23 南昌布理安信息技术有限公司 便携式脑电波控制眼镜娱乐装置
US20140176813A1 (en) * 2012-12-21 2014-06-26 United Video Properties, Inc. Systems and methods for automatically adjusting audio based on gaze point
CN104035702A (zh) * 2013-03-06 2014-09-10 腾讯科技（深圳）有限公司 一种防止智能终端误操作的方法和智能终端
US20150012827A1 (en) * 2013-03-13 2015-01-08 Baback Elmeih System and method for navigating a field of view within an interactive media-content item
CN105324738A (zh) * 2013-06-07 2016-02-10 索尼电脑娱乐公司 在头戴式显示器中切换操作模式
CN104436640A (zh) * 2014-09-01 2015-03-25 李春锋 分析眼睛的水平角度来控制游戏
CN204952235U (zh) * 2015-07-22 2016-01-13 陈飞 一种用于情境模拟训练/游戏的头盔
WO2017112133A1 (en) * 2015-12-21 2017-06-29 Sony Interactive Entertainment Inc. Game controller with lights visible inside and outside the game controller
US20170182414A1 (en) * 2015-12-29 2017-06-29 Bandai Namco Entertainment Inc. Game device, processing method, and information storage medium
CN106924966A (zh) * 2015-12-29 2017-07-07 株式会社万代南梦宫娱乐 游戏装置以及处理方法
CN106527702A (zh) * 2016-11-03 2017-03-22 网易（杭州）网络有限公司 虚拟现实的交互方法及装置
CN106924970A (zh) * 2017-03-08 2017-07-07 网易（杭州）网络有限公司 虚拟现实系统、基于虚拟现实的信息显示方法及装置

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112016952A (zh) * 2019-05-28 2020-12-01 索尼互动娱乐有限责任公司 参与度相关性模型离线评估度量

Also Published As

Publication number Publication date
US11351453B2 (en) 2022-06-07
EP3655932A4 (en) 2021-04-21
JP2020532352A (ja) 2020-11-12
US20190076736A1 (en) 2019-03-14
EP3655932A1 (en) 2020-05-27
WO2019055175A1 (en) 2019-03-21
US20220258045A1 (en) 2022-08-18

Similar Documents

Publication Publication Date Title
US11287880B2 (en) Privacy chat trigger using mutual eye contact
US10967260B2 (en) Method for improving game streaming performance in the cloud
US11541317B2 (en) Automated weapon selection for new players using AI
US20220258045A1 (en) Attention-based ai determination of player choices
US11395970B2 (en) Simulation shuffle play
EP3676782A1 (en) Intelligent tv startup based on consumer behavior and real time content availability
US11402917B2 (en) Gesture-based user interface for AR and VR with gaze trigger
US11103794B2 (en) Post-launch crowd-sourced game qa via tool enhanced spectator system
WO2021091799A1 (en) Adaptive time dilation based on player performance
JP2020500569A (ja) エミュレーションによるリマスタリング
US11474620B2 (en) Controller inversion detection for context switching
US11553020B2 (en) Using camera on computer simulation controller
JP7462069B2 (ja) 複数のカメラからの合成入力を使用してビデオを生成するための仮想カメラ位置のユーザ選択
US11771993B2 (en) Changing response window for interactive content using user's reaction time
US20210129033A1 (en) Spectator feedback to game play
US20210121784A1 (en) Like button

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
TA01 Transfer of patent application right

Effective date of registration: 20200601

Address after: California, USA

Applicant after: SONY INTERACTIVE ENTERTAINMENT LLC

Address before: California, USA

Applicant before: SONY COMPUTER ENTERTAINMENT AMERICA LLC

TA01 Transfer of patent application right