CN105700675A - 玩视频游戏触觉 - Google Patents

玩视频游戏触觉 Download PDF

Info

Publication number
CN105700675A
CN105700675A CN201510747293.4A CN201510747293A CN105700675A CN 105700675 A CN105700675 A CN 105700675A CN 201510747293 A CN201510747293 A CN 201510747293A CN 105700675 A CN105700675 A CN 105700675A
Authority
CN
China
Prior art keywords
track
sense
video
game
record
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201510747293.4A
Other languages
English (en)
Inventor
W·S·莱茵
D·M·伯恩鲍姆
R·W·休贝尔
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Immersion Corp
Original Assignee
Immersion Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Immersion Corp filed Critical Immersion Corp
Publication of CN105700675A publication Critical patent/CN105700675A/zh
Pending legal-status Critical Current

Links

Classifications

    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/25—Output arrangements for video game devices
    • A63F13/28—Output arrangements for video game devices responding to control signals received from the game device for affecting ambient conditions, e.g. for vibrating players' seats, activating scent dispensers or affecting temperature or light
    • A63F13/285—Generating tactile feedback signals via the game input device, e.g. force feedback
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/20—Input arrangements for video game devices
    • A63F13/21—Input arrangements for video game devices characterised by their sensors, purposes or types
    • A63F13/211—Input arrangements for video game devices characterised by their sensors, purposes or types using inertial sensors, e.g. accelerometers or gyroscopes
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/20—Input arrangements for video game devices
    • A63F13/21—Input arrangements for video game devices characterised by their sensors, purposes or types
    • A63F13/218—Input arrangements for video game devices characterised by their sensors, purposes or types using pressure sensors, e.g. generating a signal proportional to the pressure applied by the player
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/40—Processing input control signals of video game devices, e.g. signals generated by the player or derived from the environment
    • A63F13/42—Processing input control signals of video game devices, e.g. signals generated by the player or derived from the environment by mapping the input signals into game commands, e.g. mapping the displacement of a stylus on a touch screen to the steering angle of a virtual vehicle
    • A63F13/428—Processing input control signals of video game devices, e.g. signals generated by the player or derived from the environment by mapping the input signals into game commands, e.g. mapping the displacement of a stylus on a touch screen to the steering angle of a virtual vehicle involving motion or position input signals, e.g. signals representing the rotation of an input controller or a player's arm motions sensed by accelerometers or gyroscopes
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/45—Controlling the progress of the video game
    • A63F13/49—Saving the game status; Pausing or ending the game
    • A63F13/497—Partially or entirely replaying previous game actions
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/10—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by input arrangements for converting player-generated signals into game device control signals
    • A63F2300/1037—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by input arrangements for converting player-generated signals into game device control signals being specially adapted for converting control signals received from the game device into a haptic signal, e.g. using force feedback
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/50—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by details of game servers
    • A63F2300/55—Details of game data or player data management
    • A63F2300/5526—Game data structure
    • A63F2300/554—Game data structure by saving game or status data
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/60—Methods for processing data by generating or executing the game program
    • A63F2300/63—Methods for processing data by generating or executing the game program for controlling the execution of the game in time
    • A63F2300/634—Methods for processing data by generating or executing the game program for controlling the execution of the game in time for replaying partially or entirely the game actions since the beginning of the game

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Human Computer Interaction (AREA)
  • User Interface Of Digital Computer (AREA)
  • Signal Processing (AREA)

Abstract

本发明涉及玩视频游戏触觉。一种视频游戏系统记录由与诸如游戏控制器之类的终端交互的玩家玩视频游戏。所述记录包括记录在玩游戏期间在终端上生成的触觉效果的触觉轨迹并且记录在玩游戏期间生成的视频的视频轨迹。所述记录还包括将触觉轨迹与视频轨迹一起编码。

Description

玩视频游戏触觉
技术领域
一个实施例一般针对触觉效果，并且特别针对用于玩视频游戏的触觉效果。
背景技术
许多视频游戏玩家希望与别人以视频形式重温或共享他们的游戏成就和体验。例如，在联机视频服务可用的玩游戏画面存在许多突出技巧或有意思的差错的印象深刻的显示以及合并有玩游戏画面的艺术片段的视频。获得这样的画面的最容易可用的方法是玩家从他们具有摄像机的电视中记录视频图像，该过程可能大大地遭受捕获质量问题和环境噪声。屏幕捕获软件还可以用来捕获玩游戏的音频和视频。
但是，新近引进的视频游戏控制台已经增加重放记录和回放工具，包括与其他用户共享记录的重放。例如，来自索尼公司的“PlayStationPS4”系统允许用户联机上传并且共享游戏活动的截图或视频，以及联机广播/流化用户的玩游戏。诸如“Twitch”之类的联机平台统一许多记录或流化的玩游戏视频，并且甚至提供视频玩家之间的玩游戏比赛，它们被流化以便为付费观众直播。
发明内容
一个实施例是由与诸如游戏控制器之类的终端交互的玩家记录视频游戏的视频游戏系统。该记录包括在玩游戏期间记录在终端上生成的触觉效果的触觉轨迹并且记录在玩游戏期间生成的视频的视频轨迹。该记录还包括利用视频轨迹编码触觉轨迹。
附图说明
图1是可以实施本发明的实施例的系统的方框图。
图2是根据实施例的当在玩视频游戏期间捕获触觉输入、并且回放捕获的触觉输入时的图1的系统的功能的流程图。
图3是根据实施例的当解码先前编码的用于回放的触觉轨迹时图1的系统的功能的流程图。
具体实施方式
一个实施例捕获在玩视频游戏期间生成的触觉效果，并且然后在观看玩视频游戏时回放触觉效果，即或者在游戏期间经由流化“直播”、或者在稍后的时间回放。此外，另一实施例由玩家在玩视频游戏期间捕获姿势和用户输入，并且在直播或稍后时间观看玩视频游戏时以触觉效果的形式回放那些姿势和用户输入。因此，观看者可以在回放期间体验由玩家或“游戏者”在玩游戏期间感受到的触觉效果，和/或观看者可以“感受”由游戏者在玩游戏期间提供的输入和姿势。触觉效果可以在最初生成效果的相同终端/外部设备(例如，游戏控制器)上被回放，或被转化用于在不同类型的终端上回放。
图1是可以实施本发明的实施例的系统10的方框图。系统10包括经由可以是有线或无线的通信链路与终端80耦接的服务器70。如图1所示，终端80可以是视频游戏控制器，或是可以连同视频游戏生成触觉效果的任何类型的设备。服务器70可以是实施这里公开的功能的任何处理设备。
系统10包括总线12或用于传递信息的其他通信机构，和与总线12耦接的用于处理信息的处理器/控制器22。处理器22可以是任何类型的一般或特定目的处理器。系统10还包括用于存储信息和由处理器22执行的指令的存储器14。存储器14可以由随机存取存储器(“RAM”)、只读存储器(“ROM”)、诸如磁盘或光盘之类的静态存储器、或任何其他类型的计算机可读介质的任何组合组成。
计算机可读介质可以是可以由处理器22访问的任何可用的介质并且可以包括易失和非易失介质、可移动和不可移动的介质、通信介质、和存储介质。通信介质可以包括计算机可读指令、数据结构、程序模块或诸如载波或其他传送机构之类的已调数据信号中的其他数据，并且可以包括在本领域已知的信息传递介质的任何其他形式。存储介质可以包括RAM、闪速存储器、ROM、可擦可编程只读存储器(“EPROM”)、电可擦可编程只读存储器(“EEPROM”)、寄存器、硬盘、可移动盘、高密度盘只读存储器(“CD-ROM”)、或在本领域已知的存储介质的任何其他形式。
在一个实施例中，存储器14存储在由处理器22执行时提供功能的软件模块。模块包括为系统10提供操作系统功能的操作系统15。模块还包括以下更详细地公开的连同视频游戏记录和/或播放触觉效果的玩游戏触觉记录/播放模块16。系统10一般将包括提供附加功能的一个或多个附加应用模块18，诸如Immersion公司的HapticStudioTM软件，或视频游戏相关的软件。
系统10还包括提供诸如红外、无线电、Wi-Fi、或蜂窝网络通信之类的移动无线网络通信的诸如网络接口卡之类的通信设备20。在其他实施例中，通信设备20提供诸如以太网连接或调制解调器之类的有线网络连接。通信设备20使终端80能与服务器70可通信地耦接，并且可通信地将服务器70连接到诸如因特网90之类的外部网络。
在一个实施例中，终端80是包括已知用户接口设备的游戏控制器，诸如按钮、减震器、操纵杆、触发器、方向板、驱动轮，等。终端80包括与一个或多个驱动电路86耦接的一个或多个触觉输出设备88。终端80还包括当视频游戏玩家与终端80交互时感应姿势(诸如推按钮、挤压触发器等)的姿势传感器81。
触觉输出设备88可以是生成触觉效果的任何类型的设备。在一个实施例中，触觉输出设备88是生成振动类型的触觉效果的致动器。被用于此目的的致动器可以包括诸如其中由电动机移动偏心质量的偏心旋转质量(“ERM”)之类的电磁致动器、其中附着于弹簧的质量被前后驱动的线性共振致动器(“LRA”)、或诸如压电、电活性聚合体或形状记忆合金之类的“智能材料”。触觉输出设备88也可以是诸如静电摩擦(“ESF”)设备或超声表面摩擦(“USF”)设备之类的设备、或包括利用超声触觉传感器引导声辐射压力的设备。其他设备可以使用触觉基底和柔性或可变形表面，并且设备可以提供诸如利用空气喷射的喷气之类的发射的触觉输出等。
触觉输出设备88还可以是使得终端80的用户接口“移动”或生成触觉效果以便在与终端80相同或类似的终端上模仿玩家的物理交互的任何类型的设备。例如，如果玩家按游戏控制器上的按钮，则终端80将以相同类型或类似游戏控制器的形式使得一个它的按钮通过使用诸如电动机之类的触觉输出设备88被类似地按压。
如上所述，终端80可以是游戏控制器或诸如蜂窝式电话、个人数字助理(“PDA”)、智能电话、计算机平板、游戏控制台等等之类的任何类型的外围设备、手持设备、或移动设备，或可以是提供用户接口并且包括具有一个或多个触觉输出设备的触觉效果系统的任何其他类型的设备。除了按钮、操纵杆等之外，用户接口可以是触敏表面，或终端80可以是当被物理操作时生成触觉效果的柔性/可弯曲的设备，在这样情况下“用户接口”是设备本身的柔性/可弯曲的部分。
处理器22向驱动电路86输出控制信号，驱动电路86包括用于为触觉输出设备88提供生成期望的触觉效果需要的电流和电压(即，“电动机信号”)的电子器件和电路。
虽然终端80和服务器70在图1中显示为分离的系统，但是终端80和服务器70可以被合并成物理单个系统，或图1所示的任何功能可以与终端80分离或被包括在终端80之内。
对于在玩游戏期间生成触觉效果的视频游戏，诸如振动之类的各种触觉效果一般将在游戏控制器上生成。在一个实施例中，由视频游戏玩家或“游戏者”“感受到的”这些触觉效果被记录以使得它们可以在玩游戏视频期间被回放。因此，当玩游戏视频的“观看者”握住类似的游戏控制器时，可以感受到由游戏者感受到的触觉效果。在另一个实施例中，在玩游戏期间，玩家的输入(即，与玩家的游戏控制器的交互，诸如推按钮，等)被记录以使得它们可以在玩游戏视频期间被回放。
此外，记录的触觉效果可以在玩视频游戏期间被回放。在一个实施例中，回放使得在观看者正在握住由玩家使用的相同或不同的终端时观看者感受到由玩家感受的相同触觉效果。因此，已经实施触觉效果的视频游戏可以向正在观看的观看者镜像/捕获那些触觉效果，同时适应观看者在观看会话期间具有的任何适用的外部设备。
在另一个实施例中，回放使得观看者感受到玩家在玩游戏时与终端的交互，以使得观看者感受玩家所做的而不是玩家所感受的。这可以对辅导/学习是有用的。
图2是根据实施例的当在玩视频游戏期间捕获触觉输入、并且回放捕获的触觉输入时的图1的系统10的功能的流程图。在一个实施例中，由保存在存储器或其他计算机可读的或有形的介质中、并且由处理器执行的软件实施图2(和以下的图3)的流程图的功能。在其他实施例中，可以由硬件(例如，通过使用专用集成电路(“ASIC”)、可编程门阵列(“PGA”)、现场可编程门阵列(“FPGA”)，等)、或任何硬件和软件的组合执行功能。可以由图1的相同系统10、或由图1的不同系统10(例如，一个系统10用于记录触觉效果，不同的系统10用于回放触觉效果)执行图2和3的功能。
在201处，玩游戏触觉效果捕获开始。玩游戏触觉效果捕获的启动可以与音频/视频玩游戏捕获同时发生并且重合。启动可以响应于从玩家的输入开始，可以在玩游戏发生时一直自动地启动，诸如在整个玩游戏期间或在滚动窗口期间(例如，玩游戏的前五分钟将总是被记录并且可用)、或使用任何已知的启动方法。在一个实施例中，启动在游戏中的显著事件期间自动地发生，诸如当玩家被“杀”时。
在202处，在一个实施例中，记录玩家感受的触觉效果。对于诸如具有许多类型的触觉输出设备88的图1的游戏控制器80之类的游戏控制器，在多位置中，记录的触觉效果将包括每个触觉输出设备的身份/位置，和由输出设备生成的触觉效果。记录的触觉效果可以基于它从外部处理器或诸如游戏控制台(例如，游戏控制台70)之类的设备收到的触觉命令被记录在控制器内，或记录的触觉效果可以基于由内容或游戏生成的触觉命令被记录在控制台内。
触觉效果可以被记录为包括触觉参数的触觉效果信号。通常，定义特定触觉效果的高等级参数包括量值、频率和持续时间。诸如流化电动机命令之类的低等级参数还可以用来确定特定的触觉效果。如果触觉效果包括当生成触觉效果时这些参数的一些变化或基于用户的交互的这些参数的变化，则触觉效果可以被认为是“动态的”。方向性可以是另一参数，诸如触发器是推出还是拉进。其他参数可以与效果的包络有关，诸如攻击和衰退的长度/速率。
在203处，在另一实施例中，或作为与202的触觉轨迹分离的触觉轨迹，记录的触觉效果基于玩家的输入交互。姿势传感器81感应玩家与终端80的交互，诸如推按钮、挤压触发器、按游戏板、控制器的运动或定向等。感应可以包括交互的力、交互的频率/定时，等。感应数据被转换为将在回放期间在另一终端80上模拟玩家交互的对应的触觉效果。
在202或203处的记录(或者在其他实施例中，可以做出两个类型的记录)之后，在204处记录的触觉效果以每个触觉输出设备的触觉轨迹的形式和/或针对202和203的单独轨迹的形式被编码/组合。在一个实施例中，对于回放终端中的每个触觉输出设备，将生成单独的触觉效果轨迹。触觉效果轨迹可以根据将被用来回放的预期的触觉输出设备的类型/性质而变化。在一些实施例中，诸如当使用同样的游戏控制器时，在回放终端上的触觉输出设备将与在记录终端上的对应触觉输出设备相同。在其他实施例中，当使用不同的终端时，触觉输出设备的数目/类型/位置等等可以在两个终端之间不同。
例如，记录游戏玩家推按钮或拉触发器可以生成针对观看者的控制器生成的将拉进和推出按钮/触发器的触觉效果，使得输入作为触觉效果。如果用足够的力、速度、或最大抛掷来压按钮，则效果可以为观看者呈现拉和推二者。但是，如果轻轻地拉或按触发器/按钮，则它仅仅可以在一个方向呈现效果以进一步向观看者说明施加于按钮/触发器上的力。
结合204，在205处玩游戏玩家可以在结束前的“生产后”时间段修改/移除任何捕获的触觉效果或插入新的触觉效果。玩家可以增加的效果可以上下文地基于捕获的效果、游戏/风格的类型、解锁的成绩/奖励、和记录的游戏活动。例如，可能不会是跨越交战地带增加奔腾的小马的选项，因为这不会符合游戏的上下文。
在206处，使用已知的编码方法将触觉轨迹或轨迹与音频/视频轨迹一起编码。因此，触觉轨迹的定时将与音频/视频轨迹同步。
在207处，对于将包括触觉/音频/视频轨迹的玩游戏的回放，确定启用触觉的回放设备与记录的轨迹的兼容性。如果回放设备与记录设备相同，则实现100％的兼容性。但是，在其他情况中，回放设备将不同于记录设备。这种差别可以包括触觉输出设备的数目/类型/位置/等。不同类型的设备可以包括致动器是否能够有多个方向或多个频率，或致动器是否可以被安装在设备中(例如，与调节参数有关)。
在208处，结合207，确定回放设备与在记录设备中或在原始记录的轨迹中参考的致动器相比是否具有较少或不同的致动器。
如果在208处为是，则在回放期间，解码触觉轨迹的向下混合，如结合图3更详细地公开的。
如果否，则在210处，在回放期间，解码合适的触觉轨迹，如结合图3更详细地公开的。
虽然图2描述了随着玩游戏对触觉效果的“自动”记录，但是在其他实施例中，可以使用触觉创造工具人工地增加触觉效果。游戏可以具有与可以被增加到捕获的玩游戏的触觉效果关联的预置标记、标签、图标、动画等等。可替换地，它们可以如以上公开的被置于上下文中考虑。另外，游戏可以使玩家能够在隔离环境中执行特定的游戏功能以捕获音频、视觉、或触觉效果以在生产后容量中增加。
图3是根据实施例的当解码先前编码的用于回放的触觉轨迹时图1的系统10的功能的流程图。
在301处，接收编码的触觉轨迹。触觉轨迹可以已经结合图2描述被编码。
在302处，确定作为触觉轨迹的源的致动器、或触觉输出设备。在由玩家感受到触觉效果的实施例中，确定每个触觉输出设备的类型/位置/等。对于玩家的输入被记录的实施例，接收玩家的输入的接口的类型/位置/等被记录(例如，左按钮、右触发器，等)。
在303处，确定回放设备的致动器或触觉输出设备的类型/位置/等。
在304处，确定触觉输出设备是否是相同的。在大部分环境中，在304处只有当回放设备和记录设备是诸如相同类型的游戏控制器之类的相同类型的设备时它们将是相同的。
如果在304处为是，则在305处解码触觉轨迹并且在玩游戏视频期间与源音频/视频轨迹一起播放源触觉轨迹。
如果在304处为否，则在306处确定触觉输出设备的数目/类型/位置方面的回放设备的能力。
在307处，调制触觉轨迹以适应在306处确定的能力。可以用多种方式确定触觉轨迹的调制。在一个实施例中，它可以基于频率。例如，如果在具有与回放致动器类似工作频率的致动器上创建源触觉效果，则与当回放致动器与源相比具有大大不同的工作频率时相比，可以非常小地修改信号。此外，为多频能力的致动器设计的轨迹可以具有效果分割并且被路由到在多致动器设备(没有与原材料一致的致动器)中的适合频率的致动器。
也可以由致动器响应时间调制效果。例如，触发致动器可以具有快速响应时间并且可以直接很好地转化为LRA。但是，触发效果信号将需要从周期性的类似间隔的效果变化到用于特定的低ERM致动器的不间断信号效果，反之亦然。
在308处，解码源触觉轨迹。
在309处，呈现并且播放新的轨迹。
在一个实施例中，触觉轨迹包括时间线、和在时间线上的各种点处的指示在那时应该不生成或应该生成触觉效果的“空”信号或触觉信号。在另一个实施例中，触觉轨迹指定播放特定触觉效果的特定时间，如由预存的触觉效果信号、或实际触觉效果信号的身份识别。
如公开的，实施例记录结合玩视频游戏的音频/视频轨迹的触觉轨迹。在一个实施例中，用户记录并不具有触觉的玩游戏视频。用户能因此采用触觉创造工具来向视频增加触觉效果。
在另一个实施例中，用户记录玩游戏视频，其也基于由游戏生成的触觉效果记录触觉轨迹。此触觉轨迹将感受相同(如果观看者握住相同的外部设备)，或可能被简化用于其他致动器。
在另一个实施例中，用户记录玩游戏视频并且在玩家玩游戏期间基于用户的输入生成触觉轨迹。如果玩家将使用相同的能启用触觉的外部设备，则他们将感受玩家在玩游戏时按的按钮。否则，触觉效果可以被修改用于不同的致动器。
在另一个实施例中，用户在实况播送的视频游戏联赛中玩游戏。观看者能因此启动触觉以感受到玩家(取决于他们把照相机锁定在谁上)实时按压的事物。
在另一个实施例中，用户在实况播送的视频游戏中玩游戏。观看者在使用相同的外部设备或用于备用致动器的简化轨迹时可以感受到与玩家相同的效果。
在另一个实施例中，提供局部化的效果流(来自玩游戏和玩家输入)。例如，诸如由游戏的观察者本地握住的那些之类的其他游戏控制器可以感受到与游戏玩家相同的触觉效果。
如公开的，实施例允许在游戏期间生成的触觉效果的记录，或在玩游戏期间施加的玩家输入的记录。因此，在玩游戏的回放期间，或在玩游戏的“直播”期间，观看者可以感受到由玩家感受到的相同的触觉效果，或可以感受到由玩家施加的输入。
这里明确地示出和/或描述若干实施例。但是，将理解上述教导涵盖对公开的实施例的修改和变化并且在没有脱离发明的精神和预定范围的情况下涵盖在在附加权利要求的范围之内。

Claims (22)

1.一种对与第一终端交互的玩家玩视频游戏进行记录的方法，所述方法包括：
记录在玩游戏期间在第一终端上生成的触觉效果的第一触觉轨迹；
记录在玩游戏期间生成的视频的视频轨迹；以及
将第一触觉轨迹与视频轨迹一起编码。
2.如权利要求1所述方法，其中所述触觉效果由至少一个触觉输出设备生成，并且所记录的第一触觉轨迹包括所述触觉输出设备的身份。
3.如权利要求2所述的方法，其中所述第一终端包括触觉输出设备。
4.如权利要求1所述方法，还包括：
记录在玩游戏期间生成的音频的音频轨迹；以及
将音频轨迹与第一触觉轨迹和视频轨迹一起编码。
5.如权利要求1所述方法，还包括：
记录在玩游戏期间所述玩家在第一终端上的输入交互的第二触觉轨迹；以及
将第二触觉轨迹与第一触觉轨迹和视频轨迹一起编码。
6.如权利要求5所述的方法，其中所述第一终端包括游戏控制器，并且所述输入交互包括与按钮、触发器、减震器、操纵杆或方向板中的至少一个的物理交互。
7.如权利要求1所述方法，还包括确定第二终端是否与所述第一终端相同。
8.如权利要求1所述方法，还包括解码所述编码的轨迹并且当向观看者播放所述玩游戏时在第二终端上播放所述第一触觉轨迹。
9.一种计算机可读介质，在其上存储有指令，所述指令当由处理器执行时使得处理器对与第一终端交互的玩家玩视频游戏进行记录，所述记录包括：
记录在玩游戏期间在第一终端上生成的触觉效果的第一触觉轨迹；
记录在玩游戏期间生成的视频的视频轨迹；以及
将第一触觉轨迹与视频轨迹一起编码。
10.如权利要求9所述计算机可读介质，其中所述触觉效果由至少一个触觉输出设备生成，并且所记录的第一触觉轨迹包括所述触觉输出设备的身份。
11.如权利要求10所述的计算机可读介质，其中所述第一终端包括触觉输出设备。
12.如权利要求9所述的计算机可读介质，所述记录还包括：
记录在玩游戏期间生成的音频的音频轨迹；以及
将音频轨迹与第一触觉轨迹和视频轨迹一起编码。
13.如权利要求9所述的计算机可读介质，所述记录还包括：
记录在玩游戏期间所述玩家在第一终端上的输入交互的第二触觉轨迹；以及
将第二触觉轨迹与第一触觉轨迹和视频轨迹一起编码。
14.如权利要求13所述的计算机可读介质，其中所述第一终端包括游戏控制器，并且所述输入交互包括与按钮、触发器、减震器、操纵杆或方向板中的至少一个的物理交互。
15.如权利要求9所述的计算机可读介质，所述记录还包括确定第二终端是否与第一终端相同。
16.如权利要求9所述的计算机可读介质，所述记录还包括解码所编码的轨迹并且当向观看者播放所述玩游戏时在第二终端上播放所述第一触觉轨迹。
17.一种视频游戏系统，包括：
处理器；
与处理器耦接并且存储由处理器执行以记录玩视频游戏的指令的存储设备；
与处理器耦接的游戏控制器；
其中记录玩视频游戏包括：
记录在玩游戏期间在第一终端上生成的触觉效果的第一触觉轨迹；
记录在玩游戏期间生成的视频的视频轨迹；以及
将第一触觉轨迹与视频轨迹一起编码。
18.如权利要求17所述视频游戏系统，其中所述触觉效果由游戏控制器上的至少一个触觉输出设备生成，并且所记录的第一触觉轨迹包括所述触觉输出设备的身份。
19.如权利要求17所述的视频游戏系统，所述记录还包括：
记录在玩游戏期间生成的音频的音频轨迹；以及
将音频轨迹与第一触觉轨迹和视频轨迹一起编码。
20.如权利要求17所述的视频游戏系统，所述记录还包括：
记录在玩游戏期间所述玩家在游戏控制器上的输入交互的第二触觉轨迹；以及
将第二触觉轨迹与第一触觉轨迹和视频轨迹一起编码。
21.如权利要求20所述的视频游戏系统，其中所述输入交互包括与按钮、触发器、减震器、操纵杆或方向板中的至少一个的物理交互。
22.如权利要求20所述的视频游戏系统，所述处理器还解码所编码的轨迹并且当向观看者播放所述玩游戏时在第二游戏控制器上播放所述第一触觉轨迹。
CN201510747293.4A 2014-12-11 2015-11-06 玩视频游戏触觉 Pending CN105700675A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US14/567,174 2014-12-11
US14/567,174 US9919208B2 (en) 2014-12-11 2014-12-11 Video gameplay haptics

Publications (1)

Publication Number Publication Date
CN105700675A true CN105700675A (zh) 2016-06-22

Family

ID=54360842

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201510747293.4A Pending CN105700675A (zh) 2014-12-11 2015-11-06 玩视频游戏触觉

Country Status (5)

Country Link
US (2) US9919208B2 (zh)
EP (2) EP3031502B1 (zh)
JP (1) JP6614929B2 (zh)
KR (1) KR20160071314A (zh)
CN (1) CN105700675A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110113644A (zh) * 2019-05-09 2019-08-09 贵阳动视云科技有限公司 一种录制视频的方法及装置

Families Citing this family (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9919208B2 (en) 2014-12-11 2018-03-20 Immersion Corporation Video gameplay haptics
CN107615213A (zh) * 2015-04-21 2018-01-19 意美森公司 蚀刻输入的动态呈现
KR102512840B1 (ko) * 2015-10-15 2023-03-22 삼성전자주식회사 실행 화면 레코딩 방법 및 그 방법을 처리하는 전자 장치
US10275083B2 (en) 2017-09-20 2019-04-30 Alex Hamid Mani Assistive device with a refreshable haptic feedback interface
US11726571B2 (en) 2017-09-20 2023-08-15 Niki Mani Assistive device for non-visually discerning a three-dimensional (3D) real-world area surrounding a user
US10281983B2 (en) * 2017-09-20 2019-05-07 Alex Hamid Mani Haptic feedback device and method for providing haptic sensation based on video
US11513627B2 (en) 2017-09-20 2022-11-29 Niki Mani Assistive device with a refreshable haptic feedback interface
US11561619B2 (en) 2017-09-20 2023-01-24 Niki Mani Haptic feedback device and method for providing haptic sensation based on video
US10503310B2 (en) 2017-09-20 2019-12-10 Alex Hamid Mani Assistive device for non-visually discerning a three-dimensional (3D) real-world area surrounding a user
US20200076866A1 (en) * 2018-08-30 2020-03-05 Immersion Corporation Systems, devices, and methods for streaming haptic effects
CN109547723A (zh) * 2018-12-14 2019-03-29 北京智明星通科技股份有限公司 一种游戏视频录制方法、装置及终端
KR20200133127A (ko) * 2019-05-17 2020-11-26 한국전자기술연구원 실시간 몰입형 콘텐츠 제공 시스템 및 이의 햅틱 효과 전송 방법
CN113750520B (zh) * 2021-09-29 2024-06-11 维沃移动通信有限公司 手柄

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20090079690A1 (en) * 2007-09-21 2009-03-26 Sony Computer Entertainment America Inc. Method and apparatus for enhancing entertainment software through haptic insertion
CN102227694A (zh) * 2008-10-10 2011-10-26 因特网服务有限责任公司 供触觉编码的媒体使用的触觉输出装置
US20130260896A1 (en) * 2012-03-13 2013-10-03 Sony Computer Entertainment America Llc Sharing recorded gameplay to a social graph
JP2014121610A (ja) * 2012-12-21 2014-07-03 Sony Computer Entertainment America Llc 記録されたゲームプレーに基づくクラウドゲーミングのための、提案されたミニゲームの自動作成
CN104049749A (zh) * 2013-03-15 2014-09-17 英默森公司 产生来自视频内容分析的触觉反馈的方法和设备
US20140274297A1 (en) * 2013-03-15 2014-09-18 Electronic Arts, Inc. Systems and methods for generating a compilation reel in game video

Family Cites Families (44)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6703550B2 (en) * 2001-10-10 2004-03-09 Immersion Corporation Sound data output and manipulation using haptic feedback
US20060148571A1 (en) * 2005-01-04 2006-07-06 Electronic Arts Inc. Computer game with game saving including history data to allow for play reacquaintance upon restart of game
US20060277466A1 (en) * 2005-05-13 2006-12-07 Anderson Thomas G Bimodal user interaction with a simulated object
US8700791B2 (en) * 2005-10-19 2014-04-15 Immersion Corporation Synchronization of haptic effect data in a media transport stream
US7979146B2 (en) * 2006-04-13 2011-07-12 Immersion Corporation System and method for automatically producing haptic events from a digital audio signal
US8360847B2 (en) * 2006-11-13 2013-01-29 Igt Multimedia emulation of physical reel hardware in processor-based gaming machines
US8621348B2 (en) * 2007-05-25 2013-12-31 Immersion Corporation Customizing haptic effects on an end user device
US9317110B2 (en) * 2007-05-29 2016-04-19 Cfph, Llc Game with hand motion control
US9019087B2 (en) 2007-10-16 2015-04-28 Immersion Corporation Synchronization of haptic effect data in a media stream
US20130217491A1 (en) * 2007-11-02 2013-08-22 Bally Gaming, Inc. Virtual button deck with sensory feedback
US8992323B2 (en) * 2007-11-02 2015-03-31 Bally Gaming, Inc. Gesture enhanced input device
US8951121B2 (en) * 2012-09-28 2015-02-10 Bally Gaming, Inc. Multigame action button deck in a concurrent gaming system
CN102422244A (zh) * 2009-05-07 2012-04-18 伊梅森公司 用于提供触觉反馈形状变化显示器的方法和设备
US8882560B2 (en) * 2009-05-28 2014-11-11 Anki, Inc. Integration of a robotic system with one or more mobile computing devices
KR101993848B1 (ko) * 2009-07-22 2019-06-28 임머숀 코퍼레이션 플랫폼에 걸쳐 햅틱 피드백을 갖는 상호작용 터치 스크린 게임 메타포
JP2013500544A (ja) * 2009-07-24 2013-01-07 ディジマーク コーポレイション 改善された音声／映像の方法及びシステム
US20110185378A1 (en) * 2010-01-28 2011-07-28 Moses Johnson Systems For Rich Media Channel Distribution
US20120100910A1 (en) 2010-10-20 2012-04-26 Microsoft Corporation High quality video game replay
US20120112894A1 (en) * 2010-11-08 2012-05-10 Korea Advanced Institute Of Science And Technology Haptic feedback generator, portable device, haptic feedback providing method using the same and recording medium thereof
US8597093B2 (en) * 2010-12-16 2013-12-03 Nike, Inc. Methods and systems for encouraging athletic activity
US20120296812A1 (en) * 2011-05-16 2012-11-22 Piccionelli Gregory A Systems and processes for providing performance content on a communication network
US8949333B2 (en) * 2011-05-20 2015-02-03 Alejandro Backer Systems and methods for virtual interactions
US9058714B2 (en) * 2011-05-23 2015-06-16 Wms Gaming Inc. Wagering game systems, wagering gaming machines, and wagering gaming chairs having haptic and thermal feedback
JP5755943B2 (ja) 2011-06-03 2015-07-29 任天堂株式会社 情報処理プログラム、情報処理装置、情報処理システム及び情報処理方法
US9116555B2 (en) 2011-11-23 2015-08-25 Sony Computer Entertainment America Llc Gaming controller
US20130227409A1 (en) * 2011-12-07 2013-08-29 Qualcomm Incorporated Integrating sensation functionalities into social networking services and applications
US10013857B2 (en) * 2011-12-21 2018-07-03 Qualcomm Incorporated Using haptic technologies to provide enhanced media experiences
US20130198625A1 (en) * 2012-01-26 2013-08-01 Thomas G Anderson System For Generating Haptic Feedback and Receiving User Inputs
WO2013142518A1 (en) * 2012-03-19 2013-09-26 Jan Stelovsky Apparatus and methods for multimedia games
US9891709B2 (en) * 2012-05-16 2018-02-13 Immersion Corporation Systems and methods for content- and context specific haptic effects using predefined haptic effects
US20140004941A1 (en) * 2012-06-29 2014-01-02 Sony Computer Entertainment Inc. Conversion of haptic events into screen events
US8842969B2 (en) * 2012-09-28 2014-09-23 Intel Corporation Haptic playback of video
WO2014055108A1 (en) 2012-10-03 2014-04-10 Google Inc. Cloud-based gameplay video rendering and encoding
US9330544B2 (en) * 2012-11-20 2016-05-03 Immersion Corporation System and method for simulated physical interactions with haptic effects
US9005036B2 (en) 2012-11-30 2015-04-14 Applifier Oy System and method for sharing gameplay experiences
US9128523B2 (en) * 2012-12-20 2015-09-08 Amazon Technologies, Inc. Dynamically generating haptic effects from audio data
US9261960B2 (en) * 2013-01-24 2016-02-16 Immersion Corporation Haptic sensation recording and playback
US10775888B2 (en) * 2013-02-15 2020-09-15 Facebook, Inc. Method and system for integrating haptic feedback into portable electronic devices
EP2961503B1 (en) * 2013-02-27 2019-08-07 InterDigital CE Patent Holdings Method for reproducing an item of audiovisual content having haptic actuator control parameters and device implementing the method
US9948970B2 (en) * 2013-03-15 2018-04-17 Cox Communications, Inc. Systems, methods, and apparatus for accessing recordings of content items on multiple customer devices
US9652945B2 (en) * 2013-09-06 2017-05-16 Immersion Corporation Method and system for providing haptic effects based on information complementary to multimedia content
US9558637B2 (en) 2013-09-10 2017-01-31 Immersion Corporation Systems and methods for performing haptic conversion
US9411422B1 (en) * 2013-12-13 2016-08-09 Audible, Inc. User interaction with content markers
US9919208B2 (en) 2014-12-11 2018-03-20 Immersion Corporation Video gameplay haptics

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20090079690A1 (en) * 2007-09-21 2009-03-26 Sony Computer Entertainment America Inc. Method and apparatus for enhancing entertainment software through haptic insertion
CN102227694A (zh) * 2008-10-10 2011-10-26 因特网服务有限责任公司 供触觉编码的媒体使用的触觉输出装置
US20130260896A1 (en) * 2012-03-13 2013-10-03 Sony Computer Entertainment America Llc Sharing recorded gameplay to a social graph
JP2014121610A (ja) * 2012-12-21 2014-07-03 Sony Computer Entertainment America Llc 記録されたゲームプレーに基づくクラウドゲーミングのための、提案されたミニゲームの自動作成
CN104049749A (zh) * 2013-03-15 2014-09-17 英默森公司 产生来自视频内容分析的触觉反馈的方法和设备
US20140274297A1 (en) * 2013-03-15 2014-09-18 Electronic Arts, Inc. Systems and methods for generating a compilation reel in game video

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110113644A (zh) * 2019-05-09 2019-08-09 贵阳动视云科技有限公司 一种录制视频的方法及装置
CN110113644B (zh) * 2019-05-09 2020-04-21 贵阳动视云科技有限公司 一种录制视频的方法及装置

Also Published As

Publication number Publication date
US20180169521A1 (en) 2018-06-21
US9919208B2 (en) 2018-03-20
EP3549648A1 (en) 2019-10-09
US20160166929A1 (en) 2016-06-16
JP6614929B2 (ja) 2019-12-04
US10532279B2 (en) 2020-01-14
EP3031502B1 (en) 2019-03-27
JP2016112403A (ja) 2016-06-23
KR20160071314A (ko) 2016-06-21
EP3031502A1 (en) 2016-06-15

Similar Documents

Publication Publication Date Title
CN105700675A (zh) 玩视频游戏触觉
US10320501B2 (en) Haptic broadcast with select haptic metadata based on haptic playback capability
US10620706B2 (en) Haptic trigger modification system
KR102059737B1 (ko) 햅틱 트리거 제어 시스템
JP2020171721A (ja) Ｖｒ観戦のための拡大された視野再レンダリング
US9522341B2 (en) System and method for an interactive device for use with a media device
US20110306426A1 (en) Activity Participation Based On User Intent
EP3264222A1 (en) An apparatus and associated methods
JP2019067222A (ja) 仮想現実を提供するためにコンピュータで実行されるプログラムおよび情報処理装置
WO2020095368A1 (ja) 情報処理システム、表示方法およびコンピュータプログラム
WO2012166072A1 (en) Apparatus, systems and methods for enhanced viewing experience using an avatar
JP7014913B2 (ja) メッセージ出力装置、学習装置、メッセージ出力方法、学習方法及びプログラム
CN114945893A (zh) 信息处理设备以及信息处理终端
CN114930274A (zh) 信息处理设备、信息处理终端和程序
WO2022113330A1 (ja) 方法、コンピュータ可読媒体、および情報処理装置
WO2022113335A1 (ja) 方法、コンピュータ可読媒体、および情報処理装置
JP7030726B2 (ja) 仮想現実を提供するためにコンピュータで実行されるプログラムおよび情報処理装置
WO2022118746A1 (ja) 情報処理装置、情報処理方法、プログラム及び情報処理システム
CN115990337A (zh) 游戏场景画面的显示控制方法、装置及电子装置
JP2022048237A (ja) メッセージ出力装置、メッセージ出力方法及びプログラム
CN114981760A (zh) 信息处理设备、信息处理终端和程序

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
AD01 Patent right deemed abandoned
AD01 Patent right deemed abandoned

Effective date of abandoning: 20210129