CN105307737A - 互动视频游戏 - Google Patents

互动视频游戏 Download PDF

Info

Publication number
CN105307737A
CN105307737A CN201480032578.3A CN201480032578A CN105307737A CN 105307737 A CN105307737 A CN 105307737A CN 201480032578 A CN201480032578 A CN 201480032578A CN 105307737 A CN105307737 A CN 105307737A
Authority
CN
China
Prior art keywords
user
game
interactive game
display screen
mouth
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201480032578.3A
Other languages
English (en)
Inventor
W·R·胡克
K·A·哈里森
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Intercontinental Great Brands LLC
Original Assignee
Intercontinental Great Brands LLC
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Intercontinental Great Brands LLC filed Critical Intercontinental Great Brands LLC
Publication of CN105307737A publication Critical patent/CN105307737A/zh
Pending legal-status Critical Current

Links

Classifications

    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/40Processing input control signals of video game devices, e.g. signals generated by the player or derived from the environment
    • A63F13/42Processing input control signals of video game devices, e.g. signals generated by the player or derived from the environment by mapping the input signals into game commands, e.g. mapping the displacement of a stylus on a touch screen to the steering angle of a virtual vehicle
    • A63F13/428Processing input control signals of video game devices, e.g. signals generated by the player or derived from the environment by mapping the input signals into game commands, e.g. mapping the displacement of a stylus on a touch screen to the steering angle of a virtual vehicle involving motion or position input signals, e.g. signals representing the rotation of an input controller or a player's arm motions sensed by accelerometers or gyroscopes
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F9/00Games not otherwise provided for
    • A63F9/24Electric games; Games using electronic circuits not otherwise provided for
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/20Input arrangements for video game devices
    • A63F13/21Input arrangements for video game devices characterised by their sensors, purposes or types
    • A63F13/213Input arrangements for video game devices characterised by their sensors, purposes or types comprising photodetecting means, e.g. cameras, photodiodes or infrared cells
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/20Input arrangements for video game devices
    • A63F13/23Input arrangements for video game devices for interfacing with the game device, e.g. specific interfaces between game controller and console
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/50Controlling the output signals based on the game progress
    • A63F13/52Controlling the output signals based on the game progress involving aspects of the displayed game scene
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/60Generating or modifying game content before or while executing the game program, e.g. authoring tools specially adapted for game development or game-integrated level editor
    • A63F13/65Generating or modifying game content before or while executing the game program, e.g. authoring tools specially adapted for game development or game-integrated level editor automatically by game devices or servers from real world data, e.g. measurement in live racing competition
    • A63F13/655Generating or modifying game content before or while executing the game program, e.g. authoring tools specially adapted for game development or game-integrated level editor automatically by game devices or servers from real world data, e.g. measurement in live racing competition by importing photos, e.g. of the player
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/90Constructional details or arrangements of video game devices not provided for in groups A63F13/20 or A63F13/25, e.g. housing, wiring, connections or cabinets
    • A63F13/92Video game devices specially adapted to be hand-held while playing
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F9/00Games not otherwise provided for
    • A63F9/24Electric games; Games using electronic circuits not otherwise provided for
    • A63F2009/2401Detail of input, input devices
    • A63F2009/243Detail of input, input devices with other kinds of input
    • A63F2009/2435Detail of input, input devices with other kinds of input using a video camera
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F9/00Games not otherwise provided for
    • A63F9/24Electric games; Games using electronic circuits not otherwise provided for
    • A63F2009/2401Detail of input, input devices
    • A63F2009/2436Characteristics of the input
    • A63F2009/2442Sensors or detectors
    • A63F2009/2447Motion detector
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F9/00Games not otherwise provided for
    • A63F9/24Electric games; Games using electronic circuits not otherwise provided for
    • A63F2009/2448Output devices
    • A63F2009/245Output devices visual
    • A63F2009/2457Display screens, e.g. monitors, video displays
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F9/00Games not otherwise provided for
    • A63F9/24Electric games; Games using electronic circuits not otherwise provided for
    • A63F2009/2483Other characteristics
    • A63F2009/2488Remotely playable
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/10Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by input arrangements for converting player-generated signals into game device control signals
    • A63F2300/1087Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by input arrangements for converting player-generated signals into game device control signals comprising photodetecting means, e.g. a camera
    • A63F2300/1093Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by input arrangements for converting player-generated signals into game device control signals comprising photodetecting means, e.g. a camera using visible light
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/50Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by details of game servers
    • A63F2300/55Details of game data or player data management
    • A63F2300/5546Details of game data or player data management using player registration data, e.g. identification, account, preferences, game history
    • A63F2300/5553Details of game data or player data management using player registration data, e.g. identification, account, preferences, game history user representation in the game field, e.g. avatar
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/50Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by details of game servers
    • A63F2300/55Details of game data or player data management
    • A63F2300/5546Details of game data or player data management using player registration data, e.g. identification, account, preferences, game history
    • A63F2300/556Player lists, e.g. online players, buddy list, black list
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/60Methods for processing data by generating or executing the game program
    • A63F2300/69Involving elements of the real world in the game world, e.g. measurement in live races, real video
    • A63F2300/695Imported photos, e.g. of the player

Abstract

本发明公开了一款互动游戏,其中一个或多个游戏角色由一名或多名玩家的咀嚼或其他与嘴部相关的移动操控。该款游戏可结合可咀嚼产品的营销推广使用,且该游戏可包括其中与特定产品相关的数据可用与这款游戏相关的设备检测的特征,以影响游戏的玩法。所述数据可为能用摄像头读取的图形形式,例如在产品包装内部或外部的二维码、条形码或其他编码,或者也可为其他形式,例如由网站、电子邮件、文本消息或另外的方式提供,由玩家手动输入的编码。该款游戏能在移动电子设备上玩。游戏玩法可包括由玩家的一种或多种不同嘴部移动引起的游戏角色的一种或多种动作。用户嘴部移动所引起的游戏角色的动作可包括不同于嘴部移动且通常与嘴部移动无关的多种动作,例如,行走、奔跑、跳跃、摆动、旋转、下落、飞行、攀爬或其他涉及角色移动的运动。

Description

互动视频游戏
相关申请的交叉引用:本申请要求2013年6月14日提交的美国申请第61/835,244号的优先权,该申请全文以引用方式并入本文。下列用Objective-C代码编写的计算机程序列表与该优先权申请一同提交:CBFaceTracker.h.txt(8,311字节)和CBFaceTracker.m.txt(66,249字节)。这些计算机程序列表的文本包含于本文中,列于说明书的最后面。
版权声明:本专利文件中公开的计算机程序列表部分所包含的材料受版权保护。由于其出现在美国专利和商标局的专利文件或记录中,版权所有人不反对任何人对本专利文件或本专利公开的摹真复制,但除此之外任何情况下均保留一切版权相关权利。
技术领域
本文描述了操控互动电子游戏的方法和设备,以及市场营销的相关方法。
背景技术
用移动电子设备例如移动电话和平板计算机玩互动游戏越来越流行。一些互动游戏可从远程服务器免费下载至移动设备,而另一些游戏则需要预付费才能下载。很多电子游戏尽管在最初下载时是免费的,却可能包含一些不免费而需要付费的可选游戏内的内容(in-gamecontent)。这类电子游戏是有限的,因为其仅基于游戏内的内容的购买才能产生收入。
游戏期间,用户可通过操纵一个或多个输入按键和/或移动设备显示屏上的多个可视控制图标操控可在移动设备上玩的电子游戏。除操纵输入按键和/或屏幕上的控制图标外,某些电子游戏还可通过移动设备的移动(例如倾斜)来操控。还有一些游戏靠手势识别来操控游戏,例如,高尔夫球或网球游戏中,用户可模拟高尔夫球的挥杆动作或网球的挥拍动作来决定虚拟球的虚拟球路。
发明内容
根据一个实施例,一种在移动电子设备的显示屏上操控互动游戏的方法包括在移动电子设备的显示屏上显示互动游戏,该互动游戏包括可由移动电子设备的用户操控的角色。该方法还包括使用摄像头检测用户身体部位(例如嘴)的位置或动作(例如张嘴或咀嚼运动),并让游戏角色响应检测结果在显示屏上做出一个或多个动作。角色的第一动作可以是(例如)奔跑、跳跃、摆动或其他与摄像头检测到的位置或动作无关的移动。在一个具体实施例中,游戏包括角色围绕第一点摆动或旋转,之后与第一点分离,向上移动到第二点,再围绕第二点摆动,随后重复这些步骤,连续向上方、下方和/或侧面移动。在该实施例中,用户以任意速度咀嚼都会以固定幅度加快摆动或旋转的速度,而用户张嘴会让角色从一个点分离并移至下一个点。这种方法可用于提供为与可咀嚼产品(例如胶基糖)的市场推广有关的游戏。
互动游戏的显示可包括向用户反馈游戏检测到的会影响游戏角色的嘴部动作的方式。这种方式可包括(例如)在屏幕上显示覆盖互动游戏的一部分的窗口,并在该窗口中实时显示由摄像头捕捉到的至少用户的嘴部或面部的视频。该窗口可在游戏开始前的校准期间显示和/或在游戏进行期间显示于相同或不同的位置。让窗口位于屏幕上相同的位置可有助于玩家保持摄像头适当定位和取向。该方法可包括使用虚拟网格检测两唇间的距离和其他相关的关键像素。该方法可包括在该窗口中显示至少覆盖用户的嘴部的虚拟网格,并响应于用户的咀嚼运动实时调整虚拟网格。
在一种方式中,检测用户的咀嚼运动包括,通过使用摄像头确定用户的颏、颌、唇和嘴中的至少一者相对于至少覆盖用户的嘴部的虚拟网格的位置,来检测用户的咀嚼运动。该方法还可包括在互动游戏开始前相对于虚拟网格校准用户的咀嚼运动。
在另一种方式中,检测用户的咀嚼运动包括检测用户咀嚼运动的速度,并让显示屏上的角色响应于检测到的咀嚼运动速度加快而移动得更快,响应于检测到的咀嚼运动速度减慢而移动得更慢。
该方法可包括检测用户的一个或多个另外的动作,例如张嘴,并让虚拟角色在互动游戏中响应于用户的一个或多个另外的动作,执行一个或多个不同于第一动作的另外的动作。
在一种方式中,该方法可包括在一局(session)视频游戏结束时,拍摄用户的面部的照片,并将该照片的至少一部分并入互动游戏的画面(该画面包括用户在玩互动游戏时积攒的得分)中。该方法还可包括允许用户通过电子邮件、文本消息和社交媒体网站中的至少一者将该画面分享给一人或多人。
该方法还可包括用移动电子设备扫描消费品的包装上的图像,并将响应于图像扫描获得的数据并入互动游戏中,从而影响游戏玩法。
在上述方法中,移动电子设备可以是移动电话、平板计算机和手持式视频游戏控制器中至少一者。
在一个实施例中,被配置成允许玩互动游戏的装置包括显示屏、摄像头、存储互动游戏相关指令的存储器,以及与显示屏、摄像头和存储器可操作地通信的处理装置。该处理装置被配置成获取指令以达成在显示屏上实现显示包括可由电子设备用户操控的角色的互动游戏;在显示屏上显示覆盖互动游戏的一部分的窗口,以示出摄像头捕捉到的至少用户的嘴部的图像;通过摄像头确定用户的颏、颌、唇和嘴中的至少一者相对于虚拟网格的位置,来检测用户的咀嚼运动;以及响应于用户的咀嚼运动,让角色在显示屏上执行第一动作。
在一种方式中,处理装置被进一步配置成实现检测用户的嘴部的张开,并让角色在显示屏上执行与第一动作不同的第二动作。
该处理装置可被进一步配置成在一局互动游戏结束时实现使用摄像头至少拍摄用户的面部的照片,并将该照片的至少一部分并入互动游戏的画面(该画面包括用户在玩互动游戏时积攒的得分)中。
该处理装置可被进一步配置成实现使用摄像头扫描消费品的包装上的图像,并将响应于图像扫描获得的数据并入互动游戏中,从而影响游戏玩法。
在一个实施例中,提供了一种用于存储指令的非暂态计算机可读存储介质。响应于处理装置执行所述指令,会让处理装置执行在电子设备上显示并操控互动游戏的操作。这些操作包括:在电子设备的显示屏上显示包括可由电子设备用户操控的角色的互动游戏;用摄像头检测用户的咀嚼运动;以及响应于用户的咀嚼运动,让角色在显示屏上执行第一动作。
非暂态计算机可读存储介质还可包括响应于由处理装置执行,让处理装置执行另外操作的指令,这些操作包括检测用户的嘴部的张开并让虚拟角色在显示屏上执行不同于第一动作的第二动作。
非暂态计算机可读存储介质还可包括响应于由处理装置执行,让处理装置执行另外操作的指令,这些操作包括在一局互动游戏结束时至少拍摄用户的面部的照片,并将该照片的至少一部分并入互动游戏的画面(该画面包括用户在玩互动游戏时积攒的得分)中。
非暂态计算机可读存储介质还可包括响应于由处理装置执行,让处理装置进一步执行另外操作的指令,这些操作包括扫描消费品的包装上的图像,并将响应于图像扫描获得的数据并入互动游戏中,以影响游戏玩法。
本文提供了一种通过游戏与可咀嚼产品的消费者互动的方法。该方法包括:将多种不同的可咀嚼产品推销给消费者;提供能在带有摄像头和显示屏的手持设备上玩的游戏;显示能够相对于屏幕上的其他图像移动的游戏角色的图像;处理来自摄像头的输入,以检测玩家的嘴部的咀嚼运动;以及响应于检测到咀嚼运动,影响显示于屏幕上的游戏角色的移动,使得游戏玩法至少部分地由检测到咀嚼运动来控制。
该方法还可包括使用摄像头检测多种不同可咀嚼产品的包装,并响应于检测到此类包装,取决于检测到多种不同可咀嚼产品中的哪一个,以不同方式影响游戏玩法。
该方法还可包括响应于玩家的咀嚼,加快游戏角色相对于2D竖直滚动世界中的图像的移动。
处理来自摄像头的输入可包括:使用CPU运行的软件在第一帧中检测鼻和颏;使用图形处理单元运行的软件在后续帧中检测嘴部和颏之间的较暗区域;以及通过使用图形处理单元分析各个像素,帧到帧比较较暗区域内和较暗区域附近的变化。
上述方法和设备允许移动电子设备的用户直观地在移动设备上操控互动电子游戏,操控并不复杂,只依靠咀嚼运动和/或其他嘴部移动就可实现。另外,上述方法和设备还在移动设备上提供互动电子游戏,该游戏可推销消费品,如咀嚼型胶基糖。结合以下附图、具体实施方式和权利要求书可认识到其他优点。
附图说明
图1为用于运行、显示和操控本文所述的互动电子游戏的示例性移动设备的示意图;
图2为图1移动设备的透视图,示出了示例性互动电子游戏的校准特征;
图3为图1移动设备的透视图,示出了游戏的玩法,其中玩家角色正围绕摆动点摆动,并且张着大嘴的怪物位于显示屏底部;
图4为图1移动设备的透视图,示出了游戏的玩法,其中由于用户的嘴部的张开,玩家角色从一个摆动点分离并正朝着下一个摆动点移动;
图5为图1移动设备的透视图,示出了游戏的玩法,其中由于用户的嘴张得比图3中的更大,玩家角色重新连接到摆动点上;
图6为图1移动设备的透视图,示出了互动电子游戏中的“游戏结束”画面,画面中用户的面部被怪物的上下颌和牙齿包围,还示出游戏名称以及用户在单局游戏中达到的分数;
图7为图1移动设备的透视图,示出了互动电子游戏中的“游戏结束”画面,其中“游戏结束”画面被并入电子邮件,用于发送给一位或多位收件人;
图8为图1移动设备的透视图,其正在拍摄示例性咀嚼型胶基糖包装的一幅快照,该咀嚼型胶基糖包装包括可并入互动游戏以增强游戏玩法的编码符号;
图9为图8的视图,示出了从胶基糖包装采集的编码符号正被上传到互动游戏中;
图10为图1移动设备的透视图,示出了根据上传的编码符号针对互动游戏的游戏局的游戏玩法升级;
图11为流程图,示出了通过用户的咀嚼运动操控互动游戏的示例性方法。
具体实施方式
本文所述的互动电子游戏可通过用户的咀嚼运动操控。具体地讲,移动电子设备可包括一个或多个定位为面向一名或多名用户并用于观察和检测用户的咀嚼运动的摄像头,用户的咀嚼运动随后被转换成移动设备显示屏上一个或多个游戏内角色的移动。本文所述的互动电子游戏提供了直观的游戏玩法,需要很少的指令甚至不需要指令,而且还具有连续的游戏流程,从而可有利于用户玩更长的游戏局。
图1示出了一款示例性移动电子设备10的图形表示,该设备用于运行互动游戏和实施本文所述的操控互动游戏的方法。图1的移动设备10包括电连接至电源14的处理装置12、存储器16、输入/输出端18、显示屏20、摄像头22和手动控制器24。处理装置12可为可编程的,以在移动设备10上运行操作系统和/或软件应用,还能执行多种指令让软件应用(例如在用户玩存储于移动设备10上的互动游戏期间)完成多种功能。电源14可以是向移动设备10供电的电池或电池组。存储器16可以是(例如)能够存储操作系统和包括互动电子游戏在内的软件程序的易失性或非易失性存储器(例如非暂态存储介质,如硬盘驱动器)。输入/输出端18可包括音频输入/输出端,譬如,可(例如)在使用移动设备10打电话期间使用的音频接收器、麦克风和扬声器。输入/输出端18还可包括无线发射器和接收器,用于在使用移动设备10打电话和上网期间发送和接收无线信号。手动控制器24可包括一个或多个可通过用户的按压操控移动设备10的一种或多种功能的按键,所述一种或多种功能例如开启和关闭应用、在应用之间切换和重新启动移动设备10。
显示屏20可以是(例如)将移动设备10的运行内容呈现给用户的LCD、TFT-LCD和/或LED电子视觉化显示器。显示屏20可以是触摸显示屏,也可以是仅依赖于按键输入的显示屏。摄像头22可包括一个或多个并入移动设备10的摄像头。举例来说,该移动设备可包括一个后置摄像头22和一个前置摄像头22,其中后置摄像头22定位为使得当移动设备10取向为用户面向显示屏20时,用户面部对于摄像头可见,而前置摄像头22定位为使得当移动设备10取向为显示屏20背对用户时,该摄像头22远离用户面部。两位用户可使用具有后置摄像头22和前置摄像头22的移动设备10交替地玩或同时玩互动游戏100-第一位用户面朝后置摄像头22,而第二位用户面朝前置摄像头22。
图2根据一个示例性实施例示出了在其显示屏20上显示互动游戏100的截图的移动设备10。互动游戏100生成了一个窗口102,并将其覆盖在显示屏20上的互动游戏100的一部分上。窗口102中显示了摄像头22捕捉到的用户实时视频,如图2所示。可从窗口102中看到用户的头部、面部、嘴部、双唇等部分和其他面部特征。由于该例互动游戏100受用户的咀嚼运动操控,所以在一个实施例中,窗口102中仅显示用户的嘴部。
使用摄像头22,该互动游戏100允许用户校准其嘴部移动,以经由其咀嚼运动精确操控互动游戏100。在图2所示的实施例中,在开始玩互动游戏100前,用户的咀嚼运动通过至少位于用户的嘴部的一部分上的虚拟网格104来校准。虚拟网格104可响应于用户的咀嚼运动实时移动。互动游戏100可包括提示用户校准是否成功的用户可见校准指示器105。在图2示出的实施例中,校准指示器105可包括关联于已相对于虚拟网格104成功校准用户咀嚼运动的区域(例如“好”字样)。应当理解,尽管图2中描绘的虚拟网格104对用户可见,但可选地,在校准和/或玩游戏期间,虚拟网格104可对用户不可见。
为本申请之目的,将“咀嚼运动”定义为当用户嘴部闭合和/或张开时,其单唇或双唇的移动,以及当用户咀嚼或模仿咀嚼可咀嚼产品(例如食物、咀嚼型胶基糖等)时,其唇、颏和颌部周围的面部区域移动。例如,互动游戏的游戏玩法可包括玩游戏的用户的一种或多种不同的嘴部移动(实际咀嚼期间或模拟咀嚼期间)所引起的游戏中角色的一种或多种动作。用户嘴部移动所引起的游戏角色的动作可包括不同于嘴部移动且通常与嘴部移动无关的动作,例如,行走、奔跑、跳跃、摆动、旋转、下落、飞行、攀爬或其他涉及角色移动的移动。
在示出的形式中,互动游戏100通过摄像头22确定用户的嘴、唇、颏或颌部中一个或多个部位相对于至少覆盖用户的嘴部的虚拟网格104的位置,来检测用户的咀嚼运动。例如,当用户的嘴张得较小时,如图3所示,虚拟网格104具有第一高度,而当用户的嘴张得较大时,如图5所示,虚拟网格104具有比第一高度大的第二高度。
如前文所论述,互动游戏100通过检测用户的咀嚼运动来操控游戏。优选地,互动游戏100包括面部识别特征,用于最大程度减少用户咀嚼运动和游戏响应之间的延迟。互动游戏100可包括面部跟踪软件,如结合图11更详细描述,其能够在被轻微遮挡、光线强度改变以及源影像变换时提供流畅的游戏体验。在一种方式中,一旦环境条件妨碍或限制用户玩互动游戏100,互动游戏100便可暂停或关闭,并通知用户存在一种或多种妨碍或限制玩游戏的问题,以及问题的解决方案。
图3示出了用户在玩示例性互动游戏100期间,该款游戏的屏幕截图。互动游戏100在2D的竖直滚动世界106的环境中示出,其游戏目标是让游戏角色或者说玩家操控的角色108向上移动,同时避免“危险”,如怪物109或使玩家角色108落下和在显示屏20底部毁灭的场景,例如洞穴、火焰或水。用户玩互动游戏100期间,玩家角色108在移动设备100的显示屏20上对用户可见,如图3至图5所示。
互动游戏100的竖直滚动世界106包括摆动点110,允许游戏角色108通过绕着一个摆动点110摆动并跳跃至另一摆动点110的方式向上移动,远离怪物109,如图3和图4所示。竖直滚动世界106还可包括多个可收集物品112例如钱币、食物、宝石或其他收集品,这些可收集物品112可由玩家角色108在摆动点110之间移动期间与其接触时被捕获。互动游戏100还可显示用户在一局游戏中积攒的分数114,并显示指示该局游戏持续时间的计时器116。随着玩家角色108在互动游戏100中不断前进,游戏世界106可延伸拓展,提供连续的游戏流,这会有助于激励用户不断通关,并给予用户经常玩这款互动游戏100的动力。
示例性互动游戏100使用摄像头22检测用户的咀嚼运动,并响应于检测到的用户咀嚼运动让玩家角色108执行一个或多个动作。举例来说,用户可用咀嚼运动操控围绕摆动点110摆动的速度,并通过嘴部的张开使与摆动点110分离继而移至下一个摆动点110,并可选地在移动途中收集一个或多个可收集物品112。在一个实施例中,不管咀嚼的速度有多快,检测到咀嚼都会以预定的幅度加快摆动速度(即旋转速度)。互动游戏100在检测到用户咀嚼运动的速度加快后,可相应加快玩家角色108围绕摆动点110旋转的速度。同理,互动游戏100在检测到用户咀嚼运动的速度减慢后,可相应减慢玩家角色108围绕摆动点110旋转的速度。用户的咀嚼运动也可用于操控互动游戏100中的其他游戏功能,包括(例如)指引滑轨方向、发出非玩家角色(例如额外的怪物)警报,等等。
互动游戏100的每一局游戏都可包括结合有分数倍率的计分系统,以帮助用户达到设定分数目标,从而提升互动游戏100的长期可玩性。譬如,游戏得分可基于累计遍布于游戏世界106每一关中的收集品112,和/或基于在互动游戏100的一关或多关中前进的距离。倍率可让用户在完成了若干局的游戏后,获得更高的分数,借此允许用户在互动游戏100中晋级。
用户得分超过某一预定值,例如超过100000,显示的用户得分可能会加上一个“奖章”和/或“勋章”的别名或昵称。这些“奖章”和/或“勋章”可保存于移动设备10上,或包括社交游戏中心(例如苹果游戏中心(AppleGameCenter))在内的远程服务器上,在这里,“奖章”和“勋章”可向互动游戏100的其他用户展示。多人游戏中心可包括排行榜,显示用户在玩互动游戏100时获得的最高分数和/或由用户操控的玩家角色108在互动游戏100中前进的最远距离。这些在社交游戏中心或其他社交媒体上展示的分数和成就可促进多名玩家竞争。
当玩家角色108落入追它的怪物109口中时,用户输掉而游戏结束时,互动游戏100允许用户使用移动设备10的摄像头22至少抓拍下其面部的摄影图像118。在图6所示的实施例中,摄影图像118结合互动游戏100的底图生成个性化图像120,例如用户的面部和/或头部落入怪物109口中的图像,并可选地包括用户在本局游戏中积攒的分数114。互动游戏100还可允许移动设备10将该个性化图像120保存在其存储器16上,例如,保存在移动设备10(例如iPhone和iPad)所提供的硬盘上的“相册”上。
如图7所示,互动游戏100允许用户通过电子邮件122将个性化图像120分享给一位或多位收件人。此外,互动游戏100允许用户通过文本消息将个性化图像120分享给一位或多位收信人。此外,互动游戏100允许用户通过一个或多个社交媒体网站(例如Facebook、Twitter、Instagram等)将个性化图像120分享给一位或多位接收人。用户将个性化图像120通过电子邮件、文本消息和/或社交媒体网站分享给其他接收人的行为,可吸引更多的用户玩互动游戏100,同时将消费品(例如与互动游戏100关联的咀嚼型胶基糖)推销给越来越多的用户。如前段所提及,互动游戏100可与一种或多种消费品(例如咀嚼型胶基糖)相关联,以对此类消费品进行广告宣传、营销和促销。譬如,互动游戏100可结合可咀嚼产品(例如咀嚼型胶基糖、糖果等)的营销推广来用。如下文更详细描述,互动游戏100可包括使用与互动游戏100相关的装置检测与特定消费品相关的数据以影响游戏玩法的功能。这种数据可为显示于装有消费品的包装外部或内部、或显示于包裹消费品本身的材料上的图形形式,例如二维码、条形码或其他编码,使得装有互动游戏100的手持式电子装置的摄像头(例如移动设备10的摄像头22)可用于读取二维码、条形码或另外的编码。或者,可利用网站、电子邮件或文本消息,或采用另外的方式向手持式电子设备用户提供编码数据(例如数字,或字母与数字的组合),由用户手动输入互动游戏100中。
例如,参考图8和图9,咀嚼型胶基糖产品与互动游戏100相关联的方式可以是,在该产品的外部或内部包装200上包括编码图像202。编码图像202可包括用户可见且可辨认出的词语,如图8和图9所示。或者,编码图像202可包括用户无法读取的符号(如条形码),或对用户不可见的符号。当装有互动游戏100的移动设备10用摄像头22拍摄编码图像202并例如以补丁的形式将编码图像202上传到互动游戏100中时,编码图像202提供新的游戏内容204,如图10所示,由此增强互动游戏100的游戏玩法。
例如,当互动游戏100正在移动设备10上运行时,用户可选择使用移动设备10的摄像头22对包装200外部的编码图像202进行拍照和/或扫描的选项,如图8所示。摄像头22拍摄和/或扫描到的编码图像202随后会上传至移动设备10,并以数据的形式并入互动游戏100中,如图9所示。这种数据提供额外的内容,比如游戏升级或补丁,如图10所示。互动游戏100可用于帮助一种或多种相同或不同的可咀嚼消费品的市场营销。举例来说,一个代表互动游戏100补丁的编码图像可在一种可咀嚼消费品(例如一种胶基糖)的一个包装上销售,另一个代表互动游戏100的不同补丁的编码图像可在同一种可咀嚼消费品的另一个包装上销售,而又一种代表互动游戏100的又一种补丁的编码图像可在不同种类可咀嚼消费品(例如,另一种胶基糖,或胶基糖以外的可咀嚼产品)的包装上销售。通过这种方式,使用移动设备10的摄像头22扫描不同消费品的包装上的不同编码图像可向用户提供不同的游戏补丁。根据扫描的产品包装和在产品包装上检测到的编码图像,这些游戏补丁能以不同的方式影响互动游戏100的游戏玩法。
购买与互动游戏100相关的一包胶基糖并对其扫描所获得的升级或补丁可(例如)提高与特定游戏动作或成就相关的点数和/或分数倍率、提高玩家角色108或怪物109的速度、生成风来帮助玩家角色108向上移动远离怪物109、减慢怪物109的速度、在玩家角色108被怪物109吞掉后给予用户第二次机会,或其他任何可增强游戏玩法的合适升级。将可由移动设备10解码的编码图像和/或符号作为互动游戏100的补丁和/或升级并入胶基糖包200可促进用户对互动游戏100的兴趣并促进胶基糖包200的销售。
移动设备10可以是移动电话(如iPhone等)、平板计算机(如iPad等)、手持式视频游戏控制器等。移动设备10可以是智能电话(如触摸屏移动电话),也可以是仅依赖输入按键的传统移动电话。移动设备10可在任意操作系统上运行,例如苹果OS系统、安卓(Android)系统等。虽然在上文结合图2至图10对特定的互动电子游戏100进行了描述,但应当理解,互动游戏100可以是适合通过用户的咀嚼运动操控的任意互动电子游戏形式,例如,玩家角色或其他任何角色会响应于互动游戏用户的咀嚼运动移动或执行其他动作的互动电子游戏。
图11示出了在校准和/或玩互动游戏100期间检测用户的咀嚼运动的示例性方法300。根据一个实施例,在方法300的步骤302中,当移动设备10的摄像头22面向用户时,互动游戏100的面部检测器部件会在移动设备10的摄像头22生成的视频中搜索人的面部。这种视频可显示于互动游戏的窗口102中,如图2所示。
在步骤304中,互动游戏100的点跟踪器部件选择视频帧中用户面部的一个或多个位点,并选择用户面部周围的关键点进行跟踪。当用户面部移动时,这些点随之移动,并调整用于检测咀嚼的所关注区域。步骤302所示的部分进程可由移动设备10的图形处理单元(GPU)完成。
在步骤306中,互动游戏100的咀嚼检测器部件可根据点跟踪器提供的所关注区域数据获取用户鼻子底部与颏之间的若干像素带。这些像素的值会保存在(例如)移动设备10的存储器16上,并与后续视频帧中的值相比较。通过比较像素的色值,互动游戏100就可以检测像素移动的趋势,并借此检测用户的嘴部的移动趋势。譬如,一旦摄像头22检测到用户下颌向上移动(例如在用户嘴部做出闭合动作期间),就会触发“嚼下”事件。类似于步骤302,步骤304的部分也可由移动设备10的图形处理单元(GPU)完成。
在步骤308中,一旦检测到“嚼下”动作,互动游戏100的再跟踪触发器部件便会重新开始执行整套流程,以确保传入的数据尽可能准确。如果从移动设备10的摄像头22看到的最近一次“嚼下”动作起,在一段较短的预定时间段(例如1秒、2秒、3秒、5秒、10秒或更长时间)后未能检测到用户面部,也会触发再跟踪。
该方法可包括显示各种促销信息、指导信息或其他类型信息,例如在游戏开始前显示“放入胶基糖”信息。该方法还可包括在显示玩家面部的窗口中提供面部轮廓线,以方便玩家将其面部图像对准显示器中的正确位置。在玩家面部正确对准该轮廓后,便可显示像“开始!”之类的信息,并可立刻开始校准和/或游戏。或者,这款游戏还可为用户提供开始游戏的机会,例如,等待检测到用户输入(比如咀嚼运动,或用户张开嘴),而且可提示用户提供必要的输入,例如显示“嚼一下开始游戏”之类的信息。
要是游戏开始后玩家面部相对于摄像头发生了移动,导致其面部不在正确位置,游戏便会暂停并显示一条或多条信息指导玩家如何纠正问题,比如“看不见你了”、“偏离中心”、“太远”或“太近”和/或“请将面部移至轮廓线”或“请勿晃动”。在首次于正确位置检测到玩家面部之前,也可显示这些信息或类似信息。同样,一旦玩家面部位于正确位置,游戏便会立刻开始,或可向用户提供操控重回游戏的机会,例如,等待检测到用户输入(比如开始咀嚼运动,或用户张开嘴),而且可提示用户提供必要的输入,例如显示“嚼一下开始游戏”之类的信息。
当游戏得分达到确定阈值(例如达到特定分数等级)或玩家角色到达游戏场景的特定位置时,游戏可通过向玩家提供例如解锁一项游戏特征的机会,也可通过显示文字短语(例如“新的解锁项目可用”)通知玩家来认可该成绩。
作为上文提到的词语或短语显示形式的备替代方案,这款游戏可提供其他视觉提示(例如单独呈现图标、表情符号、图片等,或与词语或短语显示结合使用)和/或语音提示。这款游戏还可提供其它玩法,举例来说,可向玩家提供靠点击屏幕而不是靠摄像头检测到的输入操控游戏的选项,而且可在玩家采用一种模式或另一种模式玩游戏时提供奖励(譬如,得分机会增多,或点数倍增),例如,在玩家采用摄像头输入操控游戏时,提供双倍的成绩点数。
这款游戏某些功能(例如检测咀嚼或其他嘴部移动)可由软件实现,如上面提及的以及作为本专利申请的附件提交的软件。
本文描述的方法仅依靠检测移动设备用户的咀嚼运动,并将这种咀嚼运动转化为安装于移动设备上的互动电子游戏中的玩家角色移动,故能方便地为移动设备用户提供操控互动电子游戏的能力。此外,上述互动游戏方便为用户提供拍摄和/或扫描与这款互动游戏相关的消费品包装的能力,从而帮助此类消费品的广告宣传和销售。

Claims (23)

1.一种操控移动电子设备的显示屏上的互动游戏的方法,所述方法包括:
在所述移动电子设备的所述显示屏上显示所述互动游戏,所述互动游戏包括能由所述移动电子设备的用户操控的角色;
使用摄像头检测所述用户的咀嚼运动;以及
让所述角色响应于所述用户的所述咀嚼运动在所述显示屏上执行第一动作。
2.根据权利要求1所述的方法,其中所述显示所述互动游戏包括显示覆盖所述显示屏上的所述互动游戏的一部分的窗口,并在所述窗口中显示由所述摄像头捕捉到的至少所述用户的嘴部的实时视频。
3.根据权利要求2所述的方法,还包括在所述窗口中显示至少覆盖显示于所述窗口中的所述用户的所述嘴部的虚拟网格;并响应于所述用户的咀嚼运动实时调整所述虚拟网格。
4.根据权利要求1所述的方法,其中所述检测所述用户的咀嚼运动包括通过所述摄像头确定所述用户的颏、颌、唇和嘴部中的至少一者相对于至少覆盖所述用户的所述嘴部的虚拟网格的位置,来检测所述用户的所述咀嚼运动。
5.根据权利要求4所述的方法,还包括启动所述互动游戏前相对于所述虚拟网格校准所述用户的所述咀嚼运动。
6.根据前述权利要求中任一项所述的方法,其中所述检测所述用户的所述咀嚼运动包括检测所述用户的所述咀嚼运动的速度,并让所述显示屏上的所述角色响应于检测到的所述咀嚼运动的速度加快而移动得更快,响应于检测到的所述咀嚼运动的速度减慢而移动得更慢。
7.根据前述权利要求中任一项所述的方法,还包括检测所述用户的嘴部的张开,并让虚拟角色在所述互动游戏中执行与所述第一动作不同的第二动作。
8.根据前述权利要求中任一项所述的方法,还包括在一局视频游戏结束时至少拍摄所述用户的面部的照片,并将所述照片的至少一部分并入所述互动游戏的画面中,所述画面包括所述用户在玩所述互动游戏时积攒的得分。
9.根据权利要求8所述的方法,还包括允许所述用户通过电子邮件、文本消息和社交媒体网站中的至少一者将所述画面分享给一人或多人。
10.根据前述权利要求中任一项所述的方法,还包括用所述移动电子设备扫描消费品的包装上的图像,并将响应于扫描所述图像获得的数据并入所述互动游戏中,从而影响所述互动游戏的游戏玩法。
11.根据前述权利要求中任一项所述的方法,其中所述移动电子设备为移动电话、平板计算机和手持式视频游戏控制器中的至少一者。
12.一种被配置成允许玩互动游戏的设备,所述设备包括:
显示屏;
摄像头;
存储器,所述存储器存储与所述互动游戏相关的指令;以及
处理装置,所述处理装置与所述显示屏、所述摄像头和所述存储器可操作地通信,所述处理装置被配置成获取所述指令以实现:
在所述显示屏上显示所述互动游戏,所述互动游戏包括可由所述电子设备的用户操控的角色;
在所述显示屏上显示覆盖所述互动游戏的一部分的窗口,以示出由所述摄像头捕捉到的至少所述用户的嘴部的图像;
在所述窗口中显示至少覆盖所述用户的所述嘴部的虚拟网格,所述虚拟网格能响应于所述用户的所述嘴部的咀嚼运动实时移动;
通过所述摄像头确定所述用户的颏、颌、唇和嘴部中的至少一者相对于所述虚拟网格的位置,来检测所述用户的所述咀嚼运动;以及
让所述角色响应于所述用户的所述咀嚼运动在所述显示屏上执行第一动作。
13.根据权利要求12所述的设备,其中所述处理装置被配置成实现检测所述用户的所述嘴部的张开,并让所述角色在所述显示屏上执行与所述第一动作不同的第二动作。
14.根据权利要求12和13中任一项所述的设备,其中所述处理装置被配置成在一局所述互动游戏结束时实现使用所述摄像头至少拍摄所述用户的面部的照片,并将所述照片的至少一部分并入所述互动游戏的画面中,所述画面包括所述用户在玩所述互动游戏时积攒的得分。
15.根据权利要求12-14中任一项所述的装置,其中所述处理装置被配置成实现使用所述摄像头扫描消费品的包装上的图像,并将响应于扫描所述图像获得的数据并入所述互动游戏中,以影响所述互动游戏的游戏玩法。
16.一种用于存储指令的非暂态计算机可读存储介质,所述指令响应于由处理装置执行,让所述处理装置执行在电子设备上显示并操控互动游戏的操作,所述操作包括:
在所述电子设备的所述显示屏上显示所述互动游戏,所述互动游戏包括能由所述电子设备的用户操控的角色;
使用摄像头检测所述用户的咀嚼运动;以及
让所述角色响应于所述用户的所述咀嚼运动在所述显示屏上执行第一动作。
17.根据权利要求16所述的非暂态计算机可读存储介质,还包括响应于由所述处理装置执行,让所述处理装置执行另外操作的指令,所述操作包括检测所述用户的嘴部的张开并让虚拟角色在所述显示屏上执行不同于所述第一动作的第二动作。
18.根据权利要求16和17中任一项所述的非暂态计算机可读存储介质,还包括响应于由所述处理装置执行,让所述处理装置执行另外操作的指令,所述操作包括在一局所述互动游戏结束时至少拍摄所述用户的面部的照片,并将所述照片的至少一部分并入所述互动游戏的画面中,所述画面包括所述用户在玩所述互动游戏时积攒的得分。
19.根据权利要求16至18中任一项所述的非暂态计算机可读存储介质,还包括响应于由所述处理装置执行,让所述处理装置执行另外操作的指令,所述操作包括扫描消费品的包装上的图像,并将响应于扫描所述图像获得的数据并入所述互动游戏中,以影响所述互动游戏的游戏玩法。
20.一种通过游戏与可咀嚼产品的消费者互动的方法,所述方法包括:
将多个不同的可咀嚼产品推销给消费者;以及
提供能在带有摄像头和显示屏的手持设备上玩的游戏;
在所述显示屏上显示能够相对于所述显示屏上的其他图像移动的游戏角色的图像;
处理来自所述摄像头的输入,以检测玩家的嘴部的咀嚼运动;
响应于检测所述咀嚼运动,影响显示于所述显示屏上的所述游戏角色的移动,使得游戏玩法至少部分地由检测所述咀嚼运动来操控。
21.根据权利要求20所述的方法,还包括使用所述摄像头检测所述多个不同可咀嚼产品的包装,并响应于检测到此类包装,取决于检测到多种不同可咀嚼产品中的哪一个,以不同方式影响所述游戏玩法。
22.根据权利要求21所述的方法,其中影响所述角色的移动包括响应于所述玩家的咀嚼,加快所述游戏角色相对于2D竖直滚动世界中的图像的移动。
23.根据权利要求20至22中任一项所述的方法,其中所述处理来自所述摄像头的输入包括:使用CPU运行的软件在第一帧中检测鼻和颏;使用图形处理单元运行的软件在后续帧中检测嘴部和颏之间的比相邻区域暗的区域;以及通过使用图形处理单元分析各个像素,帧到帧比较较暗区域内和较暗区域附近的变化。
CN201480032578.3A 2013-06-14 2014-06-13 互动视频游戏 Pending CN105307737A (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US201361835244P 2013-06-14 2013-06-14
US61/835,244 2013-06-14
PCT/US2014/042299 WO2014201347A1 (en) 2013-06-14 2014-06-13 Interactive video games

Publications (1)

Publication Number Publication Date
CN105307737A true CN105307737A (zh) 2016-02-03

Family

ID=51134429

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201480032578.3A Pending CN105307737A (zh) 2013-06-14 2014-06-13 互动视频游戏

Country Status (6)

Country Link
US (1) US9873038B2 (zh)
EP (1) EP3007786A1 (zh)
CN (1) CN105307737A (zh)
BR (1) BR112015028380A2 (zh)
RU (1) RU2015148842A (zh)
WO (1) WO2014201347A1 (zh)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107592575A (zh) * 2017-09-08 2018-01-16 广州华多网络科技有限公司 一种直播方法、装置、系统及电子设备
WO2020042727A1 (zh) * 2018-08-28 2020-03-05 腾讯科技(深圳)有限公司 一种应用场景的交互方法和移动终端以及存储介质
CN111013135A (zh) * 2019-11-12 2020-04-17 北京字节跳动网络技术有限公司 一种交互方法、装置、介质和电子设备
CN111659114A (zh) * 2019-03-08 2020-09-15 阿里巴巴集团控股有限公司 互动游戏生成方法和装置、处理方法和装置及电子设备

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP3166477A4 (en) * 2014-05-24 2018-04-25 Rieger, Jana Maureen Systems and methods for diagnosis and treatment of swallowing disorders
JP6592940B2 (ja) * 2015-04-07 2019-10-23 ソニー株式会社 情報処理装置、情報処理方法、及びプログラム
US9789403B1 (en) * 2016-06-14 2017-10-17 Odile Aimee Furment System for interactive image based game
EP3789092A1 (en) * 2019-09-08 2021-03-10 Catja Eikelberg Method of training oral motor function in a handheld device

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1939564A (zh) * 2005-09-27 2007-04-04 夏普株式会社 传感设备、程序执行设备及成像系统
US20110221755A1 (en) * 2010-03-12 2011-09-15 Kevin Geisner Bionic motion
CN102760198A (zh) * 2011-04-27 2012-10-31 德信互动科技(北京)有限公司 近距离体感互动装置和方法
CN102955565A (zh) * 2011-08-31 2013-03-06 德信互动科技(北京)有限公司 人机互动系统和方法

Family Cites Families (52)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6471420B1 (en) 1994-05-13 2002-10-29 Matsushita Electric Industrial Co., Ltd. Voice selection apparatus voice response apparatus, and game apparatus using word tables from which selected words are output as voice selections
US6720949B1 (en) 1997-08-22 2004-04-13 Timothy R. Pryor Man machine interfaces and applications
US6215471B1 (en) 1998-04-28 2001-04-10 Deluca Michael Joseph Vision pointer method and apparatus
US6766036B1 (en) 1999-07-08 2004-07-20 Timothy R. Pryor Camera based man machine interfaces
JP3725460B2 (ja) 2000-10-06 2005-12-14 株式会社ソニー・コンピュータエンタテインメント 画像処理装置、画像処理方法、記録媒体、コンピュータプログラム、半導体デバイス
JP3813552B2 (ja) * 2002-07-22 2006-08-23 横浜ゴム株式会社 作業中ストレス判定装置、作業中ストレス判定プログラム及び作業中ストレス判定方法
US7815507B2 (en) 2004-06-18 2010-10-19 Igt Game machine user interface using a non-contact eye motion recognition device
US7391888B2 (en) 2003-05-30 2008-06-24 Microsoft Corporation Head pose assessment methods and systems
US20050215319A1 (en) * 2004-03-23 2005-09-29 Harmonix Music Systems, Inc. Method and apparatus for controlling a three-dimensional character in a three-dimensional gaming environment
JP4286860B2 (ja) 2004-05-21 2009-07-01 旭化成株式会社 動作内容判定装置
JP4172793B2 (ja) 2004-06-08 2008-10-29 株式会社東芝 ジェスチャ検出方法、ジェスチャ検出プログラムおよびジェスチャ検出装置
US8684839B2 (en) 2004-06-18 2014-04-01 Igt Control of wager-based game using gesture recognition
WO2007071025A1 (en) 2005-12-21 2007-06-28 Jimmy Proximity Inc. Device and method for capturing vocal sound and mouth region images
AU2006352758A1 (en) * 2006-04-10 2008-12-24 Avaworks Incorporated Talking Head Creation System and Method
JP4627052B2 (ja) 2006-07-06 2011-02-09 株式会社ソニー・コンピュータエンタテインメント 画像に連携した音声出力方法および装置
US20120278759A1 (en) 2008-05-07 2012-11-01 Carrot Medical Llc Integration system for medical instruments with remote control
TWI362620B (en) 2008-06-27 2012-04-21 Yuan Fei Cheng A control method based on image or voice identification
US8788977B2 (en) 2008-11-20 2014-07-22 Amazon Technologies, Inc. Movement recognition as input mechanism
JP5087532B2 (ja) 2008-12-05 2012-12-05 ソニーモバイルコミュニケーションズ株式会社 端末装置、表示制御方法および表示制御プログラム
US20100199231A1 (en) 2009-01-30 2010-08-05 Microsoft Corporation Predictive determination
US7996793B2 (en) 2009-01-30 2011-08-09 Microsoft Corporation Gesture recognizer system architecture
US20100199228A1 (en) 2009-01-30 2010-08-05 Microsoft Corporation Gesture Keyboarding
US8732623B2 (en) 2009-02-17 2014-05-20 Microsoft Corporation Web cam based user interaction
US20100240458A1 (en) 2009-03-20 2010-09-23 Pub Company S.R.L. Video game hardware systems and software methods using electroencephalogrophy
US8942428B2 (en) 2009-05-01 2015-01-27 Microsoft Corporation Isolate extraneous motions
US9377857B2 (en) 2009-05-01 2016-06-28 Microsoft Technology Licensing, Llc Show body position
US8649554B2 (en) 2009-05-01 2014-02-11 Microsoft Corporation Method to control perspective for a camera-controlled computer
US9383823B2 (en) 2009-05-29 2016-07-05 Microsoft Technology Licensing, Llc Combining gestures beyond skeletal
US8856691B2 (en) 2009-05-29 2014-10-07 Microsoft Corporation Gesture tool
US20100306716A1 (en) 2009-05-29 2010-12-02 Microsoft Corporation Extending standard gestures
US8542252B2 (en) 2009-05-29 2013-09-24 Microsoft Corporation Target digitization, extraction, and tracking
US9400559B2 (en) 2009-05-29 2016-07-26 Microsoft Technology Licensing, Llc Gesture shortcuts
US8418085B2 (en) 2009-05-29 2013-04-09 Microsoft Corporation Gesture coach
US8145594B2 (en) 2009-05-29 2012-03-27 Microsoft Corporation Localized gesture aggregation
US20100302138A1 (en) 2009-05-29 2010-12-02 Microsoft Corporation Methods and systems for defining or modifying a visual representation
US9141193B2 (en) 2009-08-31 2015-09-22 Microsoft Technology Licensing, Llc Techniques for using human gestures to control gesture unaware programs
US9400548B2 (en) 2009-10-19 2016-07-26 Microsoft Technology Licensing, Llc Gesture personalization and profile roaming
US8843857B2 (en) 2009-11-19 2014-09-23 Microsoft Corporation Distance scalable no touch computing
KR20110066631A (ko) 2009-12-11 2011-06-17 한국전자통신연구원 게임 기획 평가 장치 및 그 방법
US9244533B2 (en) 2009-12-17 2016-01-26 Microsoft Technology Licensing, Llc Camera navigation for presentations
US9019201B2 (en) 2010-01-08 2015-04-28 Microsoft Technology Licensing, Llc Evolving universal gesture sets
US9268404B2 (en) 2010-01-08 2016-02-23 Microsoft Technology Licensing, Llc Application gesture interpretation
US8631355B2 (en) 2010-01-08 2014-01-14 Microsoft Corporation Assigning gesture dictionaries
US20110223995A1 (en) 2010-03-12 2011-09-15 Kevin Geisner Interacting with a computer based application
US8457353B2 (en) 2010-05-18 2013-06-04 Microsoft Corporation Gestures and gesture modifiers for manipulating a user-interface
US20110289455A1 (en) 2010-05-18 2011-11-24 Microsoft Corporation Gestures And Gesture Recognition For Manipulating A User-Interface
US9245177B2 (en) 2010-06-02 2016-01-26 Microsoft Technology Licensing, Llc Limiting avatar gesture display
JP5073013B2 (ja) 2010-06-11 2012-11-14 任天堂株式会社 表示制御プログラム、表示制御装置、表示制御方法および表示制御システム
KR20120064563A (ko) * 2010-12-09 2012-06-19 한국전자통신연구원 이질적 정보를 이용하여 가상 휴먼의 표정을 제어하기 위한 장치 및 그 방법
CN102637071A (zh) 2011-02-09 2012-08-15 英华达(上海)电子有限公司 应用于多媒体输入设备的多媒体输入方法
JP6074170B2 (ja) 2011-06-23 2017-02-01 インテル・コーポレーション 近距離動作のトラッキングのシステムおよび方法
US8928585B2 (en) 2011-09-09 2015-01-06 Thales Avionics, Inc. Eye tracking control of vehicle entertainment systems

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1939564A (zh) * 2005-09-27 2007-04-04 夏普株式会社 传感设备、程序执行设备及成像系统
US20110221755A1 (en) * 2010-03-12 2011-09-15 Kevin Geisner Bionic motion
CN102760198A (zh) * 2011-04-27 2012-10-31 德信互动科技(北京)有限公司 近距离体感互动装置和方法
CN102955565A (zh) * 2011-08-31 2013-03-06 德信互动科技(北京)有限公司 人机互动系统和方法

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107592575A (zh) * 2017-09-08 2018-01-16 广州华多网络科技有限公司 一种直播方法、装置、系统及电子设备
CN107592575B (zh) * 2017-09-08 2021-01-26 广州方硅信息技术有限公司 一种直播方法、装置、系统及电子设备
WO2020042727A1 (zh) * 2018-08-28 2020-03-05 腾讯科技(深圳)有限公司 一种应用场景的交互方法和移动终端以及存储介质
JP2021516836A (ja) * 2018-08-28 2021-07-08 テンセント・テクノロジー・(シェンジェン)・カンパニー・リミテッド アプリケーションシーンにおけるインタラクティブ方法並びにその方法を実行するモバイル端末及びコンピュータプログラム
JP7026267B2 (ja) 2018-08-28 2022-02-25 テンセント・テクノロジー・(シェンジェン)・カンパニー・リミテッド アプリケーションシーンにおけるインタラクティブ方法並びにその方法を実行するモバイル端末及びコンピュータプログラム
US11383166B2 (en) 2018-08-28 2022-07-12 Tencent Technology (Shenzhen) Company Limited Interaction method of application scene, mobile terminal, and storage medium
CN111659114A (zh) * 2019-03-08 2020-09-15 阿里巴巴集团控股有限公司 互动游戏生成方法和装置、处理方法和装置及电子设备
CN111659114B (zh) * 2019-03-08 2023-09-15 阿里巴巴集团控股有限公司 互动游戏生成方法和装置、处理方法和装置及电子设备
CN111013135A (zh) * 2019-11-12 2020-04-17 北京字节跳动网络技术有限公司 一种交互方法、装置、介质和电子设备

Also Published As

Publication number Publication date
EP3007786A1 (en) 2016-04-20
RU2015148842A (ru) 2017-07-19
BR112015028380A2 (pt) 2017-07-25
US20160136516A1 (en) 2016-05-19
WO2014201347A1 (en) 2014-12-18
US9873038B2 (en) 2018-01-23

Similar Documents

Publication Publication Date Title
CN105307737A (zh) 互动视频游戏
US20210121779A1 (en) Augmented reality gaming systems and methods
CN107613310B (zh) 一种直播方法、装置及电子设备
US9884254B2 (en) Augmented reality gaming systems and methods
EP3348952A1 (en) Method, apparatus, and computer program stored on computer readable medium for providing dart game lesson mode
US20170370682A1 (en) Server and Dart Game Device for Providing Dart Game in Accordance with Hitting Area on Basis of Location of Dart Pin, and Computer Program
US20160290772A1 (en) Method and apparatus for providing dart game match-up mode and computer-readable medium therefor
US11484760B2 (en) Interactive basketball system
US9586135B1 (en) Video motion capture for wireless gaming
JPWO2009028690A1 (ja) ゲーム装置、ゲームプログラム及びゲーム装置の制御方法
US9526987B2 (en) Storage medium, game apparatus, game system and game controlling method
US10350486B1 (en) Video motion capture for wireless gaming
US20210146265A1 (en) Augmented reality system for enhancing the experience of playing with toys
EP3967968B1 (en) Dart game apparatus and dart game system
JP2006260602A (ja) 画像処理装置
JP6803360B2 (ja) ゲームプログラム、方法、および情報処理装置
EP3473971A1 (en) Dart game apparatus and dart game system providing lesson image
KR101348419B1 (ko) 영상컨텐츠를 제공하는 가상 골프 시뮬레이션 장치 및 그 방법
JP2011239948A (ja) 画像認識によるラクガキ装置
KR20200139754A (ko) 자동화된 시각 강화 카메라 시스템 및 프로세스
US20230191221A1 (en) Interactive soccer system
CN104063048A (zh) 用于在计算机模拟中捕捉对象时需要附加用户输入的方案
JP2015230683A (ja) 画像処理装置、画像処理方法及び画像処理プログラム
JP2023086389A (ja) プログラム、玩具及び玩具セット

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20160203