CN105929968B - 一种基于图像变换的行为干预的实现方法及系统 - Google Patents

一种基于图像变换的行为干预的实现方法及系统 Download PDF

Info

Publication number
CN105929968B
CN105929968B CN201610364192.3A CN201610364192A CN105929968B CN 105929968 B CN105929968 B CN 105929968B CN 201610364192 A CN201610364192 A CN 201610364192A CN 105929968 B CN105929968 B CN 105929968B
Authority
CN
China
Prior art keywords
amplitude
display image
turn
target direction
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201610364192.3A
Other languages
English (en)
Other versions
CN105929968A (zh
Inventor
郑瑜
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
JRD Communication Shenzhen Ltd
Original Assignee
JRD Communication Shenzhen Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by JRD Communication Shenzhen Ltd filed Critical JRD Communication Shenzhen Ltd
Priority to CN201610364192.3A priority Critical patent/CN105929968B/zh
Publication of CN105929968A publication Critical patent/CN105929968A/zh
Application granted granted Critical
Publication of CN105929968B publication Critical patent/CN105929968B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/012Head tracking input arrangements
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017Gesture based interaction, e.g. based on a set of recognized hand gestures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/20Movements or behaviour, e.g. gesture recognition
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/20Movements or behaviour, e.g. gesture recognition
    • G06V40/28Recognition of hand or arm movements, e.g. recognition of deaf sign language
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/01Indexing scheme relating to G06F3/01
    • G06F2203/012Walk-in-place systems for allowing a user to walk in a virtual environment while constraining him to a given position in the physical environment

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Health & Medical Sciences (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • General Health & Medical Sciences (AREA)
  • Psychiatry (AREA)
  • Social Psychology (AREA)
  • Multimedia (AREA)
  • Processing Or Creating Images (AREA)

Abstract

本发明公开一种基于图像变换的行为干预的实现方法,包括获取行为干预的目标方向;获取使用者在运动行为中的旋动方向;利用目标方向与旋动方向的一致性对场景中的显示图像进行调整,使得显示图像在目标方向上的调整幅度小于实际应调整幅度;输出调整后的显示图像。本发明还公开一种基于图像变换的行为干预的实现系统。通过这种方式,本发明根据使用者的旋动方向与目标方向的一致性对显示图像进行一次或多次调整,从而使得最终输出的显示图像,在目标方向上的调整幅度小于实际应调整幅度,使用者感知到这种变化,就会不自觉地朝目标方向扭转以期矫正或弥补这种变化,从而达到影响和干预使用者的运动行为,实现如避开障碍物或转身等特定目的。

Description

一种基于图像变换的行为干预的实现方法及系统
技术领域
本发明涉及图像处理、虚拟现实技术、增强现实技术领域,特别是涉及一种基于图像变换的行为干预的实现方法及系统。
背景技术
虚拟现实(Virtual Reality,VR)是近年来出现的高新技术,也称灵境技术。虚拟现实是利用电脑模拟产生一个三维空间的虚拟世界,提供使用者关于视觉、听觉、触觉等感官的模拟,让使用者如同身历其境一般,可以及时、没有限制地观察三维空间内的事物。增强现实(Augment Reality,AR)是在VR技术基础上发展起来的,对真实环境和虚拟物体叠加到一个画面或空间的人机交互技术。
虚拟现实和增强现实的使用者通常需要佩戴浸没式或是透视式的头盔,这种头盔会导致用户看不到设备后边或者是设备之外的环境。当用户处于可移动的条件时,比如用户采取站立行走姿态,如果周围环境有障碍物体包括建筑物的墙壁,则可能会出现安全问题或使用不便。
另外当用户同虚拟现实或增强现实环境内的内容,或其他使用者存在互动的使用场景时,应用中需要对使用者在佩戴头盔之后的动作进行诱导和干预,比如让用户潜移默化的转身,走弧线,以达到应用或游戏需要的效果,现有技术中通过字幕提醒或其他方式让用户有意识地实现上述行为,影响用户在使用场景中的沉浸感。
发明内容
本发明主要解决的技术问题是提供一种基于图像变换的行为干预的实现方法及系统,能够解决用户在虚拟现实和增强现实系统中存在的安全、使用不便问题,以及解决虚拟场景中用户沉浸感不足的问题。
为解决上述技术问题,本发明采用的一个技术方案是:提供一种基于图像变换的行为干预的实现方法,该方法包括:
获取行为干预的目标方向;
获取使用者在运动行为中的旋动方向;
利用目标方向与旋动方向的一致性对场景中的显示图像进行调整,使得显示图像在目标方向上的调整幅度小于实际应调整幅度;
输出调整后的显示图像。
其中,利用目标方向与旋动方向的一致性对场景中的显示图像进行调整使得显示图像在目标方向上的调整幅度小于实际应调整幅度包括:
判断旋动方向与目标方向是否一致;
若旋动方向与目标方向一致,则在旋动方向上调整显示图像,使显示图像的调整幅度小于实际应调整幅度;
以及若旋动方向与目标方向不一致,则在旋动方向上调整显示图像,使显示图像的调整幅度等于实际应调整的幅度。
其中,使显示图像的调整幅度小于实际应调整幅度包括:
获取实际应调整幅度对应的图像处理参数和干预参数,干预参数是促使显示图像调整幅度变小的参数;
利用图像处理参数和干预参数对显示图像进行调整。
其中,获取实际应调整幅度对应的图像处理参数和干预参数之前包括:
激活在目标方向的干预指令,利用干预指令获取预先设定的干预参数;
将使用者的旋动方向转换成实际应调整幅度对应的图像处理参数。
其中,目标方向为第一矢量角,旋动方向为第二矢量角,干预参数为叠加在第二矢量角上的角度参数。
其中,利用图像处理参数和干预参数对显示图像进行调整包括:
将图像处理参数和干预参数作为显示的图像的输入参数对显示的图像进行旋转变换。
其中,目标方向为第一矢量角,旋动方向为第二矢量角,旋动方向与目标方向一致为第二矢量角的方向与第一矢量角的方向相同,旋动方向与目标方向不一致为第二矢量角的方向与第一矢量角的方向背离或相反;利用目标方向与旋动方向的一致性对场景中的显示图像进行调整使得显示图像在目标方向上的调整幅度小于实际应调整幅度包括:
判断旋动方向与目标方向是否一致;
若旋动方向与目标方向一致,则在旋动方向上调整显示图像,使显示图像的调整幅度等于实际应调整幅度;
以及若旋动方向与目标方向不一致,则在旋动方向上调整显示图像,使显示图像的调整幅度大于实际应调整幅度;使得经过多次调整后,显示图像在干预停止前的综合调整效果是在目标方向上的调整幅度小于实际应调整幅度。
为解决上述技术问题,本发明采用的另一技术方案是:提供一种基于图像变换的行为干预的实现系统,该系统包括:
干预指令模块,干预指令模块用于获取行为干预的目标方向;
运动检测模块,运动检测模块用于获取使用者在运动行为中的旋动方向;
图像处理模块,图像处理模块用于利用目标方向与旋动方向的一致性对场景中的显示图像进行调整使得显示图像在目标方向上的调整幅度小于实际应调整幅度;
图像显示模块,图像显示模块用于输出调整后的显示图像。
其中,图像处理模块包括:
判断单元,判断单元用于判断旋动方向与目标方向是否一致;
调整单元,调整单元用于若旋动方向与目标方向一致,则在旋动方向上调整显示图像,使显示图像的调整幅度小于实际应调整幅度;
以及若旋动方向与目标方向不一致,则在旋动方向上调整显示图像,使显示图像的调整幅度等于实际应调整的幅度。
其中,干预指令模块还用于激活在目标方向上的干预参数,并将干预参数传递给图像处理模块。
本发明的有益效果是:区别于现有技术的情况,本发明通过获取行为干预的目标方向;获取使用者在运动行为中的旋动方向;利用目标方向与旋动方向的一致性对场景中的显示图像进行调整,使得显示图像在目标方向上的调整幅度小于实际应调整幅度;输出调整后的显示图像。通过这种方式,本发明在使用者运动过程中,根据使用者的旋动方向与目标方向的一致性对显示图像进行一次或多次调整,从而使得最终输出的显示图像,也就是在行为干预停止前的显示图像,在目标方向上的调整幅度小于实际应调整幅度,使用者感知到这种变化,就会不自觉地朝目标方向扭转以期矫正或弥补这种变化,从而达到影响和干预使用者的运动行为,实现如避开障碍物或转身等特定目的。
附图说明
图1是本发明基于图像变换的行为干预的实现方法第一实施方式的流程示意图;
图2是本发明基于图像变换的行为干预的实现方法第二实施方式的流程示意图;
图3是图2中步骤S24的具体流程示意图;
图4是本发明基于图像变换的行为干预的实现系统一实施方式的结构示意图;
图5是本发明基于图像变换的行为干预的实现系统一实体装置的结构示意图。
具体实施方式
为使本领域的技术人员更好地了解本发明的技术方案,下面结合附图和具体实施方式对本发明所提供的一种基于图像变换的行为干预的实现方法及系统做进一步详细阐述。
请参阅图1,本发明基于图像变换的行为干预的实现方法第一实施方式,包括:
步骤S11:获取行为干预的目标方向;
步骤S12:获取使用者在运动行为中的旋动方向;
具体地,VR技术和AR技术联系紧密,AR技术是在VR技术发展起来的,两者均涵盖了计算机视觉、图形学、图像处理、多传感技术、显示技术、人机交互技术等领域。两者都需要计算机生成相应的虚拟场景,都需要使用者使用头盔或类似显示设备,这样才能将计算机产生的虚拟场景呈现在使用者眼前,然后,使用者都需要通过相应设备与计算机产生的虚拟场景进行实时互动交互。
在VR系统中强调用户在虚拟场景中视觉、听觉、触觉等感官的完全浸没,使用者通常佩戴浸没式头盔显示器。而在AR系统中,强调使用者在现实世界的存在性并努力维持其感官效果的不变性,使用者通常佩戴透视式头盔显示器,使虚拟环境与真实环境相融合。
在这两种系统中,使用者佩戴头盔显示器后,一般无法看到头盔显示器的后方或者头盔显示器之外的环境,当用户处于可移动的条件时,比如在某一游戏场景中,为了提高使用者在游戏中的沉浸感,不能使用字幕等的方式提醒使用者有障碍物或者需要转身等动作,需要让使用者潜移默化地转身、走弧线,此时就需要通过相应设备的检测,再配合图像处理设备对使用者的运动行为进行诱导和干预。
首先要获取到这种对使用者的动作进行诱导和干预的需求,这种需求来自于应用场景的设计或者是利用相应设备如识别设备、传感器设备等检测到的真实环境的障碍物等,这种需求包含行为干预的目标方向。
获取到行为干预的目标方向后,利用相应设备如动作捕捉设备,动作捕捉设备用于捕捉使用者身体各个部位,如头部、手臂、腿部等的动作,获取使用者在运动行为中的旋动方向。
其中,目标方向及旋动方向都是对运动行为的一个概括概念,两者均可包括扭转角度、扭转方向,或者包括前行距离、前行方向等其他表征运动行为的参数。
本实施方式中,目标方向及旋动方向的描述均是从以用户视点为中心的视场方向。
步骤S13:利用目标方向与旋动方向的一致性对场景中的显示图像进行调整,使得显示图像在目标方向上的调整幅度小于实际应调整幅度;
使用者佩戴头盔显示设备或其他显示设备时,由计算机生成的虚拟场景随着显示设备的运动进行场景切换,而计算机生成的虚拟场景通常是基于显示图像的绘制技术,通过对显示图像的调整变换实现不同场景之间的切换。
正常情况下,显示图像随着使用者的旋动方向的变化进行不断调整,以使得呈现给使用者的显示图像始终在以用户视点为中心的视场方向上。本实施方式中,为了达到对使用者的动作进行诱导和干预的目的,在使用者运动过程中,根据使用者的旋动方向与目标方向是否一致的情况,对显示图像进行调整,增大或减小显示图像的实际应调整幅度,使得在一次或多次调整后的最终输出的显示图像,在目标方向上的调整幅度小于实际应调整幅度。
为了让使用者在不自觉中感受到显示图像的变化,这种调整通常是微调,在诱导和干预的整个过程中,需要不断获取使用者的旋动方向,在旋动方向上对显示图像进行多次调整,直到干预停止。
具体到每一次调整时,并不必然要使显示图像在目标方向上的调整幅度小于实际应调整幅度,只要使得在干预停止前的显示图像的综合调整效果是在目标方向上的调整幅度小于实际应调整幅度即可。
举例来说,可使当旋动方向与目标方向一致时,对显示图像进行调整,使得在旋动方向上的调整幅度小于实际应调整幅度,当旋动方向与目标方向不一致时,对显示图像进行调整,使得在旋动方向上的调整幅度等于实际应调整幅度;
或者可使当旋动方向与目标方向一致时,对显示图像进行调整,使得在旋动方向上的调整幅度等于实际应调整幅度,当旋动方向与目标方向不一致时,对显示图像进行调整,使得在旋动方向上的调整幅度大于实际应调整幅度;
或者可使当旋动方向与目标方向一致时,对显示图像进行调整,使得在旋动方向上的调整幅度小于实际应调整幅度,当旋动方向与目标方向不一致时,对显示图像进行调整,使得在旋动方向上的调整幅度大于实际应调整幅度;
或者可使当旋动方向与目标方向一致时,对显示图像进行调整,使得在旋动方向上的调整幅度大于实际应调整幅度,当旋动方向与目标方向不一致时,对显示图像进行调整,使得在旋动方向上的调整幅度大于实际应调整幅度,且这种不一致时的超额调整幅度大于一致时的超额调整幅度,其中超额调整幅度指大于实际应调整幅度的额度。
以上仅列举了4种在使用者旋动过程中对显示图像的调整方式,在其他实施方式中,还可有更多的调整方式,以能满足最终的调整效果是在目标方向上的调整幅度小于实际应调整幅度即可。
步骤S14:输出调整后的显示图像。
在使用者不断旋动的过程中,计算机对每一次的显示图像进行调整后,在显示设备中输出,使用者看到变化后的场景,一次或多次微调后使用者会感知到这种变化的场景偏移目标方向,就会潜移默化地向目标方向扭转以期矫正或弥补这种偏移,从而达到利用图像变换实现使用者行为干预的目的。
可以看出,本实施方式的基于图像变化的行为干预的实现方法,通过获取行为干预的目标方向;获取使用者在运动行为中的旋动方向;利用目标方向与旋动方向的一致性对场景中的显示图像进行调整,使得显示图像在目标方向上的调整幅度小于实际应调整幅度;输出调整后的显示图像。通过这种方式,本发明在使用者运动过程中,根据使用者的旋动方向与目标方向的一致性对显示图像进行一次或多次调整,从而使得最终输出的显示图像,在目标方向上的调整幅度小于实际应调整幅度,使用者感知到这种变化,就会不自觉地朝目标方向扭转以期矫正或弥补这种变化,从而达到影响和干预使用者的运动行为,实现如避开障碍物或转身等特定目的。
如图2所示,本发明基于图像变换的行为干预的实现方法第二实施方式,包括:
步骤S21:获取行为干预的目标方向;
步骤S22:获取使用者在运动行为中的旋动方向;
具体地,目标方向和旋动方向是以用户视点为中心的视线方向,目标方向可为第一矢量角,包括目标角度和目标方向,旋动方向可为第二矢量角,包括旋动角度和旋动方向。
获取对使用者的动作进行诱导和干预的需求,这种需求来自于应用场景的设计或者是利用相应设备如识别设备、传感器设备等检测到的真实环境的障碍物等,这种需求包含行为干预的目标方向。
获取到行为干预的目标方向后,利用相应设备如动作捕捉设备,动作捕捉设备用于捕捉使用者身体各个部位,如头部、手臂、腿部等的动作,获取使用者在运动行为中的旋动方向。
步骤S23:判断旋动方向与目标方向是否一致;
在本实施方式的一些应用场景中,可通过首先确定场景中的目标物或绕行物,其中目标物是行为干预的需求目标,绕行物是使用对象应避免碰撞的物体;
然后判断旋动方向是否朝向目标物或绕行物;
若旋动方向朝向目标物,则判断为方向一致,若旋动方向朝向绕行物,则判断为方向不一致。
在其他实施方式中,也可以将第一矢量角的方向定义为正方向,那么与第一矢量角的方向相反或背离的方向为负方向,如果第二矢量角的方向为负方向,则旋动方向与目标方向不一致,如果第二矢量角的方向为正方向,则旋动方向与目标方向一致。
步骤S24:若旋动方向与目标方向一致,则在旋动方向上调整显示图像,使显示图像的调整幅度小于实际应调整幅度;
在步骤S24中,对显示图像进行调整,如图3所示,具体步骤可为:
子步骤S201:获取实际应调整幅度对应的图像处理参数和干预参数,干预参数是促使显示图像调整幅度变小的参数;
具体地,基于VR或AR的技术和应用,绝大多数是设计为以使用者身体中轴线为中心轴的三维空间内的图像处理和显示系统。虽然有柱面和球面图像系的区别,但图像的处理和显示均需要一个输入参数的激发,即显示设备本身或与显示设备通讯的附属设备所采集到的该显示设备或附属设备在三维空间内的某一个或多个维度上的旋动角度。比如在水平维度内,采集到显示设备在水平维度俯视顺时针方向旋转了10度,则根据该参数和场景的设计蓝图,计算机生成三维空间内以使用者视点为中心旋转10度之后的图像,对使用者来说,就看到了场景向右旋转了10度的景象。
因此,可将使用者的旋动方向,即第二矢量角的角度和方向,作为显示图像的实际应调整幅度对应的图像处理参数;同时激活在目标方向的干预指令,利用干预指令获取预先设定的干预参数,这里所述的干预参数是促使显示图像调整幅度变小的参数,可选附加在第二矢量角上的角度参数或百分比值。
需要说明的是,在其他实施方式中,激活在目标方向的干预指令,利用干预指令获取预先设定的干预参数的步骤也可选在步骤S21之前或之后进行,干预指令激活后,在每一次图像调整的过程,都需要对获取的使用对象的旋动方向进行分析,若与目标方向一致,则在显示图像调整时使用干预参数。
子步骤S202:利用图像处理参数和干预参数对显示图像进行调整。
将图像处理参数和干预参数作为图像处理的输入参数对显示图像进行以用户视点为中心的调整,以步骤S201中的举例来说,采集到显示设备在水平维度俯视顺时针方向旋转了10度,将俯视顺时针方向旋转了10度作为图像处理参数,同时获取预先设定为-1度的干预参数,利用该图像处理参数和干预参数后生成三维空间内以使用者视点为中心旋转9度之后的图像,对使用者来说,就看到了向右旋转了9度的场景,相比实际应调整的幅度变小。
需要说明的是,以上举例中所列数字仅是为了便于阐述,并不做具体限定。
步骤S25:以及若旋动方向与目标方向不一致,则在旋动方向上调整显示图像,使显示图像的调整幅度等于实际应调整的幅度。
当旋动方向与目标方向不一致时,将旋动方向转换成对应实际应调整幅度的图像处理的输入参数,对显示图像进行调整。
步骤S26:输出调整后的显示图像。
在使用者不断旋动的过程中,计算机对每一次的显示图像进行调整后,在显示设备中输出,使用者看到变化后的场景,一次或多次微调后使用者会感知到这种变化的场景偏移目标方向,就会潜移默化地向目标方向扭转以期矫正或弥补这种偏移,从而达到利用图像变换实现使用者行为干预的目的。
为了更加直观地表述本实施方式的一系列步骤,下面以一应用场景为例进行具体阐述,本应用场景中的数字仅是为了便于阐述,并不做具体限定。
本实施方式的一应用场景:
用户佩戴头戴式游戏眼罩,并且在用户正前方几米外有一个柱子阻挡,根据游戏场景设计或者设备安全设计的要求,此时希望引导用户向右扭转一些身体及行动方向,以防与柱子碰撞。
可以看出,行为干预的目标方向为俯视顺时针方向,激活在俯视顺时针方向的干预指令,获取系统预先设定的干预参数,比如-1度,则当用户带着眼罩向左摆头的时候,比如头部扭转了5度,旋动方向为俯视逆时针方向的5度,与目标方向不一致,将旋动方向的角度5度作为图像处理的输入参数,对显示图像进行调整生成三维空间内以使用者视点为中心俯视逆时针旋转5度之后的图像;
当用户带着眼罩向右回头时,比如头部扭转6度,旋动方向为俯视顺时针的6度,将旋动方向的6度以及干预参数的-1度作为图像处理的输入参数,对显示图像进行调整生成三维空间内以使用者视点为中心俯视顺时针旋转5度之后的图像,相比实际应调整的在俯视顺时针旋转6度的图像来说,调整幅度变小。
以这种方式在每次用户带着眼罩向右摆头时,显示图像的调整幅度都会额外减少干预参数这么大的一个角度,而用户向左摆头时,显示图像以实际应调整幅度进行图像处理,几次之后用户的原视场已经向左偏移了,如果此时用户不向右扭转身体,又要看到原视场内的场景,头部和身体已经扭曲,因此用户会不自觉地向右扭转身体以纠正视场角度,最终达到对使用者的动作进行诱导和干预的效果,停止干预指令。
可以看出,本发明基于图像变换的行为干预的实现方法第二实施方式,通过获取行为干预的目标方向,及使用者在运动行为中的旋动方向,当旋动方向与目标方向一致时,减小显示图像的实际应调整幅度,当旋动方向与目标方向不一致时,按照实际应调整幅度调整显示图像,将调整后的显示图像输出呈现给使用者。通过这种方式,本发明在对显示图像进行一次或多次调整,使得最终输出的显示图像在目标方向上的调整幅度小于实际应调整幅度,使用者感知到这种变化,就会不自觉地朝目标方向扭转以期矫正或弥补这种变化,从而达到影响和干预使用者的运动行为的目的。
如图4所示,本发明基于图像变换的行为干预的实现系统一实施方式,包括干预指令模块31、运动检测模块32、图像处理模块33及图像显示模块34,各模块之间的连接方式如图4所示。
干预指令模块31用于获取行为干预的目标方向;
具体地,干预指令模块31还用于激活在目标方向上的干预参数,并将干预参数传递给图像处理模块33。
运动检测模块32用于获取使用者在运动行为中的旋动方向;
在使用者运动过程中,通过运动检测模块32检测使用者头部的旋动方向,然后将旋动方向转换成图像处理参数传递给图像处理模块33。当然,也可检测使用者手臂、腿部的旋动方向,以实际需求为准。
图像处理模块33用于利用目标方向与旋动方向的一致性对场景中的显示图像进行调整使得显示图像在目标方向上的调整幅度小于实际应调整幅度;
本实施方式中,图像处理模块33具体包括判断单元301及调整单元302,判断单元301用于判断旋动方向与目标方向是否一致;调整单元302用于若旋动方向与目标方向一致,则在旋动方向上调整显示图像,使显示图像的调整幅度小于实际应调整幅度,以及若旋动方向与目标方向不一致,则在旋动方向上调整显示图像,使显示图像的调整幅度等于实际应调整的幅度;
在其他实施方式中,调整单元302可用于若旋动方向与目标方向一致,则在旋动方向上调整显示图像,使显示图像的调整幅度等于实际应调整幅度,以及若旋动方向与目标方向不一致,则在旋动方向上调整显示图像,使显示图像的调整幅度大于实际应调整的幅度。
图像显示模块34用于输出调整后的显示图像。
本发明基于图像变换的行为干预的实现系统,可选为VR系统、AR系统或其他图像处理系统。如图5所示,是该实现系统一实体装置,包括可穿戴虚拟现实设备41和计算机控制设备42,可穿戴虚拟现实设备41包括运动检测传感器401、头盔显示器402,计算机控制设备42包括处理器403及图形处理器404。
处理器403用于获取行为干预的目标方向;
具体地,行为干预的目标方向可以是根据场景需求预先设定的,也可以是通过运动检测传感器401获取的现实环境中的需求方向;
处理器403还用于激活在目标方向上的干预参数,并将干预参数传递给图形处理器404。
运动检测传感器401用于获取使用者在运动行为中的旋动方向;
在使用者运动过程中,通过运动检测传感器401检测使用者头部的旋动方向,将旋动方向转换成图像处理参数传递给图形处理器404。当然,运动检测传感器401也可检测使用者手臂、腿部的旋动方向,以实际需求为准。
图形处理器404用于利用目标方向与旋动方向的一致性对场景中的显示图像进行调整使得显示图像在目标方向上的调整幅度小于实际应调整幅度;
头盔显示器402用于输出调整后的显示图像。
在本发明所提供的基于图像变换的行为干预的系统的两个实施方式中,应该理解到,所揭露的系统,装置和方法,可以通过其它的方式实现。例如,以上所描述的装置实施方式仅仅是示意性的,例如,所述模块或单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,装置或单元的间接耦合或通信连接,可以是电性,机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施方式方案的目的。
另外,在本发明各个实施方式中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)或处理器(processor)执行本发明各个实施方式所述方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述仅为本发明的实施方式,并非因此限制本发明的专利范围,凡是利用本发明说明书及附图内容所作的等效结构或等效流程变换,或直接或间接运用在其他相关的技术领域,均同理包括在本发明的专利保护范围内。

Claims (10)

1.一种基于图像变换的行为干预的实现方法,其特征在于,所述方法包括:
获取所述行为干预的目标方向;
获取使用者在运动行为中的旋动方向;
利用所述目标方向与所述旋动方向的一致性对场景中的显示图像进行调整,使得所述显示图像在所述目标方向上的调整幅度小于实际应调整幅度;
输出调整后的显示图像。
2.根据权利要求1所述的方法,其特征在于,所述利用所述目标方向与所述旋动方向的一致性对场景中的显示图像进行调整使得所述显示图像在所述目标方向上的调整幅度小于实际应调整幅度包括:
判断所述旋动方向与所述目标方向是否一致;
若所述旋动方向与所述目标方向一致,则在所述旋动方向上调整所述显示图像,使所述显示图像的调整幅度小于实际应调整幅度;
以及若所述旋动方向与所述目标方向不一致,则在所述旋动方向上调整所述显示图像,使所述显示图像的调整幅度等于实际应调整的幅度。
3.根据权利要求2所述的方法,其特征在于,所述使所述显示图像的调整幅度小于实际应调整幅度包括:
获取所述实际应调整幅度对应的图像处理参数和干预参数,所述干预参数是促使所述显示图像调整幅度变小的参数;
利用所述图像处理参数和干预参数对所述显示图像进行调整。
4.根据权利要求3所述的方法,其特征在于,所述获取所述实际应调整幅度对应的图像处理参数和干预参数之前包括:
激活在所述目标方向的干预指令,利用所述干预指令获取预先设定的所述干预参数;
将所述使用者的旋动方向转换成所述实际应调整幅度对应的图像处理参数。
5.根据权利要求4所述的方法,其特征在于,
所述目标方向为第一矢量角,所述旋动方向为第二矢量角,所述干预参数为附加在所述第二矢量角上的角度参数或百分比例值。
6.根据权利要求5所述的方法,其特征在于,所述利用所述图像处理参数和干预参数对所述显示图像进行调整包括:
将所述图像处理参数和所述干预参数作为所述显示图像的输入参数对所述显示图像进行旋转变换。
7.根据权利要求1所述的方法,其特征在于,所述目标方向为第一矢量角,所述旋动方向为第二矢量角,所述旋动方向与所述目标方向一致为所述第二矢量角的方向与所述第一矢量角的方向相同,所述旋动方向与所述目标方向不一致为所述第二矢量角的方向与所述第一矢量角的方向背离或相反;
所述利用所述目标方向与所述旋动方向的一致性对场景中的显示图像进行调整使得所述显示图像在所述目标方向上的调整幅度小于实际应调整幅度包括:
判断所述旋动方向与所述目标方向是否一致;
若所述旋动方向与所述目标方向一致,则在所述旋动方向上调整所述显示图像,使所述显示图像的调整幅度等于实际应调整幅度;
以及若所述旋动方向与所述目标方向不一致,则在所述旋动方向上调整所述显示图像,使所述显示图像的调整幅度大于实际应调整幅度;使得经过多次调整后,所述显示图像在干预停止前的综合调整效果是在所述目标方向上的调整幅度小于实际应调整幅度。
8.一种基于图像变换的行为干预的实现系统,其特征在于,包括:
干预指令模块,所述干预指令模块用于获取所述行为干预的目标方向;
运动检测模块,所述运动检测模块用于获取使用者在运动行为中的旋动方向;
图像处理模块,所述图像处理模块用于利用所述目标方向与所述旋动方向的一致性对场景中的显示图像进行调整使得所述显示图像在所述目标方向上的调整幅度小于实际应调整幅度;
图像显示模块,所述图像显示模块用于输出调整后的显示图像。
9.根据权利要求8所述的系统,其特征在于,所述图像处理模块包括:
判断单元,所述判断单元用于判断所述旋动方向与所述目标方向是否一致;
调整单元,所述调整单元用于若所述旋动方向与所述目标方向一致,则在所述旋动方向上调整所述显示图像,使所述显示图像的调整幅度小于实际应调整幅度;
以及若所述旋动方向与所述目标方向不一致,则在所述旋动方向上调整所述显示图像,使所述显示图像的调整幅度等于实际应调整的幅度。
10.根据权利要求8所述的系统,其特征在于,所述干预指令模块还用于激活在所述目标方向上的干预参数,并将所述干预参数传递给所述图像处理模块。
CN201610364192.3A 2016-05-27 2016-05-27 一种基于图像变换的行为干预的实现方法及系统 Active CN105929968B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201610364192.3A CN105929968B (zh) 2016-05-27 2016-05-27 一种基于图像变换的行为干预的实现方法及系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610364192.3A CN105929968B (zh) 2016-05-27 2016-05-27 一种基于图像变换的行为干预的实现方法及系统

Publications (2)

Publication Number Publication Date
CN105929968A CN105929968A (zh) 2016-09-07
CN105929968B true CN105929968B (zh) 2019-01-22

Family

ID=56841489

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610364192.3A Active CN105929968B (zh) 2016-05-27 2016-05-27 一种基于图像变换的行为干预的实现方法及系统

Country Status (1)

Country Link
CN (1) CN105929968B (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106873933B (zh) * 2017-02-24 2020-12-18 联想(北京)有限公司 显示方法及电子设备

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104750249A (zh) * 2015-03-02 2015-07-01 联想(北京)有限公司 一种信息处理方法及电子设备

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9568735B2 (en) * 2012-08-07 2017-02-14 Industry-University Cooperation Foundation Hanyang University Wearable display device having a detection function

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104750249A (zh) * 2015-03-02 2015-07-01 联想(北京)有限公司 一种信息处理方法及电子设备

Also Published As

Publication number Publication date
CN105929968A (zh) 2016-09-07

Similar Documents

Publication Publication Date Title
US11181976B2 (en) Perception based predictive tracking for head mounted displays
US10969861B2 (en) Image processing device, image processing method, and image system
EP3117290B1 (en) Interactive information display
US20170358280A1 (en) Method of controlling head-mounted display system
CN110850977A (zh) 一种基于6dof头戴式显示器的立体图像交互方法
TW201903565A (zh) 用於顯示彈幕的方法、裝置以及非揮發性電腦可讀儲存介質
CN107708819A (zh) 用于虚拟现实的回应式动画
JP6121496B2 (ja) ヘッドマウントディスプレイシステムを制御するプログラム
EP3477428B1 (en) Image processing system and method
CN109002162B (zh) 场景切换方法、装置、终端和计算机存储介质
CN105929968B (zh) 一种基于图像变换的行为干预的实现方法及系统
GB2525304B (en) Interactive information display
KR101741149B1 (ko) 가상 카메라의 시점 제어 방법 및 장치
JP7300569B2 (ja) 情報処理装置、情報処理方法およびプログラム
Park et al. Stereoscopic 3D Model Viewer with Improved Depth Perception for Battlefield Visualization
CN118262072A (zh) 信息提示方法、扩展现实设备、装置、介质和程序产品

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant