CN117441149A - 信息处理方法、程序及信息处理系统 - Google Patents
信息处理方法、程序及信息处理系统 Download PDFInfo
- Publication number
- CN117441149A CN117441149A CN202280040218.2A CN202280040218A CN117441149A CN 117441149 A CN117441149 A CN 117441149A CN 202280040218 A CN202280040218 A CN 202280040218A CN 117441149 A CN117441149 A CN 117441149A
- Authority
- CN
- China
- Prior art keywords
- user
- hmd
- hmd user
- surrounding
- information processing
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 230000010365 information processing Effects 0.000 title claims abstract description 66
- 238000003672 processing method Methods 0.000 title claims abstract description 35
- 208000013057 hereditary mucoepithelial dysplasia Diseases 0.000 description 199
- 230000015654 memory Effects 0.000 description 9
- 238000010586 diagram Methods 0.000 description 7
- 230000006870 function Effects 0.000 description 7
- 238000013459 approach Methods 0.000 description 6
- 239000011521 glass Substances 0.000 description 6
- 238000004891 communication Methods 0.000 description 4
- 238000000034 method Methods 0.000 description 4
- 241001310793 Podium Species 0.000 description 3
- 238000012986 modification Methods 0.000 description 3
- 230000004048 modification Effects 0.000 description 3
- 239000004984 smart glass Substances 0.000 description 3
- 238000004590 computer program Methods 0.000 description 2
- 239000000470 constituent Substances 0.000 description 2
- 230000003190 augmentative effect Effects 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 239000000463 material Substances 0.000 description 1
- 238000005192 partition Methods 0.000 description 1
- 238000012545 processing Methods 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 238000012549 training Methods 0.000 description 1
Classifications
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/017—Head mounted
- G02B27/0172—Head mounted characterised by optical features
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/20—Movements or behaviour, e.g. gesture recognition
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/0101—Head-up displays characterised by optical features
- G02B2027/0138—Head-up displays characterised by optical features comprising image capture systems, e.g. camera
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/0101—Head-up displays characterised by optical features
- G02B2027/014—Head-up displays characterised by optical features comprising information/image processing systems
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/017—Head mounted
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T19/00—Manipulating 3D models or images for computer graphics
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Optics & Photonics (AREA)
- Human Computer Interaction (AREA)
- General Engineering & Computer Science (AREA)
- Psychiatry (AREA)
- Social Psychology (AREA)
- Multimedia (AREA)
- Health & Medical Sciences (AREA)
- General Health & Medical Sciences (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Computer Hardware Design (AREA)
- Computer Graphics (AREA)
- Software Systems (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
信息处理方法是由计算机执行的信息处理方法，包括：取得对佩戴着HMD的HMD用户进行拍摄而得到的运动图像、或与由HMD提示的影像内容有关的信息的步骤(步骤S11)；基于上述运动图像或与上述影像内容有关的信息，判定HMD用户是否进行对存在于与HMD用户对应的规定的范围内的周围用户带来影响的行动的步骤(步骤S12)；以及在判定为HMD用户进行对周围用户带来影响的行动的情况下，对HMD用户及周围用户的至少一方提示促使注意的信息的步骤(步骤S14)。
Description
技术领域
本公开涉及信息处理方法、程序及信息处理系统。
背景技术
公开了在用户所佩戴的头戴式显示器(以下记作HMD)上提示影像内容的技术(例如专利文献1及2等)。由此，佩戴着HMD的用户(以下记作HMD用户)能够在处于现实空间(例如办公室等)中的状态下，在影像内容所表示的会议室或教室等虚拟空间中进行演示或讲解的实施或听讲等，或者在影像内容所表示的作业现场等虚拟空间中进行安全训练(危险体验)等。
现有技术文献
专利文献
专利文献1：日本特许第6770178号公报
专利文献2：国际公开第2020/070839号
发明内容
发明要解决的课题
但是，HMD在很多况下遮挡HMD用户的视野，HMD用户多数情况下不知道自身在现实世界中所处于的状况。例如，有HMD用户在虚拟空间中进行演示时在现实世界中也挥动手臂，或在虚拟空间中进行作业时在现实世界中也移动等的情况。此时，HMD用户在现实世界中不能识别出周围的用户的存在，有可能与周围的用户碰撞或接触。
所以，本公开提供能够抑制HMD用户与其周围的用户的碰撞或接触的信息处理方法等。
用来解决课题的手段
有关本公开的信息处理方法，是由计算机执行的信息处理方法，包括：取得对佩戴着头戴式显示器的HMD用户进行拍摄而得到的运动图像、或与由上述头戴式显示器提示的影像内容有关的信息的步骤；基于上述运动图像或与上述影像内容有关的信息，判定上述HMD用户是否进行对存在于与上述HMD用户对应的规定的范围内的周围用户带来影响的行动的步骤；以及在判定为上述HMD用户进行对上述周围用户带来影响的行动的情况下，对上述HMD用户及上述周围用户中的至少一方提示促使注意的信息的步骤。
另外，这些包含性或具体的技术方案也可以由系统、方法、集成电路、计算机程序或计算机可读取的CD－ROM等的记录介质实现，也可以由系统、方法、集成电路、计算机程序及记录介质的任意的组合来实现。
发明效果
根据有关本公开的一技术方案的信息处理方法等，能够抑制HMD用户与其周围的用户的碰撞或接触。
附图说明
图1是表示有关实施方式的信息处理系统的一例的图。
图2是表示有关实施方式的信息处理方法或信息处理系统的应用例的图。
图3是表示有关实施方式的信息处理系统的动作的一例的流程图。
图4A是表示规定的范围的一例的图。
图4B是表示规定的范围的一例的图。
具体实施方式
有关本公开的一技术方案的信息处理方法，是由计算机执行的信息处理方法，包括：取得对佩戴着HMD的HMD用户进行拍摄而得到的运动图像、或与由上述HMD提示的影像内容有关的信息的步骤；基于上述运动图像或与上述影像内容有关的信息，判定上述HMD用户是否进行对存在于与上述HMD用户对应的规定的范围内的周围用户带来影响的行动的步骤；以及在判定为上述HMD用户进行对上述周围用户带来影响的行动的情况下，对上述HMD用户及上述周围用户中的至少一方提示促使注意的信息的步骤。
由此，在基于拍摄HMD用户而得到的运动图像或与由HMD提示的影像内容有关的信息判定为HMD用户进行对周围用户带来影响的行动的情况下，对HMD用户或周围用户提示促使注意的信息，所以能够抑制HMD用户与其周围的用户的碰撞或接触。例如，在相同的区域中能够实现HMD用户和周围用户的共存。
例如，也可以是，在进行上述判定的步骤中，使用与上述影像内容有关的信息对上述影像内容中的上述HMD用户的状况进行分析，基于分析出的状况，判定上述HMD用户是否进行对上述周围用户带来影响的行动。
由此，能够根据影像内容的内容来分析HMD用户处于怎样的状况，所以能够基于分析出的状况来判定HMD用户是否进行对周围用户带来影响的行动。例如，在分析为HMD用户处于挥动手臂或移动的状况的情况下，能够判定为HMD用户进行对周围用户带来影响的行动。
例如，也可以是，在进行上述判定的步骤中，基于上述运动图像判定上述HMD用户的动作，基于判定出的动作，判定上述HMD用户是否进行对上述周围用户带来影响的行动。
由此，能够根据拍摄有HMD用户的运动图像判定HMD用户正在进行怎样的动作，所以能够基于判定出的动作判定HMD用户是否进行对周围用户带来影响的行动。例如，在判定为HMD用户正在挥动手臂或移动的情况下，能够判定为HMD用户进行对周围用户带来影响的行动。
例如，也可以是，信息处理方法还包括判定上述周围用户是否有可能接近上述HMD用户的步骤，在进行上述提示的步骤中，在判定为上述HMD用户进行对上述周围用户带来影响的行动、并且判定为上述周围用户有可能接近上述HMD用户的情况下，对上述HMD用户及上述周围用户中的至少一方提示促使注意的信息。
由此，在周围用户有可能接近HMD用户的情况下，HMD用户与周围的用户碰撞或接触的可能性变高，所以在这样的情况下，提示促使注意的信息，能够抑制HMD用户与周围的用户的碰撞或接触。
例如，上述规定的范围也可以是距上述HMD用户为规定的距离的范围。或者，例如上述规定的范围也可以是上述HMD用户存在的区域。
例如，也可以是，在进行上述提示的步骤中，利用触觉反馈来提示促使注意的信息。
由此，能够利用触觉反馈来促使注意。
有关本公开的一技术方案的程序是使计算计算执行上述的信息处理方法的程序。
由此，能够提供抑制HMD用户与其周围的用户的碰撞或接触的程序。
有关本公开的一技术方案的信息处理系统具备：取得部，取得对佩戴着头戴式显示器的HMD用户进行拍摄而得到的运动图像、或与由上述头戴式显示器提示的影像内容有关的信息；HMD用户状况判定部，基于上述运动图像或与上述影像内容有关的信息，判定上述HMD用户是否进行对存在于与上述HMD用户对应的规定的范围内的周围用户带来影响的行动；以及提示部，在判定为上述HMD用户进行对上述周围用户带来影响的行动的情况下，对上述HMD用户及上述周围用户中的至少一方提示促使注意的信息。
由此，能够提供抑制HMD用户与其周围的用户的碰撞或接触的信息处理系统。
以下，参照附图对实施方式具体地进行说明。
另外，以下说明的实施方式都表示包含性或具体的例子。在以下的实施方式中表示的数值、形状、材料、构成要素、构成要素的配置位置及连接形态、步骤、步骤的顺序等是一例，不是限定本公开的意思。
(实施方式)
以下，对有关实施方式的信息处理系统及信息处理方法进行说明。
图1是表示有关实施方式的信息处理系统10的一例的图。
信息处理系统10是在存在多个用户的办公室等空间中能够与多个用户所佩戴的可穿戴设备等进行通信的系统。多个用户佩戴HMD或智能手表等作为可穿戴设备。信息处理系统10是执行信息处理方法的计算机的一例。例如，信息处理系统10是服务器等的装置。另外，信息处理系统10也可以是HMD。此外，构成信息处理系统10的构成要素也可以分散配置在多个装置中，在此情况下，也可以由多个计算机执行信息处理方法。例如，也可以是构成信息处理系统10的构成要素分散配置在服务器和HMD等中。
信息处理系统10具备取得部11、HMD用户状况判定部12、周围用户状况判定部13及提示部14。信息处理系统10是包括处理器、通信接口及存储器等的计算机。存储器是ROM(Read Only Memory)及RAM(Random Access Memory)等，能够存储由处理器执行的程序。取得部11、HMD用户状况判定部12、周围用户状况判定部13及提示部14由执行保存在存储器中的程序的处理器等实现。例如，取得部11及提示部14经由通信接口与HMD及智能手表等进行信息的收发。
取得部11取得与由HMD提示的影像内容有关的信息。例如，信息处理系统10具有使HMD提示影像内容的功能，既可以将影像内容存储在存储器中，也可以从该存储器取得与由HMD提示的影像内容有关的信息。或者，取得部11也可以从HMD取得与由HMD提示的影像内容有关的信息。
或者，取得部11取得拍摄HMD用户而得到的运动图像。例如，在HMD中，也可以具备拍摄HMD的外部(例如下部)的摄像机，取得部11也可以从该摄像机取得对HMD用户的手臂部分等进行拍摄而得到的运动图像。或者，取得部11也可以从设置在HMD用户存在的空间的顶棚或墙壁等上的摄像机取得拍摄HMD用户而得到的运动图像。此外，取得部11也可以从该摄像机取得拍摄周围用户(详细情况后述)而得到的运动图像。
另外，取得部11既可以取得与由HMD提示的影像内容有关的信息及拍摄HMD用户而得到的运动图像中的双方，也可以仅取得某一方。
此外，取得部11也可以取得表示存在多个用户的空间中的多个用户的位置关系的信息。例如，也可以从设置在存在多个用户的空间的顶棚或墙壁等上的传感器取得表示多个用户的位置关系的信息。该传感器也可以是使用ToF(Time of Flight：飞行时间)方式等的激光扫描器，能够检测多个用户的位置关系。
此外，取得部11也可以取得用户对于HMD用户存在的区域的进出室记录。
另外，取得部11所具有的取得与由HMD提示的影像内容有关的信息的功能、取得拍摄HMD用户而得到的运动图像的功能、取得拍摄周围用户而得到的运动图像的功能、取得表示多个用户的位置关系的信息的功能以及取得用户的进出室记录的功能等也可以分散配置在多个装置中。
HMD用户状况判定部12基于拍摄HMD用户而得到的运动图像、或与由HMD提示的影像内容有关的信息，判定HMD用户是否进行对存在于与HMD用户对应的规定的范围内的周围用户带来影响的行动。关于HMD用户状况判定部12的动作的详细情况在后面叙述。
周围用户状况判定部13判定周围用户是否有可能接近HMD用户。关于周围用户状况判定部13的动作的详细情况在后面叙述。
在判定为HMD用户进行对周围用户带来影响的行动的情况下，提示部14对HMD用户及周围用户中的至少一方提示促使注意的信息。在本实施方式中，在判定为HMD用户进行对周围用户带来影响的行动，并且周围用户有可能接近HMD用户的情况下，提示部14对HMD用户及周围用户中的至少一方提示促使注意的信息。关于提示部14的动作的详细情况在后面叙述。
接着，使用图2及图3对信息处理方法及信息处理系统10的详细情况进行说明。
图2是表示有关实施方式的信息处理方法或信息处理系统10的应用例的图。
如图2所示，HMD用户100佩戴着HMD110，位于HMD用户100的周围的周围用户200佩戴着智能手表210。HMD用户100被HMD110遮挡视野，不知道自身在现实世界中所处于的状况。例如，有HMD用户100在虚拟空间中进行演示时在现实世界中也挥动手臂、或在虚拟空间中进行作业时在现实世界中也移动等的情况。此时，HMD用户100在现实世界中不能识别出周围用户200的存在，有可能与周围用户200碰撞或接触。根据有关实施方式的信息处理方法或信息处理系统10，在这样的状况下能够抑制HMD用户100与周围用户200的碰撞或接触。
图3是表示有关实施方式的信息处理系统10的动作的一例的流程图。另外，由于信息处理系统10是执行有关实施方式的信息处理方法的计算机的一例，所以图3也是表示有关实施方式的信息处理方法的一例的流程图。取得部11对应于信息处理方法中的取得与由HMD110提示的影像内容有关的信息的步骤以及取得拍摄HMD用户100而得到的运动图像的步骤。HMD用户状况判定部12对应于判定HMD用户100是否进行对周围用户200带来影响的行动的步骤。周围用户状况判定部13对应于判定周围用户200是否有可能接近HMD用户100的步骤。提示部14对应于提示促使注意的信息的步骤。
首先，取得部11取得拍摄HMD用户100而得到的运动图像或与由HMD110提示的影像内容有关的信息(步骤S11)。
接着，HMD用户状况判定部12基于拍摄HMD用户100而得到的运动图像或与由HMD110提示的影像内容有关的信息，判定佩戴着HMD110的HMD用户100是否进行对存在于与HMD用户100对应的规定的范围内的周围用户200带来影响的行动(步骤S12)。这里，使用图4A及图4B对与HMD用户100对应的规定的范围进行说明。
图4A及图4B是表示规定的范围的一例的图。
如图4A所示，规定的范围也可以是距HMD用户100为规定的距离的范围。规定的距离没有被特别限定，例如也可以是5m等。例如，HMD用户状况判定部12也可以使用由取得部11取得的多个用户的位置关系(特别是HMD用户100与其他用户的位置关系)，判定在距HMD用户100为规定的距离的范围中是否存在其他用户，将被判定为存在于距HMD用户100为规定的距离的范围中的其他用户设为周围用户200。
另外，HMD用户100所佩戴的可穿戴设备或HMD用户100所持有的便携终端等与其他用户所佩戴的可穿戴设备或其他用户所持有的便携终端等也可以相互通信，取得部11也可以从这些设备取得表示这些设备间的通信强度等的信息。HMD用户状况判定部12也可以使用由取得部11取得的表示通信强度等的信息，判定在距HMD用户100为规定的距离的范围中是否存在其他用户，将被判定为存在于距HMD用户100为规定的距离的范围中的其他用户设为周围用户200。
或者，如图4B所示，规定的范围也可以是HMD用户100存在的区域(例如房间)。另外，HMD用户100存在的区域并不限于房间，也可以是由隔板等划区的区域等。例如，HMD用户状况判定部12也可以使用由取得部11取得的用户对于HMD用户100存在的区域的进出室记录，判定在HMD用户100存在的区域中是否存在其他用户，将被判定为存在于HMD用户100存在的区域中的其他用户设为周围用户200。
例如，HMD用户100对周围用户200带来影响的行动，是HMD用户100有可能与周围用户200碰撞或接触的行动。具体而言，该行动是HMD用户100挥动手臂等或移动等。
例如，HMD用户状况判定部12也可以基于与由HMD110提示的影像内容有关的信息，判定HMD用户100是否进行对周围用户200带来影响的行动。具体而言，HMD用户状况判定部12也可以使用与由HMD110提示的影像内容有关的信息对影像内容中的HMD用户100的状况进行分析，基于分析出的状况来判定HMD用户100是否进行对周围用户200带来影响的行动。与由HMD110提示的影像内容有关的信息例如是HMD用户100正在观看的影像、即HMD用户100的视野的影像。
例如，在HMD用户100正在观看的影像是来自教室等的讲台的影像的情况下，可以分析为影像内容中的HMD用户100的状况是演示中的状况。在此情况下，HMD用户100有可能为了演示中的说明而挥动手臂等，能够判定为进行对周围用户200带来影响的行动。例如，在HMD用户100正在观看的影像是教室等的讲台处于正面的影像的情况下，能够分析为影像内容中的HMD用户100的状况是正在听讲演示的状态。在此情况下，HMD用户100挥动手臂等的可能性低，能够判定为没有进行对周围用户200带来影响的行动。
此外，HMD用户状况判定部12也可以基于在影像内容中被提示的物体与影像内容中的HMD用户100的位置关系来判定HMD用户100是否进行对周围用户200带来影响的行动。例如，在HMD用户100正在观看的影像是来自教室等的讲台的影像、并且在HMD用户100的视野的左侧有处于教室等的讲台附近的屏幕等的情况下，能够分析为影像内容中的HMD用户100的状况是从HMD用户100看在讲台的右侧进行演示中的状况。在此情况下，HMD用户100有可能为了使用处于HMD用户100的左手侧的屏幕的演示中的说明而挥动左臂等，能够判定为进行对周围用户200(特别是处于HMD用户100的左侧的周围用户200)带来影响的行动。
或者，例如HMD用户状况判定部12也可以基于拍摄HMD用户100而得到的运动图像来判定HMD用户100是否进行对周围用户200带来影响的行动。具体而言，HMD用户状况判定部12也可以基于拍摄HMD用户100而得到的运动图像判定HMD用户100的动作，基于判定出的动作判定HMD用户100是否进行对周围用户200带来影响的行动。
如上述那样，在HMD110中也可以具备拍摄HMD110的外部(例如下部)的摄像机，取得部11也可以从该摄像机取得对HMD用户的手臂部分等进行拍摄而得到的运动图像。或者，取得部11也可以从设置在HMD用户100存在的空间的顶棚或墙壁等上的摄像机取得拍摄HMD用户100而得到的运动图像。在这些运动图像中，在HMD用户100挥动手臂的情况下或HMD用户100正在移动的情况下，能够判定为HMD用户100进行对周围用户200带来影响的行动。
接着，在判定为HMD用户100进行对周围用户200带来影响的行动的情况下(步骤S12中为“是”)，周围用户状况判定部13判定周围用户200是否有可能接近HMD用户100(步骤S13)。例如，周围用户状况判定部13也可以使用由取得部11取得的拍摄周围用户200而得到的运动图像来判定周围用户200是否有可能接近HMD用户100。例如，也可以在周围用户200在HMD用户100的周围就座于椅子上而进行作业时站起的情况下，判定为周围用户200有可能接近HMD用户100。或者，也可以在周围用户200朝向HMD用户100的方向的情况下，判定为周围用户200有可能接近HMD用户100。
并且，在判定为HMD用户100进行对周围用户200带来影响的行动、且判定为周围用户200有可能接近HMD用户100的情况下(步骤S13中为“是”)，提示部14对HMD用户100及周围用户200中的至少一方提示促使注意的信息(步骤S14)。提示部14既可以对HMD用户100及周围用户200分别提示促使注意的信息，也可以仅对某一方提示。
例如，提示部14也可以利用触觉反馈来提示促使注意的信息。例如，提示部14也可以对周围用户200所佩戴的智能手表210发送促使注意的信息，通过使智能手表210振动来促使周围用户200注意。在图2中没有表示，但HMD用户100也可以佩戴智能手表，提示部14也可以通过使该智能手表振动而促使HMD用户100注意。
例如，提示部14也可以通过声音或字符等提示促使注意的信息。例如，提示部14也可以对HMD用户100所佩戴的HMD110发送促使注意的信息，使HMD110输出促使注意的声音或显示促使注意的字符。此外，例如提示部14也可以对周围用户200所佩戴的智能手表210发送促使注意的信息，使智能手表210输出促使注意的声音或显示促使注意的字符。在图2中没有表示，但HMD用户100也可以佩戴智能手表，提示部14也可以使该智能手表输出促使注意的声音或显示促使注意的字符。
在判定为HMD用户100没有进行对周围用户200带来影响的行动的情况下(步骤S12中为“否”)，或者在判定为周围用户200不可能接近HMD用户100的情况下(步骤S13中为“否”)，提示部14不提示促使注意的信息。
另外，在图3中，表示了在步骤S12为“是”的情况下进行步骤S13，在步骤S13中为“是”的情况下进行步骤S14的例子，但也可以在步骤S13中为“是”的情况下进行步骤S12，在步骤S12中为“是”的情况下进行步骤S14。
如以上说明，由于在判定为HMD用户100进行对周围用户200带来影响的行动的情况下，对HMD用户100或周围用户200提示促使注意的信息，所以能够抑制HMD用户100与周围用户200的碰撞或接触。例如，在相同的区域中能够实现HMD用户100和周围用户200的共存。
(其他实施方式)
以上，基于实施方式对有关本公开的一个或多个技术方案的信息处理方法及信息处理系统10进行了说明，但本公开并不限定于这些实施方式。只要不脱离本公开的主旨，对各实施方式施以本领域技术人员想到的各种变形后的形态、或将不同实施方式的构成要素组合而构建的形态也可以也包含在本公开的一个或多个技术方案的范围内。
例如，在上述实施方式中，对信息处理系统10具备周围用户状况判定部13的例子进行了说明，但信息处理系统10也可以不具备周围用户状况判定部13。换言之，在上述实施方式中，对信息处理方法包括判定周围用户200是否有可能接近HMD用户100的步骤的例子进行了说明，但信息处理方法也可以不包括该步骤。即，在图3中也可以不进行步骤S13的处理，提示部14也可以在判定为HMD用户100进行对周围用户200带来影响的行动的情况下(步骤S12中为“是”)，对HMD用户100及周围用户200的至少一方提示促使注意的信息(步骤S14)。
例如，在上述实施方式中，将HMD110或智能手表210作为提示促使注意的信息的设备的一例进行了说明，但并不限于此。例如，也可以对HMD用户100或周围用户200所持有的便携终端、或者设置在HMD用户100或周围用户200存在的空间中的显示器或扬声器等提示促使注意的信息。
另外，本公开并不限于HMD，也能够应用于智能眼镜、AR(Augmented Reality：增强现实)眼镜或MR(Mixed Reality：混合现实)眼镜等的头部佩戴装置。即，在本公开中，可以将作为HMD的地方替换为智能眼镜、AR眼镜或MR眼镜等的头部佩戴装置，可以将作为HMD用户的地方替换为佩戴着智能眼镜、AR眼镜或MR眼镜等的头部佩戴装置的用户。
例如，本公开可以作为用来使处理器执行信息处理方法中包含的步骤的程序实现。进而，本公开可以作为记录有该程序的CD－ROM等的非暂时性的计算机可读取的记录介质实现。
例如，在将本公开用程序(软件)实现的情况下，通过利用计算机的CPU、存储器及输入输出电路等的硬件资源执行程序来执行各步骤。即，通过由CPU从存储器或输入输出电路等取得数据并运算，或将运算结果输出到存储器或输入输出电路等，来执行各步骤。
另外，在上述实施方式中，信息处理系统10中包含的各构成要素也可以由专用的硬件构成，或通过执行适合于各构成要素的软件程序来实现。各构成要素也可以通过由CPU或处理器等的程序执行部将记录在硬盘或半导体存储器等的记录介质中的软件程序读出并执行来实现。
上述有关实施方式的信息处理系统10的功能的一部分或全部典型的是由作为集成电路的LSI实现。既可以将它们单独地形成1个芯片，也可以以包含一部分或全部的方式形成1个芯片。此外，集成电路化的方法并不限于LSI，也可以由专用电路或通用处理器实现。也可以利用在LSI制造后能够编程的FPGA(Field Programmable Gate Array)、或能够再构成LSI内部的电路单元的连接或设定的可重构处理器。
进而，只要不脱离本公开的主旨，对本公开的各实施方式施以本领域技术人员想到的范围内的变更后的各种变形例也包含在本公开中。
工业实用性本公开能够应用于使用HMD的系统。
标号说明
10 信息处理系统
11 取得部
12 HMD用户状况判定部
13 周围用户状况判定部
14 提示部
100 HMD用户
110HMD
200 周围用户
210 智能手表
Claims (9)
1.一种信息处理方法，由计算机执行，其中，包括：
取得对佩戴着头戴式显示器的HMD用户进行拍摄而得到的运动图像、或与由上述头戴式显示器提示的影像内容有关的信息的步骤；
基于上述运动图像或与上述影像内容有关的信息，判定上述HMD用户是否进行对存在于与上述HMD用户对应的规定的范围内的周围用户带来影响的行动的步骤；以及
在判定为上述HMD用户进行对上述周围用户带来影响的行动的情况下，对上述HMD用户及上述周围用户中的至少一方提示促使注意的信息的步骤。
2.如权利要求1所述的信息处理方法，其中，
在进行上述判定的步骤中，使用与上述影像内容有关的信息对上述影像内容中的上述HMD用户的状况进行分析，基于分析出的状况，判定上述HMD用户是否进行对上述周围用户带来影响的行动。
3.如权利要求1或2所述的信息处理方法，其中，
在进行上述判定的步骤中，基于上述运动图像判定上述HMD用户的动作，基于判定出的动作，判定上述HMD用户是否进行对上述周围用户带来影响的行动。
4.如权利要求1～3中任一项所述的信息处理方法，其中，
还包括判定上述周围用户是否有可能接近上述HMD用户的步骤，
在进行上述提示的步骤中，在判定为上述HMD用户进行对上述周围用户带来影响的行动、并且判定为上述周围用户有可能接近上述HMD用户的情况下，对上述HMD用户及上述周围用户中的至少一方提示促使注意的信息。
5.如权利要求1～4中任一项所述的信息处理方法，其中，
上述规定的范围是距上述HMD用户为规定的距离的范围。
6.如权利要求1～4中任一项所述的信息处理方法，其中，
上述规定的范围是上述HMD用户存在的区域。
7.如权利要求1～6中任一项所述的信息处理方法，其中，
在进行上述提示的步骤中，利用触觉反馈来提示促使注意的信息。
8.一种程序，其中，使计算机执行权利要求1～7中任一项所述的信息处理方法。
9.一种信息处理系统，其中，具备：
取得部，取得对佩戴着头戴式显示器的HMD用户进行拍摄而得到的运动图像、或与由上述头戴式显示器提示的影像内容有关的信息；
HMD用户状况判定部，基于上述运动图像或与上述影像内容有关的信息，判定上述HMD用户是否进行对存在于与上述HMD用户对应的规定的范围内的周围用户带来影响的行动；以及
提示部，在判定为上述HMD用户进行对上述周围用户带来影响的行动的情况下，对上述HMD用户及上述周围用户中的至少一方提示促使注意的信息。
Applications Claiming Priority (3)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2021101522 | 2021-06-18 | ||
| JP2021-101522 | 2021-06-18 | ||
| PCT/JP2022/014859 WO2022264616A1 (ja) | 2021-06-18 | 2022-03-28 | 情報処理方法、プログラム及び情報処理システム |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN117441149A true CN117441149A (zh) | 2024-01-23 |
Family
ID=84527029
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202280040218.2A Pending CN117441149A (zh) | 2021-06-18 | 2022-03-28 | 信息处理方法、程序及信息处理系统 |
Country Status (4)
| Country | Link |
|---|---|
| US (1) | US20240103281A1 (zh) |
| JP (1) | JPWO2022264616A1 (zh) |
| CN (1) | CN117441149A (zh) |
| WO (1) | WO2022264616A1 (zh) |
Families Citing this family (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2024185331A1 (ja) * | 2023-03-06 | 2024-09-12 | パナソニックＩｐマネジメント株式会社 | 提示制御装置、提示システム、および、提示制御方法 |
Family Cites Families (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US10099122B2 (en) * | 2016-03-30 | 2018-10-16 | Sony Interactive Entertainment Inc. | Head-mounted display tracking |
| JPWO2018173399A1 (ja) * | 2017-03-21 | 2020-01-23 | ソニー株式会社 | 情報処理装置、情報処理方法、およびプログラム |
| JP2019175323A (ja) * | 2018-03-29 | 2019-10-10 | 株式会社バンダイナムコエンターテインメント | シミュレーションシステム及びプログラム |
-
2022
- 2022-03-28 JP JP2023529599A patent/JPWO2022264616A1/ja active Pending
- 2022-03-28 CN CN202280040218.2A patent/CN117441149A/zh active Pending
- 2022-03-28 WO PCT/JP2022/014859 patent/WO2022264616A1/ja active Application Filing
-
2023
- 2023-12-11 US US18/535,148 patent/US20240103281A1/en active Pending
Also Published As
| Publication number | Publication date |
|---|---|
| WO2022264616A1 (ja) | 2022-12-22 |
| JPWO2022264616A1 (zh) | 2022-12-22 |
| US20240103281A1 (en) | 2024-03-28 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US10003769B2 (en) | Video telephony system, image display apparatus, driving method of image display apparatus, method for generating realistic image, and non-transitory computer readable recording medium | |
| KR102282297B1 (ko) | 가상 현실의 오브젝트에 대한 협업적 조작 | |
| CN104869305B (zh) | 处理图像数据的方法及其装置 | |
| KR20160122203A (ko) | 스크린샷의 생성 | |
| US10810801B2 (en) | Method of displaying at least one virtual object in mixed reality, and an associated terminal and system | |
| JP2013527947A5 (zh) | ||
| US20180253824A1 (en) | Picture processing method and apparatus, and storage medium | |
| US10955911B2 (en) | Gazed virtual object identification module, a system for implementing gaze translucency, and a related method | |
| US20210135892A1 (en) | Automatic Detection Of Presentation Surface and Generation of Associated Data Stream | |
| US20240103281A1 (en) | Information processing method, recording medium, and information processing system | |
| US10318612B2 (en) | System and method for implementing screen capture | |
| US11010980B2 (en) | Augmented interface distraction reduction | |
| CN110800314B (zh) | 计算机系统、远程操作通知方法以及记录介质 | |
| EP3805899A1 (en) | Head mounted display system and scene scanning method thereof | |
| US20200342833A1 (en) | Head mounted display system and scene scanning method thereof | |
| CN115883959A (zh) | 用于隐私保护的画面内容控制方法及相关产品 | |
| JP6496220B2 (ja) | 情報配信装置および情報配信プログラム | |
| CN114648315A (zh) | 虚拟面试的方法、装置、设备及存储介质 | |
| CN114442804A (zh) | 边界生成方法、装置、头戴显示设备及可读存储介质 | |
| US9148472B2 (en) | Server, electronic device, server control method, and computer-readable medium | |
| US10754444B2 (en) | Electronic apparatus and control method therefor | |
| KR20170002921A (ko) | 디지털 조립 설명서를 생성하는 장치 및 방법 | |
| US9292906B1 (en) | Two-dimensional image processing based on third dimension data | |
| CN114816600A (zh) | 会话消息显示方法、装置、终端及存储介质 | |
| JP6839771B2 (ja) | 補正パターン分析による映像補正方法およびシステム |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination |