CN109521835A - 信息处理设备、信息处理系统和信息处理方法 - Google Patents

信息处理设备、信息处理系统和信息处理方法 Download PDF

Info

Publication number
CN109521835A
CN109521835A CN201810418456.8A CN201810418456A CN109521835A CN 109521835 A CN109521835 A CN 109521835A CN 201810418456 A CN201810418456 A CN 201810418456A CN 109521835 A CN109521835 A CN 109521835A
Authority
CN
China
Prior art keywords
information
information processing
image
container
content
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201810418456.8A
Other languages
English (en)
Other versions
CN109521835B (zh
Inventor
佐藤忠秋
稻木誓哉
桥本成
桥本一成
出云英刚
山浦佑介
安冈大辅
青木哲平
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujifilm Business Innovation Corp
Original Assignee
Fuji Xerox Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fuji Xerox Co Ltd filed Critical Fuji Xerox Co Ltd
Publication of CN109521835A publication Critical patent/CN109521835A/zh
Application granted granted Critical
Publication of CN109521835B publication Critical patent/CN109521835B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G06T19/006—Mixed reality
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16—Constructional details or arrangements
    • G06F1/1613—Constructional details or arrangements for portable computers
    • G06F1/163—Wearable computers, e.g. on a belt
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/20—Scenes; Scene-specific elements in augmented reality scenes
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/012—Head tracking input arrangements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/013—Eye tracking input arrangements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/70—Determining position or orientation of objects or cameras
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10004—Still image; Photographic image
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2219/00—Indexing scheme for manipulating 3D models or images for computer graphics
    • G06T2219/004—Annotating, labelling

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Computer Hardware Design (AREA)
  • Multimedia (AREA)
  • Computer Graphics (AREA)
  • Software Systems (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • User Interface Of Digital Computer (AREA)
  • Processing Or Creating Images (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本申请涉及信息处理设备、信息处理系统和信息处理方法。具体地，该信息处理设备包括获取单元和命令单元。获取单元从如下图像获取容纳容纳物的容器的位置信息，该图像通过使用以交叠方式显示虚拟空间图像和真实空间且具有拍摄功能的显示装置对容器进行拍摄而被获取。命令单元命令显示装置在容器附近显示与容纳物有关的信息，该信息与位置信息关联地存储为虚拟空间图像。

Description

信息处理设备、信息处理系统和信息处理方法
技术领域
本发明涉及信息处理设备、信息处理系统和信息处理方法。
背景技术
日本未审查专利申请第2004-227462号公报提出了一种彼此对应地管理电子文档和纸质文档的文档管理设备的示例。
日本未审查专利申请第2004-227462号公报中描述的文档管理设备管理电子文档和纸质文档，并且包括：文档信息存储单元，其存储纸质文档的管理位置(即，箱柜)；电子文档存储单元，其存储与纸质文档对应的电子文档；以及文档登记管理单元，其在文档信息存储单元中登记纸质文档，在电子文档存储单元中登记电子文档，并且搜索纸质文档和电子文档。
发明内容
本发明的目的是，提供在容器附近虚拟显示与该容器内所容纳的容纳物有关的信息的信息处理设备、信息处理系统和信息处理方法。
根据本发明的第一方面，提供了一种包括获取单元和命令单元的信息处理设备。所述获取单元从如下图像获取容纳容纳物的容器的位置信息，该图像通过使用以交叠方式显示虚拟空间图像和真实空间且具有拍摄功能的显示装置对所述容器进行拍摄而被获取。所述命令单元命令所述显示装置在所述容器附近显示与所述容纳物有关的信息，该信息与所述位置信息关联地存储为所述虚拟空间图像。
根据本发明的第二方面，在根据第一方面的信息处理设备中，所述获取单元可以获取所述显示装置与所述容器之间的距离，并且所述命令单元可以作出命令以通过如下方式显示与容纳物有关的所述信息：改变所述信息的文本尺寸，使得与对于到所述显示装置的距离更短的所述容器相比，所述文本尺寸对于到所述显示装置的距离更长的所述容器更大。
根据本发明的第三方面，在根据第一方面或第二方面的信息处理设备中，所述命令单元可以基于来自所述显示装置的命令来作出命令，以改变与容纳物有关的所述信息。
根据本发明的第四方面，在根据第三方面的信息处理设备中，所述命令单元可以基于来自所述显示装置的命令，而作出命令以显示所选信息的属性信息。
根据本发明的第五方面，在根据第四方面的信息处理设备中，所述属性信息的显示可以被给予使用所述显示装置的用户的访问权限所限制。
根据本发明的第六方面，在根据第一方面至第五方面中任意一个方面的信息处理设备中，与所述容纳物有关的所述信息可以包括根据给予使用所述显示装置的用户的访问权限的内容。
根据本发明的第七方面，在根据第第一方面至第六方面中任意一个方面的信息处理设备中，与所述容纳物有关的所述信息可以根据预定时间而改变。
根据本发明的第八方面，在根据第一方面至第七方面中任意一个方面的信息处理设备中，所述容纳物可以是绑定文档的文件，并且与所述容纳物有关的所述信息可以是所述文件的脊背上显示的文件名。
根据本发明的第九方面，在根据第八方面的信息处理设备中，所述文件名可以以显示宽度来显示，显示宽度的尺寸对应于所述实际文件的脊背宽度，并且所述文件名的文本可以用根据所述显示宽度的尺寸来显示。
根据本发明的第十方面，在根据第八方面或第九方面的信息处理设备中，所述文件的颜色可以根据从所述容器取出所述实际文件的次数而改变。
根据本发明的第十一方面，在根据第八方面至第十方面中任意一个方面的信息处理设备中，所述文件可以以指示从所述容器取出所述实际文件的颜色来显示。
根据本发明的第十二方面，在根据第一方面至第十一方面中任意一个方面的信息处理设备中，所述容器可以包括门和锁定控制器，如果用户具有对所述容器的访问权限，则该锁定控制器解锁所述门。
根据本发明的第十三方面，在根据第一方面至第十二方面中任意一个方面的信息处理设备中，在所述容器和所述容纳物彼此关联并且容纳物被取出的情况下，或者如果所述容纳物容纳在错误容器中，所述命令单元可以命令显示通知。
根据本发明的第十四方面，在根据第一方面至第十三方面中任意一个方面的信息处理设备中，如果从所述显示装置接收到所拍摄的容器的图像和登录请求，则所述命令单元可以作出命令以显示与所述容纳物有关的所述信息，作为所述虚拟空间图像，并且如果在预定时间未作出命令或者如果未接收到登出请求，则所述命令单元可以作出命令以结束显示与所述容纳物有关的所述信息作为所述虚拟空间图像。
根据本发明的第十五方面，提供了一种包括显示装置、获取单元和命令单元的信息处理系统。所述显示装置以交叠方式显示虚拟空间图像和真实空间，并且具有拍摄功能。所述获取单元从如下图像获取容纳容纳物的容器的位置信息，该图像通过所述显示装置对所述容器进行拍摄而被获取。所述命令单元命令所述显示装置在所述容器附近显示与所述容纳物有关的信息，该信息与所述位置信息关联地存储为所述虚拟空间图像。
根据本发明的第十六方面，提供了一种信息处理方法，包括从由于通过使用以交叠方式显示虚拟空间图像和真实空间且具有拍摄功能的显示装置对所述容器进行拍摄而获取的图像，获取容纳容纳物的容器的位置信息；并且命令所述显示装置在所述容器附近显示与容纳物有关的信息，该信息与所述位置信息关联存储为所述虚拟空间图像。
根据第一方面、第十五方面和第十六方面，与容器中所容纳的物体有关的信息可以虚拟显示在容器附近。
根据第二方面，与容纳物有关的信息可以用根据到容器的距离的尺寸来显示。
根据第三方面和第四方面，与容纳物有关的信息可以在远离所述容器的位置处改变。
根据第五方面和第六方面，所显示的内容可以根据是否具有访问权限而被限制。
根据第七方面，可以在预定时间之外限制所显示的内容。
根据第八方面和第九方面，虚拟图像可以以类似于实际文件的状态来显示。
根据第十方面和第十一方面，可以视觉识别实际文件的所含状态。
根据第十二方面，可以省略要由管理者执行的解锁过程。
根据第十三方面，可以通知用户容纳物是否是重要物体。
根据第十四方面，可以基于使用显示装置的用户的意图，来显示虚拟图像或结束虚拟图像的显示。
附图说明
将基于以下附图来详细描述本发明的示例性实施方式，附图中：
图1例示了根据本发明的第一示例性实施方式的信息处理系统的构造示例；
图2是例示了头戴式显示装置的示例的外观图；
图3例示了头戴式显示装置的控制系统的示例；
图4是例示了信息处理设备的控制系统的示例的框图；
图5例示了用户属性表的示例；
图6例示了箱柜表的示例；
图7例示了箱柜说明信息的层级结构的示例；
图8例示了虚拟图像的显示示例；
图9例示了虚拟图像的显示示例；
图10例示了虚拟图像的显示示例；
图11是例示了根据第一示例性实施方式的信息处理设备的操作的示例的流程图；
图12例示了虚拟图像的另一个显示示例；
图13是例示了根据本发明的第二示例性实施方式的信息处理设备的控制系统的示例的框图；
图14例示了虚拟图像的显示示例；
图15例示了虚拟图像的另一个显示示例；以及
图16例示了用户属性表的修改例。
具体实施方式
下面将参照附图来描述本发明的示例性实施方式。在附图中，具有大致相同功能的部件给予相同的附图标记，并且将省略其冗余描述。
根据示例性实施方式的信息处理设备包括获取单元和命令单元。获取单元从由于通过使用以交叠方式显示虚拟空间图像和真实空间且具有拍摄功能的显示装置对所述容器进行拍摄而获取的图像，获取容纳容纳物的容器的位置信息。命令单元命令显示装置在容器附近显示与所含的物体有关的信息，该信息与位置信息关联地存储为虚拟空间图像。
术语“显示装置”包括：透光头戴式显示装置，其戴在用户的头上，并且借助该显示装置用户能够直接查看真实空间(背景)，同时查看作为虚拟空间图像的所呈现信息；以及便携式信息终端，其以交叠方式在所拍摄的背景图像上显示所呈现信息，作为虚拟空间图像。透光头戴式显示装置可以是护目镜或眼镜的形式。便携式信息终端可以是头戴式类型。
第一示例性实施方式
图1例示了根据本发明的第一示例性实施方式的信息处理系统1的构造示例。
信息处理设备1包括：头戴式显示装置(下文中称为“HMD装置”)2，和控制HMD装置2的信息处理设备3。HMD装置2和信息处理设备3以可通信方式彼此无线连接。虽然单个HMD装置2例示在图1中，但可以设置多个HMD装置2。HMD装置2是显示装置的示例。
信息处理系统1可以用于例如办公室或公共设施中。图1例示了多个箱柜4A和4B(可以总称为“箱柜”4)设置在办公室中，并且戴着HMD装置2的人朝向箱柜4查看的状态。虽然图1中例示了两个箱柜4，但可以设置单个箱柜4或三个或更多个箱柜4。各个箱柜4是容器的示例。
HMD装置2被构造为，通过以交叠方式显示虚拟空间图像(下文中称为“虚拟图像”)和真实空间(背景)，而虚拟显示所谓的虚拟图像。具体地，HMD装置2是透光头戴式显示装置，其戴在用户的头上，并且借助该显示装置，用户能够直接查看背景和虚拟图像。
信息处理设备3基于箱柜4管理箱柜4中容纳的文件5(参见图4)，并且使用HMD装置2向用户提供与各个文件5有关的信息。
虽然在该示例性实施方式中各个箱柜4设置有可锁定门，但各个箱柜可以是未设置有门的类型。在多个箱柜4中，例如，容纳重要物体的箱柜4可以在由管理者设置的特定时间(例如，8：00AM)解锁，并且可以在由管理者设置的特定时间(例如，6：00PM)锁定。另选地，所有箱柜4可以被管理者解锁和锁定，或者不必被解锁和锁定。
各个文件5绑定文档，并且是容纳物的示例。要容纳在各个容器中的容纳物不限于文件5，并且可以另选地是公司、部门或组中的共享设备，诸如照相机、个人计算机、或便携式终端。
图2是例示了HMD装置2的示例的外观图。HMD装置2包括显示单元22和向外照相机23A。显示单元22包括要安装到耳朵的框架220，并且还包括右透射式显示器221a和左透射式显示器221b(有时总称为“透射式显示器221”)。
透射式显示器221可以是例如透射式液晶显示器、透射式有机电致发光(EL)显示器、或透射式无机EL显示器。右透射式显示器221a针对右眼显示显示图像，并且左透射式显示器221b针对左眼显示显示图像。右眼显示图像和左眼显示图像与背景交叠，并且由使用HMD装置2的用户视觉识别为虚拟图像。
HMD装置的构造
图2例示了HMD装置2的控制系统的示例。HMD装置2包括：控制器20，其控制HMD装置2的各个部件；存储单元21，其存储各种类型的信息；上述显示单元22；上述向外照相机23A；向内照相机23B；传感器单元24；声音输入单元25；位置检测器26；处理器27和无线通信单元28。
控制器20由例如中央处理单元(CPU)和接口构成。CPU根据存储单元21中存储的程序210而操作，以便充当例如发送器200、接收器201和显示控制器202。后面将详细描述部件200至202。
存储单元21由例如只读存储器(ROM)、随机存取存储器(RAM)和硬盘构成，并且在其中存储例如程序和数据。
向外照相机23A使用HMD装置2拍摄背景以及用户的手，并且向控制器20发送所拍摄的图像。向内照相机23B使用HMD装置2拍摄用户的眼睛，并且向控制器20发送所拍摄的图像。要由向外照相机23A和向内图像23B拍摄的图像可以是静止图像或移动图像。在通过对用户的手进行拍摄来检测姿势或者要检测视线的情况下，移动图像是期望的，或者通过每秒对多个图像进行拍摄而获得的连续静止图像是期望的。
传感器单元24包括距离图像传感器、加速度传感器和陀螺仪。距离图像传感器可以是例如红外距离传感器、激光距离传感器或超声距离传感器。距离图像传感器辐射红外光、激光或超声波，并且从其反射的时间差读取各个像素的距离，以便获得距离图像。加速度传感器检测施加于HMD装置2的加速度。陀螺仪检测施加于HMD装置2的角速度。
声音输入单元25由麦克风构成，并且将用户使用HMD装置2输出的声音转换成作为电信号的声音信号，并且接收语音信号。
处理器27处理由向外照相机23A、向内照相机23B、传感器单元24和声音输入单元25输入的信息，并且包括姿势检测器270、视线检测器271和语音识别器272。
姿势检测器270检测指示用户使用HMD装置2的用户的移动的姿势。具体地，姿势检测器270从被传感器单元24的距离图像传感器检测到的距离图像，根据用户的手的移动(例如，两个手指收缩放大操作)，来检测预定手势。而且，姿势检测器270基于由传感器单元24的加速度传感器检测到的HMD装置2的加速度和由陀螺仪检测的HMD装置2的角速度，根据用户头部的移动(例如，头向一侧摇晃)，来检测预定头部姿势。姿势检测器270向控制器20发送与检测到的姿势对应的命令。
视线检测器271从由向内照相机23B拍摄的用户的眼睛的图像，来检测用户的视线方向，并且向控制器20发送检测到的视线方向和与视线方向对应的命令。检测视线的方法可以涉及例如，使用视线照相机作为向内照相机23B，而基于与眼睛的内角的位置相对的虹膜的位置，来检测视线，或者使用红外照相机和红外发光二极管，作为向内照相机23B，而基于与角膜反射的位置相对的瞳孔的位置，来检测视线方向。视线方向可以代替姿势来使用。
语音识别器272将由声音输入单元25接收的语音信号转换成数字语音数据，并且向控制器20发送语音数据。
无线通信单元28通过使用近场通信与信息处理设备3通信，诸如WiFi(无线保真)，诸如Wi-Fi直连、蓝牙(注册商标)或红外通信这样的无线局域网(LAN)。无线通信单元28可以用于HMD装置2之间的通信。
位置检测器26通过使用全球定位系统(GPS)，规律性地检测指示HMD装置2的位置的位置信息，并且向控制器20发送检测到的位置信息。另选地，可以通过使用信标信号来检测HMD装置2的位置。具体地，位置检测器26检测含有信标ID的信标信号，信标ID用于识别信标发送器，并且位置检测器26向信息处理设备3发送信标ID和关于信标信号的强度信息。信息处理设备3从与信标ID对应的信标发送器的位置信息且从信标信号的强度而获取HMD装置2的位置信息。
接着，将描述HMD装置2的部件200至202。
发送器200向信息处理设备3经由无线通信单元28，发送由向外照相机23A拍摄的图像、由处理器27获得的处理结果(例如，与由姿势检测器270检测到的姿势对应的命令、由视线检测器271检测到的视线方向和与视线方向对应的命令，或者由语音识别器272识别的语音数据)，或者由位置检测器26检测到的位置信息，以及用于识别使用HMD装置2的用户的用户ID。
接收器201接收从信息处理设备3的发送器304发送的显示图像和指示显示图像要被视觉识别为虚拟图像的位置的位置信息。
显示控制器202基于由接收器201接收到的显示图像和位置信息，来控制显示单元22。具体地，显示控制器202执行控制，以基于由接收器201接收到的显示图像和位置信息，来生成右眼显示图像和左眼显示图像，使右透射式显示器221a显示右眼显示图像，并且使左透射式显示器221b显示左眼显示图像，使得使用HMD装置2的用户在与位置信息对应的位置处视觉识别虚拟图像。
信息处理设备的构造
图4是例示了信息处理设备3的控制系统的示例的框图。信息处理设备3包括：控制器30，其控制信息处理设备3的各个部件；存储单元31，其存储各种类型的信息；无线通信单元32，其与各个HMD装置2无线通信；以及标签接口33。
控制器30由例如中央处理单元(CPU)和接口构成。CPU根据程序310操作,从而用作例如接收器301、获取单元302、显示图像生成单元303、发送器304和管理单元305。显示图像生成单元303和发送器304是命令单元的示例。后面将详细描述部件301至305。
存储单元31由例如只读存储器(ROM)、随机访问存储器(RAM)和硬盘构成，并且在其中存储例如程序310、用户属性表311(参见图5)、箱柜表312(参见图6)、地图数据313和箱柜说明信息314。在该描述中，当向表中写入信息时，使用术语“记录”或“登记”，而当向存储单元中写入信息时，使用术语“存储”。箱柜说明信息314是与容纳物有关的信息的示例。
地图数据313含有设置箱柜4的建筑物或房间中的三维图形，并且还含有与箱柜ID关联的位置信息，箱柜ID用于识别各个箱柜4，并且指示建筑物或房间中设置的各个箱柜4的三维位置。三维图形与由HMD装置2的向外照相机23A拍摄的各个箱柜4的图像比较。
无线通信单元32通过使用近场通信，与HMD装置2通信，诸如WiFi(无线保真)，诸如Wi-Fi直连、蓝牙(注册商标)或红外通信这样的无线局域网(LAN)。
标签接口33连接到分别设置在箱柜4A和4B中的标签读取器7A和7B(它们总称为“标签读取器7”)。文件5单独设置有集成电路(IC)标签6。各个IC标签6在存储器中存储用于识别文件的文件ID。、
用户属性表的构造
图5例示了用户属性表311的示例。用户属性表311具有：“用户ID”栏，其中记录用户ID；“用户名”栏，其中记录用户名；“部门”栏，其中记录用户所属于的部门；以及“用户描述”栏，其中记录用户是全职雇员还是临时雇员以及用户是执行官员还是普通员工。用户ID、用户名、部门和用户描述是人的属性信息的示例。部门是组的示例。
箱柜表的构造
图6例示了箱柜表312的示例。箱柜表312具有：“箱柜ID”栏，其中记录用于识别箱柜的箱柜ID；“位置信息”栏，其中记录指示各个箱柜4的位置的位置信息；“文件ID”栏，其中记录用于识别对应箱柜4中所含有的各个文件5的文件ID；“文件名”栏，其中记录文件名；“创建时间”栏，其中记录各个文件5的创建时间和创建日期；以及“更新时间”栏，其中记录各个文件5的更新时间和日期。
箱柜说明信息的层级结构
图7例示了箱柜说明信息314的层级结构的示例。箱柜说明信息314说明对应箱柜4中所含有的各个文件5的概要。具体地，箱柜说明信息314由层级结构中的多个信息构成，并且与各个箱柜ID关联地存储在存储单元31中。例如，箱柜说明信息314包括与各个箱柜4的管理有关的管理信息314a(参见图8)、关于箱柜4中所含有的文件的特性信息314b(图9)、以及关于构成特性信息314b的项目的详细信息314c(图10)。管理信息314a、特性信息314b和详细信息314c分别位于层级结构的上层、中间层和下层。详细信息314c是所选信息的属性信息的示例。
接着，将描述信息处理设备3的部件301至305。
接收器301接收例如用户ID、图像、语音数据、HMD装置2的位置信息、以及从HMD装置2发送的各种类型的命令。
当接收器301接收指示登录请求的命令、HMD装置2的位置信息、箱柜4的图像和用户ID时，获取单元302基于HMD装置2的位置信息、箱柜4的图像和地图数据313，来获取箱柜4的位置信息及其箱柜ID。而且，获取单元302基于HMD装置2的位置信息和箱柜4的位置信息，计算从HMD装置2到箱柜4的距离。如果图像包括多个箱柜4，则获取单元302计算到各个箱柜4的距离。
另选地，各个箱柜4的表面可以设置有代码图像，诸如快速响应(QR)代码(注册商标)，其中加密有箱柜4的位置信息及其箱柜ID。在这种情况下，获取单元302可以解密由HMD装置2的向外照相机23A拍摄的图像中所包括的代码图像和箱柜ID，以便获取箱柜4的位置信息和箱柜ID。
显示图像生成单元303生成要显示在HMD装置2的显示单元22上的显示图像，诸如显示图像，包括根据从HMD装置2到箱柜2的距离的箱柜说明信息314。具体地，通过改变箱柜说明信息314的文本尺寸，而使得与对于到HMD装置2的距离更短的箱柜4相比，该文本尺寸对于到HMD装置2的距离更长的箱柜4更大，显示图像生成单元303生成显示图像。在不改变文本尺寸的情况下，被显示为虚拟图像的箱柜说明信息314的文本随着从HMD装置2到箱柜4的距离增大而显得是变小。相反，该示例性实施方式可以防止文本显得变小。
发送器304命令HMD装置2显示所生成的显示图像，作为虚拟图像。具体地，发送器304向HMD装置2发送：由显示图像生成单元303生成的显示图像，和显示图像要被视觉识别为虚拟图像的位置信息(例如，在对应箱柜4附近)，并且命令HMD装置2在箱柜4附近显示显示图像，作为虚拟图像。虚拟图像的位置信息可以是箱柜4的正面。
当文件5被从箱柜4取来，并且标签读取器7不再能够从IC标签6读取信息时，管理单元305确定已经从箱柜4取来文件5。当文件5返回到箱柜4并且标签读取器7能够从IC标签6读取信息时，管理单元305确定文件5已经返回到箱柜4。
第一示例性实施方式的操作
接着，将根据图11的流程图，参照图7至图10描述信息处理系统1的操作的示例。
登录
例如，当使用HMD装置2的用户移动他/她的手以执行用于命令对箱柜4拍摄的姿势(第一姿势)时，HMD装置2的姿势检测器270从由传感器单元24的距离图像传感器获取的距离图像，来检测第一姿势，并且向控制器20发送与第一姿势对应的第一命令。
基于来自姿势检测器270的第一命令，控制器20控制向外照相机23A，以便对箱柜4进行拍摄。控制器20将所拍的图像与拍摄图像时由位置检测器26检测到的位置信息一起存储到存储单元21中。
随后，当使用HMD装置2的用户移动他/她的手以执行用于命令登录的姿势(第二姿势)时，HMD装置2的姿势检测器270从由传感器单元24的距离图像传感器获取的距离图像，来检测第二姿势，并且向控制器20发送与第二姿势对应的第二命令。
HMD装置2的发送器200向信息处理设备3发送登录请求和图像、HMD装置2的位置信息、和用于识别使用HMD装置2的用户的用户ID。
信息处理设备3的接收器301接收从HMD装置2发送的登录请求、图像、HMD装置2的位置信息和用户ID(步骤S1中为是)。
2.箱柜的位置信息的获取
从由接收器301接收的图像和HMD装置2的位置信息，还从地图数据313，获取单元302获取图像中所包括的位置信息和各个箱柜4的箱柜ID。而且，基于HMD装置2的位置信息和箱柜4的位置信息，来计算从HMD装置2到箱柜4的距离(步骤S2)。在后面要描述的图8所示的情况下，计算到箱柜4A的距离L1和到箱柜4B的距离L2。
3.显示图像的生成
基于由获取单元302获取的箱柜ID和由获取单元302计算得的从HMD装置2到箱柜4的距离，显示图像生成单元303生成显示图像(步骤S3)。具体地，显示图像生成单元303从存储单元31读取与箱柜ID对应的箱柜说明信息314的上层管理信息314a，并且通过根据从HMD装置2到箱柜4的距离改变文本尺寸来生成显示图像。
4.显示图像和位置信息的发送
发送器34向HMD装置2发送由显示图像生成单元303生成的显示图像和由获取单元302获取的箱柜4的位置信息(步骤S4)。
HMD装置2的显示控制器202基于显示图像和位置信息，来控制显示单元22，使得显示图像在箱柜4附近被视觉识别为虚拟图像。
图8例示了虚拟图像的显示示例。例如，图8所示的虚拟图像110a和110b包括使用箱柜4的部门、箱柜4中容纳的文件5的类型、和诸如访问相关信息这样的管理信息314a。访问相关信息包括密钥管理者、给予访问权限的人等。虚拟图像110a和110b中的每一个是包括管理信息314a的二维图像。
具体地，如图8所示，使用HMD装置2的用户在位于远离HMD装置2距离L1的远侧箱柜4A附近视觉识别虚拟图像110a，虚拟图像110a包括“设计部门中的箱柜有设计规格文档。关于密钥，询问___先生/女士。(THERE IS DESIGN SPECIFICATION DOCUMENT IN CABINET OFDESIGN DEPARTMENT.ASK MR./MS.__FOR KEY)”的管理信息314a。用户还在位于远离HMD装置2距离L2的近侧箱柜4B附近视觉识别虚拟图像110b，虚拟图像110b包括“知识产权部门中的箱柜有申请相关文档。仅限知识产权部门的成员访问。(THERE IS APPLICATION-RELATEDDOCUMENT IN CABINET OF INTELLECTUAL PROPERTY DEPARTMENT.ACCESS IS RESTRICTEDTO MEMBERS OF INTELLECTUAL PROPERTY DEPARTMENT.)”的管理信息314a。管理信息314a位于层级结构的上层。
虽然被显示为虚拟图像的管理信息314a的文本可能随着从HMD装置2到各个箱柜4的距离增大而显得变小，但是通过改变文本尺寸，防止文本显得变小，从而与不改变文本尺寸的情况相比，实现管理信息314a的更好的读取性。
另选地，可以显示根据给予使用HMD装置2的用户的访问权限的虚拟图像。例如，获取单元302基于用户ID，而从用户属性表311获取部门信息，并且从箱柜说明信息314的管理信息314a获取使用箱柜4的部门。如果使用HMD装置2的用户是不属于使用箱柜4的部门的外人，则确定该用户不具有访问信息的权限，以便不生成显示图像或不显示信息为虚拟图像。作为另一个替换，上层管理信息314a单独可以向外人显示为虚拟图像，使得中间层特性信息314b和下层详细信息314c不显示为虚拟图像。
而且，可以根据预定时间段来改变要被视觉显示为虚拟图像的信息。例如，箱柜说明信息314可以在预定时间段(例如，8：00AM至6：00PM)被完全访问，而不允许外人在预定时间段之外访问整个箱柜说明信息314或特性信息314b和详细信息314c，这意味着信息不被显示为虚拟图像。
5.操作的接收
如图9所示，当使用HMD装置2的用户在相对于箱柜4A附近显示的虚拟图像110a远离箱柜4A的位置处移动他/她的手并且执行用于做出中间层显示命令的姿势(第三姿势)时，HMD装置2的姿势检测器270从由传感器单元24的距离图像传感器获取的距离图像检测第三姿势，并且向控制器20发送与第三姿势对应的第三命令。
发送器200向信息处理设备3发送来自姿势检测器270的第三命令和用户ID。
当信息处理设备3的接收器301接收从HMD装置2发送的第三命令和用户ID时(步骤S5)，获取单元302基于第三命令而从存储单元31获取箱柜说明信息314的中间层特性信息314b。
显示图像生成单元303生成包括从获取单元302获取的特性信息314b的显示图像(步骤S6)。
发送器304向HMD装置2发送由显示图像生成单元303生成的显示图像和由获取单元302获取的箱柜4的位置信息(步骤S7)。
HMD装置2的显示控制器202基于显示图像和位置信息，来控制显示单元22，使得显示图像在箱柜4附近被视觉识别为虚拟图像。
图9例示了虚拟图像的显示示例。图9所示的虚拟图像111a包括箱柜4中所容纳的文件5的特性信息314b。如图9所示，特性信息314b包括例如文件名、数据格式、和各个所含文件5的数据创建时间。虚拟图像111a是包括特性信息314b的二维图像。如图9所示，使用HMD装置2的用户能够从位于远离箱柜4A的位置处查看上层管理信息314a和中间层特性信息314b。
随后，如图10所示，当使用HMD装置2的用户相对于箱柜4A附近显示的虚拟图像111a移动他/她的手，并且执行用于显示用于从虚拟图像111a中包括的特性信息314b选择项目的图标120且用于操作图标120的姿势(第四姿势)时，HMD装置2的姿势检测器270从由传感器单元24的距离图像传感器获取的距离图像来检测第四姿势，并且向控制器20发送与第四姿势对应的第四命令和该项目的位置信息。
发送器200向信息处理设备3发送来自姿势检测器270的第四命令和项目的位置信息以及用户ID。
当信息处理设备3的接收器301接收从HMD装置2发送的第四命令、项目的位置信息、和用户ID时(步骤S5)，获取单元302基于第四命令和项目的位置信息从存储单元31获取与箱柜说明信息314的中间层项目对应的详细信息314c。
显示图像生成单元303生成包括从获取单元302获取的详细信息314c的显示图像(步骤S6)。
发送器304向HMD装置2发送由显示图像生成单元303生成的显示图像和由获取单元302获取的项目的位置信息(步骤S7)。
HMD装置2的显示控制器202基于显示图像和项目的位置信息，来控制显示单元22，使得显示图像在箱柜4附近被视觉识别为虚拟图像。
图10例示了虚拟图像的显示示例。图10中所示的虚拟图像112a和113a各包括构成特性信息314b的项目的详细信息314c。当与管理者的姓名(例如，Taro Fuji)对应的项目通过使用图标120而被从特性信息314b选择时，视觉显示包括详细信息314c的虚拟图像112a(即，Taro Fuji的联系信息)。当与图形列表对应的项目通过使用图标120而被从特性信息314b选择时，视觉显示包括关于图形列表的详细信息314c(例如，创建时间和更新时间)的虚拟图像113a。详细信息314c位于特性信息314b的下层。虚拟图像112a和113a中的每一个是包括详细信息314c的二维图像。通过使得可以使用图标120选择项目，可以从远离箱柜4A的位置查看特性信息314b和详细信息314c。
如果在上述步骤S5中的预定时间段之后，未接收指示操作的命令(步骤S8中为是)，则执行从HMD装置2的强制登出过程(步骤S9)。另选地，可以基于来自使用HMD装置2的用户的登出请求来执行登出过程。
虚拟图像的另一个显示示例
图12例示了虚拟图像的另一个显示示例。如图12所示，可以根据从HMD装置2到箱柜4的距离来虚拟显示具有不同信息量的虚拟图像。具体地，如图12所示，与具有更少信息量的数字标识类似的虚拟图像110a可以对于远侧箱柜4A被虚拟显示，并且比虚拟图像110a具有更大信息量的虚拟图像111b可以对于近侧箱柜4B被虚拟显示。虚拟图像110a包括管理信息314a。虚拟图像111b包括特性信息314b。虽然近侧箱柜4B处显示的虚拟图像111b具有大信息量，但虚拟图像111b可读，因为到箱柜4B的距离短。在图12所示的情况下，显示图像生成单元303可以通过改变文本尺寸，而使得与对于到HMD装置2的距离更短的箱柜4相比，该文本尺寸对于到HMD装置2的距离更长的箱柜4更大，来生成显示图像。
第二示例性实施方式
图13是例示了根据本发明的第二示例性实施方式的信息处理设备的控制系统的示例的框图。与箱柜说明信息314被虚拟显示为与容纳物有关的信息的第一示例性实施方式相比，在第二示例性实施方式中视觉显示箱柜内部图像315。以下描述聚焦于与第一示例性实施方式的区别。
具体地，代替箱柜说明信息314，根据该示例性实施方式的信息处理设备3的存储单元31在内部存储箱柜内部图像315。箱柜内部信息315是与容纳物有关的信息的示例。
显示图像生成单元303生成要显示在HMD装置2的显示单元22上的显示图像，诸如显示图像，其包括根据从HMD装置2到各个箱柜4的距离的箱柜内部信息315。
箱柜内部图像315是在打开箱柜4的门时可以查看的图像。箱柜内部图像315与各个箱柜ID关联地存储在存储单元31中。
图14例示了虚拟图像的显示示例。图14例示了虚拟图像114a虚拟显示在远侧箱柜4A的正面上，并且虚拟图像114b虚拟显示在近侧箱柜4B的正面上的状态。虚拟图像114a和114b中的每一个是基于箱柜内部图像315生成的虚拟显示的显示图像。虚拟图像114a和114b分别是打开箱柜4A和4B的门时可以查看的图像。具体地，虚拟图像114a包括箱柜4A中容纳的文件5的脊背315a和文件名315b。虚拟图像114b包括箱柜4B中容纳的文件5的脊背315a和文件名315b。虚拟图像114a和114b是二维图像。虽然被显示为虚拟图像的文件名315b的文本可能实际上随着从HMD装置2到各个箱柜4的距离增大而显得实际上变小，但是通过改变文本尺寸，防止文本显得变小，从而与不改变文本尺寸的情况相比，实现文件名315b的更好的读取性。
各个文件名315b的显示宽度对应于实际文件5的脊背宽度，并且以根据显示宽度的尺寸来显示文件名315b的文本。脊背315a的颜色或文件5的文件名315b可以根据从箱柜4取出实际文件5的次数来改变。例如，所显示的颜色可以随着从对应箱柜4取出文件5的次数增大，而改变成更亮颜色或高度可视颜色。与不改变其颜色的情况相比，这允许容易看到频繁使用的文件5。另选地，文件5的脊背315a或文件名315b可以以指示从箱柜4取出实际文件5的颜色来显示。这容易使得从对应箱柜4取出文件5显而易见。在箱柜ID和文件ID彼此关联地存储并且文件5要容纳在错误箱柜4中的情况下，可以根据特定方法，提供通知，诸如HMD装置2的显示单元22显示文件5的目的地错误的通知。
虚拟图像的另一个显示示例
图15例示了虚拟图像的另一个显示示例。图15例示了虚拟图像114a和114b分别被虚拟显示在箱柜4A和4B的正面上的状态。虚拟图像114a和114b分别是打开箱柜4A和4B的门时可以查看的图像。因为箱柜4A和4B与使用HMD装置2的用户分开相同距离，所以用相同尺寸显示虚拟图像114a和114b。
如以上参照图10描述的，在使用HMD装置2的用户操作图标120来选择虚拟图像114b中包括的文件(例如，脊背315a)的情况下，与文件5相关的详细信息可以显示为虚拟图像。
用户属性表的修改例
图16例示了用户属性表的修改例。通过向图5所示的用户属性表311添加“对特定箱柜的访问权限”栏而获得图16所示的用户属性表311a。在“对特定箱柜的访问权限”栏中，记录了指示是否对特定箱柜具有访问权限的信息。
在这种情况下，在图6所示的箱柜表312的“箱柜ID”栏中，在正常箱柜4的情况下，可以添加在头部具有字符“C”的ID，并且在可以获取访问权限的特定箱柜4的情况下，字符“S”可以添加到正常ID的头部。因此，根据箱柜ID，对应的箱柜4是否是特定箱柜4是清楚的。
在图像中包括的箱柜4是特定箱柜4的情况下，获取单元302参照图16中所示的用户属性表311a，以便基于用户ID来确定使用HMD装置2的用户是否具有对特定箱柜4的访问权限。
显示图像生成单元303根据用户是否具有访问权限，而生成显示图像。如果用户不具有访问权限，则不必生成显示图像。在图15所示的情况下，如参照图10描述的，如果使用HMD装置2的用户操作图标120以选择虚拟图像114b中包括的文件(例如，脊背315a)，则只有使用HMD装置2的用户具有对箱柜4B的访问权限，与文件5有关的详细信息才可以显示为虚拟图像。
各个箱柜4可以具有门和锁定控制器，如果使用HMD装置2的用户具有对箱柜4的访问权限，则锁定控制器解锁门。在这种情况下，信息处理设备3的获取单元302基于用户属性表311a，确定用户是否具有访问权限，并且向锁定控制器通知确定结果，从而去除要由管理者执行的锁定过程。
虽然上面已经描述了本发明的示例性实施方式，但本发明的示例性实施方式不限于上述示例性实施方式，并且本发明的范围内允许各种修改例。例如，虽然在各个示例性实施方式中，透光头戴式显示装置被描述为显示装置，但是本发明的示例性实施方式可以类似地应用于便携式信息终端，诸如智能电话，其以交叠方式在真实空间(背景)的所拍摄的图像上显示显示图像作为虚拟图像。
而且，信息处理设备3的功能中的至少一个功能可以向HMD装置2转移，并且HMD装置2的功能中的至少一个功能可以向信息处理设备3转移。例如，HMD装置2的语音识别功能可以向信息处理设备3转移，使得语音信号从HMD装置向信息处理设备3发送，并且通过使用信息处理设备3的语音识别功能，而被转换成语音数据。
控制器20和30中包括的各个部件可以部分或全部由硬件电路构成，诸如场可编程门阵列(FPGA)或专用集成电路(ASIC)。
上述每一个示例性实施方式的部件中的一个或一些部件可以省略，或在本发明的范围内修改。而且，在以上各个示例性实施方式的流程图中，例如，可以在本发明的范围内添加、删除、改变或互换一个或多个步骤。而且，各个上述示例性实施方式中使用的程序可以通过记录在计算机可读记录介质上来提供，诸如光盘只读存储器(CD-ROM)。另选地，各个上述示例性实施方式中使用的程序可以存储在外部服务器中，诸如云服务器，并且可以经由网络使用。
对本发明的示例性实施方式的上述说明是为了例示和说明的目的而提供的。并非旨在对本发明进行穷尽，或者将本发明限于所公开的精确形式。显而易见的是，很多修改例和变型例对于本领域技术人员是明显的。选择了这些实施方式进行说明以最好地解释本发明的原理及其实际应用，以使本领域其它技术人员能够理解本发明的各种实施方式，以及适合于所设想的具体用途的各种变型。本发明的范围旨在由所附权利要求及其等同物来限定。

Claims (16)

1.一种信息处理设备，该信息处理设备包括：
获取单元，该获取单元从如下图像获取容纳容纳物的容器的位置信息，该图像通过使用以交叠方式显示虚拟空间图像和真实空间且具有拍摄功能的显示装置对所述容器进行拍摄而被获取；以及
命令单元，该命令单元命令所述显示装置在所述容器附近显示与所述容纳物有关的信息，该信息与所述位置信息关联地存储为所述虚拟空间图像。
2.根据权利要求1所述的信息处理设备，
其中，所述获取单元获取所述显示装置与所述容器之间的距离，并且
其中，所述命令单元作出命令，以通过如下方式来显示与所述容纳物有关的所述信息：改变所述信息的文本尺寸，使得与对于到所述显示装置的距离更短的所述容器相比，所述文本尺寸对于到所述显示装置的距离更长的所述容器更大。
3.根据权利要求1或2所述的信息处理设备，
其中，所述命令单元基于来自所述显示装置的命令来作出命令，以改变与所述容纳物有关的所述信息。
4.根据权利要求3所述的信息处理设备，
其中，所述命令单元基于来自所述显示装置的命令来作出命令，以显示所选信息的属性信息。
5.根据权利要求4所述的信息处理设备，
其中，所述属性信息的显示被给予使用所述显示装置的用户的访问权限所限制。
6.根据权利要求1至5中任意一项所述的信息处理设备，
其中，与所述容纳物有关的所述信息包括根据给予使用所述显示装置的用户的访问权限的内容。
7.根据权利要求1至6中任意一项所述的信息处理设备，
其中，与所述容纳物有关的所述信息根据预定时间而改变。
8.根据权利要求1至7中任意一项所述的信息处理设备，
其中，所述容纳物是绑定文档的文件，并且
其中，与所述容纳物有关的所述信息是在所述文件的脊背上显示的文件名。
9.根据权利要求8所述的信息处理设备，
其中，所述文件名以显示宽度来显示，该显示宽度的尺寸对应于所述实际文件的脊背宽度，并且所述文件名的文本以根据所述显示宽度的尺寸来显示。
10.根据权利要求8或9所述的信息处理设备，
其中，所述文件的颜色根据从所述容器取出所述实际文件的次数而改变。
11.根据权利要求8至10中任意一项所述的信息处理设备，
其中，所述文件以指示从所述容器取出所述实际文件的颜色来显示。
12.根据权利要求1至11中任意一项所述的信息处理设备，
其中，所述容器包括门和锁定控制器，如果用户具有对所述容器的访问权限，则该锁定控制器解锁所述门。
13.根据权利要求1至12中任意一项所述的信息处理设备，
其中，在所述容器和所述容纳物彼此关联并且所述容纳物被取出的情况下，或者如果所述容纳物容纳在错误容器中，所述命令单元作出命令以显示通知。
14.根据权利要求1至13中任意一项所述的信息处理设备，
其中，如果从所述显示装置接收到登录请求和所拍摄的所述容器的图像，则所述命令单元作出命令以显示与所述容纳物相关的所述信息作为所述虚拟空间图像，并且其中，如果在预定时间未作出命令或者如果未接收到登出请求，则所述命令单元作出命令以结束显示与所述容纳物有关的所述信息作为所述虚拟空间图像。
15.一种信息处理系统，该信息处理系统包括：
显示装置，该显示装置以交叠方式显示虚拟空间图像和真实空间，并且具有拍摄功能；
获取单元，该获取单元从如下图像获取容纳容纳物的容器的位置信息，该图像通过所述显示装置对所述容器进行拍摄而被获取；以及
命令单元，该命令单元命令所述显示装置在所述容器附近显示与所述容纳物有关的信息，该信息与所述位置信息关联地存储为所述虚拟空间图像。
16.一种信息处理方法，该信息处理方法包括如下步骤：
从如下图像获取容纳容纳物的容器的位置信息，该图像通过使用以交叠方式显示虚拟空间图像和真实空间且具有拍摄功能的显示装置对所述容器进行拍摄而被获取；以及
命令所述显示装置在所述容器附近显示与所述容纳物有关的信息，该信息与所述位置信息关联地存储为所述虚拟空间图像。
CN201810418456.8A 2017-09-20 2018-05-04 信息处理设备、信息处理系统和信息处理方法 Active CN109521835B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2017180371A JP7013757B2 (ja) 2017-09-20 2017-09-20 情報処理装置、情報処理システム及びプログラム
JP2017-180371 2017-09-20

Publications (2)

Publication Number Publication Date
CN109521835A true CN109521835A (zh) 2019-03-26
CN109521835B CN109521835B (zh) 2024-03-22

Family

ID=65719279

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810418456.8A Active CN109521835B (zh) 2017-09-20 2018-05-04 信息处理设备、信息处理系统和信息处理方法

Country Status (3)

Country Link
US (2) US11010973B2 (zh)
JP (1) JP7013757B2 (zh)
CN (1) CN109521835B (zh)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP3877831A4 (en) * 2018-11-09 2022-08-03 Beckman Coulter, Inc. MAINTENANCE GOGGLES WITH SELECTIVE DATA SUPPLY
CN109961045B (zh) * 2019-03-25 2021-10-22 联想(北京)有限公司 一种位置信息提示方法、装置及电子设备
WO2021020150A1 (ja) * 2019-07-26 2021-02-04 富士フイルム株式会社 情報処理装置、情報処理方法、及びプログラム

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH06263204A (ja) * 1993-03-10 1994-09-20 Wanbishi Aakaibuzu:Kk 物品の保管・移送用セキュリティシステム
WO2014128752A1 (ja) * 2013-02-19 2014-08-28 株式会社ブリリアントサービス 表示制御装置、表示制御プログラム、および表示制御方法
JP2015070598A (ja) * 2013-10-01 2015-04-13 共同印刷株式会社 識別コード読取システム及び方法
JP2016033757A (ja) * 2014-07-31 2016-03-10 セイコーエプソン株式会社 表示装置、表示装置の制御方法、および、プログラム
JP2016081502A (ja) * 2014-10-20 2016-05-16 良幸 香取 拡張現実システム
US20160225189A1 (en) * 2015-02-04 2016-08-04 Seiko Epson Corporation Head mounted display, information processing apparatus, image display apparatus, image display system, method for sharing display of head mounted display, and computer program
JP2016188123A (ja) * 2015-03-30 2016-11-04 オークラ輸送機株式会社 ピッキングシステム
CN106233283A (zh) * 2014-04-15 2016-12-14 奥林巴斯株式会社 图像处理装置、通信系统以及通信方法和摄像装置
CN106575299A (zh) * 2014-08-01 2017-04-19 索尼公司 信息处理装置、信息处理方法和程序

Family Cites Families (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7116434B2 (en) * 2000-08-10 2006-10-03 Canon Kabushiki Kaisha Controlling a cluster operation
JP2004227462A (ja) 2003-01-27 2004-08-12 Apolloservice Co Ltd 文書管理装置、文書管理方法、及び文書管理プログラム
JP4266870B2 (ja) * 2003-04-07 2009-05-20 キヤノン株式会社 画像出力システム、印刷装置、撮像装置、通信装置、情報処理装置、記憶装置と及びその方法
JP2005223518A (ja) * 2004-02-04 2005-08-18 Seiko Epson Corp 画像供給装置、画像保存装置、自動保存システムおよび画像保存方法
JP4501572B2 (ja) * 2004-07-20 2010-07-14 富士ゼロックス株式会社 書類管理装置および書類管理システム
JP5074827B2 (ja) 2007-06-01 2012-11-14 キヤノン株式会社 画像提示装置及び方法
JP4600515B2 (ja) 2008-05-07 2010-12-15 ソニー株式会社 情報提示装置及び情報提示方法、撮像装置、並びにコンピュータ・プログラム
JP5200819B2 (ja) 2008-09-25 2013-06-05 ブラザー工業株式会社 物品管理システム
JP5488082B2 (ja) * 2010-03-17 2014-05-14 セイコーエプソン株式会社 情報認識システム及びその制御方法
JP5418386B2 (ja) 2010-04-19 2014-02-19 ソニー株式会社 画像処理装置、画像処理方法及びプログラム
JP5334145B1 (ja) 2012-06-29 2013-11-06 トーヨーカネツソリューションズ株式会社 物品のピッキング作業の支援システム
JP6064464B2 (ja) * 2012-09-10 2017-01-25 セイコーエプソン株式会社 頭部装着型表示装置、頭部装着型表示装置の制御方法、および、認証システム
US20140160157A1 (en) * 2012-12-11 2014-06-12 Adam G. Poulos People-triggered holographic reminders
JP6261206B2 (ja) * 2013-06-28 2018-01-17 キヤノン株式会社 情報処理装置、情報処理方法及びプログラム
JP6705124B2 (ja) 2015-04-23 2020-06-03 セイコーエプソン株式会社 頭部装着型表示装置、情報システム、頭部装着型表示装置の制御方法、および、コンピュータープログラム
JP6828235B2 (ja) 2015-12-07 2021-02-10 セイコーエプソン株式会社 頭部装着型表示装置、頭部装着型表示装置の表示を共有する方法、コンピュータープログラム
SG11201706581WA (en) * 2015-02-19 2017-09-28 Francesco Ricci Guidance system and automatic control for vehicles

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH06263204A (ja) * 1993-03-10 1994-09-20 Wanbishi Aakaibuzu:Kk 物品の保管・移送用セキュリティシステム
WO2014128752A1 (ja) * 2013-02-19 2014-08-28 株式会社ブリリアントサービス 表示制御装置、表示制御プログラム、および表示制御方法
JP2015070598A (ja) * 2013-10-01 2015-04-13 共同印刷株式会社 識別コード読取システム及び方法
CN106233283A (zh) * 2014-04-15 2016-12-14 奥林巴斯株式会社 图像处理装置、通信系统以及通信方法和摄像装置
JP2016033757A (ja) * 2014-07-31 2016-03-10 セイコーエプソン株式会社 表示装置、表示装置の制御方法、および、プログラム
CN106575299A (zh) * 2014-08-01 2017-04-19 索尼公司 信息处理装置、信息处理方法和程序
JP2016081502A (ja) * 2014-10-20 2016-05-16 良幸 香取 拡張現実システム
US20160225189A1 (en) * 2015-02-04 2016-08-04 Seiko Epson Corporation Head mounted display, information processing apparatus, image display apparatus, image display system, method for sharing display of head mounted display, and computer program
JP2016188123A (ja) * 2015-03-30 2016-11-04 オークラ輸送機株式会社 ピッキングシステム

Also Published As

Publication number Publication date
JP2019057059A (ja) 2019-04-11
US11010973B2 (en) 2021-05-18
US11763529B2 (en) 2023-09-19
US20190088017A1 (en) 2019-03-21
JP7013757B2 (ja) 2022-02-01
CN109521835B (zh) 2024-03-22
US20210233324A1 (en) 2021-07-29

Similar Documents

Publication Publication Date Title
US11748963B2 (en) Cross reality system with simplified programming of virtual content
US11386627B2 (en) Cross reality system with localization service and shared location-based content
US20200349538A1 (en) System or device for mapping routes to an rfid tag
CN107250891A (zh) 头戴式显示器与真实世界对象之间的相互通信
US10268892B1 (en) System and methods for volume dimensioning for supply chains and shelf sets
US9536350B2 (en) Touch and social cues as inputs into a computer
US9645394B2 (en) Configured virtual environments
CN104487207B (zh) 具有高级功能的存货控制系统
US11763529B2 (en) Information processing apparatus, information processing system, and non-transitory computer readable medium
JP6417467B1 (ja) 仮想又は拡張現実空間サービス提供システム、プログラム及び方法
WO2013028813A1 (en) Implicit sharing and privacy control through physical behaviors using sensor-rich devices
CN107210019A (zh) 基于条纹偏振器的可切换私密显示
EP3714354B1 (en) Navigation in augmented reality environment
CN105051650A (zh) 三维解锁设备、三维解锁方法和程序
TW201347702A (zh) 電子櫥窗系統
US7453471B2 (en) Service providing system, management terminal, mobile member, service providing program, and service providing method
US11593776B2 (en) Communication device to sense one or more biometric characteristics of a user
US11263818B2 (en) Augmented reality system using visual object recognition and stored geometry to create and render virtual objects
US10853469B1 (en) User interface locking system
EP3244286A1 (en) Installation of a physical element
KR20190047922A (ko) 혼합현실을 이용한 정보 공유 시스템
KR20160062036A (ko) 통신 디바이스
US11069381B1 (en) Automated sensor data retention
WO2020244578A1 (zh) 基于光通信装置的交互方法和电子设备
CN109672798A (zh) 信息处理装置以及存储媒体

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
CB02 Change of applicant information

Address after: Tokyo, Japan

Applicant after: Fuji film business innovation Co.,Ltd.

Address before: Tokyo, Japan

Applicant before: Fuji Xerox Co.,Ltd.

CB02 Change of applicant information
GR01 Patent grant
GR01 Patent grant