CN111033606A - 信息处理装置、信息处理方法和程序 - Google Patents

信息处理装置、信息处理方法和程序 Download PDF

Info

Publication number
CN111033606A
CN111033606A CN201880054591.7A CN201880054591A CN111033606A CN 111033606 A CN111033606 A CN 111033606A CN 201880054591 A CN201880054591 A CN 201880054591A CN 111033606 A CN111033606 A CN 111033606A
Authority
CN
China
Prior art keywords
information
user
output
notification
setting
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201880054591.7A
Other languages
English (en)
Inventor
川名阳方
井田健太郎
井元麻纪
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Publication of CN111033606A publication Critical patent/CN111033606A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G3/00Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
    • G09G3/001Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes using specific devices not provided for in groups G09G3/02 - G09G3/36, e.g. using an intermediate record carrier such as a film slide; Projection systems; Display of non-alphanumerical information, solely or in combination with alphanumerical information, e.g. digital display on projected diapositive as background
    • G09G3/002Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes using specific devices not provided for in groups G09G3/02 - G09G3/36, e.g. using an intermediate record carrier such as a film slide; Projection systems; Display of non-alphanumerical information, solely or in combination with alphanumerical information, e.g. digital display on projected diapositive as background to project the image of a two-dimensional display, such as an array of light emitting or modulating elements or a CRT
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04847Interaction techniques to control parameter settings, e.g. interaction with sliders or dials
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03BAPPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B21/00Projectors or projection-type viewers; Accessories therefor
    • G03B21/14Details
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2354/00Aspects of interface with display user

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Computer Hardware Design (AREA)
  • User Interface Of Digital Computer (AREA)
  • Transforming Electric Information Into Light Information (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

提供物理空间中的更加灵活的用户交互框架。该信息处理装置设置有设置单元和输出控制单元,该设置单元设置包括从第一用户至第二用户的通知信息、通知信息在物理空间中的输出位置以及作为用于输出通知信息的条件的通知条件的设置信息,该输出控制单元基于由设置单元设置的设置信息控制输出设备以便在满足通知条件的情况下将通知信息输出至输出位置。

Description

信息处理装置、信息处理方法和程序
技术领域
本公开涉及信息处理装置、信息处理方法以及程序。
技术背景
近年来,诸如智能电话和平板电脑终端的能够进行用户交互的终端设备正在普及。此外,用户接口已经多样化。例如,触摸面板、姿势输入设备和语音输入设备被广泛使用。提出了用于使用这样的各种终端设备或用户接口来实现新的用户交互的技术。
例如,以下专利文献1公开了一种用于通过将安装在房间的天花板上的投影仪与照明开关链接来在用户回家并打开灯的时刻在地板上显示消息的技术。
引用列表
专利文献
专利文献1:JP 2014-21428 A
发明内容
技术问题
然而,专利文献1中描述的技术具有有限的信息通知方法。例如,用于显示信息的触发器限于操作照明开关,并且信息显示位置限于用户所在的地板。考虑到用户便利性,期望以更高的自由度实现用户交互。
为了解决这个问题,本公开提供了一种物理空间中的具有更高自由度的用户交互框架。
问题的解决方案
根据本公开,提供了一种信息处理装置,包括:
设置单元,其设置包括从第一用户至第二用户的通知信息、通知信息在物理空间中的输出位置以及作为用于输出通知信息的条件的通知条件的设置信息;以及
输出控制单元,其基于由设置单元设置的设置信息控制输出设备,以在满足通知条件的情况下将通知信息输出至输出位置。
此外,根据本公开,提供了一种信息处理方法,包括:
设置包括从第一用户至第二用户的通知信息、通知信息在物理空间中的输出位置以及作为用于输出通知信息的条件的通知条件的设置信息;以及
基于所设置的设置信息控制输出设备,以在满足通知条件的情况下将通知信息输出至输出位置。
此外,根据本公开,提供了一种程序,所述程序使得计算机用作:
设置单元,其设置包括从第一用户至第二用户的通知信息、通知信息在物理空间中的输出位置以及作为用于输出通知信息的条件的通知条件的设置信息;以及
输出控制单元,其基于由设置单元设置的设置信息控制输出设备,以在满足通知条件的情况下将通知信息输出至输出位置。
发明的有益效果
如上所述,本公开提供了一种物理空间中的具有更高自由度的用户交互的框架。注意,上述有益效果不必然是限制性的,并且除了上述有益效果之外或代替上述有益效果,可以实现本说明书中所示的任何效果或者可以从本说明书中获悉的其他效果。
附图说明
图1是示出根据本公开的实施方式的信息处理系统的配置的示例的图。
图2是示出根据本实施方式的信息处理系统的配置的示例的框图。
图3是用于说明由根据本实施方式的信息处理系统提供的UI的示例的图。
图4是用于说明由根据本实施方式的信息处理系统提供的UI的示例的图。
图5是用于说明由根据本实施方式的信息处理系统提供的UI的示例的图。
图6是用于说明由根据本实施方式的信息处理系统提供的UI的转变的示例的图。
图7是用于说明由根据本实施方式的信息处理系统提供的UI的示例的图。
图8是示出由根据本实施方式的信息处理系统执行的设置信息设置处理的流程的示例的流程图。
图9是用于说明由根据本实施方式的信息处理系统提供的UI的示例的图。
图10是示出由根据本实施方式的信息处理系统执行的通知信息输出处理的流程的示例的流程图。
图11是示出根据本实施方式的信息处理装置的硬件配置的示例的框图。
具体实施方式
在下文中,将参照附图详细描述本公开的优选实施方式。在本说明书和附图中,具有基本相同的功能配置的部件将由相同的附图标记表示并且将省略冗余的描述。
将按照以下顺序进行描述。
1.信息处理系统的概要
2.配置示例
3.技术特征
3.1.各种类型的信息的内容
3.2.设置信息设置处理
3.3.通知信息输出处理
4.应用示例
5.硬件配置示例
6.结论
<<1.信息处理系统的概要>>
将参照图1描述根据本公开的实施方式的信息处理系统的配置。图1是示出根据本公开的实施方式的信息处理系统的配置的示例的图。
参照图1,根据本公开的实施方式的信息处理系统100包括输入单元110和输出单元160。输入单元110和输出单元160被安装在物理空间30中。
物理空间30是用户(11,12)能够在空间内进行操作的物理空间。物理空间30可以是诸如室内的封闭空间,或者可以是诸如室外的开放空间。在本说明书中,物理空间被假定为诸如住宅中的房间、入口、走廊或厨房的生活空间。
输出单元160是将各种类型的信息映射和显示在物理空间30的任意表面上、从而可视地向用户通知信息的设备。作为输出单元160,例如,使用投影仪。在图1所示的示例中,输出单元160例如以从天花板悬挂的状态被设置在物理空间30的上方,并且将画面21投影到墙壁31上。
输入单元110是输入关于物理空间30的信息和关于用户的信息的设备。在图1所示的示例中,输入单元110以从例如天花板悬挂的状态被设置在物理空间30的上方。输入单元110可以是以物理空间30作为成像目标的成像设备。此外,作为输入单元110,例如,可以使用利用一个镜头捕获图像的摄像装置、或者可以通过利用两个镜头捕获图像来获取深度方向上的信息的立体摄像装置。
信息处理系统100可以通过分析由成像设备捕获的捕获图像来获取物理空间30内的信息。物理空间30内的信息包括关于物理空间30中的诸如墙壁、地板和家具的真实对象的形状和布置的信息以及关于用户的信息。特别地,当立体摄像装置用作输入单元110时,信息处理系统100可以通过分析捕获图像来获取距输入单元110的距离的映射(即,深度信息)。然后,基于深度信息,信息处理系统100将真实对象的深度信息与例如用户的手部的深度信息进行比较,从而能够检测用户的手部触摸或接近真实对象以及用户的手部离开真实对象。
在本实施方式中,基于由输入单元110捕获的图像来检测操作工具(例如,用户的手部)在画面21上的位置,并且基于所检测到的操作工具的位置来输入各种类型的信息。即,用户可以通过在画面21上移动操作工具来执行各种操作输入。例如,当检测到用户的手部与画面21接触时,执行对画面21的操作输入。在以下描述中,将以用户的手部用作操作工具的情况为示例进行描述,但是本实施方式不限于该示例,并且可以使用诸如触笔的各种操作构件作为操作工具。
此处,本实施方式不限于这样的示例,并且可以通过其他方法来执行用户的操作输入。例如,可以在墙壁31上设置触摸面板作为输入单元110,并且可以通过用户的手指等对触摸面板的接触来检测用户操作输入。此外,不仅可以使用对画面的操作,还可以使用语音输入等。
信息处理系统100可以使用物理空间30中的任意位置作为输出位置来输出信息。例如,信息处理系统100不仅可以将画面21投影到墙壁31上,还可以将画面21投影到墙壁32、墙壁33或地板34上。例如,当使用所谓的移动投影仪作为输出单元160时,信息处理系统100通过改变移动投影仪的投影方向来提供对输出位置的控制。替选地,当固定投影仪用作输出单元160时,信息处理系统100选择能够将图像投影到墙壁31、墙壁32、墙壁33和地板34上的四个相应投影仪中的一个,由此可以提供对输出位置的控制。信息处理系统100可以通过以相同的方式操作输入单元110来输入关于任意位置的信息。信息处理系统100因此可以将信息输出至物理空间30中的任意位置,并且还可以检测对输出至任意位置的画面的用户输入。
上面已经描述了根据本实施方式的信息处理系统100的配置。
图1所示的用户11是用作信息的通知源的用户,而用户12是用作信息的通知目的地的用户。用户11和12可以经由信息处理系统100彼此通信。例如,用户11在由信息处理系统100显示的设置画面上输入各种类型的信息,由此在信息处理系统100中设置包括要发布给用户12的通知信息、通知信息的通知条件和通知信息的输出位置的设置信息。设置画面是用于设置或确认设置信息的画面。此后,信息处理系统100在满足所设置的通知条件的定时处将所设置的通知信息输出至所设置的输出位置。例如,可以将诸如文本、图像或语音的任意格式的信息设置为通知信息。例如,可以将与用户12在物理空间中的位置、动作等有关的任意条件设置为通知条件。例如,可以将墙壁31、32、33和地板34中的任意位置设置为输出位置。因此,提供了具有高自由度的用户交互,例如,在用户12进入物理空间30的定时处在墙壁31上输出包括文本消息的画面。
近年来,已经使用诸如智能电话的终端设备主动地执行使用文本或语音的通信。然而,这样的通信方法的缺点在于,难以立即注意到信息已经从另一方到来,不能在适当的定时处获得信息,并且施加了携带终端设备的负担。在这方面,由信息处理系统100提供的使用物理空间的通信方法可以消除这些缺点。这是因为信息被输出至物理空间,使得用户不需要携带任何终端设备并且可以立即注意到该信息。此外,由于可以自由地设置通知条件,因此用户可以在适当的定时处获得信息。
在该背景下,可以说在专利文献1中公开了使用物理空间的通信的概念本身。然而,在这样的文献中公开的技术具有许多限制,例如位置限于入口、通知条件限于照明开关的操作以及通知信息限于图像。
在这方面,由信息处理系统100提供的使用物理空间的通信可以减少这些限制。这是因为可以自由地设置通知信息、通知条件和输出位置。例如,信息处理系统100可以在任意定时处,将物理空间中的任意位置用作输出位置来输出任意通知信息。此外,信息处理系统100可以输出由物理空间中的细微移动触发的通知信息,其中单独利用智能电话、平板电脑等的GPS功能难以检测该细微移动。
《2.配置示例》
图2是示出根据本实施方式的信息处理系统100的配置的示例的框图。如图2所示,信息处理系统100包括输入单元110、获取单元120、设置单元130、存储单元140、输出控制单元150和输出单元160。注意,信息处理系统100可以实现为单个设备,或者可以实现为多个设备。
(1)输入单元110
输入单元110具有输入关于用户或物理空间的信息的功能。输入单元110可以由各种设备来实现。
例如,输入单元110可以包括成像设备。成像设备包括镜头系统、驱动系统和成像传感器,并且捕获图像(静止图像或运动图像)。
例如,输入单元110可以包括深度传感器。深度传感器是红外测距设备、超声测距设备、飞行时间(ToF)测距设备、激光成像检测和测距(LiDAR)、立体摄像装置等的获取深度信息的设备。
例如,输入单元110可以包括声音收集设备(麦克风)。声音收集设备是收集周围声音并且输出经由放大器和模拟数字转换器(ADC)转换成数字信号的语音数据的设备。
例如,输入单元110可以包括惯性传感器。惯性传感器是检测诸如加速度或角速度的惯性信息的设备。惯性传感器例如被附接至用户。
例如,输入单元110可以实现为生物传感器。生物传感器是检测诸如用户的心跳或体温的生物信息的设备。例如,生物传感器被附接至用户。
例如,输入单元110可以包括环境传感器。环境传感器是检测诸如物理空间的亮度、温度、湿度或气压的环境信息的设备。
例如,输入单元110可以包括基于与用户的物理接触来输入信息的设备。这样的设备的示例包括鼠标、键盘、触摸面板、按钮、开关和操纵杆。这些设备可以被安装在诸如智能电话、平板电脑终端或个人计算机(PC)的终端设备上。
例如,输入单元110可以实现为无线通信设备。该无线通信设备符合诸如无线局域网(LAN)、Wi-Fi(注册商标)、蓝牙(注册商标)、Zigbee(注册商标)或近场通信(NFC)的无线通信标准,并且能够与其他设备进行通信。例如,无线通信设备读取无线识别标签,例如射频标识符(RFID)标签。
输入单元110基于通过获取单元120进行的控制来输入信息。例如,获取单元120可以控制成像设备的变焦比和成像方向。
输入单元110可以包括多个上述输入设备之一或其组合,或者可以包括同一类型的多个输入设备。
(2)获取单元120
获取单元120具有根据使用输入单元110输入的输入信息获取物理空间中的信息的功能。如图2所示,获取单元120包括空间信息获取单元121和用户信息获取单元122。空间信息获取单元121具有获取关于物理空间的信息(下文中也称为“空间信息”)的功能。用户信息获取单元122具有获取用户信息(下文中也称为“用户信息”)的功能。稍后将描述由获取单元120获取的各种类型的信息的细节。获取单元120将所获取的空间信息和用户信息输出至设置单元130、存储单元140和输出控制单元150中的每一个。
(3)设置单元130
设置单元130具有基于由获取单元120获取的空间信息和用户信息来对设置信息进行设置的功能。设置信息包括从第一用户至第二用户的通知信息、通知信息在物理空间中的输出位置以及作为用于输出通知信息的条件的通知条件。稍后将描述由设置单元130设置的设置信息的细节和设置处理的细节。设置单元130将所设置的设置信息输出至存储单元140。
(4)存储单元140
存储单元140具有临时或永久存储用于信息处理系统100的操作的信息的功能。存储单元140存储由设置单元130设置的设置信息。存储单元140存储由获取单元120获取的用户信息和空间信息。存储单元140构造用于存储这些信息的数据库(DB)。
(5)输出控制单元150
输出控制单元150具有基于由获取单元120获取的空间信息和用户信息以及从存储单元140输出的设置信息来控制输出单元160以输出信息的功能。具体地,基于由设置单元130设置的设置信息,输出控制单元150控制输出单元160,以在满足设置信息中设置的通知条件的情况下将所设置的通知信息输出至所设置的输出位置。稍后将描述由输出控制单元150进行的输出处理的细节。
(6)输出单元160
输出单元160是向用户输出信息的设备。输出单元160可以由各种设备实现。
输出单元160可以包括输出视觉信息的显示设备。输出单元160将视觉信息映射并输出到真实对象的表面上。该输出单元160的示例是投影设备(即,投影仪)。投影仪可以是例如固定的广角投影仪,或者是包括可以改变投影方向的可移动部件的所谓的移动投影仪,例如横滚/俯仰驱动类型(Pan/Tilt drive type)。此外,能够将视觉信息映射并输出到真实对象的表面上的输出单元160的示例包括诸如具有透射显示器的头戴式显示器(HMD)的设备。在具有透射显示器的设备中,增强现实(AR)对象被叠加并显示在真实对象的表面上。在本实施方式中,将输出视觉信息的输出单元160描述为投影仪。
输出单元160可以包括输出听觉信息的语音输出设备。该输出单元160的示例包括扬声器、定向扬声器、耳机和头戴式耳机。
输出单元160可以包括输出触觉信息的触觉输出设备。触觉信息的示例包括振动、力感、温度或电刺激。输出触觉信息的输出单元160的示例包括马达、致动器和热源。
输出单元160可以包括输出嗅觉信息的设备。嗅觉信息的示例包括气味。输出嗅觉信息的输出单元160的示例包括香气扩散器。
输出单元160基于通过输出控制单元150进行的控制来输出信息。例如,输出单元160可以基于通过输出控制单元150进行的控制来改变移动投影仪的投影方向或定向扬声器的方向性。
输出单元160可以包括多个上述输出设备之一或其组合,或者可以包括同一类型的多个输出设备。
特别地,在本实施方式中,期望将同一类型的多个输出设备以不同的安装位置或输出方向安装在物理空间中。这是因为可以使用物理空间中的任意位置作为输出位置来输出通知信息。
<<3.技术特征>>
在下文中,将详细描述信息处理系统100的技术特征。
<3.1.各种类型的信息的内容>
(1)空间信息
空间信息获取单元121基于由输入单元110输入的信息来获取空间信息。在下文中,将描述空间信息。
空间信息可以包括指示物理空间中的真实对象的类型和布置的信息。此外,空间信息可以包括真实对象的识别信息。例如,空间信息获取单元121通过识别捕获图像来获取这些信息。替选地,空间信息获取单元121可以基于针对附接至物理空间中的真实对象的RFID标签的读取结果来获取这些信息。此外,空间信息获取单元121可以基于用户输入来获取这些信息。物理空间中的真实对象的示例包括墙壁、地板和家具。
空间信息可以包括指示空间的形状的三维信息。指示空间的形状的三维信息是指示由物理空间中的真实对象限定的空间的形状的信息。例如,空间信息获取单元121基于深度信息来获取指示空间的形状的三维信息。在可以获取指示物理空间中的真实对象的类型和布置的信息以及真实对象的识别信息的情况下,空间信息获取单元121可以考虑这些信息并且获取指示空间的形状的三维信息。
空间信息可以包括诸如形成空间的表面(例如,诸如墙壁、地板和家具的真实对象的表面)的材料、颜色或纹理的信息。例如,空间信息获取单元121通过识别捕获图像来获取这些信息。在可以获取指示物理空间中的真实对象的类型和布置的信息以及真实对象的识别信息的情况下,空间信息获取单元121可以考虑这些信息并且获取这些信息。
空间信息还可以包括关于物理空间中的状态的信息,例如物理空间的亮度、温度和湿度。例如,空间信息获取单元121基于环境信息来获取这些信息。
空间信息包括上述至少一种类型的信息。
(2)用户信息
用户信息获取单元122基于由输入单元110输入的信息来获取用户信息。在下文中,将描述用户信息。
用户信息可以包括物理空间中是否存在用户、物理空间中存在的用户数目以及每个用户的识别信息。例如,用户信息获取单元122通过识别捕获图像中包括的用户的面部来获取这些信息。
用户信息可以包括用户属性信息。属性信息是指示诸如年龄、性别、工作、家庭结构或友人关系的用户属性的信息。例如,用户信息获取单元122基于捕获图像或者通过使用用户识别信息对存储属性信息的数据库进行查询来获取用户属性信息。
用户信息可以包括指示用户位置的信息。例如,用户信息获取单元122基于捕获图像和深度信息来获取指示用户位置的信息。
用户信息可以包括指示用户姿势的信息。例如,用户信息获取单元122基于捕获图像、深度信息和惯性信息来获取指示用户姿势的信息。用户的姿势可以是指例如暂停、站立、坐着或躺下的整个身体的姿势或者诸如面部、躯干、手部、脚部或手指的部分身体的姿势。
用户信息可以包括指示用户的动作的信息。例如,用户信息获取单元122可以通过诸如使用成像设备或成像设备和标记两者的光学方法、使用附接至用户的惯性传感器的惯性传感器方法或者使用深度信息的方法的任意方法来识别用户的动作,从而获取指示用户的动作的信息。用户的动作可以是指例如移动的使用整个身体的动作或者例如手势的使用身体的一部分的动作。此外,作为用户信息,如上面参照图1所描述的对被映射并显示在物理空间的任意表面上的画面的用户输入也被获取作为指示用户动作的信息。
用户信息可以包括由用户通过语音输入的信息。例如,用户信息获取单元122可以通过识别用户的话语来获取这样的信息。
用户信息包括上述至少一种类型的信息。
(3)设置信息
设置单元130具有设置下述信息的功能,该信息包括从第一用户至第二用户的通知信息、通知信息在物理空间中的输出位置以及作为用于输出通知信息的条件的通知条件。在下文中,将详细描述设置信息。
-通知信息
通知信息包括可以由输出单元160输出的任意格式的信息。
通知信息可以包括视觉信息。视觉信息的示例包括文本和图像(静止图像/运动图像)。
通知信息可以包括听觉信息。听觉信息的示例包括音频。
此外,通知信息可以包括诸如振动、力感、温度或电刺激的触觉信息,或者诸如气味的嗅觉信息。
通知信息可以包括多种类型的信息的组合。例如,通知信息可以包括文本、图像和语音的组合。
-输出位置
输出位置被设置为物理空间中的绝对位置或以第二用户为基准的相对位置。
物理空间中的绝对位置例如是特定的墙壁表面或特定的家具表面。设置单元130通过指定物理空间的三维信息中的与特定位置对应的坐标来将物理空间中的绝对位置设置为输出位置。
以第二用户为基准的相对位置例如是第二用户的视线所指向的表面、第二用户的移动路径上的地板或第二用户的身体表面。设置单元130通过指定以第二用户的位置和/或姿势为基准的相对坐标来将以第二用户为基准的相对位置设置为输出位置。在这种情况下,可以将通知信息输出至第二用户可以容易地注意到的位置,而不管第二用户在物理空间中的位置、姿势或动作如何。
-通知条件
通知条件包括用于指定第二用户的信息,并且包括关于第二用户在物理空间中的位置、姿势或动作、物理空间的状态或者时间中至少之一的条件。
用于指定第二用户的信息是用于指定用作通知信息的通知目的地的用户的信息。这样的信息包括用户识别信息。在这种情况下,由识别信息指定的用户可以静态地成为第二用户。替选地,指定第二用户的信息可以是指定用户的属性或状态的信息。在这种情况下,在物理空间中的用户中,例如男性或疲倦的任意用户可以被动态地设置为第二用户。此外,可以将用于指定所有用户的信息设置为用于指定第二用户的信息。在这种情况下,未指定的用户可以是通知信息的通知目的地。
关于第二用户在物理空间中的位置、姿势或动作的通知条件是指指示第二用户处于物理空间中的预定位置、采取预定姿势、执行预定动作等的条件。在这种条件下,例如,在诸如第二用户正经过诸如走廊或入口的特定位置、弯腰穿鞋或触摸特定真实对象的定时的任意定时处发布通知信息。
关于物理空间的状态的通知条件是指例如温度、亮度或真实对象在物理空间中的布置的物理空间的状态成为预定状态。在这种条件下,例如,在诸如物理空间的温度显著降低或物理空间的灯被熄灭的定时的任意定时处发布通知信息。
关于时间的通知条件是指指示已经达到预定时间、已经过了预定时间等的条件。在这种条件下,例如,在诸如达到起床时间的定时的任意定时处发布通知信息。
这些条件可以组合设置。例如,通过组合第二用户的位置和时间,可以设置通知条件使得自第二用户触摸特定的真实对象起已经经过预定时间之后发布通知信息。
因此,第一用户可以以高自由度设置向第二用户发布通知信息的定时。
通常,第一用户和第二用户是不同的人。在这种情况下,可以在不同用户之间执行通信。例如,假定诸如父母和孩子、哥哥和弟弟或者朋友的关系作为第一用户与第二用户之间的关系。此外,第一用户和第二用户中的每一者可以是一个人,或者他们中的每一者可以是多个人,或者他们中之一可以是一个人,而另一者可以是多个人。
第一用户和第二用户可以是同一人。在这种情况下,用户可以进行设置以向他/她自己通知信息。要发布给自己的信息包括第二天的时间表、闹钟时间的设置、外出前遗留物品的清单等。用户可以在不打开笔记本或操作诸如智能电话的终端设备的情况下识别传统上在笔记本或终端设备上管理的这些信息。因此,可以防止用户没有确认信息。此外,用户可以减少通过手写或在终端设备中进行记录而留下备忘录的麻烦。
<3.2.设置信息设置处理>
下面将详细描述设置信息设置处理。
-由第一用户进行的设置
可以由第一用户对设置信息进行设置。
例如,获取单元120基于在设置画面上的用户输入来对设置信息进行设置。
可以将设置画面映射并显示在物理空间的任意表面上。例如,设置单元130基于第一用户的相对于由投影仪投影到物理空间上的设置画面的动作来对设置信息进行设置。在下文中,将参照图3至图4描述其示例。
图3和图4是用于说明由根据本实施方式的信息处理系统100提供的用户接口(UI)的示例的图。图3和图4所示的物理空间40被墙壁41包围,并且包括桌子42、四张椅子43、下板45以及在下板45上的电视接收器(下文中也称为“TV”)46。在图3所示的示例中,设置画面22被映射并显示(例如,投影)到墙壁41上。第一用户11通过触摸设置画面22来输入设置信息。在图4所示的示例中,将设置画面23映射并显示(例如,投影)到桌子42的顶表面42a上。第一用户11通过触摸设置画面23来输入设置信息。在参照图3和图4描述的示例中,第一用户11可以通过用手指在映射并显示在物理空间40中的画面上输入信息来对设置信息进行设置。因此,第一用户11可以省去在诸如智能电话的终端设备上安装或操作专用应用的麻烦。
此处,基于第一用户的用户信息开始设置画面的显示。例如,通过将设置画面映射到第一用户的手指指向的方向上的真实对象、触摸的真实对象或通过语音指定的真实对象来显示设置画面。此处,可以设置预定条件以便确定第一用户的动作是否是意图显示设置画面的动作。预定条件的示例包括保持触摸同一位置几秒钟或说出特定的秘密词。在这样的条件下,可以防止无意地显示设置画面。
设置画面可以显示在诸如智能电话的终端设备上。在这种情况下,设置单元130基于由第一用户对显示在终端设备上的设置画面进行的输入来对设置信息进行设置。在这种情况下,第一用户可以从远程地点对设置信息进行设置。
注意,除了对设置画面的输入之外,设置单元130还可以基于由第一用户在物理空间中进行的语音输入来对设置信息进行设置。
-输出位置的设置
设置单元130可以对设置信息进行设置,其中由第一用户在物理空间中指定的位置用作输出位置。例如,对设置信息进行设置,其中,物理空间中的在第一用户的手指指向的方向上的真实对象、触摸的真实对象或通过语音指定的真实对象用作输出位置。因此,第一用户可以直观地设置输出位置。
设置单元130可以对设置信息进行设置,其中由第一用户在包括物理空间的俯视图的设置画面上指定的位置用作输出位置。设置单元130基于指示物理空间中的真实对象的类型和布置的信息以及诸如物理空间的三维信息的空间信息,来生成包括物理空间的俯视图的设置画面。俯视图通常是平面图。设置单元130对设置信息进行设置,其中由第一用户在设置画面上指定的位置用作输出位置。第一用户因此可以俯视物理空间的同时设置输出位置。
包括物理空间的俯视图的设置画面可以由终端设备显示。在这种情况下,基于由第一用户对终端设备进行的输入来设置输出位置。具体地,设置单元130对设置信息进行设置,其中与由第一用户在俯视图中指定的位置对应的物理空间中的位置用作输出位置。第一用户可以从远程地点在俯视物理空间的同时设置输出位置。在下文中,作为示例,将参照图5描述用于使用终端设备设置输出位置的UI。
图5是用于说明由根据本实施方式的信息处理系统100提供的UI的示例的图。如图5所示,在智能电话200的显示器210上显示包括物理空间40的俯视图的设置画面50。设置画面50包括其中布置有墙壁51、桌子52、围绕桌子52布置的四张椅子53、柜子54、下板55、布置在下板55上的TV 56以及沙发57的俯视图。该俯视图是图3和图4所示的物理空间40的俯视图。具体地,墙壁41对应于墙壁51,桌子42对应于桌子52,椅子43对应于椅子53,下板45对应于下板55,并且TV 46对应于TV 56。用户可以在设置画面50上指定输出位置。在图5所示的示例中,将桌子52的顶表面指定为输出位置,并且显示指示输出位置被指定的信息58。在这种情况下,通知信息被显示在图3和图4所示的桌子42的顶表面42a上。
-通知信息和通知条件的设置
设置单元130基于来自第一用户的指示来设置通知信息和通知条件。例如,设置单元130显示用于设置通知信息和通知条件的设置画面,并且基于对设置画面的用户操作来设置通知信息和通知条件。在下文中,将参照图6来描述用于设置通知信息和通知条件的设置画面的示例。
图6是用于说明由根据本实施方式的信息处理系统100提供的UI的转变的示例的图。如图6所示,首先,显示用于输入信息类型的设置画面60。当第一用户选择设置画面60上的文本时,显示用于输入文本的设置画面61。在设置画面61上,可以输入文本并且还可以设置与文本一起显示的图像。当第一用户在设置画面60上选择语音备忘录时,显示用于输入语音的设置画面62。当在显示设置画面62的情况下第一用户发出语音时,将该语音设置为通知信息。在设置画面62上,可以进行语音输入,并且还可以设置与语音输出一起显示的图像。当完成了设置画面61或设置画面62上的设置时,显示用于设置显示定时(即,通知条件)的设置画面63。在设置画面63上,第一用户设置通知条件。
此处,可以按与上述输出位置相同的方式设置针对其确定通知条件的位置。针对其确定通知条件的位置是针对其确定是否满足通知条件的位置。例如,在通知条件是第二用户向特定位置的移动时,特定位置是针对其确定通知条件的位置。注意,输出位置、针对其确定通知条件的位置以及显示设置画面的位置可以不同,或者这些位置中的两个或更多个位置可以相同。
例如,设置单元130可以对设置信息进行设置,其中由第一用户在物理空间中指定的位置用作针对其确定通知条件的位置。此外,设置单元130可以对设置信息进行设置,其中由第一用户在包括物理空间的俯视图的设置画面上指定的位置用作针对其确定通知条件的位置。
-指示已经设置的设置信息的信息的输出
输出控制单元150可以控制输出单元160以输出指示已经设置的设置信息的信息。具体地,输出控制单元150控制输出单元160以输出指示包括在已经设置的设置信息中的通知信息、输出位置和通知条件中至少之一的信息。第一用户因此可以确认已经设置了什么设置信息。此外,第二用户可以识别在什么条件下在哪个位置可以接收什么种类的通知信息,并且可以主动地采取满足通知条件的动作。
可以将指示已经设置的设置信息的信息映射并显示到设置信息中设置的输出位置上。因此,用户可以直观地识别在物理空间中的何处输出通知信息。
可以将指示已经设置的设置信息的信息包括并显示在包括俯视图的设置画面上。例如,在包括俯视图的该设置画面上,指示已经设置的设置信息的信息被布置在与所设置的输出位置对应的位置处。将参照图7描述该UI示例。
图7是用于说明由根据本实施方式的信息处理系统100提供的UI的示例的图。如图7所示,在智能电话200的显示器210上显示包括物理空间40的俯视图的设置画面50。用户可以在设置画面50上对设置信息进行设置。在设置画面50上布置指示已经设置的设置信息的指示器59A至59C。在指示器59A中包括的音符指示通知信息包括语音。指示器59A与桌子52相关联地布置的事实指示物理空间中的桌子被设置为输出位置。在指示器59B中包括的音符指示通知信息包括语音。指示器59B与柜子54相关联地布置的事实指示物理空间中的柜子被设置为输出位置。在指示器59C中包括的文档符号指示通知信息包括文本。指示器59C与沙发57相关联地布置的事实指示物理空间中的沙发被设置为输出位置。利用该设置画面,用户可以一眼确认在什么位置用作输出位置的情况下设置什么设置信息。这特别地提高了在设置大量设置信息的情况下的用户便利性。
尽管在以上描述中已经描述了输出位置,但是可以为针对其确定通知条件的位置提供类似的UI。换句话说,可以将指示已经设置的设置信息的信息映射并显示到在设置信息中设置的针对其确定通知条件的位置上。用户因此可以直观地识别在物理空间中的哪个位置确定通知条件。此外,在包括俯视图的设置画面上,可以将指示在已经设置的设置信息中设置的通知信息的信息布置在与所设置的针对其确定通知条件的位置对应的位置处。利用这样的设置画面,用户可以一眼确认在物理空间中的何处确定通知条件。
-自动设置
设置单元130可以在无需由第一用户进行的任何输入的情况下对设置信息进行设置。例如,设置单元130可以在无需由第一用户进行的任何输入的情况下设置通知信息、通知条件和输出位置中至少之一。
设置单元130可以设置包括与输出位置对应的通知信息的设置信息。例如,设置单元130在入口用作输出位置的情况下将天气或道路信息设置为通知信息、在起居室用作输出位置的情况下将地震预警设置为通知信息,并且在入口之后的走廊用作输出位置的情况下将用于提示用户熄灭厨房火的信息设置为通知信息。因此,减少了第一用户对设置信息进行设置的负担。
-处理流程
接下来,将参照图8描述设置信息设置处理的流程的示例。
图8是示出由根据本实施方式的信息处理系统100执行的设置信息设置处理的流程的示例的流程图。
如图8所示,获取单元120首先获取空间信息和用户信息(步骤S102)。具体地,空间信息获取单元121基于使用输入单元110输入的输入信息来获取空间信息。此外,用户信息获取单元122基于使用输入单元110输入的输入信息来获取第一用户的用户信息。这些信息被存储在存储单元140中。
例如,设置单元130基于用户输入来对设置信息进行设置(步骤S104)。例如,设置单元130基于对映射并显示在物理空间的任意表面上的设置画面或显示在终端设备上的设置画面的用户输入,对设置信息进行设置。
接下来,设置单元130确定设置信息的设置是否已经完成(步骤S106)。如果确定设置还没有完成(步骤S106/否),则处理再次返回到步骤S102。当确定已经完成设置时(步骤S106/是),存储单元140将设置信息存储在DB中(步骤S108)。
通过上述处理,在存储单元140中存储的空间信息、用户信息和设置信息被更新为最新的。
<3.3.通知信息输出处理>
下面将详细描述通知信息输出处理。
基于由设置单元130设置的设置信息,输出控制单元150控制输出单元160,以在满足在设置信息中设置的通知条件的情况下将所设置的通知信息输出至所设置的输出位置。具体地,首先,输出控制单元150参考存储单元140、读取已经设置的一条或更多条设置信息,并且针对它们中的每一个确定是否满足通知条件。输出控制单元150基于第二用户的用户信息和空间信息中至少之一来确定是否满足通知条件。然后,在满足通知条件的情况下,输出控制单元150控制输出单元160,以将所设置的通知信息输出至满足通知条件的设置信息中设置的输出位置。将参照图9描述该情况的一个示例。
图9是用于说明由根据本实施方式的信息处理系统100提供的UI的示例的图。图9所示的物理空间40与参照图3至图5描述的物理空间40相同。例如,假设第一用户11对设置信息进行设置,以使得在第二用户12已经接近物理空间40中的桌子42的定时处向墙壁41输出通知信息。在这种情况下,如图9所示,在第二用户12已经接近物理空间40中的桌子42的定时处在墙壁41上显示包括所设置的通知信息的画面24。
例如,可以通过从具有不同安装位置或输出方向的多个输出设备中选择输出通知信息的输出设备来提供对输出位置的控制。例如,通过从具有不同投影方向的多个固定投影仪中选择输出通知信息的投影仪来提供对输出位置的控制。
可以通过控制输出设备以改变输出位置来执行对输出位置的控制。例如,可以通过例如驱动运动投影仪以改变投影方向来提供对与视觉信息有关的输出位置的控制。例如,可以通过改变定向扬声器的方向性、使用超声波扬声器或使用波前合成技术来提供对与听觉信息有关的输出位置的控制。
-通知信息的内容的改变
输出控制单元150可以基于第二用户的用户信息和空间信息中至少之一来改变通知信息的内容。输出控制单元150可以根据用户属性或状态改变通知信息的内容。例如,当第二用户是外国人时,输出控制单元150将在通知信息中包括的文本翻译成第二用户的母语,并且当第二用户是孩子时,输出控制单元150将在通知信息中包括的文本改变为孩子可理解的事物。此外,输出控制单元150可以根据通知信息被映射并显示到其上的真实对象来改变通知信息的内容。例如,当映射并显示通知信息的区域小并且不能确保足够的显示区域时,输出控制单元150简化通知信息。通过如上所述的那样改变通知信息的内容,第二用户可以更舒适地识别通知信息。
输出控制单元150可以将通知信息的内容更新为输出时的信息。例如,输出控制单元150访问网络(Web)等并且将通知信息的内容更新为最新信息。这使得对于诸如天气或道路信息的根据时间改变的信息,可以向第二用户提供最新信息。
-输出模式的选择
输出控制单元150可以基于第二用户的用户信息和空间信息中至少之一来选择输出通知信息的输出设备的类型。例如,当第二用户是成人时,输出控制单元150选择显示设备作为输出设备,以便将在通知信息中包括的文本作为字符串输出。当第二用户是孩子时,输出控制单元150选择语音输出设备作为输出设备,以便通过语音输出在通知信息中包括的文本。此外,例如,当物理空间中的噪声水平太高而不能识别出语音时,输出控制单元150选择显示设备作为输出设备,以便将在通知信息中包括的语音转换成文本并且将其作为字符串输出。当物理空间中的噪声水平低时,输出控制单元150选择语音输出设备作为输出设备,以便按原样输出在通知信息中包括的语音。通过以这种方式选择输出设备,第二用户可以更舒适地识别通知信息。
-通知之前的确认
输出控制单元150可以控制输出单元160,以在满足通知条件并且第二用户同意输出通知信息的情况下,输出通知信息。例如,在满足通知条件的情况下,输出控制单元150控制输出单元160以输出询问是否同意输出通知信息的画面或语音引导。输出控制单元150在获得同意时使得输出通知信息,并且在未获得同意时使得不输出通知信息。第二用户因此可以主动地且选择性地接收通知信息的发布。
-反馈
输出控制单元150可以控制输出单元160以向第一用户输出指示第二用户对输出的通知信息的反应的信息。指示第二用户的反应的信息是:是否已经接收到信息的通知、对所发布的信息的回复等。设置单元130可以使用指示第二用户的反应的信息作为针对第一用户的通知信息来对设置信息进行设置。因此,在第一用户已经返回到物理空间等的定时处,向第一用户输出指示第二用户的反应的信息。由此,不仅实现了从第一用户至第二用户的单向通信,而且实现了双向通信。
-其他
存储单元140可以删除或保留针对其已经输出通知信息的设置信息。此外,存储单元140可以在通知信息的输出计数已经达到预定阈值时删除设置信息,或者可以在已经经过预定时间段时删除设置信息。
-处理流程
接下来,将参照图10描述通知信息输出处理的流程的示例。
图10是示出由根据本实施方式的信息处理系统100执行的通知信息输出处理的流程的示例的流程图。
如图10所示,获取单元120首先获取空间信息和用户信息(步骤S202)。具体地,空间信息获取单元121基于使用输入单元110输入的输入信息来获取空间信息。此外,用户信息获取单元122基于使用输入单元110输入的输入信息获取第二用户的用户信息。这些信息被存储在存储单元140中。
接下来,输出控制单元150确定是否存在满足通知条件的设置信息(步骤S204)。具体地,输出控制单元150读取在存储单元140中存储的一条或更多条设置信息,并且基于空间信息和用户信息中至少之一来确定每条设置信息是否满足通知条件。如果确定不存在满足通知条件的设置信息(步骤S204/否),则处理再次返回到步骤S202。
如果确定存在满足通知条件的设置信息(步骤S204/是),则输出控制单元150基于满足通知条件的设置信息在所设置的输出位置处输出所设置的通知信息(步骤S206)。在该处理中,输出控制单元150可以改变通知信息的内容、选择输出模式和/或在通知之前执行确认等。此外,在输出通知信息之后,输出控制单元150可以执行对第一用户的反馈。
接下来,存储单元140更新设置信息DB(步骤S208)。例如,存储单元140删除针对其已经输出通知信息的设置信息。
《4.应用示例》
在下文中,将描述信息处理系统100的应用示例。
(1)用于提高日常生活便利性的应用示例
例如,当第二用户坐在沙发上时,信息处理系统100再现语音“倒垃圾”。如上所述,第一用户可以提示第二用户执行他/她希望在日常生活中执行的动作。此外,信息处理系统100在第二用户已经移动到当第二用户外出时总是停止的位置(例如入口)的定时处,在该位置容易注意到的位置(例如门)上显示外出时的所有物的列表。这防止第二用户在外出时遗留某些需要的物品。
(2)用于防止危险行为的应用示例
例如,信息处理系统100在孩子靠近诸如厨房的危险位置的情况下在孩子已经接近的定时处,以声音或文本输出孩子不应接近的警告。这可以将孩子引导到其他方向并且保护他/她免受危险。此外,当用户靠近或把手伸向例如放置在高位置处的花瓶或植物的处于跌落风险的真实对象时,信息处理系统100输出警告。这可以保护未指定的用户免受危险。
(3)防止没有确认信息
例如,信息处理系统100在第二用户躺在卧室的床上或坐在起居室中的沙发上的定时处显示第二天的时间表、闹钟时间的设置、外出前遗留物品的清单等。第二用户因此能够在不打开笔记本或操作诸如智能电话的终端设备的情况下识别传统上在笔记本或终端设备上管理的信息。因此,第二用户可以防止没有确认信息。
<<5.硬件配置示例>>
最后,将参照图11描述根据本实施方式的信息处理装置的硬件配置。图11是示出根据本实施方式的信息处理装置的硬件配置的示例的框图。注意,图11所示的信息处理装置900可以实现例如图2所示的信息处理系统100。通过如下所述的软件与硬件之间的协作来实现根据本实施方式的信息处理系统100进行的信息处理。
如图11所示,信息处理装置900包括中央处理单元(CPU)901、只读存储器(ROM)902、随机存取存储器(RAM)903和主机总线904a。信息处理装置900还包括桥接器904、外部总线904b、接口905、输入设备906、输出设备907、存储设备908、驱动器909、连接端口911和通信设备913。替代CPU 901或除了CPU 901之外,信息处理装置900可以包括诸如电学电路、DSP或ASIC的处理电路。
CPU 901用作算术处理单元和控制单元,并且根据各种程序控制信息处理装置900中的整体操作。此外,CPU 901可以是微处理器。ROM 902存储由CPU 901使用的程序、计算参数等。RAM 903临时存储在CPU 901的执行中使用的程序、在执行中适当地改变的参数等。CPU 901可以形成例如图2所示的获取单元120、设置单元130和输出控制单元150。
CPU 901、ROM 902和RAM 903通过包括CPU总线等的主机总线904a相互连接。主机总线904a经由桥接器904连接至外部总线904b,例如外围部件互连/接口(PCI)总线。主机总线904a、桥接器904和外部总线904b不必然单独配置,并且这些功能可以在一个总线上实现。
例如,输入设备906由例如鼠标、键盘、触摸面板、按钮、麦克风、开关和操纵杆的用户对其输入信息的设备来实现。此外,输入设备906例如可以是使用红外线或其他无线电波的远程控制设备,或者可以是诸如与信息处理装置900的操作对应的移动电话或PDA的外部连接设备。此外,例如,输入设备906可以包括输入控制电路,其基于由用户使用如上所述的输入装置输入的信息来生成输入信号并且将所生成的输入信号输出至CPU 901。信息处理装置900的用户可以通过操作输入设备906来将各种数据输入到信息处理装置900并且给出关于处理操作的指示。
替选地,输入设备906可以由检测关于用户的信息的设备形成。输入设备906的示例可以包括各种传感器,例如图像传感器(例如,摄像装置)、深度传感器(例如,立体摄像装置)、加速度传感器、陀螺仪传感器、地磁传感器、光学传感器、声音传感器、距离传感器和力传感器。此外,输入设备906可以获得与信息处理装置900自身的状态有关的信息,例如信息处理装置900的姿势和移动速度以及与信息处理装置900的周围环境有关的信息,例如信息处理装置900周围的亮度和噪声。此外,输入设备906可以包括全球导航卫星系统(GNSS)模块,其接收来自GNSS卫星的GNSS信号(例如,来自全球定位系统(GPS)卫星的GPS信号),从而测量包括设备的纬度、经度和海拔的位置信息。此外,关于位置信息,输入设备906可以通过经由Wi-Fi(注册商标)、使用移动电话、PHS、智能电话等或通过短程通信等等执行发送/接收来检测位置。输入设备906可以形成例如图2所示的输入单元110。
输出设备907由能够以视觉方式或听觉方式向用户通知所获取的信息的设备形成。这样的设备的示例包括显示设备(例如CRT显示设备、液晶显示设备、等离子体显示设备、EL显示设备、激光投影仪、LED投影仪和灯);语音输出设备(例如扬声器和头戴式耳机);以及打印机设备。输出设备907例如输出通过由信息处理装置900执行的各种处理获得的结果。具体地,显示设备以诸如文本、图像、表和曲线图的各种格式以视觉方式显示通过由信息处理装置900执行的各种处理所获得的结果。语音输出设备将由再现的音频数据、声音数据等组成的音频信号转换为模拟信号,并且以听觉方式将其输出。输出设备907可以形成例如图2所示的输出单元160。
存储设备908是作为信息处理装置900的存储单元的示例形成的用于数据存储的设备。存储设备908例如由诸如HDD的磁存储单元设备、半导体存储设备、光存储设备、磁光存储设备等实现。存储设备908可以包括存储介质、将数据记录在存储介质中的记录设备、从存储介质中读取数据的读取设备以及删除存储介质中记录的数据的删除设备。存储设备908存储由CPU 901执行的程序和各种数据、从外部获取的各种数据等。存储设备908可以形成例如图2所示的存储单元140。
驱动器909是用于存储介质的读取器/写入器,并且被构建在信息处理装置900中或者从外部附接至信息处理装置900。驱动器909读取记录在诸如安装的磁盘、光盘、磁光盘或半导体存储器的可移除存储介质中的信息,并且将信息输出至RAM 903。驱动器909还可以将信息写入可移除存储介质。
例如,连接端口911是连接至外部设备的接口,并且用作至能够通过通用串行总线(USB)传输数据的外部设备的连接端口。
通信设备913是由用于连接至网络920的通信设备等形成的通信接口。通信设备913是例如用于有线或无线局域网(LAN)、长期演进(LTE)、蓝牙(注册商标)或无线USB(WUSB)的通信卡。通信设备913可以是用于光通信的路由器、用于非对称数字用户线(ADSL)的路由器、用于各种通信的调制解调器等。例如,通信设备913可以根据诸如TCP/IP的预定协议在因特网上或与其他通信设备发送和接收信号等。通信设备913可以形成例如图2所示的输入单元110。在本实施方式中,通信设备913读取附接至物理空间中的真实对象的无线识别标签,例如RFID标签。
网络920是从连接至网络920的设备发送的信息的有线或无线传输路径。网络920的示例可以包括因特网、诸如电话网络和卫星通信网络的公共网络、包括以太网(注册商标)的各种局域网(LAN)、广域网(WAN)等。网络920还可以包括专用线网络,例如互联网协议-虚拟专用网(IP-VPN)。
在前面,已经示出了能够实现根据本实施方式的信息处理装置900的功能的硬件配置的示例。可以使用通用构件来实现上述的每个部件,或者可以由专用于每个部件的功能的硬件来实现上述的每个部件。因此,可以根据在执行本实施方式时的技术水平适当地改变要使用的硬件配置。
可以在PC等中创建和实现用于实现如上所述的根据本实施方式的信息处理装置900的每个功能的计算机程序。此外,可以提供存储有这样的计算机程序的计算机可读记录介质。记录介质的示例包括磁盘、光盘、磁光盘、闪速存储器等。此外,可以经由例如网络而不使用任何记录介质来分发上述计算机程序。
<<6.结论>>
上面已经参照图1至图11详细描述了本公开的实施方式。如上所述,根据本实施方式的信息处理系统100首先设置下述设置信息,该设置信息包括从第一用户至第二用户的通知信息、通知信息在物理空间中的输出位置以及作为用于输出通知信息的条件的通知条件。接下来,根据本实施方式的信息处理系统100基于所设置的设置信息,在满足所设置的通知条件的情况下,将所设置的通知信息输出至所设置的输出位置。例如,第一用户可以进行这样的设置,以在第二用户的生活场景中,在任意定时处将任意信息输出至任意位置,并且第二用户可以在由第一用户设置的定时和位置处接收信息。以该方式,提供了一种具有高自由度的使用物理空间的通信方法。具有高自由度的通信方法还可以促进用户之间的通信并且也可以引发用户之间的通信。此外,信息处理系统100不限于不同用户之间的通信,并且可以提供相同用户之间在不同时间点处的通信。以该方式,提供了信息处理系统100与用户之间的具有高自由度的交互。
由于在物理空间中输出通知信息,因此第二用户可以在无需诸如操作终端设备的动作的情况下容易地确认通知信息。因此提高了第二用户的便利性。此外,第一用户可以在不错过发送待发送的信息的定时的情况下将该信息发送至第二用户。此外,由于不需要操作终端设备以进行通信,因此不存在设备依赖性。因此,可以在用户之间无缝共享信息。
通知信息可以在与通知信息被设置时的时间不同的时间点处输出。因此,第一用户和第二用户可以共享不同的时间线。
上面已经参照附图详细描述了本公开的优选实施方式,但是本公开的技术范围不限于这样的示例。对于本公开的领域的技术人员将明显的是,可以在权利要求中描述的技术构思的范围内构思出各种修改和变型,并且这样的修改和变型自然地落入本公开的技术范围内。
例如,可以将本说明书中描述的每个设备实现为单个设备,或者可以将设备的一部分或全部实现为单独的设备。例如,图2所示的信息处理系统100可以实现为单个设备,或者可以实现为多个设备。例如,获取单元120、设置单元130、存储单元140和输出控制单元150可以被包括在经由网络等连接至被安装在物理空间中的输入单元110和输出单元160的服务器设备中。
此外,本说明书中参照流程图描述的处理不必然以所图示的顺序执行。可以并行执行一些处理步骤。可以采用附加的处理步骤,并且可以省略一些处理步骤。
此外,本说明书中描述的有益效果仅是说明性或示例性的,而非限制性的。也就是说,除了上述有益效果之外或者代替上述有益效果,根据本公开的技术可以表现出根据本说明书的描述对于本领域技术人员而言明显的其他效果。
以下配置也属于本公开的技术范围。
(1)一种信息处理装置,包括:
设置单元,其设置包括从第一用户至第二用户的通知信息、所述通知信息在物理空间中的输出位置以及作为用于输出所述通知信息的条件的通知条件的设置信息;以及
输出控制单元,其基于由所述设置单元设置的所述设置信息控制输出设备,以在满足所述通知条件的情况下将所述通知信息输出至所述输出位置。
(2)根据(1)所述的信息处理装置,其中,所述输出控制单元基于关于所述第二用户的信息和关于所述物理空间的信息中至少之一来选择输出所述通知信息的所述输出设备的类型。
(3)根据(1)或(2)所述的信息处理装置,其中,所述输出控制单元基于关于所述第二用户的信息和关于所述物理空间的信息中至少之一来改变所述通知信息的内容。
(4)根据(1)至(3)中任一项所述的信息处理装置,其中,所述输出控制单元将所述通知信息的内容更新为在输出时间点处的信息。
(5)根据(1)至(4)中任一项所述的信息处理装置,其中,所述输出控制单元控制所述输出设备以将指示已经设置的所述设置信息的信息输出至所述设置信息中设置的所述输出位置。
(6)根据(1)至(5)中任一项所述的信息处理装置,其中,所述输出控制单元控制所述输出设备以在所述第二用户同意输出所述通知信息的情况下输出所述通知信息。
(7)根据(1)至(6)中任一项所述的信息处理装置,其中,所述输出控制单元控制所述输出设备以将指示所述第二用户对输出的所述通知信息的响应的信息输出至所述第一用户。
(8)根据(1)至(7)中任一项所述的信息处理装置,其中,所述设置单元基于所述第一用户在所述物理空间中的动作来设置所述设置信息。
(9)根据(8)所述的信息处理装置,其中,所述设置单元使用由所述第一用户在所述物理空间中指定的位置作为所述输出位置或所述通知条件的确定对象的位置来设置所述设置信息。
(10)根据(1)至(7)中任一项所述的信息处理装置,其中,所述设置单元设置包括与所述输出位置对应的所述通知信息的所述设置信息。
(11)根据(1)至(7)中任一项所述的信息处理装置,其中,所述设置单元使用由所述第一用户在包括所述物理空间的俯视图的画面上指定的位置作为所述输出位置或所述通知条件的确定对象的位置来设置所述设置信息。
(12)根据(11)所述的信息处理装置,其中,在包括所述俯视图的画面上,指示已经设置的所述设置信息的信息被布置在与所设置的输出位置对应的位置处。
(13)根据(11)或(12)所述的信息处理装置,其中,包括所述俯视图的画面由终端设备显示,并且基于由所述第一用户对所述终端设备进行的输入来设置所述设置信息。
(14)根据(1)至(13)中任一项所述的信息处理装置,其中,所述输出位置是以所述第二用户为基准的相对位置。
(15)根据(1)到(14)中任一项所述的信息处理装置,其中,所述通知条件包括用于指定所述第二用户的信息,并且包括关于所述第二用户在所述物理空间中的位置或动作、所述物理空间的状态或时间中至少之一的条件。
(16)根据(1)至(15)中任一项所述的信息处理装置,其中,所述第一用户和所述第二用户是同一人。
(17)根据(1)至(16)中任一项所述的信息处理装置,其中,
所述输出设备包括投影设备,并且
所述设置单元基于所述第一用户的针对由所述投影设备在所述物理空间中投影的画面的动作来设置所述设置信息。
(18)一种信息处理方法,包括:
设置包括从第一用户至第二用户的通知信息、所述通知信息在物理空间中的输出位置以及作为用于输出所述通知信息的条件的通知条件的设置信息;以及
基于所设置的所述设置信息控制输出设备,以在满足所述通知条件的情况下将所述通知信息输出至所述输出位置。
(19)一种程序,所述程序用于使得计算机用作:
设置单元,其设置包括从第一用户至第二用户的通知信息、所述通知信息在物理空间中的输出位置以及作为用于输出所述通知信息的条件的通知条件的设置信息;以及
输出控制单元,其基于由所述设置单元设置的所述设置信息控制输出设备,以在满足所述通知条件的情况下将所述通知信息输出至所述输出位置。
附图标记列表
11 用户、第一用户
12 用户、第二用户
30 物理空间
40 物理空间
100 信息处理系统
110 输入单元
120 获取单元
121 空间信息获取单元
122 用户信息获取单元
130 设置单元
140 存储单元
150 输出控制单元
160 输出单元

Claims (19)

1.一种信息处理装置,包括:
设置单元,所述设置单元设置包括从第一用户至第二用户的通知信息、所述通知信息在物理空间中的输出位置以及作为用于输出所述通知信息的条件的通知条件的设置信息;以及
输出控制单元,所述输出控制单元基于由所述设置单元设置的所述设置信息控制输出设备,以在满足所述通知条件的情况下将所述通知信息输出至所述输出位置。
2.根据权利要求1所述的信息处理装置,其中,所述输出控制单元基于关于所述第二用户的信息和关于所述物理空间的信息中至少之一来选择输出所述通知信息的所述输出设备的类型。
3.根据权利要求1所述的信息处理装置,其中,所述输出控制单元基于关于所述第二用户的信息和关于所述物理空间的信息中至少之一来改变所述通知信息的内容。
4.根据权利要求1所述的信息处理装置,其中,所述输出控制单元将所述通知信息的内容更新为在输出时间点处的信息。
5.根据权利要求1所述的信息处理装置,其中,所述输出控制单元控制所述输出设备以将指示已经设置的所述设置信息的信息输出至所述设置信息中设置的所述输出位置。
6.根据权利要求1所述的信息处理装置,其中,所述输出控制单元控制所述输出设备以在所述第二用户同意输出所述通知信息的情况下输出所述通知信息。
7.根据权利要求1所述的信息处理装置,其中,所述输出控制单元控制所述输出设备以将指示所述第二用户对输出的所述通知信息的响应的信息输出至所述第一用户。
8.根据权利要求1所述的信息处理装置,其中,所述设置单元基于所述第一用户在所述物理空间中的动作来设置所述设置信息。
9.根据权利要求8所述的信息处理装置,其中,所述设置单元使用由所述第一用户在所述物理空间中指定的位置作为所述输出位置或所述通知条件的确定对象的位置来设置所述设置信息。
10.根据权利要求1所述的信息处理装置,其中,所述设置单元设置包括与所述输出位置对应的所述通知信息的所述设置信息。
11.根据权利要求1所述的信息处理装置,其中,所述设置单元使用由所述第一用户在包括所述物理空间的俯视图的画面上指定的位置作为所述输出位置或所述通知条件的确定对象的位置来设置所述设置信息。
12.根据权利要求11所述的信息处理装置,其中,在包括所述俯视图的画面上,指示已经设置的所述设置信息的信息被布置在与所设置的输出位置对应的位置处。
13.根据权利要求11所述的信息处理装置,其中,包括所述俯视图的画面由终端设备显示,并且基于由所述第一用户对所述终端设备进行的输入来设置所述设置信息。
14.根据权利要求1所述的信息处理装置,其中,所述输出位置是以所述第二用户为基准的相对位置。
15.根据权利要求1所述的信息处理装置,其中,所述通知条件包括用于指定所述第二用户的信息,并且包括关于所述第二用户在所述物理空间中的位置或动作、所述物理空间的状态或时间中至少之一的条件。
16.根据权利要求1所述的信息处理装置,其中,所述第一用户和所述第二用户是同一人。
17.根据权利要求1所述的信息处理装置,其中,
所述输出设备包括投影设备,并且
所述设置单元基于所述第一用户的针对由所述投影设备在所述物理空间中投影的画面的动作来设置所述设置信息。
18.一种信息处理方法,包括:
设置包括从第一用户至第二用户的通知信息、所述通知信息在物理空间中的输出位置以及作为用于输出所述通知信息的条件的通知条件的设置信息;以及
基于所设置的所述设置信息控制输出设备,以在满足所述通知条件的情况下将所述通知信息输出至所述输出位置。
19.一种程序,所述程序用于使得计算机用作:
设置单元,所述设置单元设置包括从第一用户至第二用户的通知信息、所述通知信息在物理空间中的输出位置以及作为用于输出所述通知信息的条件的通知条件的设置信息;以及
输出控制单元,所述输出控制单元基于由所述设置单元设置的所述设置信息控制输出设备,以在满足所述通知条件的情况下将所述通知信息输出至所述输出位置。
CN201880054591.7A 2017-08-31 2018-06-08 信息处理装置、信息处理方法和程序 Pending CN111033606A (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2017-167119 2017-08-31
JP2017167119 2017-08-31
PCT/JP2018/022078 WO2019044104A1 (ja) 2017-08-31 2018-06-08 情報処理装置、情報処理方法及びプログラム

Publications (1)

Publication Number Publication Date
CN111033606A true CN111033606A (zh) 2020-04-17

Family

ID=65527254

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201880054591.7A Pending CN111033606A (zh) 2017-08-31 2018-06-08 信息处理装置、信息处理方法和程序

Country Status (6)

Country Link
US (1) US11460994B2 (zh)
EP (1) EP3678126A4 (zh)
JP (1) JPWO2019044104A1 (zh)
KR (1) KR20200041877A (zh)
CN (1) CN111033606A (zh)
WO (1) WO2019044104A1 (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114399973A (zh) * 2022-01-10 2022-04-26 上海新相微电子股份有限公司 基于环境感知的自适应显示屏

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6975489B1 (ja) * 2020-12-18 2021-12-01 株式会社Gatari 情報処理システム、情報処理方法および情報処理プログラム

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102457617A (zh) * 2010-10-18 2012-05-16 Lg电子株式会社 移动终端以及在其中管理对象相关信息的方法
CN103313080A (zh) * 2012-03-16 2013-09-18 索尼公司 控制设备、电子装置、控制方法和程序
CN104777989A (zh) * 2014-01-13 2015-07-15 联想(北京)有限公司 一种信息处理方法及电子设备
CN104781782A (zh) * 2012-11-08 2015-07-15 索尼公司 信息处理设备、信息处理方法和程序
WO2016103560A1 (ja) * 2014-12-25 2016-06-30 パナソニックIpマネジメント株式会社 投影装置
CN105830005A (zh) * 2013-12-27 2016-08-03 索尼公司 控制装置、控制方法和计算机程序
JP2016180778A (ja) * 2015-03-23 2016-10-13 ソニー株式会社 情報処理システムおよび情報処理方法
WO2017056147A1 (ja) * 2015-09-28 2017-04-06 日立マクセル株式会社 照明装置
US20170235376A1 (en) * 2012-03-13 2017-08-17 Eyesight Mobile Technologies Ltd. Systems and methods of direct pointing detection for interaction with a digital device

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000330882A (ja) 1999-05-17 2000-11-30 Casio Comput Co Ltd 電子機器、電子メールプログラムが記録された記録媒体
JP2003085100A (ja) 2001-09-07 2003-03-20 Sony Corp 情報処理装置および方法、記録媒体、並びにプログラム
US7348963B2 (en) 2002-05-28 2008-03-25 Reactrix Systems, Inc. Interactive video display system
WO2011127578A1 (en) 2010-04-13 2011-10-20 Dean Stark Virtual product display
JP6051648B2 (ja) 2012-07-23 2016-12-27 セイコーエプソン株式会社 プロジェクター、およびその制御方法
JPWO2014171134A1 (ja) 2013-04-18 2017-02-16 パナソニックIpマネジメント株式会社 投写型映像表示装置
US9075435B1 (en) * 2013-04-22 2015-07-07 Amazon Technologies, Inc. Context-aware notifications
US9720259B2 (en) * 2014-10-13 2017-08-01 William Hart Eyewear pupilometer

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102457617A (zh) * 2010-10-18 2012-05-16 Lg电子株式会社 移动终端以及在其中管理对象相关信息的方法
US20170235376A1 (en) * 2012-03-13 2017-08-17 Eyesight Mobile Technologies Ltd. Systems and methods of direct pointing detection for interaction with a digital device
CN103313080A (zh) * 2012-03-16 2013-09-18 索尼公司 控制设备、电子装置、控制方法和程序
CN104781782A (zh) * 2012-11-08 2015-07-15 索尼公司 信息处理设备、信息处理方法和程序
CN105830005A (zh) * 2013-12-27 2016-08-03 索尼公司 控制装置、控制方法和计算机程序
CN104777989A (zh) * 2014-01-13 2015-07-15 联想(北京)有限公司 一种信息处理方法及电子设备
WO2016103560A1 (ja) * 2014-12-25 2016-06-30 パナソニックIpマネジメント株式会社 投影装置
JP2016180778A (ja) * 2015-03-23 2016-10-13 ソニー株式会社 情報処理システムおよび情報処理方法
WO2017056147A1 (ja) * 2015-09-28 2017-04-06 日立マクセル株式会社 照明装置

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114399973A (zh) * 2022-01-10 2022-04-26 上海新相微电子股份有限公司 基于环境感知的自适应显示屏

Also Published As

Publication number Publication date
KR20200041877A (ko) 2020-04-22
US11460994B2 (en) 2022-10-04
EP3678126A4 (en) 2020-08-26
WO2019044104A1 (ja) 2019-03-07
US20200356244A1 (en) 2020-11-12
JPWO2019044104A1 (ja) 2020-08-13
EP3678126A1 (en) 2020-07-08

Similar Documents

Publication Publication Date Title
US11132840B2 (en) Method and device for obtaining real time status and controlling of transmitting devices
KR102471977B1 (ko) 복수의 전자장치 사이에서 가상 객체를 표시하는 방법 및 이를 지원하는 전자 장치
KR102498451B1 (ko) 전자 장치 및 전자 장치에서의 정보 제공 방법
US20180107445A1 (en) Information processing device, control method, and program
US11373650B2 (en) Information processing device and information processing method
CN110383214B (zh) 信息处理装置、信息处理方法和记录介质
US11107287B2 (en) Information processing apparatus and information processing method
KR102561572B1 (ko) 센서 활용 방법 및 이를 구현한 전자 장치
KR20170066054A (ko) 오디오 제공 방법 및 그 장치
KR20170052976A (ko) 모션을 수행하는 전자 장치 및 그 제어 방법
US20230162450A1 (en) Connecting Spatially Distinct Settings
JP6627775B2 (ja) 情報処理装置、情報処理方法およびプログラム
WO2018139036A1 (ja) 情報処理装置、情報処理方法およびプログラム
US11460994B2 (en) Information processing apparatus and information processing method
CN114038147B (zh) 消防救援通信方法、电子设备及存储介质
US10310676B2 (en) Image projection apparatus and operation method thereof
JP6897696B2 (ja) サーバ、方法、およびプログラム
CN114721281A (zh) 智能场景配置方法、移动终端及服务器
JP7452524B2 (ja) 情報処理装置、及び情報処理方法
WO2019044100A1 (ja) 情報処理装置、情報処理方法及びプログラム
WO2018139050A1 (ja) 情報処理装置、情報処理方法およびプログラム
WO2019239902A1 (ja) 情報処理装置、情報処理方法およびプログラム
US11216233B2 (en) Methods and systems for replicating content and graphical user interfaces on external electronic devices
US20210211621A1 (en) Information processing apparatus, information processing method, and program
US20230394951A1 (en) Mobile terminal and display device for searching for location of remote control device by using bluetooth pairing

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
AD01 Patent right deemed abandoned

Effective date of abandoning: 20230523

AD01 Patent right deemed abandoned