CN109983526A - 信息处理设备、信息处理方法以及记录介质 - Google Patents
信息处理设备、信息处理方法以及记录介质 Download PDFInfo
- Publication number
- CN109983526A CN109983526A CN201780068807.0A CN201780068807A CN109983526A CN 109983526 A CN109983526 A CN 109983526A CN 201780068807 A CN201780068807 A CN 201780068807A CN 109983526 A CN109983526 A CN 109983526A
- Authority
- CN
- China
- Prior art keywords
- display unit
- user
- information processing
- unit
- information
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Classifications
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09F—DISPLAYING; ADVERTISING; SIGNS; LABELS OR NAME-PLATES; SEALS
- G09F9/00—Indicating arrangements for variable information in which the information is built-up on a support by selection or combination of individual elements
- G09F9/30—Indicating arrangements for variable information in which the information is built-up on a support by selection or combination of individual elements in which the desired character or characters are formed by combining individual elements
- G09F9/302—Indicating arrangements for variable information in which the information is built-up on a support by selection or combination of individual elements in which the desired character or characters are formed by combining individual elements characterised by the form or geometrical disposition of the individual elements
- G09F9/3026—Video wall, i.e. stackable semiconductor matrix display modules
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q30/00—Commerce
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09F—DISPLAYING; ADVERTISING; SIGNS; LABELS OR NAME-PLATES; SEALS
- G09F19/00—Advertising or display means not otherwise provided for
- G09F19/22—Advertising or display means on roads, walls or similar surfaces, e.g. illuminated
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09F—DISPLAYING; ADVERTISING; SIGNS; LABELS OR NAME-PLATES; SEALS
- G09F23/00—Advertising on or in specific articles, e.g. ashtrays, letter-boxes
- G09F23/0058—Advertising on or in specific articles, e.g. ashtrays, letter-boxes on electrical household appliances, e.g. on a dishwasher, a washing machine or a refrigerator
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09F—DISPLAYING; ADVERTISING; SIGNS; LABELS OR NAME-PLATES; SEALS
- G09F27/00—Combined visual and audible advertising or displaying, e.g. for public address
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09F—DISPLAYING; ADVERTISING; SIGNS; LABELS OR NAME-PLATES; SEALS
- G09F27/00—Combined visual and audible advertising or displaying, e.g. for public address
- G09F27/005—Signs associated with a sensor
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G3/00—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
- G09G3/20—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09F—DISPLAYING; ADVERTISING; SIGNS; LABELS OR NAME-PLATES; SEALS
- G09F27/00—Combined visual and audible advertising or displaying, e.g. for public address
- G09F2027/001—Comprising a presence or proximity detector
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Business, Economics & Management (AREA)
- Accounting & Taxation (AREA)
- Marketing (AREA)
- Multimedia (AREA)
- Economics (AREA)
- Finance (AREA)
- Strategic Management (AREA)
- General Business, Economics & Management (AREA)
- Development Economics (AREA)
- Computer Hardware Design (AREA)
- User Interface Of Digital Computer (AREA)
- Controls And Circuits For Display Device (AREA)
- Cold Air Circulating Systems And Constructional Details In Refrigerators (AREA)
- Indicating And Signalling Devices For Elevators (AREA)
Abstract
[问题]提供一种能够在适当地呈现需要的信息的情况下保持外观的信息处理设备、信息处理方法以及记录介质。[解决方案]该信息处理设备包括:通信单元,其接收由用于评估周围的状态的传感器检测到的传感器数据;以及控制单元,该控制单元进行控制以:响应于从传感器数据检测到的用户属性、用户状况和环境中至少之一而生成用于在安装在传感器附近的显示单元上显示包括适当信息的图像的控制信号;在确定不需要呈现信息时,生成用于在显示单元上显示融合图像的控制信号,该融合图像适合于显示单元的周围;以及经由通信单元向显示单元传送控制信号。
Description
技术领域
本公开涉及信息处理设备、信息处理方法以及记录介质。
背景技术
通常,电梯中的注意事项、如何使用商店中需要由用户她/他自己操作的设备等通过书写在纸上并张贴在周围而被传达给用户。对于已经熟悉的用户而言,该信息是不需要的,但对于不熟悉的用户而言,该信息是有用的信息。
此处,关于信息呈现技术,例如,下面的专利文献1提出了一种信息处理设备,其根据人体检测情况(由运动检测器检测)控制对用于再现广告数据的方法的选择,以在保持观看和收听店内广告的效果的同时实现节能操作。
另外,下面的专利文献2提出了一种数字标牌设备,其根据观众的年龄段、性别、数目、人流量和时间段来选择和再现适当的广告数据。
另外,下面的专利文献3提出了一种数字标牌系统,其根据用户相对于数字标牌的位置、数目、年龄、性别等向用户提供数字优惠券等作为回报。
另外,下面的专利文献4提出了一种电子纸可变显示功能标牌设备,其通常输出广告和信息显示,并在紧急情况下输出疏散引导显示或特定消息。
另外,下面的专利文献5提出了一种广告显示系统,其编辑和分析从IC卡票、信用卡等收集的顾客的信息并且根据结果切换广告内容。
另外,下面的专利文献6提出了一种图像显示方法,其在发现客户的特征的统计趋势的情况下,选择并显示与该趋势相匹配的广告。
另外,下面的专利文献7提出了一种显示冰箱内部视频的冰箱。
引用列表
专利文献
专利文献1:JP 2010-191155A
专利文献2:WO 13/125032
专利文献3:JP 2012-520018T
专利文献4:JP 2015-004921A
专利文献5:JP 2008-225315A
专利文献6:JP 2002-073321A
专利文献7:JP 2002-81818A
发明内容
技术问题
然而,在所有信息呈现技术中总是呈现某种信息,这导致在显示画面上显示的文本或图形损害周围景观的问题。
此外,张贴许多示出提请注意或如何使用对象的标签会损害对象本身的设计性。另外,还存在如下担忧:将标签置于例如被撕裂或脱落的杂乱状态中会导致公共秩序的恶化。
因此,本公开提出了一种能够在保持景观的情况下适当地呈现需要的信息的信息处理设备、信息处理方法以及记录介质。
问题的解决方案
根据本公开,提出了一种信息处理设备,包括:通信单元,其被配置成接收由用于掌握周围情况的传感器检测到的传感器数据;以及控制单元,其被配置成执行控制以:根据从传感器数据检测到的用户的属性、用户的情况或环境中至少之一来生成用于在安装在传感器周围的显示单元上显示包括适当信息的图像的控制信号;在确定不需要信息呈现的情况下,生成用于在显示单元上显示融入显示单元的周围中的融合图像的控制信号;以及经由通信单元向显示单元传送控制信号。
根据本公开,提出了一种信息处理方法,包括由处理器进行以下操作:经由通信单元接收由用于掌握周围情况的传感器检测到的传感器数据;以及执行控制以:根据从传感器数据检测到的用户的属性、用户的情况或环境中至少之一来生成用于在安装在传感器周围的显示单元上显示包括适当信息的图像的控制信号;在确定不需要信息呈现的情况下,生成用于在显示单元上显示融入显示单元的周围中的融合图像的控制信号;以及经由通信单元向显示单元传送控制信号。
根据本公开,提出了一种记录有程序的记录介质,该程序使得计算机用作:通信单元,其被配置成接收由用于掌握周围情况的传感器检测到的传感器数据;以及控制单元,其被配置成执行控制以:根据从传感器数据检测到的用户的属性、用户的情况或环境中至少之一来生成用于在安装在传感器周围的显示单元上显示包括适当信息的图像的控制信号;在确定不需要信息呈现的情况下,生成用于在显示单元上显示融入显示单元的周围中的融合图像的控制信号;以及经由通信单元向显示单元传送控制信号。发明的有益效果
根据如上所述的本公开,可以在保持景观的情况下适当地呈现需要的信息。
注意,上述效果不必然是限制性的。与上述效果一起或代替上述效果,可以实现本说明书中描述的任一效果或者从本说明书中可以掌握的其他效果。
附图说明
[图1]图1是用于描述根据本公开的实施方式的信息处理系统的概要的图。
[图2]图2是用于描述用于提请注意的标签等损害景观的情况的图。
[图3]图3示出根据本实施方式的信息处理终端的外部的示例。
[图4]图4示出根据第一示例的信息处理系统的配置的示例。
[图5]图5是示出根据第一示例的信息呈现的操作处理的流程图。
[图6]图6示出根据第一示例的针对带有宠物的人的消息的示例和针对手推车用户的消息的示例。
[图7]图7示出根据第一示例的显示多个消息的示例和针对非居民的消息的示例。
[图8]图8是示出根据第一示例的伪装图像(camouflage image)生成处理的流程图。
[图9]图9示出在生成伪装图像的处理中使用的图像的示例。
[图10]图10示出在生成伪装图像的处理中使用的图像的示例。
[图11]图11示出在信息处理终端中在伪装图像的显示与消息图像的显示之间切换的示例。
[图12]图12是用于描述第二示例的概要的图。
[图13]图13示出根据第二示例的信息处理系统的配置的示例。
[图14]图14是示出根据第二示例的信息处理系统的操作处理的流程图。
[图15]图15示出根据第二示例的针对初学者和熟练者的UI的示例。
[图16]图16是用于描述第三示例的概要的图。
[图17]图17示出根据第三示例的冰箱设备的配置的示例。
[图18]图18是示出根据第三示例的操作处理的流程图。
[图19]图19示出根据第三示例的冰箱内部显示的示例。
[图20]图20是用于描述第四示例的概要的图。
[图21]图21示出根据第四示例的信息处理系统的配置的示例。
[图22]图22是示出第四示例的操作处理的流程图。
具体实施方式
在下文中,将参照附图详细描述本公开的优选实施方式。注意,在本说明书和附图中,用相同的附图标记表示具有基本相同的功能和结构的结构元件,并且省略对这些结构元件的重复说明。
另外,将按以下顺序给出描述。
1.根据本公开的实施方式的信息处理系统的概要
2.第一示例
2-1.配置
2-2.操作处理
3.第二示例
3-1.配置
3-2.操作处理
4.第三示例
4-1.配置
4-2.操作处理
5.第四示例
5-1.配置
5-2.操作处理
6.结论
<<1.根据本公开的实施方式的信息处理系统的概要>>
图1是用于描述根据本公开的实施方式的信息处理系统的概要的图。如图1所示,在根据本实施方式的信息处理系统中,在根据周围情况确定不需要信息呈现的情况下,能够呈现信息的信息处理终端1(1a至1c)显示融入周围中的伪装图像(融合图像);因此,可以保持景观并且可以适当地呈现需要的信息。例如,当信息处理终端1a至1c安装在电梯周围时,显示融入周围图案的图案可以防止电梯周围的景观受到损害。
在这种情况下,例如,即使在用户A来到电梯前面的情况下,因为用户A没有携带宠物,因此确定不需要信息呈现,并且如图1左侧所示,信息处理终端1a至1c继续显示融入周围图案中的图案。另一方面,在用户B来到电梯前面的情况下,因为用户B带有宠物,因此确定需要信息呈现,并且如图1右侧所示,信息处理终端1a至1c显示针对带有宠物的用户的注意事项和规则。
(背景)
如上所述,张贴许多示出提请注意或如何使用对象的标签会损害对象本身的设计性。另外,还存在如下担忧:将标签置于例如被撕裂或脱落的杂乱状态中会导致公共秩序的恶化。
图2是用于描述景观被用于提请注意的标签等损害的情况的图。例如,如图2所示,放置在商店中并由用户她/他自己操作以制作咖啡的咖啡机200、公寓、酒店、建筑物等的电梯厅210等经常面对用于提请注意的标签等损害预期的设计性的事件。通常,存在的问题在于试图应对所有各种情况,例如用户的多样性、设计本身的不友好性以及引起第一次使用它的人的注意,这产生困难,并且设计师最初设计的外观和景观也受到越来越多的损害。例如,这种问题也发生在诸如机场和车站的公共设施中。也就是说,由空间设计师设计的设计在某些情况下会被用来提请注意的标签和标语所破坏。特别地,在车站行走的人的数目根据通勤时间而增加,而为了避免麻烦,各处都放置有指示行走方向(保持向右、保持向左)的标签和标语。
另外,从情感方面来看,也没有人喜欢对景观的扰乱,并且景观的扰乱可能引起整个公共秩序的恶化。例如,存在一种被称为破窗理论的理念:由于涂鸦等造成的景观扰乱引起整个公共秩序的恶化。
也就是说,如果标签处于凌乱状态并且景观受到扰乱,则墙壁的污垢、瑕疵等不太明显;因此,污垢和损坏在没有被注意的情况下增多,并且墙壁可能被故意弄脏。存在如下担忧:景观扰乱的加速会引起乱丢垃圾的频率开始增加,产生不良行为者的聚集场所,并引发例如财产损失或偷窃的严重犯罪的增加。
因此,为了防止由于标签等引起的景观扰乱,根据本公开的信息处理系统执行控制以显示伪装图像,使得信息处理终端1在不需要信息呈现的的情况下融入周围中。此外,在根据周围情况(用户的理解程度、情况、环境等)确定需要信息呈现的情况下,可以显示适当的信息。
在此,根据本实施方式的信息处理终端1(标牌设备)例如由电子纸终端实现。图3示出根据本实施方式的信息处理终端1的外部的示例。如图3所示,信息处理终端1几乎整个设置有显示单元14(例如全彩色电子纸),并且部分地设置有用于识别周围情况的摄像装置12(例如广角摄像装置)、用于输出语音以用于通过除显示之外的方式引起用户注意等的音频输出单元(扬声器)13(音频输出单元13的数目可以是一个)、以及用于从存储介质读取诸如由另外的摄像装置捕获的图像的数据的存储介质接口(I/F)16(例如卡槽、USB接口等)。信息处理终端1执行控制以在显示单元14上显示用于融入至周围中的伪装图像,以通常防止周围景观受到损害,并且在根据周围情况确定需要信息呈现的情况下在显示单元14上显示适当的信息。
上面已经描述了根据本实施方式的信息处理系统的概要。接下来,将使用多个示例具体描述根据本实施方式的这种信息处理系统。
<<2.第一示例>>
首先,参照图4至图11描述第一示例。在第一示例中,关于在参照图1描述的电梯厅中向用户呈现使用电梯的规则的情况进行描述。
<2-1.配置>
首先,参照图4描述根据第一示例的信息处理系统的配置。如图4所示,根据本示例的信息处理系统包括信息处理终端1-1和个人识别服务器2,并且信息处理终端1-1和个人识别服务器2经由网络3连接。
个人识别服务器2可以响应于来自信息处理终端1-1的询问而对由信息处理终端1-1的摄像装置12成像的人进行面部识别,并发送回该人的个人标识和属性等。在本示例中,例如,公寓居民的面部图像(或其特征值或图案)被预先登记在个人识别服务器2中,并且可以响应于来自信息处理终端1-1的询问而确定由摄像装置12成像的人是否是该公寓的居民。
如图4所示,信息处理终端1-1包括控制单元10、通信单元11、摄像装置12、音频输出单元13、显示单元14、存储单元15和存储介质I/F 16。
控制单元10用作算术处理设备和控制设备并且根据各种程序控制信息处理终端1-1的整体操作。控制单元10例如由诸如中央处理单元(CPU)和微处理器的电子电路实现。另外,控制单元10可以包括存储要使用的程序、操作参数等的只读存储器(ROM)以及临时存储适当地变化的参数等的随机存取存储器(RAM)。
另外,根据本实施方式的控制单元10用作确定单元101、画面生成单元102和显示控制单元103。确定单元101根据周围情况确定是否执行信息呈现。例如,确定单元101基于附近的目标人员的理解程度(读写能力、该人是否习惯等)、情况(这个人与谁/什么在一起、使用的目标/目的等)、或者环境变化(人流量、日期和时间、事件等)来确定是否向该目标人员呈现信息。因此,可以动态地呈现UI或内容。
画面生成单元102根据确定单元101的确定结果生成要在显示单元14上显示的画面。例如,在确定单元101确定需要信息呈现的情况下,画面生成单元102生成包括要呈现给目标人员的信息的画面(可以预先设置该信息或者可以根据目标人员选择该信息)。另一方面,在确定单元101确定不需要信息呈现的情况下,画面生成单元102生成融入周围景观中的伪装图像的画面。因此,可以防止周围景观在不执行信息呈现的情况下受到损害。
显示控制单元103执行控制以在显示单元14上显示由画面生成单元102生成的画面。
通信单元11以有线/无线方式连接至网络3,并且在网络上向个人识别服务器2传送数据和从个人识别服务器2接收数据。例如,通信单元11经由有线/无线局域网(LAN)、Wi-Fi(注册商标)、移动通信网络(长期演进(LTE)、第三代移动电信(3G))等通过通信连接至网络3。
根据本示例的通信单元11将由摄像装置12成像的目标人员的面部图像传送到个人识别服务器2,并请求识别该人员是否是公寓的居民。注意,在本示例中,在个人识别服务器2(云)中执行个人识别,但是本示例不限于此,并且可以在信息处理终端1-1(本地)中执行个人识别。特别是在公寓的情况下,由于居民的数目有限,因此不需要大规模的存储区域。
摄像装置12包括含有成像透镜、光圈、变焦透镜、聚焦透镜等的透镜系统、使透镜系统执行聚焦操作和变焦操作的驱动系统、通过对由透镜系统获得的成像光进行光电转换生成成像信号的固态图像传感器阵列等。固态图像传感器阵列可以通过例如电荷耦合器件(CCD)传感器阵列或互补金属氧化物半导体(CMOS)传感器阵列来实现。
例如,根据本示例的摄像装置12对电梯的用户进行成像并将捕获的图像输出至控制单元10。
音频输出单元13包括再现音频信号的扬声器和用于扬声器的放大器电路。在控制单元10的控制下,当显示控制单元103切换显示单元14的显示画面时,例如,音频输出单元13可以通过输出某种语音或声音来吸引用户的注意力以使用户注意到显示变化。
在显示控制单元103的控制下,显示单元14显示信息呈现画面或伪装图像。另外,如上所述,显示单元14例如由电子纸显示器实现。
存储单元15由存储用于由控制单元10进行的处理的程序、操作参数等的只读存储器(ROM)和临时存储适当地变化的参数等的随机存取存储器(RAM)实现。例如,存储单元15存储用于电梯用户的各种消息信息。另外,在信息处理终端1-1中进行个人识别的情况下,公寓的居民的面部图像被预先登记在存储单元15中。
存储介质I/F 16是用于从存储介质读取信息的接口,并且例如,假设为卡槽、USB接口等。在本实施方式中,例如,可以从存储介质获取由另外的摄像装置捕获的电梯厅的捕获图像,并且可以由控制单元10的画面生成单元102生成伪装图像。
上面已经具体描述了根据本实施方式的信息处理终端1-1的配置。注意,信息处理终端1-1的配置不限于图4中示出的示例,并且还可以包括例如音频输入单元(麦克风)、各种传感器(位置信息获取单元、压力传感器、环境传感器等)或操作输入单元(触摸面板等)。此外,图4所示的信息处理终端1-1的配置的至少一部分可以位于单独的主体中(例如服务器侧)。
<2-2.操作处理>
首先,参照图5描述根据第一示例的信息呈现的操作处理。图5是示出根据本示例的信息呈现的操作处理的流程图。
如图5所示,首先,安装在电梯厅中的信息处理终端1-1利用摄像装置12获取电梯厅的捕获图像(步骤S103)。
接下来,信息处理终端1-1的确定单元101执行图像识别(步骤S106),并且确定人是否站在摄像装置前面,即,是否存在电梯用户(步骤S109)。
然后,在摄像装置前面有人的情况下(步骤S109中的“是”),确定单元101基于图像识别的结果确定该人是否带有宠物(主要是诸如狗或猫的动物)(步骤S112)。
接下来,在确定该人带有宠物的情况下(步骤S112中的“是”),画面生成单元102生成显示针对有宠物伴随的人的消息的画面,并且显示控制单元103在显示单元14上显示该画面(步骤S115)。
然后,确定该人是否带有手推车(步骤S118),并且在该人带有手推车的情况下(步骤S118中的“是”),在已经显示消息的情况下调整布局(步骤S121)。例如,在电梯前面有多个人并且已经显示了针对有宠物伴随的人的消息的情况下,对针对有宠物伴随的人的消息的布局进行调整以创建可以显示新消息的区域。
接下来,信息处理终端1-1生成针对带有手推车的人的消息并且显示该消息(步骤S124)。
然后,基于所捕获的人的图像执行个人识别,并且对该人是否是公寓的居民进行确定(步骤S127)。例如,可以请求个人识别服务器2进行个人识别。
接下来,在确定该人不是公寓的居民的情况下(步骤S127中的“是”),需要显示针对非居民的消息,但是在已经显示消息的情况下调整布局(步骤S130)。
然后,信息处理终端1-1显示针对非居民的消息(步骤S133)。因此,第一次使用该公寓的电梯的人可以掌握电梯的规则。
注意,图6和图7示出了在显示单元14上显示的消息的示例。图6示出针对带有宠物的人的消息的示例以及针对手推车用户的消息的示例。如图6左侧所示,消息画面140显示针对带有宠物的人的注意事项。另外,如图6右侧所示,消息画面141显示针对带有手推车的人的注意事项。
另外,图7示出了显示多个消息的示例和针对非居民的消息的示例。如图7左侧所示,消息画面142的消息区域被划分,并且例如显示针对带有宠物的人的消息和针对带有手推车的人的消息两者。注意,用于显示多个消息的方法不限于此,并且例如,可以以特定时间间隔交替显示多个消息,或者可以在竖直地或水平地滚动的同时显示多个消息。
另外,如图7右侧所示,消息画面143显示针对非居民的注意事项。注意,对个人是否是公寓的居民的个人识别不限于面部图像的识别。例如,一些公寓从安全性方面考虑而具有其中在触摸钥匙(或卡)时呼叫电梯的机制,并且在该机制中,在访客来的情况下,当通过内部通话系统释放锁时,电梯自动下降到入口楼层。因此,可以根据是使用钥匙还是使用内部通话系统来识别个人是居民还是访客(非居民)。
然后,在没有人正站在摄像装置前面(没有人正在等待电梯)的情况下(步骤S109中的“否”),并且在已经显示伪装图像的情况下(步骤S136中的“否”),显示保持原样。具体地,对于显示单元14使用电子纸消除了对用于保留曾显示的图像的电力的需要;因此,如果已经显示了伪装图像,则不需要新的处理。
另一方面,在未显示伪装图像的情况下(例如,在显示上述消息画面140至143的情况下)(步骤S136中的“否”),则显示伪装图像(步骤S139)。
以这种方式,在已经来到电梯前面的人是例如带有宠物的人的需要消息的用户的情况下,呈现预定的消息,并且在人不落入要对其呈现消息的目标人员的情况下保持伪装图像的显示;因此,可以保持电梯厅的景观。
上面已经具体描述了根据本示例的操作处理。注意,参照图5描述的操作处理例示了针对信息呈现的一些条件,但是这些是示例,并且当然也可以基于另外的条件来确定是否呈现信息。例如,在识别出自行车的情况下,可以显示指示针对带有自行车的人的注意事项的消息,例如将他们引导至用于承载自行车的电梯。
另外,第一示例描述了信息处理终端1-1安装在电梯厅中的情况,但是本示例不限于此;例如,信息处理终端1-1可以安装在禁止吸烟场所,使得通常显示伪装图像,并且在识别出即将吸烟(或正在吸烟)的人的情况下切换至“禁止吸烟”标志的显示画面。
(伪装图像的生成)
接下来,参照图8至图11描述伪装图像的生成。
图8是示出根据本示例的伪装图像生成处理的流程图。图9至图10示出在生成伪装图像的处理中使用的图像的示例。
如图8所示,首先,在未安装信息处理终端1-1的状态下,用数字摄像装置等对要安装信息处理终端1-1的地方进行成像,并且信息处理终端1-1获取图像A(参见图9中所示的图像30)(步骤S143)。用于获取的方法没有具体限制;可以经由通信单元11从数字摄像装置等无线地接收图像,或者可以通过使用存储介质I/F从诸如USB或SD卡的存储介质获取图像。另外,可以利用信息处理终端1-1的摄像装置12对处于未安装信息处理终端1-1的状态的地方进行成像。注意,该处理描述了在信息处理终端1-1中执行的情况,但是在服务器侧执行该处理的情况下,将捕获图像传送至服务器。
接下来,对所获取的图像A的特征点F进行提取(参见图9所示的图像31)(步骤S146)。对于该特征点,使用在无标记AR、图像识别等中通常执行的特征点提取(例如,SIFT、SURF、Haar-like等)。
然后,响应于用户操作而在信息处理终端1-1的显示单元14上显示标记图像(步骤S149)。用户(例如管理员)将上面显示有标记图像的信息处理终端1-1固定至用于实际安装的地方。标记图像是用于识别捕获图像中的信息处理终端1-1的图像,并且可以是任何标记图像,只要其可以被识别即可。
接下来,信息处理终端1-1获取通过在安装信息处理终端1-1的状态下对安装地点进行成像而获得的图像A'(参见图9中的图像32)(步骤S152)。
然后,信息处理终端1-1的画面生成单元102从图像A'中提取特征点F'(参见图10中的图像33)(步骤S155)。另外,画面生成单元102从图像A'识别标记图像,并获得位置(步骤S158)。注意,在图10中的图像33中的标记部分中未提取特征点,但这是为了使得图画易于查看说明;实际上可能提取特征点。
接下来,画面生成单元102将特征点F与特征点F'进行匹配,从而检测图像A与图像A'之间的位置、旋转和大小的差异,并且可以检测图像A'中的信息处理终端1-1的安装位置(即,标记图像的位置)对应于图像A的哪一部分。
然后,基于所获得的位置关系,画面生成单元102从图像A中提取与图像A'中的标记图像的位置具有相同位置关系的部分(即,对应于安装有信息处理终端1-1的位置的部分)的图像S(参见图10中的图像34)(步骤S161)。从图像A提取的图像S对应于伪装图像。
然后,信息处理终端1-1在显示单元14上显示图像S,这可以使信息处理终端1-1融入至周围景观中(步骤S164)。此处,图11示出了在生成的伪装图像(图像S)的显示与消息图像的显示之间切换的示例。如图11的上段所示,在信息处理终端1-1上显示伪装图像(图像S)使信息处理终端1-1融入周围中,使其难以察觉;因此,可以保持电梯厅的景观。另一方面,在需要向电梯用户呈现消息的情况下,如图11的下段所示,在信息处理终端1-1上显示消息图像144使得可以适当地引起用户的注意。
上面已经具体描述了根据本示例的伪装图像生成处理。注意,伪装图像的生成不限于在信息处理终端1-1中执行,并且可以例如在服务器上执行。
另外,上述示例描述了信息处理终端1-1的显示单元14由电子纸实现的情况,但是本公开不限于此。例如,可以存在通过使用投影仪经由投影方案呈现消息的方法。在这种情况下,为了保持景观,当不需要信息呈现时,如果不投影视频(换句话说,使原始背景被原样地观看),就足够了,这消除了对创建伪装图像的需要。
此外,在考虑在普通街道上使用大型数字标牌的实现方式的情况下,甚至可以通过使用光学伪装机制将大型数字标牌融入至景观中。具体地,例如,在数字标牌的两侧提供显示画面并且显示由设置在各个相对侧上的摄像装置捕获的捕获图像产生可以看到超出数字标牌的景观的状态;因此,可以保持景观。注意,由摄像装置实时捕获的捕获图像可以显示为伪装图像,或者可以预先生成伪装图像。
<<3.第二示例>>
接下来,将参照图12至图14描述在放置在便利店等中的自助咖啡服务器中向用户呈现关于咖啡服务器的注意提醒或说明的情况。
图12是用于描述第二示例的概要的图。近年来,自助咖啡服务器已经广泛用于便利店等,并且咖啡服务器已经具有更高的设计性。然而,在设计方面,注意事项是用外语书写或省略的,或者在许多情况下仅设置按钮,这使得对于不习惯的人或第一次使用它的人来说难以理解该设计。最近,经常观察到职员张贴标签或者张贴示出按钮含义的贴纸等以克服这种不方便性,但是这会引起损害设计性并产生杂乱气氛的问题。
因此,在本示例中,在安装在如图12所示的咖啡服务器5中的信息处理终端1-2中,通常显示融入至景观中的伪装图像150(例如,诸如咖啡的图示的时尚外观);因此,可以保持景观。此外,例如,用摄像装置12执行对用户的个人识别,并且如果用户是熟练者(已经使用过它多次的人),则显示针对熟练者的UI(例如作为没有说明的具有高设计性的画面且不损害周围景观的伪装图像)。另一方面,如果用户是初学者(第一次使用它的人,或者例如老人或孩子的估计不习惯操作的人),则显示针对初学者的UI(例如,显示具有低设计性但显示易于理解的说明的画面)。这使得可以在通常保持景观的情况下在需要时适当地呈现信息。
<<3-1.配置>>
首先,参照图13描述根据第二示例的信息处理系统的配置。如图13所示,根据本示例的信息处理系统包括信息处理终端1-2和个人识别服务器2,并且信息处理终端1-2和个人识别服务器2经由网络3连接。
如在第一示例中那样,个人识别服务器2可以响应于来自信息处理终端1-2的询问,对由信息处理终端1-2的摄像装置12成像的人进行面部识别,并且发送回该人的个人标识和属性等。注意,在本示例中,个人识别服务器2可以例如基于便利店的用户的面部图像(或其特征值或图案)来执行个人识别,并且进一步累积数据,例如,所识别用户的使用次数或使用的操作时间。另外,个人识别服务器2可以响应于来自信息处理终端1-2的询问而确定由摄像装置12成像的人是否是熟练者。
如图13所示,信息处理终端1-2包括控制单元10、通信单元11、摄像装置12、音频输出单元13、显示单元14、存储单元15、触摸面板17和计时器18。
如在第一示例中那样,控制单元10用作确定单元101、画面生成单元102和显示控制单元103。根据本示例的确定单元101根据使用咖啡服务器的用户是否是熟练者(目标人员的理解程度)来确定要执行哪个类型的信息呈现。
画面生成单元102根据确定单元101的确定结果生成要在显示单元14上显示的画面。例如,在确定单元101确定需要针对熟练者的信息呈现的情况下,画面生成单元102生成针对熟练者的UI。作为针对熟练者的UI,例如,假设具有高设计性并且使景观更好的UI。另一方面,在确定单元101确定需要针对初学者的信息呈现的情况下,生成针对初学者的UI。另外,画面生成单元102可以生成在没有用户的情况下或者操作结束的情况下要显示的默认UI(不损害景观的伪装图像)。可以使默认UI融入至背景中(与咖啡服务器5具有相同的颜色和图案)。在图12中示出的示例中,咖啡的图示可以显示为足以使咖啡服务器被识别为咖啡服务器以使得顾客至少可以发现它的最小显示,并且背景可以与咖啡服务器具有相同的颜色和图案。注意,作为各种操作画面的颜色,可以使用与商店的氛围协调的颜色。
显示控制单元103执行控制以在显示单元14上显示由画面生成单元102生成的画面。
通信单元11、摄像装置12、音频输出单元13、显示单元14、存储单元15与第一示例中的通信单元11、摄像装置12、音频输出单元13、显示单元14、存储单元15类似;因此,此处省略描述。
触摸面板17设置在显示单元14中,检测用户对显示在显示单元14上的操作画面(针对熟练者的UI或针对初学者的UI)的操作输入,并将操作输入输出至控制单元10。
上面已经具体描述了根据本实施方式的信息处理终端1-1的配置。注意,信息处理终端1-1的配置不限于图4中所示的示例,并且例如,还可以包括音频输入单元(麦克风)、各种传感器(位置信息获取单元、压力传感器、环境传感器等)或操作输入单元(触摸面板等)。另外,图4中示出的信息处理终端1-1的配置的至少一部分可以在单独的主体(例如服务器侧)中。信息处理终端1-2经由通信单元11将用户输入的操作的信息传送至上面安装有信息处理终端1-2的咖啡服务器5。
计时器18测量用户对咖啡服务器5或显示在显示单元14上的操作画面的操作时间,并将时间输出至控制单元10。这样的操作时间可以从通信单元11传送至个人识别服务器2并且被累积为关于用户操作的信息。
上面已经具体描述了根据本实施方式的信息处理终端1-2的配置。注意,信息处理终端1-2的配置不限于图13中所示的示例,并且例如还可以包括音频输入单元(麦克风)或各种传感器(位置信息获取单元、压力传感器、环境传感器等)。另外,图13中示出的信息处理终端1-1的配置的至少一部分可以在单独的主体(例如,咖啡服务器5或网络上的云服务器)中。具体地,例如,摄像装置12可以设置在咖啡服务器5的前表面上方,并且所捕获的图像可以以有线/无线方式连续地传送至信息处理终端1-1。
<3-2.操作处理>
接下来,参照图14描述根据本示例的操作处理。图14是示出根据第二示例的信息处理系统的操作处理的流程图。
如图14所示,首先,信息处理终端1-2在显示单元14上显示默认UI(步骤S203)。默认UI可以是具有高设计性的UI,或者可以是通过具有完全融入背景中的咖啡服务器5的颜色和图案而使得不明显的UI。
接下来,摄像装置12保持对前面(即咖啡服务器5的前面)成像,并等待直到人站在前面(用户出现)(步骤S206)。注意,为了区分用户与仅仅经过咖啡服务器5的前面的人,可以通过考虑前面的人是否面对咖啡服务器5、面部是否面向咖啡服务器5、该人是否站着不动等来更准确地进行确定。
然后,当用户出现时,信息处理终端1-2将由摄像装置12获取的用户的面部图像传送至个人识别服务器2,并检查用户在过去是否曾经使用过咖啡服务器5(步骤S209)。个人识别服务器2基于面部图像执行个人识别,并且将用户在过去是否曾经使用过咖啡服务器5发送回信息处理终端1-2,并且在用户曾经使用过咖啡服务器5的情况下,将指示用户是否是熟练者的信息(例如,包括熟练程度)发送回信息处理终端1-2。
此处,将描述对熟练者的确定的示例。可以根据使用次数、最近使用情况(用户最近是否使用过它,是否是半年或更早之前使用过等)和用户属性(年龄等)来计算用户是否是熟练者,或者可以基于操作时间来计算用户是否是熟练者。例如,在咖啡服务器5的操作过程具有以下步骤(n)的情况下,对每个步骤所花费的操作时间(T)被测量为Tn(n=1、2、……5)。
(操作1)站在咖啡服务器5前面并且打开杯子空间的盖。
(操作2)将空杯子放入杯子空间中。
(操作3)关闭杯子空间的盖。
(操作4)按压饮料类型按钮(例如,来自热/冰和常规/大的组合中的任一个)。
(操作5)当倒完咖啡时,打开杯子空间的盖并取出咖啡。
此外,如下表1所示出的,可以为每个Tn提供针对熟练者和初学者的阈值,并且例如,如果至少一个Tn大于初学者阈值,则可以将用户确定为“初学者”,并且如果所有Tn都在熟练者阈值内,则可以将用户确定为“熟练者”。另外,可以如下进行确定:如果Tn的和在熟练者阈值内,则用户为“熟练者”,并且如果和等于或大于初学者阈值,则用户为“初学者”。
[表1]
操作 | 熟练者 | 初学者 |
(1)打开杯子空间的盖 | 1.5秒 | 5.0秒 |
(2)放置空杯子 | 1.0秒 | 3.5秒 |
(3)关闭杯子空间的盖 | 1.0秒 | 3.0秒 |
(4)按压饮料按钮 | 1.5秒 | 4.0秒 |
(5)倒完后,取出饮料 | 2.0秒 | 5.0秒 |
总和 | 7.0秒 | 20.5秒 |
另外,关于“熟练者”,个人识别服务器2还可以例如根据操作时间相对于阈值的比率来计算熟练程度。
另外,可以在初学者与熟练者之间定义“中级者”。例如,可以如下进行确定:如果至少一个Tn大于初学者阈值,则用户是“初学者”,如果所有Tn都在熟练者阈值内,则用户是“熟练者”,并且除此之外,用户是“中级者”。另外,可以如下进行确定:如果Tn的总和在熟练者阈值内,则用户是“熟练者”,如果总和等于或大于初学者阈值,则用户是“初学者”,并且除此之外,用户是“中级者”。
接下来,在用户在过去使用过咖啡服务器5(步骤S212中的“是”)并且是熟练者(步骤S215中的“是”)的情况下,信息处理终端1-2通过画面生成单元102生成与熟练程度匹配的UI,并且通过显示控制单元103在显示单元14上显示UI。注意,可以在信息处理终端1-2中计算熟练程度。
另一方面,在用户在过去没有使用过咖啡服务器5的情况下(步骤S212中的“否”)或者在用户在过去使用过咖啡服务器5(步骤S212中的“是”)但是用户不是熟练者(步骤S215中的“否”)的情况下,信息处理终端1-2通过画面生成单元102生成针对初学者的UI并且通过显示控制单元103在显示单元14上显示该UI。
以这种方式,根据估计的用户理解程度呈现适当的操作画面。此处,图15示出根据本示例的针对初学者和熟练者的UI的示例。如图15左侧所示,作为针对熟练者的UI 151,假设为具有高设计性且对操作的说明很少的UI。具体地,例如,可以使用由设计者与对咖啡服务器5的设计总体地设计的UI。因此,可以在不损害周围景观的情况下保持咖啡服务器5的设计性。
注意,在如上所述的那样定义“中级者”的情况下,信息处理终端1-2可以显示针对中级者的UI。
然后,信息处理终端1-2开始通过计时器18测量操作时间(步骤S224)。
具体地,首先,信息处理终端1-2设置下一操作的操作时间阈值Thn(n是操作过程的编号)(步骤S227)。
接下来,信息处理终端1-2确定用户是否已经执行了需要的操作(步骤S230)。用户操作可以通过摄像装置12观察,或者基于对触摸面板17的操作输入、经由通信单元11从咖啡服务器5获取的用户操作信息等来识别。
然后,在没有执行需要的操作(步骤S230中的“否”)并且当前操作的操作时间超过操作时间阈值Thn(步骤S233中的“是”)的情况下,信息处理终端1-2将要显示在显示单元14上的操作画面改变为针对初学者的UI(步骤S236)。此时,可以输出关于操作过程的音频引导。
接下来,响应于向针对初学者的UI的改变而更新操作时间阈值Thn(步骤S239)。例如,可以对相同的操作时间阈值Thn进行重新设置,或者可以设置针对初学者的操作时间阈值Thn。
然后,重复步骤S227至S239直到所有需要的操作结束,并且当所有需要的操作结束(步骤S242中的“是”)时,信息处理终端1-2基于完成所有操作所花费的操作时间的总和等来确定用户是否是熟练者(步骤S245)。
然后,信息处理终端1-2将确定结果传送至个人识别服务器2(步骤S248)。因此,对在个人识别服务器2中累积的用户信息进行更新。注意,在新用户的情况下,新登记信息。
上面已经具体描述了根据本示例的操作处理。注意,在步骤S245中,可以在个人识别服务器2中确定用户是否是熟练者。在这种情况下,信息处理终端1-2将测量的操作时间传送至个人识别服务器2。
另外,个人识别不限于基于面部图像的方法。例如,还可以通过使用利用非接触式IC卡(或诸如智能手机的通信终端)的预付卡来执行个人识别。另外,可以在不指定个体的情况下从预付卡中提取该人是否是熟练者的信息(使用次数、操作时间的累积数据等),这消除了对隐私侵犯的担忧。
另外,还可以使本示例在不执行个人识别的情况下起作用。例如,可以首先显示标准UI,并且可以根据用户操作所花费的时间来改变UI(改变为针对初学者或熟练者的UI)。注意,还可以准备逐步UI。
另外,根据本示例的信息处理终端1-2可以应用于家用电器。例如,使用触摸面板电子纸作为显示单元14使得可以呈现与用户(用户的熟练程度)相匹配的UI。例如,具有许多功能的微波炉和洗衣机以及当放置在起居室中时其外观很重要的立体部件系统和加湿器等由于许多按钮和文本而原本具有凌乱的操作表面,并且通常与房间的颜色和内部不匹配。因此,使用触摸面板电子纸(信息处理终端1-2)作为操作表面使得可以保持房间内的景观。
<<4.第三示例>>
接下来,参照图16至图19描述第三示例。第三示例描述了应用于冰箱(贮存设备)的情况。
图16是用于描述本示例的概要的图。如图16所示,在本示例中,冰箱设备1-3的门部设置有电子纸的显示单元23(23a至23c)。另外,冰箱设备1-3设置有获取用户语音的音频输入单元20(麦克风)。另外,冰箱设备1-3设置有冰箱内部照明设备和冰箱内部摄像装置(未示出),并且可以对冰箱内部进行照明和成像。
根据本示例的冰箱设备1-3通常在显示单元23a至23c上显示再现例如白色或浅蓝色的冰箱原始颜色的伪装图像。然后,当给出检查冰箱内部的音频指示时,响应于该指示而在相应门的显示单元23a上显示通过对冰箱内部成像而获得的冰箱内部图像160。因此,用户可以在不打开门的情况下检查冰箱的内容物。可以对要在显示单元23a上显示的冰箱内部图像160进行预定的图像处理。例如,在图16所示的示例中,响应于诸如“示出蔬菜”的用户指示而执行诸如在由冰箱内部摄像装置捕获的捕获图像中以彩色表达所关注的食物材料并且以黑白色表达其他食物材料的图像处理;因此,可以使所关注的食物材料明显。
<4-1.配置>
图17示出了根据本示例的冰箱设备1-3的配置的示例。如图16所示,冰箱设备1-3包括控制单元10、音频输入单元20、触摸面板21、冰箱内部摄像装置22、显示单元23、冰箱内部照明设备24、冷却单元25和存储单元26。
控制单元10用作确定单元101、画面生成单元102和显示控制单元103。确定单元101、画面生成单元102和显示控制单元103主要具有与上述示例中的确定单元101、画面生成单元102和显示控制单元103的功能类似的功能。也就是说,确定单元101根据周围情况确定是否需要信息呈现。另外,在确定单元101确定需要信息呈现的情况下,画面生成单元102响应于用户指示而基于由冰箱内部摄像装置22捕获的捕获图像生成适当的画面。另外,在不需要信息呈现的情况下,画面生成单元102生成融入至周围中的伪装图像。然后,显示控制单元103在显示单元23上显示由画面生成单元102生成的画面。
音频输入单元20由麦克风、对由麦克风获得的音频信号执行放大处理的麦克风放大器、以及对音频信号执行数字转换的A/D转换器实现,并且将音频信号输出至控制单元10。根据本示例的音频输入单元20收集用户检查冰箱内部的指示等的声音并将其输出至控制单元10。
触摸面板21设置在显示单元23中,检测用户对在显示单元23上显示的操作画面或冰箱内部图像的操作输入,并将操作输入输出至控制单元10。
冰箱内部摄像装置22是对冰箱内部成像的摄像装置并且可以包括多个摄像装置。另外,冰箱内部摄像装置22可以由广角摄像装置实现。
在显示控制单元103的控制下,显示单元23显示冰箱内部图像或伪装图像。另外,显示单元23由电子纸显示器实现。
冰箱内部照明设备24具有对冰箱内部进行照明的功能并且可以包括多个照明设备。当利用冰箱内部摄像装置22进行成像时,冰箱内部照明设备24接通,并且当冰箱设备1-3的门打开时,冰箱内部照明设备24也接通。
冷却单元25具有冰箱的原始功能并且被配置成冷却冰箱内部。
存储单元26由存储用于由控制单元10进行的处理的程序、操作参数等的只读存储器(ROM)以及临时存储适当地变化的参数等的随机存取存储器(RAM)实现。
<4-2.操作处理>
接下来,参照图18描述根据本示例的操作处理。图18是示出根据本示例的操作处理的流程图。
如图18所示,首先,冰箱设备1-3的显示控制单元103在所有显示单元23a至23c上显示诸如白色或浅蓝色的冰箱的原始颜色(标准设置颜色)或者特定图像(任一种情况下的伪装图像)(步骤S303)。
接下来,冰箱设备1-3等待直到给出检查冰箱内部的音频指示(步骤S306)。注意,检查冰箱内部的指示不限于语音,并且可以从操作按钮(未示出)或显示在显示单元23上的操作按钮UI(由触摸面板检测)执行。然而,由于在烹饪等期间手是湿的或脏的,因此能够通过音频指示而不接触冰箱来检查冰箱内部是非常有用的。另外,冰箱设备1-3可以设置有用于识别站在前面的用户的摄像装置,并且在识别到用户为特定用户(居民、家庭成员等)之后,可以接受检查冰箱内部的指示。可替选地,可以通过语音识别来识别特定用户。
然后,冰箱设备1-3识别用以进行检查的指示的语音并且选择所关注的食物材料(步骤S309)。也就是说,检查冰箱内部的指示可以例如直接指示食物材料的类型,诸如“示出蔬菜”,或者指定膳食的名称,诸如“生姜炒猪肉的配料”等;在这种情况下,通过语音识别选择目标食物材料。注意,在没有指定食物材料的情形下做出“示出冰箱内部”的指示的情况下,不会特别地执行此处的选择,并且仅仅显示冰箱内部图像。
接下来,冰箱设备1-3接通冰箱内部照明设备24(步骤S312),利用冰箱内部摄像装置22对冰箱内部进行成像(步骤S315),并且当成像结束时关闭冰箱内部照明设备(步骤S318)。根据检查冰箱内部的指示选择使用哪个冰箱内部摄像装置22进行成像。另外,冰箱内部摄像装置22可以例如从上方对蔬菜室和冷冻室进行成像,使得可以很好地掌握冰箱内部的情形,或者可以从多侧进行成像,使得用户可以指示从哪个角度看冰箱内部。另外,可以对门的内部(贮存空间)进行成像并且可以切换和显示冰箱内部图像。
然后,执行图像失真校正(步骤S321)。这是因为,在冰箱内部摄像装置22是广角摄像装置的情况下优选地执行图像失真校正。注意,由于使用的透镜是已知的,因此校正参数也是预先已知的,并且可以使用现有算法来应用校正。
然后,冰箱设备1-3的画面生成单元102通过对冰箱内部图像执行图像识别来指定所关注的食物材料,并且执行处理以用于通过图像处理使食物材料明显(步骤S324)。例如,如图16中的冰箱内部图像160所示,通过以黑白色表示除所关注的食物材料之外的食物材料,可以使得一眼就能够掌握需要的食物材料所在的地方。另外,在检查冰箱内部的指示中没有指定食物材料的情况下(在仅检查冰箱内部的指示的情况下),不执行用于使特定食物材料明显的这种图像处理。
接下来,冰箱设备1-3的显示控制单元103在设置在冰箱的各个门上的显示单元23a至23c之中的与捕获的冰箱内部图像对应的门的显示单元23上显示冰箱内部图像(步骤S327)。此处,图19示出了在检查冰箱内部的指示中未指定食物材料的情况下(在仅检查冰箱内部的指示的情况下)的显示示例。如图19所示,在仅检查冰箱内部的指示的情况下,在设置在冰箱设备1-3的各个门上的显示单元23a至23c上显示相应的冰箱内部图像61至63。
然后,在输入针对膳食或食物材料的新指示(检查冰箱内部的指示)的情况下(步骤S330中的“是”),改变所关注的食物材料(步骤S333),并且处理返回至步骤S324。
另一方面,在给出结束冰箱内部显示的指示的情况下(步骤S336中的“是”),处理返回至步骤S303,并且在所有显示单元23上显示标准设置颜色或特定图像(在任一情况下的伪装图像)。
以这种方式,根据本示例,可以在通常的操作中显示伪装图像以防止景观受到损害,并且如果需要,可以在不打开门的情况下看到冰箱内部的情形。注意,对冰箱内部图像执行的图像处理不限于如上所述的用于使所关注的食物材料明显的图像处理。例如,在用户正在与客人会面的情况下(用摄像装置识别冰箱周围的人),可以有目的地执行显示以用昂贵的食物材料替换一些食物材料。
<<5.第四示例>>
接下来,参照图20至图22描述第四示例。第四示例描述了应用于车站楼梯等中的引导显示的情况。
图20是用于描述第四示例的概要的图。通常,在车站的楼梯或通道中,考虑到高峰时段的人流量,执行引导显示以为具有更多交通量的侧提供更多楼梯或通道的空间。然而,在车站的楼梯或通道中的拥挤情况和人流量根据时间段、列车到达时间等而波动,并且提供的引导显示不能总是应对所有情况。另外,即使车站的外部和内部由空间设计者等设计,提供大量这样的引导显示、用于引起用户注意的显示等也会损害预期的设计性。
因此,在本示例中,例如,在车站的楼梯等中,如图20左侧所示,通常不执行引导显示(在非高峰时段)并且显示融入至周围景观中的图像以便不损害景观;如图20右侧所示,在高峰时段,通过显示引导显示170和171来执行适当的信息呈现。
可以基于例如时间段、从列车管理服务器6报告的列车到达定时、或者安装在楼梯中的人流量传感器(未示出)的传感器数据(交通量)来确定时间是否是高峰时段。人流量传感器可以检测交通量;此外,在人流量传感器设置在多个地方(例如楼梯的上部和下部)的情况下,人流量(上楼梯的人多于下楼梯的人或下楼梯的人多于上楼梯的人)也可以根据每个人流量传感器检测到的交通量的波动来检测。
<5-1.配置>
图21示出了根据本示例的信息处理系统的整体配置的示例。如图21所示,根据本示例的信息处理系统包括信息处理终端1-4和列车管理服务器6,并且信息处理终端1-4和列车管理服务器6经由网络3连接。
信息处理终端1-4包括控制单元10、通信单元11、显示单元14、存储单元15和人流量传感器27。
控制单元10用作确定单元101、画面生成单元102和显示控制单元103。确定单元101、画面生成单元102和显示控制单元103主要具有与上述示例中的确定单元101、画面生成单元102和显示控制单元103的功能类似的功能。也就是说,确定单元101根据周围情况确定是否需要信息呈现。具体地,确定单元101根据由列车管理服务器6经由通信单元11接收的列车到达定时、由人流量传感器27检测到的交通量和人流量数据、或者时间段来确定是否呈现诸如引导的信息。
另外,在确定单元101确定需要信息呈现的情况下,画面生成单元102基于交通量和人流量生成适当的引导画面。例如,在由于大量上升用户而导致拥挤的情况下,生成针对上升的引导显示,以使针对上升的引导显示在要在楼梯上显示的四条引导显示线中的三条线中显示。另一方面,例如,在由于大量下降用户而导致拥挤的情况下,生成针对下降的引导显示,以使针对下降的引导显示在要在楼梯上显示的四条引导显示线中的三条线中显示。另外,在不需要信息呈现的情况下,画面生成单元102生成融入周围中的伪装图像。
然后,显示控制单元103在显示单元14上显示由画面生成单元102生成的画面。
通信单元11以有线/无线方式连接至网络3,并且在网络上向列车管理服务器6传送数据和从列车管理服务器6接收数据。
在显示控制单元103的控制下,显示单元14显示引导显示或伪装图像。另外,显示单元14由电子纸显示器实现,并且如图20所示,在楼梯的台阶上安装有多个显示器。
存储单元15由存储用于由控制单元10进行的处理的程序、操作参数等的只读存储器(ROM)以及临时存储适当地变化的参数等的随机存取存储器(RAM)实现。
人流量传感器27是检测交通量的传感器,并且可以设置在多个地方,例如楼梯的上部和下部。也可以根据多个地方的交通量的变化来识别人流量(在哪个方向上多少用户在移动)。人流量传感器27例如可以由压力传感器实现并且可以通过计算被按压的次数来检测交通量。另外,人流量传感器27可以由使用红外线的中断传感器或运动检测器实现并且可以对经过的人数进行计数。
上面已经具体描述了根据本示例的信息处理系统的配置示例。
<5-2.操作处理>
接下来,参照图22描述根据本示例的操作处理。图22是示出根据本示例的操作处理的流程图。
如图22所示,首先,信息处理终端1-4的显示控制单元103关闭所有箭头显示(引导显示)(步骤S403)。
接下来,信息处理终端1-4从列车管理服务器6获取关于针对其使用安装有信息处理终端1-4的楼梯的列车是否已经到达站台的信息(步骤S406)。在本示例中,列车是否已经到达车站由另外的系统管理;因此,信息处理终端1-4经由网络3获取列车到达信息。
然后,当列车到达站台时(步骤S409中的“是”),假设在从车站的站台通向上方(或下方)的层的大厅的楼梯中上升侧(或下降侧)变得拥挤;因此,信息处理终端1-4更新显示画面以增加前往大厅的引导显示的线的数目并使箭头面向大厅的方向(步骤S412)。例如,通过在四条线中使用三条线作为上升引导而使用一条线作为下降引导来使显示不对称;因此,可以动态地改变上升与下降之间的引导显示平衡。
接下来,信息处理终端1-4从人流量传感器27获取拥挤度C(步骤S415)。例如,在人流量传感器27安装在楼梯的上端和下端的情况下,信息处理终端1-4基于每个人流量传感器27检测到的数据识别通过楼梯的人数,并计算拥挤度C。
然后,在拥挤度C变得低于预定阈值(步骤S418中的“是”)的情况下,估计已经解决拥挤;因此,信息处理终端1-4返回至步骤S403,并返回至所有箭头显示(引导显示)都关闭的状态。
上面已经具体描述了根据本示例的操作处理。注意,为了防止人流量的短时间中断引起引导显示返回,可以累计通过在特定时间范围内计数获得的值,而不是使用力矩的传感器值,作为在步骤S415中获取的拥挤度C。例如,可以通过获得一分钟内的总人数的计数来计算拥挤度C。
<<6.结论>>
如上所述,根据本公开的实施方式的信息处理系统使得可以在保持景观的情况下适当地呈现需要的信息。
以上已经参照附图描述了本公开的(一个或更多个)优选实施方式,而本公开不限于上述示例。本领域技术人员可以在所附权利要求的范围内发现各种改变和修改,并且应该理解,它们将自然地落入本公开的技术范围内。
例如,还可以制作用于使内置于如上所述的信息处理终端1-1、1-2和1-4、冰箱设备1-3或个人识别服务器2中的诸如CPU、ROM和RAM的硬件展现信息处理终端1-1、1-2和1-4、冰箱设备1-3或个人识别服务器2的功能的计算机程序。此外,还提供了一种存储有计算机程序的计算机可读存储介质。
另外,根据本实施方式的信息处理终端1可以应用于诸如建筑物的架构。例如,即使在景观受到损害的情形发生的情况下,例如富士山被建筑物隐藏,也可以通过在建筑物的墙等上显示富士山的图像(例如诸如实时捕获的捕获图像的伪装图像)使得可以看见被建筑物所隐藏的富士山,来使景观被示出为就像建筑物已经消失一样。注意,在大型架构的情况下,可能出现的问题是图像仅从一个视点看起来融入周围中;然而,例如,通过使用用于按时间段投标的系统,可以生成并显示该时间段处的伪装图像以匹配已经以最高价格取胜的人的视点。另外,通过使用例如视差屏障方案或透镜方案的视线视差分割方案使得能够根据要观看的视角实现最佳伪装图像,即使视点在一定程度上改变,也可以使图像融入周围中。
另外,在上述示例中,在信息处理终端1侧执行主要控制(确定处理、画面生成处理和显示控制处理),但是可以至少部分地在服务器(例如个人识别服务器2)中执行主要控制。在这种情况下,例如,服务器的控制单元用作确定单元、画面生成单元和显示控制单元,并且执行控制,以基于从信息处理终端1接收的传感器数据(捕获图像、操作数据、音频数据、人流量传感器的检测结果等)确定是否呈现信息,生成适当的画面,将生成的画面传送至信息处理终端1,并显示画面。
此外,本说明书中描述的效果仅仅是说明性的或示例性的效果,并不是限制性的。也就是说,与上述效果一起或代替上述效果,根据本公开的技术可以实现本领域技术人员根据本说明书的描述而清楚的其他效果。
此外,本技术还可以被如下配置。
(1)一种信息处理设备,包括:
通信单元,其被配置成接收由用于掌握周围情况的传感器检测到的传感器数据;以及
控制单元,其被配置成执行控制以:
根据从所述传感器数据检测到的用户的属性、用户的情况或环境中至少之一来生成用于在安装在所述传感器周围的显示单元上显示包括适当信息的图像的控制信号;
在确定不需要信息呈现的情况下,生成用于在所述显示单元上显示融入所述显示单元的周围中的融合图像的控制信号;以及
经由所述通信单元向所述显示单元传送所述控制信号。
(2)根据(1)所述的信息处理设备,其中,所述控制单元根据基于所述传感器数据识别的伴随所述用户的人或生物或者所述用户所拥有的物体中至少之一来指定适当的信息。
(3)根据(1)所述的信息处理设备,其中,
所述显示单元被设置在电子装置上,
所述传感器数据包括用于所述电子装置的操作信息,以及
所述控制单元:
执行控制以根据所述操作信息识别所述用户对所述电子装置的熟练程度,并且将所述用户和所述熟练程度相关联地存储在存储单元中,以及
执行控制以在根据所述用户对所述电子装置的熟练程度确定不需要信息呈现时,生成用于在所述显示单元上显示融入安装有所述显示单元的安装表面中的融合图像的控制信号,以及经由所述通信单元向所述显示单元传送所述控制信号。
(4)根据(3)所述的信息处理设备,其中,所述控制单元根据所述操作信息识别所述用户是否是所述电子装置的熟练者,并且如果所述用户是熟练者则生成用于显示所述融合图像的控制信号。
(5)根据(1)所述的信息处理设备,其中,
所述显示单元安装在贮存设备的前表面上并且能够显示由所述贮存设备中的摄像装置捕获的贮存设备内部图像,以及
所述控制单元执行控制以:
在基于所述传感器数据识别出特定用户时,生成用于在所述显示单元上显示所述贮存设备内部图像的控制信号;
在没有识别到所述特定用户时,生成用于在所述显示单元上显示融入所述显示单元的周围中的融合图像的控制信号;以及
经由所述通信单元向所述显示单元传送所生成的控制信号。
(6)根据(5)所述的信息处理设备,其中,所述控制单元基于给出检查所述贮存设备内部的指示的用户语音数据识别所述特定用户。
(7)根据(6)所述的信息处理设备,其中,所述控制单元响应于由所述用户给出的指示对由所述贮存设备中的所述摄像装置捕获的贮存设备内部图像执行预定处理,然后生成用于显示所述贮存设备内部图像的控制信号。
(8)根据(1)所述的信息处理设备,其中,
所述显示单元被安装在通道上,以及
所述控制单元执行控制以:
根据从所述传感器数据检测到的用户的数目而生成用于在所述显示单元上显示包括适当的引导信息的图像的控制信号;
在确定不需要对引导信息的呈现时,生成用于在所述显示单元上显示融入安装有所述显示单元的所述通道中的融合图像的控制信号;以及
经由所述通信单元向所述显示单元传送所生成的控制信号。
(9)一种信息处理方法,包括通过处理器进行以下操作:
经由通信单元接收由用于掌握周围情况的传感器检测到的传感器数据;以及
执行控制以:
根据从所述传感器数据检测到的用户的属性、用户的情况或环境中至少之一来生成用于在安装在所述传感器周围的显示单元上显示包括适当信息的图像的控制信号;
在确定不需要信息呈现的情况下,生成用于在所述显示单元上显示融入所述显示单元的周围中的融合图像的控制信号;以及
经由所述通信单元向所述显示单元传送所述控制信号。
(10)一种记录有程序的记录介质,所述程序使得计算机用作:
通信单元,其被配置成接收由用于掌握周围情况的传感器检测到的传感器数据;以及
控制单元,其被配置成执行控制以:
根据从所述传感器数据检测到的用户的属性、用户的情况或环境中至少之一来生成用于在安装在所述传感器周围的显示单元上显示包括适当信息的图像的控制信号;
在确定不需要信息呈现的情况下,生成用于在所述显示单元上显示融入所述显示单元的周围中的融合图像的控制信号;以及
经由所述通信单元向所述显示单元传送所述控制信号。
参考标记列表
1 (1-1,1-2,1-4)信息处理终端
1-3 冰箱设备(信息处理终端)
2 个人识别服务器
3 网络
5 咖啡服务器
6 列车管理服务器
10 控制单元
11 通信单元
12 摄像装置
13 音频输出单元
14 显示单元
15 存储单元
16 存储介质I/F
17 触摸面板
18 计时器
20 音频输入单元
21 触摸面板
22 冰箱内部摄像装置
23 显示单元
24 冰箱内部照明设备
25 冷却单元
26 存储单元
27 人流量传感器
101 确定单元
102 画面生成单元
103 显示控制单元
Claims (10)
1.一种信息处理设备,包括:
通信单元,其被配置成接收由用于掌握周围情况的传感器检测到的传感器数据;以及
控制单元,其被配置成执行控制以:
根据从所述传感器数据检测到的用户的属性、用户的情况或环境中至少之一来生成用于在安装在所述传感器周围的显示单元上显示包括适当信息的图像的控制信号;
在确定不需要信息呈现的情况下,生成用于在所述显示单元上显示融入所述显示单元的周围中的融合图像的控制信号;以及
经由所述通信单元向所述显示单元传送所述控制信号。
2.根据权利要求1所述的信息处理设备,其中,所述控制单元根据基于所述传感器数据所识别的伴随所述用户的人或生物或者由所述用户所拥有的物体中至少之一来指定适当的信息。
3.根据权利要求1所述的信息处理设备,其中,
所述显示单元被设置在电子装置上,
所述传感器数据包括用于所述电子装置的操作信息,以及
所述控制单元:
执行控制以根据所述操作信息识别所述用户对所述电子装置的熟练程度,并且将所述用户和所述熟练程度相关联地存储在存储单元中;以及
执行控制以在根据所述用户对所述电子装置的熟练程度确定不需要信息呈现时,生成用于在所述显示单元上显示融入安装有所述显示单元的安装表面中的融合图像的控制信号;以及经由所述通信单元向所述显示单元传送所述控制信号。
4.根据权利要求3所述的信息处理设备,其中,所述控制单元根据所述操作信息识别所述用户是否是所述电子装置的熟练者,并且如果所述用户是熟练者,则生成用于显示所述融合图像的控制信号。
5.根据权利要求1所述的信息处理设备,其中,
所述显示单元安装在贮存设备的前表面上,并且能够显示由所述贮存设备中的摄像装置捕获的贮存设备内部图像,以及
所述控制单元执行控制以:
在基于所述传感器数据识别出特定用户时,生成用于在所述显示单元上显示所述贮存设备内部图像的控制信号;
在没有识别到特定用户时,生成用于在所述显示单元上显示融入所述显示单元的周围中的融合图像的控制信号;以及
经由所述通信单元向所述显示单元传送所生成的控制信号。
6.根据权利要求5所述的信息处理设备,其中,所述控制单元基于给出检查所述贮存设备内部的指示的用户语音数据识别所述特定用户。
7.根据权利要求6所述的信息处理设备,其中,所述控制单元响应于由所述用户给出的指示对由所述贮存设备中的所述摄像装置捕获的贮存设备内部图像执行预定处理,然后生成用于显示所述贮存设备内部图像的控制信号。
8.根据权利要求1所述的信息处理设备,其中,
所述显示单元被安装在通道上,以及
所述控制单元执行控制以:
根据从所述传感器数据检测到的用户的数目而生成用于在所述显示单元上显示包括适当的引导信息的图像的控制信号;
在确定不需要对引导信息的呈现时,生成用于在所述显示单元上显示融入至安装有所述显示单元的所述通道的融合图像的控制信号;以及
经由所述通信单元向所述显示单元传送所生成的控制信号。
9.一种信息处理方法,包括通过处理器进行以下操作:
经由通信单元接收由用于掌握周围情况的传感器检测到的传感器数据;以及
执行控制以:
根据从所述传感器数据检测到的用户的属性、用户的情况或环境中至少之一来生成用于在安装在所述传感器周围的显示单元上显示包括适当信息的图像的控制信号;
在确定不需要信息呈现的情况下,生成用于在所述显示单元上显示融入所述显示单元的周围中的融合图像的控制信号;以及
经由所述通信单元向所述显示单元传送所述控制信号。
10.一种记录有程序的记录介质,所述程序使得计算机用作:
通信单元,其被配置成接收由用于掌握周围情况的传感器检测到的传感器数据;以及
控制单元,其被配置成执行控制以:
根据从所述传感器数据检测到的用户的属性、用户的情况或环境中至少之一来生成用于在安装在所述传感器周围的显示单元上显示包括适当信息的图像的控制信号;
在确定不需要信息呈现的情况下,生成用于在所述显示单元上显示融入所述显示单元的周围中的融合图像的控制信号;以及
经由所述通信单元向所述显示单元传送所述控制信号。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2016221658 | 2016-11-14 | ||
JP2016-221658 | 2016-11-14 | ||
PCT/JP2017/029099 WO2018087972A1 (ja) | 2016-11-14 | 2017-08-10 | 情報処理装置、情報処理方法、および記録媒体 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN109983526A true CN109983526A (zh) | 2019-07-05 |
Family
ID=62110620
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201780068807.0A Pending CN109983526A (zh) | 2016-11-14 | 2017-08-10 | 信息处理设备、信息处理方法以及记录介质 |
Country Status (6)
Country | Link |
---|---|
US (2) | US11094228B2 (zh) |
EP (1) | EP3540716B1 (zh) |
JP (1) | JP7074066B2 (zh) |
KR (1) | KR102350351B1 (zh) |
CN (1) | CN109983526A (zh) |
WO (1) | WO2018087972A1 (zh) |
Families Citing this family (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US11094228B2 (en) * | 2016-11-14 | 2021-08-17 | Sony Corporation | Information processing device, information processing method, and recording medium |
JP7408995B2 (ja) * | 2019-10-18 | 2024-01-09 | 日産自動車株式会社 | 情報表示装置 |
RU195640U1 (ru) * | 2019-11-21 | 2020-02-03 | Общество с ограниченной ответственностью "БИЗНЕС МЕДИА" | Рекламно-информационное устройство |
JP6923029B1 (ja) * | 2020-03-17 | 2021-08-18 | 大日本印刷株式会社 | 表示装置、表示システム、コンピュータプログラム及び表示方法 |
Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP4788732B2 (ja) * | 2008-04-18 | 2011-10-05 | コニカミノルタビジネステクノロジーズ株式会社 | 表示操作部を備えた装置 |
CN103201710A (zh) * | 2010-11-10 | 2013-07-10 | 日本电气株式会社 | 图像处理系统、图像处理方法以及存储图像处理程序的存储介质 |
US9195320B1 (en) * | 2012-10-22 | 2015-11-24 | Google Inc. | Method and apparatus for dynamic signage using a painted surface display system |
JP2016013747A (ja) * | 2014-07-01 | 2016-01-28 | 株式会社デンソー | 車両用表示制御装置及び車両用表示システム |
CN205247368U (zh) * | 2015-11-30 | 2016-05-18 | 马国强 | 一种基于大容量数据存储及信息交互的公交站台服务系统 |
CN105698469A (zh) * | 2014-11-26 | 2016-06-22 | 上海华博信息服务有限公司 | 一种具有透明显示面板的智能冰箱 |
US20160227208A1 (en) * | 2006-12-19 | 2016-08-04 | Playvision Technologies | Interactive imaging systems and methods for motion control by users |
CN205580061U (zh) * | 2015-04-07 | 2016-09-14 | 三菱电机株式会社 | 冰箱 |
CN105938390A (zh) * | 2015-03-03 | 2016-09-14 | 卡西欧计算机株式会社 | 内容输出装置、内容输出方法 |
Family Cites Families (35)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
GB9223223D0 (en) * | 1992-11-05 | 1992-12-16 | Gradus Ltd | Display device |
JP2002073321A (ja) | 2000-04-18 | 2002-03-12 | Fuji Photo Film Co Ltd | 画像表示方法 |
JP2002081818A (ja) | 2000-09-05 | 2002-03-22 | Hitachi Ltd | 冷蔵庫 |
JP4165095B2 (ja) | 2002-03-15 | 2008-10-15 | オムロン株式会社 | 情報提供装置および情報提供方法 |
JP3879848B2 (ja) * | 2003-03-14 | 2007-02-14 | 松下電工株式会社 | 自律移動装置 |
JP4854965B2 (ja) | 2005-01-07 | 2012-01-18 | 三菱電機株式会社 | 表示装置 |
US9101279B2 (en) * | 2006-02-15 | 2015-08-11 | Virtual Video Reality By Ritchey, Llc | Mobile user borne brain activity data and surrounding environment data correlation system |
JP2008225315A (ja) | 2007-03-15 | 2008-09-25 | Konica Minolta Holdings Inc | 広告表示システム |
US20110145053A1 (en) * | 2008-08-15 | 2011-06-16 | Mohammed Hashim-Waris | Supply chain management systems and methods |
WO2010024000A1 (ja) * | 2008-08-26 | 2010-03-04 | シャープ株式会社 | 画像表示装置、及び画像表示装置の駆動方法 |
JP2010122748A (ja) | 2008-11-17 | 2010-06-03 | Ricoh Co Ltd | 操作表示装置及びそれを備えた画像形成装置 |
JP2010128416A (ja) | 2008-12-01 | 2010-06-10 | Mitsubishi Electric Corp | 電子機器 |
JP5423035B2 (ja) | 2009-02-18 | 2014-02-19 | 沖電気工業株式会社 | 情報提供装置及び方法 |
KR20110128322A (ko) | 2009-03-03 | 2011-11-29 | 디지맥 코포레이션 | 공공 디스플레이들로부터의 내로우캐스팅과, 관련 처리방식들 |
JP2011038335A (ja) | 2009-08-12 | 2011-02-24 | Toshisada Sekiguchi | 歩行者誘導方式及びこれを用いた歩行施設または歩行者誘導システム |
US8964298B2 (en) * | 2010-02-28 | 2015-02-24 | Microsoft Corporation | Video display modification based on sensor input for a see-through near-to-eye display |
US9013515B2 (en) | 2010-12-02 | 2015-04-21 | Disney Enterprises, Inc. | Emissive display blended with diffuse reflection |
EP2570986A1 (en) * | 2011-09-13 | 2013-03-20 | Alcatel Lucent | Method for creating a cover for an electronic device and electronic device |
JP2013065110A (ja) * | 2011-09-15 | 2013-04-11 | Omron Corp | 検出装置、該検出装置を備えた表示制御装置および撮影制御装置、物体検出方法、制御プログラム、ならびに、記録媒体 |
US10776103B2 (en) * | 2011-12-19 | 2020-09-15 | Majen Tech, LLC | System, method, and computer program product for coordination among multiple devices |
WO2013125032A1 (ja) | 2012-02-24 | 2013-08-29 | ジャパン サイエンス アンド テクノロジー トレーディング カンパニー リミテッド | 誘引性多目的電子看板システム |
JP6157822B2 (ja) * | 2012-09-27 | 2017-07-05 | 東芝ライフスタイル株式会社 | 冷蔵庫 |
JP6248398B2 (ja) | 2013-03-06 | 2017-12-20 | 大日本印刷株式会社 | 情報表示媒体 |
US9292162B2 (en) * | 2013-04-08 | 2016-03-22 | Art.Com | Discovering and presenting décor harmonized with a décor style |
KR102026730B1 (ko) | 2013-04-08 | 2019-09-30 | 엘지전자 주식회사 | 냉장고 |
JP2015004921A (ja) | 2013-06-24 | 2015-01-08 | 平岡織染株式会社 | 可変表示機能看板装置およびその表示作動方法 |
US10405786B2 (en) * | 2013-10-09 | 2019-09-10 | Nedim T. SAHIN | Systems, environment and methods for evaluation and management of autism spectrum disorder using a wearable data collection device |
JP6266374B2 (ja) | 2014-02-14 | 2018-01-24 | 東芝ライフスタイル株式会社 | 収納装置、画像処理装置、画像処理方法およびプログラム |
KR101641252B1 (ko) * | 2014-04-08 | 2016-07-29 | 엘지전자 주식회사 | 3d 프린터의 제어장치 |
JP6336816B2 (ja) | 2014-04-30 | 2018-06-06 | 東芝ライフスタイル株式会社 | 冷蔵庫 |
JP6543125B2 (ja) | 2014-12-11 | 2019-07-10 | パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカPanasonic Intellectual Property Corporation of America | 制御方法及び冷蔵庫 |
US10161674B2 (en) | 2014-12-11 | 2018-12-25 | Panasonic Intellectual Property Corporation Of America | Method for controlling a refrigerator and refrigerator |
WO2016144741A1 (en) * | 2015-03-06 | 2016-09-15 | Illinois Tool Works Inc. | Sensor assisted head mounted displays for welding |
JP5969090B1 (ja) * | 2015-05-21 | 2016-08-10 | 東芝エレベータ株式会社 | エレベータ |
US11094228B2 (en) * | 2016-11-14 | 2021-08-17 | Sony Corporation | Information processing device, information processing method, and recording medium |
-
2017
- 2017-08-10 US US16/330,637 patent/US11094228B2/en active Active
- 2017-08-10 WO PCT/JP2017/029099 patent/WO2018087972A1/ja active Application Filing
- 2017-08-10 CN CN201780068807.0A patent/CN109983526A/zh active Pending
- 2017-08-10 EP EP17870182.7A patent/EP3540716B1/en active Active
- 2017-08-10 JP JP2018550032A patent/JP7074066B2/ja active Active
- 2017-08-10 KR KR1020197012565A patent/KR102350351B1/ko active IP Right Grant
-
2021
- 2021-07-02 US US17/366,980 patent/US11594158B2/en active Active
Patent Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20160227208A1 (en) * | 2006-12-19 | 2016-08-04 | Playvision Technologies | Interactive imaging systems and methods for motion control by users |
JP4788732B2 (ja) * | 2008-04-18 | 2011-10-05 | コニカミノルタビジネステクノロジーズ株式会社 | 表示操作部を備えた装置 |
CN103201710A (zh) * | 2010-11-10 | 2013-07-10 | 日本电气株式会社 | 图像处理系统、图像处理方法以及存储图像处理程序的存储介质 |
US9195320B1 (en) * | 2012-10-22 | 2015-11-24 | Google Inc. | Method and apparatus for dynamic signage using a painted surface display system |
JP2016013747A (ja) * | 2014-07-01 | 2016-01-28 | 株式会社デンソー | 車両用表示制御装置及び車両用表示システム |
CN105698469A (zh) * | 2014-11-26 | 2016-06-22 | 上海华博信息服务有限公司 | 一种具有透明显示面板的智能冰箱 |
CN105938390A (zh) * | 2015-03-03 | 2016-09-14 | 卡西欧计算机株式会社 | 内容输出装置、内容输出方法 |
CN205580061U (zh) * | 2015-04-07 | 2016-09-14 | 三菱电机株式会社 | 冰箱 |
CN205247368U (zh) * | 2015-11-30 | 2016-05-18 | 马国强 | 一种基于大容量数据存储及信息交互的公交站台服务系统 |
Also Published As
Publication number | Publication date |
---|---|
EP3540716A1 (en) | 2019-09-18 |
JP7074066B2 (ja) | 2022-05-24 |
EP3540716B1 (en) | 2023-06-07 |
EP3540716A4 (en) | 2019-11-27 |
KR102350351B1 (ko) | 2022-01-14 |
JPWO2018087972A1 (ja) | 2019-09-26 |
US20200226959A1 (en) | 2020-07-16 |
US11094228B2 (en) | 2021-08-17 |
WO2018087972A1 (ja) | 2018-05-17 |
US11594158B2 (en) | 2023-02-28 |
US20210327313A1 (en) | 2021-10-21 |
KR20190078579A (ko) | 2019-07-04 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN109983526A (zh) | 信息处理设备、信息处理方法以及记录介质 | |
CN106664391B (zh) | 引导处理装置和引导方法 | |
CN104504112B (zh) | 影院信息采集系统 | |
CN107705432A (zh) | 一种自动售货机、信息展示的方法及信息展示的系统 | |
US20180025233A1 (en) | Image-capturing device, recording device, and video output control device | |
CN107924544A (zh) | 信息处理系统和信息处理方法 | |
US20200226880A1 (en) | Information processing apparatus, information reading apparatus, gaming machine, and gaming system | |
WO2016186440A1 (ko) | 멀티모달 정보를 이용하여 사용자의 정보를 획득하는 셋톱박스, 이를 이용한 관리 서버 및 컴퓨터 판독 가능한 기록 매체 | |
CN106600471A (zh) | 一种基于智慧酒店的宾客服务分析决策系统 | |
JP2006030819A (ja) | 情報表示装置 | |
CN110007832A (zh) | 信息终端装置、信息处理系统以及存储有显示控制程序的计算机可读非暂时性的存储介质 | |
US11941944B2 (en) | Information processing apparatus, information reading apparatus, gaming machine, and gaming system | |
JP2008243095A (ja) | 顔検出システム、および顔検出方法 | |
CN115409654B (zh) | 一种无人化酒店管理方法及系统 | |
CN113989979A (zh) | 智能柜及其物品管理方法、电子设备、介质、产品 | |
JPH08123374A (ja) | 待ち時間案内装置 | |
JP2005227522A (ja) | 情報表示装置 | |
JP6716137B2 (ja) | 情報表示システム | |
CN208057003U (zh) | 智能猫眼快递系统 | |
CN107239980B (zh) | 一种广告发布方法 | |
JP7250264B2 (ja) | 防犯装置、自動販売機又は情報提供装置、及びプログラム | |
WO2017130537A1 (ja) | 情報処理装置、情報処理方法、およびプログラム | |
WO2023021590A1 (ja) | 表示制御装置、表示制御方法、及びプログラム | |
WO2017049918A1 (zh) | 信息发布终端和方法 | |
WO2021144908A1 (ja) | 表示制御装置、管理装置、表示制御システム、表示制御方法、管理方法及びプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |