CN118235175A - 用于在物联网环境中生成活动提醒的方法和电子设备 - Google Patents
用于在物联网环境中生成活动提醒的方法和电子设备 Download PDFInfo
- Publication number
- CN118235175A CN118235175A CN202280075142.7A CN202280075142A CN118235175A CN 118235175 A CN118235175 A CN 118235175A CN 202280075142 A CN202280075142 A CN 202280075142A CN 118235175 A CN118235175 A CN 118235175A
- Authority
- CN
- China
- Prior art keywords
- user
- activity
- iot
- intent
- objects
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 230000000694 effects Effects 0.000 title claims abstract description 166
- 238000000034 method Methods 0.000 title claims abstract description 42
- 230000015654 memory Effects 0.000 claims description 28
- 230000008859 change Effects 0.000 claims description 25
- 230000003993 interaction Effects 0.000 claims description 6
- 238000001514 detection method Methods 0.000 description 27
- 238000013528 artificial neural network Methods 0.000 description 18
- 238000004891 communication Methods 0.000 description 11
- 238000010586 diagram Methods 0.000 description 9
- 235000013305 food Nutrition 0.000 description 8
- 238000005406 washing Methods 0.000 description 8
- 230000006870 function Effects 0.000 description 7
- 238000012545 processing Methods 0.000 description 7
- XEEYBQQBJWHFJM-UHFFFAOYSA-N Iron Chemical compound [Fe] XEEYBQQBJWHFJM-UHFFFAOYSA-N 0.000 description 6
- 239000011521 glass Substances 0.000 description 6
- 230000005540 biological transmission Effects 0.000 description 3
- 235000000396 iron Nutrition 0.000 description 3
- 229910052742 iron Inorganic materials 0.000 description 3
- 238000012986 modification Methods 0.000 description 3
- 230000004048 modification Effects 0.000 description 3
- 238000012546 transfer Methods 0.000 description 3
- 239000007787 solid Substances 0.000 description 2
- 208000000044 Amnesia Diseases 0.000 description 1
- 206010011469 Crying Diseases 0.000 description 1
- 208000026139 Memory disease Diseases 0.000 description 1
- 238000003491 array Methods 0.000 description 1
- 230000001413 cellular effect Effects 0.000 description 1
- 239000002131 composite material Substances 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 238000013135 deep learning Methods 0.000 description 1
- 238000013136 deep learning model Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 239000000835 fiber Substances 0.000 description 1
- 238000007667 floating Methods 0.000 description 1
- 230000000977 initiatory effect Effects 0.000 description 1
- 238000010412 laundry washing Methods 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 230000007774 longterm Effects 0.000 description 1
- 230000006984 memory degeneration Effects 0.000 description 1
- 208000023060 memory loss Diseases 0.000 description 1
- 238000010295 mobile communication Methods 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 230000035484 reaction time Effects 0.000 description 1
- 230000002787 reinforcement Effects 0.000 description 1
- 230000006403 short-term memory Effects 0.000 description 1
- 230000001052 transient effect Effects 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G08—SIGNALLING
- G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
- G08B21/00—Alarms responsive to a single specified undesired or abnormal condition and not otherwise provided for
- G08B21/18—Status alarms
- G08B21/24—Reminder alarms, e.g. anti-loss alarms
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16Y—INFORMATION AND COMMUNICATION TECHNOLOGY SPECIALLY ADAPTED FOR THE INTERNET OF THINGS [IoT]
- G16Y20/00—Information sensed or collected by the things
- G16Y20/20—Information sensed or collected by the things relating to the thing itself
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16Y—INFORMATION AND COMMUNICATION TECHNOLOGY SPECIALLY ADAPTED FOR THE INTERNET OF THINGS [IoT]
- G16Y20/00—Information sensed or collected by the things
- G16Y20/40—Information sensed or collected by the things relating to personal data, e.g. biometric data, records or preferences
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16Y—INFORMATION AND COMMUNICATION TECHNOLOGY SPECIALLY ADAPTED FOR THE INTERNET OF THINGS [IoT]
- G16Y40/00—IoT characterised by the purpose of the information processing
- G16Y40/20—Analytics; Diagnosis
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
- H04L67/12—Protocols specially adapted for proprietary or special-purpose networking environments, e.g. medical networks, sensor networks, networks in vehicles or remote metering networks
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16Y—INFORMATION AND COMMUNICATION TECHNOLOGY SPECIALLY ADAPTED FOR THE INTERNET OF THINGS [IoT]
- G16Y10/00—Economic sectors
- G16Y10/80—Homes; Buildings
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16Y—INFORMATION AND COMMUNICATION TECHNOLOGY SPECIALLY ADAPTED FOR THE INTERNET OF THINGS [IoT]
- G16Y40/00—IoT characterised by the purpose of the information processing
- G16Y40/10—Detection; Monitoring
Landscapes
- Engineering & Computer Science (AREA)
- Computing Systems (AREA)
- Health & Medical Sciences (AREA)
- General Health & Medical Sciences (AREA)
- Signal Processing (AREA)
- Computer Networks & Wireless Communication (AREA)
- Medical Informatics (AREA)
- Business, Economics & Management (AREA)
- Emergency Management (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Biomedical Technology (AREA)
- User Interface Of Digital Computer (AREA)
- Alarm Systems (AREA)
Abstract
提供了一种用于在物联网(IoT)环境中生成活动提醒的方法和电子设备。该方法包括识别用户朝向IoT环境中的对象的移动,基于一个或多个因素预测与对象相关联的用户的第一意图活动,在执行第一意图活动之前确定一个或多个中断的发生,在一个或多个中断发生之后并且在执行第一意图活动之前检测用户远离对象的移动,以及向用户生成活动提醒,指示当用户在预定时间段内不朝向对象移动时执行第一意图活动。
Description
技术领域
本公开涉及物联网(IoT)领域。更具体地,本公开涉及用于在IoT环境中生成活动提醒的方法和提醒生成IoT设备。
背景技术
物联网(IoT)是指经由互联网彼此连接的设备的网络。IoT环境包括多个对象,包括IoT设备、非IoT设备等。这些对象是用户的例程的一部分。用户使用对象来执行各种活动。例如,IoT环境是包括诸如智能电视(TV)、咖啡机、移动电话、熨斗(iron)等对象的智能家居。最可能的是,用户偶尔经历关于用户的意图活动(intended activity)的记忆丧失或概念,特别是当意图活动被另一重要或紧急活动中断时。例如,用户可能想要关闭熨斗。然而,用户可能被门铃的响铃打断。在这种情况下,用户可能错过执行意图活动,即关闭熨斗。这种活动轨迹的丧失可能导致日常生活中的主要问题。
发明内容
技术问题
存在一些用于提醒用户执行活动的相关技术的系统。相关技术的这些系统包括日历提醒系统、待办事项列表系统和其他监测系统。在相关技术的这些系统中,用户必须预先记录活动,诸如提供待办事项列表以获得执行活动的提醒。在相关技术的一些其他系统中,用户必须手动设置提醒以用于提醒执行某些活动。此外,这些提醒本质上不是动态的。另外,相关技术的系统限于IoT活动,并且不考虑非IoT活动。此外,在相关技术的系统中,活动的提醒限于预先记录的活动。这些系统不提醒用户执行除预先记录的活动之外的任何活动。
上述信息仅作为背景信息呈现,以帮助理解本公开。关于上述内容中的任何内容是否可适用于关于本公开的现有技术,没有做出确定,也没有做出断言。
问题的解决方案
本公开的各方面至少解决上述问题和/或缺点,并且至少提供下面描述的优点。因此,本公开的一方面是提供一种用于在IoT环境中生成活动提醒的方法和提醒生成IoT设备。
另外的方面将部分地在下面的描述中阐述,并且部分地将从描述中显而易见,或者可以通过实践所呈现的实施例来学习。
根据本公开的一个方面,提供了一种用于在物联网(IoT)环境中由电子设备生成活动提醒的方法。该方法包括识别用户朝向对象的移动,基于一个或多个因素预测与对象相关联的用户的第一意图活动,在执行与对象相关联的第一意图活动之前确定一个或多个中断的发生,在一个或多个中断发生之后并且在执行第一意图活动之前检测用户远离对象的移动,以及生成对用户的活动提醒,当用户在预定时间段内不朝向对象移动时,指示执行第一意图活动。
根据本公开的另一方面,提供了一种用于在IoT环境中生成活动提醒的电子设备。该电子设备包括一个或多个处理器和存储器。该一个或多个处理器被配置为识别用户朝向对象的移动,基于一个或多个因素预测与对象相关联的用户的第一意图活动,在执行与对象相关联的第一意图活动之前确定一个或多个中断的发生,在一个或多个中断发生之后并且在执行第一意图活动之前检测用户远离对象的移动,以及生成对用户的活动提醒。当用户在预定时间段内不朝向对象移动时,指示执行第一意图活动。
通过以下结合附图公开了本公开的各种实施例的详细描述,本公开的其他方面、优点和显著特征对于本领域技术人员将变得显而易见。
附图说明
通过以下结合附图的描述,本公开的某些实施例的上述和其他方面、特征和优点将更加明显,其中:
图1A和图1B示出了根据本公开的各种实施例的用于在物联网(IoT)环境中生成活动提醒的环境;
图2示出了根据本公开的实施例的用于在IoT环境中生成活动提醒的提醒生成IoT设备的示意图;
图3A、图3B和图3C示出了根据本公开的各种实施例的用于在IoT环境中生成活动提醒的图示;以及
图4示出了根据本公开的实施例的用于在IoT环境中生成活动提醒的方法步骤的流程图;
图5和图6示出了根据本公开的各种实施例的用于在IoT环境中生成活动提醒的图示;以及
图7示出了根据本公开的实施例的用于在IoT环境中生成活动提醒的通用计算系统的框图。
在所有附图中,相同的附图标记用于表示相同的元件。
具体实施方式
提供参考附图的以下描述以帮助全面理解由权利要求及其等同物限定的本公开的各种实施例。它包括各种具体细节以帮助理解,但这些细节应被视为仅仅是示例性的。因此,本领域普通技术人员将认识到,在不脱离本公开的范围和精神的情况下,可以对本文描述的各种实施例进行各种改变和修改。另外,为了清楚和简明,可以省略对公知功能和结构的描述。
在以下描述和权利要求中使用的术语和词语不限于书面含义,而是仅由发明人使用以使得能够清楚且一致地理解本公开。因此,对于本领域技术人员显而易见的是,提供本公开的各种实施例的以下描述仅用于说明目的,而不是出于限制由所附权利要求及其等同物限定的本公开的目的。
应当理解,单数形式“一”、“一个”和“该”包括复数指示物,除非上下文另有明确说明。因此,例如,对“组件表面”的引用包括对一个或多个这样的表面的引用。
在本公开内容中,词语“示例性”在本文中用于表示“用作示例、实例或说明”。本文中描述为“示例性”的主题的任何实施例或实施方式不必被解释为比其他实施例优选或有利。
虽然本公开易于进行各种修改和替代形式,但是已经通过附图中的示例示出了其具体实施例,并且将在下面详细描述。然而,应当理解,并不旨在将本公开限制于所公开的特定形式,而是相反,本公开将覆盖落入本公开范围内的所有修改、等同物和替代物。
术语“包括(comprise)”、“包括(comprising)”或其任何其他变型旨在涵盖非排他性的包含,使得包括一系列组件或步骤的设置、设备或方法不仅包括那些组件或步骤,而且可以包括未明确列出的或这种设置或设备或方法固有的其他组件或步骤。换句话说,在没有更多约束的情况下,系统或装置中由“包括……”开头的一个或更多个元件不排除系统或装置中存在其他元件或附加元件。
本公开的实施例涉及用于在物联网(IoT)环境中生成活动提醒的方法和提醒生成IoT设备。IoT环境可以包括多个对象。与IoT环境相关联的用户可能意图执行与对象相关联的活动。用户朝向对象的移动被识别。此外,与对象相关联的用户的意图活动被预测。考虑到在执行意图活动之前,用户可能会被中断。在这种情况下,确定发生一个或多个中断。用户可以完成被中断的活动,或者可以由于一个或多个中断的发生而使其不完整。在检测到用户在发生一个或多个中断之后远离对象移动的情况下,向用户生成活动提醒。当用户在预定时间段内不朝向对象移动时,生成用于执行意图活动的活动提醒。因此,本公开有助于提醒用户在IoT环境中执行意图活动。此外,这些提醒本质上是动态的。本公开避免了需要预先记录活动或手动设置提醒。此外,本公开考虑IoT活动和非IoT活动。此外,本公开考虑由IoT事件和非IoT事件引起的中断。
图1A示出了根据本公开的实施例的用于在IoT环境中生成活动提醒的环境。
参考图1A,环境100是IoT环境100。IoT环境100包括用户101、对象(1021、1022、……102N)(统称为多个对象102)、与多个对象102中的每一个对象相对应的超宽带(UWB)传感器(1031、1032、……103N)(统称为一个或多个UWB传感器103)。多个对象102中的任何对象可以被实现用于提醒生成。例如,参考图1A,对象1022被配置为提醒生成IoT设备1022。例如,对象可以是TV。多个对象可以包括IoT对象/设备或非IoT对象。例如,在任何智能家居IoT环境中,IoT设备可以包括智能电视(TV)、扬声器、移动电话、烤箱、冰箱等。非IoT对象可以包括煤气炉、熨斗、食品加工机等。在另一示例中,IoT环境100可以是智能办公室。IoT对象可以包括膝上型计算机、空调(AC)、移动电话等。非IoT对象可以包括舒适的椅子、文件柜等。用户101可以使用多个对象102来在IoT环境100中执行活动。例如,对象可以是TV。用户101可以执行观看电视的活动。在另一示例中,活动可以是将衣物装载到洗衣机中并打开洗衣机。IOT环境100可以包括执行相应活动的多个用户。图1A仅出于说明性目的示出了一个用户101,并且不应被认为是限制性的。
图1B示出了根据本公开的实施例的用于在IoT环境中生成活动提醒的环境。
参考图1B,在操作1,用户101朝向对象1021移动。考虑对象1021可以是AC。用户101可能被来自冰箱的嘟嘟声中断,指示冰箱的门是打开的。用户101可能忘记操作AC。在本公开中,提醒生成IoT设备1022向用户101生成指示操作AC的活动提醒。提醒生成IoT设备1022识别用户101朝向IoT环境100中的对象1021的移动。可以基于来自IoT环境100中的一个或UWB传感器103的数据识别用户101的移动。UWB是通过无线电波操作并且以非常高的频率操作的短距离无线通信协议。UWB传感器可以用于捕获高度准确的空间和方向数据。UWB传感器可以发现对象的位置并与对象通信。一个或多个UWB传感器可以与和用户101、对象1021、来自多个对象102的其他对象等相关联的设备相关联。此外,提醒生成IoT基于一个或多个因素预测与对象1021相关联的用户101的第一意图活动。例如,第一意图活动可以被预测为AC的改变设置。用户101可以在执行第一意图活动之前被中断。提醒生成IoT设备1022在执行与对象相关联的第一意图活动之前确定IoT环境100中的一个或多个中断的发生。例如,在操作2处,用户101被门铃的响铃中断。提醒生成IoT设备1022确定该中断的发生。用户101可以完成被中断的活动,或者可以由于中断的发生而使其不完整。在用户101在执行第一意图活动之前移动离开的情况下,提醒生成IoT设备1022检测用户101远离对象1021的移动。例如,在操作3处,用户101正在远离对象1021移动。在这种情况下,提醒生成IoT设备1022可以确定用户101是否在预定时间段内返回到对象1021。在用户101在预定时间段内没有返回到对象1021的情况下,提醒生成IoT设备1022可以向用户101生成活动提醒,当用户101在预定时间段内没有朝向对象1021移动时指示执行第一意图活动。例如,当用户101不朝向AC移动时,提醒生成IoT设备1022可以在15秒之后生成提醒。可以以文本、音频等的形式生成提醒。例如,可以生成提醒并将其显示为智能屏幕1023中的文本。
图2示出了根据本公开的实施例的用于在IoT环境中生成活动提醒的提醒生成IoT设备的示意图200。
参考图2,提醒生成IoT设备1022在以下描述中被称为提醒生成IoT设备201。提醒生成IoT设备201可以包括中央处理单元204(也称为“CPU”或“一个或多个处理器204”)、输入/输出(I/O)接口202、以及存储器203。在本公开的一些实施例中,存储器203可以通信地耦合到一个或多个处理器204。存储器203存储可由一个或多个处理器204执行的指令。一个或多个处理器204可以包括用于执行程序组件的至少一个数据处理器,该程序组件用于执行用户或系统生成的请求。存储器203可以通信地耦合到一个或多个处理器204。存储器203存储可由一个或多个处理器204执行的指令,该指令在执行时可以使一个或多个处理器204在IoT环境100中生成活动提醒。在本公开的实施例中,存储器203可以包括一个或多个模块206和数据205。一个或多个模块206可以被配置为使用数据205来执行本公开的步骤,以在IoT环境100中生成活动提醒。在本公开的实施例中,一个或多个模块206中的每一个可以是可以在存储器203外部并且与提醒生成IoT设备201耦合的硬件单元。如本文所使用的,术语模块206是指专用集成电路(ASIC)、电子电路、现场可编程门阵列(FPGA)、可编程片上系统(PSoC)、组合逻辑电路和/或提供描述的功能的其他合适的组件。当配置有本公开中定义的描述的功能时,一个或多个模块206将产生新颖的硬件。此外,I/O接口202与一个或多个处理器204耦合,通过该一个或多个处理器204传送输入信号或/和输出信号。例如,提醒生成IoT设备201可以经由I/O接口202向用户101发送生成的提醒。在本公开的实施例中,提醒生成IoT设备201可以是IoT环境100的IoT设备。例如,提醒生成IoT设备201可以是计算机、TV等。在本公开的另一实施例中,提醒生成IoT设备201可以在各种计算系统中实现,诸如膝上型计算机、台式计算机、个人计算机(PC)、笔记本、智能电话、平板、电子书阅读器、服务器、网络服务器、基于云的服务器等。在本公开的另一实施例中,提醒生成IoT设备201可以远离IoT环境100移动,并且通过通信网络与IoT环境100中的多个对象102、用户101等通信。提醒生成IoT设备201可以在云环境中实现。
在一个实施方式中,模块206可以包括例如移动识别模块213、活动预测模块214、中断检测模块215、移动变化检测模块216、提醒生成模块217和其他模块218。应当理解,这样的前述模块206可以表示为单个模块或不同模块的组合。在一个实施方式中,数据205可以包括例如移动识别数据207、活动预测数据208、中断数据209、移动变化检测数据210、提醒生成数据211和其他数据212。
在本公开的实施例中,移动识别模块213可以被配置为识别用户101朝向IoT环境100中的对象1021的移动。首先,移动识别模块213可以被配置为检测用户101。可以使用与用户101、对象1021、来自多个对象102的其他对象等相关联的UWB传感器来检测用户101。例如,与用户101相关联的UWB传感器可以发送无线电信号。无线电信号可以发送与用户101相关联的唯一识别(ID)。在另一示例中,可以从对象1021向用户101发送无线电信号。在对象1021处反射的无线电信号可以用于检测用户101。本领域技术人员将理解,可以使用除了上述方法之外的任何已知方法来检测用户101。此外,移动识别模块213可以被配置为识别用户101朝向IoT环境100中的对象1021的移动。对象1021可以是IoT设备(诸如智能TV)或非IoT设备(诸如熨斗)。可以基于来自IoT环境100中的一个或多个UWB传感器103的数据识别用户101朝向对象1021的移动。来自一个或多个UWB传感器103的数据可以包括用户101与对象1021之间的距离、与从与用户(101)、对象和其他对象相关联的设备反射的信号相关联的信号功率、信号的到达角度、信号的到达时间差等。
图3A、图3B和图3C示出了根据本公开的各种实施例的用于在IoT环境中生成活动提醒的图示。
参考图3A的示例300,在操作1处,用户101正朝向温度自动调节器(thermostat)301移动。温度自动调节器可以与UWB传感器相关联。可以从UWB传感器向用户101发送信号。从用户101反射的信号与信号功率相关联。在本公开的实施例中,反射信号中的异常值和干扰可以被归一化以避免不正确的用户移动识别。当用户101朝向温度自动调节器301移动时,信号功率可以增加。此外,当用户101朝向温度自动调节器301移动时,用户101和对象1021之间的距离可以连续减小。因此,移动识别模块213可以基于来自一个或多个UWB传感器103的数据来识别用户101朝向温度自动调节器301的移动。
在本公开的另一实施例中,移动识别模块213可以基于对象地图识别用户101的移动。对象地图可以指示多个对象102在IoT环境100中的位置。
参考图3B,其示出了对象地图304。对象地图指示多个对象102(诸如沙发、温度自动调节器、AC、TV等)在IOT环境100中的位置。由于多个对象102的位置可以在一段时间内改变,因此可以以预定义的时间间隔动态地更新对象地图。可以基于来自一个或多个UWB传感器103的数据、来自图像捕获单元(诸如IoT相机)的数据等来更新对象地图。在示例中,温度自动调节器301可以不与UWB传感器相关联。
参考图3C,移动识别模块213可以从与AC相关联的UWB传感器接收数据,如图3C所示。从与AC相关联的UWB传感器接收的信号可以具有低信号功率,并且AC与用户101之间的距离可以增加。此外,还可以接收来自与其他对象(诸如TV、智能门铃等)相关联的UWB传感器的数据。可以合并来自多个对象的数据。移动识别模块213可以基于对象地图305和来自多个对象的合并数据识别用户101朝向温度自动调节器301的移动。此外,可以将与用户101的移动的识别、对象地图305和合并数据相关的数据提供给神经网络。例如,神经网络可以是深度学习长短期记忆(LSTM)网络。神经网络可以预测朝向1021的用户移动。移动识别模块213可以从神经网络接收与预测相关的数据,并且可以识别用户101的移动。与移动的识别相关的数据和对象地图305可以作为移动识别数据207存储在存储器203中。
在本公开的实施例中,活动预测模块214可以被配置为从移动识别模块213接收移动识别数据207。活动预测模块214可以被配置为预测与IoT环境100中的对象1021相关联的用户101的第一意图活动。第一意图活动可以基于一个或多个因素由活动预测模型预测。活动预测模型可以与活动预测模块214相关联。活动预测模型可以是神经网络(在段落24中陈述)或任何其他神经网络。例如,活动预测模型可以是基于强化学习(RL)的深度学习模型。本领域技术人员将理解,除了上述神经网络之外的任何已知的神经网络可以用于基于一个或多个因素预测用户101的第一意图活动。一个或多个因素可以包括用户101与对象1021的过去交互、对象1021的当前状态等。活动预测模型可以基于用户101的过去交互来随时间学习用户活动模式。例如,当识别出用户101朝向AC的移动时,活动预测模型可以预测用户正在控制AC温度。活动预测模型可以基于对象1021的当前状态预测第一意图活动。例如,当用户101醒来时,AC可以处于开启状态。用户可以朝向AC移动。活动预测模型可以基于当关闭AC时用户101的交互预测第一意图活动。再次参考图3A的示例300,活动预测模块214可以将第一意图活动预测为调整温度自动调节器301中的温度。预测的第一意图活动可以作为活动预测数据208存储在存储器203中。
在本公开的实施例中,中断检测模块215可以被配置为从活动预测模块214接收活动预测数据208。中断检测模块215可以被配置为在执行与对象相关联的第一意图活动之前确定IoT环境100中的一个或多个中断的发生。一个或多个中断中的每一个可以由IoT事件或非IoT事件引起。中断检测模块215可以基于两个条件确定一个或多个中断的发生。首先,中断检测模块215可以基于与IoT环境100中的多个对象102相关联的一个或多个参数来确定中断的发生。一个或多个参数可以包括但不限于状态参数、音频参数、视频参数等。例如,当人在智能家居中的门处时,智能门铃的状态可以从关闭状态改变为开启状态。当用户101意图执行关闭TV的第一意图活动时,智能门铃的响铃可能导致中断。该中断是由IoT事件引起的,因为中断是由作为IoT设备的智能门铃引起的。其次,中断检测模块215可以在执行第一意图活动之前确定用户101远离对象1021的方向的改变。当满足两个条件时,中断检测模块215确定一个或多个中断的发生。在上述示例中,用户101可以远离TV移动并关注该人。中断检测模块215可以基于智能门铃的状态和用户101远离TV的方向的改变来确定一个或多个中断的发生。在本公开的另一实施例中,考虑用户101可能不会立即关注该人。相反,用户101可以关闭TV并且然后关注该人。中断检测模块215可以确定用户101的方向的改变不是突然的,并且反应时间大于预定义值(例如,5秒)。在这种情况下,中断检测模块215可以确定IoT事件不是中断。在另一个示例中,玻璃杯可能从桌子上掉落并破裂。桌子附近的扬声器可以捕获来自玻璃杯破裂的声音。当用户101意图执行第一意图活动时,玻璃杯的破裂可能导致中断。中断检测模块215可以确定用户101的方向的改变。中断检测模块215可以基于与玻璃杯的破裂和用户101的方向的改变相关联的音频参数确定中断的发生。该中断是由非IoT事件引起的。再次参考图3A的示例300,在操作2,微波炉302可以提供食品被加热的通知。中断检测模块215可以基于与微波炉302相关联的完成状态和用户101的方向的改变来确定中断的发生。在示例中,用户101的第一意图活动可以是关闭TV。第一中断可以由玻璃杯的破裂引起。第二中断可以由孩子的哭泣引起。第一中断和第二中断可以同时发生。中断检测模块215可以确定与打破玻璃杯和孩子的哭泣相关联的音频参数。此外,中断检测模块215可以基于用户101的方向的改变确定一个或多个中断的发生。在另一示例中,第一中断可以是来自洗衣机的指示衣物洗涤完成的通知。第二中断可以是智能门铃的响铃。中断检测模块215可以确定洗衣机和智能门铃的状态以确定一个或多个中断的发生。考虑到用户101可能不会立即朝向洗衣机移动以关闭洗衣机,而是用户101可以朝向门移动以在门处关注人。中断检测模块215可以确定用户101的方向的改变并且确定中断(即,第二中断)的发生。与确定一个或多个中断的发生有关的数据可以作为中断数据209存储在存储器203中。
在本公开的实施例中,移动变化检测模块216可以从中断检测模块215接收中断数据209。移动变化检测模块216可以被配置为在发生一个或多个中断之后并且在执行第一意图活动之前检测用户101远离对象1021的移动。可以使用来自IOT环境100中的一个或多个UWB传感器103的数据来检测用户101远离对象1021的移动。参考图3A的示例300,可以基于来自与温度自动调节器301相关联的UWB传感器的数据确定用户101远离温度自动调节器301移动。来自UWB传感器的数据可以包括温度自动调节器301与用户101的距离、与从用户101反射的信号相关联的信号功率等。当用户101正在远离温度自动调节器移动时,温度自动调节器301与用户101的距离可以连续地增加,并且信号功率可以连续地减小。此外,通过预测用户101尚未完成第一意图活动来确定在执行第一意图活动之前用户101远离对象1021的移动。预测可以由神经网络执行。预测可以基于用户101和对象之间的距离、用户101在远离对象移动之前在对象1021附近花费的时间、对象1021的当前状态以及从一个或多个源获得的与第一意图活动的完成相关的数据。再次参考图3A的示例300,神经网络可以基于确定温度自动调节器的状态或温度自动调节器上的设置未改变来预测用户101尚未操作温度自动调节器301。此外,当温度自动调节器301和用户101之间的距离大时,即,用户101尚未到达温度自动调节器301时,神经网络可以预测用户101已经远离温度自动调节器301移动。在另一示例中,用户101可能正在靠近洗衣袋移动以将衣物装载到洗衣机中。用户101可能被打断并离开洗衣袋。神经网络可以预测用户101在洗衣袋附近花费更少的时间(例如,1或2秒)并且远离洗衣袋移动。此外,神经网络可以从一个或多个源(诸如IoT相机、安装在真空吸尘器上的机器人相机等)获得与第一意图活动的完成相关的数据。神经网络可以基于来自一个或多个源的图像或视频来确定洗衣袋已满,并且衣物未被装载到洗衣机中。与移动变化相关的数据可以作为移动变化检测数据210存储在存储器203中。
在本公开的实施例中,提醒生成模块217可以被配置为从移动变化检测模块216接收移动变化检测数据210。提醒生成模块217可以被配置为向用户101生成活动提醒,指示当用户101在预定时间段内不朝向对象1021移动时执行第一意图活动。在本公开的实施例中,预定时间段可以是10秒,提醒生成模块217可以在接收到移动变化检测数据210之后监测用户101的移动。提醒生成模块217可以基于来自一个或多个UWB传感器103的数据监测移动。提醒生成模块217可以确定用户101在预定时间段内没有朝向对象1021移动。此外,提醒生成模块217可以基于移动变化检测数据210中的与预测相关的数据确定第一意图活动是否完成。提醒生成模块217可以向用户101生成指示执行第一意图活动的活动提醒。提醒生成模块217可以在用户101的附近对象上生成对用户101的活动提醒。可以基于来自一个或多个UWB传感器103的数据和对象地图中的至少一个识别附近对象。附近对象可以是IoT设备。提醒生成模块217可以进一步基于附近对象的一个或多个能力识别附近对象。附近对象的一个或多个能力可以包括音频能力、显示能力等。参考图3A中的示例300,提醒生成模块217可以确定用户101在预定时间段内没有朝向温度自动调节器301移动。此后,提醒生成模块217可以基于来自与冰箱303和食品加工机相关联的UWB传感器的数据或来自对象地图的数据来确定附近对象,例如冰箱303和食品加工机(图3A中未示出)。此外,提醒生成模块217可以确定冰箱303和食品加工机的能力。提醒生成模块217可以确定冰箱303包括显示能力。因此,提醒生成模块217可以在与冰箱303相关联的屏幕上显示活动提醒。活动提醒可以是文本、音频等的形式。图3A示出了显示为文本“你错过了在温度自动调节器中调节温度吗?”的活动提醒。此外,提醒生成模块217可以显示选项,诸如“是的,控制”、“不理会(dismiss)”等。生成的活动提醒可以作为提醒生成数据211存储在存储器203中。例如,提醒生成数据211可以维持由用户101提供的生成的活动提醒和预定义的活动提醒的列表,提醒生成模块217可以使用该列表来生成活动提醒。
其他数据205可以存储由用于执行提醒生成IoT设备201的各种功能的一个或多个模块206生成的数据,包括临时数据和临时文件。一个或多个模块206还可以包括用于执行提醒生成IoT设备201的各种杂项功能的其他模块206。其他数据205可以存储在存储器203中。应当理解,一个或多个模块206可以表示为单个模块或不同模块的组合。
图4示出了根据本公开的实施例的用于在IoT环境中生成活动提醒的方法步骤的流程图。
参考图4,方法400可以包括一个或多个步骤。可以在计算机可执行指令的一般上下文中描述方法400。通常,计算机可执行指令可以包括执行特定功能或实现特定抽象数据类型的例程、程序、对象、组件、数据结构、过程、模块和功能。
描述方法400的顺序不旨在被解释为限制,并且可以以任何顺序组合任何数量的所描述的方法框以实现该方法。另外,在不脱离本文描述的主题的范围的情况下,可以从方法中删除各个框。此外,该方法可以以任何合适的硬件、软件、固件或其组合来实现。
图5和图6示出了根据本公开的各种实施例的用于在IoT环境中生成活动提醒的图示。
参考图5和图6,在操作401处,提醒生成IoT设备201识别用户101朝向IoT环境100中的对象1021的移动。提醒生成IoT设备201可以被配置为基于来自一个或多个UWB传感器103的数据检测用户101。此外,提醒生成IoT设备201可以识别用户101朝向IoT环境100中的对象1021的移动。可以基于来自IoT环境100中的一个或多个UWB传感器103的数据识别用户101朝向对象1021的移动。提醒生成IoT设备201可以进一步基于对象地图识别用户101的移动。此外,可以将与用户101的移动的识别相关的数据、对象地图304和来自一个或多个UWB传感器103的数据提供给神经网络。参考图5的示例500,在操作1处,用户101朝向煤气炉501移动。煤气炉501和用户101可以不与UWB传感器相关联。提醒生成IoT设备201可以基于来自与多个对象102中的其他对象相关联的一个或多个UWB传感器103的数据和对象地图识别用户101朝向煤气炉501的移动。参考图6,示出了与智能家居中的厨房相关联的对象地图600。对象地图示出了多个对象102(诸如煤气炉501、食品加工机、冰箱、烤箱、智能咖啡机等)的位置。智能咖啡机、烤箱和冰箱可以与一个或多个UWB传感器103相关联。来自与烤箱相关联的UWB传感器的数据可以指示用户101正在远离烤箱移动。类似地,来自与智能咖啡机和冰箱相关联的UWB传感器的数据可以指示用户101正在远离智能咖啡机和冰箱移动。此外,用户101可以朝向煤气炉501或食品加工机移动。来自与冰箱相关联的UWB传感器的数据可以指示用户101没有朝向食品加工机移动。提醒生成IoT设备201可以基于来自一个或多个UWB传感器103的数据和对象地图来识别用户101正在朝向煤气炉501移动。
返回参考图4,在操作402处,提醒生成IoT设备201基于一个或多个因素来预测与IoT环境100中的对象1021相关联的用户101的第一意图活动。提醒生成IoT设备201可以被配置为预测与IoT环境100中的对象1021相关联的用户101的第一意图活动。第一意图活动可以基于一个或多个因素由活动预测模型预测。活动预测模型可以与提醒生成IoT设备201相关联。一个或多个因素可以包括用户101与对象1021的过去交互、对象1021的当前状态等。再次参考图5的示例500,提醒生成IoT设备201可以从IoT相机接收图像。提醒生成IoT设备201可以从图像确定煤气炉501开启。提醒生成IoT设备201基于用户101的过去交互确定第一意图活动是关闭煤气炉501。
在操作403,提醒生成IoT设备201可以被配置为在执行与对象相关联的第一意图活动之前确定IoT环境100中的一个或多个中断的发生。提醒生成IoT设备201可以基于与IoT环境100中的多个对象102相关联的一个或多个参数确定一个或多个中断的发生。此外,提醒生成IoT设备201可以基于在执行第一意图活动之前用户101远离对象1021的方向的改变确定一个或多个中断的发生。当满足这两个条件时,提醒生成IoT设备201确定一个或多个中断的发生。再次参考图5的示例500,孩子502可以呼叫他的母亲(用户101)。孩子附近的智能扬声器503可以捕获声音并将与声音成比例的输出发送到提醒生成IoT设备201。提醒生成IoT设备201可以确定用户101的方向的改变。提醒生成IoT设备201可以基于来自扬声器的输出和用户101的方向的改变确定一个或多个中断的发生。
返回参考图4,在操作404处,提醒生成IoT设备201可以被配置为在发生一个或多个中断之后并且在执行第一意图活动之前检测用户101远离对象1021的移动。可以使用来自IOT环境100中的一个或多个UWB传感器103的数据来检测用户101远离对象1021的移动。此外,通过预测用户101尚未完成第一意图活动来确定在执行第一意图活动之前用户101远离对象1021的移动。预测可以由神经网络执行。预测可以基于用户101和对象之间的距离、用户101在远离对象之前在对象1021附近花费的时间、对象1021的当前状态以及从一个或多个源获得的与第一意图活动的完成相关的数据。再次参考图5的示例500,提醒生成IoT设备201可以基于来自与其他对象相关联的一个或多个UWB传感器的数据确定用户101远离煤气炉501的移动。此外,当煤气炉501和用户101之间的距离较大时,即,用户101尚未到达煤气炉501时,神经网络可以预测用户101已经远离煤气炉501。此外,神经网络可以基于来自一个或多个源的图像或视频确定煤气炉处于开启状态。
返回参考图4,在操作405处,提醒生成IoT设备201可以向用户101生成活动提醒,指示当用户101在预定时间段内不朝向对象1021移动时执行第一意图活动。提醒生成IoT设备201可以在预定时间段内监测用户101的移动。提醒生成IoT设备201可以确定用户101在预定时间段内没有朝向对象1021移动。此外,提醒生成IoT设备201可以基于与第一意图活动的完成的预测相关的数据确定第一意图活动是否完成。提醒生成IoT设备201可以向用户101生成指示执行第一意图活动的活动提醒。提醒生成IoT设备201可以在用户101的附近对象上生成对用户101的活动提醒。可以基于来自一个或多个UWB传感器103的数据和对象地图中的至少一个来识别附近对象。提醒生成IoT设备201可以进一步基于附近对象的一个或多个能力识别附近对象。参考图5中的示例500,提醒生成IoT设备201可以确定用户101在预定时间段内没有朝向煤气炉501移动。提醒生成IoT设备201可以将附近对象确定为智能扬声器503。提醒生成IoT设备201可以确定智能扬声器503具有音频能力。智能扬声器503可以将活动提醒的音频发送为“煤气炉开启。你错过操作煤气炉了吗?”。
计算机系统
图7示出了根据本公开的实施例的计算机系统的框图。
参考图7,在本公开的实施例中,计算机系统700可以是提醒生成IoT设备201。因此,计算机系统700可以用于在IoT环境100中生成活动提醒。计算机系统700可以包括中央处理单元702(也称为“CPU”或“处理器”)。处理器702可以包括至少一个数据处理器。处理器702可以包括专用处理单元,诸如集成系统(总线)控制器、存储器管理控制单元、浮点单元、图形处理单元、数字信号处理单元等。
处理器702可以被布置为经由I/O接口701与一个或多个输入/输出(I/O)设备(未示出)通信。I/O接口701可以采用通信协议/方法,诸如但不限于音频、模拟、数字、单声道、RCA、立体声、电气和电子工程师协会(IEEE)-1394、串行总线、通用串行总线(USB)、红外、PS/2、BNC、同轴、组件、复合、数字显觉接口(DVI)、高清多媒体接口(HDMI)、射频(RF)天线、S-Video(S-视频)、视频图形阵列(VGA)、IEEE 802.n/b/g/n/x、蓝牙、蜂窝(例如,码分多址(CDMA)、高速分组接入(HSPA+)、全球移动通信系统(GSM)、长期演进(LTE)、全球微波接入互操作性(WiMax)等)等。
使用I/O接口701,计算机系统700可以与一个或多个I/O设备通信。例如,输入设备710可以是天线、键盘、鼠标、操纵杆、(红外)遥控器、相机、读卡器、传真机、保护锁、生物特征读取器、麦克风、触摸屏、触摸板、轨迹球、触控笔、扫描仪、存储设备、收发器、视频设备/源等。输出设备711可以是打印机、传真机、视频显示器(例如,阴极射线管(CRT)、液晶显示器(LCD)、发光二极管(LED)、等离子体、等离子体显示面板(PDP)、有机发光二极管显示器(OLED)等)、音频扬声器等。
计算机系统700可以通过通信网络709与一个或多个接收器712通信。处理器702可以被布置为经由网络接口703与通信网络709通信。网络接口703可以与通信网络709通信。网络接口703可以采用连接协议,包括但不限于直接连接、以太网(例如,双绞线10/100/1000Base(基频)T)、传输控制协议/互联网协议(TCP/IP)、令牌环(token ring)、IEEE802.11a/b/g/n/x等。通信网络709可以包括但不限于直接互连、局域网(LAN)、广域网(WAN)、无线网络(例如,使用无线应用协议)、互联网等。网络接口703可以采用连接协议,包括但不限于直接连接、以太网(例如,双绞线10/100/1000Base T)、传输控制协议/互联网协议(TCP/IP)、令牌环、IEEE 802.11a/b/g/n/x等。
通信网络709包括但不限于直接互连、电商网络、对等(P2P)网络、局域网(LAN)、广域网(WAN)、无线网络(例如,使用无线应用协议)、互联网、Wi-Fi等。第一网络和第二网络可以是专用网络或共享网络,其表示使用各种协议(例如,超文本传输协议(HTTP)、传输控制协议/互联网协议(TCP/IP)、无线应用协议(WAP)等)来彼此通信的不同类型的网络的关联。此外,第一网络和第二网络可以包括各种网络设备,包括路由器、网桥、服务器、计算设备、存储设备等。
在本公开的一些实施例中,处理器702可以被布置为经由存储接口704与存储器705(例如,图7中未示出的随机存取存储器(RAM)、只读存储器(ROM)等)通信。存储接口704可以连接到存储器705,存储器705包括但不限于存储器驱动器、可移动磁盘驱动器等,其采用连接协议,诸如串行高级技术附件(SATA)、集成驱动电子器件(IDE)、IEEE-1394、通用串行总线(USB)、光纤通道、小型计算机系统接口(SCSI)等。存储器驱动器还可以包括磁鼓(drum)、磁盘驱动器、磁光驱动器、光驱动器、独立盘冗余阵列(RAID)、固态存储器设备、固态驱动器等。
存储器705可以存储程序或数据库组件的集合,包括但不限于用户接口706、操作系统707、web浏览器708等。在本公开的一些实施例中,计算机系统700可以存储用户/应用数据,诸如数据、变量、记录等,如本公开中所描述的。这样的数据库可以被实现为容错的、关系的、可扩展的、安全的数据库,诸如或/>
操作系统707可以促进计算机系统700的资源管理和操作。操作系统的示例包括但不限于APPLE MACINTOSHR OS X、UNIXR、类UNIX系统分发(例如,BERKELEY SOFTWAREDISTRIBUTIONTM(BSD)、FREEBSDTM、NETBSDTM、OPENBSDTM等)、LINUX DISTRIBUTIONSTM(例如,RED HATTM、UBUNTUTM、KUBUNTUTM等)、IBMTM OS/2、MICROSOFTTM WINDOWSTM(XPTM、VISTATM/7/8,10等)、APPLER IOSTM、GOOGLER ANDROIDTM、BLACKBERRYR OS等。
在本公开的一些实施例中,计算机系统700可以实现web浏览器708存储的程序组件。网络浏览器708可以是超文本查看应用,例如MICROSOFTR INTERNET EXPLORERTM、GOOGLER CHROMETM0、MOZILLAR FIREFOXTM、APPLER SAFARITM等。可以使用安全超文本传输协议(HTTPS)、安全套接字层(SSL)、传输层安全(TLS)等来提供安全web浏览。网络浏览器708可以利用诸如AJAXTM、DHTMLTM、ADOBER FLASHTM、JAVASCRIPTTM、JAVATM、应用编程接口(API)等的设施。在本公开的一些实施例中,计算机系统700可以实现邮件服务器(图中未示出)存储的程序组件。邮件服务器可以是因特网邮件服务器,例如Microsoft exchange(微软交换)等。邮件服务器可以利用诸如ASPTM、ACTIVEXTM、ANSITM C++/C#、MICROSOFTR、NETTM、CGISCRIPTSTM、JAVATM、JAVASCRIPTTM、PERLTM、PHPTM、PYTHONTM、WEBOBJECTSTM等设施。邮件服务器可以利用通信协议,诸如互联网消息访问协议(IMAP)、消息传送应用编程接口(MAPI)、MICROSOFTR交换、邮局协议(POP)、简单邮件传输协议(SMTP)等。在本公开的一些实施例中,计算机系统700可以实现邮件客户端存储的程序组件。邮件客户端(图中未示出)可以是邮件查看应用,诸如APPLER MAILTM、MICROSOFTR ENTOURAGETM、MICROSOFTR OUTLOOKTM、MOZILLAR THUNDERBIRDTM等。
此外,一个或多个计算机可读存储介质可以用于实现与本公开一致的实施例。计算机可读存储介质是指其上可以存储处理器可读的信息或数据的任何类型的物理存储器。因此,计算机可读存储介质可以存储用于由一个或多个处理器执行的指令,包括用于使处理器执行与本文描述的实施例一致的步骤或阶段的指令。术语“计算机可读介质”应当被理解为包括有形条目并且排除载波和瞬态信号,即,是非暂时性的。示例包括随机存取存储器(RAM)、只读存储器(ROM)、易失性存储器、非易失性存储器、硬盘驱动器、光盘只读存储器(CD ROM)数字视频光盘(DVD)、闪存驱动器、磁盘和任何其他已知的物理存储介质。
本公开的实施例提供了通过考虑基于会话的消息传送服务和非基于会话的消息传送服务的限制来选择消息传送服务的方法。此外,考虑与发送器、一个或多个接收器、触发消息和通信网络相关的各种参数来选择消息传送服务。因此,选择适当的消息传送服务用于在发送器和一个或多个接收器之间传送一个或多个消息。
此外,通过基于参数选择非基于会话的消息服务,避免了基于会话的消息服务的限制,诸如网络流量、延迟和开销。因此,网络被有效地利用。
此外,只有在需要时才建立会话。因此,网络资源被有效地利用。本公开基于使用模式在发起来自发送方的消息之前建立会话。因此,减少了建立会话的延迟。此外,还改善了用户体验。
本公开提供了提醒用户在IoT环境中执行意图活动的方法。此外,这些提醒本质上是动态的。本公开避免了预先记录活动或手动设置提醒的需要。此外,本公开考虑IoT活动和非IoT活动。此外,本公开考虑由IoT事件和非IoT事件引起的中断。
除非另有明确说明,否则术语“一实施例”、“实施例”、“多个实施例”、“该实施例”、“该多个实施例”、“一个或多个实施例”、“一些实施例”和“一个实施例”意指“本公开的一个或多个(但不是全部)实施例”。
除非另有明确说明,否则术语“包括”、“包含”、“具有”及其变体意指“包括但不限于”。
除非另有明确说明,否则列举的项目列表并不意味着任何或所有项目是相互排斥的。除非另有明确说明,否则术语“一”、“一个”和“该”意指“一个或多个”。
对具有彼此通信的若干组件的实施例的描述并不意味着需要所有这样的组件。相反,描述了各种可选部件以说明本公开的各种可能的实施例。
当本文描述单个设备或物品时,将显而易见的是,可以使用多于一个设备/物品(无论它们是否协作)来代替单个设备/物品。类似地,在本文中描述多于一个设备或物品(无论它们是否协作)的情况下,将显而易见的是,可以使用单个设备/物品来代替多于一个设备或物品,或者可以使用不同数量的设备/物品来代替所示数量的设备或程序。设备的功能和/或特征可以替代地由未明确描述为具有这样的功能/特征的一个或多个其他设备来体现。因此,本公开的其他实施例不需要包括设备本身。
图4所示的操作示出了以特定顺序发生的某些事件。在本公开的替代实施例中,某些操作可以以不同的顺序执行、修改或移除。此外,可以将步骤添加到上述逻辑,并且仍然符合所描述的实施例。此外,本文描述的操作可以顺序地发生,或者某些操作可以并行地处理。此外,操作可以由单个处理单元或由分布式处理单元执行。
最后,说明书中使用的语言主要是出于可读性和指导目的而选择的,并且可能没有被选择来描绘或限制本发明的主题。因此,旨在本公开的范围不受该详细描述的限制,而是受基于此的申请发布的任何权利要求的限制。因此,本公开的实施例的公开内容旨在说明而非限制本公开的范围,本公开的范围在所附权利要求中阐述。
虽然已经参考本公开的各种实施例示出和描述了本公开,但是本领域技术人员将理解,在不脱离由所附权利要求及其等同物限定的本公开的精神和范围的情况下,可以在其中进行形式和细节上的各种改变。
Claims (15)
1.一种用于在物联网(IoT)环境中由电子设备生成活动提醒的方法,所述方法包括:
识别用户朝向对象的移动;
基于一个或多个因素预测与对象相关联的用户的第一意图活动;
在执行与对象相关联的第一意图活动之前确定一个或多个中断的发生;
在发生所述一个或多个中断之后并且在执行第一意图活动之前,检测用户远离对象的移动;以及
向用户生成活动提醒,所述活动提醒指示当用户在预定时间段内不朝向对象移动时执行第一意图活动。
2.根据权利要求1所述的方法,其中,用户朝向对象的移动基于来自IoT环境中的一个或多个超宽带(UWB)传感器的数据被识别。
3.根据权利要求1所述的方法,其中,对象是物联网设备和非物联网设备中的一个。
4.根据权利要求2所述的方法,其中,所述一个或多个UWB传感器与以下各项中的至少一项相关联:与用户相关联的设备、IoT环境中的多个对象中的对象和来自所述多个对象的其他对象。
5.根据权利要求2所述的方法,其中,来自所述一个或多个UWB传感器的数据包括用户和对象之间的距离、与从与用户相关联的设备、对象和来自多个对象的其他对象中的一个反射的信号相关联的信号功率、信号的到达角度和信号的到达时间差中的至少一个。
6.根据权利要求2所述的方法,
其中,用户的移动的识别还基于指示IoT环境中的多个对象的位置的对象地图,以及
其中,对象地图以预定义的时间间隔动态地被更新。
7.根据权利要求1所述的方法,
其中,与对象相关联的第一意图活动由活动预测模型基于所述一个或多个因素预测,以及
其中,所述一个或多个因素包括用户与对象的过去交互和对象的当前状态中的至少一个。
8.根据权利要求1所述的方法,其中,所述一个或多个中断中的每一个中断由IoT环境中的IoT事件和非IoT事件中的至少一个引起。
9.根据权利要求1所述的方法,其中,所述一个或多个中断的发生基于以下被确定:
与IoT环境中的多个对象相关联的一个或多个参数;以及
在执行第一意图活动之前用户远离对象的方向的改变。
10.根据权利要求9所述的方法,其中,所述一个或多个参数包括状态参数、音频参数和视频参数中的至少一个。
11.根据权利要求2所述的方法,其中,用户远离对象的移动是使用来自IOT环境中的所述一个或多个UWB传感器的数据检测的。
12.根据权利要求11所述的方法,其中,在执行第一意图活动之前用户远离对象的移动通过以下被确定:
基于用户与对象之间的距离、用户在远离对象移动之前在对象附近花费的时间、对象的当前状态和从一个或多个源获得的与第一意图活动的完成相关的数据中的至少一个,预测用户尚未完成第一意图活动。
13.根据权利要求2所述的方法,
其中,活动提醒在用户的附近对象上被生成,所述活动提醒基于来自所述一个或多个UWB传感器的数据和对象地图中的至少一个被识别,以及
其中,附近对象是IoT设备。
14.根据权利要求13所述的方法,其中,识别附近对象还基于附近对象的一个或多个能力。
15.一种用于在物联网(IoT)环境中生成活动提醒的电子设备,所述电子设备包括:
一个或多个处理器;和
存储器,
其中,存储器存储处理器可执行指令,所述处理器可执行指令在执行时使得所述一个或多个处理器执行根据权利要求1至14中的一项所述的方法。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
IN202141051415 | 2021-11-10 | ||
IN202141051415 | 2021-11-10 | ||
PCT/KR2022/007974 WO2023085543A1 (en) | 2021-11-10 | 2022-06-07 | Method and electronic device for generating activity reminder in iot environment |
Publications (1)
Publication Number | Publication Date |
---|---|
CN118235175A true CN118235175A (zh) | 2024-06-21 |
Family
ID=86230072
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202280075142.7A Pending CN118235175A (zh) | 2021-11-10 | 2022-06-07 | 用于在物联网环境中生成活动提醒的方法和电子设备 |
Country Status (3)
Country | Link |
---|---|
US (1) | US20230141300A1 (zh) |
EP (1) | EP4374347A1 (zh) |
CN (1) | CN118235175A (zh) |
Family Cites Families (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR102361814B1 (ko) * | 2015-04-10 | 2022-02-11 | 삼성전자주식회사 | 전자 장치 및 전자 장치에서 자외선 회피 정보 제공 방법 |
EP3264801B1 (en) * | 2016-06-30 | 2019-10-02 | Nokia Technologies Oy | Providing audio signals in a virtual environment |
US20180108243A1 (en) * | 2016-10-18 | 2018-04-19 | Austin Scherer | Proximity-based reminder system and application |
US10614697B2 (en) * | 2017-09-16 | 2020-04-07 | Zomio Inc. | Life detection and preservation sensor |
US10616726B1 (en) * | 2018-02-22 | 2020-04-07 | Amazon Technologies, Inc. | Outputing notifications using device groups |
US10645534B1 (en) * | 2019-02-01 | 2020-05-05 | Tile, Inc. | User presence-enabled tracking device functionality |
WO2022145738A1 (en) * | 2020-12-28 | 2022-07-07 | Samsung Electronics Co., Ltd. | Intelligent object tracing system utilizing 3d map reconstruction for virtual assistance |
-
2022
- 2022-06-07 CN CN202280075142.7A patent/CN118235175A/zh active Pending
- 2022-06-07 EP EP22892966.7A patent/EP4374347A1/en active Pending
- 2022-11-01 US US17/978,517 patent/US20230141300A1/en active Pending
Also Published As
Publication number | Publication date |
---|---|
EP4374347A1 (en) | 2024-05-29 |
US20230141300A1 (en) | 2023-05-11 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10809902B2 (en) | User terminal apparatus and control method thereof | |
US11929941B2 (en) | Method and system for managing a decentralized access to a resource in a peer-to-peer mesh overlay network | |
CN108024303B (zh) | 多跳无线传感器网络内节点选择方法和系统 | |
EP3211836B1 (en) | Cooking state alerting method and apparatus, computer program and recording medium | |
CN108270611B (zh) | 用于建立与电子设备的安全接入连接的方法和系统 | |
US20180367624A1 (en) | Tru torrent platform methods, apparatuses and media | |
AU2021332794B2 (en) | Method and apparatus for displaying friend activity information, electronic device, and storage medium | |
KR20160077975A (ko) | 데이터 공유 방법 및 그 전자 장치 | |
US20200117515A1 (en) | Method and device for executing a function between a plurality of electronic devices | |
US10349245B2 (en) | Information processing apparatus and non-transitory computer readable medium for communicating with a robot | |
EP2818978B1 (en) | System and method for gesture disambiguation | |
KR20170019725A (ko) | 전자 장치 및 이의 알림 출력 제어 방법 | |
US20210089175A1 (en) | Method and system for generating dynamic user interface layout for an electronic device | |
EP3001397B1 (en) | Display apparatus and system for providing ui, and method for providing ui of display apparatus | |
US10469419B2 (en) | Electronic device and method of processing message in electronic device | |
US20160343352A1 (en) | Control unit and method for dynamically controlling resolution of display | |
CN118235175A (zh) | 用于在物联网环境中生成活动提醒的方法和电子设备 | |
US20230198623A1 (en) | Electronic apparatus and controlling method thereof | |
WO2023085543A1 (en) | Method and electronic device for generating activity reminder in iot environment | |
US10057381B2 (en) | User terminal, rule executing method thereof, server apparatus and rule executing system | |
US11216488B2 (en) | Method and system for managing applications in an electronic device | |
US20150326641A1 (en) | Mobile to mobile remote control | |
US11416284B2 (en) | Method and system for managing continuous execution of an activity during a user device switchover | |
US20210370503A1 (en) | Method and system for providing dynamic cross-domain learning | |
US11606830B2 (en) | Electronic apparatus for managing network connection and control method thereof |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination |