JP6499318B2 - 物理的なナレッジアクショントリガ - Google Patents
物理的なナレッジアクショントリガ Download PDFInfo
- Publication number
- JP6499318B2 JP6499318B2 JP2017556916A JP2017556916A JP6499318B2 JP 6499318 B2 JP6499318 B2 JP 6499318B2 JP 2017556916 A JP2017556916 A JP 2017556916A JP 2017556916 A JP2017556916 A JP 2017556916A JP 6499318 B2 JP6499318 B2 JP 6499318B2
- Authority
- JP
- Japan
- Prior art keywords
- event
- user
- physical
- action
- data
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 230000009471 action Effects 0.000 title claims description 233
- 230000007613 environmental effect Effects 0.000 claims description 45
- 238000000034 method Methods 0.000 claims description 35
- 238000012545 processing Methods 0.000 claims description 35
- 238000012544 monitoring process Methods 0.000 claims description 32
- 230000004044 response Effects 0.000 claims description 20
- 235000013305 food Nutrition 0.000 description 35
- 230000008569 process Effects 0.000 description 18
- 238000010586 diagram Methods 0.000 description 16
- 238000004891 communication Methods 0.000 description 10
- 239000008267 milk Substances 0.000 description 9
- 210000004080 milk Anatomy 0.000 description 9
- 235000013336 milk Nutrition 0.000 description 9
- 238000004590 computer program Methods 0.000 description 7
- 230000000875 corresponding effect Effects 0.000 description 7
- 238000012790 confirmation Methods 0.000 description 5
- 230000008859 change Effects 0.000 description 4
- 239000000344 soap Substances 0.000 description 4
- 239000002689 soil Substances 0.000 description 4
- 230000004913 activation Effects 0.000 description 2
- 230000003111 delayed effect Effects 0.000 description 2
- 238000001514 detection method Methods 0.000 description 2
- 239000003599 detergent Substances 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- 230000003993 interaction Effects 0.000 description 2
- 238000010801 machine learning Methods 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 230000003252 repetitive effect Effects 0.000 description 2
- 238000000926 separation method Methods 0.000 description 2
- 239000000758 substrate Substances 0.000 description 2
- 230000000007 visual effect Effects 0.000 description 2
- 241001465754 Metazoa Species 0.000 description 1
- 239000008186 active pharmaceutical agent Substances 0.000 description 1
- 238000004458 analytical method Methods 0.000 description 1
- 230000008901 benefit Effects 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 239000000470 constituent Substances 0.000 description 1
- 230000001276 controlling effect Effects 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 239000012530 fluid Substances 0.000 description 1
- 238000007726 management method Methods 0.000 description 1
- 230000007246 mechanism Effects 0.000 description 1
- 238000010295 mobile communication Methods 0.000 description 1
- 230000006855 networking Effects 0.000 description 1
- 238000001556 precipitation Methods 0.000 description 1
- 230000004043 responsiveness Effects 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F15/00—Digital computers in general; Data processing equipment in general
- G06F15/16—Combinations of two or more digital computers each having at least an arithmetic unit, a program unit and a register, e.g. for a simultaneous processing of several programs
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
-
- G—PHYSICS
- G08—SIGNALLING
- G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
- G08B13/00—Burglar, theft or intruder alarms
- G08B13/18—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
- G08B13/189—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
- G08B13/194—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
- G08B13/196—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
- G08B13/19602—Image analysis to detect motion of the intruder, e.g. by frame subtraction
- G08B13/19613—Recognition of a predetermined image pattern or behaviour pattern indicating theft or intrusion
- G08B13/19615—Recognition of a predetermined image pattern or behaviour pattern indicating theft or intrusion wherein said pattern is defined by the user
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/40—Information retrieval; Database structures therefor; File system structures therefor of multimedia data, e.g. slideshows comprising image and additional audio data
- G06F16/43—Querying
- G06F16/432—Query formulation
- G06F16/434—Query formulation using image data, e.g. images, photos, pictures taken by a user
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/40—Information retrieval; Database structures therefor; File system structures therefor of multimedia data, e.g. slideshows comprising image and additional audio data
- G06F16/48—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
- G06F16/487—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using geographical or spatial information, e.g. location
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/90—Details of database functions independent of the retrieved data types
- G06F16/95—Retrieval from the web
- G06F16/953—Querying, e.g. by the use of web search engines
- G06F16/9537—Spatial or temporal dependent retrieval, e.g. spatiotemporal queries
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
- G06F3/0482—Interaction with lists of selectable items, e.g. menus
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q30/00—Commerce
- G06Q30/02—Marketing; Price estimation or determination; Fundraising
- G06Q30/0241—Advertisements
- G06Q30/0251—Targeted advertisements
- G06Q30/0257—User requested
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q30/00—Commerce
- G06Q30/02—Marketing; Price estimation or determination; Fundraising
- G06Q30/0241—Advertisements
- G06Q30/0251—Targeted advertisements
- G06Q30/0259—Targeted advertisements based on store location
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q30/00—Commerce
- G06Q30/02—Marketing; Price estimation or determination; Fundraising
- G06Q30/0241—Advertisements
- G06Q30/0251—Targeted advertisements
- G06Q30/0261—Targeted advertisements based on user location
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q30/00—Commerce
- G06Q30/02—Marketing; Price estimation or determination; Fundraising
- G06Q30/0241—Advertisements
- G06Q30/0251—Targeted advertisements
- G06Q30/0267—Wireless devices
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T19/00—Manipulating 3D models or images for computer graphics
- G06T19/006—Mixed reality
-
- G—PHYSICS
- G08—SIGNALLING
- G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
- G08B13/00—Burglar, theft or intruder alarms
- G08B13/18—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
- G08B13/189—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
- G08B13/194—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
- G08B13/196—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
- G08B13/19665—Details related to the storage of video surveillance data
- G08B13/19669—Event triggers storage or change of storage policy
-
- G—PHYSICS
- G08—SIGNALLING
- G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
- G08B13/00—Burglar, theft or intruder alarms
- G08B13/18—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
- G08B13/189—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
- G08B13/194—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
- G08B13/196—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
- G08B13/19678—User interface
- G08B13/1968—Interfaces for setting up or customising the system
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
- H04L67/131—Protocols for games, networked simulations or virtual reality
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/50—Network services
- H04L67/51—Discovery or management thereof, e.g. service location protocol [SLP] or web services
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/50—Network services
- H04L67/52—Network services specially adapted for the location of the user terminal
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04W—WIRELESS COMMUNICATION NETWORKS
- H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
- H04W4/02—Services making use of location information
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04W—WIRELESS COMMUNICATION NETWORKS
- H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
- H04W4/02—Services making use of location information
- H04W4/029—Location-based management or tracking services
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04W—WIRELESS COMMUNICATION NETWORKS
- H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
- H04W4/12—Messaging; Mailboxes; Announcements
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
- G06F3/04842—Selection of displayed objects or displayed text elements
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q10/00—Administration; Management
- G06Q10/10—Office automation; Time management
- G06Q10/109—Time management, e.g. calendars, reminders, meetings or time accounting
Landscapes
- Engineering & Computer Science (AREA)
- Business, Economics & Management (AREA)
- Strategic Management (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Development Economics (AREA)
- Finance (AREA)
- Accounting & Taxation (AREA)
- Entrepreneurship & Innovation (AREA)
- Computer Networks & Wireless Communication (AREA)
- General Business, Economics & Management (AREA)
- Marketing (AREA)
- Economics (AREA)
- Signal Processing (AREA)
- Game Theory and Decision Science (AREA)
- General Engineering & Computer Science (AREA)
- Human Resources & Organizations (AREA)
- Data Mining & Analysis (AREA)
- Databases & Information Systems (AREA)
- Multimedia (AREA)
- Human Computer Interaction (AREA)
- Operations Research (AREA)
- Tourism & Hospitality (AREA)
- Quality & Reliability (AREA)
- Computer Hardware Design (AREA)
- Software Systems (AREA)
- Library & Information Science (AREA)
- Mathematical Physics (AREA)
- Computer Graphics (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
- Alarm Systems (AREA)
- Health & Medical Sciences (AREA)
- Computing Systems (AREA)
- General Health & Medical Sciences (AREA)
- Medical Informatics (AREA)
Description
102 ネットワーク
103 ワイヤレスネットワーク
104 物理的なデータソース
106 ユーザデバイス
112 クラウドサービスプロバイダ
114 アカウントデータ
120 アクショントリガ処理システム
124 アクショントリガプロセッサ
126 アクショントリガデータ
128 イベントデータ
130 信用証明データ
300 ユーザデバイス
302 ユーザインターフェース
304 プロンプト
306 オプション
308 オプション
322 ユーザインターフェース
324 プロンプト
326 オプション
328 オプション
340 ユーザインターフェース
342 通知
402 ユーザインターフェース
404 画像
406 プロンプト
408 オプション
410 オプション
412 オプション
414 オプション
416 オプション
420 ユーザインターフェース
422 プロンプト
424 入力ディスプレイ
426 マイク入力
440 ユーザインターフェース
442 画像
444 コンテナ
446 通知
510 モバイルコンピューティングデバイス
512 タッチスクリーン
518a ボタン
518b ボタン
518c ボタン
518d ボタン
520 スピーカ
522 マイクロホン
Claims (15)
- 物理的なエンティティのための物理的な環境特徴を示すデータを、データ処理装置によって受信するステップと、
ユーザデバイスにアクショントリガメニューを表示させるデータを前記ユーザデバイスに提供するステップであって、前記アクショントリガメニューは、前記物理的な環境特徴に関連付けられる複数のイベントの各々のための各イベント選択入力を表示するとともに前記イベントに関連付けられ得る第1のアクションのセットのみを表示する、ステップと、
前記物理的な環境特徴に関連付けられる前記複数のイベントからの1つのイベントの、前記ユーザデバイスにおける選択を示すデータを前記データ処理装置によって受信するステップと、
前記イベントの発生に応じて行われるべきアクションを示すデータを、前記データ処理装置によって受信するステップであって、前記アクションは、
前記ユーザデバイス上で動作するアシスタントを使用してユーザにより入力され、
前記ユーザにより前記イベントと関連付けられ、
前記アシスタントにより解析され前記アクションを決定する音声コマンドでユーザにより意味論的に定義され、
前記物理的な環境特性に関する前記イベントとは独立であり、
前記第1のアクションのセットには含まれない、ステップと、
前記物理的な環境特徴に関する前記イベントの発生について監視するステップと、
前記イベントの発生に応じて、前記イベントに関連付けられた前記アクションが実行されるようにするステップと
を含む方法。 - 前記イベントと、前記イベントの発生に応じて行われるべき前記アクションとを指定する前記データを、アクショントリガデータストアへ記憶するステップ
をさらに含み、
前記物理的な環境特徴に関する前記イベントの発生について監視するステップは、前記アクショントリガデータストアに記憶された前記データに基づいて、前記物理的な環境特徴に関する前記イベントの発生について監視するステップを含む、請求項1に記載の方法。 - 実行されるべき前記アクションを、前記データ処理装置によって、前記イベントに基づいて推論するステップをさらに含む、請求項1に記載の方法。
- 前記アクションは、ユーザへの通知の提示であり、
前記イベントに関連付けられた前記アクションが実行されるようにするステップは、
前記ユーザへの前記通知の提示を遅延させるか否かを、1つまたは複数の通知状況に基づいて判定するステップを含む、請求項1に記載の方法。 - 前記物理的な環境特徴は、前記物理的な環境特徴の画像によって記述される、請求項1に記載の方法。
- 前記物理的な環境特徴の前記画像は、前記物理的なエンティティのない場所の画像であり、前記イベントは、前記場所における前記物理的なエンティティの存在である、請求項5に記載の方法。
- 前記物理的な環境特徴に関する前記イベントの発生について監視するステップは、
前記物理的な環境特徴の画像を反復的に受信するステップと、
各反復について、前記物理的なエンティティが前記画像内で描写されているか否かを画像処理によって判定するステップと、
前記物理的なエンティティが、前記画像内に描写されていると判定された場合、前記イベントが発生したと判定するステップと
を含む、請求項5に記載の方法。 - 前記物理的な環境特徴に関する前記イベントの発生について監視するステップは、
前記物理的なエンティティの現在の場所を指定する場所データを受信するステップと、
前記物理的なエンティティの前記現在の場所の、前記物理的な環境特徴の場所への近接度を判定するステップと、
前記近接度が、閾値近接度未満である場合、前記イベントが発生したと判定するステップと
を含む、請求項1に記載の方法。 - 前記物理的な環境特徴は、前記物理的なエンティティによって生成されたデータ信号によって記述される、請求項1に記載の方法。
- 前記データ信号は、前記物理的なエンティティを識別し、
前記物理的なエンティティの現在の場所を指定する場所データを受信するステップと、
前記物理的なエンティティの前記現在の場所の、前記物理的な環境特徴の場所への近接度を判定するステップと、
前記近接度が、閾値近接度未満である場合、前記イベントが発生したと判定するステップと
をさらに含む、請求項9に記載の方法。 - 前記データ信号は、前記物理的なエンティティを識別し、前記物理的なエンティティの場所に依存しない前記物理的なエンティティの状況を示すデータを含み、
前記物理的なエンティティの現在の状況を指定する物理的エンティティデータを受信するステップと、
前記物理的なエンティティの前記現在の状況が、前記イベントによって指定された前記物理的なエンティティの状況を満たすか否かを判定するステップと、
前記物理的なエンティティの前記現在の状況が、前記イベントによって指定された前記物理的なエンティティの状況を満たす場合、前記イベントが発生したと判定するステップと
をさらに含む、請求項9に記載の方法。 - ユーザデバイスによって検出された前記物理的な環境特徴は、物理的なエンティティの場所であり、
前記物理的な環境特徴に関する前記イベントの発生について監視するステップは、
ユーザデバイスの現在の場所を指定する場所データを受信するステップと、
前記ユーザデバイスの前記現在の場所の、前記物理的なエンティティの場所への近接度を判定するステップと、
前記近接度が、閾値近接度未満である場合、前記イベントが発生したと判定するステップと
を含む、請求項1に記載の方法。 - プロセッサと、
前記プロセッサへ結合され、命令が記憶されたコンピュータ可読媒体とを備え、前記命令は、前記プロセッサによって実行された場合、前記プロセッサに、
物理的なエンティティのための物理的な環境特徴を示すデータを受信する動作と、
ユーザデバイスにアクショントリガメニューを表示させるデータを前記ユーザデバイスに提供する動作であって、前記アクショントリガメニューは、前記物理的な環境特徴に関連付けられる複数のイベントの各々のための各イベント選択入力を表示するとともに前記イベントに関連付けられ得る第1のアクションのセットのみを表示する、動作と、
前記物理的な環境特徴に関連付けられる前記複数のイベントからの1つのイベントの、前記ユーザデバイスにおける選択を示すデータを受信する動作と、
前記イベントの発生に応じて行われるべきアクションを示すデータを受信する動作であって、前記アクションは、
前記ユーザデバイス上で動作するアシスタントを使用してユーザにより入力され、
前記ユーザにより前記イベントと関連付けられ、
前記アシスタントにより解析され前記アクションを決定する音声コマンドでユーザにより意味論的に定義され、
前記物理的な環境特性に関する前記イベントとは独立であり、
前記第1のアクションのセットには含まれない、動作と、
前記物理的な環境特徴に関する前記イベントの発生について監視する動作と、
前記イベントの発生に応じて、前記イベントに関連付けられたアクションが実行されるようにする動作と
を含む動作を実行させる、システム。 - 前記物理的な環境特徴に関する前記イベントの発生について監視する動作は、
前記物理的なエンティティの現在の場所を指定する場所データを受信する動作と、
前記物理的なエンティティの前記現在の場所の、前記物理的な環境特徴の場所への近接度を判定する動作と、
前記近接度が、閾値近接度未満である場合、前記イベントが発生したと判定する動作と
を含む、請求項13に記載のシステム。 - 命令が記憶されたコンピュータ可読記憶媒体であって、前記命令は、プロセッサによって実行された場合、前記プロセッサに、
物理的なエンティティのための物理的な環境特徴を示すデータを受信する動作と、
ユーザデバイスにアクショントリガメニューを表示させるデータを前記ユーザデバイスに提供する動作であって、前記アクショントリガメニューは、前記物理的な環境特徴に関連付けられる複数のイベントの各々のための各イベント選択入力を表示するとともに前記イベントに関連付けられ得る第1のアクションのセットのみを表示する、動作と、
前記物理的な環境特徴に関連付けられる前記複数のイベントからの1つのイベントの、前記ユーザデバイスにおける選択を示すデータを受信する動作と、
前記イベントの発生に応じて行われるべきアクションを示すデータを受信する動作であって、前記アクションは、
前記ユーザデバイス上で動作するアシスタントを使用してユーザにより入力され、
前記ユーザにより前記イベントと関連付けられ、
前記アシスタントにより解析され前記アクションを決定する音声コマンドでユーザにより意味論的に定義され、
前記物理的な環境特性に関する前記イベントとは独立であり、
前記第1のアクションのセットには含まれない、動作と、
前記物理的な環境特徴に関する前記イベントの発生について監視する動作と、
前記イベントの発生に応じて、前記イベントに関連付けられた前記アクションが実行されるようにする動作と
を含む動作を実行させる、コンピュータ可読記憶媒体。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US14/830,080 | 2015-08-19 | ||
US14/830,080 US10600296B2 (en) | 2015-08-19 | 2015-08-19 | Physical knowledge action triggers |
PCT/US2016/047773 WO2017031425A1 (en) | 2015-08-19 | 2016-08-19 | Physical knowledge action triggers |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2018525699A JP2018525699A (ja) | 2018-09-06 |
JP6499318B2 true JP6499318B2 (ja) | 2019-04-10 |
Family
ID=58051063
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2017556916A Active JP6499318B2 (ja) | 2015-08-19 | 2016-08-19 | 物理的なナレッジアクショントリガ |
Country Status (9)
Country | Link |
---|---|
US (3) | US10600296B2 (ja) |
EP (1) | EP3278234A4 (ja) |
JP (1) | JP6499318B2 (ja) |
KR (1) | KR101972141B1 (ja) |
CN (2) | CN113507501B (ja) |
DE (1) | DE112016003769T5 (ja) |
GB (1) | GB2554269A (ja) |
RU (1) | RU2695506C1 (ja) |
WO (1) | WO2017031425A1 (ja) |
Families Citing this family (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9727218B2 (en) * | 2015-01-02 | 2017-08-08 | Microsoft Technology Licensing, Llc | Contextual browser frame and entry box placement |
JP6740459B2 (ja) * | 2017-03-29 | 2020-08-12 | シャープ株式会社 | 情報処理システム |
DE102018211048A1 (de) | 2018-07-04 | 2020-01-09 | BSH Hausgeräte GmbH | Verfahren zum Bereithalten von Lebensmitteln in einem Haushaltskältegerät, sowie Haushaltskältegerät |
US10728634B2 (en) * | 2018-12-19 | 2020-07-28 | Simmonds Precision Products, Inc. | Configurable distributed smart sensor system |
US11516296B2 (en) * | 2019-06-18 | 2022-11-29 | THE CALANY Holding S.ÀR.L | Location-based application stream activation |
KR102684057B1 (ko) * | 2019-07-26 | 2024-07-12 | 한화비전 주식회사 | 복수의 카메라들을 포함하는 네트워크 시스템과 통신하는 컴퓨터 장치 및 그것의 동작 방법 |
US11635885B2 (en) | 2020-12-02 | 2023-04-25 | Samsung Electronics Co., Ltd. | Electronic device for supporting automation services |
Family Cites Families (68)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6204763B1 (en) * | 1999-03-22 | 2001-03-20 | Jujitsu Limited | Household consumable item automatic replenishment system including intelligent refrigerator |
US8126784B1 (en) * | 1999-12-08 | 2012-02-28 | Amazon.Com, Inc. | Automatically initiating product replenishment |
US6405178B1 (en) * | 1999-12-20 | 2002-06-11 | Xerox Corporation | Electronic commerce enabled purchasing system |
US7444383B2 (en) | 2000-06-17 | 2008-10-28 | Microsoft Corporation | Bounded-deferral policies for guiding the timing of alerting, interaction and communications using local sensory information |
US6988080B2 (en) * | 2001-02-16 | 2006-01-17 | Zack Robert E | Automated security and reorder system for transponder tagged items |
US7472396B2 (en) | 2001-05-18 | 2008-12-30 | Qualcomm Incorporated | Extensible event notification mechanism |
WO2003009164A2 (en) | 2001-07-16 | 2003-01-30 | America Online Incorporated | Method and apparatus for calendaring reminders |
US8321302B2 (en) * | 2002-01-23 | 2012-11-27 | Sensormatic Electronics, LLC | Inventory management system |
US20040019603A1 (en) | 2002-05-29 | 2004-01-29 | Honeywell International Inc. | System and method for automatically generating condition-based activity prompts |
US6691032B1 (en) * | 2002-09-09 | 2004-02-10 | Groundspeak, Inc. | System and method for executing user-definable events triggered through geolocational data describing zones of influence |
TW200406694A (en) * | 2002-10-23 | 2004-05-01 | Theodore C Lee | Automated communication apparatus |
CA2476697A1 (en) | 2003-08-19 | 2005-02-19 | Karim Moheb Zaki | Remote reminders application system |
JP4885463B2 (ja) * | 2005-03-03 | 2012-02-29 | 株式会社日立製作所 | センサネットワークシステム、センサデータの処理方法及びプログラム |
US7801328B2 (en) * | 2005-03-31 | 2010-09-21 | Honeywell International Inc. | Methods for defining, detecting, analyzing, indexing and retrieving events using video image processing |
WO2006111935A1 (en) * | 2005-04-21 | 2006-10-26 | Koninklijke Philips Electronics, N.V. | Activity-related document mangement |
US7468662B2 (en) * | 2006-06-16 | 2008-12-23 | International Business Machines Corporation | Method for spatio-temporal event detection using composite definitions for camera systems |
US20080004926A1 (en) | 2006-06-30 | 2008-01-03 | Microsoft Corporation | Methods and architectures for context-sensitive reminders and service facilitation |
US8132151B2 (en) * | 2006-07-18 | 2012-03-06 | Yahoo! Inc. | Action tags |
US20090157672A1 (en) | 2006-11-15 | 2009-06-18 | Sunil Vemuri | Method and system for memory augmentation |
US8005689B2 (en) * | 2007-07-23 | 2011-08-23 | Walgreen Co. | Method and system for aligning a plurality of prescription refills to multiple alignment dates |
US8180396B2 (en) * | 2007-10-18 | 2012-05-15 | Yahoo! Inc. | User augmented reality for camera-enabled mobile devices |
US20100169370A1 (en) * | 2008-12-31 | 2010-07-01 | Mazzagatti Jane C | Kstore event manager using triggers for K |
WO2010096193A2 (en) * | 2009-02-18 | 2010-08-26 | Exbiblio B.V. | Identifying a document by performing spectral analysis on the contents of the document |
US20100214428A1 (en) * | 2009-02-25 | 2010-08-26 | Research In Motion Limited | Method and mobile computing device for setting a pictorial reminder |
CA2761390A1 (en) * | 2009-03-09 | 2010-09-16 | Zokem Oy | Mobile terminal and method for providing life observations and a related server arrangement and method with data analysis, distribution and terminal guiding features |
US8591315B2 (en) * | 2009-04-15 | 2013-11-26 | Wms Gaming, Inc. | Environmental effects for near win events |
US20100271202A1 (en) | 2009-04-23 | 2010-10-28 | Bo-In Lin | Reminder messages delivery from reminder device when triggered by reminder-required events |
US8412662B2 (en) * | 2009-06-04 | 2013-04-02 | Motorola Mobility Llc | Method and system of interaction within both real and virtual worlds |
US10706373B2 (en) * | 2011-06-03 | 2020-07-07 | Apple Inc. | Performing actions associated with task items that represent tasks to perform |
US8893047B2 (en) * | 2009-11-09 | 2014-11-18 | International Business Machines Corporation | Activity triggered photography in metaverse applications |
KR101674249B1 (ko) | 2010-07-22 | 2016-11-08 | 휴렛 팩커드 엔터프라이즈 디벨롭먼트 엘피 | 컨텍스트-기반 아이템 북마킹 |
US20120232966A1 (en) * | 2011-03-08 | 2012-09-13 | Bank Of America Corporation | Identifying predetermined objects in a video stream captured by a mobile device |
EP2689572A4 (en) * | 2011-03-23 | 2015-01-21 | Ericsson Telefon Ab L M | METHOD AND SYSTEM FOR CONTROLLING ACTIONS IN A NOTIFICATION SERVICE |
US8766793B2 (en) | 2011-03-25 | 2014-07-01 | Microsoft Corporation | Contextually-appropriate task reminders |
JP2014517749A (ja) * | 2011-06-14 | 2014-07-24 | エンパイア テクノロジー ディベロップメント エルエルシー | 現実の状況からのシミュレーションの開始 |
US8659727B2 (en) | 2011-07-27 | 2014-02-25 | Citizen Finetech Miyota Co., Ltd. | Barriers for reflective pixel electrodes of display devices and methods |
US20130027561A1 (en) | 2011-07-29 | 2013-01-31 | Panasonic Corporation | System and method for improving site operations by detecting abnormalities |
US8849730B2 (en) * | 2011-12-15 | 2014-09-30 | Microsoft Corporation | Prediction of user response actions to received data |
US8942729B2 (en) * | 2012-02-02 | 2015-01-27 | Apple Inc. | Location based methods, systems, and program products for performing an action at a user device |
US8831255B2 (en) * | 2012-03-08 | 2014-09-09 | Disney Enterprises, Inc. | Augmented reality (AR) audio with position and action triggered virtual sound effects |
US10410177B2 (en) * | 2012-06-30 | 2019-09-10 | At&T Mobility Ii Llc | Interactive inventory systems and methods |
JP2014038374A (ja) | 2012-08-10 | 2014-02-27 | Sharp Corp | 見守りシステム、サーバ、容器、情報端末、プログラム、および記録媒体 |
US9833698B2 (en) * | 2012-09-19 | 2017-12-05 | Disney Enterprises, Inc. | Immersive storytelling environment |
US10042603B2 (en) | 2012-09-20 | 2018-08-07 | Samsung Electronics Co., Ltd. | Context aware service provision method and apparatus of user device |
US9046414B2 (en) * | 2012-09-21 | 2015-06-02 | Google Inc. | Selectable lens button for a hazard detector and method therefor |
JP6170058B2 (ja) | 2012-09-28 | 2017-07-26 | パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカPanasonic Intellectual Property Corporation of America | 情報提供方法、及び情報提供システム |
US20140100904A1 (en) | 2012-10-04 | 2014-04-10 | James Louis Wolf | Adaptive reminder strategies for user activities |
US9306660B2 (en) | 2012-10-22 | 2016-04-05 | Qualcomm Technologies International, Ltd. | Dynamic interactive zone driven proximity awareness system |
WO2014075092A1 (en) * | 2012-11-12 | 2014-05-15 | Restaurant Technology Inc. | System and method for receiving and managing remotely placed orders |
US9554050B2 (en) | 2013-03-04 | 2017-01-24 | Apple Inc. | Mobile device using images and location for reminders |
US9412086B2 (en) * | 2013-03-07 | 2016-08-09 | Bradd A. Morse | Apparatus and method for customized product data management |
WO2014136103A1 (en) * | 2013-03-07 | 2014-09-12 | Eyeducation A. Y. Ltd. | Simultaneous local and cloud searching system and method |
TWI484409B (zh) * | 2013-05-22 | 2015-05-11 | Evermore Technology Inc | 以條件觸發反應爲基礎的行動通訊裝置用應用程式之建置平台 |
US9639984B2 (en) * | 2013-06-03 | 2017-05-02 | Daqri, Llc | Data manipulation based on real world object manipulation |
US9871865B2 (en) * | 2013-07-11 | 2018-01-16 | Neura, Inc. | Physical environment profiling through internet of things integration platform |
US20150026002A1 (en) * | 2013-07-16 | 2015-01-22 | International Business Machines Corporation | Smart home environment for shopping |
US9843911B2 (en) * | 2013-09-23 | 2017-12-12 | At&T Intellectual Property I, L.P. | Remotely activated monitoring service |
CA2925542C (en) * | 2013-10-17 | 2021-08-17 | Adt Us Holdings, Inc. | Portable system for managing events |
US11030571B2 (en) * | 2013-12-20 | 2021-06-08 | Ebay Inc. | Managed inventory |
US9406213B2 (en) | 2013-12-27 | 2016-08-02 | Google Inc. | Notification engine |
US9989942B2 (en) * | 2013-12-30 | 2018-06-05 | Qualcomm Incorporated | Preemptively triggering a device action in an Internet of Things (IoT) environment based on a motion-based prediction of a user initiating the device action |
US9760856B2 (en) * | 2013-12-31 | 2017-09-12 | Tata Consultancy Services Limited | Inventory management |
CN106164934A (zh) | 2014-02-10 | 2016-11-23 | 谷歌公司 | 智能相机用户界面 |
US10438276B2 (en) * | 2014-04-16 | 2019-10-08 | Ebay Inc. | Smart recurrent orders |
US10373234B2 (en) * | 2014-06-16 | 2019-08-06 | Amazon Technologies, Inc. | Electronic device for re-ordering items |
CN104202353B (zh) * | 2014-07-09 | 2018-02-13 | 武汉领傲科技有限公司 | 一种物联网互联协作系统的云事件处理方法及装置 |
US10817885B2 (en) * | 2015-03-18 | 2020-10-27 | Quidsi, Inc. | Dynamically adjusted automated item replenishment |
US11416810B2 (en) * | 2017-04-04 | 2022-08-16 | OrderGroove, Inc. | Electronic messaging to distribute items based on adaptive scheduling |
-
2015
- 2015-08-19 US US14/830,080 patent/US10600296B2/en active Active
-
2016
- 2016-08-19 WO PCT/US2016/047773 patent/WO2017031425A1/en active Application Filing
- 2016-08-19 JP JP2017556916A patent/JP6499318B2/ja active Active
- 2016-08-19 GB GB1717836.9A patent/GB2554269A/en not_active Withdrawn
- 2016-08-19 CN CN202110637906.4A patent/CN113507501B/zh active Active
- 2016-08-19 KR KR1020177031467A patent/KR101972141B1/ko active IP Right Grant
- 2016-08-19 DE DE112016003769.4T patent/DE112016003769T5/de not_active Withdrawn
- 2016-08-19 RU RU2017137751A patent/RU2695506C1/ru active
- 2016-08-19 EP EP16837908.9A patent/EP3278234A4/en not_active Withdrawn
- 2016-08-19 CN CN201680029203.0A patent/CN107969167B/zh active Active
-
2019
- 2019-12-16 US US16/715,825 patent/US11055974B2/en active Active
-
2021
- 2021-06-01 US US17/335,508 patent/US20210287504A1/en active Pending
Also Published As
Publication number | Publication date |
---|---|
US11055974B2 (en) | 2021-07-06 |
EP3278234A4 (en) | 2018-12-12 |
EP3278234A1 (en) | 2018-02-07 |
RU2695506C1 (ru) | 2019-07-23 |
CN113507501B (zh) | 2024-04-23 |
KR101972141B1 (ko) | 2019-04-24 |
US20210287504A1 (en) | 2021-09-16 |
US20200168064A1 (en) | 2020-05-28 |
GB201717836D0 (en) | 2017-12-13 |
DE112016003769T5 (de) | 2018-05-03 |
JP2018525699A (ja) | 2018-09-06 |
CN107969167A (zh) | 2018-04-27 |
WO2017031425A1 (en) | 2017-02-23 |
GB2554269A (en) | 2018-03-28 |
US20170054812A1 (en) | 2017-02-23 |
CN107969167B (zh) | 2021-06-22 |
CN113507501A (zh) | 2021-10-15 |
US10600296B2 (en) | 2020-03-24 |
KR20170125403A (ko) | 2017-11-14 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6499318B2 (ja) | 物理的なナレッジアクショントリガ | |
US10673970B2 (en) | Notifications of unaddressed events | |
US12050607B2 (en) | World knowledge triggers | |
US11656922B2 (en) | Personalized notification brokering | |
JP6445053B2 (ja) | リスト蓄積およびリマインダトリガ | |
CN110232489B (zh) | 生成和处理代表待执行任务的任务项目 | |
US10776188B2 (en) | Method and apparatus for generating workflow | |
EP3602442A1 (en) | A virtual assistant configured to recommended actions in furtherance of an existing conversation | |
EP3295393A1 (en) | Activity triggers | |
US20190036720A1 (en) | Method and device to select an electronic device based on delivery attributes | |
Dhillon et al. | Method for Real-Time Voice Communication |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20181105 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20190117 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20190218 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20190314 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6499318 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |