JP7003480B2 - 自動学習ユニバーサルゲートウェイ - Google Patents

自動学習ユニバーサルゲートウェイ Download PDF

Info

Publication number
JP7003480B2
JP7003480B2 JP2017154198A JP2017154198A JP7003480B2 JP 7003480 B2 JP7003480 B2 JP 7003480B2 JP 2017154198 A JP2017154198 A JP 2017154198A JP 2017154198 A JP2017154198 A JP 2017154198A JP 7003480 B2 JP7003480 B2 JP 7003480B2
Authority
JP
Japan
Prior art keywords
gateway
graphical representation
service
identifying
communication interface
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2017154198A
Other languages
English (en)
Other versions
JP2018098767A (ja
Inventor
チェン・ウェイ-ペン
バーラミ・メフディ
卓己 上谷
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujitsu Ltd
Original Assignee
Fujitsu Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fujitsu Ltd filed Critical Fujitsu Ltd
Publication of JP2018098767A publication Critical patent/JP2018098767A/ja
Application granted granted Critical
Publication of JP7003480B2 publication Critical patent/JP7003480B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/22Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks comprising specially adapted graphical user interfaces [GUI]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F8/00Arrangements for software engineering
    • G06F8/60Software deployment
    • G06F8/65Updates
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06NCOMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N20/00Machine learning
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00Data switching networks
    • H04L12/66Arrangements for connecting between networks having differing types of switching systems, e.g. gateways
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/12Discovery or management of network topologies
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/50Network services
    • H04L67/51Discovery or management thereof, e.g. service location protocol [SLP] or web services
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/50Network services
    • H04L67/535Tracking the activity of the user
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/50Network services
    • H04L67/75Indicating network or usage conditions on the user display
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W12/00Security arrangements; Authentication; Protecting privacy or anonymity
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W4/00Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/50Service provisioning or reconfiguring
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W4/00Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/70Services for machine-to-machine communication [M2M] or machine type communication [MTC]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/50Network service management, e.g. ensuring proper service fulfilment according to agreements
    • H04L41/5041Network service management, e.g. ensuring proper service fulfilment according to agreements characterised by the time relationship between creation and deployment of a service
    • H04L41/5054Automatic deployment of services triggered by the service manager, e.g. service implementation by automatic configuration of network components
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/34Network arrangements or protocols for supporting network services or applications involving the movement of software or configuration parameters 
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W12/00Security arrangements; Authentication; Protecting privacy or anonymity
    • H04W12/08Access security
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W12/00Security arrangements; Authentication; Protecting privacy or anonymity
    • H04W12/60Context-dependent security
    • H04W12/69Identity-dependent
    • H04W12/77Graphical identity

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Theoretical Computer Science (AREA)
  • Software Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Computer Security & Cryptography (AREA)
  • Mathematical Physics (AREA)
  • Evolutionary Computation (AREA)
  • Medical Informatics (AREA)
  • Computing Systems (AREA)
  • Artificial Intelligence (AREA)
  • Data Mining & Analysis (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Human Computer Interaction (AREA)
  • Computer Hardware Design (AREA)
  • Information Transfer Between Computers (AREA)
  • Data Exchanges In Wide-Area Networks (AREA)

Description

本明細書に記載の実施形態は、自動学習ユニバーサルゲートウェイに関する。
ゲートウェイは、しばしば、異なるプロトコルを使用することがある別のネットワーク又はモジュールとインタフェースをとるために設けられるハードウェアデバイスを指す。ゲートウェイは、システム相互運用性を提供するのに必要な、異なるプロトコルとインタラクトするためのプロトコル変換器、障害分離器、又は信号変換器等の様々なデバイスを含み得る。
本出願において特許請求される主題は、あらゆる欠点を解決する実施形態又は上記のような環境においてのみ動作する実施形態に限定されるものではない。そうではなく、この背景技術の記載は、本明細書に記載のいくつかの実施形態が実施され得る1つの例示的な技術領域を示すために提供されているに過ぎない。
一実施形態の一態様に従うと、ゲートウェイは、通信インタフェースと、前記通信インタフェースに動作可能に接続されたプロセッサと、を含む。前記プロセッサは、前記通信インタフェースを介して、前記ゲートウェイに接続されるデバイスのグラフィカル表現を受信するよう構成されている。前記グラフィカル表現は、電子フォーマットである。前記プロセッサは、さらに、前記デバイスの前記グラフィカル表現を使用して前記デバイスを特定して、電子データストレージ内の前記デバイスについてのレコードを見つけるよう構成されている。前記プロセッサは、前記デバイスと利用可能な第2のデバイス又はサービスとの間の可能な接続を探すよう構成されている。前記プロセッサはまた、グラフィカルユーザインタフェースを介した表示のために、前記可能な接続についての提案を提供するよう構成されている。前記プロセッサは、前記デバイスの前記可能な接続を有効にする電子承認を受信するよう構成されている。
実施形態の目的及び利点が、少なくとも請求項において特に示される要素、特徴、及び組合せにより、実現及び達成される。
前述の総括的な説明及び以下の詳細な説明の両方ともが、例示的で説明的なものであり、特許請求される発明を限定するものではないことを理解されたい。
例示的な実施形態が、添付の図面を使用して、より具体的且つ詳細に記載及び説明される。
ゲートウェイを含むシステムの例示的な動作環境のブロック図。 自動学習ユニバーサルゲートウェイに関連する例示的な方法のフロー図。 システムにおける接続の関係を表現する例示的な接続グラフを示す図。 複合動作の視覚的提示がディスプレイデバイスを介してユーザに少なくとも部分的に提示され得る例示的なシステムを示す図。 本明細書に記載の少なくとも1つの実施形態に従って全て構成される、本明細書に記載の方法のうちの任意の1つ以上を、コンピューティングデバイスの例示的な形態であるマシンに実行させる命令のセットが実行され得る、該マシンの図式表現を示す図。
ハードウェアにおける技術が進化しており、通信システムは、小型デバイスをより強力にし、互いとより良く通信できるようにしている。これらのデバイスは、宅内環境、車両環境、又はインターネットオブシングス(IoT)環境等の様々な環境において、ゲートウェイにしばしば接続する。IoTは、自動化、監視等といった多くの有用な機能をもたらしている。しかしながら、IoTは、本質的に、多様で細分化されセクタ固有である。多くのベンダは、他のベンダからのデバイスの組み込みを禁じる独立したエコシステムを作成する傾向にある。結果として、第1のタイプのデバイスを有するユーザは、ユーザが第1のタイプのデバイスとともに使用する可能性がある他のタイプのデバイスについて制限される場合がある。従来のゲートウェイは、異なるプロトコルを使用して互いと通信するデバイス群を可能にするハードウェア及び/又はソフトウェアを含み得る。例えば、ゲートウェイは、デバイスが、異なる無線周波数(RF)プロトコルを使用する異なるRFデバイス群とインタラクトすることを可能にし得る。デバイスを従来のゲートウェイに接続することは、一般に、厄介であり、誤りを犯しがちである。
本開示の態様は、自動学習ユニバーサルゲートウェイを提供することにより、従来のゲートウェイ及び関連するシステムのこれらの欠点及び他の欠点に対処する。本ゲートウェイは、機械学習方法に基づいて、ウェブ等の様々なソースから、プロトコル、アプリケーションプログラミングインタフェース(API)、及びデバイスについて学習することができる。さらに、本ゲートウェイは、異種のプロトコル、API、及びデバイスと協働するための提案システムを提供することができる。
したがって、本明細書で開示されるいくつかの実施形態は、本ゲートウェイが写真、バーコード、QRコード(登録商標)等を介して新たなデバイスを自動的に特定できる自動デバイス構成を可能にする環境を提供する。ユーザが、新たなデバイスを追加することを望むときに、ユーザは、新たなデバイスの写真を撮影する又はQRコード(登録商標)やバーコードをスキャンすることができる。次いで、本ゲートウェイは、クラウドに接続して、新たなデバイスを接続するためのドライバを自動的にダウンロードする。さらに、他の既存のデバイス又はサービスとの接続が、パーソナライズされたユーザフレンドリーなインタフェースを介して有効にされ得る。新たなデバイスの通信インタフェースが、新たなデバイスの仕様を介して、自動的に特定され得、本ゲートウェイは、通信インタフェースを選択して、新たなデバイスに接続することができる。また、新たなデバイスとインタラクトするためのソフトウェアが、本ゲートウェイにダウンロードされ得る。このソフトウェアは、API学習方法を介して生成され得る。代替的に、上記ソフトウェアは、バックエンドシステムに存在してもよく、本ゲートウェイは、バックエンドシステムにあるソフトウェアを介して、新たなデバイスと通信してもよい。
本ゲートウェイは、新たなデバイスを自動的に特定して新たなデバイスへの接続を有効にすることにより、新たなデバイスに接続するプロセスを容易にすることができる。本ゲートウェイは、ゲートウェイを使用して、デバイス間、クラウドサービス間、及び/又はデバイス-クラウドサービス間で通信する、宅内環境(ホームゲートウェイとして)、車両環境(車両ゲートウェイとして)、及び任意のIoT環境等の環境において使用され得る。例えば、ホームゲートウェイの場合、モバイルデバイスやタブレット等のユーザデバイスは、ユニバーサルホームゲートウェイとして機能することができる。
本開示の他の利点は、新たなデバイスの自動特定及び自律構成、接続及びサービスの提案についての学習能力、自動プロトコル変換を介する複数のIoTエコシステムのサポート、旧式のIoTデバイス(すなわち、オリジナルベンダからメンテナンスの継続的サポートを受けられないデバイス)をサポートするための演算プラットフォーム、デバイス/サービスから生成されたデータをホストし、クラウドサービス(例えば、クラウドビデオ記録サービス)のコストを節減するための記憶空間、より複合的な機能(例えば、複数のトリガー条件、コンピュータビジョン等)、及び、重要なデータを本ゲートウェイ又はローカルストレージにおいて保持することによる、プライバシーの増大された保護を含む。
本明細書に記載のいくつかの実施形態は、複数のプロトコルで通信するデバイス群の統合を可能にする。さらに、デバイス構成に組み込まれると、これらのデバイスは、中央システムを必ずしも介する必要なく、ピアツーピアで通信することができる。
図1は、本明細書に記載の少なくとも1つの実施形態に従って構成される、システムの例示的な動作環境100のブロック図を示している。図1に示されるように、動作環境100は、1つ以上のデバイス106、ゲートウェイ110、1つ以上のウェブサービス115、ネットワーク124、システムサーバ125、ユーザデータベース(DB)128、提案データベース(DB)130、ローカルデータベース(DB)136、及びクラウド140を含み得る。ゲートウェイ110、ウェブサービス115、システムサーバ125、及びクラウド140(集合的に「環境」コンポーネント)は、ネットワーク124を介して、互いに通信可能に接続され得る。
デバイス106は、プロセッサ、メモリ、及び通信能力を含むコンピュータベースのハードウェアデバイスを含み得る。デバイス106の各々は、動作環境100の他のコンポーネントのうちの任意のコンポーネントとデータを通信するために、ネットワーク124に接続され得る。デバイス106のいくつかの例は、電球、照明システム、ドアロック、給湯器、スプリンクラーシステム、空調装置、サーモスタット、アラーム時計、ブラインド、スイッチ、煙感知/報知器、カメラ、エッグマインダー(egg minder)、電気差し込み口、個人用貯金入れ(例えば、貯金箱)、プロパンタンク、アラーム、対人近接センサ、ドアセンサ、バイオメトリックセンサ、マットレス、モバイルデバイス、車両センサ、時計、調理デバイス、電気ブレーカ、個人用警報センサ、動きセンサ、カレンダー、テレビジョン、ラジオ、無線周波数識別(RFID)タグ/RFID検出器、乗り物、電気車両充電器、分散型発電機(例えば、ソーラーパネル)、分散型エネルギー貯蔵器(例えば、バッテリ)、及び温度計を含む。
デバイス106は、1つ以上の通信プロトコルを用いて通信することができる。例えば、いくつかの実施形態において、デバイス106又はデバイス106の何らかのサブセットは、ベンダにより提供され得る。デバイス106は、特定の機能のために、且つ/又は、他のデバイス106のうちの1つ以上との一緒の使用のために、提供され得る。ベンダにより提供されるデバイス106は、特定の通信プロトコルを用いて通信することができる。
いくつかの通信プロトコルは、他の通信プロトコルと互換性があることがある。例えば、第1のデバイス106Aからの第1のプロトコルは、第2のデバイス106Bの第2のプロトコルに変換され得る。しかしながら、他の通信プロトコルは、全ての他のデバイス106及び/又は他の通信プロトコルと互換性がないことがある。異なるが互換性がある2つの通信プロトコルを2つのデバイス106が使用して通信する状況において、ゲートウェイ110は、2つのデバイス106間の通信を可能にするために配備され得る。
ゲートウェイ110は、ネットワーク124を介してアクセス可能であり得、したがって、リモートに物理的に配置され得る。ゲートウェイ110は、異なる通信プロトコルを使用するデバイス106間の通信を可能にする任意のシステム又はデバイスを含み得る。ゲートウェイ110は、デバイス106間の通信において使用される他のデバイスを含み得る。例えば、ゲートウェイ110は、プロトコル変換器及び/又は信号変換器、インピーダンス整合器、レート変換器、障害分離器等を含み得る。ゲートウェイ110は、例えば、デバイス106のうちどのデバイスとゲートウェイ110が通信し得るかと、デバイス106との通信を可能にするために実行される1つ以上のステップと、を示し得る1つ以上の構成パラメータをさらに含み得る。ゲートウェイ110はまた、局所的に(例えば、非クラウドベースで)アクセスされ得る物理ゲートウェイを含み得る。
デバイス構成は、デバイス106が1つ以上の特定のタイプのデータを通信するように、ユーザの入力に基づいて、ゲートウェイ110により少なくとも部分的に構築され得る。例えば、センサとして配備されるデバイス106は、測定された状態を表す信号を通信することができ、特定の動作を実行するように配備されるデバイス106は、制御信号を受信するよう構成され得、コントローラとして配備されるデバイス106は、機器の動作が変更され得る条件を受信することができる。
1つ以上のウェブサービス115は、ネットワーク124(例えば、ワールドワイドウェブ)を介して互いに通信する、電子デバイスにより別の電子デバイスに提供されるサービスを含み得る。1つ以上のウェブサービス115は、一般に、ゲートウェイ110及び/又はシステムサーバ125へのインタフェースを提供する。ウェブサービスは、ゲートウェイ110及び/又はシステムサーバ125への、気象データ、日の出/日の入りデータ等といった様々なタイプの情報の提供を含み得る。
ネットワーク124は、動作環境100のコンポーネント(例えば、106、110、115、125、128、130、136、及び140)のうちの任意のコンポーネントの間の信号の通信のために構成されている任意の通信ネットワークを含み得る。例えば、第1のデバイス構成の構築の後、第1のデバイス106A、ゲートウェイ110、及び第2のデバイス106Bは、ネットワーク124を介して通信することができる。ネットワーク124は、有線であってもよいし、無線であってもよい。ネットワーク124は、スター構成、トークンリング構成、又は別の適切な構成を含む多数の構成を有し得る。さらに、ネットワーク124は、ローカルエリアネットワーク(LAN)、ワイドエリアネットワーク(WAN)(例えば、インターネット)、及び/又は、複数のデバイスが通信できる他の相互接続されたデータパスを含み得る。いくつかの実施形態において、ネットワーク124は、ピアツーピアネットワークを含み得る。ネットワーク124はまた、多種多様な通信プロトコルでのデータの通信を可能にし得る通信ネットワークの諸部分に接続され得る、又は、そのような諸部分を含み得る。
いくつかの実施形態において、ネットワーク124は、データを送受信するための、BLUETOOTH(登録商標)通信ネットワーク、Z-Wave通信ネットワーク、Insteon通信ネットワーク、EnOcean通信ネットワーク、Wi-Fi(登録商標)通信ネットワーク、ZigBee(登録商標)通信ネットワーク、HomePlug(登録商標)通信ネットワーク、電力線通信(PLC)通信ネットワーク、MQTT(message queue telemetry transport)通信ネットワーク、MQTT-センサ(MQTT-S)通信ネットワーク、CoAP(constrained application protocol)通信ネットワーク、REST API(representative state transfer application protocol interface)通信ネットワーク、XMPP(extensible messaging and presence protocol)通信ネットワーク、セルラ通信ネットワーク、任意の同様の通信ネットワーク、又は、これらの任意の組合せを含む、又は、これらを含むよう構成される。ネットワーク124において通信されるデータは、デバイス106、クラウドサーバ通信、又はゲートウェイ110により実装され得る、ショートメッセージングサービス(SMS)、マルチメディアメッセージングサービス(MMS)、ハイパーテキスト転送プロトコル(HTTP)、直接データ接続、無線アプリケーションプロトコル(WAP)、電子メール、スマートエネルギープロファイル(SEP)、ECHONET Lite(登録商標)、OpenADR、又は任意の他のプロトコルを介して通信されるデータを含み得る。
システムサーバ125は、プロセッサ、メモリ、及び通信能力を含むハードウェアサーバを含み得る。図示される実施形態において、システムサーバ125は、ユーザデバイス106、ゲートウェイ110、クラウド140、及びウェブサービス115のうちの1つ以上との通信のために、ネットワーク124に接続され得る。
クラウド140は、クラウドサービスを含み得る。多くのIoTデバイスベンダが、それら自身のクラウドサービスを提供している。デバイス情報、デバイス使用状況情報等といった様々なデータが、様々なクラウドサービスサーバにおいて収集され得る。
システムサーバ125は、ユーザデータベース128及び/又は提案データベース130を含み得る、又は、ユーザデータベース128及び/又は提案データベース130に接続され得る。概して、ユーザデータベース128は、デバイス106のうちの1つ以上のデバイスの能力と、デバイス106間の相互運用性と、を含み得る。ゲートウェイ110は、ローカルデータベース136を含み得る、又は、ローカルデータベース136に接続され得る。
データベース128、130、及び136は、任意のメモリ又はデータストレージを含み得る。データベース128、130、及び136は、動作環境100における他のコンポーネントがデータベース128、130、及び136と通信できるように、ネットワーク通信能力を含み得る。いくつかの実施形態において、データベース128、130、及び136は、コンピュータ実行可能な命令又はデータ構造を運ぶ又は記憶するコンピュータ読み取り可能な記憶媒体を含み得る。コンピュータ読み取り可能な記憶媒体は、プロセッサ等の汎用又は専用のコンピュータによりアクセスされ得る任意の利用可能な媒体を含み得る。例えば、データベース128、130、及び136は、ランダムアクセスメモリ(RAM)、読み取り専用メモリ(ROM)、電気的に消去可能なプログラム可能な読み取り専用メモリ(EEPROM)、コンパクトディスク読み取り専用メモリ(CD-ROM)若しくは他の光ディスクストレージ、磁気ディスクストレージ若しくは他の磁気記憶デバイス、フラッシュメモリデバイス(例えば、ソリッドステートメモリデバイス)、又は、コンピュータ実行可能な命令又はデータ構造の形態の所望のプログラムコードを運ぶ又は記憶するために使用され得る任意の他の記憶媒体であって、汎用又は専用のコンピュータによりアクセスされ得る任意の他の記憶媒体、を含む有形の又は非一時的なコンピュータ読み取り可能な記憶媒体であり得るコンピュータ読み取り可能な記憶媒体を含み得る。これらの組合せも、データベース128、130、及び136のうちの任意のデータベースに含まれ得る。
データベース128、130、及び136は、様々なデータを記憶することができる。データは、リレーショナルデータベース構造等の任意のデータ構造で記憶され得る。例えば、ユーザデータベース128は、ユーザの使用パターンを含み得る。ユーザの使用パターンは、いかなる特定のユーザも個人的に特定するものではなく、匿名化され得る。使用パターンの例は、ユーザが操作するデバイスのタイプ、デバイスの設定、動作の時刻及び/又は位置等を含み得る。例えば、ユーザが、2つの機器又はサービスを別々に頻繁に操作し得る場合、これらの2つのイベントが順次に発生したとき、システムサーバ125は、2つの機器又はサービスの間の関係を認識することができ、自動制御を有効にすることができる。
別の例において、提案データベース130は、コミュニティ(匿名化されたユーザ又はオープンフォーラム)から提供された提案を含み得る。例えば、一般的なレシピは、2つのデバイス及び/又はサービスを接続し得る。ユーザが、これら2つのデバイス及び/又はサービスを有し、このレシピを受け取るグループとしての設定を有する場合、システムサーバ125は、このレシピをユーザに提案することができる。例えば、ユーザは、踊ることが好きであり得、スマートスピーカ及びスマートLED照明の両方を有する。スマートスピーカ及びスマートLED照明の両方を制御するためのレシピが存在する場合、システムサーバ125は、このレシピをユーザに提案することができる。
さらなる例において、ローカルデータベース136は、使用パターン、提案、使用履歴、及び任意の他のデータの一部又は全てを含み得る。
動作中、ゲートウェイ110及び/又はシステムサーバ125は、接続及びサービスの提案のために機械学習を用いることができる。提案は、他の既存のデバイスとの新たなデバイスの接続と、デバイス/サービス間のインタラクションのためのルールの構成と、の提案を含み得る。提案は、既存の類似するサービス(例えば、IFTTTレシピ)、コミュニティ、他のゲートウェイからの他の匿名化されたユーザの集合、及び/又はユーザの自身の行動から、学習され得る。
機械学習方法に関して、ゲートウェイ110及び/又はシステムサーバ125は、デバイス特定、通信インタフェース特定、API通信、機能有効化、接続提案等といった、ゲートウェイ110に接続されるデバイスに関連する任意の情報又は特徴についての学習能力を含み得る。少なくともいくつかの実施形態において、デバイス106は、一般に手動デバイス構成を用いる従来手法の代わりに、自動的に構成され得る。提案される構成は、ゲートウェイ110上のソフトウェアであって、該ソフトウェアがAPIドキュメンテーションとその記載とから学習する学習能力を有する、ゲートウェイ110上のソフトウェアにより提供される。例えば、ゲートウェイ110は、APIのウェブサイトを用いて、デバイスの機能について特定又は学習することができる。
既存のサービスから学習するために、ゲートウェイ110及び/又はシステムサーバ125は、クラウド140等のデータベースにおけるレシピを特定することができる。ゲートウェイ110及び/又はシステムサーバ125は、図2及び図3に関連してさらに説明されるように、既存のデータベースにおいて発見されたレシピ(例えば、IFTTTレシピ等)を、グローバルグラフG内に記録することができる。各レシピは、3つのレイヤにおける可能な接続及び機能レイヤにおけるパラメータを含み得る。例示的なレシピは、「if you leave home (by location information), start home security system(あなたが自宅を離れる場合(位置情報により)、ホームセキュリティシステムを起動しなさい)」であり得る。
クラウドから学習するために、ゲートウェイ110及び/又はシステムサーバ125は、匿名化されたユーザの設定を、グローバルグラフG内に記録することができる。ユーザのための提案を探すときに、ゲートウェイ110及び/又はシステムサーバ125は、ユーザを他のユーザと比較することができる。ユーザに類似するグループ(例えば、環境、嗜好性等)に基づいて、このグループにおける匿名化された設定が、ユーザに提供され得る。クラスタリングにより類似度をどのように測るかの例において、ゲートウェイ110及び/又はシステムサーバ125は、ユーザが所有するデバイスのタイプ、ユーザの推定年齢、ユーザの収入レベル、ユーザの生活スタイル等といったいくつかの基準に基づいて、全てのユーザをクラスタリングすることができる。各基準は、収入、年齢等といったいくつかのクラスに離散化されることもあるし、又は、(例えば、活動的な時間のインジケーションに基づいて)生活スタイル等の少しのクラスに分類されることもある。ゲートウェイ110及び/又はシステムサーバ125は、ユーザを、ユーザにとって類似するグループにクラスタリングすることができる。少なくとも1つの実施形態において、あるゲートウェイは、自身が発見したデバイス/レシピを他のユーザに提案するために、該ゲートウェイのデータをゲートウェイ110及び/又はシステムサーバ125に対して同期することができる。例えば、ゲートウェイ110及び/又はシステムサーバ125は、(1つのエリア内の)近傍から、デバイスをオン/オフする時刻又は人気のあるTVチャンネルにチューニングする時刻を学習することができる。
ユーザ使用の履歴から学習するために、ゲートウェイ110及び/又はシステムサーバ125は、ユーザの手動操作をモニタリング又は記録して、任意の自動化のパターンを特定することができる(例えば、2つのイベントについての時刻又は位置における相関を見出すことができる)。ユーザの所定の決まってする動作(ルーティン)が特定され得る場合、ゲートウェイ110及び/又はシステムサーバ125は、自動化されたレシピをユーザに提案することができる。
少なくとも1つの実施形態において、複合動作が、ゲートウェイ110において、又は、ゲートウェイ110とともにシステムサーバ125において、実行され得る。例示的な複合動作は、複数のアクションをトリガーする複数の条件を含むこともあるし、又は、特定の機能が、所定のアクション、又はエラーの自動診断をトリガーするために、ゲートウェイにおいて実行されることもある。
ゲートウェイ110は、1つのアクションをトリガーする複数の条件を考慮することができる。これらの条件は、何らかの論理演算であり得る。例えば、ゲートウェイ110は、ユーザの車両の位置及びユーザの電話の位置を同時に特定して、ユーザのガレージドア及び玄関ドアの両方を開くことができる。
ゲートウェイ110は、所定のアクションをトリガーするために特定の機能を実行することができる。例えば、ゲートウェイ110は、車両内に配置され得る。ゲートウェイ110は、車両カメラからの撮影されたビデオを処理することができる。ゲートウェイにおいてコンピュータビジョンソフトウェアを実行することにより、所定の条件が検出され得る。所定の条件が満たされたとき、これは、アクションをトリガーし得る。例えば、車両カメラが、他の車両事故を観測すると、そのようなビデオが、クラウドサーバにアップロードされ得る。別の例において、車両が、(例えば、センサデータから)事故の発生を検出すると、事故前のビデオ及び事故後のビデオが、サーバにアップロードされ得る。通知が、ゲートウェイ110を介して、家族/友人/救助隊等に送信され得る。高齢者介護の場合、転倒検出センサが、異常なイベントを検出すると、ゲートウェイ110は、高齢者の家に設置されているカメラ及び/又は他のセンサ106を介して、高齢者の場所を探し、高齢者の状況を継続的にモニタリングすることができる。センサにおける状況(例えば、所定の期間の間動きがないこと)に基づいて、アラーム音、通知が家族/友人/病院に送信される等といった様々な後続アクションが、トリガーされ得る。軽度の状況が観測された場合、ゲートウェイ110は、高齢者の状態を分析するために、単純なQ&Aダイアログを介して等(例えば、介護者が問題ないかどうかを尋ねる等)、高齢者と介護者との間の対話を促すことができる。
ゲートウェイ110は、エラーを自動的に診断することができる。例えば、ゲートウェイ110は、様々なアクティビティをモニタリングすることができ、他のユーザが以前に経験している可能性があることに基づいて、問題をどのように解決するかを提案することができる。これは、動的な知識に基づく診断をサポートする動的な方法であり、静的な、ドキュメンテーションに基づく診断とは異なる。
本開示の範囲から逸脱することなく、動作環境100に対して、変更、追加、又は省略が可能である。例えば、動作環境100は、任意の数の説明されたデバイス及びサービスを含んでもよい。さらに、本明細書に記載の実施形態における様々なコンポーネント及びサーバの分離は、そのような分離が全ての実施形態において生じることを示すようには意図されていない。さらに、説明されたコンポーネント及びサーバは、概して、1つのコンポーネント又はサーバに一緒に統合されてもよいし、複数のコンポーネント又はサーバに分離されてもよいことが、本開示の利点として理解されよう。
図2は、自動学習ユニバーサルゲートウェイに関連する例示的な方法200のフロー図を示している。方法は、ハードウェア(回路、専用ロジック等)、ソフトウェア(汎用コンピュータシステム又は専用マシン上で実行されるソフトウェア等)、又はこれらの組合せを含み得る処理ロジックにより実行され得、処理ロジックは、図1の動作環境100又は別のコンピュータシステム若しくはデバイスに含まれ得る。しかしながら、別のシステム又はシステムの組合せが、方法を実行するために使用されてもよい。説明を単純にするために、本明細書に記載の方法は、一連の動作として示され説明される。しかしながら、本開示に従った動作は、様々な順序で且つ/又は同時に生じることもあり、本明細書において提示及び説明されない他の動作が生じることもある。さらに、全ての例示される動作が、開示される主題に従った方法を実施するために使用されるわけではない。さらに、方法は、代替的に、状態図を介する一連の相互に関連付けられた状態又はイベントとして表現されてもよいことが、当業者であれば理解及び認識されよう。さらに、本明細書で開示される方法は、そのような方法をコンピューティングデバイスに運んで転送するのを容易にするために、非一時的なコンピュータ読み取り可能な媒体等の製品に記憶されることも可能である。本明細書で使用される製品という用語は、任意のコンピュータ読み取り可能なデバイス又は記憶媒体からアクセス可能なコンピュータプログラムを包含することが意図されている。別個のブロックとして図示されているが、様々なブロックは、所望の実装に応じて、追加のブロックに分割されることもあるし、より少ないブロックに組み合わされることもあるし、除去されることもある。方法200は、図1のサーバ125又はゲートウェイ110等、サーバ内の処理ロジックにより、少なくとも部分的に実行され得る。
方法200は、ブロック205で開始し得、ブロック205において、処理ロジックは、システムサーバと同期することができる。電源オン後に、処理ロジックは、システムサーバ(例えば、図1のシステムサーバ125)に接続し、システムサーバ125に関連付けられている1つ以上のデータベース(例えば、ユーザデータベース128、提案データベース130)と同期することができる。
ブロック210において、処理ロジックは、デバイスの写真、QRコード(登録商標)、バーコード、及び/又は、任意の他のグラフィカル表現若しくは視覚的表現を受信することができる。デバイスが、システム(例えば、図1の動作環境)に追加されるときに、処理ロジックは、グラフィカル表現又は視覚的表現により、デバイスを特定することができる。例えば、グラフィカル表現は、デバイスの写真又は画像を含み得る。別の例において、視覚的表現は、デバイスに関連付けられているグラフィック又はコード(例えば、QRコード(登録商標)、バーコード)を含み得る。少なくとも1つの実施形態において、デバイスをシステムに追加することを望むシステム管理者は、ユーザデバイスを介して、デバイスのグラフィカル表現又は視覚的表現を処理ロジックに送信する。少なくとも1つの実施形態において、ユーザは、カメラを用いてデバイス自体の写真を撮影し、撮影された写真を処理ロジックに送信することができる。
ブロック215において、処理ロジックは、デバイスの写真、QRコード(登録商標)、バーコード、及び/又は、他のグラフィカル表現若しくは視覚的表現に基づいて、デバイスを特定することができる。処理ロジックは、デバイスの写真、QRコード(登録商標)、バーコード、及び/又は、他のグラフィカル表現若しくは視覚的表現を使用して、製造者、モデル、サポートされる通信インタフェース、API等といった、デバイスの特性を特定することができる。処理ロジックは、データストレージ(例えば、図1のローカルデータベース136又はクラウド140)に接続して、新たなデバイスを接続するためのドライバをダウンロードすることができる。
ブロック220において、処理ロジックは、デバイスを構成し、デバイスに接続することができる。処理ロジックは、ブロック215において得られたドライバに基づいて、デバイスを構成することができる。ドライバがインストールされて構成されると、処理ロジックは、新たなデバイスに接続することができる。少なくとも1つの実施形態において、処理ロジックは、デバイスにアクセスするための通信方法として、最良の通信インタフェースを選択することができる。デバイスドライバ(又は、デバイスのAPIにどのようにアクセスするかのソフトウェア)が、ゲートウェイにダウンロードされる。
ブロック225において、処理ロジックは、デバイスについての可能な接続を探すことができる。例えば、処理ロジックは、既存の接続されているデバイス及び/又はサービスを特定することができる。処理ロジックは、次いで、新たなデバイスと、既存のデバイス及び/又はサービスと、の間の可能な新たな接続を探すことができる。システムサーバは、デバイス間、サービス間、及び/又はデバイス-サービス間等の接続を記録する「接続グラフ」の様々なバージョンを保持することができる。少なくとも1つの実施形態において、接続グラフは、コミュニティ(匿名化されたユーザ若しくはオープンフォーラム又は「IFTTT」レシピ)から学習された、G(コミュニティのグラフ)と呼ばれる可能な接続のレコードを含み得る。接続グラフの別の実施形態は、G(ユーザのグラフ)と呼ばれる、ユーザのゲートウェイ自体の接続を含み得る。新たなノードx(新たに追加されるデバイス)をGに追加し、GをGで比較することにより、処理ロジックは、他のデバイス/サービスとの新たなノードxの可能な新たな接続を使用することができる。
ブロック230において、処理ロジックは、デバイスの接続及び/又は構成についての提案を提供することができる。処理ロジックは、システムサーバから提案を受信することができる。システムサーバは、提案を生成することができる。提案を生成するために、システムサーバは、ゲートウェイの構成を、他のユーザの構成と比較して、接続及び/又は構成の提案を提供することができる。処理ロジックは、提案をクライアントデバイスに提供することができる。クライアントデバイスは、グラフィカルユーザインタフェースを介いて、提案を提示することができる。クライアントデバイスは、提案の承認又は承諾を受け取り、承認又は承諾を処理ロジックに送信することができる。処理ロジックは、クライアントデバイスから受信した承認又は承諾に応じて、デバイスを構成することができる。マルチレベル接続グラフ(例えば、図3参照)の階層が、カテゴリレベル、デバイス/サービスレベル、及び機能レベルという3つのレベルで維持され得る。ある接続を採用したユーザが、該接続に関連付けられ、処理ロジックは、これに応じて、接続グラフを更新することができる。例えば、処理ロジックは、嗜好性、インストール済みデバイス等といった様々な基準に基づいて、(新たに追加されるデバイスを有する)ユーザに最も近い、全てのユーザのグループを探すことができる。このグループの構成に基づいて、新たなデバイスとの新たな接続が、処理ロジックにより提案され得る。より多くの人に採用されている接続は、該接続がユーザにとって有用であり得るより高い可能性(高い優先順位)を示し得る。演算、記憶、機能等の提供等のさらなる特徴が、処理ロジックにより、ユーザに提供され得る。例えば、クラウドビデオ記録機能を使用する代わりに、ゲートウェイは、ゲートウェイにおけるローカル記憶を提供することができる。別の例は、例えば、コンピュータビジョン又は音声認識を用いて特定のイベントを認識する等の特定の実行可能な機能が、ゲートウェイにダウンロードされ得ることであり、処理ロジックは、この機能をローカルで実行することができる。
ブロック235において、処理ロジックは、デバイスへの接続を有効にする承認を受信することができる。少なくとも1つの実施形態において、処理ロジックは、この決定を行うのを支援するために、論理レベル情報に基づくチュートリアル情報をユーザに提供することができる。処理ロジックは、パーソナライズされたユーザフレンドリーなインタフェースを介したユーザの選択に基づいて、他の既存のデバイス又はサービスとの接続を有効にすることができる。
ブロック240において、処理ロジックは、デバイスに関連付けられる使用パターンをモニタリングすることができる。処理ロジックは、デバイスを継続的にモニタリングし、任意の使用状況情報をデータストレージに記憶することができる。ブロック245において、処理ロジックは、使用パターンを学習して、追加の提案を特定することができる。処理ロジックは、様々な使用パターンについて、収集された使用状況情報を解析することができる。複数のシステムからの且つ/又は2人以上のユーザに関連付けられている使用パターンから学習することにより、処理ロジックは、ユーザをより効率的に作業させるための、サービスの新たな提案又は新たな接続を特定することができる。例えば、所定の複数のイベントが、時間的に近接して発生した場合、処理ロジックは、このパターンを観測し、フローをより効率的にするための新たな自動化構成を提案することができる。処理ロジックは、ブロック230において、新たな提案をクライアントデバイスに提供することができ、ブロック235において、新たな提案の承認を受信することができる。
本明細書で開示されているこの手順及び他の手順並びに方法に関して、方法及びプロセスにおいて実行される機能は、異なる順序で実行されることもあることが、当業者であれば理解されよう。さらに、説明されたステップ及び動作は、例として提供されているに過ぎず、これらのステップ及び動作のうちの一部は、開示されている実施形態から逸脱することなく、任意的であることもあるし、より少ないステップ及び動作に組み合わされることもあるし、追加のステップ及び動作に拡張されることもある。
本明細書に記載の実施形態は、以下でより詳細に説明される様々なコンピュータハードウェア又はソフトウェアモジュールを含む専用又は汎用のコンピュータの使用を含み得る。
図3は、システムにおける接続の関係を表現する例示的な接続グラフ300を示している。図示されるように、接続グラフ300は、3つのレベルを含むが、接続グラフ300は、任意の数のレベルを含んでもよい。説明のしやすさのために、接続グラフ300が、気象モニタリング及び照明制御に関連して説明される。任意のタイプのシステム、アプリケーション、又は構成が企図されている。接続グラフ300は、図1のゲートウェイ110を含み得るゲートウェイ310の表現を含み得る。
図示されるように、第1のレベルは、論理レベル350を含み得る。論理レベル350は、「気象」カテゴリ及び「照明」カテゴリを含み得る。論理レベル350は、ゲートウェイ310が気象に関連する情報に基づいて照明をどのように制御し得るかの表現を含み得る。
第2のレベルは、デバイス及び/又はサービスレベル355を含み得る。デバイス及び/又はサービスレベル355は、論理レベル350のカテゴリに属するデバイス及び/又はサービスを含み得る。例えば、デバイス及び/又はサービスレベル355は、第1の気象サービスA、第2の気象サービスB、照明デバイスA、及び照明デバイスBを含む。デバイス及び/又はサービスレベル355は、ゲートウェイ310がどのように気象サービスからの情報を使用してライトを制御し得るかの表現を含み得る。
第3のレベルは、機能レベル360を含み得る。機能レベル360は、デバイス及び/又はサービスレベル355のデバイス及び/又はサービスの各々の1つ以上の機能の説明を含み得る。例えば、機能レベル360は、サービスBの気温及び日照時間と、デバイスAのオン/オフ及び明るさと、を含み得る。デバイス及び/又はサービスレベル355は、例えば日の入り時に等、ゲートウェイ310がライトをどのように自動的にオンにし得るかの表現を含み得る。
図4は、複合動作の視覚的提示403がディスプレイデバイスを介してユーザに少なくとも部分的に提示され得る例示的なシステム400を示している。複合動作が提案又はデプロイされたとき、エンドユーザは、潜在的な効果、影響、又は利点を完全には理解しないことがある。複合動作の視覚的提示403及び/又はシミュレーションは、ユーザが、複合動作の構成を承諾するかどうかを決定するのを助けることができる。
少なくとも1つの実施形態において、視覚的提示403は、提案システム405により生成され得るフローチャート提示403及び/又はアクセスルール404を含み得る。提案システム405は、図1の動作環境100のゲートウェイ110、システムサーバ125、又は任意の他のコンポーネントを含み得る。フローチャート提示403は、位置決定410を含み得、これは、GPS位置を含み得る。位置決定は、GPSデバイス(例えば、デバイス106)にアクセスして位置を決定すること415を含み得る。フローチャート提示403はまた、410において決定された位置についての日の出及び/又は日の入りの決定420を含み得る。日の出及び/又は日の入りの決定420は、日の出及び/又は日の入り情報を提供するウェブベースのサービスであり得る日の出及び/又は日の入りサービスにアクセスすること425を含み得る。フローチャート提示403はまた、現在時刻の決定430を含み得、現在時刻の決定430は、時計にアクセスすること435を含み得る。フローチャート提示403はまた、ライトの出力を調整すること440を含み得、ライトの出力を調整すること440は、第1の予め定められた時刻にライトをオフにし、第2の予め定められた時刻にライトをオンにすることを含み得る。ライトの出力を調整することは、ライト制御器にアクセスすること445を含み得る。
アクセスルール404は、実行されるべきタスクと、提案を実行するためにアクセスされるべきデバイス及び/又はサービスと、のサマリを提供することができる。図示されるように、アクセスルール404は、モバイルデバイス又はIoTデバイスへのアクセス、様々な許可要求(例えば、現在のGPS位置、現在時刻、現在の気温、日の出/日の入り、ライトをオン/オフにする)、動作を実行する頻度(例えば、1回、周期的)、及び取るべきアクション(例えば、読み取り、書き込み、変更)を含む。
視覚的提示403はまた、アニメーションベースの提示を含み得る。少なくとも1つの実施形態において、単純なアニメーション(例えば、GIF)を用いて、論理レベルにおける1つの状態/動作を表現することができる。アニメーションを組み合わせて短いビデオクリップを作成することにより、ユーザは、手順全体を容易に理解することができる。
視覚的提示403はまた、シミュレーションベースの方法を含み得る。いくつかの実施形態において、トリガー条件がまれに生じることがあり、したがって、ユーザは、トリガー条件を手動で有効にして、トリガー条件をシミュレートすることができる。次いで、トリガーされた動作が実行され、ユーザは、効果を確認することができる。
ブロック450において、ユーザは、視覚的提示403に示された提案を承認又は却下することができる。ユーザは、ユーザデバイスに入力を提供することにより、提案を承認又は却下することができる。ユーザが提案を承認した場合(ブロック450において「Yes」)、ブロック455において、提案システム405は、提案の承認を、ユーザについての使用履歴に追加することができる。ブロック460において、提案システム405は、この使用履歴を用いて、同一の又は類似する提案を、別のクライアント又はユーザに提供することができる。ユーザが提案を却下した場合(ブロック450において「No」)、提案システム405は、提案の却下を、ユーザについてのレコードに追加することができる。このレコードは、上記の使用履歴と同じであってもよいし異なってもよい。
図5は、本明細書に記載の方法のうちの任意の1つ以上を、コンピューティングデバイス500の例示的な形態であるマシンに実行させる命令のセットが実行され得る、該マシンの図式表現を示している。コンピューティングデバイス500は、本明細書に記載の方法のうちの任意の1つ以上をマシンに実行させる命令のセットが実行され得る、携帯電話機、スマートフォン、ネットブックコンピュータ、ラックマウントサーバ、ルータコンピュータ、サーバコンピュータ、パーソナルコンピュータ、メインフレームコンピュータ、ラップトップコンピュータ、タブレットコンピュータ、デスクトップコンピュータ等を含み得る。代替実施形態において、マシンは、LAN、イントラネット、エクストラネット、又はインターネットにおける他のマシンに接続されてもよい(例えば、ネットワーク化されてもよい)。マシンは、クライアント-サーバネットワーク環境におけるサーバマシンとして動作することができる。マシンは、パーソナルコンピュータ(PC)、セットトップボックス(STB)、サーバ、ネットワークルータ、スイッチ若しくはブリッジ、又は、マシンにより実行されるアクションを指定する命令のセット(シーケンシャル又はその他)を実行することができる任意のマシンを含み得る。さらに、1つのマシンのみが図示されているが、「マシン」という用語はまた、本明細書に記載の方法のうちの任意の1つ以上を実行するための命令の1つのセット(又は複数のセット)を個々に又は集合的に実行するマシンの任意の集合を含み得る。
例示的なコンピューティングデバイス500は、処理デバイス(例えば、プロセッサ)502、メインメモリ504(例えば、読み取り専用メモリ(ROM)、フラッシュメモリ、シンクロナスダイナミックランダムアクセスメモリ(SDRAM)等のDRAM、スタティックメモリ506(例えば、フラッシュメモリ、スタティックRAM(SRAM))、及びデータ記憶デバイス516を含み、これらは、バス508を介して互いと通信する。
処理デバイス502は、マイクロプロセッサ、中央処理装置等といった1つ以上の汎用処理デバイスを表す。より詳細には、処理デバイス502は、複合命令セットコンピューティング(CISC)マイクロプロセッサ、縮小命令セットコンピューティング(RISC)マイクロプロセッサ、超長命令語(VLIW)マイクロプロセッサ、又は、他の命令セットを実装しているプロセッサ若しくは命令セットの組合せを実装しているプロセッサを含み得る。処理デバイス502はまた、特定用途向け集積回路(ASIC)、フィールドプログラマブルゲートアレイ(FPGA)、デジタル信号プロセッサ(DSP)、ネットワークプロセッサ等といった1つ以上の専用処理デバイスを含み得る。処理デバイス502は、本明細書に記載の動作及びステップを実行するための命令526を実行するよう構成される。
コンピューティングデバイス500は、ネットワーク518と通信することができるネットワークインタフェースデバイス522をさらに含み得る。コンピューティングデバイス500はまた、ディスプレイデバイス510(例えば、液晶ディスプレイ(LCD)又は陰極線管(CRT))、英数字入力デバイス512(例えば、キーボード)、カーソル制御デバイス514(例えば、マウス)、及び信号生成デバイス520(例えば、スピーカ)を含み得る。一実装において、ディスプレイデバイス510、英数字入力デバイス512、及びカーソル制御デバイス514は、1つのコンポーネント又はデバイス(例えば、LCDタッチスクリーン)に統合され得る。
データ記憶デバイス516は、本明細書に記載の方法及び/又は機能のうちの任意の1つ以上を具現化する命令526の1つ以上のセットが記憶されるコンピュータ読み取り可能な記憶媒体524を含み得る(例えば、ゲートウェイ110、システムサーバ125)。命令526はまた、コンピューティングデバイス500による実行中には、メインメモリ504及び/又は処理デバイス502内に、完全に又は少なくとも部分的に存在し得、メインメモリ504及び処理デバイス502もコンピュータ読み取り可能な媒体を構成する。命令は、さらに、ネットワークインタフェースデバイス522を介しネットワーク518を介して、送信又は受信され得る。
例示的な実施形態において、コンピュータ読み取り可能な記憶媒体526が、1つの媒体として図示されているが、「コンピュータ読み取り可能な記憶媒体」という用語は、命令の1つ以上のセットを記憶する1つの媒体又は複数の媒体(例えば、集中データベース若しくは分散データベース並びに/又は関連するキャッシュ及びサーバ)を含み得る。「コンピュータ読み取り可能な記憶媒体」という用語はまた、マシンにより実行され、マシンに本開示の方法のうちの任意の1つ以上を実行させる命令のセットを記憶する、符号化する、又は運ぶことができる任意の媒体を含み得る。したがって、「コンピュータ読み取り可能な記憶媒体」という用語は、ソリッドステートメモリ、光媒体、及び磁気媒体を含むが、これらに限定されるものではないと解釈され得る。
本明細書に記載の実施形態は、コンピュータ実行可能な命令又はデータ構造を運ぶ又は記憶するコンピュータ読み取り可能な媒体を使用して実装され得る。そのようなコンピュータ読み取り可能な媒体は、汎用又は専用のコンピュータによりアクセスされ得る任意の利用可能な媒体であり得る。限定ではなく例として、そのようなコンピュータ読み取り可能な媒体は、ランダムアクセスメモリ(RAM)、読み取り専用メモリ(ROM)、電気的に消去可能なプログラム可能な読み取り専用メモリ(EEPROM)、コンパクトディスク読み取り専用メモリ(CD-ROM)若しくは他の光ディスクストレージ、磁気ディスクストレージ若しくは他の磁気記憶デバイス、フラッシュメモリデバイス(例えば、ソリッドステートメモリデバイス)、又は、コンピュータ実行可能な命令又はデータ構造の形態の所望のプログラムコードを運ぶ又は記憶するために使用され得る任意の他の記憶媒体であって、汎用又は専用のコンピュータによりアクセスされ得る任意の他の記憶媒体、を含む非一時的なコンピュータ読み取り可能な記憶媒体を含み得る。これらの組合せも、コンピュータ読み取り可能な媒体の範囲に含まれ得る。
コンピュータ実行可能な命令は、例えば、汎用コンピュータ、専用コンピュータ、又は専用処理デバイス(例えば、1つ以上のプロセッサ)に所定の機能又は機能群を実行させる命令及びデータを含み得る。主題が、構造的特徴及び/又は方法的動作に特有の言葉で説明されたが、請求項において定められる主題は、上述した特定の特徴又は動作に必ずしも限定されるものではないことを理解されたい。そうではなく、上述した特定の特徴及び動作は、請求項を実施する例示的な形態として開示されている。
本明細書において使用される場合、「モジュール」又は「コンポーネント」という用語は、モジュール又はコンポーネントの動作を実行するよう構成されている特定のハードウェア実装、及び/又は、コンピューティングシステムの汎用ハードウェア(例えば、コンピュータ読み取り可能な媒体等)に記憶され得る且つ/又はコンピューティングシステムの汎用ハードウェア(例えば、処理デバイス等)により実行され得るソフトウェアオブジェクト又はソフトウェアルーチンを指し得る。いくつかの実施形態において、本明細書に記載の異なるコンポーネント、モジュール、エンジン、及びサービスは、コンピューティングシステム上で実行されるオブジェクト又はプロセスとして(例えば、別個のスレッドとして)実装され得る。本明細書に記載のシステム及び方法のうちの一部は、(汎用ハードウェアに記憶される且つ/又は汎用ハードウェアにより実行される)ソフトウェアにより実装されるとして一般に説明されるが、特定のハードウェア実装又はソフトウェアと特定のハードウェア実装との組合せも可能であり企図されている。本説明において、「コンピューティングエンティティ」は、本明細書において前に定義された任意のコンピューティングシステム、又は、コンピューティングシステム上で動作する任意のモジュール又はモジュールの組合せであり得る。
本明細書において記載された全ての例及び条件付き言語は、当該技術を促進させるために本発明者によって寄与されるコンセプト及び本発明を読者が理解するのを助ける教育上の目的のために意図され、そのような具体的に記載された例及び条件に限定されるものではないとして解釈されるべきである。本発明の実施形態が詳細に説明されたが、それら実施形態に対する様々な変形、置換、及び変更が、本発明の主旨及び範囲から逸脱することなく可能である。
以上の実施形態に関し、さらに以下の付記を開示する。
(付記1)
ゲートウェイであって、
メモリと、
通信インタフェースと、
前記メモリ及び前記通信インタフェースに動作可能に接続されたプロセッサであって、前記プロセッサは、
前記通信インタフェースを介して、前記ゲートウェイに接続されるデバイスのグラフィカル表現を受信する動作であって、前記グラフィカル表現は、電子フォーマットである、動作と、
前記グラフィカル表現を使用することにより、前記グラフィカル表現に基づいて前記デバイスを特定して、電子データストレージ内の前記デバイスについてのレコードを見つける動作と、
前記通信インタフェースを介して、前記デバイスと利用可能なサービス又は第2のデバイスとの間の可能な接続を探す動作と、
グラフィカルユーザインタフェースを介して、前記可能な接続についての提案を提供する動作と、
前記デバイスの前記可能な接続を有効にする電子承認を受信する動作と、
を実行するよう構成されている、プロセッサと、
を有するゲートウェイ。
(付記2)
前記デバイスの前記グラフィカル表現は、写真、QRコード(登録商標)、及びバーコードのうちの少なくとも1つを含む、付記1に記載のゲートウェイ。
(付記3)
前記プロセッサは、前記グラフィカル表現に基づいて前記デバイスを特定するときに、前記電子データストレージ内の前記レコードから前記デバイスの特性を特定するよう構成されている、付記1に記載のゲートウェイ。
(付記4)
前記デバイスの前記特性は、製造者、モデル、サポートされる通信インタフェース、及びアプリケーションプログラミングインタフェースのうちの少なくとも1つを含む、付記3に記載のゲートウェイ。
(付記5)
前記プロセッサは、前記グラフィカル表現に基づいて前記デバイスを特定するときに、
リモートデータストレージにおいて前記デバイスのためのドライバを特定し、
前記リモートデータストレージから前記ドライバをダウンロードし、
前記ゲートウェイにおいて前記ドライバを構成し、
前記通信インタフェースを選択し、
前記デバイスを接続する
よう構成されている、付記1に記載のゲートウェイ。
(付記6)
前記プロセッサは、前記デバイスと前記利用可能なサービス又は別のデバイスとの間の前記可能な接続を探すときに、デバイス間、サービス間、及び/又はデバイス-サービス間の接続を含む接続グラフに基づいて、既存の接続されているデバイス及び/又はサービスを特定するよう構成されている、付記1に記載のゲートウェイ。
(付記7)
前記接続グラフは、コミュニティから学習された可能な接続及び前記ゲートウェイの現在の接続のうちの少なくとも1つのレコードを含む、付記6に記載のゲートウェイ。
(付記8)
前記プロセッサは、さらに、
前記デバイスに関連付けられる使用パターンをモニタリングする動作と、
前記使用パターンに基づいて新たな提案を生成する動作と、
を実行するよう構成されている、付記1に記載のゲートウェイ。
(付記9)
通信インタフェースを介して、ゲートウェイに接続されるデバイスのグラフィカル表現を受信するステップであって、前記グラフィカル表現は、電子フォーマットである、ステップと、
前記グラフィカル表現を使用することにより、前記デバイスを特定して、電子データストレージ内の前記デバイスについてのレコードを見つけるステップと、
前記通信インタフェースを介して、前記デバイスと利用可能なサービス又は第2のデバイスとの間の可能な接続を探すステップと、
グラフィカルユーザインタフェースを介して、前記可能な接続についての提案を提供するステップと、
前記デバイスの前記可能な接続を有効にする電子承認を受信するステップと、
を含む方法。
(付記10)
前記デバイスの前記グラフィカル表現は、写真、QRコード(登録商標)、及びバーコードのうちの少なくとも1つを含む、付記9に記載の方法。
(付記11)
前記グラフィカル表現に基づいて前記デバイスを特定することは、前記電子データストレージ内の前記レコードから前記デバイスの特性を特定することを含む、付記9に記載の方法。
(付記12)
前記デバイスの前記特性は、製造者、モデル、サポートされる通信インタフェース、及びアプリケーションプログラミングインタフェースのうちの少なくとも1つを含む、付記11に記載の方法。
(付記13)
前記グラフィカル表現に基づいて前記デバイスを特定することは、
リモートデータストレージにおいて前記デバイスのためのドライバを特定することと、
前記リモートデータストレージから前記ドライバをダウンロードすることと、
前記ゲートウェイにおいて前記ドライバを構成することと、
前記デバイスを接続することと、
を含む、付記9に記載の方法。
(付記14)
前記デバイスと前記利用可能なサービス又は別のデバイスとの間の前記可能な接続を探すことは、デバイス間、サービス間、及び/又はデバイス-サービス間の接続を含む接続グラフに基づいて、既存の接続されているデバイス及び/又はサービスを特定することを含む、付記9に記載の方法。
(付記15)
前記接続グラフは、コミュニティから学習された可能な接続及び前記ゲートウェイの現在の接続のうちの少なくとも1つのレコードを含む、付記14に記載の方法。
(付記16)
前記デバイスに関連付けられる使用パターンをモニタリングするステップと、
前記使用パターンに基づいて新たな提案を生成するステップと、
をさらに含む、付記9に記載の方法。
(付記17)
通信インタフェースを介して、ゲートウェイに接続されるデバイスのグラフィカル表現を受信する動作であって、前記グラフィカル表現は、電子フォーマットである、動作と、
前記グラフィカル表現を使用することにより、前記デバイスを特定して、電子データストレージ内の前記デバイスについてのレコードを見つける動作と、
前記通信インタフェースを介して、前記デバイスと利用可能なサービス又は第2のデバイスとの間の可能な接続を探す動作と、
グラフィカルユーザインタフェースを介して、前記可能な接続についての提案を提供する動作と、
前記デバイスの前記可能な接続を有効にする電子承認を受信する動作と、
を実行するための、プロセッサにより実行可能なプログラミングコードを符号化している非一時的なコンピュータ読み取り可能な媒体。
(付記18)
前記デバイスの前記グラフィカル表現は、写真、QRコード(登録商標)、及びバーコードのうちの少なくとも1つを含む、付記17に記載の非一時的なコンピュータ読み取り可能な媒体。
(付記19)
前記グラフィカル表現に基づいて前記デバイスを特定することは、前記電子データストレージ内の前記レコードから前記デバイスの特性を特定することを含む、付記17に記載の非一時的なコンピュータ読み取り可能な媒体。
(付記20)
前記デバイスの前記特性は、製造者、モデル、サポートされる通信インタフェース、及びアプリケーションプログラミングインタフェースのうちの少なくとも1つを含む、付記19に記載の非一時的なコンピュータ読み取り可能な媒体。
106a デバイス
106b デバイス
110 ゲートウェイ
115a ウェブサービス
115b ウェブサービス
124 ネットワーク
125 システムサーバ
128 ユーザデータベース(DB)
130 提案データベース(DB)
136 ローカルデータベース(DB)
140 クラウド
310 ゲートウェイ
405 提案システム

Claims (18)

  1. ゲートウェイであって、
    メモリと、
    通信インタフェースと、
    前記メモリ及び前記通信インタフェースに動作可能に接続されたプロセッサであって、前記プロセッサは、
    前記通信インタフェースを介して、前記ゲートウェイに接続されるデバイスのグラフィカル表現を受信する動作であって、前記グラフィカル表現は、電子フォーマットである、動作と、
    前記グラフィカル表現を使用することにより、前記グラフィカル表現に基づいて前記デバイスを特定して、電子データストレージ内の前記デバイスについてのレコードを見つける動作と、
    前記通信インタフェースを介して、前記デバイスと利用可能なサービス又は第2のデバイスとの間の可能な接続を探す動作であり、前記探す動作は、デバイス間、サービス間、及び/又はデバイス-サービス間の接続を含む接続グラフに基づいて、既存の接続されているデバイス及び/又はサービスを特定することを含む、動作と、
    グラフィカルユーザインタフェースを介して、前記可能な接続についての提案を提供する動作と、
    前記デバイスの前記可能な接続を有効にする電子承認を受信する動作と、
    を実行するよう構成されている、プロセッサと、
    を有するゲートウェイ。
  2. 前記デバイスの前記グラフィカル表現は、写真、QRコード、及びバーコードのうちの少なくとも1つを含む、請求項1に記載のゲートウェイ。
  3. 前記プロセッサは、前記グラフィカル表現に基づいて前記デバイスを特定するときに、前記電子データストレージ内の前記レコードから前記デバイスの特性を特定するよう構成されている、請求項1に記載のゲートウェイ。
  4. 前記デバイスの前記特性は、製造者、モデル、サポートされる通信インタフェース、及びアプリケーションプログラミングインタフェースのうちの少なくとも1つを含む、請求項3に記載のゲートウェイ。
  5. 前記プロセッサは、前記グラフィカル表現に基づいて前記デバイスを特定するときに、
    リモートデータストレージにおいて前記デバイスのためのドライバを特定し、
    前記リモートデータストレージから前記ドライバをダウンロードし、
    前記ゲートウェイにおいて前記ドライバを構成し、
    前記通信インタフェースを選択し、
    前記デバイスを接続する
    よう構成されている、請求項1に記載のゲートウェイ。
  6. 前記接続グラフは、コミュニティから学習された可能な接続及び前記ゲートウェイの現在の接続のうちの少なくとも1つのレコードを含む、請求項に記載のゲートウェイ。
  7. 前記プロセッサは、さらに、
    前記デバイスに関連付けられる使用パターンをモニタリングする動作と、
    前記使用パターンに基づいて新たな提案を生成する動作と、
    を実行するよう構成されている、請求項1に記載のゲートウェイ。
  8. 通信インタフェースを介して、ゲートウェイに接続されるデバイスのグラフィカル表現を受信するステップであって、前記グラフィカル表現は、電子フォーマットである、ステップと、
    前記グラフィカル表現を使用することにより、前記デバイスを特定して、電子データストレージ内の前記デバイスについてのレコードを見つけるステップと、
    前記通信インタフェースを介して、前記デバイスと利用可能なサービス又は第2のデバイスとの間の可能な接続を探すステップであり、前記探すステップは、デバイス間、サービス間、及び/又はデバイス-サービス間の接続を含む接続グラフに基づいて、既存の接続されているデバイス及び/又はサービスを特定することを含む、ステップと、
    グラフィカルユーザインタフェースを介して、前記可能な接続についての提案を提供するステップと、
    前記デバイスの前記可能な接続を有効にする電子承認を受信するステップと、
    を含む方法。
  9. 前記デバイスの前記グラフィカル表現は、写真、QRコード、及びバーコードのうちの少なくとも1つを含む、請求項に記載の方法。
  10. 前記グラフィカル表現に基づいて前記デバイスを特定することは、前記電子データストレージ内の前記レコードから前記デバイスの特性を特定することを含む、請求項に記載の方法。
  11. 前記デバイスの前記特性は、製造者、モデル、サポートされる通信インタフェース、及びアプリケーションプログラミングインタフェースのうちの少なくとも1つを含む、請求項1に記載の方法。
  12. 前記グラフィカル表現に基づいて前記デバイスを特定することは、
    リモートデータストレージにおいて前記デバイスのためのドライバを特定することと、
    前記リモートデータストレージから前記ドライバをダウンロードすることと、
    前記ゲートウェイにおいて前記ドライバを構成することと、
    前記デバイスを接続することと、
    を含む、請求項に記載の方法。
  13. 前記接続グラフは、コミュニティから学習された可能な接続及び前記ゲートウェイの現在の接続のうちの少なくとも1つのレコードを含む、請求項に記載の方法。
  14. 前記デバイスに関連付けられる使用パターンをモニタリングするステップと、
    前記使用パターンに基づいて新たな提案を生成するステップと、
    をさらに含む、請求項8に記載の方法。
  15. 通信インタフェースを介して、ゲートウェイに接続されるデバイスのグラフィカル表現を受信する動作であって、前記グラフィカル表現は、電子フォーマットである、動作と、
    前記グラフィカル表現を使用することにより、前記デバイスを特定して、電子データストレージ内の前記デバイスについてのレコードを見つける動作と、
    前記通信インタフェースを介して、前記デバイスと利用可能なサービス又は第2のデバイスとの間の可能な接続を探す動作であり、前記探す動作は、デバイス間、サービス間、及び/又はデバイス-サービス間の接続を含む接続グラフに基づいて、既存の接続されているデバイス及び/又はサービスを特定することを含む、動作と、
    グラフィカルユーザインタフェースを介して、前記可能な接続についての提案を提供する動作と、
    前記デバイスの前記可能な接続を有効にする電子承認を受信する動作と、
    をプロセッサに実行させるコンピュータプログラム
  16. 前記デバイスの前記グラフィカル表現は、写真、QRコード、及びバーコードのうちの少なくとも1つを含む、請求項1に記載のコンピュータプログラム
  17. 前記グラフィカル表現に基づいて前記デバイスを特定することは、前記電子データストレージ内の前記レコードから前記デバイスの特性を特定することを含む、請求項1に記載のコンピュータプログラム
  18. 前記デバイスの前記特性は、製造者、モデル、サポートされる通信インタフェース、及びアプリケーションプログラミングインタフェースのうちの少なくとも1つを含む、請求項1に記載のコンピュータプログラム
JP2017154198A 2016-12-09 2017-08-09 自動学習ユニバーサルゲートウェイ Active JP7003480B2 (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US15/373,799 2016-12-09
US15/373,799 US10574764B2 (en) 2016-12-09 2016-12-09 Automated learning universal gateway

Publications (2)

Publication Number Publication Date
JP2018098767A JP2018098767A (ja) 2018-06-21
JP7003480B2 true JP7003480B2 (ja) 2022-01-20

Family

ID=62201554

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2017154198A Active JP7003480B2 (ja) 2016-12-09 2017-08-09 自動学習ユニバーサルゲートウェイ

Country Status (3)

Country Link
US (1) US10574764B2 (ja)
JP (1) JP7003480B2 (ja)
DE (1) DE102017111440A1 (ja)

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108447543A (zh) * 2017-02-14 2018-08-24 佛山市顺德区美的电热电器制造有限公司 基于烹饪设备的菜谱推送方法和装置
US10817246B2 (en) * 2018-12-28 2020-10-27 Baidu Usa Llc Deactivating a display of a smart display device based on a sound-based mechanism
US10679133B1 (en) * 2019-06-07 2020-06-09 Peritus.AI, Inc. Constructing and utilizing a knowledge graph for information technology infrastructure
EP4074009A1 (en) * 2019-12-13 2022-10-19 IHI Terrasun Solutions Inc. System and methods for autonomous monitoring and recovery in hybrid energy management
KR102303552B1 (ko) * 2020-01-07 2021-09-23 씨스존 주식회사 학습 기반 메시지 데이터 관리를 지원하는 게이트웨이 장치 및 이의 학습 기반 메시지 데이터 관리 방법
KR102413004B1 (ko) * 2020-12-02 2022-06-24 씨스존 주식회사 스마트 항만 구성에 적용되는 다양한 디바이스의 대용량 트래픽 처리 효율을 개선한 IoT 게이트웨이의 메시지 데이터 관리 방법
US20230308467A1 (en) * 2022-03-24 2023-09-28 At&T Intellectual Property I, L.P. Home Gateway Monitoring for Vulnerable Home Internet of Things Devices

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004007297A (ja) 2002-06-03 2004-01-08 Hiroshi Sato 自動制御装置及び自動制御方法及び自動制御システム、並びに端末。
JP2004021325A (ja) 2002-06-12 2004-01-22 Toshiba Corp 通信制御装置及び通信制御方法
JP2004185612A (ja) 2002-11-22 2004-07-02 Matsushita Electric Ind Co Ltd 操作履歴利用システム及びその方法
WO2004104881A1 (ja) 2003-05-26 2004-12-02 Matsushita Electric Industrial Co., Ltd. 操作履歴利用システム
JP2014511579A (ja) 2011-01-05 2014-05-15 ネクスステップ, インコーポレイテッド 消費者向け電子装置を登録し、制御し、及びサポートするコンシェルジュデバイス及び方法
US20140304381A1 (en) 2013-04-05 2014-10-09 Nokia Corporation Method and apparatus for communicating with smart objects

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
ES2703368T3 (es) 2008-04-01 2019-03-08 Sensus Spectrum Llc Pasarela doméstica definida por software universal
US8851380B2 (en) * 2009-01-27 2014-10-07 Apple Inc. Device identification and monitoring system and method
CN102098350A (zh) * 2009-12-15 2011-06-15 鸿富锦精密工业(深圳)有限公司 信息下载服务器及便携式电子装置和信息获取方法
US8484363B2 (en) * 2011-10-21 2013-07-09 Motorola Mobility Llc Device provisioning or pairing using graphical representation of device identifier
US8752757B2 (en) * 2012-06-14 2014-06-17 General Electric Company Device pairing using digital barcoding
TWI526041B (zh) * 2012-07-17 2016-03-11 廣達電腦股份有限公司 互動系統及互動方法
US9590857B2 (en) * 2014-05-19 2017-03-07 Comcast Cable Communications, Llc Device provisioning
US20160065653A1 (en) 2014-08-26 2016-03-03 Fujitsu Limited Internet of things (iot) device configuration construction
KR102354055B1 (ko) * 2015-07-23 2022-01-24 삼성전자 주식회사 광학사물인식 기반 전자 장치 및 그 전자 장치의 운용 방법
KR102549216B1 (ko) * 2015-11-02 2023-06-30 삼성전자 주식회사 사용자 프로파일을 생성하기 위한 전자 장치 및 방법
US9838832B2 (en) * 2016-01-05 2017-12-05 Rockwell Automation Technologies, Inc. Wireless communication device linking in an industrial automation environment

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004007297A (ja) 2002-06-03 2004-01-08 Hiroshi Sato 自動制御装置及び自動制御方法及び自動制御システム、並びに端末。
JP2004021325A (ja) 2002-06-12 2004-01-22 Toshiba Corp 通信制御装置及び通信制御方法
JP2004185612A (ja) 2002-11-22 2004-07-02 Matsushita Electric Ind Co Ltd 操作履歴利用システム及びその方法
WO2004104881A1 (ja) 2003-05-26 2004-12-02 Matsushita Electric Industrial Co., Ltd. 操作履歴利用システム
JP2014511579A (ja) 2011-01-05 2014-05-15 ネクスステップ, インコーポレイテッド 消費者向け電子装置を登録し、制御し、及びサポートするコンシェルジュデバイス及び方法
JP2016154361A (ja) 2011-01-05 2016-08-25 ネクスステップ, インコーポレイテッドNexstep, Inc. 消費者向け電子装置を登録し、制御し、及びサポートするコンシェルジュデバイス及び方法
US20140304381A1 (en) 2013-04-05 2014-10-09 Nokia Corporation Method and apparatus for communicating with smart objects

Also Published As

Publication number Publication date
DE102017111440A1 (de) 2018-06-14
US20180167467A1 (en) 2018-06-14
JP2018098767A (ja) 2018-06-21
US10574764B2 (en) 2020-02-25

Similar Documents

Publication Publication Date Title
JP7003480B2 (ja) 自動学習ユニバーサルゲートウェイ
US9747083B1 (en) Home device application programming interface
Popa et al. Deep learning model for home automation and energy reduction in a smart home environment platform
EP3019970B1 (en) Interoperability mechanisms for internet of things integration platform
EP3479218B1 (en) Dynamic user interface in machine-to-machine systems
US11056114B2 (en) Voice response interfacing with multiple smart devices of different types
US20150365480A1 (en) Methods and systems for communicating with electronic devices
WO2018063701A1 (en) Unsupervised machine learning ensemble for anomaly detection
US20210165377A1 (en) Method for controlling commercial washing machine by using artificial intelligence and system for the same
CN112740640A (zh) 用于物联网设备的消歧的系统和方法
US20150355609A1 (en) Crowdsourcing automation rules
KR20210077916A (ko) 인공 지능을 이용한 가전 기기의 통합 제어 방법 및 그 시스템
Sai et al. Smart Home Messenger Notifications System using IoT
CN112823492A (zh) 用于为网络提供端到端解决方案的系统、设备和方法
US20210191345A1 (en) Home automation (ha) system including virtual assistant audible notification based upon learned device operational pattern and related methods
Brune An IoT System that Combines Externally Sourced and Public Sensor Data with Internal Enterprise Sensor Data for Action Determination
US20230122787A1 (en) Systems and methods for offloading machine computation from a home appliance to a remote device
Bertsch Sensor Network Trained To Understand Arbitrary Labels
Von Dehsen Camera Lens with Display Mode
Von Dehsen Providing a Camera Stream on an Ancillary Display
Tait Smart Rubbish Bins
Tait Internet of Things Cross Device Theming
Wilkinson The Internet of Things
Benassi User Notification Interface Using Internet of Things Devices
Chang et al. Intelligent Voice Assistant Extended Through Voice Relay System

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20200514

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20210706

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20210903

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20211130

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20211213

R150 Certificate of patent or registration of utility model

Ref document number: 7003480

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150