DE202017105942U1

DE202017105942U1 - Verarbeiten von Sprachbefehlen basierend auf der Vorrichtungstopologie

Info

Publication number: DE202017105942U1
Application number: DE202017105942.1U
Authority: DE
Original assignee: Google LLC
Current assignee: Google LLC
Priority date: 2016-10-03
Filing date: 2017-09-28
Publication date: 2018-01-10
Anticipated expiration: 2027-09-29
Also published as: KR20220074984A; GB201715844D0; JP6959384B2; KR20190042098A; GB202000173D0; JP6683893B2; US20200286482A1; GB2557404B; CN107895574B; US20180096683A1; DE102017122644A1; CN113140218A; EP3507798A1; GB2557404A; US20230186915A1; CN107895574A; KR102095514B1; KR20200035476A; JP2019536072A; JP2020126248A

Abstract

Computersystem, das umfasst: einen oder mehrere Prozessoren; und eine oder mehrere Speichervorrichtungen, wobei die eine oder die mehreren Speichervorrichtungen computerlesbare Anweisungen speichern, die, wenn sie durch den einen oder die mehreren Prozessoren ausgeführt werden, den einen oder die mehreren Prozessoren veranlassen, Operationen auszuführen, wobei die Operationen umfassen: Empfangen von Daten, die eine Sprachäußerung angeben, wobei die Sprachäußerung durch einen Anwender einer Steuervorrichtung bereitgestellt wird; Zugreifen auf eine Darstellung einer Vorrichtungstopologie, wobei die Darstellung der Vorrichtungstopologie mehrere intelligente Vorrichtungen definiert, die einer oder mehreren Strukturen zugeordnet sind, wobei die Darstellung der Vorrichtungstopologie ferner einen Ort jeder der mehreren Vorrichtungen innerhalb der zugeordneten Strukturen definiert; Bestimmen einer Umschreibung der Sprachäußerung wenigstens teilweise basierend auf der Darstellung der Vorrichtungstopologie; und Bestimmen einer oder mehrerer ausgewählter Vorrichtungen und einer oder mehrerer durch die eine oder die mehreren ausgewählten Vorrichtungen auszuführenden Handlungen wenigstens teilweise basierend auf der bestimmten Umschreibung und der Darstellung der Vorrichtungstopologie.

Description

GEBIET
Die vorliegende Offenbarung bezieht sich im Allgemeinen auf das Interpretieren von Sprachäußerungen und spezieller auf das Interpretieren von Sprachäußerungen basierend auf einer Topologie von Vorrichtungen.
HINTERGRUND
Es gibt die Ausbreitung von intelligenten, mit einem Netz verbundenen Multi-Sensing-Vorrichtungen, wie z. B. Lautsprechern, Hausalarmanlagen, Türverriegelungen, Kameras, Beleuchtungssystemen, Laufbändern, Waagen, intelligenten Betten, Bewässerungssystemen, Garagentüröffnern, Haushaltsgeräten, Babyphonen, Brandmeldern usw. Diese intelligenten Vorrichtungen können sich z. B. innerhalb der Abgrenzungen eines Gebäudes befinden, wobei ein Anwender wünschen kann, mit derartigen intelligenten Vorrichtungen in Wechselwirkung zu treten. Um dies auszuführen, kann der Anwender eine Steuervorrichtung verwenden, um mit den intelligenten Vorrichtungen, z. B. über ein Netz, drahtlos zu kommunizieren.
In einigen Fällen kann der Anwender wünschen, mit einer oder mehreren intelligenten Vorrichtungen durch das Bereitstellen eines Sprachbefehls oder einer Sprachäußerung für die Steuervorrichtung zu kommunizieren. Die herkömmlichen Sprachbefehls-Verarbeitungstechniken verwenden verschiedene geeignete Techniken der automatischen Spracherkennung, der Verarbeitung natürlicher Sprache und/oder des Verstehens natürlicher Sprache, um die Sprachäußerung zu verarbeiten und zu interpretieren und um die intelligente(n) Vorrichtung(en) in Übereinstimmung mit der Sprachäußerung zu steuern. Derartige herkömmliche Techniken sind jedoch oft nicht imstande, komplexe Sprachäußerungen zu interpretieren, wobei sie eine Anforderung für mehr Informationen von dem Anwender erfordern können. Insbesondere fehlt derartigen herkömmlichen Techniken oft ein ausreichendes Verständnis der Vorrichtungen innerhalb eines intelligenten Heimnetzes und der Beziehungen zwischen derartigen Vorrichtungen innerhalb des Netzes.
ZUSAMMENFASSUNG
Die Aspekte und Vorteile der Ausführungsformen der vorliegenden Offenbarung werden teilweise in der folgenden Beschreibung dargelegt oder können aus der Beschreibung erlernt werden oder können durch die Praxis der Ausführungsformen erlernt werden. In Übereinstimmung mit den Anforderungen des Gebrauchsmustergesetzes sind nur Vorrichtungen, wie sie in den beigefügten Ansprüchen definiert sind, aber keine Verfahren dem Schutz unterworfen und der Gegenstand des Gebrauchsmusters. Wo in der Beschreibung im Folgenden auf Verfahren Bezug genommen wird, sollen diese Bezugnahmen lediglich für das bessere Verständnis der Vorrichtung oder der Vorrichtungen, die in den beigefügten Ansprüchen geschützt sind, dienen.
Ein beispielhafter Aspekt der vorliegenden Offenbarung ist auf ein computerimplementiertes Verfahren zum Verarbeiten von Sprachäußerungen gerichtet. Das Verfahren enthält das Empfangen durch eine oder mehrere Computervorrichtungen von Daten, die eine Sprachäußerung angeben. Die Sprachäußerung wird durch einen Anwender einer Steuervorrichtung bereitgestellt. Das Verfahren enthält ferner das Zugreifen durch die eine oder die mehreren Computervorrichtungen auf eine Darstellung einer Vorrichtungstopologie. Die Darstellung der Vorrichtungstopologie definiert mehrere intelligente Vorrichtungen, die einer oder mehreren Strukturen zugeordnet sind. Die Darstellung der Vorrichtungstopologie definiert ferner einen Ort jeder der mehreren Vorrichtungen innerhalb der zugeordneten Strukturen. Das Verfahren enthält ferner das Bestimmen durch die eine oder die mehreren Computervorrichtungen einer Umschreibung der Sprachäußerung wenigstens teilweise basierend auf der Darstellung der Vorrichtungstopologie. Das Verfahren enthält ferner das Bestimmen durch die eine oder die mehreren Computervorrichtungen einer oder mehrerer ausgewählter Vorrichtungen und einer oder mehrerer Handlungen, die durch die eine oder die mehreren ausgewählten Vorrichtungen auszuführen sind, wenigstens teilweise basierend auf der bestimmten Umschreibung und der Darstellung der Vorrichtungstopologie.
Andere beispielhafte Aspekte der vorliegenden Offenbarung sind auf Systeme, Vorrichtungen, greifbare, nichttransitorische computerlesbare Medien, Anwenderschnittstellen, Speichervorrichtungen und elektronische Vorrichtungen zum Verarbeiten von Sprachbefehlen gerichtet.
Diese und andere Merkmale, Aspekte und Vorteile der verschiedenen Ausführungsformen werden unter Bezugnahme auf die folgende Beschreibung und die beigefügten Ansprüche besser verstanden. Die beigefügten Zeichnungen, die in diese Beschreibung aufgenommen sind und einen Teil dieser Beschreibung bilden, veranschaulichen Ausführungsformen der vorliegenden Offenbarung und dienen zusammen mit der Beschreibung dazu, die in Beziehung stehenden Prinzipien zu erklären.
KURZBESCHREIBUNG DER ZEICHNUNGEN
In der Beschreibung ist eine ausführliche Erörterung der Ausführungsformen, die an einen Durchschnittsfachmann auf dem Gebiet gerichtet ist, dargelegt, die auf die beigefügten Figuren Bezug nimmt, worin:
1 einen Überblick eines beispielhaften Systems zum Verarbeiten von Sprachbefehlen gemäß den beispielhaften Ausführungsformen der vorliegenden Offenbarung darstellt;
2 eine beispielhafte Anwenderschnittstelle zum Implementieren einer Darstellung einer Vorrichtungstopologie gemäß den beispielhaften Ausführungsformen der vorliegenden Offenbarung darstellt;
3 einen Blockschaltplan einer beispielhaften Darstellung einer Vorrichtungstopologie gemäß den beispielhaften Ausführungsformen der vorliegenden Offenbarung darstellt;
4 einen Ablaufplan eines beispielhaften Verfahrens zum Verarbeiten von Sprachbefehlen gemäß den beispielhaften Ausführungsformen der vorliegenden Offenbarung darstellt;
5 einen Ablaufplan eines beispielhaften Verfahrens zum Erzeugen eines personalisierten Sprachmodells gemäß den beispielhaften Ausführungsformen der vorliegenden Offenbarung darstellt;
6 einen Ablaufplan eines beispielhaften Verfahrens zum Bestimmen einer Umschreibung einer Sprachäußerung gemäß den beispielhaften Ausführungsformen der vorliegenden Offenbarung darstellt;
7 einen Ablaufplan eines beispielhaften Verfahrens zum Interpretieren einer Umschreibung einer Sprachäußerung gemäß den beispielhaften Ausführungsformen der vorliegenden Offenbarung darstellt;
8 einen Überblick eines beispielhaften Systems gemäß den beispielhaften Ausführungsformen der vorliegenden Offenbarung darstellt.
AUSFÜHRLICHE BESCHREIBUNG
Nun wird ausführlich auf die Ausführungsformen Bezug genommen, von denen ein oder mehrere Beispiele in den Zeichnungen veranschaulicht sind. Jedes Beispiel ist zur Erklärung der Ausführungsformen und nicht zur Einschränkung der vorliegenden Offenbarung bereitgestellt. In der Tat wird es für die Fachleute auf dem Gebiet offensichtlich sein, dass verschiedene Modifikationen und Variationen an den Ausführungsformen vorgenommen werden können, ohne vom Schutzumfang oder Erfindungsgedanken der vorliegenden Offenbarung abzuweichen. Die Merkmale, die als Teil einer Ausführungsform veranschaulicht oder beschrieben sind, können z. B. mit einer anderen Ausführungsform verwendet werden, um eine noch weitere Ausführungsform zu liefern. Folglich ist vorgesehen, dass die Aspekte der vorliegenden Offenbarung derartige Modifikationen und Variationen abdecken.
Beispielhafte Aspekte der vorliegenden Offenbarung sind auf das Steuern intelligenter Vorrichtungen basierend auf den Sprachbefehlen von einem Anwender gerichtet. Eine Sprachäußerung kann z. B. von einem Anwender einer Steuervorrichtung empfangen werden. Die Sprachäußerung kann ein durch einen Anwender unmittelbar an der Anwendervorrichtung, die konfiguriert ist, um eine oder mehrere intelligente Vorrichtungen zu steuern, gesprochener Befehl sein. Eine intelligente Vorrichtung kann eine intelligente, mit einem Netz verbundene Multi-Sensing-Vorrichtung sein, die konfiguriert ist, um mit einem zentralen Server, einem Cloud-Computersystem und/oder einer oder mehreren zusätzlichen intelligenten Vorrichtungen zu kommunizieren, um irgendwelche von einer Vielfalt nützlicher intelligenter Hausdienste bereitzustellen. Eine intelligente Vorrichtung kann z. B. ein Klimatisierungssystem, eine Beleuchtungsvorrichtung, ein Heimkino- und Unterhaltungssystem, ein Sicherheitssystem, ein automatisches Türverriegelungssystem, eine Thermostatvorrichtung, ein Heimautomatisierungssystem, ein Lautsprecher, eine Kameravorrichtung, ein Laufband, eine Waage, ein intelligentes Bett, ein Bewässerungssystem, ein Garagentüröffner, ein Haushaltsgerät, ein Babyphon, ein Brandmelder und/oder eine andere geeignete Vorrichtung oder ein anderes geeignetes System sein oder anderweitig diesen zugeordnet sein.
Ein Anwender, der wünscht, eine oder mehrere intelligente Vorrichtungen zu steuern, kann eine Darstellung einer Vorrichtungstopologie konstruieren. Die Darstellung der Vorrichtungstopologie kann unter Verwendung verschiedener geeigneter Techniken konstruiert werden und kann irgendein geeignetes Format und/oder irgendeine geeignete Struktur sein, das bzw. die die Topologie und die Organisation einer oder mehrerer intelligenter Vorrichtungen innerhalb einer oder mehrerer Strukturen darstellen kann. Die Darstellung der Vorrichtungstopologie kann eine oder mehrere Strukturen, die dem Anwender zugeordnet sind, definieren und/oder organisieren. Eine dem Anwender zugeordnete Struktur kann z. B. ein Haus, ein Unternehmen, ein Fahrzeug, ein Büro und/oder irgendeine andere geeignete Struktur sein, die dem Anwender zugeordnet ist. Der Anwender kann jede Struktur in einen oder mehrere Räume (z. B. Schlafzimmer, Wohnzimmer, Küche) organisieren und kann eine oder mehrere intelligente Vorrichtungen dem einen oder den mehreren Räumen zuordnen. Der Anwender kann z. B. eine oder mehrere intelligente Leuchten einem ersten Raum einer speziellen Struktur zuordnen und ein oder mehrere Türverriegelungssysteme einem zweiten Raum der Struktur zuordnen. Der Anwender kann dann eine oder mehrere verschiedene intelligente Vorrichtungen einem oder mehreren Räumen innerhalb einer zweiten Struktur zuordnen.
Der Anwender kann den intelligenten Vorrichtungen innerhalb der Darstellung der Vorrichtungstopologie eine oder mehrere Kennungen zuordnen. Die Kennungen können durch den Anwender gewählt werden und den jeweiligen intelligenten Vorrichtungen innerhalb der Darstellung der Vorrichtungstopologie zugeordnet werden. Die Kennung(en) kann (können) Spitznamen und/oder Pseudonyme enthalten, die durch den Anwender für die intelligenten Vorrichtungen gewählt werden (z. B. Couchleuchte, Vordertürverriegelung, Schlafzimmerlautsprecher usw.). In dieser Weise können die Kennungen Namen oder Pseudonyme der jeweiligen intelligenten Vorrichtungen sein, die der Anwender wahrscheinlich verwendet, wenn er Sprachäußerungen zum Steuern der intelligenten Vorrichtungen bereitstellt.
Die Darstellung der Vorrichtungstopologie kann ferner ein oder mehrere Vorrichtungsattribute, die den jeweiligen Vorrichtungen zugeordnet sind, spezifizieren. Die Vorrichtungsattribute können einer oder mehreren Handlungen zugeordnet sein, für die die intelligenten Vorrichtungen konfiguriert sind, um sie auszuführen. Die einer Beleuchtungsvorrichtung zugeordneten Vorrichtungsattribute können z. B. eine Einschaltfähigkeit, eine Ausschaltfähigkeit, eine Dimmfähigkeit und/oder andere geeignete Attribute, die der Beleuchtungsvorrichtung zugeordnet sind, enthalten. Als ein weiteres Beispiel kann eine automatische Türverriegelungsvorrichtung eine Verriegelungsfähigkeit, eine Entriegelungsfähigkeit und/oder eine andere geeignete Fähigkeit enthalten.
Der Anwender kann einer Steuervorrichtung eine Sprachäußerung bereitstellen. Die Sprachäußerung kann irgendeine geeignete Sprachäußerung sein, die eine Absicht spezifiziert, eine oder mehrere intelligente Vorrichtungen zu steuern. Ein Anwender kann z. B. eine Sprachäußerung mit der Absicht des Änderns eines Zustands einer intelligenten Vorrichtung (z. B. des Ein- oder Ausschaltens einer intelligenten Vorrichtung, des Vergrößerns der Lautstärke einer intelligenten Vorrichtung usw.) oder mit der Absicht des Empfangens von Informationen, die der intelligenten Vorrichtung zugeordnet sind, (z. B. von Informationen, die einer aktuellen Temperatur zugeordnet sind, usw.) bereitstellen. Eine Steuervorrichtung kann irgendeine geeignete Vorrichtung sein, die eine Sprachäußerung von dem Anwender empfangen und z. B. über ein Netz mit einer oder mehreren intelligenten Vorrichtungen oder einem zentralen Server kommunizieren kann. Die Steuervorrichtung kann eine Vorrichtung sein, zu der der Anwender beim Bereitstellen der Sprachäußerung spricht. In einigen Implementierungen kann die Steuervorrichtung eine Anwendervorrichtung sein, die dem Anwender zugeordnet ist, wie z. B. ein Smartphone, ein Tablet, ein Laptop-Computer, ein Desktop-Computer, eine tragbare Computervorrichtung und/oder eine andere geeignete Anwendervorrichtung. In einigen Implementierungen kann die Steuervorrichtung eine intelligente Vorrichtung sein, die konfiguriert ist, um eine Sprachäußerung zu empfangen. Die Steuervorrichtung kann z. B. eine intelligente Vorrichtung sein, die in der Darstellung der Vorrichtungstopologie spezifiziert ist.
Die Sprachäußerung kann interpretiert werden, um einen Steuerbefehl zu bestimmen, der durch den Anwender für eine oder mehrere intelligente Vorrichtungen vorgesehen ist. In dieser Hinsicht kann an der Sprachäußerung wenigstens teilweise basierend auf der Darstellung der Vorrichtungstopologie eine Spracherkennung ausgeführt werden. Die Daten, die die Sprachäußerung angeben, können z. B. einem oder mehreren Sprachmodellen bereitgestellt werden, um eine Umschreibung der Sprachäußerung zu bestimmen. In einigen Implementierungen kann ein allgemeines Sprachmodell zu der Darstellung der Vorrichtungstopologie beeinflusst werden, um eine Textumschreibung der Sprachäußerung zu bestimmen. Das allgemeine Sprachmodell kann mehrere häufige Redewendungen enthalten und Wahrscheinlichkeitsschätzungen mit jeder Redewendung korrelieren. Jede Redewendung kann eine Folge aus einem oder mehreren Wörtern enthalten. Die Wahrscheinlichkeitsschätzungen können ein vorhergesagtes Auftreten der jeweiligen Redewendungen spezifizieren. Es wird erkannt, dass verschiedene geeignete allgemeine Sprachmodelle verwendet werden können, ohne vom Schutzumfang der vorliegenden Offenbarung abzuweichen.
Das allgemeine Sprachmodell kann zu der Darstellung der Vorrichtungstopologie beeinflusst werden, um ein personalisiertes Sprachmodell zu erzeugen. Insbesondere kann das allgemeine Sprachmodell durch das Vergrößern der Wahrscheinlichkeitsschätzungen, die einem oder mehreren Wörtern oder einer oder mehreren Redewendungen zugeordnet sind, die der Darstellung der Vorrichtungstopologie zugeordnet sind, beeinflusst werden. Das eine oder die mehreren Wörter oder die eine oder die mehreren Redewendungen können z. B. Raumnamen, Strukturnamen, Vorrichtungskennungen, Begriffe, die den Vorrichtungsattributen zugeordnet sind, usw. enthalten, die in der Darstellung der Vorrichtungstopologie spezifiziert sind. In dieser Weise kann das personalisierte Sprachmodell eine höhere Wahrscheinlichkeit des Auftretens der Wörter oder Redewendungen, die in der Darstellung der Vorrichtungstopologie enthalten sind, schätzen.
Die Daten, die die Sprachäußerung angeben, können dem personalisierten Sprachmodell bereitgestellt werden, um eine Textumschreibung der Sprachäußerung basierend auf dem personalisierten Sprachmodell zu bestimmen. In einigen Implementierungen können die Daten, die die Sprachäußerung angeben, dem allgemeinen Sprachmodell bereitgestellt werden, um eine erste Umschreibung der Sprachäußerung basierend auf dem allgemeinen Sprachmodell zu bestimmen. Ein erster Vertrauenspunktestand kann für die erste Umschreibung bestimmt werden, der ein Vertrauen in die Genauigkeit der ersten Umschreibung angibt. Die Daten, die die Sprachäußerung angeben, können dann dem personalisierten Sprachmodell bereitgestellt werden, um eine zweite Umschreibung der Sprachäußerung basierend auf dem personalisierten Sprachmodell zu bestimmen. Für die zweite Umschreibung kann ein zweiter Vertrauenspunktestand bestimmt werden, der ein Vertrauen in die Genauigkeit der zweiten Umschreibung angibt. In einigen Implementierungen kann die Umschreibung, die den höheren Vertrauenspunktestand aufweist, verwendet werden. In einigen Implementierungen können die Daten, die die Sprachäußerung angeben, ferner einem oder mehreren zusätzlichen Sprachmodellen, wie z. B. einem oder mehreren spezialisierten Sprachmodellen, die verschiedenen geeigneten Anwendungen zugeordnet sind, bereitgestellt werden. In dieser Weise können eine oder mehrere zusätzliche Umschreibungen unter Verwendung der zusätzlichen Sprachmodelle bestimmt werden, wobei jede Umschreibung einen zugeordneten Vertrauenspunktestand aufweist. Die Umschreibung mit dem höchsten Vertrauenspunktestand kann verwendet werden.
Sobald die Umschreibung der Sprachäußerung bestimmt worden ist, können eine oder mehrere zu steuernde Vorrichtungen (z. B. ausgewählte Vorrichtungen) und eine oder mehrere Handlungen, die durch die ausgewählten Vorrichtungen auszuführen sind, bestimmt werden. Es kann z. B. unter Verwendung einer oder mehrerer Techniken der semantischen Interpretation eine semantische Interpretation der Umschreibung bestimmt werden. Die semantische Interpretation kann eine Darstellung der konzeptionellen Bedeutung der Umschreibung bereitstellen. In dieser Weise kann die Interpretation der Umschreibung eine Interpretation der Absicht des Anwenders beim Ausführen der Sprachäußerung bereitstellen. Falls als ein Beispiel einer Umschreibung eine Sprachäußerung von einem Anwender ”schalte die Leuchten ein” aussagt, kann die semantische Interpretation der Umschreibung versuchen, eine auszuführende Handlung (z. B. eine Aktivierung einer oder mehrerer Leuchtenvorrichtungen) und eine oder mehrere ausgewählte Vorrichtungen, um die Handlung auszuführen, (z. B. eine oder mehrere geeignete Beleuchtungsvorrichtungen, die vorgesehen sind, um durch den Anwender gesteuert werden) zu bestimmen.
Die Interpretation kann wenigstens teilweise basierend auf der Darstellung der Vorrichtungstopologie bestimmt werden. Es kann z. B. auf die Darstellung der Vorrichtungstopologie zugegriffen werden, um eine oder mehrere ausgewählte Vorrichtungen und/oder die auszuführende Handlung zu bestimmen. In dieser Weise kann auf die Darstellung der Vorrichtungstopologie zugegriffen werden und sie mit der Umschreibung verglichen werden, um eine Übereinstimmung zwischen einem oder mehreren Begriffen, die der Umschreibung zugeordnet sind, und einem oder mehreren Begriffen, die der Darstellung der Vorrichtungstopologie zugeordnet sind, zu bestimmen. Falls die Umschreibung z. B. ”schalte die Couchleuchte ein” lautet, kann auf die Darstellung der Vorrichtungstopologie zugegriffen werden, um zu bestimmen, ob es eine in der Darstellung der Vorrichtungstopologie spezifizierte Vorrichtung gibt, die eine Vorrichtungskennung ”Couchleuchte” aufweist.
Wie angegeben ist, können außerdem eine oder mehrere Handlungen, die durch die ausgewählte(n) Vorrichtung(en) auszuführen sind, bestimmt werden. Die Handlung(en) kann (können) z. B. basierend auf der Interpretation der Umschreibung bestimmt werden. In einigen Implementierungen können die Handlungen wenigstens teilweise basierend auf den Vorrichtungsattributen, die der ausgewählten Vorrichtung (den ausgewählten Vorrichtungen) zugeordnet sind, bestimmt werden, wie in der Darstellung der Vorrichtungstopographie spezifiziert ist. In dieser Weise kann eine identifizierte Handlung eine Handlung sein, die eine ausgewählte Vorrichtung ausführen kann.
In einigen Fällen kann eine direkte Übereinstimmung zwischen den in der Vorrichtungstopologie spezifizierten Vorrichtungskennungen und den Begriffen der Umschreibung nicht bestimmt werden. Der Anwender kann z. B. keine Vorrichtungskennung spezifizieren, wenn er die Sprachäußerung ausführt, sondern er kann eine informellere Anweisung geben. Als ein weiteres Beispiel können die in der Darstellung der Vorrichtungstopologie spezifizierten mehreren Strukturen einen oder mehrere Räume und/oder eine oder mehrere Vorrichtungen, die die gleichen oder ähnliche Namen oder Kennungen aufweisen, enthalten. Als ein Beispiel kann eine Umschreibung, die ”schalte die Leuchten im Schlafzimmer ein” lautet, keinen Hinweis auf eine spezifische Vorrichtungskennung enthalten, so dass keine direkte Übereinstimmung bestimmt werden kann. In einem derartigen Fall kann auf die Darstellung der Vorrichtungstopologie zugegriffen werden, um eine oder mehrere ausgewählte Vorrichtungen zu folgern. Es kann z. B. auf die Darstellung der Vorrichtungstopologie zugegriffen werden, um einen als ”Schlafzimmer” bezeichneten Raum in einer in der Darstellung der Vorrichtungstopologie spezifizierten Struktur zu identifizieren. Falls ein derartiges ”Schlafzimmer” identifiziert wird, können eine oder mehrere geeignete Vorrichtungen, die sich innerhalb des Schlafzimmers befinden, identifiziert werden. Falls die Darstellung der Vorrichtungstopologie z. B. eine oder mehrere Beleuchtungsvorrichtungen innerhalb des Schlafzimmers spezifiziert, kann wenigstens eine der einen oder der mehreren Beleuchtungsvorrichtungen als die ausgewählte(n) Vorrichtung(en) gefolgert werden.
In den Fällen, in denen in der Umschreibung keine Vorrichtungskennung spezifiziert ist, können die eine oder die mehreren ausgewählten Vorrichtungen und/oder die auszuführende(n) Handlung(en) wenigstens teilweise basierend auf den in der Darstellung der Vorrichtungstopologie spezifizierten Vorrichtungsattributen bestimmt werden. Die in der Darstellung der Vorrichtungstopologie spezifizierten Vorrichtungsattribute können z. B. mit der Umschreibung verglichen werden, um eine oder mehrere Vorrichtungen zu bestimmen, die eine in der Umschreibung spezifizierte Handlung ausführen können. In dieser Weise können die ausgewählten Vorrichtungen wenigstens teilweise basierend auf den jeweiligen Vorrichtungsattributen gefolgert werden.
In einigen Implementierungen können die ausgewählten Vorrichtungen und/oder die auszuführenden Handlungen wenigstens teilweise basierend auf den kontextbezogenen Daten, wie z. B. einem Ort des Anwenders, bestimmt werden. In Reaktion auf das Empfangen einer Sprachäußerung von einem Anwender kann z. B. ein Ort des Anwenders bestimmt werden. Der Ort kann unter Verwendung verschiedener geeigneter Ortsbestimmungstechniken bestimmt werden. Die Ortsbestimmungstechnik kann wenigstens teilweise basierend auf der Steuervorrichtung, der der Anwender die Sprachäußerung bereitstellt, bestimmt werden. Die Steuervorrichtung ist z. B. eine intelligente Vorrichtung, die in der Darstellung der Vorrichtungstopologie spezifiziert ist, wobei der Anwenderort auf die Struktur und/oder den Raum abgebildet werden kann, der bzw. dem die Steuervorrichtung in der Darstellung der Vorrichtungstopologie zugeordnet ist. Falls die Steuervorrichtung eine Anwendervorrichtung ist, die in der Darstellung der Vorrichtungstopologie nicht spezifiziert ist, kann der Anwenderort unter Verwendung einer oder mehrerer Ortsbestimmungstechniken, wie z. B. der Techniken unter Verwendung drahtloser Zugangspunkte oder Nahbereichs-Bakenvorrichtungen, die einer oder mehreren intelligenten Vorrichtungen zugeordnet sind, und/oder anderer geeigneter Ortsbestimmungstechniken, bestimmt werden. Der Anwenderort kann dann auf eine oder mehrere Strukturen und/oder einen oder mehrere Räume, die in der Darstellung der Vorrichtungstopologie spezifiziert sind, abgebildet werden.
In dieser Weise kann der Anwenderort als die kontextbezogenen Daten beim Bestimmen einer oder mehrerer ausgewählter Vorrichtungen verwendet werden. In Reaktion auf das Empfangen einer Umschreibung, die ”schalte die Leuchten ein” lautet, kann der Anwenderort bestimmt und auf einen oder mehrere Räume und/oder eine oder mehrere Strukturen, die in der Darstellung der Vorrichtungstopologie spezifiziert sind, abgebildet werden, um die Struktur und den Raum, in dem sich der Anwender befindet, zu bestimmen. Innerhalb einer derartigen Struktur und eines derartigen Raums können eine oder mehrere Leuchtenvorrichtungen identifiziert werden, um die ausgewählten Vorrichtungen zu bestimmen, die vorgesehen sind, um durch den Anwender gesteuert zu werden. In dieser Weise kann in einem derartigen Fall gefolgert werden, dass die Leuchten, die der Anwender zu steuern wünscht, die Leuchten in dem Raum sind, in dem sich der Anwender gegenwärtig befindet.
Bei einer Bestimmung der einen oder der mehreren ausgewählten Vorrichtungen, die zu steuern sind, und der einen oder der mehreren Handlungen, die durch die ausgewählte(n) Vorrichtung(en) auszuführen sind, können ein oder mehrere Steuerbefehle erzeugt und der ausgewählten Vorrichtung (den ausgewählten Vorrichtungen) jeweils bereitgestellt werden. Der eine oder die mehreren Steuerbefehle können Anweisungen für die ausgewählte(n) Vorrichtung(en) enthalten, um die spezifizierten Handlungen auszuführen. Beim Empfangen der geeigneten Steuerbefehle kann die ausgewählte Vorrichtung (können die ausgewählten Vorrichtungen) die geeigneten Handlungen in Übereinstimmung mit dem empfangenen Steuerbefehl (den empfangenen Steuerbefehlen) ausführen. In einigen Implementierungen kann dem Anwender eine Aufforderung (z. B. innerhalb einer durch die Steuervorrichtung oder eine andere geeignete Vorrichtung angezeigten Anwenderschnittstelle) bereitgestellt werden, die anfordert, dass der Anwender die Sprachäußerung klarstellt und/oder manuell eine oder mehrere durch die eine oder die mehreren intelligenten Vorrichtungen auszuführenden Handlungen auswählt, falls eine oder mehrere ausgewählte Vorrichtungen und/oder auszuführende Handlungen basierend auf der empfangenen Sprachäußerung nicht bestimmt werden können.
In dieser Weise können die beispielhaften Aspekte der vorliegenden Offenbarung verwendet werden, um eine Effizienz und eine Genauigkeit der Sprachbefehlsverarbeitung für die Verwendung in einer Umgebung eines intelligenten Hauses und/oder des Internets der Dinge zu verbessern. Insbesondere kann das Organisieren der intelligenten Vorrichtungen bezüglich einer Topologie einer oder mehrerer Strukturen, in denen sich die intelligenten Vorrichtungen befinden, eine robustere Interpretation der Sprachäußerungen erlauben und kann eine natürliche ”gesprächsartige” Kommunikationserfahrung zwischen dem Anwender und der Steuervorrichtung erlauben. Die Berücksichtigung der kontextbezogenen Daten, wie z. B. des Anwenderortes, im Zusammenhang mit der Vorrichtungstopologie kann eine größere Fähigkeit schaffen, um die Bedeutung der durch den Anwender bereitgestellten Sprachäußerungen zu folgern. Zusätzlich können derartige Sprachbefehls-Verarbeitungstechniken durch das Fördern einer Fähigkeit, einen umfassenderen Bereich von Sprachäußerungen genauer und schneller zu interpretieren, weniger Kommunikationsrunden zwischen dem Anwender und dem System ermöglichen. Die Anzahl der durch die intelligente Vorrichtung ausgeführten Operationen als solche kann verringert werden, es kann z. B. das Empfangen und Verarbeiten einer wiederholten Sprachäußerung oder das Ausgeben einer Anforderung für mehr Informationen und das Verarbeiten der Antwort vermieden werden, wobei folglich die Leistungsaufnahme der intelligenten Vorrichtung verringert werden kann. Obwohl die vorliegende Offenbarung auf das Verarbeiten von Sprachbefehlen in einer Umgebung eines intelligenten Hauses und/oder des Internets der Dinge gerichtet ist, wird erkannt, dass die beispielhaften Aspekte der vorliegenden Offenbarung auf verschiedene andere geeignete Anwendungen und Umgebungen ausgedehnt werden können, ohne vom Schutzumfang der vorliegenden Offenbarung abzuweichen. Die beispielhaften Aspekte der vorliegenden Offenbarung können z. B. verwendet werden, um Sprachbefehle zu verarbeiten und zu interpretieren, die verwendet werden, um verschiedene andere geeignete Vorrichtungen nicht des Internets der Dinge zu steuern.
Nun werden unter Bezugnahme auf die Figuren beispielhafte Aspekte der vorliegenden Offenbarung ausführlicher beschrieben. 1 stellt z. B. einen Überblick über ein beispielhaftes System 100 zum Verarbeiten von Sprachbefehlen gemäß beispielhaften Ausführungsformen der vorliegenden Offenbarung dar. Das System 100 enthält eine Steuervorrichtung 102 und einen Server 104. Die Steuervorrichtung 102 und der Server 104 können z. B. über ein Netz kommunizieren. Die Steuervorrichtung 102 kann irgendeine geeignete Vorrichtung sein, die konfiguriert ist, bezüglich einer Sprachäußerung von einem Anwender zu überwachen und eine Sprachäußerung von einem Anwender zu empfangen. Wie angegeben ist, kann die Sprachäußerung ein Satz oder eine Redewendung, der bzw. die durch den Anwender mit der Absicht des Steuerns einer oder mehrerer intelligenter Vorrichtungen gesprochen wird, sein. Die Steuervorrichtung 102 kann eine dem Anwender zugeordnete Anwendervorrichtung sein. In einigen Implementierungen kann die Steuervorrichtung 102 eine intelligente Vorrichtung sein. Eine intelligente Vorrichtung kann eine mit einem Netz verbundene Vorrichtung sein, die konfiguriert ist, um mit einem zentralen Server, einem Cloud-Computersystem und/oder einer oder mehreren zusätzlichen intelligenten Vorrichtungen zu kommunizieren, um irgendeinen von einer Vielfalt nützlicher Dienste eines intelligenten Hauses und/oder des Internets der Dinge bereitzustellen. Die Steuervorrichtung kann basierend auf der Bereitstellung der Sprachäußerung durch den Anwender dynamisch konfiguriert werden. Die Steuervorrichtung kann z. B. die Vorrichtung (z. B. die Anwendervorrichtung, die intelligente Vorrichtung oder die andere Vorrichtung) sein, die die Sprachäußerung von dem Anwender empfängt.
Beim Empfangen der Sprachäußerung von dem Anwender kann die Steuervorrichtung 102 Daten, die die Sprachäußerung angeben, dem Server 104 bereitstellen. Der Server 104 enthält eine Beeinflussungseinrichtung 106, einen Umschreiber 108, einen Interpreter 110 und einen Befehlsgenerator 112. Die Daten, die die Sprachäußerung angeben, können dem Umschreiber 108 bereitgestellt werden. Der Umschreiber 108 kann konfiguriert sein, um eine oder mehrere Textumschreibungen der Sprachäußerung wenigstens teilweise basierend auf den Sprachmodelldaten 114 zu bestimmen. Die Sprachmodelldaten 114 können ein oder mehrere Sprachmodelle zum Umschreiben der Sprachäußerung enthalten. Insbesondere können die Sprachmodelldaten 114 ein allgemeines Sprachmodell enthalten, das die Wahrscheinlichkeitsschätzungen für mehrere häufige Redewendungen spezifiziert. Die Sprachmodelldaten 114 können ferner ein oder mehrere spezialisierte Sprachmodelle, wie z. B. ein personalisiertes Sprachmodell, enthalten. Das personalisierte Sprachmodell kann durch die Beeinflussungseinrichtung 106 erzeugt werden. Insbesondere kann das personalisierte Sprachmodell durch das Beeinflussen des allgemeinen Sprachmodells zu einer Darstellung 116 der Vorrichtungstopologie erzeugt werden.
Die Darstellung 116 der Vorrichtungstopologie kann durch den Anwender konstruiert werden, um eine Organisationstopologie einer oder mehrerer intelligenter Vorrichtungen, die dem Anwender zugeordnet sind, zu definieren. 2 stellt z. B. eine beispielhafte Anwenderschnittstelle 120 zum Definieren einer Darstellung einer Vorrichtungstopologie dar. Insbesondere stellt 2 eine Anwendervorrichtung 122 dar, die konfiguriert ist, um die Anwenderschnittstelle 120 anzuzeigen. Es wird erkannt, dass die in 2 dargestellte Anwenderschnittstelle 120 lediglich für Veranschaulichungszwecke vorgesehen ist und dass verschiedene andere geeignete Anwenderschnittstellen verwendet werden können, um eine Darstellung der Vorrichtungstopologie zu implementieren, ohne vom Schutzumfang der vorliegenden Offenbarung abzuweichen. Die Anwendervorrichtung 122 kann irgendeine geeignete Anwendervorrichtung, wie z. B. ein Smartphone, ein Tablet, ein Laptop-Computer, ein Desktop-Computer, eine tragbare Computervorrichtung usw., sein. In einigen Implementierungen kann die Anwendervorrichtung 122 eine intelligente Vorrichtung oder eine andere Vorrichtung sein. In einigen Implementierungen kann es sein, dass der Anwender einen Ort darstellen muss, um die Darstellung der Vorrichtungstopologie für diesen Ort zu definieren. In derartigen Implementierungen muss sich z. B. ein Anwender, der wünscht, eine Darstellung einer Vorrichtungstopologie für eine spezielle Struktur zu definieren, an der Struktur befinden, um die Darstellung der Vorrichtungstopologie zu implementieren. In dieser Weise kann ein Ort des Anwenders unter Verwendung verschiedener geeigneter Ortsbestimmungstechniken bestimmt werden und kann es dem Anwender erlaubt werden, eine Darstellung einer Vorrichtungstopologie für eine Struktur, die sich an dem oder in der Nähe des Anwenderorts befindet, zu definieren.
Die Anwenderschnittstelle 120 kann ein oder mehrere Anwenderschnittstellenelemente 124 zum Fördern einer Implementierung einer Darstellung 126 einer Vorrichtungstopologie durch einen Anwender enthalten. Die Darstellung 126 der Vorrichtungstopologie kann der in den 1 und 3 dargestellten Darstellung 116 der Vorrichtungstopologie entsprechen. Wie gezeigt ist, enthalten das eine oder die mehreren Anwenderschnittstellenelemente 124 Schnittstellenelemente, die es einem Anwender erlauben, zu der Darstellung 126 der Vorrichtungstopologie eine Struktur hinzuzufügen, einen Raum hinzuzufügen und eine Vorrichtung hinzuzufügen. In dieser Weise kann der Anwender auf Wunsch mit den Anwenderschnittstellenelementen 124 in Wechselwirkung treten, um die Darstellung 126 der Vorrichtungstopologie zu definieren und zu organisieren. Der Anwender kann z. B. das ”Vorrichtung-Hinzufügen”-Schnittstellenelement auswählen, um eine neue intelligente Vorrichtung zu der Darstellung 126 der Vorrichtungstopologie hinzuzufügen. In dieser Weise kann der Anwender imstande sein, eine neue Vorrichtung hinzuzufügen, eine oder mehrere Vorrichtungskennungen, die der Vorrichtung zuzuordnen sind, hinzuzufügen, ein oder mehrere Vorrichtungsattribute, die der Vorrichtung zuzuordnen sind, hinzufügen, usw. Falls der Anwender das ”Raum-Hinzufügen”-Schnittstellenelement auswählen würde, kann der Anwender ähnlich imstande sein, einen neuen Raum zu einer speziellen Struktur hinzuzufügen, eine Raumkennung, die dem Raum zuzuordnen ist, hinzuzufügen, usw.
In einigen Implementierungen kann die Darstellung 126 der Vorrichtungstopologie ein interaktives Anwenderschnittstellenelement sein, so dass der Anwender mit der Darstellung 126 der Vorrichtungstopologie in Wechselwirkung treten kann, wie sie innerhalb der Anwenderschnittstelle 120 angezeigt wird. Der Anwender kann z. B. (z. B. durch eine Berührungseingabe oder eine andere geeignete Eingabe) eine spezielle Struktur, einen speziellen Raum oder eine spezielle Vorrichtung der Darstellung 126 der Vorrichtungstopologie auswählen, um eine Darstellung von mehr Informationen, die der ausgewählten Struktur, dem ausgewählten Raum oder der ausgewählten Vorrichtung zugeordnet sind, zu fördern.
3 stellt einen Blockschaltplan einer beispielhaften Darstellung 116 einer Vorrichtungstopologie gemäß beispielhaften Ausführungsformen der vorliegenden Offenbarung dar. Die Darstellung 116 der Vorrichtungstopologie definiert eine Topologie mehrerer intelligenter Vorrichtungen innerhalb mehrerer Strukturen, die dem Anwender zugeordnet sind. Insbesondere enthalten die Strukturen ein Haupthaus 152, ein Strandhaus 154 und ein Büro 156, die dem Anwender zugeordnet sind. Jede Struktur kann in einen oder mehrere Räume innerhalb der Struktur organisiert sein. 3 stellt z. B. ein Wohnzimmer 158, ein Schlafzimmer 160 und ein Gästezimmer 162 dar, die dem Haupthaus 152 zugeordnet sind. Jedem Raum können ein oder mehrere intelligente Vorrichtungen innerhalb eines Netzes eines intelligenten Hauses und/oder des Internets der Dinge, die dem Anwender zugeordnet sind, zugeordnet sein. Insbesondere sind dem Wohnzimmer 158 eine Beleuchtungsvorrichtung, die eine Beleuchtungskennung ”Couchleuchte” aufweist, eine Thermostatvorrichtung, die eine Vorrichtungskennung ”Thermostat im Erdgeschoss” aufweist, und eine Lautsprechervorrichtung, die eine Vorrichtungskennung ”Wohnzimmerlautsprecher” aufweist, zugeordnet. Dem Schlafzimmer 160 ist eine Deckenventilatorvorrichtung, die eine Vorrichtungskennung ”Deckenventilator” aufweist, eine oder mehrere Beleuchtungsvorrichtungen, die die Vorrichtungskennung(en) ”Deckenleuchten” aufweisen, und eine Lautsprechervorrichtung, die eine Vorrichtungskennung ”Lautsprecher” aufweist, zugeordnet. Dem Gästezimmer 162 ist eine Thermostatvorrichtung, die eine Vorrichtungskennung ”Thermostat im Obergeschoss” aufweist, eine Beleuchtungsvorrichtung, die eine Vorrichtungskennung ”Tischleuchte” aufweist, und eine Lautsprechervorrichtung, die eine Vorrichtungskennung ”Lautsprecher” aufweist, zugeordnet. Die spezifizierten Vorrichtungen können eine einzige Vorrichtung oder eine Gruppe von Vorrichtungen sein. Die Vorrichtungskennung ”Deckenleuchten” kann z. B. einer einzigen Beleuchtungsvorrichtung oder einer Gruppe von Beleuchtungsvorrichtungen, die die Deckenleuchten im Schlafzimmer bilden, entsprechen.
Wie angegeben ist, kann der Anwender innerhalb der Darstellung der Vorrichtungstopologie eine oder mehrere Strukturen und einen oder mehrere Räume definieren. Der Anwender kann jedem Raum und jeder Struktur Kennungen zuordnen. Der Anwender kann jedem Raum eine oder mehrere intelligente Vorrichtungen zuordnen, um eine Topologie der Vorrichtungen innerhalb der Räume der tatsächlichen Struktur darzustellen. Der Anwender kann ferner jeder der einen oder der mehreren intelligenten Vorrichtungen eine oder mehrere Vorrichtungskennungen zuordnen. In einigen Implementierungen kann, falls der Anwender einer Vorrichtung keine Vorrichtungskennung zuordnet, der Vorrichtung automatisch eine vorgegebene Vorrichtungskennung zugeordnet werden. Die Darstellung 116 der Vorrichtungstopologie kann ferner ein oder mehrere Vorrichtungsattribute für jede Vorrichtung spezifizieren. Die Vorrichtungsattribute können einer oder mehreren Handlungen zugeordnet sein, die die Vorrichtungen ausführen können. Eine Leuchtenvorrichtung kann z. B. ein ”Einschalt”-Attribut, ein ”Ausschalt”-Attribut, ein ”Dimm”-Attribut usw. aufweisen. Eine Deckenventilatorvorrichtung kann ein ”Einschalt”-Attribut, ein ”Ausschalt”-Attribut, ein ”Drehzahlerhöhungs”-Attribut, ein ”Drehzahlverringerungs”-Attribut usw. aufweisen. In einigen Implementierungen können die Vorrichtungsattribute durch den Anwender in die Darstellung 116 der Vorrichtungstopologie eingegeben werden. In einigen Implementierungen können die Vorrichtungsattribute automatisch zu der Darstellung 116 der Vorrichtungstopologie hinzugefügt werden.
Die Darstellung der Vorrichtungstopologie kann durch den Anwender aktualisiert oder modifiziert werden, wenn der Anwender wünscht, z. B. eine oder mehrere Änderungen der Vorrichtungstopologie widerzuspiegeln. Der Anwender kann z. B. Vorrichtungen hinzufügen, Vorrichtungen entfernen, Vorrichtungen zwischen Räumen und/oder Strukturen bewegen, Strukturen hinzufügen, Strukturen entfernen, Räume hinzufügen, Räume entfernen usw., wie es der Anwender wünscht. In dieser Weise kann der Anwender die Vorrichtungstopologie organisieren, um eine genaue und dynamische Topologie der Vorrichtungen innerhalb der tatsächlichen Strukturen zu schaffen.
Die Darstellung 116 der Vorrichtungstopologie kann verwendet werden, um das allgemeine Sprachmodell zu beeinflussen. Zurück in 1 kann die Beeinflussungseinrichtung 106 konfiguriert sein, um auf die Darstellung 116 der Vorrichtungstopologie und das allgemeine Sprachmodell zuzugreifen, um das allgemeine Sprachmodell zu der Darstellung 116 der Vorrichtungstopologie zu beeinflussen. Die Beeinflussungseinrichtung kann z. B. einen oder mehrere Begriffe oder eine oder mehrere Redewendungen, die in der Darstellung 116 der Vorrichtungstopologie spezifiziert sind, (z. B. Vorrichtungskennungen, Raumnamen, Strukturnamen, Vorrichtungstypen (z. B. Beleuchtungsvorrichtung, Lautsprechervorrichtung), Vorrichtungsattribute usw.) identifizieren. Die Beeinflussungseinrichtung 106 kann eine Wahrscheinlichkeitsschätzung dieser Begriffe, wie sie durch das allgemeine Sprachmodell spezifiziert sind, vergrößern und kann ein personalisiertes Sprachmodell erzeugen, so dass die identifizierten Begriffe oder Redewendungen den vergrößerten Wahrscheinlichkeitsschätzungen zugeordnet sind. In dieser Weise kann das personalisierte Sprachmodell erzeugt werden, um die vergrößerte Wahrscheinlichkeit widerzuspiegeln, dass die durch den Anwender bereitgestellte Sprachäußerung Begriffe oder Redewendungen enthält, die der Darstellung 116 der Vorrichtungstopologie zugeordnet sind.
Wie angegeben ist, kann der Umschreiber 108 eine oder mehrere Textumschreibungen der Sprachäußerung wenigstens teilweise basierend auf den Sprachmodelldaten 114 bestimmen. Es wird erkannt, dass der Umschreiber 108 die Textumschreibungen der Sprachäußerung unter Verwendung verschiedener geeigneter Spracherkennungstechniken bestimmen kann. In einigen Implementierungen kann der Umschreiber 108 eine Umschreibung der Sprachäußerung basierend auf dem durch die Beeinflussungseinrichtung 106 erzeugten personalisierten Sprachmodell bestimmen. In einigen Implementierungen kann der Umschreiber 108 eine oder mehrere zusätzliche Umschreibungen der Sprachäußerung unter Verwendung eines oder mehrerer zusätzlicher Sprachmodelle (z. B. des allgemeine Sprachmodells und/oder eines oder mehrerer anderer geeigneter Sprachmodelle, die den Sprachmodelldaten 114 zugeordnet sind) bestimmen. In derartigen Implementierungen kann ein Vertrauenspunktestand für jede Umschreibung bestimmt werden, der ein Vertrauen des Umschreibers 108 spezifiziert, dass die jeweiligen Umschreibungen genaue Umschreibungen der Sprachäußerung sind. Dann kann eine Umschreibung aus den mehreren Umschreibungen wenigstens teilweise basierend auf den Vertrauenspunkteständen ausgewählt werden. In einigen Implementierungen kann die ausgewählte Umschreibung dem Interpreter 110 bereitgestellt werden, falls die ausgewählte Umschreibung die unter Verwendung des personalisierten Sprachmodells bestimmte Umschreibung ist.
In einigen Implementierungen kann eine Darstellung einer Vorrichtungstopologie wenigstens teilweise basierend auf einem Ort des Anwenders für die Verwendung ausgewählt werden. Es kann z. B. bestimmt werden, dass sich der Anwender innerhalb einer innerhalb einer Darstellung einer Vorrichtungstopologie spezifizierten speziellen Struktur befindet. Auf die Darstellung der Vorrichtungstopologie, die diese Struktur spezifiziert, kann dann für die Verwendung beim Verarbeiten einer durch den Anwender bereitgestellten Sprachäußerung zugegriffen werden. In derartigen Implementierungen kann dann die Darstellung der Vorrichtungstopologie, auf die zugegriffen worden ist, verwendet werden, um eine Umschreibung einer durch den Anwender bereitgestellten Sprachäußerung zu bestimmen. In dieser Weise kann dann die Umschreibung wenigstens teilweise basierend auf einem Ort des Anwenders bestimmt werden. Bei einer Bestimmung des Ortes des Anwenders kann z. B. auf die entsprechende Darstellung der Vorrichtungstopologie zugegriffen werden und können ein oder mehrere Begriffe, die der Darstellung der Vorrichtungstopologie zugeordnet sind, verwendet werden, um das allgemeine Sprachmodell zu beeinflussen. In einigen Implementierungen kann ein personalisiertes Sprachmodell für die Struktur und/oder die Darstellung der Vorrichtungstopologie vorher erzeugt worden sein, wobei in diesem Fall in Reaktion auf das Bestimmen des Anwenderortes und/oder das Empfangen einer Sprachäußerung von dem Anwender auf das geeignete personalisierte Sprachmodell zugegriffen werden kann und es verwendet werden kann, um die Umschreibung der Sprachäußerung zu bestimmen. Eine derartige Darstellung der Vorrichtungstopologie, die dem Anwenderort entspricht, kann dann gemäß beispielhaften Aspekten der vorliegenden Offenbarung verwendet werden, um die Sprachäußerung zu interpretieren.
Die bestimmte Umschreibung kann dem Interpreter 110 bereitgestellt werden. Der Interpreter 110 kann konfiguriert sein, um eine Absicht des Anwenders beim Bereitstellen der Sprachäußerung für die Steuervorrichtung 102 zu bestimmen. Insbesondere kann der Interpreter 110 konfiguriert sein, um eine oder mehrere ausgewählte Vorrichtungen 118 und eine oder mehrere Handlungen, die durch die ausgewählten Vorrichtungen 118 auszuführen sind, wenigstens teilweise basierend auf der Umschreibung zu bestimmen. In einigen Implementierungen kann der Interpreter 110 z. B. Techniken der semantischen Interpretation an der Umschreibung ausführen, um eine logische Darstellung der konzeptionellen Bedeutung der Umschreibung zu bestimmen. In dieser Weise kann der Interpreter 110 durch das Erkennen einer semantischen Beziehung zwischen den Wörtern eine Rolle jedes Wortes in der Umschreibung bestimmen.
Der Interpreter 110 kann die eine oder die mehreren ausgewählten Vorrichtungen 118 und/oder die auszuführenden Handlungen wenigstens teilweise basierend auf der Darstellung 116 der Vorrichtungstopologie bestimmen. Der Interpreter 110 kann z. B. die Umschreibung mit der Darstellung 116 der Vorrichtungstopologie vergleichen, um die ausgewählten Vorrichtungen 118 und/oder die auszuführenden Handlungen zu bestimmen. Insbesondere kann der Interpreter 110 die Umschreibung mit den in der Darstellung 116 der Vorrichtungstopologie spezifizierten Vorrichtungskennungen vergleichen, um eine Korrelation zwischen einem oder mehreren Begriffen der Umschreibung und einer oder mehreren Vorrichtungskennungen zu bestimmen. Falls die Umschreibung z. B. ”erhöhe die Lautstärke des Wohnzimmerlautsprechers” lautet, kann der Begriff Wohnzimmerlautsprecher mit der Vorrichtungskennung ”Wohnzimmerlautsprecher” der Darstellung 116 der Vorrichtungstopologie korreliert werden. In dieser Weise kann die Lautsprechervorrichtung, die die Vorrichtungskennung ”Wohnzimmerlautsprecher” aufweist, basierend auf der Korrelation als die ausgewählte Vorrichtung ausgewählt werden.
In einigen Implementierungen kann der Interpreter 110 konfiguriert sein, um die eine oder die mehreren ausgewählten Vorrichtungen zu folgern. Falls z. B. keine exakte Übereinstimmung zwischen einer Vorrichtungskennung und der Umschreibung gefunden werden kann, kann der Interpreter konfiguriert sein, um eine oder mehrere ausgewählte Vorrichtungen zu folgern. Falls als ein weiteres Beispiel zwei oder mehr der in der Darstellung der Vorrichtungstopologie spezifizierten Vorrichtungen die gleichen oder ähnliche Vorrichtungskennungen aufweisen, kann der Interpreter 110 nicht imstande sein, um zu bestimmen, welche Vorrichtung der Anwender vorsieht, um gesteuert zu werden. Die Darstellung 116 der Vorrichtungstopologie enthält z. B. sowohl im Schlafzimmer 160 als auch im Gästezimmer 162 Lautsprechervorrichtungen, die die gleiche Vorrichtungskennung ”Lautsprecher” aufweisen. In einem derartigen Fall kann der Interpreter 110 nicht imstande sein, zu unterscheiden, welche Lautsprechervorrichtung der Anwender zu steuern wünscht. Der Interpreter 110 kann dann konfiguriert sein, um die ausgewählte Vorrichtung wenigstens teilweise basierend auf anderen Informationen, die der Darstellung 116 der Vorrichtungstopologie und/oder dem Anwender zugeordnet sind, zu folgern.
Als ein Beispiel kann der Interpreter 110 konfiguriert sein, um die ausgewählten Vorrichtungen zu folgern, falls es keine direkte Übereinstimmung zwischen der Umschreibung und den Vorrichtungskennungen gibt, aber die Umschreibung einen oder mehrere Begriffe enthält, die zu einer in der Darstellung 116 der Vorrichtungstopologie spezifizierten Vorrichtungskennung ausreichend ähnlich sind. In einem derartigen Fall kann der Interpreter 110 den ausreichend ähnlichen Begriff (die ausreichend ähnlichen Begriffe) und die Vorrichtungskennung korrelieren, wobei er die ausgewählte Vorrichtung basierend auf der Ähnlichkeit folgern kann. Falls die Umschreibung z. B. ”schalte die Sofaleuchte ein” lautet, kann der Interpreter 110 die Vorrichtungskennung ”Couchleuchte” identifizieren, wobei er bestimmen kann, dass die Redewendung ”Sofaleuchte” zu der Vorrichtungskennung ”Couchleuchte” ausreichend ähnlich ist. Der Interpreter 110 kann dann die Beleuchtungsvorrichtung, die die Kennung ”Couchleuchte” aufweist, als die ausgewählte Vorrichtung auswählen.
In einigen Implementierungen kann der Interpreter 110 die ausgewählten Vorrichtungen wenigstens teilweise basierend auf den in der Darstellung 116 der Vorrichtungstopologie spezifizierten Vorrichtungsattributen folgern. Die Vorrichtungsattribute können einen Typ jeder Vorrichtung (z. B. Beleuchtungsvorrichtung, Lautsprechervorrichtung usw.), eine oder mehrere Fähigkeiten jeder Vorrichtung oder der Handlungen, die durch jede Vorrichtung ausgeführt werden können, (z. B. Einschalten, Ausschalten, Lautstärkeerhöhung, Lautstärkeverringerung, Drehzahlvergrößerung, Drehzahlverringerung, usw.), und/oder andere geeignete Attribute oder Merkmale, die der Vorrichtung zugeordnet sind, spezifizieren. In dieser Weise kann die Umschreibung mit den in der Darstellung der Vorrichtungstopologie spezifizierten Vorrichtungsattributen verglichen werden, um die eine oder die mehreren ausgewählten Vorrichtungen zu bestimmen. Der Interpreter 110 kann z. B. einen oder mehrere Begriffe in der Umschreibung mit dem einen oder den mehreren Vorrichtungsattributen für die Vorrichtungen vergleichen, um eine Korrelation zu bestimmen. Falls die Umschreibung z. B. ”erhöhe die Temperatur” lautet, kann der Interpreter 110 versuchen, eine oder mehrere Vorrichtungen zu identifizieren, die geeignete Attribute aufweisen, die einer Handlung des Erhöhens einer Temperatur zugeordnet sind. In dieser Weise kann der Interpreter 110 imstande sein, die geeigneten Vorrichtungen auf ”Thermostat im Obergeschoss” und ”Thermostat im Erdgeschoss” einzuschränken.
In einigen Implementierungen kann der Interpreter 110 die eine oder die mehreren ausgewählten Vorrichtungen wenigstens teilweise basierend auf einem Ort des Anwenders bestimmen, wenn der Anwender die Sprachäußerung der Steuervorrichtung 102 bereitstellt. Wie angegeben ist, kann die Steuervorrichtung 102 eine intelligente Vorrichtung oder eine Anwendervorrichtung sein, der die Sprachäußerung bereitgestellt wird. Der Interpreter 110 kann den Ort der Steuervorrichtung 102 bestimmen und den Ort der Steuervorrichtung 102 mit dem Ort des Anwenders korrelieren. In den Fällen, in denen die Steuervorrichtung 102 eine in der Darstellung 116 der Vorrichtungstopologie spezifizierte intelligente Vorrichtung ist, kann der Interpreter 110 auf die Darstellung der Vorrichtungstopologie zugreifen, um den Ort (z. B. die Struktur und den Raum, die in der Darstellung 116 der Vorrichtungstopologie spezifiziert sind) zu bestimmen. Der Interpreter 110 kann dann den Anwenderort mit dem Ort der Steuervorrichtung 102, der der Anwender den Sprachbefehl bereitgestellt hat, korrelieren.
In den Fällen, in denen die Steuervorrichtung 102 nicht innerhalb der Darstellung 116 der Vorrichtungstopologie spezifiziert ist (z. B. wenn die Steuervorrichtung 102 eine Anwendervorrichtung oder eine andere geeignete Steuervorrichtung ist), können eine oder mehrere alternative Ortsbestimmungstechniken verwendet werden. In einigen Implementierungen kann die Steuervorrichtung 102 z. B. unter Verwendung eines oder mehrerer drahtloser Zugangspunkte (z. B. Wi-Fi-Zugangspunkte) lokalisiert werden. Ein Ort der Steuervorrichtung 102 kann wenigstens teilweise basierend auf den bekannten Orten des einen oder der mehreren Zugangspunkte und einem oder mehreren zwischen der Steuervorrichtung 102 und dem einen oder den mehreren Zugangspunkten übertragenen Signalen bestimmt werden. Spezieller kann in einigen Implementierungen der Ort der Anwendervorrichtung wenigstens teilweise basierend auf Umlaufzeitberechnungen (RTT-Berechnungen) bestimmt werden, die einem oder mehreren zwischen der Anwendervorrichtung und einem oder mehreren Zugangspunkten übertragenen Signalen zugeordnet sind. Die Anwendervorrichtung kann z. B. durch das Senden eines Signals an mehrere Zugangspunkte einen Ortsfeststellungsprozess einleiten. Die Zugangspunkte können ein oder mehrere Antwortsignale an die Anwendervorrichtung senden. Die Antwortsignale können Daten enthalten, die eine Zeitverzögerung (z. B. eine Verarbeitungsverzögerung) zwischen den Zeitpunkten, zu denen der jeweilige Zugangspunkt das einleitende Signal empfangen hat und die Antwortsignale gesendet hat, angeben. Die Anwendervorrichtung kann dann wenigstens teilweise basierend auf dem Zeitpunkt, zu dem die Anwendervorrichtung die einleitenden Signale gesendet hat, dem Zeitpunkt, zu dem die Anwendervorrichtung die Antwortsignale empfangen hat, und/oder der einem Zugangspunkt zugeordneten Zeitverzögerung die Laufzeiten berechnen, die den einleitenden Signalen und/oder den Antwortsignalen zugeordnet sind. Falls die Anwendervorrichtung Antwortsignale von drei oder mehr Zugangspunkten empfängt, kann die Anwendervorrichtung Trilaterationstechniken auf die bestimmten Abstände und die Orte anwenden, um sich selbst bezüglich der Zugangspunkte zu lokalisieren. Die Anwendervorrichtung kann z. B. bestimmen, dass sie sich an einem speziellen Ort innerhalb eines Bereichs (z. B. innerhalb eines speziellen Raums) befindet.
Ähnlich kann in einigen Implementierungen ein Ort der Steuervorrichtung 102 unter Verwendung einer oder mehrerer Bakenvorrichtungen (z. B. Bluetooth-Bakenvorrichtungen) bestimmt werden. Der Ort der Steuervorrichtung kann z. B. wenigstens teilweise basierend auf den bekannten Orten der Bakenvorrichtungen und einem oder mehreren zwischen den Bakenvorrichtungen und der Steuervorrichtung 102 übertragenen Signale bestimmt werden. Es wird erkannt, dass verschiedene andere geeignete Ortsbestimmungstechniken verwendet werden können, ohne vom Schutzumfang der vorliegenden Offenbarung abzuweichen. Spezieller kann beim Bestimmen des Orts der Anwendervorrichtung die Anwendervorrichtung ein oder mehrere Signale rundsenden, die durch zwei oder mehr Bakenvorrichtungen empfangen werden können, die sich innerhalb der Struktur befinden, in der sich der Anwender befindet. Die Bakenvorrichtungen können bekannte Orte innerhalb der Struktur aufweisen. In einigen Implementierungen können die Bakenvorrichtungen innerhalb einer oder mehrerer intelligenter Vorrichtungen implementiert sein, die in der Darstellung 116 der Vorrichtungstopologie definiert sind. In Reaktion auf das Empfangen des einen oder der mehreren Signale können die zwei oder mehr Bakenvorrichtungen ein oder mehrere Erkennungssignale rundsenden, die jeweils die Bakenvorrichtungen identifizieren. Die Erkennungssignale können die Orte der jeweiligen Bakenvorrichtungen enthalten. Der Ort der Anwendervorrichtung kann dann wenigstens teilweise basierend auf den innerhalb der empfangenen Erkennungssignale spezifizierten Bakenorten bestimmt werden.
Es wird erkannt, dass verschiedene andere Ortsbestimmungstechniken verwendet werden können, ohne vom Schutzumfang der vorliegenden Offenbarung abzuweichen. Die Ortsbestimmungstechniken können z. B. unter Verwendung verschiedener geeigneter Kommunikationssignale, wie z. B. Bluetooth, Bluetooth low energy, ZigBee, Nahfeldkommunikation, Wi-Fi-Direkt oder anderer Techniken, implementiert sein. In alternativen Ausführungsformen kann der Ort des Anwenders wenigstens teilweise durch ein Positionierungssystem, das der Anwendervorrichtung zugeordnet ist, (z. B. GPS oder ein anderes Positionierungssystem) und/oder durch eine netzbasierte (z. B. WiFi, ein Zellennetz usw.) Ortsbestimmung bestimmt werden.
In einigen Implementierungen kann der Ort der Steuervorrichtung 102 bezüglich der Darstellung 116 der Vorrichtungstopologie bestimmt werden. In den Implementierungen, in denen der Ort der Steuervorrichtung 102 unter Verwendung drahtloser Zugangspunkte und/oder Bakenvorrichtungen bestimmt wird, können die Orte der Zugangspunkte und/oder der Bakenvorrichtungen z. B. auf einen oder mehrere Räume innerhalb der Darstellung 116 der Vorrichtungstopologie abgebildet werden. In dieser Weise kann dann der Ort der Steuervorrichtung 102 bezüglich der Darstellung 116 der Vorrichtungstopologie wenigstens teilweise basierend auf den Orten der Zugangspunkte und/oder der Bakenvorrichtungen innerhalb der Darstellung 116 der Vorrichtungstopologie bestimmt werden.
Wie angegeben ist, kann der Interpreter 110 die ausgewählten Vorrichtungen wenigstens teilweise basierend auf dem Ort der Steuervorrichtung zum Zeitpunkt der Bereitstellung der Sprachäußerung durch den Anwender bestimmen. Der Interpreter 110 kann folgern, dass sich die ausgewählten Vorrichtungen in demselben Raum, in dem sich der Anwender befindet, befinden. Falls als ein Beispiel die Umschreibung ”schalte die Leuchten ein” lautet, kann der Interpreter 110 bestimmen, dass sich der Anwender im Schlafzimmer befindet, wobei er folgern kann, dass die Leuchtenvorrichtungen, auf die sich der Anwender bezieht, die Leuchtenvorrichtungen, die dem Schlafzimmer in der Darstellung 116 der Vorrichtungstopologie zugeordnet sind, (z. B. die ”Deckenleuchten”) sind.
Eine oder mehrere der oben beschriebenen Interpretationstechniken können durch den Interpreter 110 verwendet werden, um die Umschreibung zu interpretieren. In verschiedenen Fällen kann (können) z. B. die ausgewählte(n) Vorrichtung(en) wenigstens teilweise basierend auf den Vorrichtungskennungen und/oder den Vorrichtungsattributen und/oder dem Anwenderort bestimmt werden.
Der Interpreter 110 kann ferner eine oder mehrere auszuführende ausgewählte Handlungen bestimmen. Der Interpreter 110 kann z. B. die Umschreibung analysieren, um die eine oder die mehreren Handlungen zu bestimmen. Der Interpreter 110 kann z. B. eine Umschreibung analysieren, die ”schalte die Leuchten ein” lautet, und kann bestimmen, dass die Redewendung ”schalte ein” einer Handlung des Aktivierens oder Einschaltens einer Vorrichtung entspricht. In einigen Implementierungen kann der Interpreter 110 die auszuführenden Handlungen wenigstens teilweise basierend auf den Vorrichtungsattributen, die in der Darstellung 116 der Vorrichtungstopologie spezifiziert sind, bestimmen. Sobald die ausgewählten Vorrichtungen bestimmt worden sind, kann der Interpreter 110 z. B. die Umschreibungen mit den Vorrichtungsattributen der ausgewählten Vorrichtungen vergleichen, um eine Korrelation zwischen der Umschreibung und den Vorrichtungsattributen zu bestimmen.
Sobald die ausgewählte(n) Vorrichtung(en) und die auszuführenden Handlungen bestimmt worden sind, können ein oder mehrere Steuerbefehle bestimmt werden, die die ausgewählte(n) Vorrichtung(en) anweisen, die geeignet(n) Handlung(en) auszuführen. Insbesondere können die Daten, die die ausgewählte(n) Vorrichtung(en) und die auszuführende(n) Handlung(en) angeben, dem Befehlsgenerator 112 bereitgestellt werden. Der Befehlsgenerator 112 kann einen oder mehrere geeignete Steuerbefehle für die ausgewählte(n) Vorrichtung(en) bestimmen. Wie angegeben ist, können die Steuerbefehle irgendein geeigneter Steuerbefehl zum Kommunizieren mit der ausgewählten Vorrichtung (den ausgewählten Vorrichtungen) sein. Insbesondere können die Steuerbefehle wenigstens teilweise basierend auf einem oder mehreren Kommunikationsprotokollen, die der ausgewählten Vorrichtung (den ausgewählten Vorrichtungen) zugeordnet sind, bestimmt werden. In dieser Weise können sich die Steuerbefehle wenigstens teilweise basierend auf den Kommunikationsprotokollen der ausgewählten Vorrichtung(en) in irgendeinem geeigneten Format oder irgendeiner geeigneten Struktur befinden. Der Befehlsgenerator 112 kann die Steuerbefehle der ausgewählten Vorrichtung (den ausgewählten Vorrichtungen) bereitstellen, so dass die ausgewählte(n) Vorrichtung(en) die Steuerbefehle ausführen und die geeignete(n) Handlung(en) ausführen können.
Obwohl dargestellt ist, dass das System 100 eine Client-Server-Architektur aufweist, wird erkannt, dass eine oder mehrere der Funktionen des Servers 104 (z. B. eine oder mehrere Funktionen der Beeinflussungseinrichtung 106, des Umschreibers 108, des Interpreters 110 oder des Befehlsgenerators 112) durch eine oder mehrere andere geeignete Vorrichtungen, z. B. die Steuervorrichtung 102, ausgeführt werden können. In dieser Weise wird erkannt, dass die Steuervorrichtung 102 die Beeinflussungseinrichtung 106 und/oder den Umschreiber 108 und/oder den Interpreter 110 und/oder den Befehlsgenerator 112 enthalten kann.
4 stellt einen Ablaufplan eines beispielhaften Verfahrens (200) zum Verarbeiten von Sprachbefehlen gemäß beispielhaften Ausführungsformen der vorliegenden Offenbarung dar. Das Verfahren (200) kann durch eine oder mehrere Computervorrichtungen, wie z. B. eine oder mehrere der in 8 dargestellten Computervorrichtungen, implementiert sein. Zusätzlich stellt 4 die in einer speziellen Reihenfolge ausgeführten Schritte für die Zwecke der Veranschaulichung und Erörterung dar. Die Durchschnittsfachleute auf dem Gebiet werden unter Verwendung der hier bereitgestellten Offenbarungen verstehen, dass die Schritte irgendwelcher der hier erörterten Verfahren in verschiedenen Weisen angepasst, umgeordnet, erweitert, weggelassen oder modifiziert werden können, ohne vom Schutzumfang der vorliegenden Offenbarung abzuweichen.
Bei (202) kann das Verfahren (300) das Empfangen von Daten, die eine Sprachäußerung angeben, von einem Anwender enthalten. Wie angegeben ist, kann der Anwender eine Sprachäußerung einer Steuervorrichtung mit der Absicht des Steuerns einer oder mehrerer intelligenter Vorrichtungen bereitstellen.
Bei (204) kann das Verfahren (200) das Zugreifen auf eine dem Anwender zugeordnete Darstellung einer Vorrichtungstopologie enthalten. Wie angegeben ist, kann der Anwender eine Darstellung einer Vorrichtungstopologie, die eine Topologie einer oder mehrerer Strukturen, die dem Anwender zugeordnet sind, definiert, anlegen oder konstruieren. Der Anwender kann z. B. die Struktur(en) in Räumen organisieren und kann die Vorrichtungen den Räumen zuordnen. Der Anwender kann den Vorrichtungen Vorrichtungskennungen zuordnen. Die Darstellung der Vorrichtungstopologie kann ferner ein oder mehrere Vorrichtungsattribute für die Vorrichtungen enthalten. Die Vorrichtungsattribute können die Vorrichtungstypen, die Fähigkeiten usw. spezifizieren. In dieser Weise kann es die Darstellung der Vorrichtungstopologie bereitstellen, es einem Anwender zu ermöglichen, ein Netz eines intelligenten Hauses oder des Internets der Dinge durch den Ort der Vorrichtungen zu organisieren.
Bei (206) kann das Verfahren (200) das Bestimmen einer Umschreibung der Sprachäußerung wenigstens teilweise basierend auf der Darstellung der Vorrichtungstopologie enthalten. Die Umschreibung kann z. B. wenigstens teilweise basierend auf einem oder mehreren Sprachmodellen bestimmt werden. In einigen Implementierungen kann die Umschreibung z. B. durch das Beeinflussen eines allgemeinen Sprachmodells zu einem oder mehreren Begriffen, die in der Darstellung der Vorrichtungstopologie spezifiziert sind, (z. B. Vorrichtungskennungen, Raumnamen, Strukturnamen, Vorrichtungsattributen usw.) bestimmt werden. In dieser Weise kann ein personalisiertes Sprachmodell erzeugt werden, das vergrößerte Wahrscheinlichkeitsschätzungen aufweist, die den Begriffen der Darstellung der Vorrichtungstopologie zugeordnet sind. Die Daten, die die Sprachäußerung angeben, können dem personalisierten Sprachmodell bereitgestellt werden, um eine Umschreibung der Sprachäußerung zu bestimmen. In einigen Implementierungen können die Daten, die die Sprachäußerung angeben, einem oder mehreren zusätzlichen Sprachmodellen bereitgestellt werden, um die Umschreibung zu bestimmen.
Bei (208) kann das Verfahren (200) das Bestimmen einer Interpretation der Umschreibung wenigstens teilweise basierend auf der Darstellung der Vorrichtungstopologie enthalten. Das Bestimmen der Interpretation kann z. B. das Bestimmen einer oder mehrerer ausgewählter Vorrichtungen und einer oder mehrerer durch die ausgewählten Vorrichtungen auszuführenden Handlungen wenigstens teilweise basierend auf der Umschreibung und der Darstellung der Vorrichtungstopologie enthalten. Die eine oder die mehreren ausgewählten Vorrichtungen können in der Darstellung der Vorrichtungstopologie spezifizierte Vorrichtungen sein, wobei die eine oder die mehreren auszuführenden Handlungen Handlungen sein können, die einem oder mehreren Vorrichtungsattributen zugeordnet sind, die den ausgewählten Vorrichtungen zugeordnet sind.
Bei (210) kann das Verfahren (200) das Erzeugen eines oder mehrerer Steuerbefehle für die eine oder die mehreren ausgewählten Vorrichtungen wenigstens teilweise basierend auf der Interpretation enthalten. Der eine oder die mehreren Steuerbefehle können Anweisungen für die jeweiligen ausgewählten Vorrichtungen enthalten, um die geeigneten Handlungen auszuführen. Die Steuerbefehle können irgendein geeigneter Steuerbefehl sein, der durch die zugeordneten intelligenten Vorrichtungen verstanden werden kann. Bei (212) kann das Verfahren (200) das Bereitstellen des einen oder der mehreren Steuerbefehle für die ausgewählten Vorrichtungen enthalten, so dass die ausgewählten Vorrichtungen die Steuerbefehle ausführen und die geeigneten Handlungen ausführen können.
5 stellt einen Ablaufplan eines beispielhaften Verfahrens (300) zum Erzeugen eines personalisierten Sprachmodells gemäß beispielhaften Ausführungsformen der vorliegenden Offenbarung dar. Das Verfahren (300) kann durch eine oder mehrere Computervorrichtungen, wie z. B. eine oder mehrere der in 8 dargestellten Computervorrichtungen, implementiert sein. In einigen Implementierungen kann das Verfahren (300) durch die in 1 dargestellte Beeinflussungseinrichtung 106 implementiert sein.
Bei (302) kann das Verfahren (300) das Zugreifen auf ein allgemeines Sprachmodell enthalten. Wie angegeben ist, kann das allgemeine Sprachmodell mehrere häufige Redewendungen enthalten. Eine Redewendung kann eine Folge aus einem oder mehreren Wörtern sein. Das allgemeine Sprachmodell kann ferner jeder Redewendung zugeordnete Wahrscheinlichkeitsschätzungen enthalten, die eine Schätzung der Wahrscheinlichkeit des Auftretens der zugeordneten Redewendung angeben.
Bei (304) kann das Verfahren (300) das Identifizieren eines oder mehrerer Beeinflussungsbegriffe oder einer oder mehrerer Beeinflussungsredewendungen aus der Darstellung der Vorrichtungstopologie enthalten. Der eine oder die mehreren Beeinflussungsbegriffe oder die eine oder die mehreren Beeinflussungsredewendungen können Vorrichtungskennungen, Raumkennungen, Strukturkennungen, Vorrichtungsattribute und/oder andere geeignete Begriffe oder Redewendungen, die der Darstellung der Vorrichtungstopologie zugeordnet sind, enthalten.
Bei (306) kann das Verfahren (300) das Beeinflussen des allgemeinen Sprachmodells wenigstens teilweise basierend auf dem einen oder den mehreren Beeinflussungsbegriffen enthalten. Das Beeinflussen des allgemeinen Sprachmodells kann z. B. das Einstellen einer oder mehrerer Wahrscheinlichkeitsschätzungen des allgemeinen Sprachmodells wenigstens teilweise basierend auf den Beeinflussungsbegriffen enthalten. Insbesondere kann das Beeinflussen des allgemeinen Sprachmodells das Vergrößern der Wahrscheinlichkeitsschätzungen der Beeinflussungsbegriffe enthalten, um eine geschätzte Wahrscheinlichkeit des Auftretens der Beeinflussungsbegriffe zu vergrößern. Bei (308) kann das Verfahren (300) das Erzeugen eines personalisierten Sprachmodells wenigstens teilweise basierend auf der Beeinflussung enthalten. Das personalisierte Sprachmodell kann z. B. basierend auf dem allgemeinen Sprachmodell erzeugt werden. Das personalisierte Sprachmodell kann den gleichen Satz von Redewendungen wie das allgemeine Sprachmodell enthalten, wobei es aber die zu den Beeinflussungsbegriffen beeinflussten Wahrscheinlichkeitsschätzungen enthalten kann.
6 stellt einen Ablaufplan eines beispielhaften Verfahrens (400) zum Bestimmen einer Textumschreibung einer Sprachäußerung gemäß den beispielhaften Ausführungsformen der vorliegenden Offenbarung dar. Das Verfahren (400) kann durch eine oder mehrere Computervorrichtungen, wie z. B. eine oder mehrere der in 8 dargestellten Computervorrichtungen, implementiert sein. In einigen Implementierungen kann das Verfahren (300) durch den in 1 dargestellten Umschreiber 108 implementiert sein.
Bei (402) kann das Verfahren (400) das Bereitstellen der eine Sprachäußerung angebenden Daten einem allgemeinen Sprachmodell enthalten. Bei (404) kann das Verfahren (400) das Bestimmen einer ersten Umschreibung der Sprachäußerung wenigstens teilweise basierend auf dem allgemeinen Sprachmodell enthalten. Die erste Umschreibung kann unter Verwendung verschiedener geeigneter Spracherkennungstechniken bestimmt werden. Bei (406) kann das Verfahren (400) das Bestimmen eines ersten Vertrauenspunktestandes der ersten Umschreibung enthalten. Der erste Vertrauenspunktestand kann eine Darstellung einer Schätzung der Genauigkeit der ersten Umschreibung der Sprachäußerung sein.
Bei (408) kann das Verfahren (400) das Bereitstellen der eine Sprachäußerung angebenden Daten einem personalisierten Sprachmodell enthalten. Das personalisierte Sprachmodell kann wenigstens teilweise basierend auf einer Topologie eines Netzes eines intelligenten Hauses oder des Internets der Dinge (wie sie z. B. in einer Darstellung einer Vorrichtungstopologie spezifiziert ist) bestimmt werden. Das personalisierte Sprachmodell kann z. B. das in 5 beschriebene Sprachmodell sein. Bei (410) kann das Verfahren (400) das Bestimmen einer zweiten Umschreibung der Sprachäußerung wenigstens teilweise basierend auf dem personalisierten Sprachmodell enthalten. Die zweite Umschreibung kann unter Verwendung verschiedener geeigneter Spracherkennungstechniken bestimmt werden. Bei (412) kann das Verfahren (400) das Bestimmen eines zweiten Vertrauenspunktestandes der zweiten Umschreibung enthalten. Der zweite Vertrauenspunktestand kann eine Darstellung einer Schätzung der Genauigkeit der zweiten Umschreibung der Sprachäußerung sein.
Bei (414) kann das Verfahren (400) das Auswählen einer zu interpretierenden Umschreibung wenigstens teilweise basierend auf den Vertrauenspunkteständen enthalten. Es kann z. B. bestimmt werden, dass die Umschreibung mit dem höheren Vertrauenspunktestand eine genauere Umschreibung der Sprachäußerung ist, wobei sie als die zu interpretierende Umschreibung ausgewählt werden kann. In einigen Implementierungen können eine oder mehrere zusätzliche Umschreibungen unter Verwendung eines oder mehrerer zusätzlicher Sprachmodelle bestimmt werden. Für die jeweiligen zusätzlichen Umschreibungen können zusätzliche Vertrauenspunktestände bestimmt werden. Die zu interpretierende Umschreibung kann wenigstens teilweise basierend auf jedem Vertrauenspunktestand ausgewählt werden.
7 stellt einen Ablaufplan eines beispielhaften Verfahrens (500) zum Interpretieren einer Umschreibung einer Sprachäußerung gemäß beispielhaften Ausführungsformen der vorliegenden Offenbarung dar. Das Verfahren (500) kann durch eine oder mehrere Computervorrichtungen, wie z. B. eine oder mehrere der in 8 dargestellten Computervorrichtungen, implementiert sein. In einigen Implementierungen kann das Verfahren (300) durch den in 1 dargestellten Interpreter 110 implementiert sein.
Bei (502) kann das Verfahren (500) das Vergleichen der Umschreibung mit einer oder mehreren Vorrichtungskennungen, die in der Darstellung der Vorrichtungstopologie spezifiziert sind, enthalten. Bei (504) kann das Verfahren (500) das Bestimmen enthalten, ob die ausgewählten Vorrichtungen wenigstens teilweise basierend auf den Vorrichtungskennungen bestimmt werden können. Die ausgewählten Vorrichtungen können z. B. bestimmt werden, falls eine Korrelation zwischen der Vorrichtungskennung (den Vorrichtungskennungen) und der Umschreibung hergestellt werden kann. Eine Korrelation kann hergestellt werden, falls eine oder mehrere Vorrichtungskennungen mit einem oder mehreren Begriffen in der Umschreibung übereinstimmen und/oder falls eine oder mehrere Vorrichtungskennungen zu einem oder mehreren Begriffen in der Umschreibung ausreichend ähnlich sind. In einigen Implementierungen können die ausgewählten Vorrichtungen nicht bestimmt werden, falls die Korrelationen zwischen mehreren in der Darstellung der Vorrichtungstopologie spezifizierten Vorrichtungen und der Umschreibung hergestellt werden. Falls z. B. mehrere Vorrichtungen die gleiche oder eine ähnliche Vorrichtungskennung aufweisen, können die ausgewählten Vorrichtungen nicht bestimmt werden. Falls die ausgewählte(n) Vorrichtung(en) bestimmt werden können, kann das Verfahren (500) bei (506) das Bestimmen der ausgewählten Vorrichtung(en) und der durch die ausgewählten Vorrichtungen auszuführenden Handlungen enthalten.
Falls die ausgewählten Vorrichtungen nicht bestimmt werden können, kann das Verfahren (500) bei (508) das Vergleichen der Umschreibung mit einem oder mehreren Vorrichtungsattributen, die in der Darstellung der Vorrichtungstopologie spezifiziert sind, enthalten. Wie angegeben ist, können die Vorrichtungsattribute die Vorrichtungstypen und/oder eine oder mehrere Fähigkeiten der Vorrichtungen angeben. In dieser Weise können die Vorrichtungsattribute mit einem oder mehreren Begriffen in der Umschreibung verglichen werden, um eine Korrelation zwischen dem einen oder den mehreren Begriffen und den Vorrichtungsattributen zu bestimmen. Eine Korrelation der Umschreibung und eines oder mehrerer Vorrichtungsattribute kann einen Hinweis bezüglich der ausgewählten Vorrichtungen bereitstellen. Falls z. B. eine Korrelation gefunden wird, kann bestimmt werden, dass nur die Vorrichtungen, die das korrelierte Vorrichtungsattribut aufweisen, als die ausgewählte Vorrichtung ausgewählt werden sollten. In dieser Weise kann eine Korrelation es unterstützen, die Vorrichtungen beim Bestimmen der ausgewählten Vorrichtungen einzuschränken.
Bei (510) kann das Verfahren (500) das Bestimmen enthalten, ob die ausgewählten Vorrichtungen bestimmt werden können. Insbesondere kann das Bestimmen, ob die ausgewählten Vorrichtungen bestimmt werden können, das Bestimmen enthalten, ob die ausgewählten Vorrichtungen wenigstens teilweise basierend auf dem Vergleich der Umschreibung mit dem einen oder den mehreren Vorrichtungsattributen und/oder der einen oder den mehreren Vorrichtungskennungen bestimmt werden können. Falls die ausgewählten Vorrichtungen bestimmt werden können, kann das Verfahren (500) zu (506) zurückkehren, wobei die eine oder die mehreren auszuführenden Handlungen bestimmt werden können.
Falls die ausgewählten Vorrichtungen nicht bestimmt werden können, kann das Verfahren (500) bei (512) das Bestimmen eines Ortes des Anwenders bezüglich der Darstellung der Vorrichtungstopologie enthalten. Wie angegeben ist, kann in den Fällen, in denen die Steuervorrichtung eine innerhalb der Organisationstopologie der Darstellung der Vorrichtungstopologie spezifizierte Vorrichtung ist, der Ort des Anwenders dem Ort der Steuervorrichtung innerhalb der Darstellung der Vorrichtungstopologie entsprechen. In den Fällen, in denen die Steuervorrichtung nicht innerhalb der Darstellung der Vorrichtungstopologie spezifiziert ist, kann der Anwenderort basierend auf verschiedenen geeigneten Ortsbestimmungstechniken, wie z. B. Techniken unter Verwendung drahtloser Zugangspunkte und/oder Bakenvorrichtungen, bestimmt werden. Ein derartiger bestimmter Anwenderort kann dann auf eine Struktur und einen Raum, die in der Darstellung der Vorrichtungstopologie spezifiziert sind, abgebildet werden.
Bei (514) kann das Verfahren (500) das Vergleichen des relativen Anwenderorts mit der in der Darstellung der Vorrichtungstopologie spezifizierten Vorrichtungstopologie enthalten. Der Ort des Anwenders innerhalb der Struktur kann z. B. mit den Vorrichtungen, die diesem Ort zugeordnet sind, wie es in der Darstellung der Vorrichtungstopologie spezifiziert ist, verglichen werden. In dieser Weise kann gefolgert werden, dass die ausgewählten Vorrichtungen Vorrichtungen sind, die sich in dem Raum befinden, in dem sich der Anwender befindet. Falls die Umschreibung z. B. ”schalte die Leuchten ein” lautet, können die Vorrichtungen, die sich in dem Raum befinden, in dem sich der Anwender befindet, analysiert werden, um eine oder mehrere Beleuchtungsvorrichtungen zu identifizieren, die diesem Raum zugeordnet sind. In dieser Weise kann gefolgert werden, dass die Vorrichtung, die als die ausgewählten Vorrichtungen ausgewählt werden, Beleuchtungsvorrichtungen sein sollten, die sich in dem Raum befinden, in dem sich der Anwender gegenwärtig befindet.
Bei (516) kann das Verfahren (500) das Bestimmen enthalten, ob die ausgewählten Vorrichtungen bestimmt werden können. Insbesondere kann das Bestimmen, ob die ausgewählten Vorrichtungen bestimmt werden können, das Bestimmen enthalten, ob die ausgewählten Vorrichtungen wenigstens teilweise basierend auf dem Vergleich der Umschreibung mit dem einen oder den mehreren Vorrichtungsattributen, der einen oder den mehreren Vorrichtungskennungen und/oder dem relativen Anwenderort bestimmt werden können. Falls die ausgewählten Vorrichtungen bestimmt werden können, kann das Verfahren (500) das Zurückkehren zu (506) enthalten, wobei die auszuführenden Handlungen bestimmt werden können. Falls die ausgewählten Vorrichtungen nicht bestimmt werden können, kann das Verfahren (500) bei (518) das Anfordern weiterer Informationen von dem Anwender enthalten. Dem Anwender kann z. B. in einer Anwenderschnittstelle der Steuervorrichtung oder einer anderen geeigneten Vorrichtung eine Aufforderung dargestellt werden, die den Anwender bezüglich weiterer Informationen hinsichtlich des Sprachbefehls fragt.
Es wird erkannt, dass in verschiedenen Fällen die ausgewählten Vorrichtungen und/oder die auszuführenden Handlungen wenigstens teilweise basierend auf den Vorrichtungskennungen und/oder den Vorrichtungsattributen und/oder dem relativen Anwenderort bestimmt werden können. In dieser Weise kann auf verschiedene Daten, die dem Anwender und/oder der Darstellung der Vorrichtungstopologie zugeordnet sind, zugegriffen werden und/oder können verschiedene Daten, die dem Anwender und/oder der Darstellung der Vorrichtungstopologie zugeordnet sind, bestimmt werden, um die eine oder die mehreren ausgewählten Vorrichtungen, die der Sprachäußerung zugeordnet sind, zu bestimmen oder zu folgern. In Abhängigkeit von der Umschreibung und der speziellen Organisation der Darstellung der Vorrichtungstopologie können verschiedene geeignete Kombinationen der Faktoren, auf die oben hingewiesen worden ist, verwendet werden, um die ausgewählten Vorrichtungen und/oder die auszuführenden Handlungen zu bestimmen. In dieser Weise wird erkannt, dass verschiedene Aspekte der Darstellung der Vorrichtungstopologie und/oder des Anwenderortes in verschiedenen Weisen verwendet werden können, um die ausgewählten Vorrichtungen und/oder die auszuführenden Handlungen zu bestimmen.
8 stellt ein beispielhaftes Computersystem 700 dar, das verwendet werden kann, um die Verfahren und Systeme gemäß den beispielhaften Aspekten der vorliegenden Offenbarung zu implementieren. Das System 700 kann unter Verwendung einer Client-Server-Architektur implementiert sein, die einen Server 710 enthält, der über ein Netz 740 mit einer oder mehreren Client-Vorrichtungen 730 kommuniziert. Das System 700 kann unter Verwendung anderer geeigneter Architekturen, wie z. B. einer einzigen Computervorrichtung, implementiert sein.
Das System 700 enthält einen Server 710, wie z. B. einen Web-Server. Der Server 710 kann unter Verwendung irgendeiner geeigneten Computervorrichtung (irgendwelcher geeigneter Computervorrichtungen) implementiert sein. Der Server 710 kann einen oder mehrere Prozessoren 712 und eine oder mehrere Speichervorrichtungen 714 aufweisen. Der Server 710 kann außerdem eine Netzschnittstelle enthalten, die verwendet wird, um über das Netz 740 mit einer oder mehreren Client-Vorrichtungen 730 zu kommunizieren. Die Netzschnittstelle kann irgendwelche geeigneten Komponenten enthalten, um mit einem oder mehreren Netzen eine Schnittstelle zu bilden, einschließlich z. B. Sendern, Empfängern, Ports, Controllern, Antennen oder anderen geeigneten Komponenten.
Der eine oder die mehreren Prozessoren 712 können irgendeine geeignete Verarbeitungsvorrichtung, wie z. B. einen Mikroprozessor, einen Mikrocontroller, eine integrierte Schaltung, eine Logikvorrichtung oder eine andere geeignete Verarbeitungsvorrichtung, enthalten. Die eine oder die mehreren Speichervorrichtungen 714 können ein oder mehrere computerlesbare Medien, einschließlich nichttransitorischer computerlesbarer Medien, RAM, ROM, Festplattenlaufwerken, Flash-Laufwerken oder anderen Speichervorrichtungen, aber nicht eingeschränkt auf diese, enthalten. Die eine oder die mehreren Speichervorrichtungen 714 können Informationen speichern, die durch den einen oder die mehreren Prozessoren 712 zugänglich sind, einschließlich computerlesbarer Anweisungen 716, die durch den einen oder die mehreren Prozessoren 712 ausgeführt werden können. Die Anweisungen 716 können irgendein Satz von Anweisungen sein, die, wenn sie durch den einen oder die mehreren Prozessoren 712 ausgeführt werden, den einen oder die mehreren Prozessoren 712 veranlassen, Operationen auszuführen. Die Anweisungen 716 können z. B. durch den einen oder die mehreren Prozessoren 712 ausgeführt werden, um die Beeinflussungseinrichtung 106, den Umschreiber 108, den Interpreter 110 oder den Befehlsgenerator 112, die bezüglich 1 beschrieben worden sind, zu implementieren.
Wie in 8 gezeigt ist, können die eine oder die mehreren Speichervorrichtungen 714 außerdem Daten 718 speichern, die durch den einen oder die mehreren Prozessoren 712 wiedergewonnen, beeinflusst, erzeugt oder gespeichert werden können. Die Daten 718 können z. B. Sprachmodelldaten, Daten der Darstellung der Vorrichtungstopologie und andere Daten enthalten. Die Daten 718 können in einer oder mehreren Datenbanken gespeichert sein. Die eine oder die mehreren Datenbanken können durch ein LAN oder ein WAN mit hoher Bandbreite mit dem Server 710 verbunden sein oder können außerdem durch das Netz 740 mit dem Server 710 verbunden sein. Die eine oder die mehreren Datenbanken können aufgeteilt sein, so dass sie sich an mehreren Örtlichkeiten befinden.
Der Server 710 kann über das Netz 740 Daten mit einer oder mehreren Client-Vorrichtungen 730 austauschen. Über das Netz 740 kann irgendeine Anzahl von Client-Vorrichtungen 730 mit dem Server 710 verbunden sein. Eine oder mehrere der Client-Vorrichtungen 730 können eine intelligente Vorrichtung sein, die konfiguriert ist, um Hausautomatisierungsdienste, intelligente Hausdienste, Dienste des Internets der Dinge und/oder andere geeignete Dienste bereitzustellen. Die intelligenten Vorrichtungen können ein Klimatisierungssystem, eine Beleuchtungsvorrichtung, ein Heimkino- und Unterhaltungssystem, ein Sicherheitssystem, ein automatisches Türverriegelungssystem, eine Thermostatvorrichtung, ein Heimautomatisierungssystem, einen Lautsprecher, eine Kameravorrichtung, ein Laufband, eine Waage, ein intelligentes Bett, ein Bewässerungssystem, einen Garagentüröffner, ein Haushaltsgerät, ein Babyphon, einen Brandmelder und/oder eine andere geeignete Vorrichtung oder ein anderes geeignetes System enthalten oder diesen zugeordnet sein. Eine oder mehrere der Client-Vorrichtungen können außerdem eine Anwender-Computervorrichtung, wie z. B. ein Universalcomputer, ein Spezialcomputer, ein Laptop, ein Desktop, eine Mobilvorrichtung, ein Navigationssystem, ein Smartphone, ein Tablet, eine tragbare Computervorrichtung, eine Anzeige mit einem oder mehreren Prozessoren oder eine andere geeignete Computervorrichtung, sein.
Ähnlich zu dem Server 710 kann eine Client-Vorrichtung 730 einen oder mehrere Prozessoren 732 und einen Speicher 734 enthalten. Der eine oder die mehreren Prozessoren 732 können eine oder mehrere Zentraleinheiten (CPUs), Graphikverarbeitungseinheiten (GPUs), die dediziert sind, um Bilder effizient wiederzugeben oder andere spezialisierte Berechnungen auszuführen, und/oder andere Verarbeitungsvorrichtungen enthalten. Der Speicher 734 kann ein oder mehrere computerlesbare Medien enthalten und kann Informationen, die durch den einen oder die mehreren Prozessoren 732 zugänglich sind, einschließlich der Anweisungen 736, die durch den einen oder die mehreren Prozessoren 732 ausgeführt werden können, und der Daten 738 speichern. Der Speicher 734 kann z. B. die Anweisungen 736 zum Implementieren einer Anwenderschnittstelle speichern.
Die Client-Vorrichtung 730 nach 8 kann verschiedene Eingabe-/Ausgabevorrichtungen 737 zum Bereitstellen und Empfangen von Informationen von einem Anwender, wie z. B. einen Berührungsschirm, ein Touchpad, Dateneingabetasten, Lautsprecher und/oder ein für die Spracherkennung geeignetes Mikrophon, enthalten. Die Client-Vorrichtung 730 kann z. B. eine Anzeigevorrichtung 735 zum Darstellen einer Anwenderschnittstelle gemäß beispielhaften Aspekten der vorliegenden Offenbarung aufweisen.
Die Client-Vorrichtung 730 kann außerdem eine Netzschnittstelle enthalten, die verwendet wird, um über das Netz 740 mit einer oder mehreren entfernten Computervorrichtungen (z. B. dem Server 710) zu kommunizieren. Die Netzschnittstelle kann irgendwelche geeigneten Komponenten enthalten, um mit einem oder mehreren Netzen eine Schnittstelle zu bilden, einschließlich z. B. Sendern, Empfängern, Ports, Controllern, Antennen oder anderen geeigneten Komponenten.
Das Netz 740 kann irgendein Typ eines Kommunikationsnetzes, wie z. B. ein lokales Netz (z. B. ein Intranet), ein Weitbereichsnetz (z. B. das Internet), ein Zellennetz oder irgendeine Kombination daraus, sein. Das Netz 740 kann außerdem eine direkte Verbindung zwischen einer Client-Vorrichtung 730 und dem Server 710 enthalten. Im Allgemeinen kann die Kommunikation zwischen dem Server 710 und einer Client-Vorrichtung 730 unter Verwendung irgendeines Typs einer verdrahteten und/oder drahtlosen Verbindung, unter Verwendung verschiedener Kommunikationsprotokolle (z. B. TCP/IP, HTTP, SMTP, FTP), Codierungen oder Formate (z. B. HTML, XML) und/oder Schutzschemata (z. B. VPN, sicheres HTTP, SSL) über eine Netzschnittstelle ausgeführt werden.
Ein beispielhafter Aspekt der vorliegenden Offenbarung ist auf ein computerimplementiertes Verfahren zum Verarbeiten von Sprachäußerungen gerichtet. Das Verfahren kann das Empfangen durch eine oder mehrere Computervorrichtungen von Daten, die eine Sprachäußerung angeben, enthalten. Die Sprachäußerung kann durch einen Anwender einer Steuervorrichtung bereitgestellt worden sein. Das Verfahren kann das Zugreifen durch die eine oder die mehreren Computervorrichtungen auf eine Darstellung einer Vorrichtungstopologie enthalten. Die Darstellung der Vorrichtungstopologie kann mehrere intelligente Vorrichtungen, die einer oder mehreren Strukturen zugeordnet sind, definieren. Die Darstellung der Vorrichtungstopologie kann ferner einen Ort jeder der mehreren Vorrichtungen und der Steuervorrichtung innerhalb der zugeordneten Strukturen definieren. Das Verfahren kann das Bestimmen durch die eine oder die mehreren Computervorrichtungen einer oder mehrerer ausgewählter Vorrichtungen und einer oder mehrerer Handlungen, die durch die eine oder die mehreren ausgewählten Vorrichtungen auszuführen sind, wenigstens teilweise basierend auf den Daten, die die Sprachäußerung angeben, und ferner wenigstens teilweise basierend auf dem Ort der Steuervorrichtung innerhalb der zugeordneten Struktur, wie sie durch die Darstellung der Vorrichtungstopologie definiert ist, enthalten.
In einigen Implementierungen kann das Bestimmen durch die eine oder die mehreren Computervorrichtungen der einen oder der mehreren ausgewählten Vorrichtungen enthalten: Identifizieren durch die eine oder die mehreren Computervorrichtungen einer Teilmenge der mehreren Vorrichtungen, die den gleichen Ort wie die Steuervorrichtung teilen; und Bestimmen durch die eine oder die mehreren Computervorrichtungen der einen oder der mehreren ausgewählten Vorrichtungen aus der identifizierten Teilmenge der mehreren Vorrichtungen.
In einigen Implementierungen kann die Darstellung der Vorrichtungstopologie einen oder mehrere Räume innerhalb jeder der einen oder der mehreren Strukturen definieren. Der Ort jeder der mehreren Vorrichtungen und der Steuervorrichtung, der durch die Darstellung der Vorrichtungstopologie definiert ist, kann jeweils wenigstens einem des einen oder der mehreren Räume entsprechen.
In einigen Implementierungen kann das Bestimmen durch die eine oder die mehreren Computervorrichtungen der einen oder der mehreren ausgewählten Vorrichtungen enthalten: Identifizieren durch die eine oder die mehreren Computervorrichtungen einer Teilmenge der mehreren Vorrichtungen, die sich in demselben Raum wie die Steuervorrichtung befinden; und Bestimmen durch die eine oder die mehreren Computervorrichtungen der einen oder der mehreren ausgewählten Vorrichtungen aus der identifizierten Teilmenge der mehreren Vorrichtungen.
In einigen Implementierungen kann das Bestimmen durch die eine oder die mehreren Computervorrichtungen der einen oder der mehreren ausgewählten Vorrichtungen aus der identifizierten Teilmenge der mehreren Vorrichtungen enthalten: Identifizieren durch die eine oder die mehreren Computervorrichtungen eines oder mehrerer Vorrichtungsattribute, auf die durch die Sprachäußerung verwiesen wird; und Identifizieren durch die eine oder die mehreren Computervorrichtungen, welche der Teilmengen der mehreren Vorrichtungen das eine oder die mehreren Vorrichtungsattribute aufweist.
In einigen Implementierungen ist die Steuervorrichtung eine von mehreren Vorrichtungen.
In einigen Implementierungen kann die Darstellung der Vorrichtungstopologie eine oder mehrere Vorrichtungskennungen und ein oder mehrere Vorrichtungsattribute für jede der mehreren Vorrichtungen spezifizieren.
In einigen Implementierungen kann das Bestimmen durch die eine oder die mehreren Computervorrichtungen der einen oder der mehreren ausgewählten Vorrichtungen und der einen oder der mehreren Handlungen das Bestimmen durch die eine oder die mehreren Computervorrichtungen der einen oder der mehreren ausgewählten Vorrichtungen und der einen oder der mehreren Handlungen wenigstens teilweise basierend auf einer der einen oder der mehreren Vorrichtungskennungen, die in der Darstellung der Vorrichtungstopologie spezifiziert sind, enthalten.
In einigen Implementierungen kann das Bestimmen durch die eine oder die mehreren Computervorrichtungen der einen oder der mehreren ausgewählten Vorrichtungen und der einen oder der mehreren Handlungen das Bestimmen durch die eine oder die mehreren Computervorrichtungen der einen oder der mehreren ausgewählten Vorrichtungen und der einen oder der mehreren Handlungen wenigstens teilweise basierend auf einem des einen oder der mehreren Vorrichtungsattribute, die in der Darstellung der Vorrichtungstopologie spezifiziert sind, enthalten.
In einigen Implementierungen kann das Verfahren ferner das Bestimmen durch die eine oder die mehreren Computervorrichtungen eines oder mehrerer Steuerbefehle wenigstens teilweise basierend auf der einen oder den mehreren ausgewählten Vorrichtungen und der einen oder den mehreren ausgewählten Handlungen enthalten, wobei der eine oder die mehreren Steuerbefehle jeweils die eine oder die mehreren ausgewählten Vorrichtungen anweisen, die eine oder die mehreren Handlungen auszuführen. In einigen Implementierungen kann das Verfahren ferner das Bereitstellen durch die eine oder die mehreren Computervorrichtungen des einen oder der mehreren Steuerbefehle für die eine oder die mehreren ausgewählten Vorrichtungen enthalten.
In einigen Implementierungen können die eine oder die mehreren Computervorrichtungen, die das Verfahren ausführen, aus der Steuervorrichtung bestehen.
Ein weiterer beispielhafter Aspekt der vorliegenden Offenbarung ist auf ein Computersystem gerichtet, das einen oder mehrere Prozessoren und eine oder mehrere Speichervorrichtungen enthält. Die eine oder die mehreren Speichervorrichtungen können computerlesbare Anweisungen speichern, die, wenn sie durch den einen oder die mehreren Prozessoren ausgeführt werden, den einen oder die mehreren Prozessoren veranlassen, Operationen auszuführen. Die Operationen können das Empfangen von Daten, die eine Sprachäußerung angeben, enthalten. Die Sprachäußerung kann durch einen Anwender einer Steuervorrichtung bereitgestellt worden sein. Die Operationen können das Zugreifen auf eine Darstellung einer Vorrichtungstopologie enthalten. Die Darstellung der Vorrichtungstopologie kann mehrere intelligente Vorrichtungen, die einer oder mehreren Strukturen zugeordnet sind, definieren. Die Darstellung der Vorrichtungstopologie kann ferner einen Ort jeder der mehreren Vorrichtungen und der Steuervorrichtung innerhalb der zugeordneten Strukturen definieren. Die Operationen können das Bestimmen einer oder mehrerer ausgewählter Vorrichtungen und einer oder mehrerer Handlungen, die durch die eine oder die mehreren ausgewählten Vorrichtungen auszuführen sind, wenigstens teilweise basierend auf den Daten, die die Sprachäußerung angeben, und ferner wenigstens teilweise basierend auf dem Ort der Steuervorrichtung innerhalb der zugeordneten Struktur, wie er durch die Darstellung der Vorrichtungstopologie definiert ist, enthalten.
In einigen Implementierungen kann das Bestimmen der einen oder der mehreren ausgewählten Vorrichtungen enthalten: Identifizieren einer Teilmenge der mehreren Vorrichtungen, die den gleichen Ort wie die Steuervorrichtung teilen; und Bestimmen der einen oder der mehreren ausgewählten Vorrichtungen aus der identifizierten Teilmenge der mehreren Vorrichtungen.
In einigen Implementierungen kann die Darstellung der Vorrichtungstopologie einen oder mehrere Räume innerhalb jeder der einen oder der mehreren Strukturen definieren. Der Ort jeder der mehreren Vorrichtungen und der Steuervorrichtung, der durch die Darstellung der Vorrichtungstopologie definiert ist, kann jeweils wenigstens einem des einen oder der mehreren Räume entsprechen.
In einigen Implementierungen kann das Bestimmen der einen oder der mehreren ausgewählten Vorrichtungen enthalten: Identifizieren einer Teilmenge der mehreren Vorrichtungen, die sich in demselben Raum wie die Steuervorrichtung befinden; und Bestimmen der einen oder der mehreren ausgewählten Vorrichtungen aus der identifizierten Teilmenge der mehreren Vorrichtungen.
In einigen Implementierungen kann das Bestimmen der einen oder der mehreren ausgewählten Vorrichtungen aus der identifizierten Teilmenge der mehreren Vorrichtungen enthalten: Identifizieren eines oder mehrerer Vorrichtungsattribute, auf die durch die Sprachäußerung hingewiesen wird; und Identifizieren, welche der Teilmengen der mehreren Vorrichtungen das eine oder die mehreren Vorrichtungsattribute aufweist.
In einigen Implementierungen können die Operationen ferner enthalten: Bestimmen eines oder mehrerer Steuerbefehle wenigstens teilweise basierend auf der einen oder den mehreren ausgewählten Vorrichtungen und der einen oder den mehreren Handlungen, wobei der eine oder die mehreren Steuerbefehle jeweils die eine oder die mehreren ausgewählten Vorrichtungen anweisen, die eine oder die mehreren Handlungen auszuführen; und Bereitstellen des einen oder der mehreren Steuerbefehle der einen oder den mehreren ausgewählten Vorrichtungen.
In einigen Implementierungen kann das Computersystem die Steuervorrichtung enthalten, wobei die Steuervorrichtung den einen oder die mehreren Prozessoren und die eine oder die mehreren Speichervorrichtungen enthalten kann.
Ein weiterer beispielhafter Aspekt der vorliegenden Offenbarung ist auf ein computerimplementiertes Verfahren gerichtet. Das Verfahren kann das Erhalten durch eine oder mehrere Computervorrichtungen einer Darstellung einer Vorrichtungstopologie enthalten, die einen jeweiligen Ort für jede von mehreren Vorrichtungen, die in der Darstellung der Vorrichtungstopologie enthalten sind, beschreibt. Die mehreren Vorrichtungen können eine oder mehrere Steuervorrichtungen enthalten. Das Verfahren kann das Erhalten durch die eine oder die mehreren Computervorrichtungen einer Sprachäußerung enthalten. Das Verfahren kann das Identifizieren durch die eine oder die mehreren Computervorrichtungen einer ersten Steuervorrichtung der einen oder der mehreren Steuervorrichtungen, der die Sprachäußerung durch einen Anwender bereitgestellt wurde, enthalten. Das Verfahren kann das Bestimmen durch die eine oder die mehreren Computervorrichtungen einer Teilmenge der mehreren Vorrichtungen, die durch die Darstellung der Vorrichtungstopologie als den gleichen Ort wie die erste Steuervorrichtung, der die Sprachäußerung bereitgestellt wurde, aufweisend beschrieben werden, enthalten. Das Verfahren kann das Bestimmen durch die eine oder die mehreren Computervorrichtungen einer oder mehrerer ausgewählter Vorrichtungen aus der Teilmenge der mehreren Vorrichtungen wenigstens teilweise basierend auf den Daten, die die Sprachäußerung angeben, enthalten.
In einigen Implementierungen kann die Darstellung der Vorrichtungstopologie einen speziellen Raum für jede der mehreren Vorrichtungen spezifizieren. In einigen Implementierungen kann das Bestimmen durch die eine oder die mehreren Computervorrichtungen einer Teilmenge der mehreren Vorrichtungen das Identifizieren durch die eine oder die mehreren Computervorrichtungen der Teilmenge der mehreren Vorrichtungen, für die die Darstellung der Vorrichtungstopologie denselben Raum wie für die erste Steuervorrichtung, der die Sprachäußerung bereitgestellt wurde, spezifiziert, enthalten.
In einigen Implementierungen können die eine oder die mehreren Computervorrichtungen aus der ersten Steuervorrichtung bestehen, so dass die erste Steuervorrichtung das computerimplementierte Verfahren ausführt. In einigen Implementierungen können die mehreren Vorrichtungen mehrere Steuervorrichtungen enthalten. In einigen Implementierungen können die mehreren Steuervorrichtungen jeweils mehreren Orten zugeordnet sein. Die mehreren Steuervorrichtungen können z. B. jeweils mehreren Räumen zugeordnet sein.
Die hier erörterte Technik nimmt sowohl auf Server, Datenbanken, Software-Anwendungen und andere computerbasierte Systeme als auch auf ausgeführte Handlungen und an derartige Systeme und von derartigen Systemen gesendete Informationen Bezug. Ein Durchschnittsfachmann auf dem Gebiet erkennt, dass die inhärente Flexibilität computerbasierter Systeme eine große Vielfalt möglicher Konfigurationen, Kombinationen und Unterteilungen der Aufgaben und der Funktionalität zwischen und unter den Komponenten ermöglicht. Die hier erörterten Server-Prozesse können z. B. unter Verwendung eines einzigen Servers oder mehrerer Server, die in Kombination arbeiten, implementiert sein. Die Datenbanken und die Anwendungen können in einem einzigen System oder über mehrere Systeme verteilt implementiert sein. Die verteilten Komponenten können sequentiell oder parallel arbeiten.
Während der vorliegende Gegenstand bezüglich seiner spezifischen beispielhaften Ausführungsformen ausführlich beschrieben worden ist, wird erkannt, dass die Fachleute auf dem Gebiet beim Erreichen eines Verständnisses des Vorhergehenden leicht Änderungen an den, Variationen der und Äquivalente der derartigen Ausführungsformen erzeugen können. Entsprechend ist der Schutzumfang der vorliegenden Offenbarung beispielhaft anstatt zur Einschränkung, wobei die Offenbarung des Gegenstands die Einbeziehung derartiger Modifikationen, Variationen und/oder Ergänzungen an dem vorliegenden Gegenstand nicht ausschließt, wie durch einen Durchschnittsfachmann auf dem Gebiet leicht erkannt würde.

Claims

Computersystem, das umfasst: einen oder mehrere Prozessoren; und eine oder mehrere Speichervorrichtungen, wobei die eine oder die mehreren Speichervorrichtungen computerlesbare Anweisungen speichern, die, wenn sie durch den einen oder die mehreren Prozessoren ausgeführt werden, den einen oder die mehreren Prozessoren veranlassen, Operationen auszuführen, wobei die Operationen umfassen: Empfangen von Daten, die eine Sprachäußerung angeben, wobei die Sprachäußerung durch einen Anwender einer Steuervorrichtung bereitgestellt wird; Zugreifen auf eine Darstellung einer Vorrichtungstopologie, wobei die Darstellung der Vorrichtungstopologie mehrere intelligente Vorrichtungen definiert, die einer oder mehreren Strukturen zugeordnet sind, wobei die Darstellung der Vorrichtungstopologie ferner einen Ort jeder der mehreren Vorrichtungen innerhalb der zugeordneten Strukturen definiert; Bestimmen einer Umschreibung der Sprachäußerung wenigstens teilweise basierend auf der Darstellung der Vorrichtungstopologie; und Bestimmen einer oder mehrerer ausgewählter Vorrichtungen und einer oder mehrerer durch die eine oder die mehreren ausgewählten Vorrichtungen auszuführenden Handlungen wenigstens teilweise basierend auf der bestimmten Umschreibung und der Darstellung der Vorrichtungstopologie.
Computersystem nach Anspruch 1, wobei das Bestimmen einer Umschreibung der Sprachäußerung das Beeinflussen eines allgemeinen Sprachmodells wenigstens teilweise basierend auf der Darstellung der Vorrichtungstopologie und das Bestimmen der Umschreibung wenigstens teilweise basierend auf dem Beeinflussen umfasst.
Computersystem nach Anspruch 1 oder Anspruch 2, wobei die Operationen ferner umfassen: Bestimmen eines Orts des Anwenders wenigstens teilweise basierend auf einem Ort der Steuervorrichtung.
Computersystem nach Anspruch 3, wobei der dem Anwender zugeordnete Ort wenigstens teilweise basierend auf einem Ort der Steuervorrichtung, wie er in der Darstellung der Vorrichtungstopologie spezifiziert ist, bestimmt wird.
Computersystem nach Anspruch 3 oder Anspruch 4, wobei das Bestimmen einer oder mehrerer ausgewählter Vorrichtungen und einer oder mehrerer Handlungen das Bestimmen der einen oder der mehreren ausgewählten Vorrichtungen und der einen oder der mehreren Handlungen wenigstens teilweise basierend auf dem Ort, der dem Anwender zugeordnet ist, bezüglich der Orte einer oder mehrerer Vorrichtungen, die in der Darstellung der Vorrichtungstopologie spezifiziert sind, umfasst.
Computersystem nach einem der Ansprüche 1 bis 5, wobei die Darstellung der Vorrichtungstopologie einen oder mehrere Räume innerhalb jeder der einen oder der mehreren Strukturen definiert und wobei der Ort jeder der mehreren Vorrichtungen wenigstens einem des einen oder der mehreren Räume entspricht.
Ein oder mehrere greifbare, nichttransitorische computerlesbare Medien, die computerlesbare Anweisungen speichern, die, wenn sie durch einen oder mehrere Prozessoren ausgeführt werden, den einen oder die mehreren Prozessoren veranlassen, Operationen auszuführen, wobei die Operationen umfassen: Empfangen von Daten, die eine Sprachäußerung angeben, wobei die Sprachäußerung durch einen Anwender einer Steuervorrichtung bereitgestellt wird; Zugreifen auf eine Darstellung einer Vorrichtungstopologie, wobei die Darstellung der Vorrichtungstopologie mehrere intelligente Vorrichtungen definiert, die einer oder mehreren Strukturen zugeordnet sind, wobei die Darstellung der Vorrichtungstopologie ferner einen Ort jeder der mehreren Vorrichtungen innerhalb der zugeordneten Strukturen definiert; Bestimmen einer Umschreibung der Sprachäußerung wenigstens teilweise basierend auf der Darstellung der Vorrichtungstopologie; und Bestimmen einer oder mehrerer ausgewählter Vorrichtungen und einer oder mehrerer durch die eine oder die mehreren ausgewählten Vorrichtungen auszuführenden Handlungen wenigstens teilweise basierend auf der bestimmten Umschreibung und der Darstellung der Vorrichtungstopologie.
Ein oder mehrere greifbare, nichttransitorische computerlesbare Medien nach Anspruch 7, wobei die Darstellung der Vorrichtungstopologie eine oder mehrere Vorrichtungskennungen und ein oder mehrere Vorrichtungsattribute für jede intelligente Vorrichtung spezifiziert.
Ein oder mehrere greifbare, nichttransitorische computerlesbare Medien nach Anspruch 8, wobei das Bestimmen einer oder mehrerer ausgewählter Vorrichtungen und einer oder mehrerer Handlungen das Bestimmen der einen oder der mehreren ausgewählten Vorrichtungen und der einen oder der mehreren Handlungen wenigstens teilweise basierend auf wenigstens einer der einen oder der mehreren Vorrichtungskennungen, die in der Darstellung der Vorrichtungstopologie spezifiziert sind, umfasst.
Ein oder mehrere greifbare, nichttransitorische computerlesbare Medien nach Anspruch 8 oder Anspruch 9, wobei das Bestimmen durch die eine oder die mehreren Computervorrichtungen einer oder mehrerer ausgewählter Vorrichtungen und einer oder mehrerer Handlungen das Bestimmen der einen oder der mehreren ausgewählten Vorrichtungen und der einen oder der mehreren Handlungen wenigstens teilweise basierend auf einem des einen oder der mehreren Vorrichtungsattribute, die in der Darstellung der Vorrichtungstopologie spezifiziert sind, umfasst.