EP3884693A1 - Computer-implementiertes verfahren zum miteinander assoziieren von zumindest zwei kommunikationsendgeräten und kommunikationsendgerät - Google Patents

Computer-implementiertes verfahren zum miteinander assoziieren von zumindest zwei kommunikationsendgeräten und kommunikationsendgerät

Info

Publication number
EP3884693A1
EP3884693A1 EP18811196.7A EP18811196A EP3884693A1 EP 3884693 A1 EP3884693 A1 EP 3884693A1 EP 18811196 A EP18811196 A EP 18811196A EP 3884693 A1 EP3884693 A1 EP 3884693A1
Authority
EP
European Patent Office
Prior art keywords
communication
communication terminal
audio signals
communication terminals
terminals
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
EP18811196.7A
Other languages
English (en)
French (fr)
Inventor
Thomas Lederer
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Unify Beteiligungsverwaltung and Co Kg GmbH
Original Assignee
Unify Patente GmbH and Co KG
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Unify Patente GmbH and Co KG filed Critical Unify Patente GmbH and Co KG
Publication of EP3884693A1 publication Critical patent/EP3884693A1/de
Pending legal-status Critical Current

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W12/00Security arrangements; Authentication; Protecting privacy or anonymity
    • H04W12/06Authentication
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W12/00Security arrangements; Authentication; Protecting privacy or anonymity
    • H04W12/50Secure pairing of devices
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L63/00Network architectures or network communication protocols for network security
    • H04L63/08Network architectures or network communication protocols for network security for authentication of entities
    • H04L63/0861Network architectures or network communication protocols for network security for authentication of entities using biometrical features, e.g. fingerprint, retina-scan

Definitions

  • the present invention relates to a computer-implemented method for associating at least two communication terminals with one another and a communication terminal.
  • Modern communication and collaboration platforms allow users to communicate and collaborate with each other at different locations.
  • applications are known which make this possible, for example “circuit”.
  • a virtual meeting room can be used via a single application in which various functions for efficient communication and collaboration are available online.
  • a user takes part in such a conversation, this can be done from any device on which the application is running, in order to access the corresponding conversations or documents and the like, for example, via the web browser Chrome, Internet Explorer or Firefox.
  • the user can use a mobile terminal, such as a mobile phone, or a laptop computer.
  • a mobile terminal such as a mobile phone, or a laptop computer.
  • CMR Circuit Meeting Room
  • a participant not only wants to dial into the teleconference with a single device, such as his mobile phone, but also in parallel, e.g. For example, if you use your laptop computer with both devices in close proximity to each other (for example, in the same room), the user must enter an additional pin code that is displayed on the CMR screen to ensure that both devices are actually in the same room.
  • Another known pairing method is based on Bluetooth connections, which, however, must then also be present for this.
  • GPS Global Positioning Services
  • Another approach provides for two end devices, such as two smartphones, to determine the direct proximity of these end devices to one another via the “Bump” application.
  • the devices must be brought into contact with one another or abut one another, with motion sensors and a cloud service being used to determine the proximity and to carry out an association.
  • Bluetooth beacons which can be used to detect other end devices in the vicinity which emit a beacon signal.
  • these are also based on the necessary Bluetooth signals.
  • a still further approach for determining the direct proximity of two terminals to one another is to emit an inaudible noise from a device or a terminal to be associated, the inaudible noise being detected by the other terminal in the vicinity, for example via its microphone and analyzed to decode the inaudible signal.
  • this approach cannot be used in practice and is subject to errors, so that it cannot be implemented.
  • This object is achieved by a computer-implemented method with the features according to claim 1 and by communication terminal to carry out the method with the features according to claim 8.
  • Preferred embodiments are specified in the respective subclaims.
  • a computer-implemented method for associating at least two communication terminals, each having a microphone and connected to a communication network comprising the following steps: activating the respective
  • Microphones of the at least two communication terminals Receiving sound waves, in particular a word or phrase spoken by a user, through the respective microphones of the at least two communication terminals, converting the sound waves into audio signals by the respective communication terminals; and forwarding the
  • Audio signals from the respective communication terminals via the communication network to a cloud service the cloud service being designed to compare the audio signals for agreement and, if the audio signals meet at least one predetermined agreement criterion, the respective ones
  • the method according to the invention makes it possible to have two communication terminals located in direct proximity to one another (e.g. direct proximity means here in a room; the distance between the two terminals is not limited to a predetermined distance; rather, direct proximity can be understood that the at least two communication terminals by one and the same user or
  • Conference participants should be usable in parallel) without these two communication terminals having to establish a Bluetooth connection. This also does not require expensive GPS sensors or that both communication terminals are in the same communication network). This means that the method according to the invention is independent of the type of network connection (WLAN / DSL, GSM, LAN / WAN).
  • Another advantage of the method according to the invention is that, due to the fact that the voice or audio signals (generated by the voice of the user who speaks a word or a sentence) are used, an additional authentication of the user can be carried out in order to determine whether the association service can or may use it at all.
  • the method can thus also comprise a step of authenticating the user of the at least two communication terminals, in particular based on the audio data.
  • the at least one match criterion is based on a match of audio samples from the received audio signals.
  • the audio sample can also be used to authenticate the user regarding the use of the association service.
  • the method comprises a step of generating an acoustic fingerprint on the basis of the Sound waves and a forwarding of the acoustic fingerprint to the cloud service.
  • the acoustic fingerprint can also be used to authenticate the user.
  • the at least one match criterion is then preferably based on a match of the acoustic fingerprints.
  • time stamps are added to the respective audio signals by the at least two communication terminals, and the match criterion is also based on a match of the time stamps.
  • the at least two communication terminals receive the respective mutual IP addresses from the cloud service in order to communicate with one another.
  • the method is preferably carried out by calling a
  • Association function started on the at least two communication terminals, wherein the call is made by pressing a predetermined button or a predetermined button.
  • the association of the at least two communication terminals represents the parallel use of the at least two terminals by a user in an online group conversation on a communication and collaboration platform.
  • the invention provides a communication terminal which has a microphone and means for establishing a connection to a communication network, the communication terminal being provided with a button or button which is designed to perform an association function for associating the To start communication terminal with at least one further communication terminal, the association function comprising activating the microphone and converting the sound waves received via the microphone, in particular a word or phrase spoken by a user, into audio signals via the communication network to a cloud service for comparing the forwarded Audio signals with audio signals of an at least second communication terminal to be associated with the communication terminal according to a match criterion.
  • the communication terminal is preferably a mobile telephone or a laptop computer.
  • the communication terminal is further configured to receive an IP address of the at least second communication terminal to be associated.
  • the communication terminal is configured to associate with the second communication terminal after receiving the IP address of the at least second communication terminal to be associated, in order to parallel with the associated at least second communication terminal in an online group conversation on a communication and Collaboration platform to be usable by a user.
  • Fig. 1 is a schematic representation of a communication network with a cloud service for performing the method for associating at least two Communication terminals according to an embodiment of the invention.
  • FIG. 1 is a schematic illustration of a global communication network 1 with a cloud service 2 for performing the method for associating two communication terminals 3, 4 according to an embodiment of the invention.
  • more than two communication terminals that a user 5 wants to use in parallel can also be associated with one another, e.g. B. in a teleconference, which can be carried out using a WebRTC-based application, for example via a communication and collaboration platform, implemented on the circuit.
  • the cloud service 2 for associating communication terminals can be integrated in the communication and collaboration platform or can be provided separately.
  • the communication terminals here comprise a first communication terminal 3 in the form of a mobile phone of the user 5 and a second communication terminal 4 in the form of a laptop computer of the same user 5.
  • Each communication terminal 3, 4 has its own microphone 6 (for the mobile phone) or 6 '(for the laptop computer).
  • both the first communication terminal 3 and the second communication terminal 4 are provided with a button 7 (for the mobile phone) or 7 ′′ (for the laptop computer), which the user 5 can actuate to start an association function.
  • the button 7, 7 ' can be implemented, for example, on a touch screen of the respective communication terminals 3, 4, or also by means of a button or a button (e.g. a button for making a call to a USB connected via a USB interface -Audio device.
  • the USB audio device would be Jabra Speak 510 or Logitech Group in question, which in addition to speakers and microphones also include buttons for removing or hanging up the audio device, can be integrated into this solution, for example by supporting a Human Interface Device (HID) USB device standards) on the respective communication terminal 3, 4.
  • HID Human Interface Device
  • both communication terminals 3, 4 are each set to the “listen mode” (reception / listening), their respective microphones 6, 6 ′ being activated. As soon as the microphones 6, 6 'are switched on, the user 5 can then speak any word or an entire sentence or the like, the sound waves thereby generated or emitted being received by the respective microphones 6, 6' and in each communication terminal 3, 4 can be converted into audio signals.
  • the first communication terminal 3 uses a first network 8, e.g. B. a Global System for Mobile Communications (GSM) and the second communication terminal
  • Second network 4 uses a different second network 9, e.g. B. WLAN / DSL.
  • a respective acoustic fingerprint it is also possible for a respective acoustic fingerprint to be calculated from the audio signals before the audio signals are forwarded to the cloud service 2. That is, on the The first communication terminal creates a first acoustic fingerprint and then forwards it to the cloud service 2, and a second acoustic fingerprint is created for the second communication terminal and then forwards it to the cloud service 2.
  • the cloud service 2 then receives the audio data either directly or in the form of the respective fingerprints and then applies a comparison algorithm to respective audio samples (one of the audio data recorded by the microphone 6 of the first communication terminal 3 and another of the audio data recorded by the microphone 6 ' of the second communication terminal 4).
  • the respective audio signals have to meet a predetermined matching criterion in order to be recognized as matching - that is, originating from the same user.
  • This match criterion can include a match in the respective audio samples, but it can also additionally include a match in time stamps with which the respective audio data are provided before they are forwarded to the cloud service 2.
  • This evaluation results in an exact determination of a close proximity (for example in the same room or also at a predetermined distance) of the two communication terminals 3, 4 to be associated if the two audio samples are identical or if the two acoustic fingerprints alternatively match and thus can be assigned to the same user 5, then an association of the two communication terminals 3, 4 is carried out.
  • the cloud service 2 sends the respective mutual IP addresses to the communication terminals 3, 4.
  • the cloud service 2 sends the first communication terminal 3 the IP address of the second communication terminal 4 and the second communication terminal 4 the IP address of the first communication terminal 3.

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Security & Cryptography (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Telephonic Communication Services (AREA)

Abstract

Die Erfindung betrifft ein Computer-implementiertes Verfahren zum miteinander Assoziieren von zumindest zwei Kommunikationsendgeräten (3, 4), die jeweils ein Mikrophon (6, 6') aufweisen und mit einem Kommunikationsnetzwerk (1, 8, 9) verbunden sind, wobei das Verfahren die folgenden Schritte umfasst: Aktivieren der jeweiligen Mikrophone (6, 6') der zumindest zwei Kommunikationsendgeräte (3, 4); Empfangen von Schallwellen, insbesondere von einem durch einen Benutzer (5) gesprochenem Wort oder Satz, durch die jeweiligen Mikrophone (6, 6') der zumindest zwei Kommunikationsendgeräte (3, 4), Umwandeln der Schallwellen in Audiosignale durch die jeweiligen Kommunikationsendgeräte (3, 4); und Weiterleiten der Audiosignale von den jeweiligen Kommunikationsendgeräten (3, 4) über das Kommunikationsnetzwerk (1, 8, 9) an einen Cloud Service (2), wobei der Cloud Service (2) ausgestaltet ist, die Audiosignale auf Übereinstimmung zu vergleichen und, sofern die Audiosignale zumindest ein vorbestimmtes Übereinstimmungskriterium erfüllen, die jeweiligen Kommunikationsendgeräte (3, 4) miteinander zu assoziieren. Weiterhin betrifft die vorliegende Erfindung ein Kommunikationsendgerät (3, 4), welches ein Mikrofon (6, 6') und Mittel zum Herstellen einer Verbindung mit einem Kommunikationsnetzwerk (1, 8, 9) aufweist, wobei das Kommunikationsendgerät (3, 4) mit einer Taste oder Schaltfläche (7, 7') versehen ist, welche ausgestaltet ist, um eine Assoziierungsfunktion zum Assoziieren des Kommunikationsendgeräts (3, 4) mit zumindest einem weiteren Kommunikationsendgerät (3, 4) zu starten, wobei die Assoziierungsfunktion ein Aktivieren des Mikrofons (6, 6') und ein Umwandeln der über das Mikrofon (6, 6') empfangenen Schallwellen, insbesondere eines durch einen Benutzer (5) gesprochenem Wortes oder Satzes, in Audiosignale über das Kommunikationsnetzwerk (1, 8, 9) an einen Cloud Service (2) umfasst zum Vergleichen der weitergeleiteten Audiosignale mit Audiosignalen eines mit dem Kommunikationsendgerät (3, 4) zu assoziierenden zumindest zweiten Kommunikationsendgeräts (3, 4) gemäß einem Übereinstimmungskriterium.

Description

Computer-implementiertes Verfahren zum miteinander Assoziieren von zumindest zwei Kommunikationsendgeräten und
Kommunikationsendgerät
Beschreibung
Die vorliegende Erfindung betrifft ein Computer-implementiertes Verfahren zum miteinander Assoziieren von zumindest zwei Kommunikationsendgeräten und ein Kommunikationsendgerät.
Moderne Kommunikations- und Kollaborationsplattformen, wie sie heutzutage aus dem Stand der Technik bekannt sind, erlauben es Benutzern, an verschiedensten Standorten miteinander zu kommunizieren und kollaborieren. Um beispielsweise über ein Kommunikationsnetzwerk mittels WebRTC-basierte Echtzeit-Telekonferenzen oder Konversationen über einen entsprechenden Cloud-Service durchführen zu können, sind Applikationen bekannt, die dies ermöglichen, beispielsweise„Circuit“. Hier kann über eine einzige Applikation ein virtueller Meeting-Raum genutzt werden, in welchem diverse Funktionen zur effizienten Kommunikation und Kollaboration online zur Verfügung stehen.
Nimmt ein Nutzer an einer derartigen Konversation teil, dann kann dies von jeglichem Endgerät, auf dem die Applikation läuft, bewerkstelligt werden, um so beispielsweise über die Webbrowser Chrome, Internet Explorer oder Firefox auf die entsprechenden Konversationen oder auch Dokumente und dergleichen Zugriff zu nehmen. Zum Beispiel kann der Nutzer hierzu ein mobiles Endgerät, wie beispielsweise ein mobiles Telefon, oder einen Laptop Computer verwenden. Auch sind andere Hardware-/Software-Lösungen bekannt, die ein Teilnehmen an Telekonferenzen ermöglichen, z. B. Circuit Meeting Room (CMR).
Will ein Teilnehmer sich jedoch nicht nur mit einem einzigen Gerät, wie beispielsweise seinem Mobiltelefon, in die Telekonferenz einwählen, sondern parallel auch z. B. seinen Laptop-Computer hierzu nutzen, wobei sich beide Geräte in direkter Nähe zueinander befinden (beispielsweise in dem gleichen Raum), dann muss der Nutzer hierzu einen zusätzlichen Pincode eingeben, der auf dem CMR-Bildschirm angezeigt wird, um sicherzustellen, dass sich beide Geräte auch tatsächlich in dem selben Raum befinden.
Im Stand der Technik wird dann eine Feststellung der räumlichen Nähe der beiden Geräte, die parallel in der Telekonferenz genutzt werden sollen, und eine entsprechende Assoziation bzw. ein Pairing auf verschiedene Arten durchgeführt.
Zum Beispiel sind Protokolle, wie Universal Plug and Play (UPnP) oder Simple Service Discovery Protocol (SSDP), bekannt, welche es ermöglichen verschiedene Endgeräte über Multicast bzw. IP-Multicast einzubinden. Hierzu ist es allerdings erforderlich, dass sich die Endgeräte im gleichen Netzwerk befinden. Diese Lösung ist daher nicht anwendbar, wenn die Endgeräte verschiedene Kommunikationsnetzwerke verwenden.
Ein anderes bekanntes Pairing-Verfahren beruht auf Bluetooth- Verbindungen, die hierzu dann jedoch auch vorhanden sein müssen.
Andere Anwendungen verwenden dagegen Global Positioning Services (GPS), um zu bestimmen, ob sich Nutzer einer Applikation (wie z. B. in dem oben beschriebenen Fall, einer Telekonferenz-Applikation) bzw. deren Endgeräte in direkter Nähe befinden. Die Nutzung von GPS ist jedoch einerseits kostenintensiv, da hierzu teure GPS Sensoren eingesetzt werden müssen. Andererseits ist GPS im Falle der Bestimmung einer direkten Nähe zwischen zwei Endgeräten eines Nutzers nicht geeignet, da die hierüber gewonnenen Positionsdaten zu ungenau sind.
Ein weiterer Ansatz sieht vor, zwei Endgeräte wie beispielsweise zwei Smartphones, über die Applikation „Bump“, eine direkte Nähe dieser Endgeräte zueinander festzustellen. Hierzu müssen die Geräte miteinander in Kontakt gebracht werden bzw. einander anstoßen, wobei Bewegungssensoren und ein Cloud-Service eingesetzt werden, um die Nähe zu bestimmen und eine Assoziierung durchzuführen.
Ferner sind sogenannte Bluetooth Beacon bekannt, die eingesetzt werden können, um andere Endgeräte in der Nähe zu detektieren, die ein Beacon Signal aussenden. Diese basieren jedoch auch auf den dazu notwendigen Bluetooth Signalen.
Ein noch weiterer Ansatz zur Feststellung einer direkten Nähe zweier Endgeräte zueinander ist es, ein nicht-hörbares Geräusch von einer Vorrichtung bzw. einem zu assoziierenden Endgerät auszusenden, wobei das nicht-hörbare Geräusch von dem anderen in der Nähe befindlichen Endgerät beispielsweise über dessen Mikrofon detektiert und analysiert wird, um das nicht-hörbare Signal zu dekodieren. Dieser Ansatz ist jedoch in der Praxis nicht einsatzfähig und mit Fehlern behaftet, so dass er nicht umsetzbar ist.
Ferner ist es bekannt, dass verschiedene Endgeräte über einen QR Code, der von einer Kamera aufgenommen und identifiziert wird, assoziiert werden können. Hierzu ist jedoch dann auch eine Kamera an den Endgeräten erforderlich.
Daher ist es eine Aufgabe der vorliegenden Erfindung, ein Computer implementiertes Verfahren Computer-implementiertes Verfahren zum miteinander Assoziieren von zumindest zwei Kommunikationsendgeräten und ein Kommunikationsendgerät sowie ein entsprechendes Kommunikationsendgerät bereitzustellen, welche die oben genannten Probleme beim Assoziieren von zwei Endgeräten, die sich in direkter Nähe befinden (wie zum Beispiel in einem Raum) überwinden. Insbesondere ist es eine Aufgabe der vorliegenden Erfindung, ein derartiges Verfahren und ein Kommunikationsendgerät bereitzustellen, welche eine Assoziierung von zwei oder mehr Kommunikationsendgeräten erlauben, ohne hierzu Bluetooth oder GPS oder teure Vorrichtungen, wie Kameras oder Sensoren, benötigen, um eine direkte Nähe von zumindest zwei Endgeräten festzustellen, um dann eine Assoziierung der zumindest zwei Endgeräte durchführen zu können Diese Aufgabe wird durch ein Computer-implementiertes Verfahren mit den Merkmalen gemäß Anspruch 1 sowie durch Kommunikationsendgerät zum Durchführen des Verfahrens mit den Merkmalen gemäß Anspruch 8 gelöst. Bevorzugte Ausführungsformen sind in den jeweiligen Unteransprüchen spezifiziert.
Dementsprechend wird gemäß der vorliegenden Erfindung ein Computer implementiertes Verfahren zum miteinander Assoziieren von zumindest zwei Kommunikationsendgeräten, die jeweils ein Mikrophon aufweisen und mit einem Kommunikationsnetzwerk verbunden sind, bereitgestellt, wobei das Verfahren die folgenden Schritte umfasst: Aktivieren der jeweiligen
Mikrophone der zumindest zwei Kommunikationsendgeräte; Empfangen von Schallwellen, insbesondere von einem durch einen Benutzer gesprochenem Wort oder Satz, durch die jeweiligen Mikrophone der zumindest zwei Kommunikationsendgeräte, Umwandeln der Schallwellen in Audiosignale durch die jeweiligen Kommunikationsendgeräte; und Weiterleiten der
Audiosignale von den jeweiligen Kommunikationsendgeräten über das Kommunikationsnetzwerk an einen Cloud Service, wobei der Cloud Service ausgestaltet ist, die Audiosignale auf Übereinstimmung zu vergleichen und, sofern die Audiosignale zumindest ein vorbestimmtes Übereinstimmungskriterium erfüllen, die jeweiligen
Kommunikationsendgeräte miteinander zu assoziieren. Durch das erfindungsgemäße Verfahren wird es ermöglicht, zwei sich in direkter Nähe zueinander befindliche Kommunikationsendgeräte (z. B. bedeutet direkte Nähe hier in einem Raum; der Abstand der beiden Endgeräte ist nicht auf eine vorbestimmte Entfernung begrenzt; es kann unter direkter Nähe vielmehr verstanden werden, dass die zumindest zwei Kommunikationsendgeräte durch ein und denselben Nutzer bzw.
Konferenzteilnehmer parallel nutzbar sein sollten) zu assoziieren, ohne dass diese beiden Kommunikationsendgeräte hierzu eine Bluetooth-Verbindung aufbauen müssen. Auch sind hierzu keine teuren GPS Sensoren erforderlich oder, dass sich beide Kommunikationsendgeräte im gleichen Kommunikationsnetzwerk befinden). Das bedeutet, dass das erfindungsgemäße Verfahren unabhängig von der Art der Netzwerkverbindung ist (WLAN / DSL, GSM, LAN/WAN).
Ein weiterer Vorteil des erfindungsgemäßen Verfahrens besteht darin, dass aufgrund der Tatsache, dass die Stimme bzw. Audiosignale (erzeugt durch die Stimme des Benutzers, der ein Wort oder einen Satz spricht) genutzt werden, gleichzeitig eine zusätzliche Authentifizierung des Nutzers durchgeführt werden kann, um festzustellen, ob dieser den Assoziierungsdienst überhaupt verwenden kann bzw. darf. Somit kann das Verfahren weiterhin auch einen Schritt umfassen des Authentifizierens des Nutzers der zumindest zwei Kommunikationsendgeräte, insbesondere basierend auf den Audiodaten.
Gemäß einer bevorzugten Ausführungsform basiert das zumindest eine Übereinstimmungskriterium auf einer Übereinstimmung von Audiosamples aus den empfangenen Audiosignalen. Wie oben bereits erwähnt, kann das Audiosample auch zur Authentifizierung des Nutzers bezüglich der Verwendung des Assoziationsdienstes verwendet werden. Gemäß einer weiteren bevorzugten Ausführungsform umfasst das Verfahren nach dem Schritt des Umwandeins der Schallwellen in Audiosignale einen Schritt des Erstellens eines akustischen Fingerabdruck auf der Basis der Schallwellen und ein Weiterleiten des akustischen Fingerabdrucks an den Cloud Service. Vorzugsweise kann auch der akustische Fingerabdruck zur Authentifizierung des Nutzers verwendet werden.
Vorzugsweise basiert dann das zumindest eine Übereinstimmungskriterium auf einer Übereinstimmung der akustischen Fingerabdrücke.
Gemäß noch einer weiteren bevorzugten Ausführungsform werden den jeweiligen Audiosignalen von den zumindest zwei Kommunikationsendgeräten Zeitstempel hinzugefügt und das Übereinstimmungskriterium basiert weiterhin auf einer Übereinstimmung der Zeitstempel.
Gemäß einer weiteren bevorzugten Ausführungsform empfangen die zumindest zwei Kommunikationsendgeräte die jeweiligen gegenseitigen IP- Adressen von dem Cloud Service, um miteinander zu kommunizieren.
Vorzugsweise wird das Verfahren durch Aufrufen einer
Assoziierungsfunktion auf den zumindest zwei Kommunikationsendgeräten gestartet, wobei das Aufrufen durch Betätigung einer vorbestimmten Taste oder einer vorbestimmten Schaltfläche erfolgt.
Gemäß einer weiteren bevorzugten Ausführungsform stellt das Assoziieren der zumindest zwei Kommunikationsendgeräte das parallele Nutzen der zumindest zwei Endgeräte durch einen User in einer Online- Gruppenkonversation auf einer Kommunikations- und Kollaborationsplattform dar.
Darüber hinaus wird erfindungsgemäß ein Kommunikationsendgerät bereitgestellt, welches ein Mikrofon und Mittel zum Fierstellen einer Verbindung mit einem Kommunikationsnetzwerk aufweist, wobei das Kommunikationsendgerät mit einer Taste oder Schaltfläche versehen ist, welche ausgestaltet ist, um eine Assoziierungsfunktion zum Assoziieren des Kommunikationsendgeräts mit zumindest einem weiteren Kommunikationsendgerät zu starten, wobei die Assoziierungsfunktion ein Aktivieren des Mikrofons und ein Umwandeln der über das Mikrofon empfangenen Schallwellen, insbesondere eines durch einen Benutzer gesprochenem Wortes oder Satzes, in Audiosignale über das Kommunikationsnetzwerk an einen Cloud Service umfasst zum Vergleichen der weitergeleiteten Audiosignale mit Audiosignalen eines mit dem Kommunikationsendgerät zu assoziierenden zumindest zweiten Kommunikationsendgeräts gemäß einem Übereinstimmungskriterium.
Vorzugsweise ist das Kommunikationsendgerät ein mobiles Telefon oder ein Laptop-Computer.
Gemäß einer bevorzugten Ausführungsform ist das Kommunikationsendgerät weiterhin ausgestaltet, um eine IP Adresse des zu assoziierenden zumindest zweiten Kommunikationsendgeräts zu empfangen.
Darüber hinaus ist es vorteilhaft, wenn das Kommunikationsendgerät ausgestaltet ist, um nach Empfangen der IP Adresse des zu assoziierenden zumindest zweiten Kommunikationsendgeräts sich mit dem zweiten Kommunikationsendgerät zu assoziieren, um parallel mit dem assoziierten zumindest zweiten Kommunikationsendgerät in einer Online- Gruppenkonversation auf einer Kommunikations- und Kollaborationsplattform durch einen User nutzbar zu sein.
Die Erfindung und Ausführungsformen davon werden im Folgenden detailliert in Verbindung mit der Zeichnung beschrieben, in welchen:
Fig. 1 eine schematische Darstellung eines Kommunikationsnetzwerks mit einem Cloud-Service zum Durchführen des Verfahrens zum miteinander Assoziieren von zumindest zwei Kommunikationsendgeräten gemäß einer Ausführungsform der Erfindung.
Fig. 1 ist eine schematische Darstellung eines globalen Kommunikationsnetzwerks 1 mit einem Cloud-Service 2 zum Durchführen des Verfahrens zum miteinander Assoziieren von zwei Kommunikationsendgeräten 3, 4 gemäß einer Ausführungsform der Erfindung. In anderen Ausführungsformen können ebenfalls mehr als zwei Kommunikationsendgeräte miteinander assoziiert werden, die ein Nutzer 5 parallel nutzen möchte, z. B. in einer Telekonferenz, welche mittels einer WebRTC-basierten Applikation durchgeführt werden kann, beispielsweise über eine Kommunikations- und Kollaborationsplattform, auf der Circuit implementiert ist. Der Cloud-Service 2 zum Assoziieren von Kommunikationsendgeräten kann in die Kommunikations- und Kollaborationsplattform integriert sein, oder getrennt davon bereitgestellt werden.
Die Kommunikationsendgeräte umfassen hier in der dargestellten Ausführungsform ein erstes Kommunikationsendgerät 3 in Form eines Mobiltelefons des Nutzers 5 und ein zweites Kommunikationsendgerät 4 in Form eines Laptop-Computers desselben Nutzers 5. Jedes Kommunikationsendgerät 3, 4 verfügt über ein eigenes Mikrofon 6 (für das Mobiltelefon) bzw. 6‘ (für den Laptop-Computer). Ferner ist sowohl das erste Kommunikationsendgerät 3 als auch das zweite Kommunikationsendgerät 4 mit einer Schaltfläche 7 (für das Mobiltelefon) bzw. 7‘ (für den Laptop- Computer) versehen, die der Nutzer 5 betätigen kann, um eine Assoziierungsfunktion zu starten.
Die Schaltfläche 7, 7‘ kann dabei beispielsweise auf einem Touchsceen der jeweiligen Kommunikationsendgeräte 3, 4 implementiert sein, oder aber auch durch einen Knopf oder eine Taste (z. B. eine Taste, um einen Anruf an einer über eine USB-Schnittstelle angeschlossene USB-Audio-Vorrichtung anzunehmen. Als USB-Audio-Vorrichtung käme z. B. Jabra Speak 510 oder Logitech Group in Frage, die neben Lautsprechern und Mikrofonen auch Tasten zum Abnehmen oder Auflegen der Audio-Vorrichtung umfassen, integrierbar in diese Lösung beispielsweise durch die Unterstützung einer Human Interface Device (HID)-USB-Gerätestandards) an dem jeweiligen Kommunikationsendgerät 3, 4.
Durch Betätigen der Schaltfläche 7 an dem ersten Kommunikationsendgerät
3 und der Schaltfläche 7‘ an dem zweiten Kommunikationsendgerät 4 durch den Nutzer 5, der sich mit beiden Kommunikationsendgeräten 3, 4 in einem Raum befindet (so dass beide Kommunikationsendgeräte 3, 4 in unmittelbarer Nähe zueinander sind) und von hier aus an einer WebRTC basierten Telekonferenz teilnehmen möchte, in der er beide Kommunikationsendgeräte 3, 4 parallel nutzt, startet er die
Assoziierungsfunktion auf beiden Kommunikationsendgeräten 3, 4. Hierbei werden beide Kommunikationsendgeräte 3, 4 jeweilig in den„Listen Modus“ (Empfang / Zuhören) gesetzt, wobei ihre jeweiligen Mikrofone 6, 6‘ aktiviert werden. Sobald die Mikrofone 6, 6‘ eingeschaltet sind, kann der Nutzer 5 dann ein beliebiges Wort oder einen ganzen Satz oder dergleichen sprechen, wobei die hierdurch entstehenden bzw. ausgesandten Schallwellen von den jeweiligen Mikrofonen 6, 6‘ empfangen werden und in jedem Kommunikationsendgerät 3, 4 in Audiosignale umgewandelt werden.
Dann werden diese Audiosignale von den jeweiligen Kommunikationsendgeräten 3, 4 an den Cloud-Service 2 weitergeleitet, beispielsweise gestreamt. Hierbei verwendet das erste Kommunikationsendgerät 3 ein erstes Netzwerk 8, z. B. ein Global System for Mobile Communications (GSM) und das zweite Kommunikationsendgerät
4 verwendet ein dazu unterschiedliches zweites Netzwerk 9, z. B. WLAN/DSL.
Es ist gemäß einer Ausführungsform auch möglich, dass vor einem Weiterleiten der Audiosignale an den Cloud-Service 2 ein jeweiliger akustischer Fingerprint aus den Audiosignalen berechnet wird. D. h., an dem ersten Kommunikationsendgerät wird ein erster akustischer Fingerprint erstellt und dann an den Cloud-Service 2 weitergeleitet und an dem zweiten Kommunikationsendgerät wird ein zweiter akustischer Fingerprint erstellt und dann an den Cloud-Service 2 weitergeleitet.
Der Cloud-Service 2 empfängt die Audiodaten dann entweder direkt oder in Form der jeweiligen Fingerprints und wendet dann einen Vergleichsalgorithmus auf jeweilige Audiosamples (eines von Audiodaten aufgenommen von dem Mikrofon 6 des ersten Kommunikationsendgeräts 3 und ein weiteres von den Audiodaten aufgenommen von dem Mikrofon 6‘ des zweiten Kommunikationsendgeräts 4) an. Hierbei müssen die jeweiligen Audiosignale ein vorbestimmtes Übereinstimmungskriterium erfüllen, um als übereinstimmend - also von dem gleichen Nutzer herrührend - erkannt zu werden. Dieses Übereinstimmungskriterium kann eine Übereinstimmung in den jeweiligen Audiosamples umfassen, es kann aber auch zusätzlich noch eine Übereinstimmung in Zeitstempeln umfassen, mit denen die jeweiligen Audiodaten versehen werden, bevor sie an den Cloud-Service 2 weitergeleitet werden. Diese Evaluierung resultiert in einer genauen Bestimmung einer unmittelbaren Nähe (z. B. im gleichen Raum oder auch in einer vorbestimmten Entfernung) der beiden zu assoziierenden Kommunikationsendgeräte 3, 4. Wenn die beiden Audiosamples identisch sind oder wenn alternativ die beiden akustischen Fingerprints übereinstimmen und somit demselben Nutzer 5 zugeordnet werden können, dann wird eine Assoziierung der beiden Kommunikationsendgeräte 3, 4 durchgeführt. Flierzu sendet der Cloud-Service 2 den Kommunikationsendgeräten 3, 4 die jeweilig gegenseitigen IP-Adressen. D. h., der Cloud-Service 2 sendet dem ersten Kommunikationsendgerät 3 die IP-Adresse des zweiten Kommunikationsendgeräts 4 und dem zweiten Kommunikationsendgerät 4 die IP-Adresse des ersten Kommunikationsendgeräts 3. Diese können nun direkt - über die empfangenen gegenseitigen IP-Adressen - miteinander kommunizieren, beispielsweise um so auch weitere Dienste nutzen zu können. 5 Der Nutzer 5 ist nun in der Lage, beide Kommunikationsendgeräte 3, 4 parallel zu nutzen, z. B. bei der Teilnahme an einer Telekonferenz.
Bezugszeichen
1 globales Kommunikationsnetzwerk
2 Cloud-Service
3 Kommunikationsendgerät
4 Kommunikationsendgerät
5 Nutzer
6 , 6‘ Mikrofone
7, 7‘ Schaltfläche
8 erstes Netzwerk
9 zweites Netzwerk

Claims

Ansprüche
1. Computer-implementiertes Verfahren zum miteinander Assoziieren von zumindest zwei Kommunikationsendgeräten (3, 4), die jeweils ein Mikrophon (6, 6‘) aufweisen und mit einem Kommunikationsnetzwerk (1 , 8, 9) verbunden sind, wobei das Verfahren die folgenden Schritte umfasst:
- Aktivieren der jeweiligen Mikrophone (6, 6‘) der zumindest zwei Kommunikationsendgeräte (3, 4);
- Empfangen von Schallwellen, insbesondere von einem durch einen Benutzer (5) gesprochenem Wort oder Satz, durch die jeweiligen Mikrophone (6, 6‘) der zumindest zwei Kommunikationsendgeräte (3, 4),
- Umwandeln der Schallwellen in Audiosignale durch die jeweiligen Kommunikationsendgeräte (3, 4); und
- Weiterleiten der Audiosignale von den jeweiligen Kommunikationsendgeräten (3, 4) überdas Kommunikationsnetzwerk (1 , 8, 9) an einen Cloud Service (2), wobei der Cloud Service (2) ausgestaltet ist, die Audiosignale auf Übereinstimmung zu vergleichen und, sofern die Audiosignale zumindest ein vorbestimmtes Übereinstimmungskriterium erfüllen, die jeweiligen Kommunikationsendgeräte (3, 4) miteinander zu assoziieren.
2. Verfahren gemäß Anspruch 1 , wobei das zumindest eine Übereinstimmungskriterium auf einer Übereinstimmung von Audiosamples aus den empfangenen Audiosignalen basiert.
3. Verfahren gemäß Anspruch 1 , wobei das Verfahren nach dem Schritt des Umwandeins der Schallwellen in Audiosignale einen Schritt des
- Erstellens eines akustischen Fingerabdrucks auf der Basis der Schallwellen, und - Weiterleitens des akustischen Fingerabdrucks an den Cloud Service
(2) umfasst,
wobei das zumindest eine Übereinstimmungskriterium auf einer Übereinstimmung der akustischen Fingerabdrücke basiert. 4. Verfahren gemäß einem der vorherigen Ansprüche, wobei den jeweiligen Audiosignalen von den zumindest zwei Kommunikationsendgeräten (3,
4) Zeitstempel hinzugefügt werden und das Übereinstimmungskriterium weiterhin auf einer Übereinstimmung der Zeitstempel basiert. .
5. Verfahren gemäß einem der vorherigen Ansprüche, wobei die zumindest zwei Kommunikationsendgeräte (3, 4) die jeweiligen gegenseitigen IP- Adressen von dem Cloud Service (2) empfangen, um miteinander zu kommunizieren.
6. Verfahren gemäß einem der vorherigen Ansprüche, wobei das Verfahren durch Aufrufen einer Assoziierungsfunktion auf den zumindest zwei Kommunikationsendgeräten (3, 4) gestartet wird, wobei das Aufrufen durch Betätigung einer vorbestimmten Taste oder einer vorbestimmten Schaltfläche (7, 7‘) erfolgt.
7. Verfahren gemäß einem der vorherigen Ansprüche, wobei das Assoziieren der zumindest zwei Kommunikationsendgeräte (3, 4) das parallele Nutzen der zumindest zwei Kommunikationsendgeräte (3, 4) durch einen Nutzer (5) in einer Online-Gruppenkonversation auf einer Kommunikations- und Kollaborationsplattform darstellt.
8. Kommunikationsendgerät (3, 4), welches ein Mikrofon (6, 6‘) und Mittel zum Herstellen einer Verbindung mit einem Kommunikationsnetzwerk (1 , 8, 9) aufweist, wobei das Kommunikationsendgerät (3, 4) mit einer Taste oder Schaltfläche (7, 7‘) versehen ist, welche ausgestaltet ist, um eine
Assoziierungsfunktion zum Assoziieren des Kommunikationsendgeräts (3, 4) mit zumindest einem weiteren Kommunikationsendgerät (3, 4) zu starten, wobei die Assoziierungsfunktion ein Aktivieren des Mikrofons (6, 6‘) und ein Umwandeln der über das Mikrofon (6, 6‘) empfangenen
Schallwellen, insbesondere eines durch einen Benutzer (5) gesprochenem Wortes oder Satzes, in Audiosignale über das Kommunikationsnetzwerk (1 , 8, 9) an einen Cloud Service (2) umfasst zum Vergleichen der weitergeleiteten Audiosignale mit Audiosignalen eines mit dem Kommunikationsendgerät (3, 4) zu assoziierenden zumindest zweiten Kommunikationsendgeräts (3, 4) gemäß einem Übereinstimmungskriterium.
9. Kommunikationsendgerät (3, 4) gemäß Anspruch 8, wobei das
Kommunikationsendgerät (3, 4) ein mobiles Telefon oder ein Laptop- Computer ist.
10. Kommunikationsendgerät (3, 4) gemäß Anspruch 8 oder Anspruch 9, wobei das Kommunikationsendgerät (3, 4) weiterhin ausgestaltet ist, um eine IP Adresse des zu assoziierenden zumindest zweiten Kommunikationsendgeräts (3, 4) zu empfangen.
11. Kommunikationsendgerät (3, 4) gemäß Anspruch 10, wobei das Kommunikationsendgerät (3, 4) ausgestaltet ist, um nach Empfangen der
IP Adresse des zu assoziierenden zumindest zweiten Kommunikationsendgeräts (3, 4) sich mit dem zweiten
Kommunikationsendgerät (3, 4) zu assoziieren, um parallel mit dem assoziierten zumindest zweiten Kommunikationsendgerät (3, 4) in einer Online-Gruppenkonversation auf einer Kommunikations- und Kollaborationsplattform durch einen Nutzer (5) nutzbar zu sein.
EP18811196.7A 2018-11-23 2018-11-23 Computer-implementiertes verfahren zum miteinander assoziieren von zumindest zwei kommunikationsendgeräten und kommunikationsendgerät Pending EP3884693A1 (de)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/EP2018/082423 WO2020104042A1 (de) 2018-11-23 2018-11-23 Computer-implementiertes verfahren zum miteinander assoziieren von zumindest zwei kommunikationsendgeräten und kommunikationsendgerät

Publications (1)

Publication Number Publication Date
EP3884693A1 true EP3884693A1 (de) 2021-09-29

Family

ID=64556874

Family Applications (1)

Application Number Title Priority Date Filing Date
EP18811196.7A Pending EP3884693A1 (de) 2018-11-23 2018-11-23 Computer-implementiertes verfahren zum miteinander assoziieren von zumindest zwei kommunikationsendgeräten und kommunikationsendgerät

Country Status (2)

Country Link
EP (1) EP3884693A1 (de)
WO (1) WO2020104042A1 (de)

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9148742B1 (en) * 2011-07-29 2015-09-29 Google Inc. Proximity detection via audio
KR101972955B1 (ko) * 2012-07-03 2019-04-26 삼성전자 주식회사 음성을 이용한 사용자 디바이스들 간 서비스 연결 방법 및 장치
US9801219B2 (en) * 2015-06-15 2017-10-24 Microsoft Technology Licensing, Llc Pairing of nearby devices using a synchronized cue signal

Also Published As

Publication number Publication date
WO2020104042A1 (de) 2020-05-28

Similar Documents

Publication Publication Date Title
DE102021204829A1 (de) Automatische korrektur fehlerhafter audioeinstellungen
DE102021206172A1 (de) Intelligente erkennung und automatische korrektur von fehlerhaften audioeinstellungen in einer videokonferenz
US8380521B1 (en) System, method and computer-readable medium for verbal control of a conference call
DE102008062981B4 (de) Verfahren und Gerät zur Identifizierung und Beseitigung der Quelle von Störgeräuschen in Telefonkonferenzen mit mehreren Teilnehmern
AU2013339062B2 (en) Communication system and computer readable medium
US8767922B2 (en) Elimination of typing noise from conference calls
DE102016225204B4 (de) Verfahren zum Betrieb eines Hörgerätes
EP1912472A1 (de) Verfahren zum Betreiben einer Hörhilfe, sowie Hörhilfe
DE10251113A1 (de) Verfahren zum Betrieb eines Spracherkennungssystems
DE102011120635A1 (de) Dieser Anruf
CN107464570A (zh) 一种语音过滤方法、装置及系统
DE102018001729A1 (de) Verwaltung von Kommunikationssitzung in Bezug auf mehrere Übertragungsmedien
GB2554634A (en) Enhancement of audio signals
DE102009035796B4 (de) Benachrichtigung über Audio-Ausfall bei einer Telekonferenzverbindung
EP3337188A1 (de) Verfahren zum betrieb eines hörgerätes
CN112216306B (zh) 基于声纹的通话管理方法、装置、电子设备及存储介质
DE102012102882A1 (de) Elektrische Vorrichtung und Verfahren zum Empfangen von Sprechstimmen-Signalen dafür
WO2020104042A1 (de) Computer-implementiertes verfahren zum miteinander assoziieren von zumindest zwei kommunikationsendgeräten und kommunikationsendgerät
DE102007028476A1 (de) Verfahren und Vorrichtung zur Kommunikation in einem Kraftfahrzeug
EP2490427B1 (de) Akustische Kopplungserkennung zwischen Kommunikationsendgeräten in einer Konferenzschaltung
US20160219416A1 (en) Remote control of separate audio streams with audio authentication
JP2019176386A (ja) 通信端末及び会議システム
DE202007009355U1 (de) Sprachdialogsystem für adaptive Sprachdialoganwendungen
WO2014076129A1 (de) Verfahren zum betreiben eines telefonkonferenzsystems und telefonkonferenzsystem
DE10348149B4 (de) Verfahren zur Durchführung einer Telefonkonferenz

Legal Events

Date Code Title Description
STAA Information on the status of an ep patent application or granted ep patent

Free format text: STATUS: UNKNOWN

STAA Information on the status of an ep patent application or granted ep patent

Free format text: STATUS: THE INTERNATIONAL PUBLICATION HAS BEEN MADE

PUAI Public reference made under article 153(3) epc to a published international application that has entered the european phase

Free format text: ORIGINAL CODE: 0009012

STAA Information on the status of an ep patent application or granted ep patent

Free format text: STATUS: REQUEST FOR EXAMINATION WAS MADE

17P Request for examination filed

Effective date: 20210507

AK Designated contracting states

Kind code of ref document: A1

Designated state(s): AL AT BE BG CH CY CZ DE DK EE ES FI FR GB GR HR HU IE IS IT LI LT LU LV MC MK MT NL NO PL PT RO RS SE SI SK SM TR

DAV Request for validation of the european patent (deleted)
DAX Request for extension of the european patent (deleted)
STAA Information on the status of an ep patent application or granted ep patent

Free format text: STATUS: EXAMINATION IS IN PROGRESS

17Q First examination report despatched

Effective date: 20230104

RAP1 Party data changed (applicant data changed or rights of an application transferred)

Owner name: UNIFY BETEILIGUNGSVERWALTUNG GMBH & CO. KG