DE102013221548A1

DE102013221548A1 - Gerät und verfahren zum steuern einer mit einem touchscreen ausgestatteten benutzerschnittstelle

Info

Publication number: DE102013221548A1
Application number: DE102013221548.7A
Authority: DE
Inventors: Sang Eun Jin; Hyun Woo Bang; Kee Hong Youn; Sung-min Cho; Jun Bong Song; Kyung Won Yun; Dong Youb Baek; Byung Joo Lee; Jae Hyuck Bae; Jung Man Chung
Original assignee: Hyundai Motor Co; SNU R&DB Foundation
Current assignee: Hyundai Motor Co; SNU R&DB Foundation
Priority date: 2013-07-05
Filing date: 2013-10-23
Publication date: 2015-01-08
Also published as: KR101500098B1; US20150009153A1; US9235284B2; CN104281381B; CN104281381A; KR20150005296A

Abstract

Ein Gerät und ein Verfahren zum Steuern einer Benutzerschnittstelle mit einem Touchscreen sind offenbart, das eine Eingabe- und Ausgabeeinheit mit einem Touchscreen, eine Kamera, die installiert ist, um von der Eingabe- und Ausgabeeinheit getrennt zu sein und zumindest einen Teil bzw. eine Art der Bilddaten erhält, die einem Raum innerhalb eines kritischen Abstands von einer Vorderseite des Touchscreens entsprechen, und eine Steuerung enthält, die eine erwartete Berührungsposition eines Objektes verifiziert, wenn eine Bewegung des Objektes in dem Raum infolge einer Analyse der Bilddaten erfasst wird, und die Eingabe- und Ausgabeeinheit steuert, um einen Bereich zu vergrößern und auszugeben, der der erwarteten Berührungsposition entspricht.

Description

HINTERGRUND
Technisches Gebiet
Die vorliegende Offenbarung betrifft ein Gerät und ein Verfahren zum Steuern einer Benutzerschnittstelle mit einem Touchscreen und genauer ein Gerät und ein Verfahren zum Steuern einer Benutzerschnittstelle mit einem Touchscreen, bei dem ein Bereich, in dem eine Berührung erzeugt werden wird, vor der Erzeugung einer Berührung auf einem Touchscreen durch Einrichten einer Tiefenerkennungskamera verifiziert wird und der verifizierte Bereich vergrößert und an einen Bildschirm ausgegeben wird.
Beschreibung der verwandten Technik
Im Allgemeinen enthält ein Texteingabeverfahren eines tragbaren Endgeräts, das einen Touchscreen verwendet, ein Handschrifterkennungsverfahren und ein Eingabeverfahren mittels virtueller Tastatur. Das Handschrifterkennungsverfahren ist ein Verfahren, das nach dem Erkennen einer Handschrift einer Person durch einen Touchscreen in einen Datencode umwandelt, und das Eingabeverfahren mittels virtueller Tastatur ist ein Verfahren, das Auswahlinformationen gemäß einer Berührung eines Berührungswerkzeugs empfängt, das zum Verwenden einer Berührung, wie beispielsweise ein Finger oder ein Stift, durch das Pop-up eines Tastatur-Eingabefensters auf dem Touchscreen fähig ist, um ein Transportfähigkeitsproblem einer Tastatur und einer Mouse bei der tragbaren Vorrichtung zu bewältigen.
Beispiele eines Endgeräts, das mit solch einem Touchscreen ausgestattet ist, enthalten ein elektronisches Notebook, ein Mobilkommunikationsendgerät, einen Personal Digital Assistant (PDA), einen tragbaren Multimedia-Player (PMP; engl. Portable Mutlimedia Player) und eine Navigationsvorrichtung.
Bei dem Eingabeverfahren mittels virtueller Tastatur ist jedoch eine Größe einer Taste der virtuellen Tastatur klein, da dasselbe ein Texteingabefenster und die virtuelle Tastatur gleichzeitig auf einem Bildschirm anzeigen muss. Aufgrund dessen weist dasselbe ein Problem des häufigen Verursachens eines Tippfehlers durch Berühren einer benachbarten Taste bei einem Vorgang des Berührens der Taste auf der virtuellen Tastatur auf. Insbesondere tritt beim Auswählen einer Taste mit einem Berührungswerkzeug mit einem geräumigen Berührungsbereich oder, wenn die virtuelle Tastatur auf einem kleinen Bildschirm angezeigt wird, der Eingabefehler häufig auf, der dem Berührungsfehler entspricht.
Wenn eine Navigationsvorrichtung mit dem Touchscreen ausgestattet ist, kann dieselbe, da ein Fahrer die Navigationsvorrichtung häufig während der Fahrt betätigt, die Konzentration des Fahrers verringern und zum Verursachen eines Unfalls führen.
ZUSAMMENFASSUNG
Die offenbarten Ausführungsformen erfolgten in Anbetracht der obigen Probleme und liefern ein Gerät und ein Verfahren zum Steuern einer Benutzerschnittstelle mit einem Touchscreen, bei dem ein Bereich, in dem eine Berührung erzeugt werden wird, vor der Erzeugung einer Berührung auf einem Touchscreen durch Einrichten einer Tiefenerkennungskamera verifiziert wird und der verifizierte Bereich vergrößert und an einen Bildschirm ausgegeben wird.
Nach einem Aspekt der vorliegenden Erfindung enthält ein Gerät zum Steuern einer Benutzerschnittstelle mit einem Touchscreen eine Eingabe- und Ausgabeeinheit mit einem Touchscreen, eine Kamera, die installiert ist, um von der Eingabe- und Ausgabeeinheit getrennt zu sein, und zumindest einen Teil bzw. eine Art von Bilddaten erhält, die einem Raum innerhalb eines kritischen Abstands von einer Vorderseite des Touchscreens entsprechen, und eine Steuerung, die eine erwartete Berührungsposition des Objektes verifiziert, wenn eine Bewegung des Objektes in dem Raum infolge einer Analyse der Bilddaten erfasst wird, und die Eingabe- und Ausgabeeinheit steuert, um einen Bereich zu vergrößern und auszugeben, der der erwarteten Berührungsposition entspricht.
Die Kamera ist eine Tiefenerkennungskamera. Die Steuerung analysiert den/die zumindest eine(n) Teil bzw. Art der Bilddaten, die von jedem regulären Intervall von dem Raum innerhalb des kritischen Abstands erhalten werden. Die Steuerung teilt die Bilddaten in Hintergrundbilddaten und Objektbilddaten, wenn eine Bewegung des Objektes in dem Raum durch Analysieren der Bilddaten verifiziert wird. Die Steuerung verifiziert ein Pixel, das einer Position des Objektes entspricht, unter einer Vielzahl von Pixeln, die die Objektbilddaten bilden. Die Steuerung verifiziert eine erwartete Berührungsposition, an der das Objekt den Touchscreen berühren soll, durch Abbilden des Pixels der verifizierten Objektbilddaten auf ein Pixel, das einen Bildschirm bildet, der auf dem Touchscreen ausgegeben wird. Die Steuerung vergrößert einen Bildschirm und zeigt denselben an, der auf einem Bereich, der der verifizierten erwarteten Berührungsposition entspricht, mit einem spezifischen Verhältnis angezeigt wird, und erzeugt ein Eingangssignal, das dem vergrößerten Bildschirm entspricht, wenn eine Berührung auf dem vergrößerten Bildschirm erzeugt wird.
Nach einem anderen Aspekt der vorliegenden Erfindung enthält ein Verfahren zum Steuern einer Benutzerschnittstelle mit einem Touchscreen das Betätigen einer Kamera gemäß einem Signal, das von einer Eingabe- und Ausgabeeinheit mit einem Touchscreen empfangen wird, durch eine Steuerung, das Analysieren von zumindest einem Teil bzw. einer Art der Bilddaten, die einem Raum innerhalb eines kritischen Abstands von einer Vorderseite des Touchscreens entsprechen und von der Kamera empfangen werden, das Verifizieren einer erwarteten Berührungsposition des Objektes, wenn eine Bewegung eines Objektes in dem Raum infolge der Analyse erfasst wird, und das Vergrößern und Ausgeben eines Bereiches, der der erwarteten Berührungsposition entspricht.
Das Analysieren der Bilddaten enthält das Analysieren von zumindest einem Teil bzw. einer Art der Bilddaten, die in jedem bestimmten Intervall von dem Raum innerhalb des kritischen Abstands erhalten werden. Das Analysieren der Bilddaten enthält das Teilen der Bilddaten in Hintergrundbilddaten und Objektbilddaten, wenn eine Bewegung des Objektes in dem Raum erfasst wird. Das Verifizieren der erwarteten Berührungsposition des Objektes enthält das Verifizieren eines Pixels, das einer Position des Objektes entspricht, unter einer Vielzahl von Pixeln, die die Objektbilddaten bilden, und das Verifizieren einer erwarteten Berührungsposition, an der das Objekt den Touchscreen berühren soll, durch Abbilden eines Pixels der verifizierten Objektbilddaten auf ein Pixel, das den Touchscreen bildet. Das Vergrößern und Ausgeben eines Bereiches, der der erwarteten Berührungsposition entspricht, enthält das Vergrößern und Anzeigen eines Bildschirms, der auf einem Bereich, der der verifizierten erwarteten Berührungsposition entspricht, mit einem spezifischen Verhältnis angezeigt wird.
KURZE BESCHREIBUNG DER ZEICHNUNGEN
Die Aufgaben, Merkmale und Vorteile der vorliegenden Offenbarung werden aus der folgenden detaillierten Beschreibung in Verbindung mit den beiliegenden Zeichnungen offensichtlicher sein, in denen:
1 eine Darstellung ist, die ein Gerät zum Steuern einer Benutzerschnittstelle mit einem Touchscreen nach einer beispielhaften Ausführungsform der vorliegenden Offenbarung veranschaulicht;
2 ein Blockdiagramm ist, das ein Element eines Gerätes zum Steuern einer Benutzerschnittstelle mit einem Touchscreen nach einer beispielhaften Ausführungsform der vorliegenden Offenbarung veranschaulicht;
3 eine Darstellung zum Erläutern eines Verfahrens zum Extrahieren eines Bereiches, in dem eine Berührung erwartet wird, nach einer beispielhaften Ausführungsform der vorliegenden Offenbarung ist;
4 ein Ablaufplan zum Erläutern eines Verfahrens zum Steuern einer Benutzerschnittstelle mit einem Touchscreen nach einer beispielhaften Ausführungsform der vorliegenden Offenbarung ist; und
5 eine beispielhafte Darstellung ist, die einen Bildschirm zum Steuern einer Benutzerschnittstelle mit einem Touchscreen nach einer beispielhaften Ausführungsform der vorliegenden Offenbarung veranschaulicht.
DETAILLIERTE BESCHREIBUNG BEISPIELHAFTER AUSFÜHRUNGSFORMEN
Beispielhafte Ausführungsformen der vorliegenden Offenbarung werden in Bezug auf die beiliegenden Zeichnungen detailliert beschrieben. Überall in den Zeichnungen werden die gleichen Bezugsnummern verwendet, um auf gleiche oder ähnliche Teile Bezug zu nehmen. Detaillierte Beschreibungen allgemein bekannter Funktionen und Strukturen, die hierin aufgenommen sind, können ausgelassen sein, um ein Verschleiern des Gegenstands der vorliegenden Offenbarung zu vermeiden.
Die hierin verwendete Terminologie dient nur zum Zweck des Beschreibens bestimmter Ausführungsformen und soll die Offenbarung nicht beschränken. Wie hierin verwendet, sollen die Singularformen „ein/eine” und „der/die/das” auch die Pluralformen enthalten, sofern der Kontext dies nicht anderweitig klar erkennen lässt. Es wird zudem klar sein, dass die Ausdrücke „weist auf” und/oder „aufweisend”, wenn in dieser Beschreibung verwendet, das Vorhandensein der genannten Merkmale, ganzen Zahlen, Schritte, Operationen, Elemente und/oder Bauteile spezifizieren, aber nicht das Vorhandensein oder den Zusatz von einem/einer oder mehreren anderen Merkmalen, ganzen Zahlen, Schritten, Operationen, Elementen, Bauteilen und/oder Gruppen derselben ausschließen. Wie hierin verwendet, enthält der Ausdruck „und/oder” irgendeine oder alle Kombinationen aus einem oder mehreren der assoziierten, aufgelisteten Elemente.
Zudem ist klar, dass die nachstehenden Verfahren durch zumindest eine Steuerung ausgeführt werden. Der Ausdruck „Steuerung” bezieht sich auf eine Hardwarevorrichtung, die einen Speicher und einen Prozessor enthält. Der Speicher ist zum Speichern von Programmbefehlen vorgesehen und der Prozessor ist insbesondere zum Ausführen der Programmbefehle vorgesehen, um einen oder mehrere Prozesse durchzuführen, die weiter untern beschrieben werden.
Zudem kann die Steuerung der vorliegenden Offenbarung als nicht-transitorische computerlesbare Medien auf einem computerlesbaren Datenträger ausgeführt werden, der ausführbare Programmbefehle enthält, die durch einen Prozessor, eine Steuerung oder Ähnliches ausgeführt werden. Beispiele computerlesbarer Datenträger enthalten Festwertspeicher, Direktzugriffsspeicher, Compact-Disc-Festwertspeicher (CD-ROMS), Magnetbänder, Disketten, Speichersticks, Chipkarten und optische Datenspeichervorrichtungen, sind aber nicht darauf beschränkt. Das computerlesbare Aufnahmemedium kann auch in netzwerkgekoppelten Computersystemen verteilt sein, so dass das computerlesbare Medium auf verteilte Weise gespeichert und ausgeführt wird, z. B. durch einen Telematikserver oder ein Controller Area Network (CAN).
1 ist eine Darstellung, die ein Gerät zum Steuern einer Benutzerschnittstelle mit einem Touchscreen nach einer beispielhaften Ausführungsform der vorliegenden Offenbarung veranschaulicht. 2 ist ein Blockdiagramm, das ein Element eines Geräts zum Steuern einer Benutzerschnittstelle mit einem Touchscreen nach einer beispielhaften Ausführungsform der vorliegenden Offenbarung veranschaulicht. 3 ist eine Darstellung, die ein Verfahren zum Extrahieren eines Bereiches, in dem eine Berührung erwartet wird, nach einer beispielhaften Ausführungsform der vorliegenden Offenbarung erläutert.
In Bezug auf die 1 bis 3 enthält das Gerät zum Steuern einer Benutzerschnittstelle (nachstehend als Steuereinrichtung 100 bezeichnet) mit einem Touchscreen eine Kamera 10, eine Eingabe- und Ausgabeeinheit 20, eine Steuerung 30 und eine Speichereinheit 40.
Es wird erwünscht eine Tiefenerkennungskamera für die Kamera zu verwenden. Wie in 1 veranschaulicht, ist die Kamera 10 auf dem oberen Teil der Eingabe- und Ausgabeeinheit 20 installiert und erhält Bilddaten eines Objektes, das auf die Eingabe- und Ausgabeeinheit 20 zugreift. Die Kamera 10 erhält in Echtzeit die Bilddaten, die dem Raum entsprechen, in dem ein kritischer Abstand separiert ist oder der innerhalb des kritischen Abstands von einer Vorderseite des Touchscreens ist, die die Eingabe- und Ausgabeeinheit 20, insbesondere eine Eingabeeinheit ist, und stellt dieselben der Steuerung 30 bereit. Zu dieser Zeit erhält die Kamera 10 die Bilddaten des Bereiches, der einem regelmäßigen Intervall von dem Raum innerhalb des kritischen Abstands entspricht, in Echtzeit und kann dieselben der Steuerung 30 bereitstellen.
Die Eingabe- und Ausgabeeinheit 20 kann eine Eingabeeinheit und eine Ausgabeeinheit enthalten. Die Eingabeeinheit erfasst eine Eingabe eines Benutzers und erzeugt ein entsprechendes Eingabesignal, um dasselbe der Steuerung 30 bereitzustellen. Es wird erwünscht, dass die Eingabeeinheit als Touchscreen ausgebildet ist, wie in den 1 und 3 veranschaulicht, und zudem ein Gerät, wie beispielsweise eine Kleintastatur (keypad) und ein Touchpad, enthalten kann.
Die Ausgabeeinheit gibt verschiedene Informationen gemäß einer Betätigung der Steuereinrichtung 100 unter der Steuerung der Steuerung 30 aus. Die Ausgabevorrichtung ist eine Vorrichtung, wie beispielsweise eine Flüssigkristallanzeige (LCD; engl. Liquid Crystal Display), eine Dünnschichttransistor-Flüssigkristallanzeige (TFT-LCD; engl. Thin Film Transistor Liquid Crystal Display) und eine organische Leuchtdiode (OLED; engl. Organic Light Emitting Diode), und ein flexibles Display kann für die Ausgabeeinheit verwendet werden, und wenn die Eingabeeinheit der Touchscreen ist, wird erwünscht, dass dieselbe als die Ausgabeeinheit des Touchscreens dient.
Die Steuerung 30 verifiziert eine erwartete Berührungsposition eines Objektes, wenn eine Bewegung des Objektes in einem Raum innerhalb des kritischen Abstands von der Vorderseite des Touchscreens durch das Analysieren von Bilddaten erfasst wird, die von der Kamera 10 erhalten werden, und vergrößert den Bereich, der der Position entspricht, und gibt denselben aus.
Detaillierter kann die Steuerung 30, da die Kamera 10, die in der Steuereinrichtung 100 eingerichtet ist, eine Tiefenerkennungskamera ist, einen separierten Abstand zwischen jedem Pixel verifizieren, das die von der Kamera 10 erhaltenen Bilddaten und den Touchscreen bildet.
Mit anderen Worten legt die Steuerung 30 die Bilddaten eines Falles, wenn die Bewegung des Objektes nicht vor dem Touchscreen besteht, als Hintergrundbilddaten fest und speichert dieselben in der Speichereinheit 40. Die Steuerung 30 erkennt, dass die Bewegung des Objekts in den verifizierten Bilddaten besteht, wenn die Bilddaten, die sich von den Hintergrundbilddaten unterscheiden, durch Vergleichen der Bilddaten, die in Echtzeit von der Kamera 10 erhalten werden, und der Hintergrundbilddaten verifiziert werden. Die Steuerung 30 teilt die verifizierten Bilddaten in die Hintergrundbilddaten und die Objektbilddaten und erhält Rauminformationen des Objektes, das den Raum innerhalb des kritischen Abstands von der Vorderseite des Touchscreens durchquert, durch Verifizieren eines vertikalen/horizontalen Pixels, das die Objektbilddaten bildet.
Wenn die Bilddaten des Bereiches, der dem regelmäßigen Intervall in dem Raum innerhalb des kritischen Abstands entspricht, von der Kamera 10 empfangen werden, analysiert die Steuerung 30 zudem sequentiell die Bilddaten von dem Bereich, der von dem Touchscreen am weitesten entfernt ist, zu dem Bereich, der dem Touchscreen am nächsten ist. Dadurch kann die Steuerung 30 eine Verlaufsrichtung des Objektes akkurater vorhersagen.
Die Speichereinheit 40 speichert die Hintergrundbilddaten unter der Steuerung der Steuerung 30 und speichert verschiedene Programme, um die Steuereinrichtung 100 zu steuern.
In Bezug auf 3 erhält die Steuerung 30 Abstandsinformationen innerhalb einer Ebene eines Raumes, in dem die entsprechende Reihe, in der eine Bewegung des Objektes (O) erfasst wird, angegeben wird, wie in einem Spalt- bzw. Schlitzarray (slit array) der 3 veranschaulicht, als eine Wertanordnung, die den Bilddaten entspricht. Beim Schematisieren dieser Anordnung, kann dieselbe als Arraydaten in 3 angegeben werden. Mit anderen Worten kann, wenn das Objekt (O) auf einen Ort in 3 zugreift, der Punkt, auf den das Objekt zugriff, als Punkt P der Schlitzarraydaten angegeben werden. zu dieser Zeit kann der Punkt P Rauminformationen sein, die einer Position des Objektes (O) entsprechen, das den Raum innerhalb des kritischen Abstands von der Vorderseite des Touchscreens durchquert.
Basierend auf den Rauminformationen des erhaltenen Objektes (O) verifiziert die Steuerung 30 die erwartete Berührungsposition desselben. Die Steuerung 30 extrahiert die erwartete Berührungsposition, die das Objekt berühren soll, durch Abbilden eines Pixels, das der verifizierten erwarteten Berührungsposition entspricht, auf ein Pixel, das einen Bildschirm bildet, der auf dem Touchscreen angezeigt wird. Die Steuerung 30 vergrößert den Bildschirm und gibt denselben aus, der auf dem Bereich, der der extrahierten erwarteten Berührungsposition entspricht, mit einem spezifischen Verhältnis angezeigt wird. Hier kann das Objekt (O) ein Finger eines Benutzers und vorzugsweise ein anfassbares Objekt, wie beispielsweise ein Touchpen, sein.
Zudem wird in 3 beschrieben, dass ein Schlitzarray analysiert wird. Die Steuerung 30 analysiert jedoch sequenziell die Bilddaten von dem Bereich, der vom Touchscreen am weitesten entfernt ist, zu dem Bereich, der dem Touchscreen am nächsten ist, unter zumindest einem Teil bzw. einer Art der Bilddaten, die von der Kamera 10 empfangen werden. In diesem Fall kann dieselbe, da es möglich ist die Bewegung des Objektes sequenziell ab dann zu verifizieren, wenn das Objekt von dem Touchscreen weit entfernt ist, wie in 3 veranschaulicht, die Verlaufsrichtung des Objektes schneller als das Analysieren eines Schlitzarrays verifizieren.
Zudem wird in einer beispielhaften Ausführungsform der vorliegenden Offenbarung beschrieben, dass die Kamera 10 auf der Eingabe- und Ausgabeeinheit 20 positioniert ist. Dieselbe ist jedoch nicht darauf beschränkt und kann ungeachtet der Position gemäß der Bevorzugung des Fahrers installiert werden.
4 ist ein Ablaufplan, der ein Verfahren zum Steuern einer Benutzerschnittstelle mit einem Touchscreen nach einer beispielhaften Ausführungsform der vorliegenden Offenbarung erläutert. 5 ist eine beispielhafte Darstellung, die einen Bildschirm zum Steuern einer Benutzerschnittstelle mit einem Touchscreen nach einer beispielhaften Ausführungsform der vorliegenden Offenbarung veranschaulicht.
In Bezug auf die 4 und 5 betätigt die Steuerung 30 die Kamera 10 durch Übergehen in eine Betriebsart zum Steuern einer Benutzerschnittstelle gemäß einer Eingabe von außen (S11). Die Steuerung 30 verifiziert, ob die Bewegung des Objektes in den Bilddaten besteht, durch Analysieren der Bilddaten, die von der Kamera 10 erhalten werden, (S13). Genauer kann die Steuerung 30 einen separierten Abstand zwischen jedem Pixel verifizieren, das die von der Kamera 10 erhaltenen Bilddaten und den Touchscreen bildet. Die Steuerung 30 akkumuliert kontinuierlich die Bilddaten, wenn keine Bewegung des Objektes vor dem Touchscreen besteht, und legt dieselben als Hintergrundbilddaten fest. Zudem vergleicht die Steuerung 30 die Bilddaten, die von der Kamera 10 in Echtzeit erhalten werden, und die Hintergrunddaten und fährt mit dem Schritt S15 fort, wenn dieselbe erkennt, dass die Bewegung des Objektes besteht, wenn der Unterschied zwischen den erhaltenen Bilddaten und den Hintergrunddaten verifiziert ist.
Die Steuerung 30 teilt die erhaltenen Bilddaten in Hintergrundbilddaten und Objektbilddaten und erhält die Rauminformationen des Objektes, das den Raum innerhalb des kritischen Abstands von der Vorderseite des Touchscreens durchquert, durch Verifizieren des horizontalen/vertikalen Pixels, das die Objektbilddaten bildet. Hier wird die Beschreibung zum Erhalten der Rauminformationen des Objektes ausgelassen, da dieselbe bereits in den 1 bis 3 detailliert beschrieben ist.
Die Steuerung 30 analysiert nacheinander die getrennten Objektbilddaten und verifiziert das Pixel, das der Position entspricht, an der das Objekt besteht, um die erwartete Berührungsposition zu verifizieren (S15). Die Steuerung 30 extrahiert die erwartete Berührungsposition, an der das Objekt berühren soll, durch Abbilden des Pixels, das der verifizierten erwarteten Berührungsposition entspricht, auf das Pixel, das den Bildschirm bildet, der auf dem Touchscreen angezeigt wird, (S17). Die Steuerung 30 vergrößert den Bildschirm und gibt denselben aus, der auf dem Bereich, der der extrahierten erwarteten Berührungsposition entspricht, mit einem bestimmten Verhältnis angezeigt wird, (S19). Dies kann als 5 angezeigt werden.
Wie oben beschrieben wurde, verhindern die offenbarten Ausführungsformen die Verringerung der Konzentration des Fahrers und weisen eine bemerkenswerte Wirkung zum Minimieren einer Inzidenzrate eines Unfalls, der aufgrund einer Navigationsvorrichtungsbetätigung während des Fahrens verursacht werden kann, durch Vergrößern und Ausgeben des Bereiches auf, den der Fahrer berühren soll, bevor das Objekt, wie beispielsweise ein Finger des Fahrers oder ein Touchpen, den Touchscreen erreicht.
Ähnlich verifizieren die offenbarten Ausführungsformen einen Bereich, in dem die Berührung erzeugt werden wird, vor der Erzeugung der Berührung auf dem Touchscreen durch Einrichten einer Tiefenerkennungskamera und weisen eine Wirkung zum Minimieren eines Eingabefehlers durch Vergrößern und Ausgeben eines Bildschirms des verifizierten Bereiches auf.
Zwar wurden beispielhafte Ausführungsformen der vorliegenden Offenbarung bevorstehend detailliert beschrieben, aber es sollte eindeutig klar sein, dass viele Variationen und Modifikationen der hierin gelehrten grundlegenden erfinderischen Konzepte, die sich jemandem mit Fähigkeiten in der vorliegenden Technik zeigen können, noch innerhalb des Wesens und Bereiches der vorliegenden Offenbarung liegen werden, die in den beiliegenden Ansprüchen definiert sind.
Bezugszeichenliste

10: KAMERA
20: EINGABE- UND AUSGABEEINHEIT
30: STEUERUNG
40: SPEICHEREINHEIT
S11: BETÄTIGE KAMERA
S13: ERFASSE BEWEGUNG?
S15: VERIFIZIERE ERWARTETE BERÜHRUNGSPOSITION
S17: EXTRAHIERE BEREICH
S19: VERGRÖßERE BEREICH UND GEBE DENSELBEN AUS

Claims

Gerät zum Steuern einer Benutzerschnittstelle mit einem Touchscreen, wobei das Gerät Folgendes aufweist: eine Eingabe- und Ausgabeeinheit mit einem Touchscreen; eine Kamera, die installiert ist, um von der Eingabe- und Ausgabeeinheit getrennt zu sein, und zumindest einen Teil bzw. eine Art der Bilddaten erhält, die einem Raum innerhalb eines kritischen Abstands von einer Vorderseite des Touchscreens entsprechen; und eine Steuerung, die eine erwartete Berührungsposition eines Objektes verifiziert, wenn eine Bewegung des Objektes in dem Raum infolge einer Analyse der zumindest einen Bilddaten erfasst wird, und die Eingabe- und Ausgabeeinheit steuert, um einen Bereich zu vergrößern und auszugeben, der der erwarteten Berührungsposition entspricht.
Gerät nach Anspruch 1, wobei die Kamera eine Tiefenerkennungskamera ist.
Gerät nach Anspruch 2, wobei die Steuerung die zumindest einen Bilddaten analysiert, die in regelmäßigen Intervallen von dem Raum innerhalb des kritischen Abstands erhalten werden.
Gerät nach Anspruch 3, wobei die Steuerung die zumindest einen Bilddaten in Hintergrundbilddaten und Objektbilddaten teilt, wenn eine Bewegung des Objektes in dem Raum durch Analysieren der zumindest einen Bilddaten verifiziert wird.
Gerät nach Anspruch 4, wobei die Steuerung ein Pixel, das einer Position des Objektes entspricht, unter einer Vielzahl von Pixeln verifiziert, die die Objektbilddaten bilden.
Gerät nach Anspruch 5, wobei die Steuerung eine erwartete Berührungsposition, an der das Objekt den Touchscreen berühren soll, durch Abbilden des Pixels der verifizierten Objektbilddaten auf ein Pixel verifiziert, das einen Bildschirm bildet, der auf dem Touchscreen ausgegeben wird.
Gerät nach Anspruch 6, wobei die Steuerung einen Bildschirm vergrößert und anzeigt, der auf einem Bereich, der der verifizierten erwarteten Berührungsposition entspricht, mit einem spezifischen Verhältnis angezeigt wird, und ein Eingangssignal erzeugt, das dem vergrößerten Bildschirm entspricht, wenn eine Berührung auf dem vergrößerten Bildschirm erzeugt wird.
Verfahren zum Steuern einer Benutzerschnittstelle mit einem Touchscreen, wobei das Verfahren Folgendes aufweist: Betätigen einer Kamera gemäß einem Signal, das von einer Eingabe- und Ausgabeeinheit mit einem Touchscreen empfangen wird, durch eine Steuerung; Analysieren der zumindest einen Bilddaten, die einem Raum innerhalb eines kritischen Abstands von einer Vorderseite des Touchscreens entsprechen und von der Kamera empfangen werden, durch die Steuerung; Verifizieren einer erwarteten Berührungsposition eines Objektes durch die Steuerung, wenn eine Bewegung des Objektes in dem Raum infolge der Analyse erfasst wird; und Vergrößern und Ausgeben eines Bereiches durch die Steuerung, der der erwarteten Berührungsposition entspricht.
Verfahren nach Anspruch 8, wobei das Analysieren der zumindest einen Bilddaten das Analysieren der zumindest einen Bilddaten aufweist, die in regelmäßigen Intervallen von dem Raum innerhalb des kritischen Abstands erhalten werden.
Verfahren nach Anspruch 8, wobei das Analysieren der zumindest einen Bilddaten das Trennen der zumindest einen Bilddaten in Hintergrundbilddaten und Objektbilddaten aufweist, wenn eine Bewegung des Objektes in dem Raum erfasst wird.
Verfahren nach Anspruch 10, wobei das Verifizieren der erwarteten Berührungsposition des Objektes Folgendes aufweist: Verifizieren eines Pixels, das einer Position des Objektes entspricht, unter einer Vielzahl von Pixeln, die die Objektbilddaten bilden; und Verifizieren der erwarteten Berührungsposition, an der das Objekt den Touchscreen berühren soll, durch Abbilden eines Pixels der verifizierten Objektbilddaten auf ein Pixel, das den Touchscreen bildet.
Verfahren nach Anspruch 11, wobei das Vergrößern und Ausgeben des Bereiches, der der erwarteten Berührungsposition entspricht, das Vergrößern und Anzeigen eines Bildschirms aufweist, der auf einem Bereich, der der verifizierten erwarteten Berührungsposition entspricht, mit einem spezifischen Verhältnis angezeigt wird.
Nicht-transitorisches computerlesbares Medium mit Programmbefehlen zum Steuern einer Benutzerschnittstelle mit einem Touchscreen, die eine Eingabe- und Ausgabeeinheit mit einem Touchscreen und eine Kamera enthält, die installiert ist, um von der Eingabe- und Ausgabeeinheit getrennt zu sein, wobei das computerlesbare Medium Folgendes aufweist: Programmbefehle, die die zumindest einen Bilddaten analysieren, die einem Raum innerhalb eines kritischen Abstands von einer Vorderseite des Touchscreens entsprechen und von der Kamera empfangen werden; Programmbefehle, die eine erwartete Berührungsposition eines Objektes verifizieren, wenn eine Bewegung des Objektes in dem Raum infolge der Analyse erfasst wird; und Programmbefehle, die einen Bereich, der der erwarteten Berührungsposition entspricht, vergrößern und ausgeben.
Computerlesbares Medium nach Anspruch 13, wobei die Programmbefehle, die die zumindest einen Bilddaten analysieren, Programmbefehle aufweisen, die die zumindest einen Bilddaten analysieren, die in regelmäßigen Intervallen von dem Raum innerhalb des kritischen Abstands erhalten werden.
Verfahren nach Anspruch 13, wobei die Programmbefehle, die die zumindest einen Bilddaten analysieren, Programmbefehle aufweisen, die die zumindest einen Bilddaten in Hintergrundbilddaten und Objektbilddaten trennen, wenn eine Bewegung des Objektes in dem Raum erfasst wird.
Verfahren nach Anspruch 15, wobei die Programmbefehle, die die erwartete Berührungsposition des Objektes verifizieren, Folgendes aufweisen: Programmbefehle, die ein Pixel, das einer Position des Objektes entspricht, unter einer Vielzahl von Pixeln verifizieren, die die Objektbilddaten bilden; und Programmbefehle, die die erwartete Berührungsposition, an der das Objekt den Touchscreen berühren soll, durch Abbilden eines Pixels der verifizierten Objektbilddaten auf ein Pixel verifizieren, das den Touchscreen bildet.
Verfahren nach Anspruch 16, wobei die Programmbefehle, die den Bereich vergrößern und ausgeben, der der erwarteten Berührungsposition entspricht, Programmbefehle aufweisen, die einen Bildschirm vergrößern und ausgeben, der auf einem Bereich, der der verifizierten erwarteten Berührungsposition entspricht, mit einem spezifischen Verhältnis angezeigt wird.