SE538451C2 - Förbättrad spårning av ett objekt för styrning av ett beröringsfritt användargränssnitt - Google Patents
Förbättrad spårning av ett objekt för styrning av ett beröringsfritt användargränssnitt Download PDFInfo
- Publication number
- SE538451C2 SE538451C2 SE1450769A SE1450769A SE538451C2 SE 538451 C2 SE538451 C2 SE 538451C2 SE 1450769 A SE1450769 A SE 1450769A SE 1450769 A SE1450769 A SE 1450769A SE 538451 C2 SE538451 C2 SE 538451C2
- Authority
- SE
- Sweden
- Prior art keywords
- screen
- illumination
- computer device
- control unit
- camera
- Prior art date
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
-
- H—ELECTRICITY
- H01—ELECTRIC ELEMENTS
- H01Q—ANTENNAS, i.e. RADIO AERIALS
- H01Q13/00—Waveguide horns or mouths; Slot antennas; Leaky-waveguide antennas; Equivalent structures causing radiation along the transmission path of a guided wave
- H01Q13/10—Resonant slot antennas
- H01Q13/106—Microstrip slot antennas
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/002—Specific input/output arrangements not covered by G06F3/01 - G06F3/16
- G06F3/005—Input arrangements through a video camera
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/97—Determining parameters from multiple pictures
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Human Computer Interaction (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Multimedia (AREA)
- Waveguide Aerials (AREA)
- Studio Devices (AREA)
- Dental Prosthetics (AREA)
- User Interface Of Digital Computer (AREA)
Description
FÖRBÄTTRAD SPÅRNING AV ETT OBJEKT FÖR STYRNING AV ETT
BERÖRINGSFRITT ANVÄNDARGRÄNS SNITT
TEKNISKT OMRÅDE
Denna ansökan hänför sig till en metod, ett datorläsbart medium och en anordning för att åstadkomma förbättrad spårning av ett objekt, och i synnerhet till en metod, ett datorläsbart medium och en anordning för förbättrad spårning av ett objekt för styrning av ett beröringsfritt användargränssnitt.
BAKGRUND
Beröringsfria användargränssnitt har varit kända sedan slutet av 1990-talet och många lösningar har föreslagits på hur man kan spåra ett objekt. Några exempel på sådana system ges nedan.
Den amerikanska patentansökan publicerad som US2010294938A beskriver bl. a. en enhet för infraröd avkänning för att tillåta detektering av en placering för ett externt objekt, samt en mobilanordning som använder en sådan enhet och relaterade driftsoperationer. I en exemplifierande utföringsform innefattar avkänningsenheten en höljeskonstruktion av pyramidtyp med en central yta och flera yttre ytor som vardera sträcker sig på ett lutande sätt bort från den centrala ytan. Avkänningsenheten innefattar vidare flera fotosändare som var och en är placerad nära en respektive av de yttre ytorna och en fotomottagare som är placerade nära den centrala ytan, varvid respektive fotoelektrisk anordning är inställd att motsvara sin respektive yta. Avkänningsenheten manövreras så att ljus emitteras från fotosändarna, reflekteras av objektet och tas emot av fotomottagaren. Genom att behandla signaler från fotomottagaren som är indikativa för det mottagna ljuset fastställs det externa objektets placering.
En nackdel är att belysningen kräver speciella fotosändare som är både kostsamma och svåra att införliva i en liten anordning.
I synnerhet när det gäller kameror som verkar i det synliga ljusspektrumet medför användningen av speciella fotosändare och lampor nackdelar, då det ljus som tillhandahålls kan blända eller åtminstone störa en användare. Lösningen som tillhandahålls genom känd teknik är att använda infraröda fotosändare som emellertid alltjämt är problematiskt då de är kostsamma och svåra att införliva i (i synnerhet små) anordningar.
Det finns sålunda ett behov av en datoranordning som är i stånd att spåra ett objekt vid förhållanden av svagt ljus, som inte medför ökade kostnader och som är lätt att införliva också i små anordningar.
SAMMANFATTNING
Det är en aspekt av lärorna enligt föreliggande ansökan att lösa de problem som listats ovan genom att tillhandahålla en datoranordning som innefattar en skärm och en styrenhet, varvid styrenheten är anordnad att detektera och spåra ett objekt via en av en kamera tillhandahållen videoström och anpassa en belysning av nämnda skärm för att belysa objektet så att datoranordningen framgångsrikt kan spåra objektet, varvid datoranordningen ärkännetecknad avatt styrenheten vidare är anordnad att fastställa att objektet inte går att spåra vid ett rådande ljusförhållande och som svar därpå anpassa belysningen av skärmen, varvid belysningen av objektet tillhandahålles av belysning av skärmen.
En sådan datoranordning är i stånd att ordentligt belysa ett objekt som skall spåras utan behov av ytterligare fotosändare.
I en utföringsform är styrenheten vidare anordnad att detektera ett avstånd till objektet som skall spåras och att anpassa belysningen av skärmen baserat på avståndet.
I en utföringsform är styrenheten vidare anordnad att detektera ett omgivande ljusförhållande och att anpassa belysningen av skärmen baserat på det omgivande ljusförhållandet.
I en utföringsform är styrenheten vidare anordnad att fastställa att det inte är möjligt att spåra objektet vid ett rådande ljusförhållande och som svar därpå anpassa belysningen av skärmen.
I en utföringsform är datoranordningen en mobil kommunikationsterminal. I en utföringsform är datoranordningen en surfplatta eller en (bärbar) dator. I en utföringsform är datoranordningen en spelkonsol. I en utföringsform är datoranordningen en mediaenhet såsom en TV-apparat eller ett mediasystem.
Det är också en aspekt av lärorna enligt föreliggande ansökan att lösa de problem som listats ovan genom att tillhandahålla en metod för användning i en datoranordning innefattande en skärm, varvid metoden innefattar att detektera och spåra ett objekt via en av en kamera tillhandahållen videoström och anpassa en belysning av skärmen att belysa objektet så att datoranordningen framgångsrikt kan spåra objektet, varvid metoden kännetecknas av att den vidare innefattar fastställning av att objektet inte går att spåra vid ett rådande ljusförhållande och som svar därpå anpassning av belysningen av skärmen, varvid belysningen av objektet tillhandahålles av belysning av skärmen.
Det är vidare en aspekt av lärorna enligt föreliggande ansökan att lösa de problem som listats ovan genom att tillhandahålla ett datorläsbart medium innefattande instruktioner som när de laddas i och exekveras av en styrenhet, såsom en processor, i en datoranordning medför exekvering av en metod i enlighet med häri.
Uppfinnarna till föreliggande uppfinning har, efter kreativt och insiktsfullt resonemang, insett att genom att använda en kamera konstruerad att verka i det synliga ljusspektrumet kan det omgivande ljuset med fördel användas för att belysa objektet. Genom att komma till insikt om att belysningen som tillhandahålls av en (aktiv) skärm är en del av det omgivande ljuset och som sådan kan användas för att belysa objektet minskar dessutom, vilket är av största vikt, behovet av särskilda extra lampor. Genom att komma till denna sinnrika insikt övervann dessutom uppfinnarna den inom området gängse uppfattningen att för att minska energiförbrukningen skall belysningen av skärmen reduceras i mörka omgivningar eftersom belysningen som behövs för att visa innehållet urskiljbart, jämfört med en ljus miljö, minskas. Dessutom finns en väl inrotad vanföreställning inom området mot att använda stark belysning i en mörk omgivning då en klart upplyst skärm minskar en användares mörkerseende.
Det sätt som lärs ut häri tillhandahåller sålunda en enkel lösning på ett lång-varigt problem och strider mot den rådande förutfattade meningen beträffande skärm-belysning.
Lärorna häri finner användning i styrsystem för enheter med användargränssnitt såsom mobiltelefoner, smarttelefoner, pekplattor, datorer (bärbara och stationära), spelkonsoler och media- och andra informationsunderhållnings-anordningar.
Andra särdrag och fördelar hos de beskrivna utföringsformerna kommer att framgå av den följande detaljerade beskrivningen, av de bifogade osjälvständiga patentkraven samt av ritningarna. Generellt skall alla termer som används i patentkraven tolkas i enlighet med deras vanliga betydelse inom det tekniska området, om inte annat uttryckligen anges häri.
Alla hänvisningar till "ett/en/det/den [element, anordning, komponent, organ, steg, etc.]" skall tolkas öppet som hänvisning till åtminstone ett exempel av elementet, anordningen, komponenten, organet eller steget, etc, om inget annat uttryckligen anges. Stegen i de olika metoderna som beskrivs häri behöver inte uttryckligen utföras i exakt den ordning som beskrivs, såvida detta inte uttryckligen anges.
KORT BESKRIVNING AV RITNINGARNA
Uppfinningen kommer att beskrivas mer i detalj med hänvisning till de bifogade ritningarna, där: Figurerna 1A, IB och 1C vardera visar en schematisk vy av en datoranordning i enlighet med lärorna häri; Figur 2 visar en schematisk vy av komponenterna hos en datoranordning i enlighet med lärorna häri; Figur 3 visar en schematisk vy av ett datorläsbart minne i enlighet med lärorna häri; Figurerna 4A, 4B och 4C visar ett exempel på en utföringsform av en datoranordning i enlighet med lärorna häri; och Figur 5 visar ett flödesschema som illustrerar en allmän metod i enlighet med en utföringsorm av lärorna häri.
DETALJERAD BESKRIVNING
De beskrivna utföringsformerna kommer nu att beskrivas mer ingående med hänvisning till de bifogade ritningarna, på vilka vissa utföringsformer av uppfinningen visas. Denna uppfinning kan emellertid utföras i många olika former och bör inte tokas såsom begränsad till utföringsformerna som anges häri; dessa utföringsformer tillhandahålls snarare som exempel för att denna beskrivning skall vara noggrann och fullständig och till fullo förmedla ramen för uppfinningen för fackmannen inom teknikområdet. Samma nummer hänvisar genomgående samma element.
Figur 1 visar allmänt en datoranordning 100 i enlighet med en utföringsform häri. I en utföringsform är datoranordningen 100 anordnad för nätverkskommunikation, antingen trådlös eller trådbunden. Exempel på en datoranordning 100 är: en person-dator, bordsdator eller bärbar dator, en surfplatta, en mobil kommunikationsterminal såsom en mobiltelefon, en smarttelefon, en personlig digital assistent och en spelkonsol. Tre utföringsformer kommer att exemplifieras och beskrivas såsom varande en smarttelefon i figur 1A, en bärbar dator i figur IB och en mediaenhet 100 i figur 1C. En mediaenhet anses vara en datoranordning inom ramen för denna ansökan med avseende på att den är anordnad att ta emot digitalt innehåll, behandla eller beräkna innehållet och presentera resulterande eller beräknade media, såsom bild(er) och/eller ljud.
Med hänvisning till figur 1A innefattar en kommunikationsterminal i form av en smarttelefon 100 ett hölje 110, i vilket en skärm 120 är anordnad. I en utföringsform är skärmen 120 en pekskärm. I andra utföringsformer är skärmen 120 en icke-pekskärm. Smarttelefonen 100 innefattar vidare två knappar 130a, 130b. I denna utföringsform finns två knappar 130, men valfritt antal knappar är möjligt och beror på utformningen av smarttelefonen 100.1 en utföringsform är smarttelefonen 100 anordnad att visa och driva en virtuell knapp 135 på pekskärmen 120. Det skall noteras att antalet virtuella knappar 135 beror på utformningen av smarttelefonen 100 och en applikation som exekveras på smarttelefonen 100. Smarttelefonen 100 är också utrustad med en kamera 160. Kameran 160 är en digitalkamera som är anordnad att ta video- eller stillbilder genom att spela in bilder på en elektronisk bildsensor (ej visad). I en utföringsform är kameran 160 en extern kamera. I en utföringsform är kameran, som en möjlighet, ersatt av en källa som tillhandahåller en bildström.
Med hänvisning till figur IB innefattar en bärbar dator 100 en skärm 120 och ett hölje 110. Höljet innefattar en styrenhet eller CPU (ej visad) och en eller flera datorläsbara lagringsmedier (ej visade), såsom lagringsenheter och internt minne. Exempel på lagringsenheter är skivenheter eller hårddiskar. Den bärbara datorn 100 innefattar vidare åtminstone en dataport. Dataportar kan vara trådbundna och/eller trådlösa. Exempel på dataportar är USB- (Universal Serial Bus) portar, Ethernet-portar eller WiFi- (enligt IEEE-standard 802.11) portar. Dataportar är anordnade för att göra det möjligt för en bärbar dator 100 att anslutas till andra datoranordningar eller en server.
Den bärbara datorn 100 innefattar vidare åtminstone en inmatningsenhet såsom ett tangentbord 130. Andra exempel på inmatningsenheter är datormöss, pekplattor, pekskärmar eller joysticks för att nämna några.
Den bärbara datorn 100 är vidare utrustad med en kamera 160. Kameran 160 är en digitalkamera som är anordnad att ta video- eller stillbilder genom att spela in bilder på en elektronisk bildsensor (ej visad). I en utföringsform är kameran 160 en extern kamera. I en utföringsform är kameran som ett alternativ ersatt av en källa som tillhandahåller en bildström.
Med hänvisning till figur 1C innefattar en mediaenhet, såsom en TV-apparat, TV, 100 en skärm 120 och ett hölje 110. Höljet innefattar en styrenhet eller CPU (ej visad) och en eller flera datorläsbara lagringsmedier (ej visade), såsom lagringsenheter och internt minne, för lagring av användarinställningar och styrmjukvara. Datoranordningen 100 kan vidare innefattar åtminstone en dataport (ej visad). Dataportar kan vara trådbundna och/eller trådlösa. Exempel på dataportar är USB- (Universal Serial Bus) portar, Ethernet-portar eller WiFi- (enligt IEEE-standard 802.11) portar. Sådana dataportar är anordnade för att göra det möjligt för TV:n 100 att anslutas till ett externt lagringsmedium, såsom en USB-sticka, eller att anslutas till andra datoranordningar eller en server.
TV:n 100 kan vidare innefatta en inmatningsenhet såsom åtminstone en knapp 130 eller en fjärrkontroll 130b för manövrering av TV:n 100.
TV:n 100 är vidare utrustad med en kamera 160. Kameran 160 är en digitalkamera som är anordnad att ta video- eller stillbilder genom att spela in bilder på en elektronisk bildsensor (ej visad). I en utföringsform är kameran 160 en extern kamera. I en utföringsform är kameran som ett alternativ ersatt av en källa som tillhandahåller en bildström.
Figur 2 visar en schematisk vy av den allmänna strukturen av en anordning i enlighet med figur 1. Anordningen 100 innefattar en styrenhet 210 som är ansvarig för den totala driften av datoranordningen 200 och som företrädesvis är implementerad av valfri kommersiellt tillgänglig CPU ("Central Processing Unit" eller centralprocessor), DSP ("Digital Signal Processor" eller signalprocessor) eller valfri annan elektronisk programmerbar logisk anordning. Styrenheten 210 är anordnad att läsa instruktioner från minnet 240 och exekvera dessa instruktioner till att styra driften av datoranordningen 100. Minnet 240 kan implementeras under användande av valfri allmänt känd teknik för datorläsbara minnen såsom ROM, RAM, SRAM, DRAM, CMOS, FLASH, DDR, SDRAM eller någon annan minnesteknik. Minnet 240 används för olika ändamål av styrenheten 210, varav ett av dem är för att lagra applikationsdata och program-instruktioner 250 för olika mjukvarumoduler i datoranordningen 200. Mjukvaru-modulerna omfattar ett realtidsoperativsystem, drivrutiner för ett användargränssnitt 220, en applikationshanterare liksom olika applikationer 250.
Datoranordningen 200 innefattar vidare ett användargränssnitt 220, vilket i datoranordningen i figurerna 1A, IB och 1C består av skärmen 120 och knapparna 130, 135.
Datoranordningen 200 kan vidare innefatta ett radiofrekvensgränssnitt 230, vilket är anpassat att tillåta datoranordningen att kommunicera med andra anordningar via ett radiofrekvensband genom användning av olika radiofrekvensteknologier. Exempel på sådana teknologier är IEEE 802.11, IEEE 802.15, ZigBee, WirelessHART, WIFI, Bluetooth®, W-CDMA/HSPA, GSM, UTRAN och LTE för att nämna några.
Datoranordningen 200 är vidare utrustad med en kamera 260. Kameran 260 är en digitalkamera som är anordnad att ta video- och stillbilder genom att spela in bilder på en elektronisk bildsensor (ej visad).
Kameran 260 är operativt ansluten till styrenheten 210 för att förse styrenheten med en videoström 265, dvs. serien tagna bilder, för vidare behandling och om möjligt för användning i och/eller i enlighet med en eller flera applikationer 250.
I en utföringsform är kameran 260 en extern kamera eller källa till en bildström.
Hänvisningar till 'datorläsbart lagringsmedium', 'datorprogramprodukt', 'reellt/påtagligt/konkret utformat datorprogram' etc. eller en 'styrenhet', 'dator',
'processor' etc. skall förstås omfatta inte enbart datorer med olika arkitekturer såsom enkel / multi-processorarkitekturer och sekventiella (Von Neumann)/parallella arkitekturer utan också specialiserade kretsar såsom fältprogrammerbara grindmatriser (FPGA), applikationsspecifika kretsar (ASIC), signalbehandlingsanordningar och andra anordningar. Hänvisningar till datorprogram, instruktioner, kod etc. skall förstås omfatta mjukvara för en programmerbar processor eller hård mjukvara såsom, exempelvis, det programmerbara innehållet hos en hårdvaruanordning, huruvida instruktioner för en processor, eller konfigurationsinställningar för en fast-funktionsenhet, grindmatris eller programmerbar logikenhet etc.
Figur 3 visar en schematisk vy av ett datorläsbart medium såsom beskrivits ovan. Det datorläsbara mediet 30 är i denna utföringsform en dataskiva 30.1 en utföringsform är dataskivan 30 en magnetisk datalagringsskiva. Dataskivan 30 är anordnad att bära instruktioner 31 som när laddade i en styrenhet, såsom en processor, exekverar en metod eller ett förfarande i enlighet med utföringsformerna som beskrivs ovan. Dataskivan 30 är anordnad att anslutas till eller inuti och läsas av en låsanordning 32, för inmatning av instruktionerna i styrenheten. Ett exempel på en låsanordning 32 i kombination med en (eller flera) dataskiva (dataskivor) 30 är en hårddisk. Det skall noteras att det datorläsbara mediet även kan vara andra medier såsom kompaktdiskar, digitala videodiskar, flashminnen eller andra, ofta använda minnesteknologier.
Instruktionerna 31 kan också laddas ner till en anordning som läser datoruppgifter 34, såsom en bärbar dator eller annan anordning i stånd att läsa datorkodad data på ett datorläsbart medium genom att innefatta instruktionerna 31 i en datorläsbar signal 33 som överförs via ett trådlöst (eller trådbundet) gränssnitt (exempelvis via internet) till anordningen som läser datoruppgifter 34 för inmatning av instruktionerna 31 i en styrenhet. I en dylik utföringsform är den datorläsbara signalen 33 en typ av ett datorläsbart medium 30.
Instruktionerna kan lagras i ett minne (ej explicit visat i figur 3, men betecknat 240 i figur 2) hos den bärbara datorn 34.
Hänvisningar till datorprogram, instruktioner, kod etc. skall förstås att omfatta mjukvara för en programmerbar processor eller hård mjukvara såsom exempelvis det programmerbara innehållet hos en hårdvaruanordning, huruvida instruktioner för en processor, eller konfigurationsinställningar för en fast-funktionsanordning, grindmatris eller programmerbar logikenhet etc.
Ett förbättrat sätt för spårning av ett objekt kommer att beskrivas nedan med hänvisning till bifogade figurer. Exemplet kommer att illustreras med fokus på den av en skärm tillhandahållna resulterande belysningen, men det skall stå klart att behand-lingen delvis eller helt och hållet utförs i en datoranordning innefattande en styrenhet såsom beskrivs i det föregående med hänvisning till figurerna 1 och 2 eller förmås utföras genom att exekvera instruktionerna lagrade på ett datorläsbart medium såsom beskrivs med hänvisning till figur 3.
Figur 4A visar ett exempel på en datoranordning, i det här exemplet en bärbar dator 100 som i figur IB, som är anordnad att detektera och spåra ett objekt, såsom en hand H, via en av en kamera 160 tillhandahållen videoström. Den bärbara datorn har en skärm 120, på vilken objekt 135 visas. Skärmen är inställd att stråla eller belysas på en initial (eller normal) nivå. I figur 4A indikeras den initiala belysningen med streckade linjer hänvisade till som IL1. Den initiala belysningsnivån är beroende av ett antal faktorer som är uppenbara för en fackman och som också kan vara användarkonfigurer-bara.
I figur 4A är handen på ett avstånd Dl från skärmen. I exemplet i figur 4A antas att det omgivande ljusförhållandet är tillräckligt ljust för att ordentligt belysa handen H så att kameran och styrenheten som använder de associerade datorinstruk-tionerna kan spåra handen H. Hur ett dylikt objekt H detekteras och spåras beskrivs i svensk patentansökan SE 1250910-5 och kommer inte att diskuteras i detalj i föreliggande ansökan. För fler detaljer avseende detta hänvisas till nämnda svenska patentansökan. Det skall emellertid noteras att lärorna i föreliggande ansökan kan implementeras genom användning av andra spårningssätt än som beskrivs i svensk patentansökan SE 1250910-5.
I exemplet i figurerna 4A och 4B är det omgivande ljusförhållandet inte tillräckligt för att med framgång spåra ett detekterat objekt, såsom handen H, när handen H placeras på större avstånd, såsom avståndet D2, från skärmen 120.
I en utföringsform är den bärbara datorn 100 anordnad att detektera att ett objekt förekommer framför skärmen 120/kameran 160 genom att analysera den tillhandahållna bildströmmen.
Ett sätt att detektera ett objekt bygger på det faktum att ett objekt som skall spåras mest sannolikt inte är statiskt placerat framför kameran 160 och rörelse kan sålunda detekteras genom att det sker ändringar mellan bilderna i bildströmmen som utgör videoströmmen.
Eftersom det endast är nödvändigt för styrenheten att detektera ändringar för att fastställa att det förekommer rörelse av ett objekt och därigenom detektera ett objekt (såsom varande området där ändringarna detekteras) kan det ljus som krävs vara mindre än vad som behövs för att faktiskt spåra ett objekt. Vid spårning av ett objekt behövs fler detaljer om objektet för att fastställa hur objektet rör sig och att det är det objekt som spåras som faktiskt rör sig.
Vissa faktorer påverkar hur väl ett objekt kan detekteras. Exempel på sådana faktorer är färg, reflexion och struktur (skarpa eller jämna kanter) hos objektet. I ett dåligt upplyst rum är det exempelvis lättare att detektera ett vitt objekt än ett svart objekt.
När det blir omöjligt att spåra objektet H under användande av den av de omgivande ljusförhållandena tillhandhållna belysningen, anordnas den bärbara datorn 100 att anpassa belysningen hos skärmen 120 för att öka belysningen och därigenom det omgivande ljuset för att bättre belysa handen H och möjliggöra framgångsrik spårning av objektet.
Under hänvisning till figur 4B är den bärbara datorn 100 anordnad att detektera att handen H är på ett avstånd D2 från skärmen och som svar därpå anpassa belysningen av skärmen 120.1 figur 4B indikeras detta genom längre streckade linjer som utgår från skärmen 120 och den ökade belysningen betecknas IL2.
Genom att öka belysningen hos skärmen förbättras det omgivande ljusförhållandet och den bärbara datorn 100 är i stånd att med framgång spåra handen H för att ta emot styrinmatning som en del av användargränssnittet hos den bärbara datorn 100.
I exemplen enligt figurerna 4A och 4B detekterar styrenheten att handen H förflyttas bort från skärmen 120 och ökar som svar därpå belysningen av skärmen 120.
Med hänvisning till figur 4C är den bärbara datorn 100 anordnad att detektera att handen H är detekterbar men inte spårbar och att som svar därpå anpassa belysningen av skärmen 120. Denna bestämning kan göras genom att mäta det omgivande ljusförhållandet, exempelvis genom analys av den av kameran 160 tillhandahållna videoströmmen. I figur 4B indikeras detta genom längre streckade linjer som utgår från skärmen 120 och den ökade belysningen betecknas IL2.
Vad gäller exemplen i figurerna 4A och 4C är skärmen 120 initialt vid en första (initial) belysning IL1 (figur 4A), då det antingen fastställs (såsom förklarats ovan) att belysningen inte är tillräcklig eller att de omgivande ljusförhållandena ändras och blir otillräckliga. Figur 4C illustrerar det otillräckliga ljusförhållandet genom att vara skuggad. Den bärbara datorn 100 är anordnad att detektera att ljusförhållandet inte är tillräckligt och som svar därpå öka belysningen av skärmen 120.1 figur 4C indikeras detta genom längre streckade linjer som utgår från skärmen 120 och den ökade belysningen betecknas IL3.
I en utföringsform är den bärbara datorn 100 anordnad att fastställa att objektet inte kan spåras genom att försöka utföra ett spårningsförfarande utan framgång och som svar därpå öka belysningen av skärmen 120. Dylika spårningsöfrfaranden beskrivs i, men är inte begränsade till, den svenska patentansökan SE 1250910-5 och kommer inte att diskuteras i detalj i föreliggande ansökan.
I en utföringsform är den bärbara datorn 100 sålunda anordnad att detektera ett objekt och fastställa att objektet inte kan spåras under rådande ljusförhållanden (eventuellt under användning av initial belysning IL1), på grundval av åtminstone något av alternativen att mäta det omgivande ljusförhållandet, detektera ett avstånd och/eller fastställa att ett spårningsförfarande är utan framgång och som svar därpå öka belysningen av skärmen 120.
I en utföringsform är den bärbara datorn 100 anordnad att stegvis eller linjärt justera belysningen av skärmen 120 till dess och/eller medan objektet som skall spåras är i stånd att spåras med framgång, exempelvis genom justering av belysningen av skärmen 120 så att objektet är klart urskiljbart, vilket kan fastställas genom analys av bilden/bilderna i videoströmmen.
Det skall noteras att även om anpassningen som grundar sig på ljusförhållande och anpassningen som grundar sig på avstånd beskrivs separat i det ovanstående kan de båda kombineras till en anpassning som grundar sig på både avståndet och ljusförhållandet. Anpassningen som grundar sig på bestämningen huruvida objektet som skall spåras kan spåras kan också kombineras med anpassningen som grundar sig på avstånd, anpassningen som grundar sig på ljusförhållande eller en kombination av dessa.
Såsom nämnts ovan beror urskiljbarheten av ett objekt på ett antal faktorer. I en utföringsform är den bärbara datorn 100 anordnad att lagra en utseendeprofil för en användares föredragna styrobjekt eller objekt som skall spåras. Såsom användarens hand eller finger. De lagrade faktorerna kan hänföra sig till färg, reflekterande särdrag och/eller struktur. Genom att ha tillgång till information om objektet som skall spåras och hur lätt det kan urkiljas kan belysningsnivå, eventuellt den initiala belysningsnivån, anpassas för att möjliggöra en framgångsrik detektering och spårning av ett objekt utan att behöva fastställa en lämplig belysningsnivå genom att pröva sig fram. Detta kan exempelvis utföras när en ny användare loggar in på eller detekteras av datoranordningen.
Den lagrade utseendeprofilen kan skilja sig åt beroende på det omgivande ljusförhållandet och den bärbara datorn 100 kan anordnas att ta hänsyn till det omgivande ljusförhållandet vid fastställande av den initiala belysningsnivån (IL1).
I en utföringsform är den bärbara datorn 100 anordnad att belysa skärmen 120 vid den ökade belysningsnivån IL2, IL3 under en första tidsperiod och att när den första tidsperioden har förflutit belysa skärmen 120 vid den initiala belysningsnivån IL1. Exempel på den första tidsperioden är i storleksordningen 1 till 10 sekunder, 1 till 5 sekunder, 1 sekund, 2 sekunder eller 3 sekunder.
Figur 5 visar ett flödesschema av en allmän metod i enlighet med lärorna häri. En datoranordning detekterar och spårar 510 ett objekt, såsom en hand. Datoranordningen fastställer att ett objekt är otillräckligt belyst 520 och anpassar som svar därpå belysningen av skärmen 530. Belysningen av objektet kan fastställas på grundval av avståndet 523, det omgivande ljusförhållandet 526 eller en bildanalys av det detekterade objektet 529.
Uppfinningen lär sålunda ut att datoranordningen kan använda belysningen jämte ljusförhållandet hos skärmen för att säkerställa att belysningen av objektet som skall spåras är tillräckligt för att spåra objektet och för att anpassa belysningen i enlighet därmed.
Lärorna häri tillhandahåller fördelen att ett objekt kan spåras även vid dåligt upplysta förhållanden och utan att fordra dyr utrustning.
En annan fördel ligger däri att lärorna häri rentav kan implementeras i befintliga anordningar genom en mjukvaruuppgradering.
Uppfinningen har i huvudsak beskrivits ovan med hänvisning till ett fåtal utföringsformer. Det är emellertid lätt för en fackman inom området att inse att andra utföringsformer än de som beskrivits ovan likaså är möjliga inom ramen för uppfinningen såsom den definieras av de bifogade patentkraven.
Claims (9)
1. Datoranordning (100, 200) innefattande en skärm (120) och en styrenhet (210), varvid styrenheten (210) är anordnad att: detektera och spåra ett objekt (H) via en av en kamera (160, 260) tillhandahållen videoström (265) och anpassa en belysning (IL1, IL2, IL3) av nämnda skärm (120) för att belysa objektet (H) så att datoranordningen framgångsrikt kan spåra objektet (H), varvid datoranordningen (100, 200) är kännetecknad av att styrenheten (210) vidare är anordnad att fastställa att objektet (H) är detekterbar men inte går att spåra vid ett rådande ljusförhållande och som svar därpå anpassa belysningen (IL1, IL2, IL3) av skärmen (120), varvid belysningen av objektet (H) tillhandahålles av belysning av skärmen (120).
2. Datoranordningen (100, 200) enligt krav 1, varvid styrenheten (210) vidare är anordnad att detektera ett avstånd (Dl, D2) till objektet som skall spåras (H) och att anpassa belysningen (IL1, IL2, IL3) av skärmen (120) på grundval av avståndet (Dl, D2), så att om styrenheten detekterar ett ökat avstånd, ökas belysningen.
3. Datoranordningen (100, 200) enligt krav 1 eller 2, varvid styrenheten (210) vidare är anordnad att detektera ett omgivande ljusförhållande och att anpassa belysningen (IL1, IL2, IL3) av skärmen (120) på grundval av det omgivande ljusförhållandet.
4. Datoranordningen (100, 200) enligt krav 1, varvid styrenheten (210) vidare är anordnad att dynamiskt anpassa belysningen (IL1, IL2, IL3) av skärmen (120) till dess att objektet (H) är klart urskiljbart.
5. Datoranordningen (100, 200) enligt något av föregående krav vidare innefattande ett minne (240), och varvid styrenheten (210) vidare är anordnad att i minnet lagra en utseendeprofil för ett känt objekt som skall spåras och anpassa belysningen (IL1, IL2, IL3) av skärmen (120) på grundval av den lagrade utseendeprofilen.
6. Datoranordningen (100, 200) enligt krav 5, varvid den lagrade utseendeprofilen är associerad med ett omgivande ljusförhållande.
7. Datoranordningen (100, 200) enligt något av föregående krav, varvid styrenheten (210) vidare är anordnad att belysa skärmen (120) vid en anpassad belysningsnivå (IL2, IL3) under en första tidsperiod och när den första tidsperioden har förflutit belysa skärmen (120) vid en initial belysningsnivå (IL1).
8. Metod för användning i en datoranordning (100, 200) innefattande en skärm (120), varvid metoden innefattar att: detektera och spåra ett objekt (H) via en av en kamera (160, 260) tillhandahållen videoström (265) och anpassa en belysning (IL1, IL2, IL3) av skärmen (120) att belysa objektet (H) så att datoranordningen framgångsrikt kan spåra objektet (H), varvid metoden kännetecknas av att den vidare innefattar fastställning av att objektet (H) inte går att spåra vid ett rådande ljusförhållande och som svar därpå anpassning av belysningen (IL1, IL2, IL3) av skärmen (120), varvid belysningen av objektet (H) tillhandahålles av belysning av skärmen (120).
9. Datorläsbart lagringsmedium (40) kodat med instruktioner (41) som, när laddade och exekverade på en processor, föranleder metoden enligt krav 8 att utföras.
Priority Applications (5)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| US00077947A US3713165A (en) | 2013-01-22 | 1970-10-05 | Antenna for strip transmission lines |
| GB50046/70A GB1285289A (en) | 2013-01-22 | 1970-10-21 | An antenna for a strip transmission line |
| FR7038150A FR2073314A1 (sv) | 2013-01-22 | 1970-10-22 | |
| NO04007/70A NO127999B (sv) | 2013-01-22 | 1970-10-22 | |
| SE1450769A SE538451C2 (sv) | 2013-01-22 | 2013-01-22 | Förbättrad spårning av ett objekt för styrning av ett beröringsfritt användargränssnitt |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| SE1450769A SE538451C2 (sv) | 2013-01-22 | 2013-01-22 | Förbättrad spårning av ett objekt för styrning av ett beröringsfritt användargränssnitt |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| SE1450769A1 SE1450769A1 (sv) | 2014-07-23 |
| SE538451C2 true SE538451C2 (sv) | 2016-07-05 |
Family
ID=20299216
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| SE1450769A SE538451C2 (sv) | 2013-01-22 | 2013-01-22 | Förbättrad spårning av ett objekt för styrning av ett beröringsfritt användargränssnitt |
Country Status (5)
| Country | Link |
|---|---|
| US (1) | US3713165A (sv) |
| FR (1) | FR2073314A1 (sv) |
| GB (1) | GB1285289A (sv) |
| NO (1) | NO127999B (sv) |
| SE (1) | SE538451C2 (sv) |
Families Citing this family (11)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US4070676A (en) * | 1975-10-06 | 1978-01-24 | Ball Corporation | Multiple resonance radio frequency microstrip antenna structure |
| US4047179A (en) * | 1976-05-03 | 1977-09-06 | Raytheon Company | IFF antenna arrangement |
| FR2481526A1 (fr) * | 1980-04-23 | 1981-10-30 | Trt Telecom Radio Electr | Antenne a structure mince |
| US4518967A (en) * | 1982-03-05 | 1985-05-21 | Ford Aerospace & Communications Corporation | Tapered-width leaky-waveguide antenna |
| GB2212665B (en) * | 1987-11-23 | 1991-09-04 | Gen Electric Co Plc | A slot antenna |
| DE3808401A1 (de) * | 1988-03-12 | 1989-09-21 | Blaupunkt Werke Gmbh | Sichtscheibe fuer fahrzeuge |
| US5075647A (en) * | 1990-05-16 | 1991-12-24 | Universities Research Association, Inc. | Planar slot coupled microwave hybrid |
| FR2680283B1 (fr) * | 1991-08-07 | 1993-10-01 | Alcatel Espace | Antenne radioelectrique elementaire miniaturisee. |
| FR2705167B1 (fr) * | 1993-05-11 | 1995-08-04 | France Telecom | Antenne plaquee large bande a encombrement reduit, et dispositif d'emission/reception correspondant. |
| US6043786A (en) * | 1997-05-09 | 2000-03-28 | Motorola, Inc. | Multi-band slot antenna structure and method |
| JP2010050700A (ja) * | 2008-08-21 | 2010-03-04 | Advanced Telecommunication Research Institute International | アンテナ装置およびそれを備えたアレーアンテナ装置 |
Family Cites Families (9)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| BE513377A (sv) * | 1951-07-21 | |||
| US3031666A (en) * | 1955-06-06 | 1962-04-24 | Sanders Associates Inc | Three conductor planar antenna |
| US2993205A (en) * | 1955-08-19 | 1961-07-18 | Litton Ind Of Maryland Inc | Surface wave antenna array with radiators for coupling surface wave to free space wave |
| US2994083A (en) * | 1960-05-24 | 1961-07-25 | Sanders Associates Inc | High frequency transmission line coupling device |
| US3218644A (en) * | 1963-06-19 | 1965-11-16 | Collins Radio Co | Frequency independent slot antenna |
| US3518688A (en) * | 1965-11-22 | 1970-06-30 | Itt | Microwave strip transmission line adapted for integral slot antenna |
| US3524189A (en) * | 1966-11-09 | 1970-08-11 | Us Army | Slotted waveguide antenna array providing dual frequency operation |
| US3524190A (en) * | 1967-11-20 | 1970-08-11 | Ryan Aeronautical Co | Extendable radio frequency transmission line and antenna structure |
| US3530478A (en) * | 1968-03-27 | 1970-09-22 | Us Navy | Frequency independent log periodic slot multi-mode antenna array |
-
1970
- 1970-10-05 US US00077947A patent/US3713165A/en not_active Expired - Lifetime
- 1970-10-21 GB GB50046/70A patent/GB1285289A/en not_active Expired
- 1970-10-22 FR FR7038150A patent/FR2073314A1/fr not_active Withdrawn
- 1970-10-22 NO NO04007/70A patent/NO127999B/no unknown
-
2013
- 2013-01-22 SE SE1450769A patent/SE538451C2/sv unknown
Also Published As
| Publication number | Publication date |
|---|---|
| FR2073314A1 (sv) | 1971-10-01 |
| SE1450769A1 (sv) | 2014-07-23 |
| GB1285289A (en) | 1972-08-16 |
| US3713165A (en) | 1973-01-23 |
| NO127999B (sv) | 1973-09-10 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| SE538451C2 (sv) | Förbättrad spårning av ett objekt för styrning av ett beröringsfritt användargränssnitt | |
| US8766162B2 (en) | Ambient light based gesture detection | |
| US9733763B2 (en) | Portable device using passive sensor for initiating touchless gesture control | |
| KR102011169B1 (ko) | 광 폴오프에 기초한 깊이 이미지의 생성 기법 | |
| US9471153B1 (en) | Motion detection systems for electronic devices | |
| US9124685B2 (en) | Portable device including control actions dependent on a user looking at a touchscreen | |
| US9513720B2 (en) | Stylus detecting device and stylus detecting method | |
| US10073541B1 (en) | Indicators for sensor occlusion | |
| CN105917292B (zh) | 利用多个光源和传感器的眼睛注视检测 | |
| CA2815824C (en) | Touch screen palm input rejection | |
| US11094267B2 (en) | Proximity detection method, storage medium, and electronic device | |
| US9329684B2 (en) | Eye tracking with detection of adequacy of lighting | |
| TW201423484A (zh) | 動態偵測系統 | |
| SE536902C2 (sv) | Skalbar inmatning från spårat objekt i beröringsfritt användargränssnitt | |
| TW201303675A (zh) | 利用基於速度之演算法選擇之光學導覽 | |
| TW201312422A (zh) | 具軌跡偵測功能之光學觸控系統及方法 | |
| US9229586B2 (en) | Touch system and method for determining the distance between a pointer and a surface | |
| SE536989C2 (sv) | Förbättrad återkoppling i ett beröringsfritt användargränssnitt | |
| TW201800901A (zh) | 偵測動作資訊的方法及感光陣列 | |
| US20150334658A1 (en) | Affecting device action based on a distance of a user's eyes | |
| US20150363004A1 (en) | Improved tracking of an object for controlling a touchless user interface | |
| CN110308821B (zh) | 触控响应方法及电子设备 | |
| CN117953583A (zh) | 侦测动作信息的方法、感光数组及影像传感器 | |
| TWI464626B (zh) | 移動感測裝置以及移動感測方法 |