SE538451C2 - Improved tracking of an object for controlling a non-touch user interface - Google Patents

Improved tracking of an object for controlling a non-touch user interface Download PDF

Info

Publication number
SE538451C2
SE538451C2 SE1450769A SE1450769A SE538451C2 SE 538451 C2 SE538451 C2 SE 538451C2 SE 1450769 A SE1450769 A SE 1450769A SE 1450769 A SE1450769 A SE 1450769A SE 538451 C2 SE538451 C2 SE 538451C2
Authority
SE
Sweden
Prior art keywords
screen
illumination
computer device
control unit
camera
Prior art date
Application number
SE1450769A
Other languages
Swedish (sv)
Other versions
SE1450769A1 (en
Inventor
Cronholm Paul
Original Assignee
Crunchfish Ab
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority to US00077947A priority Critical patent/US3713165A/en
Priority to GB50046/70A priority patent/GB1285289A/en
Priority to FR7038150A priority patent/FR2073314A1/fr
Priority to NO04007/70A priority patent/NO127999B/no
Application filed by Crunchfish Ab filed Critical Crunchfish Ab
Priority to SE1450769A priority patent/SE538451C2/en
Publication of SE1450769A1 publication Critical patent/SE1450769A1/en
Publication of SE538451C2 publication Critical patent/SE538451C2/en

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • HELECTRICITY
    • H01ELECTRIC ELEMENTS
    • H01QANTENNAS, i.e. RADIO AERIALS
    • H01Q13/00Waveguide horns or mouths; Slot antennas; Leaky-waveguide antennas; Equivalent structures causing radiation along the transmission path of a guided wave
    • H01Q13/10Resonant slot antennas
    • H01Q13/106Microstrip slot antennas
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/002Specific input/output arrangements not covered by G06F3/01 - G06F3/16
    • G06F3/005Input arrangements through a video camera
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017Gesture based interaction, e.g. based on a set of recognized hand gestures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/97Determining parameters from multiple pictures

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Multimedia (AREA)
  • Waveguide Aerials (AREA)
  • Studio Devices (AREA)
  • Dental Prosthetics (AREA)
  • User Interface Of Digital Computer (AREA)

Description

FÖRBÄTTRAD SPÅRNING AV ETT OBJEKT FÖR STYRNING AV ETT BERÖRINGSFRITT ANVÄNDARGRÄNS SNITT TEKNISKT OMRÅDE Denna ansökan hänför sig till en metod, ett datorläsbart medium och en anordning för att åstadkomma förbättrad spårning av ett objekt, och i synnerhet till en metod, ett datorläsbart medium och en anordning för förbättrad spårning av ett objekt för styrning av ett beröringsfritt användargränssnitt. IMPROVED TRACKING OF AN OBJECT FOR CONTROLING AN TOUCH-FREE USER LIMIT CUT TECHNICAL FIELD This application relates to a method, a computer readable medium and a device for providing improved tracking of an object, and in particular to a method, a computer readable medium and a device for improved tracking of an object for controlling a non-contact user interface.

BAKGRUND Beröringsfria användargränssnitt har varit kända sedan slutet av 1990-talet och många lösningar har föreslagits på hur man kan spåra ett objekt. Några exempel på sådana system ges nedan. BACKGROUND Non-contact user interfaces have been known since the late 1990s and many solutions have been proposed on how to track an object. Some examples of such systems are given below.

Den amerikanska patentansökan publicerad som US2010294938A beskriver bl. a. en enhet för infraröd avkänning för att tillåta detektering av en placering för ett externt objekt, samt en mobilanordning som använder en sådan enhet och relaterade driftsoperationer. I en exemplifierande utföringsform innefattar avkänningsenheten en höljeskonstruktion av pyramidtyp med en central yta och flera yttre ytor som vardera sträcker sig på ett lutande sätt bort från den centrala ytan. Avkänningsenheten innefattar vidare flera fotosändare som var och en är placerad nära en respektive av de yttre ytorna och en fotomottagare som är placerade nära den centrala ytan, varvid respektive fotoelektrisk anordning är inställd att motsvara sin respektive yta. Avkänningsenheten manövreras så att ljus emitteras från fotosändarna, reflekteras av objektet och tas emot av fotomottagaren. Genom att behandla signaler från fotomottagaren som är indikativa för det mottagna ljuset fastställs det externa objektets placering. The US patent application published as US2010294938A describes i.a. a. an infrared sensing device for allowing the detection of a location for an external object, and a mobile device using such a device and related operations. In an exemplary embodiment, the sensing unit comprises a pyramid-type housing structure with a central surface and several outer surfaces, each of which extends obliquely away from the central surface. The sensing unit further comprises several photo transmitters each located near one and one of the outer surfaces and a photo receiver located near the central surface, each photoelectric device being set to correspond to its respective surface. The sensing unit is operated so that light is emitted from the photo transmitters, reflected by the object and received by the photo receiver. By processing signals from the photoreceiver that are indicative of the received light, the location of the external object is determined.

En nackdel är att belysningen kräver speciella fotosändare som är både kostsamma och svåra att införliva i en liten anordning. A disadvantage is that the lighting requires special photo transmitters that are both expensive and difficult to incorporate into a small device.

I synnerhet när det gäller kameror som verkar i det synliga ljusspektrumet medför användningen av speciella fotosändare och lampor nackdelar, då det ljus som tillhandahålls kan blända eller åtminstone störa en användare. Lösningen som tillhandahålls genom känd teknik är att använda infraröda fotosändare som emellertid alltjämt är problematiskt då de är kostsamma och svåra att införliva i (i synnerhet små) anordningar. Particularly in the case of cameras operating in the visible light spectrum, the use of special photoconductors and lamps has disadvantages, as the light provided can dazzle or at least disturb a user. The solution provided by the prior art is to use infrared photo transmitters which, however, are still problematic as they are expensive and difficult to incorporate into (particularly small) devices.

Det finns sålunda ett behov av en datoranordning som är i stånd att spåra ett objekt vid förhållanden av svagt ljus, som inte medför ökade kostnader och som är lätt att införliva också i små anordningar. Thus, there is a need for a computer device which is capable of tracking an object in low light conditions, which does not entail increased costs and which is easy to incorporate even in small devices.

SAMMANFATTNING Det är en aspekt av lärorna enligt föreliggande ansökan att lösa de problem som listats ovan genom att tillhandahålla en datoranordning som innefattar en skärm och en styrenhet, varvid styrenheten är anordnad att detektera och spåra ett objekt via en av en kamera tillhandahållen videoström och anpassa en belysning av nämnda skärm för att belysa objektet så att datoranordningen framgångsrikt kan spåra objektet, varvid datoranordningen ärkännetecknad avatt styrenheten vidare är anordnad att fastställa att objektet inte går att spåra vid ett rådande ljusförhållande och som svar därpå anpassa belysningen av skärmen, varvid belysningen av objektet tillhandahålles av belysning av skärmen. SUMMARY It is an aspect of the teachings of the present application to solve the problems listed above by providing a computer device comprising a screen and a control unit, the control unit being arranged to detect and track an object via a video stream provided by a camera and adapt a lighting of said screen for illuminating the object so that the computer device can successfully track the object, the computer device being characterized in that the control unit is further arranged to determine that the object cannot be tracked at a prevailing light condition and in response adjusting the illumination of the screen. screen lighting.

En sådan datoranordning är i stånd att ordentligt belysa ett objekt som skall spåras utan behov av ytterligare fotosändare. Such a computer device is capable of properly illuminating an object to be tracked without the need for additional photo transmitters.

I en utföringsform är styrenheten vidare anordnad att detektera ett avstånd till objektet som skall spåras och att anpassa belysningen av skärmen baserat på avståndet. In one embodiment, the control unit is further arranged to detect a distance to the object to be tracked and to adjust the illumination of the screen based on the distance.

I en utföringsform är styrenheten vidare anordnad att detektera ett omgivande ljusförhållande och att anpassa belysningen av skärmen baserat på det omgivande ljusförhållandet. In one embodiment, the control unit is further arranged to detect an ambient light condition and to adjust the illumination of the screen based on the ambient light condition.

I en utföringsform är styrenheten vidare anordnad att fastställa att det inte är möjligt att spåra objektet vid ett rådande ljusförhållande och som svar därpå anpassa belysningen av skärmen. In one embodiment, the control unit is further arranged to determine that it is not possible to track the object at a prevailing light condition and in response to this to adjust the illumination of the screen.

I en utföringsform är datoranordningen en mobil kommunikationsterminal. I en utföringsform är datoranordningen en surfplatta eller en (bärbar) dator. I en utföringsform är datoranordningen en spelkonsol. I en utföringsform är datoranordningen en mediaenhet såsom en TV-apparat eller ett mediasystem. In one embodiment, the computer device is a mobile communication terminal. In one embodiment, the computer device is a tablet or a (laptop) computer. In one embodiment, the computer device is a game console. In one embodiment, the computer device is a media unit such as a television set or a media system.

Det är också en aspekt av lärorna enligt föreliggande ansökan att lösa de problem som listats ovan genom att tillhandahålla en metod för användning i en datoranordning innefattande en skärm, varvid metoden innefattar att detektera och spåra ett objekt via en av en kamera tillhandahållen videoström och anpassa en belysning av skärmen att belysa objektet så att datoranordningen framgångsrikt kan spåra objektet, varvid metoden kännetecknas av att den vidare innefattar fastställning av att objektet inte går att spåra vid ett rådande ljusförhållande och som svar därpå anpassning av belysningen av skärmen, varvid belysningen av objektet tillhandahålles av belysning av skärmen. It is also an aspect of the teachings of the present application to solve the problems listed above by providing a method for use in a computer device comprising a screen, the method comprising detecting and tracking an object via a video stream provided by a camera and adapting a illuminating the screen to illuminate the object so that the computer device can successfully track the object, the method being characterized in that it further comprises determining that the object cannot be tracked at a prevailing light condition and in response adjusting the illumination of the screen, the lighting of the object being provided by screen lighting.

Det är vidare en aspekt av lärorna enligt föreliggande ansökan att lösa de problem som listats ovan genom att tillhandahålla ett datorläsbart medium innefattande instruktioner som när de laddas i och exekveras av en styrenhet, såsom en processor, i en datoranordning medför exekvering av en metod i enlighet med häri. It is further an aspect of the teachings of the present application to solve the problems listed above by providing a computer readable medium comprising instructions which when loaded and executed by a control unit, such as a processor, in a computer device result in execution of a method according to with here.

Uppfinnarna till föreliggande uppfinning har, efter kreativt och insiktsfullt resonemang, insett att genom att använda en kamera konstruerad att verka i det synliga ljusspektrumet kan det omgivande ljuset med fördel användas för att belysa objektet. Genom att komma till insikt om att belysningen som tillhandahålls av en (aktiv) skärm är en del av det omgivande ljuset och som sådan kan användas för att belysa objektet minskar dessutom, vilket är av största vikt, behovet av särskilda extra lampor. Genom att komma till denna sinnrika insikt övervann dessutom uppfinnarna den inom området gängse uppfattningen att för att minska energiförbrukningen skall belysningen av skärmen reduceras i mörka omgivningar eftersom belysningen som behövs för att visa innehållet urskiljbart, jämfört med en ljus miljö, minskas. Dessutom finns en väl inrotad vanföreställning inom området mot att använda stark belysning i en mörk omgivning då en klart upplyst skärm minskar en användares mörkerseende. The inventors of the present invention have, after creative and insightful reasoning, realized that by using a camera designed to operate in the visible light spectrum, the ambient light can be advantageously used to illuminate the object. By coming to the realization that the lighting provided by an (active) screen is part of the ambient light and as such can be used to illuminate the object, the need for special extra lamps is also reduced, which is of the utmost importance. By coming to this ingenious insight, the inventors also overcame the prevailing view in the field that in order to reduce energy consumption, the illumination of the screen should be reduced in dark environments as the illumination needed to display the content distinctly, compared to a bright environment, is reduced. In addition, there is a well-rooted delusion in the area towards using strong lighting in a dark environment as a brightly lit screen reduces a user's night vision.

Det sätt som lärs ut häri tillhandahåller sålunda en enkel lösning på ett lång-varigt problem och strider mot den rådande förutfattade meningen beträffande skärm-belysning. The method taught herein thus provides a simple solution to a long-standing problem and runs counter to the prevailing preconceived notion of screen lighting.

Lärorna häri finner användning i styrsystem för enheter med användargränssnitt såsom mobiltelefoner, smarttelefoner, pekplattor, datorer (bärbara och stationära), spelkonsoler och media- och andra informationsunderhållnings-anordningar. The teachings herein find use in control systems for devices with user interfaces such as mobile phones, smartphones, touchpads, computers (laptops and desktops), game consoles and media and other information entertainment devices.

Andra särdrag och fördelar hos de beskrivna utföringsformerna kommer att framgå av den följande detaljerade beskrivningen, av de bifogade osjälvständiga patentkraven samt av ritningarna. Generellt skall alla termer som används i patentkraven tolkas i enlighet med deras vanliga betydelse inom det tekniska området, om inte annat uttryckligen anges häri. Other features and advantages of the described embodiments will become apparent from the following detailed description, from the appended dependent claims, and from the drawings. In general, all terms used in the claims are to be construed in accordance with their usual meaning in the technical field, unless otherwise expressly stated herein.

Alla hänvisningar till "ett/en/det/den [element, anordning, komponent, organ, steg, etc.]" skall tolkas öppet som hänvisning till åtminstone ett exempel av elementet, anordningen, komponenten, organet eller steget, etc, om inget annat uttryckligen anges. Stegen i de olika metoderna som beskrivs häri behöver inte uttryckligen utföras i exakt den ordning som beskrivs, såvida detta inte uttryckligen anges. All references to "an element, device, component, organ, step, etc.]" shall be construed as referring to at least one example of the element, device, component, organ or step, etc., if no otherwise expressly stated. The steps in the various methods described herein need not be expressly performed in exactly the order described, unless expressly stated otherwise.

KORT BESKRIVNING AV RITNINGARNA Uppfinningen kommer att beskrivas mer i detalj med hänvisning till de bifogade ritningarna, där: Figurerna 1A, IB och 1C vardera visar en schematisk vy av en datoranordning i enlighet med lärorna häri; Figur 2 visar en schematisk vy av komponenterna hos en datoranordning i enlighet med lärorna häri; Figur 3 visar en schematisk vy av ett datorläsbart minne i enlighet med lärorna häri; Figurerna 4A, 4B och 4C visar ett exempel på en utföringsform av en datoranordning i enlighet med lärorna häri; och Figur 5 visar ett flödesschema som illustrerar en allmän metod i enlighet med en utföringsorm av lärorna häri. BRIEF DESCRIPTION OF THE DRAWINGS The invention will be described in more detail with reference to the accompanying drawings, in which: Figures 1A, 1B and 1C each show a schematic view of a computer device in accordance with the teachings herein; Figure 2 shows a schematic view of the components of a computer device in accordance with the teachings herein; Figure 3 shows a schematic view of a computer readable memory in accordance with the teachings herein; Figures 4A, 4B and 4C show an example of an embodiment of a computer device in accordance with the teachings herein; and Figure 5 shows a flow chart illustrating a general method in accordance with an embodiment of the teachings herein.

DETALJERAD BESKRIVNING De beskrivna utföringsformerna kommer nu att beskrivas mer ingående med hänvisning till de bifogade ritningarna, på vilka vissa utföringsformer av uppfinningen visas. Denna uppfinning kan emellertid utföras i många olika former och bör inte tokas såsom begränsad till utföringsformerna som anges häri; dessa utföringsformer tillhandahålls snarare som exempel för att denna beskrivning skall vara noggrann och fullständig och till fullo förmedla ramen för uppfinningen för fackmannen inom teknikområdet. Samma nummer hänvisar genomgående samma element. DETAILED DESCRIPTION The described embodiments will now be described in more detail with reference to the accompanying drawings, in which certain embodiments of the invention are shown. However, this invention may be embodied in many different forms and should not be construed as limited to the embodiments set forth herein; rather, these embodiments are provided by way of example in order that this description be accurate and complete and fully convey the scope of the invention to those skilled in the art. The same number refers to the same elements throughout.

Figur 1 visar allmänt en datoranordning 100 i enlighet med en utföringsform häri. I en utföringsform är datoranordningen 100 anordnad för nätverkskommunikation, antingen trådlös eller trådbunden. Exempel på en datoranordning 100 är: en person-dator, bordsdator eller bärbar dator, en surfplatta, en mobil kommunikationsterminal såsom en mobiltelefon, en smarttelefon, en personlig digital assistent och en spelkonsol. Tre utföringsformer kommer att exemplifieras och beskrivas såsom varande en smarttelefon i figur 1A, en bärbar dator i figur IB och en mediaenhet 100 i figur 1C. En mediaenhet anses vara en datoranordning inom ramen för denna ansökan med avseende på att den är anordnad att ta emot digitalt innehåll, behandla eller beräkna innehållet och presentera resulterande eller beräknade media, såsom bild(er) och/eller ljud. Figure 1 generally shows a computer device 100 in accordance with an embodiment herein. In one embodiment, the computer device 100 is provided for network communication, either wireless or wired. Examples of a computer device 100 are: a personal computer, desktop or laptop computer, a tablet, a mobile communication terminal such as a mobile phone, a smartphone, a personal digital assistant and a game console. Three embodiments will be exemplified and described as being a smartphone in Figure 1A, a laptop in Figure 1B and a media unit 100 in Figure 1C. A media device is considered to be a computer device within the scope of this application in that it is arranged to receive digital content, process or calculate the content and present resulting or computed media, such as image (s) and / or sound.

Med hänvisning till figur 1A innefattar en kommunikationsterminal i form av en smarttelefon 100 ett hölje 110, i vilket en skärm 120 är anordnad. I en utföringsform är skärmen 120 en pekskärm. I andra utföringsformer är skärmen 120 en icke-pekskärm. Smarttelefonen 100 innefattar vidare två knappar 130a, 130b. I denna utföringsform finns två knappar 130, men valfritt antal knappar är möjligt och beror på utformningen av smarttelefonen 100.1 en utföringsform är smarttelefonen 100 anordnad att visa och driva en virtuell knapp 135 på pekskärmen 120. Det skall noteras att antalet virtuella knappar 135 beror på utformningen av smarttelefonen 100 och en applikation som exekveras på smarttelefonen 100. Smarttelefonen 100 är också utrustad med en kamera 160. Kameran 160 är en digitalkamera som är anordnad att ta video- eller stillbilder genom att spela in bilder på en elektronisk bildsensor (ej visad). I en utföringsform är kameran 160 en extern kamera. I en utföringsform är kameran, som en möjlighet, ersatt av en källa som tillhandahåller en bildström. Referring to Figure 1A, a communication terminal in the form of a smartphone 100 includes a housing 110 in which a screen 120 is disposed. In one embodiment, the screen 120 is a touch screen. In other embodiments, the screen 120 is a non-touch screen. The smartphone 100 further includes two buttons 130a, 130b. In this embodiment there are two buttons 130, but any number of buttons is possible and depends on the design of the smartphone 100.1 one embodiment the smartphone 100 is arranged to display and operate a virtual button 135 on the touch screen 120. It should be noted that the number of virtual buttons 135 depends on the design of the smartphone 100 and an application executed on the smartphone 100. The smartphone 100 is also equipped with a camera 160. The camera 160 is a digital camera which is arranged to take video or still images by recording images on an electronic image sensor (not shown). In one embodiment, the camera 160 is an external camera. In one embodiment, the camera is, as a possibility, replaced by a source that provides an image stream.

Med hänvisning till figur IB innefattar en bärbar dator 100 en skärm 120 och ett hölje 110. Höljet innefattar en styrenhet eller CPU (ej visad) och en eller flera datorläsbara lagringsmedier (ej visade), såsom lagringsenheter och internt minne. Exempel på lagringsenheter är skivenheter eller hårddiskar. Den bärbara datorn 100 innefattar vidare åtminstone en dataport. Dataportar kan vara trådbundna och/eller trådlösa. Exempel på dataportar är USB- (Universal Serial Bus) portar, Ethernet-portar eller WiFi- (enligt IEEE-standard 802.11) portar. Dataportar är anordnade för att göra det möjligt för en bärbar dator 100 att anslutas till andra datoranordningar eller en server. Referring to Figure 1B, a laptop 100 includes a monitor 120 and a housing 110. The housing includes a controller or CPU (not shown) and one or more computer readable storage media (not shown), such as storage devices and internal memory. Examples of storage devices are disk drives or hard drives. The laptop 100 further includes at least one data port. Data ports can be wired and / or wireless. Examples of data ports are USB (Universal Serial Bus) ports, Ethernet ports or WiFi (according to IEEE standard 802.11) ports. Data ports are provided to enable a laptop 100 to connect to other computer devices or a server.

Den bärbara datorn 100 innefattar vidare åtminstone en inmatningsenhet såsom ett tangentbord 130. Andra exempel på inmatningsenheter är datormöss, pekplattor, pekskärmar eller joysticks för att nämna några. The laptop 100 further includes at least one input device such as a keyboard 130. Other examples of input devices are computer mice, touchpads, touch screens, or joysticks to name a few.

Den bärbara datorn 100 är vidare utrustad med en kamera 160. Kameran 160 är en digitalkamera som är anordnad att ta video- eller stillbilder genom att spela in bilder på en elektronisk bildsensor (ej visad). I en utföringsform är kameran 160 en extern kamera. I en utföringsform är kameran som ett alternativ ersatt av en källa som tillhandahåller en bildström. The laptop 100 is further equipped with a camera 160. The camera 160 is a digital camera which is arranged to take video or still images by recording images on an electronic image sensor (not shown). In one embodiment, the camera 160 is an external camera. In one embodiment, the camera is alternatively replaced by a source that provides an image stream.

Med hänvisning till figur 1C innefattar en mediaenhet, såsom en TV-apparat, TV, 100 en skärm 120 och ett hölje 110. Höljet innefattar en styrenhet eller CPU (ej visad) och en eller flera datorläsbara lagringsmedier (ej visade), såsom lagringsenheter och internt minne, för lagring av användarinställningar och styrmjukvara. Datoranordningen 100 kan vidare innefattar åtminstone en dataport (ej visad). Dataportar kan vara trådbundna och/eller trådlösa. Exempel på dataportar är USB- (Universal Serial Bus) portar, Ethernet-portar eller WiFi- (enligt IEEE-standard 802.11) portar. Sådana dataportar är anordnade för att göra det möjligt för TV:n 100 att anslutas till ett externt lagringsmedium, såsom en USB-sticka, eller att anslutas till andra datoranordningar eller en server. Referring to Figure 1C, a media unit, such as a television set, TV, 100 includes a monitor 120 and a housing 110. The housing includes a controller or CPU (not shown) and one or more computer readable storage media (not shown), such as storage units and internal memory, for storing user settings and control software. The computer device 100 may further comprise at least one data port (not shown). Data ports can be wired and / or wireless. Examples of data ports are USB (Universal Serial Bus) ports, Ethernet ports or WiFi (according to IEEE standard 802.11) ports. Such data ports are provided to enable the TV 100 to be connected to an external storage medium, such as a USB stick, or to be connected to other computer devices or a server.

TV:n 100 kan vidare innefatta en inmatningsenhet såsom åtminstone en knapp 130 eller en fjärrkontroll 130b för manövrering av TV:n 100. The TV 100 may further include an input unit such as at least one button 130 or a remote control 130b for operating the TV 100.

TV:n 100 är vidare utrustad med en kamera 160. Kameran 160 är en digitalkamera som är anordnad att ta video- eller stillbilder genom att spela in bilder på en elektronisk bildsensor (ej visad). I en utföringsform är kameran 160 en extern kamera. I en utföringsform är kameran som ett alternativ ersatt av en källa som tillhandahåller en bildström. The TV 100 is further equipped with a camera 160. The camera 160 is a digital camera which is arranged to take video or still images by recording images on an electronic image sensor (not shown). In one embodiment, the camera 160 is an external camera. In one embodiment, the camera is alternatively replaced by a source that provides an image stream.

Figur 2 visar en schematisk vy av den allmänna strukturen av en anordning i enlighet med figur 1. Anordningen 100 innefattar en styrenhet 210 som är ansvarig för den totala driften av datoranordningen 200 och som företrädesvis är implementerad av valfri kommersiellt tillgänglig CPU ("Central Processing Unit" eller centralprocessor), DSP ("Digital Signal Processor" eller signalprocessor) eller valfri annan elektronisk programmerbar logisk anordning. Styrenheten 210 är anordnad att läsa instruktioner från minnet 240 och exekvera dessa instruktioner till att styra driften av datoranordningen 100. Minnet 240 kan implementeras under användande av valfri allmänt känd teknik för datorläsbara minnen såsom ROM, RAM, SRAM, DRAM, CMOS, FLASH, DDR, SDRAM eller någon annan minnesteknik. Minnet 240 används för olika ändamål av styrenheten 210, varav ett av dem är för att lagra applikationsdata och program-instruktioner 250 för olika mjukvarumoduler i datoranordningen 200. Mjukvaru-modulerna omfattar ett realtidsoperativsystem, drivrutiner för ett användargränssnitt 220, en applikationshanterare liksom olika applikationer 250. Figure 2 shows a schematic view of the general structure of a device according to Figure 1. The device 100 comprises a control unit 210 which is responsible for the overall operation of the computer device 200 and which is preferably implemented by any commercially available CPU ("Central Processing Unit"). "or central processor), DSP (" Digital Signal Processor "or signal processor) or any other electronically programmable logic device. The controller 210 is arranged to read instructions from the memory 240 and execute these instructions to control the operation of the computer device 100. The memory 240 can be implemented using any generally known technology for computer readable memories such as ROM, RAM, SRAM, DRAM, CMOS, FLASH, DDR , SDRAM or any other memory technology. The memory 240 is used for various purposes by the controller 210, one of which is for storing application data and program instructions 250 for various software modules in the computer device 200. The software modules comprise a real-time operating system, drivers for a user interface 220, an application manager as well as various applications 250 .

Datoranordningen 200 innefattar vidare ett användargränssnitt 220, vilket i datoranordningen i figurerna 1A, IB och 1C består av skärmen 120 och knapparna 130, 135. The computer device 200 further comprises a user interface 220, which in the computer device in Figures 1A, 1B and 1C consists of the screen 120 and the buttons 130, 135.

Datoranordningen 200 kan vidare innefatta ett radiofrekvensgränssnitt 230, vilket är anpassat att tillåta datoranordningen att kommunicera med andra anordningar via ett radiofrekvensband genom användning av olika radiofrekvensteknologier. Exempel på sådana teknologier är IEEE 802.11, IEEE 802.15, ZigBee, WirelessHART, WIFI, Bluetooth®, W-CDMA/HSPA, GSM, UTRAN och LTE för att nämna några. The computer device 200 may further include a radio frequency interface 230, which is adapted to allow the computer device to communicate with other devices via a radio frequency band using various radio frequency technologies. Examples of such technologies are IEEE 802.11, IEEE 802.15, ZigBee, WirelessHART, WIFI, Bluetooth®, W-CDMA / HSPA, GSM, UTRAN and LTE to name a few.

Datoranordningen 200 är vidare utrustad med en kamera 260. Kameran 260 är en digitalkamera som är anordnad att ta video- och stillbilder genom att spela in bilder på en elektronisk bildsensor (ej visad). The computer device 200 is further equipped with a camera 260. The camera 260 is a digital camera which is arranged to take video and still images by recording images on an electronic image sensor (not shown).

Kameran 260 är operativt ansluten till styrenheten 210 för att förse styrenheten med en videoström 265, dvs. serien tagna bilder, för vidare behandling och om möjligt för användning i och/eller i enlighet med en eller flera applikationer 250. The camera 260 is operatively connected to the controller 210 to provide the controller with a video stream 265, i.e. series of images taken, for further processing and, if possible, for use in and / or in accordance with one or more applications 250.

I en utföringsform är kameran 260 en extern kamera eller källa till en bildström. In one embodiment, the camera 260 is an external camera or source of an image stream.

Hänvisningar till 'datorläsbart lagringsmedium', 'datorprogramprodukt', 'reellt/påtagligt/konkret utformat datorprogram' etc. eller en 'styrenhet', 'dator', 'processor' etc. skall förstås omfatta inte enbart datorer med olika arkitekturer såsom enkel / multi-processorarkitekturer och sekventiella (Von Neumann)/parallella arkitekturer utan också specialiserade kretsar såsom fältprogrammerbara grindmatriser (FPGA), applikationsspecifika kretsar (ASIC), signalbehandlingsanordningar och andra anordningar. Hänvisningar till datorprogram, instruktioner, kod etc. skall förstås omfatta mjukvara för en programmerbar processor eller hård mjukvara såsom, exempelvis, det programmerbara innehållet hos en hårdvaruanordning, huruvida instruktioner för en processor, eller konfigurationsinställningar för en fast-funktionsenhet, grindmatris eller programmerbar logikenhet etc. References to 'computer-readable storage medium', 'computer program product', 'real / tangible / concretely designed computer program' etc. or a 'control unit', 'computer', 'processor' etc. shall of course include not only computers with different architectures such as single / multi-processor architectures and sequential (Von Neumann) / parallel architectures but also specialized circuits such as field programmable gate arrays (FPGAs), application specific circuits (ASICs), signal processing devices and other devices . References to computer programs, instructions, code, etc. shall be understood to include software for a programmable processor or hardware such as, for example, the programmable contents of a hardware device, whether instructions for a processor, or configuration settings for a fixed function unit, gate array or programmable logic unit etc. .

Figur 3 visar en schematisk vy av ett datorläsbart medium såsom beskrivits ovan. Det datorläsbara mediet 30 är i denna utföringsform en dataskiva 30.1 en utföringsform är dataskivan 30 en magnetisk datalagringsskiva. Dataskivan 30 är anordnad att bära instruktioner 31 som när laddade i en styrenhet, såsom en processor, exekverar en metod eller ett förfarande i enlighet med utföringsformerna som beskrivs ovan. Dataskivan 30 är anordnad att anslutas till eller inuti och läsas av en låsanordning 32, för inmatning av instruktionerna i styrenheten. Ett exempel på en låsanordning 32 i kombination med en (eller flera) dataskiva (dataskivor) 30 är en hårddisk. Det skall noteras att det datorläsbara mediet även kan vara andra medier såsom kompaktdiskar, digitala videodiskar, flashminnen eller andra, ofta använda minnesteknologier. Figure 3 shows a schematic view of a computer readable medium as described above. The computer readable medium 30 is in this embodiment a data disk 30.1 an embodiment the data disk 30 is a magnetic data storage disk. The data disk 30 is arranged to carry instructions 31 which, when loaded in a control unit, such as a processor, execute a method or a method in accordance with the embodiments described above. The data disk 30 is arranged to be connected to or inside and read by a locking device 32, for inputting the instructions in the control unit. An example of a locking device 32 in combination with one (or more) data disk (s) 30 is a hard disk. It should be noted that the computer readable medium may also be other media such as compact discs, digital video discs, flash memories or other, frequently used memory technologies.

Instruktionerna 31 kan också laddas ner till en anordning som läser datoruppgifter 34, såsom en bärbar dator eller annan anordning i stånd att läsa datorkodad data på ett datorläsbart medium genom att innefatta instruktionerna 31 i en datorläsbar signal 33 som överförs via ett trådlöst (eller trådbundet) gränssnitt (exempelvis via internet) till anordningen som läser datoruppgifter 34 för inmatning av instruktionerna 31 i en styrenhet. I en dylik utföringsform är den datorläsbara signalen 33 en typ av ett datorläsbart medium 30. The instructions 31 may also be downloaded to a device which reads computer data 34, such as a laptop or other device capable of reading computer coded data on a computer readable medium by including the instructions 31 in a computer readable signal 33 transmitted via a wireless (or wired) interface (for example via the Internet) to the device which reads computer data 34 for inputting the instructions 31 in a control unit. In such an embodiment, the computer readable signal 33 is a type of a computer readable medium 30.

Instruktionerna kan lagras i ett minne (ej explicit visat i figur 3, men betecknat 240 i figur 2) hos den bärbara datorn 34. The instructions can be stored in a memory (not explicitly shown in Figure 3, but designated 240 in Figure 2) of the laptop 34.

Hänvisningar till datorprogram, instruktioner, kod etc. skall förstås att omfatta mjukvara för en programmerbar processor eller hård mjukvara såsom exempelvis det programmerbara innehållet hos en hårdvaruanordning, huruvida instruktioner för en processor, eller konfigurationsinställningar för en fast-funktionsanordning, grindmatris eller programmerbar logikenhet etc. References to computer programs, instructions, code, etc. are to be understood as including software for a programmable processor or hardware such as the programmable contents of a hardware device, whether instructions for a processor, or configuration settings for a fixed function device, gate array or programmable logic unit etc.

Ett förbättrat sätt för spårning av ett objekt kommer att beskrivas nedan med hänvisning till bifogade figurer. Exemplet kommer att illustreras med fokus på den av en skärm tillhandahållna resulterande belysningen, men det skall stå klart att behand-lingen delvis eller helt och hållet utförs i en datoranordning innefattande en styrenhet såsom beskrivs i det föregående med hänvisning till figurerna 1 och 2 eller förmås utföras genom att exekvera instruktionerna lagrade på ett datorläsbart medium såsom beskrivs med hänvisning till figur 3. An improved way of tracking an object will be described below with reference to the accompanying figures. The example will be illustrated with a focus on the resulting illumination provided by a screen, but it should be understood that the treatment is carried out in part or in whole in a computer device comprising a control unit as described above with reference to Figures 1 and 2 or is made performed by executing the instructions stored on a computer readable medium as described with reference to Figure 3.

Figur 4A visar ett exempel på en datoranordning, i det här exemplet en bärbar dator 100 som i figur IB, som är anordnad att detektera och spåra ett objekt, såsom en hand H, via en av en kamera 160 tillhandahållen videoström. Den bärbara datorn har en skärm 120, på vilken objekt 135 visas. Skärmen är inställd att stråla eller belysas på en initial (eller normal) nivå. I figur 4A indikeras den initiala belysningen med streckade linjer hänvisade till som IL1. Den initiala belysningsnivån är beroende av ett antal faktorer som är uppenbara för en fackman och som också kan vara användarkonfigurer-bara. Figure 4A shows an example of a computer device, in this example a laptop 100 as in Figure 1B, which is arranged to detect and track an object, such as a hand H, via a video stream provided by a camera 160. The laptop has a screen 120, on which object 135 is displayed. The screen is set to radiate or illuminate at an initial (or normal) level. Figure 4A indicates the initial illumination with dashed lines referred to as IL1. The initial illumination level depends on a number of factors which are obvious to a person skilled in the art and which can also be user-configurable.

I figur 4A är handen på ett avstånd Dl från skärmen. I exemplet i figur 4A antas att det omgivande ljusförhållandet är tillräckligt ljust för att ordentligt belysa handen H så att kameran och styrenheten som använder de associerade datorinstruk-tionerna kan spåra handen H. Hur ett dylikt objekt H detekteras och spåras beskrivs i svensk patentansökan SE 1250910-5 och kommer inte att diskuteras i detalj i föreliggande ansökan. För fler detaljer avseende detta hänvisas till nämnda svenska patentansökan. Det skall emellertid noteras att lärorna i föreliggande ansökan kan implementeras genom användning av andra spårningssätt än som beskrivs i svensk patentansökan SE 1250910-5. In Figure 4A, the hand is at a distance D1 from the screen. In the example in figure 4A it is assumed that the ambient light condition is bright enough to properly illuminate the hand H so that the camera and control unit using the associated computer instructions can track the hand H. How such an object H is detected and tracked is described in Swedish patent application SE 1250910 -5 and will not be discussed in detail in the present application. For more details regarding this, reference is made to the said Swedish patent application. It should be noted, however, that the teachings in the present application can be implemented by using other tracking methods than those described in Swedish patent application SE 1250910-5.

I exemplet i figurerna 4A och 4B är det omgivande ljusförhållandet inte tillräckligt för att med framgång spåra ett detekterat objekt, såsom handen H, när handen H placeras på större avstånd, såsom avståndet D2, från skärmen 120. In the example of Figures 4A and 4B, the ambient light condition is not sufficient to successfully track a detected object, such as the hand H, when the hand H is placed at a greater distance, such as the distance D2, from the screen 120.

I en utföringsform är den bärbara datorn 100 anordnad att detektera att ett objekt förekommer framför skärmen 120/kameran 160 genom att analysera den tillhandahållna bildströmmen. In one embodiment, the laptop 100 is arranged to detect that an object is present in front of the screen 120 / camera 160 by analyzing the provided image stream.

Ett sätt att detektera ett objekt bygger på det faktum att ett objekt som skall spåras mest sannolikt inte är statiskt placerat framför kameran 160 och rörelse kan sålunda detekteras genom att det sker ändringar mellan bilderna i bildströmmen som utgör videoströmmen. One way of detecting an object is based on the fact that an object to be tracked is most likely not statically placed in front of the camera 160 and motion can thus be detected by changes between the images in the image stream constituting the video stream.

Eftersom det endast är nödvändigt för styrenheten att detektera ändringar för att fastställa att det förekommer rörelse av ett objekt och därigenom detektera ett objekt (såsom varande området där ändringarna detekteras) kan det ljus som krävs vara mindre än vad som behövs för att faktiskt spåra ett objekt. Vid spårning av ett objekt behövs fler detaljer om objektet för att fastställa hur objektet rör sig och att det är det objekt som spåras som faktiskt rör sig. Since it is only necessary for the control unit to detect changes to determine that there is movement of an object and thereby detect an object (such as the area where the changes are detected), the light required may be less than what is needed to actually track an object. . When tracking an object, more details about the object are needed to determine how the object is moving and that it is the object being tracked that is actually moving.

Vissa faktorer påverkar hur väl ett objekt kan detekteras. Exempel på sådana faktorer är färg, reflexion och struktur (skarpa eller jämna kanter) hos objektet. I ett dåligt upplyst rum är det exempelvis lättare att detektera ett vitt objekt än ett svart objekt. Some factors affect how well an object can be detected. Examples of such factors are color, reflection and structure (sharp or smooth edges) of the object. In a poorly lit room, for example, it is easier to detect a white object than a black object.

När det blir omöjligt att spåra objektet H under användande av den av de omgivande ljusförhållandena tillhandhållna belysningen, anordnas den bärbara datorn 100 att anpassa belysningen hos skärmen 120 för att öka belysningen och därigenom det omgivande ljuset för att bättre belysa handen H och möjliggöra framgångsrik spårning av objektet. When it becomes impossible to track the object H using the illumination provided by the ambient light conditions, the laptop 100 is arranged to adjust the illumination of the screen 120 to increase the illumination and thereby the ambient light to better illuminate the hand H and enable successful tracking of the object.

Under hänvisning till figur 4B är den bärbara datorn 100 anordnad att detektera att handen H är på ett avstånd D2 från skärmen och som svar därpå anpassa belysningen av skärmen 120.1 figur 4B indikeras detta genom längre streckade linjer som utgår från skärmen 120 och den ökade belysningen betecknas IL2. Referring to Figure 4B, the laptop 100 is arranged to detect that the hand H is at a distance D2 from the screen and in response adjust the illumination of the screen 120.1 Figure 4B this is indicated by longer dashed lines emanating from the screen 120 and the increased illumination is designated IL2.

Genom att öka belysningen hos skärmen förbättras det omgivande ljusförhållandet och den bärbara datorn 100 är i stånd att med framgång spåra handen H för att ta emot styrinmatning som en del av användargränssnittet hos den bärbara datorn 100. By increasing the illumination of the screen, the ambient light conditions are improved and the laptop 100 is able to successfully track the hand H to receive control input as part of the user interface of the laptop 100.

I exemplen enligt figurerna 4A och 4B detekterar styrenheten att handen H förflyttas bort från skärmen 120 och ökar som svar därpå belysningen av skärmen 120. In the examples of Figures 4A and 4B, the controller detects that the hand H is moved away from the screen 120 and in response increases the illumination of the screen 120.

Med hänvisning till figur 4C är den bärbara datorn 100 anordnad att detektera att handen H är detekterbar men inte spårbar och att som svar därpå anpassa belysningen av skärmen 120. Denna bestämning kan göras genom att mäta det omgivande ljusförhållandet, exempelvis genom analys av den av kameran 160 tillhandahållna videoströmmen. I figur 4B indikeras detta genom längre streckade linjer som utgår från skärmen 120 och den ökade belysningen betecknas IL2. Referring to Figure 4C, the laptop 100 is arranged to detect that the hand H is detectable but not traceable and, in response, to adjust the illumination of the screen 120. This determination can be made by measuring the ambient light ratio, for example by analyzing it by the camera. 160 provided video stream. In Figure 4B, this is indicated by longer dashed lines starting from the screen 120 and the increased illumination is denoted IL2.

Vad gäller exemplen i figurerna 4A och 4C är skärmen 120 initialt vid en första (initial) belysning IL1 (figur 4A), då det antingen fastställs (såsom förklarats ovan) att belysningen inte är tillräcklig eller att de omgivande ljusförhållandena ändras och blir otillräckliga. Figur 4C illustrerar det otillräckliga ljusförhållandet genom att vara skuggad. Den bärbara datorn 100 är anordnad att detektera att ljusförhållandet inte är tillräckligt och som svar därpå öka belysningen av skärmen 120.1 figur 4C indikeras detta genom längre streckade linjer som utgår från skärmen 120 och den ökade belysningen betecknas IL3. In the examples of Figures 4A and 4C, the screen 120 is initially at a first (initial) illumination IL1 (Figure 4A), when it is either determined (as explained above) that the illumination is insufficient or that the ambient light conditions change and become insufficient. Figure 4C illustrates the insufficient light condition by being shaded. The laptop 100 is arranged to detect that the light condition is not sufficient and in response to this increase the illumination of the screen 120.1 Figure 4C this is indicated by longer dashed lines starting from the screen 120 and the increased illumination is denoted IL3.

I en utföringsform är den bärbara datorn 100 anordnad att fastställa att objektet inte kan spåras genom att försöka utföra ett spårningsförfarande utan framgång och som svar därpå öka belysningen av skärmen 120. Dylika spårningsöfrfaranden beskrivs i, men är inte begränsade till, den svenska patentansökan SE 1250910-5 och kommer inte att diskuteras i detalj i föreliggande ansökan. In one embodiment, the laptop 100 is arranged to determine that the object cannot be tracked by attempting to perform a tracking procedure without success and in response increase the illumination of the screen 120. Such tracking procedures are described in, but are not limited to, Swedish patent application SE 1250910 -5 and will not be discussed in detail in the present application.

I en utföringsform är den bärbara datorn 100 sålunda anordnad att detektera ett objekt och fastställa att objektet inte kan spåras under rådande ljusförhållanden (eventuellt under användning av initial belysning IL1), på grundval av åtminstone något av alternativen att mäta det omgivande ljusförhållandet, detektera ett avstånd och/eller fastställa att ett spårningsförfarande är utan framgång och som svar därpå öka belysningen av skärmen 120. Thus, in one embodiment, the laptop 100 is arranged to detect an object and determine that the object cannot be tracked under prevailing light conditions (possibly using initial illumination IL1), based on at least one of the options to measure the ambient light condition, detect a distance and / or determining that a tracking procedure is unsuccessful and in response increasing the illumination of the screen 120.

I en utföringsform är den bärbara datorn 100 anordnad att stegvis eller linjärt justera belysningen av skärmen 120 till dess och/eller medan objektet som skall spåras är i stånd att spåras med framgång, exempelvis genom justering av belysningen av skärmen 120 så att objektet är klart urskiljbart, vilket kan fastställas genom analys av bilden/bilderna i videoströmmen. In one embodiment, the laptop 100 is arranged to stepwise or linearly adjust the illumination of the screen 120 until and / or while the object to be tracked is able to be tracked successfully, for example by adjusting the illumination of the screen 120 so that the object is clearly distinguishable. , which can be determined by analyzing the image (s) in the video stream.

Det skall noteras att även om anpassningen som grundar sig på ljusförhållande och anpassningen som grundar sig på avstånd beskrivs separat i det ovanstående kan de båda kombineras till en anpassning som grundar sig på både avståndet och ljusförhållandet. Anpassningen som grundar sig på bestämningen huruvida objektet som skall spåras kan spåras kan också kombineras med anpassningen som grundar sig på avstånd, anpassningen som grundar sig på ljusförhållande eller en kombination av dessa. It should be noted that although the adaptation based on light ratio and the adaptation based on distance are described separately in the above, the two can be combined into an adaptation based on both the distance and the light ratio. The adaptation based on the determination of whether the object to be tracked can be traced can also be combined with the adaptation based on distance, the adaptation based on light conditions or a combination of these.

Såsom nämnts ovan beror urskiljbarheten av ett objekt på ett antal faktorer. I en utföringsform är den bärbara datorn 100 anordnad att lagra en utseendeprofil för en användares föredragna styrobjekt eller objekt som skall spåras. Såsom användarens hand eller finger. De lagrade faktorerna kan hänföra sig till färg, reflekterande särdrag och/eller struktur. Genom att ha tillgång till information om objektet som skall spåras och hur lätt det kan urkiljas kan belysningsnivå, eventuellt den initiala belysningsnivån, anpassas för att möjliggöra en framgångsrik detektering och spårning av ett objekt utan att behöva fastställa en lämplig belysningsnivå genom att pröva sig fram. Detta kan exempelvis utföras när en ny användare loggar in på eller detekteras av datoranordningen. As mentioned above, the distinguishability of an object depends on a number of factors. In one embodiment, the laptop 100 is arranged to store an appearance profile of a user's preferred control objects or objects to be tracked. Such as the user's hand or finger. The stored factors may relate to color, reflective features and / or structure. By having access to information about the object to be traced and how easily it can be distinguished, the illumination level, possibly the initial illumination level, can be adjusted to enable a successful detection and tracing of an object without having to determine an appropriate illumination level by testing. This can be done, for example, when a new user logs in or is detected by the computer device.

Den lagrade utseendeprofilen kan skilja sig åt beroende på det omgivande ljusförhållandet och den bärbara datorn 100 kan anordnas att ta hänsyn till det omgivande ljusförhållandet vid fastställande av den initiala belysningsnivån (IL1). The stored appearance profile may differ depending on the ambient light condition, and the laptop 100 may be arranged to take the ambient light condition into account when determining the initial illumination level (IL1).

I en utföringsform är den bärbara datorn 100 anordnad att belysa skärmen 120 vid den ökade belysningsnivån IL2, IL3 under en första tidsperiod och att när den första tidsperioden har förflutit belysa skärmen 120 vid den initiala belysningsnivån IL1. Exempel på den första tidsperioden är i storleksordningen 1 till 10 sekunder, 1 till 5 sekunder, 1 sekund, 2 sekunder eller 3 sekunder. In one embodiment, the laptop 100 is arranged to illuminate the screen 120 at the increased illumination level IL2, IL3 during a first time period and to illuminate the screen 120 at the initial illumination level IL1 when the first time period has elapsed. Examples of the first time period are in the order of 1 to 10 seconds, 1 to 5 seconds, 1 second, 2 seconds or 3 seconds.

Figur 5 visar ett flödesschema av en allmän metod i enlighet med lärorna häri. En datoranordning detekterar och spårar 510 ett objekt, såsom en hand. Datoranordningen fastställer att ett objekt är otillräckligt belyst 520 och anpassar som svar därpå belysningen av skärmen 530. Belysningen av objektet kan fastställas på grundval av avståndet 523, det omgivande ljusförhållandet 526 eller en bildanalys av det detekterade objektet 529. Figure 5 shows a flow chart of a general method in accordance with the teachings herein. A computer device detects and tracks 510 an object, such as a hand. The computer device determines that an object is insufficiently illuminated 520 and in response adjusts the illumination of the screen 530. The illumination of the object can be determined on the basis of the distance 523, the ambient light ratio 526 or an image analysis of the detected object 529.

Uppfinningen lär sålunda ut att datoranordningen kan använda belysningen jämte ljusförhållandet hos skärmen för att säkerställa att belysningen av objektet som skall spåras är tillräckligt för att spåra objektet och för att anpassa belysningen i enlighet därmed. The invention thus teaches that the computer device can use the lighting as well as the lighting condition of the screen to ensure that the lighting of the object to be tracked is sufficient to track the object and to adjust the lighting accordingly.

Lärorna häri tillhandahåller fördelen att ett objekt kan spåras även vid dåligt upplysta förhållanden och utan att fordra dyr utrustning. The teachings herein provide the advantage that an object can be tracked even in poorly lit conditions and without requiring expensive equipment.

En annan fördel ligger däri att lärorna häri rentav kan implementeras i befintliga anordningar genom en mjukvaruuppgradering. Another advantage is that the teachings herein can even be implemented in existing devices through a software upgrade.

Uppfinningen har i huvudsak beskrivits ovan med hänvisning till ett fåtal utföringsformer. Det är emellertid lätt för en fackman inom området att inse att andra utföringsformer än de som beskrivits ovan likaså är möjliga inom ramen för uppfinningen såsom den definieras av de bifogade patentkraven. The invention has mainly been described above with reference to a few embodiments. However, it is easy for a person skilled in the art to realize that embodiments other than those described above are also possible within the scope of the invention as defined by the appended claims.

Claims (9)

1. Datoranordning (100, 200) innefattande en skärm (120) och en styrenhet (210), varvid styrenheten (210) är anordnad att: detektera och spåra ett objekt (H) via en av en kamera (160, 260) tillhandahållen videoström (265) och anpassa en belysning (IL1, IL2, IL3) av nämnda skärm (120) för att belysa objektet (H) så att datoranordningen framgångsrikt kan spåra objektet (H), varvid datoranordningen (100, 200) är kännetecknad av att styrenheten (210) vidare är anordnad att fastställa att objektet (H) är detekterbar men inte går att spåra vid ett rådande ljusförhållande och som svar därpå anpassa belysningen (IL1, IL2, IL3) av skärmen (120), varvid belysningen av objektet (H) tillhandahålles av belysning av skärmen (120).A computer device (100, 200) comprising a screen (120) and a control unit (210), the control unit (210) being arranged to: detect and track an object (H) via a video stream provided by a camera (160, 260) (265) and adjusting an illumination (IL1, IL2, IL3) of said screen (120) to illuminate the object (H) so that the computer device can successfully track the object (H), the computer device (100, 200) being characterized in that the control unit (210) is further arranged to determine that the object (H) is detectable but can not be detected at a prevailing light condition and in response to this to adjust the illumination (IL1, IL2, IL3) of the screen (120), the illumination of the object (H) provided by illumination of the screen (120). 2. Datoranordningen (100, 200) enligt krav 1, varvid styrenheten (210) vidare är anordnad att detektera ett avstånd (Dl, D2) till objektet som skall spåras (H) och att anpassa belysningen (IL1, IL2, IL3) av skärmen (120) på grundval av avståndet (Dl, D2), så att om styrenheten detekterar ett ökat avstånd, ökas belysningen.The computer device (100, 200) according to claim 1, wherein the control unit (210) is further arranged to detect a distance (D1, D2) to the object to be tracked (H) and to adjust the illumination (IL1, IL2, IL3) of the screen. (120) on the basis of the distance (D1, D2), so that if the control unit detects an increased distance, the illumination is increased. 3. Datoranordningen (100, 200) enligt krav 1 eller 2, varvid styrenheten (210) vidare är anordnad att detektera ett omgivande ljusförhållande och att anpassa belysningen (IL1, IL2, IL3) av skärmen (120) på grundval av det omgivande ljusförhållandet.The computer device (100, 200) according to claim 1 or 2, wherein the control unit (210) is further arranged to detect an ambient light condition and to adjust the illumination (IL1, IL2, IL3) of the screen (120) on the basis of the ambient light condition. 4. Datoranordningen (100, 200) enligt krav 1, varvid styrenheten (210) vidare är anordnad att dynamiskt anpassa belysningen (IL1, IL2, IL3) av skärmen (120) till dess att objektet (H) är klart urskiljbart.The computer device (100, 200) according to claim 1, wherein the control unit (210) is further arranged to dynamically adjust the illumination (IL1, IL2, IL3) of the screen (120) until the object (H) is clearly distinguishable. 5. Datoranordningen (100, 200) enligt något av föregående krav vidare innefattande ett minne (240), och varvid styrenheten (210) vidare är anordnad att i minnet lagra en utseendeprofil för ett känt objekt som skall spåras och anpassa belysningen (IL1, IL2, IL3) av skärmen (120) på grundval av den lagrade utseendeprofilen.The computer device (100, 200) according to any one of the preceding claims further comprising a memory (240), and wherein the control unit (210) is further arranged to store in the memory an appearance profile of a known object to be tracked and to adapt the lighting (IL1, IL2 , IL3) of the screen (120) based on the stored appearance profile. 6. Datoranordningen (100, 200) enligt krav 5, varvid den lagrade utseendeprofilen är associerad med ett omgivande ljusförhållande.The computer device (100, 200) of claim 5, wherein the stored appearance profile is associated with an ambient light condition. 7. Datoranordningen (100, 200) enligt något av föregående krav, varvid styrenheten (210) vidare är anordnad att belysa skärmen (120) vid en anpassad belysningsnivå (IL2, IL3) under en första tidsperiod och när den första tidsperioden har förflutit belysa skärmen (120) vid en initial belysningsnivå (IL1).The computer device (100, 200) according to any one of the preceding claims, wherein the control unit (210) is further arranged to illuminate the screen (120) at an adapted illumination level (IL2, IL3) during a first time period and when the first time period has elapsed illuminating the screen. (120) at an initial illumination level (IL1). 8. Metod för användning i en datoranordning (100, 200) innefattande en skärm (120), varvid metoden innefattar att: detektera och spåra ett objekt (H) via en av en kamera (160, 260) tillhandahållen videoström (265) och anpassa en belysning (IL1, IL2, IL3) av skärmen (120) att belysa objektet (H) så att datoranordningen framgångsrikt kan spåra objektet (H), varvid metoden kännetecknas av att den vidare innefattar fastställning av att objektet (H) inte går att spåra vid ett rådande ljusförhållande och som svar därpå anpassning av belysningen (IL1, IL2, IL3) av skärmen (120), varvid belysningen av objektet (H) tillhandahålles av belysning av skärmen (120).A method of use in a computer device (100, 200) comprising a screen (120), the method comprising: detecting and tracking an object (H) via a video stream (265) provided by a camera (160, 260) and adapting an illumination (IL1, IL2, IL3) of the screen (120) to illuminate the object (H) so that the computer device can successfully track the object (H), the method being characterized in that it further comprises determining that the object (H) cannot be traced at a prevailing light condition and in response thereto adjusting the illumination (IL1, IL2, IL3) of the screen (120), the illumination of the object (H) being provided by illumination of the screen (120). 9. Datorläsbart lagringsmedium (40) kodat med instruktioner (41) som, när laddade och exekverade på en processor, föranleder metoden enligt krav 8 att utföras.Computer readable storage medium (40) encoded with instructions (41) which, when loaded and executed on a processor, cause the method of claim 8 to be performed.
SE1450769A 2013-01-22 2013-01-22 Improved tracking of an object for controlling a non-touch user interface SE538451C2 (en)

Priority Applications (5)

Application Number Priority Date Filing Date Title
US00077947A US3713165A (en) 2013-01-22 1970-10-05 Antenna for strip transmission lines
GB50046/70A GB1285289A (en) 2013-01-22 1970-10-21 An antenna for a strip transmission line
FR7038150A FR2073314A1 (en) 2013-01-22 1970-10-22
NO04007/70A NO127999B (en) 2013-01-22 1970-10-22
SE1450769A SE538451C2 (en) 2013-01-22 2013-01-22 Improved tracking of an object for controlling a non-touch user interface

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
SE1450769A SE538451C2 (en) 2013-01-22 2013-01-22 Improved tracking of an object for controlling a non-touch user interface

Publications (2)

Publication Number Publication Date
SE1450769A1 SE1450769A1 (en) 2014-07-23
SE538451C2 true SE538451C2 (en) 2016-07-05

Family

ID=20299216

Family Applications (1)

Application Number Title Priority Date Filing Date
SE1450769A SE538451C2 (en) 2013-01-22 2013-01-22 Improved tracking of an object for controlling a non-touch user interface

Country Status (5)

Country Link
US (1) US3713165A (en)
FR (1) FR2073314A1 (en)
GB (1) GB1285289A (en)
NO (1) NO127999B (en)
SE (1) SE538451C2 (en)

Families Citing this family (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4070676A (en) * 1975-10-06 1978-01-24 Ball Corporation Multiple resonance radio frequency microstrip antenna structure
US4047179A (en) * 1976-05-03 1977-09-06 Raytheon Company IFF antenna arrangement
FR2481526A1 (en) * 1980-04-23 1981-10-30 Trt Telecom Radio Electr ANTENNA WITH THIN STRUCTURE
US4518967A (en) * 1982-03-05 1985-05-21 Ford Aerospace & Communications Corporation Tapered-width leaky-waveguide antenna
GB2212665B (en) * 1987-11-23 1991-09-04 Gen Electric Co Plc A slot antenna
DE3808401A1 (en) * 1988-03-12 1989-09-21 Blaupunkt Werke Gmbh VEHICLE WINDOW WASHER
US5075647A (en) * 1990-05-16 1991-12-24 Universities Research Association, Inc. Planar slot coupled microwave hybrid
FR2680283B1 (en) * 1991-08-07 1993-10-01 Alcatel Espace MINIATURIZED ELEMENTARY RADIOELECTRIC ANTENNA.
FR2705167B1 (en) * 1993-05-11 1995-08-04 France Telecom BROADBAND PLATED ANTENNA WITH REDUCED SIZE, AND CORRESPONDING TRANSMIT / RECEIVING DEVICE.
US6043786A (en) * 1997-05-09 2000-03-28 Motorola, Inc. Multi-band slot antenna structure and method
JP2010050700A (en) * 2008-08-21 2010-03-04 Advanced Telecommunication Research Institute International Antenna device, and array antenna device with the same

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
BE513377A (en) * 1951-07-21
US3031666A (en) * 1955-06-06 1962-04-24 Sanders Associates Inc Three conductor planar antenna
US2993205A (en) * 1955-08-19 1961-07-18 Litton Ind Of Maryland Inc Surface wave antenna array with radiators for coupling surface wave to free space wave
US2994083A (en) * 1960-05-24 1961-07-25 Sanders Associates Inc High frequency transmission line coupling device
US3218644A (en) * 1963-06-19 1965-11-16 Collins Radio Co Frequency independent slot antenna
US3518688A (en) * 1965-11-22 1970-06-30 Itt Microwave strip transmission line adapted for integral slot antenna
US3524189A (en) * 1966-11-09 1970-08-11 Us Army Slotted waveguide antenna array providing dual frequency operation
US3524190A (en) * 1967-11-20 1970-08-11 Ryan Aeronautical Co Extendable radio frequency transmission line and antenna structure
US3530478A (en) * 1968-03-27 1970-09-22 Us Navy Frequency independent log periodic slot multi-mode antenna array

Also Published As

Publication number Publication date
NO127999B (en) 1973-09-10
SE1450769A1 (en) 2014-07-23
US3713165A (en) 1973-01-23
FR2073314A1 (en) 1971-10-01
GB1285289A (en) 1972-08-16

Similar Documents

Publication Publication Date Title
SE538451C2 (en) Improved tracking of an object for controlling a non-touch user interface
US9471153B1 (en) Motion detection systems for electronic devices
US8766162B2 (en) Ambient light based gesture detection
KR102011169B1 (en) Generation of depth images based upon light falloff
US9124685B2 (en) Portable device including control actions dependent on a user looking at a touchscreen
US9733763B2 (en) Portable device using passive sensor for initiating touchless gesture control
US10073541B1 (en) Indicators for sensor occlusion
US9513720B2 (en) Stylus detecting device and stylus detecting method
US11094267B2 (en) Proximity detection method, storage medium, and electronic device
US20140168054A1 (en) Automatic page turning of electronically displayed content based on captured eye position data
KR20160108388A (en) Eye gaze detection with multiple light sources and sensors
US9329684B2 (en) Eye tracking with detection of adequacy of lighting
US9223415B1 (en) Managing resource usage for task performance
TWI520033B (en) Optical navigation utilizing speed based algorithm selection
SE536902C2 (en) Scalable input from tracked object in touch-free user interface
TW201312422A (en) Optical touch-control system with track detecting function and method thereof
TW201800901A (en) Method and pixel array for detecting gesture
CN104937522A (en) Improved feedback in touchless user interface
US20150334658A1 (en) Affecting device action based on a distance of a user's eyes
CN107563259B (en) Method for detecting action information, photosensitive array and image sensor
US9229586B2 (en) Touch system and method for determining the distance between a pointer and a surface
US20150363004A1 (en) Improved tracking of an object for controlling a touchless user interface
TWI479363B (en) Portable computer having pointing function and pointing system
TWI464626B (en) Displacement detecting apparatus and displacement detecting method
CN117953583A (en) Method for detecting motion information, photosensitive array and image sensor