NL2022858B1 - Werkwijze en inrichting en systeem met dubbele muis ondersteuning - Google Patents

Werkwijze en inrichting en systeem met dubbele muis ondersteuning Download PDF

Info

Publication number
NL2022858B1
NL2022858B1 NL2022858A NL2022858A NL2022858B1 NL 2022858 B1 NL2022858 B1 NL 2022858B1 NL 2022858 A NL2022858 A NL 2022858A NL 2022858 A NL2022858 A NL 2022858A NL 2022858 B1 NL2022858 B1 NL 2022858B1
Authority
NL
Netherlands
Prior art keywords
message
mouse
pointing device
computer
button
Prior art date
Application number
NL2022858A
Other languages
English (en)
Inventor
Jacobs Lambert
Original Assignee
Inventrans Bvba
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Inventrans Bvba filed Critical Inventrans Bvba
Priority to NL2022858A priority Critical patent/NL2022858B1/nl
Application granted granted Critical
Publication of NL2022858B1 publication Critical patent/NL2022858B1/nl

Links

Landscapes

  • User Interface Of Digital Computer (AREA)

Abstract

Een computer—geïmplementeerde werkwijze (5000) voor een computerinrichting (4501) met twee aanwijsinrichtingen (4503R, 4503L) en/of een muis-filter-driver (4563) en/of een hub (5420) geconfigureerd om bepaalde berichten van de aanwijsinrichtingen te converteren naar bewegingssequenties, die de stappen omvat van: b) het besturingssysteem (4560) toelaten de native muiscursor (705) te tonen; d) verschaffen van een berichtenverwerker (4552; 4652) om ruwe inputberichten afkomstig van de aanwijsinrichtingen te verwerken; e) bijhouden (5005) van een eerste en tweede positie (Posl, PosZ) volgens bewegingen van de eerste en tweede aanwijsinrichting; f) aanpassen (5006) van een positie van de native muiscursor (705) volgens bewegingen van de eerste of tweede aanwijsinrichting (4503R, 4503L) dewelke het meest recent bewogen of bediend werd; g) detecteren (5007) en omzetten van de bewegingssequenties naar een overeenkomstig commando. Een overlay—applicatie. Een muis—filter—driver. Een speciale muis. Een speciale hub. Een computerinrichting. Een computersysteem. Een besturingssysteem met twee muiscursoren.

Description

WERKWIJZE EN INRICHTING EN SYSTEEM MET DUBBELE MUIS ONDERSTEUNING Domein van de uitvinding De onderhavige uitvinding heeft in het algemeen betrekking op het domein van computers met een grafische gebruikersinterface en meerdere aanwijsinrichtingen. Meer bepaald, heeft de onderhavige uitvinding betrekking op een computer-applicatie (bv. een overlay-applicatie}, een muis- filter-driver, een aanwijsinrichting {bv. een muis}, een hub, een computerinrichting, en een computersysteem voor dubbele muis ondersteuning, en op een besturingssysteem met twee muiscursoren.
Achtergrond van de uitvinding FIG.1 toont een schematisch blokdiagram van een klassiek computersysteem 100 omvattende een computerinrichting 101 (bijv. een desktopcomputer} met een toetsenbordingang verbonden met een toetsenbordinrichting 102, en met een muisingang verbonden met een muisinrichting 103, en met een video-uitgang verbonden met een weergavescherm of monitor of scherm 104. De computerinrichting 101 van FIG.1 omvat één of meerdere centrale verwerkingseenheden (CPU) die een besturingssysteem O/S met een grafische gebruikersinterface GUI uitvoeren, zoais bijvoorbeeld Windows 7 of Windows 10 van Microsoft Corporation, of mac OS 10.12 Sierra of mac OS 10.13 High Sierra van Apple Inc, of Linux. In het voorbeeld van FIG. 1, voert de computer 101 ook twee applicaties uit: een PDF-documentviewer 107a (bijv. Acrobat Reader) getoond aan de linkerzijde van het scherm 104, en een teksteditor 107b (bijv. Microsoft Word} getoond aan de rechterzijde van het scherm 104.
Een dergelijk systeem 100 kan bijvoorbeeld gebruikt worden door een vertaler of een proeflezer voor het simultaan bekijken van een brondocument, bijvoorbeeld een verleend Europees octrooidocument met Engelse, Franse en Duitse conclusies, en een vertaling van de conclusies naar een andere taal (bijv. Nederlands of Spaans of Italiaans). Hoewel de vertaling zelf typisch zal uitgevoerd worden gebruikmakend van een CAT-tool {computerondersteund vertalen}, wordt de stap van het finaal proeflezen bij voorkeur uitgevoerd door het vergelijken van het origineel PDF-document en het finale tekstdocument, of indien het finale document ook geconverteerd is naar een PDF- document, door het vergelijken van de twee PDF documenten.
Bij het proeflezen (of het verifiëren en/of corrigeren van de vertaling}, moet de vertaler of proeflezer zijn focus steeds heen en weer verschuiven tussen de visuele voorstellingen van de twee documenten 1074, 107b, en moet steeds opnieuw de huidige context verwerven in elk van deze documenten, wat tijdrovend is en mentaal veeleisend. Deze cognitieve last kan verlaagd worden door bijvoorbeeld fysiek naar de woorden van de brontekst te wijzen, gebruikmakend van een vinger van de niet-dominante hand, en door overeenkomstige woorden van de doeltekst aan te duiden gebruikmakend van de muiscursor 105, die bewogen kan worden op het scherm door de muisinrichting 103 fysiek te bewegen, welke in de dominante hand gehouden wordt, zoais getoond in FIG. 1 voor een rechtshandig persoon. Een linkshandig persoon zal de muis typisch met zijn linkerhand bewegen, en zal met zijn rechterhand naar het scherm wijzen.
Maar dit proces is niet ideaal, onder andere omdat de arm niet altijd kan rusten op de tafel, in het bijzonder met grotere schermafmetingen, of met schermen die boven de tafel gemonteerd zijn. Voorts, wanneer een vertaalfout gevonden wordt, en een correctie gemaakt dient te worden, worden beide handen typisch naar het toetsenbord 102 gebracht om te typen, zodanig dat de context opnieuw verloren gaat en opnieuw verworven dient te worden nadat de correctie gemaakt is. Het zou voordelig zijn indien het computersysteem 100 een mechanisme zou verschaffen dat mogelijk maakt dat een gebruiker eenvoudig de focus kan verwisselen tussen twee leeslocaties op het scherm 104, welke locaties eenvoudig en intuïtief bewogen kunnen worden.
FIG. 2 toont een ander probleem. Bij het lezen van een document, gebruikt een gebruiker doorgaans de muiscursor om te wijzen naar de woorden die hij momenteel aan het lezen is. Wanneer de persoon sommige woorden wil markeren of onderlijnen of opmerkingen wil toevoegen, dan moet de muiscursor typisch naar de top van het scherm bewogen worden, waar de gebruiker moet klikken om een markeringskleur te kiezen, of een schrijfmachinetool, of een commentaarveld, enz., maar door dit te doen, gaat de context van waar hij aan het lezen was verloren, en moet de context opnieuw verworven worden, wat tijdrovend is. Het zou voordelig zijn indien het computersysteem 200 een mechanisme zou verschaffen dat mogelijk maakt dat een gebruiker eenvoudig de focus kan verwisselen tussen een leeslocatie en een werklocatie, welke locaties eenvoudig en intuïtief bewogen kunnen worden.
FIG. 3 toont een ander probleem. Bij het schrijven of controleren van bepaalde teksten (bijvoorbeeld conclusies van een octrooi-aanvrage), kan het wenselijk zijn om twee verschillende gedeeltes van één enkel tekstdocument te vergelijken, bijvoorbeeld een eerste gedeelte dat product- conclusies bevat en een tweede gedeelte dat werkwijze-conclusies bevat. In de praktijk wil de gebruiker soms beide tekstgedeeltes wijzigen, wat tamelijk eenvoudig is voor het lagergelegen tekstgedeelte van het voorbeeld getoond in FIG. 3, omdat dat is waar de muiscursor 305 gesitueerd is, maar niet eenvoudig is voor het bovenste tekstgedeelte, waar de vinger gesitueerd is. De gebruiker kan de positie van de vinger en de muiscursor verwisselen, maar dat is niet eenvoudig in de praktijk zonder de context opnieuw te verwerven op beide locaties, wat tijdrovend is. Het zou voordelig zijn indien het computersysteem 300 een mechanisme zou verschaffen dat mogelijk maakt dat een gebruiker eenvoudig kan wisselen tussen twee verschillende locaties op het scherm, om te lezen en/of om te editeren, welke locaties eenvoudig en intuïtief bewogen kunnen worden.
FIG. 4 toont een ander probleem. Bij het transcriberen {overzetten} van een geluidsfragment (d.w.z. het converteren van gesproken tekst naar een geschreven document), kan een gebruiker gebruik maken van een audiospeler-applicatie (bijv. VLC Media Player) om een geluidsfragment te spelen gebruikmakend van een start/stop-knop, en een teksteditor-applicatie voor het typen van de overeenkomstige tekstinformatie. Gebruikmakend van gekende computers, zou de gebruiker typisch de muiscursor verplaatsen naar de audiospeler, klikken op het venster 417 van de audiospeler om de audiospeler-applicatie te activeren, klikken op de startknop, de audiospeler enkele seconden laten spelen, klikken op de start/pauze-knop om de audiospeler te pauzeren, de muiscursor verplaatsen naar de teksteditor, klikken op het venster van de teksteditor om de teksteditor-applicatie te activeren, optioneel opnieuw klikken om de muiscursor te herpositioneren in het tekstdocument, de overeenkomstige tekst intypen gebruikmakend van het toetsenbord, de muiscursor 405 terug verplaatsen naar de audiospeler, en dezelfde stappen opnieuw en opnieuw herhalen totdat het audiofragment volledig getranscribeerd is. Het heen en weer bewegen van de muiscursor 405 tussen de start/stop-knop van de audiospeler 417 en de huidige positie in de teksteditor 407 is tijdrovend, vooral aangezien de muiscursor accuraat gepositioneerd dient te worden teneinde niet op de verkeerde knop te klikken, bijvoorbeeld op een terugspoelknop, omdat een ongewilde klik op deze knop nog méér tijd zou kosten, omdat de gebruiker het audiofragment zal moeten terugvinden. Het zou voordelig zijn indien het computersysteem 400 een mechanisme zou verschaffen dat het mogelijk maakt dat de gebruiker op twee verschillende schermlocaties kan werken door beide handen te gebruiken, vooral wanneer één van deze locaties een nagenoeg vaste positie op het scherm heeft. Samenvatting van de uitvinding Het is een doel van uitvoeringsvormen van de onderhavige uitvinding om een computer- geïmplementeerde werkwijze te verschaffen, een computerprogrammaproduct, een muis-filter-driver, een muis, een hub, een computerinrichting en een computersysteem voor het verschaffen van dubbele muisondersteuning, alsook een besturingssysteem met twee muiscursoren.
Het is een doel van uitvoeringsvormen van de onderhavige uitvinding om een mechanisme te verschaffen om de functionaliteit te verbeteren of uit te breiden van een computerinrichting die een besturingssysteem (0/5) met een grafische gebruikersinterface (GUI) uitvoert teneinde twee aanwijsinrichtingen te ondersteunen in plaats van slechts één.
Het is een specifiek doel van zulke uitvoeringsvormen dat het mechanisme correct functioneert wanneer de eerste en tweede muisinrichting apart bediend worden (verplaatsen, scrollen, klikken).
Het is een specifiek doel van zuike uitvoeringsvormen dat het mechanisme correct functioneert wanneer beide muisinrichtingen tegelijk verplaatst worden.
Het is een specifiek doel van zuike uitvoeringsvormen dat het mechanisme correct functioneert wanneer tegelijk één muisinrichting gescrold wordt, en de andere muisinrichting verplaatst wordt.
Het is een specifiek doel van zulke uitvoeringsvormen dat het mechanisme correct functioneert wanneer beide muisinrichtingen (nagenoeg) tegelijk gescrold worden.
Het is een specifiek doel van zulke uitvoeringsvormen dat het mechanisme correct functioneert wanneer tegelijk met één muisinrichting geklikt wordt, en de andere muisinrichting verplaatst wordt. Het is een specifiek doel van zulke uitvoeringsvormen dat het mechanisme correct blijft werken wanneer met één muisinrichting geklikt of gesleept wordt, en de andere muisinrichting verplaatst of gescrold of geklikt wordt.
Het is een doel van uitvoeringsvormen van de onderhavige uitvinding om een computer- geïmplementeerde werkwijze te verschaffen om de functionaliteit te verbeteren of uit te breiden van een O/S en GUI, bijvoorbeeld een bestaand O/S en GUI dat één enkele native muiscursor of muisaanwijzer verschaft en één enkele native cursorpositie onderhoudt, teneinde twee aanwijsposities of schermposities (Engels: pointer positions) bij te houden, en optioneel twee zichtbare voorwerpen te tonen op deze twee aanwijsposities, welke voorwerpen individueel beweegbaar zijn door middel van twee aanwijsinrichtingen.
Het is een doel van uitvoeringsvormen van de onderhavige uitvinding om een computer- geïmplementeerde werkwijze te verschaffen voor het verbeteren of uitbreiden van de functionaliteit van een O/S en GUI, bijvoorbeeld een bestaand O/S en GUI dat één enkele native muiscursor of muisaanwijzer verschaft en één enkele native cursorpositie onderhoudt, teneinde ten minste twee zichtbare voorwerpen te tonen en ten minste twee voorwerpposities bij te houden, welke voorwerpen individueel beweegbaar zijn door middel van ten minste twee aanwijsinrichtingen.
Het is een doel van bepaalde uitvoeringsvormen van de onderhavige uitvinding om een dergelijke computer-geïmplementeerde werkwijze te verschaffen, waar één van de zichtbare voorwerpen de native muiscursor of muisaanwijzer is die door het O/S en de GUI verschaft wordt.
Het is een doel van bepaalde uitvoeringsvormen van de onderhavige uitvinding om een dergelijke computer-geïmplementeerde werkwijze te verschaffen welke verschillend reageert op bewegingen van de ten minste twee aanwijsinrichtingen.
Het is een doel van bepaalde uitvoeringsvormen van de onderhavige uitvinding om een dergelijke computer-geïmplementeerde werkwijze te verschaffen welke verschillend reageert op bewegingen van de ten minste twee aanwijsinrichtingen, en/of op het indrukken van knoppen en het loslaten van knoppen en het klikken op knoppen van één of beide van de aanwijsinrichtingen, en/of op scrolwielbewegingen van één of beide aanwijsinrichtingen.
Het is een doel van bepaalde uitvoeringsvormen van de onderhavige uitvinding om een dergelijke computer-geïmplementeerde werkwijze te verschaffen voor het verbeteren van de functionaliteit van het Windows-besturingssysteem van Microsoft Corporation, met hoofdkantoor in Redmond, Washington, bijv. Windows 7 of Windows 10 of latere versies van Windows.
Het is een doel van bepaalde uitvoeringsvormen van de onderhavige uitvinding om een dergelijke computer-geïmplementeerde werkwijze te verschaffen voor het verbeteren van de functionaliteit van het mac OS van Apple Inc. met hoofdkantoor in Cupertino, Californië, US, bijv. mac OS Sierra of mac OS High Sierra of later.
Het is een doel van bepaalde uitvoeringsvormen van de onderhavige uitvinding om een dergelijke computer-geïmplementeerde werkwijze te verschaffen voor het verbeteren van de 5 functionaliteit van andere Operating-Systemen, zoals bv. Linux.
Het is een doel van bepaalde uitvoeringsvormen van de onderhavige uitvinding om een dergelijke computer-geïmplementeerde werkwijze te verschaffen, waarbij de dubbele muis functionaliteit verschaft wordt door een grafische overlay-applicatie, en bij voorkeur zonder dat de overlay-applicatie in geëleveerde modus draait.
Het is tevens een doel van uitvoeringsvormen van de onderhavige uitvinding om een speciale aanwijsinrichting (bv. een speciale muis} te verschaffen, die een gebruiker toelaat met twee zulke aanwijsinrichtingen tegelijk te scrollen, of één zulke aanwijsinrichting te bewegen en tegelijk de andere te scrollen, of één zulke aanwijsinrichting te bewegen en tegelijk met de andere te klikken, bv. op een computer waarop een speciale overlay-applicatie wordt uitgevoerd.
Het is tevens een doel van uitvoeringsvormen van de onderhavige uitvinding om een speciale hub te verschaffen, die een gebruiker toelaat met twee klassieke aanwijsinrichtingen {bv. twee HID- compatibele muizen) tegelijk te scrollen, of één zulke aanwijsinrichting te bewegen en tegelijk de andere te scrollen, of één zulke aanwijsinrichting te bewegen en tegelijk met de andere te klikken, bv. op een computer waarop een speciale overiay-appiicatie wordt uitgevoerd.
Het is tevens een doel van uitvoeringsvormen van de onderhavige uitvinding om een computerprogrammaproduct in de vorm van een muis-filter-driver te verschaffen, die een gebruiker toelaat met twee klassieke aanwijsinrichtingen (bv. twee HID-compatibele muizen) tegelijk te scrollen, of één zulke aanwijsinrichting te bewegen en tegelijk de andere te scrollen, of één zulke aanwijsinrichting te bewegen en tegelijk met de andere te klikken, bv. op een computer waarop een speciale overlay-applicatie wordt uitgevoerd.
Het is tevens een doel van uitvoeringsvormen van de onderhavige uitvinding om een besturingssysteem te verschaffen dat (inherent) twee zichtbare muiscursoren verschaft, gerelateerd aan twee aanwijsinrichtingen, en waarbij de twee aanwijsinrichtingen tegelijk verplaatst en gescroid mogen worden, en waarbij één aanwijsinrichtingen mag gescrold worden terwijl de andere verplaatst wordt, en waarbij met elk van beide aanwijsinrichtingen kan geklikt of gesleept worden, maar niet tegelijk.
Het is tevens een doel van uitvoeringsvormen van de onderhavige uitvinding om een computersysteem te verschaffen dat een computerinrichting omvat met een overlay-applicatie, en minstens één van de hoger genoemde speciale hub, of de speciale muis-filter-driver, of met twee speciale aanwijsinrichtingen, die een gebruiker toelaat met twee aanwijsinrichtingen tegelijk te scrollen, of één zuike aanwijsinrichting te bewegen en tegelijk de andere te scrollen, of één zulke aanwijsinrichting te bewegen en tegelijk met de andere te kijkken.
Het is tevens een doel van uitvoeringsvormen van de onderhavige uitvinding om een computersysteem te verschaffen dat verder minstens één weergave-inrichting omvat, en een toetsenbord.
Deze en andere doelstellingen worden gerealiseerd door een computer-geïmplementeerde werkwijze voor het verschaffen van een overlay-applicatie, en een computer-programma-product, en een muis-filter-driver, en een computerinrichting, en een computersysteem met de kenmerken van de onafhankelijke conclusies.
Volgens een eerste aspect verschaft de onderhavige uitvinding een computer- geïmplementeerde werkwijze voor het ondersteunen van twee aanwijsinrichtingen in een computerinrichting waaraan een eerste aanwijsinrichting en een tweede aanwijsinrichting aangesloten is, en die een besturingssysteem met een grafische gebruikersinterface uitvoert, waarbij het besturingssysteem een native muiscursor verschaft, waarbij de werkwijze de stappen omvat van: b) het toelaten of configureren dat het besturingssysteem met de grafische gebruikersinterface de native muiscursor verschaft als een zichtbaar voorwerp; d) het verschaffen van een berichtenverwerker voor het verwerken van ruwe inputberichten, en het configureren van het besturingssysteem om ruwe inputberichten afkomstig van de eerste en de tweede aanwijsinrichting te verzenden naar deze berichtenverwerker; e) het bijhouden en/of aanpassen van een eerste positie in overeenstemming met bewegingen van de eerste aanwijsinrichting, en het aanpassen van een tweede positie in overeenstemming met bewegingen van de tweede aanwijsinrichting; f} het aanpassen van een positie van de native muiscursor in overeenstemming met bewegingen van de eerste of de tweede aanwijsinrichting die het meest recent bewogen en/of bediend werd; g) het detecteren of de ruwe inputberichten een bewegingssequentie volgens een vooraf bepaald formaat vormen of omvatten, en bij detectie van zuike bewegingssequentie: bepalen welke aanwijsinrichting deze bewegingssequentie veroorzaakt heeft; en het verplaatsen van de native muiscursor naar de bijgehouden of aangepaste positie geassocieerd met de aanwijsinrichting die de bewegingssequentie veroorzaakt heeft; en het versturen van minstens één commando gekozen uit de groep bestaande uit een knop-ingedrukt- commando, een knop-losgelaten commando, een scrol-omhoog-commando en een scrol-omlaag- commando naar het besturingssysteem overeenkomstig de gedetecteerde bewegingssequentie.
Het is een voordeel van deze werkwijze dat ze de toepassing die deze werkwijze uitvoert toelaat met twee aanwijsinrichtingen te werken, zelfs op een computer met een O/5 dat eigenlijk maar één native muiscursor ondersteunt.
Deze werkwijze kan bv. uitgevoerd worden door een overlay-applicatie, maar ook door een gebruikers-applicatie die geen overlay-applicatie is.
Het is een voordeel om (valse) bewegingsberichten te gebruiken, omdat dit geen aanpassingen vraagt aan het bestaande besturingssysteem, en omdat deze, zelfs wanneer ze naar de verkeerde onderliggende applicatie worden gestuurd, voor de meeste toepassingen geen noemenswaardige negatieve effecten veroorzaken {in tegenstelling tot ongewild klikken of ongewild scrollen).
Er wordt opgemerkt dat het niet strict noodzakelijk is dat de applicatie zelf visuele voorwerpen toont, maar het volstaat dat ze de positie van de native muiscursor kan laten verspringen tussen twee posities (naar analogie met FIG. 10, maar dan zonder zwarte pit).
Het is een groot voordeel dat de native muiscursor wordt getoond, en bv. niet een vaste bitmap, omdat de muiscursor verschillende gedaantes kan aannemen, afhankelijk van de positie, bv. afhankelijk van de onderliggende applicatie.
Met "bewegingssequentie volgens een vooraf bepaald formaat" {of volgens een vooraf bepaalde structuur} kan zowel een vooraf bepaalde bewegingssequentie met vaste verplaatsingswaarden bedoeld worden, als een parameteriseerbare bewegingssequentie (met bv. een aantal vaste verplaatsingen, met minstens één variabele verplaatsing, voor het doorgeven van een parameter), of een bewegingssequentie die een vooraf bepaalde deelsequentie bevat. Bewegingssequenties met vooraf bepaalde waarden kunnen bv. gebruikt worden voor een linkerknop- ingedrukt-bericht, rechterknop-ingedrukt-bericht, linkerknop-losgelaten-bericht, rechterknop- losgelaten-bericht, scrol-omhoog-bericht, en een scrol-omlaag-bericht. Parameteriseerbare bewegingssequenties kunnen bv. gebruikt worden om een bewegings-bericht door te geven, of een scrol-omhoog-bericht, of een scrol-omlaag-bericht.
De groep of verzameling van "vooraf bepaalde bewegingsseguenties" kunnen bv. één of meerdere van de volgende bewegingssequenties omvatten: een "linkerknop-ingedrukt-sequentie" geassocieerd met een linkerknop-ingedrukt-bericht en een linkerknop-ingedrukt commando; een "linkerknop-losgelaten-sequentie” geassocieerd met een linkerknop-losgelaten-bericht en een linkerknop-losgelaten commando; een "rechterknop-ingedrukt-sequentie” geassocieerd met een rechterknop-ingedrukt-bericht en een rechterknop-ingedrukt commando; een “rechterknop- losgelaten-sequentie” geassocieerd met een rechterknop-losgelaten-bericht en een rechterknop- losgelaten commando, een "scrol-omhoog-sequentie” geassocieerd met een scrol-omhoog-bericht en een scrol-omhoog-commando; en een "scrol-omlaag-sequentie” geassocieerd met een scrol-omlaag- bericht en een scrol-omlaag-commando.
In een uitvoeringsvorm worden bij de detectie ook de sequenties met de dubbele verplaatsingswaardes gecontroleerd, dus bv. acht sequenties of twaalf sequenties.
In een uitvoeringsvorm, omvat de werkwijze verder de stap van: a) het verschaffen van een grafisch overlayvenster.
Deze uitvoeringsvorm is gericht op de werkwijze uitgevoerd door een overlay-applicatie.
Het is een voordeel van deze werkwijze dat ze de functionaliteit van een computer met een O/S dat eigenlijk maar één native muiscursor heeft, uitbreidt naar een computer met twee aanwijsinrichtingen (bv. twee muizen), die de gebruiker individueel kan verplaatsen en/of bedienen.
Het is een groot voordeel dat dit kan werken met bestaande desktopapplicaties {zonder enige wijziging), en met bestaande muis-device-drivers (zonder enige wijziging).
In een uitvoeringsvorm wordt in stap a} een grafisch overlayvenster verschaft als een in hoofdzaak schermvullend venster dat hoofdzakelijk bestaat uit volledig transparante pixels.
In een uitvoeringsvorm omvat de werkwijze verder de stap van: c) het configureren van het grafisch overlayvenster in doorklikmodus.
In een uitvoeringsvorm wordt in stap a} een grafisch overlayvenster verschaft dat minstens één zichtbaar voorwerp omvat; en waarbij stap f) verder het aanpassen van een positie van dat zichtbaar voorwerp omvat op de andere positie uit de eerste en tweede positie dan de positie ingenomen door de native muiscursor.
In deze uitvoeringsvorm kan de gebruiker minstens twee beweegbare voorwerpen zien, bv. de native muiscursor, en een bitmap met een zwarte pijl (bv. zoals getoond in FIG. 8 of FIG. 9 of FIG. 10).
In een uitvoeringsvorm wordt in stap a) een grafisch overlayvenster verschaft dat minstens een eerste zichtbaar voorwerp en een tweede zichtbaar voorwerp omvat; en waarbij stap f) verder het aanpassen omvat van een positie van het eerste zichtbaar voorwerp op basis van de eerste positie, en het aanpassen van een positie van het tweede zichtbaar voorwerp op basis van de tweede positie.
In deze uitvoeringsvorm kan de gebruiker bv. drie beweegbare voorwerpen zien: de native muiscursor, en twee bitmaps met een zwarte pijl (bv. zoals getoond in FIG. 8 of FIG. 9 of FIG. 10}. Dit heeft als voordeel dat de twee bitmaps altijd zichtbaar zijn, ongeacht waar de native muiscursor zich bevindt, In een uitvoeringsvorm omvat elk van de bewegingssequenties een vooraf bepaalde reeks van twee tot twintig verplaatsingen, of een vooraf bepaalde reeks van drie tot tien verplaatsingen.
Het is een voordeel van een relatief lange reeks, dat de kans dat zulke reeks toevallig door de gebruiker zou veroorzaakt worden voor de muis te verplaatsen, nagenoeg onmogelijk is, vooral wanneer de reeks één of meerdere heen-en weergaande verplaatsingen of kris-kras bewegingen omvat (bv. zoals getoond in FIG. 47).
In een uitvoeringsvorm omvat elk van de vooraf bepaalde bewegingssequenties een vooraf bepaalde reeks minstens twee of minstens drie verplaatsingen die verschillend zijn van de nul- verplaatsing.
In een uitvoeringsvorm omvat elk van de parameteriseerbare bewegingssequenties een reeks van twee tot twintig verplaatsingen, of een reeks van drie tot tien verplaatsingen. In een voorkeursuitvoeringsvorm zijn minstens twee of minstens drie of minstens vier van deze verplaatsingen vooraf bepaalde verplaatsingen.
In een uitvoeringsvorm is een cumulatieve verplaatsing van de (bv. vooraf bepaalde of parameteriseerbare) bewegingssequenties een nul-verplaatsing.
Het is een voordeel van zulke reeks{en) dat het scrollen of klikken van een aanwijsinrichting door de gebruiker geen verschuiving of drift veroorzaakt van de eerste of tweede onderhouden positie {aannemende dat de fysieke aanwijsinrichting niet wordt verplaatst). Dit is vooral belangrijk voor toepassingen zoals bv. getoond in FIG. 4{a}, waar één aanwijsinrichting stationair wordt gehouden.
Bij voorkeur is een cumulatieve verplaatsing van de parameteriseerbare bewegingssequenties (indien gebruikt} eveneens een nul-verplaatsing.
In een uitvoeringsvorm omvat elk van de vooraf bepaalde bewegingssequenties als laatste verplaatsing een nulverplaatsing.
Dit biedt het voordeel dat de overlay-applicatie efficiënter kan werken, omdat het niet voor ieder binnenkomend verplaatsingsbericht hoeft na te gaan of één van de bewegingssequenties voorkwam.
Bij voorkeur is de laatste verplaatsing van de parameteriseerbare bewegingssequenties (indien gebruikt} eveneens een nul-verplaatsing.
In een uitvoeringsvorm omvat stap e) het aanpassen van de eerste positie en van de tweede positie op basis van de ruwe inputberichten.
Dat is echter niet strikt noodzakelijk, en de positie kan bv. ook bepaald worden door het opvragen van de native cursorpositie aan het besturingssysteem.
In een uitvoeringsvorm omvat stap e) het ontvangen van een inputbericht, en indien het ontvangen inputbericht gerelateerd is aan de eerste aanwijsinrichting, het bijwerken van de eerste positie; en indien het ontvangen inputbericht gerelateerd is aan de tweede aanwijsinrichting, het bijwerken van de tweede positie; en omvat stap g): het detecteren of een bewegingssequentie met de vooraf bepaalde structuur (bv. een vooraf bepaalde bewegingssequentie} voorkomt in de partiële stroom van ontvangen inputberichten afkomstig van elke aanwijsinrichting afzonderlijk.
In een uitvoeringsvorm omvat stap e}: het ontvangen van een inputbericht, en indien het inputbericht een bewegingsbericht is, het verkrijgen van verplaatsingswaardes (dx, dy) gerelateerd aan het bewegingsbericht.
In een uitvoeringvorm is het grafisch overlayvenster geconfigureerd als een in hoofdzaak schermvullend venster dat in hoofdzaak (bv. voor minstens 90%) bestaat uit volledig transparante pixels.
In deze uitvoeringsvorm hoeft het overlayvenster niet expliciet in doorklikmodus geconfigureerd te worden.
In een uitvoeringsvorm is het grafisch overlayvenster geconfigureerd als een semi-transparant venster dat een alfamengingwaarde a heeft in het bereik van 1% tot 99%, of met andere woorden, met een alfa-transparantiewaarde {T) in het bereik van 1% tot 99%, of van 1% tot 90%, of van 1% tot 60%,
of van 1% tot 50%. Hoe lager de alfa-transparantiewaarde (T), doorgaans hoe beter zichtbaar of hoe beter onderscheidbaar het eerste en tweede zichtbare voorwerp (bv. een pijltje of een handje} ten opzichte van de onderliggende applicaties.
In een uitvoeringsvorm zijn de eerste en tweede aanwijsinrichting HID-compatibele aanwijsinrichtingen.
In een uitvoeringsvorm is het besturingssysteem Windows 7 of Windows 10 of een latere Windows versie van Microsoft Corporation, In een uitvoeringsvorm is het besturingssysteem mac OS Sierra of mac OS High Sierra of een latere mac OS versie van Apple inc.
In een uitvoeringsvorm is het besturingssysteem Linux.
Volgens een tweede aspect verschaft de onderhavige uitvinding ook een computer- programmaproduct dat uitvoerbare instructies bevat die een werkwijze volgens het eerste aspect uitvoert, wanneer ze worden uitgevoerd door een computerinrichting waaraan een eerste en een tweede aanwijsinrichting aangesloten is.
Volgens een derde aspect verschaft de onderhavige uitvinding ook een computer- geïmplementeerde werkwijze voor het filteren van berichten afkomstig van ten minste twee aanwijsinrichtingen, waarbij de werkwijze de volgende stappen omvat: a} het ontvangen van een bericht afkomstig van één der aanwijsinrichtingen; b} het nagaan of het ontvangen bericht een bewegingsbericht is, en zoja, het versturen van het bewegingsbericht [bv. naar het besturingssysteem of naar een poort van de computer]; c} het nagaan of het ontvangen bericht een knop-ingedrukt- bericht is, en zoja, het versturen van een eerste (bv. vooraf bepaalde) bewegingssequentie; d} het nagaan of het ontvangen bericht een knop-losgelaten-bericht is, en zoja, het versturen van een tweede {bv. vooraf bepaalde) bewegingssequentie.
Deze werkwijze kan bv. uitgevoerd worden in een muis-filter-driver in de computerinrichting {zie FIG. 45 en FIG. 46), of kan bv. uitgevoerd worden in een hub (zie FIG. 54}. In het geval van een muis-filter-driver worden de individuele bewegingsberichten of bewegingssequenties bv. door de muis-filter-driver verstuurd naar het besturingssysteem. In het geval van een hub worden de individuele bewegingsberichten of bewegingssequenties bv. verstuurd vanuit de hub naar een poort van de computerinrichting, bv. een interface of een USB-poort.
In een uitvoeringsvorm omvat de werkwijze verder de stappen van: e) het nagaan of het ontvangen bericht een scrol-omhoog-bericht is, en zoja, het versturen van een derde (bv. vooraf bepaalde of parameteriseerbare) bewegingssequentie; en f} het nagaan of het ontvangen bericht een scrol-omlaag-bericht is, en zoja, het versturen van een vierde (bv. vooraf bepaalde of parameteriseerbare) bewegingssequentie.
In een uitvoeringsvorm omvat stap a) verder het bepalen van welke aanwijsinrichting het bericht afkomstig is, en het bepalen van een tijdstip van ontvangst van dat bericht; en omvat de werkwijze verder een stap omvat van het nagaan of slechts één aanwijsinrichting gebruikt werd gedurende minstens een vooraf bepaalde periode (AT), en zoja, het versturen van het bericht zonder omzetting naar een bewegingssequentie.
Er wordt opgemerkt dat stap b) en stap g) ook van plaats verwisseld kunnen worden.
Volgens een vierde aspect verschaft de onderhavige uitvinding ook een computer- programmaproduct dat uitvoerbare instructies bevat die een werkwijze volgens het derde aspect uitvoert, wanneer ze worden uitgevoerd door een computerinrichting waaraan een eerste en een tweede aanwijsinrichting aangesloten is, en die een grafische gebruikersinterface omvat die een native muiscursor verschaft.
Dit computerprogrammaproduct kan bv. een "muis-filter-driver" zijn.
Volgens een vijfde aspect verschaft de onderhavige uitvinding ook een aanwijsinrichting omvattende: een bewegingsdetectiemechanisme voor het detecteren van een twee-dimensionale beweging; ten minste één knop indrukbaar en Joslaatbaar door een gebruiker; een knopdetectiemechanisme voor het detecteren of de ten minste één knop wordt ingedrukt of wordt losgelaten; een besturingseenheid verbonden met het bewegingsdetectiemechanisme, en voorzien voor het versturen van een bewegingsbericht wanneer een beweging wordt gedetecteerd; met het kenmerk, dat de besturingseenheid verder aangepast is voor het verzenden van een eerste (bv. vooraf bepaalde) bewegingssequentie, wanneer gedetecteerd wordt dat de ten minste één knop wordt ingedrukt; en voor het verzenden van een tweede (bv. vooraf bepaalde} bewegingssequentie, wanneer gedetecteerd wordt dat de ten minste één knop wordt losgelaten.
Deze uitvoeringsvorm is gericht op een "speciale muis" zoals getoond in FIG. 53.
In een uitvoeringsvorm omvat de aanwijsinrichting verder ten minste één scrolwiel dat draaibaar is door een gebruiker; en een scrolwiel-detectiemechanisme om te detecteren of het ten minste één scrolwiel gedraaid heeft; en is de besturingseenheid verbonden met het scrolwiel- detectiemechanisme; met het kenmerk dat de besturingseenheid verder geconfigureerd is voor het verzenden van een derde {bv. vooraf bepaalde of parameteriseerbare} bewegingssequentie wanneer gedetecteerd wordt dat het scrolwiel omhoog wordt gedraaid; en waarbij de besturingseenheid verder geconfigureerd is voor het verzenden van een vierde (bv. vooraf bepaalde of parameteriseerbare) bewegingssequentie wanneer gedetecteerd wordt dat het scrolwiel omlaag wordt gedraaid.
In een uitvoeringsvorm bestaat elk van de (bv. vooraf bepaalde) bewegingssequenties uit een vooraf bepaalde reeks van twee tot twintig verplaatsingen, of uit een vooraf bepaalde reeks van drie tot tien verplaatsingen.
In een uitvoeringsvorm omvat elk van de (bv. parameteriseerbare) bewegingssequenties een reeks van twee tot twintig verplaatsingen, of een reeks van drie tot tien verplaatsingen. In een voorkeursuitvoeringsvorm zijn minstens twee of minstens drie of minstens vier van deze verplaatsingen vooraf bepaalde verplaatsingen.
Bij voorkeur zijn de verplaatsingen van de (bv. vooraf bepaalde) bewegingssequenties verplaatsingen waarbij de X-verplaatsing en de Y-verplaatsing waarden zijn in het bereik van -3 tot +3, of waarden zijn in het bereik van -5 tot +5, of waarden zijn in het bereik van -10 tot +10.
In een uitvoeringsvorm, is een cumulatieve verplaatsing van de (bv. vooraf bepaalde) bewegingssequenties een nul-verplaatsing.
Bij voorkeur is een cumulatieve verplaatsing van de parameteriseerbare bewegingssequenties (indien gebruikt} eveneens een nul-verplaatsing.
In een uitvoeringsvorm heeft elk van de (bv. vooraf bepaalde) bewegingssequenties als laatste verplaatsing een nulverplaatsing (met dx=0 en dy=0).
Bij voorkeur is de laatste verplaatsing van de (bv. parameteriseerbare) bewegingssequenties {indien gebruikt} eveneens een nul-verplaatsing.
Volgens een zesde aspect verschaft de onderhavige uitvinding ook een hub omvattende: een eerste interface om te communiceren met een eerste aanwijsinrichting, een tweede interface om te communiceren met een tweede aanwijsinrichting, en een derde interface om te communiceren met een computerinrichting; en een besturingseenheid verbonden met de eerste interface voor het ontvangen van eerste berichten van de eerste aanwijsinrichting, en verbonden met de tweede interface voor het ontvangen van tweede berichten van de tweede aanwijsinrichting, en verbonden met de derde interface voor het verzenden van berichten naar de computerinrichting; gekenmerkt doordat de besturingseenheid aangepast is voor het uitvoeren van een werkwijze volgens het derde aspect.
Deze hub voert dus een werkwijze uit zoals getoond in FIG. 51 of FIG. 52. Volgens de werkwijze van FIG. 51 worden alle knop-ingedrukt/losgelaten-berichten en alle scrol-omhoog/omlaag- berichten omgezet naar een bijhorende {bv. vooraf bepaalde) bewegingssequentie. In het geval van FIG. 52a en FIG. 52b worden knop-berichten en scrol-berichten enkel omgezet naar een bewegingssequentie wanneer twee muizen gebruikt worden.
In een uitvoeringsvorm, bestaat elk van de vooraf bepaalde bewegingssequenties uit een vooraf bepaalde reeks van twee tot twintig verplaatsingen, of uit een vooraf bepaalde reeks van drie tot tien verplaatsingen.
In een uitvoeringsvorm omvat elk van de parameteriseerbare bewegingssequenties een reeks van twee tot twintig verplaatsingen, of een reeks van drie tot tien verplaatsingen. In een voorkeursuitvoeringsvorm zijn minstens twee of minstens drie of minstens vier van deze verplaatsingen vooraf bepaalde verplaatsingen.
Bij voorkeur zijn de verplaatsingen van de (bv. vooraf bepaalde) bewegingssequenties verplaatsingen waarbij de X-verplaatsing en de Y-verplaatsing waarden zijn in het bereik van -3 tot +3, of waarden zijn in het bereik van -5 tot +5, of waarden zijn in het bereik van -10 tot +10.
In een uitvoeringsvorm, is een cumulatieve verplaatsing van de (bv. vooraf bepaalde) bewegingssequenties een nul-verplaatsing.
Bij voorkeur is een cumulatieve verplaatsing van de (bv. parameteriseerbare) bewegingssequenties {indien gebruikt} eveneens een nul-verplaatsing.
In een uitvoeringsvorm heeft elk van de vooraf bepaalde bewegingssequenties als laatste verplaatsing een nulverplaatsing {met dx=0 en dy=0).
Bij voorkeur is de laatste verplaatsing van de (bv. parameteriseerbare) bewegingssequenties (indien gebruikt} eveneens een nul-verplaatsing.
In een uitvoeringsvorm, is de vooraf bepaalde periode (AT} een periode van 20 ms tot 1000 ms, bij voorkeur van 20 tot 500 ms, of van 25 tot 400 ms, of van 50 tot 250 ms, bv. ongeveer gelijk aan 100 ms, of ongeveer gelijk aan 150 ms, of ongeveer gelijk aan 200 ms.
Volgens een zevende aspect verschaft de onderhavige uitvinding ook een computerinrichting met een besturingssysteem met een grafische gebruikersinterface die een (bv. slechts één} native muiscursor verschaft; en met een computerprogrammaproduct volgens het tweede aspect.
In een uitvoeringsvorm omvat de computerinrichting verder een computerprogrammaproduct volgens het vierde aspect.
Volgens een achtste aspect verschaft de onderhavige uitvinding ook een computersysteem, omvattende: een computerinrichting volgens het zevende aspect, en een eerste en een tweede aanwijsinrichting operationeel verbonden met de computerinrichting.
In een uitvoeringsvorm zijn de eerste en een de tweede aanwijsinrichting aanwijsinrichtingen volgens het vijfde aspect.
In een uitvoeringsvorm omvat de computerinrichting van dit computersysteem ten minste een eerste USB-poort voor rechtstreekse verbinding met de eerste aanwijsinrichting, en een tweede USB-poort voor rechtstreekse verbinding met de tweede aanwijsinrichting.
In een uitvoeringsvorm omvat het computersysteem verder een hub volgens het zesde aspect, operationeel verbonden tussen de computerinrichting en de eerste en tweede aanwijsinrichting.
Bij voorkeur omvat het computersysteem verder één of twee weergave-inrichtingen.
Bij voorkeur omvat het computersysteem verder een toetsenbord.
Volgens een negende aspect verschaft de onderhavige uitvinding ook een computer- geïmplementeerde werkwijze uitvoerbaar in een computer-inrichting die verbonden is met minstens een eerste en een tweede aanwijsinrichting, waarbij de werkwijze de stappen omvat van: b) het verschaffen van een eerste en een tweede zichtbare muiscursor, en het bijhouden van een eerste en een tweede positie (bv. aanwijspositie}; het herhaaldelijk uitvoeren van: c) het ontvangen van een inputbericht afkomstig van de eerste en/of de tweede aanwijsinrichting; d} het bijwerken van de eerste en de tweede positie (bv. aanwijspositie) in overeenstemming met bewegingen van de eerste en de tweede aanwijsinrichting; e) het aanpassen van de positie van de eerste en tweede muiscursor op basis van weike aanwijsinrichting het laatst bewogen of bediend werd; f) het verder verwerken van het inputbericht, bv. door het al dan niet versturen van een overeenkomstig commando of event naar een visuele component of naar een applicatievenster dat zich onder de betreffende muiscursor bevindt. Deze werkwijze kan bv. uitgevoerd worden in een besturingssysteem dat twee muiscursoren toont (bv. een actieve en een passieve), voor het ondersteunen van twee aanwijsinrichtingen.
In een uitvoeringsvorm, omvat stap e} minstens één van de volgende modi: el) indien de eerste aanwijsinrichting het laatst bewogen of bediend werd, het positioneren van de eerste muiscursor op de eerste aanwijspositie en het positioneren van de tweede muiscursor op de tweede aanwijspositie; en indien de tweede aanwijsinrichting het laatst bewogen of bediend werd, het positioneren van de eerste muiscursor op de tweede aanwijspositie en het positioneren van de tweede muiscursor op de eerste aanwijspositie; e€2) het positioneren van de eerste muiscursor op de eerste aanwijspositie, en het positioneren van de tweede muiscursor op de tweede aanwijspositie; e3) het positioneren van de eerste muiscursor op de tweede aanwijspositie; en het positioneren van de tweede muiscursor op de eerste aanwijspositie.
De modus van stap el), e2} en e3) worden respectievelijk de "tweehandige modus", de “rechtshandige modus" en de "linkshandige modus" genoemd. Het besturingssysteem kan de mogelijkheid voorzien (bv. via de taakbalk) om een gebruiker toe te laten snel en eenvoudig te wisselen tussen deze modi, bv. op een manier zoals getoond in FIG. 31(a), door de gebruiker de dominante hand te laten kiezen.
In een uitvoeringsvorm omvat step f) het volgende: g} het nagaan of het ontvangen bericht een knop-ingedrukt-bericht is, en zoja, het versturen van een knop-indrukking-commando of knop- indrukking-event vanaf de positie van de eerste muiscursor naar een onderliggende component of applicatie; h} het nagaan of het ontvangen bericht een knop-losgelaten-bericht is, en zoja, het versturen van een knop-loslating-commando of knop-loslating-event vanaf de positie van de eerste muiscursor naar een onderliggende component of applicatie; i) het nagaan of het ontvangen bericht een scrol-omhoog-bericht is, en zoja, het versturen van een scrol-omhoog-commando of scrol- omhoog-event vanaf de positie van de eerste muiscursor naar een onderliggende component of applicatie; j} het nagaan of het ontvangen bericht een scrol-omlaag-bericht is, en zoja, het versturen van een scrol-omlaag-commando of scrol-omlaag-event vanaf de positie van de eerste muiscursor naar een onderliggende component of applicatie.
In een uitvoeringsvorm, omvat stap g) en h) verder het bijwerken van één of meerdere toestandsvariabelen als indicatie of één of meerdere knoppen van de eerste en/of de tweede aanwijsinrichting ingedrukt zijn; en wordt in stap f) eerst nagegaan of een knop van de eerste of tweede aanwijsinrichting ingedrukt is aan de hand van deze toestandsvariabelen, en wordt nagegaan of het bericht afkomstig is van de aanwijsinrichting waarvan de knop is ingedrukt; en daarna, indien een uitkomst van deze test waar is, wordt het bericht verder behandeld volgens stappen g) tot j); en indien een uitkomst van deze test onwaar is, wordt het bericht genegeerd (in de zin dat er geen commando of event naar een onderliggende component of onderliggende applicatie wordt gestuurd}, en optioneel wordt een foutboodschap getoond.
In een uitvoeringsvorm, omvat stap g) en h) verder het bijwerken van één of meerdere toestandsvariabelen als indicatie of één of meerdere knoppen van de eerste en/of de tweede aanwijsinrichting ingedrukt zijn; en wordt in stap f) eerst nagegaan of een knop van de eerste of de tweede aanwijsinrichting ingedrukt is aan de hand van deze toestandsvariabelen, en wordt nagegaan of het bericht een knop-losgelaten-bericht is, en wordt nagegaan of het bericht afkomstig is van de aanwijsinrichting waarvan de knop is ingedrukt; en daarna, indien een uitkomst van deze test waar is, wordt het bericht verder behandeld volgens stappen g) tot en met j}; en indien een uitkomst van deze test onwaar is, wordt het bericht genegeerd {in de zin dat er geen commando of event naar een onderliggende component of onderliggende applicatie wordt gestuurd}, en optioneel wordt een foutboodschap getoond.
In een uitvoeringsvorm, omvat stap d} verder het bepalen van een eerste (bv. visuele) component en/of een eerste applicatievenster die zich op de eerste aanwijspositie bevindt, en het bepalen van een tweede {bv. visuele) component en/of een tweede applicatievenster die zich op de tweede aanwijspositie bevindt; en wordt in stap f} bij de verwerking van het inputbericht rekening gehouden met de eerste en de tweede component en/of het eerste en het tweede applicatievenster.
In een variant wordt gekeken naar welke component of applicatie zich onder de cursorposities bevinden in plaats van de aanwijsposities.
In een uitvoeringsvorm, wordt in stap f), indien de tweede aanwijspositie zich boven dezelfde component en/of zich boven hetzelfde applicatievenster bevindt als de eerste aanwijspositie, (of anders gezegd: indien de eerste aanwijspositie en de tweede aanwijspositie zich boven dezelfde component en/of hetzelfde applicatievenster bevinden), in minstens één van de volgende gevallen een foutboodschap getoond: * bij ontvangst van een knop-ingedrukt-bericht afkomstig van de eerste aanwijsinrichting indien een knop van de tweede aanwijsinrichting reeds is ingedrukt; * bij ontvangst van een knop-ingedrukt-bericht afkomstig van de tweede aanwijsinrichting indien een knop van de eerste aanwijsinrichting reeds is ingedrukt; * bij ontvangst van een scrol-omhoog-bericht of een scrol- omlaag bericht afkomstig van de eerste aanwijsinrichting indien een knop van de tweede aanwijsinrichting reeds is ingedrukt; * bij ontvangst van een scrol-omhoog-bericht of een scrol-omlaag bericht afkomstig van de tweede aanwijsinrichting indien een knop van de eerste aanwijsinrichting reeds is ingedrukt.
In een uitvoeringsvorm, wordt in stap f), indien de eerste en tweede muiscursor zich boven verschillende (bv. visuele} componenten of applicatievensters bevinden, * bij ontvangst van een scrol- omhoog-bericht afkomstig van de eerste aanwijsinrichting, een scrol-omhoog-commando of een scrol-
omhoog-event verstuurd naar de onderliggende component of applicatie, zelfs indien een knop van de tweede aanwijsinrichting reeds is ingedrukt; en * wordt, bij ontvangst van een scrol-omlaag-bericht afkomstig van de tweede aanwijsinrichting, een scrol-omlaag-commando of een scrol-omlaag-event verstuurd naar de onderliggende component of applicatie, zelfs indien een knop van de eerste aanwijsinrichting reeds is ingedrukt.
Volgens een tiende aspect omvat de onderhavige uitvinding tevens een computerprogramma- product dat uitvoerbare instructies bevat die een werkwijze volgens het negende aspect, wanneer ze worden uitgevoerd door minstens één processor van een computerinrichting waaraan een eerste en een tweede aanwijsinrichting aangesloten is, bv. rechtstreeks of via een hub.
Het computerprogrammaproduct kan bv. opgeslagen zijn in een lokaal opslagmedium {bv een CD-ROM, of een DVD-ROM, of een flash-drive of een harde schijf of een usb-stick}, of kan opgeslagen zijn en gedownload worden via een netwerk.
Volgens een elfde aspect omvat de onderhavige uitvinding tevens een computerinrichting, omvattende: een computerprogrammaproduct volgens het tiende aspect.
Volgens een twaalfde aspect, omvat de onderhavige uitvinding tevens een computerinrichting, omvattende: minstens één processor die de werkwijze uitvoert volgens het negende aspect.
Volgens een dertiende aspect, omvat de onderhavige uitvinding tevens een computersysteem, omvattende: een computerinrichting volgens het elfde of twaalfde aspect; en een eerste en een tweede aanwijsinrichting operationeel verbonden met de computerinrichting.
Volgens een veertiende aspect, omvat de onderhavige uitvinding tevens een computersysteem volgens het dertiende aspect, waarbij de eerste en een tweede aanwijsinrichting HID-compatibele muisinrichtingen zijn.
Specifieke en voorkeursdragende aspecten van de onderhavige uitvinding zijn opgenomen in de aangehechte onafhankelijke en afhankelijke conclusies. Kenmerken van de afhankelijke conclusies kunnen worden gecombineerd met kenmerken van de onafhankelijke conclusies en met kenmerken van andere afhankelijke conclusies zoals aangewezen en niet enkel zoais uitdrukkelijk in de conclusies naar voor gebracht.
Deze en andere aspecten van de uitvinding zullen duidelijk worden aan de hand van en verhelderd worden met verwijzing naar de hiernavolgende beschreven uitvoeringsvorm{en).
Korte beschrijving van de figuren FIG, 1 toont een voorbeeld van hoe een vertaler of proeflezer een origineel document en een vertaling daarvan kan vergelijken, gebruikmakende van een klassiek computersysteem.
FIG, 2 toont een voorbeeld van hoe een persoon die een elektronisch tekstdocument aan het lezen en het editeren het of aan het wijzigen of het becommentariëren is, zijn vinger kan gebruiken om de positie te "onthouden" waar hij aan het lezen is, wanneer hij de muiscursor naar de menubalk beweegt om een gereedschap of een kleur, of dergelijke, te kiezen, gebruikmakende van een klassiek computersysteem.
FIG. 3 toont een voorbeeld van hoe een persoon die één enkel tekstdocument aan het lezen of het editeren is, zijn vinger kan gebruiken om naar één positie in het document te wijzen, en de muiscursor kan gebruiken om naar een andere positie binnen dat één document te wijzen, gebruikmakende van een klassiek computersysteem.
FIG.4 toont een voorbeeld van hoe een persoon een audiobestand kan transcriberen, gebruikmakende van een klassiek computersysteem. FIG. 4(a} toont hoe een audiospeler kan gestart worden om een audiofragment af te spelen. FIG. 4(b) toont hoe de audiospeler tijdelijk gestopt is, en tekst in een tekstdocument getypt wordt.
FIG.5 toont een computersysteem volgens een uitvoeringsvorm van de onderhavige uitvinding, waarbij een computerinrichting verbonden is met een eerste en met een tweede aanwijsinrichting, en een 0/S en GUI uitvoert dat een native muisaanwijzer/-cursor (bijv. een witte pijl) verschaft, en een overlay-applicatie volgens een uitvoeringsvorm van de onderhavige uitvinding uitvoert. De overlay-applicatie onderhoudt een eerste aanwijspositie in overeenstemming met bewegingen van de eerste aanwijsinrichting (bv. rechtermuis}, en onderhoudt een tweede aanwijspositie in overeenstemming met bewegingen van de tweede aanwijsinrichting (bv. linkermuis), en past de positie van de native muisaanwijzer/muiscursor aan, bijv. overschrijft deze, in overeenstemming met bewegingen van de eerste aanwijsinrichting (bv. rechtermuis}. Daarenboven verschaft de overlay-applicatie een tweede zichtbaar voorwerp (bijv. een lijn of rechthoek) die beweegt in overeenstemming met bewegingen van de tweede aanwijsinrichting (bv. linkermuis). FIG. 5{a) toont bewegingen van het eerste zichtbaar voorwerp in overeenstemming met bewegingen van de eerste aanwijsinrichting {bv. rechtermuis). FIG. 5{b) toont bewegingen van het tweede zichtbaar voorwerp in overeenstemming met bewegingen van de tweede aanwijsinrichting (bv.
linkermuis). FIG. 5{c} is een schematische voorstelling van een zogenoemde "Z-orde" van vensters of beeldvlakken en een "cursorviak" zoals gebruikt kan worden in het computersysteem van FIG. 5(a). FIG. 5{d} is een hoog-niveau flowdiagram dat een computer-geïmplementeerde werkwijze volgens een uitvoeringsvorm van de onderhavige uitvinding illustreert, zoals gebruikt kan worden in het computersysteem van FIG. 5{(a). FIG. 5{e} is een meer gedetailleerd flowdiagram dat een computer- geïmplementeerde werkwijze volgens een uitvoeringsvorm van de onderhavige uitvinding illustreert, zoals gebruikt kan worden in het computersysteem van FIG. 5(a}. FIG. 5{f} toont een vereenvoudigd hoogniveau-blokdiagram van hardware- en softwarecomponenten, gesitueerd in bet computersysteem van FIG. 5(a). FIG. 5{g} toont enkele regels pseudo-code die een gedeelte illustreren van een vereenvoudigde berichtenverwerker zoals gebruikt kan worden door de overlay-applicatie.
FIG. 5{h} toont enkele regels pseudo-code die een gedeelte illustreren van een vereenvoudigde voorwerp-herpositioneringsroutine zoals gebruikt kan worden door de overlay-applicatie om het tweede zichtbaar voorwerp te herpositioneren.
FIG. 6 toont een computersysteem volgens een uitvoeringsvorm van de onderhavige uitvinding, waarbij een computerinrichting verbonden is met een eerste en met een tweede aanwijsinrichting, en een O/S en GUI uitvoert dat een native muisaanwijzer/-cursor (bijv. een witte pij!) verschaft, en een overlay-applicatie volgens een uitvoeringsvorm van de onderhavige uitvinding uitvoert. De overlay-applicatie onderhoudt een eerste aanwijspositie in overeenstemming met bewegingen van de eerste aanwijsinrichting {bv. rechtermuis}, en onderhoudt een tweede aanwijspositie in overeenstemming met bewegingen van de tweede aanwijsinrichting (bv. linkermuis}, en past de positie van de native muisaanwijzer/muiscursor aan, bijv. overschrijft deze, in overeenstemming met bewegingen van de eerste aanwijsinrichting. Daarenboven verschaft de overlay-applicatie een tweede zichtbaar voorwerp (bijv. een lijn of rechthoek} die beweegt in overeenstemming met bewegingen van de tweede aanwijsinrichting, en verschaft een derde zichtbaar voorwerp, dat beweegt in overeenstemming met bewegingen van de eerste aanwijsinrichting.
FIG. 6(a) toont bewegingen van het eerste en derde zichtbaar voorwerp in overeenstemming met bewegingen van de eerste aanwijsinrichting (bv. rechtermuis). FIG. 6(b} toont bewegingen van het tweede zichtbaar voorwerp in overeenstemming met bewegingen van de tweede aanwijsinrichting (bv. linkermuis). FIG. 6{c} toont enkele regels pseudo-code die een gedeelte illustreren van een vereenvoudigde positie-bijwerkingsroutine, zoals gebruikt kan worden door de overlay-applicatie om het tweede en het derde zichtbaar voorwerp te herpositioneren.
FIG. 7 toont een computersysteem volgens een uitvoeringsvorm van de onderhavige uitvinding, waarbij een computerinrichting verbonden is met een eerste en met een tweede aanwijsinrichting, en een O/S en GUI uitvoert dat een native muisaanwijzer/-cursor (bijv. een witte pijl} verschaft, en een overlay-applicatie volgens een uitvoeringsvorm van de onderhavige uitvinding uitvoert. De overlay-applicatie onderhoudt een eerste aanwijspositie in overeenstemming met bewegingen van de eerste aanwijsinrichting {bv, rechtermuis), en onderhoudt een tweede aanwijspositie in overeenstemming met bewegingen van de tweede aanwijsinrichting (bv. linkermuis), en past de positie van de native muisaanwijzer/-cursor aan, bijv. overschrijft deze, in overeenstemming met bewegingen van de aanwijsinrichting die het meest recent is bewogen. Daarenboven verschaft de overlay-applicatie een tweede zichtbaar voorwerp (bijv. een lijn of rechthoek) die beweegt in overeenstemming met bewegingen van de tweede aanwijsinrichting (bv. linkermuis), en verschaft een derde zichtbaar voorwerp, dat beweegt in overeenstemming met bewegingen van de eerste aanwijsinrichting {bv. rechtermuis). FIG. 7(a} toont bewegingen van het eerste en derde zichtbaar voorwerp in overeenstemming met bewegingen van de eerste aanwijsinrichting {bv. rechtermuis).
FIG. 7{b} toont bewegingen van het eerste en tweede zichtbaar voorwerp in overeenstemming met bewegingen van de tweede aanwijsinrichting (bv. linkermuis). FIG. 7{c} is een hoog-niveau flowdiagram dat een computer-geïmplementeerde werkwijze volgens een uitvoeringsvorm van de onderhavige uitvinding illustreert, zoals gebruikt kan worden in het computersysteem van FIG. 7(a). FIG. 7{d} is een meer gedetailleerd flowdiagram dat een computer-geïmplementeerde werkwijze volgens een uitvoeringsvorm van de onderhavige uitvinding illustreert, zoals gebruikt kan worden in het computersysteem van FIG. 7(a). FIG. 7{e} toont enkele regels pseudo-code die een gedeelte illustreren van een vereenvoudigde berichtenverwerker zoals gebruikt kan worden door de overlay-applicatie.
FIG.8 toont een computersysteem volgens een uitvoeringsvorm van de onderhavige uitvinding, waarbij een computerinrichting verbonden is met een eerste en met een tweede aanwijsinrichting, en een O/S en GUI uitvoert dat een native muisaanwijzer /-cursor (bijv. een witte pijl) verschaft, en een overlay-applicatie volgens een uitvoeringsvorm van de onderhavige uitvinding uitvoert.
De overlay-applicatie onderhoudt een eerste aanwijspositie in overeenstemming met bewegingen van de eerste aanwijsinrichting {bv. rechtermuis}, en onderhoudt een tweede aanwijspositie in overeenstemming met bewegingen van de tweede aanwijsinrichting (bv. linkermuis), en past de positie van de native muisaanwijzer/muiscursor aan, bijv. overschrijft deze, in overeenstemming met bewegingen van de eerste aanwijsinrichting (bv. rechtermuis}. Daarenboven verschaft de overlay-applicatie een tweede zichtbaar voorwerp (bijv. een zwarte pijl) die beweegt in overeenstemming met bewegingen van de tweede aanwijsinrichting (bv. linkermuis). FIG. 8(a) toont bewegingen van het eerste zichtbaar voorwerp in overeenstemming met bewegingen van de eerste aanwijsinrichting (bv. rechtermuis). FIG. 8(b) toont bewegingen van het tweede zichtbaar voorwerp in overeenstemming met bewegingen van de tweede aanwijsinrichting (bv. linkermuis). FIG. 8{c} is een schematische voorstelling van een zogenoemde "Z-orde" van vensters of beeldvlakken en een 'cursorvlak" zoals gebruikt kan worden in het computersysteem van FIG. 8{a). FIG. 9 toont een computersysteem volgens een uitvoeringsvorm van de onderhavige uitvinding, en is een variant van het systeem getoond in FIG. 8. Waar de uitvoeringsvorm van FIG. 8 in het bijzonder nuttig is voor rechtshandige mensen, is de uitvoeringsvorm van FIG. 9 in het bijzonder nuttig voor linkshandige mensen.
FIG. 9{a} toont bewegingen van het tweede zichtbaar voorwerp (bijv. een zwarte pijl) in overeenstemming met bewegingen van de eerste aanwijsinrichting (bv. rechtermuis). FIG. 9(b} toont bewegingen van het eerste zichtbaar voorwerp (bijv. de native muiscursor/aanwijzer, hier in de vorm van een witte pijl} in overeenstemming met bewegingen van de tweede aanwijsinrichting (bv. linkermuis). FIG. 9{c) toont enkele regels pseudo-code die een gedeelte ifustreren van een vereenvoudigde berichtenverwerker zoals gebruikt kan worden door de overlay- applicatie die uitgevoerd wordt op de computerinrichting 901. FIG. 10 toont een computersysteem volgens een uitvoeringsvorm van de onderhavige uitvinding, waarbij een computerinrichting verbonden is met een eerste en met een tweede aanwijsinrichting, en een O/S en GUI uitvoert dat een native muisaanwijzer/-cursor (bijv. een witte pijl) verschaft, en een overlay-applicatie volgens een uitvoeringsvorm van de onderhavige uitvinding uitvoert. De overlay-applicatie onderhoudt een eerste aanwijspositie in overeenstemming met bewegingen van de eerste aanwijsinrichting (bv. rechtermuis}, en onderhoudt een tweede aanwijspositie in overeenstemming met bewegingen van de tweede aanwijsinrichting {bv. linkermuis), en past de positie van de native muisaanwijzer/-cursor aan, bijv. overschrijft deze, in overeenstemming met bewegingen van de aanwijsinrichting die het meest recent is bewogen. Daarenboven verschaft de overlay-applicatie een tweede zichtbaar voorwerp {bijv. een zwarte pijl} die de andere onderhouden positie inneemt. FIG. 10{a) toont bewegingen van het eerste zichtbaar voorwerp (bijv. de native muiscursor/aanwijzer) in overeenstemming met bewegingen van de eerste aanwijsinrichting (de aanwijsinrichting die bewogen wordt), terwijl het tweede zichtbaar voorwerp zich op de andere onderhouden positie bevindt. FIG. 10{b} toont bewegingen van het eerste zichtbaar voorwerp in overeenstemming met bewegingen van de tweede aanwijsinrichting {de aanwijsinrichting die bewogen wordt}, terwijl het tweede zichtbaar voorwerp {de zwarte pij!} zich op de andere onderhouden positie bevindt.
FIG. 11 toont een vereenvoudigd hoogniveau-blokdiagram van hardware- en softwarecomponenten gesitueerd in een computersysteem volgens een uitvoeringsvorm van de onderhavige uitvinding, waarbij het computersysteem een computerinrichting omvat met een speciale overlay-applicatie volgens een uitvoeringsvorm van de onderhavige uitvinding, en twee klassieke aanwijsinrichtingen rechtstreeks verbonden met de computerinrichting.
FIG. 12 toont een vereenvoudigd hoogniveau-blokdiagram van hardware- en softwarecomponenten gesitueerd in een computersysteem volgens een uitvoeringsvorm van de onderhavige uitvinding, waarbij het computersysteem een computerinrichting omvat met een speciale overlay-applicatie volgens een uitvoeringsvorm van de onderhavige uitvinding, en twee klassieke aanwijsinrichtingen verbonden met de computerinrichting via een klassieke hub.
FIG. 13 toont enkele regels pseudo-code die een gedeelte illustreren van een eerste berichtenverwerkingsroutine zoals gebruikt kan worden in overlay-applicaties volgens uitvoeringsvormen van de onderhavige uitvinding.
FIG, 14{a} tot FIG. 14{c) en FIG. 15 tonen voorbeeldmatige sequenties van signalen of berichten komende van twee klassieke muisinrichtingen, en tonen hoe deze signalen bevredigend worden behandeld door het eerste berichtenverwerkingsproces weergegeven in FIG. 13.
FIG. 16 en FIG.17 tonen twee voorbeeldmatige sequenties van signalen of berichten komende van twee klassieke muisinrichtingen, en tonen hoe deze signalen onbevredigend worden behandeld door het berichtenverwerkingsproces weergegeven in FIG. 13.
FIG. 18{a} toont enkele regels pseudo-code die een gedeelte illustreren van een tweede berichtenverwerkingsroutine zoals gebruikt kan worden in overlay-applicaties volgens uitvoeringsvormen van de onderhavige uitvinding.
FIG. 18(b) toont een variant van de routine van FIG. 18(a), zoals gebruikt kan worden in overlay-applicaties volgens uitvoeringsvormen van de onderhavige uitvinding.
FIG. 18{c} toont een meer volledige versie van de routine van FIG. 18(a), zoals gebruikt kan worden in overlay-appiicaties volgens uitvoeringsvormen van de onderhavige uitvinding.
FIG. 19 en FIG. 20 tonen twee voorbeeldmatige sequenties van signalen of berichten komende van twee klassieke muisinrichtingen, en tonen hoe deze signalen bevredigend worden behandeld door het tweede berichtenverwerkingsproces weergegeven in FIG. 18{a).
FIG. 21 toont een voorbeeldmatige sequentie van signalen of berichten komende van twee klassieke muisinrichtingen, en toont hoe deze signalen onbevredigend worden behandeld door het tweede berichtenverwerkingsproces weergegeven in FIG. 18(a).
FIG. 22{a) en FIG. 22{b} tonen twee voorbeeldmatige sequenties van signalen komende van twee speciale aanwijsinrichtingen volgens een uitvoeringsvorm van de onderhavige uitvinding, en tonen hoe deze signalen of berichten bevredigend worden behandeld door het tweede berichtenverwerkingsproces weergegeven in FIG. 18{a).
FIG. 23(a} toont een vereenvoudigd hoogniveau-blokdiagram van hardware en softwarecomponenten gesitueerd in een computersysteem volgens een uitvoeringsvorm van de onderhavige uitvinding, waarbij het computersysteem een computerinrichting omvat met een speciale overlay-applicatie volgens een uitvoeringsvorm van de onderhavige uitvinding, en twee speciale muisinrichtingen omvat volgens een uitvoeringsvorm van de onderhavige uitvinding.
FIG. 23{b} toont een voorbeeldmatig blokdiagram van een speciale muisinrichting volgens een uitvoeringsvorm van de onderhavige uitvinding, zoals gebruikt kan worden in het systeem van FIG. 23(a).
FIG. 24 toont een vereenvoudigd hoogniveau-blokdiagram van hardware- en software- componenten gesitueerd in een computersysteem volgens een uitvoeringsvorm van de onderhavige uitvinding, waarbij het computersysteem een computerinrichting omvat met een speciale overlay- applicatie volgens een uitvoeringsvorm van de onderhavige uitvinding, en twee speciale muisinrichtingen omvat volgens een uitvoeringsvorm van de onderhavige uitvinding, verbonden met de computerinrichting via een klassieke hub.
FIG, 25 toont een vereenvoudigd hoogniveau-blokdiagram van hardware- en softwarecomponenten gesitueerd in een computersysteem volgens een uitvoeringsvorm van de onderhavige uitvinding, waarbij het computersysteem een computerinrichting omvat met een speciale overlay-applicatie volgens een uitvoeringsvorm van de onderhavige uitvinding, en twee klassieke muisinrichtingen omvat verbonden met de computerinrichting via een speciale adapter of hub of dongel volgens een uitvoeringsvorm van de onderhavige uitvinding.
FIG. 26{a) tot FIG. 26{d} tonen voorbeeldmatige sequenties van signalen of berichten komende van de twee klassieke aanwijsinrichtingen van FIG. 25, en tonen hoe deze signalen of berichten worden behandeld door een berichtenverwerkingsproces weergegeven in FIG. 18, na het passeren door de speciale adapter of hub of dongel.
FIG. 27{a} toont een voorbeeldmatig blokdiagram van een hub (of dongel of adapter) volgens een uitvoeringsvorm van de onderhavige uitvinding, zoals gebruikt kan worden in het systeem van FIG. 25, welke ten minste twee fysieke connectoren heeft voor verbinding met twee klassieke bedrade aanwijsinrichtingen.
FIG. 27{b} toont een voorbeeldmatig blokdiagram van een draadioze hub (of dongel of adapter) volgens een uitvoeringsvorm van de onderhavige uitvinding, zoals gebruikt kan worden in het systeem van FIG. 25, welke één of twee RF-zendontvangers heeft voor werkzame verbinding met twee klassieke draadloze aanwijsinrichtingen.
FIG. 28{a) toont een voorbeeldmatig gebruikersinterface-venster, waarnaar hierin wordt verwezen als de "mini-gebruikersinterface”, die een veelheid van ingangsmodi en een veelheid van displaymodi ondersteunt.
FIG, 28(b) toont een voorbeeldmatig pop-up-menu zoals gebruikt kan worden in uitvoeringsvormen van de onderhavige uitvinding.
FIG, 29 toont een voorbeeldmatig gebruikersinterface-venster, waarnaar hierin wordt verwezen als de "hoofdgebruikersinterface"”, zoals gebruikt kan worden in uitvoeringsvormen van de onderhavige uitvinding, bijv. om een inputmodus en/of een displaymodus te kiezen, en/of een grootte en/of een kleur van het tweede of verder zichtbaar voorwerp te kiezen, en/of om een semi- transparantieniveau te kiezen of af te stemmen, en/of om een semi-transparante getextureerde achtergrond te kiezen.
FIG. 30 en FIG. 31(a} tonen een vergroot aanzicht van een gedeelte van FIG. 29.
FIG. 31{b} is een variant van het gedeelte van FIG. 31(a}, waar een kenmerk is toegevoegd om cursorbewegingen te dwingen om slechts horizontaal (Oost/West) of verticaal (Noord/Zuid) of diagonaal (Noord-Oost, Noord-West, Zuid-Oost, Zuid-West) te zijn.
FIG. 31{c} toont enkele regels pseudo-code die gebruikt kunnen worden in de positiebijwerkingsroutine voor het bereiken van dit effect.
FIG. 31(d} en FIG. 31(e)} illustreren een variant van de verplaatsingstransformatieroutine, waarbij bijna-horizontale bewegingen naar zuiver horizontale bewegingen worden getransformeerd.
FIG. 32 toont een computersysteem volgens een uitvoeringsvorm van de onderhavige uitvinding, waarbij de computerinrichting een O/5 en GUI en twee applicaties uitvoert (bijv. een PDF- documentviewer en een tekstverwerker}, en een overlay-applicatie volgens een uitvoeringsvorm van de onderhavige uitvinding uitvoert. De overlay-applicatie is geconfigureerd om de native muiscursor te herpositioneren en om twee beweegbare lijnen te tonen, die bewegen in overeenstemming met bewegingen van de aanwijsinrichtingen.
FIG. 33 toont een variant van het computersysteem van FIG. 32, waarbij de overiay-applicatie geconfigureerd is om de native muiscursor te herpositioneren en twee beweegbare vierkanten te tonen, die bewegen in overeenstemming met bewegingen van de aanwijsinrichtingen.
FIG. 34 toont een andere variant van het computersysteem van FIG. 32, waarbij de overlay- applicatie geconfigureerd is om de native muiscursor te herpositioneren en twee zichtbare voorwerpen te tonen, één voorwerp bevattende een beeld van een linkerhand, en het andere voorwerp bevattende een beeld van een rechterhand, welke beelden bewegen in overeenstemming met bewegingen van de aanwijsinrichtingen.
FIG. 35 toont een computersysteem volgens een uitvoeringsvorm van de onderhavige uitvinding, waarbij de computerinrichting een O/S en GUI en een voorbeeldmatige applicatie (bijv. een PDF-document editor} uitvoert, en een overlay-applicatie volgens een uitvoeringsvorm van de onderhavige uitvinding uitvoert. De overlay-applicatie is geconfigureerd om de native muiscursor te herpositioneren en een beweegbare lijn te tonen, in overeenstemming met bewegingen van de aanwijsinrichtingen.
FIG. 36 toont een variant van het computersysteem van FIG. 35, waarbij de overlay-applicatie geconfigureerd is om de native muiscursor te herpositioneren en een beweegbaar kruis te tonen, in overeenstemming met bewegingen van de aanwijsinrichtingen.
FIG. 37 toont een computersysteem volgens een uitvoeringsvorm van de onderhavige uitvinding, waarbij de computerinrichting een O/S en GUI en een voorbeeldmatige applicatie (bijv. een teksteditor} uitvoert, en een overlay-applicatie volgens een uitvoeringsvorm van de onderhavige uitvinding uitvoert. De overlay-applicatie is geconfigureerd om de native muiscursor te herpositioneren en twee beweegbare lijnen te tonen, in overeenstemming met bewegingen van de aanwijsinrichtingen.
FIG, 38 toont een variant van het computersysteem van FIG, 37, waarbij de overlay-applicatie geconfigureerd is om de native muiscursor te herpositioneren en twee beweegbare kruizen te tonen, in overeenstemming met bewegingen van de aanwijsinrichtingen.
FIG, 39 toont een computersysteem volgens een uitvoeringsvorm van de onderhavige uitvinding, waarbij de computerinrichting een O/S en GUI en een voorbeeldmatige applicatie (bijv. een teksteditor) uitvoert, en een overlay-applicatie volgens een uitvoeringsvorm van de onderhavige uitvinding uitvoert. De overlay-applicatie is geconfigureerd om de native muiscursor te herpositioneren en een verticale lijn te tonen om het scherm te splitsen in een linker gedeelte en een rechter gedeelte, en om twee horizontale lijnen te tonen die verticaal beweegbaar zijn, in overeenstemming met bewegingen van de aanwijsinrichtingen.
FIG. 40 toont een variant van het computersysteem van FIG. 39, waarbij de overlay-applicatie bijkomend twee vierkanten of rechthoeken binnen de horizontale lijnen verschaft, welke vierkanten ook horizontaal beweegbaar zijn, in overeenstemming met bewegingen van de aanwijsinrichtingen.
FIG. 41 toont een computersysteem volgens een uitvoeringsvorm van de onderhavige uitvinding omvattende een speciale monitor of weergavescherm volgens een uitvoeringsvorm van de onderhavige uitvinding, rechtstreeks aansluitbaar op een aanwijsinrichting, waarbij het speciale weergavescherm of monitor aangepast is voor het overlayen van het beeld verschaft door de computerinrichting met ten minste één zichtbaar voorwerp dat beweegbaar is in overeenstemming met bewegingen van de aanwijsinrichting verbonden met het weergavescherm. Het O/S en GUI van de computerinrichting toont de native muiscursor/aanwijzer, die beweegbaar is door de aanwijsinrichting die verbonden is met de computer.
FIG. 42 toont een voorbeeldmatig blokdiagram van een weergave-inrichting gebruikt in het systeem van FIG. 41.
FIG. 43 toont een computersysteem volgens een uitvoeringsvorm van de onderhavige uitvinding omvattende een video-adapterinrichting of video-interface-inrichting volgens een uitvoeringsvorm van de onderhavige uitvinding, die een ingangspoort heeft voor het ontvangen van eerste grafische beeldgegevens van een computerinrichting, waarbij de computerinrichting verbonden is met een eerste aanwijsinrichting. De video-adapter omvat verder een uitgangspoort voor het verschaffen van tweede grafische beeldgegevens aan een monitor of weergavescherm, waarbij de video-adapter verder een bedrade of draadloze interface omvat naar een tweede aanwijsinrichting, waarbij de video-adapter aangepast is voor het genereren van ten minste één zichtbaar voorwerp, en voor het overlayen van de eerste grafische beeldgegevens met het ten minste één zichtbaar voorwerp, en voor het bewegen van het zichtbaar voorwerp in overeenstemming met bewegingen van de tweede aanwijsinrichting verbonden met de video-adapter.
FIG. 44 toont een voorbeeldmatig hardware blokdiagram van de video-adapterinrichting van FIG. 43.
FIG. 45 toont een vereenvoudigd hoogniveau-blokdiagram van hardware- en software- componenten gesitueerd in een computersysteem volgens een uitvoeringsvorm van de onderhavige uitvinding, waarbij het computersysteem een computerinrichting omvat met een overlay-applicatie volgens een uitvoeringsvorm van de onderhavige uitvinding, en met een muis-filter-driver volgens een uitvoeringsvorm van de onderhavige uitvinding. Het computersysteem omvat verder twee klassieke muisinrichtingen die rechtstreeks verbonden zijn met de computerinrichting.
FIG. 46 toont een vereenvoudigd hoogniveau-blokdiagram van hardware- en software- componenten gesitueerd in een computersysteem volgens een uitvoeringsvorm van de onderhavige uitvinding, waarbij het computersysteem een computerinrichting omvat met een overlay-applicatie volgens een uitvoeringsvorm van de onderhavige uitvinding, en met een muis-filter-driver volgens een uitvoeringsvorm van de onderhavige uitvinding. Het computersysteem omvat verder twee klassieke muisinrichtingen en een klassieke hub, welke muisinrichtingen verbonden zijn met de computerinrichting via de hub.
FIG. 47{a) tot FIG. 47{i} tonen enkele voorbeeldmatige bewegingssequenties die gebruikt kunnen worden in uitvoeringsvormen van de onderhavige uitvinding, bv. in het computersysteem van FIG. 45 en FIG. 46.
FIG. 48 toont een voorbeeldmatige implementatie, in pseudo-code, van een sterk vereenvoudigd voorbeeld, hoe de overlay-applicatie na de detectie van een scroi-omhoog sequentie veroorzaakt door een scrol-omhoog-bericht afkomstig van de linker- of rechter-aanwijsinrichting, de native muiscursor op de linker- of rechter-positie plaatst, en daarna een scrol-commando verstuurt naar het O/S.
FIG. 49 toont aan de hand van een voorbeeld hoe de oplossing met de bewegingssequenties werkt.
FIG. 50 toont een flow-diagram van een voorbeeldmatige computer-geïmplementeerde werkwijze die uitgevoerd kan worden door de overlay-applicatie gebruikt in het systeem van FIG. 45 of FIG. 46.
FIG. 51 toont een flow-diagram van een voorbeeldmatige computer-geïmplementeerde werkwijze die uitgevoerd kan worden door de muis-filter-driver gebruikt in het systeem van FIG. 45 of FIG. 46.
FIG. 52{a} toont een flow-diagram van een andere voorbeeldmatige computer- geïmplementeerde werkwijze die uitgevoerd kan worden door de muis-filter-driver van FIG. 45 of FIG. 46, die gezien kan worden als een variant van de werkwijze van FIG. 51.
FIG. 52{b} toont een flow-diagram van een variant van de werkwijze van FIG. 51.
FIG. 52{c) en FIG. 52(d) tonen aan de hand van een eerste en een tweede voorbeeld hoe een muis-filter-driver (MFD) die de werkwijze van FIG. 52(a) of FIG. 52(b} uitvoert, berichten afkomstig van twee aanwijsinrichtingen verwerkt.
FIG. 52{e} toont een variant van de werkwijze van FIG. 52(b).
FIG. 53 toont een vereenvoudigd hoogniveau-blokdiagram van hardware- en software- componenten gesitueerd in een computersysteem volgens een uitvoeringsvorm van de onderhavige uitvinding, dat gezien kan worden als een variant van het blokdiagram van FIG. 45, zonder muis-filter- driver, maar met twee speciale muisinrichtingen volgens uitvoeringsvormen van de onderhavige uitvinding, die rechtstreeks verbonden zijn met de computerinrichting.
FIG. 54 toont een vereenvoudigd hoogniveau-blokdiagram van hardware- en software- componenten gesitueerd in een computersysteem volgens een uitvoeringsvorm van de onderhavige uitvinding, dat gezien kan worden als een variant van het blokdiagram van FIG. 46, zonder muis-filter- driver, maar met een speciale hub volgens een uitvoeringsvorm van de onderhavige uitvinding, die de computerinrichting verbindt met twee klassieke aanwijsinrichtingen.
FIG. 55({a) tot FIG. 57 illustreren een computersysteem met een besturingssysteem dat inherent twee muisinrichtingen ondersteunt, en dat twee muiscursoren toont, waaronder een eerste muiscursor (hierin ook “actieve muiscursor” genoemd}, en een tweede muiscursor {hierin ook “passieve muiscursor" genoemd). FIG. 55{a} toont een computersysteem volgens een uitvoeringsvorm van de onderhavige uitvinding, waarbij een computerinrichting verbonden is met een eerste en met een tweede aanwijsinrichting, en een O/S en GUI uitvoert dat twee muiscursoren verschaft die bewegingen volgen van de respectievelijk aanwijsinrichtingen, en waarbij het O/S en GUI aparte of nagenoeg simultane scrolbewegingen van de beide aanwijsinrichtingen ondersteunt, en het klikken en slepen toelaat met elk van de aanwijsinrichtingen, maar slechts één tegelijk. In deze uitvoeringsvorm wordt het gedrag van de twee muiscursoren verschaft door het besturingssysteem zelve (of door bepaalde modules daarvan), zonder dat een overlay-applicatie en/of een speciale muis-device-driver en/of een speciale hub en/of een speciale aanwijsinrichting vereist is.
FIG, 55{a} toont bewegingen van de eerste muiscursor (actieve muiscursor} in overeenstemming met bewegingen van de eerste aanwijsinrichting (bv. rechtermuis}. De tweede muiscursor (passieve muiscursor) bevindt zich nu op de tweede positie (ook muispositie genoemd).
FIG. 55{b} toont bewegingen van de eerste muiscursor (actieve muiscursor) in overeenstemming met bewegingen van de tweede aanwijsinrichting (bv. linkermuis). De tweede muiscursor {passieve muiscursor} bevindt zich nu op de eerste positie.
FIG. 55{c) is een schematische voorstelling van een zogenoemde "Z-orde" van vensters of beeldvlakken en een "cursorviak” zoals gebruikt kan worden in het computersysteem van FIG. 55(a).
FIG. 55{d} toont een vereenvoudigd hoogniveau-blokdiagram van hardware- en softwarecomponenten gesitueerd in het computersysteem van FIG. 55{a), waarbij het computersysteem een computerinrichting omvat met een speciaal besturingssysteem volgens een uitvoeringsvorm van de onderhavige uitvinding, dat {inherent} twee klassieke aanwijsinrichtingen ondersteunt.
FIG, 56 toont een hoog-niveau flow-diagram van een voorbeeldmatige computer- geïmplementeerde werkwijze die uitgevoerd kan worden door een speciaal besturingssysteem (of bepaalde onderdelen ervan} dat draait op de computerinrichting van FIG. 55{a}, volgens een uitvoeringsvorm van de onderhavige uitvinding.
FIG. 57a toont in meer detail hoe de laatste stap van de werkwijze van FIG. 56 er bij voorbeeld zou kunnen uitzien.
FIG. 57b is een variant van FIG. 57a.
FIG. 58 toont een variant van de werkwijze van FIG. 56, zoals uitgevoerd kan worden door een verbeterd besturingssysteem, voigens een uitvoeringsvorm van de onderhavige uitvinding.
FIG. 59 toont een variant van het computersysteem van FIG. 55, volgens een uitvoeringsvorm van de onderhavige uitvinding. FIG. 59{a} en FIG. 59(b) tonen een computersysteem met een speciaal besturingssysteem volgens een uitvoeringsvorm van de onderhavige uitvinding met twee muiscursoren. In FIG. 59(b} wordt de eerste aanwijsinrichting bewogen. In FIG. 59(b) wordt de tweede aanwijsinrichting bewogen. FIG. 59{c} is een schematische voorstelling van een zogenoemde "Z-orde” van vensters of beeldviakken en een "cursorvlak” zoals gebruikt kan worden in het computersysteem van FIG. 59(a). In FIG. 59(a) en FIG. 59(b} worden drie bitmaps gebruikt, waaronder slechts één native muiscursor. FIG. 59{d} en FIG. 59{e} tonen twee bitmaps die eveneens gebruikt kunnen worden, Er wordt opgemerkt dat de hierin getoonde timingdiagrammen hoog-niveau timingdiagrammen zijn, en vele details zijn weggelaten, welke niet relevant zijn voor het begrijpen van de principes van de onderhavige uitvinding.
Gedetailleerde beschrijving van illustratieve uitvoeringsvormen De huidige uitvinding zal beschreven worden met betrekking tot bijzondere uitvoeringsvormen en met verwijzing naar bepaalde tekeningen, echter de uitvinding wordt daartoe niet beperkt maar is enkel beperkt door de conclusies. De figuren zijn enkel schematisch en niet limiterend. In de figuren kunnen de afmetingen van sommige onderdelen overdreven en niet op schaal zijn voorgesteld voor illustratieve doeleinden. De afmetingen en de relatieve afmetingen komen soms niet overeen met de actuele praktische uitvoering van de uitvinding.
Verder worden de termen eerste, tweede en dergelijke in de beschrijving en in de conclusies gebruikt voor het onderscheiden van gelijkaardige elementen en niet noodzakelijk voor het beschrijven van een volgorde, noch in de tijd, noch spatiaal, noch in rangorde of op enige andere wijze. Het dient te worden begrepen dat de termen op die manier gebruikt onder geschikte omstandigheden verwisselbaar zijn en dat de uitvoeringsvormen van de uitvinding hierin beschreven geschikt zijn om in andere volgorde te werken dan hierin beschreven of weergegeven.
Het dient opgemerkt te worden dat de term "omvat", zoals gebruikt in de conclusies, niet als beperkt tot de erna beschreven middelen dient geïnterpreteerd te worden; deze term sluit geen andere elementen of stappen uit. Hij is zodoende te interpreteren als het specificeren van de aanwezigheid van de vermelde kenmerken, waarden, stappen of componenten waarnaar verwezen wordt, maar sluit de aanwezigheid of toevoeging van één of meerdere andere kenmerken, waarden, stappen of componenten, of groepen daarvan niet uit. Dus, de omvang van de uitdrukking "een inrichting omvattende middelen A en B" dient niet beperkt te worden tot inrichtingen die enkel uit componenten A en B bestaan. Het betekent dat met betrekking tot de huidige uitvinding, A en B de enige relevante componenten van de inrichting zijn.
Verwijzing doorheen deze specificatie naar “één uitvoeringsvorm” of “een uitvoeringsvorm” betekent dat een specifiek kenmerk, structuur of karakteristiek beschreven in verband met de uitvoeringsvorm is opgenomen in tenminste één uitvoeringsvorm van de onderhavige uitvinding. Dus, voorkomen van de uitdrukkingen “in één uitvoeringsvorm” of “in een uitvoeringsvorm” op diverse plaatsen doorheen deze specificatie hoeven niet noodzakelijk allemaal naar dezelfde uitvoeringsvorm te refereren, maar kunnen dit wel doen. Voorts, de specifieke kenmerken, structuren of karakteristieken kunnen gecombineerd worden op eender welke geschikte manier, zoals duidelijk zou zijn voor een gemiddelde vakman op basis van deze bekendmaking, in één of meerdere uitvoeringsvormen.
Vergelijkbaar dient het geapprecieerd te worden dat in de beschrijving van voorbeeldmatige uitvoeringsvormen van de uitvinding verscheidene kenmerken van de uitvinding soms samen gegroepeerd worden in één enkele uitvoeringsvorm, figuur of beschrijving daarvan met als doel het stroomlijnen van de openbaarmaking en het helpen in het begrijpen van één of meerdere van de verscheidene inventieve aspecten. Deze methode van openbaarmaking dient hoe dan ook niet geïnterpreteerd te worden als een weerspiegeling van een intentie dat de uitvinding meer kenmerken vereist dan expliciet vernoemd in iedere conclusie. Eerder, zoals de volgende conclusies weerspiegelen, liggen inventieve aspecten in minder dan alle kenmerken van één enkele voorafgaande openbaar gemaakte uitvoeringsvorm. Dus, de conclusies volgend op de gedetailleerde beschrijving zijn hierbij expliciet opgenomen in deze gedetailleerde beschrijving, met iedere op zichzelf staande conclusie als een afzonderlijke uitvoeringsvorm van deze uitvinding.
Voorts, terwijl sommige hierin beschreven uitvoeringsvormen sommige, maar niet andere, in andere uitvoeringsvormen inbegrepen kenmerken bevatten, zijn combinaties van kenmerken van verschillende uitvoeringsvormen bedoeld als gelegen binnen de reikwijdte van de uitvinding, en vormen deze verschillende uitvoeringsvormen, zoals zou begrepen worden door de vakman.
Bijvoorbeeld, in de volgende conclusies kunnen eender welke van de beschreven uitvoeringsvormen gebruikt worden in eender welke combinatie.
In de hier voorziene beschrijving worden talrijke specifieke details naar voren gebracht. Het is hoe dan ook te begrijpen dat uitvoeringsvormen van de uitvinding kunnen uitgevoerd worden zonder deze specifieke details. In andere gevallen zijn welgekende werkwijzen, structuren en technieken niet in detail getoond om deze beschrijving helder te houden.
In dit document wordt de term “alfamenging" of "menging" {van beelden of bitmaps) als synoniemen gebruikt. In de context van grafische overlay, is er een bovenste beeld {dat een hogere Z- orde heeft} en een lager beeld of onderliggend beeld (dat een lagere Z-orde heeft}. Het mengen kan uitgevoerd worden in hardware en/of software, en is gebaseerd op een parameter genoemd "alfamengingwaarde” a, welke verwijst naar het niveau van mengen van de twee beelden, waarbij a=0% betekent dat het originele beeld {met de lagere Z-orde) niet gemengd wordt met het overlaybeeld (of dat het overlaybeeld volledig transparant is), en waarbij a=100% betekent dat de resulterende pixelwaarde die van het overlaybeeld is (of dat het overlaybeeld volledig ondoorzichtig is {behalve voor volledig transparante pixels). De alfamengingwaarde kan uitgedrukt worden op een schaal van O tot 255, waarbij a=255 overeenkomt met a=100% en a=0 overeenkomt met a=0%.
Alfamengen kan bijvoorbeeld gebruikt worden voor fade-in of fade-out van een grafisch beeld.
In de context van de onderhavige uitvinding kan er ook een tweede parameter betrokken zijn bij het mengen, genoemd “TransparantColorValue". Indien een pixel van het overlaybeeld deze vooraf bepaalde waarde heeft, wordt deze pixel behandeld als "volledig transparant”. Volledig transparante pixels worden typisch gebruikt aan de omtrek van een bitmap, bijvoorbeeld voor het tonen van een rechthoekig beeld met afgeronde randen. "Alfamengen "en "volledig transparante pixels" zijn beide goed gekend in de stand der techniek.
In dit document behoren de uitdrukkingen "tekstverwerker" of "teksteditor" niet te eng geïnterpreteerd te worden, omdat vele zogenoemde tekstverwerkers (zoals bijv.
Microsoft Word} ook tekenmogelijkheden hebben.
Evenzo behoort de term "spreadsheet" of "werkblad" niet te eng geïnterpreteerd te worden, omdat vele zogenoemde werkbladapplicaties, bijv.
Microsoft Excel, ook grafische mogelijkheden hebben.
De uitdrukking “het overlayvenster is geconfigureerd in doorkijkmodus” of "het overlayvenster is geconfigureerd in "doorgeefmodus" of in "geef-door-modus” betekent dat het overlayvenster op zodanige wijze geconfigureerd is dat gebeurtenissen (Engels: events) van inputinrichtingen (zoals bijv. een muis, een toetsenbord, een trackball, een touchpad, een schrijfstift, een joystick, enz.) door het besturingssysteem verzonden worden naar één of meerdere onderliggende toepassingsvensters of naar voorwerpen daarvan, ondanks de hogere Z-orde van de overlay-applicatie, en ondanks dat de native muiscursor gesitueerd is boven het door het overlayvenster gedefinieerde gebied.
Het bericht dat wordt "doorgegeven aan lagere vensters" is bijvoorbeeld van toepassing op gebeurtenissen veroorzaakt door een knop-indrukking, en op een knop-loslating, en op een knop-klik, en op een scrol-event van een muiswiel, en op bewegingen van de aanwijsinrichting.
In de context van de onderhavige uitvinding omvat de overlay-applicatie typisch één venster geconfigureerd in doorklikmodus, en bevat optioneel maar bij voorkeur ook een tweede, hoofdzakelijk ondoorzichtig venster met gebruikersinterface-elementen, niet geconfigureerd in doorklikmodus.
In dit document betekent de uitdrukking "het venster is geconfigureerd in niet- doorklikmodus" dat het venster "niet geconfigureerd is in doorklikmodus". In dit document verwijst de term "werkgebied" (Engels: “work area") naar een gedeelte van het pixelgebied van een scherm, namelijk het gebied dat typisch ingenomen zal worden door een applicatie in het geval dat deze gemaximaliseerd wordt.
In een Microsoft Windows-omgeving betekent het "werkgebied" het ganse pixelgebied of het gebied van de desktop minus de zogenoemde "taakbalk", welke zich typisch onderaan het scherm bevindt.
In dit document worden de uitdrukkingen "muisaanwijzer" en “muiscursor” als synoniemen gebruikt, en verwijzen naar een symbool of grafisch beeld op een computermonitor of andere weergave-inrichting dat bewegingen weergeeft van een aanwijsinrichting, bijv. een muis, touchpad, of schrijfstiftpen. Deze aanwijzer of cursor kan verschillende vormen aannemen, zoals bijvoorbeeld een “pijl” of een "crosshair" {wat lijkt op een romeins cijfer "1"} of als een "hand" enz.
In dit document worden de uitdrukkingen "weergavescherm” en "monitor" en "scherm" als synoniemen gebruikt.
In dit document worden de termen "lijn" of "balk" of “lijnsegment” als synoniemen gebruikt. Zij verwijzen naar een langwerpig, bijvoorbeeld een rechthoekig, voorwerp, optioneel met afgeronde randen.
In dit document betekent de uitdrukking "de muiscursor of aanwijzer volgt bewegingen van de aanwijsinrichting” dat de positie van de cursor of aanwijzer wordt aangepast in overeenstemming met bewegingen van de aanwijsinrichting.
In dit document betekenen de termen "eerste onderhouden positie" en "positie gerelateerd aan bewegingen van de eerste aanwijsinrichting" hetzelfde. Naar deze positie wordt hierin ook verwezen als Pos1 of de coördinaten {x1,y1} of de coördinaten (xR,yR}.
In dit document verwijst de “eerste aanwijsinrichting" gewoonlijk naar de aanwijsinrichting te bedienen door de rechterhand van een gebruiker, tenzij expliciet anders vermeld.
In dit document betekenen de uitdrukkingen "tweede onderhouden positie" en "positie gerelateerd aan bewegingen van de tweede aanwijsinrichting” hetzeifde. Naar deze positie wordt hierin ook verwezen als Pos2 of de coördinaten ({x2,y2} of de coördinaten (xL,yL).
In dit document verwijst de "tweede aanwijsinrichting” gewoonlijk naar de aanwijsinrichting te bedienen door de linkerhand van een gebruiker, tenzij expliciet anders vermeld.
In dit document betekent de uitdrukking "focus verleggen tussen twee documenten" het verleggen van de focus tussen twee locaties op het scherm, bijvoorbeeld tussen een eerste venster geassocieerd met een eerste applicatie (bijv. een PDF-viewer} dat een gedeelte van een eerste document toont, en een tweede venster geassocieerd met een tweede applicatie (bijv. een tekstverwerker} dat een gedeelte van een tweede document toont, tenzij expliciet anders vermeld.
In dit document betekent de uitdrukking "host" een "computerinrichting”, tenzij expliciet anders vermeld.
In dit document betekenen de uitdrukkingen "signaal" en "bericht" verzonden door een aanwijsinrichting hetzelfde.
In dit document betekent de term “bet onderlijnen" of “markeren” van een tekstfragment het schijnbaar of virtueel onderlijnen of markeren van het tekstfragment door middel van een geoverlayd voorwerp.
In dit document verwijst de term "bewegingssequentie” naar een reeks of serie van ten minste twee of ten minste drie bewegingsberichten of verplaatsingsberichten {zoals bv. getoond in FIG. 47), of naar een datastructuur die daarmee overeenkomt. Deze worden hierin ook "valse"
verplaatsingen genoemd, omdat ze niet overeenkomen met werkelijke verplaatsingen van de aanwijsinrichtingen.
In dit document verwijst de uitdrukking "knop-bericht” naar een "knop-ingedrukt-bericht en/of een knop-losgelaten-bericht", zonder nader te specificeren om welke knop het gaat (bv. een linkerknop van een muis, of een rechterknop van een muis) en zonder te specificeren of het om een knop-indrukking dan wel een knoploslating gaat.
Wanneer hierna verwezen wordt naar "scrol-bericht", dan kan een "scrol-omhoog-bericht" of een “scrol-omlaag-bericht" bedoeld worden, of beiden, maar het is niet altijd nodig om het onderscheid te maken bij de beschrijving. Evenzo wordt in plaats van het "scrol-omhoog-commando” of het "scrol-omlaag-commando" soms simpelweg de term "scrol-commando" gebruikt.
Met een "nul-verplaatsing" wordt bedoeld een verplaatsing met dx=0 en dy=0. Met een "nulverplaatsingsbericht” wordt een verplaatsingsbericht bedoeld met dx=0 en dy=0.
In bepaalde uitvoeringsvormen van de onderhavige uitvinding wordt een “eerste/tweede positie" bijgehouden gerelateerd aan bewegingen van een eerste/tweede aanwijsinrichting (bv. een eerste/tweede muis). Naar deze bijgehouden eerste/tweede positie wordt ook verwezen als "eerste/tweede aanwijspositie” (Engels: first pointer position”). Deze komt overeen met een eerste/tweede schermpositie (Engels: display position).
Indien er maar één muiscursor is (bv. de native muiscursor verschaft door het 0/S), dan kan deze ofwel de eerste ofwel de tweede positie (of aanwijspositie) innemen. Naar deze positie wordt verwezen als de “cursorpositie”. Indien er twee muiscursoren zijn, dan is er een eerste en tweede cursorpositie.
Zoals beschreven in het achtergrondgedeelte en zoals weergegeven in FIG. 1 tot FIG. 4, zijn er vele gelegenheden wanneer een computergebruiker zou willen dat het computersysteem een mechanisme had dat de gebruiker in staat stelt om te lezen en/of te schrijven en/of te scrollen en/of te klikken op twee verschillende locaties op een scherm, terwijl vandaag de dag, in alle voornaamste besturingssystemen voor personal computers met een grafische gebruikersinterface, slechts één enkel zichtbaar voorwerp, "muisaanwijzer" of "muiscursor" genoemd, wordt ondersteund.
Hoewel de onderhavige uitvinding niet beperkt is tot "Windows-compatibele" computers, die een versie van het "Windows" besturingssysteem van Microsoft Corporation (Redmond, USA) uitvoeren, zal de onderhavige uitvinding voornamelijk uitgelegd worden met zulke computers in gedachten, teneinde de beschrijving te vereenvoudigen. Maar de principes van de onderhavige uitvinding zullen ook werken voor andere computers met een besturingssysteem O/S en een grafische gebruikersinterface GUI dat slechts één enkele muisaanwijzer verschaft, zoals bijvoorbeeld mac OS van Apple Inc, of Linux.
Hoewel de onderhavige uitvinding niet beperkt is tot het werken met twee "muisinrichtingen” als aanwijsinrichtingen, zal de onderhavige uitvinding uitgelegd worden met twee muisinrichtingen in gedachten, teneinde de beschrijving te vereenvoudigen. Maar de principes van de onderhavige uitvinding zullen ook werken met andere aanwijsinrichtingen, zoals bijvoorbeeld een touchpad of een trackball of een schrijfstift of dergelijke.
De problemen waarmee een vertaler of proeflezer of schrijver of transcriber wordt geconfronteerd in de gevallen weergegeven in FIG. 1 tot FIG. 4, zijn gerelateerd aan een kenmerk (of tekortkoming) van besturingssystemen met een GUI die slechts één enkele muiscursor of muisaanwijzer onderhouden. Vanuit een commercieel oogpunt, zou men kunnen denken dat er een eenvoudige oplossing voor deze problemen bestaat, namelijk het aansluiten van een tweede aanwijsinrichting op de computerinrichting en hopen dat er op de een of andere manier een tweede muiscursor zal verschijnen die bewegingen van de tweede aanwijsinrichting volgt. Helaas, werken klassieke besturingssystemen voor personal computers zoais bijv. Windows en mac OS niet op die wijze, omdat ze slechts één enkele cursorpositie bijhouden, en hoewel meerdere aanwijsinrichtingen fysiek verbonden kunnen worden met de computerinrichting, worden alle signalen komende van deze aanwijsinrichtingen naar de ene cursorpositie geleid. Bijvoorbeeld, wanneer twee USB- muisinrichtingen verbonden zijn met een laptopcomputer die Windows 7 of Windows 10 uitvoert, kan de Windows native muiscursor bijv. naar links bewogen worden door het naar links bewegen van elk van deze muisinrichtingen. Er zal geen tweede muiscursor automatisch verschijnen.
Daarentegen verschaft de onderhavige uitvinding een computersysteem dat twee aanwijsinrichtingen supporteert en twee of ten minste twee zichtbare voorwerpen verschaft, die individueel beweegbaar zijn door de twee aanwijsinrichtingen, bijvoorbeeld een eerste muisinrichting en een tweede muisinrichting, of slechts één zichtbaar voorwerp (namelijk de native muis-cursor} die selectief één van twee onderhouden posities inneemt.
Hoewel het technisch mogelijk zou zijn om een nieuw besturingssysteem te ontwikkelen met inherente ondersteuning voor meerdere aanwijsinrichtingen en meerdere cursoren, is zulk een oplossing geen realistische optie, althans niet voor derden. De uitvinders van de onderhavige uitvinding hebben daarom geprobeerd een oplossing te vinden op basis van een bestaand besturingssysteem O/S met een grafische gebruikersinterface GUI dat één enkele native muiscursor verschaft, en de functionaliteit daarvan uit te breiden of te verbeteren, idealiter op een zodanige wijze dat de meeste of alle bestaande applicaties hiervan voordeel kunnen hebben, zonder wijziging van deze applicaties.
Zoals verder in meer detail uitgelegd zal worden, stelt de onderhavige uitvinding voor om het probieem gedeeltelijk op te lossen in een “grafische overlay-applicatie" (zie bv. FIG. 5f, FIG. 11, FIG. 12, FIG. 23a, FIG, 24, FIG. 25, FIG. 45, FIG. 46, FIG. 53, FIG. 54) en gedeeltelijk in de driver-laag {zie bv. FIG. 5f, FIG. 11, FIG. 12, FIG. 45, FIG. 46) en/of in een speciale aanwijsinrichting {zie bv. FIG. 23a, FIG.
24, FIG. 53) en/of in een speciale hub {zie bv. FIG. 25, FIG. 54). Een onderliggend principe van de onderhavige uitvinding is dat de overlay-applicatie twee posities onderhoudt, één voor elke aanwijsinrichting, en dat de overlay-applicatie de native muiscursor van het O/S één van deze twee posities laat innemen. Dit biedt het grote voordeel dat de aanblik en het uitzicht van deze muiscursor meestal onder controle blijft van het O/S en de GUI en de andere applicaties (behalve wanneer de muiscursor over een gebruikersinterface-venster van de overlay-applicatie beweegt}. Derhalve laat de oplossing verschaft door de onderhavige uitvinding toe dat de muisaanwijzer van vorm verandert, afhankelijk van de context van de applicatie onder de overlay-applicatie, bijv. naar "een pijlaanwijzer" of een “aanwijzer met een I-streepje" of een "zandloper” enz. Dit voordeel mag niet onderschat worden, want de vorm van de muiscursor geeft vaak "visuele aanwijzingen” aan de gebruiker, die anders verloren zouden gaan.
Verwijzend nu naar de figuren.
FIG. 1 tot FIG. 4 zijn reeds beschreven in het achtergrondgedeelte, en illustreren verscheidene praktische voorbeelden wanneer één enkele gebruiker (meer bepaald een professionele gebruiker) een personal computer wil gebruiken met twee aanwijsinrichtingen, één bedienbaar met zijn/haar dominante hand, de andere bedienbaar met zijn/haar niet-dominante hand.
Teneinde de vereisten van een potentiële oplossing met twee aanwijsinrichtingen te kwantificeren, wordt aangenomen dat de gebruiker van FIG. 1 tot FIG. 4 rechtshandig is, en dat de computerinrichting van FIG. 1 tot FIG. 4 met twee aanwijsinrichtingen verbonden is: een "rechter muisinrichting” voor de rechterhand, en een "linker muisinrichting" voor de linkerhand, dan: {1) wil de gebruiker van FIG. 1 en FIG. 2 en FIG. 3 de rechter muisinrichting bewegen en/of klikken en/of scrollen, en wil de linker muisinrichting bewegen, maar hoeft niet noodzakelijkerwijs de linker muisinrichting te klikken of te scrollen; {2} alternatief wil de gebruiker van FIG. 1 de rechter muisinrichting bewegen en/of klikken en/of scrollen, en wil de linker muisinrichting bewegen en/of slepen (d.w.z. indrukken en bewegen en loslaten) en/of scrollen; (3) wil de gebruiker van FIG. 4 de rechter muisinrichting bewegen en/of klikken en/of scrollen, en wil de linker muisinrichting bewegen en/of klikken, maar hoeft niet noodzakelijkerwijs de linker muisinrichting te scrollen.
FIG, 5 toont een computersysteem 500 volgens een uitvoeringsvorm van de onderhavige uitvinding, omvattende een computerinrichting 501 en twee aanwijsinrichtingen 503R, 503L en een weergavescherm 504 en optioneel een toetsenbord 502. De computerinrichting 501 is verbonden met een eerste aanwijsinrichting 503R en met een tweede aanwijsinrichting 503L, en voert een O/S en GUI uit (bijv, Windows 10 van Microsoft) dat een native muisaanwijzer/muiscursor 505 verschaft (hier getoond in de vorm van een witte pijl), en voert een overlay-applicatie uit volgens een uitvoeringsvorm van de onderhavige uitvinding, en voert optioneel één of meerdere andere applicaties uit, zoals bijv. een tekstverwerker, een PDF-documentviewer, een webbrowser, enz. De overlay-applicatie onderhoudt twee posities Pos1, Pos2 in overeenstemming met bewegingen van de eerste en tweede aanwijsinrichting respectievelijk, en overschrijft herhaaldelijk de positie van de native muisaanwijzer/muiscursor 505 teneinde overeen te stemmen met bewegingen van de eerste aanwijsinrichting 503R. De overlay-applicatie maakt het mogelijk dat de native muisaanwijzer/muiscursor 505 van het O/S en de GUI getoond wordt als een eerste zichtbaar voorwerp in de plaats van deze te verbergen. De overlay-applicatie verschaft bijkomend een tweede zichtbaar voorwerp 506L dat beweegt in overeenstemming met bewegingen van de tweede aanwijsinrichting 503L.
FIG. 5{a} toont bewegingen van het eerste zichtbaar voorwerp 505, zijnde de native muiscursor verschaft door het O/S en de GUI, in overeenstemming met bewegingen van de eerste aanwijsinrichting 503R. Het tweede zichtbaar voorwerp 506L toont de tweede onderhouden positie Pos2, maar is stationair in FIG. 5{a), omdat in dit voorbeeld de tweede muisaanwijzer 503L niet bewogen wordt.
FIG. 5{b} toont bewegingen van het tweede zichtbaar voorwerp 506L verschaft door de overlay-applicatie, in overeenstemming met bewegingen van de tweede aanwijsinrichting 503L. Het eerste zichtbaar voorwerp 505 toont de eerste onderhouden positie Posl, maar is stationair in FIG. 5{b}, omdat in dit voorbeeld de eerste muisaanwijzer 503R niet bewogen wordt.
FIG. 5(c) is een schematische voorstelling van een zogenoemde "Z-orde" van vijf vensters of beeldvlakken 581-585 en een "cursorviak" 586 zoals gebruikt kan worden in het computersysteem 500 van FIG. 5(a) en FIG. 5(b).
Het vlak 581 kan een achtergrondvlak zijn (in het geval van Windows bekend als de "desktop"), het beeldvlak 582 kan de zichtbare voorstelling zijn van een venster geassocieerd met een teksteditor-applicatie bijvoorbeeld, het beeldvlak 583 kan de zichtbare voorstelling zijn van een venster geassocieerd met een PDF-viewerapplicatie bijvoorbeeld, het beeldvlak 584 kan de zichtbare voorstelling zijn van een venster geassocieerd met de grafische overlay-applicatie volgens de onderhavige uitvinding, het cursorvlak 586 is het beeldvlak geassocieerd met de native muiscursor verschaft door het O/S en de GUI, waarvan de vorm door een onderliggende applicatie gewijzigd kan worden. De grafische overlay-applicatie van de onderhavige uitvinding kan ook een optioneel gebruikersinterface-venster 585 hebben, een voorbeeld hiervan zal in FIG. 28 tot FIG. 31 beschreven worden. Het gebruikersinterface-venster 585 is niet geconfigureerd in doorklikmodus, maar is geconfigureerd in niet-doorklikmodus, wat wil zeggen dat zijn zichtbare componenten (bijv. knoppen, radioknoppen, checkboxes, enz.) in staat zijn (onder andere} muisklikken te ontvangen.
Het venster 584 van de overlay-applicatie kan een grootte hebben gelijk aan het zichtbare scherm, of gelijk aan het gebied van het desktopvlak 581, of gelijk aan het gebied van het zogenoemde werkgebied {d.w.z. het gebied van het scherm minus het gebied ingenomen door de zogenoemde "taakbalk"), of een andere geschikte grootte. Het venster 584 omvat ten minste één zichtbaar voorwerp 506L, bijvoorbeeld in de vorm van een rechthoekig voorwerp. Het voorwerp 506L kan ondoorzichtig of semi-transparant zijn. Het voorwerp 506L kan monochrome pixels hebben, bijvoorbeeld rode of blauwe pixels, of kan een bitmap hebben met een kleurgradiënt, enz. De andere pixels 594 van het venster 584 kunnen volledig transparante pixels zijn. Alternatief kan het venster 584 geconfigureerd zijn als een semi-transparant venster, bijvoorbeeld met een alfatransparantie in het bereik van 1% tot 99%, bijvoorbeeld in het bereik van 5% tot 95%. In dit geval kunnen de pixels van het venster 584 een kleur hebben, bijvoorbeeld een monochrome kleur, maar het venster 584 kan ook een zogenaamde “geperforeerde bitmap" of een "textuurbitmap" of een "geperforeerde textuurbitmap" omvatten. Deze aspecten zijn in meer detail beschreven in octrooiaanvrage BE2017/5891 ingediend op 4 december 2017 door dezelfde aanvrager, met als titel "METHOD, DEVICE AND COMPUTER PROGRAM FOR OVERLAYING A GRAPHICAL IMAGE", en in octrooiaanvrage PCT/EP2018/075836 met dezelfde titel, ingediend op 24 december 2018, welke documenten door referentie hierin in hun geheel zijn opgenomen, en waarnaar hierin verder wordt verwezen als de mede in behandeling zijnde "geperforeerde bitmap aanvrage(n)}". In het geval van conflict tussen het onderhavig document en de mede in behandeling zijnde aanvrage(n), overheerst het onderhavige document. De onderhavige uitvinding kan gezien worden als een variant op de octrooiaanvrage BE2017/5895 ingediend op 4 december 2017, en van octrooiaanvrage PCT/EP2018/075838 ingediend op 24 september 2018, met als titel "METHOD AND DEVICE AND SYSTEM FOR PROVIDING DUAL MOUSE SUPPORT", welke documenten eveneens door referentie hierin in hun geheel worden opgenomen.
In het voorbeeld van FIG. 5(c) heeft de grafische overlay-applicatie twee vensters: - een venster 584 dat in doorklikmodus geconfigureerd is en hoofdzakelijk transparant of semi-transparant is (bijv. met een alfatransparantie in het bereik van 5% tot 95%), - en een ander venster 585 {ook gebruikers-interface venster genoemd) dat bij voorkeur niet in doorklikmodus geconfigureerd is en dat voornamelijk ondoorzichtig is.
FIG. 5{d} toont een hoog-niveau flowdiagram van een computer-geïmplementeerde werkwijze 570 volgens een uitvoeringsvorm van de onderhavige uitvinding, voor het verschaffen van een eerste en een tweede zichtbaar voorwerp 505, 506L separaat beweegbaar door respectievelijk een eerste aanwijsinrichting 503R en een tweede aanwijsinrichting 503L. De werkwijze kan geïmplementeerd zijn in een overlay-applicatie 551 (zie FIG. 5f) die op de computerinrichting 501 (zie FIG. 5a) uitgevoerd kan worden, welke computerinrichting 501 ook een besturingssysteem O/S met een grafische gebruikersinterface GUI omvat dat één enkele native muiscursor 505 verschaft. De computerinrichting 501 is verbonden met de eerste en de tweede aanwijsinrichting 503R, 503L. De werkwijze onderhoudt twee posities Posl en Pos2 (zie ook FIG. 5f). De werkwijze weergegeven in FIG. 5d omvat de volgende stappen: a) het configureren, 571 van het besturingssysteem O/S met grafische gebruikersinterface GUI om de native muiscursor 505 te verschaffen als het eerste zichtbaar voorwerp, bijv. door toe te laten dat het 0/5 de muiscursor toont of door de muiscursor niet expliciet te verbergen; b} het verschaffen 572 van een grafisch overlayvenster 584 omvattende het tweede zichtbaar voorwerp 506L; c}) het configureren 573 van het grafisch overlayvenster 584 in doorklikmodus; e) het aanpassen van een positie van de native muiscursor 505 in overeenstemming met bewegingen van de eerste aanwijsinrichting 503R, en het aanpassen van een positie van het tweede zichtbaar voorwerp 506L in overeenstemming met bewegingen van de tweede aanwijsinrichting 503L.
In een uitvoeringsvorm wordt de positie van het eerste zichtbaar voorwerp 505 bijgewerkt aan dezelfde frequentie als de positie van het tweede zichtbaar voorwerp 506L.
In een andere uitvoeringsvorm wordt de positie van het eerste zichtbaar voorwerp 505 bijgewerkt aan een andere frequentie dan de positie van het tweede zichtbaar voorwerp 506L. Bijvoorbeeld, de positie van de native muiscursor kan bijgewerkt worden in een berichten- verwerkingsroutine (zie bijvoorbeeld FIG. 5g), en de positie van het tweede zichtbaar voorwerp kan bijvoorbeeld bijgewerkt worden op basis van een timer-interrupt.
FIG. 5{e} toont een meer gedetailleerd voorbeeld van een computer-geïmplementeerde werkwijze volgens een uitvoeringsvorm van de onderhavige uitvinding, die gezien kan worden als een speciaal geval van de werkwijze getoond in FIG. 5(d). De werkwijze van FIG. 5(e) omvat verder stap d): d) het configureren 574 van het besturingssysteem O/S om ruwe inputberichten te zenden; In het geval dat het O/S een Microsoft Windows variant is, kan deze stap het registreren omvatten van de applicatie bij het O/S voor het ontvangen van ruwe inputgegevens, bijv. in de vorm van inputberichten bekend als WM_INPUT berichten, bijvoorbeeld gebruikmakende van de WinAPl functie RegisterRawinputDevices(). Er wordt opgemerkt dat applicaties niet automatisch ruwe inputberichten ontvangen.
En waarbij stap e} omvat: het herhaaldelijk uitvoeren van: f} het ontvangen 575 van een ruw inputbericht;
g) het bepalen of het ruwe inputbericht gerelateerd is aan een beweging van de eerste of tweede aanwijsinrichting 503R, 503L, en indien het resultaat van deze test waar is, het verkrijgen van verplaatsingsinformatie dx, dy gerelateerd aan de verplaatsing, en het bijwerken van de overeenkomstige eerste of tweede positie Posl, Pos2; en indien het resultaat van deze test onwaar is, het overslaan van stap h); h} het aanpassen 577 van de positie van de native muiscursor 505 op basis van de eerste onderhouden positie Posl, of de tweede onderhouden positie Pos2, of de positie Posl of Pos2 geassocieerd met de aanwijsinrichting die het meest recent werd bediend. In het voorbeeld van FIG. 5{a) en FIG. 5(b} wordt de positie van de native muiscursor 505 altijd bijgewerkt in overeenstemming met bewegingen van de eerste aanwijsinrichting 503R, maar zoals verder uitgelegd zal worden kan deze positie ook op een andere manier bijgewerkt worden.
En waarbij stap e} verder omvat: i} het herhaaldelijk aanpassen 578 van een positie van het tweede zichtbaar voorwerp 506L in overeenstemming met de tweede positie (Pos2). Deze stap i} kan ook asynchroon uitgevoerd worden ten opzichte van stappen f) tot h}, om performance-redenen. Alternatief kan stap i) uitgevoerd worden na elke uitvoering van stap h).
Stap g) in combinatie met stap h) wordt hierin ook de "positiebijwerkingsroutine" genoemd, het is een gedeelte van de berichtenverwerkingsroutine. Stap i} wordt hierin ook "voorwerp- herpositioneringsroutine” genoemd.
FIG. 5{f} toont een vereenvoudigd hoogniveau-blokdiagram van hardware- en software- componenten gesitueerd in het computersysteem 500, omvattende een computerinrichting 501 met een speciale overlay-applicatie volgens een uitvoeringsvorm van de onderhavige uitvinding, en twee klassieke aanwijsinrichtingen M1, M2.
De overlay-applicatie onderhoudt twee aanwijsposities: een eerste positie Posl die coördinaten (x1, yl) heeft en een tweede positie Pos2 die coördinaten (x2, y2} heeft. Een berichtenverwerker 552 (Engels: message handler of message processor) van de overlay-applicatie 551 zal de eerste en tweede positie Posl, Pos2 bijwerken op basis van bewegingen van de twee aanwijsinrichtingen, bv. zoals verder besproken in FIG. 5(g).
De grafische overlay-applicatie van het systeem 500 past herhaaldelijk de positie van de native muiscursor 505 aan naar de eerste onderhouden positie Pos1, overeenkomstig bewegingen van de rechter muisinrichting 503R, en past herhaaldelijk de positie van het tweede zichtbaar voorwerp 506L aan om overeen te stemmen met de tweede onderhouden positie Pos2, overeenkomstig bewegingen van de linker muisinrichting 503L, of omgekeerd.
FIG, 5(g) toont enkele regels pseudo-code om een vereenvoudigde versie te illustreren van een berichtenverwerkingsroutine zoals gebruikt kan worden in de overlay-applicatie 551 die in de computerinrichting 501 van FIG. 5(a) en FIG. 5(b) wordt uitgevoerd. De berichtenverwerker 552 wordt getriggerd door binnenkomende ruwe berichten vanuit inputinrichtingen (zoals bijv. toetsenbord en/of aanwijsinrichtingen) op een wijze die op zich gekend is in de stand der techniek. De berichtenverwerker kan verdere informatie gerelateerd aan elk bericht verkrijgen of verzoeken, bijvoorbeeld om een device-handle te krijgen teneinde te bepalen welke aanwijsinrichting het bericht verzonden heeft, en/of om een horizontale en verticale verplaatsingswaarde dx, dy te krijgen als indicatie voor een beweging in de horizontale en/of verticale richting, en/of om een waarde te krijgen als indicatie van hoeveel een scrolwiel gescrold is, enz.
Zoals uit de pseudo-code begrepen kan worden, indien het bericht door de linker aanwijsinrichting 503L werd verzonden, zal de tweede positie Pos2 bijgewerkt worden gebruikmakende van de verplaatsingswaardes dx, dy, en zal de positie van de native muiscursor 505 ingesteld (of teruggezet) worden naar de eerste positie Posl gerelateerd aan de rechter aanwijsinrichting 503R. Indien het bericht door de rechter aanwijsinrichting 503R verzonden werd, zal de eerste positie Pos1 bijgewerkt worden gebruikmakende van de verplaatsingswaardes dx, dy, en zal de positie van de native muiscursor 505 aangepast worden om dienovereenkomstig te bewegen. Testen hebben aangetoond dat deze routine ook gelijktijdige bewegingen van de linker en rechter aanwijsinrichting 503L, 503R correct afhandelt.
In het voorbeeld getoond in FIG. 5{g) worden de X en Y-coördinaat van de eerste en tweede positie Posl, Pos2 verhoogd met de verplaatsingswaardes dx, dy zoals ontvangen van de aanwijsinrichtingen, maar in de praktijk kunnen de verplaatsingswaardes dx, dy eerst getransformeerd worden, lineair of niet-lineair, om de bewegingen minder of meer gevoelig te maken (zie de radioknoppen "Snelheid Linker/Rechter Muis" [Engels: Speed Left Mouse, Speed Right Mouse] en de "snelheidscurve" [Engels: Speed curve] in FIG. 31a).
Zoals in FIG. 31{b} en FIG. 31{c) verder zal worden besproken, zijn andere aanpassingen van de verplaatsingswaardes mogelijk.
FIG. 5(h} toont enkele regels pseudo-code om een vereenvoudigde versie te illustreren van een routine die de positie van het tweede zichtbaar voorwerp 506L bijwerkt, in het voorbeeld zijnde een rechthoek, maar de onderhavige uitvinding is daartoe niet beperkt. Deze routine kan op een timer- interrupt gebaseerd zijn. Op deze manier kan het bijwerken van de positie van het tweede zichtbaar voorwerp 506L buiten de berichtenverwerker behandeld worden, wat om prestatieredenen de voorkeur kan genieten. De periode van de timer kan bijvoorbeeld gekozen worden in het bereik van 1 ms tot 250 ms, bij voorkeur in het bereik van ongeveer 1 ms tot ongeveer 100 ms, bijvoorbeeld gelijk aan ongeveer 1 ms of ongeveer 5 ms of ongeveer 10 ms of ongeveer 20 ms of ongeveer 25 ms of ongeveer 30 ms of ongeveer 35 ms of ongeveer 40 ms of ongeveer 50 ms of ongeveer 75 ms of ongeveer 100 ms. De waarde van deze periode is niet kritisch. Hoe kleiner deze tijdsperiodewaarde, hoe sneller de respons, maar hoe hoger de CPU-belasting. Hoe groter deze tijdsperiodewaarde, hoe trager de respons, maar hoe lager de CPU-belasting. De vakman kan eenvoudig een geschikte waarde vinden door routinematig experimenteren. Sommige uitvoeringsvorm kunnen de eindgebruiker toelaten om een geprefereerde timerwaarde te kiezen. FIG. 5{a) tot FIG. 5{h) illustreren een eerste uitvoeringsvorm van de onderhavige uitvinding, in het bijzonder geschikt voor rechtshandige mensen. Het O/S en GUI verschaffen de native muiscursor 505, maar de overlay-applicatie past herhaaldelijk diens positie aan, zodanig dat de positie enkel gedefinieerd wordt door bewegingen van de rechter muisinrichting 503R. De rechter muisinrichting 503R kan bewogen worden, zijn knoppen kunnen ingedrukt of losgelaten of geklikt worden, en zijn scrollwiel kan gescrold worden zoals in de stand der techniek. Daarenboven toont de overlay-applicatie een tweede zichtbaar voorwerp 506L, dat in het voorbeeld van FIG. 5(a} de vorm heeft van een lijn of rechthoek, en de overlay-applicatie past herhaaldelijk diens positie aan, zodanig dat de positie enkel gedefinieerd wordt door bewegingen van de linker muisinrichting 503L. Deze uitvoeringsvorm adresseert met succes de in FIG. 1 tot FIG. 3 weergegeven problemen. De gebruiker kan zijn niet- dominante hand gebruiken om het tweede voorwerp 506L te bewegen om tekst die hij of zij wil lezen te onderlijnen of te markeren, en kan zijn dominante hand gebruiken om een document te bewerken, tekst te kiezen, menu's te kiezen enz., gebruikmakende van de native muiscursor 505. Dus de overlay- applicatie verbetert het O/S en GUI door één additioneel zichtbaar voorwerp 506L te verschaffen dat beweegbaar is door de linker aanwijsinrichting 503L, terwijl de meeste of alle functionaliteit van de native muiscursor behouden blijft. Het additioneel zichtbaar voorwerp 506L kan bijvoorbeeld gebruikt worden voor het onderlijnen of markeren van tekstfragmenten.
In een uitvoeringsvorm kan de overlay-applicatie een speciaal daarvoor voorziene applicatie zijn die enkel het specifieke gedrag weergegeven in FIG. 5(a) en FIG. 5{b} implementeert, waarbij de native muiscursor 505 door de rechter aanwijsinrichting wordt bewogen, en een tweede zichtbaar voorwerp 506L dat de vorm heeft van een lijn beweegbaar is door de linker aanwijsinrichting, in welk geval het gebruikersinterface-venster 585 kan worden weggelaten.
In een andere uitvoeringsvorm kan de overlay-applicatie verscheidene opties implementeren, en kan een gebruiker een modus kiezen uit een veelheid van modi. In dit geval is een gebruikersinterface-venster handig, zie bijvoorbeeld de voorbeeldmatige gebruikersinterface van FIG. 28{a)}, bijv. modus 2860(d), en de voorbeeldmatige gebruikersinterface van FIG. 30, bijv. modus 3060(d). De "grote rechter muis” getoond aan de linkerzijde van FIG. 28(a) is een hint aan de gebruiker dat de rechter muis de dominante muis is voor de modi 3060, wat wil zeggen dat de "rechter muisinrichting" de native muiscursor 505 aanstuurt. De "kleine linker muis" is een hint aan de gebruiker dat de linker muisinrichting de niet-dominante muis is die het tweede zichtbaar voorwerp aanstuurt, in het geval van modus 2860(d) zijnde een lijn of rechthoek.
FIG. 6{a} tot FIG. 6{c) toont een computersysteem 600 volgens een andere uitvoeringsvorm van de onderhavige uitvinding, dat gezien kan worden als een variant van het computersysteem 500 van FIG.5, waarbij een computerinrichting 601 verbonden is met een eerste en tweede aanwijsinrichting 603R, 603L, en een O/S en GUI (bijv. Windows 10) uitvoert dat een native muisaanwijzer 605 verschaft (bijv. met de vorm van een witte pijl), en een overlay-applicatie volgens een uitvoeringsvorm van de onderhavige uitvinding uitvoert. De overlay-applicatie onderhoudt een eerste en een tweede positie Pos1, Pos2 in overeenstemming met bewegingen van respectievelijk de eerste en tweede aanwijsinrichting 603R, 603L, en past de positie van de native muisaanwijzer 605 aan, bijv. overschrijft deze, in overeenstemming met bewegingen van de eerste aanwijsinrichting 603R. De overlay-applicatie verschaft een tweede zichtbaar voorwerp 606L dat beweegt in overeenstemming met bewegingen van de tweede aanwijsinrichting 603L, en verschaft ook een derde zichtbaar voorwerp 606R dat beweegt in overeenstemming met bewegingen van de eerste aanwijsinrichting 603R. In het voorbeeld van FIG. 6 zijn het tweede en het derde voorwerp 606L en 606R rechthoeken die dezelfde grootte en kleur hebben, maar dat is niet absoluut vereist, en de twee zichtbare voorwerpen kunnen een verschillende grootte en/of een verschillende vorm en/of een verschillende kleur hebben. Dus, de overlay-applicatie gebruikt in het computersysteem 600 van FIG. 6 verbetert het O/5S en de GUI door twee additionele zichtbare voorwerpen 606L, 606R te verschaffen die beweegbaar zijn door de twee aanwijsinrichtingen 603L, 603R, en die bijvoorbeeld gebruikt kunnen worden voor het onderlijnen of markeren van tekstfragmenten van klassieke applicaties die op de computer worden uitgevoerd, bijvoorbeeld: een tekstverwerker, een webbrowser, een slideshow, een PowerPointpresentatie, een PDF-documentviewer, enz. De voorwerpen 606L, 606R kunnen ondoorzichtig of semi-transparant zijn of kunnen een "geperforeerde bitmap" bevatten zoals beschreven in de mede in behandeling zijnde "geperforeerde bitmap aanvrage{n}".
FIG. 6{(a) toont bewegingen van het eerste zichtbaar voorwerp 605 (de native muiscursor} en bewegingen van het derde zichtbaar voorwerp 606R in overeenstemming met bewegingen van de eerste aanwijsinrichting 603R (bv. de rechtermuis).
FIG. 6{b) toont bewegingen van het tweede zichtbaar voorwerp 606L in overeenstemming met bewegingen van de tweede aanwijsinrichting 603L (bv. de linkermuis).
FIG. 6{c) toont een voorbeeldmatige voorwerp-herpositioneringsroutine die gebruikt kan worden in de overlay-applicatie om de twee zichtbare voorwerpen 606L, 606R te bewegen, in pseudo- code. Eenvoudig gesteld, worden de coördinaten van het voorwerp 606L (genoemd rectanglel) bijgewerkt volgens de tweede positie Pos2 met coördinaten xL, yL geassocieerd met de tweede muisinrichting 603L, en worden de coördinaten van het voorwerp 606R (genoemd rectangleR}
bijgewerkt volgens de eerste positie Posl met coördinaten xR, yR geassocieerd met de eerste muisinrichting 603R. Deze stappen worden herhaaldelijk uitgevoerd, bijvoorbeeld op basis van een timer. Er wordt op gewezen dat, in FIG. 6{a) en FIG. 6{b}, het eerste zichtbaar voorwerp 606R wordt getoond aan de rechterzijde van het scherm 604, en het tweede zichtbaar voorwerp 606L wordt getoond aan de linkerzijde van het scherm 604, maar dat is niet absoluut vereist, en beide voorwerpen kunnen overal op het scherm bewogen worden, zoals bijvoorbeeld getoond in FIG. 37. In de praktijk echter, zal een gebruiker het typisch meer intuïtief vinden om het voorwerp gerelateerd aan de linker aanwijsinrichting aan de linkerzijde van het scherm te positioneren. In andere uitvoeringsvormen is de beweging van het tweede en optioneel verder{e} voorwerp(en} 3906R, 3906L beperkt, zoals bijvoorbeeld getoond in FIG. 39, dat later zal besproken worden, maar zelfs dan is de beweging van de native muiscursor 3905 bij voorkeur niet beperkt.
Het computersysteem 600 van FIG. 6 kan bijvoorbeeld gebruikt worden door proeflezers voor het schijnbaar onderlijnen van tekstgedeeltes in twee documenten die zijde aan zijde op het scherm 604 worden getoond, zonder de inhoud van de documenten zelf daadwerkelijk te wijzigen. Het is een belangrijk voordeel dat tekstfragmenten schijnbaar onderlijnd kunnen worden in twee verschillende documenten tegelijk. Dit kan de cognitieve last van de gebruiker drastisch verlagen bij het heen en weer wisselen van focus tussen de twee documenten. Het is een belangrijk voordeel dat de tekstfragmenten onafhankelijk onderlijnd kunnen worden {in tegenstelling tot bijvoorbeeld tekstverwerkers die enkel synchrone navigatie doorheen twee tekstdocumenten mogelijk maken), niet slechts omdat zinnen in één taal langer of korter kunnen zijn dan zinnen in een andere taal, maar ook omdat de twee documenten een verschillende formattering kunnen hebben, bijv. een verschillende layout en/of een verschillend lettertype en/of een verschillende lijntussenafstand, enz. Het is een voordeel dat "de tweede muis en het tweede voorwerp" gebruikt kunnen worden in combinatie met bijna iedere onderliggende applicatie, bijv. een tekstverwerker, een PDF-documentlezer, een werkblad, een webbrowser, een PowerPoint-toepassing, enz. zonder ook maar één van deze applicaties te hoeven wijzigen. Bijvoorbeeld, het voorwerp 606L kan bewogen worden over een PDF-document, en het voorwerp 606R kan bewogen worden over een tekstdocument, en omgekeerd. In het voorbeeld van FIG, 6(a) en FIG. 6(b)}, beweegt de native muiscursor 605 mee met het voorwerp 606R.
De gebruiker kan de native muiscursor 605 gebruiken om overal op het scherm te klikken en/of te slepen en/of menu-opties te kiezen, bijvoorbeeld om in het tekstdocument tekst te selecteren die vervolgens gewist of door andere tekst vervangen kan worden gebruikmakende van het toetsenbord 602, of om in de taakbalk (niet expliciet getoond) nieuwe applicaties te openen op dezelfde wijze als zonder de grafische overlay-applicatie kan gedaan worden.
In de voorbeeldmatige gebruikersinterface van FIG. 28(a), kan het gedrag van FIG. 6{a) en FIG. 6{b} overeenstemmen met modus 2860(h}. {het woord “kan” wordt gebruikt, omdat verscheidene variaties mogelijk zijn, bijvoorbeeld voor de berichtenverwerker, zoals verder duidelijk zal worden).
FIG. 7 toont een computersysteem 700 volgens een andere uitvoeringsvorm van de onderhavige uitvinding, die gezien kan worden als een variant van het computersysteem 600 van FIG. 6, waarbij een computerinrichting 701 verbonden is met een eerste aanwijsinrichting 703R en een tweede aanwijsinrichting 703L, en een O/S en GUI uitvoert dat een native muisaanwijzer of muiscursor 705 verschaft (bijv. een witte pijl), en een overlay-applicatie volgens een uitvoeringsvorm van de onderhavige uitvinding uitvoert, die een tweede en een derde zichtbaar voorwerp 706L, 706R verschaft, De overlay-applicatie onderhoudt een eerste en een tweede aanwijspositie Posl, Pos2 in overeenstemming met bewegingen van de eerste en tweede aanwijsinrichting 703R, 703L respectievelijk, en past de positie van de native muisaanwijzer/-cursor 705 aan, bijv. overschrijft deze, in overeenstemming met bewegingen van de aanwijsinrichting die het meest recent werd bewogen. Dus, indien de rechter aanwijsinrichting 703R bewogen wordt en de linker aanwijsinrichting 703L stationair is, zoals weergegeven in FIG. 7{a), dan volgt de native muiscursor 705 bewegingen van de rechter aanwijsinrichting 703R, en kunnen de knoppen en/of het scrolwiel van de rechter aanwijsinrichting 703R gebruikt worden. Indien op een ander moment in tijd de linker aanwijsinrichting 703L bewogen wordt en de rechter aanwijsinrichting 703R stationair is, zoals weergegeven in FIG. 7{b), dan volgt de native muiscursor 705 bewegingen van de linker aanwijsinrichting 703L, en kunnen de knoppen en/of het scrolwiel van de linker aanwijsinrichting 703L gebruikt worden. Zoals begrepen kan worden uit FIG. 7{a} en FIG. 7{b} volgt de native muiscursor bewegingen van de aanwijsinrichting die bewogen wordt, tot het moment dat de andere aanwijsinrichting bewogen wordt, hetgeen veroorzaakt dat de native muisaanwijzer naar de andere onderhouden positie springt. Op deze wijze kan de gebruiker de native muisaanwijzer op twee verschillende locaties van het scherm gebruiken, zij het op verschillende momenten in tijd. Of met andere woorden uitgedrukt, in deze uitvoeringsvorm, wordt de native muiscursor 705 die verschaft wordt door het O/5S en de GUI tijdelijk geassocieerd met één van de aanwijsinrichtingen 703L, 703R op elk moment in de tijd, dus de native muisaanwijzer 705 wordt “gedeeld in tijd" tussen de twee aanwijsinrichtingen.
FIG. 7{c} is een hoog-niveau flowdiagram dat een computer-geïmplementeerde werkwijze toont volgens een uitvoeringsvorm van de onderhavige uitvinding, zoals gebruikt kan worden in het computersysteem van FIG. 7{a).
FIG. 7(c) toont een computer-geïmplementeerde werkwijze voor het verschaffen van een eerste zichtbaar voorwerp 705 en een tweede zichtbaar voorwerp 706L en een derde zichtbaar voorwerp 706R. Het derde zichtbaar voorwerp 706R is beweegbaar door een eerste aanwijsinrichting 703R. Het tweede zichtbaar voorwerp 706L is separaat beweegbaar door een tweede aanwijsinrichting 703L.
Het eerste zichtbaar voorwerp 705 is selectief beweegbaar door één van de eerste aanwijsinrichting 703R en de tweede aanwijsinrichting 703L, afhankelijk van welke het meest recent bewogen en/of bediend werd. In FIG. 7(a) wordt de eerste aanwijsinrichting 703R bewogen, en bewegen de native muiscursor 705 en het derde zichtbaar voorwerp 703R beide in overeenstemming met bewegingen van de rechter aanwijsinrichting, of meer bepaald, in overeenstemming met een eerste positie Posl. In FIG. 7{b} wordt de tweede aanwijsinrichting 703L bewogen, en bewegen de native muiscursor 705 en het tweede zichtbaar voorwerp 706L beide in overeenstemming met bewegingen van de linker aanwijsinrichting 703L. Het kan begrepen worden dat de native muiscursor 705 geleidelijk beweegt zolang slechts één aanwijsinrichting wordt bewogen, maar typisch plots springt van Post naar Pos2 of omgekeerd wanneer de andere aanwijsinrichting wordt bewogen.
FIG. 7{c} toont een flowdiagram dat een computer-geïmplementeerde werkwijze illustreert die de volgende stappen omvat: a) het configureren, bijv. het toelaten dat een besturingssysteem O/5 met een grafische gebruikersinterface GUI een native muiscursor 705 als een eerste zichtbaar voorwerp verschaft; b} het verschaffen van een grafisch overlayvenster dat een tweede zichtbaar voorwerp 706L en een derde zichtbaar voorwerp 706R omvat; c} het configureren van het grafisch overlayvenster in doorklikmodus; e) het aanpassen 774 van een positie van de native muiscursor 705 in overeenstemming met bewegingen van één van de eerste aanwijsinrichting 703R en de tweede aanwijsinrichting 703L, afhankelijk van welke beweging het meest recent was, en het aanpassen 775 van een positie van het tweede zichtbaar voorwerp 706L in overeenstemming met bewegingen van de tweede aanwijsinrichting 703L, en het aanpassen van een positie van het derde zichtbaar voorwerp 706R in overeenstemming met bewegingen van de eerste aanwijsinrichting 703R.
In een variant van de uitvoeringsvorm getoond in FIG. 7(a) tot FIG. 7(c} worden geen twee horizontale strepen getoond, maar wordt enkel de native muis-cursor 705 getoond, en van plaats veranderd zoals hoger beschreven. In dit geval kunnen de stappen 772 en 775 dus weggelaten worden {vandaar de weergave in stippellijn).
In een verdere variant van deze uitvoeringsvorm wordt ook stap c} weggelaten. Zulke werkwijze kan bv. uitgevoerd worden door een aangepaste applicatie (bv. één van de applicaties 562 van FIG. 5f} die zelf voorzieningen heeft voor het ondersteunen van twee muizen, zonder gebruik te hoeven maken van de overlay-applicatie 551. Deze variant kan ook uitgevoerd worden door een module die toegevoegd kan worden aan het besturingssysteem, om een verbeterd besturingssysteem te verschaffen dat eigenlijk gebaseerd is op één native muiscursor die kan verspringen. In dat geval kan ook stap 771 weggelaten worden, want dit is reeds voorzien in het besturingssysteem.
FIG. 7{d} is een meer gedetailleerd flowdiagram dat een computer-geïmplementeerde werkwijze 770 toont volgens een uitvoeringsvorm van de onderhavige uitvinding, zoals gebruikt kan worden in het computersysteem van FIG. 7{a). De werkwijze 770 omvat de volgende stappen: a} het configureren 771, bijv. het toelaten dat een besturingssysteem O/S met een grafische gebruikersinterface GUI een native muiscursor 705 als een eerste zichtbaar voorwerp verschaft; b} het verschaffen 772 van een grafisch overlayvenster dat een tweede zichtbaar voorwerp 706L en een derde zichtbaar voorwerp 706R omvat; c) het configureren 773 van het grafisch overlayvenster in doorklikmodus; d} het configureren 774 van het O/S om ruwe inputberichten te zenden, en het verschaffen van een berichtenverwerker om deze ruwe inputberichten te verwerken; e) het herhaaldelijk uitvoeren van de volgende stappen: f) het ontvangen 775 van een ruw inputbericht; g) indien het ontvangen ruwe inputbericht gerelateerd is aan een beweging van de eerste/tweede aanwijsinrichting 703R, 703L, het verkrijgen 776 van verplaatsings- informatie dx, dy en het bijwerken van respectievelijk een eerste en tweede positie Posi, Pos2; h} het aanpassen 777 van een positie van de native muiscursor 705 in overeen- stemming met de eerste of tweede positie Posl, Pos2 afhankelijk van het meest recente inputbericht; en het herhaaldelijk uitvoeren van de volgende stap: i} het aanpassen 778 van een positie van het tweede en derde zichtbaar voorwerp 706L, 706R in overeenstemming met respectievelijk de eerste positie Posl en de tweede positie Pos2. In een variant van deze uitvoeringsvorm, die bv. uitgevoerd kan worden in een overlay- applicatie waarbij geen twee horizontale strepen worden getoond, maar waarbij enkel de native muis- cursor 705 wordt getoond en van plaats veranderd, kan een gedeelte van stap 772 weggelaten worden, alsook stap 778. In een verdere variant van deze uitvoeringsvorm, die bv. uitgevoerd kan worden in een module die aan het besturingssysteem wordt toegevoegd, kunnen stappen 772 en 773 en 778 helemaal weggelaten worden. De stappen 771 en 774 en 775 zijn in principe reeds aanwezig in het besturingssysteem, maar kunnen mogelijks op een andere wijze (bv. een efficiëntere wijze)
geïmplementeerd worden in het besturingssysteem zelve. Deze module kan bv. een tweede cursorvlak (bv. met een tweede witte pij! of met een tweede zwarte of blauwe of rode pijl} tonen, met een Z-orde die hoger ligt dan die van de applicaties, bv. zoals het cursorvlak 586 van FIG. 5c.
FIG. 7(e} toont een voorbeeldmatige positie-bijwerkingsroutine {als gedeelte van de berichtenverwerkingsroutine), in pseudo-code, die gebruikt kan worden om de positie van de twee horizontale lijnen bij te werken. Zoals te zien is, worden de coördinaten (xR,yR)} en (xL‚yL} van de eerste en tweede positie Pos1, Pos2 bijgewerkt in overeenstemming met bewegingen van respectievelijk de eerste en tweede aanwijsinrichting 703R, 703L (zij het onrechtstreeks, door gebruik te maken van een device-handle welke het O/S aan elke aanwijsinrichting toekent}, en wordt de positie van de native muiscursor 705 aangepast afhankelijk van het meest recente bewegingsbericht.
Een voordeel van deze uitvoeringsvorm is dat een gebruiker twee muisinrichtingen kan gebruiken voor het tegelijk tonen van twee zichtbare voorwerpen, bijv. twee lijnen of twee rechthoeken voor het onderlijnen of markeren van tekstfragmenten op twee verschillende locaties van het scherm, en daarenboven kan de gebruiker ook de muisinrichting klikken of scrollen die het meest recent wordt bewogen. Dit kan bijvoorbeeld gebruikt worden voor het omhoog/omlaag scrollen van de respectievelijke documenten bij het proeflezen.
FIG. 8 toont een ander computersysteem 800 volgens een uitvoeringsvorm van de onderhavige uitvinding, dat gezien kan worden als een variant van het computersysteem 500 van FIG. 5, waarbij het tweede zichtbaar voorwerp 806 de vorm heeft van een zwarte pijl, maar uiteraard is de uitvinding daartoe niet beperkt, en kan een pijl van een andere kleur eveneens gebruikt worden, maar de tekening is niet beperkt tot een pijl, en ook andere vormen kunnen gebruikt worden, zie bijvoorbeeld FIG. 34 waar twee bitmaps met een afbeelding van een hand worden gebruikt.
Zoals weergegeven in FIG. 8{c} omvat de overlay-applicatie gebruikt in het computersysteem 800 van FIG. 8 een doorklikvenster 884 gelijkend op het venster 584 van FIG. 5{c}, maar waarbij het rechthoekig voorwerp 506L vervangen is door een zichtbaar voorwerp (bijv. een "beeldcomponent”) bevattende een geschikte bitmap. De beeldcomponent 806L kan een bitmap bevatten die pixels bevat die een zwarte pijl voorstellen omgeven door volledig transparante pixels 895 (waarvan slechts enkele getoond zijn), wat geschikt is in het geval dat de andere pixels 894 van het venster 884 eveneens volledig transparante pixels zijn. In het geval dat het venster 884 geconfigureerd is als een semi- transparant venster en de pixels 894 een bepaalde kleur hebben (bijv. lichtgrijs), dan is de zwarte pijl bij voorkeur omgeven door semi-transparante pixels 895 die diezelfde kleur hebben (bijv. lichtgrijs). In het geval dat het venster 884 geconfigureerd is als een semi-transparante geperforeerde bitmap of een semi-transparante geperforeerde textuurbitmap zoals in meer detail beschreven in de mede in behandeling zijnde "geperforeerde bitmap aanvrage(n}", dan is de zwarte pijl bij voorkeur ook omgeven door dezeifde of gelijkaardige geperforeerde bitmap. In het laatst genoemde geval zal de voorwerp-herpositioneringsroutine het beweegbaar voorwerp 806L bij voorkeur zodanig lokaliseren dat de geperforeerde achtergrond van het beweegbare beeld uitgelijnd is met de geperforeerde bitmap van het venster 884, wat in het geval van een 2x2 bitmap met een schaakbordpatroon geïmplementeerd kan worden door het beweegbaar voorwerp 806L, bijvoorbeeld alleen op locaties met even X- en even Y-coördinaten te positioneren, of alleen op locaties met oneven X- en oneven Y- coördinaten, afhankelijk van waar of hoe het patroon van de pixels 894 gelegen is. FIG. 8{a) toont bewegingen van het eerste zichtbaar voorwerp 805 in overeenstemming met bewegingen van de eerste aanwijsinrichting 803R.
FIG. 8{b} toont bewegingen van het tweede zichtbaar voorwerp 806 in overeenstemming met bewegingen van de tweede aanwijsinrichting 803L. Om redenen die verder duidelijk zullen worden, zou de linker muisinrichting 803L in bepaalde uitvoeringsvormen van de onderhavige uitvinding enkel bewogen moeten worden, maar niet geklikt of gescrold in het systeem 800. Om die reden kan de voorstelling van het tweede zichtbaar voorwerp 806 in de vorm van een pijl verwarrend zijn voor een gebruiker, en kan een lijn of een rechthoek of een vierkant de voorkeur genieten als een zichtbare indicatie van de tweede positie, omdat het intuïtief duidelijk is dat een lijn of vierkant niet geklikt hoort te worden. In het systeem 800 volgt de native muiscursor 805 bewegingen van de rechter muisinrichting 803R, en is daarom waarschijnlijk beter geschikt voor rechtshandige mensen, FIG. 9 toont een computersysteem 900 volgens een uitvoeringsvorm van de onderhavige uitvinding die gezien kan worden als een variant van het computersysteem 800 getoond in FIG. 8, waarbij de native muiscursor 905 bewegingen van de linker muisinrichting 903L volgt. De uitvoeringsvorm van FIG. 9 is daarom waarschijnlijk beter geschikt voor linkshandige mensen. In deze uitvoeringsvorm kan de zwarte pijl 906 bewogen worden door de rechter aanwijsinrichting 903R, maar deze aanwijsinrichting 903R hoort in bepaalde uitvoeringsvormen van de onderhavige uitvinding niet geklikt of gescrold te worden.
FIG. 9(a) toont dat de positie van de zwarte pijl 906 aangepast wordt in overeenstemming met bewegingen van de rechter aanwijsinrichting 903R. FIG. 9(b} toont dat de positie van de native muiscursor 905 aangepast wordt in overeenstemming met bewegingen van de linker aanwijsinrichting 903L. Beide pijlen zijn te allen tijde zichtbaar op het scherm.
FIG. 9{c) toont een voorbeeldmatige positiebijwerkingsroutine als gedeelte van een berichtenverwerkingsroutine, in pseudo-code, die gebruikt kan worden om dit gedrag te verkrijgen. Zoals te zien is, worden de eerste en tweede positie Pos1, Pos2 bijgewerkt in overeenstemming met bewegingen van respectievelijk de eerste en tweede aanwijsinrichting 903R, 903L. In het geval dat de linker aanwijsinrichting 903L werd bewogen, wordt de positie van de native muiscursor 905 dienovereenkomstig aangepast. In het geval dat de rechter aanwijsinrichting 903R werd bewogen, wordt de positie van de native muiscursor 905 terug gedwongen naar de tweede positie Pos2 onderhouden door de overlay-applicatie. Dus zijn de twee pijlen 905, 906 individueel beweegbaar door de twee aanwijsinrichtingen.
FIG. 10 toont een computersysteem 1000 volgens een andere uitvoeringsvorm van de onderhavige uitvinding, die gezien kan worden als een variant van het computersysteem 700 van FIG. 7 voor aspecten gerelateerd aan het positioneren van de native muiscursor 1005, en die gezien kan worden als een variant van het computersysteem 800 van FIG. 8 en 900 van FIG. 9 voor aspecten gerelateerd aan de vorm van het tweede zichtbaar voorwerp 1006.
Het computersysteem 1000 omvat een computerinrichting 1001 verbonden met een eerste aanwijsinrichting 1003R en met een tweede aanwijsinrichting 1003L en verbonden met een weergavescherm 1004. De computerinrichting 1001 heeft ten minste één processor die een O/S en GUI uitvoert dat een native muisaanwijzer/-cursor 1005 verschaft {bijv. een witte pijl), en een overlay- applicatie uitvoert volgens een uitvoeringsvorm van de onderhavige uitvinding. De overlay-applicatie onderhoudt een eerste en een tweede aanwijspositie Pos1, Pos2 in overeenstemming met bewegingen van respectievelijk de eerste en tweede aanwijsinrichting 1003R, 1003L, en past de positie van de native muisaanwijzer/-cursor 1005 aan, bijv. overschrijft deze, in overeenstemming met bewegingen van de aanwijsinrichting die het meest recent werd bewogen.
FIG. 10{a) toont bewegingen van het eerste zichtbaar voorwerp, zijnde de native muisaanwijzer 1005, in overeenstemming met bewegingen van de eerste aanwijsinrichting 1003R omdat dit de aanwijsinrichting is die bewogen wordt, terwijl het tweede zichtbaar voorwerp 1006 (bijv. een zwarte pijl} de andere onderhouden positie Pos2 aanneemt, In deze situatie kan de gebruiker de knoppen indrukken/loslaten/klikken en/of het scrolwiel bewegen van de eerste muisaanwijzer 1003R, bijvoorbeeld om de teksteditor-applicatie te activeren, tekst te kiezen, commentaar toe te voegen, enz.
FIG, 10{b} toont bewegingen van het eerste zichtbaar voorwerp 1005 in overeenstemming met bewegingen van de tweede aanwijsinrichting 1003L, welke de aanwijsinrichting is die bewogen wordt, terwijl het tweede zichtbaar voorwerp 1006 (bijv. een zwarte pijl} de andere onderhouden positie Pos1 aanneemt. In deze situatie, kan de gebruiker de knoppen indrukken/loslaten/klikken en/of het scrolwiel bewegen van de tweede muisaanwijzer 1003L, bijvoorbeeld om de audiospeler-appiicatie 1017 te activeren, op de afspeel- of pauzeknop te klikken, enz.
Zoals begrepen kan worden uit FIG. 10{a) en FIG. 10(b), kan de gebruiker beide locaties op het scherm 1004 zien, en kan hij op twee verschillende locaties op het scherm werken, zij het niet tegelijk, louter door de respectievelijke aanwijsinrichting te bewegen. De gebruiker kan op elke muisinrichting klikken of het betreffende muiswiel roteren na zeker te zijn dat de native muiscursor 1005 zich op de gewenste onderhouden positie Pos1 of Pos2 bevindt, zoals visueel aangeduid door de witte pijl. FIG. 11 toont een specifiek voorbeeld van het vereenvoudigd hoogniveau-blokdiagram van hardware- en softwarecomponenten getoond in FIG. 5(f) in het geval dat de aanwijsinrichtingen M1, M2 HID-compatibele inrichtingen zijn {afkorting voor het "Human Interface Device"}, en in het geval dat de computerinrichting een HID-interface omvat met ten minste twee aansluitpoorten, zoals typisch het geval is onder andere voor computerinrichtingen die USB-interfaces bevatten. Zoals gekend in de stand der techniek, verzenden zulke muisinrichtingen signalen of berichten naar de computerinrichting, bijv. in de vorm van HID-pakketten, bevattende bewegings- of verplaatsingsinformatie dx, dy en/of informatie over een knop die wordt ingedrukt of losgelaten, en/of informatie over een scrolwiel dat wordt gedraaid. In feite is de communicatie tussen de computerinrichting en de muisinrichtingen bidirectioneel, maar de overlay-applicatie hoeft dat gedeelte van de communicatie niet te behandelen, wat daarom niet verder wordt besproken.
Zoals schematisch aangeduid door het sterretje *, is slechts de overlay-applicatie 1151 nieuw in FIG. 11, alle andere componenten (zonder sterretje} kunnen klassieke componenten zijn, met name de aanwijsinrichtingen M1, M2, het besturingssysteem O/S en GUI 1160, de muis device drivers {muisinrichtingaansturingen) 1161, en de andere applicaties 1162. Dit illustreert opnieuw dat de overlay-applicatie gebruikt kan worden om de functionaliteit van een bestaand O/S en GUI dat oorspronkelijk slechts één enkele native muiscursor verschaft, uit te breiden of te verbeteren.
De muisinrichtingen M1 en M2 kunnen bedrade muisinrichtingen zijn, of draadioze muisinrichtingen, of een combinatie van beide. FIG. 12 toont een variant van het hoogniveau-blokdiagram van FIG. 11, waarbij twee klassieke aanwijsinrichtingen M1, M2 verbonden zijn met de computerinrichting via een klassieke hub of adapter of dongel 1220 in plaats van rechtstreeks verbonden te zijn met de computerinrichting. De hub 1220 kan een bedrade hub zijn, of een draadloze hub. De interface kan een HID-compatibele interface zijn, en de aanwijsinrichtingen kunnen HID-compatibele inrichtingen zijn, maar dat is niet absoluut vereist opdat de onderhavige uitvinding kan werken.
FIG. 13 toont enkele regels pseudo-code die een gedeelte illustreren van een berichtenverwerker die in staat is om in één van drie ingangsmodi te functioneren, die hierin als volgt worden genoemd: - "TweeHandig" (FIG. 13(a)) zoals uitgelegd in FIG. 7{c), waarbij de native muiscursor bewegingen volgt van de aanwijsinrichting die het meest recent bewogen is, of
- "RechtsHandig" {FIG. 13(b)) zoals uitgelegd in FIG. 5(g), waarbij de native muiscursor bewegingen volgt van de rechter aanwijsinrichting, en - "LinksHandig" (FIG. 13{c))} zoals uitgelegd in FIG. 9(c}, waarbij de native muiscursor bewegingen volgt van de linker aanwijsinrichting.
Sommige uitvoeringsvormen van een overlay-applicatie volgens de onderhavige uitvinding kunnen mogelijks slechts één van deze ingangsmodi implementeren (bijv. hardcoderen).
Andere uitvoeringsvormen van een overlay-applicatie volgens de onderhavige uitvinding kunnen mogelijks twee van deze ingangsmodi implementeren, of alle drie van deze ingangsmodi, en de gebruiker in staat stellen om te kiezen welke inputmodus te gebruiken, bijvoorbeeld expliciet, zoals getoond in FIG. 31{a}, door een gebruiker in staat te stellen om een "Dominante muis" te kiezen, in welk geval bijvoorbeeld de displaymodi van groep 2850 en 2870 {zie bijv. FIG. 28} verborgen kunnen worden, of impliciet door de gebruiker in staat te stellen om een displaymodus van eender welke groep 2850 tot 2870 te kiezen, in welk geval de applicatie de overeenkomstige inputmodus zelf kan veranderen, indien nodig.
FIG. 14{a} is een schematische voorstelling van een voorbeeldmatige sequentie van signalen of berichten komende van twee klassieke muisinrichtingen M1, M2, en toont hoe deze signalen correct worden behandeld door het berichtenverwerkingsproces weergegeven in FIG. 13, dat verondersteld wordt geconfigureerd te zijn in de inputmodus "Tweehandig". In realiteit kunnen veel meer signalen of berichten uitgewisseld worden tussen de computerinrichting en de muisinrichtingen, maar deze worden niet getoond teneinde de tekeningen niet te overladen. Ook toont FIG. 14 enkel hoe de positie van de native muiscursor NC wordt bijgewerkt, en vermeldt niet expliciet hoe de positie van het tweede en/of verder zichtbaar voorwerp wordt bijgewerkt, wederom om de tekeningen niet te overladen.
Op tijdstip t1 wordt muisinrichting M2 bewogen en verstuurt deze een bewegingsbericht mov2 naar de computerinrichting, en als reactie werkt de overlay-applicatie Pos2 bij en stelt de positie van de native muiscursor NC in op Pos2. Afhankelijk van waar de native muiscursor vóór t1 gesitueerd was, kan dit zich voor de gebruiker voordoen als een kleine beweging of als een sprong.
Op tijdstip t2 wordt muisinrichting M1 bewogen en verstuurt deze een bewegingsbericht mov1 naar de computerinrichting, en als reactie werkt de overlay-applicatie Post bij en stelt de positie van de native muiscursor NC in op Pos1, hetgeen zich voor de gebruiker typisch zal voordoen als een “sprong” van Pos2 naar Posi.
Op tijdstip 13 wordt muisinrichting M1 opnieuw bewogen en verstuurt deze een bewegingsbericht mov1 naar de computerinrichting, en als reactie werkt de overlay-applicatie Pos1 bij en stelt de positie van de native muiscursor NC in op Pos1, hetgeen zich voor de gebruiker typisch zal voordoen als een kleine beweging.
Op tijdstip t4 wordt muisinrichting M2 bewogen en verstuurt deze een bewegingsbericht mov2 naar de computerinrichting, en als reactie werkt de overlay-applicatie Pos2 bij en stelt de positie van de native muiscursor NC in op Pos2, hetgeen zich voor de gebruiker typisch zal voordoen als een “sprong” van Posl naar Pos2.
Op tijdstip t5 wordt muisinrichting M1 bewogen en verstuurt deze een bewegingsbericht mov1 naar de computerinrichting, en als reactie werkt de overlay-applicatie Pos1 bij en stelt de positie van de native muiscursor NC in op Pos1, hetgeen zich voor de gebruiker typisch zal voordoen als een “sprong” van Pos2 naar Pos1.
FIG. 14{b} toont dezelfde sequentie van signalen of berichten als die van FIG. 14(a), en toont hoe een overlay-applicatie die de berichtenverwerker van FIG. 13 heeft, wanneer deze geconfigureerd is in de inputmodus "Rechtshandig”, de positie NC van de native muiscursor zou bijwerken. Zoals te zien is, wanneer de rechter aanwijsinrichting M1 wordt bewogen, wordt de eerste positie Posl bijgewerkt, en wanneer de tweede aanwijsinrichting M2 wordt bewogen, wordt de tweede positie Pos2 bijgewerkt, maar in al deze gevallen wordt de positie van de native muiscursor NC ingesteld op de eerste positie Pos1, geassocieerd met bewegingen van de rechter aanwijsinrichting M1.
FIG. 14{c} toont dezelfde sequentie van signalen of berichten als die van FIG. 14(a}, en toont hoe een overlay-applicatie die de berichtenverwerker van FIG. 13 heeft, wanneer deze geconfigureerd is in de inputmodus "Linkshandig", de positie NC van de native muiscursor zou bijwerken. Zoals te zien is, wanneer de rechter aanwijsinrichting M1 wordt bewogen, wordt de eerste positie Pos1 bijgewerkt, en wanneer de tweede aanwijsinrichting M2 wordt bewogen, wordt de tweede positie Pos2 bijgewerkt, maar in al deze gevallen wordt de positie van de native muiscursor NC ingesteld op de tweede positie Pos2, geassocieerd met bewegingen van de linker aanwijsinrichting M2.
Zoals begrepen kan worden uit FIG. 14{a) tot FIG. 14{c), worden bewegingen van beide muisinrichtingen M1, M2 correct behandeld, zelfs gelijktijdige bewegingen van de twee muisinrichtingen M1, M2.
FIG. 15 is een schematische voorstelling van een andere voorbeeldmatige sequentie van signalen of berichten komende van twee klassieke muisinrichtingen M1, M2, en toont hoe deze signalen correct worden behandeld door het berichtenverwerkingsproces weergegeven in FIG. 13, dat verondersteld wordt geconfigureerd te zijn in de inputmodus "TweeHandig".
Op tijdstip t1 wordt muisinrichting M1 bewogen en verstuurt deze een bewegingsbericht mov1 naar de computerinrichting, en als reactie werkt de overlay-applicatie Pos1 bij en stelt de positie van de native muiscursor NC in op Posl. Afhankelijk van waar de native muiscursor NC vóór t1 gesitueerd was, kan dit zich voor de gebruiker voordoen als een kleine beweging of als een sprong.
Op tijdstip t2 wordt muisinrichting M2 bewogen en verstuurt deze een bewegingsbericht mov2 naar de computerinrichting, en als reactie werkt de overlay-applicatie Pos2 bij en stelt de positie van de native muiscursor NC in op Pos2, hetgeen zich voor de gebruiker typisch zal voordoen als een sprong van Post naar Pos2.
Op tijdstip t3 wordt een knop (bijv. een linker knop M2B1} van de tweede muisinrichting M2 ingedrukt, en verstuurt de muisinrichting M2 een knop-ingedrukt-bericht ”press2” naar de computerinrichting. De berichtenverwerker van de overlay-applicatie ontvangt het bericht, maar aangezien het geen bewegingsbericht is, wordt stap h) van FIG. 5{e) overgeslagen, en werkt de overlay- applicatie Pos1 of Pos2 niet bij, maar laat ze het O/S en de GUI en/of de betreffende onderliggende applicatie het indrukken van de knop M2B1 afhandelen.
Op tijdstip t4 wordt de knop M2B1 van de tweede muisinrichting M2 losgelaten en verstuurt de tweede muisinrichting M2 een drukknop-losgelaten-bericht "release2" naar de computerinrichting, en opnieuw wijzigt de overlay-applicatie geen positie, maar laat ze het O/S en de GUI en/of de betreffende onderliggende applicatie het loslaten van de knop afhandelen. Zoals gekend is in de stand der techniek, zal het O/S onder sommige voorwaarden het indrukken van een knop en het loslaten van een knop als een zogenoemde “muisklik” beschouwen.
Op tijdstip t5 wordt muisinrichting M1 bewogen en verstuurt deze een bewegingsbericht movl naar de computerinrichting, en als reactie werkt de overlay-applicatie Post bij en steit de positie van de native muiscursor NC in op Pos1, hetgeen zich voor de gebruiker typisch zal voordoen als een sprong van Pos2 naar Pos1.
Zoals begrepen kan worden uit FIG. 15, wordt de "klik" op een knop M2B1 van de tweede muis M2 correct behandeld door de berichtenverwerker van FIG. 13, geconfigureerd in de inputmodus TweeHandig, ondanks bewegingen van de eerste muis M1 vóór en na de klik.
In een variant van FIG. 15 {niet getoond} wordt de muis M2 bewogen na het indrukken van de knop M2B1 op tijdstip t3 en vóór het loslaten van de knop M2B1 op tijdstip t4. In dit geval zal de positiebijwerkingsroutine de positie van de native muiscursor wel bijwerken, hetgeen het effect heeft van slepen (Engels: "dragging”). Ook het verslepen werkt goed met de berichtenverwerker van FIG. 13.
Testen met verder sequenties hebben echter getoond dat de berichtenverwerker van FIG. 13 niet altijd het verwachte gedrag verschaft. Nader onderzoek heeft aangetoond dat oa. de voorbeeld- matige sequentie van signalen of berichten getoond in FIG. 16 onbevredigend wordt behandeld.
Op tijdstip t1 wordt muis M1 bewogen en verstuurt deze een bewegingsbericht movl naar de computerinrichting, en als reactie werkt de berichtenverwerker de eerste positie Posl bij en positioneert de native muiscursor dienovereenkomstig. Evenzo op tijdstip t2.
Op tijdstip t3 wordt een knop (bijv. een linker knop M1B1) van de eerste muisinrichting M1 ingedrukt en verstuurt de muis een knop-ingedrukt-bericht pressl naar de computerinrichting, waarvoor de berichtenverwerker van FIG. 13 geen actie onderneemt.
Op tijdstip t4 wordt de tweede muisinrichting M2 bewogen en verstuurt deze een bewegingsbericht mov2 naar de computerinrichting, en als reactie herpositioneert de berichtenverwerker van FIG. 13 de native muiscursor NC naar de tweede onderhouden positie Pos2.
Op tijdstip t5 wordt de knop M181 van de eerste muisinrichting M1 losgelaten en verstuurt de muisinrichting M1 een drukknop-losgelaten-bericht releasel naar de computerinrichting, maar het O/S beschouwt dat deze loslating plaats vindt op Pos2, die meestal verschillend is van Pos1, hetgeen niet in het verwachte "klik" gedrag van de eerste muis M1 resulteert, maar in een "sleep”-gedrag. Dit is niet het bedoelde gedrag.
In een eerste poging om dit probleem op te lossen, werd de berichtenverwerker van FIG. 13 gewijzigd door twee variabelen toe te voegen en te onderhouden, een booleaanse variabeie Mipressed (Mlingedrukt} als indicatie of een knop van de eerste muisinrichting M1 ingedrukt of losgelaten is, en een variabele M2pressed {M2ingedrukt) als indicatie of een knop van de tweede muisinrichting M2 ingedrukt of losgelaten is, en door niet te reageren op het bewegingssignaal mov2 verzonden door de tweede muis M2 op t4 gedurende de tijd dat een knop van de eerste muis M1 is ingedrukt, zoals getoond in FIG. 17, maar om de één of andere reden verschafte deze gewijzigde berichtenverwerker evenmin het correcte resultaat.
In een tweede poging om dit probleem op te lossen, werd de berichtenverwerker van FIG. 13 verder gewijzigd, maar in plaats van het negeren van het "mov2" signaal (zoals in FIG. 17}, werd de berichtenverwerker gewijzigd om de native muiscursor NC actief te herpositioneren op dezelfde positie Post als waar de native muiscursor zich bevond op tijdstip t3 toen de knop werd ingedrukt. Testen hebben aangetoond dat zulk een berichtenverwerker werkt voor een "klik" op een knop van de eerste muis M1, maar niet werkt wanneer de eerste muis M1 wordt "gesleept". In plaats van (op t4) de positie Pos1 te bevriezen op dezelfde positie als waar de native muiscursor NC gesitueerd was toen de knop werd ingedrukt (op t3), werd de positie van de native muiscursor NC toegelaten om samen te bewegen met bewegingen van de eerste muis M1, zelfs wanneer een knop van dezelfde inrichting M1 werd ingedrukt.
FIG. 18{a} toont enkele regels pseudo-code, die een gedeelte illustreren van een verbeterde berichtenverwerkingsroutine om dit gedrag te implementeren. {slechts een gedeelte van de TweeHandige-inputmodus wordt getoond).
FIG. 18(b) toont een variant van de routine van FIG. 18(a), zoals gebruikt kan worden in overlay-applicaties volgens uitvoeringsvormen van de onderhavige uitvinding. (wederom wordt slechts een gedeelte van de TweeHandige-inputmodus getoond). De voornaamste verschillen met de routine van FIG. 18(a) zijn dat de tweede positie Pos2 wordt bijgewerkt zelfs indien een knop van de eerste aanwijsinrichting is ingedrukt, en omgekeerd, dat de eerste positie Pos1 wordt bijgewerkt zelfs indien een knop van de tweede aanwijsinrichting is ingedrukt. Deze routine zal verder besproken worden bij het bespreken van FIG. 26{a} en FIG. 26(b}. FIG. 18{c) toont een vollediger versie van een positie-bijwerkingsroutine, zoals gebruikt kan worden in overlay-applicaties volgens uitvoeringsvormen van de onderhavige uitvinding. Dit kan gezien worden als een combinatie van de codegedeeltes getoond in FIG. 5(g} en in FIG. 9(c) en in FIG. 18{a}.
FIG. 19 toont dezelfde voorbeeldmatige sequentie van signalen of berichten van FIG. 16, maar verwerkt door de berichtenverwerker van FIG. 18{(a). Zoals te zien is, in reactie op het bewegingssignaal mov2 van de tweede muis M2 op tijdstip 14, werkt de verbeterde berichtenverwerker van FIG. 18(a) de tweede positie Pos2 bij in overeenstemming met het bewegingssignaal mov2, maar herpositioneert de native muiscursor actief naar Pos1, zodat op tijdstip t5, de knop M1B1 van de eerste muisinrichting M1 geacht wordt losgelaten te zijn op dezelfde positie Posl als waar hij werd ingedrukt. Het O/S interpreteert dit als een "klik" van de knop M1B1 van de muisinrichting M1, welke bevredigend is behandeld, ondanks het bewegingssignaal "mov2" van de tweede muis M2 op tijdstip t4.
Er wordt opgemerkt dat het bijwerken van Pos2 op t4 niet vereist is voor de correcte interpretatie van het klik-commando verzonden door de eerste aanwijsinrichting M1, en eventueel weggelaten kan worden. Indien echter weggelaten, zal/zullen de zichtbare voorwerp(en) geassocieerd met de tweede positie Pos2 niet bewegen zolang een knop van de eerste aanwijsinrichting M1 wordt ingedrukt, zelfs indien de tweede aanwijsinrichting wordt bewogen. Om zulke bewegingen mogelijk te maken, wordt de positie Pos2 bij voorkeur bijgewerkt zelfs indien een knop van de eerste aanwijsinrichting wordt ingedrukt.
FIG. 20 toont een variant van de sequentie van signalen of berichten van FIG. 19, en laat zien dat het siepen van één muis M1 correct werkt, zelfs wanneer de tweede muis M2 wordt bewogen.
Op tijdstip t1 wordt de eerste muis M1 bewogen, de eerste muis M1 verstuurt een eerste bewegingsbericht mov1 naar de computerinrichting, en als reactie werkt de overlay-applicatie Pos1 bij en positioneert de native muiscursor NC op Pos1.
Op tijdstip t2 wordt een knop (bijv. een linker knop M1B1) van de eerste muis M1 ingedrukt, de eerste muis M1 verstuurt een knop-ingedrukt-bericht pressl naar de computerinrichting, en als reactie stelt de berichtenverwerker van de overlay-appiicatie een interne variabele Mlpressed in op WAAR.
Op tijdstip t3 wordt de tweede muis M2 bewogen, de tweede muis M2 verstuurt een tweede bewegingsbericht mov2 naar de computerinrichting, en als reactie werkt de berichtenverwerker Pos2 bij en positioneert de native muiscursor NC op Pos1.
Op tijdstip t4 wordt de eerste muis M1 bewogen, de eerste muis M1 verstuurt een eerste bewegingsbericht mov1 naar de computerinrichting, en als reactie werkt de overlay-applicatie Pos1 bij en positioneert de native muiscursor NC op Pos1.
Op tijdstip t5 wordt de knop M1B1 van de eerste muisinrichting M1 losgelaten, wat ervoor zorgt dat het O/S en de GU! een "sleepoperatie” uitvoert, en als reactie stelt de berichtenverwerker de variabele M1pressed in op ONWAAR.
Zoals begrepen kan worden uit FIG. 20, wordt het slepen van de eerste muis M1 bevredigend behandeld door de berichtenverwerker weergegeven in FIG. 18(a) geconfigureerd in de TweeHandige inputmodus, zeifs in combinatie met bewegingen van de tweede muis M2.
Verwijzend naar FIG. 21, werden verdere testen uitgevoerd, gebruikmakend van de berichtenverwerker van FIG. 18(a) in de TweeHandige inputmodus, welke nog een andere foutconditie onthulde, weergegeven door de voorbeeidmatige sequentie van signalen of berichten getoond in FIG. 21, waarbij: Op tijdstip t1 wordt de tweede muis M2 bewogen, wordt een bewegings-boodschap mov2 verzonden, de tweede positie Pos2 wordt bijgewerkt rekening houdende met de verplaatsingswaardes dx, dy, en de native muiscursor wordt ingesteld op Pos2.
Op tijdstip t2 wordt de eerste muis M1 bewogen, wordt een bewegingsboodschap mov1 verzonden, wordt de eerste positie Posl bijgewerkt rekening houdende met de verplaatsingswaardes dx, dy, en wordt de native muiscursor ingesteld op Post.
Op tijdstip t3 wordt de eerste muis M1 opnieuw bewogen, wordt een andere bewegings- boodschap mov1 verzonden, wordt de eerste positie Pos1 bijgewerkt, en wordt de native muiscursor NC ingesteld op de bijgewerkte positie Pos1.
Op tijdstip t4 wordt een knop (bijv. een tinker knop M2B1) van de tweede muisinrichting M2 ingedrukt, wordt een knop-ingedrukt-bericht press2 verzonden, en als reactie stelt de berichtenverwerker van FIG. 18{a} de waarde M2pressed in op WAAR, en wijzigt de positie van de native muiscursor NC naar Pos2.
Op tijdstip t5 wordt de knop M2B1 van de tweede muisinrichting M2 iosgelaten, wordt een loslaat-boodschap release? verzonden naar de computerinrichting, en als reactie stelt de berichtenverwerker de variabele M2 pressed in op ONWAAR.
Ondanks het feit dat een knop van de tweede muisinrichting M2 werd ingedrukt en losgelaten op dezelfde fysieke positie, worden de indruk- en loslaatberichten van FIG. 21 vreemd genoeg meestal niet geïnterpreteerd als een klik. Hoewel de uitvinders niet gebonden wensen te zijn aan een theorie, lijkt analyse aan te geven dat deze sequentie verkeerd gaat, omdat op het tijdstip t4 waarop de knop M2B1 van de tweede muis M2 wordt ingedrukt, de native muispositie NC zich nog steeds bevindt op de eerste positie Pos1{x1,y1}, en daarom zullen het O/S en de GU! aannemen dat het "knop indrukken" plaatsvindt op de plaats Pos1{x1,yl) in plaats van Pos2, en pas enige tijd later {dan t4) zal de overlay- applicatie de native muiscursor NC herpositioneren op de tweede positie Pos2{x2,y2}, maar dat is "te laat". Dit probleem is niet gekend in de stand der techniek, omdat er slechts één cursorpositie bestaat.
Er lijkt geen technische oplossing voor dit probleem mogelijk, omdat het onmogelijk is voor de overlay-applicatie om te voorspellen wanneer een knop van de muis M2 zal worden ingedrukt, en omdat het O/S en de GUI altijd sneller zullen zijn dan de overlay-applicatie. Verlangende om de mouse driver layer (muisaansturingslaag) 561, 1161, 1261 van het O/S en de GUI intact te laten, kwamen de uitvinders verrassend op een andere oplossing voor dit probleem.
Verwijzende naar FIG. 22(a), besloten de uitvinders een speciale muisinrichting M2* te verschaffen die, wanneer een knop daarvan wordt ingedrukt, een “dummy beweging" signaal verstuurt enige tijd AT vóór het zenden van een eigenlijk "knop-ingedrukt” signaal. Dit omzeilt effectief het probleem van FIG. 21, omdat, zoals kan begrepen worden uit FIG. 22(a): Op tijdstip t1 wordt de tweede muis M2* bewogen, wordt een (echt) bewegingsbericht mov2 verzonden naar de computerinrichting, als reactie werkt de overlay-applicatie de tweede positie Pos2 bij en stelt de native muiscursor NC in op positie Pos2.
Op tijdstip t2 wordt de eerste muis M1* bewogen, wordt een {echt} bewegingsbericht mov1 verzonden naar de computerinrichting, als reactie werkt de overlay-applicatie de eerste positie Posl bij en stelt de native muiscursor NC in op positie Pos1.
Op tijdstip 13 wordt een knop (bijv. een linker knop M2B1) van de speciale tweede muisinrichting M2* ingedrukt, wat ervoor zorgt dat de muisinrichting M2* eerst een dummy- bewegingsbericht "dmov2" verzendt {bij voorkeur met kleine verplaatsingswaardes dx,dy), en enige tijd AT later een knop-ingedrukt-bericht press2 verzendt. Zoals getoond, in reactie op het dummy- bewegingssignaal dmov2, zal de overlay-applicatie de native muiscursor NC instellen op de tweede positie Pos2, ruim vóórdat het knop-ingedrukt-bericht press2 wordt verzonden door de muisinrichting M2* op tijdstip t3+AT, zodanig dat het O/S en de GUI zulien aannemen dat de "knop indrukking” plaatsvindt op positie Pos2 (of zeer dichtbij de originele positie Pos2, indien dx en dy wel klein zijn, maar niet precies nul}.
Op tijdstip t4 wordt de knop M2B1 losgelaten, en als reactie stelt de berichtenverwerker van de overlay-applicatie een variabele M2pressed in op ONWAAR.
Er wordt opgemerkt dat een dummy-bewegingsbericht niet absoluut noodzakelijk is wanneer de knop wordt losgelaten, maar enkel wanneer een knop wordt ingedrukt, althans in dit voorbeeld. In de praktijk is het echter veiliger om ook bij het loslaten een dummy bewegingsbericht te versturen, voor het geval de andere aanwijsinrichting in de tussentijd aan het bewegen is.
FIG. 22{b} toont een variant van de sequentie van FIG. 22{a} waarbij een scrolwiel van de tweede aanwijsinrichting M2* wordt gedraaid in plaats dat een knop wordt ingedrukt en losgelaten. Op een gelijkaardige wijze als beschreven in FIG. 22(a), verzendt de speciale aanwijsinrichting M2* niet louter een scrolwiel-rotatie-bericht, maar verzendt eerst een dummy-bewegingsbericht dmov2, en pas enige tijd AT later verzendt de aanwijsinrichting M2* het eigenlijke scrolwiel-rotatiebericht rotate2, om mogelijk te maken dat de overlay-applicatie de native muiscursor NC herpositioneert voordat het eigenlijke scrolwiel-rotatiebericht bij de computerinrichting aankomt.
In FIG, 22(b) wordt een scroiwiel van de aanwijsinrichting M2* fysiek gedraaid op tijdstip t3, waarop de aanwijsinrichting M2* een dummy-bewegingsbericht dmov2 verstuurt naar de computerinrichting. Als reactie zal de overlay-applicatie {geconfigureerd in TweeHandige inputmodus) de tweede positie Pos2 bijwerken en de native muiscursor instellen op Pos2.
Op tijdstip t3+AT verstuurt de aanwijsinrichting M2* een scrolwiel-rotatie-bericht rotate2, welke de overlay-applicatie eenvoudig kan negeren, omdat dit bericht door het O/S en de GUI zal behandeld worden.
Hoewel de oplossing voorgesteld in FIG. 22(a) en FIG. 22(b} een speciale muisinrichting vereist, is het een voordeel dat dit speciale muisgedrag geen hardware modificatie vereist, maar enkel een firmwaremodificatie van de muisinrichting.
Het is ook een voordeel dat de voorgestelde oplossing retro compatibel is, in de zin dat deze "speciale muis" met de "beweeg-vóór-klik" functie en/of met de "beweeg-vóór-scrol" functie eveneens gebruikt kan worden in klassieke computersystemen, die geen speciale overlay-applicatie hebben. Het voornaamste verschil met bestaande muisinrichtingen is dat het knop-ingedrukt-signaal en/of het scrolwiel-rotatie-signaal lichtjes vertraagd wordt, hetgeen waarschijnlijk totaal onacceptabel is in de gaming wereld, en om die reden alleen al niet evident is, maar dit veroorzaakt geen significant probleem voor professionele gebruikers zoals vertalers, proeflezers, transcribers, technische schrijvers, advocaten, enz. die gewend zijn om te werken met tools (bijv. CAT-tools, lokale of online- woordenboeken, lokale of online-gegevensbestanden, lokale of online-vertaalgeheugens, enz.) die sowieso tamelijk trage responstijden hebben (typisch in de orde van ten minste 500 ms).
Er bestaat enige ontwerpvrijheid in de keuze van de drie parameters AT, dx, dy.
In een uitvoeringsvorm is de vertraging AT een waarde in het bereik van 1 ms tot 250 ms of van 2 ms tot 100 ms, en is dx een waarde in het bereik van -5 tot +5, en is dy een waarde in het bereik van -5 tot +5.
In een uitvoeringsvorm is de vertraging AT een waarde in het bereik van 1 ms tot 250 ms of van 2 ms tot 100 ms, en is dx een waarde in het bereik van -2 tot +2, en is dy een waarde in het bereik van -2 tot +2.
In een uitvoeringsvorm is de vertraging AT een waarde in het bereik van 1 ms tot 250 ms of van 2 ms tot 100 ms, en is dx een waarde in het bereik van -1 tot +1, en is dy een waarde in het bereik van -1 tot +1.
In een uitvoeringsvorm is de vertraging AT een waarde in het bereik van 1 tot 250 ms of van 2 ms tot 100 ms, en dx=-1 en dy=-1.
In een uitvoeringsvorm is de vertraging AT een waarde in het bereik van 1 tot 250 ms of van 2 ms tot 100 ms, en dx=-1 en dy=0.
In een uitvoeringsvorm is de vertraging AT een waarde in het bereik van 1 tot 250 ms of van 2 ms tot 100 ms, en dx=-1 en dy=+1.
In een uitvoeringsvorm is de vertraging AT een waarde in het bereik van 1 tot 250 ms of van 2 ms tot 100 ms, en dx=0 en dy=-1.
In een uitvoeringsvorm is de vertraging AT een waarde in het bereik van 1 tot 250 ms of van 2 ms tot 100 ms, en dx=0 en dy=0.
In een uitvoeringsvorm is de vertraging AT een waarde in het bereik van 1 tot 250 ms of van 2 ms tot 100 ms, en dx=0 en dy=+1.
In een uitvoeringsvorm is de vertraging AT een waarde in het bereik van 1 tot 250 ms of van 2 ms tot 100 ms, en dx=+1 en dy=-1.
In een uitvoeringsvorm is de vertraging AT een waarde in het bereik van 1 tot 250 ms of van 2 ms tot 100 ms, en dx=+1 en dy=0.
In een uitvoeringsvorm is de vertraging AT een waarde in het bereik van 1 tot 250 ms of van 2 ms tot 100 ms, en dx=+1 en dy=+1.
In alle van de bovenvermelde uitvoeringsvormen, kan de waarde van AT bijvoorbeeld ten minste 1 ms zijn, of ten minste 2 ms of ten minste 8 ms, of ten minste 16 ms, of ten minste 24 ms, of ten minste 32 ms, of ten minste 40 ms, of ten minste 48 ms, of ten minste 56 ms, of ten minste 64 ms, of ten minste 72 ms, of ten minste 80 ms, of ten minste 88 ms, of ten minste 96 ms, of ten minste 104 ms, of ten minste 120 ms, of ten minste 144 ms, of ten minste 160 ms, of ten minste 176 ms, of ten minste 192 ms.
In alle van de bovenvermelde uitvoeringsvormen, kan de waarde van AT bijvoorbeeld gelijk zijn aan ongeveer 8 ms of ongeveer 16 ms, of ongeveer 24 ms, of ongeveer 32 ms, of ongeveer 40 ms, of ongeveer 48 ms, of ongeveer 56 ms, of ongeveer 64 ms, of ongeveer 72 ms, of ongeveer 80 ms, of ongeveer 88 ms, of ongeveer 96 ms, of ongeveer 104 ms, of ongeveer 112 ms, of ongeveer 120 ms, of ongeveer 128 ms, of ongeveer 136 ms, of ongeveer 144 ms, of ongeveer 152 ms, of ongeveer 160 ms, of ongeveer 168 ms, of ongeveer 176 ms, of ongeveer 184 ms, of ongeveer 192 ms, of ongeveer 200 ms, of ongeveer 208 ms, of ongeveer 216 ms, of ongeveer 224 ms, of ongeveer 232 ms, of ongeveer 240 ms, of ongeveer 248 ms.
Enerzijds zou de waarde van AT voldoende groot moeten zijn om de waarschijnlijkheid te vergroten dat de computerinrichting voldoende tijd heeft voor het verwerken van het dummy- bewegingssignaal door de overlay-applicatie, voordat het knop-ingedrukt signaal aankomt. Anderzijds zou de waarde van AT zo klein mogelijk moeten zijn om de vertraging te verkleinen, en om het risico te verkleinen dat een echt bewegingssignaal of een dummy bewegingssignaal van de andere muisinrichting ertussen zou kunnen komen. De vakman kan een geschikt compromis vinden.
In een uitvoeringsvorm bevat het dummy bewegingssignaal of -bericht de verplaatsingswaardes dx=0 en dy=0. Indien dit bericht niet uitgefilterd wordt door het 0/5 en de GUI, zou zulk een bericht ideaal zijn, omdat het de coördinaten van de eerste en tweede positie Pos1 of Pos2 niet aanpast, maar het toch mogelijk maakt dat aan de overlay-applicatie te signaleren om de native muiscursor te herpositioneren (of in andere woorden gesteld: het maakt mogelijk dat de overlay-applicatie een sprong forceert indien nodig). Indien het dummy-bewegingsbericht een nut verplaatsing heeft (dx=0 en dy=0), zal de native muiscursor NC niet verschuiven of driften vanwege meerdere dummy-bewegingsberichten die verzonden worden, ongeacht hoeveel keren de knop wordt geklikt, en/of het scrolwiel wordt gescrold.
In een andere uitvoeringsvorm is het dummy-bewegingsbericht niet één enkel vooraf bepaald bericht met dx=0 en dy=0, maar zijn opeenvolgende dummy-bewegingsberichten verschillend van het eerste dummy-bewegingsbericht, met dx- en dy-waardes zodanig gekozen dat een cumulatieve horizontale verplaatsing (bv. als gevolg van het meermaals indrukken en loslaten} gedefinieerd als Ax =5dx en een cumulatieve verticale verplaatsing gedefinieerd als Ay =3dy kleiner zijn dan een vooraf bepaalde maximumafstand. Bij voorkeur is de vooraf bepaalde maximumafstand minder dan 10 pixels, met meer voorkeur minder dan 4 pixels, of minder dan 3 pixels, of minder dan 2 pixels.
Bijvoorbeeld kunnen de dummy-bewegingsberichten alternerend of periodisch geselecteerd worden uit een groep bestaande uit twee vooraf bepaalde dummy-bewegingsberichten, bevattende een eerste bericht met {dx=+1, dy=0} en een tweede bericht met (dx=-1, dy=0), wat leidt tot een kleine links/rechts beweging, maar andere groepen van twee berichten zijn eveneens mogelijk, bijvoorbeeld: - de groep bestaande uit twee dummy-bewegingsberichten bevattende een eerste bericht met (dx=0, dy=+1) en een tweede bericht met {dx=0, dy=-1), wat leidt tot een kleine omhoog/omlaag beweging, of
- de groep bestaande uit twee dummy-bewegingsberichten bevattende een eerste bericht met (dx=+1, dy=+1) en een tweede bericht met {dx=-1, dy=-1), wat leidt tot een kleine diagonale beweging, of - de groep bestaande uit twee dummy-bewegingsberichten bevattende een eerste bericht met (dx=+1, dy=-1) en een tweede bericht met {dx=-1, dy=+1), wat leidt tot een kleine diagonale beweging, of - de groep bestaande uit drie dummy-bewegingsberichten bevattende een eerste bericht met {dx=+1, dy=0), en een tweede bericht met (dx=0, dy=+1}, en een derde bericht (dx=-1,dy=-1), of - de groep bestaande uit vier dummy-bewegingsberichten, bevattende een eerste bericht met {dx=+1,dy=0}, een tweede bericht met (dx=0,dy=-1}, een derde bericht met {dx=-1,dy=0}, en een vierde bericht met {dx=0,dy=+1), enz.
Op deze wijze blijft de muispositie in hoofdzaak stationair, zelfs na meerdere kliks en/of scrolwielrotaties, en drift deze niet weg van de originele positie tenzij de aanwijsinrichting fysiek wordt bewogen.
Een cumulatieve nul-verplaatsing kan echter ook op andere manieren bereikt worden, bv. door bij het indrukken van een knop een eerste dummy-bewegingsbericht te versturen met een vooraf bepaalde verplaatsing, (bv. met dx=+2, dy=-1), en bij het loslaten van de knop een tweede dummy- bewegingsbericht te versturen met een tegengestelde verpiaatsing (bv. met dx=-2, dy=+1).
FIG. 23{a) toont een vereenvoudigd hoogniveau-blokdiagram van hardware- en softwarecomponenten gesitueerd in een voorbeeldmatig computersysteem volgens een uitvoeringsvorm van de onderhavige uitvinding, omvattende een computerinrichting 2301 met een speciale overlay-applicatie 2351 volgens een uitvoeringsvorm van de onderhavige uitvinding, en twee speciale muisinrichtingen M1*, M2* volgens een uitvoeringsvorm van de onderhavige uitvinding. De speciale muisinrichtingen M1*, M2* hebben de hogervermelde "beweeg-vóór-klik" functie weergegeven in FIG. 22{a) en/of de hogervermelde "beweeg-vóór-scrol" functie weergegeven in FIG. 22(b), wat wij zeggen dat deze muisinrichtingen M1*, M2*, bij detectie van een knop die wordt ingedrukt en/of een scrolwiel dat wordt gedraaid, eerst een "dummy-bewegingsbericht” verzenden en pas enige tijd AT later een knop-ingedrukt-bericht of een scrolwiel-rotatie-bericht verzenden.
Zoals gesuggereerd door de sterretjes, zijn slechts de overlay-applicatie 2351 en de muisinrichtingen M1*, M2* speciaal. Alle andere componenten, meer bepaald het O/S en de GUI 2360, de device drivers (apparaatstuurprogramma's} 2361, de andere applicaties 2362, enz. kunnen klassieke componenten zijn.
De muisinrichtingen M1* en M2* kunnen bedrade muisinrichtingen zijn, of draadioze muisinrichtingen, of een combinatie van beide.
Maar de onderhavige uitvinding is niet beperkt tot speciale muisinrichtingen, en de voorgestelde oplossing kan ook toegepast worden op andere aanwijsinrichtingen die ten minste één knop en/of ten minste één scrolwiel hebben.
FIG. 23{b) toont een voorbeeldmatig blokdiagram van een speciale aanwijsinrichting volgens een uitvoeringsvorm van de onderhavige uitvinding, zoals gebruikt kan worden in het systeem van FIG. 23{a) of FIG. 24 (dat hierna zal besproken worden). De aanwijsinrichting 2303 omvat ten minste: - een bewegingsdetectiemechanisme 2321 voor het detecteren van een tweedimensionale beweging; - een besturingseenheid 2324 verbonden met genoemd bewegingsdetectiemechanisme 2321; - ten minste één knop B1 indrukbaar en loslaatbaar door een gebruiker; - een knopdetectiemechanisme 2322 voor het detecteren of genoemde ten minste één knop B1 wordt ingedrukt of wordt losgelaten; - waarbij de besturingseenheid 2324 verbonden is met het knopdetectiemechanisme 2322; - waarbij de besturingseenheid 2324 aangepast is voor (bijv. geprogrammeerd is voor): * wanneer een beweging wordt gedetecteerd, voor het zenden van een bewegingsbericht mov2; * wanneer gedetecteerd wordt dat de ten minste één knop B1 wordt ingedrukt, voor het zenden van een dummy-bewegingsbericht dmov2, en voor het zenden van een knop-ingedrukt-bericht press2 een vooraf bepaalde periode AT na het zenden van het dummy-bewegingsbericht dmov.
Het bewegingsbericht kan verplaatsingsparameters dx, dy omvatten gerelateerd aan de tweedimensionale beweging.
De aanwijsinrichting 2303 kan verder ten minste één scrolwiel W1 omvatten, draaibaar door een gebruiker, en een scrolwiel-detectiemechanisme 2323 voor het detecteren of het ten minste één scrolwiel W1 heeft gedraaid, en in welke richting (bv. omhoog of omlaag), en de besturingseenheid 2324 kan verbonden zijn met het scrolwiel-detectiemechanisme 2323, en kan verder aangepast zijn, wanneer gedetecteerd wordt dat het ten minste één scrolwiel heeft gedraaid, voor het zenden van een dummy-bewegingsbericht dmov, en voor het zenden van een scrolwiel-rotatie-bericht een vooraf bepaalde periode AT na het zenden van het dummy-bewegingsbericht dmov.
De aanwijsinrichting 2303 kan verder een RF-zendontvanger 2325 omvatten, verbonden met de besturingseenheid 2324, en de besturingseenheid 2324 kan verder geconfigureerd zijn voor het zenden van berichten naar een computerinrichting 2301, en voor het ontvangen van berichten van de computerinrichting 2301 via de genoemde RF-zendontvanger 2325, bijvoorbeeld via een dongel 2311 verbonden met de computerinrichting 2301.
De besturingseenheid 2324 kan een programmeerbare besturingseenheid zijn, bijv. een microprocessor.
FIG. 24 toont een variant van het hoogniveau-blokdiagram van FIG. 23(a), waarbij de twee "speciale" aanwijsinrichtingen M1*, M2* verbonden zijn met de computerinrichting 2401 via een klassieke hub of adapter of dongel 2420 in plaats van rechtstreeks verbonden te zijn met de computerinrichting. De hub 2420 kan een bedrade hub zijn, of een draadloze hub. Het voornaamste doel van deze figuur is om aan te tonen dat de muisinrichtingen niet rechtstreeks hoeven verbonden te zijn met de computer. FIG. 25 toont een variant van het hoogniveau-blokdiagram van FIG. 24, waarbij het in FIG. 21 getoonde probleem wordt opgelost in een speciale hub 2520 in plaats van in speciale aanwijsinrichtingen. Dus, de computerinrichting 2501 van FIG. 25 omvat bij voorkeur een klassiek O/S en GUI 2560, klassieke applicaties 2562, klassieke device drivers (apparaatstuurprogramma's} 2561, bijv. muisdrivers, klassieke aanwijsinrichtingen M1, M2, maar een speciale overlay-applicatie 2551 en een speciale hub of adapter of dongel 2520.
De functionaliteit van de speciale hub 2520 zal in meer detail uitgelegd worden in FIG. 26(a) tot FIG. 26{d). Voorbeeldmatige hardware blokdiagrammen om deze functionaliteit te implementeren zullen beschreven worden in FIG. 27(a) en FIG. 27(b). Zoals begrepen kan worden uit FIG. 21 tot FIG. 22(b), zou de hub H* moeten vermijden dat de computerinrichting een knop-ingedrukt-boodschap ontvangt van aanwijsinrichting M2 welke voorafgegaan wordt in de tijd door een bericht van de andere aanwijsinrichting M1 (bijv. een bewegingsbericht, een knop-klik-bericht, een drukknop-losgelaten-bericht, een scrolwielbericht), en omgekeerd, Aangezien de berichten van beide aanwijsinrichtingen doorheen de hub H* moeten passeren, is de speciale hub in staat om deze situatie te voorkomen. In de voorbeeldmatige sequentie van FIG. 26{a}, wordt deze situatie als volgt vermeden. Op tijdstip t1 verstuurt de eerste aanwijsinrichting M1 een bewegingsboodschap movi, en verzendt de hub H* de bewegingsboodschap naar de computerinrichting {ook "host" genoemd). Op tijdstip t2 wordt een knop M2B1 van de tweede aanwijsinrichting M2 ingedrukt, en verstuurt de aanwijsinrichting M2 een knop-ingedrukt-boodschap naar de hub H*. De hub H* onderschept dit bericht, en verzendt een dummy-bewegingsbericht dmov2 naar de host (bij voorkeur met kleine bewegingsparameters zoals hierboven uitgelegd}, bij voorkeur geformatteerd alsof dit dummy-bewegingsbericht door de tweede aanwijsinrichting M2 werd verzonden. Enige tijd later, op tijdstip t2+AT, verstuurt de hub 2520 de knop-ingedrukt-boodschap naar de host, verpakt of geformatteerd alsof dit bericht van de tweede aanwijsinrichting M2 kwam. In de uitvoeringsvorm getoond in FIG. 264, negeert de hub H* alle berichten verzonden door de andere aanwijsinrichting M1 totdat de knop M2B1 van de aanwijsinrichting M2 wordt losgelaten op tijdstip t5. Daarom wordt in het getoonde voorbeeld het bewegingsbericht mov1 verzonden door de aanwijsinrichting M1 op t3, genegeerd.
Op tijdstip t4 verstuurt de tweede aanwijsinrichting M2 een drukknop-losgelaten-bericht naar de hub H*, en de hub H* verzendt dit bericht naar de host.
Op tijdstip t5 verstuurt de eerste aanwijsinrichting M1 een bewegingsbericht naar de hub H*, en de hub H* verzendt dit bericht naar de host.
Met andere woorden, de speciale hub H* die het gedrag van FIG. 26(a} implementeert, geeft alle berichten komende van de aanwijsinrichtingen door aan de host, behalve wanneer een knop- ingedrukt-bericht wordt ontvangen van één van de aanwijsinrichtingen (in het voorbeeld M2), in welk geval de hub H* zich tijdelijk op een speciale gedraagt wijze, namelijk door eerst een dummy- bewegingsbericht te zenden, en enige tijd AT later een knop-ingedrukt-bericht press2 te zenden, en door alle berichten te negeren van de andere aanwijsinrichting (in het voorbeeld: M1) tot een drukknop-losgelaten-bericht wordt ontvangen van de aanwijsinrichting M2 waarvan knop M2B1 werd ingedrukt.
Zoals hoger toegelicht voor de speciale aanwijsinrichting, (maar niet getoond in FIG .26a) is het ook hier mogelijk ook een dummy-bewegingsbericht te versturen op t4 bij het loslaten van de knop M2B1, en het eigenlijke knop-losgelaten-bericht pas te versturen op t4+AT, bv. in het geval dat de dummy-beweging geen nul-verplaatsing is.
FIG. 26{b) toont dezelfde sequentie als FIG. 26(a), maar verschillend behandeld door een variant van de speciale hub H*. In deze uitvoeringsvorm negeert de hub het op 13 verzonden bewegingsbericht mov1 niet, maar vertraagt dit bericht tot na het knop-ingedrukt press2 bericht naar de host is verzonden op t2+AT, in het voorbeeld op tx=t2+AT+e, waarbij € bij voorkeur kleiner is dan 33 ms, bijvoorbeeld ongeveer 8 ms of ongeveer 16 ms of ongeveer 24 ms. Zoals hierboven uitgelegd, kan de speciale overlay-applicatie Pos1 optioneel bijwerken, maar heeft deze enige tijd nodig om de native muiscursor te herpositioneren op Pos2, anders kan het O/S de knop als zijnde losgelaten interpreteren op Posl in plaats van Pos2. Daarom, in dit voorbeeld, moet het drukknop-losgelaten-bericht verzonden door de tweede aanwijsinrichting M2 op t4 eveneens vertraagd worden tot tx+AT. Uiteraard, indien t4 reeds groter was dan tx, dan kan het drukknop-losgelaten-bericht release? eenvoudig doorgestuurd worden naar de host.
Indien het gedrag van de signalen en hoe de overlay-applicatie erop zal reageren, weergegeven in FIG. 26(b) goed begrepen is, kan nu ook begrepen worden dat de positie-bijwerkings- routine van FIG. 18(b), die het mogelijk maakt dat het tweede voorwerp wordt bewogen terwijl een knop van de eerste aanwijsinrichting is ingedrukt, verkeerd kan gaan voor de sequentie getoond in FIG. 26(b), in het geval dat de gebruiker de knop M2B1 eerder loslaat dan tx+AT. De in FIG. 18{a}
getoonde routine heeft geen last van dit probleem, omdat deze het bewegingssignaal negeert, op grotendeels dezelfde wijze als de hub van FIG. 26(a) dit doet.
Dus, wanneer de speciale hub H* {met het gedrag zoals toegelicht aan de hand van FIG. 26a of FIG. 26b} gebruikt wordt, kan in de overlay-applicatie zowel de positie-bijwerkingsroutine van FIG. 18{a) alsook die van FIG. 18(b) beide gebruikt worden in de TweeHandige inputmodus, omdat de hub voor de timing zorgt tussen de berichten afkomstig van verschillende inrichtingen. Maar indien de speciale hub niet gebruikt wordt in het computersysteem, dan is de positie-bijwerkingsroutine getoond in FIG. 18(a} veiliger".
FIG. 26{c} toont een voorbeeldmatige sequentie om uit te leggen hoe de speciale hub H* die het in FIG. 26(a) gespecifieerde gedrag heeft, kan reageren in reactie op een muiswiel-boodschap.
Op tijdstip t1 verstuurt de eerste aanwijsinrichting M1 een bewegingsboodschap movil, en verzendt de hub H* de bewegingsboodschap naar de computerinrichting {ook “host” genoemd).
Op tijdstip t2 wordt een scrolwiel M2W1 van de tweede aanwijsinrichting M2 gedraaid, en de aanwijsinrichting M2 verstuurt een scrolwiei-rotatie-bericht naar de hub H*. De hub H* onderschept dit bericht, en verzendt een dummy-bewegingsbericht dmov2 naar de host (bij voorkeur met kleine bewegingsparameters zoals hierboven uitgelegd}, bij voorkeur verpakt of geformatteerd alsof dit dummy-bewegingsbericht verzonden werd door de tweede aanwijsinrichting M2.
Enige tijd later, op tijdstip t2+AT, verstuurt de hub H* het scrolwiel-rotatie-bericht naar de host, verpakt of geformatteerd alsof dit bericht van de tweede aanwijsinrichting M2 kwam.
In de uitvoeringsvorm getoond in FIG. 27, negeert de hub H* alle berichten verzonden door de andere aanwijsinrichting M1 naar de hub H* die aankomen tussen t2 en t2+AT. Daarom wordt, in het getoonde voorbeeld, het bewegingsbericht mov1 verzonden door de aanwijsinrichting M1 op t3, genegeerd.
Op tijdstip t4 verstuurt de eerste aanwijsinrichting M1 een bewegingsbericht mov1 naar de hub H*, en de hub H* verzendt dit bericht naar de host.
Op tijdstip t5 verstuurt de tweede aanwijsinrichting M2 een bewegingsbericht naar de hub H*, en de hub H* verzendt dit bericht naar de host.
FIG. 26(d} toont dezelfde sequentie als FIG. 26{c}, maar verschillend behandeld door een variant van de speciale hub H*, In deze uitvoeringsvorm, negeert de hub H* het op t3 verzonden bewegingsbericht mov1 niet, maar vertraagt dit bericht tot nadat het scrolwiel-rotatie-bericht scroli2 verzonden is naar de host op t2+AT, zeg op tx=t2+AT+e, Het bewegingsbericht mov1 op t4 verzonden door de eerste aanwijsinrichting M1, en het bewegingsbericht mov2 verzonden door de tweede aanwijsinrichting M2 worden gewoon verzonden naar de host.
Bij het vergelijken van het gedrag van de speciale hub H* zoals gespecifieerd in FIG. 26(a) tot FIG. 26{d} met het gedrag van de speciale aanwijsinrichtingen, zoals gespecifieerd in FIG. 22{a) en FIG. 22{b}, kan men zien dat de speciale hub H* het probleem van FIG. 21 benadert op basis van hetzelfde principe, namelijk door een dummy-bewegingsbericht in te voegen enige tijd AT vóór het doorsturen van het eigenlijke knop-ingedrukt-bericht of scrolwiel-rotatie-bericht. Het implementeren van dit gedrag in een speciale hub in plaats van in speciale aanwijsinrichtingen verschaft het additionele voordeel dat de hub H* werkelijk kan voorkomen dat de andere aanwijsinrichting een tussenliggend bericht naar de host verstuurt tussen dit dummy-bewegingsbericht en het eigenlijke knop-ingedrukt of scrolwiel-rotatie-bericht, en daarom kan garanderen dat de situatie van FIG. 21 niet kan optreden. Dat is niet mogelijk met de speciale aanwijsinrichtingen zonder de hub.
Of in andere woorden uitgedrukt, hoewel de "beweeg-vóór-klik" en de "beweeg-vóór-scro!” functie voorgesteld in FIG. 22 het risico vermindert dat de computerinrichting de berichten verkeerd zal interpreteren, is het risico niet volledig geëlimineerd, omdat één aanwijsinrichting geen invloed heeft over de berichten die verzonden worden door de andere aanwijsinrichting. Daarentegen, heeft een speciale hub H* met de kenmerken beschreven in FIG. 26(a) tot FIG. 26(d) volledige controle over de berichten die naar de computerinrichting worden verzonden, en kan de stroom van berichten naar en van beide aanwijsinrichtingen filteren en/of aanpassen. Op deze manier kunnen ongewenste combinaties van voorwaarden of ongewenste timing tussen de signalen/boodschappen vermeden of aangepast worden, zodanig dat het O/S en de GUI en de speciale overlay-applicatie 2551 correct zullen functioneren.
"Slimme hubs" die berichten van meerdere aanwijsinrichtingen interpreteren en/of wijzigen en/of tussenvoegen en/of vertragen om dubbele muis ondersteuning op een computerinrichting mogen te maken in het algemeen, laat staan voor het faciliteren van dubbele muis ondersteuning verschaft door een overlay-applicatie die op een computerinrichting met een O/S en GUI wordt uitgevoerd dat slechts één enkele native muiscursor verschaft, om de native muiscursor te herpositioneren, teneinde een O/S en GUI te verschaffen dat virtueel dubbele muis ondersteuning verschaft, bestaan niet in de stand der techniek.
FIG. 27{a} toont een voorbeeldmatig blokdiagram van een hub of dongel of adapter volgens een uitvoeringsvorm van de onderhavige uitvinding, zoals gebruikt kan worden in het systeem van FIG. 25, die ten minste twee fysieke connectoren CON1, CON2 heeft voor verbinding met twee klassieke bedrade aanwijsinrichtingen M1, M2, en ten minste één connector CON3 (optioneel aan het einde van een kabel) voor verbinding met een computerinrichting 2701.
FIG. 27(b} toont een voorbeeldmatig blokdiagram van een draadloze hub {of dongel of adapter) volgens een uitvoeringsvorm van de onderhavige uitvinding, zoals gebruikt kan worden in het systeem van FIG. 25, die één of twee RF-zendontvangers heeft voor werkzame verbinding met twee klassieke draadloze aanwijsinrichtingen.
De hub 2720 van FIG, 27(a) omvat: - een eerste interface CON1 om te communiceren met een eerste aanwijsinrichting M1; - een tweede interface CON2 om te communiceren met een tweede aanwijsinrichting M2; - een derde interface CON3 om te communiceren met een computerinrichting 2701; - een besturingseenheid 2744 die verbonden is met de eerste interface voor het ontvangen van eerste berichten van de eerste aanwijsinrichting M1, en die verbonden is met de tweede interface voor het ontvangen van tweede berichten van de tweede aanwijsinrichting M2, en die verbonden is met de derde interface voor het verzenden van de eerste en tweede berichten naar de computerinrichting {2701}; - en waarbij de besturingseenheid 2744 is aangepast voor het zenden van een dummy- bewegingsbericht een vooraf bepaalde periode (AT) vóór het zenden van een knop-ingedrukt-bericht en/of een scrolwiel-rotatie-bericht.
Meer specifiek, kan de besturingseenheid 2744 aangepast worden om zich als volgt te gedragen: * bij ontvangst van een eerste knop-ingedrukt-bericht pressl van de eerste aanwijsinrichting via de eerste interface, om een eerste dummy-bewegingsbericht dmovl te zenden naar de computerinrichting via de derde interface, en om een vooraf bepaalde periode AT later het eerste knop-ingedrukt-bericht press1 te zenden naar de computerinrichting via de derde interface; * bij ontvangst van een tweede knop-ingedrukt-bericht press2 van de tweede aanwijsinrichting via de tweede interface, om een tweede dummy-bewegingsbericht dmov2 te zenden naar de computerinrichting via de derde interface, en om een vooraf bepaalde periode AT later, het tweede knop-ingedrukt-bericht press2 te zenden naar de computerinrichting via de derde interface; * bij ontvangst van een eerste scrolwiel-rotatie-bericht van de eerste aanwijsinrichting via de eerste interface, om een eerste dummy-bewegingsbericht dmovl te zenden naar de computerinrichting via de derde interface, en om een vooraf bepaalde periode AT later, het eerste scrolwiel-rotatie-bericht te zenden naar de computerinrichting via de derde interface; * bij ontvangst van een tweede scrolwiel-rotatie-bericht van de tweede aanwijsinrichting via de tweede interface, om een tweede dummy-bewegingsbericht dmov2 te zenden naar de computerinrichting via de derde interface, en om een vooraf bepaalde periode AT later, het tweede scrolwiel-rotatie-bericht te zenden naar de computerinrichting via de derde interface.
De hub 2721 van FIG. 27(b} omvat: - een eerste RF-zendontvanger RFX1 voor het ontvangen van berichten van en het verzenden van berichten naar de eerste aanwijsinrichting M1; en
- een tweede RF-zendontvanger RFX2 voor het ontvangen van berichten van en het verzenden van berichten naar de tweede aanwijsinrichting M2, waarbij de tweede RF-zendontvanger dezelfde is als de eerste RF-zendontvanger, of een separate RF-zendontvanger is; en - een connector CON3 die aansluitbaar is op een computerinrichting 2701; - een besturingseenheid 2745 die verbonden is met de eerste RF-zendontvanger RFX1 voor het ontvangen van eerste berichten van de eerste aanwijsinrichting M1, en die verbonden is met de tweede RF-zendontvanger RFX2 voor het ontvangen van tweede berichten van de tweede aanwijsinrichting M2, en die verbonden is met de connector CON3 voor het zenden van berichten naar {en typisch ook het ontvangen van berichten van) de computerinrichting 2701, waarbij de besturingseenheid 2745 is aangepast voor het zenden van een dummy- bewegingsbericht een vooraf bepaalde periode AT vóór het zenden van een knop-ingedrukt-bericht naar de computerinrichting en/of voor het zenden van een dummy-bewegingsbericht een vooraf bepaalde periode (AT) vóór het zenden van een scrolwiel-rotatie-bericht naar de computerinrichting.
Wat hierboven is beschreven met betrekking tot de parameters dx, dy, AT bij het bespreken van speciale aanwijsinrichtingen, wordt hier niet herhaald, maar is ook toepasbaar op de speciale hub.
De besturingseenheid 2744, 2745 kan een programmeerbare besturingseenheid zijn, bijv. een microprocessor.
FIG. 28(a) toont een voorbeeldmatig gebruikersinterface-venster, hierin de "mini- gebruikersinterface” genoemd, zoals gebruikt kan worden in uitvoeringsvormen van de onderhavige uitvinding voor het configureren van de overlay-applicatie, bijv. om een inputmodus en/of een displaymodus te kiezen, en/of een grootte en/of een kleur van het tweede of verder zichtbaar voorwerp te kiezen, en/of een semi-transparantieniveau van het doorklikvenster te kiezen gebruikmakend van één of meerdere pop-up-menu's, waarvan een voorbeeld getoond wordt in FIG. 28(b).
Het gebruikersinterface-venster, bijv. venster 585 in FIG. 5c of venster 885 in FIG. 8c, is bij voorkeur ondoorzichtig en is niet geconfigureerd in doorklikmodus, en heeft bij voorkeur een Z-orde hoger dan die van het doorklikvenster 584, 884 in FIG. 5c en FIG. 8c. Het pop-up-menu van FIG. 28(b) kan bijvoorbeeld verschijnen bij het klikken op een rechterknop van de dominante aanwijsinrichting wanneer de native muiscursor gepositioneerd is boven één van de pictogrammen die een specifieke displaymodus weergeven.
De overlay-applicatie kan één of meerdere ingangsmodi implementeren, gekozen uit de groep bestaande uit: een EénHandige Aanwijs-modus (aangeduid als "EénH" in FIG. 28a), een Dubbele Aanwijs-modus waarbij de linker aanwijsinrichting de dominante aanwijsinrichting is {aangeduid als LinksH" in FIG. 28a}, een Dubbele Aanwijs-modus waarbij de rechter aanwijsinrichting de dominante aanwijsinrichting is {aangeduid als "RechtsH" in FIG. 28a), en een Dubbele Aanwijs-modus waarbij beide aanwijsinrichtingen dominant zijn (aangeduid als "TweeH" in FIG. 28a). In een uitvoeringsvorm van de onderhavige uitvinding die configureerbaar is in één van meerdere ingangsmodi, kan een berichtenverwerker van de overlay-applicatie de pseudo-code van FIG. 18{c) omvatten. Er wordt opgemerkt dat het testen of een knop van de dominante aanwijsinrichting is ingedrukt of niet, niet vereist is in het geval van de RechtsHandige en LinksHandige inputmodus, omdat de native muiscursor in deze gevallen niet springt van de ene naar de andere onderhouden positie Pos1, Pos2. Dus bijvoorbeeld, in het geval van de Rechtshandige inputmodus, kan een knop van de rechter aanwijsinrichting gerust ingedrukt en bewogen worden (bijv. bij het slepen of bij het selecteren van tekst in een tekstverwerker} terwijl de linker aanwijsinrichting eveneens bewogen wordt, zonder een conflict te veroorzaken (ervan uitgaand dat geen knop van de linker aanwijsinrichting wordt ingedrukt, en dat het scrolwiel van de linker aanwijsinrichting niet wordt gedraaid).
Er wordt in dit opzicht opgemerkt dat sommige uitvoeringsvormen van de speciale hub het gedrag weergegeven in FIG. 26(a) en FIG. 26(c}), of zoals weergegeven in FIG. 26(b) en FIG. 26{(d), kunnen implementeren, ervan uitgaande dat beide aanwijsinrichtingen mogen worden bewogen en/of geklikt en/of gescrold.
Andere uitvoeringsvormen van de speciale hub kunnen alle knop-ingedrukt-berichten en alle drukknop-losgelaten-berichten en alle scrolwiel-rotatieberichten ontvangen via één van zijn ingangspoorten (bv. de poort waar de aanwijsinrichting voor de niet-dominante hand is verbonden) onvoorwaardelijk negeren, en via die ingangspoort alleen bewegingsberichten doorlaten. Zuike uitvoeringsvorm kan in het bijzonder nuttig zijn in combinatie met een LinksHandige of RechtsHandige inputmodus. Op deze wijze wordt gegarandeerd dat zulk bericht verzonden door de niet-dominante aanwijsinrichting de computerinrichting niet kan bereiken, zelfs indien de gebruiker per ongeluk de niet-dominante aanwijsinrichting zou klikken of scrollen.
Sommige uitvoeringsvormen van de speciale hub zijn configureerbaar, bijv. via dip-switches of in software, bijvoorbeeld via een opdracht van de overlay-applicatie, of op een andere wijze, om ofwel (i) het doorlaten toe te staan van alle bewegings- en indrukkings- en loslatings- en scrolwiel-rotatie- berichten van alle aanwijsinrichtingen, of (ii) het doorlaten toe te staan van bewegingsberichten van alle aanwijsinrichtingen, maar slechts indrukkings- en loslatings- en scrolwielberichten van één enkele aanwijsinrichting toe te staan.
De overlay-applicatie kan één of meerdere displaymodi implementeren, bijvoorbeeld zoals voorgesteld door de pictogrammen getoond in FIG. 28{a).
EERSTE GROEP: Een eerste groep 2840 displaymodi werkt met de "EénHandige Aanwijs"-inputmodus, en biedt de volgende displaymodi, die als volgt samengevat kunnen worden: - pictogram 2840(a) stelt een modus voor met de enkele {native} muisaanwijzer verschaft door een klassiek O/5 en GUI, - pictogrammen 2840(b) tot 2840{(f) stellen een modus voor met de enkele {native) muisaanwijzer, maar bijkomend een tweede en/of derde zichtbaar voorwerp in de vorm van (b) een hand; ({c} een vierkant of lijnsegment of rechthoek; {d} een lijn of rechthoek die zich uitstrekt over de ganse breedte van het overlayvenster; (e} een klein kruis; (f} een groot kruis gevormd door een horizontale lijn of rechthoek die zich bij voorkeur uitstrekt uit over de ganse breedte van het overlayvenster 584, 884 en door een verticale lijn of rechthoek die zich bij voorkeur uitstrekt over de ganse hoogte van het overlayvenster 584, 884; - pictogram 2840(j) dat een modus weergeeft van een horizontale lijn of balk gelijkend op modus 2840(d), maar met een additioneel zichtbaar voorwerp in de vorm van een klein blok bijv. een vierkant of rechthoek beweegbaar binnen de lijn of balk; - pictogram 2840(k) stelt een modus voor met een verticale lijn die het scherm splitst in een linker gedeelte en een rechter gedeelte, deze verticale lijn is bij voorkeur beweegbaar door "slepen" {na het tijdelijk instellen van het overlayvenster 584, 884 in “niet-doorklikmodus" zoals in meer detail uitgelegd in de mede in behandeling zijnde “geperforeerde bitmap aanvrage{n)", en met een horizontale lijn aan het linker gedeelte van de verticale lijn, welke horizontale lijn mee beweegt met de muisaanwijzer wanneer de muisaanwijzer zich aan de linkerzijde van de verticale lijn bevindt, en welke horizontale lijn bevriest wanneer de muisaanwijzer zich aan de rechterzijde van de verticale lijn bevindt. Deze modus kan in het bijzonder nuttig zijn voor rechtshandige vertalers of reviewers die met slechts één enkele muisaanwijzer werken; - pictogram 2840{|} stelt een modus voor gelijkend op modus 2840(k) maar de horizontale lijn bevindt zich aan de rechterzijde van de verticale lijn, en beweegt omhoog/omlaag wanneer de native muisaanwijzer zich aan de rechterzijde van de verticale lijn bevindt, en bevriest wanneer de muisaanwijzer zich aan de linkerzijde van de verticale lijn bevindt. Deze modus kan in het bijzonder nuttig zijn voor linkshandige vertalers of reviewers die met slechts één enkele muisaanwijzer werken.
In alle modi 2840(a}-{!} is de native muiscursor zichtbaar op het scherm, en beweegt deze mee met het ten minste tweede zichtbaar voorwerp in de vorm van een hand of een lijn of een kruis of een blok zoals hierboven beschreven, behalve in de modi met de "bevroren lijn" voorgesteid door pictogram 2840(k) en 28401), waarbij het zichtbaar voorwerp slechts onder bepaalde voorwaarden met de aanwijsinrichting mee beweegt.
TWEEDE GROEP:
Een tweede groep 2850 displaymodi werkt met de "LinksHandige Dubbele Aanwijs"- inputmodus, en biedt de volgende displaymodi, die als volgt samengevat kunnen worden: - pictogram 2850{a} stelt een modus voor met de enkele {native} muisaanwijzer verschaft door een klassiek O/S en GUI, en bijkomend een tweede zichtbaar voorwerp in de vorm van een pijl, bijv. een zwarte pijl. De native muiscursor wordt gestuurd door de linker aanwijsinrichting. Aspecten van modus 2850(a) werden ook beschreven in FIG. 9; - pictogrammen 2850{b} tot 2850(f} stellen een modus voor met de enkele (native) muisaanwijzer stuurbaar door de linker aanwijsinrichting, en met een additioneel tweede of verder zichtbaar voorwerp in de vorm van {b)} een hand; (c} een vierkant; {d} een lijn of rechthoek; (e) een klein kruis; (f) een groot kruis, regelbaar door de andere aanwijsinrichting, namelijk de rechter aanwijsinrichting; - pictogram 2850(g) tot pictogram 2850(i) stelt een modus voor gelijkend op modus 2850(c) tot 2850(e), maar de overlay-applicatie toont verder een additioneel (g) vierkant of (h) lijn of (i) klein kruis dat mee beweegt met de native muisaanwijzer, en derhalve beweegbaar is door de linker aanwijsinrichting; - pictogram 2850(j) stelt een modus voor waarbij de overlay-applicatie een verticale lijn verschaft die het scherm splitst in een linker gedeelte en een rechter gedeelte, en met een eerste horizontale lijn gelegen aan de linkerzijde van de verticale lijn die beweegt in overeenstemming met bewegingen van de linker aanwijsinrichting, en met een tweede horizontale lijn gelegen aan de rechterzijde van de verticale lijn die beweegt in overeenstemming met bewegingen van de rechter aanwijsinrichting. De native muiscursor is beweegbaar over het ganse scherm, en beweegt mee met de linker aanwijsinrichting. Deze modus kan in het bijzonder nuttig zijn voor linkshandige vertalers of reviewers die twee teksten vergelijken; - pictogram 2850(!) stelt een variant voor van de modus 2850{j} zonder de linker horizontale lijn te tonen; In alle modi 2850{a)-(l} is de native muiscursor zichtbaar op het scherm, en beweegt deze in overeenstemming met bewegingen van de linker aanwijsinrichting, wat de reden is waarom deze modi waarschijnlijk het meest geschikt zijn voor linkshandige mensen die de native muiscursor met hun dominante (linker) hand aansturen, en een tweede zichtbaar voorwerp met hun niet-dominante rechter} hand bewegen. De gebruiker hoort niet te klikken of te scrollen met de niet-dominant aanwijsinrichting, maar deze alleen te bewegen (bijv. om tekstuele informatie op het scherm te onderlijnen).
DERDE GROEP: Een derde groep 2860 displaymodi werkt met de "RechtsHandige Dubbele Aanwijs"- inputmodus, en biedt displaymodi gelijkende op de tweede groep 2850 van displaymodi, behalve dat de functie van de linker en rechter aanwijsinrichting zijn verwisseld, en dat in modus 2860(k) de linker horizontale lijn wordt getoond in de plaats van de rechter horizontale lijn.
Aspecten van modus 2860(a) werden ook beschreven in FIG. 8.
Aspecten van modus 2860(d) werden ook beschreven in FIG. 5.
Aspecten van modus 2860(h} werden ook beschreven in FIG. 6.
In alle modi 2860{a}-(k} is de native muiscursor zichtbaar op het scherm, en beweegt deze in overeenstemming met bewegingen van de rechter aanwijsinrichting, wat de reden is waarom deze modi waarschijnlijk het meest geschikt zijn voor rechtshandige mensen die de native muiscursor met hun dominante (rechter) hand aansturen, en een tweede zichtbaar voorwerp met hun niet-dominante {linker} hand bewegen. De gebruiker hoort niet te klikken of te scrollen met de niet-dominant aanwijsinrichting, maar deze alleen te bewegen (bijv. om tekstuele informatie op het scherm te onderlijnen}.
VIERDE GROEP: Een vierde groep 2870 displaymodi werkt met de "TweeHandige Dubbele Aanwijs"- inputmodus, en biedt displaymodus 2870(a} met twee zichtbare voorwerpen: de native muiscursor, bijv. als een witte pijl, en een tweede pij! (bijv. zwarte pij!), reeds beschreven in FIG. 10, - pictogram 2870(b) stelt een modus voor gelijkende op modus 2850{b}, behalve dat twee bitmaps met een hand worden getoond, één beweegbaar met de linker aanwijsinrichting, de andere beweegbaar met de rechter aanwijsinrichting (bv. zoals getoond in FIG. 34); - pictogram 2870(g) tot pictogram 2870(j) stelt een modus voor gelijkende op modus 2850(g} tot 2850{j), behalve dat de native muiscursor de positie zal volgen die geassocieerd is met de aanwijsinrichting welke het meest recent werd bewogen, en/of waarvan een knop het meest recent werd ingedrukt, en/of waarvan een scrolwiel het meest recent werd gedraaid, zoals hierboven uitgelegd. Deze modi zijn in het bijzonder geschikt voor gebruikers die beide aanwijsinrichtingen willen bewegen en klikken en/of scrollen, bijvoorbeeld de transcribers van FIG. 4, maar bijvoorbeeld ook de vertalers of proeflezers van FIG. 1 die door beide documenten wensen te scrollen en/of te bewerken, gebruikmakende van beide aanwijsinrichtingen.
Zoals boven beschreven (zie bijv. FIG. 14 en FIG. 15 en FIG. 19 en FIG. 20), werken de modi van deze vierde groep 2870 goed, zelfs met klassieke aanwijsinrichtingen M1, M2 op voorwaarde dat de aanwijsinrichting die wordt geklikt en/of gescrold degene is die het meest recent werd bewogen, hetgeen speciale aandacht van de gebruiker vereist. Een tamelijk eenvoudige oplossing zou zijn om een muis altijd eerst manueel te bewegen alvorens deze te klikken. Maar zoals hierboven uitgelegd, werken deze modi zelfs beter wanneer gebruik wordt gemaakt van speciale aanwijsinrichtingen (zie bijv. FIG. 22) die automatisch zorg dragen van het "bewegen vóór het klikken" en/of het "bewegen vóór het scrollen", of met een speciale hub of adapter of dongel zoals hierboven beschreven, zie bijv. FIG. 26{a) tot FIG. 26{d). FIG. 28{b} toont een voorbeeldmatig pop-up-menu dat opgeroepen kan worden door het klikken met een rechter knop van de dominante aanwijsinrichting op sommige van de displaymodi in het mini-interface venster van FIG. 28{a}. In het getoonde voorbeeld, laten de menu's toe de kleur, en de grootte van het tweede en/of verder zichtbaar voorwerp(en} te veranderen, alsook een transparantieniveau te kiezen van het doorklik-overlayvenster 584 (FIG. 5c} of 884 (FIG. 8c).
FIG. 29 toont een ander voorbeeldmatig gebruikersinterface-venster, hierin de "hoofdgebruikersinterface" genoemd, zoals gebruikt kan worden in uitvoeringsvormen van de onderhavige uitvinding voor het configureren van de overlay-applicatie.
Het gebruikersinterface (Ul) -venster getoond in FIG. 29 heeft een gebied met titel "Mouse/Touchpad" (Nederlands: "Muis/Touchpad") voor het selecteren van de inputmodus (bijv.
LinksHandig of RechtsHandig of TweeHandig), en voor het selecteren van welke aanwijsinrichting (of eigenlijk, welke “handle” toegewezen wordt door het besturingssysteem aan elke aanwijsinrichting) beschouwd dient te worden ais de dominante aanwijsinrichting (of "handle" daarvan). De Ul omvat ook componenten zoals bijv. radioknoppen voor het selecteren van relatieve sneiheid van beweging, enz. In FIG. 31(a) wordt dit gebied in een vergroot aanzicht getoond.
Het interfacevenster getoond in FIG. 29 heeft ook een gebied met titel Background") (Nederlands: Achtergrond"), dat het mogelijk maakt dat het doorklik-overlayvenster 584, 884 dat het ten minste één tweede zichtbaar voorwerp 506L, 806L omvat, verder een bitmap bevat die pixels 594, 894 omvat, waarvan een merendeel volledig transparante pixels zijn, of semi-transparante monochrome pixels, of een semi-transparant textuurbitmap zoals in meer detail beschreven in de mede in behandeling zijnde "geperforeerde bitmap aanvrage{n)".
Het voorbeeldmatige gebruikersinterface-venster getoond in FIG. 29 heeft ook een gebied met titel "Transparency" (Nederlands: "Transparantie"), dat het mogelijk maakt een alfatransparantieniveau van het overlayvenster 584 te selecteren of te kiezen, Bijvoorbeeld, indien de achtergrondpixels 584 en 884 volledig transparante pixels zijn, kan de mate van transparantie van het beweegbare zichtbaar voorwerp op deze manier gewijzigd worden. De gebruiker kan een compromis kiezen tussen enerzijds het tonen van een voorwerp dat heel verschillend is van de achtergrondpixels, en anderzijds, dat voldoende transparant is om onderliggende tekstuele informatie te kunnen lezen.
De gebruikersinterface-venster getoond in FIG. 29 heeft ook een gebied met titel "Mode" (Nederlands: "Modus"), dat reeds beschreven is in FIG. 28. Afhankelijk van welke displaymodus geselecteerd is, kan het voornaamste venster een additioneel gebied zoals het gebied "block"
(Nederlands: "blok") tonen waar de gebruiker bijvoorbeeld een kleur, hoogte, breedte en verticale verschuiving kan selecteren.
Het interfacevenster getoond in FIG. 29 heeft ook een gebied met titel "Examples" (Nederlands: “Voorbeeiden"}, voor het gebruikmaken van de displaymodi met standaardinstellingen, maar standaardinstellingen kunnen uiteraard ook anders geïmplementeerd worden. In FIG. 30 wordt dit gebied in een vergroot aanzicht getoond.
Er wordt op gewezen dat uitvoeringsvormen van de onderhavige uitvinding geenszins beperkt zijn tot deze specifieke gebruikersinterface.
FIG. 30 is een vergroot aanzicht van een gedeelte van FIG. 29. Het geeft een zichtbaar overzicht van verscheidene mogelijk uitvoeringsvormen van de onderhavige uitvinding, echter, de uitvinding is daartoe niet beperkt. Deze standaardmodi stemmen grotendeels overeen met de modi getoond in de mini-interface van FIG. 28(a). Enkele van de modi worden in meer detail beschreven in dit document, zoals aangeduid door de Romeinse getallen die naar de respectievelijke figuren verwijzen.
FIG. 31(a) is een vergroot aanzicht van een gedeelte van FIG. 29. Het toont bijvoorbeeld hoe een gebruiker een inputmodus kan kiezen, bijv. LinksHandig; RechtsHandig; TweeHandig. Er wordt opgemerkt dat bijvoorbeeld een touchpad van een laptopcomputer ook als een aanwijsinrichting wordt beschouwd, vandaar de indicatie "#3" in de titel, wat wil zeggen dat het besturingssysteem van de computerinrichting waarvan dit screenshot werd genomen, drie inputinrichtingen heeft gevonden: twee fysieke muisinrichtingen en één touchpad.
Er wordt opgemerkt dat de onderhavige uitvinding bijvoorbeeld ook zal werken met een laptopcomputer waaraan slechts één enkele fysieke muis is verbonden, bijv. door gebruik te maken van het touchpad als de niet-dominante aanwijsinrichting en de fysieke muis als de dominante aanwijsinrichting.
FIG. 31{b} is een variant van het gedeelte van FIG. 31{a), waarbij een optie is toegevoegd om de oriëntatie van de verplaatsingsvector gedefinieerd door de verplaatsingswaardes (dx, dy) aan te passen naar een geprefereerde oriëntatie gekozen uit een eerste groep van vooraf bepaalde richtingen bestaande uit de richtingen: Noord, West, Zuid, Oost, of uit een tweede groep van vooraf bepaalde richtingen bestaande uit de richtingen: Noord, Noord-West, West, Zuid-West, Zuid, Zuid-Oost, Oost, Noord-Oost. Deze transformatie kan toegepast worden op bewegingen van alleen de dominante aanwijsinrichting, of op bewegingen van alleen de niet-dominante aanwijsinrichting, of op beide aanwijsinrichtingen.
Testen hebben aangetoond dat deze functie de gebruiker sterk kan helpen om bewegingen van één of beide aanwijsinrichtingen beter aan te sturen bij het uitvoeren van bepaalde taken. Deze functie kan bijvoorbeeld in het bijzonder nuttig zijn om de door de niet-dominante hand aangestuurde aanwijsinrichting horizontaal over een tekstlijn te bewegen, bijv. bij het uitvoeren van tekst- gebaseerde taken zoals het lezen van een tekstdocument, het proeflezen van een vertaling, het wijzen naar individuele woorden op eenzelfde lijn tijdens een Webinar of presentatie, enz.
FIG. 31(c} toont enkele regels pseudo-code die gebruikt kunnen worden in de positiebijwerkingsroutine voor het transformeren van de verplaatsingswaardes dx, dy om te worden gesitueerd in een oriëntatie van de tweede groep van acht toegelaten oriëntaties hierboven vermeld (Noord, Noord-West, enz.). In het voorbeeld van FIG. 31{c}, - indien dx=0, betekent dit dat de beweging reeds verticaal was, bijgevolg is geen aanpassing vereist; - indien dy=0, betekent dit dat de beweging reeds horizontaal was, bijgevolg is geen aanpassing vereist; - indien dx=dy, betekent dit dat de beweging reeds diagonaal was, bijgevolg is geen aanpassing is vereist, - anders, wordt bepaald of de hoek van de verplaatsingsvector in het bereik ligt van (-30° tot +30°) of in het bereik van (150° tot 210°}, in welk geval de absolute waarde van de tangens van genoemde hoek kleiner is dan 0,5, in welk geval de beweging gedwongen wordt om horizontaal te zijn, en/of wordt bepaald of de hoek van de verplaatsingsvector in het bereik ligt van (60° tot 120°) of in het bereik van {240° tot 300°), in welk geval de absolute waarde van de tangens van de genoemde hoek groter is dan 2,0, in welk geval de beweging wordt gedwongen om verticaal te zijn, anders wordt de beweging gedwongen om diagonaal te zijn (georiënteerd op +45° of 135° of 225° of 315°).
Er wordt opgemerkt dat er geen goniometrische functies gebruikt worden in deze routine, waardoor de implementatie tamelijk eenvoudig en tamelijk snel wordt gehouden, en de CPU-belasting daardoor tamelijk faag bijft. De zorgvuldige lezer zal herkennen dat de amplitude van de verplaatsingsvector mogelijks lichtjes kan toenemen of afnemen door de aanpassing, teneinde de transformatie eenvoudig en snel te houden. Dit effect is nauwelijks merkbaar.
Testen hebben aangetoond dat de transformatie van FIG. 31(c) trage bewegingen van de aanwijsinrichting (waarvoor dx en dy zeer klein zijn} niet beïnvloedt. Voor een gebruiker voelt dit alsof tamelijk trage bewegingen in iedere richting kunnen uitgevoerd worden, hetgeen wenselijk is om finetunen van een positie op het scherm mogelijk te maken. Echter, indien de snelheid waarmee de aanwijsinrichting wordt bewogen wordt verhoogd, zal de amplitude van de verplaatsingsvector groter worden dan een vooraf bepaalde drempelwaarde (in het voorbeeld van FIG. 31c groter dan 0), in welk geval de verplaatsing wordt gedwongen om horizontaal of verticaal of diagonaal te zijn. Dit gedrag is zeer wenselijk om bijna horizontale bewegingen perfect horizontaal te houden, hetgeen moeilijk manueel te bereiken is, vooral bij tamelijk hoge snelheid.
Maar uiteraard vereist de onderhavige uitvinding niet dat deze functie aanwezig is {ze kan worden ingeschakeld of uitgeschakeld door een gebruiker}. Verder, indien aanwezig, is de onderhavige uitvinding niet beperkt tot de/het specifieke routine of algoritme getoond in FIG. 31{c}, en andere algoritmes voor het heroriënteren van de aanwijzerbewegingen zijn eveneens overwogen, zoals bijvoorbeeld beschreven in de volgende varianten.
FIG. 31{d} en FIG. 31{e} tonen een variant van de verplaatsings-transformatieroutine, waarbij bijna-horizontale bewegingen getransformeerd worden naar zuiver horizontale bewegingen.
Meer specifiek, toont FIG. 31{d} een grafische voorstelling van de verplaatsingsvector V die overeenkomt met de fysieke beweging van de aanwijsinrichting, geassocieerd met de verplaatsingswaardes (dx, dy). De verplaatsingsvector V vormt een hoek a ten opzichte van de X-as. Indien deze hoek in de in grijze kleur aangeduide segmenten ligt, wat wil zeggen dat de hoek a in het bereik [-amax..+amax] of in het bereik [180%-amax.. 180°+0max] ligt, dan wordt de verplaatsingsvector getransformeerd naar een zuiver horizontale verplaatsing, door de waarde van dy gelijk aan nul in te stellen. In plaats van met hoeken te werken, kan dit gecodificeerd worden door de absolute waarde van de tangens van de hoek, dat is abs{dy/dx), te berekenen, en te testen of deze waarde kleiner is dan, of kleiner dan of gelijk is aan een vooraf bepaalde constante. Bijvoorbeeld, amax =30° komt overeen met abs{dy/dx) = 0,577, of als een ander voorbeeld, het testen of abs(dy/dx} < 0,5 komt overeen met het testen of de hoek a in het bereik ligt van ongeveer [-26° tot +26°] of ongeveer [154° tot 206°], maar uiteraard is de onderhavige uitvinding niet beperkt tot slechts dit bereik, en andere bereiken kunnen eveneens gebruikt worden.
FIG. 31{e} toont voorbeeldmatige regels pseudo-code die de hierboven beschreven "verplaatsingstransformatie” implementeren, welke gebruikt kunnen worden in de "positiebijwerkings- routine" {zie bijvoorbeeld stap g) van FIG. 5{e), bij het bijwerken van Pos1 en Pos2). Maar uiteraard kan een ander hoekbereik gebruikt worden, of met andere woorden, de uitvinding zal ook werken met andere waardes voor MAXTAN {in FIG. 31e}, bijvoorbeeld waardes in het bereik van 0,2 tot 0,75, bijvoorbeeld kleiner dan 0,25=1/4, of kleiner dan 0,33=1/3, of kleiner dan 0,5=1/2, of kleiner dan 0,66=2/3, of kleiner dan 0,75=3/4. De vakman die het voordeel van de onderhavige uitvinding heeft, kan eenvoudig andere geschikte bereiken definiëren.
FIG. 32 toont een computersysteem 3200 volgens een uitvoeringsvorm van de onderhavige uitvinding, omvattende een computerinrichting 3201 volgens een uitvoeringsvorm van de onderhavige uitvinding die een overlay-applicatie volgens een uitvoeringsvorm van de onderhavige uitvinding uitvoert, en twee aanwijsinrichtingen, bijv. muisinrichtingen 3203L, 3203R verbonden met de computerinrichting, en optioneel een toetsenbord 3202. De muisinrichtingen kunnen klassieke muisinrichtingen zijn, of kunnen speciale muisinrichtingen zijn met de "beweeg-vóór-klik" functie en/of de “beweeg-vóór-scrol" functie zoals uitgelegd in FIG. 22{a} en FIG. 22(b). De muisinrichtingen kunnen rechtstreeks met de computerinrichting verbonden zijn (bijv. zoals getoond in FIG. 11 en FIG. 23{a)}}, of via een klassieke hub of adapter of dongel (bijv. zoals getoond in FIG. 12 en FIG. 24) of via een speciale hub {bijv. zoals getoond in FIG. 25).
De overlay-applicatie gebruikt in het systeem van FIG. 32 laat toe dat het O/S en de GUI (bijv.
Windows 7 of Windows 10 van Microsoft Corporation, of mac OS Sierra of mac OS High Sierra van Apple Inc.) de native muiscursor 3205 toont, maar past de positie daarvan aan, bijv. overschrijft deze. De overlay-applicatie verschaft verder een tweede zichtbaar voorwerp 3206L en een derde zichtbaar voorwerp 3206R, in het voorbeeld van FIG. 32 zijnde twee lijnen of rechthoekige gebieden. Deze rechthoekige gebieden kunnen ondoorzichtig of semi-transparant zijn. Ze kunnen één enkele kleur hebben, of een kleurgradiënt, of kunnen een geperforeerde bitmap bevatten. De andere pixels van het overlayvenster kunnen volledig transparante pixels zijn, of kunnen alle semi-transparante pixels zijn, of het overlayvenster kan een geperforeerde bitmap omvatten of een textuurbitmap zoals uitgelegd in de mede in behandeling zijnde “geperforeerde bitmap aanvragen)".
In het geval dat de overlay-applicatie ontworpen (bijv. hardgecodeerd} is voor, of geconfigureerd is in displaymodus 2860{h}, dus in de RechtsHandige inputmodus, dan volgt het voorwerp 3206L bewegingen van de linker aanwijsinrichting 3203L (of eigenlijk de aanwijsinrichting geconfigureerd of aangeduid als de linker aanwijsinrichting) en volgen de native muiscursor 3205 en het voorwerp 3206R bewegingen van de rechter aanwijsinrichting 3203R {of eigenlijk de aanwijsinrichting geconfigureerd of aangeduid als de rechter aanwijsinrichting).
In het geval dat de overlay-applicatie ontworpen (bijv. hardgecodeerd} is voor, of geconfigureerd is in displaymodus 2870(h), dus in de TweeHandige inputmodus, dan volgt het voorwerp 3206L bewegingen van de linker aanwijsinrichting 3203L (of eigenlijk de aanwijsinrichting geconfigureerd of aangeduid als de linker aanwijsinrichting) en volgt het voorwerp 3206R bewegingen van de rechter aanwijsinrichting 3203R (of eigenlijk de aanwijsinrichting geconfigureerd of aangeduid als de rechter aanwijsinrichting)}, en zal de native muiscursor 3205 bewegen en/of springen afhankelijk van welke aanwijsinrichting het meest recent werd bewogen en/of geklikt en/of gescrold.
De uitvoeringsvorm weergegeven in FIG. 32, en varianten daarvan, optioneel gebruikmakend van een bedrade of draadioze hub of adapter of dongel, en optioneel gebruikmakend van een bewegingstransformatie zoals uitgelegd in FIG. 31(b) en FIG. 31{c}), kunnen in het bijzonder nuttig zijn voor het adresseren van het probleem beschreven in FIG. 1 en FIG. 3, waarbij het gewenst is om twee tekstfragmenten te onderlijnen.
FIG. 33 toont uitvoeringsvormen van de onderhavige uitvinding die displaymodus 2850(g), 2860(g) en 2870(g) implementeren, waarbij het 0O/S en de GUI de native muiscursor 3305 tonen, waarvan de vorm typisch kan en zal veranderen afhankelijk van de context, en toont de overlay- applicatie bijkomend twee zichtbare en beweegbare vierkanten 3306L, 3306R. Displaymodus 2860(g) en 2870(g} lijken in het bijzonder geschikt te zijn voor elk van de gevallen getoond in FIG. 1 tot FIG. 4 voor rechtshandige mensen, terwijl displaymodus 2850(g} en 2870(g) in het bijzonder geschikt lijken te zijn voor gelijkaardige problemen als getoond in FIG. 1 tot FIG. 4, doch voor linkshandige mensen.
FIG. 34 toont uitvoeringsvormen van de onderhavige uitvinding die displaymodus 2870(b) implementeren, waarbij het O/S en GUI de native muiscursor 3405 tonen (in het voorbeeld een witte pijl), en de overlay-applicatie bijkomend twee zichtbare voorwerpen toont, een tweede voorwerp 3406L zijnde of bevattende een bitmap of beeld van een linkerhand, en een derde voorwerp 3406R zijnde of bevattende een bitmap of beeld van een rechterhand. Ook deze modus lijkt in het bijzonder geschikt te zijn voor al de in FIG. 1 tot FIG. 4 getoonde gevallen, in het bijzonder in combinatie met een bewegingstransformatieroutine zoals uitgelegd in FIG. 31{b} en FIG. 31{c) om de gebruiker te helpen om eenvoudig horizontale bewegingen te maken, en vooral indien de handen semi-transparant zijn, Bij voorkeur is in dit geval de positie van de bitmap bevattende het beeld van de hand lichtjes verschoven ten opzichte van de positie van de native muiscursor 3405, zodanig dat de native muiscursor zich bevindt op of nabij het uiteinde van de respectievelijke wijsvingers. Testen hebben aangetoond dat de twee handen extreem nuttig kunnen zijn bij het proeflezen.
Hoewel de onderhavige uitvinding eveneens kan gebruikt worden met andere bitmaps dan een hand, wordt er opgemerkt dat de vorm van een hand, in het bijzonder een hand met een gestrekte wijsvinger, zeer natuurlijk en intuitief aanvoelt, en de aandacht van de gebruiker niet lijkt af te leiden, misschien omdat het veel op de echte, in FIG. 1 tot FIG. 3 getoonde hand en vinger lijkt. Dat gezegd zijnde, kan een driehoekige vorm, of een veelhoekige vorm, bij voorkeur met een puntig uiteinde bovenaan, eveneens gebruikt worden.
FIG. 35 toont uitvoeringsvormen van de onderhavige uitvinding die displaymodi 2850{d} en 2860(d} implementeren, die de native muiscursor 3505 als een eerste zichtbaar en beweegbaar voorwerp tonen, en één lijn 3506 of rechthoek als het tweede zichtbaar en beweegbaar voorwerp. Deze modi kunnen bijzonder nuttig zijn voor het benaderen van het probleem getoond in FIG. 2 en FIG. 3. Het kan een voordeel van deze uitvoeringsvorm zijn dat er geen derde voorwerp is dat de native muiscursor volgt, dat lichtjes afleidend of lichtjes vervelend zou kunnen zijn bij het selecteren van menu's of kleuren of dergelijke.
FIG. 36 toont uitvoeringsvormen van de onderhavige uitvinding die displaymodi 2850{e} en 2860(e) implementeren, die de native muiscursor 3605 als een eerste zichtbaar en beweegbaar voorwerp tonen en één klein kruis 3606 als een tweede zichtbaar en beweegbaar voorwerp. Deze modi kunnen eveneens bijzonder nuttig zijn voor het benaderen van het probleem getoond in FIG. 2 en FIG. 3.
Displaymodi 2850{j} en 2860(j) die een groot kruis tonen dat zich uitstrekt over de ganse hoogte en breedte van het overlayvenster, kunnen gezien worden als een variant van de uitvoeringsvorm getoond in FIG. 36. Deze modi kunnen bijzonder nuttig zijn bij het lezen van of extraheren van informatie uit een werkblad met de niet-dominante hand, terwijl met de native muiscursor in een ander document wordt gewerkt, bijvoorbeeld een tekstdocument. Het grote kruis in overlay biedt het voordeel dat een specifieke cel eenvoudig kan gevonden worden, en dat de rijhoofdingen en kolomhoofdingen van een bepaalde cel eveneens extreem eenvoudig te vinden zijn, zoals in meer detail uitgelegd in de mede in behandeling zijnde "geperforeerde bitmap aanvrage(n)".
Volledigheidshaive wordt opgemerkt dat de modus 2840(f) met één enkele muis mogelijks beter geschikt kan zijn bij het editeren van een werkblad, omdat in deze uitvoeringsvorm de native muiscursor zich bevindt op de kruising van het grote kruis. Dat gezegd zijnde, kan de vakman met het voordeel van de onderhavige openbaarmaking eenvoudig een displaymodus toevoegen waarbij het kruis van displaymodus 2840{f) gebruikt wordt als het derde zichtbaar voorwerp, en een ander voorwerp, bijvoorbeeld een lijn of een vierkant of een hand wordt toegevoegd als een tweede zichtbaar voorwerp.
FIG. 37 is een variant van FIG. 32 die dezelfde modi implementeert, maar gebruikt wordt om verschillende gedeeltes van één enkel document {virtueel} te onderlijnen.
FIG. 38 illustreert uitvoeringsvormen van de onderhavige uitvinding die displaymodi 2850(i) tot 2870(i) implementeren die de native muiscursor en twee kleine kruisen 3806L, 3806R tonen.
FIG. 39 toont uitvoeringsvormen van de onderhavige uitvinding waarbij de overlay-applicatie geconfigureerd is in een van de displaymodi 2850{j}, 2860(j) en 2870{(j). De horizontale lijn of balk 3906L gesitueerd aan de linkerzijde van de verticale lijn 3907 wordt automatisch omhoog/omlaag bewogen bij het bewegen van de linker aanwijsinrichting 3903L. De horizontale lijn of balk 3906R gesitueerd aan de rechterzijde van de verticale lijn 3907 wordt automatisch omhoog/omlaag bewogen bij het bewegen van de rechter aanwijsinrichting 3903R. Afhankelijk van welke inputmodus wordt geselecteerd of geïmplementeerd, volgt de native muiscursor 3905 bewegingen van de linker aanwijsinrichting 3903L {in de LinksHandige inputmodus), of van de rechter aanwijsinrichting 3903R {in de RechtsHandige inputmodus), of van de aanwijsinrichting die het meest recent werd bewogen en/of geklikt en/of gescrold {in de TweeHandige inputmodus). Een voordeel van deze uitvoeringsvorm voor proeflezers is dat de niet-dominante hand geen nauwkeurige positionering vereist, aangezien een ganse tekstregel onderlijnd kan worden door slechts de niet-dominante aanwijsinrichting omhoog/omlaag te bewegen. Linkse en rechtse bewegingen van de niet-dominante aanwijsinrichting zijn niet vereist. Dit is vooral waar voor “eenvoudige teksten" die tamelijk snel gelezen kunnen worden, waarbij het niet vereist of wenselijk is om elk woord afzonderlijk te onderlijnen, in tegenstelling tot bijvoorbeeld vertalingen van octrooi-conclusies, waar elk woord zorgvuldig gecontroleerd dient te worden.
FIG, 40 toont een variant van de in FIG. 39 getoonde uitvoeringsvormen, waarbij de overlay- applicatie, behalve de horizontale lijn of balk aan de linker- en rechterzijde van de verticale lijn 4007, bijkomend ook twee blokken of vierkanten of rechthoeken 4009L, 4009R toont binnen de horizontale lijn of balk 4006L, 4006R, welke blokken samen met de lijnen in verticale richting (omhoog/omlaag) bewegen, maar ook beweegbaar zijn in horizontale richting (links/rechts) in overeenstemming met bewegingen van de respectievelijke aanwijsinrichtingen 4003L, 4003R. De lijn of balk zal typisch een andere kleur hebben dan de blokken of vierkanten of rechthoeken binnen de lijn of balk, zodat ze duidelijk zichtbaar zijn. In een specifieke uitvoeringsvorm of configuratie, hebben de lijnen een monochrome kleur en zijn de blokken volledig transparant, hetgeen een visuele indruk geeft van een balk met een "gat".
De uitvinders kwamen ook op het idee om het probleem getoond in FIG. 1 tot FIG. 3 op een geheel andere wijze op te oplossen, namelijk, buiten de computerinrichting, bijvoorbeeld in een speciale weergave-inrichting 4104, zoals weergegeven in FIG. 41.
FIG. 41 toont een computersysteem 4100 volgens een uitvoeringsvorm van de onderhavige uitvinding, omvattende een speciale monitor of weergavescherm 4104 volgens een uitvoeringsvorm van de onderhavige uitvinding, en een computerinrichting 4101, dat een klassieke computerinrichting kan zijn. Het computersysteem 4100 omvat ten minste twee aanwijsinrichtingen, met inbegrip van een eerste aanwijsinrichting 4103R verbonden met de klassieke computerinrichting 4101, en een tweede aanwijsinrichting 4103L verbonden met het speciale weergavescherm 4104, op een bedrade of draadloze wijze, bv. via een VGA kabel of een DVi-kabel of een HDMI-kabel 4199 waarover ongecomprimeerd video wordt verstuurd.
In eenvoudige termen uitgedrukt, heeft de weergave-inrichting 4104 een processor die aangepast is voor het communiceren met de aanwijsinrichting 4103L en voor het onderhouden van een positie xL, yL overeenkomend met bewegingen van de aanwijsinrichting 4103L, en aangepast is voor het overlayen van het grafische beeld ontvangen van de computerinrichting 4101 met een lokaal gegenereerd zichtbaar voorwerp 41061, dat bijvoorbeeld de vorm heeft van een vierkant of een rechthoek of een rechthoek met afgeronde randen, of een cirkel of een pijl of een hand of een klein kruis of een groot kruis dat zich uitstrekt over de ganse hoogte en breedte van het weergavescherm, of een andere geschikte vorm, en voor het bewegen van dat voorwerp in overeenstemming met bewegingen van de aanwijsinrichting 4103L door het positioneren van het voorwerp 4106L op de onderhouden positie xL, yL. Met andere woorden, in deze uitvoeringsvorm genereert de weergave- inrichting 4104 het voorwerp 4106L en toont dit op het scherm op een positie die beweegbaar is door de linker aanwijsinrichting 4103L, terwijl de computerinrichting bewegingen van de rechter aanwijsinrichting 4103R afhandelt zoals gewoonlijk.
FIG, 42 toont een voorbeeldmatig blokdiagram van een uitvoeringsvorm van de weergave- inrichting 4104 zoals gebruikt kan worden in het computersysteem 4100 van FIG. 41. De weergave- inrichting 4104 omvat: - een ingangspoort 4231, bijv. een VGA-poort of een HDMI-poort of een DVl-poort of een andere geschikte poort voor het ontvangen van een ongecomprimeerd videosignaal omvattende grafische beeldgegevens afkomstig van een computerinrichting 4101 {dus geen MPEG2 of MPEG4 gecomprimeerd videostroom); - een interface of poort om te communiceren met de aanwijsinrichting 4203L, bijv. een fysieke connector 4237 zoals een USB-connector, of een draadloze RF-interface 4238; - een displaypaneel 4236, bijv. een LCD-paneel voor het genereren van een zichtbaar beeld; - een invoerbuffer 4232 voor het opslaan van minstens een gedeelte van de grafische beeldgegevens ontvangen aan de ingangspoort 4231; - een framebuffer 4234 voor het opslaan van minstens een gedeelte van de beeldgegevens die getoond moeten worden op het displaypaneel 4236; - en een processor aangepast voor: * het communiceren met de aanwijsinrichting 4203L voor het ontvangen van verplaatsingswaardes dx, dy gerelateerd aan bewegingen van de aanwijsinrichting; * het onderhouden van een positie xL, yL op basis van de ontvangen verplaatsingswaardes dx, dy; * het genereren van beeldgegevens van het zichtbaar voorwerp 4106L; * het genereren van de beeldgegevens die in het framebuffer 4234 moeten opgeslagen worden door het overlayen van de grafische beeldgegevens ontvangen aan zijn ingangspoort met de gegenereerde beeldgegevens van het zichtbaar voorwerp 4106L op de onderhouden positie xLyL.
In het geval van een VGA- of andere analoge ingang, moet het binnenkomende signaal gedigitaliseerd worden door middel van één of meerdere ADC (analoog-naar-digitaal} convertoren, op wijzen die op zich gekend zijn in de stand der techniek. Evenzo, indien het uitgaande signaal analoog is,
dan moet het digitale signaal dat het uitgangsbuffer verlaat geconverteerd worden naar analoge signalen gebruikmakende van één of meerdere DAC (digitaal-naar-analoog) convertoren, op wijzen die op zich gekend zijn in de stand der techniek. De weergave-inrichting kan optioneel ingangs- signaalconversiecircuits omvatten voor het converteren van analoge signalen naar digitale signalen, en/of kan optioneel uitgangs-signaalconversiecircuits omvatten voor het converteren van digitale signalen naar analoge uitgangssignalen.
De aanwijsinrichting 4203L kan een bedrade muisinrichting of een draadloze muisinrichting zijn. De aanwijsinrichting 4203L kan een HID-compatibele aanwijsinrichting zijn, bijv. een HID- compatibele muisinrichting. De aanwijsinrichting kan rechtstreeks verbonden zijn met de fysieke connector via draden, of via een klassieke hub {niet getoond).
De aanwijsinrichting kan een draadloze aanwijsinrichting zijn, bijv. een draadloze muisinrichting, die communiceert via een dongel verbonden met, bijv. ingebracht in de fysieke connector van het weergavescherm.
Het weergavescherm kan een interne of externe draadloze RF-zendontvanger 4238 omvatten om te communiceren met een draadloze aanwijsinrichting, bijv. via een Bluetooth-protocol.
Het gegenereerde zichtbaar voorwerp 4106L kan de vorm hebben van een vierkant, of een vierkant met afgeronde randen, of een rechthoek, of een rechthoek met afgeronde randen, of een langwerpig voorwerp, of een pijl of een hand, of een andere geschikte vorm.
Het voorwerp 4106L kan bestaan uit monochrome pixels, bijv. rode of blauwe of zwarte of gele pixels, of een andere geschikte kleur. Alternatief kan het voorwerp precies twee kleuren hebben, bijvoorbeeld een binnenste, inwendige kleur en een omtrekkleur (bijv. zwart), bijvoorbeeld om een groter contrast te vormen. Maar de zichtbare voorwerpen kunnen ook méér dan twee kleuren bevatten.
Het voorwerp 4106L kan ondoorzichtig zijn, wat wil zeggen dat de gebruiker niet doorheen het voorwerp 4106L kan zien. In dit geval kan de processor het geoverlayde beeld genereren door eenvoudig een deel van de grafische beeldgegevens afkomstig van de computer te vervangen door beeldgegevens van het lokaal gegenereerde zichtbaar voorwerp, zonder gegevens te moeten mengen.
Het voorwerp 4106L kan een semi-transparant monochroom voorwerp zijn, dat bijv. een alfatransparantie a heeft in het bereik van 10% tot 90%, bijv. ongeveer 25% of ongeveer 50% of ongeveer 75%. In dit geval zal de processor de grafische beeldgegevens alfamengen of mengen met de voorwerpgegevens. In het geval van 50% alfamengen, kunnen de rode, blauwe en groene kleurcomponenten R1, G1, B1 van de grafische beeldgegevens en de rode, blauwe en groene kleurcomponenten R2, G2, B2 van de pixels van het beweegbaar voorwerp eenvoudig uitgemiddeld worden, hetgeen een eenvoudige rekenkundige operatie is, bijvoorbeeld equivalent aan de volgende berekening: R:= (R1 shr 1}+(R2 shr 1), en evenzo voor de andere kleurcomponenten.
Het voorwerp 4106L kan een zogenoemde "geperforeerde bitmap" zijn of omvatten, zoals uitgelegd in de mede in behandeling zijnde “geperforeerde bitmap aanvrage{n)". Deze bitmap kan een eerste veelheid volledig transparante pixels en een tweede veelheid monochrome pixels omvatten, waarbij de eerste veelheid pixels en de tweede veelheid pixels geïnterleaved (afwisselend gepositioneerd) zijn, bijvoorbeeld voigens een schaakbordpatroon.
* Deze geperforeerde bitmap kan op een ondoorzichtige wijze geoverlayd zijn, als volgt: in het geval dat een grafische beeldpixel afkomstig van het computerbeeld geoverlayd wordt met een volledig transparante pixel, zal het resultaat van de overlay de originele grafische beeldpixel zijn. In het geval dat een grafische beeldpixel geoverlayd wordt met een monochrome pixel, zal het resultaat van de overlay de monochrome pixel van het beweegbaar voorwerp zijn.
* Deze geperforeerde bitmap kan op een semi-transparante wijze geoverlayd worden, als volgt: In het geval dat een grafische beeldpixel door een volledig transparante pixel geoverlayd wordt, zal het resultaat van de overlay de originele grafische beeldpixel zijn. In het geval dat een grafische beeldpixel geoverlayd wordt met een monochrome pixel, zal het resultaat van de overlay de alfamenging of menging zijn van de grafische beeldpixel afkomstig van het computerbeeld en de monochrome pixel van het beweegbaar voorwerp.
Het is ook mogelijk om het voorwerp 4106L semi-transparant te doen lijken door tjdmultiplexing tussen de grafische beeldpixels (komende van de computerinrichting), en de beeldpixels van het beweegbaar voorwerp (gegenereerd binnen het weergavescherm). Bijvoorbeeld door het gebruikmaken/weergeven van de monochrome pixels van het voorwerp 4106L op een eerste moment in tijd (bijv. op even genummerde frames) en door het gebruikmaken/weergeven van de grafische beeldgegevens op een tweede moment in tijd (bijv. bij oneven genummerde frames). Dit zou bijvoorbeeld betekenen dat de helft van de frames het zichtbaar voorwerp 4106L effectief zouden tonen, en de helft van de frames niet, waardoor de indruk wordt gecreëerd van semi-transparant te zijn {gemiddeld over de tijd).
Vergelijking van FIG. 41 met FIG. 5{a) en FIG. 5{b) leert dat de beelden op het scherm er precies hetzelfde of zeer gelijkend kunnen uitzien (ervan uitgaand dat dezelfde kleur en/of hetzelfde semi-transparantieniveau worden gebruikt). Derhalve adresseert de uitvoeringsvorm van FIG, 41 eveneens het in FIG. 1 tot FIG. 3 beschreven probleem, maar de computerinrichting 4101 vereist niet de hierboven beschreven speciale overlay-applicatie en/of de speciale muis en/of de speciale hub, alleen de weergave-inrichting 4104 moet "speciaal" zijn.
Het computersysteem 4100 van FIG. 41 maakt het mogelijk dat de gebruiker de linker aanwijsinrichting 4103L beweegt teneinde de positie van het zichtbaar voorwerp 4106 op het scherm te bewegen, maar uiteraard zal het klikken op die aanwijsinrichting of het scrollen van het wiel daarvan niet het effect hebben van het selecteren van tekst of het omhoog of omlaag scrollen van een document. Met andere woorden, de uitvoeringsvorm van FIG. 41 lost niet het probleem op getoond in FIG. 4.
In een variant van de weergave-inrichting getoond in FIG. 42, omvat de weergave-inrichting ten minste twee connectoren voor het verbinden van ten minste twee aanwijsinrichtingen, en is de processor 4233 aangepast voor het onderhouden van twee aanwijsposities Posl, Pos2, en voor het genereren van twee zichtbare voorwerpen, bijvoorbeeld twee lijnen gelijkend op FIG. 32, of twee vierkanten gelijkend op FIG. 33 of twee handen gelijkend op FIG. 34, en voor het positioneren van deze twee voorwerpen op de twee bijgehouden locaties. Met een computersysteem dat zulk een weergave- inrichting omvat, zou een gebruiker bijvoorbeeld twee speciaal daarvoor voorziene aanwijsinrichtingen kunnen gebruiken voor het vergelijken van twee tekstdocumenten (bijv. bij het proeflezen van een vertaling}, en zou een derde aanwijsinrichting kunnen gebruiken, verbonden met de computer 4101, voor het editeren of corrigeren.
De weergave-inrichting 4104 kan een verdere connector hebben voor verbinding met een verwijderbare, niet-vluchtige geheugeninrichting, zoals een geheugenkaart of een USB-stick of dergelijke, die een bestand en een bitmap kan bevatten van de één of meerdere weer te geven zichtbare voorwerpen.
De uitvinders kwamen op nog een ander idee om het probleem getoond in FIG. 1 tot FIG. 3 op te lossen, eveneens buiten de computerinrichting 4301, namelijk door het verschaffen van een speciale video-adapter of video-interface-inrichting 4330, verbonden tussen de computerinrichting 4301 en de weergave-inrichting 4304, zoals weergegeven in FIG. 43 en FIG. 44.
Vele soorten video-adapters zijn gekend in de stand der techniek, bijvoorbeeld een video- adapter voor het converteren van een HDMl-signaal naar een VGA-signaal of omgekeerd. De video- adapter kan één of meerdere hogesnelheid analoog-naar-digitaal convertoren ADC en/of één of meerdere hogesnelheid digitaal-naar-analoog convertoren DAC bevatten.
Geen van de bestaande video-adapters onderhoudt een positie gerelateerd aan bewegingen van een aanwijsinrichting verbonden met de genoemde adapter, en geen van deze toont een zichtbaar voorwerp dat beweegbaar is in overeenstemming met deze bewegingen. Bij voorkeur omvat de video- adapter 4330 volgens uitvoeringsvormen van de onderhavige uitvinding een digitale video- ingangsconnector (bijv. een HDMi-ingangsconnector) geconfigureerd voor het ontvangen van een ongecomprimeerd videosignaal {dus bv. geen MPEG2 of MPEG4 stroom}, en een digitale video- uitgangsconnector (bijv, een HDMl-uitgangsconnector}, in welk geval de binnenkomende video- of grafische beeldgegevens digitaal zijn, en ook de uitgaande video- of grafische beeldgegevens digitaal zijn, en de DAC{s} en de ADC{s} weggelaten kunnen worden. Maar een video-adapter met een VGA- ingangsconnector is eveneens mogelijk.
FIG, 43 toont een computersysteem 4300 volgens een uitvoeringsvorm van de onderhavige uitvinding, omvattende een video-adapterinrichting 4330 volgens een uitvoeringsvorm van de onderhavige uitvinding.
In de context van de onderhavige uitvinding is de “video-adapter” een elektrisch or elektronische inrichting in één enkele behuizing (bv. doosje} met een typische lengte van 4 tot 14 cm, en een typische breedte van 4 tot 12 cm, en een typische hoogte van 1 tot 4 cm, en dus geen laptop- computer of desktop-computer, en al helemaal niet een computer-systeem met meerdere netwerkservers. De inrichting 4330 heeft bij voorkeur geen aparte voedingskabel of voeding, maar wordt bij voorkeur gevoed vanuit de video-ingangspoort A, rechtstreeks vanuit de computer 4301.
De video-adapter 4330 heeft dus een video-ingangspoort A, 4431 {bijvoorbeeld een DVI- of een HDMi-poort of een VGA-poort} voor het ontvangen van een ongecomprimeerd videosignaal met eerste grafische beeldgegevens vanuit een computerinrichting 4301. De computerinrichting 4301 is verbonden met een eerste aanwijsinrichting 4303R. De video-adapter 4330 omvat verder een video- uitgangspoort C, 4436 (bijvoorbeeld een DVI- of een HDMlpoort of een VGA-poort) voor het verschaffen van een ongecomprimeerd videosignaal met tweede grafische beeldgegevens aan een monitor of weergavescherm 4304. De video-adapter 4330 omvat verder ten minste één interface (bijvoorbeeld een fysieke connector zoals een USB-poort, of een RF-zendontvanger) om te communiceren met een tweede aanwijsinrichting 4303L, werkzaam verbonden met de video-adapter. De video-adapter 4330 is aangepast voor het genereren van ten minste één zichtbaar voorwerp 4306L, bijvoorbeeld met de vorm van een vierkant of een rechthoek of een rechthoek met afgeronde randen, of een cirkel of een pijl of een hand of een klein kruis of een groot kruis dat zich uitstrekt over de ganse hoogte en breedte van het weergavescherm, of een andere geschikt vorm, en voor het genereren van het tweede grafische beeld {dat verzonden dient te worden naar het weergavescherm} door het overlayen van de eerste grafische beeldgegevens (komende van de computerinrichting) met het ten minste één zichtbaar voorwerp 4306L {intern gegenereerd}, en voor het bewegen van dat ten minste één zichtbaar voorwerp 4306L in overeenstemming met bewegingen van de tweede aanwijsinrichting 4303L.
Het ten minste één zichtbaar voorwerp 4306L kan een monochrome kleur hebben. De monochrome kleur kan vooraf bepaald zijn, bijvoorbeeld rood of groen of blauw of zwart of een andere geschikte kleur. Optioneel kan de video-adapter 4330 één of meerdere knoppen of schakelaars 4441 hebben voor het selecteren van de monochrome kleur uit een aantal vooraf bepaalde kleuren.
De video-adapter is aangepast voor het genereren van ten minste één zichtbaar voorwerp 4306L en voor het overlayen van het ten minste één zichtbaar voorwerp met de binnenkomende grafische beeldgegevens, bijv. door alfamengen of anderszins mengen of combineren van de eerste grafische beeldgegevens afkomstig van de computer met de beeldgegevens van het beweegbaar voorwerp. Het ten minste één zichtbaar voorwerp kan een ondoorzichtig of een semi-transparant voorwerp zijn, of kan een zogenoemde geperforeerde bitmap hebben, zoals in meer detail beschreven in de mede in behandeling zijnde "geperforeerde bitmap aanvrage(n)". Het kan begrepen worden door het vergelijken van FIG. 41 en FIG.43 dat ook de uitvoeringsvorm van FIG. 43 de problemen beschreven in FIG. 1 tot FIG. 3 oplost.
FIG. 44 toont een voorbeeldmatig hardware-blokdiagram van een video-adapter 4330 zoals gebruikt kan worden in het computersysteem 4300 van FIG. 43, maar de uitvinding is daartoe niet beperkt. De video-adapter 4330 van FIG. 44 omvat de volgende componenten: - een video-ingangspoort 4431, bv. in de vorm van een VGA-connector of DVl-connector of HDMlconnector voor het ontvangen van een ongecomprimeerd videosignaal met eerste grafische beeldgegevens vanuit een computerinrichting; - een video-uitgangspoort 4436, bv. in de vorm van een VGA-connector of DVl-connector of HDMI-connector voor het verschaffen van een ongecomprimeerd videosignaal met tweede grafische beeldgegevens aan een weergave-inrichting; - een invoerbuffer 4432 voor het opslaan van minstens een gedeelte van de eerste grafische beeldgegevens ontvangen aan de ingangspoort; - een processor 4433 verbonden met het invoerbuffer 4432, en aangepast voor het genereren van tweede grafische beeldgegevens op basis van de eerste grafische beeldgegevens; - een bedrade en/of een draadloze interface 4437, 4438 om te communiceren met een bedrade of een draadloze aanwijsinrichting 4403L; - waarbij de processor 4433 verder aangepast is voor: * het communiceren met de aanwijsinrichting 4403L voor het ontvangen van verplaatsingsinformatie dx, dy gerelateerd aan bewegingen van de aanwijsinrichting 4403L; * het bijwerken van een positie Pos2 op basis van de ontvangen verplaatsingsinformatie dx, dy; * het genereren van een zichtbaar voorwerp 4306L; * het genereren van de tweede grafische beeldgegevens door het overlayen van de eerste grafische beeldgegevens met het gegenereerde zichtbaar voorwerp 4306L op de positie Pos2.
De video-adapter kan verder een framebuffer 4434 omvatten, werkzaam verbonden met de processor 4433, aangepast voor het opslaan van minstens een gedeelte van de eerste grafische beeldgegevens ontvangen van het invoerbuffer 4432, en voor het opslaan van minstens een gedeelte van de tweede grafische gegevens die naar het uitgangsbuffer 4435 moeten verzonden worden.
Een framebuffer is echter niet absoluut vereist, bijv. in het geval dat de binnenkomende videostroom en de uitgaande videostroom dezelfde beeldfrequentie en resolutie hebben. In zulke uitvoeringsvormen is het vluchtig geheugen (RAM) van de video-adapter bij voorkeur kleiner dan één frame-geheugen.
Optioneel kan de video-adapter 4330 verder één of meerdere knoppen 4441 omvatten, bijvoorbeeld om de gebruiker in staat te stellen een kleur en/of vorm en/of grootte van het beweegbaar voorwerp 4306L te kiezen.
Optioneel kan de video-adapter 4330 verder één of meerdere indicatoren omvatten, bijvoorbeeld in de vorm van LEDs 4442 om informatie aan de gebruiker te verschaffen.
De video-adapter 4330 kan een geheugeninrichting {niet getoond} omvatten die het invoerbuffer en het uitgangsbuffer en {indien aanwezig ook) het framebuffer omvat.
Echter, de onderhavige uitvinding is niet beperkt tot deze specifieke uitvoeringsvorm, omdat andere architecturen dezelfde functionaliteit kunnen vervullen. Bijvoorbeeld, indien de kloksnelheid van de binnenkomende videogegevens en de uitgaande videogegevens dezelfde is, dan kan het tweede grafische beeld in real-time gegenereerd worden, en dan kan het framebuffer weggelaten worden, en het genereren van het zichtbaar voorwerp 4306L kan in de praktijk in real-time geïmplementeerd worden, samen met de overlayende of alfamengingsoperatie. De vakman die deskundig is op het gebied van het ontwerpen van videochips, weet hoe deze functionaliteit geïmplementeerd kan worden, maar voor zover als gekend is er geen reden bekend in de stand der techniek om ondersteuning voor een aanwijsinrichting te voorzien op zulke chips.
De video-interface-inrichting 4330 kan additionele interfaces hebben, bijvoorbeeld een additionele USB-poort 4439 voor verbinding met bijvoorbeeld een USB-geheugenstick die bijvoorbeeld een bitmap van het beweegbaar voorwerp kan omvatten, en/of verder een textuurbitmap kan omvatten die geoverlayd moet worden met de binnenkomende videogegevens, bijvoorbeeld op een wijze zoals beschreven in de mede in behandeling zijnde "geperforeerde bitmap aanvrage(n)".
In een uitvoeringsvorm heeft de video-interface-inrichting 4330 een geïntegreerde RF- zendontvanger 4438 om te communiceren met een draadloze muis en/of om te communiceren met de personal-computerinrichting, bijvoorbeeld voor het configureren van de video-adapterinrichting 4330, en/of voor het selecteren van de grootte of kleur van het voorwerp, enz. Maar zulk een zendontvanger kan ook extern verschaft worden, bijv. als een donge! verbonden met de connector 4437 of 4439.
In een variant van de video-adapterinrichting getoond in FIG. 43 en FIG. 44, omvat de video- adapter ten minste twee connectoren voor het verbinden met ten minste twee aanwijsinrichtingen, en is de processor 4433 aangepast voor het onderhouden van twee aanwijsposities Posl, Pos2, en voor het genereren van twee zichtbare voorwerpen, bijvoorbeeld twee lijnen zoals in FIG. 32, of twee vierkanten zoals in FIG. 33 of twee handen zoals in FIG. 34, en voor het positioneren van deze twee voorwerpen op de twee bijgehouden locaties. Met een computersysteem dat zulk een video-adapter omvat, zou een gebruiker bijvoorbeeld twee speciaal daarvoor voorziene aanwijsinrichtingen kunnen gebruiken voor het vergelijken van twee tekstdocumenten (bijv. bij het proeflezen van een vertaling),
en een derde aanwijsinrichting kunnen gebruiken, verbonden met de computer 4301, voor het editeren of corrigeren.
De video-adapterinrichting 4330 kan eventueel verder voorzien zijn om tamelijk heldere beeldinformatie om te zetten naar tamelijk donkere beeldinformatie en omgekeerd. Daarbij worden binnenkomende pixelwaarden (Rin, Gin, Bin) omgezet naar uitgaande pixelwaarden (Ruit, Guit, Buit). Dit kan bv. als volgt gebeuren: Eerst wordt (Rin, Gin, Bin} omgezet naar YUV-waarden, bv. door middel van de formules: Y=0.299R + 0.587G + 0.114B; U = 0.492 (B-Y); V = 0.877 (R-Y), of door middel van de formules: Y:= (R+G+G+B) shr 2; U:= {B-Y) div 2; V:= (R-Y), of door middel van formules met licht afwijkende coëfficiënten. waarna de uitgaande RGB waarden berekend worden aan de hand van één der volgende functies: a) YUV2RGB(255-Y, U, V, Ruit, Guit, Buit}, of b) YUV2RGB{255-Y, U div 2, V div 2, Ruit,Guit Buit), of ¢) YUV2RGB{255-Y, -U, -V, Ruit, Guit, Buit), of d} YUV2RGB{255-Y, -U div 2, -V div 2, Ruit,Guit,Buit}, waarbij de omzetting van YUV-waarden naar RGB-waarden bv. berekend kan worden aan de hand van de volgende formules: R=Y + 1.140V; G = Y - 0.395U -0.581V; B = Y + 2.032U, of door middel van de formules: R:= Y+V; G:= Y - ({U+V) div 2); B:= Y +{U+U}, of door middel van formules met licht afwijkende coëfficiënten.
Formule (a) en {b} hebben als voordeel dat de originele kleur nagenoeg behouden blijft, wat handig is voor weergave van documenten met een bepaalde kleurconventie (bv. zwart voor conclusies, blauw voor voordelen, enz).
Formule {c} en {d} hebben als voordeel dat de niet alleen de intensiteit geïnverteerd wordt, maar ook de kleuren, wat voor sommige toepassingen, (zoals sommige email-programma's} beter leesbaar is.
De formules met floating-point bewerkingen vragen uiteraard meer processing power. De formules met integer-bewerkingen kunnen doorgaans sneller uitgevoerd worden, of op een minder krachtige processor. Testen hebben aangetoond dat het resultaat van deze vier oplossingen esthetisch mooi zijn, en mogelijks oogvermoeidheid kunnen reduceren, vooral wanneer de origineie beelden een typisch witte achtergrond hebben.
Testen hebben aangetoond dat de volgende set van formules eveneens zeer goede resultaten geven: a) Y:= (R+G+G+B) div 4; b) Rout:={256-Y}+A.(R-Y}, begrensd tot het gebied [0..255]; c} Gout:={256-Y)+B.{G-Y}, begrensd tot het gebied [0.255];
d) Bout:=(256-Y)+C.{B-Y), begrensd tot het gebied [0.255]; waarbij (R,G,B} de rood, groen en blauw-waarde is van binnenkomende pixels, en (Rout, Gout, Bout) de rood, groen en blauw-waarde is van uitgaande pixels, en waarbij A, B, C vooraf bepaalde constanten zijn.
Bij voorkeur zijn de constanten A, B, C gelijk aan elkaar, Bij voorkeur zijn deze constanten rationale getallen in het bereik van -7/8 tot +7/8.
In een uitvoeringsvorm zijn A, B en C waarden gekozen uit de volgende verzameling: -1/2, +1/2, -1/3, +1/3, -2/3, +2/3, -1/4, +1/4, -3/4, +3/4, -1/5, +1/5, -2/5, +2/5, -3/5, +3/5, -4/5, +4/5, -1/6, +1/6, -5/6, +5/6, -7/8, +7/8.
Meerdere maanden na de hierboven beschreven oplossingen, en zoekend of er toch geen software oplossing zou bestaan om het probleem van FIG. 21 op te lossen zonder speciale hardware (dus zonder een speciale muis of een speciale hub}, maar zonder het handig verspringen van de native muiscursor op te geven, kwamen de uitvinders op het idee dat de functionaliteit van de "speciale hub” zoals hierboven beschreven werd, ook geïmplementeerd kan worden in een zgn. “muis-filter-driver" (hierin soms afgekort als MFD}. Hoewel deze uitvoeringsvorm niet verder zal beschreven worden, richt de onderhavige uitvinding zich eveneens op deze uitvoeringsvorm. Deze muis-filter-driver is dus gebaseerd op het principe van het vooraf correct positioneren van de native muiscursor, alvorens een klik- of scrol-bericht te versturen, door gebruik te maken van een dummy-bewegingsbericht, en door het vertragen {uitstellen} van het origineel bericht.
De uitvinders kwamen ook op een ander idee dat nu zal beschreven worden aan de hand van FIG. 45 tot FIG. 54.
FIG, 45 toont een computersysteem 4500 met een computerinrichting 4501 dat gezien kan worden als een variant van het computersysteem 1100 van FIG. 11, waaraan een speciale muis-filter- driver 4563 wordt toegevoegd, die voorzien is om: i} bewegingsberichten afkomstig van de eerste en de tweede aanwijsinrichting 4503R, 4503L te detecteren, en bij detectie van zulk bericht, het bewegingsbericht of een overeenkomstig bericht naar het besturingssysteem 4560 te sturen; en ii) om minstens één bericht uit de groep bestaande uit een knop-ingedrukt-bericht, een knop- losgelaten-bericht, een scrol-omhoog-bericht en een scrol-omlaag-bericht afkomstig van de eerste en/of de tweede aanwijsinrichting 4503R, 4503L te detecteren, en bij detectie van zulk bericht, respectievelijk een eerste, tweede, derde of vierde (vooraf bepaalde, of parameteriseerbare of minstens gedeeltelijk vooraf bepaalde) bewegingssequentie naar het besturingssysteem {0/5} te sturen;
en waarbij de speciale overlay-applicatie 4551 verder voorzien is om: - deze bewegingssequenties (of overeenkomstige sequenties van bewegingsberichten} te detecteren, - en na detectie ervan, eerst de native muis-cursor 705 te (her}positioneren naar de positie die overeenkomt met de bijgehouden positie voor de muisinrichting die de betreffende sequentie heeft veroorzaakt, - en kort daarna, liefst onmiddellijk daarna, of nog beter in eenzelfde commando, een knop- ingedrukt commando, of een knop-losgelaten commando, of een scrol-omhoog-commando of een scrol-omlaag-commando te versturen vanuit de overlay-applicatie 4551, vanaf de correcte positie, naar het besturingssysteem, dat op zijn beurt het commando zal doorgeven naar de juiste onderliggende applicatie (omdat de overlay-applicatie in doorklik-modus geconfigureerd is, en/of in hoofdzaak volledig transparant is}, meer bepaald naar de applicatie {of visuele component) die zich "onder" de linkermuis-positie (Pos2} bevindt wanneer de linkermuis bediend werd (gescrold of geklikt} ofwel de applicatie {of visuele component) die zich "onder" de rechtermuispositie (Pos1} bevindt, wanneer de rechtermuis bediend werd (gescrold of geklikt}.
Er wordt opgemerkt dat de muis-filter-driver 4563 niet hoeft te weten welke de eerste en tweede aanwijsinrichting is. In een uitvoeringsvorm waarbij er méér dan twee aanwijsinrichtingen aangesloten zijn aan de computerinrichting 4501, zet de muis-filter-driver alle "scrol-omhoog", "scrol- omlaag", “knop-ingedrukt" en "knop-losgelaten” -berichten, afkomstig van alle muisinrichtingen, om naar een overeenkomstige {bv. vooraf bepaalde of parameteriseerbare} bewegingssequentie. De overlay-applicatie kan beslissen welke van deze sequenties afkomstig zijn van de eerste of tweede aanwijsinrichting, bv. als de rechtermuis en de linkermuis.
Qua terminologie wordt naar een "scrol-omhoog-bericht" en een "scrol-omlaag-bericht" hierin soms eenvoudig verwezen met de term "scrol-bericht", en wordt naar een "scrol-omhoog- commando” en een "scrol-omlaag-commando" soms eenvoudig verwezen met de term een ”scrol- commando”, zonder nader te specificeren welk van de twee (omhoog of omlaag). Met "scrol-omhoog- bericht" wordt trouwens een scrol-bericht bedoeld met één of meerdere parameters) die een opwaartse scrol dienen te veroorzaken. De vakman weet wat hiermee bedoeld wordt.
Gelijkaardig wordt in de uitleg hieronder de uitdrukking “knop-ingedrukt” en "knop- losgelaten” bericht gebruikt, zonder te verwijzen om welke knop het gaat.
Hoewel de uitvinding voornamelijk toegelicht wordt voor een muis met één scrolwiel dat naar boven of beneden kan gedraaid {(gescrold) worden, en met één drukknop die ingedrukt of losgelaten kan worden, en met vier overeenkomstige bewegingssequenties, kan dit principe uiteraard uitgebreid worden naar een aanwijsinrichting met meerdere scrolwielen (bv. een horizontaal scrolwiel) en/of met meerdere drukknoppen, bv. een muis met precies één scrolwiel en precies twee drukknoppen (hierin soms linkerknop en rechterknop genoemd).
In een voorkeursuitvoeringsvorm is de muis-filter-driver 4563 voorzien om, naast gewone muisbewegingen (verplaatsingen), minstens zes of precies zes commando's te herkennen: (1) scrol omhoog, (2) scroromlaag, (3) Linkerknop-ingedrukt, (4) Linkerknop losgelaten, (5) Rechterknop- ingedrukt, (6) Rechterknop-losgelaten, en om één van zes overeenkomstige, bv. vooraf bepaalde of parameteriseerbare of gedeeltelijk vooraf bepaalde bewegingssequenties te versturen. De linkerknop" wordt soms ook aangeduid als "knopl", en de rechterknop als "knop2", maar de uitvinding kan eenvoudig uitgebreid worden naar implementaties met meer dan twee knoppen en meer dan één scrolwiel.
MUIS FILTER DRIVER: Eenvoudig uitgedrukt, dient de muis-filter-driver 4563 de volgende functies uit te voeren, of een subset hiervan.
a) een bewegingsbericht (ook verpilaatsingsbericht genoemd) afkomstig van een muisinrichting detecteren, en wanneer dit gedetecteerd wordt, het bewegingsbericht {of een overeenkomstig bericht of commando) naar het O/S te versturen, bv. naar een input-buffer van het O/S, eventueel in een ander formaat en/of op een iets verschoven tijdstip (bv. op verzoek van het 0/5}; b} een knop-ingedrukt-bericht afkomstig van een muisinrichting detecteren, en wanneer dit gedetecteerd wordt, een eerste vooraf bepaalde reeks van bewegingsberichten naar het input-buffer van het O/S versturen in plaats van het knop-ingedrukt bericht; c} een knop-losgelaten-bericht afkomstig van een muisinrichting detecteren, en wanneer dit gedetecteerd wordt, een tweede vooraf bepaalde reeks van bewegingsberichten naar het input-buffer van het O/S versturen in plaats van het knop-losgelaten bericht; d} een scrol-omhoog-bericht afkomstig van een muisinrichting detecteren, en wanneer dit gedetecteerd wordt, een derde vooraf bepaalde of parameteriseerbare of gedeeltelijk vooraf bepaalde reeks van bewegingsberichten naar het input-buffer van het O/S versturen, ter vervanging van het scrol-omhoog bericht; e) een scrol-omlaag-bericht afkomstig van een muisinrichting detecteren, en wanneer dit gedetecteerd wordt, een vierde vooraf bepaalde of parameteriseerbare of gedeeltelijk vooraf bepaalde reeks van bewegingsberichten naar het input-buffer van het O/5 versturen, in plaats van het scrol-omlaag bericht.
Er wordt hierbij opgemerkt dat de termen “derde” en "vierde" enz, geen absolute betekenis hebben, maar enkel dienen om een onderscheid te maken tussen de verschillende sequenties die gebruikt worden of kunnen worden. Zo wordt bij voorkeur een verschillende sequentie gebruikt voor het indrukken van de linkerknop (ook knopl genoemd} en het indrukken van de rechterknop {ook knop2 genoemd}, en voor het loslaten van de linkerknop en het loslaten van de rechterknop, maar om de beschrijving niet nodeloos ingewikkeld te maken wordt hiervan dus meestal abstractie gemaakt.
Hoe dan ook, indien de aanwijsinrichting meerdere knoppen heeft (een typische muis heeft minstens een linkerknop en een rechterknop), dan kunnen verdere (bv. vooraf bepaalde of parameteriseerbare} bewegingssequenties gebruikt worden, bv. een zevende sequentie, een achtste sequentie, enz.
Indien de aanwijsinrichting meerdere scrolwielen heeft (bv. een horizontaal scrolwiel en een verticaal scrolwiel), dan kunnen verdere (bv. vooraf bepaalde of parameteriseerbare} bewegingssequenties gebruikt worden, bv. een negende sequentie (voor scrol-omhoog van scrolwiel2), een tiende sequentie {voor scrol-omlaag van scrolwiel2), enz.
Wat belangrijk is, is dat de muis-filter-driver een bepaald bericht omzet naar een bepaalde reeks van (valse) bewegingen, en dat de overlay-applicatie dit terug kan vertalen naar de betreffende knop- of scrolwiel-operatie. Voor zover als bekend wordt zulke vertaalslag in de stand der techniek niet gebruikt.
FIG. 51 toont een voorbeeld van een werkwijze 5100 die door zulke muis-filter-driver 4563 kan uitgevoerd worden.
In stap 5101 wordt een bericht afkomstig van een aanwijsinrichting ontvangen, (bv. een bericht afkomstig van een touchpad of een muis, bv. via een hardware-interface en een hardware abstractie-laag en een muisdriver 4561}; In stap 5102 wordt nagegaan of dit bericht een bewegingsbericht is, en zoja, dan wordt in stap 5103 het bewegingsbericht (of een overeenkomstige datastructuur} naar het besturingssysteem O/S verstuurd, anders wordt in stap 5104 nagegaan of het ontvangen bericht een knop-ingedrukt-bericht was, en zoja, dan wordt in stap 5105 een eerste (bv. vooraf bepaalde) bewegingssequentie naar het besturingssysteem verstuurd, anders wordt in stap 5106 nagegaan of het ontvangen bericht een knop-losgelaten-bericht was, en zoja, dan wordt in stap 5107 een tweede (bv. vooraf bepaalde) bewegingssequentie naar het besturingssysteem verstuurd, anders wordt in stap 5108 nagegaan of het ontvangen bericht een scrol-omhoog-bericht was, en zoja, dan wordt in stap 5109 een derde (bv. vooraf bepaalde) bewegingssequentie naar het besturingssysteem verstuurd, anders wordt in stap 5110 nagegaan of het ontvangen bericht een scrol-omlaag -bericht was, en zoja, dan wordt in stap 5111 een vierde (bv. vooraf bepaalde} bewegingssequentie naar het besturingssysteem verstuurd.
Stappen 5108 tot 5110 zijn optioneel. Deze zijn bv. niet nodig indien de computerinrichting twee touchpads zou hebben, of een touchpad en een stylus, maar geen aanwijsinrichting die gescrold kan worden.
Zoals hoger beschreven kan stap 5104 het nagaan van een Linkerknop-ingedrukt-bericht omvatten, en stap 5106 het nagaan van een Linkerknop-losgelaten-bericht, en kan de werkwijze bijkomende stappen (niet getoond in FIG. 51} hebben voor een Rechterknop-ingedrukt-bericht, en een Rechterknop-losgelaten-bericht.
Uiteraard kan de volgorde van de stappen gewijzigd worden.
Bij voorkeur geeft de muis-filter-driver 4563 dezelfde device-handie mee aan het bericht of datastructuur dat naar het besturingssysteem O/S verstuurd wordt. Dit laat de overlay-applicatie 4551 toe te bepalen welke aanwijsinrichting aanleiding gaf tot het versturen van het betreffende bewegingsbericht of de reeks van bewegingsberichten (i.e. de bewegingssequentie).
Uit experimenten is gebleken dat bepaalde besturingssystemen niet de bewegingssequentie zelf doorgeven, maar de individuele verplaatsingswaarden verdubbelen, aithans voor sommige muizen. De reden hiervoor is niet 100% duidelijk, maar dit probleem (of gedrag} kan eenvoudig opgevangen worden door in de overlay-applicatie 4551 te testen of de "normale" bewegingssequentie voorkomt, of de "dubbele bewegingssequentie" (d.w.z. een sequentie waarbij elke dx- en dy-waarde het dubbele is van de originele vooraf bepaalde sequentie).
Ook is gebieken dat bepaalde besturingssystemen de handle of pointer die meegegeven wordt door de muis-filter-driver, lijkt te negeren, en louter kijkt naar de berichtinhoud wanneer hij de verschillende muisdrivers ondervraagt (Engels: polling}. De muis-filter-driver 4563 kan ook dit probleem {of gedrag} eenvoudig opvangen door de individuele verplaatsingsberichten pas door te geven wanneer de betreffende muisdriver 4561 die aanleiding gaf tot de sequentie, wordt ondervraagt. Een vakman met ervaring op het gebied van device drivers, en meer bepaald met muis- filter-drivers, en die het voordeel heeft van de onderhavige openbaring, kan zulke device-driver op een relatief eenvoudige wijze implementeren.
In een eenvoudige implementatie zal bv. elk “scrol-omhoog" bericht resulteren in de derde vooraf bepaalde reeks bewegingswaarden, ongeacht de waarde waarover het scrolwiel geroteerd werd. In een andere implementatie kan de muis-filter-driver 4563 bv. meermaals dezelfde reeks na elkaar sturen naar het besturingssysteem. In nog een andere implementatie kunnen meerdere verschillende bewegingssequenties gebruikt worden overeenkomend met verschillende scrolwielwaarden. Deze verschillende reeksen kunnen bv. allemaal beginnen met eenzelfde deelsequentie, bv. om de herkenning te vergemakkelijken, enz.
Het is een zeer groot voordeel dat de voorgestelde oplossing waarbij knop-berichten en scrol- berichten worden omgezet naar specifieke bewegingssequenties werkt met bestaande muis-device-
drivers, en dat deze muis-device-drivers 4561 zelf niet aangepast hoeven te worden. (tenzij anders vermeld, wordt met "muisdriver” hetzelfde bedoeld als "muis-device-driver").
Bij voorkeur is de muis-filter-driver 4563 voorzien om in Kernel modus te draaien.
In bepaalde uitvoeringsvormen van de onderhavige uitvinding heeft de muis-filter-driver 4563 een actieve modus, waarin hij bepaalde berichten omzet naar bewegingssequenties zoals hoger toegelicht, en een passieve modus, waarin hij alle berichten (zowel bewegingsberichten alsook scrol- berichten en knop-ingedrukt-berichten en knop-losgelaten-berichten} ongewijzigd doorstuurt naar het besturingssysteem. Zulke muis-filter-driver is voorzien om samen te werken met een overlay-applicatie die voorzien is om de muis-filter-driver selectief te activeren (bv. te activeren in dubbele-muis-modus) en te deactiveren (bv. in enkelvoudige-muis-modes, of wanneer de overlay-applicatie wordt gesloten).
In andere uitvoeringsvormen van de onderhavige uitvinding is de muis-filter-driver altijd actief (zie verderop).
OVERLAY-APPLICATIE: Eenvoudig uitgedrukt moet de speciale overlay-applicatie 4551, bv. de berichtenverwerker 4552 ervan, de binnenkomende berichtenstroom analyseren om na te gaan of één van de (ondersteunde, bv. vooraf bepaalde of parameteriseerbare) bewegingssequenties voorkomt, bv. in de totale berichtenstroom, of in partiële berichtenstromen horende bij de individuele aanwijsinrichtingen. Dit kan bv. geïmplementeerd worden door één of meerdere state-machines (bv. één voor elke afzonderlijke aanwijsinrichting, of één voor de eerste aanwijsinrichting en één voor de tweede aanwijsinrichting}, of door bv. de laatste N bewegingsberichten bij te houden in één of meerdere buffers (bv. één voor de eerste aanwijsinrichting en één voor de tweede aanwijsinrichting), of door bv. de laatste N bewegingsberichten om te zetten naar karakters, en deze bij te houden in één of meerdere tekst-strings (bv. één voor de eerste aanwijsinrichting en één voor de tweede aanwijsinrichting), of op andere geschikte wijzen.
FIG, 48 toont een voorbeeldmatige implementatie, in pseudo-code, van een sterk vereenvoudigd voorbeeld, hoe de overlay-applicatie, na de detectie van een scrol-omhoog sequentie, de muiscursor kan (her)positioneren, en zelf een scrol-omhoog-commando kan versturen naar het besturingssysteem O/S. Als voorbeeld kan het (her)positioneren van de native muiscursor in een Microsoft Windows10-omgeving bv. geïmplementeerd worden door gebruik te maken van de functie setCursorPos(}), en kan het emuleren van een scrolbeweging of een knop-indrukking of een knop- loslatíing bv. geïmplementeerd worden door gebruik te maken van de functie MOUSE EVENTÍ), met als eerste parameter MOUSEEVENTF_ WHEEL voor een scrol-commando, of MOUSEEVENTF_LEFTDOWN voor een linkerknop-ingedrukt commando, of MOUSEEVENTF_LEFTUP voor een linkerknop-losgelaten commando, en MOUSEEVENTF_ RIGHTDOWN voor een rechterknop-ingedrukt commando, of
MOUSEEVENTF_RIGHTUP voor een rechterknop-losgelaten commando. Zoals hoger toegelicht kan de waarde voor "dwheel" in sommige implementaties een vaste waarde hebben (bv. +120 voor een opwaartse scrol). In andere implementaties kan deze waarde gecodeerd zijn in de (bv. parameteriseerbare) bewegingssequentie bv. als één of meerdere fictieve verplaatsingswaardes (dx, dy) {niet getoond).
FIG. 46 is een variant van FIG. 45, waarbij de twee muisinrichtingen M1, M2 niet rechtstreeks met de computer 4601 verbonden zijn, maar via een klassieke hub 4620. De speciale muis-filter-driver 4663 en de speciale overlay applicatie 4651 kunnen identiek zijn aan die van FIG. 45.
FIG. 47{a} tot FIG. 47(i} tonen enkele voorbeeldmatige bewegingssequenties die gebruikt kunnen worden door de muis-filter-driver 4563, 4663, en die gedetecteerd kunnen worden door de overlay-applicatie 4551, 4651 van de computerinrichtingen 4500, 4600, maar uiteraard is de uitvinding hiertoe niet beperkt, en kunnen andere geschikte bewegingssequenties eveneens gebruikt worden.
Bij voorkeur is iedere vooraf bepaalde reeks van bewegingsberichten zo gekozen dat het beginpunt en het eindpunt gelijk blijft, zodanig dat de native muiscursor voor de gebruiker ais het ware stil blijft staan na het scrollen van de muis, en/of na het indrukken of loslaten van een drukknop, of na het klikken of dubbelklikken van bv. de linkermuisknop en/of van de rechtermuisknop of van een andere muisknop.
De voorbeeldmatige reeksen van FIG. 47{a) tot (f} bestaan elk uit vijf opeenvolgende verplaatsingen, de voorbeeldmatige reeksen van FIG. 47(g} en (h) bestaan elk uit zes opeenvolgende verplaatsingen, en de voorbeeldmatige reeks van FIG. 47(i) bestaat uit zeven opeenvolgende verplaatsingen, maar reeksen van minder dan vijf opeenvolgende verplaatsingen, of reeksen van meer dan zeven opeenvolgende verplaatsingen kunnen eveneens gebruikt worden.
Bij voorkeur bevat elke reeks minstens twee of minstens drie verplaatsingen verschillend van de nul-verplaatsing, en bij voorkeur bevat elke reeks maximaal tien verplaatsingen.
In de voorbeeldmatige sequenties van FIG. 47 worden geen individuele nui-verplaatsingen (d.w.z. verplaatsingen met dx=0 en dy=0)} gebruikt. In voorkeursuitvoeringsvormen bevat elke (bv. vooraf bepaalde) bewegingssequentie een nul- verplaatsing (met dx=0 en dy=0) als laatste individuele beweging. Deze verplaatsing kan gemakkelijk toegevoegd worden aan de voorbeelden van FIG. 47(a) tot {f). Dit heeft ais voordeel dat de overlay- applicatie 4551, 4651 (meer bepaald de berichtenverwerker 4552, 4652 ervan) niet voor elk binnenkomend bewegingsbericht hoeft na te gaan of één van de (bv. vooraf bepaalde) bewegingssequenties voorkomt in de één of meerdere buffers of tekst-strings, maar dit slechts hoeft te doen wanneer een bewegingsbericht met de waarde dx=0 en dy=0 aankomt. Dit is veel sneller en veel efficiënter.
Bij voorkeur is de cumulatieve verplaatsing van elke {bv. vooraf bepaalde) bewegingssequentie gelijk aan nul in de X-richting en de Y-richting.
In de voorbeelden van FIG. 47 worden slechts relatief kleine verplaatsingswaarden gebruikt (bv. met dx-waarden en dy-waarden in het bereik van -2 tot +2}, maar grotere verplaatsingen kunnen eveneens gebruikt worden (bv. met dx-waarden en dy-waarden in het bereik van -5 tot +5 of in het bereik van -7 tot +7, of zelfs in het bereik van -10 tot +10, of zelfs meer). Hoe meer individuele bewegingen iedere reeks bevat, en/of hoe meer heen- en weergaande bewegingen, en/of hoe groter de verplaatsingswaarden, hoe complexer de sequentie, en hoe kleiner de kans dat een dergelijke reeks ooit "toevallig" kan voorkomen als werkelijke muisbewegingen.
Aangezien ongewenst klikken (of verslepen) grotere gevolgen kan hebben dan ongewenst scrollen (wat wel vervelend is, maar gemakkelijk ongedaan kan worden door de gebruiker door terug te scrollen}, is het aangewezen de sequentie van het knop-ingedrukt bericht en de sequentie van het knop-losgelaten bericht minstens zo complex te maken als de sequentie voor het scrol-omhoog bericht en het scrol-omlaag bericht (bv. meer bewegingen en/of een groter bereik van dx en dy waarden en/of meer kris-kras bewegingen, en/of zig-zag bewegingen, en/of heen-en-weergaande bewegingen, in plaats van een vloeiende beweging of een lusbeweging).
Zoals hoger gezegd, kan in een eenvoudige implementatie de muis-filter-driver elk scrol- omhoog bericht omzetten naar eenzelfde (bv. vooraf bepaalde) bewegingssequentie, ongeacht de scrolwaarde die wordt meegegeven in het bericht.
In een andere uitvoeringsvorm wordt voor scrol-bewegingen wel een waarde meegegeven in de bewegingssequentie, bv. in een parameteriseerbare sequentie. Dit kan bv. geïmplementeerd worden door de derde of vierde vooraf bepaalde reeks verplaatsingen (bv. één van de sequenties van FIG. 47(a) tot FIG. 47{h}) uit te breiden met twee extra verplaatsingen, bv. een verplaatsing naar rechts {bv. met dx=de scrol-waarde gedeeld door 120; en met dy=0), en een even grote verplaatsing terug naar links, en daarna pas de hoger beschreven optionele nulverplaatsing. Op die manier blijft de cumulatieve verplaatsing nog steeds nul in beide richtingen X en Y, en kan de scrol-waarde die de aanwijsinrichting aangaf doorgegeven worden aan de berichtenverwerker van de overlay-applicatie, die ze op haar beurt uit de sequentie kan halen, en kan doorsturen naar het besturingssysteem. Uiteraard zal een verplaatsing naar boven en dezelfde verplaatsing naar beneden eveneens resulteren in een nulverplaatsing. Uit testen is gebleken dat het meegeven van de scrol-waarde voor de beoogde desktop-toepassingen niet noodzakelijk is, het volstaat om alleen de richting aan te geven (omhoog of omlaag), en hiervoor dus twee vaste sequenties (zonder parameters) te gebruiken.
FIG. 49 toont in meer detail en aan de hand van een voorbeeld hoe de oplossing met de bewegingssequenties werkt. M1 stelt de eerste muisinrichting voor (bv. de rechtermuis). M2 stelt de tweede muisinrichting voor {bv. de linkermuis}. "MFD*" stelt de speciale muis-filter-driver 4563, 4663 voor. Net als hierboven, worden veel details weggelaten, en worden enkel de belangrijkste principes van de uitvinding toegelicht. Op laag niveau zou de communicatie als volgt kunnen verlopen: een aanwijsinrichting wordt verplaatst of bediend {scrolwiel geroteerd of knop ingedrukt of knop losgelaten}, de aanwijsinrichting geeft dit door via een interface (bv. via een USB-interface) naar een HAL (hardware-abstractie-laag), de HAL geeft dit door aan een muis-device-driver 4501, 4601 {ook kortweg "muisdriver" genoemd), de muisdriver geeft dit door aan de muis-filter-driver 4563, 4663, en de muis-filter-driver geeft dit door aan het besturingssysteem (bv. via de Windows-API in het voorbeeld van Windows), en het besturingssysteem geeft dit door naar de betreffende applicatie 4562, 4662. Meer bepaald, indien de overlay-applicatie 4551, 4651 in doorklik-modus geconfigureerd is, en/of indien de native muiscursor zich bevindt boven transparante pixels, dan wordt het bericht doorgegeven naar een onderliggende applicatie.
Verwijzend naar het voorbeeld van FIG. 49, zou dit de volgende functionele werking kunnen hebben: Op tijdstip 1 verstuurt de eerste muisinrichting M1 een bewegingsbericht naar de USB-poort (voorgesteld door "movl” met verplaatsingswaarden dx en dy), dit bericht komt terecht bij de Muis- Filter-Driver die het bewegingsbericht in principe gewoon doorstuurt naar het besturingssysteem {symbolisch voorgesteld door een wolkje}, eventueel na formaatwijziging of dergelijke. Zoals hoger toegelicht (bv. in FIG. 21) komt dit bericht (of een kopie of variant ervan, bv. een bericht met de dubbele verplaatsing} vroeg of laat ook aan in de berichtenverwerker 4552, 4652 van de overlay- applicatie 4551, 4651, waar het bericht zal geanalyseerd worden om de posities Posl en Pos2 te updaten en eventueel de positie van de native muiscursor 705 aan te passen {bv. zoals hoger beschreven in FIG. 18a tot FIG. 18c).
Op tijdstip t2 verstuurt de tweede muisinrichting M2 een scrol-bericht scroli2 naar de computerinrichting 4501, 4601. De speciale Muis-Filter-Driver 4563, 4663 ontvangt dit scroli2-bericht, maar geeft het niet als dusdanig door aan het besturingssysteem, maar stuurt in de plaats een reeks (valse of fictieve) bewegingscommando's mov2a tot mov2N naar het besturingssysteem, waarbij N het aantal verplaatsingen is van de vooraf bepaalde reeks {bv. N=5 voor de reeksen van FIG. 47a-47f, of N=6 na toevoeging van de nulverplaatsing). Het besturingssysteem stuurt deze (of toch sommige van dee) bewegingscommando's door naar de betreffende onderliggende applicatie als {echte} verplaatsingen van de native muiscursor. In het voorbeeld is dat de applicatie die zich bevindt onder de “eerste positie" Post (want de laatste beweging was die van M1), wat eigenlijk niet de bedoeling was, want de tweede muisinrichting M2 heeft het scrol-bericht gestuurd, niet de eerste muisinrichting M1, en dus zou het scrol-bericht verstuurd moeten worden vanaf de tweede positie Pos2. De (mogelijks verkeerde} onderliggende applicatie (namelijk de applicatie gelegen op de positie Post} zal deze (of sommige van deze) verplaatsings-commando's echter verwerken als onschuldige muisbewegingen, maar zal geen scrol-opdracht uitvoeren, wat één van de principes is van de onderliggende uitvinding. Een tijdje later {en de exacte vertraging hiervan is van geen belang} komen al deze verplaatsingsberichten ook aan bij de berichtenverwerker van de overlay-applicatie, die de individuele muisbewegingen in eerste instantie zal interpreteren als echte muisbewegingen afkomstig van de tweede muisinrichting M2, maar wanneer alle bewegingsberichten verwerkt zijn, zal de overlay- applicatie {bv. de berichtenverwerker ervan} de (bv. vooraf bepaalde} bewegingssequentie herkennen, en zal als gevolg hiervan een scrol-commando versturen naar het O/S vanuit de overlay-applicatie, en wel vanaf de tweede onderhouden positie Pos2, zoals toegelicht bij FIG. 48.
Het besturingssysteem zal dit scrol-commando {dat dus verstuurd wordt vanuit de overlay- applicatie} vervolgens doorgeven naar de {juiste} onderliggende applicatie die zich bevindt “onder” positie Pos2, welke applicatie dit commando’ zal uitvoeren door effectief te scrollen op de positie Pos2 gerelateerd aan de rechtermuis, wat inderdaad de bedoeling was.
Het is een enorm voordeel dat op deze manier mogelijk wordt gemaakt tegelijk te scrollen in twee verschillende documenten (bv. omlaag te scrollen in een PDF document aan de linkerkant van het scherm, en tegelijk, of nagenoeg tegelijk, omlaag of omhoog te scrollen in een tekstdocument dat zich aan de rechterkant van het scherm bevindt}, zonder dat de gebruiker de aanwijsinrichtingen hoeft te verplaatsen, en zonder dat de onderliggende applicaties effectief geactiveerd moeten worden. Dit voordeel mag niet onderschat worden, omdat bv. input van het toetsenbord wordt verstuurd naar de actieve applicatie, die actief kan blijven, terwijl de gebruiker toch kan scrollen in een ander document.
De aandachtige lezer kan vaststellen, als hij FIG. 49 met FIG. 21 vergelijkt, dat het scrol-bericht van muis M2 correct wordt verwerkt als een scrol-opdracht vanaf de positie Pos2, ook al bevond de native muiscursor zich op Pos1 op het moment dat de muis M2 werd gescrold, zonder dat de gebruiker de muis M2 eerst zelf manueel moet verplaatsen, teneinde de muiscursor eerst naar Pos2 te laten springen alvorens te scrollen. Dit is een gigantisch voordeel, omdat de gebruiker zijn aandacht nu kan richten op de taak {bv. het reviewen van een vertaling, of het transscriberen}, en zich niet meer telkens hoeft af te vragen of de muiscursor juist staat alvorens te scrollen of te klikken. Met andere woorden, dankzij de oplossing met de bewegingssequenties, kunnen de twee aanwijsinrichtingen (bv. twee muizen} zeer intuïtief en zonder nadenken verplaatst en/of bediend worden. Testen hebben aangetoond dat zelfs indien de gebruiker ondertussen de andere muis aan het bewegen is {in het voorbeeld van FIG. 49: de rechtermuis M1), zelfs dan komt het scrol-commando {gestuurd door M2) nog steeds terecht bij de juiste onderliggende applicatie die zich bevindt onder Pos2.
Dit kan als volgt verklaard worden. Stel dat de gebruiker op tijdstip t3 de rechtermuis M1 aan het verplaatsen was. Dit (echt) bewegingsbericht wordt door de Muis-Filter-Driver gewoon doorgestuurd naar het O/S, dat het op zijn beurt doorgeeft (eventueel na aanpassing, bv. na verdubbeling van de dx- en dy-waardes) aan een onderliggende applicatie, namelijk die applicatie waar de native muiscursor zich toevallig op dat moment bevindt (meestal Pos1 als M1 aan het bewegen is).
Maar omdat dit slechts een onschuldige muisbeweging is, maakt het (voor de beoogde toepassingen) niet echt uit naar welke onderliggende applicatie dit bericht verstuurd wordt. Aangezien de native- muispositie op de juiste plaats wordt gezet (in het voorbeeld van FIG. 49, op Pos2, omdat muis M2 werd gescrold) vlak vóór het versturen van het effectief scrol-commando {vanuit de overlay- applicatie}, maakt het eigenlijk niet uit waar de native muiscursor zich bevindt op het moment dat de scrol-sequentie aankomt bij de overlay-applicatie.
FIG. 49 toont dus schematisch hoe een scrol-bericht {scroll2} afkomstig van de muis M2 uiteindelijk wordt omgezet naar een scrol-commando aangeroepen vanaf de tweede muispositie Pos2 vanuit de overlay-applicatie, ongeacht waar de native muiscursor zich bevindt toen M2 werd gescrold.
Op een gelijkaardige wijze zal een "knop-ingedrukt"-bericht en een "knop-losgelaten"-bericht afkomstig van de eerste of de tweede muisinrichting M1, M2 door de Muis-Filter-Driver 4563, 4663 omgezet worden in een vooraf bepaalde reeks van "onschuldige muisbewegingen" die door het besturingssysteem in eerste instantie mogelijks naar de "verkeerde" onderliggende applicatie worden verstuurd, (zonder daar schade aan te richten}, maar welke reeks bewegingen enige tijd later zal herkend worden door de overlay-applicatie, en uiteindelijk zal resuiteren in een knop-ingedrukt of knop-losgelaten-commando dat vanaf de juiste positie (namelijk de positie gerelateerd aan de aanwijsinrichting die bediend werd} vanuit de overlay-applicatie zal aangeroepen worden, waardoor het commando alsnog bij de juiste onderliggende applicatie terecht komt, zelfs indien de native muiscursor niet op de plaats stond die overeenkomt met de muis waarvan de knop werd ingedrukt.
Hierboven worden de basisprincipes uitgelegd om te scrollen en/of te klikken op knoppen van twee muizen M1, M2 aangesloten op eenzelfde computer, bv. rechtstreeks (FIG. 45) of onrechtstreeks via een klassieke hub (FIG. 46).
Het mechanisme met de vooraf bepaalde (valse) bewegingssequenties laat ook toe om correct om te gaan met bepaalde “verboden combinaties”, zoals bv. het tegelijk indrukken van een knop van twee verschillende muisinrichtingen, en/of het tegelijk slepen met één muis en het scrollen met de andere, of het tegelijk indrukken van de linkerknop en de rechterknop van eenzelfde muisinrichting.
Zulke verboden combinaties kunnen ofwel volledig opgevangen worden in de muis-filter-driver (en niet in de overlay-applicatie), ofwel volledig in de overlay-applicatie (en niet in de muis-filter-driver}, of gedeeltelijk in de muis-filter-driver en gedeeltelijk in de overlay-applicatie. In een voorkeurs- uitvoeringsvorm wordt zo weinig mogelijk intelligentie in de muis-filter-driver gestopt, en zoveel mogelijk in de overlay-applicatie.
In voorkeursuitvoeringsvormen van de onderhavige uitvinding wordt de berichten- verwerkingsmodule 4552 en 4652 daartoe verder uitgebreid om minstens voor de gekozen linker- en rechter-muisinrichting bij te houden of er reeds een knop is ingedrukt, (of meer specifiek, of de linkerknop en/of de rechterknop is ingedrukt} en indien dat het geval is, geen bijkomend "knop- ingedrukt" commando of scrol-commando te versturen naar het besturingssysteem totdat de eerder ingedrukte knop is losgelaten. De knoppenstatus kan bv. bijgehouden worden aan de hand van vier bits, of aan de hand van vier booleaanse variabelen, of op een andere geschikte wijze. Op die manier kan de speciale overlay-applicatie 4551, 4651 en/of de speciale Muis-Filter-Driver 4563, 4663 ervoor zorgen dat de native muiscursor slechts op één locatie kan ingedrukt en/of gesleept en weer losgelaten worden, zelfs indien de gebruiker tegelijk fysiek een knop zou indrukken op elk van twee verschillende muisinrichtingen. Een bijkomend voordeel om dit in de overlay-applicatie op te vangen is dat de overlay-applicatie eventueel ook een visuele tekstboodschap of bitmap kan tonen aan de gebruiker om aan te geven dat zulke actie verboden is.
FIG. 50 toont een flow-diagram van een computer-geïmplementeerde werkwijze 5000 die uitgevoerd kan worden door de speciale overlay-applicatie 4551, 4651 wanneer die uitgevoerd wordt op de computerinrichting 4501, 4601 zoals getoond in FIG. 45 en FIG. 46. Aan de computerinrichting is minstens een eerste aanwijsinrichting M1, 4503R en een tweede aanwijsinrichting M2, 4503L aangesloten. De computerinrichting 4501, 4601 omvat verder een besturingssysteem 4560, 4660 met een grafische gebruikersinterface GUI, dat één native muiscursor verschaft.
De computerinrichting 4501, 4601 van FIG. 45 en FIG. 46 omvat verder een Muis-Filter-Driver 4563, 4663 die (zoals getoond in FIG. 51) geconfigureerd is : - om bewegingsberichten afkomstig van de eerste en de tweede aanwijsinrichting 4503R , 4503L te ontvangen, en bij ontvangst van zulk bericht, het bewegingsbericht of een overeenkomstig bericht (bv. een bericht met dezelfde betekenis maar in een ander formaat) naar het besturingssysteem te sturen; - om minstens één bericht uit de groep bestaande uit een knop-ingedrukt-bericht, een knop- losgelaten-bericht, een scrol-omhoog-bericht en een scrol-omlaag-bericht afkomstig van de eerste en/of de tweede aanwijsinrichting 4503R, 4503L te detecteren, en bij detectie van zulk bericht, een overeenkomstige (bv. respectievelijk een eerste, tweede, derde of vierde) bv. vooraf bepaalde bewegingssequentie naar het besturingssysteem 4560, 4660 te sturen.
De computer-geïmplementeerde werkwijze 5000 uitgevoerd door de overlay-applicatie, omvat de volgende stappen: a) het verschaffen 5001 van een grafisch overlayvenster, optioneel met één zichtbaar voorwerp, of met twee zichtbare voorwerpen, of met minstens drie zichtbare voorwerpen.
b} het toelaten 5002 of configureren dat het besturingssysteem O/S met de grafische gebruikersinterface GUI de native muiscursor verschaft als een zichtbaar voorwerp;
c}) het configureren 5003 van het grafisch overlayvenster in doorklikmodus {zoals venster 584 en 884), of het configureren van het grafisch overlayvenster als een in hoofdzaak schermvullend venster dat hoofdzakelijk of volledig bestaat uit volledig transparante pixels (afgezien van de optionele beweegbare voorwerpen); d} het configureren 5004 van het besturingssysteem 4560; 4660 om ruwe inputberichten gerelateerd aan de eerste en tweede aanwijsinrichting 4503R, 4503L te verzenden, en het verschaffen van een berichtenverwerker 4552; 4652 om deze ruwe inputberichten te verwerken; e} het aanpassen 5005 van een eerste positie of aanwijspositie Post in overeenstemming met bewegingen van de eerste aanwijsinrichting 4503R, en het aanpassen van een tweede positie of aanwijspositie Pos2 in overeenstemming met bewegingen van de tweede aanwijsinrichting 4503L, f} het aanpassen 5006 van een positie van de native muiscursor 4505, 4605 in overeenstemming met de eerste of de tweede bijgehouden of onderhouden positie Posl, Pos2 afhankelijk van welke aanwijsinrichting het meest recent bewogen en/of bediend werd; g) het detecteren 5007 of één van de (bv. vooraf bepaalde} bewegingssequenties voorkomt in de stroom van ruwe berichten, en wanneer zulke sequentie gedetecteerd wordt, - het bepalen van welke aanwijsinrichting 4503R, 4503L de vooraf bepaalde sequentie veroorzaakt heeft; en - het verplaatsen van de native muiscursor 4505, 4605 naar de eerste of tweede locatie Posi, Pos2 afhankelijk van welke aanwijsinrichting de sequentie veroorzaakt heeft; en - het versturen van een knop-ingedrukt-commando of een knop-losgelaten-commando, of een scrol-omhoog-commando of een scrol-omlaag-commando vanuit de overlay-applicatie 4551; 4651 naar het besturingssysteem 4560; 4660, overeenkomstig de gedetecteerde bewegingssequentie.
Bij voorkeur worden de stappen e) tot g) herhaaldelijk uitgevoerd.
In een uitvoeringsvorm wordt in stap a} een overlayvenster verschaft dat {naast de native muiscursor verschaft door het O/S) minstens één eerste zichtbaar voorwerp omvat (bv. in de vorm van een pijl), en omvat stap f) verder het aanpassen 5006 van een positie van dat eerste zichtbaar voorwerp op de andere positie (Pos2; Pos1} dan de positie ingenomen door de native muiscursor. In deze uitvoeringsvorm kan de gebruiker twee beweegbare voorwerpen zien en bewegen: de native muiscursor, en een ander voorwerp, bv. een bitmap met een zwarte pijl zoals getoond in FIG. 8 of FIG. 9 of FIG. 10.
In een andere uitvoeringsvorm wordt in stap a} een grafisch overlayvenster verschaft dat minstens een eerste zichtbaar voorwerp (bv. in de vorm van een bitmap met een pijl of een hand) en een tweede zichtbaar voorwerp (bv. eveneens in de vorm van een bitmap met een pijl of een hand) omvat; en omvat stap f} verder het aanpassen van een positie van dat eerste zichtbaar voorwerp op basis van de eerste bijgehouden of onderhouden positie Post, en het aanpassen van een positie van het tweede zichtbaar voorwerp 706L op basis van de tweede bijgehouden of onderhouden positie Pos2. In deze uitvoeringsvorm kan de gebruiker twee beweegbare voorwerpen zien en bewegen, bv. twee handen zoals getoond in FIG. 34, of twee lijntjes zoals getoond in FIG. 37, of twee kruisjes zoals getoond in FIG. 38. FIG. 51 werd hoger reeds besproken.
Preliminaire testen hebben aangetoond dat het mechanisme met de muis-filter-driver en de bewegingssequenties onder meer toelaat om: - beide muizen tegelijk te verplaatsen, - één muis stationair te houden en de andere muis te scrollen (ongeacht welke muis het laatste verplaatst of bediend werd}, - één muis stationair te houden en de andere muis te klikken {ongeacht welke muis het laatste verplaatst of bediend werd}, - één muis te bewegen en tegelijk de andere muis te klikken, - beide muizen stationair te houden, en beide muizen "tegelijk" (althans tegelijk voor de gebruiker) te scrollen, - beide muizen te bewegen, en beide muizen "tegelijk" (althans tegelijk voor de gebruiker) te scrollen.
Dit is wellicht niet het gedrag dat een typische game-gebruiker wenst, maar is zeer handig en zeer voordelig voor professionele computergebruikers die twee muizen wensen te gebruiken, bv. proeflezers bij het nakijken van een vertaling; of transscribers die bv. met de linkermuis een audio- speler activeren en/of deactiveren, en met de rechtermuis en/of een toetsenbord en/of een spraakherkenningsprogramma tekst invoeren of bewerken in een tekstverwerker.
Samengevat wordt in FIG. 45 tot 51 dus een oplossing voorgesteld waarbij een aanwijsinrichting (bv. een muis) een bewegings-bericht, of een knop-ingedrukt-bericht, of een knop- losgelaten bericht, of een scrol-omhoog-bericht, of een scroi-omlaag bericht verstuurt, en waarbij een muis-filter-driver 4563, 4663 onvoorwaardelijk de knop-ingedrukt/losgelaten-berichten en de scrol- omhoog/omlaag-berichten omzet naar een overeenkomstige bewegingssequentie die door de overlay- applicatie 4551, 4651 terug omgezet worden naar overeenkomstige commando's.
Deze oplossing laat de gebruiker toe om handig met twee muizen te werken. Zo kan een transcriber bv. een audio-speler starten/stoppen met één muis en een tekst editeren met de andere muis, en kan een vertaler scrollen in een PDF-document met brontekst en de vertaling intypen in een teksteditor met de andere muis, en kan een reviewer met één hand scrollen door het bron-document, en met de andere hand scrollen door het target-document.
Maar de uitvinders werden met bijkomende problemen geconfronteerd. Uit testen bleek namelijk dat het hoger beschreven mechanisme niet toelaat te klikken in applicaties zoals bv. "Taakbeheer" (Engels: "Task Manager"). Nader onderzoek heeft uitgewezen dat dit probleem zich lijkt voor te doen met applicaties die in geëleveerde modus draaien (ook "verhoogde modus" genoemd, of in het Engels: "elevated mode").
Een eenvoudige oplossing voor dit probleem is om de overlay-applicatie eveneens in "elevated mode" uit te voeren (bv. door deze op te starten “als Administrator"), maar veel van de beoogde computergebruikers hebben geen Administrator-rechten.
De uitvinders wilden daarom een andere oplossing vinden waarbij de overlay-applicatie niet in geéleveerde modus hoeft te draaien.
Ze kwamen op het idee om een gemodificeerde muis-filter-driver te verschaffen, die een werkwijze uitvoert zoals voorgesteld in het flow-diagram van FIG. 52(a). Vergelijking met het flow- diagram van FIG. 52(a) en FIG. 51 leert dat de stappen 5202 tot 5211 van FIG. 52 identiek zijn aan de stappen 5102 tot 5111 van FIG. 51. De voornaamste verschillen zitten dus in stappen 5201, 5212 en
5213.
In stap 5201 ontvangt de muis-filter-driver een nieuw bericht van een aanwijsinrichting, en bepaalt van welke aanwijsinrichting dit nieuwe bericht afkomstig is, en bepaalt het tijdstip waarop dat nieuwe bericht werd ontvangen, en onthoudt deze informatie of een gedeelte van deze informatie, bv.
in RAM; In stap 5212 gaat de muis-filter-driver na of slechts één muis gebruikt werd gedurende minstens een vooraf bepaalde periode (bv. 100 ms); en zoja, dan stuurt de muis-filter-driver het ontvangen bericht in stap 5213 door naar het besturingssysteem zonder het te converteren naar een bewegingssequentie; en zonee, dan voert de muis-filter-driver één of meerdere stappen 5202 tot 5211 uit, waarbij in stap 5202 wordt nagegaan of het bericht een verplaatsing is, en zoja, dan wordt het bericht doorgestuurd naar het besturingssysteem, en zonee, dan wordt het bericht omgezet naar een overeenkomstige (bv. vooraf bepaalde) bewegingssequentie op een gelijkaardige manier als toegelicht bij FIG. 51.
Uiteraard zijn verdere variaties of verfijningen mogelijk. Zo kan stap 5202 bv. uitgevoerd worden vóór stap 5212, en kan de volgorde van de testen 5204, 5206, 5208, 5210 gewijzigd worden.
De vooraf bepaalde periode AT dient voldoende groot gekozen te worden opdat de overiay- applicatie de native muiscursor kan laten verspringen. Deze vooraf bepaalde periode kan bijvoorbeeld een periode zijn in het bereik van 20 tot 500 ms, of van 20 tot 250 ms, of van 40 tot 200 ms, bv.
ongeveer gelijk aan 50 ms of 60 ms of 70 ms of 80 ms of 90 ms of 100 ms, of ongeveer gelijk aan 150 ms, of ongeveer gelijk aan 200 ms, of ongeveer gelijk aan 250 ms.
Met andere woorden, in de gemodificeerde muis-filter-driver, hierin ook "voorwaardelijke muis-filter-driver" genoemd, wordt niet elk knop-ingedrukt/ losgelaten bericht of scrol- omhoog/omlaag bericht onvoorwaardelijk omgezet naar een bewegingssequentie, maar deze omzetting wordt enkel onder bepaalde omstandigheden toegepast, bv. wanneer de gebruiker "recent" met een andere aanwijsinrichting aan het werken was. De omzetting wordt niet meer toegepast van zodra de gebruiker langer dan een vooraf bepaalde tijd met slecht één aanwijsinrichting werkt. Het nagaan hiervan kan op verschillende manieren geïmplementeerd worden, bv. door na te gaan of het nieuwe bericht (ontvangen door de MFD) van dezelfde aanwijsinrichting afkomstig is als het voorgaande bericht {ontvangen door de MFD), en of het tijdsverschil tussen dit nieuwe bericht en het eerste bericht van deze aanwijsinrichting zonder tussenliggende berichten van andere aanwijsinrichtingen, groter is dan de vooraf bepaalde periode.
Varianten hiervan zijn mogelijk.
FIG. 52{b} toont een variant van de werkwijze van FIG. 52(a}, waarbij stap 5201 verder het bijhouden omvat of minstens één knop van de aanwijsinrichtingen ingedrukt is, (bv. in een booleaanse variabele), en waarbij de werkwijze verder stap 5214 omvat, waarbij wordt getest of minstens één knop is ingedrukt en het (nieuwe) bericht afkomstig is van een andere muis, en zoja, dan wordt het bericht genegeerd in stap 5215, zonee, dan wordt verder gegaan met stap 5212.
De stappen 5202 tot en met 5211 van FIG. 52{a} worden beknopt voorgesteld door het blok
5220.
Stap 5214 werkt dus als een extra filter in het geval minstens één knop is ingedrukt. Indien geen enkele knop is ingedrukt (wat in het vh. van FIG. 45 betekent dat geen enkele van de knoppen M2B1, M2B2, M1B1, M1B2 is ingedrukt}, dan wordt het bericht gewoon verder behandeld zoals in FIG.
52{a).
Het bijhouden of een knop is ingedrukt kan ook op een andere manier geimplementeerd worden, bv. door middel van een teller, die met één wordt verhoogd voor elk knop-ingedrukt-bericht, en met één wordt verlaagd voor elk knop-losgelaten bericht. Het testen of minstens één knop is ingedrukt kan dan gebeuren door te testen of deze teller een waarde heeft groter dan nul. Maar de uitvinding is hiertoe niet beperkt, en andere gelijkaardige manieren kunnen eveneens gebruikt worden.
FIG. 52{c} toont aan de hand van een voorbeeld hoe een muis-filter-driver (MFD} die de werkwijze van FIG. 52(a) of FIG. 52(b) uitvoert, berichten van muis M1 en muis M2 verwerkt.
Op tijdstip t1 stuurt muis M1 een bewegingsbericht. Dit wordt gewoon doorgegeven.
Op tijdstip t2 stuurt muis M1 een bewegingsbericht. Dit wordt gewoon doorgegeven.
Op tijdstip t3 stuurt muis M2 een bewegingsbericht. Dit wordt gewoon doorgegeven.
Op tijdstip t4 stuurt muis M1 een scrol-bericht. Dit wordt vertaald door de MFD in een bewegingssequentie, ongeacht het tijdsverschil t4-t3 omdat het vorig bericht van muis M2 kwam.
Op tijdstip t5 stuurt muis M2 een scrol-bericht. Dit wordt vertaald door de MFD in een bewegingssequentie, ongeacht het tijdsverschil t5-t4 omdat het vorig bericht van muis M1 kwam.
Op tijdstip t6 stuurt muis M2 nog een scrol-bericht. Dit wordt gewoon doorgegeven, omdat de muis M2 reeds langer actief is dan een vooraf bepaalde tijd (bv. meer dan 100 ms) en er geen berichten van M1 tussendoor kwamen. Het is dus niet nodig om een bewegingssequentie te gebruiken, omdat aangenomen kan worden dat de native muiscursor reeds goed staat op tijdstip t6.
Op tijdstip t7 stuurt muis M2 een knop-ingedrukt bericht (press). Dit wordt gewoon doorgegeven, omdat het bericht van dezelfde muis M2 komt, die al langer dan de vooraf bepaalde periode actief is zonder berichten van de andere muis M1.
Op tijdstip 18 stuurt muis M2 een knop-losgelaten bericht (release). Dit wordt gewoon doorgegeven.
Er wordt opgemerkt dat in de periode van t7 tot t8 minstens één knop is ingedrukt, maar aangezien muis M1 gedurende deze periode niets stuurt, hoeven geen berichten genegeerd te worden.
Op tijdstip 19 stuurt muis M1 een knop-ingedrukt bericht {press}. Dit wordt door de MFD geconverteerd naar een bewegingssequentie, ongeacht het tijdsverschil 19-18 omdat het vorig bericht van muis M2 kwam. De variabele die bijhoudt of een knop is ingedrukt is WAAR, of de teller is 1.
Op tijdstip t10 stuurt muis M2 een bewegingsbericht. Dit bericht wordt genegeerd omdat een knop is ingedrukt, en het bericht van M2 niet afkomstig is van dezelfde muis als degene waarvan een knop is ingedrukt.
Op tijdstip t11 stuurt muis M1 een knop-losgelaten-bericht. Dit bericht wordt door de MFD geconverteerd naar een bewegingssequentie, omdat in het voorbeeld van FIG. 52(c} het tijdsverschil t11-t9 kleiner is dan de vooraf bepaalde periode AT.
Er wordt opgemerkt dat indien er op tijdstip t7 geklikt werd op een applicatie in geëleveerde modus (bv. Taakbeheer}, dat dit klikken effectief zou werken, ongeacht of de overlay-applicatie in geëleveerde modus draait of niet. Echter, indien op tijdstip t9 werd geklikt op Taakbeheer, dan zou dit niet werken, tenzij de overlay-applicatie als Administrator gestart was.
FIG. 52{d} toont aan de hand van een tweede voorbeeld hoe een muis-filter-driver (MFD) die de werkwijze van FIG. 52(a) of FIG. 52(b) uitvoert, berichten van muis M1 en muis M2 verwerkt.
Op tijdstip t1 stuurt muis M2 een bewegingsbericht. Dit wordt gewoon doorgegeven.
Op tijdstip 12 stuurt muis M2 een scrol-bericht. Dit wordt ook gewoon doorgegeven, omdat (in dit voorbeeld} het tijdsverschil t2-t1 groter is dan de vooraf bepaalde periode AT.
Op tijdstip 13 stuurt muis M2 een knop-ingedrukt-bericht. Dit bericht wordt niet geconverteerd naar een bewegingssequentie, maar wordt gewoon doorgegeven, omdat t3-t1 groter is dan AT. Er is nu minstens één knop ingedrukt.
Op tijdstip t4 stuurt muis M1 een scrol-bericht. Dit bericht wordt genegeerd, omdat er minstens één knop is ingedrukt. Aangezien dit bericht wordt genegeerd, en de native muiscursor niet van positie zal veranderen, kan de tijd vanaf het eerste bericht van T2 (op t1) gewoon doorlopen.
Op tijdstip t5 stuurt muis M2 een knop-losgelaten-bericht. Dit wordt gewoon doorgegeven omdat t5-t1 groter is dan AT, en het bericht van t4 werd genegeerd, althans in de werkwijze van FIG. 52b.
Op tijdstip t6 stuurt muis M1 een knop-ingedrukt-bericht. Dit bericht wordt omgezet naar een bewegingssequentie, omdat het vorige bericht van een andere muis afkomstig was (namelijk M2).
Op tijdstip t7 stuurt muis M2 een bewegingsbericht. Dit bericht wordt genegeerd omdat een knop van muis M1 is ingedrukt.
Op tijdstip t8 stuurt muis M1 een bewegingsbericht. Dit wordt gewoon doorgegeven, omdat in het voorbeeld t8-t6 groter is dan AT, en het bericht van t7 werd genegeerd.
Op tijdstip t9 stuurt muis M2 een scrol-bericht. Dit bericht wordt genegeerd omdat nog steeds een knop van muis M1 is ingedrukt.
Op tijdstippen t10 en t11 stuurt muis M1 opnieuw een bewegingsbericht. Deze worden gewoon doorgegeven, omdat t10-t6 en t11-t6 groter zijn dan AT, en het bericht van t9 werd genegeerd.
Op tijdstip t12 stuurt muis M2 een scrol-bericht. Dit bericht wordt genegeerd omdat nog steeds een knop van muis M1 is ingedrukt.
Op tijdstip 113 stuurt muis M1 een knop-losgelaten-bericht. Dit bericht wordt door de MFD gewoon doorgegeven. Vanaf nu is er geen knop meer ingedrukt.
Op tijdstip t14 stuurt muis M2 een scrol-bericht. Dit bericht wordt omgezet naar en bewegingssequentie, ongeacht het tijdsverschil t14-t13, omdat het vorige bericht afkomstig was van de andere muis M1.
In een variant van deze werkwijze wordt, wanneer een knop-ingedrukt bericht "als dusdanig" naar het O/S wordt gestuurd (dus niet via een bewegingssequentie}, ook het knop-losgelaten-bericht "als dusdanig” naar het O/S gestuurd.
In een variant van deze werkwijze wordt, wanneer een knop-ingedrukt bericht "als bewegingssequentie" werd behandeld {bv. op tijdstip t6 van FIG. 52d}, ook het knop-losgelaten-bericht als bewegingssequentie behandeld. In het voorbeeld van FIG. 52d zou de knop-loslating op 113 dus ook als een bewegingssequentie verstuurd worden. Op die manier kan de knop-indrukking en de knop- loslating een consistenter gedrag vertonen, bv. bij het klikken op applicaties in geëleveerde modus.
Testen hebben aangetoond dat een overlay-applicatie met de "gemodificeerde muis-filter- driver" {die de werkwijze van FIG. 52a of FIG. 52b uitvoert) zeer goed werkt, en een computergebruiker zonder Administrator-rechten effectief toelaat te klikken op een applicatie die in geéleveerde modus draait {zoals bv. Taakbeheer), mits de gebruiker de andere aanwijsinrichtingen (bv. de muis in de niet- dominante hand) niet beweegt of bedient gedurende minstens de vooraf bepaalde periode. De testen tonen aan dat de gebruiker weliswaar soms meermaals moet klikken, indien hij de eerste keer beide aanwijsinrichtingen aan het bewegen was, maar wanneer de gebruiker merkt dat "het klikken niet werkt", dan is zijn/haar spontane reactie dat hij/zij enkel de aanwijsinrichting van de dominante hand zal bedienen, waarna het klikken wel zal werken.
Verdere of andere varianten zijn mogelijk.
In een variant {niet getoond} van FIG. 52{b} wordt het bericht van de andere muis (bv. bewegingsbericht of scroi-bericht of knop-bericht} niet gewoon genegeerd in stap 5215, maar wordt er een nulverplaatsingsbericht verstuurd naar het O/S. Dit bericht zal uiteindelijk aankomen bij de overlay-applicatie die hiermee geïnformeerd is dat er een bericht van de andere muis werd genegeerd, waarop de overlay-applicatie bv. een visuele boodschap op het scherm kan tonen op de positie van deze andere muis, {bv. in de vorm van een rode letter X, of een rode cirkel met een streepje, of dergelijke), om aan te geven aan de gebruiker dat de betreffende beweging of klik- of scrol-actie afkomstig van deze muis verboden is.
FIG. 52(e) toont een andere of verdere variant van FIG. 52(b}, waarbij in stap 5214 eveneens wordt nagegaan of een knop ingedrukt is, en of het bericht afkomstig is van een andere aanwijsinrichting {bv. muis} dan degene waarvan de knop is ingedrukt, maar waarbij {als het resultaat van deze test waar is} het bericht niet gewoon wordt genegeerd {zoals in FIG. 52b), maar waarbij in stap 5231 verder wordt nagegaan of het bericht een knop-bericht of een scrol-bericht is {bv. een knop- ingedrukt-bericht of een knop-losgelaten-bericht of een scrol-omhoog-bericht of een scrol-omlaag bericht), in welk geval het bericht inderdaad genegeerd wordt {in stap 5232), maar indien het bericht een bewegingsbericht is (nagegaan in stap 5233), dan worden de verplaatsingswaarden dx en dy in het bericht aangepast, waarna het bericht wel naar het besturingssysteem wordt verstuurd (stap 5234).
Het aanpassen van het verplaatsingswaarden kan bv. het schalen of begrenzen van deze waarden omvatten, zodanig dat de dx-waarden en dy-waarden bv. binnen een vooraf bepaald bereik vallen, bv. van -5 tot +5, of van -4 tot +4, of van -2 tot +2, of van -1 tot +1. Testen hebben aangetoond dat het soms handig kan zijn dat de positie van het zichtbaar voorwerp gerelateerd aan de linkermuis verplaatst kan worden, terwijl bv. met de rechtermuis een bepaald tekstfragment geselecteerd wordt in een tekstdocument. Deze testen tonen aan dat wanneer de verplaatsingswaarden dx, dy van de bewegingen groter zijn dan een bepaalde waarde (in de testen een waarde van ongeveer 10 of 15), dat het geselecteerde tekstfragment tijdelijk kan verspringen, wat verwarrend is voor de gebruiker. Maar wanneer de verplaatsingswaarden dx, dy geschaald of begrensd worden tot een vooraf bepaald gebied, zoals in stap 5234, dan verspringt het tekstfragment minder vaak. Dit is bv. handig voor gebruikers die een bepaald tekstfragment in een doeltekst willen selecteren met de muis in de dominante hand, en ondertussen de muis in de niet-dominante hand willen verplaatsen om een overeenkomstig tekstfragment in het brondocument te onderlijnen. (voor de volledigheid: de testen tonen aan dat wanneer het startpunt gekozen wordt tussen twee tekstlijnen gevoeliger is dan wanneer een startpunt wordt gekozen dat ligt op een tekstlijn).
Verdere varianten zijn mogelijk.
Zo kan bv. in plaats van het louter negeren van een knop-bericht in stap 5215 of 5232 bv. bijgehouden worden dat een knop-ingedrukt-bericht van de andere muisinrichting werd tegengehouden, en zal de berichtenverwerker later ook het overeenkomstige knop-losgelaten-bericht tegenhouden. Op die manier kan een consistenter gedrag worden bereikt.
In een verdere of een andere variant kan de beweging van de andere aanwijsinrichting in stap 5234 bv. doorgestuurd worden naar het besturingssysteem als een bewegingssequentie, met of zonder schaling of begrenzing van de verplaatsingswaarden. Een dergelijke bewegingssequentie kan bv. gedefinieerd worden als een bewegingssequentie samengesteld uit een deelsequentie volgens één van de sequenties getoond in FIG. 47, gevolgd door het verplaatsingsbericht met waarden (+dx, +dy}, gevolgd door een tegengesteld verplaatsingsbericht met waarden (-dx, -dy), bij voorkeur verder gevolgd door een nulverplaatsing (met dx=0, dy=0}. De overlay-applicatie zal deze bewegingssequentie ontvangen, en herkennen, en kan eruit afleiden welke beweging de andere aanwijsinrichting maakte, en kan bv. beslissen om de positie van het bijhorende zichtbare voorwerp wel te updaten, maar de native muiscursor niet te laten verspringen.
Maar de uitvinding is hiertoe niet beperkt, en andere varianten zijn mogelijk.
De uitvinders realiseren zich dat de conversie naar bewegingssequenties ook kan bekomen worden zonder een muis-filter-driver te gebruiken, maar door gebruik te maken van speciale aanwijsinrichtingen {zie FIG. 53) of een speciale hub (zie FIG. 54).
FIG. 53 toont een computersysteem 5300, dat gezien kan worden als een variant van het computersysteem 4500 van FIG. 45, met als voornaamste verschil dat het computersysteem 5300 geen muis-filter-driver 4563 omvat zoals hoger beschreven, maar wel twee speciale aanwijsinrichtingen M1** en M2**, bv. een linkermuis 5303L en een rechtermuis 5303R. Deze muizen kunnen eenzelfde hardware-configuratie hebben als getoond in FIG. 23{b}, maar de besturingseenheid 2324 zal anders functioneren. Meer bepaald zal de besturingseenheid voorzien zijn om bij een verplaatsing van de muis een bewegingsbericht te versturen, en om bij indrukking van een linkerknop een eerste (bv. vooraf bepaalde) bewegingssequentie te versturen, en om bij indrukking van een rechterknop een tweede (bv. vooraf bepaalde) bewegingssequentie te versturen, en om bij het omhoog-scrollen van het scrolwiel een derde (vaste of parameteriseerbare) bewegingssequentie te versturen, en om bij het omlaag-scrollen van het scrolwiel een vierde (vaste of parameteriseerbare) bewegingssequentie te versturen, op een gelijkaardige manier als beschreven bij FIG. 45 tot FIG. 51, maar nu vanuit de aanwijsinrichting zelve.
Bij voorkeur draait de overlay applicatie in dit geval in geëleveerde modus, anders kan de gebruiker bepaalde applicaties die in geëleveerde modus werken {bv. Taakbeheer) niet bedienen met zulke muis, maar dat is niet absoluut noodzakelijk.
Optioneel is de speciale muis 5303L, 5303R met twee werkingsmodi uitgerust, waarbij de werkingsmodus bv. kan ingesteld worden door de gebruiker, bv. door middel van een hardware- schakelaar, of een drukknop, of in software door een instelprogramma. De twee modes kunnen een klassieke modus omvatten waarbij knop- en scrol-berichten als dusdanig worden doorgestuurd naar de computer, en een speciale modus {ook "dubbele-muis-modus" genoemd} waarbij de muis de hoger beschreven bewegingssequenties zal versturen.
FIG. 54 toont een computersysteem 5400, dat gezien kan worden als een variant van het computersysteem 4600 van FIG. 46, met als voornaamste verschil dat het computersysteem 5400 geen muis-filter-driver 4663 omvat, maar een speciale hub 5420.
In een uitvoeringsvorm is de hub voorzien om een werkwijze uit te voeren gelijkaardig aan de werkwijze 5100 getoond in FIG. 51 {waarbij alle kiik-berichten en scrol-berichten afkomstig van de aanwijsinrichtingen M1, M2 onvoorwaardelijk worden omgezet naar bewegingssequenties}, met dat verschil dat de berichten of de bewegingssequenties verstuurd worden naar een ingangspoort van de computer, bv. een USB-poort.
In een uitvoeringsvorm is de hub 5420 voorzien om een werkwijze uit te voeren gelijkaardig aan de werkwijze 5200 getoond in FIG. 52, waarbij niet alle klik-berichten en scrol-berichten wordt geconverteerd naar bewegingssequenties, maar slechts onder bepaalde voorwaarden, zoals hoger beschreven bij stap 5212 van FIG. 52.
Optioneel is de speciale hub 5420 met twee werkingsmodi uitgerust, waarbij de werkingsmodus bv. kan ingesteld worden door de gebruiker, bv. door middel van een hardware- schakelaar, of een drukknop, of in software door een instelprogramma. De twee modes kunnen een klassieke modus omvatten waarbij commando's van meerdere muizen als dusdanig worden doorgestuurd naar de computer, en een speciale modus (ook "dubbele-muis-modus" genoemd}
waarbij de hub geconfigureerd is om de werkwijze 5100 van FIG. 51, of de werkwijze 5200 van FIG. 52 uit te voeren.
De speciale hub 5420 kan bv. dezelfde hardware-configuratie hebben als de hubs getoond in FIG. 27(a) of FIG. 27(b}, waarbij de besturingseenheid 2744 of 2745 voorzien is om de werkwijze uit te voeren van FIG. 51 of FIG. 52.
Na de ervaringen opgedaan met de muis-filter-driver, zijn de uitvinders tot het inzicht gekomen dat het technisch mogelijk moet zijn voor fabrikanten van bestaande besturingssystemen om het bestaand besturingssysteem uit te breiden naar een versie die twee zichtbare muispointers toont, die individueel verplaatsbaar zijn door twee aanwijsinrichtingen, en waarbij de twee aanwijsinrichtingen tegelijk verplaatst mogen worden, en waarbij de twee aanwijsinrichtingen (vanuit gebruikersoogpunt} tegelijk gescrold mogen worden, en waarbij één aanwijsinrichting mag gescroid worden terwijl de andere verplaatst wordt, en waarbij met elk van de aanwijsinrichtingen (afzonderlijk) kan geklikt of gesleept worden, maar niet tegelijk, zoals bv. weergegeven in de volgende tabel: Tabel 1: simultane acties met eerste en tweede aanwijsinrichting Door uit te sluiten dat de twee aanwijsinrichtingen tegelijk geklikt of gesleept worden, kan op elk moment slechts één applicatie “actief” zijn (zoals nu ook het geval is}, en kan het besturingssysteem in hoofdzaak blijven werken zoals nu, met het verschil dat er in plaats van één zichtbaar voorwerp dat met een muis beweegt {"muiscursor" genoemd), nu twee muiscursoren worden getoond.
In bepaalde uitvoeringsvormen toont het besturingssysteem weliswaar twee zichtbare beweegbare objecten, maar is er onderliggend in feite nog steeds slechts één enkele "native muiscursor". Deze native muiscursor kan dan bv. als een witte pijl getoond worden, maar bij voorkeur kan de bitmap van deze muiscursor wijzigen afhankelijk van waar hij zich bevindt (bv. boven een zichtbare component). De andere muiscursor zou geen echte muiscursor kunnen zijn, maar gewoon een afbeelding, bv. een zwarte pijl of een blauwe pijl of een rode pijl, die verplaatst wordt.
Omdat er in feite nog steeds maar één native muiscursor is, kan zulk besturingssysteem 100% terugwaarts compatibel gemaakt worden met bestaande besturingssystemen. Door de actieve en passieve muiscursor van plaats te verwisselen (of de native mouse cursor te laten verspringen) (of te verwisselen}, kan de gebruiker schijnbaar toch met twee aanwijsinrichtingen werken, ook al zijn niet alle combinaties toegelaten (zie bv. tabel 1}.
Maar de uitvinders gingen een stap verder, en realiseerden zich dat het onder bepaalde omstandigheden ook mogelijk moet zijn om scenario (v) en {vi} toch toe te laten.
Beide uitvoeringsvormen worden hieronder in meer detail beschreven.
Het verschaffen van twee muiscursoren door het besturingssysteem biedt verschillende voordelen t.o.v. een implementatie met een overlay-applicatie en een muis-filter-driver, waaronder: - de twee muiscursoren kunnen beiden een Z-orde hebben die hoger is dan de andere applicaties (zie FIG. 55c}; - aangezien het besturingssysteem volledige controle heeft over welke berichten wanneer als commando's of events naar onderliggende applicaties worden gestuurd, hoeft het besturingssysteem geen extra vertraging in te bouwen zoals bv. beschreven in FIG. 22 en FIG. 26, en hoeft het besturingssysteem geen (bv. vooraf bepaalde) bewegingssequenties te gebruiken om bepaalde "race- condities” te vermijden. Met andere woorden, mits de juiste voorzieningen, zal een knop-ingedrukt- bericht verzonden door de rechtermuis niet leiden tot een knop-indrukkings-commando op de positie die bewegingen van de linkermuis volgt; - het besturingssysteem kan bepaalde taken in Kernel modus afhandelen, wat een overlay- applicatie bv. niet kan; - het besturingssysteem heeft toegang tot meer systeembronnen (Engels: system resources), en heeft bepaalde kennis die een muis-filter-driver bv. niet heeft, zoals bv. gebruikersinstellingen qua schermresolutie en/of muissnelheid. Zo kan het besturingssysteem bv. vrij eenvoudig de bewegingen van de muiscursoren begrenzen aan de randen van het scherm.
Zulk besturingssysteem zou de problemen beschreven in FIG. 1 tot FIG. 4 dus eveneens en op een elegante manier kunnen oplossen, zonder de behoefte voor een muis-filter-driver, en zonder de behoefte voor een speciale muis of hub, en zonder een overlay-applicatie.
Aangezien deze behoefte bestaat, maar er nog geen dergelijk besturingssysteem bestaat, kan het haast niet anders dan dat er een vooroordeel bestaat dat het technisch niet mogelijk is zulke functionaliteit op een technisch haalbare manier te voorzien. Misschien staren de fabrikanten van bestaande besturingssystem zich blind op het ondersteunen van muizen van meerdere gebruikers die via een netwerk aan één computer verbonden zijn, en vergeten ze dat het een meerwaarde zou zijn indien éénzelfde gebruiker beide handen zou kunnen gebruiken. Of misschien worden ze afgeschrikt door de opvatting dat wanneer er twee muizen aangesloten zijn aan eenzelfde computer, dat alie mogelijke combinaties van bewegen en klikken en slepen en scrollen moeten ondersteund worden (wat niet hoeft). Of mogelijks denken de fabrikanten van bestaande besturingssystemen dat het gebruik van meerdere muizen enkel zinvol is voor gamers, maar niet voor professionele gebruikers. De voorbeelden van FIG. 1 tot FIG. 4 tonen echter duidelijk aan dat er wel degelijk een meerwaarde bestaat voor zulk besturingssysteem, bv. bij professionele computergebruikers zoals vertalers, proeflezers, transcribers, technische schrijvers, advocaten, enz. Hoe dan ook, feit is dat (voor zover als bekend bij de uitvinders} een dergelijk besturingssysteem nog niet bestaat.
FIG. 55{a) en FIG. 55(b} tonen een blokdiagram van een computersysteem 5500 volgens een uitvoeringsvorm van de onderhavige uitvinding. Het in FIG. 55(a) getoonde computersysteem 5500 omvat een computerinrichting 5501 verbonden met een eerste en een tweede aanwijsinrichting 5503R, 5503L, en verbonden met een display 5504, en met een toetsenbord 5502.
De computerinrichting 5501 omvat een besturingssysteem 5560 (zie FIG. 55d) dat twee zichtbare objecten 55054, 5505p verschaft die bewegingen volgen van de aanwijsinrichtingen 5503R, 5503L.
Zoals hoger toegelicht (bij FIG. 28a) is het mogelijk om (in een eerste gebruikersmodus, bv. “rechtshandige modus" genoemd) de actieve muiscursor altijd bewegingen te laten volgen van de eerste aanwijsinrichting (bv. de rechtermuis, naar analogie met de RechtH modus beschreven bij FIG. 28a), en de passieve muiscursor altijd bewegingen te laten volgen van de tweede aanwijsinrichting {bv. de linkermuis). In deze modus zal de native muiscursor de bewegingen van de eerste muis volgen, en dus niet verspringen. Er dus ook niet gekiikt of gescrold worden met de tweede aanwijsinrichting. En mocht deze aanwijsinrichting toch geklikt of gescrold worden, dan kunnen deze berichten tegengehouden worden.
Het is ook mogelijk om een tweede gebruikersmodus te voorzien, {bv. "linkshandige modus” genoemd} waarbij de actieve muiscursor altijd bewegingen volgt van de tweede aanwijsinrichting (bv. de linkermuis), {naar analogie met de LinkH modus beschreven bij FIG. 28a}, en de passieve muiscursor altijd bewegingen volgt van de eerste aanwijsinrichting. In dit geval kan er niet geklikt of gescrold worden met de eerste aanwijsinrichting. En mocht deze aanwijsinrichting toch geklikt of gescrold worden, dan kunnen deze berichten tegengehouden worden.
Maar de interessantste uitvoeringsvorm is uiteraard degene waarbij de gebruiker beide aanwijsinrichtingen kan verplaatsen en/of scrollen en/of klikken en/of slepen, naar analogie met de TweeH-modus beschreven bij FIG. 28a. In hetgeen volgt wordt vooral de tweehandige-modus verder toegelicht.
FIG. 55{a} toont bewegingen van de eerste muiscursor 55054 in overeenstemming met bewegingen van de eerste aanwijsinrichting 5503R, bv. een rechtermuis.
FIG. 55(b) toont bewegingen van de tweede muiscursor 5506L in overeenstemming met bewegingen van de tweede aanwijsinrichting 5503L, bv. een Iinkermuis. De linkermuis en rechtermuis kunnen identieke muizen zijn (qua hardware en/of firmware), of kunnen verschillende muizen zijn, bv. van verschillende fabrikanten.
In het voorbeeld van FIG. 55{a} en FIG. 55(b} is de vorm en de grootte van de eerste muiscursor 5505a dezelfde als die van de tweede muiscursor 5505p en is alleen de kleur verschillend, maar dat is niet noodzakelijk. Zoals reeds gezegd kan in voorkeursuitvoeringsvormen het uitzicht van de eerste en/of de tweede muiscursor variëren afhankelijk afhankelijk van welke visuele objecten zich onder de respectievelijke muiscursor bevinden. Zo kan de muiscursor 55054 bv. de vorm aannemen van een bitmap met een "hand" wanneer een onderliggend visueel object kan versleept worden, of de vorm aannemen van een "I" {zgn. cross-hair} bv. wanneer de respectievelijke muiscursor zich in een tekstveld bevindt, of de vorm aannemen van een Oost-West pijl wanneer een visueel object links- rechts geschoven kan worden, enz. Dit is een zeer belangrijk voordeel (t.o.v. objecten die niet van vorm kunnen veranderen), omdat het de gebruiker visuele informatie geeft over mogelijke acties, en informatie geeft of de cursor juist gepositioneerd is (bv. wanneer de gebruiker de breedte of de hoogte van een applicatievenster wil verkleinen).
FIG. 55{c} is een schematische voorstelling van een zogenoemde "Z-orde" van vensters of beeldvlakken en een "cursorvlak" 5586 zoals gebruikt kan worden in het computersysteem 5500 van FIG. 55{a, b}. In het voorbeeld is er een onderste vlak 5581, hierin ook "desktop" of “desktopvenster” genoemd dat zich op hoogte Z1 bevindt. Op hoogte Z2 bevindt zich een venster 5582 dat hoort bij een eerste applicatie 55624, bv. een tekst-editor. Op hoogte Z3 bevindt zich een tweede venster 5583 dat hoort bij een tweede applicatie 5562b, bv. een PDF-viewer. Op hoogte Z4 bevindt zich het zogenaamde "cursorviak" dat in dit voorbeeld twee afzonderlijke bitmaps omvat, één voor de eerste muiscursor 55054 {hierin ook "actieve muiscursor" genoemd], en één voor de tweede muiscursor 5505p (hierin ook "passieve muiscursor” genoemd). Deze benamingen zijn bedoeld om de uitvinding eenvoudiger te kunnen beschrijven. De actieve en passieve muiscursor kunnen zich overal op het scherm bevinden, bv. links of rechts, of zich op verschillende schermen bevinden.
Uiteraard is de voorstelling van FIG. 55(c) slechts een voorbeeld, en vele varianten zijn mogelijk. Zo kunnen er bv. meer dan twee, of minder dan twee gebruikersapplicaties draaien in de computerinrichting, en/of de vensters 5582 en 5583 kunnen elkaar overlappen. Het is ook mogelijk de twee muiscursoren 5505a, 5505p in aparte cursorvlakken te leggen.
FIG. 55{d} toont een vereenvoudigd hoogniveau-blokdiagram van hardware- en softwarecomponenten gesitueerd in het computersysteem van FIG. 55(a,b}, waarbij het computersysteem 5500 een computerinrichting 5501 omvat met een speciaal besturingssysteem 5560* dat twee muiscursoren 55054, 5505p verschaft, die afzonderlijk bewogen kunnen worden door twee aanwijsinrichtingen 5503R, 5503L. Deze aanwijsinrichtingen kunnen klassieke aanwijsinrichtigen zijn, bv. een muis, een touchpad, een trackbal, een stylus, enz. In een voorkeursuitvoeringsvorm zijn de twee aanwijsinrichtingen HID-compatibele muizen M1, M2, elk met ten minste twee of precies twee drukknoppen (M1B1, M1B2) en (M2B1, M2B2), en bij voorkeur ook minstens één of precies één scrolwiel (niet getoond].
In het voorbeeld van FIG. 55(d) zijn de twee muizen M1, M2 rechtstreeks aangesloten op de computer, bv. via een USB-poort, maar dat is niet noodzakelijk, en de twee muizen kunnen ook verbonden zijn met de computer via een klassieke hub (niet getoond, maar zie bv. FIG. 12}.
In tegenstelling tot het blokdiagram van FIG. 5(f), FIG. 11, FIG. 12, FIG. 23a, FIG. 24, FIG. 25, FIG. 45 en FIG. 46, heeft het blokdiagram van FIG. 54 geen speciale overlay-applicatie, maar worden de twee muiscursoren verschaft door het besturingssysteem zelve, Hoewel uiteraard vele implementaties mogelijk zijn, komt deze uitvoeringsvorm erop neer dat het besturingssysteem één of meerdere software-modules of -routine omvat die dezelfde of gelijkaardige functies vervullen van de hoger genoemde "berichtenverwerker" 5352 en de “herpositioneringsroutine" 5353 van bv. FIG. 53. In FIG. 54 wordt dit voorgesteld door één module 5562* met de naam “berichtenverwerker en cursorpositionering”. Ze onderhoudt de eerste positie PosR met coördinaten (x1,y1} overeenkomstig bewegingen van de eerste aanwijsinrichting 5503R, en de tweede positie PosL met coördinaten {x2,y2} overeenkomstig bewegingen van de tweede aanwijsinrichting 5503L, aan de hand van de respectievelijke bewegingsberichten, Deze berichten kunnen bv. aangeleverd worden via een USB- poort, een hardware-abstraction layer (HAL), één of meerdere muis-device-drivers 5561, enz.
FIG, 56 toont een hoog-niveau flow-diagram van een voorbeeldmatige computer- geïmplementeerde werkwijze 5600 die uitgevoerd kan worden door het speciaal besturingssysteem 5560*, bv. door de voorbeeldmatige "berichtenverwerker en cursorpositionering” 5562* getoond in FIG. 55(d). De werkwijze 5600 getoond in FIG. 56 omvat de volgende stappen: b} het verschaffen 5602 van een besturingssystem 5560* met een grafische gebruikersinterface, met een eerste en een tweede aanwijzerposities PosR (x1,y1), PosL (x2, y2), en met een eerste muiscursor 5505a (ook actieve muiscursor genoemd) en een tweede muiscursor 5505p {ook passieve muiscursor genoemd]; c} het ontvangen 5603 van een inputbericht afkomstig van de eerste en/of de tweede aanwijsinrichting 5503R, 5503L;
d) het bijwerken van de eerste en de tweede positie (PosR, PosL} in overeenstemming met bewegingen van de eerste en tweede aanwijsinrichting (5503R, 5503L); e) het aanpassen van de positie Posa van de actieve muiscursor 5505a en de positie Posp van de passieve muiscursor 5005p op basis van welke aanwijsinrichting 5503R, 5503L het laatst bewogen of bediend werd; f) het verder verwerken van het inputbericht, bv. door het al dan niet versturen van een commando of event naar een onderliggende visuele component of applicatie.
Er wordt opgemerkt dat stap d) niet, maar stap e} wel afhankelijk is van de genoemde LinksH, RechtsH, TweeH modus]. {in het voorbeeld van FIG. 56, wordt in stap e} de TWEEH modus gebruikt).
FIG. 57a toont in meer detail hoe het verwerken van het inputbericht {stap 5607) eruit zou kunnen zien. In de werkwijze van FIG. 57a omvat de werkwijze verder het bijhouden van een status van één of meerdere of alie knoppen van de aanwijsinrichtingen (bv. ingedrukt of niet ingedrukt}, en wordt hiermee rekening gehouden voor de behandeling van volgende berichten.
In stap 5701 wordt nagegaan of een knop is ingedrukt. De toestand van de knoppen M1B1, M1B2, M2B1, M2B2 van de eerste en tweede aanwijsinrichting M1, M2 kan bv. door middel van vier bits, of door middel van vier booleaanse variabelen bijhouden worden, of door middel van een teller die bijhoudt of minstens één knop is ingedrukt, zoals hoger beschreven.
Indien een bericht binnenkomt en een knop was ingedrukt (Y), dan wordt in stap 5712 nagegaan of het binnenkomend bericht afkomstig is van dezelfde aanwijsinrichting als de aanwijsinrichting waarvan een knop is ingedrukt. En indien het resultaat van deze test waar is (Y), dan wordt verder gegaan met stap 5704; en indien het resultaat van deze test onwaar is (N}, dan wordt het bericht genegeerd (stap 5713} en optioneel wordt een foutboodschap getoond.
Indien in stap 5701 werd bepaald dat geen knop was ingedrukt, dan wordt verder gegaan met stap 5704.
In stap 5704 wordt nagegaan of het ontvangen bericht een knop-ingedrukt-bericht was, en zoja, dan wordt het knop-ingedrukt-bericht in stap 5705 behandeld als een "knop-ingedrukt- commando", bv. door een "knop-ingedrukt event” te sturen naar de component of applicatie gesitueerd op positie PosL of PosR afhankelijk van welke aanwijsinrichting werd ingedrukt, en de status van de knoppen wordt bijgewerkt; in stap 5706 wordt nagegaan of het ontvangen bericht een knop-losgelaten-bericht was, en zoja, dan wordt het knop-losgelaten-bericht in stap 5707 behandeld als een "knop-losgelaten- commando", bv. door een "knop-losgelaten event” te sturen naar de component of applicatie gesitueerd op positie PosR of PosL afhankelijk van welke aanwijsinrichting werd ingedrukt, en de status van de knoppen wordt bijgewerkt;
in stap 5708 wordt nagegaan of het ontvangen bericht een scrol-omhoog-bericht was, en zoja, dan wordt het scrol-omhoog-bericht in stap 5709 behandeld ais een "scrol-omhoog-commando", bv. door een “scrol-omhoog-event"” te sturen naar de component of applicatie gelegen onder PosR of PosL afhankelijk van welke aanwijsinrichting het bericht afkomstig was; anders {dus geen scrol-omhoog-bericht) wordt in stap 5710 nagegaan of het ontvangen bericht een scrol-omlaag-bericht was, en zoja, dan wordt het scrol-omlaag-bericht in stap 5711 behandeld als een "scrol-omlaag-commando", bv. door een "scrol-omlaag-event" te sturen naar de component of applicatie gelegen onder PosR of PosL afhankelijk van welke aanwijsinrichting het bericht afkomstig was.
Uiteraard zijn vele variaties mogelijk. Zo kan bv. de volgorde van de testen veranderd worden, en/of kunnen de berichten op een andere manier verwerkt worden, bv. door functie-aanroepen, enz.
In de werkwijze van FIG. 57a worden dus, wanneer een knop van één aanwijsinrichting ingedrukt is, andere berichten genegeerd, maar berichten komende van dezelfde aanwijsinrichting worden wel behandeld.
In een variant van deze werkwijze {niet getoond}, worden wel bewegingsberichten verder verwerkt (dit is "slepen™), en een knop-losgelaten bericht, maar worden andere berichten tegen gehouden, met name een scrol-bericht of een knop-ingedrukt-bericht gerelateerd aan een andere knop van dezelfde aanwijsinrichting, conform scenario (i) tot (iv) van Tabei 1.
FIG. 57b toont een variant van de werkwijze van FIG. 57a, waarbij in stap 5712 wordt nagegaan of het bericht een bewegingsbericht of een knop-losgelaten-bericht afkomstig van dezelfde aanwijsinrichting als degene waarvan een knop is ingedrukt, en zoja, dan wordt het bericht verder verwerkt in stappen 5704 tot 5711 als hierboven, en zonee, dan wordt het bericht genegeerd in stap 5713, en wordt optioneel een foutboodschap getoond, bv. in de vorm van een bitmap.
In een andere of verdere variant van deze werkwijze {niet getoond} wordt een bericht afkomstig van een andere aanwijsinrichting wanneer reeds een knop is ingedrukt niet louter genegeerd, maar wordt in stap 5713 bijgehouden dat een knop-ingedrukt-bericht werd genegeerd, en wordt in stap 5707 een extra test uitgevoerd om na te gaan of het bijhorend knop-ingedrukt-bericht werd genegeerd, en zoja, dan wordt ook het knop-losgelaten-bericht genegeerd. Op die manier kan voorkomen worden dat een knop-losgelaten-commando of -event naar een component of applicatie wordt verstuurd dat niet voorafgegaan wordt door een knop-ingedrukt-commando.
De hierboven beschreven werkwijzen trachten het gedrag van het besturingssysteem zoveel mogelijk retro-compatibel te houden, zodat een meerderheid van de bestaande applicaties probleemloos zal blijven werken, zonder wijzigingen aan de applicatie.
Maar de uitvinders kwamen op het idee dat het technisch mogelijk zou moeten zijn om extra functionaliteit te bieden die verder gaat dan momenteel mogelijk is met bestaande besturingssystemen. Zo zou het (althans vanuit applicatie-standpunt gezien) technisch mogelijk moeten zijn om een besturingssysteem te voorzien dat toelaat tekst te selecteren met de rechtermuis in een eerste applicatie (bv. in een teksteditor rechts op het scherm), en tegelijk te scroilen in een PDF- document-viewer met de linkermuis (of omgekeerd). Dit is momenteel niet mogelijk met een besturingssysteem dat maar één muiscursor heeft, omdat de muiscursor zich zou moeten verplaatsen van de ene applicatie naar de andere om te kunnen scrollen, maar zulke verplaatsing is niet zonder meer mogelijk tijdens het selecteren van tekst, of tijdens het verslepen van een object, zie scenario {v) en (vi) van Tabel 1. Zulke functionaliteit kan echter wel voorzien worden in een verbeterd besturingssysteem, omdat er in principe geen reden is waarom de tekst-applicatie (aan de rechterkant van het scherm} zou moeten weten dat er gescrold wordt in een andere applicatie (bv. aan de linkerkant van het scherm, of op een ander scherm), temeer wanneer dit met een andere muiscursor gebeurt.
FIG. 58 toont een flow-diagram van een werkwijze 5800 die door zuik besturingssysteem kan uitgevoerd worden. Deze werkwijze 5800 kan gezien worden als een variant van de werkwijze 5600 van FIG. 56, met als voornaamste verschillen: - dat in stap 5805 verder wordt bepaald welke (bv. visuele) component{en) of applicatie(vensters) zich bevinden op de eerste en tweede aanwijspositie PosR, pol; - dat de verwerking van het bericht in stap 5807 rekening houdt met welke (bv. visuele) component(en) of applicatie(s) zich onder de eerst en tweede aanwijspositie PosR, PosL bevinden. In een voorbeeldmatige uitvoeringsvorm gaat het besturingssysteem na of de eerste aanwijspositie PosR en de tweede aanwijspositie PosL zich boven eenzelfde visuele component en/of boven eenzelfde applicatievenster bevinden, en houdt de verdere verwerking van het inputbericht in stap 5607 hier rekening mee. In een specifieke uitvoeringsvorm wordt, indien de twee muiscursoren zich boven eenzelfde visuele component of boven eenzelfde applicatievenster bevinden, in minstens één van de volgende gevallen een foutboodschap getoond: * bij ontvangst van een knop-ingedrukt-bericht afkomstig van de eerste aanwijsinrichting {5503R) indien een knop (M2B1, M2B2} van de tweede aanwijsinrichting (5503L) reeds is ingedrukt; * bij ontvangst van een knop-ingedrukt-bericht afkomstig van de tweede aanwijsinrichting {5503L) indien een knop {M1B1, M1B2) van de eerste aanwijsinrichting (5503R) reeds is ingedrukt;
* bij ontvangst van een scrol-omhoog-bericht of een scrol-omlaag bericht afkomstig van de eerste aanwijsinrichting (5503R) indien een knop (M2B1, M2B2} van de tweede aanwijsinrichting (5503L) reeds is ingedrukt; * bij ontvangst van een scrol-omhoog-bericht of een scrol-omlaag bericht afkomstig van de tweede aanwijsinrichting (5503L) indien een knop {M1B1, M1B2}) van de eerste aanwijsinrichting (5503R} reeds is ingedrukt.
Bij voorkeur wordt er in deze gevallen geen overeenkomstig commando of event naar de onderliggende visuele component of applicatie gestuurd, dus de component of de applicatie hoeft niet te weten dat een knop of scrolwiel van een andere aanwijsinrichting bediend werd. Voor die applicatie lijkt het dus alsof het besturingssysteem maar één aanwijsinrichting heeft.
In een verdere of andere uitvoeringsvorm wordt, indien de eerste en tweede muiscursor (5505a, 5505p) zich boven verschillende visuele componenten of applicatievensters bevinden: * bij ontvangst van een scrol-omhoog-bericht afkomstig van de eerste aanwijsinrichting {5503R), een "scrol-omhoog"-commando of -event verstuurd naar de onderliggende component of applicatie (bv. vanaf de eerste aanwijspositie), zelfs indien een knop (M2B1, M2B2} van de tweede aanwijsinrichting {5503L) reeds is ingedrukt; * bij ontvangst van een scrol-omlaag-bericht afkomstig van de tweede aanwijsinrichting (5503L), een ”scrolomlaag“-commando of -event verstuurd naar de onderliggende component of applicatie {bv. vanaf de tweede aanwijspositie}, zelfs indien een knop (M1B1, M1B2)} van de eerste aanwijsinrichting (5503R) reeds is ingedrukt.
In deze uitvoeringsvorm is het simultaan slepen met één muis en het scrollen met de andere muis dus wel toegelaten, mits de eerste muiscursor en de tweede muiscursor zich boven verschillende visuele componenten of boven verschillende applicaties bevinden, zoals weergegeven in Tabel 2.
Eerste Tweede Toegelaten? men eeen A ie een (v} | klikken, slepen scrollen nee, indien boven eenzelfde component of applicatie; ja, indien boven verschillende componenten of applicaties applicatie; ja, indien boven verschillende componenten of applicaties Tabel 2: simultane acties met eerste en tweede aanwijsinrichting in een verbeterd O/S FIG. 59a en FIG. 59b tonen een computersysteem 5900 dat een variant is van het computersysteem 5500 van FIG. 55a en FIG. 55b. Het voornaamste verschil is dat het computersysteem 5800 van FIG. 58 een besturingssysteem omvat dat drie zichtbare objecten 5905pL, 5905R, 5905n verschaft die selectief mee bewegen met één van de aanwijsinrichtingen. In het voorbeeld van FIG. 58 omvatten de drie zichtbare objecten twee bitmaps met een zwarte pijl en één bitmap met een witte pijl, waarbij de witte pijl boven de zwarte pijlen gelegen is.
In FIG. 59{b} wordt de eerste aanwijsinrichting bewogen.
In FIG, 59{(b} wordt de tweede aanwijsinrichting bewogen.
FIG. 59{c) is een schematische voorstelling van een zogenoemde "Z-orde" van vensters of beeldvlakken en een “cursorvlak" zoals gebruikt kan worden in het computersysteem van FIG. 59(a). Dit behoeft geen verdere uitleg.
In de tweehandige modus Tweek volgen de twee zwarte pijlen 5905L, 5905R ten allen tijde bewegingen van de aanwijsinrichtingen M1, M2. Deze bitmaps bevinden zich dus in hoofdzaak op de hoger genoemde aanwijsposities posR, posL (ook eerste en tweede positie genoemd). De bitmap met de witte cursor is de "native muiscursor", en in de tweehandige modus Tweek verspringt deze van de ene naar de andere positie, afhankelijk van welke aanwijsinrichting het laatst werd bewogen of bediend.
De twee objecten kunnen eveneens "muispointers" genoemd worden, maar om een onderscheid te maken met de native muiscursor worden ze misschien beter "passieve muispointers" genoemd.
Een voordeel van deze uitvoeringsvorm met drie zichtbare en beweegbare objecten of muispointers of muiscursoren is dat de gebruiker ten allen tijde de twee aanwijsposities ziet {in het voorbeeld van hierboven: de zwarte pijlen}, en dat hij ook duidelijk ziet waar de "native muiscursor" zich bevindt.
Hij zal dan ook zien dat de native muiscursor niet verspringt wanneer bv. de linkerknop M1B1 van de rechtermuis M1 is ingedrukt, bv. tijdens het slepen met de rechtermuis, en zal vanzelf begrijpen dat het blijkbaar niet toegelaten is tegelijk met de linkermuis te klikken. Eventueel kan ook een foutboodschap getoond worden {zoals hoger uitgelegd), maar dat is niet strikt noodzakelijk.
Maar uiteraard is de uitvinding niet beperkt tot drie bitmaps waaronder de native muiscursor, die van gedaante kan wisselen, afhankelijk van de onderliggende component of applicatie, en twee bitmaps met elk een zwarte pijl, maar uiteraard kan ook een bitmap met een blauwe of rode pijl getoond worden, of een voorwerp met een andere vorm, bv. een hand, en het is ook mogelijk dat deze twee bitmaps eveneens van gedaante wisselen afhankelijk van de onderliggende component of applicatie. In een uitvoeringsvorm is de native muiscursor en zijn de twee andere bitmaps ondoorzichtig, maar deze twee andere bitmaps kunnen ook semi-transparant zijn.
Maar uiteraard zijn andere voorstellingswijzen eveneens mogelijk.
FIG. 59(d} en FIG. 59{e} tonen twee bitmaps die eveneens gebruikt kunnen worden.
Tenslotte, hoewel individuele kenmerken zijn uitgelegd in verschillende tekeningen en in verschillende uitvoeringsvormen van de onderhavige uitvinding, is het mogelijk dat kenmerken van verschillende uitvoeringsvormen gecombineerd worden, zoals voor de vakman logisch zou zijn bij het lezen van dit document.
Hoewel de onderhavige uitvinding wordt uitgelegd voor systemen die slechts twee aanwijsinrichtingen hebben, zal de onderhavige uitvinding ook werken met meer dan twee aanwijsinrichtingen verbonden met dezelfde computer, bijvoorbeeld met drie aanwijsinrichtingen.

Claims (23)

Conclusies:
1. Een computer-geïmplementeerde werkwijze (5000) voor het ondersteunen van twee aanwijsinrichtingen in een computerinrichting (4501) waaraan een eerste aanwijsinrichting (4503R) en een tweede aanwijsinrichting (4503L) aangesloten is, en die een besturingssysteem (4560) met een grafische gebruikersinterface uitvoert, waarbij het besturingssysteem een native muiscursor verschaft, waarbij de werkwijze de stappen omvat van: b) het toelaten of configureren (5002) dat het besturingssysteem (4560) met de grafische gebruikersinterface de native muiscursor verschaft als een zichtbaar voorwerp (705); d) het verschaffen van een berichtenverwerker (4552; 4652} voor het verwerken van ruwe inputberichten, en het configureren {5004} van het besturingssysteem (4560; 4660} om ruwe inputberichten afkomstig van de eerste en de tweede aanwijsinrichting (4503R, 4503L) te verzenden naar deze berichtenverwerker; e) het bijhouden en/of aanpassen (5005) van een eerste positie {Posl) in overeenstemming met bewegingen van de eerste aanwijsinrichting {4503R), en het aanpassen van een tweede positie {Pos2} in overeenstemming met bewegingen van de tweede aanwijsinrichting {4503L); f} het aanpassen {5006} van een positie van de native muiscursor {705} in overeenstemming met bewegingen van de eerste of de tweede aanwijsinrichting (4503R, 4503L) die het meest recent bewogen en/of bediend werd; g) het detecteren (5007) of de ruwe inputberichten een bewegingssequentie volgens een vooraf bepaald formaat vormen of omvatten, en bij detectie van zulke bewegingssequentie: - het bepalen welke aanwijsinrichting (4503R, 4503L) deze bewegingssequentie veroorzaakt heeft; en - het verplaatsen van de native muiscursor (705) naar de bijgehouden of aangepaste positie (Post, Pos2) geassocieerd met de aanwijsinrichting (4503R, 4503L} die de bewegingssequentie veroorzaakt heeft; en - het versturen van minstens één commando gekozen uit de groep bestaande uit een knop-ingedrukt-commando, een knop-losgelaten commando, een scrol-omhoog- commando en een scrol-omlaag-commando naar het besturingssysteem (4560; 4660) overeenkomstig de gedetecteerde bewegingssequentie.
2. Een computer-geïmplementeerde werkwijze (5000) volgens conclusie 1, die verder de stap omvat van: a) het verschaffen (5001) van een grafisch overlayvenster (584).
3. Een computer-geïmplementeerde werkwijze (5000) volgens conclusie 2, waarbij in stap a) een grafisch overlayvenster (584) wordt verschaft als een in hoofdzaak schermvullend venster dat hoofdzakelijk bestaat uit volledig transparante pixels;
en/of waarbij de werkwijze verder de stap omvat van: c) het configureren (5003) van het grafisch overlayvenster (584} in doorkiikmodus. 4, Een computer-geïmplementeerde werkwijze (5000) volgens conclusie 2 of 3, waarbij in stap a} een grafisch overlayvenster wordt verschaft dat minstens één zichtbaar voorwerp (706R; 806; 906; 1006) omvat; en waarbij stap f) verder het aanpassen van een positie van dat zichtbaar voorwerp omvat op de andere positie (Pos2; Posl} uit de eerste en tweede positie (Pos1, Pos2) dan de positie ingenomen door de native muiscursor.
5. Een computer-geimplementeerde werkwijze (5000) volgens conclusie 2 of 3, waarbij in stap a) een grafisch overlayvenster wordt verschaft dat minstens een eerste zichtbaar voorwerp (706R; 806; 906; 1006) en een tweede zichtbaar voorwerp (7061) omvat; en waarbij stap f) verder het aanpassen omvat van een positie van het eerste zichtbaar voorwerp (706R) op basis van de eerste positie (Pos1}, en het aanpassen van een positie van het tweede zichtbaar voorwerp {706L) op basis van de tweede positie (Pos2).
6. Een computer-geïmplementeerde werkwijze (5000) volgens één der voorgaande conclusies, waarbij elk van de bewegingssequenties een reeks van twee tot twintig verplaatsingen omvat, of een reeks van drie tot tien verplaatsingen omvat.
7. Een computer-geïmplementeerde werkwijze volgens één der voorgaande conclusies, waarbij een cumulatieve verplaatsing van de bewegingssequenties een nul-verplaatsing is.
8. Een computer-geïmplementeerde werkwijze volgens één der voorgaande conclusies, waarbij elk van de bewegingssequenties als laatste verplaatsing een nulverplaatsing (dx=0;dy=0} omvat.
9. Een computer-geïmplementeerde werkwijze volgens één der voorgaande conclusies, waarbij stap e) het aanpassen omvat van de eerste positie (Pos1} en van de tweede positie {Pos2) op basis van de ruwe inputberichten.
10. Een computer-geimplementeerde werkwijze volgens één der voorgaande conclusies, waarbij het besturingssysteem Windows 7 of Windows 10 is of een latere Windows versie van Microsoft Corporation,
of waarbij het besturingssysteem mac OS Sierra is of mac OS High Sierra of een latere mac OS versie van Apple inc, of waarbij het besturingssysteem Linux is.
11. Een computerprogrammaproduct dat uitvoerbare instructies bevat die de werkwijze volgens één der voorgaande conclusies uitvoert, wanneer ze worden uitgevoerd door een computerinrichting {4501; 4601) waaraan een eerste en een tweede aanwijsinrichting aangesloten is.
12. Een computer-geïmplementeerde werkwijze {5100; 52004; 5200b) voor het filteren van berichten afkomstig van ten minste twee aanwijsinrichtingen (4503L, 4503R; 4603L, 4603R), waarbij de werkwijze de volgende stappen omvat: a) het ontvangen (5101; 5201) van een bericht afkomstig van één der aanwijsinrichtingen; b} het nagaan {5102; 5202) of het ontvangen bericht een bewegingsbericht is, en zoja, het versturen (5103; 5203) van het bewegingsbericht; c}) het nagaan (5104; 5204) of het ontvangen bericht een knop-ingedrukt-bericht is, en zoja, het versturen (5105; 5205) van een eerste bewegingssequentie; d) het nagaan {5106;5206) of het ontvangen bericht een knop-losgelaten-bericht is, en zoja, het versturen (5107;5207)} van een tweede bewegingssequentie.
13. Een computer-geïmplementeerde werkwijze (5100; 52004; 5200b) volgens conclusie 12, die verder de stappen omvat van: e) het nagaan (5108; 5208} of het ontvangen bericht een scrol-omhoog-bericht is, en zoja, het versturen (5109; 5209) van een derde bewegingssequentie; f} het nagaan (5110; 5210) of het ontvangen bericht een scrol-omlaag-bericht is, en zoja, het versturen (5111; 5211) van een vierde bewegingssequentie.
14. Een computer-geïmplementeerde werkwijze (52004; 5200b} volgens conclusie 12 of 13, waarbij stap a) verder het bepalen {5201} omvat van welke aanwijsinrichting het bericht afkomstig is, en het bepalen van een tijdstip van ontvangst van dat bericht; en waarbij de werkwijze verder een stap omvat van het nagaan {5212} of slechts één aanwijsinrichting gebruikt werd gedurende minstens een vooraf bepaalde periode (AT), en zoja, het versturen van het bericht zonder omzetting naar een bewegingssequentie.
15. Een computerprogrammaproduct dat uitvoerbare instructies bevat die een werkwijze volgens één der conclusies 12 tot 14 uitvoert, wanneer ze worden uitgevoerd door een computerinrichting (4501; 4601) waaraan een eerste en een tweede aanwijsinrichting aangesloten is, en die een grafische gebruikersinterface omvat die een native muiscursor verschaft.
16. Een aanwijsinrichting (5303L, 5303R) omvattende: - een bewegingsdetectiemechanisme (2321) voor het detecteren van een twee-dimensionale beweging; - ten minste één knop (M1B1, M1B2) indrukbaar en loslaatbaar door een gebruiker; - een knopdetectiemechanisme {2322} voor het detecteren of de ten minste één knop wordt ingedrukt of wordt losgelaten; - een besturingseenheid (2324) verbonden met het bewegingsdetectiemechanisme (2321), en voorzien voor het versturen van een bewegingsbericht {mov2) wanneer een beweging wordt gedetecteerd; met het kenmerk, dat - de besturingseenheid {2324} verder aangepast is voor het verzenden van een eerste bewegingssequentie, wanneer gedetecteerd wordt dat de ten minste één knop wordt ingedrukt; en voor het verzenden van een tweede bewegingssequentie, wanneer gedetecteerd wordt dat de ten minste één knop wordt losgelaten.
17. Een aanwijsinrichting (5303L, 5303R) volgens conclusie 16, dat verder ten minste één scrolwiel omvat dat draaibaar is door een gebruiker; en - een scrolwiel-detectiemechanisme (2323) om te detecteren of het ten minste één scrolwiel gedraaid heeft; en - waarbij de besturingseenheid {2324} verbonden is met het scrolwiel-detectiemechanisme (2323); met het kenmerk dat de besturingseenheid (2324) verder geconfigureerd is voor het verzenden van een derde bewegingssequentie wanneer gedetecteerd wordt dat het scrolwiel omhoog wordt gedraaid; en waarbij de besturingseenheid verder geconfigureerd is voor het verzenden van een vierde bewegingssequentie wanneer gedetecteerd wordt dat het scrolwiel omlaag wordt gedraaid.
18. Een hub (5420) omvattende: - een eerste interface (Fig. 27: CON1; RFX1) om te communiceren met een eerste aanwijsinrichting (M1), en - een tweede interface {CON2; RFX2} om te communiceren met een tweede aanwijsinrichting (M2), en - een derde interface (CON3) om te communiceren met een computerinrichting (2701); - een besturingseenheid (2744; 2745) verbonden met de eerste interface voor het ontvangen van eerste berichten van de eerste aanwijsinrichting (M1), en verbonden met de tweede interface voor het ontvangen van tweede berichten van de tweede aanwijsinrichting (M2), en verbonden met de derde interface voor het verzenden van berichten naar de computerinrichting {2701}; gekenmerkt doordat de besturingseenheid (2744; 2745} aangepast is voor het uitvoeren van een werkwijze volgens één der conclusies 12 tot 14.
19. Een computerinrichting {4501; 4601; 5301; 5401), omvattende: - een besturingssysteem (4560; 4660; 5360; 5460} met een grafische gebruikersinterface die een native muiscursor (705) verschaft; en - een computerprogrammaproduct (4531; 4631; 5351; 5451) volgens conclusie 11.
20. Een computerinrichting {4501; 4601; 5300; 5400} volgens conclusie 19, verder omvattende: - een computerprogrammaproduct (4563; 4663) volgens conclusie 15.
21. Een computersysteem {4500; 4600; 5300; 5400), omvattende: - een computerinrichting (4501; 4601; 5301; 5401) volgens conclusie 19 of 20; - een eerste en een tweede aanwijsinrichting operationeel verbonden met de computerinrichting.
22. Een computersysteem (5300) volgens conclusie 21, waarbij de eerste en een de tweede aanwijsinrichting aanwijsinrichtingen (5303R, 5303L) zijn volgens conclusie 16 of 17.
23. Een computersysteem (5400) volgens conclusie 21, verder omvattende een hub (5420) volgens conclusie 18, operationeel verbonden tussen de computerinrichting {5400} en de eerste en tweede aanwijsinrichting {5403R; 5403L}.
NL2022858A 2019-04-03 2019-04-03 Werkwijze en inrichting en systeem met dubbele muis ondersteuning NL2022858B1 (nl)

Priority Applications (1)

Application Number Priority Date Filing Date Title
NL2022858A NL2022858B1 (nl) 2019-04-03 2019-04-03 Werkwijze en inrichting en systeem met dubbele muis ondersteuning

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
NL2022858A NL2022858B1 (nl) 2019-04-03 2019-04-03 Werkwijze en inrichting en systeem met dubbele muis ondersteuning

Publications (1)

Publication Number Publication Date
NL2022858B1 true NL2022858B1 (nl) 2020-10-08

Family

ID=73038477

Family Applications (1)

Application Number Title Priority Date Filing Date
NL2022858A NL2022858B1 (nl) 2019-04-03 2019-04-03 Werkwijze en inrichting en systeem met dubbele muis ondersteuning

Country Status (1)

Country Link
NL (1) NL2022858B1 (nl)

Similar Documents

Publication Publication Date Title
BE1026980B1 (nl) Werkwijze en inrichting en systeem met dubbele muis ondersteuning
US10133396B2 (en) Virtual input device using second touch-enabled display
US9465457B2 (en) Multi-touch interface gestures for keyboard and/or mouse inputs
US10198154B2 (en) Translating user interfaces of applications
US7554522B2 (en) Personalization of user accessibility options
US20130132885A1 (en) Systems and methods for using touch input to move objects to an external display and interact with objects on an external display
US20120092253A1 (en) Computer Input and Output Peripheral Device
CN101238430A (zh) 具有运行时控制功能的虚拟放大镜
US20220221970A1 (en) User interface modification
EP3683659A1 (en) Method and device and system with dual mouse support
WO2019063496A1 (en) METHOD, DEVICE AND SYSTEM FOR PROVIDING DUAL MOUSE SUPPORT
NL2022858B1 (nl) Werkwijze en inrichting en systeem met dubbele muis ondersteuning
NL2022859B1 (nl) Werkwijze en inrichting en systeem met dubbele muis ondersteuning
CN110178108A (zh) 移动界面控件
NL2021697B1 (nl) Werkwijze en inrichting en systeem voor het verschaffen van dubbele muis ondersteuning
US20130205201A1 (en) Touch Control Presentation System and the Method thereof
US20200233504A1 (en) Method and device and system for providing dual mouse support
Baudisch et al. Drag-and-Pop: Accelerating Drag-and-Drop on Large Screens
Yang Blurring the boundary between direct & indirect mixed mode input environments
Denter PyMT: New and Advanced Interaction Widgets