NL2004670C2

NL2004670C2 - Werkwijze voor multimodale afstandsbediening.

Info

Publication number: NL2004670C2
Application number: NL2004670A
Authority: NL
Inventors: Ronald Alexander Brockmann
Original assignee: Activevideo Networks B V
Priority date: 2010-05-04
Filing date: 2010-05-04
Publication date: 2012-01-24
Also published as: WO2011139155A1; CA2797930A1; JP2013526232A; NL2004670A; US20130198776A1; IL222830A0; AU2011249132B2; EP2567545A1; KR20130061149A; BR112012028137A2

Description

1 1

WERKWIJZE VOOR MULTIMODALE AFSTANDSBEDIENING

De onderhavige uitvinding betreft een werkwijze voor het manipuleren van de weergave van beelden van een 5 beeldweergave en/of gebruikersinterface afkomstig van een beeldbron van een server op afstand en/of een opslagmedium op een lokale renderinginrichting middels een met een netwerk verbonden bedieningsinrichting, zoals een handheld inrichting, van een gebruiker die via een netwerkverbin-10 ding contact maakt met de server op afstand of de lokale renderinginrichting. Voorts betreft de onderhavige uitvinding een bedieningsinrichting, zoals een met een netwerk verbonden inrichting, zoals een handheld inrichting geschikt voor toepassing in een dergelijke werkwijze. Voorts 15 betreft onderhavige uitvinding een centrale server, een lokale renderinginrichting en een systeem. Voorts betreft onderhavige uitvinding computerprogrammatuur voor het uitvoeren van een dergelijke werkwijze.

Uit de internationale octrooiaanvraag met publica-20 tienummer WO 2008/044916 van dezelfde aanvrager als van dit document is een systeem bekend voor het middels een veelheid van individuele videostreams, op basis van bijvoorbeeld een videocodec aan decentrale gebruikers aanleveren van beeldinformatie. Hiertoe worden de beelden gege-25 nereerd op basis van bijvoorbeeld een veelheid van individuele applicaties die worden uitgevoerd op een centrale server, op basis waarvan in de centrale server individuele videostreams worden gegenereerd. Voorts kent deze octrooiaanvraag nog een aantal optimalisaties op dit algemene be-30 ginsel. De inhoud van deze octrooiaanvraag wordt hierbij in deze tekst ingevoerd geacht door middel van referentie voor het verschaffen van een gecombineerde beschrijving (disclosure) van alle afzonderlijke aspecten van deze eer- 2004670 ' '· 2 dere aanvraag in combinatie met afzonderlijke aspecten van deze huidige aanvraagtekst.

In het systeem uit de bovengenoemde aanvraag '916 wordt gebruikgemaakt van een afstandsbediening zoals be-5 kend bij een standaard set top box voor het direct aan de set top box aanleveren van instructies die aan de centrale server worden aangeleverd via de netwerkverbinding van de set top box. Een dergelijke afstandsbediening kent een groot aantal beperkingen voor wat betreft de bediening van 10 de gebruikersinterface.

Teneinde verbeteringen te verschaffen voor de bediening van de gebruikersinterface verschaft de onderhavige uitvinding een werkwijze voor het manipuleren van de weergave van beelden van een beeldweergave en/of gebrui-15 kersinterface afkomstig van een beeldbron van een server op afstand en/of een opslagmedium op een lokale rendering-inrichting middels een met een netwerk verbonden bedieningsinrichting, zoals een handheld inrichting, van een gebruiker die via een netwerkverbinding contact maakt met 20 de server op afstand of de lokale renderinginrichting, waarbij de werkwijze stappen omvat voor: - het door de server op afstand of de lokale renderinginrichting ontvangen van manipulatie-instructies die afkomstig zijn van bedieningsinrichting voorzien van mani- 25 pulatiesoftware geschikt voor het uitvoeren van de werkwijze aan de zijde van de bedieningsinrichting; - het op de centrale server en/of de lokale renderinginrichting verwerken van de manipulatie-instructies, en 30 - het vanaf de centrale server en/of de lokale renderinginrichting, voor uiteindelijke weergave op een weergave-inrichting zoals een TV of monitor, verzenden van ' 3 beeldinformatie ten behoeve van het weergeven van de beelden en/of de gebruikersinterface.

Een voordeel van een werkwijze volgens de onderhavige uitvinding is dat via een netwerkverbinding instruc-5 ties kunnen worden ontvangen vanaf de bedieningsinrichting. Hierdoor wordt het mogelijk om een relatief geavanceerde inrichting te gebruiken als bedieningsinrichting, zoals een meer algemeen bruikbare computerin-richting. Een dergelijke meer algemeen bruikbare computer-10 inrichting kent een relatieve rijkdom aan invoermogelijk-heden door de gebruiker, zoals een aanraakscherm, een be-wegingsdetector, et cetera. Door de onderhavige uitvinding werd het mogelijk een dergelijke relatieve rijkdom aan invoermogeli j kheden te verschaffen aan een gebruiker van een 15 systeem volgens de genoemde internationale octrooiaanvraag. Verder wordt het mogelijk om een dergelijke relatieve rijkdom aan invoermogelijkheden te verschaffen aan de gebruiker van een lokale renderinginrichting zoals een videorecorder, computer, mediaspeler, et cetera. Hiertoe 20 dient een dergelijke renderinginrichting te zijn voorzien van een netwerkverbinding voor ontvangst van de instructies. Op alternatieve wijze is het mogelijk een rechtstreekse onderlinge verbinding te verschaffen naar analogie van een bekende afstandsbediening middels bijvoorbeeld 25 een infrarood verbinding of een kabel.

Verder is het mogelijk om middels de rijkere invoermogeli j kheden gebruik te maken van een groot aantal interactieve applicaties, zoals games, chatten etc.

Volgens een eerste voorkeursuitvoeringsvorm omvat 30 een werkwijze volgens de onderhavige uitvinding stappen voor het genereren van videocodec operaties, zoals mpeg-operaties, op basis van de ingevoerde manipulatie-instructies, welke mpegoperaties worden gebruikt voor de 4 beeldweergave. In combinatie met videobewerkingsoperaties als die zijn beschreven in de genoemde publicatie van ' 916 is het mogelijk om de instructies toe te passen voor het op basis daarvan uitvoeren van de videocodec opera-5 ties. Hierdoor worden bewerkingen mogelijk op basis van de relatief rijke gebruikersinterface van de bedieningsinrichting. Voorbeelden hiervan zijn bijvoorbeeld zoombewer-kingen die kunnen worden uitgevoerd op basis van multi-touchinvoer of invoer van gestures.

10 In een verdere voorkeursuitvoeringsvorm omvat de werkwijze stappen voor het wijzigen van de weergave van de gebruikersinterface op basis van de manipulatie-instructies. Hiermee kan bijvoorbeeld worden genavigeerd door een menustructuur. Het is bijvoorbeeld mogelijk om 15 tussen twee menuschermen te schakelen door middel van het uitvoeren van een zijdelingse schuifbeweging over een aan-raakscherm. Het is echter ook mogelijk om een submenu item te selecteren en te activeren en daardoor over te schakelen naar een verdere menupagina.

20 Bij verdere voorkeur omvat de werkwijze beeldbe- werkingoperaties die operabel zijn binnen een videocodec zoals de toepassing van bewegingsvectoren en/of transla-tievectoren voor het realiseren van verplaatsingseffecten en/of zoomeffecten. Hierdoor wordt het op voordelige wijze 25 mogelijk om bijvoorbeeld uit een veelheid van kleine weergaven er een te selecteren, en deze vervolgens uit te vergroten tot beeldvullend. Vergelijk hier toe het gebruik van een fotopagina op het Internet. Indien een gebruiker middels een muis een van deze beelden selecteert wordt de-30 ze uitvergroot getoond op het beeldscherm. Middels de onderhavige uitvinding is het mogelijk om bijvoorbeeld in een gebruikersinterface negen foto's of bewegende videobeelden te tonen, waarvan de gebruiker er een selecteert 5 en deze vervolgens vergroot wordt weergegeven. Het is hier verder mogelijk om middels de genoemde zoombewerkingen het beeld geleidelijk in een vloeiende beweging te laten uitvergroten op basis van het al aanwezige relatief kleine 5 beeld. Vervolgens, wanneer het hoge resolutie groter beeld beschikbaar is vanaf de achterliggende dataopslag, wordt het beeld in hoge kwaliteit definitief getoond. Een dergelijke situatie kan zodanig worden getimed dat het voor de gebruiker lijkt alsof direct na klikken het beeld wordt 10 vergroot waardoor de ogenschijnlijke latency voor het ophalen van het achterliggende beeld met een hogere resolutie er niet lijkt te zijn.

Bij dergelijke beeldbewerkingsoperaties op basis van de manipulatieinstructies vanaf de bedieningsin-15 richting wordt bij verdere voorkeur gebruikgemaakt van in-tercoderen en intracoderen. Hierdoor kunnen uit '916 bekende beeldbewerkingsoperaties worden toegepast.

Voorts worden bij voorkeur manipulatie-instructies instructies toegepast die worden ingevoerd middels een 20 aanraakscherm, zoals schuifbewegingen voor scroll- instructies of slide-instructies, in- en uitzoombewegingen voor zoominstructies, welke instructies bij voorkeur worden gegenereerd middels multi-touch instructies. Hierdoor wordt een relatief grote rijkdom aan invoermogelijkheden 25 verschaft aan een gebruiker.

De instructies worden bij verdere voorkeur gegenereerd middels het bewegen van de bedieningsinrichting waarbij deze bewegingen registreerbaar zijn middels een bewegingsdetector of een zwaartekrachtdetector gerang-30 schikt in de bedieningsinrichting. Het is hierbij bijvoorbeeld mogelijk om bijvoorbeeld een niveau naar rechts te gaan in de menustructuur door middel van het naar de rechterzijde roteren van de bedieningsinrichting, of op alter- ' · 6 natieve wijze een niveau naar links te gaan in de menustructuur door middel van het aan de linkerzijde roteren van de bedieningsinrichting. Voorts wordt het bijvoorbeeld mogelijk om door middel van schudden van de bedieningsin-5 richting een bedieneffect naar keuze van de gebruiker te implementeren.

Bij verdere voorkeur omvatten de instructies tekstinvoer, spraakinvoer en/of beeldinvoer. Het wordt hierdoor bijvoorbeeld mogelijk om op eenvoudige wijze gro-10 tere hoeveelheden van tekstuele informatie in te voeren.

Bij een bekende afstandsbediening wordt tekst veelal ingevoerd door middel van het achtereenvolgens selecteren van letters middels een vier richtingen cursor toets. Dit is volgens de stand van de techniek zeer omslachtig en wordt 15 op effectieve wijze ondervangen middels een aspect van de onderhavige voorkeursuitvoeringsvorm.

Voor het verschaffen van een grotere veiligheid en identificatie van de gebruiker ten opzichte van de centrale server of de lokale renderinginrichting verschaft een 20 verdere uitvoeringsvormen stappen voor het onderling paren van de centrale server en/of de lokale renderinginrichting .

Dit wordt bij verdere voorkeur uitgevoerd door het door de centrale server en/of de lokale renderingin-25 richting naar het beeldscherm uitsturen van een code voor invoer daarvan in de bedieningsinrichting en het vanaf de bedieningsinrichting ontvangen van informatie op basis waarvan de invoer van de code kan worden geverifieerd.

Verdere wijzen voor het invoeren van data ten be-30 hoeve van het paren kunnen worden uitgevoerd middels tekstinvoer, gestures, motions, spraak en/of beeldinvoer.

Een verder aspect volgens de onderhavige uitvinding betreft een bedieningsinrichting, zoals een met een ' - 7 netwerk verbonden inrichting, zoals een handheld inrichting geschikt voor toepassing in een werkwijze volgens één of meer van voorgaande conclusies, omvattende: - een centrale verwerkingseenheid, tenminste een 5 geheugen en bij voorkeur een aanraakscherm en of een bewe-gingssensor, welke onderling verbonden zijn voor het vormen van een computerinrichting voor het uitvoeren van ma-nipulatiesoftware voor het genereren van manipulatiein-structies, 10 - de manipulatiesoftware voor het door de bedie ningsinrichting genereren van manipulatie-instructies voor het manipuleren van de beeldweergave en/of gebruikersinterface, - verzendmiddelen voor het middels een netwerk 15 vanaf de bedieningsinrichting naar de centrale server en/of de lokale renderinginrichting overbrengen van de manipulatie-instructies via de netwerkverbinding naar een centrale server en/of een lokale renderinginrichting.

Middels een dergelijke bedienrichting kunnen voor-20 delen worden behaald in samenwerking met een centrale server en of een lokale renderinginrichting zoals deze in het voorgaande zijn genoemd en zoals deze in het navolgende in grote detail worden beschreven.

Een verder aspect volgens de onderhavige uitvin-25 ding betreft een centrale server voor het streamen van een aantal parallelle gebruikerssessies (sessies) van ten minste één server naar ten minste één cliëntinrichting van een veelvoud aan cliëntinrichtingen voor het weergeven van de sessies op een aan een cliëntinrichting koppelbaar 30 beeldscherm, waarbij de sessies videodata en eventuele additionele data zoals audiodata omvatten, waarbij de centrale server ontvangstmiddelen omvat voor het vanaf een netwerkverbinding ontvangen van de instructies, en waarbij 8 de centrale server verwerkingsmiddelen omvat voor het verwerken van instructies omvattende tekstinvoer, gestures, motions, spraak en/of beeldinvoer.

Een verder aspect volgens de onderhavige uitvin-5 ding betreft een lokale renderinginrichting, zoals een videorecorder, computer, mediaspeler, voor het op een beeldscherm weergeven van een gebruikerssessie en/of video informatie waarbij de mediaspeler ontvangstmiddelen omvat voor het vanaf een netwerkverbinding ontvangen van de in-10 structies, en waarbij de centrale server verwerkingsmiddelen omvat voor het verwerken van instructies omvattende tekstinvoer, gestures, motions, spraak en/of beeldinvoer.

Een verder aspect volgens de onderhavige uitvinding betreft een systeem voor het streamen van een aantal 15 parallelle gebruikerssessies (sessies) van ten minste één server naar ten minste één cliëntinrichting van een veelvoud aan cliëntinrichtingen voor het weergeven van de sessies op een aan een cliëntinrichting koppelbaar beeldscherm, waarbij de sessies videodata en eventuele additio-20 nele data zoals audiodata omvatten, waarbij de centrale server ontvangstmiddelen omvat voor het middels een netwerkverbinding vanaf een veelheid van bedieningsinrichtingen ontvangen van de instructies met betrekking tot weergave op een respectievelijke cliënt, en waarbij de centra-25 le server verwerkingsmiddelen omvat voor het verwerken van instructies omvattende tekstinvoer, gestures, motions, spraak en/of beeldinvoer.

Een verder aspect volgens de onderhavige uitvinding betreft computerprogrammatuur voor het uitvoeren van 30 een werkwijze volgens een of meer van de voorgaande conclusies en/of voor gebruik in een centrale server, lokale renderinginrichting, bedieningsinrichting en/of systeem volgens een of meer van de voorgaande conclusies.

9

Dergelijke aspecten volgens de onderhavige uitvinding verschaffen respectievelijk voordelen zoals deze in het voorgaande zijn genoemd en zoals deze in het navolgende in grote detail worden beschreven.

5 Verdere voordelen, kenmerken en details van de on derhavige uitvinding zullen in het navolgende in groter detail worden beschreven aan de hand van een of meerdere voorkeursuitvoeringsvormen onder verwijzing naar de aangehechte figuren.

10 Fig. 1 betreft een schematische weergave van een voorkeursuitvoeringsvorm volgens de onderhavige uitvinding.

Fig. 2 betreft een weergave van de stand van de techniek (B) en een weergave volgens een voorkeursuitvoe-15 ringsvorm volgens de onderhavige uitvinding (A)

Een eerste voorkeursuitvoeringsvorm (Fig. 1) volgens de onderhavige uitvinding betreft een mobiele computer 100. Deze is soortgelijk aan bijvoorbeeld een mobiele telefoon. De mobiele computer 100 omvat een beeldscherm 41 20 dat bij voorkeur aanraak gevoelig is. Voorts omvat de mobiele computer vier bedienknoppen 42 die aan de onderzijde zijn gerangschikt. Tussen de bedienknoppen 42 bevindt zich een aanraakgevoelig oppervlak 43 voor navigatie. Aan de onderzijde bevindt zich voorts een microfoon 44 voor opna-25 me van geluiden, zoals stemgeluiden. De bovenzijde bevindt zich een luidspreker 46 voor het weergeven van geluiden. Naast de luidspreker 46 bevindt zich een camera voor het opnemen van beelden. Tevens bevindt zich aan de achterzijde een camera (niet getoond) voor eveneens opnemen van 30 beelden. De beelden worden via de set top box 3 of de ren-deringinrichting 3 verder geleid naar de televisie 20.

Tot zover is een op zichzelf bekende mobiele computer, zoals een mobiele telefoon of een PDA beschreven.

10

Volgens de onderhavige uitvinding wordt deze mobiele computer voorzien van een software applicatie voor het registreren van invoer ten behoeve van de onderhavige uitvinding, en het middels een netwerkverbinding verzenden van 5 dergelijke invoer. Hiertoe is de software applicatie voorzien van verbindingsmiddelen voor het maken van een verbinding met de netwerktoegangsmiddelen van de mobiele computer. Hiermee wordt toegang verkregen tot bijvoorbeeld een draadloos netwerk dat in verbinding staat met het In-10 ternet 19 of dat een op zichzelf staand draadloos netwerk is. Op alternatieve wijze is vanzelfsprekend ook een vast netwerk mogelijk. Op alternatieve wijze is het ook mogelijk dat het draadloze netwerk een mobiel netwerk is dat wordt uitgebaat door een mobiele netwerk operator.

15 De mobiele inrichting heeft via het netwerkverbin ding met ofwel de server 101 ofwel de lokale renderingin-richting 3. De server 101 kan eveneens een schematische weergave zijn voor de onderdelen 5, 4, 102, 103 volgens Fig. 2. Fig. 2B is dezelfde weergave als figuur 9 uit het 20 geciteerde document '916. Figuur A toont als wijziging het verloop van het retourtrajeet van de afstandsbediening die wordt uitgevoerd door de mobiele computer 100. De retour-traject verloopt via het internet 19 (zoals is getoond in figuur 1) rechtstreeks vanaf de mobiele computer naar de 25 server 102. Hierbij kan (niet getoond) parallel nog gebruikgemaakt worden van de standaardafstandbediening van de set top box 3. Dit kan echter ook worden uitgeschakeld.

De bedieningsinformatie die de mobiele computer 100 naar de server 102 (die deel uitmaakt van server 101 30 van Fig. 1) verzendt is volgens de onderhavige uitvinding verrijkt met de genoemde invoermogelijkheden met betrekking tot tekstinvoer, gestures, motions, spraak en/of beeldinvoer.

11

Hierdoor wordt een veelheid van versnelde bedie-ningsmogelijkheden mogelijk die middels de standaard afstandsbediening met knoppen niet mogelijk zou zijn. Middels bijvoorbeeld de gestures en de motions wordt het mo-5 gelijk om snelheid aan te geven van de beweging. Hierdoor kan een gebruiker op dynamische wijze bepalen hoe snel een handeling wordt uitgevoerd, of bijvoorbeeld hoeveel informatie er wordt gescrold tijdens het uitvoeren van één enkele beweging. Voorts wordt het mogelijk om het beeld te 10 roteren door bijvoorbeeld het beschrijven van een cirkel op het aanraakscherm of bijvoorbeeld het roteren van twee vingertoppen op het beeldscherm. Een verder voorbeeld is dat het aantal vingertoppen dat tegelijkertijd het beeldscherm bedient bepalend is voor welke functie wordt aange-15 roepen.

Voor het verzenden van de instructies vanaf de mobiele inrichting naar de server 1 wordt gebruikgemaakt van algemene internet technologie, zoals http. De applicatie op de mobiele computer zet de aanrakingen op het aanraak-20 scherm om naar parameters die van belang zijn voor de gebruikersinterface die wordt weergegeven op het beeldscherm 20. Voor het uitvoeren van de schuifbeweging op het beeldscherm wordt er gebruikgemaakt van de parameter "swi-pe=true" en voor de snelheid van de beweging van de para-25 meter "velocity=V" waarbij V een waarde is voor de snelheid. Op soortgelijke wijze zijn verdere parameters zoals knijpen voor het zoomen, een rotatiebeweging voor het roteren en tekst voor tekstinvoer voorzien.

Voorbeelden die worden gebruikt zijn als volgt.

30 Een instructie is vormgegeven als een er wel voor het bereiken van de server, het verschaffen van een identificatie en het verschaffen van een instructie.

12

Een instructie voor het van een gebruiker aan de server doorgeven van een pijl omhoog instructie luidt als volgt: http://sessionmanager/key?clientid=avplay&key=up.

Een instructie om een soortgelijke handeling uit 5 te voeren door middel van een opwaartse schuifbeweging op het aanraakscherm van de mobiele computer luidt als volgt: http://sessionmanager/key?clientid=avplay&key=up&swipe=tru e&velocity=3.24 hiermee wordt aangegeven dat opwaarts bewogen dient te worden met een snelheid 3, 24. Hiermee 10 wordt bereikt dat de gewenste snelheid eveneens wordt weergegeven door de userinterface. De gebruiker kan door herhaald gebruik leren welke snelheid welk praktisch effect oplevert. Op alternatieve wijze is het mogelijk om door de gebruiker individuele voorkeursinstellingen te la-15 ten instellen.

Een instructie om uit te zoomen om een deel van het beeld te verkleinen is als volgt: http://sessionmanager/event?clientid=avplay&event-onscale& scale=2.11 hiermee wordt bereikt dat met een factor 2.11 20 een knijpbeweging op het beeld wordt uitgevoerd waardoor het deel van het beeld dat was geselecteerd wordt verkleind. Op omgekeerde wijze kan met een dergelijke functie worden ingezoomd.

Indien een gebruiker tekst wil invoeren in de ge-25 bruikersinterface kan de volgende functie worden gebruikt: http://sessionmanager/event?clientid=avplay&event=onstring &text=bladibla hiermee wordt de tekstwaarde "bladibla" in de gebruikersinterface gebruikt voor bijvoorbeeld het geven van een naam aan een foto of video fragment. Doordat 30 tekstinvoer mogelijk wordt is het volgens de uitvinding ook mogelijk om bijvoorbeeld chatapplicaties te gebruiken met een dergelijk systeem.

13

Het paren van een mobiele inrichting met de server op afstand of lokale renderinginrichting kan worden uitgevoerd doordat de server op het beeldscherm een code weergeeft, welke code wordt ingevoerd op de mobiele computer 5 middels bijvoorbeeld tekstinvoer. Nadat de code is herkend als authentiek kan de gebruiker de mobiele computer gebruiken voor het manipuleren van de sessie waartoe hij rechten heeft. Op alternatieve wijze is het mogelijk om paren door bijvoorbeeld op het beeldscherm een code te to-10 nen die door middel van een van de camera's van de mobiele computer wordt opgenomen. De code kan vervolgens middels een challenge worden doorgezonden naar de server op afstand en/of de lokale renderinginrichting voor het effectueren van de authenticiteit van de gebruiker van de mo-15 biele computer. Het paren verschaft verder als voordeel dat extra veiligheid wordt verschaft zodat ook instructies kunnen worden toegepast voor bijvoorbeeld het aanschaffen van video ondemand of andere betaaldiensten, zoals games.

Hierbij wordt nogmaals aangegeven dat de onderha-20 vige uitvinding specifiek veranderd is voor toepassing in een systeem volgens ' 916. De vakman van het gebied zal de onderhavige beschrijving in het licht van de beschrijving van dit document, en in combinatie met afzonderlijke aspecten van de beide documenten duidelijk kunnen interpre-25 teren. Als voorbeeld is Fig. 2 B opgenomen als kopie van Fig. 9 van ' 916. Verdere delen van de beschrijving van dit oudere document zijn eveneens geacht te zijn opgenomen in het onderhavige document teneinde deel uitmaken van de beschrijving (disclosure) van dit document. Het doel van 30 deze uitgebreide en gedetailleerde verwijzing is het besparen van tekstuele beschrijvingen. Ook alle figuren van ' 916 zijn geacht te zijn opgenomen in dit document, afzonderlijk en in combinatie met alle afzonderlijke aspec- 14 ten van de beschrijving van het onderhavige nieuwe document .

In het voorgaande is de onderhavige uitvinding beschreven aan de hand van enkele voorkeursuitvoeringsvor-5 men. Verschillende aspecten van verschillende uitvoeringen worden beschreven geacht in combinatie met elkaar waarbij alle combinaties die bij lezing door een vakman van het vakgebied op basis van dit document door een vakman binnen het begrip van de uitvinding vallen beschouwd worden te 10 zijn meegelezen. Deze voorkeursuitvoeringsvormen zijn niet beperkend voor de beschermingsomvang van dit document. De gevraagde rechten worden bepaald in de aangehechte conclusies.

2 00 4 6 70

Claims

1. Werkwijze voor het manipuleren van de weergave van beelden van een beeldweergave en/of gebruikersinterfa- 5 ce afkomstig van een beeldbron van een server op afstand en/of een opslagmedium op een lokale renderinginrichting middels een met een netwerk verbonden bedieningsinrichting, zoals een handheld inrichting, van een gebruiker die via een netwerkverbinding contact maakt met de server 10 op afstand of de lokale renderinginrichting, waarbij de werkwijze stappen omvat voor: - het door de server op afstand of de lokale renderinginrichting ontvangen van manipulatie-instructies die afkomstig zijn van bedieningsinrichting voorzien van mani- 15 pulatiesoftware geschikt voor het uitvoeren van de werkwijze aan de zijde van de bedieningsinrichting; - het op de centrale server en/of de lokale renderinginrichting verwerken van de manipulatie-instructies, en 20. het vanaf de centrale server en/of de lokale renderinginrichting, voor uiteindelijke weergave op een weergave-inrichting zoals een TV of monitor, verzenden van beeldinformatie ten behoeve van het weergeven van de beelden en/of de gebruikersinterface. 25

2. Werkwijze volgens conclusie 1 omvattende stappen voor het genereren van videocodec operaties, zoals mpegoperaties, op basis van de ingevoerde manipulatie-instructies, welke mpegoperaties worden gebruikt voor de 30 beeldweergave. 2004670

3. Werkwijze volgens conclusie 1 of 2 omvattende stappen voor het wijzigen van de weergave van de gebruikersinterface op basis van de manipulatie-instructies.

4. Werkwijze volgens één of meer van de voorgaande conclusies omvattende beeldbewerkingoperaties die operabel zijn binnen een videocodec zoals de toepassing van bewe-gingsvectoren en/of translatievectoren voor het realiseren van verplaatsingseffecten en/of zoomeffecten. 10

5. Werkwijze volgens één of meer van voorgaande conclusies omvattende beeldbewerkingsoperaties op basis van de manipulatieinstructies vanaf de bedieningsinrichting onder toepassing van intercoderen en intracode- 15 ren.

6. Werkwijze volgens een of meer van de voorgaande conclusies waarbij de manipulatie-instructies instructies omvatten die worden ingevoerd middels een aanraakscherm, 20 zoals schuifbewegingen voor scroll-instructies of slide-instructies, in- en uitzoombewegingen voor zoominstruc-ties, welke instructies bij voorkeur gegenereerd middels multi-touch instructies.

7. Werkwijze volgens één of meer van de voorgaande conclusies waarbij de instructies worden gegenereerd middels het bewegen van de bedieningsinrichting waarbij deze bewegingen registreerbaar zijn middels een bewegingsdetec-tor of een zwaartekrachtdetector gerangschikt in de bedie- 30 ningsinrichting.

8. Werkwijze volgens een of meer van de voorgaande conclusies waarbij de instructies tekstinvoer, spraakin-voer en/of beeldinvoer omvatten.

9. Werkwijze volgens een of meer van de voorgaande conclusies omvattende stappen voor het onderling paren van de centrale server en/of de lokale renderinginrichting.

10. Werkwijze volgens conclusie 9 omvattende stap- 10 pen voor het door de centrale server en/of de lokale renderinginrichting naar het beeldscherm uitsturen van een code voor invoer daarvan in de bedieningsinrichting en het vanaf de bedieningsinrichting ontvangen van informatie op basis waarvan de invoer van de code kan worden geverifi- 15 eerd.

11. Werkwijze volgens conclusie 9 of 10 waarbij de invoer in de bedieningsinrichting kan worden uitgevoerd middels tekstinvoer, gestures, motions, spraak en/of 20 beeldinvoer.

12. Werkwijze volgens één of meer van de voorgaande conclusies omvattende instructies voor het selecteren van een item in een userinterface, en/of voor het active- 25 ren van het geselecteerde item, bij voorkeur verder omvattende instructies voor het beeldmatig uitvergroten van het geselecteerde item.

13. Werkwijze volgens conclusie 12 waarbij tijdens 30 het uitvergroten beeldinformatie met een hogere resolutie wordt teruggehaald uit een datastore, terwijl op basis van de eerder in de gebruikersinterface aanwezige kleine beeldinformatie een zoomrendering wordt uitgevoerd.

14. Werkwijze volgens conclusie 13 waarbij tijdens het uitvoeren van de zoomrendering op basis van teruggehaalde hoge resolutie informatie een relatief hoogkwalita- 5 tieve zoomrendering wordt uitgevoerd die wordt weergegeven zodra deze beschikbaar is in plaats van de zoomrendering op basis van de kleine beeldinformatie.

15. Bedieningsinrichting, zoals een met een net-10 werk verbonden inrichting, zoals een handheld inrichting geschikt voor toepassing in een werkwijze volgens één of meer van voorgaande conclusies, omvattende: - een centrale verwerkingseenheid, tenminste 1 geheugen en bij voorkeur een aanraakscherm en of een bewe- 15 gingssensor, welke onderling verbonden zijn voor het vormen van een computerinrichting voor het uitvoeren van ma-nipulatiesoftware voor het genereren van manipulatiein-structies, - de manipulatiesoftware voor het door de bedie-20 ningsinrichting genereren van manipulatie-instructies voor het manipuleren van de beeldweergave en/of gebruikersinterface, - verzendmiddelen voor het middels een netwerk vanaf de bedieningsinrichting naar de centrale server 25 en/of de lokale renderinginrichting overbrengen van de manipulatie-instructies via de netwerkverbinding naar een centrale server en/of een lokale renderinginrichting.

16. Centrale server voor het streamen van een aan-30 tal parallelle gebruikerssessies (sessies) van ten minste één server naar ten minste één cliëntinrichting van een veelvoud aan cliëntinrichtingen voor het weergeven van de sessies op een aan een cliëntinrichting koppelbaar beeld- scherm, waarbij de sessies videodata en eventuele additionele data zoals audiodata omvatten, waarbij de centrale server ontvangstmiddelen omvat voor het vanaf een netwerkverbinding ontvangen van de instructies, en waarbij de 5 centrale server verwerkingsmiddelen omvat voor het verwerken van instructies omvattende tekstinvoer, gestures, motions, spraak en/of beeldinvoer.

17. Lokale renderinginrichting, zoals een videore-10 corder, computer, mediaspeler, voor het op een beeldscherm weergeven van een gebruikerssessie en/of video informatie waarbij de mediaspeler ontvangstmiddelen omvat voor het vanaf een netwerkverbinding ontvangen van de instructies, en waarbij de centrale server verwerkingsmiddelen omvat 15 voor het verwerken van instructies omvattende tekstinvoer, gestures, motions, spraak en/of beeldinvoer.

18. Systeem voor het streamen van een aantal parallelle gebruikerssessies (sessies) van ten minste één 20 server naar ten minste één cliëntinrichting van een veelvoud aan cliëntinrichtingen voor het weergeven van de sessies op een aan een cliëntinrichting koppelbaar beeldscherm, waarbij de sessies videodata en eventuele additionele data zoals audiodata omvatten, waarbij de centrale 25 server ontvangstmiddelen omvat voor het middels een netwerkverbinding vanaf een veelheid van bedieningsinrichtingen ontvangen van de instructies met betrekking tot weergave op een respectievelijke cliënt, en waarbij de centrale server verwerkingsmiddelen omvat voor het verwerken van 30 instructies omvattende tekstinvoer, gestures, motions, spraak en/of beeldinvoer.

19. Computerprogrammatuur voor het uitvoeren van een werkwijze volgens een of meer van de voorgaande conclusies en/of voor gebruik in een centrale server, lokale renderinginrichting, bedieningsinrichting en/of systeem 5 volgens een of meer van de voorgaande conclusies 1k rk -k je 2004670