NO341403B1 - Hjelpemiddelsystem for synshemmede - Google Patents
Hjelpemiddelsystem for synshemmede Download PDFInfo
- Publication number
- NO341403B1 NO341403B1 NO20120207A NO20120207A NO341403B1 NO 341403 B1 NO341403 B1 NO 341403B1 NO 20120207 A NO20120207 A NO 20120207A NO 20120207 A NO20120207 A NO 20120207A NO 341403 B1 NO341403 B1 NO 341403B1
- Authority
- NO
- Norway
- Prior art keywords
- camera
- visual material
- magnification
- image
- user
- Prior art date
Links
- 230000001771 impaired effect Effects 0.000 title claims description 18
- 239000000463 material Substances 0.000 claims description 22
- 230000000007 visual effect Effects 0.000 claims description 20
- 238000003384 imaging method Methods 0.000 claims description 2
- 230000006870 function Effects 0.000 description 17
- 230000004438 eyesight Effects 0.000 description 8
- 239000003086 colorant Substances 0.000 description 4
- 238000012360 testing method Methods 0.000 description 3
- 241000724254 Cowpea chlorotic mottle virus Species 0.000 description 2
- 239000003550 marker Substances 0.000 description 2
- 230000002093 peripheral effect Effects 0.000 description 2
- 210000001747 pupil Anatomy 0.000 description 2
- 201000009487 Amblyopia Diseases 0.000 description 1
- 241000413334 Epiphanes Species 0.000 description 1
- 208000010415 Low Vision Diseases 0.000 description 1
- 206010025421 Macule Diseases 0.000 description 1
- 206010034960 Photophobia Diseases 0.000 description 1
- 208000007014 Retinitis pigmentosa Diseases 0.000 description 1
- 206010047571 Visual impairment Diseases 0.000 description 1
- 239000008186 active pharmaceutical agent Substances 0.000 description 1
- 230000006978 adaptation Effects 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 230000006735 deficit Effects 0.000 description 1
- 230000007850 degeneration Effects 0.000 description 1
- 230000009977 dual effect Effects 0.000 description 1
- 208000013469 light sensitivity Diseases 0.000 description 1
- 230000004303 low vision Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000009877 rendering Methods 0.000 description 1
- 230000008054 signal transmission Effects 0.000 description 1
- 208000029257 vision disease Diseases 0.000 description 1
- 230000004382 visual function Effects 0.000 description 1
- 230000004393 visual impairment Effects 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/80—Camera processing pipelines; Components thereof
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09B—EDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
- G09B21/00—Teaching, or communicating with, the blind, deaf or mute
- G09B21/001—Teaching or communicating with blind persons
- G09B21/008—Teaching or communicating with blind persons using visual presentation of the information for the partially sighted
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/02—Viewing or reading apparatus
- G02B27/022—Viewing apparatus
- G02B27/027—Viewing apparatus comprising magnifying means
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/63—Control of cameras or camera modules by using electronic viewfinders
- H04N23/631—Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Educational Technology (AREA)
- Human Computer Interaction (AREA)
- Business, Economics & Management (AREA)
- Health & Medical Sciences (AREA)
- Theoretical Computer Science (AREA)
- Audiology, Speech & Language Pathology (AREA)
- General Health & Medical Sciences (AREA)
- Educational Administration (AREA)
- Optics & Photonics (AREA)
- Studio Devices (AREA)
- External Artificial Organs (AREA)
- Prostheses (AREA)
- Lock And Its Accessories (AREA)
- Diaphragms For Electromechanical Transducers (AREA)
Description
Denne oppfinnelsen angår et hjelpemiddelsystem til synshemmede ved anvendelse av et kamera og en skjerm for valgfri fremvisning av visuell informasjon lest av kameraet.
Det å være svaksynt kan forholdsvis lett uttrykkes i kvantitative former der det dreier seg om å se mer eller mindre. Eksempelvis kan man tenke seg at det normalt seende ser på en gitt avstand, må en svaksynt måtte gå inn på en betydelig kortere avstand for å se klart. Dette er en veldig forenklet måte å tenke svaksynthet på. Det finnes mange typer synshemminger som bringer den enkelte inn i kategorien svaksynt. Eksempelvis Macula Degenerasjon som gradvis fjerner sentrale synsdeler (skarpsynet) her vil man ha behov for og pedagogisk bruke kamera til å forstørre slik at teksten blir lesbar i perifere synsdeler. En annen vanlig synsproblematikk er Retinitis Pigmentosa som fortoner seg temmelig motsatt der perifere synsdeler forsvinner først. Her kan man også ha glede av en viss forstørrelse, men blir det for stort trekker skriften ut av synsfeltet. Her kan det ofte være det at teksten lyser og kan manipuleres i forhold til kontrast og farge være vel så viktig som størrelsen. I tillegg finnes andre synsdiagnoser som gir delvisvise synsfelt utfall og lysømfintlighet med mer. Her vil det å kunne invertere fargene slik at øyet ikke får så mye hvitt lys (blå frekvens), være nyttig funksjonalitet. Det vi ser er at svaksynthet i aller høyeste grad er en kvalitativ funksjonsnedsettelse.
Den tradisjonelle CCTV som bruker et videokamera og en skjerm har over tid utviklet seg til å inneha en del standard funksjonalitet som eksempelvis manipulering av størrelse, lys, kontrast, farger, invertering med mer.
Tradisjonelle løsninger kan enkelt beskrives som et nærkamera som filmer lesestoff som legges under, der bilde kan manipuleres vedrørende størrelse, kontrast, farger mm. Dette bildet projekteres via kabel til elevens pc og manipuleres gjennom et kontrollpanel. Dette kan også suppleres med avstandskamera som kombineres mot PC på samme måte gjennom kabler (CCMV). Dette gir begrensninger vedrørende elevens plassering i klasserom med henhold til strømtilførsel, plass/ergonomi, samt at utstyret er stigmatiserende for eleven og selv bærbare løsninger innebærer en del oppkobling og nedkobling. Et annet eksempel på kjente løsninger er gitt i tysk patentsøknad nr DE 10 2010 015 977 Al som omtaler et system som tillater elevene å følge med på læreren. Det tillater imidlertid ikke en enkelt student å bruke utstyret for å se på sin egen arbeidsplass.
Det er dermed et formål med denne oppfinnelsen å frigjøre eleven slik at man kan oppnå optimale plasseringer i klasserommet. Det er også et formål å kunne minske mengden utstyr på den enkelte arbeidsplass slik at eleven kan sitte på vanlige skolepulter i et mindre segregerende miljø og sikres god ergonomi. Det har også vært et mål at eleven har minst mulig utstyr som skal kobles opp og ned.
Dette oppnås ved et system slik som beskrevet i de vedlagte kravene.
Fortrinnsvis er kameraet trådløst forbundet med resten av systemet for å gi maksimal frihet for eleven til å velge sin posisjon i salen. Dette krever et kamera som har tilstrekkelig oppløsning og mulighet for forstørrelse til å innfri krav til nærarbeid og tavlearbeid. Via en kraftig trådløs router koblet til kamera kan studenten logge seg på via IP-adressen til kameraet. Ved hjelp av tilpasninger som effektiv lagring av bildeposisjon og forstørrelse, effektiv lagring av bilde på maskinen, effektiv manipulering av lys og kontrast nivå, bytte mellom positiv og negativt bilde og effektiv styring av kamera kan dette brukes effektivt i for eksempel et klasserom. Det viktigste av alt har vært at dette skal kunne utføres fra tastaturet på elevens pc.
Oppfinnelsen vil bli beskrevet nedenfor med henvisning til den vedlagte tegningen, som illustrerer oppfinnelsen ved hjelp av et eksempel, som angitt i figur 1
Figur 1 viser skjematisk et mulig oppsett av systemet ifølge oppfinnelsen, der brukeren anvender en datamaskin 1. Denne er tilknyttet en egenutviklet programvaremodul 2 og en kontroller 3 innrettet til å styre systemet basert på signaler fra datamaskinen, basert på brukerens beskjed via et brukergranssnitt.
Ifølge den foretrukne utførelsen av oppfinnelsen formidles kontrollsignalene fra kontrolleren 3 via en trådløs router 4 til et kamera 5. Dette kameraet er innrettet til å kunne rettes inn mot en posisjon i rommet som brukeren, via brukergrensesnittet, indikerer på sin datamaskin. Kameraet vil fortrinnsvis ha tilstrekkelig oppløsning og forstørrelse til å kunne avbilde tekst eller bilder i den valgte posisjonen. Bildet som innhentes av kameraet 4 sendes via routeren til datamaskinen 1 for å vises frem for brukeren. Ifølge en foretrukket utførelse kan systemet dessuten kunne konvertere elemetner i bildesignalet via fra kameraet, for eksempel ved hjelp av OCR, til editerbar tekst som kan bearbeides av brukeren eller kan konverteres til tale via egnet program og lagres som lydfil.
Routeren 4 kan i tillegg være koblet til en videokilde 7 via en video-grabber 6 for å hente ut bildesignaler fra denne for fremvisning direkte på brukerens dataskjerm. Også her kan tekst konverteres fra bildeinformasjon til editerbar tekst. På den måten kan brukeren både vise frem tekst på skrivebordet eller andre steder i rommet på dataskjermen, og videosignalet som lærer eller foreleser viser på skjerm for hele klassen. Alt det innhentede signalet fra kamera og videograbber kan editeres og tilpasses brukerens behov.
De enktelte komponentene vist i tegningen vil bli beskrevet mer i detalj nedenfor.
Oppgave beskrivelser for de enkelte delene i systemet
Avlesning av kamera
Avlesning av kamera på næravstand og tavleavstand. PC søker opp trådløs router og formidler kameraets nettverk. Egnet programvare formidler styring av kamera og manipulering av bilde til trådløs router som igjen formidler det til kamera. Kamera utfører ønsket oppgave og sender bildet via nettverkskabel til router som overfører dette trådløst til nettverkskort på PC og så tilbake til programvaren som viser dette for bruker. To veis kommunikasjon mellom PC, programvare, router og kamera. Programvaren vil kunne være en kombinasjon av egenutviklet, som tilordningen av taster og kommandoer på datamaskinen til operasjoner i kameraet, og standardiserte
kommunikasjonsprotokoller for bruk i nettverk eller annen signaloverføring.
Programvare, manipuleringene og styringene av bildet som er lagt inn på tastatur kommando (hurtigtaster) muliggjør at et kamera som er bygget for overvåkning kan fungere som et pedagogisk hjelpemiddel for synshemmede.
Styringen av kameraet vil kunne gjennomføres manuelt ved hjelp av for eksempel piltaster til ønsket posisjon eller ved at enkelte posisjoner er definert i et koordinatsystem i rommet, slik at en indikert posisjon oversettes av kontrolleren til koordinater som i kameraets styringssystem indikerer hvor kameraplattformen skal rettes og eventuelt hvilken forstørrelse/brennvidde som skal velges for å gi et bilde av det ønskede området.
Disse koordinatene kan legges inn manuelt, velges ut etter at man har styrt kameraet til posisjonen og lagret dette, eller at man bruker/ har en markør og kontrollsystemet omfatter et søkesystem for å finne og lagre posisjonen til markøren. Lagrede posisjoner lagres i kamera.
Grabbing
PC sender beskjed via trådløs router til videograbber. Videograbber snapper bildet som står i enveis kommunikasjon fra smartboard/projektor mot videograbber gjennom VGA/DVI/HDMI kabel. Videograbber sender dette bildet gjennom nettverkskabel til trådløs router som formidler dette trådløst til PC som åpner dette i egnet programvare, eventuelt utviklet for formålet. For eksempel kan det åpnes i programmet VGA2Ethernet fra Epiphan , men andre løsninger kan også tenkes. Dette muliggjør at bildet som vanligvis vises på projektorer overføres direkte på elevens pc og manipuleres og forstørres her.
OCR
PC med tilhørende programvare sender beskjed via trådløs router til kamera at det skal tas et bilde. Bildet sendes via trådløs router tilbake til nettverkskort på PC. Bildet sendes til OCR modul programvaren som lagres og deretter OCR behandles av OCR modul innrettet til å legge frem teksten som tale og som kan lagre dette i egnet format, for eksempel som mp3-format. Lydfilen spilles av med Media Play er eller andre tilsvarende programmer. Denne kombinasjonen muliggjør at et kamera som er bygget for overvåkning fungerer som et opplesningsverktøy for synshemmede. Dette er funksjoner som kan integreres i den egenutviklede programvaren.
Følgende utstyr er brukt som komponenter for å lage egenutviklet system, med henvisning til figur 1 : 1. PC: Standard bærbar PC med kraftig prossessor (dual core eller Quad core, 1 GB minne på grafikk kort, min. 4 GB RAM, 500 MB harddisk). Det understrekes at her er det mulig med mange andre alternativer. 2. Egenutviklet programvare: Egenutviklet programvare som er laget på plattform både for Macintosh (OS X) og Microsoft Windows OS. Baserer seg på styring via kommunikasjon med kamera over TCP/IP adressene og protokollene. Funksjonskommandoer som er programmert til hurtigtaster er : bevege kamera, lys, kontrast, start/stopp av bilde, invertering av bilde, 9 forhåndsinnstilte posisjoner og zoom nivå, zoome inn og ut. Dette muliggjør rask og god styring for den synshemmede. I tillegg er det bygget inn modul for å endre farger i bildet og ta bilde med kamera og lagre dette direkte til egen bilde mappe. Videre er det støtte for OCR behandling og opplesning av dette bildet. Programvaren kan enten settes i egen tjener eller være implementert i datamaskinen 3 Kontroller: Kontrolleren vil angi posisjonene kameraet skal stilles inn på, ønsket forstørrelse osv. 4. Trådløs router: Dlink Dir615, WAN 2,4 - 2,4835 GHz, IEEE802.1 b/g/n. Hastighet opptil 300 Mbps. 4 LAN porter og 2 trådløse antenner..Systemet fungerer også på mindre kraftige routere, men er da mer følsomme for plassering i forhold til hvor PC er plassert. Det understrekes at her er det mulig med mange andre alternative trådløse routere. 5. Kamera: Eksempelvis 50hz PTZ Dome Network Camera, HDTV 720p med 1280x720 pixel oppløsning som leverer H.264 (optimaliserer båndbredde og lagring over nett uten tap av kvalitet i bilder). Kamera som er brukt under utprøving gir 18x optisk zoom og 12x digital zoom, Kan rotere 360 grader. Tilkobles egen strøm (High power over ethernet (High PoE) IEEE 802.3ar, max 30W 20-24V AC, max 23,6VA. 24-34VDC, max 17W. Koblinger: RJ-45 for 10baseT/100base-TX PoE.
Kameraet som benyttes må ha høy oppløsning for å kunne gjennomføre god kvalitativ OCR behandling. Det understrekes at her er det mulig med mange andre alternative kamera. 6. Video grabber: Trådløs videograbber blir koblet med nettverkskabel til trådløs router. Den tar bildene fra lærer pc via projektor og VGA/DVI kabel til videograbberen som sender VGA bildene over ethernet kabelen inn til den trådløse routeren. Bildet vises via programvaren til grabberen, som skal programmeres inn til egenutviklet programvare ved å lytte på den porten og protokollen som bildet blir sendt på. Videograbberen som er brukt under utprøving fanger og sender VGA, DVI og HDMI video kilder til ethernet opp til 60 bilder pr. sekund. I vår ønsket oppløsning på 1920x1080 klarer den en hastighet på opp til 36 bilder pr. sekund. Overføringen fra videograbberen skjer via RJ45 Gigabit Ethernet. Her vil det nok også være mulig med mange andre alternative videograbbere. 7. Projektor: Rommene der egenutviklet system kobles opp har ofte en projektor og denne er ofte en flaskehals med tanke på ønsket oppløsning. Standard er 1024x768, men mer moderne har 1920x1080. Projektoren viser lærerens databilde på stort lerret, skjerm eller smartboard. Vi kobler til enten en VGA splitter for å dele skjermsignalet, eller kobler til projektorens video out utgang for å sende dette bildet videre til videograbberen.
Funksjonene i egenutviklet programvare vedrørende manipulering av bilde virker som følger:
Øke og minke forstørrelse.
Den svaksynte elev vil ha ulike behov for forstørrelse avhengig av synsfunksjon og av lærestoffets størrelse. Det vil følgelig være viktig at eleven kan på enklest mulig måte justere dette selv. Vi har valgt å legge styring av all funksjonalitet til tastaturet av flere grunner.
For å gi nærhet til kontroll funksjon gjennom styring uten eksternt kontrollpanel.
For å gjøre utstyret «usynlig» for andre elever, slik at den svaksynte eleven kun trenger sin egen pc plassert på sin arbeidsplass. Dette vil gjøre utstyret betydelig mindre stigmatiserende, som dessverre har vært vår erfaring er årsak til dagens etablerte systemer ikke blir benyttet i adekvate situasjoner.
Det er også viktig at eleven slipper å «kjøre rundt» med kamera påjakt etter ønskede posisjoner og forstørrlesesnivåer. Derfor har vi lagt til en mulighet for lagring av begge deler noe som blir nærmere omtalt under tema lagring av forstørrelse og posisjoner. Vi har lagt disse funksjoner til følgende tastetrykk:
Øke forstørrelse: Q
Minke forstørrelse: W
Tastene Q og W er valgt med tanke på at ungdommene i dag bruker disse tastene under bruk av forskjellige dataspill der du nettopp zoomer inn og ut av hendelsene.
Endre posisjon
Det er viktig for den svaksynte og kunne avlese nærarbeid som bøker, notater samt avstandsmål som tavle, oppslagstavle, klokke, utgangsdør med mer. Dette har vi følgelig også til styring fra tastaturet. Også dette kan lagres noe som blir nærmere omtalt under tema lagring av forstørrelse og posisjoner. Vi har lagt disse funksjonene til følgende tastetrykk:
Tradisjonelle kameraløsninger vil kreve at eleven ikke sitter for nærme tavla da vinkelutslagene til høyre og venstre kan fort bli for store. Særlig gjelder dette kamerasystemer der du flytter vinkel manuelt. Det egenutviklede systemet muliggjør således en større radius i elevens for plassering i klasserommet. Da kamera kan stå bak eleven og innenfor en viss radius likevel fange elevens nærarbeid. Man bør også merke seg at man her ikke har noen begrensing i forhold til kamera som kan stå i veien ved eksempelvis håndarbeidet.
Lagring av forstørrelse og posisjoner
For raskere å kunne flytte mellom mye brukte posisjoner med adekvat forstrørrelsesnivå har vi utnyttet maksimalt kameraets muligheter til å lagre både posisjon og forstørrelsesnivå. Her har vi muligheten til å lagre opptil 9 forskjellige posisjoner/forstørrelsesnivåer, mens etablerte systemer har 3. Disse har vi også lagt til tastaturet av ovenfor beskrevede årsaksforhold.
Vi har lagt funksjonaliteten i tallrekken 1-9 for å lagre et bildepunkt stiller man først inn vinkel og deretter forstørrelsesnivå, når bilde oppleves som riktig for brukeren, kan det enkelt lagres med å holde ALT tasten nede samtidig trykker det tallet man ønsker å dette bildepunktet på. Eksempelvis:
Lagre bildepunkt 1: ALT 1
Det er viktig at eleven selv kan sette disse lagringspunktene på en enklest mulig måte da de ulike lagringspunktene kan variere forholdsvis ofte. Det kan variere fra lærer til lærer hvor på tavlen han eksemplifiserer. En bør også merke seg at eleven kan flytte plass ved for eksempel gruppearbeid og fokus ved nærarbeid må endres.
Lagringen av posisjon og forstørrelse lagres i minnet til kameraet og kalles opp igjen fra egenutviklet programvare via kameraets API.
Gå til bildepunkt
Denne funksjonen er også lagt til tastaturet. Man kaller opp de lagrede bildepunktene ved å trykke på det tallet som bildepunktet er tilknyttet. Eksempelvis:
Gå til bildepunkt 1: 1
Mange svaksynte har behov for å finstille kontrastnivå og lysnivå. Dette er funksjoner vi også har lagt inn på tastaturet.
Her har vi ikke laget lagring av nivået, da dette kan være innstillinger som av mange årsaker som eksempelvis omkringliggende belysning, arkets overflate med mer. Man kan raskt stille tilbake til utgangsposisjon ved å trykke bokstaven R (for Reset).
Reset bilde R
Stille til sort/hvit bilde
For å oppnå kontrasten mellom svart/hvit på alt som blir lest så har vi lagt inn i kameraets mulighet til å kjøre svart/hvit funksjon. Dette har vi lagt inn på tastaturet under bokstaven B. Gjentatte trykk veksler mellom svart/hvit bilde og farge bilde.
Svart/hvit bilde B
Livertering av bilde
Mange svaksynte vil oppleve forbedret visus og/eller utholdenhet ved invertering av bildet. Dette fordi kontrastnivået opprettholdes, men mengden høyfrekvent lys reduseres betraktlig. Vi har derfor lagt denne funksjonen inn i tastaturet på bokstaven i. Gjentatte trykk veksler mellom positivt og negativt bilde. Denne funksjonen fungerer både i farger og svart/hvit funksjon. Det vil som regel være mest funksjonelt i svart/hvit funksjonen.
Invertere bilde i
Ta bilde
Da mange elever vil ha glede av å kunne ta bilde fra eksempelvis tavle i stedet for å måtte notere selv, er dette en kameraets funksjonaliteter som vi har valgt å legge inn på tastaturet. Dette gjøres ved å trykke Ctrl og S. Bildet lagres automatisk med dato og klokkeslett som navn i mappen Mine bilder på elevens pc. Her kan man selv lage mappestrukturer som gjør det mer funksjonelt med tanke på fag og tidspunkt.
Ta bilde CTRL S
De fleste manipuleringsmuligheter vedrørende bilde er for så vidt vanlig ved andre kamerasystemer, men som hjelpemiddel for synshemmede vil vår egenutviklede system skille seg ut med flere lagringsvalg på posisjon og forstørrelse. Vårt egenutviklede system er i midlertidig mer enn et CCTV og CCMV i tradisjonell forstand. Vårt egenutviklede system vil kunne gjøre OCR av dokumenter og lese opp teksten høyt med lyd.
OCR
PC sender beskjed fra egenutviklet programvare via trådløs router til kamera at det skal tas et bilde. Bildet sendes via trådløs router tilbake til nettverkskort på PC. Bildet sendes til OCR modul i egenutviklet programvare som lagres og deretter OCR behandles av OCR modul med norsk tale som leser opp teksten og lagrer dette som en lydfil eksempelvis mp3-format. Lydfilen spilles med lydavspillingsprogram. Denne kombinasjonen muliggjør at et kamera som er bygget for overvåkning fungerer som et opplesningsverktøy for synshemmede. Vi vet at det finnes CCTV systemer med OCR funksjon i dag (kom på markedet sent 2011), men vi understreker at vårt egenutviklede system muliggjør helsides OCR som følge av avstanden til lesestoffet og kameraets høye oppløsning.
Grabbing
Vi har tidligere levert såkalte grabbere (bildefangere) til synshemmede i skolen. Dette er utstyr som sender bildet fra projektor til elevens egen pc uten å forstyrre den «vanlige» visningen på lerret/smartboard. Her gis den enkelte elev et bilde som ikke så lett blir forstyrret av lysforhold i klasserommet og som kan manipuleres med elevens egne forstørrelses program. Tradisjonelt sett har dette skjedd gjennom å strekke en kabel fra projektor og ned til grabberen som befinner seg ved pulten til den enkelte. I vårt egenutviklede trådløse system har vi følgelig funnet muligheter til å sette inn en trådløs grabber.
Denne fungerer på følgende måte:
PC sender beskjed via trådløs router til videograbber. Videograbber snapper bildet som står i enveis kommunikasjon fra smartboard/projektor mot videograbber gjennom VGA/DVI/HDMI kabel. Videograbber sender dette bildet gjennom nettverkskabel til trådløs router som formidler dette trådløst til PC som åpner dette i egenutviklet programvare. I testversjon åpnes dette i videograbberens programvare, men dette vil bli integrert i det egenutviklede programmet). Dette muliggjør at bildet som vanligvis vises på projektorer overføres til brukerens PC skjerm der det kan videre manipuleres med størrelse med mer.
For å oppsummere angår altså oppfinnelsen et System for fremvisning av et visuelt materiale, særlig et hjelpemiddelsystem for synshemmede, omfattende et kamera for avbildning av det visuelle materialet og en skjerm for kontrollert fremvisning av materialet.
System omfatter også en kontrollenhet omfattende et brukergrensesnitt, innrettet til å kommunisere en eller flere kommandoer til systemet, hvor kommandoene inkluderer indikasjon av minst en unik posisjon for det visuelle materialet. Kontrollenheten kan bestå av en datamaskin 1 med egnet programvare 2 og en kontroller 3 integrert eller disse elementene som separate enheter. Det omfatter også en kommunikasjonsdel 4 for å kommunisere instruksjoner til et kamera 5, hvilke instruksjoner omfatter angitte posisjon for det visuelle materialet, og der kameraet omfatter en styredel som styrer kameraet til å avbilde et det valgte visuelle materialet ved angitte posisjon.
Kontrollenheten kan inkludere et register omfattende et sett med posisjoner, og brukergrensesnittet er innrettet til å la brukeren velge en av de angitte posisjonene. Posisjonene i registeret kan for eksempel være forhåndsdefinert i et koordinatsystem som representerer rommet, etter søkbare markører eller lagret etter styring av kameraet til en gitt posisjon.
Kameraet i systemet er fortrinsnvis plassert i taket et rom omfattende minst to registrerte posisjoner, hvorav den ene posisjonen er brukerens arbeidsplass og den andre er ved en av veggene i rommet, fortrinnsvis omfattende en fremviserskj erm eller lignende.
Kontrollsignalene sendt fra kontrolleren kan inkludere signaler som angir en ønsket forstørrelse av det visuelle materialet i en valgt posisjon, slik at kameraet kan zoome inn på valgte områder
Kamera kommuniserer fortrinnsvis trådløst med nevnte kommunikasjonsdel 4, men ledningsnett kan også tenkes brukt på bekostning av fleksibilitet i systemet.
Systemets programvare omfatter fortrinnsvis midler for konvertering av i det minste deler av det visuelle materialet til tekstsymboler eller til opplest tale via en talegenerator.
Brukergrensesnitt vil normalt omfatte et tastatur der angitte kommandoer er knyttet til forhåndsvalgte taster, for eksempel funksjonstaster og piltaster. Kommandoene omfatter justering av valgte posisjoner, for eksempel med piltaster, zooming og kontrast og fargegjengivelse.
Kameraet er fortrinnsvis et takmontert kamera montert på en vippbar plattform, der kameraet også omfatter et zoom-objektiv for å justere forstørrelsen av det visuelle materialet i den valgte posisjonen. For bruk i undervisningsformål er datamaskin og kamera er fortrinnsvis plassert i et undervisningsrom, hvor minst en av de valgte posisjonene utgjøres av en arbeidsplass for en student, og en annen posisjon utgjøres av foreleserens plassering.
Systemet omfatter også midler for overføring av bildesignaler direkte fra signalet til en fremviser eller lignende.
Priority Applications (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
NO20120207A NO341403B1 (no) | 2012-02-27 | 2012-02-27 | Hjelpemiddelsystem for synshemmede |
EP13755063.8A EP2820638A4 (en) | 2012-02-27 | 2013-02-22 | ASSISTANCE SYSTEM |
PCT/NO2013/050035 WO2013129934A1 (en) | 2012-02-27 | 2013-02-22 | Aiding system |
US14/370,569 US20140368627A1 (en) | 2012-02-27 | 2013-02-22 | System for display of visual material to the visually impaired |
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
NO20120207A NO341403B1 (no) | 2012-02-27 | 2012-02-27 | Hjelpemiddelsystem for synshemmede |
PCT/NO2013/050035 WO2013129934A1 (en) | 2012-02-27 | 2013-02-22 | Aiding system |
Publications (2)
Publication Number | Publication Date |
---|---|
NO20120207A1 NO20120207A1 (no) | 2013-08-28 |
NO341403B1 true NO341403B1 (no) | 2017-10-30 |
Family
ID=49083022
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
NO20120207A NO341403B1 (no) | 2012-02-27 | 2012-02-27 | Hjelpemiddelsystem for synshemmede |
Country Status (4)
Country | Link |
---|---|
US (1) | US20140368627A1 (no) |
EP (1) | EP2820638A4 (no) |
NO (1) | NO341403B1 (no) |
WO (1) | WO2013129934A1 (no) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10223777B2 (en) * | 2017-01-26 | 2019-03-05 | Freedom Scientific, Inc. | Selective modification of visual output displayed on a computer screen by cancelling an initial modification effect |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO1999021122A1 (en) * | 1997-10-22 | 1999-04-29 | Ascent Technology, Inc. | Voice-output reading system with gesture-based navigation |
US20020191071A1 (en) * | 2001-06-14 | 2002-12-19 | Yong Rui | Automated online broadcasting system and method using an omni-directional camera system for viewing meetings over a computer network |
US20020196327A1 (en) * | 2001-06-14 | 2002-12-26 | Yong Rui | Automated video production system and method using expert video production rules for online publishing of lectures |
US20070126755A1 (en) * | 2002-06-19 | 2007-06-07 | Microsoft Corporation | System and Method for Whiteboard and Audio Capture |
DE102010015977A1 (de) * | 2010-03-15 | 2011-09-15 | Waldner Labor- Und Schuleinrichtungen Gmbh | Unterrichtssystem zur visuellen Übertragung eines in einem Unterrichtsraum aufgenommenen Bildes |
Family Cites Families (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20040021785A1 (en) * | 2000-06-22 | 2004-02-05 | Yacov Pshtissky | Dome housed video camera assembly with 180 degree tilt motion |
US7358985B2 (en) * | 2001-02-16 | 2008-04-15 | Fuji Xerox Co., Ltd. | Systems and methods for computer-assisted meeting capture |
US20050134682A1 (en) * | 2003-12-22 | 2005-06-23 | Epiphan Consulting Inc. | Network based conference system |
EP2080086A4 (en) * | 2006-10-31 | 2011-06-08 | Research In Motion Ltd | CONTROLLING DISPLAY IMAGES ON A MOBILE DEVICE |
US20110166934A1 (en) * | 2009-08-31 | 2011-07-07 | Ofer Comay | Targeted advertising based on remote receipt analysis |
US8345948B2 (en) * | 2009-09-11 | 2013-01-01 | Harsco Corporation | Automated turnout inspection |
EP2383970B1 (en) * | 2010-04-30 | 2013-07-10 | beyo GmbH | Camera based method for text input and keyword detection |
-
2012
- 2012-02-27 NO NO20120207A patent/NO341403B1/no active IP Right Review Request
-
2013
- 2013-02-22 US US14/370,569 patent/US20140368627A1/en not_active Abandoned
- 2013-02-22 WO PCT/NO2013/050035 patent/WO2013129934A1/en active Application Filing
- 2013-02-22 EP EP13755063.8A patent/EP2820638A4/en not_active Withdrawn
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO1999021122A1 (en) * | 1997-10-22 | 1999-04-29 | Ascent Technology, Inc. | Voice-output reading system with gesture-based navigation |
US20020191071A1 (en) * | 2001-06-14 | 2002-12-19 | Yong Rui | Automated online broadcasting system and method using an omni-directional camera system for viewing meetings over a computer network |
US20020196327A1 (en) * | 2001-06-14 | 2002-12-26 | Yong Rui | Automated video production system and method using expert video production rules for online publishing of lectures |
US20070126755A1 (en) * | 2002-06-19 | 2007-06-07 | Microsoft Corporation | System and Method for Whiteboard and Audio Capture |
DE102010015977A1 (de) * | 2010-03-15 | 2011-09-15 | Waldner Labor- Und Schuleinrichtungen Gmbh | Unterrichtssystem zur visuellen Übertragung eines in einem Unterrichtsraum aufgenommenen Bildes |
Non-Patent Citations (4)
Title |
---|
"Rehabilitation bei Sehbehinderung und Blindheit", av Astrid Maritzen og Norbert Kamps, Springer Verlag, Berlin Heidelberg, 2013, https://books.google.no/books?id=lx4eBAAAQBAJ&pg=PA164&lpg=PA164&dq=videomatic+edu&source=bl&ots=jyjogKQUD0&sig=WqgtiAOupGGr9hIAQfhQSIik3sg&hl=no&sa=X&ei=mV4BVdyyD-SfyAPtn4KwDQ&ved=0CEoQ6AEwBg#v=onepage&q=videomatic%20edu&f=false, Dated: 01.01.0001 * |
Gebruiksaanwijzing en medische productenboek Videomatic EDU, nedlastet 2015.03.12, dokumentegenskaper, Opprettet: 20.12.2011, og Endret: 20.12.2011, Dated: 01.01.0001 * |
Syn.pdf nedlastet 2015.03.12, dokumentegenskaper Opprettet: 18.01.2012 og Endret: 18.01.2012, Dated: 01.01.0001 * |
Videomatic_EDU_leaflet_en nedlastet 2015.03.12, dokumentegenskaper: Opprettet: 04.05.2011 og Endret: 04.05.2011 , Dated: 01.01.0001 * |
Also Published As
Publication number | Publication date |
---|---|
US20140368627A1 (en) | 2014-12-18 |
EP2820638A1 (en) | 2015-01-07 |
WO2013129934A1 (en) | 2013-09-06 |
EP2820638A4 (en) | 2015-11-04 |
NO20120207A1 (no) | 2013-08-28 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10762876B2 (en) | Information processing apparatus and control method | |
US10642564B2 (en) | Display system, display device, information display method, and program | |
US10491785B1 (en) | Interchangeable media prompting assembly and method for prompting | |
CN108428375A (zh) | 一种基于增强现实的教学辅助方法及设备 | |
US10565890B2 (en) | Method and system for information exchange | |
CN105869462A (zh) | 一种智能交互教学系统 | |
JP2014171157A (ja) | 通信装置及び通信方法 | |
CN108427194A (zh) | 一种基于增强现实的显示方法及设备 | |
US10032389B2 (en) | Video magnifier camera with handle | |
JP2020061737A (ja) | 教育映像モニター用仮想現実映像装置 | |
US20130084555A1 (en) | Information providing system | |
US20220129108A1 (en) | Capturing audio and visual information on transparent display screens | |
CN111163280A (zh) | 非对称性视频会议系统及其方法 | |
NO341403B1 (no) | Hjelpemiddelsystem for synshemmede | |
JP6540426B2 (ja) | 表示システム、表示装置、情報表示方法、及び、プログラム | |
JP2008211850A (ja) | 組み立て式透明撮影機器用スタンドならびにそれを利用し鉛直上方より撮影するインターネット・テレビ電話・携帯電話およびphs等のネットワーク回線および情報通信端末による遠隔指導および会議の方法。 | |
KR102295885B1 (ko) | 온라인 수업용 실물 화상기 타입 웹캠 | |
CN106781744B (zh) | 智能数学媒体教学系统 | |
JP6733401B2 (ja) | 表示システム、表示装置、情報表示方法、及び、プログラム | |
CN115581350A (zh) | 一种沉浸式交互系统 | |
CN108427195A (zh) | 一种基于增强现实的信息处理方法及设备 | |
EP3259636B1 (en) | Articulated desktop magnifier | |
US20180142467A1 (en) | Partition system | |
JP2006270172A (ja) | 管理システム及び表示制御方法 | |
US20230129708A1 (en) | Procedure guidance and training apparatus, methods and systems |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
CHAD | Change of the owner's name or address (par. 44 patent law, par. patentforskriften) |
Owner name: ABLECON AS, NO |
|
Filing an opposition |
Opponent name: LVI LOW VISION INTERNATIONAL AB, VERKSTADSGATAN 5, Effective date: 20180730 |
||
PDP | Decision of opposition (par. 25 patent act) |
Free format text: INNSIGELSEN FORKASTES Filing date: 20120227 Opponent name: LVI LOW VISION INTERNATIONAL AB , VERKSTADSGATAN 5, 35246 |