FI113231B - Menetelmä sanomien sisältämän informaation esittämiseksi multimediapäätelaitteessa, multimediasanomien välitysjärjestelmä ja multimediapäätelaite - Google Patents

Menetelmä sanomien sisältämän informaation esittämiseksi multimediapäätelaitteessa, multimediasanomien välitysjärjestelmä ja multimediapäätelaite Download PDF

Info

Publication number
FI113231B
FI113231B FI20000089A FI20000089A FI113231B FI 113231 B FI113231 B FI 113231B FI 20000089 A FI20000089 A FI 20000089A FI 20000089 A FI20000089 A FI 20000089A FI 113231 B FI113231 B FI 113231B
Authority
FI
Finland
Prior art keywords
multimedia
message
presentation
information
terminal
Prior art date
Application number
FI20000089A
Other languages
English (en)
Swedish (sv)
Other versions
FI20000089A (fi
FI20000089A0 (fi
Inventor
Mika Rantanen
Matti Salmi
Miska Hannuksela
Dogu Cetin
Roberto Castagno
Original Assignee
Nokia Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nokia Corp filed Critical Nokia Corp
Priority to FI20000089A priority Critical patent/FI113231B/fi
Publication of FI20000089A0 publication Critical patent/FI20000089A0/fi
Priority to US09/761,040 priority patent/US8364762B2/en
Priority to EP01660008.2A priority patent/EP1117230B1/en
Priority to EP14187574.0A priority patent/EP2821929A1/en
Publication of FI20000089A publication Critical patent/FI20000089A/fi
Application granted granted Critical
Publication of FI113231B publication Critical patent/FI113231B/fi
Priority to US13/722,470 priority patent/US8667073B2/en
Priority to US14/161,808 priority patent/US9338109B2/en
Priority to US15/151,425 priority patent/US10009739B2/en

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/12—Messaging; Mailboxes; Announcements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90—Details of database functions independent of the retrieved data types
    • G06F16/95—Retrieval from the web
    • G06F16/958—Organisation or management of web site content, e.g. publishing, maintaining pages or automatic linking
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/22—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks comprising specially adapted graphical user interfaces [GUI]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L51/00—User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail
    • H04L51/04—Real-time or near real-time messaging, e.g. instant messaging [IM]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L51/00—User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail
    • H04L51/07—User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail characterised by the inclusion of specific contents
    • H04L51/10—Multimedia information
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/1066—Session management
    • H04L65/1101—Session protocols
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/04—Protocols specially adapted for terminals or networks with limited capabilities; specially adapted for terminal portability
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L9/00—Cryptographic mechanisms or cryptographic arrangements for secret or secure communications; Network security protocols
    • H04L9/40—Network security protocols
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L69/00—Network arrangements, protocols or services independent of the application payload and not provided for in the other groups of this subclass
    • H04L69/30—Definitions, standards or architectural aspects of layered protocol stacks
    • H04L69/32—Architecture of open systems interconnection [OSI] 7-layer type protocol stacks, e.g. the interfaces between the data link level and the physical level
    • H04L69/322—Intralayer communication protocols among peer entities or protocol data unit [PDU] definitions
    • H04L69/329—Intralayer communication protocols among peer entities or protocol data unit [PDU] definitions in the application layer [OSI layer 7]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M2207/00—Type of exchange or network, i.e. telephonic medium, in which the telephonic communication takes place
    • H04M2207/40—Type of exchange or network, i.e. telephonic medium, in which the telephonic communication takes place terminals with audio html browser
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W88/00—Devices specially adapted for wireless communication networks, e.g. terminals, base stations or access point devices
    • H04W88/02—Terminal devices
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W88/00—Devices specially adapted for wireless communication networks, e.g. terminals, base stations or access point devices
    • H04W88/16—Gateway arrangements

Description

5 113231
Menetelmä sanomien sisältämän informaation esittämiseksi multime-diapäätelaitteessa, multimediasanomien välitysjärjestelmä ja multime-diapäätelaite
Nyt esillä oleva keksintö kohdistuu menetelmään sanomien sisältämän informaation esittämiseksi multimediapäätelaitteen käyttöliittymässä, jossa menetelmässä sanoma käsittää ainakin yhden komponentin, ja joka sanoma välitetään multimediapäätelaitteeseen multimediasano-10 mien välitysjärjestelmässä. Keksintö kohdistuu lisäksi multimediasanomien välitysjärjestelmään, joka käsittää välineet sanoman välittämiseksi multimediapäätelaitteeseen, joka käsittää käyttöliittymän sanomien sisältämän informaation esittämiseksi, ja kukin sanoma käsittää ainakin yhden komponentin. Keksintö kohdistuu vielä lähettävään multimedia-15 päätelaitteeseen, joka käsittää välineet sanomien muodostamiseksi ainakin yhdestä komponentista, ja välineet sanomien lähettämiseksi. Keksintö kohdistuu myös vastaanottavaan multimediapäätelaitteeseen, joka käsittää välineet sanomien vastaanottamiseksi, ja käyttöliittymän sanomien sisältämän informaation esittämiseksi, ja kukin sanoma • 20 käsittää ainakin yhden komponentin.
Langattomat viestintäverkot ja Internet-verkko laajenevat nopeasti, ja niiden käyttäjien lukumäärä on kasvussa. Kehittyneiden Internet-palve-luiden tuominen langattomien viestintäverkkojen digitaalisiin matkavies-25 timiin, kuten ns. mediapuhelimiin, on mahdollista esimerkiksi WAP-tekniikan avulla. WAP (Wireless Application Protocol) on avoin standardi, joka on suunniteltu tukemaan maailmanlaajuisesti suurinta osaa digitaalisista langattomista viestintäverkoista, kuten GSM (Global Sys-.···. tern for Mobile communications), GPRS (General Packet Radio Ser- '·*. 30 vice), PDC (Personal Digital Cellular), CDMA IS-95 (Code Division Multiple Access), TDMA IS-136 (Time Division Multiple Access), ja kolmannen sukupolven verkkoja, kuten WCDMA (Wideband CDMA) ja CDMA-2000. Koska WAP-järjestelmä on kehitetty vasta äskettäin ja koska WAP-järjestelmän spesifikaatioissa on määritelty joissakin tapa-35 uksissa vain puitteet eri toteutuksille, ei WAP-järjestelmän tiettyjen toimintojen toteuttamiselle ole olemassa tunnettuja ratkaisuja.
2 113231 WAP-järjestelmässä (kuval) WAP-protokollaa ulkoiseen kommunikointiin käyttävä päätelaite, langaton päätelaite MS (Wireless Terminal, Mobile Station), tässä ns. WAP-päätelaite, voi kommunikoida Internet-verkon palvelimen 20 (server) kanssa. Eräänä esimerkkinä tällaisesta 5 WAP-päätelaitteena käytettävissä olevasta langattomasta päätelaitteesta mainittakoon Nokia 7110. WAP-päätelaitteen näyttö on suhteellisen pieni, mikä rajoittaa kerrallaan näytöllä esitettävissä olevan informaation määrää. Tämä aiheuttaa ongelmia esimerkiksi selattaessa In-ternet-kotisivuja, jotka on tyypillisesti suunniteltu esitettäväksi tavallisen 10 tietokoneen näytöllä.
WAP-päätelaitteen ja Internet-verkon välisen kytkennän toteuttaa WAP-yhdyskäytävä 15, joka toimii viestien välityselimenä WAP-pääte-laitteen MS ja Internet-verkon 18 välillä. WAP-yhdyskäytävä 15 muun-15 taa WAP-päätelaitteen MS Internet-verkkoon 18 suuntaamat viestit tarvittaessa jonkin Internet-protokollan, kuten TCP/IP-protokollan (Transmission Control Protocol / Internet Protocol) mukaisiksi viesteiksi. Vastaavasti Internet-verkosta 18 langattomaan verkkoon 12 WAP-päätelaitteelle MS osoitetut viestit muutetaan tarvittaessa WAP- ··... 20 yhdyskäytävässä 15 WAP-protokollan (esim. WSP, Wireless Session * * ·
Protocol) mukaisiksi viesteiksi. WAP-pääte MS voi sinänsä olla mikä tahansa laite, joka käyttää WAP-protokollaa ulkoiseen kommunikointiin, kuten solukkoverkon matkaviestin tai langattomaan verkkoon 12 esi-• merkiksi solukkoverkon matkaviestimen välityksellä yhteydessä oleva '...· 25 tietokonepääte. WAP:n tukemia radiotien yli tapahtuvaan informaation siirtoon tarkoitettuja viestintämuotoja kutsutaan siirtoteiksi (bearer). Näitä ovat mm. eri WAP:n tukemissa verkoissa lyhytsanomaviestit (SMS, Short Message Service), datapuhelut (CSD, Circuit Switched Data) ja pakettiradio- eli GPRS-palvelut, USSD-palvelu (Unstructured ·”. 30 Supplementary Service Data) sekä muut WAP-spesifikaatioissa määritellyt siirtotiet.
WAP-järjestelmä on yhteyskäytäntöjänsä eli protokolliensa osalta hie-rarkkinen järjestelmä. Sekä WAP-päätelaite että WAP-yhdyskäytävä 35 käsittävät ohjelmallisesti toteutettavan WAP-protokollapinon, joka käsittää määrätyt WAP-protokollakerrokset. WAP-protokollakerroksia ovat mm. WAE-kerros (Wireless Application Environment), WSP-kerros 3 113231 (Wireless Session Protocol), WTP-kerros (Wireless Transaction Protocol) ja WDP-kerros (Wireless Datagram Protocol). WAP-päätteen ja WAP-yhdyskäytävän vastaavat WAP-protokollakerrokset keskustelevat keskenään luotettavan tiedonsiirron toteuttamiseksi WAP-päätteen ja 5 WAP-yhdyskäytävän välillä määrätyn siirtotien yli.
Internet-verkkoon yhteydessä olevan tietokonepäätteen käyttäjillä on jo pitkään ollut mahdollisuus hakea multimediakomponentteja, kuten sähköisessä muodossa olevia lyhyitä videoleikkeitä (video clip) ja äänileik-10 keitä (audio clip), tietokonepäätteeseensä joltakin Internet-verkon palvelimelta (server). Tiedonsiirtonopeuksien kasvaessa ja matkaviestinten ominaisuuksien parantuessa kiinnostus multimediasanoman välityspalvelua kohtaan on nyt herännyt myös langattomassa verkossa. Esimerkiksi WAP-järjestelmän yhteydessä ei kuitenkaan toistaiseksi ole 15 esitetty ratkaisua multimediasanoman esittämisen toteuttamiseksi.
Internet-tietoverkossa on tunnettua käyttää hypertekstipohjaista esitys-muotokieltä HTML (Hypertext Markup Language), jolla voidaan ilmaista Internet-sivuilla esitettävää multimediainformaatiota varten mm. sijainti, ·:·. 20 sisältö, väri ja koko. HTML-kieli ei kuitenkaan tarjoa mahdollisuutta .v. multimediakomponenttien vaikutusajan, kuten tekstin näyttöajan tai ää-nen soittoajan määrittämiseen. Myöskään kalvoesitysten, joissa multi-mediaesitys koostuu useista sivuista, määrittely ei ole mahdollista tä-män HTML-kielen nykyisin tunnetuilla versioilla. Kuitenkin erilaisten 25 mainosten ja muun informaation esittämisen tehostamiseksi on tarve saada aikaan sivujen sisältöön mm. muuttuvia kohtia sekä tarve kytkeä useita sivuja yhdeksi esitykseksi. Viime aikoina on kehitetty joitakin rat-kaisuja, kuten Java-ohjelmointikieli, joilla on mahdollista toteuttaa jonkinlaisia muuttuvia tehosteita. Tällaisten ratkaisujen epäkohtana WAP-. 30 päätelaitteiden kannalta on kuitenkin se, että niiden toteuttaminen vaatii päätelaitteessa suhteellisen suurta prosessointi- ja muistikapasiteettia.
• Tämä rajoittaa JAVA-ohjelmointikielen käyttöönottoa erityisesti kannet- : : .· tavissa päätelaitteissa. JAVA-ohjelmointikielellä toteutetuissa esityksis- ·; · ; sä siirretään varsinaisen esitysinformaation lisäksi myös JAVA-ohjelma, 35 jolla informaatio voidaan esittää.
4 113231
Kannettavien multimediapäätelaitteiden käytön nopea lisääntyminen lisää tarvetta toteuttaa monipuolisten sanomien, kuten multimediasano-mien, esittäminen multimediapäätelaitteessa.
5 Kansainvälinen hakemusjulkaisu WO A 97/08837 esittää multimedia-vastaanottimen ja vastaavan järjestelmän sanomien ja multimediaesitysten lähettämiseksi. Vastaanottimeen kytketty ohjain ajoittaa teksti-, grafiikka- ja audiotapahtumien haun muistista vasteena muistiin tallennettuihin multimediakomentoihin. Vastaanotin sisältää myös näyttö-10 laitteen, joka tuottaa haettuihin esiohjelmoituihin teksti-, grafiikka ja audiotapahtumiin vasteena multimediaesityksen. Hakemusjulkaisussa on esitetty, että lähettävässä multimediapäätelaitteessa multimediaesityksestä muodostetaan joukko audiotiedostoja, graafisia tiedostoja, tekstitiedostoja ja multimediakomentotiedostoja. Siis kutakin eri tyyp-15 pistä multimediakomponenttia varten muodostetaan yksi tai useampi tiedosto. Lisäksi multimediakomennoista, joilla ohjataan multimediaesitystä, muodostetaan erillinen tiedostonsa. Samassa tiedostossa ei siis ole erityyppisiä komponentteja. Nämä tiedostot lähetetään multimedia-päätelaitteesta multimediaviestipalvelimeen, joka muodostaa vastaan-/:·. 20 otetuista tiedostoista paging-viestejä. Kukin eri tyyppinen multimedia-komponentti lähetetään tätä tyyppiä varten varatun paging-kanavan • · · kautta. Multimediasanomien eri komponenttien ja multimediakomen-tojen välitykseen tarvitaan useita eri lähetyskanavia. Esimerkkijärjes-telmässä kanavia on neljä. Kukin kanava suorittaa koodauksen käyttä-; ··’ 25 mällä BCH-koodisanoja. Tällä järjestelyllä on eri tiedostojen lähetysno-peutta saatu lisättyä. Kyseessä ei kuitenkaan ole varsinaisesti multimediasanomien välitysjärjestelmä. Vaikka eri paging-kanavien lähetykset /.! lähetetään toisiinsa lomitettuina, ei järjestelmässä voida samassa sanomassa lähettää eri tyyppisiä multimediakomponentteja.
30
Nyt esillä olevan keksinnön eräänä tarkoituksena on aikaansaada me-netelmä sanomien esittämiseksi ja multimediapäätelaite, jossa sanomia ; voidaan esittää. Nyt esillä olevan keksinnön mukaiselle menetelmälle ;··· on tunnusomaista se, että menetelmässä muodostetaan esitysohjeisto, 35 joka sisältää ainakin yhden sanomaan liitetyn komponentin esittämiseen liittyvää tietoa, että mainittuun esitysohjeistoon liitetään viittaus ainakin yhden komponentin esittämiseen liittyvän tiedon sijainnista maini- 5 113231 tussa sanomassa, ja että mainittu esitysohjeisto liitetään mainittuun sanomaan. Nyt esillä olevan keksinnön mukaiselle multimediasanomien välitysjärjestelmälle on tunnusomaista se, että järjestelmä käsittää välineet esitysohjeiston muodostamiseksi sanomaan, joka esitysohjeisto 5 käsittää ainakin yhden sanomaan liitetyn komponentin esittämiseen liittyvää tietoa, että mainittuun esitysohjeistoon on liitetty viittaus ainakin yhden komponentin esittämiseen liittyvän tiedon sijainnista mainitussa sanomassa, jolloin järjestelmä käsittää välineet mainitun esitysohjeiston liittämiseksi mainittuun sanomaan. Nyt esillä olevan keksinnön mukai-10 selle lähettävälle multimediapäätelaitteelle on tunnusomaista se, että multimediapäätelaite käsittää lisäksi välineet esitysohjeiston muodostamiseksi sanomaan, joka esitysohjeisto käsittää ainakin yhden sanomaan liitetyn komponentin esittämiseen liittyvää tietoa, ja johon esitys-ohjeistoon on liitetty viittaus ainakin yhden komponentin esittämiseen 15 liittyvän tiedon sijainnista mainitussa sanomassa. Nyt esillä olevan keksinnön mukaiselle vastaanottavalle multimediapäätelaitteelle on vielä tunnusomaista se, että multimediapäätelaite käsittää lisäksi välineet sanomaan muodostetun esitysohjeiston tulkitsemiseksi, joka esitysohjeisto käsittää ainakin yhden sanomaan liitetyn komponentin esittä-20 miseen liittyvää tietoa, ja johon esitysohjeistoon on liitetty viittaus aina-kin yhden komponentin esittämiseen liittyvän tiedon sijainnista maini-tussa sanomassa, jolloin multimediapäätelaite käsittää välineet maini-tun esitysohjeiston selvittämiseksi mainitusta sanomasta. Keksintö perustuu siihen ajatukseen, että sanomiin liitettyjen komponenttien esitys-···· 25 parametrit liitetään sanomaan, ja nämä parametrit muodostetaan jollakin kuvauskielellä.
Nyt esillä olevalla keksinnöllä saavutetaan merkittäviä etuja tunnetun tekniikan mukaisiin ratkaisuihin verrattuna. Keksinnön mukaista mene-' . 30 telmää sovellettaessa voidaan langattomassa multimediapäätelait-teessa esittää sanomia ja lisäksi sanomiin voidaan muodostaa ajalli-·*' sesti muuttuvia komponentteja. Tämän toteuttaminen ei vaadi niin ;'.· suurta prosessointikapasiteettia ja muistin määrää kuin tunnetun teknii- ·· kan mukaisia ratkaisuja käytettäessä. Keksinnön mukaisella menetel- 35 mällä voidaan vielä muodostaa useista sivuista koostuvia esityksiä esitettäväksi multimediapäätelaitteessa.
6 113231
Keksintöä selostetaan seuraavassa tarkemmin viitaten samalla oheisiin piirustuksiin, joissa kuva 1 esittää erästä tekniikan tason mukaista mallia WAP-järjes-5 telmästä, kuva 2 havainnollistaa keksinnön erään edullisen suoritusmuodon mukaisen menetelmän toteutusta WAP-järjestelmässä, 10 kuva 3 havainnollistaa keksinnön mukaisen menetelmän toteuttavan langattoman viestimen oleellisia osia, kuva 4a esittää lohkokaaviona multimediasanoman muodostuksen toiminnallisia lohkoja lähettävässä multimediapäätelaittees-15 sa, kuva 4b esittää lohkokaaviona multimediasanoman tulkinnan toiminnallisia lohkoja vastaanottavassa multimediapäätelaitteessa, ·:·. 20 kuva 5a esittää erään ilmoitussanoman karkeaa rakennetta, * · · • · · kuva 5b esittää erään yhteydenmuodostussanoman karkeaa rakennetta, «· · 25 kuva 6a esittää erästä esimerkkiä multimediasivusta, kuva 6b esittää erästä keksinnön edullisen suoritusmuodon mukai-‘\i sella menetelmällä muodostetun multimediasanoman kar- keaa rakennetta, ja 30 kuva 6c esittää erästä toista keksinnön edullisen suoritusmuodon • * ' ;·* mukaisella menetelmällä muodostetun multimediasanoman ; ;karkeaa rakennetta.
35 Seuraavassa keksintöä selostetaan käyttämällä esimerkkeinä multime-diasanomia, joissa on yksi tai useampi multimediakomponentti. Keksintöä ei kuitenkaan ole rajoitettu ainoastaan multimediasanomiin, vaan 7 113231 sanomina voidaan käyttää muitakin sanomia, joissa on yksi tai useampi komponentti. Tämän komponentin ei myöskään tarvitse olla multime-diakomponentti, vaan se voi olla myös muu informaatiota sisältävä komponentti.
5
Kuvassa 3 on havainnollistettu keksinnön erään edullisen suoritusmuodon mukaista menetelmää soveltavan langattoman päätelaitteen MS toiminnalle olennaisia osia. Langaton päätelaite MS käsittää suorittimen MPU ja suorittimeen toiminnallisesti yhdistetyt osat: muistin MEM, käyt-10 töliittymän UI ja radio-osan RF. Suoritin MPU on edullisesti mikroprosessori, mikrokontrolleri tai digitaalinen signaalinkäsittely-yksikkö (DSP, Digital Signal Processor). Muisti MEM käsittää edullisesti haihtumatonta (non-volatile) muistia (ROM, read only memory) ja käyttömuistin (RAM, random access memory). Radio-osa RF voi lähettää radiotaajuisia sig-15 naaleja, kuten WAP-protokollan mukaisia sanomia, ja vastaanottaa radiotaajuisia signaaleja, kuten multimediasanomia, antennin ANT välityksellä. Käyttöliittymä UI tarjoaa edullisesti käyttäjälle näytön ja näppäimistön langattoman päätelaitteen MS käyttämiseksi.
·:·. 20 Langattoman päätelaitteen MS ohjelmisto, myös multimediasanomien muodostamiseen ja esittämiseen liittyvä ohjelmisto, on tyypillisesti tal-lennettu pysyvään muistiin. Suoritin MPU ohjaa ohjelmiston perusteella langattoman päätelaitteen MS toimintaa, kuten radio-osan RF käyttöä, ;··' viestien esittämistä käyttöliittymällä UI ja käyttöliittymältä UI vastaan- 25 otettavien syötteiden lukemista. Käyttöliittymä UI sisältää edullisesti näytön DP, näppäimistön KB ja audiovälineet AUDIO. Ohjelmisto, joka voidaan toteuttaa monella eri tavalla, käsittää edullisesti ohjelmaloh-·. · koja, jotka vastaavat eri toimenpiteiden toteuttamisesta. Näitä toimenpi- teitä ovat esimerkiksi toimenpiteet, jotka liittyvät multimediasanomien . 30 käsittäneen multimediakomponenttien näyttämiseen käyttäjälle sekä viestien lähettämiseen ja vastaanottamiseen liittyvät toimenpiteet. Mul-timediasanomanvälityspalvelun toteuttaa langattomassa päätelaitteessa MS suoritin MPU yhdessä langattoman päätelaitteen ohjelmiston ja muistin MEM kanssa. Käyttömuistia suoritin MPU käyttää väliai-35 kaisena puskurimuistina tietoja prosessoidessaan.
β 113231 δ
Kuvan 1 mukainen WAP-järjestelmä on esitetty edellä tekniikan tason kuvauksen yhteydessä. Oheisessa kuvassa 2 on havainnollistettu mul-timediasanomanvälityspalvelua tilanteessa, jossa WAP-protokollaa ulkoiseen kommunikointiin käyttävä langaton päätelaite MS on tilannut 5 (subscribe) multimediasanoman välityspalvelun multimediasanomapal-velukeskukselta MMSC (Multimedia Message Service Center). Multi-mediasanomapalvelukeskus MMSC on verkkoelementti, palvelin, joka voi sijaita esimerkiksi solukkoverkossa tai Internet-verkossa. Multime-diasanomapalvelukeskus MMSC toimii multimediasanoman välityspal-10 velussa elimenä, joka tallentaa langattomalle päätelaitteelle MS osoitetun multimediasanoman muistiinsa. Multimediasanomapalvelukeskus MMSC lähettää ilmoitussanoman multimediasanoman saapumisesta langattomalle päätelaitteelle MS, kun tämä on tavoitettavissa.
15 Multimediasanomapalvelukeskus MMSC kommunikoi langattoman päätelaitteen MS kanssa WAP-yhdyskäytävän 15 kautta. Fyysisesti multimediasanomapalvelukeskus MMSC sijaitsee edullisesti samassa Internet-verkon osassa kuin WAP-yhdyskäytävä 15. Tyypillisesti multi-mediasanomapalvelukeskuksen MMSC ja WAP-yhdyskäytävän 15 vä-20 linen kommunikointi toteutetaan Internet-verkon protokollien (IP-proto-kollien) mukaisesti. Näitä ovat esimerkiksi TCP/IP ja HTTP 1.1.
• * a a
Kun multimediasanomapalvelukeskukselta MMSC multimediasanoman välityspalvelun tilanneelle langattomalle päätelaitteelle MS on osoitettu ···’ 25 multimediasanoma, joka voi sisältää yhden tai useampia multimedia-komponentteja, saapuu multimediasanomapalvelukeskukseen MMSC, tallentaa se multimediasanoman muistiinsa ja lähettää langattomalle päätelaitteelle ilmoitussanoman 30 (notification message) tallennetusta multimediasanomasta ilmoittamiseksi. Langattoman päätelaitteen MS ' . 30 käyttäjä voi tämän jälkeen noutaa multimediasanoman parhaaksi kat-somanaan ajankohtana, tai sanoman voidaan lähettää automaattisesti langattomaan päätelaitteeseen MS, ilman käyttäjän toimenpiteitä. Mul-timediakomponentit voivat olla esim. sähköisessä muodossa olevaa ·:' tekstiä, kuvia, valokuvia, äänileikkeitä tai videoleikkeitä. Yksi multime- 35 diasanoma voi sisältää myös eri tyyppisiä multimediakomponentteja.
9 113231
Keksinnön eräässä edullisessa suoritusmuodossa ilmoitussanoman 30 toteuttamiseksi käytetään WAP-järjestelmässä sisältötyyppiä, jota tässä nimitetään MMN.ksi (Multimedia Message Notification). MMN on sisältötyyppi, joka määritetään siten, että se sallii sekä tekstimuotoisen että 5 binäärimuotoisen tiedon lähettämisen samassa sisältötyypissä. MMN-sisältötyypille määritetään edullisesti sekä XML-formaattia (Extensible Markup Language) oleva Internet-yhteensopiva tekstimuotoinen esitystapa että WAP:n binäärikoodauksen mukainen binääriformaatti. Yksi mahdollinen MMN-tyyppisen ilmoitussanoman 30 karkea rakenne on 10 esitetty oheisessa kuvassa 5a, jossa ilmoitussanoma 30 käsittää yleisen osuuden "General Information” 36, kentät 37 multimediasanomien käsittämien multimediakomponenttien (joita kuvan 5a esimerkissä on kaksi) ominaisuuksien ilmaisemiseen.
15 Kuvassa 4a on esitetty pelkistettynä lohkokaaviona multimediasanomien muodostusta lähettävässä laitteessa, kuten multimediapäätelait-teessa MS’ ja kuvassa 4b multimediasanomien esittämistä multimedia-päätelaitteessa, kuten langattomassa päätelaitteessa MS. Multimedia-sanomien muodostusta esittää muokkauslohko MOD, joka voi olla ...20 esim. päätelaitteen käyttöliittymä UI. Se sisältää tarvittavat toiminnot multimediakomponenttien, kuten kuvien, tekstin, äänen ja/tai videon ♦ · · esittämiseen ja muokkaamiseen. Tällöin multimediaesityksen muodos-; ·* taja voi rakentaa multimediasivun kokoamalla siihen haluamansa mul-timediakomponentit, muokkaamalla niitä tarvittaessa ja sijoittamalla ne 25 haluttuihin paikkoihin. Multimediakomponentit on tallennettu esim. tie-dostoiksi, joita voidaan hakea esim. multimediapäätelaitteen MS muistivälineistä MEM, kuten kiintolevyltä (ei esitetty) tai Internet-tietoverkosta, ’·,* esimerkiksi palvelimelta 20, tai multimediakomponentteja voidaan tehdä esim. kirjoittamalla haluttua tekstiä, ottamalla kameralla kuvia, nauhoit-30 tamalla ääniä, jne. Kuvassa 6a on esitetty eräs esimerkki tällaisesta ‘ : multimediasivusta. Kuvan 6a mukainen multimediasivu MP käsittää < * * keskelle sivua sijoitetun kuvan PIC1, joka on tallennettuna esim. tiedos- * tossa ” PIC1.jpg” sekä kuvan yläpuolella tekstirivin TXT1, joka on tai- < I · ..: lennettuna esim. tiedostossa ” TXT 1 .txt”.
35
Sen jälkeen kun multimediasivu on muokattu halutuksi, se siirretään koontilohkoon COMP multimediatiedoston muodostamiseksi. Tähän 10 113231 multimediatiedostoon tallennetaan tieto siitä, mitä komponentteja se sisältää sekä ohjeet komponenttien esittämiseksi vastaanottajan multi-mediapäätelaitteessa halutulla tavalla. Koontilohkon COMP muodostama koontitiedosto edullisesti tallennetaan sanoman muodostavan 5 laitteen, kuten multimediapäätelaitteen muistivälineisiin MEM. Tässä keksinnön edullisessa suoritusmuodossa koontitiedoston formaattina käytetään sinänsä tunnettua SMIL-formaattia (Synchronized Multimedia Integration Language). Koontitiedosto tallennetaan edullisesti tekstitiedostona, kuten SMIL1.txt, mutta voidaan tallentaa muussakin formaa-10 tissa, kuten binäärimuodossa. Kuvan 6a multimediasivun eräästä esimerkistä muodostetun koontitiedoston sisältö SMIL-formaatissa on seu-raava: <smil> 15 <head> <layout> croot-layout width=”160” height=”160”/> cregion id=”up” width=”160” height=”20” left=”0” top=”10”/> <region id=”center” width=”160” height=”120” left=”0” top=”40”/> 20 </layout> • · ;*/ </head> <body> ,..: <img src=” PIC1 .jpg” region=”center”/> ’ ”: <text src=” TXT 1 .txt” region=”up”/> 25 </body> </smil> .·. : Kulmasulkeissa (tag) merkityt tekstit ovat SMIL-formaatin mukaisia tie totyyppejä sekä niihin mahdollisesti liittyviä parametreja. Tiedostossa 30 on aluksi <smil> -tietotyyppi, joka ilmoittaa kyseessä olevan SMIL-for-maatin mukaisen koontitiedoston SMIL. Seuraavaksi on määritetty esi-tysparametreja, kuten näyttöalueen leveys (width=160) ja korkeus : ’.·. (height=160), sekä tästä näyttöalueesta kaksi nimettyä aluetta, niiden koko ja sijainti: ”up” ja ’’center”. Alueen ”up” leveydeksi on määritetty 35 160 ja korkeudeksi 20. Lisäksi tämän alueen vasemman yläkulman si jainniksi on määritetty vaakasuunnassa 0 (vasen reuna) ja pystysuunnassa 10. Mittayksiköinä ovat edullisesti pikselit, mutta myös muita yk- 11 113231 siköitä voidaan käyttää, kuten prosentteja näyttöalueen koosta. Alueen ’’center” leveydeksi on määritetty 160, korkeudeksi 120 ja vasemman yläkulman sijainniksi 0, 40. Tämän esitysparametriosan jälkeen seuraa tieto-osa (body), jossa ilmoitetaan, mitä multimediakomponentteja sivu 5 sisältää ja mistä ne löytyvät. Lisäksi visuaalisista komponenteista (kuva, video, teksti) ilmoitetaan, mihin kohtaan sivua ne sijoitetaan. Tässä esimerkissä on siis kaksi tiedostoa, joista kuvatiedosto sijoitetaan alueelle ’’center” ja tekstitiedosto alueelle ”up”.
10 Tämän koontitedoston SMIL ja siihen liittyvien komponenttien siirto vastaanottajalle tehdään multimediasanoman avulla. Tämä muodostetaan keksinnön erään edullisen suoritusmuodon mukaisessa menetelmässä seuraavasti. Lähettävässä multimediapäätelaitteessa MS’ koontitie-dosto SMIL siirretään sanomanmuodostuslohkoon MSG. Muistista 15 MEM on varattu alue sanomapuskuria SBUF varten, johon lähetettävä multimediasanoma muodostetaan. Kuvassa 6b on esitetty eräs esimerkki tällaisesta multimediasanomasta pelkistetysti. Multimediasanoman alkuun, tai muuhun määrättyyn kohtaan multimediasanomaa, lisätään otsikkokenttä HDR, joka sisältää mm. sanoman vastaanottajan ... 20 osoitetietoja, lähettäjän osoitetietoja sekä viittauksen REF koontitiedos- ton sijaintiin muodostettavassa sanomassa. Otsikkokentän lisäksi sa-;· noman datakenttään D liitetään multimediakomponentit, jotka tässä esimerkissä ovat kuvatiedosto ja tekstitiedosto. Tiedostot liitetään joko sellaisenaan, tai ne voidaan kompressoida tai muuntaa johonkin muu-25 hun muotoon. Tällöin sanomassa edullisesti ilmoitetaan se, missä muo-dossa tiedostot on liitetty, jotta vastaanottavassa multimediapäätelaitteessa voidaan suorittaa muuntamiselle vastaava käänteinen toimenpi-.·. : de alkuperäisen tiedostomuodon palauttamiseksi. Multimediasanomaan ,···’. liitetään vielä koontitiedosto. Tässä vaiheessa koontitedostossa mah- “ 30 dollisesti olevat viittaukset multimediakomponenttitiedostoihin muun- netaan viittauksiksi ao. multimediakomponentteihin tässä sanomassa. Kuvaan 6b on merkitty nuolilla R1 ja R2 näitä sanoman sisäisiä : .. viittauksia.
35 Multimediasanomassa voidaan välittää myös useista multimediasivuista koostuvia multimediaesityksiä. Kutakin sivua varten on sopivimmin muodostettu oma koontitiedosto, joihin ao. sivun esitysohjeisto on liitet- 12 113231 ty. Tällaiset multimediaesitykset sisältävät esimerkiksi erilaisia kuvia ja tekstejä, joita sanoman vastaanottaja voi selata joko tietyssä järjestyksessä tai haluamassaan järjestyksessä. Tällöin multimediasivulle on muodostettu linkkejä eli viittauksia seuraavaan sivuun, edelliseen si-5 vuun, alkuun, ja/tai loppuun. Nämä viittaukset on myös tallennettu koontitiedostoihin. Tällöin multimediasanomaa muodostettaessa nämä viittaukset muutetaan vastaamaan ao. sivun komponenttien sijaintia sanomassa. Kuvassa 6c on esitetty eräs esimerkki tällaisesta multime-diasanomasta. Se on muodostettu kahdesta multimediasivusta, joita 10 vastaavat koontitiedostot on merkitty viittein SMIL1 ja SMIL2, joista ensimmäisessä on viittaus (nuoli R3) toiseen sivuun. Näiden sivujen komponentit (viittaukset esitetty nuolilla R1—R5) ja koontitiedostot on myös liitetty tähän sanomaan. On selvää, että eri sivuilla olevat viittaukset voivat kohdistua myös samaan komponenttiin.
15
Multimediakomponentin sisältämän informaation sijasta voidaan esitys-ohjeistoon liittää hakuosoite, jolloin multimediakomponentti haetaan tämän hakuosoitteen perusteella siinä vaiheessa, kun multimediasano-man sisältö esitetään vastaanottavassa päätelaitteessa.
·:·. 20 ; Y Sen jälkeen kun multimediasanoma on valmis lähetettäväksi, suorite-
taan multimediasanoman lähetys sinänsä tunnetusti multimediasano-·...·’ mapalvelukeskukseen MMSC. Multimediasanomapalvelukeskus MMSC
tutkii sanoman osoitetiedoista sen, mille langattomalle päätelaitteelle 25 MS kyseinen sanoma on tarkoitettu. Osoitetietona voi olla esim. puhe-linnumero, IP-osoite tai URL (Uniform Resource Locator). Sen jälkeen kun sanoman vastaanottava päätelaite on selvillä, multimediasanoma-: palvelukeskus MMSC lähettää ilmoitussanoman 30 WAP-yhdyskäytä- .···’. vän 15 kautta langattomalle päätelaitteelle MS, jossa ilmoitetaan lan- " 30 gattomalle päätelaitteelle MS osoitetun multimediasanoman saapumi-sesta multimediasanomapalvelukeskukseen MMSC.
: Ilmoitussanoma 30 lähetetään edullisesti käyttämällä ns. yhteydetöntä Y,’; (connectionless) palvelua, jota mm. WAP tukee. Yhteydettömässä pal- 35 velussa, jollainen on mm. GSM-järjestelmästä tunnettu lyhytsanomapalvelu (SMS, Short Message Service), sanoman lähettäminen vastaanottajalle ei edellytä yhteyden luomista. Nyt esillä olevan keksinnön 13 113231 mukaisessa multimediasanomien siirtämisessä langattomaan päätelaitteeseen MS käytetään kuitenkin edullisesti yhteydellistä (connection oriented) palvelua.
5 Multimediasanomapalvelukeskus MMSC voi tutkia sen, mitä multime-diakomponentteja sanoma sisältää ja verrata niitä vastaanottavan päätelaitteen MS multimediaominaisuuksiin. Tällöin multimediasanomapalvelukeskus MMSC voi joissakin sovelluksissa jättää lähettämättä sellaiset komponentit, joita vastaanottava multimediapäätelaite MS ei 10 kykene käsittelemään. Tässä kuitenkin oletetaan, että vastaanottavaan multimediapäätelaitteeseen MS lähetetään multimediasanoman kaikki komponentit.
Vastaanotettuaan mainitun ilmoitussanoman 30 langaton päätelaite MS 15 aloittaa ensin yhteyden muodostuksen multimediasanomapalvelukes-kukseen MMSC (WAP WSP CONNECT), mikäli langattoman päätelaitteen MS ja multimediasanomapalvelukeskuksen MMSC välillä ei sillä hetkellä ole yhteyttä. Tyypillisesti yhteyden muodostus suoritetaan siten, että langaton päätelaite MS avaa WAP:stä sinänsä tunnetulla ta-20 valla WSP-istunnon (WSP session) WAP-yhdyskäytävän 15 kanssa ja ; Y WAP-yhdyskäytävä 15 avaa edelleen esimerkiksi IP-yhteyden multime- diasanomapalvelukeskuksen MMSC kanssa. Tieto langattoman pääte-• : laitteen MS valitsemasta ja siis avattavassa WSP-istunnossa käytettä västä siirtotiestä lähetetään langattomalta päätelaitteelta MS WAP-j 25 yhdyskäytävälle 15 WAP:stä tunnetulla tavalla WSP HEADER -kentässä Bearer indication -arvona. Mainitun tiedon lähettäminen tapahtuu langattoman päätelaitteen MS ja WAP-yhdyskäytävän 15 väli-·. : sen keskustelun aikana WSP-istuntoa avattaessa esim. yhteydenmuo- ,···’. dostussanomassa 40 (kuva 5b).
30
Yhteydenmuodostussanomassa 40 välitetään istunnon muodostami- I I · sessa tarvittavaa tietoa 42. Multimediasanomapalvelukeskus MMSC i .·. vastaanottaa yhteydenmuodostussanoman 40. Multimediasanomapal- Y, | velukeskus MMSC vastaa yhteydenmuodostussanomaan kuittaussano- 35 maila, jossa langattomalle päätelaitteelle MS ilmoitetaan siitä, voidaanko yhteys muodostaa. Yhteydenmuodostus voi epäonnistua esimerkiksi silloin, kun multimediasanoman vastaanottajaksi osoitetun 14 113231 päätelaitteen käyttäjällä ei ole tilaajasopimusta multimediasanomapal-veluun, puhelinliittymä on suljettu esim. maksamattomien laskujen vuoksi, tms.
5 Sen jälkeen kun yhteys on saatu muodostettua, voidaan aloittaa multi-mediasanoman välitys multimediasanomapalvelukeskukselta MMSC langattomaan päätelaitteeseen MS. Langaton päätelaite MS voi radio-resurssien optimoimiseksi valita kunkin eri multimediakomponentin siirtämiseen tarkoituksenmukaisimman siirtotien.
10
Sen jälkeen kun vastaanottava multimediapäätelaite MS on vastaanottanut multimediasanoman, siirrytään sen käsittelyyn. Vastaanottovaiheessa sanoma on purettu vastaanottolohkossa RMSG ja tallennettu sopivimmin muistiin MEM muodostettuun sanomapuskuriin RBUF. Sa-15 noman käsittely suoritetaan esim. suorittimen MPU sovellusohjelmistoon muodostetussa tulkintalohkossa IP. Tulkintalohkolle IP välitetään multimediapäätelaitteen multimediaominaisuudet, kuten näytön resoluutio, väriominaisuudet, ääniominaisuudet, jne.
.. 20 Tulkintalohko IP tutkii sanoman otsikkokentästä viittauksen koontitie- doston sijaintiin ja aloittaa koontitiedoston käsittelyn. Tässä vaiheessa • · ·' suoritetaan koontivaiheeseen nähden olennaisesti käänteiset toimenpi- teet. Koontitiedoston parametreista ilmenee multimediasanoman esi-tysparametrit, joita tulkintalohko IP vertaa multimediapäätelaitteen MS 25 multimediaominaisuuksiin sen selvittämiseksi, sisältääkö multimediasa-noma sellaisia komponentteja, joita multimediapäätelaitteessa MS ei voida esittää. Tällöin tällaiset komponentit voidaan sivuuttaa.
.···*, Esitysparametrien selvityksen ja ominaisuuksien vertailun jälkeen tul- 30 kintalohko IP suorittaa tieto-osan, eli multimediakomponenttien käsitte-lyn. Käyttäen edellä esitettyä esimerkkiä koontitiedostona, tieto-osassa on kuvakomponentti ja tekstikomponentti. Tällöin tulkintalohko IP tutkii ; .·. ao. komponenttien viittaukset koontitiedostosta. Kuvakomponentin tie-dot tulkintalohko IP siirtää multimediasanomasta kuvamuistiin DMEM, 35 joka on muodostettu edullisesti langattoman päätelaitteen muistivälineisiin MEM, sellaiseen kohtaan, joka vastaa koontitiedostossa määritettyä kuvan esityssijaintia. Tekstitiedoston tulkintalohko IP siirtää näy- 15 113231 tönohjaimelle (ei esitetty), jossa tekstistä muodostetaan käyttöliittymän UI näytölle DP vastaava visuaalinen informaatio (teksti). Mahdollisen äänikomponentin tapauksessa tulkintalohko IP siirtää audioinformaation käyttöliittymän UI audiovälineisiin AUDIO, jossa suoritetaan audio-5 informaation muuntaminen kuultavaksi ääneksi sinänsä tunnetusti.
Sellaisten multimediasanomien käsittelyssä, jotka sisältävät useita mul-timediasivuja, toimitaan edullisesti seuraavasti. Tulkintalohko IP etsii ensimmäisenä esitettävän sivun tiedot ja suorittaa sivun tulkinnan, ku- 10 ten edellä on esitetty. Tämän jälkeen tulkintalohko jää odottamaan sivun vaihtokäskyä, jonka esim. käyttäjä antaa käyttöliittymän UI näppäimistöllä KB. Sivunvaihtokäskyn jälkeen tulkintalohko hakee seuraa-van sivun tiedot ja tulkitsee ne, jne. Toisaalta sivujen vaihtuminen voidaan myös automatisoida määrittämällä kullekin sivulle näyttöaika.
15 Tällöin multimediapäätelaitteessa MS mitataan aikaa ja näyttöajan päätyttyä ilmoitetaan tulkintalohkolle IP sivun vaihtokäsky.
Multimediaesityksessä voidaan myös komponentille määrittää vaikutusaika, kuten kuvan tai tekstin näyttöaika tai äänen toistoaika. Lisäksi ... 20 eri komponentteja voidaan tahdistaa ajallisesti keskenään . Tällaisissa tilanteissa koontitiedostoon lisätään komponentille myös tieto vaikutus-ajasta ja tarvittaessa myös tieto eri komponenttien keskinäisestä tahdis-tuksesta, esim. komponentin esittämisen aloitushetki suhteessa sivun • : esityksen aloitushetkeen j 25
Vaikka edellä kuvattiin keksinnön edullista suoritusmuotoa, jossa esi-tysohjeisto muodostettiin sanoman lähettävässä päätelaitteessa MS’, voidaan keksintöä soveltaa myös siten, että esitysohjeisto kootaan ···’. multimediasanomapalvelukeskuksessa MMSC ennen sanoman lähet- ” 30 tämistä vastaanottavalle päätelaitteelle MS. Tässäkin tapauksessa : : multimediaesitys voidaan muodostaa lähettävässä päätelaitteessa MS’, josta tieto multimediaesityksen sisällöstä esitysohjeiston kokoamista varten välitetään multimediasanomapalvelukeskukseen MMSC.
' » I · t I
35 On selvää, että edellä on esitetty vain suppea joukko erilaisista multimediasanomien mahdollisista sisällöistä, mutta nyt esillä olevaa keksintöä ei ole rajoitettu ainoastaan tässä esitettyihin esimerkkeihin.
16 113231
Keksintö voidaan toteuttaa ohjelmallisesti tekemällä tarvittavat muutokset ohjelmakoodiin langattomassa päätelaitteessa MS ja tarvittaessa myös multimediasanomapalvelukeskuksessa MMSC. Kyseiset tietoko-5 neohjelmatuotteet voidaan tallentaa tietovälineelle, esimerkiksi muistiin, niitä voidaan siirtää ja ne voidaan ajaa esimerkiksi tietokoneessa tai matkapuhelimen mikroprosessorissa.
Multimediapäätelaitteessa MS, MS’ voi olla toteutettu myös 10 käyttöjärjestelmätoimintoja. Käyttöjärjestelmä on toteutettu suorittimen ohjelmakäskyinä. Käyttöjärjestelmä huolehtii suurelta osin multimedia-päätelaitteen MS, MS’ toimintojen ohjauksista, ajoituksista, valvonnasta jne. Lisäksi käyttöjärjestelmä huolehtii koontilohkon toiminnan käynnistämisestä, sanoman lähetys- ja vastaanottotoimintojen suorittamisesta, 15 tulkintalohkon käynnistämisestä, sanoman välittämisestä tulkintalohkon käsiteltäväksi, jne. Nämä käyttöjärjestelmätoiminnot ja niiden soveltaminen edellä esitettyjen keksinnön edullisen suoritusmuodon mukaisen menetelmän yhteydessä ovat alan asiantuntijan sovellettavissa olevaa tekniikkaa, joten niiden tarkempi käsittely tässä yhteydessä ei ole tar-. 20 peen.
On selvää, että nyt esillä olevaa keksintöä ei ole rajoitettu ainoastaan edellä esitettyihin suoritusmuotoihin, vaan sitä voidaan muunnella ; : oheisten patenttivaatimusten puitteissa.
' J 25 I · • · * • · * · * • • tl·· t · ♦ · \ · • » « > * * ·.**»· * ·

Claims (23)

1. Menetelmä sanomien sisältämän informaation esittämiseksi multi-mediapäätelaitteen (MS) käyttöliittymässä (UI), jossa menetelmässä 5 sanoma käsittää ainakin yhden komponentin, ja joka sanoma välitetään multimediapäätelaitteeseen (MS) multimediasanomien välitysjärjestelmässä, tunnettu siitä, että menetelmässä muodostetaan esitysohjeisto (SMIL), joka sisältää ainakin yhden sanomaan liitetyn komponentin esittämiseen liittyvää tietoa, että mainittuun esitysohjeistoon (SMIL) 10 liitetään viittaus ainakin yhden komponentin esittämiseen liittyvän tiedon sijainnista mainitussa sanomassa, ja että mainittu esitysohjeisto (SMIL) liitetään mainittuun sanomaan.
2. Patenttivaatimuksen 1 mukainen menetelmä, tunnettu siitä, että 15 mainittu esitysohjeisto muodostetaan sanoman lähettävässä päätelaitteessa (MS’).
3. Patenttivaatimuksen 1 mukainen menetelmä, tunnettu siitä, että mainittu multimediasanomien välitysjärjestelmä käsittää multimediasa- 20 nomapalvelukeskuksen (MMSC), jossa päätelaitteelle (MS) osoitetut sanomat vastaanotetaan lähetettäväksi edelleen päätelaitteelle (MS), ja että esitysohjeisto muodostetaan multimediasanomapalvelukeskuk-0’·' sessa(MMSC). » r ·
4. Patenttivaatimuksen 1, 2 tai 3 mukainen menetelmä, tunnettu siitä, että mainittu esitysohjeisto muodostetaan käyttämällä SMIL-formaattia.
5. Jonkin patenttivaatimuksen 1—4 mukainen menetelmä, tunnettu siitä, että mainittu komponentin esittämiseen liittyvä tieto käsittää maini- 30 tun komponentin.
6. Jonkin patenttivaatimuksen 1—4 mukainen menetelmä, tunnettu : ‘ ’ *. siitä, että mainittu komponentin esittämiseen liittyvä tieto käsittää maini- .!!.: tun komponentin hakuosoitteen. • . 35
7. Jonkin patenttivaatimuksen 1—6 mukainen menetelmä, jossa sano-man esittävän päätelaitteen (MS) käyttöliittymä (UI) käsittää ainakin 113231 näytön, tunnettu siitä, että ainakin yksi komponentti sisältää visuaalista informaatiota, jolloin mainittuun esitysohjeistoon liitetään lisäksi tieto komponentin sijoittamisesta mainittuun näyttöön.
8. Jonkin patenttivaatimuksen 1—7 mukainen menetelmä, jossa sano man esittävän päätelaitteen (MS) käyttöliittymä (UI) käsittää ainakin audiovälineet, tunnettu siitä, että ainakin yksi komponentti sisältää audioinformaatiota, jolloin mainittuun esitysohjeistoon liitetään lisäksi tieto komponentin muuntamisesta audioinformaatioksi audiovälineissä. 10
9. Jonkin patenttivaatimuksen 1—8 mukainen menetelmä, tunnettu siitä, että mainittuun esitysohjeistoon liitetään lisäksi tieto komponentin vaikutusajasta, kuten kuvan tai tekstin näyttöaika tai äänen toistoaika.
10. Patenttivaatimuksen 9 mukainen menetelmä, tunnettu siitä, että sanoma käsittää ainakin kaksi komponenttia, jolloin mainittuun esitysohjeistoon liitetään lisäksi tieto komponenttien keskinäisestä tahdistuksesta.
11. Jonkin patenttivaatimuksen 1—10 mukainen menetelmä, tunnettu siitä, että sanoma käsittää ainakin kaksi sivua, jolloin mainittuun esitys-ohjeistoon liitetään tieto sivujen esitysjärjestyksestä.
12. Multimediasanomien välitysjärjestelmä joka käsittää väli- 25 neet(MMSC) sanomien välittämiseksi multimediapäätelaitteeseen (MS), joka käsittää käyttöliittymän (UI) sanomien sisältämän informaation esittämiseksi, ja kukin sanoma käsittää ainakin yhden komponentin, tunnettu siitä, että järjestelmä käsittää välineet (MOD) esitysohjeis-ton (SMIL) muodostamiseksi sanomaan, joka esitysohjeisto (SMIL) 30 käsittää ainakin yhden sanomaan liitetyn komponentin esittämiseen liittyvää tietoa, että mainittuun esitysohjeistoon (SMIL) on liitetty viittaus ainakin yhden komponentin esittämiseen liittyvän tiedon sijainnista j mainitussa sanomassa, jolloin järjestelmä käsittää välineet (COMP) mainitun esitysohjeiston (SMIL) liittämiseksi mainittuun sanomaan. 35 113231
13. Patenttivaatimuksen 10 mukainen multimediasanomien välitysjärjestelmä, tunnettu siitä, että sanoman lähettävä päätelaite (MS’) käsittää välineet (COMP) esitysohjeiston muodostamiseksi.
14. Patenttivaatimuksen 10 mukainen sanomien välitysjärjestelmä, tunnettu siitä, että se käsittää multimediasanomapalvelukeskuksen (MMSC), joka käsittää välineet (MEM) multimediapäätelaitteelle (MS) osoitettujen sanomien vastaanottamiseksi, välineet (MSG) sanomien lähettämiseksi edelleen multimediapäätelaitteelle (MS), ja väli-10 neet (COMP) esitysohjeiston muodostamiseksi.
15. Patenttivaatimuksen 12, 13 tai 14 mukainen multimediasanomien välitysjärjestelmä, tunnettu siitä, että mainittu esitysohjeisto on muodostettu käyttämällä SMIL-formaattia. 15
16. Jonkin patenttivaatimuksen 12—15 mukainen multimediasanomien välitysjärjestelmä, jossa sanoman esittävän päätelaitteen (MS) käyttöliittymä (UI) käsittää ainakin näytön, tunnettu siitä, että ainakin yksi komponentti käsittää visuaalista informaatiota, jolloin mainittuun esitys- 20 ohjeistoon on liitetty lisäksi tieto komponentin sijoittamisesta mainittuun näyttöön. v ·* 17. Jonkin patenttivaatimuksen 12—16 mukainen multimediasanomien ’*’· välitysjärjestelmä, jossa sanoman esittävän multimediapäätelait- 25 teen (MS) käyttöliittymä (UI) käsittää ainakin audiovälineet, tunnettu siitä, että ainakin yksi komponentti käsittää audioinformaatiota, jolloin *. mainittuun esitysohjeistoon on liitetty lisäksi tieto komponentin muun- :tamisesta audioinformaatioksi audiovälineissä.
17 113231
18. Jonkin patenttivaatimuksen 12—17 mukainen multimediasanomien välitysjärjestelmä, tunnettu siitä, että mainittuun esitysohjeistoon on liitetty lisäksi tieto komponentin vaikutusajasta, kuten kuvan tai tekstin :' * ’: näyttöaika tai äänen toistoaika. »»»* * i · . 35
19. Jonkin patenttivaatimuksen 12—18 mukainen multimediasanomien välitysjärjestelmä, tunnettu siitä, että sanoma käsittää ainakin kaksi 20 1 13231 multimediasivua, jolloin mainittuun esitysohjeistoon on liitetty tieto mul-timediasivujen esitysjärjestyksestä.
20. Jonkin patenttivaatimuksen 12—19 mukainen multimediasanomien 5 välitysjärjestelmä, tunnettu siitä, että sanoma käsittää ainakin kaksi multimediasivua, jolloin mainittuun esitysohjeistoon on liitetty tieto mul-timediasivujen esitysjärjestyksestä.
21. Lähettävä multimediapäätelaite (MS), joka käsittää välineet (UI) sa-10 nomien muodostamiseksi ainakin yhdestä komponentista, ja välineet (RF) sanomien lähettämiseksi, tunnettu siitä, että multimediapäätelaite (MS) käsittää lisäksi välineet (MOD) esitysohjeiston (SMIL) muodostamiseksi sanomaan, joka esitysohjeisto (SMIL) käsittää ainakin yhden sanomaan liitetyn komponentin esittämiseen liittyvää tietoa, ja jo- 15 hon esitysohjeistoon (SMIL) on liitetty viittaus ainakin yhden komponentin esittämiseen liittyvän tiedon sijainnista mainitussa sanomassa.
22. Vastaanottava multimediapäätelaite (MS), joka käsittää välineet (RF) sanomien vastaanottamiseksi, ja käyttöliittymän (UI) sano- 20 mien sisältämän informaation esittämiseksi, ja kukin sanoma käsittää ainakin yhden komponentin, tunnettu siitä, että multimediapäätelaite (MS) käsittää lisäksi välineet (MOD) sanomaan muodostetun esitysoh-v ; jeiston (SMIL) tulkitsemiseksi, joka esitysohjeisto (SMIL) käsittää aina- ν'kin yhden sanomaan liitetyn komponentin esittämiseen liittyvää tietoa, : ’25 ja johon esitysohjeistoon (SMIL) on liitetty viittaus ainakin yhden kom-:"ponentin esittämiseen liittyvän tiedon sijainnista mainitussa sanomassa, ···. jolloin multimediapäätelaite (MS) käsittää välineet (COMP) mainitun esitysohjeiston (SMIL) selvittämiseksi mainitusta sanomasta. * * *
23. Patenttivaatimuksen 21 tai 22 mukainen multimediapäätelaite, I · tunnettu siitä, että se on langaton päätelaite (MS’). • · I » · k · > M I » • » : » 113231
FI20000089A 2000-01-17 2000-01-17 Menetelmä sanomien sisältämän informaation esittämiseksi multimediapäätelaitteessa, multimediasanomien välitysjärjestelmä ja multimediapäätelaite FI113231B (fi)

Priority Applications (7)

Application Number Priority Date Filing Date Title
FI20000089A FI113231B (fi) 2000-01-17 2000-01-17 Menetelmä sanomien sisältämän informaation esittämiseksi multimediapäätelaitteessa, multimediasanomien välitysjärjestelmä ja multimediapäätelaite
US09/761,040 US8364762B2 (en) 2000-01-17 2001-01-16 Method for presenting information contained in messages in a multimedia terminal, a system for transmitting multimedia messages, and a multimedia terminal
EP01660008.2A EP1117230B1 (en) 2000-01-17 2001-01-16 A method and system for presenting information in a multimedia terminal
EP14187574.0A EP2821929A1 (en) 2000-01-17 2001-01-16 A method for presenting information contained in messages in a multimedia terminal, a system for transmitting multimedia messages, and a multimedia terminal
US13/722,470 US8667073B2 (en) 2000-01-17 2012-12-20 Method for presenting information contained in messages in a multimedia terminal, a system for transmitting multimedia messages, and a multimedia terminal
US14/161,808 US9338109B2 (en) 2000-01-17 2014-01-23 Method for presenting information contained in messages in a multimedia terminal, a system for transmitting multimedia messages, and a multimedia terminal
US15/151,425 US10009739B2 (en) 2000-01-17 2016-05-10 Method for presenting information contained in messages in a multimedia terminal, a system for transmitting multimedia messages, and a multimedia terminal

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
FI20000089 2000-01-17
FI20000089A FI113231B (fi) 2000-01-17 2000-01-17 Menetelmä sanomien sisältämän informaation esittämiseksi multimediapäätelaitteessa, multimediasanomien välitysjärjestelmä ja multimediapäätelaite

Publications (3)

Publication Number Publication Date
FI20000089A0 FI20000089A0 (fi) 2000-01-17
FI20000089A FI20000089A (fi) 2001-07-18
FI113231B true FI113231B (fi) 2004-03-15

Family

ID=8557093

Family Applications (1)

Application Number Title Priority Date Filing Date
FI20000089A FI113231B (fi) 2000-01-17 2000-01-17 Menetelmä sanomien sisältämän informaation esittämiseksi multimediapäätelaitteessa, multimediasanomien välitysjärjestelmä ja multimediapäätelaite

Country Status (3)

Country Link
US (4) US8364762B2 (fi)
EP (2) EP2821929A1 (fi)
FI (1) FI113231B (fi)

Families Citing this family (47)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
FI112307B (fi) 2000-08-02 2003-11-14 Nokia Corp Viestintäpalvelu
FI115744B (fi) * 2001-02-08 2005-06-30 Nokia Corp Kommunikaatiopalvelu
FR2828368B1 (fr) * 2001-08-03 2005-03-04 Qualimucho Media Sa Procede de transmission et de restitution d'un message multimedia pour terminal mobile
US20030050049A1 (en) * 2001-09-13 2003-03-13 Sundstrom Lars Henrik Mobile information service
KR20030040929A (ko) * 2001-11-17 2003-05-23 엘지전자 주식회사 이동통신단말기의 멀티미디어 재생방법
US7200388B2 (en) * 2002-05-31 2007-04-03 Nokia Corporation Fragmented delivery of multimedia
US7116995B2 (en) * 2002-05-31 2006-10-03 Nokia Corporation System and method for operating intravendor and intervendor messaging systems
FR2843515B1 (fr) * 2002-08-08 2004-11-12 Eastman Kodak Co Procede de mise en page de messages multimedias
KR100474305B1 (ko) * 2002-09-14 2005-03-10 엘지전자 주식회사 이동 통신 단말기의 멀티미디어 메시지 작성을 위한 사용자 인터페이스 방법
EP1403778A1 (en) * 2002-09-27 2004-03-31 Sony International (Europe) GmbH Adaptive multimedia integration language (AMIL) for adaptive multimedia applications and presentations
KR100408357B1 (en) * 2003-01-29 2003-12-03 Hinet Advanced Technology & In Multimedia messaging service method
CN1553369A (zh) * 2003-05-29 2004-12-08 �Ҵ���˾ 用于多媒体消息业务的互动方法、用户终端及其通信系统
KR100619803B1 (ko) * 2003-06-17 2006-09-05 엘지전자 주식회사 이동 단말기의 대기화면 설정방법
ATE305638T1 (de) * 2003-07-04 2005-10-15 France Telecom Verfahren zum starten eines operators zur multimedianachrichtenobjektbearbeitung und entsprechendes endgerät
FR2862458A1 (fr) * 2003-11-17 2005-05-20 France Telecom Procede de composition et de transmission d'un message, support d'enregistrement et terminal de telecommunication correspondant.
US20050111041A1 (en) * 2003-11-25 2005-05-26 Nokia Corporation Rendering electronic presentations to printed surface
EP1714458A1 (fr) * 2004-02-13 2006-10-25 France Telecom Procede d'edition d'une page multimedia avec pre-memorisation
US8639845B2 (en) * 2004-02-13 2014-01-28 France Telecom Method for editing multimedia pages on a terminal using pre-stored parameters of objects appearing in scenes
US20050187756A1 (en) * 2004-02-25 2005-08-25 Nokia Corporation System and apparatus for handling presentation language messages
KR100677308B1 (ko) 2004-03-24 2007-02-05 엘지전자 주식회사 휴대단말기의 동영상효과 메시지 전송장치 및 방법
GB0420531D0 (en) * 2004-09-15 2004-10-20 Nokia Corp File delivery session handling
US7657554B2 (en) * 2004-11-05 2010-02-02 Microsoft Corporation Method and system for managing user interface messages
US20060150213A1 (en) * 2004-12-16 2006-07-06 Zechary Chang Executing module and method thereof for playing multimedia in a wireless communication apparatus
US20060218282A1 (en) * 2005-03-23 2006-09-28 Nokia Corporation System and method for providing mobile assisted, fixed line video calls
CN1855095A (zh) * 2005-04-27 2006-11-01 国际商业机器公司 用于播放基于smil的多媒体内容的系统、方法及引擎
CN1855910B (zh) * 2005-04-27 2010-12-15 国际商业机器公司 基于Web的统一通信系统和方法以及Web通信管理器
US8819143B2 (en) * 2005-05-31 2014-08-26 Flash Networks Ltd. Presentation layer adaptation in multimedia messaging
GB2427527B (en) * 2005-06-21 2010-04-14 Vodafone Plc Content delivery in a telecommunications network
US8977636B2 (en) * 2005-08-19 2015-03-10 International Business Machines Corporation Synthesizing aggregate data of disparate data types into data of a uniform data type
US8266220B2 (en) * 2005-09-14 2012-09-11 International Business Machines Corporation Email management and rendering
US8694319B2 (en) 2005-11-03 2014-04-08 International Business Machines Corporation Dynamic prosody adjustment for voice-rendering synthesized data
US7747474B2 (en) * 2005-12-13 2010-06-29 Equatrax Shared royalty platform for content royalty management
US8271107B2 (en) * 2006-01-13 2012-09-18 International Business Machines Corporation Controlling audio operation for data management and data rendering
US9135339B2 (en) 2006-02-13 2015-09-15 International Business Machines Corporation Invoking an audio hyperlink
US7996754B2 (en) * 2006-02-13 2011-08-09 International Business Machines Corporation Consolidated content management
US20070198731A1 (en) * 2006-02-21 2007-08-23 Mediatek Inc. System and method for processing multimedia messages
US8849895B2 (en) 2006-03-09 2014-09-30 International Business Machines Corporation Associating user selected content management directives with user selected ratings
US9092542B2 (en) 2006-03-09 2015-07-28 International Business Machines Corporation Podcasting content associated with a user account
US9361299B2 (en) 2006-03-09 2016-06-07 International Business Machines Corporation RSS content administration for rendering RSS content on a digital audio player
US8286229B2 (en) 2006-05-24 2012-10-09 International Business Machines Corporation Token-based content subscription
US9196241B2 (en) 2006-09-29 2015-11-24 International Business Machines Corporation Asynchronous communications using messages recorded on handheld devices
US7701082B2 (en) * 2006-10-30 2010-04-20 Honeywell International Inc. Aerospace electrical power DC subsystem configuration using multi-functional DC/DC converter
US9318100B2 (en) 2007-01-03 2016-04-19 International Business Machines Corporation Supplementing audio recorded in a media file
US8219402B2 (en) 2007-01-03 2012-07-10 International Business Machines Corporation Asynchronous receipt of information from a user
WO2009032953A2 (en) * 2007-09-04 2009-03-12 Tapioca Mobile, Inc. Delivering merged advertising and content for mobile devices
CN103002407B (zh) * 2011-09-14 2018-01-16 中兴通讯股份有限公司 一种在彩信中传输3d图片的方法及系统
CN102387481B (zh) * 2011-10-08 2018-04-17 中兴通讯股份有限公司 一种彩信编辑方法及装置

Family Cites Families (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5696500A (en) 1995-08-18 1997-12-09 Motorola, Inc. Multi-media receiver and system therefor
FI115747B (fi) 1998-02-12 2005-06-30 Nokia Corp Tiedonsiirtomenetelmä
US6421707B1 (en) * 1998-02-13 2002-07-16 Lucent Technologies Inc. Wireless multi-media messaging communications method and apparatus
FI108982B (fi) * 1998-06-15 2002-04-30 Nokia Corp Sanomapalvelu langattomassa tietoliikennejärjestelmässä
US6715126B1 (en) * 1998-09-16 2004-03-30 International Business Machines Corporation Efficient streaming of synchronized web content from multiple sources
US6446082B1 (en) * 1998-09-21 2002-09-03 Impress Corporation Method of receiving time-specified program contents
US6487663B1 (en) * 1998-10-19 2002-11-26 Realnetworks, Inc. System and method for regulating the transmission of media data
DE19856441C5 (de) * 1998-12-08 2004-11-18 Robert Bosch Gmbh Verfahren zur Übertragung von Kurznachrichten
US6654030B1 (en) * 1999-03-31 2003-11-25 Canon Kabushiki Kaisha Time marker for synchronized multimedia
JP2001014417A (ja) * 1999-03-31 2001-01-19 Canon Inc マルチメディアプレゼンテーションに対するビジュアルキューの同期
US6745368B1 (en) * 1999-06-11 2004-06-01 Liberate Technologies Methods, apparatus, and systems for storing, retrieving and playing multimedia data
US6701383B1 (en) * 1999-06-22 2004-03-02 Interactive Video Technologies, Inc. Cross-platform framework-independent synchronization abstraction layer
US7308697B1 (en) * 1999-07-14 2007-12-11 Scientific-Atlanta, Inc. Systems and methods for multimedia messaging in a cable or satellite subscriber system
US6640238B1 (en) * 1999-08-31 2003-10-28 Accenture Llp Activity component in a presentation services patterns environment
US6615253B1 (en) * 1999-08-31 2003-09-02 Accenture Llp Efficient server side data retrieval for execution of client side applications
US6332163B1 (en) * 1999-09-01 2001-12-18 Accenture, Llp Method for providing communication services over a computer network system
US6480191B1 (en) * 1999-09-28 2002-11-12 Ricoh Co., Ltd. Method and apparatus for recording and playback of multidimensional walkthrough narratives
FI112427B (fi) * 1999-11-05 2003-11-28 Nokia Corp Menetelmä langattoman päätelaitteen ominaisuuksien määrittämiseksi multimediasanoman välityspalvelussa, multimediasanoman välityspalvelu ja multimediapäätelaite
US7299405B1 (en) * 2000-03-08 2007-11-20 Ricoh Company, Ltd. Method and system for information management to facilitate the exchange of ideas during a collaborative effort

Also Published As

Publication number Publication date
US8364762B2 (en) 2013-01-29
US20160277904A1 (en) 2016-09-22
EP2821929A1 (en) 2015-01-07
EP1117230B1 (en) 2014-10-22
FI20000089A (fi) 2001-07-18
US9338109B2 (en) 2016-05-10
US10009739B2 (en) 2018-06-26
US20140136641A1 (en) 2014-05-15
US8667073B2 (en) 2014-03-04
EP1117230A2 (en) 2001-07-18
US20010040900A1 (en) 2001-11-15
EP1117230A3 (en) 2005-02-23
US20130117394A1 (en) 2013-05-09
FI20000089A0 (fi) 2000-01-17

Similar Documents

Publication Publication Date Title
FI113231B (fi) Menetelmä sanomien sisältämän informaation esittämiseksi multimediapäätelaitteessa, multimediasanomien välitysjärjestelmä ja multimediapäätelaite
EP1240754B1 (en) Multimedia messaging service
FI112427B (fi) Menetelmä langattoman päätelaitteen ominaisuuksien määrittämiseksi multimediasanoman välityspalvelussa, multimediasanoman välityspalvelu ja multimediapäätelaite
KR100955441B1 (ko) 무선 디바이스에서 상이한 메시지 서비스들의 메시지들을 라우팅하기 위한 방법 및 장치
FI113606B (fi) Menetelmä sanomien välittämiseksi, tiedonsiirtojärjestelmä ja päätelaite
JP2004129270A (ja) インスタントボイスメッセージング方法及びインスタントボイスメッセージング装置。
CA2605922A1 (en) Selecting a suitable messaging service according to message content and recipient information
JP2008182646A (ja) 移動体通信端末及びサーバ
JP2004532485A (ja) マルチメディアレファレンスを有するメッセージのハンドリングのための方法
JP2005033659A (ja) メールサーバ装置及び情報通信システム
JP2009521155A (ja) 電気通信システムにおける情報流通
JP4527493B2 (ja) 移動体通信端末
JP4416624B2 (ja) 移動体通信端末
KR100559347B1 (ko) 멀티미디어 메시징 서비스 구현 방법, 멀티미디어 메시징시스템, 멀티미디어 메시징 시스템 서버 및 멀티미디어단말기
JP4465252B2 (ja) 移動体通信端末
JP4527494B2 (ja) 移動体通信端末
JP2006163780A (ja) サーバに対する情報通知方法、コンテンツ提供方法、コンテンツ取得時の通信方法、移動体通信端末、コンテンツ提供サーバ及び通信中継サーバ
JP2006119853A (ja) 移動体通信端末及びマルチメディアメッセージ用情報処理装置
JP2006119852A (ja) 移動体通信端末
JP2006121353A (ja) 移動体通信端末
JP2006121350A (ja) 移動体通信端末

Legal Events

Date Code Title Description
PC Transfer of assignment of patent

Owner name: 2011 INTELLECTUAL PROPERTY ASSET TRUST

PC Transfer of assignment of patent

Owner name: CORE WIRELESS LICENSING S.A.R.L.

MM Patent lapsed