FI118549B - Menetelmä ja järjestelmä äänipalautteen järjestämiseksi digitaaliseen langattomaan päätelaitteeseen sekä vastaava päätelaite ja palvelin - Google Patents

Menetelmä ja järjestelmä äänipalautteen järjestämiseksi digitaaliseen langattomaan päätelaitteeseen sekä vastaava päätelaite ja palvelin Download PDF

Info

Publication number
FI118549B
FI118549B FI20025032A FI20025032A FI118549B FI 118549 B FI118549 B FI 118549B FI 20025032 A FI20025032 A FI 20025032A FI 20025032 A FI20025032 A FI 20025032A FI 118549 B FI118549 B FI 118549B
Authority
FI
Finland
Prior art keywords
ppm
terminal
voice
file
user
Prior art date
Application number
FI20025032A
Other languages
English (en)
Swedish (sv)
Other versions
FI20025032A (fi
FI20025032A0 (fi
Inventor
Antti Kaatrasalo
Original Assignee
Nokia Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nokia Corp filed Critical Nokia Corp
Priority to FI20025032A priority Critical patent/FI118549B/fi
Publication of FI20025032A0 publication Critical patent/FI20025032A0/fi
Priority to US10/448,782 priority patent/US7672850B2/en
Publication of FI20025032A publication Critical patent/FI20025032A/fi
Application granted granted Critical
Publication of FI118549B publication Critical patent/FI118549B/fi

Links

Classifications

    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L19/00Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis

Description

118549
MENETELMÄ JA JÄRJESTELMÄ ÄÄNI PALAUTTEEN JÄRJESTÄMISEKSI DIGITAALISEEN LANGATTOMAAN PÄÄTELAITTEESEEN SEKÄ VASTAAVA PÄÄTELAITE JA PALVELIN
5 Keksinnön kohteena on menetelmä äänipalautteen järjestämiseksi digitaaliseen langattomaan päätelaitteeseen, johon kuuluu ää-niavusteinen käyttöliittymä (Voice UI), jossa - käyttäjä asettaa päätelaitteen valitsemaansa toimintatilaan, 10 - päätelaite siirtyy käyttäjän asettamaan toimintatilaan ja - päätelaite antaa asetettua toimintatilaa vastaavan ääni-palautteen ja jossa sanotun äänipalautteen järjestämiseksi päätelaitteen 15 yhteyteen vaiheittain - luodaan yksi tai useampia äänipalautteitä, - äänipalautteet konvertoidaan digitaaliseen muotoon, - digitalisoituja äänipalautteita muokataan valituilla algoritmeilla niiden tiedostokoon pienentämiseksi ja tal- 20 lentämiseksi päätelaitteen yhteyteen järjestettyihin PPM- muistivälineisiin (Post-Programmable Memory).
. , Keksintö koskee myös vastaavaa päätelaitetta, palvelinta ja jär- * · t .* .* jestelmää.
• · · • # • · *·· • · ]···' 25 Digitaalisiin langattomiin päätelaitteisiin on tuotu uutena omi- • * · :·· : naisuutena ääniavusteinen käyttöliittymä. Ääniavusteisellä käyt- • · · töliittymällä mahdollistetaan käyttäjälle vaivaton ja erityises- • · *···* ti katsekontaktiton tapa hallita päätelaitetta. Tällaisella käyttöliittymäkonseptilla saavutetaan etua esimerkiksi • · • · ί ** 30 professional-käyttäjäpiireissä, kuten esimerkiksi viranomais- ja * · · ajoneuvokäytössä sekä visuaalisilta kyvyiltään rajoittuneiden :***· käyttäjien keskuudessa.
• · · * • · . \ Ääniavus teiseen käyttöliittymään liittyy aina tarve saada infor- • · · T J 35 maatiota katsekontaktittomasti päätelaitteelle tehtyjen asetus- ·# ten kulloisestakin tilasta ja komentojen perillemenosta. Eräänä esimerkkinä tällaisesta voidaan mainita tilanne, jossa käyttäjä 2 118549 asettaa päätelaitteensä kuuntelemaan tiettyä liikennekanavaa. Tällöin kierrettävällä kanavanvalitsimella valitaan esimerkiksi manuaalisesti kanava, jonka jälkeen päätelaite antaa kanavava-lintaa vastaavan äänipalautteen (voicefeedback). Jos kanavan 5 valinta onnistui voidaan valintatoimet lopettaa. Sen sijaan, jos kanavanvalinta epäonnistui valintatoimia jatketaan, kunnes haluttu liikennekanava löytyy.
Esimerkiksi edellä kuvatussa tilanteessa käytettyjen äänipalaut-10 teiden tallentaminen tunnetun tekniikan mukaisiin päätelaitteisiin on ollut hyvin ongelmallista ja yleensäkin sen toteuttamiseksi ei ole juurikaan olemassa toimivia ratkaisuja. Ongelmaksi on lisäksi koettu myös se, että kuinka äänipalautteitä voitaisiin yleensäkin käyttää ääniavusteisessa käyttöliittymässä ja 15 kuinka ne voitaisiin kytkeä käyttäjien päätelaitteelle suorittamiin ohjaustoimenpiteisiin. Edelleen äänipalautetallenteille ei ole olemassa edullista tiedostoformaattia, jolla sen päätelaitteelta varaamat muistiresurssit saataisiin minimoitua.
20 Kuvatunlaiselle ongelmalle ei ole olemassa aiempia toteutusmal- . leja johtuen jopa osaksi käyttöliittymäominaisuuden uutuudesta.
• ·· ,* Sovellusalueeltaan lähimmät toteutukset löytyvät eräiden matka- • · · • · viestinpäätelaitteiden nimi/äänisoittotoimintojen yhteydestä.
• · • · ··· • · • · · • · ♦ *** ; 25 Tämän keksinnön tarkoituksena on saada aikaan uudenlainen mene- • · · ;.** telmä äänipalautteiden järjestämiseksi digitaaliseen langatto- • · *·*’* maan päätelaitteeseen, jossa palaute voidaan tallentaa yksinker taisesti päätelaitteen sinänsä tunnettuihin muistivälineisiin.
• »
Keksinnön mukaisen menetelmän tunnusomaiset piirteet on esitetty • · '···* 30 patenttivaatimuksessa 1 ja menetelmän toteuttavan päätelaitteen * · 4 ί4>#: patenttivaatimuksessa 8 sekä vastaavan palvelimen patenttivaati- *:**: muksessa 9 ja järjestelmän patenttivaatimuksessa 10.
• · • · · • * * .·, : Keksinnön mukaisessa menetelmässä äänipalautteiden tallentami- *· #* 35 seen ja antamiseen käytetään päätelaitteessa olevaa pPM-muistia 3 1 1 8549 (Post-Programmable Memory), jolle on tyypillistä uudelleenkirjoitettavuus.
Keksinnön mukaisessa menetelmässä luodut äänipalautteet digitalisoidaan ja tallennetaan esimerkiksi jossain hyvin tuetussa 5 tiedostoformaatissa. Tämän jälkeen muodostettuja äänipalautetie-dostoja käsitellään valituilla algoritmeilla muun muassa niiden tiedostokoon pienentämiseksi ja käyttöprofiilispesifisen äänipa-lautetiedostopaketin muodostamiseksi. Näin aikaan saadut tiedos-topaketit koostetaan sitten yhdeksi äänipalaute-PPM-datapaketik-10 si, joka integroidaan yhteen muista käyttöliittymäasetuksista koostettujen PPM-datapakettien kanssa. Näin muodostetusta PPM-tiedostosta voidaan erään edullisen sovellusmuodon mukaan valita haluttuja käyttöprofiileja vastaava data, joka tallennetaan päätelaitteen PPM-muistivälineisiin.
15
Keksinnön mukaisessa menetelmässä päätelaitteen loppukäyttäjä, käyttäjäryhmä, verkko-operaattori, palveluntarjoaja tai vastaava organisaatio voi luoda päätelaitteidensa käyttöliittymään omia henkilökohtaisia äänipalautteitä.
20 . . Keksinnön mukaisella menetelmällä saavutetaan useita merkittäviä ♦ · · • ♦· ,1 .* etuja. Käyttöliittymän äänipalautteet ovat menetelmän myötä jär- ♦ · · • « jestettyinä päätelaitteen turvalliseen muistialueeseen, jolloin • · • i .*** päätelaitteen käyttäjän ei ole mahdollista kadottaa palauttei- • · · • · · *" ; 25 taan. Edelleen menetelmän mukaisella toteutustavalla poistetaan • i * päätelaitteen opetustarve. Tunnetuissa ääniavusteisissa pääte- • · *···' laitteissahan käyttäjä yleensä joutuu manuaalisesti asettelemaan toimintojen ja niitä vastaavien palautteiden vastaavuudet.
• ·· ··· • · *···* 30 Eräs merkittävimmistä keksinnön mukaisella menetelmällä saavu- tettavista eduista on se, että äänipalautteet saadaan tiivistet- ·;·*: tyä hyvin pieneen kokoon pienentäen näin päätelaitteesta varat- : tavan muistin tarvetta. Tiivistämiseen käytetään edullisemmin • · » .·] ♦ kohdepäätelaitteissa käytettäviä puhekoodekkeja.
• ·· • · 35 4 118549
Erään toisen edullisen sovellusmuodon mukaan voidaan äänipalaut-teiden luomiseen käyttää myös äänipalautteiden varsinaista koh-delaitetta. Täällä saavutetaan erityistä etua monikielitietokannan koostamisessa, koska nyt äänipalautteet voidaan kerätä jous-5 tavasti loppukäyttäjiltä näiden tarpeiden mukaisesti. Tällä saavutetaan merkittävää kustannussäästöä, koska varsinkaan pienten kielialueiden tapauksissa ei ole järkevää käyttää ääniavusteisen käyttöliittymän lokalisointiin erityisiä ammattilaisia.
io Edelleen menetelmä mahdollistaa äänipalautteiden varioitavuuden. Käyttäjät voivat tallentaa esimerkiksi samalla ohjelmistolla omia palautteitaan, joista sitten "paras" voidaan "yleistää" kyseessä olevalle kielialueelle, organisaatiolle tai vastaavalle. Koska päätelaitetta käyttävät sen todelliset käyttäjät tois dellisessa toimintaympäristössä, niin palautteet voidaan näin hioa operatiivisesti tarkoituksenmukaisiksi.
Esimerkkejä keksinnön sovelluskohteena olevista langattomista päätelaitteista ovat CDMA- (Code Division Multiple Access), 20 TDMA- (Time Division Multiple Access) ja FDMA- (Frequency Di- , vision Multiple Access) teknologioihin perustuvat ratkaisut ja • ·· .1 .* näiden alimäärittelyt. Lisäksi keksintöä voidaan soveltaa multi- • ♦ · ♦ · mediapäätelaitteissä, joista esimerkkinä voidaan mainita satel- : : .**’ liittivastaanottimet.
• · · • · · *·· · 25 *.,* Muut keksinnön mukaiselle menetelmälle, päätelaitteelle ja pal- J · *·** velimelle ominaiset piirteet käyvät ilmi oheisista patenttivaa- ip timuksista ja lisää saavutettavia etuja on lueteltu selitysosas- • ·
• II
• sa.
m
• I
*···* 30 • · · ϊ : Keksinnön mukaista menetelmää ei ole rajoitettu seuraavassa esi- ··· *!": tettäviin suoritusmuotoihin, selostetaan tarkemmin viittaamalla : .·. oheisiin kuviin, joissa
• I I
• M I • ·
• · I
• ·· 35 Kuva 1 esittää kaaviokuvana esimerkkiä keksinnön mukaiseen menetelmään osallistuvista osapuolista.
5 118549
Kuva 2 esittää esimerkkiä keksinnön mukaisesta menetelmästä käyttöprofiilispesifisten äänipalautteiden muodostamisessa vuokaaviona,
Kuva 3 esittää esimerkkiä keksinnön mukaisesta menetelmästä 5 käyttöprofiilispesifisten äänipalautteiden kokoamisek si yhdeksi PPM-datapaketiksi vuokaaviona.
Kuva 4 esittää esimerkkiä keksinnön mukaisesta menetelmästä PPM-tiedoston muodostamisessa vuokaaviona,
Kuva 5 esittää esimerkkiä keksinnön mukaisesta menetelmästä 10 käyttöprofiilispesifisen datan koostamisessa pääte laitteelle ladattavaksi PPM-tiedostoksi vuokaaviona ja Kuva 6 esittää esimerkkiä keksinnön mukaisesta menetelmästä koostetun PPM-tiedoston tallentamisessa päätelaitteelle vuokaaviona.
15
Kuvassa 1 on kaaviomaisesti esitetty eräs esimerkki keksinnön mukaisen menetelmän mahdollisesta toimintaympäristöstä ja myös eräs esimerkki menetelmässä operoivista osapuolista. Puhuttaessa jatkossa äänipalautteista, näillä tarkoitetaan tallennettuja 20 ihmisperäisiä puhepalautteita, jotka päätelaitteen 10.1 - 10.3 . , ääriiavusteinen käyttöliittymä (Voice UI) on asetettu toistamaan • · · • * · .1 .* mahdollistaen näin tämän katsekontaktit toman hallinnan useissa • · · • · eri toimintatilanteissa ja tapahtumissa.
• · * · ··· • · • » “· j 25 Termi ääniavusteinen voidaan ymmärtää hyvin laajasti. Sillä voi-• · · daan tarkoittaa erään ensimmäisen sovellusmuodon mukaan käyttö- • · *···* liittymää, jossa käyttäjä A, B, C asettaa päätelaitteensa 10.1 - 10.3 valitsemaansa toimintatilaan manuaalisesti, jonka jälkeen • * ϊ *’ päätelaite 10.1 - 10.3 siirtyy tähän tilaan ja antaa sitä vas- • Il • · *···' 30 taavan äänipalautteen. Erään toisen sovellusmuodon mukaan ää- niavusteisessa käyttöliittymässä päätelaitteen 10.1 - 10.3 käyt- ·;·*: täjä A, B, C voi tehdä sanotun toimintatila-asetuksen myös si- ; *·. ten, että tämä lausuu päätelaitteelle 10.1 - 10.3 asettamansa • · · | komennon. Päätelaitteeseen 10.1 - 10.3 järjestetty puheentunnis- • ·· 35 tustoiminnallisuus tunnistaa komennon, siirtyy sitä vastaavaan 6 118549 toimintatilaan ja antaa sen jälkeen komentoa vastaavan äänipalau,tteen.
Keksinnön mukaisessa menetelmässä on yllättävää se, että äänipa-lautteiden tallentamiseen käytetään päätelaitteessa 10.1 - 10.3 5 erityistä muistialuetta. Päätelaitteissa 10.1 - 10.3 käytettävä muistityyppi on yleensä uudelleenkirjoitettavaa flash-muistia, joka on tavanomaisesti jaettu kahteen alueeseen. Ensimmäiseen muistialueeseen on järjestetty päätelaitteen 10.1 - 10.3 ohjelmistot, kuten sen käyttöjärjestelmä MCU (Master Control Unit) ja 10 toiseen alueeseen päätelaitteen 10.1 - 10.3 käyttöprofiilis-pesifistä dataa. Käyttöprofiililla voidaan tarkoittaa tässä esimerkiksi kielialuetta ja datalla, esimerkiksi kieleen kuuluvia merkkejä ja kirjasimia, kielellä ilmaistuja käyttöliittymäteks-tejä, kielelle ominaista aakkosjärjestystä, kyseiselle kielialu-15 eelle suunnattuja soittoääniä jne.. Näitä käyttöprofiileja voi olla päätelaitteeseen 10.1 - 10.3 kerralla järjestettyinä esimerkiksi neljä.
Tälle datalle tai tarkemmin sanottuna niistä muodostetulle niin 20 sanotulle PPM-tiedostolle varattua muistialuetta kutsutaan PPM-. muistiksi (Post-Programmable Memory) , jonka päätelaitteen 10.1 -
* M
.* 10.3 ohjelmistot näkevät ROM-muistina (Read Only Memory). PPM- • · · • · muistialueelle on ominaista, että se on järjestetty erilleen • · * · .**; kiinteästä koodista ja vakioalueesta, jolloin siihen eivät vai- • · · *** j 25 kuta päätelaitteen 10.1 - 10.3 ohjelmistoversiot tai niiden tar-• · · *·,/ kistussummat.
• · • · PPM-muistiin tallennettujen datapakettien tai niistä muodostetun Φ · • ** PPM-tiedoston on noudatettava määrätynlaista rakenteellisuutta ··· • ♦ *·♦♦* 30 ja niillä on oltava täsmälliset tunnisteet, jotta päätelaitteen ohjelmistot löytävät ja kykenevät lukemaan kussakin tilanteessa *:**: vaadittua dataa.
• · • · · ··· * .·. · Kuvassa 2 on esitetty vuokaaviona eräs keksinnön mukaisen mene- ·· 35 telmän sovellusesimerkki käyttöprofiilispesifisten äänipalaut- 7 118549 teiden muodostamiseksi, jota seuraavaksi selostetaan kuvassa 1 esitettyjen osapuoliin viitaten.
Keksinnön mukaisessa menetelmässä asiakas, kuten esimerkiksi 5 loppukäyttäjä A, B, C, näistä muodostettu päätelaitteen 10.1 - 10.3 käyttäjäryhmä (esimerkiksi pelastus-, puolustus- tai liikennelaitos) , verkko-operaattori, palveluntarjoaja, yritysorganisaatio tai muu vastaava voi luoda itselleen äänipalautteita. Sovellusesimerkissä, jossa kuvataan menetelmän soveltamista 10 TETRA-verkkojär jestelmässä 11 (TErrestrial Trunked RAdio) suoritettavaan viranomaiskäyttöön, äänipalautteet luodaan erään ensimmäisen suoritusmuodon mukaan käyttäjäryhmän A, B, C operaatio johtajan DISPATCHER tai vastaavan toimesta.
15 Operaatiojohtajalla DISPATCHER on käytössään sinällään tunnetun-lainen päätelaite, kuten esimerkiksi PC-tietokone 13. Päätelaitteen 13 yhteyteen on järjestetty sinänsä tavanomaiset mikro-fonivälineet 14, joilla operaatiojohtaja tavanomaisestikin johtaa kentällä operoivien yksiköiden, kuten poliisipartioiden A, 20 B, C toimintoja. Edelleen päätelaitteeseen 13 kuuluu äänikortti- . . välineet ja ohjelmisto tai vastaavat toiminnallisuudet audiomuo- • · · .* toisen signaalin käsittelemiseksi, tallentamiseksi ja toistami- • · · • · seksi (eivät esitetty) .
: : ·*« • · * * * '** ; 25 Operaatiojohtaja DISPATCHER aloittaa päätelaitteellaan 13 käyt- • · · töprofiilispesifisten äänipalautteiden luomisen (201). Käyttö- « · *··* profiiliksi määritellään tässä sovellusesimerkissä suomen kieli ja äänipalautteiksi päätelaitteissa käytettävien liikennekanavi- • · en kutsumanimet, jossa liikennekanavia tai käyttäjistä A, B, C *···* 30 muodostettuja käyttäjäryhmiä voi olla jopa tuhansia. Päätelait- teessä 10.1 - 10.3 voi olla ryhmiä esimerkiksi kiinteästi 24:llä *:**: muistipaikalla ja näiden lisäksi voi olla myös dynaamisia ryh- • [·, miä. Edellisen perusteella on selvää, että äänipalautteiden jär- • · i .·] \ jestäminen perinteisin menetelmin päätelaitteeseen 10.1 - 10.3 • ·* 35 kuluttaisi huomattavasti sen rajallisia muistiresursseja.
8 118549
Operaatiojohtaja DISPATCHER aktivoi päätelaitteeltaan 13 sanotun ohjelmiston, jolla äänipalautteet tallennetaan valittuun tiedostoformaattiin. Operaatiojohtaja DISPATCHER lausuu palautteita esimerkiksi yksitellen mikrofoniinsa 14, josta ne päätelaitteel-5 la 13 ajettavalla audio-ohjelmistolia edelleen konvertoidaan ja tallennetaan digitaaliseen, edullisemmin johonkin hyvin tuettuun audiodataformaattiin (202). Eräs esimerkki tällaisesta formaatista on PC-ympäristössä tavanomaisimmin käytetty standardi WAV-audioformaatti 15, jonka kaikki muodot ovat rakenteeltaan RIFF-10 määrittelyn (Resorce Information File Format) mukaisia. Esimerkki tyypillisistä formaattiparametriarvoista käytettävälle WÄV-formaatille on PCM (kompressoimaton, pulssikoodimoduloitu data), näytteenottotaajuus 8 kHz, bittiresoluutio 16 bit, kanava mono.
15 Kukin konvertoitu WAV-tiedosto nimetään ja tallennetaan identifioitavalla tavalla, kuten esimerkiksi 1 = helsinkil.wav, 2 = helsinki2.wav, 3 = kuopio.wav, jne.. Vastaavat sanottuihin tiedostoihin tallennetut äänipalautteet voivat olla "ryhmä helsinki yksi", "ryhmä helsinki kaksi", "ryhmä kuopio", jne..
20 . , Kun kaikki äänipalautteet on luotu ja digitalisoitu, yksittäiset • · · • ·· / WAV-audiotiedostot toimitetaan esimerkiksi päätelaitevalmista- • · · jalle 25 tai vastaavalle tiedonsiirtoverkon, kuten esimerkiksi • · /·;* internet-/intranet-verkon 12 välityksellä (203) . Eräs toinen * · · J;· j 25 esimerkki mahdollisesta toimitustavasta on käyttää jotain sovel-• · · ’· tuvaa tiedontallennusmediaa.
·«· • · • · ··«
Eräs toinen tapa äänipalautteiden luomiseksi keksinnön mukaisen ·· i ** menetelmän tässä osavaiheessa on sellainen, että äänipalauttei- * · « 30 den kohdepäätelaitteiden 10.1 - 10.3 loppukäyttäjät A, B, C lau-suvat päätelaitteisiinsa 10.1 - 10.3 äänipalautteita. Äänipä- ··* ;··· lautteet lähetetään päätelaitteella 10.1 - 10.3 TETRA-verkkojär- • jestelmän 11 kautta tunnetunlaisena radiolähetyksenä äänipalaut- • · 9 teiden jatkokäsittelystä vastaavalle osapuolelle, kuten esimer- • 9« 35 kiksi juuri sanotulle päätelaitevalmistajalle 25. Tällöin analogisten äänipalautteiden konvertoinnin digitaaliseen muotoon yk- 9 118549 sittäisiksi WAV-tiedostoiksi suorittaa vasta päätelaitevalmista-ja 25. Tässä suoritusmuodossa vaiheet (202) ja (203) voivat vaihtaa siis mahdollisesti järjestystä.
5 Päätelaitevalmistajalla 25 tai muulla keksinnön mukaisen menetelmän kannalta vastaavan toiminnallisuuden omaavalla taholla on käytössään erityinen WAV-konvertointitoiminnallisuus, jolla käsitellään vastaanotettuja WAV-tiedostoja tai vastaanotetuista analogisista äänipalautteista muodostettuja WAV-tiedostoja kek-io sinnön menetelmän mukaisesti yhdeksi käyttöprofiilispesifiseksi tiedostopaketiksi.
WAV-konvertointitoiminnallisuudelle annetaan syötteenä digitalisoidut WAV-audiotiedostot 21. Näitä muokataan aluksi raakada-15 taenkooderilla siten, että niistä poistetaan WAV-tiedostoformaatin yhteyteen yleensä järjestettyä, varsinaisen audiodatan kannalta epäolennaista oheisinformaatiota. Tällöin tiedostoihin jää jäljelle pelkästään siis raaka-audiodataa (helsinkil.raw, hel-sinki2.raw, kuopio.raw...). WAV-tiedostojen "siivouksessa" pois-20 tetaan sen yhteyteen tavanomaisesti järjestetyt vaiinnaislohkot ja metadata, jotka sisältävät muun muassa otsikko- ja jälkilii- • i i *· ’· teinformaatiota (204) . Esimerkkejä tällaisesta informaatiosta on ·· « • · · • ·* esittäjä, tekijänoikeus, tyylilaji ym. informaatio.
*1· a a • · aaa a a a a a ··· i 25 Toimenpiteen seurauksena syntyneitä raaka-datatiedostoja (hei- a a a a a *. *: sinkil.raw, helsinki2 . raw, kuopio.raw...) käsitellään menetelmän a a a seuraavassa osavaiheessa (205) jollain tehokkaalla tiedon tii-vistysalgoritmilla.
a a a a a aa a aaa 30 Erään edullisen, mutta ei kuitenkaan rajoittavan sovellusmuodon a ·*·*. mukaan tällainen algoritmi voidaan valita esimerkiksi CELP (Co- " aaa ·...: debook Excited Linear Predictive) menetelmään perustuvista koo- . *. dereista. Eräs tähän luokkaan kuuluva kooderi on ACELP-koodaus aaa aaa *1* (Algebraic Code Excited Linear Predictive) , jota käytetään esi- a a # • aa * 35 merkiksi juuri TETRA-radioverkkojärjestelmässä 11. TETRA-puhe- koodekkiin viitataan standardissa ETS 300 395. Päätelaitteissa 10 118549 10.1 - 10.3 ja päätelaitevalmistajalla 25 on puheen enkoodaus-ja dekoodausmoduuleihin järjestetty kyseinen ACELP-kooderi 26.
ACELP-kooderilla 26 päästään hyvin pieneen tiedostokokoon äänen-5 laadun kuitenkaan tästä kärsimättä. ACELP-kooderin 26 bittien siirtonopeus on 4,567 kb/s.
Muita mahdollisia, mutta ei kuitenkaan rajoittavia esimerkkejä käytettävästä koodauksesta on VSELP (Vector-Sum Excited Linear ίο Prediction), LPC-laskentaan perustuvat kooderit, GSM-kooderit, valmistajakohtaiset kooderit sekä yleensäkin ITU:n (International Telecommunication Union) määrittelemät suositukset koodauksen järjestämiseksi. Yleisperiaatteena voidaan mainita, että koodekkia voidaan käyttää kohdepäätelaitteessa 10.1 - 10.3.
15
Osavaiheen (205) tarkoituksena on siis pienentää tiedostojen kokoa ja muokata samalla niiden sisältämä data puhekoodekin ymmärtämään muotoon. Dataa pätkitään tarvittaessa sopivan mittaisiksi lohkoiksi, jotta voidaan suoraan hyödyntää päätelaitteella 20 10.1 - 10.3 olevaa puhekoodekkia.
< « i » · ]· " Seuraavana vaiheena muodostetut muokatut ja tiivistetyt raaka- • · # datatiedostot kootaan yhdeksi, käyttöprofiilispesifiseksi tie- *···* dostopaketiksi (206) .
• · • · · * · ♦ λ e- ··* ♦ 25 • » • · · *· 'ί Vaihetta (206) seuraa lopullisen ACELP-koodatun tiedostopaketin A* luontivaihe, jossa tiedostopakettiin lisätään otsikkoinformaa-tiota (207) . TETRA-koodatusta käyttöprofiilispesifisestä äänipä- • · : *·· lautetiedostopaketista (PPM_VOlCEFEEDBACKS (fin)) ja myöhemmässä 30 vaiheessa tämän kanssa vastaavanlaisista tiedostopaketeista muo- ·***. dostetussa äänipalaute-PPM-tiedostossa on käytettävä Voice UI - ' ·*· spesifikaatiossa määritellyn numeroinnin kanssa yhtenevää ääni- , *. palautteiden numerointia. Informaatio voi käsittää esimerkiksi « · · • · · *;* ! indeksitietoa, jolla päätelaitteen 10.1 - 10.3 käyttöliittymä • · · • · · * * 35 voi PPM-muistivälineistään noutaa sinne järjestettyä käyttöpro fiilispesif istä dataa.
11 118549
Vaiheissa (201 - 207) luotu tetra-koodattu tiedostopaketti PPM__VOiCEFEEDBACKS (fin) (208) sisältää nyt siis yksittäisen käyttöprofiiliryhmän fin äänipalautteet. Eräs esimerkki tällai-5 sesta käyttöprofiilijaosta voi olla, kuten jo aiemmin mainittiin, kielialueiden mukaan suoritettu jako. Toinen esimerkki voi olla organisaatiokohtainen jakotapa, jossa poliisilla on omat palautteensa, liikennelaitoksella omansa jne. tai jopa täysin loppukäyttäjäkohtainen jakotapa, jossa kullakin käyttäjällä A, ίο B, C on omat äänipalautteensa.
Kuvassa 3 esitetään vuokaaviona eräs esimerkki yhden tai useampien käyttöprofiilispesifisten äänipalautetiedostopakettien dBvfb(fin, swe, ...) 22 koostamiseksi yhdeksi äänipalaute-PPM-15 datapaketiksi (305) 23. Kun jokaiselle halutulle käyttöprofii-lille, kuten esimerkiksi kielialueelle on luotu oma TETRA-koo-dattu käyttöprofiilispesifinen äänipalautetiedostopakettinsa, koostetaan näistä yksi integroitu äänipalaute-PPM-datapaketti, joka sisältää kaikkien eri kielien ennalta tallennetut äänipa-20 lautteet.
• ♦ • · · *’ Ensimmäisenä vaiheena alustetaan äänipalaute-PPM-datapaketti *4ί·* (301) . Alustettuun äänipalaute-PPM-datapakettiin lisätään käyt- • · ]···* töprof iilispesif isiä tiedostopaketteja. Tiedostopakettien koko- • · · i" i 25 aminen suoritetaan sinänsä alan ammattimiehelle tunnetulla ta-• · • · ♦ *· valla, jota ei keksinnön kannalta ole tässä sen enempää tarpeen ··· *.··* selostaa (302 - 304) . Proseduurin lopputuloksena saadaan aikaan, kaikki TETRA-koodatut tiedostopaketit sisältävä monikielinen • * : **· äänipalaute-PPM-datapaketti (305) .
·«· 30 ·***· Kuvassa 4 on esitetty esimerkki keksinnön mukaisesta menetelmäs- • · · ····; tä täydellisen PPM-tiedoston muodostamisessa vuokaaviona. Kun . *. kaikki halutut käyttöprofiilit sisältävä äänipalaute-PPM-datapa- « · · • « · *1* ‘ ketti on koostettu, otetaan se yhdeksi osakomponentiksi täydel- • » · • *0 * * 35 lisen PPM-tiedoston luomisprosessiin. PPM-tiedosto alustetaan lisäämällä siihen PPM-hierarkian kannalta tarpeellista informaa- 12 118549 tiota (401) . Äänipalaute-PPM-datapaketti yhdistetään muiden käyttöliittymän datapakettien kanssa yhdeksi täydelliseksi PPM-tiedostoksi (402 - 404) ja seurauksena on täydellinen PPM-tiedosto (405).
5
Muodostettu täydellinen PPM-tiedosto sisältää kaiken mahdollisen PPM-datan. Tällaista dataa ovat esimerkiksi sanotut eri kielien merkistöt, kirjasimet, tekstit, soittoäänet ja aakkosjärjestys informaatio.
10
Kuvassa 5 on esitetty eräs esimerkki keksinnön mukaisesta menetelmästä käyttöprofiilispesifisten datapakettien koostamisessa päätelaitteelle ladattavaksi PPM-tiedostoksi vuokaaviona. Kun täydellinen PPM-tiedosto on koostettu, sitä ei normaalisti lada-15 ta kokonaisuudessaan päätelaitteeseen 10.1 - 10.3 vaan sen sijaan siitä koostetaan erityinen ladattava PPM-paketti (downlo ad.ppm) erityisellä ohjelmistolla, jossa esimerkiksi päätelaitteen valmistaja, verkko-operaattori OPERATOR tai loppukäyttäjä A, B, C voi valita haluamansa PPM-tiedoston aliosat päätelait-20 teeseensa 10.1 - 10.3 ladattavaksi. Kuvassa 1 esitetyssä sovellusesimerkissä valinnan suorittaa verkko-operaattori OPERATOR, • » · *· *· jolla on päätelaitteessaan 19 toiminnallisuudet kuvassa 5 esite- • · m • · · ϊ ·* tyn vuokaavion mukaisen proseduurin toteuttamiseksi sekä väli- ··· • · *··.* neet täydellisen PPM-tiedoston tallentamiseksi ja vastaanottami- • « ♦ · · J.i i 25 seksi laitevalmistajalta dBPPM, 27.
• · · • ·· • · ···
Sanotusta täydellisestä PPM-tiedostosta valitaan tiedostopaket-tiosia valitun kriteerin perusteella sanottuun päätelaitteen ·· • *·· 10.1 - 10.3 muistivälineisiin tallennettavaksi (501.1). Ta- ··· 30 vanomaisimmin PPM-pakettiin valitaan datapaketit muutamista .***. (esimerkiksi neljästä) käyttöprofiileista (nyt siis kieliryhmäs- tä, joiden markkina-alueelle kyseinen päätelaite 10.1 - 10.3 on . *. menossa) . Valinnassa valintaohjelmistolle annetaan käyttöönotto- I · · • · · ; tiedostossa scandinavia.ini (501.2) parametrit, joiden mukaan ! *·* * : 35 käyttöprofiilien valinta tehdään.
13 118549
Kuvassa 6 on esitetty esimerkkiä keksinnön mukaisesta menetelmästä koostetun PPM-tiedoston tallentamiseksi päätelaitteelle 10.3 vuokaaviona. Kun päätelaitteeseen 10.3 ladattavaksi tarkoitettu PPM-paketti DOWNLOAD.PPM on saatu koostettua (601), se 5 flashataan päätelaitteen 10.3 PPM-muistiin sinänsä tunnetulla tavalla esimerkiksi päätelaitetoimittajan 25, verkko-operaattorin OPERATOR tai laitejakelijan toimesta (602).
Päätelaitteet 10.1 - 10.3 jaellaan käyttäjäryhmälle, jonka käyt-10 täjät A, B, C sitten valitsevat esimerkiksi oman kielialueensa tai käyttäjäryhmänsä äänipalautteet käyttöön. Kun käyttäjä A, B, C vaihtaa menusta käytettävän kielen, myös äänipalautteet vaihtuvat vastaaviksi. Myös näistä eriävät valintaoptiot ovat mahdollisia.
15 Käyttäjän A, B, C asettaessaan päätelaitteensa 10.1 - 10.3 lii- kennekanavalle HELSINKI_1 päätelaite 10.1 - 10.3 siirtyy tälle kanavalle ja antaa sitä vastaavan äänipalautteen "ryhmä helsinki yksi" . Äänipalaute voi olla myös kyseisen äänipalautteen identi- 20 fioiva indeksiarvo, joka tässä tapauksessa olisi "yksi", koska ,·,; liikennekanavan helsinki_l äänipalautteella on PPM-muistissa • · · indeksinään 1.
• · · • · • « • · · • « • · .’*1 Keksinnön mukaisella menetelmällä mahdollistetaan eri murrealu- • · · • · · *1* 25 eille ja pieniin, normaalisti tuettomiin kieliin järjestettyä • · · • · · edullisesti äänipalautteet. Vielä eräänä sovellusalue-esimerkki- • · • *** nä keksinnön käyttökohteeksi voidaan mainita sokeille ja heik- .. konäköisille tarkoitetut päätelaitteet.
• * • · · ··· • · *“* 30 Selityksessä mainittu päätelaite voidaan käsittää erittäin laa- • · · jasti. Vaikka edellä on kuvattu äänipalautteiden järjestämistä ’**“ kannettaviin päätelaitteisiin 10.1 - 10.3, niin se on sovel- i lusesimerkissä mahdollista tietenkin myös operaatiojohtajan DIS- ··· · PATCHER päätelaitteeseen 13, operaattorin OPERATOR päätelaittee- • · 35 seen 14 sekä multimediapäätteisiin, kuten satelliittivirittimiin (ei esitetty).
14 118549
Keksinnön mukaista menetelmää on edellä selitetty yksittäisen sovellusesimerkin valossa. On huomattava, että erityisesti kuvissa 3-6 esitetty PPM-muistiin järjestettävien datapakettien muodostaminen ja käsittely on alan ammattimiehelle sinänsä täy-5 sin tunnettuja tekniikkaa, joten sitä ei ole tarpeen edellä esitettyyn nähden sen syvällisemmin selittää. On myös itsestään selvää, että proseduraaliset toimintavaiheet keksinnön mukaisen menetelmän toteuttamiseksi voivat sisältää edellä esitetyn lisäksi alivaiheita ja ne voidaan eräissä tapauksissa suorittaa ίο myös edellä poikkeavissa järjestyksissä (esimerkiksi valmistajasta riippuen) . Keksinnön mukaisessa menetelmässä on oleellista se, että äänipalautteet järjestetään päätelaitteen jälkiohjel-moitavaan PPM-muistiin yhdeksi käyttöliittymän käyttämäksi äänipalaute-PPM-datapaketiksi.
15
On ymmärrettävä, että edellä oleva selitys ja siihen liittyvät kuvat on tarkoitettu ainoastaan havainnollistamaan esillä olevaa keksinnön mukaista menetelmää, päätelaitetta ja palvelinta. Keksintöä ei siten ole rajattu pelkästään edellä esitettyihin tai 20 patenttivaatimuksissa määriteltyihin suoritusmuotoihin, vaan .·. : alan ammattimiehelle tulevat olemaan ilmeisiä monet erilaiset • ·· • · keksinnön variaatiot ja muunnokset, jotka ovat mahdollisia ♦ · ,···, oheisten patenttivaatimusten määrittelemän keksinnöllisen aja- • · : tuksen puitteissa.
• · · ·· t • ·
• » I
* »· • · ··· « · • ♦ ··· • · • » • »· • » · • · • « * · · • · 1 • · • · ··· • · • · • · 1 · · *·· · · * · · • ·· • ·

Claims (10)

15 118549
1. Menetelmä äänipalautteen järjestämiseksi digitaaliseen langattomaan päätelaitteeseen (10.1), johon kuuluu ääniavusteinen 5 käyttöliittymä (Voice UI), jossa - käyttäjä (A) asettaa päätelaitteen (10.1) valitsemaansa toimintatilaan, - päätelaite (10.1) siirtyy käyttäjän (A) asettamaan toimintatilaan ja ίο - päätelaite (10.1) antaa asetettua toimintatilaa vastaa van äänipalautteen ja jossa sanotun äänipalautteen järjestämiseksi päätelaitteen (10.1) yhteyteen vaiheittain - luodaan yksi tai useampia äänipalautteita (201, 203), 15 - äänipalautteet konvertoidaan digitaaliseen muotoon (202), - digitalisoituja äänipalautteita muokataan valituilla algoritmeilla (ACELP) niiden tiedostokoon pienentämiseksi ja tallentamiseksi päätelaitteen (10.1) yhteyteen järjes- 20 tettyihin PPM-muistivälineisiin (PPM) (Post-Programmable .·. : Memory) (204 - 207), • *· • · tunnettu siitä, että PPM-muistivälineisiin (PPM) on järjestetty • · .··*. käyttöliittymäasetusten datapaketteja, joista kustakin on ker- • · ; [Γ rallaan käytössä aktiivista käyttöprofiilia vastaava tiedostopa- • · l ,Γ Γ 25 ketti ja menetelmässä ennen käyttöprofiilispesifisien äänipä- * · · lautteiden tallentamista päätelaitteen (10.1) yhteyteen järjes- • · tettyihin PPM-muistivälineisiin (PPM) - äänipalautteet muodostetaan yhdeksi käyttöprofiilis- • ·· pesifiseksi tiedostopaketiksi (204 - 207) , • · • · *** 30 - yhdestä tai useammasta sanotusta käyttöprofiilispesifi- • φ · sestä tiedostopaketista koostetaan äänipalaute-PPM-datapa-ketti (301 - 305) ja • ;*· - sanottu koostettu äänipalaute-PPM-datapaketti integroi- ··· i :\j daan muiden käyttöliittymäasetusten datapakettien kanssa • · 35 yhdeksi PPM-tiedostoksi (401 - 405). 16 118549
2. Patenttivaatimuksen 1 mukainen menetelmä, tunnettu siitä, että sanotusta PPM-tiedostosta (501.1) valitaan asetetun kriteerin (501.2) perusteella käyttöliittymäasetusten käyttöprofiilis-pesifisiä tiedostopaketteja päätelaitteen (10.1) muistivälinei- 5 siin (PPM) tallennettaviksi.
3. Patenttivaatimuksen 1 tai 2 mukainen menetelmä, tunnettu siitä, että äänipalautteet luodaan päätelaitteella (10.1).
4. Patenttivaatimuksen 3 mukainen menetelmä, tunnettu siitä, että luotuja äänipalautteita toimitetaan PPM-tiedoston muodostukseen tiedonsiirtoverkon (11, 12) kautta.
5. Jonkin patenttivaatimuksen 1-4 mukainen menetelmä, tunnettu 15 siitä, että sänottu digitaalinen tiedostoformaatti on WAV.
6. Jonkin patenttivaatimuksen 1-5 mukainen menetelmä, tunnettu siitä, että sanottu algoritmi digitalisoitujen äänipalautteiden tiedostokoon pienentämiseksi ja muokkaamiseksi valitaan pääte- 20 laitteessa 10.1 - 10.3 käytettävistä koodereista. • · • · · • ·· • ·
7. Jonkin patenttivaatimuksen 1-6 mukainen menetelmä, tunnettu • · · .···, siitä, että muodostettaessa sanottua käyttöprofiilispesifistä • · ··· :,·. tiedostopakettia digitalisoiduista äänipalautetiedostoista vai- *· * • 1 25 heittain • · · • ·· ,·./ - sanotuista äänipalautetiedostoista poistetaan otsikko- • * ja jälkiliiteinformaatiota (204), - aikaansaatuja raaka-datatiedostoja tiivistetään ja muo- * · · kataan sanotulla kooderilla (ACELP) (205), • « • * *!* 30 - tiivistetyt raaka-datatiedostot kootaan yhteen (206) ja ·*** *...: - lisätään sanottuun yhteen koottuun tiedostopakettiin ****· otsikkoinformaatiota (207) . • · * · · • · · • «i i
:*·.· 8. Digitaalinen langaton päätelaite (10.1), johon kuuluu ää- • · 35 niavusteinen käyttöliittymä (Voice UI), jossa vaiheittain 17 118549 - käyttäjä (A) asettaa päätelaitteen (10.1) valitsemaansa toimintatilaan, - päätelaite (10.1) siirtyy käyttäjän (A) asettamaan toimintatilaan ja 5. päätelaite (10.1) antaa asetettua toimintatilaa vastaa van äänipalautteen, ja jossa päätelaitteeseen (10.1) kuuluu PPM-muistivälineet (Post-Programmable Memory) (PPM), johon on järjestetty käyttö-liittymäasetusten datapaketteja, joista kustakin on kerrallaan 10 käytössä aktiivista käyttöprofiilia vastaava tiedostopaketti, tunnettu siitä, että sanotut äänipalautteet järjestetään päätelaitteen (10.1) PPM-muistivälineisiin (PPM) muiden käyttöliitty-mäasetusten datapakettien kanssa yhdeksi integroiduksi PPM-tie-dostoksi käyttöprofiilispesifisten äänipalautteiden mahdollista-15 miseksi.
9. Palvelin (18) äänipalautteiden luomiseksi digitaaliseen langattomaan päätelaitteeseen (10.1), johon kuuluu ääniavusteinen käyttöliittymä (Voice UI) , tunnettu siitä, että palvelimella 20 (18) on toiminnallisuudet . . - äänipalautteiden vastaanottamiseksi asetetussa muodossa • · · * · # ,* .* asetetulla tavalla, f · · • · - äänipalautteiden mahdolliseksi digitalisoimiseksi ja • · * · .*·; muokkaamiseksi valituilla algoritmeilla (ACELP) niiden • · i *" l 25 tiedostokoon pienentämiseksi ja niistä yhden käyttöprofii- • · · *,** lispesifisen tiedostopaketin muodostamiseksi (202 - 207), * · ···* - äänipalaute-PPM-datapaketin koostamiseksi yhdestä tai useammasta sanotusta käyttöprofiilispesifisestä tiedosto- • ” paketista (301 - 305) ja ··· • · *··* 30 - äänipalaute-PPM-datapaketin integroimiseksi muiden käyt- ··· , e töluttymäasetusten datapakettien kanssa yhdeksi PPM-tie- ·:··: dostoksi (401 - 405) . * • « « • ♦ « «•I
* .·, ; 10. Järjestelmä äänipalautteiden toteuttamiseksi digitaalisessa *· *J 35 verkkojärjestelmässä (11), johon järjestelmään kuuluu 18 118549 - ainakin yksi digitaalinen langaton päätelaite (10.1), johon kuuluu ääniavusteinen käyttöliittymä (Voice UI) , jossa vaiheittain - käyttäjä (A) asettaa päätelaitteen (10.1) valitse- 5 maansa toimintatilaan, - päätelaite (10.1) siirtyy käyttäjän (A) asettamaan toimintatilaan ja - päätelaite (10.1) antaa asetettua toimintatilaa vastaavan äänipalautteen, 10 ja jossa päätelaitteeseen (10.1) kuuluu PPM-muistivälineet (Post-Programmable Memory) (PPM), johon on järjestetty käyttöliittymäasetusten datapaketteja, joista kustakin on kerrallaan käytössä aktiivista käyttöprofiilia vastaava tiedostopaketti ja 15. palvelin (18) äänipalautteiden luomiseksi digitaaliseen langattomaan päätelaitteeseen (10.1), johon kuuluu sanottu ääniavusteinen käyttöliittymä, tunnettu siitä, että palvelimella (18) on toiminnallisuudet - äänipalautteiden vastaanottamiseksi asetetussa muodossa 20 asetetulla tavalla, . - äänipalautteiden mahdolliseksi digitalisoimiseksi ja • · · muokkaamiseksi valituilla algoritmeilla (ACELP) niiden • · • · tiedostokoon pienentämiseksi ja niistä yhden käyttöprofii- • · • · .**; lispesifisen tiedostopaketin muodostamiseksi (202 - 207) , * · * "* ; 25 - äänipalaute-PPM-datapaketin koostamiseksi yhdestä tai * « · *,/ useammasta sanotusta käyttöprofiilispesifisestä tiedosto- • · *···* paketista (301 - 305) ja - äänipalaute-PPM-datapaketin integroimiseksi muiden käyt- * · töliittymäasetusten datapakettien kanssa yhdeksi PPM-tie- *···* 30 dostoksi (401 - 405) ja jossa sanotut äänipalautteet järjestetään päätelaitteen *:·*: (10.1) PPM-muistivälineisiin (PPM) muiden käyttöliittymäasetus- • X ten datapakettien kanssa yhdeksi integroiduksi PPM-tiedostoksi *·* * ,·. · käyttöprofiilispesifisten äänipalautteiden mahdollistamiseksi. • M • · 19 118549 FATENTKRAV
FI20025032A 2002-06-14 2002-06-14 Menetelmä ja järjestelmä äänipalautteen järjestämiseksi digitaaliseen langattomaan päätelaitteeseen sekä vastaava päätelaite ja palvelin FI118549B (fi)

Priority Applications (2)

Application Number Priority Date Filing Date Title
FI20025032A FI118549B (fi) 2002-06-14 2002-06-14 Menetelmä ja järjestelmä äänipalautteen järjestämiseksi digitaaliseen langattomaan päätelaitteeseen sekä vastaava päätelaite ja palvelin
US10/448,782 US7672850B2 (en) 2002-06-14 2003-05-29 Method for arranging voice feedback to a digital wireless terminal device and corresponding terminal device, server and software to implement the method

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
FI20025032A FI118549B (fi) 2002-06-14 2002-06-14 Menetelmä ja järjestelmä äänipalautteen järjestämiseksi digitaaliseen langattomaan päätelaitteeseen sekä vastaava päätelaite ja palvelin
FI20025032 2002-06-14

Publications (3)

Publication Number Publication Date
FI20025032A0 FI20025032A0 (fi) 2002-06-14
FI20025032A FI20025032A (fi) 2003-12-15
FI118549B true FI118549B (fi) 2007-12-14

Family

ID=8565202

Family Applications (1)

Application Number Title Priority Date Filing Date
FI20025032A FI118549B (fi) 2002-06-14 2002-06-14 Menetelmä ja järjestelmä äänipalautteen järjestämiseksi digitaaliseen langattomaan päätelaitteeseen sekä vastaava päätelaite ja palvelin

Country Status (2)

Country Link
US (1) US7672850B2 (fi)
FI (1) FI118549B (fi)

Families Citing this family (119)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8645137B2 (en) 2000-03-16 2014-02-04 Apple Inc. Fast, language-independent method for user authentication by voice
US8677377B2 (en) 2005-09-08 2014-03-18 Apple Inc. Method and apparatus for building an intelligent automated assistant
US9318108B2 (en) 2010-01-18 2016-04-19 Apple Inc. Intelligent automated assistant
US8977255B2 (en) 2007-04-03 2015-03-10 Apple Inc. Method and system for operating a multi-function portable electronic device using voice-activation
US9330720B2 (en) 2008-01-03 2016-05-03 Apple Inc. Methods and apparatus for altering audio output signals
US8996376B2 (en) 2008-04-05 2015-03-31 Apple Inc. Intelligent text-to-speech conversion
US10496753B2 (en) 2010-01-18 2019-12-03 Apple Inc. Automatically adapting user interfaces for hands-free interaction
US20100030549A1 (en) 2008-07-31 2010-02-04 Lee Michael M Mobile device having human language translation capability with positional feedback
WO2010067118A1 (en) 2008-12-11 2010-06-17 Novauris Technologies Limited Speech recognition involving a mobile device
US9858925B2 (en) 2009-06-05 2018-01-02 Apple Inc. Using context information to facilitate processing of commands in a virtual assistant
US10241752B2 (en) 2011-09-30 2019-03-26 Apple Inc. Interface for a virtual digital assistant
US10241644B2 (en) 2011-06-03 2019-03-26 Apple Inc. Actionable reminder entries
US20120309363A1 (en) 2011-06-03 2012-12-06 Apple Inc. Triggering notifications associated with tasks items that represent tasks to perform
US9431006B2 (en) 2009-07-02 2016-08-30 Apple Inc. Methods and apparatuses for automatic speech recognition
US8515763B2 (en) 2009-11-24 2013-08-20 Honeywell International Inc. Methods and systems for utilizing voice commands onboard an aircraft
US10553209B2 (en) 2010-01-18 2020-02-04 Apple Inc. Systems and methods for hands-free notification summaries
US10705794B2 (en) 2010-01-18 2020-07-07 Apple Inc. Automatically adapting user interfaces for hands-free interaction
US10679605B2 (en) 2010-01-18 2020-06-09 Apple Inc. Hands-free list-reading by intelligent automated assistant
US10276170B2 (en) 2010-01-18 2019-04-30 Apple Inc. Intelligent automated assistant
WO2011089450A2 (en) 2010-01-25 2011-07-28 Andrew Peter Nelson Jerram Apparatuses, methods and systems for a digital conversation management platform
US8682667B2 (en) 2010-02-25 2014-03-25 Apple Inc. User profiling for selecting user specific voice input processing information
US10762293B2 (en) 2010-12-22 2020-09-01 Apple Inc. Using parts-of-speech tagging and named entity recognition for spelling correction
US9262612B2 (en) 2011-03-21 2016-02-16 Apple Inc. Device access using voice authentication
US10057736B2 (en) 2011-06-03 2018-08-21 Apple Inc. Active transport based notifications
US8994660B2 (en) 2011-08-29 2015-03-31 Apple Inc. Text correction processing
JP2013178509A (ja) * 2012-02-07 2013-09-09 Yamaha Corp 電子装置、及び音声ガイド用プログラム
US10134385B2 (en) 2012-03-02 2018-11-20 Apple Inc. Systems and methods for name pronunciation
US9483461B2 (en) 2012-03-06 2016-11-01 Apple Inc. Handling speech synthesis of content for multiple languages
US9280610B2 (en) 2012-05-14 2016-03-08 Apple Inc. Crowd sourcing information to fulfill user requests
US9721563B2 (en) 2012-06-08 2017-08-01 Apple Inc. Name recognition system
US9495129B2 (en) 2012-06-29 2016-11-15 Apple Inc. Device, method, and user interface for voice-activated navigation and browsing of a document
US9576574B2 (en) 2012-09-10 2017-02-21 Apple Inc. Context-sensitive handling of interruptions by intelligent digital assistant
US9547647B2 (en) 2012-09-19 2017-01-17 Apple Inc. Voice-based media searching
EP4138075A1 (en) 2013-02-07 2023-02-22 Apple Inc. Voice trigger for a digital assistant
US9368114B2 (en) 2013-03-14 2016-06-14 Apple Inc. Context-sensitive handling of interruptions
KR101759009B1 (ko) 2013-03-15 2017-07-17 애플 인크. 적어도 부분적인 보이스 커맨드 시스템을 트레이닝시키는 것
WO2014144579A1 (en) 2013-03-15 2014-09-18 Apple Inc. System and method for updating an adaptive speech recognition model
WO2014197336A1 (en) 2013-06-07 2014-12-11 Apple Inc. System and method for detecting errors in interactions with a voice-based digital assistant
US9582608B2 (en) 2013-06-07 2017-02-28 Apple Inc. Unified ranking with entropy-weighted information for phrase-based semantic auto-completion
WO2014197334A2 (en) 2013-06-07 2014-12-11 Apple Inc. System and method for user-specified pronunciation of words for speech synthesis and recognition
WO2014197335A1 (en) 2013-06-08 2014-12-11 Apple Inc. Interpreting and acting upon commands that involve sharing information with remote devices
US10176167B2 (en) 2013-06-09 2019-01-08 Apple Inc. System and method for inferring user intent from speech inputs
WO2014200728A1 (en) 2013-06-09 2014-12-18 Apple Inc. Device, method, and graphical user interface for enabling conversation persistence across two or more instances of a digital assistant
CN105265005B (zh) 2013-06-13 2019-09-17 苹果公司 用于由语音命令发起的紧急呼叫的系统和方法
JP6163266B2 (ja) 2013-08-06 2017-07-12 アップル インコーポレイテッド リモート機器からの作動に基づくスマート応答の自動作動
US9550578B2 (en) 2014-02-04 2017-01-24 Honeywell International Inc. Systems and methods for utilizing voice commands onboard an aircraft
US9620105B2 (en) 2014-05-15 2017-04-11 Apple Inc. Analyzing audio input for efficient speech and music recognition
US10592095B2 (en) 2014-05-23 2020-03-17 Apple Inc. Instantaneous speaking of content on touch devices
US9502031B2 (en) 2014-05-27 2016-11-22 Apple Inc. Method for supporting dynamic grammars in WFST-based ASR
US9842101B2 (en) 2014-05-30 2017-12-12 Apple Inc. Predictive conversion of language input
WO2015184186A1 (en) 2014-05-30 2015-12-03 Apple Inc. Multi-command single utterance input method
US9760559B2 (en) 2014-05-30 2017-09-12 Apple Inc. Predictive text input
US9633004B2 (en) 2014-05-30 2017-04-25 Apple Inc. Better resolution when referencing to concepts
US9430463B2 (en) 2014-05-30 2016-08-30 Apple Inc. Exemplar-based natural language processing
US9734193B2 (en) 2014-05-30 2017-08-15 Apple Inc. Determining domain salience ranking from ambiguous words in natural speech
US10170123B2 (en) 2014-05-30 2019-01-01 Apple Inc. Intelligent assistant for home automation
US9715875B2 (en) 2014-05-30 2017-07-25 Apple Inc. Reducing the need for manual start/end-pointing and trigger phrases
US9785630B2 (en) 2014-05-30 2017-10-10 Apple Inc. Text prediction using combined word N-gram and unigram language models
US10078631B2 (en) 2014-05-30 2018-09-18 Apple Inc. Entropy-guided text prediction using combined word and character n-gram language models
US10289433B2 (en) 2014-05-30 2019-05-14 Apple Inc. Domain specific language for encoding assistant dialog
US10659851B2 (en) 2014-06-30 2020-05-19 Apple Inc. Real-time digital assistant knowledge updates
US9338493B2 (en) 2014-06-30 2016-05-10 Apple Inc. Intelligent automated assistant for TV user interactions
US10446141B2 (en) 2014-08-28 2019-10-15 Apple Inc. Automatic speech recognition based on user feedback
US9818400B2 (en) 2014-09-11 2017-11-14 Apple Inc. Method and apparatus for discovering trending terms in speech requests
US10789041B2 (en) 2014-09-12 2020-09-29 Apple Inc. Dynamic thresholds for always listening speech trigger
US10127911B2 (en) 2014-09-30 2018-11-13 Apple Inc. Speaker identification and unsupervised speaker adaptation techniques
US10074360B2 (en) 2014-09-30 2018-09-11 Apple Inc. Providing an indication of the suitability of speech recognition
US9886432B2 (en) 2014-09-30 2018-02-06 Apple Inc. Parsimonious handling of word inflection via categorical stem + suffix N-gram language models
US9668121B2 (en) 2014-09-30 2017-05-30 Apple Inc. Social reminders
US9646609B2 (en) 2014-09-30 2017-05-09 Apple Inc. Caching apparatus for serving phonetic pronunciations
US10552013B2 (en) 2014-12-02 2020-02-04 Apple Inc. Data detection
US9711141B2 (en) 2014-12-09 2017-07-18 Apple Inc. Disambiguating heteronyms in speech synthesis
US9865280B2 (en) 2015-03-06 2018-01-09 Apple Inc. Structured dictation using intelligent automated assistants
US9721566B2 (en) 2015-03-08 2017-08-01 Apple Inc. Competing devices responding to voice triggers
US10567477B2 (en) 2015-03-08 2020-02-18 Apple Inc. Virtual assistant continuity
US9886953B2 (en) 2015-03-08 2018-02-06 Apple Inc. Virtual assistant activation
US9899019B2 (en) 2015-03-18 2018-02-20 Apple Inc. Systems and methods for structured stem and suffix language models
US9842105B2 (en) 2015-04-16 2017-12-12 Apple Inc. Parsimonious continuous-space phrase representations for natural language processing
US10083688B2 (en) 2015-05-27 2018-09-25 Apple Inc. Device voice control for selecting a displayed affordance
US10127220B2 (en) 2015-06-04 2018-11-13 Apple Inc. Language identification from short strings
US10101822B2 (en) 2015-06-05 2018-10-16 Apple Inc. Language input correction
US9578173B2 (en) 2015-06-05 2017-02-21 Apple Inc. Virtual assistant aided communication with 3rd party service in a communication session
US10255907B2 (en) 2015-06-07 2019-04-09 Apple Inc. Automatic accent detection using acoustic models
US11025565B2 (en) 2015-06-07 2021-06-01 Apple Inc. Personalized prediction of responses for instant messaging
US10186254B2 (en) 2015-06-07 2019-01-22 Apple Inc. Context-based endpoint detection
US10671428B2 (en) 2015-09-08 2020-06-02 Apple Inc. Distributed personal assistant
US10747498B2 (en) 2015-09-08 2020-08-18 Apple Inc. Zero latency digital assistant
US9697820B2 (en) 2015-09-24 2017-07-04 Apple Inc. Unit-selection text-to-speech synthesis using concatenation-sensitive neural networks
US10366158B2 (en) 2015-09-29 2019-07-30 Apple Inc. Efficient word encoding for recurrent neural network language models
US11010550B2 (en) 2015-09-29 2021-05-18 Apple Inc. Unified language modeling framework for word prediction, auto-completion and auto-correction
US11587559B2 (en) 2015-09-30 2023-02-21 Apple Inc. Intelligent device identification
US10691473B2 (en) 2015-11-06 2020-06-23 Apple Inc. Intelligent automated assistant in a messaging environment
US10049668B2 (en) 2015-12-02 2018-08-14 Apple Inc. Applying neural network language models to weighted finite state transducers for automatic speech recognition
US10223066B2 (en) 2015-12-23 2019-03-05 Apple Inc. Proactive assistance based on dialog communication between devices
US10446143B2 (en) 2016-03-14 2019-10-15 Apple Inc. Identification of voice inputs providing credentials
US9934775B2 (en) 2016-05-26 2018-04-03 Apple Inc. Unit-selection text-to-speech synthesis based on predicted concatenation parameters
US9972304B2 (en) 2016-06-03 2018-05-15 Apple Inc. Privacy preserving distributed evaluation framework for embedded personalized systems
US10249300B2 (en) 2016-06-06 2019-04-02 Apple Inc. Intelligent list reading
US10049663B2 (en) 2016-06-08 2018-08-14 Apple, Inc. Intelligent automated assistant for media exploration
DK179309B1 (en) 2016-06-09 2018-04-23 Apple Inc Intelligent automated assistant in a home environment
US10490187B2 (en) 2016-06-10 2019-11-26 Apple Inc. Digital assistant providing automated status report
US10067938B2 (en) 2016-06-10 2018-09-04 Apple Inc. Multilingual word prediction
US10192552B2 (en) 2016-06-10 2019-01-29 Apple Inc. Digital assistant providing whispered speech
US10586535B2 (en) 2016-06-10 2020-03-10 Apple Inc. Intelligent digital assistant in a multi-tasking environment
US10509862B2 (en) 2016-06-10 2019-12-17 Apple Inc. Dynamic phrase expansion of language input
DK179415B1 (en) 2016-06-11 2018-06-14 Apple Inc Intelligent device arbitration and control
DK179343B1 (en) 2016-06-11 2018-05-14 Apple Inc Intelligent task discovery
DK179049B1 (en) 2016-06-11 2017-09-18 Apple Inc Data driven natural language event detection and classification
DK201670540A1 (en) 2016-06-11 2018-01-08 Apple Inc Application integration with a digital assistant
US10043516B2 (en) 2016-09-23 2018-08-07 Apple Inc. Intelligent automated assistant
US10593346B2 (en) 2016-12-22 2020-03-17 Apple Inc. Rank-reduced token representation for automatic speech recognition
DK201770439A1 (en) 2017-05-11 2018-12-13 Apple Inc. Offline personal assistant
DK179745B1 (en) 2017-05-12 2019-05-01 Apple Inc. SYNCHRONIZATION AND TASK DELEGATION OF A DIGITAL ASSISTANT
DK179496B1 (en) 2017-05-12 2019-01-15 Apple Inc. USER-SPECIFIC Acoustic Models
DK201770431A1 (en) 2017-05-15 2018-12-20 Apple Inc. Optimizing dialogue policy decisions for digital assistants using implicit feedback
DK201770432A1 (en) 2017-05-15 2018-12-21 Apple Inc. Hierarchical belief states for digital assistants
DK179549B1 (en) 2017-05-16 2019-02-12 Apple Inc. FAR-FIELD EXTENSION FOR DIGITAL ASSISTANT SERVICES
CN111145764A (zh) * 2019-12-26 2020-05-12 苏州思必驰信息科技有限公司 一种源码编译方法、装置、设备及介质
US11398997B2 (en) * 2020-06-22 2022-07-26 Bank Of America Corporation System for information transfer between communication channels

Family Cites Families (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5095503A (en) * 1989-12-20 1992-03-10 Motorola, Inc. Cellular telephone controller with synthesized voice feedback for directory number confirmation and call status
JP2503863B2 (ja) 1992-08-13 1996-06-05 日本電気株式会社 無線電話機
AU4419796A (en) 1994-12-12 1996-07-03 Qualcomm Incorporated Digital cellular telephone with voice feedback
US6216104B1 (en) * 1998-02-20 2001-04-10 Philips Electronics North America Corporation Computer-based patient record and message delivery system
US7606936B2 (en) * 1998-05-29 2009-10-20 Research In Motion Limited System and method for redirecting data to a wireless device over a plurality of communication paths
US6408272B1 (en) * 1999-04-12 2002-06-18 General Magic, Inc. Distributed voice user interface
US6615175B1 (en) * 1999-06-10 2003-09-02 Robert F. Gazdzinski “Smart” elevator system and method
US6850603B1 (en) * 1999-09-13 2005-02-01 Microstrategy, Incorporated System and method for the creation and automatic deployment of personalized dynamic and interactive voice services
US6768788B1 (en) * 1999-09-13 2004-07-27 Microstrategy, Incorporated System and method for real-time, personalized, dynamic, interactive voice services for property-related information
US6829334B1 (en) * 1999-09-13 2004-12-07 Microstrategy, Incorporated System and method for the creation and automatic deployment of personalized, dynamic and interactive voice services, with telephone-based service utilization and control
US7203721B1 (en) 1999-10-08 2007-04-10 At Road, Inc. Portable browser device with voice recognition and feedback capability
US7334050B2 (en) * 2000-06-07 2008-02-19 Nvidia International, Inc. Voice applications and voice-based interface
KR100387918B1 (ko) * 2000-07-11 2003-06-18 이수성 통역기
WO2002010900A2 (en) * 2000-07-28 2002-02-07 Siemens Automotive Corporation User interface for telematics systems
FI118242B (fi) * 2000-09-19 2007-08-31 Nokia Corp Puhekehyksen käsitteleminen radiojärjestelmässä
US7020611B2 (en) * 2001-02-21 2006-03-28 Ameritrade Ip Company, Inc. User interface selectable real time information delivery system and method
FR2822994B1 (fr) 2001-03-30 2004-05-21 Bouygues Telecom Sa Assistance au conducteur d'un vehicule automobile
US7039643B2 (en) * 2001-04-10 2006-05-02 Adobe Systems Incorporated System, method and apparatus for converting and integrating media files
US6775358B1 (en) * 2001-05-17 2004-08-10 Oracle Cable, Inc. Method and system for enhanced interactive playback of audio content to telephone callers
RU2282888C2 (ru) * 2001-09-26 2006-08-27 Интерэкт Дивайсиз, Инк. Система и способ для обмена сигналами аудиовизуальной информации
JP2007501420A (ja) * 2003-08-01 2007-01-25 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ ダイアログシステムの駆動方法

Also Published As

Publication number Publication date
US20030233240A1 (en) 2003-12-18
US7672850B2 (en) 2010-03-02
FI20025032A (fi) 2003-12-15
FI20025032A0 (fi) 2002-06-14

Similar Documents

Publication Publication Date Title
FI118549B (fi) Menetelmä ja järjestelmä äänipalautteen järjestämiseksi digitaaliseen langattomaan päätelaitteeseen sekä vastaava päätelaite ja palvelin
KR100303411B1 (ko) 싱글캐스트 대화형 라디오 시스템
US6081780A (en) TTS and prosody based authoring system
EP1362341B1 (en) Method and apparatus for encoding and decoding pause information
JP5173939B2 (ja) Cdma無線システム用可変ビットレート広帯域音声符号化時における効率のよい帯域内ディム・アンド・バースト(dim−and−burst)シグナリングとハーフレートマックス処理のための方法および装置
US6678659B1 (en) System and method of voice information dissemination over a network using semantic representation
EP1536410A1 (en) Method and apparatus for encoding/decoding MPEG-4 BSAC audio bitstream having ancillary information
US20030028377A1 (en) Method and device for synthesizing and distributing voice types for voice-enabled devices
US20030088400A1 (en) Encoding device, decoding device and audio data distribution system
US6856990B2 (en) Network dedication system
US6507611B1 (en) Transmitting apparatus and method, receiving apparatus and method, and providing medium
JP2005327442A (ja) デジタルメディア汎用基本ストリーム
KR100473889B1 (ko) 오디오 데이터 편집 방법과 이를 적용한 기록매체 및디지털 오디오 플레이어
JP2004199064A (ja) ビット率を調節できるオーディオ符号化方法、復号方法、符号化装置及び復号装置
JP2000512777A (ja) “前方”および“後方”lpc分析による音声周波数信号を符号化するための方法および装置
US7587322B2 (en) Robust speech recognition with data bank accession organized by semantic attribute
JPWO2005096270A1 (ja) 音楽を再生するためのコンテンツフレームを配信するコンテンツ配信サーバ及び端末
EP1708174A2 (en) Apparatus and method of code conversion and recording medium that records program for computer to execute the method
KR100648872B1 (ko) 가변 레이트 음성 코딩에 기초한 음성 합성기
EP1691504A1 (en) A method for creating and parsing the traffic voice broadcasting requests in the bearing control separate network
JP2007108450A (ja) 音声再生装置、音声配信装置、音声配信システム、音声再生方法、音声配信方法及びプログラム
EP1168886A2 (en) Sound signal encoding apparatus and method
JPH0378639B2 (fi)
KR20040095840A (ko) 휴대 단말의 벨소리를 위한 음원 변환 서비스 제공 방법및 시스템
US7031914B2 (en) Systems and methods for concatenating electronically encoded voice

Legal Events

Date Code Title Description
FG Patent granted

Ref document number: 118549

Country of ref document: FI

MM Patent lapsed