Digitoday

Valikko

Tutkija kehitti työkalun uutisten seurantaan

Perjantaina väittelevä Juha Makkonen on kehittänyt menetelmiä uusien uutistapahtumien havaitsemiseen ja aiemmin havaittujen tapahtumien seuraamiseen. Google News voi olla nopea, mutta onko se tarpeeksi tarkka?


Terveyden ja hyvinvoinnin laitoksessa työskentelevä filosofian maisteri Juha Makkonen esittää semanttisia luokkia, joihin sanat ryhmitellään merkitystensä mukaan samankaltaisten sanojen joukoiksi. Luokkia ovat esimerkiksi yleiset sanat sekä organisaatiot, henkilöt ja paikanilmaukset. Tekstistä tunnistetaan myös ajanilmaukset.

Tuloksena käytännön uutishaku voisi esimerkiksi erottaa toisistaan kaksi eri lento-onnettomuusuutista, jotka ovat samanlaisia yleisten sanojen kannalta, mutta erilaisia paikkojen ja ajanilmausten suhteen, Helsingin yliopisto hahmottaa.

Tarkkuutta nopeuden
kustannuksella


Automaattinen uutistapahtumien seuranta on tietojenkäsittelytieteen ja siinä tiedonhaun piiriin kuuluva tutkimusalue, jossa kehitetään menetelmiä digitaalisen uutisvirran hallintaan.

Uutisvirta koostuu useista, mahdollisesti erikielisistä uutislähteistä, joissa voi olla digitaalisia online-uutisia ja radio- sekä televisiouutisia.

Perinteiset tiedonhakumenetelmät, jotka ovat internet-tiedonhakujärjestelmien perustana, vertailevat tekstidokumentteja joukkoina sanoja ja käsittelevät sanoja merkkijonoina nopeasti. Erityisen vaikeaa on ollut tunnistaa kaksi samantyyppistä uutistapahtumaa, Makkonen taustoittaa.

Väitöskirjan nimi on Semantic Classes in Topic Detection and Tracking (Semanttisten luokkien soveltaminen automaattisessa uutisseurannassa).

Se mitä Makkosen keinoin hävittäisiin nopeudessa, voitettaisiin tarkkuudessa. Kielellinen analyysi hidastaa toimintaa jonkun verran, mutta väittelijän mukaan sitä voitaisiin tarvittaessa kompensoida laittamalla rautaa riviin.

Tuntuva
parannus


Oma kysymyksensä tosin on, missä määrin Google tai esimerkiksi Yahoo jo käyttävät tämäntyyppisiä semanttisia menetelmiä omissa uutispalveluissaan.

Makkonen kuitenkin veikkaa, että kovin syvälliseen sisältöanalyysiin ei suurissa uutispalveluissa vielä mentäne, koska käsiteltävän aineiston määrä on niin mittava. Jos dataa tulee sisään nopeammin kuin sitä pystytään käsittelemään, palvelut jäisivät koko ajan jälkeen, Makkonen miettii.

Juha Makkosen uusilla menetelmillä erot olivat etenkin olemassa olevien uutisten seurannassa tilastollisesti merkittäviä, ja keinot paransivat tuntuvasti uutistapahtumien seurannan tarkkuutta verrattuna perinteiseen lähestymistapaan.

Uusien tapahtumien tunnistamista menetelmä paransi vähemmän. Tämä alue pysyy edelleen vaikeana ongelmana yksinkertaisesti siitä syystä, että uusia tapahtumia pitää verrata kaikkeen vanhaan. Silloin vertailuaineisto on sanalla sanoen valtava.

Kommentit

    Näytä lisää

    Näitä luetaan!

    1. 1

      Simpanssinaamainen kaahari piinasi poliisia Ruotsissa

    2. 2

      Salkkarit-kaunotar rohkeassa kuvassa – rinnat paistavat läpi henkäyksen ohuesta asusta

    3. 3

      Yhden hitin eläketurva – tässä on joululaulu, joka tuo kirjoittajilleen edelleen 590 000 euron vuosittaiset rojaltitulot

    4. 4

      Vuoden oudoin oikeusjuttu? Moderni perhe -tähden Sofia Vergaran omat hedelmöittyneet IVF-alkiot haastoivat tämän oikeuteen

    5. 5

      Saara Aallon kilpakumppanit pahoissa vaikeuksissa – tuleeko finaalilähetyksestä katastrofi?

    6. 6

      Moni kärsii tietämättään kakkostyypin diabeteksen esiasteesta – lisää äkkikuoleman vaaraa

    7. 7

      Viestintäministeri Anne Berner, onko postin perustehtävä uhattuna? ”Postin on vastattava vahingosta”

    8. 8

      Riistakamera nappasi kuvan harvinaisesta vieraasta sotilastukikohdassa Arizonassa

    9. 9

      Näin ylivoimainen Hannu Manninen oli avauskilpailussaan – sai heti mieluisan palkinnon

    10. 10

      Häpeällisen ”ruma” joulukuusi aiheutti nettihysterian – sai jopa oman Twitter-tilin: ”Voiko olla enää nolompi”

    11. Näytä lisää
    1. 1

      Salkkarit-kaunotar rohkeassa kuvassa – rinnat paistavat läpi henkäyksen ohuesta asusta

    2. 2

      Robinin, 18, Linnan juhlat -asussa mukana yksityiskohta, joka jäi monilta huomaamatta – presidentiltä erityinen pyyntö kättelyjonossa

    3. 3

      Saara Aallon kilpakumppanit pahoissa vaikeuksissa – tuleeko finaalilähetyksestä katastrofi?

    4. 4

      Bunkkeriin seksiorjaksi teljetty ruotsalaisnainen kirjoitti kirjan painajaisestaan – ”Yritin uskotella itselleni, ettei tämä voi olla totta”

    5. 5

      Sekava mies uhkasi vastaantulijaa Porvoossa – nyrkkeilytaustainen uhattu ei päästänyt karkuun

    6. 6

      Susanna, 33, vei Lumian huoltoon – uuteen puhelimeen alkoi ilmestyä outoja kuvia

    7. 7

      Brittimedia: Saara Aalto laulaa finaalissa kaikkien aikojen Queen-klassikon yhdessä supertähti Adam Lambertin kanssa

    8. 8

      Raivostunut Matti Nykänen perui keikkansa Kanarialla – ravintola joutui maksumieheksi: ”V**ut minä mitään keikkaa vedä”

    9. 9

      Katin ja Mikon loppumaton tuska – tytär ei elä enää pitkään: ”Lapsi jota on niin kovasti toivonut, otetaan pois”

    10. 10

      Katso, mitä tapahtui asuntolainan hinnalle – ”Pankin vaihtajia on liikkeellä”

    11. Näytä lisää
    1. 1

      Poliisi IS:lle: Tällainen tausta Imatran epäillyllä 23-vuotiaalla kolmoismurhaajalla on

    2. 2

      WhatsApp katoaa miljoonista puhelimista – katso, onko omasi listalla

    3. 3

      Hänellä oli Linnan juhlien rohkein iltapuku – IS:n lukijat äänestivät illan räväyttävimmän pukeutujan

    4. 4

      Tuulenvire paljasti Donald Trumpin omituisen ”asumokan” – netti sekosi lentokentältä napatusta kuvasta

    5. 5

      Perhesyyt eivät painaneet? Mika Salolla teoria Nico Rosbergin lopettamisesta: ”Kukaan ei tajua sitä…”

    6. 6

      Todelliset syyt, joiden vuoksi naiset voihkivat seksin aikana

    7. 7

      Robinin, 18, Linnan juhlat -asussa mukana yksityiskohta, joka jäi monilta huomaamatta – presidentiltä erityinen pyyntö kättelyjonossa

    8. 8

      Linnan jatkoilla nousi hässäkkä – Heikki Lampela ja Hanna Kärpänen sisään vahvassa juhlatunnelmassa: ”Haluan seikkailuja”

    9. 9

      Raivostunut Matti Nykänen perui keikkansa Kanarialla – ravintola joutui maksumieheksi: ”V**ut minä mitään keikkaa vedä”

    10. 10

      Nainen teki ”pettämistestin” poikaystävälleen – lopputulos ei ilahduttanut, videolla jo 6 miljoonaa katselukertaa

    11. Näytä lisää

    Näitä luetaan!

    1. 1

      Simpanssinaamainen kaahari piinasi poliisia Ruotsissa

    2. 2

      Salkkarit-kaunotar rohkeassa kuvassa – rinnat paistavat läpi henkäyksen ohuesta asusta

    3. 3

      Yhden hitin eläketurva – tässä on joululaulu, joka tuo kirjoittajilleen edelleen 590 000 euron vuosittaiset rojaltitulot

    4. 4

      Vuoden oudoin oikeusjuttu? Moderni perhe -tähden Sofia Vergaran omat hedelmöittyneet IVF-alkiot haastoivat tämän oikeuteen

    5. 5

      Saara Aallon kilpakumppanit pahoissa vaikeuksissa – tuleeko finaalilähetyksestä katastrofi?

    6. Näytä lisää
    1. 1

      Salkkarit-kaunotar rohkeassa kuvassa – rinnat paistavat läpi henkäyksen ohuesta asusta

    2. 2

      Robinin, 18, Linnan juhlat -asussa mukana yksityiskohta, joka jäi monilta huomaamatta – presidentiltä erityinen pyyntö kättelyjonossa

    3. 3

      Saara Aallon kilpakumppanit pahoissa vaikeuksissa – tuleeko finaalilähetyksestä katastrofi?

    4. 4

      Bunkkeriin seksiorjaksi teljetty ruotsalaisnainen kirjoitti kirjan painajaisestaan – ”Yritin uskotella itselleni, ettei tämä voi olla totta”

    5. 5

      Sekava mies uhkasi vastaantulijaa Porvoossa – nyrkkeilytaustainen uhattu ei päästänyt karkuun

    6. Näytä lisää
    1. 1

      Poliisi IS:lle: Tällainen tausta Imatran epäillyllä 23-vuotiaalla kolmoismurhaajalla on

    2. 2

      WhatsApp katoaa miljoonista puhelimista – katso, onko omasi listalla

    3. 3

      Hänellä oli Linnan juhlien rohkein iltapuku – IS:n lukijat äänestivät illan räväyttävimmän pukeutujan

    4. 4

      Tuulenvire paljasti Donald Trumpin omituisen ”asumokan” – netti sekosi lentokentältä napatusta kuvasta

    5. 5

      Perhesyyt eivät painaneet? Mika Salolla teoria Nico Rosbergin lopettamisesta: ”Kukaan ei tajua sitä…”

    6. Näytä lisää