Digitoday

Valikko

Tutkija kehitti työkalun uutisten seurantaan

Perjantaina väittelevä Juha Makkonen on kehittänyt menetelmiä uusien uutistapahtumien havaitsemiseen ja aiemmin havaittujen tapahtumien seuraamiseen. Google News voi olla nopea, mutta onko se tarpeeksi tarkka?


Terveyden ja hyvinvoinnin laitoksessa työskentelevä filosofian maisteri Juha Makkonen esittää semanttisia luokkia, joihin sanat ryhmitellään merkitystensä mukaan samankaltaisten sanojen joukoiksi. Luokkia ovat esimerkiksi yleiset sanat sekä organisaatiot, henkilöt ja paikanilmaukset. Tekstistä tunnistetaan myös ajanilmaukset.

Tuloksena käytännön uutishaku voisi esimerkiksi erottaa toisistaan kaksi eri lento-onnettomuusuutista, jotka ovat samanlaisia yleisten sanojen kannalta, mutta erilaisia paikkojen ja ajanilmausten suhteen, Helsingin yliopisto hahmottaa.

Tarkkuutta nopeuden
kustannuksella


Automaattinen uutistapahtumien seuranta on tietojenkäsittelytieteen ja siinä tiedonhaun piiriin kuuluva tutkimusalue, jossa kehitetään menetelmiä digitaalisen uutisvirran hallintaan.

Uutisvirta koostuu useista, mahdollisesti erikielisistä uutislähteistä, joissa voi olla digitaalisia online-uutisia ja radio- sekä televisiouutisia.

Perinteiset tiedonhakumenetelmät, jotka ovat internet-tiedonhakujärjestelmien perustana, vertailevat tekstidokumentteja joukkoina sanoja ja käsittelevät sanoja merkkijonoina nopeasti. Erityisen vaikeaa on ollut tunnistaa kaksi samantyyppistä uutistapahtumaa, Makkonen taustoittaa.

Väitöskirjan nimi on Semantic Classes in Topic Detection and Tracking (Semanttisten luokkien soveltaminen automaattisessa uutisseurannassa).

Se mitä Makkosen keinoin hävittäisiin nopeudessa, voitettaisiin tarkkuudessa. Kielellinen analyysi hidastaa toimintaa jonkun verran, mutta väittelijän mukaan sitä voitaisiin tarvittaessa kompensoida laittamalla rautaa riviin.

Tuntuva
parannus


Oma kysymyksensä tosin on, missä määrin Google tai esimerkiksi Yahoo jo käyttävät tämäntyyppisiä semanttisia menetelmiä omissa uutispalveluissaan.

Makkonen kuitenkin veikkaa, että kovin syvälliseen sisältöanalyysiin ei suurissa uutispalveluissa vielä mentäne, koska käsiteltävän aineiston määrä on niin mittava. Jos dataa tulee sisään nopeammin kuin sitä pystytään käsittelemään, palvelut jäisivät koko ajan jälkeen, Makkonen miettii.

Juha Makkosen uusilla menetelmillä erot olivat etenkin olemassa olevien uutisten seurannassa tilastollisesti merkittäviä, ja keinot paransivat tuntuvasti uutistapahtumien seurannan tarkkuutta verrattuna perinteiseen lähestymistapaan.

Uusien tapahtumien tunnistamista menetelmä paransi vähemmän. Tämä alue pysyy edelleen vaikeana ongelmana yksinkertaisesti siitä syystä, että uusia tapahtumia pitää verrata kaikkeen vanhaan. Silloin vertailuaineisto on sanalla sanoen valtava.

Kommentit

    Näytä lisää

    Näitä luetaan!

    1. 1

      Suomalaismies aikoo miljonääriksi 500 päivässä – näin hän sen tekee

    2. 2

      Isisin seksiorjaksi joutunut kertoo hirvittävistä kokemuksistaan: ”Sama mies raiskasi minut joka päivä”

    3. 3

      Krista Pärmäkoski asetettiin mahdottomaan tilanteeseen – ”Veikö johto varman mitalin?”

    4. 4

      IS selvitti: tällainen on venäläinen eliittiprikaati Suomen rajan pinnassa – kyky yllätysiskuihin

    5. 5

      Lauri, 30, kertoo miksi pettää vaimoaan Tinder-naisten kanssa: ”En tunne minkäänlaista syyllisyyttä”

    6. 6

      Lehdet tyrmäsivät tosi-tv-kaunottaren arveluttavan gaalamekon – leopardiasu paljasti arkiset alushousut

    7. 7

      Lahden MM-avajaisten liukas lava teki tepposet suomalaisille huipputanssijoille – ”Perseelleenhän tuo homma meni”

    8. 8

      Nämä kuitit kannattaa säästää – ”Silloin kuittien on löydyttävä”

    9. 9

      Sulhanen tuomittiin brittikirjailijan murhasta – kirjailija oli keksinyt itse ruumiin piilopaikan

    10. 10

      Näitä tuotteita Suomen vaarallisimmat vangit himoitsevat selleihinsä Riihimäen vankilan omasta kaupasta

    11. Näytä lisää
    1. 1

      Julkkiksilta sataa tukea rumaksi haukutulle Maria Veitolalle – Rakel Liekiltä tyhjentävä kommentti

    2. 2

      Traaginen onnettomuus Helsingissä – työkoneen kauha osui kävelijään, nainen kuoli vammoihinsa

    3. 3

      Nämä kuitit kannattaa säästää – ”Silloin kuittien on löydyttävä”

    4. 4

      Näitä tuotteita Suomen vaarallisimmat vangit himoitsevat selleihinsä Riihimäen vankilan omasta kaupasta

    5. 5

      Lauri, 30, kertoo miksi pettää vaimoaan Tinder-naisten kanssa: ”En tunne minkäänlaista syyllisyyttä”

    6. 6

      Video: Kajaanin hyppyrimäki räjähti näyttävästi

    7. 7

      Anu Saagim haukkui Maria Veitolaa rumaksi suorassa lähetyksessä – Veitola harmistui studioyleisön reaktiosta: ”Yleisö nauraa ja taputtaa”

    8. 8

      Tv-tähden sekava käytös ihmetytti aamu-tv:ssä – oliko muoti-idoli humalassa? Syljeskeli ja selasi puhelintaan, somekansa äimistyi

    9. 9

      Tuskien taival: Kohutun Adrian Solanon MM-hiihto alkoi karmealla tavalla – matka jäi lopulta kesken

    10. 10

      Kummisetä antoi 10-vuotiaalle tyttärelle lahjarahaa – Kela rokotti koko perheeltä 341,52 euroa/kk

    11. Näytä lisää
    1. 1

      Julkkiksilta sataa tukea rumaksi haukutulle Maria Veitolalle – Rakel Liekiltä tyhjentävä kommentti

    2. 2

      MTV: Saara Aalto kärsii kiusallisesta ja kivuliaasta naistentaudista: ”Ei parannuskeinoa”

    3. 3

      Kummisetä antoi 10-vuotiaalle tyttärelle lahjarahaa – Kela rokotti koko perheeltä 341,52 euroa/kk

    4. 4

      Pekka Vähäsöyrinki tunnusti Mika Myllylän haudalla, milloin dopinginkäyttö alkoi: ”Siinä hetkessä annoin periksi”

    5. 5

      Traaginen onnettomuus Helsingissä – työkoneen kauha osui kävelijään, nainen kuoli vammoihinsa

    6. 6

      Stubb opetti Trumpille faktoja Ruotsista – viesti sytytti kiivaan keskustelun

    7. 7

      Kanadan hurmuriministeri sai Ivanka Trumpin pasmat sekaisin – flirttaileva kuva leviää vauhdilla

    8. 8

      Yleinen virhe wc-pöntöllä: Tästä syystä pyttyyn jää helposti ”jarrutusjäljet”

    9. 9

      Anu Saagim haukkui Maria Veitolaa rumaksi suorassa lähetyksessä – Veitola harmistui studioyleisön reaktiosta: ”Yleisö nauraa ja taputtaa”

    10. 10

      Nokialla pahoinpidelty 17-vuotias tyttö on kuollut

    11. Näytä lisää

    Näitä luetaan!

    1. 1

      Suomalaismies aikoo miljonääriksi 500 päivässä – näin hän sen tekee

    2. 2

      Isisin seksiorjaksi joutunut kertoo hirvittävistä kokemuksistaan: ”Sama mies raiskasi minut joka päivä”

    3. 3

      Krista Pärmäkoski asetettiin mahdottomaan tilanteeseen – ”Veikö johto varman mitalin?”

    4. 4

      IS selvitti: tällainen on venäläinen eliittiprikaati Suomen rajan pinnassa – kyky yllätysiskuihin

    5. 5

      Lauri, 30, kertoo miksi pettää vaimoaan Tinder-naisten kanssa: ”En tunne minkäänlaista syyllisyyttä”

    6. Näytä lisää
    1. 1

      Julkkiksilta sataa tukea rumaksi haukutulle Maria Veitolalle – Rakel Liekiltä tyhjentävä kommentti

    2. 2

      Traaginen onnettomuus Helsingissä – työkoneen kauha osui kävelijään, nainen kuoli vammoihinsa

    3. 3

      Nämä kuitit kannattaa säästää – ”Silloin kuittien on löydyttävä”

    4. 4

      Näitä tuotteita Suomen vaarallisimmat vangit himoitsevat selleihinsä Riihimäen vankilan omasta kaupasta

    5. 5

      Lauri, 30, kertoo miksi pettää vaimoaan Tinder-naisten kanssa: ”En tunne minkäänlaista syyllisyyttä”

    6. Näytä lisää
    1. 1

      Julkkiksilta sataa tukea rumaksi haukutulle Maria Veitolalle – Rakel Liekiltä tyhjentävä kommentti

    2. 2

      MTV: Saara Aalto kärsii kiusallisesta ja kivuliaasta naistentaudista: ”Ei parannuskeinoa”

    3. 3

      Kummisetä antoi 10-vuotiaalle tyttärelle lahjarahaa – Kela rokotti koko perheeltä 341,52 euroa/kk

    4. 4

      Pekka Vähäsöyrinki tunnusti Mika Myllylän haudalla, milloin dopinginkäyttö alkoi: ”Siinä hetkessä annoin periksi”

    5. 5

      Traaginen onnettomuus Helsingissä – työkoneen kauha osui kävelijään, nainen kuoli vammoihinsa

    6. Näytä lisää