Vuoden alusta USA:ssa astui voimaan roskapostituksen kieltävä laki. Ja nyt spammia saapuu postilaatikkoihimme enemmän kuin koskaan. Jotenkin emme ole yllättyneitä…

Näyttää siis siltä että roskapostia kieltävät lait ovat yhtä tyhjän kanssa. Spammerit lähettävät postinsa ulkomailta tai teeskentelevät noudattavansa lain ehtoja, niistä oikeasti viis veisaamatta. Ainoaksi keinoksi (spammerien nurkan taakse viemisen ohella) jää siis kunnollisten suodatinohjelmien käyttäminen.

Vaihdoin juuri oman roskapostisuodattimeni uuteen merkkiin: Bogofilter on edellisen bmf:n lailla palvelimella ajettavaksi tarkoitettu ohjelma, mutta ominaisuuksiltaan hieman monipuolisempi. Parin viikon koulutusjakson jälkeen se nappaa käytännössä kaiken roskapostin.

PC:llä ja Macilla toimivista hyvistä roskapostisuodattimista minulla on paljon vähemmän kokemuksia. Viime vuonna mainostamani Popfile on erinomainen, mutta sen pystytys ja käyttö vaatii hieman urheiluhenkeä. Mutta mitä suosittelisitte roskapostisuodattimeksi tavallisille matti- ja maijameikäläisille jotka lukevat postiaan Outlook Expressillä tai vastaavilla ja haluavat helpon käyttöliittymän? Kerro oma filtterivinkkisi Koirapuistossa.

Microsoftin perustaja Bill Gates kertoo saavansa spammia kuten me kaikki muutkin:

Like almost everyone, I receive a lot of spam every day, much of it offering to help me get out of debt or get rich quick. It’s ridiculous.

Nähtävästi Microsoftillakin aletaan saada tarpeekseen spammista, sillä Gates lupaa kolumnissaan ja tiedotteessaan firmansa alkavan taistella entistä aktiivisemmin roskapostia vastaan. Hyvä niin. Toivottavasti saavat aikaan myös tuloksia.

Minä olen tosin Popfilen myötä saanut siivottua roskapostiongelman tehokkaasti maton alle. Ohjelman osumatarkkuus on 97%, eli roskaa pääsee harvoin tärkeiden postien laatikkooni asti. Tosin spammi saapuu edelleen kovalevylleni, vaikka en sitä näekään, eli kaistaa ja resursseja kuluu hukkaan. Lisäksi roskapostit vaanivat minua jos käyn lukemassa postejani vaikkapa kännykällä.

Netissä liikkuva roskaposti vie nykyään jo suuren osan yhteisestä verkkokapasiteetista. Jos roskapostin määrää saataisiin vähennettyä, tarkoittaisi se sitä että verkkokapasiteettia vapautuisi muuhun käyttöön ilman uuden kaapelin vetämistä. Ja sehän taas tarkoittaisi nopeampaa Internettiä meille kaikille. Puhumattakaan siitä tyydytyksestä mitä moni kokisi nähdessään röyhkeiden penispumppumainostajien ja huijarien joutuessa vastuuseen tekosistaan.

Tulipa sitten minullekin tämä nopeasti huomiota kerännyt suomalainen spammi. Vapaan tiedonvälityksen puolesta taisteleva soturi on laittanut verkkoon sähköisen kirjan ja kirjoittaa: “Tiedän että tällainen mainostaminen on spammausta ja hyvien tapojen vastaista. Uskon kuitenkin tämän kirjan sisällön olevan sen verran ainutlaatuinen, että sen saattaminen julkisuuteen keinolla millä hyvänsä on oikeutettua.”

Ja mitä tällainen ainutlaatuinen sisältö on? Kymmenen vuotta vanha teksti, joka vilisee salaliittoteorioita, herroja, EU:ta jne. Hohhoijaa… Jos kyseessä olisi ollut vaikka toinen sonerakirja tai jotain vastaavaa, olisin ehkä voinut ottaa tuon vielä huumorin kannalta, mutta nyt mieleen palautui lähinnä kansainvälisten suurspammereiden aiheuttama kyrsiintyminen. Jussi teki asiasta rikosilmoituksen, minä tyydyin käräyttämään postittelijan Spamcopiin. Tervemenoa, älkääkä tehkö tuota enää toiste.

Jatkuu alasivulla »

<haircut>Kevät tulee. Vesisade ropisi ikkunapeltiin. Lumi sulaa katolla ja komerossa voi kuulla kuinka vesi lirisee putkea pitkin katolta pois. Lidlissä oli jännittävä ja monipuolinen valikoima pääsiäismunia ja muita teemakarkkeja. Marsipaani-suklaamunat olivat jättimäisiä, edullisia ja maukkaita. Totti kokeili varovasti lätäkössä tassuttelua. Tienristeyksissä oli isoja vesilaksoja. Olin liukastua nurin pihassa. Kiinnitin saunan laudeliinatelineen tukevammin seinään Skihlillä. “Siivosin” työhuoneen pöytää ja sainkin muutaman esineen vaihtamaan paikkaa.

Jani oli skannaillut vanhoja perhealbumin valokuvia ja lähetti cd-levyllisen. Vietin nostalgisia hetkiä menneiden kuvien kanssa. Mietin, kuinka on mahdollista muistaa miltä tuntui ajaa lelutraktoria 30 vuotta sitten, tai kuinka 8-vuotis-synttärit voi muistaa melkein kuin eilisen päivän. Sain lahjaksi mm. koottavan Macchin ja tarjolla oli berliininmunkkeja. Muistelen lukeneeni, että ihmisen joka ikinen solu vaihtuu uuteen 7 vuoden välein. Nämä muistot ovat siis täysin virtuaalisia, kulkeneet 3-4 fyysisen minän läpi.

Popfile on ollut siitä kirjoittamani jutun jälkeen käytössä nyt pari viikkoa. Sinä aikana ohjelma on käsitellyt 621 viestiä, joista 94% meni oikeaan laatikkoon. Tilastot kertovat, että minulle tulevasta postista 30% on rapaa - siis sähköpostilistoja, newslettereitä, uutisia ja muuta jota voi lukea jos ehtii tai heittää menemään ilman sen suurempia omantunnontuskia. Peräti 40% postistani on roskapostia eli pyytämättä lähetettyä mainontaa, täynnä mitä erilaisimpia huijausyrityksiä.

Hauskana yksityiskohtana huomasin, että Popfile oli filtteröinyt jokakuisen Jakob Nielsenin Alertbox-sähköpostin roskapostiksi. Olin aikeissa jo ojentaa Popfileä sen tekemästä virheestä, kun huomasin että ohjelma ei välttämättä olekaan väärässä. Viesti oli n. 45 riviä pitkä - tästä varsinaista Alertboxia, eli tietoa uusimmasta käytettävyyskolumnista, oli 9 riviä. Loppu silkkaa mainosta. Huomasin, että en ole itse asiassa jaksanut lukea Alertboxia enää aikoihin ja niinpä erosin postituslistalta. Sinänsä kyseessä on yhden aikakauden loppu: olinhan ollut säännöllinen lukija vuodesta 1995. Näkemiin Jakob, ehkä tiemme vielä kohtaavat.</haircut>

Roskapostin kanssa taistelu alkaa olla Pinserissä jo ikuisuusaihe. Nyt alkaa kuitenkin vaihteeksi taas vaikuttaa siltä, että taistelu on kääntymässä voiton puolelle. Syynä tähän on muutaman viikon koeajossa ollut sähköpostisuodatin nimeltään Popfile.

Siinä missä perinteisemmät roskapostisuodattimet pohjautuvat erilaisiin luetteloihin tai hakemistoihin tunnetuista roskapostin lähettäjistä ja aiheista, Popfile käyttää postin suodattamiseen eräänlaista “tekoälyä”, Bayes-päättelyä. Se lukee jokaisen saapuvan sähköpostiviestin läpi ja antaa kaikille viestistä löytyville sanoille todennäköisyyspisteitä. Näiden pisteiden perusteella ohjelma lyö sähköpostiviestiin leiman siitä, mihin kategoriaan se arvelee postin kuuluvan. Leimojen perusteella postit voi sitten poistaa, merkitä tai arkistoida omassa lempisähköpostiohjelmassaan. Aivan - Popfile on yhteensopiva käytännössä kaikkien nykyaikaisten sähköpostiohjelmien kanssa.

Mistä Popfile sitten tietää sanojen todennäköisyyksiä ja annettavia leimoja? Ne opetetaan sille. Kun ohjelma otetaan käyttöön, siihen syötetään haluttu määrä “koreja” (bucket) - minulla on käytössä esimerkiksi korit “roskaposti”, “pinseriin liittyvä posti”, “työposti”, “muut henkilökohtaiset” sekä “bulkkiposti”. Alussa Popfile ei ymmärrä korien eroja eikä tiedä mikä viesti kuuluu mihinkin. Sitä täytyy opettaa. Kun ohjelmalle on pari kertaa näytetty mihin koriin viesti olisi pitänyt laittaa, se alkaa oppia. Ohjelman näkemät sanat alkavat saada merkityksiä. Jo muutaman kymmenen viestin jälkeen Popfile suodattaa postia itsevarmasti. Virheitäkin toki sattuu, mutta silloin ohjelmaa taas ojennetaan: “Tämä viesti olisi pitänyt laittaa tähän koriin”. Tätä kutsutaan TOE (Train On Error) -menetelmäksi.

Tyypillinen osumatarkkuus Popfilellä on n. 95%, eli noin joka kahdeskymmenes saapuva viesti luokitellaan väärin. Riippuen postista, tarkkuus voi olla parempikin (tai huonompi). Ohjelma on tällä hetkellä vielä kehitteillä, joten sen asentaminen ja käyttäminen vaatii hieman paneutumista. Se tukee vain POP-sähköpostilaatikoita ja toimii selaimen kautta käytettävällä käyttöliittymällä. Leimatun postin lajittelu vaatii sen, että osaa tehdä suodattimia omassa sähköpostiohjelmassaan. Onneksi kuitenkin Popfilen sivuilla on hyvä ohjeistus ohjelman käyttöönotosta.

Popfile toimii kaikissa koneissa, joissa voi käyttää Perliä. Siitä on saatavilla myös Windows-asennuspaketti, joka asentaa koneeseen kaiken tarvittavan (myös Perl-tulkin).

Tästä tulikin pitkä ja ylistävä juttu yhdestä ohjelmasta, mutta hyvää kannattaa aina kehua. Eli suosittelen Popfileä lämpimästi kaikille spammista kärsiville. Popfile löytyy osoitteesta popfile.sourceforge.net.