OSINT-raportti: ilmaise epävarmuus ja rajaa johtopäätökset

OSINT-raportti ei ole kokoelma linkkejä eikä vakuuttavalta kuulostava kertomus. Sen tehtävä on näyttää, mitä avoimista lähteistä voidaan päätellä, millä perusteella ja millaisin rajoituksin. Lukijan pitäisi ymmärtää myös se, mikä jäi selvittämättä.

Huolellinen tiedonhaku voi menettää arvonsa raportointivaiheessa. Näin käy esimerkiksi silloin, kun mahdollinen yhteys muuttuu tekstissä varmaksi suhteeksi tai yksittäinen havainto esitetään jatkuvana toimintatapana. Ongelmaa ei ratkaista lisäämällä loppuun yleistä varoitusta tietojen epävarmuudesta.

Tässä oppaassa rakennat raportin, jossa väitteiden vahvuus vastaa näyttöä. Menetelmä sopii esimerkiksi organisaatioiden julkisen viestinnän, verkkopalvelujen muutosten ja avoimien asiakirjojen tutkimiseen.

Aloita tutkimuskysymyksestä, älä löydösten luettelosta

Raportin rakenne kannattaa päättää tutkimuskysymyksen perusteella. Jos tehtävänä on selvittää, muuttuivatko verkkopalvelun julkiset toimitusehdot, raportin ei tarvitse käsitellä kaikkea palvelusta löytyvää tietoa.

Kirjoita alkuun yksi rajattu kysymys ja määrittele tarkastelun kohde. Kerro, mitä ajanjaksoa tutkimus koskee ja millaisia lähteitä siihen sisältyy. Mainitse myös olennaiset rajaukset: esimerkiksi kirjautumista vaativia sisältöjä ei tarkasteltu tai vertailukelpoista aiempaa versiota ei löytynyt.

Hyvä rajaus vastaa neljään kysymykseen:

• Mitä asiaa selvitetään?
• Miltä ajanjaksolta tietoa etsitään?
• Mitkä aineistot kuuluvat tarkasteluun?
• Mihin kysymyksiin raportti ei vastaa?

Rajaus estää lukijaa tulkitsemasta suppeaa selvitystä kattavaksi tarkastukseksi. Se myös auttaa kirjoittajaa poistamaan kiinnostavat mutta tehtävän kannalta tarpeettomat sivupolut.

Erota havainto, tulkinta ja johtopäätös

Raportin tärkein erottelu kulkee sen välillä, mitä aineistossa näkyy ja mitä siitä päätellään. Käytä tarvittaessa näille erillisiä kenttiä tai kappaleita.

Havainto kuvaa tarkistettavaa sisältöä. Esimerkiksi: tarkasteluhetkellä verkkopalvelun ohjesivulla ilmoitettiin asiakastuen aukioloajaksi arkipäivät. Havainto ei vielä kerro, milloin käytäntö alkoi tai noudatetaanko sitä käytännössä.

Tulkinta selittää havainnon mahdollista merkitystä. Ohjesivun muutos voi viitata ilmoitetun palveluajan supistumiseen, jos vertailukelpoinen aiempi versio sisälsi myös viikonloput.

Johtopäätös vastaa tutkimuskysymykseen näytön sallimissa rajoissa. Tässä tapauksessa voidaan todeta julkisesti ilmoitetun aukioloajan muuttuneen. Varsinaisen asiakaspalvelutoiminnan muutoksesta tarvittaisiin muuta näyttöä.

Vältä sitä, että tulkinta naamioituu havainnoksi verbivalinnan avulla. Ilmaisut ”osoittaa”, ”todistaa” ja ”vahvistaa” ovat usein liian voimakkaita, jos aineisto vain sopii yhteen tietyn selityksen kanssa.

Arvioi lähde ja väite erikseen

Lähteen luotettavuus ja yksittäisen väitteen vahvuus eivät ole sama asia. Organisaation oma verkkosivu on suora lähde siihen, mitä organisaatio ilmoittaa. Se ei yksin vahvista kaikkia ilmoituksen sisältämiä väitteitä toiminnan laadusta, laajuudesta tai tuloksista.

Vastaavasti epäselvästä lähteestä saatu vihje voi johtaa myöhemmin vahvaan näyttöön. Alkuperäinen vihje ei silti muutu jälkikäteen luotettavaksi lähteeksi kaikissa muissa asioissa.

Arvioi jokaisen keskeisen väitteen kohdalla ainakin seuraavat asiat:

• Onko lähteellä suora pääsy kuvaamaansa tietoon?
• Onko kyse alkuperäisestä aineistosta vai referaatista?
• Onko sisältö ajallisesti ja asiayhteydeltään sopivaa?
• Tukeeko väitettä muu, aidosti erillinen näyttö?
• Onko käytettävissä ristiriitaista tietoa?

Kirjoita raporttiin arvioinnin peruste, älä pelkkää luokitusta. ”Vahva näyttö” kertoo vähän, ellei lukija näe, mikä tekee näytöstä vahvaa ja mitä väitteen osaa arvio koskee.

Ilmaise epävarmuus väitekohtaisesti

Yleinen lause ”tiedoissa voi olla virheitä” ei auta lukijaa paikantamaan epävarmuutta. Kerro sen sijaan, liittyykö epävarmuus aineiston alkuperään, ajankohtaan, kattavuuteen vai tulkintaan.

Voit käyttää sanallisia arvioita, kuten vahva, kohtalainen ja heikko näyttö, kun määrittelet niiden merkityksen raportissa. Älä käsittele niitä laskettuina todennäköisyyksinä. Ilman perusteltua mallia prosenttiluvut luovat helposti vaikutelman tarkkuudesta, jota aineisto ei tue.

Hyödyllinen epävarmuuslause sisältää perustelun ja seurauksen:

> Aiemman sivuversion tallennusajankohta tunnetaan, mutta sen julkaisupäivää ei ole vahvistettu. Muutoksen tarkkaa päivää ei siksi voida päätellä käytettävissä olevista versioista.

Tämä on informatiivisempi kuin ”muutos tapahtui luultavasti keväällä”. Se kertoo, mikä tieto puuttuu ja miten puute rajoittaa päätelmää.

Erota myös lähteessä oleva epävarmuus omasta analyysiepävarmuudestasi. Jos lähde puhuu suunnitelmasta, raportti ei saa muuttaa sitä toteutuneeksi tapahtumaksi.

Älä tulkitse puuttuvaa havaintoa tapahtuman puuttumiseksi

Se, ettei tietoa löytynyt, ei yleensä osoita, ettei asiaa ole olemassa tai ettei tapahtumaa sattunut. Hakujen kattavuus, sivuston rakenne, poistuneet sisällöt ja aineiston saatavuus vaikuttavat kaikki tulokseen.

Muotoile kielteinen löydös rajatusti. ”Tarkastetuista julkisista tiedotteista ei löytynyt mainintaa muutoksesta” on perustellumpi kuin ”muutoksesta ei tiedotettu”. Ensimmäinen kuvaa tutkimuksen tulosta. Jälkimmäinen esittää laajemman väitteen organisaation toiminnasta.

Kielteinen havainto voi olla merkityksellinen, jos tieto tavallisesti esiintyisi juuri tarkastetussa aineistossa. Silloinkin raportin on kerrottava, miksi sen odotettiin löytyvän ja kuinka kattava tarkastelu oli.

Dokumentoi vähintään tarkastetut aineistokokonaisuudet, ajallinen rajaus ja olennaiset saatavuusongelmat. Lukijan on voitava erottaa toisistaan ”ei löytynyt”, ”ei voitu tarkistaa” ja ”lähde ilmoittaa, ettei tapahtunut”.

Käsittele vaihtoehdot ja ristiriidat näkyvästi

Raportin ei tarvitse luetella kaikkia kuviteltavissa olevia selityksiä. Sen pitää kuitenkin käsitellä uskottavat vaihtoehdot, jotka muuttaisivat pääjohtopäätöstä.

Jos tuotesivu katoaa verkkosivustolta, mahdollisia selityksiä voivat olla tuotteen lopettaminen, sivustouudistus tai tilapäinen tekninen häiriö. Pelkkä katoaminen ei ratkaise, mikä näistä on oikea.

Esitä vaihtoehdot tiiviisti:

• Mitä havaintoa vaihtoehto selittää?
• Mikä näyttö tukee sitä?
• Mikä puhuu sitä vastaan?
• Mitä lisätietoa tarvittaisiin vaihtoehtojen erottamiseen?

Ristiriitaa ei pidä häivyttää valitsemalla kertomukseen paremmin sopiva lähde. Jos kaksi ajantasaista sivua ilmoittaa eri tiedot, ristiriita on itsessään raportoitava havainto. Johtopäätös voi silloin olla, että julkinen viestintä on epäyhtenäistä, ei että jompikumpi tieto varmasti vastaa käytäntöä.

Rakenna raportti kahdelle lukutavalle

Osa lukijoista tarvitsee nopean vastauksen, osa haluaa tarkastaa perustelut. Hyvä OSINT-raportti palvelee molempia ilman, että tiivistelmä muuttuu muuta tekstiä varmemmaksi.

Käytännöllinen rakenne on seuraava:

• Tiivistelmä: vastaus tutkimuskysymykseen ja tärkein rajoite.
• Kysymys ja rajaus: kohde, ajanjakso ja tarkastellut aineistot.
• Keskeiset havainnot: olennaiset löydökset lähdeviitteineen.
• Arviointi: tulkinnat, vaihtoehdot ja ristiriidat.
• Johtopäätökset: mitä näyttö tukee ja mitä ei.
• Avoimet kysymykset: puuttuvat tiedot ja mahdolliset jatkotarkistukset.

Sijoita lähdeviite mahdollisimman lähelle sitä väitettä, jota se tukee. Yksi linkki pitkän kappaleen lopussa jättää helposti epäselväksi, mitkä lauseet ovat lähteestä ja mitkä kirjoittajan tulkintaa.

Pidä yksityiskohtainen tutkimusloki tarvittaessa erillään lukijalle tarkoitetusta raportista. Raportin pitää olla tarkistettava, mutta sen ei tarvitse toistaa jokaista hakua tai epäolennaista välivaihetta.

Tarkista julkaisun tarpeellisuus ja sanavalinnat

Ennen jakamista arvioi, tarvitseeko vastaanottaja kaikki raporttiin sisältyvät tiedot. Julkisesta lähteestä löytyminen ei yksin tarkoita, että tieto olisi tarpeellista julkaista uudessa asiayhteydessä.

Jos aineistossa on henkilötietoja, arvioi käsittelyn oikeusperuste, käyttötarkoitus ja tietojen minimointi. Rajaa myös vastaanottajat ja säilytysaika tarpeen mukaan. Organisaatiota koskeva selvitys ei automaattisesti edellytä työntekijöiden yhteystietojen tai muiden henkilötietojen sisällyttämistä raporttiin.

Tee lopuksi erillinen kielentarkistus väitteiden vahvuudelle. Etsi sanat ”varmasti”, ”aina”, ”ei koskaan”, ”todistaa” ja ”selvästi”. Tarkista jokaisesta, kattaako näyttö todella ilmaisun koko merkityksen.

Tarkista myös otsikko ja tiivistelmä erikseen. Jos ne lupaavat varman vastauksen mutta leipäteksti kertoo olennaisista aukoista, raportti johtaa helposti harhaan. Lisää raporttiin versio ja tarkastelun päättymisajankohta, jotta myöhemmät lukijat tunnistavat tiedon ajalliset rajat.

Yhteenveto

Hyvä OSINT-raportti tekee päättelyn näkyväksi. Se erottaa havainnot tulkinnoista, arvioi väitteet erikseen ja kertoo täsmällisesti, mihin epävarmuus liittyy.

Tavoitteena ei ole mahdollisimman varma sävy vaan mahdollisimman perusteltu vastaus. Kun myös tiedon rajat ovat näkyvissä, lukija voi arvioida johtopäätöksiä ja päättää, tarvitaanko lisää selvitystä.