Yleisön ymmärtäminen & analytiikka

Tiivistätkö laajoja materiaaleja ChatGPT:llä? Kaksi varoittavaa esimerkkiä – saat puutaheinää, etkä välttämättä edes huomaa sitä

ChatGPT taipuu erinomaisen hyvin laajojenkin tekstimateriaalien tiivistämiseen tai selkokielistämiseen, mikä nopeuttaa työtä, mutta muutama asia on syytä tiedostaa.

1. Jos käytät liitemateriaalia, varmista, että tiivistelmän lähteenä on käytetty vain ja ainoastaan sitä.

ChatGPT:n maksulliseen versioon voi liittää liitetiedostoja, mikä mahdollistaa tiivistelmien tekemisen esimerkiksi pdf-muotoisista raporteista. Tämä ei kuitenkaan aina tarkoita, että ChatGPT käyttäisi tiivistämisen lähteenä pelkästään liittämääsi tiedostoa, vaikka erikseen pyytäisit sitä.

Esimerkki:

ChatGPT kykeni hyvin tiivistämään ja selkokielistämään 70-sivuisen pdf:n eräästä EU:n vastuullisuusdirektiivistä, mutta ei heti maininnut (siis minulle), että se hyödynsi pdf:n lisäksi vastauksessaan myös muita internetlähteitä, vaikka nimenomaisesti pyysin, että käytä lähteenä vain pdf-aineistoa. Tuloksena oli osittaista hallusinointia – eli puutaheinää. Kysyessäni, miksi ChatGPT ei suostu käyttämään lähteenä vain sille liittämääni pdf-aineistoa, vastaus oli ”koska se vaatisi raportin sisällön suoraa toistamista”. Tämä saattoi osin liittyä esittämääni liian yksityiskohtaiseen kehotteeseen.

2. Saatat joka tapauksessa saada vastaukseksi puutaheinää. Varmista aina, että tiedot ovat oikein. Mitä yksityiskohtaisempaa tietoa pyydät, sitä suuremmalla todennäköisyydellä tuloksena on osittaista hallusinointia.

Esimerkki:

Karkean tason tiivistelmiä ChatGPT tekee kokemukseni mukaan pääsääntöisesti hyvin, mutta yksityiskohtien kanssa on syytä olla tarkkana. Liitin ChatGPT:n maksulliseen versioon maailman suurimman vertailevan uutistutkimuksen, Oxfordin yliopiston Digital News Report 2023 -tutkimuksen pdf-muodossa. Kysyin ChatGPT:ltä, mitkä ovat raportin perusteella Suomen luotetuimmat uutismediat. Tiesin toki, että nämä on lueteltu raportin sivulla 73, mutta en kertonut tätä etukäteen. ChatGPT kertoi, että Suomen luotetuimpien uutismedioiden TOP3 on Yle, Helsingin Sanomat ja Ilta-Sanomat. Vastauksessa on yksi ongelma: se on osittain väärin. Ilta-Sanomat ei ole tässä tutkimuksessa kolmas, tai edes kärkijoukoissa. Ylen jälkeen luotetuimpia ovat tutkimuksessa Helsingin Sanomat, MTV ja paikallislehdet.

Pointti: varsinkin jos tiivistät ChatGPT:llä materiaaleja, joiden substanssia et tunne kovin hyvin, kiinnitä erityistä huomiota tietojen tarkistamiseen – muuten saatat pahimmillaan saada tulokseksi täyttä puppua, etkä välttämättä edes tiedä sitä.

Normaali

Jätä kommentti