Onderzoek: AI verbetert je tekst, maar alles gaat op elkaar lijken
Een optelsom van 19 studies, onder meer uit Tilburg, laat zien dat werk met AI-hulp meer op dat van anderen lijkt. Het effect is klein, maar telt op.
Wie wel eens door LinkedIn scrolt, herkent het: dezelfde openingszin, dezelfde korte regels, dezelfde vraag aan het eind. Dat gevoel is inmiddels ook wetenschappelijk gemeten. Het Laatste AI Nieuws zette het onderzoek op een rij en de conclusie is tweeledig: AI maakt jouw tekst beter, terwijl alle teksten samen eenvormiger worden.
Drie onderzoeken die het laten zien
- Korte verhalen (Science Advances): Anil Doshi (UCL) en Oliver Hauser (University of Exeter) lieten zo'n driehonderd mensen een verhaal schrijven, met of zonder startideeën van GPT-4. Met AI-ideeën scoorden de verhalen beter, vooral bij minder creatieve schrijvers. Maar met één AI-idee leken de verhalen onderling 10,7 procent meer op elkaar.
- Toelatingsessays (Georgetown): bij 2.200 studentenessays voegde elk extra menselijk essay meer nieuwe ideeën toe dan elk extra essay van GPT-4. Slimmer prompten maakte losse AI-essays creatiever, maar dichtte dat gat niet. Hier schreef de AI wel het hele essay.
- Optelsom van 19 studies: Alwin de Rooij (Tilburg University) en Michael Mose Biskjaer (Aarhus University) legden 61 metingen naast elkaar. Werk dat met AI is gemaakt, lijkt meer op werk van anderen. Het effect is klein, maar statistisch betrouwbaar.
Klein per tekst, groot bij miljoenen gebruikers
Je merkt het niet aan je eigen tekst. Het gewicht zit in de schaal: als miljoenen mensen dezelfde systemen gebruiken, schuiven hun teksten allemaal een stukje naar hetzelfde gemiddelde. Wisselen van chatbot helpt maar beperkt, want ook verschillende taalmodellen neigen op open vragen naar dezelfde ideeën.
Er zijn ook tegengeluiden. Een (nog niet beoordeelde) studie naar programmeercode zag dat de vorm meer op elkaar ging lijken, maar de aanpak van problemen niet. En voor mensen die moeite hebben met schrijven, bijvoorbeeld bij een sollicitatie, is de hulp van AI juist winst.
Eerst zelf denken, dan de chatbot
De praktische les is om de volgorde om te draaien. Schrijf eerst in een paar zinnen op wat je zelf vindt, en gebruik AI daarna voor de vorm of om tegenargumenten te zoeken. Voeg dingen toe die alleen jij weet: een eigen voorbeeld, een cijfer uit je werk. Dat sluit aan bij een eerder advies op deze site: wie AI het persoonlijke laat invullen, levert iets in wat geen model kan teruggeven.
Bron: AI maakt jouw tekst beter, maar ons allemaal hetzelfde (Het Laatste AI Nieuws). Met AI geschreven; zie ons redactiebeleid.