Evaluatiefase

Situatie

Na de uitvoering van 3de en vernieuwde scenario zijn er meerdere blogs gemaakt met behulp van de extra stap in de titelgenerator en een herschreven hoofdprompt. Deze nieuwe opzet is vervolgens beoordeeld door Nina, de eindredacteur en de onderzoeker die verantwoordelijk is voor de kwaliteit van de contentproductie binnen DNG. De bedoeling was om te onderzoeken of de verbeteringen daadwerkelijk effect hadden op de stijl, toon en algehele leesbaarheid van de output.

Taak

De taak hier was om het scenario zo aan te passen dat het meerdere teksten kon maken in grote getalen en om blogs minder AI-achtig en beter afgestemd op de doelgroep van DNG. Het moest gaan om teksten die op het eerste gezicht niet te onderscheiden zijn van handgeschreven blogartikelen, met vloeiende zinnen, passende titels en natuurlijk geplaatste hyperlinks.

Actie

In plaats van de blogtitel te genereren als onderdeel van de hoofdprompt, is er een aparte stap toegevoegd waarin uitsluitend titels worden gegenereerd. Dit maakt de tekstproductie flexiber en consistenter, zeker wanneer meerdere blogs over hetzelfde onderwerp geschreven moeten worden. Daarnaast is de bestaande prompt herschreven met nadruk op toegankelijke, persoonlijke stem. Daarbij is expliciet gekozen voor het gebruiken van je in plaats van u, om dichter bij de doelgroep te blijven. Ook is er geëxperimenteerd met verschillende vormen van HTML-structuur door de ankers bovenaan de tekst te zetten.

Resultaat

De resultaten waren opvallend positief, de automatisering wordt nu gebruikt en heeft de bestaande schrijvers vervangen. Door de titelgenerator worden er nu meerdere verschillende hoog kwaliteit artikels gemaakt met dezelfde ankers. De titels en de teksten waren een stuk creatiever. In de blogteksten zelf waren ook duidelijke verbeteringen te zien. Er werden namelijk minder cliché-uitdrukkingen gebruikt, de opbouw van de tekst was logischer, en de AI neigde minder snel naar overdrijving of het gebruik van opsommingen, emoji's of vinkjes. De teksten werden hierdoor natuurlijker en niet snel gezien als AI-tekst.

Reflectie

Het resultaat is fantastisch en de stakeholders binnen DNG zijn ontzettend blij met de ontwikkelingen op het gebied van Blogposts automatiseren. Zo zal Marco Rinck minder geld hoeven uit te geven aan schrijfkosten, kunnen de blogs sneller gemaakt worden, hierdoor kan DNG meer klanten voorzien van service, waardoor uiteindelijk ook meer geld verdiend kan worden. Op het gebied van de blogpost automatisering werkt het naar behoren, maar staan er nog wel soms enters op de verkeerde plek waardoor menselijke input nodig is.

Is de doelstelling behaald?

Ja de doelstelling in loop 3 is behaald. De schrijfstijl is een stuk menselijker geworden en de aparte titelgenerator zorgt voor meer creativiteit en variatie. De teksten worden nu beter ontvangen door de redactie en er worden weinig tot geen teksten teruggestuurd door eindklanten. De automatisering draait stabiel en vervangt het werk van de externe schrijvers. Alleen kleine opmaakfouten vragen om een menselijke bewerking.