Evaluatiefase
Situatie
Na de eerste iteratie van het actieonderzoek bleek dat het oorspronkelijke scenario binnen Make.com niet goed aansloot op de kwaliteitscriteria van DNG. De gegenereerde Blogposts voldeden niet aan de gewenste structuur, bevatten soms geforceerde of onnatuurlijke geplaatste ankerlinks, en waren herkenbaar als AI-tekst. In loop 2 lag de nadruk op het verbeteren van deze punten.
Taak
De opdracht was om het scenario inhoudelijk en technisch te verbeteren, door betere filtering, het instellen van variabelen, optimalisatie van de prompt en correcte opslag in Google documenten. Het einddoel was om de teksten te produceren die qua structuur, lengte en stijl voldoen aan de verwachtingen van DNG.
Actie
Er is een nieuw scenario gebouwd met een verbeterde filtering op schrijver, deadline en lege blogtekst. Er werd een 'set variables'-module toegevoegd om input netjes te structuren. De prompt werd herschreven met specifieke eisen zoals HTML-opmaak, minimaal woordenaantal, ankerlinks en SEO-vriendelijkheid. Daarna werd de gegenereerde output automatisch opgeslagen met de juiste naamgeving.
Resultaat
Het scenario werkt technisch goed en voldoet aan de gestelde voorwaarden qua structuur, workflow en automatisering. De blogs bevatten de juiste lengte, koppenstructuur en links, en worden correct opgeslagen. Wel zijn er nog stijl- en toonproblemen in de tekst die door stakeholders als "AI-achtig" worden ervaren.
Reflectie
De automatisering is efficiënt en correct opgezet. Toch is inhoudelijke verfijning nodig om het AI-karakter te beperken. Het blijft belangrijk om feedback van de eindredactie te blijven verwerken en de prompt verder aan te scherpen. Een volgende stap zou zijn om specifieke stijlrichtlijnen op te nemen in de prompt en uitvoering te testen op natuurlijke tekstproductie.
Samenvatting van feedback van Nina Visser
Nina gaf gedetailleerde feedback op de gegeneerde blogteksten. Ze merkte op dat sommige formulering letterlijk uit het Engels lijken vertaald, en dat de introductie kunstmatig en overdreven overkomt. Ook wees ze op stijlfouten zoals hoofdletters in tussenkoppen, overdreven uitroeptekens, en vreemde vergelijkingen. Verder vond Nina de voorbeelden ongewoon en sommige formuleringen grammaticaal onjuist of verwarrend. Over het algemeen duidt haar feedback op een tekst die inhoudelijk redelijk is, maar qua toon en stijl nog te veel herkenbaar is als door AI geschreven (bijlage V).
Is de doelstelling behaald?
De doelstelling van loop 2 is gedeeltelijk behaald. Technisch gezien functioneert het scenario correct: er worden automatisch teksten gegenereerd die voldoen aan de opgegeven lengte, correcte HTML-structuur hebben, ankerlinks bevatten en automatisch worden opgeslagen. Echter uit feedback van Nina blijkt dat de verminderde AI-herkenbaarheid nog niet volledig is bereikt. De inhoud voelt in bepaalde delen nog kunstmatig aan, met overdreven of geforceerde zinnen. De doelstelling is dus deels gerealiseerd, het scenario is namelijk geoptimaliseerd maar verdere inhoudelijke verfijning is nodig om volledig te voldoen aan de eisen van DNG.
