“Een promptstrateeg? Een PROMPTSTRATEEG? We don’t need no stinking promptstrateeg.” Of mijn collega die precieze woorden gebruikte, weet ik niet helemaal zeker meer. Maar dat dit het emotionele gewicht van zijn boodschap was, staat me nog duidelijk bij.
Toch hield ik voet bij stuk. Want we hebben wél een promptstrateeg nodig. Ja jij misschien ook.
De promptwereld in bedrijven: Promptistan
Laten we eerst eens breed om ons heen kijken. Hoe ziet het wilde westen van Promptistan er nu uit?
Binnen grotere organisaties worden op verschillende plekken, prompts bedacht, gemaakt, gebruikt en opgeslagen. Soms door mensen die er bakken van kaas van hebben gegeten, soms door mindere promptgoden, soms door mensen die LLM niet eens kunnen spellen. Allemaal mooi, maar ook allemaal niet per se zo handig.
Want:
- Het is lastig om de kwaliteit van prompts te vergelijken, als iedereen zijn eigen methoden heeft
- Op verschillende plekken wordt het prompt-wiel opnieuw uitgevonden en dat is zonde van de tijd en moeite
- Niemand heeft zicht op welke prompts er rondzweven, hoe goed ze zijn en welke risico’s ze in zich dragen
- Omdat we te maken hebben met GenAI, zijn de prompts het middel waarmee je toon en stijl uit een GPT trekt. Elke afwijkende content-regel in verschillende prompts, levert kleine nuanceverschillen in toon en stijl op, die opgeteld leiden tot de verloedering van je merkstem
Daar moet een manager bij
Laten we eerlijk zijn, dat alles wil je allemaal niet. Niet alleen omdat je de efficiëntie van je GenAI inzet negatief beïnvloedt, maar ook omdat je zicht wil hebben op wat er tussen mens en machine gebeurt. Niet om dan direct boetes uit te delen, maar omdat we willen kunnen aantonen dat we de juiste dingen doen, welke dingen dat precies zijn en omdat we ook (zeer belangrijk) onze eigen collega’s willen beschermen.
Enter…de promptmanager.
Haar rol is breed en belangrijk. Zij zorgt dat er een centrale plek is waar prompts worden bewaard. Ze controleert prompts op risico’s, kwaliteit en effectiviteit. Ze draagt eraan bij dat GenAI inzet niet alleen in Fantasia tijd/geld bespaart, maar ook in de echte wereld. Met prompts die herbruikbaar zijn, slim én efficiënt. Ik mag haar nu al.
Wat levert dat op? Binnen drie weken weet iedereen waar de (gevalideerde) prompts staan, welke versie live is en wat je wél/niet mag aanpassen. Binnen drie maanden gebruiken 60% van de teams library-prompts in plaats van eigen hacks. De correctietijd voor AI-output daalt merkbaar en elke output draagt ook nog een prompt-ID, zodat je kunt aantonen wat er is gebruikt als iemand vragen stelt.
Domeinspecifiek prompten
Er zijn natuurlijk bakken met prompts, die door iedereen gebruikt kunnen worden. Een samenvat-prompt bijvoorbeeld of een spelling-controle-prompt.
Maar er zijn ook prompts die domeinspecifiek zijn. Een Risk-afdeling heeft andere (of extra) guardrailsGuardrails zijn beperkingen die je instelt in je prompt om te voorkomen dat een AI ongewenste, onjuiste of riskante output genereert. Guardrails werken als veiligheidsregels in je prompt. Ze vertellen... Meer nodig dan een HR-afdeling. En waar voor een legalteam een Instructie in een promptEen prompt is de instructie die je aan een AI-model geeft zoals bijvoorbeeld ChatGPT. Het is hoe je communiceert met het systeem: wat je vraagt, hoe je het vraagt en... Meer gevaarlijk kan zijn, is diezelfde instructie voor de Klantenservice helemaal prima.
Wat die inhoudelijke differentiaties zijn, weten de mensen uit de verschillende domeinen je waarschijnlijk wel te vertellen. Een generalist daarentegen heeft daar meer moeite mee. Dat is ook de reden dat veel van de prompts die je op internet kunt vinden, bijna nooit out-of-the-box voor je werken. Jouw context is belangrijk en die is deels inhoudelijk van aard.
Elk domein moet dus een eigen promptmanager hebben. Hoe specifiek je dat maakt, hangt af van de omvang van de organisatie, de inrichting ervan en potentiële impact als er iets misgaat. Geen zorgen, de promptmanager hoeft het domein niet als haar broekzak te kennen (ze hoeft zelf geen jurist te zijn, al zou dat kunnen), maar ze moet dicht genoeg op het domein zitten om de belangrijke nuances te vangen.
Tot zover had ik mijn collega overigens nog mee. De promptmanager begreep hij. Maar ik was nog niet klaar.
Zij heeft visie en diepte
Want dan missen we nog steeds de prompstrateeg. Dat is weer een ander beestje. Zij is degene die de kaders bepaalt, de trends ziet, de LLM’s in de smiezen houdt en er in algemene termen voor zorgt dat de standaarden up-to-date blijven, de processen werkbaar en de resultaten voer zijn voor een mooie demo of roadshow.
Vooral in grotere organisaties, is zij geen luxe. We lijken het ons nog te weinig te realiseren, maar prompts zijn entiteiten die een bepalende rol spelen in de vorming van de stem en boodschap van organisaties. Het zijn niet gewoon kleine verzoekjes aan SjeTGTP (zoals mijn vader het noemt), maar een belangrijk en definiërend deel van je GenAI succes.
Promptstrateeg=promptmanager? Dat kan best!
In kleinere organisaties kan deze rol prima een dubbelrol zijn (een promptmanager, die ook promptstrateeg is of een inhoudelijk specialist, die een goede promptmanager is) overigens. We hoeven de wereld natuurlijk niet vol te stoppen met rollen.
Naast het waarborgen van processen en standaarden, is de promptstrateeg ook verantwoordelijk voor de opslag van de prompts als eigenaar van de library, de ontwikkeling van die library en houdt een vinger aan de pols als de tech-bro’s besluiten om alles om te gooien in gebruikte LLM(‘s). Kortom: zij heeft het vergezicht, de managers houden zich bezig met de alledaagse dingen in Promptistan.
Prompt governance
Ik noem het nog maar even Promptistan, want in de meeste organisaties is het nog een beetje het wilde westen. Wat natuurlijk spannend is, maar geen houdbare situatie. Dat prompts governance nodig hebben, is evident. Hoe dat eruit moet zien, is iedereen nog aan het uitvogelen of …moet dat in elk geval gaan doen.
Mijn collega en ik hebben er wekenlang over gediscussieerd. Eigenlijk stopten we pas toen hij een andere baan vond. Dat lag niet aan deze discussie wil ik benadrukken, maar ik mis het sparren wel.
Terwijl ik dit schrijf, ben ik er (ondanks zijn tegenwerpingen) echter nog meer overtuigd dat prompt governance nodig is, daar rollen bij horen en de promptstrateeg er één van is. Maar ik nodig je uit om me uitgebreid tegen te spreken. Dan kan ik mijn gedachten nog meer scherpen en daar houd ik wel van.
Extra: De AI Begrippenlijst
Don’t stress….it’s just me!
I’ve spent over 25 years working in content strategy and digital transformation, which means I’ve seen enough technology hype cycles to be skeptical and enough genuine innovation to stay curious.
Want to talk shop? Do get in touch!
I have a newsletter and it's bearable. Subscribe to read my (Gen)AI articles!
