Dit artikel is onderdeel van de reeks Copilot Confessions, een LinkedIn Live die ik samen met Evi om de twee weken organiseer via Dutch Women in Tech.
Je bent met Copilot in gesprek en op een gegeven moment slaat het antwoord de verkeerde weg in. Terugspoelen naar het punt waar het nog wel klopte, zoals je dat bij andere AI-tools kunt, kan in Copilot niet. Twee vragen die deze week binnenkwamen bij Copilot Confessions draaiden allebei om hetzelfde ongemak: wat doe je als Copilot een verkeerd antwoord geeft, en waarom gebeurt dat eigenlijk.
Waarom dit speelt
Dit is een van die dingen waar bijna iedereen die met Copilot werkt vroeg of laat tegenaan loopt. Je stelt een vraag, het antwoord klopt niet helemaal, en dan wil je eigenlijk maar één ding: terug naar daarvoor en het opnieuw proberen. Bij sommige andere AI-tools kan dat inmiddels, je herschrijft je prompt en er ontstaat een vertakking in het gesprek. In Copilot bestaat die functie nog niet. Voor gebruikers die dat gewend zijn vanuit andere tools voelt dat als een stap achteruit, maar het is vooral een aanleiding om preciezer te kijken naar wat er onder de motorkap gebeurt als Copilot de mist ingaat.
Wat het gesprek opleverde
Geen vertakking, wel een omweg. Zolang Copilot geen optie heeft om terug te gaan naar een eerder punt in het gesprek, is de meest werkbare oplossing een nieuwe chat starten. Vraag Copilot eerst om een samenvatting van wat er tot nu toe besproken is, kopieer die, en gebruik hem als startpunt voor een frisse chat. Een vuistregel die daarbij helpt: na ongeveer 20 tot 30 berichten in dezelfde chat begint Copilot dingen door elkaar te halen, omdat hij alle voorgaande context blijft meewegen. Kortere, gerichte chats geven simpelweg minder ruimte om te verdwalen.
Een fout antwoord heeft zelden één oorzaak. De juistheid van een antwoord hangt af van de prompt, van de bronnen die Copilot gebruikt en van de instellingen die je als gebruiker wel of niet hebt gedaan. Aangepaste instructies zijn daarin een onderbelicht hulpmiddel: hierin leg je vast wie je bent, welk werk je doet en hoe je een antwoord graag opgebouwd ziet. Zonder die instructies weet Copilot eigenlijk bijna niets over jou behalve je functie en je manager, en dat werkt door in hoe goed een antwoord aansluit op wat je nodig hebt.
Het final_final-probleem. SharePoint bewaart standaard tot vijfhonderd versies van een document, dus losse bestanden als “contract_final” en “contract_final_final” zijn eigenlijk nooit nodig. Voor Copilot is dat verschil niet zichtbaar: hij ziet geen verschil tussen die twee versies en kan daardoor uit het verkeerde document citeren. Metadata lost dit netter op dan bestandsnamen. Een kolom met status, zoals “in behandeling” of “definitief”, maakt een document vindbaar en herkenbaar zonder dat de bestandsnaam een audit log wordt.
Scopen van bronnen. De WorkIQ knop bepaalt of Copilot binnen je organisatie zoekt of ook het internet raadpleegt, en dat scopen kan preciezer. Notebooks laten je specifieke bronnen koppelen aan een gesprek. Agents kun je bouwen rond een vaste set bronnen die vaak terugkomen in je werk, bijvoorbeeld vaste documentatie of interne richtlijnen. Voor onderzoek dat meerdere bronnen combineert en goed onderbouwd moet zijn, is de onderzoeker-agent een optie: die zoekt en verifieert bronnen net iets grondiger dan een standaardgesprek.
Mijn perspectief
Een fout antwoord van Copilot voelt als een technisch mankement, maar is in de praktijk meestal een samenloop van kleinere dingen: een chat die te lang doorloopt, instructies die nooit zijn ingesteld, of bronnen die niet op orde zijn. Dat is meteen ook goed nieuws, want het betekent dat je er zelf best veel grip op hebt. Voor eindgebruikers zit die grip in gewoontes: chats kort houden, instructies instellen, bronnen bewust kiezen. Voor beslissers en adoptieprofessionals zit de grip een laag dieper, in datamanagement en metadata, want geen enkele gebruiksgewoonte compenseert voor bronnen die niet op orde zijn. Beide lagen hebben elkaar nodig. En de vertakkingsfunctie die er nog niet is, staat inmiddels wel op de radar als iets waar Microsoft naartoe kan bewegen. Tot die tijd blijft de samenvatting-en-nieuwe-chat-truc het beste alternatief.
Wil je meedoen?
Herken je dit, of zit je zelf met een ander Copilot dilemma? Deel het via dit Forms formulier. In de volgende editie van Copilot Confessions op 10 september bespreken we een nieuwe inzending. Tot dan!
Dani Brandsema 