16 november 20265 min

Klaar is pas klaar met bewijs

AI zegt briljant "klaar". Bouw een systeem waarin klaar het moet bewijzen.

AI zegt briljant "klaar". Snel, zelfverzekerd, met opsommingstekens. En vaak is het ook echt klaar. Maar "vaak" is een probleem als productie ervan afhangt.

Daarom vraag ik niet meer of het klaar is. Ik vraag waar het bewijs is. En ik bouwde twee systemen waarin niemand verder komt zonder bewijs. Geen mens en geen agent.

Klaar is een toestand, geen gevoel

Voor één stuk code volstaat een poort die kan falen. Een test of een echte run, geen tweede model dat het afknikt. Maar een bedrijf is geen stuk code. Het is een hoop onafgemaakte dingen, een paar mensen en agents die parallel draaien.

Daar volstaat een poort op één plek niet. Het woord "klaar" moet regels hebben in de hele werkstroom. Wie het vasthoudt, waarop het rust en wat er moet gebeuren voordat het uit het zicht verdwijnt.

Symbio: een bord waar Done geen knop is

Al mijn werk staat in Symbio. Het is mijn werkbord. Elk stuk werk is één kaart. Een kaart heeft een eigenaar en een status. Er zijn zeven statussen: Captured, Ready, Doing, Parked, Final review, To ship en Done.

Het klinkt als elk kanban. Het verschil zit in wat de server toestaat en wat hij weigert.

  • Doing zonder eigenaar komt er niet door. Werk dat niemand vasthoudt, wordt niet gedaan. Er wordt alleen over gepraat.
  • Parked zonder voorwaarde komt er niet door. Als iets stilstaat, moet er staan wat het deblokkeert. "We wachten" volstaat niet.
  • Done kan alleen vanuit To ship. En alleen met aangetoonde uitrol, of met een uitdrukkelijke vrijstelling dat uitrol niet nodig is.
  • Zonder afgevinkte controles komt een kaart niet in Done.
Captured vastgelegd Ready aan de beurt Doing heeft een eigenaar Parked wat het deblokkeert Final review mens beoordeelt To ship klaar voor uitrol Done klaar bewijs van uitrol of expliciete vrijstelling en afgevinkte controles
Zeven statussen van een kaart. Naar Done leidt maar één weg: via een slot dat bewijs van uitrol eist.

De agent kan "klaar" schrijven zo vaak hij wil. De kaart beweegt niet. Hij beweegt pas als erbij staat dat het draait waar het moet draaien. Of als een mens uitdrukkelijk zegt: dit wordt niet uitgerold.

Zo ziet een kaart eruit die echt door naar Done is gekomen:

Voorbeeld (verzonnen kaart)
KaartNieuw formulier op de website
EigenaarJan
StatusDone (vanuit To ship)
Klaar betekentEen aanvraag uit het formulier komt in de mailbox aan.
BewijsUitgerold, in de browser gecontroleerd, link naar de live pagina.
Controles✓ formuliertest geslaagd
✓ testaanvraag aangekomen
✓ op telefoon gecontroleerd

Final review is een status voor controle door een mens. Maar ik gebruik hem niet voor alles. Als elke kaart op mij wachtte, wachtte alles op mij en stonden de agents stil.

De regel is eenvoudig. Final review alleen als een mens het resultaat moet beoordelen. Tekst voor een klant, een beslissing, het uiterlijk. Waar een test of een uitrolregistratie beslist, hoef ik niets aan te klikken. Bewijs is sterker dan mijn blik op het scherm.

AI zegt je elke keer "klaar". Het systeem moet elke keer om bewijs vragen.

Error patrol: een agent die zelf de servers bewaakt

Het tweede systeem is helemaal nieuw. Ik bouw het en verhuis het naar de servers. Regelmatig over de dag start een AI-agent. Zonder mens achter het toetsenbord. Hij loopt de foutlogs, de status van processen, schijf en geheugen door. Hij zoekt wat nieuw is of erger wordt. Oude dingen die hij al eens heeft opgelost, pakt hij niet opnieuw op. Hij controleert alleen dat ze niet terugkomen.

Fouten groepeert hij op oorzaak, niet op regel in het log. Bij elke groep kiest hij één van drie: ruis zonder gevolgen, nu opgelost, of dit heeft mij nodig.

Twee lijsten: wat hij zelf mag en wat hij alleen meldt

Een autonome agent op productie zonder grenzen is gokken. Daarom heeft hij twee lijsten opgeschreven gekregen: kleine operationele ingrepen die hij zelf mag doen en meteen controleren, en al het andere, dat hij alleen mag melden. Data, code, toegangen en communicatie met mensen staan altijd op de tweede.

Als een oplossing een codewijziging vraagt, doet de agent die niet. Hij vindt bestand, regel en oorzaak, stelt de oplossing in één zin voor en laat haar aan mij. Systemen die niet van mij zijn, leest hij alleen.

En hier komt het samen met het bord. Na elke reparatie moet de agent controleren dat het werkt. Het proces draait, het endpoint antwoordt, de fout keert binnen twee minuten niet terug in het log. En als hij niet weet of gebruikers het merkten, schrijft hij "gevolgen niet gecontroleerd", niet "geen gevolgen". Dezelfde logica als de aangetoonde uitrol.

De telefoon piept alleen als het ertoe doet

De uitvoer van de patrol is een kort bericht in het Tsjechisch, zonder jargon. Wat er gebeurde, wat de agent deed en welk gevolg dat had. Wat alleen ruis was. En wat mij nodig heeft, in één zin. Als er niets nieuws gebeurde, stuurt hij niets.

Voorbeeld (verzonnen bericht)

Foutcontrole (middag)
Zelf opgelost: Eén dienst viel om, is weer opgestart, gecontroleerd. Gevolgen niet gecontroleerd.
Alleen ruis: de website verloor twee keer even de verbinding en herstelde zichzelf.
Alleen melding: het formulier op de website crasht bij een leeg veld. De oorzaak zit in de code, het voorstel voor een oplossing wacht op mij.

Deze regel is uit pijn ontstaan. Vroeger kwam elke fout apart in mijn chat. Iets viel uit, een minuut later was het terug en ik had weer een melding. Het was spam en ik stopte met lezen. Dat is erger dan geen melding.

Tegenwoordig komt er alleen op mijn telefoon wat ik moet beantwoorden. Een bericht van een klant, een nieuwe registratie, een aanvraag. Een storing pas als hij langer duurt en zichzelf niet oplost, en dan ook het herstel. Korte storingen, inloggen en uitrol gaan naar het operationele overzicht op het bord. Daar vind ik ze als ik ze zoek.

Vijf regels voor je eigen klaar

Wat je kunt veranderen, is het systeem waarin dat "klaar" terechtkomt.

  • Geef elk werk een eigenaar en een status. De status "staat stil" vraagt om een voorwaarde die het deblokkeert.
  • Done alleen met bewijs. Een uitrolregistratie, een geslaagde test of een uitdrukkelijke uitzondering van een mens.
  • Betrek de mens waar hij moet oordelen. Laat voor de rest het bewijs beslissen.
  • Schrijf een autonome agent twee lijsten voor. Wat hij zelf mag herstellen en wat hij alleen mag melden. De tweede is belangrijker.
  • Meldingen alleen voor wat je moet beantwoorden. Anders ga je ze niet meer lezen.

De patrol is nieuw, dus resultaten heb ik nog niet. Over een maand schrijf ik hoeveel reparaties hij zelf deed en hoeveel hij aan mij liet.

Wil je dieper gaan?Bekijk de cursussenDiensten