Het antwoord: Zapier heeft een eigen testmethode ontwikkeld om AI-modellen te beoordelen op hoe goed ze echte, meerstaps bedrijfsprocessen uitvoeren. Dit helpt ondernemers om zonder technische kennis het juiste model te kiezen voor taken zoals klantenservice, facturatie of marketing.

Wat er aan de hand is

Zapier, het platform dat apps aan elkaar koppelt zonder dat je kunt programmeren, heeft een nieuwe benchmark gelanceerd: AutomationBench. In plaats van AI-modellen te testen op losse vragen of het schrijven van teksten, kijkt AutomationBench hoe goed een model een complete workflow uitvoert. Denk aan het verwerken van een bestelling, het beantwoorden van een klantvraag en het bijwerken van een factuur in één reeks. Volgens Zapier verschijnen er wekelijks nieuwe AI-modellen, en het wordt steeds lastiger om bij te houden welk model waarvoor geschikt is. AutomationBench moet dat overzichtelijker maken door modellen te testen op praktische, meerstaps taken die ondernemers dagelijks tegenkomen.

Wat dit betekent

Voor ondernemers betekent dit dat je niet langer zelf hoeft uit te zoeken welk AI-model geschikt is voor jouw specifieke proces. Zapier neemt die keuze deels uit handen door modellen te testen op hoe ze presteren in echte workflows, niet alleen in theorie. Dit is vooral relevant voor bedrijven die automatisering willen inzetten voor terugkerende taken, zoals het verwerken van inkomende e-mails, het genereren van offertes of het beheren van voorraad. Waar je eerder moest gokken of een model geschikt was, kun je nu vertrouwen op een gestandaardiseerde test die is afgestemd op de praktijk. Dit verlaagt de drempel voor MKB-bedrijven om AI in te zetten, omdat de technische keuze simpeler wordt.

Hoe je dit kunt toepassen

Als je een webshop runt en bestellingen automatisch wilt verwerken. Je zou kunnen kijken welk AI-model in AutomationBench het beste scoort op het verwerken van bestelgegevens en het genereren van een bevestigingsmail. Zapier biedt de mogelijkheid om dat model direct in een Zap te koppelen, zonder dat je zelf prompts hoeft te schrijven of parameters hoeft in te stellen. Een optie is om te starten met een eenvoudige workflow: een inkomende bestelling trigger een AI-model dat de klantgegevens controleert en een factuur aanmaakt.

Als je een team aanstuurt en routinematige klantvragen wilt automatiseren. Overweeg om een Zap te maken die binnenkomende e-mails of chatberichten naar een AI-model stuurt dat getraind is op het beantwoorden van veelgestelde vragen. AutomationBench laat zien welk model het beste is in het begrijpen van context en het uitvoeren van meerdere stappen, zoals het opzoeken van orderinformatie en het geven van een antwoord. Je zou kunnen beginnen met een testset van tien veelvoorkomende vragen om te zien welk model het beste past.

Als je in de marketing werkt en content wilt genereren op basis van data. Een mogelijkheid is om een Zap te maken die een rapport uit je CRM haalt en dat naar een AI-model stuurt voor het schrijven van een samenvatting of een social media post. AutomationBench test hoe modellen omgaan met het combineren van data uit verschillende bronnen, wat hier direct relevant is. Je zou kunnen experimenteren met een model dat goed scoort op het verwerken van gestructureerde data, zoals cijfers uit een dashboard.

De praktische toepassing hangt af van jouw specifieke proces, maar de kern is dat je met AutomationBench een onderbouwde keuze kunt maken zonder dat je zelf technische tests hoeft uit te voeren.

Bron: Zapier