Zapier heeft een eigen testmethode ontwikkeld om te bepalen welke AI-modellen het beste werken voor geautomatiseerde workflows, niet alleen voor losse vragen. Voor ondernemers betekent dit dat je niet meer hoeft te gokken welk model je koppelt aan je factuurverwerking of klantopvolging.

Wat er aan de hand is

Zapier heeft een benchmark gelanceerd met de naam AutomationBench. Waar de meeste AI-tests modellen beoordelen op hoe goed ze een enkele vraag beantwoorden, kijkt AutomationBench naar hoe modellen presteren in meerstaps-workflows. Denk aan het ophalen van data uit een e-mail, het controleren van een database en het versturen van een antwoord — allemaal in één geautomatiseerd proces. Volgens Zapier worden er wekelijks nieuwe AI-modellen gelanceerd, en het bijhouden welk model geschikt is voor welke taak is een vak apart. De benchmark moet ondernemers helpen om niet alleen het nieuwste, maar ook het meest geschikte model te kiezen voor hun specifieke automatisering.

Wat dit betekent

Voor ondernemers die Zapier gebruiken om processen te automatiseren, wordt de keuze voor een AI-model ineens concreet. Waar je eerder blind een model selecteerde op basis van populariteit of prijs, kun je nu zien welk model daadwerkelijk goed functioneert in een workflow met meerdere stappen. Dit is vooral relevant voor bedrijven die klantopvolging, factuurverwerking of dataverrijking automatiseren. Een model dat uitblinkt in het beantwoorden van een vraag, kan namelijk slecht presteren als het data uit verschillende bronnen moet combineren. De impact is het grootst voor kleine bedrijven zonder eigen AI-specialist: zij kunnen nu een onderbouwde keuze maken zonder zelf uitgebreide tests te doen.

Hoe je dit kunt toepassen

Als je een webshop runt en klantvragen automatisch wilt afhandelen, kun je overwegen om een model te kiezen dat goed scoort op AutomationBench voor taken waarbij data uit meerdere bronnen wordt gecombineerd. Stel dat een klant de status van een bestelling vraagt. Het model moet dan de orderinformatie uit je webshop halen, de verzendstatus uit een trackingsysteem ophalen en een gepersonaliseerd antwoord formuleren. Je zou kunnen beginnen met een model dat Zapier aanbeveelt voor dit type meerstaps-workflow, in plaats van het meest populaire model te kiezen.

Als je een team aanstuurt en facturen automatisch wilt verwerken, kun je een Zap bouwen die inkomende facturen scant, de gegevens controleert in je boekhoudsoftware en een goedkeuringsmail stuurt. Overweeg om een model te selecteren dat volgens AutomationBench goed presteert in workflows met data-extractie en validatie. Dit bespaart je team handmatig werk en vermindert fouten, zonder dat je technische kennis nodig hebt om de juiste AI te kiezen.

Als je in de dienstverlening werkt en klantopvolging automatiseert, bijvoorbeeld na een offerteaanvraag, kun je een workflow inrichten die automatisch een vervolgmail stuurt op basis van de reactie van de klant. Een mogelijkheid is om een model te gebruiken dat goed is in het interpreteren van vrije tekst en het koppelen aan de juiste vervolgactie. Je zou kunnen testen welk model in jouw specifieke situatie de beste resultaten geeft, door de AutomationBench-resultaten als startpunt te nemen.

De praktische toepassing hangt af van jouw specifieke workflow. Het belangrijkste is dat je niet blind het nieuwste model kiest, maar kijkt naar wat de benchmark zegt over prestaties in meerstaps-processen.

Bron: Zapier