Data automatisch opvragen en filteren
Wie met data werkt, kent de verhouding: het grootste deel van de tijd gaat op aan verzamelen, exporteren, opschonen en samenvoegen. De analyse zelf, het werk waar het om gaat, komt pas aan het einde en krijgt de minste tijd. Ik bouw automatiseringen die het opvragen en filteren van data overnemen. De gegevens staan klaar in de vorm die je nodig hebt, op het moment dat je ze nodig hebt, zodat jij direct kunt beginnen met kijken wat ze betekenen.
Waar de tijd nu naartoe gaat
- Inloggen in vier tools, in elke tool dezelfde periode instellen en een export maken
- Exports samenvoegen, kolomnamen gelijktrekken, dubbele regels verwijderen, datums die in elke bron anders staan
- Filteren op wat er echt toe doet: alleen die klanten, alleen die campagnes, alleen die periode
- En volgende week alles opnieuw, omdat de export van vorige week alweer verouderd is
Dit werk is voorspelbaar en volgt elke keer dezelfde stappen. Dat maakt het bij uitstek geschikt om te automatiseren. Een automatisering die ik heb gebouwd doet precies dit voor meerdere databronnen tegelijk: de gegevens worden automatisch opgevraagd, gefilterd op vooraf bepaalde criteria en klaargezet in een spreadsheet of database. Wat vroeger een dagdeel per week kostte, gebeurt nu voordat de werkdag begint.
Hoe de automatisering werkt
- Opvragen. De workflow haalt gegevens op via de API’s van je bronnen: analytics, advertentieplatforms, CRM, boekhouding, webshop, projecttool of een externe databron. Op een vast moment, of zodra er iets verandert.
- Filteren. Alleen de gegevens die aan jouw criteria voldoen gaan door: een bepaalde periode, klantgroep, productcategorie, drempelwaarde. De rest wordt buiten beschouwing gelaten, zodat je geen bergen ruwe data hoeft door te spitten.
- Opschonen en samenvoegen. Kolomnamen, datumnotaties en valuta’s worden gelijkgetrokken, dubbele regels verwijderd en gegevens uit verschillende bronnen aan elkaar gekoppeld op klant, campagne of product.
- Klaarzetten. Het resultaat landt waar jij ermee werkt: Google Sheets, Excel, een database, BigQuery, een dashboard of direct in een geautomatiseerde rapportage. Met een melding als er iets opvalt, bijvoorbeeld een bron die geen gegevens teruggaf.
Wat het oplevert
Meer tijd voor analyse
De uren die je kwijt was aan exporteren en samenvoegen, gaan naar het werk dat inzicht oplevert: patronen zien, keuzes onderbouwen, bijsturen.
Altijd dezelfde definities
Omdat de filters en berekeningen vastliggen, betekent “omzet” of “conversie” elke week hetzelfde. Geen discussie meer over wiens export klopt.
Sneller signaleren
Data die automatisch binnenkomt, kun je ook automatisch laten bewaken. Een drempel die wordt overschreden of een bron die stilvalt, zie je dezelfde dag in plaats van aan het einde van de maand.
Voorbeelden van data-automatiseringen
Zoekwoordposities en verkeer per klant automatisch ophalen uit SEO-tools en Search Console, gefilterd op de pagina’s die ertoe doen. Orders en retouren uit een webshop dagelijks samenvoegen met voorraadgegevens. Openstaande facturen uit de boekhouding filteren op ouderdom en klaarzetten voor de opvolging. Leads uit meerdere formulieren en advertentieplatforms samenbrengen in één overzicht, ontdubbeld en verrijkt met bedrijfsgegevens. Prijzen of beschikbaarheid van externe bronnen periodiek opvragen en vergelijken met je eigen aanbod.
Soms is de bron geen API maar een e-mailbijlage, een pdf of een website. Ook daar kan een automatisering gegevens uithalen, waar nodig met een AI-stap die ongestructureerde tekst omzet in nette velden. Hoe dat werkt lees je bij systemen koppelen.
Wat het kost en wat erbij hoort
Een data-automatisering met twee of drie bronnen en een vaste set filters ligt meestal tussen de 750 en 2.000 euro eenmalig. Meer bronnen, complexere koppelingen tussen datasets of AI-stappen voor ongestructureerde data brengen het naar 2.000 tot 4.000 euro. Het maandelijkse onderhoud dekt wijzigingen in de API’s van je bronnen, nieuwe velden of filters als je vragen veranderen, en de monitoring die je waarschuwt als een bron stilvalt. Meer op de pagina over kosten en onderhoud.
Veelgestelde vragen
Waar komen de gegevens terecht?
Waar jij ermee werkt. Voor de meeste ondernemers is dat Google Sheets of Excel; voor grotere volumes een database zoals PostgreSQL of BigQuery, of een dashboardtool zoals Looker Studio. De keuze maken we samen op basis van hoeveel data er is en wie ermee moet werken.
Kan ik de filters later zelf aanpassen?
Ja. Ik zet de filtercriteria waar mogelijk in een instellingenblad of configuratie die jij kunt aanpassen zonder de workflow zelf aan te raken. Grotere wijzigingen, zoals een nieuwe bron toevoegen, vallen onder het onderhoud.
Hoe vaak wordt de data ververst?
Zo vaak als nodig en zinvol is: elk uur, dagelijks, wekelijks of zodra er iets gebeurt in een bron. Sommige API’s beperken hoe vaak je gegevens mag opvragen; daar houd ik rekening mee in de opzet.
Wat gebeurt er met persoonsgegevens?
Vooraf leggen we vast welke gegevens de automatisering ophaalt en waar ze worden opgeslagen. Persoonsgegevens die niet nodig zijn voor de analyse worden niet opgehaald of direct geanonimiseerd. Data blijft waar mogelijk binnen jouw eigen omgeving.
Hoeveel uur per week ben jij kwijt aan verzamelen?
Vertel me uit welke bronnen je gegevens haalt en wat je ermee doet. Ik laat je weten wat er automatisch kan en wat het kost. Of bekijk eerst het overzicht van alle automatiseringen.