Data Transformatie
Data transformatie zet data om van het ene formaat of de ene structuur naar een andere, zoals leveranciersbestanden naar de attributen die een PIM of marketplace nodig heeft.
Wat is Data Transformatie?
Data transformatie is het omzetten van data van het ene formaat, de ene structuur of set waarden naar een andere, zodat een doelsysteem ermee kan werken. Bij productdata gaat het om leveranciersbestanden en ERP-exports omzetten naar de velden, eenheden en waarden die je PIM, webshop en marketplaces verwachten. Typische stappen zijn bronkolommen koppelen aan doelattributen, eenheden omrekenen (centimeters naar inches), waarden gelijktrekken ("navy blue" en "Navy" worden één waarde), velden splitsen of combineren en teksten inkorten tot de limiet van een kanaal. Datanormalisatie is daar een onderdeel van: dat maakt alleen waarden consistent. Transformatie is ook de middelste stap van ETL, tussen extraheren en laden. In een PIM gebeurt het twee keer: bij de import en bij de export per kanaal. Met automations laat je die stappen op een schema draaien.
Waarom Data Transformatie belangrijk is voor e-commerce
Elke bron en elk kanaal gebruikt een eigen structuur. Een leverancier stuurt een kleurcode, je webshop wil een kleurnaam en Google Merchant Center wil een waarde uit zijn eigen lijst. Zonder transformatie typt of formatteert iemand de data per kanaal met de hand. Goede transformatieregels maken imports herhaalbaar en exports voorspelbaar. Stuurt een leverancier een nieuw bestand, dan gelden dezelfde koppelingen en omrekeningen. Verandert een marketplace een eis, dan pas je één regel aan in plaats van elk product. Regels beschermen ook je datakwaliteit: waarden die niet passen komen als fout naar boven in plaats van online te gaan.
Voorbeelden van Data Transformatie
- 1Bron: lengte_cm = 120, Regel: omrekenen naar inches, Doel: length = 47,2 in
- 2Bron: kleurcode = 04, Regel: opzoeken in codetabel, Doel: kleur = Navy
- 3Bron: titel van 180 tekens, Regel: inkorten tot kanaallimiet, Doel: Amazon-titel van maximaal 75 tekens
- 4Bron: voorraad = 0, Regel: omzetten naar beschikbaarheid, Doel: availability = out_of_stock
Hoe WISEPIM helpt
- De productimport in WISEPIM koppelt CSV-kolommen van leveranciers aan je attributen en kan als geplande import via automations draaien.
- Content Logic en Template Strings bouwen kanaalwaarden uit bestaande velden, zoals een titel uit merk, model en kleur.
- Prijsregels per kanaal en Optimize for Platform passen prijzen en content aan op wat elk kanaal verwacht.
Veelgemaakte fouten met Data Transformatie
- Regels per product schrijven in plaats van per attribuut, waardoor elk nieuw product handwerk vraagt.
- Vuile data transformeren. Ruim eerst dubbele en foute waarden in de bron op.
- Eenheden omrekenen zonder de oorspronkelijke waarde te bewaren, zodat je later niet opnieuw kunt omrekenen.
- Regels niet documenteren, waardoor niemand weet waarom een waarde veranderde als een kanaal hem afkeurt.
- Brondata overschrijven met kanaalversies in plaats van beide te bewaren.
Tips voor Data Transformatie
- Spreek per attribuut één lijst met doelwaarden af voordat je regels schrijft; lees meer over attribuutstandaardisatie.
- Bewaar het ruwe importbestand, zodat je transformaties opnieuw kunt draaien.
- Test regels op een kleine selectie voordat je ze op de hele catalogus loslaat.
- Geef regels de naam van het kanaal en attribuut waarvoor ze bedoeld zijn.
- Keurt een kanaal producten af, pas dan de regel aan en niet alleen dat ene product.
Trends rondom Data Transformatie
- AI die koppelingen tussen kolommen en attributen voorstelt voor nieuwe leveranciersbestanden.
- Kanaaleisen die als machineleesbare specificaties beschikbaar komen, zodat regels ze kunnen volgen.
- Low-code regelbouwers waarmee productteams koppelingen aanpassen zonder developers.
- Gestructureerde attributen die klaar zijn voor AI-shoppingagents, niet alleen voor webpagina's.
Tools voor Data Transformatie
- WISEPIM: een PIM met importkoppelingen, Content Logic en kanaalexports.
- Akeneo: een PIM met attribuutkoppelingen en exportprofielen.
- Informatica PowerCenter: een ETL-tool voor grote organisaties.
- Talend: pipelines voor data-integratie en transformatie.
- Channable: feedregels die productdata per kanaal omzetten.