Jumbo productdata zonder API

Naam, prijs, prijs per eenheid, barcode, productnummer en categorie van jumbo.com-product- en categoriepagina's, als één nette rij per product. Geleerd van echte pagina's, gesplitste prijzen en aanbiedingen inbegrepen.

Jumbo productdata

jumbo.com/producten/campina-appel-kaneel-vla-1l-…
naam
Campina Appel Kaneel Vla 1L
prijs
2,69
prijs per eenheid
€ 2,69 per liter
barcode (GTIN)
8712800003076
productnummer
761032PAK
hoofdcategorie
Zuivel, boter en eieren
categorie
Meer smaken vla

English

Wat er uit Jumbo-pagina's komt

Getest op 7 echte Jumbo-pagina's: 27 van de 31 waarden precies goed, 0 fout. Is hij niet zeker, dan zegt hij dat in plaats van te gokken. Velden die hij ophaalt:

  • categorie
  • hoofdcategorie
  • barcode (GTIN)
  • naam
  • prijs
  • productnummer
  • prijs per eenheid

Op sommige testpagina's leeg gelaten, niet fout ingevuld. Met een paar voorbeeldpagina's meer met deze waarden worden ook die regels geleerd:

  • merk · 4 leeg

Is er een Jumbo API voor productdata?

Geen open, gedocumenteerde API waar je je voor kunt aanmelden. Wat mensen in plaats daarvan gebruiken: de JSON die de eigen app of site van de winkel laadt (ongedocumenteerd, verandert zonder aankondiging, en de voorwaarden staan het misschien niet toe), de gestructureerde data in de productpagina's zelf, of de zichtbare tekst. Een extractiescript leest de pagina's die je mag ophalen, net als een browser, en meldt het als de opmaak veranderd is.

Zo scrape je Jumbo productpagina's zonder AI

  1. Kijk eerst in de paginabron. Productpagina's hebben naam, prijs en voorraad vaak als JSON-LD. Staat de prijs in de bron, dan is een gewone HTTP-request genoeg: geen headless browser.

  2. Haal alleen op wat veranderd is. Lees de sitemap en sla elke pagina over waarvan de lastmod sinds de vorige run niet veranderd is.

  3. Doe het rustig. Eén request per seconde of twee, een duidelijke User-Agent, en niets achter een login. Een supermarktsite is geen testserver.

  4. Leer de regels één keer. Alle productpagina's van één winkel hebben dezelfde opbouw. Stuur er een paar en krijg per veld een regel, getest op allemaal: prijs, prijs per eenheid, inhoud, categorie.

De valkuilen op supermarktpagina's

  1. Gesplitste prijzen. Euro's en centen staan in twee elementen (2 en 69), dus een simpele selector leest "2" of "269".

  2. De oude prijs naast de nieuwe. Een aanbieding toont ze allebei. De regel moet de prijs pakken die je betaalt, niet de doorgestreepte.

  3. Andere producten. De pagina toont andere producten met hun eigen prijs. De eerste prijs op de pagina is vaak niet die van dit product.

  4. Klassenamen die elke release veranderen. Gehashte CSS-klassen breken handgeschreven selectors na elke release. Regels geleerd van meerdere pagina's leunen op wat blijft.

Meer hierover

Probeer het op je eigen pagina's

Plak een paar links en een paar waarden. Het bekijken is gratis, en je hoort de prijs voordat er iets betaald wordt.

Probeer het op je eigen pagina's