Så skrapar du e-handelssajter utan kod med AI-agent

Habib Benabdeslam
Habib Benabdeslam
9 min läsning
Skrapa produktlistor i e-handeln
Så skrapar du e-handelssajter utan kod med AI-agent
Innehållsförteckning
  1. Steg 1 – Så fungerar skrapning av e-handelssajter
  2. Steg 2 – Förbered skrapningen av e-handelssajter
  3. Steg 3 – Börja skrapa produkter från e-handel
    1. Håll försäljningspriset åtskilt från ordinarie pris
  4. FAQ

För att skrapa produktlistor från e-handeln utan kod ger du Datablists AI Agent - Site Scraper en kategori-URL och en prompt med de fält du behöver. Aktivera paginering om butiken har flera listsidor, ange en sidgräns och kontrollera produkt-URL:er och priser i de första resultaten. I den här guiden använder vi en kategorisida från Gymshark som exempel. Antalet produkter och tillgängliga fält beror på butiken.

Input: en kategori- eller alla-produkter-URL per körning. Output: en rad per hittad produkt, med fält som namn, produkt-URL, visat pris och bild-URL när uppgifterna finns. Kontroll: jämför några rader med källsidorna och ta bort dubbletter av produkt-URL:er före export. Om du vill hämta butiksomdömen i stället för produktlistor visar arbetsflödet för Trusted Shops-recensioner hur du skapar en rad per omdöme och kontrollerar betyg, datum och överlappande sidor före analysen.

Steg 1 – Så fungerar skrapning av e-handelssajter

Det finns två sätt att skrapa produkter från e-handelssajter:

Du kan antingen:

  1. Skrapa sidor för ”Kollektion/Kategori” för att hämta utvalda produkter från en e-handelssajt ⬅️ Det är metoden vi använder i dag

    Det här är kategorisidan jag använder för att skrapa alla produkter
    Det här är kategorisidan jag använder för att skrapa alla produkter
  2. Börja från en sida med ”Alla produkter” när du vill ha bredare täckning. Resultatet begränsas fortfarande av vilka sidor agenten kommer åt och den sidgräns du anger.

    Sidor med ”Alla produkter” ger mindre kontroll över vilka produkter som hämtas
    Sidor med ”Alla produkter” ger mindre kontroll över vilka produkter som hämtas

Konfigurationen av AI-agenten fungerar på samma sätt – det är bara startpunkten som skiljer sig.

Steg 2 – Förbered skrapningen av e-handelssajter

Bra förberedelser är halva jobbet, eller hur? Så här förbereder vi skrapningen av e-handelssajten:

  1. Välj en kategori- eller alla-produkter-URL för butiken du vill granska
  2. Skapa ett konto i Datablist
  3. Skapa en collection i Datablist

Då börjar vi!

För att skrapa produkter från e-handelssajter utan kod behöver du ett verktyg som förstår instruktioner på vanligt språk. Ett sådant verktyg är AI Research Agent i Datablist.

Datablists startsida
Datablists startsida

När du har skapat ditt Datablist-konto behöver du konfigurera automatiseringen. Jag visar hur!

Skapa en ny collection genom att klicka på plustecknet eller använda kortkommandot ”N”.

Sidan där du skapar en ny collection i Datablist
Sidan där du skapar en ny collection i Datablist

Det här visas när du skapar en ny collection. Jag har redan bytt namn på min och lagt till en snygg emoji.

Så här ser en tom collection ut i Datablist
Så här ser en tom collection ut i Datablist

Nu är förberedelserna klara. Dags att sätta igång.

Steg 3 – Börja skrapa produkter från e-handel

För att börja skrapa produkter från e-handelssajter behöver du göra tre saker:

  1. Välj ”AI Agent - Site Scraper” som source
  2. Klistra in en prompt som förklarar ditt mål för AI Agent
  3. Skapa en output property för varje produktuppgift du vill skrapa

Nu har vi gått igenom vad som ska göras – dags att börja skrapa!

Klicka på ”See all sources” för att börja konfigurera AI-agenten för skrapning.

Så hittar du Datablists omfattande utbud av datakällor
Så hittar du Datablists omfattande utbud av datakällor

Välj sedan ”AI Agent - Site Scraper”.

Datablists AI Agent Site Scraper kan skrapa nästan vilken sida som helst
Datablists AI Agent Site Scraper kan skrapa nästan vilken sida som helst

Klistra in URL:en till sajten som du vill hämta produkter från i det första fältet.

URL:en till kategorisidan som jag vill skrapa med AI-agenten
URL:en till kategorisidan som jag vill skrapa med AI-agenten

Skriv sedan en prompt som förklarar för AI-agenten vilka uppgifter du vill skrapa från e-handelssajten. Du kan också använda min prompt nedan.

Rätt prompt gör det betydligt enklare att hämta produkter
Rätt prompt gör det betydligt enklare att hämta produkter
Prompt för att hämta produkter

Kontext: Jag har en e-handelssajt med en produktlista.

===

Det här vill jag att du gör: Besök sajten och hämta alla produkter som visas samt tillhörande information.

===

Så gör du: Besök sajten via länken som jag ger dig och hämta all information som visas för varje produkt.

===

Viktigt om uppgiften: Hämta inte information som saknar koppling till en produkt, exempelvis call to actions.

===

Här är en beskrivning av det vi söker:

  • Produktens namn
  • Länk till produktsidan
  • Produktens ordinarie pris i den valuta som visas
  • Produktkategori: (exempel: Näringsmässigt kompletta snabbmåltider, linnen, strumpor)
  • Produktspecifikation 1: (exempel: Kompressionspassform, 40 g protein, premiumankelstrumpor)
  • Produktspecifikation 2: (exempel: Färg, antal, portioner)
  • Särskilda taggar: (exempel: Nyhet, begränsad upplaga, sista chansen osv. Returnera ”Ingen” om det inte finns några)
  • Absolut länk till produktbilden
  • Rabatt i % (om tillgänglig. Returnera ”Ingen” om produkten saknar rabatt)

Returnera inget som inte passar in i dessa datatyper och returnera endast en uppgift per typ.

===

Viktigt om datan: Alla sidor har inte samma struktur, men produkterna är tillräckligt tydligt märkta för att du ska kunna skilja datapunkterna åt.

Håll försäljningspriset åtskilt från ordinarie pris

Prompten ovan efterfrågar ordinarie pris och rabatt. För en prisjämförelse skulle jag även hämta det visade försäljningspriset. Lägg till blocket nedan i prompten och skapa sedan motsvarande output properties för Visat pris, Valuta och Prisvillkor tillsammans med det befintliga fältet för ordinarie pris:

Separera priser i e-handelns produktlistor

Returnera även följande fält för varje produkt:
Visat pris: försäljningspriset som visas i produktlistan, inklusive formuleringar som Från.
Valuta: den valuta som uttryckligen anges på sidan. Lämna tomt om det är oklart.
Ordinarie pris: det överstrukna priset eller priset märkt som ordinarie, men endast när det visas. Lämna annars tomt.
Prisvillkor: kopiera synliga villkor som Från, medlemspris eller vald variant. Lämna annars tomt.

Beräkna inte ett ordinarie pris som saknas utifrån rabatten. Behandla inte ett frånpris som priset för samtliga varianter.

För ett illustrativt produktkort märkt ”24 EUR, tidigare 30 EUR” ska du kontrollera att det visade priset är 24, det ordinarie priset 30 och valutan EUR. För ”Från 24 EUR” behåller du Från i det visade värdet eller prisvillkoret och lämnar det ordinarie priset tomt om sidan inte anger det.

Testa en reaprodukt och en produkt med frånpris innan du höjer Max Pages. Jämför de returnerade värdena med samma produkt-URL:er i listan. Ett frånpris och ett fast variantpris beskriver olika erbjudanden, så behåll prisvillkoren när du jämför de exporterade raderna.

Om produktlistan består av flera sidor aktiverar du Enable Pagination och sätter Max Pages till ett lågt antal under den första körningen. Sidgränsen styr hur många sidor som besöks, inte hur många produkter som returneras. Kontrollera att länkarna till nästa sida går att öppna. En enda sida eller en blockerad nästa sida ger inte en komplett katalog.

Paginering är avgörande när du skrapar e-handelssajter
Paginering är avgörande när du skrapar e-handelssajter

Nu behöver du skapa ett output field/en kolumn för varje typ av produktinformation som ska skrapas.

Output property för lagring av de hämtade produkternas namn
Output property för lagring av de hämtade produkternas namn

Klicka på ”More” för att skapa fler output fields och fortsätt tills du har ett fält för varje informationstyp.

Skapa så många properties som behövs för att lagra den skrapade produktinformationen
Skapa så många properties som behövs för att lagra den skrapade produktinformationen

Om produktspecifikationerna behöver lagras separat skapar du ett fält för varje specifikation. Här är ett exempel:

Exempel på produktspecifikationer
Exempel på produktspecifikationer
Ett property per specifikation ger en ren och tydlig dataöversikt
Ett property per specifikation ger en ren och tydlig dataöversikt

💡 Gör så här för mer träffsäkra skrapningsresultat

Ge AI Agents tydliga exempel på de produktspecifikationer du vill hämta. Här är ett exempel baserat på Gymsharks linnen i bilden ovan.

Produktspecifikation 1: Slim Fit
Produktspecifikation 2: Svart

När du har skapat alla output fields för informationen du vill skrapa markerar du kryssrutan för ”Advanced Settings”.

Aktivera Advanced Settings för att få tillgång till fler skrapningsfunktioner
Aktivera Advanced Settings för att få tillgång till fler skrapningsfunktioner

Nu kan du:

  1. Välja en tillgänglig modell om standardmodellen inte passar dina kostnads- eller extraktionsbehov. Jämför ett litet urval före en större körning.
  2. Ange maximalt antal iterationer. Fler iterationer kan öka förbrukningen av credits. Läs mer om hur AI agents fungerar.
  3. Testa Render HTML om produkterna laddas med JavaScript och den första körningen inte ger några användbara rader. Kontrollera resultatet igen efter aktiveringen.

När du har aktiverat inställningarna klickar du på ”Continue”.

Render HTML är en funktion som nästan inga andra verktyg erbjuder
Render HTML är en funktion som nästan inga andra verktyg erbjuder

Klicka sedan på Run import now för att hämta produkter från URL:en som konfigurerats för den här körningen.

Det sista klicket innan AI Agents börjar hämta produkter
Det sista klicket innan AI Agents börjar hämta produkter

Här är ett exempel på resultat från website scraper AI Agent. Vilka fält som visas och antalet rader beror på källsidan och din prompt.

Det här är produkterna som jag skrapade från sajten i början
Det här är produkterna som jag skrapade från sajten i början

💡 Gör så här för att undvika dubbletter

Använd produkt-URL:en som unik identifierare om butiken ger varje produkt en stabil URL. Produktnamn kan förekomma flera gånger för olika storlekar eller varianter. Unika värden förhindrar dubblettrader i din collection, men hindrar inte agenten från att besöka sidor eller förbruka credits vid en senare körning.

Se instruktionerna nedan ⬇️

Välj först din unika identifierare. I mitt fall använder jag produktlänken, men för dig kan det vara något annat.

Klicka sedan på kolumnrubriken och välj ”Rename - Settings - Delete”.

Kolumnalternativen i Datablist
Kolumnalternativen i Datablist

Markera nu rutan ”Do not allow duplicate values” och klicka på ”Save Property”.

Så skapar du en unik identifierare i Datablist
Så skapar du en unik identifierare i Datablist

När detta är klart visas varje produkt från butiken bara en gång i din collection, även om du skrapar samma e-handel flera gånger.

Du bör nu också se en nyckelikon i kolumnrubriken som bekräftar inställningen.

Alla unika identifierare har en nyckelikon till höger
Alla unika identifierare har en nyckelikon till höger

Slutsats

För att få en användbar produktlista börjar du med rätt kategori-URL, efterfrågar enbart fält som syns i listan och håller den första körningen liten. Kontrollera priser, produktlänkar, saknade värden och paginering innan du höjer sidgränsen. Följ butikens åtkomstregler och villkor.

Kan jag skrapa e-handelssajter utan kod?

Ja, med Datablists AI kan du skrapa e-handelssajter med instruktioner på vanligt språk. Du behöver bara skriva vad du vill göra, så hanterar AI-agenten de tekniska delarna.

Hur bevakar jag prisändringar i e-handeln?

Kör samma arbetsflöde för produktlistan igen och jämför den nya priskolumnen med din tidigare export. Produktguiden för Morrisons förklarar hur du sparar daterade observationer och skiljer More Card-erbjudanden från vanliga priser. Använd en stabil produkt-URL för att matcha raderna. Priset i produktlistan kan skilja sig från produktsidan eller variera mellan olika varianter.

Hur skrapar jag produktinformation från e-handel?

Ange en kategori- eller alla-produkter-URL, efterfråga specifika fält som produktnamn, URL, visat pris och bild-URL och mappa sedan varje fält till en output property. Granska de första raderna innan du höjer sidgränsen.

Hur skrapar jag flera e-handelssajter samtidigt?

Site Scraper tar emot en start-URL per körning. Kör verktyget separat för varje butik eller kategori och kombinera sedan resultaten i en collection om det är användbart. Täckningen beror på vilka sidor som går att komma åt och den sidgräns du har valt.

Är det lagligt att skrapa webbplatser?

Kontrollera varje butiks villkor och tillstånd innan du samlar in data. Att informationen är offentlig innebär inte automatiskt att du har tillåtelse att hämta den, och reglerna varierar mellan webbplatser och länder.