GoZero Market er en søgemaskine for brugt. Vi indekserer annoncer fra professionelle markedspladser i Norden, sammenligner priser mellem dem og sender den besøgende videre til jer — købet sker altid hos kilden. Vi sælger ikke selv noget.
Sådan genkender I os
gozerobot/1.0 (+https://gozero.market/bot)
Sådan opfører vi os
Vi følger robots.txt, inklusive Crawl-delay, og et Disallow gælder også vores sitemap- og kontrolforespørgsler.
Mindst 750 ms mellem to forespørgsler til samme værtsnavn, og højst 4 samtidige. Ser I os i jeres grafer, har vi gjort noget forkert.
Vi sender If-None-Match og If-Modified-Since, så en uændret side koster jer et svar uden indhold.
En 429 eller 503 med Retry-After respekteres. Gentagne 403 læser vi som et nej og trækker os.
Vi kører ingen JavaScript-motor og klikker ikke på noget.
Hvis I vil have os til at stoppe
Læg dette ind i jeres robots.txt, så forsvinder vi inden for et døgn:
User-agent: gozerobot
Disallow: /
Vil I hellere styre, hvad vi henter, eller sende os et feed i stedet for at lade os læse siderne, så sig til, så ordner vi det.