FeedwerkBot
Wenn du diese Seite über einen Eintrag in deinem Serverlog gefunden hast: Hier steht, wer wir sind, was wir tun und wie du uns aussperrst.
Kennung
Jeder unserer Abrufe trägt diesen User-Agent:
AgentViewBot/1.0 (+https://feedwerk.co/bot)
Wir geben uns niemals als GPTBot, ClaudeBot, PerplexityBot oder ein anderer fremder Crawler aus. Ob ein solcher Bot bei dir gesperrt ist, werten wir stattdessen lokal gegen deine robots.txt aus — das Ergebnis ist genauso genau und kommt ohne Täuschung aus.
Was der Bot tut
Er wird ausgelöst, wenn jemand auf unserer Startseite eine Shop-Adresse einträgt. Er lädt dann öffentlich erreichbare Seiten dieses Shops einmal als reines HTML und einmal in einem echten Browser, um zu vergleichen, welche Produktdaten ohne JavaScript-Ausführung vorhanden sind. Er füllt keine Formulare aus, legt nichts in den Warenkorb, meldet sich nirgends an und speichert keine personenbezogenen Daten von deinen Seiten.
Grenzen, an die wir uns halten
- Höchstens eine Anfrage pro Sekunde und Domain
- Höchstens 10 Seitenabrufe je Prüfung
- 15 Sekunden Zeitlimit je Anfrage, 60 Sekunden je Prüfung
- Bilder, Schriften und Medien werden beim Rendern gar nicht erst geladen
- Jede Domain wird höchstens alle 24 Stunden erneut geprüft
- Wir befolgen deine
robots.txt
So sperrst du uns aus
Ergänze deine robots.txt um:
User-agent: FeedwerkBot
Disallow: /
Wir halten uns daran. Im Bericht taucht das dann als Befund auf — nicht als Vorwurf, sondern als Hinweis, dass dieselbe Sperre häufig auch Abruf-Bots wie OAI-SearchBot oder Claude-SearchBot trifft.
Kontakt
Fragen oder Beschwerden zum Bot-Verhalten: jpd.peters@gmail.com.