CamperSpecsBot — Web Crawler Information

About this bot

CamperSpecsBot is a focused web crawler operated by the camper-specs.de project. Its purpose is to build a structured, searchable database of technical specifications (dimensions, weights, engine data, tank capacities) for motorhomes and campervans sold on the DACH market (Germany, Austria, Switzerland).

The bot is operated in good faith, respects robots.txt, applies conservative rate limits, and never attempts to bypass anti-bot protections.

What we collect

  • Publicly available technical datasheets (primarily PDF files linked from manufacturer websites)
  • Structured technical specifications: length, width, height, weights, axle loads, engine displacement, power, tank capacities, battery data

What we do NOT collect

  • Images, photos, or renderings (we generate our own visuals or link to official media kits)
  • Marketing or descriptive text (we write our own content using this data)
  • User-generated content, reviews, forum posts, or personal information
  • Pricing data (we do not compete with dealers on pricing)
  • Contact details or personal data of employees

Technical details

  • User-Agent string: CamperSpecsBot/1.0 (+https://bot.camper-specs.de; contact@camper-specs.de)
  • Rate limit: minimum 2 seconds between requests per domain
  • Maximum concurrent connections per domain: 1
  • Respects: robots.txt (strictly), Crawl-Delay directive, noindex meta tags
  • Crawl schedule: monthly full refresh, weekly incremental updates
  • IP ranges: requests originate from a Hetzner data center in Germany

Opt-out

If you do not want your site crawled by CamperSpecsBot:

Option 1 — robots.txt (recommended)

Add the following to your robots.txt:

User-agent: CamperSpecsBot
Disallow: /

Changes are respected within 24 hours.

Option 2 — email request

Send an email to contact@camper-specs.de with:

  • Subject: OPT-OUT: yourdomain.com
  • Body: domain(s) you want excluded

We confirm and remove within 48 hours.

Contact

General inquiries, opt-out requests, bug reports, data corrections:
Email: contact@camper-specs.de

Operated from Germany in accordance with §5 TMG and Art. 6 DSGVO.

CamperSpecsBot — Informationen zum Web-Crawler

Über diesen Bot

CamperSpecsBot ist ein spezialisierter Web-Crawler, der vom Projekt camper-specs.de betrieben wird. Sein Zweck ist der Aufbau einer strukturierten, durchsuchbaren Datenbank technischer Spezifikationen (Abmessungen, Gewichte, Motordaten, Tankvolumina) für Wohnmobile und Kastenwagen, die auf dem DACH-Markt (Deutschland, Österreich, Schweiz) angeboten werden.

Der Bot wird in gutem Glauben betrieben, respektiert robots.txt, wendet konservative Rate-Limits an und versucht niemals, Anti-Bot-Schutzmaßnahmen zu umgehen.

Was wir erfassen

  • Öffentlich zugängliche technische Datenblätter (vorrangig PDF-Dateien, die von Herstellerwebsites verlinkt werden)
  • Strukturierte technische Spezifikationen: Länge, Breite, Höhe, Gewichte, Achslasten, Hubraum, Leistung, Tankvolumina, Batteriedaten

Was wir NICHT erfassen

  • Bilder, Fotos oder Renderings (wir erstellen eigene Visualisierungen oder verlinken auf offizielle Medienpakete)
  • Marketing- oder Beschreibungstexte (wir verfassen unsere eigenen Inhalte auf Basis dieser Daten)
  • Nutzergenerierte Inhalte, Bewertungen, Forenbeiträge oder personenbezogene Daten
  • Preisdaten (wir stehen nicht in Preiskonkurrenz zu Händlern)
  • Kontaktdaten oder personenbezogene Daten von Mitarbeitenden

Technische Details

  • User-Agent-String: CamperSpecsBot/1.0 (+https://bot.camper-specs.de; contact@camper-specs.de)
  • Rate-Limit: mindestens 2 Sekunden zwischen Anfragen pro Domain
  • Maximale gleichzeitige Verbindungen pro Domain: 1
  • Respektiert: robots.txt (strikt), Crawl-Delay-Direktive, noindex-Meta-Tags
  • Crawl-Zeitplan: monatliche vollständige Aktualisierung, wöchentliche inkrementelle Updates
  • IP-Bereiche: Anfragen stammen aus einem Hetzner-Rechenzentrum in Deutschland

Opt-out / Widerspruch

Wenn Sie nicht möchten, dass Ihre Website von CamperSpecsBot gecrawlt wird:

Option 1 — robots.txt (empfohlen)

Ergänzen Sie Ihre robots.txt um folgende Einträge:

User-agent: CamperSpecsBot
Disallow: /

Änderungen werden innerhalb von 24 Stunden berücksichtigt.

Option 2 — Anfrage per E-Mail

Senden Sie eine E-Mail an contact@camper-specs.de mit:

  • Betreff: OPT-OUT: ihredomain.de
  • Inhalt: Domain(s), die ausgeschlossen werden sollen

Wir bestätigen und entfernen innerhalb von 48 Stunden.

Kontakt

Allgemeine Anfragen, Opt-out-Ersuchen, Fehlermeldungen, Datenkorrekturen:
E-Mail: contact@camper-specs.de

Betrieben aus Deutschland gemäß §5 TMG und Art. 6 DSGVO.