DataHamster
Anmelden

Für Plattformbetreiber

Kontrollierter Datenzugriff, angemessen vergütet

Ermögliche seriösen Daten-Crawlern einen geregelten Zugriff auf deine Plattform. Die Zugriffsregeln vereinbarst du mit uns, du behältst den Traffic im Blick und wirst für das übertragene Datenvolumen vergütet.

Anbindung besprechenAblauf ansehen
Vergütung für autorisierten Traffic
Automatisierte Datenzugriffe verursachen Serverlast und Kosten. DataHamster macht autorisierten Crawler-Traffic kontrollierbar, messbar und abrechenbar – du erhältst für jedes übertragene Gigabyte eine Vergütung.
Du bestimmst die Regeln
Welche Bereiche freigegeben sind, legen wir gemeinsam mit dir fest – das ist technisch hinterlegt, Zugriffe auf andere Ziele weist der Proxy ab. Grenzen für Last und Zeiten richten wir nach Bedarf ein. Die Freigabe kannst du jederzeit ändern oder beenden.
Traffic wird zuordenbar
Die Zugriffe kommen über wenige feste IP-Adressen statt über wechselnde Pools. In deinen Logs siehst du, welcher Traffic über DataHamster läuft.

Vergütung

Abgerechnet wird ausschließlich das Datenvolumen, das Crawler über DataHamster von deiner Plattform beziehen – in Gigabyte, ohne Pauschalen und ohne Abrechnung nach Seitenaufrufen.

Der Preis pro Gigabyte wird je Plattform vereinbart; davon erhältst du einen festgelegten Anteil, den Rest deckt der Betrieb der Proxy-Infrastruktur. Die geltenden Preise sind öffentlich einsehbar.

Kontrolle und technische Umsetzung

Umfang des Zugriffs

Mit dir vereinbart; die Domain-Freigabe setzt der Proxy technisch durch:

  • Welche Domains freigegeben sind – andere Ziele weist der Proxy ab
  • Welche Bereiche ausgenommen bleiben, etwa Login-Bereiche
  • Ob einzelne Crawler eine gesonderte Freigabe brauchen
Last und Zeitfenster

Auf Wunsch richten wir zusätzlich Grenzen ein:

  • Anfragen pro Minute und gleichzeitige Verbindungen
  • Zeitfenster, in denen mehr oder weniger gecrawlt werden darf
  • Obergrenze für das monatliche Datenvolumen

Sag uns im Erstgespräch, was dein Betrieb verträgt – wir setzen es vor dem Start um.

Technisch ist eine Integration in deine Anwendung nicht erforderlich. Du hinterlegst lediglich unsere festen Proxy-IP-Adressen in deinem Bot-Schutz, in der WAF oder im eigenen Rate-Limiting.

Im laufenden Betrieb entsteht in der Regel kaum zusätzlicher Aufwand. Ändern sich deine Anforderungen, passen wir die Regeln an.

Anbindung in vier Schritten

  1. 1

    Erstgespräch

    Wir klären, welche Daten für Crawler interessant sind, welches Volumen realistisch ist und wo die Grenzen deines Betriebs liegen.

  2. 2

    Regeln vereinbaren

    Freigegebene Bereiche, Nutzungsbedingungen, der Preis pro Gigabyte und – falls gewünscht – Grenzen für Last und Zeiten werden schriftlich festgehalten.

  3. 3

    Testbetrieb

    Du hinterlegst unsere festen IP-Adressen, wir starten mit kleinem Volumen und schauen gemeinsam auf Last und Antwortzeiten.

  4. 4

    Betrieb und Abrechnung

    Das übertragene Datenvolumen wird laufend gemessen und periodisch abgerechnet. Die Regeln lassen sich jederzeit nachschärfen.

Häufige Fragen

Lässt sich die Last begrenzen?

Ja, auf Wunsch richten wir Grenzen an unseren Proxies ein – etwa Anfragen pro Minute, gleichzeitige Verbindungen oder Zeitfenster. Sie greifen dann, bevor die zusätzlichen Anfragen deine Server erreichen, und gelten gemeinsam für alle Kunden, weil der Zugriff über wenige feste Adressen läuft. Sprich uns an, wenn du solche Grenzen brauchst; unabhängig davon kannst du unsere Adressen jederzeit in deinem eigenen Rate-Limiting drosseln.

Brauche ich eine Ausnahme in der robots.txt?

Nicht zwingend. Auf Wunsch vereinbaren wir eine Ausnahme oder eine eigene User-Agent-Kennung, damit der Zugriff in deinen Auswertungen erkennbar ist.

Wie wird das Datenvolumen gemessen?

An unseren Proxies, Anfragen und Antworten zusammen, zusammengefasst in 5-Minuten-Zeitfenstern. Ausgewiesen wird dir dasselbe Volumen, das den Crawlern in Rechnung gestellt wird.

Was passiert bei Verstößen gegen die Nutzungsbedingungen?

Technisch lässt sich die Weiterverwendung abgerufener Daten nicht verhindern, vertraglich schon: Die vereinbarten Bedingungen gelten für jeden Kunden, bei einem Verstoß sperren wir dessen Zugang.

Interesse an einer Anbindung?

Schreib uns an viktor@datahamster.run – am besten mit einem Satz dazu, welche Daten deine Plattform anbietet.

Anbindung besprechen