Akeed Preiskatalog-Bot
Diese Seite richtet sich an Netzbetreiber und Betreiber von Webseiten, die in ihren Server-Protokollen unseren Bot gesehen haben.
Wer wir sind
Akeed ist eine Software für Stadtwerke und Energieversorger, betrieben von Ohay Solutions. Damit die Stromangebote unserer Kunden korrekt berechnet werden, braucht Akeed die aktuellen, öffentlich bekanntgegebenen Netzentgelte, Umlagen und Netzgebiete.
Was der Bot abruft
- Die bundesweiten Umlagen der Übertragungsnetzbetreiber auf netztransparenz.de
- Den öffentlichen Gesamtdatenexport des Marktstammdatenregisters (Netzbetreiber und Netzgebiete)
- Die Preisblätter der Netzentgelte, die Netzbetreiber nach § 20 Abs. 1 EnWG im Internet veröffentlichen
Der Bot liest keine persönlichen Daten aus und meldet sich nirgends an. Jeder abgerufene Wert wird vor der Verwendung von einem Menschen geprüft und bestätigt.
Wie oft und wie viel
- Höchstens eine Anfrage alle 5 Sekunden je Webseite, insgesamt höchstens zwei Anfragen pro Sekunde
- Abrufe überwiegend nachts zwischen 1 und 6 Uhr
- Bei wiederholten Abrufen sendet der Bot die Angaben Ihres Servers zur zuletzt geladenen Fassung mit (ETag bzw. Last-Modified); meldet Ihr Server „nicht geändert“, wird die Seite nicht erneut geladen
- Den Gesamtdatenexport des Marktstammdatenregisters lädt der Bot planmäßig einmal im Quartal
- Antwortet Ihr Server mit „zu viele Anfragen“ (429) oder „Zugriff verweigert“ (403), fragt der Bot diese Webseite sieben Tage lang nicht mehr an
Der Bot gibt sich immer mit dieser Kennung zu erkennen:
AkeedPreiskatalogBot/1.0 (+https://akeed.eu/bot; info@akeed.eu)
Preisblätter nach § 20 Abs. 1 EnWG
- Gesucht wird bei allen Stromnetzbetreibern, deren Webseite im Marktstammdatenregister steht, und im Einzelfall bei einem Netzbetreiber, den unser Administrator ausdrücklich anfordert
- Der Bot beginnt auf Ihrer im Marktstammdatenregister angegebenen Webseite bzw. einer uns bekannten Preisblatt-Seite und folgt nur Links, die nach Netzentgelten oder Preisblättern aussehen (höchstens 3 Klicks tief)
- Leitet die Startseite Ihrer eingetragenen Webseite auf eine neue Adresse um (Umzug der Webseite), folgt der Bot dieser Umleitung höchstens 1-mal auf einen neuen Host und sucht dort mit denselben Grenzen weiter; die neue Adresse vermerken wir als Vorschlag. Umleitungen von Unterseiten auf andere Hosts folgt er nie
- Seiten liest der Bot nur auf dem eingetragenen Host, seiner www.-Variante und den Subdomains www., netz. und netze. desselben Hosts – nie auf einer übergeordneten Domain
- PDF-Dateien lädt der Bot auch von Subdomains Ihrer Domain (z. B. content.ihre-domain.de), Seiten liest er dort nicht. Antwortet ein Download-Link ohne „.pdf“ mit einer PDF-Datei, bricht der Bot diesen Abruf nach den Kopfzeilen ab und lädt die Datei einmal als PDF – sie zählt zu den PDF-Dateien je Lauf
- Je Netzbetreiber und Lauf höchstens 20 Seiten und höchstens 5 PDF-Dateien (über alle seine Webseiten zusammen), jede höchstens 8 MB
- Planmäßig nachts zwischen 2 und 5 Uhr, vom 15. Oktober bis Ende Februar, sonst am 1. eines Monats
- In dieser Zeit fragt der Bot einen Netzbetreiber höchstens einmal am Tag an, die meisten höchstens einmal je Woche (alle 7 Tage) – auch nach einem erfolglosen Versuch
- Eine Sitemap (aus Ihrer robots.txt oder unter /sitemap.xml) liest der Bot nur, wenn er auf den Seiten keinen Preisblatt-Link findet oder die Startseite fehlt; jede Sitemap zählt zu den 20 Seiten, höchstens 3 Teil-Sitemaps, jede höchstens 2 MB, gepackte Sitemaps (.gz) nie
- Bereits bekannte Preisblatt-Adressen ohne Jahreszahl fragt der Bot mit ETag bzw. Last-Modified ab; Adressen mit Jahreszahl ruft er für das neue Jahr neu ab
- Einmal im Monat (am 1., nachgeholt spätestens bis zum 7.) prüft der Bot bekannte Preisblatt-Adressen auf Änderungen – mit einer HEAD-Anfrage und ETag bzw. Last-Modified, soweit Ihr Server diese Angaben liefert; ohne sie lädt er die Datei einmal und vergleicht sie. Gesucht wird dabei nicht
- Sperrt Ihr Server den Bot (HTTP 403/429 oder robots.txt), fragt er spätestens nach der 3. Sperre erst nach 90 Tagen wieder an
- Geladene Preisblätter, die wir nicht verwenden, löschen wir nach 90 Tagen; übernommene Preisblätter bewahren wir als Nachweis auf
- Es gelten dieselben Abstände, dieselbe robots.txt-Prüfung und dieselbe Pause nach 403/429 wie oben
- Trägt unser Administrator die Adresse eines einzelnen Preisblatts selbst ein, lädt der Bot genau diese eine Datei sofort, auch tagsüber – mit derselben Kennung, unter Beachtung der robots.txt und höchstens 10 MB
- Formulare, Anmeldungen, JavaScript oder Zugangssperren umgeht der Bot nie
robots.txt und Sperrwunsch
Vor dem ersten Abruf einer Webseite (danach höchstens einmal am Tag) liest der Bot Ihre robots.txt und beachtet die Regeln „User-agent“, „Disallow“ und „Allow“ – für die Kennung AkeedPreiskatalogBot oder, falls es dafür keine eigenen Regeln gibt, für „*“. Möchten Sie keine Abrufe durch unseren Bot, sperren Sie ihn dort oder schreiben Sie uns. Wir tragen Ihre Webseite dann in unsere Sperrliste ein und pflegen die Daten von Hand.
Kontakt
Fragen, Hinweise auf falsche Werte oder Sperrwünsche bitte an info@akeed.eu.
Lizenzen
Daten aus dem Marktstammdatenregister: © Bundesnetzagentur, Datenlizenz Deutschland – Namensnennung – Version 2.0 (DL-DE-BY-2.0).