So ruft Do4U Webseiten ab

Do4U ist ein Werkzeugkasten für Websites. Manche Werkzeuge lesen dafür eine Webseite. Das passiert nur, wenn eine Kundin oder ein Kunde die Adresse selbst eingibt oder eine regelmäßige Prüfung der eigenen Seiten einrichtet. Wir durchsuchen das Web nicht auf eigene Faust und bauen keinen Suchindex.

Unsere Kennungen (User-Agent)

Do4U-Reader/1.0 (+https://do4u.eu): Liest eine einzelne Seite, deren Adresse jemand in ein Werkzeug eingegeben hat, zum Beispiel für den Website-Check, die Prüfung der Barrierefreiheit oder Titel und Beschreibung. Liest auch Sitemaps für die interne Verlinkung.
Do4U-Check/1.0 (+https://do4u.eu/bot): Liest für den llms.txt-Generator robots.txt, die Sitemap und weitere Seiten derselben Website (Grenze je Auftrag: 8 Seiten).
Do4U-Webhook/1.0 (+https://do4u.eu/bot): Meldet einer Kundin, dass ein Auftrag fertig ist, an eine Adresse, die sie selbst eingetragen hat.

Wie oft

Eine Seite je Auftrag. Nur der llms.txt-Generator liest mehrere Seiten, dann höchstens eine Anfrage pro Sekunde.
Sitemaps für die interne Verlinkung: höchstens eine Anfrage pro Sekunde je Website.
Regelmäßige Prüfungen (Website-Wächter) nur für Seiten, die eine Kundin selbst eingetragen hat, alle 30 Tage.
Wir folgen höchstens drei Weiterleitungen und rufen nie Adressen in internen Netzen ab.

robots.txt

Der llms.txt-Generator beachtet robots.txt: Er liest keine Seiten, die für Do4U-Check oder für alle Crawler gesperrt sind. Die Startseite, deren Adresse die Kundin eingegeben hat, liest er immer.

Eine einzelne Seite, deren Adresse jemand direkt eingibt, lesen wir so wie ein Browser, ohne robots.txt zu fragen.

So sperrst du den llms.txt-Generator für deine ganze Website:

User-agent: Do4U-Check
Disallow: /

Woher die Anfragen kommen

Die Anfragen kommen von unseren eigenen Servern in Polen, EU. Was wir lesen, nutzen wir nur für den jeweiligen Auftrag und löschen es nach den Speicherfristen. Die Fristen findest du im Trust-Center.

Kontakt

Ist dir eine Anfrage von Do4U aufgefallen, die nicht passt? Wir sehen uns das an und antworten dir. Schreib uns mit der Adresse deiner Website und der ungefähren Uhrzeit an support@do4u.eu.