Dieses Kirby-Plugin nutzt die Dark Visitors API um eine robots.txt zu erstellen, die gängige AI Crawler (theoretisch) davon abhält, die eigene Webseite abzugrasen. Außerdem können Sitemaps und eigene Regeln hinzugefügt werden. Die Installation erfolgt auf die üblichen Weisen, das Plugin ist kostenlos.
Wenn du diesen Beitrag (nicht) gut findest, kannst du ihn kommentieren, woanders darüber schreiben oder ihn teilen. Wenn du mehr Beiträge dieser Art lesen willst, kannst du mir via RSS oder ActivityPub folgen, oder du kannst kannst dir ähnliche Beiträge ansehen.
@gutewebsites weder noch. Es stellt nur eine neue Route zur Verfügung. Gibt es bereits eine robots.txt wird Kirby diese ausliefern, gibt es keine, greift die Route.
@mauricerenck überschreibt das Plugin bestehende robots.txt oder erweitert es die Datei lediglich. Auf alle Fälle: Schöner Ansatz! 👍
Antworten
Kommentieren