← Zurück zum Blog
· 1 min. Lesezeit

KI-Training per robots.txt widersprechen

user-agent: __usage_ai-training
Disallow: /

Mit dieser Kennzeichnung in der robots.txt sollen Website-Betreiber der Nutzung ihrer Inhalte für KI-Training künftig widersprechen oder eben (per Allow) erlauben können.

OpenAI, Google, Microsoft und Anthropic haben jetzt zumindest angekündigt, sich an diesen Tag halten zu wollen. Selbst Meta – die sich gerade versuchen an Verlagsseiten zu bedienen – hat angedeutet, man werde sich ebenfalls an den noch zu etablierenden Standard halten wollen.

…kann man jetzt ja machen, nachdem man das ganze Netz bereits leergesaugt hat.
Aber immerhin…

Ein Kommentar

  • André – 01.11.2026, 12 Uhr

    Wir hatten so starken AI Traffic bei uns auf Arbeit das wir erst die robots.txt probiert haben. Das hat genau nix gebracht. Das haben die AI crawler komplett ignoriert.

    Jetzt filtern wir sie noch eine Ebene höher raus.
    Das hat den Traffic um 50 % reduziert. Das sind massive Serverkosten die da anfallen.

    #

Kommentare geschlossen