Zusammenfassung:
Google, Microsoft, OpenAI und Anthropic unterstützen eine neue Erklärung zu KI-Trainingspräferenzen, die es Websites ermöglicht, anzugeben, ob Inhalte von KI-Unternehmen zum Trainieren von Modellen durch Modifizieren von robots.txt verwendet werden dürfen. Nach dem Entwurf müssten Website-Administratoren lediglich eine Reihe von Regeln hinzufügen, um gegenüber mehreren KI-Unternehmen, die die Regeln unterstützen, eine Erklärung abzugeben.
Die Aussage lautet wie folgt:
# Siteweite Sperrregeln
Benutzer
-
Agent
:
__usage_ai
-
training
Disallow
:
/
# Spezifisches Verzeichnisbeispiel zulassen
Benutzer
-
Agent
:
__usage_ai
-
Training
Zulassen
:
/archive/
Benutzer
-
Agent
:
__usage_ai
-
training
disallow
:
/archive/
# Das Zulassen bestimmter Verzeichnisse steht nicht im Widerspruch zum Site-weiten Verbot, d. h. /archive/ ist erlaubt, aber alle anderen Verzeichnisse sind verboten
Fügen Sie diesen Inhalt zur robots.txt-Datei der Website hinzu, um zu erklären, dass der gesamte Inhalt der Website nicht für das Training von KI-Modellen verwendet werden darf. Der Website-Administrator kann auch die zulässigen oder nicht zulässigen Verzeichnisse ändern. Beispielsweise dürfen einige Verzeichnisse für das KI-Training verwendet werden, und einige Inhalte dürfen nicht für das KI-Training verwendet werden.
Die Supportzeiten jedes Unternehmens sind unterschiedlich:
Der Plan ist immer noch ein Internet-Entwurf, aber Microsoft hat erklärt, dass das Unternehmen der Erklärung ab dem 1. Februar 2027 nachkommen wird, sodass Websites, die nicht möchten, dass ihre Inhalte für KI-Schulungen verwendet werden, die Datei jetzt ändern können, um die entsprechende Erklärung hinzuzufügen.
Google plant, ab Anfang 2027 Support bereitzustellen, der genaue Zeitpunkt steht jedoch noch nicht fest. OpenAI sagt, dass es den Plan in den kommenden Monaten umsetzen wird, und Anthropic scheint begonnen zu haben, den Entwurf zu unterstützen.
Das Verbot von Schulungen und das Zitieren von Inhalten zur Generierung von Antworten dienen unterschiedlichen Zwecken:
Die obige Aussage drückt nur die Wahl der Website zur Nutzung von Inhalten aus. Gemäß dem Anleitungsentwurf wird das Festlegen der obigen Anweisung allein Crawler nicht direkt daran hindern, auf die Webseite zuzugreifen. Wenn die Website bestimmte Crawler daran hindern möchte, Inhalte zu crawlen, muss sie dennoch über herkömmliche robots.txt-Regeln konfiguriert werden.
Schulungsinhalte und KI-Antwortreferenzseiten dienen ebenfalls unterschiedlichen Zwecken. Microsoft stellt für seine eigenen Dienste zusätzliche AI-Grounding-Kontrollen zur Verfügung, die es Websites ermöglichen, zu entscheiden, ob auf den Inhalt verwiesen werden darf, wenn KI-generierte Antworten verwendet werden. Dieses Steuerelement gilt für bestimmte Seiten und gilt nur für Microsoft-Dienste.
Google gab an, dass, wenn eine Website die obige Aussage verwendet, um das KI-Training abzulehnen, aber Google-Extended nicht explizit festlegt, Google plant, dies gemäß den Regeln für die Ablehnung von Google-Extended durch die Website zu handhaben. Google-Extended umfasst das Training des Gemini-Modells sowie die Verwendung einiger Gemini-Antworten als Webreferenz.
Kommentare