OpenAI will gemeinsames Robots.txt-Signal für KI-Trainingspräferenzen berücksichtigen

Was passiert ist
OpenAI kündigte am 30. Oktober 2026 an, ein gemeinsames Signal in robots.txt zu berücksichtigen, also in der Datei, mit der Websites Präferenzen dazu ausdrücken, wie ihre Inhalte verwendet werden. So können Betreiber von Websites eine einzige KI-Trainingspräferenz gleichzeitig an mehrere teilnehmende Anbieter kommunizieren. OpenAI erklärte, das Signal in den kommenden Monaten umsetzen zu wollen, und kündigte an, bei der Umsetzung ein weiteres Update mit Details zu veröffentlichen.
Ein freiwilliges Signal für mehrere Anbieter In seiner Ankündigung beschrieb OpenAI den Schritt als freiwillig und begründete ihn mit einer bestehenden Belastung: Bisher mussten Betreiber von Websites einzelne Crawler identifizieren und für jeden Anbieter separate Regeln pflegen. Ein gemeinsames Signal ermögliche es Verlagen und Website-Betreibern, dieselbe Präferenz an mehrere teilnehmende Anbieter gleichzeitig zu übermitteln.
Das Unternehmen stellte klar, dass das neue Signal die bereits bestehenden Steuerungsmöglichkeiten über robots.txt nicht ersetzt, die weiterhin gelten und beachtet werden sollen. OpenAI verortete den Schritt im laufenden Arbeitsprozess der AI-Preferences-Arbeitsgruppe der Internet Engineering Task Force, erklärte, sich gemeinsam mit anderen Teilnehmern der Arbeitsgruppe hinter die Ankündigung zu stellen, und forderte andere KI-Anbieter auf, das Signal ebenfalls zu berücksichtigen.
Das Unternehmen beschrieb den Schritt als Beitrag zu einem offenen Web, in dem Menschen Informationen veröffentlichen und finden können und Website-Betreiber klarere, einfachere Wege haben, ihre Entscheidungen über die Verwendung ihrer Inhalte mitzuteilen. Man werde die eigenen Praktiken anpassen, sobald sich die Standardisierungsdiskussionen weiterentwickeln.
So funktioniert das Signal Das Signal ist in einem individuellen Internet-Draft mit dem Titel Machine-Readable Training Preference Signal (draft-kelley-aipref-training-preference-signal-00) definiert. Verfasst hat ihn Kevin Kelley von Anthropic, datiert ist er auf den 30. Oktober 2026, er läuft am 3. Mai 2027 aus. Der Datentracker der IETF weist darauf hin, dass ein individueller Internet-Draft nicht von der IETF unterstützt wird und im formellen Standardisierungsprozess der IETF keinen offiziellen Status hat.