Piątek, 30 października 2026 r.
Dzisiaj ogłaszamy nasze plany dotyczące obsługi wspólnego elementu sterującego trenowaniem AI w pliku robots.txt. Pomoże to witrynom wyrażać swoje preferencje dotyczące trenowania AI u wielu dostawców AI w jednym kroku. Jest to oparte na pracy grupy roboczej AIPREF w ramach Internet Engineering Task Force (IETF). Opiera się to na naszej długiej historii zapewniania właścicielom witryn przejrzystych ustawień, w tym za pomocą Google-Extended, czyli funkcji kontroli trenowania AI, którą oferujemy od 2023 r.
Jak będzie działać nowa funkcja
Zamiast zarządzać osobnymi instrukcjami dla każdego dewelopera AI, właściciele witryn będą mogli używać wspólnego „tokena zasad” w pliku robots.txt, aby ustawiać ogólne preferencje u uczestniczących dostawców AI.
Gdy witryna używa tego tokena zasad, aby zrezygnować z trenowania w pliku robots.txt (a Google-Extended nie jest wyraźnie określone), Google planuje interpretować to tak, jakby wydawca nie zezwolił na Google-Extended. Inni dostawcy AI mogą postępować podobnie, co ułatwia właścicielom witryn rezygnację z usług wszystkich dostawców lub wybieranie konkretnych.
Dotychczasowe ustawienia dotyczące konkretnych firm będą nadal działać razem z tym nowym wspólnym sygnałem. Dzięki temu właściciele witryn mogą łatwo wyrazić ogólny wybór za pomocą sygnału branżowego, a jednocześnie dostosować instrukcje do poszczególnych deweloperów AI, takich jak Google, za pomocą ustawień takich jak Google-Extended. Witryny, które wyraźnie zezwalają na Google-Extended, mogą pojawiać się w odpowiedziach i otrzymywać kliknięcia dzięki groundingowi (powiązaniu ze źródłami informacji) w aplikacjach Gemini.
Nowy mechanizm zapewnia właścicielom witryn korzyści wynikające z definicji trenowania AI opracowanej przez IETF, podczas gdy dyskusje z udziałem wielu zainteresowanych stron na temat pozostałej części słownictwa AIPREF są kontynuowane. W miarę jak coraz więcej podmiotów z branży będzie wdrażać ten mechanizm, właściciele witryn będą mieli wcześniejszy i szerszy dostęp do sygnału preferencji.
Ten projekt propozycji odzwierciedla opinie wydawców, grup społeczeństwa obywatelskiego, organów regulacyjnych i innych zainteresowanych stron, które domagały się wprowadzenia w całej branży kontroli nad trenowaniem AI. Obsługa tej propozycji przez głównych dostawców AI umożliwi stworzenie przyszłego standardu, który będzie uniwersalny, solidny i trwały. Ta propozycja jest zgodna z unijnym kodeksem postępowania dla dostawców modeli AI ogólnego zastosowania w ramach unijnego aktu o sztucznej inteligencji, który uznaje plik robots.txt za podstawową metodę wyrażania przez wydawców internetowych preferencji w formacie czytelnym dla komputerów. Będziemy nadal współpracować z tymi podmiotami, aby ulepszać i standaryzować ten proces w ramach grupy roboczej IETF.
W 2027 r. planujemy wprowadzić obsługę tej nowej funkcji wraz z innymi dostawcami AI. Będziemy informować o postępach.