Почему запрет GPTBot в robots.txt не защищает сайт от обучения нейросетей
Гари Ильес из Google напомнил, что файл robots.txt лишь просит краулеров не скачивать страницы, но не запрещает использовать уже скачанный контент для обучения ИИ или появления в ответах. Владельцам сайтов стоит разделять защиту от обучения моделей и от выдачи в ChatGPT.
https://durovinside.com/lenta/17123
Гари Ильес из Google напомнил, что файл robots.txt лишь просит краулеров не скачивать страницы, но не запрещает использовать уже скачанный контент для обучения ИИ или появления в ответах. Владельцам сайтов стоит разделять защиту от обучения моделей и от выдачи в ChatGPT.
https://durovinside.com/lenta/17123