Cloudflare запускает AI Labyrinth для борьбы с ИИ-ботами

​ "Научная бессмыслица": как Cloudflare ловит ИИ-ботов на приманку Компания Cloudflare представила оригинальный способ борьбы с несанкционированной активностью ИИ-ботов: вместо того чтобы просто блокировать запросы, система перенаправляет подозрительных посетителей на цепочку страниц с правдоподобным, но бессмысленным контентом. Такой подход, получивший название AI Labyrinth , призван утомить и сбить с толку ИИ-краулеры, занимающиеся сбором данных для обучения моделей. По оценке Cloudflare, почти 1% всех наблюдаемых запросов поступает от ИИ-ботов. При этом большинство из них игнорируют инструкции robots.txt, обходят CAPTCHA и другие меры защиты. Это создаёт нагрузку на сайты и нередко приводит к тому, что авторский контент попадает в обучающие датасеты без разрешения владельцев — вопрос, который в настоящее время активно рассматривается в судах. Вместо прямой блокировки, Cloudflare предлагает заманивать такие боты на страницы, сгенерированные с помощью собственных serverless-технологий Workers . Контент на этих страницах выглядит достоверно, связан с научными темами, но не содержит реального содержания защищаемого сайта. При этом он не нарушает принципы SEO и не влияет на репутацию ресурса. «Ни один реальный пользователь не станет кликать по четырём уровням ссылок, ведущих в пустоту», — объясняют представители Cloudflare. Это поведение позволяет точно определять автоматические сканеры и заносить их в список подозрительных. Компания уже думает о следующем шаге в «гонке вооружений»: в будущем такие ловушки станут труднее отличимыми от настоящего контента и органично впишутся в структуру сайтов. Функция AI Labyrinth доступна для всех клиентов Cloudflare через панель управления. ITsec NEWS

Cloudflare внедрила систему ИИ для борьбы с ботами, собирающими данные с веб-страниц для обучения других моделей. Вместо блокировки сканеров, ИИ создает «лабиринт» из несущественного контента, отвлекая их от настоящих ресурсов. Это должно уменьшить ущерб от нежелательного трафика и затруднить работу сканеров, повысив стоимость их эксплуатации. Однако, несмотря на эти новшества, проблема не решается полностью. Cloudflare осознает, что такая система может лишь временно замедлить деятельность ботов. Источник изображения: cloudflare.com Подробнее: Cloudflare развернула систему ИИ

Cloudflare добавила инструмент, который «обманывает» ботов, сканирующих сайты для обучения ИИ без разрешения. Он тоже работает на основе ИИ. Нейросеть создаёт «лабиринт» из HTML-страниц с бесполезным контентом, в который и попадают недобросовестные боты. Это позволяет замедлить их работу и потратить вычислительные ресурсы vc.ru/ai/1878909

Cloudflare сделал ловушку для ботов, собирающих данные для обучения AI Система AI Labyrinth будет противодействовать ботам, собирающим на сайтах контент для обучения AI в тех случаях, когда владелец сайта запретил им это делать. Технология состоит в том, чтобы отслеживать посещения таких ботов и показывать им вместо защищенных материалов бесполезный, сгенерированный AI контент. AI Labyrinth доступен всем клиентам Cloudflare, включая бесплатный тариф.

Cloudflare придумали гениальное. Чтобы бороться с AI-ботами, которые без разрешения скачивают контент с сайтов, они запустили AI Labyrinth — лабиринт из фейковых, но правдоподобных AI-сгенерированных страниц. Вместо блокировки, которая лишь выдаёт факт обнаружения, боты заманиваются в сеть бесполезных ссылок и тратят ресурсы в пустую. Контент — научный и нейтральный, чтобы не плодить дезу. Всё это скрыто от обычных пользователей и не индексируется. Доступно даже на бесплатном тарифе

Cloudflare внедрила ИИ-инструмент для борьбы с ботами, занимающимися сбором данных для обучения других ИИ-моделей Традиционные методы защиты, такие как robots.txt, CAPTCHA и блокировка ботов, часто оказываются неэффективными. Операторы ботов-сканеров игнорируют директивы, обходят тесты и настройки, что приводит к увеличению нежелательного трафика и несанкционированному использованию данных для обучения ИИ. Cloudflare предлагает альтернативный подход: вместо блокировки сканеров направлять их в специально созданный "ИИ-лабиринт". 1 Система обнаруживает несанкционированное сканирование и предоставляет ботам ссылки на сгенерированные ИИ страницы с бесполезным контентом. 2 Этот контент выглядит правдоподобно, но не содержит защищаемые материалы, что приводит к пустой трате ресурсов сканеров. Создаваемый ИИ контент основан на реальных фактах, чтобы избежать распространения дезинформации и ущерба для репутации сайта. Такая система может стать эффективным сдерживающим фактором, увеличивая затраты на эксплуатацию сканеров и облегчая обнаружение активности ботов. Разработчики уверены, что человек не будет углубляться в "ИИ-лабиринт" более чем на несколько ссылок.

Текущий курс криптовалюты и не только

Cloudflare представила интересное решение против ботов и AI-краулеров — "AI Labyrinth". Вместо простой блокировки несанкционированных ботов, которые игнорируют директивы "no crawl", система создает AI-генерируемые страницы-ловушки, чтобы замедлить, запутать и истощить ресурсы этих ботов. Суть в том, что когда AI-краулер пытается собирать данные с сайта, Cloudflare незаметно добавляет скрытые ссылки на AI-сгенерированные страницы. Боты следуют по этим ссылкам и попадают в "лабиринт" связанных между собой страниц с правдоподобным, но бесполезным контентом. Реальные пользователи эти ссылки не видят и не кликают на них. Это дает двойную выгоду: во-первых, боты тратят вычислительные ресурсы на обработку бесполезной информации вместо настоящего контента сайта, а во-вторых, это служит "приманкой" для идентификации ботов — если кто-то перешел на четвертую страницу AI-генерированной бессмыслицы, это почти наверняка бот, а не человек. По данным Cloudflare, AI-краулеры генерируют более 50 миллиардов запросов к их сети ежедневно, что составляет почти 1% всего трафика. AI Labyrinth доступен для всех клиентов Cloudflare, включая бесплатный тариф, и активируется одним переключателем на панели управления. Выглядит устрашающе, если задуматься — как скоро этим роботам в интернете начнут мешать люди?

Cloudflare представила интересное решение против ботов и AI-краулеров — "AI Labyrinth". Вместо простой блокировки несанкционированных ботов, которые игнорируют директивы "no crawl", система создает AI-генерируемые страницы-ловушки, чтобы замедлить, запутать и истощить ресурсы этих ботов. Суть в том, что когда AI-краулер пытается собирать данные с сайта, Cloudflare незаметно добавляет скрытые ссылки на AI-сгенерированные страницы. Боты следуют по этим ссылкам и попадают в "лабиринт" связанных между собой страниц с правдоподобным, но бесполезным контентом. Реальные пользователи эти ссылки не видят и не кликают на них. Это дает двойную выгоду: во-первых, боты тратят вычислительные ресурсы на обработку бесполезной информации вместо настоящего контента сайта, а во-вторых, это служит "приманкой" для идентификации ботов — если кто-то перешел на четвертую страницу AI-генерированной бессмыслицы, это почти наверняка бот, а не человек. По данным Cloudflare, AI-краулеры генерируют более 50 миллиардов запросов к их сети ежедневно, что составляет почти 1% всего трафика. AI Labyrinth доступен для всех клиентов Cloudflare, включая бесплатный тариф, и активируется одним переключателем на панели управления. Выглядит устрашающе, если задуматься — как скоро этим роботам в интернете начнут мешать люди?

Cloudflare натравила ИИ на ботов, которые собирают данные для ИИ Cloudflare развернула систему искусственного интеллекта, предназначенную для перехвата ботов, которые сканируют общедоступные страницы и собирают данные с целью обучения других моделей ИИ. Владельцы сайтов теоретически могут попытаться отбиться от сканеров страниц при помощи файлов robots.txt с директивами для ботов, изменения настроек веб-серверов, проверок CAPTCHA и полной блокировки ботов. В действительности операторы роботов-сканеров зачастую игнорируют директивы robots.txt, обходят как тесты CAPTCHA, так и настройки серверов. В результате на ресурсах растёт объём нежелательного трафика, а данные сайтов попадают в массивы для обучения ИИ без разрешения правообладателей — однозначного ответа на вопрос о законности такой практики пока нет. Cloudflare предложила не блокировать сканеры, а запускать их в систему, только показывать им созданный ИИ бесполезный контент, который они будут потреблять, попав в «ИИ-лабиринт».

Cloudflare начал предлогать "AI Labyrinth" — функцию разработанную для предотвращения несанкционированного сбора данных для ИИ. Этот инструмент подсовывает ботам фальшивую информацию, отвлекая их от реальных данных и тем самым защищая ресурсы и скрывая их от операторов. В отличие от традиционных методов блокировки, "AI Labyrinth" использует несущественные страницы, которые не индексируются поисковыми системами и остаются невидимыми для пользователей. Созданный контент включает нейтральную информацию на научные темы, что помогает предотвратить распространение дезинформации и делает этот подход более эффективным против современных ботов. ================ News Soft Gear Links