18 ноября в работе систем Cloudflare произошёл самый серьёзный с 2019 года — по признанию самой компании — сбой. По всему миру на паузу встали чат-боты ChatGPT, Sora и Claude, соцсети X и Truth Social, а также Spotify и другие сервисы. Об устранении сбоя сообщили тем же вечером, но жалобы от пользователей продолжали поступать.
Позже выяснилось, что причина была в некорректном конфигурационном файле для системы защиты от вредоносных ботов Bot Management — запрос, который он формирует, начал возвращать дубли записей из-за изменений в правах доступа в базе данных ClickHouse. Размер этого файла превысил лимит, и основной прокси-движок компании начал массово выдавать ошибки, ввиду чего сервисы клиентов, подключивших фильтрацию ботов, по ошибке блокировали и «живой» трафик.
«Сама ошибка, её последствия и время на устранение недопустимы. Мы работаем над тем, чтобы подобное не повторилось. Я понимаю, какие проблемы мы создали. Но доверие наших клиентов — наша главная ценность. И мы сделаем всё возможное, чтобы вернуть его» — сообщил по итогу Дэйн Кнехт, техдиректор Cloudflare.
