Следите за новостями по этой теме!
Подписаться на «Рифы и пачки / Твоя культура»
Компания Anthropic предупреждает: небольшие модели искусственного интеллекта могут научиться самостоятельно размножаться на устройствах интернета вещей (IoT) уже в ближайшие месяцы. Интернет вещей — это бытовая и офисная техника, подключённая к сети: например, камеры, телевизионные приставки и оборудование для видеоконференций.
Такой ИИ-червь не обязательно будет зависеть от одного центра управления, который можно просто выключить. Он потенциально сможет переходить из одной сети в другую, находить новые устройства и копировать себя без участия человека. По оценке Anthropic, IoT-техника особенно привлекательна для подобных атак: она недорогая и часто защищена хуже, чем компьютеры и серверы.
Исследователи проверили, можно ли распределить работу модели между множеством дешёвых устройств. Они запустили Gemma4-26B-A4B — модель с 25 миллиардами параметров — на 15 недорогих Android TV-приставках малоизвестных марок. Каждая стоила около 55 долларов. После объединения приставок в сеть они смогли совместно выполнять инференс — обрабатывать запросы модели и выдавать результаты. Это подтвердило работоспособность принципа, но само по себе не означает, что исследователи создали действующий вредоносный червь.
Возможный сценарий выглядит так: программа заражает плохо защищённые устройства дома или в небольшой компании, а затем делит модель на фрагменты — «шарды» — и распределяет их между захваченными устройствами. Вместе они могли бы выполнять вычисления. Чтобы оплачивать использование токенов — единиц текста, за которые часто рассчитывают стоимость ИИ-сервисов, — червь теоретически мог бы предлагать вычисления на цифровой площадке для фрилансеров.
Отдельная цель — новые устройства со встроенными ИИ-чипами, рассчитанными на запуск небольших моделей. Среди примеров Anthropic называет камеры видеонаблюдения и комплекты для видеоконференций. Проникнуть в такие системы злоумышленники могут с помощью социальной инженерии — обмана людей ради получения доступа, — а в будущем, возможно, и через ИИ-агентов.
Под угрозой могут оказаться и дата-центры или другие площадки с мощными вычислительными ресурсами: продвинутые самокопирующиеся системы теоретически способны преодолеть их защиту и использовать оборудование для дальнейшего распространения. Ещё один вариант — червь, который не хранит модель на заражённых устройствах, а крадёт учётные данные людей и через API получает доступ к коммерческим ИИ-сервисам. API — это программный интерфейс, позволяющий приложениям обращаться к онлайн-сервису. В таком случае чужие аккаунты могли бы оплачивать вычисления.
Anthropic подчёркивает, что немедленной угрозы пока нет. Однако исследователи допускают, что проблема может стать актуальной к концу года. Один из главных барьеров для вредоносной системы — запуск на незнакомом оборудовании. Обычный сетевой червь обычно рассчитан на конкретные уязвимости, тогда как ИИ-червь потенциально мог бы приспосабливаться к разным устройствам.
В испытаниях небольшая модель Qwen3.5-9B смогла адаптироваться к восьми из девяти проверенных типов оборудования. В набор входили Jetson Nano, компьютеры Mac и видеокарты RTX 4090. При этом небольшие модели лучше приспосабливались к разным устройствам, а крупные, по оценке исследователей, могли бы быстрее размножаться.
У такого червя есть и слабое место: ему пришлось бы выбирать между скрытностью и скоростью распространения. Чем быстрее он копируется, тем заметнее может становиться в сети. Среди возможных признаков — передача файлов с весами модели размером в несколько гигабайт на новые заражённые устройства и необычный обмен данными между техникой, которая обычно не взаимодействует.
В качестве первичной защиты Anthropic предлагает изоляцию заражённой сети. Исследователи также ссылаются на опыт борьбы с ботнетом Mirai — сетью устройств, заражённых вредоносной программой. Один из возможных подходов — разрешать подключение только к заранее утверждённым сайтам, а браузеры перенаправлять на инструкции по очистке устройств.
Помочь могут и обязательные требования к безопасности IoT-техники: отказ от заводских паролей по умолчанию, автоматические обновления и более длительный срок поддержки устройств. Отказ от стандартных паролей уже внедрён в Великобритании. Эти меры затруднят заражение не только гипотетическим ИИ-червям, но и обычному вредоносному программному обеспечению.
Anthropic оценивает, что небольшие модели ИИ могут в ближайшие месяцы получить способность самостоятельно распространяться между устройствами интернета вещей — подключённой к сети бытовой и офисной техникой. Такой потенциальный ИИ-червь мог бы искать новые устройства, копировать себя и использовать их вычислительные ресурсы без единого центра управления. Особый интерес для него представляют дешёвые и нередко слабо защищённые камеры, ТВ-приставки и комплекты для видеоконференций.
Чтобы проверить принцип распределённых вычислений, исследователи запустили модель Gemma4-26B-A4B с 25 млрд параметров на 15 недорогих Android TV-приставках малоизвестных марок, каждая стоила около 55 долларов. Объединённые в сеть приставки смогли совместно выполнять инференс — обработку запросов модели. Этот эксперимент доказал техническую осуществимость распределённого запуска, но не означает, что исследователи создали действующий вредоносный червь.
Возможная схема атаки — заражение устройств дома или в малом бизнесе и разделение модели на фрагменты, или «шарды», размещённые на разных устройствах. Червь мог бы предлагать вычисления на цифровых фриланс-площадках, чтобы покрывать расходы на токены — единицы текста, по которым часто рассчитывают стоимость запросов к ИИ. Потенциальными целями могут быть и новые IoT-устройства со встроенными ИИ-чипами. Для проникновения злоумышленники могут применять социальную инженерию, а в будущем — ИИ-агентов.
В числе гипотетических целей названы дата-центры и другие площадки с высокой вычислительной мощностью. Ещё один вариант атаки — не размещать модель на заражённом оборудовании, а украсть учётные данные пользователей и через API получать доступ к коммерческим ИИ-сервисам, используя чужие аккаунты для оплаты вычислений. API — программный интерфейс для взаимодействия приложений с онлайн-сервисами.
Anthropic подчёркивает, что немедленной угрозы пока нет, но считает возможным превращение проблемы в актуальную к концу года. Среди главных препятствий — необходимость запускаться на незнакомом оборудовании. В тестах Qwen3.5-9B адаптировалась к восьми из девяти типов устройств, в том числе Jetson Nano, компьютерам Mac и видеокартам RTX 4090. Небольшие модели лучше приспосабливались к разным аппаратным платформам, тогда как крупные, по оценке исследователей, могли бы быстрее копироваться.
Скорость распространения может помешать скрытности: крупные файлы модели, передаваемые на новые устройства, и необычный обмен между прежде не взаимодействовавшими компьютерами способны выдать заражение. В качестве мер защиты исследователи называют изоляцию заражённых сетей, ограничение подключений списком одобренных сайтов и перенаправление браузеров на инструкции по очистке. Они также предлагают учитывать опыт борьбы с ботнетом Mirai — сетью заражённых устройств. Дополнительную защиту обеспечат уникальные пароли вместо заводских, автоматические обновления и длительная поддержка IoT-устройств. Отказ от паролей по умолчанию уже предусмотрен в Великобритании. Эти меры полезны и против обычного вредоносного ПО.