Следите за новостями по этой теме!
Подписаться на «Рифы и пачки / Твоя культура»
Bank of America попросил клиентов не передавать логины и пароли никому — в том числе инструментам и агентам на базе искусственного интеллекта, которые обещают действовать от имени пользователя.
На фоне быстрого распространения ИИ-ассистентов набирает популярность идея поручать им покупки и оплату товаров. Такой помощник может сам оформить заказ, если цена снизилась или товар снова появился в продаже. Удобно — пока автоматизация не начинает вести себя как самостоятельный покупатель с доступом к вашим деньгам.
Банкам подобные платежи создают регуляторные и практические проблемы. Финансовая организация может посчитать операцию несанкционированной и заблокировать доступ к счёту. Возможна и обратная неприятность: ИИ-агент купит то, чего клиент не хотел, а затем владельцу счёта придётся спорить с банком и добиваться возврата денег.
Во многих таких ситуациях ответственность в значительной степени ложится на самого клиента: если бы у агента не было банковских данных, нежелательная покупка не состоялась бы.
ИИ-компании рекламируют агентов как полезных помощников: они могут упорядочить дела, анализировать расходы и помочь лучше контролировать личные финансы. Но чем больше сведений о себе пользователь им сообщает, тем выше цена ошибки. Ассистент получает чувствительную информацию, а при уязвимости системы эти данные могут раскрыться или быть воспроизведены.
Риск касается не только платежей. Даже поручение организовать встречи или составить расписание дня может привести к нежелательным последствиям, если система неверно поймёт задачу или получит слишком широкий доступ.
Практический совет — относиться к ИИ-ассистенту как к незнакомцу, который способен почти мгновенно выполнить любое поручение, но не обязательно именно так, как вы хотели. Не стоит делиться с ним банковскими паролями и другими секретами. Также важно помнить: разговоры с такими системами могут использоваться для обучения будущих моделей и ассистентов.
Рекомендацию не передавать учётные данные клиентам дал Bank of America. Поводом стала растущая практика, когда ИИ-агенты совершают платежи от имени пользователей и тем самым создают риски для клиентов и банков.
У цифрового помощника есть полезное свойство: он не устает исполнять поручения. Есть и менее рекламируемое — он не обладает человеческим пониманием слова «стоп» и не несёт ответственность так, как её несёт человек. Между этими двумя особенностями и растёт рынок автоматических покупок.
Банкам в этой истории досталась роль скучного взрослого, который напоминает: доступ к счёту — не ещё одна галочка при настройке приложения. Если операция выглядит подозрительно, финансовая организация защищает систему по своим правилам; клиент же обнаруживает, что поручение машине не превратило ошибку в чужую проблему.
ИИ-компании продают образ универсального помощника: организует жизнь, сэкономит деньги, избавит от рутины. Чем шире его полномочия, тем убедительнее презентация — и тем удобнее забыть, что модель не становится доверенным лицом только потому, что говорит уверенным тоном. Пароль, переданный «для удобства», — это не магическая доверенность, а ключ, оставленный незнакомцу под ковриком.
Отдельный вопрос — куда отправляются сведения, которыми пользователь щедро делится с ассистентом. Разговоры могут использоваться для обучения будущих систем, а уязвимость способна превратить личную информацию в чужой материал. Это не означает, что каждый диалог непременно утечёт; означает лишь, что обещание удобства не отменяет необходимости читать условия и ограничивать доступ.
В выигрыше оказываются платформы, чьи агенты получают больше задач и данных: чем меньше действий остаётся человеку, тем привлекательнее продукт. Банки же вынуждены разбирать последствия автоматизации, которую не они придумали, а пользователи — доказывать, что именно имелось в виду под «купи, если будет выгодно». Странное совпадение: скорость исполнения продают как преимущество, а последствия ошибки оставляют клиенту.
Разумная мера здесь не требует техноаскетизма. Можно просить ИИ составить список покупок или сравнить цены, не вручая ему пароль и право самостоятельно распоряжаться деньгами. Чем серьёзнее действие — тем меньше оснований отдавать его на автопилот.
Пока индустрия обещает помощника, который всё устроит, стоит помнить: автоматизация отлично выполняет команды, но не всегда понимает их смысл. И если она ошиблась, сочувственный интерфейс не станет ни страховкой, ни службой возврата средств.