Компания Anthropic выявила пользователей, которые пытались использовать модели Claude для исследований, способных привести к созданию биологического оружия. Доступ к сервисам для некоторых из них заблокировали. Об этом говорится в отчете о злоупотреблении ИИ, опубликованном 10 сентября, передает Tech-news со ссылкой на BBC. Anthropic сообщила о нескольких случаях, связанных с потенциально опасным применением ее моделей. В период с декабря 2025 года по август 2026-го исследователи компании обнаружили злоупотребления со стороны разработчиков шпионского ПО, политически мотивированных пользователей и спонсируемых государствами групп, распространяющих пропаганду. Пять эпизодов из отчета касаются возможного создания биологического оружия. Один из них связан с подготовкой заявки на научный грант. По данным Anthropic, пользователь Claude хотел провести исследование генетической модификации вируса чикунгунья. В частности, речь шла об изменении его заразности и способности обходить иммунную систему. Подобные исследования могут использоваться для разработки вакцин и лекарств. Однако, как отмечают в компании, те же методы способны сделать патоген более опасным. Anthropic призывает усилить контроль за ИИ В отчете компания подчеркнула, что описанные случаи не отражают типичное злоупотребление моделями. Это наиболее заметные и новые угрозы, которые Anthropic удалось выявить на данный момент. «Мы публикуем этот отчет, потому что считаем своей обязанностью раскрывать случаи злонамеренного злоупотребления нашими сервисами», — заявили в компании. Anthropic призвала правительства и разработчиков ИИ совместно искать способы выявления и предотвращения подобных сценариев. При этом лишь один из описанных эпизодов был связан с новейшими моделями компании. Anthropic назвала его тайной кампанией промышленного масштаба, направленной на изучение возможностей моделей и их незаконное воспроизведение. По утверждению разработчика, более ранние версии Claude не обладали достаточными возможностями для существенной помощи в проведении опасных биологических исследований. Поэтому меры безопасности в них были менее строгими. Сообщение Anthropic заблокировала пользователей Claude из-за риска создания биологического оружия появились сначала на Tech news.
Anthropic заблокировала пользователей Claude из-за риска создания биологического оружия
Компания Anthropic выявила пользователей, которые пытались использовать модели Claude для исследований, способных привести к созданию биологического оружия. Доступ к сервисам для некоторых из них заблокировали. Об этом говорится в отчете о злоупотреблении ИИ, опубликованном 10…
Кратко от AI: Главные тезисы
- Компания Anthropic выявила пользователей, которые пытались использовать модели Claude для исследований, способных привести к созданию биологического оружия
- Доступ к сервисам для некоторых из них заблокировали
- Об этом говорится в отчете о злоупотреблении ИИ, опубликованном 10…

Похожие материалы
Как Салливан и Кромвель создают юридические инструменты с помощью Кодекса | ОпенАИ
В Sullivan & Cromwell LLP Джон Савва использует Кодекс для создания инструментов на основе юридического опыта фирмы. Анализатор соглашений объединяет проект соглашения, избранные прецеденты и руководства, отражающие позиции фирмы и клиента. Он выявляет потенциальные проблемы и возвращает…
Хеббиа об Астре: Лучше исследования, лучше презентации | ОпенАИ
«Мы видим, что Astra на самом деле демонстрирует двузначный прирост по сравнению с любой другой моделью, которую мы тестировали, по двум направлениям». Кавита Ананд из Hebbia называет два из них: выбор правильных источников и создание презентаций PowerPoint. Для банкира или инвестора, работающего через комнату данных с тысячами…
Anthropic открывает свои бухгалтерские балансы для Уолл-стрит, показывая рекордные доходы и растущие обязательства
Anthropic — первая крупная лаборатория искусственного интеллекта, подавшая заявку S-1 в SEC и планирующая разместить свою компанию на Nasdaq под тикером «ANT». Цифры впечатляют: квартальный доход составляет $11,6 млрд, первая в истории операционная прибыль, а существующие клиенты тратят в девять раз больше по сравнению с прошлым годом.…
Создание агентной системы извлечения на базе Amazon Bedrock с CDK
AWS Machine Learning описывает создание агентной системы извлечения на базе Amazon Bedrock с использованием AWS CDK.

