Исследователи рекомендуют немедленно удалить популярное браузерное расширение.
Специалисты из Cybersecurity Research Center (CyRC) компании Synopsys Для просмотра ссылки Войдиили Зарегистрируйся zero-day уязвимость в Для просмотра ссылки Войди или Зарегистрируйся популярном расширении для Google Chrome, использующем искусственный интеллект для написания электронных писем.
Уязвимость типа «Prompt Injection» с идентификатором Для просмотра ссылки Войдиили Зарегистрируйся позволяет злоумышленникам манипулировать сервисом и получать доступ к конфиденциальной информации.
EmailGPT использует общедоступные ИИ-модели от OpenAI для помощи пользователям в составлении писем в сервисе Gmail . Пользователи получают ИИ-подсказки для написания писем, предоставляя сервису исходные данные и контекст. Однако недавнее открытие выявило серьёзный изъян в работе расширения.
EmailGPT использует API-сервис, который позволяет злоумышленникам внедрять сторонние промпты и управлять логикой сервиса. Это может привести к утечке системных подсказок или выполнению нежелательных команд.
Так, злоумышленник может создать промпт, который встраивает нежелательную функциональность, что может привести к:
Synopsys сообщает, что их исследователи связались с разработчиками EmailGPT до публикации деталей, но ответа не получили. Synopsys рекомендует немедленно удалить EmailGPT из своего браузера, ведь каких-либо путей для смягчения последствий уязвимости пока нет.
Патрик Харр, CEO компании SlashNext Email Security, отметил важность строгого управления и внедрения дополнительных мер безопасности для ИИ-моделей, чтобы предотвратить появление уязвимостей и их последующую эксплуатацию.
Харр также добавил, что компании, планирующие интеграцию ИИ в свои бизнес-процессы, должны требовать от поставщиков ИИ-моделей реальных доказательств их безопасности.
Специалисты из Cybersecurity Research Center (CyRC) компании Synopsys Для просмотра ссылки Войди
Уязвимость типа «Prompt Injection» с идентификатором Для просмотра ссылки Войди
EmailGPT использует общедоступные ИИ-модели от OpenAI для помощи пользователям в составлении писем в сервисе Gmail . Пользователи получают ИИ-подсказки для написания писем, предоставляя сервису исходные данные и контекст. Однако недавнее открытие выявило серьёзный изъян в работе расширения.
EmailGPT использует API-сервис, который позволяет злоумышленникам внедрять сторонние промпты и управлять логикой сервиса. Это может привести к утечке системных подсказок или выполнению нежелательных команд.
Так, злоумышленник может создать промпт, который встраивает нежелательную функциональность, что может привести к:
- извлечению данных;
- спам-кампаниям с использованием взломанных аккаунтов;
- созданию вводящего в заблуждение контента для рассылки;
Synopsys сообщает, что их исследователи связались с разработчиками EmailGPT до публикации деталей, но ответа не получили. Synopsys рекомендует немедленно удалить EmailGPT из своего браузера, ведь каких-либо путей для смягчения последствий уязвимости пока нет.
Патрик Харр, CEO компании SlashNext Email Security, отметил важность строгого управления и внедрения дополнительных мер безопасности для ИИ-моделей, чтобы предотвратить появление уязвимостей и их последующую эксплуатацию.
Харр также добавил, что компании, планирующие интеграцию ИИ в свои бизнес-процессы, должны требовать от поставщиков ИИ-моделей реальных доказательств их безопасности.
- Источник новости
- www.securitylab.ru