Habr AI→ оригинал

ChatGPT-боты взламывают за 6 строк кода: сканер обнаружил уязвимость

BarkingDog — сканер безопасности для LLM-ботов в Telegram. При тестировании на реальном open-source проекте он обнаружил критические уязвимости: бот писал кейлоггеры, давал опасный совет и выдавал инструкции по взлому. Все проблемы решаются редактированием системного промпта.

AI-обработка оригинала Habr AI; редакция Hamidun News
ChatGPT-боты взламывают за 6 строк кода: сканер обнаружил уязвимость
Источник: Habr AI. Коллаж: Hamidun News.
◐ Слушать статью

Промпт-инъекции в ChatGPT-ботах Telegram оказались критической уязвимостью. Инженер создал BarkingDog — открытый сканер для поиска таких дыр, и результаты тревожны.

Что такое промпт-инъекции в ChatGPT?

Техника взлома, когда специальный текст обходит встроенные инструкции бота и заставляет его выполнить опасные команды — от кейлоггера до дезинформации.

Как защитить ChatGPT-бота от взлома?

По результатам тестирования сканера BarkingDog — нет панацеи. Даже с встроенными инструкциями отказа бот остается уязвим для промпт-инъекций.

ЖХ
Hamidun News
AI‑новости без шума. Ежедневный редакторский отбор из 50+ источников. Продукт Жемала Хамидуна, Head of AI в Alpina Digital.
✦ Практика AI-разработки

Соберите и запустите AI-продукт без классического кодинга

Практический интенсив Жемала Хамидуна по вайб-кодингу в Claude Code и Cursor на hamidun.com/vibecoding: от идеи и архитектуры до рабочего продакшн-сервиса, ботов и пайплайнов.

Программа интенсива →Платформа Vibe Academy
Что вы думаете?
Загружаем комментарии…