Безопасность

Безопасность и этика искусственного интеллекта. Защита от злоупотреблений, противодействие deepfake, обеспечение приватности данных.

Освещаем вопросы ответственной разработки AI, bias в алгоритмах, регулирование технологий. Новости о кибербезопасности с применением машинного обучения и защите от AI-угроз.

Сканер уязвимостей Claude Code Security

Anthropic запустила ИИ-сканер уязвимостей Claude Code Security

Claude Code Security от Anthropic «читает» код, как исследователь: понимает потоки данных, находит логику ошибок и генерирует патчи с рейтингом. Минус ложных позитивов — многоступенчатая проверка ИИ. Уже нашёл 500+ багов в open-source, но риски: такие же инструменты помогут хакерам.

Дрейф ИИ агентов

Дрейф агентных ИИ-систем: скрытая угроза, которую не ловят тесты

Агентные ИИ не ломаются внезапно: они дрейфуют — меняют поведение от обновлений промптов и инструментов, накапливая риски месяцами. Традиционные тесты не ловят это, нужна поведенческая диагностика для CIO и CTO.

Браузерные расширения собирают данные

Браузерные расширения могут собирать диалоги пользователей с ИИ ради рекламы

Восемь популярных браузерных расширений с 8 млн установок тайно собирают полные диалоги пользователей с ChatGPT, Claude и другими ИИ для продажи маркетологам. Расширения обещают защиту, но сами являются инструментом слежки.

Бенчмарк Phare V2 не оценил модели

Бенчмарк Phare V2 показал, что современные и продвинутые LLM не становятся безопаснее

Новое исследование Phare V2 показывает, что прогресс в возможностях языковых моделей не привел к аналогичному улучшению их безопасности. Рассуждающие модели не стали устойчивее к взлому, галлюцинациям и предвзятости.

Браузеры с ИИ-агентами опасны

Браузеры с ИИ-агентами — это удобно, но проблемы с безопасностью не решаются

Новые браузеры с ИИ-агентами, которые могут действовать в интернете от вашего имени, сталкиваются с серьезными проблемами безопасности, включая уязвимости к скрытым командам и риск компрометации личных данных.

Противники ИИ не сдаются

Противники ИИ не сдаются, несмотря на то, что их прогнозы конца света провалились

Сторонники теории скорого апокалипсиса от ИИ, чьи прогнозы не сбылись, не сдаются. Вместо этого они перешли от научных дискуссий к политическому лоббизму, находя поддержку у регуляторов.