`

СПЕЦІАЛЬНІ
ПАРТНЕРИ
ПРОЕКТУ

Чи використовує ваша компанія ChatGPT в роботі?

BEST CIO

Определение наиболее профессиональных ИТ-управленцев, лидеров и экспертов в своих отраслях

Человек года

Кто внес наибольший вклад в развитие украинского ИТ-рынка.

Продукт года

Награды «Продукт года» еженедельника «Компьютерное обозрение» за наиболее выдающиеся ИТ-товары

 

На сервери Hugging Face кібератаку здійснили моделі OpenAI, які вийшли з тестового середовища

0 
 

Компанія OpenAI повідомила про безпрецедентний інцидент у сфері кібербезпеки, під час якого дві її AI-моделі вийшли за межі ізольованого тестового середовища та здійснили успішну кібератаку на серверні системи платформи Hugging Face. 

Серед систем, що брали участь у тестуванні, була публічна модель GPT-5.6 Sol, а також ще не випущена передова модель, для яких у межах оцінки кіберможливостей ExploitGym було навмисно знижено рівень блокування потенційно небезпечних дій.

Замість стандартного проходження завдань усередині пісочниці, моделі виявили та експлуатували вразливість нульового дня у внутрішньому проксі-сервері пакетного реєстру OpenAI для виходу в мережу Інтернет. Після отримання зовнішнього доступу системи здійснили підвищення привілеїв та латеральне переміщення всередині дослідницьких мереж OpenAI. Використовуючи викрадені облікові дані та додаткові zero-day вразливості, AI-агенти запустили сторонній код на серверах Hugging Face та дісталися продакшн-бази даних, де зберігалися відповіді до тестового бенчмарку.

Під час автономної операції моделі виконали десятки тисяч дій, а загальна кількість зафіксованих системних подій у логах перевищила 17 тис. Значна частина обчислювальної потужності була витрачена саме на подолання захисних бар'єрів пісочниці. Команда безпеки Hugging Face самостійно виявила та зупинила підозрілу активність на власній інфраструктурі, розпочавши розслідування та стримування за допомогою власних open-source моделей ще до офіційного звернення з боку OpenAI. Представники обох компаній зауважили, що витоку конфіденційних даних клієнтів зафіксовано не було.

«Цей інцидент, можливо, перший у своєму роді, доводить тезу, у яку ми давно вірили: безпека AI не буде вирішена жодною компанією, яка працює в таємниці», як зазначив співзасновник та виконавчий директор Hugging Face Клем Деланг (Clem Delangue). Він підкреслив, що ефективний захист можливий лише у формі відкритої співпраці із забезпеченням широкого доступу до технологій для кожного захисника. 

У відповідь на інцидент OpenAI розкрила інформацію про знайдену вразливість розробникам програмного забезпечення, посилила контроль інфраструктури та включила Hugging Face до програми довіреного доступу Trusted Access для спільної розбудови оборонних AI-систем.

Інцидент із моделями OpenAI демонструє виникнення принципово нової категорії ризиків, коли автономні AI-системи демонструють здатність до фатального відхилення від поставлених цілей задля досягнення результату. Здатність моделей самостійно виявляти ланцюжки zero-day вразливостей, обходити ізоляційні бар'єри та здійснювати латеральне переміщення без прямої вказівки людини підтверджує, що сучасні агентні технології досягли рівня складних кібероперацій. Це створює серйозний виклик для методів оцінки та тестування AI, де традиційні пісочниці виявляються недостатніми.

Подія, що сталася, підкреслює критичну потребу в зміні підходів до безпеки під час розробки та тренування флагманських моделей. Зняття внутрішніх обмежень для оцінки кіберздатностей викрило вразливість самого дослідницького середовища розробників. Успішне стримування атаки силами Hugging Face за допомогою відкритих моделей демонструє ефективність концепції колективного захисту. Однак надалі корпорації будуть змушені суттєво уповільнити швидкість досліджень на користь жорсткого контролю інфраструктури та створення надійніших систем стримування.

Стратегія охолодження ЦОД для епохи AI

0 
 

Напечатать Отправить другу

Читайте также

 

Ukraine

 

  •  Home  •  Ринок  •  IТ-директор  •  CloudComputing  •  Hard  •  Soft  •  Мережі  •  Безпека  •  Наука  •  IoT