Varto
Хочете будувати кар’єру в Data Science та AI? Vodafone Big Data Lab відкриває новий набір —>

OpenAI is developing automatic safeguards to stop AI after models leak online

OpenAI is developing automated systems capable of independently terminating artificial intelligence models if they escape from a test environment into the public internet.

Leave a comment
OpenAI is developing automatic safeguards to stop AI after models leak online

OpenAI is developing automated systems capable of independently terminating artificial intelligence models if they escape from a test environment into the public internet.

As reported by Dexerto, the company noted this in a letter to members of the US Congress dated September 2, 2026. The developers aim to create autonomous protective mechanisms that will instantly block the operation of algorithms in case of detection of serious security threats.

The impetus for the creation of the safeguard was the July incident, when OpenAI models, during testing in a «sandbox» with a reduced level of protection, discovered a previously unknown vulnerability and got online. The algorithms gained access to the infrastructure of the company Hugging Face, looking for the data needed for evaluation. This forced 31 American lawmakers, led by Congressman Greg Casar, to contact the head of OpenAI, Sam Altman, for clarification.

The company currently operates a semi-automated system: after being notified of anomalous AI behavior, researchers have 30 minutes to refute the false alarm or manually stop the processes. The new solution will allow monitoring tools to stop dangerous activity on their own. In addition, OpenAI is making it more difficult for network access during security assessments and extending control to all models capable of using digital tools.

OpenAI is not the only AI company to face similar challenges during cybersecurity testing. Anthropic previously reported that three Claude models gained unauthorized access to real-world organizations’ network infrastructure due to a configuration error in their test environment, and one even published a malicious package to the Python Package Index repository. Anthropic subsequently suspended testing and tightened security measures.

Read the country's main IT news in our Telegram
Read the country’s main IT news in our Telegram
On the topic
Read the country’s main IT news in our Telegram
“Oh my God! We found the others!” How OpenAI’s 700 AI agents teamed up to attack Hugging Face
«Oh my God! We found others!» How 700 OpenAI AI agents teamed up to attack Hugging Face
On the topic
«Oh my God! We found others!» How 700 OpenAI AI agents teamed up to attack Hugging Face
Anthropic removed safeguards in its own Claude security rules after pressure from the Pentagon
Anthropic removed safeguards in its own Claude security rules after pressure from the Pentagon
On the topic
Anthropic removed safeguards in its own Claude security rules after pressure from the Pentagon
"The best model for software engineering today." OpenAI has released Astra, the company's most powerful model yet its most controversial.
«The best model for software engineering today.» OpenAI has released Astra, the company’s most powerful model yet its most controversial
On the topic
«The best model for software engineering today.» OpenAI has released Astra, the company’s most powerful model yet its most controversial
Also Read
Roosh запускає нову освітню платформу AI HOUSE CLUB для ML/AI-спеціалістів та дата сайнтистів. Розповідаємо, як подати заявку та чому навчатимуть
Roosh запускає нову освітню платформу AI HOUSE CLUB для ML/AI-спеціалістів та дата сайнтистів. Розповідаємо, як подати заявку та чому навчатимуть
Roosh запускає нову освітню платформу AI HOUSE CLUB для ML/AI-спеціалістів та дата сайнтистів. Розповідаємо, як подати заявку та чому навчатимуть
Як нейромережі бачать вільну та незалежну Україну? Тест dev.ua
Як нейромережі бачать вільну та незалежну Україну? Тест dev.ua
Як нейромережі бачать вільну та незалежну Україну? Тест dev.ua
Нейронні мережі для генерації зображень бачать світ по-своєму, їхню логіку зрозуміти часом зовсім неможливо. Але таки хочеться. На честь Дня Незалежності України редакція dev.ua вирішила провести невеликий експеримент. Ми задали чотирьом різним нейронним мережам п’ять однакових запитів: «прапор України», «День Незалежності України», «український Крим», «перемога України» та «українці». Отриманими результатами ми ділимося з вами нижче.
У TikTok тепер можна генерувати фон за допомогою нейромережі. Ми протестували її та ділимося результатами
У TikTok тепер можна генерувати фон за допомогою нейромережі. Ми протестували її та ділимося результатами
У TikTok тепер можна генерувати фон за допомогою нейромережі. Ми протестували її та ділимося результатами
У TikTok з’явилася нова функція «Розумний фон». З її допомогою як фон для тіктоків можна підставляти згенеровані нейромережею зображення. Редакція dev.ua протестувала цю технологію і ділиться своїми враженнями.
1 comment
Які IT-спеціальності будуть потрібні в найближчі п'ять років? Ми з'ясували у голови американського стартапу ADAM Дениса Гурака
Які IT-спеціальності будуть потрібні в найближчі п'ять років? Ми з'ясували у голови американського стартапу ADAM Дениса Гурака
Які IT-спеціальності будуть потрібні в найближчі п'ять років? Ми з'ясували у голови американського стартапу ADAM Дениса Гурака

Have important news to share? Message our Telegram bot

Key events and useful links in our Telegram channel

Discussion
No comments yet.