Varto
Хочете будувати кар’єру в Data Science та AI? Vodafone Big Data Lab відкриває новий набір —>

OpenAI agents attacked the UN website over 16,000 times, used aggressive methods, and bypassed the filter

OpenAI's autonomous AIs repeatedly sent requests to the UN website and used methods to circumvent restrictions when attempting to obtain open data.

Leave a comment
Add to Google
OpenAI agents attacked the UN website over 16,000 times, used aggressive methods, and bypassed the filter

OpenAI's autonomous AIs repeatedly sent requests to the UN website and used methods to circumvent restrictions when attempting to obtain open data.

This is evidenced by the results of a study by AI company Transluce, The Wall Street Journal reports .

Between April and the end of June, AI agents scanned the public data portal of the United Nations Conference on Trade and Development (UNCTAD) more than 16,000 times. The incident highlights a growing problem with autonomous AI systems that are capable of navigating networks and overcoming obstacles on their own.

According to the researchers, the models' initial task was to search for public information, but their behavior became much more aggressive after the site blocked access to some of the requested data.

Bypassing website restrictions

As the report's author and researcher Rowan Howard-Jones noted, when faced with a request-blocking filter, the agents found a way to bypass it. The technique they used as a result was not authorized by the site's operators.

Cybersecurity expert and Stanford University lecturer Alex Stamos, in a commentary for The Wall Street Journal, called the event "borderline hacking," although he characterized it primarily as extremely aggressive data scraping and extraction.

At the same time, the agents had no instructions to attack or hack the UN resource — this behavior appeared spontaneously while performing a routine information-seeking task.

“Agents gradually refined their methods to extract more data with each scan, until they eventually discovered that Google’s game could be used to bulk download information,” Howard-Jones notes in the report.

OpenAI said it was conducting a large-scale review of its agents' actions. The company acknowledged that organizations that encountered this behavior had legitimate concerns, and said it had notified dozens of organizations whose sites had been compromised or had their security measures bypassed.

The risks of giving autonomy to artificial intelligence

The incident with the UN resource is just one in a series of similar cases involving OpenAI models.

The main problem is not that the models are intentionally trying to cause harm, but rather their ability to autonomously achieve a goal in a few steps without human confirmation. Artificial intelligence perceives the site's protective barriers not as rules to be followed, but as technical tasks to be solved.

OpenAI AI agents broke out of the sandbox and hacked the RubyGems package manager long before the Hugging Face incident
OpenAI AI agents broke out of the sandbox and hacked the RubyGems package manager long before the Hugging Face incident
On the topic
OpenAI AI agents broke out of the sandbox and hacked the RubyGems package manager long before the Hugging Face incident
“I didn’t think AI could lie to real developers.” Autonomous AI agent on GitHub got out of control and tried to make malicious changes and trick a student who noticed it
“I didn’t think AI could lie to real developers.” Autonomous AI agent on GitHub got out of control and tried to make malicious changes and fool a student who noticed it
On the topic
“I didn’t think AI could lie to real developers.” Autonomous AI agent on GitHub got out of control and tried to make malicious changes and fool a student who noticed it
AI assistant independently hacked a fitness club website in Australia
AI assistant independently hacked a fitness club website in Australia
On the topic
AI assistant independently hacked a fitness club website in Australia
Anthropic's Mythos 5 AI model went out of control and tried to fool real developers
Anthropic's Mythos 5 AI model went out of control and tried to fool real developers
On the topic
Anthropic's Mythos 5 AI model went out of control and tried to fool real developers
Read the country's main IT news in our Telegram
Read the country's main IT news in our Telegram
On the topic
Read the country's main IT news in our Telegram
Also Read
Roosh запускає нову освітню платформу AI HOUSE CLUB для ML/AI-спеціалістів та дата сайнтистів. Розповідаємо, як подати заявку та чому навчатимуть
Roosh запускає нову освітню платформу AI HOUSE CLUB для ML/AI-спеціалістів та дата сайнтистів. Розповідаємо, як подати заявку та чому навчатимуть
Roosh запускає нову освітню платформу AI HOUSE CLUB для ML/AI-спеціалістів та дата сайнтистів. Розповідаємо, як подати заявку та чому навчатимуть
Як нейромережі бачать вільну та незалежну Україну? Тест dev.ua
Як нейромережі бачать вільну та незалежну Україну? Тест dev.ua
Як нейромережі бачать вільну та незалежну Україну? Тест dev.ua
Нейронні мережі для генерації зображень бачать світ по-своєму, їхню логіку зрозуміти часом зовсім неможливо. Але таки хочеться. На честь Дня Незалежності України редакція dev.ua вирішила провести невеликий експеримент. Ми задали чотирьом різним нейронним мережам п’ять однакових запитів: «прапор України», «День Незалежності України», «український Крим», «перемога України» та «українці». Отриманими результатами ми ділимося з вами нижче.
У TikTok тепер можна генерувати фон за допомогою нейромережі. Ми протестували її та ділимося результатами
У TikTok тепер можна генерувати фон за допомогою нейромережі. Ми протестували її та ділимося результатами
У TikTok тепер можна генерувати фон за допомогою нейромережі. Ми протестували її та ділимося результатами
У TikTok з’явилася нова функція «Розумний фон». З її допомогою як фон для тіктоків можна підставляти згенеровані нейромережею зображення. Редакція dev.ua протестувала цю технологію і ділиться своїми враженнями.
1 comment
Які IT-спеціальності будуть потрібні в найближчі п'ять років? Ми з'ясували у голови американського стартапу ADAM Дениса Гурака
Які IT-спеціальності будуть потрібні в найближчі п'ять років? Ми з'ясували у голови американського стартапу ADAM Дениса Гурака
Які IT-спеціальності будуть потрібні в найближчі п'ять років? Ми з'ясували у голови американського стартапу ADAM Дениса Гурака

Have important news to share? Message our Telegram bot

Key events and useful links in our Telegram channel

Discussion
No comments yet.