Mazda CX5
Як зробити цифрову копію себе. Ось відео —>

Discord's AI moderator banned users for innocent images of chess or textures due to a bug

Discord has admitted that a bug in its AI-powered moderation system has mistakenly blocked more than 8,000 users in the past two months. Automated algorithms identified innocuous images — chessboards, tables, game textures, and white and gray transparent backgrounds — as harmful and dangerous content.

Leave a comment
Discord's AI moderator banned users for innocent images of chess or textures due to a bug

Discord has admitted that a bug in its AI-powered moderation system has mistakenly blocked more than 8,000 users in the past two months. Automated algorithms identified innocuous images — chessboards, tables, game textures, and white and gray transparent backgrounds — as harmful and dangerous content.

This is reported by TechCrunch with reference to a statement from Discord representatives. According to the developers, the problem has been affecting user accounts since May. The last 200 profiles were blocked just before the engineering team discovered and fixed the system error. The process of restoring all affected accounts is currently underway.

Discord explained that its automated security system works by matching uploaded content against databases of known dangerous materials. While the technology is designed to quickly detect illegal files, the company acknowledged the possibility of false positives. Normally, such content would be further vetted by a human moderator, but due to a technical glitch, the system instantly and permanently blocked affected accounts, bypassing human review.

X (Twitter) and Reddit users have begun complaining about lifetime bans for uploading images with square grid patterns. Some have suggested that Discord's AI moderator has become overly sensitive to such grids, as attackers have previously used similar patterns to mask sensitive (NSFW) or prohibited content from automatic detection filters.

Affected users are expressing outrage on social media, emphasizing that sudden blocks are destroying gaming communities and disrupting the workflows of those who use the platform for professional communication.

“We are working to improve security measures to ensure this doesn’t happen again,” Discord representatives assured.

It was previously reported that 50-year-old Angela Lips from Tennessee wrongly spent more than five months in prison after a police AI facial recognition system linked her to crimes in another state (which she had never visited).

Read the country's main IT news in our Telegram
Read the country's main IT news in our Telegram
On the topic
Read the country's main IT news in our Telegram
Friends on Discord will become closer - the platform is testing spatial sound for voice chats
Friends on Discord will become closer - the platform is testing spatial sound for voice chats
On the topic
Friends on Discord will become closer - the platform is testing spatial sound for voice chats
A request in the form of a poem bypasses AI moderation: Icaro Lab research revealed the vulnerability of chatbots
A request in the form of a poem bypasses AI moderation: Icaro Lab research revealed the vulnerability of chatbots
On the topic
A request in the form of a poem bypasses AI moderation: Icaro Lab research revealed the vulnerability of chatbots
YouTube massively removed educational videos, then claimed it was a moderator error
YouTube massively removed educational videos, then claimed it was a moderator error
On the topic
YouTube massively removed educational videos, then claimed it was a moderator error
Also Read
Roosh запускає нову освітню платформу AI HOUSE CLUB для ML/AI-спеціалістів та дата сайнтистів. Розповідаємо, як подати заявку та чому навчатимуть
Roosh запускає нову освітню платформу AI HOUSE CLUB для ML/AI-спеціалістів та дата сайнтистів. Розповідаємо, як подати заявку та чому навчатимуть
Roosh запускає нову освітню платформу AI HOUSE CLUB для ML/AI-спеціалістів та дата сайнтистів. Розповідаємо, як подати заявку та чому навчатимуть
Як нейромережі бачать вільну та незалежну Україну? Тест dev.ua
Як нейромережі бачать вільну та незалежну Україну? Тест dev.ua
Як нейромережі бачать вільну та незалежну Україну? Тест dev.ua
Нейронні мережі для генерації зображень бачать світ по-своєму, їхню логіку зрозуміти часом зовсім неможливо. Але таки хочеться. На честь Дня Незалежності України редакція dev.ua вирішила провести невеликий експеримент. Ми задали чотирьом різним нейронним мережам п’ять однакових запитів: «прапор України», «День Незалежності України», «український Крим», «перемога України» та «українці». Отриманими результатами ми ділимося з вами нижче.
У TikTok тепер можна генерувати фон за допомогою нейромережі. Ми протестували її та ділимося результатами
У TikTok тепер можна генерувати фон за допомогою нейромережі. Ми протестували її та ділимося результатами
У TikTok тепер можна генерувати фон за допомогою нейромережі. Ми протестували її та ділимося результатами
У TikTok з’явилася нова функція «Розумний фон». З її допомогою як фон для тіктоків можна підставляти згенеровані нейромережею зображення. Редакція dev.ua протестувала цю технологію і ділиться своїми враженнями.
1 comment
Які IT-спеціальності будуть потрібні в найближчі п'ять років? Ми з'ясували у голови американського стартапу ADAM Дениса Гурака
Які IT-спеціальності будуть потрібні в найближчі п'ять років? Ми з'ясували у голови американського стартапу ADAM Дениса Гурака
Які IT-спеціальності будуть потрібні в найближчі п'ять років? Ми з'ясували у голови американського стартапу ADAM Дениса Гурака

Have important news to share? Message our Telegram bot

Key events and useful links in our Telegram channel

Discussion
No comments yet.