Mazda CX5
Як зробити цифрову копію себе. Ось відео —>

The end of "unlimited" in Copilot forced Ukrainian developers to calculate the real benefit of AI agents: the results are surprising

The decision of big players to cancel unlimited achievements prompted Ukrainian software company DevForth to conduct an analysis of which AI agents are the best in terms of quality and limits. The results of the study were unexpected: some subscriptions provide tens of times more value than they cost, while the market leader has become frankly unprofitable.

2 comments
The end of "unlimited" in Copilot forced Ukrainian developers to calculate the real benefit of AI agents: the results are surprising

The decision of big players to cancel unlimited achievements prompted Ukrainian software company DevForth to conduct an analysis of which AI agents are the best in terms of quality and limits. The results of the study were unexpected: some subscriptions provide tens of times more value than they cost, while the market leader has become frankly unprofitable.

How was analyzed?

In practice, most tariff plans function differently than they seem at first glance, according to the DevForth team.

When providers like OpenAI or Anthropic charge a fixed monthly fee (e.g. $20), on the backend they actually set a consumption limit in percentages for a certain time window. The most interesting thing is the mechanism of how each request increases these percentages.

"Our hypothesis was the most obvious: a certain amount in virtual credits or dollars is set in the backend window (of course, different for different plans). And the actually consumed tokens and their official prices "inflate" the percentage after each request in proportion to the provider's official prices for the API of this model," DevForth founder Ivan Borshchov said on the Reddit platform.

For the analysis, the company took a 7-day time window, where it is very easy to track the exact start and finish times in UTC. The team used one or two models and gradually “inflated” the window limit to an adequate percentage without unnecessary noise — say, to 43%. Then it calculated the net value of tokens in this window, summing up the inputs, outputs, and input cache at the official price of each model. Next, the company applied the usual proportion: if $N worth of tokens were burned for 43%, then this is the maximum amount of code a user can generate or feed neural networks for all 100% of the limit.

"And the most delicious thing is that if you do the experiments carefully (there are certain peculiarities), this proportion works for different people at different percentages and gives a stable value in the end, which we indicate in the table," Borshchov added.

Results

For the DevForth team, it was a real discovery that the tariff plans of different providers offer radically different benefits.

In particular, experts found that a $20 per month Personal Codex Plus subscription provides approximately $130 in monthly limits, while the more expensive $25 per month Business Codex plan limits the user to only the same $25.

At the same time, the Claude Code tool demonstrates equally high limits — the equivalent of $1,200 in tokens on both the Team Standard seat ($25/month) and the personal plan for $20 per month.

On the other hand, the popular Copilot Pro disappointed the team after the June update, because for a subscription cost of $10 per month, it provides a volume of tokens for only about $15, which is why the tool actually lost its economic meaning.

Against this background, the $20 AI Pro plan turned out to be quite balanced, providing approximately $171 worth of tokens on Gemini models and additionally offering a bonus $40 for working with several third-party models.

“Claude still gives the most, but Codex still feels higher quality, and its coding benchmarks are a little better,” concluded the DevForth founder.

You can find more detailed information about the analysis results at the link .

Microsoft updates VS Code: adds chat cost tracking and multi-agent chats
Microsoft updates VS Code: adds chat cost tracking and multi-agent chats
On the topic
Microsoft updates VS Code: adds chat cost tracking and multi-agent chats
Experts predict that by 2028, AI coding costs will exceed developer salaries
Experts predict that by 2028, AI coding costs will exceed developer salaries
On the topic
Experts predict that by 2028, AI coding costs will exceed developer salaries
OpenAI adds analytics and cost control to ChatGPT Enterprise: consumption statistics by product users and AI models appear
OpenAI adds analytics and cost control to ChatGPT Enterprise: consumption statistics by users, products, and AI models appear
On the topic
OpenAI adds analytics and cost control to ChatGPT Enterprise: consumption statistics by users, products, and AI models appear
Read the country's main IT news in our Telegram
Read the country's main IT news in our Telegram
On the topic
Read the country's main IT news in our Telegram
Also Read
Roosh запускає нову освітню платформу AI HOUSE CLUB для ML/AI-спеціалістів та дата сайнтистів. Розповідаємо, як подати заявку та чому навчатимуть
Roosh запускає нову освітню платформу AI HOUSE CLUB для ML/AI-спеціалістів та дата сайнтистів. Розповідаємо, як подати заявку та чому навчатимуть
Roosh запускає нову освітню платформу AI HOUSE CLUB для ML/AI-спеціалістів та дата сайнтистів. Розповідаємо, як подати заявку та чому навчатимуть
Як нейромережі бачать вільну та незалежну Україну? Тест dev.ua
Як нейромережі бачать вільну та незалежну Україну? Тест dev.ua
Як нейромережі бачать вільну та незалежну Україну? Тест dev.ua
Нейронні мережі для генерації зображень бачать світ по-своєму, їхню логіку зрозуміти часом зовсім неможливо. Але таки хочеться. На честь Дня Незалежності України редакція dev.ua вирішила провести невеликий експеримент. Ми задали чотирьом різним нейронним мережам п’ять однакових запитів: «прапор України», «День Незалежності України», «український Крим», «перемога України» та «українці». Отриманими результатами ми ділимося з вами нижче.
У TikTok тепер можна генерувати фон за допомогою нейромережі. Ми протестували її та ділимося результатами
У TikTok тепер можна генерувати фон за допомогою нейромережі. Ми протестували її та ділимося результатами
У TikTok тепер можна генерувати фон за допомогою нейромережі. Ми протестували її та ділимося результатами
У TikTok з’явилася нова функція «Розумний фон». З її допомогою як фон для тіктоків можна підставляти згенеровані нейромережею зображення. Редакція dev.ua протестувала цю технологію і ділиться своїми враженнями.
1 comment
Які IT-спеціальності будуть потрібні в найближчі п'ять років? Ми з'ясували у голови американського стартапу ADAM Дениса Гурака
Які IT-спеціальності будуть потрібні в найближчі п'ять років? Ми з'ясували у голови американського стартапу ADAM Дениса Гурака
Які IT-спеціальності будуть потрібні в найближчі п'ять років? Ми з'ясували у голови американського стартапу ADAM Дениса Гурака

Have important news to share? Message our Telegram bot

Key events and useful links in our Telegram channel

Discussion
0

Нажаль пару місяців назад Cursor прибрав безліміт у режимі авто. І за 20$ ліміт вичерпався дуже швидко. І таке відчуття що токени дійсно стали дорожчати для усіх та й одразу …. Повністю перевести роботу через віртуальних асистентів буде складно це буде оверпрайс. На зараз людина для бізнесу буде вигідніша ніж суцільна його АІ версія.

0

Після відправки коменту я би вам радив передивитись куди редиректить.