Старшокласник створив сайт для оцінювання ШІ-моделей за допомогою Minecraft
Старшокласник, на ім’я Аді Сінгха створив сайт Minecraft Benchmark (або MC-Bench), який унікально використовує гру-пісочницю Minecraft для оцінювання різних ШІ-моделей.
Старшокласник, на ім’я Аді Сінгха створив сайт Minecraft Benchmark (або MC-Bench), який унікально використовує гру-пісочницю Minecraft для оцінювання різних ШІ-моделей.
MC-Bench пропонує інтуїтивно зрозумілий і цікавий спосіб оцінювання моделей штучного інтелекту. Розробники вводять різні підказки в ШІ-моделі, а ті генерують відповідні структури Minecraft. Користувачі голосують за найкращий результат, не знаючи, яка саме модель ШІ створила збірку. Тільки після голосування користувачі бачать ШІ-творця. Такий механізм «сліпого вибору» спрямований на більш об'єктивне відображення реальних можливостей ШІ-моделей.
Аді Сінгх каже, що вибір Minecraft був зумовлений не лише його популярністю, а тим, що візуальний стиль гри дозволяють навіть не гравцям легко визначити, який об'єкт на основі блоків виглядає більш реалістично. Він вважає, що Minecraft робить «прогрес у розробці ШІ більш помітним», пропонуючи більш переконливу візуальну оцінку, ніж суто текстові показники, пише TechCrunch.
Ініціатором створення MC-Bench був Аді Сінгх, а його команда складається з волонтерів. Провідні компанії в галузі штучного інтелекту, зокрема Anthropic, Google, OpenAI та Alibaba, надають субсидоване використання своїх продуктів для проведення тестів, хоча на сайті уточнюється, що ці компанії не беруть участі в інших проєктах.
Сінгх припускає, що ігри можуть стати безпечним і контрольованим середовищем для тестування можливостей «агентного мислення» ШІ, перевершуючи обмеження тестування в реальному світі.
21-річний студент створив ШІ-застосунок, що допомагає кандидатам-програмістам обманювати роботодавців на співбесідах. Interview Coder вже скористалися тисячі айтівців. Техногіганти розчаровані й готові повертати очні job interview в офісах
21-річний студент створив ШІ-застосунок, що допомагає кандидатам-програмістам обманювати роботодавців на співбесідах. Interview Coder вже скористалися тисячі айтівців. Техногіганти розчаровані й готові повертати очні job interview в офісах
Американський школяр став першою людиною, що виграла в Tetris. Раніше це міг зробити тільки штучний інтелект
Американський школяр став першою людиною, що виграла в Tetris. Раніше це міг зробити тільки штучний інтелект
Читайте головні IT-новини країни в нашому Telegram
Читайте головні IT-новини країни в нашому Telegram
