Велика мовна модель Code Llama, налаштована для завдань кодування, яку днями запустила Meta (Facebook), викликала ажіотаж серед програмістів в мережі.
Іспанський професор та комп’ютерний інженер Альваро Сінтас перевірив його на ChatGPT та поділився висновками.
Альваро використовував ChatGPT з GPT-3.5 і Code Llama Instruct — 34B через Perplexity. Більшу частину часу Perplexity друкував код без відступів та додавав відступи вручну.
Prompt: «Використовуйте Python. Вам надано два рядки word1 і word2. Об’єднайте рядки, додаючи літери в чергуванні, починаючи зі слова1. Якщо рядок довший за інший, додайте додаткові літери в кінці об’єднаного рядка.
Повернути об’єднаний рядок».
Prompt: «Використовуйте Python. Дано рядок s, перевертає лише всі голосні в рядку та повертає його.
Голосні — «а», «е», «і», «о» та «у», і вони можуть з’являтися як у нижньому, так і у верхньому регістрах, більше одного разу».
Prompt: «Використовуйте Python. Дано цілий масив nums, перемістіть усі 0 у його кінець, зберігаючи відносний порядок ненульових елементів.
Зверніть увагу, що ви повинні зробити це на місці, не створюючи копію масиву».
Prompt: «Використовуйте Python. У вас є довга клумба, на якій частина ділянок засаджена, а частина ні. Однак на сусідніх ділянках квіти садити не можна.
Дано клумбу з масивом цілих чисел, що містить 0 і 1, де 0 означає порожню, а 1 означає не порожню, і ціле число n, повертає true, якщо n нових квітів можна висадити на клумбі без порушення правила заборони сусідніх квітів, і false в іншому випадку».
Prompt: «Використовуйте Python. Дано вхідний рядок s, змінити порядок слів на зворотний.
Слово визначається як послідовність символів, які не є пробілами. Слова в s будуть розділені принаймні одним пробілом.
Повертає рядок слів у зворотному порядку, об’єднаних одним пробілом.
Зауважте, що s може містити пробіли на початку або в кінці або кілька пробілів між двома словами. Повернений рядок має містити лише один пробіл між словами. Не додавайте зайвих пробілів».
Prompt: «Використовуйте Python. Дано рядок s і ціле число k, поверніть максимальну кількість голосних букв у будь-якому підрядку s довжиною k.
Голосні літери в англійській мові: «a», «e», «i», «o» і «u».
Prompt: «Використовуйте Python. Вам надано рядок s, який містить зірочки *.
За одну операцію ви можете:
Висновок:
Prompt: «Використовуйте Python. Враховуючи, що масив цілих температур представляє добову температуру, поверніть відповідь масиву так, щоб відповідь[i] була кількістю днів, які вам потрібно чекати після i-го дня, щоб отримати вищу температуру. Якщо немає майбутнього дня, для якого це можливо, замість цього збережіть answer[i] == 0».
З восьми завдань, які програміст поставив обом моделям, ChatGPT впорався з 8 із 8, а CodeLlama з 5 із 8.
Інженер акцентує, що питання були обрані випадковим чином.
