«Приховане виконання коду»: Google прокачав чат-боту Bard логіку та математику

Компанія Google надала своєму чат-боту Bard техніку «прихованого виконання коду»,  удосконаливши вирішення математичних і логічних задач.

Про це йдеться в офіційному блозі Google.

Завдяки цій техніці він став краще розбиратися в математиці та написанню кода.

Як пояснюється в блозі, великі мовні моделі (LLM), такі як Bard, є «двигунами передбачення». Коли їм дається підказка, вони генерують відповідь, передбачаючи слова, які будуть наступними в реченні.

Це може допомогти їм при написанні електронних листів та есе, але виявиться марним для написання програмного коду.

Прагнучи усунути ці недоліки у великих мовних моделях, Google розробив техніку прихованого виконання коду, яка дозволяє чат-боту писати і виконувати свій власний код.

Нова версія Bard визначає підказки, які можуть бути корисними, і пише код «під капотом», тестує його і використовує результат для генерації більш точної відповіді.

За даними внутрішнього тестування, відповіді нового Bard у словесних та математичних завданнях були покращені на 30% і порівнянні з попередньою версією чат-боту.

Тим не менш, розробники відзначили, що навіть з цими покращеннями Bard не завжди працюватиме правильно.

«Наприклад, Bard може не згенерувати код або згенерувати його, але неправильно, і навіть може не включити виконаний код у свою відповідь», — заявила Google.

Нагадаємо, до цього компанія Google додала в чат-бот Bard можливість генерувати та налагоджувати вихідний код 20 мовами програмування, серед яких є C++, Java Javascript, Python і Typescript.