Рубріки: Новини

Microsoft відкрили код BitNet b1.58. Це дозволить запускати великі мовні моделі на звичайних процесорах

Андрій Губін

Microsoft оприлюднила код BitNet b1.58 — однієї з найбільш значущих розробок 2024 року. Про це повідомили DOU.ua.

Нова технологія дозволяє запускати великі мовні моделі (до 100 мільярдів параметрів) на локальних пристроях, зокрема на одному CPU, зі швидкістю 5-7 токенів в секунду.

BitNet b1.58 пропонує швидкість у 1.37-6.17 разів вищу на ARM і x86 процесорах та знижує енергоспоживання на 55-70%. Модель використовує тернарне кодування параметрів, забезпечуючи високу ефективність та продуктивність.

Це означає, що тепер можливий запуск великих мовних моделей (до 100B параметрів) на локальних пристроях без дорогих обчислювальних ресурсів. Це робить ШІ доступнішим для стартапів та індивідуальних розробників.

Значне зниження енергоспоживання та збільшення швидкості обробки також відкриває нові можливості для використання ШІ в мобільних пристроях і вбудованих системах. Крім того, нова архітектура стимулює розробку оптимізованого апаратного забезпечення для 1-бітних LLM.

Останні статті

Найкращий квартал року: експорт ІТ-послуг з України демонструє зростання

За підсумками вересня 2025 року обсяг IT-експорту з України становив $557 мільйонів, що на $17…

31.10.2025

Android-смартфони краще захищені від шахраїв, ніж iPhone — дослідження

Спільне дослідження компаній Google і YouGov доводить, що через гаджети на базі Android рідше трапляються…

31.10.2025

FAVBET Tech увійшов у топ-5 платників податків серед резидентів «Дія.City»

Українська ІТ-компанія FAVBET Tech увійшла до топ-5 найбільших платників податків серед резидентів «Дія.City» за підсумками…

31.10.2025

Розробники TikTok зекономили компанії $300 000 на рік: просто переписали код Go API на Rust

Розробники TikTok переписали критично важливі Go API на Rust, що призвело до подвійного збільшення продуктивності…

31.10.2025

OpenAI випустила інструмент Aardvark для пошуку вразливостей в коді

OpenAI представила Aardvark — новий агент штучного інтелекту на базі GPT-5, який допомагає розробникам шукати…

31.10.2025

Новий фреймворк Google ADK дозволяє створювати агентів на Python і Java

Компанія Google оновила фреймворк ADK (Agent Development Kit). Вперше представлений у квітні цього року, ADK…

31.10.2025