Taiga-S1: крихітна модель на 1,2 млн параметрів, що приборкала FreeCAD
Поки корпорації спалюють цілі електростанції заради навчання чергової роздутої LLM, розробник Shiv Shanmugam випустив модель, яка виглядає як справжній інтелект, а не як набір випадкових галюцинацій. Нарешті хтось згадав, що таке оптимізація.
Taiga-S1 не намагається писати вірші чи розважати користувачів, вона суворо націлена на керування 3D-проектуванням у FreeCAD. Маючи всього 1,2 мільйона параметрів, ця крихта обробляє команди приблизно за 1 мілісекунду, доводячи, що інтелект полягає не в кількості витраченого заліза, а в чіткості алгоритмів.
Модель не витрачає ресурси на розпізнавання скриншотів чи машинний зір, а працює як ефективний прошарок для складніших агентів. Вона отримує структурований набір інструкцій і перетворює їх на конкретні дії у FreeCAD: від створення ескізів до вирізання отворів. Робота з числами залишається за межами її відповідальності, оскільки всі параметри надходять разом із завданням, що мінімізує ризик помилок.
Тренування відбувалося на 25 тисячах синтетичних сесій, а фінальне доведення проводилося шляхом ітеративного виправлення помилок «програмним вчителем». Побудована на тришаровому трансформері, модель впоралася зі 100% тестових завдань з 11 елементами, хоча під час навчання ніколи не бачила послідовностей довшими за п'ять кроків.
Цей підхід — дошкульний ляпас сучасним трендам, де успіх вимірюється лише терабайтами даних та кількістю відеокарт. Коли один розробник створює інструмент, що реально економить час інженерам, це виглядає значно цінніше за чергову «революційну» модель, яка просто красиво балакає. Поки одні намагаються продати світу штучне життя, інші спокійно автоматизують інженерну рутину, роблячи речі, які дійсно працюють.
Джерело: GitHub
Коментарі
Допоможи покращити наступну версію: Додавай контекст або пропонуй виправлення. Після AI-перевірки коментарі можуть отримати бали для переписування. Перевірка й оновлення потребують часу; повна шкала не гарантує нової версії.