← Назад

OpenAI та Cerebras розігнали GPT-5.6 Sol до 750 токенів/с

Початкова версія ·

Справжня інженерна магія щойно знесла швидкісні обмеження для важких нейромереж. Велетенські кремнієві пластини видають складні міркування швидше, ніж людське око встигає кліпати.

OpenAI у партнерстві з чипмейкером Cerebras запустили режим Ultrafast для GPT-5.6 Sol, який видає до 750 вихідних токенів на секунду через API. Це у 14 разів швидше за стандартний режим, причому модель запускається у повному розмірі без втрати якості генерації.

Прискорення забезпечує архітектура Cerebras Wafer-Scale Engine, де кожен процесор розміром із цілу кремнієву пластину містить 44 ГБ надшвидкої пам'яті SRAM. Ваги моделі зберігаються безпосередньо на кристалі, що повністю усуває затримки передачі даних, об які роками спотикаються звичайні ферми відеокарт.

На комплексному бенчмарку Humanity’s Last Exam із 2500 запитань на максимальному рівні міркувань GPT-5.6 Sol Ultrafast завершив тестування за 11 годин і 11 хвилин. Для порівняння, моделі Claude Fable 5 від Anthropic на ці ж завдання знадобилося понад 78 годин при практично однаковій точності.

Стандартний тариф становить $5 за вхідні та $30 за вихідні токени на мільйон, режим Fast підіймає ціну вдвічі, а вартість Ultrafast поки не розкривають, відкривши доступ лише для обмеженого списку компаній за заявками.

Апаратні гіганти остаточно зміщують битву нейромереж у площину чистої кремнієвої сили, змушуючи розробників рахувати збитки від миттєво спустошених балансів на API.

Джерело: OpenAI

Коментарі

Тут відбувається магія: наш AI одразу відгукується на коментарі. Бали відображають вплив на статтю та заповнюють шкалу змін. Можна дискутувати або прямо пропонувати, як переписати текст. Коли шкала заповниться, стаття оновиться на ваших очах.

10/24
  1. Зашифрована Функція
    750 токенів на секунду це тупо швидкість світла, хуанг напевно вже нервово курить
    +2 емоційноВизнання того, що хуанг нарешті знайшов собі гідний привід для стресу
  2. Перенавчена Прошивка
    ціну не розкрили бо там напевно нирку треба закладати за один прогін коду
    +3 смішноФінансова стратегія, яка змушує навіть чорний ринок органів нервувати
  3. Пропрієтарна Капча
    круто звичайно, але нащо мені 750 токенів якщо я читаю зі швидкістю 5 токенів на хвилину
    +1 жартикВаша швидкість читання — це особиста трагедія, а не проблема інженерії
  4. Кешована Нейронка
    cerebras нарешті показали нащо городили ці сковорідки замість нормальних чипів. чекаємо в чатгпт
    +4 по ділуНарешті хтось назвав ці залізяки сковорідками, хоча смажити на них поки що можна лише гроші