Сб, 10 Жов
Microsoft вбудувала магнітну зарядку прямо в USB-C нового Surface Laptop Ultra ГаджетиТехнології 09.10.2026 22:31
Кузня талантів CS2: гравці зі Східної Європи посіли майже 60% світового рейтингу HLTV Кіберспорт 09.10.2026 22:28
Черга на рік уперед: нове покоління Audi RS5 розкупили до кінця 2026 року Автомобілі 09.10.2026 22:18
Sony могла заблокувати зламану PS5 — у мережі з’явився перший імовірний випадок ГаджетиСофт 09.10.2026 22:17
Більше не просто чат: OpenAI відкрила безкоштовний доступ до GPT-6 з інтерактивними віджетами просто в діалозі Нейромережі 09.10.2026 22:15
В ARC Raiders можна грати безплатно до 12 жовтня — разом із найбільшим оновленням Frozen Trail Ігри 09.10.2026 22:12
Нік Ф’юрі пропустить «Судний день»: Семюел Л. Джексон підтвердив повернення в «Секретних війнах» Кіно/Серіали 09.10.2026 22:05
Науковці створили татуювання, які можна вмикати та вимикати світлом Наука 09.10.2026 22:03
Екіпаж місії SpaceX Crew-12 повернувся на Землю: 237 днів на МКС та рекорд європейської космонавтики Космос 09.10.2026 21:57
Volvo 240 перетворили на середньомоторного монстра з V10 від Lamborghini — він розганяється до 220 км/год за 200 метрів Автомобілі 09.10.2026 21:36
У Steam з’явилася Left! Left! LEFT! — кооперативне ралі, де один керує, а інший кричить, куди їхати Ігри 09.10.2026 21:33

На Hugging Face виклали «нецензуровану» GLM-5.3 на 753 млрд параметрів – навіть квантовану версію тестували на восьми A100

Max Ivanov · 02.10.2026 20:55 · 3 хвилини читання

На Hugging Face з’явилася неофіційна «нецензурована» версія GLM-5.3 від Z.ai, у якій автори спробували суттєво зменшити кількість відмов на чутливі запити. Модель містить 753 млрд параметрів, а навіть її сильно стиснута версія займає близько 273 ГіБ, тож для звичайного домашнього комп’ютера вона практично недоступна.

Йдеться про GLM-5.3-UNCENSORED-EXL3-3.0bpw, яку створив користувач Infatoshi. Це сторонній проєкт, не пов’язаний із Z.ai.

Основою стала офіційна GLM-5.3 – Mixture-of-Experts-модель із 753 млрд параметрів, 256 маршрутизованими експертами та вісьмома активними експертами на токен. Z.ai орієнтує її насамперед на програмування, тривалі агентні задачі та кібербезпеку.

Обмеження змінювали прямо у вагах моделі

«Uncensored»-версія з’явилася без традиційного додаткового навчання.

Спочатку автор іншого проєкту, dealignai, відредагував FP8-ваги GLM-5.3, щоб змінити поведінку моделі та зменшити ймовірність відмов. Потім Infatoshi додатково квантував цю версію у формат EXL3 приблизно до 3,04 біта на вагу.

Тож слово «uncensored» тут варто сприймати як назву та заявлену мету модифікації, а не як гарантію повної відсутності обмежень. Поведінка моделі після редагування ваг і агресивного квантування може відрізнятися від вихідної GLM-5.3.

Сам автор провів невелике порівняння з оригінальною FP8-версією. На двох агентних тестах квантована модель показала дещо нижчі результати, однак за використаного розміру вибірки різниця не досягла статистичної значущості.

273 ГіБ – і це вже сильно стиснута версія

Головна проблема для локального запуску – розміри.

EXL3-квантування займає близько 273 ГіБ. Автор тестував його через TabbyAPI на системі з вісьмома NVIDIA A100 по 40 ГБ, тобто із сумарними 320 ГБ відеопам’яті.

Це добре показує масштаб моделі: навіть після зниження точності приблизно до трьох бітів вона залишається далеко за межами можливостей звичайної ігрової відеокарти та більшості робочих станцій.

Повноцінна FP8-версія потребує ще значно більше пам’яті. Теоретично частину моделі можна вивантажувати в оперативну пам’ять або використовувати інші схеми розподіленого запуску, але це серйозно ускладнює конфігурацію і зазвичай знижує швидкість генерації.

Водночас ваги можна завантажити безкоштовно. Репозиторій конкретної EXL3-модифікації позначено ліцензією MIT, однак безкоштовні ваги не означають безкоштовної експлуатації – для комфортного запуску знадобиться дороге серверне обладнання або оренда кількох GPU.

На момент публікації ця версія також не під’єднана до жодного вбудованого inference-провайдера Hugging Face, тож запустити її безпосередньо зі сторінки моделі однією кнопкою не можна.

Вийшла досить показова ілюстрація сучасного open-weight ШІ: модель справді можна завантажити й розгорнути самостійно, але її 753 млрд параметрів перетворюють «локальний запуск» радше на задачу для GPU-сервера, ніж для домашнього ПК.

Подобається ВсеЗависло?

Додайте нас до улюблених джерел Google, щоб частіше бачити наші новини.

Додай нас у свій Google

Поділитися

Залишити коментар