DeepSeek відкриває TileKernels з відкритим кодом: бібліотека GPU-ядр для тренування й інференсу великих моделей

Повідомлення Gate News, 23 квітня — DeepSeek відкрив вихідний код TileKernels під ліцензією MIT: бібліотека GPU-ядр для обчислень, написана на TileLang для тренування та інференсу великих мовних моделей. TileLang — це предметно-орієнтована мова, розроблена командою tile-ai для вираження високопродуктивних GPU-ядр у Python. DeepSeek зазначив, що більшість ядер у цій бібліотеці вже наблизилися до граничних можливостей апаратного забезпечення за обчислювальною щільністю та пропускною здатністю пам’яті, причому частини коду вже розгорнуті у внутрішніх операціях тренування та інференсу.

Бібліотека містить шість категорій ядер: MoE (mixture of experts) gating і маршрутизація, включно з вибором експертів Top-k, відображенням токен—експерт і злитими операціями expand/shrink із нормалізацією ваг; квантування, що підтримує формати FP8, FP4 і E5M6 із квантуванням для кожного токена, для кожного блока та для кожного каналу, включно зі злитими операціями SwiGLU+квантування; batch transpose; Engram gating із злитим поширенням уперед/назад RMSNorm і зведенням градієнта ваг; Manifold HyperConnection із нормалізацією Sinkhorn і змішаним split/apply; а також високорівневі інтерфейси autograd, які обгортають низькорівневі ядра в навчальні шари.

Engram і Manifold HyperConnection є власницькими компонентами модельної архітектури DeepSeek, причому деталі реалізації вперше були розкриті публічно. Бібліотека вимагає GPU архітектури NVIDIA SM90 або SM100 (H100/H200 або серії Blackwell), CUDA Toolkit 13.1 або новішу версію, і PyTorch 2.10 або новішу версію.

Застереження: Інформація на цій сторінці може походити від третіх осіб і не відображає погляди або думки Gate. Вміст, що відображається на цій сторінці, є лише довідковим і не є фінансовою, інвестиційною або юридичною порадою. Gate не гарантує точність або повноту інформації і не несе відповідальності за будь-які збитки, що виникли в результаті використання цієї інформації. Інвестиції у віртуальні активи пов'язані з високим ризиком і піддаються значній ціновій волатильності. Ви можете втратити весь вкладений капітал. Будь ласка, повністю усвідомлюйте відповідні ризики та приймайте обережні рішення, виходячи з вашого фінансового становища та толерантності до ризику. Для отримання детальної інформації, будь ласка, зверніться до Застереження.

Пов'язані статті

Plasma Дражнить Запуск Продукту, Пов’язаного зі Стейблкоїнами, у Червні 2026

Повідомлення Gate News, 23 квітня — Plasma оголосила про плани запустити новий продукт, пов’язаний зі стейблкоїнами, у червні 2026 року, заявивши: «твій стейблкоїн нарешті має дім, червень 2026». Згідно з рекламними матеріалами, продукт матиме платіжну картку зі стейблкоїнами, функціональність для споживчих витрат і кешбек-нагороди.

GateNews39хв. тому

Bonanza Factory завершує PoC для інтеграції VND біржі цифрових активів MB Bank у В’єтнамі

Повідомлення Gate News, 23 квітня — Bonanza Factory, постачальник рішень з комплаєнсу з Південної Кореї, завершила proof-of-concept (PoC) із В’єтнамським військовим комерційним акціонерним банком (MB Bank) для інтеграції депозитів і зняття коштів у VND між банком і біржами цифрових активів, і зараз

GateNews49хв. тому

WBTC завершить оновлення конфігурації крос-ланцюгової DVN до 26 квітня

Повідомлення Gate News, 23 квітня — WBTC оголосила, що здійснює оновлення своєї крос-ланцюгової конфігурації DVN (Decentralized Verification Network) у відповідь на нещодавній інцидент rsETH. Проєкт зазначив, що коригування є запобіжним заходом, призначеним для посилення стандартів безпеки для крос-ланцюгової

GateNews49хв. тому

Bunq перевищує €100 мільйонів у криптовалютних торгах та запускає функцію фондових кошиків

Повідомлення Gate News, 23 квітня — Bunq, європейський необанк, перевищив €100 мільйонів обсягу криптовалютних торгів протягом першого року після запуску своєї пропозиції цифрових активів у квітні 2025 року, за приблизно 500 000 угод. Платформа зафіксувала зростання загальних реєстрацій на 41% у 2026 році, що відображає

GateNews58хв. тому

GoPlus AgentGuard запускає режим Checkup, щоб посилити безпеку Web3 для AI-агентів

Повідомлення Gate News, 23 квітня — компонент безпеки GoPlus AI AgentGuard офіційно випустив свою функцію Checkup, призначену для усунення прогалин безпеки в автономному ухваленні рішень і контролі активів AI-агентів, підвищуючи безпеку AI-агентів із "фрагментарного перехоплення" до "систематичного

GateNews1год тому

Avici запускає продукти Grow і Smart Credit для генерації дохідності на Solana

Повідомлення Gate News, 23 квітня — Самокерована крипто-необанківська платформа Avici запустила два нові продукти, Grow і Smart Credit, у партнерстві з Jupiter Lend та Fluid. Avici Grow дозволяє користувачам вносити активи та отримувати дохідність без періоду блокування, уможливлюючи зняття в будь-який час. Smart Credit

GateNews2год тому
Прокоментувати
0/400
Немає коментарів