Post Thumbnail

Умножение матриц - одна из самых важных штук в современных вычислениях. Без него никуда в ИИ: на нём работают полносвязные слои нейросетей. В трансформерах вообще львиная доля вычислений - это сплошные перемножения матриц. А раз мощность моделей упирается в вычислительные ресурсы, то чем быстрее алгоритмы - тем круче модели можно строить.

Учимся умножать матрицы

Похожее

Post Thumbnail

Домашний HAL

Автор считает, что пора собирать себе домашнего HAL’а на новых локальных моделях...