ARENA PULSE Все новости

Своя GPT-like LLM по WH40K с нуля. Часть 3: pre-train LLM

Релизы openai

Владимир продолжает цикл статей о создании decoder-only LLM с нуля, фокусируясь на сборе и предобучении модели.

Это третья часть цикла статей по написанию и обучению небольшой decoder-only LLM с нуля. В предыдущих частях автор обучил токенизатор, собрал pretrain-датасет и реализовал класс Трансформер-блока.

В данной части Владимир будет собирать и предобучать разработанную LLM. Статья является продолжением цикла, посвященного созданию модели для вселенной Warhammer 40k.

Источник: habr.com

Открыть в ArenaPulse