Своя GPT-like LLM по WH40K с нуля. Часть 2: собираем трансформерПривет, Хабр! Меня зовут Владимир, и это вторая часть ци...

Своя GPT-like LLM по WH40K с нуля. Часть 2: собираем трансформерПривет, Хабр! Меня зовут Владимир, и это вторая часть цикла статей по написании и обучению небольшой decoder-only LLM с нуля. В первой части мы вытащили текст, обучили Byte-level BPE токенизатор и собрали pretrain-датасет. Теперь напишем сердце модели - трансформер.https://habr.com/ru/articles/1056226/#llm #gpt #transformers #selfattention #python #pytorch #nlp

Read Original

Related