Создайте большую языковую модель с нуля (Sebastian Raschka)

Вы узнаете, как работают LLM изнутри. В этой книге я шаг за шагом проведу вас через создание собственной LLM, объясняя каждый этап понятным текстом, диаграммами и примерами.
Описанный в этой книге метод обучения и разработки собственной небольшой, но функциональной модели для образовательных целей отражает подход, используемый при создании крупномасштабных базовых моделей, таких как те, что лежат в основе ChatGPT. Во всех примерах программирования в книге используются Python и PyTorch.