Все репозитории

LLMs-from-scratch

Код к книге Себастьяна Рашки: по шагам собираешь GPT-подобную модель на PyTorch, затем предобучаешь и дообучаешь её. Лучший способ понять, как LLM устроена изнутри.

Кому подойдёт

Тем, кто хочет разобраться в устройстве LLM, а не просто вызывать API.

Как начать

  1. Склонируй код: git clone --depth 1 https://github.com/rasbt/LLMs-from-scratch.git
  2. Настрой окружение по инструкции в setup/README.md
  3. Иди по главам из оглавления README и запускай ноутбуки

Шаги взяты из README. Перед запуском сверься с актуальной версией в репозитории.

Звёзды за последние 30 дней

+1 35824 окт. — 17 нояб.
107 172108 530

Описание автора

Implement a ChatGPT-like LLM in PyTorch from scratch, step by step

Shubhamsaboo

awesome-llm-apps

Большая коллекция готовых приложений на LLM: агенты, RAG-системы и навыки для кодинг-агентов. Каждый шаблон можно запустить и разобрать по частям.

145 тыс.звёзд+1,9 тыс. за 28 дн.Python

Бесплатный курс Microsoft из 21 урока: от основ генеративного ИИ и промптов до готовых приложений. К урокам прилагается код.

124 тыс.звёзд+1,7 тыс. за 28 дн.Jupyter Notebook

3b1b

manim

Движок для программных анимаций, на котором Грант Сандерсон делает видео 3Blue1Brown, в том числе знаменитые ролики про нейросети. Это не AI-библиотека, а инструмент, которым наглядно объясняют математику и ML.

97 тыс.звёзд+1 тыс. за 28 дн.Python

Курс по классическому машинному обучению на 12 недель: 26 уроков и 52 теста. Фундамент, без которого сложно понимать современные модели.

92 тыс.звёзд+563 за 28 дн.Jupyter Notebook

mlabonne

llm-course

Дорожная карта по LLM в трёх частях: основы, «учёный» (как строить модели) и «инженер» (как делать приложения). К темам приложены ноутбуки для Colab.

85 тыс.звёзд+489 за 28 дн.

Курс Microsoft из 18 уроков по созданию ИИ-агентов: инструменты, память, планирование, несколько агентов. Примеры кода лежат в папке code_samples.

80 тыс.звёзд+2 тыс. за 27 дн.Jupyter Notebook