Все репозитории

gpt-neox

Библиотека EleutherAI для обучения больших языковых моделей с нуля на многих GPU: параллелизм ZeRO и 3D, запуск через Slurm и MPI. Автор сам советует брать её только для моделей в миллиарды параметров.

Кому подойдёт

Исследователям, которые предобучают крупные модели на кластерах.

Как начать

  1. Склони репозиторий и поставь зависимости: pip install -r requirements/requirements.txt.
  2. Подготовь конфигурацию модели из папки configs.
  3. Запусти обучение: python3 deepy.py train.py /path/to/configs/my_model.yml.

Шаги взяты из README. Перед запуском сверься с актуальной версией в репозитории.

Звёзды за последние 30 дней

+222 окт. — 19 нояб.
7 4737 475

Описание автора

An implementation of model parallel autoregressive transformers on GPUs, based on the Megatron and DeepSpeed libraries

ollama

ollama

Самый простой способ запустить открытую модель на своём компьютере: одна команда скачивает и запускает её, плюс локальный REST API и библиотеки для Python и JavaScript.

188 тыс.звёзд+3,3 тыс. за 29 дн.Go

huggingface

transformers

Главная библиотека для работы с моделями: единый код для текста, зрения, звука и мультимодальных задач, и для запуска, и для обучения. Через неё выходит большинство новых открытых моделей.

169 тыс.звёзд+1,3 тыс. за 29 дн.Python

open-webui

open-webui

Свой чат-интерфейс в стиле ChatGPT, который подключается к Ollama и любым API, совместимым с OpenAI. Ставится одной командой Docker и работает на твоём сервере.

159 тыс.звёзд+2,5 тыс. за 28 дн.Svelte

ggml-org

llama.cpp

Растёт быстрее всех

Движок на C/C++, который запускает языковые модели на обычном железе: ноутбуках, телефонах, серверах без видеокарты. На нём держится большая часть локального AI, включая Ollama.

136 тыс.звёзд+3,7 тыс. за 29 дн.C++

pytorch

pytorch

Основа большинства современных нейросетей: тензоры с ускорением на GPU и автоматическое дифференцирование, с обычным питоновским кодом внутри. На нём написаны Transformers, Llama и почти все открытые модели.

106 тыс.звёзд+674 за 30 дн.Python

deepseek-ai

DeepSeek-V3

Репозиторий большой открытой модели DeepSeek-V3 со смесью экспертов: описание, результаты тестов и инструкции запуска. Показал, что открытая модель может идти вровень с закрытыми.

105 тыс.звёзд+303 за 29 дн.Python