Все репозитории

RAG и векторные БДmicrosoft

graphrag

Модульная система от Microsoft: строит из текстов граф сущностей и сводки по сообществам, чтобы отвечать на вопросы по всему корпусу, а не по одному фрагменту.

Кому подойдёт

Аналитикам и разработчикам, которым нужны ответы по большому массиву текстов целиком.

Как начать

  1. Открой командный quickstart в документации на microsoft.github.io/graphrag.
  2. Прочитай раздел Prompt Tuning, чтобы подстроить промпты под свои данные.
  3. Прочитай Responsible AI FAQ из README перед запуском на реальных данных.

Шаги взяты из README. Перед запуском сверься с актуальной версией в репозитории.

Звёзды за последние 30 дней

+4246 сент. — 5 окт.
35 80136 225

Описание автора

A modular graph-based Retrieval-Augmented Generation (RAG) system

microsoft

markitdown

Растёт быстрее всех

Небольшая утилита от Microsoft: превращает PDF, Word, PowerPoint, Excel и другие файлы в Markdown, который удобно отдавать языковой модели.

189 тыс.звёзд+11 тыс. за 30 дн.Python

firecrawl

firecrawl

Растёт быстрее всех

Сервис, который превращает любой сайт в чистый Markdown или структурированные данные для моделей. Умеет искать, скрейпить, обходить сайт целиком и даже кликать по странице.

189 тыс.звёзд+12 тыс. за 30 дн.TypeScript

infiniflow

ragflow

Готовый RAG-движок с интерфейсом: разбирает документы по шаблонам, режет на фрагменты, ищет с цитатами и умеет агентный поиск. Разворачивается через Docker.

92 тыс.звёзд+1,8 тыс. за 30 дн.Go

unclecode

crawl4ai

Открытый краулер на Python: заходит на страницы настоящим браузером и отдаёт чистый Markdown для LLM. Работает локально, в Docker или как облачный сервис.

85 тыс.звёзд+3,2 тыс. за 30 дн.Python

opendatalab

MinerU

Разбирает сложные PDF, сканы и офисные файлы в Markdown или JSON, сохраняя таблицы и формулы. Есть CLI, Python SDK и навык для агентов.

81 тыс.звёзд+2 тыс. за 30 дн.Python

docling-project

docling

Библиотека от IBM для разбора документов: PDF, Office, HTML и картинки превращаются в единую структуру, из которой легко получить Markdown. Поддерживает визуальные модели для сложных страниц.

68 тыс.звёзд+2,5 тыс. за 30 дн.Python