DocETL
Агентная обработка документов из Berkeley: пайплайны с ИИ-шагами извлекают, преобразуют и разрешают сущности в массивах документов любого объёма.
Агентная обработка документов из Berkeley: пайплайны с ИИ-шагами извлекают, преобразуют и разрешают сущности в массивах документов любого объёма.
Поиск по коду для команд: индексирует репозитории компании и даёт быстрый поиск по всему коду — с ИИ-ответами поверх результатов.
Поиск и переписывание кода по AST-структуре: находите и меняйте паттерны в десятках языков — используется и ИИ-агентами, и людьми.
База знаний по коду для ИИ-агентов: граф зависимостей репозитория с готовыми агентами — ответы на вопросы, изменения кода и тесты.
Среды манипуляторов для обучения роботов: стандартная тестовая площадка исследований — захват объектов, сборка и перестановка с MuJoCo-физикой.
Фреймворк обучения роботов от NVIDIA: RL-политики в GPU-параллельных симуляциях Isaac Sim — от обучения ходить до тонкой моторики манипуляторов.
Сканер безопасности моделей: проверяет файлы моделей на скрытый код и уязвимости десериализации — перед тем как загрузить чекпоинт с Hugging Face.
Открытый ИИ-поисковик в духе Perplexity: ответы с источниками, генеративные интерфейсы на Vercel AI SDK — свой поисковый движок за один деплой.
Самохостинговая wiki для команд: совместное редактирование, диаграммы и вложенные страницы — открытая альтернатива Confluence и Notion для внутренней базы знаний.
Наблюдаемость ИИ-агентов: трейсы каждого шага, стоимость токенов и отладка сбоев — для CrewAI, LangChain, Autogen и собственных агентов.
ИИ-ассистент для почты с открытым кодом: автоматические ответы, разметка рассылок и аналитика почтовых привычек — ради нуля непрочитанных.
Золотой стандарт RAG от Weaviate: загрузите документы — и получите чат с поиском по ним, готовый к работе за минуты с настраиваемыми компонентами.
Чат с вашей документацией: загрузите базу знаний компании — сотрудники задают вопросы на естественном языке и получают ответы со ссылками.
Сервинг LLM от Shanghai AI Lab: тот самый движок Turbomind обслуживает тысячи запросов в секунду на GPU с потоковым выводом.
Лёгкий инструмент дообучения от Shanghai AI Lab: 70B-модель на одной видеокарте за счёт clever offload — конфиги из коробки для сотен моделей.
Фреймворк дообучения сотен моделей от Alibaba: LLM, мультимодальные и аудио-модели — полный цикл от SFT до RLHF с одной командой.
Открытый набор инструментов для датасетов от Allen AI: сам датасет Dolma на триллион токенов и пайплайны его сборки — полностью воспроизводимые.
Обработка терабайтов текстов для обучения LLM: фильтрация, дедупликация и токенизация распределённо — инструмент, стоявший за созданием FineWeb.
Whisper на стероидах: транскрипция часового подкаста за секунды на одном GPU — за счёт батчинга, FlashAttention и оптимизаций transformers.
Быстрая модель распознавания речи: работает в 5 раз быстрее реального времени на обычном CPU — для голосовых интерфейсов и транскрипции на устройстве.