Open-source

llm.codes — преобразование динамической документации в Markdown

Обзор по документации проекта · Проверено

Изображение из Telegram поста
llm.codes

llm.codes — веб-сервис для преобразования документации, который оптимизирует контент веб-сайтов с интенсивным использованием JavaScript в чистый Markdown. Он предназначен для обработки моделями искусственного интеллекта. Сервис решает проблему неспособности ИИ-агентов эффективно парсить современные динамические документационные ресурсы, делая их содержание доступным для анализа.

Сервис использует Firecrawl или саморазмещенный Playwright для выполнения JavaScript и захвата полностью отрисованного содержимого. llm.codes конвертирует динамический HTML в семантический Markdown, удаляя навигационные элементы, футеры и дублирующийся контент, что позволяет экономить токены контекста ИИ. Проект поддерживает параллельную обработку до 10 URL-адресов одновременно и имеет кэширование на 30 дней на базе Redis.

Для запуска llm.codes требуются Node.js 24+ и pnpm 10+. В качестве поставщика скрапинга по умолчанию используется Firecrawl API, для которого необходим ключ. Альтернативно можно использовать саморазмещенный Playwright. Проект распространяется под лицензией MIT.

https://github.com/amantus-ai/llm-codes | 350 звёзд

#сервисы

Источники и документация