crawl4ai unclecode
🚀🤖 Crawl4AI: Open-source LLM Friendly Web Crawler & Scraper. Don't be shy, join here: https://discord.gg/jP8KfhDhyN
- Hauptsprache
- Python
- Stars
- 80,081
- Forks
- 8,301
Tags
- Bibliothek/SDK
- 爬虫
- RAG
- CLI-Werkzeug
- Datenpipeline
- Browser-Automation
- 后端
Zusammenfassung
Crawl4AI ist ein quelloffener, LLM-freundlicher Webcrawler und Scraper, der Webseiten in sauberes, strukturiertes Markdown konvertiert – ideal für RAG-Pipelines, KI-Agenten und Data-Pipelines. Er bietet asynchrones Browser-Pooling, Deep-Crawl-Strategien, LLM-Extraktion, Sessions/Proxies/Hooks sowie…
README
# 🚀🤖 Crawl4AI: Open-Source, LLM-freundlicher Web-Crawler & Scraper. <div align="center"> <a href="https://trendshift.io/repositories/11716" target="_blank"><img src="https://trendshift.io/api/badge/repositories/11716" alt="unclecode%2Fcrawl4ai | Trendshift" style="width: 250px; height: 55px;" wid…