Firecrawl - Tüm web sitesini LLM'lerde kullanılabilir hale getiren araç
(github.com/mendableai)- Web sitesini tarayarak LLM'lerde kullanılabilir Markdown veya yapılandırılmış veriye dönüştürür
- URL'yi API ile gönderdiğinizde, tüm alt sayfaları tarar ve her alt sayfa için temiz veri sağlar
- Python, Node, Go, Rust SDK'ları sunar
- LangChain, Llama Index, Dify, Langflow, Zapier ve daha fazlasıyla entegrasyon desteği sağlar
2 yorum
Alt taramayı desteklemiyor, ancak benzer amaçlı bir belge formatı dönüştürücüsünü tanıtayım.
https://github.com/DS4SD/docling
İstediğim gibi pek çalışmıyor.