AI Hub Icon
AIBit Descubrir proyectos de código abierto

Categorías

Publicaciones etiquetadas con: LLM Data

Content related to LLM Data

Proyectos Prácticos de Código Abierto

Firecrawl: Convierte sitios web en datos listos para LLM

June 28, 2025
Etiquetas:
Open Source AI Development Data Extraction LLM Data Web Scraping

Descubre Firecrawl, la potente solución de rastreo y extracción de datos web de código abierto, diseñada específicamente para aplicaciones de IA. Transforma datos web brutos en formatos limpios y listos para LLM, integrándose sin problemas con herramientas de IA populares como LlamaIndex y Langchain. Aprende cómo Firecrawl maneja el contenido dinámico, proporciona una extracción de datos fiable y soporta diversos casos de uso, desde chats de IA hasta investigación profunda, convirtiéndolo en una herramienta esencial para desarrolladores que construyen soluciones impulsadas por IA. Empieza gratis y escala a medida que tus necesidades crezcan.

Leer más Original
Proyectos Prácticos de Código Abierto

WaterCrawl: Transforma el contenido web en datos listos para LLM

June 22, 2025
Etiquetas:
Open Source Web Crawling Data Extraction LLM Data Python Project

Descubre WaterCrawl, una potente aplicación web de código abierto diseñada para rastrear páginas web y extraer datos relevantes, dejándolos listos para su integración con Grandes Modelos de Lenguaje (LLM). Desarrollada con Python, Django, Scrapy y Celery, WaterCrawl ofrece rastreo web avanzado, soporte multilingüe y procesamiento asíncrono. Proporciona acceso completo a su API, SDKs para clientes (Python, Node.js, Go, PHP) e integraciones con plataformas como Dify y N8N. Tanto si eres un desarrollador que busca construir pipelines de datos para IA como una organización que necesita herramientas robustas de web scraping, WaterCrawl ofrece una solución autohospedada y personalizable. Aprende a empezar rápidamente con Docker o contribuye a su desarrollo continuo.

Leer más Original