download recent CC crawls to LUMIO
@nvanva ya está trabajando en esto.
Desde el 8/10/2026.
Evaluación
Este issue todavía no se ha evaluado.
Descripción
Download the latest crawls to LUMIO. Due to insufficient free space on LUMIO for all crawls, we have started with the most recent crawl CC-MAIN-2026-39 and download each 2nd crawl up to CC-MAIN-2025-38. Later will download the remaining crawls.
Put dowloading code here.
- Lenguaje dominante
- Shell
- Estrellas
- 1
- Forks
- 0
- Métricas de merge de PR
- Sin PR fusionados en 30 d
Preparar el entorno
Este proyecto no incluye contenedor de desarrollo, Dockerfile ni guía de contribución, así que la configuración corre por tu cuenta: empieza por su README y consulta nuestra guía para la primera contribución para los pasos generales.
Primeros pasos
- Lee el issue completo y luego la guía de contribución del proyecto.
- Comenta en el issue que vas a ocuparte — evita que dos personas hagan lo mismo.
- Haz un fork del repositorio y trabaja en una rama.
- Abre un pull request que haga referencia al número del issue.
Más de OpenEuroLLM/web-data-processing
-
audio and video extraction from WARCsPosiblemente ocupada @nvanva la tomó hace 8 días. Abierto
OpenEuroLLM/web-data-processing#8 · 1 comentario · 3 asignados ·
-
robots.txtPosiblemente ocupada @nvanva la tomó hace 8 días. Abierto
OpenEuroLLM/web-data-processing#7 · 1 asignado ·
-
S2-S4 updatesPosiblemente ocupada @nvanva la tomó hace 8 días. Abierto
OpenEuroLLM/web-data-processing#6 · 3 comentarios · 2 asignados ·
-
S2-S4 integrationPosiblemente ocupada @nvanva la tomó hace 8 días. Abierto
Dificultad 5/5 Más de una semana Aptitud para principiantes 20/100
OpenEuroLLM/web-data-processing#5 · 1 asignado ·
-
LUMIO manifest generationPosiblemente ocupada @nvanva la tomó hace 14 días. Abierto
OpenEuroLLM/web-data-processing#4 · 1 comentario · 1 asignado ·
Todos los issues de OpenEuroLLM/web-data-processing
Issues similares
-
Python Volcengine provider returns failures instead of raising themPosiblemente ocupada @Ricardo-M-L la tomó hoy. Abierto
Dificultad 2/5 1-3 horas Aptitud para principiantes 79/100
agent-infra/sandbox#248 ·
-
chore priority:low size:S
Dificultad 2/5 1-3 horas Aptitud para principiantes 74/100
celo-org/celopedia-skills#98 ·
Los mantenedores suelen responder en 1 día
-
git windows
Dificultad 2/5 1-3 horas Aptitud para principiantes 78/100
jenkins-infra/packer-images#3179 ·
Los mantenedores suelen responder en 1 día
-
ready-for-pr
Dificultad 2/5 1-3 horas Aptitud para principiantes 72/100
kunchenguid/firstmate#7679 · 1 comentario ·
Los mantenedores suelen responder en 1 día
-
Security: Vulnerable PHP version (CVE-2026-109618 / CVE-2026-109619) in current Docker imagesAbierto
Dificultad 2/5 1-3 horas Aptitud para principiantes 72/100
MISP/misp-docker#478 ·
Los mantenedores suelen responder en 1 día