Make Europeana fetch viable
Personne n'a encore pris cette issue.
Évaluation
- Difficulté
- 4/5
- Temps estimé
- 3-5 jours
- Accessibilité débutants
- 42/100
- Type d'issue
- Fonctionnalité
- Clarté
- Plutôt claire
- Activité
- À l'abandon
- Stack technique
- python
- Domaine
- data-engineering
Piste de recherche
Commencez par la section Europeana liée depuis sources.md et suivez le point d’entrée existant de récupération de Europeana ainsi que le flux de comptage des requêtes. Définissez comment les comptages limités aux droits et un plan trimestriel de premier lancement doivent couvrir 30 exécutions sur 30 jours, puis vérifiez que la planification obtenue évite de récupérer l’ensemble du jeu de données en une seule fois.
Rédigé par le modèle d'indexation à partir du texte de l'issue.
Description
Problem
The Europeana data set is too big to fetch all at once, or in its entirety.
- data providers: 4206
- rights: 64
Assuming approximately 1 second per query, the expected duration is approximately 75 hours.
Description
- Add counts for rights only (not including data providers)
- Write a query plan on first run per quarter to map out which queries to make over 30 runs (30 days)
Alternatives
Parallel queries (probably considered impolite, Timid Robot will ask)
Additional context
Implementation
- I would be interested in implementing this feature.
- Langage dominant
- Python
- Étoiles
- 52
- Forks
- 75
- Merge moyen
- 1 j 14 h
- PR mergées (30 j)
- 3
Préparer son environnement
- Aucun Dockerfile ni fichier Docker Compose
- Aucun modèle de pull request
- Lire le guide de contribution
Par où commencer
- Lisez l'issue en entier, puis le guide de contribution du projet.
- Signalez en commentaire que vous la prenez — cela évite que deux personnes fassent le même travail.
- Forkez le dépôt et travaillez sur une branche.
- Ouvrez une pull request qui référence le numéro de l'issue.
Autres issues de creativecommons/quantifying
-
Link latest report from repository READMEPeut-être pris @Priyankm23 l’a pris il y a 33 jours. Ouverte✨ goal: improvement 🏁 status: ready for work 💻 aspect: code 📖 aspect: docs good first issue help wanted 🟨 priority: medium
Difficulté 2/5 1-3 heures Accessibilité débutants 78/100
creativecommons/quantifying#311 · 3 commentaires ·
-
GCS free full web search ending 2026-12-31Peut-être à nouveau libre @TimidRobot l’a pris il y a 190 jours, et aucune pull request n’est ouverte. Ouverte🏁 status: ready for work 💻 aspect: code 🔒 staff only 🛠 goal: fix 🟧 priority: high
creativecommons/quantifying#293 · 3 commentaires · 1 personne assignée ·
-
Consolidate completion checkPeut-être pris @iamshravanijadhav l’a pris il y a 35 jours. Ouverte✨ goal: improvement 🏁 status: ready for work 💻 aspect: code help wanted 🟩 priority: low
Difficulté 4/5 3-5 jours Accessibilité débutants 38/100
creativecommons/quantifying#288 · 1 commentaire ·
-
Add a stacked horizontal bar plotPeut-être à nouveau libre @oree-xx l’a pris il y a 287 jours, et aucune pull request n’est ouverte. Ouverte✨ goal: improvement 💻 aspect: code 🚦 status: awaiting triage 🟩 priority: low
creativecommons/quantifying#274 · 1 personne assignée ·
-
Add Zenodo as Data Source for Commons QuantificationPeut-être à nouveau libre Une pull request pour cette issue a été fermée sans être fusionnée. Ouverte✨ goal: improvement 🏁 status: ready for work 💻 aspect: code help wanted 🟩 priority: low
Difficulté 5/5 Plus d'une semaine Accessibilité débutants 35/100
creativecommons/quantifying#249 ·
Toutes les issues de creativecommons/quantifying
Issues similaires
-
Difficulté 2/5 1-3 heures Accessibilité débutants 67/100
FinanceFlash/unvibecode#699 ·
Les mainteneurs répondent en général sous 1 jour
-
enhancement Website
Difficulté 2/5 1-3 heures Accessibilité débutants 78/100
OWASP/OWASP-Hunting#96 ·
Les mainteneurs répondent en général sous 1 jour
-
Difficulté 2/5 1-3 heures Accessibilité débutants 78/100
micropython/micropython#19942 ·
Les mainteneurs répondent en général sous 1 jour
-
A rebuild posts "not part of this build" success to the commit's failed `nix-build` gate and effectsPeut-être pris @Padraic-O-Mhuiris l’a pris aujourd’hui. Ouverte
Difficulté 2/5 1-3 heures Accessibilité débutants 78/100
Les mainteneurs répondent en général sous 1 jour
-
`epoch.Integer` raises a raw OverflowError for integers too large to convert to a floatPeut-être pris @arindam77 l’a pris aujourd’hui. Ouverte
Difficulté 2/5 1-3 heures Accessibilité débutants 78/100
pydantic/pydantic-extra-types#479 ·
Les mainteneurs répondent en général sous 1 jour