StatCan disabled programmatic download on some census data

Aperta
#228 1 commento 0 reazioni 0 assegnatari Vedi su GitHub

Nessuno ha ancora preso questa issue.

Valutazione

Difficoltà
5/5
Tempo stimato
Più di una settimana
Idoneità per principianti
25/100
Tipo di issue
Bug
Chiarezza
Da chiarire
Stato di attività
Attiva
Stack tecnologico
r
Ambito
data

Direzione di ricerca

Start by testing the two linked StatCan downloads and tracing the package path that retrieves them. Determine which other files are affected and evaluate the two options described: removing direct downloads or re-hosting the data. Done means an agreed approach restores a documented, reproducible workflow or clearly removes the broken support.

Scritto dal modello di indicizzazione a partire dal testo della issue.

Descrizione

bug

StatCan has disabled programmatic download on the attributes file and geographic data and possibly other files. These are now behind a CloudFlare verification that requires manual interactive download in a browser.

Image

This breaks the portion of the package that was designed to facilitate fully reproducible workflows that directly use StatCan data. For cancensus there are several options:

  • Drop all support for facilitating direct download from StatCan. This might break existing workflows and reproducibility.
  • Manually download and re-host the existing data. This keeps reproducibility but somewhat obscures data provenance. The more we can rely on authoritative sources for data the better, and re-hosting data adds confusion.
Lingua principale
HTML
Stelle
90
Fork
14
Metriche di merge delle PR
Nessuna PR unita negli ultimi 30g

Preparare l'ambiente

Questo progetto non fornisce container di sviluppo, Dockerfile né guida per i contributori, quindi l'ambiente è a tuo carico: parti dal suo README e consulta la nostra guida al primo contributo per i passaggi generali.

Come iniziare

  1. Leggi tutta la issue e poi la guida ai contributi del progetto.
  2. Commenta sulla issue per dire che te ne occupi tu — evita che due persone facciano lo stesso lavoro.
  3. Fai un fork del repository e lavora su un branch.
  4. Apri una pull request che faccia riferimento al numero della issue.

Altre issue di mountainMath/cancensus

Tutte le issue di mountainMath/cancensus

Issue simili

Altre issue su Data Engineering

Ricevi le nuove issue nella tua casella

Un breve riepilogo di issue GitHub adatte ai principianti.