Reformulate as TreeOfLife-toolbox

Aperta
#20 0 commenti 1 reazione 0 assegnatari Vedi su GitHub

Nessuno ha ancora preso questa issue.

Valutazione

Difficoltà
5/5
Tempo stimato
Più di una settimana
Idoneità per principianti
20/100
Tipo di issue
Funzionalità
Chiarezza
Da chiarire
Stato di attività
Ferma
Stack tecnologico
jupyter-notebook

Direzione di ricerca

Inizia esaminando le PR #1 fino alla #15, poiché l’issue indica che questo lavoro segue il loro merge. Poi ispeziona la struttura esistente di src/TOL-toolbox e la directory di elaborazione TreeOfLife-dev indicata, prima di distribuire il lavoro in src/TOL-toolbox, scripts/, notebooks/ e data/. Il lavoro è considerato completato quando sono terminati la riorganizzazione non selezionata, le aggiunte e la cartella embedding nella checklist.

Scritto dal modello di indicizzazione a partire dal testo della issue.

Descrizione

design documentation structure

Specifically presented as taking the output of distributed-downloader and then does all these things to create the TreeOfLife dataset.

  • Rename repo: TreeOfLife-toolbox
  • Rename under src: TOL-toolbox
  • Reorganize under TOL-toolbox to have submodules based on function (e.g., filtering, data-transfer) with sub-submodules (e.g., research-filtering)
  • Add from TreeOfLife-dev as submodules in src/TOL-toolbox:
    • webdataset creation
    • metadata transfer
    • lookup table creator
  • Add from TreeOfLife-dev at root-level scripts/ directory all lookup table exclude creators (many of these are here):
    • PDQ hash process
    • Image type separator (museum, camera trap, and citizen science categories)
    • Museum Specimen processing: label vs specimen filter
    • camera trap processing: megadetector & reducer
    • citizen science image processing
    • face detection
  • Add from TreeOfLife-dev at root-level notebooks/ directory all lookup table exclude creators:
    • clustering and other EDA determinations
  • Add root-level data/ folder with embeddings for museum support sets (relates to #22).

This will be done following the merge of PRs #1 through #15.

Lingua principale
Jupyter Notebook
Stelle
9
Fork
1
Metriche di merge delle PR
Nessuna PR unita negli ultimi 30g

Preparare l'ambiente

Questo progetto non fornisce container di sviluppo, Dockerfile né guida per i contributori, quindi l'ambiente è a tuo carico: parti dal suo README e consulta la nostra guida al primo contributo per i passaggi generali.

Come iniziare

  1. Leggi tutta la issue e poi la guida ai contributi del progetto.
  2. Commenta sulla issue per dire che te ne occupi tu — evita che due persone facciano lo stesso lavoro.
  3. Fai un fork del repository e lavora su un branch.
  4. Apri una pull request che faccia riferimento al numero della issue.

Altre issue di Imageomics/TreeOfLife-toolbox

Tutte le issue di Imageomics/TreeOfLife-toolbox

Issue simili

Altre issue su Computer Vision

Ricevi le nuove issue nella tua casella

Un breve riepilogo di issue GitHub adatte ai principianti.