lightly-ai/lightly

Add multi-modal loss

Aperta

#264 aperta il 29 mar 2021

Vedi su GitHubGuida contributor
 (5 commenti) (0 reazioni) (0 assegnatari)Python (337 fork)auto 404
featuregood first issue

Metriche repository

Star
 (3775 stelle)
Metriche merge PR
 (Merge medio 8g) (34 PR mergiate in 30 g)

Descrizione

Add multi-modal loss

As discussed in #249, adding the loss function as described in CLIP would enable users to work with multi-modal datasets.

The pseudo-code (from the paper) is: grafik

Guida contributor

Direzione di ricerca
Comprendere la perdita CLIP dal documento e implementarla usando PyTorch all'interno del framework lightly.
Tech stack
python
Dominio
machine learningai
Tipo issue
Funzionalità
DifficoltàQuanto dovrebbe essere impegnativa per un nuovo contributor.
3
Tempo stimatoTempo stimato per completare e verificare uno scope piccolo.
Mezza giornata
Stato attivitàQuanto è probabile che la issue sia ancora attiva e reviewable.
Attiva
ChiarezzaQuanto chiaramente la issue descrive problema, scope e risultato atteso.
Abbastanza chiara
Prerequisiti
Python
Adatta ai principiantiQuanto la issue è adatta a contributor alla prima esperienza.
65