lightly-ai/lightly

Add multi-modal loss

Ouverte

#264 ouverte le 29 mars 2021

Voir sur GitHubGuide contributeur
 (5 commentaires) (0 réaction) (0 personne assignée)Python (337 forks)auto 404
featuregood first issue

Métriques du dépôt

Stars
 (3 775 étoiles)
Métriques de merge PR
 (Merge moyen 8j) (34 PRs mergées en 30 j)

Description

Add multi-modal loss

As discussed in #249, adding the loss function as described in CLIP would enable users to work with multi-modal datasets.

The pseudo-code (from the paper) is: grafik

Guide contributeur

Direction de recherche
Comprendre la perte CLIP de l'article et l'implémenter en utilisant PyTorch dans le cadre de lightly.
Stack technique
python
Domaine
machine learningai
Type d'issue
Fonctionnalité
DifficultéDifficulté estimée pour un nouveau contributeur, de 1 pour un très petit changement à 5 pour un travail expert.
3
Temps estiméFourchette de temps approximative pour investiguer, implémenter, tester et préparer une pull request.
Une demi journée
Statut d'activitéDisponibilité apparente de l'issue : fraîche, active, ancienne, bloquée ou en attente d'un mainteneur.
Active
ClartéClarté avec laquelle l'issue explique le changement attendu, les critères d'acceptation et la prochaine étape.
Plutôt claire
Prérequis
Python
Accessibilité débutantScore de 1 à 100 estimant l'accessibilité de cette issue pour un premier contributeur.
65