FedML-AI/FedML

How to get the mAP50 after server aggregation when training the fedcv_detection?

Open

#1 137 ouverte le 28 juin 2023

Voir sur GitHub
 (0 commentaires) (0 réactions) (0 assignés)Python (743 forks)batch import
help wantedquestion

Métriques du dépôt

Stars
 (3 930 stars)
Métriques de merge PR
 (Aucune PR mergée en 30 j)

Description

I set one server and two clients and I can get every clients' results through check the log.txt. But I can't get any training data in detail checking the log.txt of server (ie. mAP50 after server aggregation). :(

Guide contributeur

Direction de recherche
Examinez la boucle d'entraînement du serveur dans la base de code FedML, en particulier l'étape d'agrégation. Recherchez comment les clients rapportent des métriques comme mAP50 dans leurs fichiers log.txt. Les journaux du serveur ne capturent peut être pas actuellement les métriques agrégées. Pour corriger cela, ajoutez un rappel ou une étape de journalisation après l'agrégation qui calcule mAP50 sur un ensemble de validation en utilisant le modèle agrégé et l'écrit dans le journal du serveur. Pour les modèles d'implémentation, reportez vous à la journalisation des métriques existante dans les scripts d'entraînement client.
Stack technique
python
Domaine
backendmachine learning
Type d'issue
Documentation
DifficultéDifficulté estimée pour un nouveau contributeur, de 1 pour un très petit changement à 5 pour un travail expert.
1
Temps estiméFourchette de temps approximative pour investiguer, implémenter, tester et préparer une pull request.
Moins d'une heure
Statut d'activitéDisponibilité apparente de l'issue : fraîche, active, ancienne, bloquée ou en attente d'un mainteneur.
Récente
ClartéClarté avec laquelle l'issue explique le changement attendu, les critères d'acceptation et la prochaine étape.
Claire
Prérequis
PythonFederated Learning basics
Accessibilité débutantScore de 1 à 100 estimant l'accessibilité de cette issue pour un premier contributeur.
85