FedML-AI/FedML

How to get the mAP50 after server aggregation when training the fedcv_detection?

Open

#1137 aperta il 28 giu 2023

Vedi su GitHub
 (0 commenti) (0 reazioni) (0 assegnatari)Python (743 fork)batch import
help wantedquestion

Metriche repository

Star
 (3930 star)
Metriche merge PR
 (Nessuna PR mergiata in 30 g)

Descrizione

I set one server and two clients and I can get every clients' results through check the log.txt. But I can't get any training data in detail checking the log.txt of server (ie. mAP50 after server aggregation). :(

Guida contributor

Direzione di ricerca
Esamina il ciclo di addestramento del server nella codebase di FedML, in particolare il passaggio di aggregazione. Cerca come i client segnalano metriche come mAP50 nei loro file log.txt. I log del server potrebbero attualmente non catturare le metriche aggregate. Per risolvere, aggiungi un callback o un passaggio di registrazione dopo l'aggregazione che calcoli mAP50 su un set di validazione utilizzando il modello aggregato e lo scriva nel log del server. Per i pattern di implementazione, fai riferimento alla registrazione delle metriche esistente negli script di addestramento del client.
Tech stack
python
Dominio
backendmachine learning
Tipo issue
Documentazione
DifficoltàQuanto dovrebbe essere impegnativa per un nuovo contributor.
1
Tempo stimatoTempo stimato per completare e verificare uno scope piccolo.
Meno di 1 ora
Stato attivitàQuanto è probabile che la issue sia ancora attiva e reviewable.
Nuova
ChiarezzaQuanto chiaramente la issue descrive problema, scope e risultato atteso.
Chiara
Prerequisiti
PythonFederated Learning basics
Adatta ai principiantiQuanto la issue è adatta a contributor alla prima esperienza.
85