FedML-AI/FedML

How to get the mAP50 after server aggregation when training the fedcv_detection?

Offen

#1.137 geöffnet am 28.06.2023

Auf GitHub ansehenContributor Guide
 (0 Kommentare) (0 Reaktionen) (0 zugewiesene Personen)Python (743 Forks)batch import
help wantedquestion

Repository-Metriken

Stars
 (3.930 Sterne)
PR-Merge-Metriken
 (Keine gemergten PRs in 30 T)

Beschreibung

I set one server and two clients and I can get every clients' results through check the log.txt. But I can't get any training data in detail checking the log.txt of server (ie. mAP50 after server aggregation). :(

Contributor Guide

Research-Richtung
Untersuchen Sie die Server Trainingsschleife in der FedML Codebasis, insbesondere den Aggregationsschritt. Suchen Sie danach, wie Clients Metriken wie mAP50 in ihren log.txt Dateien melden. Die Server Logs erfassen derzeit möglicherweise keine aggregierten Metriken. Fügen Sie zur Behebung einen Callback oder einen Protokollierungsschritt nach der Aggregation hinzu, der mAP50 auf einem Validierungssatz unter Verwendung des aggregierten Modells berechnet und in das Server Log schreibt. Beziehen Sie sich für Implementierungsmuster auf die vorhandene Metrikprotokollierung in den Client Trainingsskripten.
Tech Stack
python
Domain
backendmachine learning
Issue Type
Dokumentation
SchwierigkeitGeschätzte Implementierungsschwierigkeit für neue Contributors, von 1 für sehr kleine Änderungen bis 5 für Expertenarbeit.
1
Geschätzte ZeitEin grober Zeitrahmen, um zu recherchieren, zu implementieren, zu testen und einen Pull Request vorzubereiten.
Unter 1 Stunde
AktivitätsstatusWie verfügbar das Issue gerade wirkt: frisch, aktiv, stale, blockiert oder wartet auf Maintainer-Input.
Frisch
KlarheitWie klar das Issue die erwartete Änderung, Akzeptanzkriterien und den nächsten Schritt erklärt.
Klar
Voraussetzungen
PythonFederated Learning basics
EinsteigerfreundlichkeitEin Score von 1 bis 100, der schätzt, wie zugänglich dieses Issue für First-Time Contributors ist.
85