open-mmlab/mmaction2

[Feature] Can work on Depth map from Depth Camera?

Offen

#2.566 geöffnet am 27.06.2023

Auf GitHub ansehen
 (2 Kommentare) (0 Reaktionen) (1 zugewiesene Person)Python (1.137 Forks)batch import
good first issue

Repository-Metriken

Stars
 (3.648 Sterne)
PR-Merge-Metriken
 (Keine gemergten PRs in 30 T)

Beschreibung

What is the problem this feature will solve?

MMAction2 is so perfect to predict the kone points and the person position. But the kone points detection method for Depth Camera is not good so that i can't wholly trust the result of the old method like Kinect. I want MMAction2 to work on Depth Camera.

What is the feature?

Consider Depth map and RGB photo as input to detect kone point and person.

What alternatives have you considered?

No response

Contributor Guide

Research-Richtung
Untersuchen Sie zunächst, wie MMAction2 in Konfigurationen und Modellen (z. B. configs/detection/) RGB Frames für die Schlüsselpunktdetektion verarbeitet. Erforschen Sie dann Methoden zur Fusion von Tiefenkarten mit RGB, z. B. durch Hinzufügen eines Tiefenkanals oder die Verwendung eines separaten Streams. Passen Sie die Datenpipeline (z. B. mmaction/datasets/pipelines/) und die Vorwärtsmethode des Modells an, um Tiefenkarten zu akzeptieren. Validieren Sie dies mit Tiefenkamera Datensätzen wie NYU Depth V2 oder benutzerdefinierten Kinect Daten.
Tech Stack
python
Domain
backend
Issue Type
Funktion
SchwierigkeitGeschätzte Implementierungsschwierigkeit für neue Contributors, von 1 für sehr kleine Änderungen bis 5 für Expertenarbeit.
4
Geschätzte ZeitEin grober Zeitrahmen, um zu recherchieren, zu implementieren, zu testen und einen Pull Request vorzubereiten.
3-5 Tage
AktivitätsstatusWie verfügbar das Issue gerade wirkt: frisch, aktiv, stale, blockiert oder wartet auf Maintainer-Input.
Aktiv
KlarheitWie klar das Issue die erwartete Änderung, Akzeptanzkriterien und den nächsten Schritt erklärt.
Meist klar
Voraussetzungen
GitPython
EinsteigerfreundlichkeitEin Score von 1 bis 100, der schätzt, wie zugänglich dieses Issue für First-Time Contributors ist.
60