Similarity Scores coming very low between the video and the text features.
Nessuno ha ancora preso questa issue.
Valutazione
- Difficoltà
- 4/5
- Tempo stimato
- 3-5 giorni
- Idoneità per principianti
- 25/100
- Tipo di issue
- Bug
- Chiarezza
- Da chiarire
- Stato di attività
- Ferma
- Stack tecnologico
- jupyter-notebook, python
- Ambito
- computer-vision, machine-learning, search
Direzione di ricerca
Inizia da InternVideo2/multi_modality/demo_video_text_retrieval.ipynb e riproduci il flusso di recupero da testo a video usando InternVideo2-stage2_1b-224p-f4.pt. Esamina come vengono prodotti e confrontati text_features e video_features, quindi stabilisci se i punteggi riportati sono quelli attesi per questo dataset. Il lavoro è completato quando viene documentata la causa dei punteggi bassi oppure viene identificato un problema riproducibile.
Scritto dal modello di indicizzazione a partire dal testo della issue.
Descrizione
Hi @leexinhao,
I am trying the text to video retrieval on my dataset using this https://github.com/OpenGVLab/InternVideo/blob/main/InternVideo2/multi_modality/demo_video_text_retrieval.ipynb, but the similarity scores are coming in very low between the text_features and the video_features. I am using this weight file InternVideo2-stage2_1b-224p-f4.pt and the cosine similarity I am computing by taking the dot product between the text_features and the video_features(text_features @ video_features.T).
array([0.08640765, 0.08618326, 0.08596011, 0.08578135, 0.08574679, 0.08564241, 0.08557957, 0.08552065, 0.08551717, 0.08548111], dtype=float32)
Thanks.
- Lingua principale
- Python
- Stelle
- 2.4k
- Fork
- 160
- Metriche di merge delle PR
- Nessuna PR unita negli ultimi 30g
Guida per i contributori
Nessuna guida per i contributori indicizzata per questo repository
Come iniziare
- Leggi tutta la issue e poi la guida ai contributi del progetto.
- Commenta sulla issue per dire che te ne occupi tu — evita che due persone facciano lo stesso lavoro.
- Fai un fork del repository e lavora su un branch.
- Apri una pull request che faccia riferimento al numero della issue.
Altre issue di OpenGVLab/InternVideo
-
Difficoltà 5/5 Più di una settimana Idoneità per principianti 25/100
OpenGVLab/InternVideo#324 · 1 commento ·
-
InternVideo2 stage-1 weights Aperta
Difficoltà 5/5 Più di una settimana Idoneità per principianti 20/100
OpenGVLab/InternVideo#323 ·
-
Difficoltà 5/5 Più di una settimana Idoneità per principianti 25/100
OpenGVLab/InternVideo#322 ·
-
Difficoltà 4/5 3-5 giorni Idoneità per principianti 42/100
OpenGVLab/InternVideo#321 ·
-
Difficoltà 4/5 3-5 giorni Idoneità per principianti 35/100
OpenGVLab/InternVideo#319 · 1 commento ·
Tutte le issue di OpenGVLab/InternVideo
Issue simili
-
enhancement
Difficoltà 2/5 1-3 ore Idoneità per principianti 70/100
canonical/paas-charm#368 · 1 commento ·
-
Difficoltà 2/5 1-3 ore Idoneità per principianti 75/100
-
tech debt
Difficoltà 2/5 1-3 ore Idoneità per principianti 75/100
-
addition to tracking list Aperta
Difficoltà 1/5 Meno di un'ora Idoneità per principianti 90/100
StevenBlack/hosts#3256 ·
-
Difficoltà 1/5 Meno di un'ora Idoneità per principianti 90/100
qualcomm/qai-appbuilder#275 ·