infinitered/nsfwjs

Run on every frame in Video

Open

#39 ouverte le 4 mars 2019

Voir sur GitHub
 (18 commentaires) (0 réactions) (1 assigné)JavaScript (7 090 stars) (507 forks)batch import
enhancementhacktoberfest-acceptedhelp wanted

Description

Much like the discussion over in #38 There's been a request to run on every frame in a video.

It's possible to do in JS like so: https://jsfiddle.net/bmartel/3h98gsvk/11/

Maybe a syntax like model.classifyVideo(video) or model.classifyAny(img|gif|video)

Guide contributeur

Stack technique
javascripttensorflow
Domaine
machine learning
Type d'issue
feature
DifficultéDifficulté estimée pour un nouveau contributeur, de 1 pour un très petit changement à 5 pour un travail expert.
3
Temps estiméFourchette de temps approximative pour investiguer, implémenter, tester et préparer une pull request.
1-2 days
Statut d'activitéDisponibilité apparente de l'issue : fraîche, active, ancienne, bloquée ou en attente d'un mainteneur.
stale
ClartéClarté avec laquelle l'issue explique le changement attendu, les critères d'acceptation et la prochaine étape.
clear
Prérequis
JavaScript basicsfamiliarity with TensorFlow.jsunderstanding of video frame processing
Accessibilité débutantScore de 1 à 100 estimant l'accessibilité de cette issue pour un premier contributeur.
50
Direction de recherche
The issue requests adding video classification capability to the NSFWJS library, with a suggested API like `model.classifyVideo(video)`. There is a reference implementation in a JSFiddle (see issue body) that processes video frames using canvas and a 'draw' function. To implement, study how the existing `classify` method works for images, then extend it to accept a video element. The video should be sampled at a reasonable frame rate (e.g., requestAnimationFrame) and each frame passed to the model. Look at the discussion in the issue for additional context and any existing attempts. Key files to examine: the main model file (likely `index.js` or similar) and any image classification methods. Ensure the solution is efficient and handles cleanup of video resources.