microsoft/SynapseML

`/tmp` cleanups

Open

#268 geöffnet am 21. März 2018

Auf GitHub ansehen
 (1 Kommentar) (0 Reaktionen) (1 zugewiesene Person)Scala (5.228 Stars) (861 Forks)batch import
buggood first issuehelp wanted

Beschreibung

There are still a pile of stuff left in /tmp, all directories. The offending name patterns that need to be clean up are:

  • SavedModels-<N> (I just cleaned almost 19 thousand of these)
  • MML-Test-<N> (about 700)
  • MML-Test-<N>powerBI.parquet (about 160)

Most of these are empty directories, so perhaps there is some broken cleanup that removes files but not the directories. The last pattern is the only one that has files left in it.

Contributor Guide

Tech Stack
shell
Domain
devops
Issue Type
chore
SchwierigkeitGeschätzte Implementierungsschwierigkeit für neue Contributors, von 1 für sehr kleine Änderungen bis 5 für Expertenarbeit.
1
Geschätzte ZeitEin grober Zeitrahmen, um zu recherchieren, zu implementieren, zu testen und einen Pull Request vorzubereiten.
under 1 hour
AktivitätsstatusWie verfügbar das Issue gerade wirkt: frisch, aktiv, stale, blockiert oder wartet auf Maintainer-Input.
stale
KlarheitWie klar das Issue die erwartete Änderung, Akzeptanzkriterien und den nächsten Schritt erklärt.
clear
Voraussetzungen
basic shell scriptingfamiliarity with Linux filesystemability to test safely
EinsteigerfreundlichkeitEin Score von 1 bis 100, der schätzt, wie zugänglich dieses Issue für First-Time Contributors ist.
80
Research-Richtung
The issue lists three directory patterns in /tmp: SavedModels <N>, MML Test <N>, and MML Test <N>powerBI.parquet. Most are empty directories. A solution would involve writing a shell script using `find` to locate and remove these empty directories, ensuring they are not in use. Check the SynapseML codebase for any processes that create these directories to avoid conflicts. Start by listing them with `find /tmp type d name 'SavedModels *'` and verify emptiness before deletion. Consider adding a dry run option.