josdejong/mathjs

BrowserStack tests don't run correctly in case of multiple simultanous runs

Open

#2 261 ouverte le 23 juin 2021

Voir sur GitHub
 (2 commentaires) (0 réactions) (0 assignés)JavaScript (1 298 forks)batch import
bughelp wanted

Métriques du dépôt

Stars
 (13 832 stars)
Métriques de merge PR
 (Aucune PR mergée en 30 j)

Description

Since we switched from TravisCI to github actions, the BrowserStack tests often give issues. It looks like when you push two branches at the same time, the tests for the two different branches are mixed up when running. Often, the BrowserStack tests hang and finally time out.

You can see for example that tests are mixed up from the number of tests completed/skipped, which is much too high (should be 6 times the actual number of tests because we're running on 6 different browsers):

Finished in 10 mins 26.368 secs / 9 mins 15.34 secs @ 12:22:21 GMT+0200 (Central European Summer Time)

SUMMARY:
√ 159765 tests completed
i 665 tests skipped
× 45 tests failed

Maybe we have to configure a unique id or something, I really have no clue.

Anyone able to look into this?

Guide contributeur

Direction de recherche
Examinez le workflow GitHub Actions pour les exécutions parallèles et la configuration BrowserStack pour imposer des identifiants de construction uniques par exécution de workflow.
Stack technique
javascript
Domaine
backenddevops
Type d'issue
Bug
DifficultéDifficulté estimée pour un nouveau contributeur, de 1 pour un très petit changement à 5 pour un travail expert.
2
Temps estiméFourchette de temps approximative pour investiguer, implémenter, tester et préparer une pull request.
1-3 heures
Statut d'activitéDisponibilité apparente de l'issue : fraîche, active, ancienne, bloquée ou en attente d'un mainteneur.
Active
ClartéClarté avec laquelle l'issue explique le changement attendu, les critères d'acceptation et la prochaine étape.
Plutôt claire
Prérequis
GitCI/CD
Accessibilité débutantScore de 1 à 100 estimant l'accessibilité de cette issue pour un premier contributeur.
40