wordpress.phpunit: database-type=mdi-native excludes 100% of candidates (excluded=1335, routed=0) on multisite + managed bootstrap
Maintainer antworten meist innerhalb von 1 Tag
Dieses Issue hat noch niemand übernommen.
Bewertung
- Schwierigkeit
- 4/5
- Geschätzter Aufwand
- 3-5 Tage
- Anfängerfreundlichkeit
- 52/100
- Issue-Typ
- Bug
- Klarheit
- Größtenteils klar
- Aktivitätsstatus
- Aktiv
- Tech-Stack
- mariadb, mysql, php, typescript
- Bereich
- backend, databases, testing-qa
Rechercherichtung
Beginne damit, die wordpress.phpunit-Komponente mit multisite und managed bootstrap beim wp-codebox-Commit d4e0f713 zu reproduzieren und database-type=mysql mit mdi-native zu vergleichen. Verfolge nach der Ermittlung den Auswahl- und Routing-Pfad der Kandidaten und prüfe anschließend die Ausschlussmeldungen sowie die Behandlung von selected=0. Die Arbeit ist abgeschlossen, wenn Kandidaten unter mdi-native geroutet werden, Ausschlüsse einen Grund offenlegen und ein Lauf mit null ausgewählten Elementen sofort fehlschlägt.
Vom Indexierungsmodell aus dem Issue-Text verfasst.
Beschreibung
Summary
With database-type=mdi-native, wordpress.phpunit discovers the full candidate set and then excludes 100% of it, routing zero tests. The same component on database-type=mysql runs 1,177 tests normally.
FULL_SUITE_STANDALONE_PHP_SUMMARY:candidates=1335 selected=0 routed=0 excluded=1335 passed=0 failed=0
Discovery clearly works — it finds 1,335 candidates. Routing/selection is where everything is dropped.
Reproduction
- wp-codebox:
d4e0f713(currentmain), so this includes #2490 (mdi-native backend), #2494 (native multisite PHPUnit state), #2497 (explicit native MDI sources), and #2498 (retain PHPUnit failure artifacts). - Consumer: Homeboy
wordpressextension, managed install, provenance-valid (homeboy extension setup wordpressrun clean; version reported0.26.8at the managed source path). - Component under test: a WordPress plugin with
wp_codebox_multisite: truewp_codebox_phpunit_bootstrap_mode: "managed"- 101 test files / 1,335 PHPUnit candidates
Control vs variable, same component, same commit, only database_type changed:
database_type |
Result |
|---|---|
mysql (external service) |
1,177 passed, 7 skipped, 1,177 total, 577s |
mdi-native |
0 passed, 0 failed, 0 skipped, 0 total — excluded=1335 |
Behaviour detail
- The run does not fail fast at the point of exclusion. After reporting
excluded=1335it continues until the harness budget is consumed. In one run it reportedtest suite consumed 1336s of its 1500s budget (89%)having executed nothing. - With #2498 present the run surfaces
failed test command did not expose an observed failed test IDrather than silently producing nothing, which is an improvement, but there is still no diagnostic explaining why 1,335 candidates were excluded.
Why this matters
mdi-native is the difference between "tests need an external MySQL/MariaDB with provisioned credentials" and "tests need nothing." For consumers, that is the difference between a suite any contributor or agent can run locally and one gated behind secrets. Right now the backend validates, plans, and reports success at the config layer while running zero tests — so it cannot be trusted as a MySQL-compatible harness.
Credit where due: the consumer side handles this safely. Homeboy classifies zero executed tests as invalid_evidence → passed: false, so a release preflight on this backend is correctly blocked rather than shipping untested code. The danger is not a silent false pass in that toolchain, but the failure is silent enough that another consumer could plausibly treat "exit 0, no failures" as success.
Asks
- Emit a reason for exclusion.
excluded=1335with no per-candidate or aggregate cause is not diagnosable. Even a single aggregate reason code would have made this self-service. - Fix the routing/selection path for
mdi-nativeso candidates route the way they do undermysql. The identical candidate count (1,335) under both backends suggests discovery is shared and only selection/routing diverges. - Fail fast on
selected=0whencandidates>0. Consuming the full time budget after excluding everything wastes ~22 minutes per run and obscures the real error.
Possibly relevant
The combination here is multisite + managed bootstrap. #2494 specifically addressed native multisite PHPUnit state, so this may be an unhandled remainder of that work rather than a general mdi-native failure — I have not tested single-site to isolate that, and would be happy to if it helps.
- Vorherrschende Sprache
- TypeScript
- Sterne
- 17
- Forks
- 4
- Ø Merge
- 47 Min.
- Gemergte PRs (30 T.)
- 68
Entwicklungsumgebung
Die Einrichtungsdateien dieses Projekts haben wir noch nicht geprüft. Beginnen Sie mit der README; die allgemeinen Schritte stehen in unserem Leitfaden für den ersten Beitrag.
Erste Schritte
- Lesen Sie das ganze Issue und danach den Beitragsleitfaden des Projekts.
- Schreiben Sie ins Issue, dass Sie es übernehmen — das erspart doppelte Arbeit.
- Forken Sie das Repository und arbeiten Sie in einem Branch.
- Öffnen Sie einen Pull Request, der die Issue-Nummer nennt.
Mehr aus Automattic/wp-codebox
-
Schwierigkeit 2/5 1-3 Stunden Anfängerfreundlichkeit 68/100
Automattic/wp-codebox#2531 ·
Maintainer antworten meist innerhalb von 1 Tag
-
Schwierigkeit 2/5 1-3 Stunden Anfängerfreundlichkeit 88/100
Automattic/wp-codebox#2467 ·
Maintainer antworten meist innerhalb von 1 Tag
-
Schwierigkeit 2/5 1-3 Stunden Anfängerfreundlichkeit 88/100
Automattic/wp-codebox#2466 ·
Maintainer antworten meist innerhalb von 1 Tag
-
Schwierigkeit 2/5 1-3 Stunden Anfängerfreundlichkeit 72/100
Automattic/wp-codebox#2105 ·
Maintainer antworten meist innerhalb von 1 Tag
-
Schwierigkeit 2/5 1-3 Stunden Anfängerfreundlichkeit 68/100
Automattic/wp-codebox#2061 ·
Maintainer antworten meist innerhalb von 1 Tag
Alle Issues in Automattic/wp-codebox
Ähnliche Issues
-
Schwierigkeit 1/5 1-3 Stunden Anfängerfreundlichkeit 88/100
supabase/agent-skills#611 ·
-
Schwierigkeit 1/5 Unter einer Stunde Anfängerfreundlichkeit 68/100
polka-codes/test#345 ·
Maintainer antworten meist innerhalb von 1 Tag
-
Schwierigkeit 1/5 1-3 Stunden Anfängerfreundlichkeit 92/100
GoogleChromeLabs/project-sesame#217 ·
Maintainer antworten meist innerhalb von 12 Tagen
-
Schwierigkeit 2/5 1-3 Stunden Anfängerfreundlichkeit 74/100
solana-foundation/solana-com#2202 ·
Maintainer antworten meist innerhalb von 1 Tag
-
Schwierigkeit 2/5 1-3 Stunden Anfängerfreundlichkeit 85/100