storage: MSan use-after-dtor flake at exit in tests calling EnableGrpcMetricsImpl
Maintainer antworten meist innerhalb von 1 Tag
@kalragauri arbeitet bereits daran.
Seit 23.10.2026.
Bewertung
Dieses Issue wurde noch nicht bewertet.
Beschreibung
Description
Unit tests introduced in #16538 that call storage_internal::EnableGrpcMetricsImpl() are flaky under MemorySanitizer (msan-ci and msan-storage-ci), failing at process exit with a use-of-uninitialized-value (use-after-dtor) error:
//google/cloud/storage:internal_grpc_channel_metrics_test:ChannelMetrics.RegisteredAuthorityHonorsOption
//google/cloud/storage:internal_grpc_metrics_exporter_impl_test:GrpcMetricsExporter.FindMeterProviderAfterEnableGrpcMetricsExporter.ConcurrentEnableFindsSameProvider
Root Cause
EnableGrpcMetricsImpl()creates an OpenTelemetryMeterProviderwith aPeriodicExportingMetricReaderbackground thread (DoBackgroundWork()) and intentionally retains it in two process-lifetime singletons that are never destroyed at exit (ExporterRegistry::Singleton()and gRPC's globalOpenTelemetryPluginBuilder::BuildAndRegisterGlobal()).- In
opentelemetry-cpp1.24.0,PeriodicExportingMetricReader::DoBackgroundWork()runs its firstCollectAndExportOnce()immediately when the worker thread starts. - Instruments without a custom
AggregationConfig(such as the gRPC WRR/xDS/RLS counters and gauges) useAggregationConfig::GetOrDefault(), which returns a pointer to a function-localstatic const AggregationConfig default_config{}(andViewRegistry::FindViews()usesstatic const View view("")). - When the unit test binary finishes
main()and callsexit(),__cxa_atexitrunsAggregationConfig::~AggregationConfig()ondefault_config(which MSan poisons via__sanitizer_dtor_callback_fields), while the leakedPeriodicExportingMetricReaderbackground thread is concurrently executingSyncMetricStorage::Collect()and readingaggregation_config_->cardinality_limit_.
Example Stack Trace
==12==WARNING: MemorySanitizer: use-of-uninitialized-value
#0 0x7ff25512eae8 in opentelemetry::v1::sdk::metrics::AttributesHashMapWithCustomHash<opentelemetry::v1::sdk::metrics::FilteredOrderedAttributeMapHash>::AttributesHashMapWithCustomHash(unsigned long) .../opentelemetry/sdk/metrics/state/attributes_hashmap.h:53:9
#1 0x7ff25512eae8 in opentelemetry::v1::sdk::metrics::SyncMetricStorage::Collect(...) .../external/opentelemetry-cpp+/sdk/src/metrics/state/sync_metric_storage.cc:39:35
#2 0x7ff2550d38fe in opentelemetry::v1::sdk::metrics::Meter::Collect(...) .../external/opentelemetry-cpp+/sdk/src/metrics/meter.cc:661:28
...
#10 0x7ff255080e64 in opentelemetry::v1::sdk::metrics::PeriodicExportingMetricReader::CollectAndExportOnce() .../external/opentelemetry-cpp+/sdk/src/metrics/export/periodic_exporting_metric_reader.cc:172:11
#11 0x7ff255080e64 in opentelemetry::v1::sdk::metrics::PeriodicExportingMetricReader::DoBackgroundWork() .../external/opentelemetry-cpp+/sdk/src/metrics/export/periodic_exporting_metric_reader.cc:107:19
Member fields were destroyed
#0 0x492ed1 in __sanitizer_dtor_callback_fields
#1 0x7ff257252416 in opentelemetry::v1::sdk::metrics::AggregationConfig::~AggregationConfig() .../opentelemetry/sdk/metrics/aggregation/aggregation_config.h:37:10
#3 0x4938bf in MSanCxaAtExitWrapper(void*)
#4 0x7ff24dd6e70d in exit
Example CI Builds
- Vorherrschende Sprache
- C++
- Sterne
- 659
- Forks
- 475
- Ø Merge
- 1 T. 12 Std.
- Gemergte PRs (30 T.)
- 77
Entwicklungsumgebung
- Kein Dockerfile und keine Docker-Compose-Datei
- Keine Pull-Request-Vorlage
- Beitragsleitfaden lesen
Erste Schritte
- Lesen Sie das ganze Issue und danach den Beitragsleitfaden des Projekts.
- Schreiben Sie ins Issue, dass Sie es übernehmen — das erspart doppelte Arbeit.
- Forken Sie das Repository und arbeiten Sie in einem Branch.
- Öffnen Sie einen Pull Request, der die Issue-Nummer nennt.
Mehr aus googleapis/google-cloud-cpp
-
cleanup(storage): remove deprecated OpenTelemetry rpc.message.type and rpc.message.id attributesOffenapi: storage type: cleanup
Schwierigkeit 2/5 1-3 Stunden Anfängerfreundlichkeit 76/100
googleapis/google-cloud-cpp#16544 ·
Maintainer antworten meist innerhalb von 1 Tag
-
api: storage priority: p2 type: bug
Schwierigkeit 2/5 1-3 Stunden Anfängerfreundlichkeit 82/100
googleapis/google-cloud-cpp#16529 ·
Maintainer antworten meist innerhalb von 1 Tag
-
type: feature request
Schwierigkeit 2/5 1-3 Stunden Anfängerfreundlichkeit 73/100
googleapis/google-cloud-cpp#16193 ·
Maintainer antworten meist innerhalb von 1 Tag
-
Schwierigkeit 4/5 3-5 Tage Anfängerfreundlichkeit 48/100
googleapis/google-cloud-cpp#16575 ·
Maintainer antworten meist innerhalb von 1 Tag
-
api: storage type: cleanup
Schwierigkeit 3/5 1-2 Tage Anfängerfreundlichkeit 55/100
googleapis/google-cloud-cpp#16545 ·
Maintainer antworten meist innerhalb von 1 Tag
Alle Issues in googleapis/google-cloud-cpp
Ähnliche Issues
-
[Bug] [Go] Ack returns nil when the server answers with a non-OK statusEvtl. vergeben @leizhiyuan hat das heute übernommen. Offen
Schwierigkeit 2/5 1-3 Stunden Anfängerfreundlichkeit 84/100
apache/rocketmq-clients#1465 ·
Maintainer antworten meist innerhalb von 2 Tagen
-
Schwierigkeit 2/5 1-3 Stunden Anfängerfreundlichkeit 72/100
KhronosGroup/Vulkan-Tutorial#534 ·
-
Schwierigkeit 2/5 1-3 Stunden Anfängerfreundlichkeit 65/100
Maintainer antworten meist innerhalb von 2 Tagen
-
bug IO
Schwierigkeit 2/5 1-3 Stunden Anfängerfreundlichkeit 65/100
MrNeRF/LichtFeld-Studio#3824 ·
Maintainer antworten meist innerhalb von 1 Tag
-
pnnx: manual tanh GELU fusion loses the approximation modeEvtl. vergeben @ktz03 hat das heute übernommen. Offen
Schwierigkeit 2/5 1-3 Stunden Anfängerfreundlichkeit 78/100
Tencent/ncnn#7175 · 1 Reaktion ·
Maintainer antworten meist innerhalb von 1 Tag