Events dropped client-side for size are only logged at debug level and not recorded as lost
Maintainer antworten meist innerhalb von 2 Tagen
Bewertung
- Schwierigkeit
- 2/5
- Geschätzter Aufwand
- 1-3 Stunden
- Anfängerfreundlichkeit
- 76/100
- Issue-Typ
- Bug
- Klarheit
- Klar beschrieben
- Aktivitätsstatus
- Aktiv
- Tech-Stack
- ruby
- Bereich
- backend, observability
Rechercherichtung
Beginne in sentry-ruby/lib/sentry/transport.rb bei Transport#serialize_envelope und vergleiche den Pfad zum Verwerfen übergroßer Elemente mit der in #2885 hinzugefügten Behandlung von 413. Prüfe, wie verlorene Ereignisse und Statistiken zu verworfenen Ereignissen erfasst werden, und ergänze für dieses Verwerfen eine entsprechende Sichtbarkeit. Als erledigt gilt die Aufgabe, wenn ein übergroßes Element auf Warnstufe protokolliert und als verloren erfasst wird; überprüfe, dass die Reproduktion ein nicht leeres Ergebnis für verworfene Ereignisse meldet.
Vom Indexierungsmodell aus dem Issue-Text verfasst.
Beschreibung
Issue Description
When an envelope item is still larger than MAX_SERIALIZED_PAYLOAD_SIZE after Envelope::Item#serialize has removed breadcrumbs and reduced the stacktrace, Transport#serialize_envelope skips it with a log_debug and nothing else:
https://github.com/getsentry/sentry-ruby/blob/master/sentry-ruby/lib/sentry/transport.rb#L77-L82
Since the event is never sent, Relay never sees it, so it doesn't show up in the invalid payload stats either. And unlike the 413 path added in #2885, no client report is recorded. With the SDK logger at the usual info level, the event is lost without any trace.
The size reduction doesn't touch extra or contexts, so a large custom payload is enough to hit this. In our case, a scheduled job reported a list of record ids in extra - the list was about 3 MB, and the event never arrived. We only noticed because we knew a report should arrive, and were confused why none did arrive.
#2381 asked for truncation of custom contexts and was declined in favor of server-side handling, with a pointer to the invalid payload stats. That makes sense for truncation, but these events never reach the server, so the stats can't show them. This issue is only about making the drop visible.
Reproduction Steps
require "logger"
gem "sentry-ruby", "7.2.0"
require "sentry-ruby"
Sentry.init do |config|
config.dsn = "http://[email protected]:9/1" # nothing listens here; the event is dropped before any request
config.background_worker_threads = 0
config.sdk_logger = Logger.new($stdout, level: ENV.fetch("LOG_LEVEL", "info"))
end
Sentry.capture_message("Found records", extra: { ids: (1..200_000).to_a })
puts "discarded events: #{Sentry.get_current_client.transport.instance_variable_get(:@discarded_events).inspect}"
Expected Behavior
- The drop is logged at
warnlevel, like the 413 response. - A lost event is recorded (e.g.
record_lost_event(:send_error, item.data_category, num: item.item_count, num_bytes: item.lost_event_byte_size), as in the 413 path), so it shows up in the org's stats.
Actual Behavior
With LOG_LEVEL=info, the script prints only:
discarded events: {}
With LOG_LEVEL=debug, the drop is logged, but still no lost event is recorded:
DEBUG -- sentry: Envelope item [event] is still oversized after size reduction: {event_id: 34, level: 7, timestamp: 22, environment: 13, server_name: 19, modules: 13408, message: 15, user: 2, tags: 2, contexts: 525, extra: 1288904, fingerprint: 2, platform: 6, sdk: 40, type: 7, threads: 1654}
discarded events: {}
Ruby Version
4.0.9
SDK Version
7.2.0
Integration and Its Version
Reproducible with plain sentry-ruby; we noticed it in Rails 8.1 with sentry-rails and sentry-sidekiq 7.2.0.
Sentry Config
No response
- Vorherrschende Sprache
- Ruby
- Sterne
- 990
- Forks
- 552
- Ø Merge
- 2 T. 16 Std.
- Gemergte PRs (30 T.)
- 29
Entwicklungsumgebung
Startet den Dev-Container des Projekts im Browser, mit Ihrem eigenen GitHub-Konto.
- Kein Dockerfile und keine Docker-Compose-Datei
- Hat eine Pull-Request-Vorlage
- Beitragsleitfaden lesen
Erste Schritte
- Lesen Sie das ganze Issue und danach den Beitragsleitfaden des Projekts.
- Schreiben Sie ins Issue, dass Sie es übernehmen — das erspart doppelte Arbeit.
- Forken Sie das Repository und arbeiten Sie in einem Branch.
- Öffnen Sie einen Pull Request, der die Issue-Nummer nennt.
Mehr aus getsentry/sentry-ruby
-
Bug Ruby
Schwierigkeit 2/5 1-3 Stunden Anfängerfreundlichkeit 76/100
getsentry/sentry-ruby#3211 · 1 Kommentar ·
Maintainer antworten meist innerhalb von 2 Tagen
-
with_child_span drops spans when blocks exit via break, return, or throwEvtl. vergeben @itsrayeedscodespace hat das vor 1 Tag übernommen. OffenBug Ruby Traces Waiting for: Product Owner
Schwierigkeit 2/5 1-3 Stunden Anfängerfreundlichkeit 38/100
getsentry/sentry-ruby#3206 · 1 Kommentar ·
Maintainer antworten meist innerhalb von 2 Tagen
-
Let apps choose how the client IP on events is determinedEvtl. vergeben @sl0thentr0py hat das vor 11 Tagen übernommen. OffenImprovement Ruby
getsentry/sentry-ruby#3180 · 2 Kommentare · 1 Reaktion · 1 zugewiesene Person ·
Maintainer antworten meist innerhalb von 2 Tagen
-
breaking change Next Major
Schwierigkeit 2/5 1-3 Stunden Anfängerfreundlichkeit 58/100
getsentry/sentry-ruby#3176 · 1 Kommentar ·
Maintainer antworten meist innerhalb von 2 Tagen
-
With `register_error_subscriber`, view errors are reported twice: the wrapper by the middleware, and its cause by the error subscriberEvtl. vergeben @sl0thentr0py hat das vor 13 Tagen übernommen. OffenBug Ruby
Schwierigkeit 4/5 1-2 Tage Anfängerfreundlichkeit 57/100
getsentry/sentry-ruby#3166 · 1 Kommentar · 1 zugewiesene Person ·
Maintainer antworten meist innerhalb von 2 Tagen
Alle Issues in getsentry/sentry-ruby
Ähnliche Issues
-
enhancement
Schwierigkeit 2/5 1-3 Stunden Anfängerfreundlichkeit 66/100
internetee/registry#2984 ·
Maintainer antworten meist innerhalb von 6 Tagen
-
Schwierigkeit 2/5 1-3 Stunden Anfängerfreundlichkeit 82/100
ecosyste-ms/issues#862 ·
Maintainer antworten meist innerhalb von 1 Tag
-
Redis Lua error `@user_script:52: ERR value is not an integer or out of range` when `window_size` is configuredEvtl. vergeben @mimosa hat das heute übernommen. Offenbug
Schwierigkeit 2/5 1-3 Stunden Anfängerfreundlichkeit 82/100
Maintainer antworten meist innerhalb von 1 Tag
-
Schwierigkeit 2/5 1-3 Stunden Anfängerfreundlichkeit 67/100
riscv/riscv-unified-db#2829 ·
Maintainer antworten meist innerhalb von 1 Tag
-
⛓️ Security Difficulty: Easy Good First Issue Help Wanted ruby Type: Bug
Schwierigkeit 2/5 1-3 Stunden Anfängerfreundlichkeit 82/100
rubyforgood/casa#7404 ·
Maintainer antworten meist innerhalb von 1 Tag