Concurrent batches into an auto-schema-created collection lose objects
Dieses Issue hat noch niemand übernommen.
Bewertung
- Schwierigkeit
- 1/5
- Geschätzter Aufwand
- Unter einer Stunde
- Anfängerfreundlichkeit
- 62/100
- Issue-Typ
- Dokumentation
- Klarheit
- Größtenteils klar
- Aktivitätsstatus
- Aktiv
- Tech-Stack
- java
- Bereich
- documentation
Rechercherichtung
Beginne mit der README des Clients und suche den Abschnitt zu Imports oder Batchverarbeitung. Dokumentiere die gemeldete Behelfslösung: Erstelle die Collection vor dem Import oder sende das erste Objekt separat, bevor du gleichzeitige Batches sendest. Das Issue ist abgeschlossen, wenn die README die Behelfslösung und die Race Condition erklärt, die sie behebt.
Vom Indexierungsmodell aus dem Issue-Text verfasst.
Beschreibung
Problem
When several batches write concurrently into a collection that auto-schema has to create, they race to create it. The server rejects the losers' objects with:
auto-schema: create collection: class name ... already exists
In 4 of 5 runs, 2–4 of 40 objects were lost (Weaviate 1.39.7, server-side batching). Concurrent insertMany calls hit the same race, so this looks like a server-side issue rather than a client one.
Workaround
Create the collection before importing, or send the first object on its own before starting concurrent batches.
Suggestion
Document the workaround in the client README, and track the race in the core repo if it isn't tracked already.
- Vorherrschende Sprache
- Java
- Sterne
- 34
- Forks
- 31
- Ø Merge
- 2 T. 10 Std.
- Gemergte PRs (30 T.)
- 2
Entwicklungsumgebung
Dieses Projekt bietet weder Dev-Container noch Dockerfile noch Beitragsleitfaden – die Einrichtung liegt bei Ihnen. Beginnen Sie mit der README; die allgemeinen Schritte stehen in unserem Leitfaden für den ersten Beitrag.
Erste Schritte
- Lesen Sie das ganze Issue und danach den Beitragsleitfaden des Projekts.
- Schreiben Sie ins Issue, dass Sie es übernehmen — das erspart doppelte Arbeit.
- Forken Sie das Repository und arbeiten Sie in einem Branch.
- Öffnen Sie einen Pull Request, der die Issue-Nummer nennt.
Mehr aus weaviate/java-client
-
Filter.toString() throws IllegalFormatConversionException for withinGeoRange filtersEvtl. vergeben @dudanogueira hat das vor 7 Tagen übernommen. Offen
Schwierigkeit 1/5 Unter einer Stunde Anfängerfreundlichkeit 90/100
weaviate/java-client#638 ·
-
v6: VersionSupport rejects every 2.x server (major and minor are concatenated)Evtl. vergeben @Ashlesha-17 hat das vor 8 Tagen übernommen. Offen
Schwierigkeit 2/5 1-3 Stunden Anfängerfreundlichkeit 78/100
weaviate/java-client#631 · 1 Kommentar ·
-
Schwierigkeit 2/5 1-3 Stunden Anfängerfreundlichkeit 75/100
weaviate/java-client#630 ·
-
Schwierigkeit 2/5 1-3 Stunden Anfängerfreundlichkeit 78/100
weaviate/java-client#629 ·
-
Schwierigkeit 2/5 1-3 Stunden Anfängerfreundlichkeit 78/100
weaviate/java-client#628 ·
Alle Issues in weaviate/java-client
Ähnliche Issues
-
Schwierigkeit 2/5 1-3 Stunden Anfängerfreundlichkeit 79/100
Maintainer antworten meist innerhalb von 1 Tag
-
Schwierigkeit 2/5 1-3 Stunden Anfängerfreundlichkeit 65/100
Maintainer antworten meist innerhalb von 2 Tagen
-
Schwierigkeit 2/5 1-3 Stunden Anfängerfreundlichkeit 63/100
linagora/twake-calendar-side-service#1578 · 1 Kommentar ·
Maintainer antworten meist innerhalb von 1 Tag
-
Schwierigkeit 2/5 1-3 Stunden Anfängerfreundlichkeit 66/100
tchiotludo/akhq#3438 ·
Maintainer antworten meist innerhalb von 1 Tag
-
bug
Schwierigkeit 2/5 1-3 Stunden Anfängerfreundlichkeit 66/100
Paul-Austin-Oswego-CSC480-HCI521/gift-app#266 ·
Maintainer antworten meist innerhalb von 1 Tag