Concurrent batches into an auto-schema-created collection lose objects
Personne n'a encore pris cette issue.
Évaluation
- Difficulté
- 1/5
- Temps estimé
- Moins d'une heure
- Accessibilité débutants
- 62/100
- Type d'issue
- Documentation
- Clarté
- Plutôt claire
- Activité
- Active
- Stack technique
- java
- Domaine
- documentation
Piste de recherche
Commence par le README du client et trouve la section consacrée aux imports ou au traitement par lots. Documente la solution de contournement signalée : crée la collection avant l’importation ou envoie le premier objet séparément avant d’envoyer des lots concurrents. L’issue est terminée lorsque le README explique la solution de contournement et la condition de concurrence qu’elle résout.
Rédigé par le modèle d'indexation à partir du texte de l'issue.
Description
Problem
When several batches write concurrently into a collection that auto-schema has to create, they race to create it. The server rejects the losers' objects with:
auto-schema: create collection: class name ... already exists
In 4 of 5 runs, 2–4 of 40 objects were lost (Weaviate 1.39.7, server-side batching). Concurrent insertMany calls hit the same race, so this looks like a server-side issue rather than a client one.
Workaround
Create the collection before importing, or send the first object on its own before starting concurrent batches.
Suggestion
Document the workaround in the client README, and track the race in the core repo if it isn't tracked already.
- Langage dominant
- Java
- Étoiles
- 34
- Forks
- 31
- Merge moyen
- 2 j 10 h
- PR mergées (30 j)
- 2
Préparer son environnement
Ce projet ne fournit ni conteneur de développement, ni Dockerfile, ni guide de contribution : l'installation est à votre charge. Commencez par son README, et consultez notre guide de la première contribution pour les étapes générales.
Par où commencer
- Lisez l'issue en entier, puis le guide de contribution du projet.
- Signalez en commentaire que vous la prenez — cela évite que deux personnes fassent le même travail.
- Forkez le dépôt et travaillez sur une branche.
- Ouvrez une pull request qui référence le numéro de l'issue.
Autres issues de weaviate/java-client
-
Filter.toString() throws IllegalFormatConversionException for withinGeoRange filtersPeut-être pris @dudanogueira l’a pris il y a 7 jours. Ouverte
Difficulté 1/5 Moins d'une heure Accessibilité débutants 90/100
weaviate/java-client#638 ·
-
v6: VersionSupport rejects every 2.x server (major and minor are concatenated)Peut-être pris @Ashlesha-17 l’a pris il y a 8 jours. Ouverte
Difficulté 2/5 1-3 heures Accessibilité débutants 78/100
weaviate/java-client#631 · 1 commentaire ·
-
Difficulté 2/5 1-3 heures Accessibilité débutants 75/100
weaviate/java-client#630 ·
-
Difficulté 2/5 1-3 heures Accessibilité débutants 78/100
weaviate/java-client#629 ·
-
Difficulté 2/5 1-3 heures Accessibilité débutants 78/100
weaviate/java-client#628 ·
Toutes les issues de weaviate/java-client
Issues similaires
-
Difficulté 2/5 1-3 heures Accessibilité débutants 79/100
Les mainteneurs répondent en général sous 1 jour
-
Difficulté 2/5 1-3 heures Accessibilité débutants 65/100
Les mainteneurs répondent en général sous 2 jours
-
Difficulté 2/5 1-3 heures Accessibilité débutants 63/100
linagora/twake-calendar-side-service#1578 · 1 commentaire ·
Les mainteneurs répondent en général sous 1 jour
-
Difficulté 2/5 1-3 heures Accessibilité débutants 66/100
tchiotludo/akhq#3438 ·
Les mainteneurs répondent en général sous 1 jour
-
bug
Difficulté 2/5 1-3 heures Accessibilité débutants 66/100
Paul-Austin-Oswego-CSC480-HCI521/gift-app#266 ·
Les mainteneurs répondent en général sous 1 jour