cbcopy migration from Greenplum 6.21.0 to Apache Cloudberry 2.1.0 fails with COPY errors
Les mainteneurs répondent en général sous 2 jours
Personne n'a encore pris cette issue.
Évaluation
- Difficulté
- 4/5
- Temps estimé
- 3-5 jours
- Accessibilité débutants
- 35/100
Piste de recherche
Start by reviewing the cbcopy migration logs and the COPY failures reported for affected tables; the issue does not name source files or tests. Compare the source and target row counts and investigate the Broken pipe errors using the provided Greenplum 6.21.0 and Cloudberry 2.1.0 environment details. Done means identifying a reproducible cause and documenting a resolution or retry approach; detailed logs and commands are still needed.
Rédigé par le modèle d'indexation à partir du texte de l'issue.
Description
Hi Apache Cloudberry Team,
We are migrating a large database from Greenplum Database 6.21.0 to Apache Cloudberry 2.1.0-incubating using the cbcopy utility.
During the migration, we encountered multiple table copy failures. The migration process reports errors such as:
could not write to COPY program: Broken pipe
Copy to affected rows X are not equal to copy from affected rows 0
Several tables failed to copy successfully.
We would appreciate your help in identifying the root cause and recommended resolution.
Environment:
Source database: Greenplum 6.21.0
Source os: CentOS 7
Target database: Apache Cloudberry 2.1.0-incubating
Source database size: Approximately 2 TB
Target OS: Oracle Linux 9.8
Migration utility: cbcopy
Steps to reproduce:
Configure the source Greenplum and target Cloudberry clusters.
Configure the required network connectivity and authentication.
Execute the cbcopy migration utility.
Observe the migration logs.
Expected behavior:
The cbcopy utility should copy all supported database objects and data successfully from Greenplum to Cloudberry.
Actual behavior:
Multiple tables fail during the COPY operation. Some tables report a mismatch between the number of rows copied from the source and the number of rows inserted into the target.
Questions:
What are the possible causes of the Broken pipe errors during cbcopy?
Is there a known issue with cbcopy in Cloudberry 2.1.0-incubating?
Are there any recommended configuration changes or patches?
Is there a recommended way to resume or retry failed table copies without restarting the entire migration?
We can provide the detailed logs, configuration files, and migration commands for further investigation.
Thank you.
- Langage dominant
- C
- Étoiles
- 1.4k
- Forks
- 265
- Merge moyen
- 4 j 15 min
- PR mergées (30 j)
- 68
Préparer son environnement
- Aucun Dockerfile ni fichier Docker Compose
- Propose un modèle de pull request
- Lire le guide de contribution
Par où commencer
- Lisez l'issue en entier, puis le guide de contribution du projet.
- Signalez en commentaire que vous la prenez — cela évite que deux personnes fassent le même travail.
- Forkez le dépôt et travaillez sur une branche.
- Ouvrez une pull request qui référence le numéro de l'issue.
Autres issues de apache/cloudberry
-
[Bug] Expand fails to recognize user-defined tablespacesPeut-être pris @nix-oss l’a pris il y a 73 jours. Ouvertetype: Bug
Difficulté 2/5 1-3 heures Accessibilité débutants 76/100
apache/cloudberry#1885 · 2 réactions ·
Les mainteneurs répondent en général sous 2 jours
-
gpexpand first stage fails: 'SyncPackages' object has no attribute 'ret' (extension sync never runs; regression)Peut-être pris @talmacschen-arch l’a pris il y a 135 jours. Ouverte
Difficulté 2/5 1-3 heures Accessibilité débutants 86/100
apache/cloudberry#1825 ·
Les mainteneurs répondent en général sous 2 jours
-
[Bug] GPORCA: “could not find MotionState” for correlated EXISTS with LIMIT and a scalar subqueryPeut-être pris @Alena0704 l’a pris il y a 1 jour. Ouvertetype: Bug
apache/cloudberry#2221 · 1 personne assignée ·
Les mainteneurs répondent en général sous 2 jours
-
Difficulté 4/5 3-5 jours Accessibilité débutants 42/100
apache/cloudberry#2214 · 2 commentaires ·
Les mainteneurs répondent en général sous 2 jours
-
type: Bug
Difficulté 4/5 3-5 jours Accessibilité débutants 48/100
apache/cloudberry#2202 ·
Les mainteneurs répondent en général sous 2 jours
Toutes les issues de apache/cloudberry
Issues similaires
-
Difficulté 2/5 1-3 heures Accessibilité débutants 82/100
Les mainteneurs répondent en général sous 1 jour
-
Status: Opened Type: Bug
Difficulté 1/5 Moins d'une heure Accessibilité débutants 85/100
Les mainteneurs répondent en général sous 1 jour
-
severity: low
Difficulté 2/5 1-3 heures Accessibilité débutants 76/100
luainkernel/lunatik#2221 ·
Les mainteneurs répondent en général sous 1 jour
-
Difficulté 2/5 1-3 heures Accessibilité débutants 70/100
FriendsofECCE/ECCE#731 ·
-
Difficulté 2/5 1-3 heures Accessibilité débutants 68/100
zephyrproject-rtos/zephyr#124160 ·
Les mainteneurs répondent en général sous 3 jours