[Bug][Migration] modify refs id length fails on MySQL Group Replication and leaves refs without a primary key
メンテナーはふだん 3 日以内に返信
@tpam28 がすでに取り組んでいます。
2026年10月7日 から。
評価
- 難易度
- 3/5
- 見積もり時間
- 1〜2日
- 初心者へのやさしさ
- 68/100
調査の方向性
Start with migration 20240124155129 and trace its call to migrationhelper.ChangePrimaryKeyColumnsType; the issue identifies this helper as used only by this migration. Check the migration’s behavior on MySQL with Group Replication, where DML on a table without a primary key fails. Done means the migration succeeds and refs retains its primary key throughout.
索引モデルが issue の本文から書いたものです。
説明
Search before asking
- I had searched in the issues and found no similar issues.
What happened
On a fresh database, migration 20240124155129 ("modify refs id length from 255 to 500") fails on MySQL with Group Replication. DevLake doesn't start.
The migration calls migrationhelper.ChangePrimaryKeyColumnsType. On MySQL that function:
- runs
ALTER TABLE refs DROP PRIMARY KEY; - renames
idto a temp column, adds a newidcolumn, and copies data withUPDATE refs SET id = <tmp> ...; - runs
ALTER TABLE refs ADD PRIMARY KEY (id).
Group Replication requires every replicated table to have a primary key or an equivalent non-null unique key (https://dev.mysql.com/doc/refman/8.0/en/group-replication-requirements.html). It rejects DML on tables without one, so step 2 fails even on an empty table:
[migrator] applying migration script modify refs id length from 255 to 500:20240124155129
dalgorm.go:286 Error 3098 (HY000): The table does not comply with the requirements by an external plugin.
[rows:0] UPDATE `refs` SET `id`= `id_5F25450158E7FFB26E242E4DA0AE9F41` ,`updated_at`='...' WHERE `id_5F25450158E7FFB26E242E4DA0AE9F41` IS NOT NULL
panic: Error 3098 (HY000): The table does not comply with the requirements by an external plugin. (500)
Step 3 never runs. The rollback in ChangeColumnsType restores the id column but not the primary key, so refs stays without one. The next start fails on the same migration, now at step 1:
panic: Error 1091 (42000): Can't DROP 'PRIMARY'; check that column/key exists (500)
What do you expect to happen
The migration succeeds on MySQL with Group Replication, and refs keeps its primary key the whole time. Group Replication is what MySQL InnoDB Cluster runs on, so DevLake can't use an HA MySQL setup while this migration drops the key before copying data.
How to reproduce
-
Start a single-node MySQL 8.0 with Group Replication:
cat > gr.cnf <<'EOF' [mysqld] server_id=1 gtid_mode=ON enforce_gtid_consistency=ON plugin_load_add=group_replication.so loose-group_replication_group_name=aaaaaaaa-bbbb-cccc-dddd-eeeeeeeeeeee loose-group_replication_start_on_boot=OFF loose-group_replication_local_address=127.0.0.1:33061 loose-group_replication_group_seeds=127.0.0.1:33061 EOF docker run -d --name devlake-gr -p 3307:3306 \ -e MYSQL_ROOT_PASSWORD=root -e MYSQL_DATABASE=lake \ -e MYSQL_USER=merico -e MYSQL_PASSWORD=merico \ -v "$PWD/gr.cnf:/etc/mysql/conf.d/gr.cnf:ro" mysql:8.0 docker exec devlake-gr mysql -uroot -proot -e "SET GLOBAL group_replication_bootstrap_group=ON; START GROUP_REPLICATION; SET GLOBAL group_replication_bootstrap_group=OFF;" -
Start DevLake with
DB_URL=mysql://merico:[email protected]:3307/lake?charset=utf8mb4&parseTime=True&loc=UTCandFORCE_MIGRATION=true. -
DevLake panics on migration
20240124155129with error 3098. -
SHOW CREATE TABLE refsshows no primary key. Starting DevLake again panics with error 1091.
Anything else
It happens every time on a fresh database. On plain MySQL without Group Replication the migration passes.
Related: #6451 (Group Replication, missing primary keys on other tables; closed as stale), #6292 (same drop-then-re-add pattern failing on Azure MySQL with GIPK). Neither covers the refs migration.
Widening a varchar primary key doesn't need the drop/copy/re-add sequence. On MySQL, ALTER TABLE refs MODIFY id varchar(500) keeps the key and the data. ChangePrimaryKeyColumnsType is only used by this migration.
Version
02dab0cda304298a2a47737ada4a616921b7c914 (current main); also seen on b3f18854ad58b5cf0e9a56c14266af17ae19894f
Are you willing to submit PR?
- Yes I am willing to submit a PR!
Code of Conduct
- I agree to follow this project's Code of Conduct
- 主要言語
- Go
- スター
- 3.2k
- フォーク
- 819
- 平均マージ
- 3日 2時間
- マージ済み PR(30日)
- 42
環境構築
このプロジェクトの開発コンテナを、あなたの GitHub アカウントでブラウザ上に起動します。
- Dockerfile・Docker Compose ファイルなし
- プルリクエストのテンプレートあり
- コントリビューションガイドなし
はじめの一歩
- issue を最後まで読み、次にプロジェクトのコントリビューションガイドを読みます。
- 着手することを issue にコメントします — 二人が同じ作業をするのを防げます。
- リポジトリをフォークし、ブランチを切って変更します。
- issue 番号を参照したプルリクエストを送ります。
apache/devlake のほかの issue
-
[Feature][config-ui] Manage teams, members and account mapping from the UI対応中かも @itaispiegel が今日担当しました。 オープン
難易度 5/5 1週間以上 初心者へのやさしさ 45/100
メンテナーはふだん 3 日以内に返信
-
難易度 2/5 1〜3時間 初心者へのやさしさ 55/100
メンテナーはふだん 3 日以内に返信
-
難易度 4/5 3〜5日 初心者へのやさしさ 38/100
apache/devlake#9195 · リアクション 1 件 ·
メンテナーはふだん 3 日以内に返信
-
[Bug][jenkins] Incremental collection skips the stages of builds that finish after the next sync対応中かも @pballester が 13 日前に担当しました。 オープン
難易度 3/5 1〜2日 初心者へのやさしさ 76/100
apache/devlake#9177 · コメント 2 件 ·
メンテナーはふだん 3 日以内に返信
-
[Bug][Jira/DORA] Extra JQL does not isolate projects sharing the same Jira board対応中かも @veetmoradiya3628 が 20 日前に担当しました。 オープン
難易度 5/5 1週間以上 初心者へのやさしさ 35/100
apache/devlake#9151 · コメント 2 件 · 担当者 1 名 ·
メンテナーはふだん 3 日以内に返信
似ている issue
-
[schema-coverage] elasticstack_kibana_security_detection_rule対応中かも @github-actions が今日担当しました。 オープンacceptance-tests phase-coding schema-coverage testing triaged
難易度 2/5 1〜3時間 初心者へのやさしさ 65/100
elastic/terraform-provider-elasticstack#5186 ·
メンテナーはふだん 1 日以内に返信
-
難易度 2/5 1〜3時間 初心者へのやさしさ 78/100
jaegertracing/jaeger#9830 ·
メンテナーはふだん 1 日以内に返信
-
難易度 2/5 1〜3時間 初心者へのやさしさ 76/100
apache/rocketmq-dashboard#6318 ·
メンテナーはふだん 5 日以内に返信
-
難易度 2/5 1〜3時間 初心者へのやさしさ 84/100
メンテナーはふだん 1 日以内に返信
-
難易度 2/5 1〜3時間 初心者へのやさしさ 83/100
GoogleCloudPlatform/opentelemetry-operations-collector#710 ·
メンテナーはふだん 1 日以内に返信