Git-sync with kubernetesExecutors and using https
Maintainer thường phản hồi trong vòng 1 ngày
Chưa có ai nhận issue này.
Đánh giá
- Độ khó
- 4/5
- Thời gian dự kiến
- 3-5 ngày
- Mức phù hợp với người mới
- 35/100
- Loại issue
- Lỗi
- Độ rõ ràng
- Khá rõ ràng
- Mức độ hoạt động
- Đình trệ
- Công nghệ
- git, kubernetes, rust
- Lĩnh vực
- devops, infrastructure
Hướng nghiên cứu
So sánh các thiết lập git-sync được hiển thị cho webserver và scheduler với các thiết lập được tạo cho kubernetesExecutors, tập trung vào việc truyền gitSyncConf và cờ one-time. Xem lại phần thảo luận trong PR #456, đặc biệt là bình luận issue được liên kết, sau đó xác minh rằng cả ba loại workload đều tạo ra cấu hình git-sync tương đương cho các repository HTTPS.
Do mô hình lập chỉ mục viết ra từ nội dung của issue.
Mô tả
Affected Stackable version
Nightly
Affected Apache Airflow version
2.8.1
Current and expected behavior
Using this AirflowCluster:
---
apiVersion: airflow.stackable.tech/v1alpha1
kind: AirflowCluster
metadata:
name: airflow
spec:
image:
productVersion: 2.8.1
clusterConfig:
loadExamples: false
exposeConfig: false
listenerClass: external-unstable
credentialsSecret: simple-airflow-credentials
dagsGitSync:
- repo: https://custom.gitlab.com/repos/airflow-dags.git
branch: "main"
gitFolder: "dags"
depth: 10
wait: 20
credentialsSecret: gitcredentials
gitSyncConf:
--rev: HEAD
--git-config: http.sslCAInfo:/tmp/ca-cert/ca.crt
volumeMounts:
- name: "cert-ca"
mountPath: "/tmp/ca-cert"
volumes:
- name: "cert-ca"
configMap:
name: "cert-ca"
items:
- key: "ca.crt"
path: "ca.crt"
webservers:
roleGroups:
default:
replicas: 1
podOverrides:
spec:
containers:
- name: gitsync-1
volumeMounts:
- name: "cert-ca"
mountPath: "/tmp/ca-cert"
kubernetesExecutors:
config:
resources:
cpu:
min: 400m
max: 800m
memory:
limit: 2Gi
podOverrides:
spec:
containers:
- name: gitsync-1
volumeMounts:
- name: "cert-ca"
mountPath: "/tmp/ca-cert"
schedulers:
roleGroups:
default:
replicas: 1
podOverrides:
spec:
containers:
- name: gitsync-1
volumeMounts:
- name: "cert-ca"
mountPath: "/tmp/ca-cert"
The gitSyncConf does not seem to get propagated for the kubernetesExecutors. Also the git-sync container has a one-time=true flag set for the git-sync command
Follow up this MR: https://github.com/stackabletech/airflow-operator/pull/456#issuecomment-2230116710
Expected behavior: the webserver, scheduler and kubernetesExecutors are configured exactly the same for the git-sync containers
Possible solution
No response
Additional context
No response
Environment
No response
Would you like to work on fixing this bug?
None
- Ngôn ngữ chính
- Rust
- Star
- 32
- Fork
- 6
- Merge trung bình
- 21 giờ 38 phút
- Pull request đã merge (30 ngày)
- 13
Chuẩn bị môi trường
- Không có Dockerfile hay tệp Docker Compose
- Có mẫu pull request
- Không có hướng dẫn đóng góp
Bắt đầu từ đâu
- Đọc hết issue, rồi đọc hướng dẫn đóng góp của dự án.
- Bình luận trên issue rằng bạn sẽ nhận — tránh hai người làm cùng một việc.
- Fork repository và làm thay đổi trên một nhánh.
- Mở pull request có tham chiếu số hiệu của issue.
Issue khác của stackabletech/airflow-operator
-
type/bug
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 72/100
stackabletech/airflow-operator#855 · 1 bình luận ·
Maintainer thường phản hồi trong vòng 1 ngày
-
good first issue type/feature-improvement
Độ khó 4/5 3-5 ngày Mức phù hợp với người mới 45/100
stackabletech/airflow-operator#760 ·
Maintainer thường phản hồi trong vòng 1 ngày
-
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 42/100
stackabletech/airflow-operator#697 · 1 bình luận ·
Maintainer thường phản hồi trong vòng 1 ngày
-
Độ khó 5/5 Hơn một tuần Mức phù hợp với người mới 25/100
stackabletech/airflow-operator#638 ·
Maintainer thường phản hồi trong vòng 1 ngày
-
Integrate DAG editor in AirflowĐang mởtype/feature-new
Độ khó 5/5 Hơn một tuần Mức phù hợp với người mới 25/100
stackabletech/airflow-operator#593 ·
Maintainer thường phản hồi trong vòng 1 ngày
Tất cả issue của stackabletech/airflow-operator
Issue tương tự
-
[Misdetection] `text/tab-separated-values` file misdetected as `text/tsv`Có thể đã có người làm @bact đã nhận hôm nay. Đang mởmisdetection needs triage
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 70/100
Maintainer thường phản hồi trong vòng 1 ngày
-
C-bug
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 72/100
Maintainer thường phản hồi trong vòng 2 ngày
-
vxc prints a debug line '[flat-codegen] emitted module via the flat path' on every compileCó thể đã có người làm @YodHeVauHe đã nhận hôm nay. Đang mởdevex good first issue
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 82/100
Maintainer thường phản hồi trong vòng 1 ngày
-
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 68/100
Maintainer thường phản hồi trong vòng 3 ngày
-
Unused dependenciesĐang mở
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 72/100
Maintainer thường phản hồi trong vòng 1 ngày