[Feature Request]: Spark SQL Iceberg table support
Chưa có ai nhận issue này.
Đánh giá
- Độ khó
- 3/5
- Thời gian dự kiến
- 1-2 ngày
- Mức phù hợp với người mới
- 45/100
- Loại issue
- Tính năng
- Độ rõ ràng
- Khá rõ ràng
- Mức độ hoạt động
- Đình trệ
- Công nghệ
- spark, sql, typescript
- Lĩnh vực
- data-engineering, tooling
Hướng nghiên cứu
Bắt đầu bằng cách tái hiện truy vấn ví dụ với trình phân tích cú pháp Spark SQL và so sánh với các ví dụ Iceberg Spark DDL được liên kết. Được xem là hoàn tất khi trình phân tích cú pháp chấp nhận các tham chiếu bốn phần catalog.db.table.branch cùng các join và alias được hiển thị mà không có các lỗi đã nêu.
Do mô hình lập chỉ mục viết ra từ nội dung của issue.
Mô tả
Topic
Support new SQL
Description
Currently linter does not support Iceberg syntax operations. One of the gaps identified was the lack of 4 parts table support convention which now can consist of catalog.db.table.branch. Fore example:
select
h.made_current_at,
s.operation,
h.snapshot_id,
h.is_current_ancestor,
s.summary['spark.app.id']
from prod.db.table.history h
join prod.db.table.snapshots s
on h.snapshot_id = s.snapshot_id
order by made_current_at;
Error text:
* Line:7 - 'table' is not valid at this position, expecting an existing function; Line:7 - '.' is not valid at this position; Line:7 - 'h' is not valid at this position; Line:8 - '.' is not valid at this position; Line:8 - 's' is not valid at this position;
Samples of Iceberg based syntax are available: https://iceberg.apache.org/docs/latest/spark-ddl/#create-table-as-select
- Ngôn ngữ chính
- TypeScript
- Star
- 394
- Fork
- 108
- Merge trung bình
- 5 phút
- Pull request đã merge (30 ngày)
- 1
Hướng dẫn đóng góp
Bắt đầu từ đâu
- Đọc hết issue, rồi đọc hướng dẫn đóng góp của dự án.
- Bình luận trên issue rằng bạn sẽ nhận — tránh hai người làm cùng một việc.
- Fork repository và làm thay đổi trên một nhánh.
- Mở pull request có tham chiếu số hiệu của issue.
Issue khác của DTStack/dt-sql-parser
-
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 78/100
DTStack/dt-sql-parser#493 ·
-
Độ khó 5/5 Hơn một tuần Mức phù hợp với người mới 25/100
DTStack/dt-sql-parser#490 · 1 bình luận ·
-
Độ khó 5/5 Hơn một tuần Mức phù hợp với người mới 25/100
DTStack/dt-sql-parser#489 ·
-
Độ khó 5/5 Hơn một tuần Mức phù hợp với người mới 35/100
DTStack/dt-sql-parser#488 ·
-
enhancement improvement
Độ khó 4/5 3-5 ngày Mức phù hợp với người mới 35/100
DTStack/dt-sql-parser#445 · 2 bình luận ·
Tất cả issue của DTStack/dt-sql-parser
Issue tương tự
-
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 75/100
safetrustcr/dApp-SafeTrust#426 ·
-
area:workflow bug ready-for-agent
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 75/100
fil-donadoni/tolaria#4409 ·
-
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 70/100
Fission-AI/OpenSpec#1960 ·
-
Add dependabot Đang mở
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 70/100
-
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 75/100
corsairdev/corsair#1764 ·