feat: refine dependency imports for preprocessing
Chưa có ai nhận issue này.
Đánh giá
- Độ khó
- 4/5
- Thời gian dự kiến
- 3-5 ngày
- Mức phù hợp với người mới
- 35/100
- Loại issue
- Tính năng
- Độ rõ ràng
- Cần làm rõ
- Mức độ hoạt động
- Đình trệ
- Công nghệ
- python
- Lĩnh vực
- data-engineering
Hướng nghiên cứu
Bắt đầu bằng cách xác định tệp định nghĩa processors được tham chiếu trong issue và kiểm tra cách các dependency của preprocessing hiện đang được import hoặc cài đặt. Công việc hoàn tất khi có thể chọn dependency theo từng loại preprocessing thay vì bắt buộc phải có tất cả dependency của preprocessing hoặc không có dependency nào, đồng thời hành vi cài đặt hoặc import liên quan được kiểm thử.
Do mô hình lập chỉ mục viết ra từ nội dung của issue.
Mô tả
At the moment, only one option is available: install all dependencies for preprocessing or don't install them. A user might want to install only the dependencies for one type of preprocessing (Website description, Timestamp, Entity, etc)
As proposed by @cccntu:
We can probably add if available then import, in the processors def file. But installing them all at once saves the trouble of seeing error then installing them one by one.
- Ngôn ngữ chính
- Python
- Star
- 29
- Fork
- 11
- Chỉ số merge pull request
- Không có pull request nào được merge trong 30 ngày
Chuẩn bị môi trường
Dự án này không cung cấp dev container, Dockerfile hay hướng dẫn đóng góp, nên bạn cần tự thiết lập môi trường: hãy bắt đầu từ README và xem hướng dẫn đóng góp lần đầu của chúng tôi để biết các bước chung.
Bắt đầu từ đâu
- Đọc hết issue, rồi đọc hướng dẫn đóng góp của dự án.
- Bình luận trên issue rằng bạn sẽ nhận — tránh hai người làm cùng một việc.
- Fork repository và làm thay đổi trên một nhánh.
- Mở pull request có tham chiếu số hiệu của issue.
Issue khác của bigscience-workshop/metadata
-
Common simple eval function to calculate pplCó thể làm lại được @shanyas10 đã nhận 1695 ngày trước và không có pull request nào đang mở. Đang mở
bigscience-workshop/metadata#138 · 1 người được giao ·
-
multi gpu trainingCó thể làm lại được @changjonathanc đã nhận 1728 ngày trước và không có pull request nào đang mở. Đang mở
bigscience-workshop/metadata#129 · 1 người được giao ·
-
Create Dataset with metadataĐang mở#dataset Epic
Độ khó 4/5 3-5 ngày Mức phù hợp với người mới 25/100
bigscience-workshop/metadata#124 · 3 reaction ·
-
Độ khó 5/5 Hơn một tuần Mức phù hợp với người mới 25/100
bigscience-workshop/metadata#122 ·
-
Which HTML tags should be used during training?Có thể làm lại được @SaulLu đã nhận 1759 ngày trước và không có pull request nào đang mở. Đang mở
bigscience-workshop/metadata#113 · 1 người được giao ·
Tất cả issue của bigscience-workshop/metadata
Issue tương tự
-
mermaid_extract.py silently discards single-line state-diagram notes; sequence notes are keptĐang mở
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 82/100
cathrynlavery/diagram-design#441 ·
Maintainer thường phản hồi trong vòng 2 ngày
-
[Cleanup] Include the public header in work_split.cppCó thể đã có người làm @blozano-tt đã nhận hôm nay. Đang mở
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 82/100
tenstorrent/tt-metal#60850 ·
Maintainer thường phản hồi trong vòng 1 ngày
-
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 78/100
Maintainer thường phản hồi trong vòng 1 ngày
-
backend::sglang bug language::python observability
Độ khó 2/5 Nửa ngày Mức phù hợp với người mới 65/100
Maintainer thường phản hồi trong vòng 1 ngày
-
Độ khó 1/5 Dưới một giờ Mức phù hợp với người mới 75/100
OpenShot/openshot-qt#6202 ·
Maintainer thường phản hồi trong vòng 1 ngày