Daft course

Aperta
#43 10 commenti 4 reazioni 0 assegnatari Vedi su GitHub

Nessuno ha ancora preso questa issue.

Valutazione

Difficoltà
5/5
Tempo stimato
Più di una settimana
Idoneità per principianti
25/100
Tipo di issue
Documentazione
Chiarezza
Abbastanza chiara
Stato di attività
Ferma
Stack tecnologico
python, rust

Direzione di ricerca

Start by reviewing the proposed nine-chapter outline in the issue; it does not name repository files or tests. Chapter 01 is marked complete, while chapters 02–09 are marked in progress. Done would mean developing the proposed Daft course content, but the scope and current state need clarification before taking it on.

Scritto dal modello di indicizzazione a partire dal testo della issue.

Descrizione

enhancement
Description

I am interested in contributing a course on Daft, a distributed dataframe library that nicely integrates with various core components of the data engineering scene, including Ray, Iceberg, Delta Lake, Unity Catalog, and common cloud providers.

I propose organizing the course chapters along these lines:

Notebook Description Status Author
01 What Makes Daft Special? Discusses Daft's implementation in Rust and its high-level Python API, focusing on distributed computing. ✅ @peter-gy
02 Core Concepts Showcases basic dataframe syntax, SQL API, multimodal data support, and fundamental architecture. 🚧
03 Data Types Discusses Arrow-native operations, Daft data types, and mapping to Arrow. 🚧
04 Common Data Operations Covers essential data operations like filtering, joins, sorting, and aggregations. 🚧
05 Working with Files Explains reading and writing various formats and discusses Daft's data partitioning for performance. 🚧
06 Working with Data Catalogs Provides examples of integrating with Iceberg, DeltaLake, and Unity Catalog. 🚧
07 Multimodal Data Discusses handling images, embeddings, and complex data types in Daft. 🚧
08 User-Defined Functions Explores use cases, trade-offs of UDFs, integration within Daft's lazy model, and performance tips. 🚧
09 Distributed Computing Introduces Ray and explains executing workloads through the Daft API on a Ray backend. 🚧
Lingua principale
Python
Stelle
369
Fork
69
Merge medio
1h 32m
PR unite (30g)
4

Preparare l'ambiente

  • Include un Dockerfile o un file Docker Compose
  • Ha un modello di pull request
  • Nessuna guida per i contributori

Come iniziare

  1. Leggi tutta la issue e poi la guida ai contributi del progetto.
  2. Commenta sulla issue per dire che te ne occupi tu — evita che due persone facciano lo stesso lavoro.
  3. Fai un fork del repository e lavora su un branch.
  4. Apri una pull request che faccia riferimento al numero della issue.

Altre issue di marimo-team/learn

Tutte le issue di marimo-team/learn

Issue simili

Altre issue su Python

Ricevi le nuove issue nella tua casella

Un breve riepilogo di issue GitHub adatte ai principianti.