aws/aws-sdk-pandas

emr fleets with multiple instance types

Open

#553 geöffnet am 5. Feb. 2021

Auf GitHub ansehen
 (1 Kommentar) (2 Reaktionen) (1 zugewiesene Person)Python (3.560 Stars) (630 Forks)batch import
featurehelp wanted

Beschreibung

It would be nice if there was an option to multiple instance types to fleet configuration. When using aws emr create-cluster, this can be done by passing an argument like InstanceTypeConfigs=['{InstanceType=m5.xlarge,BidPrice=0.5,WeightedCapacity=2}']

Contributor Guide

Tech Stack
awspython
Domain
cloud
Issue Type
feature
SchwierigkeitGeschätzte Implementierungsschwierigkeit für neue Contributors, von 1 für sehr kleine Änderungen bis 5 für Expertenarbeit.
3
Geschätzte ZeitEin grober Zeitrahmen, um zu recherchieren, zu implementieren, zu testen und einen Pull Request vorzubereiten.
1-2 days
AktivitätsstatusWie verfügbar das Issue gerade wirkt: frisch, aktiv, stale, blockiert oder wartet auf Maintainer-Input.
blocked
KlarheitWie klar das Issue die erwartete Änderung, Akzeptanzkriterien und den nächsten Schritt erklärt.
clear
Voraussetzungen
AWS EMR conceptsPythonaws sdk pandas codebase
EinsteigerfreundlichkeitEin Score von 1 bis 100, der schätzt, wie zugänglich dieses Issue für First-Time Contributors ist.
25
Research-Richtung
Investigate the current implementation of EMR cluster creation in the aws sdk pandas library. Look for the function that handles create cluster and see how instance types are currently specified. The user wants to extend it to support multiple instance types via InstanceTypeConfigs. Check the existing code for any similar patterns and test coverage. Consider the trade offs between adding a new parameter and modifying the existing one.