S3 put_object should accept a block to facillitate chunked writes
Los mantenedores suelen responder en 1 día
Nadie ha tomado este issue todavía.
Evaluación
- Dificultad
- 4/5
- Tiempo estimado
- 3-5 días
- Aptitud para principiantes
- 45/100
Línea de trabajo
No se nombran archivos de implementación ni pruebas. Empieza comparando el comportamiento existente del bloque get_object con el manejo de solicitudes de put_object y, a continuación, añade cobertura para producir el body de la solicitud y escribir chunks explícitos; el trabajo estará terminado cuando put_object suba el contenido producido sin almacenar en búfer el objeto completo.
Escrito por el modelo de indexación a partir del texto del issue.
Descripción
Describe the feature
After using get_object's chunked read, I assumed put_object similarly supported chunked writing:
client.put_object(bucket: blob.bucket, key: blob.key) do |buffer|
while chunk = blob.read(16 * 256)
buffer << chunk
end
end
For reference, get_object supports this:
client.get_object(bucket: blob.bucket, key: blob.key) do |chunk|
buffer << chunk
end
But this isn't currently supported and results in an empty object, since the block is ignored.
Use Case
I want to write an IO to S3 while maintaining a low memory footprint, while being explicit with how much I read for each chunk. I do not want to rely on S3 internals to choose how large my chunks should be.
Proposed Solution
Similarly to get_object, allow put_object to accept a block, yielding the internal request body.
Other Information
No response
Acknowledgements
- I may be able to implement this feature request
- This feature might incur a breaking change
SDK version used
1.113.0
Environment details (OS name and version, etc.)
Linux 5.15.153.1-microsoft-standard-WSL2 #1 SMP Fri Mar 29 23:14:13 UTC 2024 x86_64 x86_64 x86_64 GNU/Linux
- Lenguaje dominante
- Ruby
- Estrellas
- 3.7k
- Forks
- 1.2k
- Merge medio
- 1 d 16 h
- PR fusionados (30 d)
- 25
Preparar el entorno
- Sin Dockerfile ni archivo de Docker Compose
- Tiene una plantilla de pull request
- Leer la guía de contribución
Primeros pasos
- Lee el issue completo y luego la guía de contribución del proyecto.
- Comenta en el issue que vas a ocuparte — evita que dos personas hagan lo mismo.
- Haz un fork del repositorio y trabaja en una rama.
- Abre un pull request que haga referencia al número del issue.
Más de aws/aws-sdk-ruby
-
service-api
Dificultad 2/5 1-3 horas Aptitud para principiantes 68/100
aws/aws-sdk-ruby#3395 · 1 comentario ·
Los mantenedores suelen responder en 1 día
-
BedrockAgentCore: invoke_agent_runtime buffers entire response instead of streaming in real-timeAbiertodocumentation p3 queued
Dificultad 4/5 3-5 días Aptitud para principiantes 48/100
aws/aws-sdk-ruby#3348 · 6 comentarios · 1 reacción ·
Los mantenedores suelen responder en 1 día
-
credentials static web identity credentials not picked up without an explicit profile optionAbiertofeature-request needs-major-version
Dificultad 3/5 1-2 días Aptitud para principiantes 48/100
aws/aws-sdk-ruby#3241 · 5 comentarios ·
Los mantenedores suelen responder en 1 día
-
investigating service-api
Dificultad 4/5 3-5 días Aptitud para principiantes 35/100
aws/aws-sdk-ruby#3217 · 4 comentarios ·
Los mantenedores suelen responder en 1 día
-
service-api
Dificultad 5/5 Más de una semana Aptitud para principiantes 25/100
aws/aws-sdk-ruby#3191 · 1 comentario ·
Los mantenedores suelen responder en 1 día
Todos los issues de aws/aws-sdk-ruby
Issues similares
-
Dificultad 2/5 1-3 horas Aptitud para principiantes 75/100
rubyevents/rubyevents#2277 ·
Los mantenedores suelen responder en 1 día
-
Dificultad 1/5 1-3 horas Aptitud para principiantes 92/100
Los mantenedores suelen responder en 2 días