dotnet/orleans

[PERF] Investigate optimizations for large graphs

Open

#8.140 aberto em 12 de nov. de 2022

Ver no GitHub
 (1 comment) (1 reaction) (0 assignees)C# (10.777 stars) (2.123 forks)batch import
area-performancearea-serializationenhancementhelp wanted

Description

See this twitter thread for reference: https://twitter.com/neuecc/status/1589902671540256771?s=20&t=AcVRk8mwSdMyQJT2c5jyDg

Note: we could also consider avoiding reference tracking for types by default. There are some complexities involved, like what do you do with built-in types, eg string, byte[], List<object>. You could potentially have ref-tracking variants of the codecs or pass a reference tracking preference to the codec and have an attribute per-property to indicate a reference tracking preference.

Guia do colaborador

Pilha de tecnologia
csharp
Domain
performancebackend
Tipo Issue
performance
DifficultyDificuldade de implementação estimada para um novo contribuidor, de 1 para alterações muito pequenas a 5 para trabalho de nível especializado.
4
Tempo estimadoUm intervalo de tempo aproximado para um colaborador experiente investigar, implementar, testar e preparar um pull request.
over 1 week
Status da atividadeQuão disponível o issue aparece agora: novo, ativo, obsoleto, bloqueado ou aguardando entrada do mantenedor.
stale
ClarityCom que clareza o issue explica a mudança esperada, os critérios de aceitação e a próxima etapa.
needs investigation
Prerequisites
C# knowledgeOrleans framework basicsserialization conceptsperformance profiling
Simpatia para novatosUma pontuação de 1 a 100 que estima o quão acessível este issue é para colaboradores iniciantes.
25
Direção de pesquisa
Investigate the referenced Twitter thread by neuecc for optimizations used in C# serialization, particularly for large graphs. Consider avoiding reference tracking by default for types like string, byte[], List<object>. Explore creating ref tracking variants of codecs or passing a reference tracking preference to the codec with an attribute per property. Examine existing Orleans serialization code, likely in the Orleans.Serialization namespace, to identify current implementation details and potential optimization points.