Better "expected results" in ADA
@naman-msft já está trabalhando nisso.
Desde 11/3/2025.
Avaliação
Esta issue ainda não foi avaliada.
Descrição
A common failure in ADA is the result of poor result formatting. In my experience we can significantly improve on this by having the generation use a regular expression for validation rather than the similarity. This is because the system will often use truncated results (which is good from a readability perspective). For example:
{
"agentPoolProfiles": [
{
"name": "nodepool1",
"count": 1,
"vmSize": "Standard_DS2_v2",
"maxPods": 110,
"osType": "Linux"
}
],
"dnsPrefix": "AKSClusterxxx-dns",
"provisioningState": "Succeeded",
"resourceGroup": "AKSLabResourceGroupxxx",
"name": "AKSClusterxxx",
"type": "Microsoft.ContainerService/ManagedClusters",
...
}
However, this is not valid JSON and thus the validation step fails.
In this case, and in many like it, what we are actually looking for is "provisioningState": "Succeeded". Therefore for responses like this one we can use:
<!-- expected_similarity=.*Succeeded -->
On a similar note, it seems the tool gives a default similarity value of 0.3 which, for the most part, is too low to be reliable.
- Linguagem predominante
- Python
- Estrelas
- 13
- Forks
- 27
- Métricas de merge de PRs
- Nenhum PR com merge em 30d
Preparar o ambiente
Este projeto não oferece contêiner de desenvolvimento, Dockerfile nem guia de contribuição, então a configuração fica por sua conta: comece pelo README e veja nosso guia da primeira contribuição para os passos gerais.
Primeiros passos
- Leia a issue inteira e depois o guia de contribuição do projeto.
- Comente na issue dizendo que vai assumir — evita que duas pessoas façam o mesmo trabalho.
- Faça um fork do repositório e trabalhe em uma branch.
- Abra um pull request que referencie o número da issue.
Mais de MicrosoftDocs/executable-docs
-
Run security check on all exec docs for vulnerability detectionTalvez livre de novo @naman-msft assumiu há 565 dias e não há nenhum pull request aberto. Aberta
MicrosoftDocs/executable-docs#675 · 1 responsável ·
-
Enhance Content of DocsTalvez livre de novo @naman-msft assumiu há 565 dias e não há nenhum pull request aberto. Aberta
MicrosoftDocs/executable-docs#674 · 1 responsável ·
-
Incorrect numbering of steps (possibly when steps > 10)Talvez livre de novo @naman-msft assumiu há 565 dias e não há nenhum pull request aberto. Aberta
MicrosoftDocs/executable-docs#673 · 1 responsável ·
-
Content descriptions unclearTalvez livre de novo @naman-msft assumiu há 565 dias e não há nenhum pull request aberto. Aberta
MicrosoftDocs/executable-docs#672 · 1 responsável ·
-
Regular testing of all scenarios in this repoTalvez livre de novo @naman-msft assumiu há 565 dias e não há nenhum pull request aberto. Aberta
MicrosoftDocs/executable-docs#671 · 1 responsável ·
Todas as issues de MicrosoftDocs/executable-docs
Issues semelhantes
-
Claiming namespace apexdevAbertanamespace operations
Dificuldade 1/5 Menos de uma hora Facilidade para iniciantes 72/100
EclipseFdn/open-vsx.org#13737 ·
Mantenedores costumam responder em até 1 dia
-
Dificuldade 2/5 1-3 horas Facilidade para iniciantes 72/100
zhuima/awesome-cloudflare#237 ·
-
Zero-token evaluations are treated as missing cost in selectionTalvez já em andamento @sylvesterkaczmarek assumiu hoje. Aberta
Dificuldade 2/5 1-3 horas Facilidade para iniciantes 76/100
google-research/rrsi#6 ·
-
bug
Dificuldade 2/5 1-3 horas Facilidade para iniciantes 88/100
aws-samples/sample-aws-genai-db-modernizer#294 ·
Mantenedores costumam responder em até 1 dia
-
feedback simulation workshop
Dificuldade 2/5 1-3 horas Facilidade para iniciantes 84/100
githubnext/gh-aw-workshop#4174 ·
Mantenedores costumam responder em até 1 dia