Better "expected results" in ADA
@naman-msft 已經在處理了。
開始於 2025年3月11日。
評估
這個 Issue 還沒有評估資料。
描述
A common failure in ADA is the result of poor result formatting. In my experience we can significantly improve on this by having the generation use a regular expression for validation rather than the similarity. This is because the system will often use truncated results (which is good from a readability perspective). For example:
{
"agentPoolProfiles": [
{
"name": "nodepool1",
"count": 1,
"vmSize": "Standard_DS2_v2",
"maxPods": 110,
"osType": "Linux"
}
],
"dnsPrefix": "AKSClusterxxx-dns",
"provisioningState": "Succeeded",
"resourceGroup": "AKSLabResourceGroupxxx",
"name": "AKSClusterxxx",
"type": "Microsoft.ContainerService/ManagedClusters",
...
}
However, this is not valid JSON and thus the validation step fails.
In this case, and in many like it, what we are actually looking for is "provisioningState": "Succeeded". Therefore for responses like this one we can use:
<!-- expected_similarity=.*Succeeded -->
On a similar note, it seems the tool gives a default similarity value of 0.3 which, for the most part, is too low to be reliable.
- 主要語言
- Python
- 星號
- 13
- 分支
- 27
- PR 合併指標
- 30 天內沒有已合併 PR
環境準備
這個專案沒有提供開發容器、Dockerfile 或貢獻指南,環境需要你自己搭建:先看它的 README,通用步驟見我們的新手貢獻指南。
從這裡開始
- 先讀完整個 Issue,再讀專案的貢獻指南。
- 在 Issue 下留言說明你要接手 —— 這能避免兩個人做同樣的事。
- Fork 儲存庫,在一個分支上完成修改。
- 送出 Pull Request,並在描述裡引用這個 Issue 編號。
MicrosoftDocs/executable-docs 的其他 Issue
-
Run security check on all exec docs for vulnerability detection可能重新可做 @naman-msft 於 567 天前認領,目前沒有進行中的 PR。 未關閉
MicrosoftDocs/executable-docs#675 · 已指派 1 人 ·
-
Enhance Content of Docs可能重新可做 @naman-msft 於 567 天前認領,目前沒有進行中的 PR。 未關閉
MicrosoftDocs/executable-docs#674 · 已指派 1 人 ·
-
Incorrect numbering of steps (possibly when steps > 10)可能重新可做 @naman-msft 於 567 天前認領,目前沒有進行中的 PR。 未關閉
MicrosoftDocs/executable-docs#673 · 已指派 1 人 ·
-
Content descriptions unclear可能重新可做 @naman-msft 於 567 天前認領,目前沒有進行中的 PR。 未關閉
MicrosoftDocs/executable-docs#672 · 已指派 1 人 ·
-
Regular testing of all scenarios in this repo可能重新可做 @naman-msft 於 567 天前認領,目前沒有進行中的 PR。 未關閉
MicrosoftDocs/executable-docs#671 · 已指派 1 人 ·
查看 MicrosoftDocs/executable-docs 的全部 Issue
相似的 Issue
-
bug llm translation
難度 2/5 1-3 小時 新手友好度 78/100
維護者通常 1 天內回覆
-
Arkansas 2025 tax is $1.70 high above $100,000 net taxable income ($3,809 + 3.9% rule)可能已有人在做 @PavelMakarchuk 今天認領。 未關閉
難度 2/5 1-3 小時 新手友好度 74/100
PolicyEngine/policyengine-us#9828 ·
維護者通常 2 天內回覆
-
bug
難度 2/5 1-3 小時 新手友好度 68/100
jellyfin/jellyfin-mpv-shim#800 ·
維護者通常 1 天內回覆
-
skillfs: one malformed chat-log line aborts the entire skill-usage analysis (skill_usage_from_chat_logs.py)可能已有人在做 @zjncs 今天認領。 未關閉component:skillfs
難度 2/5 1-3 小時 新手友好度 82/100
agentic-os-org/ANOLISA#6116 · 1 則留言 ·
維護者通常 1 天內回覆
-
P4: low query
難度 2/5 1-3 小時 新手友好度 76/100
jeffknupp/association#336 ·