WebMCP "real-user measurement"
维护者通常 1 天内回复
还没有人认领这个 Issue。
评估
- 难度
- 5/5
- 预计耗时
- 一周以上
- 新手友好度
- 25/100
- Issue 类型
- 功能
- 描述清晰度
- 需要澄清
- 活跃度
- 活跃
- 技术栈
- web-dev
- 领域
- web-dev
调研方向
This is an exploratory design issue about measuring whether in-browser WebMCP tool calls achieve real user goals; it does not identify an implementation file, API, test, or concrete acceptance criteria. Start by reviewing the issue discussion and the WebMCP specification or examples for tool-call instrumentation, then define a measurable feedback mechanism such as thumbs-up/down signals. Done would require an agreed measurement approach, its integration point, and criteria for evaluating changes to the implementation or agent.
由索引模型根据 Issue 内容生成。
描述
For in-browser agents, it might be interesting to think of ways in which developers can measure how their WebMCP implementation is doing.
While theoretically they can instrument their tool calls to see how often the agent calls them, they won't be able to know if that tool call actually corresponded to what the user was trying to achieve.
A way to measure the latter (e.g. by reflecting user's thumbs up/down votes to the site) could help enable some measurement of changes on either the WebMCP implementation or the agent's.
- 主要语言
- Bikeshed
- 星标
- 4.7k
- 派生
- 328
- 平均合并
- 2 天 15 小时
- 30 天内合并 PR
- 16
环境准备
这个项目没有提供开发容器、Dockerfile 或贡献指南，环境需要你自己搭建：先看它的 README，通用步骤见我们的新手贡献指南。
从这里开始
- 先读完整个 Issue，再读项目的贡献指南。
- 在 Issue 下留言说明你要接手 —— 这能避免两个人做同样的事。
- Fork 仓库，在一个分支上完成修改。
- 提交 Pull Request，并在描述里引用这个 Issue 编号。
webmachinelearning/webmcp 的其他 Issue
-
难度 1/5 1-3 小时 新手友好度 72/100
webmachinelearning/webmcp#360 ·
维护者通常 1 天内回复
-
Say how an agent should weigh annotations that the page wrote about itself可能已有人在做 关联的 PR 仍在进行中或已合并。 未关闭
难度 2/5 1-3 小时 新手友好度 72/100
webmachinelearning/webmcp#353 ·
维护者通常 1 天内回复
-
难度 2/5 1-3 小时 新手友好度 67/100
webmachinelearning/webmcp#343 · 1 个 reaction ·
维护者通常 1 天内回复
-
Agenda+ i18n-tracker
难度 2/5 1-3 小时 新手友好度 75/100
webmachinelearning/webmcp#273 · 3 条评论 ·
维护者通常 1 天内回复
-
a11y-tracker Agenda+
难度 2/5 1-3 小时 新手友好度 67/100
webmachinelearning/webmcp#272 · 4 条评论 · 2 个 reaction ·
维护者通常 1 天内回复
查看 webmachinelearning/webmcp 的全部 Issue
相似的 Issue
-
frontend
难度 2/5 1-3 小时 新手友好度 78/100
维护者通常 1 天内回复
-
bug
难度 2/5 1-3 小时 新手友好度 68/100
awslabs/visual-asset-management-system#542 ·
维护者通常 1 天内回复
-
enhancement
难度 2/5 1-3 小时 新手友好度 72/100
epam/statgpt-admin-frontend#296 ·
维护者通常 1 天内回复
-
🐛 bug 🧑💼 conseillers
难度 2/5 1-3 小时 新手友好度 65/100
betagouv/conseillers-entreprises#4768 ·
维护者通常 1 天内回复
-
bug
难度 2/5 1-3 小时 新手友好度 82/100
维护者通常 1 天内回复