m365-agent-evaluator
当用户希望使用公开的 @microsoft/m365-copilot-eval CLI 为 Microsoft 365 Copilot 声明式智能体创建、运行或分析评估套件时,使用此技能。触发意图包括“评估我的智能体”“测试我的智能体”“运行我的评估”“创建评估提示”“添加多轮测试”“调整评估器阈值”“我的智能体为什么失败”或“设置评估环境变量”。
机器翻译查看英文原文
Use this skill when a user wants to create, run, or analyze evaluation suites for Microsoft 365 Copilot declarative agents with the public @microsoft/m365-copilot-eval CLI. Trigger on intents such as "evaluate my agent", "test my agent", "run my evals", "create eval prompts", "add multi-turn tests", "tune evaluator thresholds", "why is my agent failing", or "set up eval environment variables".
适用对象:软件开发与测试。自动收录 · 待核查。
原作者说明节选
从固定版本的 SKILL.md 提取,保留原文语言。以下内容属于作者说明,本站尚未验证安装、兼容或运行结果。
查看英文原文
原文涵盖的主题
- M365 Agent Evaluator
- Always use this CLI invocation
- Activation workflow
- Current dataset contract
- Public evaluator names
- Common commands
- Version and PATH safety
- File conventions
Use this skill to help users evaluate Microsoft 365 Copilot declarative agents with @microsoft/m365-copilot-eval. The skill designs schema-compatible eval datasets, runs the public preview CLI, analyzes results, and recommends targeted fixes. Default to Microsoft 365 Agents Toolkit (ATK) projects when detected, but do not hard-stop solely because the current directory is not ATK. The CLI can also evaluate deployed agents with an explicit M365AGENTID or --m365-agent-id. Do not recommend the old private aka.ms installer, global installs, bare runevals, bare npx runevals, --input, or --html. 1. Identify the user goal: setup, dataset authoring, running evals, analyzing results, or updating an existing eval suite. 2. Load only the reference needed for the current goal: references/workflow.md for the end-to-end operator workflow and CLI commands. references/azure-setup.md for prerequisites, env files, and secret handling. references/eval-templates.md when creating or editing eval datasets. references/pra-framework.md when deciding what scenarios to generate. references/result-analysis.md after JSON/CSV/HTML results exist. references/guardrails.md before writing files, handling secrets, c
这里只展示节选,请以完整原文和当前要求为准。
- 来源仓库
- microsoft/skills
- 源文件
- .github/plugins/microsoft-365-agents-toolkit/skills/m365-agent-evaluator/SKILL.md
- 固定版本
- 9287b443662d2433c85621c7325ee72a0ce499b5
准备条件
- 本条仅收录原作者的技能元数据;请阅读完整说明,确认依赖、许可与使用条件。
第一件可以尝试的小事
先阅读原作者说明,再决定是否在自己的 AI 工具中使用。
对应 AI 工具说明
作者有说明不等于本站实机验证。没有证据时,不自动标为兼容、安全或免费。
来源与内容状态
本条为自动发现的元数据,尚未完成人工文档核查;适用性与运行结果待核查。
原作者:Microsoft Skills · 原作者仓库元数据。文档核查:未核查。最近来源检查:2026-11-10T19:02:08.014Z。
分类由名称、说明与路径规则生成,分类不代表已核实适配。
许可与权利归属
MIT。第三方内容及版权归原作者,使用条件以原文为准。
许可原文 ↗本站没有因同步、复制或用户自报成功而将资源标为运行验证通过。
限制与注意事项
- 元数据收录不代表本站已经安装、适配、实测或进行安全审查。