スキル、カスタムエージェント、MCP を変えたあとに、同じ課題で回帰を見る。public preview。対象は Copilot Individual、Business、Enterprise。評価エンジンは Vally。各実行は始まる前に承認する。
- VS Code は Marketplace の GitHub Copilot Evals 拡張
- CLI は GitHub Copilot Evals プラグイン
- Copilot app は Customize から
github/evalsマーケットプレイスを足してプラグインを入れる
/eval か、普段の言葉で eval の作成、実行、失敗理由の確認、変更前後の比較を頼む。