スキル、カスタムエージェント、MCP を変えたあとに、同じ課題で回帰を見る。public preview。対象は Copilot Individual、Business、Enterprise。評価エンジンは Vally。各実行は始まる前に承認する。

  • VS Code は Marketplace の GitHub Copilot Evals 拡張
  • CLI は GitHub Copilot Evals プラグイン
  • Copilot app は Customize から github/evals マーケットプレイスを足してプラグインを入れる

/eval か、普段の言葉で eval の作成、実行、失敗理由の確認、変更前後の比較を頼む。

#参考文献