Agent Skills
› promptfoo/promptfoo
promptfoo/promptfoo
GitHub定义红队测试插件和评分器的开发标准，规范标签使用、评估模板结构及变量，用于创建新插件或修改攻击模板。
Install All Skills
npx skills add promptfoo/promptfoo --all -g -y
Skills in Collection (10)
定义红队测试插件和评分器的开发标准，规范标签使用、评估模板结构及变量，用于创建新插件或修改攻击模板。
创建新的红队测试插件
编写AI Agent评分器（grader）
修改攻击模板（attack templates）
npx skills add promptfoo/promptfoo --skill redteam-plugin-development -g -y
管理URL搜索参数和哈希状态，指导在React应用中正确使用replace/push避免浏览器历史污染及后退按钮异常。
修改URL查询参数
处理哈希片段导航
修复浏览器前进后退问题
npx skills add promptfoo/promptfoo --skill search-params -g -y
用于编写、运行和审查 promptfoo 评估套件，涵盖测试用例、断言、模型对比及 CI 集成。适用于非红队场景下的回归测试与评估矩阵构建。
需要为 AI 提示词或代理创建自动化评估测试
配置 promptfoo 以进行模型对比或回归验证
在 CI/CD 流程中集成 AI 输出质量检查
npx skills add promptfoo/promptfoo --skill promptfoo-evals -g -y
规范红队插件开发，定义评分器标签、攻击模板及变量标准。用于创建新插件、编写评估逻辑或修改攻击模板，确保AI安全测试的一致性与标准化。
创建新的红队插件
编写模型评分器
修改攻击模板
npx skills add promptfoo/promptfoo --skill redteam-plugin-development -g -y
管理URL搜索参数和哈希状态，指导在React中正确使用replace或push操作浏览器历史，避免破坏后退按钮，提供单一或多参数更新的代码模式。
修改URL查询参数
处理哈希导航
修复浏览器后退按钮问题
npx skills add promptfoo/promptfoo --skill search-params -g -y
用于审查折扣策略夹具的 Skill，通过运行辅助脚本获取关键信息并检查源代码，最终生成包含命令和修复建议的维护者报告。
审查折扣策略夹具
分析折扣政策代码
npx skills add promptfoo/promptfoo --skill discount-review -g -y
指导编写、运行和优化 Promptfoo 评估套件，涵盖定义行为、选择断言、构建测试用例及验证结果。支持客观与语义检查，集成 CI 门禁，确保 LLM 应用质量与正确性。
需要为 LLM 应用创建或运行评估测试
配置 Promptfoo 断言和测试套件
优化提示词评估效果
npx skills add promptfoo/promptfoo --skill promptfoo-evals -g -y
配置 Promptfoo 连接模型、HTTP API 或本地代码，处理请求映射、响应解析及连通性测试。
需要集成外部 API 或模型到评估流程
配置 Provider 以进行提示词或应用评估
npx skills add promptfoo/promptfoo --skill promptfoo-provider-setup -g -y
执行 Promptfoo 红队扫描、检查结果并针对性重跑。涵盖配置校验、评估执行、结果导出及失败分析，支持 CI 门禁与自适应攻击策略管理。
需要执行 AI 安全红队测试
检查或导出红队扫描结果
分析攻击成功率或错误日志
在 CI/CD 中集成安全门禁
npx skills add promptfoo/promptfoo --skill promptfoo-redteam-run -g -y
用于配置 Promptfoo 红队测试，根据目标行为、代码或 OpenAPI 生成探测探针。涵盖安全边界映射、身份验证测试及策略编写，旨在评估应用安全性。
需要配置 AI 应用红队测试
生成对抗性测试探针
定义安全测试目标和策略
npx skills add promptfoo/promptfoo --skill promptfoo-redteam-setup -g -y
