Skip to content

Latest commit

 

History

History
188 lines (145 loc) · 5.37 KB

File metadata and controls

188 lines (145 loc) · 5.37 KB

llm-security-test 迭代计划 v1.0

最后更新:2026-04-24


项目愿景

打造最全面的开源 LLM 安全测试 Skill,帮助开发者和安全研究人员评估和提升大语言模型的安全防护能力。


迭代路线图

v1.0 (当前) ──┬── v1.1 ──┬── v2.0 ──┬── v3.0
              │          │          │
              │     增强版测试     │     企业版
              │    + 自动化平台
              │
         基础功能完成

v1.1 - 增强版测试 (预计 2-4 周)

目标

扩展测试覆盖范围,增加更多攻击向量和行业场景

功能清单

功能 优先级 状态
多语言攻击测试 P1 待开发
日语攻击用例 (DAN变种) P2 待开发
韩语攻击用例 P2 待开发
行业场景测试 P1 待开发
金融行业安全测试套件 P2 待开发
医疗健康安全测试套件 P2 待开发
教育行业安全测试套件 P2 待开发
API 集成增强 P1 待开发
OpenAI 格式兼容 P2 待开发
Anthropic Claude 兼容 P2 待开发
本地模型测试支持 P2 待开发
报告导出 P1 待开发
PDF 格式报告 P2 待开发
JSON 格式数据导出 P2 待开发
HTML 可视化报告 P3 待开发

验收标准

  • 新增 100+ 多语言测试用例
  • 新增 3+ 行业测试场景
  • 支持主流 LLM API 对接
  • 实现 PDF 报告导出

v2.0 - 自动化平台 (预计 2-3 月)

目标

构建完整的自动化测试平台,支持持续监控

功能清单

功能 优先级 状态
Web 管理界面 P1 待开发
测试任务管理 P1 待开发
测试结果可视化 P1 待开发
趋势分析看板 P2 待开发
CI/CD 集成 P1 待开发
GitHub Actions 插件 P1 待开发
Jenkins 插件 P2 待开发
GitLab CI 集成 P2 待开发
自动化调度 P1 待开发
定时测试任务 P1 待开发
触发式测试 (PR/部署) P1 待开发
告警通知 (Webhook) P2 待开发
对比分析 P2 待开发
多模型横向对比 P2 待开发
版本迭代对比 P2 待开发
社区数据 P2 待开发
公开测试数据集 P2 待开发
安全事件库 P3 待开发

验收标准

  • Web 界面可部署运行
  • GitHub Actions 市场发布
  • 支持定时和触发式测试
  • 社区测试数据集上线

v3.0 - 企业版 (预计 3-6 月)

目标

为企业提供完整的安全合规解决方案

功能清单

功能 优先级 状态
企业安全合规 P1 待开发
SOC2 合规检查模块 P2 待开发
GDPR 合规检查模块 P2 待开发
等保2.0 合规检查 P2 待开发
高级威胁检测 P1 待开发
高级持续性威胁 (APT) 模拟 P2 待开发
红队自动化攻击框架 P2 待开发
权限与审计 P1 待开发
多用户权限管理 P2 待开发
操作审计日志 P2 待开发
私有化部署 P1 待开发
Docker 一键部署 P1 待开发
Kubernetes 支持 P2 待开发
集成生态 P2 待开发
Splunk SIEM 集成 P3 待开发
Azure OpenAI 集成 P2 待开发
AWS Bedrock 集成 P2 待开发

验收标准

  • 支持主流合规标准
  • 提供企业级安全功能
  • 支持私有化部署
  • 完成 3+ 企业集成

当前任务看板

P0 - 紧急

任务 负责人 截止日期 状态
(无) - - -

P1 - 重要

任务 负责人 截止日期 状态
添加中文测试用例 社区贡献 - 待认领
完善文档 社区贡献 - 待认领

P2 - 常规

任务 负责人 截止日期 状态
发布到 SkillsMP YI597 - 待处理
添加贡献指南 YI597 - 待处理

贡献指南

欢迎社区贡献!

如何贡献

  1. Fork 仓库
  2. 创建分支: git checkout -b feature/your-feature
  3. 提交更改: git commit -m 'Add some feature'
  4. 推送分支: git push origin feature/your-feature
  5. 创建 Pull Request

贡献类型

  • 🐛 Bug 修复: 修复测试脚本或用例中的问题
  • 新功能: 添加新的测试用例或功能
  • 📖 文档: 改进文档或添加翻译
  • 🧪 测试: 添加或改进测试用例
  • 💡 想法: 提出新的功能建议

里程碑

版本 目标日期 主要交付
v1.0 2026-04-21 ✅ 基础版发布
v1.1 2026-05-15 增强版测试
v2.0 2026-07-01 自动化平台
v3.0 2026-10-01 企业版

反馈与支持