标签：鲁棒

2026-01-03andy阅读(4)评论(0)

如何设计一个多层防御的鲁棒系统提示以防止大模型越狱攻击 在模型部署中，系统提示（System Prompt）是AI基础设施安全性的第一道防线。然而，仅仅依靠一段文本指令很难抵御日益复杂的“越狱”（Jailbreaking）和“提示注入”（P...

2025-12-05andy阅读(94)评论(0)

在AI模型部署到生产环境，尤其是自动驾驶或医疗等安全攸关领域时，模型的鲁棒性是至关重要的。量化模型的鲁棒性边界，即找到导致模型分类失败的最小输入扰动，是保障系统可靠性的关键步骤。本文将深入探讨如何利用像NVIDIA的VerifAI这样的形式...