标签：cuda

2025-11-23andy阅读(201)评论(0)

在构建基于 CUDA 的高性能计算或 AI 模型部署项目时，我们经常依赖 CMake 和 CLion 来管理复杂的 C++ 和 CUDA 代码。当 CMake 无法自动定位 CUDA 工具包时，您会遇到以下常见的错误提示： -- Found...

2025-11-08andy阅读(250)评论(0)

如何在单个GPU上利用CUDA Streams实现模型推理的异步计算与性能优化？ 在现代AI基础设施中，优化推理延迟和提高GPU利用率是核心挑战。即使在单个GPU上，如果不进行适当的调度，许多操作（如数据传输和计算）也会串行执行，导致计算资...