标签：自定义

2026-03-11andy阅读(41)评论(0)

前言 在安卓端侧推理（如使用 MNN、NCNN 或 TFLite）时，经常会遇到框架不支持某些特殊算子（如特定的激活函数、自定义的特征融合层）的情况。此时，如果回退到 CPU 执行会造成严重的性能瓶颈。本文将介绍如何编写一个 OpenGL ...

2026-03-06andy阅读(54)评论(0)

背景 在深度学习模型部署过程中，我们经常会遇到由于推理框架（如 MNN、NCNN、TNN）更新较慢，导致某些新出的激活函数（如 Swish、HardSwish）或者自定义算子不被支持的情况。这时，开发者通常面临两个选择：一是修改模型结构，用...

2026-03-01andy阅读(58)评论(0)

背景 在嵌入式设备或 Android/iOS 开发中，AI 模型的推理性能不仅取决于算法复杂度，还深受系统资源调度的影响。很多开发者会发现，ncnn 在连续推理时，由于系统底层的 malloc 和 free 导致内存碎片或内核锁竞争，从而引...

2026-02-14andy阅读(115)评论(0)

在移动端进行 AI 推理时，我们通常依赖 TFLite, MNN 或 NCNN 等成熟框架。然而，当模型引入了高度定制化的层（如新型激活函数、特定的数据重排或融合操作）时，这些框架可能缺乏相应的优化实现，甚至根本不支持。这导致模型必须回退到...

2026-02-12andy阅读(95)评论(0)

在将复杂的 TensorFlow 模型部署到端侧（如移动设备或嵌入式系统）时，我们通常需要使用 TensorFlow Lite (TFLite) 转换器。然而，当模型中包含自定义层、复杂的控制流或某些非核心 TensorFlow 算子时，转...

2026-02-09andy阅读(113)评论(0)

车载信息娱乐系统（IVI）作为汽车的智能中枢，其安全性至关重要。Android 平台使用 SELinux（Security-Enhanced Linux）来实现强制访问控制（MAC），它是保护 IVI 系统不受恶意或错误行为侵害的“安全带”...

2026-02-07andy阅读(112)评论(0)

Kubernetes的原生调度器（kube-scheduler）功能强大，但在面对特定业务场景，例如强制将某类Pod调度到拥有特定硬件（如FPGA/GPU）的节点组，或者实现复杂的租户隔离计分逻辑时，标准调度策略可能无法满足需求。 解决这类...

2026-02-07andy阅读(84)评论(0)

在深度学习模型的训练过程中，我们通常依赖TensorFlow或PyTorch等框架自动计算梯度。然而，某些操作，例如四舍五入（tf.round）、取整（tf.floor）、或者某些复杂的硬件相关的自定义操作，它们在数学上几乎处处不可导，会导...

2026-02-06andy阅读(108)评论(0)

在构建灵活的深度学习模型时，我们经常需要创建自定义 Layer（层）或 Model（模型）。然而，这些自定义组件内部的权重（例如，全连接层中的 W 矩阵）往往依赖于输入数据的特征维度。如果我们在 Layer 的 __init__ 方法中就尝...

2026-02-05andy阅读(101)评论(0)

作为资深开发者，我们有时需要保护部分核心代码不以明文形式部署。Python 强大的导入系统（Import System）为我们提供了实现此目的的手段：自定义导入钩子（Import Hook）。通过向 sys.meta_path 注入自定义的...