請教 RTL8375B 的 NPU 多模型串接 (YOLOv7-tiny + CNN) 記憶體限制

Arduino AI
1

各位工程師好，我看到官方支援 scrfd/mobilefacenet 的雙層人臉辨識串接。
如果我想要實作車牌辨識，打算在 NPU 上同時載入以下兩個模型做串接推論：

  1. yolov7-tiny (Object Detection)：用來偵測車牌外框。
  2. CNN Gray/RGB (Image Classification)：用來辨識裁切下來的單一字母。

想請問：

  1. AMB82-MINI 的 RAM/NPU 記憶體，能夠同時塞得下 YOLOv7-tiny 跟一個輕量的 CNN 分類模型嗎？
  2. 如果可以，官方 SDK 的 Video Pipeline 是否支援這兩個模型的無縫串接？

感謝各位前輩的經驗分享！

2

您好 @Casper_Tu，

  1. 目前有兩種方式可以載入 NN 模型：
  • 從 Flash 載入
    不過 Flash 空間有限，在 Arduino SDK 所有模型加起來建議不超過 8.5 MB 。
  • 從 SD 卡載入
    如果需要放多個模型，會比較建議使用 SD 卡。
  1. 目前我們未提供 YOLOv7-tiny 搭配 CNN 的雙模型串接範例。不過，您可以參考先前 Audio Classification 與 YOLOv7 模型同時使用的範例，作為多模型整合的參考。