跳到正文
原文
Reddit r/SideProject· /u/Useful-Message4584·· 3 小时前AI 评分27

在 ESP32 上跑 55M 参数语音转文字模型:Whistle 剪枝到 14.5 MB

I Run a 55 M parameter speech to text Model on esp 32

AI 导读

开发者把 Cactus Compute 的 55M 参数语音转文字模型 Whistle 跑在 ESP32 上,原模型 16.9 MB 超出板载容量,将解码器从 8 层砍到 4 层后压到 14.5 MB,词错误率约 11.5%。推理引擎用 C 从零编写,采用 2-bit 权重,调用 S3 的向量指令并同时使用两个 CPU 核心。

来源:Reddit r/SideProject · reddit.com