视觉、音频和运动 FPGA SoM
模块上的低功耗传感/处理系统
视觉、音频和运动 FPGA SoM 使物联网设备能够看到、听到和感知运动。这是一个紧密集成的平台,由低功耗图像传感器、麦克风和 6-DoF IMU 组成,耦合到本地计算设备(Lattice 超低功耗 ICE40 UltraPlus 5K FPGA)。
SoM 的典型应用包括图像捕捉、触发/捕捉运动图像(基于视觉或 IMU)、人脸/存在检测、关键短语检测和手势。
SoM 旨在集成到设备中以实现边缘计算,从而显着缩短上市时间并使开发人员能够专注于差异化。
该模块集成了以下功能:
- 使用 Lattice ICE40 Ultra Plus 5K 超低功耗 FPGA、5K LUT、1Mb RAM、8 个 MAC 单元进行本地处理
- 图像传感器选项
- 集成 qVGA 单色全局快门成像器 (Pixart PAJ6100U6)
- 彩色/单色滚动快门成像器连接器 (Himax HMB010)
- OV7670 柔性连接器
- 一个 MEMS I2S/TDM 麦克风,最多可扩展至 8 个麦克风
- 发光二极管
- 三色 LED
- IR LED 用于低照度照明和曝光同步
- 6 轴陀螺仪/加速度计(Invensense IMU 60289)
- 记忆
- 8Mb qSPI 闪存用于比特流/代码存储
- 用于数据的 64Mb qSPI SRAM
- 四个GPIO,可编程IO电压
- 具有可编程 IO 电压的 4 线 SPI 主机接口
- 2个电源选项:
- 单 3.3V 操作,可以使用板载 LDO 为外部设备提供 1.8V 和 1.2V @100mA(最大)
- 外部 3.3V、1.8V、1.2V 用于低功耗运行
- 支持使用 Tensorflow/Caffe/Keras 的 Lattice SensAI工具链进行模型开发、量化和映射到 SensAI 神经网络引擎。
- 单个和 8 位神经网络
- 为面部和人体存在检测、手势提供的模型
- 在 <15 mW 下进行推理的性能 >30 fps
- 小尺寸:21.3mm x 31.3mm
- 开发人员套件可实现完整终端应用程序的快速原型制作。
项目地址: