Lattice推出了基于超低功耗FPGA up5k (iphone手机上曾用)的TinyML开发平台的开源方案-Lattice-莱迪斯论坛-FPGA CPLD-ChipDebug

Lattice推出了基于超低功耗FPGA up5k (iphone手机上曾用)的TinyML开发平台的开源方案

 

视觉、音频和运动 FPGA SoM

模块上的低功耗传感/处理系统

3dd48616d0132829

视觉、音频和运动 FPGA SoM 使物联网设备能够看到、听到和感知运动。这是一个紧密集成的平台,由低功耗图像传感器、麦克风和 6-DoF IMU 组成,耦合到本地计算设备(Lattice 超低功耗 ICE40 UltraPlus 5K FPGA)。

SoM 的典型应用包括图像捕捉、触发/捕捉运动图像(基于视觉或 IMU)、人脸/存在检测、关键短语检测和手势。

SoM 旨在集成到设备中以实现边缘计算,从而显着缩短上市时间并使开发人员能够专注于差异化。

523affc67f132843

该模块集成了以下功能:

  • 使用 Lattice ICE40 Ultra Plus 5K 超低功耗 FPGA、5K LUT、1Mb RAM、8 个 MAC 单元进行本地处理
  • 图像传感器选项
    • 集成 qVGA 单色全局快门成像器 (Pixart PAJ6100U6)
    • 彩色/单色滚动快门成像器连接器 (Himax HMB010)
    • OV7670 柔性连接器
  • 一个 MEMS I2S/TDM 麦克风,最多可扩展至 8 个麦克风
  • 发光二极管
    • 三色 LED
    • IR LED 用于低照度照明和曝光同步
  • 6 轴陀螺仪/加速度计(Invensense IMU 60289)
  • 记忆
    • 8Mb qSPI 闪存用于比特流/代码存储
    • 用于数据的 64Mb qSPI SRAM
  • 四个GPIO,可编程IO电压
  • 具有可编程 IO 电压的 4 线 SPI 主机接口
  • 2个电源选项:
    • 单 3.3V 操作,可以使用板载 LDO 为外部设备提供 1.8V 和 1.2V @100mA(最大)
    • 外部 3.3V、1.8V、1.2V 用于低功耗运行
  • 支持使用 Tensorflow/Caffe/Keras 的 Lattice SensAI工具链进行模型开发、量化和映射到 SensAI 神经网络引擎。
    • 单个和 8 位神经网络
    • 为面部和人体存在检测、手势提供的模型
    • 在 <15 mW 下进行推理的性能 >30 fps
  • 小尺寸:21.3mm x 31.3mm
  • 开发人员套件可实现完整终端应用程序的快速原型制作。

有关详细信息,请参阅数据表SoM 规范此处提供 3-D PDF 渲染图。

项目地址:
 
 
请登录后发表评论