晶格的博客

分享:

格子突出了灵活的AI / ML开发,并在嵌入式愿景峰会上推出Sensai 4.0 2021

想要嵌入式愿景?得到了mipi?
由Sreepada Hegade发布05/25/2021

张贴在

因为你毫无疑问,嵌入式视觉峰会(本周发生)是首先会议和博览会,专门用于实用,可部署的计算机视觉和视觉人工智能(AI)和机器学习(ML)。毫不奇怪,格子是一个普通的参展商和演示者在峰会上,它为我们提供了一个很好的机会来突出我们的最新和最大的设备,工具,技术和解决方案。

今年活动是一名发言者,并提出了灵活性AI / ML发育流程是将产品按时,在预算范围内带到市场上的关键,并具有正确的价值主张。特别是,我专注于AI / ML管道,这些管道针对资源受限的设备,以便在互联网符合互联网符合的边缘和现实世界的接口。

大多数边缘应用都具有yabovip888不同类型的传感器,涉及各种电气接口和通信协议。从这些传感器获取的数据通常需要预处理和聚合,然后进入AI / ML发动机以推断出来。在许多情况下,需要执行传感器融合;与组合信息相组合从不同源导出的传感器数据的过程具有比要单独分析这些源的不确定性较少。

类似地,神经网络AI / ML推理发动机本身需要灵活。不断介绍新的网络架构,并且新类型的运营商不断到达现场。如果开发团队的AI / ML引擎足够灵活,可以充分利用这些新的发展,然后他们的竞争对手将作为旧谚语“吃午餐”。

在推理之后,需要向目标受众呈现结果,这可能是人类和/或其他机器和系统。在所有情况下,在向其预期观众展示之前,需要在将推理结果进行后处理。

底线是,在开发过程中的每一步都需要灵活性。这就是为什么我们创建了APP亚博娱乐 解决方案堆栈。

4.0 sensAI堆栈
Sensai解决方案堆栈

这个堆栈包括硬件平台、IP核心、软件工具、参考设计和演示,以及定制设计服务。在硬件平台的情况下,开发人员可以从多种FPGA家族中选择,包括晶格iCE40™UltraPlus(对于超小型超低功耗应用),yabovip888machxo3d™(用于平台管理和安全)Crosslink™-NX.(用于嵌入式视觉应用程序)和ECP5™(用yabovip888于通用应用程序)。

fpga提供可编程的输入/输出(I/ o),可以配置为支持不同的电气接口标准,从而允许它们与各种传感器接口。亚搏国际网址Lattice还提供了丰富的硬IP块和软IP块来支持不同的通信协议亚搏国际网址

下一步是执行预处理和数据聚合,sensAI堆栈为此提供了一套IP核,用于裁剪、调整大小和缩放等任务。可编程的FPGA结构允许这些计算密集型数据处理任务以大规模并行的方式执行,从而提供高性能而耗电少。

正如前面提到的,神经网络本身需要很大的灵活性来支持新的网络拓扑和操作符。亚搏国际网址sensAI堆栈包括一套软IP神经网络核心和加速器,可以快速轻松地修改,以完全解决不断发展的AL/ML领域。

作为又一个灵活性的例子,在Sensai堆栈的多个实施例中是特别兴趣的两个。在一个中,AI / ML推理引擎在可编程结构中实现,从而提供适合于高速图像处理应用的低功率,高性能解决方案。yabovip888另外,神经网络推理引擎在RISC-V处理器核心上实现,从而为可以在背景中静静地运行的AI / ML任务提供理想解决方案,例如预测性维护应用。yabovip888

介绍Sensai Studio

Lattice在嵌入式视觉峰会上宣布的一个真正的“热点”项目是该堆栈的最新和最好的版本,sensAI 4.0包括对新格子Sensa亚搏国际网址i Studio设计环境的支持,促进了端到端的AI / ML模型培训,验证和编译。

晶格sensAI工作室
Sensai解决方案堆栈的新功能是Lattice Sensai Studio,一种用于训练,验证和编译用于Lattice FPGA的ML型号的GUI的工具。该工具可以轻松利用转移学习来部署ML型号。

这个基于web的框架,可以托管在云中,也可以托管在开发者自己的服务器上,支持多个同时从事相同或不同项目的用户。亚搏国际网址sensAI Studio提供了一个易于使用的基于gui的环境,允许用户选择目标FPGA,配置I/ o,拖放AI/ML模型IP,预处理和后处理IP,并将一切连接在一起。这个新版本的sensAI还支持Lattice Propel设计环亚搏国际网址境,以加速嵌入式RISC-V处理器的开发。

除了TensorFlow AI/ML模型之外,sensAI 4.0还支持TensorFlow Lite,以降低功耗并提高亚搏国际网址AI/ML推理应用中的数据协同处理性能(TensorFlow Lite在Lattice FPGA上的运行速度比在基于ARM®Cortex®- m4的MCU上快2 - 10倍)。yabovip888此外,通过利用先进的ML模型压缩和修剪,sensAI 4.0可以支持60帧/秒(QVGA分辨率)或30帧/秒(VGA分辨率)的图像处理。亚搏国际网址

Sensai Studio还支持最新和亚搏国际网址最伟大的AI / ML设计技术,例如传输学习,其中为一个任务开发的模型被重用为相关任务,或者为模型提供执行新任务的起点。转移学习对于采取您已经在一个处理器上培训的AI / ML型号,如微控制器,并将该模型转移到更小的性能,而且像格子FPGA一样更高的性能。

分享:

像大多数网站一样,我们使用cookie和类似的技术来增强您的用户体验。我们也允许第三方在我们的网站上放置cookie。如继续使用本网站,即表示您同意使用我们所述的cookiesCookie政策