基于赛灵思Spartan-3A DSP的安全视频分析

导读:范围广泛的安全分析应用对处理带宽的要求迫使企业重新考虑系统硬件的设计方法。单个视频和图像DSP处理器已经不能以可接受的数据速率完成某些计算密集的分析运算了。此外,也没有强大可靠的解决方案能够在全视频帧速率下处理高分辨率(HD)。

视频分析对性能处理的要求可充分发挥赛灵思FPGA的并行架构、嵌入式和DSP处理能力所带来的优点。

范围广泛的安全分析应用对处理带宽的要求迫使企业重新考虑系统硬件的设计方法。单个视频和图像DSP处理器已经不能以可接受的数据速率完成某些计算密集的分析运算了。此外,也没有强大可靠的解决方案能够在全视频帧速率下处理高分辨率(HD)。这也迫使系统工程师考虑多芯片或其它单芯片系统。两种解决方案各有其优点和缺点。

由多片DSP组成的多芯片系统一般可为设计人员提供更为熟悉的设计流程,但却增加了PCB成本、占用板级/系统级空间,同时还可能带来系统性能问题。另一方面,单芯片解决方案看起来在成本、封装和功耗方面具有优势,但可能会在无形中增加设计人员的学习难度,提高设计项目的复杂性和工程成本,并且有可能拖延产品发布的时间。

这也是位于加州伯克利的视频分析公司Eutecus在开发下一代安全分析产品D多核视频分析引擎时遇到的难题。

我们的第一代产品基于德州仪器(TI)的达芬奇(DaVinci)数字媒体片上系统(SoC)平台。 但在第二代产品中,我们需要更强大的处理能力和系统集成度。我们很快发现多个DSP器件的解决方案无论在成本上还是在系统一级效益都不高。我们需要一个能够方便地将上一代产品移植过来,并且能够为我们的第二代MVE提供更多特性的单芯片解决方案。

经过一番调研,我们找到了赛灵思公司的Spartan?-3A DSP 3400A。该器件提供了126 个专用 XtremeDSP?DSP48A逻辑片,可以提供足够的性能来满足我们的系统要求,并且价格也很有吸引力。

当进一步了解到赛灵思嵌入式开发套件(EDK)支持Spartan-3A DSP之后,我们对设计移植方面的担心也很快消失了。赛灵思公司的EDK嵌入式开发套件可以实现基于赛灵思MicroBlaze?嵌入式处理器的双处理器硬件架构,与TI公司DaVinci平台双处理器硬件架构类似。

选定器件之后,开始将现有的基于DaVinci的代码移植到赛灵思双处理器嵌入式系统,以创造一个单芯片视频安全分析设计。然后,在FPGA构造中创建了适量的加速器模块来满足性能要求,其中包括在全帧速率下处理高分辨率视频。这就是第二代MVE系统,现在已经成功地销售到航空航天/国防、机器视觉和监控市场。

视频分析产品简介

多核视频分析引擎(MVE)基于InstantVision Embedded? 软件和能够提供许多高级功能的专用C-MVA?协处理器。

MVE/C-MVA最新版本能够以全帧速率处理高分辨率视频。其功耗还不到1瓦,能够以全并行方式执行多种事件检测和分类算法。图1给出的是一个交通监控应用中视频分析输出的例子,针对不同类型的车辆、车流方向、车道变化以及违规变道等情况进行了分类,所有这些都是并发进行的并且利用不同的颜色进行了标记。

设计C-MVA协处理器的目标是能够扩展其运算的复杂度以支持密集物体空间的分析功能,此时需要重叠分析和处理不完整的对象/事件,因此特别具有挑战性。专用DSP在这方面的支持性很差,而且计算可扩展能力也不好。而FPGA在这两个方面则具有更大的灵活性。

Spartan-3A DSP 3400A FPGA中的126个XtremeDSP DSP48A逻辑片能够提供高达30 GMAC的DSP性能,因此完全能够满足视频分析应用苛刻的成本和性能要求。赛灵思FPGA还允许我们根据客户需求增加更多视频分析功能以及相关的事件检测事例。

此外,通过赛灵思FPGA和ISE? 设计套件工具,视频分析设计小组可以为终端客户定制解决方案方面提供更大灵活性。通过快速建立标准分辨率和高分辨率视频处理原型,我们可以快速定制视频分析引擎和片上系统(SoC)解决方案。这样我们就可以根据客户需求更高效地利用Spartan-3A DSP 3400A或成本更低的Spartan-3A DSP 1800A FPGA器件中的可用资源。

FPGA解决方案另一个好处是可以利用同一硬件平台创建多种不同的衍生产品。由于我们已经使用VHDL设计了多种分析加速器引擎,因此可以将这些专用内核集成到C-MVA协处理器中。这种方法允许工程师重新利用双MicroBlaze嵌入式系统来创建不同的FPGA编程文件,这样就构成了高度可扩展的解决方案,可以轻松调节适应范围广泛的视频分析应用。

从DaVinci移植到赛灵思FPGA

我们先前一代的视频分析产品基于TI DaVinci数字媒体SoC芯片TMS320DM6446。该芯片包括ARM9x处理器和C64x+ DSP协处理器。在设计中,我们使用ARM9x做通信和控制,用C64x+做分析算法的DSP处理。然而,两者组合起来构成的系统仍然无法满足我们第二代产品所需要的高性能处理要求。因此,我们转向了Spartan-3A DSP FPGA系列。

通过创建拥有两个独立运行MicroBlaze v7软内核处理器的赛灵思嵌入式系统,我们简化了设计移植任务。这种架构使我们可以分别移植ARM和DSP处理器代码,从而大大简化了设计移植过程。图2给出了Eutecus硬件系统的框图,以及基于MVE的参考SoC设计。

基于赛灵思Spartan-3A DSP的安全视频分析

该文观点仅代表作者,本站仅提供信息存储空间服务,转载请注明出处。若需了解详细的安防行业方案,或有其它建议反馈,欢迎联系我们

(0)
小安小安

相关推荐

  • 中国芯如何在物联网时代并购浪潮中崛起

    芯片行业将随着越来越多的不同功能设备联网和运算需求,呈现出高度碎片化的状态。而芯片行业的竞争,也将由专利和技术的竞争,转为产业整合能力的竞争。同时,由于未来联网设备呈几何数量增长,将带动整个芯片行业产值的大幅提升,这也是我国芯片产业一次巨大机会。

    2024年4月8日
  • 全球首颗!扬州造人工智能芯片正式对外发布

    仅米粒大小的“迷你”芯片上,每秒钟可以完成190Gops(也就是1900亿次)操作运算,日前,这颗类视神经网络人工智能视觉芯片正式对外发布。

    2024年1月30日
  • 新华社分析突破“缺芯”困境

    在芯片产业的投资方向也需更有产业眼光的人掌控。在国家财政支持之外,还需要市场、社会资本等积极参与。有专家建议,中国证券监督管理委员会可为芯片企业提供一些如加速审批等便利通道,使企业有机会从市场筹得更多研发经费。

    2024年4月7日
  • 硅光子技术的前世今生

    光子计算一度被认为是最有希望的未来技术。与半导体芯片相比,光芯片用超微透镜取代晶体管、以光信号代替电信号进行运算。光芯片无需改变二进制计算机的软件原理,但可以轻易实现极高的运算频率,同时能耗非常低,不需要复杂的散热装置。与电脑对应,设想中的光学计算机被称作“光脑”。

    2024年4月10日 知识
  • 思必驰旗下深聪智能发布新一代人工智能芯片TH2608

    思必驰作为国内专业的对话式人工智能平台公司,不断推进着AI技术的研发与应用,思必驰旗下芯片公司深聪智能于2019年推出了AI芯片太行TH1520,搭载思必驰全链路人工智能语音技术,低功耗算法的优势使其广泛地应用于智能家居白电、黑电以及智能车载领域,推进传统行业的规模化和智能化升级。

    2024年1月28日
  • 山东产研院发布4K人工智能视觉处理芯片

    1月29日,山东产业技术研究院正式发布4K超高清人工智能视觉处理芯片,这也是山东产研院集成电路创新中心联合国科微基于泰山平台推出的第二颗高端芯片。

    2024年1月29日