利用OpenCV加速嵌入式系统开发
嵌入式处理器的性能日益提升、价格不断下降,带来日益广泛的嵌入式计算机视觉应用,包括从安全及工业监控到自动化车辆与汽车安全等领域。开发人员可充分利用越来越高级的硬件,在不影响基本质量的同时,更快速、更低成本地开发具有突破性性能的产品。
开发周期缩短而带来的巨大压力,迫使嵌入式系统开发人员必须高效利用嵌入式领域与传统PC工作站领域的现有技术;适应并复用现有稳定软件可为嵌入式开发人员提供不断开发重大新项目的必备基础。
OpenCV就是PC软件进入嵌入式开发领域的一个实例。OpenCV是一款免费的开源计算机视觉库,可提供从影像过滤及转换,到特性抽象与机器学习等几十个不同类别的数百种算法。它已被成千上万的开发人员所使用,而且还在不断发展之中。目前有很多库是针对嵌入式系统的,但很少有像OpenCV这样能够在计算机视觉领域得到普遍推广,而且涵盖如此丰富的算法。
图1:OpenCV库缩略图。
尽管OpenCV最初来源于Intel的x86架构,但它也不失为目前功能日益强大的嵌入式器件的自然选择。OpenCV现已移植到嵌入式处理器常用CPU选择ARM架构上,这点也并不奇怪。我们完全能够在嵌入式器件上原封不动地采用OpenCV的交叉编译版,不过,存储器限制与其它架构注意事项可能会带来一个技术难题。因此我们需要对OpenCV进行优化,以使它在新的主机上实现更高性能与更高效率。
对嵌入式平台而言,"优化"这个词以前意味着要无限制地研究低级架构中不重要的细节,反复编写汇编语言代码。然而幸运的是,随着嵌入式处理器复杂性的提升,嵌入式开发工具已变得日益强大,用户友好性也得以大幅提高。
典型的嵌入式器件可描述为系统级芯片(SoC),其中不仅包含ARM处理器,而且还含有多种外设与加速器,可将CPU从相关支持任务中解放出来。SoC甚至可能具有多个ARM内核,或其它功能齐全的协处理器。
图2:SoC基本内部架构。
现在,SoC最重要的部分不是硬件本身,而是可帮助开发人员通过ARM应用程序高效利用SoC全部性能的支持性软件,这不仅包括优化C语言编译器的熟悉工具,还包括加速常见信号处理任务的优化软件库,以及处理SoC中不同模块之间低级互动的驱动器。此外,它可能还包括支持特定厂商协处理器与加速器的特殊工具。这些工具相结合,可使嵌入式优化成为高级应用开发中一个简单透明的组成部分。
通过高效集成OpenCV等高级软件与器件厂商提供的低端软件,进而创建高效可行的系统,是嵌入式开发的重要挑战之一。例如,我们不妨考虑这样一种情况,SoC中包括了针对高强度计算的全功能数字信号处理器(DSP)。该DSP可能非常适合OpenCV的影像分析算法,尤其是在CPU缺乏原生浮点指令情况下更是如此,不过,要让OpenCV在DSP架构上运行,可能还有大量工作要做。让OpenCV等高级软件实现分区,并在整个SoC上无缝运行是软件开发工具的重要使命。
从嵌入式开发人员的角度来说,将应用的不同部分透明地交给SoC上最合适的模块来处理是再好不过的了。这样做能够帮助开发人员将更多资源集中到终端产品开发方面,从而花费更少的时间处理特定平台问题,这是嵌入式器件的独特优势。支持上述要求的软件工具则可在基本的处理功能与硬件功能基础上更进一步,这对开发人员而言具有更重要的意义,器件厂商必须满足这一要求,才能保持自身的竞争优势。
图3:嵌入式应用分区后,在异构多内核SoC上运行更高效。
- CEVA-CV:实现嵌入式视觉应用(01-18)
- arm-Linux-opencv调试总结(11-11)
- OpenCV在ARM上的移植 错误总结(11-11)
- OpenCV ffmpeg移植到ARM平台(11-09)
- Xilinx Zynq使用HLS实现OpenCV的开发流程(03-13)
- 用OpenCV和Vivado HLS加速基于Zynq SoC的嵌入式视觉应用开发(03-06)