在新的计算机视觉时代,如何突破硬件性能极限测试?

计算机视觉更接近于人类视觉。计算机视觉的新时代正在推进,促使增强现实和全息成像等先进技术从台式机环境转移到移动和嵌入式平台,同时也使包括CPU和GPU在内的现有硬件面临性能的极限考验。
随着开发人员继续在智能手机,平板电脑,可穿戴产品,监视设备和联网汽车中添加新的多媒体功能,在当前设计中,CPU和GPU是处理密集型图像算法的主要平台。但是,OEM制造商和开发人员在实施创新功能(例如双摄像头,低光拍摄和快速自动对焦)时必须做出一些妥协。
这种趋势已经挑战甚至超越了不能用于​​处理密集型图像算法的CPU和GPU的极限。后果之一是产品的功耗太高,最终会缩短电池寿命。
实际上,嵌入式CPU和GPU都必须具有极低的功耗,并且必须对其主要任务进行高度优化。解决此设计问题的最终解决方案是具有通用架构的处理器IP,该处理器IP专门设计用于无缝处理图像和智能视觉功能。
新的相机时代有两个用例说明消费类电子产品中的相机数量和图像处理能力是如何迅速增加的。第一个示例是带有至少6个摄像头的Microsoft HoloLens增强现实头盔。
第二个例子是华为Honor 6+智能手机,它增加了CMOS传感器的数量,以实现更复杂的相机功能。这款手机的正面有一个8百万像素的摄像头,背面有两个8百万像素的摄像头,以实现双摄像头功能。
图1:增加摄像机数量以形成专用视觉处理器的情况。可视处理器分析。
来自CEVA Inc.的全新图像处理器就是这样一个平台,用于片上系统(SoC)设计中,作为CPU共享处理密集型图像增强功能,计算图形和具有GPU的计算机视觉算法。 CEVA-XM4可以为智能手机,平板电脑,汽车安全和信息娱乐,机器人技术,安全监控,增强现实和无人机等广泛的图像应用实现类似于人的视觉感知功能。
图2:面向多个目标市场的CEVA-XM4 CEVA-XM4是CEVA的第四代图像和视觉处理器IP,继承了CEVA和十多个CEVA-MM3101授权的供应商和合作伙伴积累的专业知识。和经验。
同时,CEVA-XM4是一种全新设计的完全可编程处理器,可以满足最苛刻的图像处理和计算机视觉应用。 CEVA将具有定点和浮点处理功能的可编程大位宽矢量处理体系结构,多个对称标量单元以及专门为视觉处理设计的低功耗指令集集成到XM4中,比上一代产品更高CEVA-MM3101的性能提高了8倍,功耗降低了2.5倍。
视觉处理器与移动GPU与包括行业领先的移动GPU在内的各种竞争解决方案相比,XM4智能视觉处理器具有两个方面:每功耗性能(每mW)和每芯片面积(每mm2)都具有出色的性能。与市场上公认的最先进的移动GPU相比,在目标物体检测和跟踪应用中,完成相同任务的CEVA-XM4内核的功耗仅为竞争解决方案的10%左右,而芯片面积仅为只有大约5%。
此外,将多种特定算法与移动GPU进行比较(如下图2所示)表明,XM4和移动GPU之间具有20倍的巨大电源效率优势。图3:CEVA-XM4和移动GPU功耗效率比较-越高越好CEVA-XM4图像IP被广泛应用于三个视觉领域:图像采集,图像处理和视觉感知。
图像采集包括3D视觉,图像降噪和深度图生成等功能。图像处理与计算成像功能有关,例如图像稳定,弱光图像增强,图像缩放,多帧和多传感器超分辨率合成。
最后,视觉感知可以执行诸如目标对象识别和跟踪,视频分析,增强现实以及自然用户界面(NUI)的脸部,手势和情感识别之类的功能。图4:CEVA-XM4支持的视野。
CNN时代的XM4 XM4视觉处理器支持实时3D深度图生成,用于3D扫描的点云处理以及目标和图像识别。范围包括Haar,。

公司: 深圳市捷比信实业有限公司

电话: 0755-29796190

邮箱: momo@jepsun.com

产品经理: 李经理

QQ: 2215069954

地址: 深圳市宝安区翻身路富源大厦1栋7楼

微信二维码

更多资讯

获取最新公司新闻和行业资料。