集成音频、计算相机、计算机视觉,甚至移动机器学习等特性在Qualcomm® Hexagon™数字信号处理器(DSP)运行时表现更佳、耗电更少。如果您对这些用例有兴趣,可以下载Qualcomm® Hexagon™ SDK 3.0,就能够方便、快速地开启全新的算法之旅。
除支持搭载Hexagon DSP的设备外,SDK 3.0还可以让您完全访问Hexagon矢量扩展 (HVX)——Hexagon DSP 大规模并行处理器扩展,可用于图像、视频、计算机视觉(CV)和卷积网络。HVX集成于Qualcomm® Snapdragon™800系列处理器,是一种新的硬件模块,能够在一个时钟周期处理多达1024位数据。OnePlus 3、LG G5、三星Galaxy S7等设备就配备了Snapdragon 820,您将看到更多的虚拟现实(VR)应用、更强大的低光相机性能、更高品质的相机成像和机器学习。
谁在使用Hexagon SDK和HVX?
超过100位独立软件供应商(ISV)利用Hexagon SDK开发了运行在Hexagon DSP的算法。自从我们去年推出HVX以来,许多厂商一直在为Snapdragon 800系列设备开发CV、图像处理及视频功能,包括:
我们已经为独立软件供应商提供了在SDK 3.0中访问HVX的能力,因为设备制造商正竞相在解决相机相关特性方面添加强大的计算能力。事实上,OEM厂商已经利用HVX集成了自已专有的视频和图像处理算法。
为Hexagon SDK 3.0 开发人员准备的新用例
超越语音和音频用例,SDK 3.0 为专注于视频、图像处理、CV及机器学习的新一类开发人员开启了异构计算之门。
视频:实时,软件可编程后处理——流媒体服务根据订购情况和内容类型按不同比特率发送视频。较低的比特率产生视频块效应及非自然信号,交由后处理解决。解压后,使用HVX的流传输软件可以实时消除空间(单帧跨像素)或时间( 帧间)上的压缩失真。
图像处理:全景拼接——360度摄像头通常是多台广角摄像机拼接在一起。普通处理器要求用户扫描现场一圈,然后等待相机将多张相片拼成球形图像。HVX允许成像软件处理同时接受来自多个摄像头的馈送,并实时拼接。
图像处理:计算相机——包括在用户看到图像之前,对像素进行密集数字运算的一种新算法。HVX 使低光相片和录像所需的巨大计算能力成为可能。
CV:虚拟现实——VR栩栩如生需要所有六个自由度(6DoF)的动作。这需要跟踪每三度两套动作,然后将它们组合成六自由度运动。利用 HVX,高质量VR所需的实时计算必须跟上移动速度和VR头盔视频帧速率。
Next step...
搭载Snapdragon 820处理器的设备配备了HVX。领先的OEM厂商正利用HVX使他们产品的相机和视频功能独树一帜。我们也为您准备了大量有关HVX的内容,并且已经发布了Windows和Linux版SDK,请马上就下载Hexagon SDK 3.0,开始加速您的视频、图像处理、CV和机器学习应用。
欢迎光临 机器人与人工智能爱好者论坛 (http://robot-ai.org/) | Powered by Discuz! X3.2 |