机器人与人工智能爱好者论坛

 找回密码
 立即注册
查看: 6690|回复: 0
打印 上一主题 下一主题

挑战谷歌!亚马逊开放机器学习系统源代码

[复制链接]

257

主题

279

帖子

1655

积分

版主

Rank: 7Rank: 7Rank: 7

积分
1655
跳转到指定楼层
楼主
发表于 2016-5-18 12:51:14 | 只看该作者 |只看大图 回帖奖励 |倒序浏览 |阅读模式
本帖最后由 irobot 于 2016-5-18 12:53 编辑

挑战谷歌!亚马逊开放机器学习系统源代码

2016.5.18

    北京时间5月17日消息,亚马逊今日宣布,将开放该公司的机器学习软件DSSTNE的源代码。而这个新项目将与谷歌的TensorFlow展开竞争。亚马逊表示,在数据量较少的情况下,DSSTNE处理速度是TensorFlow的2.1倍。


亚马逊开放机器学习系统源代码

    亚马逊之所以开发这款软件,是为了在其零售平台上向用户推荐商品。要实现这一功能,这就必须借助神经网络程序的帮助,但亚马逊进行推荐时未必总能掌握很多数据。

  亚马逊表示,DSSTNE的速度快于TensorFlow。在数据量较少的情况下,其处理速度是后者的2.1倍。之所以能够实现如此快的速度,部分源于DSSTNE利用了多个GPU的性能。与其他深度学习开源软件不同,DSSTNE可以在很多GPU之间分配任务,而不会因此降低速度和准度。

  DSSTNE的常见问题解答板块写道:“这意味着只需要借助1000万独特商品便可提供建议,而无需借助数以亿计的商品实现这一功能。要处理这种规模的问题,其他软件需要利用CPU的计算性能来分析稀疏的数据,导致性能降低了一个数量级,”

  目前,开发者已经可以根据Apache 2.0开源许可在GitHub上下载DSSTNE。亚马逊称“我们希望世界各地的研究人员能够共同改进它,”DSSTNE的常见问题解答板块写道,“但更重要的是,我们希望它能激励更多领域的创新。”


源代码地址:https://github.com/amznlabs/amazon-dsstne

Amazon DSSTNE: Deep Scalable Sparse Tensor Network Engine
DSSTNE (pronounced "Destiny") is an open source software library for training and deploying deep neural networks using GPUs. Amazon engineers built DSSTNE to solve deep learning problems at Amazon's scale. DSSTNE is built for production deployment of real-world deep learning applications, emphasizing speed and scale over experimental flexibility.
DSSTNE was built with a number of features for production workloads:
  • Multi-GPU Scale: Training and prediction both scale out to use multiple GPUs, spreading out computation and storage in a model-parallel fashion for each layer.
  • Large Layers: Model-parallel scaling enables larger networks than are possible with a single GPU.
  • Sparse Data: DSSTNE is optimized for fast performance on sparse datasets. Custom GPU kernels perform sparse computation on the GPU, without filling in lots of zeroes.
LicenseSetup
  • Follow Setup for step by step instructions on installing and setting up DSSTNE
User Guide
  • Check User Guide for detailed information about the features in DSSTNE
Examples
  • Check Examples to start trying your first Neural Network Modeling using DSSTNE
Q&A


回复

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

关闭

站长推荐上一条 /1 下一条

QQ|Archiver|手机版|小黑屋|陕ICP备15012670号-1    

GMT+8, 2024-5-2 10:44 , Processed in 0.066753 second(s), 27 queries .

Powered by Discuz! X3.2

© 2001-2013 Comsenz Inc.

快速回复 返回顶部 返回列表