7 企业大脑深入Facebook机器学习部门：服务、模型、框架和硬件.docxVIP

【企业大脑】深化Facebook机器学习部门：服务、模型、框架和硬件 新智元 2017-12-21 原文 ? 新智元编译?? 来源： 作者：Kim Hazelwood et al. 编译：刘小芹 【新智元导读】近日 Facebook 争辩团队公开一篇 HPCA 2018 论文，作者包括 Caffe 作者贾扬清等人，深度揭示了?Facebook 内部支持机器学习的硬件和软件基础架构。Facebook 的几乎全部的服务都广泛使用机器学习，其中计算机视觉只占资源需求的一小部分。此外，Facebook?依靠多种机器学习方法，包括但不限于神经网络。硬件方面，用CPU 做推理，CPU 和 GPU都用于训练，并且进行大规模分布式训练。 论文地址：/wp-content/uploads/2017/12/hpca-2018-facebook.pdf 机器学习是 Facebook 的很多重要产品和服务的核心。这篇文章描述了 Facebook 在全球范围里支持机器学习的硬件和软件基础架构。Facebook 的机器学习工作负载格外多样化：在实践中，不同的服务需要多种不同类型的模型。这种多样性对系统堆栈里的全部层都有影响。此外，在 Facebook 上存储的大部分数据都是通过机器学习流程传输的，这在向高功能分布式训练流交付数据方面提出了严峻的挑战。计算需求也很大，需要利用GPU和CPU平台进行训练