Facebook如何运用机器学习进行亿级用户数据处理-低调大师

Facebook如何运用机器学习进行亿级用户数据处理

2018-02-27 682

2017年末，Facebook应用机器学习组发布最新论文，对整个Facebook的机器学习软硬件架构进行了介绍。纵览全文，我们也可以从中对Facebook各产品的机器学习策略一窥究竟。论文中涉及到机器学习在全球规模(上亿级数据处理)上的全新挑战，并给出了Facebook的应对策略和解决思路，对相关行业和研究极其有意义。

摘要

机器学习在Facebook的众多产品和服务中都有着举足轻重的地位。本文将详细介绍Facebook在机器学习方面的软硬件基础架构，如何来满足其全球规模的运算需求。

Facebook的机器学习需求极其繁杂：需要运行大量不同的机器学习模型。这种复杂性已经深深刻在Facebook系统堆栈的所有层面上。此外，Facebook存储的所有数据，有相当大一部分会流经机器学习管道，这样的数据载荷为Facebook的分布式高性能训练

微信关注我们

原文链接：https://yq.aliyun.com/articles/499155

转载内容版权归作者及来源网站所有！

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

App架构设计经验谈:接口”安全机制”的设计

App架构设计经验谈:接口”安全机制”的设计 App与服务器的通信接口如何设计得好，需要考虑的地方挺多的，在此根据我的一些经验做一些总结分享，旨在抛砖引玉。安全机制的设计现在，大部分App的接口都采用RESTful架构，RESTFul最重要的一个设计原则就是，客户端与服务器的交互在请求之间是无状态的，也就是说，当涉及到用户状态时，每次请求都要带上身份验证信息。实现上，大部分都采用token的认证方式，一般流程是：用户用密码登录成功后，服务器返回token给客户端；客户端将token保存在本地，发起后续的相关请求时，将token发回给服务器；服务器检查token的有效性，有效则返回数据，若无效，分两种情况： token错误，这时需要用户重新登录，获取正确的token token过期，这时客户端需要再发起一次认证请求，获取新的token 然而，此种验证方式存在一个安全性问题：当登录接口被劫持时，黑客就获取到了用户密码和token，后续则可以对该用户做任何事情了。用户只有修改密码才能夺回控制权。如何优化呢？第一种解决方案是采用HTTPS。HTTPS在HTTP的基础上添加了SSL安...

2018-02-27

554

近年来，Linux在技术行业里的重要性越来越高，成为了IT从业者的必备技能之一，据统计，Linux相关岗位增长达到了惊人的24%。市场需求扩大后Linux技术人员的薪资也一路上升，1-3年Linux运维工程师的平均薪资上升了13%。因为几年来很多人都选择转行从事Linux运维行业，入门学习的需求很旺盛，在这几年中也出现了不少对新手非常友好的入门学习路线图。然而从2017年中段开始，Linux运维的技能需求变化很大，这些入门学习路线路线图大部分已经不适应新时代的技能需求了。举例而言，Kubernet：es技术已经越来越普及，但是大多数学习路线却并未进行收录；还在按照过时学习路线进修的入门者在求职时竞争力就差了许多。正好在最近，看到了一篇不错的资料，其中对于Linux入门学习的描述极其详尽，因此特别摘抄其中段落，制作成思维导图分享给大家。教程内容： Linux入门首先要分为5个阶段，各阶段从前到后技术实力依次增加，相应的也更加能够符合企业的用人需求。为了让大家对于这5个阶段的能力水平有更清楚的认识，我们特别对能力进行了分解，按照各阶段可在企业中承担的任务进行标注。图片不清晰的话可以...

2018-02-28

547

资源下载

更多资源

Mario

马里奥是站在游戏界顶峰的超人气多面角色。马里奥靠吃蘑菇成长，特征是大鼻子、头戴帽子、身穿背带裤，还留着胡子。与他的双胞胎兄弟路易基一起，长年担任任天堂的招牌角色。

腾讯云软件源

为解决软件依赖安装时官方源访问速度慢的问题，腾讯云为一些软件搭建了缓存服务。您可以通过使用腾讯云软件源站来提升依赖包的安装速度。为了方便用户自由搭建服务架构，目前腾讯云软件源站支持公网访问和内网访问。

Spring

Spring框架（Spring Framework）是由Rod Johnson于2002年提出的开源Java企业级应用框架，旨在通过使用JavaBean替代传统EJB实现方式降低企业级编程开发的复杂性。该框架基于简单性、可测试性和松耦合性设计理念，提供核心容器、应用上下文、数据访问集成等模块，支持整合Hibernate、Struts等第三方框架，其适用范围不仅限于服务器端开发，绝大多数Java应用均可从中受益。

Rocky Linux

Rocky Linux（中文名：洛基）是由Gregory Kurtzer于2020年12月发起的企业级Linux发行版，作为CentOS稳定版停止维护后与RHEL（Red Hat Enterprise Linux）完全兼容的开源替代方案，由社区拥有并管理，支持x86_64、aarch64等架构。其通过重新编译RHEL源代码提供长期稳定性，采用模块化包装和SELinux安全架构，默认包含GNOME桌面环境及XFS文件系统，支持十年生命周期更新。