超级计算集群结合ACK实现NLP训练-低调大师

超级计算集群结合ACK实现NLP训练

2020-09-17 826

阿里云最佳实践频道：【点击查看更多上云最佳实践】
这里有丰富的企业上云最佳实践，从典型场景入门，提供一系列项目实践方案，降低企业上云门槛的同时满足您的需求！

场景描述

本方案适用于自然语言处理的训练场景，使用神龙GPU云服务器（SCCGN6）+CPFS+容器服务Kubernetes版（ACK）进行NLP的训练，采用Bert模型，使用飞天AI加速训练工具可以有效提升多机多卡的训练效率。

解决问题

使用神龙+ACK搭建NLP训练环境
使用SCC的RDMA网络
使用CPFS存储训练数据
使用飞天AI加速训练工具加速训练

产品列表

神龙GPU云服务器（SCCGN6）
容器服务Kubernetes版（ACK）
SCC超级计算集群
CPFS共享存储

直达最佳实践》》

微信关注我们

原文链接：https://yq.aliyun.com/articles/772717

转载内容版权归作者及来源网站所有！

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

EMR本地盘实例大规模数据集测试

阿里云最佳实践频道：【点击查看更多上云最佳实践】这里有丰富的企业上云最佳实践，从典型场景入门，提供一系列项目实践方案，降低企业上云门槛的同时满足您的需求！场景描述阿里云为了满足大数据场景下的存储需求，在云上推出了本地盘D1机型，这个系列提供了本地盘而非云盘作为存储，提高了磁盘的吞吐能力，发挥Hadoop的就近计算优势。阿里云EMR产品针对本地盘机型，推出了一整套的自动化运维方案，帮助用户方便可靠地使用本地盘机型，不需要关注整个运维过程同时数据的高可靠和服务的高可用。解决问题云盘多份冗余数据导致成本高磁盘吞吐量不高节点的高可靠分布问题本地盘与节点的故障监控问题数据迁移时自动决策问题自动故障节点迁移与数据平衡问题产品列表 E-MapReduce 本地盘专有网络VPC 直达最佳实践》》

2020-09-18

796

阿里云最佳实践团队为企业用户上云提供最优化上云指导，为了给您提供更好的服务，现诚征企业上云最佳实践的客户故事。填写征集书还可抽取阿里云公仔哦！阿里云最佳实践介绍阿里云解决方案最佳实践，是基于众多客户上云的成功案例萃取而成的最优化企业上云指导。每个最佳实践包括使用场景、多产品部署架构及部署手册。帮助客户更好地理解阿里云的产品和解决方案，降低企业上云门槛的同时满足客户自服务的需求。阿里云最佳实践频道：【点击查看更多上云最佳实践】阿里云最佳实践频道，涵盖了丰富的业务场景：业务上云、网络组网、数据迁移、备份&容灾、安全&合规、数据库、数据迁移以及容器&微服务等等，涉及多行业多场景业务上云最优指导，您可以根据实际需要选择所需的解决方案。企业客户上云故事目前，已有众多企业参考借鉴阿里云最佳实践解决了上云、用云过程中遇到的实际问题，优化业务云上架构的同时，提高了企业运维效率，进一步使阿里云产品解决方案与客户实际业务场景完美契合。为此，各企业对参考的最佳实践进行了反馈，成为我们向前动力的同时，也为其他企业业务上云提供了借鉴。客户品牌墙企业上云最佳实践客户故事征集...

2020-09-18

770

资源下载

更多资源

Mario

马里奥是站在游戏界顶峰的超人气多面角色。马里奥靠吃蘑菇成长，特征是大鼻子、头戴帽子、身穿背带裤，还留着胡子。与他的双胞胎兄弟路易基一起，长年担任任天堂的招牌角色。

腾讯云软件源

为解决软件依赖安装时官方源访问速度慢的问题，腾讯云为一些软件搭建了缓存服务。您可以通过使用腾讯云软件源站来提升依赖包的安装速度。为了方便用户自由搭建服务架构，目前腾讯云软件源站支持公网访问和内网访问。

Nacos

Nacos /nɑ:kəʊs/ 是 Dynamic Naming and Configuration Service 的首字母简称，一个易于构建 AI Agent 应用的动态服务发现、配置管理和AI智能体管理平台。Nacos 致力于帮助您发现、配置和管理微服务及AI智能体应用。Nacos 提供了一组简单易用的特性集，帮助您快速实现动态服务发现、服务配置、服务元数据、流量管理。Nacos 帮助您更敏捷和容易地构建、交付和管理微服务平台。

Sublime Text

Sublime Text具有漂亮的用户界面和强大的功能，例如代码缩略图，Python的插件，代码段等。还可自定义键绑定，菜单和工具栏。Sublime Text 的主要功能包括：拼写检查，书签，完整的 Python API ， Goto 功能，即时项目切换，多选择，多窗口等等。Sublime Text 是一个跨平台的编辑器，同时支持Windows、Linux、Mac OS X等操作系统。