联合解决方案系列｜VMware和星云Clustar联合发布多云联邦学习解决方案

引言

4月20日，VMware China Innovation Advanced Solutions Forum线上论坛顺利召开，VMware中国研发技术总监张海宁与星云Clustar CTO 张骏雪联合发表《Federated Machine Learning Enterprise Solution with Clustar on VCF/Tanzu》主题演讲。在数据融合交互与数据隐私安全愈演愈烈的当下，联邦学习技术为基于跨领域的企业级数据合作提供了新的范式。VMware与星云Clustar提出以VCF（VMware Cloud Foundation）为基础设施平台，FATE联邦学习框架结合星云Clustar自研网络加速技术的联邦学习解决方案，以打破数据孤岛，让客户可以使用联合建模技术，更好挖掘数据价值。

---

首个工业级联邦学习开源平台: FATE

FATE (Federated AI Technology Enabler) 是全球首个联邦学习工业级开源框架，可以让企业和机构在保护数据安全和数据隐私的前提下进行数据协作。 FATE项目使用多方安全计算 (MPC) 以及同态加密 (HE) 技术构建底层安全计算协议，以此支持不同种类的机器学习的安全计算，包括逻辑回归、基于树的算法、深度学习和迁移学习等。 FATE由微众创立，于2019年2月首次对外开源，并成立 FATE TSC（技术指导委员会） 对FATE社区进行开源治理，成员包含国内主要云计算和金融服务企业。

VMware与星云Clustar均为FATE TSC（技术指导委员会）成员，以及FATE开源项目重要贡献者。在开源社区中主要负责底层技术的研发，并与微众银行、银联、建信金科、工行等技术能力领先的金融科技企业共同推进联邦学习在金融领域的探索实践。

---

VMware产品介绍

VMware Cloud Foundation

VMware 提供业界领先的混合云和多云服务并具有广泛的云合作伙伴体系，云合作伙伴包含 AWS、Azure、GCP、阿里云等大型公有云服务提供商，也包括中小型面向行业客户的 VMware VCPP 云服务提供商，能够提供以VCF （VMware Cloud Foundation）统一技术栈为基础的跨云和混合云服务，降低了企业上云的复杂度。

VMware 的VCF Tanzu，可帮助企业完成应用的现代化改造，包括开发、运维一个全新的基于 Kubernetes 的云原生应用，以及一系列全新的产品和服务来支持新的业务。

KubeFATE

KubeFATE由VMware开源，并与微众银行及FATE开源社区一起联合开发的云原生联邦学习项目，致力于通过使用云原生相关技术，降低联邦学习使用门槛及运维成本。

KubeFATE为FATE提供在Kubernetes的部署管理方案，以及面向生产运维管理的使用功能，包括在线升级、迁移、日志聚合、监控等。

KubeFATE与VMware Cloud Foundation的集成，为FATE提供业界领先的跨云和多云联邦学习方案。

---

星云Clustar联邦学习加速方案

星云Clustar是以算力为核心的隐私计算技术提供商，专注于高性能隐私计算算力产品研发与技术创新。公司产品包括隐私计算的软件计算平台，软硬一体机、算力加速卡以及芯片等。致力于以“算力+”技术布局与战略理念，为隐私计算应用规模化落地打造算力“基建”，高效赋能数据有序共享与综合应用。

为充分应对联邦学习等隐私计算场景，解决联邦学习因使用同态加密而产生的计算压力与延时问题，星云Clustar推出了业界首款隐私计算加速卡，使联邦学习性能在一些场景下实现数十倍提升。

该加速卡采用星云Clustar自研实现架构，具备高性能、低时延、易部署、易扩展等特性，支持16个任务并行计算，330个模幂计算引擎以及最高4096bit位宽的全量算子密态运算，能让数据在加密状态下进行AI模型训练与推理，满足企业在数据安全、数据交换、数据共享建模及合规等需求，并提供便于二次开发的应用层接口与灵活部署扩展，便于客户根据实际业务场景在云或本地切换部署方案与扩展。

---

双方联合解决方案

为进一步打破数据孤岛，帮助客户高效挖掘数据价值，VMware与星云Clustar提出以VCF（VMware Cloud Foundation）为基础设施平台，FATE联邦学习框架结合星云Clustar自研网络加速技术的联邦学习解决方案。作为一款综合星云Clustar与VMware技术优势的企业级联邦学习解决方案，该方案具有更高安全、更高性能及更具开放兼容性的核心能力，可覆盖星云隐私计算平台、安全数据网络等企业级软件产品，满足多样化的用户需求，使客户可以更专注实际应用场景。

此外，该方案依托于VCF提供的统一的跨多云环境运行和管理平台，具备“一站式”交付能力，尤其专注金融领域解决数据安全与保障数据合规流通问题，可部署在联邦学习中各参与方，统一进行联邦学习任务的全生命周期管理，帮助企业用户实现联邦数据建模以及数据管理等一系列功能，以安全、合规、高效的方式服务于金融行业的反欺诈、反洗钱、信贷风控、展业促活等创新应用，释放金融数据价值。

来源｜公众号：VMware中国研发中心