联邦学习作为隐私计算的一个重要手段,已经得到各界广泛关注。它通过使用多方的数据建立一个综合的模型,并在学习过程中不断提高模型的性能。由于使用了加密、多方安全计算等技术,使得数据的来源不会被其他人获得,保护了数据的隐私及安全,因而得到广泛的应用。
联邦学习通常需要一个基础底座帮助完成学习任务。在国内,最具影响力的是由微众银行开源、2019年捐赠给Linux基金会的全国首个联邦学习开源社区FATE。参与FATE社区这个开源项目的有金融机构、国内高校以及互联网等科技企业。
信通院去年的统计资料表明,55%的国内隐私计算产品或方案是参考和采用FATE实现的,根据Linux基金会的统计,FATE开源项目在过去三年以来增长了三倍多,总的提交数增长了近5倍。
在联邦学习社区,VMware不仅是参与了代码的编制、技术的创新,还积极推动生态大会、线上讲座、社区文章的发布等,我们都参与到其中,和众多的合作伙伴一同组织和推动技术的发展。
星云(Clustar)与VMware合作推出了软硬件整体的多云联邦学习解决方案。其底层是CPU、存储网络等硬件,辅以星云FPGA异构算力加速卡,中间层是以LPGA加速卡驱动的VCF(VMware Cloud Foundation),包括vSpere、Tanzu等产品,上层以FATE开源框架(包括FATELCM生命周期管理工具以及本地化站点管理工具)提供隐私计算保护、数据安全网络、健全和审计系统、区块链存证等,为用户打造了基于VMware的基础设施多云以及云原生的软件定义数据中心,提供敏捷度很高、服务强大的的联邦学习平台。
这一联合解决方案已经吸引众多金融机构和政府部门的关注。
“除了FATE之外,VMware还参与了Open FL、KUbeFlow 、FedLCM3等等联邦学习社区的贡献,在联邦学习领域里有很深的参与度以及影响力。”VMware中国研发中心技术总监张海宁说。
据悉,张海宁在VMware云原生实验室负责云原生和隐私计算领域创新的工作,并于社区众多伙伴紧密合作一同发展生态。过去几年里打造了若干重点项目,以开源的形式输出到社区,巩固了众多业内合作伙伴的关系。
2. 云原生创新成果:联合解决方案 Deep Cooling
2020年,VMware和英特尔中国区IoT事业部,与云创远景(Quarkdata)一起打造的数据中心治理方面的Deep Cooling深度制冷解决方案,通过持续的边缘 AI 干预和实时控制,帮助企业优化数据中心的整套制冷体系的能耗表现。
其中,VMware提供了运行IT基础软件以及整个系统数据采集和软件基础平台。如在2017年起参与的Linux基金会下的科研项目,能够在边缘环境收集数据且进行一些边缘计算,更快处理边缘上决策任务,同时在内部采集大数据和IT系统进行整合,实现一个统一的仪表盘,帮助运维人员进行决策;VMware Tanzu在边缘节点上,在裸金属情况下提供任务分发,确保其全生命周期在云端进行同样的方案。
英特尔为边缘和云上进行机器学习训练和推理提供了所需的硬件加速平台。
基于VMware和英特尔的支持,云创远景打造了一个高精度的数据中心内部数据模型,根据输入的数据中心内部历史和实时电力供应、温湿度等数据在这个模型中进行预测,预测未来一段时间内数据中心的负荷以及需要的能量,据此进行调整,再进行一步步迭代,用增强学习的方式对模型进行优化和提高。
Deep Cooling深度制冷解决方案去年推出后,在国内多家大型运营商以及大型企业的机房里进行了采用,在大型电信机房中最高可节省30%的电能,同时降低了二氧化碳的排放,受到众多大型企业的关注。
2021年底,三方就该项目在全球推广运行情况的中英文版联合白皮书《面向可持续经济发展的碳中和计算技术—数据中心新基建背景下的减排创新》。
“VMware从基础的虚拟化开始到存储虚拟化、软件定义的数据中心、基于云的可持续性以及零碳云,都在帮助企业的IT系统节省能源消耗,减少碳排放,最终达到零碳云和近零排放的目标。这些承诺为VMware到2030年净零排放目标铺平了道路。”在VMware中国研发中心的 边缘计算实验室负责边缘计算和可持续性相关项目的路广主任如是说。
ACE 智能云边共创生态
中台建设的重要意义不言而喻。面向AI 、云原生、边缘计算,VMware联合Intel、EMQ、Kyligence、江行智能、灵雀云等多位生态合作伙伴组成ACE智能云边共创共创生态,以科技向善为愿景,致力于推动开源项目和开放云的技术创新。该生态聚集了国内外开源组织、行业专家、企业领袖等重磅嘉宾,围绕开源技术和生态展开多层次的交流、沟通与合作。
目前,VMware通过ACE生态共同开发了一些AI、云原生、边缘计算以及其他新兴领域的技术解决方案和服务,包括阿里云与VMware联合开发的阿里云VMware服务。
谈到生态体系建设的价值和意义,张海宁认为,通过合作伙伴和ACE生态网络,VMware可以接触到之前达不到的范围,在把VMware的技术、创新推广给更多的创新型客户、创造更多价值的同时完善自己的解决方案,这是一个双向生态的层级;路广补充说,VMware和合作伙伴共同建立的生态体系,可帮助客户、社会解决现实的问题,提升可持续性、可信、平等机会的价值,是多赢的策略。
- 凌华智能推出AmITX Mini-ITX 主板,助力边缘人工智能和物联网创新 – 2024年11月21日
- 派拓网络举办2024年合作伙伴Executive Kick-Off论坛,并表彰JAPAC领先合作伙伴 – 2024年11月21日
- 在一起更出色 长城欧拉牵手50万用户开启多彩用车生活 – 2024年11月21日