加入收藏 | 设为首页 | 会员中心 | 我要投稿 徐州站长网 (https://www.0516zz.com/)- 科技、建站、经验、云计算、5G、大数据,站长网!
当前位置: 首页 > 运营中心 > 产品 > 正文

百度智能云副总经理谢广军:开源生态推动云计算技术变革

发布时间:2019-06-27 23:29:08 所属栏目:产品 来源:中国IDC圈
导读:副标题#e# 2019年6月25日,由浪潮与OCP开放计算社区联合主办的首届OCPChina Day(开放计算中国日)在北京正式开启。本届OCP China Day聚焦人工智能、边缘计算、OpenRack、OpenRMC、SONiC、OAM等前沿技术话题,来自Facebook、LinkedIn、Intel、微软、百度、
副标题[/!--empirenews.page--]

2019年6月25日,由浪潮与OCP开放计算社区联合主办的首届OCPChina Day(开放计算中国日)在北京正式开启。本届 OCP China Day聚焦人工智能、边缘计算、OpenRack、OpenRMC、SONiC、OAM等前沿技术话题,来自Facebook、LinkedIn、Intel、微软、百度、腾讯、阿里、诺基亚、中国移动、浪潮等资深技术专家分享了最新技术进展。近千名工程师和数据中心从业者参加了此次大会。

OCP是全球最大的开放硬件社区,2011年由Facebook发起成立,其宗旨是以开源开放的方式,重构当前的数据中心硬件,发展面向下一代数据中心的服务器、存储、网络、基础设施等创新硬件。目前,OCP核心会员超过200家。

百度于2019年3月14日,宣布加入OCP开放计算项目(Open ComputeProject),成为该项目的铂金级会员,致力于加强与项目成员在数据中心、AI硬件标准等方面的技术交流和联动,推动AI新硬件技术的加速落地,并通过制定统一的硬件标准降低落地成本。在本次OCP China Day上,百度智能云副总经理谢广军以《新技术驱动基础设施变革》为题进行了分享。

2

百度智能云副总经理 谢广军

以下为大会演讲实录:

谢广军:大家早上好,刚才听了很多嘉宾的分享,我们可以看到过去十年中,开源开放,不管是软件的开源开放还是以OCP为代表的硬件的开源开放,对云计算产生了非常巨大的推动力。刚才英特尔的嘉宾讲,我们有很多新的技术、新的设计,也在不断推动着云计算的变革。今天我作为云计算的从业者,会从云的应用视角跟大家分享一下这些新的技术怎么样推动基础的云计算方面的变革,我们有哪些新的趋势。

云计算,用户需要的有这么几方面。我们需要为客户降低成本,需要有更低的成本,需要有极致的性能,有更为弹性的基础设施,有计算力驱动应用往前的发展。新的趋势是云、边缘和端的协同计算。当前云的计算,我们认为有几方面新变革推动着新的云计算模式往前发展,首先是我觉得和今天的主题很契合的,就是硬件,我们新的硬件技术推动着云计算产生了什么样的变革,第二是新的模式,比如Serverless化的模式,第三是智能化,第四是边缘。

硬件,我们在通用计算、存储、网络、异构计算有很多新的模式,比如存储领域,今天有英特尔的Optane这样的方式,网络我们有25G、100G已经广泛应用,软硬协同方面我们有DPDK、SPDK,我们有新的协议栈,有新的offload的方式,带来的是在云软件的设计上我们做的新的引擎、新的分布式协议、新的线程模型,给用户带来的更高的性能、更低的成本,比如新的模式,Cloud Native的数据库等等,这些最近几年发生了很深刻的变化。

我们举几个例子。我们在AI的时代,所谓的异构计算算力由通用向更专用的方向发展,百度也在自己做昆仑芯片,我们下半年会基于昆仑芯片的计算实例计算云主机,这个云主机的性能或性价比我们需要做到业界最高。我们要求芯片能够实现完整的虚拟化,一个芯片能分配给多个云主机同时进行使用,使得我们在异构上需要以更低的成本提供更好的性能。

比如在网络这块,以前纯靠软件做云的network,今天我们有很多软硬件协同的方式,比如我们的SmartNIC,把我们的协议栈、分布式块存储的storage的前端接入,比如VXLAN的解析,我们把它offload到SmartNIC上,使得我们获得极致的性能。我们会做Hyper的Offload,使得云主机既有裸金属的性能又有传统的可管理性。在存储领域,比如我们的块存储,大家都知道云上用的磁盘分成本地化和分布式的块存储,分布式块存储有很多好处,比如管理更灵活。今天我们新的网络的性能,我们有25G、100G,我们有新的存储介质,我们有RDMA,我们现在推出一款Nearlocal的block storage,既有接近本地的吞吐和延时的能力,同时我们还会有云磁盘的快照、备份、DR等可管理性,这块也是软硬件协同的结果。

在存储领域,比如我们的对象存储,今天市面上见到的更多的是标准的冷的存储等东西,今天应用磁带接入到对象存储中,我们提供了归档的存储模式,这种归档的存储模式使得单个带库的容量会提高很多,单GB的存储成本会急速下降。当我们推出这样一个东西的时候,成本是我们以前做到的对象存储里最冷的那一档成本的15%,这块我们有接近一个数量级的成本的降低,在很多场景有非常大的性价比的提升。

在存储领域,我们再举个例子。尤其在机器学习和HPC领域我们有大量的非结构化的小文件需要读取写入。传统是用全闪的分布式文件系统承载它的存储,今天我们把存储系统的设计用新硬件和软件重新做一些设计,比如我们把存储系统的源数据的cache用更高性能的比如英特尔的Optane承载,我们推出了一款适合于机器学习的storage的产品,它能够在读写混合的场景和纯读的场景IOPS差别不超过10%。我们曾经测试过文件数从1亿涨到80亿,对文件访问性能的降低不超过5%,相对于全闪方案我们成本能降低22%。

刚才讲的新的硬件或软硬协同给我们带来的一些变化,接下来的一个趋势,我们在云这块一直强调,上一代的云是我们的主机实力,我们的存储大家最常见的IaaS,接下来会发生什么变化,我们认为是Serverless,为什么是Serverless,这里面有几个原因。无服务器带来的好处是使得我们站在用户的视角来看,我们有更好的弹性、更好的成本节省,使得我们的用户只专注于自己的业务逻辑而无需关注底层的资源,屏蔽底层资源的编程,所有资源都是按需提供的而且是很细粒度按需提供的。这里面有一些业界同行的例证,未来几年对AWS来说最重要的趋势是什么,应该是在Container和Lambda上,Serverless将成为未来云计算时代默认的计算算例,很大程度上会取代今天基于服务器的计算,我们如果梳理一下这个东西,我们从底层资源的角度从物理机到虚拟化,今天到云,再到函数,到Serverless。从应用的架构来说,从C/S、B/S到SOA到微服务,现在再提函数计算,这个趋势现在已经非常明显了。顺应这个趋势,我们今天在Serverless化上也会做很多的布局。以前传统的云计算会变成一个底座,比如VPC、主机、Storage,我们会提供新的Serverless化的基础设施,比如我们的安全容器、冷启动预热、存储计算分离等等一些技术平台。

接下来的趋势是智能化,我们前些年一直在提一个词叫自治,比如数据库自治。再早的时候对数据库来讲SQL的调优是靠人做的,自治是这个系统能不能自我完成,今天我们有了人工智能,我们有了智能化的武器,使得我们的基础设施也能够完全做到自治。比如我们通过大数据的统计、通过AI的技术使得我们的基础设施能够顺应智能化的趋势,带来的是降低成本、提高效益、优化体验和提升管理等等。

(编辑:徐州站长网)

【声明】本站内容均来自网络,其相关言论仅代表作者个人观点,不代表本站立场。若无意侵犯到您的权利,请及时与联系站长删除相关内容!

热点阅读