029-88661315
matrix让云世界化繁为简
凯发ag旗舰
2018-04-11
次
一键分享
本期《百度云说》邀请到的嘉宾是百度云主任架构师、百度云技术委员会主席吕毅。现负责百度云整体的技术把握，曾作为创始人，构建和应用百度集群操作系统matrix。matrix是国内领先的成功构建、并大规模应用的基于轻量虚拟化凯发ag旗舰的技术支持的超大规模资源调度和管理的集群操作系统，是百度云架构、百度业务平台的基石。访谈全文如下。
q：百度matrix集群操作系统是在什么背景下诞生的？
吕毅：云计算相比于传统it最大的优势就是在成本和效率层面实现了质的飞跃。matrix正是百度自身在追求成本和效率更加高效的大背景下诞生的，是内部孵化且在业界具有领先地位的云计算产品。百度是在2010年开始对内部云的虚拟化技术进行尝试，2012年正式开始立项做matrix集群操作系统，以此来解决数据中心资源利用率不均衡、故障处理效率低以及配置管理复杂等挑战。目前，matrix已经全面覆盖百度内部业务，并成为百度云的关键组件。
q：百度matrix从立项到现在经历了哪几个发展阶段？
吕毅：2012年-2015年是matrix发展的第一阶段，这期间百度数据中心效率提升明显，资源利用率得到大幅提升，获得了很好的收益。
2015年-2017年是matrix发展的第二阶段。由于大数据的大量生成以及ai的快速发展，大数据处理和模型训练增长迅猛，从而对资源的需求大幅增加。为了结合业务发展需要和成本控制，从2015年开始启动大规模的混合部署，对资源管理、调度以及对上层业务的支持提出了更高的要求。matrix在这个阶段很好地满足了业务需求，并得以实现大规模混布。目前，matrix支撑了所有内部业务的交付，混合部署也成为百度默认的资源交付方式。同时，从业务角度看，混合资源和非混合资源的影响感知非常小，极大地节省了成本。
q：百度matrix最为核心的功能有哪些？
吕毅：matrix架构是可以与google borg/omega架构来对标的，通过分层调度器来满足业务多样性调度需求，通过共享状态的方式达到资源的最大化利用。据悉，目前matrix管理着国内最大的容器集群系统。
此外，matrix还具备完善的调度生态，提供面向批量作业和服务的不同调度系统，能够满足业务高效吞吐和低延迟稳定性的需求。在此基础上，在百度内部提供了完整的服务托管体系，面向业务提供多样的服务管理功能，结合研发和测试过程的优化，极大的提升业务的研发效率。
简单来讲，对客户来说，只需要提供物理机，初始安装matrix集群操作系统后，剩下的就是通过matrix实现对上层应用服务的发布、部署、资源管理，以及整体资源优化。
q：从功能的角度，matrix未来会朝着什么方向演进？
吕毅：从开源来看，dockerimage已经成为容器部署的标准。因此，在容器角度上，matrix在内核基础上继续定制优化容器技术，并继续完善配套的管理机制。
从技术栈来看，最底层是虚拟机和物理机，matrix会优化管理整个集群的物理资源，包括物理资源的故障恢复以及分区域管理；往上是包括容器的编排和调度如何更加高效；最上层是服务管理层，涉及到服务的分级发布、服务管理等，如何更通用和易用，以及如何更好的优化ci/cd，持续提升业务的迭代效率。
最后，单独提到容器技术，如何持续提高容器的安全性（隔离），实现真正多租户的混合部署，逐步和虚机技术实现更好的融合。matrix将继续借鉴和回馈k8s/docker社区，并结合百度自身对容器技术改进和理解，进一步完善自身功能，持续对内部和外部客户输出。
q：matrix在当前阶段的发展目标是什么？
吕毅：matrix当前阶段的目标优化内部，同时对外赋能，百度公有云以及基于matrix对外提供各种云服务，而一些企业级客户其实在内部的私有云同样有着类似的需求。尤其是现在越来越多企业都有着大数据处理以及提升企业ai能力的需求，这其实和百度早期非常接近，希望能够利用我们在集群操作系统的经验，包括服务管理、容器技术以及其他开源技术的实现，结合百度云的大数据和ai能力，整体打包做成客户凯发ag旗舰的解决方案，满足企业客户的发展需求。
q：matrix这种非常强大的集群管理系统比较适合什么类型的客户？
吕毅：服务器数量只要达到上百台的企业级客户就可以采用matrix。业务规模较小时，其实资源管理和调度相对较为简单；当业务规模较大时，不引入容器技术就会导致上层管理系统的设计和实现复杂度增大，尤其是在混合部署下差异更高。引入容器技术，随着规模增长，客户就会感受到容器本身效率会对业务产生的影响，这就需要集群操作系统来管理复杂的环境，规范和优化业务。
q：企业级客户如果想采用matrix的话，切入点会在哪里？
吕毅：从我们现阶段接触的客户需求来看，我们会首先辅助企业内部构建一套基于容器技术的系统，来优化企业内部原有的业务。现在很多企业对于大数据和ai的诉求是非常强劲的，这对于cloud的能力提出了更高的要求，因此百度首先会在cloud部分提出相应的凯发ag旗舰的解决方案，满足企业内部应用容器技术上迁移。
其次，百度可以为企业提供大数据和ai的定制化凯发ag旗舰的解决方案，最后整体面向企业进行abc的交付，很好地满足企业的大数据和ai业务需求。
q：matrix对外赋能是否随着业务和客户的发展而变化？
吕毅：企业级市场的核心就是以客户业务需求为导向，matrix也一致秉持这个发展理念。matrix会沿着通用化的发展路线对外输出，保持基础核心功能层不变，在深度分析客户需求之后结合百度的经验，抽象出相对通用化的系统和凯发ag旗舰的解决方案，再结合客户的业务需求进行定制。此外，百度会继续在内部坚持技术创新，包括加大对kubernetes、docker等社区的贡献，持续优化matrix的核心功能。
q：目前采用matrix产品的经典客户案例是？
吕毅：我们对外不单独交付matrix，matrix是作为百度对外交付凯发ag旗舰的解决方案的一部分。目前国内已经有很多客户在百度交付的凯发ag旗舰的解决方案中用到了matrix技术。比如，百信银行，作为国内第一家互联网银行，是一家建立在云上面的银行，并且集abc能力于大成的新时代银行，百信银行采用了来自百度的云架构技术，在分布式集群架构上构建起了银行的核心业务系统，非常具有前瞻性和领先性。
【凯发ag旗舰的版权声明】:本站内容来自于与互联网(注明原创稿件除外),供访客免费学习需要。如文章或图像侵犯到您的权益，请及时告知，我们第一时间删除处理！谢谢！
