大型国有金融企业研发中心DevOps规划与实践
本文根据〖2019 DAMS中国数据智能管理峰会〗现场演讲内容整理而成。
(点击文末“阅读原文”可获取完整PPT)
讲师介绍
姚元庆,中国农业银行研发中心资深专员,具有十余年金融业软件研发、项目管理经验。长期致力于组织级项目管理、PMO建设、敏捷研发规划,以及作为教练为项目提供支持等工作。
大家好,今天与大家分享的内容是DevOps在国有大型商业银行的规划与实践,审视从国有大型商业银行视角看一下DevOps怎么样规划与实践。分享内容大致是这样的:
分享概要
1、目标和背景
2、体系架构
3、三条主线,即:工具、流程、规范
4、总结
一、背景与目标
在去年下半年和今年上半年,我行提出了数字化转型战略。今年上半年的机构体制改革已经完成了,业务和科技部门在组织结构上进行了相关调整。
金融行业在研发过程中,经常提到的是双模研发,其中在核心系统上还是要用原来传统的方式来进行研发。
在业务角度,核心系统不会有那么大的变化,相对变化比较大一般都是掌银、网银及新兴业务方面,所以,在核心系统上采用稳态研发、瀑布式的或者接近瀑布式的方式是一个非常理智的选择。
而在其他方面,比如说网银掌银,市场变化压力非常大,如果不快起来,业务也会让你快起来,企业也会让你快,还要保持四平八稳,那是不想干了,是吧!
今年6月份,研发中心与信通院在DevOps方面进行共建。我们DevOps方面的目标可以简要概括为“1、3、5”:一个平台(DevOps),连接三个角色(开发、测试、运维),打通五个环节(需求、开发、测试、部署、运维)。如此构建农业银行研发中心的DevOps体系。
二、体系框架
体系框架方面,与大家说体系框架之前,把我最深刻一个体会与大家分享:那就是“零”。
“零”是什么呢?其实对DevOps内容来说,大家觉得DevOps是干什么的?对于企业来说:DevOps也好、敏捷也好、之前的CMMI也好,都只是企业实现目标的一个工具和手段。
有段时间CMMI、DevOps或者敏捷,相关内容在企业进行推销的时候,如果Get到企业的管理诉求、解决企业的痛点问题,其实叫DevOps还是什么都无所谓,尤其对大企业来讲,这个是最最重要一点。
还有一点我需要跟大家特别掏心窝的说一下,DevOps是什么?在学术和交流角度务必要清楚;但是,在企业角度最重要的是它能给企业带来什么价值。
DevOps是什么?拿这个图来说。大家看像是一个房子。DevOps就是装修队如何来装修你的房子。DevOps在传播过程中,首要提到的是拆墙(如:拆除研发与运维的墙、业务与技术的墙,当然也有企业与用户的墙)。让大家能更好的沟通和交流,快速的实现价值的交付。
这两年,我们科技圈的Dev和Ops是不够,视野太狭窄了。其实至少要到科技和业务,拿银行的词而就是痛殴“业技融合”来快速响应市场的需求。
以下几点很重要:有的企业能拆墙,有的企业只能从墙上开一扇门,有的企业最多能开一扇窗,有的企业可能只能钻一个孔。
对于实际执行者,需要考虑一下,适合企业现状的是拆墙、建门、开窗还是打孔,这个是最关键的一个点,否则大家就是在聊DevOps,聊DevOps而不是在做DevOps。
在做DevOps时一定要记住:你是在干嘛?拆墙、开门、开窗、还是打孔。如果孔都打不了,那DevOps就展示不要想了,先等等或尝试推动。
我们刚开始做敏捷只是开发过程敏捷,有些情况下只能做到这个范围,甚至有一些团队这都做不到。需要根据实际情况,下面做的内容是我们的一些探索与实践,站在研发中心角度,我们怎么来拆墙,开门,开窗打孔。
首先是体系框架图。在信通院DevOps体系规范里面有这样一个体系框架图。我们也基本上延用了相关内容,但是跟它比有一些特色。因为我们企业的形式其它企业不一样,我们是一个研发中心,就是上面有业务部门,下面有运维部门。
例如:
在我们的规范中叫组织文化。原版体系架构叫企业文化;
工具里面一站式工具平台,按照我们的工具平台写的;
再下面是流水线,我们是从提交、一直到部署和运维,而不是更长的一个流程;
随后是技术架构、应用架构,我们是有使用自己的Saas,IaaS,PaaS。
通过体系框架的比较,大家可以看到,我们跟业界方式方法基本一样,同时,根据相关实际情况进行了一些改造和优化。
其次是三条主线,工具、流程、规范。
在工具方面,我们要建设统一的平台:DevOps集成平台;
在流程方面,建设持续交付流水线、推进自动化测试、完善运营监控;
在规范方面,建立一个质量视图和打造DevOps组织规范。
三、实施路线——工具部分
工具方面:我们会根据规划进行一个逐步收敛,比如:配置管理工具、代码白盒检查、构建和发布工具等。
同时,进行管理链和开发链的一体化,测试链与开发链一体化,形成研发侧的工具链。
之后,就是研发态和运营态,对应就是研发工具链和运营工具链。形成统一的DevOps平台。
三、实施路线——流程部分
流程方面:有了工具,还需要用流程进行规范。比如:持续交付的流程,大家都是差不多,从业务需求,通过编码构建然后一直到测试环境,一直部署到生产部署。
这里有一点需要说明,部署到生产环境需要符合银保监会相关要求。测试方面、运营监控方面处理思路与此类似。
四、实施路线——规范部分
规范方面:规范部分可能这里面比较重要的就是质量视图,大家都知道-PDCA。
我们统一的过程管理整体视图是这样的,质量视图是分层级的,例如管理类视图,首先是制作“势能大”、对其它工作有指导作用的领导层使用的报表,通常是与考核和绩效有关的报表和指标。
在开发类视图中,大部分是技术方面的。比如配置管理工具、代码扫描工具、安全扫描工具、构建工具等,它们为项目组、团队来提供运行情况的信息。旁边,有生产环境有运营链对应的报表和指标。
质量体系中质量视图有指标,大家都关心指标。我们做了大致的分类,预计会形成这样一个视图,横向是我们的指标所产生的阶段,纵向是指标的大分类。比如说周期,会有什么样的指标,跨的范围是什么样的,效率会在哪个方面,不同颜色表示着不同的关注程度。有些指标可以促进系统内部改进和系统之间对比让大家相互促进。
如果把整个图画出来、把所有指标全都标出来肯定是比较大的图。可以把一些,最后关注点里面的指标先列出来,大家能看到我们关注什么,并且关注是在什么阶段。
这是我们的仪表板样例,包括周期、项目数量、交付的时间、以及所属部门等等。通过度量体系和相关仪表板。我们可以满足领导层进而是各个成绩了解实时情况。
下面说谈一下DevOps组织规范。正中间是DevOps的文化建设和体系建设。文化建设又包含了我们的一些制度标准、敏捷培训体系、指标与监控等方面内容;技术体系方面包括DevOps集成平台、持续交付流水线、分层自动化测试体系、监控运维分析、统一质量视图等。
它们共同作用、在技术方面有DevOps平台,在文化建设方面有标准。还需要定期的外部和内部自检、评价,逐步建立我们DevOps的相关规范。
六、总结
输出成果方面,建立农业银行的DevOps成熟度评价体系。可以评估某个研发系统的DevOps成熟度,这个大家可以对比一下原来的CMMI,我们做这个东西更多是让内部有一个评价、评估和考核方面的需要。
在考核体系方面,主要考核内容是交付周期,什么时候接到业务需求,一直到什么时候交付给业务。
今天与大家交流了最开始的企业使用DevOps、敏捷等最重要的“零”;之后,介绍了1+3,即:一个体系框架加上工具、流程、规范。希望能对大家有所帮助。
Q&A
Q1:我们公司也是大型国企,现在领导已经确定了要上DevOps,但因为我们有众多的外包合作方。我们希望借助这个平台和工具链,把很多项目外包模式逐步转成人力外包。在这个中间,有您里面提到的组织文化建设和规范推动的过程,所以我就想慢慢向合作方推或者是要改变很多不同的现有工作模式,有没有什么好的建议?
A:领导为什么要推DevOps?解决了企业的一个什么样的痛点?这个痛点是不是真的痛或者是痒点,大型企业的关注点的可能比较多,我们要分清,是否真的要解决问题和解决什么问题才去做DevOps。
外包是DevOps需要注意的一个坑,我个人觉得的重要的是,你要怎么来考虑激励他?外包人员如何融入?这些是跟企业内部员工完全不一样的。你把这个方面解决一下,人员激励能够融入团队里面来,做到这点才能解决你那个问题,逐渐把供应商的技术能力固化到你们企业里。激励方面才是最重要的事情,要不然也不要考虑其他的了。
想掌握的产品,跟你的技术能力是要匹配的,我们的特点是大型商业银行,需要承担社会责任、需要遵照银保监会相关要求,我们会一定会满足“风险可控”,同时也会进行“make or buy”分析,采取恰当的方式。
Q2:您觉得市场上随着DevOps不断发展,是如何改变开发人员和运维人员之间的一种合作方式?
A:开发人员和运维人员想改变的就一个,原来大家目标是不一样,开发受业务要求,要尽快发布新的功能,运维那边希望尽可能稳定,别出事,目标不一致导致原来协作方式出现那堵墙。
如何让他们目标一致协作起来,根本原因蛮简单,让这堵墙没有,原来是因为目标不一致产生的墙,现在让目标一致。
怎么一致?就是涉及到企业文化、团队组成、考核,才可能把这墙打破。如果只是通过工具,刚开始是孔,把信息传递过去,原来信息都传递不过去怎么弄?
现在通过工具孔,把信息传递过去之后,逐步让墙变得透风了,慢慢建窗、门。慢慢的推倒这堵墙,一定要让大家目标一致。
这个虽然看起来虚,但就是根本。协调目标这个事情是一个大手笔,通常需要改变组织结构。
Q3:我比较好奇,在大型金融机构里头,目前在机构里推DevOps都是研发机构发起的,为什么不是数据中心发起呢?
A:这个问题真的是一个好问题,Patric发起DevOps时是从一个运维侧逐渐发展起来的。大家做所有相关实践,大部分都是从运维角度考虑。这个没错,那么为什么银行这边大部分是从研发这个角度来?我个人理解不一定对,是因为整个银行压力传导点与前面说的情况不一样。
刚才说DevOps的时候是面临着运维压力,然后说要改,银行这边压力点是在开发部门,并且是业务给开发端的压力。为什么业务会给开发端这些压力?原因是多方面的,其中肯定是业务需求旺盛和或业务交付速度不够快。
假如说是这样的情况,对比同业交付速度比较快,而银行业务略微慢一些。这个时候压力就会出来,交付的压力会传导给谁?肯定是研发中心。我们就面临着所有的整个业务,这时,运维方面还没有传到到呢、或者感受的比较小。
活动推荐
2020年4月17日,北京,Gdevops全球敏捷运维峰会将开启年度首站!重点围绕数据库、智慧运维、Fintech金融科技领域,携手阿里、腾讯、蚂蚁金服、中国银行、平安银行、中邮消费金融、中国农业银行、中国民生银行、中国联通大数据、浙江移动、新炬网络等技术代表,展望云时代下数据库发展趋势、破解运维转型困局。