汽车之家开发团队使用代码发布系统的经验总结

所属分类: 网站运营 / 网站策划 阅读数: 106
收藏 0 赞 0 分享

pushguide发布系统,是汽车之家正在使用的代码发布系统。「代码上线」是运维日常工作中最重要的一部分。在没有发布系统之前, 所有的业务都需要运维来手动上线。 上线工作对运维人员来说是不小的工作量。 为了解放生产力,提高上线效率,我们开发了该系统。

1. 背景
(1)野蛮生长阶段
业务线自己各自为战,没有统一的代码规范, 发布流程。 上线之前提交上线单通知运维人员手动上线。这种模式的缺点不言而喻,运维人员需要随时待命, 从上线部署到最后验证, 有问题的话回滚都需要运维人员全程手动完成,费事费力。
(2)统一规范,使用发布系统发布
业务线接入CI和发布系统之后, 业务方通过CI打包自己的代码, 通过发布系统自助完成发布。如发布代码有问题,可以在系统上直接选择要回滚的版本。 运维人员只需要配置好要发布的模块即可。大大解放了运维的工作量。同时,各个业务线需要按照统一规范组织自己代码结构才能够使用发布系统。

2. 设计原则
什么样的系统更适合于汽车之家的业务? 首要要满足不同业务线的不同项目类型的发布,这些类型包括.net项目、java web项目、windows计划任务等。 其次,公司有大量的windows服务器, 发布系统需要同时支持windows和linux。最终我们选择基于saltstack自动化运维配置工具设计开发发布系统, 使用该工具的好处如下:
(1)python开发,和运维开发的技术栈一致。对于以后的扩展,二次开发都很方便
(2)快速, 原生提供了http api支持
(3)支持windows

3. 发布系统架构
3.1 发布系统的整体架构
发布系统前端通过salt api与salt master进行通信, 发布任务描述信息到salt master。salt master通过salt命令调用我们自己开发的模块来完成一次发布任务。
2016512102253146.jpg (600×407)

3.2 发布系统与其他系统如何合作完成代码发布
我们需要通过CI系统来打包代码,通过配管系统来部署代码运行环境,如tomcat等等。通过CI以及配管系统提供的接口,我们在发布系统中获取到发布的版本和配置的tomcat信息
2016512102328453.jpg (600×386)

3.3 发布系统对上线流程的抽象
我们把一次上线流程抽象成以下四个阶段
(1)准备阶段
(2)发布前阶段
(3)发布阶段
(4)发布后阶段
为了支持不同发布类型和可扩展性, 我们通过继承抽象出不同的类来完成一次上线流程,如下所示:
2016512102350644.jpg (498×563)

4. 遇到的问题
作为重要的代码发布系统, 稳定性上一定要有可靠的保证, 这样才能让业务方人员放心大胆的使用系统发布代码。但是在发布系统的使用过程中我们也遇到了一些问题。
4.1 确保salt的稳定性
由于pushguide是基于saltstack来完成代码的发布,所以对saltstack的运维又显得很重要。在前期的使用的我们经常遇到由于salt的问题导致发布系统出现不可用的情况。所以我们优化了整个salt的架构。通过使用多机房multi master来保证salt的稳定性。关于salt的高可用方案,网络上也有一些其他做法如加入代理层,重写returner模块等方法。但从效果看,目前的multi master可以满足我们现在的发布需求。
4.2 代码的规范
系统使用前期,由于业务方的代码不够规范,比如我们在现实场景中会遇到有的业务方把业务代码和日志文件放在一起,代码目录非常大,导致发布的失败。所以对于发布系统的来说,我们不能仅仅是发布代码, 同时可以制定代码,目录规范来约束业务方规范自己的代码。
4.3 监控
对于发布系统web服务的监控自然是必不可少的, 同时我们还定时对接入发布系统的主机salt minion连通性进行检测, 发现有salt minion不可用情况及时处理, 避免在发布时失败的情况

5. 发布案例
下面以一次代码发布为例, 详细介绍发布系统的使用。
运维人员登录发布系统,会根据权限展示运维人员可以看到的发布模板。
2016512102434428.jpg (600×213)

进入新建模板页面, 填写必要信息, 新建模块。在模板类型选择中可以选择本次配置的是.net、java、windowd计划任务等。
2016512102450371.jpg (600×264)

配置完成后,如果业务方有上线, 只要进入发布页面,选择要发布的版本,点击发布,就可以自助的发布代码。
2016512102518057.jpg (600×274)

在发布页面, 同时还可以看到上次发布的情况,已经发布每个阶段的情况。
2016512102552236.jpg (600×126)

业务方人员还可以在统计分析页面查看自己的发布情况,包括发布时间,发布次数,成功率等等。
2016512102609002.jpg (600×237)

6. 未来可以做的事
6.1 异步发布
目前发布系统的做法是同步发布, 点完发布后,页面会阻塞在当前。 未来我们把整个发布过程异构, 使整个发布过程的体验更加稳定,流畅。
6.2 自动回滚
我们可以为让业务方人员选择是否自动回滚以及要回滚到的版本。 当发布失败时, 执行自动回滚逻辑, 让发布更加轻松智能。
6.3 对发布数据的应用
通过统计业务方的发布情况, 我们可以规范业务方的发布行为。比如哪些时间段的发布成功率低,那些服务器总是发布失败等等情况。通过这些数据分析, 帮助业务方提高上线的成功率和发布质量。
6.4 可视化发布
以后我们可以做到上线的每个阶段可视, 比如用流程图展示出发布在哪个阶段出了问题, 可以直接在该阶段选择是否回滚或其他操作等。

7. 小结
发布系统马上要接入公司的所有业务线,这对我们来说是一个不小的挑战,如何优化我们的系统,提高系统的稳定性,如何让用户体验更好,满足更多需求,我们还有很长的路要走。

更多精彩内容其他人还在看

电子商务网站转型的几个方向

为了给电子商务平台买卖双方以更大的吸引力,或许可以从企业本身的需求上得到一点启发: 第一、终端消费群体对生活品质的要求不会因为经济环境的恶化而降低标准,性价比足够高的商品仍然具有吸引力; 第二、采购商和供应商经营成本的增加必定导致终端产品价格的上涨
收藏 0 赞 0 分享

做网站内容为王

 笔者亲身经历过网站发展的过程,中国网店网从开始建立的毫无流量,毫无内容到现在逐步发展起来,感触和体会非常多,其中经历了太多太多的抉择,做网站到底是追求流量还是追求内容?亦或是追求用户?笔者用了大量的时间去思考这个问题,看着自己负责的网站一步一步的
收藏 0 赞 0 分享

互联网应该进军高端付费用户

互联网进军高端付费用户吧! --我不是不愿意付费,我需要的是能让我产生付费冲动的服务。 经常被同事们批评,老嫌弃我是高端用户,我真的很想辩解,我没进互联网这一行工作的时候,我就是高端用户了。 8年前,我就开始愿意为互联网付费。由此可见,高不高端是天生的
收藏 0 赞 0 分享

站长!其实你的思维可以更“变态”些!

按正常的理论来说,一般成功的站长,多多少少“头脑”都有点问题!也可以说比常人更“变态”!当然我说的“头脑有问题”、“变态”并不是医学上的哪些病,而是说这些成功人士一般想法和做事风格往往超出别人的想象,正是因为这样,才会有许多不同的特色成功站点出现
收藏 0 赞 0 分享

靠网站致富的梦想破灭,站长的前途在哪里?

 日赚500元,这是广大中小站长朋友们的一个不大不小的梦想。但是时过境迁,当今互联网早已非昨日之网络世界,有一些变动因素是我们不得不考虑的,日赚500元的不可行性分析笔者将主要从以下六个方面进行简要的分析。  其一,网民经验的丰富。  由于网民的经验越
收藏 0 赞 0 分享

用户体验都是从哪个角度做的

网站面向终端,用户体验的差别直接影响网站的发展。看看业界都是怎么做用户体验的。 1 豆瓣网:心灵鸡汤。它的用户体验究竟好在何处?非粉丝不能明白。如果你是个爱书人,自认为还有那么点儿与众不同的喜好,那么豆瓣很符合这样的定位。一杯清茶,伴
收藏 0 赞 0 分享

李一男2003年在港湾给开发人员培训时的语录

李一男2003年在港湾给开发人员培训时的语录: 【1】好好规划自己的路,不要跟着感觉走!根据个人的理想决策安排,绝大部分人并不指望成为什么院士或教授,而是希望活得滋润一些,爽一些。那么,就需要慎重安排自己的轨迹。从哪个行业入手,逐渐对该行业深入了解,不
收藏 0 赞 0 分享

少儿网站项目策划

一. 概述: 如果说21世纪是网络世纪,那么21世纪的教育也应该是网络化的教育。面对网络,当我们还在为网络的利弊以及是否让孩子上网争论不休的时候,Internet上的儿童网站在北美地区的普及率已经相当高,那里的孩子们在网络上已经走得很远了:小学老师给孩子布
收藏 0 赞 0 分享

个人站长建设地方网站完全手册

走到第十个年头,互联网下一步会走向何方?这是我们大家不断思索的问题。地方性网站一直是我比较感兴趣的话题,我的博客《榆林网志》里许多文章也在讨论我所在的城市的网络发展。地方网络也是我觉得中国互联网以后发展的一个趋势,也是榆林区域网络的前景所在。   
收藏 0 赞 0 分享

小型网络公司发展离不开个人站长

个人站长最大的愿望可能就是有一天自己的网站可以成为网络公司运作。但是,作为个人网站的站长,是不是也该理性的想想,那些网络公司的网站,就比个人站长的牛吗?曾经我很喜欢Mop,也很喜欢Chinaz 。是每天必上的,后来他们慢慢商业化成公司运作后,我现在只是在偶
收藏 0 赞 0 分享
查看更多