技术解决方案专享 突然500万人的访问量来查台风怎么破?

所属分类: 网站运营 / 其它相关 阅读数: 75
收藏 0 赞 0 分享

前言

台风苏迪罗于8月8日登陆我国沿海,台湾、福建、江西、浙江、安徽、江苏等地均受到影响。

“台风到哪里了”,这两天又成了一个全民话题。

浙江省水利厅研发的台风路径实时发布系统,可以让任何一个人都能通过网络及时了解台风信息。

台风的季节性反应在IT系统上,是访问量波峰和波谷的巨大差异。

随着关注度的提升,这种差异被不断拉大。台风来的时候需要紧急扩容,台风走了机器就闲置了。冗长的采购扩容流程和机器的复用问题难以解决。

2012年,浙江省水利厅选择将系统迁移到阿里云上,借助云计算的弹性应对巨大的峰谷差异。

台风带来的苦恼

服务器无法灵活的增删

先看一下网站近些年的业务量变化情况(由于缺少2012年及之前的数据故只能用现在的数据来让大家有个直观的感受):

2012年“海葵”期间峰值PV达到350W,UV达到120W

2015年“灿鸿”期间峰值PV达到1434W,UV达到508W

这些业务高峰基本上都是每年的7月至10月间产生的,其余时间网站访问量只有几千。对,没错,就是几千。

从数据来看,三年时间网站的关注度有了近5倍的增长。

与之对应的服务器数量,也是随着季节变化而变化。

比如平常只需要2台服务器即可,但是台风来了就需要增加到12台,那么10台物理机采购就需要近30W块,但是台风过后这10台物理机又没有任何负载了,怎么安置他们又是个问题。

未来,这一问题可能还会进一步加剧。

运维成本太高

由于浙江省水利厅内部IT平台较多,人员较少,没有办法安排专门的运维工程师和DBA来支持台风网站,平时都是由开发人员来兼职。

需要每个月基于网站的访问情况和历史数据,对平台服务器数量进行评估、调整,人力和工作量较大。

如果产品可以承担大部分的运维工作,做到自动化处理服务器的增删,数据库的备份等工作,那么将大大的节省了成本,并且能将更多的精力集中在台风平台的优化、业务逻辑优化上。

攻击无解

普通的IDC和自建机房最怕的就是大流量DDoS攻击,这种攻击会导致机房出口线路拥塞,影响该机房所有用户和业务。

综上所述,显然这种传统的处理方式反应速度太慢。对于台风路径实时发布系统这种灾害预警网站,如果长时间无法打开,容易影响到台风期间大家的日常生活安排。

毕竟现在通过手机就可以第一时间获取最新的台风位置等信息,非常便捷。

云计算如何应对台风

第一阶段

之前传统的方式会经常遇到“平常时刻好用不要用,关键时刻想用不能用”的尴尬局面。

于是浙江省水利厅在2012年做出创新,将台风网站迁入阿里云,当时主要考虑到平稳上云,所以并未对网站架构等做大量调整。当初仅使用了阿里云的云服务器(ECS)、负载均衡(SLB)和开放存储服务(OSS)产品。

上云之后,浙江省水利厅确实体会到了按量购买、快速调整的便利性,再无之前的顾虑。

当时的网站架构简单的描述如下:

经过这样的改造后,当年网站仅用5台云服务器就成功的支撑了峰值350W的访问量。

第二阶段

台风网站下一步需要对外提供移动端的支持,一旦移动端开放了,那么访问量将会剧增,毕竟移动端的便利性是PC端无法比拟的。

同时台风网站初次改版上云后发现使用开放存储服务(OSS)来做台风路径数据、云图数据的中转还是会有延时的问题。

于是,浙江省水利厅又再次对网站架构及产品使用上做了如下调整:

云服务器(ECS)里的网站环境部署及网站代码调整优化,与数据盘解耦,软件及数据全部放置到系统盘。

使用该系统盘制作自定义镜像,后面扩容机器即可使用自定义镜像快速扩容无需重新配置环境和拷贝网站数据。

启用弹性伸缩服务(ESS),对同一角色的服务器性能评估并在SLB中自动完成扩容、缩容,解放人力、提升效率。

将台风路径数据从开放存储服务(OSS)里迁移到云数据库(RDS)中。可以保证各WEB服务器获取到的台风路径数据的实时性和一致性。

由于台风路径数据同步周期为1个小时及以上,所以网站前端机没有必要每次访问都调用数据库。在网站前端机中配置缓存,节省数据库的资源,提升网站访问体验。

经过这样改造后,今年“灿鸿”期间,峰值PV达到1434W,UV超过500万,其中有1000W的访问量来至于移动端。

第三阶段

台风期间使用高防IP功能

高防IP是将大量攻击用户的流量引入到高防平台,由平台进行分析过滤,将正常的请求转发给真实的业务服务器。

阿里云安全品牌云盾的DDoS高防IP是东半球最大的高防中心,防御DDoS、CC攻击。用户无需部署,支持一键弹性升级防御量。

网站架构持续优化

“灿鸿”期间的峰值PV里有70%的流量是来自于移动端,且网站的访问量增长剧烈。

需要结合阿里云更多的产品,对自身架构上做些改造以应对未来的高速发展。

备注

云服务器(ECS)

一种简单高效,处理能力可弹性伸缩的计算服务助您快速构建更稳定、安全的应用。

提升运维效率,降低IT成本。

负载均衡(SLB)

对多台云服务器进行流量分发的负载均衡服务。

SLB可以通过流量分发扩展应用系统对外的服务能力,通过消除单点故障提升应用系统的可用性。

开放存储服务(OSS)

对外提供的海量、安全和高可靠的云存储服务。

RESTFul API的平台无关性,容量和处理能力的弹性扩展,按实际容量付费真正使您专注于核心业务。

弹性伸缩服务(ESS)

根据用户的业务需求和策略,自动调整其弹性计算资源的管理服务。

其能够在业务增长时自动增加ECS实例,并在业务下降时自动减少ECS实例。

云数据库(RDS)

是构建在SSD盘上,完全兼容MySQL,SQLServer,PostgreSQL协议的关系型数据库服务。

采取主从双机热备架构,具有多重安全防护措施和完善的性能监控体系,并提供专业的数据库备份、恢复及优化方案。

开放缓存服务(OCS)

是在线缓存服务,为热点数据的访问提供高速响应。

高防DDoS专家服务

是一项防御DDoS攻击的托管服务。

主要内容包括:防护策略托管、攻击实时监控与及时通知用户、阶段性网络威胁分析报告和用户重大活动安全保障。

更多云产品:http://click.aliyun.com/m/1332/

更多精彩内容其他人还在看

全方位解析百度竞价数据分析中的几个疑问

数据分析对于一个合格的竞价员来讲几乎成为必需品和熟知的技巧,数据分析可以看出竞价中很多的问题,包括数据关键词来源、高点击、高展现、高消费、高转化等如何优化与开展,下面针对百度竞价数据分析中几个疑问梳理梳理
收藏 0 赞 0 分享

网站引流不能死抱SEO 多元化才是引流的王道

如何才能够让站长们的未来变得一片光明呢?最为主要的就是要实现网站引流的多元化,如果只注重抱微信这一个大腿,想要提升网站流量就会变得很困难,因为从SEO优化的角度上来看,想要提升网站的排名自身就是一个长期的历程
收藏 0 赞 0 分享

蓝翔营销 到处是挖掘机哪家强,是否为蓝翔品牌挖了个坑?

“挖掘机技术哪家强?”。这句话在近一两个月在网络上可谓看到你都视觉疲劳了。现在挖掘机蓝翔负面新闻越来越多,下面面我们来看看挖掘机哪家强的对于蓝翔的影响
收藏 0 赞 0 分享

中国网站备案制度的弊端:繁琐复杂时间长成本高

网站备案制度繁琐复杂时间长成本高,建网站要备案,转接网站主机要备案,修改备案信息也要备案,新增网站也要备案。网站那好后, 工信部还要抽查核对信息,核对错误要注销备案。周期漫长的网站备案制度,迫使很多网站选择把主机放在国外地区
收藏 0 赞 0 分享

网站推广 你知道什么样的内容更容易获得快速传播吗?

每天人们在网上共享的信息都是不计其数,但当中有多少会引发在线的传播呢?只有很少,绝大部分都被淹没于浩瀚的信息流之中。你知道什么样的内容更容易获得快速传播吗?请看下文
收藏 0 赞 0 分享

网站与搜索引擎是什么关系?这才是网站与搜索引擎的关系

网站与搜索引擎是什么关系?很多做网站优化的人从来都不待见搜索引擎,甚至咬牙切齿,其实我要说的是,你本就是靠搜索引擎生财,完全没必要如此,搜索引擎不是网站的敌人,更不是仇家,相反,你有没有想过,搜索引擎与网站本来就是互利互惠
收藏 0 赞 0 分享

电商行业自己可能先革命 经纪公司该干什么?

一直叫嚣经纪行业将死亡的电商,在经纪公司并未出现问题的时候,自己的经营模式已经被广泛质疑。独立经纪人在目前中国市场里,天然就是鼓励私单。这种模式要是能做大,还有天理吗?电商平台自己开经纪公司,这不是让裁判员和博尔特一起赛跑?博尔特会干吗?
收藏 0 赞 0 分享

外卖O2O开进社区,淘金还是掉入深渊?

日前,叮咚小区资金链断裂的消息一时间引起热议,人们在唏嘘社区O2O烧钱的同时,也看到了这一市场的开发潜力。与生活用品、家庭大宗采购相比,“民以食为天”的餐饮则是刚需,也是消费最频繁、最容易聚集流量的入口。
收藏 0 赞 0 分享

挖掘机哪家强火了蓝翔赔死了:生源枯竭 巨额亏损

挖掘机哪家强火了以后,山东蓝翔高级技工学校及其创办人荣兰祥被接二连三的负面消息缠身。在“蓝翔师生跨省打架”等消息见诸媒体后,蓝翔目前来校新生的人数下降了90%,但是下半年的各项支出等1.8亿元还要正常进行,亏损基本已成定局
收藏 0 赞 0 分享

95后女生用身体旅行引爆事件营销,真的好吗?

“身体旅行”的事件最近很火吗,说白了也就是一个变相的营销,自称一名95后的“萌妹子”,想要通过“一城一爱”的方式实现心中的旅行梦想。简单来讲,就是面向全国不同城市征集不同的临时男朋友,由男朋友完成旅行导游和买单工作,而女孩子付出情感和身体
收藏 0 赞 0 分享
查看更多