首页 > 传媒 > 关键词 > 腾讯云最新资讯 > 正文

腾讯云专家:春节黄金14天,如何提前解决数据库关键瓶颈?

2017-01-16 13:55 · 稿源:站长之家用户投稿

春节期间,电商网站争相推出大波促销,各大企业纷纷上线迎新活动。对于网站运维人员来说,随之而来的春节流量峰值也会对系统造成致命攻击,同时针对数据的攻击层出不穷,有些难以察觉。对此,腾讯云在国内率先提出,节前“黄金14天”这一概念,技术人员需要把握这14天,解决业务关键瓶颈。腾讯云究竟有何妙招帮助客户度过这一关键时期?下面,就由腾讯云存储和数据产品专家工程师胥彪、腾讯云专家业务架构师祝海强为你一一解答:

腾讯云数据库主要服务于哪些行业客户?春节期间,如果数据库发生故障,对企业的影响有多大?数据库扮演着怎样的角色?

胥彪:腾讯云数据库服务了包括微众银行、安心保险、三一重工、中广核、哔哩哔哩、猎豹、畅游等众多客户。无论是金融、制造业、或是互联网服务提供商,都可能考虑在春节期间做一些线上运营活动,一来可以推广企业品牌,二来提高产品、服务的售卖,三来可以维护与用户(客户)关系;如果此时业务出现故障,不仅无法达到预期目的,还会给企业带来负面印象甚至经济损失。数据库则是整个业务中关键一环之一,数据库故障就意味着整个服务故障。

腾讯云数据库产品矩阵 

什么是节前黄金14天?这段时间,企业客户的运营团队需要做哪些准备?对此,腾讯云有哪些建议?

胥彪:大多数团队会提前2个月开始准备一次大型活动。但根据我们经验,节前14天是团队做最后梳理的关键时间。在最后14天,公司的活动内容基本定型,同时,竞品情况、渠道、供应商情况、内部准备、以及预热效果都已经清晰。此时的效果预估基本准确,活动开发和IT设施可以做到提前准备到位。

根据腾讯多年经验,在最后这14天,有了效果、准备情况和成本综合评估,更加容易精准的找到业务关键瓶颈的地方。而对大多数业务来讲,数据库是比较容易成为瓶颈的点。因此需要我们提前准备。

准备过程中,有哪些关键点?进行这些测试时,有哪些注意事项?

胥彪:在最后14天,团队应该再次做好业务系统压测,并联合开发团队分析问题并解决。譬如,在压测过程中,建议高于预估值20%~100%的量进行压测,以判断数据库在峰值时的承载能力。

一般来说,通过完善的测试,业务系统会暴露一些问题。此时,企业还有时间,设计一些快速简单的优化策略,并做好灾难时的故障预案和演练,以保障顺利的完成既定目标。

上述准备工作中,最容易出现的问题有哪些?

胥彪:为什么说数据库比较容易成为瓶颈,我们团队专家业务架构师祝海强做过专门的分享:

最后准备阶段,数据库通常会发现这几个问题:

  • 业务逻辑和SQL导致的性能问题

  • 瞬时峰值超过数据库最大承载能力

  • 数据库已到单机性能最大上限,无法提升

最后,还需要考虑到,故障无法避免的情况下,如何减少损失。

春节活动期间瞬时访问峰值过大是常事儿,腾讯云建议如何应对措施?

祝海强:春节活动前,一般我们需要配合业务做压力预估,以及对应的压力测试,数据库层以MySQL为例,可以使用tcpdump、pt-digest-query的获取SQL访问情况(例如top10,读写比等),根据不同的压力场景制定不同的优化方案,一般分架构优化、SQL优化、内核参数优化、配置升级、过载保护、异地灾备等:

架构优化之缓存使用:在数据库前端增加或扩容读写Cache层(如redis),将访问请求缓存下来,组件读写,当然普通架构下的业务,通常1天可以完成cache。例如,QQ就通过了cache,有效的解决了在春节零点,全国大量用户修改说说、群发祝福消息等业务场景的业务瓶颈;

架构优化之读写分离:对于一些及时性要求不高的读逻辑、离线逻辑、报表等服务,可以尝试使用只读实例来降低主库的压力。例如,腾讯新闻一主多从,通过6个只读实例来扩展读,保证在重大新闻时,腾讯新闻仍然能正常运行;

SQL优化相关:根据压测期间抓包分析出的top10SQL及对应的慢查询,去做相关的索引优化、表结构调整、子查询优化、隐式转换、分页优化等操作;

内核参数相关:压测期间可以做一些MySQL性能参数的调优,例如调整线程池、内存、刷盘、open table等相关参数,来提高实例的整体吞吐量;

配置升级相关:如果我们上面的工作都做了,系统压力还是扛不住,我们要做相关的扩容计划,来满足预估的业务访问量;

过载保护相关:当然春节期间真实访问量会超过我们前期评估的访问量,我们还需要有相应过载保护的方案;与业务方一起制定过载保护措施:增加数据库敏感指标监控,及时发现异常,譬如:监控活动连接数超过CPU核心数告警,及时排查原因,并通过程序启动提前预埋过载保护策略;

过载保护策略可能需要业务方一起参与:例如在连接失败或超时情况下会有相应提示或引导新用户到其他流程中,减少用户重复请求次数。在异常情况出现时,采取减少请求数,异步限流降低拆、分享请求速率等措施减轻数据库端压力。例如QQ红包,能力业务峰值较大时,就会引导用户休息一会儿,或加入其它策略;

异地灾备:我们前面的工作做完,基本就能撑住业务的压力了,但是考虑到活动期间系统的容灾能力,这里也建议企业根据自身的业务特点来考虑是否需要异地灾备的方案。

扩容数据库。怎么快速扩容?扩容时需要注意哪些问题?

祝海强:扩容的目的是解决可能的数据库性能和容量瓶颈。扩容时需要注意以下几点:

  • 根据业务架构情况,采取不同的扩容方式,譬如,研发在初期就设计好使用分布式数据库,即分库分表水平拆分,直接把不同的库放到不同的实例上去,通过物理设备数量和规格的线性增长可以很顺利的扩展性能;

  • 如果是资源有限的情况下,尽可能让核心数据库独占物理设备性能,避免其他非核心影响到核心业务数据库;

合理设置读策略,让备机承担读请求比例(并设置更灵活的读策略,确保在数据一致性和性能之间的均衡)。 

如果故障无法避免,有没有备选方案将损失降到最低?

祝海强:如果故障无法避免。我们应该从两个角度确保业务快速恢复,降低损失:

一是从技术策略上,需要平衡系统性能和数据安全;例如某些涉及交易的核心数据库故障后,数据库需要花大量时间核对数据方能重新恢复数据库,那么如果启用了数据强一致的方案,就可以很容易恢复业务。

二是从管理策略上,让故障恢复流程烂熟于心,每个步骤对应责任人,衔接顺利,并且做好严格的管控,避免越忙越乱导致误操作。

如何从容应对每一次挑战,腾讯云有没有结合自身实践经验的分享?

根据业务的使用场景,如果业务的数据库在云上,可以借用云上数据库弹性扩容缩容的特点,将活动期间数据库的规格升级到大规格,活动结束后,再缩容回来降低成本,这样可以让用户的整体成本实现良性循环。

与其他公司的同类品相比,腾讯云数据库的优势在哪?

祝海强:首先是稳定性,我们对外提供的数据库达到99.95%的高可用性,这个是得到过工信部可信云认证的,目前已经有大量的企业运行在腾讯云上。另外通过大量的软硬件优化,在同等配置下,我们的性能只高不低。而且我们支持基于MySQL、PostgreSQL、SQLServer等多种引擎数据库,可以为不同业务提供不同的产品。最后,在春节期间,腾讯云将一如既往的提供7*24h人工值守服务,协助云上的每个用户顺利过好春节。

数据库行业,还有哪些难以防范的攻击,腾讯云有哪些心得?

祝海强:安全是云数据库的重中之重,我们内部对安全的要求,一直摆在最优先的位置。目前对于数据的攻击层出不穷,有些容易预防,有些则难以察觉。

而对于数据库本身来讲,我们的建议是,对整个业务系统和数据库,都要做到6个维度进行数据安全保护:攻击者进不去,非授权者信息拿不到,窃取保密信息看不懂,系统和信息篡改不了,系统工作瘫不了。

攻击者进不去:至少需要从网络层杜绝攻击者接触到数据库;例如,应该避免通过互联网访问管理数据库,避免未经授权内网设备访问数据库;如果值班同事需要在家运维,也应选择通过VPN访问数据库;条件差点儿至少应该采用复杂密码,使用不常见端口,且仅在必要的时间开放互联网访问数据库。

非授权者信息拿不到:例如,梳理每一个数据库帐号权限,最小粒度授权,避免多人多系统共用一套帐号;高权限帐号必须和物理设备绑定;移出非必要工具,及时升级数据库,并在数据库前端部署必要的安全设备。

窃取保密信息看不懂:我们需要让核心数据库加密,或让核心字段加密存储,加密也建议采用双重加密:例如用户密码字段等;另外,加密密钥需存储在更安全位置。

系统和信息篡改不了:例如,部署数据库防火墙,数据库安全审计系统都是放篡改的手段;如果节前来不及,先利用SQL注入漏洞扫描对系统做全面的检查,保证接口透传SQL时将特殊字符做转义,避免透过SQL注入篡改数据。

系统工作瘫不了:从网络和业务方面,接入防DDOS攻击系统或接入CDN是减少业务瘫痪的有效办法。

这里的安全命题非常大,不仅仅部署几台防火墙,做些技术准备就好;更需要每个企业从管理制度到技术方案都要严格要求。而腾讯把这些安全相关的经验沉淀下来,并将整体安全解决方案开放到了腾讯云给企业来使用,包括防DDoS,放SQL注入,提供数据库安全审计安全特性,也欢迎大家节后使用。 

如何在数据库顺利部署海量服务?

胥彪:互联网领域,应对海量服务方案很多,比较成熟和具有性价比的方案是采用分布式数据库。

例如,腾讯云兼容MySQL协议的分布式数据库TDSQL,支撑了腾讯云90%的计费业务,兼容PostgreSQL协议的分布式数据库PostgreSQL-XZ,支撑微信支付的核心模块。而正是通过内部海量业务和多年积累,腾讯云分布式数据库也在业内具有良好的口碑。这些在腾讯云官网和网络上都有介绍,欢迎大家了解。

免责声明:“站长之家”的传媒资讯页面文章、图片、音频、视频等稿件均为自媒体人、第三方机构发布或转载。如稿件涉及版权等问题,请与我们联系删除或处理。稿件内容仅为传递更多信息之目的,不代表本网观点,亦不代表本网站赞同其观点或证实其内容的真实性,更不对您的投资构成建议。我们不鼓励任何形式的投资行为、购买使用行为。

  • 相关推荐
  • 大家在看
  • 让安全运营简单高效,腾讯云获首批可信云SOC行业标准认证

    6 月 17 日,由中国信息通信研究院指导,云计算标准和开源推进委员会承办,云计算开源产业联盟支持的“构建云时代下的安全运营中心在线分享会”正式召开,会上重磅发布了首批可信云安全运营中心(SOC)能力评估结果 ,腾讯云成为首批通过认证的四家企业之一。据了解,可信云服务认证是由数据中心联盟、云计算发展与政策论坛与中国信息通信研究院联合组织的我国唯一针对云服务可信性的权威认证体系。可信云自 2013 年推出以来,评估范

  • 腾讯云618云聚惠活动:腾讯云服务器1核2G首年95元

    现代科技的迭变更新,总是伴随着不同产业之间的密切合作,于不同领域的思维碰撞中,创新的蓝海就此徐徐展开,腾讯云便是如此。“根据官方消息,腾讯云将在未来五年的时间内,投资五千亿巨资用于基建项目布局,正是基于这种多产业合作的理念!”腾讯云优惠网负责人强调道。据悉,在五千亿的庞大基建布局背后,是腾讯云打造产业区块链生态的业绩,是创建全国首个省级“丝路融合”互联网生态圈的荣耀,更是不遗余力支持中小微企业转型?

  • 金融级安全“零失分”,腾讯云IT管理水平获新加坡OSPAR认证

    近日,新加坡银行业协会公布了新一批的金融行业外包服务审计报告(Outsourced Service Provider Audit Report ,简称OSPAR)。腾讯云多项服务和新加坡站点以“ 0 观察项”的优异成绩正式通过了OSPAR,这意味着腾讯云的IT控制水平已经达到了国际先进水平,安全管理能力受到国际认可,并具备了在新加坡乃至东南亚地区提供金融领域服务的资质。(Aceville Pte. Ltd. 为腾讯云新加坡分公司名称)腾讯云“ 0 观察项”通过新加坡OSPAR认?

  • 耐思智慧牵手腾讯云SMB,合力开拓企业级建站业务新变局

    历时一个月的招标评选,由腾讯云中小企业产品中心与CSIG产业生态合作部合作,推动的腾讯云网站建设业务第三方服务商招投标业务正式结束。据悉,本次招标业务共有30余家国内知名的建站服务商参与,经过3轮共60场招标会议、20位评委的综合评分,最终耐思智慧(珠海)与中企动力(北京)、亿众骏达(深圳)三家服务商脱颖而出。随着腾讯云业务版图的不断发展,越来越多的企业用户都感受到了云计算给企业经营发展带来的好处。所有产业?

  • 腾讯云与深圳市口腔医院达成战略合作一部手机搞定“无感医院”

    6 月 19 日,腾讯云与深圳市口腔医院签署战略合作协议,整合云计算、人工智能、大数据等能力以及在医疗健康领域的解决方案,共同推进口腔专科医疗服务、医学教育、医学研究等板块的数字化平台建设,构建“产学研”三位一体的口腔专科医疗健康生态链,全方位打造高效、便捷、智能、创新的运营服务模式,为患者提供更优质的智慧医疗服务。深圳市口腔医院院长张强与腾讯智慧医疗总经理代表双方签署合作协议。深圳市口腔医院院长张强(

  • 腾讯云发起“优才计划”,携手中软协构建数字化人才培养新生态

    6 月 6 日,由腾讯云举办的“优才计划发布会”在北京市海淀区腾讯大厦举行,腾讯云宣布发起“优才计划”,并率先与中国软件行业协会达成合作,携手打造“人才培养”到“人才输出”闭环新模式,构建数字化人才培养新生态,为新基建下的产业互联网发展提供人才支撑。中国软件行业协会副理事长陈钟,中国软件行业协会副秘书长付晓宇,腾讯云平台总经理周军,CIE中国IT教育论坛大会主席、《计算机教育》杂志主编奚春雁,深圳大学计算机

  • 腾讯安全推战略新品,SaaS化云防火墙打造云上第一道防线

    伴随企业核心业务大量上云,在云端混合环境、移动访问及在线应用程序迅速发展的趋势下,上云企业亟需更具细粒度的安全技术来替代传统防火墙。 6 月 16 日,腾讯安全举办线上新品发布会,宣布推出战略级新品——新一代SaaS化云防火墙,即开即用,助力企业解决云上业务隔离、统一访问管控等基础安全问题,为企业打造上云的第一道安全防线。企业上云后,面临四大基础网络安全挑战企业上云后,应用程序和数据可以在云端和混合环境中处?

  • 腾讯专有云首次落地消费金融 中原消费金融发力自主金融科技能力提升

    在2020年“两会”上,多位全国人大代表都围绕数字经济和金融科技发展建言献策,金融科技再次受到关注。从产业来看,科技和互联网的发展正在给消费市场带来新的变化,同时也对金融服务提出了新的要求。5G、人工智能、大数据中心、物联网等技术在金融领域的应用,为传统金融服务数字化转型创造了条件。实际上,科技变革正在深刻地影响着消费金融公司,也让消费金融公司开始更加注重自主研发实力与自主金融科技能力的修炼与提升。以中

  • DNF云上长安战未央入场条件 云上长安战未央怎么入场

    ​DNF在6月18日开启了最新的副本云上长安战未央,很多玩家还不知道云上长安战未央到底怎么入场,下面就来为大家分享一下云上长安战未央入场的条件。

    dnf
  • 大搜车宣布并购云漾科技

    今日,大搜车宣布完成对北京云漾信息科技有限公司的并购。大搜车称,此次并购,将闭环汽车流通领域全场景数字化能力,为汽车厂商搭建从厂商端、店端到用户端“三端合一”用户全旅程数字化管理系统能力,进一步推动汽车产业迈向数字文明。

  • 来领上云消费券!2020阿里云618全攻略

    阿里云 618 活动(6.1-6.30)火热进行中,发亿元 “上云消费券”——来活动会场立领 618 大礼包。活动入口:https://www.aliyun.com/activity/618/index

  • 阿里云宣布未来一年投入20亿资金 助力50家伙伴云上营收过亿

    凤凰网科技讯 6月16日消息,在2020阿里云合作伙伴峰会上,阿里云宣布深耕“被集成”战略,做强生态,未来一年投入20亿专项资金,助力50家伙伴云上营收过亿。2019年,阿里云提出“被集成”战略。阿里云表示,截至目前,阿里云与合作伙伴已发布500多款联合解决方案,覆盖30多个重点细分行业,一批伙伴在阿里云上已营收过亿。一周前,阿里云公布“再生长”三大方向:做深基础、做厚中台、做强生态。“被集成与做强生态是一脉相承的。?

  • 大搜车宣布并购云漾科技 收购金额未知

    大搜车宣布完成对北京云漾信息科技有限公司的并购。大搜车称,此次并购,将闭环汽车流通领域全场景数字化能力,为汽车厂商搭建从厂商端、店端到用户端“三端合一”用户全旅程数字化管理系统能力,进一步推动汽车产业迈向数字文明。大搜车未对外透露具体交易金额。大搜车表示,此次并购完成后,大搜车将整合云漾科技的产品、业务和能力,加速布局汽车流通领域的全场景数字化,从营销、销售、服务等场景提

  • 从“流失访客”到“销售机会”,火眼云这样帮您搞定

    B2B研究机构 SiriusDecisions 曾针对企业客户的购买旅程做过一个研究,结果表明,有67%的B2B购买过程是在网上进行的。所以,那些在网站上显示出的购买信号是企业绝对不能错过的。这也就要求B2B企业首先具备关注这些信号的能力,然后进行主动联系,以确保那些感兴趣的潜在客户能时刻保持活跃的参与度。 而承载B2B企业这项能力的技术就是我们经常所说的访客召回。 访客召回是一种在线营销形式:通过对一个人的在线行为进行洞察,为?

  • 新裸金属功能加持 ZStack深化云进程

    转载自公众号:信息化时代“新基建”是当前的业界热点话题。发展“新基建”既是国家考量今后一段时间经济形势做出的科学决策,也是应对数字化未来、支撑数字中国建设的战略决断。信息技术应用发展,作为“新基建”的重要内容,是拉动经济发展的重要抓手之一,将迎来黄金发展期。工信部相关负责人也曾在国务院联防联控新闻发布会上表示,数字基础设施建设是支撑未来经济社会发展的新型基础设施的重心和基础。一方面,在基础软硬件方

  • “云”办公时代,MAXHUB助力开启高效会议模式

    当下,线上办公和远程协同的需求在持续高涨,而数字化技术对于办公场景的重塑,也加速了“云”办公时代工效的提升。正如 3 月份基于远程视频形式成功召开的G20 峰会,不仅成为史上首次国际大型“云”会议,也充分印证了云场景下远程视频会议功能对于工效提升的保证。 “云”办公提效成为可能 其实,近几年智能会议平板已经成为不少大、中型企业的智能办公标配,而特殊期间“云”办公模式的常态化让智能会议平板的提效潜能进一步?

  • 滴滴云AI大师码:4321,购买滴滴云GPU云服务器享9折优惠

    滴滴云GPU云服务器提供了P4、P40、P100 和T4 四种机型,适用于深度学习推理/预测、深度学习训练、图像处理、浮点高性能计算、视频编解码等应用场景;滴滴云GPU云服务器具有超高性价比,价格优势明显。购买滴滴云GPU云服务器之前,可以输入AI大师码,有 9 折优惠。下面我就分享一下滴滴云AI大师码。滴滴云AI大师推荐码,购买滴滴云GPU云服务器享 9 折优惠。用户购买滴滴云GPU云服务器的时候,输入AI大师码:4321,即可享受 9 折优惠

  • 抖音推高校专属毕业特效 学生可与母校“云合影”

    6月,国内各大高校相继迎来了“毕业季”。受新冠肺炎疫情影响,今年毕业季不少师生、同窗难以相聚,只能“云答辩”、“云毕业”。为了弥补众多毕业生的遗憾,抖音联合北京大学、中国人民大学、浙江大学等近四十所高校,发起“全国高校云毕业贴纸”活动。基于抖音特效开放平台提供的能力,高校自主创作专属的毕业贴纸,融入本校的地标建筑等文化元素,传递高校对于毕业生真挚的祝福。毕业特效有“纪念册”

  • 众趣科技助力首届“云上”广交会

    中国出口商品交易会,又称广交会,创办于 1957 年春季,每年春秋两季在广州举办,迄今已有近五十年历史,是中国目前历史最长、层次最高、规模最大、商品种类最全、到会客商最多、成交效果最好的综合性国际贸易盛会。 今年因受疫情影响被搬到“云上”。 6 月 15 日,“云上”广交会正式拉开帷幕,开启云上逛展新形式。 线上云展厅,探索展示新方式 线下展会无法举办,线上3D云逛展,为企业参展提供了新方式,新看点,新机会。众趣?

  • 读懂生命的“语言” 有孚专有云为基因行业提速

    基因图谱被称为"上帝用以创造生命的语言"。世界各国的科学家们都在倾尽全力读懂“生命的语言”,破解每一个未知基因的奥秘。读懂“生命的语言”,对于提高公众健康水平,降低沉重的医疗费用具有非常重要的意义。读懂生命的"语言",实现科学的价值基因技术听起来很神秘,但其实早已经在多个领域中得到应用。例如基因测序技术能够用于疾病的预防、疾病的诊断、指导个体化用药,还能够帮助病毒基因研究所研发病毒诊断试剂,监控病毒疫

  • 参与评论
文明上网理性发言,请遵守新闻评论服务协议