慧科讯业一体化舆情监测系统云平台,基于SaaS的方式为企业提供智能数据平台、营销洞察、人工智能云、大数据资源库等方面的产品服务,并通过网络舆情监测为各行各业提供一站式的解决方案。
慧科讯业分两期对爬虫业务进行迁移。国内爬虫业务迁移7月12日启动,整体耗时42天,海外爬虫业务迁移10月11日启动,整体耗时40天。
在迁移项目期间,遇到数据库问题,悦智项目团队成员黄庆武、闫伟杰、谢雪虎、王羽东积极协调腾讯后端DBA专项人员,帮助客户解决项目一期遇到的数据库问题,制定迁移方案计划,独立完成海外爬虫业务的迁移工作。整个过程和客户通力配合,获得客户一致好评。
2021年9月1日在进行项目一期业务的割接时,下午19时对业务进行停服,开始业务割接工作,前期业务割接工作顺利,按计划执行。
在割接200G+ Mongodb数据库时,数据迁移至80%后,迁移速度突然变慢,至9月2日0点数据仍未迁完,严重影响割接进度。
为了不影响9月2日上班后业务侧的使用。项目团队积极联系后端DBA专项人员排查问题原因,由于在源端MongoDB中有一张条目数为6亿+的collection,至使用目标端Mongodb资源用满。
项目团队迅速与腾讯云售前架构师成立应急处理小组,拉起内部沟通群讨论解决方案。通过后端DBA运维人员将客户侧的MongoDB实例由16C/256G 调整为 14C/256G,并通过调优等手段,将10+万的QPS提升至100+万的QPS,大大提升了迁移速度。
在迁移过程中,客户充分感受到项目团队极高的专业性与极好的服务意识,使迁移工作能够快速顺利推进,并发来感谢信。