更多存储标杆案例
欢迎点击下方链接查看
公司介绍
畅捷通是用友旗下成员企业,为400多万小微企业提供智能云管理服务,公司于2010年3月成立,并与2014年6月在香港联交所主板挂牌上市。
畅捷通以“用创想与技术,推动小微企业经营与管理进步「为使命,以成为“全球领先的小微企业云服务、软件提供商」、「伙伴、员工快乐工作,成就事业,分享成功的平台」为愿景,致力于为中国小微企业提供以财务及管理服务为核心的:平台服务、应用服务、数据增值服务。
目前公司主营云产品包括畅捷通好会计、T+Cloud、畅捷通好生意、畅捷通易代账等,主营软件产品包括T系列软件。2019年度云服务企业注册用户数达到466万,累计付费企业用户数达到15.7万。软件业务累计企业用户数超过161万。
业务场景介绍
畅捷通IT运维开发部负责畅捷通包括好会计、好生意、易代账等所有云产品生产及测试系统的运维、上线发布等工作。该部门构建了一套MIDAS智能运维平台,提供了数据接入,数据处理和场景化分析的能力。
畅捷通智能运维平台的业务模型:
面临的痛点
畅捷通在智能运维平台开发初期,底层使用了自建的ELK进行运维数据分析,但是随着畅捷通业务的增长接入的应用系统增多,很快发现平台出现各种问题,各产品的稳定运行收到极大挑战,主要表现为如下几方面:
并发量大,优化ELK成本过高
几万个点同时并发发送数据,每天产生的各种日志与消息达到TB级。自建的ELK系统性能较差,优化性能需要耗费大量开发资源。类型杂,数据清洗难度大,访问类、系统类、应用类、通知、消息类等等,种类繁多、格式千奇百怪,为数据清洗增加了巨大的难度。
来源多,无法集中管理
网络、服务器、移动app、web、docker等各种来源的日志,接口繁多,并且要求实时性高,无法集中统一管理。
产品部门深度参与,重口难调
各产品部门也会对对收集来的数据都有着自己个性化的需求,监控报警、问题诊断、分析挖掘、报表等,消费模式也多种多样。
阿里云日志服务解决方案
畅捷通面对这些问题,选择使用阿里云日志服务作为基础来深度打造其智能运维平台,整个平台由如下三大模块构成:
高效消息采集和传输
利用阿里云日志服务的强大的数据接入能力,将畅捷通混合云架构中网络、服务器、移动端、容器的各类访问类、系统类、应用类、消息类等各类日志统一汇入日志平台,提供实现每日TB级数据的快速处理。
灵活的数据处理和存储
针对畅捷通内部已经具备完善CMDB和关联规则的情况,将原始日志进行语意切分和序列化后,对应到场景分析中。在策略组里找到相应的执行策略,再发到外部服务中,用外部服务去调用ansible或者消息转发等操作,实现对数据投递的集中管理,为后续众多场景化分析提供有力支撑。
智能异常检测和定位
过日志服务的时序数据分析与函数计算的能力,畅捷通构建了智能运维平台,通过直接使用阿里云服务的同环比函数,可以快速的得出监控指标的当前值,并且具有实时性。有了同环比后,报警的发送会变得准确,与原来的阈值相比准确性大大提高。
通过异常预测函数,可以从海量指标中快速定位异常,通过异常检测方法将有问题的地方显示出来,快速发现系统故障。
另外将各块汇集过来的数据进行标记后,能够与应用的配置信息进行关联和整合,通过时序可以发现故障的根因,从而可以实现故障预测。
你是否听人们说过,异步 Python 代码比普通(或同步)Python 代码更快?果真是那...
作者 许力 阿里云原生多模数据库Lindorm与东软云科技推出联合解决方案 共建面向...
基于阿里巴巴的互联网架构、大数据技术,利用混合云架构打造全新的云化电子税 务...
三个课堂解决方案 方案架构分为终端层、支撑层、平台层、应用层。其中平台层分为...
1.Redis简介1.1简介 REmote DIctionary Server(Redis) 是一个由 Salvatore Sanfi...
作者 |?敖小剑 来源 | 阿里巴巴云原生公众号 Dapr 是 2019 年 10 月微软开源的可...
文本作者:刘晓国,Elastic 公司社区布道师。新加坡国立大学硕士,西北工业大学...
1.胖不是罪,只是上帝嫉妒你瘦下去会太完美。 2.我未来的老公,别对你现在对象...
阿里流传着这样一句话,一切业务数据化,一切数据业务化。 作为大数据从业者,你...
随着Kubernetes已经成为容器编排和调度的事实标准,各大公有云厂商都已经基于Kub...