前往小程序,Get更优阅读体验!
立即前往
首页
学习
活动
专区
工具
TVP
发布
社区首页 >专栏 >ApachePulsar原理解析与应用实践(学习笔记一)

ApachePulsar原理解析与应用实践(学习笔记一)

作者头像
写一点笔记
发布2023-09-10 15:52:01
1080
发布2023-09-10 15:52:01
举报
文章被收录于专栏:程序员备忘录程序员备忘录

随着时代的发展,软件设计的理念也在不断发展,从单体服务、面向服务、微服务,发展到云原生以及无服务。其演变的过程是一个能力不断增强,领域边界不断微分细化的过程。比如无服务就是将函数作为服务,就类似dns模式的服务设计。

大数据系统往往需要处理流式数据,通过消息队列将数据进行采集和汇总,然后导入大数据计算引擎或者存储。

目前各种云原生技术都比较丰富,但是消息中间件MQ的云原生技术目前了解到的只有pulsar。Pulsar是新一代的消息中间件,其最大的特点是支持云原生,Pulsar采用分布式存储Bookeeper策略进行消息存储(考虑网络速率越来越快,存储和计算混用的架构缺点逐渐显现),将计算和存储能力分开,理论上具有无限消息处理和消息存储的能力。其设计架构采用分级路由的策略,实现多租场景,具有百万Topic的能力。采用可插拔的协议处理,支持各种协议,可以实现业务无缝迁移。具有跨域复制能力;

pulsar的基本架构如下:

本文参与?腾讯云自媒体分享计划,分享自微信公众号。
原始发表:2023-09-04,如有侵权请联系?cloudcommunity@tencent.com 删除

本文分享自 写点笔记 微信公众号,前往查看

如有侵权,请联系 cloudcommunity@tencent.com 删除。

本文参与?腾讯云自媒体分享计划? ,欢迎热爱写作的你一起参与!

评论
登录后参与评论
0 条评论
热度
最新
推荐阅读
相关产品与服务
对象存储
对象存储(Cloud Object Storage,COS)是由腾讯云推出的无目录层次结构、无数据格式限制,可容纳海量数据且支持 HTTP/HTTPS 协议访问的分布式存储服务。腾讯云 COS 的存储桶空间无容量上限,无需分区管理,适用于 CDN 数据分发、数据万象处理或大数据计算与分析的数据湖等多种场景。
领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档
http://www.vxiaotou.com