由于blog各种垃圾评论太多,而且本人审核评论周期较长,所以懒得管理评论了,就把评论功能关闭,有问题可以直接qq骚扰我

最新发布 第9页

西门飞冰的博客梦想成为架构师的普通运维

中间件

Kafka on Pulsar(KOP)

Kafka on Pulsar(KOP)
KOP 介绍 KoP(Kafka on Pulsar)通过在 Pulsar 代理上引入 Kafka 协议处理程序,为 Apache Pulsar 带来了原生的Apache Kafka协议支持。通过将 KoP 协议处理程序添加到您现有的 Pulsar 集群,您可以将现有的 Kafk...

2年前 (2022-10-14) 1284℃ 1喜欢

中间件

Pulsar 架构原理

Pulsar 架构原理
bookkeeper 集群的架构 Apache BookKeeper 是企业级存储系统,旨在保证高持久性、一致性与低延迟。 企业级的实时存储平台需要具备的特点: 以极低的延迟(小于 5 毫秒)读写 entry 流 能够持久、一致、容错地存储数据 在写数据时,能够进行流式传输或...

2年前 (2022-10-14) 1223℃ 0喜欢

中间件

Pulsar function

Pulsar function
function 背景 当我们进行流式处理的时候,很多情况下,我们的需求可能只是下面这些简单的操作:简单的ETL 操作\聚合计算操作等相关服务。 但为了实现这些功能,我们不得不去部署一整套 流处理服务(spark、flink等)。但是我们仅仅需要这些服务的一小部分功能,部署流处理...

2年前 (2022-10-14) 3334℃ 0喜欢

中间件

Pulsar 主要功能介绍及使用

Pulsar 主要功能介绍及使用
多租户模式 什么是多租户 Apache Pulsar 最初诞生于雅虎,当时就是为了解决雅虎内部各个部门之间数据的协调,所以多租户特性显得至关重用,Pulsar 从诞 生之日起就考虑到多租户这一特性,并在后续的实现过程中,将其不断的完善。 多租户这一特性,使得各个部门之间可以共享同...

2年前 (2022-10-14) 2947℃ 1喜欢

中间件

Pulsar介绍和集群部署

Pulsar介绍和集群部署
Pulsar 基本介绍 背景 Apache Pulsar 是一个云原生企业级的发布订阅(pub-sub)消息系统2012年雅虎孵化,2016年开源成为apache的顶级项目,Pulsar 已经被腾讯、智联招聘、涂鸦智能、中国移动、中国电信、360、达达集团(京东到家)、苏宁、平安...

2年前 (2022-10-14) 2426℃ 2喜欢

架构设计

本地消息表模式保障分布式最终一致性

本地消息表模式保障分布式最终一致性
先看问题 这里使用订单系统和库存系统协同作业,就要涉及到数据的一致性了。 作为订单系统肯定是要创建订单,作为库存系统,肯定是要在库存表中进行库存的扣减,以及在出库记录表中进行出库记录的登记。在这个过程中,因为中间跨进程和跨数据,所以数据一致性是无法直接保障的。那我们该怎么办呢?...

2年前 (2022-10-12) 559℃ 2喜欢

JAVA

Netty线程模型

Netty线程模型
本文原理图说明 1、黄色的框表示对象 2、蓝色的框表示线程 3、白色的框表示方法(API) 线程模型基本介绍 1、不同的线程模式,对程序的性能有很大影响,为了搞清 Netty 线程模式,我们先来看看各个线程模式,最后在看看 Netty 线程模型有什么优越性。 2、目前存在的线程模...

2年前 (2022-10-12) 1114℃ 0喜欢

中间件

Kafka-Kraft模式

Kafka-Kraft模式
Kafka-Kraft模式介绍 Kafka 2.8.0 正式发布了Kraft的先行版,并且支持在Kraft模式下的部署和运行。KRaft模式下的Kafka可以完全脱离zookeeper运行,使用自己的基于Raft算法实现的quorum来保证分布式Metadata的一致 左图为K...

2年前 (2022-10-12) 2594℃ 0喜欢

JAVA

RocketMQ 幂等性保障

RocketMQ 幂等性保障
什么是幂等性 那什么是幂等性呢,说人话就是当多次重复请求时,接口能够保证与预期相符的结果。 我们举个例子来说明,例如我们设计了一个为员工涨薪的接口,本次请求发送后为1号员工涨薪500元。 PUT https://edu.lagou.com/employee/salary {&...

2年前 (2022-10-12) 989℃ 0喜欢

JAVA

RocketMQ消费者基于自定义属性实现SQL过滤

RocketMQ消费者基于自定义属性实现SQL过滤
介绍 基于SQL的过滤,因为对SQL语句执行了校验和SQL语法的解析,执行效率相对于tag方式较低,同时作为自定义属性,他不像tag是标准的结构体,所以在进行消息筛选的时候,相比起tag过滤,这种SQL过滤的方式,执行效率是相对比较慢的,只适用于数据量不大,需要灵活来进行调整的时...

2年前 (2022-10-12) 6633℃ 0喜欢