KOP 介绍
KoP（Kafka on Pulsar）通过在 Pulsar 代理上引入 Kafka 协议处理程序，为 Apache Pulsar 带来了原生的Apache Kafka协议支持。通过将 KoP 协议处理程序添加到您现有的 Pulsar 集群，您可以将现有的 Kafk...
2年前 (2022-10-14) 1388℃
1喜欢
bookkeeper 集群的架构
Apache BookKeeper 是企业级存储系统，旨在保证高持久性、一致性与低延迟。
企业级的实时存储平台需要具备的特点:
以极低的延迟（小于 5 毫秒）读写 entry 流
能够持久、一致、容错地存储数据
在写数据时，能够进行流式传输或...
2年前 (2022-10-14) 1292℃
0喜欢
function 背景
当我们进行流式处理的时候，很多情况下，我们的需求可能只是下面这些简单的操作：简单的ETL 操作\聚合计算操作等相关服务。
但为了实现这些功能，我们不得不去部署一整套 流处理服务（spark、flink等）。但是我们仅仅需要这些服务的一小部分功能，部署流处理...
2年前 (2022-10-14) 3397℃
0喜欢
多租户模式
什么是多租户
Apache Pulsar 最初诞生于雅虎，当时就是为了解决雅虎内部各个部门之间数据的协调，所以多租户特性显得至关重用，Pulsar 从诞 生之日起就考虑到多租户这一特性，并在后续的实现过程中，将其不断的完善。 多租户这一特性，使得各个部门之间可以共享同...
2年前 (2022-10-14) 3015℃
1喜欢
Pulsar 基本介绍
背景
Apache Pulsar 是一个云原生企业级的发布订阅（pub-sub）消息系统2012年雅虎孵化，2016年开源成为apache的顶级项目，Pulsar 已经被腾讯、智联招聘、涂鸦智能、中国移动、中国电信、360、达达集团（京东到家）、苏宁、平安...
2年前 (2022-10-14) 2527℃
2喜欢
先看问题
这里使用订单系统和库存系统协同作业，就要涉及到数据的一致性了。
作为订单系统肯定是要创建订单，作为库存系统，肯定是要在库存表中进行库存的扣减，以及在出库记录表中进行出库记录的登记。在这个过程中，因为中间跨进程和跨数据，所以数据一致性是无法直接保障的。那我们该怎么办呢？...
2年前 (2022-10-12) 635℃
2喜欢
本文原理图说明
1、黄色的框表示对象
2、蓝色的框表示线程
3、白色的框表示方法（API）
线程模型基本介绍
1、不同的线程模式，对程序的性能有很大影响，为了搞清 Netty 线程模式，我们先来看看各个线程模式，最后在看看 Netty 线程模型有什么优越性。
2、目前存在的线程模...
2年前 (2022-10-12) 1150℃
0喜欢
Kafka-Kraft模式介绍
Kafka 2.8.0 正式发布了Kraft的先行版，并且支持在Kraft模式下的部署和运行。KRaft模式下的Kafka可以完全脱离zookeeper运行，使用自己的基于Raft算法实现的quorum来保证分布式Metadata的一致
左图为K...
2年前 (2022-10-12) 2649℃
0喜欢
什么是幂等性
那什么是幂等性呢，说人话就是当多次重复请求时，接口能够保证与预期相符的结果。 我们举个例子来说明，例如我们设计了一个为员工涨薪的接口,本次请求发送后为1号员工涨薪500元。
PUT https://edu.lagou.com/employee/salary
{&...
2年前 (2022-10-12) 1044℃
0喜欢
介绍
基于SQL的过滤，因为对SQL语句执行了校验和SQL语法的解析，执行效率相对于tag方式较低，同时作为自定义属性，他不像tag是标准的结构体，所以在进行消息筛选的时候，相比起tag过滤，这种SQL过滤的方式，执行效率是相对比较慢的，只适用于数据量不大，需要灵活来进行调整的时...
2年前 (2022-10-12) 6687℃
0喜欢
