Kafka-Kraft模式介绍
Kafka 2.8.0 正式发布了Kraft的先行版,并且支持在Kraft模式下的部署和运行。KRaft模式下的Kafka可以完全脱离zookeeper运行,使用自己的基于Raft算法实现的quorum来保证分布式Metadata的一致
左图为K...
2年前 (2022-10-12) 2600℃
0喜欢
什么是幂等性
那什么是幂等性呢,说人话就是当多次重复请求时,接口能够保证与预期相符的结果。 我们举个例子来说明,例如我们设计了一个为员工涨薪的接口,本次请求发送后为1号员工涨薪500元。
PUT https://edu.lagou.com/employee/salary
{&...
2年前 (2022-10-12) 998℃
0喜欢
介绍
基于SQL的过滤,因为对SQL语句执行了校验和SQL语法的解析,执行效率相对于tag方式较低,同时作为自定义属性,他不像tag是标准的结构体,所以在进行消息筛选的时候,相比起tag过滤,这种SQL过滤的方式,执行效率是相对比较慢的,只适用于数据量不大,需要灵活来进行调整的时...
2年前 (2022-10-12) 6644℃
0喜欢
五种消息类型介绍
普通消息:普通消息也称为并发消息,和传统的队列相比,并发消息没有顺序, 但是生产消费都是并行进行的,单机性能可达十万级别的TPS。
分区有序消息:与Kafka中的分区类似,把一个Topic消息分为多个分区“保 存”和消费,在一个分区内的消息就是传统的队列,遵循...
2年前 (2022-10-12) 9172℃
1喜欢
Harbor 介绍
Harbor 是企业级的docker镜像开源解决方案,由vmware公司开发。作为一个企业私有的registry服务器,harbor提供了更好的性能和安全,提升用户使用registry构建和运行环境传输镜像的效率。Harbor支持安装在多个registry节点...
6年前 (2018-10-15) 6005℃
2喜欢
前言
通常情况下,我们将日志数据通过logstash收集到es,然后用kibana进行实时查询,可视化分析,这就是我们常用的elk架构。但是基于elk的日志分析,通常比较常用的是实时分析,日志存储一段时间就会删掉。那么在一些情况下,我需要将日志数据也存储一份到hdfs用来做大数据...
6年前 (2018-07-17) 12571℃
3喜欢
今天在某技术交流群,发现了一张总结的非常好的运维交接脑图,特粘贴到此分享给大家,同时也给自己作一个备忘
转载请注明:西门飞冰的博客 » 运维交接引导图...
6年前 (2018-07-12) 11009℃
4喜欢
我们在日常工作中,有时候需要访问一些API接口,这些接口都是以json格式返回的,但是在shell中,默认对json显示不是很友好,如下所示:
[root@c7-node1 ~]# curl -s http://192.168.28.71:9200/_tasks
{"nodes...
7年前 (2018-03-13) 5180℃
0喜欢
这个curl请求中,fcl_ip的值$1是一个变量,需要用如下方式引用。
curl -s -XPOST "http://服务器URL" -d '{"query":{"bool":{"must":[{"range":{"@timestamp":{"gt":"now-5m"}}},{...
7年前 (2018-01-28) 8430℃
10喜欢
前言
博客大半年都没有怎么更新,感觉自己有些懒惰了,完后要多写写博客,尽量保证每周一篇吧。
问题
用过Mac的朋友,可能都知道Mac有一个缺点,就是对ntfs文件系统只读,这个时候我们如果在Mac系统上插入一个ntfs格式的U盘或者移动硬盘,是无法往里面写入文件的,因为Mac系统...
7年前 (2018-01-28) 5250℃
0喜欢