由于blog各种垃圾评论太多,而且本人审核评论周期较长,所以懒得管理评论了,就把评论功能关闭,有问题可以直接qq骚扰我

 分类:Linux

Kafka-Kraft模式

Kafka-Kraft模式
Kafka-Kraft模式介绍 Kafka 2.8.0 正式发布了Kraft的先行版,并且支持在Kraft模式下的部署和运行。KRaft模式下的Kafka可以完全脱离zookeeper运行,使用自己的基于Raft算法实现的quorum来保证分布式Metadata的一致 左图为K...

2年前 (2022-10-12) 2627℃ 0喜欢

RocketMQ 幂等性保障

RocketMQ 幂等性保障
什么是幂等性 那什么是幂等性呢,说人话就是当多次重复请求时,接口能够保证与预期相符的结果。 我们举个例子来说明,例如我们设计了一个为员工涨薪的接口,本次请求发送后为1号员工涨薪500元。 PUT https://edu.lagou.com/employee/salary {&...

2年前 (2022-10-12) 1023℃ 0喜欢

RocketMQ消费者基于自定义属性实现SQL过滤

RocketMQ消费者基于自定义属性实现SQL过滤
介绍 基于SQL的过滤,因为对SQL语句执行了校验和SQL语法的解析,执行效率相对于tag方式较低,同时作为自定义属性,他不像tag是标准的结构体,所以在进行消息筛选的时候,相比起tag过滤,这种SQL过滤的方式,执行效率是相对比较慢的,只适用于数据量不大,需要灵活来进行调整的时...

2年前 (2022-10-12) 6666℃ 0喜欢

RocketMQ 五种消息类型实践

RocketMQ 五种消息类型实践
五种消息类型介绍 普通消息:普通消息也称为并发消息,和传统的队列相比,并发消息没有顺序, 但是生产消费都是并行进行的,单机性能可达十万级别的TPS。 分区有序消息:与Kafka中的分区类似,把一个Topic消息分为多个分区“保 存”和消费,在一个分区内的消息就是传统的队列,遵循...

2年前 (2022-10-12) 9236℃ 1喜欢

企业级docker镜像开源解决方案harbor

企业级docker镜像开源解决方案harbor
Harbor 介绍 Harbor 是企业级的docker镜像开源解决方案,由vmware公司开发。作为一个企业私有的registry服务器,harbor提供了更好的性能和安全,提升用户使用registry构建和运行环境传输镜像的效率。Harbor支持安装在多个registry节点...

6年前 (2018-10-15) 6040℃ 2喜欢

logstash 收集日志到hdfs

logstash 收集日志到hdfs
前言 通常情况下,我们将日志数据通过logstash收集到es,然后用kibana进行实时查询,可视化分析,这就是我们常用的elk架构。但是基于elk的日志分析,通常比较常用的是实时分析,日志存储一段时间就会删掉。那么在一些情况下,我需要将日志数据也存储一份到hdfs用来做大数据...

7年前 (2018-07-17) 12602℃ 3喜欢

运维交接引导图

运维交接引导图
今天在某技术交流群,发现了一张总结的非常好的运维交接脑图,特粘贴到此分享给大家,同时也给自己作一个备忘 转载请注明:西门飞冰的博客 » 运维交接引导图...

7年前 (2018-07-12) 11048℃ 4喜欢

bash格式化输出python

bash格式化输出python
我们在日常工作中,有时候需要访问一些API接口,这些接口都是以json格式返回的,但是在shell中,默认对json显示不是很友好,如下所示: [root@c7-node1 ~]# curl -s http://192.168.28.71:9200/_tasks {"nodes...

7年前 (2018-03-13) 5213℃ 0喜欢

curl 请求一个带变量带post请求

curl 请求一个带变量带post请求
这个curl请求中,fcl_ip的值$1是一个变量,需要用如下方式引用。 curl -s -XPOST "http://服务器URL" -d '{"query":{"bool":{"must":[{"range":{"@timestamp":{"gt":"now-5m"}}},{...

7年前 (2018-01-28) 8464℃ 10喜欢

mac支持NTFS文件系统读写

mac支持NTFS文件系统读写
前言 博客大半年都没有怎么更新,感觉自己有些懒惰了,完后要多写写博客,尽量保证每周一篇吧。 问题 用过Mac的朋友,可能都知道Mac有一个缺点,就是对ntfs文件系统只读,这个时候我们如果在Mac系统上插入一个ntfs格式的U盘或者移动硬盘,是无法往里面写入文件的,因为Mac系统...

7年前 (2018-01-28) 5274℃ 0喜欢