
分布式
文章平均质量分 95
fenglllle
这个作者很懒,什么都没留下…
展开
专栏收录文章
- 默认排序
- 最新发布
- 最早发布
- 最多阅读
- 最少阅读
-
kafka 3.5.0 raft协议安装
kafka从3.0.0开始推出了raft模式的元数据中心,实际上类似zk,kafka自己命名kraft。使用这种方式搭建kafka集群将不再需要zk,同理,kafka的集群的每个节点可以同时是broker和controller(以前zk充当),也可以是单独的broker,controller(负载不重,不建议单独controller,跟zk没区别),官方说明需要jdk11及以上,实测jdk8可以运行,但是生成建议严格按照官方标定的jdk执行,jdk是向下兼容的,但是不确定是否会涉及新api或新特性的使用。原创 2025-02-08 17:07:11 · 1070 阅读 · 0 评论 -
springboot kafka多数据源,通过配置动态加载发送者和消费者
如果消费者或者发送者逻辑需要写在当前kafka网关应用,那么只能通过自定义扫描方式支持配置不同,所有配置的生成者和消费者必须代码实现逻辑,通过配置加载方式,自定义扫描注入bean即可。以消费者为例,生产者不涉及注解发送方式相对简单。});写了一个初始化的bean,用于通过配置加载bean。消费者是注解方式扫描,bean需要根据配置加载,不能写在代码里面这里仅仅是注册bean,并不会被beanpostprocessor处理关于第1点。原创 2024-10-07 15:55:46 · 1686 阅读 · 1 评论 -
雪花算法的一些问题解析
雪花算法实际上设计极为巧妙,通过时间戳,机器码,序列号(自增)来达到某个时间段(默认1毫秒)在某个并发下(并发超出自增ID就会重复或者阻塞等问题,不过我们一般达不到,且可以通过负载均衡增加资源规避),不重复ID。实现了加资源的方式来达到分布式ID不重复,且自增的特性。原创 2024-07-29 18:05:59 · 946 阅读 · 0 评论 -
双活架构设计-连接集群
双活的设计是很有必要的,而且很传统的解决方案,融合了单元化思想,存算分离思想,实际上是矛盾又是统一的整体,单元化是有状态的,存算分离又是让运算无状态。那么设计存储一致性就很重要,保证一致性和最佳的性能,又会大量的使用缓存的思想。原创 2023-10-06 18:48:22 · 1017 阅读 · 0 评论 -
goreplay 录制回放源码解析
goreplay 录制回放源码解析前言流量录制流量回放数据模拟goreplay的源码分析goreplay demo构造goreplay源码分析启动分析运行时监听前言一般而言流量的录制与回放经常在测试过程中使用,自动化批量验证功能,或者用来做ABTest实验。流量在互联网公司就是数据,是用户,因而很多互联网公司就是流量公司,就是风口,本质上讲大数据分析就是分析流量,比如:杀熟。流量的回放仅仅是流量的一种用途,流量的录制是基础,只有录制好流量,可以有很多用途。流量录制流量的录制实际上有很多种方式,常见的原创 2022-05-07 11:33:35 · 1648 阅读 · 0 评论 -
网络NAT、桥接与主机模式
前言笔者很早以前写了本机windows连接虚拟机Ubuntu的时候使用的NAT模式连接:SecureCRT无法连接VMWare Ubuntu虚拟机问题解决办法_fenglllle的博客-CSDN博客_securecrt连接不到vmware然后在MySQL安装时虚拟机使用的却是桥接模式:ubuntu MySQL安装使用教程_fenglllle的博客-CSDN博客_ubuntu安装mysql那么这些网络模式的区别是什么❓,笔者一直没有研究过,知道最近检查家庭网络时,折腾光猫桥接,路由器拨号才想起,.原创 2022-03-14 16:17:42 · 5310 阅读 · 0 评论 -
zookeeper 3.5 AdminServer
zookeeper 3.5前言AdminServer配置AdminServer集群配置总结前言笔者很久没有使用zookeeper,一直稳定运行着3.4版本的zookeeper。并且业务也在流行去zk化,zk的ZAB协议决定了不能无限扩容,选主复制恢复决定了这是一个中心化的思想。但是笔者在升级到3.5的时候居然,不能启动,说Unable to start AdminServer。什么时候多了这玩意,干啥的呢?AdminServer笔者看日志发现是8080端口冲突,笔者查询了官方文档,说这是一个jett原创 2020-08-12 21:34:18 · 8688 阅读 · 0 评论 -
云计算分布式架构简介
分布式架构设计相当于集中式架构。集中式机构是由一台或多台主机组成的中心节点。简介集中式架构的优劣势:优势:开发部署运维方便,事务处理方便,没有分布式协作。劣势:可用性低,一旦服务器宕机,系统立即不可用;扩展性极弱,只能升级单一服务器(比如大型机),成本高,迁移困难。 分布式的架构设计:分布在不同网络的计算机上,彼此仅通过消息传递进行通信和协调的系统。特点:1. 分布性;...原创 2018-09-02 18:34:21 · 9338 阅读 · 0 评论