Atitit 消息系统 mq 的艺术 attilax总结 v5 t88.docx Atitit 消息系统 mq 之道 attilax总结 1. 概念 broker topic producer

本文深入探讨了消息队列(MQ)的核心概念,包括Broker、Topic、Producer和Consumer的角色,以及消息模式如点对点、发布订阅等。通过具体实例,如Kafka的结构解析,阐述了MQ在分布式系统中的作用和机制。

Atitit 消息系统 mq 的艺术 attilax总结 v5 t88.docx

Atitit 消息系统 mq 之道 attilax总结

 

1. 概念 broker  topic  producer consumer 1

2. 常用的消息模式 2

2.1. 消息通道(Message Channel)模式 2

2.2. 发布者-订阅者(Publisher-Subscriber)模式 2

2.3. 2 拉模型 2

2.4. 图3 推模型 2

2.5. 图4 Publisher-Subscriber模式(图片来自eaipatterns ) 3

2.6. 消息路由(Message Router)模式 3

3. 扩展与标准化 3

3.1. 拓展:JMS规范Java消息服务(Java Message Service) 3

3.2. 消息中间件(MOM) 4

4. 一:JMQ的两种消息模式     1.1:点对点的消息模式    1.2:订阅模式 4

4.1.1. 1.1:点对点的消息模式 4

4.1.2. 1.2:订阅模式 4

5. 常见api 5

5.1. 3. 发送范例 23.1. 接受 63.2. 查询 10 5

6. 常见的产品 5

6.1. MSMQ、IBM MQ、JBoss MQ 5

6.2. 开源的RabbitMQ、 5

6.3. Apache ActiveMQ 5

6.4. Kafka  复杂 5

7. ref 5

 

  1. 概念 broker  topic  producer consumer

 

这是张我在Kafka官网上截的图,我大概可以把Kafka的主要结构分为以下几点:

 

producer:生产者,就是生产馒头(老妈)

consumer:消费者,就是吃馒头的(你)

broker:篮子

topic:主题,给馒头带一个标签,topica的馒头是给你吃的,topicb的馒头是给你弟弟吃

---------------------

作者:疯兔子大叔

来源:CSDN

原文:https://blog.csdn.net/wing_93/article/details/78513782

版权声明:本文为博主原创文章,转载请附上博文链接!

  1. 常用的消息模式
    1. 息通道(Message Channel)模式

我们常常运用的消息模式是Message Channel(消息通道)模式,如图1所示。

 

消息通道作为在客户端(消费者,Consumer)与服务(生产者,Producer)之间引入的间接层,可以有效地解除二者之间的耦合。只要实现规定双方需要通信的消息格式,以及处理消息的机制与时机,就可以做到消费者对生产者的“无知”。事实上,该模式可以支持多个生产者与消费者。例如,我们可以让多个生产者向消息通道发送消息,因为消费者对生产者的无知性,它不必考虑究竟是哪个生产者发来的消息

 

    1. 发布者-订阅者(Publisher-Subscriber)模式

一旦消息通道需要支持多个消费者时,就可能面临两种模型的选择:拉模型与推模型。拉模型是由消息的消费者发起的,主动权把握在消费者手中,它会根据自己的情况对生产者发起调用。如图2所示

 

    1. 2 拉模型

拉模型的另一种体现则由生产者在状态发生变更时,通知消费者其状态发生了改变。但得到通知的消费者却会以回调方式,通过调用传递过来的消费者对象获取更多细节消息。

在基于消息的

    1. 图3 推模型

对于推模型而言,消费者无需了解生产者。在生产者通知消费者时,传递的往往是消息(或事件),而非生产者自身。同时,生产者还可以根据不同的情况,注册不同的消费者,又或者在封装的通知逻辑中,根据不同的状态变化,通知不同的消费者。

两种模型各有优势。拉模型的好处在于可以进一步解除消费者对通道的依赖,通过后台任务去定期访问消息通道。坏处是需要引入一个单独的服务进程,以Schedule形式执行。而对于推模型而言,消息通道事实上会作为消费者观察的主体,一旦发现消息进入,就会通知消费者执行对消息的处理。无论推模型,拉模型,对于消息对象而言,都可能采用类似Observer模式的机制,实现消费者对生产者的订阅,因此这种机制通常又被称为Publisher-Subscriber模式,如图4所示

 

    1. 图4 Publisher-Subscriber模式(图片来自eaipatterns )

通常情况下,发布者和订阅者都会被注册到用于传播变更的基础设施(即消息通道)上。发布者会主动地了解消息通道,使其能够将消息发送到通道中;消息通道一旦接收到消息,会主动地调用注册在通道中的订阅者,进而完成对消息内容的消费。

    1. 消息路由(Message Router)模式

无论是Message Channel模式,还是Publisher-Subscriber模式,队列在其中都扮演了举足轻重的角色。然而,在企业应用系统中,当系统变得越来越复杂时,对性能的要求也会越来越高,此时对于系统而言,可能就需要支持同时部署多个队列,并可能要求分布式部署不同的队列。这些队列可以根据定义接收不同的消息,例如订单处理的消息,日志信息,查询任务消息等。这时,对于消息的生产者和消费者而言,并不适宜承担决定消息传递路径的职责。事实上,根据S单一职责原则,这种职责分配也是不合理的,它既不利于业务逻辑的重用,也会造成生产者、消费者与消息队列之间的耦合,从而影响系统的扩展。

既然这三种对象(组件)都不宜承担这样的职责,就有必要引入一个新的对象专门负责传递路径选择的功能,这就是所谓的Message Router模式,如图5所示:

 

  1. 扩展与标准化

ActiveMQ 是一个完全支持JMS1.1和J2EE 1.4规范的 JMS Provider实现,尽管JMS规范出台已经是很久的事情了,但是JMS在当今的J2EE应用中间仍然扮演着特殊的地位。

 

    1. 拓展:JMS规范Java消息服务(Java Message Service)

 

JMS:(http://baike.baidu.com/subview/157103/12665866.htm)

 

JMS即Java消息服务(Java Message Service)应用程序接口,是一个Java平台中关于面向消息中间件(MOM)的API,用于在两个应用程序之间,或分布式系统中发送消息,进行异步通信。Java消息服务是一个与具体平台无关的API,绝大多数MOM提供商都对JMS提供支持。

---------------------

    1. 消息中间件(MOM)
  1. 一:JMQ的两种消息模式     1.1:点对点的消息模式    1.2:订阅模式

 

消息列队有两种消息模式,一种是点对点的消息模式,还有一种就是订阅的模式.

 

      1. 1.1:点对点的消息模式

 

点对点的模式主要建立在一个队列上面,当连接一个列队的时候,发送端不需要知道接收端是否正在接收,可以直接向ActiveMQ发送消息,发送的消息,将会先进入队列中,如果有接收端在监听,则会发向接收端,如果没有接收端接收,则会保存在activemq服务器,直到接收端接收消息,点对点的消息模式可以有多个发送端,多个接收端,但是一条消息,只会被一个接收端给接收到,哪个接收端先连上ActiveMQ,则会先接收到,而后来的接收端则接收不到那条消息

 

      1. 1.2:订阅模式

 

订阅/发布模式,同样可以有着多个发送端与多个接收端,但是接收端与发送端存在时间上的依赖,就是如果发送端发送消息的时候,接收端并没有监听消息,那么ActiveMQ将不会保存消息,将会认为消息已经发送,换一种说法,就是发送端发送消息的时候,接收端不在线,是接收不到消息的,哪怕以后监听消息,同样也是接收不到的。这个模式还有一个特点,那就是,发送端发送的消息,将会被所有的接收端给接收到,不类似点对点,一条消息只会被一个接收端给接收到。

 

  1. 常见api
    1. 3. 发送范例 23.1. 接受 63.2. 查询 10
  2. 常见的产品
    1. MSMQ、IBM MQ、JBoss MQ
    2. 开源的RabbitMQ
    3. Apache ActiveMQ

消息通道通常以队列的形式存在,这种先进先出的数据结构无疑最为适合这种处理消息的场景。微软的MSMQ、IBM MQ、JBoss MQ以及开源的RabbitMQApache ActiveMQ都通过队列实现了Message Channel模式。

 

背景RabbitMQ是一个由erlang开发的AMQP(Advanved Message Queue)的开源实现

 

    1. Kafka  复杂
  1. ref

为什么会需要消息队列(MQ)? - xuyatao - 博客园.html

ActiveMQ消息队列的使用及应用 - 朱小杰 - 博客园.html

Atiit rabbit mq 读取发送范例

Atitit Kafka 使用总结.docx

内容概要:本文研究了一种基于改进ICEEMDAN的火电-蓄电池-飞轮混合储能联合调频协同控制策略,旨在提升电力系统频率调节的快速响应能力与运行稳定性。通过引入改进的自适应噪声完备集合经验模态分解(ICEEMDAN)方法,对电网频率偏差信号进行多时间尺度分解,精确分离高频与低频动态分量,并据此实现功率的差异化分配:高频成分由响应迅速的飞轮储能承担,低频成分由能量密度高的蓄电池处理,同时结合火电机组的基础调频能力,构建火电-混合储能多源协同控制架构。该策略充分发挥各类储能技术的优势,有效缓解单一储能系统的压力,延长设备寿命,并提升系统整体调频性能。文中提供了完整的Matlab仿真代码实现,验证了该方法在抑制频率波动、优化储能出力、提高系统可靠性和经济性方面的显著效果。; 适合人群:具备电力系统分析、自动控制理论及新能源技术等相关专业知识背景,熟悉Matlab/Simulink仿真平台,从事电力系统调频控制、混合储能系统优化、多时间尺度能量管理等领域研究的研究生、科研人员及工程技术人员。; 使用场景及目标:①深入研究混合储能系统在电网一次调频与二次调频中的功率分配机制与协调控制逻辑;②掌握ICEEMDAN信号分解技术在能源系统动态特征提取与多尺度控制中的应用方法;③实现火电机组与多类型储能协同参与调频的仿真建模、算法开发与性能对比分析;④为综合能源系统、微电网及新型电力系统的多源多时间尺度协调控制提供理论依据与技术参考。; 阅读建议:建议结合提供的Matlab代码逐模块分析算法实现流程,重点理解信号分解、模态分量判别、功率分配规则及控制器设计等关键环节,可通过调整系统参数、模拟不同扰动工况进行仿真测试,进一步开展灵敏度分析与策略优化,以深化对协同控制机理的认识并拓展其实际应用价值。
内容概要:本文针对光伏-储能-数据中心系统的容量优化配置问题,构建了一个多能互补的园区级能源系统数学模型,旨在实现可再生能源高效利用与高能耗负荷的可靠供应。研究综合考虑光伏发电的间歇性、储能系统的动态响应特性以及数据中心的刚性用电需求,提出一种协调优化方法,通过Matlab平台进行仿真与代码实现。文中详细阐述了以降低系统综合运行成本、提高能源自给率和保障供电可靠性为目标的目标函数设计,建立了包含功率平衡、设备容量、运行约束在内的完整约束体系,并采用合适的优化算法求解,最终通过具体案例验证了模型的有效性和实用性,为绿色低碳数据中心的规划建设提供了理论依据和技术支撑。; 适合人群:具备一定电力系统、能源工程或自动化背景的研究生、科研人员及从事新能源系统规划的工程技术人员。; 使用场景及目标:①应用于园区级综合能源系统规划与设计;②为数据中心等高耗能设施的绿色低碳运行提供决策支持;③实现光伏、储能与负载之间的协同优化,提升能源利用效率;④作为学术研究参考,复现并改进相关优化模型。; 阅读建议:建议读者结合Matlab代码深入理解模型实现细节,重点关注目标函数构建与约束处理方式,同时可尝试替换不同优化算法或调整参数以观察结果变化,从而加深对容量配置问题本质的理解。
内容概要:本文聚焦“计及V2G主动支撑的输配协同日前-实时优化调度”这一核心课题,系统性地介绍了基于Matlab实现的多时间尺度电力系统优化调度模型,重点探讨了电动汽车(V2G)作为灵活资源参与电网主动支撑的协同调度机制。研究涵盖输配电网协同架构下的日前与实时调度联动、混合储能系统的功率分配策略、风电出力波动的平抑技术,并引入灰狼优化算法(GWO)、改进型自适应完备集合经验模态分解(ICEEMDAN)及模型预测控制(MPC)滚动优化等先进算法,以提升调度决策的精度与系统运行的稳定性。文中还整合了光伏-储能-电动汽车协同优化、火-储联合调频、电氢氨耦合系统等前沿方向,展示了多项科研成果的复现案例,强调利用成熟算法工具包与仿真平台提升科研效率与创新水平。; 适合人群:具备电力系统分析、现代优化理论及Matlab编程基础,从事智能电网、新能源并网、综合能源系统、V2G技术等相关领域研究的研究生、高校科研人员及电力行业工程技术开发者。; 使用场景及目标:① 构建并仿真电动汽车参与输配协同调度的多时间尺度优化模型;② 掌握基于GWO、CEEMDAN等智能算法的混合储能功率分解与风电波动抑制方法;③ 深入理解MPC在微电网与综合能源系统动态调度中的应用机制;④ 借鉴复现案例开展低碳、高比例可再生能源背景下的新型电力系统优化研究; 阅读建议:建议结合网盘提供的完整代码资源,按照主题模块循序渐进地实践,重点关注模型构建的数学逻辑、算法参数设置与求解流程,对比不同算法性能差异,并延伸至电-算-热-氢多能耦合等新兴场景,激发科研创新思维。
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值