首页 > 其他分享 >消息中间件的基础概念入门

消息中间件的基础概念入门

时间:2025-01-16 22:00:48浏览次数:3  
标签:场景 入门 适用 支持 概念 消息 消息中间件 消息传递

目录

一、什么是消息中间件

1.1、简介

1.2、消息中间件的主要作用

解耦合

异步通信

负载均衡

可靠性与持久性

消息路由与调度

削峰

事务支持

监控与审计

跨平台和跨语言支持

二、常用消息中间件对比

2.1、 RabbitMQ

2.1.1、特点

2.1.2、适用场景

2.2、Apache Kafka

2.2.1、特点

2.2.2、适用场景

2.3、 ActiveMQ

2.3.1、特点

2.3.2、适用场景

2.4、 Redis(使用 Pub/Sub 功能)

2.4.1、特点

2.4.2、适用场景

2.5、 NATS

2.5.1、特点

2.5.2、适用场景


一、什么是消息中间件

1.1、简介

消息中间件也可以称消息队列,是指用高效可靠的消息传递机制进行与平台无关的数据交流,并基于数据通信来进行分布式系统的集成。通过提供消息传递和消息队列模型,可以在分布式环境下扩展进程的通信。

当下主流的消息中间件有RabbitMQ、Kafka、ActiveMQ、RocketMQ等。

1.2、消息中间件的主要作用

解耦合

消息中间件使得系统中的各个组件可以通过消息进行通信,而不需要直接相互依赖。这种解耦合使得系统的各个部分可以独立开发、部署和扩展,提高了系统的灵活性和可维护性。

异步通信

通过消息中间件,系统中的不同组件可以实现异步通信。当一个组件发送消息时,它不必等待接收方处理完毕,可以继续执行其他操作。这种异步机制提高了系统的响应性和并发处理能力。

负载均衡

消息中间件通常支持多消费者模型,允许多个消费者并发处理消息,从而实现负载均衡。这样可以有效利用系统资源,提高整体吞吐量。

可靠性与持久性

许多消息中间件提供消息持久化功能,确保即使系统故障或重启,消息也不会丢失。这对于关键业务场景尤为重要,例如金融系统和订单处理。

消息路由与调度

消息中间件能够根据各种规则(如主题、队列、消息类型等)对消息进行路由和调度,从而实现复杂的消息传递逻辑。这使得开发人员可以灵活地设计系统的消息传递流程。

削峰

消息队列中的常用场景,一般在秒杀或抢够活动中使用广泛。一般会因为流量过大,应用系统配置承载不了这股瞬间流量,导致系统直接挂掉,即传说中的“宕机”现象。为解决这个问题, 我们会将那股巨大的流量拒在系统的上层,即将其转移至 MQ 而不直接涌入我们的接口。

事务支持

一些消息中间件支持分布式事务,可以确保消息的发送和处理能够原子性地保证,这对于需要强一致性的业务场景非常重要。

监控与审计

消息中间件通常提供监控和管理工具,可以实时了解消息的状态、流量以及系统的健康状况。此外,通过记录消息,可以实现审计功能,帮助追踪和分析系统行为。

跨平台和跨语言支持

许多消息中间件支持多种协议和客户端库,使得不同平台和编程语言的应用程序能够方便地进行通信,增强了系统的互操作性。

二、常用消息中间件对比

2.1、 RabbitMQ

RabbitMQ 是一个开源的消息代理,基于 AMQP(高级消息队列协议)。

2.1.1、特点

  1.   支持多种协议(AMQP, MQTT, STOMP等)。
  2.   强大的消息路由功能。
  3.   支持事务和确认机制,保证消息传递的可靠性。
  4.   提供丰富的管理界面和监控功能。

2.1.2、适用场景

适用于需要复杂消息路由和高可用性的场景,如电商系统的订单处理。

2.2Apache Kafka

Kafka 是一个分布式流平台,最初由 LinkedIn 开发,现为 Apache 的开源项目。

2.2.1、特点

  1.   高吞吐量,适用于大规模数据流处理。
  2.   基于发布/订阅模型,支持多消费者。
  3.   提供持久化和分区功能,保证高可用性。
  4.   支持实时数据处理,适合流式应用。

2.2.2、适用场景

适用于需要大规模数据处理和实时分析的场景,如日志收集、监控和流数据处理。

2.3 ActiveMQ

ActiveMQ 是一款开源的消息代理,支持多种协议(如 JMS, AMQP)。

2.3.1、特点

  1.   简单易用,适合快速集成。
  2.   支持多种消息传递模式(点对点和发布/订阅)。
  3.   提供高可用性和集群功能。

2.3.2、适用场景

适用于企业内部系统集成和异步处理。

2.4 Redis(使用 Pub/Sub 功能)

Redis 是一个开源的内存数据结构存储,支持简单的消息发布/订阅功能。

2.4.1、特点

  1.   高性能,低延迟。
  2.   数据持久化选项。
  3.   简单易用的 API。

2.4.2、适用场景

适合低延迟的消息传递需求,如实时聊天应用。

2.5、 NATS

NATS 是一个轻量级的开源消息系统,专注于高性能和低延迟。

2.5.1、特点

  1.   简单的发布/订阅模型。
  2.   支持请求/响应模式。
  3.   高吞吐量和低内存占用。

2.5.2、适用场景

适合微服务架构中服务之间的通信。

特性

RabbitMQ

Kafka

ActiveMQ

Redis

Pulsar

NATS

数据模型

AMQP

发布/订阅

JMS

Pub/Sub

发布/订阅

发布/订阅

吞吐量

中等

中等

持久性

支持

支持

支持

可选

支持

可选

适用场景

复杂路由和高可用需求

实时数据处理

企业集成

低延迟需求

多租户和流处理

微服务通信

配置和管理

复杂

相对简单

简单

简单

复杂

简单

标签:场景,入门,适用,支持,概念,消息,消息中间件,消息传递
From: https://blog.csdn.net/weixin_45065854/article/details/145192818

相关文章

  • CMake 入门教程: 从基础到实践
    什么是CMake?CMake(全称为“Cross-PlatformMake”)是一种免费并开源的跨平台构建工具,用于生成构建系统文件(如Makefile和VisualStudio工程文件),从而控制软件的编译和链接过程.为什么选择CMake?CMake为项目工程解决了以下问题:跨平台构建:支持为多种平台......
  • 初识ES - ES与mysql的概念对比
    文档:ES是面向文档存储的,可以是数据库中的一条商品数据,一个订单信息。文档数据会被序列化为json格式后存储再es中。 索引:索引(index):相同类型的文档的集合。映射(mapping):索引中文档的字段约束信息,类似表的结构约束。 按照索引分类后,如下: 概念对比 架构  ......
  • 【内网穿透】概念、原理与实现方法
    一、内网穿透简介内网穿透是一种网络技术,它允许外部网络(如互联网)上的设备访问位于内部网络(例如公司或家庭局域网LAN)中没有直接公网IP地址的设备。这对于远程办公、云服务接入以及物联网设备管理等场景至关重要。二、工作原理内网穿透主要依赖于NAT(网络地址转换)穿越技术。通常情......
  • 一、Apache HDFS入门
    HDFS基本概念首先是一个==文件系统==,就是用来存储文件、存储数据。是大数据最底层一个服务。其次是一个==分布式的文件系统==。分布式意味着多台机器存储。场景互动:如何模拟实现分布式文件系统。或者说一个==成熟的分布式==文件系统应该要具备哪些属性、功能呢?1.分布式......
  • 【前端入门】应该了解和知道的几个国内外前端开发资源网站
    与大家分享一下几个国内外前端开发资源网站国际资源MDNWebDocs(MozillaDeveloperNetwork)用途:MDN是Web技术领域最全面的文档库之一,涵盖了HTML、CSS、JavaScript以及浏览器API等。链接: https://developer.mozilla.orgW3Schools用途:适合初学者学习Web技术,提供从......
  • 【python入门】2.安装搭建python环境
    1.安装python解析器1.1为什么要装python解析器?python属于高级语言,计算机并不认识我们需要用解析器,将python文件,经过python解析器翻译成,计算机能够识别的机器语言1.2如何安装下载地址:PythonReleasePython3.7.9|Python.org检验安装完成在cmd中输入python,若出......
  • 市面上唯一一本全面解析Transformer的书《Transformer、BERT、GPT 大语言模型原理深度
    Transformer,BERT,andGPT:IncludingChatGPTandPromptEngineering,出版于2023年11月,作者是奥斯瓦尔德·坎佩萨托(OswaldCampesato)奥斯瓦尔德·坎佩萨托(OswaldCampesato):专门研究深度学习、Java、Android和TensorFlow。他是25本书的作者/合著者,其中包括TensorF......
  • 从零到手搓一个Agent:AI Agents新手入门精通(一)
    今日主题:当什么是Agent,与LLM的区别又是啥这一天,你的女朋友问你(假设我们有女朋友),宝宝,什么是Agent啊,Agent和LLM有什么区别呀,最近大家都在说的Agent究竟是什么,包括很多文章都在写的Agent,还有之前谷歌发布的Agents白皮书究竟是什么,对我们有什么帮助,对我们有什么影响呢?现在,编者......
  • Kubernetes (K8s) 入门指南
    Kubernetes(K8s)入门指南什么是Kubernetes?Kubernetes,通常简称为K8s(因为从“K”到“s”之间有八个字符),是一个开源的容器编排平台,用于自动化部署、扩展和管理容器化应用程序。它最初由谷歌设计,并在2014年捐赠给了云原生计算基金会(CNCF)。Kubernetes建立在谷歌多年来......
  • 入门网络安全工程师要学习哪些内容_网络安全工程师需要学什么考什么证
    大家都知道网络安全行业很火,这个行业因为国家政策趋势正在大力发展,大有可为!但很多人对网络安全工程师还是不了解,不知道网络安全工程师需要学什么?知了堂小编总结出以下要点。网络安全工程师是一个概称,学习的东西很多,具体学什么看自己以后的职业定位。如果你以后想成为安......