栏目分类:
子分类:
返回
名师互学网用户登录
快速导航关闭
当前搜索
当前分类
子分类
实用工具
热门搜索
名师互学网 > IT > 前沿技术 > 大数据 > 大数据系统

第一章 Kafka专题之MQ消息中间件概述

第一章 Kafka专题之MQ消息中间件概述

1、MQ消息中间件
  • MQ:全称MessageQueue,主要用于程序和程序直接通信。
2、MQ中间件的作用

(1)解耦

中间件模式的优点1
	:将消息写入消息队列,需要消息的系统自己从消息队列中拿数据,从而系统A不需要做任何修改
  • 解耦前:新增/删除系统,需要对相关系统进行改造
  • 解耦后:新系统要数据,直接从MQ中消费即可,某个系统不需要数据,取消对MQ消息的消费即可

(2)异步

中间间模式的优点
	:将消息写入到消息队列,非必要的业务逻辑以异步方式运行,加快响应速度
  • 异步前:系统A吃所有系统运行的总和,太耗时间
  • 异步后:直接将数据发送给MQ,各个系统分别处理完成之后分别返回
业务场景:A系统需要依赖B,C,D三个系统,则需要返回当前系统

(3)削峰

中间件模式的优点
	:系统A能按照数据库处理的并发量从消息队列中慢慢拉取消息
	:在生产中,这个短暂的高峰期积压是允许的
  • 削峰前:并发量大的时候,所有请求会直接怼到数据库,造成数据库连接异常

  • 削峰后:系统可以按照数据库自身能处理的并发量,慢慢拉取数据
3、JMS消息服务&AMQP

(1)JMS消息服务

  • JMS:java消息服务,Java平台面向消息中间件的接口

  • 类似JDBC

    • JDBC:用来访问许多不同关系数据库的API
    • JMS:用来访问消息收发系统消息

(2)AMQP

  • AMQP:直接定义网络交换的数据格式,解决不同平台之间的消息传递交互问题
  • 特性
    • 独立于平台的底层消息传递协议
    • 消费者驱动消息传递

(3)AMQP和JMS的主要区别

  • 消息类型
    • AMQP:Byte[]
    • JMS消息类型:TextMessage/ ObjectMessage/StreamMessage等
  • 跨语言
    • AMQP:直接定义网络交换的数据格式,可跨语言,比如由Java语言产生的消息可以由Python进行消费
    • JMS:Java之间交互

4、常见概念

(1)JMS提供者**:连接面向消息中间件**的,JMS接口的一个实现。

(2)JMS生产者:生产消息的服务。

(3)JMS消费者:消费消息的服务

(4)JMS消息:数据对象

(5)JMS队列:存储消费消息的区域

(6)JMS主题:一种支持发送消息给多个订阅者的机制

(7)JMS消息类型:点对点、发布订阅

5、MQ中常用类

(1)ConnectionFactory:连接工厂,JMS用它创建连接

(2)Connection:JMS客户端到JMS Provider的连接

(3)Session:一个发送或接收消息的线程

(4)Destination:消息的目的地,消息发送给谁

(5)MessageConsumer:消息消费者

(6)MessaageProducer:消息生产者

6、消息队列的两种模式

(1)点对点模式

点对点:即一对一模式,消费者主动拉去数据,消息收到后消息清除
P2P模型包括:消息队列(Queue)、发送者(Sender)、接收者(Receiver)
举例:打电话


(2)发布/订阅模式

发布/订阅模式:即一对多模式,消费者消费数据之后不会清除消息
Pub/Sub包含:消息队列(Queue)、主题(topic)、发布者(Publisher)、订阅方(Subscriber)
	:消息生产者(发布)将消息发布到 topic 中,同时有多个消息消费者(订阅)消费该消息。
	:和点对点方式不同,发布到 topic 的消息会被所有订阅者消费。
举例:微博关注

  • 共同点
消息生产者生产消息发送到queue中,然后消息消费者从队列中读取并消费消息
	生产者:把数据放到消息队列
	消费者:从消息队列中取数据
消息队列作用:解耦,异步,削峰
转载请注明:文章转载自 www.mshxw.com
本文地址:https://www.mshxw.com/it/680933.html
我们一直用心在做
关于我们 文章归档 网站地图 联系我们

版权所有 (c)2021-2022 MSHXW.COM

ICP备案号:晋ICP备2021003244-6号