开局先送官方福利!!!

1.免费领资源,好礼拿不停!

首先是猫超卡和社区积分,点点鼠标即可到手(2分钟不到,福利直接拿到手!):
领奖活动直达电梯
领奖活动直达电梯

2.是兄弟,就来助我!

助力最高拿科沃斯T10扫地机器人:

直达领取扫地机器人
直达领取扫地机器人

视频演示讲解

视频讲解直达!已更新!!!
视频讲解直达!已更新!!!
视频讲解直达!已更新!!!

切入正题

介绍完活动后,咱们言归正传,首先说说什么是"消息队列"
我想很多朋友应该是没有接触过"消息队列",笔者有一个5年开发经验的朋友,期间多次问到过他,他都回答笔者,在其日常开发工作中并没有使用到"消息队列"。

那么什么是消息队列呢?

消息队列(Message Queue),从广义上来讲就是一种消息队列服务中间件,提供一套完善的信息生产、传递、消费的软件系统。如下图

当然,消息队列所涵盖的功能远不止于队列(Queue),其本质是两个进程传递信息的一种方法。两个进程可以分布在同一个或多个不同的机器上。

说了一点理论,大家应该没有明白,那么请大家想象一下12306的业务处理流程,大家都明白12306的业务逻辑非常复杂,需要考虑的方面太多了,下面一张图为12306的部分业务逻辑

像12306这类软件超高并发需求的场景还有很多,那么如何解决呢?就是使用消息队列

消息队列的优点如下:

  1. 削峰填谷
  2. 程序解耦
  3. 异步处理
  4. 数据的最终一致性

说到这里,我讲的不如大家实际去看一看由李伟老师编写的《RocketMQ分布式消息中间件》

市面上常见的消息队列

从上面这张图可以很清晰的看到,截至2020年的时候,市面上主流的消息队列组件的对比,Apache RocketMQ在各项功能上来看,可以说是六边形战士,非常值得一试。

RocketMQ的发展历程

经过上面的简单介绍,大家应该对消息队列有了大致的了解,那么这里咱们介绍一下RocketMQ的发展历程。

RocketMQ前世---MetaQ

RocketMQ发展经历了几个阶段,一开始的时候,和大部分组件产生的原因类似,阿里巴巴内部为了适应淘宝 B2C 的更快、更复杂的业务,2001年启动了“五彩石项目”,阿里巴巴的第一代消息队列服务Notify就是在这个背景下产生的。
2010 年,阿里巴巴内部的 Apache ActiveMQ 仍然作为核心技术被广泛用于各个业务线,而顺序消息、海量消息堆积、完全自主控制消息队列服务,也是阿里巴巴同时期急需的。在这种背景下,2011年,MetaQ诞生。

RocketMQ 云

2011年,LinkedIn将Kafka开源。2012年,阿里巴巴参考Kafka的设计,基于对MetaQ的理解和实际使用,研发了一套通用消息队列引擎,也就是 RocketMQ。自此才有了第一代真正的RocketMQ,2016年阿里云上线云RocketMQ消息队列服务。
自2001年到2012年,11年的实际使用、运维,和业务不断碰撞,才得以抽象并整理出一个真正的行业级产品,技术从来不简单,只是你看不见!

Apache RocketMQ“毕业”

2016年11月,阿里巴巴将RocketMQ捐献给Apache基金会。 Apache社区有一个很重要的理念:社区大于代码。虽然RocketMQ已经开源3年,在国内小有名气,而且在阿里巴巴被广泛应用并有较好的效果,但是依然不能达到 Apache优秀项目的标准。 在RocketMQ被捐献后,通过一系列的修改、评审、调整,悄悄升级至4.0版本,正式进入孵化阶段。 2017年09月25日,RocketMQ成功“毕业”(Apache社区项目孵化成功即为毕业),成为 Apache 顶级项目,它是国内首个互联网中间件在 Apache 的顶级项目,也是继ActiveMQ、Kafka后Apache家族中全新的一代消息队列引擎。 随着不断地更新升级,RocketMQ 的能力也越来越强大,如图所示,这是阿里巴巴双11的消息量的部分统计,可以看出RocketMQ处理的消息量已经在万亿条级别。

RocketMQ经过多年的发展和实践应用,在自身的到现在阿里云存在两大版本可供使用,一个是RocketMQ 4.x,另一个是RocketMQ 5.x,其版本差异如下

差异项 4.x 5.x
服务端架构 存算一体。 存储和计算分离,可独立水平扩展。
开发接入门槛 1. 同时存在多套SDK,功能接口体验不一致。
2. 强制阿里云账号鉴权,企业上云需要修改部分代码。
1. 统一使用开源SDK,功能体验一致。
2. 支持VPC内部安全识别,上云无需修改代码。
存储能力 按空间预留,需要做好容量评估避免存储时长不足。 根据实际使用量弹性伸缩。
计算能力 超过TPS规格最大值限流。 消息收发计算能力支持预留+突发流量弹性组合,业务方无需为突发流量预留大量Buffer资源。
计费项 1. 标准版实例:API调用费用、Topic资源占用费。
2. 铂金版实例:消息收发TPS峰值、Topic数上限、消息存储空间
1. 消息收发TPS计算规格
2. 存储空间
3. 公网下行流量。
售卖形态 标准版、铂金版 1. 主系列:
标准版、专业版、铂金版。
2. 子系列:
单节点版:测试环境专用。
集群高可用版:生产环境专用。
产品形态更丰富,产品选型更平滑。

实践出真知

那么经过前面的一系列讲述,大家应该对RocketMQ有了一些认知,并且也了解了产品特性,那么接下来就到了我们的动手实验环节了。在这里为大家演示的是RocketMQ事件驱动场景,所有服务均在阿里云上进行,让大家完整体验阿里云上的业务流程。

为何选择事件驱动场景?

2023年以来,阿里云社区先后推出了多个服务测评活动,其中有函数计算FC,以及不久前的事件桥EventBridge测评活动,直到现在正在测评的RocketMQ消息队列,完美支撑了该业务场景,可谓是温故而知新,将多个服务融合到同一个业务场景中

场景描述

假设有一家小型游戏公司,需要通过使用RocketMQ来收发消息,然后通过阿里云函数计算FC处理后将数据进行存储

业务逻辑图示

业务实现

RocketMQ设置

创建RocketMQ实例

作为演示,本次使用的单节点的标准版RocketMQ实例,规格为rmq.s1.micro,如果您是第一次使用RocketMQ并且是通过活动页面进入,那么您可以领取一个月的免费使用额度。实例的创建大概需要5分钟左右,请您耐心等待,可以向下继续阅读。

创建订阅及Group

创建Group(可选)

表格存储

创建表格存储实例

创建数据表

函数计算FC

创建函数

设置函数计算FC的环境变量

使用代码


import os
from tablestore import *
import jsondef handler(event, context):body = json.loads(event.decode())['data']['body']# 从环境变量中获取表格存储的连接信息endpoint = os.environ.get('OTS_ENDPOINT', '')accessid = os.environ.get('OTS_ACCESSID', '')accesskey = os.environ.get('OTS_ACCESSKEY', '')instance = os.environ.get('OTS_INSTANCE', '')table_name = os.environ.get('OTS_TABLE_NAME', '')# 创建表格存储客户端client = OTSClient(endpoint, accessid, accesskey, instance)# 定义要写入的数据primary_key = [('id', body['id'])]attribute_columns = [('Name', body['name']), ('Job', body['job']), ('Hero', body['hero'])]row = Row(primary_key, attribute_columns)# 向表格存储写入数据consumed, return_row = client.put_row(table_name, row)return 'Data written to Table Store successfully.'

事件总线EventBridge

事件总线EventBridge需要创建自定义的事件总线

步骤一:添加自定义事件源

  1. 登录事件总线EventBridge控制台。
  2. 在左侧导航栏,单击事件总线。
  3. 在顶部菜单栏,选择地域。
  4. 在事件总线页面,单击已创建的自定义事件总线。
  5. 在左侧导航栏,单击事件源。
  6. 在事件源页面,单击添加事件源。
  7. 在添加自定义事件源面板,输入名称和描述,事件提供方选择消息队列 RocketMQ 版,并选择已创建的消息队列RocketMQ版的资源信息等,然后单击确定。

步骤二:创建事件规则

  1. 登录事件总线EventBridge控制台,在左侧导航栏,单击事件总线。
  2. 在顶部菜单栏,选择地域,在事件总线页面,单击目标总线名称。
  3. 在左侧导航栏,单击事件规则,然后单击创建规则。
  4. 在创建规则页面,完成以下操作。
  5. 在配置基本信息配置向导,在名称文本框输入规则名称,在描述文本框输入规则的描述,然后单击下一步。
  6. 在配置事件模式配置向导,事件源类型选择自定义事件源,事件源选择步骤一添加的自定义事件源,在事件模式内容代码框输入事件模式,然后单击下一步。

a. 在配置事件目标配置向导,配置事件目标,然后单击创建。
b. 服务类型:单击函数计算。
c. 服务:选择已创建的函数计算的服务。
d. 函数:选择已创建的函数计算的函数。


设置规则



测试



写在最后

通过本篇的一些简述以及一个小的实验,希望您可以对阿里云RocketMQ消息队列有一个大致的了解,同时也可以看到阿里云各个服务之间的集成协作,使整个业务流程均可以在云上完成。另外通过一个小小的实验,帮助大家回顾之前的社区活动内容同时也将本期知识融合进来,可以更好的帮助到大家真正的去使用阿里云服务,体验云计算的魅力。最后希望大家真正的去体验一下阿里云RocketMQ,毕竟大厂的羊毛必须薅!!!

领奖活动直达电梯
领奖活动直达电梯
领奖活动直达电梯

助力最高拿科沃斯T10扫地机器人:

直达领取扫地机器人
直达领取扫地机器人
直达领取扫地机器人

希望这篇文章能够帮助到您!!!

阿里云中“间“力量!RocketMQ相关推荐

  1. 阿里云消息队列 RocketMQ、Kafka 荣获金融级产品稳定性测评 “先进级” 认证

    近日,由中国信通院和混沌工程实验室联合举办的混沌工程技术沙龙–金融行业精品专场顺利召开,并发布金融级产品稳定性测评成果.在分布式系统稳定性评估体系获奖名单中,阿里云分布式消息队列服务成为通过首批消息队 ...

  2. 阿里云消息队列 RocketMQ 5.0 全新升级:消息、事件、流融合处理平台

    从"消息"到"消息.事件.流"的大融合 消息队列作为当代应用的通信基础设施,微服务架构应用的核心依赖,通过异步解耦能力让用户更高效地构建分布式.高性能.弹性健壮 ...

  3. 云栖发布|阿里云消息队列 RocketMQ 5.0:消息、事件、流融合处理平台

    简介:RocketMQ5.0 的发布标志着阿里云消息正式从消息领域正式迈向了"消息.事件.流"场景大融合的新局面. 引言:从"消息"到"消息.事件.流 ...

  4. 在阿里云中搭建大数据实验环境

    云计算是和自来水一样的商业模式.有了自来水,我们可以不用自己挖井,就可以快速.便捷.廉价地获得水资源.而有了云计算,我们就可以不用自己建机房.买设备.维护系统,就可以快速.便捷.廉价地获得IT资源(C ...

  5. 如何将镜像上传至阿里云?如何从阿里云中拉取自己的镜像?

    目录 如何将制作好的镜像上传至阿里云? 一.前期准备 1.注册阿里云账户 2.登录账号 3.配置Docker加速器 4.创建镜像仓库的命名空间(私有的) 5.创建镜像仓库(创建镜像仓库时要绑定一个代码 ...

  6. 阿里二面:RocketMQ同一个消费组内的消费者订阅量不同tag,会有问题吗?

    面试官:同一个消费组内的消费者,如果订阅了相同的 topic,但是订阅的 tag 不一样,会有什么问题吗? 我:会出现丢消息的情况. 面试官:能详细说一说吗? 我:RocketMQ 要求同一个消费组内 ...

  7. 【阿里云】深入分析阿里云中图片服务的架构经验

    现在几乎任何一个网站.Web App以及移动APP等应用都需要有图片展示的功能,对于图片功能从下至上都是很重要的.必须要具有前瞻性的规划好图片服务器,图片的上传和下载速度至关重要,当然这并不是说一上来 ...

  8. 阿里二面:RocketMQ 消息积压了,增加消费者有用吗?

    面试官:RocketMQ 消息积压了,增加消费者有用吗? 我:这个要看具体的场景,不同的场景下情况是不一样的. 面试官:可以详细说一下吗? 我:如果消费者的数量小于 MessageQueue 的数量, ...

  9. 阿里云中获取文件及目录列表的方法

    1 获取指定bucket下的文件列表(php-sdk 示例) $prefix = 'dir/';$delimiter = '/';$nextMarker = '';$maxkeys = 30;whil ...

  10. 阿里二面:RocketMQ 消费失败了,怎么处理?

    大家好,今天来聊一聊 RocketMQ 客户端消息消费失败,怎么办? 下面是 RocketMQ 推出模式的一段代码: public static void main(String[] args) th ...

最新文章

  1. 【基础巩固篇】Java 8中对CAS的优化
  2. java收银台程序gui_javaSE小项目---简易收银台
  3. initrd映像文档的作用和制作
  4. 如何将现有的回调API转换为Promise?
  5. JDK、J2EE、J2SE、J2ME的区别
  6. java数独最快解_[分享]数独的JAVA解法
  7. 2021下半年软考分数线会有变动吗?
  8. Matlab小波包分解后如何求各频带信号的能量值?
  9. session 原理
  10. HTML5与搜索引擎优化[转载]
  11. s3c6410 jpeg编码 linux,S3C6410 裸机硬件JPEG解码
  12. Oracle GoldenGate复制过程
  13. python布局管理数据_利用python创建窗口-布局管理器(五)
  14. app 如何接收遥控信息_如何选购红外接收头?华新告诉你产品的标准
  15. 每日算法系列【LeetCode 1250】检查「好数组」
  16. ceph12.0.1的源码编译安装
  17. 幅值与峰峰值的计算_交流电有效值与峰值计算公式的推导过程.
  18. 如何通过芯片手册寻找操作GPIO
  19. 伴随矩阵例题_§6_伴随矩阵及习题_精品.ppt
  20. 使用虚拟光驱显示函数不正确的解决

热门文章

  1. 正宇丨人要学会自己照顾自己,自己激励自己
  2. 基于人工智能技术将汉字数字转换成阿拉伯数字
  3. IPv6表示方法与配置案例
  4. P8架构师都要懂的微服务架构深度解析:微服务构建,领域驱动设计,java语法基础知识
  5. org.springframework.beans.factory.NoSuchBeanDefinitionException: No bean named 'accountService' avai
  6. 用微雪RP2040-LCD-1.28设计一款模拟电子表,带屏PICO应用
  7. ITSM Back To Basics – The Service Catalogue
  8. spring boot+vue实现爬取各大平台每日热榜数据功能
  9. 【深度学习】查找提升分割精度的方法
  10. 实现背景透明文字不透明