‘壹’ 使用RabbitMQ异步调用第三方接口怎么给前端响应问题
后端可以生成一个以手机号为key的实体状态信息,存到缓存(设置过期时间)。等待消息返回回调或异常处理并更新状态信息
前端(轮询)调用后端写的一个接口去缓存拿到状态 根据状态码进行提示
‘贰’ MQ和redis对比
redis :没有相应的机制保证消息的可靠消费,如果发布者发布一条消息,而没有对应的订阅者的话,这条消息将丢失,不会存在内存中;
rabbitmq:具有消息消费确认机制,如果发布一条消息,还没有消费者消费该队列,那么这条消息将一直存放在队列中,直到有消费者消费了该条消息,以此可以保证消息的可靠消费,那么rabbitmq的消息是如何存储的呢?;
redis:实时性高,redis作为高效的缓存服务器,所有数据都存在内存中,所以它具有更高的实时性
rabbitmq队列可以被多个消费者同时监控消费,但是每一条消息只能被消费一次,由于rabbitmq的消费确认机制,因此它能够根据消费者的消费能力而调整它的负载;
redis发布订阅模式,一个队列可以被多个消费者同时订阅,当有消息到达时,会将该消息依次发送给每个订阅者,她是一种消息的广播形式,redis本身不做消费者的负载均衡,因此消费效率存在瓶颈;
redis:redis的持久化是针对于整个redis缓存的内容,它有RDB和AOF两种持久化方式(redis持久化方式,后续更新),可以将整个redis实例持久化到磁盘,以此来做数据备份,防止异常情况下导致数据丢失。
rabbitmq:队列,每条消息都可以选择性持久化,持久化粒度更小,更灵活;
rabbitmq实现了后台监控平台,可以在该平台上看到所有创建的队列的详细情况,良好的后台管理平台可以方面我们更好的使用;
redis没有所谓的监控平台。
redis: 轻量级,低延迟,高并发,低可靠性;
rabbitmq:重量级,高可靠,异步,不保证实时;
rabbitmq是一个专门的AMQP协议队列,他的优势就在于提供可靠的队列服务,并且可做到异步,而redis主要是用于缓存的,redis的发布订阅模块,可用于实现及时性,且可靠性低的功能。
‘叁’ rocketmq之顺序消费
1.在进行负载分配时候,会把不属于的队列进行锁释放,如果释放成功,从待处理队列中移除掉时,
进行新队列加入操作,尝试对新加的队列加锁,如果锁成功,进入创建待处理队列放入,同时创建pullrequest请求放入请求缓存
2.消费线程每隔20秒获取当前所有待处理队列构造成brokername+queue,尝试给master对应队列加锁,所成功设置待处理队列状态为true,未成功或者为false(就是加锁的一个批量处理,拉取数据用)
3.在进行pull拉取数据时,对于顺序消息,判断该队列是否加锁,加锁的话往下进行,如果是首次加锁,pullreuqets的锁状态置为true,同时获取消费进度
4.从broker拉取数据,回调函数中,把数据放入processQueue中(treeMap中),交给消费线程处理,pullreuqets接着放入缓存进行下次拉取
5.消费线程中,获取当前队列锁,判断processQueue是否已加锁,判断待处理队列开始时间距离当前时间是否超过60秒(只有超过才会跳出当前线程,当前队列只有这一个线程能处理)从processQueue中取消费信息(并发是取直接拉取的信息),消费信息从treemap中移除,同时临时map中存有一份待处理消息,调用监听处理逻辑,返回处理状态
6.自动提交:返回成功,直接清除临时map,返回最后偏移量+1,存入消费进度,
挂起的话,判断当前重试次数是否超过,如果未超过或者超过但是发送Ack失败,重试+1,临时map清除,消息放入msgTreeMap,延迟重新消费,
超过并且Ack延迟成功,进入死信队列,清除临时map,返回当前偏移量+1,当消费成功处理
7.非自动提交:返回提交,和自动提交的成功一样,返回回滚,临时map的消息放入msgTreeMap,清除临时map,重新延时消费(相当于本次未消费),挂起,处理方式和上边一样
8.存入消费进度到内存
‘肆’ 前端angela框架监听activemq需要什么配置
1、修改conf/中的activemq.xml;
2、修改jmx.access和jmx.password,配置添加JMS登陆用户和密码;
3、打开activemq解压目录/bin/activemq.bat 编辑;
4、重启activemq
如启动activemq时,窗口一闪就显示了,当获取到异常,解决方法:运行cmd 切换至 activemq解压目录/conf ,运行如下命令,修改访问权限;至此完毕,重启activemq
‘伍’ MQ缓存系统有什么特色
自定义加速,全网缓存
系统按文件扩展名对其缓存加速,实现全网加速;
用户可以自主添加加速规则。
2.根据带宽智能回源
在即时代理下载回源时,会自动根据带宽状况安排下载任务;
在网络非繁忙时段,系统可发起主动下载,充分利用带宽。
3.相同文件交叉命中
针对不同网站上不同文件名、不同链接的相同文件只缓存一份,消去重复占用磁盘空间问题,交叉命中,提高命中率。
4.智能多机集群调度
自主设计堆叠集群,存储能力和计算能力同步扩展,适应大型运营商使用环境。