一、好言
事實(shí)是這樣，假如你不懂我，那錯的永遠(yuǎn)是我，不必驚訝，連解釋都是多余。
二、背景
由于消費(fèi)MQ，會存在有就消費(fèi)，可能會有并發(fā)的存在，在后臺引起的問題，所以需要多MQ的消費(fèi)做處理 ，然后我們將MQ消息消費(fèi)后，丟進(jìn)redsi,然后從開啟線程，從redis中取數(shù)據(jù)進(jìn)行消費(fèi)，下面給出的是set和隊(duì)列的兩種方式。
三、內(nèi)容
3.1 SET的處理方式
@PostConstruct
public void dealTask() throws Exception {
ScheduledExecutorService es = Executors.newScheduledThreadPool(100);
es.scheduleAtFixedRate(new Runnable() {
@Override
public void run() {
logger.info("================");
Long flag = stringRedisTemplate.opsForValue().increment(RedisConstant.TASK_SWITCH_POWER,1);
if(flag == 1 ){//這個標(biāo)識用來控制集群，每次只有等于1的進(jìn)入，取完數(shù)據(jù)或者沒有數(shù)據(jù)都需要將該
值重新置為0
ZSetOperations<String, VO> zSetOperations = objectredisTemplate.opsForZSet();
Long count = zSetOperations.size(RedisConstant.NAME_TASK_KEY);
if(count > 0){
Set<VO> zsetRangeData = zSetOperations.range(RedisConstant.NAME_TASK_KEY,0L,
count - 1);
zSetOperations.remove(RedisConstant.NAME_TASK_KEY,
zsetRangeData.toArray());
stringRedisTemplate.opsForValue().set(RedisConstant.TASK_SWITCH_POWER, "0");
Iterator iterable = zsetRangeData.iterator();
while (iterable.hasNext()){
try {
//TODO處理業(yè)務(wù)
}catch (Exception e){
//出異常在把該信息添加進(jìn)去set
zSetOperations.add(RedisConstant.NAME_TASK_KEY,
ZSetUtil.converToSet(vo));
}
}
}else{
stringRedisTemplate.opsForValue().set(RedisConstant.TASK_SWITCH_POWER, "0");
}
}
}
},0,1, TimeUnit.SECONDS);
}
接收端接收消息然后丟入redis，當(dāng)然你可以是指redis大小數(shù)量，超過上限則可以直接丟棄
ZSetOperations<String, VO> zSet = redisTemplate.opsForZSet();
if(zSet.size(RedisConstant.NAME_TASK_KEY) + 1 >=
MAX_CHANNEL_MQ_TASK_SIZE){
logger.info("到達(dá)上限,丟棄消息 = "+messgage);
return;
}
zSet.add(RedisConstant.NAME_TASK_KEY, ZSetUtil.converToSet(messgage));
ZSetUtil.java
public static Set<ZSetOperations.TypedTuple<VO>> converToSet(VO data){
Set<ZSetOperations.TypedTuple<VO>> set = new HashSet<>(1);
ZSetOperations.TypedTuple typedTuple;
Long score = System.currentTimeMillis();
typedTuple = new DefaultTypedTuple(data, score.doubleValue());
set.add(typedTuple);
return set;
}
3.2、隊(duì)列方式
隊(duì)列方式先push然后pop出來，每次處理一條數(shù)據(jù)。
消息接收端
ListOperations listOperations = redisTemplate.opsForList();
redisTemplate.opsForList().leftPush(RedisConstant.NAME_TASK_KEY,msg);
開啟定時任務(wù)從redis中取數(shù)據(jù)
@PostConstruct
public void dealNameTask(){
ScheduledExecutorService es = Executors.newScheduledThreadPool(10);
es.scheduleAtFixedRate(new Runnable() {
@Override
public void run() {
ListOperations listOperations = objectredisTemplate.opsForList();
VO vo = (VO)listOperations.rightPop(RedisConstant.NAME_TASK_KEY);
try {
if(null != vo){
//Todo處理業(yè)務(wù)
}else{
Thread.sleep(1000);
}
}catch (Exception e){
//出現(xiàn)異常在push進(jìn)redis
listOperations.leftPush(RedisConstant.NAME_TASK_ZSET_KEY,vo);
}
}
},0,1, TimeUnit.SECONDS);
}
相對來說，push會簡單多了，只是set可以排序，并且也可以按照順序來取。
