天天看點

瞬間幾千次的重複送出,我用 SpringBoot+Redis 扛住了

雲栖号資訊:【 點選檢視更多行業資訊

在這裡您可以找到不同行業的第一手的上雲資訊,還在等什麼,快來!

在實際的開發項目中,一個對外暴露的接口往往會面臨,瞬間大量的重複的請求送出,如果想過濾掉重複請求造成對業務的傷害,那就需要實作幂等!

我們來解釋一下幂等的概念:

任意多次執行所産生的影響均與一次執行的影響相同。按照這個含義,最終的含義就是 對資料庫的影響隻能是一次性的,不能重複處理。

如何保證其幂等性,通常有以下手段:

1、資料庫建立唯一性索引,可以保證最終插入資料庫的隻有一條資料

2、token機制,每次接口請求前先擷取一個token,然後再下次請求的時候在請求的header體中加上這個token,背景進行驗證,如果驗證通過删除token,下次請求再次判斷token

3、悲觀鎖或者樂觀鎖,悲觀鎖可以保證每次for update的時候其他sql無法update資料(在資料庫引擎是innodb的時候,select的條件必須是唯一索引,防止鎖全表)

4、先查詢後判斷,首先通過查詢資料庫是否存在資料,如果存在證明已經請求過了,直接拒絕該請求,如果沒有存在,就證明是第一次進來,直接放行。

redis實作自動幂等的原理圖:

瞬間幾千次的重複送出,我用 SpringBoot+Redis 扛住了

一、搭建redis的服務Api

1、首先是搭建redis伺服器。

2、引入springboot中到的redis的stater,或者Spring封裝的jedis也可以,後面主要用到的api就是它的set方法和exists方法,這裡我們使用springboot的封裝好的redisTemplate

/** * redis工具類 */@ComponentpublicclassRedisService{    @Autowired    privateRedisTemplate redisTemplate;    /**     * 寫入緩存     * @param key     * @param value     * @return     */    publicbooleanset(finalString key, Object value) {        boolean result = false;        try{            ValueOperations<Serializable, Object> operations = redisTemplate.opsForValue();            operations.set(key, value);            result = true;        } catch(Exception e) {            e.printStackTrace();        }        return result;    }    /**     * 寫入緩存設定時效時間     * @param key     * @param value     * @return     */    publicboolean setEx(finalString key, Object value, Long expireTime) {        boolean result = false;        try{            ValueOperations<Serializable, Object> operations = redisTemplate.opsForValue();            operations.set(key, value);            redisTemplate.expire(key, expireTime, TimeUnit.SECONDS);            result = true;        } catch(Exception e) {            e.printStackTrace();        }        return result;    }    /**     * 判斷緩存中是否有對應的value     * @param key     * @return     */    publicboolean exists(finalString key) {        return redisTemplate.hasKey(key);    }    /**     * 讀取緩存     * @param key     * @return     */    publicObjectget(finalString key) {        Object result = null;        ValueOperations<Serializable, Object> operations = redisTemplate.opsForValue();        result = operations.get(key);        return result;    }    /**     * 删除對應的value     * @param key     */    publicboolean remove(finalString key) {        if(exists(key)) {            Booleandelete= redisTemplate.delete(key);            returndelete;        }        returnfalse;    }}           

二、自定義注解AutoIdempotent

自定義一個注解,定義此注解的主要目的是把它添加在需要實作幂等的方法上,凡是某個方法注解了它,都會實作自動幂等。背景利用反射如果掃描到這個注解,就會處理這個方法實作自動幂等,使用元注解ElementType.METHOD表示它隻能放在方法上,etentionPolicy.RUNTIME表示它在運作時。

@Target({ElementType.METHOD})@Retention(RetentionPolicy.RUNTIME)public@interfaceAutoIdempotent{}           

三、token建立和檢驗

1、token服務接口

我們建立一個接口,建立token服務,裡面主要是兩個方法,一個用來建立token,一個用來驗證token。建立token主要産生的是一個字元串,檢驗token的話主要是傳達request對象,為什麼要傳request對象呢?主要作用就是擷取header裡面的token,然後檢驗,通過抛出的Exception來擷取具體的報錯資訊傳回給前端。

publicinterfaceTokenService{    /**     * 建立token     * @return     */    public  String createToken();    /**     * 檢驗token     * @param request     * @return     */    publicboolean checkToken(HttpServletRequest request) throwsException;}           

2、token的服務實作類

token引用了redis服務,建立token采用随機算法工具類生成随機uuid字元串,然後放入到redis中(為了防止資料的備援保留,這裡設定過期時間為10000秒,具體可視業務而定),如果放入成功,最後傳回這個token值。checkToken方法就是從header中擷取token到值(如果header中拿不到,就從paramter中擷取),如若不存在,直接抛出異常。這個異常資訊可以被攔截器捕捉到,然後傳回給前端。

@ServicepublicclassTokenServiceImplimplementsTokenService{    @Autowired    privateRedisService redisService;    /**     * 建立token     *     * @return     */    @Override    publicString createToken() {        String str = RandomUtil.randomUUID();        StrBuilder token = newStrBuilder();        try{            token.append(Constant.Redis.TOKEN_PREFIX).append(str);            redisService.setEx(token.toString(), token.toString(),10000L);            boolean notEmpty = StrUtil.isNotEmpty(token.toString());            if(notEmpty) {                return token.toString();            }        }catch(Exception ex){            ex.printStackTrace();        }        returnnull;    }    /**     * 檢驗token     *     * @param request     * @return     */    @Override    publicboolean checkToken(HttpServletRequest request) throwsException{        String token = request.getHeader(Constant.TOKEN_NAME);        if(StrUtil.isBlank(token)) {// header中不存在token            token = request.getParameter(Constant.TOKEN_NAME);            if(StrUtil.isBlank(token)) {// parameter中也不存在token                thrownewServiceException(Constant.ResponseCode.ILLEGAL_ARGUMENT, 100);            }        }        if(!redisService.exists(token)) {            thrownewServiceException(Constant.ResponseCode.REPETITIVE_OPERATION, 200);        }        boolean remove = redisService.remove(token);        if(!remove) {            thrownewServiceException(Constant.ResponseCode.REPETITIVE_OPERATION, 200);        }        returntrue;    }}           

四、攔截器的配置

1、web配置類,實作WebMvcConfigurerAdapter,主要作用就是添加autoIdempotentInterceptor到配置類中,這樣我們到攔截器才能生效,注意使用@Configuration注解,這樣在容器啟動是時候就可以添加進入context中。

@ConfigurationpublicclassWebConfigurationextendsWebMvcConfigurerAdapter{    @Resource   privateAutoIdempotentInterceptor autoIdempotentInterceptor;    /**     * 添加攔截器     * @param registry     */    @Override    publicvoid addInterceptors(InterceptorRegistry registry) {        registry.addInterceptor(autoIdempotentInterceptor);        super.addInterceptors(registry);    }}           

2、攔截處理器:主要的功能是攔截掃描到AutoIdempotent到注解到方法,然後調用tokenService的checkToken()方法校驗token是否正确,如果捕捉到異常就将異常資訊渲染成json傳回給前端

/** * 攔截器 */@ComponentpublicclassAutoIdempotentInterceptorimplementsHandlerInterceptor{    @Autowired    privateTokenService tokenService;    /**     * 預處理     *     * @param request     * @param response     * @param handler     * @return     * @throws Exception     */    @Override    publicboolean preHandle(HttpServletRequest request, HttpServletResponse response, Object handler) throwsException{        if(!(handler instanceofHandlerMethod)) {            returntrue;        }        HandlerMethod handlerMethod = (HandlerMethod) handler;        Method method = handlerMethod.getMethod();        //被ApiIdempotment标記的掃描        AutoIdempotent methodAnnotation = method.getAnnotation(AutoIdempotent.class);        if(methodAnnotation != null) {            try{                return tokenService.checkToken(request);// 幂等性校驗, 校驗通過則放行, 校驗失敗則抛出異常, 并通過統一異常處理傳回友好提示            }catch(Exception ex){                ResultVo failedResult = ResultVo.getFailedResult(101, ex.getMessage());                writeReturnJson(response, JSONUtil.toJsonStr(failedResult));                throw ex;            }        }        //必須傳回true,否則會被攔截一切請求        returntrue;    }    @Override    publicvoid postHandle(HttpServletRequest request, HttpServletResponse response, Object handler, ModelAndView modelAndView) throwsException{    }    @Override    publicvoid afterCompletion(HttpServletRequest request, HttpServletResponse response, Object handler, Exception ex) throwsException{    }    /**     * 傳回的json值     * @param response     * @param json     * @throws Exception     */    privatevoid writeReturnJson(HttpServletResponse response, String json) throwsException{        PrintWriter writer = null;        response.setCharacterEncoding(UTF-8);        response.setContentType(text/html; charset=utf-8);        try{            writer = response.getWriter();            writer.print(json);        } catch(IOException e) {        } finally{            if(writer != null)                writer.close();        }    }}           

五、測試用例

1、模拟業務請求類

首先我們需要通過/get/token路徑通過getToken()方法去擷取具體的token,然後我們調用testIdempotence方法,這個方法上面注解了@AutoIdempotent,攔截器會攔截所有的請求,當判斷到處理的方法上面有該注解的時候,就會調用TokenService中的checkToken()方法,如果捕獲到異常會将異常抛出調用者,下面我們來模拟請求一下:

@RestControllerpublicclassBusinessController{    @Resource    privateTokenService tokenService;    @Resource    privateTestService testService;    @PostMapping(/get/token)    publicString  getToken(){        String token = tokenService.createToken();        if(StrUtil.isNotEmpty(token)) {            ResultVo resultVo = newResultVo();            resultVo.setCode(Constant.code_success);            resultVo.setMessage(Constant.SUCCESS);            resultVo.setData(token);            returnJSONUtil.toJsonStr(resultVo);        }        returnStrUtil.EMPTY;    }    @AutoIdempotent    @PostMapping(/test/Idempotence)    publicString testIdempotence() {        String businessResult = testService.testIdempotence();        if(StrUtil.isNotEmpty(businessResult)) {            ResultVo successResult = ResultVo.getSuccessResult(businessResult);            returnJSONUtil.toJsonStr(successResult);        }        returnStrUtil.EMPTY;    }}           

2、使用postman請求

首先通路get/token路徑擷取到具體到token:

瞬間幾千次的重複送出,我用 SpringBoot+Redis 扛住了

利用擷取到到token,然後放到具體請求到header中,可以看到第一次請求成功,接着我們請求第二次:

瞬間幾千次的重複送出,我用 SpringBoot+Redis 扛住了

第二次請求,傳回到是重複性操作,可見重複性驗證通過,再多次請求到時候我們隻讓其第一次成功,第二次就是失敗:

瞬間幾千次的重複送出,我用 SpringBoot+Redis 扛住了

六、總結

本篇部落格介紹了使用springboot和攔截器、redis來優雅的實作接口幂等,對于幂等在實際的開發過程中是十分重要的,因為一個接口可能會被無數的用戶端調用,如何保證其不影響背景的業務處理,如何保證其隻影響資料一次是非常重要的,它可以防止産生髒資料或者亂資料,也可以減少并發量,實乃十分有益的一件事。而傳統的做法是每次判斷資料,這種做法不夠智能化和自動化,比較麻煩。而今天的這種自動化處理也可以提升程式的伸縮性。

【雲栖号線上課堂】每天都有産品技術專家分享!

課程位址:

https://yqh.aliyun.com/zhibo

立即加入社群,與專家面對面,及時了解課程最新動态!

【雲栖号線上課堂 社群】

https://c.tb.cn/F3.Z8gvnK

原文釋出時間:2020-03-24

本文作者:慕容千語

本文來自:“

網際網路架構師 微信公衆号

”,了解相關資訊可以關注“

網際網路架構師