詳解java解決分布式環(huán)境中高并發(fā)環(huán)境下數(shù)據(jù)插入重復(fù)問題
java 解決分布式環(huán)境中 高并發(fā)環(huán)境下數(shù)據(jù)插入重復(fù)問題
前言
原因:服務(wù)器同時接受到的重復(fù)請求
現(xiàn)象:數(shù)據(jù)重復(fù)插入 / 修改操作
解決方案 : 分布式鎖
對請求報文生成 摘要信息 + redis 實現(xiàn)分布式鎖
工具類
分布式鎖的應(yīng)用
package com.nursling.web.filter.context; import com.nursling.nosql.redis.RedisUtil; import com.nursling.sign.SignType; import com.nursling.sign.SignUtil; import redis.clients.jedis.Jedis; import javax.servlet.ServletRequest; import javax.servlet.http.HttpServletRequest; import java.util.HashMap; import java.util.Map; /** * 并發(fā)攔截 * 高并發(fā)下 過濾掉 相同請求的工具 * @author 楊. * */ public class ContextLJ { private static final Integer JD = 0; /** * 上鎖 使用redis 為分布式項目 加鎖 * @param sign * @param tiD * @return * @throws Exception */ public static boolean lock(String sign, String tiD) { synchronized (JD) { // 加鎖 Jedis jedis = RedisUtil.getJedis(); String uTid = jedis.get(sign); if (uTid == null) { jedis.set(sign, tiD); jedis.expire(sign, 36); return true; } return false; } } /** * 鎖驗證 * @param sign * @param tiD * @return */ public static boolean checklock(String sign, String tiD){ Jedis jedis = RedisUtil.getJedis(); String uTid = jedis.get(sign); return tiD.equals(uTid); } /** * 去掉鎖 * @param sign * @param tiD */ public static void clent (String sign, String tiD){ if (checklock(sign, tiD)) { Jedis jedis = RedisUtil.getJedis(); jedis.del(sign); } } /** * 獲取摘要 * @param request * @return */ public static String getSign(ServletRequest request){ // 此工具是將 request中的請求內(nèi)容 拼裝成 key=value&key=value2 的形式 源碼在線面 Map<String, String> map = SignUtil.getRequstMap((HttpServletRequest) request); String sign = null; try { // 這里使用md5方法生成摘要 SignUtil.getRequstMap 方法源碼就不貼了 sign = SignUtil.buildRequest(map, SignType.MD5); } catch (Exception e) { e.printStackTrace(); } return sign; } }
public static Map<String, String> getRequstMap(HttpServletRequest req){ Map<String,String> params = new HashMap<String,String>(); Map<String, String[]> requestParams = req.getParameterMap(); for (Iterator<String> iter = requestParams.keySet().iterator(); iter.hasNext();) { String name = (String) iter.next(); String[] values = (String[]) requestParams.get(name); String valueStr = ""; for (int i = 0; i < values.length; i++) { valueStr = (i == values.length - 1) ? valueStr + values[i] : valueStr + values[i] + ","; } params.put(name, valueStr); } return params; }
下面是過濾器代碼
對分布式鎖的利用
package com.nursling.web.filter.transaction; import com.google.gson.Gson; import com.nursling.common.RandomUtil; import com.nursling.dao.util.TransactionUtils; import com.nursling.model.ApiResult; import com.nursling.model.ApiRtnCode; import com.nursling.web.filter.context.ContextLJ; import org.apache.log4j.Logger; import javax.servlet.*; import javax.servlet.http.HttpServletResponse; import java.io.IOException; /** * 對事物進(jìn)行控制 并且 避免接口 直接報漏異常信息 * 并且過濾頻繁請求 * Created by yangchao on 2016/11/4. */ public class TransactionFilter implements Filter { Logger log = Logger.getLogger(this.getClass()); @Override public void init(FilterConfig filterConfig) throws ServletException { } @Override public void doFilter(ServletRequest request, ServletResponse myResp, FilterChain chain) throws IOException, ServletException { String sign = "sign_" + ContextLJ.getSign(request); // 生成摘要 String tiD = RandomUtil.getRandomString(3) + "_" + Thread.currentThread().getId(); // 當(dāng)前線程的身份 try { if (!ContextLJ.lock(sign, tiD)) { log.warn("放棄相同 并發(fā)請求" + sign); frequentlyError(myResp); return; } if (!ContextLJ.checklock(sign, tiD)) { log.warn("加鎖驗證失敗 " + sign + " " + tiD); frequentlyError(myResp); return; } chain.doFilter(request, myResp); // 放行 } catch (Exception e) { // 捕獲到異常 進(jìn)行異常過濾 log.error("", e); retrunErrorInfo(myResp); } finally { ContextLJ.clent(sign, tiD); } } /** * 頻繁請求 * @param myResp */ private void frequentlyError(ServletResponse myResp) throws IOException { ApiResult<Object> re = new ApiResult<>(); ((HttpServletResponse) myResp).setHeader("Content-type", "text/html;charset=UTF-8"); re.setMsg("稍安勿躁,不要頻繁請求"); re.setCode(ApiRtnCode.API_VERIFY_FAIL); myResp.getWriter().write(new Gson().toJson(re)); } /** * 返回異常信息 * @param myResp */ private void retrunErrorInfo(ServletResponse myResp) throws IOException { ApiResult<Object> re = new ApiResult<>(); re.setMsg("server error"); // 這里不必理會 re.setCode(ApiRtnCode.SERVICE_ERROR); myResp.getWriter().write(new Gson().toJson(re)); } @Override public void destroy() { } }
程序本身應(yīng)該還有需要完善的地方, 不過經(jīng)過一段時間的測試。 這個解決方案還是比較可靠的 并發(fā)測試 + 生產(chǎn)環(huán)境上 也沒有再出現(xiàn) 重復(fù)請求的問題
非極端情況下 還是很可靠的
以上所述是小編給大家介紹的java解決分布式環(huán)境中高并發(fā)環(huán)境下數(shù)據(jù)插入重復(fù)問題詳解整合,希望對大家有所幫助,如果大家有任何疑問請給我留言,小編會及時回復(fù)大家的。在此也非常感謝大家對腳本之家網(wǎng)站的支持!
相關(guān)文章
淺談SpringMVC HandlerInterceptor詭異問題排查
這篇文章主要介紹了淺談SpringMVC HandlerInterceptor詭異問題排查,小編覺得挺不錯的,現(xiàn)在分享給大家,也給大家做個參考。一起跟隨小編過來看看吧2019-05-05java數(shù)據(jù)結(jié)構(gòu)圖論霍夫曼樹及其編碼示例詳解
這篇文章主要為大家介紹了java數(shù)據(jù)結(jié)構(gòu)圖論霍夫曼樹及其編碼示例詳解,有需要的朋友可以借鑒參考下,希望能夠有所幫助,祝大家多多進(jìn)步早日升職加薪2021-11-11Java8 HashMap鍵與Comparable接口小結(jié)
這篇文章主要介紹了Java8 HashMap鍵與Comparable接口小結(jié),具有很好的參考價值,希望對大家有所幫助。如有錯誤或未考慮完全的地方,望不吝賜教2022-01-01mybatis實現(xiàn)增刪改查_動力節(jié)點Java學(xué)院整理
本文通過實例代碼給大家介紹了mybatis實現(xiàn)增刪改查功能,非常不錯,具有參考借鑒價值,需要的朋友參考下吧2017-09-09