詳解java解決分布式環(huán)境中高并發(fā)環(huán)境下數(shù)據(jù)插入重復(fù)問題
java 解決分布式環(huán)境中 高并發(fā)環(huán)境下數(shù)據(jù)插入重復(fù)問題
前言
原因:服務(wù)器同時接受到的重復(fù)請求
現(xiàn)象:數(shù)據(jù)重復(fù)插入 / 修改操作
解決方案 : 分布式鎖
對請求報文生成 摘要信息 + redis 實現(xiàn)分布式鎖
工具類
分布式鎖的應(yīng)用
package com.nursling.web.filter.context;
import com.nursling.nosql.redis.RedisUtil;
import com.nursling.sign.SignType;
import com.nursling.sign.SignUtil;
import redis.clients.jedis.Jedis;
import javax.servlet.ServletRequest;
import javax.servlet.http.HttpServletRequest;
import java.util.HashMap;
import java.util.Map;
/**
* 并發(fā)攔截
* 高并發(fā)下 過濾掉 相同請求的工具
* @author 楊.
*
*/
public class ContextLJ {
private static final Integer JD = 0;
/**
* 上鎖 使用redis 為分布式項目 加鎖
* @param sign
* @param tiD
* @return
* @throws Exception
*/
public static boolean lock(String sign, String tiD) {
synchronized (JD) { // 加鎖
Jedis jedis = RedisUtil.getJedis();
String uTid = jedis.get(sign);
if (uTid == null) {
jedis.set(sign, tiD);
jedis.expire(sign, 36);
return true;
}
return false;
}
}
/**
* 鎖驗證
* @param sign
* @param tiD
* @return
*/
public static boolean checklock(String sign, String tiD){
Jedis jedis = RedisUtil.getJedis();
String uTid = jedis.get(sign);
return tiD.equals(uTid);
}
/**
* 去掉鎖
* @param sign
* @param tiD
*/
public static void clent (String sign, String tiD){
if (checklock(sign, tiD)) {
Jedis jedis = RedisUtil.getJedis();
jedis.del(sign);
}
}
/**
* 獲取摘要
* @param request
* @return
*/
public static String getSign(ServletRequest request){
// 此工具是將 request中的請求內(nèi)容 拼裝成 key=value&key=value2 的形式 源碼在線面
Map<String, String> map = SignUtil.getRequstMap((HttpServletRequest) request);
String sign = null;
try {
// 這里使用md5方法生成摘要 SignUtil.getRequstMap 方法源碼就不貼了
sign = SignUtil.buildRequest(map, SignType.MD5);
} catch (Exception e) {
e.printStackTrace();
}
return sign;
}
}
public static Map<String, String> getRequstMap(HttpServletRequest req){
Map<String,String> params = new HashMap<String,String>();
Map<String, String[]> requestParams = req.getParameterMap();
for (Iterator<String> iter = requestParams.keySet().iterator(); iter.hasNext();) {
String name = (String) iter.next();
String[] values = (String[]) requestParams.get(name);
String valueStr = "";
for (int i = 0; i < values.length; i++) {
valueStr = (i == values.length - 1) ? valueStr + values[i]
: valueStr + values[i] + ",";
}
params.put(name, valueStr);
}
return params;
}
下面是過濾器代碼
對分布式鎖的利用
package com.nursling.web.filter.transaction;
import com.google.gson.Gson;
import com.nursling.common.RandomUtil;
import com.nursling.dao.util.TransactionUtils;
import com.nursling.model.ApiResult;
import com.nursling.model.ApiRtnCode;
import com.nursling.web.filter.context.ContextLJ;
import org.apache.log4j.Logger;
import javax.servlet.*;
import javax.servlet.http.HttpServletResponse;
import java.io.IOException;
/**
* 對事物進行控制 并且 避免接口 直接報漏異常信息
* 并且過濾頻繁請求
* Created by yangchao on 2016/11/4.
*/
public class TransactionFilter implements Filter {
Logger log = Logger.getLogger(this.getClass());
@Override
public void init(FilterConfig filterConfig) throws ServletException {
}
@Override
public void doFilter(ServletRequest request, ServletResponse myResp, FilterChain chain) throws IOException, ServletException {
String sign = "sign_" + ContextLJ.getSign(request); // 生成摘要
String tiD = RandomUtil.getRandomString(3) + "_" + Thread.currentThread().getId(); // 當前線程的身份
try {
if (!ContextLJ.lock(sign, tiD)) {
log.warn("放棄相同 并發(fā)請求" + sign);
frequentlyError(myResp);
return;
}
if (!ContextLJ.checklock(sign, tiD)) {
log.warn("加鎖驗證失敗 " + sign + " " + tiD);
frequentlyError(myResp);
return;
}
chain.doFilter(request, myResp); // 放行
} catch (Exception e) { // 捕獲到異常 進行異常過濾
log.error("", e);
retrunErrorInfo(myResp);
} finally {
ContextLJ.clent(sign, tiD);
}
}
/**
* 頻繁請求
* @param myResp
*/
private void frequentlyError(ServletResponse myResp) throws IOException {
ApiResult<Object> re = new ApiResult<>();
((HttpServletResponse) myResp).setHeader("Content-type", "text/html;charset=UTF-8");
re.setMsg("稍安勿躁,不要頻繁請求");
re.setCode(ApiRtnCode.API_VERIFY_FAIL);
myResp.getWriter().write(new Gson().toJson(re));
}
/**
* 返回異常信息
* @param myResp
*/
private void retrunErrorInfo(ServletResponse myResp) throws IOException {
ApiResult<Object> re = new ApiResult<>();
re.setMsg("server error");
// 這里不必理會
re.setCode(ApiRtnCode.SERVICE_ERROR);
myResp.getWriter().write(new Gson().toJson(re));
}
@Override
public void destroy() {
}
}
程序本身應(yīng)該還有需要完善的地方, 不過經(jīng)過一段時間的測試。 這個解決方案還是比較可靠的 并發(fā)測試 + 生產(chǎn)環(huán)境上 也沒有再出現(xiàn) 重復(fù)請求的問題
非極端情況下 還是很可靠的
以上所述是小編給大家介紹的java解決分布式環(huán)境中高并發(fā)環(huán)境下數(shù)據(jù)插入重復(fù)問題詳解整合,希望對大家有所幫助,如果大家有任何疑問請給我留言,小編會及時回復(fù)大家的。在此也非常感謝大家對腳本之家網(wǎng)站的支持!
相關(guān)文章
淺談SpringMVC HandlerInterceptor詭異問題排查
這篇文章主要介紹了淺談SpringMVC HandlerInterceptor詭異問題排查,小編覺得挺不錯的,現(xiàn)在分享給大家,也給大家做個參考。一起跟隨小編過來看看吧2019-05-05
java數(shù)據(jù)結(jié)構(gòu)圖論霍夫曼樹及其編碼示例詳解
這篇文章主要為大家介紹了java數(shù)據(jù)結(jié)構(gòu)圖論霍夫曼樹及其編碼示例詳解,有需要的朋友可以借鑒參考下,希望能夠有所幫助,祝大家多多進步早日升職加薪2021-11-11
Java8 HashMap鍵與Comparable接口小結(jié)
這篇文章主要介紹了Java8 HashMap鍵與Comparable接口小結(jié),具有很好的參考價值,希望對大家有所幫助。如有錯誤或未考慮完全的地方,望不吝賜教2022-01-01
mybatis實現(xiàn)增刪改查_動力節(jié)點Java學(xué)院整理
本文通過實例代碼給大家介紹了mybatis實現(xiàn)增刪改查功能,非常不錯,具有參考借鑒價值,需要的朋友參考下吧2017-09-09

