Java計(jì)算文件MD5值幾種實(shí)現(xiàn)方式(支持大文件)
在 Java 中計(jì)算文件的 MD5 值,特別是對(duì)于大文件,需要使用流式處理以避免內(nèi)存溢出。以下是幾種實(shí)現(xiàn)方式:
方法1:使用 MessageDigest 和 FileInputStream(標(biāo)準(zhǔn)方式)
import java.io.File;
import java.io.FileInputStream;
import java.io.IOException;
import java.security.MessageDigest;
import java.security.NoSuchAlgorithmException;
public class FileMD5Calculator {
public static String calculateMD5(File file) throws IOException, NoSuchAlgorithmException {
MessageDigest md = MessageDigest.getInstance("MD5");
try (FileInputStream fis = new FileInputStream(file)) {
byte[] buffer = new byte[8192]; // 8KB緩沖區(qū)
int length;
while ((length = fis.read(buffer)) != -1) {
md.update(buffer, 0, length);
}
}
return bytesToHex(md.digest());
}
private static String bytesToHex(byte[] bytes) {
StringBuilder hexString = new StringBuilder();
for (byte b : bytes) {
String hex = Integer.toHexString(0xff & b);
if (hex.length() == 1) {
hexString.append('0');
}
hexString.append(hex);
}
return hexString.toString();
}
public static void main(String[] args) {
try {
File file = new File("large_file.zip");
String md5 = calculateMD5(file);
System.out.println("MD5: " + md5);
} catch (Exception e) {
e.printStackTrace();
}
}
}方法2:使用 Apache Commons Codec(簡(jiǎn)化版)
如果你項(xiàng)目中已經(jīng)使用了 Apache Commons Codec,可以使用更簡(jiǎn)潔的方式:
import org.apache.commons.codec.digest.DigestUtils;
import java.io.File;
import java.io.FileInputStream;
import java.io.IOException;
public class FileMD5Calculator {
public static String calculateMD5(File file) throws IOException {
try (FileInputStream fis = new FileInputStream(file)) {
return DigestUtils.md5Hex(fis);
}
}
public static void main(String[] args) {
try {
File file = new File("large_file.zip");
String md5 = calculateMD5(file);
System.out.println("MD5: " + md5);
} catch (Exception e) {
e.printStackTrace();
}
}
}方法3:使用 Java NIO(高性能版)
import java.io.IOException;
import java.nio.ByteBuffer;
import java.nio.channels.FileChannel;
import java.nio.file.Path;
import java.nio.file.StandardOpenOption;
import java.security.MessageDigest;
import java.security.NoSuchAlgorithmException;
public class FileMD5Calculator {
public static String calculateMD5(Path path) throws IOException, NoSuchAlgorithmException {
MessageDigest md = MessageDigest.getInstance("MD5");
try (FileChannel channel = FileChannel.open(path, StandardOpenOption.READ)) {
ByteBuffer buffer = ByteBuffer.allocateDirect(8192); // 直接緩沖區(qū)
while (channel.read(buffer) != -1) {
buffer.flip();
md.update(buffer);
buffer.clear();
}
}
return bytesToHex(md.digest());
}
private static String bytesToHex(byte[] bytes) {
StringBuilder hexString = new StringBuilder();
for (byte b : bytes) {
String hex = Integer.toHexString(0xff & b);
if (hex.length() == 1) {
hexString.append('0');
}
hexString.append(hex);
}
return hexString.toString();
}
public static void main(String[] args) {
try {
Path path = Path.of("large_file.zip");
String md5 = calculateMD5(path);
System.out.println("MD5: " + md5);
} catch (Exception e) {
e.printStackTrace();
}
}
}方法4:使用 Guava 庫(kù)
如果你使用 Google Guava 庫(kù):
import com.google.common.hash.Hashing;
import com.google.common.io.Files;
import java.io.File;
import java.io.IOException;
public class FileMD5Calculator {
public static String calculateMD5(File file) throws IOException {
return Files.hash(file, Hashing.md5()).toString();
}
public static void main(String[] args) {
try {
File file = new File("large_file.zip");
String md5 = calculateMD5(file);
System.out.println("MD5: " + md5);
} catch (Exception e) {
e.printStackTrace();
}
}
}性能比較
標(biāo)準(zhǔn)方式(方法1):適用于大多數(shù)場(chǎng)景,性能良好
Apache Commons Codec(方法2):代碼最簡(jiǎn)潔,性能稍遜于標(biāo)準(zhǔn)方式
NIO 方式(方法3):處理大文件性能最佳,但代碼稍復(fù)雜
Guava 方式(方法4):簡(jiǎn)潔但需要引入額外依賴
注意事項(xiàng)
緩沖區(qū)大小:8KB(8192字節(jié))是一個(gè)經(jīng)驗(yàn)值,可以根據(jù)實(shí)際情況調(diào)整
大文件處理:所有方法都支持大文件,因?yàn)樗鼈兌际橇魇教幚?/p>
異常處理:需要處理 IOException 和 NoSuchAlgorithmException
文件鎖定:計(jì)算過程中文件會(huì)被鎖定,無法被其他程序修改
MD5 安全性:MD5 已不推薦用于安全敏感場(chǎng)景,僅適用于校驗(yàn)文件完整性
選擇哪種方法取決于你的項(xiàng)目環(huán)境和需求。如果項(xiàng)目已經(jīng)使用了 Apache Commons Codec 或 Guava,使用相應(yīng)的方法會(huì)更方便;否則,標(biāo)準(zhǔn)方式或 NIO 方式都是不錯(cuò)的選擇。
總結(jié)
到此這篇關(guān)于Java計(jì)算文件MD5值幾種實(shí)現(xiàn)方式(支持大文件)的文章就介紹到這了,更多相關(guān)Java計(jì)算文件MD5值內(nèi)容請(qǐng)搜索腳本之家以前的文章或繼續(xù)瀏覽下面的相關(guān)文章希望大家以后多多支持腳本之家!
相關(guān)文章
在Map中實(shí)現(xiàn)key唯一不重復(fù)操作
這篇文章主要介紹了在Map中實(shí)現(xiàn)key唯一不重復(fù)操作,具有很好的參考價(jià)值,希望對(duì)大家有所幫助。如有錯(cuò)誤或未考慮完全的地方,望不吝賜教2021-08-08
如何修改logback.xml配置文件在resource以外的位置
這篇文章主要介紹了如何修改logback.xml配置文件在resource以外的位置,具有很好的參考價(jià)值,希望對(duì)大家有所幫助。一起跟隨小編過來看看吧2021-02-02
如何在 Spring Boot 中配置和使用 CSRF 保護(hù)
CSRF是一種網(wǎng)絡(luò)攻擊,它利用已認(rèn)證用戶的身份來執(zhí)行未經(jīng)用戶同意的操作,Spring Boot 提供了內(nèi)置的 CSRF 保護(hù)機(jī)制,可以幫助您防止這種類型的攻擊,這篇文章主要介紹了Spring?Boot?中的?CSRF?保護(hù)配置的使用方法,需要的朋友可以參考下2023-09-09
SWT(JFace) 體驗(yàn)之FontRegistry
測(cè)試代碼如下:2009-06-06
Maven環(huán)境安裝配置和新建項(xiàng)目介紹
這篇文章介紹了Maven環(huán)境安裝配置和新建項(xiàng)目介紹,對(duì)大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值,需要的朋友們下面隨著小編來一起學(xué)習(xí)學(xué)習(xí)吧2021-12-12
Java中JDBC事務(wù)與JTA分布式事務(wù)總結(jié)與區(qū)別
Java事務(wù)的類型有三種:JDBC事務(wù)、JTA(Java Transaction API)事務(wù)、容器事務(wù),本文詳細(xì)介紹了JDBC事務(wù)與JTA分布式事務(wù),有需要的可以了解一下。2016-11-11
Springboot+Mybatis-plus不使用SQL語句進(jìn)行多表添加操作及問題小結(jié)
這篇文章主要介紹了在Springboot+Mybatis-plus不使用SQL語句進(jìn)行多表添加操作,本文給大家介紹的非常詳細(xì),對(duì)大家的學(xué)習(xí)或工作具有一定的參考借鑒價(jià)值,需要的朋友可以參考下2023-04-04
使用webmagic實(shí)現(xiàn)爬蟲程序示例分享
這篇文章主要介紹了使用webmagic實(shí)現(xiàn)爬蟲程序示例,需要的朋友可以參考下2014-04-04

