使用 Spark-MD5.js 计算本地文件 MD5

2023-11-25 03:36:09

Spark-MD5.js 是一个轻量级的 JavaScript 库，可用于通过流式处理计算文件的 MD5 哈希值。与其他需要加载整个文件到内存中的库不同，Spark-MD5.js 可以处理大型文件，而无需占用大量内存。这使得它非常适合需要快速计算大文件 MD5 哈希值的情况，例如文件分片上传或数据完整性检查。

安装和使用

要在您的项目中安装 Spark-MD5.js，可以通过 npm 或 CDN 使用以下命令：

npm install spark-md5 --save

或

<script src="https://unpkg.com/spark-md5@3.0.4/spark-md5.min.js"></script>

安装后，您可以使用以下代码计算本地文件 MD5 哈希值：

const spark = new SparkMD5.ArrayBuffer();
const file = new File([fileContent], 'file.txt', {type: 'text/plain'});

const reader = new FileReader();
reader.onload = () => {
  spark.append(reader.result);
  const md5 = spark.end();
  console.log(`MD5 哈希值：${md5}`);
};

reader.readAsArrayBuffer(file);

计算文件分片 MD5

当使用文件分片上传时，计算每个分片的 MD5 哈希值非常重要。这可以确保分片在传输过程中未损坏，并且可以由服务器验证。

const spark = new SparkMD5.ArrayBuffer();
const chunkSize = 1024 * 1024; // 1MB

const reader = new FileReader();
reader.onload = () => {
  spark.append(reader.result);

  // 如果分片大小小于文件大小，继续读取下一个分片
  if (reader.result.byteLength < file.size) {
    reader.readAsArrayBuffer(file.slice(reader.result.byteLength, reader.result.byteLength + chunkSize));
  } else {
    const md5 = spark.end();
    console.log(`MD5 哈希值：${md5}`);
  }
};

reader.readAsArrayBuffer(file.slice(0, chunkSize));