用python 正确计算大文件md5 值

import hashlib

def md5_for_file(f, block_size=2**20):
    md5 = hashlib.md5()
    while True:
        data = f.read(block_size)
        if not data:
            break
        md5.update(data)
    return md5.digest()

def md5sum(filename, blocksize=65536):
    hash = hashlib.md5()
    with open(filename, "r+b") as f:
        for block in iter(lambda: f.read(blocksize), ""):
            hash.update(block)
    return hash.hexdigest()

import os
from Crypto.Hash import MD5

def get_file_checksum(filename):
    h = MD5.new()
    chunk_size = 8192
    with open(filename, 'rb') as f:
        while True:
            chunk = f.read(chunk_size)
            if len(chunk) == 0:
                break
            h.update(chunk)
    return h.hexdigest()

发表第一条评论！

提交

相关推荐

• golang 计算大文件md5

  以前介绍过用python 计算大文件的md5 值，这里将介绍使用 golang 计算大文件md5

  golang md5 文件 计算
• python 终端 print 正确显示中文

  当一个py 文件里有print中文时，在终端运行时，会输出乱码

  print python 中文 终端 正确
• python获取当前运行文件路径的方法

  下面是python获取当前运行文件路径的方法

  python 路径 获取 文件 运行
• python 标准库读写CSV 文件

  CSV 是（Comma Separated Values 逗号分隔值）的英文缩写，通常都是纯文本文件。这里介绍使用python 标准库读写csv 文件的方法。

  CSV python 读写 文件 标准
• python 判断当前时间是否在某两个时间点之间

  python 判断当前时间是否在两个时间点之间

  python 时间 判断 当前 是否
• SAE python 使用send_mail 应注意的小问题

  SAE python 使用 send_mail 应注意的小问题，不小心就会发送失败。

  send mail SAE python 注意
• go 和 python 解析 markdown 速度比较

  最近想把markdown 格式引入项目，首先来了解一下golang 的解析速度，以及与python 解析的对比。

  markdown python 解析 速度 比较
• 在SAE python上使用PIL image 获取较高质量图片的方法

  最近在做小脚丫 https://bbttxs.com 应用，在使用 PIL image 处理用户上传的图片做头像时出现一些质量的问题，处理后的头像100x100，太差了。

  python SAE PIL image 高质量
• 小试python 最快的web 框架: japronto

  japronto 是基于 uvloop、 picohttpparser 性能超赞，下面是官方的性能比较：

  小试 python japronto web 最快
• 用python 实现XOR 加密解密的方法

  这篇文章介绍 XOR 加密解密及 python 实现方法

  XOR python 解密 加密 方法