百度360必应搜狗淘宝本站头条
当前位置:网站首页 > 技术资源 > 正文

python实现文件的分割与合并(python分割文件名)

off999 2024-10-13 04:12 20 浏览 0 评论

#编程# ?#python#?

有时我们会遇到需要将文件进行分割的情况,例如网盘对单个文件大小的限制。有些软件可以实现这一点,如7-Zip的分卷压缩,但对硬盘空间有一定要求,因为软件会将所有分块都输出出来,这就要求硬盘可用空间要大于文件大小,如文件大小为100G,则要求硬盘至少有100G可用空间。有没有一种方法只输出其中一个分块呢?利用python可以很容易地实现这一点。

特点:

  • 可以指定输出位置、分块大小和读取缓冲区大小;
  • 可以通过输入编号的方式来指定输出分块;
  • 文件大小用合适的单位显示;
  • 无第三方库的依赖。

文件分割的代码:

import os
import sys

# 指定文件名、输出位置、分块大小和读取缓冲区大小
filename = sys.argv[1]
despath = 'D:\\'
block_size = 1024 * 1024 * 1024 * 6
buffersize = 1024 * 1024 * 100

# 文件大小的单位处理
def unit(a):
    if a < 1024:
        return str(a) + "B"
    elif 1024 <= a < 1048576:
        b = a / 1024
        b = "%.2f" % b
        return str(b) + "KB"
    elif 1048576 <= a < 1073741824:
        b = a / 1048576
        b = "%.2f" % b
        return str(b) + "MB"
    elif a >= 1073741824:
        b = a / 1073741824
        b = "%.2f" % b
        return str(b) + "GB"


# 获取文件大小
file_size = os.path.getsize(filename)

# 无需分块的情况
if file_size < block_size:
    print("文件大小小于分块大小,无需分块!")
    exit()

# 计算分块数量
num_blocks = file_size // block_size
if file_size % block_size != 0:
    num_blocks += 1

# 输出相关信息
print("要分割的文件:%s" % filename)
print("输出位置:%s" % despath)
print("文件大小:%s" % unit(file_size))
print("分块大小:%s" % unit(block_size))

# 由用户指定提取哪一个分块
block_num = int(input("请输入要提取的分块编号(1 - %d):" % num_blocks))

# 检查输入是否合法
if block_num < 1 or block_num > num_blocks:
    print("分块编号输入错误!")
    exit()

# 提取分块
with open(filename, 'rb') as f:
    # 计算起始位置和读取长度
    start = (block_num - 1) * block_size
    end = min(file_size, start + block_size)
    length = end - start

    # 移动文件指针到起始位置
    f.seek(start)
    # 目标文件的文件名格式
    desname = despath + os.path.split(filename)[1] + '.%03d' % block_num
    # 若分片大小小于缓冲区则直接读取
    if length < buffersize:
        block = f.read(length)
        # 若目标文件存在则删除重建,不存在则直接建立
        if os.path.exists(desname):
            os.remove(desname)
        with open(desname, 'ab+') as g:
            g.write(block)
    # 若分片大小大于缓冲区则用buffersize多次取length
    else:
        # a为取的次数
        a = length // buffersize
        # tail为剩余部分,为0时不存在,否则存在
        tail = length % buffersize
        if os.path.exists(desname):
            os.remove(desname)
        g = open(desname, 'ab+')
        for i in range(a):
            q = f.read(buffersize)
            g.write(q)
        if tail != 0:
            q = f.read(tail)
            g.write(q)
        g.close()

print("分块提取完成!")

用法:

  • 根据需要修改输出位置、分块大小和读取缓冲区大小,将代码保存为.py文件,如file_split.py;
  • 运行
python file_split.py <file>
  • 若文件大小小于分块大小则提示无需分块;
  • 反之则输出要分割的文件、输出位置、文件大小和分块大小,输入要提取的分块编号回车即可,输出文件名格式为
file_name.ext.###

其中file_name为文件名,ext为扩展名,###为分块编号,如输入5后为005。


再说文件合并的代码:

import os
import sys

file1 = sys.argv[1]
file2 = sys.argv[2]
buffersize = 1024 * 1024 * 100

with open(file1, 'ab') as f1:
    file_size2 = os.path.getsize(file2)
    if file_size2 < buffersize:
        with open(file2, 'rb') as f2:
            f1.write(f2.read())
        # 若第二个文件的大小大于缓冲区则用buffersize多次取file_size2
    else:
        # a为取的次数
        a = file_size2 // buffersize
        # tail为剩余部分,为0时不存在,否则存在
        tail = file_size2 % buffersize
        with open(file2, 'rb') as f2:
            for i in range(a):
                f1.write(f2.read(buffersize))
            if tail != 0:
                f1.write(f2.read(tail))

用法:

  • 将代码保存为.py文件,如file_join.py;
  • 运行
python file_join.py <file1> <file2>

原理:将file2的内容追加到file1后面。

若有多个分块要合并,则依次运行

python file_join.py file.001 file.002
python file_join.py file.001 file.003
python file_join.py file.001 file.004
...

最后再将“.001”去掉即可将文件还原。

--End--

相关推荐

面试官:来,讲一下枚举类型在开发时中实际应用场景!

一.基本介绍枚举是JDK1.5新增的数据类型,使用枚举我们可以很好的描述一些特定的业务场景,比如一年中的春、夏、秋、冬,还有每周的周一到周天,还有各种颜色,以及可以用它来描述一些状态信息,比如错...

一日一技:11个基本Python技巧和窍门

1.两个数字的交换.x,y=10,20print(x,y)x,y=y,xprint(x,y)输出:102020102.Python字符串取反a="Ge...

Python Enum 技巧,让代码更简洁、更安全、更易维护

如果你是一名Python开发人员,你很可能使用过enum.Enum来创建可读性和可维护性代码。今天发现一个强大的技巧,可以让Enum的境界更进一层,这个技巧不仅能提高可读性,还能以最小的代价增...

Python元组编程指导教程(python元组的概念)

1.元组基础概念1.1什么是元组元组(Tuple)是Python中一种不可变的序列类型,用于存储多个有序的元素。元组与列表(list)类似,但元组一旦创建就不能修改(不可变),这使得元组在某些场景...

你可能不知道的实用 Python 功能(python有哪些用)

1.超越文件处理的内容管理器大多数开发人员都熟悉使用with语句进行文件操作:withopen('file.txt','r')asfile:co...

Python 2至3.13新特性总结(python 3.10新特性)

以下是Python2到Python3.13的主要新特性总结,按版本分类整理:Python2到Python3的重大变化Python3是一个不向后兼容的版本,主要改进包括:pri...

Python中for循环访问索引值的方法

技术背景在Python编程中,我们经常需要在循环中访问元素的索引值。例如,在处理列表、元组等可迭代对象时,除了要获取元素本身,还需要知道元素的位置。Python提供了多种方式来实现这一需求,下面将详细...

Python enumerate核心应用解析:索引遍历的高效实践方案

喜欢的条友记得关注、点赞、转发、收藏,你们的支持就是我最大的动力源泉。根据GitHub代码分析统计,使用enumerate替代range(len())写法可减少38%的索引错误概率。本文通过12个生产...

Python入门到脱坑经典案例—列表去重

列表去重是Python编程中常见的操作,下面我将介绍多种实现列表去重的方法,从基础到进阶,帮助初学者全面掌握这一技能。方法一:使用集合(set)去重(最简单)pythondefremove_dupl...

Python枚举类工程实践:常量管理的标准化解决方案

本文通过7个生产案例,系统解析枚举类在工程实践中的应用,覆盖状态管理、配置选项、错误代码等场景,适用于Web服务开发、自动化测试及系统集成领域。一、基础概念与语法演进1.1传统常量与枚举类对比#传...

让Python枚举更强大!教你玩转Enum扩展

为什么你需要关注Enum?在日常开发中,你是否经常遇到这样的代码?ifstatus==1:print("开始处理")elifstatus==2:pri...

Python枚举(Enum)技巧,你值得了解

枚举(Enum)提供了更清晰、结构化的方式来定义常量。通过为枚举添加行为、自动分配值和存储额外数据,可以提升代码的可读性、可维护性,并与数据库结合使用时,使用字符串代替数字能简化调试和查询。Pytho...

78行Python代码帮你复现微信撤回消息!

来源:悟空智能科技本文约700字,建议阅读5分钟。本文基于python的微信开源库itchat,教你如何收集私聊撤回的信息。[导读]Python曾经对我说:"时日不多,赶紧用Python"。于是看...

登录人人都是产品经理即可获得以下权益

文章介绍如何利用Cursor自动开发Playwright网页自动化脚本,实现从选题、写文、生图的全流程自动化,并将其打包成API供工作流调用,提高工作效率。虽然我前面文章介绍了很多AI工作流,但它们...

Python常用小知识-第二弹(python常用方法总结)

一、Python中使用JsonPath提取字典中的值JsonPath是解析Json字符串用的,如果有一个多层嵌套的复杂字典,想要根据key和下标来批量提取value,这是比较困难的,使用jsonpat...

取消回复欢迎 发表评论: