百度360必应搜狗淘宝本站头条
当前位置:网站首页 > 技术文章 > 正文

Python的shutil模块:文件处理的得力助手

itomcoil 2025-05-15 18:22 1 浏览

对话实录

小白:(苦恼)我在Python中处理文件时,总是觉得自带的open函数不太够用,有没有更强大的工具呀?

专家:(微笑)那你可不能错过shutil模块!它就像是文件处理的瑞士军刀,提供了大量便捷的函数来操作文件和目录,接下来我给你详细讲讲。

shutil模块基础认知

1. 文件复制

shutil.copy() 和shutil.copy2函数可以复制文件,不支持复制目录。copy函数和copy2函数的区别是:

  • shutil.copy2函数:在复制文件时会尝试保留源文件的元数据,如文件权限、最后修改时间等。
  • shutil.copy函数:不会保留这些元数据,它只进行简单的文件内容复制。

我们看下源代码可以看出区别:主要是标红框的函数copystat和copymode

顺便说下shutil.copymode() 和 shutil.copystat() 功能如下:

  1. shutil.copymode(src, dst)

shutil.copymode()函数用于复制源文件src的权限位到目标文件dst。比如特定的读取、写入或执行权限,但不会复制文件的内容、组或用户信息。

2. shutil.copystat(src, dst)

shutil.copystat()函数则用于复制源文件src的状态信息到目标文件dst,包括权限位、最后访问时间、最后修改时间和标志值。

import shutil
shutil.copy('source.txt', 'destination1.txt')
shutil.copy2('source.txt', 'destination2.txt')

2. 目录复制

使用shutil.copytree函数能够递归地复制整个目录及其子目录和文件。假设我们有一个名为my_folder的目录,要将其复制为my_folder_backup:

import shutil
shutil.copytree('my_folder','my_folder_backup')

这样my_folder中的所有内容,包括子目录和文件都会被完整地复制到my_folder_backup中。

3.文件移动与重命名

shutil.move函数既能移动文件(如果新目录有同名文件会报错),也能对文件进行重命名。比如将old_name.txt文件移动到new_directory目录下,并将其重命名为new_name.txt:

import shutil
shutil.move('old_name.txt', 'new_directory/new_name.txt')

如果目标路径和源路径在同一目录,那么就相当于对文件进行重命名。在整理文件、批量修改文件名等场景中,shutil.move非常实用。

4.文件删除

shutil.rmtree函数用于删除整个目录及其所有内容。例如要删除temp_folder目录及其包含的所有文件和子目录:

import shutil
shutil.rmtree('temp_folder')

需谨慎使用此函数,因为一旦执行,被删除的目录和文件将无法恢复。在清理临时文件、删除不再需要的项目文件夹等场景中,它能快速完成任务。

5.文件压缩与解压缩

shutil模块支持常见的压缩格式,如.zip和.tar。

  • 压缩文件:使用shutil.make_archive函数可以创建压缩文件。例如将my_project目录压缩为my_project.zip:
import shutil
shutil.make_archive('my_project', 'zip','my_project')

这里第一个参数是压缩文件的名称(不包含扩展名),第二个参数是压缩格式,第三个参数是要压缩的目录。

  • 解压缩文件:shutil.unpack_archive函数用于解压缩文件。假设我们有一个archive.zip压缩文件,要将其解压到extract_folder目录:
import shutil
shutil.unpack_archive('archive.zip', 'folder')

在分发项目、备份数据以及下载和解压资源等场景中,文件压缩与解压缩功能十分常用。

闭坑指南

文件复制时的权限问题

在进行文件复制时,如果目标目录的权限设置不允许写入,会导致复制失败。例如在 Linux 系统中,目标目录权限为只读:

import shutil
# 假设 /readonly_dir 权限为只读
# 错误示范,会报错 PermissionError
# shutil.copy('source.txt', '/readonly_dir/destination.txt')

在复制文件前,要确保目标路径有足够的写入权限,可通过修改目录权限或选择有写入权限的目标路径来解决。

目录删除时的误操作

shutil.rmtree函数一旦执行,被删除目录及其内容将无法恢复。如果不小心指定了错误的目录名,可能会造成严重的数据丢失。例如:

import shutil
# 错误示范,误将重要目录删除
# shutil.rmtree('important_project')

在使用shutil.rmtree前,务必仔细确认要删除的目录是否正确,或者可以先进行一些测试性操作,确保无误后再正式执行。

压缩与解压缩的格式不匹配

在进行文件压缩和解压缩时,要确保指定的格式与实际文件格式匹配。例如尝试将一个.tar.gz文件按.zip格式解压缩:

import shutil
# 错误示范,格式不匹配会报错
# shutil.unpack_archive('archive.tar.gz', 'extract_folder', 'zip')

在压缩和解压缩文件前,要明确文件的实际格式,并选择正确的压缩和解压缩格式参数。

专家工具箱

1. 自定义文件复制过滤

shutil.copytree函数可以接受一个ignore参数,用于指定过滤规则,只复制符合条件的文件和目录。例如,只复制目录中的.py文件,忽略其他文件和目录:

import shutil
#自定义过滤函数
def ignore_non_py_files(src, names):
	return [name for name in names if not name.endswith('.py')]
#传入ignore参数  
shutil.copytree('source', 'dest', ignore = ignore_non_py_files)

#也可以使用shutil自带的过滤函数,忽略的文件后缀可以填多个
#并且参数dirs_exist_ok=True 表示允许继续执行,而不是抛出FileExistsError异常。这个参数在 Python 3.8 版本中添加。
shutil.copytree('source', 'dest', ignore=shutil.ignore_patterns('*.py','*.docx'),
                dirs_exist_ok=True)

在选择性备份代码文件、筛选特定类型文件进行处理等场景中,这种自定义过滤功能非常有用。

2. 安全的文件操作

为了避免在文件移动或删除操作中因意外导致数据丢失,可以先进行备份操作。例如在移动文件前,先复制一份作为备份:

import shutil
import os
source_file = 'important_file.txt'
backup_file = 'important_file_backup.txt'
destination_dir = 'new_location'
# 备份文件
shutil.copy(source_file, backup_file)
# 移动文件
shutil.move(source_file, os.path.join(destination_dir, os.path.basename(source_file)))

在处理重要文件时,这种先备份再操作的方式可以有效降低数据丢失风险。

小白:(眼睛放光)哇,shutil模块原来这么强大,能解决这么多文件处理的难题!

专家:(点头)没错,熟练掌握shutil模块,你在Python文件处理方面会更加得心应手,快去实践一下吧!

常用函数速查表

函数

用法

说明

shutil.copy2

shutil.copy2(source, destination)

复制文件

shutil.copytree

shutil.copytree(source, destination[, ignore])

递归复制目录

shutil.move

shutil.move(source, destination)

移动或重命名文件 / 目录

shutil.rmtree

shutil.rmtree(directory)

删除目录及其所有内容

shutil.make_archive

shutil.make_archive(base_name, format[, root_dir])

创建压缩文件

shutil.unpack_archive

shutil.unpack_archive(filename, extract_dir[, format])

解压缩文件

相关推荐

Python 上下文管理器魔法手册:with 语句的终极艺术

对话实录小白:(抓狂)我写了f=open("data.txt"),结果忘记关闭文件了!专家:(掏出魔法书)用with语句,文件自动关闭,永不泄露!上下文管理器基础三连击1.基...

【验证码逆向专栏】某安登录流程详解与验证码逆向分析与识别

声明本文章中所有内容仅供学习交流使用,不用于其他任何目的,不提供完整代码,抓包内容、敏感网址、数据接口等均已做脱敏处理,严禁用于商业用途和非法用途,否则由此产生的一切后果均与作者无关!本文章未经许可禁...

Python常用内置模块介绍——文件与系统操作详解

Python提供了多个强大的内置模块用于文件和系统操作,下面我将详细介绍最常用的几个模块及其核心功能。1.os模块-操作系统交互os模块提供了与操作系统交互的接口,包括文件/目录操作、进程管理、环...

21-Python-文件操作

在Python中,文件操作是非常重要的一部分,它允许我们读取、写入和修改文件。下面将详细讲解Python文件操作的各个方面,并给出相应的示例。1-打开文件在Python中,使用`open()`函数来打...

Python 开发工程师必会的 5 个文件操作库

在Python开发的世界里,文件操作是一项基础且高频的任务。从日常的数据处理到复杂的项目部署,熟练掌握文件操作库能让我们的开发工作事半功倍。本文和大家聊聊我眼中开发必备的5个文件操作库,它们各...

你应该知道的 50 个 Python 单行代码

使用Python总是可以轻松完成一些特定任务,这让人惊奇。一些比较繁琐的任务可以使用Python在单行代码中完成。下面是我收集的50个Python单行代码实例。1.移位词:猜字母的个...

Python10个了不起的10个库,用于文件操作、接口测试

日常接口测试中需要大量的操作文件,譬如:用户登录信息、数据库信息等等。了解下方10个文件操作库,可以快速提升在工作中的效率。os:提供了与操作系统交互的功能,包括文件和目录操作、进程管理等。示例代码参...

手把手教你开发智能备份神器,小白也能30分钟搞定!

一、你的电脑是不是也总在“重复备份”?每次备份文件夹时,是不是总觉得“好麻烦”?特别是遇到几十G的文件库,整个备份过程像在坐过山车——明明大部分文件都没改,却还要从头来一遍!今天,我用Python开发...

几行代码教你zip打包

01准备有时我们不想去手动一个个去操作,然后傻等他打包完,python依赖库zipfile很方便地帮助我们封装了解压压缩,shutil用于文件目录处理,方法类似于linux命令。1、安装pipin...

Python操作目录

获取当前工作目录获取执行命令的位置路径拼接路径拆分文件重命名删除文件复制文件遍历文件夹下的文件判断文件是否存在判断目录是否存在获取当前工作目录importsysprint(sys.path[0]...

Python 开发工程师必会的 5 个系统命令操作库

当我们需要编写自动化脚本、部署工具、监控程序时,熟练操作系统命令几乎是必备技能。今天就来聊聊我在实际项目中高频使用的5个系统命令操作库,这些可都是能让你效率翻倍的"瑞士军刀"。一...

文件备份用Python,照着复制粘贴代码就可以了

引言在日常开发和运维工作中,数据安全尤为重要,定期备份重要文件是防范数据丢失的有效手段之一。本文将详细介绍如何使用Python实现一个简单的定时备份脚本,该脚本可以按照设定周期自动将指定文件夹或文件复...

2025年必学的Python自动化办公的15个实用脚本

2025年必学的Python自动化办公的6个实用脚本及其代码示例。这些脚本涵盖了文件备份、邮件通知、网页抓取、报告生成、数据处理和团队协作等多个场景,帮助用户高效完成日常办公任务。1.自动备份文件自...

一天学一点,今天学习掌握Python:异常处理与文件操作全攻略

这一笔记记录了我学习python的异常和文件的操作,这也是针对Python异常和文件操作教程的进一步优化建议和注意事项:异常处理优化1.避免过度捕获异常o不要为了捕获异常而捕获异常,应根据实际需求...

「亲测可用」如何用python脚本批量旋转图片为任意角度?

最近在训练图片方向分类器,需要对原始图片进行批量旋转操作,那如何用python脚本实现批量旋转图片为任意角度呢?此处,以将我的头像旋转90度为例进行演示。实现图片批量旋转的python源代码如下:#-...