如何安全高效地逐行迁移文本文件内容

本文介绍一种安全、高效的文件行迁移方案，解决原代码因频繁打开/关闭文件及错误循环条件导致的程序冻结问题，并提供更优的二进制流式处理方法。

原始代码存在多个关键缺陷：首先，while range(len(lines)) != 0 是逻辑错误——range(n) 永远不等于 0，导致无限循环；其次，每次迭代都重复打开/读取/重写 file1.txt，不仅性能极差，还极易因文件句柄未正确关闭或读写竞争引发异常（如 Windows 下的“Permission denied”）；最后，逐行操作在大文件场景下 I/O 开销巨大，且未处理空行、编码异常、文件不存在等边界情况。

更合理的设计应遵循 “一次打开、流式处理、原子操作” 原则。若目标仅为完整迁移（非严格逐行实时处理），推荐使用标准库 shutil.copyfile() 或 shutil.move()：

import shutil

# 一行完成复制 + 清空源文件（等效于“迁移”）
shutil.copyfile("file1.txt", "file2.txt")
with open("file1.txt", "w", encoding="utf-8-sig") as f:
    pass  # 清空文件

但若需严格按行迁移（例如需在每行处理后插入日志、校验或暂停），应避免反复读写源文件。以下为健壮的纯 Python 实现（无需额外导入）：

企业网站管理系统YothCMS 1.0 修正版

YothCMS是由 石家庄优斯科技有限公司开发的一套完全开源建站系统，主要面向企业进行快速的建造简洁，高效，易用，安全的公司企业网门户站，稍具技术的开发人员就能够使用本系统以最低的成本、最少的人力投入在最短的时间内架设一个功能齐全、性能优越的公司企业网站。YothCMS是基于ASP+Access开发的一款轻巧高效的网站内容管理系统，提供了新闻管理模块，产品管理模块，文件管理模块。在使用过程中可以轻

下载

SOURCE = "file1.txt"
TARGET = "file2.txt"

# 1. 先读取全部内容（适用于中小文件）
try:
    with open(SOURCE, "r", encoding="utf-8-sig") as src:
        lines = src.readlines()
except FileNotFoundError:
    print(f"源文件 {SOURCE} 不存在")
    exit(1)

# 2. 追加写入目标文件
with open(TARGET, "a", encoding="utf-8-sig") as tgt:
    for line in lines:
        tgt.write(line)

# 3. 安全清空源文件（替代逐行删除）
with open(SOURCE, "w", encoding="utf-8-sig") as src:
    pass  # 立即截断为零长度

⚠️ 重要注意事项：

• 大文件慎用 readlines()：若文件超百 MB，建议改用流式分块处理（如答案中提供的二进制 read(CHUNK) 方案），避免内存溢出；
• 编码一致性：显式指定 encoding="utf-8-sig" 可兼容带 BOM 的 UTF-8 文件，但二进制模式（"rb"/"wb"）完全规避编码问题，适合无格式迁移；
• 原子性保障：清空源文件前确保目标写入成功（可添加 try/except 和临时文件备份）；
• 权限与锁：在多进程环境，需考虑文件锁（如 portalocker 库），但本例单线程无需额外处理。

总结：优先使用 shutil 等成熟工具；自定义实现时，务必减少文件 I/O 次数、验证输入、明确资源生命周期——这才是避免“程序冻结”的根本之道。