Python实现将一个大文件按段落分隔为多个小文件的简单操作方法

本文实例讲述了Python实现将一个大文件按段落分隔为多个小文件的简单操作方法。分享给大家供大家参考，具体如下：

今天帮同学处理一点语料。语料文件有点大，并且是以连续两个换行符作为段落标志，他想把它按段落分隔成多个小文件，即每3个段落组成一个新文件。由于以前没有遇到过类似的操作，在网上找了一些相似的方法，看起来都有点复杂。所以经尝试，自己写了一段代码，完美解决问题。

基本思路是，先读原文件内容，并使用正则表达式，依据\n\n进行切片处理，结果为一个列表，其中每一个列表元素都存放一个切片中的内容;然后创建一个写文件的句柄;接下来遍历切片列表，并写入当前切片内容，判断是否已经写入了3个段落，如果不是，则继续读写下一个切片，如果已经够3个，则关闭之前的写文件句柄，以不同的文件名重新创建一个新的写文件句柄，循环结束，等待读写下一个切片。

# -*- coding:utf8 -*-
import re;
p=re.compile('\n\n',re.S);
fileContent=open('files/办公室.txt','r',encoding='utf8').read();#读文件内容
paraList=p.split(fileContent) #根据换行符对文本进行切片
fileWriter=open('files/0.txt','a',encoding='utf8');#创建一个写文件的句柄
for paraIndex in range(len(paraList)):#遍历切片后的文本列表
  fileWriter.write(paraList[paraIndex]);#先将列表中第一个元素写入文件中
  if((paraIndex+1)%3==0):#判断是否写够3个切片，如果已经够了
    fileWriter.close(); #关闭当前句柄
    fileWriter=open('files/'+str((paraIndex+1)/3)+'.txt','a',encoding='utf8'); #重新创建一个新的句柄，等待写入下一个切片元素。注意这里文件名的处理技巧。
fileWriter.close();#关闭最后创建的那个写文件句柄
print('finished');

更多关于Python相关内容感兴趣的读者可查看本站专题：《Python文件与目录操作技巧汇总》、《Python文本文件操作技巧汇总》、《Python URL操作技巧总结》、《Python图片操作技巧总结》、《Python数据结构与算法教程》、《Python Socket编程技巧总结》、《Python函数使用技巧总结》、《Python字符串操作技巧汇总》及《Python入门与进阶经典教程》

希望本文所述对大家Python程序设计有所帮助。

# Python  # 大文件  # 按段落  # 分隔  # 小文件  # python分割文件的常用方法  # 用python分割TXT文件成4K的TXT文件  # python简单分割文件的方法  # Python实现分割文件及合并文件的方法  # python与php实现分割文件代码  # python多线程threading.Lock锁用法实例  # 详解Python中的多线程编程  # 浅析Python中的多进程与多线程的使用  # 理解python多线程（python多线程简明教程）  # Python threading多线程编程实例  # Python实现模拟分割大文件及多线程处理的方法  # 句柄  # 操作技巧  # 多个  # 遍历  # 创建一个  # 判断是否  # 进阶  # 相关内容  # 第一个  # 换行符  # 把它  # 感兴趣  # 数据结构  # 给大家  # 找了  # 写了  # 他想  # 解决问题  # 如果不是  # 更多关于 

相关文章： c# 在ASP.NET Core中管理和取消后台任务  ,购物网站怎么盈利呢？  网站制作网站,深圳做网站哪家比较好？  网站制作中优化长尾关键字挖掘的技巧,建一个视频网站需要多少钱？  c# await 一个已经完成的Task会发生什么  国美网站制作流程,国美电器蒸汽鍋怎么用官方网站？  如何在阿里云通过域名搭建网站？  如何在IIS7中新建站点？详细步骤解析  宝塔建站教程：一键部署配置流程与SEO优化实战指南  建站之星免费模板：自助建站系统与智能响应式一键生成  昆明网站制作哪家好,昆明公租房申请网上登录入口？  长春网站建设制作公司,长春的网络公司怎么样主要是能做网站的？  如何访问已购建站主机并解决登录问题？  如何选择长沙网站建站模板？H5响应式与品牌定制哪个更优？  免费制作海报的网站,哪位做平面的朋友告诉我用什么软件做海报比较好?ps还是cd还是ai这几个软件我都会些我是做网页的？  网站微信制作软件,如何制作微信链接？  如何用搬瓦工VPS快速搭建个人网站？  贸易公司网站制作流程,出口贸易网站设计怎么做？  打鱼网站制作软件,波克捕鱼官方号怎么注册？  建站上市公司网站建设方案与SEO优化服务定制指南  如何确保西部建站助手FTP传输的安全性？  头像制作网站在线观看,除了站酷，还有哪些比较好的设计网站？  如何高效完成自助建站业务培训？  如何在IIS中新建站点并配置端口与物理路径？  php json中文编码为null的解决办法  如何用景安虚拟主机手机版绑定域名建站？  如何设置并定期更换建站之星安全管理员密码？  建站之星免费版是否永久可用？  如何在宝塔面板中创建新站点？  宝塔面板如何快速创建新站点？  教育培训网站制作流程,请问edu教育网站的域名怎么申请？  建站主机服务器选型指南与性能优化方案解析  html制作网站的步骤有哪些,iapp如何添加网页？  西安大型网站制作公司,西安招聘网站最好的是哪个？  建站之星备案是否影响网站上线时间？  武汉外贸网站制作公司,现在武汉外贸前景怎么样啊？  如何在阿里云购买域名并搭建网站？  如何安全更换建站之星模板并保留数据？  已有域名建站全流程解析：网站搭建步骤与建站工具选择  如何自己制作一个网站链接,如何制作一个企业网站，建设网站的基本步骤有哪些？  深圳网站制作公司好吗,在深圳找工作哪个网站最好啊？  如何快速搭建个人网站并优化SEO？  视频网站app制作软件,有什么好的视频聊天网站或者软件？  网站制作免费,什么网站能看正片电影？  css网站制作参考文献有哪些,易聊怎么注册？  三星网站视频制作教程下载,三星w23网页如何全屏？  如何用好域名打造高点击率的自主建站？  定制建站模板如何实现SEO优化与智能系统配置？18字教程  网站制作需要会哪些技术,建立一个网站要花费多少？  如何在云指建站中生成FTP站点？