Python作為快速開發(fā)工具，其代碼表達(dá)力強(qiáng)，開發(fā)效率高，因此用Python快速寫一個(gè)，還是可行的。

需求描述：

? ? 輸入：給定一個(gè)帶列頭的csv文件，或者txt文件，或者其他文本文件。

? ? 輸出：指定單文件內(nèi)部行數(shù)的一系列可區(qū)分小文件。

開發(fā)環(huán)境：Python 3.6

代碼如下：

# -*- coding: cp936 -*- import os import timedef mkSubFile(lines,head,srcName,sub):[des_filename, extname] = os.path.splitext(srcName)filename = des_filename + '_' + str(sub) + extnameprint( 'make file: %s' %filename)fout = open(filename,'w')try:fout.writelines([head])fout.writelines(lines)return sub + 1finally:fout.close()def splitByLineCount(filename,count):fin = open(filename,'r')try:head = fin.readline()buf = []sub = 1for line in fin:buf.append(line)if len(buf) == count:sub = mkSubFile(buf,head,filename,sub)buf = []if len(buf) != 0:sub = mkSubFile(buf,head,filename,sub) finally:fin.close()if __name__ == '__main__':begin = time.time()splitByLineCount('盂縣.csv',600000)end = time.time()print('time is %d seconds ' % (end - begin))

測(cè)試結(jié)果：

? ? 1.4GB的csv文件，13列數(shù)據(jù)，切分成23個(gè)小文件，耗時(shí)55秒。

總結(jié)

以上是生活随笔為你收集整理的Python 实现大文本文件切割的全部?jī)?nèi)容，希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網(wǎng)站內(nèi)容還不錯(cuò)，歡迎將生活随笔推薦給好友。