將一個(gè)txt文本文件中的內(nèi)容行拆分固定的行數(shù),自動(dòng)分批寫入到多個(gè)文本文件。
比如:一個(gè)源txt文件有5100行數(shù)據(jù),每1000行插入到一個(gè)txt文件,最后獲得6個(gè)txt文件(5個(gè)文本文件有1000行數(shù)據(jù),第6個(gè)文本文件有100行數(shù)據(jù))。
1、先建立一個(gè)目錄用于存放分割后的txt文件(這里的目錄名為:dataText)
2、修改拆分的數(shù)目(這里是每5000行數(shù)據(jù)存入一個(gè)txt文件)
3、運(yùn)行python文件,查看生成的txt文件
open_diff = open('data.txt', 'r') # 源文本文件 diff_line = open_diff.readlines() line_list = [] for line in diff_line: line_list.append(line) count = len(line_list) # 文件行數(shù) print('源文件數(shù)據(jù)行數(shù):',count) # 切分diff diff_match_split = [line_list[i:i+5000] for i in range(0,len(line_list),5000)]# 每個(gè)文件的數(shù)據(jù)行數(shù) # 將切分的寫入多個(gè)txt中 for i,j in zip(range(0,int(count/5000+1)),range(0,int(count/5000+1))): # 寫入txt,計(jì)算需要寫入的文件數(shù) with open('./dataText/ImageData%d.txt'% j,'w+') as temp: for line in diff_match_split[i]: temp.write(line) print('拆分后文件的個(gè)數(shù):',i+1)
將txt文件中的數(shù)據(jù)拆分成多個(gè)文本文件,可以解決由于文本文件數(shù)據(jù)過大而無法導(dǎo)入某些軟件的問。
這里是將一個(gè)url文本文件(約15M)導(dǎo)入idm下載url中的內(nèi)容,但由于文本文件過大,數(shù)據(jù)量過多,就拆分成多個(gè)文本文件分批次導(dǎo)入idm。
注意:
1、程序中的5000為寫入每個(gè)文件的數(shù)據(jù)行數(shù),最后一個(gè)文件的行數(shù)不足5000,也用一個(gè)文本文件存儲(chǔ)。
2、根據(jù)需要,修改存儲(chǔ)數(shù)據(jù)的行數(shù)(兩個(gè)地方的5000都需要修改)。
到此這篇關(guān)于Python實(shí)現(xiàn)文本文件拆分寫入到多個(gè)文本文件的方法的文章就介紹到這了,更多相關(guān)Python 文本文件拆分內(nèi)容請(qǐng)搜索腳本之家以前的文章或繼續(xù)瀏覽下面的相關(guān)文章希望大家以后多多支持腳本之家!
標(biāo)簽:雙鴨山 貴州 赤峰 陽(yáng)泉 克拉瑪依 日照 臨汾 金華
巨人網(wǎng)絡(luò)通訊聲明:本文標(biāo)題《Python實(shí)現(xiàn)文本文件拆分寫入到多個(gè)文本文件的方法》,本文關(guān)鍵詞 Python,實(shí)現(xiàn),文本,文件,拆分,;如發(fā)現(xiàn)本文內(nèi)容存在版權(quán)問題,煩請(qǐng)?zhí)峁┫嚓P(guān)信息告之我們,我們將及時(shí)溝通與處理。本站內(nèi)容系統(tǒng)采集于網(wǎng)絡(luò),涉及言論、版權(quán)與本站無關(guān)。下一篇:深入理解python多線程編程