Python 如何按照行来分割大文件。

2017 年 1 月 1 日
 AlisaDestiny

现在有一个文件有一百多万条数据,按行存储的。 100 多 M ,文本类型的。我想分割成小文件。每个文件 10000 行。想问下各位大神有没有解决办法。或者有代码就更好了。

7176 次点击
所在节点    Python
24 条回复
Miy4mori
2017 年 1 月 2 日
兄弟,学学流的概念吧,处理文件要都读内存里全世界都要疯啊
qile1
2017 年 1 月 3 日
f 。 readlines()
araraloren
2017 年 1 月 3 日
@AlisaDestiny 自带的行读取函数大部分时候够用,大概是类似与 .readlines 之类的函数,我估计会做惰性处理,再说哪个用户会在乎那几百 M 内存。。
kevin8096
2017 年 1 月 3 日
awk

这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://study.congcong.us/t/331596

V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX