Python中文
首页
教程
问答
标签
搜索
登录
注册
尝试加载5GB文本fi时发生Python内存错误
回答此问题可获得
20
贡献值,回答如果被采纳可获得
50
分。
<p>我想读取5GB文件中以文本格式存储的数据。当我尝试使用以下代码读取文件内容时:</p> <pre><code>file = open('../data/entries_en.txt', 'r') data = file.readlines() </code></pre> <p>出现错误: 数据=文件.readlines() 记忆错误 我的笔记本有8GB的内存,当我想运行这个程序时,至少有4GB是空的。但是当我监视系统性能时,当python使用大约1.5GB的内存时,就会发生这个错误。<br/> 我使用的是Python2.7,但如果有关系,请告诉我2.x和3.x的解决方案 我该怎么读这个文件?在</p>
0 条评论
分类:
Python问答
请先
登录
后评论
默认排序
时间排序
1 个回答
匿名
1天前
擅长:python、mysql、java
<p>处理大文件的最好方法是-</p> <pre><code>with open('../file.txt', 'r') as f: for line in f: # do stuff </code></pre> <p><code>readlines()</code>将出错,因为您正试图将太大的文件直接加载到内存中。上面的代码将自动关闭你的文件一旦你完成处理。在</p>
请先
登录
后评论
针对此问题:
更多的回答
关注
89
关注
收藏
1
收藏,
216
浏览
网友 提问于 2天前
相关Python问题
无法使用Django/mongoengine连接到MongoDB(身份验证失败)
9 回答
无法使用Django\u mssql\u后端迁移到外部hos
3 回答
无法使用Django&Python3.4连接到MySql
4 回答
无法使用Django+nginx上载媒体文件
6 回答
无法使用Django1.6导入名称模式
2 回答
无法使用Django1.7和mongodb登录管理站点
8 回答
无法使用Djangoadmin创建项目,进程使用了错误的路径,因为我事先安装了错误的Python
10 回答
无法使用Djangockedi验证CBV中的字段
6 回答
无法使用Djangocketditor上载图像(错误400)
7 回答
无法使用Djangocron进行函数调用
7 回答
无法使用Djangofiler djang上载文件
5 回答
无法使用Djangokronos
8 回答
无法使用Djangomssql provid
4 回答
无法使用Djangomssql连接到带有Django 1.11的MS SQL Server 2016
6 回答
无法使用Djangomssq迁移Django数据库
3 回答
无法使用Djangonox创建用户
8 回答
无法使用Djangopyodb从Django查询SQL Server
5 回答
无法使用Djangopython3ldap连接到ldap
8 回答
无法使用Djangoredis连接到redis
4 回答
无法使用Django中的FK创建新表
5 回答