有没有办法让我学会使用硬盘?

2024-09-28 23:13:02 发布

您现在位置:Python中文网/ 问答频道 /正文

一般来说,我对scikit学习和机器学习非常陌生。我有一个包含140565行和17列的数据集。我用的是别人的代码,它运行一个随机森林模型,在一台有2.7GHz处理器,4GB内存,Windows10的机器上。你知道吗

显然4GB内存还不够,我无法升级这个系统(ultrabook)。它里面有一个SSD。有没有一种方法来配置硬盘而不是以牺牲内存空间为代价?你知道吗


Tags: 数据方法内存代码模型机器系统森林
1条回答
网友
1楼 · 发布于 2024-09-28 23:13:02

您仍然需要内存,据我所知,从磁盘读写对于SKML任务是不可能的(您需要尝试其他软件),您可以尝试使用下面列出的策略来适应内存,但仅限于您可以实现的算法:Scaling with instances using out-of-core learning

在这种情况下,性能和结果会受到影响,批次大小也会影响结果。你知道吗

注意:对于磁盘的读写操作,SAS和hadoop(map reduce)更适合,但是sklearn需要RAM。你知道吗

相关问题 更多 >