一个100万类别的热编码

2024-09-27 04:23:23 发布

您现在位置:Python中文网/ 问答频道 /正文

对于语言模型,我必须根据给定的单词序列预测一个单词。我的词汇量有一百万个单词。我正试着从中预测单词。我试着用keras(tou categorical)对预测词进行热编码。但是对于这么大的词汇量,我在python中遇到了内存错误。有没有办法克服这个问题或者我的方法是错误的?你知道吗


Tags: 方法内存模型语言编码错误序列单词

热门问题