训练斯坦福大学NER的最大训练数据集限制是多少

Question

我正在尝试为两个新命名的实体训练斯坦福NER模型，我有一个巨大的训练集(每个大约300000个文件，大约2k(。有可能马上训练这个吗？内存需求可能是什么？

Answer 1

本身没有最大值。限制取决于您的内存量、CPU速度/等待时间。

我们没有太多关于任何人用来成功训练模型的最大集合的数据。你必须进行实验，看看在你的设置下有什么可能。