Quiver-对象集太大,无法执行四处搜索



尝试访问链接对象时,我收到消息Object Set too large to perform search around。原因是我的"对象集"大于100.000个元素。有没有可能将对象中的数据分组,这样我就可以减少元素的np(不过滤,但将每日数据分组到月级别(

我知道这个问题有点过时,但要为子孙后代回答。

由于您遇到了对象搜索的后端限制,一种选择是创建数据的子集,但使用pyspark中的创作/代码存储库进行分组。然后,您可以为分组的数据同步一个单独的对象(将分组放在名称中(,并使用该对象进行搜索。你可以使用pyspark让一个月的约会结束,然后进行分组(如果你遇到问题,请问一个特定的问题(。

另一种选择是,您可以使用联接表预先计算搜索循环。如果对象之间存在多对多关系,则可以使用pyspark创建一个联接表,其中左表和右表的主键支持对象,并在本体管理器中添加联接关系。

最后,还有第二个版本的Objects Store,它没有这些限制,但还没有在Foundry车队中推出。

最新更新