了解执行 Google 数据存储查询时出现"CancellationException: Task was cancelled"错误

Question

我正在使用Google App Engine v. 1.9.48。在我的一些数据存储查询期间，我随机收到"取消异常：任务已取消"错误。而且我不确定究竟是什么导致了此错误。从其他 Stackoverflow 帖子中，我隐约了解到这与超时有关，但不完全确定是什么原因造成的。我没有使用任何任务队列 - 如果有帮助的话。

下面是堆栈跟踪：

java.util.concurrent.CancellationException: Task was cancelled.
    at com.google.common.util.concurrent.AbstractFuture.cancellationExceptionWithCause(AbstractFuture.java:1126)
    at com.google.common.util.concurrent.AbstractFuture.getDoneValue(AbstractFuture.java:504)
    at com.google.common.util.concurrent.AbstractFuture.get(AbstractFuture.java:407)
    at com.google.common.util.concurrent.AbstractFuture$TrustedFuture.get(AbstractFuture.java:86)
    ....
    at com.sun.proxy.$Proxy14.size(Unknown Source)
    at main.java.com.continentalist.app.model.Model.getEntitySentimentCounts(Model.java:285)
    at main.java.com.continentalist.app.model.Model.access$100(Model.java:37)
    at main.java.com.continentalist.app.model.Model$2.vrun(Model.java:251)
    at com.googlecode.objectify.VoidWork.run(VoidWork.java:14)
    at com.googlecode.objectify.VoidWork.run(VoidWork.java:11)
    at com.googlecode.objectify.ObjectifyService.run(ObjectifyService.java:81)
    ...

引发该错误的应用引擎代码在这里。我在抛出错误的行注释中添加了(通常在其中一个list().size()(：

private EntityAnalysis getEntitySentimentCounts(ComboCall comboCall) {
        Query<ObjectifyArticle> queryArticles = ofy().load().type(ObjectifyArticle.class);
        queryArticles = queryArticles.filter("domain", comboCall.getDomain());
        Set<Entity> entitySet = comboCall.getEntitySet();
        SentimentCount[] allSentimentCounts = new SentimentCount[entitySet.size()];
        int index = 0;
        for(Entity eachEntity : entitySet) {
            SentimentCount sentimentCount = new SentimentCount();
            String eachEntityName = eachEntity.getText();
            Query<ObjectifyArticle> newQuery = queryArticles;
            newQuery = newQuery.filter("entityName", eachEntityName);
            sentimentCount.setEntityName(eachEntityName);   
            Query<ObjectifyArticle> positiveFilter = newQuery;
            positiveFilter = positiveFilter.filter("entityType", POSITIVE);
            int positive = positiveFilter.list().size(); // ERROR EITHER HERE
            sentimentCount.setPositiveCount(positive+"");
            Query<ObjectifyArticle> negativeFilter = newQuery;
            negativeFilter = negativeFilter.filter("entityType", NEGATIVE);
            int negative = negativeFilter.list().size();  // OR HERE
            sentimentCount.setNegativeCount(""+negative);
            Query<ObjectifyArticle> neutralFilter = newQuery;
            neutralFilter = neutralFilter.filter("entityType", NEUTRAL);
            int neutral = neutralFilter.list().size();   // OR HERE
            sentimentCount.setNeutralCount(""+neutral);
            allSentimentCounts[index] = sentimentCount;
            index++;
        }
        EntityAnalysis entityAnalysis = new EntityAnalysis();
        entityAnalysis.setDomain(comboCall.getDomain());
        entityAnalysis.setSentimentCount(allSentimentCounts);
        return entityAnalysis;
    }

Answer 1

1. 你不需要打电话给.list().size()，你可以简单地打电话给count()。

2. 如果您只是计数，请使用仅键查询 - 它是免费的，而且速度要快得多。

3. 当您希望处理大量实体时，不要忘记在查询上设置chunckAll()。它比默认设置快得多。

如果仍然遇到这些异常，则需要在查询中使用游标。

Answer 2

由于以下常见原因，会发生此类错误：

1. 任何 API 调用(如 datastore.list(都会超时
   解决方案：通过游标以分页方式读取数据

2. 父方法达到请求超时限制，例如 cronjob 在标准应用程序引擎中达到 10 分钟限制解决方案：增加超时或使用多线程或使用缓存来加快执行速度