理解"取消异常:任务被取消"执行Google数据存储区查询时出错

时间:2017-05-19 12:11:43

标签: java google-app-engine google-cloud-datastore google-apps

我使用的是Google App Engine v.1.9.48。在我的一些数据存储查询期间,我随机获取" CancellationException:任务被取消"错误。我并不确定究竟是什么导致了这个错误。从this Stackoverflow other,我模糊地理解这与超时有关,但不完全确定导致这种情况的原因。我没有使用任何TaskQueues - 如果这有帮助。

下面是堆栈跟踪:

java.util.concurrent.CancellationException: Task was cancelled.
    at com.google.common.util.concurrent.AbstractFuture.cancellationExceptionWithCause(AbstractFuture.java:1126)
    at com.google.common.util.concurrent.AbstractFuture.getDoneValue(AbstractFuture.java:504)
    at com.google.common.util.concurrent.AbstractFuture.get(AbstractFuture.java:407)
    at com.google.common.util.concurrent.AbstractFuture$TrustedFuture.get(AbstractFuture.java:86)
    ....
    at com.sun.proxy.$Proxy14.size(Unknown Source)
    at main.java.com.continentalist.app.model.Model.getEntitySentimentCounts(Model.java:285)
    at main.java.com.continentalist.app.model.Model.access$100(Model.java:37)
    at main.java.com.continentalist.app.model.Model$2.vrun(Model.java:251)
    at com.googlecode.objectify.VoidWork.run(VoidWork.java:14)
    at com.googlecode.objectify.VoidWork.run(VoidWork.java:11)
    at com.googlecode.objectify.ObjectifyService.run(ObjectifyService.java:81)
    ...

我的应用引擎代码抛出了这个错误就在这里。我添加了在线注释,其中引发了错误(通常是list().size()之一):

private EntityAnalysis getEntitySentimentCounts(ComboCall comboCall) {
        Query<ObjectifyArticle> queryArticles = ofy().load().type(ObjectifyArticle.class);

        queryArticles = queryArticles.filter("domain", comboCall.getDomain());

        Set<Entity> entitySet = comboCall.getEntitySet();
        SentimentCount[] allSentimentCounts = new SentimentCount[entitySet.size()];
        int index = 0;
        for(Entity eachEntity : entitySet) {
            SentimentCount sentimentCount = new SentimentCount();
            String eachEntityName = eachEntity.getText();
            Query<ObjectifyArticle> newQuery = queryArticles;
            newQuery = newQuery.filter("entityName", eachEntityName);
            sentimentCount.setEntityName(eachEntityName);   

            Query<ObjectifyArticle> positiveFilter = newQuery;
            positiveFilter = positiveFilter.filter("entityType", POSITIVE);
            int positive = positiveFilter.list().size(); // ERROR EITHER HERE
            sentimentCount.setPositiveCount(positive+"");

            Query<ObjectifyArticle> negativeFilter = newQuery;
            negativeFilter = negativeFilter.filter("entityType", NEGATIVE);
            int negative = negativeFilter.list().size();  // OR HERE
            sentimentCount.setNegativeCount(""+negative);

            Query<ObjectifyArticle> neutralFilter = newQuery;
            neutralFilter = neutralFilter.filter("entityType", NEUTRAL);
            int neutral = neutralFilter.list().size();   // OR HERE
            sentimentCount.setNeutralCount(""+neutral);

            allSentimentCounts[index] = sentimentCount;
            index++;
        }
        EntityAnalysis entityAnalysis = new EntityAnalysis();
        entityAnalysis.setDomain(comboCall.getDomain());
        entityAnalysis.setSentimentCount(allSentimentCounts);
        return entityAnalysis;
    }

2 个答案:

答案 0 :(得分:1)

  1. 您无需致电.list().size(),只需拨打count()即可。

  2. 如果您只是计算,请使用仅限密钥的查询 - 它是免费且更快的。

  3. 当您希望处理大量实体时,不要忘记在查询中设置chunckAll()。它比默认设置快得多。

  4. 如果您仍然遇到这些异常,则需要在查询中使用游标。

答案 1 :(得分:0)

由于以下常见原因导致此类错误发生:

  1. 任何API调用(如datastore.list都超时)
    解决方案:通过光标以分页方式读取数据

  2. 父方法达到请求超时限制,例如cronjob在标准应用程序引擎中达到10分钟限制 解决方案:增加超时时间或使用多线程或使用缓存来加快执行速度