ThreadPoolExecutor用于不同的任务

时间:2013-10-28 06:26:02

标签: java multithreading threadpool

bellow是默认的PicassoExecutorService.java,它只是从net(和http缓存,如果之前加载)请求位图。比方说,如果有100个任务,95是加载缓存而5是来自网络,如果队列的前5个中的5个,那么当加载5个图片时95图像将永远不会显示。所以,我想更改PicassoExecutorService.java,我想知道是否有可能在ExecutorService中创建一个新线程来执行磁盘缓存获取作业?我应该创建一个新的队列?我没有那么多的java线程编码的经验,所以我需要你的帮助,thaks。

class PicassoExecutorService extends ThreadPoolExecutor {
  private static final int DEFAULT_THREAD_COUNT = 3;

  PicassoExecutorService() {
    super(DEFAULT_THREAD_COUNT, DEFAULT_THREAD_COUNT, 0, TimeUnit.MILLISECONDS,
        new LinkedBlockingQueue<Runnable>(), new Utils.PicassoThreadFactory());
  }

  void adjustThreadCount(NetworkInfo info) {
    if (info == null || !info.isConnectedOrConnecting()) {
      setThreadCount(DEFAULT_THREAD_COUNT);
      return;
    }
    switch (info.getType()) {
      case ConnectivityManager.TYPE_WIFI:
      case ConnectivityManager.TYPE_WIMAX:
      case ConnectivityManager.TYPE_ETHERNET:
        setThreadCount(4);
        break;
      case ConnectivityManager.TYPE_MOBILE:
        switch (info.getSubtype()) {
          case TelephonyManager.NETWORK_TYPE_LTE:  // 4G
          case TelephonyManager.NETWORK_TYPE_HSPAP:
          case TelephonyManager.NETWORK_TYPE_EHRPD:
            setThreadCount(3);
            break;
          case TelephonyManager.NETWORK_TYPE_UMTS: // 3G
          case TelephonyManager.NETWORK_TYPE_CDMA:
          case TelephonyManager.NETWORK_TYPE_EVDO_0:
          case TelephonyManager.NETWORK_TYPE_EVDO_A:
          case TelephonyManager.NETWORK_TYPE_EVDO_B:
            setThreadCount(2);
            break;
          case TelephonyManager.NETWORK_TYPE_GPRS: // 2G
          case TelephonyManager.NETWORK_TYPE_EDGE:
            setThreadCount(1);
            break;
          default:
            setThreadCount(DEFAULT_THREAD_COUNT);
        }
        break;
      default:
        setThreadCount(DEFAULT_THREAD_COUNT);
    }
  }

  private void setThreadCount(int threadCount) {
    setCorePoolSize(threadCount);
    setMaximumPoolSize(threadCount);
  }
}



  static class PicassoThreadFactory implements ThreadFactory {
    @SuppressWarnings("NullableProblems")
    public Thread newThread(Runnable r) {
      return new PicassoThread(r);
    }
  }

  private static class PicassoThread extends Thread {
    public PicassoThread(Runnable r) {
      super(r);
    }

    @Override public void run() {
      Process.setThreadPriority(THREAD_PRIORITY_BACKGROUND);
      super.run();
    }
  }

1 个答案:

答案 0 :(得分:2)

PicassoExecutorService是执行程序服务的实现,它调整连接类型的线程计数。即对于2G,它选择1个线程,因为2G很慢并且设置4个同时线程会耗尽你的连接。

您遇到的问题是因为某些未缓存的作业超出了缓存的请求。

现在,如果您能够确定作业是否已缓存,则只需为磁盘作业创建单独的服务或线程。您向我们展示的线程池是一个连接线程,它根据连接类型限制资源。最好不要混淆问题并为磁盘作业创建单独的线程池。

如果您在尝试从互联网上获取作业之前无法说明该作业是否已缓存,我将使用策略更新答案,该策略非常复杂。

<强>更新

战略。

首先,您需要了解所有设备上的磁盘读取超时。您需要第95百分位超时值,例如值小于最大值。因此,如果您有1ms,2ms,1ms,50ms,20ms,3ms,则不要选择20ms或50ms。让磁盘读取为3ms。你的平均(或更好的中位数)连接超时应该更大 - 比如100-500ms。

所以我们的想法是首先将你的作业提交到一个类似10-20个线程的线程池,这个小超时。因此,它将过滤掉所有缓慢的工作。

下一步是终止慢速作业。这取决于您的连接是否可以中断。如果没有,这是一个不同的问题。

在此之后,您只需将慢速作业重新提交到连接线程池。就是这样。