ForkJoinPool创建线程的thouthands

时间:2013-09-10 14:59:51

标签: java multithreading parallel-processing fork-join

一个简单的测试,演示了这个问题:

package com.test;

import java.util.ArrayList;
import java.util.List;
import java.util.concurrent.ForkJoinPool;
import java.util.concurrent.ForkJoinTask;
import java.util.concurrent.RecursiveTask;

public class Main extends RecursiveTask<Long> {
    private volatile long start;
    private volatile long end;
    private volatile int deep;

    public Main(long start, long end, int index, int deep) {
        this.start = start;
        this.end = end;
        this.deep = deep;
//        System.out.println(deep + "-" + index);
    }

    @Override
    protected Long compute() {
        long part = (end - start) / 10;
        if (part > 1000 && deep < 10) {
            List<RecursiveTask<Long>> subtasks = new ArrayList<RecursiveTask<Long>>();
            for (int i = 0; i < 10; i++) {
                long subtaskEnd = start + part;
                if (i == 9) {
                    subtaskEnd = end;
                }
                subtasks.add(new Main(start, subtaskEnd, i, deep + 1));
                start = subtaskEnd;
            }

            //CASE 1: generates 3000+ threads
            for (int i = 0; i < 10; i++) {
                subtasks.get(i).fork();
            }

            //CASE 2: generates 4 threads
//            invokeAll(subtasks);

            //CASE 3: generates 4 threads
//            for (int i = 9; i >= 0; i--) {
//                subtasks.get(i).fork();
//            }


            long count = 0;
            for (int i = 0; i < 10; i++) {
                count += subtasks.get(i).join();
            }
            return count;
        } else {
            long startStart = start;
            while (start < end) {
                start += 1;
            }
            return start - startStart;
        }
    }

    private static ForkJoinPool executor = new ForkJoinPool();

    public static void main(String[] args) throws Exception {
        ForkJoinTask<Long> forkJoinTask = executor.submit(new Main(0, Integer.MAX_VALUE / 10, 0, 0));

        Long result = forkJoinTask.get();
        System.out.println("Final result: " + result);
        System.out.println("Number of threads: " + executor.getPoolSize());
    }

}

在这个示例中,我创建了RecursiveTask,它只是计算数字以在CPU上创建一些负载。它以递归的方式将输入范围分为10个部分,当部件的大小小于1000或递归“深度”超过10时,它开始计算数字。

在compute()方法中有3个案例被评论。差异仅在分叉子任务的顺序上。根据I fork子任务的顺序,最终的线程数不同。在我的系统上,它为第一个案例创建了3000多个线程,为第二个和第三个案例创建了4个线程。

问题是:有什么区别?我真的需要知道这个框架的内部成功使用它吗?

1 个答案:

答案 0 :(得分:2)

这是我在2011年的一篇文章中提到的一个老问题,A Java Fork-Join Calamity文章指出第二部分显示修复?对于Java8中的这种情况(替换档位而不是额外的线程。)

你真的不能用这个框架做很多专业。您可以使用其他框架。