java并发编程-Executor框架

Executor框架是指java 5中引入的一系列并发库中与executor相关的一些功能类,其中包括线程池,Executor,Executors,ExecutorService,CompletionService,Future,Callable等。他们的关系为:

java并发编程-Executor框架

并发编程的一种编程方式是把任务拆分为一些列的小任务,即Runnable,然后在提交给一个Executor执行,Executor.execute(Runnalbe)。Executor在执行时使用内部的线程池完成操作。

一、创建线程池

Executors类,提供了一系列工厂方法用于创先线程池,返回的线程池都实现了ExecutorService接口。

public static ExecutorService newFixedThreadPool(int nThreads)

创建固定数目线程的线程池。

public static ExecutorService newCachedThreadPool()

创建一个可缓存的线程池,调用execute将重用以前构造的线程(如果线程可用)。如果现有线程没有可用的,则创建一个新线程并添加到池中。终止并从缓存中移除那些已有 60 秒钟未被使用的线程。

public static ExecutorService newSingleThreadExecutor()

创建一个单线程化的Executor。

public static ScheduledExecutorService newScheduledThreadPool(int corePoolSize)

创建一个支持定时及周期性的任务执行的线程池,多数情况下可用来替代Timer类。

Java代码java并发编程-Executor框架
  1. Executorexecutor=Executors.newFixedThreadPool(10);
  2. Runnabletask=newRunnable(){
  3. @Override
  4. publicvoidrun(){
  5. System.out.println("taskover");
  6. }
  7. };
  8. executor.execute(task);
  9. executor=Executors.newScheduledThreadPool(10);
  10. ScheduledExecutorServicescheduler=(ScheduledExecutorService)executor;
  11. scheduler.scheduleAtFixedRate(task,10,10,TimeUnit.SECONDS);

二、ExecutorService与生命周期

ExecutorService扩展了Executor并添加了一些生命周期管理的方法。一个Executor的生命周期有三种状态,运行关闭终止。Executor创建时处于运行状态。当调用ExecutorService.shutdown()后,处于关闭状态,isShutdown()方法返回true。这时,不应该再想Executor中添加任务,所有已添加的任务执行完毕后,Executor处于终止状态,isTerminated()返回true。

如果Executor处于关闭状态,往Executor提交任务会抛出unchecked exception RejectedExecutionException。

Java代码java并发编程-Executor框架
  1. ExecutorServiceexecutorService=(ExecutorService)executor;
  2. while(!executorService.isShutdown()){
  3. try{
  4. executorService.execute(task);
  5. }catch(RejectedExecutionExceptionignored){
  6. }
  7. }
  8. executorService.shutdown();

三、使用Callable,Future返回结果

Future<V>代表一个异步执行的操作,通过get()方法可以获得操作的结果,如果异步操作还没有完成,则,get()会使当前线程阻塞。FutureTask<V>实现了Future<V>和Runable<V>。Callable代表一个有返回值得操作。

Java代码java并发编程-Executor框架
  1. Callable<Integer>func=newCallable<Integer>(){
  2. publicIntegercall()throwsException{
  3. System.out.println("insidecallable");
  4. Thread.sleep(1000);
  5. returnnewInteger(8);
  6. }
  7. };
  8. FutureTask<Integer>futureTask=newFutureTask<Integer>(func);
  9. ThreadnewThread=newThread(futureTask);
  10. newThread.start();
  11. try{
  12. System.out.println("blockinghere");
  13. Integerresult=futureTask.get();
  14. System.out.println(result);
  15. }catch(InterruptedExceptionignored){
  16. }catch(ExecutionExceptionignored){
  17. }

ExecutoreService提供了submit()方法,传递一个Callable,或Runnable,返回Future。如果Executor后台线程池还没有完成Callable的计算,这调用返回Future对象的get()方法,会阻塞直到计算完成。

例子:并行计算数组的和。

Java代码java并发编程-Executor框架
  1. packageexecutorservice;
  2. importjava.util.ArrayList;
  3. importjava.util.List;
  4. importjava.util.concurrent.Callable;
  5. importjava.util.concurrent.ExecutionException;
  6. importjava.util.concurrent.ExecutorService;
  7. importjava.util.concurrent.Executors;
  8. importjava.util.concurrent.Future;
  9. importjava.util.concurrent.FutureTask;
  10. publicclassConcurrentCalculator{
  11. privateExecutorServiceexec;
  12. privateintcpuCoreNumber;
  13. privateList<Future<Long>>tasks=newArrayList<Future<Long>>();
  14. //内部类
  15. classSumCalculatorimplementsCallable<Long>{
  16. privateint[]numbers;
  17. privateintstart;
  18. privateintend;
  19. publicSumCalculator(finalint[]numbers,intstart,intend){
  20. this.numbers=numbers;
  21. this.start=start;
  22. this.end=end;
  23. }
  24. publicLongcall()throwsException{
  25. Longsum=0l;
  26. for(inti=start;i<end;i++){
  27. sum+=numbers[i];
  28. }
  29. returnsum;
  30. }
  31. }
  32. publicConcurrentCalculator(){
  33. cpuCoreNumber=Runtime.getRuntime().availableProcessors();
  34. exec=Executors.newFixedThreadPool(cpuCoreNumber);
  35. }
  36. publicLongsum(finalint[]numbers){
  37. //根据CPU核心个数拆分任务,创建FutureTask并提交到Executor
  38. for(inti=0;i<cpuCoreNumber;i++){
  39. intincrement=numbers.length/cpuCoreNumber+1;
  40. intstart=increment*i;
  41. intend=increment*i+increment;
  42. if(end>numbers.length)
  43. end=numbers.length;
  44. SumCalculatorsubCalc=newSumCalculator(numbers,start,end);
  45. FutureTask<Long>task=newFutureTask<Long>(subCalc);
  46. tasks.add(task);
  47. if(!exec.isShutdown()){
  48. exec.submit(task);
  49. }
  50. }
  51. returngetResult();
  52. }
  53. /**
  54. *迭代每个只任务,获得部分和,相加返回
  55. *
  56. *@return
  57. */
  58. publicLonggetResult(){
  59. Longresult=0l;
  60. for(Future<Long>task:tasks){
  61. try{
  62. //如果计算未完成则阻塞
  63. LongsubSum=task.get();
  64. result+=subSum;
  65. }catch(InterruptedExceptione){
  66. e.printStackTrace();
  67. }catch(ExecutionExceptione){
  68. e.printStackTrace();
  69. }
  70. }
  71. returnresult;
  72. }
  73. publicvoidclose(){
  74. exec.shutdown();
  75. }
  76. }

Main

Java代码java并发编程-Executor框架
  1. int[]numbers=newint[]{1,2,3,4,5,6,7,8,10,11};
  2. ConcurrentCalculatorcalc=newConcurrentCalculator();
  3. Longsum=calc.sum(numbers);
  4. System.out.println(sum);
  5. calc.close();

四、CompletionService

在刚在的例子中,getResult()方法的实现过程中,迭代了FutureTask的数组,如果任务还没有完成则当前线程会阻塞,如果我们希望任意字任务完成后就把其结果加到result中,而不用依次等待每个任务完成,可以使CompletionService。生产者submit()执行的任务。使用者take()已完成的任务,并按照完成这些任务的顺序处理它们的结果。也就是调用CompletionService的take方法是,会返回按完成顺序放回任务的结果,CompletionService内部维护了一个阻塞队列BlockingQueue,如果没有任务完成,take()方法也会阻塞。修改刚才的例子使用CompletionService:

Java代码java并发编程-Executor框架
  1. publicclassConcurrentCalculator2{
  2. privateExecutorServiceexec;
  3. privateCompletionService<Long>completionService;
  4. privateintcpuCoreNumber;
  5. //内部类
  6. classSumCalculatorimplementsCallable<Long>{
  7. ......
  8. }
  9. publicConcurrentCalculator2(){
  10. cpuCoreNumber=Runtime.getRuntime().availableProcessors();
  11. exec=Executors.newFixedThreadPool(cpuCoreNumber);
  12. completionService=newExecutorCompletionService<Long>(exec);
  13. }
  14. publicLongsum(finalint[]numbers){
  15. //根据CPU核心个数拆分任务,创建FutureTask并提交到Executor
  16. for(inti=0;i<cpuCoreNumber;i++){
  17. intincrement=numbers.length/cpuCoreNumber+1;
  18. intstart=increment*i;
  19. intend=increment*i+increment;
  20. if(end>numbers.length)
  21. end=numbers.length;
  22. SumCalculatorsubCalc=newSumCalculator(numbers,start,end);
  23. if(!exec.isShutdown()){
  24. completionService.submit(subCalc);
  25. }
  26. }
  27. returngetResult();
  28. }
  29. /**
  30. *迭代每个只任务,获得部分和,相加返回
  31. *
  32. *@return
  33. */
  34. publicLonggetResult(){
  35. Longresult=0l;
  36. for(inti=0;i<cpuCoreNumber;i++){
  37. try{
  38. LongsubSum=completionService.take().get();
  39. result+=subSum;
  40. }catch(InterruptedExceptione){
  41. e.printStackTrace();
  42. }catch(ExecutionExceptione){
  43. e.printStackTrace();
  44. }
  45. }
  46. returnresult;
  47. }
  48. publicvoidclose(){
  49. exec.shutdown();
  50. }
  51. }

五、例子HtmlRender

该例子模拟浏览器的Html呈现过程,先呈现文本,再异步下载图片,下载完毕每个图片即显示,见附件eclipse项目htmlreander包。

所有代码见附件,Eclipse项目。本文参考《Java并发编程实践》。

来自:http://www.iteye.com/topic/366591