Linux网络编程:线程池的使用


一、什么是线程池

应用程序可以有多个线程,这些线程在休眠状态中需要耗费大量时间来等待事件发生。其他线程可能进入睡眠状态,并且仅定期被唤醒以轮循更改或更新状态信息,然后再次进入休眠状态。为了简化对这些线程的管理,.NET框架为每个进程提供了一个线程池,一个线程池有若干个等待操作状态,当一个等待操作完成时,线程池中的辅助线程会执行回调函数。线程池中的线程由系统管理,程序员不需要费力于线程管理,可以集中精力处理应用程序任务。

线程池是一种多线程处理形式,处理过程中将任务添加到队列,然后在创建线程后自动启动这些任务。线程池线程都是后台线程.每个线程都使用默认的堆栈大小,以默认的优先级运行,并处于多线程单元中.如果某个线程在托管代码中空闲(如正在等待某个事件),则线程池将插入另一个辅助线程来使所有处理器保持繁忙.如果所有线程池线程都始终保持繁忙,但队列中包含挂起的工作,则线程池将在一段时间后创建另一个辅助线程但线程的数目永远不会超过最大值.超过最大值的线程可以排队,但他们要等到其他线程完成后才启动

二、什么情况下不要使用线程池

●如果需要使一个任务具有特定优先级

●如果具有可能会长时间运行(并因此阻塞其他任务)的任务

●如果需要将线程放置到单线程单元中(线程池中的线程均处于多线程单元中)

●如果需要永久标识来标识和控制线程,比如想使用专用线程来终止该线程,将其挂起或按名称发现它


下面给出一个线程池的例子,以供大家参考:

[cpp]

  1. #include <stdio.h>    
  2. #include <stdlib.h>    
  3. #include <unistd.h>    
  4. #include <sys/types.h>    
  5. #include <pthread.h>    
  6. #include <assert.h>    
  7.   
  8. /*  
  9. *线程池里所有运行和等待的任务都是一个CThread_worker  
  10. *由于所有任务都在链表里,所以是一个链表结构  
  11. */   
  12. typedef struct worker   
  13. {   
  14.     /*回调函数,任务运行时会调用此函数,注意也可声明成其它形式*/   
  15.     void *(*process) (void *arg);   
  16.     void *arg;/*回调函数的参数*/   
  17.     struct worker *next;   
  18.   
  19. } CThread_worker;   
  20.   
  21.   
  22.   
  23. /*线程池结构*/   
  24. typedef struct   
  25. {   
  26.     pthread_mutex_t queue_lock;   
  27.     pthread_cond_t queue_ready;   
  28.   
  29.     /*链表结构,线程池中所有等待任务*/   
  30.     CThread_worker *queue_head;   
  31.   
  32.     /*是否销毁线程池*/   
  33.     int shutdown;   
  34.     pthread_t *threadid;   
  35.     /*线程池中允许的活动线程数目*/   
  36.     int max_thread_num;   
  37.     /*当前等待队列的任务数目*/   
  38.     int cur_queue_size;   
  39.   
  40. } CThread_pool;   
  41.   
  42.   
  43.   
  44. int pool_add_worker (void *(*process) (void *arg), void *arg);   
  45. void *thread_routine (void *arg);   
  46.   
  47.   
  48.   
  49. static CThread_pool *pool = NULL;   
  50. void pool_init (int max_thread_num)   
  51. {   
  52.     pool = (CThread_pool *) malloc (sizeof (CThread_pool));   
  53.   
  54.     pthread_mutex_init (&(pool->queue_lock), NULL);   
  55.     pthread_cond_init (&(pool->queue_ready), NULL);   
  56.   
  57.     pool->queue_head = NULL;   
  58.   
  59.     pool->max_thread_num = max_thread_num;   
  60.     pool->cur_queue_size = 0;   
  61.   
  62.     pool->shutdown = 0;   
  63.   
  64.     pool->threadid =   
  65.         (pthread_t *) malloc (max_thread_num * sizeof (pthread_t));   
  66.     int i = 0;   
  67.     for (i = 0; i < max_thread_num; i++)   
  68.     {    
  69.         pthread_create (&(pool->threadid[i]), NULL, thread_routine,   
  70.                 NULL);   
  71.     }   
  72. }   
  73.   
  74.   
  75.   
  76. /*向线程池中加入任务*/   
  77. int   
  78. pool_add_worker (void *(*process) (void *arg), void *arg)   
  79. {   
  80.     /*构造一个新任务*/   
  81.     CThread_worker *newworker =   
  82.         (CThread_worker *) malloc (sizeof (CThread_worker));   
  83.     newworker->process = process;   
  84.     newworker->arg = arg;   
  85.     newworker->next = NULL;/*别忘置空*/   
  86.   
  87.     pthread_mutex_lock (&(pool->queue_lock));   
  88.     /*将任务加入到等待队列中*/   
  89.     CThread_worker *member = pool->queue_head;   
  90.     if (member != NULL)   
  91.     {   
  92.         while (member->next != NULL)   
  93.             member = member->next;   
  94.         member->next = newworker;   
  95.     }   
  96.     else   
  97.     {   
  98.         pool->queue_head = newworker;   
  99.     }   
  100.   
  101.     assert (pool->queue_head != NULL);   
  102.   
  103.     pool->cur_queue_size++;   
  104.     pthread_mutex_unlock (&(pool->queue_lock));   
  105.     /*好了,等待队列中有任务了,唤醒一个等待线程;  
  106.     注意如果所有线程都在忙碌,这句没有任何作用*/   
  107.     pthread_cond_signal (&(pool->queue_ready));   
  108.     return 0;   
  109. }   
  110.   
  111.   
  112.   
  113. /*销毁线程池,等待队列中的任务不会再被执行,但是正在运行的线程会一直  
  114. 把任务运行完后再退出*/   
  115. int pool_destroy ()   
  116. {   
  117.     if (pool->shutdown)   
  118.         return -1;/*防止两次调用*/   
  119.     pool->shutdown = 1;   
  120.   
  121.     /*唤醒所有等待线程,线程池要销毁了*/   
  122.     pthread_cond_broadcast (&(pool->queue_ready));   
  123.   
  124.     /*阻塞等待线程退出,否则就成僵尸了*/   
  125.     int i;   
  126.     for (i = 0; i < pool->max_thread_num; i++)   
  127.         pthread_join (pool->threadid[i], NULL);   
  128.     free (pool->threadid);   
  129.   
  130.     /*销毁等待队列*/   
  131.     CThread_worker *head = NULL;   
  132.     while (pool->queue_head != NULL)   
  133.     {   
  134.         head = pool->queue_head;   
  135.         pool->queue_head = pool->queue_head->next;   
  136.         free (head);   
  137.     }   
  138.     /*条件变量和互斥量也别忘了销毁*/   
  139.     pthread_mutex_destroy(&(pool->queue_lock));   
  140.     pthread_cond_destroy(&(pool->queue_ready));   
  141.        
  142.     free (pool);   
  143.     /*销毁后指针置空是个好习惯*/   
  144.     pool=NULL;   
  145.     return 0;   
  146. }   
  147.   
  148.   
  149.   
  150. void * thread_routine (void *arg)   
  151. {   
  152.     printf ("starting thread 0x%x\n", pthread_self ());   
  153.     while (1)   
  154.     {   
  155.         pthread_mutex_lock (&(pool->queue_lock));   
  156.         /*如果等待队列为0并且不销毁线程池,则处于阻塞状态; 注意  
  157.         pthread_cond_wait是一个原子操作,等待前会解锁,唤醒后会加锁*/   
  158.         while (pool->cur_queue_size == 0 && !pool->shutdown)   
  159.         {   
  160.             printf ("thread 0x%x is waiting\n", pthread_self ());   
  161.             pthread_cond_wait (&(pool->queue_ready), &(pool->queue_lock));   
  162.         }   
  163.   
  164.         /*线程池要销毁了*/   
  165.         if (pool->shutdown)   
  166.         {   
  167.             /*遇到break,continue,return等跳转语句,千万不要忘记先解锁*/   
  168.             pthread_mutex_unlock (&(pool->queue_lock));   
  169.             printf ("thread 0x%x will exit\n", pthread_self ());   
  170.             pthread_exit (NULL);   
  171.         }   
  172.   
  173.         printf ("thread 0x%x is starting to work\n", pthread_self ());   
  174.   
  175.         /*assert是调试的好帮手*/   
  176.         assert (pool->cur_queue_size != 0);   
  177.         assert (pool->queue_head != NULL);   
  178.            
  179.         /*等待队列长度减去1,并取出链表中的头元素*/   
  180.         pool->cur_queue_size--;   
  181.         CThread_worker *worker = pool->queue_head;   
  182.         pool->queue_head = worker->next;   
  183.         pthread_mutex_unlock (&(pool->queue_lock));   
  184.   
  185.         /*调用回调函数,执行任务*/   
  186.         (*(worker->process)) (worker->arg);   
  187.         free (worker);   
  188.         worker = NULL;   
  189.     }   
  190.     /*这一句应该是不可达的*/   
  191.     pthread_exit (NULL);   
  192. }  
  193.   
  194. void * myprocess (void *arg)   
  195. {   
  196.     printf ("threadid is 0x%x, working on task %d\n", pthread_self (),*(int *) arg);   
  197.     sleep (1);/*休息一秒,延长任务的执行时间*/   
  198.     return NULL;   
  199. }   
  200.   
  201. int main (int argc, char **argv)   
  202. {   
  203.     pool_init (3);/*线程池中最多三个活动线程*/   
  204.        
  205.     /*连续向池中投入10个任务*/   
  206.     int *workingnum = (int *) malloc (sizeof (int) * 10);   
  207.     int i;   
  208.     for (i = 0; i < 10; i++)   
  209.     {   
  210.         workingnum[i] = i;   
  211.         pool_add_worker (myprocess, &workingnum[i]);   
  212.     }   
  213.     /*等待所有任务完成*/   
  214.     sleep (5);   
  215.     /*销毁线程池*/   
  216.     pool_destroy ();   
  217.   
  218.     free (workingnum);   
  219.     return 0;   
  220. }  

相关内容