国产精品电影_久久视频免费_欧美日韩国产激情_成年人视频免费在线播放_日本久久亚洲电影_久久都是精品_66av99_九色精品美女在线_蜜臀a∨国产成人精品_冲田杏梨av在线_欧美精品在线一区二区三区_麻豆mv在线看

細數ThreadLocal三大坑,內存泄露僅是小兒科

開發 后端
ThreadLocal寫錯難,但是用錯就很容易,本文將會詳細總結ThreadLocal容易用錯的三個坑。

 

[[398500]]

 我在參加Code Review的時候不止一次聽到有同學說:我寫的這個上下文工具沒問題,在線上跑了好久了。其實這種想法是有問題的,ThreadLocal寫錯難,但是用錯就很容易,本文將會詳細總結ThreadLocal容易用錯的三個坑:

內存泄露

線程池中線程上下文丟失

并行流中線程上下文丟失

內存泄露

由于ThreadLocal的key是弱引用,因此如果使用后不調用remove清理的話會導致對應的value內存泄露。 

  1. @Test  
  2. public void testThreadLocalMemoryLeaks() {  
  3.     ThreadLocal<List<Integer>> localCache = new ThreadLocal<>();  
  4.    List<Integer> cacheInstance = new ArrayList<>(10000);  
  5.     localCache.set(cacheInstance);  
  6.     localCache = new ThreadLocal<>();  

當localCache的值被重置之后cacheInstance被ThreadLocalMap中的value引用,無法被GC,但是其key對ThreadLocal實例的引用是一個弱引用,本來ThreadLocal的實例被localCache和ThreadLocalMap的key同時引用,但是當localCache的引用被重置之后,則ThreadLocal的實例只有ThreadLocalMap的key這樣一個弱引用了,此時這個實例在GC的時候能夠被清理。

其實看過ThreadLocal源碼的同學會知道,ThreadLocal本身對于key為null的Entity有自清理的過程,但是這個過程是依賴于后續對ThreadLocal的繼續使用,假如上面的這段代碼是處于一個秒殺場景下,會有一個瞬間的流量峰值,這個流量峰值也會將集群的內存打到高位(或者運氣不好的話直接將集群內存打滿導致故障),后面由于峰值流量已過,對ThreadLocal的調用也下降,會使得ThreadLocal的自清理能力下降,造成內存泄露。ThreadLocal的自清理是錦上添花,千萬不要指望他雪中送碳。

相比于ThreadLocal中存儲的value對象泄露,ThreadLocal用在web容器中時更需要注意其引起的ClassLoader泄露。

Tomcat官網對在web容器中使用ThreadLocal引起的內存泄露做了一個總結,詳見:https://cwiki.apache.org/confluence/display/tomcat/MemoryLeakProtection,這里我們列舉其中的一個例子。

熟悉Tomcat的同學知道,Tomcat中的web應用由Webapp Classloader這個類加載器的,并且Webapp Classloader是破壞雙親委派機制實現的,即所有的web應用先由Webapp classloader加載,這樣的好處就是可以讓同一個容器中的web應用以及依賴隔離。

下面我們看具體的內存泄露的例子: 

  1. public class MyCounter {  
  2.  private int count = 0 
  3.  public void increment() {  
  4.   count++;  
  5.  }  
  6.  public int getCount() {  
  7.   return count;  
  8.  }  
  9.  
  10. public class MyThreadLocal extends ThreadLocal<MyCounter> {  
  11.  
  12. public class LeakingServlet extends HttpServlet {  
  13.  private static MyThreadLocal myThreadLocal = new MyThreadLocal();  
  14.  protected void doGet(HttpServletRequest request,  
  15.    HttpServletResponse response) throws ServletException, IOException {  
  16.   MyCounter counter = myThreadLocal.get();  
  17.   if (counter == null) {  
  18.    counter = new MyCounter();  
  19.    myThreadLocal.set(counter);  
  20.   }  
  21.   response.getWriter().println(  
  22.     "The current thread served this servlet " + counter.getCount()  
  23.       + " times"); 
  24.    counter.increment();  
  25.  }  

需要注意這個例子中的兩個非常關鍵的點:

MyCounter以及MyThreadLocal必須放到web應用的路徑中,保被Webapp Classloader加載

ThreadLocal類一定得是ThreadLocal的繼承類,比如例子中的MyThreadLocal,因為ThreadLocal本來被Common Classloader加載,其生命周期與Tomcat容器一致。ThreadLocal的繼承類包括比較常見的NamedThreadLocal,注意不要踩坑。

假如LeakingServlet所在的Web應用啟動,MyThreadLocal類也會被Webapp Classloader加載,如果此時web應用下線,而線程的生命周期未結束(比如為LeakingServlet提供服務的線程是一個線程池中的線程),那會導致myThreadLocal的實例仍然被這個線程引用,而不能被GC,期初看來這個帶來的問題也不大,因為myThreadLocal所引用的對象占用的內存空間不太多,問題在于myThreadLocal間接持有加載web應用的webapp classloader的引用(通過myThreadLocal.getClass().getClassLoader()可以引用到),而加載web應用的webapp classloader有持有它加載的所有類的引用,這就引起了Classloader泄露,它泄露的內存就非常可觀了。

線程池中線程上下文丟失

ThreadLocal不能在父子線程中傳遞,因此最常見的做法是把父線程中的ThreadLocal值拷貝到子線程中,因此大家會經常看到類似下面的這段代碼: 

  1. for(value in valueList){  
  2.      Future<?> taskResult = threadPool.submit(new BizTask(ContextHolder.get()));//提交任務,并設置拷貝Context到子線程  
  3.      results.add(taskResult);  
  4.  
  5. for(result in results){  
  6.     result.get();//阻塞等待任務執行完成  

提交的任務定義長這樣: 

  1. class BizTask<T> implements Callable<T>  {  
  2.     private String session = null;     
  3.     public BizTask(String session) {  
  4.         this.session = session;  
  5.     }      
  6.     @Override  
  7.     public T call(){ 
  8.          try {  
  9.             ContextHolder.set(this.session);  
  10.             // 執行業務邏輯  
  11.         } catch(Exception e){  
  12.             //log error  
  13.         } finally {  
  14.             ContextHolder.remove(); // 清理 ThreadLocal 的上下文,避免線程復用時context互串  
  15.         }  
  16.         return null;  
  17.     }  

對應的線程上下文管理類為: 

  1. class ContextHolder {  
  2.     private static ThreadLocal<String> localThreadCache = new ThreadLocal<>();     
  3.     public static void set(String cacheValue) {  
  4.         localThreadCache.set(cacheValue); 
  5.     }      
  6.     public static String get() {  
  7.         return localThreadCache.get();  
  8.     }      
  9.     public static void remove() {  
  10.         localThreadCache.remove();  
  11.     }     

這么寫倒也沒有問題,我們再看看線程池的設置: 

  1. ThreadPoolExecutor executorPool = new ThreadPoolExecutor(20, 40, 30, TimeUnit.SECONDS, new LinkedBlockingQueue<Runnable>(40), new XXXThreadFactory(), ThreadPoolExecutor.CallerRunsPolicy); 

其中最后一個參數控制著當線程池滿時,該如何處理提交的任務,內置有4種策略 

  1. ThreadPoolExecutor.AbortPolicy //直接拋出異常  
  2. ThreadPoolExecutor.DiscardPolicy //丟棄當前任務  
  3. ThreadPoolExecutor.DiscardOldestPolicy //丟棄工作隊列頭部的任務  
  4. ThreadPoolExecutor.CallerRunsPolicy //轉串行執行 

可以看到,我們初始化線程池的時候指定如果線程池滿,則新提交的任務轉為串行執行,那我們之前的寫法就會有問題了,串行執行的時候調用ContextHolder.remove();會將主線程的上下文也清理,即使后面線程池繼續并行工作,傳給子線程的上下文也已經是null了,而且這樣的問題很難在預發測試的時候發現。

并行流中線程上下文丟失

如果ThreadLocal碰到并行流,也會有很多有意思的事情發生,比如有下面的代碼: 

  1. class ParallelProcessor<T> {   
  2.     public void process(List<T> dataList) {  
  3.         // 先校驗參數,篇幅限制先省略不寫  
  4.         dataList.parallelStream().forEach(entry -> {  
  5.             doIt();  
  6.         }); 
  7.     } 
  8.      private void doIt() {  
  9.         String session = ContextHolder.get();  
  10.         // do something  
  11.     }  

這段代碼很容易在線下測試的過程中發現不能按照預期工作,因為并行流底層的實現也是一個ForkJoin線程池,既然是線程池,那ContextHolder.get()可能取出來的就是一個null。我們順著這個思路把代碼再改一下: 

  1. class ParallelProcessor<T> {   
  2.      private String session;     
  3.     public ParallelProcessor(String session) {  
  4.         this.session = session;  
  5.     }      
  6.     public void process(List<T> dataList) {  
  7.         // 先校驗參數,篇幅限制先省略不寫  
  8.         dataList.parallelStream().forEach(entry -> {  
  9.             try {  
  10.                 ContextHolder.set(session);  
  11.                 // 業務處理  
  12.                 doIt();  
  13.             } catch (Exception e) {  
  14.                 // log it  
  15.             } finally {  
  16.                 ContextHolder.remove();  
  17.             }  
  18.         });  
  19.     }  
  20.      private void doIt() {  
  21.         String session = ContextHolder.get();  
  22.         // do something  
  23.     }  

修改完后的這段代碼可以工作嗎?如果運氣好,你會發現這樣改又有問題,運氣不好,這段代碼在線下運行良好,這段代碼就順利上線了。不久你就會發現系統中會有一些其他很詭異的bug。原因在于并行流的設計比較特殊,父線程也有可能參與到并行流線程池的調度,那如果上面的process方法被父線程執行,那么父線程的上下文會被清理。導致后續拷貝到子線程的上下文都為null,同樣產生丟失上下文的問題,關于并行流的實現可以參考文章啥?用了并行流還更慢了。 

 

責任編輯:龐桂玉 來源: Java知音
相關推薦

2022-03-17 17:54:19

人臉識別AI人工智能

2010-01-07 15:07:34

Ubuntu Anju

2022-06-06 00:25:09

Golangpanic死鎖

2022-08-26 07:33:49

內存JVMEntry

2025-11-13 08:22:03

2024-10-31 09:24:42

2019-08-07 06:16:28

物聯網IOT技術

2021-12-28 00:27:24

運營商內卷網絡

2023-06-30 08:10:14

JavaBigDecimal

2023-04-16 19:34:01

2022-10-18 08:38:16

內存泄漏線程

2017-03-30 08:42:42

技術信息安全開源

2018-04-02 07:32:15

2023-02-17 08:20:24

SQL腳本數據庫

2021-04-23 20:59:02

ThreadLocal內存

2022-05-15 08:13:50

Mysql數據庫Mycat

2015-11-20 10:39:31

2024-05-30 12:15:04

2021-09-26 09:16:45

RedisGeo 類型數據類型

2018-07-19 16:00:25

點贊
收藏

51CTO技術棧公眾號

毛片手机在线观看| www.97| 日韩av字幕| 亚洲精品mp4| 国产福利图片| 国产美女久久久久| 国产免费一区二区三区香蕉精| 电影在线观看一区| 欧洲视频一区二区| 91精品国产高久久久久久五月天| 国产精品资源网站| 国产偷国产偷亚洲高清97cao| 国产一区二区三区不卡av| 日韩精品www| 菠萝蜜视频国产在线播放| 亚洲r级在线视频| 黄页在线观看| 欧美极品xxx| 男女高潮又爽又黄又无遮挡| 久久精品99久久久| 欧美下载看逼逼| 欧美日韩国产欧| 日韩一级裸体免费视频| 激情视频网站在线播放色| 91麻豆精品国产91久久久使用方法| 最新天堂资源在线资源| 亚洲三级视频在线观看| 无限资源日本好片| 久久蜜臀中文字幕| 国产中文字幕视频在线观看| 国产精品中文字幕一区二区三区| 日韩激情视频| 首页欧美精品中文字幕| 欧美日韩中文国产一区发布| 欧美aⅴ99久久黑人专区| 国产精品视频网| 精品毛片免费观看| 欧美综合国产精品久久丁香| jazzjazz国产精品久久| 欧美精品激情在线| 欧美大胆a级| 日韩av色在线| 九九热线有精品视频99| 日韩免费观看av| 日韩精品1区| 91亚洲永久免费精品| 亚洲精品二区三区| 亚洲www在线| 亚洲精品孕妇| 亚洲 国产 日韩 综合一区| 久久精品日韩欧美| 亚洲精品国产精品国自产观看| 免费在线观看一区二区三区| 综合色婷婷一区二区亚洲欧美国产| 久久国产精品色| 黄色成人在线免费观看| 2024国产精品视频| 国产精品亚洲二区在线观看| 欧美激情一区二区三区不卡| 天天综合天天| 色婷婷综合久久久中文一区二区| h视频网站在线观看| 亚洲国产精品va在线看黑人| 国产极品久久久久久久久波多结野| 日韩中文字幕在线免费观看| av日韩精品| 亚洲一区二区三区视频播放| 久久精品人人| 黄色动漫在线免费看| 亚洲乱码国产乱码精品精可以看| 天堂a√在线| 日韩h在线观看| 亚洲国产一区二区三区网站| 国产精品女主播| 老司机亚洲精品| 99色精品视频| 亚洲国产精品一区二区www | 日韩aaa久久蜜桃av| 国产91精品高潮白浆喷水| 亚洲成人tv| 女女百合国产免费网站| 自拍视频在线观看一区二区| 在线看的av网站| 中文字幕亚洲天堂| 国产精品99在线观看| 老司机av福利| 亚洲午夜在线观看视频在线| 性欧美videoshd高清| 欧美精品国产精品日韩精品| 韩日成人av| avav在线看| 在线成人免费观看| 中文无码日韩欧| 久久婷婷开心| www激情久久| 婷婷成人激情| 亚洲ww精品| 欧洲亚洲免费在线| 奇米888四色在线精品| bt电影在线| 国产视频精品久久久| 最近国产精品视频| 一区二区三区四区久久| 亚洲国产精品自拍| 日本黄色一区| 国产一区二区三区av在线| 久久麻豆一区二区| www视频在线观看免费| 欧美另类第一页| 日韩高清一级片| 伊人发布在线| 伊人成人开心激情综合网| 久久高清免费| 日本在线视频www| 国产一区二区在线免费| 国产精品久线在线观看| 婷婷色在线资源| 国产美女直播视频一区| 日韩精品电影在线| 好紧好硬好湿我太爽了| 日韩午夜在线播放| 老司机午夜精品99久久| 午夜男人视频在线观看| 久久激情综合| 丁香视频免费观看| 亚洲国产毛片完整版| 欧美欧美黄在线二区| 欧美三级午夜理伦三级老人| 富二代精品短视频| 国产精品色呦| 免费拍拍拍网站| 99精品欧美一区二区三区小说| 亚洲天堂久久久久久久| 午夜在线观看视频网站| 欧美精品在线网站| 国产精品香蕉在线观看| 欧美在线视频全部完| 欧美亚洲视频一区二区| 国产精品资源网| 18在线观看的| 99re视频在线| 夜夜精品视频一区二区| 亚洲一区二区自拍偷拍| 澳门av一区二区三区| 久久久久久高清| 精品久久在线播放| 日韩mv欧美mv国产网站| 国产日韩欧美精品在线观看| 欧美精品一区二区在线观看| 亚洲美女色禁图| 四虎精品成人影院观看地址| 欧美在线一区二区三区四| 久久精品网站免费观看| 日本免费一区二区三区等视频| aaa免费在线观看| 欧美精品色综合| 亚洲国产影院| 免费在线毛片网站| 国外成人在线视频网站| 在线观看国产一区二区| 欧美日韩综合| 免费在线看黄网站| 亚洲免费精品视频| 亚洲天堂成人在线| 成a人片亚洲日本久久| av成人亚洲| 免费男同深夜夜行网站| 久久久久久久久爱| 亚洲一区二区在线播放相泽| 欧美丰满日韩| h网站在线免费观看| 欧美在线一二三区| 亚洲图片制服诱惑| 欧美激情一区二区三区四区| 精品大片一区二区| 91在线网址| 欧洲金发美女大战黑人| 久久精品99无色码中文字幕| 国产精品沙发午睡系列990531| 欧美精品久久久久久| √天堂资源地址在线官网| 色狠狠久久av五月综合|| 亚洲美女精品成人在线视频| 99精品欧美一区| 国产成人av| 宅男在线观看免费高清网站| 亚洲国产精品影视| 在线性视频日韩欧美| 亚洲男人的天堂网| 羞羞视频在线观看欧美| 日韩中文影院| 天堂在线视频中文网| 久久久精品国产一区二区三区| 亚洲人午夜精品| 亚洲一区二区欧美激情| 日本女优在线视频一区二区| 亚洲视频精选| 黄色片网站在线观看| 欧在线一二三四区| 91久久久一线二线三线品牌|