多線程與線程池的一系列問題

自己開的坑,陸陸續(xù)續(xù)填坑中,自以為是地覺得基礎(chǔ)知識很扎實,一個人接手了公司的一個小項目,結(jié)果遇到了多線程并發(fā)和阻塞的問題,讓人欲哭無淚。特開此文,記錄開發(fā)中遇到的各種問題以及解決方法,引以為戒。

一、線程池

我所負責的項目是一個高并發(fā)的任務調(diào)度,所以就很想當然地用到了線程池,線程池的基本原理也不用多說,但是不得不提的一點是線程池的拒絕策略,這個是經(jīng)常被大家所忽略的,我當初也是直接復制粘貼網(wǎng)上的代碼根本沒有細看,最后導致的一個問題就是任務沒法管理,完全脫離了控制。

我當前的任務管理是用spring的定時器實現(xiàn)的,定時器的作用是每個一段時間就新建幾個任務提交給線程池進行處理,這樣可以保持任務的并發(fā)量維持在一定的量并且不會浪費cpu,但是當這類任務已經(jīng)完成,不再需要執(zhí)行時,我關(guān)閉定時器,而任務還是在執(zhí)行之中。其原因在于定時器的觸發(fā)間隔內(nèi),我所提交的任務線程池不一定能夠執(zhí)行完,在舊有的任務沒有完成的情況下,又會有新的任務提交進來,這種情況得不到解決,導致線程池被塞滿各種來不及執(zhí)行的任務。而當定時器取消該任務并且不再提交時,線程池中的未執(zhí)行任務還在排隊等候,總有一天能夠被cpu翻到牌子得以運行,這也導致了任務數(shù)量超出預期效果。

那么為了更好地控制任務,我們需要改變策略

1.在執(zhí)行任務的時候檢查任務數(shù)量是否足夠,然后再選擇執(zhí)行。

我顯然不喜歡這種,強迫癥不允許這樣浪費

2.調(diào)整線程池大小,策略設(shè)置為拒絕所有,就是隊列滿時再提交任務直接拒絕。

rejectedExecutionHandler選擇AbortPolicy,其他策略可以自行百度

這樣的話同時也限制了其他任務,我不能接受

3.待任務執(zhí)行完成再提交新的任務

這不得不提到spring自帶的定時任務了,在spring4.x.x版本以上,實現(xiàn)了基于注解的定時器,與quartz差不多,提供了三種定時器,cron,fixDelay和fixRate。

cron是基于cron表達式的一種定時器,更靈活當然也更復雜,fixDelay是每隔一段時間執(zhí)行一次任務,而fixRate顧名思義就是心跳,與fixDelay差不多,但又有很大的不同。

特別需要注意的是這些定時器的觸發(fā)策略。cron和fixDelay是在上一個定時任務完成之后再觸發(fā)定時器,也就是說如果前一個定時任務還沒有執(zhí)行完成,不會再創(chuàng)建新的定時任務。只要當前一個任務執(zhí)行完成之后再來啟動自己的定時功能,等到正確的時間進行觸發(fā)。而fixRate則不同,它是不管上一個任務是否完成,都會在觸發(fā)器規(guī)定的時間內(nèi)創(chuàng)建一個定時任務,可以說是相當準時。

基于以上,我選擇了cron表達式。

最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
平臺聲明:文章內(nèi)容(如有圖片或視頻亦包括在內(nèi))由作者上傳并發(fā)布,文章內(nèi)容僅代表作者本人觀點,簡書系信息發(fā)布平臺,僅提供信息存儲服務。
  • 序言:七十年代末,一起剝皮案震驚了整個濱河市,隨后出現(xiàn)的幾起案子,更是在濱河造成了極大的恐慌,老刑警劉巖,帶你破解...
    沈念sama閱讀 228,461評論 6 532
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件,死亡現(xiàn)場離奇詭異,居然都是意外死亡,警方通過查閱死者的電腦和手機,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 98,538評論 3 417
  • 文/潘曉璐 我一進店門,熙熙樓的掌柜王于貴愁眉苦臉地迎上來,“玉大人,你說我怎么就攤上這事。” “怎么了?”我有些...
    開封第一講書人閱讀 176,423評論 0 375
  • 文/不壞的土叔 我叫張陵,是天一觀的道長。 經(jīng)常有香客問我,道長,這世上最難降的妖魔是什么? 我笑而不...
    開封第一講書人閱讀 62,991評論 1 312
  • 正文 為了忘掉前任,我火速辦了婚禮,結(jié)果婚禮上,老公的妹妹穿的比我還像新娘。我一直安慰自己,他們只是感情好,可當我...
    茶點故事閱讀 71,761評論 6 410
  • 文/花漫 我一把揭開白布。 她就那樣靜靜地躺著,像睡著了一般。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發(fā)上,一...
    開封第一講書人閱讀 55,207評論 1 324
  • 那天,我揣著相機與錄音,去河邊找鬼。 笑死,一個胖子當著我的面吹牛,可吹牛的內(nèi)容都是我干的。 我是一名探鬼主播,決...
    沈念sama閱讀 43,268評論 3 441
  • 文/蒼蘭香墨 我猛地睜開眼,長吁一口氣:“原來是場噩夢啊……” “哼!你這毒婦竟也來了?” 一聲冷哼從身側(cè)響起,我...
    開封第一講書人閱讀 42,419評論 0 288
  • 序言:老撾萬榮一對情侶失蹤,失蹤者是張志新(化名)和其女友劉穎,沒想到半個月后,有當?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體,經(jīng)...
    沈念sama閱讀 48,959評論 1 335
  • 正文 獨居荒郊野嶺守林人離奇死亡,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點故事閱讀 40,782評論 3 354
  • 正文 我和宋清朗相戀三年,在試婚紗的時候發(fā)現(xiàn)自己被綠了。 大學時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片。...
    茶點故事閱讀 42,983評論 1 369
  • 序言:一個原本活蹦亂跳的男人離奇死亡,死狀恐怖,靈堂內(nèi)的尸體忽然破棺而出,到底是詐尸還是另有隱情,我是刑警寧澤,帶...
    沈念sama閱讀 38,528評論 5 359
  • 正文 年R本政府宣布,位于F島的核電站,受9級特大地震影響,放射性物質(zhì)發(fā)生泄漏。R本人自食惡果不足惜,卻給世界環(huán)境...
    茶點故事閱讀 44,222評論 3 347
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望。 院中可真熱鬧,春花似錦、人聲如沸。這莊子的主人今日做“春日...
    開封第一講書人閱讀 34,653評論 0 26
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽。三九已至,卻和暖如春,著一層夾襖步出監(jiān)牢的瞬間,已是汗流浹背。 一陣腳步聲響...
    開封第一講書人閱讀 35,901評論 1 286
  • 我被黑心中介騙來泰國打工, 沒想到剛下飛機就差點兒被人妖公主榨干…… 1. 我叫王不留,地道東北人。 一個月前我還...
    沈念sama閱讀 51,678評論 3 392
  • 正文 我出身青樓,卻偏偏與公主長得像,于是被迫代替她去往敵國和親。 傳聞我的和親對象是個殘疾皇子,可洞房花燭夜當晚...
    茶點故事閱讀 47,978評論 2 374

推薦閱讀更多精彩內(nèi)容

  • 前段時間遇到這樣一個問題,有人問微信朋友圈的上傳圖片的功能怎么做才能讓用戶的等待時間較短,比如說一下上傳9張圖片,...
    加油碼農(nóng)閱讀 1,212評論 0 2
  • 先看幾個概念:線程:進程中負責程序執(zhí)行的執(zhí)行單元。一個進程中至少有一個線程。多線程:解決多任務同時執(zhí)行的需求,合理...
    yeying12321閱讀 561評論 0 0
  • 先看幾個概念:線程:進程中負責程序執(zhí)行的執(zhí)行單元。一個進程中至少有一個線程。 多線程:解決多任務同時執(zhí)行的需求,合...
    孫福生微博閱讀 95,684評論 38 314
  • 當你寧靜無依,于匆匆歲月中久久心寄卻未能輝映半點皎潔,明月當空你是否還能守候。當你旁觀糾纏,于茫茫人群中殷殷熱忱卻...
    青春被忘路閱讀 249評論 0 2
  • 3.馮神神啊 我第一次見到Q小姐,是在鵝嶺那條大馬路上,她從出租車里出來,背一個Gucci的包,頭發(fā)隨風起舞。對Q...
    馮神神啊閱讀 242評論 1 4