common-pool2連接池技術初探

導言

連接是一項程序運行中比較重的資源獲取,受限于網絡的不可信等因素,創建連接的開銷一般是比較巨大的,所以才會有各種池化技術的出現,同理于線程池技術,都是為了減少創建連接的耗時,所以線程池技術基本是在高并發的業務領域必須掌握的一項技術

連接池的技術

common-pool2技術是比較常見的一種連接池,在redis的java客戶端jedis中是默認的連接池實現,在這里不鼓勵大家去自己實現一個連接池,因為現成的輪子即使有問題,大部分開源的技術也是支持修改自定義的,在大量使用中經過了大流量考驗的一種技術;所以在這里著重介紹這種常用的連接池技術

get start

首先引入maven依賴:

<dependency>

<groupId>org.apache.commons</groupId>

<artifactId>commons-pool2</artifactId>

<version>2.4.3</version>

</dependency>

common-pool2的核心類是GenericObjectPool類,這個類的作用主要是用來自定義一些配置和池中對象創建的工廠方法,可以看一下具體的代碼實現:

public GenericObjectPool(PooledObjectFactory<T> factory,
            GenericObjectPoolConfig config) {

        super(config, ONAME_BASE, config.getJmxNamePrefix());

        if (factory == null) {
            jmxUnregister(); // tidy up
            throw new IllegalArgumentException("factory may not be null");
        }
        this.factory = factory;

        idleObjects = new LinkedBlockingDeque<PooledObject<T>>(config.getFairness());

        setConfig(config);

        startEvictor(getTimeBetweenEvictionRunsMillis());
    }

該類的構造方法有兩個參數,PooledObjectFactory是創建池中對象的工廠對象,GenericObjectPoolConfig是連接池的配置對象。

連接池配置

最能直接提升工程效率的學習就是能立竿見影的知識,在連接連接池的源碼之前可以先了解一下連接池的主要配置,看看良好的抽象是怎么做的:

maxTotal:池中對象的最大可創建數量,默認為8;
maxIdle:池中對象的最大空閑數量,默認也是8;
minIdle:池中對象的最小空閑數量,默認是0;
timeBetweenEvictionRunsMillis:空閑對象檢測線程的執行周期,單位是ms,默認-1,小于等于0則不執行檢測;
numTestsPerEvictionRun:檢測空閑對象的數量,如果小于等于0,那么每次檢測的是當前空閑數量/該配置的絕對值,,對結果向上取整;
testOnCreate:創建對象是檢測對象是否有效;默認false;
testOnBorrow:在從對象池中獲取對象時檢測對象有效性,同上;
testOnReturn:在歸還對象時檢測有效,同上;
testWhileIdle:在檢測空閑對象不需要移除時,是否對有效性進行檢測,同上;
blockWhenExhausted:當對象池沒有空閑對象時,新的獲取對象的請求是否阻塞,默認true;
maxWaitMillis:表示等待空閑連接的最大時間,如果小于等于0,那么永不超時,一直阻塞等待,只有當大于0時才會生效,超過這個時間后會拋出NoSuchElementException的異常。默認-1,單位milis。
minEvictableIdleTimeMillis:對象空閑后強制移除的時間,小于等于0會被賦值為Long.MAX,大于0時才會生效,表示這個元素空閑時間的最大值。只要超過這個時間,那么就會無視minIdle的配置移除這個對象;
softMinEvictableIdleTimeMillis:當數量大于minIdle時對象被移除的最大空閑時間,賦值規則同上;

主要方法詳細解釋

1.最重要的方法當然是創建資源的方法了:

private PooledObject<T> create() throws Exception {
        //首先獲取連接最大值
        int localMaxTotal = getMaxTotal();
        // This simplifies the code later in this method
        //如果小于0,那么復制為這
        if (localMaxTotal < 0) {
            localMaxTotal = Integer.MAX_VALUE;
        }

        // Flag that indicates if create should:
        // - TRUE:  call the factory to create an object
        // - FALSE: return null
        // - null:  loop and re-test the condition that determines whether to
        //          call the factory
        //用來標記是否需要創建的標志
        Boolean create = null;
        while (create == null) {
            //加鎖進行創建,線程安全
            synchronized (makeObjectCountLock) {
                //創建計數
                final long newCreateCount = createCount.incrementAndGet();
                //和最大數量進行對比
                if (newCreateCount > localMaxTotal) {
                    // The pool is currently at capacity or in the process of
                    // making enough new objects to take it to capacity.
                    //如果已經超過最大計數,那么就將計數減1
                    createCount.decrementAndGet();
                    if (makeObjectCount == 0) {
                        // There are no makeObject() calls in progress so the
                        // pool is at capacity. Do not attempt to create a new
                        // object. Return and wait for an object to be returned
                        //沒有其他正在調用的創建資源的方法,直接返回失敗,等待資源的返回
                        create = Boolean.FALSE;
                    } else {
                        // There are makeObject() calls in progress that might
                        // bring the pool to capacity. Those calls might also
                        // fail so wait until they complete and then re-test if
                        // the pool is at capacity or not.
                        //如果有其他方法正在創建對象,那么就阻塞當前線程,并釋放鎖
                        makeObjectCountLock.wait();
                    }
                } else {
                    // The pool is not at capacity. Create a new object.
                    //創建標志置為真,方法調用數+ 1
                    makeObjectCount++;
                    create = Boolean.TRUE;
                }
            }
        }
        //判斷是否需要創建,不需要直接返回
        if (!create.booleanValue()) {
            return null;
        }

        final PooledObject<T> p;
        try {
            //調用工廠方法來創建對象
            p = factory.makeObject();
        } catch (final Exception e) {
            createCount.decrementAndGet();
            throw e;
        } finally {
            synchronized (makeObjectCountLock) {
                //方法調用標記-1
                makeObjectCount--;
                //喚醒其他阻塞在這個對象上的線程
                makeObjectCountLock.notifyAll();
            }
        }

        final AbandonedConfig ac = this.abandonedConfig;
        if (ac != null && ac.getLogAbandoned()) {
            p.setLogAbandoned(true);
        }
        //已創建計數
        createdCount.incrementAndGet();
        allObjects.put(new IdentityWrapper<T>(p.getObject()), p);
        return p;
    }
最后編輯于
?著作權歸作者所有,轉載或內容合作請聯系作者
平臺聲明:文章內容(如有圖片或視頻亦包括在內)由作者上傳并發布,文章內容僅代表作者本人觀點,簡書系信息發布平臺,僅提供信息存儲服務。
  • 序言:七十年代末,一起剝皮案震驚了整個濱河市,隨后出現的幾起案子,更是在濱河造成了極大的恐慌,老刑警劉巖,帶你破解...
    沈念sama閱讀 228,646評論 6 533
  • 序言:濱河連續發生了三起死亡事件,死亡現場離奇詭異,居然都是意外死亡,警方通過查閱死者的電腦和手機,發現死者居然都...
    沈念sama閱讀 98,595評論 3 418
  • 文/潘曉璐 我一進店門,熙熙樓的掌柜王于貴愁眉苦臉地迎上來,“玉大人,你說我怎么就攤上這事。” “怎么了?”我有些...
    開封第一講書人閱讀 176,560評論 0 376
  • 文/不壞的土叔 我叫張陵,是天一觀的道長。 經常有香客問我,道長,這世上最難降的妖魔是什么? 我笑而不...
    開封第一講書人閱讀 63,035評論 1 314
  • 正文 為了忘掉前任,我火速辦了婚禮,結果婚禮上,老公的妹妹穿的比我還像新娘。我一直安慰自己,他們只是感情好,可當我...
    茶點故事閱讀 71,814評論 6 410
  • 文/花漫 我一把揭開白布。 她就那樣靜靜地躺著,像睡著了一般。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發上,一...
    開封第一講書人閱讀 55,224評論 1 324
  • 那天,我揣著相機與錄音,去河邊找鬼。 笑死,一個胖子當著我的面吹牛,可吹牛的內容都是我干的。 我是一名探鬼主播,決...
    沈念sama閱讀 43,301評論 3 442
  • 文/蒼蘭香墨 我猛地睜開眼,長吁一口氣:“原來是場噩夢啊……” “哼!你這毒婦竟也來了?” 一聲冷哼從身側響起,我...
    開封第一講書人閱讀 42,444評論 0 288
  • 序言:老撾萬榮一對情侶失蹤,失蹤者是張志新(化名)和其女友劉穎,沒想到半個月后,有當地人在樹林里發現了一具尸體,經...
    沈念sama閱讀 48,988評論 1 335
  • 正文 獨居荒郊野嶺守林人離奇死亡,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內容為張勛視角 年9月15日...
    茶點故事閱讀 40,804評論 3 355
  • 正文 我和宋清朗相戀三年,在試婚紗的時候發現自己被綠了。 大學時的朋友給我發了我未婚夫和他白月光在一起吃飯的照片。...
    茶點故事閱讀 42,998評論 1 370
  • 序言:一個原本活蹦亂跳的男人離奇死亡,死狀恐怖,靈堂內的尸體忽然破棺而出,到底是詐尸還是另有隱情,我是刑警寧澤,帶...
    沈念sama閱讀 38,544評論 5 360
  • 正文 年R本政府宣布,位于F島的核電站,受9級特大地震影響,放射性物質發生泄漏。R本人自食惡果不足惜,卻給世界環境...
    茶點故事閱讀 44,237評論 3 347
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望。 院中可真熱鬧,春花似錦、人聲如沸。這莊子的主人今日做“春日...
    開封第一講書人閱讀 34,665評論 0 26
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽。三九已至,卻和暖如春,著一層夾襖步出監牢的瞬間,已是汗流浹背。 一陣腳步聲響...
    開封第一講書人閱讀 35,927評論 1 287
  • 我被黑心中介騙來泰國打工, 沒想到剛下飛機就差點兒被人妖公主榨干…… 1. 我叫王不留,地道東北人。 一個月前我還...
    沈念sama閱讀 51,706評論 3 393
  • 正文 我出身青樓,卻偏偏與公主長得像,于是被迫代替她去往敵國和親。 傳聞我的和親對象是個殘疾皇子,可洞房花燭夜當晚...
    茶點故事閱讀 47,993評論 2 374

推薦閱讀更多精彩內容

  • 我們在服務器開發的過程中,往往會有一些對象,它的創建和初始化需要的時間比較長,比如數據庫連接,網絡IO,大數據對象...
    王廣帥閱讀 5,670評論 1 4
  • Spring Cloud為開發人員提供了快速構建分布式系統中一些常見模式的工具(例如配置管理,服務發現,斷路器,智...
    卡卡羅2017閱讀 134,785評論 18 139
  • 一. Java基礎部分.................................................
    wy_sure閱讀 3,826評論 0 11
  • 一個不會游泳的人,老換游泳池是不能解決問題的。 一個不會做事的人,老換工作也解決不了自己的能力問題。 一個不懂經營...
    日光傾城52fhx閱讀 446評論 0 0
  • 來上海的第四天!正好今天休息,也閑著,那就嘗試一下新的畫法,就拿起筆來畫唄!有點潦草了!哈哈上面被我寫了遼寧號……...
    麥子dee5閱讀 293評論 0 5