什么是連接池
連接池是創建和管理一個連接的緩沖池的技術,這些連接準備好被任何需要它們的線程使用。
簡單來說,就是創建一個容器,并且把資源提前準備好放在里面,比如我們常用的redis連接、mysql連接。
連接池的優點
計算機是由許多零件組裝而成,比如CPU、內存、硬盤等等。
當我們進行網絡連接、請求的時候,就需要在不同組件中傳遞和返回各種信號、數據
比如在CPU、內存、網卡中,數據的傳遞,請求,獲取。
如果在短時間內進行一萬次mysql的連接,就需要在這個往返過程循環,在路上浪費了很多時間、性能消耗。
如果我們先把連接連接好,并且放在連接池中,程序中需要使用就從池中獲取,執行操作。
就省去了反復創建連接、斷開連接的操作。
可以減少I/O操作,提高資源利用率。
連接池數量如何設置
那么一個池需要設置多少數量比較合適呢?是不是越多越好?
連接數量需要根據并發數,以及數據庫的處理情況來決定的,
比如你的數據庫最大只能處理500個連接,那你設置700個,數據庫照樣處理不過來,設置過多并沒有什么用處,反而可能會讓數據庫宕機
所以,一般情況下,連接池總數設置為100-200左右就夠了(相當于200的并發)
這里的連接池數量,說的是總數量,在easyswoole中,需要根據進程來看,每個進程*連接池配置數量=總數量,比如easyswoole中worker進程為8,那你設置20個,那就是20*8=160的總數
easyswoole中為什么會pool empty
這個問題有好幾個可能性。
- 連接信息錯誤,導致一個資源都沒有
- 程序有問題,把資源拿出去,沒有歸還到池內,后續就拿到空了
- 并發高,池的數量少,需要檢查資源占用率,如果占用率沒問題,則提高池內的數量
連接錯誤
如果我們的mysql配置信息錯誤,在easyswoole框架啟動之后,就會去初始化連接池。
此時一直連接失敗,也就沒有產生資源,也沒有將資源放在池內
當你在后續程序獲取池內資源的時候。自然就報了空池的錯誤提示。
程序問題
先來一個連接池的偽代碼
<?php
class Pool{
public static function getIn(){
// 單例模式
}
/**
* 初始化
*/
public function init()
{
// pool準備好就填充指定的資源 比如10個連接
$this->pool = $array;
}
public function get(){
return array_pop($this->pool);
}
public function push($obj)
{
$this->pool[] = $obj;
}
}
如果我們的程序有這樣子的使用場景
<?php
$db = Pool::getIn()->get();
$res = $db->query('sql語句');
然后沒有進行push 歸還操作,那么池內資源一旦拿完,就沒有資源可用了。
在easyswoole框架中,有提供以下方法獲取資源(以mysql-pool為例)
$db = MysqlPool::defer();
$db->rawQuery('select version()');
$data = MysqlPool::invoker(function (MysqlConnection $db){
return $db->rawQuery('select version()');
});
$db = PoolManager::getInstance()->getPool(MysqlPool::class)->getObj();
$data = $db->get('test');
//使用完畢需要回收
PoolManager::getInstance()->getPool(MysqlPool::class)->recycleObj($db);
defer方法將會在本次請求協程退出的時候自動回收
invoker是閉包函數方式 一次運行完馬上自動回收
get方式 就是我們偽代碼的方式 需要自己回收 使用這種方式就需要特別注意啦~!!!
兩種自動回收方式怎么選擇 請接著往下看!
并發高 資源占用率
上面說到兩種自動回收資源的方式,defer和invoker
首先我們來看一個點,defer是在協程退出時自動回收,正常來說,在一個請求到達的時候,swoole會自動創建一個協程給他,比如我們一個http api的請求,就需要整個api跑完,這個協程才會退出
(相當于我們傳統fpm php中 一個腳本全部執行完)
這個時候問題來了,如果我們的業務是這樣子的
<?php
$db = MysqlPool::defer();
$db->rawQuery('select version()');
// 執行好mysql了 做其他任務
// 耗時1.5s 完成其他
實際上使用到mysql資源的可能只有0.1s不到,但是其他運算占用了腳本大量執行時間,要等全部執行完,協程退出了,資源才會回收,這個時候就比較浪費資源的利用率了。占用率比較低。 ! 如果可以的話 ,我們推薦使用invoker 執行一條 馬上回收資源
此時要注意一個點,如果程序有比較多執行語句,要么在一個invoker里執行,要么合理使用invoker
不然就會把性能消耗轉移到不斷get recycle上了
如果以上排查都沒問題,并且確認你的用戶量比較多,并發高,就可以適當提高pool的number