一、概念
數(shù)據(jù)庫連接池(Connection pooling)是程序啟動時建立足夠的數(shù)據(jù)庫連接,并將這些連接組成一個連接池,由程序動態(tài)地對池中的連接進行申請,使用,釋放。
簡單的說:創(chuàng)建數(shù)據(jù)庫連接是一個很耗時的操作,也容易對數(shù)據(jù)庫造成安全隱患。所以,在程序初始化的時候,集中創(chuàng)建多個數(shù)據(jù)庫連接,并把他們集中管理,供程序使用,可以保證較快的數(shù)據(jù)庫讀寫速度,還更加安全可靠。
二、圖示
不使用數(shù)據(jù)庫連接池
如果不使用數(shù)據(jù)庫連接池,對于每一次SQL操作,都要走一遍下面完整的流程:
1.TCP建立連接的三次握手(客戶端與 MySQL服務器的連接基于TCP協(xié)議)
2.MySQL認證的三次我收
3.真正的SQL執(zhí)行
4.MySQL的關閉
5.TCP的四次握手關閉
可以看出來,為了執(zhí)行一條SQL,需要進行大量的初始化與關閉操作
使用數(shù)據(jù)庫連接池
如果使用數(shù)據(jù)庫連接池,那么會事先申請(初始化)好相關的數(shù)據(jù)庫連接,然后在之后的SQL操作中會復用這些數(shù)據(jù)庫連接,操作結(jié)束之后數(shù)據(jù)庫也不會斷開連接,而是將數(shù)據(jù)庫對象放回到數(shù)據(jù)庫連接池中
三、數(shù)據(jù)庫連接池的好處
資源重用:由于數(shù)據(jù)庫連接得到重用,避免了頻繁的創(chuàng)建、釋放連接引起的性能開銷,在減少系統(tǒng)消耗的基礎上,另一方面也增進了系統(tǒng)運行環(huán)境的平穩(wěn)性(減少內(nèi)存碎片以及數(shù)據(jù)庫臨時進程/線程的數(shù)量)。
更快的系統(tǒng)響應速度:數(shù)據(jù)庫連接池在初始化過程中,往往已經(jīng)創(chuàng)建了若干數(shù)據(jù)庫連接置于池中備用。此時連接的初始化工作均已完成。對于業(yè)務請求處理而言,直接利用現(xiàn)有可用連接,避免了從數(shù)據(jù)庫連接初始化和釋放過程的開銷,從而縮減了系統(tǒng)整體響應時間。
統(tǒng)一的連接管理,避免數(shù)據(jù)庫連接泄露:在較為完備的數(shù)據(jù)庫連接池實現(xiàn)中,可根據(jù)預先的連接占用超時設定,強制收回被占用連接。從而避免了常規(guī)數(shù)據(jù)庫連接操作中可能出現(xiàn)的資源泄露。
四、連接池數(shù)量設置
連接數(shù) = ((核心數(shù) * 2) + 有效磁盤數(shù))
如果說你的服務器CPU是4核i7的,連接池大小應該為((4*2)+1)=9
五、MySQL連接池演示
源碼下載
下載方式:
https://github.com/dongyusheng/csdn-code/tree/master/db_pool(Github中下載)
db_pool目錄下有兩個目錄,mysql_pool目錄為MySQL連接池代碼,redis_pool為redis連接池代碼
下面介紹mysql_pool
CDBConn解析
class CDBConn {
public:
// ...
private:
CDBPool* m_pDBPool; // to get MySQL server information
MYSQL* m_mysql; // 對應一個連接
char m_escape_string[MAX_ESCAPE_STRING_LEN + 1];
};
概念:代表一個數(shù)據(jù)連接對象實例
相關成員:
m_pDBPool:該數(shù)據(jù)庫連接對象所屬的數(shù)據(jù)庫連接池
構(gòu)造函數(shù):綁定自己所屬于哪個數(shù)據(jù)庫連接池
CDBConn::CDBConn(CDBPool *pPool)
{
m_pDBPool = pPool;
m_mysql = NULL;
}
Init()函數(shù):創(chuàng)建數(shù)據(jù)庫連接句柄
int CDBConn::Init()
{
m_mysql = mysql_init(NULL);
if (!m_mysql)
{
log_error("mysql_init failedn");
return 1;
}
my_bool reconnect = true;
mysql_options(m_mysql, MYSQL_OPT_RECONNECT, &reconnect); // 配合mysql_ping實現(xiàn)自動重連
mysql_options(m_mysql, MYSQL_SET_CHARSET_NAME, "utf8mb4");
if (!mysql_real_connect(m_mysql, m_pDBPool- >GetDBServerIP(), m_pDBPool- >GetUsername(), m_pDBPool- >GetPasswrod(),
m_pDBPool- >GetDBName(), m_pDBPool- >GetDBServerPort(), NULL, 0))
{
log_error("mysql_real_connect failed: %sn", mysql_error(m_mysql));
return 2;
}
return 0;
}
CDBPool解析
class CDBPool {
public:
// ...
private:
string m_pool_name; // 連接池名稱
string m_db_server_ip; // 數(shù)據(jù)庫ip
uint16_t m_db_server_port; // 數(shù)據(jù)庫端口
string m_username; // 用戶名
string m_password; // 用戶密碼
string m_db_name; // db名稱
int m_db_cur_conn_cnt; // 當前啟用的連接數(shù)量
int m_db_max_conn_cnt; // 最大連接數(shù)量
list< CDBConn* > m_free_list; // 空閑的連接
CThreadNotify m_free_notify; // 信號量
};
概念:代表一個數(shù)據(jù)庫連接池
相關成員:
- m_db_cur_conn_cnt:當前數(shù)據(jù)庫連接池的連接數(shù)量
- m_db_max_conn_cnt:數(shù)據(jù)庫連接池支持的最大連接數(shù)量(m_db_cur_conn_cnt<=m_db_max_conn_cnt)
- m_free_list:存放空閑數(shù)據(jù)庫連接對象的(可以從這里取出數(shù)據(jù)庫連接對象使用)
Init()函數(shù):常見指定數(shù)量的數(shù)據(jù)庫實例句柄,然后添加到m_free_list中,供后面使用
int CDBPool::Init()
{
// 創(chuàng)建固定最小的連接數(shù)量
for (int i = 0; i < m_db_cur_conn_cnt; i++)
{
CDBConn *pDBConn = new CDBConn(this);
int ret = pDBConn- >Init();
if (ret)
{
delete pDBConn;
return ret;
}
m_free_list.push_back(pDBConn);
}
// log_error("db pool: %s, size: %dn", m_pool_name.c_str(), (int)m_free_list.size());
return 0;
}
GetDBConn()函數(shù):用于從空閑隊列中返回可以使用的數(shù)據(jù)庫連接句柄
/*
*TODO: 增加保護機制,把分配的連接加入另一個隊列,這樣獲取連接時,如果沒有空閑連接,
*TODO: 檢查已經(jīng)分配的連接多久沒有返回,如果超過一定時間,則自動收回連接,放在用戶忘了調(diào)用釋放連接的接口
*/
CDBConn *CDBPool::GetDBConn()
{
m_free_notify.Lock();
while (m_free_list.empty())
{
// m_db_cur_conn_cnt是總共多少個連接,不是指空閑的
if (m_db_cur_conn_cnt >= m_db_max_conn_cnt)
{
m_free_notify.Wait();
}
else
{
CDBConn *pDBConn = new CDBConn(this);
int ret = pDBConn- >Init();
if (ret)
{
log_error("Init DBConnecton failednn");
delete pDBConn;
m_free_notify.Unlock();
return NULL;
}
else
{
m_free_list.push_back(pDBConn);
m_db_cur_conn_cnt++;
log("new db connection: %s, conn_cnt: %dn", m_pool_name.c_str(), m_db_cur_conn_cnt);
}
}
}
CDBConn *pConn = m_free_list.front(); // 獲取連接
m_free_list.pop_front(); // STL 吐出連接,從空閑隊列刪除
m_free_notify.Unlock();
return pConn;
}
RelDBConn()函數(shù):程序使用完該數(shù)據(jù)庫句柄之后,將句柄放回到空閑隊列中
void CDBPool::RelDBConn(CDBConn *pConn)
{
m_free_notify.Lock();
list< CDBConn * >::iterator it = m_free_list.begin();
for (; it != m_free_list.end(); it++)
{
if (*it == pConn)
{
break;
}
}
if (it == m_free_list.end())
測試
測試之前,將代碼中的數(shù)據(jù)庫地址、端口、賬號密碼等改為自己的(代碼中有好幾處)
進入MySQL,創(chuàng)建mysql_pool_test數(shù)據(jù)庫
CREATE DATABASE mysql_pool_test;
進入到mysql_pool目錄下,創(chuàng)建一個build目錄并進入:
mkdir build
cd build
然后輸入如下的命令進行編譯
cmake ..
make
之后就會在目錄下生成如下的可執(zhí)行文件
輸入如下兩條命令進行測試:可以看到不使用數(shù)據(jù)庫連接池,整個操作耗時4秒左右;使用連接池之后,整個操作耗時2秒左右,提升了一倍
# 不使用數(shù)據(jù)庫連接池
./test_ThreadPool 4 4 0
# 使用數(shù)據(jù)庫連接池
./test_ThreadPool 4 4 1
六、Redis連接池演示
源碼下載
- 下載方式:https://github.com/dongyusheng/csdn-code/tree/master/db_pool(Github中下載)
下面介紹redis_pool
測試
進入到redis_pool目錄下,創(chuàng)建一個build目錄并進入:
mkdir build
cd build
然后輸入如下的命令進行編譯
cmake ..
make
之后就會在目錄下生成如下的可執(zhí)行文件
輸入如下的命令進行測試:可以看到不使用數(shù)據(jù)庫連接池,整個操作耗時182ms;使用連接池之后,整個操作耗時21ms,提升了很多
# 不使用數(shù)據(jù)庫連接池
./test_ThreadPool 4 4 0
# 使用數(shù)據(jù)庫連接池
./test_ThreadPool 4 4 1
進入redis,可以看到我們新建的key:
-
服務器
+關注
關注
12文章
8958瀏覽量
85084 -
數(shù)據(jù)庫
+關注
關注
7文章
3752瀏覽量
64233 -
MySQL
+關注
關注
1文章
797瀏覽量
26399 -
Redis
+關注
關注
0文章
370瀏覽量
10830
發(fā)布評論請先 登錄
相關推薦
評論