关键词搜索

源码搜索 ×
×

数据库连接池的原理及验证

发布2020-05-16浏览3390次

详情内容

      池子,是一个很广义的概念,电池,酒池,水池,资源池,进程池,线程池,协程池,内存池,连接池,都是池子。今天,我们以MySql数据库为例,来说说连接池。如下是MySql的执行流程图:

       

       我们知道,TCP的连接需要经历三次握手,TCP的关闭需要经历四次挥手,都需要耗费时间,而MySql的认证和关闭也同样需要耗费时间。自然地,我们想到了MySql连接的复用:把建立好的连接保留起来,用完后不关闭,放在池子中,从而形成连接池,下次需要用的时候,直接去连接池中拿连接。

       我们在本地建立一个数据库,并以golang包中的连接池为例,来验证一下连接池。在通常情况下,我们不要依赖于默认的参数,建议显式设置参数,比如:

  1. DB.SetMaxOpenConns(5)  // 最大连接数
  2. DB.SetMaxIdleConns(3)  // 最大空闲连接数(连接池容量)

        我们看代码:

  1. package main
  2. import (
  3. "database/sql"
  4. "fmt"
  5. _ "github.com/go-sql-driver/mysql"
  6. )
  7. var DB *sql.DB
  8. var dataBase = "root:pw123456@tcp(127.0.0.1:3306)/"
  9. func init() {
  10. var err error
  11. DB, err = sql.Open("mysql", dataBase)
  12. if err != nil {
  13. fmt.Println("open db error:", err)
  14. panic("open db error xxx")
  15. }
  16. DB.SetMaxOpenConns(5)
  17. DB.SetMaxIdleConns(3)
  18. err = DB.Ping()
  19. if err != nil {
  20. fmt.Println("ping db error:", err)
  21. panic("ping db error xxx")
  22. }
  23. }
  24. func worker(i int) {
  25. var connection_id int
  26. err := DB.QueryRow("select CONNECTION_ID()").Scan(&connection_id)
  27. if err != nil {
  28. fmt.Println("query connection id error:", err)
  29. return
  30. }
  31. fmt.Println("worker:", i, ", connection id:", connection_id)
  32. }
  33. func main() {
  34. for i:=0; i < 10; i++ {
  35. go worker(i)
  36. }
  37. for {}
  38. }

        运行一下:

  1. taoge:~/go/src/pool$ go run taoge.go
  2. worker: 0 , connection id: 67
  3. worker: 9 , connection id: 67
  4. worker: 1 , connection id: 67
  5. worker: 7 , connection id: 67
  6. worker: 8 , connection id: 67
  7. worker: 2 , connection id: 68
  8. worker: 6 , connection id: 69
  9. worker: 5 , connection id: 67
  10. worker: 4 , connection id: 71
  11. worker: 3 , connection id: 70
  1. taoge:~$ netstat -na | grep 3306 | grep ESTABLISHED | grep "0 127.0.0.1.3306"
  2. tcp4 0 0 127.0.0.1.3306 127.0.0.1.62730 ESTABLISHED
  3. tcp4 0 0 127.0.0.1.3306 127.0.0.1.62728 ESTABLISHED
  4. tcp4 0 0 127.0.0.1.3306 127.0.0.1.62726 ESTABLISHED
  5. taoge:~$

       可以看到,使用的连接数为5,稳定的长连接数为3.

       我们可以想象一下,如果加入sleep, 会怎样呢?看代码:

  1. package main
  2. import (
  3. "database/sql"
  4. "fmt"
  5. "time"
  6. _ "github.com/go-sql-driver/mysql"
  7. )
  8. var DB *sql.DB
  9. var dataBase = "root:pw123456@tcp(127.0.0.1:3306)/"
  10. func init() {
  11. var err error
  12. DB, err = sql.Open("mysql", dataBase)
  13. if err != nil {
  14. fmt.Println("open db error:", err)
  15. panic("open db error xxx")
  16. }
  17. DB.SetMaxOpenConns(5)
  18. DB.SetMaxIdleConns(3)
  19. err = DB.Ping()
  20. if err != nil {
  21. fmt.Println("ping db error:", err)
  22. panic("ping db error xxx")
  23. }
  24. }
  25. func worker(i int) {
  26. var connection_id int
  27. err := DB.QueryRow("select CONNECTION_ID()").Scan(&connection_id)
  28. if err != nil {
  29. fmt.Println("query connection id error:", err)
  30. return
  31. }
  32. fmt.Println("worker:", i, ", connection id:", connection_id)
  33. }
  34. func main() {
  35. for i:=0; i < 10; i++ {
  36. go worker(i)
  37. time.Sleep(time.Second)
  38. }
  39. for {}
  40. }

        运行一下:

  1. taoge:~/go/src/pool$ go run taoge.go
  2. worker: 0 , connection id: 72
  3. worker: 1 , connection id: 72
  4. worker: 2 , connection id: 72
  5. worker: 3 , connection id: 72
  6. worker: 4 , connection id: 72
  7. worker: 5 , connection id: 72
  8. worker: 6 , connection id: 72
  9. worker: 7 , connection id: 72
  10. worker: 8 , connection id: 72
  11. worker: 9 , connection id: 72
  1. taoge:~$ netstat -na | grep 3306 | grep ESTABLISHED | grep "0 127.0.0.1.3306"
  2. tcp4 0 0 127.0.0.1.3306 127.0.0.1.62835 ESTABLISHED
  3. taoge:~$

       可以看到,前面一个协程查完MySql后,后面一个协程才开始来查询,这种情况下,就只需要1个连接就行了,后续协程直接从连接池中获取这个连接,进行复用,提升了效率。

       那么,连接池是怎样实现的呢?一图胜千言:

      连接池很重要,经常能在实际项目中提升服务性能。如下是一次实际项目中的耗时优化效果(数据已经脱敏):

      OK, 先说到这里。

相关技术文章

点击QQ咨询
开通会员
返回顶部
×
微信扫码支付
微信扫码支付
确定支付下载
请使用微信描二维码支付
×

提示信息

×

选择支付方式

  • 微信支付
  • 支付宝付款
确定支付下载