本文目录一览：
golang配制高性能sql.DB
有很多教程是关于Go的sql.DB类型和如何使用它来执行SQL数据库查询的。但大多数内容都没有讲述 SetMaxOpenConns() , SetMaxIdleConns() 和 SetConnMaxLifetime()方法， 您可以使用它们来配置sql.DB的行为并改变其性能。
转自：
整理：go语言中文文档：
在本文我将详细解释这些设置的作用，并说明它们所能产生的(积极和消极)影响。
一个sql.DB对象就是一个数据库连接池，它包含“正在用”和“空闲的”连接。一个正在用的连接指的是，你正用它来执行数据库任务，例如执行SQL语句或行查询。当任务完成连接就是空闲的。
当您创建sql.DB执行数据库任务时，它将首先检查连接池中是否有可用的空闲连接。如果有可用的连接，那么Go将重用现有连接，并在执行任务期间将其标记为正在使用。如果池中没有空闲连接，而您需要一个空闲连接，那么Go将创建一个新的连接。
默认情况下，在同一时间打开连接的数量是没有限制(包含使用中+空闲)。但你可以通过SetMaxOpenConns()方法实现自定义限制，如下所示:
在这个示例代码中，连接池现在有5个并发打开的连接数。如果所有5个连接都已经被标记为正在使用，并且需要另一个新的连接，那么应用程序将被迫等待，直到5个连接中的一个被释放并变为空闲。
为了说明更改MaxOpenConns的影响，我运行了一个基准测试，将最大打开连接数设置为1、2、5、10和无限。基准测试在PostgreSQL数据库上执行并行的INSERT语句，您可以在这里找到代码。测试结果:
对于这个基准测试，我们可以看到，允许打开的连接越多，在数据库上执行INSERT操作所花费的时间就越少(打开的连接数为1时，执行速度3129633ns/op，而无限连接：531030ns/op——大约快了6倍)。这是因为允许打开的连接越多，可以并发执行的数据库查询就越多。
默认情况下，sql.DB允许连接池中最多保留2个空闲连接。你可以通过SetMaxIdleConns()方法改变它，如下所示:
从理论上讲，允许池中有更多的空闲连接将提高性能，因为这样就不太可能从头开始建立新连接——因此有助于提升数据库性能。
让我们来看看相同的基准测试，最大空闲连接设置为none, 1,2,5和10:
当MaxIdleConns设置为none时，必须为每个INSERT从头创建一个新的连接，我们可以从基准测试中看到，平均运行时和内存使用量相对较高。
只允许保留和重用一个空闲连接对基准测试影响特别明显——它将平均运行时间减少了大约8倍，内存使用量减少了大约20倍。继续增加空闲连接池的大小会使性能变得更好，尽管改进并不明显。
那么，您应该维护一个大的空闲连接池吗?答案取决于应用程序。重要的是要意识到保持空闲连接是有代价的—它占用了可以用于应用程序和数据库的内存。
还有一种可能是，如果一个连接空闲时间太长，那么它可能会变得不可用。例如，MySQL的wait_timeout设置将自动关闭任何8小时(默认)内未使用的连接。
当发生这种情况时，sql.DB会优雅地处理它。坏连接将自动重试两次，然后放弃，此时Go将该连接从连接池中删除，并创建一个新的连接。因此，将MaxIdleConns设置得太大可能会导致连接变得不可用，与空闲连接池更小(使用更频繁的连接更少)相比，会占有更多的资源。所以，如果你很可能很快就会再次使用，你只需保持一个空闲的连接。
最后要指出的是，MaxIdleConns应该总是小于或等于MaxOpenConns。Go强制执行此操作，并在必要时自动减少MaxIdleConns。
现在让我们看看SetConnMaxLifetime()方法，它设置连接可重用的最大时间长度。如果您的SQL数据库也实现了最大连接生命周期，或者—例如—您希望方便地在负载均衡器后交换数据库，那么这将非常有用。
你可以这样使用它:
在这个例子中，所有的连接都将在创建后1小时“过期”，并且在过期后无法重用。但注意:
从理论上讲，ConnMaxLifetime越短，连接过期的频率就越高——因此，需要从头创建连接的频率就越高。为了说明这一点，我运行了将ConnMaxLifetime设置为100ms、200ms、500ms、1000ms和无限(永远重用)的基准测试，默认设置为无限打开连接和2个空闲连接。这些时间段显然比您在大多数应用程序中使用的时间要短得多，但它们有助于很好地说明行为。
在这些特定的基准测试中，我们可以看到，与无限生存期相比，在100ms生存期时内存使用量增加了3倍以上，而且每个INSERT的平均运行时也稍微长一些。
如果您在代码中设置了ConnMaxLifetime，那么一定要记住连接将过期(随后重新创建)的频率。例如，如果您总共有100个连接，而ConnMaxLifetime为1分钟，那么您的应用程序可能每秒钟杀死和重新创建1.67个连接(平均值)。您不希望这个频率太大，最终会阻碍性能，而不是提高性能。
最后，如果不说明超过数据库连接数量的硬限制将会发生什么，那么本文就不完整了。 为了说明这一点，我将修改postgresql.conf文件，这样总共只允许5个连接(默认是100个)…
然后在无限连接的情况下重新运行基准测试……
一旦达到5个连接的硬限制，数据库驱动程序(pq)立即返回一个太多客户端连接的错误消息，而无法完成INSERT。为了防止这个错误，我们需要将sql.DB中打开连接的最大总数(正在使用的+空闲的)设置为低于5。像这样:
现在，sql.DB在任何时候最多只能创建3个连接，基准测试运行时应该不会出现任何错误。但是这样做需要注意：当达到开放连接数限制，并且所有连接都在使用时，应用程序需要执行的任何新的数据库任务都将被迫等待，直到连接标记为空闲。例如，在web应用程序的上下文中，用户的HTTP请求看起来会“挂起”，甚至在等待数据库任务运行时可能会超时。
为了减轻这种情况，你应该始终在一个上下文中传递。在调用数据库时，启用上下文的方法(如ExecContext())，使用固定的、快速的超时上下文对象。
总结
1、根据经验，应该显式设置MaxOpenConns值。这应该小于数据库和基础设施对连接数量的硬性限制。
2、一般来说，更高的MaxOpenConns和MaxIdleConns值将带来更好的性能。但你应该注意到效果是递减的，连接池空闲连接太多(连接没有被重用，最终会变坏)实际上会导致性能下降。
3、为了降低上面第2点带来的风险，您可能需要设置一个相对较短的ConnMaxLifetime。但你也不希望它太短，导致连接被杀死或不必要地频繁重建。
4、MaxIdleConns应该总是小于或等于MaxOpenConns。
对于中小型web应用程序，我通常使用以下设置作为起点，然后根据实际吞吐量水平的负载测试结果进行优化。
golang什么场景设置runtime.GOMAXPROCS=cpu数量会提高性能
这是测试的代码
// parallel package main
import ( "fmt" "math/rand" "runtime" "sort" "time" )
func testData() [][]int { now := time.Now() src := rand.NewSource(now.UnixNano()) seed := rand.New(src) data := make([][]int, 10000) for i := 0; i len(data); i++ { data[i] = make([]int, 10000) for j := 0; j 10000; j++ { data[i][j] = seed.Intn(100000) } } return data }
func test() { data := testData() ch := make(chan int) for i := 0; i len(data); i++ { go func(ch chan int, data []int) { sort.Ints(data[:]) ch - 1 }(ch, data[i][:]) } for i := 0; i len(data); i++ { -ch } }
func main() { st := time.Now() test() fmt.Println(time.Since(st)) runtime.GOMAXPROCS(2) st = time.Now() test() fmt.Println(time.Since(st)) runtime.GOMAXPROCS(3) st = time.Now() test() fmt.Println(time.Since(st)) runtime.GOMAXPROCS(4) st = time.Now() test() fmt.Println(time.Since(st)) fmt.Println("Hello World!") }
该代码的作用是生成10000个数组，每个数组有10000个int元素，分别调用不同CPU核数进行排序计算。用的是Go内置的排序函数。
中的时间如下
25.6269405s
14.1753705s
10.3508423s
8.5466479s
分别是单核，2核，3核，4核的计算时间。的确用多核后计算速度提升很大。
Golang 新手该怎么提升能力
新手入门技巧：
1.升级你的角色等级
Pokemon GO 游戏如果你的目标不是只有 “收集所有神奇宝贝" 的话,而是想用心玩这款游戏,那角色等级绝对是最重要的一环,甚至比抓到稀有神奇宝贝还重要。
等级高,你才能解锁与获得更多道具,如:更强的宝贝球、让你更好抓神奇宝贝的 Razz Berry、经验值两倍的 Lucky Egg、吸引野生神奇宝贝的 Incense 等等。
等级高,你才能抓到 CP (战斗力)更强的神奇宝贝。
等级越高,你才能提升更多神奇宝贝的能力(CP 与 HP)。
升级到 5 级才能进到 GYM 里跟其他玩家战斗。
2.不要担心宝贝球不够
宝贝球是一个非常容易取得的道具,几乎每一个 PokeStop 都能获得两个以上,等你玩久之后一定会嫌宝贝球数量太多(背包预设只能装 350 个道具),把它丢掉会变成非常平常的事,所以抓神奇宝贝时不用害怕丢歪失手,尽情的试手感与角度吧!不过还是要注意次数,小心神奇宝贝会烙跑走。
3.抓光每一个你所看到的神奇宝贝
跟一开始一样,如果你的目标不是只有 “收集所有神奇宝贝",那只要是地图中出现的神奇宝贝,就全部都抓光吧!每抓一只都能获得经验值、STARDUST 与 CANDY,而这些都是游戏中非常重要的元素。
4.先不要提升与进化你的神奇宝贝
刚开始玩时角色等级还太低,因此抓的神奇宝贝 CP 战斗力都会很低,几乎只有 100 以下,所以千万不要急著提升或进化神奇宝贝,把 STARDUST 与 CANDY 保留下来,等到等级变高开始抓到 CP 200、甚至是 300 以上再决定也不迟,而且你还有机会抓到已经进化过的神奇宝贝。
5.只保留 CP 高与能力强的神奇宝贝(仅限初期)
CP 值(战斗力)越高,基本上也代表神奇宝贝越强,因此当你抓到相同的神奇宝贝时,如果 CP 值差 30 以上,就不要犹豫把它 TRANSFER 换成 CANDY 吧!这样也不占空间。而等到后期开始专心养育神奇宝贝时,可以参考这篇文章,把素质最好的神奇宝贝找出来。
资讯页面下方可看到它的攻击能力,每一位神奇宝贝都有两种,上面是普通攻击、下面为绝招,目前还没有数据表示哪种能力比较强,就笔者经验来说,数字越高也代表攻击力越强,因此如果是 CP 很接近的神奇宝贝,就从这边比较,保留攻击力强的那只就对了!
6.慎选使用 Incense 与 Lucky Egg 的时机
当等级升到 5 级以及 7 级时,你会各获得一个 Incense 道具(30 分钟内吸引更多的野生神奇宝贝),笔者会建议先使用一个就好,另一个等到 9 级获得 Lucky Egg(30 分钟内可两倍经验值) 时再用,效果会更好。
Lucky Egg 与 Incense 同时使用的效果非常不错,30 分钟内你一定会抓到非常多神奇宝贝,而每抓一个可获得 100XP,经验值两倍之后变 200XP,如果是新的神奇宝贝再加 500XP,两倍之后变 1000XP,30 分钟过后你的经验值绝对是用暴增,连升两级都有可能,所以说不要急的把 Lucky Egg 或 Incense 用掉,等到两个都拥有时再用效果是最大的!
7.Pokestops 的更新速度很快
Pokestops 是用来提供玩家道具的物件,因此更新速度非常快,当你翻转过一次变成紫色后,只要等个 1~2 分钟 5 分钟就会再变回蓝色,因此如果你缺道具又懒得一直走的话,就找一个翻得到 2~3 Pokestops 的位置待著,不到一小时你绝对能获得非常多道具。(经实测确定是 5 分钟,之前笔者边写文章边测才会感觉更新超快的错觉)
如果你住的地方就能翻到 Pokestops,那真的非常幸运,不仅有无限道具可以取得,待在家也能赚 XP 经验值,不用走来走去。(每翻一次可获得 50XP)。
8.捕捉 Pokemon 神奇宝贝时需不需要停下来?
这点笔者相信很多玩家都很好奇,答案是:不用!
只要是进入抓 Pokemon 神奇宝贝的画面后,即便你离碰到的位置超过 1 公里(夸饰法),都能正常捕捉,唯一要注意是如果你有开启 AR,那就手机画面就必须保持碰到神奇宝贝的方向才能看到它,没开启 AR 的玩家则怎麼移动都没关系。
不过安全第一,笔者还是建议抓神奇宝贝时停下来,才不会发生任何意外,除非你目前正在搭车。
9.不用太担心 Pokemon GO 是不是很耗网路流量
继 T-Moblie 之后,香港 CSL Mobile 也表示会推出 Pokemon GO 无限网路流量服务,因此很多玩家都误认为 Pokemon GO 非常耗网路流量,事实上你不用太担心!
根据笔者玩两周的经验,角色等级已升级到 14,收集上百只神奇宝贝,平时在外也正常使用 F
