关于服务端内存优化的一些经验
大家也知道,妖城魔力一个区开服了十周年多了
2 {8 {& W' h* K% T—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート
1 w6 r: |6 l& l% a9 l妖城在线论坛不管是数据库还是data的冗余肯定都非常多。
% f# B+ H7 A8 R/ T魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表魔力私服,最新魔力宝贝私服技术交流* a+ i2 A8 T. Z4 J) p0 q
对于妖城这样的数据量大的服务器,首先数据库肯定不能放在跟服务端运行的同一个服务器里。
2 y2 J" X* k1 v* M) f- a5 O魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表
% `6 U4 {) K" c7 Y/ T妖城在线论坛这是基本的,所以,最好是运行服务端的服务器一台,数据库单独一台。
$ v t! u4 }% r$ l M妖城在线论坛
% N: ?, H& M$ S" N( Qbbs.mocwww.com因为数据库大了之后,mysql的资源占用也是很可观的。能省则省。
) J& f; i$ Z! n0 z* c. V魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表+ B8 k5 P5 L+ `" Y: a7 V4 a
然后关于在有限资源的前提下(魔力原生的服务端是只能运行32位系统的,也就是最大4g内存,后续可能有别的引擎升级兼容了64位那另说)
5 M4 e8 S7 R/ J& G0 b. q8 P妖城在线论坛bbs.mocwww.com* [2 d2 A! X/ t5 @$ ^
优化有两个方面魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表$ x' F! H5 _3 w% a4 s" P! [
一:data方面妖城在线论坛& O$ q, L: u0 K( Q- J3 y+ J/ _4 ^
data下几乎所有的txt设定,比如npc/msg/itemset/enemy等等
6 `& b# Y" k0 h# d! u1 p* A& E! a" {, }7 D8 f魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表记住编号不要随意乱设置,尽量往小的,没用到的设定
3 @9 i( p2 D& h2 s0 [bbs.mocwww.com比如你不要把一个msg的编号设定成390000000,三亿多了魔力私服,最新魔力宝贝私服技术交流. }" Y! u. z1 w3 M0 h8 q2 U& q
因为在程序的逻辑里,我不可能为了寻找到某个编号,就每次去整个msg里面从上到下循环搜索吧?
. ^) T+ W5 d' q+ j: j! `6 b9 Z; {—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート所以程序逻辑,会在服务端启动的时候,就根据你msg的最大编号为上限,设定一个跳转表。
0 K: W" N, ]# f% b* N魔力私服,最新魔力宝贝私服技术交流对程序员来说,讲到这里应该就懂了0 w( r- c0 G/ s& v) `
但是对于非程序员来说,我多说两句,跳转表是为了快速定位数据不需要从上到下循环搜索的。魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表. \0 g5 a6 \3 r$ o
你可以理解跳转表是连续的一堆信息。魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表( {0 P0 j- S7 \
你的msg编号最大的如果是100000,那么程序启动的时候就会设定10万个连续的数据空间用来存放对应每个msg编号指向msg.txt的哪一行。
$ g, k I1 J) ?2 D+ s7 J魔力私服,最新魔力宝贝私服技术交流这样,当游戏里,需要调用到某个msg的时候(比如道具说明啊,npc对话啊,boss发言啊之类的)妖城在线论坛9 }7 ~7 G q6 g+ `& A7 I
它直接通过编号获取跳转表指向的msg行,获取到msg的内容。
! u- M7 A' ~" m6 M7 B6 g, d妖城在线论坛这就导致了一个问题,你要是把msg的最大编号设置成3亿多。。。。可想而知浪费了多少内存?
: b h6 U7 N( T5 v: s3 m7 O妖城在线论坛—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート* o5 I" |+ a: r- N. h E u' V# |/ S
data下的其它文档也是一样的道理。用编号,不要太任性。
* {$ X, x( R8 e妖城在线论坛魔力私服,最新魔力宝贝私服技术交流$ E( E; `' D( o; z: ?9 G
二:lua方面—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート7 C3 a; @, w1 D
lua方面最大的内存占用,应该就是table类型的反复释放和创建了。魔力私服,最新魔力宝贝私服技术交流8 f- f) W1 _: Z2 E9 z" n& G
因为没有深入阅读lua的代码
3 L1 Q2 }) ~7 V9 t所以对于lua的内存管理一直是很懵的。魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表8 ?* ]) O- [% \) {3 p
如果没有对内存占用比较敏感的话( o# J; P; O' A; t; l) U/ t4 e- b
正常运行的服务器,一般都会给每个玩家登陆的时候,或者玩家某个行为的时候,创建一个临时的tabble
6 h0 ?6 O5 W4 W& p; x2 X魔力私服,最新魔力宝贝私服技术交流这个table的生命周期仅限于这玩家本次登录的时候。—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート8 C( v" p: ?: ]+ D: V8 K% }5 m0 [0 w
然后玩家下线了,就释放掉,比如tablexx=nil
. @5 a; C, u7 @6 z x& g- f/ ?/ Ubbs.mocwww.com但是这样做有一个问题。。。魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表$ j* k8 E5 j% I
你可以尝试一个玩家登陆的时候,你创建一个百万级别的table项目。
+ \% P6 f8 c# S' |. b8 I( \8 T魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表玩家下线的时候,你nil掉这个table妖城在线论坛* [; G6 i8 O% M4 @. {3 _0 o
并且你也可以及时得使用lua的垃圾回收释放无效的内存。魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表0 s5 b" d! H# T5 k- }
但问题是,你垃圾回收后,你读取lua的占用内存,发现确实下降了魔力私服,最新魔力宝贝私服技术交流! s4 z+ f9 A3 e% T5 R' L" j7 M
但是在linux下用系统命令top查看。。。。。魔力私服,最新魔力宝贝私服技术交流1 C) T/ B0 A$ _; T* C/ D# a
魔力服务端所占用的内存毫无下降。
) Z( u% Q) H$ r" T魔力私服,最新魔力宝贝私服技术交流那么你再次登陆角色,又创建了一批内存
; C: p3 E1 J5 g" h—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート我至今依然没有通读lua引擎的代码,所以依然不能确定lua的内存管理方式。
& k* ~ M+ @' f; H但是根据这段时间的测试bbs.mocwww.com# ]. j) \( E& k) T% l: G7 |$ G
可以总结经验(并不一定对):lua会霸占整个系统的内存,并以你目前最大用到的多少为限,你用lua的垃圾回收功能,是回收了—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート$ _# U8 O( N+ b9 X$ y3 `3 l
但是这部分内存并不归还给linux系统魔力私服,最新魔力宝贝私服技术交流& H" H6 u; T, y6 S o$ ~" V; m. Q2 T
lua会认为,你既然现在能用到这个尺度的内存,那我留着,你等下迟早也要用到。。。。。
( t: |/ E# S% W2 l$ |/ ]—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート这就导致了,不停的table的nil释放并不能真正释放整个魔力服务端运行时占用的内存bbs.mocwww.com+ y$ p3 p2 {; m2 P
这个跟正常的编程意识就有点不符合了。。。。。。
M/ A5 O9 r' ]妖城在线论坛但反正它大概是这么操作的。魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表- `/ I9 I E6 q: j t. E2 c
解决方案是什么呢?
+ P- G( _, P e0 B2 r- i妖城在线论坛不要用cdkey啥的做table的key(如果非要不可,我感觉宁愿弄成field存到数据库中)
% {1 ~8 X; k/ U' v% Z8 S4 ^: W2 H妖城在线论坛启动的时候,根据当前设定的最大在线人数,预先扩充一个table
: J! c9 ^2 L4 p5 N% B8 T+ D8 \" J魔力私服,最新魔力宝贝私服技术交流这个table的索引key使用CharIndex这个序号
: E W, Q- K; E. o+ d% @玩家下线的时候,不要nil掉,只要再次初始化数据就好了。
9 x. X6 w4 G0 R3 ^ f: z这样就不会反复创建了
! R1 S& |+ g% v6 c1 U2 Z
+ h1 L9 p9 S% z3 q# V- {魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表三:引擎,c语言方面bbs.mocwww.com3 n3 y& ~2 t% T+ g0 P
也是同样的观点。魔力私服,最新魔力宝贝私服技术交流# B3 c0 Z) G; f2 d% P% V1 F
尽量预设开辟一段既定的内存空间,不要试图去在登陆和登出的时候频繁的创建和释放
" i) }" |$ P& ?. [& [& B8 k魔力私服,最新魔力宝贝私服技术交流
8 I. w# a# d' ?3 o& t. d) A最初妖城启动占用内存大概2.3g,运行大概十天半个月后,就会出现内存溢出,轻则挂端重则回档。
. G9 {" f9 C# \; v3 k3 ^妖城在线论坛后来优化后(其实没有优化到极致)启动占用内存800m左右,干净的系统top下观察占用内存1g而已妖城在线论坛5 G. g; c4 @# d; z8 V8 l! J( v
连续运行几个月都不会有问题。
1 _2 A. p9 |. l6 f9 f. E5 cbbs.mocwww.combbs.mocwww.com$ z7 m. K3 F$ q+ ~$ t7 K
以上说的三个方面
9 S4 \: P7 k" Z7 @4 p. V5 z魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表两个都是一般的开服的gm自己可以控制优化的,第三个是必须引擎技术商方面优化的。bbs.mocwww.com$ R* `. C: w8 N8 s* E
4 G. A @ \ d妖城在线论坛大家可以试一下