关于服务端内存优化的一些经验
大家也知道,妖城魔力一个区开服了十周年多了
1 M' A2 \" x6 t2 q F. Z—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート: B+ p& a" D- Q0 [/ `6 J4 g
不管是数据库还是data的冗余肯定都非常多。
/ B1 M# ?+ j* Y _魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表
- b7 x, q! @0 ^, l& @% Ibbs.mocwww.com对于妖城这样的数据量大的服务器,首先数据库肯定不能放在跟服务端运行的同一个服务器里。
) g7 X/ E& s+ F4 F% n( [2 @妖城在线论坛* D7 ^# _+ |. N- {4 N
这是基本的,所以,最好是运行服务端的服务器一台,数据库单独一台。- [) _4 s4 {( |; [7 e7 \5 a) X+ U
—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート+ v' y# t& d; }- w; m' o: b' V) y; R
因为数据库大了之后,mysql的资源占用也是很可观的。能省则省。
" x& d) \: d* j: T. |7 K7 G* R魔力私服,最新魔力宝贝私服技术交流
- E5 w0 C; H7 i, i2 m9 u% x' Q然后关于在有限资源的前提下(魔力原生的服务端是只能运行32位系统的,也就是最大4g内存,后续可能有别的引擎升级兼容了64位那另说)魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表4 ?; t0 u1 H$ T% k; W
0 w, Y, f* }8 @优化有两个方面
9 p! g0 D5 o: O5 t* E—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート一:data方面
% t" q( Q' }# x6 f! N' Z& n8 f8 K妖城在线论坛data下几乎所有的txt设定,比如npc/msg/itemset/enemy等等
7 Z H" a1 z6 U' K魔力私服,最新魔力宝贝私服技术交流记住编号不要随意乱设置,尽量往小的,没用到的设定bbs.mocwww.com6 |7 i" N1 C& }2 f% \
比如你不要把一个msg的编号设定成390000000,三亿多了- _& a, a# @% y- b+ k7 X3 h5 a6 _
因为在程序的逻辑里,我不可能为了寻找到某个编号,就每次去整个msg里面从上到下循环搜索吧?魔力私服,最新魔力宝贝私服技术交流- d D9 t+ }8 r, p
所以程序逻辑,会在服务端启动的时候,就根据你msg的最大编号为上限,设定一个跳转表。魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表7 B0 b* ~- t# P" I1 C
对程序员来说,讲到这里应该就懂了
8 C: {& J7 v. C但是对于非程序员来说,我多说两句,跳转表是为了快速定位数据不需要从上到下循环搜索的。
' m! Z1 i/ V5 e9 g—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート你可以理解跳转表是连续的一堆信息。! v, e8 E* R3 Y/ C5 K3 \1 f" H
你的msg编号最大的如果是100000,那么程序启动的时候就会设定10万个连续的数据空间用来存放对应每个msg编号指向msg.txt的哪一行。bbs.mocwww.com+ [0 F, D$ b$ i5 g0 T, l2 [
这样,当游戏里,需要调用到某个msg的时候(比如道具说明啊,npc对话啊,boss发言啊之类的)
+ Y. K+ O/ ~. v8 }) t' |4 obbs.mocwww.com它直接通过编号获取跳转表指向的msg行,获取到msg的内容。bbs.mocwww.com5 K7 g# d" N) ?8 V: L' |
这就导致了一个问题,你要是把msg的最大编号设置成3亿多。。。。可想而知浪费了多少内存?—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート1 \+ ~6 Y) p' @0 u# ]0 Y7 n
0 y8 r9 B8 A/ F5 u4 f* i5 z& |妖城在线论坛data下的其它文档也是一样的道理。用编号,不要太任性。—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート* v# U: Y/ `1 h+ q2 h8 u; j) G, P% y) @7 p
2 v* G3 S2 _9 T, i+ p2 b妖城在线论坛二:lua方面
4 n, D H2 b0 ulua方面最大的内存占用,应该就是table类型的反复释放和创建了。—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート# [- {6 N" F# m) Z1 o( N. C, t2 R
因为没有深入阅读lua的代码
) f1 F+ M; e- J6 V9 h2 @所以对于lua的内存管理一直是很懵的。
* X8 n5 e& F: L8 U: V魔力私服,最新魔力宝贝私服技术交流如果没有对内存占用比较敏感的话
5 d8 W2 g8 h1 G0 q& p1 R F魔力私服,最新魔力宝贝私服技术交流正常运行的服务器,一般都会给每个玩家登陆的时候,或者玩家某个行为的时候,创建一个临时的tabble
( v" A5 k) Q# P魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表这个table的生命周期仅限于这玩家本次登录的时候。妖城在线论坛6 o" ~9 K/ f% T% j9 H/ |$ w( @$ d
然后玩家下线了,就释放掉,比如tablexx=nil2 f5 x* W4 r1 I9 \& v9 T
但是这样做有一个问题。。。妖城在线论坛0 D- m. E% E6 @; n u8 X: i
你可以尝试一个玩家登陆的时候,你创建一个百万级别的table项目。魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表7 W2 K; I5 B0 d, y' o3 {2 Q
玩家下线的时候,你nil掉这个table—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート+ V; p6 ^7 r" R! u
并且你也可以及时得使用lua的垃圾回收释放无效的内存。
) o4 z7 C: U, L9 G. y0 r但问题是,你垃圾回收后,你读取lua的占用内存,发现确实下降了
/ A- F: m1 S- F5 p# u9 I魔力私服,最新魔力宝贝私服技术交流但是在linux下用系统命令top查看。。。。。
" M* M, [ E1 E J+ G妖城在线论坛魔力服务端所占用的内存毫无下降。3 O* [' h4 Y* H$ \1 t
那么你再次登陆角色,又创建了一批内存
+ i7 O; ~( c, z妖城在线论坛我至今依然没有通读lua引擎的代码,所以依然不能确定lua的内存管理方式。
2 [- l) A$ f0 A! C% R0 cbbs.mocwww.com但是根据这段时间的测试5 Q% Y6 c1 p2 i( ]
可以总结经验(并不一定对):lua会霸占整个系统的内存,并以你目前最大用到的多少为限,你用lua的垃圾回收功能,是回收了
( z, ^! O; _# v2 U* \+ r% b—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート但是这部分内存并不归还给linux系统
+ \! `0 U# z; {7 _6 f7 [- t—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲートlua会认为,你既然现在能用到这个尺度的内存,那我留着,你等下迟早也要用到。。。。。魔力私服,最新魔力宝贝私服技术交流, [) n+ k3 p$ [$ ^8 F" J( W4 j9 q
这就导致了,不停的table的nil释放并不能真正释放整个魔力服务端运行时占用的内存魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表' y/ G& Y, M- [1 U
这个跟正常的编程意识就有点不符合了。。。。。。
2 G/ t2 w: N4 w0 \. J: F魔力私服,最新魔力宝贝私服技术交流但反正它大概是这么操作的。
. Q2 p; v/ Z% j1 | t妖城在线论坛解决方案是什么呢?3 `( i6 U9 s' a4 {
不要用cdkey啥的做table的key(如果非要不可,我感觉宁愿弄成field存到数据库中)魔力私服,最新魔力宝贝私服技术交流# O( p9 N& N- g$ J6 H
启动的时候,根据当前设定的最大在线人数,预先扩充一个table魔力私服,最新魔力宝贝私服技术交流2 ?/ X5 z; C' L) e
这个table的索引key使用CharIndex这个序号
+ q( L% s$ ^/ X1 b% ~魔力私服,最新魔力宝贝私服技术交流玩家下线的时候,不要nil掉,只要再次初始化数据就好了。
' @) |& r! _2 E) F这样就不会反复创建了
& w; F# Q* C; E9 O( W$ K K
; N$ ?& d4 v/ S+ e" X# l' y魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表三:引擎,c语言方面魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表+ V! J& x7 g( j$ r8 S' m) ^* N
也是同样的观点。
# e8 l) P# }% ~% P9 ~8 P/ r: Q魔力私服,最新魔力宝贝私服技术交流尽量预设开辟一段既定的内存空间,不要试图去在登陆和登出的时候频繁的创建和释放魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表) O+ a5 n' {: x1 ?
) K. g+ Q6 Q! I. l# }/ a2 z魔力私服,最新魔力宝贝私服技术交流最初妖城启动占用内存大概2.3g,运行大概十天半个月后,就会出现内存溢出,轻则挂端重则回档。妖城在线论坛4 X) b9 q7 D! O1 l& b n
后来优化后(其实没有优化到极致)启动占用内存800m左右,干净的系统top下观察占用内存1g而已妖城在线论坛* h V4 W7 T; g6 n0 i% Y
连续运行几个月都不会有问题。, d# i1 H3 o: \. H
魔力私服,最新魔力宝贝私服技术交流. B; G8 E2 o2 s8 g8 W% a2 B
以上说的三个方面
/ u. q! E3 }# i2 y0 q3 D—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート两个都是一般的开服的gm自己可以控制优化的,第三个是必须引擎技术商方面优化的。—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート( g: K7 t t$ s
妖城在线论坛4 l* ?! o/ U1 ?. o% @( _
大家可以试一下