关于服务端内存优化的一些经验
大家也知道,妖城魔力一个区开服了十周年多了. _* A: Z+ u3 P! t+ o4 x- z3 k
魔力私服,最新魔力宝贝私服技术交流2 A' H3 I0 ~8 b5 `/ F J2 U
不管是数据库还是data的冗余肯定都非常多。
) }/ k" Q) u) [0 @' A1 Z0 P' r妖城在线论坛6 b4 `; ^. Y8 N
对于妖城这样的数据量大的服务器,首先数据库肯定不能放在跟服务端运行的同一个服务器里。
* z) t( X/ U0 r/ I- mbbs.mocwww.combbs.mocwww.com# b; Z9 U- }; ~2 u
这是基本的,所以,最好是运行服务端的服务器一台,数据库单独一台。魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表% m7 L6 N! J C% p0 ~
% Q( R+ b: O* K魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表因为数据库大了之后,mysql的资源占用也是很可观的。能省则省。妖城在线论坛! b# v* f( u8 {( s: k5 `
—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート/ R- E; Z; G* g2 E( T+ D" R
然后关于在有限资源的前提下(魔力原生的服务端是只能运行32位系统的,也就是最大4g内存,后续可能有别的引擎升级兼容了64位那另说)$ S0 C/ \1 H. B \
8 P) y3 G y& b) w# p8 z—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート优化有两个方面bbs.mocwww.com* ?- U1 I/ ]1 @3 }+ p1 N; c& c
一:data方面
9 Y9 E# [: `$ u. L& e4 E- O: q4 c% sbbs.mocwww.comdata下几乎所有的txt设定,比如npc/msg/itemset/enemy等等—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート: R% v, r5 R Y
记住编号不要随意乱设置,尽量往小的,没用到的设定" p4 N5 A' q7 M @; g/ ]
比如你不要把一个msg的编号设定成390000000,三亿多了
5 J- I9 Z( I+ ]$ L因为在程序的逻辑里,我不可能为了寻找到某个编号,就每次去整个msg里面从上到下循环搜索吧?
- A0 ?0 r0 j; N& `/ E妖城在线论坛所以程序逻辑,会在服务端启动的时候,就根据你msg的最大编号为上限,设定一个跳转表。
: B6 x8 k5 I; k, ?8 L* c8 N魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表对程序员来说,讲到这里应该就懂了
]& h! H/ y7 Z9 ?7 j但是对于非程序员来说,我多说两句,跳转表是为了快速定位数据不需要从上到下循环搜索的。魔力私服,最新魔力宝贝私服技术交流: O$ f4 b, c4 Z
你可以理解跳转表是连续的一堆信息。# m4 o9 v/ @& n( q
你的msg编号最大的如果是100000,那么程序启动的时候就会设定10万个连续的数据空间用来存放对应每个msg编号指向msg.txt的哪一行。妖城在线论坛2 L3 @+ s5 v4 K/ I4 v4 D9 I ~% k
这样,当游戏里,需要调用到某个msg的时候(比如道具说明啊,npc对话啊,boss发言啊之类的)
. g. m" C5 N/ ?' T. Z妖城在线论坛它直接通过编号获取跳转表指向的msg行,获取到msg的内容。魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表1 }0 R* m) w: f
这就导致了一个问题,你要是把msg的最大编号设置成3亿多。。。。可想而知浪费了多少内存?
! |2 ]* Q3 c n
- Q- `% g. }/ J. ?# _% a' u4 _data下的其它文档也是一样的道理。用编号,不要太任性。
i t. m3 J+ D$ z- bbbs.mocwww.com—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート. v i A) A* ]' Q7 f1 q
二:lua方面bbs.mocwww.com6 }& N7 }% B B* f
lua方面最大的内存占用,应该就是table类型的反复释放和创建了。
& X" ]- L! ?# C, N3 l4 a1 O因为没有深入阅读lua的代码
& U8 Z+ J! h) Y$ G, q/ p! r$ H妖城在线论坛所以对于lua的内存管理一直是很懵的。魔力私服,最新魔力宝贝私服技术交流# z- `* ?# t: H: o
如果没有对内存占用比较敏感的话魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表. E! L) \# Y8 e, C
正常运行的服务器,一般都会给每个玩家登陆的时候,或者玩家某个行为的时候,创建一个临时的tabble) g" k. E7 }# ?5 B( j2 |7 o
这个table的生命周期仅限于这玩家本次登录的时候。魔力私服,最新魔力宝贝私服技术交流7 n2 [4 L' B1 c! l
然后玩家下线了,就释放掉,比如tablexx=nil
2 N4 E4 {' ?( ~* N( y0 N/ F8 Qbbs.mocwww.com但是这样做有一个问题。。。
2 P9 V6 B# ~8 a8 k# v- d3 R% I7 y, x! t魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表你可以尝试一个玩家登陆的时候,你创建一个百万级别的table项目。2 Y& ^8 P! D' K# q' D& n
玩家下线的时候,你nil掉这个table5 l' Q+ N* n% t
并且你也可以及时得使用lua的垃圾回收释放无效的内存。
% }" E. L9 E/ p; Y9 z魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表但问题是,你垃圾回收后,你读取lua的占用内存,发现确实下降了
$ [, h/ p- _1 Z—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート但是在linux下用系统命令top查看。。。。。
1 r) x, w& f; x4 @3 m% W魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表魔力服务端所占用的内存毫无下降。
% f1 q8 a$ J P6 I# ]- F; x妖城在线论坛那么你再次登陆角色,又创建了一批内存
- ~4 F5 M, R1 K1 Z0 [1 G% G$ [—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート我至今依然没有通读lua引擎的代码,所以依然不能确定lua的内存管理方式。魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表% S5 u* `3 o- q$ Q9 ~
但是根据这段时间的测试魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表1 [( A- H: E) p; `8 _
可以总结经验(并不一定对):lua会霸占整个系统的内存,并以你目前最大用到的多少为限,你用lua的垃圾回收功能,是回收了0 B$ Y' A* k7 x$ Z& n9 l. t
但是这部分内存并不归还给linux系统
0 S1 k9 w( \! W; Z( a" X; U# `6 S妖城在线论坛lua会认为,你既然现在能用到这个尺度的内存,那我留着,你等下迟早也要用到。。。。。
! N9 r$ C. [' Q/ w; `( _$ }7 v—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート这就导致了,不停的table的nil释放并不能真正释放整个魔力服务端运行时占用的内存
( ]+ a4 x: M$ ^+ J5 v' ^0 Pbbs.mocwww.com这个跟正常的编程意识就有点不符合了。。。。。。
) ~) O& X0 @3 G5 u/ X/ |# q8 m# ?1 F妖城在线论坛但反正它大概是这么操作的。—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート$ ^: q5 M. Z" W2 `, H, H( s
解决方案是什么呢?bbs.mocwww.com. C0 Y4 @! e2 ~* B% X. M: V* z
不要用cdkey啥的做table的key(如果非要不可,我感觉宁愿弄成field存到数据库中), o5 V) j; Y8 t/ k5 e @
启动的时候,根据当前设定的最大在线人数,预先扩充一个table
% r0 q+ c/ d. D5 hbbs.mocwww.com这个table的索引key使用CharIndex这个序号魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表" }. x7 {0 H& p: Q; \' |" w1 ?
玩家下线的时候,不要nil掉,只要再次初始化数据就好了。魔力私服,最新魔力宝贝私服技术交流2 v$ K/ |3 Y% z
这样就不会反复创建了—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート+ |* G* ]1 [* [1 W1 I$ \. P% v
魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表4 m) M* v3 L* G7 N1 f1 _5 Z
三:引擎,c语言方面bbs.mocwww.com0 M8 ~9 O5 D0 v& s* ?2 w& P$ I; q% P
也是同样的观点。
7 g5 @9 J& P0 y+ ` {- B% \3 y& ?魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表尽量预设开辟一段既定的内存空间,不要试图去在登陆和登出的时候频繁的创建和释放
. F. j: O A' b! H9 }魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表
8 I: g6 M7 ?' W8 O h0 O1 q2 _魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表最初妖城启动占用内存大概2.3g,运行大概十天半个月后,就会出现内存溢出,轻则挂端重则回档。
( y, ?" w* h- v4 J! Y4 hbbs.mocwww.com后来优化后(其实没有优化到极致)启动占用内存800m左右,干净的系统top下观察占用内存1g而已
# k$ p1 ?4 f0 s9 T& d) |魔力私服,最新魔力宝贝私服技术交流连续运行几个月都不会有问题。
# R* g) B" i2 s& a% `$ B" Gbbs.mocwww.com
" H9 y1 ~$ e' [魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表以上说的三个方面
% `* J; M% `0 e7 \2 t. k1 K# @魔力私服,最新魔力宝贝私服技术交流两个都是一般的开服的gm自己可以控制优化的,第三个是必须引擎技术商方面优化的。bbs.mocwww.com; K3 ^- q9 \: ?! I& d- L L
' Q+ F# c5 f# i
大家可以试一下