发新话题
打印

[魔力私服分享] 关于服务端内存优化的一些经验

关于服务端内存优化的一些经验

大家也知道,妖城魔力一个区开服了十周年多了—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート/ Q* Z. k! n5 {0 @- ]. a
魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表. ]* |- X" F& a5 [. ?6 J
不管是数据库还是data的冗余肯定都非常多。
: M$ N' O- u. u6 Zbbs.mocwww.com
7 B2 {  ]+ Z& M% P$ _) m妖城在线论坛对于妖城这样的数据量大的服务器,首先数据库肯定不能放在跟服务端运行的同一个服务器里。
+ q/ I- {5 X* K1 g$ |魔力私服,最新魔力宝贝私服技术交流妖城在线论坛: `; G( j7 Q- o! t3 S' \
这是基本的,所以,最好是运行服务端的服务器一台,数据库单独一台。  i* w2 p5 w, w

6 x! _5 v# s9 _$ i2 W因为数据库大了之后,mysql的资源占用也是很可观的。能省则省。
8 ?+ f; K. C# `9 Q+ {/ F1 P/ P# P魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表  L. O; ?- E( \5 z2 H0 ?
然后关于在有限资源的前提下(魔力原生的服务端是只能运行32位系统的,也就是最大4g内存,后续可能有别的引擎升级兼容了64位那另说)
! x/ u: i3 @5 R# k1 s9 J3 W3 k妖城在线论坛bbs.mocwww.com' j3 H. N! M  ^' z: ^7 T: m6 C
优化有两个方面
; k* `7 K# k) X. y$ h  V8 y% O: obbs.mocwww.com一:data方面
* G  z7 X" X4 V5 o9 z3 H; C( Dbbs.mocwww.comdata下几乎所有的txt设定,比如npc/msg/itemset/enemy等等
( {& s; v5 @3 D: h妖城在线论坛记住编号不要随意乱设置,尽量往小的,没用到的设定
; a2 i8 u6 `- g1 g2 Q* L- P" Z$ f比如你不要把一个msg的编号设定成390000000,三亿多了
2 K; _3 }' {0 ]+ i* Q6 P) tbbs.mocwww.com因为在程序的逻辑里,我不可能为了寻找到某个编号,就每次去整个msg里面从上到下循环搜索吧?魔力私服,最新魔力宝贝私服技术交流; g2 v$ K' y1 n
所以程序逻辑,会在服务端启动的时候,就根据你msg的最大编号为上限,设定一个跳转表。魔力私服,最新魔力宝贝私服技术交流. ~- Z3 Z+ n" l/ ^% c+ [( U
对程序员来说,讲到这里应该就懂了
5 q- r0 W# p1 R4 H—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート但是对于非程序员来说,我多说两句,跳转表是为了快速定位数据不需要从上到下循环搜索的。魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表; T% j! H1 D/ n5 V" p
你可以理解跳转表是连续的一堆信息。魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表6 K2 P: f0 [( b) u
你的msg编号最大的如果是100000,那么程序启动的时候就会设定10万个连续的数据空间用来存放对应每个msg编号指向msg.txt的哪一行。—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート6 R5 f+ ?" [" q
这样,当游戏里,需要调用到某个msg的时候(比如道具说明啊,npc对话啊,boss发言啊之类的)
& T: d- G* u0 u, K2 k' M/ e! W9 \它直接通过编号获取跳转表指向的msg行,获取到msg的内容。
7 y; f0 L3 r# v' }; D- a妖城在线论坛这就导致了一个问题,你要是把msg的最大编号设置成3亿多。。。。可想而知浪费了多少内存?
( L. B- v) t0 h7 {魔力私服,最新魔力宝贝私服技术交流
7 g% w* O  _+ e* b- R/ i9 _魔力私服,最新魔力宝贝私服技术交流data下的其它文档也是一样的道理。用编号,不要太任性。
- T" n5 Y% ]8 N7 t! t魔力私服,最新魔力宝贝私服技术交流: _: N* @$ {1 m) O4 e
二:lua方面
: Q; ^, x7 j! x" l8 t* e魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表lua方面最大的内存占用,应该就是table类型的反复释放和创建了。—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート- c- B3 `& X1 U0 ^- ?
因为没有深入阅读lua的代码魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表4 f1 ^1 H  T/ {5 ]
所以对于lua的内存管理一直是很懵的。
: ^( F2 A- d3 j& s魔力私服,最新魔力宝贝私服技术交流如果没有对内存占用比较敏感的话—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート* e+ e# O  X3 |; i# j; v* [3 P
正常运行的服务器,一般都会给每个玩家登陆的时候,或者玩家某个行为的时候,创建一个临时的tabble
  [1 W* K" u3 A, r0 Z' ]这个table的生命周期仅限于这玩家本次登录的时候。魔力私服,最新魔力宝贝私服技术交流; H5 k. h: l3 R( V# }1 ^4 [0 X0 Y5 `
然后玩家下线了,就释放掉,比如tablexx=nil魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表8 n4 i, A$ X, ]( X; |
但是这样做有一个问题。。。
4 C* \, |) B. L, d' F5 b& S5 Fbbs.mocwww.com你可以尝试一个玩家登陆的时候,你创建一个百万级别的table项目。
$ u) h4 L9 }8 c& M  s玩家下线的时候,你nil掉这个table
+ e1 O. [& o6 l) a  P魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表并且你也可以及时得使用lua的垃圾回收释放无效的内存。
/ Z! b4 P. Q: c& i" T/ J* dbbs.mocwww.com但问题是,你垃圾回收后,你读取lua的占用内存,发现确实下降了魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表. S6 i3 D4 e& R. j  y5 ~# A% d
但是在linux下用系统命令top查看。。。。。魔力私服,最新魔力宝贝私服技术交流* ~% m  M, J. T, H, w7 N$ [) k
魔力服务端所占用的内存毫无下降。# N& X: x9 {, h' V  l3 u
那么你再次登陆角色,又创建了一批内存% x# S  C5 ^& B8 F7 Y5 V
我至今依然没有通读lua引擎的代码,所以依然不能确定lua的内存管理方式。
' _' Q* ]+ N& [—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート但是根据这段时间的测试—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート! t, r. u: l3 `5 [
可以总结经验(并不一定对):lua会霸占整个系统的内存,并以你目前最大用到的多少为限,你用lua的垃圾回收功能,是回收了
" X  Y% ^7 _% F/ ?8 z2 ^7 T0 q6 L( O; r, U但是这部分内存并不归还给linux系统
, R8 F; R) b, h$ x—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲートlua会认为,你既然现在能用到这个尺度的内存,那我留着,你等下迟早也要用到。。。。。bbs.mocwww.com" K0 f9 i; e  l3 k# l
这就导致了,不停的table的nil释放并不能真正释放整个魔力服务端运行时占用的内存
- ^: H2 ?. t, l* v" r, K魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表这个跟正常的编程意识就有点不符合了。。。。。。2 P* z, ~6 r2 d, p" w1 \
但反正它大概是这么操作的。妖城在线论坛* M: e9 x5 Z- G# Y+ V+ P( v
解决方案是什么呢?4 G0 p6 }! S6 B) A  L" D8 y
不要用cdkey啥的做table的key(如果非要不可,我感觉宁愿弄成field存到数据库中)魔力私服,最新魔力宝贝私服技术交流3 S. a1 q1 c9 s
启动的时候,根据当前设定的最大在线人数,预先扩充一个table
1 e- C" p4 P1 s' X8 zbbs.mocwww.com这个table的索引key使用CharIndex这个序号魔力私服,最新魔力宝贝私服技术交流7 d) t7 g6 M4 o9 K5 V3 [& k5 C
玩家下线的时候,不要nil掉,只要再次初始化数据就好了。
( Q% P$ ^! C! ~" f9 _0 Nbbs.mocwww.com这样就不会反复创建了
4 B+ ^9 h( m) y& L. r% _魔力私服,最新魔力宝贝私服技术交流—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート) u% K6 ?8 V/ U! u
三:引擎,c语言方面魔力私服,最新魔力宝贝私服技术交流5 n# B) K0 [! s9 h  y) \1 B
也是同样的观点。
0 {" K; {4 M0 X: ?( H, ?" q+ l: s* i—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート尽量预设开辟一段既定的内存空间,不要试图去在登陆和登出的时候频繁的创建和释放
. ~5 }* w$ s7 }* j1 q妖城在线论坛5 D! h/ r3 z" S! W6 z4 |
最初妖城启动占用内存大概2.3g,运行大概十天半个月后,就会出现内存溢出,轻则挂端重则回档。bbs.mocwww.com- Q5 n) b; w5 g' c
后来优化后(其实没有优化到极致)启动占用内存800m左右,干净的系统top下观察占用内存1g而已妖城在线论坛' W) ]3 }4 c2 V; c9 x- z; h+ F
连续运行几个月都不会有问题。
7 O6 g" s6 G" \$ s- @  ~( e—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート
' x# g, I. E. a3 Y7 D—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート以上说的三个方面
. P- ], W4 c4 c$ w; O2 `& R3 d! \魔力私服,最新魔力宝贝私服技术交流两个都是一般的开服的gm自己可以控制优化的,第三个是必须引擎技术商方面优化的。
7 K2 |. `8 J* H/ S# ebbs.mocwww.com魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表" L6 }4 I3 k* s
大家可以试一下
妖城欢迎您!

TOP

补充几点
( q( R2 P6 T/ h$ q魔力私服,最新魔力宝贝私服技术交流1. 关于可用内存,实际上linux上面只有3g,windows下面只有2g
, p$ h. j0 |; lbbs.mocwww.com2. luajit 可用内存是2g,除非 64位+GC64模式妖城在线论坛5 [; x  E% t' O" w
2.1. 内存回收,lua 申请的内存看luajit的实现了,默认跟c一样的处理逻辑,但如果是myalloc的话,大概率会有内存泄漏,不过就算是c的内存申请后也不是马上归回系统的。bbs.mocwww.com: s( v$ S9 e% D- W& |$ a
3. gmsv里面动态申请的数据主要是迷宫,不过引擎的myalloc,大概率会有内存泄漏! {; W+ b( w! l0 H0 [( e/ K: C+ G+ y0 V

, A! s  @1 h8 _- o' t[ 本帖最后由 Muscipular 于 2023-5-15 12:40 编辑 ]

TOP

luajit我的是5.2.3版本的,所以我这边垃圾回收操作是不释放内存归还系统的
妖城欢迎您!

TOP

发新话题