发新话题
打印

[魔力私服分享] 关于服务端内存优化的一些经验

关于服务端内存优化的一些经验

大家也知道,妖城魔力一个区开服了十周年多了bbs.mocwww.com2 _# m# @9 z: D7 [5 X3 a) ~
—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート  ~/ R- U  }) o1 s( Y
不管是数据库还是data的冗余肯定都非常多。魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表8 t0 E3 G5 D' ^6 h" {
bbs.mocwww.com! k7 @  W/ J% H" X
对于妖城这样的数据量大的服务器,首先数据库肯定不能放在跟服务端运行的同一个服务器里。
# L% K4 |# X. v7 u% `1 D妖城在线论坛
' h" @  W" E0 }" ^& z" j# g$ F妖城在线论坛这是基本的,所以,最好是运行服务端的服务器一台,数据库单独一台。魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表4 [( ?% d- `4 z; |; y: p& ^
—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート* T7 F; D/ u: F$ X9 V( c$ G3 G
因为数据库大了之后,mysql的资源占用也是很可观的。能省则省。魔力私服,最新魔力宝贝私服技术交流0 c* D( ?9 m- R# w9 t0 S; q
—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート. P# A  s# Z' V" I  t/ u
然后关于在有限资源的前提下(魔力原生的服务端是只能运行32位系统的,也就是最大4g内存,后续可能有别的引擎升级兼容了64位那另说)
( a) L. v* F2 G) R: d& _妖城在线论坛8 ]- W  G. R' }# F& _
优化有两个方面: q. l( a+ }! s# ~- ^! h
一:data方面魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表% B% _5 m. y- x
data下几乎所有的txt设定,比如npc/msg/itemset/enemy等等
  Q0 y, T: V  Cbbs.mocwww.com记住编号不要随意乱设置,尽量往小的,没用到的设定魔力私服,最新魔力宝贝私服技术交流$ R4 A5 h! g" r* H/ o
比如你不要把一个msg的编号设定成390000000,三亿多了
, l, d; ~3 |$ i" f$ ~" n" R! }* e妖城在线论坛因为在程序的逻辑里,我不可能为了寻找到某个编号,就每次去整个msg里面从上到下循环搜索吧?
, ?# c' H: X" e" ]- W所以程序逻辑,会在服务端启动的时候,就根据你msg的最大编号为上限,设定一个跳转表。bbs.mocwww.com& }! m+ l) D& @5 S
对程序员来说,讲到这里应该就懂了" \2 G: q6 e2 G: J& z* T" I8 f! J
但是对于非程序员来说,我多说两句,跳转表是为了快速定位数据不需要从上到下循环搜索的。
8 I5 |8 R' o2 i1 [/ v2 r你可以理解跳转表是连续的一堆信息。魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表! F6 U* v* h! ?# B2 H+ b
你的msg编号最大的如果是100000,那么程序启动的时候就会设定10万个连续的数据空间用来存放对应每个msg编号指向msg.txt的哪一行。bbs.mocwww.com2 \9 V+ F, K$ l4 k$ C
这样,当游戏里,需要调用到某个msg的时候(比如道具说明啊,npc对话啊,boss发言啊之类的)
4 |% n# F3 o, j- k' }+ @4 G0 t魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表它直接通过编号获取跳转表指向的msg行,获取到msg的内容。
2 l, H( J% J* m3 Y妖城在线论坛这就导致了一个问题,你要是把msg的最大编号设置成3亿多。。。。可想而知浪费了多少内存?
1 a: o1 B% z2 u4 u7 n% b4 e魔力私服,最新魔力宝贝私服技术交流
- v+ ~- j8 C" e+ y: L" ~data下的其它文档也是一样的道理。用编号,不要太任性。—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート2 y! D3 l' |, ^# y: C( h
魔力私服,最新魔力宝贝私服技术交流' m0 a7 D$ j. x6 H/ W
二:lua方面" q# E- Y  F: h& r
lua方面最大的内存占用,应该就是table类型的反复释放和创建了。
) n2 N2 I& n1 ibbs.mocwww.com因为没有深入阅读lua的代码
2 E: u2 `4 J. D. O6 V魔力私服,最新魔力宝贝私服技术交流所以对于lua的内存管理一直是很懵的。妖城在线论坛+ \/ y1 R9 z: G9 J
如果没有对内存占用比较敏感的话魔力私服,最新魔力宝贝私服技术交流: L5 ^. p! B% M; Y
正常运行的服务器,一般都会给每个玩家登陆的时候,或者玩家某个行为的时候,创建一个临时的tabble
5 J: b0 z, _2 p" M这个table的生命周期仅限于这玩家本次登录的时候。妖城在线论坛0 v# D1 J. w- F# S  d2 ~4 X( t
然后玩家下线了,就释放掉,比如tablexx=nil
1 e! p) M) z" N. J妖城在线论坛但是这样做有一个问题。。。! C0 G; Z, @% @% k
你可以尝试一个玩家登陆的时候,你创建一个百万级别的table项目。bbs.mocwww.com( i% t* M% Y% P& e
玩家下线的时候,你nil掉这个table& y. t) v! t3 k. o5 ~
并且你也可以及时得使用lua的垃圾回收释放无效的内存。
3 ^, q3 d$ G7 i9 ^6 m: R—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート但问题是,你垃圾回收后,你读取lua的占用内存,发现确实下降了魔力私服,最新魔力宝贝私服技术交流' h# s5 B5 {: \
但是在linux下用系统命令top查看。。。。。魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表" O- s- d% A& r+ ^. Q" C
魔力服务端所占用的内存毫无下降。
$ Q& m2 ^6 `2 i8 K( ^" b6 X$ I3 F—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート那么你再次登陆角色,又创建了一批内存魔力私服,最新魔力宝贝私服技术交流+ B8 {& D7 {. }
我至今依然没有通读lua引擎的代码,所以依然不能确定lua的内存管理方式。魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表- u  Q7 C% V- x; b5 T1 K
但是根据这段时间的测试
% Y  P$ I& l2 ]- _7 t/ i—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート可以总结经验(并不一定对):lua会霸占整个系统的内存,并以你目前最大用到的多少为限,你用lua的垃圾回收功能,是回收了—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート6 M' D9 R5 V  b
但是这部分内存并不归还给linux系统
6 k1 t& u) R) ~+ h  Y$ k9 l' }; |—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲートlua会认为,你既然现在能用到这个尺度的内存,那我留着,你等下迟早也要用到。。。。。魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表6 G6 c+ x3 i/ p# ]
这就导致了,不停的table的nil释放并不能真正释放整个魔力服务端运行时占用的内存魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表4 R5 M! o, K, _6 x% h& S" Z
这个跟正常的编程意识就有点不符合了。。。。。。
* {: g9 Q0 ^0 e" f' k+ S9 Z妖城在线论坛但反正它大概是这么操作的。妖城在线论坛" E4 C' [, G1 ?. \. ~  A# z
解决方案是什么呢?; {: O/ ^' A- w/ O
不要用cdkey啥的做table的key(如果非要不可,我感觉宁愿弄成field存到数据库中)bbs.mocwww.com7 S( n2 ]" y( ~5 L& N
启动的时候,根据当前设定的最大在线人数,预先扩充一个table—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート8 R* f9 ^0 R  a( r* _1 g6 Z
这个table的索引key使用CharIndex这个序号0 J2 ^( M4 q: ~: m  r4 F
玩家下线的时候,不要nil掉,只要再次初始化数据就好了。
: `+ C8 f% N- S8 }6 [bbs.mocwww.com这样就不会反复创建了
4 e0 [, K2 H$ K7 R) E魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表; o( y! k9 A# X$ j& ], F: i
三:引擎,c语言方面—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート# R1 f' ]8 Y! A+ d, F
也是同样的观点。
- r! @4 e& I1 ]" C8 wbbs.mocwww.com尽量预设开辟一段既定的内存空间,不要试图去在登陆和登出的时候频繁的创建和释放bbs.mocwww.com; e- I, h& N' m3 A$ k

0 m: M7 ?" A) L2 Z6 |- X) x- i妖城在线论坛最初妖城启动占用内存大概2.3g,运行大概十天半个月后,就会出现内存溢出,轻则挂端重则回档。
% e; L9 J1 H- l0 w* D0 I魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表后来优化后(其实没有优化到极致)启动占用内存800m左右,干净的系统top下观察占用内存1g而已魔力私服,最新魔力宝贝私服技术交流: U- M2 G: |, ]' Q& Z5 |
连续运行几个月都不会有问题。3 g3 j! ~! W! k. Q% q( a& z" ?& j
—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート% r& p' D, G1 w1 e2 X# g# U# ^6 Q
以上说的三个方面
/ d1 s0 O+ W& j$ U( \$ d2 R魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表两个都是一般的开服的gm自己可以控制优化的,第三个是必须引擎技术商方面优化的。bbs.mocwww.com, A4 Z7 u5 }$ H  F7 H& T* Y

2 x# ~5 }. C: [7 X- gbbs.mocwww.com大家可以试一下
妖城欢迎您!

TOP

补充几点魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表3 ~4 H4 V$ _  d6 S# z7 t
1. 关于可用内存,实际上linux上面只有3g,windows下面只有2g
' b' S- V" A  z$ c—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート2. luajit 可用内存是2g,除非 64位+GC64模式妖城在线论坛8 e/ a% C6 q; o. t3 p& a% y' d
2.1. 内存回收,lua 申请的内存看luajit的实现了,默认跟c一样的处理逻辑,但如果是myalloc的话,大概率会有内存泄漏,不过就算是c的内存申请后也不是马上归回系统的。
0 W/ x6 |5 t0 |/ u' B- h% Z3. gmsv里面动态申请的数据主要是迷宫,不过引擎的myalloc,大概率会有内存泄漏bbs.mocwww.com1 N* c3 b  J; d/ a% U" P
魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表/ @) J1 D" O5 ~6 c6 q4 q
[ 本帖最后由 Muscipular 于 2023-5-15 12:40 编辑 ]

TOP

luajit我的是5.2.3版本的,所以我这边垃圾回收操作是不释放内存归还系统的
妖城欢迎您!

TOP

发新话题