Board logo

标题: [魔力私服分享] 关于服务端内存优化的一些经验 [打印本页]

作者: 易凡    时间: 2023-5-15 01:16     标题: 关于服务端内存优化的一些经验

大家也知道,妖城魔力一个区开服了十周年多了
+ Q) J; c0 t5 I2 }1 Q2 P/ \4 E# ybbs.mocwww.com$ T6 H4 N1 s7 \1 K2 O7 b/ k
不管是数据库还是data的冗余肯定都非常多。
, b1 q: _2 B) I5 I- c# l—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート
% l5 Z5 s" C5 o" r6 o对于妖城这样的数据量大的服务器,首先数据库肯定不能放在跟服务端运行的同一个服务器里。妖城在线论坛* O9 Y" n4 y2 V" a

$ u) ?' r! a: K$ S: s—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート这是基本的,所以,最好是运行服务端的服务器一台,数据库单独一台。
6 N7 P+ g& L4 z7 d7 g0 j# i. U—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート
* h( R/ R( ]+ _( u' }1 kbbs.mocwww.com因为数据库大了之后,mysql的资源占用也是很可观的。能省则省。妖城在线论坛# D) R6 g6 Z3 r6 j* E: h0 d! A$ P

3 l7 b9 G0 _2 O$ p) ]7 Q—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート然后关于在有限资源的前提下(魔力原生的服务端是只能运行32位系统的,也就是最大4g内存,后续可能有别的引擎升级兼容了64位那另说)魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表) c1 G1 K! t% ~" V

/ K0 H; c6 e6 F( m优化有两个方面
6 k& s* r) [/ T' m& q妖城在线论坛一:data方面魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表4 V6 e1 l! Z7 C) b7 ~" J% C5 y
data下几乎所有的txt设定,比如npc/msg/itemset/enemy等等
6 r$ G8 a; K! }) }, M$ P: u+ T; O—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート记住编号不要随意乱设置,尽量往小的,没用到的设定
! A& Z( P" \- Y妖城在线论坛比如你不要把一个msg的编号设定成390000000,三亿多了bbs.mocwww.com9 S0 s# T3 V- _7 j9 H/ R
因为在程序的逻辑里,我不可能为了寻找到某个编号,就每次去整个msg里面从上到下循环搜索吧?
* O  ~2 g9 {/ i& Q7 s- r' t妖城在线论坛所以程序逻辑,会在服务端启动的时候,就根据你msg的最大编号为上限,设定一个跳转表。妖城在线论坛) k* ?. B5 d5 ~; X
对程序员来说,讲到这里应该就懂了
9 h( ^9 s  ?7 {" U- I" U—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート但是对于非程序员来说,我多说两句,跳转表是为了快速定位数据不需要从上到下循环搜索的。
% ^7 g3 P. U8 p$ q, A9 z* o; {8 u魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表你可以理解跳转表是连续的一堆信息。
- ^* E. l4 Z% l. n, ^魔力私服,最新魔力宝贝私服技术交流你的msg编号最大的如果是100000,那么程序启动的时候就会设定10万个连续的数据空间用来存放对应每个msg编号指向msg.txt的哪一行。妖城在线论坛, w6 W3 m* x; I2 L. m+ L7 P
这样,当游戏里,需要调用到某个msg的时候(比如道具说明啊,npc对话啊,boss发言啊之类的)
0 b+ p: U9 y9 ~# Z妖城在线论坛它直接通过编号获取跳转表指向的msg行,获取到msg的内容。
  u% ?: |" N2 Y+ j魔力私服,最新魔力宝贝私服技术交流这就导致了一个问题,你要是把msg的最大编号设置成3亿多。。。。可想而知浪费了多少内存?魔力私服,最新魔力宝贝私服技术交流  \5 j! O2 f; ~; h  n5 J
妖城在线论坛6 a! o! S7 e4 W- n
data下的其它文档也是一样的道理。用编号,不要太任性。魔力私服,最新魔力宝贝私服技术交流0 |! O1 _5 `% g0 B5 \$ v! I" I, Q) J6 E0 A

, C, \8 w4 O3 i( W5 J, U9 Q二:lua方面: Z1 m  M. \2 v" H- u( J
lua方面最大的内存占用,应该就是table类型的反复释放和创建了。妖城在线论坛1 m8 H3 H9 b* W1 a$ e, z
因为没有深入阅读lua的代码魔力私服,最新魔力宝贝私服技术交流+ O$ j- a/ h: D6 D$ U
所以对于lua的内存管理一直是很懵的。
/ X! n( [3 v& y5 H# Jbbs.mocwww.com如果没有对内存占用比较敏感的话
9 u. m( h& D- l, [" l+ H0 x魔力私服,最新魔力宝贝私服技术交流正常运行的服务器,一般都会给每个玩家登陆的时候,或者玩家某个行为的时候,创建一个临时的tabble魔力私服,最新魔力宝贝私服技术交流, l0 Z& {6 g: G  t
这个table的生命周期仅限于这玩家本次登录的时候。
1 Q4 G" |7 B% v- z  t8 o" I& n妖城在线论坛然后玩家下线了,就释放掉,比如tablexx=nil—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート+ x" ?4 h- k: g* s/ o+ D
但是这样做有一个问题。。。
' V  n& N. O$ i1 F魔力私服,最新魔力宝贝私服技术交流你可以尝试一个玩家登陆的时候,你创建一个百万级别的table项目。
+ a: u! g  E% |$ m9 D玩家下线的时候,你nil掉这个table
8 R* v$ O2 o5 A' {1 d# l( @魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表并且你也可以及时得使用lua的垃圾回收释放无效的内存。$ V. I9 G% y+ M/ m2 j
但问题是,你垃圾回收后,你读取lua的占用内存,发现确实下降了
% P2 t/ V9 o+ G& q妖城在线论坛但是在linux下用系统命令top查看。。。。。妖城在线论坛( d& j7 D6 ]8 a8 B- \) ^( ]: _- c
魔力服务端所占用的内存毫无下降。bbs.mocwww.com6 n; N+ G$ b/ J7 l
那么你再次登陆角色,又创建了一批内存7 e6 {8 K8 v  X8 \6 q6 G% E
我至今依然没有通读lua引擎的代码,所以依然不能确定lua的内存管理方式。
: i, a8 v& U2 o- U2 q! K( W5 P—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート但是根据这段时间的测试5 `+ e6 c+ A% l& \$ @( D
可以总结经验(并不一定对):lua会霸占整个系统的内存,并以你目前最大用到的多少为限,你用lua的垃圾回收功能,是回收了—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート" L, l8 p' C4 p3 x2 K+ v
但是这部分内存并不归还给linux系统
$ Y9 v+ [( S! L魔力私服,最新魔力宝贝私服技术交流lua会认为,你既然现在能用到这个尺度的内存,那我留着,你等下迟早也要用到。。。。。
3 L& }+ y: G9 O; W魔力私服,最新魔力宝贝私服技术交流这就导致了,不停的table的nil释放并不能真正释放整个魔力服务端运行时占用的内存魔力私服,最新魔力宝贝私服技术交流( x! c  d/ O9 C' D0 D0 O
这个跟正常的编程意识就有点不符合了。。。。。。妖城在线论坛* X- @! l3 \: B
但反正它大概是这么操作的。
. E6 l/ u1 U! C0 j魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表解决方案是什么呢?bbs.mocwww.com; x8 _+ P7 V, u8 B9 `
不要用cdkey啥的做table的key(如果非要不可,我感觉宁愿弄成field存到数据库中)妖城在线论坛" p; |" a4 O2 t6 \
启动的时候,根据当前设定的最大在线人数,预先扩充一个table魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表. l9 n1 l6 n3 A, Z. S9 p( x6 H8 ?
这个table的索引key使用CharIndex这个序号
3 {* U* K' r; |9 l! l3 X/ j" z妖城在线论坛玩家下线的时候,不要nil掉,只要再次初始化数据就好了。
1 S9 x% R9 ?6 o3 B6 D' [: J5 nbbs.mocwww.com这样就不会反复创建了
4 M# U+ `) w' Gbbs.mocwww.com魔力私服,最新魔力宝贝私服技术交流! x) K% C5 o6 b0 ?
三:引擎,c语言方面
& h8 X; F* Z2 t% i- H8 @9 |魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表也是同样的观点。
8 p. g: n$ A3 p# z7 S3 _, A—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート尽量预设开辟一段既定的内存空间,不要试图去在登陆和登出的时候频繁的创建和释放
# e: S- c6 r2 \( l% l( c—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート1 \$ s& |7 c# g8 n9 }4 G
最初妖城启动占用内存大概2.3g,运行大概十天半个月后,就会出现内存溢出,轻则挂端重则回档。
, R- p) {: C3 A# z2 [妖城在线论坛后来优化后(其实没有优化到极致)启动占用内存800m左右,干净的系统top下观察占用内存1g而已魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表( Y' i0 z. T2 @: N, C" ~9 _
连续运行几个月都不会有问题。
: M% I  @8 V5 W2 a—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート" j7 ]5 J5 _3 ~7 R) s5 m
以上说的三个方面魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表+ K, @* Z" z0 [4 H
两个都是一般的开服的gm自己可以控制优化的,第三个是必须引擎技术商方面优化的。
  j. j, a+ a1 V) F! Gbbs.mocwww.com妖城在线论坛/ X* @; L; U$ U1 ]
大家可以试一下
作者: Muscipular    时间: 2023-5-15 12:32

补充几点魔力私服,最新魔力宝贝私服技术交流4 e9 z( O. P1 Z  @: `+ d* D
1. 关于可用内存,实际上linux上面只有3g,windows下面只有2g
3 k8 K: v  P8 i! W  c- [% Xbbs.mocwww.com2. luajit 可用内存是2g,除非 64位+GC64模式
8 D7 Z6 |$ }( b$ l" A  K2.1. 内存回收,lua 申请的内存看luajit的实现了,默认跟c一样的处理逻辑,但如果是myalloc的话,大概率会有内存泄漏,不过就算是c的内存申请后也不是马上归回系统的。  w) t, R: V  U" s6 z4 _" N% g; B
3. gmsv里面动态申请的数据主要是迷宫,不过引擎的myalloc,大概率会有内存泄漏
4 [  o9 k3 M7 g* g+ [1 V( q$ f/ a—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表) P# g% J: \0 |% y5 s! t
[ 本帖最后由 Muscipular 于 2023-5-15 12:40 编辑 ]
作者: 易凡    时间: 2023-5-15 19:34

luajit我的是5.2.3版本的,所以我这边垃圾回收操作是不释放内存归还系统的




欢迎光临 妖城在线论坛 (http://bbs.mocwww.com/) Powered by Discuz! 6.0.0