发新话题
打印

[魔力私服分享] 关于服务端内存优化的一些经验

关于服务端内存优化的一些经验

大家也知道,妖城魔力一个区开服了十周年多了
1 E7 r, @. |' ~: Z2 b8 J魔力私服,最新魔力宝贝私服技术交流
& K% _1 W! ]! l: }! m不管是数据库还是data的冗余肯定都非常多。
! h0 a( q# r6 y% R+ e# _  h' e, \妖城在线论坛
5 e2 ], N+ J0 s& P; B1 A, u0 v* {bbs.mocwww.com对于妖城这样的数据量大的服务器,首先数据库肯定不能放在跟服务端运行的同一个服务器里。—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート; ]" T( N3 F" J' _5 P- B2 _8 L
—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート4 q: C" ~8 p. x9 K& G8 i
这是基本的,所以,最好是运行服务端的服务器一台,数据库单独一台。魔力私服,最新魔力宝贝私服技术交流8 |: w9 t$ J4 f/ i3 t
魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表+ z% N  q+ m) q0 t
因为数据库大了之后,mysql的资源占用也是很可观的。能省则省。
0 V/ t- E/ i7 g1 u1 w* R魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表魔力私服,最新魔力宝贝私服技术交流% P& a8 s2 r/ [! l8 A! F
然后关于在有限资源的前提下(魔力原生的服务端是只能运行32位系统的,也就是最大4g内存,后续可能有别的引擎升级兼容了64位那另说)—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート7 }5 l/ T$ T+ v. G$ h# b

  V. \" k3 w4 _优化有两个方面魔力私服,最新魔力宝贝私服技术交流; j: U8 R% ^0 p, M
一:data方面
6 Y, Y) U9 t2 y" w  {data下几乎所有的txt设定,比如npc/msg/itemset/enemy等等魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表  M/ J" v9 ]( w6 i( C  I- E
记住编号不要随意乱设置,尽量往小的,没用到的设定魔力私服,最新魔力宝贝私服技术交流4 L* u  r& K% q5 h. @. o) r
比如你不要把一个msg的编号设定成390000000,三亿多了
% N5 |* T( C: S! n2 [妖城在线论坛因为在程序的逻辑里,我不可能为了寻找到某个编号,就每次去整个msg里面从上到下循环搜索吧?
5 W, j* s" e: X+ Z5 }  y* Z妖城在线论坛所以程序逻辑,会在服务端启动的时候,就根据你msg的最大编号为上限,设定一个跳转表。
- g1 l( T  z  d- cbbs.mocwww.com对程序员来说,讲到这里应该就懂了
1 T! b1 P4 s/ m& q6 t8 mbbs.mocwww.com但是对于非程序员来说,我多说两句,跳转表是为了快速定位数据不需要从上到下循环搜索的。魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表6 `( w  D- {# ]  _3 h4 K
你可以理解跳转表是连续的一堆信息。
+ ?' t, t1 f% A9 R) n% vbbs.mocwww.com你的msg编号最大的如果是100000,那么程序启动的时候就会设定10万个连续的数据空间用来存放对应每个msg编号指向msg.txt的哪一行。
- Q( w$ h9 J& U6 @—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート这样,当游戏里,需要调用到某个msg的时候(比如道具说明啊,npc对话啊,boss发言啊之类的)
# q1 |0 S; P6 ^, W# J9 n魔力私服,最新魔力宝贝私服技术交流它直接通过编号获取跳转表指向的msg行,获取到msg的内容。—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート3 l5 E7 b6 ~1 L% Q1 M
这就导致了一个问题,你要是把msg的最大编号设置成3亿多。。。。可想而知浪费了多少内存?魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表8 c) A$ `+ c* ]9 [
  L. x- f5 Z1 i/ O( P: r
data下的其它文档也是一样的道理。用编号,不要太任性。
9 o# D* j; a4 ~3 w# u魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表
5 @: _; q5 N: ~; f( L1 M: {bbs.mocwww.com二:lua方面魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表, w' j& K8 Z2 Z! Z# v1 M3 r
lua方面最大的内存占用,应该就是table类型的反复释放和创建了。
/ E5 Q7 J0 s- s/ I% C' h. ?  Zbbs.mocwww.com因为没有深入阅读lua的代码
% t; t& t6 I6 g* D8 Y魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表所以对于lua的内存管理一直是很懵的。
: P5 G' T+ `3 Xbbs.mocwww.com如果没有对内存占用比较敏感的话魔力私服,最新魔力宝贝私服技术交流' M3 w5 Q/ r1 d1 H# G
正常运行的服务器,一般都会给每个玩家登陆的时候,或者玩家某个行为的时候,创建一个临时的tabblebbs.mocwww.com1 L9 L6 o5 ?/ o- W8 N( z0 `6 o
这个table的生命周期仅限于这玩家本次登录的时候。—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート% \6 z$ C( X1 P, P0 `' ?
然后玩家下线了,就释放掉,比如tablexx=nil
9 \& A, F% K" x* \- f魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表但是这样做有一个问题。。。% C8 Z* S, v+ I4 I) y
你可以尝试一个玩家登陆的时候,你创建一个百万级别的table项目。
7 o6 l$ L: B( M, X4 F  M  l魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表玩家下线的时候,你nil掉这个table—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート; ?+ Y0 Y0 q. O# Y* G
并且你也可以及时得使用lua的垃圾回收释放无效的内存。—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート0 B! c5 J4 {  q+ W; p$ {( O4 U
但问题是,你垃圾回收后,你读取lua的占用内存,发现确实下降了魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表- @) @! i2 v1 a& R- ?5 `
但是在linux下用系统命令top查看。。。。。妖城在线论坛( E- ?9 Q3 @/ L, R7 C0 R4 o
魔力服务端所占用的内存毫无下降。—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート. C$ Y) B4 l- T; |2 V7 O
那么你再次登陆角色,又创建了一批内存—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート9 k) q- W, @- F; H
我至今依然没有通读lua引擎的代码,所以依然不能确定lua的内存管理方式。1 ~- }3 o/ _# B2 N
但是根据这段时间的测试—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート# G6 i( N  t; @% i* ]
可以总结经验(并不一定对):lua会霸占整个系统的内存,并以你目前最大用到的多少为限,你用lua的垃圾回收功能,是回收了
5 N3 M, w' t5 p魔力私服,最新魔力宝贝私服技术交流但是这部分内存并不归还给linux系统
7 U- ^2 E. o9 w/ z7 Q- j' u' qbbs.mocwww.comlua会认为,你既然现在能用到这个尺度的内存,那我留着,你等下迟早也要用到。。。。。魔力私服,最新魔力宝贝私服技术交流3 O' ]* a* q0 L/ Z; m" N# O- `8 N* e
这就导致了,不停的table的nil释放并不能真正释放整个魔力服务端运行时占用的内存妖城在线论坛* z4 }  E9 N- I& u) W" k
这个跟正常的编程意识就有点不符合了。。。。。。
7 \1 ~# @; `+ v8 C. i' }) nbbs.mocwww.com但反正它大概是这么操作的。—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート+ b. W) `+ Y# c+ m+ o: r( W6 _2 \
解决方案是什么呢?5 y4 v) E" _- V3 v7 w
不要用cdkey啥的做table的key(如果非要不可,我感觉宁愿弄成field存到数据库中)魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表) P6 }7 a7 ~' Q4 I/ w
启动的时候,根据当前设定的最大在线人数,预先扩充一个table
' H8 V1 F" _+ W2 t—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート这个table的索引key使用CharIndex这个序号
: F" x; P, I; ]5 e+ \% ^魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表玩家下线的时候,不要nil掉,只要再次初始化数据就好了。魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表# A( X+ n- w+ H2 V' x. v* y" k
这样就不会反复创建了魔力私服,最新魔力宝贝私服技术交流0 p2 c3 D2 Q) D# _' e

, S5 {& ]- m$ {* v. B妖城在线论坛三:引擎,c语言方面魔力私服,最新魔力宝贝私服技术交流, z) \8 P5 j& L4 q: s2 c
也是同样的观点。—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート& \2 t$ }+ H6 }& X" x  B
尽量预设开辟一段既定的内存空间,不要试图去在登陆和登出的时候频繁的创建和释放—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート+ _! D9 d  k7 e* ~
bbs.mocwww.com8 U$ e& M6 q2 i$ J' ], Z( p
最初妖城启动占用内存大概2.3g,运行大概十天半个月后,就会出现内存溢出,轻则挂端重则回档。魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表! K; ^/ c+ s' F9 M& N; I7 l3 F( p
后来优化后(其实没有优化到极致)启动占用内存800m左右,干净的系统top下观察占用内存1g而已
7 A& B3 Y' a! a8 N7 I6 p2 u—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート连续运行几个月都不会有问题。# K, E5 }# F. f6 D  e2 p; H
魔力私服,最新魔力宝贝私服技术交流0 n# a* D8 f& H+ Y, u2 M, f
以上说的三个方面
; u. R6 W, `: @魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表两个都是一般的开服的gm自己可以控制优化的,第三个是必须引擎技术商方面优化的。9 m* [) Z* L  R$ i  E6 \1 a7 N" q1 H
魔力私服,最新魔力宝贝私服技术交流) g' j# M# E$ K) e. Y* q' I' ^/ p
大家可以试一下
妖城欢迎您!

TOP

补充几点
7 ?! o* t9 M, E' [8 h0 dbbs.mocwww.com1. 关于可用内存,实际上linux上面只有3g,windows下面只有2g魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表+ }8 _! f! V; E/ C. V7 K1 L
2. luajit 可用内存是2g,除非 64位+GC64模式魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表( k0 N. W0 U5 b! u! \" {7 g$ o
2.1. 内存回收,lua 申请的内存看luajit的实现了,默认跟c一样的处理逻辑,但如果是myalloc的话,大概率会有内存泄漏,不过就算是c的内存申请后也不是马上归回系统的。
" b  E9 Q2 ]; _( N9 k2 K魔力私服,最新魔力宝贝私服技术交流3. gmsv里面动态申请的数据主要是迷宫,不过引擎的myalloc,大概率会有内存泄漏妖城在线论坛8 W1 N' ~' k' [, [7 r; e

  j. _: h" @+ p0 H妖城在线论坛[ 本帖最后由 Muscipular 于 2023-5-15 12:40 编辑 ]

TOP

luajit我的是5.2.3版本的,所以我这边垃圾回收操作是不释放内存归还系统的
妖城欢迎您!

TOP

发新话题