发新话题
打印

[魔力私服分享] 关于服务端内存优化的一些经验

关于服务端内存优化的一些经验

大家也知道,妖城魔力一个区开服了十周年多了bbs.mocwww.com7 W9 x4 g& b/ G& X- Z
魔力私服,最新魔力宝贝私服技术交流7 p' @; {* X# R* ?8 B
不管是数据库还是data的冗余肯定都非常多。
% l* m1 y* F2 |—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート
0 S# Z0 F" T  h妖城在线论坛对于妖城这样的数据量大的服务器,首先数据库肯定不能放在跟服务端运行的同一个服务器里。& v& {+ R- |  k2 k. r+ z; c
魔力私服,最新魔力宝贝私服技术交流0 m1 Z: J5 p5 C) o2 \
这是基本的,所以,最好是运行服务端的服务器一台,数据库单独一台。
- x8 y2 A" _) x$ k4 x! L4 n, Xbbs.mocwww.com妖城在线论坛" `. E. S! A: m; o) k( K: [
因为数据库大了之后,mysql的资源占用也是很可观的。能省则省。
- B7 \' A) E7 ?9 [  O妖城在线论坛
' T- P, H% S- @4 }( C* J' K7 {( k魔力私服,最新魔力宝贝私服技术交流然后关于在有限资源的前提下(魔力原生的服务端是只能运行32位系统的,也就是最大4g内存,后续可能有别的引擎升级兼容了64位那另说)
0 p( m- z, n' O2 v妖城在线论坛妖城在线论坛: H+ |( u- i+ b
优化有两个方面
5 ^/ S6 F. u. ]$ \! t魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表一:data方面bbs.mocwww.com9 q3 ^" G4 H4 w
data下几乎所有的txt设定,比如npc/msg/itemset/enemy等等( ]+ l( z! R, o4 V% i
记住编号不要随意乱设置,尽量往小的,没用到的设定3 e6 }  A! L+ E' B* x4 o
比如你不要把一个msg的编号设定成390000000,三亿多了魔力私服,最新魔力宝贝私服技术交流- |% `$ k1 l. f* s: S; Q9 t
因为在程序的逻辑里,我不可能为了寻找到某个编号,就每次去整个msg里面从上到下循环搜索吧?魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表$ [( u* U( P7 Y1 P3 l
所以程序逻辑,会在服务端启动的时候,就根据你msg的最大编号为上限,设定一个跳转表。bbs.mocwww.com: o7 k2 ^; i# I2 m5 _
对程序员来说,讲到这里应该就懂了
/ H3 O( w+ ~, m3 O5 I7 D魔力私服,最新魔力宝贝私服技术交流但是对于非程序员来说,我多说两句,跳转表是为了快速定位数据不需要从上到下循环搜索的。魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表; R& K' ]. ^/ u0 ^, m% ?
你可以理解跳转表是连续的一堆信息。魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表) U5 p; K  P4 w5 q5 y/ E8 N
你的msg编号最大的如果是100000,那么程序启动的时候就会设定10万个连续的数据空间用来存放对应每个msg编号指向msg.txt的哪一行。bbs.mocwww.com% e7 j) o( D; a3 q. ^
这样,当游戏里,需要调用到某个msg的时候(比如道具说明啊,npc对话啊,boss发言啊之类的)
  H8 b0 M; a4 ~. v, u  G它直接通过编号获取跳转表指向的msg行,获取到msg的内容。魔力私服,最新魔力宝贝私服技术交流9 D3 U$ x5 b& k6 |1 U; r$ Z" Z
这就导致了一个问题,你要是把msg的最大编号设置成3亿多。。。。可想而知浪费了多少内存?魔力私服,最新魔力宝贝私服技术交流% h% f" R7 F  p" j! ?

8 J! O; R' d6 M1 C, G! H1 x7 }魔力私服,最新魔力宝贝私服技术交流data下的其它文档也是一样的道理。用编号,不要太任性。
4 f. |. f, d; G8 |* \魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート4 l! e+ @; F" Q
二:lua方面0 f" t5 j% X% ~2 p% y
lua方面最大的内存占用,应该就是table类型的反复释放和创建了。魔力私服,最新魔力宝贝私服技术交流7 R5 C; z0 d: w9 B% M
因为没有深入阅读lua的代码
: _; h+ h. J, w" x* J# L" ?bbs.mocwww.com所以对于lua的内存管理一直是很懵的。bbs.mocwww.com, ^2 P8 O+ x* C9 Z9 o
如果没有对内存占用比较敏感的话魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表9 X2 O4 h6 p# n; M# }& E# g; I7 q
正常运行的服务器,一般都会给每个玩家登陆的时候,或者玩家某个行为的时候,创建一个临时的tabble
+ B/ q. c& E' S$ D; p: u9 Pbbs.mocwww.com这个table的生命周期仅限于这玩家本次登录的时候。—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート" A8 |; |  h- [+ p8 R& p# C8 y. @
然后玩家下线了,就释放掉,比如tablexx=nil
+ S) R  L5 O. D* n. |. V1 f* D. o魔力私服,最新魔力宝贝私服技术交流但是这样做有一个问题。。。
, t% L# _# e3 l3 w—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート你可以尝试一个玩家登陆的时候,你创建一个百万级别的table项目。妖城在线论坛" [% _8 g8 M: i8 R8 Q
玩家下线的时候,你nil掉这个table
; T* p" y2 ?3 N& ^! |/ P魔力私服,最新魔力宝贝私服技术交流并且你也可以及时得使用lua的垃圾回收释放无效的内存。—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート* q- X" y) a& p% v6 c; U
但问题是,你垃圾回收后,你读取lua的占用内存,发现确实下降了—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート* X* |+ h" `+ j2 d
但是在linux下用系统命令top查看。。。。。—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート! B4 M/ n/ p$ x
魔力服务端所占用的内存毫无下降。魔力私服,最新魔力宝贝私服技术交流5 Y, J. C$ ]" Q% |3 R3 Z  y
那么你再次登陆角色,又创建了一批内存bbs.mocwww.com" p! R  M' O: ~- @
我至今依然没有通读lua引擎的代码,所以依然不能确定lua的内存管理方式。魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表! A' K0 z% Z( P/ o& ?1 k2 Z/ _
但是根据这段时间的测试
5 S! l2 M( J- n* k魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表可以总结经验(并不一定对):lua会霸占整个系统的内存,并以你目前最大用到的多少为限,你用lua的垃圾回收功能,是回收了
4 c4 Q) G! e5 n2 M1 Vbbs.mocwww.com但是这部分内存并不归还给linux系统
' F3 N$ c( D' X+ b0 \0 q; B妖城在线论坛lua会认为,你既然现在能用到这个尺度的内存,那我留着,你等下迟早也要用到。。。。。魔力私服,最新魔力宝贝私服技术交流$ m2 @/ A2 ^( E7 |# N7 h
这就导致了,不停的table的nil释放并不能真正释放整个魔力服务端运行时占用的内存bbs.mocwww.com8 \# d# u5 A) D( @9 b2 k
这个跟正常的编程意识就有点不符合了。。。。。。
2 U( i1 u7 b. q, z9 I, P4 t妖城在线论坛但反正它大概是这么操作的。—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート/ `3 T2 {) J! r8 B/ y
解决方案是什么呢?
3 B9 Y8 C+ u7 g* H0 W1 r. `: g( k; L魔力私服,最新魔力宝贝私服技术交流不要用cdkey啥的做table的key(如果非要不可,我感觉宁愿弄成field存到数据库中)—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート* M( y) D* ^( v7 M6 E# _# ?
启动的时候,根据当前设定的最大在线人数,预先扩充一个table魔力私服,最新魔力宝贝私服技术交流  n! ^4 L  H4 F4 a1 [3 p- _
这个table的索引key使用CharIndex这个序号魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表) R* ?. Z5 N: w& q: f
玩家下线的时候,不要nil掉,只要再次初始化数据就好了。! a# Y) o- D  B3 G. s# H( o  V
这样就不会反复创建了—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート2 O' t' E3 U2 P
魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表/ Z; _" H; O" @+ j' Y
三:引擎,c语言方面魔力私服,最新魔力宝贝私服技术交流( E) {* {; f2 x& \, v+ M) ~$ H
也是同样的观点。4 N& b& K, I/ w  U! J4 Z0 {
尽量预设开辟一段既定的内存空间,不要试图去在登陆和登出的时候频繁的创建和释放
" y5 k  X. x9 O% ^5 m, Z4 q魔力私服,最新魔力宝贝私服技术交流妖城在线论坛3 Z# W$ q. @# L
最初妖城启动占用内存大概2.3g,运行大概十天半个月后,就会出现内存溢出,轻则挂端重则回档。魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表" a! s- q4 g+ G6 y& w: C5 m
后来优化后(其实没有优化到极致)启动占用内存800m左右,干净的系统top下观察占用内存1g而已
# {( J2 `3 t8 `' U! ^魔力私服,最新魔力宝贝私服技术交流连续运行几个月都不会有问题。—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート! r9 C7 a7 a: p% s0 T9 q, u, I
& R2 ^. B. _6 d& P
以上说的三个方面
; x/ [- {6 ^* Q* m& L' f# c魔力私服,最新魔力宝贝私服技术交流两个都是一般的开服的gm自己可以控制优化的,第三个是必须引擎技术商方面优化的。妖城在线论坛/ j. t  p9 C6 F! j) @$ _7 `
魔力私服,最新魔力宝贝私服技术交流: Y" ~( H6 y5 G7 R; R' O4 L
大家可以试一下
妖城欢迎您!

TOP

补充几点
: s9 \5 X4 e, k2 ]- m5 k魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表1. 关于可用内存,实际上linux上面只有3g,windows下面只有2g
$ v. s4 i' y! U! q& y魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表2. luajit 可用内存是2g,除非 64位+GC64模式—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート; f% Q6 j5 N: K9 j2 q
2.1. 内存回收,lua 申请的内存看luajit的实现了,默认跟c一样的处理逻辑,但如果是myalloc的话,大概率会有内存泄漏,不过就算是c的内存申请后也不是马上归回系统的。魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表1 Q2 U5 [" @3 B* R8 T
3. gmsv里面动态申请的数据主要是迷宫,不过引擎的myalloc,大概率会有内存泄漏$ G; J+ f2 k; n3 y7 W/ T7 f
魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表2 |3 h/ f: @2 i! U  S  Y
[ 本帖最后由 Muscipular 于 2023-5-15 12:40 编辑 ]

TOP

luajit我的是5.2.3版本的,所以我这边垃圾回收操作是不释放内存归还系统的
妖城欢迎您!

TOP

发新话题