标题:
[魔力私服分享]
关于服务端内存优化的一些经验
[打印本页]
作者:
易凡
时间:
2023-5-15 01:16
标题:
关于服务端内存优化的一些经验
大家也知道，妖城魔力一个区开服了十周年多了
' f$ f% \# a# g0 l魔力私服,最新魔力宝贝私服技术交流
: p/ ^: Z+ p( Q1 abbs.mocwww.com
不管是数据库还是data的冗余肯定都非常多。
; T# H& `0 A( N- k1 M8 t4 m
; {+ H" h; p! n# t0 y0 ~8 A d
对于妖城这样的数据量大的服务器，首先数据库肯定不能放在跟服务端运行的同一个服务器里。
9 I7 G) W! H- }- l) y妖城在线论坛
+ B: T8 A2 i& |5 T6 b5 P
这是基本的，所以，最好是运行服务端的服务器一台，数据库单独一台。
8 @# C0 n* ^- y% f5 kbbs.mocwww.com
妖城在线论坛' M" ]& O2 N+ V
因为数据库大了之后，mysql的资源占用也是很可观的。能省则省。
魔力私服,最新魔力宝贝私服技术交流! e1 K* _6 N* Q0 i
( Y, n0 }5 e( e$ N7 L U& U—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート
然后关于在有限资源的前提下（魔力原生的服务端是只能运行32位系统的，也就是最大4g内存，后续可能有别的引擎升级兼容了64位那另说）
& z0 G+ Z& q. s6 b魔力私服,最新魔力宝贝私服技术交流
魔力私服,最新魔力宝贝私服技术交流5 x5 T, Q5 S; t7 f5 @1 w5 e
优化有两个方面
/ {: f. x6 Q/ H& g! Q9 y/ _$ n魔力私服,最新魔力宝贝私服技术交流
一：data方面
- T/ k- P+ k, Z+ }; T+ Q" [
data下几乎所有的txt设定，比如npc/msg/itemset/enemy等等
魔力私服,最新魔力宝贝私服技术交流1 o% ]1 {* [$ f* A u4 W; m! E ~
记住编号不要随意乱设置，尽量往小的，没用到的设定
`7 h' [; U$ K
比如你不要把一个msg的编号设定成390000000，三亿多了
% i+ X' h- }2 k5 T, D" A0 g( H
因为在程序的逻辑里，我不可能为了寻找到某个编号，就每次去整个msg里面从上到下循环搜索吧？
bbs.mocwww.com. b3 y5 t, L/ p, d7 r1 W2 s/ k
所以程序逻辑，会在服务端启动的时候，就根据你msg的最大编号为上限，设定一个跳转表。
bbs.mocwww.com: r$ v% d5 j: t7 y! M' W& J S
对程序员来说，讲到这里应该就懂了
$ T2 d5 f, q+ U, K* D5 x魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表
但是对于非程序员来说，我多说两句，跳转表是为了快速定位数据不需要从上到下循环搜索的。
! z! e5 ]; w: i- J8 j; ? C* Z魔力私服,最新魔力宝贝私服技术交流
你可以理解跳转表是连续的一堆信息。
9 H8 S5 F6 d3 T" t% ]) b: ^' U' [妖城在线论坛
你的msg编号最大的如果是100000，那么程序启动的时候就会设定10万个连续的数据空间用来存放对应每个msg编号指向msg.txt的哪一行。
- G2 m0 Y( `" A% S妖城在线论坛
这样，当游戏里，需要调用到某个msg的时候（比如道具说明啊，npc对话啊，boss发言啊之类的）
* L2 w5 h* ]( s* X, ]bbs.mocwww.com
它直接通过编号获取跳转表指向的msg行，获取到msg的内容。
/ ~- |3 ]3 k; s+ r; C- W) C9 @, }
这就导致了一个问题，你要是把msg的最大编号设置成3亿多。。。。可想而知浪费了多少内存？
—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート3 p' x' P' h4 W+ k, P
妖城在线论坛! \2 o/ F; R& a; l0 {
data下的其它文档也是一样的道理。用编号，不要太任性。
1 a7 B9 d% l7 C0 t
bbs.mocwww.com$ S$ O2 ^2 b+ f! w8 l; p( h& h
二：lua方面
9 g5 a; F+ J5 I/ C9 j8 `& L—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート
lua方面最大的内存占用，应该就是table类型的反复释放和创建了。
, N" T* r9 C; u6 w/ C4 V
因为没有深入阅读lua的代码
bbs.mocwww.com- G" x- g+ S5 K7 ^
所以对于lua的内存管理一直是很懵的。
+ \- D2 `2 J5 I* F* t魔力私服,最新魔力宝贝私服技术交流
如果没有对内存占用比较敏感的话
妖城在线论坛4 h& X" C# }, T+ \" w, }/ { `# v
正常运行的服务器，一般都会给每个玩家登陆的时候，或者玩家某个行为的时候，创建一个临时的tabble
魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表3 r: v( w2 L: w
这个table的生命周期仅限于这玩家本次登录的时候。
魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表% H- z' }/ Y: l9 p6 z0 l' J0 u
然后玩家下线了，就释放掉，比如tablexx=nil
" |# V2 t+ n' sbbs.mocwww.com
但是这样做有一个问题。。。
) U9 _. U3 V' e5 U. s; `2 ~ G妖城在线论坛
你可以尝试一个玩家登陆的时候，你创建一个百万级别的table项目。
+ d5 h( s3 X# l
玩家下线的时候，你nil掉这个table
—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート0 \) ^( }* }3 K, n
并且你也可以及时得使用lua的垃圾回收释放无效的内存。
魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表6 m4 \; `% i1 `1 l$ i9 C
但问题是，你垃圾回收后，你读取lua的占用内存，发现确实下降了
—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート- c7 w' K: ?) ^, H, P
但是在linux下用系统命令top查看。。。。。
6 i4 C" C k C# z—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート
魔力服务端所占用的内存毫无下降。
—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート# ] b, _) h' x. O5 L
那么你再次登陆角色，又创建了一批内存
魔力私服,最新魔力宝贝私服技术交流/ E/ s4 @2 x4 X7 S( X8 i% A. w
我至今依然没有通读lua引擎的代码，所以依然不能确定lua的内存管理方式。
4 q+ V$ ]6 M- p" d. J. k/ D' E魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表
但是根据这段时间的测试
bbs.mocwww.com( q) z1 F, o! {$ y0 m) O
可以总结经验（并不一定对）：lua会霸占整个系统的内存，并以你目前最大用到的多少为限，你用lua的垃圾回收功能，是回收了
bbs.mocwww.com7 n, Y4 }2 \: d# c) W
但是这部分内存并不归还给linux系统
/ t" h2 @- u. p魔力私服,最新魔力宝贝私服技术交流
lua会认为，你既然现在能用到这个尺度的内存，那我留着，你等下迟早也要用到。。。。。
. M, f4 K u- ^: C9 H妖城在线论坛
这就导致了，不停的table的nil释放并不能真正释放整个魔力服务端运行时占用的内存
( @/ T; P. Q3 `4 t妖城在线论坛
这个跟正常的编程意识就有点不符合了。。。。。。
bbs.mocwww.com% H$ G$ E: m' e- u3 z, q! @
但反正它大概是这么操作的。
魔力私服,最新魔力宝贝私服技术交流9 P0 q5 {9 \- ^1 n: a6 r9 ^# y
解决方案是什么呢？
—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート3 a1 C) U$ J" F
不要用cdkey啥的做table的key（如果非要不可，我感觉宁愿弄成field存到数据库中）
妖城在线论坛( F! S) }8 u4 J( Y) p- t
启动的时候，根据当前设定的最大在线人数，预先扩充一个table
- @- A' Q( `/ }/ q: s- t$ u' N; G
这个table的索引key使用CharIndex这个序号
bbs.mocwww.com$ E1 p+ ?" U) f! ?$ |
玩家下线的时候，不要nil掉，只要再次初始化数据就好了。
妖城在线论坛9 }, c3 O" A2 u, a/ v, ] U2 ?: K
这样就不会反复创建了
: c/ d' l/ x/ L { C魔力私服,最新魔力宝贝私服技术交流
* q t+ m. T. G0 R& y6 q% I魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表
三：引擎，c语言方面
: S* w: V+ Z" e5 S; Abbs.mocwww.com
也是同样的观点。
3 ^" _2 K9 I" Y) m' |
尽量预设开辟一段既定的内存空间，不要试图去在登陆和登出的时候频繁的创建和释放
( c( ^5 r. y1 C/ i* ]魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表
g5 N3 w3 P7 H7 m+ {
最初妖城启动占用内存大概2.3g，运行大概十天半个月后，就会出现内存溢出，轻则挂端重则回档。
! t4 E6 y5 D, ~" f3 V—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート
后来优化后（其实没有优化到极致）启动占用内存800m左右，干净的系统top下观察占用内存1g而已
- y. z d2 A7 b& w5 o' X妖城在线论坛
连续运行几个月都不会有问题。
, M6 q* t E# j: `) _魔力私服,最新魔力宝贝私服技术交流
bbs.mocwww.com" ^( A- y, B% w. q' `1 M3 ^& P) i
以上说的三个方面
妖城在线论坛/ C7 Y0 U/ [1 v z
两个都是一般的开服的gm自己可以控制优化的，第三个是必须引擎技术商方面优化的。
魔力私服,最新魔力宝贝私服技术交流- x% {8 c' J* K4 [
—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート7 o$ x1 r. ?/ K! G+ i3 d
大家可以试一下
作者:
Muscipular
时间:
2023-5-15 12:32
补充几点
! Q1 A M5 t$ n4 |2 d. wbbs.mocwww.com
1. 关于可用内存，实际上linux上面只有3g，windows下面只有2g
—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート6 e, h/ Q) J% e+ g9 B& ^2 l
2. luajit 可用内存是2g，除非 64位+GC64模式
bbs.mocwww.com7 g! [4 k3 Z& ?% c
2.1. 内存回收，lua 申请的内存看luajit的实现了，默认跟c一样的处理逻辑，但如果是myalloc的话，大概率会有内存泄漏，不过就算是c的内存申请后也不是马上归回系统的。
魔力私服,最新魔力宝贝私服技术交流8 c1 F7 I$ O, q# l' K4 }$ ~+ s O
3. gmsv里面动态申请的数据主要是迷宫,不过引擎的myalloc，大概率会有内存泄漏
: W% u$ `0 |; G) a1 V @7 W1 S妖城在线论坛
魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表: |8 l4 ]4 m4 C% K: B
[
本帖最后由 Muscipular 于 2023-5-15 12:40 编辑
]
作者:
易凡
时间:
2023-5-15 19:34
luajit我的是5.2.3版本的，所以我这边垃圾回收操作是不释放内存归还系统的
欢迎光临 妖城在线论坛 (http://bbs.mocwww.com/)
Powered by Discuz! 6.0.0
