妖城在线论坛 - Powered by Discuz! Board

标题: [魔力私服分享] 关于服务端内存优化的一些经验 [打印本页]

作者: 易凡 时间: 2023-5-15 01:16 标题: 关于服务端内存优化的一些经验

大家也知道，妖城魔力一个区开服了十周年多了

不管是数据库还是data的冗余肯定都非常多。
1 Q0 K1 m0 H3 c' T
对于妖城这样的数据量大的服务器，首先数据库肯定不能放在跟服务端运行的同一个服务器里。

这是基本的，所以，最好是运行服务端的服务器一台，数据库单独一台。妖城在线论坛- m* K+ U6 d7 C4 {
妖城在线论坛6 Y6 t% u0 q! ~* Z/ P. G  {
因为数据库大了之后，mysql的资源占用也是很可观的。能省则省。魔力私服,最新魔力宝贝私服技术交流0 N8 F  l  F8 @) t  r: o) `
( Y& f" G& e1 J! X9 E$ _3 f4 [, o# R
然后关于在有限资源的前提下（魔力原生的服务端是只能运行32位系统的，也就是最大4g内存，后续可能有别的引擎升级兼容了64位那另说）
魔力私服,最新魔力宝贝私服技术交流: s6 D5 L+ {9 P9 O
优化有两个方面
一：data方面7 }  U9 T  F( G" m
data下几乎所有的txt设定，比如npc/msg/itemset/enemy等等
记住编号不要随意乱设置，尽量往小的，没用到的设定
比如你不要把一个msg的编号设定成390000000，三亿多了bbs.mocwww.com& _2 y" p3 R% E( B' e+ z/ S
因为在程序的逻辑里，我不可能为了寻找到某个编号，就每次去整个msg里面从上到下循环搜索吧？
所以程序逻辑，会在服务端启动的时候，就根据你msg的最大编号为上限，设定一个跳转表。0 a: L0 Q- \' N8 e4 s) x7 c
对程序员来说，讲到这里应该就懂了% `# z( q: l9 n1 Q+ H# b
但是对于非程序员来说，我多说两句，跳转表是为了快速定位数据不需要从上到下循环搜索的。—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート/ y- C: l4 {8 B3 U4 G
你可以理解跳转表是连续的一堆信息。
你的msg编号最大的如果是100000，那么程序启动的时候就会设定10万个连续的数据空间用来存放对应每个msg编号指向msg.txt的哪一行。
这样，当游戏里，需要调用到某个msg的时候（比如道具说明啊，npc对话啊，boss发言啊之类的）
它直接通过编号获取跳转表指向的msg行，获取到msg的内容。魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表6 Y9 }9 A# P$ y3 @# v
这就导致了一个问题，你要是把msg的最大编号设置成3亿多。。。。可想而知浪费了多少内存？魔力私服,最新魔力宝贝私服技术交流1 q+ y( y9 m* ?2 e5 B% F! R1 F
魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表! I8 i* {8 P' e  _' k( V$ `
data下的其它文档也是一样的道理。用编号，不要太任性。魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表% p! p0 u2 t2 W* X0 o+ v. J

二：lua方面
lua方面最大的内存占用，应该就是table类型的反复释放和创建了。
因为没有深入阅读lua的代码
所以对于lua的内存管理一直是很懵的。
如果没有对内存占用比较敏感的话
正常运行的服务器，一般都会给每个玩家登陆的时候，或者玩家某个行为的时候，创建一个临时的tabble妖城在线论坛  N. H* N( \5 q' @) y2 f
这个table的生命周期仅限于这玩家本次登录的时候。bbs.mocwww.com$ i$ G; u' ]* X) K0 {6 w, {- a$ ^
然后玩家下线了，就释放掉，比如tablexx=nil* A* x% `: }5 [6 w
但是这样做有一个问题。。。
你可以尝试一个玩家登陆的时候，你创建一个百万级别的table项目。妖城在线论坛" C6 J* u  N3 o4 r( {. C! t
玩家下线的时候，你nil掉这个table
并且你也可以及时得使用lua的垃圾回收释放无效的内存。
但问题是，你垃圾回收后，你读取lua的占用内存，发现确实下降了bbs.mocwww.com' p; ]* ~" Q) N6 ]2 c( r5 W
但是在linux下用系统命令top查看。。。。。
魔力服务端所占用的内存毫无下降。
那么你再次登陆角色，又创建了一批内存
我至今依然没有通读lua引擎的代码，所以依然不能确定lua的内存管理方式。
但是根据这段时间的测试
可以总结经验（并不一定对）：lua会霸占整个系统的内存，并以你目前最大用到的多少为限，你用lua的垃圾回收功能，是回收了bbs.mocwww.com6 e. q5 Q+ z' N* A+ W
但是这部分内存并不归还给linux系统
lua会认为，你既然现在能用到这个尺度的内存，那我留着，你等下迟早也要用到。。。。。
这就导致了，不停的table的nil释放并不能真正释放整个魔力服务端运行时占用的内存) ?& e, ~; @% Y2 j8 }
这个跟正常的编程意识就有点不符合了。。。。。。
但反正它大概是这么操作的。
解决方案是什么呢？—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート; ?' f2 t8 w' W
不要用cdkey啥的做table的key（如果非要不可，我感觉宁愿弄成field存到数据库中）
启动的时候，根据当前设定的最大在线人数，预先扩充一个table2 |  g/ I2 _0 f
这个table的索引key使用CharIndex这个序号妖城在线论坛2 j: z  A! A6 C6 Q' K% W! j( D9 `
玩家下线的时候，不要nil掉，只要再次初始化数据就好了。妖城在线论坛/ g& m/ c) G! o* c' T* i: I
这样就不会反复创建了魔力私服,最新魔力宝贝私服技术交流+ a! u: ?0 @% o4 Q7 ^8 A# i. m

三：引擎，c语言方面
也是同样的观点。妖城在线论坛0 P+ _! S2 q% V7 v
尽量预设开辟一段既定的内存空间，不要试图去在登陆和登出的时候频繁的创建和释放魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表2 F0 e: z; A! c9 l" G+ {
bbs.mocwww.com2 X8 C$ ^+ U( K
最初妖城启动占用内存大概2.3g，运行大概十天半个月后，就会出现内存溢出，轻则挂端重则回档。魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表2 E. g! e) r& A) j
后来优化后（其实没有优化到极致）启动占用内存800m左右，干净的系统top下观察占用内存1g而已
连续运行几个月都不会有问题。1 s7 z- V/ Q8 b3 A  ^

以上说的三个方面—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート: L0 w' ^+ Q0 R! y2 A5 U2 ~
两个都是一般的开服的gm自己可以控制优化的，第三个是必须引擎技术商方面优化的。
bbs.mocwww.com/ F6 ], x4 K. l: z
大家可以试一下

作者: Muscipular 时间: 2023-5-15 12:32

补充几点
1. 关于可用内存，实际上linux上面只有3g，windows下面只有2g—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート/ ?( g8 J0 p7 `% X9 K. w% U1 c1 @
2. luajit 可用内存是2g，除非 64位+GC64模式妖城在线论坛: c* `4 B2 M4 l# _' j; N5 j
2.1. 内存回收，lua 申请的内存看luajit的实现了，默认跟c一样的处理逻辑，但如果是myalloc的话，大概率会有内存泄漏，不过就算是c的内存申请后也不是马上归回系统的。魔力私服,最新魔力宝贝私服技术交流& |8 x! ~# ^- Q8 u2 K
3. gmsv里面动态申请的数据主要是迷宫,不过引擎的myalloc，大概率会有内存泄漏

[ 本帖最后由 Muscipular 于 2023-5-15 12:40 编辑 ]

作者: 易凡 时间: 2023-5-15 19:34

luajit我的是5.2.3版本的，所以我这边垃圾回收操作是不释放内存归还系统的

欢迎光临妖城在线论坛 (http://bbs.mocwww.com/)