妖城在线论坛 - Powered by Discuz! Board

标题: [魔力私服分享] 关于服务端内存优化的一些经验 [打印本页]

作者: 易凡 时间: 2023-5-15 01:16 标题: 关于服务端内存优化的一些经验

大家也知道，妖城魔力一个区开服了十周年多了bbs.mocwww.com% J) ]9 E1 ?0 r$ a/ A
bbs.mocwww.com  f! }" H. d7 E5 J) T9 Y- t
不管是数据库还是data的冗余肯定都非常多。妖城在线论坛. x( ]5 b5 x- C  R/ q
bbs.mocwww.com$ P5 i" f) {( q
对于妖城这样的数据量大的服务器，首先数据库肯定不能放在跟服务端运行的同一个服务器里。魔力私服,最新魔力宝贝私服技术交流) Y, x- r1 t, n

这是基本的，所以，最好是运行服务端的服务器一台，数据库单独一台。魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表  i7 M' T& j. v  u

因为数据库大了之后，mysql的资源占用也是很可观的。能省则省。

然后关于在有限资源的前提下（魔力原生的服务端是只能运行32位系统的，也就是最大4g内存，后续可能有别的引擎升级兼容了64位那另说）
魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表% y) q: l! ^( m9 `1 p' w  W: t2 p* X
优化有两个方面
一：data方面魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表" `, I' W  t; C3 H
data下几乎所有的txt设定，比如npc/msg/itemset/enemy等等
记住编号不要随意乱设置，尽量往小的，没用到的设定+ N" b, r4 B" K# G
比如你不要把一个msg的编号设定成390000000，三亿多了
因为在程序的逻辑里，我不可能为了寻找到某个编号，就每次去整个msg里面从上到下循环搜索吧？魔力私服,最新魔力宝贝私服技术交流( j$ \$ C1 W7 M* V6 b8 e5 _4 t0 q
所以程序逻辑，会在服务端启动的时候，就根据你msg的最大编号为上限，设定一个跳转表。妖城在线论坛0 N+ _& n% g- n1 y/ l3 P$ A! u
对程序员来说，讲到这里应该就懂了2 Z# y; f: l4 K
但是对于非程序员来说，我多说两句，跳转表是为了快速定位数据不需要从上到下循环搜索的。
你可以理解跳转表是连续的一堆信息。魔力私服,最新魔力宝贝私服技术交流# {# b+ a& ?) |8 J3 [; Q
你的msg编号最大的如果是100000，那么程序启动的时候就会设定10万个连续的数据空间用来存放对应每个msg编号指向msg.txt的哪一行。' b/ ]2 s8 g3 j$ ^: J7 ~
这样，当游戏里，需要调用到某个msg的时候（比如道具说明啊，npc对话啊，boss发言啊之类的）+ V1 U! {) ]: P0 S, y& _- e
它直接通过编号获取跳转表指向的msg行，获取到msg的内容。bbs.mocwww.com6 m' T: j5 U& Y5 u( {+ \
这就导致了一个问题，你要是把msg的最大编号设置成3亿多。。。。可想而知浪费了多少内存？
8 Q+ |2 c% c+ G
data下的其它文档也是一样的道理。用编号，不要太任性。妖城在线论坛* p9 `# s" R7 v4 L4 |8 h4 ?  }1 w
妖城在线论坛( e6 O* J) y. r
二：lua方面
lua方面最大的内存占用，应该就是table类型的反复释放和创建了。bbs.mocwww.com& r! _4 V0 I) z7 }( k6 ?# R! n
因为没有深入阅读lua的代码妖城在线论坛$ K. C# m. p4 ]( n# _
所以对于lua的内存管理一直是很懵的。
如果没有对内存占用比较敏感的话- |3 @2 i8 J7 p" x, j) Z
正常运行的服务器，一般都会给每个玩家登陆的时候，或者玩家某个行为的时候，创建一个临时的tabble
这个table的生命周期仅限于这玩家本次登录的时候。
然后玩家下线了，就释放掉，比如tablexx=nil1 w* j* z+ }* I+ U
但是这样做有一个问题。。。
你可以尝试一个玩家登陆的时候，你创建一个百万级别的table项目。魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表1 \' l; f7 \0 y  z# s3 g
玩家下线的时候，你nil掉这个tablebbs.mocwww.com* r# |% f( Y! C; O2 k+ w
并且你也可以及时得使用lua的垃圾回收释放无效的内存。bbs.mocwww.com9 G. `7 c# P' F4 J$ X
但问题是，你垃圾回收后，你读取lua的占用内存，发现确实下降了
但是在linux下用系统命令top查看。。。。。—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート6 K' f4 N- M* `& K0 T
魔力服务端所占用的内存毫无下降。妖城在线论坛* x2 `* @0 G: \* w- W  V
那么你再次登陆角色，又创建了一批内存
我至今依然没有通读lua引擎的代码，所以依然不能确定lua的内存管理方式。妖城在线论坛/ b9 k' g$ ?) `$ a2 ]
但是根据这段时间的测试9 u; ^8 ?+ W, b. c: M+ W  P
可以总结经验（并不一定对）：lua会霸占整个系统的内存，并以你目前最大用到的多少为限，你用lua的垃圾回收功能，是回收了
但是这部分内存并不归还给linux系统bbs.mocwww.com' W! J4 c1 c8 O, r8 b5 t) U) R5 f
lua会认为，你既然现在能用到这个尺度的内存，那我留着，你等下迟早也要用到。。。。。魔力私服,最新魔力宝贝私服技术交流7 |' K, @$ H% L9 Q3 k
这就导致了，不停的table的nil释放并不能真正释放整个魔力服务端运行时占用的内存
这个跟正常的编程意识就有点不符合了。。。。。。
但反正它大概是这么操作的。* x9 g6 v( {/ j4 ]
解决方案是什么呢？妖城在线论坛! _: P& `( j& z% n. t. v$ b
不要用cdkey啥的做table的key（如果非要不可，我感觉宁愿弄成field存到数据库中）8 }+ ]: E, r1 {1 L* D
启动的时候，根据当前设定的最大在线人数，预先扩充一个table魔力私服,最新魔力宝贝私服技术交流$ s1 u  F0 }6 e' O) n. ]1 k
这个table的索引key使用CharIndex这个序号bbs.mocwww.com" z  [. T5 W( |
玩家下线的时候，不要nil掉，只要再次初始化数据就好了。
这样就不会反复创建了魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表3 m: I3 P5 }$ l4 v; G3 F

三：引擎，c语言方面妖城在线论坛5 n$ ]& S' R' g  a: e( \; h4 G9 D
也是同样的观点。  t' I  V8 |2 K8 j% b% `
尽量预设开辟一段既定的内存空间，不要试图去在登陆和登出的时候频繁的创建和释放

最初妖城启动占用内存大概2.3g，运行大概十天半个月后，就会出现内存溢出，轻则挂端重则回档。魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表. ], X$ J# X) v
后来优化后（其实没有优化到极致）启动占用内存800m左右，干净的系统top下观察占用内存1g而已魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表$ x5 u8 J) G% t0 k
连续运行几个月都不会有问题。
bbs.mocwww.com6 P. \# q2 u0 o! F( B
以上说的三个方面魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表7 y7 K& P) {: ~$ l
两个都是一般的开服的gm自己可以控制优化的，第三个是必须引擎技术商方面优化的。魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表; t3 D. ^& ^8 G) O" }7 o

大家可以试一下

作者: Muscipular 时间: 2023-5-15 12:32

补充几点魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表9 @. q+ t2 ~' g) q7 J f' i
1. 关于可用内存，实际上linux上面只有3g，windows下面只有2g
2. luajit 可用内存是2g，除非 64位+GC64模式魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表3 ]' `* X- d6 ]$ E) g$ F# C
2.1. 内存回收，lua 申请的内存看luajit的实现了，默认跟c一样的处理逻辑，但如果是myalloc的话，大概率会有内存泄漏，不过就算是c的内存申请后也不是马上归回系统的。
3. gmsv里面动态申请的数据主要是迷宫,不过引擎的myalloc，大概率会有内存泄漏

[ 本帖最后由 Muscipular 于 2023-5-15 12:40 编辑 ]

作者: 易凡 时间: 2023-5-15 19:34

luajit我的是5.2.3版本的，所以我这边垃圾回收操作是不释放内存归还系统的

欢迎光临妖城在线论坛 (http://bbs.mocwww.com/)