妖城在线论坛 - Powered by Discuz! Board

标题: [魔力私服分享] 关于服务端内存优化的一些经验 [打印本页]

作者: 易凡 时间: 2023-5-15 01:16 标题: 关于服务端内存优化的一些经验

大家也知道，妖城魔力一个区开服了十周年多了

不管是数据库还是data的冗余肯定都非常多。—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート# L( f9 r( t0 B( D" Q; k+ t8 R, E6 R
bbs.mocwww.com+ K9 D  s$ a; |, D
对于妖城这样的数据量大的服务器，首先数据库肯定不能放在跟服务端运行的同一个服务器里。魔力私服,最新魔力宝贝私服技术交流9 G( d0 ^3 R2 e: H. m
—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート4 w0 v9 _; L! S, M# k5 o$ U
这是基本的，所以，最好是运行服务端的服务器一台，数据库单独一台。bbs.mocwww.com& O" {2 n- i/ e0 W" i( Q0 o3 V' w

因为数据库大了之后，mysql的资源占用也是很可观的。能省则省。魔力私服,最新魔力宝贝私服技术交流- c2 Y' Q3 x$ d6 I+ N9 y* @: G% c' i
% }6 Z" K0 ]+ P9 P4 i, @( v7 k" E4 l
然后关于在有限资源的前提下（魔力原生的服务端是只能运行32位系统的，也就是最大4g内存，后续可能有别的引擎升级兼容了64位那另说）bbs.mocwww.com) X% N/ M" ~5 ]2 @& a* n. d

优化有两个方面
一：data方面妖城在线论坛% P/ V) g) ^9 T. x
data下几乎所有的txt设定，比如npc/msg/itemset/enemy等等
记住编号不要随意乱设置，尽量往小的，没用到的设定
比如你不要把一个msg的编号设定成390000000，三亿多了
因为在程序的逻辑里，我不可能为了寻找到某个编号，就每次去整个msg里面从上到下循环搜索吧？
所以程序逻辑，会在服务端启动的时候，就根据你msg的最大编号为上限，设定一个跳转表。
对程序员来说，讲到这里应该就懂了
但是对于非程序员来说，我多说两句，跳转表是为了快速定位数据不需要从上到下循环搜索的。妖城在线论坛2 k3 }1 p0 @: Z1 Q; E
你可以理解跳转表是连续的一堆信息。魔力私服,最新魔力宝贝私服技术交流2 L2 V* C6 c/ ~
你的msg编号最大的如果是100000，那么程序启动的时候就会设定10万个连续的数据空间用来存放对应每个msg编号指向msg.txt的哪一行。
这样，当游戏里，需要调用到某个msg的时候（比如道具说明啊，npc对话啊，boss发言啊之类的）
它直接通过编号获取跳转表指向的msg行，获取到msg的内容。
这就导致了一个问题，你要是把msg的最大编号设置成3亿多。。。。可想而知浪费了多少内存？

data下的其它文档也是一样的道理。用编号，不要太任性。
妖城在线论坛/ y3 J8 I# }' U- g) B! B4 G
二：lua方面. Y+ m( @( `& \& C" q  u
lua方面最大的内存占用，应该就是table类型的反复释放和创建了。/ X: Z  Y% x, p0 G7 A. ?' E( S
因为没有深入阅读lua的代码
所以对于lua的内存管理一直是很懵的。
如果没有对内存占用比较敏感的话
正常运行的服务器，一般都会给每个玩家登陆的时候，或者玩家某个行为的时候，创建一个临时的tabble
这个table的生命周期仅限于这玩家本次登录的时候。妖城在线论坛+ w8 T; l" x: N. ]
然后玩家下线了，就释放掉，比如tablexx=nil
但是这样做有一个问题。。。
你可以尝试一个玩家登陆的时候，你创建一个百万级别的table项目。魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表: c' g. s) Q# ~
玩家下线的时候，你nil掉这个tablebbs.mocwww.com- T  m5 c9 A& P
并且你也可以及时得使用lua的垃圾回收释放无效的内存。
但问题是，你垃圾回收后，你读取lua的占用内存，发现确实下降了
但是在linux下用系统命令top查看。。。。。
魔力服务端所占用的内存毫无下降。魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表1 s& h, M! _7 L% X( H! B3 r
那么你再次登陆角色，又创建了一批内存
我至今依然没有通读lua引擎的代码，所以依然不能确定lua的内存管理方式。
但是根据这段时间的测试
可以总结经验（并不一定对）：lua会霸占整个系统的内存，并以你目前最大用到的多少为限，你用lua的垃圾回收功能，是回收了—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート- L5 R  `8 Y" E( ?
但是这部分内存并不归还给linux系统
lua会认为，你既然现在能用到这个尺度的内存，那我留着，你等下迟早也要用到。。。。。魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表3 O) i& U1 d( K% @: ?
这就导致了，不停的table的nil释放并不能真正释放整个魔力服务端运行时占用的内存bbs.mocwww.com+ O. U& O: Q1 p& f( x6 [
这个跟正常的编程意识就有点不符合了。。。。。。
但反正它大概是这么操作的。
解决方案是什么呢？
不要用cdkey啥的做table的key（如果非要不可，我感觉宁愿弄成field存到数据库中）
启动的时候，根据当前设定的最大在线人数，预先扩充一个table
这个table的索引key使用CharIndex这个序号
玩家下线的时候，不要nil掉，只要再次初始化数据就好了。魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表' \  k4 U5 ^; Z& l) \4 w, L* n9 A) s
这样就不会反复创建了—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート5 v6 t/ I/ f# [  L5 b4 K* m/ e4 {
妖城在线论坛/ x  P9 n, t2 }/ \; V
三：引擎，c语言方面
也是同样的观点。; ~4 h) D& F# Q
尽量预设开辟一段既定的内存空间，不要试图去在登陆和登出的时候频繁的创建和释放魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表0 }: i2 I  N/ R9 M6 A6 K
1 K0 {& }3 v$ X6 l
最初妖城启动占用内存大概2.3g，运行大概十天半个月后，就会出现内存溢出，轻则挂端重则回档。
后来优化后（其实没有优化到极致）启动占用内存800m左右，干净的系统top下观察占用内存1g而已
连续运行几个月都不会有问题。魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表) y/ x5 U, p% k2 P8 o3 t

以上说的三个方面
两个都是一般的开服的gm自己可以控制优化的，第三个是必须引擎技术商方面优化的。魔力私服,最新魔力宝贝私服技术交流' a0 G9 Z. z: r7 V. A
- }) o2 y' F5 p, C8 P* \9 b1 D6 o
大家可以试一下

作者: Muscipular 时间: 2023-5-15 12:32

补充几点妖城在线论坛$ J$ i* |3 _; f8 T# W
1. 关于可用内存，实际上linux上面只有3g，windows下面只有2g魔力私服,最新魔力宝贝私服技术交流# O. [2 l7 P1 A
2. luajit 可用内存是2g，除非 64位+GC64模式—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート; G) i* s. I/ `, ~
2.1. 内存回收，lua 申请的内存看luajit的实现了，默认跟c一样的处理逻辑，但如果是myalloc的话，大概率会有内存泄漏，不过就算是c的内存申请后也不是马上归回系统的。
3. gmsv里面动态申请的数据主要是迷宫,不过引擎的myalloc，大概率会有内存泄漏妖城在线论坛2 J! g- `2 A. L, b: j$ f
魔力私服,最新魔力宝贝私服技术交流! ]: l$ }2 `2 [& F' o
[ 本帖最后由 Muscipular 于 2023-5-15 12:40 编辑 ]

作者: 易凡 时间: 2023-5-15 19:34

luajit我的是5.2.3版本的，所以我这边垃圾回收操作是不释放内存归还系统的

欢迎光临妖城在线论坛 (http://bbs.mocwww.com/)