标题:
[魔力私服分享]
关于服务端内存优化的一些经验
[打印本页]
作者:
易凡
时间:
2023-5-15 01:16
标题:
关于服务端内存优化的一些经验
大家也知道,妖城魔力一个区开服了十周年多了
/ D# A$ D0 Q) z, l7 I8 h魔力私服,最新魔力宝贝私服技术交流
妖城在线论坛6 [5 j& Q2 W2 g3 c# }
不管是数据库还是data的冗余肯定都非常多。
bbs.mocwww.com. `3 L$ ]! ?" D0 p
魔力私服,最新魔力宝贝私服技术交流" h. @; l( c W" I+ g
对于妖城这样的数据量大的服务器,首先数据库肯定不能放在跟服务端运行的同一个服务器里。
9 u1 g) N7 t( \6 ]1 M4 ibbs.mocwww.com
妖城在线论坛9 A$ `; I# |7 @0 o
这是基本的,所以,最好是运行服务端的服务器一台,数据库单独一台。
魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表$ h* a& m, Q z' A, N# ]( |0 q4 S
: h. G, S) ~- E9 q* b5 @bbs.mocwww.com
因为数据库大了之后,mysql的资源占用也是很可观的。能省则省。
R) H4 a% L }
a2 M; z2 t* b0 y! U! | d
然后关于在有限资源的前提下(魔力原生的服务端是只能运行32位系统的,也就是最大4g内存,后续可能有别的引擎升级兼容了64位那另说)
" H/ s+ t0 W$ N$ W0 w& ~! I! nbbs.mocwww.com
8 l% K4 r2 A5 o; R6 e9 w—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート
优化有两个方面
' i$ A2 X6 H- I+ G魔力私服,最新魔力宝贝私服技术交流
一:data方面
# P; c' B1 f: ?
data下几乎所有的txt设定,比如npc/msg/itemset/enemy等等
& l; T5 t/ d1 I6 b0 _* `
记住编号不要随意乱设置,尽量往小的,没用到的设定
& T6 f8 V; h% [: F3 @) J1 k9 ?- L7 C9 j
比如你不要把一个msg的编号设定成390000000,三亿多了
: U4 }+ @6 u! K* J魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表
因为在程序的逻辑里,我不可能为了寻找到某个编号,就每次去整个msg里面从上到下循环搜索吧?
bbs.mocwww.com1 i' g$ u$ }$ `& r
所以程序逻辑,会在服务端启动的时候,就根据你msg的最大编号为上限,设定一个跳转表。
6 \' O& f% w. u% H% ^魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表
对程序员来说,讲到这里应该就懂了
—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート9 L; Y* \+ X( X% o; ~0 L
但是对于非程序员来说,我多说两句,跳转表是为了快速定位数据不需要从上到下循环搜索的。
. ]" R! f& B+ Z2 m魔力私服,最新魔力宝贝私服技术交流
你可以理解跳转表是连续的一堆信息。
bbs.mocwww.com: _& D0 Z, r, A! L: n
你的msg编号最大的如果是100000,那么程序启动的时候就会设定10万个连续的数据空间用来存放对应每个msg编号指向msg.txt的哪一行。
bbs.mocwww.com0 S B; c( G: v
这样,当游戏里,需要调用到某个msg的时候(比如道具说明啊,npc对话啊,boss发言啊之类的)
妖城在线论坛0 c8 B# U' c5 D, m
它直接通过编号获取跳转表指向的msg行,获取到msg的内容。
魔力私服,最新魔力宝贝私服技术交流, E& p9 [; f9 `, H
这就导致了一个问题,你要是把msg的最大编号设置成3亿多。。。。可想而知浪费了多少内存?
bbs.mocwww.com- E& K4 `: A1 s1 ~7 D! Y
8 a9 \4 D6 w+ B, L* r! _; v. O' m
data下的其它文档也是一样的道理。用编号,不要太任性。
魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表" m+ ]% [0 ]2 u! c
—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート' U- s, a" h! w$ b' J: H" z! [
二:lua方面
* m2 C4 n0 v& N$ |" ]
lua方面最大的内存占用,应该就是table类型的反复释放和创建了。
bbs.mocwww.com# a1 H p4 p5 }6 [) n
因为没有深入阅读lua的代码
9 ^* ?1 y) {0 d2 y* x1 x. c# Y$ @魔力私服,最新魔力宝贝私服技术交流
所以对于lua的内存管理一直是很懵的。
8 H' ]/ W }7 x! y
如果没有对内存占用比较敏感的话
0 {7 C* E3 H% D0 Cbbs.mocwww.com
正常运行的服务器,一般都会给每个玩家登陆的时候,或者玩家某个行为的时候,创建一个临时的tabble
+ T( f; K& L' x$ y$ d) l9 k—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート
这个table的生命周期仅限于这玩家本次登录的时候。
魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表+ J( y% V* S0 t, V6 x6 x/ I( K* R, j) g
然后玩家下线了,就释放掉,比如tablexx=nil
3 a! q: D5 [2 U% ]# U
但是这样做有一个问题。。。
# w8 u$ ] |) }, D" p6 k魔力私服,最新魔力宝贝私服技术交流
你可以尝试一个玩家登陆的时候,你创建一个百万级别的table项目。
魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表# W* P4 K- c7 r0 E4 O4 I% V
玩家下线的时候,你nil掉这个table
bbs.mocwww.com5 }8 k2 ^$ B, P$ j& J0 c
并且你也可以及时得使用lua的垃圾回收释放无效的内存。
9 I7 S$ w$ A4 }, F
但问题是,你垃圾回收后,你读取lua的占用内存,发现确实下降了
bbs.mocwww.com; [, f- W8 U2 u3 ]
但是在linux下用系统命令top查看。。。。。
/ s5 J% I5 {7 R8 l, c m: ]) K0 `魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表
魔力服务端所占用的内存毫无下降。
# b) t: J4 V2 F' R魔力私服,最新魔力宝贝私服技术交流
那么你再次登陆角色,又创建了一批内存
, f) }3 u% [3 m0 o& i妖城在线论坛
我至今依然没有通读lua引擎的代码,所以依然不能确定lua的内存管理方式。
: |. ]$ } I7 \# R. c, c—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート
但是根据这段时间的测试
9 `% Y4 l( O) R; I1 C1 nbbs.mocwww.com
可以总结经验(并不一定对):lua会霸占整个系统的内存,并以你目前最大用到的多少为限,你用lua的垃圾回收功能,是回收了
—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート$ \+ @! h: a8 E7 V/ |
但是这部分内存并不归还给linux系统
* a& \6 {3 J1 k$ x2 b魔力私服,最新魔力宝贝私服技术交流
lua会认为,你既然现在能用到这个尺度的内存,那我留着,你等下迟早也要用到。。。。。
妖城在线论坛( ]2 O0 T3 e* K4 y
这就导致了,不停的table的nil释放并不能真正释放整个魔力服务端运行时占用的内存
; j$ T& i$ j: \( L* N" o魔力私服,最新魔力宝贝私服技术交流
这个跟正常的编程意识就有点不符合了。。。。。。
魔力私服,最新魔力宝贝私服技术交流( b9 D6 ~. [. ]. |( F1 ]# ~
但反正它大概是这么操作的。
魔力私服,最新魔力宝贝私服技术交流4 y5 T. Z$ C8 V( U; @1 s
解决方案是什么呢?
% n, ^( M( n- K" I—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート
不要用cdkey啥的做table的key(如果非要不可,我感觉宁愿弄成field存到数据库中)
5 Q8 p! g, Q# a9 v( [# S. X: r魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表
启动的时候,根据当前设定的最大在线人数,预先扩充一个table
魔力私服,最新魔力宝贝私服技术交流1 Z" G; Q! J) B
这个table的索引key使用CharIndex这个序号
5 V9 _( d* b, E% o# a6 T魔力私服,最新魔力宝贝私服技术交流
玩家下线的时候,不要nil掉,只要再次初始化数据就好了。
# }7 V0 O& n5 ]) G* D3 J4 }+ V1 tbbs.mocwww.com
这样就不会反复创建了
# ~- x$ ]/ w. k
—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート5 t+ F( C* R. B- f* t
三:引擎,c语言方面
魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表" c) [/ T6 B" L( q
也是同样的观点。
) I$ q0 O, v2 l妖城在线论坛
尽量预设开辟一段既定的内存空间,不要试图去在登陆和登出的时候频繁的创建和释放
bbs.mocwww.com' B- c h$ O; z/ v; ^8 ^3 D
0 Z4 x' A, N5 v0 X m+ f! z) d妖城在线论坛
最初妖城启动占用内存大概2.3g,运行大概十天半个月后,就会出现内存溢出,轻则挂端重则回档。
5 U- Y/ w7 t! k3 J* I- [$ G4 i! E妖城在线论坛
后来优化后(其实没有优化到极致)启动占用内存800m左右,干净的系统top下观察占用内存1g而已
' D F0 V* z C: }# U$ [6 L( `妖城在线论坛
连续运行几个月都不会有问题。
" Z, `. b s0 t8 ]- s, A4 ^* `
5 S/ o2 I: x6 v0 R5 Z U9 ]妖城在线论坛
以上说的三个方面
! J' z0 Y( @ B; qbbs.mocwww.com
两个都是一般的开服的gm自己可以控制优化的,第三个是必须引擎技术商方面优化的。
妖城在线论坛3 C' c' ~( i* O) d! p& ~4 ^# F
魔力私服,最新魔力宝贝私服技术交流$ I. E$ h" I& c! }# @
大家可以试一下
作者:
Muscipular
时间:
2023-5-15 12:32
补充几点
' u: C8 y- D2 ]. W% }" E
1. 关于可用内存,实际上linux上面只有3g,windows下面只有2g
- w8 S6 ]/ N# z# y6 ^妖城在线论坛
2. luajit 可用内存是2g,除非 64位+GC64模式
—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート* o6 a: y: D0 \+ O
2.1. 内存回收,lua 申请的内存看luajit的实现了,默认跟c一样的处理逻辑,但如果是myalloc的话,大概率会有内存泄漏,不过就算是c的内存申请后也不是马上归回系统的。
bbs.mocwww.com# p: H+ C0 p9 _0 X+ z! p
3. gmsv里面动态申请的数据主要是迷宫,不过引擎的myalloc,大概率会有内存泄漏
- ^- c" g0 H9 p' O5 V" Kbbs.mocwww.com
5 J/ z Z0 b3 q
[
本帖最后由 Muscipular 于 2023-5-15 12:40 编辑
]
作者:
易凡
时间:
2023-5-15 19:34
luajit我的是5.2.3版本的,所以我这边垃圾回收操作是不释放内存归还系统的
欢迎光临 妖城在线论坛 (http://bbs.mocwww.com/)
Powered by Discuz! 6.0.0