发新话题
打印

[魔力私服分享] 关于服务端内存优化的一些经验

关于服务端内存优化的一些经验

大家也知道,妖城魔力一个区开服了十周年多了
& K' P- c. S6 J% J3 s4 {3 v/ h—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート妖城在线论坛2 a" ], ^0 O& T) [1 {
不管是数据库还是data的冗余肯定都非常多。
2 L- W( w, t9 N; D- y! e- T1 J* g妖城在线论坛' G& w2 b+ b, V: ?
对于妖城这样的数据量大的服务器,首先数据库肯定不能放在跟服务端运行的同一个服务器里。bbs.mocwww.com" O- D" Z6 W; D3 G1 P$ H& g7 H
魔力私服,最新魔力宝贝私服技术交流: q6 b/ w( o" I, P0 c
这是基本的,所以,最好是运行服务端的服务器一台,数据库单独一台。—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート" t" b% S9 H) m1 [* M: a
# }! H. B$ O" e' y5 M
因为数据库大了之后,mysql的资源占用也是很可观的。能省则省。
( U4 q# z/ z; z7 N, o. B妖城在线论坛魔力私服,最新魔力宝贝私服技术交流  _4 U5 o- c9 K) ~
然后关于在有限资源的前提下(魔力原生的服务端是只能运行32位系统的,也就是最大4g内存,后续可能有别的引擎升级兼容了64位那另说)—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート/ t* |( d; W, U: H3 h" P
妖城在线论坛6 D6 b5 G4 y6 \
优化有两个方面
: x4 W% j, Y% l) e魔力私服,最新魔力宝贝私服技术交流一:data方面
- H1 }; \' `9 |& }2 g$ Pbbs.mocwww.comdata下几乎所有的txt设定,比如npc/msg/itemset/enemy等等
. U& C+ Q# k! t( obbs.mocwww.com记住编号不要随意乱设置,尽量往小的,没用到的设定
, V9 H3 C  U1 h) l: `) Obbs.mocwww.com比如你不要把一个msg的编号设定成390000000,三亿多了
2 d9 `+ S, |. A$ q2 b9 h9 `—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート因为在程序的逻辑里,我不可能为了寻找到某个编号,就每次去整个msg里面从上到下循环搜索吧?bbs.mocwww.com" t9 A  |, [, |
所以程序逻辑,会在服务端启动的时候,就根据你msg的最大编号为上限,设定一个跳转表。—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート7 u, q5 q# y8 L  e8 q* _5 {  E
对程序员来说,讲到这里应该就懂了
: ^. Z/ I% D: R. Y, M  i魔力私服,最新魔力宝贝私服技术交流但是对于非程序员来说,我多说两句,跳转表是为了快速定位数据不需要从上到下循环搜索的。9 \: q' y9 U# j
你可以理解跳转表是连续的一堆信息。; _, t$ s8 U1 Z, u0 r5 C# B) Q
你的msg编号最大的如果是100000,那么程序启动的时候就会设定10万个连续的数据空间用来存放对应每个msg编号指向msg.txt的哪一行。/ W" C/ {5 P# B- O
这样,当游戏里,需要调用到某个msg的时候(比如道具说明啊,npc对话啊,boss发言啊之类的)魔力私服,最新魔力宝贝私服技术交流* @3 b- p9 x2 P3 E+ ~: d
它直接通过编号获取跳转表指向的msg行,获取到msg的内容。妖城在线论坛( a9 ~5 A) i6 E# k8 z7 b/ J) z
这就导致了一个问题,你要是把msg的最大编号设置成3亿多。。。。可想而知浪费了多少内存?—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート# ~* [+ D. _! E; w# G

  r4 l$ O8 k& R# F) Zdata下的其它文档也是一样的道理。用编号,不要太任性。) y7 X9 K9 R( s

1 T" t8 A" w# r1 I7 b1 J魔力私服,最新魔力宝贝私服技术交流二:lua方面
0 J0 h5 S/ ^, vlua方面最大的内存占用,应该就是table类型的反复释放和创建了。
+ j. h! u5 d) a+ b" b—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート因为没有深入阅读lua的代码魔力私服,最新魔力宝贝私服技术交流. \0 L, P7 Y+ V, ^
所以对于lua的内存管理一直是很懵的。
0 G& q" z5 m8 Q) w/ ?' x2 D* G( W2 h- I魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表如果没有对内存占用比较敏感的话
: }7 t6 K5 B8 w) _9 x8 B" C5 s; i$ O. [魔力私服,最新魔力宝贝私服技术交流正常运行的服务器,一般都会给每个玩家登陆的时候,或者玩家某个行为的时候,创建一个临时的tabble魔力私服,最新魔力宝贝私服技术交流* m/ R" p& W  v2 f* @7 A5 w
这个table的生命周期仅限于这玩家本次登录的时候。妖城在线论坛* B3 ?9 M' a0 i! \& b8 ]/ _+ s% g
然后玩家下线了,就释放掉,比如tablexx=nil魔力私服,最新魔力宝贝私服技术交流. Y9 I! f1 K  _6 U
但是这样做有一个问题。。。
3 Q3 T  @7 l( A! r魔力私服,最新魔力宝贝私服技术交流你可以尝试一个玩家登陆的时候,你创建一个百万级别的table项目。妖城在线论坛; W/ ~$ U9 M+ l* z  e6 u
玩家下线的时候,你nil掉这个table. }- `% i# G* `0 v. H7 d
并且你也可以及时得使用lua的垃圾回收释放无效的内存。魔力私服,最新魔力宝贝私服技术交流2 X! d7 f+ }- q1 B5 Y! @
但问题是,你垃圾回收后,你读取lua的占用内存,发现确实下降了
0 z0 `5 U0 p/ [# f# ~* y! |魔力私服,最新魔力宝贝私服技术交流但是在linux下用系统命令top查看。。。。。魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表2 E3 _* }* @) G8 o5 d+ |
魔力服务端所占用的内存毫无下降。
$ X* N) q3 l5 T* d" K那么你再次登陆角色,又创建了一批内存妖城在线论坛- _, S9 v0 W1 y! ?0 r
我至今依然没有通读lua引擎的代码,所以依然不能确定lua的内存管理方式。
( N; W/ O* Z, ^* O2 \  \但是根据这段时间的测试
. p4 U1 \; r3 b—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート可以总结经验(并不一定对):lua会霸占整个系统的内存,并以你目前最大用到的多少为限,你用lua的垃圾回收功能,是回收了魔力私服,最新魔力宝贝私服技术交流7 `4 w) {4 N6 T! y8 ~2 L
但是这部分内存并不归还给linux系统
# p! f& F$ \" R4 l9 B/ X6 _: v—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲートlua会认为,你既然现在能用到这个尺度的内存,那我留着,你等下迟早也要用到。。。。。魔力私服,最新魔力宝贝私服技术交流' \* r  X7 ?9 V& l( r: D6 W8 F
这就导致了,不停的table的nil释放并不能真正释放整个魔力服务端运行时占用的内存4 i' v: G' \: s6 {4 V) s( L
这个跟正常的编程意识就有点不符合了。。。。。。
9 w0 g+ l/ a( I6 Q. j! J—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート但反正它大概是这么操作的。—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート/ v# ]: U1 j* J- s8 g7 o
解决方案是什么呢?—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート, K% a" q; ?# H+ h; V2 W
不要用cdkey啥的做table的key(如果非要不可,我感觉宁愿弄成field存到数据库中)妖城在线论坛$ a$ p# p$ \# u% J4 u* A
启动的时候,根据当前设定的最大在线人数,预先扩充一个table
& t, a4 A& C+ L$ h4 @$ ~, ?8 Dbbs.mocwww.com这个table的索引key使用CharIndex这个序号
* p3 d  X. K9 J# n0 u. b7 s# d* D玩家下线的时候,不要nil掉,只要再次初始化数据就好了。
0 _8 h3 C9 F) O7 H" `) `bbs.mocwww.com这样就不会反复创建了
4 h' M7 v% z; ?) Z8 I5 X
" f! b8 C. H# L* {" \) \( x: K三:引擎,c语言方面
+ w$ R# W* F' i8 ~3 |—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート也是同样的观点。
) E, C7 \3 P; e6 H/ @" ~- y魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表尽量预设开辟一段既定的内存空间,不要试图去在登陆和登出的时候频繁的创建和释放
& h0 Z' g* D* m) S0 `% U1 f魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表" [* F, u/ w' c. p8 e8 G  _, ]; R
最初妖城启动占用内存大概2.3g,运行大概十天半个月后,就会出现内存溢出,轻则挂端重则回档。魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表, i% I1 B) {5 M% l1 o
后来优化后(其实没有优化到极致)启动占用内存800m左右,干净的系统top下观察占用内存1g而已
7 g" H, P/ b9 ^3 X- L, I4 \/ ]连续运行几个月都不会有问题。bbs.mocwww.com" j$ N: a$ Y. ?: m$ @
魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表7 Z5 ~6 V( C7 |. M3 D1 S, f
以上说的三个方面
- ^2 a' K( h' C1 {魔力私服,最新魔力宝贝私服技术交流两个都是一般的开服的gm自己可以控制优化的,第三个是必须引擎技术商方面优化的。魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表) Y4 b; H  G9 [3 p1 y
9 l( U3 `. Q5 Q1 d
大家可以试一下
妖城欢迎您!

TOP

补充几点魔力私服,最新魔力宝贝私服技术交流5 O/ Z0 E1 L# K, a3 S8 J
1. 关于可用内存,实际上linux上面只有3g,windows下面只有2g
/ `; S& ?5 b4 J3 G7 N/ q; @9 @bbs.mocwww.com2. luajit 可用内存是2g,除非 64位+GC64模式—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート$ v0 a2 E: Q+ p' X$ u, \
2.1. 内存回收,lua 申请的内存看luajit的实现了,默认跟c一样的处理逻辑,但如果是myalloc的话,大概率会有内存泄漏,不过就算是c的内存申请后也不是马上归回系统的。
& ^7 v$ S' d0 G1 R. L魔力私服,最新魔力宝贝私服技术交流3. gmsv里面动态申请的数据主要是迷宫,不过引擎的myalloc,大概率会有内存泄漏
& X' [8 o* |# u  f9 G, _bbs.mocwww.com
8 N1 P% r: a3 J1 b妖城在线论坛[ 本帖最后由 Muscipular 于 2023-5-15 12:40 编辑 ]

TOP

luajit我的是5.2.3版本的,所以我这边垃圾回收操作是不释放内存归还系统的
妖城欢迎您!

TOP

发新话题