标题:
[魔力私服分享]
关于服务端内存优化的一些经验
[打印本页]
作者:
易凡
时间:
2023-5-15 01:16
标题:
关于服务端内存优化的一些经验
大家也知道,妖城魔力一个区开服了十周年多了
妖城在线论坛6 S: j* |/ o5 h2 t1 [
% Z" W8 d) E3 [7 Q, M( O
不管是数据库还是data的冗余肯定都非常多。
) Y6 u z d2 b: J& _) `妖城在线论坛
% Y6 {1 j0 j, F
对于妖城这样的数据量大的服务器,首先数据库肯定不能放在跟服务端运行的同一个服务器里。
2 v* h7 t& `% i" p+ M" Nbbs.mocwww.com
bbs.mocwww.com1 [4 x8 O, m: y. _: ?& h4 }1 G8 b- |
这是基本的,所以,最好是运行服务端的服务器一台,数据库单独一台。
bbs.mocwww.com7 G6 [, C+ }: N
—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート. x# r/ e) z" V5 @
因为数据库大了之后,mysql的资源占用也是很可观的。能省则省。
妖城在线论坛9 ?3 V* A% e h( a1 M" q8 t
' G8 z7 b4 ^: f% Q( Q. _
然后关于在有限资源的前提下(魔力原生的服务端是只能运行32位系统的,也就是最大4g内存,后续可能有别的引擎升级兼容了64位那另说)
魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表# o' R M9 O0 Y
bbs.mocwww.com2 z! O0 I; ?5 r# U# o7 C3 U2 D
优化有两个方面
o5 a$ Y e3 D魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表
一:data方面
妖城在线论坛+ s3 @. i" w+ I7 K. `) N3 a3 E
data下几乎所有的txt设定,比如npc/msg/itemset/enemy等等
% o$ n, N, s% [, J3 N/ q魔力私服,最新魔力宝贝私服技术交流
记住编号不要随意乱设置,尽量往小的,没用到的设定
bbs.mocwww.com. _0 Z" w6 d" r, U( ~& R7 ?1 D% ~
比如你不要把一个msg的编号设定成390000000,三亿多了
6 {# G) A6 k2 [5 b# ]6 F妖城在线论坛
因为在程序的逻辑里,我不可能为了寻找到某个编号,就每次去整个msg里面从上到下循环搜索吧?
7 i' D8 i4 M9 U2 h8 \) Q; }魔力私服,最新魔力宝贝私服技术交流
所以程序逻辑,会在服务端启动的时候,就根据你msg的最大编号为上限,设定一个跳转表。
' A/ M. `/ ?& Q9 ?; |魔力私服,最新魔力宝贝私服技术交流
对程序员来说,讲到这里应该就懂了
魔力私服,最新魔力宝贝私服技术交流5 ~# [8 _$ j0 F8 \- r
但是对于非程序员来说,我多说两句,跳转表是为了快速定位数据不需要从上到下循环搜索的。
' l& s3 }- e' y! r; i* F魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表
你可以理解跳转表是连续的一堆信息。
魔力私服,最新魔力宝贝私服技术交流3 J$ @+ q* d2 y- b* {8 R
你的msg编号最大的如果是100000,那么程序启动的时候就会设定10万个连续的数据空间用来存放对应每个msg编号指向msg.txt的哪一行。
5 q. h7 }4 \# y# D5 L' W. s% ]—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート
这样,当游戏里,需要调用到某个msg的时候(比如道具说明啊,npc对话啊,boss发言啊之类的)
0 B: u" g7 i- J' n0 y9 T魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表
它直接通过编号获取跳转表指向的msg行,获取到msg的内容。
) x5 s `( B8 t魔力私服,最新魔力宝贝私服技术交流
这就导致了一个问题,你要是把msg的最大编号设置成3亿多。。。。可想而知浪费了多少内存?
. x" c! B# D8 e* [5 `% {8 g- Bbbs.mocwww.com
5 ?' K! K6 Y* \9 t魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表
data下的其它文档也是一样的道理。用编号,不要太任性。
, c; w, z7 Z# L7 }bbs.mocwww.com
1 p; y% V0 E5 ^# A' s) y+ w) Y魔力私服,最新魔力宝贝私服技术交流
二:lua方面
魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表6 c: \7 z: x% F$ }- K! Q% h/ h
lua方面最大的内存占用,应该就是table类型的反复释放和创建了。
" b2 j$ S, q! v! H% t3 }—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート
因为没有深入阅读lua的代码
4 j( [0 d3 e- ~妖城在线论坛
所以对于lua的内存管理一直是很懵的。
8 O4 o0 i- C" _8 @3 X4 @1 W1 h妖城在线论坛
如果没有对内存占用比较敏感的话
- I! r) r' C! z2 sbbs.mocwww.com
正常运行的服务器,一般都会给每个玩家登陆的时候,或者玩家某个行为的时候,创建一个临时的tabble
) d! x; t, y- V$ S8 a( W- v
这个table的生命周期仅限于这玩家本次登录的时候。
—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート; y4 j; n/ C1 o0 p0 `: w8 b
然后玩家下线了,就释放掉,比如tablexx=nil
妖城在线论坛! V; {0 l* _+ G9 ?9 ?& {% U$ c* Y
但是这样做有一个问题。。。
; \1 f5 g* y% J# l# ~" s# |; ibbs.mocwww.com
你可以尝试一个玩家登陆的时候,你创建一个百万级别的table项目。
6 p& `* Q' Y. {( x$ I& R
玩家下线的时候,你nil掉这个table
1 h9 O+ _, w8 n1 T1 x: ]- b魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表
并且你也可以及时得使用lua的垃圾回收释放无效的内存。
3 J' p$ d% U3 C" T( e; H魔力私服,最新魔力宝贝私服技术交流
但问题是,你垃圾回收后,你读取lua的占用内存,发现确实下降了
% P% @: w; M1 m/ ^0 G
但是在linux下用系统命令top查看。。。。。
5 f7 E @; M0 h( A' w
魔力服务端所占用的内存毫无下降。
8 v0 T2 E$ L5 \9 a( M$ l, [* _; u妖城在线论坛
那么你再次登陆角色,又创建了一批内存
: E- x% h: Y! u: R" P, l7 z, r魔力私服,最新魔力宝贝私服技术交流
我至今依然没有通读lua引擎的代码,所以依然不能确定lua的内存管理方式。
) F$ Q9 p7 X5 q% ^魔力私服,最新魔力宝贝私服技术交流
但是根据这段时间的测试
4 J5 }4 s' q& z; |/ Q* T/ B; Hbbs.mocwww.com
可以总结经验(并不一定对):lua会霸占整个系统的内存,并以你目前最大用到的多少为限,你用lua的垃圾回收功能,是回收了
; S: j! |' j6 Q& k, x7 k8 s
但是这部分内存并不归还给linux系统
( ], n# D1 N6 j$ i
lua会认为,你既然现在能用到这个尺度的内存,那我留着,你等下迟早也要用到。。。。。
魔力私服,最新魔力宝贝私服技术交流$ J7 S5 ]2 c$ L) ^4 H% a
这就导致了,不停的table的nil释放并不能真正释放整个魔力服务端运行时占用的内存
+ T3 }/ K8 N, W. a' t6 i+ E: [魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表
这个跟正常的编程意识就有点不符合了。。。。。。
" [: g9 G. Z; H3 h" z& X
但反正它大概是这么操作的。
bbs.mocwww.com, U: U& L* h0 R6 a* Z% d( K
解决方案是什么呢?
; _1 j7 @/ `2 T4 q
不要用cdkey啥的做table的key(如果非要不可,我感觉宁愿弄成field存到数据库中)
& o5 R f. X; Z! Y魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表
启动的时候,根据当前设定的最大在线人数,预先扩充一个table
2 e: r" r; g) R3 t妖城在线论坛
这个table的索引key使用CharIndex这个序号
魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表' }* ]/ V$ W6 l4 s
玩家下线的时候,不要nil掉,只要再次初始化数据就好了。
2 u9 I. B5 a& O& q
这样就不会反复创建了
bbs.mocwww.com' w8 ~; A* y2 j& U& p# p0 @
# ~5 ^. {" V5 U% W( k, r8 l魔力私服,最新魔力宝贝私服技术交流
三:引擎,c语言方面
魔力私服,最新魔力宝贝私服技术交流8 K G- F6 |8 X, n
也是同样的观点。
bbs.mocwww.com, b3 q3 Q. }: |) o; K. a/ x
尽量预设开辟一段既定的内存空间,不要试图去在登陆和登出的时候频繁的创建和释放
—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート) M# e& ]% s9 y, G6 f0 t
妖城在线论坛, }: M- X6 F- p( n
最初妖城启动占用内存大概2.3g,运行大概十天半个月后,就会出现内存溢出,轻则挂端重则回档。
/ |) l6 }) H0 x7 y妖城在线论坛
后来优化后(其实没有优化到极致)启动占用内存800m左右,干净的系统top下观察占用内存1g而已
1 H7 a8 b |1 b' S魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表
连续运行几个月都不会有问题。
- K% @3 r4 B4 p v2 b0 }, t
—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート4 T2 @1 q U' p) R1 W+ M! r+ `1 W9 _
以上说的三个方面
( p q& ^, N6 R! k( k, Z
两个都是一般的开服的gm自己可以控制优化的,第三个是必须引擎技术商方面优化的。
1 Q& o$ L" h I- j2 S4 V' @
2 S# s" W/ D2 Z8 x6 w1 z/ L' k
大家可以试一下
作者:
Muscipular
时间:
2023-5-15 12:32
补充几点
K b2 O E& ]* E$ }妖城在线论坛
1. 关于可用内存,实际上linux上面只有3g,windows下面只有2g
bbs.mocwww.com b6 ?+ K1 }( d. T
2. luajit 可用内存是2g,除非 64位+GC64模式
1 t: i7 {9 M; `! C—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート
2.1. 内存回收,lua 申请的内存看luajit的实现了,默认跟c一样的处理逻辑,但如果是myalloc的话,大概率会有内存泄漏,不过就算是c的内存申请后也不是马上归回系统的。
# X; K: ?( D" E1 Y3 Ybbs.mocwww.com
3. gmsv里面动态申请的数据主要是迷宫,不过引擎的myalloc,大概率会有内存泄漏
3 m& B3 V8 v t) m8 b+ r) e8 ?妖城在线论坛
) v( R1 V2 p( D/ Q& Dbbs.mocwww.com
[
本帖最后由 Muscipular 于 2023-5-15 12:40 编辑
]
作者:
易凡
时间:
2023-5-15 19:34
luajit我的是5.2.3版本的,所以我这边垃圾回收操作是不释放内存归还系统的
欢迎光临 妖城在线论坛 (http://bbs.mocwww.com/)
Powered by Discuz! 6.0.0