发新话题
打印

[魔力私服分享] 关于服务端内存优化的一些经验

关于服务端内存优化的一些经验

大家也知道,妖城魔力一个区开服了十周年多了
6 G8 ~! @9 V4 T# b& v. G, ~妖城在线论坛
/ h6 D# ^' _' b) [9 o  d5 Q, ubbs.mocwww.com不管是数据库还是data的冗余肯定都非常多。# r7 m  q9 q2 E0 m7 S

1 Y, Q! \0 |* f6 k* f# r+ y—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート对于妖城这样的数据量大的服务器,首先数据库肯定不能放在跟服务端运行的同一个服务器里。魔力私服,最新魔力宝贝私服技术交流  b7 Y4 b6 N4 N5 d

+ k/ @: w3 {) ]3 P! [/ `- W8 F妖城在线论坛这是基本的,所以,最好是运行服务端的服务器一台,数据库单独一台。
5 I3 N& d0 s1 `8 O魔力私服,最新魔力宝贝私服技术交流
7 P, r6 ?5 w% V; O6 u. L—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート因为数据库大了之后,mysql的资源占用也是很可观的。能省则省。妖城在线论坛+ j' y/ S* A& S" t' k

, O' l! O3 _% ~4 Z7 V" n魔力私服,最新魔力宝贝私服技术交流然后关于在有限资源的前提下(魔力原生的服务端是只能运行32位系统的,也就是最大4g内存,后续可能有别的引擎升级兼容了64位那另说)魔力私服,最新魔力宝贝私服技术交流" [* P7 O8 w1 h# [0 B7 e& w6 k
9 ]0 h2 K4 T- L& U, j8 ^
优化有两个方面魔力私服,最新魔力宝贝私服技术交流" ~3 V% @# F3 b8 c4 l6 T  L( L
一:data方面
9 J9 b& G2 H; W- I/ O' ^- J1 i* t妖城在线论坛data下几乎所有的txt设定,比如npc/msg/itemset/enemy等等魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表0 ]2 y1 C9 `8 `2 n/ t6 f4 v1 M  Y
记住编号不要随意乱设置,尽量往小的,没用到的设定—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート5 B- n3 M# N% W
比如你不要把一个msg的编号设定成390000000,三亿多了魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表$ U# \- ?% H: ^# E- H8 e
因为在程序的逻辑里,我不可能为了寻找到某个编号,就每次去整个msg里面从上到下循环搜索吧?
3 p' O3 C( J9 s+ v—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート所以程序逻辑,会在服务端启动的时候,就根据你msg的最大编号为上限,设定一个跳转表。
( J" f; D. ^" i3 U: z* z% w魔力私服,最新魔力宝贝私服技术交流对程序员来说,讲到这里应该就懂了
/ \: `3 ~  i) f妖城在线论坛但是对于非程序员来说,我多说两句,跳转表是为了快速定位数据不需要从上到下循环搜索的。
7 R; L/ q" J0 ^0 U魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表你可以理解跳转表是连续的一堆信息。
, t, L: L9 w5 w" N' h—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート你的msg编号最大的如果是100000,那么程序启动的时候就会设定10万个连续的数据空间用来存放对应每个msg编号指向msg.txt的哪一行。魔力私服,最新魔力宝贝私服技术交流6 U5 ~# I' G9 y3 Y% S! n7 _
这样,当游戏里,需要调用到某个msg的时候(比如道具说明啊,npc对话啊,boss发言啊之类的)
" |3 v! E7 v7 k5 |( I; f魔力私服,最新魔力宝贝私服技术交流它直接通过编号获取跳转表指向的msg行,获取到msg的内容。% t3 w/ q3 c3 z9 r1 n
这就导致了一个问题,你要是把msg的最大编号设置成3亿多。。。。可想而知浪费了多少内存?
- A/ N( A' p2 n+ l  o& n) d妖城在线论坛
& J8 }" _) L7 b! l' y妖城在线论坛data下的其它文档也是一样的道理。用编号,不要太任性。妖城在线论坛6 L% d- J# j0 t5 ^* Q

3 K, h: d* z' B8 e魔力私服,最新魔力宝贝私服技术交流二:lua方面妖城在线论坛- Q0 R9 W, a' }. Y5 P2 O
lua方面最大的内存占用,应该就是table类型的反复释放和创建了。& T" Q- R5 D" {2 A/ \3 q6 _
因为没有深入阅读lua的代码
) O5 ?1 I, n" r. H# `3 `# d4 r7 O; _魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表所以对于lua的内存管理一直是很懵的。
9 V8 _/ \. w$ |" X4 {—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート如果没有对内存占用比较敏感的话魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表0 A3 J# g  i* W( o  ]9 i  z' F
正常运行的服务器,一般都会给每个玩家登陆的时候,或者玩家某个行为的时候,创建一个临时的tabble
+ b! N2 E& h  y—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート这个table的生命周期仅限于这玩家本次登录的时候。
7 e8 n* q# U7 @5 W* g% H—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート然后玩家下线了,就释放掉,比如tablexx=nil妖城在线论坛: O3 U8 f' ^) [4 b* u
但是这样做有一个问题。。。
8 N8 O' _3 ^5 k- `* B妖城在线论坛你可以尝试一个玩家登陆的时候,你创建一个百万级别的table项目。bbs.mocwww.com4 Q' K) L0 V2 g& F  t( }$ a
玩家下线的时候,你nil掉这个table
# M) g$ F& d/ I" v) [妖城在线论坛并且你也可以及时得使用lua的垃圾回收释放无效的内存。—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート5 {3 |/ e+ ^1 ?& N% ?1 w
但问题是,你垃圾回收后,你读取lua的占用内存,发现确实下降了魔力私服,最新魔力宝贝私服技术交流, H8 N/ L1 Y, c4 v' d5 ~2 f. q; ?% s
但是在linux下用系统命令top查看。。。。。bbs.mocwww.com6 s  ?- \' L; p/ \: {2 A
魔力服务端所占用的内存毫无下降。+ G! G. h9 w8 L  {$ y
那么你再次登陆角色,又创建了一批内存
9 {$ e3 Z3 r" L1 Z+ `魔力私服,最新魔力宝贝私服技术交流我至今依然没有通读lua引擎的代码,所以依然不能确定lua的内存管理方式。妖城在线论坛4 A4 \4 a9 D: z" T/ m
但是根据这段时间的测试
3 N; B" ]. u% C, J5 l7 D可以总结经验(并不一定对):lua会霸占整个系统的内存,并以你目前最大用到的多少为限,你用lua的垃圾回收功能,是回收了—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート& L" F- B& D; m9 x! r
但是这部分内存并不归还给linux系统
2 \9 [# u! a9 Y  t+ \$ Clua会认为,你既然现在能用到这个尺度的内存,那我留着,你等下迟早也要用到。。。。。魔力私服,最新魔力宝贝私服技术交流0 P0 D* w2 `1 x
这就导致了,不停的table的nil释放并不能真正释放整个魔力服务端运行时占用的内存—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート% h( T6 m! `2 V0 G# ?
这个跟正常的编程意识就有点不符合了。。。。。。魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表$ O4 U( q  T" T* @) l
但反正它大概是这么操作的。妖城在线论坛, M  m- B3 _$ e5 k$ [# z
解决方案是什么呢?
( ~9 D' {! N: y% ebbs.mocwww.com不要用cdkey啥的做table的key(如果非要不可,我感觉宁愿弄成field存到数据库中)—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート" k  e/ |+ B/ x6 n( V* t
启动的时候,根据当前设定的最大在线人数,预先扩充一个table
7 U4 C9 c3 q# V魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表这个table的索引key使用CharIndex这个序号魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表% l/ K+ R% H( X8 E
玩家下线的时候,不要nil掉,只要再次初始化数据就好了。
6 j0 f2 M2 S2 f6 lbbs.mocwww.com这样就不会反复创建了bbs.mocwww.com/ S; x* K+ e& R* B8 Y

5 J6 r0 U3 F& _7 h/ d1 s( t5 C三:引擎,c语言方面
9 U; `, o0 A- u, a5 C5 @—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート也是同样的观点。
/ U+ Y  F: ?- }; M: c9 u! k" d—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート尽量预设开辟一段既定的内存空间,不要试图去在登陆和登出的时候频繁的创建和释放魔力私服,最新魔力宝贝私服技术交流6 @8 w& s) D& w4 k9 y# I
魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表) I! v+ F" s5 X
最初妖城启动占用内存大概2.3g,运行大概十天半个月后,就会出现内存溢出,轻则挂端重则回档。
9 L% ~* d  K- m; q9 k6 G' P—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート后来优化后(其实没有优化到极致)启动占用内存800m左右,干净的系统top下观察占用内存1g而已—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート" e3 |& ^0 e) v$ P5 y& Q* E
连续运行几个月都不会有问题。魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表/ B/ b/ f( @6 C- v
魔力私服,最新魔力宝贝私服技术交流0 V; m, \9 Z9 }- d$ c7 l# k
以上说的三个方面魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表/ E0 \' J1 u' s7 M
两个都是一般的开服的gm自己可以控制优化的,第三个是必须引擎技术商方面优化的。魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表) i1 N( k  g, x& L/ a# T* l! ]
! _, `9 w# C5 w
大家可以试一下
妖城欢迎您!

TOP

补充几点
9 T/ D* A! R8 s* j6 u7 l—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート1. 关于可用内存,实际上linux上面只有3g,windows下面只有2g魔力私服,最新魔力宝贝私服技术交流& m+ t5 ], W7 I" d9 F! J7 `
2. luajit 可用内存是2g,除非 64位+GC64模式妖城在线论坛; F. c7 }. a3 G
2.1. 内存回收,lua 申请的内存看luajit的实现了,默认跟c一样的处理逻辑,但如果是myalloc的话,大概率会有内存泄漏,不过就算是c的内存申请后也不是马上归回系统的。
% e7 s! k0 f' k/ f3 D魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表3. gmsv里面动态申请的数据主要是迷宫,不过引擎的myalloc,大概率会有内存泄漏妖城在线论坛, w! u3 ?/ F1 E% q# Q5 A
妖城在线论坛& F5 _) h: p! \' R. s/ E5 l
[ 本帖最后由 Muscipular 于 2023-5-15 12:40 编辑 ]

TOP

luajit我的是5.2.3版本的,所以我这边垃圾回收操作是不释放内存归还系统的
妖城欢迎您!

TOP

发新话题