发新话题
打印

[魔力私服分享] 关于服务端内存优化的一些经验

关于服务端内存优化的一些经验

大家也知道,妖城魔力一个区开服了十周年多了
$ B  N) e* z' F! z! m8 Ebbs.mocwww.com3 v5 R' W% b4 e2 k
不管是数据库还是data的冗余肯定都非常多。
, V0 o' I' C/ x" D4 @4 z( g9 P魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表
4 q" v" r, n' H1 b—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート对于妖城这样的数据量大的服务器,首先数据库肯定不能放在跟服务端运行的同一个服务器里。
, b: c6 m- k6 R. W( m魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表
3 z, V8 x! g; _' ~魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表这是基本的,所以,最好是运行服务端的服务器一台,数据库单独一台。
. K* @; n* P9 Gbbs.mocwww.com
3 ~. _2 z! H) X/ L—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート因为数据库大了之后,mysql的资源占用也是很可观的。能省则省。—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート* Q; m2 T  Z, Q; K0 l0 }

$ N) ]$ H# R- U7 S# o* T* W然后关于在有限资源的前提下(魔力原生的服务端是只能运行32位系统的,也就是最大4g内存,后续可能有别的引擎升级兼容了64位那另说)
' B, v' m2 M4 `9 @$ A—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート
. ~9 Z' |7 }, N" o妖城在线论坛优化有两个方面
" x  O( H# g3 Z* A魔力私服,最新魔力宝贝私服技术交流一:data方面
: K) G: e( q$ @, c: V魔力私服,最新魔力宝贝私服技术交流data下几乎所有的txt设定,比如npc/msg/itemset/enemy等等bbs.mocwww.com4 `4 c6 H, D2 D+ X
记住编号不要随意乱设置,尽量往小的,没用到的设定
- A1 D, j) D- P1 m; j7 R魔力私服,最新魔力宝贝私服技术交流比如你不要把一个msg的编号设定成390000000,三亿多了3 _* g; l' `2 X5 g) E1 A
因为在程序的逻辑里,我不可能为了寻找到某个编号,就每次去整个msg里面从上到下循环搜索吧?
, O8 B! P- {9 e$ [/ {魔力私服,最新魔力宝贝私服技术交流所以程序逻辑,会在服务端启动的时候,就根据你msg的最大编号为上限,设定一个跳转表。妖城在线论坛& {) v4 F! Z6 q& D
对程序员来说,讲到这里应该就懂了
+ n: x$ ^4 Q4 a, ?9 \# Q0 G6 h魔力私服,最新魔力宝贝私服技术交流但是对于非程序员来说,我多说两句,跳转表是为了快速定位数据不需要从上到下循环搜索的。bbs.mocwww.com( ]3 _; n2 Q& Z# @5 w4 @" D4 O7 g
你可以理解跳转表是连续的一堆信息。
7 s6 a9 S) z7 s) D( M8 Q魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表你的msg编号最大的如果是100000,那么程序启动的时候就会设定10万个连续的数据空间用来存放对应每个msg编号指向msg.txt的哪一行。—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート7 d* J$ l$ N4 i- m& z  e% N& v! y8 P' T/ w
这样,当游戏里,需要调用到某个msg的时候(比如道具说明啊,npc对话啊,boss发言啊之类的)
; o+ L; w) u# |2 S—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート它直接通过编号获取跳转表指向的msg行,获取到msg的内容。
; l+ k5 a. j+ x" R/ L1 }bbs.mocwww.com这就导致了一个问题,你要是把msg的最大编号设置成3亿多。。。。可想而知浪费了多少内存?魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表# _; P1 W3 r- N" M4 {

* h1 I# N: q% I$ L3 pbbs.mocwww.comdata下的其它文档也是一样的道理。用编号,不要太任性。
. T' f% v5 l6 i3 Y- G6 k, O魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表
# n5 X! n2 c' ]4 \; I魔力私服,最新魔力宝贝私服技术交流二:lua方面
9 h) Y& P! O, L% q妖城在线论坛lua方面最大的内存占用,应该就是table类型的反复释放和创建了。" A0 d6 V2 k! c/ y0 p
因为没有深入阅读lua的代码魔力私服,最新魔力宝贝私服技术交流  o! P& `! _5 G( z4 b* K! D
所以对于lua的内存管理一直是很懵的。妖城在线论坛" F8 m4 y9 M3 z# P8 t: ^! c
如果没有对内存占用比较敏感的话
9 M2 _5 L' _: e妖城在线论坛正常运行的服务器,一般都会给每个玩家登陆的时候,或者玩家某个行为的时候,创建一个临时的tabble
2 g" a6 e1 d, t/ w魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表这个table的生命周期仅限于这玩家本次登录的时候。魔力私服,最新魔力宝贝私服技术交流" ^& @1 Q* H" Q5 L0 P* O
然后玩家下线了,就释放掉,比如tablexx=nil—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート3 Y' T) c; y) m$ r7 K( V: B# u
但是这样做有一个问题。。。bbs.mocwww.com4 E; r# C# c" f4 D: b1 k+ ]% F
你可以尝试一个玩家登陆的时候,你创建一个百万级别的table项目。魔力私服,最新魔力宝贝私服技术交流/ v8 F' _% a- |0 `
玩家下线的时候,你nil掉这个table
9 ]" k7 n( a4 ?/ ?+ t/ C—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート并且你也可以及时得使用lua的垃圾回收释放无效的内存。
0 B0 u  _9 G! Q/ K+ J—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート但问题是,你垃圾回收后,你读取lua的占用内存,发现确实下降了
' `( n. U. D$ n但是在linux下用系统命令top查看。。。。。' R7 j8 Z( g% W1 F4 {  D9 H
魔力服务端所占用的内存毫无下降。
0 c  L6 ^* o8 T魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表那么你再次登陆角色,又创建了一批内存魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表, \* I; U; r& }
我至今依然没有通读lua引擎的代码,所以依然不能确定lua的内存管理方式。魔力私服,最新魔力宝贝私服技术交流: u/ G0 Q& Q5 g7 ^9 r
但是根据这段时间的测试
# W+ G* n- D- I. G妖城在线论坛可以总结经验(并不一定对):lua会霸占整个系统的内存,并以你目前最大用到的多少为限,你用lua的垃圾回收功能,是回收了
) o6 k% l& `0 F魔力私服,最新魔力宝贝私服技术交流但是这部分内存并不归还给linux系统bbs.mocwww.com, D6 U! v! ?% C
lua会认为,你既然现在能用到这个尺度的内存,那我留着,你等下迟早也要用到。。。。。魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表9 ^( K$ c- U0 P% b, ^. P' h
这就导致了,不停的table的nil释放并不能真正释放整个魔力服务端运行时占用的内存bbs.mocwww.com. G) |" \- e( Q5 F2 T9 t
这个跟正常的编程意识就有点不符合了。。。。。。
+ `, L$ M1 @' Q) cbbs.mocwww.com但反正它大概是这么操作的。
4 J8 \/ Y' M$ ^妖城在线论坛解决方案是什么呢?
1 X" u3 `7 k1 X9 j+ j9 |魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表不要用cdkey啥的做table的key(如果非要不可,我感觉宁愿弄成field存到数据库中)魔力私服,最新魔力宝贝私服技术交流7 ^2 k% O$ l# q* X. Y7 `4 v
启动的时候,根据当前设定的最大在线人数,预先扩充一个table妖城在线论坛& r1 ~& I- X3 Y
这个table的索引key使用CharIndex这个序号
1 ~! ]5 Q) V  t; cbbs.mocwww.com玩家下线的时候,不要nil掉,只要再次初始化数据就好了。
& w+ ?' }6 Y7 Z% ^% G' }bbs.mocwww.com这样就不会反复创建了
: [$ P( p1 k* ?魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表
) u1 ]% w" q# Q' i: v2 m三:引擎,c语言方面—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート9 B( ^; r. A1 Z" B5 ]
也是同样的观点。魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表+ Q( P. ^% v% \- c
尽量预设开辟一段既定的内存空间,不要试图去在登陆和登出的时候频繁的创建和释放/ W; a0 v  Q4 y
—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート8 b9 V1 D+ g3 d8 y/ J
最初妖城启动占用内存大概2.3g,运行大概十天半个月后,就会出现内存溢出,轻则挂端重则回档。
/ O5 k/ k4 G4 i& U( x0 @—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート后来优化后(其实没有优化到极致)启动占用内存800m左右,干净的系统top下观察占用内存1g而已妖城在线论坛( Y' p$ ^0 I+ Z% q5 _7 `' H
连续运行几个月都不会有问题。
7 Z! }- [: h4 k! Y# R. {& l魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表
0 N# _5 C$ M! r+ }—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート以上说的三个方面
% z7 B5 @  e; ?0 C1 c& y—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート两个都是一般的开服的gm自己可以控制优化的,第三个是必须引擎技术商方面优化的。bbs.mocwww.com$ N+ f. m5 V2 y  p
—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート$ ^8 O) n% k' l" l/ t% @8 c; H) ]
大家可以试一下
妖城欢迎您!

TOP

补充几点7 [4 n% H7 K9 b$ U- N  T
1. 关于可用内存,实际上linux上面只有3g,windows下面只有2g—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート, K0 ?: d; v+ t
2. luajit 可用内存是2g,除非 64位+GC64模式
3 ?; l( X: j4 Q: S3 Fbbs.mocwww.com2.1. 内存回收,lua 申请的内存看luajit的实现了,默认跟c一样的处理逻辑,但如果是myalloc的话,大概率会有内存泄漏,不过就算是c的内存申请后也不是马上归回系统的。bbs.mocwww.com7 H8 L6 u3 U7 [9 l
3. gmsv里面动态申请的数据主要是迷宫,不过引擎的myalloc,大概率会有内存泄漏魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表; m: C) A- t$ p/ |/ I
魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表: J' i# Q4 T1 Q. X9 v, x* J
[ 本帖最后由 Muscipular 于 2023-5-15 12:40 编辑 ]

TOP

luajit我的是5.2.3版本的,所以我这边垃圾回收操作是不释放内存归还系统的
妖城欢迎您!

TOP

发新话题