发新话题
打印

[魔力私服分享] 关于服务端内存优化的一些经验

关于服务端内存优化的一些经验

大家也知道,妖城魔力一个区开服了十周年多了
" V8 S( \% E0 V6 n9 `3 N, o0 h5 s( Z魔力私服,最新魔力宝贝私服技术交流魔力私服,最新魔力宝贝私服技术交流" N% b4 S* ~+ \$ j; R* ^6 J* m
不管是数据库还是data的冗余肯定都非常多。
& z# y$ m/ U! \+ o魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表妖城在线论坛5 o! m5 b* y7 s7 ~: v4 _
对于妖城这样的数据量大的服务器,首先数据库肯定不能放在跟服务端运行的同一个服务器里。
* |% H% }. P( m, q0 l, _妖城在线论坛妖城在线论坛1 M; Q3 c0 ?7 l  ~# s& E  ~8 ]" ~
这是基本的,所以,最好是运行服务端的服务器一台,数据库单独一台。
. \: W( C# g: U0 ?魔力私服,最新魔力宝贝私服技术交流魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表  I6 Y2 Y/ `2 u; u$ g, Q; X" n
因为数据库大了之后,mysql的资源占用也是很可观的。能省则省。
( Y) F' l9 G, b) C—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート
! B7 ]2 Z6 k! H2 C$ a魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表然后关于在有限资源的前提下(魔力原生的服务端是只能运行32位系统的,也就是最大4g内存,后续可能有别的引擎升级兼容了64位那另说)/ }& Q1 p  h4 o( M

; R$ y& j2 R% B- C7 n2 Z' P魔力私服,最新魔力宝贝私服技术交流优化有两个方面魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表  W. ]  _5 g: c+ O# |5 F$ S: `
一:data方面4 d  k! u7 X; N( w5 w
data下几乎所有的txt设定,比如npc/msg/itemset/enemy等等
; {( a) U7 C# _; G& J& k1 n魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表记住编号不要随意乱设置,尽量往小的,没用到的设定
) B1 L* {# o0 b2 p- \妖城在线论坛比如你不要把一个msg的编号设定成390000000,三亿多了
& B2 @# f! w0 l) a8 k因为在程序的逻辑里,我不可能为了寻找到某个编号,就每次去整个msg里面从上到下循环搜索吧?
) @3 \, N' Z4 b( t& s妖城在线论坛所以程序逻辑,会在服务端启动的时候,就根据你msg的最大编号为上限,设定一个跳转表。妖城在线论坛  s% t. M4 ~$ l1 L2 {3 G% E
对程序员来说,讲到这里应该就懂了9 d" e8 B& h" ]9 y
但是对于非程序员来说,我多说两句,跳转表是为了快速定位数据不需要从上到下循环搜索的。魔力私服,最新魔力宝贝私服技术交流1 I3 {4 ]  o$ O. S0 {
你可以理解跳转表是连续的一堆信息。
2 X' e- s: j! E9 X/ D) Q' @bbs.mocwww.com你的msg编号最大的如果是100000,那么程序启动的时候就会设定10万个连续的数据空间用来存放对应每个msg编号指向msg.txt的哪一行。
( X4 q7 ^/ s8 |5 e) ~. v7 M/ a—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート这样,当游戏里,需要调用到某个msg的时候(比如道具说明啊,npc对话啊,boss发言啊之类的)
/ @! z  b3 d/ m7 `+ j% C—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート它直接通过编号获取跳转表指向的msg行,获取到msg的内容。
* z+ \( X. ^; l7 O# y7 ?—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート这就导致了一个问题,你要是把msg的最大编号设置成3亿多。。。。可想而知浪费了多少内存?
  M# ^; u' w/ `# N6 U  f魔力私服,最新魔力宝贝私服技术交流魔力私服,最新魔力宝贝私服技术交流% u* B0 z2 g. _; B7 r7 e
data下的其它文档也是一样的道理。用编号,不要太任性。bbs.mocwww.com- n/ x# l3 @5 s* s4 B
—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート3 g$ b, T% A7 p. @7 V( t
二:lua方面魔力私服,最新魔力宝贝私服技术交流5 o( M$ G# R9 W0 _
lua方面最大的内存占用,应该就是table类型的反复释放和创建了。
' d* ]8 w' h. W2 ]7 K因为没有深入阅读lua的代码
/ H+ U# B! T9 D" [; X) p( a% D0 y& c魔力私服,最新魔力宝贝私服技术交流所以对于lua的内存管理一直是很懵的。) X& c& V7 i' K( _0 ~' T' e
如果没有对内存占用比较敏感的话妖城在线论坛8 g0 n, B9 F9 A3 @) j9 s
正常运行的服务器,一般都会给每个玩家登陆的时候,或者玩家某个行为的时候,创建一个临时的tabble妖城在线论坛. T7 `! J) d# ^/ [
这个table的生命周期仅限于这玩家本次登录的时候。魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表# O7 M( P% _: \
然后玩家下线了,就释放掉,比如tablexx=nil
+ o% E9 o5 X% p$ F' q—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート但是这样做有一个问题。。。—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート- J' L1 s* X+ R: t3 W6 i9 J
你可以尝试一个玩家登陆的时候,你创建一个百万级别的table项目。
+ D# I- r! P" d2 f妖城在线论坛玩家下线的时候,你nil掉这个table魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表  v" i- c! H& }3 I
并且你也可以及时得使用lua的垃圾回收释放无效的内存。
0 D4 u" n8 |) y, u* T5 {0 L  X魔力私服,最新魔力宝贝私服技术交流但问题是,你垃圾回收后,你读取lua的占用内存,发现确实下降了
$ g9 f, b0 b& e- V魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表但是在linux下用系统命令top查看。。。。。
& ]5 g' O7 ^4 n. U. e# q8 d2 v+ q魔力服务端所占用的内存毫无下降。
) t  k% V4 v" B, G魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表那么你再次登陆角色,又创建了一批内存—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート+ P2 n4 X5 L9 L, N8 l4 t6 o6 m
我至今依然没有通读lua引擎的代码,所以依然不能确定lua的内存管理方式。—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート9 k7 l+ w2 U& a5 b& i4 Q8 Z/ {8 O
但是根据这段时间的测试妖城在线论坛5 N/ e, O& s: D( U# m2 u3 N
可以总结经验(并不一定对):lua会霸占整个系统的内存,并以你目前最大用到的多少为限,你用lua的垃圾回收功能,是回收了魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表5 D& t4 ~% I$ ~: \: w
但是这部分内存并不归还给linux系统
4 D$ o( U$ Y; ^3 `, f魔力私服,最新魔力宝贝私服技术交流lua会认为,你既然现在能用到这个尺度的内存,那我留着,你等下迟早也要用到。。。。。
/ B  M8 j$ f2 Q  |3 j' A3 h魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表这就导致了,不停的table的nil释放并不能真正释放整个魔力服务端运行时占用的内存—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート: z8 t# N4 D) e$ u& U# M; B
这个跟正常的编程意识就有点不符合了。。。。。。
9 V" c8 {# z, n5 Z& ]—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート但反正它大概是这么操作的。妖城在线论坛9 B9 |! f; M3 `
解决方案是什么呢?—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート( E1 f5 H1 X; {2 O) X
不要用cdkey啥的做table的key(如果非要不可,我感觉宁愿弄成field存到数据库中)bbs.mocwww.com9 i8 r. {3 N, e( }, i' J
启动的时候,根据当前设定的最大在线人数,预先扩充一个table—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート, }! p( @9 R, s
这个table的索引key使用CharIndex这个序号
$ r1 h# T3 X' m  e  s6 d—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート玩家下线的时候,不要nil掉,只要再次初始化数据就好了。
& ^' z; A( {" ]" @6 o! e' i魔力私服,最新魔力宝贝私服技术交流这样就不会反复创建了—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート+ G1 R2 t" M/ E! Y0 U  B5 X0 i4 I1 M' n
妖城在线论坛1 i: |2 S- ~/ G0 c
三:引擎,c语言方面魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表  }+ w( H9 L1 n1 ?
也是同样的观点。
" L  ~; C9 z# ~8 D魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表尽量预设开辟一段既定的内存空间,不要试图去在登陆和登出的时候频繁的创建和释放
' |; w' Q9 z' f) W/ G! q魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表% \2 E0 v5 T$ b
最初妖城启动占用内存大概2.3g,运行大概十天半个月后,就会出现内存溢出,轻则挂端重则回档。
* S9 n  P7 h7 n) ^$ ]bbs.mocwww.com后来优化后(其实没有优化到极致)启动占用内存800m左右,干净的系统top下观察占用内存1g而已( P: `$ ?8 i, C, E  J
连续运行几个月都不会有问题。妖城在线论坛! p6 a+ j( F+ V9 d6 Y/ N

& k6 d% e$ K! D  L# I% c% \魔力私服,最新魔力宝贝私服技术交流以上说的三个方面
9 E" r0 K5 c8 Z& \3 v4 W9 X$ Q魔力私服,最新魔力宝贝私服技术交流两个都是一般的开服的gm自己可以控制优化的,第三个是必须引擎技术商方面优化的。) _  E  q7 K) W: {# m
bbs.mocwww.com. ^9 f! R2 @. [$ `. s6 v) S! S2 S
大家可以试一下
妖城欢迎您!

TOP

补充几点魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表5 z- ]( n" ]1 O
1. 关于可用内存,实际上linux上面只有3g,windows下面只有2g
. F! D% U/ E+ a2 B& Zbbs.mocwww.com2. luajit 可用内存是2g,除非 64位+GC64模式. [1 K8 n; K9 T- c& W
2.1. 内存回收,lua 申请的内存看luajit的实现了,默认跟c一样的处理逻辑,但如果是myalloc的话,大概率会有内存泄漏,不过就算是c的内存申请后也不是马上归回系统的。$ f# O, ~+ a' f! s) k0 u
3. gmsv里面动态申请的数据主要是迷宫,不过引擎的myalloc,大概率会有内存泄漏
' ^8 _4 s5 f) M7 k' Z3 q; R+ ~$ Xbbs.mocwww.com
& X3 ]1 C+ y- I4 X; H; P妖城在线论坛[ 本帖最后由 Muscipular 于 2023-5-15 12:40 编辑 ]

TOP

luajit我的是5.2.3版本的,所以我这边垃圾回收操作是不释放内存归还系统的
妖城欢迎您!

TOP

发新话题