发新话题
打印

[魔力私服分享] 关于服务端内存优化的一些经验

关于服务端内存优化的一些经验

大家也知道,妖城魔力一个区开服了十周年多了
" V& N* s* X7 j! F2 w5 N
2 N# x- K5 L( m8 P  T8 d0 R不管是数据库还是data的冗余肯定都非常多。bbs.mocwww.com% l& T% |; A8 y
妖城在线论坛7 E$ H, Q  ~& Q/ p
对于妖城这样的数据量大的服务器,首先数据库肯定不能放在跟服务端运行的同一个服务器里。魔力私服,最新魔力宝贝私服技术交流. L% y- v$ X7 X; A( S5 E6 H
bbs.mocwww.com; c, }3 [6 W7 m' L% g
这是基本的,所以,最好是运行服务端的服务器一台,数据库单独一台。—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート5 N* N1 e4 Z! z7 Y* h- E4 E: p

& @7 ]3 k8 i: B) O7 Nbbs.mocwww.com因为数据库大了之后,mysql的资源占用也是很可观的。能省则省。魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表4 V0 R+ [6 q. E9 T% }+ I& D
bbs.mocwww.com! r/ X5 K. d! z0 U
然后关于在有限资源的前提下(魔力原生的服务端是只能运行32位系统的,也就是最大4g内存,后续可能有别的引擎升级兼容了64位那另说)魔力私服,最新魔力宝贝私服技术交流' P, Z$ N6 Q! Q/ ]- d, Z+ W" t

  M6 r1 t% W0 E. v8 B妖城在线论坛优化有两个方面
4 M( p6 {: {+ b8 `" E4 y& o妖城在线论坛一:data方面
& o2 l5 b) l4 e2 J2 edata下几乎所有的txt设定,比如npc/msg/itemset/enemy等等bbs.mocwww.com+ b6 r: \8 N: L6 Y/ D
记住编号不要随意乱设置,尽量往小的,没用到的设定
  c. T+ d3 t$ T# p& j# ?—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート比如你不要把一个msg的编号设定成390000000,三亿多了魔力私服,最新魔力宝贝私服技术交流( p: t: p) s$ h. e+ O
因为在程序的逻辑里,我不可能为了寻找到某个编号,就每次去整个msg里面从上到下循环搜索吧?魔力私服,最新魔力宝贝私服技术交流+ T9 }" [2 e* K1 F
所以程序逻辑,会在服务端启动的时候,就根据你msg的最大编号为上限,设定一个跳转表。魔力私服,最新魔力宝贝私服技术交流0 O: `/ J+ D3 s& B" a
对程序员来说,讲到这里应该就懂了
6 W( y; N$ D1 n9 K魔力私服,最新魔力宝贝私服技术交流但是对于非程序员来说,我多说两句,跳转表是为了快速定位数据不需要从上到下循环搜索的。魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表/ M% Q; O3 k+ K) p9 Q9 |3 O
你可以理解跳转表是连续的一堆信息。
" W! }6 N! I/ N1 \3 W魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表你的msg编号最大的如果是100000,那么程序启动的时候就会设定10万个连续的数据空间用来存放对应每个msg编号指向msg.txt的哪一行。
7 E' y7 _# Z# z9 Q魔力私服,最新魔力宝贝私服技术交流这样,当游戏里,需要调用到某个msg的时候(比如道具说明啊,npc对话啊,boss发言啊之类的)
" g! U7 t! c! ?* u( c8 K7 K: [妖城在线论坛它直接通过编号获取跳转表指向的msg行,获取到msg的内容。—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート+ C# N8 x& v, W9 P- L1 s4 S
这就导致了一个问题,你要是把msg的最大编号设置成3亿多。。。。可想而知浪费了多少内存?
3 [; Z9 l0 I# H+ k8 g1 S) b
, p4 A' E, L$ I4 b1 wbbs.mocwww.comdata下的其它文档也是一样的道理。用编号,不要太任性。
$ X6 y$ c3 T, Y8 R—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート
+ A0 Q9 u: }. S- n% ?2 O/ b$ W* p魔力私服,最新魔力宝贝私服技术交流二:lua方面魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表1 y! O6 Y: {/ G: h
lua方面最大的内存占用,应该就是table类型的反复释放和创建了。
6 m+ K0 S: S! F/ [; l—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート因为没有深入阅读lua的代码
: B2 b1 D9 J8 l0 j所以对于lua的内存管理一直是很懵的。
# i1 M2 h! \3 l: j* `. n妖城在线论坛如果没有对内存占用比较敏感的话
) X+ g6 L) r) W* M妖城在线论坛正常运行的服务器,一般都会给每个玩家登陆的时候,或者玩家某个行为的时候,创建一个临时的tabble
$ _$ }  {& q$ E1 b: H. o- M" \  o—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート这个table的生命周期仅限于这玩家本次登录的时候。
0 f* b& h3 Z5 O% S9 x5 X: b! ~2 i) T—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート然后玩家下线了,就释放掉,比如tablexx=nil妖城在线论坛! P8 |* x7 g7 D5 H1 e8 i. y
但是这样做有一个问题。。。魔力私服,最新魔力宝贝私服技术交流& o6 C3 o+ h( d/ K8 v
你可以尝试一个玩家登陆的时候,你创建一个百万级别的table项目。魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表: S8 A0 Q/ }: S% b
玩家下线的时候,你nil掉这个table
8 i- R& I- }- ~9 j, ]0 W- X0 y魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表并且你也可以及时得使用lua的垃圾回收释放无效的内存。
" K6 P- ~7 _$ Z' @+ R- w( Q% B—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート但问题是,你垃圾回收后,你读取lua的占用内存,发现确实下降了
) ]; t2 ^5 E: t, x$ L6 {) [妖城在线论坛但是在linux下用系统命令top查看。。。。。—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート( U7 q3 w4 q- ^
魔力服务端所占用的内存毫无下降。! d9 l! B+ ]+ R8 S* `2 Y# F
那么你再次登陆角色,又创建了一批内存
0 N& G& Y0 v8 dbbs.mocwww.com我至今依然没有通读lua引擎的代码,所以依然不能确定lua的内存管理方式。
& I# u; E1 ~1 k. e' s! r" ?0 Y妖城在线论坛但是根据这段时间的测试妖城在线论坛' Q  m- X! P+ h2 @3 Y
可以总结经验(并不一定对):lua会霸占整个系统的内存,并以你目前最大用到的多少为限,你用lua的垃圾回收功能,是回收了—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート' l! i2 `5 _- p" b
但是这部分内存并不归还给linux系统
3 o8 B! L4 B/ {+ @5 Fbbs.mocwww.comlua会认为,你既然现在能用到这个尺度的内存,那我留着,你等下迟早也要用到。。。。。妖城在线论坛, g$ N+ n3 l; x( \' |
这就导致了,不停的table的nil释放并不能真正释放整个魔力服务端运行时占用的内存魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表2 E, W6 @3 W, W( p- x
这个跟正常的编程意识就有点不符合了。。。。。。
, Q) V! {; {8 E" P+ J/ T& g魔力私服,最新魔力宝贝私服技术交流但反正它大概是这么操作的。
- s5 Q7 P' l3 G! fbbs.mocwww.com解决方案是什么呢?妖城在线论坛, z* i! |$ x* P- B, {$ {
不要用cdkey啥的做table的key(如果非要不可,我感觉宁愿弄成field存到数据库中)
- z! }% V/ Q% F! a- V7 j& \启动的时候,根据当前设定的最大在线人数,预先扩充一个table
$ {4 B% u6 r- k3 T妖城在线论坛这个table的索引key使用CharIndex这个序号
( M8 f) |9 w9 U  P2 i) B$ V0 Cbbs.mocwww.com玩家下线的时候,不要nil掉,只要再次初始化数据就好了。魔力私服,最新魔力宝贝私服技术交流+ q7 P5 _; y  {- P0 Z( b
这样就不会反复创建了
& @2 d* d. u; u6 Q5 i! F& l' S0 t* [魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表魔力私服,最新魔力宝贝私服技术交流9 [# X6 \) u# b1 I
三:引擎,c语言方面
* y8 ]: g3 M# x( c& N妖城在线论坛也是同样的观点。—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート( _, J% O! f( i2 }) ?
尽量预设开辟一段既定的内存空间,不要试图去在登陆和登出的时候频繁的创建和释放
% _6 C, i/ f* Q" ?" {" X8 j魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表魔力私服,最新魔力宝贝私服技术交流/ X/ h- E) v) L' m0 |( Q" T5 Q0 z$ C
最初妖城启动占用内存大概2.3g,运行大概十天半个月后,就会出现内存溢出,轻则挂端重则回档。bbs.mocwww.com$ Z  E. g! k& a7 a0 g  b
后来优化后(其实没有优化到极致)启动占用内存800m左右,干净的系统top下观察占用内存1g而已—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート# m0 p3 _+ ^7 t" `% ~
连续运行几个月都不会有问题。
6 {" G0 a$ r' P9 N0 Z0 K—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート4 W$ ]9 A* [, L3 c: Z4 V
以上说的三个方面魔力私服,最新魔力宝贝私服技术交流0 X/ f" n5 o( ~7 I. q
两个都是一般的开服的gm自己可以控制优化的,第三个是必须引擎技术商方面优化的。魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表; m  M3 C2 K) x' ]: ~3 u  w2 T9 J# O) D
—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート% ~( W: }  C9 w
大家可以试一下
妖城欢迎您!

TOP

补充几点妖城在线论坛$ a% P' h* |( p6 s+ M4 a7 [
1. 关于可用内存,实际上linux上面只有3g,windows下面只有2g
4 q* E1 x* ]6 r—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート2. luajit 可用内存是2g,除非 64位+GC64模式
' h( y/ W$ ^0 P5 G' s, P9 l! z魔力私服,最新魔力宝贝私服技术交流2.1. 内存回收,lua 申请的内存看luajit的实现了,默认跟c一样的处理逻辑,但如果是myalloc的话,大概率会有内存泄漏,不过就算是c的内存申请后也不是马上归回系统的。bbs.mocwww.com; i9 g8 e$ x' C- b
3. gmsv里面动态申请的数据主要是迷宫,不过引擎的myalloc,大概率会有内存泄漏bbs.mocwww.com  s5 T( |( ?0 F1 ]8 u' r* t

, y4 W0 |9 ]) L# s% _[ 本帖最后由 Muscipular 于 2023-5-15 12:40 编辑 ]

TOP

luajit我的是5.2.3版本的,所以我这边垃圾回收操作是不释放内存归还系统的
妖城欢迎您!

TOP

发新话题