发新话题
打印

[魔力私服分享] 关于服务端内存优化的一些经验

关于服务端内存优化的一些经验

大家也知道,妖城魔力一个区开服了十周年多了
, K2 W9 \8 ~: G1 T. V9 b! B魔力私服,最新魔力宝贝私服技术交流bbs.mocwww.com/ G. U; ~( ?+ H6 ]8 N' W; `" `
不管是数据库还是data的冗余肯定都非常多。
! X# i& E+ Z: k; ?魔力私服,最新魔力宝贝私服技术交流bbs.mocwww.com* k8 p( n) @1 D/ g
对于妖城这样的数据量大的服务器,首先数据库肯定不能放在跟服务端运行的同一个服务器里。  x- v9 _  E* E& ]! p2 j

, X: E' m+ ?* t# Q- H7 f* ]; I—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート这是基本的,所以,最好是运行服务端的服务器一台,数据库单独一台。
3 q  J6 b1 P4 ^" O4 y
; _. J& J( |: i4 u6 Z" b, T妖城在线论坛因为数据库大了之后,mysql的资源占用也是很可观的。能省则省。
" |0 z2 A7 o4 z; v魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表
. c: O" B7 a) ~  r6 Zbbs.mocwww.com然后关于在有限资源的前提下(魔力原生的服务端是只能运行32位系统的,也就是最大4g内存,后续可能有别的引擎升级兼容了64位那另说)
) j' y, |; d9 j- M8 W; `妖城在线论坛
4 t. q9 D: u  E" N! a—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート优化有两个方面—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート* ]0 }# u8 I2 J* k: |4 Q- D# L8 |
一:data方面魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表/ H' e* m, [2 }1 t8 Y: p2 q. H
data下几乎所有的txt设定,比如npc/msg/itemset/enemy等等
5 U4 ~5 O9 ?/ b( a7 ?魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表记住编号不要随意乱设置,尽量往小的,没用到的设定
# r5 x1 y0 _0 `+ }1 ?妖城在线论坛比如你不要把一个msg的编号设定成390000000,三亿多了妖城在线论坛. k; u) j: a( B2 J2 q- f
因为在程序的逻辑里,我不可能为了寻找到某个编号,就每次去整个msg里面从上到下循环搜索吧?bbs.mocwww.com3 a+ B% U2 q- S: ?
所以程序逻辑,会在服务端启动的时候,就根据你msg的最大编号为上限,设定一个跳转表。( q$ I$ O( N# c; C3 G# E
对程序员来说,讲到这里应该就懂了魔力私服,最新魔力宝贝私服技术交流; n- p% Q+ P' f8 b1 ]
但是对于非程序员来说,我多说两句,跳转表是为了快速定位数据不需要从上到下循环搜索的。
- W) M2 l$ P0 k( N, g& K! Xbbs.mocwww.com你可以理解跳转表是连续的一堆信息。
. _# y- ?7 F6 f5 P魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表你的msg编号最大的如果是100000,那么程序启动的时候就会设定10万个连续的数据空间用来存放对应每个msg编号指向msg.txt的哪一行。
3 r5 O5 p3 D0 O# Z0 z+ _0 ~" kbbs.mocwww.com这样,当游戏里,需要调用到某个msg的时候(比如道具说明啊,npc对话啊,boss发言啊之类的)魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表3 M4 a7 V3 q4 }4 A
它直接通过编号获取跳转表指向的msg行,获取到msg的内容。
- y& E. Z* V* B) Y妖城在线论坛这就导致了一个问题,你要是把msg的最大编号设置成3亿多。。。。可想而知浪费了多少内存?bbs.mocwww.com5 p- u) H, b0 f7 G7 z$ T' Y
7 c/ D0 \8 r% a6 _8 U; {' T
data下的其它文档也是一样的道理。用编号,不要太任性。—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート9 @% ^1 M9 i, ?5 f/ s2 _/ j5 E; x
魔力私服,最新魔力宝贝私服技术交流& Q& X2 ^" z" E0 x; y
二:lua方面—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート2 z; n# j' x& `1 Z2 o
lua方面最大的内存占用,应该就是table类型的反复释放和创建了。bbs.mocwww.com4 y6 d! o! A( {# @' h9 @0 Y
因为没有深入阅读lua的代码—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート9 a( x* {  p6 P" D$ O
所以对于lua的内存管理一直是很懵的。
, e' n2 q; P) k魔力私服,最新魔力宝贝私服技术交流如果没有对内存占用比较敏感的话妖城在线论坛2 }* j( ~6 H4 f
正常运行的服务器,一般都会给每个玩家登陆的时候,或者玩家某个行为的时候,创建一个临时的tabble魔力私服,最新魔力宝贝私服技术交流% ~) b0 j7 `0 o: J
这个table的生命周期仅限于这玩家本次登录的时候。妖城在线论坛" X8 Q4 I$ v7 h. l/ @4 {: W
然后玩家下线了,就释放掉,比如tablexx=nil—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート: y, x$ R! Y  P' X( X
但是这样做有一个问题。。。妖城在线论坛3 d3 D, ]* B# b$ E7 J1 }
你可以尝试一个玩家登陆的时候,你创建一个百万级别的table项目。
# R0 |& `- z. O# m( p魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表玩家下线的时候,你nil掉这个table
( t) X2 g" S- _! }4 N8 |—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート并且你也可以及时得使用lua的垃圾回收释放无效的内存。6 o1 [  u5 S: l" h) n& L1 c& Y8 d5 i8 S) ]
但问题是,你垃圾回收后,你读取lua的占用内存,发现确实下降了妖城在线论坛# r/ J6 k1 x# z$ J* G
但是在linux下用系统命令top查看。。。。。—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート7 a) G9 o. ?3 v+ P. n) i
魔力服务端所占用的内存毫无下降。魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表0 ?; P& q1 Q* I
那么你再次登陆角色,又创建了一批内存
' Q4 U6 t+ ^+ Y$ k1 S魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表我至今依然没有通读lua引擎的代码,所以依然不能确定lua的内存管理方式。5 c/ P  ~7 Q8 E6 G5 R. Q/ k
但是根据这段时间的测试
. I4 r2 R9 a- f* z魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表可以总结经验(并不一定对):lua会霸占整个系统的内存,并以你目前最大用到的多少为限,你用lua的垃圾回收功能,是回收了: {) l5 S4 [, {) c4 s- O; e2 v; o
但是这部分内存并不归还给linux系统
( z7 x5 Q7 ]2 mbbs.mocwww.comlua会认为,你既然现在能用到这个尺度的内存,那我留着,你等下迟早也要用到。。。。。
& W- b( O& y) P0 A. I6 H9 D魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表这就导致了,不停的table的nil释放并不能真正释放整个魔力服务端运行时占用的内存
1 `/ P3 j9 Q, m  Zbbs.mocwww.com这个跟正常的编程意识就有点不符合了。。。。。。bbs.mocwww.com! s, j. K- w! X
但反正它大概是这么操作的。
0 f7 [& G0 e' v8 Z魔力私服,最新魔力宝贝私服技术交流解决方案是什么呢?魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表% h2 K4 G6 W+ M
不要用cdkey啥的做table的key(如果非要不可,我感觉宁愿弄成field存到数据库中)
: @4 e6 l% ?: Xbbs.mocwww.com启动的时候,根据当前设定的最大在线人数,预先扩充一个table
1 \" Z, @9 t+ g—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート这个table的索引key使用CharIndex这个序号—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート9 s- l' j% E; |  e
玩家下线的时候,不要nil掉,只要再次初始化数据就好了。8 ?" \8 x! `' B* D( Z: l  i$ r
这样就不会反复创建了
5 u- w8 t  Q) J! W, S2 @
$ O$ Y. L0 t% w% Q0 F4 Bbbs.mocwww.com三:引擎,c语言方面
) `2 w0 R9 B5 [3 C3 ?魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表也是同样的观点。魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表' Z/ ^, H; \: G
尽量预设开辟一段既定的内存空间,不要试图去在登陆和登出的时候频繁的创建和释放—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート* ~4 ]% [  |0 m# {; J

" a$ t8 w9 s' b—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート最初妖城启动占用内存大概2.3g,运行大概十天半个月后,就会出现内存溢出,轻则挂端重则回档。! v* G5 ^3 F" s# `- M3 I
后来优化后(其实没有优化到极致)启动占用内存800m左右,干净的系统top下观察占用内存1g而已
) I; \' h- a- X3 R3 E9 W6 \bbs.mocwww.com连续运行几个月都不会有问题。
, J& a. O* X% y—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート
7 t" U5 m+ M; V8 r9 t3 A; X5 q—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート以上说的三个方面妖城在线论坛8 \& Q* @4 r3 X& _5 y. f2 v# m3 d& Y
两个都是一般的开服的gm自己可以控制优化的,第三个是必须引擎技术商方面优化的。
5 h! F  H/ g0 Q6 L+ m2 W% k魔力私服,最新魔力宝贝私服技术交流
6 P5 a* H2 E: c  ^; H( d魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表大家可以试一下
妖城欢迎您!

TOP

补充几点
# n- T% W2 p7 Y& o魔力私服,最新魔力宝贝私服技术交流1. 关于可用内存,实际上linux上面只有3g,windows下面只有2gbbs.mocwww.com& A, {& M/ j5 [, H' n$ w. n
2. luajit 可用内存是2g,除非 64位+GC64模式
+ R' f5 ]* V5 i% X妖城在线论坛2.1. 内存回收,lua 申请的内存看luajit的实现了,默认跟c一样的处理逻辑,但如果是myalloc的话,大概率会有内存泄漏,不过就算是c的内存申请后也不是马上归回系统的。
1 p3 X' ^9 m  w$ D$ G, C* [8 u1 \bbs.mocwww.com3. gmsv里面动态申请的数据主要是迷宫,不过引擎的myalloc,大概率会有内存泄漏bbs.mocwww.com4 z( R4 u2 a) ~6 L

. {: W$ x+ u+ v5 ]魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表[ 本帖最后由 Muscipular 于 2023-5-15 12:40 编辑 ]

TOP

luajit我的是5.2.3版本的,所以我这边垃圾回收操作是不释放内存归还系统的
妖城欢迎您!

TOP

发新话题