Board logo

标题: [魔力私服分享] 关于服务端内存优化的一些经验 [打印本页]

作者: 易凡    时间: 2023-5-15 01:16     标题: 关于服务端内存优化的一些经验

大家也知道,妖城魔力一个区开服了十周年多了
, n# B6 H8 F+ Gbbs.mocwww.com  Q: i* j( C$ p$ C, ~- X$ `+ S
不管是数据库还是data的冗余肯定都非常多。—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート* x# B  p; i' [' N7 _8 ~
$ f4 t, M' A, \: V: e; V, g
对于妖城这样的数据量大的服务器,首先数据库肯定不能放在跟服务端运行的同一个服务器里。
$ r& f3 G6 }6 F4 f) _妖城在线论坛
  R, \! d" e. i, r) [) _. k1 d; L妖城在线论坛这是基本的,所以,最好是运行服务端的服务器一台,数据库单独一台。1 u$ W6 b( {6 e
魔力私服,最新魔力宝贝私服技术交流2 g8 v! \6 j" m& K7 |; A
因为数据库大了之后,mysql的资源占用也是很可观的。能省则省。/ c. j% K" v( q: s+ Q* v& q
妖城在线论坛1 [: W) M; J8 B1 R& ?- v+ O
然后关于在有限资源的前提下(魔力原生的服务端是只能运行32位系统的,也就是最大4g内存,后续可能有别的引擎升级兼容了64位那另说)魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表9 g+ h2 F( ~3 E

; K  U) p+ m7 K  s/ ^$ \; f—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート优化有两个方面魔力私服,最新魔力宝贝私服技术交流5 f4 V  @2 H1 K% m9 r
一:data方面
+ Y5 `+ O) H, I魔力私服,最新魔力宝贝私服技术交流data下几乎所有的txt设定,比如npc/msg/itemset/enemy等等
' ~- T# v. D& |1 H+ p魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表记住编号不要随意乱设置,尽量往小的,没用到的设定bbs.mocwww.com) a  L" p$ L! k9 |4 X# v! g
比如你不要把一个msg的编号设定成390000000,三亿多了—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート0 m; f8 ]$ U/ w2 z
因为在程序的逻辑里,我不可能为了寻找到某个编号,就每次去整个msg里面从上到下循环搜索吧?
* u3 R" D& b. ?2 K8 ]8 v4 h  E' hbbs.mocwww.com所以程序逻辑,会在服务端启动的时候,就根据你msg的最大编号为上限,设定一个跳转表。
" ]8 y; t( t8 M—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート对程序员来说,讲到这里应该就懂了
$ S  x6 J0 y: [" L7 Z' G' C妖城在线论坛但是对于非程序员来说,我多说两句,跳转表是为了快速定位数据不需要从上到下循环搜索的。
3 }* l4 Y5 e) `4 |$ V7 Z8 u3 Y& U; [你可以理解跳转表是连续的一堆信息。
4 b# b- s6 j% t妖城在线论坛你的msg编号最大的如果是100000,那么程序启动的时候就会设定10万个连续的数据空间用来存放对应每个msg编号指向msg.txt的哪一行。bbs.mocwww.com# h* Y5 r' a: y& Y  C1 H
这样,当游戏里,需要调用到某个msg的时候(比如道具说明啊,npc对话啊,boss发言啊之类的)
  W; J4 E. @1 Pbbs.mocwww.com它直接通过编号获取跳转表指向的msg行,获取到msg的内容。bbs.mocwww.com/ N3 j, o. Z% `1 u8 E3 X
这就导致了一个问题,你要是把msg的最大编号设置成3亿多。。。。可想而知浪费了多少内存?
- Y" F9 X; R" Q; L9 p  ?* ~魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表魔力私服,最新魔力宝贝私服技术交流& l" K# v4 R: [- R: p
data下的其它文档也是一样的道理。用编号,不要太任性。
1 s* b; K5 n0 j# k4 u魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表妖城在线论坛0 x0 b$ w' j& A1 b8 Q' Q  n. V
二:lua方面
' f2 A! Q( `  }. H8 t妖城在线论坛lua方面最大的内存占用,应该就是table类型的反复释放和创建了。9 d7 b- ]( P# v% X& d
因为没有深入阅读lua的代码
/ r" i7 b4 z) x( a4 lbbs.mocwww.com所以对于lua的内存管理一直是很懵的。魔力私服,最新魔力宝贝私服技术交流; t; H  W% K$ P4 B& `: P
如果没有对内存占用比较敏感的话
' v% L/ d" y) T* ]4 q6 p妖城在线论坛正常运行的服务器,一般都会给每个玩家登陆的时候,或者玩家某个行为的时候,创建一个临时的tabble—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート6 S# P# i: o" B3 M% {
这个table的生命周期仅限于这玩家本次登录的时候。
* `+ X3 u+ o, z6 J3 _魔力私服,最新魔力宝贝私服技术交流然后玩家下线了,就释放掉,比如tablexx=nil
# z9 I8 [. U2 Q妖城在线论坛但是这样做有一个问题。。。妖城在线论坛, M; v. T- I$ ]+ N+ Q
你可以尝试一个玩家登陆的时候,你创建一个百万级别的table项目。
- s: q4 E1 P9 a8 C  ]. n1 c魔力私服,最新魔力宝贝私服技术交流玩家下线的时候,你nil掉这个table: g! M! w' {: [. Y: [) y
并且你也可以及时得使用lua的垃圾回收释放无效的内存。—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート7 H' V: R2 Z' J' J3 @; ^
但问题是,你垃圾回收后,你读取lua的占用内存,发现确实下降了魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表- L; o! u" u  H4 ~" o9 Y
但是在linux下用系统命令top查看。。。。。, g, @) t+ ?  }8 \6 s
魔力服务端所占用的内存毫无下降。
; w/ s/ Q1 R3 _bbs.mocwww.com那么你再次登陆角色,又创建了一批内存
- E& }4 ~9 U& w# }3 q0 F魔力私服,最新魔力宝贝私服技术交流我至今依然没有通读lua引擎的代码,所以依然不能确定lua的内存管理方式。
/ n9 X2 H2 _9 }8 V% K; F$ h—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート但是根据这段时间的测试魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表( v) Y# b. N# P0 I0 V
可以总结经验(并不一定对):lua会霸占整个系统的内存,并以你目前最大用到的多少为限,你用lua的垃圾回收功能,是回收了魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表( K. G4 V7 u+ \9 P9 w0 \
但是这部分内存并不归还给linux系统
, z) j+ T6 q4 H魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表lua会认为,你既然现在能用到这个尺度的内存,那我留着,你等下迟早也要用到。。。。。妖城在线论坛) @4 a$ I3 `8 `
这就导致了,不停的table的nil释放并不能真正释放整个魔力服务端运行时占用的内存
3 s9 h3 y1 h' S8 [$ u$ R6 @—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート这个跟正常的编程意识就有点不符合了。。。。。。—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート& W4 B" p6 G7 o; z/ x/ c
但反正它大概是这么操作的。—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート' K9 W; w4 `* `% R
解决方案是什么呢?—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート& r* m9 D& ]% R: f
不要用cdkey啥的做table的key(如果非要不可,我感觉宁愿弄成field存到数据库中)
3 B" P# B. P9 d7 p1 B" a( r魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表启动的时候,根据当前设定的最大在线人数,预先扩充一个table
$ |2 u# g, W5 T0 i7 D5 a妖城在线论坛这个table的索引key使用CharIndex这个序号
! y' @5 J  U1 h. w1 R- ]玩家下线的时候,不要nil掉,只要再次初始化数据就好了。
5 q- K  Y0 s+ j' C; R* O魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表这样就不会反复创建了bbs.mocwww.com! M3 Y* f7 @, G8 r
妖城在线论坛$ x0 ^* z& {6 w" B/ g* M
三:引擎,c语言方面妖城在线论坛! ~- N, g4 x' s' Y, E
也是同样的观点。
9 u  p5 Y; u9 m, Y. Z3 }尽量预设开辟一段既定的内存空间,不要试图去在登陆和登出的时候频繁的创建和释放魔力私服,最新魔力宝贝私服技术交流0 a8 G: F: t) B. s/ X# S2 H

3 e3 O$ h( v) p0 b2 \—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート最初妖城启动占用内存大概2.3g,运行大概十天半个月后,就会出现内存溢出,轻则挂端重则回档。" G" `7 w7 o. }. Y3 i0 \# m2 d' W
后来优化后(其实没有优化到极致)启动占用内存800m左右,干净的系统top下观察占用内存1g而已
, N! S, L3 P6 E0 v7 p6 g  M魔力私服,最新魔力宝贝私服技术交流连续运行几个月都不会有问题。魔力私服,最新魔力宝贝私服技术交流' K& Q; s) i; A8 O! v7 |: h  ~
—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート2 c; i, U0 x* R* M4 D7 F& {( `
以上说的三个方面魔力私服,最新魔力宝贝私服技术交流1 b% @" f( L$ d5 r1 p1 c# R, b( m
两个都是一般的开服的gm自己可以控制优化的,第三个是必须引擎技术商方面优化的。
4 O. Q& i8 D* j+ Z# W魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表bbs.mocwww.com0 M3 r! C0 c' @- ~- M
大家可以试一下
作者: Muscipular    时间: 2023-5-15 12:32

补充几点( r0 ^/ Q7 s6 j# r
1. 关于可用内存,实际上linux上面只有3g,windows下面只有2g
2 C( u, Z. {( i  [魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表2. luajit 可用内存是2g,除非 64位+GC64模式
# F% C- `  U7 _7 L) A0 I9 P; @—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート2.1. 内存回收,lua 申请的内存看luajit的实现了,默认跟c一样的处理逻辑,但如果是myalloc的话,大概率会有内存泄漏,不过就算是c的内存申请后也不是马上归回系统的。2 o, y: U& u% m8 D7 q
3. gmsv里面动态申请的数据主要是迷宫,不过引擎的myalloc,大概率会有内存泄漏
  r; K( |0 F7 ]* L% ~1 l4 |魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表
. C. {6 ~5 a( G& Z9 ]( H/ K[ 本帖最后由 Muscipular 于 2023-5-15 12:40 编辑 ]
作者: 易凡    时间: 2023-5-15 19:34

luajit我的是5.2.3版本的,所以我这边垃圾回收操作是不释放内存归还系统的




欢迎光临 妖城在线论坛 (http://bbs.mocwww.com/) Powered by Discuz! 6.0.0