Board logo

标题: [魔力私服分享] 关于服务端内存优化的一些经验 [打印本页]

作者: 易凡    时间: 2023-5-15 01:16     标题: 关于服务端内存优化的一些经验

大家也知道,妖城魔力一个区开服了十周年多了
% f, G( [$ e7 d# C$ X( m% fbbs.mocwww.com.
" b$ f% t3 K9 h" \9 d: [' `不管是数据库还是data的冗余肯定都非常多。bbs.mocwww.com.9 i# O/ M7 T/ z$ ~; {$ g) s

7 d: F# @# d6 [. R/ `, s4 ^/ ^妖城在线论坛对于妖城这样的数据量大的服务器,首先数据库肯定不能放在跟服务端运行的同一个服务器里。—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート$ G9 |2 f2 V: \: A- z9 r) Q
魔力私服,最新魔力宝贝私服技术交流' ]! p( I  ^$ f: O! j( z7 x* P& S9 C
这是基本的,所以,最好是运行服务端的服务器一台,数据库单独一台。
* z1 U9 N: V$ j3 T
7 D4 B. n2 {/ ~因为数据库大了之后,mysql的资源占用也是很可观的。能省则省。
. O+ R& J, [) g4 l3 K魔力私服,最新魔力宝贝私服技术交流魔力私服,最新魔力宝贝私服技术交流4 u  E9 c/ v! c6 M$ q# M
然后关于在有限资源的前提下(魔力原生的服务端是只能运行32位系统的,也就是最大4g内存,后续可能有别的引擎升级兼容了64位那另说)
' n/ w0 n% K% \, R) O1 h* m妖城在线论坛妖城在线论坛1 s6 ?. R, Z7 R* y3 R4 x
优化有两个方面魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表9 A# y) T$ k: e8 _, j4 M
一:data方面7 l/ f. C# Z3 K6 _
data下几乎所有的txt设定,比如npc/msg/itemset/enemy等等
* ^: |0 s* T/ o/ I) p5 ]4 i0 \2 H魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表记住编号不要随意乱设置,尽量往小的,没用到的设定魔力私服,最新魔力宝贝私服技术交流* p1 B  Z9 `" n( a4 y/ [
比如你不要把一个msg的编号设定成390000000,三亿多了魔力私服,最新魔力宝贝私服技术交流4 X8 N! t( a2 p' c& R6 t
因为在程序的逻辑里,我不可能为了寻找到某个编号,就每次去整个msg里面从上到下循环搜索吧?
4 x# _, O) {& q! F) ~- d6 ?魔力私服,最新魔力宝贝私服技术交流所以程序逻辑,会在服务端启动的时候,就根据你msg的最大编号为上限,设定一个跳转表。bbs.mocwww.com." g# ]8 V4 y3 f: f
对程序员来说,讲到这里应该就懂了
" x. n6 m6 t- z7 C1 X魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表但是对于非程序员来说,我多说两句,跳转表是为了快速定位数据不需要从上到下循环搜索的。bbs.mocwww.com.7 l' q1 v7 t" G. ^9 H$ r
你可以理解跳转表是连续的一堆信息。魔力私服,最新魔力宝贝私服技术交流6 G  [! T! B( z# V6 I+ Y; {: m
你的msg编号最大的如果是100000,那么程序启动的时候就会设定10万个连续的数据空间用来存放对应每个msg编号指向msg.txt的哪一行。
- k/ n6 c2 u4 \8 M% L8 S. }—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート这样,当游戏里,需要调用到某个msg的时候(比如道具说明啊,npc对话啊,boss发言啊之类的)—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート: c1 b) A) s; o, ~& }
它直接通过编号获取跳转表指向的msg行,获取到msg的内容。bbs.mocwww.com.+ j! ?; k* K* `
这就导致了一个问题,你要是把msg的最大编号设置成3亿多。。。。可想而知浪费了多少内存?
7 ~# x1 r) r% w/ O% Y) I  Kbbs.mocwww.com.魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表! }% n1 v: U1 q6 h
data下的其它文档也是一样的道理。用编号,不要太任性。
- v6 f7 \# x- l8 W8 q4 l妖城在线论坛
; P) F5 E5 J+ s魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表二:lua方面
$ A; I! K" ]6 F0 A1 W+ {lua方面最大的内存占用,应该就是table类型的反复释放和创建了。妖城在线论坛! X2 ?" }' k! Z# a: G
因为没有深入阅读lua的代码
. Q* v6 F* S/ D, A% t1 i魔力私服,最新魔力宝贝私服技术交流所以对于lua的内存管理一直是很懵的。—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート) C# F2 ^) j, [( g4 f
如果没有对内存占用比较敏感的话
. I$ @' @' g5 p# y8 k魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表正常运行的服务器,一般都会给每个玩家登陆的时候,或者玩家某个行为的时候,创建一个临时的tabble
; A1 E) B" B1 v8 ibbs.mocwww.com.这个table的生命周期仅限于这玩家本次登录的时候。bbs.mocwww.com.  P' `7 n+ a5 n) G7 U) W. J% G2 q9 n
然后玩家下线了,就释放掉,比如tablexx=nil—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート* z6 L( ?3 V4 G6 s
但是这样做有一个问题。。。魔力私服,最新魔力宝贝私服技术交流+ V1 F( U' K  B7 E, p8 W: y
你可以尝试一个玩家登陆的时候,你创建一个百万级别的table项目。—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート0 ~0 m7 h3 {6 d7 y* w5 v
玩家下线的时候,你nil掉这个table
( Q7 q2 K: D5 O, H# j并且你也可以及时得使用lua的垃圾回收释放无效的内存。/ x- ]" t* f- j1 h  t' Y
但问题是,你垃圾回收后,你读取lua的占用内存,发现确实下降了魔力私服,最新魔力宝贝私服技术交流1 ]7 ]" G: \4 Z+ a
但是在linux下用系统命令top查看。。。。。魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表8 N  b+ ^( P& i& H- x
魔力服务端所占用的内存毫无下降。
  V3 s+ I7 ~- u* d; o" N: h那么你再次登陆角色,又创建了一批内存妖城在线论坛% @% {  z1 h. }) \9 o
我至今依然没有通读lua引擎的代码,所以依然不能确定lua的内存管理方式。
4 y/ s- {  p1 x, S0 s7 P3 Q但是根据这段时间的测试
0 ]( I( y% V$ c, p, O1 d- m2 |可以总结经验(并不一定对):lua会霸占整个系统的内存,并以你目前最大用到的多少为限,你用lua的垃圾回收功能,是回收了
' t$ k! F! \2 m! s3 k+ c妖城在线论坛但是这部分内存并不归还给linux系统魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表! g! ?0 s. C) ?- }$ n, \% r
lua会认为,你既然现在能用到这个尺度的内存,那我留着,你等下迟早也要用到。。。。。# K* u) d7 l7 i3 T" x; x# [( T8 j
这就导致了,不停的table的nil释放并不能真正释放整个魔力服务端运行时占用的内存
8 w+ _9 C4 J4 j! r! k$ @魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表这个跟正常的编程意识就有点不符合了。。。。。。( ?+ E+ q) C- Z( A2 U* w
但反正它大概是这么操作的。
4 N" _6 v9 j  B. h$ K( H' z1 n—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート解决方案是什么呢?
# y, @) j3 Q( |5 I. g) }9 H6 q魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表不要用cdkey啥的做table的key(如果非要不可,我感觉宁愿弄成field存到数据库中)bbs.mocwww.com.2 s! r! g  `* r6 Q" v
启动的时候,根据当前设定的最大在线人数,预先扩充一个table
4 @; ^7 a' x1 Z! q/ ^; Q魔力私服,最新魔力宝贝私服技术交流这个table的索引key使用CharIndex这个序号—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート, B0 L" z( P6 x4 ]6 ]& V2 l4 V7 o
玩家下线的时候,不要nil掉,只要再次初始化数据就好了。
8 _5 h7 A& q" X9 n1 r+ z( m  r0 ]' A魔力私服,最新魔力宝贝私服技术交流这样就不会反复创建了魔力私服,最新魔力宝贝私服技术交流( t0 r5 ^; H0 s# @5 n4 E
bbs.mocwww.com.$ O, D% i8 g" v3 j$ o1 P" c
三:引擎,c语言方面
/ }' ?% _6 U! c& p, f$ k+ w3 \魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表也是同样的观点。
! o+ @  Q# j) v" T9 M尽量预设开辟一段既定的内存空间,不要试图去在登陆和登出的时候频繁的创建和释放
4 K: L! H4 u7 k% q, l! Sbbs.mocwww.com.魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表7 n) M( Z9 ]5 X: m
最初妖城启动占用内存大概2.3g,运行大概十天半个月后,就会出现内存溢出,轻则挂端重则回档。2 k0 M4 Z0 |4 i1 Z6 H+ D& k2 w
后来优化后(其实没有优化到极致)启动占用内存800m左右,干净的系统top下观察占用内存1g而已7 q- V/ ?; V( f& s/ O
连续运行几个月都不会有问题。
7 d' G5 l  O! m5 z! gbbs.mocwww.com.
2 L% ]; x" z& S* m. g以上说的三个方面
4 I7 w- w/ }; Y+ E( N' I5 _' a—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート两个都是一般的开服的gm自己可以控制优化的,第三个是必须引擎技术商方面优化的。魔力私服,最新魔力宝贝私服技术交流, X+ o5 P; O* s" e5 R

1 S# m, ?, \/ I5 J. `1 l( U魔力私服,最新魔力宝贝私服技术交流大家可以试一下
作者: Muscipular    时间: 2023-5-15 12:32

补充几点
/ e& a% S' u: v' O* n% N0 k) f魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表1. 关于可用内存,实际上linux上面只有3g,windows下面只有2g
3 r; h2 d/ x/ B4 V—魔力私服,魔力宝贝私服技术,DELPHI编程,魔力寶貝, 魔力宝贝, 크로스게이트,クロスゲート2. luajit 可用内存是2g,除非 64位+GC64模式
8 }0 i! D% R" ^7 ]! f0 R9 z魔力私服,最新魔力宝贝私服技术交流2.1. 内存回收,lua 申请的内存看luajit的实现了,默认跟c一样的处理逻辑,但如果是myalloc的话,大概率会有内存泄漏,不过就算是c的内存申请后也不是马上归回系统的。魔力私服,最新魔力私服,魔力宝贝私服,魔力宝贝私服技术,魔力宝贝私服,私服架设技术,妖城,FLASH,电影,黑客,网络,网吧,破解,入侵,注册表0 c  B: r; J4 T2 G
3. gmsv里面动态申请的数据主要是迷宫,不过引擎的myalloc,大概率会有内存泄漏( T7 h) M( W/ Z8 \1 h/ S

7 ?6 t+ l& F( y9 R/ w2 p; I; k妖城在线论坛[ 本帖最后由 Muscipular 于 2023-5-15 12:40 编辑 ]
作者: 易凡    时间: 2023-5-15 19:34

luajit我的是5.2.3版本的,所以我这边垃圾回收操作是不释放内存归还系统的




欢迎光临 妖城在线论坛 (http://bbs.mocwww.com./) Powered by Discuz! 6.0.0