เซิร์ฟกิน RAM 9.36 GiB ทั้งที่ใช้จริงแค่ 3 GiB
เวิร์กเซิร์ฟ Project Zomboid ของคลับใช้ RAM เกือบทั้งเครื่อง เราไล่ดูว่าหน่วยความจำไปไหน ลองตั้งค่า Java 5 แบบบนเซิร์ฟสำเนา แล้วเปลี่ยนเซิร์ฟจริงโดยไม่แตะรูปแบบการเล่น
ปัญหา
เซิร์ฟ Project Zomboid ของคลับ (Build 42.21 ม็อด 144 ตัว) รันบนเครื่อง Linux ของเจ้าของที่มี RAM 13.6 GiB และ CPU 8 เธรด ตอนมีคนเล่น 5 คน เกมใช้ RAM ไป 9.36 GiB จนเครื่องเหลือที่ว่างราว 3 GiB ทั้งที่จะเปิดเซิร์ฟเกมอื่นบนเครื่องเดียวกันด้วย
9.36 GiB
- ข้อมูลที่เกมใช้จริง
- ZGC จองไว้เฉย ๆ
- นอก heap และไฟล์
ดูตัวเลขเป็นตาราง
| GiB | % | |
|---|---|---|
| ข้อมูลที่เกมใช้จริง | 2.96 | 32 |
| ZGC จองไว้เฉย ๆ | 4.62 | 49 |
| นอก heap และไฟล์ | 1.79 | 19 |
CPU กลับว่าง เกมทำงานบนเธรดหลักเธรดเดียวเป็นส่วนใหญ่ ทั้งโปรเซสใช้ไม่ถึงหนึ่ง core จากที่มีแปดเธรด เป้าหมายจึงตั้งไว้ว่า ลด RAM โดยไม่แตะรูปแบบการเล่น ยอมให้ใช้ CPU มากขึ้นได้
สมมติฐาน
- ไม่จริงม็อดเยอะเลยกิน RAM
Lua ฝั่งเซิร์ฟของม็อดทั้ง 144 ตัวรวมกันแค่ 5.3 MiB ตาราง Lua ทั้งหมดใน heap รวมกันราว 130–170 MiB จากข้อมูลที่ใช้จริง 2.96 GiB
- จริงGC ของ Java จองหน่วยความจำไว้มากกว่าที่เกมใช้จริง
ZGC จองไว้ 7.58 GiB แต่หลังเก็บขยะ เกมใช้จริง 2.96 GiB
- จริงเปลี่ยน GC แล้วเอา CPU ที่ว่างมาแลก RAM ได้ โดยเกมไม่กระตุก
เกมใช้ RAM เหลือ 2.6–3.3 GiB แลกกับ CPU เพิ่มราว 0.3–0.5 core GC หยุดเกมนานสุด 0.9 ms ผู้เล่น 6–8 คนไม่มีใครบอกว่าแลค
วิเคราะห์
วัดเซิร์ฟจริงตอนมีคนเล่นโดยไม่รีสตาร์ต: แผนที่หน่วยความจำของโปรเซสจาก /proc และ pmap แล้วใช้ jcmd ของ Java ดู heap นับ object ที่ยังใช้อยู่ และอัด JFR (Java Flight Recorder) 15 นาที
- ZGC จอง heap ไว้ 7.58 GiB ใน 15 นาทีเก็บขยะ 4 รอบ ก่อนเก็บ heap เต็ม 5.8–7.6 GiB หลังเก็บเหลือ 3.0–3.1 GiB หยุดเกมนานสุดแค่ 0.067 ms
- เกมสร้างขยะช้า ราว 16–22 MiB ต่อวินาที ให้ GC ทำงานถี่ขึ้นได้สบาย
- ZGC ใช้ reference ขนาด 8 byte เสมอ (ไม่มี compressed oops) ทุกช่องที่ชี้ไปหา object อื่นจึงใหญ่เป็นสองเท่าของที่ GC ตัวอื่นใช้ได้
- นอก heap อีก 1.73 GiB ในจำนวนนั้น 1.55 GiB อยู่ใน malloc ของ glibc แบ่งเป็นกว่า 70 ก้อน ส่วนที่ว่างแล้วไม่ถูกคืนให้ระบบ สั่ง jcmd System.trim_native_heap ครั้งเดียวคืนได้ทันที 1,050 MiB โดยไม่ต้องรีสตาร์ต
- object ที่กินที่มากที่สุดเป็นของตัวเกมเอง: ท่าทาง animation 437 MiB, object ของโลกในบริเวณที่โหลดอยู่ 213 MiB และช่องบนแผนที่ 137 MiB, ข้อความและบัฟเฟอร์ 286 MiB
- เจอจุดสิ้นเปลืองในโค้ดเกม 2 จุด: ตัวจัดการเสียงรถผ่านเน็ตสร้างชุดข้อมูลใหม่ทุก tick คิดเป็น 82.7% ของขยะที่สุ่มนับได้ และ backup ตอนเปิดเซิร์ฟเก็บรายการไฟล์ 140,252 รายการค้างไว้ราว 53 MiB
- ข้อมูลที่ใช้
- ขยะรอเก็บ
- RAM ที่จองไว้
- GC ทำงาน (บนเธรดอื่น)
- ZGC
- Shenandoah + compact headers
Keyframeท่าทาง animation56 → 32 byteเล็กลง 43%LinkedHashMap.Entryช่องในตาราง Lua56 → 32 byteเล็กลง 43%Stringข้อความ32 → 24 byteเล็กลง 25%Quaternionการหมุน32 → 24 byteเล็กลง 25%Vector3fไม่มี reference24 → 24 byteเท่าเดิม
ดูตัวเลขเป็นตาราง
| ZGC | Shenandoah + compact headers | |
|---|---|---|
| Keyframe (ท่าทาง animation) | 56 | 32 |
| LinkedHashMap.Entry (ช่องในตาราง Lua) | 56 | 32 |
| String (ข้อความ) | 32 | 24 |
| Quaternion (การหมุน) | 32 | 24 |
| Vector3f (ไม่มี reference) | 24 | 24 |
วิธีทดลอง
ลองบนสำเนาก่อนแตะของจริง: เปิดเซิร์ฟ PZ บนพีซีด้วยม็อด 144 ตัวและไฟล์ตั้งค่าชุดเดียวกับเซิร์ฟจริง (โลกใหม่ ไม่มีผู้เล่น ไม่ต่อ Steam และไม่เปิดให้คนนอกเข้า) ลองตั้งค่า Java 5 ชุด แต่ละชุดวัดหลังเปิด 90 วินาที: RAM ของโปรเซส heap ที่จอง และข้อมูลที่ยังใช้จริงหลังสั่งเก็บขยะ
| ชุด | ตั้งค่า Java |
|---|---|
| A | ZGC ตามที่เกมให้มา (แบบที่เซิร์ฟใช้อยู่) |
| B | Shenandoah แบบ compact + compact headers + string dedup |
| C | ZGC + compact headers + string dedup + SoftMaxHeapSize 2 GiB |
| D | G1 + compact headers + string dedup |
| E | Shenandoah ค่าเริ่มต้น |
ชุดที่ดีที่สุดเอาไปใช้กับเซิร์ฟจริงตอนรีสตาร์ตตามรอบ 19:00 เก็บไฟล์ตั้งค่าเดิมไว้ย้อนกลับ และเปิด GC log ไว้ดูว่าเกมสะดุดหรือเปล่า
ผลทดลอง
- RAM ของโปรเซส
- ข้อมูลที่ใช้จริง
MiB
ดูตัวเลขเป็นตาราง
| ข้อมูลที่ใช้จริง (MiB) | RAM ของโปรเซส (MiB) | |
|---|---|---|
| A · ZGC | 1,196 | 6,390 |
| E · Shenandoah | 917 | 5,156 |
| C · ZGC + SoftMax | 1,089 | 3,338 |
| D · G1 | 834 | 2,460 |
| B · Shenandoah compact | 806 | 1,274 |
| ชุด | ข้อมูลที่ใช้จริง | heap ที่จอง | RAM ของโปรเซส |
|---|---|---|---|
| A · ZGC | 1,196 MiB | 5,932 MiB | 6,390 MiB |
| B · Shenandoah compact | 806 MiB | 834 MiB | 1,274 MiB |
| C · ZGC + SoftMax | 1,089 MiB | 1,986 MiB | 3,338 MiB |
| D · G1 | 834 MiB | 2,016 MiB | 2,460 MiB |
| E · Shenandoah | 917 MiB | 966 MiB | 5,156 MiB |
แค่เปลี่ยนจาก ZGC เป็น Shenandoah ข้อมูลที่ใช้จริงก็ลด 23% (A → E) เพราะ reference เหลือ 4 byte compact headers กับ string dedup ลดได้อีก 12% (E → B) โหมด compact ทำให้ heap ที่จองไว้แทบเท่าข้อมูลจริงตลอด ไม่ต้องรอ 5 นาทีเหมือนค่าเริ่มต้น
ดูตัวเลขเป็นตาราง
| RAM ที่เกมใช้ (GiB) | |
|---|---|
| 17:58 | 9.36 |
| 18:02 | 9.40 |
| 18:05 | 9.43 |
| 18:08 | 9.43 |
| 18:11 | 9.41 |
| 18:14 | 9.35 |
| 18:17 | 9.09 |
| 19:01 | 2.05 |
| 19:06 | 2.63 |
| 19:11 | 2.59 |
| 19:16 | 3.30 |
| 19:21 | 2.67 |
| 19:26 | 2.81 |
| 19:31 | 2.62 |
| 19:36 | 3.24 |
| 19:41 | 3.33 |
| 19:46 | 3.03 |
| เซิร์ฟจริง | ก่อน (ZGC) | หลัง (Shenandoah) |
|---|---|---|
| RAM ที่เกมใช้ | 9.35–9.43 GiB | 2.59–3.33 GiB |
| RAM ว่างของเครื่อง | 2.82–2.92 GiB | 8.92–9.65 GiB |
| heap ที่จอง | 7,758 MiB | 2,008–2,796 MiB |
| CPU ของเกม (core) | 0.74–0.88 | 1.02–1.36 |
| รอบเก็บขยะ | 4 ใน 15 นาที | 98 ใน 46 นาที |
| หยุดเกมนานสุด | 0.067 ms | 0.891 ms |
| เวลาเปิดเกม | 68 วินาที | 75 วินาที |
| ผู้เล่น | 5 | 6–8 |
บนเซิร์ฟจริงเกมใช้ RAM จาก 9.4 เหลือ 2.6–3.3 GiB ทั้งที่ผู้เล่นมากกว่าเดิม heap ที่จองไว้แทบเท่าที่ใช้จริงตลอด GC ทำงาน 98 รอบใน 46 นาทีบนเธรดของมันเอง หยุดเกมนานสุด 0.9 ms (ตอนเปิดเซิร์ฟ) ไม่มี degenerated GC, full GC หรือการยกเลิก GC เลยสักครั้ง เกมใช้ CPU เพิ่มราว 0.3–0.5 core ส่วนหนึ่งมาจากผู้เล่นที่มากขึ้นด้วย และเปิดเซิร์ฟนานขึ้นจาก 68 เป็น 75 วินาที
สิ่งที่ไม่เวิร์ก
- ZGC + SoftMaxHeapSize (ชุด C): heap เล็กลงครึ่งหนึ่งตอนว่าง แต่ reference ยังเป็น 8 byte และ ZGC ใช้หน่วยความจำของตัวเองอีก 88 MiB สุดท้ายโปรเซสยังใช้ 2.5–3.3 GiB
- G1 (ชุด D): ข้อมูลจริงเล็กพอ ๆ กับ Shenandoah แต่จอง heap ไว้ 2 GiB ไม่คืน และ G1 ต้องหยุดเกมทั้งหมดระหว่างเก็บขยะ
- Shenandoah ค่าเริ่มต้น (ชุด E): reference เล็กลงแล้ว แต่หลังโหลดโลกยังถือ RAM ไว้ 5 GiB เพราะค่าเริ่มต้นคืนที่ว่างก็ต่อเมื่อไม่ได้ใช้ครบ 5 นาที
- ไล่หาม็อดตัวการก่อน: สแกนม็อด 144 ตัวหาข้อมูลที่โตไปเรื่อย ๆ เจอแค่ตัวเดียว (Zombie Dismemberment จำสถานะแขนขาของซอมบี้ทุกตัวที่โดนตัดไว้ตลอด) แต่ขนาดหลัก MiB ไม่ใช่หลัก GiB เลยพักไว้
- เปิดเซิร์ฟสำเนารอบแรกพัง: ลิงก์ม็อดแบบ junction บน Windows ทำให้เกมหาไฟล์ม็อดไม่เจอและโหลดแผนที่ไม่ขึ้น ต้องเปลี่ยนเป็น hard link
ข้อจำกัด
- เซิร์ฟสำเนาวัดตอนไม่มีผู้เล่นบน Windows ตัวเลขจริงตอนมีคนเล่นบน Linux สูงกว่านี้
- ผลบนเซิร์ฟจริงครอบคลุม 46 นาทีแรกหลังรีสตาร์ต ส่วนช่วงก่อนเปลี่ยนวัดได้ 20 นาที ผู้เล่นสองช่วงไม่เท่ากัน (5 กับ 6–8 คน) และโลกจะโหลดเพิ่มเรื่อย ๆ ตลอดรอบ 6 ชั่วโมง
- การกระตุกวัดจาก GC log กับคำบอกของผู้เล่น ยังไม่ได้วัดเวลาต่อ tick ของเกม
ตัดสินใจ
เปลี่ยนเซิร์ฟจริงเป็นชุด B ตอนรีสตาร์ต 19:00 วันที่ 6 พ.ย. 2569 เพิ่ม ConcGCThreads=2 ให้ GC ใช้ core ที่ว่างสองตัว TrimNativeHeapInterval คืน RAM ฝั่ง native ทุก 60 วินาที และ GC log ไฟล์ตั้งค่าเดิมเก็บไว้ย้อนกลับได้ ไม่ได้แตะค่าการเล่นใด ๆ
-Xms1g
-Xmx8g
-XX:+UseShenandoahGC
-XX:ShenandoahGCHeuristics=compact
-XX:+UseCompactObjectHeaders
-XX:+UseStringDeduplication
-XX:ConcGCThreads=2
-XX:TrimNativeHeapInterval=60000
-Xlog:gc:file=/home/pzserver/ram-check/gc-%p.log:time,uptime,level:filecount=5,filesize=20mติดตามผล
46 นาทีหลังเปลี่ยน ผู้เล่น 6–8 คนเล่นได้ตามปกติ ไม่มีใครบอกว่าแลค GC log ไม่มีอะไรน่ากังวล จึงใช้ค่าชุดนี้ต่อ ไม่ย้อนกลับ ต่อจากนี้จะดู RAM ตอนครบรอบ 6 ชั่วโมงก่อนรีสตาร์ตแต่ละรอบ และระวังตอนอัปเดต agent ของเซิร์ฟ เพราะรุ่นถัดไปจะเขียนค่า -Xms กับ -Xmx ทับทุกครั้งที่เปิดเกม
ต่อไป
- ใส่ค่าชุดนี้ลง agent ของเซิร์ฟ ให้เขียนทุกครั้งที่เปิดเกม (คง -Xms ไว้ต่ำ ให้ Shenandoah คืน RAM ได้) อัปเดตเกมแล้วค่าจะไม่หายเงียบ ๆ
- แพตช์ Java เล็ก ๆ สำหรับสองจุดสิ้นเปลืองในโค้ดเกม (เสียงรถ 82.7% ของขยะ และ backup ค้าง 53 MiB) ถ้าเจ้าของเซิร์ฟโอเค
- ลองให้ข้อมูล animation ที่ซ้ำกันใช้ object ร่วมกัน (437 MiB ที่เซิร์ฟ B42 ทุกเซิร์ฟโหลดเหมือนกัน)
ข้อมูลดิบ
| object (เซิร์ฟจริง) | จำนวน | ขนาดรวม |
|---|---|---|
| byte[] | 3,833,410 | 286 MiB |
| zombie.iso.IsoObject | 527,508 | 213 MiB |
| Object[] | 1,332,796 | 181 MiB |
| animation.Keyframe | 2,975,820 | 159 MiB |
| HashMap$Node[] | 924,017 | 147 MiB |
| lwjgl Vector3f | 6,049,528 | 138 MiB |
| zombie.iso.IsoGridSquare | 284,511 | 137 MiB |
| java.util.ArrayList | 3,286,411 | 100 MiB |
| lwjgl Quaternion | 3,025,118 | 92 MiB |
| LinkedHashMap$Entry | 1,547,717 | 83 MiB |
PID=$(pgrep -u pzserver -f ProjectZomboid64 | head -1)
grep -E "^(Rss|Pss_Anon|Pss_Shmem)" /proc/$PID/smaps_rollup
sudo -u pzserver jcmd $PID GC.heap_info
sudo -u pzserver jcmd $PID GC.class_histogram | head -40
sudo -u pzserver jcmd $PID JFR.start duration=15m settings=profile filename=rec.jfr
jfr view gc rec.jfr