High-Throughput Zero-Copy Event Ingestion Pipeline
Mesin ingestion data terdistribusi yang memproses 50.000+ payload/detik dengan jaminan batas alokasi memori bounded dan p99 latency di bawah 4 milidetik.
Problem Statement
Sistem lama berbasis runtime dinamis sering mengalami lonjakan GC pause hingga 450ms dan crash saat burst traffic akibat queue memori tidak terbatas (unbounded).
The Hard Part (Tantangan Kunci)
Menghilangkan alokasi heap repetitif pada deserialisasi JSON heterogen dan merancang mekanisme backpressure berbasis sinyal tekanan soket TCP.