Kinerja turun

Unggahan Object Storage lambat di Jakarta

Tanggal

Sen, 14 Sep 2026

Mulai

10.12 WIB

Durasi

47 menit

Lingkup

Object Storage, cgk-1

Unggahan berukuran besar ke Object Storage Jakarta melambat hingga sepuluh kali lipat selama 47 menit. Tidak ada data yang hilang.

Dampak

Sekitar 9% permintaan unggah di cgk-1 butuh lebih dari 5 detik. Unduhan dan region lain tidak terdampak.

Linimasa (WIB)

1. 10.12Alarm latensi unggah berbunyi.
2. 10.19Teknisi jaga mulai memeriksa; status diubah menjadi "kinerja turun".
3. 10.38Penyebab ditemukan: disk satu node metadata penuh oleh berkas log.
4. 10.51Log dipindahkan, node kembali sehat.
5. 10.59Latensi normal; insiden ditutup.

Penyebab

Rotasi log di satu node metadata gagal sejak pembaruan sistem 2 September, sehingga log menumpuk sampai disk penuh dan node itu menulis sangat lambat.

Yang kami ubah

• Alarm disk 80% untuk semua node metadataselesai
• Uji rotasi log dimasukkan ke daftar periksa pembaruanselesai
• Log node metadata dipindah ke disk terpisahberjalan

Laporan ini contoh purwarupa desain; insiden dan angkanya fiktif.