Post Mortem 16 November 2022

Deskripsi kejadian: Aplikasi mengalami down pada tanggal 16 November 2022 pada pukul 16.30 WITA dan tidak bisa diakses oleh pengguna.

Analisis kegagalan: Setelah melakukan analisis kami menemukan bahwa terjadi kekurangan disk storage (media penyimpanan) pada server kami, sehingga beberapa servis backend kami mengalami degradasi performa yang menyebabkan user mengalami gagal akses.

Penyelesaian masalah: Untuk mengatasi masalah tersebut, kami telah melakukan beberapa langkah berikut:

1. Melakukan upgrade storage server 2 kali lipat;
2. Menghapus file cache yang sudah tidak diperlukan;
3. Melakukan restart service yang mengalami degradasi.

Tindakan pencegahan: Untuk menghindari kejadian serupa di masa depan, kami telah melakukan beberapa tindakan pencegahan berikut:

1. Kami memasang metrics disk usage pada server;
2. Kami melakukan setup alarm agar jika server mendekati presentasi yang kami set agar kami mendapat alarm sebelum servis mengalami degradasi dikarenakan hal yang sama.

Dengan melakukan post mortem pada aplikasi yang mengalami down, kita dapat mempelajari pelajaran berharga dan menerapkan perbaikan dan tindakan pencegahan untuk menghindari kegagalan serupa di masa depan.