Skip to main content

Buku panduan tindak balas insiden

Pengelasan keterukan​

SevDefinisiMasa tindak balasContoh
SEV-1Pengeluaran terhenti, risiko kehilangan dataPengakuan 15 min, semua kakitanganSemua rantau 5xx, kerosakan DB, putusnya rantai log audit
SEV-2Kemerosotan besarPengakuan 1 jam, bertugas + sandaranSatu rantau terhenti, kependaman 5x, penyedia model tidak dapat dihubungi
SEV-3Kemerosotan kecilPengakuan 4 jam, bertugasSatu model gagal, papan pemuka terhenti, kueri perlahan
SEV-4Kosmetik / tidak mendesakHari perniagaan berikutnyaKesilapan ejaan, pepijat UI kecil, ralat dokumentasi

Langkah tindak balas​

SEV-1 / SEV-2​

  1. Isytihar: Jurutera bertugas mengisytiharkan keterukan dan mencipta bilik perang (#incident-YYYYMMDD-HH).
  2. Panggil: PagerDuty memanggil secara automatik utama dan sekunder. Eskalasi kepada pengurus selepas 30 minit tanpa pengakuan.
  3. Berkomunikasi: Siarkan kemas kini awal pada halaman status dalam masa 30 minit. Beritahu pelanggan SOC 2 dalam masa 72 jam jika berlaku kebocoran data.
  4. Mitigasi: Gunakan pembaikan yang diketahui atau gulung balik (helm rollback yabanin). Jika berlaku kerosakan DB, cetuskan latih tubi DR.
  5. Selesai: Pulihkan perkhidmatan kepada keadaan normal. Dokumentasikan langkah penyelesaian dalam bilik perang.
  6. Post-mortem: Dalam masa 5 hari perniagaan (tanpa menyalahkan). Terbitkan penemuan kepada semua kakitangan.

SEV-3 / SEV-4​

  1. Lakukan triaj dalam baris gilir bertugas semasa waktu perniagaan.
  2. Tugaskan pemilik, tetapkan masa sasaran penyelesaian.
  3. Selesaikan dan tutup tiket. Dokumentasikan punca akar untuk SEV-3.

Templat komunikasi​

Kemas kini insiden awal​

[INCIDENT] Yabanin Platform — Sev <X> — <brief description>
Time: <HH:MM UTC>
Impact: <what's affected>
Status: Investigation ongoing
Next update: <30 min from now>

Notis penyelesaian​

[RESOLVED] Yabanin Platform — Sev <X> — <brief description>
Duration: <start> to <end> (<total time>)
Root cause: <summary>
Preventive action: <what's being done>
Post-mortem: <link or ETA>
  • docs/runbooks/sev-classification.md — matriks keputusan keterukan
  • docs/runbooks/post-mortem-template.md — format post-mortem tanpa menyalahkan
  • Dasar tindak balas insiden SOC 2 dalaman (lembaran kerja peribadi tempatan, tiada dalam pepohon ini)