Buku panduan tindak balas insiden
Pengelasan keterukan
| Sev | Definisi | Masa tindak balas | Contoh |
|---|---|---|---|
| SEV-1 | Pengeluaran terhenti, risiko kehilangan data | Pengakuan 15 min, semua kakitangan | Semua rantau 5xx, kerosakan DB, putusnya rantai log audit |
| SEV-2 | Kemerosotan besar | Pengakuan 1 jam, bertugas + sandaran | Satu rantau terhenti, kependaman 5x, penyedia model tidak dapat dihubungi |
| SEV-3 | Kemerosotan kecil | Pengakuan 4 jam, bertugas | Satu model gagal, papan pemuka terhenti, kueri perlahan |
| SEV-4 | Kosmetik / tidak mendesak | Hari perniagaan berikutnya | Kesilapan ejaan, pepijat UI kecil, ralat dokumentasi |
Langkah tindak balas
SEV-1 / SEV-2
- Isytihar: Jurutera bertugas mengisytiharkan keterukan dan mencipta bilik perang (
#incident-YYYYMMDD-HH). - Panggil: PagerDuty memanggil secara automatik utama dan sekunder. Eskalasi kepada pengurus selepas 30 minit tanpa pengakuan.
- Berkomunikasi: Siarkan kemas kini awal pada halaman status dalam masa 30 minit. Beritahu pelanggan SOC 2 dalam masa 72 jam jika berlaku kebocoran data.
- Mitigasi: Gunakan pembaikan yang diketahui atau gulung balik (
helm rollback yabanin). Jika berlaku kerosakan DB, cetuskan latih tubi DR. - Selesai: Pulihkan perkhidmatan kepada keadaan normal. Dokumentasikan langkah penyelesaian dalam bilik perang.
- Post-mortem: Dalam masa 5 hari perniagaan (tanpa menyalahkan). Terbitkan penemuan kepada semua kakitangan.
SEV-3 / SEV-4
- Lakukan triaj dalam baris gilir bertugas semasa waktu perniagaan.
- Tugaskan pemilik, tetapkan masa sasaran penyelesaian.
- Selesaikan dan tutup tiket. Dokumentasikan punca akar untuk SEV-3.
Templat komunikasi
Kemas kini insiden awal
[INCIDENT] Yabanin Platform — Sev <X> — <brief description>
Time: <HH:MM UTC>
Impact: <what's affected>
Status: Investigation ongoing
Next update: <30 min from now>
Notis penyelesaian
[RESOLVED] Yabanin Platform — Sev <X> — <brief description>
Duration: <start> to <end> (<total time>)
Root cause: <summary>
Preventive action: <what's being done>
Post-mortem: <link or ETA>
Dokumen berkaitan
docs/runbooks/sev-classification.md— matriks keputusan keterukandocs/runbooks/post-mortem-template.md— format post-mortem tanpa menyalahkan- Dasar tindak balas insiden SOC 2 dalaman (lembaran kerja peribadi tempatan, tiada dalam pepohon ini)