Prowadzisz sklep internetowy. Ktoś właśnie składa zamówienie. Kasa nie działa. Klient widzi błąd. Klient odchodzi. Właśnie przepadła sprzedaż.
Bez panelu operacyjnego błąd wyszedłby na jaw dopiero jutro, gdy przejrzysz raport dzienny.
Z panelem operacyjnym zespół operacyjny wychwytuje błąd w kilka sekund. Naprawia go od razu. Klient ponawia próbę. Sprzedaż dochodzi do skutku.
Koszt wolnego wykrycia: setki dolarów na godzinę za każdy błąd.
Panele operacyjne wychwytują problemy na bieżąco, a nie po godzinach czy dniach.
Zadanie paneli operacyjnych
Panele operacyjne monitorują kondycję systemów i bieżące operacje.
Czy strona działa. Czy procesy kasy działają. Czy operatorzy płatności odpowiadają. Czy e-maile się wysyłają. Czy wywołania API się udają.
Panel operacyjny nie dotyczy przychodu ani wskaźników biznesowych. Dotyczy kondycji systemów.
Wymóg danych w czasie rzeczywistym
Panel operacyjny musi aktualizować się w czasie rzeczywistym lub prawie rzeczywistym (w ciągu minuty).
Opóźnione dane są bezużyteczne. Jeśli panel odświeża się co godzinę, ominą Cię awarie, które zdarzą się między odświeżeniami.
Wymóg czasu rzeczywistego oznacza, że panel operacyjny jest drogi w budowie i utrzymaniu. Używaj go tylko dla systemów krytycznych.
Co monitorować na panelu operacyjnym
Dostępność systemu
Czy strona odpowiada. Zielony, jeśli działa, czerwony, jeśli nie.
Czas odpowiedzi
Jak szybko działa strona. Zielony poniżej dwóch sekund, żółty od dwóch do pięciu sekund, czerwony powyżej pięciu sekund.
Odsetek błędów
Jaki procent żądań zwraca błędy. Zielony poniżej 0,1%, żółty od 0,1% do 0,5%, czerwony powyżej 0,5%.
Aktywne transakcje
Ile transakcji dzieje się teraz. Informacyjnie. Samo w sobie nie jest ani dobre, ani złe.
Lejek konwersji w toku
Ilu odwiedzających jest teraz na każdym etapie zamówienia. Spadek na dowolnym etapie wymaga zbadania.
Wydajność API
Czasy odpowiedzi zewnętrznych integracji. Operator płatności, usługa e-mail, API wysyłki.
Wydajność bazy danych
Czasy odpowiedzi zapytań, kondycja puli połączeń.
Prawdziwy przykład: panel operacyjny sklepu internetowego
Górna sekcja (kondycja systemu)
Status strony: DZIAŁA (zielony). Czas odpowiedzi: 1,2 sekundy (zielony). Odsetek błędów: 0,08% (zielony). Aktywni użytkownicy: 423. Transakcje w toku: 17.
Środkowa sekcja (lejek zamówienia)
Podgląd koszyka: 127 użytkowników. Start zamówienia: 89 użytkowników (70% konwersji z koszyka). Dane do wysyłki: 72 użytkowników (81% konwersji). Dane płatności: 68 użytkowników (94% konwersji). Potwierdzenie zamówienia: 64 użytkowników (94% konwersji). Spadek na etapie danych do wysyłki: 17 użytkowników (chwila, to więcej niż zwykle, zbadać).
Dolna sekcja (integracje)
Operator płatności: odpowiada w 800 ms (zielony). Usługa e-mail: 99,8% dostarczeń (zielony). Kalkulator wysyłki: odpowiada w 1200 ms (żółty, nieco wolny).
Natychmiastowe działanie
Spadek na etapie danych do wysyłki jest wyższy niż zwykle. Sprawdź, czy wolny kalkulator wysyłki powoduje porzucanie zamówień.
System alertów
Panel operacyjny powinien wywoływać alerty, gdy wskaźniki zmieniają kolor na czerwony.
Alert do zespołu operacyjnego natychmiast. Nie e-mail, który można przeoczyć. SMS, komunikator lub pager, który przerywa pracę.
Progi powinny być ścisłe. Nie chcesz fałszywych alarmów. Ale lepiej mieć jeden fałszywy alarm i wychwycić jeden prawdziwy problem, niż przeoczyć problemy.
Przykładowe progi: strona niedostępna przez 30 sekund = alert. Odsetek błędów powyżej 1% przez 5 minut = alert. Czas odpowiedzi powyżej 5 sekund przez 10 minut = alert. Operator płatności nie odpowiada = alert natychmiast.
Rotacja dyżurów
Dla systemów na tyle krytycznych, że potrzebują panelu operacyjnego, potrzebujesz rotacji dyżurów.
Ktoś odpowiada za monitorowanie 24/7. Jeśli alert uruchomi się o trzeciej w nocy, osoba na dyżurze wstaje i naprawia problem.
Dyżury są drogie. Ale koszt przestoju jest wyższy.
Umieszczaj na panelu operacyjnym z dyżurem tylko systemy krytyczne.
Czego NIE monitorować
Nie monitoruj wskaźników biznesowych na panelu operacyjnym. Przychód, konwersje i trendy ruchu należą do paneli biznesowych, a nie operacyjnych.
Mieszanie biznesu i operacji zaciera cel. Operacje dotyczą kondycji systemów. Biznes dotyczy kondycji firmy.
Osobne panele do osobnych celów.
Panel a alerty
Panel operacyjny pozwala monitorować proaktywnie. Sprawdzasz panel, zanim problem stanie się krytyczny.
Alerty pozwalają reagować po fakcie. Problem się pojawia, alert się uruchamia, naprawiasz go.
Potrzebne są oba. Panel do monitorowania proaktywnego. Alerty do reakcji, gdy nikt nie patrzy na panel.
Instrukcje reagowania na incydenty
Gdy alert się uruchamia, co dzieje się dalej. Zespół operacyjny powinien mieć instrukcję dla każdego typu alertu.
Alert o niedostępnej stronie: zrestartuj serwer WWW. Jeśli nadal nie działa, przełącz na zapasowy. Jeśli nadal nie działa, eskaluj do starszego inżyniera. Alert o niedziałającym operatorze płatności: przełącz na zapasowego operatora. Powiadom klientów o możliwym opóźnieniu. Monitoruj, aż główny operator wróci do działania. Alert o wolnej bazie danych: sprawdź pulę połączeń. Jeśli jest pełna, zwiększ ją. Sprawdź log zapytań. Zakończ wolne zapytania. Monitoruj.
Instrukcje zapobiegają panice. Jasne kroki zapobiegają błędom.
Najczęstsze pytania
Jak często sprawdzać panel operacyjny?
Stale w godzinach pracy. Jedna osoba obserwuje przez cały czas. Poza godzinami pracy obserwuje osoba na dyżurze. Dla systemów niekrytycznych sprawdzaj co godzinę. Dla systemów krytycznych (obsługa płatności, kasa) monitoruj stale. Określ, które systemy są krytyczne: takie, w których godzina przestoju kosztuje znaczący przychód. Resztę można sprawdzać co godzinę. Z kreatorem stron WEMASY możesz to ustawić bezpośrednio na swojej stronie.
Jaki czas odpowiedzi jest akceptowalny?
Dla kasy w sklepie internetowym: poniżej dwóch sekund. Dla strony marketingowej: poniżej trzech sekund. Dla wewnętrznych narzędzi administracyjnych: poniżej pięciu sekund. Przy wolniejszych cierpi konwersja lub doświadczenie użytkownika. Mierz z perspektywy użytkownika, a nie serwera. Jeśli użytkownik zauważa opóźnienie, jest ono za duże.
Jak uniknąć zmęczenia alertami?
Ścisłe progi. Alarmuj tylko przy prawdziwym problemie. Jeśli dostajesz dziesięć alertów dziennie, a dziewięć to fałszywe alarmy, ludzie przestają zwracać uwagę. Lepiej mieć dwa alerty dziennie, wszystkie prawdziwe. Dostrajaj progi zdecydowanie. Jeśli alert się uruchamia, a nie jest pilny, podnieś próg. Zmęczenie alertami zabija szybkość reakcji.
Czy panel operacyjny powinien być dostępny na telefonie?
Tak. Osoba na dyżurze musi móc go sprawdzić z dowolnego miejsca. Upewnij się, że działa na telefonie. Dyżurny może być z dala od biurka. Zoptymalizuj pod urządzenia mobilne. Duże elementy dotykowe. Prosty układ. Szybkie ładowanie nawet w sieci 4G.
Jak śledzić kondycję operacyjną w czasie?
Zapisuj wszystkie wskaźniki. Choć panel operacyjny działa w czasie rzeczywistym, zachowuj historię. Co tydzień przeglądaj: jak często nie działaliśmy, jak wolno działaliśmy, jakie były najczęstsze błędy. Używaj historii do wykrywania problemów systemowych. Przykład: jeśli masz trzy przekroczenia czasu operatora płatności tygodniowo, zbadaj operatora płatności. Nie poprzestawaj na zmianie progu alertu.
Co jeśli osoba na dyżurze nie wie, jak naprawić problem?
Miej ścieżkę eskalacji. Osoba na dyżurze reaguje jako pierwsza. Jeśli nie naprawi w pięć minut, eskaluje do starszego inżyniera. Starszy inżynier to drugi poziom. Jeśli żadne z nich nie naprawi, eskaluj do wsparcia dostawcy lub prezesa. Instrukcje powinny opisywać ścieżkę eskalacji dla każdego typu alertu.