Imagine Learning が Opsgenie によってノイズを低減し、アラートによる疲弊を軽減

アラートによる疲弊のデメリット

Keith Smith 氏は DevOps 分野に長年携わった後、サイト信頼性エンジニア主任として Imagine Learning に入社しました。Smith 氏は、Opsgenie などのさまざまなインシデント監視ツールに精通していました。Imagine Learning には多くのツールが導入されていましたが、統合と効果的なアラート機能はありませんでした。

「(当時) オンコール チームはアラート メッセージをメールでしか受け取っていませんでした。これはひどい状況で、ノイズが相当ありました。私は毎晩午前 1 時に起きて、電話を確認してベッドに戻っていました。そこで、もっと良い方法があると提示しました」

すべてのノイズによって、アラートの意味がなくなり、実用的ではありませんでした。このプロセスは完全にリアクティブで、チームにはインシデント時に効率的にコミュニケーションを取る手段がありませんでした。

「サポートの問い合わせ件数が増加すると、問題が提示され、サポート担当者がその問題をエスカレーションしていました。しかし、それが唯一の一連のコミュニケーションでした。お客様から問題が発生したと伝えられた後に、修正していました」

信頼性の高いアラート機能

ノイズを低減するには、20 を超えるツールとアプリケーションを利用して Opsgenie の機能を管理し、その IT スタックと統合することが重要でした。

「ソースを OG に接続するたびに、Webhook だけでも、パスがあります」

Slack と Jira との緊密な統合によって、Imagine Learning のプロセスは自動化されました。Opsgenie では、ステータス ページが更新され、Jira チケットが作成され、Slack 通知が送信されて、適切なタイミングで適切な担当者に通知できます。