連載企画「卒業生訪問インタビュー」 第9回のゲストは、さくらインターネット株式会社の組織内研究所であるさくらインターネット研究所の上級研究員で、SRE （Site Reliability Engineering）の研究者としても活躍する 📷id:y_uuki さんこと、坪内佑樹さんです👩‍💻 #hatenatech developer.hatenastaff.com/entry/2024/05/…

＼ピックアップニュース／ Hatena Engineer Seminar #29 「障害対応編」をオンラインで開催しました #hatenatech developer.hatenastaff.com/entry/engineer… #エンジニア

3930 はてな 23億円 Hatena Engineer Seminar #29 「障害対応編」をオンラインで開催しました #hatenatech developer.hatenastaff.com/entry/engineer…

Hatena Engineer Seminar #29 「障害対応編」をオンラインで開催しました #hatenatech - Hatena Developer Blog IT企業技術ブログ等アンテナより developer.hatenastaff.com/entry/engineer…

Hatena Engineer Seminar #29 「障害対応編」をオンラインで開催しました #hatenatech - Hatena Developer Blog dlvr.it/T5zR53

Hatena Engineer Seminar #29 「障害対応編」をオンラインで開催しました #hatenatech - Hatena Developer Blog developer.hatenastaff.com/entry/engineer…

Mackerelの障害対応演習。ディレクター時代に、有給をとって昼から寿司屋で飲んでいたら、抜き打ち演習がスタートして、演習と思わずびっくりして寿司を途中で切り上げる、というディレクターの負荷試験が実施されたこともありました #hatenatech

ありがとうございました! そもそも暗黙知を減らすということを最後に考えていました。暗黙知から形式知にする、だけじゃなくて暗黙知とならない情報を増やすもそうだし、可観測性高めるなどもそうだな〜と #hatenatech

オブザーバビリティは OODA ループの最初の O で、そこから状況判断できるデータが出てないと何も判断や意思決定ができない。今まで障害対応してきた知見からより効果的な出力ができる #hatenatech

本日はHatena Engineer Seminar #29 にご参加いただきありがとうございました。宜しければアンケートフォームよりコメント・ご感想をお寄せくださいforms.gle/nYmdSJY895FXVb… 配信はアーカイブに残りますので見逃した方は HatenaTech チャンネルをチェックください youtube.com/@hatenatech3409 #hatenatech

SECIモデル、ググった限り障害対応の専門用語ではなさそう #hatenatech

暗黙知を暗黙知と気付けないといけなさそう #hatenatech

監視ルールのメモは、このアラートが出たら〜〜をしてください！という Runbook なので、ぜひ活用してください！ blog.arthur1.dev/entry/2023/12/… #hatenatech

遅れin Hatena Engineer Seminar #29 障害対応編 hatena.connpass.com/event/315447/ #hatenatech

障害ふりかえり、チーム横断でポストモーテム眺める会、チームごとのインフラ眺める会 (PWG) と、暗黙知を形式知に変えていく場が色々用意されている #hatenatech

形式知は近接項、暗黙知は遠隔項としてこれらを近付け関連させる作業がやっぱり演習という感じがする。自分たちの型を見つけるというのは繰り返しやらないとだなぁと改めて思った #hatenatech

形式知から分かったこと、考えたことは再び暗黙知になっているのでループする #hatenatech

早押しクイズ得意な人の背中見て育ったからなんか分かる #hatenatech

障害対応＝早押しクイズ説、まぁ分かるな……？（目の前に提示された問題に対して最短で回答したい！職人技であってはいけないともちろん考えていますが） #hatenatech

障害対応=早押しクイズ説（諸説ある #hatenatech

#hatenatech Mackerelも今や障害対応演習を定期的にやられているのはすばらしい。1人で全部の障害対応やってたころが懐かしい

マジで異常に Slack での状況連絡がスムーズになったの、演習の効果で凄かったです。 #hatenatech

【YouTube Live配信中】 ノベルチーム エンジニア id:polamjag による 障害対応を起点としたもっといい開発と運用のサイクル作りのためにできること　です ご視聴はこちらから！ youtube.com/watch?v=gEtN4e… 感想やコメントはお気軽に #hatenatech でお寄せ下さい🙌

障害対応演習の内容の公開、楽しみ！ #hatenatech

Runbook というのが、障害対応の手順なのかな？ #hatenatech

障害対応演習で古びたドキュメントが見つかるのはよくあるが、「ドキュメントに辿り着けないことが分かった」で改善できたのが特に良かった。 #hatenatech

実施担当者としてどこにログがあるのかを知っておくのは必要だし、指揮官や書記、コミュニケーション役の振る舞いは慣れが解決するものでもあるので、回数こなすのが良いよなー #hatenatech

苦しんだ方が印象に残る… わかる #hatenatech

「苦しんだ方が印象に残って次に素早く対応できる」 意地悪な問題を考える人の発想だ……（ぉ #hatenatech

インシデントコマンダー、経験のないメンバーでやろうとも思うけど難しいですよね。演習で初めてやって実際の障害時にコマンダーやったメンバーがいる、など実績があるか気になりました #hatenatech

本番の障害対応は収束させるためのものであり、学びの場ではない、そうですね。(最速復旧をとにかく優先したい) #hatenatech

障害=学びではなくてポストモーテムをしたりした結果として何を学んだかが重要ですもんね。障害から学びを得られるかどうかも個人によって違いそう #hatenatech

障害は必ず起きるものだが、障害対応に時間が掛かってエラーバジェットを消費してしまうと、勢いの良い開発ができなくなる。そうなりたくないので最短で対応したい。バジェットをどこで消費するかのバランスだ。 #hatenatech

Hatena Engineer Seminar #29 障害対応編 に参加を申し込みました！ hatena.connpass.com/event/315447/?… #hatenatech

Mackerel の障害対応演習の話だ。WEB+DB PRESS Vol.119 もよろしくお願いします gihyo.jp/magazine/wdpre… #hatenatech

過去の障害事例を知っている者が限られていることなど障害対応が属人化しており、休日でも対応せざるを得ない状況が発生していたけど、障害対応演習シナリオを用意して実施することでこれらの問題を解決できると思うと大変参考になる #hatenatech pic.twitter.com/WQU1BpIDCM

視聴中 #hatenatech

【YouTube Live配信中】 Mackerelチーム SRE id:heleeen による 障害対応をちょっとずつよくしていくための演習の作りかた　です ご視聴はこちらから！ youtube.com/watch?v=gEtN4e… 感想やコメントはお気軽に #hatenatech でお寄せ下さい🙌

演習にあわせてフロー作ったんかな？ 一石二鳥でよさそう。 #hatenatech

初回なのでしっかりみんなが自分ごととして考えられるようなインパクトのある事案のシミュレーションにする、というのは良いアプローチっぽい。「濃い経験ができた」というふりかえりが良い #hatenatech