ポストモーテム

こんにちは。プラットフォーム開発部 QA チームの hark です。今回は、この夏読んだ本のうち、以下の２冊について紹介しようと思います。 この夏に読んだ本から 1冊目は、会議本です。持ち回りで mtg のファシリを行う機会が定期的に発生していて、自分担当の場合は色々うまく回せていないなという反省もあり、手に取った本です。 すごい会議－短期間で会社が劇的に変わる！作者:大橋 禅太郎大和書房Amazon もう１冊は、Kindle Unlimited で偶然目にした本ですが、いつ自分がその立場になってもおかしくないと常に恐怖を感じていることもあり、即読みました。 失敗の科学作者:マシュー・サイドデ…

はじめに こんにちは、Engineering Officeアシスタントのちいです。 2023年9月14日(木)にファインディ社主催のLunchLT「ポストモーテムLT会！「SRE成熟度評価」「社内共有会」カルチャーを醸成するためにやったこと」に発表者としてEMのよこちゃんが登壇しました。 発表内容や登壇しての感想をテックブログでも公開させていただきます。 発表内容 よこちゃんのタイトルと発表資料は以下です。 ◾️タイトル「hacomonoでのポストモーテムの取り組み」 今回は、hacomonoが近年急成長する中でのインシデント対応について発表させていただきました。 hacomonoではインシデ…

『ポストモーテム みずほ銀行システム障害事後検証報告』（日経コンピュータ，日経 BP，2022年3月14日）を読了。 ランキング参加中読書 ポストモーテム（Postmortem）――。米国の IT 企業は，システム障害が発生した後に社内外の関係者と共有する事後検証報告書をそう呼ぶ。（位置 No. 2） ポストモーテムの意味を知っておく。 重要なのは，システム障害が発生しても業務を通常通りに続けられるレジリエンシー（復元性）を有していることだ。そのためには企業はシステム障害がどのようなものか理解し，そこから復元する術を身につけると共に，情報システムに対して実装していく必要がある。みずほ銀行のシス…

注意事項 この記事は、Notion AIに対して 問題と解決策の概要 例示用のコード を渡して生成した実験的な記事になります。 はじめに この記事では、おうちクラスタでの実体験をもとに、CoreDNSを削除してしまった際のリセット方法についてまとめます。 CoreDNSを削除してしまった 5月某日の深夜、筆者はおうちクラスタでの開発を行っていた際、CoreDNSをArgo CD管理下に置こうとし、「おうちクラスタやし壊れてもええやろ」という甘い考えで操作したことにより、CoreDNSが消えてしまったことに気づきました。 これにより、クラスタ内部の各Podから外部への通信や、サービス・Pod間の…

お久しぶりです。SREグループの菅原です。 おすすめのアイスはオハヨー乳業のBRULEEです。夏場は1日にアイスをいくつも食べてしまいました。もう末期ですね。 弊社ではポストモーテムをバックエンド(サーバーサイド+SRE)で運用して3年経ちました。2019年のSREチームを立ち上げ直後から導入しており、そこで作った運用ルールを基に現在も引き続き運用しております。今回は弊社のポストモーテムについて詳しくご紹介します。 目次 ポストモーテム導入で何を解決したかったのか？ 障害対応のドキュメントが単なる作業証跡だった 障害対応を率先して行うメンバーに偏りがあった システムの理解度に差が生まれがちだっ…

こんにちは。インフラエンジニアのsheep_san_whiteです。 障害を起こしてしまって、ポストモーテムを書いたことありますか？ 私はあります( • ̀ω•́ )ﾄﾞﾔｯ 社内ポストモーテム共有会について さて、リブセンスでは6月24日に「社内ポストモーテム共有会」を開催しました。 ポストモーテムを持ち寄って内容を振り返り、お焚き上げするという会です。 コロナ禍の中ではありますが、オンライン／オフライン混合のハイブリッドで開催しました。 ハイブリッド開催の様子撮影場所: WeWork東京ポートシティ竹芝 社内ポストモーテム共有会について 発表内容 Sがついてただけなのに シン・風桶〜nul…

ポストモーテム みずほ銀行システム障害 事後検証報告 作者:日経コンピュータ 日経BP Amazon みずほ銀行の2021年2月から2022年2月までに起きたシステム障害についてまとめた本。 ポストモーテムとはシステム障害が発生したあとに社内外に共有する事後検証報告書のことを指す。 業界は違えどシステムと関わる仕事をしてるので読んでよかったと思えた本。 個人的な本からの学び 失敗から学ぼう システム障害は起こるものと考える（高可用性と耐障害性大事） 障害が起きた時の復旧手順（問題検知から解決まで）をまとめるか、自動で復旧できることをテスト 本のメモ - １年以上記帳がない預金口座の紙の通帳を廃…

こんにちは。SREチームの吉澤です。最近はインフラコストマネジメントプロジェクトという新しいプロジェクトも兼務し、Cost Explorerとにらめっこする日々を過ごしています。これはANDPAD Advent Calendar 2024 6日目の記事です。 アンドパッドは、11/28(木)〜29(金)開催のCloudNative Days Winter 2024（CNDW2024）にブーススポンサーとして協賛しました！ 今回はアンドパッドブースの様子と、現地参加したメンバーによるおすすめセッションをご紹介します。これからCNDW2024の内容を追うぞ！という方は、ぜひご参考ください。 アンド…

韓国の非常戒厳「閣議を通じて解除」ユン大統領が会見で発表 | NHK 東急｢たまプラ｣と小田急｢新百合｣の共通点は？ 「戒厳令、効力失った」与党代表 韓国メディアも「150分で解除」 | 毎日新聞 「大韓民国憲法にこれ以上に強権的な緊急権は存在してません」韓国で戒厳令が宣布、戦争レベルの危機かと思ったら政権の支持率が危ういだけらしい 【速報】「非常戒厳」解除を求める決議案が韓国国会で可決された：時事ドットコム ITエンジニア2年目の女の子が泣いてるのを見かけて勢いでランチに誘ってしまった→「上司は指摘だけで具体的な修正方法を教えてくれずなぜなぜ分析しろと言う」 韓国大統領「非常戒厳」を宣布 国…

この記事はjsys Advent Calendar 2024 2日目の記事です。 adventar.org 導入 フースーヤと音MADの相性の良さに気づいて、最近フースーヤが好きになった。 アイキャッチ 買ったもの一覧 厳密には一覧ではないのだが、おおよそ一般に公開されても困らない買ったものを列挙する。 パックご飯 2年生になり、食事がパックご飯におかずを乗せて食べる形に安定してきた。 今の私の体はパックご飯5割、松屋4割、その他1割ぐらいで構成されていると思う。 カゴメ 野菜生活100 人間の身体には水分が必須なので、野菜生活の様々なフレーバーをローテートして飲んでいる。 飲んだことのあるフ…

www.atlassian.com 基準設定の背景と目的 背景 ポストモーテムの頻度を適切にコントロールするためには、全インシデントを対象とするのではなく、影響の大きさや再発リスクを基準にすることが重要です。この分類は、リソースを最も効果的に配分し、価値のある学びを得るために役立ちます。 目的 貴重な時間や人員を無駄にしない。 必要な学びや改善策を漏れなく収集。 チームの心理的安全性を守りつつ、実践的なプロセスを構築。 P3（軽微障害）でも例外的に実施するケース 通常はポストモーテムを実施しない軽微な障害（P3）でも、以下のようなケースでは実施を検討する価値があります。 再発リスクが高い場合:…

オライリーの「システム運用アンチパターン」を読んだので、要点をまとめておきます。 目次 DevOpsについて (1章) 承認について (2章) ログについて (3章) 可視化について (4章) テストについて (5章) アラートについて (6章) 自動化について (7章) リリースについて (8章) インシデントについて (9章) 情報の共有について (10章) 文化について (11章) タスクの優先度について (12章) DevOpsについて (1章) 1章では、DevOpsについて紹介されていました。 DevOpsは本書では「ソフトウェア開発の考え方をほかの役割に適用するような開発手法」と…

chatwork.connpass.com こちらのイベントに参加してきたので、会の様子と感想を書いていこうと思います。 会の概要 会の様子 Self-hosted runnersでAWSコスト削減？ スクラムチームのDevOpsを支えるプラットフォームエンジニアリング EKSとArgoRolloutで実現するChatworksの新リリースプロセス 運用監視設計をするときに考えること 会全体を通した感想 会の概要 実践DevOpsというタイトルにちなんで、開発運用の実践事例にまつわる発表を聞いていくイベントです。 会の様子 Self-hosted runnersでAWSコスト削減？ まずは古屋…

01 お探し物は図書室まで 10/1 02 ポストモーテム みずほ銀行システム障害事後検証報告 10/4 03 本好きの下剋上 第５部９ 10/13 04 夜は短し歩けよ乙女 10/14 05 食べ物で見つけた進化のふしぎ 06 ふしぎ駄菓子屋銭天堂６ 07 目的への抵抗 11/4 08 アンティーク弁天堂の内緒話 09 世界の納豆をめぐる探検 10 ふしぎ駄菓子屋銭天堂９ 11/16 11 マチルダは小さな大天才 11/19

こんにちは。Quality Assuranceグループで、Bill Oneの品質マネジャーをしている秋元真理子です。現在QAグループで取り組んでいる「ナラティブ文化」についてご紹介したいと思います。

今日（昨日）の発表資料ですスライドだと何も伝わらないですが、お気持ちだけ感じ取ってください#JapanTestCommunityhttps://t.co/bnj0Y00CXN— リナ？ (@____rina____) 2024年10月24日 japantestcommunity.connpass.com これで発表してきました。 資料はこちら speakerdeck.com 今回のテーマ 今回のお話を受けた後で、「品質文化」がテーマってききました。 品質文化・・・って何？ そしてさらにイベントページを見ると、実践方法について発表すると書いてある。 なるほど（わからん） ということで、リーディン…

【エンジニアの日常】エンジニア達の人生を変えた一冊 Part1では大変ご好評をいただきました。 今回はPart2としまして、弊社エンジニアの人生を変えた一冊をご紹介いたします。 ぜひ、読書の秋のお供としてご参考にしていただければ幸いです！ 人生を変えた一冊 SRE サイトリライアビリティエンジニアリング―Googleの信頼性を支えるエンジニアリングチーム プログラマが知るべき97のこと この本を読んだきっかけ Clint Shankさんのエッセイ「学び続ける姿勢」 Karianne Bergさんのエッセイ「コードを読む」 この本から学んだこと Clean Coder プロフェッショナルプログラ…

2024年6月28日、29日にファインディ株式会社が主催するイベント「開発生産性Conference 2024」が開催されました。本記事では、PagerDuty株式会社にてProduct Evangelistを務める草間 一人さんによるセッション「クラウドネイティブの本質から考える、生産性と信頼性の両立」の内容をお届けします。 ■プロフィール 草間 一人（くさま かずと） PagerDuty株式会社 Product Evangelist PagerDutyのEvangelistとして、PagerDutyプロダクトの普及と推進に携わるほか、自動化・インシデントコマンダー・Platform Eng…

こんにちは！TECH Street編集部です！ 2024年6月14日（金）に開催した、 「Ruby勉強会～各社の取り組みや課題から学ぶ会～」のイベントレポートをお届けします。今回は４社のエンジニアが集まり各社のRubyに関する事例や知見を発表しましたのでその様子をレポートいたします。 登壇者はこちらの方々！ 中野伸吾さん ／ 株式会社Asobica廣江 亮佑さん ／ 株式会社タイミー西尾 拓也(にっく)さん ／ オシロ株式会社栗山 友樹さん ／ 株式会社カカクコム 早速、内容を紹介いたします！ ErrorBoundaryを導入して 画面全体がエラーになることを防ぐ 導入に至った経緯 Error…