SRE

エムスリーエンジニアリンググループSREチームの山本です。 私はエムスリーに入社してまだ1年少しなのですが、前職でも似たような職務を担当していました。 その中で、実は「インフラのあり方」には二大潮流が存在し、その中で皆が苦しみもがいているのではないだろうか？と感じました。前職や現職で感じたアレコレをエッセーのように軽い読み物にしますので、SREブログリレー二日目のネタとして書かせてください なお、文字だけでは書きたいことが足りぬため、私が直々に画伯として挿絵も描いてしまいます。 ちなみに「麻雀に例えたら」と書きましたが、実は私は麻雀のルールをほとんどしりません。某有名麻雀劇画の作者はルールを知…

こんにちは！SREチームの松嶋です。 こちらは「dely #2 Advent Calendar 2020」の20日目の記事です。 adventar.org delyのアドベントカレンダーは#1もあるので、こちらもぜひ。 adventar.org 昨日は、maseoさんの「Google Optimizeでテストをしてる話」という記事でした。A/BテストでGoogle Optimizeを導入するか検討しているフロントエンジニアの皆さんはぜひ読んでみてください！ tech.trilltrill.jp はじめに 私は昨年の11月にdelyへ入社しましたが、もう既に1年が過ぎてしまいました。体感的にまだ…

ここで話すこと ここで話さないこと SRE/DevOps/Kubernetesをテーマにブログを書き始めた理由 気をつけていること オススメWebページ7選 The Blameless Blog Netflix Technology Blog Facebook Engineering Datadog blog The GitHub Blog Julia Evans The Kubernetes Podcast from Google ブログによる変化 反響 やってみて思ったこと 異動による変化(2020年4月) コミュニティー活動による変化 今後の目標＆告知

こんにちは！初めまして！delySREの中鉢です。 今年の10月にjoinしたばかりで、今は主にクラシルのインフラ基盤拡充を行っています。 本記事はdely #1 Advent Calendarの12日目の記事です。熱量が伝わる素晴らしい記事ばかりで戦々恐々ですが、がんばって書いていこうと思います。 昨日はサーバサイドエンジニアのYuji Takahashiさんの"DynamoDBでサポートされたPartiQLをRubySDKで利用する"でした。 tech.dely.jp PartiQLでSQLライクにいじれるようになって、より手軽にDynamoのデータを取れるようになりましたね。アナウンスさ…

この記事は Akerun Advent Calendar 2020 - Qiita の 7 日目の記事です。 はじめまして。わたくしは 2020 年 10 月にできたての SRE チームに入社しました。 ベンチャー企業に転職すると、自由とともに多くのやるべくことに溢れ、目先のことに翻弄されがちです。 そのような中でも、何とかしたいけど何からやればいいか困っているという皆様にお役に立てば幸いです。 この記事では、２ヶ月間で実施して効果があった３つの施策を紹介させていただきます。 当施策は、AWS クラウド環境を前提としていますのでご了承ください。 何からやるか？ 困っていることをヒアリングし、課…

こんにちわ。id:cw-tomitaです。 この記事は、Chatwork Advent Calendar 2020 - Qiita の3日目の記事です。 早速ですが、皆さんはauto incrementなRDBのtableのidにはどのような型を利用されていますか？ Chatworkでは多くのテーブルでint型が指定されているのですが、９年前にサービスを開始した時には想像もつかないくらいに多くのお客様に使っていただけるサービスへと成長した結果、int型なauto incrementのidを利用しているテーブルで、レコード数がintの上限を迎えそうなテーブルが複数現れ、どかっとまとめてALTER…

一般的なDBのテーブルのことをMongoDBではコレクションと呼びます。 下のグラフはコレクションごとのキャッシュメモリの利用状況（１週間分）です。毎日同じ時間に特定のコレクションのメモリ使用率が増えていることがわかります。キャッシュメモリの上限は一定なので、どこかで使う量が増えればほかのコレクションが使える量が減ります。

Quipperでは4つのMongoDBクラスター（国内2＆グローバル2）を本番環境で運用しています。 これまでに幾度も壁にぶつかりながら培ったMongoDBのチューニングの事例を紹介します。 メモリの大きいインスタンスを使う I/O性能を最高にする WiredTigerのキャッシュ割当をサーバメモリの70%まで引き上げる WiredTigerのTickets数を増やす はじめに 本記事で書かないこと クエリのチューニング AWS, MongoDB Cloud Manager, MongoDB Atlasのサービスの説明 Replica SetやSharded Clusterの解説 解説はMon…

著者 坪内 佑樹(*1), 鶴田 博文(*1), 古川 雅大(*2) 所属 (*1) さくらインターネット株式会社 さくらインターネット研究所、(*2) 株式会社はてな 研究会 第7回Webシステムアーキテクチャ研究会 2010年代のクラウド技術であるコンテナオーケストレーション、サーバーレス、マイクロサービス、さらにはエッジコンピューティングなどの普及により、分散システムとしての複雑度が高まっている。このまま複雑度が高まっていくと、人手によるルールベースの運用にいずれは限界が訪れるのではないかと考えている。そこで、最近は、このようなクラウドを中心とするSRE分野の課題に対して、機械学習やその…

ツイート k.bigwheel⌨️🦀🖊️ SREエンジニア@Speee株式会社 @k_bigwheel halberd、一応ハンダは終わったけどLED光らなかったりキーが反応しなかったりするので来週末また修正だなあ。 22:38 k.bigwheel⌨️🦀🖊️ SREエンジニア@Speee株式会社 @k_bigwheel halberd、表面実装ダイオードが10倍簡単に思えるほど難しい。 20:07 k.bigwheel⌨️🦀🖊️ SREエンジニア@Speee株式会社 @k_bigwheel 今までで1番苦労しながらhalberdの難所を突破。 https://twitter.com/k_bi…

3:00->14:30だいぶ前にNISAをつみたてNISAに切り替えていたんだけど、すぐに切り替わるわけではないのでしばらく忘れていたところ、今年の1月でしっかり切り替わっており積立設定が止まっていた。 なんか細かく色んな投信買ってたけど（調整する支援機能がある）、つみたてNISAにしたらそのへんの機能が死んだので結局他の会社で買ってる株式投信を設定した。 まだ今年の取引初めてないし会社移動して一本化するのもアリだけどもう月半ばだしめんどくせ〜って気持ちのほうが強い。複数の会社で投信やってるのも試行錯誤した過去の経緯が色々ある。SRE31章以降を読み切った。最初はそういう進んだ会社のプラクティ…

k8sについて全然知識がなかったのでとりあえず読んだ。実務で使う前にもう一回サラッと読んでもよさそう。k8sクラスタ上で動くシステムの概形を掴んでいればあとはコマンドを覚えるだけだからそれは実際に使う時に使えるようになればよいはず。 全体的な感想 k8sの概要をザッと知りたい時に便利だと思う。結構細かいコマンドが書かれているのである程度k8sを使ったことある人間にも身になることが多そう。しかしこの本の原著が書かれたのが2017年で結構時間が経っているので、意図したように動かないコマンドが多かった。手を動かしながら学ぶには別のネット上にあるリソースを使うほうがよい。 1章 Kubernetes …

ツイート k.bigwheel⌨️🦀🖊️ SREエンジニア@Speee株式会社 @k_bigwheel もろもろ面倒になってついにはんだごてをPCデスクに出しっぱなしにし始めた。 23:09 k.bigwheel⌨️🦀🖊️ SREエンジニア@Speee株式会社 @k_bigwheel 2Uって意外とないねんな。 https://twitter.com/k_bigwheel/status/1350444153792991233/photo/1 23:05 k.bigwheel⌨️🦀🖊️ SREエンジニア@Speee株式会社 @k_bigwheel @mtei なるほど、betaとそうではないのが…

ツイート k.bigwheel⌨️🦀🖊️ SREエンジニア@Speee株式会社 @k_bigwheel [GB] MBK Legend を遊舎工房で購入しました！ #自作キーボード https://yushakobo.jp/shop/gb-mbk-legend/ @yushakoboより 23:26 k.bigwheel⌨️🦀🖊️ SREエンジニア@Speee株式会社 @k_bigwheel ちなみに黒ばかりも何なのでということで白を頼んでみたけどこれは微妙だった感じある。黒と半分ずつ頼んで市松模様かシマウマみたいにしたら良かったかもしれない。 23:05 k.bigwheel⌨️🦀🖊️ SR…

この記事はエムスリー SRE がお届けするブログリレーの4日目です。 こんにちは。マルチデバイスチームでチーム内SREを担当している大和です。 普段はアプリ向けのAPIサーバについてJava/KotlinおよびTerraformでアプリとインフラを構築しています。 Terraformあるあるだと思うのですが、ときどき意図しないdiffが出てきてドキドキすることがあります。 今回は解決のために terraform-provider-aws のコードを読んでdiffが出てきた原因を確認した例について、簡単に紹介したいと思います。 (チーム内SREについては次の記事に説明があります: SREの民主化…

こんにちは。SRE部の横田・秋田です。普段はZOZOTOWNのリプレイスや運用に携わっています。 私たちは2020年11月13日から14日にかけてフル・オンラインで開催されたHardening 2020 H3DXに参加しました。本記事では、過去にオフライン開催のHardening Projectに参加経験のある秋田と、今回が初のHardening Project参加となった横田の体験を振り返り、「サービスを守る訓練」の重要性を再確認してみます。 Hardening 2020 H3DXについて WASForum Hardening Projectにより開催されたイベントです。 Hardening…

もう年も開けて半月経とうかという今日このごろ。1年の4%も経過しちゃってますが書きます。 去年の振り返りはこちら tech.kusuwada.com 2020年は皆さん少なからずそうだったと思うのですが、色々の予定が大幅に変わりました。我々家族はそもそも海外にいる予定でしたし、私は育休をずっと延長する作戦でした。コロナの影響もあり、4月に海外に行く予定が5月、6月に延期、そして消滅しました。そして私は7月に復職。 去年も言ってた。 先のことはわからない〜₍₍ (ง ˙ω˙)ว ⁾⁾なので、今の自分が一番いいと思う・やりたいことを精一杯やっていければと思います。 わたしえらい。そのとおりだ。今年…

こんにちは！エンジニアリンググループ、コア SRE の平岡です。 この記事はエムスリー SRE がお届けするブログリレーの3日目です。 エムスリーでは現在、クラウドプラットフォームとして AWS と GCP を採用しています。プロダクトを開発している各チームには、そのプロダクトを適切に実装できるプラットフォームを自由に選んでもらっています。 そんな中、エムスリーではここ数年、 SRE の役割をプロダクト開発チームに分散・移譲する取り組みを進めています（リレーの前記事にあった「チームSRE」の体制づくりです）。その結果、プロダクトの開発に伴うインフラ構築・管理のほとんどが各チームに一任されるよう…

あけましておめでとうございます！ SRE を担当している多田です(@tada_infra). re:Invent 中に Aurora MySQL 5.6 から 5.7 へアップグレードすることが容易になるアップデートが出るアナウンスがあり,業務で担当しているデータベースは MySQL 5.6 なので期待していたら遂に出ました! MySQL のバージョンの追随をしていきたいと思っており,スナップショットからの復元不要かつデータベースのデータを移行したりが不要でアップグレードできるんじゃないかと期待していたので, Aurora MySQL の in-place upgrades 機能を試してみまし…

SRE部 佐竹です。 re:Invent2020 から、取りこぼしていました重要なアップデートについて記載します。 はじめに st1, sc1 について振り返る st1, sc1 のアップデート 注意点 縮小はできない 利用料に関して まとめ はじめに 以下の通り、AWSの公式サイトにおいて2020年12月11日にアナウンスがありました。 aws.amazon.com 内容は、EC2 インスタンスにアタッチして利用する EBS ボリュームのボリュームタイプ st1, sc1 の最低作成可能容量が 500 GiBから 125 GiBに減少したというものです。 st1, sc1 について振り返る …