SRE

Puppeteer を用いた web スクレイピングアプリケーションの起動中に CPU/memory 使用量が荒ぶるので何とかしたいなあと思って最近対策を考えています Puppeteer は内部で Chrome (Chromium) を起動しているので、スクレイピングのロジック部分と Chrome を分離すればリソース割り当てがやりやすくなりそうなので挑戦してみます 書いたコードはこちら↓*1 github.com 実験台 ここに Puppeteer を使った適当なアプリケーションがあります（Puppeteer 公式サイトのサンプルをコピペしてちょっと手を加えたもの） # index.ts i…

SREチーム（新卒）の市川恭佑です。 Google Cloud が主催するオンライン形式のイベント Innovators Live Japan につきまして、この度、3月9日（木）開催のウェビナー「実録！SRE」の1コーナーを担当することになりました。 cloudonair.withgoogle.com 最年少なのに何故かトリですが、たぶん特別な理由はないので、リラックスして当日を迎えたいと思っています。 発表概要 タイトルは「SRE の目的に立ち返った Infrastructure as Code の再考察」というものです。 イベントの紹介ページには書かれていない背景の補足も含めて、発表内容…

技術広報のsyoneshinです。 いつもラクスエンジニアブログをお読みいただき、ありがとうございます！ 先日(2022/12/7)開催のラクスMeetup。 今回は、 インフラ・CI/CD・自動化 をテーマに開催！ 業務課題のカイゼン/効率化を目指すインフラエンジニアが登壇し取り組みをご紹介しました。 なお、本イベントは以下のような方にオススメとなっております。 ・ラクスのインフラに関する取り組みについて知りたい方 ・SaaS企業のCI/CD, GitOps等の最新事例が気になる方 ・レガシーシステムの改善事例を聞きたい方 ・自動化システムの継続運用にお悩みの方 ・システムを安全に運用するた…

SREチーム(新卒)の市川恭佑です。これはカヤックSRE連載の2月号です。 よく見ると投稿日が3月になっていますが、どちらかと言うと2月が28日までしかない方に問題があるので、大丈夫です。(何が？) ということで、2023年も滑り出し好調のカヤックSRE連載ですが、前回の記事ではCircleCIからGoogle CloudにOIDCでアクセスする方法について、 ちゃんと動く(はずの)ソースコードをサクッと紹介いたしました。 techblog.kayac.com さて、Google CloudとCircleCIをお使いの皆様、もうOIDC対応は完了しましたか？ 安心してください。私のプロジェクト…

背景 こんにちは、キュービックでSREをやっているYuhta28です。キュービック内のテック技術について発信します。 Datadogに移行してから数ヶ月が経ちました。メディアサーバーへのエージェント導入や外形監視設定など一通り完了し今の所運用できていますが、しばらくして課題が出てきました。 ログストレージコスト増加 Datadogのログ料金はログの保持期間、量によって変わる従量課金制1です。弊社は15日間の保持期間で契約していて、それより古いログはAmazon S3にアーカイブされる運用にしています。 アーキテクチャ図 アーキテクチャ図 以前の記事でも書いたとおりDatadogへのログ転送はO…

はじめまして、エス・エム・エスでSREとして介護事業者向け経営支援サービス「カイポケ」の開発・運用に携わっている小笠原です。 2022年10月に入社してしばらく働くなかで組織やプロダクト開発の状況がある程度見えてきたので、入社エントリを兼ねて自身の所属するチームや仕事について紹介します。 内容は現在のスナップショットにはなりますが、中で働いている人や組織の雰囲気、向き合っている課題について今後入社を検討される方の参考になると嬉しいです。 入社までにやってきたこと 先に自身の経歴について紹介しますと、情報系の大学院を出て2017年からIT業界で働き始めて今年で6年目です。ポジション的にはいわゆる…

こんにちはSREの三橋です！ 本日はRedashのアプリケーションログをNew Relicダッシュボードでいい感じに可視化することができたため、その内容とチャート作成の過程について記載いたします。 はじめに 背景 想定する読者 完成したダッシュボード 利用したNew Relicの新NRQL関数および新機能 aparse()関数 テンプレート変数 ヤプリにおけるRedash構成 ログ仕様確認の手順 ダッシュボード構成チャート クエリID別実行頻度 ジョブ別実行時間 クエリ実行数と実行完了数 ジョブ登録数 任意のクエリID調査用のログテーブル まとめ はじめに 背景 ヤプリでは障害調査やデータ分析…

今回はPodについて勉強していこうと思います。 DevOpsやMLOps、SREなどの肩書を持っている方であれば仕事で使用しているので理解がある方が多いかと思いますが、 他のエンジニアはPodという単語をなんとなく知っているくらいかと思います。 kubernetesを使用していくとも、AWSやGCPの公式ドキュメントではたびたび使用されているような単語ですね。 kubernetesを使用しているクラウドサービスを運用していればもちろん理解しておけなければならないでしょう。 Pod とは？ Podとは、同じ実行環境上で動くアプリケーションコンテナとストレージボリュームの集まりのことです。 Kub…

Overview エムスリーエンジニアリンググループ AI・機械学習チームでソフトウェアエンジニアをしている中村(po3rin) です。検索とGoが好きです。 AI・機械学習チームでは開発の効率化のため、プロジェクトの雛形を自動的に生成するcookiecutterのプロジェクトtemplateを利用しています。下記はAPI開発で利用しているcookiecutterプロジェクトtemplateについての記事です。 www.m3tech.blog しかし、templateから作成したプロジェクトはtemplateが新しくなった場合に、その変更に追従するのが困難になります。そこで、今回はcruftと…

こんにちは、リンクアンドモチベーション SREグループの久原です。今回は2記事 (プロセス編・実践編) にわたって、障害解析経験の浅い初心者に向けた障害解析の実践方法についてお話しようと思います。 この記事は上記の第2弾、「〜実践編〜」です。 第1弾の記事は「〜プロセス編〜」になりますので、よければ合わせて読んで頂けると幸いです。 目的 障害解析に慣れていなくとも「障害っぽいんですけど、ちょっと分からないので解析してもらって良いですか？」と言われたときに何から着手すれば良いかが分かる そこまで解析対象のアーキテクチャに詳しくなくとも、時間をかければ問題の特定を独力で完了できる 障害解析の実践方…

こんにちは、リンクアンドモチベーション SREグループの久原です。今回は2記事 (プロセス編・実践編) にわたって、障害解析経験の浅い初心者に向けた障害解析の実践方法についてお話しようと思います。 この記事は上記の第一弾、「 〜プロセス編〜」です。 第二弾の記事は「〜実践編〜」になりますので、よければ合わせて読んで頂けると幸いです。 目的 WEBアプリケーション開発やその保守運用をしていると、トラブルやインシデントの対応はつきものです。 しかし、特に障害原因の解析フェーズにおいては緊急性が高かったりケース・バイ・ケースであったりすることが多く、標準化された考え方やフローといったものはあまり確立…

はじめに NWコンフィグの設定状況 NWコンフィグの自動取得 NTPの設定が機器ごとによって異なる NTPの設定の自動化 Ansibleを用いたNTPの設定 AWXを使用したワークフロー設定 まとめ はじめに こんにちは、SREの井上です。 本記事は、Ansibleを使用してNW機器のNetwork Time Protocol（NTP）の設定を統一した事例紹介です。以前の記事の続きになっています。 creators.oisix.co.jp NWコンフィグの設定状況 NWコンフィグの自動取得 Oisix ra daichi Inc.は、数百台のNW機器によって支えられており、NWチームによって管…

YAPC::Kyoto 2023スタッフの朝は, 早い─— 技術王者papix (ChatGPT評) (@__papix__) 2023年3月18日 YAPC::Kyotoのここがすごい— 八雲アナグラ (@AnaTofuZ) 2023年3月18日 #yapcjapan 朝やん pic.twitter.com/2e0QsjOq2C— 技術王者papix (ChatGPT評) (@__papix__) 2023年3月18日 #yapcjapan pic.twitter.com/dRUfLeTDj4— mzc (@mazco_dx) 2023年3月18日 #yapcjapan #yapcgyudo…