CI/CD

前回の記事から間が空いてしまいました、SREのbutadoraです。 年末に向けた準備で忙しなくしているこの頃です。 今回はとある環境で実装したCI/CDのフローを紹介したいと思います。 今回のサービスアーキテクチャ 今回はPHP製WEBサービスをデプロイする環境が必要ということで、以下の様な設計としました。 WEBサービス本体 → ALB+ECS+RDS 定時バッチサービス → ECS (Task Scheduler)+RDS ファイル設置をトリガーにしたバッチサービス → S3+Lambda(コンテナイメージ)+RDS CI/CD 簡単な構成図はこんな感じです。 大きなポイントとしては、タ…

具体的な並列処理に関しては、会社ブログなどで公開するとは思いますが、GitHub Actionsで並列処理を作っていてヒヤッとした話を書いておきます。 TL; DR 1Workflowの合計時間ではなく、1Jobごとの時間でBillable timeを算出 10sec程度で終わるJobを100並列にすると、Workflowの合計時間が20分程度だとしてもBillable timeは100分になる Jobを変に並列化するとすぐに無料枠が消費される Action実行後すぐにBillable timeを見ても0なので、必ず時間をおいて確認する GitHub Actionsの課金について About …

はじめに 既存の A/B テスト管理基盤の課題 新規 A/B テスト管理基盤 方針 構成概要 Go 言語による A/B テスト管理基盤の作成 validation 機能の整備 A/B テストの定義コードの自動生成 private package として A/B テストの定義コードを公開 A/B テストの設定の履歴管理 まとめ はじめに こんにちは。Gunosy Tech Lab 所属の hyamamoto です。 今回は広告システムにおいて「A/B テストの管理基盤刷新とレポートの自動化」を行った話についてご紹介します。 基盤編と集計編の 2 部構成で、本記事では A/B テストの管理基盤の刷…

こんにちは。Xイノベーション本部ソフトウェアデザインセンターの陳です。 この記事では Next.js + TypeScript + Docker + GitHub Actionsの環境構築の方法をまとめます。 セットアップ手順 以下のセットアップを行います。 1. create-next-appでNext.jsのプロジェクトを作成 2. 静的分析ツールESLintの設定 3. コードフォーマッターPrettierの設定 4. テストフレームワークのJest、React Testing Libraryの設定 5. Dockerfileの作成 6. GitHub Actionsを利用したビルド、テ…

renovate導入したらそこはゴールではなくスタート地点だった 先日 ライブラリ自動更新に renovate を導入したときの状況をご紹介しました。 techblog.ap-com.co.jp やはり数日で、「ここはちょっと変えたいな」というところが出てきました。 今回はその対応内容についてご紹介したいと思います。 起きたこと 内部依存関係のライブラリバージョンがダウングレードしてしまう 毎日実行は頻度が多すぎる 実行内容調整 内部依存ライブラリバージョンがダウングレードしてしまう rxjs 7を使っているプロジェクトがあるのですが、そこでrenovateを実行すると、内部依存関係にある r…

renovate導入の話 みなさんはアプリケーションで使用しているライブラリ等の更新どうされていますか？ 手動で行われていますか？それとも何か自動ツールを利用されていますか？ 今回はそうしたライブラリ等の自動更新ツールであるrenovateを導入したときの 模様をお伝えしたいと思います。 といっても、インストールなどの方法は様々なところで紹介されているので省略し、導入過程でどういった状況になったかという ところをお伝えしたいと思います。 最初の実行 いくつかアプリケーションを開発していますが、まずは最初に Typescript / Node.js / NestJS を技術要素とするアプリケーシ…

こんにちは、かたいなかです。 最近、転職会議のCI/CD基盤をFluxベースのものからArgoCDベースのものに式年遷宮しました。今回の記事では、新しいArgoCDでのCI/CD基盤について、作り直しに至った経緯や改善点をご紹介します。 ArgoCD移行に至った経緯 転職会議では、以前の記事でも紹介したFluxというGitOpsのツールを使用してGitOpsを実現していました。 made.livesense.co.jp しかし、その後FluxからFlux2への移行が公式から推奨されるようになった後も、Flux2やArgoCD Image Updaterへの移行ができない状態が長く続いていました…

この記事は AWS Community Builders Advent Calendar 2022 7 日目の記事です。 ※AWS Community Buildersについてはこちらをご覧ください。 aws.amazon.com こんにちは、運用管理サービスのマネージャーを担当している尾谷です。 プライベートでは JAWS-UG 初心者支部に所属しておりまして、ハンズオン資料を作ったりしています。 今日は、re:Invent 2022 の Workshop セッション NET308 で CloudWatch ダッシュボードに可能性を感じたというエピソードを投稿したいと思います。 re:Inv…

こんにちは! スケールアーキテクトチームの@shgx です。 今回はAWSのSQS（Simple Queue Service）を使って処理をキューイングするシステムを構築してみた話になります。 そもそもキューイングって何なのか？とか言うところもあるかもしれないと思うので、それも含めて最初に軽く説明したいと思います。 キューイングと長所・短所について 「キューイング」は「待ち行列」という意味で、一個一個処理を貯めていってそれらを任意のタイミング(非同期)で順次処理する、という形を実現してくれるシステムです。 こんな感じで、1,2,3,4という順番で箱に詰めていって1,2,3,4と取り出すような処…

はじめに この記事では、「継続的インテグレーション（CI）実践のポイント」について書いています。 DevOps勉強の中の一つとして継続的インテグレーションについて調べ記事に書いてみました。 自分に向けた備忘録でもありますが、「継続的インテグレーション（CI）は何に気を付けて実践すれば良いのか知りたい」な人の一助になれば嬉しいです。 本文 メインラインに頻繁にコミットする メインライン = メインブランチ、トランク。ブランチの作成元のこと。 自動ビルドの環境を構築しても、頻繁にコミット/マージする文化がなければ、何の役にも立たない 仮に開発者が3週間コミット/マージをせず、そしてコミット/マージ…

これは Livesense Advent Calendar 2022 DAY 5 の記事です。 こんにちは、かたいなかです。 7月にリブセンスに復帰してからもうすぐ半年になります。出戻りにも関わらず暖かく迎えていただき、この半年間楽しく仕事をすることができました。 この半年どのような仕事をしたかを記事にすることでアドベントカレンダーの5日目の記事とさせていただきます。 TL;DR なぜ戻ってきたのか この半年やった主な仕事 インフラグループのSREとして 転職会議のArgo CD移行 プレビュー環境検討とAWS Dev Day 2022 Japan 登壇 マッハバイトのクラウド移行（進行中） …

（Qiita Advent Calendar - GCP(Google Cloud Platform) Advent Calendar 2022 の 5 日目の記事です） Google Cloud が提供している Managed Anthos Service Mesh（以下、Managed ASM）は、Istio をベースとしたサービスメッシュのマネージドサービスです。 最近は、Managed Data Plane という Istio-proxy の自動アップグレードオプションも登場してきています。 今回は、Managed ASM や Managed Data Plane がどのようにバージョ…

はじめに この記事では、「GitHub ActionsでRustを複数環境でビルドする方法」について書いています。 RustプロジェクトをGitHub Actionsを使って良い感じにCI/CD出来るようにしたいと考え、色々試行錯誤した中でのこと（その中で今回はRustを複数環境（例えばWindows用とLinux用で、等）でビルドする）を記事にしました。 自分に向けた備忘録でもありますが、「GitHub ActionsでRustを複数環境（LinuxやWindowsなど）でビルドしたい」な人の一助になれば嬉しいです。 本題 早速ですが、Rustを複数環境（LinuxやWindowsなど）でビ…

こんにちは、SREチームの山口（@yamaguchi_tk）です。AWSに関わり始めて3年半くらいです。 今年1月にJOINして、気づけばセキュリティ系のタスクばっかりやってました。 こちらの記事はGunosy Advent Calendar 2022の4日目の記事です。 前回の記事は suchida さんの M1 Mac に挫けない！TensorFlow に躓かない開発環境をつくるでした。 はじめに Security-JAWS#27*1でAWS Security Hubを運用に載せるまでの話をした内容のまとめです。 動画 www.youtube.com 資料 目次 はじめに 動画 資料 目次…

ツイート Poliphilos @poliphilos_jp 月1100円払って時事通信の報道関係者向けの速報が読める「VIP速報」、何とは言わないけど絶対名前変えた方がいいよ https://twitter.com/poliphilos_jp/status/1598631460193411077/photo/1 08:03 Ken Ide @k1dee 国税の“Pay払い”きょうスタート Amazonギフト券も利用可能 - ITmedia NEWS https://www.itmedia.co.jp/news/articles/2212/01/news181.html 08:05 Ken I…

これは フェンリル デザインとテクノロジー Advent Calendar 2022 2日目の記事です。 GIMLE チームの野田です。 GIMLE では、お客様によるクラウドサービスを活用したビジネスの推進を支援しています。 この記事では、以前お客様が DevOps 領域で抱えていた課題を題材に、クラウドサービスを活用して解決する方法を紹介します。 背景 アプリケーションのコードを変更し、すぐにビルド・テスト・デプロイできるようにする CI/CD は、ビジネスニーズに即したサービスを提供し続ける上で、もはや必須とも言える開発技法です。 AWS では、AWS CodeCommit・AWS Co…

新卒入社としてサイボウズ生産性向上チームにジョインしました はじめに 2022年4月にサイボウズに新卒入社した @r4mimu です。 新卒史上2人目の生産性向上チームへのジョインした2022年の自分の心境を書き残しておきます。 この記事は Cybozu Advent Calendar 2022 の 2 日目の記事です 🎅 生産性向上チームとは 自分の所属する生産性向上チームは主に以下のような業務を行っています。 チームを横断した開発効率を高める基盤の整備 開発チームの業務の自動化や効率化の支援 最新技術のキャッチアップ・共有 毎週水曜日に Productivity Weekly という「1 …

「死神は日本やったな」サッカー日本代表『死の組』でドイツとスペインを破って1位通過という漫画でもボツにされそうな展開に 【W杯】日本はスペインに逆転勝利で1位通過決定！堂安同点弾＆田中碧決勝弾で大金星 : 【悲報】「雀魂×咲-saki-」の広告に嫌疑を表明した元議員、尾辻かな子氏「掲載企業は私への殺害予告の責任を取れ」 ［速報］AWS上で開発環境一式、フレームワーク、初期コード、IDE、ビルド環境、CI/CDなど提供する「Amazon CodeCatalyst」発表。AWS re:Invent 2022 サッカーワールドカップ 日本対スペイン戦 日本が決勝T進出決定 | NHK Colabo、…

この記事は クラウドワークス Advent Calendar 2022 の 2日目の記事です。 こんにちは。crowdworks.jp の SRE チームに所属している高橋です。 この記事では crowdworks.jp の SRE チームが2022年にやったことを記載していきます。やっていることは色々で、まとまりはありませんが、そこら辺はご容赦ください。