こんにちは、プロダクト開発部の藤田です。 今回は Amazon ECS(以下、ECS) と AWS Step Functions(以下、Step Functions) を組み合わせた「ワンショットタスクの実行基盤」についてご紹介します。 「ワンショットタスク」とは、指定されたコマンドやスクリプトを1度だけ実行して、終了するタスクのことです。 このようなワンショットタスクは「プライベートネットワークの内側にあるリソースへのアクセスが必要な、非定型的な操作」を実行する際などに用いられます。 例えば、プライベートネットワークの内側にある DB に対して、以下のような作業をエンジニアが実施する際に、s…

はじめに エブリーでソフトウェアエンジニアをしている本丸です。 DELISH KITCHENでカナリアリリースの仕組みを作成したので、今回はそのことについて紹介させていただこうかと思います。 カナリアリリースとは カナリアリリースとは、一度に全体に公開するのではなく、最初は一部のユーザーに限定して公開を行い、問題がなければ全体に公開していくリリースの方法です。 カナリアリリースを行うメリットとしては、本番環境で影響範囲は狭めて動作確認ができることや問題が発生した場合にリリース前のサーバに切り戻ししやすいことなどが挙げられます。 やったこと 概要 ECSのserviceを2つ用意しておき、片方の…

lambda から ECS を実行する方法をメモします。 設定 ECS 環境変数 コード 設定 ECS a1026302.hatenablog.com 環境変数 キー 値 備考 AWSVPC_CONF_SECURITY_GROUPS sg-xxxxxxxxxxxxx AWSVPCの設定 AWSVPC_CONF_SUBNETS subnet-xxxxxxxxxxxxx AWSVPCの設定 ECS_CLUSTER sample-ecs-dev ECSのクラスター名 TASK_DEFINITION_ARN arn:aws:ecs:ap-northeast-1:xxxxx:task-definitio…

複数環境（本番、検証、開発）でECS on Fargateを構築した際にDockerfileを共通化した備忘録です。 前提情報 各環境は別々のAWSアカウント ECSのタスク内は「Nginx」と「SpringBoot」のコンテナで連携 本記事の共通化対象は「SpringBoot」のコンテナで利用するDockerfile 手順 buildspec.yml内のdocker buildするところでDockerfileに引数を渡すことで共通化できます。 例）Javaのメモリ割り当てのところを共通化する １、パラメータストアにメモリの初期値と最大値を設定する メモリ初期値のキー名：/web/java-m…

「Trivy」を使用して、AWS CDKレイヤーでコンテナイメージのスキャンを行うConstructライブラリをConstruct Hubに公開しました。

こんにちは、ペイルドの大竹です。 今回は外部サーバーと通信を行っているEC2インスタンスをECS on Fargateに移行した話をしたいと思います。 移行する前は以下のような構成となっていました。 背景 EC2インスタンスの運用にて以下の課題がありました。 弊社ではPCI DSS準拠等の理由により、EC2インスタンスへのログインできる人・場所を制限し、ログインには申請が必要となっている パッケージ・カーネルの脆弱性対応等の定期運用が属人化している 制限された場所からのみアクセスが可能なため、急に手動対応が必要になった場合、迅速に対応できない可能性がある PCI DSSの要件でユーザーの管理・…

1. はじめに こんにちは、SWEのあかりです。 今回のテーマは、SRE NEXT 2023のCall For Proposals（CFP） に応募したものの、残念ながら不採択になってしまったものです。話せるネタとしてはまとまっていたので、テックブログとしてここに捧げます😇 2. 本記事の概要 社内で最も古くから稼働している施工管理アプリでは、主にデータ修正と有事の際のログイン環境として開発者向けのEC2インスタンス（以降、「バッチサーバ」と表現）が存在していました。この記事では、このバッチサーバの廃止1を目的として、このサーバが担っていた役割をサーバレス環境・コンテナ環境へ移行し、EC2イン…

はじめに 最近コンテナをプロジェクトで使う機会も増えてきましたが、コンテナのセキュリティ対策で悩むことも多いのではないでしょうか。 今回はPalo Alt NetworksのPrisma Cloudを導入する機会がありましたので、Prisma CloudでAWS Fargateのコンテナランタイムの保護する際の設定と使い勝手をご紹介致します。 構成 AWS構成 今回は、AWS上に以下のような構成で構築します。 ランタイムを保護する対象はPHPコンテナで、Prisma CloudのDefenderコンテナがPHPコンテナの動作を監視してくれます。 コンテナ定義 Prisma CloudのDefe…

こんにちは、外側広筋を発達させたいインフラエンジニアのhogeです。本記事はiimonアドベントカレンダー3日目の記事となります。 はじめに Stale While Revalidateとは 検証環境 Next.jsの実装 Cloudfront側の設定 動作確認 レスポンスを確認してみる 以下は雑談です 本当はApp Routerでやりたかった Lambda@Edgeでレスポンスにヘッダーを付与することもできるけどどうなんだろう CDNでstale while revalidateをするメリット まとめ その他参考 最後に はじめに ISRを使うことで、動的なコンテンツを含むページも静的ページ…

ザファ公開1周年ありがとうございます！ ＆再上映決定おめでとうございまーす！！ えー、１周年記念トークの配信画面が、 すっごい仕事っぽかったですけども （業務のミーティングをzoomでやってるので） とにかく嬉しいのとありがたいのと。いやいや。 イノタケ御大の絵をアニメにするって、 どんだけハードル高いの？って感じするよね… 御大に直接キャラデザ見せるとか、 清水の舞台から飛び降りる感じでしょうよ、とかw あと30年前の連載がJャンプってことは、 大ファンだった作品の新作アニメ映画に スタッフで参加、神様と一緒に仕事する、って、 まあ生きてて良かった、ですよねー、すてき。 私もまあ、こんなこと…

はじめに この記事は、トラストバンク Advent Calendar 2023とNew Relic Advent Calendar 2023シリーズ3の4日目の記事となります！ こんにちは、今年でサーバーサイドエンジニア3年目となったトラストバンクの@h0r4kです。 今回の記事では、NewRelicのNRQLを利用したリクエストキャッシュの効果推定のプロセスとその際に使用したNRQLについてまとめてみました。 キャッシュ導入の動機とNewRelicによる効果推定を試みた理由 近頃、昨年私がリリースに携わった新規サービスが徐々にスケールしてきており、リリース当初よりもアクセス数が増加してきてい…

どうもさんげんです。 なんと挿絵トーン作業が終わりました(^^)！！やったー！！これで本ができる。 あとは本文に配置して試し刷りを12月中にしたいです。 今日は近況報告的な事と、あと12月クリスマス付近に愈Webオンリーやることにしたのでそれのお知らせとか。いつも通り雑多に書きます。 ブログのネタ何かないかなぁ(^^;) 最近、近況報告ばっかりだ！これはいかん。 いや書く事はあるんだけど…面白い企画とかしたいですよね。 最近本のノベルティが余ってきたりしているので（特にポスカはかなり余っている）BOOTHでプレゼント企画とかしようかな…。封筒的なのも余ってるし。 送料自分負担でいいので…むう。…

stepfunctions: 最新版に更新 iotfleetwise: カメラ、レーダー、ライダーからのデータなど、ビジョンシステムデータの新API導入 fsx: FSx for ONTAPのスケールアウトファイルシステムとFlexGroupボリュームのサポート追加 eks: EKSポッドアイデンティティ機能のサポート追加 redshift: データ共有を通じた複数データウェアハウスへの書き込みサポート追加 efs: 最新版に更新 codestar-connections: CloudFormation Git同期機能のサポート追加 endpoint-rules: 最新版に更新 config:…

この記事は Akatsuki Games Advent Calendar 2023 の2日目の記事です。昨日は @tkmruさんの「CODE BLUE参加記：食べて Decompile 寝て 繰り返す」でした。コロナで減ってしまったリアルイベントにも活気が戻ってきて良いですね！ はじめに アカツキゲームスでサーバエンジニアをやっています柴原です。今回は自分の担当しているモバイルゲームのプロジェクトでは、ECS on EC2の環境で運用をしており、Graviton搭載のEC2に移行を行いました。 詳しい手順の紹介というよりは、その思考の過程や工夫を紹介できたらと思います。 経緯 2018年にAW…

Mackerel Advent Calendar 2023 の2日目の id:rmatsuoka です。 qiita.com 私は今年に新卒としてはてなに入社し、 Mackerel のアプリケーションエンジニアとして開発に携わっています。さて Mackerel では OpenTelemetry のメトリックに対応することが発表されました。詳しくは次のページをご覧ください。 mackerel.io 私はこの OpenTelemetry を受け取ったり、取り出したりするコンポーネントの開発をしています。入社して最初の仕事として OpenTelemetry の トレース を活用し、コンポーネントのパ…

イントロ こんにちは！SREを担当してます上平と申します。 このエントリーでは スマートバンクが提供する B/43サービスの裏側のデプロイシステムに関して紹介したいと思います！ 自分自身の振り返りも兼ねてどうして現在のデプロイシステムに至ったのかをお話ししたいと思います、これからデプロイシステムの構築を検討されている方の参考になれば幸いです。 RDBを使用したWebアプリのデプロイ方法を構築する中で、発生した問題にどう対処し、より安定したデプロイを行うようにしてきたかを紹介します。 想定される読者 RDBを用いたWebアプリケーションで Blue/Green デプロイを行なっている方 AWS …

この記事はRevComm Advent Calendar 2023 1日目の記事です。 RevCommでバックエンド開発をしている小門 照太です。 MiiTelにおける認証基盤を担うマイクロサービス（MiiTel Account）に携わっています。 MiiTelでは外部のIDプロバイダー（IdP）と連携したシングルサインオン（SSO）によるログインに対応しています。 この記事ではMiiTelのお客様がSSOログインを利用する際に必要となる手順とAccountチームの運用について紹介します。 SSO利用までのステップ 現在MiiTelではOpen ID Connect（OIDC）という認証規格に…

この世界に生まれた その意味を