Codepipeline

こんにちは、OTTサービス技術部開発第1Gの大元です。 みなさんはどのようにデプロイを行っていますか？ 私の担当している案件ではビルド、ECSタスクのエラーの確認、切り替えなど手動で行っていました。 手動で行うとミスも発生しやすいですし、デプロイに毎回時間を取られて大変ですよね。 この手動で行っていたデプロイ方法を CodePipeline / CodeBuild / CodeDeployを使用して自動化しました。 今回は、このデプロイ自動化について紹介していきます。 従来のデプロイ方法と課題 自動デプロイのメリット デプロイの流れ 前提条件 デプロイの構成 ファイルの配置 Code兄弟による…

はじめに 設定手順 ① CodeConnections 設定 (AWS) ② GitLab Access Tokens 作成 (GitLab) ③ GitLab 認証 (AWS, GitLab) ④ CodePipeline 設定 (AWS) 最後に 参考リンク はじめに CCI インフラ部の YMTsan です。 CodePipeline ソースプロバイダー設定が GitLab Self Managed をサポートしたようなので試してみました。 aws.amazon.com ちなみに SaaS 版の GitLab.com サポートは少し前にサポートされています。 aws.amazon.com…

ECS on Fargate 構築時のエラー一覧と対応方法です。 約半年ぐらい前に構築した内容で自分への振り返りとして纏めました。 初めてECSを業務で利用したので振り返ると初歩的なエラーばかりです。 一部環境ですが、以下構成イメージです。（CI/CD含む） １、AWSServiceRoleForECSが存在しないエラー エラーメッセージ CloudFormationでECS Cluster作成時にエラーが発生 Resource handler returned message: "Invalid request provided: CreateService error: Unable to…

こんにちは、クラウド事業部 CI/CDサービスメニューチームの島田です。CICDの入門サンプルとしてS3へのデプロイをCodeCommit、CodePipelineを使って実施する方法を確認してみました。 そのやり方について記事に残しておきます。 やりたいこと コード管理はAWSアカウントがあれば手軽に開始できるCodeCommitを利用 CodeCommit上のコードを更新すると、S3上のファイルを更新するパイプラインをCodePipelineで作成 S3上のコンテンツが変わったことを確認しやすくなるために、静的ウェブサイトホスティング機能を有効にする 特定のIPアドレスからのみ静的ウェブサ…

CS1の石井です。 今回の記事は前回の「ECSでBlueGreen DeployをCDKで試す記事 part1」の記事の後編です。 こちらはパイプラインを用いてB/Gデプロイを行う実装となります。 ※本記事もコードだけ欲しい人は「早速結論」の項目まで飛んでください。 記事を書いた動機 part1に続き、B/Gデプロイの話をCDKで実践したいと思っていました。 ただ、B/GデプロイはCI/CD環境との組み合わせで旨みが出るものと理解しています。そのため、記事としてはこちらが本命です。 また、パイプライン自体はCDKのpipelinesモジュールという要素を用いてパイプラインを構成します。 しかし…

タダです. 10/24に CodePipeline で動的なインプットパラメーターがサポートされました.今回サポートされたのは V2 のパイプラインタイプでのみ使えます.この記事で今回のアップデートをさらってみます. aws.amazon.com V2 パイプラインタイプ の特徴 動的インプットパラメーター 料金の差異 V2 パイプラインタイプを作ってみる 関連情報 まとめ V2 パイプラインタイプ の特徴 CodePipeline V2 パイプラインタイプの特徴簡単にまとめます. 動的インプットパラメーター 冒頭にも書きましたが,動的インプットパラメーターが使えるようになりました.また,ユー…

対象者 結論だけ欲しい人向け： 1. 具体的な実装のイメージ デプロイ元アカウントでの主要なリソース デプロイ先アカウントでの主要なリソース 2. CDKの準備をする CDKのinit デプロイ予定の資材とappspecの準備 資材の配置 3. いきなり結論のコードを記載 コード概要 4. Deployec2Stackのデプロイ実行 5. pipelineStackのデプロイ実行 6. Deployec2Stackコード解説 EC2作成 CodeDeploy作成 7. pipelineStackコード解説 アーティファクトバケットとKMS作成 Appspecとデプロイ資材をアーティファクトバケ…

はじめに 今日は小ネタ。昨年、CodePipelineにてECRへのPushがアクションとしてサポートされました。 aws.amazon.com 個人的にはちまちまCodeBuildを使って実装することが多いのですが、設定ファイルの書き方などを毎回忘れるので、GUI操作だけで設定できるのは良さそうです。実際にやってみました。 設定 CodePipelineにて新しくパイプラインを作成します。最初に「Build custom pipeline」を選択します。 画面に従って入力を進めていき、ビルドステージの追加の部分で「Other build providers」を選択して「AWS ECRBuil…

2024年（令和6年）がもうすぐ終わる。 雑に1年を振り返りつつ、来年に持っていくものを整理したい。 令和6年のハイライト 1月 妹の結婚式のために実家に帰った。 過去に発症した躁鬱とか、経済的状況とか、色々引きずったまま2024年を迎えたっけ。 結婚式の前日に母と2人で話す機会があった。 昔から心配性な人で、俺が何をしてても心配する人だと思っていた。 更年期なのか、涙もろくてよく泣くし。 案の定、今年の1月も俺の近況を聞きながら、母はしくしく泣いた。 あんまり気にしてなかったけど、妹の式が終わって、東京に戻ってから色々考えた。 「このままじゃいけない。自分がしっかりしないと、母はいつまでも安…

はじめに お久しぶりです。 以前の記事で書いた通り、なかなか体調不良が良くならず、また前回から間が空いてしまいました。 で、半年ぶりの技術ブログですが、今回はCDK Pipelinesのself-mutateについてになります。 なおこの記事は AWS CDK Advent Calendar 2024 22日目の記事のはずでしたが、私が先週に軽い肺炎を患ってしまった関係で、投稿が遅くなってしまいました。大変失礼いたしました。 前提：CDK Pipelinesって？ CDK Pipelinesとは、AWS CodePipeline（以下「CodePipeline」）を利用したデプロイパイプライン…

下記サイトを参考に、SageMakerノートブックでBedrock(titan)を操作してみた。 docs.aws.amazon.com 前提 SageMakerノートブックが作成済みであること ※まだの場合下記を参考にノートブックを作成する amegaeru.hatenablog.jp 実践！ １．SageMakerノートブックのロール修正 １－１．AWS - SageMaker １－２．「Notebooks」-事前に作成しているノートブックを選択 １－３．「アクセス許可と暗号化」内の「IAM ロール ARN」を選択 １－４．「許可」タブ-「許可の追加」-「インラインポリシーを作成」 １－５…

m2: AWS Mainframe Modernizationでネットワークタイプ（IPv4、デュアル）をサポート cloudfront: VPCオリジン向けにOriginReadTimeoutおよびOriginKeepaliveTimeoutをサポート batch: Amazon EKSでPodアノテーション、Namespace上書き、Persistent Volume Claimをサポート synthetics: デュアルスタックサブネットでIPv6トラフィックの切り替えをサポート cleanroomsml: StartAudienceGenerationJob APIでSQLコンピュート…

マネージドサービス部 佐竹です。 2024年11月から12月にかけて AWS Security Hub では Interface 型の VPC Endpoint に関する新しい Control、つまりはセキュリティチェック項目が多数追加されています。Interface VPC Endpoint に関しては少々思うところがあるため、セキュリティとコストの観点でブログを記載していきます。 2024年12月23日 追記 はじめに Central configuration で Security Hub を運用していると Security Hub に追加された新規のコントロールについて コントロール追…

こんにちは。 カスタマーサクセス部の山本です。😺 Re:Invent のセッション動画を、少しずつ観ています。 感想や内容をブログ記事に書くことで、誰かの役に立てればと思います。 業務で ECS (Elastic Container Service) を使ったワークロードを扱うことが多いので、２回目の今回も ECS のセッションです。 １回目： blog.serverworks.co.jp セッション名：AWS re:Invent 2024 - Securing Amazon ECS workloads with AWS Signer and Amazon GuardDuty (SVS342)…

データウェアハウス開発部の川島です。現在は健康診断データ（以下、健診データ）のAWS移行のプロジェクトに参画しています。 健診データの詳細については、以前の記事をご覧ください。 techblog.jmdc.co.jp 今年、JMDCではアドベントカレンダーに参加しています。 qiita.com 本記事は、JMDC Advent Calendar 2024 15日目の記事です。 はじめに 健診データ基盤について、オンプレミスからAWSへのクラウド移行を進めており、データの変換やチェック等の基盤としてRedshiftを採用しています。 Redshiftには、ストアドプロシージャやユーザー定義関数が…

はじめに この記事は every Tech Blog Advent Calendar 2024 11 日目の記事です。 こんにちは。DELISH KITCHEN 開発部 RHRA グループ所属の池です。 2024年6月、エブリーは5つの小売アプリの運営について事業譲渡を受け、『 retail HUB 』へ移管しました。 移管してから半年間、引き継ぎ元の企業様からサポートをいただきながら、システムの移管と運営を行ってきました。 システムの移管は、システムを構成する各種サービス・ツールの公式の移管手順に従って基本的には行いますが、中には記述が不明瞭な場合もあり、試行錯誤が必要でした。 本記事では、…

re:invent2024 session report こんにちは、カスタマーサクセス部カスタマーサクセス2課の畑野です。 最近の趣味はドライフラワー作りです。 初となるre:Invent参加の様子をお届けします。 会場の広さに圧倒され、初日からSo Excited!でした。この記事では私が参加したワークショップをご紹介します。参加したセッションはSEC311 | Secure containers from supply chain attacksです。 テーブルを挟んで知らない人と討論するかと思いきや、もくもく会でした。ただ、不明点や相談したいことがあれば、話しかけて問題解決することが出…

はじめに こんにちは、SREチームの佐々木です。 現在、私はSREの中でもEmbedded SREの役割を担っています。各プロダクトのチームに参画して、プロダクトの運用が円滑にできるような下支えとして日々課題に向き合っています。 さて、今回は過去に遭遇した運用課題の中の1つとして対応した「Private Subnet下のRDSに対してのMigrateをCD環境から実施する対応」についてお話させていただきます。 はじめに 背景と課題 試した事・検討した事 CodeBuildを導入してみる ECRの作成 BuildSpecファイルの作成 CodeBuildプロジェクトを作成して起動確認を行う CD…

AWS CodeBuildのランタイムバージョンを確認するときの備忘録を残す。 サポートしているバージョンはもちろん、ドキュメントにある。 ただ稀に、サポートバージョンよりも最新を利用したいことがある。 そして、ごくごく稀にドキュメントにはないが、dockerのリポジトリをみるとサポートしている場合があるので、忘れないようにしておく。 Linuxイメージの指定 Amazon Linux 2023 x86_64 standard:5.0 のイメージを利用した場合 e.g.) CloudFormationのテンプレート Resources: APICodeBuild: Type: AWS::Cod…