Terraform

こんにちは。crowdworks.jp SREチームの@kangaechuです。 先日開催されたイベント HashiTalks: Japanを見ていましたが、Terraformのドリフト検出に関する発表が多く、Terraform運用において重要なポイントなんだなと感じました。 流行りに乗ったわけではないですが、今回はTerraformのドリフト検出をAtlantisで行った方法をご紹介します。 この記事は以下環境で検証しています。 Atlantis: 0.19.8 Terraform: 1.2.8 ドリフト検出 Terraformはインフラストラクチャを安全かつ期待通りに構築するために使用する…

はじめに Kinesis Data Firehoseは、Amazon Simple Storage Service(Amazon S3)、Amazon Redshiftなどやサードパーティサービスプロバイダが所有するHTTPエンドポイントなどの送信先へストリーミングデータのリアルタイム配信を実現するマネージドサービスです。Kinesis Data Firehoseのストリーミングデータ受信元としてAWSサービスでは、Kinesis Data StreamsやKinesis Data Analyticsなどがあります。 今回は、このKinesis Data Firehoseの動的パーティショニン…

タダです. IAM Identity Center(旧 AWS SSO)でカスタムポリシーを Terraform で設定したので備忘録でこの記事にまとめます. Terraform のコード 参考ドキュメント 生成されたポリシー まとめ Terraform のコード 読み取り権限として ViewOnlyAccess ポリシーがサービス的に用意されているのですが,このポリシーに追加したいと思い,いじってみました.そのコードが下記のものになります.aws_iam_policy_document で指定している source_policy_documents がベースは ViewOnllyAccess…

はじめに 実リソースとコードの差異を検出することをドリフト検出と言うそうです。 今回は、Terraformで作成したAWSリソースとtfstateファイルの差異を検出します。 Snykで試したかったことがこれです！ まとめ ドリフト検出を試して、おおむね満足のいく結果になりました。SGのインバウンドルール追加は検出されませんでしたが。理由は調査中です。 使いこなすには、ポリシーで何を検出しないか決めたり、コードの定義もデフォルトに任せず明記したほうがいいかも。 あと、結果をJSON形式で出力すれば、tfstateファイルに管理外のリソースをインポートしやすくなるかもしれないですね。 目次 はじ…

Amazon S3 へのソースコードの配置をトリガーにして AWS CodePipeline を動かす方法はいくつかあります。 S3 を CodePipeline からポーリングして変更を検知する S3 への操作を CloudTrail で検知してイベントを発行して EventBridge 経由で CodePipeline を動作させる S3 からイベントを EventBridge に送って CodePipeline を動作させる それぞれについて Terraform で書く場合の要点をまとめておきます。 なお、Terraform AWS Provider はv3を前提にした記述になっています…

概要 こんにちは、キュービックでSREをやっているYuhta28です。キュービック内のテック技術について発信します。 以前弊社でのTerraformの取り組みについて紹介しました。 cuebic.hatenablog.com この中で環境によってリソース数の差分が生じる、例えば本番環境なら冗長化のためNAT Gatewayを3台稼働させるが、検証環境ならコスト最適化のため１台のみ稼働させると言ったケースではfor_eachを使って動的にリソース数を管理する方法について紹介しました。 ではAWS CodePipelineで本番環境のみにApprovalステージを追加したいというような要望のときは…

タダです. AWS WAF のログを Datadog に送って運用している中で,特定条件でブロックされたリクエストがあったらアラートを飛ばしたいとなり,Terraform でコード化したのでこの記事でまとめます. 特定条件について Datadog のモニター設定 まとめ 特定条件について 今回の条件として,WAF は特定の IP アドレスのみアクセス許可している状態です.仮にクライアント側の IP アドレスが変わったりしたりしたら検知する必要があり,WAF のルールで指定している IP アドレスがブロックされた時を検知するようなモニターを作ります. Datadog のモニター設定 上記の条件で…

importするときはredis_versionは指定しなくてもいい read_replica_modeはtierがSTANDARD_HAの時に必要なパラメータだけど、空文字列で指定してもいい registry.terraform.io github.com

テクノロジー戦略本部開発2部の早瀬です。 今年の7月と8月にバイセルで初となるサマーインターンシップを開催しました！！ 初の試みではあったのですが、無事開催まで漕ぎ着けることができ、学生からのアンケートもとても好評で結果として大成功を収めることができました！ この記事ではサマーインターンシップの概要と、その際に使用したアーキテクチャについて紹介したいと思います！ サマーインターンシップの概要 全体像 バックエンド フロントエンド CI・CD まとめ

anyenv使ってますか？私は使っていました。っというのも最近とある案件でasdfをつかっているのをみて、ちょっと試してみたところ、なかなかよかったのでこちらに乗り換えました。 asdf-vm.com asdfってなんじゃろ？ asdfはツールやプログラミング言語のバージョンを管理するもので、**envを1つにまとめたようなツールです。 anyenvとの違いは、anyenvは**envツールをインストールするだけで、各言語のバージョン管理は**env任せになるのに対し、asdfはasdfを起点に管理を行うというところです。また、プラグインを追加することで、管理できるツールや言語を増やせすことも…

ワークロードのバックアップと復元の機能 割と最近できたようでベータ版 APIとBackup for GKE エージェントが動く Terraformではgke_backup_agent_configで設定する cloud.google.com

仕事でも利用している個人で作った特定のコマンドをリトライするだけのGitHub Actionを公開しました。 似たようなActionは既にMarketplaceにあるのですが、大体がそのコマンドの出力結果を取得できないため、自前でActionを書くにいたりました。 github.com github.com 使い方としてはシンプルでして例えばterraform planであれば、 - uses: corrupt952/retry-command@v1 with: command: terraform plan -no-color max_attempts: 3 retry_interval: …

お疲れさまです。SREの西田和史(@k_bigwheel)です。 僕が所属するDX事業本部の開発基盤グループは主にインフラが安定して高いパフォーマンスで動くことに責務を持っています。 今DX事業本部には3つの事業部があり、その中ではイエウール、ヌリカエ、ケアスル介護などのサービスを展開していますので、僕らはそれらのだいたい10サービス前後のインフラを日々増築・改善しています。 僕がSpeeeにジョインしたのが3年前の2019年11月なのですが、それからDX事業本部のインフラは様々なことが進化しました。3年前から変わらず残っているインフラコンポーネントは永続化層1ぐらいといえる程です。ここではそ…

9月24-25日に行われたPHP Conference 2022に参加しました。 ひっじょ〜〜〜に楽しみました！！🤩🤩🤩🤩 PHPカンファレンス 2022 実行委員会さん・・コアスタッフや当日スタッフの皆様、スポンサーとして盛り上げるのに一役買ってくれた企業の皆様も、そして個性的でワクワクする発信をしてくれたスピーカーの皆様に感謝感謝です。 コレは社内Slackでワクワクしている私の様子です。「結構」とは。 両日とも、開始〜最初のセッションくらいまでは自宅参加になったのですが、午後からは現地にてオフラインでの参加でした。 そして、9月までに消失する休暇がある＆「イベントの翌日、体力的な披露・・…

どもども、キュービックでSREをやっているkmsn17です。みなさん夏休みはどうでした？ 僕は、9月に夏休みを取って長野でenjoyしてきます！ さてさて、 僕が夏休みを取得する前にキュービックのテック記事について紹介します。 皆さん、infrastructure as codeはご存知でしょうか？ 知らなかった、そこのアナタ！！そうアナタです！！！ 今日は存分に持ち帰ちゃってください。 infrastructure as code、略してIaCはインフラ基盤（サーバ、インスタンス、etc）をコードで管理する構成管理ツールです。 使用する目的は、オペレーションミス・全インフラ環境の設定値を煩雑…

みらい翻訳のバックエンドエンジニアのtoshと申します。 弊社ではインフラの構築にterraformを利用しています。 今回はterraformのセキュリティスキャンツールを紹介します。 tfsecとは Aqua Securityという会社が開発しているオープンソースのterraformの静的解析ツールで、セキュリティスキャンをしてくれます。 特徴として、非常に高速に動作することと、ローカルはもちろんCI/CDパイプラインで動作させることが想定されています。 以下はgithubリポジトリからの抜粋です。 GitHub - aquasecurity/tfsec: Security scanner…

本日（22年9月）、Terraform Associateに合格しました。 以前からTerraformを使いたいなと思って色々と試していましたが、試していると色々疑問がでてきて、これは一回体系的に勉強したほうが早いなと思い、せっかくなので試験を受けることにしました。 Terraformの本を読んだり、実際にTerraformを試していたこともあって、試験勉強は２週間ほど済みました。知識ゼロからの状態でも１～２か月くらいあれば合格できると思います。 主に試験勉強として行ったのはUdemyの動画視聴＆模擬試験受験です。Udemyの講義は英語なのでちょっと大変ですが、順を追って説明してくれるので内容…

キュービックVPoEの後藤です。 2020年2月にキュービックにジョインしVPoEとしてエンジニアリングチームの組成と育成をミッションとしてきました。入社当時は7名のチームでしたが現在は40名を超えるチームとなり全社の10％を超えるチーム体制となりました。 インターンも6名を擁しており順調に育成されコードの書けるインターンが揃ってきている状況です。このような中で利用する技術やシステム、ミドルウェアの標準化やR&Dを進めており、それらキュービックの技術スタックをご紹介します。 技術スタック キュービックの技術スタック サーバーサイド まずサーバーサイドの言語とアプリケーションフレームワークはPH…

今回も技術書典ネタです。技術書典13のオンライン開催も本日（25日）で終わりますね！今回も素晴らしい本に出会えて満足です。 書き手にとって、本の感想をTwitterやブログなどに書いてもらえるととても嬉しいですし、次の本を書くモチベーションになります。私も自著の感想などをエゴサすることがあるのですが、ちょっとした感想でもTwitterで呟いてもらえるととてもテンションがあがります。しかし、私自身はというと他人からのFBを求めるばかりで、自分からそういった感想などをちゃんと発信していなかったなと思ったので、今回の技術書典13で購入した新刊本をざっと読んだ感想を書いていこうと思います。目を通した程…