Elitegroup Computer Systemsの略称。
E-Commerce Serviceの略。
例えばAmazon ECSなど。
はじめに 環境情報 やりたかったこと 事象 解決方法 おわりに はじめに Amazon ECS に最近入門した、クラウド事業部の梅本です。 Docker や ベアメタルな Kubernetes は使っているのですが、クラウドなコンテナ環境に不慣れで今回の Amazon ECS についても四苦八苦しています。クラスタ？タスク定義？サービス？勉強ですね。 今回は Amazon ECS のロール周りで１つ詰まったので内容を共有したいと思います。 環境情報 実行環境：CloudShell aws コマンドの Session Manager Plugin がデフォルトで使えたので、こちらで今回作業しまし…
こんにちは、プロダクト開発部の藤田です。 今回は Amazon ECS(以下、ECS) と AWS Step Functions(以下、Step Functions) を組み合わせた「ワンショットタスクの実行基盤」についてご紹介します。 「ワンショットタスク」とは、指定されたコマンドやスクリプトを1度だけ実行して、終了するタスクのことです。 このようなワンショットタスクは「プライベートネットワークの内側にあるリソースへのアクセスが必要な、非定型的な操作」を実行する際などに用いられます。 例えば、プライベートネットワークの内側にある DB に対して、以下のような作業をエンジニアが実施する際に、s…
はじめに エブリーでソフトウェアエンジニアをしている本丸です。 DELISH KITCHENでカナリアリリースの仕組みを作成したので、今回はそのことについて紹介させていただこうかと思います。 カナリアリリースとは カナリアリリースとは、一度に全体に公開するのではなく、最初は一部のユーザーに限定して公開を行い、問題がなければ全体に公開していくリリースの方法です。 カナリアリリースを行うメリットとしては、本番環境で影響範囲は狭めて動作確認ができることや問題が発生した場合にリリース前のサーバに切り戻ししやすいことなどが挙げられます。 やったこと 概要 ECSのserviceを2つ用意しておき、片方の…
lambda から ECS を実行する方法をメモします。 設定 ECS 環境変数 コード 設定 ECS a1026302.hatenablog.com 環境変数 キー 値 備考 AWSVPC_CONF_SECURITY_GROUPS sg-xxxxxxxxxxxxx AWSVPCの設定 AWSVPC_CONF_SUBNETS subnet-xxxxxxxxxxxxx AWSVPCの設定 ECS_CLUSTER sample-ecs-dev ECSのクラスター名 TASK_DEFINITION_ARN arn:aws:ecs:ap-northeast-1:xxxxx:task-definitio…
複数環境（本番、検証、開発）でECS on Fargateを構築した際にDockerfileを共通化した備忘録です。 前提情報 各環境は別々のAWSアカウント ECSのタスク内は「Nginx」と「SpringBoot」のコンテナで連携 本記事の共通化対象は「SpringBoot」のコンテナで利用するDockerfile 手順 buildspec.yml内のdocker buildするところでDockerfileに引数を渡すことで共通化できます。 例）Javaのメモリ割り当てのところを共通化する １、パラメータストアにメモリの初期値と最大値を設定する メモリ初期値のキー名：/web/java-m…
Amazon ECR を使ってみたのでここにメモします。 Amazon ECR とは 特徴 Docker イメージを ECR にプッシュする流れ 事前準備 処理の流れ レジストリの認証 イメージの作成 イメージにタグ付け イメージプッシュ make ファイル作成 実行 Amazon ECR とは Elastic Container Registry の略で、Dockerのコンテナイメージを保存しておくためのレジストリです。 Docker コンテナイメージを保存・管理・デプロイを行うことができます。 特徴 AWS ECSと統合 高可用性 AWS Marketplaceが活用できる セキュアな状態…
「Trivy」を使用して、AWS CDKレイヤーでコンテナイメージのスキャンを行うConstructライブラリをConstruct Hubに公開しました。
こんにちは、ペイルドの大竹です。 今回は外部サーバーと通信を行っているEC2インスタンスをECS on Fargateに移行した話をしたいと思います。 移行する前は以下のような構成となっていました。 背景 EC2インスタンスの運用にて以下の課題がありました。 弊社ではPCI DSS準拠等の理由により、EC2インスタンスへのログインできる人・場所を制限し、ログインには申請が必要となっている パッケージ・カーネルの脆弱性対応等の定期運用が属人化している 制限された場所からのみアクセスが可能なため、急に手動対応が必要になった場合、迅速に対応できない可能性がある PCI DSSの要件でユーザーの管理・…
1. はじめに こんにちは、SWEのあかりです。 今回のテーマは、SRE NEXT 2023のCall For Proposals（CFP） に応募したものの、残念ながら不採択になってしまったものです。話せるネタとしてはまとまっていたので、テックブログとしてここに捧げます😇 2. 本記事の概要 社内で最も古くから稼働している施工管理アプリでは、主にデータ修正と有事の際のログイン環境として開発者向けのEC2インスタンス（以降、「バッチサーバ」と表現）が存在していました。この記事では、このバッチサーバの廃止1を目的として、このサーバが担っていた役割をサーバレス環境・コンテナ環境へ移行し、EC2イン…
この記事を書いた人 DROBE の都筑 (@tsuzukit2) です 簡単なプロフィールはこちらをご覧ください はじめに 機械学習系の機能を開発していると、GPU を利用してトレーニングを行いたいケースが多々あると思います。 この記事では、ECS で GPU を使った ML 系 Task の実行環境のセットアップについて記載します。 作りたいもの 作りたいものの概要はこのようなものです。 ECS で構築する GPU を利用した Task の実行環境 GPU は高価なので、常時起動しているインスタンスは 0 としておきつつ、Task が作られたらインスタンスを起動、Task を実行、Task …
この記事は Akatsuki Games Advent Calendar 2023 の2日目の記事です。昨日は @tkmruさんの「CODE BLUE参加記：食べて Decompile 寝て 繰り返す」でした。コロナで減ってしまったリアルイベントにも活気が戻ってきて良いですね！ はじめに アカツキゲームスでサーバエンジニアをやっています柴原です。今回は自分の担当しているモバイルゲームのプロジェクトでは、ECS on EC2の環境で運用をしており、Graviton搭載のEC2に移行を行いました。 詳しい手順の紹介というよりは、その思考の過程や工夫を紹介できたらと思います。 経緯 2018年にAW…
Mackerel Advent Calendar 2023 の2日目の id:rmatsuoka です。 qiita.com 私は今年に新卒としてはてなに入社し、 Mackerel のアプリケーションエンジニアとして開発に携わっています。さて Mackerel では OpenTelemetry のメトリックに対応することが発表されました。詳しくは次のページをご覧ください。 mackerel.io 私はこの OpenTelemetry を受け取ったり、取り出したりするコンポーネントの開発をしています。入社して最初の仕事として OpenTelemetry の トレース を活用し、コンポーネントのパ…
イントロ こんにちは！SREを担当してます上平と申します。 このエントリーでは スマートバンクが提供する B/43サービスの裏側のデプロイシステムに関して紹介したいと思います！ 自分自身の振り返りも兼ねてどうして現在のデプロイシステムに至ったのかをお話ししたいと思います、これからデプロイシステムの構築を検討されている方の参考になれば幸いです。 RDBを使用したWebアプリのデプロイ方法を構築する中で、発生した問題にどう対処し、より安定したデプロイを行うようにしてきたかを紹介します。 想定される読者 RDBを用いたWebアプリケーションで Blue/Green デプロイを行なっている方 AWS …
Next.js + Go + AWS API Gateway で WebSocket API を使って API サーバーからフロントエンドに通知を送る はじめに こんにちは トモニテ でバックエンド周りの開発を行っている rymiyamoto です。 エブリーとして初の試みとなる Tech Blog Advent Calendar 2023 の １日目の記事として参加させていただきました。 毎日他の記事も公開されるので、ぜひチェックしてみてください！ tech.every.tv 今回ですが Next.js + Go + AWS API Gateway で WebSocket API を使ってみ…
この記事はRevComm Advent Calendar 2023 1日目の記事です。 RevCommでバックエンド開発をしている小門 照太です。 MiiTelにおける認証基盤を担うマイクロサービス（MiiTel Account）に携わっています。 MiiTelでは外部のIDプロバイダー（IdP）と連携したシングルサインオン（SSO）によるログインに対応しています。 この記事ではMiiTelのお客様がSSOログインを利用する際に必要となる手順とAccountチームの運用について紹介します。 SSO利用までのステップ 現在MiiTelではOpen ID Connect（OIDC）という認証規格に…
この世界に生まれた その意味を
オンライン英会話 ニュース記事読んで感想言うみたいな素材飽きたしあんまり効率よくない気がしたのでやめた free conversation はテーマに困るかなと思ったんだけどセルビア出身の先生が多いのでユーゴスラビア崩壊らへんの話をずっと聞いているのが面白くてよい ITP1(合計:26h 今月:16h) 英語の勉強って感じ CM1(合計:46h 今月:36h) 高校の復習 そろそろ中間テストがあるらしい CTAP2 とりあえずコマンドの流れをなんとなく理解して、USB をキャプチャしながらふーんなるほどね、をした セキュリティキーとの通信を眺めながら CTAP の仕様を眺める ので、真面目に仕…
SREチームの橋本です。SRE連載の11月号になります。 AWSの多くのリソースはIAMでアクセスを一元管理されていますが、Lambdaではユーザーが実行したり他のAWSサービスから実行されたりする都合上、様々なポリシーが絡んでいます。 特に「Lambdaを呼び出す許可」についてはID（アイデンティティ）ベースのポリシーとリソースベースのポリシーで内容が被るため、どちらで設定するか混乱しているケースも見られます。 本記事ではこうしたポリシー事情をterraformの例と共に整理し、権限設定のベストプラクティスも検討します。 そもそもIAMのポリシーについて ドキュメントによればAWSのポリシー…
ECS で起動したコンテナ内のログは、メインプロセス (PID1) の標準出力・標準エラー出力が処理対象になる（ログドライバが awslogs 以外の場合も、対象にはならない）。 dev.classmethod.jp
皆さんこんにちは。エンジニアの佐藤です。今回はメモリキャッシュのお話です。 Redisはポピュラーなメモリストレージではあるが。。 Webアプリケーション開発者の方々なら、Redisを知らない人はいないでしょう。メモリストレージの定番として、筆者が認識し始めたのは10年ぐらい前でした。無料で利用可能で、Dockerコンテナで手軽にデプロイできます。今ではクラウドベンダーほとんどRedisをSaas提供しており、ローカル開発環境からクラウドの本番環境にそのままま乗せ替えできる点も便利です。 しかし、問題はお値段です。Redisは当然、CPUを占有します。CPUは高価なリソースです。さらに頭が痛い…
AWS re:Invent 2023 アプリケーションサービス部の内村です。from AWS re:Invent 2023, Nevada. ふだんはコネクト（Amazon Connect）大好きおじさんをやってますが、今日はストレージのお話です。 Amazon EFS の新しいストレージクラス Amazon EFS Archive (EFS Archive) の Breakout Session を聴講しましたので共有致します。 Amazon EFS 何が新しい？ 特徴 Amazon S3 ストレージクラスとの比較 メリット？ 考慮すべき事項 ストレージの最適化 次にやること 最後に 参考情…
はじめに 今年もre:Inventの時期がやって参りました！という事で、個人的に気になったアップデートのまとめです。 （とは言っても、ちゃんと追い始めたのは今年からですが。。） 主に、クラメソさんの記事一覧から抜粋しています。発表して直ぐに記事にされているのは素直に尊敬です。 dev.classmethod.jp アップデート一覧 Amazon GuardDuty ECS Runtime Monitoringが利用できるように dev.classmethod.jp Amazon GuardDuty EC2 Runtime Monitoringが利用できるように（プレビュー） dev.class…
2023年8月から9月にかけてSansanでの就業型インターンシップに参加した櫛引淳之介（ブログ）です。 普段はIPv6インターネットにおけるIoT機器のセキュリティをテーマに大学院で研究を行っています。 今回のインターンシップでは、情報セキュリティ部CSIRTグループの一員として、自宅ルータ脆弱性検知システムの改修に取り組みました。
こんにちは。プロダクト本部Growth部でエンジニアをしている id:ruru8net です。以前はこちらの記事を書かせていただきました。 tech.classi.jp tech.classi.jp この度わたしはSRE留学の第3期生として、2023年5月-10月の半年間SREチームに留学をしました。 SRE留学とは？や、第1期生、2期生の体験記はこちらをご覧ください。 tech.classi.jp tech.classi.jp SRE留学を志望した理由 留学以前は主に認証機能の運用開発をするプロダクトチームで仕事をしていました。弊社のプロダクトチームはただアプリケーションコードの実装をするだ…
東京ビッグサイトで開催される「コミティア146」にて、株式投資を題材とした一次創作ギャグ漫画を頒布します！
toris.io
techblog.kayac.com
speakerdeck.com
sinsoku.hatenablog.com
engineer.crowdworks.jp
qiita.com
techblog.housmart.co.jp
www.itmedia.co.jp
logmi.jp
