Elitegroup Computer Systemsの略称。
E-Commerce Serviceの略。
例えばAmazon ECSなど。
プラットフォームグループでインフラエンジニアをしている @laughk です。 少し前の話になりますが、マネージドインスタンスドレインを活用して terraform apply コマンドのみで ECS インスタンスの入れ替えを自動で行えるようにしました。その際、どういった実装をしたのかをまとめます。 動機 調査・実装 管理するべき AWS リソースとサンプルコード ハマりどころや Tips ECS インスタンス入れ替え時の Terminate 発動までの時間が長い場合の対処 ECS サービスではないスタンドアロンなタスクが動く環境では使えない 終わりに 参考記事 動機 コネヒトでは Amazo…
ECSで複数のコンテナがある場合、同じタスク内にするか？別々のタスクにするか？ 管理が簡単そうでなんとなく同じタスク内で定義していたのですが、理由を聞かれ困ったので構築後に調査しました。 システムの要件によって判断するということ分かりました。 公式サイトには以下の記載があります。 以下の要件がある場合、1 つのタスク定義にコンテナを配置することをお勧めします。 各コンテナが同じライフサイクルを共有している (起動と終了が同時に行われる)。 実行基盤となるホストが同じになるようにコンテナを実行する (あるコンテナが、localhost ポート上の別のコンテナを参照する) 必要がある。 各コンテナ…
はじめに こんにちは。インフラ部 プラットフォームグループの近藤です。 本記事では、AWS環境でAmazon ECS・Nuxt・Expressなどを使用して社内向けの認証付きWebサイトを構築した事例を紹介します。 こちらのWebサイト開発の話が挙がった際に、フロント開発としてはSPAの簡単なページ作成ぐらいしか経験がなかったのですが、個人的に興味がありシステム構築を担当させていただきました。 開発・リリースしたのは2023年の夏頃になります。 記事の内容としては、システムのアーキテクチャに触れた後に、以下に焦点を当てて書いています。 Nuxtでユニバーサルレンダリングモード設定時の、ECSサ…
はじめに オンプレ型バッチ処理の特徴とクラウドネイティブ技術 バッチ処理の構成要素と概念 バッチ処理 バッチ処理の構成要素 商用ジョブ管理ソフトとバッチ処理 クラウドネイティブ技術によるバッチ処理の実現 Apache Airflow とは MWAA のアーキテクチャ スケジューラー ワーカー ウェブサーバー データベース オペレータ ポピュラーなオペレータ AWS Operator サーバレス化のメリット サーバレス・バッチの構成イメージ 可用性とスケーラビリティ MWAAの可用性とスケーラビリティ タスクの可用性とスケーラビリティ DevOpsの実践とアジリティの向上 Webアプリケーション…
こんにちは、インフラ/Misocaチームのfuku710です。 MisocaチームではAWSのコスト削減の一環として、ECS上で動いているコンテナアプリケーションのCPUアーキテクチャをArmプロセッサに変更する取り組みを行いました。 その過程でやってきたことや工夫したことなどについて書きたいと思います。 AWS Fargate Gravitonについて MisocaではECSのコンテナの実行にAWS Fargateを使用しています。 現在FargateではArmアーキテクチャのCPUとしてAWS Graviton2がサポートされており、x86ベースのFargateからGraviton2ベース…
タダです. VPC フローログのフィールドに ECS サービスに関するフィールドが追加されました.これまで調査の時は ECS の IP アドレスから問題を調べることしかできなかったため,問題の調査がしやすくなります.この記事では VPC フローログに新たに追加されたフィールドを出力して, Athena で検索してみます. 追加された ECS サービスに関するフィールドについて VPC フローログに ECS サービスに関するフィールドを追加する Athena のテーブルの作成とクエリを実行してみる まとめ 追加された ECS サービスに関するフィールドについて 公式のブログにも解説された記事があ…
目次 目次 はじめに 環境情報 Role作成 ECSタスク定義作成 VPC、SecurityGroup 作成 ECS クラスター、サービス作成 動作確認 まとめ お知らせ はじめに こんにちは、クラウド事業部の梅本です。 今回は再入門ということで Amazon ECS を使ってコンテナを立てたいと思います。 普段は CloudFormation や Terraform 等の IaC で構築したり、Web コンソールからポチポチで作成するのですが、今回はステップバイステップで改めて関連サービスを意識しながら構築していこうと思います。 環境情報 クライアント：AWS CloudShell AWS …
こんにちは。 株式会社アドグローブ ゲーム事業部エンジニアの山田です。 Unityが新たなシステムとして打ち出しているECSをご存知でしょうか。 本記事では「Unity ECSを触ったことがない」という方に向けたECSの導入として、EntityをSystemから生成する方法についてご紹介します。 Unity ECSとは 事前準備 SubSceneについて Entityを生成する方法 ①Entityに変換 ②Entityを生成するSystem 動作確認について まとめ 参考サイト Unity ECSとは ECS（Entity Component System）はデータ指向でコーディングするための…
こんにちは。株式会社FLINTERS エンジニアの瀬田です。 FLINTERSブログ祭りの企画に沿って今回の記事を執筆しました。 はじめに Amazon ECS（Elastic Container Service）は、DockerコンテナをAmazon Web Service（AWS）上で実行・管理するためのサービスとして広く利用されています。しかし、AWS環境でのデプロイとローカル環境での開発・テストの間にはさまざまな問題が潜んでおり、コンテナをローカル環境で正確にテストするのは難しいことがあります。 特に、AWS Software Development Kit（SDK） を使って他のAW…
今はECSをチマチマ触っている。ECSで開発をしているというよりは、ECSで自分の作ろうと思っているゲームが作れそうかの検証と言った感じでやっている。 実際にゴリゴリ開発しているわけではないので参考程度にしてください ECS、なんだかんだで難しいなと思った。し、そもそも現状のECSではできないこともある。ECSでやりたいことは大量のオブジェクトの描画で負荷がかかりすぎないようにしたいというものなので、 大量の静的なオブジェクトはECS 細かい制御はGameObject という風に使い分けるのが良いだろうなと思った。大抵はそれで解決するのだけれど、ちょっと困ったことは物理で、Unity Phys…
はじめに 先日、Rails 7.2で作ったアプリをECSで動かすことをやりました。 miyohide.hatenablog.com 発展的な話題として、環境変数で指定したRDSの接続先情報をSecrets Managerに登録しているものを参照する形式に変えることにします。 事前準備 事前準備として、以下のことをやります。 Secrets Managerに対するVPCエンドポイントを作成する タスク実行ロールにSecretsManagerReadWriteを追加する 順番にやっていきます。 1. Secrets Managerに対するVPCエンドポイントを作成する 以前CDKでVPC関係を実装…
AWSの東京リージョンでFargate Spotを「中断されたら困る」割合で利用している場合、2024年10月は見直し時かも知れません。 はてながECS Fargateで運用しているWebサービスの多くは、状況に応じてリクエスト数≒負荷が増減します。 これに対して、リクエストを受け持つECSサービスのタスク数をオートスケールさせてコスト最適化を図っています。 ボトルネックはCPUで、CPU使用率を追跡していることが多いでしょうか。 オートスケールで追跡する使用率にはスケールアウトまでの間の負荷に耐えるための余裕を持たせます。 この余裕の部分をSpotタスクで確保することで更にコストを削減できま…
2024年10月11日に、QYResearchは「車載型水素貯蔵システム（水素貯蔵タンクまたは水素貯蔵ボトル）―グローバル市場シェアとランキング、全体の売上と需要予測、2024～2030」の調査資料を発行しました。本報告書は、車載型水素貯蔵システム（水素貯蔵タンクまたは水素貯蔵ボトル）の世界市場を分析し、主要企業の総売上高、収益、価格、市場シェア、ランキングなどを掲載しています。また、地域別、国別、製品タイプ別、用途別に市場を分析しています。2019年から2030年までの車載型水素貯蔵システム（水素貯蔵タンクまたは水素貯蔵ボトル）の市場規模を販売量と売上高に基づいて推計と予測しています。企業が…
こんにちは、リーナーの小久保 id:yusuke-k です。 この記事は、リーナーという会社の名前は知ってるけど、どんな会社なのかもうちょっと知れるといいな、という人向けの簡潔な紹介記事です。内容についてより詳しく聞いてみたいことがあればお近くのリーナーメンバーに気軽にお声がけください。 プロダクトとチームの現状と課題 リーナーは調達購買領域で、BtoB SaaSを開発提供しているスタートアップです。 調達購買とはいわゆる「企業の買い物」です。複雑なプロセスが絡み合う領域ですが、現在はその中でも、見積や購買（発注）における業務を中心に扱っています。 二つのプロダクト、一つの新規プロダクト リー…
2024年10月10日に、QYResearchは「車載グレードのSMD水晶発振器―グローバル市場シェアとランキング、全体の売上と需要予測、2024～2030」の調査資料を発行しました。本報告書は、車載グレードのSMD水晶発振器の世界市場を分析し、主要企業の総売上高、収益、価格、市場シェア、ランキングなどを掲載しています。また、地域別、国別、製品タイプ別、用途別に市場を分析しています。2019年から2030年までの車載グレードのSMD水晶発振器の市場規模を販売量と売上高に基づいて推計と予測しています。企業が事業成長戦略を策定し、競合状況を評価し、市場ポジションを分析し、車載グレードのSMD水晶発…
elasticsearchのあるindexをcloseしようと、curlを実行したところ 「curl: (52) Empty reply from server」と表示 $ curl --cacert config/certs/http_ca.crt -u elastic -XPOST http://localhost:9200/test_index/_close curl: (52) Empty reply from server また、 elasticsearch_server.json には以下のようなログ {"@timestamp":"2024-10-09T22:49:47.010Z"…
11月17日（日）に東京ビッグサイトで開催される コミティア150に参加します。 2月以来の参加になります。 今回は1996年から98年にかけて竹書房の近代麻雀誌に描いた読切4本をまとめた本を出します。 『赤い花咲いたら / 松本剛麻雀作品集』 収録作は 以下の4本。 ●親待ち千点棒 (19996年 近代麻雀オリジナル掲載) ●なかない渚 (1996年 近代麻雀オリジナル掲載) ●少女少年テケテケテケ (1997年 近代麻雀ゴールド掲載) ●赤い花咲いたら (1998年 近代麻雀オリジナル掲載) 「なかない渚」は2007年発行の講談社BOX版『すみれの花咲く頃』に収録されていて、現在も同書電子…
はじめに こんにちは！トモニテにて開発を行っている吉田です。 今回は API を本番のデータにつなぎながら確認できるようステージング環境を作成したのでそのことについて書いていきます！ 目的 本番環境へのリリース前には、さまざまなケースを考慮したテストを行うことが不可欠です。しかし、開発環境で考えられる限りのケースを網羅しても、どうしても考慮漏れが発生することがあります。このようなリスクを軽減するために本番環境を利用したステージング環境を構築しました。 これにより、実際のデータを使用しながら運用時を想定したテストを行うことが可能になりリリース前に潜在的な問題を早期に発見し、サービスの品質を向上が…
はじめに こんにちは！ CRE（Customer Reliability Engineering）でサーバーサイドエンジニアをしているotaka(@oh_minisera)です。 突然ですが、管理画面から重いクエリを発行してしまい本番環境に障害が発生...。あなたならどう対応しますか？ 今回は管理画面を舞台にした障害事例に対し、どんな背景の下で意思決定をしたのか紹介できればと思います。 障害は突然やってくる いつもアラートを確認しているチャンネルにこんな投稿が。 この後、本番環境にてアプリ向けのAPIや決済用APIのパフォーマンスが一時的に悪化する障害が確認されました。調査の結果、管理画面から…
概要 10月5日(土)に開催されたYAPC::Hakodate 2024 で「AWS COST CUT FIGHT」という株式会社DELTA様のイベントがありました*1。 その中で弊社SREが2000$越えのコスト削減を達成しました。 むずかった😇月間$ 2,150のAWSコスト削減に成功しました！あなたはいくら削減できる！？コスト削減クイズにチャレンジ！presented by 株式会社DELTA https://t.co/CQyjt4khLM #yapcjapan— nakamura (@__namakura) 2024年10月5日 と思ったらついに2000ドルの壁を超えた猛者が！#yap…
新下駄配列 月配列 tomoemon-AZIK 新下駄配列 y-koutarou.hatenablog.com こちらを使用しています。 判定は、交互打鍵を誤ってロールオーバーしてしまうことが多く、 反対に同時打鍵の精度は良いので、 ７０にしています。 変更点としては、句読点を押したときにスペース（空）も同時に出力するようにしたり、 「じぇ」を”s@”に変更と「でゅ（i5）」の追加です。 タイピングゲーム用では記号キーを削除し、 また、かなのタイピングゲーム用では：に、 ECSとスペース（逃空）*1を割り当てています。 また、機能キーや記号を色々変更していますが、長くなるので省略します。 やま…
機能追加 - WindowsでのEBSタスクアタッチのサポートを追加 改善 - ECS_OFFHOST_INTROSPECTION_INTERFACE_NAMEが有効なインターフェース名であるかを検証 改善 - GPUデバイスが検出されない場合のecs-initで警告を追加 改善 - 「リソースが消費されていない」というログメッセージにリソース情報を追加 バグ修正 - タスクオブジェクトのStringメソッドに読み取りロックを追加 github.com
こんにちは！サーバーサイドエンジニアのkurisuです。 2024年06月に、B/43あとばらいチャージの裏側でサービス提供していただいている事業者の移行を行いました。その際、返済データのリコンサイルバッチの設計と実装を担当しました。 外部サービスとのデータ連携における不整合は、多くのシステムで避けられない問題です。 本記事では、B/43のあとばらいチャージ機能での事例をもとに、リコンサイルの重要性と実装時の検討ポイントをご紹介します。 リコンサイルとは 外部サービス連携における課題と不整合の要因 1. 自社から外部サービスへの通信エラー 2. Webhook通知の不達や遅延 外部サービスにお…
はじめに FireLens の構成 awsfirelens ログドライバー FluentBit・Fluentd の config 生成機能 ログ損失の回避策の課題 init を利用した INPUT の設定のカスタマイズによる解決策 おわりに カスタム init のソースコード はじめに AWS FireLens は、Amazon ECS で動作するコンテナが出力するログを、FluentBit または Fluentd を使って柔軟にルーティングするための仕組みです。特に、タスク定義のみでログルーティングの設定が可能なため、構成管理をシンプルにできる点が特徴となっています。 しかし、大量のログを欠…
aws.amazon.com
toris.io
techblog.kayac.com
speakerdeck.com
sinsoku.hatenablog.com
engineer.crowdworks.jp
qiita.com
techblog.housmart.co.jp
www.itmedia.co.jp
