LocalStack

CS1の石井です。 タイトルの通りLocalStackというツールを用いてCDKをローカルで動作確認を行う記事となります。 対象読者 CDKワークショップを終わらせている方 devcontainerを使える方 記事を書いた動機 私は普段仕事でCDKをよく使うのですが、コードの記載や修正をした後、動作確認をnpx cdk synth で確認しています。 これはTypescriptで記載されたCDKをCloudFormationのYamlファイルに変換する作業であり、CDKのコードに不備があれば正しく出力することはできません。 しかし、これは実際にデプロイしていないため、実際にデプロイしてみるとA…

こちらの記事はhacomono Advent Calendar 2023の12日目の記事です 自己紹介 おはこんばんちは。 hacomono 開発部の iwazer です。 久しぶりの登場ですが、この間にティアキンも Cyberpunk2077 最終 DLC も Starfield も全部発売されました。 みなさんクリアしたでしょうか。私はクリアしました。 今回は AWS を使った開発をラクチンにしてくれる LocalStack について軽く書こうと思います。 概要 LocalStack はローカル環境でAWSクラウドサービスをエミュレートするためのフレームワークです。 AWS に実際に接続す…

先日、LocalStack 2.0がリリースされたので、Spring Bootアプリケーションで利用してみます。 LocalStack 1.0と2.0の違いをChatGPTに聞いてみました。 LocalStack 1.0とLocalStack 2.0は、AWSクラウドリソースをローカル環境でシミュレートするために使用されるオープンソースプロジェクトです。これにより、開発者はオフラインでAWSサービスをテストできます。LocalStack 2.0は、1.0に比べていくつかの重要な改善点があります。 パフォーマンスと安定性：LocalStack 2.0は、より高速で安定したパフォーマンスが期待され…

こんにちは！Dataintelligenceチームの垣内です。 本連載ではAWSの分散処理サービスである「AWS Glue」を使って、分散処理を実行してみます！第一回目の「サービス調査編」を見られたい方は、こちらからご覧ください！ kdl-di.hatenablog.com 今回は、ローカルでの開発方法をご紹介します。 アーキテクチャのおさらい compose.yamlの修正 ①ファイル名の変更 ②S3コンテナ init.shの作成 yamlの修正 ～LocalstackでAmazon S3を立ち上げる～ Localstackの起動初期スクリプトをマウントする ③Glueコンテナ yamlの修…

こんにちは出石です。 AWSアプリの開発で、ローカルでサクッと動作確認をとりたい時があります。またはコスト面などの理由で。 そんな時に使えそうかなとlocalstackを触ってみました。 localstackはコンテナでAWS各種サービスをエミュレートできる環境をローカルに用意できます。 先日localstack V1.0の一般提供が発表されました。 localstack.cloud

はじめに こんにちは。 サーバサイドエンジニアの窪田です。 yappliではweb上でノーコードでモバイルアプリ開発ができるプロダクトを提供しています。 その中の主要機能の1つにpush通知があります。 CMSユーザーがyappliのWebアプリ上でエンドユーザーに対して、いつどんなメッセージを送るかということを設定することができます。 push通知機能では 大量の配信 複数のセグメント条件の分岐 複数の配信方法 を実現しています。 この配信基盤の全容は大規模かつ複雑な仕組みになっています。 その基盤のうち部分的にAWS SQSによるキューの仕組みを使っています。 上の機能を実現するためにpu…

Serverless構築が予想以上に長くなってしまったため、2章立てでお送りします。 前回の記事: LocalStackが正式リリースされたので試してみた(その1 セットアップ編) - cer12uのメモ AWSコマンドでserverlessサービスを構築 前回作成したLocalStackを使って、Lambda + API Gatewayでローカルserverlessを立ててみます。 こちらのページが良くまとまっているので、今回はこれをパク参考にしました。 LocalStack入門(第５回) ブラウザからのアクセス方法～API GatewayからLambda関数起動 1. 実行用Lambdaの…

この記事は株式会社エス・エム・エス Advent Calendar 2024 12月23日の記事です。 qiita.com はじめに BPR推進部EA推進Grでエンジニアをしている、尾宇江 @kotaoueです。 苗字が読みづらいので、社内では おうえ で活動しています。 ちなみに、BPR(Business Process Re-engineering)・EA(Enterprise Architecture)で、「部署を横断して会社全体の業務プロセスを改善していこう」みたいな目標のチームとなっています。 この記事では、10月1日からエス・エム・エスに入社し、Kotlin未経験だったおうえが入社…

Amazon OpenSearch Service に入門したいな〜💡っていうときに活用できる公式チュートリアル「Creating a search application with Amazon OpenSearch Service」を最近仕事で紹介する機会があって，今回改めて自分でも試しつつ，さらに LocalStack で動かせるようにしてみた❗️ Amazon OpenSearch Service に入門したいけどコストが気になる〜という話をたまに聞くことがあって，LocalStack なら AWS アカウントがなくてもローカル環境でサクッと試せるので便利なのだ💪 docs.aws.a…

LocalStack とは Testcontainers とは セットアップ テスト対象コード テストコードの実装 まとめ 本記事時は サーバーワークスアドベントカレンダー 2024 - シリーズ 1 の 15 日目の記事です。 LocalStack とは こちらはご存知の方も多いかと思いますが、LocalStack は AWS の主要なサービスをローカル環境で模擬的に動作させるツールです。これにより、実際の AWS 環境を利用せずにローカルでアプリケーションの開発・テストが可能になります。 www.localstack.cloud Testcontainers とは Testcontaine…

これは、なにをしたくて書いたもの？ AWS Lambda関数をTypeScriptで書く場合には、型定義を@types/aws-lambdaから使うことが多いと思います。 @types/aws-lambda - npm ではPythonの場合はどうしたらいいのだろうと調べてみたら、Powertools for AWS Lambda（Python）に含まれているようだったので こちらを試してみることにしました。 Powertools for AWS Lambda（Python）のTypingとEvent Source Data Classesを使う Powertools for AWS Lamb…

24卒で新卒入社いたしました、OTTサービス技術部第2グループの比嘉です。 私が配属されて初めて行なった業務で使って便利だったMinIO*1というツールについてご紹介します。 MinIOはクラウドサービスとして提供されていますが、Dockerなどを用いてローカル環境として使用することもできます。 今回はRuby on Rails + MinIOをローカル環境で使う方法とS3を並行して使う際の環境ごとの向き先制御についてお話しします。 背景 問題点１：AWSに接続できない 問題点２：バケット名決まってない MinIOとは LocalStackとの違い 使用環境 DEMO環境構築 1. Rails…

これは、なにをしたくて書いたもの？ AWS Lambda関数のデプロイパッケージにはzipファイルとコンテナイメージがあります。 このうちzipファイルしか使ったことがなかったので、コンテナイメージを使ってみたいと思います。で、ローカルで動かしてみます。 AWS Lambdaのデプロイパッケージ AWS Lambdaのデプロイパッケージには、zipファイルとコンテナイメージがあります。 Lambda の主要な概念を理解する / デプロイパッケージ AWS Lambda関数をコンテナイメージで作成するには、以下の3種類の方法があるようです。 AWS Lambda関数用のAWSベースイメージを使用…

こんにちは！hacomonoの開発基盤グループでインターンとして活動しているゆーたです。 2024年7月にhacomonoにジョインしました。これまで約2年間、主にアプリケーション開発を担当するインターンやバイトをしていましたが、hacomonoでは開発基盤チームに所属していることもあり、インフラも含めて広く触れる機会をいただいています。 先日、初めてのタスクを完遂したので、今回はその内容を振り返りたいと思います。 TL;DR Notionで管理しているテックブログ記事を、はてなブログへ自動転写するアプリケーションを開発 記事の手動転写による30分〜1時間のリードタイムを、数分に短縮することに…

2024年11月22日に AWS Step Functions で新機能「変数 (variables)」と「JSONata」がサポートされた❗️ aws.amazon.com 特に「変数」は待望の機能なんじゃないかな〜と思う．今までは AWS Step Functions でタスク結果を引き回すときにどうしてもバケツリレーが必要で，正直 ResultSelector / ResultPath という構文も難しく（何度書いても忘れてしまう😇）ある程度複雑なワークフローを実装するときはデータシュミレーターがないと無理に思えるほどだった．個人的には AWS Step Functions は動くように…

エンジニアのコミュニケーションスキルに関する議論 ChatGPTの値上げとAI市場の動向 生成AIとソフトウェア開発におけるエンジニアの役割 AIによる3Dモデリング技術 ソフトウェアエンジニアのキャリアとライフスタイル Windows 11におけるUSB接続複合機・スキャナーの検出問題 優秀なITエンジニアの育成に関する考察 CTOの役割と経験に基づく考察 Bing Wallpaperアプリの不審な挙動に関する報告 Bluesky上でのウェブサイト構築方法 エンジニアの人生を変えた書籍紹介 Blueskyアプリの急激なユーザー増加 5G通信に関するニュースとユーザー体験 Microsoftの…

これは、なにをしたくて書いたもの？ AWS Step Functionsのワークフローを見ていて、エラーハンドリングについて試しておいた方がいいかなと思いまして。 Step Functions ワークフローでのエラーの処理 - AWS Step Functions AWS Step Functionsのエラーハンドリング 内容としては、ドキュメントのこちらのページのものです。 Step Functions ワークフローでのエラーの処理 - AWS Step Functions ワークフローでは、PassステートとWaitステートを除くすべてのステートでランタイムエラーが発生する可能性があるとさ…

Amazon Cognito を操作するコード／テストを実装するときに LocalStack を使いたいな〜と思うけど，Amazon Cognito は LocalStack Pro Edition でサポートされていて，LocalStack Community Edition では使えないと言う課題がある． docs.localstack.cloud もちろん LocalStack Pro Edition を契約して使うという選択肢もありつつ，単純に Amazon Cognito の基本的な API を実行できれば良いのであれば Moto を使うという選択肢もある❗️ github.com …

Moto で AWS サービスをモックして AWS SDK for Python (Boto3) を使った Python コードをテストする場合に @mock_aws デコレータや with ブロックを使うという選択肢がある．詳しくは以下のドキュメントに載っている📝 docs.getmoto.org また Moto には「Server Mode」というコンテナベースで起動する方法もある😀 docs.getmoto.org 普段 pytest を使って Python コードをテストする場合は MySQL や LocalStack などの依存関係を Testcontainers for Pytho…