DynamoDB

参考URL https://www.wakuwakubank.com/posts/639-aws-dynamodb-introduction/ 特徴 Key-Value型のNoSQLデータベースサービス 事実上無制限のスループットとストレージ 管理作業をまかせられる レプリケーション ソフトウェアのパッチ適用 クラスタースケーリング バックアップ & リカバリ オンデマンドバックアップ ポイントインタイムリカバリ DynamoDBストリーム をトリガーとしたLambadaの実行 項目の追加、変更、削除をイベントとして検出 キャパシティーユニット による利用量の事前に設定が可能 1秒あたりの 読…

作業するマシンに、AWS CLIがインストールされているかを確認。 （参考）https://docs.aws.amazon.com/ja_jp/amazondynamodb/latest/developerguide/Tools.CLI.html https://aws.amazon.com/jp/cli/ テーブルを作成する前に、スキーマを作成するなど、構造が決まっていることが望ましい。 ■DynamoDBにテーブルを作成 以下は作成の仕方の一例。 （参考URL） DynamoDB コンソール (https://console.aws.amazon.com/dynamodb/) を開きます。…

はじめに こんにちは、クラウド事業部の志摩です。 DynamoDBにデータを投入する場合、複数の方法があると思いますが、今の現場で仮にDynamoDBを活用するとなった場合、csvファイルを使う可能性が高い気がするので、csvファイルからテーブル作成する方法を試してみました。 下準備 DynamoDBからCSVエクスポート機能があるため、取り込むためのファイルを自ら生成し、それを別の新規テーブル用に読み込ませることで、機能を試してみようと思います。 ダウンロードしたCSVをS3へアップロード。 DynamoDBへインポートするS3バケットを指定。 新規テーブル作成。 インポート いざ！ 見事に…

（注意）本記事ではDynamoDBのアジャイル開発時の考慮点に基づいて意見を述べています。DynamoDBがアジャイル開発に不向きであると主張するものではありません。 はじめに 昨今、システム開発の手法として、アジャイル開発がよく取り入れられるようになりました。 私も何度かアジャイル開発の案件に関わってきましたが、アジャイルと相性が良いサーバレスアーキテクチャがよく使用されます。 そして、データベースの選択に際して、サーバレスと相性が良いDynamoDBが多くのプロジェクトで採用されています。 しかし、アジャイルだからと言う理由だけで安易にDynamoDBを選んで、開発を進めてしまうと思わぬ落…

【Unit4 ブログリレー4日目】 こんにちは、エムスリーエンジニアリンググループの福林 (@fukubaya) です。 今回は、SNSではごく一般的ないいねとその通知機能をDynamoDBを利用して実装したら思ったより大変だったので、その詳細をご紹介します。 キャナルシティ劇場は、福岡県福岡市博多区の複合商業施設「キャナルシティ博多」のシアタービル最上階に位置する劇場。本文には特に関係ありません。 m3ラウンジ m3ラウンジのいいねとその通知の要件 RDBで実装したらどうなるか いいね機能 通知機能 DynamoDBで実装する いいね機能 通知機能 いいねする いいねを取り消す 通知を表示す…

こんにちは！ ピクトリンク事業部商品技術開発部の橋本です。 前回に引き続き、API Gateway + Lambda + DynamoDBを使ったサーバレスなWebアプリを作っていきたいと思います。 API Gateway側の設定やアクセス制限、Lambdaとの疎通に関しては前回解説しましたので、今回はLambda関数の作り込みとDynamoDBからの値の取得について解説していきます。 今回解説するのは②の範囲 前回の記事はこちら tech.furyu.jp

こんにちは！ ピクトリンク事業部商品技術開発部の橋本です。 ハイラルの平和のために焼きリンゴをかじる日々です。明日の希望を取り戻そうぜ！ さて今回は、AWSのAPI Gateway + Lambda + DynamoDBを使ってサーバーレスなWEBアプリを作っていきたいと思います。 常時アクセスに備えたり、大きな負荷が掛かった場合にスケールアップしたいみたいな要件であればEC2を使うのが無難ですが、 利用する人数が限られて いて、 たまに使うくらい のWEBアプリであればEC2を使わずにリーズナブルに仕上げられます。

バクラク事業部Platform Engineering部DevOpsチームの id:itkq です。CTO室という事業部横断のコーポレートエンジニアリング組織を兼務しています。早いもので今年も終わりが近づいてきました。Spotify 2023 Wrappedによると今年一番聴いたアーティストは結束バンドで、一番聴いた曲は『忘れてやらない』でした。 この記事は LayerXテックアドカレ 27日目の記事です。前回は yohei による FlutterアプリにおけるUI Component Architecture でした。次回は Tomoaki が担当します。今回は、勤怠関連の社内Slackアプ…

SOMPO Digital Lab SREの藤野です。 本日はAWS re:Invent 2023のワークショップ「モノリスからマルチテナントSaaSへの移行」に参加しました。 概要 マルチテナントSaaSを構築するため、AWS DMSを利用したDBの移行とアプリケーションレイヤーをマイクロサービス化しました。 Multi-tenant architectures provide agility and operational cost savings by sharing data storage resources for all tenants. In such an environme…

AWS Lambda トリガーを作成して、DynamoDB テーブルからのストリーミングを処理するやつをTerraformで再現しようとすると こういう感じの書き方になるけれど resource "aws_lambda_event_source_mapping" "example" { event_source_arn = aws_dynamodb_table.example.stream_arn function_name = aws_lambda_function.example.arn starting_position = "LATEST" } plan結果はこんな感じで、event_…

SREチームの橋本です。SRE連載の11月号になります。 AWSの多くのリソースはIAMでアクセスを一元管理されていますが、Lambdaではユーザーが実行したり他のAWSサービスから実行されたりする都合上、様々なポリシーが絡んでいます。 特に「Lambdaを呼び出す許可」についてはID（アイデンティティ）ベースのポリシーとリソースベースのポリシーで内容が被るため、どちらで設定するか混乱しているケースも見られます。 本記事ではこうしたポリシー事情をterraformの例と共に整理し、権限設定のベストプラクティスも検討します。 そもそもIAMのポリシーについて ドキュメントによればAWSのポリシー…

バックエンドがS3で、ロック管理でDynamoDBを使ってるのが前提で、stateのkeyを変更したかった。 でもkeyを変更すると同一リソースを管理するstateが二重に存在することになってplan結果がaddとdestroyが混在する形となったので、key変更前のS3のtfstateファイルを削除した。 そうすると、以下エラーでterrform initで失敗した。 The checksum calculated for the state stored in S3 does not match the checksum stored in DynamoDB. Bucket: xxxxxx…

こんにちは、クラウド事業部の山路です。 今回はAWS re:Invent 2023のKeynote (Day2) の様子を共有します。 ※追記：録画も公開されたので興味ある方はこちらからどうぞ。 www.youtube.com 講演開始 発表者はAWS CEOのAdam Selipskyさん。 まずはAWSを利用する企業やパートナーの紹介。当たり前ですがすごい数。 まずはインフラの話から。リージョン、AZなど。 次はストレージの話。Amazon S3はこれまで進化を続けてきましたが、ストレージにはさらなるスピードが求められていると課題を紹介。 早速の新サービスとして、Amazon S3 Exp…

こんにちは。エムスリーエンジニアリンググループのコンシューマチームでアーキテクトをしている園田です。 本日はコンシューマチームのブログリレー 4 日目です。 前回の記事で「Amplify Gen2 ってなんだ？」って書いていたんですけど、その直後に Amplify Gen 2 についての公式アナウンスがありました。 aws.amazon.com さっそく Gen 2 を試してみたので今回はそのときの手順を書いています。 ちなみに、所感としては従来の Amplify が CloudFormation だとすると Gen 2 が CDK ってイメージです（伝わらないか）。 とてもニッチな上に、かな…

みなさんこんにちは。AWS CLI が好きなテクニカルサポート課の市野です。 さて、ラスベガスでは re:Invent 2023 が始まりましたが、現地時間 2023年11月27日 8:00 AM（日本時間 2023年11月29日 1:30 AM）より Adam Selipsky によるキーノートがありました。 以下、キーノート中に発表されたサービスと、AWS 公式ブログ、What's New の記事をまとめました。 発表されたサービス 1. Amazon S3 Express One Zone highest performance and lowest latency cloud obje…

こんにちは。島村です。 re:Invent 2023 始まりましたね。 私は今年も来ることができ、現地で参加をしています。 今年の現地で初めて参加したWorkshop DOP301: Boost your application availability with AIOps on AWS の参加レポートを書いてみます。 概要 今回参加したWorkshop はAIOpsを体験する Workshop です。 catalog.workshops.aws AIOpsとは、運用の取り組みの中にAIを活用することで運用上の問題の検出やデバッグ、 解決に費やす時間と労力を削減することを狙いとした概念です。…

はじめに みなさん、こんにちは！ ウェルスナビで開発組織のHRBPを務めているshoheiです。 11月14日（火）、社外のエンジニアの方々に向けたイベント "WealthNavi Tech Talk vol.1" を実施いたしました！ 今回は当社で提供しているWealthNaviのバックエンド開発をメインテーマに取り上げ、業務や技術知見紹介などについてLTを実施しました。 本記事では、イベントでの様子をご紹介できればと思います。 イベントバナー ウェルスナビにおける技術広報活動への取り組み 本編に入る前に、当社の技術情報発信に対する取り組みについて紹介させてください。 ウェルスナビではエンジ…

Azureの資格3つめに挑戦するよ Azure全体/AI/データと全部で3つあるAzure認定資格の基礎(Fundamental)レベルの最後のひとつ、正式名称『Microsift Certified: Azure Data Fundamentals』に合格してきました。 こちらも準備すれば受かってふつうではあるのですが、これから挑戦する方や未来の自分向けに、今回も情報を残して振り返っておこうと思います。 DP-900: Azure Data Fundamentals

AWSの勉強として、BitFlyerのAPIを使用して、BitCoinの自動売買プログラムを組んでみた。今回の主目的はAWSの勉強なので、実際儲かるかは不明。 準備するもの BitFlyerの口座 AWSのアカウント システム構成 こんな感じ。（書き方あってる？）EventBridgeから5分ごとにトリガーを出し、そのトリガーでLambdaがBitCoinの価格を取得、DynamoDBに保存、ゴールデンクロスの場合、Bitcoinを成り行きで購入し、0.4%を上乗せして指値で売り注文を出す。（0.4% は、BitFlyerの手数料が0.15%なので） 実装 DynamoDBの準備 AWSの上部…