DynamoDB

こんにちわ Twitter です。 TL;DR(要約)

みそ汁の具はわかめと豆腐が一番！ こんにちは！ みそ汁の美味しさに目覚めた、エンジニアの山元です。 この記事では、先日実施した求人閲覧履歴データのRedisからDynamo DBへの移行についてご紹介したいと思います。 移行の背景 OpenWorkは現在（2022年11月現在）約48000件の求人情報を掲載しております。 そして、求人情報に関連したネイティブアプリの機能として「求人閲覧履歴機能」があります。 求人閲覧履歴機能 この求人閲覧履歴ですが、求人閲覧後すぐに履歴に反映される必要があるため、データアクセスが高速なNoSQLであるRedis上に保存されていました。 しかしRedisは揮発性…

lambdynamo-counter とは？ AWSのLambda関数とDynamoDBで構成されたアクセスカウンタです。 github.com ここしばらく息抜きに20世紀風のホームページを作っている。 https://7474.github.io/homepage/ ホームページにはアクセスカウンタが必須なのだけれど、20世紀風のアクセスカウンタサービスを探すより作った方が早かろうと作った形。 以前こういう遊びをしていたこともあるので、そのリメイクでもある。 inside.dmm.com 追記： AWS LambdaとServerlessのカレンダー | Advent Calendar 2…

2022年10月の「今月の学び」は、AWS DynamoDBについて。 これまでの「今月の学び」は人文系（というか雑学に近いもの？）の世界が多かったが、こういうテーマも取り扱うということは最初から考えていた。 k5trismegistus.me DynamoDBについての基礎知識 DynamoDBについての理解 テーブル（キー）設計について テーブル設計実践 おことわり 対象となるアプリケーション まずはクエリから テーブル設計 Track Recommended まとめ DynamoDBについての基礎知識 AWSのWebサイトには Amazon DynamoDB は、key-value およ…

はじめに DynamoDBで特定の項目のNumber要素をインクリメント（デクリメント）したくなった。Get→インクリメント→Updateはナンセンスなので、もっと簡単にやる方法を探した。 対処 @DynamoDbAtomicCounterアノテーションを利用すると解決した。 @DynamoDbBeanpublic class Item { private String id; private int type; private Long value; @DynamoDbPartitionKey @DynamoDbAttribute(value = "ITEM_ID") public Stri…

はじめに DynamoDBの書き込み操作には、putとupdateの2通りがある。 putでもupdateでも、項目が存在しない場合には新しい項目を登録する動きになるが、updateの時に更新する対象が存在しない場合にエラーにしたかった。 対処 まずは、対象の条件をExpressionで作成する。 Map<String, AttributeValue> expressionValues = new HashMap<>();expressionValues.put(":PARTITION_KEY", AttributeValue.builder().s("hoge").build());expr…

インフラ担当の柴田です。 いきなりですが、皆さんAmazon Prime Dayでは何か買いましたか？ Amazon.co.jpの発表では過去最高の売上ということで、結構買い物をした人も多いのかなと思います。 amazon-press.jp 私はというと、「何か買うぞー！」と思いつつ、結局電球などの日用品ぐらいしか買わず、なんとなく後悔してます。 さて、Amazonといえばそのインフラを支えているのがAWSということで、AWSのブログでAmazon.comのPrime Dayで2022年はどれだけAWSのリソースが使われたのかが紹介されています。 aws.amazon.com その中で、Dyn…

こんにちは。ROBOT PAYMENTでエンジニアをしているtakamoriです。 今回は、AWS App Runnerを使って簡単にデプロイできましたの記事の続編として、AppRunner環境の構築に利用しているAWS CDKの実装編を書いていきたいと思います。 tech.robotpayment.co.jp 目的 本記事の目的は、主にAppRunnerとRDS連携のCDK実装のサンプルコードの紹介です。 AppRunnerはフルマネージドサービスなので簡単な設定で利用できますが、RDSやDynamoDBといった別リソースにアクセスする等が往々に発生します。その際の参考にしていただければ幸い…

この記事は個人ブログと同じ内容です DynamoDB の基本概念まとめ // はじめに こんにちは、back checkでSWEとして活動しているぐっきー（@Area029S）です。 さて、最近 back check のプロダクトで一部 DynamoDB を導入しました。 私自身DynamoDBを触るのが初めてであり、理解を定着させるためにドキュメントや書籍でキャッチアップした内容をもとに DynamoDB で登場する基本的な概念についてまとめます。 基本概念 Table RDBのテーブルのようなもの。概念的に一緒に属しているレコードをグループ化しておく場所。スキーマレスであるため、複数種類の…

調べたことをつらつらと書いていきます。知識があやふやな部分のみまとめてるので網羅性はありません。あと、個人の理解で書いてるので間違ってるかも。 受験日までこの記事を成長系ドキュメントとして更新していきます。 CloudTrail ファイルの整合性の検証 オペレーションログ 証跡のクエリ Trusted Advisor 他サービス連携 Config 外部IDでのコンソールアクセス AD Connector SAML IAM S3 Resource フィールドの書き方 Principal の root CloudWatch エージェント ログファイル EC2 キーペア変更方法 Run Comman…

こんにちは、Mackerel チーム CRE の須藤 ( id:do-su-0805 ) です。今回のアップデート内容をお知らせします。 AWSインテグレーションによるRDS連携ホストの自動退役に対応しました AWS インテグレーションにて、タグの情報をもとにロールの設定を行える対象サービスを拡充しました Mackerel コンソールでのAPIキーがマスキングされるようになりました mkr でメトリック一覧が出せるようになりました アクセシビリティの改善を行いました 不具合を修正しました AWSインテグレーションによるRDS連携ホストの自動退役に対応しました AWSインテグレーション機能で連携…

このページは特に人に見せるためのものではなく自分の実務で使用したAWSの機能をまとめていくことを目的としている なのでこざかしいことは書かずに単純に書いていく 主観として勝手に書いているので間違いがある前提で書いていくし、リライトを前提としているので信用しすぎないほうがいい 僕の考えた最強のAWS説明図（落書き） S3 CloudFront lambda API Gateway CloudWatch（status codeもついでに記載） 200(OK) 204(No Content) 400（Bad Request） 401(Unauthorized) 403(Forbidden) 404(…

メモ 途中で力尽きた www.youtube.com 目次 サーバレスアプリケーション やってみた経緯 サービス思考アーキテクチャ(SOA) マイクロサービスアーキテクチャ 仮想サーバへの依存 サーバーレスへ移行することでの改善点 サーバレスへの進化 各デザインパターン WEB API を作ってみよう DynamoDB Lamdba 現状把握完了 追記 pythonで書いたら通った サーバレスアプリケーション やってみた経緯 転職活動用の職務経歴書修正と面接対策を始める 計5時間経過後、コレジャナイ感が出てくる もやもやしたまま寝る 起床後、そうだ！サーバレスアプリケーションをやろうと思う サ…

最近、AWS Amplify Studioという便利なツールが注目を集めています。AWS Amplify Studioは、ローコード開発のアプローチを取り入れており、誰でも簡単にWebサイトを作成できるクラウドベースのプラットフォームです。私も最近、AWS Amplify Studioを使って自分のWebサイトを作ってみました。この記事では、その手順と経験を共有したいと思います。 aws.amazon.com AWS Amplify Studioとは？ AWS Amplify Studioは、AWSが提供するローコード開発環境です。これを使えば、プログラミングの知識がなくても、直感的なインター…

[第40話]ぷにるはかわいいスライム - まえだくん | 週刊コロコロコミック 物価高の時代、バーミキュラが値下げできた“製造改善”とは? PS5用新型コントローラー「Project Q」は8インチHDディスプレイ！ 従来モデルの振動機能なども全て搭載【PlayStation Showcase 2023】 「秋葉原で制服女子が売春」と報じたweb記事が炎上 読者が指摘した“3つの矛盾点” 『眠りつづける少女たち』 集団発生する〈謎の病〉の原因とは - HONZ ストリートピアノは騒音なの？ 名古屋市がゲートタワーに設置→苦情受け休止に ＜ハッシュタグ＃なごや＞：中日新聞Web 『メタルギア』シ…

NewsPicks SREチームのEdwin Wilsonです。 NewsPicksでは開発環境のテストデータのプロビジョニングを行うツールとしてDatarefreshというものがあります。 このツールは本番環境のデータストアから開発環境のデータストアに対してデータを同期するアプリケーションです。 対象のデータストアは以下となります。 Amazon RDS Amazon DynamoDB Amazon S3 Amazon ElastiCache 個人情報はRDSにのみに存在しており、マスク処理を行った後、同期しています。 DynamoDB ,S3, ElastiCacheには個人情報を存在しな…

1. はじめに こんにちは、morioka12 です。 本稿では、CTFtime のイベントに記載されている2022年に開催された CTF のイベントで、Cloud に関する問題をピックアップして攻撃手法やセキュリティ視点での特徴について紹介します。 また、昨年の2021年版は以下で紹介していますので、良ければこちらもご覧ください。 昨年のブログでは、各サービスにセキュリティ的な視点で紹介しましたが、今回は説明が重複するため、各問題に焦点を当てて大まかに紹介します。 scgajge12.hatenablog.com 1. はじめに 1.1 調査対象 2. Cloud 環境におけるセキュリティ視…

本記事は 初夏のAWSアワードエンジニア祭り 4日目の記事です。 🍦 3日目 ▶▶ 本記事 ▶▶ 5日目 💻 こんにちは！最近、息子がよく言う「へー、そうなんやー」が好きすぎて、大人が「そうなんや」って言っててもニヤニヤしてる志水です。 今年から初めてAWS Ambassadorsとして選出頂きました。他のAmbassadorの方を見ているとまだまだ力不足であり、更に今回退任された佐々木さんには全く及びませんが、ネットコムは佐々木さん・上野さんだけじゃないぞ、というのを自分なりに頑張って証明していきたいと思います。その一歩として僕の大好きなCDKとChatGPTに関する話をしようと思います。 …

Terraformのstateを格納するbackend(S3/DynamoDB)を構築する、CloudFormationテンプレートの備忘録です。 はじめに Terraform backendを構築するCloudFormationテンプレート おわりに 参考 はじめに Terraformのstateを格納するbackend自身をどのように構築するか、はちょっとした考慮ポイントですね。 Terraform自身で実装すると少し厄介(そのTerraformのstateはどう管理するの？問題が発生する)なので、何かしらTerraform以外の手段で構築するのも手です。 AWSであれば、CloudFor…