バージョンによる違い パラメータ,キーワードの"(ダブルクォーテーション)区切り 一定以上のバージョンからパラメータキーワードやパラメータを"(ダブルクォーテーション)で囲む必要が無くなった。 ※新バージョンでも"(ダブルクォーテーション)区切りの互換性はある(Ver2.7.35で確認) コマンド構成 aws <service> <command> <parameter> [option] service ec2等コマンドを実施したいサービスの選択 command サービスに対して実施したいコマンド parameter コマンドに必要なパラメータの指定 option オプションの指定 環境設定…

タダです. Route53 でレコードを管理している AWS アカウント Aと ACM を発行して ALB や CloudFront に使う AWS アカウント B が別れている場合,ACM の DNS 認証で証明書を有効化できるかというのを確認したので備忘録として残しておきます. ACM の発行の作業 まず,アカウント B が ACM を発行します.アカウント A で管理しているホストゾーンのドメインでワイルドカード証明書を取ろうとしている例になります.Route53 に登録するレコードを確認してメモしておきます. Route53 でレコードの登録 アカウント A でレコードを登録していきま…

今日の積み上げ ポケットスタディ AWS認定デベロッパーアソシエイト Kindle版 SECTION６：モニタリングとトラブルシューティング テキストリーディング オンライン英会話「Cambly」体験談を読んだ DVA学習 今日やった範囲の「モニタリングサービス」で改めて認識したこと。 CloudWatchメトリクス RDS FreeableMemory：使用可能なメモリ容量 DynamoDB ThrottledRequests：スループット上限を超えたリクエスト数 Lambda Invocations：請求対象となる「リクエスト数」 Duration：請求対象となる関数の「実行時間」 SQS…

この記事は、前回の MLOps への道② の続きです。前回の記事をまだお読みでなければ、先にご一読いただけると幸いです。 こんにちは！ GIMLE チームの太田です。 年末も近づいてきて、寒さも増してきましたね 彡(-_-；)彡 しっかり暖かくして、冬を乗り切っていきましょう！ 今回は、MLOps への道シリーズ、第3弾です！ ※本シリーズは「できるだけシンプルに」「End To Endで」継続的学習・デプロイ基盤の作成に至るまでの過程を実践してみよう、という想いのもとで執筆しております。扱うデータの内容や学習アルゴリズムの詳細、推論結果の解釈の仕方など、機械学習のディープな部分にはあまり踏み…

こんにちは。X（クロス）イノベーション本部 ソフトウェアデザインセンター セキュリティグループの耿です。 Route 53 Resolver DNS Firewall を使ってみた話です。VPCのセキュリティグループや AWS WAF と比較すると話題になることが少ないサービスですが、簡単に導入でき、多層防御の手段の一つとして有効であると感じたため、使ってみた際に考えた現実的な設定方法を書き残したいと思います。 Route 53 Resolver とは Route 53 Resolver DNS Firewall とは フェールクローズとフェールオープン Route 53 Resolver D…

今日の積み上げ ポケットスタディ AWS認定デベロッパーアソシエイト Kindle版 SECTION５：リファクタリング 章末問題1-16：15/16 SECTION６：モニタリングとトラブルシューティング テキストリーディング 「ビリギャルが、またビリになった日」を読み終わった（一気読み） DVA学習 今日やったところでは、移行の「6つのR」の押さえておきたい。 ReHost（リホスト）そのままの構成でAWSに持っていく RePlatform（リプラットフォーム）プログラムコードは変更せず、最適化を検討する（ALB ＋ EC2 Auto Scaling、高可用性実現のためのマルチAZ化など）…

よくよく考えてみるとGit勉強しなおしたのはお仕事に関連してなので CodeCommitとGitが重要。なのでSaplingやめてこっちへ。 以下、失敗の記録です。 configファイルに設定するユーザーは鍵のID configファイルに設定する内容は公式の通り configに書いてあった他のSSHからコピーするな！ docs.aws.amazon.com 教訓： 疲れた休憩する。そのまま実行すると集中力が落ちてこうなる。

エンジニア・プログラマーの学習に約立つコンテンツのセール情報を集めました 1位 現役シリコンバレーエンジニアが教えるPython 3 入門 + 応用 +アメリカのシリコンバレー流コードスタイル ¥27,800 → ¥1,200 96%OFF!! ⭐ ⭐ ⭐ ⭐ （19,075件） 現役シリコンバレーエンジニアが教えるPython入門！応用では、データ解析、データーベース、ネットワーク、暗号化、並列化、テスト、インフラ自動化、キューイングシステム、非同期処理など盛り沢山の内容です！ 2位 【キカガク流】人工知能・機械学習 脱ブラックボックス講座 - 初級編 - ¥15,800 → ¥1,200 …

AWS IoT にモノを追加する AWS IoT にアクセスして「モノ」を選択 「モノを作成」をクリック 「１つのモノを作成」を選択して「次へ」 任意のモノの名前を入力して「次へ」 ※ ほかの項目はデフォルトでOK 「新しい証明書を自動生成（推奨）」を選択して「次へ」 「ポリシーを作成」をクリック 任意のポリシー名を入力して、以下のようにポリシーを設定して「作成」 「ポリシーをアタッチ」のページに戻って作成したポリシーを選択して「モノの作成」をクリック 証明書をダウンロードし「完了」をクリック 以下の3つをダウンロード デバイス証明書 プライベートキーファイル Amazon 信頼サービスエンド…

皆さん，こんにちは！最近は検索エンジニアとしての仕事がメインの柏木（@asteriam）です． はじめに 今回はTips的な記事になります．背景としては，アプリの検索ログをBigQueryに溜めているのですが，それを検索エンジンのサジェスト機能で使用するために，BigQueryからAmazon OpenSearch Serviceへデータ連携を実施しました．その際にBigQueryのシャーディングされたテーブルをどのようにして連携したかというお話になります． 検索システムのデータ基盤構築に関する過去のブログでも紹介していますが，我々はGlueを用いて検索エンジン（OpenSearch）へのデー…

■良かったこと ①AWS研修でパフォーマンステストについて学べたこと 観点の洗い出しだけでなく、実際にプロジェクトの中で回さないといけない。 開発途中から段階的にパフォーマンステストをやることは基本的に無いから、あるべき姿を学んだ後にどうやって業務に活かすのかが悩みどころ。 AZさんの指摘の数々からプロフェッショナルを感じた。 ②昨晩、2日分の筋トレを行ったこと ③ベンダーさんと飲みに行ったこと

Ractorちゃん並列化してたー。 - @ledsun blog でRactorで並列に動かせていることを確認しました。 しかし4コアのマシンで確認したため、並列数の上限がわかりませんでした。 そこでAWS上のEC2インスタンスを使って並列数の上限を調べます。 t3.2xlargeインスタンスを使います。 t3.2xlargeインスタンスは8コアあります。 8並列までを計測しました。 t3.2xlaregインスタンス上での並列数の計測結果 4並列でピタっと止まりました。 データの投入速度が足りていないのでしょうか？

はじめに 初めまして。エンジニアの有山と申します。普段は主にデータ分析基盤の開発、運用、およびウェルスナビのサービス基盤全般に関わる業務を担当しています。 今回の記事では、主にデータ分析基盤の設計や主要な技術に興味関心のある方を対象に、ウェルスナビで構築しているデータ分析基盤のご紹介と、Digdagを使用して構築したデータパイプラインの性能改善について解説していきます。 ウェルスナビのデータ分析基盤 ウェルスナビでは、データドリブンなサービス改善を行うため、社内にデータ分析基盤を構築しています。この基盤はマーケティング施策などに利用され、社員は必要なデータにアクセスしてPDCAを効率的に回せる…

Retty インフラチームの中西です。 今回は バッチサーバのリプレースを行ったお話になります。 バッチサーバについて 課題について 1. EC2-Classic からの脱却 2. セキュリティ 3. ログ管理 4. バッチについての管理、情報がない 課題に対する対応 1. EC2-Classic からの脱却 2. セキュリティ 3. ログ管理 4. バッチについての管理、情報がない 振り返りについて 良かったこと 苦労したこと まとめ バッチサーバについて Rettyのサービス黎明期から存在しているサーバでEC2インスタンスとなります。 (EC2-Classic で起動していた事から歴史を感…

こんにちはNewsPicks SREチームのエドウィンです。 NewsPicksが提案した「「最高の開発者体験」への挑戦 〜Amazon ECSによる全面コンテナ化の軌跡〜」というテーマが「AWS Dev Days Japan 2022」の発表テーマとして選ばれました。 「AWS Dev Day」はAWSさんが開催する「開発を牽引するエンジニアのためのテクニカルカンファレンス」です。 今回の「AWS Dev Day Japan 2022」は2022年11月8日から2022年11月12日の間に開催されて、NewsPicks SREチームリーダー安藤裕紀さんとDay 1の15時のセッションで発表し…

こんにちは、ロジカル・アーツの井川です。 OPC UA サーバではユーザ名とパスワードによるユーザ認証を設定することができます。今回は、ユーザ認証が設定されたサーバから SiteWise でデータを取り込んでみたいと思います。