AWS
Alternative Wrestling Show
アメリカのカリフォルニア州を拠点に活動しているプロレス団体。
AWS
The American Welding Societyの略。日本で言うところのJWES。
AWS
→ Amazon Webサービス
このタグの解説について
この解説文は、すでに終了したサービス「はてなキーワード」内で有志のユーザーが作成・編集した内容に基づいています。その正確性や網羅性をはてなが保証するものではありません。問題のある記述を発見した場合には、お問い合わせフォームよりご連絡ください。関連ブログ
AWS GlueでS3→RDSへのETLを実施するメモ
目的 AWS Glueを使ってS3からRDSへのETLを実施したい 結構ハマったので解決方法のメモ AWS Glueとは マネージドな（サーバレスな）AWSのETLサービス データソースからデータターゲットにいい感じにデータを入れてくれる（かなり自動でやってくれる） スクリプトを書いて微調整することも可能 Python, Scalaでスクリプトかける様子 aws.amazon.com 扱えるデータソース、データターゲット https://docs.aws.amazon.com/ja_jp/glue/latest/dg/how-it-works.html 様々なデータソース、データターゲットを扱…
ネットで話題
もっと見る
aws.clouddesignpattern.org
aws.amazon.com
speakerdeck.com
gigazine.net
aws.amazon.com
tomomano.gitlab.io
dev.classmethod.jp
dev.classmethod.jp
www.awsmicrosite.jp関連ブログ
追記：AWSのインスタンスの起動と停止の自動化
先日、上記のタイトルでインスタンスの自動化をしましたが、料金について補足です。AWSのインスタンスはEIPが関連付けされたまま停止すると料金が発生するようです。これはインスタンスを停止したまま固定のIP（EIP）を維持するための料金のようです。実際に、私も料金がかかっていました😱 。料金をかけないよにするにはEIPを開放するしか内容ですね。 ■ Elastic IPの料金を理解する 次の条件がすべて満たされている限り、Elastic IP アドレスに料金は発生しません。 Elastic IP アドレスが EC2 インスタンスに関連付けられている。 Elastic IP アドレスに関連付けられて…
プログラミング初学者がまとめる〜AWSネットワーク周りについてまとめてみようと思う。ざっと理解する編〜
＊自身の言葉で書いてますので、間違っていることもあるかと思いますが、ご了承ください。訂正のコメントを頂けるとありがたいです。＊ 今回はAWSのネットワーク周りの言葉についてざっくりまとめてみました。 言葉の定義中心になります 私は図にして理解しました。図はたくさんあるのでググってみてください。。 ◯VPCとは Virtual Private Cloudの略です。 ネットワークを構成する一番大きな箱だとイメージしてもらいたいです。 専門的にいうと、AWS内の領域を表します。その領域内ででのIPアドレス管理や、インターネットとどう接続させるかなどの設定が必要になります。 ◯サブネット サブネットは…
AWSのインスタンスの起動と停止の自動化
本日、学習した内容は「AWSのインスタンスの起動と停止の自動化」です。 なぜ自動化したのかというと、 ①チーム開発でデプロイを担当でAWSに公開用のインスタンスを生成している。 ②AWSのEC2利用は、750時間／月であれば無料を選択しているが、24時間インスタンスが実行中なので、気付いたら80％使用してますよアラームが届く。 ③その度にAWSへログインしてインスタンスの停止や実行をするのではめんどいな。 以上の理由で自動化にTRYして見ました😎 AWSの詳しい料金体系はこちらで確認してください👇 AWS の料金モデルとクラウドによるコスト削減 | AWS aws.amazon.com ■ 自…
AWS Firelensでfargateログをdatadogに集約する
どこでもかんたんVR「スペースリー」のインフラを担当しています佐藤です. スペースリーではメインのRailsアプリのアプリケーションログをdatadogで管理していますが， 新たにAWS ECS Fargate上でアプリを実行・運用するときでも， アプリケーションログはdatadogに集約して監視・運用したいという要件があります． これを実現する方法として AWS Firelensを導入したのでその詳細についてまとめました. 1. 前提 Firelens とは Firelens はAWSが提供するログ転送エージェントです． 従来AWSにおけるログ転送手段としては，AWS CloudWatch …
Amazon Athenaメモ
参考資料 docs.aws.amazon.com データベースの作成 CREATE DATABASE mydatabase テーブル作成 CREATE EXTERNAL TABLE test ( id STRING, name STRING, value INT ) LOCATION 's3://{bucket-name}/athenatest/'; レコード挿入 INSERT INTO test VALUES ('id0', 'Sato', 100); セレクト select * from test;
運用中サービスのクラウド移行で得た知見(見積もり・テスト・本番移行)
＜エムスリー Advent Calendar 2020 まで残り4日となりました。Advent Calendar本編に先んじて新卒1〜2年目メンバーが執筆します。＞ 「生きてるだけで丸儲け」そんな言葉が身に沁みる今日この頃です。 こんにちは。エンジニアリンググループ、新卒2年目の井上です。 さて、世の中には「動いているだけで丸儲け」なシステムが様々あると思います。 この場合「丸儲け」というと表現が悪いですが、「運用中でお金を生み出しているサービス」は様々なところに存在すると思います。 このような運用中のサービスの一つをAWSへクラウド移行した時の知見を特に下記の3つの項目に分けてここに記します…
CloudWatch Agent で procstat プラグインを使った EC2 のプロセス監視を設定する
こんにちは! SRE を担当している多田です(@tada_infra). CloudWatch Agent は EC2 から CPU,メモリなどのメトリクスをとったり,CloudWatch Logs にログを出力できますし,AWS Compute Optimizer を有効活用するためにも役立てることができます.今回は,procstat プラグインを使って Nginx のプロセス監視できるように CloudWatch メトリクスに送る検証をしました.多くの方が CloudWatch Agent でのプロセス監視設定を記事にされているのですが,自分も試してみたため記事にします. CloudWat…
CloudWatch Agent で procstat プラグインを使った EC2 のプロセス監視を設定する
タダです. CloudWatch Agent は EC2 から CPU,メモリなどのメトリクスをとったり,CloudWatch Logs にログを出力できますし,AWS Compute Optimizer を有効活用するためにも役立てることができます.今回は,procstat プラグインを使って Nginx のプロセス監視できるように CloudWatch メトリクスに送る検証をしました.多くの方が CloudWatch Agent でのプロセス監視設定を記事にされているのですが,自分も試してみたため記事にします. CloudWatch Agent の導入 プロセス数を設定ファイルを編集する …
不要なLambdaレイヤーをワンライナーで削除する
故あってAWS環境のお掃除をすることがあり、その時にめんどくさい思いをしたのでメモです。Windows環境（コマンドプロンプト）で実施しています。 １．tr;dr （※Lambdaレイヤー全バージョン一括削除ワンライナー） ２．えるしっているか Lambdaレイヤーは1バージョンずつしかけせない ３．AWS環境のお掃除について（ポエム） １．tr;dr （※Lambdaレイヤー全バージョン一括削除ワンライナー） for /l %i in (1,1,100) do (aws lambda delete-layer-version --layer-name 【Lambdaレイヤー名】 --vers…
ローカル環境からAWSのLinux仮想マシンにリモートアクセスする方法
ローカル環境からAWSのLinux仮想マシンにリモートアクセスする方法 アクセスコマンド ssh -i ~/.ssh/FirstKey.pem ec2-user(ユーザー名)@(パブリックIPアドレス) Amazon Linux 2 AMI と表示されれば接続完了！ 停止コマンド exit Amazonはスタートアップ向けにセミナーやイベントを行っている。 aws.amazon.com
AWS Subnet内で利用されていないIPを取得する(Pick up dynamically unused Private Ip Address from subnet on AWS )
普通に家で書いて、普通に実務で使ってるもの。 EC2のインスタンスに対して、空いているprivate IP をセカンダリIPとして設定したかったので、空いているIPを動的に取得してその値を用いる必要があった。 コードは以下。 list all private in CIDR 今回は、ドカスカ立ち上がるEMRの中で空いているものを見つけるというもの 少しだけコード紹介 こちらは、EMRがマスターノードかそうでないか？を判定している。 今回は、ワーカーノードには必要のない処理だったのでこの処理を入れている。 isMaster=$(cat /emr/instance-controller/lib/i…
【AWS】特定IPアドレスからのみAWSの操作と情報閲覧をできるようにする方法
こんにちは！ BFT名古屋支店の佐野です 少し前よりAWSに関連したお仕事をする機会が多くなっておりますが、 その中でも「運用しているAWS環境へのアクセスを一部からのみに限定したい」という相談が多く見受けられます。 今回は、そのひとつである 「特定のIPアドレス以外からIAMユーザーとしてAWSマネジメントコンソールにログインした際の機能を制限したい」 という相談への回答についてご紹介させていただきます。 はじめに：AWSマネジメントコンソールへのアクセスを制限することはできるのか まず「特定のIPアドレスを経由した状態でのみIAMユーザーとしてコンソールにログインできるようにする」というの…
S3でディレクトリ単位ではなくページ単位でリダイレクト設定する
S3でディレクトリ単位ではなくページ単位でリダイレクト設定する1.ファイルを選択する 画面は次ページにすすむ2.プロパティタブを選択する「メタデータ」の操作ができるところまでスクロール3.「編集する」を押します 「メタデータを編集」に画面にかわります4.「メタデータを追加」を押します5.タイプは「システム定義」、キーは「Content-Type」を選択、値は「text/html」を記入6.「メタデータを追加」を押します7.タイプは「システム定義」、キーは「x-amz-website-redirect-location」を選択、値は転送先のURLを記入8.右下のボタン「メタデータの編集」を押しま…
AWS新サービス！ AWS Network Firewall
AWS Network Firewall まずは参考にしたサイト dev.classmethod.jp aws.amazon.com 結論いうとプロキシサーバーよりいいよ！っていうサービスです。 EC2ではプロキシサーバーが色々と課題だったよねって部分が改善されたよ！って記事が乗っています。 とはいえ、東京リージョンはまだで。アメリカあたりの3カ国のみです。 VPC向けのステートフルなマネージドネットワークファイアウォールのサービスらしいです。 トラフィックに合わせて拡張されるので、追加投資することなく可用性を確保できますよ！ ちょっとまだ私もAWSの勉強をしていないので、こちらの記事を理解す…
【自動更新】QiitaのDailyランキングTop10
更新日時 2020/11/29/07:00 Qiita Trends Daily 1位 ※前日4位 AWS,初心者,まとめ,クラウド Qiita Trends Daily 2位 [New] AWS,api,lambda,serverless,ServerlessFramework Qiita Trends Daily 3位 [New] C#,.NET,C#9.0,.NET5.0,.NET5 Qiita Trends Daily 4位 ※前日10位 GitHub,開発プロセス,コードレビュー,codereview Qiita Trends Daily 5位 [New] Python,Python…
Well-Architected Frameworkについて
Well-Architected Framework AZの選択 １つのリージョンにつき２つのAZを利用してアーキテクチャーを設計することが基本（３つ以上はコスト効率が下がる） VPC 2つ以上のVPCでアーキテクチャを設計するのが基本となる ◾️１つのVPC ・可用性が低下するため、アイデンティティ管理やハイパフォーマンスコンピューティングなどその用途は限られる ・１人などの小規模で利用する場合は２つ以上VPCを利用するのが面倒なケースもある ◾️２つ以上のVPC ・２つ以上のVPCで可用性を確保するのが適切なAWSアーキテクチャ設計となる ５つの設計原則 Reliability：信頼性 障…
ローカル環境でWordPress導入方法を調べる 〜 Local by Flywheel 〜
// 自分のための備忘記事です。 前書き WordPress導入について Local by Flywheel まとめ 前書き 個人的な仕事の要件で、以前出版した書籍を英訳したので電子書籍（多分PDF）で海外向けに販売したい。とのこと。 そのためECサイトを整備したいというざっくりした話が来ました。 まだまだ不透明な話なので動きようがない状態ですが、一応手間をかけずなにができるか調べてみました。 手っ取り早いのはAmazonで物販することだと思いますが、手数料30-70%取られるようなのでなんだかな。と思いました。 他にBaseとかなんとか物販できるサイトはありますが、海外向けとか手数料とかがネ…
ローカル環境でWordPress導入方法を調べる 〜 Local by Flywheel 〜
// 自分のための備忘記事です。 前書き WordPress導入について Local by Flywheel まとめ 前書き 個人的な仕事の要件で、以前出版した書籍を英訳したので電子書籍（多分PDF）で海外向けに販売したい。とのこと。 そのためECサイトを整備したいというざっくりした話が来ました。 まだまだ不透明な話なので動きようがない状態ですが、一応手間をかけずなにができるか調べてみました。 手っ取り早いのはAmazonで物販することだと思いますが、手数料30-70%取られるようなのでなんだかな。と思いました。 他にBaseとかなんとか物販できるサイトはありますが、海外向けとか手数料とかがネ…
2020-11-28のテックニュース
×3529 Paw – API tool for Mac (50% OFF Black Friday Sale) ×179 「居残り練習」を捨てよ。グアルディオラの「練習論」。 | VICTORY ×98 The HTML presentation framework | reveal.js ×89 GitHub - loadimpact/k6: A modern load testing tool, using Go and JavaScript - https://k6.io ×85 時雨堂は Sphinx の開発者である小宮健氏のプラチナスポンサーになりました | by V | shig…
infoQ（インフォキュー）の最新徹底解説おすすめポイントサイト モッピーを越える？
目次 1. infoQ （インフォキュー）って何？ 2.会社の概要 3.運営会社は信頼できる？ 怪しい？ 4.個人情報の取り扱いはちゃんとしてるの？ 5.口コミや評判 6.ポイントを稼ぐ 7.ポイント交換先 8.お友達紹介 9.お得なキャンペーン情報 答える、貯まる、笑顔になる！登録数70万人のアンケートモニター！https://infoq.jp/regist/index/d75fb3e42b1bc4a/02 上記のバナーやURLから完全無料、永年会費無料で会員登録が出来ます。 会員登録方法 皆さんinfoQ（インフォキュー）というサイトを知ってますか？ ポイントサイトで稼げるといえばモッピー…
AWSのインスタンスの起動と停止の自動化
本日、学習した内容は「AWSのインスタンスの起動と停止の自動化」です。 なぜ自動化したのかというと、 ①チーム開発でデプロイを担当でAWSに公開用のインスタンスを生成している。 ②AWSのEC2利用は、750時間／月であれば無料を選択しているが、24時間インスタンスが実行中なので、気付いたら80％使用してますよアラームが届く。 ③その度にAWSへログインしてインスタンスの停止や実行をするのではめんどいな。 以上の理由で自動化にTRYして見ました😎 AWSの詳しい料金体系はこちらで確認してください👇 AWS の料金モデルとクラウドによるコスト削減 | AWS aws.amazon.com ■ 自…
桃太郎電鉄
■良かったこと ①野球をやりに行ったこと 息子を連れてリトルリーグの練習に。 父母の方たち挨拶したら「また来てくれたの」的な感じで結構覚えてもらえてるみたい！ ジュニアチーム(小学1年生1人、小学2年生が1人)に混ぜてもらった。 最初にキャッチボールをちょっとして、バッティング練習。 ポールにボールを置いてそれを打つ。 だんだんバットは振れるようになってきた・・・かな？ 機嫌をとりながらやるの大変だわ(笑) その後はノックだったんだけどもう飽きちゃったみたいで見学にきていた選手の妹ちゃん(同い年の年中)と一緒に遊び始めた。 その間、僕は選手たちの練習をお手伝い。 見てるだけでも面白かったけど、…
新規のシステムの作成が完了した、1週間の振り返り(2020/11/21〜2020/11/27)
新規のシステムの作成を、予定より2日前倒しした、1週間を振り返ります。 2020/11/21(土)クリスマスツリーを飾りました。毎年子どもが楽しく飾ってくれます。何年も楽しく飾り続けて欲しいです。 2020/11/22(日)妻と子どもは、保育園のときに仲のよかった子と遊ぶために出かけたので、一人の時間を過ごしました。子どもがいないと、時間の使い方が変わってきます。 2020/11/23(月・祝)勤労感謝の日多分バッテリーが充電できなくなったAndroidタブレットを、小型家電リサイクルに持ち込みました。充電池が使われているもの、電源アダプタは対象のため、充電台以外が、小型家電リサイクルの対象と…
2020-11-28
今日から技術学習日記をつけてみる。 社の鹿児島メンバーが毎日日記をつけ始めたのを見ていいなと思ったのと、マメに書かれていたhigeponさんのブログの過去ログを数年前に全部読んだりして楽しかったし、成長の記録として残せるのはいいんじゃないかと思い始めてみることにした。 雑に色々と書いていこうと思う。本ブログとは分けることにした。知見がたまっていったらそっちにまとめる感じで。 とりあえず暫定的なルール: 学習しながら書かない: 記憶力のヤバさを感じるので、日の終わりに思い出しながら書いて記憶力向上を目指す。 時間を測って書く: 毎日書くものだから負荷が高いと続かないので短く書く。 AWS Web…
システム構成図をテキストで
drawthe.netとは cidrblock/drawthe.netは複雑なネットワーク図も「テキストで書いてブラウザ上でSVGレンダリングできるようにしよう」というコンセプトのもと開発されたツールです。下図のように複雑な構成図も精度高く描くことができます。
【新型A7スポーツバック】最高峰!「RS7スポーツバック」2021年1月日本発売！最新情報、スペック、価格は？
アウディが「A7スポーツバック」の最上位モデルとなる「RS7スポーツバック」の日本導入を発表しました。 新モデルにより魅力をアップした新型A7スポーツバックのデザインや価格、パワートレインなどをご紹介します。
AWS Firelensでfargateログをdatadogに集約する
どこでもかんたんVR「スペースリー」のインフラを担当しています佐藤です. スペースリーではメインのRailsアプリのアプリケーションログをdatadogで管理していますが， 新たにAWS ECS Fargate上でアプリを実行・運用するときでも， アプリケーションログはdatadogに集約して監視・運用したいという要件があります． これを実現する方法として AWS Firelensを導入したのでその詳細についてまとめました. 1. 前提 Firelens とは Firelens はAWSが提供するログ転送エージェントです． 従来AWSにおけるログ転送手段としては，AWS CloudWatch …
AWS SAA取得に向けて ６３日目 「おさらい - well architected framework (信頼性) 」
well architected framework の「信頼性」に関してまだ理解の浅い部分を備忘録。 質問①: NLBの特徴として間違っているものを選択してください。 L4ロードバランサーである。 毎秒数千万のリクエストに対応する性能がある。 フォールトトレラント機能を有したコネクション処理を有する。 コンテナ化されたアプリケーションをサポートしている。 答え： 2. 毎秒数千万のリクエストに対応する性能がある。 正しくは毎秒数百万のリクエストに対応できる性能がある。 ALBとNLBの説明に関しては以下を確認。 質問②： 大規模アクセスが予測されるケースについて、次の「ELBタイプと必要な対…
