はてなブログトップ

AWS EMR

このタグでブログを書く

言葉の解説

ネットで話題

関連ブログ

AWS EMR

このタグの解説について

この解説文は、すでに終了したサービス「はてなキーワード」内で有志のユーザーが作成・編集した内容に基づいています。その正確性や網羅性をはてなが保証するものではありません。問題のある記述を発見した場合には、お問い合わせフォームよりご連絡ください。

データレイクのおじさん•5年前

AWS Subnet内で利用されていないIPを取得する(Pick up dynamically unused Private Ip Address from subnet on AWS )

普通に家で書いて、普通に実務で使ってるもの。 EC2のインスタンスに対して、空いているprivate IP をセカンダリIPとして設定したかったので、空いているIPを動的に取得してその値を用いる必要があった。コードは以下。 list all private in CIDR 今回は、ドカスカ立ち上がるEMRの中で空いているものを見つけるというもの少しだけコード紹介こちらは、EMRがマスターノードかそうでないか？を判定している。今回は、ワーカーノードには必要のない処理だったのでこの処理を入れている。 isMaster=$(cat /emr/instance-controller/lib/i…

#AWS#AWS EMR#AWS VPC#AWS Subnet

ネットで話題

もっと見る

129ブックマーク Big Data Platform - Amazon EMR - AWS

54ブックマーク Python + Hive on AWS EMR で貧者のログサマリ

www.slideshare.net

48ブックマーク Amazon EMR（Hadoopなどのビッグデータフレームワークを簡単に実行）| AWS

46ブックマーク AWSサービスのServerlessオプションの特徴・比較・まとめ・プロビジョニングとの違い－Aurora、Neptune、EMR、Redshift、MSK、SageMaker Inference、OpenSearch Service－ - NRIネットコムBlog

tech.nri-net.com

34ブックマーク AWSチーム社内勉強会「EMRおじさんに聞いてみよう」レポート | DevelopersIO

dev.classmethod.jp

32ブックマーク AWSサービスのServerlessオプション、オンデマンドモードの特徴・比較・まとめ・プロビジョニングとの違い－Serverless(Aurora、Neptune、EMR、Redshift、MSK、SageMaker Inference、OpenSearch Service)、オンデマンドモード(DynamoDB、Kinesis Data Streams)－ - NRIネットコムBlog

tech.nri-net.com

24ブックマーク AWSのAmazon Elastic MapReduce(EMR)でHiveを使う手順 | takemikami's note

23ブックマーク AWS EMRでPrestoを動かしてshibからクエリ流してみる Spark, SQL on Hadoop etc. Advent Calendar 2014の最終日です。書くこと AWS EMR/S3 + Hive + Presto + Hue + Shibの環境を構築し、簡単にトライアルしてみる。 Prestoについて Facebookがオープンソースで開発しているMPP(Massively Parallel Processing)クエリエンジン。本家: Presto - Distributed SQL Query Engi...

19ブックマーク AWS、データウェアハウスをサーバレス化する「Amazon Redshift Serverless」や「Amazon EMR Serverless」など発表。AWS re:Invent 2021

www.publickey1.jp

関連ブログ