本記事は、Gunosy Advent Calendar 2020 8日目の記事です。 前回の続きとなります。 tech.gunosy.io 今回は後編として、実際にEKSクラスター構築の途中からアプリをデプロイする環境を整える流れをご案内し、最後に運用管理フェーズで必要となるであろうオススメ監視設定についてご案内します。 クラスター構築・後編（kube-system） アプリのデプロイ編 Helm Skaffold 監視運用編 アラート設定 cloudawach datadog dashboard さいごに クラスター構築・後編（kube-system） さて、EKSクラスターとASGも用意で…
本記事は、Gunosy Advent Calendar 2020 7日目の記事です。 前回は、しゅんけー君の「その実験、再現できますか？pyenvとpoetryによる “そんなに頑張らない” 再現可能な実験環境構築」でした data.gunosy.io はじめに 前提条件 目指すクラスター像 使用するサービス・ツール類 K8Sを使う上での心構え 環境設計編 環境設計 リポジトリ クラスター構築・前編（EKSクラスター） クラスター構築・中編（ASG） ASG or Fargate ASG spotインスタンス はじめに Gunosyの大関と申します。いくつかのEKSクラスターとクラスター上で稼…
これは何 EKSでPodSecurityPolicyを適切に設定しようとすると、必ずはまるeks.privileged。この記事ではeks.privilegedが何なのか、またEKSでpspを適切に設定する方法について1つの方法を記述する。 特に、色々な記事ではeks.privilegedを削除する方法が書かれているが、k8sやterraformのような宣言的resource管理において、管理外resourceを手動で削除しないで良い方法について考える。 PodSecurityPolicyの基本 PodSecurityPolicyを設定していますか？特権を持ったPodをk8s clusterで…
はじめに 🔺YAMAP 分析チームの松本です。 Looker Advent Calendar 2020 兼 YAMAP エンジニア Advent Calendar 2020 3日目の記事です。 よろしくお願いします。 YAMAP では登山地図の情報をより充実・正確にするために、ユーザーデータを活用した 伊能忠敬プロジェクト に取り組んでいます。 具体的な一例としては、ユーザーさんの軌跡を分析して新規ルートを抽出し、登山地図に反映しています。 このルート抽出処理は Python で実装しており、従来は分析者が手元のマシンで実行していました。 また、地図上のどこに対してルート抽出を試みるかは、デー…
なぜ書いたか GKE を本番運用しているなかで、検討しきれていない設定であったり構成を調査する試みの一環です。 最小構成ではじめる GKE + Terraform - Eng (なりたい) を先に読んでいただけるとより理解しやすいと思います。 tl;dr 良いからコードを見せろという方は以下のレポジトリを参照してください。 github.com 本編 概要 今回は以前作成した最小構成クラスタに以下の変更をしてみます。 examples/safer_cluster_iap_bastion を参考にしています。 private cluster にする Node に External IP が付与さ…
Weaveworks社が提唱する kubernetes のベストプラクティスで , Single Source of Truth として Git を採用し，Kubernetes リソースなどを継続的にデリバリーしていく GitOps がある。 今回はそんな GitOpsを実現するツールである Flux のv2が出てきたのでチュートリアルを試し、 v1との比較を行っていく。 なお、 GitOps の説明や過去にv1を検証した内容は以下の記事等に紹介がある。 Guide To GitOps Fluxを使ってGitOpsを実現する Get started 今回は Flux v2の動作を確認するために…
本記事でやること Rancher社が公開しているクイックスタートを試す。 VMWareFusion上のCentOS7上でk3sのserver/agentを構築。 nginx podを起動させ外部公開する。 k3sをアンインストールする。 参考サイト k3sのgithubレポジトリ github.com モチベーション kubernetesを自分の周りに教える時に、環境を用意するのが面倒だったため 検証ように軽量なkubernetes環境がほしかったため k3sのアーキテクチャ まずはじめに、k3sのアーキテクチャをさっと見ておこう。 single processでkubernetesを再現して…
概要 環境 結論 方法1 方法2 まとめ 概要 Next.jsでhealth checkを実装する。 k8s上で動かすという要件を想定する。 下記exampleを利用する。 https://github.com/vercel/next.js/tree/canary/examples/with-docker 環境 Next.js v10.0.1 Node.js v14.15.0 NPM v6.14.8 結論 API Routesを使う API Routes: Introduction | Next.js 方法1 API Routesを使う $mkdir pages/_ $touch pages/…
■NetApp INSIGHT DIGITAL EVENT Day2 終了いたしました！ 皆さん、こんにちは。株式会社ネットワールドのマーケティング本部でNetApp製品営業＆コンサルタントを担当しています、ますお。と申します。 NetApp INSIGHT DIGITAL EVENT Day2が終了し、Keynoteセッションやオンデマンドで配信されているセッションでは様々な発表がございました。 今回の投稿ではDay2のKeynoteセッションと目玉であるMega Sessionから内容を抜粋してご紹介させていただきたいとおもいます！ ■Day2 Keynoteセッション Day2のKeyn…
はじめに TL;DR 名前解決が一部失敗する話 CoreDNSのhealth checkと終了時の挙動(一部推測が含まれる) 原因その① 調査編 再現検証 検証環境について 結果 原因その① 対策編 対策方針 原因その② どんなときに名前解決が失敗するか 原因その② 対策編 やり方 参考実装の例4つと採用したやりかた 解説 まとめ はじめに どうもrenjikariです。SREです。 AWS Elastic Kontainer Service(以下EKS)環境にて起きた事象の対策が結構たいへんだったので、対応とともに共有しておきます。 もっといいやり方あるぜ！って人はぜひ教えて下さい:bow:…
■NetApp INSIGHT 2020 DIGITAL EVENTが開催されました！ 皆さん、こんにちは。株式会社ネットワールドのマーケティング本部で NetApp製品営業＆コンサルタントを担当しています、ますお。と申します。 今年もNetAppの年次最大イベント NetApp INSIGHTが開催されました！ 例年、世界各国、米国ではラスベガスなどの都市で行われていた本 INSIGHTイベントですが、今年は、昨今の情勢もあり、本年はオンラインでの開催の運びとなりました。 しかし、オンラインで実施の本イベント、非常に内容が濃い！！ 早速、このイベントをリアルタイム視聴いたしましたので、その見…
Certificate の一部 昨日 Certified Kubernetes Application Developer (CKAD) を取得しました! n番煎じですが、やったことを振り返るという意味でもCKADの受験記を書いておきます。 背景 k8sはそこそこ触っていたのでコンセプトはざっくり理解していたおり、ググりながらなら典型的な操作はできる状態でした。 一方で、典型的な REST API や Batch Job ばかり作ってきたので、より網羅的に k8s を勉強するモチベーションの一つとして受けました。 試験までにやったこと Kubernetes完全ガイドをざっくり2周 よくつかう …
Serviceの場合 my-svc.default.svc.cluster.local my-svc はサービス名 default はNamespace Podの場合 まずPodのIPアドレスを確認する。 kubectl get pod -o wide上記で表示さる対象PodのIPアドレスをメモしておく。 例えば対象のPodのIPアドレスが、 10.0.0.1 の場合 10-0-0-1.default.pod.cluster.local default はNamespace 参考 ServiceとPodに対するDNS | Kubernetes
alias k='kubectl' alias kc='k config view --minify | grep name' alias kdp='kubectl describe pod' alias krh='kubectl run --help | more' alias ugh='kubectl get --help | more' alias c='clear' alias kd='kubectl describe pod' alias ke='kubectl explain' alias kf='kubectl create -f' alias kg='kubectl get p…
読みながら書いた感想等の放流 WEB+DB PRESS 20周年らしい。 コンテナ技術やクラウドネイティブのこれまでとこれから inductorさんがコンテナ技術の利用背景から初学者向けのアドバイスやk8sのアップデート状況などの言及が会った。Twelve-Factor AppとKatacodaは知らなかったので目を通しておこうと思う。 Webページが表示されるまで 自作OSの上にNICからブラウザまでを実装する特集記事。この記事目当てで購入した。ブラウザを作る記事かなと思いきやシステムコール使ったpingコマンドから作り始める。 「ブラウザ作ってみた」系の記事はネットにも散見されるので、ネッ…
例年通り2021年の目標＆やりたいことです。 音声関連 自作スキル・アクションの開発に力を入れる Googleアシスタント向けアクションを作って公開する スマホアプリを作って公開する 去年まではどちらかというと情報発信がメインになっていましたが、今年は少し自分のスキルだったりアクションだったりの開発に力を入れていきたいなと思っています。特にGoogleアクションについては、Voiceflowもたぶん力を入れてくるだろうし、Alexaに比べると知らないことも多いので、ここを中心にしたいなと。 だからといってAlexaだったりVoiceflowの最新情報をお伝えしたりってことをやめるというわけでは…
Kubernetesの公式Tutorial環境で自作コンテナのデプロイを試した話です。 動機と結果まとめ 勉強のために自作の超簡単サービスをDockerやAWSに簡易的にデプロイしてみました。 k8sでも試したいと思ったのですが環境を用意するほどの気力と余裕がありません。 ひょっとしたらk8sの公式Tutorial環境でできのではないか？と思ったのがきっかけです。 manifestファイルを使わずにrun/expose/scale/rolloutのみで実施しました。 結果として、環境固有の制約はありましたが一応デプロイできました。 なお今回、デプロイしたコンテナは1つだけです。複数コンテナで構…
Kubernetes を基盤としたプロジェクトで実際に利用している、KEDA というコンポーネントのメジャーバージョンが上がったので追加機能についてまとめる. KEDAとは KEDA を使うと嬉しいこと v2の追加機能 追加されたスケール対象 追加されたスケーラー 事前準備 インストール イベント駆動スケールを試す まとめ KEDAとは KEDA (Kubernetes Event-driven Autoscaling)は, kubernetes clusterに追加できる単一目的の軽量コンポーネントで,CNCFのSandboxプロジェクトにホストされているkubernetes ベースのイベン…
この記事はcloud.co.fig tech blogにマルチポストしてきました。 tech-blog.cloud-config.jp こんにちは、コンテナが立つと初めてわが子が立ったように喜ぶなむゆです。 去年、「k8sのIDE、Lensが便利な件について」という記事を見て、あぁ～kubernetes周りのツールについても知りたいな～Lens使ってみよっかなと思い立ちました。 それで実際に使ってみたのですが、Lensで接続するクラスターを指定するのに必要なkubeconfig周りで若干詰まって、それを解決してきたので今回はそのネタで一席打ちます。 kubeconfigとは kubeconfi…
×344 3連休明けの12日 全国的に悪天候 電力需給厳しさ続く 節電を | 気象 | NHKニュース ×83 電力会社・電力使用状況グラフ | エレクトリカル・ジャパン - 発電所マップと夜景マップから考える日本の電力問題 ×79 Masters Alumni | Stanford Computer Science ×77 GitHub - theseus-os/Theseus: A modern experimental OS written from scratch in Rust to explore novel OS structure and state management te…
第4章 APIリソースとkubectl 4.1 起動 gcloud init gcloud container clusters create k8s --cluster-version 1.15.9-gke.26 --zone asia-northeast1-a --num-nodes 3 gcloud container clusters get-credentials k8s --zone asia-northeast1-a kubectl create --save-config clusterrolebinding iam-cluster-admin-binding --cluste…
第1章 Google Cloud Platform の特徴 GCPはPaaSからIaaSにすすんだプラットフォーム Google自身がGCPの大きなユーザーの一人 ライフマイグレーション 仮想マシンから物理サーバーへ移動させる技術 可溶性が高い グローバルネットワーク クラウドを利用するには提供社の歴史などを考えてみることが大事 k8sはBorgというやつ 自身がやりたいことに対しｔえあっているのか？ということを検討する必要がある。GCPは「大規模分散コンピューティング」「インフラの隠蔽、共用化」といったことをやっている分野。メリットを理解する必要があります。 第2章 コンピューティングサービ…
オンプレ環境だと必ずと言っていいほど存在する「エクセルのIPアドレス管理台帳」、なんやかやで私も自宅の環境でもスプレッドシート(Excelではない笑)に記入しつつ運用してました。 で、業務で最近NetBoxというアドレス管理などを行うIPAMツールを使うことが増えたので、勉強がてら自宅にも導入してみました。 github.com NetBoxって何 インストール 環境 NetBoxインストール ログイン 管理方針 (仮) Devices Sites Device Roles Manufacturers Device Types Deviceの登録 インタフェースとIPアドレス設定 (デバイスか…
ツイート 水樹奈々オフィシャル @NM_NANAPARTY ／ 「Link or Chains」デジタルリリース ＼ TVアニメ「Levius レビウス」OPテーマ #水樹奈々 「Link or Chains」が、ハイレゾ含むダウンロード販売をスタート ぜひお聴きください♬ 配信… https://twitter.com/i/web/status/1347928624083607560 00:30 大帝国絶対永久皇帝・大帝国大元帥★ @blackeye2025 お奈々 2021年1曲目 調達 https://twitter.com/blackeye2025/status/13479293387…
「kubectl-neat（kubectl neat コマンド）」を使うと Kubernetes のマニフェストから「冗長な」情報を削除して表示できる．知っておくと便利！GitHub リポジトリの README.md を読むと「メタデータ」や「デフォルト設定」や「Admission Controllers によって作られた情報」によって読みにくくなると書いてある．さっそく「kubectl-neat」を紹介していく． github.com 検証環境 Docker Desktop for Mac Kubernetes 1.19.3 事前確認 : kubectl get pods xxx -o ya…
Ingress のルーティングを nginxinc/NGINX-Demos の nginx-hello を使って試してみる。 まずは Ingress Controller を有効にする。 $ minikube addons enable ingress 🔎 Verifying ingress addon... 🌟 The 'ingress' addon is enabled $ kubectl get pods -n kube-system NAME READY STATUS RESTARTS AGE coredns-f9fd979d6-5mfmx 1/1 Running 0 5m7s etc…
Azure Kubernetes Service (以下 AKS) へのアクセスは通常クライアント証明書を利用しますが、--enabled-aad オプションを使用して AKS を作成すると 、kubectl の実行時ユーザーの AAD 認証が行われます。 加えて、あらかじめ Kubernetes 内で Role と RoleBinding を作成しておくことで、認証した各ユーザーや AAD グループに対して Kubernetes の RBAC を設定できます。 Azure AD が統合された AKS クラスターでは、名前空間内またはクラスター間での Kubernetes リソースへのアクセス…
概要 Raspberry Pi 4台でkubeadmを使用したシングルコントロールプレーンクラスターの作成を参考にKubernetesクラスタを構成する際に躓いたところを中心に記録した記事です。（2021年1月3日時点） 構成 Raspberry Pi 4 ModelB 8GB：4台（Master 1台、Worker3台） SDカード：32GB kubeadm v1.20（GitVersion：v1.20.1） コンテナランタイム：containerd（1.4.3） ネットワークアドオン：Flannel Raspberry Piの設定 以下、Kubernetesクラスタ構成時特有の設定ではない…
11時ごろに起床。宅配業者からの電話で目覚める。unicoのセールで買ったテーブルが届く。ゴミは回収してもらって、組み立ては自分で。実物は見てなくてちょっと不安だったが、質感も良い。高さもちょうど良い。昼ご飯はパッタイ🇹🇭をテイクアウトして、早速新しいテーブルで食べたが、買ってよかった…やっと腰を曲げてご飯を食べずに済む…。 食後は洗濯をしたり掃除。洗濯物干したけど、乾くのだろうか果たしてと心配していたが、インスタ見たら洗濯物が凍ってるストーリーをあげているのを見たら、僕の心配など小さいものだなと思った。一通り終わった後はコミュニティ活動。昨日作った管理画面のデザインをbulmaを使って良い感…
www.slideshare.net
qiita.com
blog.a-know.me
k8s.jp
ladicle.com
mizchi.hatenablog.com
dev.classmethod.jp
speakerdeck.com
tech-blog.cloud-config.jp
