Kubernetes

はじめに SRE チームの川又です。 Volterraはグローバルで優れたEdge-as-a-Service プラットフォームサービスを提供する事で注目を集めています。 先日、F5, Inc. に買収された事でも話題になりました。 一方、弊社intdash の一部を構成する intdash Server は基本的にクラウド上で動作させます。 ですが、お客様の要件によってはEdge 環境で動作させる事もあります。 SRE チームの検討課題の1つとして、Edge 環境における効率的なサーバアプリケーションの管理・提供 があります。 以上の背景から、今回はVolterraのサービスプラットフォーム上…

kubectl コマンドを使って Label（ラベル） や Annotation（アノテーション）を削除する場合，削除用のオペレーションはなく，キー名の末尾に - を付けて登録をする必要がある．具体的には bar- や description- というキー名を指定すると削除できる．以下のドキュメント「kubectl Command Reference」にも載っている．今回は kind で構築した Kubernetes v1.19.1 のクラスターを使って検証した内容をまとめておく！ $ kubectl label pods foo bar- $ kubectl annotate pods fo…

HPAの設定ではDeployment単位で閾値を指定しているのに、扱うリソースはPodなので少しわかりづらいとおもったので、複数コンテナを有するPodに対してHPA設定をかけた場合の計算ロジック（詳細版）をまとめました。 HPAのreplicaset数算出方法を整理 公式を眺める 複数コンテナを持つPodだと、「Podが利用しているリソース」はどう計算されるでしょうか。 以下、メモリについて考えてみます。 公式を参考にすると、以下のような計算式になる。 HPAの計算方法 数式をみるとウッ頭痛が...!となる人向けに少し解説します。 どちらもシンプルです。 podUsage でやっていることは、…

要約すると「複数コンテナを有するPodに対してHPA設定をかけるなら、コンテナすべてにlimits設定をかけておきましょう。でなければ正常に機能しません」という些末な話になります。 課題 HPA設定を付与したリソースを確認しようと思いGKEのコンソール画面を覗くと、 HPA cannot read metrics value どうやらHPAの設定がうまくいっていない様子。 HPAの設定がうまくいっていないケース なぜだろうと思い、クラスタの状態を確認するも、似たような症状になっていて訳が分からなかった。 というのも、他のPodに付与しているHPA設定も、今回エラーを発見したものと同様の設定をか…

この本を読んだメモ。 イラストでわかるDockerとKubernetes Software Design plus作者:徳永 航平発売日: 2020/12/05メディア: Kindle版 Docker/Kubernetesは仕事で使っているものの、きちんと勉強したことがないなと思ったので、まわりで評判の良かったこの本を丁寧に読むことにした。 本の感想 Docker使ってると「レイヤ」って言葉を見るけど、そのイメージがついた。イラスト付きでしっかり解説してくれるのはありがたい。 CRIランタイム/OCIランタイムって言葉をよく見かける。こないだも見た。これの意味を理解した。 CRIランタイム: …

ラベルを使ってPodを世代管理しておくと、Serviceを更新するだけでリリース（トラフィックルーティングを切り替える）を行なうことができて便利です。 要約 実装 Podにラベルを付与し、バージョン管理を行なう（dockerimageのタグと一致させておくとミスリードを減らせることが多いのでおすすめ） バージョンごとにDeploymentを用意し、複数バージョンがRUNNINGの状態をつくる Serviceでトラフィックを流すPodを切り替える メリット アプリケーションのデプロイとサービス公開の作業を分離できる Service（L4レイヤの設定）を切り替えるだけなので影響範囲・切り替えコスト…

Kubernetes で kubectl drain コマンドを実行すると，指定したノード上の Pod を安全に削除して，そのノードには新しく Pod をスケジューリングしないようにステータスを変更できる．例えば，Kubernetes クラスターの運用として，ノードをメンテナンスするときなどに kubectl drain コマンドを使う．詳しくは以下のドキュメントに載っている． Safely Drain a Node | Kubernetes Kubectl Reference Docs 今回の記事では kubectl drain コマンドの挙動やオプションを試しながら理解を深めていく．以下は…

概要 KubeCon + CloudNativeCon North America 2020 Virtual が 2020 年 11 月 17 日から 20 日の日程で行われた。初日は Co-Located Event と Sponsored Session と Lightning Talk (Graduated Project と Sponsored の 2 種類で、今までの Lightning Talk とはちょっと異なる) で、メインプログラムが 2 日目からなのはいつもと同様である。システム的には 8 月に Virtual で開催されたものと同様であったが、前回 (レポート) とはタイ…

用語 Namespaces Podを外部公開する Origin Pool Origin Poolの設定 Site内のネットワークトポロジー singleNICの場合 Multi NIC(以上) の場合 Clusterに対するVIP Site間のトポロジー Regional Edge(RE)の接続 Site-Site間の接続 仮想ネットワーク Network Interface Siteに仮想ネットワークを設定する Network Connector ローカル仮想ネットワーク グローバル仮想ネットワーク ゼロタッチプロビジョニング OSについて 実際にAWSにAMIで起動してみた いろいろコマン…

はじめに Self-Managed NodeGroupをもったEKSクラスタにおいて、クラスタのオートスケールが起きたときのどのNodeGroupが拡張されるのだろうと疑問に思ったので調査した忘備録になります。 Expandersを使って解決する 下記ドキュメントのPrioritizing a node group or Auto Scaling groupにあるように、ある程度はコントロールできるようです。 docs.aws.amazon.com Expandersの説明はGithubにあります。オプションは下記記載があるのですが、priceはGKEでしか使えないとのこと。 EKSのドキュメ…

Kubernetes関連のツールを作ったときなどに，E2Eテストをしたいことがある．実際にKubernetesクラスタに入れてみて，動かしてみてどうか，というのは開発環境でやるにしても結構手間だ． そういうときにkindはすごく便利なんだけど，これのlocal registryは更に便利だった．

Kubernetes で Deployment を使うときにマニフェストを修正して kubectl apply コマンドを繰り返し実行すると，ReplicaSet のリビジョンが増えていく．サンプルとして Deployment の image を nginx:1.8-alpine ➔ nginx:1.9-alpine ➔ nginx:1.10-alpine と修正しながらマニフェストを適用していくと以下のようになる．kubectl rollout history コマンドを使うとリビジョンも確認できる．また kubectl apply に --record オプションを付けると操作履歴を記録で…

×581 建設現場のテレワークに貢献、1000km離れても油圧ショベルをインターネット経由で遠隔操作可能｜ARAV株式会社のプレスリリース ×171 Google admits Kubernetes container tech is so complex, it's had to roll out an Autopilot feature to do it all for you • The Register ×85 The Art of Reading More Effectively and Efficiently ×62 ISO 8601: the better date format…

設定ファイル キーボードショートカット 拡張機能 よりよい VS Code ライフを楽しむために、設定と拡張機能のメンテナンスをすることにしました。 VSCode はなんとなく使っていたのですが、生産性を上げる拡張機能や拡張機能自体の開発方法を知りたくて、 「プログラマーのためのVisual Studio Codeの教科書 (Compass Booksシリーズ)」を読みました。 プログラマーのためのVisual Studio Codeの教科書 (Compass Booksシリーズ)作者:川崎 庸市,平岡 一成,阿佐 志保発売日: 2020/04/30メディア: Kindle版 設定ファイル プ…

Red Hat で OpenShift のコンサルタントをしている橋本です。 今回は Software Design 2021 年 4 月号に掲載予定だったものの、紙面の都合でカットしたトピックをご紹介します。 もともとは Fedora CoreOS とセキュリティをテーマに、ホスト OS や OKD におけるセキュリティの機能を紹介する予定でしたが、最終的に 20 ページになり、7 ページまで減らす必要があったため、ここでは次のテーマを掲載します。 NIST SP 800-190 におけるセキュリティの範囲は？ Multus CNI プラグインにどれを選ぶ？ Linux カーネルを用いるコン…

はじめに SRE チームの川又です。 Volterraはグローバルで優れたEdge-as-a-Service プラットフォームサービスを提供する事で注目を集めています。 先日、F5, Inc. に買収された事でも話題になりました。 一方、弊社intdash の一部を構成する intdash Server は基本的にクラウド上で動作させます。 ですが、お客様の要件によってはEdge 環境で動作させる事もあります。 SRE チームの検討課題の1つとして、Edge 環境における効率的なサーバアプリケーションの管理・提供 があります。 以上の背景から、今回はVolterraのサービスプラットフォーム上…

こんにちは、@ueokandeです。 つい先日Go 1.16がリリースされましたね。 サイボウズではGoで書かれたプロダクトやツールなどが数多く存在しており、[GitHubで公開][cybozu-go]しているものも多数あります。 自分の所属する[Yakumoチーム][yakumo]でも、Kubernetes上にデプロイしているサービス、AWS Lambda、開発者向けのツールなどをGoで実装しています。 本日は、Goの静的解析ツールをgolintからstaticcheckに移行したお話をします。

はじめに PythonでGUIアプリを作成して、それを他の人に動作確認または修正をしてもらいたいときがありました。このとき、GUIアプリを動かすのにPythonパッケージが多数必要であったり、OSによってGUIアプリの動作が違っていたりして動作確認が困難でした。 Dockerを使えば、その問題を解決できるということで、Dockerを導入したのですが、Dockerを使う最初の一歩がわからず、環境を共有してもらうのに２、３日かかってしまいました。それなので、Dockerを使って環境を共有するまでのやり方をまとめました。Dockerのインストール方法やDockerについての説明は省いています。初学者…

ツイート k.bigwheel⌨️🦀🖊️ SREエンジニア@Speee株式会社 @k_bigwheel なるほど、terraformのリソース名はそのためか https://twitter.com/bukaz54/status/1364381126857355264 12:18 k.bigwheel⌨️🦀🖊️ SREエンジニア@Speee株式会社 @k_bigwheel kubernetesのセキュリティが啓蒙された。 12:12 お気に入り Toshihiko Nozaki @bukaz54 SSM ParameterStore の一つ一つのパラメータのことは「SSM パラメータ」と呼べば良…

経緯 やってみようかな…？ https://t.co/66SnfyJoKN— Colloid (@ColloidGel) 2021年2月15日 原文英語の更新を日本語に取り込もうぜというIssueに対してPR作成をやってみた やってみたIssue github.com 選んだ理由は差分がそんなにないので、いけるやろ。。。！という軽い気持ち 更新対象のページが何故か本文英語なので、全部英訳しないとだめでは…？と軽い気持ちでアサインしてしまった所で謎の汗が流れる。 ものは試しだ、やってみてだめだったらcloseをしようと思う。

親: Design it を読んだ - t_hazawaの日記 7章 8章 9章 10章 11章 12章 13章 7章 よくあるアーキテクチャパターンを12個ほどご紹介 なう(2021/01/06 21:10:53) 114 コンピタンス 期待に応じることが出来る能力 CoCチームは会社にたくさんあるねなう(2021/01/06 22:55:46) RDB専門チームとか 108 チャの前提に一致する技術を選ぼう なう(2021/01/06 19:50:08) 106 SOAP はサービス志向アーキテクチャプロトコルだったのね なう(2021/01/06 18:41:51) 103 C&C構造 …

Kubernetes で PodDisruptionBudget (PDB) を使うと，kubectl drain コマンドでノードをドレインするときなどに Kubernetes クラスター内に起動しておく「最低限必要な Pod 数」を設定できる．よって，Kubernetes を使ったサービスの可用性を高める戦略としてよく使われる． 以下のドキュメントを読むと「自発的な混乱 (Voluntary Disruptions)」と「非自発的な混乱 (Involuntary Disruptions)」という表現があり，既に紹介した「ノードをドレインするとき」は，管理者が運用として「自発的に」行うため「…

×1099 男同士が理想の賃貸マンションを見つけるまでの苦労話｜tachinoki｜note ×184 Matchmaking in Lyft Line — Part 1 | by timothybrownsf | Lyft Engineering ×164 [タイトルが取得できませんでした] ×55 GitHub - youyanggu/yyg-seir-simulator: Underlying SEIR simulator for the YYG / covid19-projections.com model ×17 「井戸に毒」のデマに見る、「2ちゃんねる的インターネット」を引きずる人…