k8s

前提 今回の検証を始めたモチベーションは、単純にk8sを触ってみたいなというのが1番でした。 あと、お家でk8sクラスタ組んでサービスデプロイしたいなー（docker単体だと辛いことが増えてきた）という2つのモチベーションでした。 作業環境 構築対象サーバー ubuntu22.04 vCPU 2 RAM 8GB ESXi上に構築（VMware playerでもVirtualBoxでもOK） 構築サーバーへのアクセス 同じセグメントにあるMacOSからsshで接続 構築手順 必要パッケージのinstall command sudo apt update && sudo apt upgrade -…

📝自分用のメモ コンテナランタイムを選択する kubeadmでは以下のコンテナランタイムを選択することができる。 Docker containerd cri-o Dockerが手軽そうだが、Docker内蔵のcontainerdをkubeadmが優先的に選択してしまい、かつ、Docker提供のcontainerdではCRIが無効になっていたり*1CNIがインストールされていなかったりするのでものすごくハマる。 おすすめはcri-oで、手順のとおりにインストールすれば全くはまらないので初kubeadmならおすすめ。 github.com おすすめと書きながら今回はブログのネタになると思ったのでc…

Kubernetesの知識地図 —— 現場での基礎から本番運用まで作者:青山 真也,小竹 智士,長谷川 誠,川部 勝也,岩井 佑樹,杉浦 智基技術評論社Amazon 私の関わっている案件ではKubernetesを使っています。私自身そこまでKubernetesに詳しいわけではないので、あくまでもその案件で運用するのに必要な知識がある状態でした。この書籍には私の知らなかった知識や、試せていなかったツールなどが紹介されていました。触ったことがある前提で進んでいくので入門書として読むには難しいかもしれません。初級中級くらいで、これからステップアップしていきたい人におすすめです。 参考になった 私は2…

昨日、Argo CDで参照しているHelm ChartをRenovateで自動アップデートする という記事を公開しました。 khasegawa.hatenablog.com これはregexManagersを使って指定したGitHubレポのReleaseからバージョン情報を取得する方法でしたが、 今回はもっと楽に簡単に実施する設定を紹介します。 前回の振り返り 前回は、regexManagersの追加と、更新対象の行にコメントを追加する方法でした。 // renovate.json5 "regexManagers": [ { "datasourceTemplate": "github-rele…

NetworkPolicyでハマったので備忘録としてメモしておきます。 やりたいこと 名前空間 A の全 Pod を Namespace B の Pod への送信を制限する np という NetworkPolicy を作成する。（受信は特に制限なし） 名前空間 B の全 Pod が Namespace A の Pod からの受信しかできないよう制限する np という NetworkPolicy も作成する。（送信は特に制限なし） ポート 53 TCP および UDP での DNS 通信を許可する。 やったこと（★失敗） 名前空間 A 用のNetworkPolicy ■ np-A.yaml ap…

要約すると Kubernetes上で動作するAPIのカナリアリリースをしたかったので、Argo Rolloutsを導入してこれを実現しました。この記事ではその際の導入手順を紹介します。 概要 背景 Argo CDを利用しているので、Argo Projectのツールでカナリアリリースを実現したかった。 対象者 CD (Continuous Delivery) を構築・運用する人 ゴール Argo Rolloutsでカナリアリリースができるようになること 前提 k8sクラスタにArgo CDがインストールされていること kubectlやkubeconfig等のローカルPCの設定が完了していること …

はじめに 半年ぶりです。おとです。 当ブログでちょうど1年前、蓑代さんが New Relic の記事 blog.ecbeing.tech を執筆されておりまして、その中で、 「New Relic と連携さえしてしまえば、アプリケーションのログだけではなく、クラウドサービス基盤のインフラログ、果ては k8s のモニタリングまで出来ちゃいます。」 と、かるーく k8s と New Relic に触れていました。 その記事（というか部内の New Relic 布教）に影響を多大に受けて New Relic に触れて6か月ちょっと、 これまで業務で扱ってきた k8s と 合わせて少し勉強したので、 N…

はじめに keiです． はてなブログを作成してからほとんど投稿してなかったのですが，SRE NEXT 2023に参加して学びが多かったので書いていこうと思います． 今年に新卒SREとして会社に入社してから初めてのオフラインイベントかつ，初めてのSRE関連のイベント参加でしたが非常に学びもありつつ，楽しんで参加できました． 参加したトラック 自分が参加したトラックは以下になります． 11:00 - 11:20 TrackC LINEスタンプのSREing事例集：大量のスパイクアクセスを捌くためのSREing Twitter(X) 11:30 - 11:50 TrackC 備えあれば患いなし：効率…

はじめに k8sもいろいろなシステムで採用されるようになった昨今、仕事でk8sを触ることも増えてきた 概要などは把握しているが仕事で触ることも増えてきたので、k8sの勉強を本格的にしようかと思ったりした 資格を取るのもありだが、自分で触ってみるのが一番速いという経験のもと、ひと昔前に流行ったおうちKubernatesクラスターを作ってみることにした おうちKubernatesクラスターを作ろう(物理編) 今回はせっかくなのでRaspberry Piを使って物理てきに構築した VM上で構築しなかった理由は、物理端末があったほうがテンションがあがるじゃん? パーツたち Kubernatesクラスタ…

はじめに こんにちは、SRE部 検索基盤SREブロックの花房と大澤です。普段はZOZOTOWNの検索関連マイクロサービスのインフラ運用を担当しています。 ZOZOTOWNの検索基盤では、商品検索に関わる大規模なデータを取り扱うためにElasticsearchを利用しています。Elasticsearchを運用していく中で、私たちはパフォーマンスとインフラコスト、運用トイルの問題に直面していました。本記事では、私たちが抱えていた問題と、それを解決したアプローチとしてシャーディング最適化とオートスケーラー開発の取り組みについてご紹介します。

夏の暑さもだいぶ落ち着いてきていよいよ秋めいてきました、そろそろサンマがおいしい季節ですね、菅野です。 AWSを用いて様々なアーキテクチャを作成することが可能ですが、どういった構成になっているのかを一目で表すには図が効果的です。 手動でPowerPointや、draw.io等の作図ツールを用いて作成することも多いのではないか、と思いますが、ChatGPTで簡単に出力できたら便利ですよね。 Advanced Data Analysysの動作環境ではDiagramsライブラリがインストールされていないため、Pythonコードを直接ChatGPTで動かして構成図を出力してもらうことはできませんでした…

Google Cloud の GKE (Google Kubernetes Engine) では、Calico と Dataplane V2 という 2 つのネットワーク制御の仕組みが提供されています。 どちらも Kubernetes NetworkPolicy を利用できるようになっていますが、Calico は iptables を利用してルーティングを制御する一方、Dataplane V2 は Cilium をベースとして eBPF によってルーティングを制御します。 今回は、Calico から GKE Dataplane V2 への移行を考えるにあたって、NetworkPolicy 関連…

DOGOプロジェクトのマスコット こんにちは。サイボウズOffice開発チームの西谷です。 昨年より、私たちは”DOGO”と銘打ち、サイボウズOfficeのフロントエンド部分をNext.js App Routerを用いて刷新しています。 本ブログではこの刷新プロジェクトの概要やこれまでの取り組みについてご紹介します。 プロジェクト発足の背景 刷新の方針 刷新後のサイボウズOfficeを支える技術 アプリケーションフレームワーク モニタリング テスト インフラ CI・CD これまでの取り組み Next.js側で画面のルーティングを制御する リリースパイプラインの構築 全画面共通部分の実装 今後の…

こんにちは！ACS事業部の谷合です。 皆大好きGitHub Actionsにおける、GitHub社公式のSelf-hosted runnerであるActions Runner Controller(以降ARC)の紹介をシリーズでお送りしております。 前回前々回は以下の記事を書いておりました。 Actions Runner Controller Deep Dive！- アーキテクチャ編 - - APC 技術ブログ Actions Runner Controller Deep Dive！- 動作解説編 - - APC 技術ブログ 今回はARCのコードを解説していきたいと思います。 なお、解説は長く…

この記事は ロールをプレイ！というサイトを作ったので技術面のほうを書いておく x.com 技術要素 https://github.com/h-orito/chat-role-play-graphql backend Go DB: MySQL ORM: Gorm frontend Next.js CSS Framework: Tailwind CSS デプロイ Oracle Cloud Infrastructure（Arm A1無料枠 Oracle Cloudでつよつよスペックの無料枠を獲得してkubernetesクラスタを構築したメモ - ortの灰ログ） Kubernetes（kubeadm…

背景 DBのconfigのように一部機密情報が含まれるものを環境変数(k8s Secret等)で注入することは多いです。 そしてその環境変数がちゃんと設定されているか起動時にログを吐きたいということもよくあります。 一方で type Config struct { Addr string Port int Password string } この様にパスワードが含まれるstructをログに吐くと、せっかくSecret等で管理した機密情報が漏れてしまいます。 そういったケースで一部のフィールドだけマスキングする方法を紹介します。 環境 Go 1.21.1 zap v1.25.0 golang.o…

G-gen の武井です。 Config Controller (Config Sync) で Google Cloud (旧称 GCP) のブループリントを利用して GitOps なリソース管理を実現するための検証を行いました。当記事ではその方法をご紹介します。 Config Controller (Config Sync) はじめに 当記事の概要 アーキテクチャ 構成 構成要素 一連の処理 前提知識 (用語解説) Google Cloud ブループリント ランディングゾーン Anthos Config Management kpt レンダリング setters 関連記事 事前準備 参考ドキュ…