k8s

始めに 日本でフリーランスでめし食ってるジョンです。 Kubernete(k8s)の基本的ことを紹介します。 誰のために エンジニアさん向けの話しであり、 優しい説明は少し漏れている可能性があるので ご了承ください。 こんな人が一番良いかもしれません。 ✓ 一応派遣されて来たが今までやったことないKuberneteをやる人 ✓ dockerは作ったことあったが、何kuberneteって気になる人 絶対覚えておくこと コマンド 全pods確認 kubectl get pod -A ログ確認 kubectl logs -n {namespace} {podname} [-c {container …

コンテナのメリット コンテナは、CI/CDやDevOpsを実現するための重要な技術です。コンテナを理解しようとするには、仕組みよりも先にそのメリットを理解する方がよいでしょう。理解にあたっては、主に仮想マシンと比較するとそのメリットが分かりやすいでしょう。 起動が早い コンテナは、通常のプログラムを実行するのと同じ仕組みで起動されるため、とても早く起動できます。これがたとえば仮想マシンであれば、OSの起動から各種プロセスの起動、そしてプログラムの起動の順番となるため、起動が完了するまでかなりの時間がかかります。 メモリを消費しない コンテナは、プログラムしか起動しないので、メモリの消費はプログ…

はじめに こんにちは。家系らーめん好きが高じて鶏油を自分で取得するようになり、金色に輝く液体を見るだけでパブロフの犬的に涎が止まらない、SRE部の横田です。普段はSREとしてZOZOTOWNのリプレイスや運用に携わっています。 先日、弊社の高橋が執筆したZOZOTOWNカート機能リプレイスに関する記事が公開されました。 techblog.zozo.com 本記事では、上記記事で紹介したリプレイスのキーポイントとなる、キューイングシステムに焦点を当てます。キューイングシステムをDeep Diveし、サービス選定からプロダクションレディにするまでの取り組みを紹介します。 目次 はじめに 目次 キュ…

Kubernetesを運用していると、Podのログが見たくなることはよくあると思います。 kubectl get podsでPod名を調べ、kubectl logs -fして、kubectl applyでPodが入れ替わるとまた1から・・・これだけでも面倒ですね。 sternというツールは、正規表現でPodを指定でき、Podの生まれ変わりも自動で検知し、新しいPodからログ読み込んでくれます。ログを見る作業がぐっと楽になりますので、早速導入していきましょう。 github.com 検証環境 macOS 12.1 stern 1.21.0 次のアプリをデプロイし、動作確認をしています。 GitH…

Traefik (proxy) を k8s Ingress controller として使うと、ワイルドカード証明書の自動発行が簡単そうなのでやってみた。 Traefik 公式ドキュメント が、わかりにくい、というか、設定のための情報が散逸してたり、そもそもプロダクトとして必ずしも k8s を前提としているわけではないのでじゃあ k8s 向けにはどうすんだ、みたいなのが難しかったので、やったことのメモ書き。 状況設定としては LAN 内に 192.168.0.100 を IP としてもつサーバがあり、そこで k0s をシングルノードで動かしている example.com という domain …

2021年10月11日 -15日に「KubeCon + CloudNativeCon North Ameraca 2021」がLos Angelesにて開催されました。 今回もオンラインで視聴が可能でしたので、いくつかのセッションを視聴しました。 興味深いセッションはたくさんありましたが、Kubernetes向けのサービスメッシュプロダクトである Linkerdのセッションがいくつかありましたのでそちらについての記事となります。 用語解説 KubeCon + CloudNativeCon・・・CNCF(Cloud Native Computing Foundation)主催の毎年数回開催されて…

credentials を秘匿しながら Pod にマウントしよう。 🤔 kubernetes の Secret とは？ まず kubernetes には ConfigMap と Secret と、Pod に値を渡すための役割として似たようなものが2種類あります。 公式の ConfigMap の注意書きにも 注意: ConfigMapは機密性や暗号化を提供しません。保存したいデータが機密情報である場合は、ConfigMapの代わりにSecretを使用するか、追加の(サードパーティー)ツールを使用してデータが非公開になるようにしてください。 と記載されているので、 環境変数は ConfigMap …

ツイート Publickey @publickey ブログ書きました： Google Cloud SpannerのPostgreSQL互換インターフェイス、正式版に https://www.publickey1.jp/blog/22/google_cloud_spannerpostgresql.html 19:37 なかむらさとる @satoluxx これすげぇ。ちょっと腰抜かした。 昔からこの手の製品あるのは知ってるけど、デモみて驚いた。 https://cloud.google.com/blog/ja/products/ai-machine-learning/google-cloud-op…

btc.connpass.com BTC さんのイベント！ セッション Docker初心者がコンテナ再入門する BTC 長濱さん AWS Hands-on for Beginners 「ECS 入門」を受講 Docker RUN と CMD の違いが難しかった CMD は Docker 上での実行 コンテナを使ったバッチ実行環境を考える BTC 廣末さん Fargate Spot の使い所 強制終了が怖いけどほぼ無い 中断の頻度みても5%以下 スポット価格履歴もあまり変わってない AWS Batch はリトライできる 処理量が決まってない Batch 処理は？ Lambda : 楽だけど15分…

概要 KubeCon + CloudNativeCon EU が 2022年5月16日から20日の日程で行われた。 16日と17日には co-located event があり、本体のイベントは18日からの3日間であった。 トラック毎のセッション数の比較を下に示す。 増減がはっきりしないものがほとんどであるが、"Security + Identity + Policy" と Observability と "Customizing + Extending kubernetes" は増えているように見える。 セッション数 前回に引き続き、会場とネット配信のハイブリッド開催で、co-located…

k3sはk8sの軽量版。サーバとエージェントに分かれてエッジの用途にもフォーカスされているらしい。 k3sの説明はこちら Rancher labs社のPDF https://rancher.co.jp/pdfs/K3s-eBook4Styles0507.pdf 使ったOSはRaspberry Pi OS (32bit) Debian Bullseye。 インストールは下記を参考に行った。 future-architect.github.io 但し、Raspberry Pi OS (32bit) Debian Bullseyeはcgroupがデフォルトで有効になっておらず。 agentの起動時に…

はじめに 共通系 システム系 構築ツール（2022.6.10） クラウド系 CORS（2022.3.10） Web系 ブラウザオブジェクト・DOMオブジェクト（2022.5.1） DB系 データベースを決めるまでの流れ（2022.6.25） はじめに fujiokaです。ここでは、自分がプロジェクトや自主学習で出会った、エンジニアの専門用語や概念を、調べてメモしていきます。 （自分用の管理で、上に追記していきます。） 共通系 ああ ああ システム系 構築ツール（2022.6.10） Orchestration クーバ Dockerはアプリ環境をデプロイ、ポータブルさせることが目的であるのに対し…

はじめに そもそもcommmune って何？ サービスの紹介 特性について 旧アーキテクチャとその問題点 問題１：増減するトラフィックに対してコスト最適なマシンスペックを設定するのが運用上難しかった 問題２：トラフィックのスパイクでサービスが過度に不安定になっていた 問題３：動作環境としてのVMの管理が煩雑になってしまっていた 打ち手としての新アーキテクチャ 新アーキテクチャ サービス選定の内訳 成果 新たな課題 最後に はじめに こんにちは。 前原夏樹と申します。 コミューン株式会社のSREチームでアクティングマネージャーをしています。 今日は当社のプロダクトであるcommmuneのアーキテ…

DMM プラットフォーム事業本部 マイクロサービスアーキテクトグループのいっぬ（@yuyu_hf）です。 先日、DMMグループで実施しているGoの勉強会「DMM.go #4」で、負荷試験基盤の開発について発表しました。 DMM.go #4 https://dmm.connpass.com/event/246631/ 発表で使用したスライド https://speakerdeck.com/yuyu_hf/dmm-go-4-load-testing-first-release 今回のブログでは発表の様子と、スライドに使用したスクリプトと質疑応答を載せています。 マイクロサービスプラットフォーム向け…

JJUG CCC 2022 Spring に参加しました。オンライン開催。簡単に所感をまとめます。 jjug.doorkeeper.jp 所感 久しぶりにリアルタイムで参加しました。質疑応答ができるのがリアルタイムのいいところ。時間の都合上、4セッションくらいしか参加できなかったけど、他にも気になるセッションがあるのであとでアーカイブを見直そう。 PayPay祭の事例ですが、負荷対策は自分としても気になるところなので興味深い内容でした。毎週、負荷試験してるのはすごい。やっぱり自動化してるんだろうなと思いますが、そのあたりのノウハウも知りたい。 リモートワークの話、オンボーディングのドキュメント…

JJUG CCC 2022 Spring に参加しました！ いつも以上におもしろいセッション盛りだくさんで、参加してとても楽しかったです。 LINEのトラブルシューティングのような現場での経験をもとにした話から、バイトコードのようなJavaのコアな話まで、とてもバランスよくセッションが採択されていたからかなと思います。 特に前者はなかなか普段の JJUG ナイトセミナーなどでは聞けないので、いつもとても楽しみにしています。 あと、動画セッションならではですが、今回は休憩時間中に時間がかぶって見れなかったセッションを2倍速で追っかけて見るということをやってみて、より密度の高い時間になりました。 …

このブログではKubeVirtについて何度か取り上げていました。 主にkubeadmでクラスターを作って、KubeVirtを導入する手順もご紹介しています。 tech.virtualtech.jp ちなみになぜKubeVirtを頻繁に取り上げるかというと、筆者がKubeVirtに個人的に興味があるからです。 さて今回はMinikubeを使って、KubeVirtの評価ができる環境づくりを試してみようと思います。 Minikubeを利用することにより、KubernetesでKVM VMを利用できるKubeVirtを手軽に試すことができます。 Minikubeで手軽にKubeVirtを利用できるよう…

自宅ではプログラムのビルドと実行に簡単なシェルを書いていたが、この機会にGitLabでCI/CDを試したいと思う。以下、設定方法を確認しながら書き方を覚えよう。 gitlab-docs.creationline.com 仕事では,k8s関係のビルドとデプロイではArgoを検討している。今やk8sではデファクトスタンダードになりつつある感じ。 argoproj.github.io

要件 このガイドは次のバージョンのUbuntu（の最新版）で動作確認をしています。 Ubuntu 18.04.6 LTS Ubuntu 20.04.4 LTS Ubuntu 22.04LTS (cgroup V1設定に変更が必要。詳細は後述) 現在の私の推奨はUbuntu 20.04.4 LTSです。 本ガイドでは Kubernetes 1.24.1をインストールする例を示しています。 SWAPのオフ Swapパーティションをコメントアウト、およびswapoffを実行します。 sudo vi /etc/fstab sudo swapoff -a 初期設定とランタイムのインストール 本例ではco…