レイテンシ

AppsScript がどこで動いているのかなんて普通気にしないですよね。 今回は、場合によってはそこを気にしないといけないこともあるよ！というお話。 本番リリースで無事死亡 AppsScript で Cloud SQL にアクセスする方法については、以下の記事を読んでください。 blog.ttk1.net Cloud SQL にアクセスする処理のある AppsScript で作ったアプリをリリースしようとしていました。 次のような構成でテスト環境で動作確認を行った後、本番環境をリリースという流れで進めました。 テスト DB リージョン: us-central1 (アイオワ) インスタンスタイ…

概要 従来のGKEのロードバランサーはNodeに到達後iptablesで再度負荷分散するという２段階ロードバランシングでした。 これによりレイテンシの増加、分散のばらつきといった問題が生じていました。 ref: Google Cloud Blog - News, Features and Announcements しかしNEG(Network Endpoint Group)という機能を使うことで直接Pod宛てに負荷分散を行うことができ、上記の問題を低減することが可能となっています。 ref: Google Cloud Blog - News, Features and Announcemen…

リオーダーバッファは、アウトオブオーダー実行をするプロセッサにおいて、その投機的な状態を保存するバッファです。 リオーダーバッファのサイズは、命令ウィンドウ（実行順序を並べ替える範囲）の大きさの上限を決めます。 命令ウィンドウに含まれる、依存関係のない複数の命令列は並列に実行できますが、命令ウィンドウに含まれない場合は並列に実行できません。 そこで、依存関係のない複数の命令列の間の命令数を徐々に増やしていくと、並列に実行できる命令列から並列に実行できない命令列に変わっていきます。 これを利用して、リオーダーバッファのサイズを測ってみます。 使用するアセンブリプログラム .text .intel…

エンタープライズでのブロックチェーン 公式サイトの方に説明があります。 hyperledger-fabric.readthedocs.io ブロックチェーンを使った技術として Bitcoin や Etherenum などの暗号資産が有名ですが、エンタープライズ向けのユースケースで活用する動きが出てきていまして Hyperledger Fabric は最初からエンタープライズ向けとして設計されています。 エンタープライズ向けということで以下を念頭に設計されているようです。 参加者が特定されている/特定可能であること ネットワークが 許可型 であること 高いトランザクション・スループット性能 低レ…

調査テーマ Ciliumとは？ / 登場背景 / 解決すること Ciliumとは？ 登場背景 Ciliumが解決すること eBPF(extend Berkeley Packet Filter)とは？ XDP(eXpress DataPath)とは？ Ciliumができること/他との違い Nodeを跨ぐ通信の実現(CNI) ロードバランシング 帯域のコントロール マルチクラスタ通信 モニタリングとトラブルシュート Hubbleとは？ Ciliumが使われているケース(あれば) Ciliumのアーキテクチャ 通信について Cilium利用の前提条件 kube-proxyを使わずにCiliumを使う…

仕事な話ですが・・・やっと昨年しくったポイントの暫定処置運用から修正が上手く行きだして、当初想定のデザインになんとか出来るところまでオンラインで対処して快適になってきました。そして自宅のルーターも手抜きにしていた設定を治しました。最近、仕事でもプライベートでもそんな内容ばっかりで（汗）。そろそろ「元インフラエンジニア」の看板を下ろしてインフラエンジニア復活！と言ってしまった方が良い気がしてきました。そして・・・今日あたり、私が仕事で書いたコラムが会社のHPに掲載されているでしょう…。そんな訳で、最近はファイアウォールやスイッチ、インフラサーバーの設定を眺めてはチューニングを試しての日々を過ごし…

はじめに MLSE 機械学習基盤 本番適用と運用の事例・知見共有会を視聴させていただいたときのメモです。（Twitterコメントなども合わせてメモ） メモ ゼロから始めるKubeflowでの機械学習パイプライン構築 Reproさん Cloud Composer → Kubeflow プロセスに「実験デザイン」の手法を導入 試行錯誤の手続きを標準化 「生命科学の実験デザイン」 TFXを導入 機械学習を利用するシステムの設計思想 各コンポーネントはストレージからデータを読み込み、処理結果をストレージに格納する 実験基盤、検証基盤、サービス基盤 机上実験 → パイプライン実装（FS） Kubeflo…

概要 IOバウンドについて考える機会があったのでその辺の話についてまとめてみた。ちなみにブロッキングIOしか出てきません。以下の本が大体の参考になってます。 www.amazon.co.jp 忙しい人向け 結論としてはIOバウンド(ネットワーク起因)な処理はコア数関係なく増やせば増やす分だけスループットは向上する。自宅環境においてボトルネックはサーバ側の最大コネクション数になった。 ネットワーク越しのIOはクライアントだけじゃなくサービス提供側が存在して成り立つものなので並列数はその辺のサービス特性なんかも理解しつつ決めていく必要があって一概にどれくらいが良いとは言えるものでは無かった。 前説…

「未来はすでにここにある。まだむらなく流通していないだけだ」←グッとくる 最初のエモワードがSF作家ウィリアム・ギブスンの引用でイイ！ サイバーパンク2077遊んでみた～い……じゃなかった、CloudFoundry.comのファウンダーでありMicroservices.ioの運営者、経験豊富なソフトウェアアーキテクトであるクリス・リチャードソンさんによる『Microservices Patterns』の翻訳本。 タイトルのようにアーキテクチャパターンやデザインパターンのようにマイクロサービスをパターンで体系化し、サンプルストーリーを元にした事例やコード例、OSS紹介を交えつつマイクロサービスを…

こんにちは。SaaS Product Team SREの八代です。 はじめに 弊社が開発しているSPEEDAでは、KubernetesとIstioを利用してサービスメッシュ基盤を構築しています。オンプレミス上に構築したK8s、GKE、Google Anthosなど10個以上のK8sクラスタを管理しており、その上でIstioが導入された数100個のPodが稼働しています。 今回は、Istioを導入しているPodのアクセス分析を行う上での課題を共有するとともに、それを改善するための仕組みを作り始めたので、それについて書きますので、同じような問題を抱えている方の参考になれば嬉しいです。 ログの収集基…

こんにちはブログを読んでいただきありがとうございます🙇‍♀️ テレワークオススメ商品を紹介したいと思います✨ 実際に使って良かった物です～😊 AirPods Pro 無線LAN【WX3000HP】 AirPods Pro APPLE AirPods Pro ノイズキャンセリング付完全ワイヤレスイヤホン MWP22J/A posted with カエレバ 楽天市場で探す Amazonで探す 機能 ・全帯域で高いノイズキャンセリング効果 ・外部音取り込みモードにおける環境音の自然な再現 ・低域ノイズを大幅に下げつつ耳への圧迫感・閉鎖感が極小 ・密閉性と装着感の両立 ・軽さとマスの集中、イヤーピース…

APPLEが開発したM1チップ（CPU)が搭載されたMACBOOK AIR フルスペック 欲しい。 いろんな方のレビューでもかなり評判がいい。 同じスペックのWINDOWS PCと比べても安いし！ APPLEの公式WEBページの説明には以下のような記載があります。 小さなチップ。大きな一歩。M1がやってきました。MacのためにAppleが設計した初めてのチップです。並外れた性能を発揮し、専用のテクノロジーにも対応。圧倒的に優れた電力効率も持っています。そして最初から、世界で最も先を行くデスクトップOS、macOS Big Surと連係するように設計されています。M1を持ったMacはワット当たり…