OpenTelemetry

これは何 OpenTelemetryのTracingについて理解するため，GitHub - open-telemetry/opentelemetry-java-instrumentation at v2.6.0において以下について調査した結果をまとめる記事です． Instrumentaionの種類について JavaにおけるAuto Instrumentationの実装方法 まとめ javaコマンドの-javaagentオプションでJava Agentを渡し，アプリケーションの実行前にInstrumentationを行っている Java Agent内ではByte BuddyのElementMat…

全てのサービスのアップグレードがこうであるといいのだけれどなぁ。のような気持ちとやったことのメモ記事。 .NET Core 3.1くらいのころからAzure App Serviceで動かしているアプリケーションがあるのだけれど、それは常にApplication Insightsとともにあった。 主には何かしら不測の出来事があった際に「何があったのか」を調べるのに使っているのだけれど、例外とその前後の出来事が分かりやすくてとても便利だ。 Application Insightsは大分前に世代が変わって、Azure Monitorと統合、アプリケーションからのAPIも大きく変わった。具体的にはOp…

技術部の小池です。 2024年7月19日に 北欧、暮らしの道具店 を運営している株式会社クラシコムさんと合同勉強会を開催しました。 クラシコムさんとは SRE と データ基盤 領域の協業によるご縁があり、2019年にも勉強会を開催しています。 クラシコムさんの新オフィス 今回の勉強会は2024年3月に移転したクラシコムさんの新オフィスで開催しました。 白を基調とした開放的で広々とした空間でとても居心地がよかったです。 勉強会の様子 はじめに乾杯をして軽くピザを食べ、穏やかな雰囲気で発表が始まりました。 OpenAI/Gemini APIを使って EPUBを翻訳するCLIツールをつくってみた O…

はじめに エス・エム・エスでエンジニアをしている @koma_koma_d です。みなさん、オブザーバビリティ、やってますか？今回の記事では、OpenTelemetryのSpan Linkについて紹介します。 そもそも、トレース、スパンとは？ オブザーバビリティにおける主要なシグナルとして、「ログ」「トレース」「メトリクス」の3つが挙げられます。その一つであるトレースは、システムの処理の流れをエンドツーエンドで追跡するための仕組みです。1つのリクエストが処理される流れを、部分に分割して可視化することができます。 トレースは、以下のような「スパン」のツリー構造として表現されます。スパンは、処理中…

はじめまして。Gaudiyでエンジニアをしているあんどう（@Andoobomber）です。 以前、「OpenTelemetry Collector導入のPoCと今後に向けて」という記事を弊エンジニアの sato（@yusukesatoo06）より公開しました。簡単に記事を要約すると、 OpenTelemetry及びOpenTelemetry Collectorの説明 実際にPoCを作ってみる 実導入を試みたがOpenTelemetry Collectorのホスティングに悩み、今後の課題として保留となった といった内容でした。 あれから1年経ち、GaudiyではOpenTelemetry Col…

Open Telemetry って何？ この記事では Open Telemetry のトレースの機能を使います。トレースを使うと、サーバーを越境してコールグラフとその実行時間などを取得することができます。下の画像は Jaeger のスクリーンショットです。Jaeger は Open Telemetry の規格にのっとったコレクター実装のひとつです。 この例では HTTP サーバーと HTTP クライアントでトレースを取得しています。まずサーバーが /1 のパスでリクエストを受けつけたことが分かります。このリクエストに対してレスポンスを返すまでに 845μs かかっていますね。このトレースにおけ…

この記事は「OpenTelemetry Advent Calendar 2023」の20日目の記事です。 はじめに 先日、ローカル環境でではありますがOpenTelemetryを実際にアプリケーションに組み込んで使ってみました。 OpenTelemetry自体は前から知っていたのですが、実際にアプリケーションで使ったのは初めてです。 実際に使ってみるまでは、OpenTelemetryについては トレースちゃんと見られると便利そうだよね とはいえOpenTelemetryってパフォーマンス改善のときに役立つんでしょ? 普段の運用ならメトリクスとログが見えていればトレースはなくてもなんとかなるんじ…

みなさんこんにちは！内製開発チームの杉山です！ だんだん寒さが本格的になってきましたね。寒いといえば（？）、私とSREチームの迫田は、11月にソルトレイクシティで行われる KubeCon + CloudNativeCon NA 2024 に参加する予定です！初めての KubeCon, とても楽しみです…！11月のソルトレイクシティはとっても寒そうですね。現地に行かれる方は、ぜひ仲良くしていただけたら嬉しいです🙇‍♂️ さて、今回は負荷試験の環境を Amazon EKS 上に構築して Datadog と連携したので、そのことについて書いてみます！ xk6 拡張機能が無いと連携出来ないということで…

こんにちは！TECH Street編集部です！ 2024年7月23日（火）に開催した、 「SRE勉強会 ～各社の取り組みや課題から学ぶ会～」のイベントレポートをお届けします。今回は3社のSREエンジニアが集まり各社の取り組み事例を発表していただきました。 登壇者はこちらの方々！ 酒井 悠 ／ パーソルキャリア株式会社山本 和道 ／ さくらインターネット株式会社川岡 潤 ／ コミューン株式会社 早速、内容を紹介いたします！ doda XにEmbedded SREを導入するまでの道のり（道半ば編） doda Xとは doda XでSRE活動を始めた契機 どのような体制でSREを運用していくか？ E…

はじめに こんにちは。バックエンド/インフラ担当の森井です。 業務でログの改善をしてからというもの、オブザーバビリティにお熱をあげている昨今です。 ログ改善については下記のブログにまとめているのでご興味があればご覧ください。 engineers.fenrir-inc.com さて、オブザーバビリティやっていくぞという気持ちが高まっているなか、やはりトレース、そして特にAWS環境においてはX-Rayを避けては通れないだろうということで、サクッと試してみました。 X-Rayとは X-Rayとはどのようなサービスでしょうか。 公式ドキュメントの説明を引用します。 AWS X-Ray は、アプリケーシ…

Mackerelプロデューサーの id:wtatsuru です。 2024年11月1日からMackerelの価格体系を更新します。このお知らせは、2024年4月23日のお知らせ に関する再度の周知となりますが、価格についての変更となるため改めてご確認いただけますようお願いいたします。 mackerel.io 変更の背景 現在Mackerelはクラウド環境におけるオブザーバビリティを高めるための開発を進めています。2024年11月には、現在ベータ版として提供しているメトリックを多次元的に扱うことができる「OpenTelemetry対応」が正式リリースとなります。「ホスト」という単位に縛られないメ…

はてなブログ独自の集計による人気記事のランキング。9月22日（日）から9月28日（土）〔2024年9月第4週〕のトップ30です*1。 # タイトル／著者とブックマーク 1 正しく評価される自己評価の書き方 - るさんちまん by id:naopr 2 相手に話が通じないと感じた時の対処法 - Konifar's ZATSU by id:konifar 3 なぜ日比谷公園に一万人の陰謀論者が集まったのか - やばいブログ by id:y_ryukichi 4 Parquetフォーマット概観 - 発明のための再発明 by id:mrasu 5 「市場に出ない」「理想の異性」について考える際の視点 …

はじめに こんにちは。SREの gumamon です！ NewRelic、Datadog、モダンな監視ツール(オブザーバビリティ)って良いですよね。弊社もKubernetes(k8s)等を利用した環境が増えてきた折、そろそろ必要になってきたのですが、NewRelic、Datadog等のクラウドサービスはランニングコストが高くなりがちです。 では内製できないかやってみよう！・・・というようなことを昨年度から取り組んでいたのですが、やっとこさ形になりましたので改めてブログで紹介させて頂こうと思います。 今回ご紹介するのは、大まかなシステムの構成と設計時の観点です。各コンポーネントの詳細や工夫できた…

この記事は、Mackerel Tech Day開催記念連載 3回目の記事です。 前回は、分散トレーシングサービス Vaxila(ヴァキシラ)ってどんなサービス？ - Mackerel Tech Day開催記念連載 #2 でした。 こんにちは。Mackerel CREチーム ディレクターのid:missasanです。 CREチームでは、以前よりプロダクトとユーザーの橋渡し役として、Meetupなどのイベントの企画・運営やアンバサダープログラムなどの運営に携わってきました。 今回は、今後プロダクトがオブザーバビリティプラットフォームとしての進化を目指す大きな変革のタイミング*1にある中、あらためて…

AWSクラウドネイティブデザインパターン (エンジニア選書)作者:林 政利,根本 裕規,吉澤 稔技術評論社Amazon というわけで読了したので気づきや感想やらなんやらをつらつらと📝 目次 第1部：運用を効率化する 第1章：責任共有モデルを意識してアーキテクチャを選択する 責任共有モデルとは 責任範囲を最小化するようクラウドサービスを選択する 利用者の責任範囲をサポートするサービスに習熟する 責任共有モデルを意識したアーキテクチャパターン 第2章：テスト容易性を高める ユニットテストを阻害する複雑な依存関係 開発者に夜信頼性の高いテスト 独立した組織によるテスト テストピラミッドとCI/CD …

こんにちは！Mackerel CREチームでカスタマーサクセスマネージャー（CSM）をやっているid:chizniiです。 Mackerel は2024年9月17日で正式リリースから10周年を迎えます。今後はオブザーバビリティ分野にも力を入れ、始めやすくて奥深いオブザーバビリティプラットフォームとして進化していきます。これからのMackerelがどのように変わっていくのか、何を目指していくのかについてぜひお伝えしたいと考え、2024年10月22日（火）に、オブザーバビリティをテーマとした技術イベントを開催する運びとなりました。 mackerelio.connpass.com イベントの開催を記…

予想はしていましたが、やはりこの頻度はまあまあきつい…。あと細かい改善やリファクタリング、バグ修正などはリリースノートに載らないのでcoreや使っているコネクタだけでもコミットログまでちゃんと見ないとダメかも。 原文はこちら: https://trino.io/docs/current/release/release-458.html General 冗長なDISTINCTを含むクエリのパフォーマンスを改善（入力がすでにAggregateされている場合に不要なDISTNCTを削除する最適化が追加された） (#23087) JDBC OpenTelemetryトレーシングをサポート (#2345…

いつもMackerelをご利用くださりありがとうございます。 おかげさまで、Mackerelは2024年9月17日で10周年を迎えました。 日本製サーバー監視サービス Mackerel の誕生は遡ること11年前の2013年、はてな社内で行われた事業プランコンテストがきっかけでした。*1 2014年9月17日の正式リリースからたくさんの方々にご利用いただいてきたMackerelそして監視・運用の技術を取り巻く潮流は変化し続けており、Mackerelもいま、これまでの「サーバー監視・管理」の領域から「オブザーバビリティ」領域の開発へと、さらなる進化の転換期になっています。 今回は、激しく変わってい…

OpenTelemetryのトレースを試したい。 標準なデモとしてはOpenTelemetry Demoがあるが、これはフルセットのヘビーなものなので、もうちょっとライトにやりたい。 ということで、OSSのOpenTelemetryトレーサ「Jaeger」に収録されているHotRODというデモで遊んでみた。 基本的に作者Yuri Shkuroのブログ「Take OpenTracing for a HotROD ride」に従っている。 HotRODとは Jaegerでトレースを見る ボトルネックを探る おまけ：Vaxilaにつないでみる HotRODとは HotRODは、タクシー配車アプリケー…