あるシステム管理者の日常 このページをアンテナに追加 RSSフィード

2018-09-24 足立区割当て

足立区割当て

| 16:56 | 足立区割当てを含むブックマーク

振替休日の月曜日は足立区最終日の割当てでスイムスポーツセンター体育館。この会場は初めての訪問です。

竹塚駅と谷塚駅のちょうど中間あたりだったので、谷塚駅から徒歩。20分程度ですかね。

草加せんべいのお店がたくさんありましたが、もう廃業しているみたいなところや、まだ朝早かったのであいてないところばかり。

ゲームの割当ては15時30分でしたが、事前連絡でお弁当があるのでときていたのでこれは午前中に来いよってことだなと解釈して9時30分には会場入り。

ゲーム終了後は竹塚駅まで移動して小料理屋さんで美味しい食事と飲み物。

トラックバック - http://d.hatena.ne.jp/rougeref/20180924

2018-09-23 練習ゲーム割当てから戸越

練習ゲーム割当てから戸越

| 16:52 | 練習ゲーム割当てから戸越を含むブックマーク

日曜日はまず午前中に練習ゲーム割当てで川崎市の某社体育館。当初10分×6を2PO、3人で回す予定でしたが、せっかく三人いるのだからと全部を3POで実施。もちろん各所へ了解スミ。

結構久しぶりの3POでした。

ゲーム終了後は大急ぎで戸越体育館で品川区民大会。ゲーム終了は割と早い時間でしたが、会場の撤収作業を頑張りました。

トラックバック - http://d.hatena.ne.jp/rougeref/20180923

2018-09-22 練習ゲーム割当て

練習ゲーム割当て

| 16:44 | 練習ゲーム割当てを含むブックマーク

土曜日は練習ゲーム割当てで午後から池尻の某社体育館。ゲーム開始時間をおよそ1.5時間間違えて早く来てしまうトラブル。早く間違える分にはあまり問題ありません。

ゲーム終了後は駒場東大前駅まで徒歩で移動してから吉祥寺駅。それからバスで武蔵総合体育館まで移動。

フィットネステストの立ち会いです。なんと42名もの方が参加。お疲れ様でした。

女性講習会があったようで、みなさん懇親会へ行かれたようですがおとなしく帰宅。

トラックバック - http://d.hatena.ne.jp/rougeref/20180922

2018-09-21 Webがダウン

Webがダウン

| 16:41 | Webがダウンを含むブックマーク

朝出勤すると、Webが見えないとの報告。例のごとく「見えないってどういう現象を観測したんですか」とか考えながらトップページをみると確かに500エラーになってる。

どういう状況なんだとZabbixサーバの監視コンソールを確認するとこれはタイムアウトする。

sshでWebを構成する各サーバログインを試みると、ログインできるところと、タイムアウトするところとがある。

どうやらバックエンドのいくつかが機械的にダウンした模様。こういう機器的損傷が起きた場合は監視してくれているZabbixからメールがくるんですが、どうやらZabbixサーバも一緒にダウンしている。そりゃメールもこないよ。

あまり良くないことにWebのコンテンツを格納しているDBサーバが落ちていて、スタンバイ処理がうまく動作していない。外部からのHTTPを受け付けるサーバは健在。DBの復旧はちょっと時間がかかりそうなのでとりあえずは緊急避難的に静的コンテンツのファイルでリクエストをさばくことにする。ファイルは日時でクロールしているものなので24時間まえのものだけど、この際しかたがありません。

複数サーバが同時にダウンしているので、おそらくそれらが乗っている仮想マシンが物理的におっこちたのかも。

上記静的コンテンツをプロバイドして時間を稼いでるうちに、DBレプリケーション環境をマスタ環境へグレードアップ。復旧時の手間を考えてスタンドアロンで起動して仮復旧させる。

午後にマシンが復旧。午前中にDBに書かれた部分を本番環境と同期をとったうえで、手動でフェイルバック処置。

夕方には復旧しました。

ウェブの管理をやってるとマニュアル化しろとかいろいろ言われますが、こんなのどうやってもマニュアル化なんかできないと思うな。

トラックバック - http://d.hatena.ne.jp/rougeref/20180921

2018-09-20 練習ゲーム割当て

練習ゲーム割当て

| 16:29 | 練習ゲーム割当てを含むブックマーク

木曜日は定時後に練習ゲーム割当てで港区の某高等学校体育館。朝からずっと雨でしたが、ちょっと小止みになった時間を狙って徒歩で移動。30分ほど歩いて到着。雨が降っていなければシェアサイクルなんですけどね。

小止みになっていたとはいえ、結構濡れてしまいました。1.5本で終了。

会場になった学校はこの週末が学園祭らしく、いろんな飾り付けがされていました。私が行っていた高等学校もそうでしたが、おそらく模擬店とかそういうのは無いみたい。出し物とか展示がメインみたいです。

トラックバック - http://d.hatena.ne.jp/rougeref/20180920