Redis

Redisに樹形図の全データを事前計算して入れておけばよい、という発表を見た。 人間関係に不可逆な変更を与えるような決断を迫られてひどく疲弊して、起きたら13時だった。遅刻だし今後何がどうなるのか全くわからなくてげんなりする。とりあえず水を飲んだ。 という夢を見た。 今日の夢、ブログに書いてなかったけど暗闇の中で枕元に誰かいて誰!!!!! ってなるとか、電話で決断を迫られるとか、とにかく心象に悪い出来事が続いていた — うたがわきき (@utgwkk) 2020年12月14日

はじめに この記事はGo3 Advent Calendar 2020の11日目の記事です。gqlgenを使ってGraphQL Subscriptionsを実装する方法とハマったポイントを紹介したいと思います。 利用技術 gqlgen GraphQL SchemaからGoのコードを出力するコードファーストなライブラリ Redis Pub/Sub Redisでクライアント間通信を行う echo Webフレームワーク 今回はドメイン3層とgqlgenの生成物を合わせた構成にしています。 詳しくは先日の記事にまとめています。 実装した内容はGitHubに公開しました。 ※記事の中のコードはわかりやすさ…

Overview redis-cli の config set で指定できるのはバイト数のみ 内容 redisのメモリ上限をあげる必要があったので対応記録です。 redis.io In options where bytes or other quantities are specified, it is not possible to use the redis.conf abbreviated form (10k, 2gb ... and so forth), everything should be specified as a well-formed 64-bit integer, i…

はじめに この記事はGo3 Advent Calendar 2020の2日目の記事として記載してます。 リアルタイムでランキングの更新・表示ができるpackageをつくったのでご紹介させていただきます。 スコア降順のランキングシステム 例えばユーザーであれギルドのようなグループ単位であれ、スコアが高い順に並べるランキングがあるとします。複数スコアラーが同点である場合も加味すると大体下記のような仕様であることが多いかと思われます。 ランキングはスコアの降順で高くなります 同じスコアの場合、登録時間が早いスコアラーがより高いランクになります 問題点 そのとき単にスコアの降順で表示するだけ(上記の1…

まだ鍋シーズン序盤だというのに、ごま豆乳鍋を3日に1回は食べているWebエンジニアの本間です。 最近、Railsアプリケーションのバックグラウンドジョブのworkerとして Amazon SQS, Shoryuken, Active Job を組み合わせて使うことが増えました。 過去にも以下のようなエントリを書いてます。 tech.unifa-e.com 今回は、Shoryukenを使ったバックグラウンド処理を実運用で使用するにあたって1つ悩ましい問題があり、それをMiddlewareを使って解決した話をご紹介します。

SpringSecurityでの認証を実装していることを前提とする。 redisを導入しておく dockerでredisを入れる docker-compose.yml version: "3.3" services: redis: image: "redis:latest" ports: - "6379:6379" volumes: - "./data/reis:/data" redisを起動する docker-compose up これでlocalhost:6379でredisにアクセス可能 springbootにredis導入 springbootのセッションでredisを使うには、 sp…

会社の輪読会でSQLアンチパターンの4章、5章を読んだのでそのまとめ。 SQLアンチパターン作者:Bill Karwin発売日: 2013/01/26メディア: 大型本 4章 キーレスエントリ（外部キー嫌い） 先に結論 - 外部キーつけろ！！！ アンチパターン：外部キーを使用しない 外部キー制約を省略するとDB設計がシンプルになり、柔軟性が高まり、実行速度が早くなると思ってる人もいるかも知れないが、そこには代償があり代償は別の形で支払う必要がある。 外部キーを使用しない場合の大変さ 完璧なコードを前提にする必要がある テーブルの関連付けを常に維持するコードを書くこと 行の挿入時には外部キー列の…

2020年12月14日ごろから2021年1月11に開催されていた、SANS Holiday Hack Challenge 2020のwriteupです。 SANS Holiday Hack Challengeとは ただ問題をひたすら解いていくCTFではなく、ストーリーがあります。そのストーリーに沿った問題があるので、それらを解いていく形式になります。 メインとなるObjective問題と、そのObjective問題のヒントがもらえるターミナル問題があります。 ターミナル問題の一部は別にObjective問題のヒントではないものもあります。 今年のストーリーはこんな感じ 去年の悪役、Tooth …

もくじ 環境 テーブル作成 .envファイルの更新 Jobファイルを作成 非同期処理を実装 非同期処理の登録 Jobの起動（非同期処理の実行） 参考URL

github.com r = redis.Redis() p = r.pipeline() p.set("transError", var) p.execute() 測定プログラム # -*- coding: utf-8 -*- from __future__ import absolute_import from __future__ import unicode_literals import redis import time r = redis.StrictRedis(host='localhost', port=6379, db=0) # 通常の場合 start = time.tim…

こんにちは。 今年の年始からジョインした遠藤です。 さて、入社したところ会社支給のMacBook ProがM1チップのものでした。 はい、現状は開発環境で苦労するとか色々噂を聞くやつです。 実際に試したのですが、 現状の開発環境構築スクリプト、手順書が一切使えない VitualBox, Vagrantは利用不可 Dockerは利用可能ではあるが、一部イメージが対応されてない 古いパッケージは動かす手段がない などなど、通常ではぶつからない問題にぶつかります。 食べチョクでは、 Ruby Node.js MySQL Redis ElasticSearch Kibana を利用しています。 この辺…

Exment という Web データベースを構築してみようと思います。 また、ログイン認証を DC でできるように設定も行おうと思います。 参考にする手順は下記。 インストール-概要 (exment.net) Linuxによる環境構築 (exment.net) OS 準備 動作 OS は CentOS 8 だと手順でエラーになるようなので、CentOS 7 で構築します。 項目 値 ホスト名 exment.lab.local IPアドレス 192.168.200.20 SELinux 無効化 # vi /etc/selinux/config # grep -v -e '^\s*#' -e '^…

×152 技術系の情報をググると検索結果に表示されるStack Overflowの機械翻訳サイトを回避する技術 - ムニエルブログ ×60 How I stole the data in millions of people’s Google accounts | by Ethan Elshyeb | Jan, 2021 | Noteworthy - The Journal Blog ×56 GitHub - juicedata/juicefs: JuiceFS is a distributed POSIX file system built on top of Redis and S3. ×…

事前情報 参考ドキュメント 環境情報 upgrade (v14.1.0 -> v16.0.0) 事前バックアップ upgrade upgrade 後に発生するかも知れない問題 upgrade 後 GUI で Settings ページにアクセスできなくなっていた upgrade 後 HTTP しか使っていないのに WebSocket 通信が wss でされる (v16.0.0 固有問題) upgrade 後 ジョブ実行時の output が auto refresh されない (v16.0.0 固有問題) upgrade 後 dynamic inventory スクリプトを指定する入力が出来なく…

2020 SANS Holiday Hack Challenge ~ KringleCon 3 ~ のTerminal (Objective以外) のwriteupです。 イベントの紹介や他のchallengeのwriteupはこちらの記事へ。 tech.kusuwada.com Kingle Kiosk (terminal) command injectionがあるとのこと。このNameBadgeの機能が怪しかったので色々試してみた。 Enter your name (Please avoid special characters, they cause some weird errors)…

概要 記事一覧はこちらです。 Spring Boot Reference Documentation の AsciiDoc 形式のドキュメントのソースが https://github.com/spring-projects/spring-boot/tree/master/spring-boot-project/spring-boot-docs/src/docs/asciidoc にありますが、index.singleadoc の中を見てみると各章は個別のファイルに記述してそれを include directive で取り込んでいました。 同じことを試してみます。 参照したサイト・書籍 目次 s…

2020 年振り返りを簡単にまとめました。 知人向けの近況報告のつもりです。 OSS 活動とかは、さすがに書き出すと細かい感想がどんどん出てくることに気づいたので 来年以降は別にまとめるとかしてもっとコンパクトな記事にしたいと、書きながら思いました。 特に同業者向けというつもりでもなかったので。 私生活 コロナの影響 リモートワークが常態化するにつれて、UberEats で朝はスタバ、昼はいきなりステーキの生活に違和感がなくなってきました。 同人イベント（コミケなど）がすべてなくなったので、それらのお手伝い業務も今年はありませんでした。 2, 3, 4 月は NYTimes などの詳細なコロナ…