MySQL

設定 MariaDB 10.5 ではこんな感じだった。 変数名 デフォルト値 備考 character_set_client utf8 ★1クライアントの文字コード character_set_connection utf8 ★1 character_set_database latin1 ☆A DBの文字コード設定ファイルの対象ではない character_set_filesystem binary ファイル名で使う文字コードLOAD DATA とか character_set_results utf8 ★1 character_set_server latin1 ★2 サーバの文字コード …

はじめに 初めて構築してみたので、指摘等がたくさんあるかと思いますが、 一読してもらえると嬉しいです。また、指摘ありましたらコメント下さい。 環境 Rails 7.0.8 Ruby 3.2.0 Docker Docker-compose MySQL 学び 各ファイルについては、割愛します。(ネットにたくさんの記事が出ているので、重複することが多いです) 仕事でも使うことがあるので、わかっているが自分のPCに余計なものを読み込ませる必要が無いことが一番のメリットでは無いでしょうか。 下記のコマンドは何気なく使っていたのですが、docker desktopをみてびっくりしました！！ docker …

今、どんなクエリが動いているかは次のコマンドで確認できる mysql -u abcuser -pPASS abcdb -e "show processlist;" +----+---------+-----------+-------+---------+------+----------------+--------------------------------------------------------+ | Id | User | Host | db | Command | Time | State | Info | +----+---------+-----------+----…

英語回文 回文と私 島楽狂 - 回文自選集 2003年 2004年 2005年 ちょっと長めの怒りの注釈 それって転載じゃなくて盗ｓ… え？実はオレが盗ｓ…したの？ 大人げない投稿の真意 蛇足：逆引きSQL比較（←これもパクられたことがあります） 1週間DTM 2回目「涼し」 後ろに貼った1週間DTM。お題は「涼し」なんですが、副題で「俳句」と言うのがありまして。 「涼し」を入れて一句、捻れと。 で、ワタクシ、たまさかにこのブログにも書いていますが、回文の人なので、久々に回文俳句に挑戦しました。 しかし、まったく思い浮かばず、と言うか「すずし」の逆読み「しずす」を入れるとなった時点で五七五は困…

こんにちは、ジョンです。 今回初めてtrocco®を使ってデータの転送を行った経験をブログに投稿させていただきます！ まず、皆さんtrocco®についてご存知でしょうか？ trocco®は日本発のデータ分析基盤総合支援サービスです。 trocco®はデータ転送や変換、加工などのさまざまな機能をビジネスユーザの使いやすさに最適化したUI（User Interface）として提供することで、既存のデータ総合エンジニアリングの工数を90%以上削減できる強みを持っています。 （200社以上の企業が導入しているそうです。） 今回ジョンが担当しているプロダクトで社内で利用しているチームの方から毎日のデータ…

環境 mysql> select version(); +--------------+ | version() | +--------------+ | 8.0.28-debug | +--------------+ 1 row in set (0.00 sec) mysql> show create table test\G *************************** 1. row *************************** Table: test Create Table: CREATE TABLE `test` ( `id` int NOT NULL, `nam…

Docker入門 Docker を使ってプログラミングの学習を開始される方を対象とした Docker 入門サイトです。 Docker の開発環境をローカル環境に構築する手順や、 Docker を使ったプログラムの記述方法や実行までをサンプルを使いながら順に学習していきます。 Docker入門 Dockerのインストール方法と環境設定 Dockerのダウンロードとインストール(MacOS編) Dockerのダウンロードとインストール(Windows編) Dockerに関するドキュメントを参照する Dockerのプロキシーの設定 Dockerイメージ集 docker-compose と nginx…

Repro では Aurora MySQL を使用しています。いくつか数千万行を越えるデータを持つ大規模なテーブルもあります。 大規模なテーブルのスキーマを変更するときは pt-online-schema-change1 を使用していますが、今回はその必要性を判断するタイミングを早めた話です。 pt-osc が必要になる理由等は次の記事が詳しいです。 - pt-online-schema-changeの導入時に検討したこと、およびRailsアプリとの併用について - freee Developers Hub 解決したい課題 Repro では Rails アプリケーションが管理画面や API を…

メルマガ・ステップメール配信ソフト(CGI) MilkyStep-ミルキーステップ-の中身や感想などについてのことを知っておきたい人は、このサイトが役に立つかもしれません。メルマガ・ステップメール配信ソフト(CGI) MilkyStep-ミルキーステップ-のアピールポイントや実践等についてのことが暴露されている場合がありますので、ご確認下さい。もっと、このノウハウに関する詳細説明を確認したい方は、以下の詳細情報が購入の参考になると思います。販売商品名：メルマガ・ステップメール配信ソフト(CGI) MilkyStep-ミルキーステップ-実用教材の内容：買い取り式のCGIとしては日本で初めて「標準…

MySQL の GROUP_CONCAT と同様のことをやる。GROUP BY を指定したSELECT で、STRING_AGG を使う。書式は、 STRING_AGG ( expression, separator [order_by_clause] )order by で指定する列は、他の列でもいい

こんにちは！ピクシブでバックエンドエンジニアとして働いているこのぴーです。 今回はpixivコミックストアの作品検索機能をMySQLの全文検索からElasticsearchに移行したときの手順と移行後の効果についてお話していこうと思います。 背景 pixivコミックストアのバックエンドはRuby on Railsで作成していて、今回Elasticsearchへ移行する作品検索機能はMySQLの全文検索を使用して実装されていました。 作品数が少なかった実装当時は問題なく動いていたのですが、取り扱う作品数が数十万作品となった現在、スロークエリの大部分を検索クエリが占めるほど性能が劣化してしまう事態…

はじめに 初めまして。食べログ飲食店システム開発部でマネージャーをしている井本と申します。2016年に入社し、様々なチームを経てから現在はインターネット予約に関連する機能を主管とする予約サービスチームにいます。 この記事では2022年にリリースしたオンライン台帳の「食べログノート」で起きた問題と、その解決に至るまでにやってきたことを紹介します。 食べログノートリリース直後に発覚した在庫の100bit問題 食べログノートは2022にリリースしたオンライン予約台帳サービスです。 実店舗の座席配置や運用実態により近い形でオンライン管理でき、かつ直感的に操作できるサービスとして日々改良を続けております…

こんにちは。エンジニアの佐藤です。今回はGraalVMのお話をさせていただきます。 きっかけは相談から 先日他プロジェクトの方から「Webサーバーのリクエストが不思議なタイムアウトをしているが、どうしてだろうか？」と相談を受けました。話を聞いていると、メモリ(主記憶)利用超過が疑わしいと思いました。メモリは古来からある問題で、瞬間的にでも超過すると、サーバーはOS(通常はLinux)によって実行停止措置となってしまいます。今回の場合、そのリミットは1GB。仮想メモリはありませんので、この制限を踏み越えればアウトです。 Spring Boot Data JPAの凄まじいメモリ使用量 インタビュー…

こんにちは、後藤です。今回はAWS構成における踏み台についての記事です。 データベースなどのインターネットに繋げたくないリソースに踏み台リソース経由でアクセスさせることは、セキュリティ設計としてよくある構成だと思います。 今回はその踏み台リソースに「ユーザーログイン有無を検知して自動停止する」ロジックを組み込んだ方法を共有します。 また、一般的によく用いられるのはEC2だと思いますが、今回はECS on Fargate(以降はFargateと略)を使います。しかも自動停止ロジックにLambdaを使いません！！コンテナの中で完結させます。 踏み台を設計する時に気になること そもそも踏み台について…

大谷翔平 大リーグでホームラン王を獲得 日本選手初の快挙 | NHK つらい記憶のフラッシュバックは「テトリス」をやると減る、研究 海外のCGクリエイターが『シン・ゴジラ』から日米の怪獣映画を比較する動画が面白い「大事なのは視点」「ハリウッドは怪獣を擬人化しすぎ」 四谷大塚の別講師も新たに逮捕 共謀し女子児童を盗撮疑い | NHK サーバレスに最適化したJava実行基盤「GraalOS」、オラクルが発表。Javaをネイティブバイナリにコンパイルし瞬時に起動 岡田准一11月にもジャニーズ退所か 周囲に意向伝える 事務所２度目の会見と同日発表も（日刊スポーツ） - Yahoo!ニュース [第41話…

Redash使いの同僚に「Redashを使えるようになるには」を相談したところ、以下のRedashハンズオンを教わりました。 kakakakakku/redash-hands-on: Redash study materials for beginners 📊 ハンズオン資料をさらっと流し見したところ、 スクリーンショット付きで丁寧に解説されていたこと 継続的にバージョンアップされていること Redash v10 を試そう！「Redash ハンズオン資料」v10 をリリースした - kakakakakku blog と、Redash何も分からない自分が入門するのにはちょうど良さそうでしたので、…

これは、なにをしたくて書いたもの？ 以前Quartzについて調べた時に、Scheduler#shutdownを呼び出す際に引数があるものを使い、かつtrueに設定すると実行中のジョブが ある場合は、ジョブが終了するまで待機するということを書きました。 JavaのジョブスケジューラーQuartzを試す - CLOVER🍀 確かにドキュメントにもそのように書かれているのですが、実際にどうなのか確認してみることにしました。 How-To: Shutting Down a Scheduler Scheduler#shutdown Schedulerのシャットダウンに関するドキュメントはこちら。 How…

2023年 9 月の振り返り 2023年 9 月の振り返り 🤔 1ヶ月の所感 9 月の振り返り 先月の課題感・今月の課題 先月掲げた改善したい課題 今月の改善したい課題 生活習慣等 📝 学習系 月に一度勉強会に参加する インプット アウトプット その他 1. 🏃運動 2. 📖🎥 文化系 🧘 最後に 🤔 1ヶ月の所感 「考えごとをしてしまう時間が長かった1ヶ月だった」 主に以下のことが理由です。 会社内の引き継ぎに追われ、チームの今後について考える時間が長かった プライベートでもいくつか良くない出来事が起きたため、あまり余裕がなかった 9 月の振り返り 先月の課題感・今月の課題 先月掲げた改善し…

PlanetScale というサーバレスDBを使ってみました。 以下のQiita見てサインアップしました。 多少画面遷移は変わっていますが、なんとかなるレベルです。スクショ貼ってくれるのは本当にありがたい・・・ あ、無料プランで登録したのですがクレカの登録は必要でした。 qiita.com で、その後に手元のMacで環境整備。 homebrew で mysql をインストール $ mysql -V mysql Ver 8.1.0 for macos13.3 on x86_64 (Homebrew) 接続先のホストやデータベース名、ユーザー名とパスワードを環境変数にセットして、いざアクセス。 あ…