SQL

はじめに 初版との違い よかったところ クラウドにおけるデータベースの冗長構成 論理設計の4つのステップ 物理設計の5つのステップ 学んだところ アンチパターンやグレーノウハウの充実 難しかったところ データベースとパフォーマンス おわりに はじめに 今回は前回に続きSQLを学びます。 前回は『スッキリわかる入門シリーズ』でSQLを学びました。 codaichi.hatenadiary.com 前回の記事内でも触れましたが、DB設計については理解不足を感じていました。 そこで今回は8月28日に第2版が出版された、『達人に学ぶDB設計徹底指南書 第2版』でDB設計について学んでいきます。 初版と…

はじめに こんにちは、アソビュー株式会社でバックエンドエンジニアをしています竹村です。 ありがたいことにアソビューのサービスも長く続き、ご利用いただいているユーザーが増えるにしたがってデータも増え、SQLのパフォーマンス改善を行なうタスクが増えてきました。 今回はそんなSQLのパフォーマンス改善をしているなかで遭遇した問題とその対策について書こうと思います。 問題の概要と背景 パフォーマンス上問題がありそうなクエリを調査しているなかで、ごく一部のテーブルですが、数値であるべきカラムが誤って文字列型で定義されていたことがわかりました。 そしてこの型の不一致が原因で、SQLクエリの実行時にインデッ…

自己回帰するテーブルを作ることもある。プログラム言語を使って展開することはあったが、SQLでの展開もできるので、メモとして記載。 1.参考にしたもの 2.ソースコード 2.1 対象となるテーブル 2.2 再帰SQL 2.3 再帰SQLの結果 3.はまったこと 3.1 型は揃える 3.2 条件式 4.再帰の結果もビューにできる 5.最後に 1.参考にしたもの 先に参考としたサイトや本の紹介。 概念などはこっちで見てもらった方が MSLearn learn.microsoft.com qiita.com ミックさんの本。少し、古い本ですが、まだまだ使える。 SQL実践入門──高速でわかりやすいクエ…

mattnさんがめちゃくちゃ良い感じの回答をしてくれていたが、詳細については触れていなかったのでほんの少しだけ回答を深掘ってみる。 mond.how 以下、引用 SQL でパフォーマンス改善するには幾らか手法がありますが、おおよそは以下の数個に絞られます。 フルスキャンを避ける事 インデックスを適切に張る事 集約関数や分析関数の利用 速い演算子や副問合せへの書き換え なぜ速い演算子に書き換えるべきなのか、なぜ分析関数が必要のか、なぜフルスキャンを避けるべきなのか、なぜインデックスを張るとパフォーマンスが改善するのか、そして適切にインデックスを貼らないどうなるのか、といった内容は読み物として調べ…

前回の続きです。 SQLを学び直す その① - mei98’s diary WHERE句 WHERE句は、以下の特徴があります。 行の絞り込みをする SELECT、UPDATE、DELETE文で使う WHEREの後ろに条件式を記述する WHEREで使う比較演算子 NULLの判定方法 NULLであることを判定する場合 IS NULL NULLではないことを判定する場合 IS NOT NULL LIKE演算子 部分一致の検索をする演算子。 LIKE演算子で使えるパターン文字は以下の通り 命令文 説明 % 0文字以上の文字列 _ 1文字 使い方は次の通り SELECT * FROM 社員WHERE …

お仕事でSQLを使うことになったので、勉強します。 基本情報を取得するときに触れたことはあるのですが、意味不明だったので学び直し。 まずは基礎の「き」 学んだ内容をメモのように書き起こします。 SQL文のルール SQL文の終了を、セミコロンで表せる SELECT *FROM 家計簿; /* SELECT文終了 */DELETE FROM 家計簿WHERE ID = 1; /* DELETE文終了 */ コメント ハイフン2つ SELECT *FROM 家計簿; -- コメント /* */で囲む SELECT */*コメント*/FROM 家計簿; /* コメント */ 4大命令 命令文 説明 S…

本記事では、SQL Server Management Studio(以下、SSMS)を使用した、データベース（以下、DB）バックアップによるSQL Serverの移行をご紹介します。 移行元サーバーでの実施手順 移行先サーバーでの実施手順 さいごに 移行元サーバーでの実施手順 まず、移行元となるサーバーでバックアップを行います。 ※SSMSでの操作は、SQL管理者ユーザーでの操作を想定しています。 1. 任意のサーバーに、バックアップファイル保存用の共有フォルダを作成します。作成の際に、共有フォルダに対するフルコントロール権限をSQL管理者ユーザーへ付与します。 2. 移行元サーバーのSSM…

導入 サンプルデータ準備 Icebergカタログを作成する Icebergテーブルを作成する Namespaceを参照 テーブルをロードしてみる 列を追加してみる 導入 pip install --upgrade pip pip install "pyiceberg[s3fs,hive]" 用途に応じて以下を依存関係に加えられます. キー 説明 hive Hiveメタストアのサポート glue AWS Glueのサポート dynamodb AWS DynamoDBのサポート sql-postgres PostgreSQLによってバックアップされるSQLカタログのサポート sql-sqlite …

2024/10/06分のコミットです。 CHANGELOGへの追加はありませんでした。 Merge pull request #53190 from fabriziomello/simplify_usage_of_postgres_format_fn activerecord/lib/active_record/connection_adapters/postgresql/referential_integrity.rbの修正です。 PostgreSQLでforeign keysのチェックを行う際に実行するSQL内のformat function内で、同じ引数を個別に指定していたのを、argu…

情報処理技術者試験を受験したことがある人にとっては、午前のマークシート問題で「過去問と全く同じ問題が出ている」経験をしたことがある人は多いのではないかと思う。 これが実際にはどのぐらいの頻度で起きるものなのかを、直近に実施された試験問題と過去問を比較して調べてみる。 以前は情報処理安全確保支援士の過去問を調べてみたが、今回はデータベーススペシャリスト試験の過去問を調べてみる。 gumfum.hatenablog.com 調べた結果 直近に行われた令和5年（2023年）秋季のデータベーススペシャリスト試験の午前II試験と、過去14年（2009年〜2022年）のデータベーススペシャリスト試験の午前…

はじめに Google のコードレビューに関する事例についての論文があることを知ったので読んでみたメモ書きです。 https://storage.googleapis.com/gweb-research2023-media/pubtools/4476.pdf

ポッドキャスト収録用のメモですよ。 podcast - #セキュリティのアレ - ゆるーいセキュリティのポッドキャストですよ。 事件、事故 各国の法執行機関の協力により、Lockbit ランサムウェアの関係者 4人を逮捕、関連するサーバなどを押収 ロシアが違法な資金洗浄に関与したとして暗号資産取引所の関係者など多数を逮捕 米司法省と Microsoft の協力により、ロシアの攻撃者グループ Star Blizzard が利用する 100以上のドメインを摘発 攻撃、脅威 Akamai が先週報告された CUPS の脆弱性を利用した DDoS 攻撃の手法について報告 Cloudflare が 3.…

独習PHP 第4版作者:山田祥寛翔泳社Amazon 前にPHPの試験を受けたのですが、 kyoruni.hatenablog.com 試験の認定テキストを読んでいなかったので今更読みました。 インターフェイスって何？抽象クラスって何？トレイトって何？公式ドキュメントに何度も出てくるシグネチャって要するに何？のような疑問が解決できたので、読んでよかったです。 SQL以外だと間違いなくPHPを一番長く見ているはずなのに、そういえば一度もまともに学習したことなかったんだな〜と。他の言語は入門するとき何かしら1冊読んだりするのに 適当に検索すれば何かしらの情報が出てくるので、ちゃんと学ぼうみたいな気持…

はじめに HappinessChainに入会し、早くも3ヶ月が経過しました。 9月も残暑が続きましたが、10月に入りやっと涼しくなってきたように感じます。 急激に気温が下がった日に何故か頭痛が起きるのは私だけでしょうか。あれどうにかならないんですかね。。 季節の変わり目、体調管理には気をつけたいところですね。 それでは、9月の学習を振り返っていきます！ 今月の学習時間（期間 : 9/1~9/30) 9月中の学習時間はトータルで 71.5時間 でした。 今月は中旬頃から残業が増え始め、平日はほとんど学習できませんでした(泣) プロジェクトメンバーが他プロジェクトのサポートに回ったことで、私一人に…

今回は、アリンコス部品管理進捗状況として A.try-except」構文を取り入れたデータベースの実装コードは もともとwebフレームワークのFlaskを想定したものなので、 ctkように書き換える必要がある しかもflaskのはまだSQL文のコードが 書ききれていない・・・ B.SSH経由でMySQL(MariaDB)データベースを操作するフローチャートを 作成途中 C.SQLalchemyの活用とまとめのパワーポイント資料の作成中 そして、ctkバージョンのGUIの開発中の画面は出来ているので これを載せる アリンコス部品管理ctk版_開発中のタブ1画面 アリンコス部品管理ctk版_開発中…

コード×AIーソフトウェア開発者のための生成AI実践入門 作者:服部 佑樹 技術評論社 Amazon ［改訂新版］実戦で役立つ C#プログラミングのイディオム/定石＆パターン 作者:出井 秀行 技術評論社 Amazon SQL緊急救命室──非効率なコードを改善せよ！ Web＋DB PRESS plus 作者:ミック 技術評論社 Amazon 現場のPython──Webシステム開発から、機械学習・データ分析まで Web＋DB PRESS plus 作者:altnight,石上 晋,delhi09,鈴木 たかのり,斎藤 努 技術評論社 Amazon 標準SQL＋データベース入門 ——RDBとDB…

結婚式で「〜家」って表現、はやく滅んでくれと切に願う。イエ制度はすでにないのに、結婚式の披露宴でこんな表現するから、世界的に悪名高い「家父長制」の呪いが残り続けるんですよね。まるでスニーカーで踏んでしまった柔らかめの犬のフンのよう（しつこくて取れない）。 https://t.co/grwozYpiee— ヨス Yosuke Yano (@yossense) 2024年10月5日 まさに。おっしゃる通り。みんな「稼げる公園」とか「稼げる大学」と言いたがるくせに、だれも「稼げる文科省」とか「稼げる政党」とか自分のことは言わんのよな。舐めとるんだ。 https://t.co/geybY8Hw67— …

んーと、色々書いてて思うんですけど、僕ってどの程度のレベルなんでしょうね？ 何につけても。 そこそこコンピュータには詳しいと思うんですけど、いわゆる本業のエンジニア人たちとは、向いている方向が違っているのは認識してます。 えーと、この前意味がわからなかったので、たくさんタイトルに出てた"RUST"ってのは何かなぁ、って調べたんですが、どうやら「開発言語を開発する」ようなソフトウェアらしいですね。あれだけ言語があるのに、まだ作るんだー、と思いましたが、自然言語なんかの研究するとああいうところに行き着くんでしょうか。AIともちょっと通じる部分があるのかなあ？ AIつかってれば、普通に話すだけでソー…

昨日から YAPC::Hakodate 2024 に参加していました。今回は何も書き残すつもりはなかったのですが、せっかく会社のお金で来させてもらっているので何か収穫を持って帰らねばと思っていたら手元にメモができたので、未来の自分のためにも公開して残しておきます。 10/4 前夜祭 デジタルIDウォレットが切り開くHigh Assurance Identity Proofingの未来 / kokukuma さん high assurance identity proofing wallet を使った認証 iOS / android credential manager どんな身元確認か、仕組み…