SQL

SQLite 技術メモ SQLite というものをご存じだろうか。RDBの１つであり、無償で利用可能なライブラリ群そのものである。特徴としては、非常に軽量でかつ使いやすく、以下、Wikiにもある通り、データの保存に単一のファイルのみを使用することが特徴とするファイルベースであるところである。 SQLite SQLite（エスキューライト、エスキューエライト、なお、開発者のHippはエスキューエルアイト(/ˌɛsˌkjuːˌɛlˈaɪt/)と発音している）は、パブリックドメインの軽量な関係データベース管理システム (RDBMS) である。 概要 サーバとしてではなくアプリケーションに組み込んで利…

この記事は「 つながる勉強会 Advent Calendar 2022 - Adventar 」の 6 日目の記事です。 adventar.org 前日は、よしたろう（@yoshitaro_yoyo） さんでした！ qiita.com ここ２ヶ月で学んだこととのことですが深すぎてヤバすぎです。（感想が浅くてスミマセン） こんにちは！ スマレジ・テックファーム の Webエンジニア やまて と申します。 はじめに 今回から、独学エンジニアの課題としてを作った、ログ解析システムについて、完成までの道のりを投稿します。 GitHub の Public リポジトリとして、閲覧できます。 github.…

こんにちは。谷口です。プログラミング初心者の方やエンジニアを目指している方で「SQLを勉強したい」と考えている方は多いかと思います。SQLを勉強しようと思ったら、以前は一から環境設定をしてデータベース（DB）を構築しなければなりませんでした。ただ、最近はオンラインで構築済みのDBと実行環境を使って、SQLの書き方がすぐに学べるようなコンテンツも増えています。そこで今回は、これからSQLを学びたい方、挑戦したい方、基本を学び直したい方に向けて、SQLを学べるサイトをご紹介します。 SQLってどんな言語？ SQLとは、リレーショナルデータベース（RDB）のデータを操作するための言語です。SQLを使…

ご存知の方にとっては常識かもしれませんが、SQLではnot inで条件を指定すると、NULLのレコードも一緒に抜け落ちてしまいます。 実はこの理由がよく分かっていなかったのですが、コードを言葉に置き換えて考えたら納得できたのでメモします。 SQLは<>やnot inでNULLも除かれてしまう 例えば次のような、生徒名と出身都市名のテーブルHometownがあったとします。 student city Ken Tokyo Yui Fukuoka Ayaka Tsukuba Koki NULL Mugi Sendai このテーブルで「Fukuoka, Sendai以外の都市出身の生徒を抽出したい」場…

復習シリーズ第５弾 データベース・SQLについて。 これで今までの学習を再咀嚼したので、明日からはWordPress課題に入っていけます。 では早速やっていきましょう。 データベースとは データを「集めて」「使いやすい形に整理」して「まとめた」もの。 こんなイメージです。 一般的には、 構造化した情報またはデータの組織的な集合 と言われているようです。わかりにくいですよね。 意味のあるデータのまとまりを作って、 それらを整理して使いやすくしたもの、またはその仕組のこと と自分は解釈しています。 データベースのメリット データベースとはでも書いた内容と重複する部分もありますが、 データをある単位…

はじめに データベースとSQLは現在のデータサイエンスに必須な知識・スキルの1つ。その基礎を power-of-awareness.com を基に学んできた。 この知識をより昇華させて「SQL中級者になりたい！」ため、同じ著者の達人に学ぶSQL徹底指南書 第2版 初級者で終わりたくないあなたへ作者:ミック翔泳社Amazonを参考に、更なるSQLの知識を拡充していこう。 前回 power-of-awareness.com はじめに 前回 8. 外部結合の使い方 8.1 はじめに 8.2. 外部結合による行列変換 8.3 クロス表で入れ子の表側を作成 8.4 掛け算としての結合 8.5 完全外部結…

imp ユーティリティーの SHOW=Y オプションを使うとインポートは行わず、インポート時に発行される SQL のみが標準エラー出力に出力される。 imp システムユーザ名/パスワード file=ダンプファイル名 fromuser=(エクスポート時のユーザ) touser=(インポート先ユーザ) rows=N show=y 2>the.sql ただし、これだと、次のように SQL の途中に勝手に改行が入り、かつ前後に二重引用符が補われてしまう。 . BBBBBBのオブジェクトをBBBBBBにインポートしています "BEGIN " "sys.dbms_logrep_imp.instantiat…

これは スタンバイアドベントカレンダーの9日目です。 はじめに Amazon Aurora for MySQLでクラスタを組んでいて、可用性を高めるために書き込み可能インスタンスを複数並べてActive/Standby構成にすることがある。 このような運用をしているとき、Activeなインスタンスに問題があるとフェイルオーバーしてStandbyしているサーバが昇格するが、DBを利用しているアプリケーション側も接続先を自動的に昇格したサーバに対して切り替えたい。 ここではJVM言語 + JDBCなアプリケーションにおけるそのような要件に対して応えるために、2022年3月よりAWS公式でAuror…

ZOZO Advent Calendar 2022 カレンダー Vol.3 の 9 日目の記事です。 久しぶりのブログ更新になります。前回からだいぶ時間が空いてしまったので定期的に書けるようにしていかないとと反省しています。。 NewDBと呼ばれる新しいデータベースが登場し利用事例が増えてきました。その中でもMySQL互換のTiDBについて耳にする機会が増えたので、MySQLとの機能比較を行ってみました。DB選定や移行検討の際にお役に立てれば幸いです。 TiDBとは TiDBはPingCAP社が開発した分散型データベースで、RDBMSとNoSQLの機能を組み合わせたデータベースです。 MySQ…

はじめに こちらは バイセルテクノロジーズ Advent Calendar 2022 の 9 日目の記事です。前日の記事は藤井さんの「WebComponentで始めるUIコンポーネントの共通化」でした。 こんにちは。バイセルテクノロジーズ テクノロジー戦略本部に所属している稲川です。 私が所属しているプロジェクトでは Ruby on Rails (以下、Rails) を使って プロダクトを開発しています。 開発しているプロダクトではお客様の予約スケジュールを管理する機能があります。 この機能に関するテーブル構造が複雑で、データを取得するのに苦労するのですが Rails の eager_load…

M式言語で複数の表を合体させたい M式言語ではTable.Unionではなく、Table.Combine 複数のテキストやCSVデータを合体する 複数のテキストやCSVデータを合体しつつさらに新しいカラムを追加する 複数のテキストやCSVデータを合体しつつさらに新しいカラムを追加する 指定したカラムだけを抽出する 終わりに 参考 M式言語で複数の表を合体させたい ある大量のログファイルを全て合体させなくてはならない場面に遭遇しました。 そのログファイルは全部同じ項目で構成されたテキストファイルでした。 こんなときこそM式言語の出番！！ というわけで同じファイル、つまり表を合体させるときのM式言…

github.com これは何？ SQS+PostgreSQL+Lambdaとその間をつなぐデーモンで構成されたジョブキューシステムです。 入り口のSQLにメッセージを投げると、メッセージで指定した関数名のLambdaが実行されます。 Lambdaの実行に失敗した場合は、適当な感覚でリトライされます。 Ruby製のジョブキューシステムQueとそのクローンであるqgを模した作りになっています。 モチベーションとか コンテナ環境で使いやすいジョブキューシステムが欲しかったのが、モチベーションです。 Resqueのようにプロセスとしてジョブを起動するタイプだと、コンテナのライフサイクルとのミスマッチ…

前回は、以下の記事でSQL Serverの実行計画をグラフィカルに表示する方法を見ていきました。 SQL Serverの実行計画をグラフィカルに表示する - ITエンジニアの成長ブログ今回は、タイトルどおりグラフィカルではなくテキストベースの結果で取得する方法を見ていきたいと思います。最初にお話しておくと、この方法どちらで取得しても同様の内容が取得できるので、自分の好きな方法で取得すれば良いかなと思います。 テキストベースで実行計画を取得する それでは、さっそく実行計画をテキストで取得する方法を見ていきましょう。まずは、「SET STATISTICS PROFILE」で取得する方法を試してみま…

こんにちは、先日娘が「ルミエールでみるみるみるみーるの飴買って！」というので何のことかと思ったらミルキーのことでした。「ミルキーはママの味」と言いたかったようですがこれが通じた妻は凄いと思いました。 本記事はInfocom Advent Calendar 2022の9日目の記事です。弊社も今年春にインフォコムグループになりましたので参加してみました。 さて、先日、以下の通りIoT HubからCosmos DBへデータを送るカスタムエンドポイントがパブリックプレビューになったとの発表がありました。 azure.microsoft.com これはIoT番長としては注目せざるを得ない機能ですね！早速…

達人に学ぶDB設計を読んだので所感を書いていきたいと思います。 日ごろ何気なく使っているDBについて深く学ぶことができたのでとてもいい本でした。 会社の同僚にも勧めてみたいと思います。 1章 データとは何か、なぜデータベースが必要なのか、本書で学んでいくことについて書かれていました。 概念スキーマの話は分かりやすくて理解できてない部分の補完になりました。 「最初にデータがあり、次にプログラムがある」という考えたは普段何気なくツールを作ってしまう自分には刺さる言葉でした。ちゃんとデータから考えないとなーと改めて思いました。 またDBMSのマニュアルを熟読することがDBの勉強になるらしいので機会が…

こんにちは、セーフィー株式会社の23卒、新卒エンジニア職入社予定の伊東です。 私たち新卒一期生は入社前に５ヶ月間インターンシップを行ってきました。 このインターンシップの振り返りをしつつ皆さんにセーフィーという会社の教育環境や会社の雰囲気をお伝えしようと思います。 自己紹介 伊東 スキルセット セーフィーを選んだ理由 インターンで期待していたこと 土田 スキルセット セーフィーを選んだ理由 1.会社と事業のビジョンに共感できる 2.エンジニアとして成長できる環境 なぜインターンをしようと思ったか インターンで取り組んだこと Udemy講座 チーム開発 1. 仕様書作成(半月) 難しかった点 心…

昨今、ITベンダーだけでなくユーザー企業にもシステム内製化の動きが広がりつつあり、「セキュアな開発をいかに実現するか」は多くの開発組織における悩みの1つとなっています。 「セキュアな開発組織」をどう作っていくべきか。また、セキュアな開発を組織に浸透させるにはどうすれば良いのかーー。株式会社Flatt Securityでセキュアな開発のための学習プラットフォーム「KENRO(ケンロー)」の開発・コンテンツ監修を務めたCTO・米内貴志が、これまで様々な開発組織を牽引してきた株式会社LayerX 執行役員の名村卓さん、Ms.Engineer株式会社 Mother of Engineerの齋藤匠さんの…

単体テストのコードを見ていて、対象のテーブルに存在するレコード数を取得する際の記述が統一されていないことを発見しました。ある箇所ではUser.all.sizeと記述されており、ある箇所ではUser.countと記述されており、どの方法で取得するのが効率が良いのか気になったので調べてみました。僕としてはSELECT COUNT(*) FROM usersというSQLが発行されてくれればOKです。 それぞれの書き方をした際に、どのようなSQLが発行されるかをテーブルにまとめてみました。 コード 発行されるSQL User.all.size SELECT COUNT(*) FROM "users" …

こんにちは。クライアントビジネス推進部の小野塚です。 この記事は「NEXTSCAPE Advent Calendar 2022」の8日目の記事になります。 qiita.com 本日は11月中旬にプレビューとなったAzure SQL trigger for Functionsを試してみましたのでその内容を書いてみたいと思います。 何らかのイベントによって処理をしたいといったことはシステム開発では度々起こり得ると思います。APIを叩いたタイミング、AzureであればStorageのキューに投入されたタイミング、様々なものが考えられます。データベースのこのテーブル・このカラムが更新されたタイミングで…