集計関数

CSVファイルをADOで扱う連載の24回目です。前回の記事はこちらになります。 hirocom777.hatenadiary.org グループ化 前回は、サブクエリの色々な使いかたについてご紹介しました。使いこなすことで複雑なSQLコマンドを簡単に書くことができますね！！ 今回はグループ化についてご紹介したいと思います。 今回もSQLを指定してCSVファイルを確認できるツール（CSV_ReaderSQL）を使います。ツールは以下からダウンロードしてください。 CSV_ReaderSQL110.zip - Google ドライブ GROUP BYでグループ分け 今回ご紹介するグループ化とは、指定…

コロプラでは現在新規開発のDBとしてGoogle Cloud Spannerの採用を積極的に行っていますが、それ以前はMySQLを採用し新規サービスを提供してきました。現在も運用中の多くのタイトルでMySQLが利用されています。 MySQLを利用しているサービスは規模によっては垂直/水平分割を併用して運用しています。 分割は負荷に強くなる一方で、不具合の調査などでSQLを用いてデータを調査するなどの運用時のオペレーションのコストがあがってしまいます。 コロプラでは分割されたDBでSQLを用いた調査などの運用業務の改善を社内独自のツールを作って多少なり緩和しているというお話をさせていただきます。…

はじめに 今回扱うこと、扱わないこと RとRStudioを使ったSQL学習環境の構築 RSQLiteパッケージのインストール 練習用サンプルデータの準備 RStudioでSQLを書く SELECT文を学ぼう サンプルデータについて SELECTとFROM WHEREによる条件付け フィールドの加工 並び替え テーブルの紐づけ 集計する Enjoy! リンク集 ※同じ処理のdplyrでの書き方を追記しました。(2022.01.15.) はじめに この記事は「Rは使っている、もしくは学習中であるが、SQLにはなじみがないデータサイエンティスト志望」の方を主な読者と想定しています。 データサイエンテ…

CSVファイルをADOで扱う連載の23回目です。前回の記事はこちらになります。 hirocom777.hatenadiary.org サブクエリで解決 前回は、サブクエリについてご紹介しました。集計関数の実行する順番もこれで解決です。 前回は1つの値を返すSELECT文をサブクエリとして使用したのですが、それ以外の結果を返すSELECT文もサブクエリとして使う事ができます。今回はそちらをご紹介します。 今回もSQLを指定してCSVファイルを確認できるツール（CSV_ReaderSQL）を使います。ツールは以下からダウンロードしてください。 CSV_ReaderSQL110.zip - Goog…

CSVファイルをADOで扱う連載の21回目です。前回の記事はこちらになります。 外部結合 前回は、外部結合についてご紹介しました。これで複数のファイルから色々な形のデータを取り出せます。 今回は、集計関数をご紹介したいと思います。 今回もSQLを指定してCSVファイルを確認できるツール（CSV_ReaderSQL）を使います。ツールは以下からダウンロードしてください。 CSV_ReaderSQL110.zip - Google ドライブ 集計関数とは CSVファイル（テーブル）のデータ内容から集計した結果を取得したい場合があります。そんな時に使用するのが集計関数です。 今回は以下のァイルを使用…

この記事はテックタッチアドベントカレンダー22日目の記事です。 こんにちは。データアナリストの bibi です。今回初めてアドベントカレンダーの記事を書きます。よろしくお願いいたします！ 2020年12月に入社してからちょうど1年が経ちました。 私の主な業務はデータの取得で、毎日クエリを書きながら、様々なチームの意思決定のサポートをしています。 データの取得クエリは時に非常に複雑になることがありますが、 その一つである、SQLでのリレーション代数系のクエリを解決する方法について、この記事で紹介します。 PostgreSQLのSQLを利用して説明します。 はじめに サンプルデータベース 複雑にな…

CSVファイルをADOで扱う連載の20回目です。前回の記事はこちらになります。 hirocom777.hatenadiary.org 外部結合 前回は、INNER JOINについてご紹介しました。これで内部結合を効率よく実行できます。 今回は、外部結合をご紹介したいと思います。 今回もSQLを指定してCSVファイルを確認できるツール（CSV_ReaderSQL）を使います。ツールは以下からダウンロードしてください。 CSV_ReaderSQL110.zip - Google ドライブ 外部結合とは 外部結合も内部結合と同じく交差結合の結果から条件を設定して結果を取り出します。外部結合は結合条件…

この記事は個人ブログと同じ内容です www.ritolab.com // MySQL も 8 から WINDOW 関数が使えるようになり更に利便性が向上していますが、SQL の WINDOW 関数にはどんな関数があるのか？ということで、WINDOW 関数を一通り試してみます。 WINDOW 関数 WINDOW 関数は、結果行の集約を行うことなく集計・分析のための計算を行う事のできる関数。 MySQL :: MySQL 8.0 リファレンスマニュアル :: 12.21.1 Window 関数の説明 分析関数のコンセプト|BigQuery|Google Cloud PostgreSQL: Docu…

GROUP BY SELECTで取得したレコードを、指定されたカラムの値ごとにグループ化して表示する。 SELECT COMIC, COUNT(COMIC) FROM movies GROUP BY COMIC ORDER BY COUNT(COMIC) DESC; moviesテーブルのCOMICごとの件数をカウントし、件数の多い順に表示する。 集計関数 グループごとに集計し、1つの値を返す関数。 AVG 平均値 COUNT レコード数 MAX 最大値 MIN 最小値 SUM 合計 WHERE区の比較条件として集計関数を使うことはできない。 選択リストの制約 グループ化を行う場合、選択リスト…

tetsutalow.hateblo.jpこの記事を読んでつらつら考えたこと。 問題 某大学では定期試験でマークシートを使い、学生のテスト結果として次のようなCSVファイルが生成されます。 問1 問2 問3 問4 問5 問6 学生1 A C A D B B 学生2 B C A D D A 学生3 A B A C A D この試験の正解と配点は次の表になります。 問題番号 正解 配点 問1 A 5 問2 B 10 問3 A 20 問4 C 15 問5 A 30 問6 D 20 これらのデータをもとに採点作業をしなさい、というのが教員側に課せられた問題。上原さんのブログ記事では、問題の解き方として…

最初に言っておくと、今回の記事は例によって本来PowerQueryでやるようなものではありません。元々Excelワークシート関数でやったことをPowerQueryでもできるかなと思い試しました。ただ、試行錯誤しながらやった中でM関数の使い方等勉強になったところが色々あり、他で活かせるかなと思っています。 （１） やりたいこと （２） 事前準備 （３） コード （４） 実践・経過説明 （５）動作確認 （６）別解 ※２０２１/１０/２９追記 （１） やりたいこと ある月(又は期間)の勤務日程を決める際、一日毎の出社率が決まっており、日ごとに出社する人と在宅勤務する人とに分けたい場合に、決められた条…

はじめに こんにちは、大ちゃんの駆け出し技術ブログです。 タイトルにあるとおり【無職に転生 ~ 就職するまで毎日ブログ出す】というチャレンジをしています！！！！昨日までは就活するまで本気出すでしたが、これだとまるで就活後は頑張らないのかと思われてしまいそうで、、、大人気アニメのタイトルのまるパクリチャレンジです。 RailsやらRubyやらSQLやらその他Webの知識やらが色々と抜け落ちているのを感じており、知識の定着のためにもアウトプットする機会を増やすためです。加えて、退職して文字通り無職に転生しましてプロニートになり、毎日時間に余裕ができたので引き締めるためにも毎日投稿を思い至りました！…