集計関数

※一部ニュアンスが違う部分がありましたので、1/26に修正しました。 bpstudy.connpass.com こちらのイベントに参加してきたので、会の様子と感想を書いていこうと思います。 会の概要 登壇資料 会の様子 フロントエンドの開発スタイル GUI型 HTML型 ALL CODE型 Flutterにはまったきっかけ Flutterの状態管理 StatefulWidget RiverPod Flutter Hooks Flutterのチャット Flutterの広告 Flutterのアプリ内課金 FlutterのLint Firebase Cloud Firestore チャット設計 セキ…

あけましておめでとうございます！ 今年は異世界放浪メシのアニメが放送されるらしいので楽しみなバックエンドの原田 (tomtwinkle)です。 内部で運用しているSQLレビューチェックリストの一部を抽出し思いつきで追記して行った結果、結構な分量になってしまいました。 暇な時でも流し読みして頂けるとありがたいです。 Motivation SQLレビュー観点 大きくSQLが変更される修正の際にはEXPLAINをレビュー内容に加える 検索のキーにINDEXを使用しているか SQL発行回数がN+1(1+N)の構造になっていないか サブクエリを利用したSQLはパフォーマンス要チェック Viewの利用は基…

今回は「行のグループ化」のその４。その３はグループ化の際に「区切り文字を使って１つの文字列にまとめる」方法を紹介したけど、今回は個別に横に並べたい時の話。 これまたグループ化だけでは完結しないので、多少加工が必要になる。 まずは「区分」列でグループ化。 新しい列目：テーブル 操作：すべての行 →［OK］ 前回説明したとおり、「_」は「テーブルをそのまま表示してねの意味なので、ここを今回は「インデックス列を追加してね」に変更する。 「_」を「Table.AddIndexColumn(_, "連番", 1, 1)」に変更 「type table [……]」の「……」に「, 連番=number」を追…

こんにちは。福田直起です。 前回に引き続き、言語処理100本ノック2020を解いているアウトプットとして、「第2章 : UNIXコマンド」の10問のうち、Q17～Q19の3問を解説していきます。 他の問題の回答は、まとめページにリンクを貼ってあります。 解答・解説の前に 解答・解説 Q17. １列目の文字列の異なり Python 解答コード 実行結果 解説 UNIXコマンド 解答コード 実行結果 解説 Q18. 各行を3コラム目の数値の降順にソート Python 解答コード 実行結果 解説 UNIXコマンド 解答コード 実行結果 解説 別解 sortedを使うのではなく、バブルソートを書く別解…

前回これで最後と書いた癖に、もう一つ追加。 列のピボットで作成したマトリクス表に「集計行」を追加したい時どうするか。 「テーブルの最下行に１行追加ってどうやるの？」と悩んだ方は、Power Queryの便利な機能を一つ忘れている。「行列の入替」である。 縦横逆に集計して、カスタム列の追加で集計行（列だけど）を追加して、最後に行列を入れ替えてやればいいのだ。 「日付」列を選択した状態で［編集］→［列のピボット］ 値列：件数 詳細設定オプションの値の集計関数：合計 →［OK］ これで縦横逆のマトリクス表が完成。後はカスタム列の追加を実行するだけ。こういう時に便利なのが「Record.FieldVa…

列のピボットについて書くかどうか迷いましたが、意外と知っておいたほうが良いことが多かったので、概念と落とし穴、そして補正についてまとめました。特にエラーが発生しやすいこともあり、公式Docsには載っていない解決法も一緒に見ていきたいと思います。ファイルだけ欲しい方は一番下よりご自由にダウンロードしてください（今回はExcelファイル）。

引き続き「列のピボット」。前回は縦軸用の番号列の作り方をやったけど、今回はｎ行一組のデータを、列のピボットを使って組み替えてみたい。 ｎ行（画像だと４行）で一組のデータ（もちろんデタラメ）があるとして、 これを１行ずつのデータに組み換える場合の話。 行数が固定の時は「Table.Splitを使う方法」もあるにはある。そっちでやってももちろんいいんだけど、詳細エディタから M言語で記述しまくることになるので、慣れていない人にはしんどいと思う。なので今回はパス。 まずは上の画像の A:B列を「データ範囲」と名前定義しているものとする。 この状態で ［データ］→［テーブルまたは範囲から］ これでクエ…

今回は「列のピボット」を紹介する。Excelでいうピボットテーブル的な集計がしたい時に使う機能で、要は「列のピボット解除」の逆パターン。よく使う機能なんだけど、実のところ集計に使われることは少ないかと思う。 左表の「属性」列を横軸にして、右表のように組み換えする場合。例によってテーブルは読み込んでいるものとする。 「属性」列を選択した状態で［編集］→［列のピボット］軸となる値列に「値」列を選択 詳細設定オプション［値の集計関数］で「集計しない」を選択 これで縦横の軸に情報が並んだマトリクス表に組み換えできた。 因みに詳細設定オプションには下記の種類がある。 ・カウント(すべて)：List.Co…

研究もバイトもやる気出ね～～～って時の逃亡先 逃亡してる暇があるのかと言われたら… ソース The-Japan-DataScientist-Society/100knocks-preprocess: データサイエンス 100 本ノック（構造化データ加工編） 知らなかったもの クオーテーション :star: 文字列はシングルクオーテーションで囲むのが無難。 SQL single double MySQL 文字列定数 文字列定数 PostgreSQL 文字列定数 カラム名 標準 SQL 文字列定数 カラム名 BETWEEN カラム名 + BETWEEN + 下限 + AND + 上限 の順。 SE…

こんにちは、 SQL をあれやこれやしているヒト 森藤です。 掲題のとおりですが Software Design 12月号 「なにかと使えるSQL」の第4章 分析SQLの実例 を執筆しました。 gihyo.jp 書籍やネットでも、機能としての紹介はされているもののあまり具体的な事例としてはなかなか見あたらない集計関数を使った時系列処理などを紹介させていただきました。 また、弊社では BI ツールとして Redash を使っているのですが、 Common Table Expression (いわゆる WITH 句) と合わせて利用し、 CTE 自体を最後の SELECT 文でのテーブルとして選択…

この数ヶ月、私たちはワクワクする新機能とコンポーネントの開発に取り組んできました。 そして、Angular v14をサポートする今回の22.2リリースにそのすべてが集約されています。 どのような新機能があるのか見てみましょう。

テーブルに縦方向に入力したデータをグループ分けして横に並べたい時。 Excelを使っている人の多くは、この逆パターンで悩むことが多いんだけど、そっちは Power Queryだと「列のピボット解除」で一発解決するので、敢えて逆パターンを取り上げる。 横並びの列が固定の場合は、グループ化の際に Text.Combineで結合しておいて「列の分割」で分ける方法もあるにはある。ただこれだと列数が増えた時に対応が利かないのと、データがテキストデータでないとデータ型が変わってしまって面倒なことになる。 やはり基本は「行のグループ化」→「グループ列にインデックス列を追加」→「展開して列のピボット」かと思う…