データアナリスト

データエンジニアですが最近はデータアナリストもやっております @kazasiki です。 今回はdodaが公開している平均年収に関するデータを公的機関が実施・公開してる統計調査の結果と比較してみた話をします。 dodaはdodaサイトにご登録いただいた情報を一部集計して一般に公開しています。 例えば、doda会員の属性情報（性別や年齢など）の割合などを集計したdoda会員レポートだったり、 www.saiyo-doda.jp 業種や年齢ごとの平均年収を集計した平均年収ランキングなどです。 doda.jp 前者のdoda会員レポートはどちらかというとdodaの様々なサービスの利用をご検討いただく…

---自己紹介--- こんにちは a1chemy（あるけみぃ）と申します。 現役でデータサイエンティストをしております。 主にコールセンター・通販業界の方々へ伴走支援を行っております。 ---前置き--- 前編［データの特性をわかっていますか？］の続きになります。 まだ見ていない方は下記リンクより前編をご覧ください。 データの特性をわかっていますか？ - 現役データサイエンティストに聞く（効く） ---本編--- ①データの特性に合った分析を行う（前編の回答） ②データには誤差が存在する（おまけ） 詳細な理由は例とともに下記に記載しています。 ①データの特性に合った分析を行う（前編の回答） 例…

今回は、データの特性についての小話を少し・・・ 例えば、個人情報をデータの特性で区分けしてみると下記の通りになる。 ・名義尺度（nominal scale）カテゴリへの分類 ─ 性別，血液型・順序尺度（ordinal scale）属性の大小・高低 ─ テストの順位，統計検定（級）・間隔尺度（interval scale）順序に加えて値の間が等間隔 ─ 湿度，テスト得点，知能指数・比例尺度（ratio scale）原点がある間隔尺度 ─ 物理量（質量，時間，長さ） ~~独立変数（説明変数）~~ ~~従属変数（目的変数）~~ では、なぜデータの特性を考慮すべきなのでしょうか？ 結論：尺度水準によっ…

私個人の備忘録的なもの・・・ Tableauで［直近○か月の結果のみ表示］をするときのフィルターに入れる関数です。 ---結論--- エラーになる：DATEDIFF ( 'month' , DATE(20220802) , TODAY() ) <= 3 エラーにならない：DATEDIFF ( 'month' , '2022/08/02' , TODAY() ) <= 3 使っているデータベースによっては、日付を 2022年8月2日 → 20220802 として投入している。 そのような場合は数字型から日付型に直す必要あり。 （計算フィールドで変更する） DATEDIFF ( 'month' ,…

はじめに サマリー 記憶に対する自信過剰 対策 チームや組織で失敗を防ぐには？ 1. 読みやすいコードを書くためのコストを下げる 2. 読みやすいコードを書くことを（ゆるく）強制する まとめ 参考文献 はじめに こんにちは。パーソルキャリア株式会社でデータアナリストとして働いている三浦です。私はデータアナリストとしてこの会社で働いておりますが、それと同時に行動経済学の研究もしています。行動経済学は端的に言えばより「人間くさい」仮定をとりいれて経済学的な分析を行う分野です。例えば、先延ばしをするとか、楽観的な予想をするとか、情報を無視するとか、人の目を気にするとか、色々です。 修士から数えるとプ…

こんにちは a1chemyと申します。 現役でデータサイエンティストをしております。 主にコールセンター・通販業界の方々へ伴走支援を行っております。 今回は［重役・意思決定者へ分析結果を報告する際には］というネタです。 ［現場メンバーとの打ち合わせはこちら↓］ a1chemy.hatenablog.com 現役データサイエンティストならわかると思いますが、 分析結果の報告には"特有"の難しさがあると思います。 例えば・・・ ①聞き手はどれくらい前提知識があるのだろうか？ ②"なに"を話せば理解してもらえるだろうか？ ③どのような質問が来るだろうか・・・答えられるだろうか？ などあると思います。…

初めまして。 a1chemy（あるけみぃ）と申します。 このブログでは［データサイエンティスト］のあるあるや活用できるメモなどつらつらと書きます。 今後データサイエンティストを目指す方には聞いていただき、 現役データサイエンティストには効く内容を投稿していきます。 不定期更新ですが、何卒よろしくお願いいたします！

ツイート Kimihiko Kitase [emoji:4B0] @kkitase これめちゃいい また、Looker Studio (旧データポータル)を使っていただきありがとうございます↓ SaaS企業データベース・ダッシュボードをリリース｜ぽこしー企業データアナリスト @biz_arts1 #note https://note.com/poco_c/n/n5153e9f75b03 00:33 ツイート お気に入り フォロー フォロワー 30417(0) 15519(+3) 4462(0) 4291(+1) delivered by Twieve

やっぱり一流の教授が構成する授業は素晴らしいですね。社会人でデータ関係に携わる人はほぼこれができれば十二分なのではないでしょうか。こういう内容を完璧にするだけで、社会人としては十二分の価値を出せるわけです。 Statistics Hacks ―統計の基本と世界を測るテクニックhttps://t.co/kpltG8ztlJ— Kazu (@sakatakazuyukii) 2023年1月13日 SQLを基礎としながらデータ分析で食べていくhttps://t.co/TD4D4gh7pM— Kazu (@sakatakazuyukii) 2023年1月13日 今は流行ってきたデータサイエンティトht…

はじめに あけましておめでとうございます！ クラシルバックエンドエンジニアの加藤です。 クラシルでは2022年4月から一部ユーザーに向けてパーソナライズされたフィードをリリースしました。 （以降、パーソナライズフィード） パーソナライズフィードではSnowflakeを活用してレコメンドをReverse ETLを行い実現しました。 今回はアーキテクチャの説明と課題・今後の展望について紹介します。 パーソナライズフィードについて ホーム画面に表示される一連のコンテンツのことを指します。 クラシルではこれまで複数のキュレーションされたコンテンツをまとめたリスト(画像左)を表示していましたが一部ユーザ…

こんにちは武田です。今回はデータアナリストとデータサイエンティストの違いについて説明します。 短く言うと データアナリスト: ビジネスサイドに寄り添い、レポート作成やデータ分析を企画・実装する仕事 データサイエンティスト: 機械学習モデルを作る人 ※データサイエンティストがデータアナリストのような意味で使われることもありますが、両者の分業が進んでいる企業では概ね上のような定義です。 データアナリストの役割、仕事内容 BIエンジニアと呼ばれることもあります。データアナリストは、マーケターや営業、経営企画担当者、コンサルタントといったデータ分析を必要としている人（クライアント）に対してデータ分析サ…

【はじめに】 初めまして、なご3と申します。 2022年の7月にエンジニアに未経験で転職し、 現在は実際に現場に入りながらプログラミングを学んでいます。 少しずつ現場で働くこと自体にも慣れてきたので、 年明けに合わせて技術ブログを始めてみることにしました。 今までに学習の過程でいくつかQiitaにも記事を載せているので、 こちらも読んで頂ければ嬉しいです。 qiita.com 【ブログを始めた理由】 普段は基本的にPython言語を利用しており、 基本的な機械学習や深層学習(ディープラーニング)、 データの可視化や要約による分析業務を主としています。 実際にPythonでのデータ分析を1年ほど…

年末の振り返りブログを始めてもう5年目！ブログ書きながら、年を越すのが習慣になってきた。 振り返りの進め方は、プライベートは写真を見ながらで、仕事はカレンダーを見ながら振り返っている。 今年も始めていこう！！ 1月 自社開催のデータエンジニアリング/分析関連の勉強会開催 社内で取り組んでいることの現状とこれからを、もはや社内も社外も同時に共有していかないと採用に勝てない。 「転職したいなー」と思った時に第1想起にでるためには、採用コンテンツだけ拡充していても負ける。 んで、そのためには自分一人だけ登壇して入れも無理だなと思った。 四半期に1回目標に色んな人をサポートしながら登壇していってもらう…

1月 雪山（北横岳）に登った 北横岳に雪山登山してきた🗻 pic.twitter.com/qsvFcVsEKv — 吉田勇太 / ysdyt (@yutatatatata) 2022年1月24日 spacemarketでサウナ付きの自宅を借りてサウナパーティーした スペースマーケットでお借りしたサウナ付きのお家に来てるのですが...トイレみたいなテンションでサウナがある...なんだこれ最高すぎる...見覚えがあると思ったらサウナラボを設計した人に依頼されたそうです、マジか pic.twitter.com/dybnhOasBV — 吉田勇太 / ysdyt (@yutatatatata) 202…

この記事は 前からブログを書いてみたいと思っていたのですが、 今年は休職したり復職したりKaggle Masterになったりと色々あったので、 初記事として2022年を振り返ってみることにしました。 目次 この記事は 目次 自己紹介 振り返り①: 休職について メンタル不調で出ていた症状 身体症状: 精神症状(主に不安症状): 休職から復職までの経緯 休職前半: 実家への帰省 休職後半: リワーク施設への通所 復職後~現在 振り返り②: kaggleについて 終わりに・来年に向けて 自己紹介 初記事なので、軽く自己紹介です。 HN: CALPIS10000 TwitterとかKaggleをやっ…

ロバート・ハベック フェイスブック 【フリーウエストメディア】2022年12月29日 https://freewestmedia.com/2022/12/29/german-energy-minister-invents-new-unit-of-measurement/ 12月26日付のドイツ主要紙で、ロベルト・ハーベック経済相は、反論を受けることなく、不思議な言葉を使うことを許された。 フランクフルター・アルゲマイネ・ツァイトゥング（FAZ）紙で、ハーベックは「気候ワット時」という造語を訂正することなく使用した。 それが何を意味するのかは全く不明である。 緑の党はエネルギーの新しい測定単位を…

みなさん、こんにちは。techtekt編集部です。さて、昨日は振り返り前編ということで、1~6月を振り返ってみました。 後編は7月～12月までを振り返ります。下半期も新しいチャレンジが盛りだくさんです。それではいってみましょう！ ※前回に続きますが、取り上げきれないステキな記事がほかにもたくさんあるので、ぜひご覧ください（昨日ぶり2回目） 後編スタート！ 7月 dodaの新編集長として、弊社執行役員である大浦が再就任をした7月。テクノロジー本部でも新しい取り組みがスタートしました。エンジニア、デザイン、データなどの採用情報ページを内製開発で新たに立ち上げ、これまでよりも仔細に情報の整理をして、…

先日Twitterを見ていたら仮想通貨でのアルゴリズムトレードで有名なUKIさんが株価に対してもアルゴリズムトレードをしているアプローチをまとめてくれていました。 note.com このように（公開されている）データを活用して十分に個人でもリターンを出しているというケースを目にすることが増えてきました。 以前読んだ本のシモンズ率いるルネサンステクノロジーもクオンツファンドで多くのリターンを上げています。 ohtanao.hatenablog.com 本書は三菱UFJトラスト投資工学研究所が実施している取り組みやその他事例をテキストマイニングを中心にまとめられた本であり、近年株取引にいかにデータ…

仕事を納めたので今年の振り返りを書こうと思います。今年は自分にとって大きな変化があった年でした。 ソフトウェアエンジニアにジョブチェンジ データアナリストとして働いていましたが、今年の四月からチーム異動をさせてもらいました。 今は推薦チームのエンジニアとしてアプリの体験改善をしています。 元々分析者として推薦チームにアサインされており、分析サポートを行う傍ら簡易な推薦ロジックの実装もさせてもらっていました。（主にSQLの定期実行で実現可能な範囲） その中で、分析者としてプロダクトの意思決定に貢献しエンドユーザーに間接的に価値を届けるよりも、開発者として直接価値を届ける方に興味が強くなっていきま…