データ分析

皆さん、こんにちは。ソニー・ミュージックマーケティングユナイテッドのふくろうです。 私は新卒でアナリティクス部という部署に配属となり、今年で2年目になります。音楽に関わる仕事をしたいと思いこの会社に入社しましたが、アナリティクス部とは何をする部署なのか、最初はよくわかりませんでした。 そこで今回は、アナリティクス部がどのような業務を行っているのかを紹介したいと思います。音楽業界に興味がある方には、ぜひ読んで頂けたらと思います。 アナリティクス部とは ストリーミング分析でリスナー像を可視化 YouTube分析で動画のクオリティをアップ SNS分析でプロモーション戦略を最適化 ソーシャルリスニング…

前回も書いたように、実際にデータ分析するためには、データを読み込み、読み込んだデータの前処理をして、そして分析に使えるように加工してそれを書き出してファイル化して初めて準備ができたことになる。 mnoguti.hatenablog.com 前回の記事で紹介した参考文献は、RStudioの利用を前提として「Rを用いて一連のデータ分析ワークフローを遂行するためのガイドブック」であり、想定読者は、「Rでデータ分析をする、あるいはしたいと思っているすべての方」と位置付けられていた。扱う対象はあくまでも分析ワークフローであって、分析そのものではない。今回、紹介する参考文献も、書名に「分析入門」とあるが、…

TL;DR データ分析コンペであるKDD2023にて、ドコモの2チームが入賞(6位、9位)しました。手法詳細はこちらを御覧ください。 本記事では今回参加した国際会議であるKDD2023について、現地の様子をメインに紹介します はじめに はじめまして、NTTドコモ サービスイノベーション部の前沖です！ ドコモR&Dでは、データマイニングの世界最高峰の国際学術会議であるKDDで開催されているKDDCUPに毎年参加しており、 今年はKDDCUP2023のTask3において、ドコモの2チームが上位入賞(NTT-DOCOMO-LABS-RED 6位、NTT-DOCOMO-LABS-BLUE 9位)しまし…

9年前にやってみた高速道路の料金政策の変更とそれによる交通量の変化に関するデータ分析。当時、高速道路料金の無料化が民主党マニュフェスト（最近全く聞かなくなったw）で取り上げられ、完全無料化を目指し、その効果と実効可能性を検証するために一部実施された社会実験（この言葉も聞かなくなった）*1の効果を分析した。実験期間は、平成22（2010）年6月28日（月）から平成23（2011）年6月20日（月） 午前0:00であった。 www.mlit.go.jp 高速道路無料化の政府等の状況を伝える日経新聞の記事。 www.nikkei.com この高速料金の社会実験について、2014年にデータ分析したのが…

TL;DR データ分析コンペであるKDD2023にて、ドコモの2チームが入賞(6位、9位)しました。 コンペの概要と入賞した2チームの解法を紹介します。 はじめに NTTドコモ クロステック部の鈴木明作です！ ドコモR&Dでは、データマイニングの世界最高峰の国際学術会議であるKDDで開催されているKDDCUPに毎年参加しており、 今年はKDDCUP2023のTask3において、ドコモの2チームが上位入賞(NTT-DOCOMO-LABS-RED 6位、NTT-DOCOMO-LABS-BLUE 9位)しました。 ドコモは2016年からKDD CUPへの参加を始め、2016年ファイナリスト、2019…

こんにちは！アンドパッドのデータ部でデータスチュワード/データアナリストをしています中野です！今年の5月にアンドパッドにジョインして大体100日くらい経ちました！最近は、カスタマーサクセス向けのダッシュボードの運用など、データの運用に関わるプロジェクトでPMをしています。今日は、社内向けに公開したBIダッシュボードを、公開後も長く使ってもらい続けるための運用の取り組みを紹介したいと思います。 運用しているダッシュボードの一部。さすがに数字は出せない。 Motivation まず前提からお話します。 データ部はデータ・ドリブンな社内環境/文化の構築をミッションの一つに据えています。そして、その取…

概要（なにがあった？？） 最近にデータ分析失敗事例集※1を読んで、この内容のことがまさに自分の身の回りで起こってることだ！と興奮気味にページをめくり、読み終えたころには少し悲しい気持ちになっていました。事例ごとに細かく記述されておりとても読みやすく問題点や改善方法も具体的に記載されていたため、データ分析の経験が浅い私にとっては良書でした。 話は逸れましたが、この記事では仕事上で私がマーケティングセクションからの依頼でデータ分析を担当し、失敗してしまったなと感じた苦い経験に基づいたデータ分析失敗事例を記述していきます。技術的な要素がメインではなく、ポエム的な要素が多いため、その点はご了承の上で楽…

G-gen の西島です。Google Cloud (旧称 GCP) の Cloud Run jobs 上に構築したジョブから Compute Engine 上の MySQL サーバーへ、サーバーレス VPC アクセス経由でクエリを発行し、その結果を BigQuery にロードするジョブの検証を行ったので、その紹介です。 はじめに 構成 構成図 認証情報 ビルドとデプロイ ネットワーク ソースコード類の準備 Dockerfile requirements.txt credential.txt .gcloudignore main.py cloudbuild.yaml リソースの作成 プロジェクト…

『ヘルドッグス』 2022年製作／日本映画／上映時間：138分／PG12／2022年9月16日日本公開 監督：原田眞人 出演：岡田准一 坂口健太郎 松岡茉優 ほか 深町秋生の小説「ヘルドッグス 地獄の犬たち」を映画化したアクション映画です。 暴力団に潜入した元警官と無軌道なヤクザのコンビが、組織内でのし上がっていく姿が描かれます。 あらすじ 警官時代に愛する人が殺される事件を止めることができず、その苦悩を抱えながら生きる元警官の兼高昭吾（岡田准一）。警察は関東最大のヤクザ組織「東鞘会」への潜入捜査を彼に強要し、データ分析で相性98パーセントと判定された無軌道なヤクザ・室岡秀喜（坂口健太郎）とコ…

・ ・ ・ 関連ブログを６つ立ち上げる。プロフィールに情報。 ・ ・ ｛東山道・美濃国・百姓の次男・栗山正博｝・ ２０２３年１０月２日5:56 ＹＡＨＯＯ！ＪＡＰＡＮニュース デイリー新潮「沖縄もいずれ「中国領」と書かれてしまう？ 中国政府発表の新地図でついに「台湾が領土に」 習近平国家主席 中国政府が最新の領土・領海地図を発表した。台湾を領土に、南シナ海の90％を領海にするなど、一方的な主張にアジア各国は猛反発。日本も対岸の火事ではない。近い将来、尖閣や沖縄も中国領として表記しかねないからだ。かの国の思惑と行動原理を解説する。【譚 ろ美/作家】 【写真を見る】「台湾も領土に」 中国政府が20…

▲LINEで無料競馬ムリョウケイバ！▲ 【2023サウジアラビアロイヤルカップ(G3)★出走予定馬･偏差値過去成績結果データ★】 【2023サウジアラビアロイヤルC(G3)】 「2023サウジアラビアロイヤルカップ(G3)」が行われます。 今週は3連休なのでJRA中央競馬も3日間開催となります！ 秋の東京開催の開幕を飾る2歳馬による芝マイル重賞です。 ここから来年のクラシック･マイル路線にむけて2歳馬が羽ばたいていきます。 【2023サウジアラビアロイヤルカップ 過去成績偏差値成績結果】 ▼2023年2月ブログ7周年達成記念▼ 中央競馬ランキング ▲クリックお願いします▲ 8年目もよろしくお願…

▲LINEで無料競馬ムリョウケイバ！▲ 【2023京都大賞典(G2)★出走予定馬･偏差値過去成績結果データ★】 【2023京都大賞典(G2)】 「2023京都大賞典(G2)」が行われます。 今週は3日間開催となります！ 秋の京都の開幕重賞は祝日の月曜日に行われます。 このレースの1着馬にはG1天皇賞･秋への優先出走権が与えられます。 今年は3年ぶりに京都競馬場での施行となります。 【2023京都大賞典 過去成績偏差値成績結果】 ▼2023年2月ブログ7周年達成記念▼ 中央競馬ランキング ▲クリックお願いします▲ 8年目もよろしくお願いします！ 【2023京都大賞典 出走予定馬】 【2023京都…

良書はあなたのスキルや知識を向上させるとても有用な手段です。特にビジネスセンスを高め、本気で自己投資を考えている方にとって、良書に出会うことはとても重要です。 この記事で、価値創造や経営のビジネスセンスを磨くおすすめ書籍を紹介します。 これらの書籍は、経営戦略、リーダーシップ、マーケティング、イノベーション、新しい働き方、ユニークな自己啓発など、幅広いトピックを網羅し、あなたのビジネスにしっかり役立つ良書です。 ぜひ、ご活用ください。 執筆者の紹介 ビジネスセンスを磨くおすすめ書籍について 「市場独占マーケティング」-ダニエル・プリーストリー 著- 「パフォーマンスアップ3つの法則」-スティー…

前回の記事でベースとなるところまでの引っかかりどころを記載したのですが、今回の記事では、スコアアップに向けて何をするか、というポイントのメモをしておきます。なお、今回も当然ながら責任はとれませんので、あくまでご参考です。コードはchatGPTくんにきいてみてください。 尚、トレーニングデータはラベルエンコーディングorワンホットエンコーディング済でそのまま学習させてもLightGBMでモデルが作成できる状態にある前提です。 全体感 特徴量エンジニアリング 欠損値や異常値の処理（影響:小） 欠損値の補完 異常値の修正 新特徴量の作成（影響:大） 特徴量の選択（影響:小） モデルの訓練 モデルのハ…

2023年10月02日 Ghost Riponの屋形（やかた）さんのサイトより転載https://ameblo.jp/ghostripon/entry-12822750367.html 「ワクチンを打った人は何度もコロナに感染する。インフルエンザにも感染する。ガンに対する抵抗性も弱くなる」誰ですか、ワクチンに「予防効果がある」「重症化を防ぐ効果がある」というデマを流したのは？pic.twitter.com/PUkqZtkKSL — Mitz (@hellomitz3) October 1, 2023 CDCmRNAが数日で消える →嘘だったので削除スパイク蛋白が数週間で消える →嘘だったので削…

こんにちは！ 就活を研究し続けて７年目、書いた記事は１０００以上の就活マンです。 今回は「エンジニア向けの就活」について網羅的に解説していきます。 IT業界の急拡大により、エンジニアを目指す就活生も年々増えています。 ただ、エンジニアなどの専門職って、一般的な就活とは違った対策だったり準備が必要なんですよね。 逆にそこを理解していないと内定獲得は難しい。 そこで本記事では、エンジニアを目指す就活生が知っておくべき情報についてまとめました！ 後半では具体的な対策も共有するので、ぜひ最後まで読んでくださいね。 エンジニア向けの就活情報って、ナビサイトなどでもなかなか集められないんですよね。 情報収…

今回のドリル 一言英語 : 当たり前のことを実践したとき 英語 When you practice the basics. 日本語 基本を実践するとき 英語の長文 : 健康データのコメディー 英語 In a hilarious twist, a group of scientists discovered that analyzing their own health data led to unexpected moments of comedy. What started as a serious project turned into a comedy show, as they stu…

はじめに はじめまして！2023年9月に1ヶ月間ヤプリでインターンとして働かせていただきました、北海道大学情報科学院1年生の山田航生 (@koki-algebra) です！私は札幌市に住んでいるのでフルリモートでの業務でした。 大学では機械学習の理論に関する研究をしています。普段は Go や AWS でバックエンドの開発を行うことが多いのですが、今回のインターンではプロダクト開発本部のデータサイエンチームに採用していただきました。 今回インターンに参加したことで、技術的な成長はもちろんのこと、ヤプリとはどのような会社か、ヤプリのデータ活用について理解を深めることができました！ 本ブログでは、ヤ…

Nutanix Filesのデータ分析や監査データの確認ツールとして使用可能な「File Analytics」の監査データ保持期間は最大1年間です。（v3.3.0時点） 1年間を超えるデータは、欲しいデータをCSVで定期的にエクスポートして保存するといった事を検討する必要があります。 以上。