二つの確率変数の分布の関係性を知るため、直線で近似して、強い関係性を示す「１」、関係性がない「０」、逆の関係性（右下がり）の「−１」などの間の数値を取る。
皆さん、こんにちは！連載第4回、さらに深掘りしていきましょう！ 前回は、散布図とヒストグラムを使ってデータの分布と傾向を「見える化」する方法を解説しました。今回は、「相関係数と回帰分析で見つける！因果関係の裏側」というテーマで、データ分析におけるちょっぴり高度なテクニック、相関係数と回帰分析について、生成AIの力を借りながら、できる限りわかりやすく解説していきます。 「相関係数」とか「回帰分析」って、名前を聞くだけで「うっ…」となる人もいるかもしれません（笑）。でも、これらの分析手法は、単なる数字の羅列からでは見えてこない、データ間の「つながり」や「原因と結果」の関係性を明らかにするための強力…
www.ed-ict.net 「情報Ⅰ」の第４問をみていこう。各問題の難易度について、３段階で（★☆☆：平易／★★☆：やや難／★★★:高難度）で記す。（※ed-ict編集部による独自の見解）
タイトル一部訂正：誤＝標準偏差を求める、正：相関係数を求める 前説：「Error Occurred: 'float' object has no attribute 'shape'」と表示され困りました。 列ごとに nx = np.array(df['コラム名').astype(np.float64) のように書き「相関係数」をもとめる作業に入ることができました。 恥ずかしながらのスクリプトは次の通りです。 失敗した横着 np.array(df).astype(np.float64) など一気にやろうとしたら対応関係がＮＧになったみたいで 前説：「Error Occurred: 'float'…
こんにちは、ぱそきいろです。以前、マイニングしたETHをなるべく出金手数料を少なくする方法を調べました。 www.takacpu55.xyz この中でETH→BTCを経由して楽天キャッシュにチャージするという方法でしたが、売り時をどうするかという問題があります。 つまり、ETHが上がって日本円（楽天キャッシュ）にしようとしてもBTCが下がっていたら結果的に損をするのでは無いかという気がします。 グラフを見たらおそらく（擬似）相関があるのだろうという気がしますが、勉強をかねて相関を出す方法を考えてみました。 データのDL データ前処理 相関係数 コサイン類似度 まとめ データのDL ここからデー…
ご訪問ありがとうございます！ 解いた数学の問題をマーク方式にして公表するブログです！管理人のRedchopperです！よろしくお願いします！ 今週は東京未来大学2020年の問題です。 今回は2日目第3問です。 今回の問題について 難易度は☆☆です。 データの平均と相関係数を求める問題です。 難易度表記については以下の記事をご参照ください。 red-red-chopper-mathmatics.hatenablog.com 今回の問題の解説 相関係数を求めるのは、2つのデータの標準偏差と共分散を求める必要がありますが、それを求めるのに平均値を求めなければいけません。 表に合計が明記されているので…
こんにちは、ABEJAの真壁孝嘉（@Takayoshi_ma）です。変数Aと変数Bにどれくらいの関連性があるの？このデータから何が言える？みたいなニーズって至る所にあるかと思います。その時に活用される様々な数学的指標たち、（自分含め）名前を知ってるだけだと危険だよなあって場面が近頃多い気がしたので、改めてメモ的な意味でブログを書いてみました。前半に（ピアソンの積率）相関係数に関する注意点を列挙したのち、後半にそれ以外の数学的指標の概要を列挙していこうと思います。 尚、このブログで度々登場する相関係数とはピアソンの積率相関係数を表すこととします。 相関係数の注意点 相関係数の概要 相関関係と因果…
youtu.be
ｲｱﾝ・ｽﾁｭｱｰﾄ 著 徳田 功 訳 「不確実性を飼いならす」ﾒﾓ 不確実性を飼いならす——予測不能な世界を読み解く科学 作者:イアン・スチュアート 白揚社 Amazon イアン・スチュアート著 徳田 功訳「不確実性を飼いならす 予測不能な世界を読み解く科学」メモ ７ 社会物理学----------------------------------------------------------------------------------【まとめ】・標本抽出により、母集団全部を調べなくても母集団の性質を合理的に推定可能。・予備的な標本抽出で標準偏差を推定し、結果の正しさに対する信頼度及び誤…
はじめに 覚えてほしいこと やりたいこと 事前準備 データのダウンロード データの下処理 今回のポイント1 - データの粒度を揃える 今回のポイント2 - データの完全性を揃える Linear Correlationの使い方 計算Logic Workflow - Linear Correlation Confirm - Linear Correlation Correlation Measure - テーブル形式でp値・自由度とともに相関係数を確認 Correlation Matrix - 相関係数を星取表形式で確認する Interactive View Correlation Matrix …
副題：データ（事実）は操作できるはてなブログでTeXを使える事実が判明しました。私は素人ですから高度な言語を扱えません。せいぜいHTMLなどのマークアップかスタイルシートが少しわかる程度です。しかしそうすると、普通に記事を書く分にはさして不便ないのですが、数式を記述できないんですよね。これ。たとえば相関の分数表現程度なら「係数r=Sxy/Sx·Sy」とか書けそうですが、連分数とかシグマとかルートとか記述の量が増えると見た目がつらくなる。TeX使えたらなぁ・・ とダメ元でチャレンジしてみたら、ちゃんと反映されました！されないですね。 サイズが調整されてねぇ！ 「tiny」より小さなサイズは指定で…
markezine.jp
tarotan.hatenablog.com
posfie.com
www.m-sugaya.com
www.m-sugaya.jp
togetter.com
ja.wikipedia.org
skill-hacks.co.jp
atmarkit.itmedia.co.jp
