散布図

■ Python ３ 今回も matplotlibパッケージ について学習です。numpyも使ってます。 ◆ 散布図とヒストグラム 今回は、散布図を作成してみます。 まずは、乱数ジェネレータから小数値のデータを50個生成。 これで表示すると、 50点のランダムデータの散布図を生成できました。 試しに、平均や分散、中央値を見てみると… 平均は大体真ん中の「５」に近い値ですが、中央値は結構端っこに寄ってますね。 まあ、この辺りは実行するたびに変わりますし、50個程度の値だとどうしても偏りは出ますね。 では、分布を見やすくするために、ヒストグラムで表示してみると… あれっ！？ ヒストグラムの表示が全…

※今回の内容はYouTube動画でもご紹介しています。 youtu.be ■はじめに 今回は統計ソフト「JMP（ジャンプ）」で散布図を作成します。散布図は2つの連続変数の関係を判断したい時や、それらの相関の有無を検討する際に便利です。さらにJMPでは、データ、回帰直線、確率楕円等が散布図と連動するため、データ探索をより深く進めることができます。 では始めましょう。JMPをお持ちでない方は、30日間全機能を試せるトライアル版をご利用ください。 JMPトライアル版ダウンロード | JMP

Big Dataでこういう海苔グラフはNG Big Dataを扱っていると、従来の手法ではいろいろうまくいかないことがあります。 例えば、こういうグラフ。 これ、とあるデータ(10万点の正規乱数)を単純に表示する数だけ変えてプロットしたものです。x軸でどのくらいのデータ数をプロット(それぞれ百, 千, 万, 10万点)したか分かります。"海苔みたいなグラフ"とは何か、イメージしていただけたかと思います。海苔見せられても…ですね。10万点を超え、100万点とか1億点となってくると、描画速度の問題も出てきます。海苔の上に海苔を重ねるようなもので、重たくて画面がいつまでたっても砂時計、ってなことにな…

さて、本日は相関分析に使うデータを散布図で可視化してみようと思います。前回エントリーでは相関係数の計算を行いました。今回は相関係数算出に使ったデータを散布図で可視化してみようと思います。 散布図とは 散布図は、横軸と縦軸にそれぞれ別の量をとり、データが当てはまるところに点を打って示す（「プロットする」といいます。）グラフです。2つの量に関係があるかどうかをみるのに非常に便利なグラフです。（出典：なるほど統計学園） 使用するデータ 前回エントリーと同じく、以下のエントリーで収集した SUUMO の中古物件情報を使います。 www.gis-py.com 相関関係を分析する属性 SUUMO の中古物…

最近プログラミングの勉強を始めた。得られた知識をアウトプットする場所があれば、望ましいのではないかと考えたので、久方ぶりにブログを初めてみる。また、どうせ３日坊主で終わる可能性もある。いつかアフィリエイトでお小遣いをちょっと稼げる様にブログが育ってくれないものか、ともぼんやり思っていたりもする。 さて、対象としているプログラミング言語はPythonです。今回作成したプログラムは、csvファイルの1列目にx座標、2列目にy座標が記載された、n行のデータの散布図を描き、そのデータの各点を線形近似したとして、任意のx座標を与えた時のy座標と、その点における、線形近似した直線の傾きを算出してくれるプロ…

今回は「その４」 「その３」以前が未読の方は先ずは一つ前の以下の記事から。 tomo1961.hateblo.jp 前前前回からの続きとして予告通り、昔から使われていて今でもその欠点を理解した上で活用すればとても有効な「旧QC７つ道具」の各ツールを一つづつその概要を解説している。 毎回書くが「その１」に書いてある通り、教科書に書かれているような事はネット上にいくらでも転がっているので触れない。基礎情報はツールの名称などで検索して得て欲しい。 ネットの情報の中には、いわゆる ”意識高い系” の方々の一部に、過去の古臭いものは悪である、かのような説明で否定から論議に入る向きが見られるが、その論法こ…

はじめに 以前に書いた以下の記事で，再生回数と高評価の関係を散布図を用いて可視化しました． 再生回数が増加すると高評価数が増加する相関がありそうで，比例の関係がそうだ．という内容でしたが， 当然230以上も動画があると，すべてがそうとは限りません．そこで，今回はその関係から外れてそうな動画が何かを調査してピックアップします． flag-analysis.hatenablog.com 集合としては3つあり，動画数としては7本なので全体のおよそ3 % ほどの動画が対象となります． 全力回避フラグちゃん!とは？ "何のとりえもない男，モブ男 そんなモブ男の前に現れたのは，，，死亡フラグ！？ モブ男は…