MMLSpark

このタグの解説について

この解説文は、すでに終了したサービス「はてなキーワード」内で有志のユーザーが作成・編集した内容に基づいています。その正確性や網羅性をはてなが保証するものではありません。問題のある記述を発見した場合には、お問い合わせフォームよりご連絡ください。

Cream-Kuchenのブログ•6年前

MMLSpark と Python の LightGBM 比較 ~変数重要度や精度、予測値の観点から~

はじめに MMLSparkとPythonのLightGBMの学習・予測結果はどのように違うのでしょう？分類器Classifierで同一データの学習・予測を行い、評価精度、変数重要度、予測スコアを比較します。結論：完全一致 ※ 特徴量の行・列の並びは同一 ※ 幾つか設定したハイパーパラメータ等も同一 ※ 実行環境：DatabricksのCommunity Edition ※ MMLSparkのversion：1.0.0-rc1 ※ Python LightGBMのversion：2.3.1 また、比較に用いたsample codeをGoogle driveで共有しているので参考にしてください…

#Spark#Pyspark#Python#MMLSpark#LightGBM#Databricks#機械学習

関連ブログ

Cream-Kuchenのブログ•6年前

MMLSpark LightGBM の使い方 - サンプルコード付き

はじめに MMLSparkのLightGBMはどのように使うのでしょう？サンプルデータで教師あり学習・予測を行い、精度等や変数重要度を見てみます。また、sample codeをGoogle driveで共有しているので参考にしてください。 html：mmlspark_lightGBM_sample_usage.html - Google ドライブ ipynb：mmlspark_lightGBM_sample_usage.ipynb - Google ドライブ ※ 実行環境：DatabricksのCommunity Edition ※ mmlsparkのversion：1.0.0-rc1

#Spark#Pyspark#MMLSpark#LightGBM#Databricks#機械学習

Cream-Kuchenのブログ•6年前

MMLSpark を Databricks にインストール・インポートする方法

はじめに DatabricksにMMLSparkはどのようにInstallするのでしょう？ Clusterの作成からLibraryへのInstallまで紹介します。 ※ Databricksの環境は無料のCommunity Editionです。

#Spark#Pyspark#MMLSpark#Databricks