jupyterlab

はじめに こんにちは。サイカでソフトウェアエンジニアをやっているshohhei1126です。前回の記事ではサイカにとってのオブザーバビリティとはについてシェアさせていただきましたが、今回は少し毛色の違う弊社の分析環境についてお話させていただこうと思います。 サイカではMagellanを使った分析の他に、お客様のご要望に合わせたアドホックな分析やデータサイエンティストが研究目的で行う分析などがあります。 そういった分析を行う際、もちろん各作業者のマシンに分析ツールをインストールし作業を行うこともできますが以下のような問題が発生します。 CPUアーキテクチャやOS、ソフトウェアのバージョンなどを統…

Stable Diffusionを使うようになって、Google ColabやSageMakerを利用してノートブックでプログラム作成をすることが多くなってきた。 少し前にディープラーニング開発をやっていた頃は、ローカルPC上でJupyter Notebookを使ってプログラムを作ることはよくやっていたが、しばらくこういうことはやっていなかった。 Stable Diffusionを利用した画像生成や再開するディープラーニング・機械学習開発でも使うことが多くなってくるので、改めてGPU搭載PCにJupyter Notebookをインストールしてローカルなノートブック開発環境構築した。 jupyt…

今までAppleのDeveloper Toolsをインストールしたときに入るPython 3.9を使っていたのですが、昨日brew upgradeしたあとインストールしてたモジュールが動かないのでなんでかなと思ったら、python3バイナリが3.9.xじゃなくて3.11.xに置き換わっていました。 折角の機会だし、Python 3.10よりも高速化されてエラーがよりわかりやすくなったらしいですしPython 3.11を使ってみるかと思って、普段使っているPythonモジュールをpipでインストールしてみました。Python 3.9の方はもう使わないと思うので、モジュールは削除済みです。 % p…

Jupyter notebook を立ち上げた際の初期ディレクトリが気に入らなかったので、 変更する方法を検索していたら、Jupyter lab に行き着いたのでメモ。 Jupyter lab の立ち上げ 初期ディレクトリの変更 Jupyter lab の立ち上げ コマンドプロンプトで jupyter lab を入力すると、下の画面になる。 こちらの方がファイル管理とか楽そう。 初期ディレクトリの変更 本来はこっちが目的だったので一応メモ。 コマンドプロンプトで下記を入力 jupyter lab --generate-config ユーザーフォルダ内の.jupyterフォルダにjupyter_…

JupyterLabとJuliaで遊んでいきます。 今日のところは環境構築までです。 遊んだ環境 JupyterLabのインストール Juliaのインストール JupyterLabで動かす 参考文献

JuliaをJupyterLabで動かした時メモ。 ＊＊＊以下の手順では、matplotlibが壊れてしまったので失敗。＊＊＊ 失敗した内容はこちら easygoingrider.hatenablog.com easygoingrider.hatenablog.com なんだかんだ成功した内容はこちら easygoingrider.hatenablog.com ＊＊＊＊＊＊＊＊＊＊＊＊＊＊＊＊＊＊＊＊＊＊＊＊＊＊＊＊＊＊＊＊ 環境などは気にしない。とりあえず使えるようにしたときのメモ。びっくりするほど簡単で、ほとんどクリックだけで終わった。所要時間は10分程度でしょうか。細かいことを気にしなけ…

概要 目まぐるしく変化しているように見える機械学習の開発環境の、とりあえず最先端と思われる一つを抑えておく。 いま興味がある転移学習を使えば、個人レベルでも面白いことができないかと思いチュートリアルから始めてみる。 各種インストール 事前にminicondaをインストールしておく Anaconda Promptを起動 conda create -n pytorch python=3.7 conda activate pytorch conda install pytorch torchvision torchaudio cudatoolkit=10.2 -c pytorch conda ins…