Python3

jetson NXでJenkins環境を構築する備忘録です 目次 目次 この記事でわかること 1.Dockerfileの作成 2.docker image作成 3. docker コンテナ起動 4. Jenkinsの設定 5.参考 感想 スポンサーリンク (adsbygoogle = window.adsbygoogle || []).push({}); この記事でわかること Jetson Xavier NXとdockerでJenkinsの環境構築方法 1.Dockerfileの作成 FROM jenkins/jenkins:2.361.4-jdk11 USER root RUN apt-ge…

MLOpsの勉強をしている中で管理モジュールのmetaflowが使える環境を構築しました このブログは備忘録です 目次 目次 この記事でわかること 1.Metaflowとは 2.実行環境 3.Dockerfile作成 4.docker imageの作成 5.containerの作成 6. sampleコードの実行 deeplearning関連記事 参考 感想 スポンサーリンク (adsbygoogle = window.adsbygoogle || []).push({}); この記事でわかること Jetson Xavier NXとdockerでmetaflowの実行環境構築方法 1.Meta…

スポンサーリンク (adsbygoogle = window.adsbygoogle || []).push({}); 以前にJetson Xavier NXとdockerでpytorchのefficientnetの学習環境構築をしました 今回はこの環境を使ってefficientnetをベースとしたsimsiam表現学習をやってみます 目次 目次 この記事でわかること 1.実行環境 2.環境構築手順 2.1 docker containerを起動 2.2 必要なモジュールをインストール 2.3 simsiamコードをgit cloneする 3.simsiamコードの改良 3.1 builder…

以前にdockerを使ってJetson Xavier NX上でpytorchの環境を構築しました technoxs-stacker.hatenablog.com こちらの環境だとtorchvisionのversionは0.7.0となっています efficientnetに対応しているtorchvisionのversionは0.11以上なので、torchvisionのversionを上げる必要があります pytorch.org 今回はefficientnetに対応するための環境構築備忘録です 目次 目次 この記事でわかること 1.実行環境 2.環境構築手順 2.1.以下のコマンドでdocker i…

facebookresearchが公開している画像分類フレームワークClassyVisionをJetson Xavier NX上で動かす際の備忘録です 強引なやり方をしてますので、もっとスマートなやり方をご存じの方はコメントで教えてくれると嬉しいです・・・ 目次 目次 この記事でわかること 1.実行環境 2.環境構築 2.1 docker containerの起動 2.2 モジュールのインストール 2.3 その他モジュールのアップデート及びインストール 2.4 一部コードの改良 3.テストプロジェクトの実行 3.1 テストプロジェクトの作成 3.2 学習実行 関連記事 感想 参考 スポンサーリ…

どうしてこうなった 顔認証のアプリを作って数少ない友達にイキるために。Face Recognitionという誰でも簡単にpythonで顔認証ができるモジュールをインストールしてコードを書いたらこうなった。 ModuleNotFoundError: No module named 'dlib' dlibがないらしい Cmakeを入れる dlibをインストールするにはCmakeが必要らしいのでCmakeをインストールした。 そのあとにdlibをインストールした。それで実行し直したら。 ModuleNotFoundError: No module named 'dlib' なんでだよインストールした…

Python2のコードをpython3で動かしてエラーが出る場合、こう治せば良い。（AIとかのコード編） 意外と、以下に示す3つぐらいじゃないでしょうか！ 他にも、実体験としてあれば、教えて下さい。 【1】print関連 print "Min and Max:", x_min, y_min, x_max, y_max ↓ 単に、()をつけるだけ print("Min and Max:", x_min, y_min, x_max, y_max) 【2】range,xrange関連 for i in xrange(0, 10000) ↓ xrangeをrangeにするだけ for i in ran…

初めに 本記事では、エンジニアが関係する資格についてどのようなものがあるのかまとめます。

今年度の資格取得状況まとめ5回目*1。今回は上期の終わりということで中間決算。 決算の前に、制度改定の話を書いておきたい。会社の制度改定で、今後は資格取得奨励金が無くなる。そのため、奨励金を目当てにしていた資格は上期で集中受験していた。一方で下期は受験推奨資格が増加される。引き続き、合格時の受験料は会社が負担してくれるので、単に資格として欲しいものを取りたかったら、受ける価値はある。加えて、不合格時にも半額補填してくれるとのことだった。 そんなこともあり、上期は奨励金目当てのマイナー資格も多数受験していた。一方で、下期に残る受験予定9件は真に欲しいものを並べている。では、以下に記載する。なお、…

django-extensionsには、スクリプトファイルを実行するためのrunscriptというコマンドが用意されている。 このコマンドを使うと、Djangoのコンテキスト（つまり、Djangoのsettings.pyが適用された、 django.setup() を実行済みの状態）で、Pythonのスクリプトを実行できる。 RunScript — django-extensions 3.2.3 documentation 試したバージョンは、Python 3.10、Django 4.2、django-extensions 3.2.3。 scriptsフォルダにスクリプトファイルを用意する d…

皆さん、こんにちは！ 以前の記事で OpenAI の GPT-3 モデルを使用して Fine-tuning を行い、キャラクター設定をしたAIチャットアプリを構築する方法についてご紹介しました。 blog.nocodelab.jp 今回の記事では、新たに Fine-tuning に対応された GPT-3.5 Turbo モデルを使用して教育を行い、前回よりも、どの程度性能がアップしたのかを実際に試してみたいと思います！ 1. はじめに 2. GPT-3.5 Fine-tuning について 3. Fine-tuningの実行 3.1. データセットを準備する 3.2. ファイルをアップロードす…

fastp fastpは、アダプタートリミングとクオリティコントロールを同時に行う、高速なNGSデータ前処理パイプラインである。 fastqファイルに対応しており、fq.gzでもランが可能。 詳しくはfastpのgithubを参照 インストール condaによるインストールがシンプルかつ簡単。 git cloneによるダウンロードとコンパイルを用いたバイナリのインストールも可能（著者は試していない）。 #condaによるインストール。著者はpython3.9で走らせてるが、割とどのバージョンでも動く。 conda install -c bioconda -y fastp conda updat…

サーバーワークスの村上です。 NBAシーズン開幕まであと約1ヶ月、楽しみですね！ 昨季優勝したナゲッツが呪術廻戦のエンディング風に試合スケジュールを公開していますので貼っておきますね。 Domain Expansion: Schedule Release 💥 pic.twitter.com/TmnZEFlwFo— Denver Nuggets (@nuggets) 2023年8月17日 さきに本ブログのまとめです。 LLMの幻覚(Hallucination)軽減策としてRAGが挙げられる。 LLMが参照するナレッジベースはできるだけAWSマネージドに構築できるものが良い Amazon Bedr…

こちらのエントリーの続きです。 kittantan.hatenablog.com ネイティブバイナリなプログラムに目をつけいて色々調査していると2010年辺りに流行っていたのかその頃の実装が幾つか見つかりました。 ただ、TEMPer自体がアップデートされている様で幾つか種類があったり、なんと購入したものはよくWebで見かけるのとベンダーIDが違っていたり😱（会社変わってる...) そんなこんなで以下にしようと目論んでいました。 github.com サポートしているTEMPerのベンダーID、プロダクトIDに購入したのはなかったのですが、HIDデバイスとしてのアクセス方法は変わらないだろうと踏…

これは、なにをしたくて書いたもの？ 前に、プレビュー版のAWS SAMのTypeScriptサポートを試してみました。 AWS SAMのTypeScriptサポート（プレビュー）をLocalStackで試す - CLOVER🍀 そして、ふとAWS SAMのTypeScriptに関するページを見ると、「プレビュー」という文字がなくなっていたことに気づきまして。 esbuild による Node.js Lambda関数の構築 - AWS Serverless Application Model いつの間にか、プレビューではなくなりました？ というわけで、確認してみました。 AWS SAMのType…

この記事の音声読み上げ はじめに プレインストールの設定 open-interpreterのインストールと設定 Open-interpreterの使用 まとめ 補足: interpreter -yでの実行時の表示 補足: Code-Llamaに進んだ場合のメッセージ この記事の音声読み上げ VOICEVOX:冥鳴ひまり はじめに Open Interpreterは、自然言語で指示を与えることでコードを書き、実行まで行ってくれるツールであり、これはローカル環境にインストールすることで利用可能となる、OpenAI社のCode Interpreter（Advanced Data Analysis）の…

結論 今のところ、ピュアなPythonは組み込んで使えそう 3rd partyのライブラリを含める方法は分からずじまい 参考 Embedding a Python interpreter inside a MacOS / iOS app, and publishing to the App Store successfully. 一番まとまっている python-stdlibなどをXcodeにコピーするときはFolder Referenceにチェックする またビルドスクリプトはそのままだと動かないので、記事のコメントを参照 この記事のコメントに3rdライブラリを組み込んだ紹介があったが、手元で…

はじめにStable Diffusionなどの拡散モデルを使ったVideo2Videoが盛んに開発されています。GAN（敵対的生成ネットワーク）を使っても同様のことができる気がするのですが、すでに古い技術になってしまったのかあまりそれに言及する人がいません。GANを使ったVideo2Videoを実際にやってみました。使ったのは「CartoonGAN」というモデルです。以前に使ったことがあります。 touch-sp.hatenablog.com touch-sp.hatenablog.com 最初の記事から4年も経っています。環境 Windows 11 CUDA 11.7 Python 3.10…

・お題：Pythonで環境構築して、Pubmedから論文情報をとってきたい。 ・まずはAnaconda Promptで環境構築した。すぐに忘れるので、メモしておく。 #python=3.10で環境構築conda create -n kikitai python=3.10 #仮想環境に入るactivate kikitai #ライブラリをインストールconda install jupyterlab -yconda install ipykernel -yconda install pandas -ypip install openai #OpenAI用パッケージ pip install gTTS …