Docker

DockerコンテナでOpen-Interpreterを動かせるようになったけどどうやらCPUだけで処理してるみたいだったので、GPUを使って動かせるようにするために四苦八苦したことをメモしておこうと思う。 前提 Dockerでコンテナを作ってその中でOpen-Interpreterを動かす。 Docker Desktopを動かしているマシンは、OSがWindows11、グラボは載せてある。 やりたいこと コンテナにGPUを認識させる Open-Interpreterの実行時にCPUじゃなくてGPUを使わせる。 やったこと コンテナにGPUを認識させる コンテナにCUDAをインストールする 公…

アプトポッド組み込みエンジニアの久保田です。 近年、ロボットやモビリティを動作させるためのプラットフォームとしてROSを採用することが多くなってきています。 通常、ROSは特定のUbuntuバージョンに対応したディストリビューションとしてリリースされていますので、ROSのディストリビューションを変更したい場合は、ホストOSも変更する必要があります。この制約を回避する方法として、Dockerというコンテナ技術を使う方法があります。Dockerを使えば、ホストOSを変更せず様々なROSディストリビューションを動かすことができるようになります。 また、Dockerの利用はホストOSのアップデートが難…

Dockerは、コンテナと呼ばれる軽量な仮想環境を作成および管理するためのプラットフォームです。 1.コンテナとは何か？ コンテナは、アプリケーションとその実行に必要なすべての依存関係（ライブラリ、ファイル、設定など）をまとめた軽量なパッケージです。 これにより、アプリケーションは異なる環境で実行されることなく、一貫性のある動作を保ちます。 コンテナは、開発、テスト、本番環境など、さまざまな環境で同じ方法で実行できます。 2.Dockerとは何か？ Dockerは、コンテナを作成、管理、および実行するためのプラットフォームです。 Dockerは、アプリケーションとその依存関係をコンテナにパッケ…

はじめに 初めて構築してみたので、指摘等がたくさんあるかと思いますが、 一読してもらえると嬉しいです。また、指摘ありましたらコメント下さい。 環境 Rails 7.0.8 Ruby 3.2.0 Docker Docker-compose MySQL 学び 各ファイルについては、割愛します。(ネットにたくさんの記事が出ているので、重複することが多いです) 仕事でも使うことがあるので、わかっているが自分のPCに余計なものを読み込ませる必要が無いことが一番のメリットでは無いでしょうか。 下記のコマンドは何気なく使っていたのですが、docker desktopをみてびっくりしました！！ docker …

Dockerのゴミを削除する（未使用イメージ、ボリューム、コンテナの削除） Dockerのゴミを削除する（未使用イメージ、ボリューム、コンテナの削除） Dockerのボリュームをまとめて消すコマンド Dockerのコンテナをすべてストップする Dockerのイメージをすべて消す いつも実行しているコマンド Dockerのボリューム、イメージ、コンテナを削除する方法を解説します。 一度実行したdockerコマンドはshellのhistoryに登録されるので、Ctrl+Rで実行したいコマンドをさかのぼることで楽に実行できる。 以下のコマンドは一度実行しておくことをお勧めする。 Dockerのボリュ…

Docker で アセンブリを動かす アセンブリの学習環境を Docker を使用して構築します。 Docker で アセンブリを動かす Docker入門 関連記事 Docker で アセンブリを動かすプロジェクトのディレクトリ構造 アセンブリを動かす Dockerfile アセンブリファイルを作成する アセンブリを実行する。 Docker入門 関連記事 Docker入門 Dockerのダウンロードとインストール(Mac編) Dockerのダウンロードとインストール(Windows編) Dockerのプロキシーの設定 Dockerfileの書き方 Docker で アセンブリを動かすプロジェク…

CI/CD環境の構築手順を簡単に抑えると次のようになる※コンテナ環境で実施する場合 Gitlabコンテナを作成 Gitlab Runnerコンテナを作成 Gitlabにアクセスし、対象のプロジェクトを作成 Gitlabのプロジェクトからrunner登録必要な情報を取得する Gitlab Runnerコンテナにアクセスし、runnerの情報を登録する

9/28(木) 睡眠時間4時間45分 Astreaを深夜までプレイする⇒昨日の日記を書く⇒Astreaのことを思い出すためにゲームを起動する⇒遊ぶ… ﾊｯ( ﾟДﾟ) これが無限ループか…！ やったこと 仕事 Astrea 感想 昨日はCloud Runに成功し、デプロイ自体は完了。というわけで今日はバグ取り。 なぜかローカル環境が起動しないエラーなども発生していたが、地道にDockerfileを読み直して立て直して解決。この数日でGCPとDockerについてちょっと詳しくなれた気がする。必要は理解の母だ。 NUXTとSpring Bootでそれぞれ環境変数を利用したかったが、その方法が分から…

マジでよくわかんなかったので備忘録として書いておきます、これどれくらいの人に需要あるんだろうな。

複数環境（本番、検証、開発）でECS on Fargateを構築した際にDockerfileを共通化した備忘録です。 前提情報 各環境は別々のAWSアカウント ECSのタスク内は「Nginx」と「SpringBoot」のコンテナで連携 本記事の共通化対象は「SpringBoot」のコンテナで利用するDockerfile 手順 buildspec.yml内のdocker buildするところでDockerfileに引数を渡すことで共通化できます。 例）Javaのメモリ割り当てのところを共通化する １、パラメータストアにメモリの初期値と最大値を設定する メモリ初期値のキー名：/web/java-m…

Amazon ECR を使ってみたのでここにメモします。 Amazon ECR とは 特徴 Docker イメージを ECR にプッシュする流れ 事前準備 処理の流れ レジストリの認証 イメージの作成 イメージにタグ付け イメージプッシュ make ファイル作成 実行 Amazon ECR とは Elastic Container Registry の略で、Dockerのコンテナイメージを保存しておくためのレジストリです。 Docker コンテナイメージを保存・管理・デプロイを行うことができます。 特徴 AWS ECSと統合 高可用性 AWS Marketplaceが活用できる セキュアな状態…

はじめに アプトポッドVPoPの岩田です。 昨日、浅草の都立産業技術センター台東館にて行われた ROSConJP 2023 にて、シルバースポンサーとしてブース出展をしてまいりました。ブースでは、当社の主力製品であるIoTプラットフォームミドルウェアintdashをROS開発に応用した、ROS開発ワークフローの効率化パッケージについてご紹介しました。 YouTubeのリアルタイム配信をご覧になられた方は見ていただけたかもしれませんが、当社エンジニアの影山により「Open-RMFを応用したクラウドフリート管理システムの構築」の登壇を行ったり、私自身もライトニングトークでお時間をいただき掲題の「R…

G-gen の佐々木です。当記事では、Google Cloud（旧称 GCP）のマネージド ETL サービスである Dataflow を解説します。 概要 Dataflow とは Apache Beam とは ユースケース Dataflow のユースケース 例1 : リアルタイムのデータ取り込み 例2 : データストア間のデータ移行 開発 SDK パイプライン構成 Python SDK で記述したパイプラインの例 Dataflow テンプレート 構成要素 Dataflow ワーカー リージョンエンドポイント Dataflow GPU カスタムコンテナ 周辺機能 Dataflow SQL Dat…

はじめに 最近お仕事でSigNozを使ってみました。 その中でSigNoz(が使っているClickHouse)のCold Storageとしてさくらのクラウド オブジェクトストレージを使ってみましたので利用手順などのメモを残しておきます。 SigNozとは オープンソースのAPM & オブザーバビリティツールとのことです。 signoz.io GitHubリポジトリのdescriptionには以下のように書かれています。 SigNoz is an open-source APM. It helps developers monitor their applications & troubles…

TL; DR jupyterhubのdockerイメージはそのままでは動かない oauthenticator使えば連携は容易 gitlab 起動 $ docker run -p 80:8080 -d -it --name gitlab gitlab/gitlab rootパスワードの確認 /etc/gitlab/initial_root_passwordにある アプリケーション設定 ID連携（GitLab）で、JupyterHubのユーザープロビジョニングを簡単に - Qiita に記載の通り。 「Application ID」と「Secret」は後で使う。 jupyterhub Docker…

今日の出来事ですが、30分以内に8名の方が訪れて嬉しかったです。 褒めて頂いたりもして嬉しかったです😊 評価して頂いたので、もっと機能を追加して反応が欲しくなってしまった！ 褒めて頂けたり注目して頂けると嬉しいものですね。 もっと驚かせたり、「めっちゃ便利やん！」て思ってもらいたくなりました😊 作ったものが評価されるって、こんな嬉しいものだと思いませんでした😆 今考えている作りたい機能 vscodeのようなコメントアウト機能 フィヨルドブートキャンプのカリキュラムに対応できるよう、ファイル操作をするメソッドの追加 vscodeのようなコメントアウト機能 これ、なかなか難しいんですよね、、😭 何…

こんにちは，コミューンで一人目の機械学習（ML）エンジニアとして働いている柏木（@asteriam_fp）です． 入社して５ヶ月ほど経ちましたが，今回漸く最近の取り組みを紹介できそうです．ML エンジニアは僕一人なので，専らの相談相手は ChatGPT 君の今日この頃です笑 はじめに コミューンでは，企業とユーザーが融け合うコミュニティサクセスプラットフォームである commmune を提供しています．今回のブログは先日のプレスリリースでも発表された投稿レコメンド機能を commmune に導入したので，その機能を裏側で支えている機械学習基盤に関する内容を紹介します． エンドユーザーに対して提…

環境 $ cat /etc/os-release PRETTY_NAME="Ubuntu 22.04.3 LTS" NAME="Ubuntu" VERSION_ID="22.04" VERSION="22.04.3 LTS (Jammy Jellyfish)" VERSION_CODENAME=jammy ID=ubuntu ID_LIKE=debian HOME_URL="https://www.ubuntu.com/" SUPPORT_URL="https://help.ubuntu.com/" BUG_REPORT_URL="https://bugs.launchpad.net/ubun…