Docker

MonorepoとOneTeamでMicroservicesの課題に挑む 横浜スタジアム技術実証・COCOA インストール率のリアルタイム可視化 IoT システム DeNA TechCon をながら視聴したのでメモがてら記事にしておきます。 とりあえず Go/GCP の話が多かった印象。 MonorepoとOneTeamでMicroservicesの課題に挑む MonorepoとOneTeamでMicroservicesの課題に挑む マイクロサービスを並行開発していくにあたり、開発効率を向上させるために 起動コマンド等の共通化 サービス作成方法を統一 されたとのことです。 プロジェクトのレイア…

僕は Minecraft を遊んだことはないが最近知人からマイクラサーバを建ててほしいと頼まれたのでドキュメントを諸々読みながら GCE 上に建ててみた。 コマンド自体は Minecraft に限らず応用が効くと思うので将来のためにメモっておく。 最低限 CONTAINER_IMAGE="itzg/minecraft-server:java8" INSTANCE_NAME="minecraft" MACHINE_TYPE="e2-highcpu-2" ZONE="asia-northeast1-a" MEMORY="1500M" DISK_AUTO_DELETE="no" CONTAINER_…

TL;DR 久しぶりにVSCodeのremote container拡張機能を使って開発していた時に、docker-compose.ymlの書き方をかなり忘れていたので備忘録としてまとめておく。 適宜更新予定。 ファイル例 version: '3' services: web: build: . ports: - "11324:1324" volumes: - .:/go/src/go_test/ working_dir: /go/src/ restart: always command: sleep infinity container_name: go_test_container 各要素…

VRChatにinしつつ、機械学習タスクをlocalでぶん回したい！新PCを買ったので環境構築するのです！ 環境 Machine1(Old): Ubuntu 2018とWindows 10のdual boot GTX1080 x2 Machine2(New): Windows 10 RTX3070 移行後 Machine1のWindowsは廃止。Machine1へはMachine2からSSH, VSCodeを使って接続。Machine1で動かすDockerにも簡単に入って作業できるようにするのです！ Deepなどの作業はUbuntuもしくはそれ上のDockerでGTX1080x2を使って回し、…

以前「コンテナ若葉マーク」で「コンテナ環境ではIPアドレスじゃなくてコンテナ名を使って通信しろ！(IPアドレスは意識するな！)」みたいなことを話したりしたことあったんですが、何らかの理由でコンテナ名(ホスト名)でなくIPアドレスを使って(イコールIPアドレスを固定して)コンテナを使いたい場合について。 コンテナ単体で固定IPアドレスを使いたいユースケースはさすがに無いと思うので、複数のコンテナをデプロイしてお互いのコンテナ間通信の際にIPアドレスを固定したい、という場合について、Docker単体(docker実行)の場合と、Docker Compose使用時それぞれについて説明します。 まずD…

イントロ 論文を使うとき何のツールを使っていますか？ 大半の方はOverleafを使っていると予想しています。 なぜなら、Overleafの著者共有機能や、ブラウザで書ける利便性が圧倒的だからです。（他にもっと強いツールが出ていたら教えて下さい。） 一方で、Docker+LaTexで環境を作る場合のメリットは、「Overleafより軽い」「Gitで管理しやすい」等が挙げられます（もちろん、Overleaf単体 / Overleaf+Gitでのバージョン管理機能はあります）。また、最近Overleafは使っていないので分かりませんが、アップロード周りがちょっとめんどくさかった気がします。 また、…

$docker ps とうつと Got permission denied while trying to connect to the Docker daemon socket at unix:///var/run/docker.sock: Get http:~ unix /var/run/docker.sock: connect: permission denied という様なエラーが出た際の対処法を書く。 これはユーザーがdocker groupというものに入っていないときに出るエラーだ。 docker groupに入れる必要がある。 以下のサイトが参考になる。 https://stac…

Dockerで自分だけのカスタマイズイメージを作ったので、作り方をメモします。 今回はCentOS8にJavaを入れる方法を試します。 また、dockerはrootユーザーで動くので、事前にrootにsuしておくと楽です。 そうでない場合は、各コマンドの頭に「sudo」をつけて下さい。 ベースイメージをpull まずはベースとなるイメージをdockerhubからpullします。 docker pull イメージ名:タグ 例えばCentOS8のイメージをダウンロードするなら以下になります。 docker pull centos:8 イメージをrunしてbashを起動 次に、dockerイメージを…

ついにきたぞ！ ロシア版ISUCONともいうべき高負荷環境をチューニングするプログラミングコンテストHighLoad Cup 2021(Gold rush)がついに始まりました。2017年、2018年と2回開催されて以降更新がなかったのですが、All Cupsの一部として装いも新たについに降臨です。いやぁ待った甲斐があったね。 cups.mail.ru 開催日程 現時点での開催日程は以下の通りです。 2021/02/19 - 2021/03/05 Beta-testing 2021/03/05 - 2021/03/21 Battle-round Beta-testingの期間もテスト走行は可能…

この本を読んだメモ。 イラストでわかるDockerとKubernetes Software Design plus作者:徳永 航平発売日: 2020/12/05メディア: Kindle版 Docker/Kubernetesは仕事で使っているものの、きちんと勉強したことがないなと思ったので、まわりで評判の良かったこの本を丁寧に読むことにした。 本の感想 Docker使ってると「レイヤ」って言葉を見るけど、そのイメージがついた。イラスト付きでしっかり解説してくれるのはありがたい。 CRIランタイム/OCIランタイムって言葉をよく見かける。こないだも見た。これの意味を理解した。 CRIランタイム: …

WindowsでDockerを使ってGoをビルドする方法についてまとめてみました。Dockerhubからgolangのイメージの取得先を確認します。 hub.docker.comコマンドプロンプト（PowerShell窓）を開いて以下のコマンドを実行します。 docker pull golang latest: Pulling from library/golang 0ecb575e629c: Pull complete 7467d1831b69: Pull complete feab2c490a3c: Pull complete f15a0f46f8c3: Pull complete 151…

Windows 10にdockerをセットアップする流れをまとめてみました。 DockerDesktopインストール① DockerDesktopInstallerを以下のサイトからダウンロードします。 www.docker.com ダウンロードした「Docker Desktop Installer」実行します。 チェックはデフォルトのまま「OK」押下します。 インストールが完了したら「Close and restart」をクリックするとWindows OSが再起動するので注意してください。 WSL2更新 Windowsが起動すると「WSL 2 installation is incomple…

こんにちは、初めまして、フロントエンドエンジニアの八木です。 普段、モノタロウのECサイト開発を行っています。 エンジニアだとシステム構成図やシーケンス図など、何かと図を作る機会が仕事柄たくさんあります。その多くは要件定義や詳細設計などのフェーズで、人に何かを伝えるために使われます。 最近では、テック系のイベントやセッション登壇などでも使われる機会が多く見られるようになってきましたね。 エンジニアが図を用いる理由 図を用いる理由は文字だけでは直感的に伝わりづらいなど様々ですが、共通して言えることはビジュアライズすることによって皆が同じ認識を持つことにあります。 しかし、人によって描き方が異なっ…

www.itmedia.co.jp みずほ銀行は3月1日、一部のATMで2月28日から起きていた障害についてほぼ復旧したと発表した。定期預金のデータ更新作業が原因だという。全国の支店内にあるATMは全て1日朝から稼働しているものの、午前9時時点で稼働が確認できていない店舗外のATMが計42カ所あり、全面復旧へ作業を進めている。 みずほ銀行のシステム障害、ほぼ復旧 定期預金のデータ更新作業が原因 1日午後にも説明へ - ITmedia NEWS みずほ銀行では2002年4月の発足時と11年3月の東日本大震災の直後にもシステム障害を起こしていた。その後、4000億円以上を投じて基幹システムを刷新。…

2021年2月のサーバーレス関連まとめです。こちらのイベントで取り上げる内容です。 serverless-newworld.connpass.com 2021年2月のリリース 1月に引き続き2月もあまりアップデートはなかったです。逆にその分Lambdaなんかはre:Inventでお腹いっぱいになった機能追加にキャッチアップするいいタイミングかもですね。 タイトルだけで内容がわかるようなものは特にコメントしていません。 AWS Lambda が Node.js 14 のサポートを開始 Top Level AwaitってことはNode.jsのv14.3以降ってことですね、きっと でもLambdaで…

こんにちわ、krkettleです 今回は AWS で寮飯確認 Bot を作った、そしてサポートを終了した話を書きたいと思います 背景 AWS 構成 寮飯確認 Bot のフロー 画像アップロード メッセージ送信 認証情報の管理 監視・通知 S3 の署名付き URL でハマる なぜ署名付き URL を使ったのか 発行者の認証情報に応じて署名付き URL の長さが変わる 署名付き URL が長いと何が問題なのか どう解決したか 本番環境と同じ環境で行うテストが大事 サービス開始、そしてサービス終了まで サービス開始 拡張を考える 文章も送ってみる 献立の画像を切り出す 自動化したい気持ちが強くなる …

参考にしたQiita記事 qiita.com 環境 MacOS Catalina 10.15.6 Docker for Mac Docker version 20.10.2 docker-compose version 1.27.4 メモ Docker run -it の-itとはなにか docker run -it の「-it」とはなにか - Qiita -it と入力した場合, -i or --interactive と -t or --tty 2つのオプションを指定したという意味. interactive オプションは, 「標準入力」のこと. データの永続化 Named Volumes …

CentOS 7やCentOS Stream 8でminikubeを使うには次のようにセットアップしていきます。 CentOSをインストールする CentOSにminikubeを使ってKubernetesをデプロイするための環境を用意する（このページのLinuxに掲載されているドライバーが使える）。 minikubeをインストールする minikbe startする kubectlをインストールする) ところが、CentOS 7ではディストリビューション標準のdockerパッケージを使うと問題が発生します。 CentOS 7で起きる「Template parsing error: templa…

皆さんこんにちは！WESEEK戦略企画室インターンの太田です。 先日、高田馬場オフィス勤務のエンジニア・企画室のインターン生の募集を開始しました！ 今回のブログでは、WESEEKエンジニアインターン生の大和田健太さんへインタビューを行った模様をお届けします。 大和田さんがインターンを始めた当初の話や仕事内容、先日開催されたITSの話など、弊社へ応募を検討されている皆さんの参考になるような情報をたっぷり引き出してきました！ 大和田健太さん 今回のブログ初稿から良い感じ！と太田さんに伝えたら、胸をトントンと叩くジェスチャーでした！ご期待ください！ WESEEKとの出会い ITSについて WESEE…

問題 windows10のvagrant上にdockerのmysqlコンテナを作り、さらにVagrantfileのconfig.vm.synced_folderで指定したフォルダーをdocker-compose.ymlのvolumesでマウントしてMySQLのデータを永続化しようとした。 しかし、docker psで確認したところ、mysqlコンテナは起動に失敗していて、再起動を繰り返していた。docker logsでログを見ると、以下のようなエラーが繰り返し出ていた。 2021-02-28T08:22:44.596272Z 0 [ERROR] InnoDB: File ./ib_logfil…

こんにちは。コネヒトのテクノロジー推進グループでインフラエンジニアをしている laughk です。 今回は定期実行バッチで利用しているECS Schedule Taskの管理に Songmu/ecschedule を導入し、GitOps化した話をまとめます。 サマリ ecscheduleを導入する前の定期実行バッチの管理状況と課題 技術選定 - ecshceduleを選定した理由 導入プロセス GitOps化 導入後どうなったか ecscheduleを導入する前の定期実行バッチの管理状況と課題 コネヒトでは提供するサービスのWeb基盤にAmazon ECSをフル活用しており、定期実行バッチにお…

getting-started https://docs.dapr.io/getting-started/ ここからバイナリをダウンロード可能。 https://github.com/dapr/cli/releases Linux/MacOS の場合は /usr/local/bin などに配置して実行可能にしておけばOK。 dapr init を実行してから docker ps を実行してみて以下のような出力を確認する。 CONTAINER ID IMAGE COMMAND CREATED STATUS PORTS NAMES 0dda6684dc2e openzipkin/zipkin "/…

02/20 Kanazawa.rb meetup #102 meetup.kzrb.org kzrb.doorkeeper.jp 「意識高いもくもく会 - オンライン」 参加したのでアウトプットしてみる！！ 意識高いもくもく会 - オンライン 参加者みなさん各自いろいろともくもくしていました。 私は今のM1 Mac miniになって kanazawa.rb の meetup ページを ローカル環境のjekyllで表示できなくて、毎回毎回Mac book proで 確認していました。 今回はみんな大好きDockerでmeetupページをjekyllで表示できるように もくもくしていました。 je…