golangとは，コンパイル型のプログラミング言語である。インターフェイスベースのオブジェクト指向をサポートし，並列処理が構文レベルでサポートされている。
参考：The Go Programming language
自分で開催したISUCONに自分で参加してきた 運営側視点の記事 -> TODO: 後で貼る 作業用リポジトリ github.com 注意 問題セットは、@showwinさんのISHOCON1です。(@showwinさんありがとうございます！) github.com この記事はISHOCON1のネタバレを多大に含みますので、ご注意願います。 やったこと 【5/1】 あーちゃんが始めてるのを見て、やるかーってなってインスタンスを立てる gitに沈める 初手、usersをメモリに持たせる 正直これはいい手ではない なんの計測もせず、特に理由なくメモリに載せる判断をしているから ユーザーが増えたり減…
表題のとおりなんですが、関連PullRequestを本文に書き込んだPullRequestを作るCLIをgolangで作りました。 github.com 仕事でdevelopブランチをstagingやmasterブランチにマージするPRを作るとき、リリースするPRをまとめたドキュメントを作るんですが、それをいちいち手書きしないといけないのが面倒でした。 なのでGitHubのAPIを叩くライブラリを使ってマージコミットのコメントを取得し、そこから各PRを探しタイトルを本文に埋め込む処理を書き、一旦コマンドラインツールにしました。ゆくゆくはSlackBotにこのコードをimportしChat Op…
crumbjp.hateblo.jp インデックス毎の性能と精度のバランスを取る上で考慮すべき要素 メモリー使用量 Faissインデックスは基本的にオンメモリー上で処理を行う。 すべてのデータが何らかの形でメモリー上に展開できなければならない。 これが最優先事項 Flatにデータを展開して物理的に乗らないようならば次元圧縮などを用いてデータ量の削減をしなければならない。 インデックスにリンク構造（HNSW等）を採用するならばその分のメモリー設計も必要となる。 検索速度、ベクトル追加速度 オンラインの高速応答が必要なのか、非同期処理である程度遅くとも精度を重視するのかで大きく選択肢が異なる。 ベ…
こんにちは！株式会社ハイヤールー代表葛岡（@kkosukeee）です。 前回の記事では弊社エンジニア伊藤（@icchy_san）が『技術特化選考を支える基盤を俯瞰して見る』というお題で技術特化選考の設計や仕組みなどを執筆しました。本記事では前記事でカバーできなかった技術特化型選考に必須である、オンラインIDEの開発・設計について執筆いたします。 対話型シェルやオンラインIDEの設計構築に関する知識はあまり発信されていないため、私達自身構築に少し苦労しましたが、本記事が少しでもオンラインIDEの開発や設計の参考になれば幸いです！ 技術特化型コーディング試験とは アルゴリズム形式の選考と異なり、一…
crumbjp.hateblo.jp Faissインデックス毎の制限について サンプルコード FlatインデックスはID管理出来ない func AddWithIDsDontWorkOnFlatIndex() { fmt.Println("*** AddWithIDsDontWorkOnFlatIndex ") index, _ := faiss.IndexFactory(2, "Flat", faiss.MetricL2) index.AddWithIDs([]float32{0,0,1,0,0,1,1,1}, []int64{0,1,2,3}) } 実行結果 *** AddWithIDsDo…
最近、根詰めて触っているので詳しくなって来たついでに解説記事を書いてみた Faissとは Facebookが開発しているC++NNS(Nearest neighbor search)エンジン 手に入るライブラリの中では最高峰の速度 高次元ベクトルで問題になりがちなメモリー問題に対応できる機能群 億を超える数のベクトルを想定した多種のインデックスアルゴリズム これらを組み合わせる事で柔軟に用途にマッチしたトレードオフ戦略が取れる 簡単に言えば、どんなケースでも利用できる超柔軟なライブラリである。 NNSとANN（Approximate nearest neighbor）の超基礎 NNS 高次元の…
きっかけ A Tour of Goを見てたら、クロージャを用いてフィボナッチ数列を出力する例題がありました。 fibonacci()関数の中は自分で作成する必要がある問題だったのですが、解答としてはおそらくこんな感じ。 package main import "fmt" // fibonacci is a function that returns // a function that returns an int. func fibonacci() func() int { x := 0 y := 1 return func() int { ans := x x, y = y, x+y re…
Trivyのv0.17.0をリリースしました。 github.com 長い道のりでしたが、ようやくこれでGoバイナリの脆弱性検知に対応できました。夜中0時ぐらいからリリース作業を初めて気付いたら朝5時でした。 概要 Go言語で書かれたプログラムをビルドすると依存しているモジュールがバイナリに含まれます。現代のソフトウェア開発において利用しているOSSのライブラリが0ということはまれなので、何かしらのOSSライブラリが作成されたバイナリに同梱されます。これらのOSSの古いバージョンには既知の脆弱性が含まれる可能性があります。これを手動で調べて追うのは手間なので最近では脆弱性スキャナを用いて検知す…
こんにちは。BASE BANK株式会社 Dev Divisionにて、 Software Developerをしている永野 (@glassmonkey) です。 今回は弊社でブロンズスポンサーとして協賛しました。 PHPをメイン言語として使用しているBASE社と異なり、BASE BANK社ではGoをメイン言語として使っているので、今回は初めてBASE BANK社としてスポンサードさせていただきました。色々至らぬこともありましたが、この場を借りてお礼を申し上げます。 登壇の内容に関してですが、業務ではなく趣味で触ってるFlutterネタです。勢いでProporsalに出したら通していただいたので…
前回に引き続きGethを使ったEthereum開発の学習を進めています。 環境構築についてはコチラの記事を見ていただければと思います。 今回はetherの採掘です。 ether（イーサ）とは？ Ethereumは内部通貨etherが規定されており、Ethereumでトランザクションを発生させるためにはetherの手数料が必要になります。 etherとはEthereumの内部通貨のことです。 そもそもEhtereumは通貨ではなくプラットフォーム。 そのプラットフォーム内で使われる通貨がether（イーサ）です。 プラットフォームと言われてもという感じですが、 毎度のごとく細かいことはスキップし…
テックタッチのバックエンドエンジニアの taisa です。 社内勉強会で、Visual Studio Code（以降 VSCode と記載）ナレッジ共有会を実施したのでその内容を紹介します。 今回の趣旨は「VSCode で各自がよく使う機能やショートカット、ちょっとしたノウハウを共有することで開発効率を向上させたい」というものです。自分自身 VSCode を使いこなせておらず、他のメンバーの使い方に興味がありました。共有会では、みんなで順番に画面共有しながら進めていきました。 コマンドパレット編 シンボル検索編 ショートカット編 最近開いたプロジェクトを開く 最近開いたファイルを開く / ファ…
DX事業部の @yyoshiki41（中川佳希）です。 現在は主に、LayerX インボイス という経理業務を行う方を対象ユーザーにした SaaS プロダクトを開発しています。 先日、会計freee API のGoクライアントを公開しました 🎉 github.com 今回はそのGo実装内部について紹介していきます。 会計ソフトとLayerX インボイス LayerX インボイスは、以下のような業務をサポートするプロダクトになっています。 請求書の受領 請求書から仕訳を行う オンラインバンキングに取り込むためのデータを出力する 会計ソフトに仕訳データを連携する LayerX インボイス上で扱うデ…
概要 WSLにて現在実行しているものを一覧出力 WSLにて特定のイメージをインポートする Goの環境を作る dotnetの環境を作る JavaでSpring Bootの環境を作る 作った仮想マシンを停止したい場合 作った仮想マシンを削除したい場合 作った仮想マシンをエクスポートしたい場合 参考資料 概要 最近は、docker とかで環境構築したりするのがデフォルトになっているかもしれませんが、WSL2とVSCodeの組み合わせもとても便利なので、個人的にはよく利用しています。 WSL関連の記事を見ていると、大抵ストアからUbuntuをインストールしたりして利用するパターンが多いと思いますが、予…
昨日調べたGo言語をインストールしてみた。 muscleprogramers.hatenablog.com インストールする環境によって、インストール手順がブラウザに表示される。 今のメインPCはWindowsなので、Windows環境にインストールした。 golang.org 簡単な英語なので、英語が苦手な自分でも手順が分かった。 インストール自体は以下の2手順だけである。 インストーラーを起動しインストールする コマンドプロンプトを起動し、インストールされているかコマンドで確認 おわり。 インストール簡単すぎて草生える インストール自体は3分程度で終わった。 javaやpython、Rub…
概要 ブレース展開って？ シーケンスな値を展開 非シーケンシャルな値を展開 ワイルドカード使用 組み合わせ値を生成 参考資料 概要 以下、自分用メモです。 bashのブレース展開について、よく忘れるのでメモメモ。 ブレース展開って？ ブレース展開は、{ } の中に書かれた一個以上のカンマで区切られた複数の文字列を左から順番に使用して文字列を生成する機能。 例えば、 hello/{1,2,3} とすると hello/1 hello/2 hello/3 と展開されます。 連続する値を生成する場合は .. (ドット２つ) で範囲を一気に指定できます。 先程の例でいうと hello/{1,2,3} は…
最近Goを勉強している。仕事でたまに使うというのもあるし、用途が広く色々とつぶしがききそうという期待もある。ちゃんと勉強してみると思ったより手触りが良いので、気になったライブラリについて調査しながら少しずつGo言語力を高めようと思う。ということで今回は標準ライブラリのcontext。 概要 なにはともあれcontext - The Go Programming Languageを読む。 Package context defines the Context type, which carries deadlines, cancellation signals, and other reques…
サークルのOBであるdyumaさんがGWにサークル内でのISUCONを企画してくれた。 運営は、dyumaさんとbgpatさんにやって頂いた、ありがとうございます！ 最近は、数学しかやっていなくて1ヶ月位コードを書いていなかったのでリハビリという目的と、世間は"Go"lden Weekらしいので、僕もGo書けるようになっておくか〜というモチベーションで参加した。 あと、忘れっぽいので、今回得た知見をどこかにぼちぼちまとめていきます。 問題 showwinさん作成の問題を解かせていただきました、ありがとうございます。 github.com 書いたコード github.com 競技中のLog 思い…
友人とisuconの練習会を実施しましたが、全然できなかったので次に活かすためのメモ インフラを担当したけど、ツールのインストトールやMySQLの操作コマンドがすぐに出てこず時間をかけてしまったので、当日の流れを自分がやったこと以外もまとめておく isuconとは isucon.net やったこと ☆が今回自分でやったこと 事前準備 環境構築 isucon9用の環境をAWSに準備 アプリケーション用(3台) ベンチマーク用(1台) ベンチマーク用(1台) isucon5予定が、データインポートに時間がかかる？らしく間に合わなかったため変更 一度最大サイズのDBを利用してインポートするようなTi…
構造体のフィールドにContextを持たせる Contextの中に参照を入れておいて任意の場所で更新する 似ている処理を匿名の構造体でまとめる 構造体のフィールドにContextを持たせる ほとんどの場合、各メソッドの引数にいちいちctxを渡すのが面倒だという理由だけで以下のようにしている印象がある。 type S struct { ctx context.Context } func (s *S) A() { // s.ctxを使う } func (s *S) B() { // s.ctxを使う } func (s *S) C() { // s.ctxを使う } ちょっとくらいタイプ数を減ら…
golang.org -benchmem メモリ関連の情報を出力。 -benchtime t 計測に使う時間をtで指定する。defaultは1s -cpuprofile=*.prof 詳細なCPUプロファイルが取れる go tool pprofで内容を見る -count テストする回数を指定 -cpu 実行するcpu数 -memprofile=*.prof 詳細なMemoryプロファイルが取れる go tool pprofで内容を見る
2021年05月06日(Thu)の呟きは 76
今日から日付変わる前に布団に入ろうと思います それで01:30までに画面見るのやめたい 最近はゲームをしています いっつもこう書いてる気がするが 大学生4年生になってしまったので研究というやつが始まってしまったんだが研究室に馴染めず地獄の研究生活を堪能している 自分は性格に問題があるんだと思うが割とどうでもいいというかどうしようもない 五月病を感じて、五月病だなあとなっている 五月病です 自分はゲームが好きだと思っていたが多分そんなことはなく、脳死でできる暇つぶしが好きなだけかもしれんという感じ League of Legendsというのを最近はよくプレイしていて、弱い 真面目な試合モードだと…
今後やりたいことを列挙してみる。
次のコマンドがどのように動作するかを調査する。 # crictl pull alpine Image is up to date for sha256:6dbb9cc54074106d46d4ccb330f2a40a682d49dda5f4844962b7dce9fe44aaec # crictl images IMAGE TAG IMAGE ID SIZE docker.io/library/alpine latest 6dbb9cc540741 2.82MB まとめ crictl <- CRI(v1alpha2) -> containerd -> docker registry crict…
jovi0608.hatenablog.com
www.yunabe.jp
qiita.com
deeeet.com
qiita.com
deeeet.com
qiita.com
engineering.mercari.com
deeeet.com
