POSIXに定められたシステムコール．OSのカーネルの支援により，ファイルやデヴァイスをあたかもメモリ領域かのように扱うことができる．一々read()等を呼ぶ必要がなく，特にサイズの大きいファイルを扱う際には効率がよくなる．
しゃべるラズパイ。
今日のネタはリンカの仕事について。低レイヤな話としてありがちだが、いかんせんバイナリを入力にバイナリを出力する処理なので直感的に理解しづらい。ってことで調べながらメモる。 リンカ（linker）とは何か リンカ とは、コンパイルされたファイル（オブジェクトファイル）同士をつないで実行可能なファイルを作るプログラムである。ほとんどの場合、ソースコードはファイルごとにコンパイルされ、ファイルごとにオブジェクトファイルが生成される。他方、プログラム中で外部ファイルで定義されたシンボル（変数名や関数名など）を参照する場合がある。たとえばライブラリ中に定義された関数を呼び出す場合などである。リンカの役割…
以下のエントリーでは、最近の MySQL の Internal Temporary Table の動作についてまとめました。 mita2db.hateblo.jp 条件によっては、領域が ディスク上に確保される場合があり、その場合はパフォーマンスに影響がある可能性があります。 今回はMySQLのステータスから Internal Temporary Table の状況を観測し、チューニングする方法をまとめます。 performance_schema.global_status / SHOW GLOBAL STATUS mysql> SELECT * FROM performance_schema…
概要 kcovは、カーネルのソースコードのカバレッジを測定するツールである。 本記事では、kcovに関係する次の二つの内容が含まれている。 kcovによるreadシステムコールを実行したときのソースコードカバレッジを確認する syzkallerによるファジングテストを実行したときのソースコードカバレッジを確認する 変更履歴 2022/5/5: 記事公開 目次 概要 変更履歴 目次 はじめに 実験環境 使用方法 kcovによるコードカバレッジの確認 syzkallerによるコードカバレッジの確認 Go実行環境のインストール buildrootによるrootfsの生成 Linux Kernelのビ…
はじめに Unityのカメラ（プレイヤー視点の映像とか）の映像をPythonで受け取る方法を調べた。方法としては以下のようなものがあった。 UnityCam, UnityCaptuerを使用する RTSPで飛ばす 共有メモリで受け渡す UnityCam, UnityCaptuerを使用する 調べた中では一番一般的な手法っぽかった。ざっくりとした使い方としては、インストールして、Unity内のカメラにUnity Camを追加すればOK。これで仮想Webカメラとして扱うことができる。 GitHub - mrayy/UnityCam: Unity3D Virtual webcam plugin, s…
Linuxのしくみを読んだの感想を書く www.amazon.co.jp 低レイヤーを勉強して行く中でとてもよい書籍だと評判なので読んだ。 結論はとてもわかり易い書籍だった。 特に図が豊富なのとCやShellで書かれたプログラムを実行してタスクの稼働状況見る部分や その他コマンドラインで使われていたコマンドもとても参考になるものが多く勉強になった。 (この書籍のおかげで最近メインの開発PCのOSをUbuntuに変更した。) 1章 カーネルにはどのような機能があるのかの簡単な説明がされいる。 これから各章ごとにその機能についてかぼっていく内容に軽く触れいている。 2章 straceコマンドを使っ…
mmapで画像ファイルの読み出し方法は以下のようにする。SharedMemoryTest.batはmmapで使っているファイル。 from PIL import Image import mmap with open("c:\\SharedMemoryTest.bat", "r+b") as f: mm = mmap.mmap(f.fileno(), 0) #ファイルの内容を読み出しmmに書き込む。 mm.seek(0) #メモリmmを頭から読み出し(seek(0))、読み出した値をmmに格納する。 mode = mm.read() ByteToImg = Image.open(io.Byte…
取敢えず、何も指定しないデータベースのパスのみだと2022/04/28 10:23:07 出走別着度数(2,445) [2022/03] >> Done! ...79.2959801秒2022/04/28 10:24:26 出走別着度数(1,276) [2022/03] >> Done! ...41.2450401秒PRAGMA TEMP_STORE = MEMORY;2022/04/28 10:29:22 出走別着度数(2,445) [2022/03] >> Done! ...80.8131174秒2022/04/28 10:30:42 出走別着度数(1,276) [2022/03] >> …
前回の仕様確認編からの続きになります。 spend-carefree.hatenablog.com今回は： ラズパイを使ってどのようにLCDモジュール(ILI9486)を駆動すればよいのか？ ArduinoのLCDシールド→ラズパイ変換基板の作成 ラズパイGPIOの性能 LCDモジュールに画像を表示させるのに利用するコマンド LCDモジュールの駆動する関数 bmp画像を表示するプログラム を見ていきたいと思います目次 LCDモジュール(ILI9486)の駆動方法 LCDモジュール ラズパイ 変換基板の作成 ラズパイと変換基板を合体 変換基板とLCDモジュールとラズパイ GPIOの性能 ラズパイ…
tile.openstreetmap.jpを日本エリア及びアジアエリアのみ配信だったのを、Planet(地球全体)を配信するように変更しました。tile.openstreetmap.jp今回はPlanetilerというソフトを使うことでPlanetの対応ができるようになりました。github.com以下のスクリプトをぶん回すだけです。 #!/usr/bin/env bash set -e java -Xmx20g \ -jar planetiler.jar \ `# Download the latest planet.osm.pbf from s3://osm-pds bucket` \ -…
本日32GBx2枚が届いたので早速PCに組込後、試してみるがメモリ不足は解消されているが速度は全く変わらずでした。OSで64GB認識されているので問題ないとは思うけど、まあ、そのうちにOSのインストールからやり直してみるかもですが、SQLiteの処理が遅いのはもう手詰まりorz 接続文字列も色々と試しましたが変化なし。ちと、出来る範囲のシェイプアップはしてみるつもりなのと、根本的にシンプルなループで回せる事と沢山の引数連れた飛び回りを減らしてみるしかないかな～っと。現在は取り込んでいるデータをステータスバーに表示してるんですが、試しに表示無しにすると８１秒が７６秒とか５秒短縮されてましたが、こ…
SQLiteの接続文字列で色々やってたんですが、一向に早くならなくて半ば諦めムードだったんですが、昨夜のフルセットアップでVisual Studioへの出力にふと目をやるとSQLite error (6154): os_win.c:46881: (8) winMapfile2(E:\CS Project\KSD\KSD_DB.db) - このコマンドを処理するにはメモリ リソースが足りません。と山の様にメッセージが出てる事に気が付く。今まではSQLiteConnectionStringBuilderの設定で色々と試してたんですがコネクションオープン後に地味に１つ１つPRAGMA叩く事に変更して…
8.0 のGA以降、Internal Temporary Table まわりは改良が重ねられきました・・・ ネットの記事では既に古い内容になってしまっているものもあり、改めて最新の挙動を確認して整理してみました*1。 なお、MySQL 8.0 の Internal Temporary Table の動作は @kentarokitagawa さんの以下の記事も詳しいです。 こちらの記事を読んでから本エントリーを読むとより理解しやすいでしょう。 gihyo.jp Internal Temporary Table MySQL は、ORDER BY や UNION を含むクエリを処理するため、内部的に…
04/04(月) 午前6時半ごろ目を覚ます。僕が寝ている間にTLが盛り上がっていた。 マジでワロタ pic.twitter.com/SfGz6KYV3C— のいみ (@noimi_kyopro) 2022年4月3日 ACするのに正当性など1mmも必要ではなくて、ただジャッジ対象のすべてのテストケースで正しい答えを出力できればよい— こたつがめ (@kotatsugame_t) 2019年9月1日 この考えは今も持っていて、つい最近も埋め込みしたという記述を日記に残していた。言い訳じみたことを言っておけば、さすがにこれは虚無すぎたので、これ以来やっていない。この時はFastest 600問から陥…
JRA-VANの掲示板でのやり取りで、14時間とかは問題外の遅さorz いや、別にスピードスターだとは思ってなかったけど、少し内容は違うかもだが、同じ事を３０分で可能な事を１４時間越えってのはねぇ。 まあ、手抜きコーディングなのは否めなくて、少し反省も含め、手を打つ事にしたのですが、これがまあ、非常に手間の掛かる作業ではありました。全テーブルへのデータ登録時の元データの処理を書き直しです。ここまでデータ提供先提供のモジュール利用して、手抜きしてたんですが、これ使わずに直にバイト配列から位置と長さ指定してデータベース登録データの指定する様に書き直す事にしました。この作業を先週夜勤明けに毎日こなし…
kazuhooku.hatenadiary.org
gigazine.net
qiita.com
blog.kazuhooku.com
funini.com
ryochack.hatenablog.com
www.ncad.co.jp
qiita.com
funini.com
