こんにちは!Dataintelligenceチームの垣内です。 毎日の売上集計や言語モデルの更新など様々な場面や用途で用いられるバッチ処理。 Microsoft Azureでバッチ処理について調べてみると、様々なサービスを使ったアーキテクチャが出てきます。 例えばAzure Functions。Azure FunctionsにはTimeTriggerという機能があり、バッチ処理を実装することができます。 しかし、この機能には実行時間の制限があるので、時間を要するデータ分析・ETL処理をするバッチ処理には不向きであるとされています。 勿論、実行したバッチ処理が予定時間内に完了しない「突き抜け」が…
PREV | LIST | NEXT 終端操作とは 終端操作を実装してみる allMatch anyMatch collect count findAny findFirst forEach max min noneMatch reduce toArray まとめ 終端操作とは 中間操作を終えた要素の集合に対して行う最終の処理のことを指し、下記のようなメソッドが用意されている。今回はInteger型のListをStreamにし、終端操作を実施して結果値を確認する。 メソッド名 概要 allMatch ストリーム内のすべての要素が条件に一致するかどうかを調べる anyMatch ストリーム内のい…
1000ドルPCでLlama3を動かしてみた。LM Studioのv0.2.20からLlama3がサポートされている。この最新バージョンにしたところ、内蔵GPUの780MでLLMを動かすことができることも分かったのでその点についても簡単にまとめておきたい。 LM Studio for Windows のGPUサポート Windows版ではAVX2対応のCPUをサポート対象としている。LM StudioのダウンロードページにはAMD ROCm対応版もプレビュー版として公開されている。AMD ROCm対応版はLinux版かと思いきや、Windows版で提供されている。 LM Studio ダウンロ…
仕事の日。 最近のちょっとした楽しみは、夜リビングに置いている観葉植物を眺めながらぼんやりすることだろうか。いや、ほんとはいろいろやりたいこととかそういうのはあるんだけど、仕事から帰ってきてご飯食べて片付けしたら思いのほか時間が取れなくて。 それで、できることといえば植物を愛でる、みたいなことしかできない。ただ、リビングは日光が当たらないところなので、蛍光灯くらいの明かりだけで大丈夫だろうかとかその辺の心配事はある。まだ移動できるトローリーに乗せているとはいえ、以前のように簡単に窓際へ動かすことは難しくなった。植物用ライト、買おうかどうしようか…なんてことを考えながら植物をひとつひとつ見ている…
PREV | LIST | NEXT 中間操作とは 中間操作を実装してみる distinct filter limit map peek skip sorted まとめ 中間操作とは 取り出した要素に対して行う操作のことを指し、下記のようなメソッドが用意されている。今回はInteger型のListに対して、それぞれの中間操作を実施し出力されるStreamの中身を確認する。その際、終端操作のforEachを用いるがそれはご愛敬ということで。 メソッド名 概要 distinct 要素の重複を除いたストリームを戻す filter 引数に指定した条件に一致する要素だけで構成されるストリームを戻す li…
RTOS(Real-time OS)である、Zephyr RTOSをPicoで動かしてみます。 www.zephyrproject.orgこちらを参考に進めます。 記載の手順と変えていて、環境は ~/develop/zephyrproject 配下に格納していきます。 docs.zephyrproject.orgMac M1での作業なので、Mac OSの手順をメモしていきます。 Homebrewと依存パッケージは入っている前提で進めます。 環境の構築 Zephyr開発のワークスペースを作成します。 $ python -V Python 3.12.3 $ python3 -m venv ~/de…
1月11日、17日、18日、24日、25日、3月24日、4月20日の合計7日間 オンラインでクトゥルフ神話TRPGを遊ばせていただきました。 遊んだシナリオはこちら。 booth.pm otoha様製作の「悪喰」です。 秘匿4PLシナリオ。 ボイスセッションで10~13時間目安とのことでしたが、何時間やっていた…? 24時間ぐらいはやっていたような……? とにかくロールプレイをたくさんさせていただきました、本当に感謝しかない。 これだけロールプレイをさせていただいたこともありかなり自分も他の方の探索者も 理解が深まってものすごく楽しかったです、舞台が中性ヨーロッパということでこの シナリオ限り…
ドラマ『アンメット ある脳外科医の日記 第2話』では、鎌田亮介(演:島村龍乃介)が左半側無視に陥ってしまいます。 実は、この左半側無視は、左右の大脳の能力差が大きく関係しているので、詳しく紹介しましょう。
こんにちは。Algomatic の宮脇(@catshun_)です。 本記事では文書検索において一部注目された BGE M3-Embedding について簡単に紹介します。 Chen+'24 - BGE M3-Embedding: Multi-Lingual, Multi-Functionality, Multi-Granularity Text Embeddings Through Self-Knowledge Distillation
この記事は、未完成です。 私は、自己愛も、承認欲求も強いので、本当は書きかけの文章なんて世に出したくありません。本当は、完璧を見てほしい。 それでも、今日という日にこの文章のカケラでも打ち明けなければ、もうここに認めた気持ちを吐き出す機会なんてないと確信したので、これを放ちます。 取り止めのない言葉の中に、未完成ゆえ拙さ残る論理の中に、絡まった私の気持ちを見つけて、ほぐして欲しい、です。お願いします。 人生のローディングが終わらない。 おかしい。 どうしても、大学院という次のチャプターが読み込めないんだ。 そんな状態が、もう一年も続いている。 このカセット、もう壊れたみたい。 かつて留学に憧れ…
American Truck Simulatorのソフトウェアトークゲーム実況動画で釈明しましたが、4月に入り非常に忙しくなりました。 www.nicovideo.jpブログ記事では触れていないため端的に説明すると新人・異動となった人々の対応のため、数年振りは言い過ぎですが珍しく毎日オフィスに通っています。 通勤で超満員の電車で「乗客.zip」を演じるだけで疲労困憊と言うのに、新人・異動組を一日も早く使える『弾』にするべく*1即席の「パソコンの大先生」を演じたり、本来抱えている自分の業務を遂行したりと忙しかったのが原因なんでしょうか。やってしまいましたわ・・・。 今回衝動買いしたNUCについて…
NPUでLLM(opt-1.3b)のデモプロを動かすことができたので、今回はLlama2-7Bにチャレンジしてみた。結果的に動かすことはできたが、期待していた結果とは少し違っていた。導入手順とその中で気付いたことをここにまとめておきたい。 Copilotに頼んだらDALL E3が描いてくれました Step1 リポジトリのダウンロードと仮想環境の作成 こちらのページを見ながら環境を作成する。AnacondaからCMDプロンプトを起動して以下を実行する。 git clone https://github.com/amd/RyzenAI-SW.git cd RyzenAI-SW\example\tr…
来月の公民館祭り用に自作しようと思ったけど、ちょうど良さげなものを見つけた。 ただ、ロクハンのコントローラー専用って書いてある。 なのに分解して設定が変えられる仕様 こう言う怪しげな文句にはつい釣られてしまう。 センサー込みの一式 説明書によると上級者向けとか言って,プリント面を削る組み合わせによって加減速度合いと停止時間が変えられるという怪しげな設計 普通は分解するなって書いてあるのに(笑) しかし、いざ分解してみると基板が本体のミゾにしっかり接着してあり、本体から外せません🤪 ゴム系接着剤のようで,少しづつ爪楊枝を回してはぎ取っていって,何とか基板を外せました。 さて、ロクハンコントローラ…
海に浮いていると海と共にたゆんたゆんと揺れて、自分の中にも海があると感じます🌊 それを陸ではアートマイムの身体になることで感じることができます。 コチコチ固まった世界が実は海のようにたゆたゆしつつ流れつつ…。そうして繋がっている。 骨の曲線を観ていると流れに添うようにできていると感じとるようになってきました。特に凹んでいるところは筋肉がぺっとりと付いていると思いがちですが、水が流れるような感じで尚のこと凹ませたいです。 🦴🦴🦴ほねやすめやさん5月の活動予定です🐢 🌿5月12,19日(日)13時30分〜15時30分【目黒】♪感探♪ぴらてぃす❗ ヒトの骨格を作り上げる骨について学び、実際に動かして…
ドライバー一本で治りました 先日、入手したもののシャッターが切れなかったRICOHのXR-S。 ドライバー一本で治りました(?) blog.kobephotomic.work blog.kobephotomic.work ご自慢の太陽電池はもちろんダメなままなんですが、聞きかじった情報を元にして、カメラの底蓋を外して引っかかったゴミを落としてみました。 一説によると、RicohのXR-7系は内部の部品に一部経年劣化でボロボロになるパーツがあるようで、劣化したパーツの破片がカメラの中を移動してギアに噛んでしまって動かなくなるということでした。 それっぽいレバーを動かしてみました 手煮れたのは元々…
AIAIAIAIAIAIAIAIAI.入試問題でもニュースでも知り合いと情報交換してもAIAIAIAIAIAIAIAIAIAIといえば映画「マトリックス」を思い出してしまうわけですが、主人公が最強の格闘技をインストールして最強になる。鉄腕アトム、ドラえもん、1983、2021年宇宙の旅。まとりっくすみたいな世界が訪れるような雰囲気はあって、勉強っぽいこともマトリックスみたいにインストールして誰でも出来るようになる。ここで思い出してしまうのが、タケコプターの話。空想科学実験によると実際にタケコプターをつけて空を飛ぼうとすると、スポンと皮とタケコプターだけが飛んでいってしまう。これまではスポーツに…