【Binary Large OBject】 データベースで用いられる型の一つで、主に、画像や音声などの大規模なバイナリデータを格納するために用いられる。ブロブ。 ブログ(blog)ではない。
Snowflakeは、AWSやGoogle Cloud、Microsoft Azureなどのクラウドプラットフォーム上でホストされるDWHサービスです。 ストレージとコンピュートを分離したマルチクラスタ・共有データアーキテクチャや、データの一元管理が可能な高い拡張性と柔軟性を備えるSnowflakeですが、今回はSnowflakeに対してAzure Data Factoryを使用してデータを連携する方法をご紹介します。 実施概要 事前準備 実施手順 Snowflakeリンクサービスの作成 データセットの作成 パイプラインの作成 検証と発行 パイプラインの実行と確認 おわりに 実施概要 本記事で…
ドキュメントには特段記載がないと思っていたところ、現在のところサポートされないシナリオでした。 AzCopy v10 を使用して Azure ストレージ アカウント間で BLOB をコピーする | Microsoft Learn 移行元アカウントと移行先アカウントは、同じ Azure AD テナントに属している必要があります。 一応、行うとどんなエラーとなるかメモ。 事前準備 -テナントAでストレージ アカウントを作成 -テナントBでストレージアカウントを作成 -ダミーファイル (1MB) を複数作成し、テナントAのストレージアカウントにアップロード for /l %n in (1,1,300…
北海道「人生向上委員会」というblogとYouTubeチャンネルを運営している酒井隆行です。毎朝、今日1日のテーマとなる「言葉」を紹介する「今日の一言」を毎朝ご紹介しています。気になる言葉のご意見ご感想もお聞かせ下さい。また、おすすめの「言葉」も募集していますので、コメントの書き込みかメールフォームにて教えて下さい。「今日の一言」でお名前（ペンネーム）とSNS・blogのURLと共にご紹介します。 https://ssl.form-mailer.jp/fms/2978554e736921 www.youtube.com 今日の一言 仕事というのは、 一生懸命やらないと かえって疲れる。 www…
Gitのファイル管理の続き 前回の記事でGitは作業ディレクトリ内のGit追跡fileを、staging及びcommit履歴に"blob"と呼ばれる圧縮独自フォーマットのfileで全て保存していることを説明した。 programmingforever.hatenablog.com またその各file（blob）はsnapshot、つまり以前のfileとの変更点の差分保存ではなく、各fileの内容のまま（blobに形を変えた上で）全て保存していると説明した。 しかしそうなると、例えば1万行あるfileのたった１行だけを修正しても、非常によく似た大きなfile（blob）が2つ保存されてしまう。G…
どうも！LSSです！！ ちょっと手軽にHTMLやCSS、JavaScriptにSVGなどのテストをしたい時。 はてなブログにログインできる環境なら、下書きで試すのも手ですが、そうじゃない環境下でただしPCはある、という時。（かなり限定的ですね^^;） メモ帳などのテキストエディタを開き、最小限のHTML構成である、 <html><head></head><body></body></html> …という内容をささっと手打ちで打ち込み、保存してから、拡張子を「.html」に変更する、なんて事をしたりします。 ６つ打って拡張子を変更するだけなので、ささっと出来るのは出来るんですが、なんとなくボタン…
→ // どうも！LSSです！！ 今回は、使いどころのよく分からないツールを作ってみましたｗ 使い方 例えば… コード あとがき 使い方 テキストファイルの中の特定の文字を、違う文字に変換するツールです。 まず「変換元の文字列」「変換後の文字列」を入力します。 次に、「ファイルを選択」ボタンを押し、お手元の端末内にある対象のテキストファイル（HTMLファイルやSVGファイルやCSVファイルも選択可能です）を選ぶと、即座にそのテキストファイル内に「変換元の文字列」と同じものがあったら全て「変換後の文字列」の内容に書き換えられます！ なお、出力後のファイル名は、元のファイル名の末尾に「_r」が付与…
どうも！LSSです！！ JavaScriptで出来る事、を色々調べていくうちに「これは凄い！」とびっくりするようなものを見つけました（結構 前に、ですがｗ） ちゃんと自分で咀嚼し、飲み込んでから、解説記事など書きたいと思っていますが、いったん「JavaScriptはこんな事もできる！！」というのをシェアしたいと思います^^ ダウンロードリンク これだけでは何が凄いのか分からないですよね^^; 何が凄いか、って 汎用性 ダウンロードリンク // \n\n\n\n'; blob = new Blob([txt], { "type" : "text/plain" }); if (window.nav…
RailsとVuejsの組み合わせでファイルアップロードをどうやってやればいいか悩んでいたが、ActiveStorageのダイレクトアップロード機能が簡単に使えたのでメモしておく。 class Foobar < ApplicationRecord has_one_attached :report_file end rails側のモデルは上記のとおりとする。 <template> <div> <b-field label="ファイルアップロード"> <input type="file" @change="handleFileUpload" ref="fileInput" /> </b-field…
フランスとレバノン両国の国籍を持つ犯罪嫌疑者に関する引き渡し条約とはについて フランスとレバノン両国の国籍を持つ犯罪嫌疑者に関する引き渡し条約とは 引き渡し条約は、国際的な法的枠組みの一部として、特定の犯罪を犯した者を他国に引き渡すための合意を定めたものです。フランスとレバノンの間での引き渡し条約に関する議論は、特に二重国籍者や逃亡犯罪者に関連して重要な問題となっています。特に、カルロス・ゴーン氏の事例は、このテーマにおける注目の焦点です。彼はフランスとレバノンの両国の市民権を持つため、引き渡しの法的な扱いが複雑になっています。 この条約を一時的に成立させようとしています。 https://w…
はじめに センチュリーマリーナ、すっげ〜〜！！ nikkieです SphinxでビルドしたHTMLにある外部リンクをブラウザの新しいタブで開くようにする拡張 sphinx-new-tab-link を自作しています。 直近の機能追加について取り上げます 目次 はじめに 目次 sphinx-new-tab-link v0.6.0 sphinx-new-tab-link v0.6.1 終わりに sphinx-new-tab-link v0.6.0 8月のPyCon mini 静岡の発表準備をしていて、機能追加のアイデアが浮かびました。 以下のスライドにあるアイコン付きのリンクです（赤く囲った🎥em…
MicrosoftからGPT-4o Realtime API for Audioが発表されました。 今回は、Azure AI SearchとGPT-4o Realtime API for Audioを連携し、音声によるRAG検索が行えるのかどうかを検証します。 検証結果 環境 作業概要 作業手順 BLOBストレージに資料を配置 Azure AI Searchにベクトルインデックスを作成 git cloneでリポジトリを取得 環境変数を設定 Webアプリを実行 まとめ 検証結果 下記は検証結果です。 GPT-4o Realtime API for Audioを使用すれば、下記動画のような音声によ…
デジタルペンテスト部の中嶋です。 私事ですが、9月13日から9月15日にかけて関西（主に大阪）へ旅行に行ってきました。 ただ、何か他に予定があったような気がするなと思ってずっとモヤモヤしていたのですが、その正体はこれでした。 旅行中にCTFに参加することが確定してしまいました*1。 AlpacaHackの概要を説明すると、短期間で個人参加のCTFが定期的に開催されるプラットフォームです。 今回はその第3回目の「AlpacaHack Round 3 (Crypto)」でCryptoのジャンルの問題が4問出題されました。 私はparabola0149として今回のCTFに参加しました。 この記事では…
はじめに ぴょんさん、おめでとうございます〜 いや〜よかった、無事産まれてよかった〜 あ！ nikkieです 今回はSphinxネタ、Sphinxが用意している型ヒント用の型についてです。 目次 はじめに 目次 Sphinx拡張とは setup()関数を持つPythonモジュール setup()関数は辞書を返す ExtensionMetadata：setup()関数の返り値の型 終わりに Sphinx拡張とは setup()関数を持つPythonモジュール ドキュメンテーションツール Sphinxは、拡張できます1。 Sphinx拡張とは、setup()という関数を持つPythonモジュール（…
Railsアプリケーションでアプリケーションの規模を調べる時、rails statsコマンドがよく使われます。 デフォルトのrails statsコマンドだとデフォルトとして設定されているディレクトリのみしかメソッド数やコード数を計算してくれません。 例えば、Rails Engineを本体のアプリケーションにマウントしている場合、Rails Engineのコードはrails statsコマンドの対象外になります。 このように、Rails側でデフォルトで定義されていないディレクトリも統計情報に含めたい場合、どのように拡張すればいいのか調べたので、備忘録的にまとめておきます。 基本のrails s…
ジェネラティブエージェンツの大嶋です。 もくもくDifyで「Difyソースコードリーディング #6 - DSLのYAMLファイルの扱いを読み解く」という勉強会を開催しました。 dify-mokumoku.connpass.com アーカイブ動画はこちらです。 youtube.com Difyのソースコードは以下です。 github.com 今回も 戸塚さん と一緒に話しながらコードを読んでいきました！ 今回のポイント DifyにはアプリをDSLと呼ばれるYAMLファイルでexport・importする機能があります。 参考：https://docs.dify.ai/ja-jp/guides/a…
はじめに 今回はYetAnotherHttpHandlerを用いてUnityでHTTP/2を扱う方法を紹介したいと思います。 はじめに 背景 概要 環境 インストール方法 使い方 さいごに 背景 まず.NETが提供するHttpClientですが、.NET Core3.0以降であればHTTP/2に対応しています。 HttpClient クラス (System.Net.Http) | Microsoft Learn var client = new HttpClient { BaseAddress = new Uri("https://localhost:5001"), DefaultReques…
以前iPadだけでアプリを作るというエントリを書いていました。このエントリはその続編です。 kouki.hatenadiary.com 以前のエントリでは、iPadだけで作ったアプリをストアに出すという目標は達成できていました。次はそれなりに実用的なアプリをiPadメインで作ってみたいなと思っていました。 ということで作ったのが、PhotoGuesserです！ PhotoGuesserKouki Saitoエンターテインメント無料apps.apple.com PhotoGuesserの紹介 アプリをインストールして使ってもらうのがわかりやすいと思います。GeoGuessrにインスパイアされて作…
この前のOLED表示は、ケンケンさんのプログラムをまるごとコピーしただけでしたので、今回も、せめて丸い図形を四角く変更してみました https://github.com/KenKenMkIISR/t あ、プログラムがMARUのままだ… est_ntsc_machikania/blob/master/documents/MachiKania-RP2040-Video.pdf
この大会は2024/9/28 5:00(JST)～2024/9/30 5:00(JST)に開催されました。 今回もチームで参戦。結果は1289点で648チーム中85位でした。 自分で解けた問題をWriteupとして書いておきます。 sanity (misc) Discordに入り、#sanityチャネルのメッセージを見ると、フラグが書いてあった。 bctf{rh0mbu5_d15c0rd_04u7h_15_c00l} runway0 (beginner-pwn) OSコマンドインジェクションができる。 $ nc challs.pwnoh.io 13400 Give me a message t…
はじめに 星梨花ちゃんパパから全幅の信頼を寄せられている nikkieです。 PyCon JP 2024のインプットを、自分の理解を深めるために記事にしていきます。 目次 はじめに 目次 ミニトーク「PythonのHTTPクライアントツール 徹底比較」 比較表 つぶやきコーナー httpxに言及した過去記事 終わりに ミニトーク「PythonのHTTPクライアントツール 徹底比較」 15分のミニトーク https://2024.pycon.jp/ja/talk/MD99N8 今日から #pyconjp2024 です！・Recustomerのスポンサーブース・27日 16:40から登壇https…
プラットフォームグループでインフラエンジニアをしている @laughk です。 今回は、当社の ECS Scheduled Task の管理リポジトリを解体し、各アプリケーションのリポジトリへ移管した話を紹介します。 背景 なぜ一元管理しているリポジトリを解体したのか ECS関連のデプロイ・リソースの管理状況が変わった ecschedule の運用の安定し、プロダクトのリポジトリから独立している状況が煩わしくなった 解体から移管の概要 解体から移管の際に意識・工夫したこと git log は git filter-repo を使って保持した状態で移管 コードだけ移管するのではなく CI/CD …
こんにちは。クラウド基盤本部の野島です。 今年のインターンシップでは、プラットフォーム(自社基盤)コースとして2名の方を受け入れ、それぞれ異なる課題をやってもらいました。 そのうちの一つは Pingora に関する課題で、覚道さんに取り組んでいただきました。（もう一つの課題は nginx のキャッシュの性能に関するもので、これについては昨日の記事をご参照ください） Pingora は Cloudflare が開発したロードバランサのためのフレームワークであり、Rust を使って好きなロジックを組み込んだロードバランサを書くことができます。 今回のインターンでは Pingora を使って TLS…
numb86-tech.hatenablog.com
docs.google.com
www.redblobgames.com
var.blog.jp
bn.dodgson.org
blog.agektmr.com
cydn.cybozu.co.jp
www.redblobgames.com
www.redblobgames.com
