moe.

さかりょうです。 先日書いた記事↓ Amazonの「Amazon配送」がどうにも気が進まなくて、ヤマトor日本郵便での配送されることを願って、注文の際に「置き配は利用しない」を選んで最短で日時指定したんですが、残念なことに「Amazon配送」で出荷された挙句、配達場所を指定するように通知が来たので、あえて「玄関先」への置き配を指定しました。 この続きなんですが、時間指定より少し早く玄関のチャイムが鳴りました。 誰だろう？と思ったら、Amazon配送の方でした。 時間指定については数分早いだけなのでいいとして、玄関先への置き配を指定したのに、手渡しだったのが謎。 もしかして、先日Amazonにク…

先日「Llama-3-70Bを刈り込み（Pruning）で42Bに縮めたモデルが登場」というRedditの投稿が話題になっていました。 投稿者はおなじみのkindacognizant（kalomaze）さんですが、モデル作成者は別の方のようです。モデルのHuggFaceのRepoはこちら。 huggingface.co このモデルを実際に触ってみましたが、InstructモデルではなくBaseモデルを刈り込んだものなので正直なところ良し悪しはよくわかりませんでした。 投稿によれば、Pruned-Llama3のMMLUスコアは76-77（4bitでテスト）で、元の79から若干低下しているものの、…

前日 ついにきましたね… 3月は全然オタクできなくて、4月も仕事に追われ、全く実感のないまま当日に 前日も疲れのせいか体調が悪くて、前乗りの新幹線でビール1本しか飲めなかった(飲むなよ) 推しメンが好きなゆずの果汁が入ったクラフトビール(大塚七海さんが好きなのはあくまでゆずの方です) 本間日陽卒業というNGTにとって大きな変化を迎える1日を前に、まさに大きく変わっていく途中の新潟駅に降り立つのは感慨深い これまで幾度となく使った階段 あのVlogのアナザースカイテロップ(なんやねん)が見られなくなるのか… スプコン(昼) 本間日陽さんの卒業を祝う桜満開 友人たちと合流して1曲目予想をするなど。…

一条真也です。『亜宗教』中村圭志著（インターナショナル新書）を読みました。「オカルト、スピリチュアル、疑似科学から陰謀論まで」というサブタイトルがついています。著者は１９５８年、北海道小樽市生まれ。東京大学大学院人文社会系研究科博士課程満期退学。宗教学者・編集者・翻訳家。昭和女子大学非常勤講師。ブログ『教養として読む世界の経典』、ブログ『聖書、コーラン、仏典』で紹介した本をはじめ著書多数。 本書の帯 本書の帯には、「なぜ、信じるのか？」という言葉を中心として、「妖精写真」「動物磁気」「エスパー」「反進化論」「臨死体験」「シンクロニシティ」「千里眼」「Ｑアノン」「ニューエイジ」「ＵＦＯ」「ポスト…

久々にライブに行ってきました。 会場は西新宿のTOGI BAR 16年の9月4日以来の来場ということで7年半ぶりですねw 良くここがまだ営業できてるなという気がしますがアイドルのライブを頻繁にやってるんですかね？ ちなみにドリチケが7年半前と変わってませんでしたw ってかここはノンシュガー的にもめっちゃ想い出の会場なんですよね。 ただ音があまり良くないような気がしましたね。 益子さんと大原さんに会うのはちょうど2年ぶりでした。 本人たちには「山中湖以来じゃない？」って言ったけどその後にも現場に行ってました（全然記憶になかったｗ） ちなみに今更ですがこの二人はREBIRTHという福岡のグループで…

おはこんばんちは、あぶさんです。 今回はレビューではなく、オーディオの音質評価に使用しているプレイリストの中身をご紹介しましょう。 それぞれの楽曲について、どこに注目してどのように聞こえればいいのかを解説します。

川瀬 もえ（かわせ もえ） 生年月日：1993年12月30日 身長：167cm スリーサイズ：B87 W60 H84 カップサイズ：Fカップ X（旧Twitter） Instagram 川瀬もえ キレイなお姉さんが、好きです。 週刊ポストデジタル写真集作者:川瀬もえ小学館Amazon川瀬もえ/どんな時も川瀬もえ [DVD]川瀬もえAmazon川瀬もえ サーキットの極上天使 週刊現代デジタル写真集作者:川瀬もえ講談社Amazon川瀬もえ もえ萌え 週刊現代デジタル写真集作者:川瀬もえ講談社Amazon川瀬もえ/VenusFilm Vol.10 [DVD]川瀬もえAmazon川瀬もえ「フェロモン」…

こんにちは。 シーコングの新井です。 早速ですが、本日は新しい動画に関してのお知らせです。 すでにサーフィンを始めてしばらくたっている方には関係ない内容かもしれませんが、これからサーフィンを始めたい。 もしくはつい最近道具をそろえたけど、実は始め方がわからない。 という方にはぜひご覧になっていただきたい動画です。 こんな感じの内容です。 ＃１ワックスアップ編 ＃２ワックスオフ編 ＃３フィンの取り付け方（シングルフィン）編 ＃４フィンの取り付け方（2＋1）編 ＃５リーシュコード編 ＃６パドル - テイクオフ - ターン - トリム 編 ワックスの塗り方から、フィンの付け方、パドルの仕方や、ターン…

「Merggoo」というLLMマージ用の新しいライブラリができたそうで、開発者の方がRedditでもPRポストを上げておられます。 もしかするとMegekitに代わるものになるのかもしれません。MoEのルーティングの学習や、LoRA Adapterの混合など。 面白そうなので後で試せればと思いますが、概要だけ先に見ておこうと思います。以下、開発者ブログの和訳です。 Mergoo: 効率的にマージし、微調整する (MoE, Mixture of Adapters) huggingface.co 私たちは最近、複数の LLM エキスパートを簡単に統合し、統合された LLM を効率的にトレーニングす…

前回の続きです。次はChat Vector処理によってどれくらい日本語チャット機能が改善しているのかを具体的にみてみます。 下記の記事で、Chat Vectorを使わなくても単純に2モデルをMoEマージするだけで一定の性能向上が観察できることは確認しています。 sc-bakushu.hatenablog.com では、Chat Vectorを加えることでモデルのチャット性能はどのように影響を受けるののでしょうか。 単体の7BモデルにおけるChat Vectorの効果 まず「LightChatAssistant 2x7B」の再現過程で得られた「ChatNTQ 7BにMistral-7B-v0.2…

ジョン・ヘンリーの教訓 19世紀の都市伝説に「ジョン・ヘンリー」という人物がいます[１]。 彼は屈強な肉体労働者で、ハンマーを振るって岩に穴を開ける達人でした。ところが蒸気機関で動くドリルの登場により、彼は失業の危機に瀕します。そこで彼は、人間は機械よりも優れていることを示すために、穴開け競争で蒸気ドリルに戦いを挑んだというのです。 伝説によれば、ジョン・ヘンリーは（驚くべきことに）僅差で勝利を収めたとされています。しかし、あまりにも肉体を酷使したために、勝利の直後にその場で倒れて帰らぬ人になりました。周囲の野次馬たちは言いました。「彼は人間らしく死んだ」と。 この逸話から得られる教訓は何でし…