モデル開発

はじめに こんにちは。レバレジーズデータ戦略室、データサイエンスグループの徳田です。 早速ですが、機械学習エンジニアのみなさん、 ローカルで開発したモデルをSageMakerエンドポイントにデプロイしようとすると、予期せぬエラーに遭遇して時間を溶かしてしまうこと、ありますよね？ 今回は、筆者が実際に経験したSageMakerエンドポイント構築における苦悩と、その解決策についてお話します。 今回のモデル開発におけるアーキテクチャ図 ローカル環境でTensorFlowを使ってまずモデルの試行錯誤および開発を行いました。その後にSageMakerの学習パイプラインを開発し、そこで学習させたモデルを、…

宇宙開発ロードマップ、メガストラクチャーを成功させる方法案、公共事業の方向性？絵に描いた餅、獲らぬ狸の皮算用→百聞は一見にしかず、論より証拠→下駄は履いてみないと分からない。自力で未来を掴む。オカルトやファンタジーは控えめ。 ■2030年前後経済・情勢、刑務所事情、精神科病棟事情、高齢者施設事情、酒事情、性風俗事情、ギャンブル事情、トイ事情、ホビー事情、アート事情、アカデミック事情。宇宙開発競争がやや鈍化。 二人の初代トイモデル姫。二人の初代月面姫。トイモデルスタッフ・インフラ。月面スタッフ・インフラ。設計風景。開発風景。生産風景。月面用のトイモデルが世界的流行。月面用モビリティのトイモデル。…

この記事の結論は、ペルテックのクーポンコードはLINEの友達登録で３％ということ。 こちらから→LINEお友達登録 を行い、 以下のページより限定クーポンの適用をすることができます。 アシスト自転車【PELTECH】クーポン適用ページ TDN-212Lが都市生活者向けの優れたコストパフォーマンスを持つ折りたたみ電動アシスト自転車だということです。 81,980円という手頃な価格で、日本製の高品質モーターとバッテリー、折りたたみ機能、充実した標準装備を提供しています。 20インチの小径タイヤと最大42kmの走行距離で、通勤や買い物に最適な一台です。 初めて電動アシスト自転車を購入する方や、収納ス…

日本の生成AI新興「サカナAI」の挑戦と夢 サカナAI、驚異の資金調達を果たす 最近、サカナAIがエヌビディアを含む一流の投資家から合計1億ドル（約145億円）超を調達したという驚きのニュースが発表されました！これは、日本の人工知能（AI）スタートアップにとって特筆すべき出来事であり、設立からわずか1年でこのような大きな資金を集めるとは、本当に感慨深いものがあります。サカナAIは、米グーグル出身の研究者たちによって設立され、その名の通り、魚のように小型のAIモデルが連携して働く新たな可能性を模索中です。 業界のリーダーたちが集結 サカナAIの資金調達ラウンドでは、NEAやKhosla Vent…

AI関係の記事 技術的な記事はZennに書いているのですが、こちらでもちょっと紹介します。 Large Language Mario LLMでマリオをするというチャレンジです。ChatGPTでマリオを操作しています。 詳細は以下記事にまとめていますので、チャレンジしてみたい人は是非 頑張れば1-1はクリアできるんじゃないかと思うのですが、まだ（多分）クリアした人はいないようです。 ソースコードをリポジトリ丸ごとLLMに読んでもらう方法 ソースコードをLLMで丸ごと読み込むと便利ですよという記事。ちょっとした工夫で、リポジトリ全体をLLMに読ませることができます。もうちょっと工夫すると、より便利…

私が、アマダのソフト工房10階のアムテック本体で、NewAP構想の末に提起されたIOTAモデル(Inoich-Ogiso-Tanabe-Aokiモデル)で、超プロトアプリを実装するように命令を受けて、ディスプレイリストについて検討していた時に、元アマダのC&C事業部のCAMの専門家?の田辺和生さんが言った言葉が、「NewAP(IOTAモデル)はよく検討したんだ！早く実装しろ！」でした。 私はIOTAモデルについて、ディスプレイリストの実装という立場で見たところ、何をどう取り扱って良いか訳が分からないモデルで、捉えどころがなかったので、とても四苦八苦していました。 田辺さんは、IOTAモデルにつ…

近年、AI（人工知能）に関するさまざまなツールやAPI（Application Programming Interface）が提供されており、企業や個人でAIを開発するケースもあります。一からAIを構築することは難しいですが、ツールやAPIを活用すれば、専門的なスキルがなくてもAIの作成が可能です。 この記事では、AIの基本知識から作成する手順、AIを一から作るために必要な知識などを解説します。ぜひ参考にしてください。 おすすめパソコンはこちら ※ 製品の情報や価格は2024年9月2日時点の情報となります。 セール・キャンペーン一覧はこちら 作り方を知る前に押さえておきたい「AI（人工知能）」…

書籍「深層ニューラルネットワークの高速化」を読んだので内容をまとめる。以下の内容は、ほとんどClaude3.5 Sonnetを使用して作成している。目次 第1章 はじめに 1.1 高速化の意義 1.2 高速化の理論的背景 1.3 用語の整理 第2章 高速化手法の概要 2.1 量子化と低精度化 2.2 枝刈り 2.3 蒸留 2.4 低ランク近似 2.5 高速なアーキテクチャ 2.6 ハードウェアの改善 2.7 複数の技法の組み合わせ 2.8 その他の技法 第3章 量子化と低精度化 3.1 16ビット浮動小数点数 3.2 その他の低精度浮動小数点数フォーマット 3.3 自動混合精度計算 3.4 整…

Posted by Atsushi Kojima and Wang Yingjie (conducted the work during his internship), Researchers, Money Forward Lab. はじめに 近年、GPT-4などの大規模言語モデル（LLM）が注目を集めていますが、これらのモデルは必ずしも日本の金融分野に特化して学習されているわけではありません。 この課題に取り組むため、私たちは日本の金融・会計分野にアラインメントされたLLMの開発に取り組んでいます。 本ブログでは、その開発プロセスと成果について紹介します。 モデル開発のアプローチ モデル学…

はじめまして、CADDiの図面解析チームで機械学習エンジニアをしている藤田です。 CADDiでは、CADDi Drawerという図面データ活用クラウドサービスを提供しています。私の所属するチームでは、Drawer上にある図面画像から様々な情報を抽出する、機械学習モデルを作ることに取り組んでいます。その取り組みの1つとして、Multimodal Large Language Model (MLLM)というモデルを図面画像に適用し図面解析をするということを、PoCとして実施しています。今回、MLLMの取り組みについて紹介します。 Multimodal Large Language Modelとは？…

どんな本か システム設計の本として有名な System Design Interview の著者であるAlex Xu 氏が運営するByteByteGoが監修した、機械学習システム設計面接について書かれた本です。 日本語訳の本ではシステム設計の面接試験が有名かと思います。 bytebytego.com 本書は10個の機械学習システム設計の事例を取り上げ、各種手法などのトレードオフや、設計するシステム特有の議論ポイントをまとめています。 システム設計とはありますが具体的なインフラサービス・ツール名は出てこず、機械学習システムを構成する抽象化された要素を紹介しています。 実際にシステムの実装方法を学…

2024年6月28日、ファインディ株式会社が主催するイベント「開発生産性Conference 2024」が、開催されました。本記事では、FastLabel株式会社とGMOペパボ株式会社によるセッション「急成長スタートアップと15年以上続くサービスで事業成長を支える技術的負債への向き合い方」の内容をお届けします。 本セッションには、FastLabel株式会社からエンジニアリングマネージャーの風見 亮さん、リードエンジニアの爲西 貴大さん、GMOペパボ株式会社から技術責任者の高橋 健一さんが登壇。ファインディ株式会社 プロダクト開発部SREの下司 宜治がモデレーターを務め、パネルディスカッション形…