深層学習

こんにちは、AnyTechの木村と申します。 AnyTechにて、機械学習エンジニアやAIエンジニアといった役割にて、R&Dに日々従事しております。 この記事は、近年流行しているImageNetモデルを応用した異常検知手法について、リサーチをする機会がありましたので、小職の備忘も兼ねまして、その解説をさせて頂くものです。 目次 目次 シリーズ はじめに 先ずはザックリ、アルゴリズム概要 次にじっくり、アルゴリズム詳細 おわりに シリーズ 第1回：導入と転移学習 第2回：DN2（Deep Nearest Neighbor Anomaly Detection） 第3回：SPADE（Sub-Imag…

こんにちは、AnyTechの木村と申します。 AnyTechにて、機械学習エンジニアやAIエンジニアといった役割にて、R&Dに日々従事しております。 この記事は、近年流行しているImageNetモデルを応用した異常検知手法について、リサーチをする機会がありましたので、小職の備忘も兼ねまして、その解説をさせて頂くものです。 目次 目次 シリーズ はじめに 先ずはザックリ、アルゴリズム概要 次にじっくり、アルゴリズム詳細 おわりに シリーズ 第1回：導入と転移学習 第2回：DN2（Deep Nearest Neighbor Anomaly Detection） ◀ 今回ここ 第3回：SPADE（S…

こんにちは、AnyTechの木村と申します。 AnyTechにて、機械学習エンジニアやAIエンジニアといった役割にて、R&Dに日々従事しております。 この記事は、近年流行しているImageNetモデルを応用した異常検知手法について、リサーチをする機会がありましたので、小職の備忘も兼ねまして、その解説をさせて頂くものです。 目次 目次 シリーズ はじめに 導入 転移学習なんぞや おわりに シリーズ 第1回：導入と転移学習 ◀ 今回ここ 第2回：DN2（Deep Nearest Neighbor Anomaly Detection） 第3回：SPADE（Sub-Image Anomaly Dete…

kaggleを始めてから3年半、ようやく1つの目標であったGMになることが出来ました。前回の記事で最初の金メダルを取るところまでは書いたので、その続きとして金メダルを取ったコンペを中心に機械学習人生を振り返っていきたいと思います。 転職：2020年8月 RSNA STR Pulmonary Embolism Detection：2020年10月 SIIM FISABIO RSNA COVID-19 Detection：2021年5月 Happywhale - Whale and Dolphin Identification：2022年2月 (番外編) Kaggle Days World Cha…

環境 Jupyter Lab / Local 新たに挑戦すること 表題のテーマについて自力でDay7で上位5.6%(Bronze Medal相当)に達したのですが、そこから上へいく、0.8以上を目指すことへのハードルがとてつもなく高かったので、自力から写経に戻ることにしました。 お手本は、こちら"KaggleチュートリアルTitanicで上位2%以内に入るノウハウ"です。 学んだこと One Hot Encoding(ワンホットエンコーディング) # ------------- 前処理 --------------- # 推定に使用する項目を指定 df = df[['Survived','Pc…

こんにちは。 リサーチャーの勝又です。 私はレトリバで自然言語処理、とくに要約や文法誤り訂正に関する研究の最新動向の調査・キャッチアップなどを行っております。 今回の記事では、特定のドメインのテキストから同義語候補を取り出そうと色々試みた結果をまとめました。

環境 Jupyter Lab / Local 今日やったこと Day5でBest Scoreを更新して上位7.4%に入ったことに更に気をよくしてDay6は色々とやってみたが停滞。Day7では最初に現状のデータを、今まで生成してきた特徴量とともに眺めてみた。 Day5でのBest Scoreを叩き出したモデルの特徴量は'Sex', 'Pclass', 'TitleId', 'IsInfant'の4つ。性別、階級、家族的な要素が含まれたものになっていることに気づく。そして’Fare'については特徴量化していない。’Fare'も’Survived'と相関係数はまあまあ高いもののこれもモデルに入れると…

こんにちは。NRIデジタル データサイエンスの柴です。2022年11月~2023年1月の期間でNishikaで開催されていた「睡眠段階の判定 〜”睡眠の深さを判別しよう”〜」コンペ（以下、睡眠コンペ）に、同じくNRIデジタル データサイエンスの滝口さんと松崎さんと柴の計3名のチームで参加し、参加者636人中1位で優勝の結果を残すことができました。この記事では、睡眠コンペの概要と自チームの用いた解法を紹介していきたいと思います。 competition.nishika.com コンペ概要 PSG PSGとは、「ポリソムノグラフィー（Polysomnography）」の略称で、睡眠研究で一般的に使…

ieeexplore.ieee.org IEEE Explorerにて、上記の論文が公開されていた。最近の命令拡張の動向についてあまりよく知らなかったので、せっかくなので読んでみることにした。 本論文のポイント：RISC-V ISA拡張に関する既存の研究について包括的なサーベイを提供する RISC-Vのアプリケーションシナリオを紹介し、ISA拡張の要求事項を分析する RISC-V ISA拡張の公式仕様の進捗とRISC-V ISA拡張に関する最近の研究を調査する RISC-V ISA拡張に関する今後の研究の可能性について言及する RISC-Vは組み込みプロセッサの分野では成熟しつつあるが、クラウ…

bing Image Creatorで「Deep Learning for GENERAL」というプロンプトから生成した画像 はじめに 最近僕のTwitterのタイムラインでは、毎日のようにAIの話題が表示されています。 これまでAIについて興味はあったものの、なんとなく後回しにしてきたトピックでしたが、昨今のAI関連の動向には目を見張るものがあり、基本的な内容について学ぶ必要があると思い、AI関連の基礎資格としてＧ検定を受験しました。 その結果G検定に合格したので、どのように、何を使って学習したのか記載したいと思います。 これからAI関連の学習、G検定を受験する人の参考になれば幸いです。 G…

はじめに YAMLは構造的なデータ集合を簡素な文字列として表記することができるデータ形式の一つで、設定ファイル等に使用されることが多いです。一般的にXMLと同様なものとして扱われます。JSONとも似ていますが、YAMLはJSONとの異なり、コメントも書くことができ、閾値等が記載された設定ファイル等の説明も書き込むことができます。 本記事では、基本的なYAMLファイルの書き方の例と、YAMLファイルの読み込みプログラムを紹介します。 はじめに 1. YAMLファイルの書き方 2. YAMLファイルの読み込み 3. 実用例 オススメ書籍 スキル修得＆転職 (function(b,c,f,g,a,d…

Overview エムスリーエンジニアリンググループ AI・機械学習チームでソフトウェアエンジニアをしている中村(po3rin) です。検索とGoが好きです。 エムスリーではChatGPTの可能性にいち早く注目して活用を検討している段階ですが、本格的なデータ投入にはまだ懸念もあり、セキュリティチームと検討を進めている段階です。 そんな中で個人または組織のドキュメントのセマンティック検索と取得を可能にするChatGPTプラグイン「ChatGPT Retrieval Plugin」が登場しました。 github.com 情報検索好きとしては黙っていられず、外部公開用のエムスリーAI・機械学習チーム…

エンジニア・プログラマーの学習に約立つコンテンツのセール情報を集めました 1位 現役シリコンバレーエンジニアが教えるPython 3 入門 + 応用 +アメリカのシリコンバレー流コードスタイル ¥27,800 → ¥2,400 91%OFF!! ⭐ ⭐ ⭐ ⭐ （20,095件） 現役シリコンバレーエンジニアが教えるPython入門！応用では、データ解析、データーベース、ネットワーク、暗号化、並列化、テスト、インフラ自動化、キューイングシステム、非同期処理など盛り沢山の内容です！ 2位 【キカガク流】人工知能・機械学習 脱ブラックボックス講座 - 初級編 - ¥15,800 → ¥2,200 …

Input Books 単体テストの考え方/使い方 Chap6, 7, 8 ヘキサゴナルアーキテクチャや関数型アーキテクチャなどの概念が登場した。この辺も参考文献を深掘りたい。 Chap7のリファクタリングの話がわかりやすかった。簡単すぎるコードは確かにテストしないほうが良いし、過度に複雑なコードを分解してテスタブルにするのも大事。 Humble Object Kaggleに挑む深層学習プログラミングの極意 読了 今は「これが普通」という知識を得られたのでよかった。kaggleにおいて限定的に用いられる手法が分離して書かれていたのも個人的にわかりやすかった。 速読速聴・英単語Daily1500…

エンジニア・プログラマーの学習に約立つコンテンツのセール情報を集めました 1位 現役シリコンバレーエンジニアが教えるPython 3 入門 + 応用 +アメリカのシリコンバレー流コードスタイル ¥27,800 → ¥2,400 91%OFF!! ⭐ ⭐ ⭐ ⭐ （20,088件） 現役シリコンバレーエンジニアが教えるPython入門！応用では、データ解析、データーベース、ネットワーク、暗号化、並列化、テスト、インフラ自動化、キューイングシステム、非同期処理など盛り沢山の内容です！ 2位 【キカガク流】人工知能・機械学習 脱ブラックボックス講座 - 初級編 - ¥15,800 → ¥2,200 …

AI2041はAIの発展に伴い社会がどう変わっていくかを短編小説の形でまとめた書籍になっています。今話題のChat GPTなどの自然言語処理に関するAIや、自動運転、量子コンピューターなどそれぞれの分野に焦点を当てたストーリーを用い、読者が未来をイメージしやすいように配慮されています。著者はカイフー・リー氏とチェン・チウファン氏の2名。カイフー・リー氏は元Google中国法人のトップでAIに精通しており、チェン・チウファン氏はあの「三体」作者である劉氏からも絶賛されている SF作家です。 AI 2041 人工知能が変える20年後の未来 作者:カイフー・リー(李 開復),チェン・チウファン(陳 …

youtu.be 皆既日食と金環日食が、時間と場所によって両方が観測されるとても珍しい現象です。2023年4月20日に起きます。 ただし、影の中心が、ほとんど海上を通過するため、陸から観望できるのは、海に面したごくわずかな地域に限られます。 日本からは、日食帯の北限界線に位置するため、部分日食とされるが、そのほとんどが南の端の地域に限定される。しかも、欠けたか欠けてないかわからないくらい。沖縄か、小笠原諸島までいけば、部分日食がばっちり観望できる予報。 📝目次📝-------------------------------------------------0:00 金環皆既日食とは0:51 …

KADOKAWA Connected IDS部コンサルティングの木村です。 この記事では、IDS部が、KADOKAWA社内でデータリテラシー向上を目指す事業部に向けてデジタル講習会を実施したこと（2021年冬期、および2022年冬期の2回実施）についてのお話をします。 この記事を通して伝えたいこと： KADOKAWA社内で100人前後の規模でデジタル講習会が実施されるまでの背景＆目的について 理想とする講習会と実際の講習会を比較し、良かったこと＆改善すべきこと（工夫したこと＆難しかったこと）とは？ 予測外の展開（ポジティブ面）と継続学習サイクルを主眼とした次ステップについて そもそも、どのよう…

エンジニア・プログラマーの学習に約立つコンテンツのセール情報を集めました 1位 現役シリコンバレーエンジニアが教えるPython 3 入門 + 応用 +アメリカのシリコンバレー流コードスタイル ¥27,800 → ¥1,900 93%OFF!! ⭐ ⭐ ⭐ ⭐ （20,078件） 現役シリコンバレーエンジニアが教えるPython入門！応用では、データ解析、データーベース、ネットワーク、暗号化、並列化、テスト、インフラ自動化、キューイングシステム、非同期処理など盛り沢山の内容です！ 2位 【キカガク流】人工知能・機械学習 脱ブラックボックス講座 - 初級編 - ¥15,800 → ¥1,900 …