コンピュータに対し、データを元に役立つ規則などを発見させる(すなわち学習する)こと。およびその方法。
ニューラルネットワークから歴史は始まり近年は確率統計の観点から研究されることが多い。 統計の観点から見た場合、与えられたデータに対してモデルを当てはめているだけである。 モデルが複雑である点で従来の統計学と異なっている。
以下、有名な確率モデル
概要 はじめに Qlibの試用 動作条件 使用したrequirements.txt データの取得 予測の実施 出力 図示 ソースコード バックテストでのポートフォリオ分析 リスク分析、分析モデル おわりに 概要 本記事では、Qlibを使用して、機械学習パイプライン環境を構築する第一歩について述べる。 はじめに このブログの趣旨としては、当初は「戦略作成」→「戦略検証」→「戦略稼働」→「成果の評価」→「戦略へフィードバック」といったサイクルを管理できるような自動トレーディングシステムを作ることを考えていた。 最近、すこし株取引から離れていたのだが、最近になってまたやり始めようかなと思い、色々と現…
1.やりたいこと ・sin波とcos波の分類を行う機械学習モデルを作成し、その予測の判断根拠を可視化する。 ・分類を行う機械学習モデルは、Self-AttentionモデルとCNNモデルを作成する。Self-Attentionモデルではattention-weightを可視化することで、CNNモデルではGradCAMを使用することで可視化し、モデル毎の判断根拠を比較する。 2.使用するライブラリ import numpy as np import matplotlib.pyplot as plt from torch.utils.data import DataLoader import to…
概要 ゲーム開発において、ゲームAI技術や機械学習技術を活用する流れが加速していると日々実感しています。実際の現場でも導入されることが増え、ゲーム開発の様々な部分で効率化が進んでいると思います。ただ、どのようなケースで、どのような技術を使用するのが良いのかということについては意外と整理されていないように思います。そこで、自分の経験や調べたことを元に、ゲームAI・機械学習技術の適用ケースを簡単にまとめておこうと思いました。 ゲームAI・機械学習技術の適用ケース キャラを状況に応じて動かしたい ルールベースAI 有限状態機械(FSM: Finite State Machine) ニューラルネットワ…
機械学習のオプティマイザーは、モデルのパラメータを最適化するためのアルゴリズムです。モデルのパラメータを最適化することは、訓練データに適合するようにモデルを調整することを意味します。 代表的なオプティマイザー 確率的勾配降下法(Stochastic Gradient Descent, SGD) モデルのパラメータを更新するための基本的なオプティマイザーです。各訓練データのバッチごとに勾配を計算し、勾配の逆方向にパラメータを更新します。 ミニバッチ学習にはSGDが使われます。 モーメンタム(Momentum) SGDの改良版で、過去の勾配情報を考慮してパラメータの更新を行います。モーメンタムは、…
前回mini toto見事的中🎯 AI予想のおかげで当せんしました! 中の人の予想はことごとくハズレましたw 今回も当てて連勝と行きたいところ💪 AIの予想結果 今回の自作AIシステムの予想は このようになりました! HOMEAWAY予想102 札幌名古屋027.9%42.6%29.5% 神戸FC東京140.2%31.1%28.7% 鳥栖鹿島023.5%53.4%23.1% 横浜FM福岡143.4%29.9%26.7% C大阪横浜FC145.8%30.7%23.5% 広島湘南138.6%34.3%27.1% 京都浦和135.5%35.1%29.5% 新潟G大阪026.7%37.5%35.9% …
こんにちは。AI戦略室 主席研究員の清田陽司です。 LIFULLが取り組んでいるさまざまな研究開発の課題を、より多くの社外の方々(とくに大学の研究者や学生)に共有することで、LIFULLだけではなし得ないより大きな研究成果につなげる、「産学連携」という活動を行っています。 実は、LIFULL HOME'S 3D間取りというサービスも、産学連携の長年の取り組みの成果の一つです。 このたび、3月に開催された第15回データ工学と情報マネジメントに関するフォーラム(通称 DEIM 2023)に、協賛企業の担当者、かつ「産学連携委員長」という役割で関わりましたので、その様子を報告します。 event.d…
文系人間の心構え 最近はAIの普及が目覚ましくなっています。AIによって仕事が奪われてしまうということは以前からよく耳にすることです。私のような純粋文系の人間にとっては本当に危機感を抱くことなのでしょうか?本書は文系AI人材になるための具体的な知識や用語の概念を教えてくれる救いの1冊かもしれません。 スポンサーリンク (adsbygoogle = window.adsbygoogle || []).push({}); 【1】AI社会で職を失わないために 時代の変化とともに、今までも技術は進化してきています。手作業が中心だったこともPCの普及で劇的な変化が生じ、それに伴い新しい職種も登場するなど…
ここ数年の自然言語処理 AI のブレークスルーを体現したのが ChatGPT である。応答としては「教科書的」だし、正しくない応答をするといった問題もあるが、大規模言語モデル(GPT-3.5)を基盤として、人間との自然な対話を実現していることは本当に凄い。GPT = Generative Pre-trained Transformer という名の通り、Transformer というアーキテクチャのディープ・ニューラルネットワークで事前学習された(pre-trained)、生成(generative)AI である。 muranaga.hatenablog.com ここ数ヶ月は、ChatGPT に…
前回はmini toto4/5試合結果を的中。 最近mini totoはあと1試合的中で当せんが多い! けど惜しいじゃ意味がない! ってことで今回はぜひとも当てたい! AIの予想結果 今回の自作AIシステムの予想は このようになりました! minitoto A組 HOMEAWAY予想102 鹿島柏144.6%31.9%23.5% G大阪京都233.9%28.7%37.5% 清水湘南142.2%28.7%29.1% FC東京C大阪026.7%44.2%29.1% 名古屋神戸139.4%37.8%22.7% minitoto B組 HOMEAWAY予想102 札幌横浜FM134.3%31.9%33…
今日の積み上げ AI学習 DS検定問題集 第2章(データサイエンス力-機械学習):22/36(正解率61%) AI学習 今日は昨日の反省を活かして、通勤中にUdemyの統計検定2級講座の動画を見ながら、決定係数や条件付き確率のところを復習しました。 やっぱり、こちらの方がわかった感が得られてよかったです。 Udemy講座は動画をダウンロードしておけば、ストレスフリーでいつでも見ることができるのがすごくいいですよね。 この調子で、統計学で詰まることがあったら、まずはUdemyをふりかえる、これを徹底してみようと思います。 そして、今日はDS黒本の第2章をやりきりました。 機械学習ということでちょ…
こんにちは。 株式会社エニグモ 新卒 2 年目 エンジニアの橋野です。 先月開催された、AWS Summit Tokyo 2023 に行ってきました。 今年の AWS Summitはハイブリット開催で、オンライン、オフライン共に参加できるようになっていました。 会場での開催は、2019年以来の4年ぶりということです! 私は、現地で1日目のみ参加させていただきました!会場は、千葉県の幕張メッセです。 AWS については初心者ですが、初心者でも楽しめるということで行ってみました! サミットでの過ごし方 時間 行程 10:00~ 受付 朝昼兼用ごはん 11:00~ スポンサーブース 12:00~ こ…
独自アルゴリズムで地震を予知にチャレンジしています。ただの趣味でやっているもので全く精度はありません。流行りの機械学習を利用しています。 もちろん地震の予知はできるものではありません。気象庁のページにも地震予知について書いてありますので御覧ください。 www.jma.go.jp また、毎日集計しているため、この記事は毎日自動で更新されるはずです。更新が止まったらプログラムがエラーになったんだなと思ってください。 これから1週間の予測 これから1週間の予想です。ざっくり天気で表現しています。 日時 天気 2023-05-31 ☁ 2023-06-01 ☁ 2023-06-02 ☀ 2023-06…
かの有名botterであるrichmanbtcさんが 仮想通貨自動売買ボットで儲ける方法5: 機械学習ボット|richmanbtc で言及していた、 重要なのは以下の構造にして、yの予測精度の問題に帰着すること。 バリデーション: バックテスト成績が上がる、ならば、汎化性能(実戦成績)も上がる yとポジション計算: yの予測精度が上がる、ならば、バックテスト成績が上がる ということについて記事を書いていきます。 モチベーション 実験 実験1 完璧に価格予測できた場合 (simple) 結果1 実験2 未来リターンにノイズが載った場合 結果2 モチベーション UKIさんの記事などにより、高頻度取…
やりたいこと 研究対象 身に付けたい技術 最優先に学びたいこと 機会があれば学びたいこと 大学に行けば副次的に身に付く、経験できると思ってること 大学に行くメリット(会社、独学ではできないこと) まとめ やりたいこと AIによる画像診断などは別として、オーム解析などによって得られるデータは「バイオーマーカーとして有望な候補を見つけるもの」あるいは「生命現象解明の一助となるような仮説を提供するもの」だと思っている。そのため、個人的にはドライな解析によってどれだけ有益な情報が引き出せるのか、どれだけ以降のウェットな研究に繋げられるような情報が得られるのかに大きな関心があり、それに必要な知識やスキル…
本記事のサマリ 本記事では、勾配ブースティング木の考え方について説明します。まず、最初に前向き段階的加法的モデリングと呼ばれるアルゴリズムを紹介します。次に、最急降下法と勾配ブースティング木の漸化式の関係性について説明します。最後に、これらをまとめた勾配ブースティング木のアルゴリズムを示します。なお、本記事に記載の数式や文字は全て「統計的機械学習の基礎」にならっており、本記事では定義しません。 統計的学習の基礎 ―データマイニング・推論・予測―作者:Trevor Hastie,Robert Tibshirani,Jerome Friedman共立出版Amazon 前向き段階的加法的モデリング …
出典:Intel 錦です。 Intelは、Computex Taipeiの発表に先立ち「Meteor Lake」を一部の記者に対してプレビューしたようです。
製造業DX(デジタルトランスフォーメーション)において、センサーデータの活用は重要な要素です。特に、センサーデータを利用した予知保全は、製造業界での効率化とコスト削減に大きな貢献をもたらしています。本記事では、センサーデータの活用による予知保全の詳細について解説します。 その仕組みやメリットについて理解し、製造業DXの一環として活用してみましょう。 ①予知保全の仕組み 予知保全は、製造設備にセンサーを設置し、リアルタイムでデータを収集し分析することで、設備の故障やメンテナンスが必要な箇所を事前に予測する手法です。センサーは機械の動作状態や温度、振動、電圧などのデータを収集し、それらのデータを解…
はじめに Pythonは自然言語処理技術(NLP)の実装に最適なプログラミング言語の1つです。NLPは、テキストデータを分析し、内容を理解するための技術です。Pythonでは、数多くのNLPライブラリが利用でき、アルゴリズムに基づいた自然言語処理を簡単に実現することができます。 この記事では、Pythonを使用してデータ精製と分析のためのNLP技術を実装する方法を紹介します。 自然言語処理(NLP)とは 自然言語処理(NLP)とは、自然言語(人間が日常的に使用する言語)を分析し、理解するための技術です。日本語、英語、中国語など、さまざまな自然言語を解析することができます。 Pythonを使用し…
こんにちは。絶賛 AWS と LinuC を猛勉強中の藤川です。 少し遅くなってしまいましたが、先日(2023/4/20 - 21)に千葉県の幕張メッセで開催されました、AWS Summit Tokyo 2023に参加させていただきました。 私事で恐縮ですが、以前より取り組んでおりましたAWS認定資格の勉強において、9ヶ月間でAWS認定12冠を達成し、2023 Japan AWS All Certifications Engineersに選出していただきました。 aws.amazon.com 弊社からは、私も含めて5名のエンジニアを選出していただいています。尊敬する大先輩の中に名を連ねることが…
目的 ・CFOがどのような仕事か知る →CFOは何する人ですか ・CFOに求められるスキルを知る →CFOは何ができる必要がありますか ・CFOをキャリアの選択肢に含めるかの判断材料にする →CFOになりたいですか、それはなぜですか CFOを定義づける4つの要件p.3 ①使命:資本効率を上げ、企業価値を最大化する ②役割:経営戦略・財務戦略・企業価値検証・IR ③管掌業務:経営企画・ファイナンス ④スキル:270個記載あり *企業価値に責任を負う CFOに必要なスキル ・経営企画スキル ・ファイナンシャルスキル ・マネジメント力 ・その他のスキル ・人間性 CFOへの最短ルート ▶︎大企業 7…
Elon Musk の OpenAI が DOTA 2 で専門家を打ち負かしたり、人工知能が数時間以内に周期表を再作成したりして、人工知能は最近メディアで大きな波を起こしています。この分野で達成された新しい偉業について語っている記事を少なくとも 1 つ目にすることなく、インターネットで 1 日を過ごすことは不可能です。実際、人工知能は今では遠い夢のようなものではなく、私たちの生活にうまく統合されており、YouTube や Facebook など、私たちが使用する多くのオンライン アプリやサービスがその例です。このことから、人工知能とは何か、AI を利用してエクスペリエンスを向上させるアプリやサ…
就職活動をやっていると「うちの会社は若手の裁量権があって、成長できるよ!」という言葉をよく耳にすると思います。今回は複数のプロジェクトでチームを組んだことのあるお二人をお呼びし、ブレインパッドの若手ビジネスプロデューサーの裁量権と成長をテーマに、ブレインパッドでの経験やプロジェクト内外での関係性についてお話しいただきました! プロフィール 木下 湧気 ビジネス統括本部データビジネス開発部ビジネスプロデューサー2021年新卒入社大学院修士課程卒業後、2021年にコンサルタントとしてブレインパッドに新卒入社。入社後は金融業界におけるDX組織の立ち上げ、デジタルマーケティングの構想策定、分析伴走支援…
また一日空いたな。もう毎日は諦めてできる日だけすることにする。 今日は補講日なので全休である。朝10時に起きて計算機プログラミングの勉強をした。相変わらず木構造のあたりを勉強している。解答のコードを読めばやっていることは理解できるが自分で空で書けと言われるとかなり困難である。だがクラスという概念自体はそれなりに理解が進んできたのであと少し勉強すれば全体の絵が掴めそうな気もする。 いい加減そろそろスペイン語のテスト勉強を開始しなければいけない。1週間ぐらい前にやったきりそこから全く勉強していないような気がする。いずれにしても膨大な時間がかかることは確定しているし、評価に大きく関わる試験なのでやら…
Googleの最新コスパ5Gスマホ「Google Pixel 7a」は、どんなスマホなのでしょうか? この記事では、Pixel 7a を Pixel 6a と Pixel 7 の両方と比較しながら、実際に使って感じたメリットやデメリットをレビューしていきます。 Pixel 7a を購入するか迷っている方は、ぜひ参考にしてください。 目次 比較概要 比較表 比較詳細 デザイン・外観 スペック性能 カメラ バッテリー スピーカー メリットとデメリット まとめ 比較概要 Google Pixel 7a は、2023年5月11日に発売されたGoogleの最新コスパ5Gスマホです。 Pixel 6a の…
内容によって見ないこともあるが、NHKの「映像の世紀バタフライエフェクト」を観ることがある。5月29日に放送された「ベトナム戦争 マクナマラの誤謬」を興味深く観た。マクナマラ国防長官については名前だけは知っていたが、データに基づいた戦略により行動していたとは知らなかった。そして、そのデータに頼り過ぎた結果の「誤謬」により多くの人命を失わせることになったことも。 最近、Data Scienceなる言葉をよく耳にする。流行しているといってもいいかもしれない。IBMの日本語サイトには「データサイエンスは、数学と統計、特殊プログラミング、高度な分析、人工知能(AI)、機械学習を、特定の対象分野の専門知…