コンピュータに対し、データを元に役立つ規則などを発見させる(すなわち学習する)こと。およびその方法。
ニューラルネットワークから歴史は始まり近年は確率統計の観点から研究されることが多い。 統計の観点から見た場合、与えられたデータに対してモデルを当てはめているだけである。 モデルが複雑である点で従来の統計学と異なっている。
以下、有名な確率モデル
AIの予想結果 今回の自作AIシステムの予想は このようになりました! HOMEAWAY予想102 磐田福岡1100.0%0.0%0.0% 神戸清水1100.0%0.0%0.0% FC東京札幌1100.0%0.0%0.0% 横浜FM広島00.0%100.0%0.0% 浦和京都20.0%0.0%100.0% 鹿島C大阪1100.0%0.0%0.0% 柏名古屋1100.0%0.0%0.0% 川崎F鳥栖00.0%100.0%0.0% 湘南G大阪20.0%0.0%100.0% 岡山大宮20.0%46.4%53.6% 長崎山形1100.0%0.0%0.0% 金沢群馬154.4%5.6%40.0% 山口大…
OceanDAOラウンド19が受付開始 Malte von Medem Web3データエコノミー・プロジェクトにOCEANの10万ドルを提供 日本の機械学習、データサイエンス、その他のデータエコノミーの発展に寄与するプロジェクトであれば、技術的及び非技術的、個人及び組織問わず自由に価値提供提案をして、投票を介して資金調達をすることが可能です。ぜひ、ご検討ください。 OceanDAOは、OCEANトークンホルダーがキュレーションしたエコシステム・プロジェクトに資金を提供する助成金DAOであり、誰でも助成金を申請することができます。 この記事では、ラウンド19の概要を説明していきます。 ラウンド1…
本ブログのテーマでもある「プログラミングと株価投資」、テクニカル分析をするにもプログラムを書いてシステマチックに検証(バックテスト)するにも時系列データは必須です。今回は、株価時系列データの自動取得する方法を紹介します。 管理人は、Unicorn Data Service社が提供している「EOD Historical Data API」サービスを利用しています。2022年6月現在、世界中70+取引所の過去30年分の時系列データがAPI経由で提供されています。API(Application Programming Interface)とは、クライアントからのリクエストに対し、あらかじめ規定された…
Index Index カーネル ベイズ統計学 パターン認識 / 機械学習 ノンパラメトリック統計 参考 カーネル ベイズ統計学 パターン認識 / 機械学習 ノンパラメトリック統計 参考 カーネル (統計学) ja.wikipedia.org
AIの予想結果 今回の自作AIシステムの予想は このようになりました! HOMEAWAY予想102 FC東京福岡20.0%0.0%100.0% 広島磐田1100.0%0.0%0.0% 京都札幌030.0%70.0%0.0% C大阪川崎F1100.0%0.0%0.0% 清水横浜FM1100.0%0.0%0.0% 柏鹿島1100.0%0.0%0.0% G大阪浦和00.0%77.6%22.4% 湘南名古屋20.0%0.0%100.0% 鳥栖神戸00.0%53.6%46.4% 岩手大宮20.0%0.0%100.0% 群馬新潟20.0%29.6%70.4% 岡山熊本20.0%34.8%65.2% 大分千…
はじめに MonotaROとBandit Banditの着目理由 MonotaROにBanditを導入する際の課題 A Linear Bandit for Seasonal Environments 論文概要 背景と動機 提案手法 実験 まとめ おわりに はじめに はじめまして、データサイエンスグループの岡林です。普段はbanditなどの強化学習を用いてUIの最適化に取り組んでいます。 このブログでは最近MonotaROが注目しているbanditの概要を紹介しつつ、その中でも事業特性にあったbanditアルゴリズムにフォーカスし、論文を解説します。 MonotaROとBandit Bandit…
RについてRによるデータサイエンス(第2版):データ解析の基礎から最新手法まで作者:金 明哲森北出版Amazonをベースに学んでいく。 今回は非線形判別分析(PP.170-178)を扱う。 前回 14. 非線形判別分析 14.1 距離による判別分析 14.2 多数決による判別分析 14.3 ベイズ判別法 14.3.1 ナイーブ・ベイズ分類器 14.4 シミュレーション 14.4.1 Mahalanobis距離による判別 14.4.2 k近傍法 14.4.3 ナイーブベイズ 補足 スペック情報 前回 https://power-of-awareness.com/entry/2022/06/22/…
いい加減時代の潮流に乗ろうということで機械学習を学びたいと思う。またRはともかくとしてPythonは未経験であるため、丁度良い書籍として統計的機械学習の数理100問 with R (with R) (機械学習の数理100問シリーズ)作者:讓, 鈴木共立出版Amazon統計的機械学習の数理100問 with Python (機械学習の数理100問シリーズ)作者:讓, 鈴木共立出版Amazonを用いることにする。 8. サポートベクトルマシン 8.1 最適な境界 8.2 最適化の理論 8. サポートベクトルマシン サポートベクトルマシンはのサンプルが与えられたときにと境界の距離(])の最小値を最大…
Index Index ベイズ回帰 / ガウス過程回帰 回帰分析からの導入 パラメータ空間 目的変数の分布 / 予測分布 / 条件付き確率分布 パラメータの分布 / 事前分布 パラメータの分布 / 事後分布 ベイズ回帰 事後分布の更新・推定 / 逐次ベイズ学習 ガウス過程回帰 ガウス過程 回帰モデル 予測分布 参考 書籍 Web ベイズ回帰 / ガウス過程回帰 ベイズ (推定) 回帰 / (ガウス過程回帰) は、回帰分析におけるパラメータに対して、 固定値ではなく、確率的に変動するもの (確率変数) として扱う. 回帰分析 #まとめ編 yhayato1320.hatenablog.com 回帰…
Ocean Protocolデータファーミングの報酬計算事例の紹介:DF1 Trent McConaghy データファーミングのOCEAN報酬とAPYの例 この投稿は、Ocean Data Farming(DF)プログラムによる収益性を理解するために、DFのラウンド1(DF1)の報酬関数と関連設定について、ステーカー(流動性プロバイダー)に計算事例を提供するものです。 完全な文脈を知るには、まずOcean Data Farming is Launchingをお読みください。 この記事では、まず「報酬関数」の公式を確認します。そして、次のようなシナリオを例として取り上げます: 1人のLPが少ない…
エンジニア・プログラマーの学習に約立つコンテンツのセール情報を集めました 1位 現役シリコンバレーエンジニアが教えるPython 3 入門 + 応用 +アメリカのシリコンバレー流コードスタイル ¥24,000 → ¥1,960 92%OFF!! ⭐ ⭐ ⭐ ⭐ ⭐ (17,833件) 現役シリコンバレーエンジニアが教えるPython入門!応用では、データ解析、データーベース、ネットワーク、暗号化、並列化、テスト、インフラ自動化、キューイングシステム、非同期処理など盛り沢山の内容です! 2位 【キカガク流】人工知能・機械学習 脱ブラックボックス講座 - 初級編 - ¥15,000 → ¥1,84…
錦です。 ゲーム機の世代で話すと2020年からは新世代に突入したとも見れる市場。そんな中でNintendo Switchはかなり異色の存在となっています。今回は、そんなSwitchがPS5やXSXに対抗する機能をつけたらのお話。タラレバってやつ。
はじめに やらなければいけないことは手短に nikkieです🍨 この記事は、アイうた円盤発売アドベントカレンダー 4日目の記事です。 昨日はnikkieさんによる『サトミの"防御力"🛡で語る #アイの歌声を聴かせて』でした。 防御力高いガールのサトミ、かわいいですよね(7/27まで冒頭17分公開されているから、みんな見て!!) さて、今回は(別の記事で触れたこともあるのですが)、音声をプログラムに認識してもらう簡単な方法を取り上げます。 「アイうたのシオンみたいなプログラムが作れないかな」と考えるようになった後、最初に試した実装です。 ‖◤#アイうた プロフィール帳①◢‖トップバッターは”試験…
よく聞くETFといえば、 全米の株価指数に連動したVTI S&P500に連動したVOO NASDAQ100に連動したQQQ ですが、世界には色々なETFが存在します。 その中でも特にある特定の分野に特化したETFを紹介していきます。 ブロックチェーンに特化した『BKCH』 メタバース関連唯一の特化型ETF『META』 eスポーツの特化型ETF『HERO』 ロボットAI関連の特化型ETF『BOTZ』 代替肉、農業テック系特化型のETF『KROP』 オススメ米国株銘柄 おすすめ書籍紹介 ブロックチェーンに特化した『BKCH』 まずは、最近注目度が高まってきているブロックチェーン業界に特化したETF…
俺は19歳までゲームと音楽の好きな普通科高校の生徒というか幼稚園から小中学校時代もあるからその時点で時系列的におかしいのだが担任の先生に目をつけられながらも卒業までした。そに時点ではクラスメートのほとんど友達で生徒会や文化祭の実行委員もしていた。 それから2年フリーターをして電車で30分くらいのところにある専門学校に入った。学科試験の成績がいい割に実務より芸術に近いCG学科へ2年から進学して、芸術系の先生から「勉強の出来る奴のくせに」と目をつけられ、学科に近いデータベースとかの先生に「こっちへ来たらいいのに」と言われたが、卒業制作でCG動画を作った。その作品はMOに焼いて就職志望の会社に作品と…
諸事情により7、8月の内定者アルバイトの予定が飛んでしまったため、内定先の人事さんとの面談を通して、それに代わる目標を立てました。 決意表明を兼ねて、こちらに書き綴ろうと思います。 目標リスト 研究室系 42Tokyo系 エンジニア系 その他 目標リスト ざっくりと7、8月の目標(予定)を列挙します。 個々の説明は下の方で行っています。 研究室系 Secret Sharingの理論を一周する MPCの基礎へ入門する 42Tokyo系 Philosophersクリア minishellクリア エンジニア系 AWS講座完了 SNSのクローン作成 その他 ISUCONの勉強 ISUCON予選参加 研…
こんにちは、2022年4月入社の小杉です!営業から転職を志し、未経験エンジニアとしてFLINTERS BASEに入社して早3ヶ月、、、これから「未経験でデータエンジニアの世界へ飛び込もうとする方」に向けて、実際に研修を受けてみた様子をお伝えできればと思います!
はじめに みなさん、翻訳ツールって何を使ってますか? 多くはGoogle翻訳やDeepLとかではないかと思います。 そんな中、機械学習型の「みんなの自動翻訳」というサイトがあったので、こちらを試してみました。 みんなの自動翻訳@TexTra® 参考サイト コピペ翻訳機を作る 目標〜翻訳APIの利用|Erectronでマルチプラットフォームなデスクトップアプリケーションを作ろう みんなの自動翻訳の特徴 国立研究開発法人情報通信研究機構(NICT)が開発した自動翻訳サイト 最新の自動翻訳研究に基づく「高精度自動翻訳エンジン」が無料で使える 翻訳WEB APIが無料公開されている VS Code用の…
はじめに はじめまして、データ戦略室の伊藤です。今年の5月にSOTに入社し、現在は商品の販売予測など、AI関連の案件に関わらせてもらっています。 私は機械学習の知識がほぼゼロに近かったのですが、外部の自然言語処理エキスパートへ自由に質問できる時間を設けてもらったり、ミニマムな学習モデルを作ってフィードバックをもらったりしていて、会社が育成に力を入れてくれていることを実感しています。(ありがたや…🤲) 今回はそのトライの一環として、Google Colabratoryでお手軽にGPT-2の文章生成モデルを作成し、他部署に共有するためのデモまでおこなった時の話をさせてもらえればと思います。 はじめ…
はじめに サーバサイドエンジニアの酒井です. 普段はマイクロアドが提供する広告配信プラットフォーム UNIVERSE Ads の DSP 部分の開発をしています. 今回は JVM 言語におけるマルチスレッドプログラミングに関するいくつかの用語の理解と整理を兼ねて記事にします. 背景 まず Real-Time-Bidding (RTB) についてですが, RTB では大量のリクエストが送られてくる中でレスポンスタイムの制約が 100 ms 以内と非常に制約が厳しいです. そのような環境の中マイクロアドの DSP 開発では, レスポンスタイムとスループットの二つのパフォーマンス指標の制約を常に満た…
エンジニア・プログラマーの学習に約立つコンテンツのセール情報を集めました 1位 現役シリコンバレーエンジニアが教えるPython 3 入門 + 応用 +アメリカのシリコンバレー流コードスタイル ¥24,000 → ¥1,960 92%OFF!! ⭐ ⭐ ⭐ ⭐ ⭐ (17,824件) 現役シリコンバレーエンジニアが教えるPython入門!応用では、データ解析、データーベース、ネットワーク、暗号化、並列化、テスト、インフラ自動化、キューイングシステム、非同期処理など盛り沢山の内容です! 2位 【キカガク流】人工知能・機械学習 脱ブラックボックス講座 - 初級編 - ¥15,000 → ¥1,84…
pytorchの公式イメージをベースとしてスクレイピング系とboosting系を乗っける。 jupyter-labも使える。 想定としてはwebのデータをNN系とboosting系で機械学習する人向け。 自然言語系の環境も整えたいけどやったことないからだれか・・・chrome-driverのバージョンは自分が使っている(であろう)ブラウザから「ヘルプ→chromeについて」みたいなところからバージョンを確認して揃える。 ※2022年7/4時点では以下で動作確認。Dockerfile FROM pytorch/pytorch:latest ENV TZ=Asia/Tokyo RUN ln -sn…
tanuki- 2022-07-04 nnue-pytorch RAdam 実験内容 nnue-pytorch を用いた学習で、 Optimizer を RAdam に変更して学習させた場合の、レーティングの変化を調べる。 棋譜生成 生成ルーチン tanuki-棋譜生成ルーチン 評価関数 水匠5 FV_SCALE=16 1手あたりの思考 深さ最大 9 思考ノード数最大 50,000 ノード 開始局面 foodgate の 2020 年~ 2021 年の棋譜のうち、レーティング 3900 以上同士の対局の 32 手目までから 1 局面ランダムに選択し、その局面を開始局面とした ランダムムーブなし…
ここ最近、udemy等でPythonを使った機械学習について勉強しておりまして、動画を見るだけじゃなく、自分でもPythonを動かしてみよう!と思い、拙いながらもやってみました。今回は初歩的な単回帰分析にチャレンジします。 更にテーマも自分で探してみよう!と思い立ち、筆者は北海道在住なので、北海道のオープンデータを使ってみました。 参考にさせていただいた講座 udemy『【キカガク流】人工知能・機械学習 脱ブラックボックス講座 - 初級編 -』 udemy『【キカガク流】人工知能・機械学習 脱ブラックボックス講座 - 中級編 -』 →数式からコードに落とし込むところまで、考え方や式変形なども分…
DALL-Eは、AIによって生成されたストーリーを使用して、仲間を戦いに導くナイフを振り回すピカチュウのような不安なイラストを作成することができます。 画像:EDWIN CHEN / DALL-E ヤヌス・ローズ著 ニューヨーク、米国 2022年7月1日午後10時 シェアする ツイート スナップ GPT-3やDALL-Eなどの高度なAIモデルは最近大流行しており、後者はテキストプロンプトからAI生成画像を作成することに最近の関心の高まりを引き起こしています。 しかし、これらの画像と高度なテキスト予測を組み合わせることで、不吉な暗い空の下で仲間を戦いに導くナイフを振り回すピカチュウについてのイラ…