fastapi

クロスマート バックエンドエンジニアの武（タケ）(@pouhiroshi)です。前回は5分で作れる！FastAPI入門編 ということで、簡単なFastAPIのご紹介をしました。今回はWebフレームワークには欠かせない「入出力定義とValidation」をFastAPIではどのようにやるかをご紹介します。FastAPIでこれらを実装する際に推奨されているライブラリが Pydantic です。 https://pydantic-docs.helpmanual.io/Pydanticの読み方ですが、パッと検索した感じ見当たらなかったので勝手に「パイダンティック」と読んでいます。 もし正解をご存知の方…

PythonのFastAPIのStreamingResponseでGeneratorを使用しながら、UTF-8 BOMのファイルをダウンロードさせるAPIを作成しました。ただ、作成したファイルを確認したところ、ファイルの途中で余計なBOM（\ufeff）が付与されてしまっていました。 今回の記事では、ファイルの途中でBOMが挟まれてしまった原因を残します。 環境 FastAPI 0.75.2 （Pandas） 1.5.0 理由 Generatorで処理するたびに、BOMを付与していたため。 言葉で見れば当たり前の話ですので、ソースコードで見れば納得していただけると思います。 詳細 ファイルを作…

どうも、nippa です。 python のパッケージ管理は requirements.txt から完全に poetry に移行しました。 docker image についても poetry に移行するために、Dockerfile を書いてみたいと思います。 Poetry1.2のアップデート情報はこちらの記事にまとめています。 timesaving.hatenablog.com 環境 Python + Poetry の Dockerfile ディレクトリ構造 pyproject.toml の作成 app.py の作成 Dockerfile の作成 Docker image の作成 コンテナの起…

はじめに 最近アクアリウムを始めました、菅野です。 プログラムと異なり、生体を扱う都合上の想定外を楽しみながら試行錯誤しております。 さて、皆さんはAPIサーバを構築する際に、どのAPI形式を用いていますか？ まだまだREST形式で実装することが多いかとは思いますが、 GraphQLを用いることも増えてきているのではないでしょうか？ 今回は、そんなGraphQLをFastAPIと各種ライブラリを用いて簡単に実装する方法を紹介していこうと思います。 はじめに GraphQLとは 構成 利用ライブラリ 実装 ディレクトリ構成 クラス図 各種コード説明 infra/repositoryディレクトリ …

クロスマート バックエンドエンジニアの武（タケ）(@pouhiroshi)です。 社内ではおそらく最高齢なため「たけじい」と呼ばれております。（けど入社して半年なので気持ちは若いです♪）これからよろしくお願いいたします。 前回は 小久保さんの「テストコード好きがテストを布教し続けた結果プロダクトや個人がどう変わったか」についての記事でした。 わたしも小久保さんに見習ってテストを頑張って書くようにしています！まだ、見ていない方はぜひこちらの記事もご覧ください。 xmart-techblog.hatenablog.com さて、弊社のクロスオーダー 飲食店と卸をつなぐ受発注システムのバックエンドは…

はじめに 過去の記事で、レシートから合計金額を抽出するOCR処理を作成した。本記事では、過去作成したOCR処理をFastAPIに組み込み、レシート画像から合計金額を抽出するAPIサーバを構築する。 sey323log.hatenablog.com

こんにちは 今回はFastAPIのschemaの考え方を書いていきたいと思います。 FastAPIではpydantic を採用しており、pydanticを利用してschema設定していきます。 今回でいうschemaはDBのschemaではなく、I/Oのリクエスト・レスポンスのschemaの考え方になります。 schemaを考えていくときに押さえていきたいこと 型の設定 レスポンスとリクエストの区別 ドメイン 型の設定 昨今、型設定できない開発は開発スピード、不具合の原因、心理的安全性など多方面で良いことがないです。(型に縛られすぎるのも本末転倒なのでほどほどに) そのため、型設定できる方法が…

朝：白米、麻婆豆腐（7プレミアム 麻婆豆腐の素 中辛 ＋ナス・ニラ）、マルチビタミン＆ミネラル 昼：白米、麻婆豆腐（7プレミアム 麻婆豆腐の素 中辛 ＋ナス・ニラ）、マルチビタミン＆ミネラル、セブン イタリア栗のモンブラン 夜：ちくわぶと豚肉ときくらげの卵炒め、マルチビタミン＆ミネラル 酒：ブッシュミルズ FastAPIの日本語ドキュメント、並行処理のページの絵文字の多さがちょっと面白かった。 GPT-4さんですが「文章をポップにリライトしてくれ」とお願いしたら強力なルー大柴みたいなエキサイティングな人が出てきて爆笑。こんなに思いっきり笑ったのも久しぶりというくらいツボる。

で、動かないわけですが。 眠たくて寝ちゃったわけですが。 いやいやいや。なんとかするだろ？ てか、して。 こういうときはですね、だいたいエラーメッセージでググればいいんです。 こいつ。 Cannot add middleware after an application has started こんなのが見つかりました。 github.com ほらー。 二十歳になったら梅田のほらー。 このですね、英語なんですけど、ビビったら負け。最初の質問がおんなじエラーメッセージでしょ。で、次で答えてる人とその次の人がおんなじような感じのこと言ってるでしょ？ たぶんそれすればいい。 ざっくりいうと、 pip…

Pythonで関数とNoneが取りうるパラメータに対して、Union型で型ヒントを与えようとしたところエラーになったので解決方法をメモします。 環境 Python 3.9 対応 Union型を使わずに、Optional型でヒントを与えます。今回ハマっていたのは、sqlalchemyでand_条件をパラメータとして渡したかったので、そのユースケースを記載します。 def test( OK: Optional[and_], NG: and_ | None ): pass NG側の型ヒントだと、次のようなエラーが発生してしまいます。 E TypeError: unsupported operand …

こんにちは、金融ソリューション事業部の若本です。 先日ChatGPT（gpt-3.5-turbo）のAPIが公開されるとともに、Open AIのサービスが使いやすくなりました。 今回は、ChatGPTから返ってきたレスポンスを読み上げる簡易アプリケーションの作成を行います。 使用するもの 処理概要 1. APIの作成 1.1 Open-AI API(ChatGPT)を介して、質問の答えを取得 1.2 Espnetを用いて、合成音声を生成 2. APIを呼び出すアプリの作成 おわりに 使用するもの OpenAI API 事前にAPIキーを発行しておく必要があります。また、1000トークン（約70…

ShodoがChatGPTに対応しましたね。 最近注目されている自然言語処理技術の一つChatGPT。本記事ではPythonからChatGPTを非同期で扱う方法についてご紹介します。 実はこの記事もChatGPTに書いてもらい、僕が加筆し、Shodoで校正しています。 ChatGPTと非同期で扱う話 ChatGPTとは、人工知能の一種であるGPTを用いた、対話型の自然言語処理技術のことです。 APIも公開されて最高！なわけですが、 いかんせんレスポンスが遅いため面倒です。 通常、数ミリ秒の世界で生きているわけですが、ChatGPTのAPIは30秒以上ふつうにかかります。同期的なWebサーバーで…

エンジニアの長部です。社内の分析用データ基盤構築の傍ら、物件連動基盤のリアーキテクチャや新規機能に関わる開発・設計に携わっています。 イタンジでは大量で多様な物件データを用いたETL処理を行っていますが、その信頼性向上のため行っている工夫の一つとして、Pydanticを利用したモデルベースのバリデーションについて紹介します。 イタンジにおける物件連動基盤とは イタンジでは様々な経路で入力された物件情報を社内の物件情報基盤に取り込み、それを組み合わせたり加工した上で、社が運営するサービスで利用したり、必要に応じてさらに外部のシステムに出稿したりといったことを行っています。 イタンジ社内における物…

server.py import uvicornfrom fastapi import FastAPIfrom pydantic import BaseModelapp = FastAPI()class Request(BaseModel): message: str@app.post("/hoge_post")async def hoge_func(req: Request): print(req.message) return {'output': req.message}def start(): config = uvicorn.Config("server:app", host="12…

server.py import uvicornfrom fastapi import FastAPIapp = FastAPI()@app.post("/hoge_post")async def hoge_func(): print('hoge')def start(): config = uvicorn.Config("server:app", host="127.0.0.1", port=8000, log_level="info") server = uvicorn.Server(config=config) server.run()if __name__ == '__main__':…

FastAPIはPythonで簡単にAPIサーバーが立てられるライブラリです。 fastapi.tiangolo.com 今回これを利用して、HTTP POSTで送られた画像になんらかの認識処理をかけて、結果をjsonで返すようなプログラムを書いたのでメモしておきます。 その際、送られてきた画像はOpenCVで処理してます。 1. 必要なライブラリをインストール FastAPIはuvicornというASGI（Asynchronous Server Gateway Interface）サーバーを使用しています。ASGIが何かはとりあえず知らなくても良いです。 他に、opencvやnumpyなども…

TL;DL ベイジアンABテストとは おわりに TL;DL ABテストの結果を入力すると、どれくらいの確率で差があるかを判定するツールを作成しました 共役事前分布はBeta分布、事前分布は一様分布を仮定しています そのため、観測データはベルヌーイ分布を仮定します github.com ベイジアンABテストとは ベイズ推定の理論を用いて、介入効果を確率分布として表現し、各群で得られた確率分布の差を見ることで介入効果が実際にありそうか否かを判断します。 頻度主義でよく用いられる検定の考え方は、元々の母集団が真の値があり、得られたサンプル（=標本）は、t分布やχ自乗分布に沿うように振る舞うという前提…