Firestore

はじめまして、開発部の@taikishiinoです。 2020年3月にアンドパッドにジョインし、約一年が経ちました。 現在、チャットサービスの開発・運用をするチームに所属しており、その中で最近、RDSからFirestoreへのデータ移行を行いました。 本記事では、その際の課題やそれに対して実際に行ったことなどを中心にご紹介していきます。 データ移行の背景 僕たちのチャットサービスを開発するチームでは、現在、プロダクトのデータベースをRDSとFirebase RealtimeDatabaseのミックスからFirestoreに移行する大規模プロジェクトが行われています。 旧環境「RDSとFireb…

背景 Firebase console から Firestore をセットアップし、ローカル環境のスクリプトから Firestore にアクセスしようとしたときに、"The Cloud Firestore API is not available for Datastore Mode projects." というエラーログが出力され、アクセスに失敗した。 原因 こちらの記事を見て、原因がわかりました。 Choosing between Native mode and Datastore mode Firestore には "Native mode" と "Datastore mode" が存在…

Firestore のセキュリティールールで使用するテストオブジェクトの GeoPoint を下記のように設定するとエラーが発生していました🤔 const { GeoPoint } = require("@google-cloud/firestore"); function fieldMapData(fieldId) { return { id: fieldId, name: "霞ヶ浦", map: new GeoPoint(80, 150), // FirebaseError: Function DocumentReference.set() called with invalid data…

Firestore rulesのテストを書いていく。 initializeAdminAppで取得したappでfirestoreに書き込む際、Timestampの型はfirebase-admin由来でないとエラーになった。 Value for argument "data" is not a valid Firestore document. Detected an object of type "Timestamp" that doesn't match the expected instance (found in field "createdAt"). Please ensure that…

いろいろ苦戦したけど何とかできた。 やりたかったこととしては、Firestore EmulatorをGitHub Actions実行時のCIサーバで起動してCloud Functionsとfirestore.rulesのテストを行うこと。 まだrulesのテストはできてないが、雛形はできたのであとは流れでできそう。 ローカルでテストを導入する 実際の差分はこんな感じ。 github.com ポイントになる部分について追記。 firebase emulators:exec を使う package.jsonにtestのscriptを追加するが、こんな感じにした。 "scripts": { "tes…

テストはfirebaseの設定ファイルいらないはずなので、pushしなくてもGitHub Actionsを回せるのだが、手元の開発環境では設定ファイル参照して、GitHub Actions実行時は設定ファイルを無視あるいはダミーする、みたいなことがいい感じにできないか考え中。 一応他の開発者の参考になればと思い、公開レポジトリにしているのでこの悩み。 github.com 結局ユーザには見える値なのでどうしても隠さなければいけない情報ではないのだけど、レポジトリに含まれてしまうのは気持ち悪いなと。 この辺の環境変数が使えそうだなぁということろまで。 nextjs.org

概要 FirestoreはNoSQLの中でもデータ構造に特徴があります。 本記事では私自身が実際に設計したデータ構造がサブコレクションでどう変わったかをみていくことで、サブコレクションでできることを書いていきたいと思います。 開発環境 Node (14.15.4) Firebase JavaScript SDK (8.2.4) Firestoreについて Googleが提供しているNoSQLのマネージドサービスです。 他のNoSQLと比較してWeb, Mobileからローカルデータベースのように利用できることやデフォルトで単一フィールドのインデックスが作成されていることが特徴です。 データ構造…

前提 管理画面のweb dartでfirestoreに繋ぐのは面倒 公式にはクライアントsdkしかないのでchromeとかエミュレータを立ち上げないといけない。 functionsで作っておけば、ローカルから実行することもできる リリースの初期段階で完璧に作り切ることが難しい。 ユーザは社内なのでリリース時に必須な機能でもない。 となれば、手元で少しずつコードを改善して、 公開できる段階で管理画面に機能をつければいい functionsにもメモリ制限がある 時間の制限もある。 部分的にコミットできなくないけど、難しい。 でもまあ、4Gくらいか cloud.google.com dartで複雑な…

初めまして20新卒エンジニアの水谷です。 入社してから一度も出社しておらずリモートで勤務しているため、結構前から運動不足を感じています。 入社してからはScala、Vueの研修を受け、部署に配属された後にプロダクト新規価値開発のチームでプロダクト開発の業務を行なっています。 今回は実務で学んだScalaでのクリーンアーキテクチャ、VueのAtomic Designについて思ったことを書いていきます。 クリーンアーキテクチャについて 良かったところ 悩んだところ Atomic Designについて 良かったところ 悩んだところ 終わりに クリーンアーキテクチャについて 過去に弊社のブログでも記事…

Cloud Firestore からデータを取ってこようとしたら次のようなエラーが返ってきた。 { error: { code: 9, details: "The query requires an index. You can create it here: https://console.firebase.google.com/v1/r/project/<projectName>/firestore/indexes?...", message: "9 FAILED_PRECONDITION: The query requires an index. You can create it he…

はじめに こんばんは、かべです。 ちゃんとした Web アプリを作るにはやっぱりユーザー認証機能が欲しい！ということで新規ユーザー作成、ログイン機能を実装する練習をしました。先日 Firebase の Realtime Database を使うことがあったので、流れで FIrebase Authentication を使うことにしました。 いろいろやり方を探していると良さげな Zennの記事 を見つけたため、これをなぞりながら自分でも少し機能を足していこうと思います。今回の目標は次の通りです。 新規ユーザー登録がメールアドレスとパスワードで出来る 登録したユーザーのメールアドレスとパスワードで…

こんにちは、@kenji7157です。 私はプラグラミング学習をしていると、色々なところにメモを記録していくので、大量のメモを点在させてしまいます。 そのため「プログラミング学習のメモを気兼ねなく投稿できるサービスが欲しい」と思い、以下のサービスを作りました。 本記事では、こちらのサービスの使用技術やシステム構成について簡易的ですが書いていきます。個人開発の技術選定の参考になれば嬉しいです。 （開発経緯が気になる方は以下をご覧ください。） https://note.com/kenji7157/n/n3c77ef9b3374 作ったサービス プログラミング学習時のメモを記録して投稿・共有すること…

3月を振り返りと実績値の公開、今月の開発予定です(´ω｀) 前回はこちら(´ω｀) www.memory-lovers.blog やったこと 積読ハウマッチ: アップデート0回... アップデートは0回!! あまり稼働を避けてないので、すこしずつがんばらねば。。(´・ω・｀) ウマ娘、はじめました umamusume.jp TwitterのTLみてたら、楽しそうではじめてしまった。。(´ω｀) はじめてみたらおもしろすぎるので、困る。。(´・ω・｀) 新しいのを少しずつ 思い立って、2つほど、新しいのを作ってる(´ω｀) 1つは、GoogleSpreadSheetのデータをJSONで返すAPI…

memoirのデータは全てFirestoreで管理しているのでバックアップを実装したのでメモとして残しておく コード github.com 実装 ほぼ以下のドキュメントの通り作成しただけなので手順をそのまま記載 firebase.google.com まず、保存に使用するbucketをCloud Storageに作成 名前: memoir-firestore-backup 次に定期バックアップ用のCloud Functionを作成 $ firebase init functions --project PROJECT_ID そのままTypeScriptを選択して、functions/src/i…

SREチームの三浦です。 入社して半年が経過しました。SREの取組みとして開発チームであった課題を解決するために、社内ツールを作成しましたので紹介していきます。 課題 採用技術 システム構成図 開発した感じたこと 課題 当社のサービスWowTalkのサーバーはいくつか環境があり、バージョン管理の手法が担当者に委ねられていた問題がありました。 Ex) A環境 API: v2.5.0 Web: v1.4.0 / B環境 API: v2.6.0 Web: v1.4.0 → APIのバージョンの違いを確認することをわかりやすくしたい なので、今回はバージョン管理を一元化し、チーム全員が一覧で確認できる…

前にGoMockを使ったテストコードについて記事にした事がありました。 www.wheatandcat.me 当時はGoMockしか知りませんでしたが、moqというライブラリの方が簡単に使えるという話を記事をみかけたので、memoirではmoqを使用してGo言語のテストを書いてみました。 github.com Pull Request github.com 実装 まず、以下でコマンドをインストールする $ go get github.com/matryer/moq 次にモックさせたいInterfaceを指定して、モックを作成します。 今回だと、テスト時にはfirestoreのアクセス部分をモッ…

はてなブログ独自の集計による人気記事のランキング。3月21日（日）から3月27日（土）〔2021年3月第4週〕のトップ30です*1。 # タイトル／著者とブックマーク 1 「2乗してはじめて0になる数」とかあったら面白くないですか？ですよね - アジマティクス by id:motcho 2 アジャイルな開発とチームづくり - Mitsuyuki.Shiiba by id:bufferings 3 小人プロレスと都市伝説 - 男の魂に火をつけろ！ ～はてブロ地獄変～ by id:washburn1975 4 技術的負債の生態 - maru source by id:h13i32maru 5 「シ…

本日はAlgoliaのインデックスを日付でソートする方法を簡単に紹介していきたいと思います👷‍♀️ それではやっていく インデックスをソートするにあたり、まず大前提として知っておくべきことが二点ほどあります。一つ目は、インデックス毎に一つのランキング式しか提供することができないということです。つまり、異なる方式でインデックスをソートしたい場合には、それぞれでインデックスを別途作成する必要があります。そして、そのような状況で作成するインデックスをAlgoliaではReplicasと呼びます。二つ目は、ソートに使用するattributeはbooleanかnumericalである必要があるということ…