GCS

Cloud Storage(GCS)概要 Google Cloudが提供しているストレージサービス。 様々なデータ(Json,PNG..)を容量無制限でセキュアかつ高い耐久性で管理することができる。 GCS操作は、コンソールの他に gsutilコマンド やクライアントライブラリで操作することができる。 料金体系 ストレージ(保存するデータ量) オペレーション(ダウンロード回数など) ネットワーク(読み取りデータ量。書き込みは無料) ストレージクラス ストレージクラスとは、ストレージの種類のことで、データ保存・取得にかかる料金が異なる。 ストレージクラス種類まとめ オブジェクトとバケット GCS…

GCP関連でプログラムを作っていて、ちょっとしたデータを保存したいことがありました。 データベースを立てるほど大げさなデータでもないし、データ間で結合クエリを書くこともなさそうな単発のデータでした。 そもそも、データベースを立てると、使っていない時もインスタンスの料金が発生するので、データベースを立てるのは選択肢から外しました。 Google Cloud Storageに保存するのが良さそうだったのですが、Firestoreも同様の用途に使えそうだったので、今回Firestoreを使ってみました。 これからも手軽にFirestoreを使っていきたいのですが、FirestoreはCloud St…

はじめに こんにちは！ 株式会社BFT名古屋支店・新米エンジニアのゆいちゃです！ 皆さんはどのような時に夏を感じますか？私は最近、朝起きると蝉の鳴き声が聞こえてくるようになり、あー夏だなと感じています。蝉を捕まえて遊んだあの頃が懐かしい、、、 さて、前回は仮想マシンを作成するサービス「GCE」についてアウトプットさせていただきましたので、今回は「GCS」についてアウトプットしていきたいと思います。 GCSってなに？ GCSとは、「Google Cloud Storage」の略称で、GCPが提供している、インターネット上でデータを保存することができるサービスです。 AWSでいうと、Amazon …

Cloud Storage*1使っていますか？ 私は最近、画像の保存場所によく使っています。 最近使ったものだと、大学のプロジェクトで作っているWebアプリのユーザアバターを保存する場所として使っています。 github.com さて、このCloud Storageですがテストを書いたりデバッグをする中でローカルで実行させたいという話題がでます。 そのため、このブログではCloud Storageをdocker-composeで実行させる方法とかちょっと便利な使い方とかを紹介します。 fake-server Cloud Storageは公式でローカルのDockerイメージは提供されていません。…

末尾に日付を入れてシャーディングすることがよくあると思います クエリ実行時の日付を自動で入れる時のメモ 結論から DECLAREで変数を宣言 今日の日付を取得する関数の作成 宣言した変数にテーブル名と関数をくっつける EXECUTE IMMEDIATEで変数を入れたcreate文を実行する 例 DECLARE table_name STRING; create temporary function getDate() AS (FORMAT_DATE("%Y%m%d", current_date('Asia/Tokyo'))); set table_name = "{dataset-name}.…

GoogleCloudStorage with Python はじめに 最近、コンテナ化が結構いろいろなところで進んでいますよね、特にGCPでサーバレス環境なんか構築したりした際は、 ファイルを保存したりせず、GCSに保存したデータを直でメモリに展開したいですよね。 (ローカルにデカイファイルを載せるのはコンテナが不安定になるため。) そうした際に便利なのがgcsfsという機能です。 今回はgcsfsの概要と、使い方について説明します。 gcsfs概要 GCSFSは、pandasやdaskなどの機能拡充＋GCSを通常のopen()コマンドのように使える機能を追加したもの。 Document :…

はじめに 環境 ミッション背景 要件 基本要件 追加要件 どんな環境でも簡単に見れるとは？ 前提 当初考えていたレポーティング手法 上司からのFB 実現の必要が出てきたレポーティング ハードルと思考 最終目指した形 実装概要 実装 URLを設定（作成）し、GCSにPDFをアップ GCSリンクから短縮URLを取得 短縮URLをLINEにて送信 トークンの発行 グループにLINE Notifyを追加 GCSから消す設定をする 効果 まとめ はじめに こんにちは。データサイエンス部の九町（くちょー）です。今回は”サイエンス”とは関係ないのですが、会社のマクロ業績報告を自動化してみたお話をしたいと思い…

クラウドオブジェクトストレージサービスの使い方 「クラウドオブジェクトストレージサービスの使い方」発行主旨・内容紹介 「クラウドオブジェクトストレージサービスの使い方」目次 「クラウドオブジェクトストレージサービスの使い方」Amazonでの購入はこちら 「クラウドオブジェクトストレージサービスの使い方」楽天市場での購入はこちら※電子書籍版です クラウドオブジェクトストレージサービスの使い方 インプレスグループでIT関連メディア事業を展開するインプレスは、技術書典や技術書同人誌博覧会をはじめとした各種即売会や、勉強会・LT会などで頒布された技術同人誌を底本とした商業書籍を刊行し、技術同人誌の普及…

米・Baker Hughes社 ２０２４年９月 サウジアラビア・石油リグカウント ３２カウント 前月比、５．９%減 前年同月比、２５．６%減 注) グラフの青色の部分は、米国の景気後退期間。 bakerhughesrigcount.gcs-web.com

米・Baker Hughes社 ２０２４年９月 世界のリグカウント １７５１カウント 前月比、０．９％増 前年同月比、０．５％減 グラフの青色の部分は、米国の景気後退期間。 bakerhughesrigcount.gcs-web.com

敗血症とは血液が敗ける症(病)であり、血液の中に菌が繁殖している病気と考えて下さい。血液中に菌が繁殖しているのですから、病気としては大変重篤です。 こうした場合、SOFAというスコアがあります。このスコアでは採血結果所見が必要です。在宅医療ではすぐさま採血結果が分からないことより、臨床症状から判断するしかありません。こうした敗血症に対しqSOFA(Quick Sequential Organ Failure Assessment)という診断ん基準があります。 呼び方はクイックソーファです。具体的には感染症を疑った場合、以下の3項目のうち、2項目を満たす場合は敗血症の可能性ありと判断できます。 …

ＥＩＡ、米・BakerHughs社 ２０２４年６月 サウジアラビア原油生産性 ２１．２万バレル／日・リグカウント 前月比、１０．６％減 前年同月比、１３．０％減 www.eia.gov bakerhughesrigcount.gcs-web.com

はじめに はじめまして。 レバレジーズデータ戦略室、データアーキテクトグループの鵜飼です。 IT人材領域の営業を2年経験した後、2024年4月にデータ戦略室に異動しました。 異動して半年が経った今、データ戦略室で働く中で営業時代の経験が活きたことや、逆にギャップに感じたことなどを振り返ろうと思います。 未経験でデータ職種への挑戦を考えている方だけでなく、データ職の方が現場と仕事をする上で少しでも参考になれば幸いです！ 異動の経緯 入社してから2年間、IT人材転職領域の営業を行いながら、マネジメント業務等幅広い経験をさせてもらっていました。 2023年5月にデータ戦略室への異動の打診があり、営業…

toittaチームSREのid:cohalzです。 この記事は、はてなのSREが毎月交代で書いているSRE連載の9月号です。8月の記事はid:walnuts1018さんのはてなブログや GigaViewer で使われている画像変換プロキシを EC2 から EKS に移行しましたでした。 はてなでは2024年7月に生成AIを活用したtoittaというサービスをベータ版でリリースしました。現在正式リリースに向けて準備中で、無料トライアルも実施中です。 ja.toitta.com このサービスはビジネス向けのSaaSアプリケーションで、インフラはGoogle Cloud上に構築しています。 ユーザー…

はじめに 鍵盤ゲーの中でもマイナーな10kに関して自分が大事だなと思ったことを時期別にまとめてみました。メモ書きに近いのでだいぶ読みづらいかもしれませんがご了承ください。 始めたて〜6th dan辺り？ 指とレーンの1対1対応を身につける(要するに10kに慣れる)ことが大事なのでとにかくいろいろな譜面に触れるCランクやBランクを何度も取るけど特に気にしない10kは他のモードと比べてノート数が少ないので始めたてで98〜99%などの高い精度を出すのは難しいので同じ譜面を何回も遊ぶとしても97％取れたら他の譜面に手を出した方がいい おすすめ譜面 10k2s collection(lv.1〜lv.9)…

0. はじめに 1. GCPベースでのマイクロサービス全体設計 マイクロサービス基盤においてGCPを選定する理由・観点 マイクロサービスアーキテクチャとはどういうものか マイクロサービスの設計観点 マイクロサービス設計で意識すること GCPにおけるマイクロサービス実装パターンについて マイクロサービスにおけるシングルテナントとマルチテナント どこまで共通化・標準化するのか？ GCPにおけるポリシーコントロール GCPにおける標準ライブラリの実現について 2. UX/UI (Webアプリ、モバイルアプリ) 2.1. Webアプリ UX/UIのビジネスロジックをバックエンドに寄せる必要性 SPAか…

前回はコーチングに興味を持って、コーチングを学ぼうと思い立ったきっかけまで書きました。 今回はその思いからコーチングの学び方や学べる先を探すわけですが、結果銀座コーチングスクールに決めた経緯についてお話しできればと思います。 コーチという名称は独占資格ではないため名乗ることができます。実際に私もコーチングスクールで学んでいる最中ではありますが、すでにブログなどでは学ぶ前からコーチという肩書きを名乗っています。それは自分のやりたいことを端的に表現、言い表すには「コーチ」という肩書きは「先生」や「専門家」より使いやすい点もあります。 早く自分の気持ちの中でももっとしっかりと自信を持っていけるように…

https://lite.tiktok.com/t/ZS2gcs8RA/ だったのかな そしたら絶縁してきた人達と会うこともなかったし…いらぬ争いも起こらない

Deno KVを活用してDeno deployにホストしたサービスのアクセスログを記録する 目的は公開しているサービスの利用状況をしっかり確認したかったというところから、アクセスログ記録するかという流れ もともとやりたいとは思っていたがぐだぐだしていたらかなり時間が経ってしまった とりあえず取れる情報はすべて取っておきたいのでrequestオブジェクトの内容はすべて記録するようにした Denoサーバ側の実装 簡単な例 logger.ts import { ulid } from "jsr:@std/ulid"; const EXPIRE_LOGS_DAYS = 90; const logObj…