Google Cloud Platform

はじめに 最近、GCP(Google Cloud Platform)を少し触ろうと思い、せっかくならTerraformでリソース管理しようとしたのだが、Terraform CloudとGCPを接続する方法の記事が日本語だとあまり見つからなかった。 そもそも、「Terraform Cloud GCP」みたいな検索クエリだと検索意図を「Terraform Google Cloud Platform」とも解釈されてしまうため"非Terraform Cloud"の記事も多くヒットしてしまって目的の記事を探すのが難しいという課題もある。 そこで、一つでもTerraform CloudとGCPに関する記事…

こんにちは、虎の穴ラボのA.M.です。 今回は、Google Cloud Platform(以降、GCP)の機能である「Cloud Trace」を使ってみましたので、その紹介をしたいと思います。 目次 目次 前提 Cloud Trace とは 対応言語 設定方法 サービスアカウントの作成 ライブラリのインストール 環境変数の追加 ローカル環境でトレースを有効にする Traceの確認方法 Trace エクスプローラ 分析レポート 費用について 導入する際の注意事項 まとめ 採用情報 前提 開発環境： MacOS 開発言語: ruby 3.0.5 フレームワーク: Ruby on Rails 6.…

Google Cloud のロードバランサ (Cloud Load Balancing) でクライアント認証が行えるようになりました。 この記事では、ロードバランサにクライアント認証の機能をセットアップして動作を確認するまでの流れと、使ってみての気付きなどをご紹介します。 概要 今回リリースされた機能は、クライアントとサーバが TLS プロトコルを用いて互いに認証を行うことから、公式ドキュメントでは mTLS (mutual TLS, 相互 TLS) 機能と表現されています。 通常の HTTPS 通信ではクライアントがサーバやロードバランサを一方的に検証しますが、サーバ/ロードバランサによるク…

こんにちは！エンジニアのオリバーです。最近、個人で翻訳するときに ChatGPT に英訳、和訳させてみることが多くなってきたこの頃です。 久々に少し長めの技術記事を書かせていただきました。最近のトレンドである（と思っている）多様なデータを素早く安全に Google Cloud Platform (GCP) 上で活用するための記事になっています。記事後半には Terraform のサンプルと一緒に構成の説明がありますので興味ある方は最後まで読んでいただければと思います。 直近、GCP の BigQuery にアプリケーションのデータをニア・リアルタイムで同期できる Change Data Cap…

GCP関連でプログラムを作っていて、ちょっとしたデータを保存したいことがありました。 データベースを立てるほど大げさなデータでもないし、データ間で結合クエリを書くこともなさそうな単発のデータでした。 そもそも、データベースを立てると、使っていない時もインスタンスの料金が発生するので、データベースを立てるのは選択肢から外しました。 Google Cloud Storageに保存するのが良さそうだったのですが、Firestoreも同様の用途に使えそうだったので、今回Firestoreを使ってみました。 これからも手軽にFirestoreを使っていきたいのですが、FirestoreはCloud St…

普段Google BigQueryでは簡単な集計SQLしか使っていないのですが、集計SQL以外にも色々便利な機能があります。 ただ、使用頻度が高くないので、いざ使おうとするとマニュアルを探すところから始まるので、自分用に簡単な使い方をまとめておこうと思います。 ここではスケジュールされたクエリをまとめました。 「BigQueryの少し凝った使い方メモ」記事一覧 BigQueryの少し凝った使い方メモ（ビュー・マテリアライズドビュー・テーブル関数） BigQueryの少し凝った使い方メモ（テーブル作成・データ更新） BigQueryの少し凝った使い方メモ（スケジュールされたクエリ） BigQue…

普段Google BigQueryでは簡単な集計SQLしか使っていないのですが、集計SQL以外にも色々便利な機能があります。 ただ、使用頻度が高くないので、いざ使おうとするとマニュアルを探すところから始まるので、自分用に簡単な使い方をまとめておこうと思います。 ここではプログラミング関連をまとめました。 「BigQueryの少し凝った使い方メモ」記事一覧 BigQueryの少し凝った使い方メモ（ビュー・マテリアライズドビュー・テーブル関数） BigQueryの少し凝った使い方メモ（テーブル作成・データ更新） BigQueryの少し凝った使い方メモ（スケジュールされたクエリ） BigQueryの…

大規模データセットのクエリエンジンは、大量のデータに対して迅速かつ効率的にクエリを実行するためのシステムやソフトウェアのことを指します。これらのエンジンは、データの分析やレポーティング、リアルタイム処理などのニーズに応えるために設計されています。以下に、いくつかの代表的なクエリエンジン、機能、そしてその適用例について詳しく説明します。 代表的な大規模データセットのクエリエンジン Apache Hive 概要: Hiveは、Hadoopの上に構築されたデータウェアハウスシステムで、SQLライクなクエリ言語（HiveQL）を使用してHadoop上のデータを操作できます。 特徴: データをテーブル形…

市場概要 世界の小売クラウド市場規模は2023年に500.9億米ドルと推定され、2024年から2030年にかけては年平均成長率(CAGR)18.7%で成長すると予測されています。この拡大は主に、小売業者の業務に費用対効果の高い効率的なソリューションを提供するクラウドコンピューティングの採用が増加していることが要因です。さらに、小売業界では拡張性と柔軟性の需要が高まっており、クラウド技術はこうした需要に応えることができます。これにより、企業は変化する市場状況に迅速に対応することが可能になります。例えば、2023年5月には、WHSmith North America(WHSNA)がオラクルの最先…

はじめに サーバーレスアーキテクチャは、近年急速に普及しているクラウドサービスの一つで、開発者がインフラの管理を意識せずにコード開発に集中できるという利点があります。特に初心者でも導入がしやすく、運用コストの削減や自動スケーリングなど、数多くのメリットが提供されています。一昔前はサーバーを構築するには専門知識が必須でしたがクラウドサービスの登場により様変わりしました。本記事では、サーバーレスの基礎知識を踏まえながら、そのメリットとデメリットについて詳しく解説し、導入する際の判断ポイントを紹介します。 1. サーバーレスのメリット 1.1 コスト削減 サーバーレスは「使った分だけ支払う」課金モデ…

Repro では AWS 等のリソース管理に Terraform を活用しています。 この度 Terraform で管理しているコードの CI を Atlantis に移行したので、その経緯などについて書きます。 背景 Repro では以下のリソースを Terraform を使ってコード化して GitHub で管理しています。 AWS で構築したインフラ DataDog のモニターやアラート Google Cloud Platform で利用している一部のリソース GitHub の reproio organization のメンバーやチーム Kafka Topic MySQL アカウント P…

スペック アップデートの設定 確認対象を「セキュリティ＆推奨」に変更する 日本語入力への変更を Ctrl + Space に変更する メニューバーの日本語（Mozc）よりツール→プロパティを開く。 下部の「キー設定」から「キー設定の選択→編集」を開きます。 「入力キー」で Hankaku/Zenkaku のものを Ctrl + Space に変更します。 入力キーでソートして漏れなく変更し、ログインしなおして反映を確認します。 日本語入力を ibus から fcitx5 に変更する デフォのテキストエディタなどで日本語入力時に重複して入力されるようなおかしな挙動が発生するため 日本語入力を変更…

もう生成AIのサブスクに疲れた？Google AI Studioで無料＆高機能AIを体験しよう！ 見込み読者: 生成AIに興味がある人、生成AIのサブスク料金に悩んでいる人、Google AI Studioを使ったことがない人 Imagecreator用プロンプト: - Google AI Studioのロゴが画面に表示されているノートパソコン。miniture - 人間の顔が半分で、もう半分はAIの回路になったようなイメージ。近未来的な雰囲気で。miniture - クレジットカードが燃えている様子。miniture ChatGPTが登場して以来、生成AIブームはとどまるところを知りません。…

はじめに 前回の振り返り プロジェクトの作成 Google Sheets(スプレッドシート) Google Apps Script(GAS) Web APIの公開リスク セキュリティを考慮したWeb API設計 認証機能を備えた実行可能API 実行テスト 実行可能APIのデプロイ Google Cloud Platform デプロイの完了 API呼び出し はじめに 本シリーズでは，Google Apps Script (GAS) と ESP32 を使って，外出先から自宅のPCをリモートで起動する方法を紹介しています。あくまで個人的な実践経験を共有することが目的のため正確性に欠ける部分があるかも…

Hunting for enemy infrastructure in Japan 8月に検知した情報をまとめました。 Total period 8/1~8/31 Total number of c2 servers found 220IP Type of C2 servers found 8月に観測されたC2サーバーの中で最も多かったのは「Viper/Asset Reconnaissance Lighthouse (ARL)」でした。この組み合わせについて、Duskrise社はそれがNAIKONというAPTグループに関連している可能性があると指摘しています。*1 ただし、C2以外のサンプルが…

2024年9月6日に、QYResearchは「Webサービス・クラウド―グローバル市場シェアとランキング、全体の売上と需要予測、2024～2030」の調査資料を発行しました。本報告書は、Webサービス・クラウドの世界市場を分析し、主要企業の売上、動向、市場規模、市場シェア、ランキングなどを掲載しています。また、地域別、国別、製品タイプ別、用途別に市場を分析しています。2019-2030年の売上に基づいて、Webサービス・クラウドの市場規模を推計と予測しています。企業が事業成長戦略を策定し、競争環境を評価し、市場ポジションを分析し、Webサービス・クラウド関連情報に基づくビジネス上の意思決定を行…

ポイント 初心者がプログラミングを始めるなら「Ruby」と「PHP」がおすすめ。 RubyとPHPなら個人的には「Ruby」がおすすめ。 「Ruby」アプリケーションを公開するサーバーの種類はPaaS、VPS、IaaSの3つがある。 RubyとPHPを比較する それぞれの言語の特徴 Ruby PHP Python Java Webプログラマーになるなら「Ruby」と「PHP」がおすすめ 「Ruby」と「PHP」ならどっちがおすすめ？ Railsアプリを公開するサーバーの種類 PaaS（パース）とは？ 代表的なPaaS VPS（ブイピーエス）とは？ 代表的なVPS IaaS（イアース）とは？ 代…

FSコミュニティで原文を読む 現在の急速に成長するデータの世界では、組織は需要に対応するために常にストレージ能力を拡張する必要があります。この記事では、スケールアップ、スケールアウト、ストレージ仮想化、クラウドストレージ、およびソフトウェア定義ストレージなど、さまざまなストレージ拡張戦略について説明し、増加するストレージニーズに効果的に対処する方法について洞察を提供します。 スケールアップストレージ 既存のストレージシステムを拡張するための1つの潜在的な戦略は、ディスクドライブ、ソリッドステートドライブ（SSD）、またはストレージコントローラーの数量を増やすことです。この手法は一般的に「スケー…

はじめに 対象読者 申請から検証完了まで 事前準備 申請開始 OAuth 同意画面 スコープ 省略可能な情報 概要 Google からのフィードバック アプリのスキャンから LOA 提出 デモ動画 まとめ はじめに こんにちは、PE課（プロセスエンジニアリング課）の江利です。 前回の投稿から時間が空いてしまったため所属が変わりましたが業務内容は特に変わっていません。 今回は Not A Chat をリリースするにあたって Google API の制限付きスコープの OAuth 検証を受けた話です。実は結構短いスパンで審査のレギュレーションが変更になっていそう*1なので私が実際に2024年6月に…