GoogleCloudPlatform

Google Cloud社のTech Acceleration Program（TAP）にご招待頂き、開発本部のメンバーで参加してきました。 本エントリーではTAPの詳細や参加した感想などについて紹介したいと思います。 Tech Acceleration Program（TAP） TAPはGoogle Cloud社が提供している開発内製化を目指す会社や組織のためのアジャイル型の開発支援ワークショップです。 cloud.google.com このプログラムでは開催中Google Cloud社のエンジニアの方がつきっきりで最適なアーキテクチャ設計〜プロトタイプ開発について、サポートしてくれます。 …

GCPのサービスについて勉強中なので、各サービスについて概要をまとめ。 この手の記事は世の中にたくさんあるけど自分用メインということで。 のその３ Google Compute Engine 仮想マシンのサービス。いわゆる IaaS 。 あらかじめ決められたスペックの中から選ぶのではなくCPUやメモリを任意の設定を行うことができる。 いつ解放されるわからないけど（最長24時間）格安なプリエンティブルVMがある。 Google Kubernetes Engine 名前からわかる通りKubernetesのクラスタを動作させるための環境。 Kubernetesでオーケストレーションとか諸々管理する上…

GCPのサービスについて勉強中なので、各サービスについて概要をまとめ。 この手の記事は世の中にたくさんあるけど自分用メインということで。 のその２ カテゴリ分けせずに雑多に並べてます。 Cloud Storage オブジェクトストレージ ストレージクラスというものが設定されている。 最小保持期間が長ければ長いほど１回のアクセスする料金が高くなる。 ストレージクラス 最小保持期間 用途 Standard なし 頻繁にアクセスされるデータ向け Nearline 30日間 月1回程度アクセスするようなデータ向け Coldline 90日間 四半期に1回程度アクセスするようなデータ向け Archive…

GCPのサービスについて勉強中なので、各サービスについて概要をまとめ。 この手の記事は世の中にたくさんあるけど自分用メインということで。 Cloud SQL マネージドなMySQL、PostgreSQL、SQL Server。 基本的にはオンプレのそれと同じ機能を提供してくれるけど一部提供されていない機能もある。 Cloud Spanner グローバル（世界規模）でスケーリング可能なRDB。 負荷に応じで自動的にスケーリングしてくれ、めちゃくちゃスケーリングしてもACIDは担保してくれる。 トリガーやストアドプロシージャはサポートしていない。 Dataproc マネージドなSpark、Hado…

GCP の継続的デリバリのための新しいサービスとして、Google Cloud Deploy (以下、Cloud Deploy) が登場しました。 どんなものか触ってみました。 Google Cloud Deploy とは デリバリパイプラインからマニフェストのレンダリング (YAML の生成) を分離することで、よりシンプルに継続的デリバリを実現するためのマネージドサービス、と理解しています。 マニフェストのレンダリングとデプロイには Skaffold が使用されています。 この記事の執筆時点 (2021年9月27日) では Preview のサービスとなっています。 Google Clou…

こんにちは、フロントエンドエンジニアの高橋です。 先日Puppeteerを使った業務効率化のツールを作成しました。 その時参考にさせていただいた記事と一緒にその構成についてまとめたいと思います！ Puppeteerをこれから触る方に少しでもお役に立てればと思います…！ 何を作るのか あまりオープンにできないのですが、webでの操作を半自動化するツールです！ 作りたいものの流れとしては以下の通りです。 必要な情報をフォームで入力 データをどこかにためておく 入力した値を元にPuppeteerを動かす 結果をSlackで通知する では構成についてまとめていきたいと思います。 構成 早速ですが、以下…

概要 意外と言及している記事が見当たらない、GCEのVMインスタンスからCloud SQLインスタンスに対してネットワークタグを使った接続制限を行う方法を記載する。方法としてはプライベートサービス接続を作成し、VMとCloud SQLをプライベートIPで接続可能とした上で、VMからの送信トラフィックをデフォルト拒否、接続させたいVMのネットワークタグだけ送信トラフィックを許可する形。

はじめに こんにちは、@_mkazutakaです。 今回は、Terraform + Cloud Runを使ったDifyの環境構築と運用についてTerraformのコード等を交えて紹介します。 Cloud Runを採用することで、土日や深夜帯などアクセスがない時間帯のコストを最小限に抑えれたり、VM上で運用するより管理コストを下げることができます。 社内環境にはうってつけですね。

こんにちは！インフラ担当の米田です。 Google Cloudには色々なサービスがありますが、みなさんは一通り使ったことはありますか？ 最近はフェンリルでもGoogle Cloudを使ったプロジェクトの話を耳にするようになってきたこともあり、これを機に『Google Cloud ことはじめ』として色々なサービスに触れてみることにしました。 今回テーマにするGoogle Cloudサービスは、Google Kubernetes Engine（以下GKE）です。 GKE Clusterの作成・アプリケーションのデプロイ・コンソールでの確認までの流れを実践してみましょう。 Google Kubern…

※ 掲載内容は寄稿日現在の情報です。現在も本記事の職種が同条件で募集されているかどうかは要確認 はじめに 株式会社Luupは、電動キックボードや電動アシスト自転車などの電動マイクロモビリティのシェアリングサービス「LUUP（ループ）」を展開する先進的な企業です。現在、Luup社ではWebフロントエンジニアを募集しています。この記事では、Luup社の事業内容や、Webフロントエンジニアとしての役割、業界の将来性などについて詳しく解説していきます。 Luup社とは：次世代モビリティサービスの先駆者 Luup社は、"街じゅうを「駅前化」するインフラをつくる"というミッションを掲げ、2018年に設立さ…

この記事は個人ブログと同じ内容です www.ritolab.com // .table-warp {overflow-x: scroll;} GCP コスト管理の重要性と可視化の必要性 クラウドコンピューティングの普及に伴い、多くの企業が Google Cloud Platform (GCP) を利用しています。しかし、クラウドサービスの利用が拡大するにつれて、コスト管理の重要性も増しています。効果的なコスト管理は、ビジネスの収益性と持続可能性に直接影響を与える重要な要素です。 GCP の課金システムは柔軟で詳細ですが、その複雑さゆえに、実際の使用状況と費用を把握することが困難な場合があります…

大規模データベース移行の技術的チャレンジと実践例に参加しました。今回は久しぶりのオフライン参加。簡単に所感をまとめます。 findy.connpass.com 所感 久しぶりにオフラインのイベントに参加しました。 全体的に共通してたのは、データベース移行は組織全体で取り組むものであり、事前の準備が重要であるとのこと。以前、GitHub の MySQL 5.7 から 8.0 アップグレードの話のときにも同じようなことを言ってたような気がする。データベース移行は、組織の馬力が試される案件だなと思いました。 あと、SQL 8億本のテスト自動化すごい。月次で動くバッチとかもあるはずなので SQL の収…

こんにちは。バックエンドエンジニアの阿部です。Goが好きです。 今回のブログは、動画品質の指標の１つとなるVMAFスコアというものを可視化した話です。 ※VMAFスコアの取得はffmpegコマンドを利用しますが、今回はffmepgの細かい内容については説明はしません。 VMAFとは 動画配信では、元の動画素材をそのまま配信しようとするとその容量が大きすぎるため圧縮を施したり、最適な動画形式への変更を行うなどのエンコード作業が必要不可欠となりますが、その画質やビットレートなどをどこに着地させて品質を担保するかは、長年の経験や勘、主観など人的要素での決定が大きかったのではないでしょうか。 VMAF…

はじめに Dataflow Templateとは 前準備 関連リソースのセットアップ Service Account の設定 設定ファイル等の作成 Protoファイルの用意 Jsonの設定ファイルの作成 実行 まとめ はじめに Cloud Dataflow に興味があったため、休日を使って少し遊んでみました。 この記事では、0の状態から、Mercari社が提供している Dataflow Template を使って、BigQueryからPubSub Topicへとデータを転送することをゴールとしています。 具体的には次のようなことを行います。 Mercari Dataflow Templateを…

Customers Mail CloudのWebhookは2種類あります。 メール受信時 メール送信時 メール送信時は、送信したメールに対してステータスが変わったタイミングで通知が送られるものです。 その際、 application/json を指定しない設定ができます。この時のデータがどうなっているのか紹介します。 <!—more—> Google Cloud Functionsの準備 今回はローカルで開発する流れを紹介します。まず、適当なフォルダを作成します。今回はcmcとします。 mkdir cmc cd cmc 次に hello_http.go というファイルを作成し、以下のように記述…

Customers Mail CloudのWebhookは2種類あります。 メール受信時 メール送信時 メール受信時のWebhookはその名の通り、メールを受け取った際に任意のURLをコールするものです。この記事では添付ファイル付きメールを受け取った際のWebhook処理について解説します。

Customers Mail Cloudではプログラム側からデータを取得したり、メールを送信するWeb APIの他に、Customers Mail Cloudでメールを受信した時にイベントを伝えてくれるWebhook APIが用意されています。 Webhook APIを使うことで、自前でメールサーバを立てずにメール受信のタイミングでシステムを起動させられるようになります。メールサーバを安定して動作させ続けるのはメンテナンスコストが大きいですが、Customers Mail Cloudを使うことで簡単にメールと連携したシステムが作れるようになるでしょう。 今回はGoogle Cloud Func…

前提 手順1. Cloud Functionsが作ったArtifact RegistryのリポジトリをTerraformにimportする 手順2. Artifact RegistryにCleanup Policyを適用する 他のソリューション 前提 Google Cloudの Cloud Functions の第2世代ではデプロイする時には自動的に Artifact Registry にDockerイメージが作られます。 cloud.google.com デプロイ時に自動的にDockerイメージを作ってくれるので利用者側では全然気にすることはないのですが、作られたイメージは消えないので頻繁に…

意外と参考記事がなかったのでメモを残します。 インストールまではスムーズですがその後のセキュリティ絡みのところが面倒でした。 前提 Google Cloud SDK（gcloud CLI）のインストール済み 参考記事：gcloud CLI をインストールする | Google Cloud CLI のドキュメント GCSのバケットを作成してある 手順 1. Macfuseのインストール $ brew install --cask macfuse 過去記事では macfuse ではなくosxfuse をインストールするものもありますが osxfuse has been succeeded by m…