Hatena Blog Tags
はてなブログ トップ
技術的な取り組み
このタグでブログを書く
言葉の解説
ネットで話題
関連ブログ

技術的な取り組み

このタグの解説についてこの解説文は、すでに終了したサービス「はてなキーワード」内で有志のユーザーが作成・編集した内容に基づいています。その正確性や網羅性をはてなが保証するものではありません。問題のある記述を発見した場合には、お問い合わせフォームよりご連絡ください。
KADOKAWA Connected Engineering Blog•1ヶ月前

Amazon MWAA + Step Functions (+ Snowflake × dbt) による大規模データパイプライン構築事例紹介

KADOKAWA デジタル戦略局 グループデータマネジメント部（出向）の中野 (takamoto) です。 足掛け2年半の ADR 活用事例紹介 〜 ADR から始める設計ドキュメント改善 - KADOKAWA Connected Engineering Blog などの過去記事から所属は変化していますが、変わらずデータプラットフォーム上のデータパイプラインの開発・運用を主に担当しています。 私の所属しているチームでは データプラットフォーム統合プロジェクトの紹介 - KADOKAWA Connected Engineering Blog で紹介している Snowflake 環境上に構築された…

#技術的な取り組み#Data Management

関連ブログ

KADOKAWA Connected Engineering Blog•10ヶ月前

SQL クエリ (on Treasure Workflow) の単体テストを少ない手間で実現している話

Integrated Data Service 部の中野 (takamoto) です。現在は主にデータプラットフォーム上のデータパイプラインの開発・運用をメインで担当しています。 私の所属しているチームでは Snowflake を中心に構築されたデータパイプラインを主に管理していますが、 Treasure Data CDP を中心としたものについても管理しています。この Treasure Data CDP を中心としたデータパイプラインは規模がそれほど大きくはないこともあり、現在は素朴に Treasure Workflow から SQL (Presto) クエリを実行する形で構築されています。…

#技術的な取り組み#Data Management
KADOKAWA Connected Engineering Blog•1年前

足掛け2年半の ADR 活用事例紹介 〜 ADR から始める設計ドキュメント改善

Integrated Data Service 部の中野 (takamoto) です。2021~2022年頃は主に データプラットフォーム統合プロジェクトの紹介 - KADOKAWA Connected Engineering Blog で紹介されていたデータプラットフォーム開発の認証認可の開発に関わっていました。また、ここ2年弱は別チームに移り、データプラットフォーム上のデータパイプラインの開発・運用をメインで担当しています。 今回は、上記のデータプラットフォーム統合プロジェクトの開発チームに導入され、その後移った先のチームでも活用が進んでいる ADR の活用事例を紹介します。既に ADR …

#技術的な取り組み