Hatena Blog Tags
はてなブログ トップ
データウェアハウス
このタグでブログを書く
言葉の解説
ネットで話題
関連ブログ

データウェアハウス

このタグの解説についてこの解説文は、すでに終了したサービス「はてなキーワード」内で有志のユーザーが作成・編集した内容に基づいています。その正確性や網羅性をはてなが保証するものではありません。問題のある記述を発見した場合には、お問い合わせフォームよりご連絡ください。
LIVESENSE ENGINEER BLOG•8ヶ月前

SQLを作る分析用Slackbotの構築と課題

はじめに 技術部データプラットフォームグループの富士谷です。データプラットフォームグループでは、データ分析のために、データウェアハウスの開発を行っています。詳細は以下の記事をご確認ください。 made.livesense.co.jp 社内ではBIツールとして主にRedashを使っています。分析者はPdMやマーケターの方が中心ですが、必ずしも全員がテーブル構造やSQLに習熟しているわけではありません。データマートやセマンティックレイヤーを十分に構築できていないため、分析者は過去のクエリを参考にやや複雑なSQLを書くケースが多くあります。 一方、世の中では、生成AIを使って分析を支援する取り組みが…

#生成 AI#データウェアハウス#Slack Bolt#Text-to-SQL#Redash

関連ブログ

シー・エス・エス イノベーションラボ（ブログ）•8ヶ月前

Databricksで実現する「データレイクハウス」〜「データがバラバラで使えない」を終わらせる、次世代の統合基盤〜

こんにちは！デジタル・マーケティング部の神子です。 多くの企業でDXが進む中、特に建設・不動産業界でネックとなるのが「データの保管場所がバラバラ」という問題です。 現場のデータ（写真・図面）と経営データ（売上・原価）が分断されているため、「図面と収支を掛け合わせて分析したい」と思っても、正確な分析ができず、結局は担当者の勘に頼ってしまう――。 今回は、こうした課題を解決する新しい管理構造「データレイクハウス」と「Databricks」について解説します。集めるだけの管理から使える管理へ。自社のデータ戦略を見直すきっかけにしてみてください。 データの「サイロ化」と二者択一の限界 次世代の解「レイ…

#データレイク#データウェアハウス#データレイクハウス#Databricks
シー・エス・エス イノベーションラボ（ブログ）•1年前

【データプラットフォーム】データウェアハウスとデータレイクの役割を理解する

データプラットフォームの種類を理解しよう！ それぞれのメリット・デメリット データウェアハウスとデータレイクの活用事例 データ活用の「土台」を理解し、次なるステップへ この記事を書いた人 こんにちは！デジタル・マーケティング部の山内です。業務を行う中で、「データ」を使用する、使用したことがある、そんな方も多いのではないでしょうか。近年では、ビッグデータやクラウド、AIなどの技術が急速に進化し、それに伴って企業が扱うデータの量は爆発的に増えています。加えて、データの形式や種類もますます多様化しており、この膨大で複雑なデータをいかに効果的に分析・活用できるかが、今や企業の成長を大きく左右する重要な…

#データウェアハウス#データレイク#データプラットフォーム
FLINTERS BASE BLOG•2年前

Data Warehouseに沼った話

こんにちは。FLINTERS BASE 開発部 小杉です。 今回の記事は「梅雨にも負けない！ブログ祭り☔️」としての投稿です。 この会社に入社して早くも2年ですが、今回は未経験のデータエンジニアとしてキャリアを歩み始めた僕が、常日頃から疑問に感じていた「Data Warehouse」について配属後学びになったこと、自分が成長できたことをテーマに書きたいと思います。

#FLINTERS BASE#梅雨にも負けない！ブログ祭り#データウェアハウス
Safie Engineers' Blog!•3年前

dbtvault改めautomate_dvで実装するDataVaultモデリング

​データ分析基盤グループでデータエンジニアをしている平川です。 DataVaultに関する記事の第2回目となります。(第1回の記事はこちらです) 第2回の記事は、DataVaultモデリングの中心となるHub/Link/Satelliteをdbtのパッケージを利用して作っていくという内容です。 2,3回目の内容が当初と少し変わっていますので、再掲いたします。 第1回: DataVaultってなに？どんな特徴があるの？ 第2回: automate_dvを使ってDataVaultモデリングの中心となるテーブルを作ってみてわかったこと ← 今回はここ 第3回: BusinessVault、発展的なS…

#DataVault#データウェアハウス
MonotaRO Tech Blog•4年前

データ活用視点に立つ「指標」のエンジニアリング 〜DataOps Night#1 登壇後記〜

データサイエンスグループでエンジニアやっています 竹野です。 本日は先日登壇したDataOps Nightについて参加報告させていただきます。 DataOps Nightについて finatext.connpass.com 「データガバナンス」や「アナリティクスエンジニアリング」、「DataOps」といったキーワードは近年注目の大きい分野となり、イベントも盛んに行われるようになりました。 DataOps Nightもその一つで、そのテーマに「データ品質の向上に取り組むエンジニアを集めて知見を共有する勉強会」を掲げています。 データを溜めるだけではなく活用するところにまで踏み込んでいくためには、…

#データガバナンス#データ分析#データウェアハウス
Output Diary•5年前

【システム開発】BIツールとは

BIツールって何？って感じになったので 今日はBIツールについて調べていきます。 BI（Business Intelligence）ツール BIツールは、 企業に蓄積された大量のデータを集めて分析し、可視化するツールのことです。 経営管理や売上のシュミレーションなどに活用され、近年導入する企業が増えています。 メリットとしては、 ・レポート作成が短時間で出来ること ・膨大な情報の分析を素早く行えること ・専門家でなくてもデータ分析が可能なこと が挙げられます。 データウェアハウス ウェアハウスとは「倉庫」という意味です。 データウェアハウスは、業務でさまざまなデータを時系列で保管したものです。…

#ITパスポート#データ活用#BIツール#データウェアハウス#データマイニング
every Tech Blog•5年前

Delta LakeとLakehouseプラットフォームによるデータウェアハウス設計

Delta LakeとLakehouseプラットフォームによるデータウェアハウス設計 こんにちは。ビッグデータ処理基盤の物理レイヤーから論理レイヤーの設計実装、データエンジニアやデータサイエンティストのタスク管理全般を担当している、Data/AI部門の何でも屋マネージャの @smdmts です。 この記事は、弊社のデータ基盤の大部分を支えるDelta LakeとLakehouseプラットフォームによるデータウェアハウス設計の紹介です。 Databricks社が主体となり開発しているDelta Lakeをご存じでしょうか？ Delta Lakeは、Apache Sparkを利用したLakehou…

#データウェアハウス#Spark#Databricks#Lakehouse#Apache Spark