Databricks

このタグでブログを書く

言葉の解説

ネットで話題

Databricks

このタグの解説について

この解説文は、すでに終了したサービス「はてなキーワード」内で有志のユーザーが作成・編集した内容に基づいています。その正確性や網羅性をはてなが保証するものではありません。問題のある記述を発見した場合には、お問い合わせフォームよりご連絡ください。

every Tech Blog•3日前

Lakebaseの認証実装とORM選定をした話

はじめにこんにちは、株式会社エブリーのデリッシュキッチンにて7月から約1か月間エンジニアとしてインターンシップに参加していました、亀井と申します。この記事では、インターン中に取り組んだことの中心である「Databricks LakebaseへのOAuth M2M認証の導入」と、その先でデータを読むための「GoのPostgreSQL向けライブラリ選定」の2つについて、どう実装・検証・調査したのかを書きたいと思います。インターンで取り組んだことインターンでは、Go言語で書かれたデリッシュキッチンのAPIサーバーを主な対象として、次の4つに取り組みました。デリッシュAIの表示順ソートのロジ…

#LakeBase#Databricks#インターンシップ

ネットで話題

94ブックマーク AIエージェントを支える次世代データ基盤 - Snowflake / Databricks / Google が挑む仮想グラフ戦略

zenn.dev

51ブックマーク Databricks社がOSS化したSpark用ストレージレイヤ「Delta Lake」について - たけぞう瀕死ブログ

takezoe.hatenablog.com

45ブックマーク Databricks Genie Ontologyとは何かセマンティックレイヤー・ナレッジストアとの関係を整理する - Qiita 既存のナレッジストアとの関係オントロジーがGenie Agent(旧Genie Space)でも効くとなると、従来のナレッジストアの立ち位置が気になります。ここも置き換えではなく共存で、スコープによる役割分担になります。ナレッジストアの正体ナレッジストアは、Spaceレベルのメタデータ、プロンプトマッチング(format assista...

qiita.com

44ブックマーク無料で商用利用も可能なオープンソースの大規模言語モデル「Dolly 2.0」をDatabricksが発表

gigazine.net

38ブックマーク Databricks、サーバレスPostgresを提供する「Neon」の買収を発表

www.publickey1.jp

32ブックマーク Databricks Apps (FastAPI + htmx) で簡単社内アプリ作成 - Qiita

qiita.com

30ブックマーク Databricks ＋ BigQueryでSSOTを実現しようとしている話 - バイセル Tech Blog

tech.buysell-technologies.com

30ブックマーク 2027年、データ基盤はどう変わる？SnowflakeとDatabricksのロードマップから読み解く未来 - Qiita

qiita.com

28ブックマークデータベース市場の“ゲームチェンジャー”となるか？ DatabricksがAI時代の新DB「Lakebase」を発表

news.mynavi.jp

関連ブログ

運び屋 (A carrier(forwarder) changed his career to an engineer)•4日前

Databricks の FILE 型で NAS 上のファイルを扱う — FSx for ONTAP S3 Access Point 接続の現状と設計の勘所

この記事は、DEV Community で公開している「FSx for ONTAP S3 Access Points × Lakehouse Deep Dive」シリーズの続きを、日本語読者向けに再構成したものです。単純な翻訳ではなく、検証結果と設計判断、日本のエンタープライズ環境での読みどころを補足しています。本シリーズの Part 2: Databricks × Amazon FSx for NetApp ONTAP S3 Access Points — レイヤーごとの境界検証の続報です。Part 2 の時点から結果が変わった点があるので、そちらを読まれた方は「読み取りが通らない原因」…

#AWS#NetApp#Databricks#S3 Access Points#Files

every Tech Blog•5日前

LakebaseはUnity Catalogのデータをアプリに届ける選択肢になるか

はじめにこんにちは、開発1部でデリッシュキッチンの開発をしている蜜澤です。現在データ基盤はDatabricksを使用しており、データはUnity Catalog（以下UC）のテーブルです。 UCのテーブルをプロダクトのAPIから配信したいという状況が直近の1年で増えてきました。例えば、「レコメンド結果をアプリの画面に出したい」「集計したアプリのログデータを分析できる社外向けのダッシュボードツールを作成したい」といった要望があります。これをアプリ側から読めるようにするには、UCのテーブルのデータをAPIが参照できるDBに複製する必要があります。DatabricksのLakebase（マネ…

#LakeBase#UnityCatalog#Databricks

Vポイントマーケティング｜TECH LABの Tech Blog•5日前

データベース設計をエージェントに任せる、「Vibe Data Modeling」について

こんにちは、VポイントマーケティングAIエンジニアの三浦諒一です。私はあまりこれまでデータベースの設計には関わることはなかったのですが、未加工の状態のデータが存在するブロンズレイヤーと、アプリやBIツールが参照するゴールドレイヤーの間に位置するシルバーレイヤーの設計の重要性は日々の業務の中でも感じることがたくさんあります。例えば数値情報の取り扱いが異なるテーブル間で統一されていなかったり、カラム名が異なるテーブル間でブレがあったりすると、それだけでもゴールドレイヤーの構築に悪影響を与えてしまいます。最近ソフトウェアの開発にコーディングエージェントを使うことが増えてきましたが、変数名の付…

#AI#Databricks

Vポイントマーケティング｜TECH LABの Tech Blog•1ヶ月前

Difyの会話ログをDatabricks MLflowに記録する。

こんにちは、VポイントマーケティングAIエンジニアの三浦諒一です。この前外に出たら蝉の鳴き声が聞こえてきました。気温も高くなってきたし、そろそろ夏がやってきたようです。今年はAIエージェントの年！と言いたくなるほど毎日AIエージェントのことについて考えている気がします。色々なAIエージェントを使ったり作ったりしているのですが、それらの利用状況をどこか一箇所にまとめたいな、と思っていてその環境としてDatabricksを検討しています。以前はコーディングエージェントのログをDatabricksに記録する、といったことを試していて、その内容はこちらの記事にまとめています。 techblog.…

#Databricks#Dify#AI

Vポイントマーケティング｜TECH LABの Tech Blog•1ヶ月前

DatabricksのOmnigentを試してみる。

こんにちは、VポイントマーケティングAIエンジニアの三浦諒一です。もう7月なのですが、今のところ東京は雨の日が多く、梅雨らしい天候が続いています。こんなに梅雨らしい梅雨は、なんだか久しぶりな気がしています。今年のDatabricksの年次のイベント「DATA＋AI SUMMIT」のキーノートの動画が公開されていたので見てみました。AIエージェントを本格的に利用するために必要なデータや基盤に関するアップデートが多く、とても興味深かったのですが、その中で「試してみたい！」と真っ先に思ったのが「Omnigent」です。 Omnigentとは OmnigentはDatabricksが開発したAI…

#AI#Databricks#Claude Code

運び屋 (A carrier(forwarder) changed his career to an engineer)•2ヶ月前

OpenSharing × FSx for ONTAP — ゼロコピー共有の新パスを検証する

この記事は、DEV Community で公開している「FSx for ONTAP S3 Access Points × Lakehouse Deep Dive」シリーズを、日本語読者向けに再構成したものです。 dev.to 単純な翻訳ではなく、AWS 上での検証結果、設計判断、日本のエンタープライズ環境での読みどころを補足し、最新情報を加えながら整理しています。はじめに OpenSharing（Delta Sharing の後継、Linux Foundation ホスト）の credential vending メカニズムが FSx for ONTAP S3 Access Points で…

#AWS#FSxForONTAP#OpenSharing#Databricks#S3AccessPoints#ゼロコピー#LinuxFoundation

運び屋 (A carrier(forwarder) changed his career to an engineer)•2ヶ月前

Databricks × Amazon FSx for NetApp ONTAP S3 Access Points — レイヤーごとの境界検証

この記事は、DEV Community で公開している「FSx for ONTAP S3 Access Points × Lakehouse Deep Dive」シリーズを、日本語読者向けに再構成したものです。 dev.to 単純な翻訳ではなく、AWS 上での検証結果、設計判断、日本のエンタープライズ環境での読みどころを補足し、最新情報を加えながら整理しています。はじめに Databricks から FSx for ONTAP S3 Access Points への接続は部分的に動作するが、本番利用にはブロッカーがある。 UC External Location: セッションポリシーが S3…

#Lakehouse#AmazonFSxforNetAppONTAP#AWS#FSxForONTAP#Databricks#UnityCatalog#S3AccessPoints#データ基盤

運び屋 (A carrier(forwarder) changed his career to an engineer)•2ヶ月前

Amazon FSx for NetApp ONTAP S3 Access Points × Lakehouse — 動くもの、動かないもの、その理由

この記事は、DEV Community で公開している「FSx for ONTAP S3 Access Points × Lakehouse Deep Dive」シリーズを、日本語読者向けに再構成したものです。 dev.to 単純な翻訳ではなく、AWS 上での検証結果、設計判断、日本のエンタープライズ環境での読みどころを補足し、最新情報を加えながら整理しています。はじめに Amazon FSx for ONTAP S3 Access Points を使うと、ソースファイルを S3 にコピーすることなく、NAS 上のファイルデータに S3 互換 API でアクセスできる。 AWS ネイティブサ…

#AWS#Lakehouse#S3AccessPoints#AmazonFSxforNetAppONTAP#データ基盤#Athena#Databricks#Snowflake

APC 技術ブログ•2ヶ月前

【DAIS2026】参加レポート：サンフランシスコ出張

はじめに会場到着からチェックイン DAIS会場について keynoteセッション Day 1（火曜日）｜Lakehouse × AIエージェント Day 2（水曜日）｜AIの民主化と新プロダクト群印象的だったセッション Comprehensive Data Warehouse Migrations with LakeBridge Building an Explainable AI Research Agent With Databricks Genie Lakewatch — オープンセキュリティレイクハウスセッション以外の楽しみも充実 DAIS終了後のオフおわりにはじめに iTO…

#Databricks#DAIS2026#DAIS#Lakebridge#Lakewatch