Snowflake

塾長です。 昨日（米国3/2）の米株市場は、大反発。ボラが高いなー。 S&P500、4,386（+1.86%） Nasdaq、13,752（+1.62%） 【米国市況】株が大幅高、パウエル議長証言受け－国債利回り急上昇 - Bloomberg 債券・為替・コモ： 原油、111.40 10年債、1.8650 ドル円、115.4730 Bitcoin、44,121 経済指標： 2月 ADP雇用統計［前月比］、47.5万人（予想38.8万人） （民間の）雇用市場が強い→利上げ要因→株価押下げ要因。明後日、米国金曜日には、雇用統計が出る。 ベージュブックも出てました。米地区連銀経済報告：経済は緩慢ない…

本記事は、電通国際情報サービス Advent Calendar 2021の23日目の記事です。 担当は、エンタープライズIT事業部 データマネジメントコンサルティング部 宮城です。 データはDX推進における要であり、データを司る「環境」の重要性というのは昨今ますます高まってきています。 先日、ISIDは、データクラウド"Snowflake"の販売代理店契約を締結しました。 本日は、この”Snowflake”について特に私が感銘を受けている特徴を2つ紹介します。 特徴その①：独自のアーキテクチャ＜ストレージとコンピュート＞ 一般的なコンピューターを構成する重要な要素はCPUとメモリとストレージで…

こんにちは。クラシル開発部でバックエンドエンジニアの高松です（@takarotoooooo） この記事は dely Advent Calendar 2021 12日目の記事です。 昨日はknchstさんの「クラシルiOSのパッケージマネジメントについて」というお話でしたiOSの開発にも興味がある方はぜひ見てみてください！ 今回は先日データエンジニアのharryさんが「クラシルでのSnowflakeデータパイプラインのお話＆活用Tips」で紹介していたSnowflakeをアプリケーション側から利用する方法を試してみたので紹介します はじめに アプリケーションからログデータを利用できると何がうれし…

みなさんおばんどす。夏真っ盛りのお盆ですが、皆さんいかがお過ごしでしょうか。 最近TLなどで、良くdbtというツールを目にします。 データ変換の品質を高める、などという枕詞でよく紹介されていますが、結局のところ何ができるのか？に興味がわいたので、触ってみました。 今回は、dbtの前にそもそもデータエンジニアリングって何だろう？というところから、このdbtについて、さらにはどんな人が使えるのかを考えてみました。 データエンジニアリングってなんだ？ データ分析に少しでも興味ある人なら、聞いたことがあるかもしれません。 「あぁ～、データ加工するETL処理を作ったり、データサイエンティストが欲しいデー…

こんにちは、CData Japan ローカライザの加藤です。 企業のデータ活用が推進され新たなニーズが生まれる中で、パフォーマンスやコストといった面からこれまでのデータ基盤を一新したい、という企業にとって、既存のデータ分析環境を維持できるのか、というのは重要な要素です。今回はUS の記事から、150TBものデータを新しいデータウェアハウス（DWH）に移行した後も、CData ドライバーを活用することで既存の分析ツール（SSAS）を利用可能な環境を、簡単に維持することができたお客様の事例をご紹介します。 元記事はこちら SQL Server Analysis Services（SSAS）はデータ…

こんにちは、アイダです。 今回は、Snowflakeのユーザー向けに、情報を集めました。活用事例の動画や資料をお届けします。それではHさん、どうぞ！ こんにちは。Hです。 先日、2021月4月21日 にSnowflakeのユーザーコミュニティである SnowVillageのイベント「#SnowVillage Live 007」のYoutube Liveでお話をしてきました。 我々のチームでは2019年の夏からSnowflakeを利用したプロダクトの開発をしており、これまでもこのブログで色々と開発で得られた情報をご紹介してきました。 www.intage-ts.com www.intage-ts…

こんにちは、アイダです。 膨大なデータ処理を高速で実行するクラウド型データウェアハウス（DHW)として注目を集めている Snowflake。 より高速化するため、クラスタリングキーのチューニングについて担当したエンジニアのHが投稿します。 それではHさんどうぞ。 はじめに よくありそうな集計の流れ クラスタリングキーを定義することについてのメリット はじめに インテージテクノスフィアのHです。 現在、全国のスーパーマーケットやコンビニなど、小売店の販売データの集計システムを開発しています。 今回は我々のシステムの集計基盤であるSnowflakeのクラスタリングキーを用いたクエリチューニングや使…

月一ブックカフェ後の、近々イベント✨ 『手作りマルシェvol.16 in古民家』 日時：2022年7月9日(土)・10日(日) 10：00〜16：00 会場 能美市物見山総合体育館前 古民家※旧米林邸 (石川県能美市辰口町リ56-1) ※辰口中学校も道挟んだ横にあります。 まうんてんぶっくすは、7月9日(土)のみ『手作りマルシェさんと移動式ブックカフェまうんてんぶっくすとのコラボ企画』として参加させていただきます🤗 以下、主催KOTAmadeさんの投稿より 【出展者】※敬称略《コラボ企画》※9日のみ☆移動式ブックカフェまうんてんぶっくす 古本販売、自作ステンドグラス、フルーツティ他 《クラフト…

無から勉強を始めたとき(2021.1~3あたり)に読んだ記事をNotionでリスト化していたので、記念に遺しておく。 A Tour of Go go-tour-jp.appspot.com

７月９日、10日のイベント【手作りマルシェvol.16】の出展者さん情報ッ🤗✨ 『手作りマルシェvol.16 in古民家』 2022年7月9日(土)10:00～16:0010日(日)10:00～16:00 会場 能美市物見山総合体育館前 古民家（旧米林邸） (石川県能美市辰口町リ56-1)※辰口中学校を道挟んだ横にあります。 【出展者】※敬称略《コラボ企画》※9日のみ☆移動式ブックカフェまうんてんぶっくす 古本販売、自作ステンドグラス、フルーツティ他 《クラフト》☆Luana flowers ドライフラワー、 プリザーブドフラワーを使ったインテリア雑貨☆工房みーちゃん クラフトバンドのかご、小…

3指数 ETF この日強かった銘柄 Roku（ROKU）・・・+ 11.72% Boeing（BA）・・・+ 9.46% Snowflake（SNOW）・・・+ 7.61% Coinbase（COIN）・・・+ 6.65% Moderna（MRNA）・・・+ 5.73% この日弱かった銘柄 Valero Energy（VLO）・・・- 4.07% Dow（DOW）・・・- 1.96% Oracle（CRCL）・・・- 1.44% 3指数 Dow・・・+ 1% S&P500・・・+ 1.46% Nasdaq・・・+ 2.5% この日はなんと言ってもFOMC二日目で政策金利の発表、パウエル議長の会…

米国株市場の状況の振り返りと私見をまとめていきたいと思います。 FOMCを無事に通過した米国株市場はダウ、S&P500ともに反発、3指数ともに上昇しています。 【米国株】FOMC無事に通過！3指数上昇！0.75％の利上げも想定内。スポティファイが投資判断引き上げで大幅上昇！ *1 毎日レバナスとレバFANGに積立しグロース株中心に投資をしているサラリーマン投資家のうみひろ（@uminoxhiro)です。現在個別株で一番比率が高い銘柄はパランティア【PLTR】です。 ブログを読みに来てくださってありがとうございます。 昨晩の米国株市場の振り返りを今日も行っていきます。 今回の記事も成績に左右され…

こんにちは♪ お立ち寄りいただき、ありがとうございます。 今回は、雪の結晶の写真家の生涯をえがいた美しい絵本をご紹介させていただきます。1999年のコールデコット賞作品に輝いた名作です。 本の情報 本の内容のご紹介 最後に 本の情報 今回ご紹介するのは、Jacqueline Briggs Martinさんが文を、Mary Azarianさんがイラストを手掛けたノンフィクションの絵本、『Snowflake Bentley』です。1999年のコールデコット賞作品（その年の最優秀絵本）です。表紙には、受賞した証の金メダルが見えます。 YL 2.6～3.0程度 語数 1,492語 Lexile: AD…

5/10(金)福岡公演 セットリスト(出演者は敬称略) 1.オープニング ／全員 2.僕のすべてを君に捧げる (フル) ／あじっこ、Kradness、スタンガン、巽imustat、HAYATE、PASSION、YU-TA 3.希望の旗のもとに (フル) ／スタンガン、Kradness、PASSION、理土、HAYATE、巽imustat、渡辺謙典 4.Treasured (吉野ver、ゲームサイズ) ／齋藤知輝 5.Treasured (ケイver、ゲームサイズ) ／あじっこ、理土、Shumei、RYOMA、HAYATE 6.Just live to dance (フル) ／しゃけみー、巽im…

ブレインパッドには、クラウドプラットフォームの知識・スキルを深化させるべく、Google Cloud 、AWS、Microsoft Azure、Snowflakeの4つのクラウドプラットフォームチームから成る「クロスファンクショナルチーム（CFT）」があります。 前回よりAzureの機能紹介の連載がスタート！第2回はAzure SQL Database のデータに対して、Azure AD 認証を使って Power BI Service から接続する方法をご紹介します！ こんにちは。データエンジニアリング本部 ソリューション開発部の山下です。顧客企業のデータ活用を、システム開発や基盤構築の面から…

はじめに どうも皆さんconvtoです。 最近UUIDとかをドカっと調べて色々比較するみたいな記事を書きました。 convto.hatenablog.com で、このとき実はつかってるOSSへのcontributionチャンスを発見していて、今回はそのパッチを上げたぞ(マージされるかはわからんけど)という記事です。 ちなみにPRだしたのは gofrs/uuid です。こいつは satori/go.uuidのメンテがとまったっぽいのでforkしてメンテを引き継いだぞ！みたいな立ち位置 のやつです CVE-2021-3538 をちゃんと読む - ちりもつもればミルキーウェイ で触れたCVEによって…

ブレインパッドには、クラウドプラットフォームの知識・スキルを深化させるべく、Google Cloud 、AWS、Microsoft Azure、Snowflakeの4つのクラウドプラットフォームチームから成る「クロスファンクショナルチーム（CFT）」があります。 今回よりAzureのさまざまな機能を紹介する新連載がスタート！初回はAzureチームに所属する新卒2年目社員が、「Azure SQL Data Warehouse」の後継サービスにあたる、エンタープライズ データ ウェアハウスとビッグデータ分析がひとつになった分析サービス「Azure Synapse Analytics」についてご紹介…

この大会は2022/5/28 1:00(JST)～2022/5/29 13:00(JST)に開催されました。 今回もチームで参戦。結果は1356点で435チーム中106位でした。 自分で解けた問題をWriteupとして書いておきます。 Sanity Check (Miscellaneous) Discordに入り、#rulesチャネルでリアクションすると、たくさんのチャネルが現れる。#quotesチャネルのトピックにフラグが書いてあった。 "If only the sanity check flag were byuctf{l3t_th3_g4m3s_b3g1n!}....." - Legoc…

はじめに 分散システムやってるとどこからでも安全に採番できる強い衝突耐性をもったuuid的なほげほげidがほしくなります。 世にほげほげidはたくさんありますが、適当にREADMEとかよんでもみんな「これイケてるで！」「uuidとかより文字数すくないで！」「sortableでうれしいで！」とかそういうことばっかいっててどの程度衝突耐性があるのかよくわからん問題があります 今回はほげほげidの構成要素の調査と衝突耐性をざっとまとめて比較しようと思います。 比較する項目 ざっくり random bit数 衝突耐性 ソートできるか その他メモ みたいな感じで整理して比較していきます。 衝突耐性は 衝…