オブジェクトストレージ

皆様こんにちは。SEの小池と申します。 GitLabには、SaaS版であるGitLab.comの他、いわゆるオンプレミス版であるSelf-Managed版というものがあります。会社様によっては「リモートリポジトリは社内に配置することが必須」というご要件がおありのケースも多く、Self-Managed版で検討なさるお客様も多くいらっしゃいます。 そんなSelf-Managed版ですが、オンプレ故に導入前から気になることも少々・・・。 特にGitLabはリモートリポジトリの他、パッケージの登録、アーティファクトの保存、イシューやwikiのデータ等、大量のデータを保持します。 そうなるとやっぱり気に…

Webサービスに何かしらのファイルをアップロードしたい場面は多い。需要がある処理なのでやりようは幾らでもある。 幾らでもあると逆にどうするのがいいのか迷ったりする。 そんなわけでどのようなファイルアップロードの構成があるのか整理しておく。 前提条件 整理した構成 レンタルサーバ、1サーバ時代 オブジェクトストレージ直列 オブジェクトストレージアップロードだけ切り出し オブジェクトストレージイベント伝播 整理まとめ

Windows10のバージョン 1909 がサポート終了になりましたね。最新バージョンにするのもなんとなくこわいなぁと思っていたものの、思い切って20H2にバージョンアップしました。 結果、抱えていた様々な不具合がなおり、いやぁ、バージョンアップして良かったなぁと思いながら仕事をしている5月ももう終わりですね。 みなさまご無沙汰しております。ストレージ基盤技術部のコガ・トモヒロです。 ということで、今回はWindowsのバージョンアップ方法、ではなく、Windows10 20H2にバージョンアップしたPCから実施した Cloudian HyperStore のアップグレード≒バージョンアップと…

日に日に春の匂いを感じる今日この頃。もう Tokyo は Spring has come ですかね🌸 在宅ワーク中心の生活が始まり、もう1年が過ぎました。私たちの生活様式が変わったとしても、変わらず春がやってくることは嬉しい限りです。とはいえ、年々、異常気象や気候変動について意識せざるをえません。この春がなくなってしまうことは悲しいことです😢コロナ後は脱炭素やSDGsといった『環境』をどう捉えるか、『経済』とどう循環させていくのかが今後のKeyではないでしょうか🔑 毎度、タイトルと異なる話から始まりがちですね。みなさまご無沙汰しております。ストレージ基盤技術部のコガ・トモヒロです。 『ニック』…

Fast NoSQL Key-Value Database – Amazon DynamoDB – AWS DynamoDB概要 DynamoDBとは？ DynamoDBの特徴 DynamoDBの分類 DynamoDBのメリット DynamoDBのデメリット 既存のデータベースとの比較 DynamoDBの導入ポイント DynamoDBの注意点 DynamoDBの今後 まとめ DynamoDBと他のNoSQLデータベースとの違い 1. 強固なスケーラビリティとパフォーマンス 2. 単純なデータモデル 3. 強力なグローバルテーブル機能 4. AWSエコシステムとの連携 他のNoSQLデータベース…

目次 なぜ今、AWSのファイルストレージのTieringをまとめたいのか? AWS上のファイルストレージサービス AWS上のストレージサービス AWS上のファイルストレージサービス Tieringとは？ AWSのファイルストレージサービスのTiering AWSのファイルストレージサービスのTiering一覧 関連情報 まとめ

さくらの聖夜 2024 【大阪開催】さくらの聖夜 2024 - connpass 初めてグラングリーンに来ました！ セッション オープニングセッション 「高専での授業を通して学生たちに伝えたいこと」前佛 雅人さん @zembutsu 生成AIで一生に一度あるかないかのビックウェーブ 生成AIに関するDX推進スキル標準が改定 仕事終えて急いできたけど、前佛さんのセッション最後しか聞けませんでした。 生成AI使って「俺たちの戦いはこれからだ」ということは伝わってきました。 「ウェブアクセラレータの取り組み2024」稲波 志さん @nozomi_1773 ウェブアクセラレーターというCDNサービスは…

この記事は every Tech Blog Advent Calendar 2024 の 22 日目の記事です。 データ&AIチームでデータエンジニアを担当している塚田です。 弊社のデータ基盤はDatabricksをベースにデータストアとしてAmazon S3を利用しています。 今回、データストアとして利用しているAWSアカウントとは異なるAWSアカウント上でデータ利用する必要があり、比較検討しましたのでその内容をご紹介します。 クロスアカウントにおけるS3で保持しているデータの利用方法 S3にはデータの参照やコピー方法が多数あり、全てを網羅するとそれだけで長くなってしまうので、今回は以下のシ…

さくらインターネットの伊東です。この記事は さくらインターネット Advent Calendar 2024 17日目の記事です。 本エントリーでは、先日リリースされたさくらのクラウドの新サービスである AppRun を一通り使ってみましたので、レポートさせていただきます。 AppRunとは AppRunは、コンテナ化されたアプリケーションを簡単にデプロイし、自動的にスケーリングを行うサービスです。インフラ管理の複雑さを気にすることなく、開発者が本来の業務であるアプリケーション開発に集中できる環境を提供します。 2024年12月17日時点ではβ版のサービスであり、制約事項があるものの全機能を無料…

こんにちは、Red Hatでソリューションアーキテクトをしている石川です。 先日OpenShift AIのバージョン2.16がリリースされました。 現在OpenShift AIは非常にハイペースでリリースが行われており、約1ヶ月に一度のペースで機能アップデートが行われています。12月にリリースされたバージョン2.16についても多くの機能が追加されており、その中の一つとしてマルチノードでLLMの推論を行う機能がTech Previewとして追加されました。 docs.redhat.com LLMの推論を行う上で大事な要素として、どれだけのGPUのVRAM（メモリ）を利用できるかがあります。例えば…

Microsoft製ツール紹介：「MarkItDown」によるファイル変換 為替予測モデル構築の基礎知識 セキュリティエンジニアのキャリアパスと役割分類 子育てと個人開発の両立 WindowsとiPhone間のファイル共有方法 MVNO回線とiPhoneのAPN設定に関する問題点 macOS/LinuxからWindowsへの移行体験 ISUCON14参加レポート：DuckDBとEvidenceを用いた戦略 小容量SSDの有効活用方法：記憶域スペースによる大容量化 怪しい海外からの着信への対処法 DuckDB入門 OpenAIによるAGI開発の動向 JavaScriptにおけるGraphQLサー…

この記事は以下アドベントカレンダー13日目の記事です。 3-shake Advent Calendar 2024 シリーズ2 Kubernetes Advent Calendar 2024 シリーズ2 Building Resilience: Effective Backup and Disaster Recovery for Vector Databases on Kubernetes セッションレポート セッション概要: https://kccncna2024.sched.com/event/1i7kn/when-life-gives-you-containers-make-an-open…

はじめに 2024 AWS re:Invent で Amazon S3 Tables という新しいストレージサービスが発表されて話題になっていました。 データレイクに関連するサービスのようですが、あまりよくわかってないので、概要を理解するためにざっと調べながら触ってみました。

本稿は、AWS re:Invent 2024 にて新サービスアナウンス後の Breakout Session の共有致します。 実は AWS re:Invent 2024 Day1 から口の周りが荒れてて痛い。 内村でございます。 Day2 Keynote にて、新サービス・新機能が数多くアナウンスされました。 そのうちの一つ、Amazon S3 Metadata の Breakout Session に参加してきましたので、共有致します。 受講セッション Amazon S3 Tables と Metadata Amazon S3 Tables Amazon S3 Metadata 追記 価格…

id:Songmu です。この記事は株式会社ヘンリー Advent Calendar 2024 5日目の記事です。 ヘンリーは北海道から沖縄まで、何なら上海から働いている社員さえいるフルリモートの会社です。フルリモート環境においては特に、社員の相互理解、そのためのそれぞれの自己開示が大事です。リモートに限らず、一部の人の声が大きくなりすぎて多様性が損なわれないよう、メンバーに自己開示を促し、支援することも必要です。 ヘンリーではその促進のために、Notion上に自己紹介やユーザーマニュアル、社内ブログ等を書いてもらう取り組みをしています。それに加えて Henry FMという社内ラジオがあり、広…

はじめに こんにちは、セキュリティエンジニアの@okazu_dm です。 突然ですが、皆さんは以下のクイズに自信を持って回答できるでしょうか。これはSRE NEXT 2023で弊社が出題したクイズなのですが、それぞれのポリシーに存在するAllow, Denyのうちどれが優先されるかがポイントになります。 クイズの答えはここをクリック クイズの正解は......「④なし」でした。AWSのIAMポリシーは拒否(Deny)優先です。しかし、それは他のクラウドサービスでも果たして同じでしょうか？ 今回の記事では、各種クラウドサービスにおけるアクセス制御について焦点を当てます。具体的には「それぞれのアク…