neo4j

最近子供と風呂に入っては「肩まで浸かって指で6bit(63)まで数えよう」と教えています。 2進数なら両手で1023まで数えられて便利なんじゃないかと思ってます。CTOの花村です。 少し前に待鳥さんにグラフデータベースの存在を教えてもらいました。 学生時代に数学系研究室おり、ちょっとだけグラフ理論をかじった経験があり、 興味があったので実際にグラフ構造のデータを入れてつかってみました。 このエントリーは実際にNeo4ｊにデータを投入してみるところまでやったというものであり、 具体的な環境構築やチューニングの話はしておりませんのであらかじめご了承ください。 Neo4jに関して グラフ構造のデータ…

はじめに はじめまして、InsightEdge 分析チームの中野です。 今回は自然言語からCypherクエリを生成する手法について、LLM（大規模言語モデル）を用いたアプローチを紹介します。 最近、RAG（Retrieval-Augmented Generation）という手法が注目されています。これは、LLMが外部の知識ベースを検索し、その情報を基に回答を生成するプロセスです。また、外部知識にナレッジグラフを利用することでデータを構造化し、より関連性の高い情報を抽出することも注目されています。 ナレッジグラフを使用するにはneo4jのようなグラフデータベースを使用することが一般的です。 しか…

RAG（Retrieval Augmented Generation）は大規模言語モデル（LLM）の性能を改善するための手法の1つであり、質問に対する回答を生成する際に、外部知識源から情報を取り込みます。 これにより、LLM 自体で学習できる情報量に制限されることなく、より正確で詳細な回答を生成することができます。 よく使われているRAGでは、外部知識源として検索エンジンにテキストをインデックスしておき、質問に関連するテキストをベクトル検索や全文検索を用いて取得します。しかし、構造化データを扱うことには苦労するため、質問によっては回答が不十分、あるいはまったく回答できないことに繋がります。 こ…

こんにちわ。 Baseconnectバックエンドエンジニアの河野です。 今回は弊社営業支援ツール「Musubu」で提供している機能の一つに活動履歴という、営業案件に対してユーザーが行なったアプローチをログとして残すものがありますが、その活動履歴について新しいDBに対して非同期でレプリケーションを行うパイプラインの整備&技術検証などを行なったのでシェアできればと思っております。 プロジェクト背景 この活動履歴という概念がサービスの要件として登場したのは創業初期の段階で、詳しい事情は知らないのですが現状DynamoDBをマスターDBとして利用しています。 NoSQLでスキーマレスなデータ構造に強く…

NoSQLデータベースとは、SQLを使わない非関係型のデータベースの総称です。NoSQLデータベースは、大量のデータを高速に処理することができるという特徴があります。また、スキーマレスであるため、柔軟にデータ構造を変更することができます。NoSQLデータベースには、主に以下の4種類があります。 キーバリューデータベース ドキュメントデータベース カラムデータベース グラフデータベース それぞれのデータベースの特色と代表的な製品を紹介します。 キーバリューデータベース キーバリューデータベースとは、キーと値のペアでデータを管理するシンプルなデータベースです。キーは一意であり、値は任意の形式で保存…

はじめに こんにちは！Baseconnectエンジニアの文です。 前回、弊社テックリードの朱に『MusubuのアプリケーションのRailsからGoへの移行』 として新たなプロジェクトへのアプリケーション側の移行について紹介してもらいました。 techblog.baseconnect.in この新たなプロジェクト（『アプローチPDCA』と命名された）については、もう一つ大きな課題がありました。 記事中でも紹介がありましたが、DBの変更を行う必要があり、そしてそこには”データ移行”という大きな壁があったのです。 稼働中のシステム（以下：『rev1』と表記）はNeo4jというグラフ指向のデータベース…

自己紹介 はじめまして！Baseconnectのエンジニアの朱です。 私は2019年に入社してからバックエンドエンジニアをしており、DBA、テックリードのロールを努めています。 今回、弊社のプロダクトである「Musubu」で、新たなプロジェクトを開発するにあたり、古いDBのライブラリの制約や、それに伴う様々な難しい条件と対峙することになりました。 この記事では、それらの条件をクリアしていくために議論したことや、実際にRailsからGoへ部分的に置き換えた事などを紹介してみようと思います。 現状 Baseconnectに入社したときには、すでにNeo4jをメインDBに、Elasticsearch…

ナレッジグラフの市場規模は、収益ベースで2023年に9億ドルと合理的に推定されました。年間平均成長率（CAGR）は21.8%で成長すると予測されています。2028年の収益予測は24億ドル。推定のために考慮した基準年は2022年であり、過去データは2023年から2028年までです。 ビッグデータの量、速度、種類の増加により、効率的なデータ処理と分析の必要性が高まっています。ナレッジグラフはリアルタイムのデータ処理を可能にし、組織が最新の情報に基づいてデータ主導の意思決定を迅速に行えるよう支援します。また、自然言語処理（NLP）の進歩に伴い、人間の言語を理解し効果的に処理できる、より洗練されたデ…

目次 1 はじめに （ページ - 30） 1.1 研究目的 1.2 市場の定義 1.3 調査範囲 1.3.1 市場の細分化 1.3.2 含まれるものと除外されるもの 1.3.3 対象地域 1.4年 1.5通貨を考慮 表1 米ドル為替レート（2019-2022年 1.6 利害関係者 1.7 変更点のまとめ 2 研究方法 (ページ - 34) 2.1 調査データ 図1 調査デザイン 2.1.1 二次データ 2.1.2 一次データ 2.1.2.1 主要プロファイルの内訳 図2 一次面接の内訳：企業タイプ別、呼称別、地域別 2.1.2.2 一次回答者 表2 主要回答者 2.1.2.3 主要業界インサイ…

目次 1 はじめに （ページ - 29） 1.1 研究目的 1.2 市場の定義 1.2.1 含まれるものと除外されるもの 1.3 調査範囲 1.3.1 市場の細分化 1.3.2 対象地域 1.3.3年 1.4 通貨 表1 米ドル為替レート、2020-2022年 1.5 利害関係者 1.6 変更点のまとめ 2 研究方法 (ページ - 34) 2.1 調査データ 図1 グラフデータベース市場：調査デザイン 2.1.1 二次データ 2.1.2 一次データ 表2 一次インタビュー 2.1.2.1 一次インタビューの内訳 2.1.2.2 主要業界インサイト 2.2 データの三角測量 図2 データの三角測…

目次 1 はじめに 1.1 研究の目的 1.2 市場の定義 1.3 市場範囲 1.3.1 市場の細分化 1.3.2 対象地域 1.3.3 含まれるものと除外されるもの 1.3.4年を考慮 1.4 通貨 1.5 利害関係者 1.6 景気後退の影響 2 研究方法 2.1 調査データ 2.1.1 二次データ 2.1.1.1 二次情報源 2.1.2 一次データ 2.1.2.1 専門家への一次インタビュー 2.1.2.2 主要な一次インタビュー参加者のリスト 2.1.2.3 予備選の内訳 2.1.2.4 一次情報源 2.1.2.5 主要業界インサイト 2.2 市場規模の推定 2.2.1 ボトムアップ・ア…

ソース： medium.com 脆弱性：NoSQL 訳： イントロ この記事では、アプリケーションをテストして、 NoSQLインジェクションの脆弱性を見つける方法について説明し。 次のような SQL (構造化照会言語) を使用しないさまざまなデータベースで。 キー値指向のデータベース ( Redis | Memcached | DynamoDB ) ドキュメント指向データベース ( MongoDB | CouchDB ) ワイドカラム指向データベース ( Apache Cassandra ) グラフ指向データベース ( neo4j ) Source: NoSQL Database — What…

デジタルペンテスト部でペネトレーションテストを担当している小松奈央です。 突然ですが皆さんはBloodHoundを使っていますか？ BloodHoundとは、Active Directory（以下、ADとする）環境やMicrosoft Entra ID（旧称：Azure Active Directory）環境を対象としたペネトレーションテストにおいて、高い権限を効率的に侵害するために使用するペネトレーションテスターにはおなじみのツールです。 そんなBloodHoundが2023年8月にBloodHound Community Edition（以下、BloodHound CEとする）として新しく…