レイクハウスで AI：クエリではなく形状が文脈を担う

データレイクハウスに AI を：「形状」こそが文脈を担う

従来のベクトル検索や SQL 変換だけでは対応しきれない、大規模データ環境における AI エージェントの課題と解決策として、Neo4j が提唱する「形状（Shape）」によるアプローチが注目されています。単なるクエリ実行ではなく、データに意図的な構造を与えることで、AI は複雑な問いや「欠落している情報」の特定といった高度なタスクを正確に処理できるようになります。

従来の検索手法が抱える限界と「ネガティブ証明」の壁

多くの企業では、データレイクハウス（構造化データと非構造化データを統合した環境）上に AI コパイロットを導入しています。しかし、ベクトル検索やテキスト to SQL のような既存ツールには明確な限界があります。

例えば、「どのドキュメントが不足しているか」「なぜ特定の故障が頻発しているのか」といった問いは、従来の手法では答えられません。これを専門用語で「ネガティブ証明（Proving a Negative）」と呼びます。ベクトル検索は類似するものをマッチングさせることは得意ですが、「存在しないもの」や「欠落している情報」を検出することはできません。

「ベクトル検索は似たものをマッチングできますが、不足しているドキュメントや欠落している情報を特定することはできないのです。」

また、テーブル数が数百に及ぶ大規模なデータウェアハウスでは、AI エージェントがどのテーブルを正しく結合（Join）すべきか判断できず、結果として「自信を持って間違えた回答」を出すリスクが高まります。数百万件のドキュメントが存在する状況下でも、関連性を理解し正確な結合を実現するには、新しいアプローチが必要です。

文脈を提供する3つの「形状」

この課題を解決するために提案されたのが、データに与える「形状（Shape）」の概念です。クエリではなく、データそのものに意味のある構造を持たせることで、AI エージェントが複雑な問いに正しく回答できる環境を構築します。発表者は、以下の3つの具体的な形状を定義しています。

1. Table of Contents：非構造化データの階層化

文書やマニュアルなどの非構造化データに対して適用される形状です。単なるテキストの羅列ではなく、目次のようなツリー構造と、異なるタイプのリンクを組み合わせた階層モデルを構築します。

これにより、AI はドキュメント全体の構成を理解し、特定の車両修理マニュアルから必要な情報を効率的に引き出すだけでなく、「どの車種に関するマニュアルがまだ存在しないか」といったネガティブな問いにも回答できるようになります。

2. Themes：未知のパターンの発見

データ全体を横断して、人間には見えにくいグローバルなパターンやグループ化を表面化させる形状です。例えば、特定の修理チェーンで「なぜ同じ部品が何度も故障するのか」「どのようなリコールの組み合わせが頻発しているのか」といった、事前には想定していなかった傾向を発見するのに役立ちます。

3. Connections：構造化データのセマンティックレイヤー

データウェアハウス内の大規模なテーブル群に対して適用される形状で、セマンティックレイヤー（意味層）として機能します。似たようなスキーマを持つ数百ものテーブルが混在する環境でも、グラフ構造を介してテーブル間の関係性を明確に定義します。

これにより、AI エージェントは「どのテーブルを結合すべきか」を推測するのではなく、事前に定義された接続経路（Relationships）に従って正確なデータを取得できます。これは、大規模データウェアハウスにおける信頼性の高い回答生成の基盤となります。

Neo4j と Graph Academy による実証：AutoFix Group の事例

これらの概念は、Neo4j が提供するGraph Academyという学習プラットフォームを用いたワークショップで実演されています。ここでは架空の自動車修理チェーン「AutoFix Group」を事例に、AI エージェントがどのようにグラフを探索するかを示しています。

• 構造化データ: BigQuery などのデータウェアハウス内の修理記録テーブルと、Neo4j のグラフデータベースを連携させます。
• 非構造化データ: クラウドストレージ上のマニュアルや安全 Bulletins を Graph Academy で定義された形状に変換します。

AI エージェントは、単に SQL を実行するだけでなく、Graph Database 内のノード（人、場所、もの）とリレーションシップ（所有、運転、関連など）を横断して探索を行います。これにより、数百から数百万のデータポイントが存在しても、文脈を失わずに正確な結合と推論が可能になります。

まとめ：信頼性の高い AI システムへの道

このアプローチは、大規模エンタープライズ環境における AI エージェントの信頼性を飛躍的に高める可能性があります。従来の RAG（検索拡張生成）やベクトル検索の限界を打破し、「欠落情報の特定」や「複雑なデータ統合」といった課題に対し、より確実で説明可能な回答を提供する基盤となります。

AI を単なる検索ツールとして使うのではなく、データに意図的な「形状」を与えて文脈を設計することが、次世代の AI システム構築における鍵となるでしょう。