本記事は、法人向け生成AIプラットフォーム「AskDona」を提供する株式会社GFLOPSの視点で書いている。理化学研究所をはじめ多数の組織にAskDonaを提供してきた現場経験から、PoCで止まる現場とスケールに進む現場を分ける条件、そして提供事業者として設計判断してきたことを率直に述べる。一般論ではなく「実際にこういうケースで詰まりました」という具体例ベースで論じている点を、最初に断っておきたい。

本稿の論点 PoC沼を抜ける現場と止まる現場の差は、技術ではなく組織の動き方にある
スケールする三つの共通点 業務オーナーが自分ごとで持つ/ユースケースを小さく絞る/「使われない」を早期にKPI化
沈む三つの落とし穴 データ整備の完璧主義/労力を成果と取り違える/社内で技術を再発明する
AskDonaの差別化 業務領域ごとの個別チューニングが一切不要、お客様側は同じ3ステップで完結

スケールできるお客様の三つの共通点

まず、PoCから本番展開に進んで定着しているお客様に共通する特徴を挙げる。これは技術スタックや業界の話ではなく、組織の動き方の話である。

一つ目は、業務オーナーがプロジェクトを「自分ごと」として持っていること。 IT部門が独自に進めるプロジェクトは、ほぼ確実に途中で減速する。逆に、サポート部門長、研究室長、営業企画責任者など、業務側の責任者がオーナーシップを持ち、自分の数字目標と接続させているプロジェクトは、組織の壁を越えていく。理化学研究所の事例でも、R-CCSの現場責任者が「利用者の自己解決を促進する」という業務目標を掲げ、その手段としてAskDonaを位置づけたことが推進力になった。

二つ目は、最初のユースケースが小さく、しかし明確であること。 「社内ナレッジ全般を検索できるようにしたい」というぼんやりした目標で始まったプロジェクトは、データソースの整備フェーズで疲弊する。一方、「富岳ユーザーからの初期問い合わせの自己解決を促進する」のように対象範囲・利用者・成功条件が絞られていると、3か月で意味のあるPoCが完成し、その実績で次のフェーズの予算が確保できる。

三つ目は、「使われない」ことを早期にKPI化していること。 どの組織でも、最初に展開した部署で利用率が立ち上がらない期間がある。そのときに「使われない」を計測できる組織は、データソースの不足を見つけ、UIの導線を見直し、教育プログラムを修正できる。計測できない組織は「なんとなく失敗だった気がする」で終わる。

詰まるお客様の三つの共通点

逆も書いておく。PoC沼に沈むパターンは三つに収束する。

一つ目は、準備期間にデータ整備をやり込みすぎること。 「完璧なデータセットを作ってから本番に入りたい」という発想は健全に見えるが、これが半年から1年単位でPoCの開始を遅らせる典型パターンになる。組織のドキュメントは生き物で、整備中にも更新が走り続ける。完璧を待っていると、いつまで経ってもスタートできない。むしろ、現状のドキュメントでまず動かし、運用しながら足りない箇所を可視化していくほうが、結果的に早く高精度に到達する。

二つ目は、システムのチューニングに労力を投じすぎて、効果検証が後回しになること。 「もう少しチャンクサイズを調整すれば」「埋め込みモデルを工夫すれば」と、技術的な改善ループに没入してしまう組織がある。半年でベンチマーク精度を何ポイント上げた、という技術報告は積み上がる一方で、その間にビジネス上の効果は計測されていない。さらに踏み込めば、投じた労力そのものを実績として位置づけたい心理が働き、ROI議論が技術論にすり替わってしまう。経営層は「で、業務はどう変わったのか」を聞きたいのに、現場からは「これだけのチューニングをやりました」が返ってくる。労力と成果は別物だ。

三つ目は、技術開発のアマチュア版を社内で再発明しようとすること。 LLMやRAG周辺の技術は、基盤モデル提供者・SaaSベンダー・OSSコミュニティが週単位で改良を重ねている世界である。それを社内の有限リソースで追いかけようとすると、半年遅れ・品質不足・運用負荷の三重苦になりやすい。「内製したほうが安い」という見立ては、エンジニアの工数・採用コスト・運用保守を全て織り込むと、ほぼ成り立たない。社内で握るべきはユースケースとデータの選定であり、外部に任せるべきはRAGの内部処理である。境界線を間違えると、本業ではない技術開発に組織の資源が継続的に吸われていく。

なぜ「3ステップで学習完了」を設計したか

AskDonaのRAG構築フローを「アップロード/AIが理解しやすいように情報を追加/自動データ処理」の3ステップに絞ったのには、明確な理由がある。

導入支援の現場で繰り返し見てきたのは、データ整備の負荷がPoCの成否を握っているという事実だった。「ベクトル化のためのチャンク分割をどうしますか」「埋め込みモデルは何を選びますか」「メタデータスキーマを設計してください」──これらをお客様自身に決めてもらう設計にすると、技術選定の議論で1〜2か月が消える。

AskDonaでは、技術選定の難しさを提供者側で吸収する設計を選んだ。ドラッグ&ドロップでドキュメントを投入し、数クリックで学習が完了する状態にすることで、お客様が判断するべきことを 「どのドキュメントを対象とするか」 という業務判断に絞り込めるようにした。

加えて、画像や図表を含むドキュメントからもテキスト情報を抽出する高度なOCR処理を組み込んだ。製造業のマニュアルや研究機関の技術文書では、図表に重要な情報が埋まっていることが多い。テキスト部分しか参照できないRAGでは、現場の問い合わせの半分以上に回答できない。図表の情報まで取りに行ける構造を、技術的に標準で持たせた。

従来型RAG構築フローとAskDona 3ステップ設計の比較 従来型のRAG構築では顧客が10種類の技術判断を行うのに対し、AskDonaでは3ステップで完結し技術判断は提供者側で吸収される構造 従来型RAG構築の流れ 顧客側で多数の技術判断が必要 AskDonaの3ステップ設計 技術判断は提供者側が吸収 01 データソース選定 02 前処理パイプライン設計 03 チャンク分割戦略決定 04 埋め込みモデル選定 05 ベクトルDB選定/構築 06 メタデータスキーマ設計 07 クエリ書き換え戦略 08 リランキング戦略 09 評価データセット作成 10 チューニング 1 アップロード ドラッグ&ドロップで投入 2 AIが理解しやすい情報を追加 カテゴリ・補足説明など 3 自動データ処理 OCR・図表抽出・ベクトル化
RAG構築の技術判断を提供者側で吸収する設計

ここで強調しておきたいのは、一般的なRAGシステムでは、お客様の業務領域・データ特性・想定クエリごとに個別のチューニングが必要だということである。チャンクサイズの調整、埋め込みモデルの選定、検索アルゴリズムのパラメータ最適化──これらを業界・組織ごとに合わせ込むのが、通常のRAG構築プロセスだ。同じソリューションを別の業界に持ち込むと、性能が出ずに再チューニングのプロジェクトが立ち上がる、という光景は珍しくない。

AskDonaが他のRAGと決定的に違うのは、この個別チューニングが一切不要だという点である。製造業の技術文書、研究機関の専門マニュアル、金融サービスの規程集──業務領域がどれだけ違っても、お客様側の作業は同じ3ステップで完結する。理化学研究所のスーパーコンピュータ「富岳」の専門ドキュメント約16,000ページに対しても、追加のチューニングを行わずに実用水準の精度を達成しているAgentic RAG精度比較検証レポート 第4章で、Azure AI Search・Vertex AI Search・Amazon Bedrock・LangChainとの比較データを公開)。

これを支えているのが、独自に実装したAgentic RAGアーキテクチャである。質問をサブクエリに自律的に分解し、複数のドキュメントを横断して情報を統合する設計により、個別最適化に頼らずとも幅広い業務領域で高い精度を維持できる構造になっている。「PoCの90日を技術選定で消費しない」のではなく、「そもそも技術選定そのものが要らない」というのが、AskDonaが設計の入口で約束していることだ。

「データ改善アシスタント」で何を可視化したか

導入支援で最も繰り返した発見が、運用1〜3か月でデータ不足箇所が必ず見えてくるということだった。お客様は「あらゆる質問に答えられる」状態を目指して導入するが、実際に運用してみると、想定していなかった質問が次々と寄せられる。

この「想定外の質問」をどう扱うかが、PoCを超えるかどうかの分水嶺になる。AskDonaでは管理者向けにデータ改善アシスタントを実装した。AIが十分に回答できなかった質問を自動で特定し、「どんなドキュメントを追加すれば回答できるようになるか」のヒントを提示する。

これによって、運用責任者の判断は次のように変わる。

  • 旧来:「AIが賢くない、ベンダーに苦情を入れる」
  • 新しい状態:「このドキュメントが社内にないことが判明した、業務部門に作成を依頼する」

問題の所在が「AIの精度不足」ではなく「組織のナレッジ不足」として可視化されることで、改善ループが組織内に閉じる。PoCの結論を「効果あり/なし」で固定化せず、運用しながら段階的に強くなる仕組みを、機能として埋め込んだ。

UIの導線設計で意識していること

設計の根幹に置いているのは、「ヒューマン・イン・ザ・ループ」を前提にしたUIである。「AIに任せられる業務はAIに、人は人だからこそ価値を生む業務に」という役割分担のビジョンが、画面上のあらゆる判断の根底にある。AIが人間を置き換えるのではなく、人間がより高い価値を生む業務に集中できるよう、AIが下支えする。この思想は、UIの細部に小さく埋め込まれている。

回答の根拠を常に提示すること。回答の隣に参照ドキュメントを表示し、そのままPDFをプレビューできるようにしている。AIが答えを断定的に押し付けるのではなく、人間が最終判断を下すための材料をAIが用意する構造である。判断権は使い手に残る。

「答えられない」を素直に返すこと。参照ドキュメントに根拠がない質問については、無理に答えを作らず、人間の専門家に引き継ぐ導線を残す。AIで100%を目指すのではなく、「AIで対応できる範囲」と「人間が対応すべき範囲」を分ける設計にしている。

フィードバックループの組み込み。回答に対してユーザーが「役立った/役立たなかった」を返せる導線を用意し、その結果が管理者ダッシュボードに集約される。人間の判断が、AIの改善材料として組織内に蓄積される。

「AIで何ができるか」だけでなく、「AIで何をしないか」を最初に決めることが、現場のモチベーションを保つ鍵になる。AIが補完、人間が中心。この役割設計が組織を強くする。

富岳サポートで実際に起きたこと

理化学研究所のスーパーコンピュータ「富岳」のサポートサイトにAskDonaを導入したユースケースは、提供者として最もまとまった検証データを公開できたケースである。具体的な数字を残しておく。

  • 月平均約680件の質問に対応し、日常的なサポートツールとして定着した。
  • 導入後10か月で、複数の情報統合を必要とする「複合的なクエリ」の割合が2.3%から10.0%へ、約4.3倍に増加した。利用者が単純な検索ツールではなく、思考のパートナーとして使い始めたことを示す。
  • 有人サポートへの質問チケット発行数は、2025年4月に前年同月比で最大61%削減を達成した。
  • 従来、担当者が約4時間を要していた問い合わせが、約5秒で解決された事例も確認された。
  • 2024年7月のPoC導入から約6か月の運用検証を経て、2025年2月に初期問い合わせを全面的にAskDonaへ移行した。

この案件で学んだ最大の教訓は、「全面移行は段階を踏めば可能」 ということだ。生成AI関連の導入相談で「いきなり全面移行は怖い」という声を頻繁にいただくが、PoC→部分運用→評価→全面移行という段取りを丁寧に踏めば、専門性の高い領域でも完全移行は実現できる。詳細な運用推移と精度検証データは、「AskDona×富岳サポート」運用実績レポートで公開している。

まとめ──提供者として見えた成功条件

最後に、提供事業者として見てきた「スケールする現場」の条件を一枚にまとめる。

  • 業務オーナーがプロジェクトを自分ごとで持っている。
  • 最初のユースケースが小さく、対象範囲が絞られている。
  • データ整備とUI導線を軽視しない。
  • 「使われない」を早期にKPI化している。
  • PoC段階の精度評価でゲートを閉じず、運用しながら強くなる設計を選ぶ。
  • 提供者の機能(管理者ダッシュボード、データ改善アシスタント、参照元プレビュー)を運用ループに組み込んでいる。

技術的に最先端のRAGを構築することと、組織で使われ続けるRAGを構築することは、別の問題である。提供者の立場から伝えたいのは、この二つを混同しないこと、そして後者の難しさに対しては運用設計で答えるべきだということである。

AskDonaに関心を持っていただいた方へ

ここまで読んでいただきありがとうございました。本記事で触れた設計判断や運用知見の背景には、AskDonaという法人向け生成AIプラットフォームでの実装・運用経験があります。RAG・GPT・Deep Researchを統合した実用的なプラットフォームとして、社内ドキュメントの活用・カスタマーサポート自動化・調査業務の高度化といった領域で、多数の組織にご利用いただいています。

サービスの詳細・機能一覧・導入事例・お問い合わせは、AskDona公式サイトをご覧ください。具体的な業務課題に対する活用方法のご相談も、同サイトのお問い合わせフォームから承っています。


参考文献・関連リンク