AI導入がPoCで終わるのはなぜ?|本番移行を判定するチェック表と7つの準備
2026.11.19
AIのPoC(実証実験)では良い結果が出たのに、本番運用に進む判断がされないまま止まっている。いわゆる「PoC止まり」は珍しくありません。止まる理由は、AIの精度が足りないことより、本番に移ってよいかを判断する材料がそろっていないことにある場合が多いと弊社は考えています。
結論から言えば、弊社が見る限り、PoCで止まる案件の多くは「AIが正しく答えられるか」は確かめても、「本番の業務で回せるか」を確かめていません。既存システムとの連携方法、AIが判断できないときの引き継ぎ先、本番の件数での費用、運用を担う人のどれかが決まっていないと、決裁する側は本番化を判断できません。PoCの段階でこれらを準備し、判定日と判定する人を先に決めて、判定会で本番に移るかどうかを決めることが、本番運用につなげる手がかりになります。
この記事でいうPoC(Proof of Concept:実証実験)は、本格導入の前に、限られた範囲で効果や実現性を確かめる試行を指します。判定会は、PoCの結果をもとに本番に移るかどうかを決める会議を指します。
この記事でわかることは次のとおりです。
- AI導入がPoCで終わる4つの理由と、PoCと本番運用の違い
- 本番運用に向けて、PoCの段階で整える7つの準備
- 判定日・判定する人・打ち切りの条件を書いたPoC計画書の記入例
- 判定会で使うチェック表と、判定会で出す3つの結論
AI導入がPoCで終わるのは、なぜ?#
弊社がよく目にするのは、次の4つの理由です。いずれも、AIの性能より計画の立て方に原因があると弊社は見ています。
- 1確かめたのが精度だけで終わっている
- 2本番で増える作業が計画に入っていない
- 3運用を担う人と費用を負担する部署が決まっていない
- 4判定日と判定する人が決まっていない
理由1:確かめたのが精度だけで終わっている#
PoCの報告が正答率だけになっていると、決裁する側は「本番で回るのか」「毎月いくらかかるのか」を判断できません。
AIの評価では、正確さ以外の観点も基準に含める考え方があります。たとえばAnthropicは、評価の観点として、タスクをどれだけ正しくこなせるか(Task fidelity)のほか、一貫性(Consistency)、応答時間(Latency)、費用(Price)などを挙げ、多くの用途では複数の観点で評価する必要があるとしています(出典:Define success criteria and build evaluations|Anthropic)。
理由2:本番で増える作業が計画に入っていない#
PoCでは、データを担当者が手で渡し、結果を担当者が見て確かめる形で済ませる場合があります。本番では、既存システムとの受け渡し、AIが判断できないときの引き継ぎ、記録の保存などが必要になります。
これらがPoCの計画に入っていないと、PoCが終わってから「本番化には追加の開発が必要」と分かり、予算の取り直しで止まることがあります。
理由3:運用を担う人と費用を負担する部署が決まっていない#
PoCはプロジェクトの担当者が進めますが、本番では日々の運用と保守を担う人が必要です。誰が問い合わせを受け、誰が参照する資料を更新し、どの部署の予算で毎月の費用を払うのかが決まっていないと、PoCの担当者の手を離れた時点で止まりかねません。
総務省の「令和8年版 情報通信白書」の企業向け調査では、リスク対策のための取組として「AIガバナンスの取組を推進する部署や責任者が明確になっている」を選んだ日本企業は35.9%で、調査対象の4か国で最も低く、米国(44.9%)、ドイツ(49.6%)、中国(58.4%)を下回りました。「製品・サービス導入後、定期的な評価・検証が行われている」も、日本は29.1%で、米国(45.7%)、ドイツ(42.2%)、中国(51.9%)より低い結果です(出典:令和8年版 情報通信白書 データ集(図表Ⅰ-2-1-9)|総務省)。
この設問はリスク対策の取組を尋ねたもので、PoCから本番への移行を直接尋ねたものではありません。ただ、導入後を担う責任者と、導入後に評価し直す仕組みは、本番運用に欠かせない要素だと弊社は考えています。
理由4:判定日と判定する人が決まっていない#
「もう少し様子を見たい」が続き、PoCの期間が延びていく案件は、本番に移るかどうかを判定する日と判定する人が決まっていないことが多いと弊社は見ています。判定に使う合格基準の決め方は、AI導入の検収基準はどう決める?|実際の問い合わせ・伝票でつくる評価テストで解説しています。
PwCが世界の25業種・1,217社を対象に行った調査をまとめたPwC Global AI Performance Study China Report|PwC Chinaは、中国企業について、試行は容易でも規模を広げて全面的に導入するのは難しいという状況が広く見られ、個別の試行を大規模な展開につなげる仕組みが不足していると指摘しています。一方、世界の調査対象のうちAIによる成果が上位20%の企業は、広げる対象を絞り、検証済みの仕組みをチームや製品をまたいで使い回しているとしています。レポートが不足を指摘する「試行を展開につなげる仕組み」には、判定日や判定する人、広げる条件を先に決めておくことも含まれると弊社は考えています。
PoCと本番運用は、何が違う?#
大きな違いは、誤ったときの影響と、かかり続ける費用です。PoCは選ばれた担当者が決められた期間だけ試すため、誤りがあっても担当者が見て直せます。本番運用では、業務を担う全員が日々届く実データで使い続けるため、誤りが業務や取引先に影響し、費用も毎月かかります。
PoCと本番運用の違いを、弊社の整理で5つの観点に分けると次のとおりです。
| 観点 | PoC | 本番運用 |
|---|---|---|
| 使う人 | 選ばれた数名の担当者 | 業務を担う全員 |
| データ | 選んだサンプル | 日々届く実データ |
| 誤ったとき | 担当者が見て直す | 業務や取引先に影響する |
| 費用 | 試行の期間だけかかる | 毎月かかり続ける |
| 担う人 | プロジェクトの担当者 | 運用と保守の担当者 |
PoCで「うまくいった」という結果は、表の左側の条件で得られたものです。右側の条件で同じ結果が出るかは、PoCだけでは分かりません。この差を埋める準備が計画に入っていないことが、PoCで止まる原因になります。
本番運用に向けて、PoCの段階で何を準備する?#
PoCの段階で、本番で必要になる7つの準備を決めておきます。7つは、システムの仕組みに関わる3つ(既存システムとの連携・権限と入力する情報・記録と監視)と、本番の運用に関わる4つ(例外時の引き継ぎ・運用の担い手・本番の費用・モデル更新時の再評価)に分けられます。
すべてを作り込む必要はありません。「本番ではどうするか」を決め、PoCの中で小さく確かめておけば、判定会の材料になります。
仕組みの準備は、何を決めてどう確かめる?#
システムの仕組みに関わる3つの準備で、PoCの段階で決めることと確かめ方は次のとおりです。
| 準備 | PoCの段階で決めること | 確かめ方 |
|---|---|---|
| 既存システムとの連携 | 入力と結果の受け渡し先 | 本番と同じ経路で数件流す |
| 権限と入力する情報 | 参照できる資料と入れる情報 | 権限外の資料が出ないか試す |
| 記録と監視 | 入出力と判断根拠の残し方 | 誤りを後から追えるか試す |
連携は、本番と同じ経路で数件でもデータを流しておくと、判定がしやすくなります。PoCでは担当者がデータを手で渡していても、本番では既存の業務システムから受け取り、結果を戻す必要があります。経路を一度通しておけば、本番化に必要な追加の開発範囲を見積もれます。
権限は、AIが参照できる資料の範囲と、入力してよい情報(個人情報や機密情報を入れてよいか)を決めます。PoCで、参照を許していない資料の内容が回答に出てこないかを試しておきます。
記録と監視は、なぜ本番で必要になる?#
誤りが起きたときに原因をたどり、AIが想定どおりに動いているかを確かめ続けるためです。
総務省・経済産業省の「AI事業者ガイドライン(第1.2版)」は、各主体に共通する指針として、AIの判断にかかわる検証可能性を確保するため、合理的な範囲で利用時の入出力や判断根拠などのログを記録・保存することを挙げています。AI利用者にとって重要な事項としても、AIシステム・サービスが想定された仕様に基づき適切に動作しているかを確認することを挙げています(出典:AI事業者ガイドライン(第1.2版)|総務省・経済産業省)。同ガイドラインは法的拘束力のない指針ですが、本番運用の記録と監視を設計するときの手がかりになります。
運用の準備は、何を決めてどう確かめる?#
本番の運用に関わる4つの準備で、PoCの段階で決めることと確かめ方は次のとおりです。
| 準備 | PoCの段階で決めること | 確かめ方 |
|---|---|---|
| 例外時の引き継ぎ | 判断できないときの担当者 | 引き継いだ件数と理由を残す |
| 運用の担い手 | 運用・保守の担当と予算の部署 | 本番の担当者がPoCに加わる |
| 本番の費用 | 本番の件数での毎月の費用 | 1件あたりの費用から試算する |
| モデル更新時の再評価 | 評価テストを流し直す担当者 | 更新前にテストを流し直す |
AIが判断できない入力は、本番では出てくるものと考えて備えます。そのとき誰に、どの画面で引き継ぐかを決め、PoCの中で引き継いだ件数と理由を残しておくと、本番で人が対応する件数の見込みが立ちます。
運用の担い手は、問い合わせ対応・参照資料の更新・保守を誰が受け持ち、毎月の費用をどの部署の予算で払うかを決めます。本番で使う担当者がPoCに加わっていれば、本番の業務で回せるかを、その担当者の目で確かめられます。
本番の費用は、PoCの数字から見積もれる?#
見積もれます。そのために、PoCの段階で1件あたりの費用を記録しておきます。AIの利用料は処理する件数や文章の量で変わるため、PoCでの1件あたりの利用料と、人が確かめるのにかかった時間を記録し、本番で見込む件数を掛けて毎月の費用を試算します。
本番化のための追加の開発費や保守費は、これとは別に見積もります。本番化の稟議に書く費用の項目は、AI導入の稟議書に何を書く?|削減工数・品質・継続費用の説明方法で解説しています。
AIモデルが更新されたら、何をする?#
PoCで使った評価テストを新しいモデルで流し直し、結果が変わっていないかを確かめます。AIモデルは、提供会社の都合で更新や提供終了が起こります。
たとえばAnthropicは、公開しているモデルの提供を終了する際、利用中の顧客に少なくとも60日前に通知するとしており、提供終了後のモデルへのリクエストは失敗します。提供終了日より十分前に、新しいモデルでアプリケーションをテストすることも勧めています(出典:Model deprecations|Anthropic)。PoCで作った評価テストを捨てずに残し、誰が流し直すかを決めておくことが、本番で品質を保つ準備になります。
PoCの計画書には、何を書いておく?#
PoCを始める前に、目的と測る数字に加えて、「判定日」「判定する人」「本番の形」「判定の材料」「打ち切りの条件」を書いておきます。目的の数字には届かないが打ち切りの条件にも当たらない場合や、判定の材料が足りない場合を「延長」として扱い、延長の回数と期間の上限も決めておくと、「様子見」が続くのを防げると弊社は考えています。
次は、納品書の照合を試す場合の記入例です(説明のための仮定の例で、数字も例です)。項目と書き方は、そのまま社内の計画書に使えます。
- 目的:取引先からの納品書と発注データの照合にかかる時間を、導入前の半分にする
- 対象の業務と範囲:購買部の納品書の照合。件数の多い取引先から始める
- 期間と判定日:8週間。最終週に判定会を開く
- 判定する人:購買部長(業務の責任者)と情報システムの担当者
- 本番の形:基幹システムから発注データを受け取り、照合結果を戻す。不一致は購買部の担当者に引き継ぐ
- 判定の材料:実データのテストでの合格基準、本番の件数での毎月の費用、運用の担い手
- 打ち切りの条件:判定日までに、照合にかかる時間が導入前の8割以下にならなければ打ち切る
- 延長:8割以下だが半分に届かない場合、または数字は届いたが判定の材料が足りない場合は、4週間を上限に1回だけ延長する
PoCから本番運用までは、どんな順で進める?#
計画書を書いてから本番運用に入るまでは、次の5つの段階で進めます。判定会は3つ目の段階です。
- 1計画書を書く:目的・判定日・判定する人・本番の形・判定の材料・打ち切りの条件を決める
- 2本番の形で試す:実データと本番の担当者で、連携の経路も通す
- 3判定会で決める:合格基準・費用・運用の担い手をそろえて判断する
- 4対象を広げる:担当者や取引先を段階的に増やす
- 5運用で測り直す:毎月の数字を見て、モデル更新時はテストを流し直す
本番に移るかどうかは、判定会でどう決める?#
判定会では、次のチェック表で判定の材料がそろっているかを確かめます。チェック表は、7つの準備に「効果」と「合格基準」を加えた9項目です。すべて「はい」と答えられれば、本番に移るかどうかを判断する材料がそろっています。
| 観点 | 確かめる質問 |
|---|---|
| 効果 | PoCで、計画書に書いた目的の数字に届いたか |
| 合格基準 | 実データのテストで、合意した合格基準を満たしたか |
| 既存システムとの連携 | 本番と同じ経路で、入力と結果の受け渡しを確かめたか |
| 権限と入力する情報 | 参照できる資料の範囲と、入力してよい情報を決めたか |
| 記録と監視 | 入出力と判断根拠の記録の残し方を決めたか |
| 例外時の引き継ぎ | AIが判断できないときの担当者と、見込みの件数が分かっているか |
| 運用の担い手 | 運用・保守の担当者と、費用を負担する部署が決まったか |
| 本番の費用 | 本番の件数での毎月の費用を試算したか |
| モデル更新時の再評価 | 更新時にテストを流し直す担当者が決まったか |
判定会で出す結論は、次の3つのいずれかです。
- 1本番に移る:目的の数字に届き、材料もそろい、合格基準も満たした
- 2条件を変えて延長する:足りない材料と次の判定日を決め、期間を延ばして試す
- 3打ち切る:計画書の打ち切りの条件に当たり、続ける理由がない
延長する場合は、足りない材料をチェック表の「いいえ」で特定し、次の判定日を決めます。打ち切りや、試行を始める前に見送る判断の考え方は、AI導入が失敗する5つの原因とは?|つまずいた段階別の立て直し方で解説しています。
たとえば、納品書の照合を試したPoCはどう本番につなげる?#
次は、弊社が支援した事例ではなく、説明のための仮定の例です。この例では、計画書の記入例とは違い、最初の計画書に本番の形と判定の材料が書かれていなかったとします。
取引先から届く納品書をAIで読み取り、発注データと照合するPoCを3社分の納品書で行い、照合にかかる時間は目的どおり導入前の半分になったとします。ところが最初の判定会では、本番の件数での費用や、照合結果を基幹システムに戻す方法に答えられず、判定を延長しました。
PoCで確かめたことと、延長の間に足した主なことを並べると次のとおりです。
| 観点 | PoCで確かめたこと | 延長の間に足したこと |
|---|---|---|
| データ | 3社分の納品書 | 様式の違う取引先を加えて試した |
| 連携 | 担当者が手でデータを渡した | 基幹システムから受け取る経路を通した |
| 引き継ぎ | 不一致は担当者が見て直した | 不一致を購買部の担当者に回す画面を決めた |
| 費用 | 試行期間の利用料だけ | 本番の件数で毎月の費用を試算した |
| 運用 | プロジェクトの担当者が対応した | 取引先の様式が変わったときの担当者を決めた |
足りなかった材料をそろえ、チェック表の残りの項目も確かめたうえで改めて判定会を開き、本番に移る判断をした、という流れです。最初の計画書に本番の形と判定の材料を書いておけば、延長せずに判定できた可能性があります。
まとめ#
弊社の見方では、AI導入がPoCで終わる案件の多くは、「本番の業務で回せるか」を判定する材料がそろっていません。本番運用につなげるには、次の3点を押さえます。
- 7つの準備:既存システムとの連携・権限と入力する情報・記録と監視・例外時の引き継ぎ・運用の担い手・本番の費用・モデル更新時の再評価を、PoCの段階で決めて小さく確かめる
- 計画書:判定日・判定する人・本番の形・判定の材料・打ち切りの条件を、PoCを始める前に書く
- 判定会:チェック表で材料を確かめ、本番に移る・条件を変えて延長する・打ち切るのいずれかを決める
よくある質問(FAQ)#
Q. PoCの期間はどれくらいが適切ですか?
A. 業務の周期によって変わります。月末の締めのように月に1回しか発生しない業務なら、その周期を複数回含む期間が必要です。期間の長さより、判定日を最初に決めておくことが大切だと弊社は考えています。
Q. PoCの段階で、既存システムとの連携まで作るべきですか?
A. 作り込む必要はありません。本番と同じ経路で数件のデータを流し、受け渡しができることと、本番化に必要な追加の開発範囲を確かめておけば、判定の材料になります。
Q. PoCで良い結果が出たのに本番化が決まらないときは、何から見直しますか?
A. 判定会のチェック表で「いいえ」になった項目から埋めてください。弊社の見方では、本番の件数での費用と運用の担い手が決まっていないことが、決裁が進まない理由になっている場合が少なくありません。
Q. PoCの結果が悪いときは、打ち切ってよいですか?
A. 計画書に書いた打ち切りの条件に当てはまるなら、打ち切りを検討してください。打ち切った案件で作った評価テストや整えた資料は、次の案件に生かせる場合があります。条件を決めていなかった場合は、目的の数字が動かなかった理由をチェック表で確かめてから判断します。
Q. 本番運用の途中で、AIモデルを切り替えてもよいですか?
A. 切り替えること自体は可能です。ただし、回答の傾向が変わることがあるため、PoCで作った評価テストを新しいモデルで流し直し、合格基準を満たすことを確かめてから切り替えてください。
PoCから本番運用へのご相談#
弊社(株式会社TryWith)は、AIソリューション開発とシステム開発を通じて、PoCの計画づくり、本番と同じ経路での試行、既存システムとの連携、例外時の引き継ぎや記録の仕組みづくり、本番運用後の評価テストの更新までを、開発を担う立場から支援しています。
PoCは終わったが本番化の判断ができない、本番化に必要な追加の開発範囲や費用が分からない、といった段階からのご相談も承ります。
タグ
