モデル更新でプロンプトが動かなくなった日 — 従業員34名の印刷会社が3週間でやった「AI業務の依存点検」と乗り換え判断

この記事の事例は、実際にいただくご相談をもとにした想定ケースです。特定の企業を指すものではありません。

7月14日、見積書の要約が急に長くなった

大分市の印刷会社（従業員34名、年商4億8千万円）で、営業事務の松本さんが最初に気づきました。

この会社では前年10月から、取引先から届く仕様書PDFを生成AIに読ませて、見積作成用の「要点5行」に要約する運用をしていました。1件あたり25分かかっていた仕様確認が7分になり、月120件で約36時間の削減になっていました。

7月14日の朝、同じプロンプトを流したら、出力が5行ではなく12行になりました。しかも「※判断が難しい箇所は営業担当にご確認ください」という但し書きが毎回付きます。松本さんは3回やり直して、諦めて手で削りました。

その週、社内で似た報告が3件出ました。製造部の作業指示書テンプレート生成、総務の議事録要約、営業部の提案書たたき台です。いずれも「前と違う」という曖昧な訴えで、壊れたわけではないから誰も止められません。

原因はモデルのバージョン更新でした。提供元は事前にアナウンスを出していましたが、誰も読んでいませんでした。

「困っている」と「回らない」を分けるところから始めた

社長は8月4日の朝礼後、部門長3人と1時間だけ集まりました。最初にやったのは、社内で動いているAI利用を全部書き出すことではありません。「止まったら業務が回らないものはどれか」を分けることでした。

書き出したのは17件です。そのうち「回らない」に入ったのは3件だけでした。

用途	月間件数	止まった時の影響	分類
仕様書PDF要約	120件	見積が半日遅れます	回らない
作業指示書テンプレート	60件	手書きで代替可・1件20分増	困る
議事録要約	8件	翌日以降でよいです	困る
提案書たたき台	15件	過去案件の流用で足ります	困る
メール文面の下書き	個人任意	影響なし	気づかない

「回らない」に入った3件だけを、この夏の点検対象にしました。17件全部を見直そうとすれば8月中には終わらない、というのが社長の判断でした。この見極めの手前で全体が止まるパターンはAI導入が失敗する3つのパターンと、回避するための具体策でも触れている通りで、この会社は範囲を絞ることで動けました。

あわせて読みたいAI導入が失敗する3つのパターンと、回避するための具体策

プロンプトが「そのモデルの癖」に寄りかかっていた

3件のプロンプトを読み直して分かったのは、書き方が特定モデルの挙動に依存していたことでした。

仕様書要約のプロンプトは、こう始まっていました。

この仕様書を要約して。5行で。

これで前のモデルは動いていました。用紙・サイズ・部数・納期・特記事項を、ちょうど5行で拾ってくれました。何を拾うかはモデルが勝手に判断していて、それがたまたま業務と合っていました。書いていないから、モデルが変わると再現しません。

書き直したのはこうです。

あなたは印刷会社の営業事務です。添付の仕様書PDFから、
以下の5項目を各1行で抽出してください。

1. 用紙（銘柄・斤量）
2. 仕上がりサイズと綴じ方
3. 部数
4. 納品希望日と納品場所
5. 特記事項（色指定・校正回数・支給データの有無）

制約:
- 各行は「項目名: 値」の形式。40字以内。
- 記載がない項目は「記載なし」とだけ書く。推測しない。
- 5行以外の文（前置き・確認の呼びかけ・注意書き）は出力しない。

書き足したのは、抽出したい項目・形式・書かない条件の3つです。松本さんが元々「頭の中でやっていた確認」を、そのまま文にしただけでした。作業は30分でした。

このプロンプトを3種類のモデルで試したところ、3つとも5行で返ってきました。項目の抜けは、A社モデルが0件、B社モデルが1件（特記事項の校正回数を拾わなかった）、C社モデルが0件でした。20件のサンプルで検証した結果です。

乗り換えるか、留まるか — 8月11日に決めた4つの基準

検証を経て、部門長会議で判断基準を4つ置きました。乗り換えありきでも、留まりきでもありません。

1. 直せば済むか。 仕様書要約は、プロンプトを直したら現行モデルでも12行問題が消えました。乗り換え不要と判断しました。

2. 出し直しの手間が何時間か。 作業指示書テンプレートは、社内の用語辞書を読ませる仕組みごと作り直す必要があり、見積もりで11時間です。月20分×60件＝20時間の削減効果に対して、初年度で回収できる範囲でした。

3. 契約と請求がどう動くか。 既存契約は年間契約で残り5か月です。並行利用すると月額が1万8千円増えます。「回らない」3件だけを新しい環境で動かし、残りは既存契約の満了を待つことにしました。この考え方は生成AIの利用料が月3万円を超えたら — 中小企業のためのコスト見直し手順の整理と同じ発想です。

4. 誰が試すか。 検証を情シス担当1人に任せず、実際に毎日使っている松本さんが20件の実データで判定しました。「使える／使えない」を判断できるのは業務を知っている人だけでした。

結果として、17件のうち乗り換えたのは1件、プロンプトを書き直したのは3件、何もしなかったのが13件でした。3週間の作業時間は合計で9時間でした。

あわせて読みたい生成AIの利用料が月3万円を超えたら — 中小企業のためのコスト見直し手順

二度目の更新に備えて置いた3つの仕組み

8月下旬、この会社は次の更新に備えて3つ決めました。

ひとつ目は、プロンプトの保管場所を共有フォルダに1本化したことです。それまでは各自のメモ帳やチャット履歴に散っていて、何がどこで動いているか誰も把握していませんでした。ファイル名に「用途_最終確認日」を入れる規則も同時に決めました。

ふたつ目は、四半期に一度、「回らない」3件だけを同じ入力データで流し直す点検日を置いたことです。10月・1月・4月・7月の第2金曜、所要30分です。判定は松本さんともう1人の2名体制にしました。

みっつ目は、期待する出力を1件だけ「見本」として保存したことです。仕様書要約なら、正解の5行を書いたテキストファイルを1つ保存します。次に何かおかしいと感じたとき、「前はこうだった」を記憶ではなく現物で照合できます。プロンプトを個人の頭から出す考え方は属人業務をAIで標準化する方法と共通します。

社長は「AIが変わるのは止められないが、変わったときに慌てないようにはできる」と話しています。

あわせて読みたい属人業務をAIで標準化する方法 — 「あの人がいないと回らない」を解消する

この点検を自社でやるときに

えらびの道では、生成AIの業務活用について「研修」と「コーチング」の2軸で支援しています。研修は半日の単発と、標準コースがあります。今回のようなプロンプトの書き直しは、モジュールの中で実際の業務文書を持ち込んで手を動かす形で扱います。コーチングでは、社内で動いているAI利用の洗い出し、「回らない／困る」の切り分け、検証用データの選び方、定期点検の運用ルール作りまで、実業務に伴走して進めます。人材開発支援助成金や自治体の補助金の活用にも対応しており、訓練計画届の準備段階から相談を受けています。

モデル更新に振り回されない運用まで、えらびの道でお手伝いできること

合同会社えらびの道は、大分県の中小企業に向けて生成AIの業務活用研修をしています。研修だけを専門にしている会社ではなく、普段はシステムの受託開発と自社サービスの運用をしていて、生成AIはそこで毎日使っている道具のひとつです。モデルが変わって出力の調子が変わる場面も、開発と運用の現場で経験しています。

研修では、貴社が実際に使っている書類をそのまま題材にします。この記事の例でいえば、仕様書の要約や作業指示書のテンプレート、議事録の要約といった用途について、抽出したい項目・出力の形式・書かせない条件を言葉にする作業を、その場で一緒に進めます。汎用的な事例ではなく、翌日から使える形で持ち帰っていただくためです。

止まったら業務が回らないものはどれか、という切り分け自体も同じ場で扱います。えらびの道では、事前のヒアリングに伺うのも研修当日に立つのも代表の喜多で、社内の事情を一度お話しいただければ、そのまま当日の題材に反映できます。

まずはオンラインで30分ほど、今お使いのプロンプトや困っている場面を伺うところからで構いません。ご相談に費用はかかりません。

よくある質問

モデルが更新されたかどうかは、どうやって知ればいいですか？

提供元のリリースノートやお知らせページで告知されるのが通常ですが、日々確認するのは現実的ではありません。実務では、業務に不可欠なプロンプト数件を四半期に一度同じ入力で流し直し、出力が変わっていないか見る運用が現実的です。所要30分程度で済みます。

複数のAIサービスを併用したほうが安全ですか？

止まると業務が回らない用途が1つ2つあるなら、代替手段を確認しておく価値はあります。ただし全用途で併用すると費用と管理の手間が増えます。まず「止まったら回らない」用途を絞り込み、そこだけ他サービスでも動くか試しておくのが現実的です。

プロンプトを書き直せば、モデルが変わっても動きますか？

完全には保証できませんが、出力してほしい項目・形式・書かない条件を明示したプロンプトは、モデルが変わっても再現性が高くなります。逆に「要約して」のような短い指示は、モデル側の判断に依存する部分が大きいため、更新の影響を受けやすくなります。