外観検査AIの運用設計:誰が育て、誰が使うのか
外観検査AIは、導入後の運用で「誰がモデルを育てるのか」が決まっていないと、過検出の増加とともに現場で使われなくなっていきます。本記事では、使う人・基準を決める人・育てる人の役割分担と、再学習を発動する条件の決め方を整理します。運用の空白を先に埋めておくことで、PoCで確認した精度を量産ラインで維持しやすくなります。
PoCでは十分な精度が出て、量産ラインにも導入できた。ところが半年ほど経つと過検出が増え、検査員がAIのNG判定を信用しなくなり、結局は全数を目視で見直している。外観検査AIの相談では、こうした経緯をよく耳にします。 多くの場合、原因はモデルの性能そのものではありません。導入後にモデルの面倒を見る仕事が、誰の業務にもなっていないことです。この記事では、外観検査を例に、導入後の役割分担と運用サイクルの決め方を具体的に整理します。
外観検査AIの運用が導入後に止まる典型パターン
外観検査のモデルは、学習した時点の製品と撮像条件を前提にしています。現場ではその前提が少しずつ変わっていきます。
- 材料ロットや仕入先が変わり、表面の色味や光沢が変わる
- 照明が経年で暗くなる、レンズに汚れが付く
- 治具の交換でワークの位置や角度がわずかにずれる
- 新しい品種や、これまでになかった種類の不良が出てくる
変化が起きること自体は避けられません。問題は、変化に気づいて手を打つ担当が決まっていないことです。運用が止まった現場を振り返ると、次の3つが空白になっていることが多くあります。
- AIと人の判断が食い違った画像について、良否を最終的に決める人がいない
- 何がどうなったら再学習するのか、条件が決まっていない
- 再学習したモデルを本番に入れてよいと承認する人がいない
この3つが空白だと、過検出が増えても「そのうち誰かが直すだろう」という状態が続きます。その間に、現場はAIの判定を無視する運用に慣れてしまいます。
「育てる人」と「使う人」を分け、基準を持つ人を決める
運用設計では、関わる人を「使う人」と「育てる人」の2つに分けるだけでは足りません。実務では次の4つの役割に分けると、責任の所在がはっきりします。
- 使う人:検査員やライン担当。AIの判定を見て、違和感のある結果に気づく
- 基準を持つ人:品質管理。何を不良とするかを決め、ラベルを確定する
- 育てる人:DX推進・情報システム部門、または委託先。指標を監視し、再学習と評価を行う
- 撮像環境を守る人:生産技術や設備保全。カメラ、照明、治具の状態を維持する
業務単位に落とすと、次のような分担表になります。頻度は一例なので、生産量や品種数に合わせて調整してください。
| 業務 | 主担当 | 頻度の目安 |
|---|---|---|
| AIのNG判定の再確認、疑義画像のフラグ付け | 検査員・ライン担当 | 毎シフト |
| 疑義画像の良否ラベル確定、限度見本の更新 | 品質管理 | 週1回(30分程度) |
| 過検出率や保留率などの指標確認 | モデル担当(社内または委託先) | 週1回 |
| 再学習の実施、評価セットでの新旧比較 | モデル担当(社内または委託先) | 発動条件を満たしたとき |
| 新モデルの本番反映の承認 | 品質管理の責任者 | 再学習のつど |
| カメラ・照明・治具の点検、基準ワークでの確認 | 生産技術・設備保全 | 日次から週次 |
この表で外部に出してはいけないのは「基準を持つ人」です。再学習の作業は委託できますが、何を不良とするかの判断は品質保証そのものです。ここを委託先に任せると、出荷品質の責任が曖昧になります。
育てる役割を内製するか、委託するか
育てる役割を社内に置くかどうかは、次の観点で判断できます。
- 品種追加や仕様変更が月1回以上あるなら、社内で再学習できる体制が向いている
- 変更が年に数回程度なら、委託先との保守契約で対応しやすい
- 委託する場合は、再学習の回数、依頼から反映までの日数、学習データとモデルの帰属を契約に明記する
内製の場合も、担当者が1人だけだと異動や退職で止まります。再学習の手順書と、どのデータでどのモデルを作ったかの記録は、最初から残す前提にしておきます。
再学習をいつ発動するか:監視指標としきい値の決め方
「精度が落ちたら再学習する」という取り決めでは、実際には誰も動けません。数値で発動条件を決めておく必要があります。外観検査で現場が取りやすい指標は次のとおりです。
- 過検出率:AIがNGとしたもののうち、人の再確認で良品だった割合。日々の運用で自然に取れる
- 見逃し件数:後工程、出荷検査、顧客からの指摘で発覚した不良の件数
- 保留率:AIの確信度が低く、人の判断に回した割合
- スコア分布の変化:良品の異常スコアが全体的に高い側へずれていないか
発動条件は、たとえば次のように決めます。数値はあくまで例で、実際には不良流出時のコストと目視再検の工数から決めてください。
- 過検出率が発動ライン(例:導入時の約2倍)を2週連続で超えたらレビューを開く
- 見逃しは1件でも発覚した時点で、即時に原因を確認する
- 新品種の投入や材料変更は、指標を待たずに事前評価の対象とする
下のグラフは、説明用に作成した想定データです。過検出率が2%前後で安定していたラインで、7週目の材料ロット切替を境に上昇が始まり、9〜10週目に発動ライン(4%)を2週連続で超えたため再学習を実施した、という流れを示しています。
週次で推移を見ていれば、7〜8週目の時点で「上がり始めている」と気づけます。発動ラインを超える前に追加データを集め始められるので、再学習までの時間を短くできます。
見逃しはNG判定だけ見ていても分からない
過検出は、検査員がNG品を再確認する流れの中で自然に把握できます。一方、見逃しはAIが良品と判定した側に隠れています。良品判定の中から1シフトあたり数十個を抜き取り、人が確認する手順を入れておくと、後工程で発覚する前に兆候をつかめます。抜き取り数は生産量と不良率から決めます。
日次・週次で回す運用サイクル
役割と発動条件が決まったら、次のサイクルに落とし込みます。
- 日次:検査員がAIのNG判定を再確認し、判断に迷った画像に「疑義」のフラグを付ける
- 週次:品質管理が疑義画像を見て良否を確定し、必要なら限度見本に追加する
- 週次:モデル担当が指標を確認し、発動条件に該当するかを判断する
- 発動時:確定済みラベルを加えて再学習し、固定の評価セットで旧モデルと比較する
- 承認:品質管理の責任者が結果を確認し、切替日と元に戻す手順を記録して本番に反映する
4番目の評価セットは、運用の要になります。過去の見逃し品や、限度ぎりぎりの良品・不良品を集めた画像セットを固定で持ち、新モデルがこのセットで旧モデルを下回らないことを反映の条件にします。新しい不良には強くなったが以前検出できていた不良を見逃すようになった、という事故を防ぐためです。 余裕があれば、新モデルを数日間は判定に使わず、裏で動かして旧モデルと結果を比べる期間を設けると、切替の判断がしやすくなります。 設備監視の異常検知でも、考え方は同じです。アラートが正しかったかどうかを保全担当が記録し、誤報率と見逃しを指標にして、しきい値の見直しや再学習の発動条件を決めます。
つまずきやすい点と回避策
検査員ごとにラベルが揺れる
同じ画像でも、人によって良否の判断が分かれます。揺れたラベルで再学習すると、モデルの判定も不安定になります。ラベルを確定する人は1〜2名に絞り、判断に迷った事例は画像付きの限度見本として蓄積します。
撮像条件の変化をモデルで吸収しようとする
照明の劣化やレンズの汚れが原因の精度低下を、再学習で解決しようとするケースがあります。これを続けると、モデルは劣化した条件に合わせ込まれ、照明を交換した途端にまた崩れます。基準ワークを毎日撮影して明るさや位置を確認し、撮像側の問題は撮像側で直すのが原則です。
現場のフィードバックが一方通行になる
検査員が疑義フラグを付けても、その後どうなったかが分からないと、フラグ付けは続きません。「先月の指摘を反映し、この種類の過検出が減った」といった結果を現場に返すことで、データが集まり続ける状態を保てます。
運用工数を見積もらずに導入する
週次レビューや抜き取り確認には、少ないながらも工数がかかります。PoCの報告段階で「運用に週何時間、誰の時間が必要か」を見積もり、導入判断に含めておくと、後から「そんな時間はない」という事態を避けられます。
まず何から始めるか
すでに導入済みの現場でも、これから導入する現場でも、最初の一歩は同じです。次の5つの問いに、担当者名を入れて答えられるかを確認してください。
- AIの判定に現場が異を唱えた画像は、どこに溜まるか
- その画像の良否を最終的に決めるのは誰か
- どの指標がどの値になったら再学習を検討するか
- 新しいモデルを本番に入れてよいと承認するのは誰か
- 問題が出たとき、前のモデルに戻す手順はあるか
答えられない項目が、そのまま運用の空白です。5つすべてを一度に整える必要はありません。まずは1番と2番、つまり疑義画像の置き場所とラベルの確定者を決めるだけでも、再学習に使えるデータが蓄積され始めます。モデルを育てる体制は、そこから順に組み立てていけます。
