メインコンテンツへスキップ
見出し画像

AI業務代行の品質管理は「抜き取りと誤り率」で見せる──点検する件数、誤りの数え方、重大な誤りは全件で見る線と点検時間の計算例

    この記事は、AI業務代行の品質管理を、抜き取り点検と誤り率で測って顧客に見せる方法を扱います。


    AI業務代行(BPaaS)の範囲・SLA・価格は、別の記事で扱いました。そこで「正答率の数字は、測り方を合意するまで書かない」と書きました。この記事は、その測り方の話です。

    ▶ 業務代行のSLAと価格の決め方、AIで業務ごと受ける制作会社へ──範囲は「件数・時間帯・例外」で区切り、SLAは守れる数字だけ、月額は人の確認時間から出す計算例

    「ちゃんと確認しています」は、品質の報告にならない

    月次の報告会で、顧客にこう聞かれます。
    「AIが処理しているそうですが、間違いはどのくらいあるんですか」


    「担当者が全部確認しているので、大丈夫です」
    こう答えた会社は、最初の誤りが見つかった瞬間に、信用を全部失います。
    「全部確認していたのに、なぜ」と聞かれて、答えられないからです。


    品質は、感覚ではなく、数え方を決めて数字で見せるものです。

    AI業務代行の品質管理とは、処理した件数の中から決まった方法で抜き出して点検し、誤りを重さ別に数え、その結果と対策を毎月顧客に報告する仕組みである

    黒字化の外科医です。AI業務代行の品質を、抜き取りと誤り率で測る手順を解剖します。


    数え方を決めるべき理由は、三つあります。


    第一に、全件を同じ深さで見続けることは、続かないから。
    件数が増えると、確認は読み飛ばしに変わります。全件を見ているつもりの確認より、決まった件数を深く見る点検のほうが、誤りを見つけます。


    第二に、誤りには重さの違いがあるから。
    宛名の敬称の抜けと、金額の誤りを同じ「1件」と数えると、数字が実態を表しません。


    第三に、数字があると、改善が話し合えるから。
    「先月より誤りが減った」「この種類の誤りが多い」。数字があれば、資料の更新や範囲の見直しを、顧客と事実で話せます。

    誤りは「重大・軽微」の2段で数える

    最初に、誤りの重さを顧客と決めます。

    重大な誤り(1件でも報告と原因調査)
    ・金額、日付、数量、宛先の誤り
    ・範囲外の質問に答えた、引き継ぐべきものを引き継がなかった
    ・個人情報を、別の人に送った・見せた
    
    軽微な誤り(件数で管理)
    ・表記ゆれ、敬語の不自然さ
    ・案内の順番が分かりにくい
    ・必要以上に長い


    重大な誤りが起きやすい種類(金額や宛先を含む処理)は、抜き取りではなく全件を人が確認する、と決めておきます。抜き取り点検は、全件確認を省くための道具ではなく、全件確認の外側を測るための道具です。

    抜き取りの件数と、誤り率の出し方

    誤り率 = 点検で見つかった誤りの件数 ÷ 点検した件数
    (重大・軽微を分けて出す)
    
    例(数字はすべて例)
    月の処理件数:400件
    抜き取り:40件(毎週10件ずつ、曜日と時間帯を散らして選ぶ)
    見つかった誤り:重大0件、軽微3件
    軽微の誤り率:3 ÷ 40 = 7.5%


    抜き出し方は、「担当者が選ばない」ことが大切です。処理の番号の末尾で選ぶなど、機械的に決めます。


    もう一つ、知っておくと報告が正確になる目安があります。
    点検した件数の中に誤りが0件でも、「誤りは0%」とは言えません。統計の目安として、n件を点検して0件だったときの誤り率の上限は、おおよそ「3 ÷ n」と見積もられます。

    点検30件で0件 → 上限の目安 約10%(3 ÷ 30)
    点検50件で0件 → 上限の目安 約6%(3 ÷ 50)
    点検100件で0件 → 上限の目安 約3%(3 ÷ 100)


    報告には「点検した40件では重大な誤りは0件でした」と、件数と一緒に書きます。「誤りはありません」とは書きません。

    今すぐ試せる:点検の記録から誤りを分類するプロンプト

    私はWeb制作会社の担当者です。AI業務代行で今月抜き取り点検した結果を、誤りの重さと原因で分類してください。
    (顧客名、個人名、連絡先は入力前に伏せています)
    
    【点検の記録】
    〔番号、処理の内容の要約、点検者のコメントを貼る〕
    
    【誤りの定義】
    重大:金額・日付・数量・宛先の誤り、範囲外への回答、引き継ぎ漏れ、個人情報の誤送信
    軽微:表記ゆれ、敬語、分かりにくさ、長さ
    
    1. 各記録を「誤りなし・軽微・重大」に分ける。迷うものは「要確認」とする。
    2. 誤りの原因を「資料が古い」「範囲外を処理した」「確認漏れ」「AIの誤り」に分ける。
    3. 重大・軽微それぞれの誤り率を、点検件数を分母にして計算する。
    4. 来月の対策の候補を、原因別に1つずつ書く。

    品質点検工場:点検票と報告の型

    点検票

    番号 / 処理日 / 業務の種類 / 点検者
    / 判定(誤りなし・軽微・重大)
    / 誤りの内容(個人情報は書かない)
    / 原因(資料が古い・範囲外・確認漏れ・AIの誤り)
    / 顧客への連絡の要否 / 対策

    月次報告の品質の欄

    処理件数:〔 〕件
    点検件数:〔 〕件(抜き出し方:〔 〕)
    全件確認した種類:〔金額を含むもの〕〔 〕件
    重大な誤り:〔 〕件(内容と対策は別紙)
    軽微な誤り:〔 〕件、誤り率〔 〕%
    先月との比較と、来月の対策

    点検にかかる時間の計算(数字はすべて例)

    点検40件 × 1件5分 = 200分
    200分 × 時間単価7,645円 ÷ 60 ≒ 25,483円


    時間単価7,645円は、時間単価の記事の計算例の数字です。点検の時間は月額の原価に必ず入れます。入れないと、品質を守るほど赤字になります。

    ▶ 制作会社の「時間単価」は、年収から逆算する──人件費の係数、稼働率、目標の利益で決める、見積もりの土台になる1時間の値段

    構造的なリスク

    逆説を指摘しておきます。


    誤り率を報告し始めると、顧客は「何%以下を約束してほしい」と言い出します。
    けれど、件数の少ない月は、1件の誤りで率が大きく動きます。点検40件なら、1件で2.5%です。


    だから、約束にするのは「決めた方法で点検し、結果と対策を報告すること」と「重大な誤りへの対応の手順」です。率の数字は、半年分の記録がそろってから、目安として話し合います。

    よくあるQ&A

    Q. 何件を抜き取ればよいか?


    決まった正解はありません。点検にかけられる時間から逆算し、上の「3 ÷ n」の目安で、顧客に説明できる件数を選びます。最初の3か月は多めに点検し、記録を見て減らします。


    Q. 点検は、処理した本人がしてよいか?


    できれば別の人が点検します。1人で回している場合は、処理の翌日以降に、点検票を使って見直します。人の配置の考え方は、人員設計の記事で扱います。

    ▶ AI業務代行の人員設計、1人で何社持てるかは「人の時間」で決まる──AIと人の分担表、4つの役割、休みの日の代わりと計算例


    Q. 外注先の検品と、何が違うのか?


    考え方は同じです。外注の検品の基準をそろえる型は、こちらにまとめています。

    ▶ 制作会社の外注管理は「4つの型」でそろえる──発注書の項目、進行の確認点、検品の基準、評価と継続の判断。外注先の品質と納期のばらつきを止める

    最後に

    AI業務代行の品質は、「確認しています」ではなく、数え方で見せるものです。


    誤りを重さで分け、重大な処理は全件、それ以外は抜き取りで点検し、件数と一緒に報告した会社だけが、誤りが起きた月にも、顧客の信用を保てるのです。

    これまでの記事は、メンバーシップ「黒字化オペ室」でまとめて読めます。月額1,980円、記事2本分の金額です。詳しくはプロフィールから。


    #Web制作会社 #品質管理 #AI業務代行 #AIBPaaS #抜き取り検査 #業務代行 #生成AI #制作会社経営 #中小企業 #SLA

     
     
    Web制作・開発会社の「労働集約という病」をAIで冷徹に切除し、利益率を極限化する組織ハッキング術を公開。 人間の感情と作業を排除し、社長一人で莫大な富を搾取する「完全無人ファクトリー」を構築する覚悟を持つ経営者のみ、有料記事で圧倒的な暴利と勝利を手に入れてください。

    あなたへのおすすめ