AIの判断を業務に使うなら、偏りを調べ、人が見直せる仕組みまで設計することが重要です。
責任あるAIとは、AIの設計・利用・見直しを通じて、公平性、透明性、説明可能性、プライバシー、安全性を考慮する取り組みです。
AI技術が業務の意思決定に組み込まれるほど、判断の影響を受ける顧客や従業員への配慮が重要になります。採用選考にAIを使う場合は、学習データと判断結果の両方を点検する必要があります。ビジネスデータを扱うAI技術でも、入力する情報と出力の使い道を分けて考えたいところです。
本記事では、責任あるAIを実装するための具体的な方法を解説します。AI活用完全ガイドで、AI活用の全体像を把握できます。
この記事でわかること
AI導入における倫理的リスクに対策を打ちたい経営者・AI推進担当者に向けた記事です。
- 責任あるAIの判断軸 — 公平性や説明可能性を、業務上の判断とどう結びつけるかを整理します。
- バイアスの見つけ方と戻り先 — データ収集、測定、モデル設計のどこに偏りがあるかを見分けます。
- 人間とAIの役割分担 — AIに任せる作業と、担当者が引き受ける判断を切り分けます。
- 導入後の見直し方 — 小さく試し、結果を記録して運用を広げる順序を確認します。
責任あるAIは何を満たすべきか
責任あるAIを「精度の高いAI」とだけ捉えると、判断の影響を受ける人への説明や救済が抜け落ちます。利用目的を決める段階から運用後の見直しまで、同じ原則を判断軸として使います。
まずはAIの用途を書き出し、その出力が人への提案にとどまるのか、採用や与信などの判断に使われるのかを分けてください。
公平性は用途に合う基準を選ぶ
公平性とは、特定の属性を持つ人が不当に不利になる判断を見つけ、是正するための考え方です。ただし「公平」の意味は一つではありません。確認している点は、次の方法で異なります。
- 各グループで肯定的な判定の割合を見る方法
- 適格な人が肯定的な判定を受ける機会を見る方法
- 肯定的な判定の妥当性を見る方法
例えば採用であれば、単に通過率が同じかを見るだけでは、応募者の適格性や選考条件との関係を説明しきれません。業務で何を公平に扱いたいのかを先に言葉にし、その基準に必要なデータを確認します。
基準を決められない段階では、自動判定を広げず、担当者が結果を検討する範囲に利用をとどめるのがよいと考えています。
透明性と説明可能性は相手を分けて考える
- 透明性 ── AIを使っている事実、使うデータ、用途や限界を関係者に伝えること
- 説明可能性 ── 個別の結果について、担当者が理由を検討できる状態
利用者への告知と、社内での判断根拠の確認は、目的も伝える内容も異なります。
説明可能性を支える手法には、次のものがあります。
- SHAP ── 入力項目が予測にどう寄与したかを調べる手法
- LIME ── 個別の予測を解釈しやすい形で近似する手法
これらの結果を表示しても、その特徴量を業務判断に使うことが妥当かどうかは人が考えます。説明を受けた担当者が判断を変更できないなら、表示方法だけでなく承認や再審査の流れを見直す必要があります。
EUのAI規制法には、AIとの対話を利用者に知らせる透明性に関する規定があります。適用対象や義務の内容は用途によって異なるため、対象業務を特定したうえで確認します。(出典:欧州委員会のAI規制法解説)
プライバシーと安全性は入力から確認する
プライバシーを考えるときは、収集した情報をすべてAIに渡す前提を置かないことが出発点です。目的に必要な項目を選び、不要な個人情報を入力から外します。
利用目的を説明できない項目が残る場合は、その項目を使わずに目的を達成できるかを先に試してください。
安全性と堅牢性では、想定外の入力や誤った回答が業務に流れ込んだときの扱いを決めます。
- 誤答が顧客への案内に直結する ── 公開前の確認を厚くする
- 社内の下書きに使う ── 担当者による修正を前提にできる
技術的な防御策はAIセキュリティの企業対策ガイドでも解説しています。
AIバイアスはどこで生じるか
偏りを見つけても、発生した場所がわからなければ対策を選べません。次の場面に分けて調べます。
- 過去の記録を取り込む前
- データを集めるとき
- 測定項目を決めるとき
- モデルを調整するとき
出力だけを直してよいのか、入力や業務上の評価基準まで戻るべきかを判断するためです。
過去の記録と収集方法を調べる
- 学習データのバイアス ── 過去の判断や社会的な偏りが記録に含まれている場合に起こる
- 選択バイアス ── データを集めた相手が、実際にAIを使う対象者を十分に表していない場合に生じる
過去の採用結果を学習に使う前に、その結果が現在の採用基準を表しているかを確認する必要があります。過去の判断に偏りがあれば、モデルがその傾向を引き継ぐ可能性があります。
オンラインで集めた回答だけを使うなら、回答していない層について同じ判断をしてよいかを問い直します。評価に必要な対象者のデータが不足している場合は、モデルだけを調整する前に、収集方法や評価対象を見直せるか検討します。
測定項目とモデルの目的を見直す
- 測定バイアス ── 項目が本来知りたいことを適切に表していない場合に起こる
- アルゴリズムバイアス ── モデルが全体の成績を高める一方で、一部のグループの誤判定を見過ごす場合などに生じる
与信審査で郵便番号を使う場合、住所に関わる情報が別の属性の代わりとして働き、地域による不利益につながる可能性があります。項目を外せば済むかどうかは、その項目を業務で使う理由と、外した後の判断の妥当性を併せて確認します。
全体の精度が良くても、特定のグループで誤りが目立つ場合は、属性別に集計できるデータとその利用目的を確認します。差が確認できたら、学習データ、評価項目、判定方法のうち、どこが結果に関係しているかを調べます。
誤りの種類で戻り先を決める
同じ「偏り」という言葉でも、欠けているデータを増やすことと、使うべきでない項目を外すことは別の作業です。本記事では、発見した問題と戻り先を次のように整理します。
| 見つかった問題 |
先に確かめること |
次に行うこと |
| 対象者の一部がデータに少ない |
収集元が実際の利用対象を表しているか |
収集方法と評価対象を見直す |
| 判断に疑問のある項目が使われている |
その項目を使う業務上の理由があるか |
項目を外した結果も比較する |
| 全体の結果は良いが一部で誤りが目立つ |
どの判断で、誰に不利益が生じるか |
属性別の評価と判定方法を見直す |
| 理由を担当者が説明できない |
入力、出力、確認者の記録が残るか |
判断根拠の記録と再審査の流れを整える |
この表では、バイアスの分類を実務上の調査順に示します。属性別の分析に使う情報も個人情報になり得るため、収集目的と閲覧できる担当者を決めてから扱います。
公平性をどう測り、是正するか
検出ツールを導入する前に、どの出力を評価するかを固定します。採用なら選考結果、顧客対応なら回答や引き継ぎの結果というように、実際の業務で使う判断を対象にしてください。
その後、偏りを測る基準と、結果が悪かった場合に変更できる箇所を決めます。
評価対象と比較方法を決める
公平性の指標は、業務上の問いに合わせて選びます。何を比べたいかで、必要な記録は変わります。
- 肯定的な判定の割合を比べたい
- 適格と判断される人に機会が届いているかを比べたい
複数の基準が異なる結果を示したときは、一つの数値だけで合否を決めず、どの不利益を避けたいのかを関係者で確認します。
バイアス分析の選択肢には、次のものがあります。
- IBM AI Fairness 360
- Microsoft Fairlearn
- Google What-If Tool
ツール名から先に選ぶのではなく、評価する出力と使えるデータを決めてから、必要な分析を行えるものを選びます。指標数やアルゴリズム数は出典を確認できないため、ツールの選定根拠には使いません。
修正する段階を選ぶ
バイアスへの対策には、次の方法があります。
- 学習前のデータを見直す方法
- 学習時の制約を調整する方法
- 出力後の判定を調整する方法
対象者がデータから抜けているなら学習前に戻ります。データは揃っているのに評価の目的と結果が合わないなら、学習方法や評価基準を見直します。
出力後の調整だけで使い続ける場合も、元の問題が残っていないかを確認してください。判定方法を変えた理由が担当者に説明できないなら、運用に採用する段階には進めません。変更前後の結果に加えて、どの問題を解消するための変更かを記録すると、後から見直しやすくなります。
見直しを日常の業務に組み込む
一度の評価で良い結果が出ても、対象者や入力データが変われば判断の傾向も変わります。次を同じ場所に記録し、次の見直しにつなげます。
- 担当者が気づいた誤判定
- 利用者からの異議
- 属性別の評価結果
問題の出方によって、戻る先は変わります。
- 問題が特定の入力に集中している ── 入力条件へ戻る
- 幅広い場面で起きている ── 利用範囲そのものを狭める
スプレッドシートや担当者ごとのメモに判断理由が分かれていると、同じ問題が再発したときに経緯をたどりにくくなります。最低限、次を引き継げる形で残すことをおすすめします。
個人の注意深さだけに頼らず、次の担当者も同じ手順で確認できる仕組みにするためです。
AIと人間の役割をどう分けるか
AIは情報の整理や下書きに使えますが、影響を受ける人への最終的な判断まで同じ扱いにはできません。AIの出力がどの業務へ渡るかを図にして、担当者が止めたり修正したりできる位置を決めます。
人の確認を入れる場所は、出力の誤りが後から取り消しにくいほど慎重に選びます。
AIには整理と候補作成を任せる
次の作業は、担当者が確認する前提でAIを使いやすい作業です。
AIが示した分類や要約を正しい情報として保存する前に、元の問い合わせや記録をたどれるようにします。根拠となる情報に戻れない結果は、担当者が判断する材料として使いにくいためです。
AIに渡す情報が多いほど良いとは限りません。下書きに顧客の個人情報が不要なら、入力しない設計を選びます。必要な情報だけを渡して目的が達成できるなら、その範囲から始めることをおすすめします。
人が判断し、修正できる位置を残す
採用、与信、医療に関わる判断では、誤判定が個人に大きな影響を与えます。Human-in-the-Loopは、AIの結果を人が確認し、必要なら変更できるようにする設計を指します。
確認者を置くだけでなく、次まで決めます。
欧州委員会は高リスクAIシステムの要件として、人間による監督を挙げています。自社の用途がどの扱いに当たるかは個別に確認し、確認者が結果を覆せる手順を業務側でも設計してください。(出典:欧州委員会のAI規制法解説)
異議が出たときの再審査を用意する
利用者や担当者から判断への疑問が出たとき、AIに同じ質問を繰り返すだけでは解決しません。次をそろえ、担当者が再審査できるようにします。
理由を説明できない結果はそのまま採用せず、判断に用いた項目と業務上の基準へ戻ります。
再審査で問題が確認された場合は、まずその判断に使った入力と基準を特定します。同じ入力処理や判定基準を使う別の結果にも影響する可能性があれば、該当する範囲を定めて追加で点検します。
- 入力データの誤りが原因と確認できた ── データの作成方法を見直す
- 基準の妥当性に疑問がある ── その用途の運用ルールを見直す
調べた範囲と未確認の範囲も記録し、次の担当者が再審査を引き継げるようにします。
採用・与信・CRMで何を優先するか
責任あるAIの原則は共通でも、確認すべき結果は用途によって変わります。
- 採用 ── 応募者への影響を重視する
- 与信 ── 判断理由を重視する
- CRM ── 顧客情報の利用目的と案内内容を重視する
自社の用途に近い領域から、AIが出した結果と人が担う判断を並べてみてください。
採用では選考基準と出力を分ける
HireVueは、新しい選考評価モデルから視覚的な分析を除くと公表しました。採用に関わる情報をAIで評価するとき、評価項目そのものが妥当かを問う材料になります。(出典:HireVueの発表)
応募者の属性に関わる項目を除くだけで公平性が得られるとは考えず、残った項目も選考基準との関係を調べます。選考結果に偏りが見つかったら、次の順に進めます。
- 評価を見直せる状態に戻す ── 候補者の評価を担当者が見直せるようにする
- 原因を確認する ── 問題がデータにあるのか、評価項目にあるのかを確認する
採用業務への組み込み方はAI採用プロセスガイドでも扱っています。
与信では理由を説明できるかを見る
Apple Cardでは、与信限度額に性別による差があるとの申立てを受け、ニューヨーク州金融サービス局が調査しました。同局の調査は女性に対する差別を確認しませんでしたが、判断理由の透明性をめぐる議論につながりました。(出典:ニューヨーク州金融サービス局の調査報告)
このような場面では、結果の差だけを見て原因を決めつけず、次を調べる必要があります。
利用率を理由として示す説明例もあります。ただし、例示された数値を一般的な与信基準として扱うことはできません。
説明に使う項目が実際の判断に対応しているかを確認し、説明と判断が食い違うなら、その結果を利用者へ伝える前に審査へ戻します。
CRMでは利用目的から業務の流れを追う
CRMに蓄積された情報をAIで分類し、顧客対応や営業活動に使う場合、同じデータでも利用目的によって注意点が変わります。例えば、次の二つでは、結果が顧客に与える影響が異なります。
- 問い合わせ内容を担当者へ振り分ける作業
- 顧客ごとに異なる価格を提示する判断
影響の大きい判断へ広げる前に、元データと判断理由を人が確認できるかを調べます。
HubSpotでBreezeを使う場合も、次を一つの流れとして考えます。
- コンタクトの情報を読む
- 取引の対応方針へつなぐ
- 顧客への案内に反映する
AIによる分類は担当者への引き継ぎを助けますが、取引条件や顧客への最終的な案内は担当者が判断する設計をおすすめします。
AI機能を使う前に、HubSpotの利用条件と、自社が扱うデータの種類を確認してください。HubSpotの利用ポリシーには差別的な利用に関する制限が示されています。(出典:HubSpotの利用ポリシー)
顧客対応エージェントのように顧客へ回答する用途では、次を先に決めます。(出典:HubSpotのカスタマーエージェントのガイドライン設定)
以下の画面は、顧客対応エージェントのガイドライン設定画面です。入力欄は空の状態で、設定する場所を示しています。

責任あるAIを業務へどう組み込むか
広い範囲へ一度に導入すると、問題が見つかっても原因を追いにくくなります。まず用途を絞り、次を記録してから試す方法をおすすめします。
ロードマップは、次へ進むための判断ができる順序で示します。
利用中のAIと影響を受ける人を洗い出す
最初に、どの業務でAIを使い、誰がその結果の影響を受けるかを一覧にします。社内の文章の下書きと、応募者や顧客への判断では、確認の厚さを変えるべきです。用途が曖昧なものは利用目的を決め直し、目的を説明できるものから評価へ進めます。
併せて、次を確認します。
情報が各担当者の手元に分かれているなら、判断の経緯を引き継げる場所に集めます。CRMを使う業務では、入力から顧客対応までのどこでAIが関わるのかを示すと、確認者を決めやすくなります。
審査と記録の手順を作る
次に、影響が大きい用途について、導入前に確認する項目をそろえます。AIインパクトアセスメントでは、次の項目が出発点です。
- 目的
- 対象者
- データ
- 偏り
- プライバシー
- 説明
- 監督
- 誤判定時の対応
答えが出ていない項目があれば、対象を狭めるか、人による確認を増やして試します。
記録は長い文書にすることより、次の担当者が判断をたどれることを重視します。次を残してください。
問題が起きたときに同じ情報へ戻れるなら、見直しを個人の記憶に頼らず進められます。
小さく試して利用範囲を広げる
試行では、AIの出力を担当者が確認できる用途から始めます。想定と違う結果が出たら、原因ごとに戻る先が変わります。
- 入力が原因 ── データへ戻る
- 基準が原因 ── 業務ルールへ戻る
- 説明不足 ── 記録と表示方法へ戻る
見直しを繰り返しても判断理由を示せない用途は、自動化の範囲を広げない選択も必要です。問題への対応が担当者間で共有でき、利用者からの指摘も記録できるようになったら、次の用途を検討します。
導入範囲を広げる判断は、処理できる件数だけでなく、誤りを発見して修正できる体制があるかで行います。
AI生産性の測定方法で扱う効果測定にも、公平性や再審査の負担を併せて見る視点が役立ちます。
よくある質問
AIバイアスはなくせますか?
あらゆる用途で偏りをなくしたと判断することは難しいです。まず対象となる判断と避けたい不利益を決め、データと結果を調べます。偏りが見つかったら発生箇所へ戻り、修正後も同じ方法で評価を続けてください。
小規模な組織でも取り組めますか?
AIが顧客対応や採用の判断に関わるなら、組織の規模にかかわらず、利用目的と確認者を決めることが出発点になります。全用途を同時に扱わず、影響を受ける人がいる業務から調べてください。判断理由と修正内容を共有できる形で残すことが、次の担当者への引き継ぎにもつながります。
EUのAI規制法は日本企業にも関係しますか?
日本企業でも、EUに関わるAIの提供や利用の仕方によって、適用関係を確認する必要があります。所在地だけで結論を出さず、サービスを提供する相手、AIの用途、自社の役割を整理してください。該当性に迷う場合は、その整理を基に専門家へ確認するのがよいでしょう。
説明可能性の手法を導入すれば、人による確認は不要ですか?
SHAPやLIMEなどの手法は、モデルの結果を調べる助けになります。ただし、示された項目を判断に使ってよいか、その結果を相手にどう説明するかは別の問題です。担当者が結果を確認し、必要なら判断を変えられる手順を残してください。
AIの判断に異議が出たらどう対応しますか?
まず元の入力、AIの出力、人が確認した内容をそろえて再審査します。入力の誤りが確認できれば該当データを訂正し、判断基準に問題がある可能性があれば、同じ基準を使った結果のうち影響を受け得る範囲を特定して点検します。申し立てを受ける窓口と再審査の担当者を、利用を始める前に決めておくことをおすすめします。
まとめ
責任あるAIの実装では、公平性の基準を選び、偏りが生じた場所を調べ、AIと人間の判断を分けて運用します。精度だけで導入を決めず、影響を受ける人に説明できるか、問題が出たときに前の段階へ戻れるかを確認してください。
まずは、現在使っているAIの用途を洗い出すところから始めましょう。
- AIを使う業務、入力データ、結果の影響を受ける人を書き出します。
- 影響の大きい用途について、偏りの評価方法と人が確認する位置を決めます。
- 試行で見つかった誤りと修正理由を記録し、利用範囲を広げるか判断します。
このテーマの全記事はAIテックトレンドガイドでご覧いただけます。
CRMを活用した業務効率化やAIとの連携に関するご相談は、StartLinkまでお気軽にお問い合わせください。
あわせて読みたい