AI関連の用語集

欠損値とは?-AI関連の用語集【クラベルAI】-

欠損値とは?AI関連の用語集【クラベルAI】

欠損値(Missing Value)

128159?1114107?136計算が狂うデータの言葉
アイちゃんのイラスト表のところどころに、空いたマス
  1. 数字が並んだ表があります。
  2. 値が入っていないマスがあります。
  3. 空欄のままだと計算が狂います。

欠損値(Missing Value)とは、データの表の中で、本来入るはずの値が入っていない空欄のことです。アンケートの未回答、機械の故障による記録の抜け、入力漏れなどが原因です。そのまま分析すると、計算が止まったり、結果が偏ったりします。削除するか、何らかの値で補うかを、原因を考えて決めます。

欠損値(Missing Value)関連用語

欠損値(Missing Value)に関連する単語は以下の通りです。

欠損値(Missing Value)で知っておくと得する有益情報

欠損値は、扱い方で分析の結果が変わります。覚えておきたい3つの点です。

  • 原因を先に考える偶然の抜けか、特定の人だけ答えなかったのかで対処が変わります。
  • 安易に0で埋めない0は「ゼロという値」の意味になり、結果を歪めます。
  • やり方は記録する補った方法を残さないと、後で結果を説明できなくなります。

主な対処法と特徴

対処法内容注意
行を削除空欄のある行を外す件数が減る
平均値で補う平均を入れるばらつきが小さくなる
中央値で補う真ん中の値を入れる極端な値に強い
空欄を特徴に空欄かどうかを列にする原因に意味があるとき

欠損率を計算する

全体の件数と空欄の件数から、欠損の割合を確かめます。

欠損率0%
削除後に残る割合0%

数値は仮の例です。何%から問題かは、データの目的や性質で変わります。

空欄の原因を考えてから、削除か補完かを決めましょう。

欠損値(Missing Value)やさしい解説

いたずらなくまのイラスト
空欄があるなら、全部消しちゃえばいいんじゃない?
アイちゃんのイラスト
アンケートで答えなかった人を全部外すと、正直に答えたい人だけが残るかもしれません。偏った結果になる恐れがあります。
アイちゃんのイラスト
消す前に、なぜ空欄になったのかを考えるのがコツです。

仕事に置き換えると、顧客名簿の「年齢」欄が3割空欄の場面です。空欄の人を全員外すと、年齢を教えたくない層が分析から消えてしまいます。補う方法を決めるか、「年齢不明」という区分を設けるなど、状況に合わせた扱いを検討しましょう。

欠損値(Missing Value)についてのみんなの疑問

質問する、いたずらなくまのイラスト

欠損値は必ず埋める必要がありますか?

答えるアイちゃんのイラスト

いいえ、手法によっては空欄のまま扱えます。決定木系の手法には、空欄をそのまま扱えるものもあります。使う手法と目的で、方針を決めましょう。

質問する、いたずらなくまのイラスト

0で埋めてはいけないのはなぜですか?

答えるアイちゃんのイラスト

0は「値がゼロ」という意味になってしまうからです。たとえば購入額の空欄を0にすると、買っていない人として扱われます。空欄の意味と実際の値は区別します。

質問する、いたずらなくまのイラスト

生成AIに欠損値を補ってもらえますか?

答えるアイちゃんのイラスト

案は出せますが、そのまま使うのは避けましょう。もっともらしい値を作ってしまうことがあります。補った値と元の値を区別して残し、人が確認しましょう。

AI関連の用語集【まとめ】

AI関連の用語集が気になる方のために、用語集一覧を作成しました。AIに関する学びを深めたいとお考えの方は、ぜひご覧ください。

アイちゃんのイラストAI関連の用語集(全用語)気になった言葉は、ここからまとめて探せます。用語集を開く →

この記事は役に立ちましたか?

分からない言葉が出たとき、すぐ開けます。

  • この記事を書いた人
  • 最新記事

クラベルAI運営事務局

AI活用の第一相談なら「クラベルAI」 このコンテンツはクラベルAI運営事務局が作成しております。 事務局メンバーには、第1回生成AIパスポートの資格保有者も在籍。 AI活用における、誰に・何を・どう聞けばいいの?というところからAIを使った大規模開発の相談まで、「クラベルAI」なら何度でも無料でご相談いただけます。ご相談内容に合わせて最適なパートナーとのマッチングサービスも提供。提携パートナーも随時募集中です。(個人・法人どなた様もご応募可能いただけます。) AI活用の第一相談所を目指し、日々有益な情報発信に努めております。 ご意見・ご感想等ございましたらお気軽にご連絡ください。運営会社は株式会社フィオリエラ(https://fioriera.co.jp/)です。

-AI関連の用語集
-