AI関連の用語集

データの正規化(Data Normalization)とは?-AI関連の用語集【クラベルAI】-

データの正規化(Data Normalization)とは?-AI関連の用語集【クラベルAI】-

データの正規化(Data Normalization)

¥¥¥¥¥0.80.6データの言葉
アイちゃんのイラスト桁がちがう数字を、同じ土俵にそろえる
  1. 桁が違う数字を混ぜると偏ります。
  2. 0から1の範囲にそろえます。
  3. AIが公平に扱えます。

データの正規化(Data Normalization)とは、単位や大きさがバラバラな数値を、同じ範囲にそろえて扱いやすくする前処理のことです。もっとも多い方法は、一番小さい値を0、一番大きい値を1として、その間に収める変換です。年収(数百万)と年齢(数十)のように桁が違うデータを混ぜても、AIが大きい数字だけを重視しないようにできます。

データの正規化(Data Normalization)関連用語

データの正規化(Data Normalization)に関連する単語は以下の通りです。

データの正規化(Data Normalization)で知っておくと得する有益情報

正規化は、AIに数字を渡す前の基本の準備です。知っておきたい3つの点です。

  • 桁の違いをなくす大きな数字ばかりが影響する偏りを防ぎます。
  • 外れ値に弱い極端な値が1つあると、全体の変換が引っ張られます。
  • 評価用にも同じ変換学習用で決めた基準を、評価用や本番にもそのまま使います。

正規化と標準化の違い

項目正規化標準化
変換後の範囲0から1に収める平均0、ばらつき1にする
基準にするもの最小値と最大値平均とばらつき
外れ値の影響受けやすい比較的受けにくい
向く場面範囲が決まった数値分布が山型のデータ

0から1への正規化を試す

値と全体の最小・最大を入れると、変換後の値が分かります。

正規化後の値0
パーセント表記0%

値は仮の例です。実際は学習用データの最小値と最大値を使います。

数字の桁がそろっていないときに、正規化を検討しましょう。

データの正規化(Data Normalization)やさしい解説

いたずらなくまのイラスト
数字をそろえるって、なんでそんなに大事なの?
アイちゃんのイラスト
身長をセンチ、体重をキログラムで比べるようなものです。数字の大きさが違うだけで、体重がどうでもよく見えます。
アイちゃんのイラスト
同じ土俵にそろえて初めて、どちらも公平に判断できます。

仕事に置き換えると、顧客の「年間購入額」と「来店回数」を使って優良客を探す場面です。購入額は数十万、来店回数は数十と桁が違うため、そのままだと購入額ばかりが重視されます。両方を0から1にそろえると、来店回数の影響もきちんと反映できます。

データの正規化(Data Normalization)についてのみんなの疑問

質問する、いたずらなくまのイラスト

正規化と標準化はどう使い分けますか?

答えるアイちゃんのイラスト

範囲を決めたいなら正規化、ばらつきをそろえたいなら標準化です。極端な値が多いデータは標準化が向くことが多いです。迷ったら両方試して、評価の結果で選びましょう。

質問する、いたずらなくまのイラスト

どんなAIでも正規化は必要ですか?

答えるアイちゃんのイラスト

必要なものと、不要なものがあります。距離を使う手法やニューラルネットワークでは重要です。決定木のように影響を受けにくい手法もあります。

質問する、いたずらなくまのイラスト

生成AIを使うだけなら気にしなくていいですか?

答えるアイちゃんのイラスト

はい、ChatGPTなどを使うだけなら意識しなくて済みます。自社で予測モデルを作るときや、データ分析を依頼するときに出てくる用語です。意味を知っておくと打ち合わせが進みます。

AI関連の用語集【まとめ】

AI関連の用語集が気になる方のために、用語集一覧を作成しました。AIに関する学びを深めたいとお考えの方は、ぜひご覧ください。

アイちゃんのイラストAI関連の用語集(全用語)気になった言葉は、ここからまとめて探せます。用語集を開く →

この記事は役に立ちましたか?

分からない言葉が出たとき、すぐ開けます。

  • この記事を書いた人
  • 最新記事

クラベルAI運営事務局

AI活用の第一相談なら「クラベルAI」 このコンテンツはクラベルAI運営事務局が作成しております。 事務局メンバーには、第1回生成AIパスポートの資格保有者も在籍。 AI活用における、誰に・何を・どう聞けばいいの?というところからAIを使った大規模開発の相談まで、「クラベルAI」なら何度でも無料でご相談いただけます。ご相談内容に合わせて最適なパートナーとのマッチングサービスも提供。提携パートナーも随時募集中です。(個人・法人どなた様もご応募可能いただけます。) AI活用の第一相談所を目指し、日々有益な情報発信に努めております。 ご意見・ご感想等ございましたらお気軽にご連絡ください。運営会社は株式会社フィオリエラ(https://fioriera.co.jp/)です。

-AI関連の用語集
-,