AI関連の用語集

Q学習とは?-AI関連の用語集【クラベルAI】-

Q学習とは?AI関連の用語集【クラベルAI】

Q学習(Q-learning)

点数の表AIの手法
アイちゃんのイラスト歩いた場所に、点数を書き込む
  1. ロボットが試しに歩きます。
  2. うまくいった道の点数が上がります。
  3. 点数の表を見て進めるようになります。

Q学習(Q-learning)とは、状況ごとの行動の良さ(Q値)を、試行錯誤しながら更新していく強化学習の手法のことです。AIは行動して、得られたごほうび(報酬)をもとに、その行動の点数を書き換えます。何度もくり返すうちに、各状況でどう動くのが良いかが表に溜まっていきます。強化学習の入門としてよく紹介される、基本の手法です。

Q学習(Q-learning)関連用語

Q学習(Q-learning)に関連する単語は以下の通りです。

Q学習(Q-learning)で知っておくと得する有益情報

Q学習は、強化学習の考え方をつかむのに最適です。仕組みの要点をまとめました。

  • 表で点数を持つ状況と行動の組み合わせごとに、点数(Q値)を表で記録します。
  • 試すか、活かすかときどきランダムに動いて新しい手を試し、知っている良い手と使い分けます。
  • 表の大きさに限界がある状況が膨大だと表が作れません。その場合はDQNなど別の方法を使います。

用語の意味

用語意味
状態今の状況(例:迷路のどこにいるか)
行動とれる選択(例:上下左右)
報酬行動の結果もらえる点数
Q値その状況での行動の良さ

Q値の更新を計算する

1回の行動のあとに、Q値がどう書き換わるかを計算します。

更新後のQ値0

将来の報酬を割り引く係数は、仮に0.9としています。

試行錯誤を重ねて、状況ごとの最良の行動を覚えさせる手法です。

Q学習(Q-learning)やさしい解説

いたずらなくまのイラスト
AIが自分で試して、うまくなるの?
アイちゃんのイラスト
そうです。ゲームの攻略に似ています。やってみて得点が増えたら、その動きを覚えていきます。
アイちゃんのイラスト
覚えたことは「攻略メモ」の表にまとめ、次の挑戦で使います。

倉庫内のロボットが荷物を運ぶ経路を学ぶ場面が、この手法の例です。最初はぶつかったり遠回りしたりしますが、試行を重ねると良い経路を覚えます。実際の現場では、まずシミュレーションで学ばせ、安全に試すのが一般的です。

Q学習(Q-learning)についてのみんなの疑問

質問する、いたずらなくまのイラスト

Q学習と、ChatGPTの学習は同じですか?

答えるアイちゃんのイラスト

別の学習です。ただし、強化学習は一部で使われています。ChatGPTのような大規模言語モデルは、主に文章から学びます。人の評価をごほうびにする強化学習で、調整される工程もあります。

質問する、いたずらなくまのイラスト

Q学習は、実際の仕事でも使われていますか?

答えるアイちゃんのイラスト

教材として有名ですが、実務ではその発展形が主流です。状況が複雑な実務では、ディープラーニングと組み合わせたDQNなどが使われます。基本の考え方はQ学習と共通です。

質問する、いたずらなくまのイラスト

「Q」って何の頭文字ですか?

答えるアイちゃんのイラスト

Quality(質)の頭文字とされます。行動の質、つまり良さを表す値だからです。細かい由来は資料によって説明が異なります。

AI関連の用語集【まとめ】

AI関連の用語集が気になる方のために、用語集一覧を作成しました。AIに関する学びを深めたいとお考えの方は、ぜひご覧ください。

アイちゃんのイラストAI関連の用語集(全用語)気になった言葉は、ここからまとめて探せます。用語集を開く →

この記事は役に立ちましたか?

分からない言葉が出たとき、すぐ開けます。

  • この記事を書いた人
  • 最新記事

クラベルAI運営事務局

AI活用の第一相談なら「クラベルAI」 このコンテンツはクラベルAI運営事務局が作成しております。 事務局メンバーには、第1回生成AIパスポートの資格保有者も在籍。 AI活用における、誰に・何を・どう聞けばいいの?というところからAIを使った大規模開発の相談まで、「クラベルAI」なら何度でも無料でご相談いただけます。ご相談内容に合わせて最適なパートナーとのマッチングサービスも提供。提携パートナーも随時募集中です。(個人・法人どなた様もご応募可能いただけます。) AI活用の第一相談所を目指し、日々有益な情報発信に努めております。 ご意見・ご感想等ございましたらお気軽にご連絡ください。運営会社は株式会社フィオリエラ(https://fioriera.co.jp/)です。

-AI関連の用語集
-