強化学習(第2版)

書籍

オンデマンド版

大活字版

書籍

雑誌

電子版

読み上げ可能電子版

オーディオブック

原案：R. Sutton

原案：A. Barto

他監：奥村エルネスト純

出版社：森北出版

※二次利用等に関するお問い合わせは
出版社トップページへ

同一作品の他版

アクセシブルブック

内容紹介

不朽の名著、待望の改訂版！

強化学習発展の立役者自らが書き下ろした書。「強化学習の考え方とアルゴリズムを明確に簡潔に説明する」という第1版の特長はそのままに、第2版では、発展的手法や心理学・神経科学との関係の紹介が大幅に加筆されています。
第I部では、テーブル形式の範囲でできるだけ多くの強化学習を扱い、核となる考え方を単純な設定で進めます。第II部では、そうした考え方を関数近似に拡張します。第III部では、心理学・神経科学との関係、AlphaGoなどのケーススタディ、将来展望について述べています。
ますます重要性を増す強化学習について、基礎から応用までを学べる一冊です。

［原著］Reinforcement Learning, Second Edition: An Introduction (The MIT Press, 2018)

＊＊＊

「第1版は、強化学習の学習者には必読の教科書となっています。刊行から20年の時間が経ち、AlphaGoなどの新しい技術も出てきました。こうした新しい話題をカバーしながら、基礎からしっかりと説明がされているのが、この改訂版です。……強化学習の分野もまだまだこれから大きく発展していくと考えられますが、本書は、現時点で、この分野を学ぶための最もわかりやすく整理された教科書だと思います。」
――東京大学教授・松尾豊（監訳者序文より）

第1章　序

第I部　テーブル形式の解法
第2章　多腕バンディット問題
第3章　有限マルコフ決定過程
第4章　動的計画法
第5章　モンテカルロ法
第6章　TD学習
第7章　nステップ・ブートストラップ法
第8章　テーブル形式手法におけるプランニングと学習

第II部　近似による解法
第9章　近似を用いた方策オン型予測
第10章　関数近似を用いた方策オン型制御
第11章　近似を用いた方策オフ型手法
第12章　適格度トレース
第13章　方策勾配法

第III部　さらに深く
第14章　心理学
第15章　神経科学
第16章　応用と事例紹介
第17章　強化学習のこれから