PFN、PyTorchユーザ向けに深層強化学習ライブラリ「PFRL」を公開

株式会社Preferred Networks（PFN）は、PyTorchユーザー向けの深層強化学習ライブラリ「PFRL（ピーエフアールエル）」を、2020年7月30日にオープンソースソフトウェア（OSS）として公開しました。

PFRLは、PFNが深層学習フレームワークをChainerからPyTorchへ移行してPyTorchコミュニティと連携を強化する一環で、ChainerRLの後継ライブラリとして公開されました。

PFNは2019年12月に深層学習フレームワーク「Chainer」のメジャーアップデートを終了すると発表し、研究開発基盤をFacebook社の「PyTorch」に順次移行しました。

【PFRLの特長】

最新の研究に基づく深層強化学習アルゴリズム・深層強化学習機能が実装。それらを比較したり、組み合わせたりして実験することが可能。
特に重要な9つのアルゴリズムについて、高品質かつ十分にベンチマークされた、研究開発のベースとなる再現実装スクリプトを提供
ChainerRLユーザーは既存のコードをほとんど書き換えることなくPyTorchに移行することが可能

また、PFNはディープラーニング分野の国際学会「Neural Information Processing Systems （NeurIPS）」で行われる強化学習コンペティション「MineRL Competition」の競技参加者向けに、PFRLによるベースラインを提供する予定です。また、Optunaを使用したハイパーパラメータ探索の実装例も提供します。

MineRL Competition：参加者が開発した強化学習システムにゲーム『Minecraft（マインクラフト）』をプレイさせて「ダイヤモンドを入手する」課題のクリアを競う大会。

ベースライン：競技参加者が独自の強化学習システムを構築するにあたり、与えられた環境やデータセットの動かし方およびアルゴリズムの参考となる手法をまとめたもの。

今後、同社はPFRLを用いることで社内の研究開発を加速させるだけでなく、強化学習のコミュニティにも広く貢献していくとしています。

おざけん

>>詳しくはこちら

「人間とAIが共存する社会をつくる」をビジョンに掲げ、AI分野で幅広く活動。書籍『生成AI導入の教科書』『AIエージェントの教科書』『40代・50代でもよくわかる　宇宙一やさしいAIの教科書』の刊行や、1500本以上のAI関連記事の執筆を通じて、AIの可能性と実践的活用法を発信し続けてきた。年間登壇は300回以上。

一般社団法人AICX協会を設立し、代表理事として、国内最大級のAIエージェントカンファレンス「AI Agent Day」の主催や、国内初のAIエージェント実装人材資格制度（AIエージェント・ストラテジスト／アーキテクト）の創設を牽引。一般社団法人生成AI活用普及協会常任協議員を務めるほか、経済産業省「AX時代のスキルに関するワーキンググループ」委員として国のAI政策にも参画。シンシアリー株式会社の取締役CCOとしてAI企業の経営にも関わる。日本HP、Lightblue、NTTデータグループ、THAなど複数社のアドバイザーも務める。

NewsPicksプロピッカー、Udemyベストセラー講師、クラウドワークスアンバサダーとして情報発信・人材育成にも注力。千葉県船橋市生成AIアドバイザーとして行政のDX推進にも携わる。

AI領域以外では、2022年にCinematoricoを創業しCOOに就任。PR・映像制作・フリーカメラマン・日本大学文理学部次世代社会研究センタープロボノなど、多彩な経験を基盤に活動を展開している。