高速強化学習回路の開発に用いる疑似白色雑音発生回路の原理検討

カテゴリ: 研究会(論文単位)

論文No: ECT25022

グループ名: 【C】電子・情報・システム部門 電子回路研究会

発行日: 2025/03/18

タイトル(英語): Examination of a Pseudo-white Noise Generator for Developing a Fast Reinforcement Learning Circuit

著者名: 渡辺 翔太(明治大学),森 光平(明治大学),和田 和千(明治大学),関根 かをり(明治大学),田野井 聡(情報通信研究機構),原 紳介(情報通信研究機構),笠松 章史(情報通信研究機構)

著者名(英語): Shota Watanabe(Meiji University),Kohei Mori(Meiji University),Kazuyuki Wada(Meiji University),Kawori Sekine(Meiji University),Satoru Tanoi(National Institute of Information and Communications Technology),Shinsuke Hara(National Institute of Information and Communications Technology),Akifumi Kasamatsu(National Institute of Information and Communications Technology)

キーワード: 疑似白色雑音|高速雑音発生回路|Ｍ系列発生回路|Ｒ－２Ｒラダー|pseudo-white noise|high-speed noise generator|M-sequence generator|R-2R ladder

要約(日本語): 強化学習の一つであるバンディット問題は，繰り返し選択を行いながら，毎回の選択の結果で得る報酬の総和を最大化するもので，その方策は過去の経験に基づくのみならず，明確に違いがない選択肢からはランダムな選択を行う。ここで必要なランダム信号はレーザーで発生させたカオス信号が利用可能であるが，高速であるがゆえに選択を行う電子回路にも高速性能が求められ，その開発が望まれる。その開発段階で常にレーザーカオスの発生装置や信号再生器から入力するとコストが高くなってしまうことから，その簡易的な代替装置として疑似白色雑音発生回

要約(英語): A policy for the bandit problem, which is well known in the reinforcement field, is based on the past experience and random selection and has been realized on electronic circuits. The laser chaotic signal is applicable for a random signal and requires very fast decision making circuits. When a designed high-speed analog integrated circuit is tested, it is not easy to set a laser generation equipment up. Thus, a pseudo-white noise generator and a filter can be substituted for the laser equipment of the chaotic signal. In this report the M-sequence generator implemented on a FPGA and an R-2R ladder digital-analog converter realized on a printed circuit board are connected and its output is examined as a white noise. This is the first step to achieve a high-speed pseudo-white noise generator.

本誌: 2025年3月21日電子回路研究会

本誌掲載ページ: 45-50 p

原稿種別: 日本語

PDFファイルサイズ: 2,295 Kバイト