近年、情報系のエンジニアに限らず非専門家でも強化学習を扱うことが増えつつある．データ駆動型深層強化学習では，コードを書かずに深層強化学習を利用することが可能であるため，非専門家でも利用することができる．しかし，シミュレーションでの活用が中心であるため，実環境でこれらを使用する体験ができる教材が必要である．本研究では、データ駆動型深層強化学習を利用した自律ロボットの制御を対象とした教材の開発を行う．ライントレースロボットを用いて手動制御により取得したデータを用い，ロボットが深層強化学習によってトレースすることにより，データ駆動型深層強化学習を実環境で利用する体験ができる教材の提案を行う．