近年，機械学習を用いた金融取引の分野に関する研究が精力的に行われている．中でも，深層強化学習を用いて金融取引戦略を構築する研究が精力的に行われている．これらは，金融商品の売買数の最適化や複利計算を考慮したもの，入力にチャート画像を用いるなど様々なアプローチを用いている．しかし，これらの研究ではエージェントの行動により発生する機会損失を考慮できていない．そこで本研究では，各行動に対する機会損失を深層強化学習での報酬に組み込み，株式投資において利益を上げるための最適な買いや売りのタイミングを学習するモデルを構築し，その有効性を示す．