本稿では，バレーボール競技におけるラリー開始時刻とスパイク時刻を推定する手法について提案する．ラリーが開始される直前では，サービスをレシーブするチームの選手は相手サービスに備えて静止する．そこで画面上の変化が一定期間で小さく，動き出したサービス直後をラリー開始時刻を検出する．具体的には，画像処理を用いて映像上の変化量を監視する．また，ラリー中におけるスパイクの選手画像を切り出して学習させたモデルを構築して，スパイク動作を検出する．検出された時刻をスパイク時刻として推定する．本研究ではラリー開始とスパイク時刻について実験を行い，考察する．