ヤクルト山田哲人、途中交代や欠場が増え始める