日ハム斎藤佑樹、二軍でも浮いた存在になっていた