非正規で転職したら所属先の担当者から「現場の正社員様よりも早く帰るな」と注意された