事业单位内部调整岗位怎么拒绝啊

坐标某县政府底下一个局
刚上班3个月 今天单位大领导突然说让我去办公室工作(其实就是干各种杂活)
原本的岗位是执法类的不是很忙 而且匹配我的专业
队长意思也是不愿意我走 而且这事根本没通知我们队长就让我去办公室了...
老哥们这种事怎么拒绝啊...一把手可能看我刚来上班我委婉拒绝了但是也没有同意...烦死