离婚前，孩子六个月女方丢下孩子搬出去住，孩子一直跟随我父母一起住，孩子两岁了，而且签离婚协议的时候女

离婚前，孩子六个月女方丢下孩子搬出去住，孩子一直跟随我父母一起住，孩子两岁了，而且签离婚协议的时候女方也说不要孩子，现女方已经再婚，男方也有一个小孩。现在女方要求变更抚养权，但是如果孩子归女方的话，他们两个都是上班族，孩子肯定是托别人照顾。我是否可以拒绝变更？