根据具体情况

对于抚养权协商不好可以起诉处理。

可以要回来

在已有离婚协议约定的情况下，除非有特殊情况或是男方同意变更抚养权，否则法院通常不支持变更抚养权。