收集证据证明男方不适合抚养孩子，然后到法院起诉。

不是离婚协议有约定的吗？为什么会是公证？两位已办理离婚登记了吗？抚养权经协商是可以变更的。

除非有证据证明男方抚养不利于孩子成长。
建议来电沟通或预约当面详细咨询。