孩子实际跟随你生活，你可以不支付抚养费，但是建议你及时的与男方协商变更抚养权到你这边。

如果孩子不回去，应变更抚养权，只有这样你才不承担抚养费。

及时变更抚养权并要求对方支付抚养费，请致电咨询。