没有规定怎样处罚，但是对方有权利起诉你主张权利，建议不要用这种方法，如果想要回孩子，可以起诉要求变更孩子的抚养权。

妨害民事行为法院可以处罚

建议不要这样做，对小孩会造成伤害；考虑提起变更抚养权诉讼。

会责令你交出小孩，对方可以申请禁止令。如果情节不严重，一般不会进行其他处罚。