可以起诉要求女方履行协议，支付4万元。

到法院起诉要求对方履行义务

与其协商，协商不成，可以起诉维权。

男方可以直接起诉女方

协议具有法律效力，可以起诉要求女方履行义务。