您好 我与过去朋友的纠纷 三年前我未婚，结识一已有家室的男子，并愉快地相处了两年，有次开玩笑时，我给他打了张五万块的借条，事后我并没有拿到这钱，也没在意这一张纸的事情。
今年我结婚了，他居然打电话来问我要五万块钱。
说，“你别忘记了你还有张借条在我这里”。

我该怎么办？请教律师。感激不尽！