你好，三年前，我儿子买婚房，他爷爷奶奶给我儿20万元，现在，我婆婆得了痴呆被我公公抛弃 你好，三年前，我儿子买婚房，他爷爷奶奶给我儿20万元，现在，我婆婆得了痴呆被我公公抛弃，现住在我家，我公公和保姆相好住在我婆婆名下的房子里，最近，我公公竟然想要回这20万元，这合法吗？买房的20万亲戚朋友多听说过的，当时也是他们自愿拿出来的，现在我公公已经83岁了，请问律师，我们该怎么办？