城镇居民购买农村房子,法院判合同无效后 我是城镇居民周某，原自有房产，2000年因日久失修无重建能力，经中介介绍李某以一村民林某农村宅基地房屋置换。但无签订合同协议。三方各自办理买卖合同，已过户。户口现已迁入该农房地址。现2014年原农村户主林某以无效合同为由要求我退回房屋。（估计是拆迁利益驱使）而我该如何处理？