我弟弟的房子卖给了邻居，当时的协议是卖房子不卖宅基地（同时双方商定宅基地互换） 我弟弟的房子卖给了邻居，当时的协议是卖房子不卖宅基地（同时双方商定宅基地互换）。时隔十多年宅基地没有互换成功（对方的宅基地因被别人霸占了一米，所以没有互换成功）。今年我弟弟因病去世，后我去找对方谈及此事，起初对方配合处理，再后来变卦了，说已经给我弟弟说清了，有事跟我没关系。现在宅基证不知何故对方拿着呢（不过证件的名字还是我们的名字，我们手里只有我弟弟过去留的宅基证图片）。虽然说大队部处理但一直是再三推脱，一直都没有进展。请问律师我们该怎么办呢？