由于土地问题，我方与对方发生争执。对方与我方换用田地，由于我方法律意识浅薄，与对方换用了田地 由于土地问题，我方与对方发生争执。对方与我方换用田地，由于我方法律意识浅薄，与对方换用了田地。但对方非法在我方田地上建房，这才知道事情的严重性。我方要求换回土地，但对方不答应。我们该怎么办？