协议给别人钱，感觉敲诈，可以要回来吗 按大队规划，自2000年起，我家房子要后移，可是后邻（他家原来在这住，后来村里给他庄基，盖新拆旧，他已经搬走，按规划庄基大队迎分配给我家，但是他剩下两颗树不肯刨走）有两棵树影响，经多次说和不肯刨除，还扬言要是强行给他刨树就让他家老太太来捣乱，21年来，始终忍受房屋潮湿，不能往外排水，现在我家房子快倒塌，有没处居住，只好再次找人说和，我家不得不给他4000元人民币，他才刨除归为己有，并立下协议，这算敲诈勒索吗？如果起诉我能要回钱来吗？请律师帮我出出主意，谢谢！