别人屡次三番到家里来闹事怎么办 我爸于八年前突发脑溢血不幸身亡，和同村人吴某1995年5月结合共同生活，期间没有领结婚证，他在我们家生活，前一两年还不错，双方相互帮忙种地，之后因其吃喝嫖赌博不学好，田里的农活也不怎么做，我妈实在不能与其生活下去，于去年十一月份分手，（其实吴某这个人是人人皆知的赌棍，我妈忠厚老实，一直受他欺压），
之后他屡次三番来我家闹事，跟我们要钱，说在我们家七年帮我们干活要给补偿费，事实他还欠我们钱，就是没有凭证，他就无理取闹，耍无赖，弄得我们家鸡犬不宁，每次我们都打了110，民警说是家务事不好管，让我们通过法院调解，但是明摆着他是故意来闹事，他说不管，自己什么都不懂，就要钱，又没杀人放火，110又不会抓他，其实要钱只是他的借口，他不想我们过安稳日子，在他走之后，我们家田边两颗白果树被人锯掉，凉衣绳连杆子被人刨掉，报了警没有证据又没办法，前些日子我妈又找了一个人，他知道后又到我们家闹事，一来就打那个人，还威胁那个人不许在我们家，说见他一次打一次，他还打我妈妈，我拉他，他上来就是一拳，我们就动了手，110过来还是说不好参与，双方都动了手，把我们双方都批评了一顿，也劝吴某没有权利干涉我们，又没领证，和我妈妈好聚好散，劝他说法院都很难判定财产的问题，但是他的态度还是那样蛮横，还是上面那个理由，还当着民警的面威胁我们，民警说假如他在他们面前动手就立即抓他，可民警在场吴某并没动手，他们也奈何不了他，然后民警说带他去免费咨询一下，就把他带走了，但是他还会再来闹事的，要说钱他还要给我们，我们都不要了，他这个无赖根本协商不了，他还说君子报仇十年不晚，我们还有一个十个多月的宝宝，宝宝也吓哭了，我怕之后也会有很大的影响，我们都不知道该怎么办，报警只能解一时，就让他这样闹下去吗？难道他这样就没有法律制裁他吗？我们都要崩溃了，希望得到高人指点，感谢至极！