被打伤在派出所调结签字不追究对方任何责任和法律责任还有要赔偿的金额，就赔偿2万元，然后对方不履行协议

被打伤在派出所调结签字不追究对方任何责任和法律责任还有要赔偿的金额，就赔偿2万元，然后对方不履行协议被行政处罚治安拘留了10天放出去了，后来我做了司法鉴定为轻伤二级，派出所也没说让我去法院起诉，我当时什么都不懂，就这样事情已经过了4年多了，打我的人连医药费都没赔偿，现在我该怎么办，还可以追究对方刑事责任和民事责任吗，过了诉讼时效了没