我与乙方签定了建房合同，我建的房子面积大概有250平方米，我以每平方1000元的价格包给了乙方 我与乙方签定了建房合同，我建的房子面积大概有250平方米，我以每平方1000元的价格包给了乙方，是包工包料，可是乙方不按甲方的要求施工，我们签合同时我不知道门，窗，地砖墙砖的市场价而在合同上定了价位，可是定的价位的材料都质量很差，我要求乙方要换成好材料，可乙方提出来要我加材料费，我不加钱，而我已付给乙方17万元工程费，今天乙方要我付工程款5万元，我拒绝了，我要求剩下的工程款完工后一次性付清，结果乙方停工走人不干了，请问我该怎么办？是我的不对吗？