我和工人没有劳动合同，安装期间没有按时完工，和工人也说了延误工期大家一起扣钱 我和工人没有劳动合同，安装期间没有按时完工，和工人也说了延误工期大家一起扣钱，最后扣了他们一人五百我自己也扣了三千多。可是他们要去告我怎么办。