1、你家人与受伤工人之间形成劳务关系。根据《侵权责任法》第三十五条规定，个人之间形成劳务关系，提供劳务一方因劳务造成他人损害的，由接受劳务一方承担侵权责任，提供劳务一方因劳务自己受到损害的，根据双方各自的过错承担相应的责任。
因此，本案中，应根据双方的过错分担责任。
2、《最高人民法院关于审理人身损害赔偿案件适用法律若干问题的解释》第十一条第二款规定“雇员在从事雇佣活动中因安全生产事故遭受人身损害，发包人、分包人知道或者应当知道接受发包或者分包业务的雇主没有相应资质或者安全生产条件的，应当与雇主承担连带赔偿责任。
综上，你家人要承担过错赔偿责任，建房的户主要承担连带责任。