可以拒绝并主张双倍工资

你好：你可要求该临时部门支付你双倍工资；并要求对方与你签订无固定期限劳动合同。对方的行为违反了劳动合同法及劳动法的法律规定，双方协商不成，可以到劳动监察部门进行投诉或反映。