因赌博产生的借贷关系不受法律保护。如果你弟弟回来，又不能偿还贷款，可以要求采取报警方式解决，举报共同参与的赌博者，不过这部分赌资很可能会被国家没收，并处以罚款。
建议你弟弟先向参与赌博者索取赌资，然后偿还贷款，如果不成，再报警也可以。