遗弃罪，是指对于年老、年幼、患病或者其他没有独立生活能力的人，负有扶养义务而拒绝扶养，情节恶劣的行为。这个应该是算遗弃，因为婴儿没有独立生活能力，而亲人还以放弃他不管来做要挟，情节算是很恶劣了，我建议你们报警处理。