我于2016年12月离婚，当时与前妻达成一项口头协议：为给孩子营造一个家的感觉 我于2016年12月离婚，当时与前妻达成一项口头协议：为给孩子营造一个家的感觉，我仍旧住在家里（前妻每月归还贷款，有居住权，女儿有所有权）。这套房子属于女儿财产，现在未满18周岁，当时就有约定：无论是我还是前妻，如果找到新的感情，都不能住进这个房子。现在前妻已经找到新感情，让我离开，请问她有权利让我离开吗？我是否拥有继续居住的权利？