我是男方，协议离婚时抚养权归我，但是没有写明探视地点和时间，女方每次来时都不提前通知，我父母在家带孩

我是男方，协议离婚时抚养权归我，但是没有写明探视地点和时间，女方每次来时都不提前通知，我父母在家带孩子，女方经常在我上班时间借探视来跟我父母吵架甚至毁坏我家东西，我为了避免她与我父母吵架干扰生活，要求女方等我下班了再探视，可女方都不按我的要求来，在我回家之前我父母可以暂时不开门等我回来再开门，可以吗？或者是她这样闹事我可以终止探视权吗？