我三姨死掉了，是姑父坐牢了，他姑父临时把孩子嘱托给他的临时女朋友，但是孩子的姑姑发现他女朋友对孩子不好我们可以不顾他父亲的发现他女朋友对孩子不好，而且住在我姑父家的房子里 ，我姑父被抓死做错，她照顾孩子，但是现在我们想？过去照顾孩子，让她搬出去可以吗