我和前夫因为他骗我在银行贷款去还赌债导致离婚，离婚时协议书上写明女儿抚养费用一人一半，抚养也是一人一半，成年后，她想跟着谁就跟着谁，离婚协议书我们还做了一个当时的还款计划给我，每月给我存还银行的钱，可是现在女儿有点叛逆，就想跟我在一起，他却处处逼着女儿回家，每周回去，女儿都是一个人在家，没有人管她，可是前夫就是要让她回家，试问我能怎么办