在这种情况下，首先需要查看离婚协议的具体条款，确认协议中关于女儿抚养权的约定是否明确，以及是否有其他附加条件。如果协议中明确约定女儿的抚养权归你，并且没有违反法律规定或女儿利益的情形，那么对方不让你带走女儿是不合理的。 你可以首先尝试与对方进行沟通，解释协议的内容和法律效力，争取通过协商解决问题。如果协商无效，你可以向法院申请执行离婚协议。根据《中华人民共和国民事诉讼法》的相关规定，如果一方不履行离婚协议，另一方可以向法院申请强制执行。在申请执行时，需要提供离婚协议书、身份证明、法院判决书或调解书等相关证据材料。 如果对方有暴力行为或其他威胁到女儿安全的行为，你还可以申请法院发出人身保护令，以保障你和女儿的安全。同时，如果女儿已经达到一定年龄，法院在处理抚养权问题时，也会考虑女儿的意愿。 总之，如果离婚协议中明确了女儿的抚养权归你，而对方不履行协议，你可以通过法律途径来维护自己和女儿的合法权益。