我们协议离婚，我赔她十万两个小孩都规我，但是有一个一直在女方那边，协议书写着两个孩子规男方，但女方父母想有这个小孩我能怎么办？我们想要回来但是女方父母不同意，女方父母她就说要我给她抚养费，我应该给这些抚养费她吗？