你好，我想请咨询下律师，我是今年七月份，怀孕六个月时因为老公赌博借高利贷输了九十几万，我不能接受，就在广西柳江明政局办理的离婚，当时协议书上写的，孩子出生后的监护人和抚养权都是由男方一个人承担，可孩子是十月二十三号出生的，出生后我找过他，他就发了好多要还钱的截图给我，还是外债累累，所以我想要回孩子的抚养权，应该需要怎么办理更改？是不是还必须要到男方所住地去办理呢？