我帮人担保借了两个一个是两万一个是三万，两万的就我一个担保人，三万的还有另外一个担保人，现在借款的还不了钱，债主找我，我家庭条件很差，全部还完还不了，就协商还一半人家打个收条就把我的担保人摘出来，现在家里担心还完一半剩下的还继续找我要，这是在骗我，请问我该怎么办？