您好！根据《中华人民共和国民法典》第77条的规定，当事人双方应当按照约定全面履行自己的义务。如果您已经与银行签订了还款协议，并且按照协议按时足额偿还了部分贷款，那么法院有权从您账户中扣除剩余未偿还的部分，但是必须保证不会对您的其他合法权益造成侵害。如果存在争议，建议您及时联系法律顾问进行详细咨询和协商解决。