根据您提供的信息，如果合同中明确约定的是非4S店原因导致的退款，且该条款是有效的，那么您有权要求退还剩余的款项。然而，您提到的“一定不能退”和“按合同扣除百分之五十”的说法并不准确。 在大多数情况下，如果双方同意并书面确认了合同中的退款条款，而且没有违反法律或道德标准，则应被视为有效。因此，在这种情况下，您可以按照合同的规定来处理退款事宜。请注意，具体的处理方式可能因地区法规和个人情况而异，建议您与相关的法律顾问进行详细咨询以获取最准确的信息。