根据《民法典》的规定，如果购房者在签订商品房认购书后已经支付了一定的首付款，通常情况下是不可以要求退款的。这主要是因为购房协议中的“首付”一般是指购房者实际支付的房款，而并非指其签署的书面承诺或意向性文件。 然而，具体是否可以不交违约金取决于双方在购房协议中是否有明确约定。如果没有特别规定，那么购房者需要按照约定履行自己的义务，包括按时缴纳剩余款项和遵守其他相关条款。因此，在这种情况下，建议您与开发商进行沟通，了解具体的还款计划和违约责任。 如果您对购房协议的具体条款有疑问，或者发现存在任何潜在的风险，强烈建议聘请专业的房地产律师进行咨询和指导，以确保您的权益得到充分保护。