我们在2017年为在校弟弟在四川成都买了一套商品房，在当时弟弟是没有资格买房子的，当时开发商只是口头上给我说先办理合同和交首付款，再等弟弟有资格的时候再办理相关手续，期间我们也积极配合开发商，结果这一等就等了两年的时间，直到昨天开发商突然通知我们要交一笔12万的违约金，不交违约金就退房和走法律程序，请问这种情况我们该怎么办，可以上房管局投诉开发商嘛，我们违约金能不交吗？