尊敬的客户， 根据您的描述，如果您和对方签订的是买卖合同，并且已经支付了一定数额的定金作为购房意向表示，那么按照相关法律规定，您有权要求对方在约定时间内支付剩余款项。在这个案例中，如果对方仅支付了17万元首付，而合同规定应支付96万元，这显然不符合双方约定。 因此，在这种情况下，您可以考虑是否继续履行合同或寻求法律途径解决纠纷。如果决定继续履行合同，建议您向银行申请商业贷款，以确保能够支付剩余的款项。同时，您也可以与对方协商，看是否有其他解决方案，如分期付款等方式来缓解资金压力。 对于退款的问题，如果合同中有明确的退款条款，您可以按照约定进行处理；如果没有，则可以根据实际情况自行决定是否退还定金或者赔偿一定金额给对方。请注意，无论选择哪种方式，都必须遵循相关的法律法规和合同约定。 最后，提醒您在处理任何经济事务时，务必谨慎行事，以免造成不必要的损失。如果有任何疑问，欢迎随时咨询专业人士。祝您生活愉快！ 此致 敬礼！