法律分析：可以，但需要支付违约金或者承担损害赔偿责任。首付并不是定金，而是实际履行主要义务的行为，对方当事人有理由因此认为合同已经订立。此时，要求退首付即明确表示不履行合同主要债务，对方当事人可解除合同并要求承担违约责任。对方当事人不认为合同已经订立的，也可以要求承担损害赔偿责任，即要求对方承担缔约过失责任。总的来说，首付可以退，但需要承担一定的责任。
法律依据：
一、《中华人民共和国民法典》第四百九十条 当事人采用合同书形式订立合同的，自当事人均签名、盖章或者按指印时合同成立。在签名、盖章或者按指印之前，当事人一方已经履行主要义务，对方接受时，该合同成立。
法律、行政法规规定或者当事人约定合同应当采用书面形式订立，当事人未采用书面形式但是一方已经履行主要义务，对方接受时，该合同成立。
二、《中华人民共和国民法典》第五百六十二条 当事人协商一致，可以解除合同。
当事人可以约定一方解除合同的事由。解除合同的事由发生时，解除权人可以解除合同。
三、《中华人民共和国民法典》第五百六十六条 合同解除后，尚未履行的，终止履行；已经履行的，根据履行情况和合同性质，当事人可以请求恢复原状或者采取其他补救措施，并有权请求赔偿损失。
合同因违约解除的，解除权人可以请求违约方承担违约责任，但是当事人另有约定的除外。