1、如果因为你的退房行为给对方造成了损失，则无论是否约定违约责任，你都需要赔偿对方的经济损失。2、如果你的退房行为没给对方造成损失，且合同中没有约定违约责任的话，你不需要承担责任。3、如果你的退房行为没给对方造成损失，但是合同中有违约责任的约定，则需要按照约定来承担违约责任(你如果认为违约责任过重，可以申请法院调低)。