卖二手房在中介公司与买方签了合同，约定买方解押银行贷款。后来买方不能解押，罚定金还是赔偿违约金？

中介公司和买方约定为卖方解押剩余贷款（赎楼）。协议约定需要买方的首付款，不够的部分由买方做金融产品（第三方平台借款）来解押，利息也是买方出。后来中介公司告知我卖方，不够的部分需要我卖方签借款协议，以卖方名义签字，我不同意，合同签订前是约定乙方负责解押。买方后来不愿借剩余部分，无法解押。无法继续交易，解除的话，算买方违约吗？我除了不退定金外，能要求赔偿违约金吗？