有购买一套商铺，由于银行贷款方面出现一些问题，现无法银行贷款，不能购买该商铺，所以只能做退房处理，可是现出售方提出需要支付余款的20%作为违约金（合同内有指明），本身购此房时，未知银行贷款下不来，所以这个费用全部由我来承担实在是接受不了。想请问一下是否有更加合理的解决的方案？