然后我说我要去银行贷款,我想解除合同,但他要我赔那个违约金给他?

你好，我刚遇到一个问题被欺骗了，就是一个认识的人说介绍给我有间房屋卖的，后来那个卖家来找到我说房屋卖18万，后来我们经过面对面谈判之后，就谈成15万就可以成交，然后我说我要去银行贷款，过了几天他要求签一份合同，就说明合同内容33万，然后就跟我说去银行那里贷款比较容易审批，后来糊里糊涂就相信他签了这一份合同，现在银行已经批我那贷款。这两天他总催我把剩下那个钱付给他，我就跟他说准备让银行贷那个款已经全部开给你了，为什么还要我付给你？他就说我就按那个合同33万来卖给你的，你还你还欠我18万，我说你一开始不是说好15万的吗？他说不行，按合同来，现在我就很被动，我想解除合同，但他要我赔那个违约金给他。