房产合同违约10.1日签定的房屋买卖…

房产合同违约10.1日签定的房屋买卖合同,双方在合同里约定10.3日交首付给卖方(本人),但在10.3日当天只付了一部分首付款,但合同范本里有在房产税费当日交首付,这两条产生冲突,现在我房屋不想出售给他了,请问这样的情况我要支付违金吗?