房屋买卖合同违约

您好！我是南京本地人，今年56岁，单身一人，12年因拆迁拿了一单室套安置房，当时没有房产证，由于身体不好等钱用，于7月份在房产中介和别人签定了买卖合同，把我唯一的住房卖了，现因身体不好又没有安定的住所想收回原来的房子，当时合同规定:如果我要收回房子付给对方二十万，对方不要付给我二十万，但合同上只写如一方违约付给对方二十方。现我想收回房子，我违约愿付给对方二十万。请问我能收回现在的房子吗？