过户前发现房子有瑕疵

通过中介准备买套二手房，在过户前发现厕所窗户被邻居堵死了，开不开，我是否可以以此理由（合同里约束房子无瑕疵）拒绝买此房，并且要求对方退还一万元定金