二手房户口问题

你好。我是去年买的二手房，今年三月交的房子，但是对方现在就是户口不牵出去。我们的合同中也有约定，交房时户口要牵出去的，要是违约，违约金是五万元。我现在该怎么办？