脱离父女关系

因为我爸爸做事很过分，也不工作，跟我妈没离婚就在外面乱搞，因此两个人离婚了，离婚后时不时就跟我要钱，如果我不给钱还威胁我，说去单位领导面前举报我，还要告我，给我录音，说我不养他，他才五十出头啊，即使退休也没到年龄呀，我自己也有两个学龄前儿童要抚养，况且我从来没说不抚养，只是我休产假刚上班真没那么多钱给他，我真的很想脱离父女关系，我看了百度法律不允许，那么不允许的话我怎么来保护自己的权益呢？我不可能我家里两个孩子不抚养来赡养他吧？或者有没有明文规定他多少年龄以后才能被赡养？每个月或每年我支付多少钱给他？赡养费怎么算？急