探视权

和丈夫离婚后，孩子判给我，他有探视权，可是他脾气很暴躁，孩子很怕他，也不愿意和他出去，请问可以取消他的探视权吗？如果他的探视权取消了，抚养费会取消吗？谢谢！