离婚

2016年4月结婚的，9月份有了孩子，孩子五个多月跟我提出离婚，一岁多也跟我提出离婚，那时候在部队，家的劝说下，孩子没有一个完整的家庭。考虑孩子问题没有同意，在这期间经常不给孩子的生活费，直到2019年12月他退伍又提出离婚，现在想解决一下，他不管不问孩子，孩子生病也不用掏钱，有两个月没有给孩子的生活费。孩子生下来一直跟我在娘家生活，两年半没有性生活，从不睡家里，现在他户口回浙江衢州了，我跟孩子的户口在南京，想办理离婚？孩子归属问题？