未离婚可以约定孩子归属问题吗？

不能生效。

那如果害怕男方提出离婚后争夺小孩抚养权的话可以做什么措施呢？

孩子抚养权归属哪一方，主要取决于哪一方能给孩子更好的生活成长环境。