农村建房

我家盖房子，门前伸出两颗罗马柱，邻居不让往外伸出罗马柱阳台，这合理吗？邻居家找了上面的人到这看说:如果多伸出来，盖的话就来推了，如果我盖了，上面来推了，我应该咋办，