建房手续办齐邻居有权干涉我吗

我的建房手续规划建设部门都已批准发证，邻居有权干涉我按规划施工吗？我是把旧房屋拆了后，在原地建楼房，南边建局部4层16米高，南北10.5米长，北边建2层，南北13.8米长，连成一片长24米。我从北边进出，是南屋。我的邻居在我西边，是西屋，距离我的新楼平行8米5多，南边是平房南北长20多米，北边是2层楼，南北长13米多。邻居提出我在南边建4层影响他采光，就干涉我，多次阻碍我，还到规划局告壮，无理取闹，威胁领导要上访，造成我停工多次，至今无法施工。我在城市住宅规范上看到关于采光的规定只是南北夹角30度以内的房屋，也就是正北屋采光有明确规定，与西边平行的西屋只需留不低于6米的通风通道，我家和西边邻居的距离有8.5米多，邻居提出的要求合理吗？我的4层楼能建吗？