自然资源与规划局在作出行政处罚之前应尽到充分调查义务，也仅仅是调查是否属于违建，违建建造人是谁，其对于是否涉及到他人利益、是否可能引起纠纷在所不论。但因政府各部门职责不同可以被理解，不过确实也拖延了其他权益人主张权利的时间。