这个其实要看你是否得到住建部门的许可了，如果说你使用荒地来建造厂房，是得到相关部门许可的，那肯定是合法的，但其实在荒地上面建造厂房的话，是属于改变了土地的性质，想要拿到建造许可证也不是特别容易的。如果你没有拿到相关的许可证直接动工建造厂房的话，那其实别人可以举报你的。如果有人向当地的国土资源部门举报了，那你肯定是要拆除这些建筑物，并且要支付一部分的罚款。